19亿对话数据集存疑?Profound 方法论遭第三方逐条核查
gaganghotra_ · x · 2026-09-16
AI 可见性追踪平台 Profound 宣称其 Index 基于 19 亿真实用户对话,但未公开方法论细节。作者此前向各大 prompt 追踪平台提出 31 个方法论问题(涵盖 AI 可见性到底测什么、prompt 代表性与加权、有效样本量、统计不确定性、个性化与对话上下文等),多数头部平台未回应。
于是作者开始自行核查:基于 Profound 自家公开材料(产品页、帮助文档、工程博客、新闻稿)建立单一来源记录,梳理其三款产品——Prompt Volumes(关键词级对话量估算)、Answer Engine Insights 与 Profound Index——各自测量什么,区分直接观测数据与模型估算,并标明公开记录中无法证实的方法论空白,而非靠推测补全。
「应用」频道最新
- 博主锐评扎克伯格的 Muse:设计糟糕但语调讨喜 — _AustinCalvert_ · 2026-09-16
- ChatGPT 桌面版自定义指令仅支持 Codex,聊天功能缺失引质疑 — allforone69 · 2026-09-16
- Appshots 扩大适用范围,不再局限于 Codex 应用 — gabrielchua · 2026-09-16
- FlyMy.AI 接入 Browser Use,用 MCP 三步构建云端浏览器 Agent — alfred_dent · 2026-09-16
- Muse 用例集扩至 257 条真实玩法,每条附可复现 prompt — armand_ruiz · 2026-09-16
- AI 助手 Muse 自动买短裤、抢购 iPhone、清理 2.5 万封邮件 — armand_ruiz · 2026-09-16