审计 186 条 LLM 抽取事实:零条逐字匹配,1/3 边指向错误实体
JeremyCMorgan · x · 2026-10-30
一篇深挖 LLM 知识图谱质量的文章:作者审计了自家 LLM 抽取的知识图谱,发现 186 条事实中没有一条与源文档逐字匹配,三分之一的边指向了错误的实体。结论是:抽取管线没有审计步骤,就该假设这些数字同样发生在你身上。
「编程与Agent」频道最新
- 英国司法部用 Pydantic 做 AI 输出可执行契约,服务法官与缓刑官 — samuelcolvin · 2026-10-30
- Vercel 推出「Agentic Infrastructure」：为编码 agent 生成式部署而建的发布栈 — evilrabbit_ · 2026-10-30
- Garry Tan 示范一条命令给 Claude Code 等智能体接入 GBrain 云端记忆 — garrytan · 2026-10-30
- Mollick 谈 Opus 5.5:新模型该少写 prompt,改设中途检查点 — eldonredwards · 2026-10-30
- HF Space 新玩法：复制 agents.md 让你的 Agent 免费调用 demo — victormustar · 2026-10-30
- Atelico 推出全本地游戏 AI 引擎:LLM、语音、NPC 行为均在端侧运行 — nathanbenaich · 2026-10-30