Integrity Bench：衡量模型过度自信程度的新基准
Acne_Discord · reddit · 2026-08-28
AI Explained 和 Pablo Romero 发布了新的评测基准 Integrity Bench，旨在量化 LLM 的过度自信（Overconfidence）行为。
该基准通过设计特定问题，测试模型在不确定或无信息时的表现，区分其是承认无知（I don't know）还是产生幻觉或给出错误的高置信度答案。这对于评估模型的安全性与可靠性至关重要。
「模型」频道最新
- 用户吐槽 Grokbot 表现糟糕，任务遗漏严重 — krishnan · 2026-08-28
- Prime Intellect 发布 18 个前沿模型的自主 AI 研究能力评估报告 — mariofilhoml · 2026-08-28
- 模型优化不应只追求思考时的 token 数量 — abacaj · 2026-08-28
- ChatGPT 自动添加神秘代码，用户困惑求原因 — TheMoonMidas · 2026-08-28
- 实测 M3 Max 跑通 125B Qwen 模型，推理速度达 70tok/s — mayfer · 2026-08-28
- Thomson-1.0-Small：适合 RAG 的 Qwen 微调版 — uber-linny · 2026-08-28