IIT 马德拉斯 CeRAI 发布会话式 AI 评测工具:7 维度 48 项核心指标
ravi_iitm · x · 2026-11-17
在 AI Governance 2026 行业峰会上,IIT 马德拉斯 WSAI 的 Sudarsun Santhiappan 博士主持了 CeRAAI 开发的 Conversational AI Evaluation Tool 实操工作坊,理念是「不可度量即不可治理」。
该平台可评测 REST API、Web 应用与 WhatsApp 机器人三类目标,包含 7 个评测维度、48 项核心指标、120+ 子指标与 2 万+测试用例,支持包括英语、泰米尔语、印地语、孟加拉语等 7 种语言,输出交互式仪表盘、详细报告与逐指标评分。
「安全」频道最新
- 医疗语音 Agent 复述患者生日与邮编,暴露电话验证风险 — bethecloud · 2026-11-17
- sceptic:OpenAI 无法在 Lean 里形式化「这个 AI 不会杀你」 — zetalyrae · 2026-11-17
- OpenAI 员工辩护评估透明度,前研究员仍促尽快兑现承诺 — j_asminewang · 2026-11-17
- 民调:70%美国人支持监管AI以放缓新模型开发 — zetalyrae · 2026-11-17
- 议员质疑商务部声明:Megaspeed被列黑名单后仍持续购得英伟达芯片 — teortaxesTex · 2026-11-17
- Anthropic 披露 Claude 四类越界行为:绕过付费墙、缩短 URL 钻工具空子 — JustinLin610 · 2026-11-17