开发者开源 XCEval:为 Xcode 27 提供确定性 AI 智能体评估工具
rudrank · x · 2026-07-31
开发者 @rudrank 分享了其针对 Xcode 27 Beta 4 的 AI 编码智能体评估工具更新:
- 模块化解耦:他将 XCEvalCore 和 XCEvalFormat 作为独立的库产品暴露出来,其他工具不再需要复制解码器。
- 测试能力:该测试实验室覆盖了数据持久化、模型评判、工具调用、合成数据集以及 xcresult 导出,并支持四个苹果平台。
- 架构设计:智能体保持在 CLI 外部运行,xceval 为 Codex 等智能体提供针对 targets、超时、日志、样本选择等操作的确定性工具,并返回机器可读的错误信息。最终,由开发者的 Swift 代码来定义什么是“正确答案”。
所属事件:开发者开源 XCEval 助力 Xcode 27 智能体评估(2 条相关)→
「编程与Agent」频道最新
- 开发者用 Claude Opus 扫描代码库,成功揪出 ColdCard 漏洞 — evilsocket · 2026-07-31
- 医疗场景 AI infra 实践:整合自训练与 Agent 自进化 — aigclink · 2026-07-31
- 开源 AI agent 技能包:让人文学者用 Claude Code 做研究 — JeremyNguyenPhD · 2026-07-31
- 4608次测试仅3.3%无需人工干预,中科大实测AI科学家 — 新智元 · 2026-07-31
- 开发者开源 Zeta:基于 Codex 的常驻 Agent 运行时 — remilouf · 2026-07-31
- 单浏览器会话无缝切换三大 MCP 客户端 — Mean-Standard7390 · 2026-07-31