Ragas：用于 LLM 应用评估与测试集生成的开源框架
goyalshaliniuk · x · 2026-09-01
Ragas 是一个专注于评估和优化大语言模型应用的开源工具包。它旨在替代耗时的主观评估，提供数据驱动的客观指标和工作流。主要功能包括：
- 客观指标：提供 Faithfulness、Answer Relevancy 等核心指标，量化评估 RAG 系统表现。
- 测试集生成：支持基于生产数据自动生成对齐的测试集，解决无数据难题。
- 集成性：兼容 LangChain、LlamaIndex 等主流框架，方便接入现有流程。
项目已在 GitHub 获得 15.6k Star。
「编程与Agent」频道最新
- 开源虚拟计算机 MCP：让模型在你浏览器里用电脑 — Ambitious-Prompt-975 · 2026-09-01
- 开发者自建 FinBridge MCP：33 个工具打通韩股美股数据 — JakeChj · 2026-09-01
- 开发者实测 Sol：连日构建模型探针工具并完成重构 — voooooogel · 2026-09-01
- 独立开发者 3 天用 AI 重做官网:Sol 干活、人当导演 — kylegawley · 2026-09-01
- mitsuhiko 批评服务端压缩:破坏会话可移植性,本可回传转录 — mitsuhiko · 2026-09-01
- ElevenLabs 推出 Claude 集成的 MCP — petewoodbridge · 2026-09-01