返回列表

RAG 评估集构建器 (ragas + IR 指标)

fbbyqsyea/rag-evalset

基于 ragas SDK 从文档语料构建生产级双层 RAG 评估集:同一份评估集既支持标准 IR 排序指标(Recall@K/Precision@K/MRR/NDCG@K,基于 gold chunk ID 自算),也支持 ragas LLM 裁判指标(faithfulness/answer_relevancy/context_precision/context_recall/answer_correctness)。当用户要求构建 RAG 评估集/评测数据集/生成测试问题、上线前 RAG 回归测试、或用 IR 指标衡量检索质量并配合 ragas 评估时使用。

36 下载01 版本数1 小时前
安全状态: 安全

更新日志v1.0.0

首版:ragas TestsetGenerator 构建双层评估集 + IR 排序指标(Recall/Precision/MRR/NDCG) + ragas LLM 裁判指标

版本历史

v1.0.0
2026年10月19日latest

一键安装

复制以下命令并粘贴到终端中运行

openclaw skills install rag-evalset

需要安装 OpenClaw CLI

作者: fbbyqsyea
更新于: 1 小时前
创建于: 2026年10月19日
ClawHub
RAG 评估集构建器 (ragas + IR 指标) - SkillHub