返回列表ClawHub
RAG 评估集构建器 (ragas + IR 指标)
fbbyqsyea/rag-evalset
基于 ragas SDK 从文档语料构建生产级双层 RAG 评估集:同一份评估集既支持标准 IR 排序指标(Recall@K/Precision@K/MRR/NDCG@K,基于 gold chunk ID 自算),也支持 ragas LLM 裁判指标(faithfulness/answer_relevancy/context_precision/context_recall/answer_correctness)。当用户要求构建 RAG 评估集/评测数据集/生成测试问题、上线前 RAG 回归测试、或用 IR 指标衡量检索质量并配合 ragas 评估时使用。
36 下载01 版本数1 小时前
安全状态: 安全
更新日志v1.0.0
首版:ragas TestsetGenerator 构建双层评估集 + IR 排序指标(Recall/Precision/MRR/NDCG) + ragas LLM 裁判指标
版本历史
v1.0.0
2026年10月19日latest
一键安装
复制以下命令并粘贴到终端中运行
openclaw skills install rag-evalset
需要安装 OpenClaw CLI
作者: fbbyqsyea
更新于: 1 小时前
创建于: 2026年10月19日