博客园· 狂师·· 16 天前AI 评分67
Agent 测评指标怎么选、怎么算?
Agent 测评指标怎么选、怎么算? - 狂师
AI 导读
这篇教程把 Agent 测评常用指标分为判定类、检索类、相似类、行为类四类,讲清每类量什么、大白话怎么算、什么情况下会坑你。判定类指标全部从一张四格表算出,精确率管误报、召回率管漏报,两边代价不对称时把更疼的一边定成主指标;RAG 应拆成检索层和生成层分开算,命中率@K 的 K 必须跟着系统真实行为走,应用取 3 就不该用 @10 评测。
来源:博客园 · cnblogs.com