TechCrunch · AI· Lucas Ropek·· 2 天前AI 评分38
Hugging Face 政策负责人：嵌入式 AI 评估器并非易行的解决方案
Embedded AI evaluators won’t be an easy solution, Hugging Face’s policy chief says
AI 导读
Hugging Face 首席政策官 Irene Solaiman 在 TechCrunch Disrupt 上表示，模型评估仍是"不断演进的科学"，不同评测之间难以有效比较，且失效速度较快。她认为嵌入式评估器生态需要更多标准化，才能确定谁能在哪些任务上胜任评估者。评估对象正从模型本身扩展到包含 harness 和智能体的整个系统，而智能体评估既困难又昂贵。
来源：TechCrunch · AI · techcrunch.com