AGI Hunt· prajdabre·· 3 小时前AI 评分30
ExCAM 论文:检测 LLM 文化错误,准确率达 80%
ExCAM 论文:检测 LLM 文化错误,准确率达 80%
AI 导读
ExCAM 是首个用于识别、评分并解释 instruction-output 对中文化错误的评测指标,研究者借 Meta 的 Muse 演示了其检测文化错误并生成带解释报告的用例。配套 ExCAM40k 数据集在均衡测试集上的错误检测准确率最高达 80%,超过 GPT-5 等基线;目前仅支持文本错误检测,未来可能扩展到多模态。
来源:AGI Hunt · agihunt.info