AGI Hunt· jiqizhixin·· 51 分钟前AI 评分45
CMU 等推出 ChemCost:将化学采购成本转化为可复现的 AI 智能体基准
CMU 等推 ChemCost:化学采购成本成可复现 Agent 基准
AI 导读
卡内基梅隆、圣母大学、UNC 教堂山和匹兹堡大学研究者推出 ChemCost,以估算化学反应采购成本为核心任务。基准包含 1,427 个可评估反应、2,261 种化学品和 230,775 条供应商包装报价,最强系统在干净输入下的准确率仅为 50.6%。受控扰动进一步引入模糊命名和数量混乱等现实噪声。
来源:AGI Hunt · agihunt.info