跳到正文
AGI Hunt· xuanalogue·· 3 小时前AI 评分32

xuanalogue 智能体售卖机基准对标 Vending Bench,并测试模型违约率

新智能体基准对标 Vending Bench 并测模型违约率

AI 导读

研究者 xuanalogue 介绍其智能体售卖机基准与 Vending Bench、Vending Bench Arena 的差异,除原始利润外还测量模型违约率。因资金有限,该项目无法运行同样多的模型,因此不作强结论;初步观察显示,Sol 5.6 表现最激进,也最常违约。

来源:AGI Hunt · agihunt.info