跳到正文
热点事件持续更新

AI 圈呼吁少互喷多做 benchmark 修复工具

2 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

研究者 sarahcat21 在推特上批评当前 benchmark 圈弥漫的“毒性”:成员花大量时间指出别人 benchmark 的缺陷,却很少有人投入工具、系统与配套支持,帮助真正动手修复问题的人。 她主张把重心从相互挑刺转向为 benchmark 修复者建设支持性工具和基础设施。这是一条个人公开表达的观点,提出者没有给出具体项目、工具或后续安排。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月5日
  1. AGI Hunt
    BenchGate 引发热议:批评基准易,修复基准难

    Hamel Husain 将 BenchGate 争议归因于部分人对榜单的盲目崇拜、盲目消费,以及利益相关方借 benchmark 包装推广。sarahcat21 则批评 benchmark 圈热衷指出缺陷,却鲜少为真正修复基准的人开发工具、系统和支持,呼吁少挑刺、多建设。

  2. AGI Hunt
    AI 圈吐槽 benchmark 互喷成风:少挑刺,多做修复工具

    sarahcat21 发推吐槽当前 benchmark 圈的“毒性”,认为成员花太多时间指出现有 benchmark 的缺陷,却很少投入工具、系统和支持,帮助真正致力于修复问题的人。其主张是减少相互挑刺,转而为 benchmark 修复者建设支持性工具与基础设施。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。