SampuraResearch发布安全评审基准v0
热点事件持续更新
SampuraResearch发布安全评审基准v0
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
SampuraResearch团队发布首篇聚焦安全的大模型评审（judge）基准论文，并公布基准v0，包含3,957项任务，覆盖6个领域，收集35,613条人类判断。团队提出，人类与AI所犯错误不同，结合两者的判断可能互相纠错；其初步实验显示这种合作存在提升空间。团队还展示了对该基准进行hill-climbing优化的初步结果，后续结果将持续更新。
AI 根据报道生成 · 2 小时前更新
报道时间线
沿着报道，了解事件的不同侧面。
10月29日
- AGI HuntSampuraResearch 团队发布首个聚焦安全的大模型评审（judge）基准，含 3957 项任务与 35613 条人类标注
SampuraResearch 团队发布首篇论文，推出聚焦安全的大模型评审（judge）基准，包含 3,957 个任务、覆盖 6 个领域，共收集 35,613 条人类判断。核心假设是人类与 AI 所犯错误不同，结合两者判断可互相纠错，实验显示合作提升空间可观。团队还展示了对该基准做 hill-climbing 优化的初步结果，目前为该安全评审排行榜的 v0 版本，后续结果将持续更新。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。