跳到正文
热点事件持续更新

Ai2揭示GPT-5.4新颖性判断受问法影响

1 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

Allen Institute for AI(Ai2)公布评测后续发现:在人类点子两两配对中,GPT-5.4回答“哪个点子被评审认为更新颖”时,93.5%的选择指向人类点子;直接回答“哪个更新颖”时,这一比例降至40.9%。 Ai2称,增加推理量或提供相关论文并不总能改善结果,两个专门构建的新颖性评委得分也低于Claude Opus 4.6提示基线的85分,显示提问方式和评委设计都会影响新颖性判断表现。

AI 根据报道生成 · 57 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. AGI Hunt
    Ai2 评测细节:GPT-5.4 判定人类点子更新颖的比例随问法从 93.5% 跌至 40.9%

    Ai2 新颖性评测发现,GPT-5.4 在人类-人类配对中,被问“哪个点子被评审认为更新颖”时 93.5% 选对人类点子,直接问“哪个更新颖”时则降至 40.9%。提示词调整可能顾此失彼,增加推理或提供相关论文也不总能改善结果,两个专门构建的新颖性评委得分低于 Claude Opus 4.6 提示基线的 85 分。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。