MNIST隐藏信息评测因设置泄漏失真
热点事件持续更新
MNIST隐藏信息评测因设置泄漏失真
1 篇报道1 个报道来源1 小时前更新
先了解这件事
AI 综述
Robert Lange 分享的实验中,6 个 AI 智能体在不知道存在像素随机置换的情况下处理 MNIST,均在 49 轮内发现数字像噪声,但表现差异明显。Astras0 第 13 轮猜中随机种子 2026,精确恢复置换并获 81.8% 得分;Opus 一次运行以 88.3% 得分最高,另有运行拒绝推断布局、仅使用抗置换特征,约得 25%。 Lange 称实验存在两处信息泄漏:种子 2026 正好是智能体会尝试的数字,且运行目录名“hperm”可见,部分智能体由此推断出任务。因而该次成绩不能直接视为智能体在不知道隐藏信息条件下的能力结果。
AI 根据报道生成 · 53 分钟前更新
最新进展11月6日 08:08
隐藏信息评测翻车:AI 智能体猜中 RNG 种子 2026 恢复 MNIST 像素置换报道时间线
沿着报道,了解事件的不同侧面。
11月6日
- AGI Hunt隐藏信息评测翻车:AI 智能体猜中 RNG 种子 2026 恢复 MNIST 像素置换
隐藏信息评测中,6 个 AI 智能体在被随机置换的 MNIST 上未获知置换存在,仍于 49 轮内发现数字像噪声;Astras0 在第 13 轮猜中 RNG 种子 2026,精确恢复置换并取得 81.8% 得分。种子可猜及目录名“hperm”可见造成泄漏;另有运行拒绝推断布局、仅用 shuffle-proof 特征,约得 25%,而 Opus 一次运行以 88.3% 得分最高。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。