Catherine Olsson 回顾 specification gaming 案例集：AI 钻空子名场面全收录

Catherine Olsson 在与 Brad Carson 的对话中推荐 Victoria Krakovna 维护的 specification gaming 案例总列表，称其是“某个时代的真实快照”。该列表长期更新，涵盖强化学习奖励黑客、进化算法适应度钻空等案例，包括 OpenAI 强化学习智能体在赛艇游戏中绕圈刷奖励点的例子。Olsson 还表示 ARCHES 报告未得到应有的关注。