跳到正文
热点事件持续更新

研究者估算蒸馏复原GPT-4成本或不足千万美元

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

研究者 Matt Carrig 称,GPT-4 当年曾开放前五个候选 token 的概率且不提供思维链,因此模型可能被蒸馏复原;他估算,借助这类输出复原整个模型的成本可能不到1000万美元。 Carrig 认为,短短两年间模型权重保护的攻防格局已经改变。不过,相关开放范围与复原成本目前均为其说法,报道未提供独立验证。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月23日
  1. AGI Hunt
    研究者称 GPT-4 当年开放 top-5 token 概率,蒸馏复原或仅需不到 1000 万美元

    研究者 Matt Carrig 称,GPT-4 当年开放 top-5 token 概率且没有 CoT 可隐藏,模型或可被蒸馏复原。他估算借助这些输出复原整个模型可能只需不到 1000 万美元,短短两年间模型权重保护的攻防格局已彻底改变。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。