OpenAI公开内部模型困惑度并提议行业标准
热点事件持续更新
OpenAI公开内部模型困惑度并提议行业标准
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
OpenAI公开了从GPT-3.5起各内部模型在留出数据集上的困惑度数据,并提议将这一指标用于不同模型开发者之间的比较,进一步形成行业安全标准和研发限制。 OpenAI称,GPT-4的对数困惑度约为0.91,并将其与后续推理能力联系起来;公司预计,困惑度降至约0.68—0.7时可能出现新的能力涌现。该区间属于OpenAI的预期,尚非已被证实的能力节点。
AI 根据报道生成 · 56 分钟前更新
最新进展11月23日 01:06
OpenAI 提议以困惑度建立模型开发者共享指标与安全标准报道时间线
沿着报道,了解事件的不同侧面。
11月23日
- Hacker NewsOpenAI 提议以困惑度建立模型开发者共享指标与安全标准
OpenAI 提议将困惑度作为比较不同模型开发者的共享指标,并据此建立行业安全标准与研发限制。文章首次公开了从 GPT-3.5 起的内部困惑度数据,将 GPT-4 的对数困惑度约为 0.91 与后续推理能力相联系,并预计约 0.68–0.7 区间可能出现新的能力涌现。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。