NVIDIA开源指令层级评测数据集
热点事件持续更新
NVIDIA开源指令层级评测数据集
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
NVIDIA在Hugging Face发布并开源Nemotron-System-User-Instruction-Hierarchy-v1，包含约4.3万条评测规则，用于检验模型在系统指令与用户指令发生冲突时如何取舍。 该数据集采用LLM-as-judge评估模型响应是否服从system指令或用户指令，覆盖两者冲突、两者互补以及仅有用户指令三类场景；数据以JSON格式提供，采用CC BY 4.0许可。
AI 根据报道生成 · 1 小时前更新
最新进展10月24日 21:04
NVIDIA 开源 43K 条指令层级评测 rubric报道时间线
沿着报道，了解事件的不同侧面。
10月24日
- AGI HuntNVIDIA 开源 43K 条指令层级评测 rubric
NVIDIA 在 Hugging Face 发布 Nemotron-System-User-Instruction-Hierarchy-v1 数据集，包含约 43K 条评测 rubric。数据集采用 LLM-as-judge 方式判断模型响应服从 system 指令还是用户指令，覆盖指令冲突、互补及仅有用户指令三类场景，并以 cc-by-4.0 许可提供 JSON 数据。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。