跳到正文
热点事件持续更新

PrimaCons揭示决策跨原语不一致

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

浙江大学等团队提出 PrimaCons 四轴一致性基准,用于评估大语言模型决策框架 Jev 在保持语义不变、改变查询原语时的决策一致性;在三个规模的 Jev 上,四个轴均出现系统性一致性违规。 团队据此提出残差校准器,实验显示其可降低跨原语不一致性并提升决策准确率,相关代码已发布在 GitHub 的 PrimaCons-CRPR 仓库。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月3日
  1. AGI Hunt
    浙大团队提出 PrimaCons 基准,揭示 Jev 跨原语决策不一致性

    浙江大学等团队提出 PrimaCons 四轴基准,用于评估 LLM 决策框架 Jev 在同一语义状态下面对不同查询原语时的决策一致性。团队在三个规模的 Jev 上发现四个轴均存在一致性违规,并提出残差校准器降低不一致性、提升决策准确率,相关代码已开源于 GitHub(67L1/PrimaCons-CRPR)。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。