ICML 论文 AGZO:激活子空间引导零阶优化,Qwen3-0.6B 微调超 MeZO
ICML 2026 论文 AGZO 提出激活子空间引导的零阶优化方法,通过前向传播即时提取低秩激活子空间,约束梯度估计方向。Qwen3-0.6B 在 CB 上达到 89.2%,MeZO 为 80.3%;AGZO 还在近一阶训练会 OOM 的硬件条件下完成 Qwen3-4B 微调,显存占用与其他 ZO 方法基本持平。
ICML 2026 论文 AGZO 提出激活子空间引导的零阶优化方法,通过前向传播即时提取低秩激活子空间,约束梯度估计方向。Qwen3-0.6B 在 CB 上达到 89.2%,MeZO 为 80.3%;AGZO 还在近一阶训练会 OOM 的硬件条件下完成 Qwen3-4B 微调,显存占用与其他 ZO 方法基本持平。
Liv Gorton 与 Owen Lewis 发布论文《Adversarial Examples Are Not Bugs, They Are Superposition》(arXiv:2508.17456),提出叠加是对抗样本的主要成因。
UCLA × Apple 团队发布 OpenVLHarness,通过统一工具接口、持久多模态记忆和编码智能体检查、计算并整合证据。在22项基准、8个骨干模型上的实验显示,相比无工具基线平均提升9.7–12.6分。论文已发布在arXiv。
Meta AI 与密歇根州立大学发表论文,系统分析 LLM 生成推理图的结构可靠性。研究提出两阶段诊断法,发现推理图质量参差不齐,图中的错误还会污染置信度分数,影响最终结果的可信度;论文编号为 arXiv:2610.27245,已被 EMNLP 2026 录用。
南开大学联合阿里云在 arXiv(2610.01415)发布 Progression of States(PoS)框架,用于解决 Agent 持续调用工具却无法推进任务的“信念困局”。
Zhiyu Chen 等人的 arXiv 论文提出 Research Progress Graph(RPG),以带类型的图记录科研想法从问题到成果的演化轨迹。8 条真实 RPG 的对照检查显示,35 个现有研究智能体皆不完整,无一同时保留变化、证据与推理链;RPG 可用于预测下一研究状态、评估想法轨迹和训练新智能体。