HandsOn评测GPT-6 Astra灵巧手操控
热点事件持续更新
HandsOn评测GPT-6 Astra灵巧手操控
2 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
HandsOn团队通过moveeef接口评测GPT-6 Astra：在不使用微调和演示数据的零样本条件下，灵巧手在Core-50任务中成功26/500次，成功率5.2%；在Transfer-16任务中成功3/160次，成功率1.9%。 基于800回合策略回放的失败分析显示，主要问题包括过早触发、双手协调困难和目标保持失败。Core-50的最佳多任务checkpoint OpenWAM宏平均成功率为29.1%，但其在Transfer-16的成功率仅为0%至0.9%。此次评测所用控制器与训练策略不同，观测条件、试验次数和模型调用预算也不相同。
AI 根据报道生成 · 1 小时前更新
最新进展10月27日 01:00
GPT-6 Astra 零微调操控灵巧手，500 次试验仅成功 26 次报道时间线
沿着报道，了解事件的不同侧面。
10月27日
- AGI HuntGPT-6 Astra 零微调操控灵巧手，500 次试验仅成功 26 次
GPT-6 Astra 通过 moveeef 接口零微调操控灵巧手，Core-50 任务仅成功 26/500，成功率为 5.2%。测试不使用微调和演示数据，Transfer-16 任务成功 3/160，成功率为 1.9%；保存的动作记录显示模型具备任务感知的规划能力。材料同时指出，该测试采用的控制器设定与训练策略不同，观测条件、试验数量和模型调用预算也不相同。
- AGI HuntHandsOn 灵巧操作基准分析：GPT-6 Astra 成功率仅 5.2%，三大失败模式曝光
GPT-6 Astra 在 HandsOn 灵巧操作基准中零微调测试成功率为 5.2%，主要暴露过早触发、双手协调和目标保持三类失败模式。Core-50 最佳多任务 checkpoint OpenWAM 的任务宏平均成功率为 29.1%，Transfer-16 上各 checkpoint 为 0%-0.9%；GPT-6 Astra 的 Transfer-16 成功率为 1.9%。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。