港中文MMLab与NovaXbot提出CaPtain

港中文MMLab与NovaXbot提出并训练了CaPtain机器人智能体管线，结论是可将4B规模的视觉语言模型后训练为通过Python沙箱调用底层机器人API、以生成代码执行操作的智能体。 该方案采用“代码即策略”思路，让模型把任务转化为程序并调用机器人底层API，以实现机器人操作；目前报道重点在于提出这一管线，未披露具体任务成功率或与其他方案的性能对比。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。