开发者用 OpenAI Realtime API 构建语音控制机械臂

Tarun122 分享了通过 WebRTC 将 OpenAI Realtime API（gpt-realtime-2.1）接入自制小型机械臂的项目，可直接用语音指挥其玩井字棋、搬运积木和递送玩具车。系统向每轮对话注入顶部及腕部摄像头图像，由视觉模型选择目标，再调用仿真训练的低层动作策略完成操作。