斯坦福大学研发YAY机器人,用户喊话即可训练,成功率提升30%!
斯坦福大学 Mobile Aloha 团队研发出一款名为 YAY Robotic 的系统,该系统利用自然语言反馈来改善机器人的后期训练。传统的机器人训练方法需要研究人员观察机器人视频并为每个技能片段进行重新标注或一次性纠正,过程费时且繁琐。而 YAY Robotic 通过在现场放置麦克风,让操作人员先用语言说出机器人需要掌握的技能,然后遥控机器人进行同步操作,录制的音频可与机器人的轨迹同步。这种方法的训练后,机器人在完成每个阶段的成功率都有显著提高。
YAY Robotic 的工作原理主要由高级策略和低级策略两部分组成,其中高级策略负责通过自然语言指令控制低级策略,低级策略则用于执行具体动作。此外,YAY Robotic 系统还引入了实时的语言纠正机制,当机器人的操作行为不理想时,操作人员会对其进行修正,这些修正语言会被记录并包含在未来的训练数据收集中。
研究人员希望通过不断的学习,使机器人的修正需求最小化,并随着时间的推移,使其与用户的偏好保持一致,从而提高机器人操作任务的性能。YAY Robotic 系统的代码已实现自动化采集数据与处理过程,并已开源。
斯坦福大学的施露西是 YAY Robotic 的第一作者,她本科毕业于计算机科学专业,曾在英伟达研究院与朱玉珂教授和 Jim Fan 博士合作,并在2023年3月加入斯坦福大学切尔西·费恩实验室。同年8月,她受邀在谷歌 DeepMind AWE 上发表演讲。