AI人形机器人研究:与汽车行业联动,主机厂押注人形机器人赛道
发布时间:2023-11-20 20:32:50与机械臂、AGV相比,AI人形机器人应用场景更具通用性
智元机器人元征A1应用场景示例
AI人形机器人大模型从VLM向VLA进化
RT-2一方面吸收了VLM语义推理、问题解决、视觉解释能力,另一方面能从真实的机器人动作中实现具身任务推理,且两方面能够相互促进。
训练方式上,RT-2通过将机器人动作拆解为文本token的形式,实现了直接与视觉语言数据混合后输入VLM进行联合微调。
RT-2不仅是对现有VLM模型的简单而有效的修改,还展示了构建通用物理机器人的前景,让机器人可以推理、解决问题和解释信息,以在现实中执行各种任务。