有些学术界过来的新机器人技术,这几年也在积极做产业转化。比如多机集群控制、软体机器人、微纳机器人等。产业时机是否已到,仍要case by case得判断,这些前沿技术能否落地,还需要时间来验证

目前做大模型+机器人的 最大难点,在于获取数据 。谷歌和微软都选择了从收集家用动作入手,未来其他场景,比如办公室、街道、商场、工厂,如果能训练出来一个个小模型,融入到底层大模型里面,将会是创业公司的重要壁垒。

整个sim-to-real过程如图4所示,共分为四步:

(1)识别出机器人的物理参数,并对机器人进行刚体运动学/动力学建模;

(2)收集真实的关节电机执行数据,训练一个Actuator Net;

(3)在仿真中,利用Actuator Net建模关节电机,并结合第一步中的刚体运动学/动力学建模,进行强化学习;

(4)将第3步中训练得到的策略部署到真机上。