NVIDIA Project GR00T是一种通用基础模型,可在仿真和真实世界中改变人形机器人的学习方式。通过在NVIDIA GPU加速模拟中进行训练,GR00T使得人形机器人能够从少量的人类演示中通过模仿学习和NVIDIA Isaac Lab进行强化学习,并可从视频数据生成机器人动作。GR00T模型接受多模态指令和过去的交互作为输入,并输出机器人需要执行的动作。
模仿学习强化学习, 从视频数据生成机器人动作, 接受多模态指令和交互数据作为输入, 输出机器人执行动作。
GR00T可以通过仿真训练和GPU加速模拟改变人形机器人的学习方式，使其从模仿学习到强化学习，并能够生成机器人动作。
使用GR00T训练机器人学会如何安全搬运易碎物品，通过观察视频让GR00T模型生成机器人装配机械零件的动作序列，利用GR00T的强化学习功能训练机器人在未知环境中自主探索。
