Turning ordinary human videos into skill-labelled training data for a dexterous robot hand进阶
DexStitch:通过接触感知的机器人图像修补,从人类视频中学习并串联灵巧操作技能
首尔大学、现代汽车机器人实验室与DGIST的预印本论文显示,灵巧手连续完成四项家务技能的成功率达到77.5%,使用相同数据训练的UniSkill基线为0%。关键在于把技能之间的过渡动作单独标注为一项技能,并且只用约240段人类视频加32段机器人遥操作数据完成训练。