宾大茅佳源:从单次演示到 83% 真机泛化,破解具身智能数据困局|IROS 2026
剖析视觉与动作脱节,引入 TR 指标与自适应引导,重构具身泛化机制。 作者丨张璐 编辑丨岑峰 在机械臂的实机测试中,不少团队都遇到过类似的困扰:为了让机器人学会抓取某个马克杯,往往需要人类抓着机械臂录入上百条示范轨迹。然而只要把杯子换成未见过的款式,或者稍微改变物体的摆放位置,策略的成功率就会急剧下降。这种靠海量遥操作数据硬堆技能的方式,很难让机器人真正具备应对新环境的泛化能力。更棘手的是,即便当前的视频预测模型已经能准确画出合理的未来画面,但一旦接入动作模块驱动实机,机械臂依然频频出错。在 IROS 2026 大会上,来自 UPenn、MIT 与 Stanford 联合团队的茅佳源分享了他们的思考。她不仅介绍了只需一次人类演示就能泛化执行多种非抓取任务的 RAPID 闭环框架,还首次提出了诊断“视觉会了、手却做不对”这一机制脱节的 TR 指标。借由基于 TR 的自适应引导机制,团队最终将