带球的机器人:球在脚下,偏偏看不见
Maiorana et al. · Sapienza 罗马大学 · 2026 · arXiv:2607.12702
机器人踢足球,最难的不是射门,是带球。你带球时低头就能看到球;人形机器人不行——它的眼睛焊死在额头上,球带到脚边的那一刻,恰好滑出视野。这篇来自罗马的论文教一台 Booster T1 人形机器人在有人抢球的场上带球,思路只有一句话:先开天眼学踢球,再学着闭上天眼。照例先说好:POMDP、RMA、DAgger、GRU、特权蒸馏……这些名字你一个都不用记。你只需要盯住一块球场:一台蓝色机器人、一颗金色的球、一面绿旗,和一根红色的捣蛋柱子。
先来当一回带球的机器人
规则很简单:你是 T1 的大脑,你的眼睛是额头上的一台深度相机——只能看到面前一个固定的扇形,脖子不归你管。想象你端着一碗汤走路:眼睛可以一直盯着碗;现在把眼睛焊在额头上,碗一端到胸口,就看不见了。拖动滑块,把球从两米外一路带到脚边,盯着右上角那格「相机画面」。
看到了吗:球在一米开外时一切都好;滚进半米——正是你要出脚碰它的距离——金色的球从画面下边缘掉了出去。这不是设计失误,是人形机器人的身体结构决定的:越是需要精细控球的时刻,球离相机的盲区越近。再加上场上还有对手的腿来回晃,遮挡不是意外,是常态。论文实测:整场带球下来,球出现在相机画面里的时间只有大约四分之三——剩下四分之一,机器人是「盲踢」的。
带球,是一场大部分时间看不见球的运动。那看不见的时候怎么办?过去十年,机器人足球有一套标准答案。
旧答案:看不见就按惯性猜
标准流水线分两步:一个检测器(比如 YOLO,白话:在照片里一眼框出球的模型)负责「球在哪」;一个卡尔曼滤波器(白话:按惯性续猜的记账员)负责在看不见的帧里把估计续上——球刚才往右滚,那它现在应该滚到这儿了。这套组合在受控环境里工作得不错。但惯性猜有一个天生的软肋:它猜不到看不见的地方发生的事。下面的动画会自动重播,点两个按钮,对比球「擦到柱子」和「顺利通过」两种情况:
注意灰色的幽灵球:进入阴影带之后,它老老实实沿直线走——记账员只会按惯性记账。「顺利通过」时这没问题,幽灵和真球在出口处重逢;「擦到柱子」时,真球被弹向一边,幽灵却继续直行,机器人一路追着幽灵跑,最后停在一片空草皮上。球越快、遮挡越多、对手越活跃,这种分家就越频繁。
病根比「猜不准」更深一层。这条流水线上,感知模块是单独训练、单独打分的——它的考卷是「框住球的像素坐标,越准越高分」。可是没有人问过它一句:你报出来的这些信息,够不够用来踢球?控制器需要什么,感知不知道;感知报了什么没用,控制器也没法退货。看得准 ≠ 够用来踢——感知优化的目标函数里,根本没有「踢球」两个字。
那好办,把相机直接接进强化学习,感知控制一锅端,端到端从零练一个?先押个注。
先开天眼,再学着闭上
如果你是这篇论文的作者,你会怎么让「看」为「踢」打工?三个方案,选一个:
课程表:没有人一上来就打比赛
问题是:课程表真的必要吗?先押注:只读完 Stage 1(会控球、没见过任何障碍)的毕业生,直接考「抢球者」考场,成功率是多少?
奖励是怎么给的(挑主角讲,全表 22 项)
四个年级读完、眼睛也换好了,全套毕业生上考场。成绩单有一处特别值得盯着看。
成绩单:眼睛没瞎,是脚跟不上
三个考场,各考五十次:空场 100%,静止柱子 96%,抢球者 46%。掉了一半还多——第一反应多半是「看不过来了吧」。真的吗?点下面四个指标挨个看,同样三个考场并排比:
把「成功率」和「球位置误差」两个视图来回切几次:成功率塌了 54 个百分点,眼睛对球位置的估计误差只从 5 厘米涨到 8 厘米——几乎是平的。再看「摔倒率」:抢球者考场 52% 的失败里,绝大多数是摔倒——对手贴身冲撞打破了平衡。最后看「绕行角」:被对手堵住时,球的实际走向偏离指令方向 43°——这不是失控,是策略在故意绕开对手,绕完再回到旗子的方向。
拼起来,诊断就清楚了:感知这门课及格了——挂科的是和活人过招的体育课。眼睛稳定地报出球和对手在哪,但双腿在高速对抗里保平衡、控球、绕行三线作战,还打不过一根会跑的柱子。瓶颈从「看」挪到了「打」——对一篇论文来说,这是个诚实而有价值的坐标。
你的球场
零件都见过了:视野扇形(第 1 节)、凭记忆续写的小抄(第 3 节)、绕行 43°(第 5 节)。现在它们装在同一台机器人身上,球场交给你。选考场、拖动红柱子摆位、调对手速度,然后开球。挑战:把对手速度拉满到 0.4 m/s,连开十球——看看你能不能超过论文的 46%。
开几球就能摸到那台机器人的处境:对手慢的时候,绕行绰绰有余;速度一上来,每次贴身接触都是一次平衡考验,摔倒说来就来。你现在对「46%,其中 52% 的失败是摔倒」这行数字的体感,应该和读摘要时不一样了。
这块球场,通向哪里
放下遥控器,交代一下你刚才玩的东西的真身。这是 Sapienza 罗马大学(联合 CSIC-UPC、EPFL)2026 年 7 月的论文《Vision-Based Dribbling for Humanoid Soccer via Privileged Representation Learning》:在 mjlab 仿真器里,用两阶段特权蒸馏 + 四级课程,训练 Booster T1 人形机器人只靠头戴深度相机带球——空场 100%、静桩 96%、抢球者 46%,并诚实地诊断出瓶颈在对抗控制而非感知。全部实验都在仿真里,作者把 sim-to-real 列为下一步。
本文的简化清单(哪些地方骗了你)
杠精清单(我们替你杠了)
值得带走的不是 46%,是这篇论文对「感知」的摆位。你在第 1 节亲手把球拖出视野——看不见是身体结构注定的;在第 2 节看着机器人追幽灵扑空——因为感知的考卷上没有「踢球」;在第 3 节切换 Phase 时右边纹丝不动——原来眼睛可以是为某个特定的脑子定制的器官。这和VistaVLA给机械臂造「心里的地图」、SONIC让走路从一亿帧人影里长出来,是同一条河:具身智能的感知,正在从「看清世界」的独立模块,变成「为行动服务」的定制器官。眼睛为脚打工——这五个字,值得你在下一篇机器人论文里再验证一次。