行家说机器人

星动纪元的世界动作模型VPP2最近登顶了RoboDojo仿真榜单,在泛化能力、精细操作和记忆能力三个维度同时拿下第一。这个成绩值得注意的不是分数,而是它意味着什么:一个模型开始具备了“换个地方还能干活、东西摆歪了还能抓准、任务做到一半还记得前面发生了什么”的能力。

腾讯首席科学家张正友此前曾提出一个观点,他打了一个精确的比喻:现在的状态相当于“20岁大脑放在3岁孩子身上”——机器人虽然能走能动,但操作能力很弱,感知也跟不上。
现今,模型端的能力正在快速逼近一个临界点,而身体端的能力还远远没有准备好兑现这些能力。问题已经不再是“模型和身体谁更重要”,而是更精确的追问:当模型在泛化、精度、记忆三个维度上分别达到VPP2所展示的水平时,要什么样的身体才能跟它匹配?
01
泛化:模型能“想象”场景,身体能“感觉”到吗?
泛化能力是VPP2最引人注目的突破之一。RoboDojo专门设计了42项双臂操作任务,覆盖了环境变化、物体位置偏移、任务组合变更等传统机器人模型的“舒适区之外”。VPP2在这类测试中的领先,说明它已经不是死记硬背“在A场景下做A动作”,而是能从过去的经验里提取出可以迁移的操作规律。
但泛化的另一半在身体端。模型可以预测“在这种环境下应该这样抓”,但如果手指上的传感器在陌生材质、光线变化或者被遮挡的情况下感觉不准,预测就变成了空想。打个比方:你闭着眼睛去拿一杯水,你知道杯子大概在哪、该用多大力,但如果你的手指麻了,感觉不到杯壁是滑的还是涩的,你还是会捏碎或者滑掉。
现在的研究正在尝试解决这个问题:让机器的手指把摸到的东西转化成数据,和眼睛看到的信息放在一起学,形成一个“摸到→判断→调整”的快速反应循环。一旦感觉到东西要滑了,立刻调整力度。
问题是,这个循环的起点——手指能不能在各种环境下都摸得准——还远远不够。传感器怕干扰、复杂的触感数据很难解析、东西形状太怪或者被挡住的时候摸不到关键位置,这些都是还没解决的基础问题。模型可以在电脑里泛化,但身体必须在真实世界的混乱中泛化。
02
精度:模型“知道”该用多大力,手能“执行”到多精确?
精细操作是VPP2在RoboDojo上拿下第一的第二个维度。这里的精度不是“能不能抓起来”,而是“能不能以正确的姿势、正确的力度、正确的位置抓起来”——在任务推进的每一个阶段都保持精确的控制。
硬件端正在快速逼近这个要求。Sharpa Wave灵巧手有22个主动自由度,指尖集成了超过1000个触觉像素,空间分辨率小于1毫米,能感觉到0.005牛的力——这个力度大概相当于一根头发丝放在手心的感觉。曦诺未来的25自由度灵巧手在指尖集成了六维力/触觉传感,关节定位精度达到0.5°。
但参数不等于能力。当前一个更隐蔽的瓶颈正在浮现:全球主流具身智能模型仍然只能稳定驱动两指夹爪,还没有办法可靠地指挥一只20多个自由度的灵巧手去完成复杂操作。
这就好比:身体端已经造出了一双能弹钢琴的手,但大脑端还只会做“张开、合上”这两个动作。不是手不够好,而是手好到了大脑暂时用不了的程度。
这种错配指向一个更深层的问题:灵巧手的高自由度不是为了炫技,而是为了在复杂操作中提供足够的调整空间。但当模型的控制策略还停留在低自由度层面时,这些调整空间反而变成了控制难度的来源。技术社区正在尝试通过物理常识注入来解决这个问题——让模型能够根据物体的视觉材质推理出相应的物理特性,进而生成自适应的抓取力度。比如看到玻璃杯就知道要轻拿轻放,看到木头就知道可以稍微用点力。但这条路径的成熟度,距离VPP2所展示的精细操作水平还有明显距离。
03
记忆:模型能“记住”任务进程,身体能“记录”接触历史吗?
记忆能力是VPP2三个第一中最容易被低估的一个。RoboDojo的测试设计中,记忆维度考察的是机器人在长程任务中“记不记得前面发生了什么”。这不是简单的缓存问题——它要求模型能够持续追踪任务状态,并在后续动作中正确使用这些信息。VPP2在这项测试中的领先,说明它在动作序列的上下文建模上取得了实质性进展。
但模型所“记住”的是它自己预测的轨迹和意图,而不是身体实际经历过的物理交互。这就引出一个关键问题:身体是否提供了足够丰富、足够连续的内部状态记录,让模型能够将自己的预测与身体的实际经历进行对齐?
答案目前是否定的。机器人感知自己身体状态的核心来源是关节编码器、惯性测量单元和电机电流传感器。但在实际工程中,关节加速度因为噪声太大而无法直接使用,电机力矩的测量也存在明显的时延。
这意味着,身体能够提供给模型的“记忆素材”在质量和连续性上都有明显损耗。
更值得注意的是,一项涉及VLA感知的研究显示,力估计器与VLA策略的运行频率存在巨大差异——力估计以200Hz运行,而VLA策略推理频率仅为15Hz。这相当于:手指每秒能感觉到200次变化,但大脑每秒只能处理15次。中间丢掉的那些细节里,恰恰包含了打滑趋势的起始时刻、力分布的微妙变化——这些才是精细操作真正需要的信息。
模型记住的是任务层面的“发生了什么”,而身体能够记录的、真正对精细操作有用的“接触过程中是怎么变化的”,并没有被有效地纳入记忆回路。就像一个成年人回忆童年,记得“我小时候学过骑车”,但完全不记得第一次踩踏板时脚腕用了多大劲、车把歪了多少度。
04
缺口不在某一侧,而在接口
如果分别审视这三个维度,会看到一个相同的问题:模型端已经在泛化、精度、记忆三个能力维度上达到了一个相当高的水平,身体端在硬件参数上也正在快速逼近,但两者之间的接口——身体如何将感知和执行的信息以模型能够有效利用的形式传递出去——远远落后于两端各自的发展速度。
VPP2的成功有一个容易被忽略的背景:它仅使用标准数据集,没有引入额外数据或增强手段。这说明模型的能力提升主要来自架构和预训练策略的改进,而不是数据量的堆砌。当一个模型的能力不再依赖于海量专用数据就能实现泛化时,它对身体端的要求就变得更加苛刻:身体必须提供高质量、低噪声、高时序分辨率的交互数据,才能让模型的泛化能力在物理世界中得到验证和迭代。
张正友的比喻需要被重新理解。“20岁大脑放在3岁身体上”的问题不在于大脑太强或身体太弱,而在于3岁身体反馈给大脑的信息,远远不足以让20岁的大脑学会如何控制它。一个20岁的大脑可以通过语言和图像从互联网上获取海量知识,但它在控制一个3岁的身体时,唯一能依赖的信息来源就是这个身体自身的感知-执行反馈。如果这个反馈的质量不够高、时序不够精细、维度不够丰富,那么再强的模型也无法在物理世界中兑现自己的能力。
当前行业最紧迫的任务,可能不是让身体追上模型,也不是让模型适配身体,而是在两者之间建立一种双向可校准的接口。模型需要能够将自己的预测转化为对身体的具体、可执行的指令,同时身体需要能够将自己的感知反馈以模型可理解、可利用的形式传递回去。这个接口的质量,最终决定了VPP2这样的模型在榜单上拿到的那三个“第一”,究竟能在真实世界中兑现多少。
END
📚 往期精彩
特斯拉新专利曝光!Optimus将拥有“仿生触觉皮肤”,手感逼近人类
一键三连「点赞」「转发」「小心心」
欢迎在评论区留下你的想法!