郭震 AI公众号:郭震AI

实时 AI 消息

蚂蚁灵波开源LingBot-Touch:给机器人一双通用的“手感”

蚂蚁灵波开源触觉基础模型LingBot-Touch,把人手采集的触觉经验迁移到预训练中从未见过的灵巧手上,接入XHand时不改任何参数。报道称π0.5在6项任务上的平均成功率从48.00%升至74.17%,判断接触中心的误差也从毫米级降到0.1毫米量级。

发布时间

蚂蚁灵波开源了触觉基础模型LingBot-Touch。量子位11月10日的报道给出的核心结论是:这只模型能把人手采集的触觉经验,迁移到它从未见过的灵巧手上,而不需要针对新硬件改一个参数。

最能说明问题的是XHand上的实验。XHand使用的磁触觉传感器型号从未出现在预训练数据里,预训练中的磁触觉数据也全部来自人戴的手套;接入XHand时,LingBot-Touch一个参数都没改。即便如此,π0.5在6项任务上的平均成功率仍从直接喂原始信号时的48.00%升到74.17%。

其中分离叠杯这项任务从32.5%提高到72.5%,翻了一倍多。这个任务要求灵巧手只取走最上面的杯子:一只手扶住整摞杯子,另一只手捏着杯沿往外抽;阻力突然变小而指腹仍贴着杯沿,说明杯子已经松脱、必须马上收力;若是指腹自己在打滑,则要重新抓。两种情况的手感截然不同。

与上一代触觉基础模型FTP-1的对比更能体现泛化差异。在Sharpa Wave上判断接触中心,FTP-1的误差是2.19毫米,LingBot-Touch是0.12毫米;在XHand上,误差从5.89毫米降到0.16毫米。FTP-1在这两只手上各自配了专门的适配器,而LingBot-Touch用的是同一个冻结的编码器。

规模效应也已初步显现。Tiny版在4000小时左右开始饱和,容量更大的Small版到5000小时效果仍在上涨,真机任务的成功率同样随预训练数据增加而稳定提升。

把LingBot-Touch放回灵波的技术路线里,它的位置很清楚:空间感知有LingBot-Vision与LingBot-Depth 2.0,环境交互有LingBot-Video与LingBot-World 2.0,灵巧操作有LingBot-VLA 2.0与LingBot-VA 2.0,但这些能力大多在解决“碰到之前”的问题——东西在哪、手该伸到哪、下一步该干什么。手指一旦接触物体,视觉信息就迅速减少,比如指腹贴着瓶盖的位置被手挡住,钥匙插进锁孔后更是看不见。

用一句话概括就是“视觉管接触之前,触觉管接触之后”。双手开锁是典型例子:握住挂锁、对准锁孔主要靠眼睛,钥匙往里推时可能顶歪锁体、推到一半卡住要退回换角度,进孔之后摄像头基本帮不上忙,只能靠钥匙传回指尖的阻力判断。

灵波把触觉单独做成基础模型,理由是每只手的控制方式不同,但都必须理解接触;把“理解接触”抽成可复用的一层,一款硬件攒下的经验就能成为下一款机器人的起点。这也解释了设计选择:用手套采数据是为了不依赖机器人本体、把数据规模做上去,入口按传感原理而非产品型号设计,是为未来的新传感器留出位置。

目前LingBot-Touch已与LingBot-VLA、LingBot-Depth融合,用于提升通用大脑的手眼协同与精细操作能力。落地方面,灵波正与乐聚、钛虎等本体伙伴,以及国大药房、隆盛等场景伙伴,在零售分拣、物流分拣和工业场景开展商业化测试。

为什么重要

触觉此前是具身智能最碎片化的一环,换一只手机器人就要重采数据、重训模型。若跨硬件零改动迁移成立,硬件迭代与数据积累就能解耦,灵巧操作的落地成本会明显下降。

微博邮件

RoboticsEmbodied AIOpen Source
返回实时消息

附近消息

全部

11/10 15:00

Otter.ai新增27种语言,会议转写可跟随说话人切换语言

Otter.ai 11月10日宣布新增27种语言支持,完成后平台共支持31种语言,并预览可在同一场会议中跟随说话人切换语言的转写功能。首批13种语言已上线,包括普通话、粤语、韩语、德语和葡萄牙语等,其余14种将陆续推出。

11/10 15:56

openJiuwen首发TTSE框架:让智能体把每批任务沉淀成可核对的经验

openJiuwen发布TTSE经验学习框架,把智能体的经验拆成描述环境事实的FACT与描述执行方法的TIP两条轨道,各自维护编号与证据链。团队在ALFWorld、ScienceWorld、GDPevo、SOPBench与PinchBench五个基准上评测,称双轨方案优于只记录事实或只记录技巧的单轨方案。

11/10 14:55

NVIDIA 联手 SK 电讯与 Rebellions,用 NVLink Fusion 做 GPU+NPU 异构机架

NVIDIA、SK 电讯与韩国 AI 芯片公司 Rebellions 宣布合作,通过 NVLink Fusion 把 Rebellions 的 NPU 接入 NVIDIA GPU 机架,由 GPU 处理提示词、韩国芯片生成回复。三方把这套系统定位为韩国的“主权 AI”基础设施,预计 2028 年就绪。

11/10 16:55

Flexxon 第三次获 CyberCall 资助,开发硬件级 AI 智能体网关

Flexxon 在新加坡 CyberCall 2025 的“面向 AI 的网络安全”挑战中获奖,将开发硬件级安全 MCP 网关 X-PHY AI Armor。该项目位于 AI 智能体与其访问的系统之间,把高风险操作的授权与审计记录锚定在硬件层。