AI 前沿观察:人物、突破与证据|解读日期:2026 年 11 月 12 日|资料截至北京时间 20:34:54

机械手已经碰到了拉链头,接下来该收紧手指,还是沿着袋口拉动?在 Robbyant 团队的一项真机实验里,同一种动作策略不读触觉时拿到 39 分,直接读传感器信号时跌到 15 分,先用 LingBot-Touch 编码再读,却升到 59 分。三组用的是同一批示范。要理解这次提升,得把两个问题分开:指尖多提供了什么信息,实验又给哪些动作记了分?预印本首版提交于 11 月 9 日 18:12 UTC,即北京时间 11 月 10 日凌晨;这是提交日期,论文未给出这组试验的具体日期。

原创科学示意图:机械指尖夹住织物袋上的拉链拉片

原创示意图,展示指尖与拉片接触的位置,不代表论文设备或实验现场。

五步都给分,拉好只占一步

先看论文表 2 和附录表 7。在 Sharpa Wave 机械手上,研究者把拉链任务拆成五步:提起并稳住袋子、靠近拉链头、抓住拉链头、拉好拉链、把袋子放进容器。每步一分,最后拉链要保持闭合。每种配置连续试二十次,满分恰好一百分。表头虽写着成功率,结合评分细则,π₀.₅ 这一行的 59% 应读成拿到了可得分数的 59%,不能换算为二十次里有多少次从头做到尾。

这个区别决定了我们能对机械手说什么。假设一只手每次都能稳住袋子、靠近并抓住拉链头,却总在拉动时脱手,它已经能拿六十分,完整完成的次数仍然是零。这只是说明计分方式的例子。真实的五十九分可能对应很不一样的动作过程;即使比基线多出二十分,也不能据此断定新增的分都来自成功拉动。要定位触觉究竟帮在哪一步,需要每一步的通过次数。尤其值得对照的是,已经抓住拉链头的那些尝试,最后有多少真正把袋口合上。

为什么加了信号反而会掉分

不同指尖记录同一次挤压,交给模型的数字未必相像。压阻传感器利用受压后的电阻变化,磁式传感器感知磁场变化,视触觉传感器则借助成像观察接触形变。即使两个测点都给出很强的响应,测点是在拇指还是食指、响应是一瞬间的尖峰还是持续了一段时间,对下一步动作都有影响。一个策略拿到更多读数,同时也多了一项工作:从有限的动作示范里学会怎么读它们。

团队的推理仓库解释了另一种分工。研究者先把触觉测点放进统一的指尖坐标,用适配不同传感原理的输入模块整理读数,再让一个共享模型看一段时间内的接触变化。训练时遮掉部分信息,让模型依据周围线索预测缺失部分的内部表示。学成后固定这个编码器,动作策略才来学习如何使用它的输出。拿到的特征带有手指、位置和时间的信息,却不是一张逐点标好“这里正在打滑”的答案表。实验对照支持编码方式影响得分;单看那次掉分,还不能诊断是噪声、示范数量还是其他因素让原始输入吃了亏。

换个动作,原始读数也会赢

把视线从拉链移到同一张表的退存储卡任务,三组的次序就变了。同样是 π₀.₅,不读触觉得 47 分,直接读信号得 69 分,用编码器得 64 分。两种用法都比基线好,保留原始读数的一组反倒更高。这提醒我们,某种表示擅长在不同任务间复用,并不保证它保留了每个动作最需要的细节。至于退卡时究竟哪段信息起了作用,还需把按压解锁与取出卡片的记录分开看。

作者在两种机械手上共评了二十六个手与任务的组合,配四种策略,得到一百零四个比较单元;按作者统计,编码触觉在其中八十九个表现最好。这里的分母是策略和任务的组合数,不是一百零四次独立的真机试验。任务本来就是为考察接触而选的,多种策略还会遇到同一个物件。因此,这个统计更适合回答“一组特意挑出的精细动作是否普遍受益”,不适合拿来估计机器人在家庭杂务里用得上触觉的概率。真机协议与逐项成绩

换一只手,哪些工作还得重做

对准备接入自己设备的实验室,数据接口说明比演示更有参考价值。新传感器的坐标轴、单位、测点与手指的对应关系,都要由使用者确认。把左右手弄反,输入数组的形状仍然可以完全正确,模型却会把接触放到错误的位置。仓库给出的是冻结编码器的推理工具和权重入口;真机对照里的动作策略仍用任务示范训练。能沿用编码器,和新机械手装上就会拉拉链,是两件不同的事。

我更想看到下一组实验公布两列数字:二十次里有几次真正拉好了,又有几次抓住后滑脱。如果在不同拉片和袋口松紧度下,编码组仍在抓稳之后少失手,就更有理由把改善归到接触控制;如果主要是更早接近袋口,研究问题就该转向前面的动作。现有材料来自同一团队,本次检索未找到独立真机复现,本文也未运行模型。五十九分已经足以让人认真对待触觉表示,至于它帮机械手跨过了哪一道坎,还得回到那五步里找。

参考资料

  1. LingBot-Touch 预印本:作者、摘要与版本时间
  2. 论文全文公开副本:真机协议、表 2 与附录表 7
  3. Robbyant:LingBot-Touch 推理仓库
  4. Robbyant:传感器数据接口与标定说明

作者作品推广

除了写技术博客,我也在做一些让日常更有条理的小工具,欢迎了解我独立开发的两款 App:

  • 日常收支小记:记下收支,也给每一笔钱安排好去处。记录日常账目,安排预算与储蓄目标。在 App Store 了解。
  • 一事微光:从一件小事开始,让今天多一点微光。按当下的时间和精力选择行动,记录完成后的感受与发现。在 App Store 了解。

更多技术文章和个人作品,欢迎来我的网站:zffjzz.top。也欢迎把使用感受告诉我,让这些小工具慢慢变得更好。