AI 前沿觀察:人物、突破與證據|解讀日期:2026 年 11 月 12 日|資料截至北京時間 20:34:54
機械手已經碰到了拉鏈頭,接下來該收緊手指,還是沿著袋口拉動?在 Robbyant 團隊的一項真機實驗裡,同一種動作策略不讀觸覺時拿到 39 分,直接讀傳感器信號時跌到 15 分,先用 LingBot-Touch 編碼再讀,卻升到 59 分。三組用的是同一批示範。要理解這次提升,得把兩個問題分開:指尖多提供了什麼信息,實驗又給哪些動作記了分?預印本首版提交於 11 月 9 日 18:12 UTC,即北京時間 11 月 10 日凌晨;這是提交日期,論文未給出這組試驗的具體日期。

原創示意圖,展示指尖與拉片接觸的位置,不代表論文設備或實驗現場。
五步都給分,拉好只佔一步
先看論文表 2 和附錄表 7。在 Sharpa Wave 機械手上,研究者把拉鏈任務拆成五步:提起並穩住袋子、靠近拉鏈頭、抓住拉鏈頭、拉好拉鏈、把袋子放進容器。每步一分,最後拉鏈要保持閉合。每種配置連續試二十次,滿分恰好一百分。表頭雖寫著成功率,結合評分細則,π₀.₅ 這一行的 59% 應讀成拿到了可得分數的 59%,不能換算為二十次裡有多少次從頭做到尾。
這個區別決定了我們能對機械手說什麼。假設一隻手每次都能穩住袋子、靠近並抓住拉鏈頭,卻總在拉動時脫手,它已經能拿六十分,完整完成的次數仍然是零。這只是說明計分方式的例子。真實的五十九分可能對應很不一樣的動作過程;即使比基線多出二十分,也不能據此斷定新增的分都來自成功拉動。要定位觸覺究竟幫在哪一步,需要每一步的通過次數。尤其值得對照的是,已經抓住拉鏈頭的那些嘗試,最後有多少真正把袋口合上。
為什麼加了信號反而會掉分
不同指尖記錄同一次擠壓,交給模型的數字未必相像。壓阻傳感器利用受壓後的電阻變化,磁式傳感器感知磁場變化,視觸覺傳感器則藉助成像觀察接觸形變。即使兩個測點都給出很強的響應,測點是在拇指還是食指、響應是一瞬間的尖峰還是持續了一段時間,對下一步動作都有影響。一個策略拿到更多讀數,同時也多了一項工作:從有限的動作示範裡學會怎麼讀它們。
團隊的推理倉庫解釋了另一種分工。研究者先把觸覺測點放進統一的指尖座標,用適配不同傳感原理的輸入模塊整理讀數,再讓一個共享模型看一段時間內的接觸變化。訓練時遮掉部分信息,讓模型依據周圍線索預測缺失部分的內部表示。學成後固定這個編碼器,動作策略才來學習如何使用它的輸出。拿到的特徵帶有手指、位置和時間的信息,卻不是一張逐點標好“這裡正在打滑”的答案表。實驗對照支持編碼方式影響得分;單看那次掉分,還不能診斷是噪聲、示範數量還是其他因素讓原始輸入吃了虧。
換個動作,原始讀數也會贏
把視線從拉鏈移到同一張表的退存儲卡任務,三組的次序就變了。同樣是 π₀.₅,不讀觸覺得 47 分,直接讀信號得 69 分,用編碼器得 64 分。兩種用法都比基線好,保留原始讀數的一組反倒更高。這提醒我們,某種表示擅長在不同任務間複用,並不保證它保留了每個動作最需要的細節。至於退卡時究竟哪段信息起了作用,還需把按壓解鎖與取出卡片的記錄分開看。
作者在兩種機械手上共評了二十六個手與任務的組合,配四種策略,得到一百零四個比較單元;按作者統計,編碼觸覺在其中八十九個表現最好。這裡的分母是策略和任務的組合數,不是一百零四次獨立的真機試驗。任務本來就是為考察接觸而選的,多種策略還會遇到同一個物件。因此,這個統計更適合回答“一組特意挑出的精細動作是否普遍受益”,不適合拿來估計機器人在家庭雜務裡用得上觸覺的概率。真機協議與逐項成績
換一隻手,哪些工作還得重做
對準備接入自己設備的實驗室,數據接口說明比演示更有參考價值。新傳感器的座標軸、單位、測點與手指的對應關係,都要由使用者確認。把左右手弄反,輸入數組的形狀仍然可以完全正確,模型卻會把接觸放到錯誤的位置。倉庫給出的是凍結編碼器的推理工具和權重入口;真機對照裡的動作策略仍用任務示範訓練。能沿用編碼器,和新機械手裝上就會拉拉鏈,是兩件不同的事。
我更想看到下一組實驗公佈兩列數字:二十次裡有幾次真正拉好了,又有幾次抓住後滑脫。如果在不同拉片和袋口鬆緊度下,編碼組仍在抓穩之後少失手,就更有理由把改善歸到接觸控制;如果主要是更早接近袋口,研究問題就該轉向前面的動作。現有材料來自同一團隊,本次檢索未找到獨立真機復現,本文也未運行模型。五十九分已經足以讓人認真對待觸覺表示,至於它幫機械手跨過了哪一道坎,還得回到那五步裡找。
參考資料
- LingBot-Touch 預印本:作者、摘要與版本時間
- 論文全文公開副本:真機協議、表 2 與附錄表 7
- Robbyant:LingBot-Touch 推理倉庫
- Robbyant:傳感器數據接口與標定說明
作者作品推廣
除了寫技術博客,我也在做一些讓日常更有條理的小工具,歡迎瞭解我獨立開發的兩款 App:
- 日常收支小記:記下收支,也給每一筆錢安排好去處。記錄日常賬目,安排預算與儲蓄目標。在 App Store 瞭解。
- 一事微光:從一件小事開始,讓今天多一點微光。按當下的時間和精力選擇行動,記錄完成後的感受與發現。在 App Store 瞭解。
更多技術文章和個人作品,歡迎來我的網站:zffjzz.top。也歡迎把使用感受告訴我,讓這些小工具慢慢變得更好。