XDOF 押注機械人 AI 最笨重嗰層：真人遙控同數據標註
LLM 食網上文字，機械人要食真人動作同失敗片段
XDOF 今日正式出 stealth，TechCrunch 話佢已籌到 7000 萬美元，投資者包括 Thrive、Spark、a16z、Lux 同 WndrCo，團隊約 60 人。CEO Philipp Wu 聲稱有 20 個客戶，當中有幾間 frontier AI lab，但客戶名單未公開。呢個故事值得睇，因為佢暴露咗一個老問題：機械人唔會靠網上文字自動變醒。
數據唔係 scrape 得返嚟
LLM 可以喺網上食文字、程式碼、圖片 caption，雖然版權同質素有爭議，但量係現成。機械人學開抽屜、摺衫、執細件嘢，唔止要睇到畫面，仲要知道手臂、關節、力度、相機角度、失敗時發生咩事。YouTube 影片或者臨時拍低嘅人手操作，對模型嚟講太薄；真係可用嘅 robot data，通常要真人用 teleoperation 操作同一套硬件，一邊做一邊記錄。
圖片：XDOF
XDOF 賣嘅係 pipeline
XDOF 嘅前身脈絡係 UC Berkeley。Wu 同 Fred Shentu 之前做過 GELLO，論文將重點放喺低成本、易用嘅 robot arm 遙控裝置，目的係令研究者可以大規模收集 human demonstration。XDOF 而家將呢件事產品化：幫客戶建數據收集工具、teleoperator 訓練、清洗、annotation、evaluation。聽落好苦工，但正正係 foundation model 走入物理世界前面嗰段地基。
ABC-130K 係示範品
作為 credibility play，XDOF 同 UC Berkeley 相關團隊放出 ABC-130K。官方頁話呢個 open-source dataset 有 13 萬多段 bimanual teleoperation episodes、195 個雙臂操作任務，ABC project page 亦寫到總量約 3,500 小時，涵蓋摺盒、插入、工具使用等任務。呢啲數字唔代表機械人即刻識做家務，但代表學界第一次有比較成規模、同一 stack 下收返嚟嘅操作數據可以試。
點解大 lab 會外判
OpenAI CEO Sam Altman 5 月 31 日喺 X 話 OpenAI Robotics 招 full-stack hardware、ops、systems 同 ML 工程師，短期目標係幫 skilled workers 做 infrastructure，長遠想像係個人機械人。Figure 等 humanoid 公司亦都追緊類似方向。問題係 frontier lab 擅長嘅係模型、GPU、推理 infra；幾百部機械臂、幾百名 operator、校準、維修、安全 SOP、任務 rubric，呢堆更似工場營運。XDOF 押注嘅，就係 AI lab 想要結果但唔想自己管呢堆苦工。
對開發者嘅啟示
呢件事對做 AI 工具鏈嘅人有個好直接訊號：下一輪 physical AI 唔只需要更大 model，仲需要 data ops、simulation、annotation UI、sensor sync、dataset versioning、evaluation harness。以前 prompt engineering 可以快試快改；機械人每一個錯誤都可能撞爛夾具、跌壞零件、令 operator 要重做。軟件世界嘅 CI/CD，去到機械人世界就變成硬件校準、場景復現同安全回滾。
我會將 XDOF 呢單當做一個溫度計：robotics AI 熱，唔係因為 demo 片又靚咗，係因為有人願意為枱底下嘅數據供應鏈付錢。客戶名單未公開、7000 萬美元融資同最大 dataset 呢啲 claim 都要打折睇；但方向合理。LLM 時代最值錢嘅可能係數據同算力，physical AI 時代可能再加多一樣：邊個控制到真實世界入面可重複、可標註、可評估嘅動作。
參考來源
- TechCrunch — Collecting robot training data is dirty, unglamorous work. Some AI labs are already paying XDOF to do it. — original report
- ABC-130K: The largest open source teleoperation dataset | Blog | XDOF — XDOF 官方 blog，確認 ABC-130K 規模、任務數、Apache 2.0 同 dataset 發布脈絡。
- Scalable Behavior Cloning with Open Data, Training, and Evaluation — ABC project page，確認 3,500 小時、13 萬多段 episodes、近 200 個任務等研究背景。
- GELLO: A General, Low-Cost, and Intuitive Teleoperation Framework for Robot Manipulators — GELLO 論文，提供 XDOF 創辦人過往 teleoperation 研究背景。
- Sam Altman on X: OpenAI Robotics is hiring — OpenAI Robotics 重新招人同 physical-world AI 方向嘅 primary source。
- News | Figure — 用嚟比對 humanoid robotics 公司主打 Figure 03、Helix 同 logistics/home tasks 嘅行業脈絡。
本文根據原文及公開資料整理；資料有出入時，以原文及官方資料為準。
