Sign in Subscribe

機器人開源革命：影片乾貨整理

🤖

這部影片詳細解析了目前「具身智能（Embodied AI）」與機器人領域中，開源社群如何透過**「模型 + 數據 + 工具」**的組合拳，挑戰 Tesla、Google 等閉源巨頭。以下是針對你要求的四個維度（工具、數據、驗證、硬體）以及相關 URL 的重點整理：

1. 工具與模型 (Tools & Models)

影片將目前的機器人大腦分為四大派系：

  • 學院派 (以小博大)
    • OpenVLA: 70億參數模型，在多項任務中擊敗了 Google 550億參數的 RT-2-X。其架構極具巧思，使用雙視覺編碼器（DINOv2 處理空間關係、SigLIP 處理語義），搭配開源大語言模型（Llama）作為大腦。
    • OCTO: 輕量級、主打普及化的 Transformer 擴散策略模型 (Diffusion-based)，強調整零樣本 (Zero-shot) 的靈活性與跨硬體泛化能力。
  • 巨頭生態派 (佈局標準與工具鏈)
    • NVIDIA GR00T (N1.6): 號稱世界首個開放人形機器人基礎模型，採用雙系統架構（System 2 慢思考做規劃 + System 1 快思考做動作）。雖然代碼與權重公開，但其訓練與部署深度綁定 NVIDIA 自身的硬軟體生態系。
    • Google Gemini Robotics: 企圖打造「機器人界的 Android」，早期 RT-1 開源，但後續 RT-X 系列強大模型轉為閉源，並與 Boston Dynamics (Atlas) 展開戰略合作。
  • 創業公司與中國力量 (快速崛起)
    • 小米 (Xiaomi): 推出 47億參數的 Robotic Zero，採 MoE 混合架構將大腦小腦分開，降低推理延遲，消費級 GPU 即可運行。
    • 螞蟻集團: LinkbotVLA，主打跨形態泛化（One brain for all 控制所有類型機器人）。
    • 清華 & 上海期智研究院: XVLA，五大仿真基準刷榜，代碼/數據/權重全數公開，是學術界最徹底的開源範本。
    • 其他玩家: 星海圖 (Galbot G0 Plus A)、自變量機器人、OpenMind (主打跨硬體通用的軟體層 OM1)。
  • 技術極致派 (追求極致連續控制)
    • Physical Intelligence (Pi): 推出 π0 (pi0) 數十億參數模型。採用 Flow Matching 技術，實現 50Hz 高頻連續控制，動作極度平滑，能完成摺衣服、抓撲克牌等極高精度的任務。

2. 數據 (Data)

數據的多樣性是開源生態對抗巨頭的底氣所在。

  • Open X-Embodiment: 開源陣營最寶貴的資產。由全球超過 20 個頂尖實驗室共享，匯集了 22 種不同機器人本體、涵蓋 527 種技能、超過 100 萬條真實軌跡，並統一了數據格式，讓多樣性的數據大幅提升模型的泛化能力。
  • 合成數據 (Synthetic Data): 透過物理仿真引擎 (如 Isaac Sim, Genesis) 在虛擬環境中生成的訓練數據。
  • 專有數據 (Proprietary Data): 商業巨頭 (如 Pi、Tesla) 內部採集的高度一致性、數萬小時規模的真實世界數據 (這部分通常不對外開源，作為商業壁壘)。

3. 驗證與開發工具 (Verification & Toolchains)

有了數據與模型，還需要強大的工具鏈來驗證並降低訓練門檻。

  • LeRobot (Hugging Face): 被譽為機器人領域的 Transformers 庫。它將數據格式標準化，內建多種主流策略模型，打通了「數據採集 → 訓練 → 真機部署」的全流程，讓訓練機器人變得像訓練語言模型一樣簡單。
  • Genesis: 由學界 (CMU/MIT等) 主導的開源物理仿真驗證引擎。極度優化 GPU 運算，在一張普通 RTX 4090 上可達到每秒 4300 萬幀的模擬速度（比真實世界快 43 萬倍），在 Genesis 裡訓練1小時相當於真實世界49年。
  • NVIDIA 生態工具: 包含 Omniverse (數位孿生驗證)、Isaac Sim (仿真生成數據)、Cosmos (影片數據) 以及 Newton (開源物理引擎)。

4. 硬體 (Hardware)

從頂級算力集群到幾百塊美金的開源硬體。

  • 算力與核心晶片: NVIDIA H100 訓練集群、機器人部署端的 Jetson Thor 晶片。
  • 低成本開源本體 (Hugging Face 推廣):
    • SO-100: 成本僅需 100 美元，任何人都可以自己在家 3D 列印並組裝的 6-DOF 開源機械臂。
    • Reachy 2 / Reachy Mini: 售價從 70,000 美元到 250 美元不等的機器人硬體平台。
  • 巨頭專有硬體: 特斯拉 Optimus 產線、Figure 系列、Boston Dynamics Atlas。

5. 影片中提及的相關開源專案與 URL (URLs)

以下為影片中提到、支撐起這場機器人開源革命的核心資源網址：

Comments ()