GR00T-Dreams：虛擬世界的資料引擎
GR00T-Dreams 基於 NVIDIA Cosmos 平台構建，能夠僅憑一張圖像和簡單的文本提示，在虛擬環境中快速生成海量、帶有精確動作標籤和逼真物理交互的合成資料。這種方式使機器人可以在數小時內從零開始學習並掌握複雜任務，極大地提高了訓練效率和泛化能力。
NVIDIA GR00T 專案自 2024 年推出以來，目標就是為人形機器人構建強大的通用基礎模型。隨著 GR00T N1.5 的推出，NVIDIA 進一步提升了該模型的推理能力和任務執行能力，尤其是在物料搬運和製造等複雜任務中。
光輪智能利用 GR00T-Dreams 進行合成資料革新
作為合成資料領域的創新者，光輪智能深度融合 GR00T-Dreams 的工作流，並將其應用於多種實際場景中：
高效仿真資料生成：光輪智能將高品質仿真環境與 GR00T-Dreams 結合，從一張圖像和簡單指令生成數以百萬計的訓練資料，結合自有高品質可泛化場景，將 GR00T-Dreams 的能力放大數百倍。
彌補真實遙操作資料的局限：借助 GR00T-Dreams，光輪智能能夠生成大量虛擬資料，有效擴增和增強真實資料集，顯著提升機器人在複雜多變物理環境中的適應性和執行能力。
精准高效的任務特定資料生成：GR00T-Dreams 能夠根據指令精確生成針對特定任務目標的資料集（如倉儲管理中的抓取、搬運、堆放），在需要高精度執行的任務中尤為關鍵。
新合成資料產線微調 GR00T N1.5
光輪智能建立了一條新的合成資料產線，用於對 GR00T N1.5 模型進行微調：
定制化訓練資料生成：為 GR00T N1.5 提供定制化訓練資料，涵蓋機器人與物體、環境之間複雜的物理交互，使模型在物料搬運、抓取精度等任務中表現更加穩定高效。
高效的仿真到現實遷移：通過高品質合成資料，GR00T N1.5 在模擬環境中進行多輪訓練和微調，顯著縮短訓練週期，在實際環境中表現更加精確。
擴展性與可持續性：合成資料產線能夠根據不同任務需求快速生成大量任務特定資料集，提升了資料多樣性，降低了長期維護成本。
創新應用：推動具身 AI 在現實場景中的落地
光輪智能將 GR00T-Dreams 的創新成果成功應用於多個具身 AI 領域：
智能家居與服務機器人：模擬掃地、擦桌、整理物品等複雜任務，機器人能夠應對光線變化、物體位置變化等多變環境因素。
智慧農用機器人：應用於草莓採摘等農業任務，創建高度逼真的虛擬農場環境，機器人學習精細抓取動作，避免損傷果實。
自動化倉儲與物流：生成大量倉庫佈局、貨物位置和搬運任務資料，機器人在面對未知佈局和突發情況時能迅速做出反應。
智能製造：助力機器人在智能生產線上的應用，在組裝、搬運、物料處理等過程中穩定完成複雜工作。
加速 LeRobot 走進千家萬戶
光輪智能瞄准家居廚房場景，通過微調 GR00T N1.5 並部署到 Hugging Face 的LeRobot開源平台完成各項廚房任務。在實踐中，光輪智能先通過少量真實採集資料以及仿真採集資料對 GR00T-Dreams 進行微調，再生成特定任務資料。通過少量專家資料與 GR00T-Dreams 生成資料約 1:10 的比例，光輪智能高效微調 GR00T N1.5 並成功實機部署到了 LeRobot 上。
共創具身 AI 的未來
通過利用 GR00T-Dreams 生成的合成資料並結合新合成資料產線的微調技術，光輪智能推動了 GR00T N1.5 在多個實際應用場景中的能力提升。這種基於合成資料的革新方法，徹底改變了傳統資料依賴的瓶頸，為具身 AI 的規模化部署鋪平了道路。
展望未來，NVIDIA 將持續優化 GR00T-Dreams 技術棧，並深化與光輪智能等夥伴的合作，致力於推動機器人技術從虛擬仿真向現實世界的無縫遷移。通過 GR00T 這樣的基礎模型和 GR00T-Dreams 這樣的資料引擎，結合生態夥伴的創新應用，機器人將更好地融入人類社會，解決勞動力挑戰，提升生產效率，開啓物理 AI 新時代的無限可能。
WeChat
Profile