在具身 AI (EmbodiedAI) 迅猛發展的浪潮中,數據被視為突破的核心。如何為日益智能的機器人提供海量、多樣且高質量的訓練數據,加速其在現實世界的部署,是整個行業面臨的共同挑戰。傳統依賴人工演示或遙操作的數據收集方式,效率低下且受限于物理世界的諸多約束。而如今,光輪智能借助NVIDIAGR00T-Dreams,成功開創了一個全新的合成數據生成體系,賦能具身AI的快速發展。
NVIDIAGR00T-Dreams:虛擬世界的數據引擎
NVIDIAGR00T項目自2024年推出以來,目標就是為人形機器人構建一個強大的通用基礎模型,使其能夠處理多模態指令并根據過往交互產生合理的動作。隨著GR00TN1.5的推出,NVIDIA進一步提升了該模型的推理能力和任務執行能力,尤其是在物料搬運和制造等復雜任務中。
GR00T-Dreams基于NVIDIACosmos平臺,它能夠僅憑一張圖像和簡單的文本提示,在虛擬環境中快速生成海量、帶有精確動作標簽和逼真物理交互的合成數據。這為機器人訓練提供了豐富的數據源。
GR00T-Dreams 的核心優勢在于:它不依賴于真實世界的數據采集,而是利用生成式 AI 和世界基礎模型,在虛擬環境中生成逼真且多樣的數據,極大地減少了時間和物理限制。這種方式使得機器人可以在數小時內從零開始學習并掌握復雜的任務,極大地提高了訓練效率和泛化能力。
光輪智能利用 GR00T-Dreams進行合成數據革新
作為合成數據領域的創新者,光輪智能深度融合 GR00T-Dreams 的工作流,并將其應用于多種實際場景中。通過將 GR00T-Dreams 藍圖與自有技術相結合,光輪智能創造了一個高效、可擴展的合成數據生成平臺,從而大幅提升具身 AI 訓練的質量和速度。
高效仿真數據生成:
光輪智能將高質量仿真環境與 GR00T-Dreams 結合,成功構建了一個全新的數據生成平臺。光輪智能的虛擬環境包括各種復雜的場景和物理交互,例如廚房、倉庫、生產線等。機器人可以在這些仿真環境中,通過與物體的互動,學習到抓取、放置、折疊、搬運等多種操作。
通過 GR00T-Dreams,光輪智能能夠從一張圖像和簡單的指令生成數以百萬計的訓練數據,結合光輪智能自有的高質量可泛化的場景,將 GR00T-Dreams 的能力放大數百倍。這不僅節省了數據收集的成本和時間,還使得訓練數據質量更好、更加多樣化,覆蓋了機器人可能面臨的各種場景。
彌補真實遙操作數據的局限:
盡管真實遙操作數據可以提供相對精確的訓練信息,但由于其依賴人工操作,且每次采集都需要大量的時間和資源,可擴展性較差。借助GR00T-Dreams,光輪智能能夠生成大量虛擬數據,有效擴增和增強真實數據集。特別是在高風險或任務繁重的場景中,機器人得以在安全、高效的虛擬環境中自主訓練,顯著提升了在復雜多變物理環境中的適應性和執行能力。
精準高效的任務特定數據生成:
GR00T-Dreams能夠根據指令精確生成針對特定任務目標的數據集(如倉儲管理中的抓取、搬運、堆放)。這使光輪智能能夠為機器人定制高度相關的訓練數據,無需逐一錄制人工演示。在需要高精度執行的任務(如機械臂精細操作)中,這種能力尤為關鍵,能夠幫助機器人精確模仿動作并處理復雜情況,提升最終執行效率與準確性。
光輪智能新合成數據產線
微調 GR00T N1.5:精細化提升機器人能力
光輪智能不僅創新性地運用了 GR00T-Dreams 生成的合成數據,還建立了一條新的合成數據產線,用于對 GR00T N1.5 模型進行微調。這一產線結合了光輪智能的先進仿真技術、生成式 AI 及高質量數據生成平臺,成功提升了 GR00T N1.5 在復雜環境中的執行能力。
定制化訓練數據生成:光輪智能通過合成數據產線,能夠為 GR00T N1.5 提供更為定制化的訓練數據。這些數據不僅包括基礎的動作序列,還涵蓋了機器人與物體、環境之間復雜的物理交互。這使得 GR00T N1.5 可以在特定場景中進行細致的微調,例如在物料搬運、抓取精度等任務中,機器人能夠表現得更加穩定和高效。
高效的仿真到現實遷移:通過新合成數據產線生成的高質量數據,GR00T N1.5 可以在模擬環境中進行多輪訓練和微調,不僅減少了對真實環境中人工數據的依賴,還顯著縮短了訓練周期。微調后的 GR00T N1.5 在實際環境中的表現更加精確,能夠在更復雜的環境中執行任務,如智能家居、倉儲物流等實際應用場景。
擴展性與可持續性:光輪智能的新合成數據產線通過靈活配置和擴展,能夠根據不同任務的需求,快速生成大量任務特定的數據集。與傳統的數據收集方法相比,光輪智能的數據生成平臺不僅提升了數據的多樣性,還降低了長期維護的成本。此外,通過自動化生成數據并進行微調,光輪智能大幅提高了機器人在各種未知環境中的適應性和執行力,推動了具身 AI 技術的可持續發展。
光輪智能的創新應用:推動具身 AI 在現實場景中的落地
光輪智能不僅在合成數據生成上取得了突破,還將 GR00T-Dreams 的創新成果成功應用于多個具身 AI 領域,推動了機器人在現實環境中的快速部署。
智能家居與服務機器人:在家居環境中,光輪智能與 GR00T-Dreams 的結合推動了智能服務機器人技術的發展。通過合成數據生成,光輪智能不僅為機器人提供了大量高質量的家居任務訓練數據,還能夠模擬諸如掃地、擦桌、整理物品等復雜任務。在這些任務中,機器人能夠應對光線變化、物體位置變化等多變的環境因素,極大提升了家居機器人的智能化水平。
智慧農用機器人:在農業領域,光輪智能將 GR00T-Dreams 應用于農業機器人,例如草莓采摘任務。通過合成數據生成,光輪智能創建了高度逼真的虛擬農場環境,模擬草莓植株的生長狀態、果實成熟度、光照變化以及地形不平坦等因素。機器人能夠在這些仿真場景中學習精細的抓取動作,避免損傷果實,同時優化路徑規劃以提高采摘效率。
自動化倉儲與物流:光輪智能利用 GR00T-Dreams 在倉儲與物流領域進行了創新應用。通過在仿真環境中生成大量的倉庫布局、貨物位置和搬運任務數據,光輪智能成功提升了機器人在自動化倉儲中的表現。與傳統的數據采集方式相比,合成數據不僅提高了訓練的效率,還使得機器人能夠在面對未知布局和突發情況時迅速做出反應,提升了倉儲系統的自動化水平。
智能制造:在制造業領域,光輪智能通過與 GR00T-Dreams 的結合,助力機器人在智能生產線上的應用。通過高質量仿真數據的微調,機器人在多種生產任務中展示了高效與精確的表現,無論是在組裝、搬運還是物料處理過程中,都能穩定完成復雜的工作。
光輪智能基于 GR00T-Dreams生成 LeRobot 訓練數據,加速 LeRobot 走進千家萬戶
LeRobot 是由 Hugging Face 推出的開源機器人學習平臺,旨在降低機器人研發門檻并推動具身 AI 的普及。其主推的 SO-101 型號機械臂硬件構成全部開源,且性價比優異,為其成為消費級機器人走進千家萬戶奠定了基礎。
為了掀起機器人全民化浪潮,光輪智能瞄準家居廚房場景,希望通過微調 GR00T N1.5 并部署到 LeRobot 完成各項廚房任務。面對復雜的家居任務場景,通過真實遙操作并錄制的方式解決各個任務的數據采集問題,存在精細執行容易出錯、效率較低、成本較高等問題。因此,光輪智能利用 GR00T-Dreams,解決真實遙操作數據的規模效率問題。
在實踐中,光輪智能先通過少量真實采集數據以及仿真采集數據,對 GR00T-Dreams 進行微調,讓它對 LeRobot 的構造有全面正確的理解后,再進行真實環境特定任務的數據的生成,如下所示:
GR00T-Dreams 通過少量專家數據,結合 GR00T-Dreams 生成的數據,比例約為 1:10,光輪智能高效微調 GR00T N1.5 并實機部署到了 LeRobot 上,效果如視頻所示:
共創具身 AI 的未來
通過利用 GR00T-Dreams 生成的合成數據并結合新合成數據產線的微調技術,光輪智能推動了 GR00T N1.5 在多個實際應用場景中的能力提升。無論是在家居、倉儲還是制造業等領域,光輪智能的創新應用不僅加速了機器人的訓練過程,還顯著提升了其在復雜環境中的適應性和執行效率。這種基于合成數據的革新方法,徹底改變了傳統數據依賴的瓶頸,為具身 AI 的規模化部署鋪平了道路。
展望未來,NVIDIA將持續優化GR00T-Dreams技術棧,并深化與光輪智能等伙伴的合作,致力于推動機器人技術從虛擬仿真向現實世界的無縫遷移,實現更高水平的自主性和智能化。我們相信,通過GR00T這樣的基礎模型和GR00T-Dreams這樣的數據引擎,結合生態伙伴的創新應用,機器人將更好地融入人類社會,解決勞動力挑戰,提升生產效率,開啟物理AI新時代的無限可能。
-
機器人
+關注
關注
213文章
31073瀏覽量
222172 -
數據
+關注
關注
8文章
7335瀏覽量
94754 -
NVIDIA
+關注
關注
14文章
5592瀏覽量
109717
原文標題:NVIDIA GR00T-Dreams 助力光輪智能革新合成數據,推動具身 AI 現實場景落地
文章出處:【微信號:NVIDIA-Enterprise,微信公眾號:NVIDIA英偉達企業解決方案】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
NVIDIA發布Isaac GR00T-Dreams合成數據生成與神經仿真框架
通過NVIDIA Cosmos模型增強機器人學習
51Sim利用NVIDIA Cosmos提升輔助駕駛合成數據場景的泛化性
NVIDIA 通過云端至機器人計算平臺驅動人形機器人技術,賦能物理 AI
NVIDIA與光輪智能合作實現GR00T N1落地汽車工廠
借助OpenUSD與合成數據推動人形機器人發展
NVIDIA Isaac GR00T 詳細解析
NVIDIA發布GR00T N1基礎模型等方案,人形機器人開發效率顯著提升
NVIDIA Isaac GR00T N1開源人形機器人基礎模型+開源物理引擎Newton加速機器人開發
NVIDIA發布全球首個開源人形機器人基礎模型Isaac GR00T N1
深度解讀GR00T N1:英偉達開源人形機器人功能模型的技術革新與行業影響
技術分享 | AVM合成數據仿真驗證方案
NVIDIA 發布全球首個開源人形機器人基礎模型 Isaac GR00T N1——并推出加速機器人開發的仿真框架
智元機器人基于NVIDIA Isaac GR00T打造高效仿真數據采集方案
NVIDIA GR00T-Dreams助力光輪智能革新合成數據
評論