案例簡介

本案例中，智元機器人基于 NVIDIA Isaac GR00T-Teleop & GR00T-Mimic 提供的遠程仿真操作功能和強大的模仿學習合成數(shù)據(jù)生成工作流，打造了支持高保真模擬和多維度泛化的大型機器人仿真框架 Genie Sim，并推出 AgiBot Digital World（agibot-digitalworld.cn）機器人海量仿真數(shù)據(jù)集。

本案例中使用了 NVIDIA Isaac GR00T。

NVIDIA Isaac GR00T

加速仿真數(shù)采方案

模仿學習是機器人技術(shù)發(fā)展的關(guān)鍵方向之一，通過觀察和模仿人類專家的示范，機器人能夠快速掌握新技能。然而，高質(zhì)量示范數(shù)據(jù)的采集往往耗時費力且成本高昂，這嚴重制約了機器人學習的效率。

為了解決這一難題，智元機器人推出了基于 NVIDIA Isaac GR00T-Teleop 和 GR00T-Mimic 技術(shù)的仿真大規(guī)模數(shù)據(jù)采集方案和海量開源仿真數(shù)據(jù)集 AgiBot Digital World，更高效地解決機器人數(shù)據(jù)稀缺的問題。

智元的仿真數(shù)據(jù)生成方案借助 Isaac Sim 高度逼真的視覺渲染和精確的物理引擎，精準還原機器人的訓練環(huán)境，并結(jié)合 GR00T-Teleop 遠程操作和 GR00T-Mimic 的數(shù)據(jù)增廣技術(shù)，快速生成高質(zhì)量且多樣化的專家軌跡數(shù)據(jù)。

這不僅大幅降低了數(shù)據(jù)采集的成本和時間，還為機器人模型訓練提供了豐富的仿真數(shù)據(jù)資源，幫助機器人更高效地融入人類社會，推動各行各業(yè)的智能化轉(zhuǎn)型。

運用 GR00T-Teleop

加速仿真機器人數(shù)據(jù)采集

智元機器人利用 GR00T-Teleop 打造了更加高效易用的仿真遙操作方法。GR00T-Teleop 是 NVIDIA Project GR00T 的核心模塊之一，它通過 VR/AR 設(shè)備實現(xiàn)實時遠程操控，將遠程操作數(shù)據(jù)流傳輸?shù)?NVIDIA Isaac Sim 和 NVIDIA Isaac Lab，使操作者能夠精準控制機器人在仿真環(huán)境中完成復雜動作和任務(wù)，為模仿學習提供高質(zhì)量的仿真訓練數(shù)據(jù)，顯著降低了機器人技能開發(fā)的門檻。

GR00T-Teleop 支持基于 Apple Vision Pro 的遠程操作，智元在此基礎(chǔ)上與 NVIDIA 聯(lián)合開發(fā)，推出了適配 PICO 的遠程操作解決方案。這一創(chuàng)新方案已成功集成到 Genie Sim 仿真框架，為大規(guī)模仿真數(shù)據(jù)生產(chǎn)與開源計劃提供了強大的數(shù)據(jù)采集支持，進一步拓寬了技術(shù)的應(yīng)用場景，讓機器人數(shù)據(jù)采集更加高效便捷。

Genie Sim 基于 GR00T-Teleop 的仿真遠程操作架構(gòu)

GR00T-Teleop 中的仿真遠程操作

用戶通過佩戴 PICO VR 設(shè)備，利用手柄實時控制 Isaac Sim 中智元 AgiBot G1 機器人的手臂、腰部和底盤運動。其中，手臂的控制最為復雜，系統(tǒng)需要實時讀取機器人的當前關(guān)節(jié)角度。當用戶移動手柄時，控制指令會同步發(fā)送到仿真系統(tǒng)。基于逆運動學算法，系統(tǒng)會結(jié)合當前關(guān)節(jié)角度與指令數(shù)據(jù)，實時解算出目標關(guān)節(jié)角度，并驅(qū)動仿真環(huán)境中的機器人完成精準的關(guān)節(jié)位姿控制。

這一過程實現(xiàn)了從指令輸入到動作執(zhí)行的高效閉環(huán)，充分展現(xiàn)了遠程操作技術(shù)在機器人仿真控制中的核心作用與強大能力。

通過遠程操作采集仿真數(shù)據(jù)

通過 GR00T-Mimic

實現(xiàn)從人工示教到海量泛化

在 GR00T-Teleop 為具身大模型訓練提供高效且擬人的仿真數(shù)據(jù)采集功能的基礎(chǔ)上，智元機器人還運用 GR00T-Mimic 以少量人類示范生成大量合成運動軌跡數(shù)據(jù)，實現(xiàn)數(shù)據(jù)采集規(guī)模的指數(shù)級擴展。

智元機器人將 GR00T-Mimic 深度集成至 Genie Sim 仿真框架中。通過對 GR00T-Teleop 采集的初始軌跡數(shù)據(jù)進行智能泛化，智元仿真團隊成功將其擴展為數(shù)千條高精度運動軌跡。這些軌跡在 Isaac Sim 仿真環(huán)境中進行自動化驗證后，被高效轉(zhuǎn)化為具身大模型的訓練數(shù)據(jù)。

這一創(chuàng)新流程不僅大幅提升了仿真數(shù)據(jù)采集效率，更為具身大模型訓練提供了前所未有的高質(zhì)量仿真數(shù)據(jù)集，為智能機器人的算法研發(fā)打造了堅實的數(shù)據(jù)基礎(chǔ)。

使用 GR00T-Mimic 生成大量合成軌跡

智元 Genie Sim：

加速機器人開發(fā)的仿真框架

智元機器人的 Genie Sim 仿真框架通過深度集成 GR00T-Teleop 和 GR00T-Mimic 技術(shù)，結(jié)合大規(guī)模、高精度的三維資產(chǎn)庫，為開發(fā)者提供了高效的數(shù)據(jù)生成能力。

基于 NVIDIA 的強大計算平臺和智元的創(chuàng)新應(yīng)用，開發(fā)者能夠在短時間內(nèi)積累海量機器人仿真數(shù)據(jù)，顯著降低數(shù)據(jù)采集成本，同時提升數(shù)據(jù)多樣性與質(zhì)量。這一能力為機器人模型的訓練與優(yōu)化奠定了堅實基礎(chǔ)。

此外，智元機器人的仿真框架構(gòu)建了從軌跡生成、模型訓練、基準測試到部署驗證的完整評估閉環(huán)，并通過高效的仿真工具鏈，幫助用戶快速驗證算法性能并優(yōu)化模型。無論是簡單的抓取任務(wù)還是復雜的長程操作，Genie Sim 都能提供高度還原的仿真環(huán)境與精準的評測指標，助力開發(fā)者高效完成機器人技術(shù)的開發(fā)與迭代。

通過與 NVIDIA 的深度合作，智元進一步提升了仿真框架的性能與可擴展性，為機器人技術(shù)的創(chuàng)新與應(yīng)用落地提供了強有力的支持。