當仿真環(huán)境的真實性逼近物理世界,當場景構(gòu)建的效率以“自然對話”和“分鐘”來衡量,具身智能的研發(fā)范式將發(fā)生根本性改變。智元機器人在CES國際消費電子展首日正式發(fā)布首個大語言模型驅(qū)動的開源仿真平臺——Genie Sim 3.0?;贜VIDIA Isaac Sim ,Genie Sim 3.0融合三維重建與視覺生成,打造數(shù)字孿生級的高保真環(huán)境;首創(chuàng)大語言模型驅(qū)動的場景泛化技術(shù),讓萬級場景的生成只需幾分鐘;同步開源包含真實機器人作業(yè)場景的上萬小時仿真數(shù)據(jù)集;并構(gòu)建了覆蓋10萬+場景的多維度智能評估體系,為模型能力繪制全景畫像。
從數(shù)字資產(chǎn)生成、場景泛化、數(shù)據(jù)采集到自動評測的全流程功能,這一整套完整閉環(huán)的解決方案,將顯著加速模型訓(xùn)練驗證,降低對物理硬件的依賴,助力開發(fā)者與研究者的研發(fā)效率,推動具身智能的創(chuàng)新應(yīng)用。
項目開源地址
Github
github.com/AgibotTech/genie_sim
Modelscope
modelscope.cn/datasets/agibot_world/GenieSim3.0-Dataset
項目主頁
agibot-world.com/genie-sim

Genie Sim 3.0 仿真平臺架構(gòu)
01/
五大核心亮點
開啟具身仿真新紀元
數(shù)字孿生級高保真仿真環(huán)境
傳統(tǒng)仿真難以兼顧視覺逼真與物理真實。Genie Sim 3.0開創(chuàng)性地將三維重建、視覺生成技術(shù)與物理引擎深度融合,實現(xiàn)了視覺真實感與物理精確性的統(tǒng)一。
精準重建:依托 MetaCam手持3D激光掃描儀,結(jié)合高分辨率RGB、360° LiDAR點云與厘米級RTK定位,實現(xiàn)對真實環(huán)境的毫米級精準復(fù)刻。
視覺增強:利用視覺生成模型,智能合成新視角圖像增強3D重建,極大提升了仿真環(huán)境的視覺逼真度。
資產(chǎn)生成:對于任意物體,僅需一段60秒環(huán)拍視頻,即可快速生成帶精確網(wǎng)格的仿真模型,大幅提升場景構(gòu)建效率。

首創(chuàng)自然語言驅(qū)動的場景生成與泛化
告別手動編寫復(fù)雜邏輯的場景生成方式,在Genie Sim 3.0平臺中,開發(fā)者輸入自然語言指令即可驅(qū)動平臺在分鐘級內(nèi)自動生成、泛化成千上萬個訓(xùn)練與測試場景。
對話式創(chuàng)建:直接輸入指令「生成一份蛋白質(zhì)和維生素含量豐富的晚餐」,平臺自動理解并構(gòu)建出結(jié)構(gòu)化的仿真場景。
智能編輯與泛化:生成場景自帶結(jié)構(gòu)化信息與視覺預(yù)覽,可進一步通過對話進行場景增廣、細節(jié)增刪、布局調(diào)整,最終輸出滿足要求的仿真場景。

全量開源仿真數(shù)據(jù)集與高效采集方案
具身領(lǐng)域最大規(guī)模開源仿真數(shù)據(jù)集,涵蓋200余項任務(wù)、總時長上萬小時,為模型研發(fā)提供堅實的數(shù)據(jù)基石。
多維度數(shù)據(jù):數(shù)據(jù)集包含RGB-D、雙目視覺、全身關(guān)節(jié)狀態(tài)等多傳感器信息,并覆蓋背景、布局、光照、噪聲等多種泛化維度。
智能采集工具:平臺提供低延遲遙操作與自動任務(wù)編排雙模式采集,結(jié)合自動化標注實現(xiàn)高效數(shù)據(jù)生產(chǎn)。
獨創(chuàng)錯誤恢復(fù)機制:任務(wù)失敗后可自動回退至關(guān)鍵節(jié)點續(xù)采,將數(shù)據(jù)采集損耗降至最低。
零樣本Sim2Real:仿真數(shù)據(jù)訓(xùn)練完成后,實現(xiàn)零樣本遷移到真實世界,任務(wù)成功率超過真實數(shù)據(jù)訓(xùn)練。
左右滑動查看
超十萬仿真場景,勾勒模型全景能力畫像
模型評估不再僅限于“成功率”。Genie Sim Benchmark 3.0 構(gòu)建了基于 10萬+ 仿真場景的立體評估體系,結(jié)合LLM與VLM技術(shù),從多個維度為模型繪制深度能力畫像,是當前業(yè)界覆蓋最全面、最權(quán)威的具身智能模型評估基準。
自動化評測生成:評測指令與步驟可由LLM根據(jù)場景語義自動生成,并轉(zhuǎn)化為可執(zhí)行流程。
多維度深度評估:通過視覺語言模型(VLM),從語義理解、空間推理、操作精度、時序邏輯等多維度進行綜合評價,清晰揭示模型的能力邊界與薄弱環(huán)節(jié),指引明確的優(yōu)化方向。
左右滑動查看
虛實一致的評測結(jié)果:仿真與真實世界評測差異<10%,模型驗證無需真機部署,顯著提升算法評測效率。
左右滑動查看
涵蓋真實作業(yè)場景仿真
基于智元的規(guī)模化商用和工業(yè)落地經(jīng)驗,Genie Sim 3.0 是首個深度集成真實作業(yè)場景仿真數(shù)采與評測的開源平臺,打通從實驗室算法到工業(yè)應(yīng)用落地。
真實作業(yè)場景還原:平臺包含超市上貨、物流分揀、電力巡檢、物料搬運、產(chǎn)線裝配等多個工商業(yè)場景的機器人作業(yè)環(huán)境。
全流程仿真驗證:基于重建資產(chǎn)快速生成訓(xùn)練數(shù)據(jù)集與全流程評測系統(tǒng),大幅降低數(shù)據(jù)采集成本與算法驗證周期,實現(xiàn)“零硬件部署,全真實驗證”。
02/
建開源共享,共創(chuàng)智能未來
今天Genie Sim 3.0 仿真平臺將核心代碼、海量高價值數(shù)據(jù)集以及數(shù)字資產(chǎn)全面開源,向全球開發(fā)者、研究者與產(chǎn)業(yè)伙伴開放。無論您是高校實驗室的研究者,還是具身智能領(lǐng)域的算法工程師,或是來自制造業(yè)、物流業(yè)等領(lǐng)域的集成應(yīng)用專家,Genie Sim 3.0 都將成為您研發(fā)、測試與驗證的得力助手,為開發(fā)者搭建起 “所思即所得” 的創(chuàng)新舞臺,讓復(fù)雜的機器人開發(fā)變得更高效、更普惠,持續(xù)夯實通用機器人生態(tài)的數(shù)字基石。
2026年是具身智能規(guī)模化部署的關(guān)鍵之年,也是生態(tài)共榮的新起點。新年伊始,愿我們以 Genie Sim 3.0 為紐帶,匯聚全球創(chuàng)新力量,在虛擬與現(xiàn)實的交融中突破更多可能,讓智能機器人成為改變世界的新生產(chǎn)力。
祝每一位開發(fā)者靈感迸發(fā)、成果豐碩,與智元一同奔赴 “萬級部署、億級生態(tài)” 的嶄新未來!