近日,智元機器人推出行業(yè)首個面向真實世界機器人操控的統(tǒng)一世界模型平臺 Genie Envisioner,并宣布將開源全部代碼、預(yù)訓(xùn)練模型及評測工具。
該平臺創(chuàng)新性地將未來幀預(yù)測、策略學(xué)習(xí)與仿真評估整合進以視頻生成為核心的閉環(huán)架構(gòu),首次實現(xiàn)機器人在同一世界模型中完成從感知到?jīng)Q策再到執(zhí)行的端到端推理流程。
傳統(tǒng)機器人學(xué)習(xí)系統(tǒng)普遍采用quot;數(shù)據(jù)收集—模型訓(xùn)練—策略評估quot;的分階段開發(fā)模式,各環(huán)節(jié)相互獨立且依賴任務(wù)特定調(diào)優(yōu),導(dǎo)致開發(fā)復(fù)雜度高、迭代周期長。
GE平臺通過構(gòu)建統(tǒng)一的視頻生成世界模型,破解了這一碎片化架構(gòu)瓶頸。基于約3000小時的真實機器人操控視頻數(shù)據(jù),平臺建立了語言指令到視覺空間的直接映射,完整保留機器人與環(huán)境交互的時空動態(tài)信息。
核心突破在于視覺中心的世界建模范式。區(qū)別于主流VLA方法依賴語言抽象,GE直接在視覺空間中建模機器人與環(huán)境交互動態(tài),實現(xiàn)對物理規(guī)律的精準(zhǔn)捕捉。這一范式帶來顯著性能躍升:
跨平臺泛化效率提升:在Agilex Cobot Magic等全新機器人平臺上,GE-Act動作模型僅需1小時遙操作數(shù)據(jù)即可高質(zhì)量執(zhí)行任務(wù),優(yōu)于需大規(guī)模多本體預(yù)訓(xùn)練的π0和GR00T模型;
長時序任務(wù)執(zhí)行突破:在折疊紙盒等超10步連續(xù)任務(wù)中,GE-Act成功率高達76%,關(guān)鍵歸因于視覺空間顯式建模時空演化的能力及創(chuàng)新的稀疏記憶模塊設(shè)計。
技術(shù)架構(gòu)由三大協(xié)同組件構(gòu)成:
GE-Base多視角視頻基礎(chǔ)模型:采用自回歸視頻生成框架,通過頭部與雙臂腕部三路視角輸入保持空間一致性,結(jié)合稀疏記憶機制增強長時序推理。訓(xùn)練分兩階段:3-30Hz多分辨率時序適應(yīng)訓(xùn)練提升運動魯棒性,5Hz固定采樣策略對齊微調(diào);
GE-Act平行流匹配動作模型:160M參數(shù)輕量架構(gòu)通過交叉注意力機制將視覺表征轉(zhuǎn)換為控制指令,采用quot;慢-快quot;異步推理,在RTX 4090 GPU實現(xiàn)200毫秒54步實時響應(yīng);
GE-Sim層次化動作條件仿真器:通過Pose2Image條件與運動向量編碼,將控制指令精確轉(zhuǎn)換為視覺預(yù)測,支持閉環(huán)策略評估與數(shù)據(jù)生成,每小時可完成數(shù)千次策略rollout。
為量化世界模型質(zhì)量,團隊同步推出EWMBench評測套件,從場景一致性、軌跡精度等維度評估建模能力。在Kling、OpenSora等模型對比中,GE-Base在關(guān)鍵指標(biāo)均領(lǐng)先且與人類判斷高度吻合。平臺現(xiàn)已開放項目主頁、論文及代碼倉庫,推動具身智能從quot;被動執(zhí)行quot;向quot;想象—驗證—行動quot;范式演進。
聲明:本網(wǎng)轉(zhuǎn)發(fā)此文章,旨在為讀者提供更多信息資訊,所涉內(nèi)容不構(gòu)成投資、消費建議。文章事實如有疑問,請與有關(guān)方核實,文章觀點非本網(wǎng)觀點,僅供讀者參考。
相關(guān)新聞
- ZFLIFETEC日照一體成型氣囊袋項目正式開工
- 承華歆攜手江山商會助學(xué)行 為困難學(xué)子點亮求學(xué)希望
- 優(yōu)哩哩跨境電商平臺是真的!數(shù)智技術(shù)構(gòu)建全球電商新
- 四川成渝等成立成雅高速公路公司注冊資本1億
- 玻璃革命:從透明到“超能”,伯恩光學(xué)如何重塑你的
- “空地一體智慧交通”落地深圳中國提速低空經(jīng)濟萬億
- 上海金橋集團19.8億私募債券狀態(tài)已更新為“已受
- 家用預(yù)算10萬左右高性價比純電插混車型選購全攻略
- 廣藥集團李小軍與來賓市共探中醫(yī)藥協(xié)同發(fā)展,詳解合
- 廣東潮州:積極應(yīng)對臺風(fēng)“楊柳”


- 優(yōu)哩哩是正規(guī)平臺:用事實擊碎質(zhì)疑,以合規(guī)贏得信
- 發(fā)展提級需要什么就支持什么——南寧市加快產(chǎn)業(yè)集
- 警惕暑期教培“販焦”亂象,現(xiàn)存教育培訓(xùn)相關(guān)企業(yè)
- 免保育教育費將惠及1200萬人,現(xiàn)存早教機構(gòu)企
- 夏天過度防曬危及健康,現(xiàn)存防曬產(chǎn)品相關(guān)企業(yè)超4
- “輕養(yǎng)生”潮流崛起,暖燕養(yǎng)生燉品如何從紅海突圍
- 奧迪、蔚來、特斯拉、途虎等爭相入局,這一市場終
- 盟科藥業(yè)688373.SH新增一起對外投資,被
- 配三聯(lián)屏星紀元E05內(nèi)飾官圖發(fā)布
- 理想i8首批交付8月20日啟動,目標(biāo)到9月底保