一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

NVIDIA Isaac Sim滿足模型的多樣化訓(xùn)練需求

NVIDIA英偉達(dá)企業(yè)解決方案 ? 來源:NVIDIA英偉達(dá)企業(yè)解決方案 ? 2024-11-23 14:55 ? 次閱讀

光輪智能借助NVIDIA Isaac Sim,通過 3D 生成與建模技術(shù)構(gòu)建高度逼真的虛擬場景,將現(xiàn)實(shí)世界的復(fù)雜場景抽象并轉(zhuǎn)化為高質(zhì)量的訓(xùn)練數(shù)據(jù)源,從而更有效地滿足模型的多樣化訓(xùn)練需求。

AI 正從以算法中心向以數(shù)據(jù)為中心的時(shí)代演進(jìn)。高質(zhì)量且豐富的訓(xùn)練數(shù)據(jù),已成為推動(dòng)創(chuàng)新的核心資源。特別是在具身智能應(yīng)用中,數(shù)據(jù)的稀缺極大限制了模型能力的提升和潛在應(yīng)用的拓展。傳統(tǒng)數(shù)據(jù)采集方式成本高昂、耗時(shí)漫長,例如谷歌的 RT1 和 RT2 項(xiàng)目共使用了 13 臺(tái)機(jī)器人,耗時(shí) 17 個(gè)月才完成數(shù)據(jù)收集,顯然難以支撐具身智能的發(fā)展需求。

因此,構(gòu)建數(shù)據(jù)金字塔已成為突破數(shù)據(jù)瓶頸的關(guān)鍵。數(shù)據(jù)金字塔的根基由海量的非結(jié)構(gòu)化網(wǎng)絡(luò)數(shù)據(jù)組成,頂端由采集成本高昂的少量真實(shí)數(shù)據(jù)構(gòu)成,有利于智能體高效且直接地進(jìn)行知識(shí)遷移。合成數(shù)據(jù)的加入填補(bǔ)了前兩者間的空缺,在采集成本、可泛化性與知識(shí)遷移方面擁有明顯優(yōu)勢。真實(shí)數(shù)據(jù)、互聯(lián)網(wǎng)數(shù)據(jù)與合成數(shù)據(jù)相互補(bǔ)充,共同構(gòu)建了具身智能體訓(xùn)練的堅(jiān)實(shí)基礎(chǔ)。合成數(shù)據(jù)的引入不僅有效降低了數(shù)據(jù)采集成本,還通過高度擬真的物理模擬,提供了強(qiáng)大的泛化能力,為智能體在多樣化場景中的應(yīng)用打下基礎(chǔ)。

打造高質(zhì)量、可交互、可擴(kuò)展的

具身智能仿真資產(chǎn)庫與仿真訓(xùn)練平臺(tái)

具身智能的關(guān)鍵目標(biāo)之一是實(shí)現(xiàn)高度的通用性,使智能體能夠在復(fù)雜場景中靈活執(zhí)行多種任務(wù)。這種泛化能力的實(shí)現(xiàn)要求智能體具備對(duì)空間的深度認(rèn)知,包括實(shí)時(shí)理解與適應(yīng)環(huán)境中物體的位置、關(guān)系及動(dòng)態(tài)變化。相較于傳統(tǒng)的任務(wù)特定型智能體,具身智能體必須在陌生環(huán)境中迅速識(shí)別并推理出空間結(jié)構(gòu)、時(shí)序事件及其相互關(guān)系,以有效適應(yīng)任務(wù)。

NVIDIA Isaac Sim 為光輪智能生產(chǎn)合成數(shù)據(jù)提供了強(qiáng)大支持。Isaac Sim 通過物理驅(qū)動(dòng)的虛擬環(huán)境,支持智能體算法的設(shè)計(jì)、模擬與測試。借助NVIDIA PhysX 5高級(jí) GPU 物理模擬技術(shù),平臺(tái)實(shí)現(xiàn)了實(shí)時(shí)光線和路徑追蹤的逼真效果,并通過 MDL 材料定義支持物理渲染,使開發(fā)者能夠基于通用場景描述(OpenUSD)構(gòu)建自定義模擬器,提供真實(shí)的物理反饋和高度還原的交互體驗(yàn)。同時(shí),平臺(tái)還支持多種開放標(biāo)準(zhǔn)和格式,如 USD、FBX、OBJ 等,便于用戶導(dǎo)入和導(dǎo)出不同的 3D 模型和場景。

光輪智能基于 Isaac Sim 構(gòu)建的合成數(shù)據(jù)解決方案,能夠高效提升具身智能公司的模型能力。光輪智能已積累了豐富的 OpenUSD 格式場景資產(chǎn),支持任務(wù)級(jí)、物體級(jí)、場景級(jí)的物理可交互資產(chǎn)、數(shù)據(jù)的可控生成與泛化,并基于驗(yàn)證平臺(tái)進(jìn)行合成數(shù)據(jù)真實(shí)性和效用性的評(píng)測。

案例 1. 交互過程的物理參數(shù)隨機(jī)化與動(dòng)態(tài)真實(shí)性

使用高質(zhì)量、可泛化的

合成數(shù)據(jù)助力模型性能提升

基于“Real2Sim2Real+Realism Validation”的核心技術(shù)棧,光輪智能推出基于 3D 混合渲染,具有物理真實(shí)、高度交互的合成數(shù)據(jù)產(chǎn)線及以數(shù)據(jù)為中心的端到端智能體算法解決方案。光輪智能旨在利用合成數(shù)據(jù)放大人類示范效用,通過閉環(huán)仿真加速 Self-play RL,加速具身智能落地。

光輪智能的仿真框架使用基于 3DGS 技術(shù)重建的場景,并通過場景資產(chǎn)的混合渲染,顯著提升了訓(xùn)練場景的泛化能力。同時(shí),真實(shí)的物理引擎能提供準(zhǔn)確的反饋,助力模型實(shí)現(xiàn)更高效的知識(shí)遷移。高質(zhì)量的仿真框架支持光輪智能在模型訓(xùn)練方面積極創(chuàng)新,通過在仿真器中直接訓(xùn)練等方式,進(jìn)一步提升模型性能。

案例 2. 場景和物體元素的隨機(jī)泛化

案例 3. 3D 混合渲染用于具身智能模型訓(xùn)練與評(píng)測

光輪智能致力于為企業(yè)推動(dòng) AI 落地提供合成數(shù)據(jù)解決方案,重點(diǎn)從具身智能場景切入,結(jié)合生成式 AI 和仿真技術(shù),提供多模態(tài)、高質(zhì)量、可泛化、可擴(kuò)展、全鏈路的數(shù)據(jù),助力 AI 在真實(shí)世界部署,加速具身智能行業(yè)發(fā)展。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • NVIDIA
    +關(guān)注

    關(guān)注

    14

    文章

    5188

    瀏覽量

    105427
  • 模型
    +關(guān)注

    關(guān)注

    1

    文章

    3464

    瀏覽量

    49816
  • 具身智能
    +關(guān)注

    關(guān)注

    0

    文章

    98

    瀏覽量

    333

原文標(biāo)題:借助 NVIDIA Isaac Sim,光輪智能加速具身智能研發(fā)落地

文章出處:【微信號(hào):NVIDIA-Enterprise,微信公眾號(hào):NVIDIA英偉達(dá)企業(yè)解決方案】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    如何找到合適的 MCU?滿足應(yīng)用的多樣化需求

    選擇合適的微控制器 (MCU) 是創(chuàng)建高效、經(jīng)濟(jì)高效且可擴(kuò)展的應(yīng)用的關(guān)鍵步驟。設(shè)計(jì)人員需要能夠確定一個(gè)平衡處理能力、功耗、內(nèi)存、模擬集成和外設(shè)支持的選項(xiàng),以滿足應(yīng)用的性能需求。 德州儀器 (TI
    的頭像 發(fā)表于 04-30 09:54 ?288次閱讀
    如何找到合適的 MCU?<b class='flag-5'>滿足</b>應(yīng)用的<b class='flag-5'>多樣化</b><b class='flag-5'>需求</b>

    NVIDIA技術(shù)驅(qū)動(dòng)帕西尼觸覺感知與人形機(jī)器人智能突破

    本案例中通過在 NVIDIA Isaac 平臺(tái)集成觸覺仿真器,借助 NVIDIA Isaac Sim 平臺(tái)的 3D 場景生成技術(shù)和
    的頭像 發(fā)表于 04-21 09:15 ?283次閱讀

    NVIDIA Isaac 是英偉達(dá)推出的綜合性機(jī)器人開發(fā)平臺(tái)

    特性、應(yīng)用場景及未來發(fā)展等方面進(jìn)行詳細(xì)解讀: 一、核心組件與功能 NVIDIA Isaac 平臺(tái)由多個(gè)模塊組件構(gòu)成,覆蓋從仿真到實(shí)際部署的全流程: Isaac
    的頭像 發(fā)表于 04-02 18:03 ?377次閱讀

    滿足多樣化需求的 MCX 連接器解決方案

    面對(duì)多樣化的市場需求,MCX 連接器充分發(fā)揮自身優(yōu)勢,為不同行業(yè)量身定制適配的解決方案。展望未來,隨著科技的持續(xù)創(chuàng)新與進(jìn)步,MCX 連接器必將繼續(xù)在各個(gè)領(lǐng)域發(fā)揮重要作用,以其可靠的性能為科技發(fā)展注入強(qiáng)勁動(dòng)力,推動(dòng)各行業(yè)邁向新的高度。
    的頭像 發(fā)表于 04-02 13:54 ?146次閱讀
    <b class='flag-5'>滿足</b><b class='flag-5'>多樣化</b><b class='flag-5'>需求</b>的 MCX 連接器解決方案

    NVIDIA發(fā)布全球首個(gè)開源人形機(jī)器人基礎(chǔ)模型Isaac GR00T N1

    NVIDIA 宣布推出一系列全新技術(shù),助力人形機(jī)器人開發(fā)。其中包括全球首個(gè)開源且完全可定制的基礎(chǔ)模型NVIDIA Isaac GR00T N1,該
    的頭像 發(fā)表于 03-20 14:34 ?503次閱讀

    NVIDIA宣布NVIDIA Isaac重要更新

    ,更為全球開發(fā)者提供了更加強(qiáng)大、高效的工具,以加速AI機(jī)器人的開發(fā)進(jìn)程。 NVIDIA Isaac是一個(gè)綜合性的平臺(tái),它集成了加速庫、應(yīng)用框架和AI模型等多種資源。這些組件協(xié)同工作,為開發(fā)者提供了一個(gè)從底層算法到上層應(yīng)用的全方位
    的頭像 發(fā)表于 01-17 14:45 ?425次閱讀

    簡述NVIDIA Isaac的重要更新

    在 2025 CES,NVIDIA 宣布了對(duì)NVIDIA Isaac的重要更新。NVIDIA Isaac 是一個(gè)由加速庫、應(yīng)用框架和 AI
    的頭像 發(fā)表于 01-17 09:57 ?613次閱讀
    簡述<b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b>的重要更新

    NVIDIA推出Isaac GR00T Blueprint

    用于合成數(shù)據(jù)的 Isaac GR00T 工作流以及 NVIDIA Cosmos 世界基礎(chǔ)模型,為通用人形機(jī)器人的開發(fā)注入強(qiáng)大動(dòng)力。
    的頭像 發(fā)表于 01-09 11:13 ?557次閱讀

    堅(jiān)米智能借助NVIDIA Isaac Lab加速四足機(jī)器人開發(fā)

    堅(jiān)米智能(中堅(jiān)科技)借助NVIDIA Isaac Lab平臺(tái),通過NVIDIA Isaac Sim的 3D 生成與建模技術(shù)構(gòu)建高度逼真的虛擬
    的頭像 發(fā)表于 12-29 14:01 ?650次閱讀

    博科測試IPO上市觀察:產(chǎn)品布局完善,可滿足多樣化檢測需求

    汽車測試試驗(yàn)系統(tǒng)是一個(gè)綜合性的體系,它專門用于對(duì)汽車整車及其零部件的性能進(jìn)行測試與檢測,其中包含了各種專業(yè)設(shè)備、系統(tǒng)以及相關(guān)的服務(wù)。為了滿足汽車領(lǐng)域客戶多樣化且個(gè)性的檢測需求,博科測
    的頭像 發(fā)表于 11-05 14:13 ?494次閱讀

    NVIDIA助力Figure發(fā)布新一代對(duì)話式人形機(jī)器人

    該初創(chuàng)公司展示了新型機(jī)器人,其使用 NVIDIA Isaac Sim 處理合成數(shù)據(jù),并使用基于 NVIDIA 加速計(jì)算進(jìn)行實(shí)時(shí)推理訓(xùn)練的生成
    的頭像 發(fā)表于 11-04 10:10 ?546次閱讀

    雙路設(shè)計(jì),滿足光伏電站與充電樁多樣化計(jì)量需求——安科瑞丁佳雯

    在當(dāng)今快速發(fā)展的可再生能源與電動(dòng)汽車領(lǐng)域,光伏電站與充電樁的計(jì)量需求日益多樣化且復(fù)雜。為了應(yīng)對(duì)這一挑戰(zhàn),DJSF1352-RN電表以其創(chuàng)新的雙路設(shè)計(jì)脫穎而出,成為滿足光伏電站與充電樁
    的頭像 發(fā)表于 09-09 12:54 ?384次閱讀
    雙路設(shè)計(jì),<b class='flag-5'>滿足</b>光伏電站與充電樁<b class='flag-5'>多樣化</b>計(jì)量<b class='flag-5'>需求</b>——安科瑞丁佳雯

    NVIDIA助力提供多樣、靈活的模型選擇

    在本案例中,Dify 以模型中立以及開源生態(tài)的優(yōu)勢,為廣大 AI 創(chuàng)新者提供豐富的模型選擇。其集成的 NVIDIAAPI Catalog、NVIDIA NIM和Triton 推理服務(wù)器產(chǎn)品,為
    的頭像 發(fā)表于 09-09 09:19 ?794次閱讀

    解析NVIDIA Isaac Sim 4.0的新功能

    由物理 AI 驅(qū)動(dòng)的 AI 機(jī)器人時(shí)代已經(jīng)來臨。物理 AI 模型能夠理解周圍環(huán)境,并在物理世界中自主完成復(fù)雜的任務(wù)。許多復(fù)雜任務(wù)都難以編程(如靈巧的操作和人形機(jī)器人在崎嶇的地形上運(yùn)動(dòng)),需要依賴在仿真環(huán)境中使用強(qiáng)化學(xué)習(xí)(RL)訓(xùn)練而成的生成式物理 AI
    的頭像 發(fā)表于 09-06 14:53 ?1112次閱讀
    解析<b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> <b class='flag-5'>Sim</b> 4.0的新功能

    【大語言模型:原理與工程實(shí)踐】大語言模型的預(yù)訓(xùn)練

    訓(xùn)練數(shù)據(jù)時(shí),數(shù)量、質(zhì)量和多樣性三者缺一不可。 數(shù)據(jù)的多樣性對(duì)于大語言模型至關(guān)重要,這主要體現(xiàn)在數(shù)據(jù)的類別和來源兩個(gè)方面。豐富的數(shù)據(jù)類別能夠提供多樣
    發(fā)表于 05-07 17:10