“洞悉 Omniverse”系列文章將重點(diǎn)介紹藝術(shù)家、開(kāi)發(fā)者和企業(yè)如何使用通用場(chǎng)景描述和 NVIDIA Omniverse 的最新技術(shù)改變其工作流程。

適用于合成運(yùn)動(dòng)數(shù)據(jù)的 NVIDIA Isaac GR00T Blueprint 大幅加快人形機(jī)器人的數(shù)據(jù)生成和訓(xùn)練速度。

人形機(jī)器人正在迅速成為現(xiàn)實(shí)。基于 NVIDIA Isaac GR00T 的人形機(jī)器人已開(kāi)始學(xué)習(xí)行走、操縱物體和與現(xiàn)實(shí)世界進(jìn)行交互。

但收集用于訓(xùn)練這些復(fù)雜機(jī)器的各種大型數(shù)據(jù)集既費(fèi)時(shí)又費(fèi)錢(qián)。通過(guò)使用由達(dá)到物理精確的數(shù)字孿生生成的合成數(shù)據(jù)（SDG），研究者和開(kāi)發(fā)者可在將 AI 模型部署到現(xiàn)實(shí)世界之前，先在仿真中對(duì)其進(jìn)行訓(xùn)練和驗(yàn)證。

通用場(chǎng)景描述（OpenUSD）是一個(gè)功能強(qiáng)大的框架，它讓構(gòu)建這些達(dá)到物理精確的虛擬環(huán)境變得簡(jiǎn)單。而在構(gòu)建 3D 環(huán)境后，團(tuán)隊(duì)可以使用 OpenUSD 開(kāi)發(fā)詳細(xì)、可擴(kuò)展的仿真以及逼真的場(chǎng)景，讓機(jī)器人在里面練習(xí)、學(xué)習(xí)和提高技能。

這些合成數(shù)據(jù)對(duì)于人形機(jī)器人學(xué)習(xí)類(lèi)似人類(lèi)的行為（例如行走、抓取物體和在復(fù)雜環(huán)境中穿梭）至關(guān)重要。OpenUSD 正在推動(dòng)人形機(jī)器人的發(fā)展，并為這些機(jī)器在未來(lái)完全融入人們的日常生活創(chuàng)造條件。

借助 OpenUSD 驅(qū)動(dòng)的 NVIDIA Omniverse 平臺(tái)，開(kāi)發(fā)者能夠統(tǒng)一來(lái)自 3DCAD、數(shù)字內(nèi)容創(chuàng)建（DCC）工具等不同來(lái)源的 3D 資產(chǎn)，進(jìn)而構(gòu)建大規(guī)模 3D 虛擬環(huán)境和運(yùn)行復(fù)雜的仿真來(lái)訓(xùn)練機(jī)器人。這不但簡(jiǎn)化了整個(gè)流程，而且還讓協(xié)作和開(kāi)發(fā)物理 AI 變得更加快速、經(jīng)濟(jì)。

使用合成運(yùn)動(dòng)數(shù)據(jù)推進(jìn)機(jī)器人訓(xùn)練

在 CES25 上，NVIDIA 發(fā)布了用于合成運(yùn)動(dòng)生成的 Isaac GR00T Blueprint。該藍(lán)圖能夠幫助開(kāi)發(fā)者生成比原來(lái)多數(shù)倍的合成運(yùn)動(dòng)數(shù)據(jù)集，以便使用仿真學(xué)習(xí)訓(xùn)練人形機(jī)器人。

此次發(fā)布的重點(diǎn)內(nèi)容包括：

大規(guī)模運(yùn)動(dòng)數(shù)據(jù)生成：使用仿真和生成式 AI 技術(shù)生成指數(shù)級(jí)龐大且多樣化的人動(dòng)作數(shù)據(jù)集，加快數(shù)據(jù)采集過(guò)程。

更快的數(shù)據(jù)擴(kuò)充速度：NVIDIA Cosmos 世界基礎(chǔ)模型使用來(lái)自 Omniverse 的 ground-truth 仿真大規(guī)模生成逼真的視頻，使開(kāi)發(fā)者能夠更快擴(kuò)充用于訓(xùn)練物理 AI 模型的合成數(shù)據(jù)集，縮小從仿真到現(xiàn)實(shí)的差距。

以仿真為中心的訓(xùn)練：開(kāi)發(fā)者可以在虛擬環(huán)境中訓(xùn)練機(jī)器人，而不是僅依賴(lài)現(xiàn)實(shí)世界中的測(cè)試，這讓訓(xùn)練過(guò)程變得更加快速和經(jīng)濟(jì)。

連接虛擬與現(xiàn)實(shí)：通過(guò)將真實(shí)數(shù)據(jù)和合成數(shù)據(jù)與基于仿真的訓(xùn)練和測(cè)試相結(jié)合，開(kāi)發(fā)者能夠把機(jī)器人在虛擬世界中學(xué)到的技能無(wú)縫遷移到現(xiàn)實(shí)世界。

實(shí)現(xiàn)對(duì)未來(lái)機(jī)器人的仿真

人形機(jī)器人正在通過(guò)實(shí)現(xiàn)復(fù)雜任務(wù)的自動(dòng)化和增加對(duì)人類(lèi)工人的安全保障，提高自身在制造、倉(cāng)儲(chǔ)物流、醫(yī)療等行業(yè)的效率、安全性和適應(yīng)性。

Boston Dynamics、Figure 等大型機(jī)器人公司已開(kāi)始使用 Isaac GR00T 并展示成果。

Scaled Foundations 正在降低從機(jī)械臂到人形機(jī)器人等各種形態(tài)的機(jī)器人的開(kāi)發(fā)門(mén)檻。該公司的 Open GRID Platform 集成了 NVIDIA Isaac Sim，使開(kāi)發(fā)者能夠簡(jiǎn)單通過(guò)一個(gè)易于使用、基于瀏覽器的開(kāi)發(fā)環(huán)境進(jìn)行機(jī)器人仿真。