NVIDIA Omniverse Cloud Sensor RTX 生成用于加速自動(dòng)駕駛汽車、機(jī)械臂、移動(dòng)機(jī)器人、人形機(jī)器人和智能空間 AI 開發(fā)工作的合成數(shù)據(jù)。

NVIDIA 在 CVPR 大會(huì)上發(fā)布了 NVIDIA Omniverse Cloud Sensor RTX，這套實(shí)現(xiàn)物理級(jí)精確傳感器仿真的微服務(wù)能夠加速各類全自主機(jī)器的開發(fā)工作。

傳感器行業(yè)價(jià)值數(shù)十億美元，且仍在不斷增長。該行業(yè)為自動(dòng)駕駛汽車、人形機(jī)器人、工業(yè)機(jī)械手、移動(dòng)機(jī)器人和智能空間提供理解物理世界和做出明智決策所需的數(shù)據(jù)。借助 NVIDIA Omniverse Cloud Sensor RTX，開發(fā)者可以在實(shí)際部署之前，先在達(dá)到物理級(jí)精確的逼真虛擬環(huán)境中大規(guī)模測試傳感器的感知能力和相關(guān)的 AI 軟件，既提高了安全性，同時(shí)又節(jié)省了時(shí)間和成本。

NVIDIA Omniverse 與仿真技術(shù)副總裁 Rev Lebaredian 表示：“開發(fā)由生成式物理 AI 賦能的安全、可靠自主機(jī)器必須在基于物理的虛擬世界中進(jìn)行訓(xùn)練和測試。借助 NVIDIA Omniverse Cloud Sensor RTX 微服務(wù)，開發(fā)者將能夠輕松構(gòu)建工廠、城市乃至地球的大規(guī)模數(shù)字孿生，助推新一輪 AI 浪潮。”

為大規(guī)模模擬提供超強(qiáng)助力

Omniverse Cloud Sensor RTX 基于 OpenUSD 框架構(gòu)建，并由 NVIDIA RTX 光線追蹤和神經(jīng)渲染技術(shù)賦能。它可以將來自視頻、攝像頭、雷達(dá)和激光雷達(dá)的現(xiàn)實(shí)世界數(shù)據(jù)與合成數(shù)據(jù)相結(jié)合，以此加速模擬環(huán)境的創(chuàng)建。

即使在現(xiàn)實(shí)世界數(shù)據(jù)有限的情況下，這套微服務(wù)也可用于模擬各種活動(dòng)，例如機(jī)械臂是否正常運(yùn)作、機(jī)場行李傳送帶是否正常運(yùn)行、樹枝是否擋住道路、工廠傳送帶是否在運(yùn)行、機(jī)器人或人類是否在附近等。

獲獎(jiǎng)研究成果推動(dòng)現(xiàn)實(shí)世界部署

在發(fā)布 Omniverse Cloud Sensor RTX 的同時(shí)，NVIDIA 還在 CVPR 的自動(dòng)駕駛大型挑戰(zhàn)賽中獲得了大規(guī)模端到端駕駛類別第一名。

NVIDIA 研究人員贏得此次比賽所使用的工作流可以通過 Omniverse Cloud Sensor RTX 在高保真仿真環(huán)境中進(jìn)行復(fù)制，從而使自動(dòng)駕駛汽車（AV）仿真開發(fā)人員能夠在現(xiàn)實(shí)世界中部署 AV 之前，先在達(dá)到物理級(jí)精確的環(huán)境中測試各種自動(dòng)駕駛情景。

生態(tài)系統(tǒng)使用權(quán)限與可用性

NVIDIA 為 Foretellix 、MathWorks 等軟件開發(fā)商提供率先使用 Omniverse Cloud Sensor RTX 推進(jìn) AV 開發(fā)工作的權(quán)限。

借助 Omniverse Cloud Sensor RTX，傳感器制造商還將能夠在虛擬環(huán)境中驗(yàn)證并集成其傳感器的數(shù)字孿生，縮短物理原型開發(fā)所需的時(shí)間。

申請將于今年晚些時(shí)候開放的 Omniverse Cloud Sensor RTX 早期使用權(quán)限。