一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

用NVIDIA Omniverse ISAAC Sim加速機(jī)器人仿真

星星科技指導(dǎo)員 ? 來(lái)源:NVIDIA ? 作者:Madeline Gannon ? 2022-04-27 16:06 ? 次閱讀

NVIDIA 為 NVIDIA ISAAC Sim 發(fā)布了一個(gè)新的 NVIDIA Omniverse 機(jī)器人體驗(yàn),以幫助支持對(duì)機(jī)器人學(xué)中精確、可靠、易于使用的仿真工具的加速需求。隨著許多研究實(shí)驗(yàn)室和大學(xué)的無(wú)限期關(guān)閉,世界各地的機(jī)器人專(zhuān)家都與他們開(kāi)發(fā)、測(cè)試和部署自主機(jī)器所需的物理硬件和環(huán)境分離開(kāi)來(lái)?,F(xiàn)在,更好的仿真工具比以往任何時(shí)候都能幫助機(jī)器人和自動(dòng)化領(lǐng)域的重要工作向前發(fā)展。

這個(gè)機(jī)器人經(jīng)驗(yàn)展示了 Omniverse 套件 中的 NVIDIA ISAAC Sim 仿真工具包。將 ISAAC Sim 構(gòu)建到 Omniverse 平臺(tái)中,相對(duì)于現(xiàn)有的機(jī)器人工作流程,它帶來(lái)了一些有用的改進(jìn):

它利用了 Omniverse Kit 的高精度物理模擬,直接集成了業(yè)界領(lǐng)先的物理框架,如用于剛體動(dòng)力學(xué)的 NVIDIA Physx SDK 和用于流體動(dòng)力學(xué)的 NVIDIA 流量 。

它重新關(guān)注互操作性,與 NVIDIA ISAAC 軟件開(kāi)發(fā)工具包 和 ROS 的擴(kuò)展進(jìn)行了深度集成。

Omniverse 對(duì)于 ISAAC Sim 的體驗(yàn)很容易擴(kuò)展?,F(xiàn)在您可以使用 Omniverse 工具包的 基于 Python 的腳本接口 和 擴(kuò)展系統(tǒng) 來(lái)定制 ISAAC Sim 以適應(yīng)您自己的用例。

它是為可部署而構(gòu)建的,其體系結(jié)構(gòu)支持本地工作站上的工作流,在 NVIDIA Jetson 系列硬件的邊緣,并通過(guò)云與 NVIDIA NGC 一起使用。

下面我們將更詳細(xì)地了解此版本中包含的預(yù)覽和示例代碼。

橋接工作流

Omniverse ISAAC Sim 仿真環(huán)境支持兩個(gè)突出的機(jī)器人框架: NVIDIA ISAAC 軟件開(kāi)發(fā)工具包 和 ROS 。

ISAAC SDK 是一個(gè)企業(yè)級(jí)框架,用于開(kāi)發(fā)機(jī)器人人工智能、導(dǎo)航和操作應(yīng)用程序。 ISAAC Sim 使用 Robot Engine Bridge (REB) 擴(kuò)展與 ISAAC SDK 通信,通過(guò) TCP / IP 發(fā)送模擬傳感器數(shù)據(jù)、驅(qū)動(dòng)器命令、地面真相和場(chǎng)景管理。 ISAAC SDK 文檔 突出了一系列的仿真場(chǎng)景,從復(fù)雜的多機(jī)器人自主倉(cāng)庫(kù)導(dǎo)航到使用 Jupyter 筆記本的 簡(jiǎn)單操作 。此外, ISAAC SDK 與 ISAAC Sim 為幾個(gè)基于 Jetson 的參考平臺(tái)(如 卡特 和 卡婭 機(jī)器人)橋接虛擬和物理機(jī)器人。

Omniverse ISAAC Sim 還支持 ROS ,這是一個(gè)機(jī)器人專(zhuān)家常用的框架。 ISAAC Sim ROS Bridge 擴(kuò)展使機(jī)器人研究人員能夠利用 Omniverse ISAAC Sim 功能強(qiáng)大的多功能 GPU 實(shí)時(shí)仿真和協(xié)作平臺(tái)來(lái)擴(kuò)充現(xiàn)有的工作流程。此版本提供了一個(gè) 喙樣 ,它將詳細(xì)介紹如何發(fā)布和訂閱主題,包括關(guān)節(jié)狀態(tài)、關(guān)節(jié)命令、 TF 、相機(jī)和 Lidar 主題。

pYYBAGJo-ZGACCi9AAG_WjuuE_o822.png

圖 1 使用 ROS 網(wǎng)橋擴(kuò)展來(lái)發(fā)布和訂閱不同的 rostopic 。這張截圖顯示了一只弗蘭卡熊貓機(jī)器人手臂的關(guān)節(jié)狀態(tài)流到 ROS 。

敏捷自動(dòng)化

ISAAC Sim 在 Omniverse 中的另一個(gè)優(yōu)點(diǎn)是復(fù)雜的剛體動(dòng)力學(xué)現(xiàn)在很容易在機(jī)器人和自動(dòng)化場(chǎng)景中進(jìn)行模擬。 UR10 示例應(yīng)用程序 使用通用機(jī)器人的 UR10 機(jī)械臂和一個(gè)基于吸力的抓取器來(lái)說(shuō)明垃圾箱的填充和堆垛過(guò)程。在垃圾箱填充的例子中,用戶將不同的零件扔進(jìn)一個(gè)機(jī)器人正在抓取的箱子里,直到箱子太重以至于吸力抓取器失靈。零件到處都是。然后,機(jī)器人手臂能夠檢測(cè)到掉落的垃圾箱,將其撿起來(lái),并將其定位以接收新部件。雖然垃圾箱填充和堆垛是標(biāo)準(zhǔn)程序,但這些示例顯示了如何智能地?cái)U(kuò)展它們,使機(jī)器人自動(dòng)化更加靈活和適應(yīng)動(dòng)態(tài)環(huán)境。

UR10 示例應(yīng)用程序附帶了非常詳細(xì)的源代碼和文檔。它們展示了幾個(gè)核心仿真組件:

使用 URDF 進(jìn)口商 加載機(jī)器人模型

為精益自動(dòng)化創(chuàng)建狀態(tài)機(jī)

使用 黎曼運(yùn)動(dòng)策略 ( RMPs )將傳統(tǒng)路徑規(guī)劃與高級(jí)運(yùn)動(dòng)生成相結(jié)合

模擬機(jī)器人上下的傳感器。

查看此擴(kuò)展以了解如何為您自己的機(jī)器人應(yīng)用程序構(gòu)建端到端仿真。

定制機(jī)器人

除了 UR10 機(jī)器人之外, Omniverse ISAAC Sim 還有一個(gè)機(jī)器人、末端效應(yīng)器和環(huán)境的資產(chǎn)庫(kù),可用于模擬。但是,您也可以使用 ISAAC Sim URDF importer 擴(kuò)展來(lái)處理您自己的定制機(jī)器人。此擴(kuò)展將導(dǎo)入一個(gè) URDF 文件并將其轉(zhuǎn)換為 Omniverse 美元代表 ,使其成為高級(jí)模擬更可用、更持久的格式。 URDF Importer 擴(kuò)展還附帶了幾個(gè)示例導(dǎo)入和 Python API ,用于加載和配置您自己的機(jī)器人。

在這個(gè)版本中,文檔有一個(gè) 所以取樣 ,它引導(dǎo)您完成為 Omniverse ISAAC Sim 導(dǎo)入和配置自定義機(jī)器人的過(guò)程。它以 NVIDIA 卡婭 作為參考硬件。 Kaya 是由 NVIDIA Jetson Nano 提供動(dòng)力的 3D 打印機(jī)器人。它的目的是使先進(jìn)的機(jī)器人技術(shù)為業(yè)余愛(ài)好者和教育者所用。然而,精確的仿真是一個(gè)特別具有挑戰(zhàn)性的參考平臺(tái)。它有幾個(gè) CAD 文件,一個(gè)復(fù)雜的完整傳動(dòng)系統(tǒng),和許多傳感器,必須配置這些傳感器來(lái)模擬它的三維映射、定位、目標(biāo)識(shí)別和里程計(jì)功能。您可以查看有關(guān)創(chuàng)建物理上精確的虛擬 Kaya 的文檔,以了解如何從 CAD 或 URDF 文件轉(zhuǎn)換為準(zhǔn)備模擬的機(jī)器人。

poYBAGJo-ZqAIUnhAAGimstcENo633.png

圖 3 Kaya 示例展示了如何從 CAD 文件或 ISAAC Sim URDF importer 擴(kuò)展中定制或 DIY 機(jī)器人仿真。

感知世界

在 Omniverse 機(jī)器人技術(shù)體驗(yàn)中,您可以預(yù)覽機(jī)器人模擬的實(shí)時(shí)光線跟蹤的好處。除了逼真的視覺(jué)效果, Omniverse 實(shí)時(shí)光線跟蹤還模擬光的物理行為。這使得 ISAAC Sim 能夠精確地模擬幾種基于光的傳感器的物理特性,包括 RGB 相機(jī)、深度相機(jī)和激光雷達(dá)。 激光雷達(dá)樣品 演示了如何利用 ISAAC Sim 激光雷達(dá) API 來(lái)創(chuàng)建和激活這些傳感器,用于訓(xùn)練自主機(jī)器人。設(shè)置分辨率、視野和旋轉(zhuǎn)速率,以匹配物理機(jī)器人使用的激光雷達(dá)的硬件屬性。

pYYBAGJo-ZyAW9tHAAMFB8sodH0392.png

圖 4 Omniverse ISAAC Sim 中的激光雷達(dá)擴(kuò)展可用于模擬機(jī)器人的自主導(dǎo)航。

進(jìn)行模擬

新的 Omniverse ISAAC Sim 體驗(yàn)的最新版本展示了現(xiàn)代機(jī)器人仿真工具包如何使研究人員和開(kāi)發(fā)人員受益。在 NVIDIA Omniverse 平臺(tái)上構(gòu)建該工具包,為機(jī)器人仿真提供了新的工作流程,是可用性、可擴(kuò)展性和互操作性的一次重大升級(jí)。

關(guān)于作者

Madeline Gannon 是 NVIDIA 的機(jī)器人和人工智能研究人員,她專(zhuān)注于人類(lèi)與機(jī)器人交互的工具。甘農(nóng)是世界經(jīng)濟(jì)論壇文化領(lǐng)袖,也是全球物聯(lián)網(wǎng)、機(jī)器人和智能城市理事會(huì)的理事。甘農(nóng)擁有卡內(nèi)基梅隆大學(xué)博士學(xué)位和佛羅里達(dá)國(guó)際大學(xué)建筑學(xué)碩士學(xué)位。

審核編輯:郭婷

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 機(jī)器人
    +關(guān)注

    關(guān)注

    212

    文章

    29297

    瀏覽量

    210988
  • NVIDIA
    +關(guān)注

    關(guān)注

    14

    文章

    5193

    瀏覽量

    105500
  • 激光雷達(dá)
    +關(guān)注

    關(guān)注

    971

    文章

    4157

    瀏覽量

    191646
收藏 人收藏

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    NVIDIA Isaac 是英偉達(dá)推出的綜合性機(jī)器人開(kāi)發(fā)平臺(tái)

    NVIDIA Isaac 是英偉達(dá)推出的綜合性機(jī)器人開(kāi)發(fā)平臺(tái),旨在通過(guò) GPU 加速、物理仿真和生成式 AI 技術(shù),
    的頭像 發(fā)表于 04-02 18:03 ?415次閱讀

    NVIDIA Isaac GR00T N1開(kāi)源人形機(jī)器人基礎(chǔ)模型+開(kāi)源物理引擎Newton加速機(jī)器人開(kāi)發(fā)

    NVIDIA Isaac GR00T N1開(kāi)源人形機(jī)器人基礎(chǔ)模型+開(kāi)源物理引擎Newton加速機(jī)器人開(kāi)發(fā)
    的頭像 發(fā)表于 03-20 16:56 ?554次閱讀

    智元機(jī)器人基于NVIDIA Isaac GR00T打造高效仿真數(shù)據(jù)采集方案

    Isaac GR00T 。 NVIDIA Isaac GR00T 加速仿真數(shù)采方案 模仿學(xué)習(xí)是機(jī)器人
    的頭像 發(fā)表于 03-07 19:16 ?780次閱讀
    智元<b class='flag-5'>機(jī)器人</b>基于<b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> GR00T打造高效<b class='flag-5'>仿真</b>數(shù)據(jù)采集方案

    簡(jiǎn)述NVIDIA Isaac的重要更新

    在 2025 CES,NVIDIA 宣布了對(duì)NVIDIA Isaac的重要更新。NVIDIA Isaac 是一個(gè)由
    的頭像 發(fā)表于 01-17 09:57 ?640次閱讀
    簡(jiǎn)述<b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b>的重要更新

    NVIDIA發(fā)布Isaac GR00T Blueprint,加速人形機(jī)器人開(kāi)發(fā)

    。 NVIDIA創(chuàng)始兼首席執(zhí)行官黃仁勛親自揭曉了NVIDIA Isaac GR00T Blueprint的發(fā)布。這一Blueprint旨在加速
    的頭像 發(fā)表于 01-13 11:01 ?690次閱讀

    物理仿真人形機(jī)器人的統(tǒng)一全身控制策略

    創(chuàng)建動(dòng)作自然并對(duì)各種控制輸入做出智能響應(yīng)的交互式仿真人形機(jī)器人仍是計(jì)算機(jī)動(dòng)畫(huà)和機(jī)器人技術(shù)領(lǐng)域最具挑戰(zhàn)性的問(wèn)題之一。NVIDIA Isaac
    的頭像 發(fā)表于 01-06 12:31 ?676次閱讀
    物理<b class='flag-5'>仿真</b>人形<b class='flag-5'>機(jī)器人</b>的統(tǒng)一全身控制策略

    堅(jiān)米智能借助NVIDIA Isaac Lab加速四足機(jī)器人開(kāi)發(fā)

    堅(jiān)米智能(中堅(jiān)科技)借助NVIDIA Isaac Lab平臺(tái),通過(guò)NVIDIA Isaac Sim的 3D 生成與建模技術(shù)構(gòu)建高度逼真的虛擬
    的頭像 發(fā)表于 12-29 14:01 ?680次閱讀

    NVIDIA通過(guò)加速AWS上的機(jī)器人仿真推進(jìn)物理AI的發(fā)展

    NVIDIA Isaac Sim 現(xiàn)在可在 Amazon EC2 G6e 實(shí)例中的 NVIDIA GPU 云實(shí)例上使用,將機(jī)器人
    的頭像 發(fā)表于 12-09 11:50 ?607次閱讀

    NVIDIA助力Figure發(fā)布新一代對(duì)話式人形機(jī)器人

    該初創(chuàng)公司展示了新型機(jī)器人,其使用 NVIDIA Isaac Sim 處理合成數(shù)據(jù),并使用基于 NVIDIA
    的頭像 發(fā)表于 11-04 10:10 ?551次閱讀

    NVIDIA與學(xué)術(shù)研究人員聯(lián)合開(kāi)發(fā)手術(shù)機(jī)器人

    利用 NVIDIA Isaac SimNVIDIA Omniverse 開(kāi)發(fā)的 ORBIT-Surgical 正在 ICRA
    的頭像 發(fā)表于 10-10 10:00 ?720次閱讀

    Foxconn利用NVIDIA AI和Omniverse訓(xùn)練機(jī)器人

    全球最大電子制造商 Foxconn 正準(zhǔn)備制造 NVIDIA 最復(fù)雜的產(chǎn)品之一,并開(kāi)始使用 NVIDIA OmniverseIsaac 平臺(tái)驅(qū)動(dòng)的數(shù)字孿生。
    的頭像 發(fā)表于 10-10 09:40 ?650次閱讀

    NVIDIA提供一套服務(wù)、模型以及計(jì)算平臺(tái) 加速人形機(jī)器人發(fā)展

    開(kāi)發(fā)者可以訪問(wèn)新的 NVIDIA NIM 微服務(wù),用于 Isaac Lab 和 Isaac Sim 中的機(jī)器人
    的頭像 發(fā)表于 07-31 10:41 ?1047次閱讀

    NVIDIA 加速人形機(jī)器人發(fā)展

    開(kāi)發(fā)者可以訪問(wèn)新的 NVIDIA NIM 微服務(wù),用于 Isaac Lab 和 Isaac Sim 中的機(jī)器人
    發(fā)表于 07-30 09:15 ?883次閱讀
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>加速</b>人形<b class='flag-5'>機(jī)器人</b>發(fā)展

    NVIDIA Isaac 機(jī)器人平臺(tái)利用最新的生成式 AI 和先進(jìn)的仿真技術(shù),加速 AI 機(jī)器人技術(shù)的發(fā)展

    NVIDIA 發(fā)布了 Isaac Manipulator 和 Isaac Perceptor 等一系列基礎(chǔ)模型、機(jī)器人工具和 GPU 加速庫(kù)
    的頭像 發(fā)表于 06-04 18:00 ?7954次閱讀
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> <b class='flag-5'>機(jī)器人</b>平臺(tái)利用最新的生成式 AI 和先進(jìn)的<b class='flag-5'>仿真</b>技術(shù),<b class='flag-5'>加速</b> AI <b class='flag-5'>機(jī)器人</b>技術(shù)的發(fā)展

    全球機(jī)器人開(kāi)發(fā)領(lǐng)域采用NVIDIA 機(jī)器人開(kāi)發(fā)和生產(chǎn)

    全球十多家機(jī)器人行業(yè)領(lǐng)先企業(yè),正在將 NVIDIA Isaac 加速庫(kù)、基于物理學(xué)的仿真和 AI 模型集成到其軟件框架和
    的頭像 發(fā)表于 06-03 18:25 ?1517次閱讀