一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

底層硬件加大模型,智能機(jī)器狗拓展更多落地應(yīng)用

Robot Vision ? 來源:電子發(fā)燒友 ? 作者:Sisyphus ? 2024-03-29 00:11 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

電子發(fā)燒友網(wǎng)報(bào)道(文/李寧遠(yuǎn))在生成式AI、大模型已經(jīng)席卷了各行各業(yè)的當(dāng)下,人形機(jī)器人是最受備受關(guān)注的機(jī)器人類型。在人形機(jī)器人或者說仿生雙足機(jī)器人之前,仿生四足機(jī)器人也是備受關(guān)注的存在。

四足機(jī)器人,更為人熟悉的名字是機(jī)器狗,在很多舞臺(tái)上我們已經(jīng)見到過機(jī)器狗靈活的表演。這些多足機(jī)器人可以代替人類在很多環(huán)境中完成機(jī)動(dòng)作業(yè),是高敏捷性、快速運(yùn)動(dòng)的代表機(jī)器人類型。

離線大模型+機(jī)器狗

當(dāng)前,機(jī)器人正在與人工智能技術(shù)深度融合,仿生四足機(jī)器人也不例外。雖然現(xiàn)在機(jī)器人的控制、計(jì)算、多模態(tài)感知融合等方面還有很大挑戰(zhàn)需要克服,但是我們也看到了人工智能功能正在機(jī)器人身上得到初步應(yīng)用。

去年宇樹科技發(fā)布的Go2就搭載了大模型用于強(qiáng)化交互,今年不久前,西北工業(yè)大學(xué)光電智能研究院宣布聯(lián)合中國(guó)電信人工智能研究院在探索離線具身智能應(yīng)用方面就取得了階段性進(jìn)展。

西北工業(yè)大學(xué)團(tuán)隊(duì)將機(jī)器狗搭載離線大模型,應(yīng)用在智能導(dǎo)盲場(chǎng)景,開發(fā)出離線大模型具身智能導(dǎo)盲機(jī)器狗,驗(yàn)證了其智能人機(jī)交互、智能乘梯引導(dǎo)、智能過街引導(dǎo)、智能室內(nèi)引導(dǎo)等功能。

根據(jù)相關(guān)報(bào)道,該機(jī)器狗使用的是InternLM2大模型,這是商湯科技與上海AI實(shí)驗(yàn)室聯(lián)合香港中文大學(xué)、復(fù)旦大學(xué)發(fā)布的大模型。InternLM2龐大的訓(xùn)練基礎(chǔ)和優(yōu)越的性能表現(xiàn)在同類模型中是比較突出的,同時(shí)它也保持了開源和商用免費(fèi)授權(quán)。

在該應(yīng)用中,西北工業(yè)大學(xué)團(tuán)隊(duì)結(jié)合目前最新的大模型量化壓縮和加速推理技術(shù),成功將1.8B的大模型部署到了機(jī)器狗的計(jì)算平臺(tái)上。1.8B離線大模型與機(jī)器狗內(nèi)置的2Nano+1NX邊緣算力驗(yàn)證了離線具身智能的可行性。

據(jù)悉,該項(xiàng)目會(huì)進(jìn)一步與電信星辰大模型相結(jié)合,探索在線與離線相融合的分布式異構(gòu)具身智能機(jī)器人方案。

靈活的機(jī)器狗,強(qiáng)大的底層硬件

除去大模型給終端應(yīng)用帶來的智能化決策和計(jì)劃生成,機(jī)器狗作為高敏捷性、快速運(yùn)動(dòng)的代表機(jī)器人類型,離不開底層硬件賦予它基礎(chǔ)性能。

目前機(jī)器狗配置,已經(jīng)是相當(dāng)豪華。在感知上,各類傳感器加持的機(jī)器狗已經(jīng)可以感知周圍的各種環(huán)境。以小米的CyberDog2為例,深度攝像頭、RGB攝像頭、語(yǔ)言攝像頭、觸摸傳感、激光雷達(dá)、超聲波、ToF均有搭載。4D激光雷達(dá)現(xiàn)在也開始應(yīng)用在機(jī)器狗上,這些傳感配置讓機(jī)器狗既能看到也能感知。

在核“芯”的配置上,同樣以小米的CyberDog2為例,NVIDIA Jetson Xavier NX加全志MR813也是很經(jīng)典的機(jī)器人方案,CyberDog2還額外加了一顆全志R329協(xié)處理器。

高算力保證機(jī)器狗可以流暢地處理從傳感器系統(tǒng)捕獲的大量數(shù)據(jù),使其能夠更精準(zhǔn)地進(jìn)行機(jī)器狗的避障及路徑選擇,并處理智能交互相關(guān)數(shù)據(jù)。MR813,在掃地機(jī)器人中常見的型號(hào),主要負(fù)責(zé)算法執(zhí)行、運(yùn)動(dòng)控制、電源系統(tǒng)管理等工作,由它驅(qū)動(dòng)機(jī)器狗身上的電機(jī)做出高精度的動(dòng)作響應(yīng)。另一個(gè)協(xié)處理器則主要處理語(yǔ)音交互。

仿生四足機(jī)器人能實(shí)現(xiàn)靈活的運(yùn)動(dòng),全面的感知以及智能的交互,背后是這些強(qiáng)大基礎(chǔ)底層硬件與人工智能技術(shù)融合合力推動(dòng)的。

小結(jié)

隨著具身智能概念越來越熱,還會(huì)有不少AI大模型在機(jī)器人終端上落地的進(jìn)展?;A(chǔ)且強(qiáng)大的底層硬件構(gòu)建起了靈巧敏捷的四足機(jī)器人,AI大模型和四足機(jī)器人的融合落地會(huì)進(jìn)一步拓寬機(jī)器狗的應(yīng)用場(chǎng)景。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 機(jī)器狗
    +關(guān)注

    關(guān)注

    3

    文章

    177

    瀏覽量

    10521
  • 大模型
    +關(guān)注

    關(guān)注

    2

    文章

    3141

    瀏覽量

    4066
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    機(jī)器人看點(diǎn):越疆機(jī)器人正式發(fā)布六足仿生機(jī)器 智元公布機(jī)器人運(yùn)動(dòng)控制模型專利

    給大家?guī)韮蓚€(gè)機(jī)器人的最新消息: 越疆機(jī)器人正式發(fā)布六足仿生機(jī)器 7月9日,深圳越疆機(jī)器人正式發(fā)布六足仿生
    的頭像 發(fā)表于 07-09 15:03 ?626次閱讀

    最新人工智能硬件培訓(xùn)AI 基礎(chǔ)入門學(xué)習(xí)課程參考2025版(大模型篇)

    教育等領(lǐng)域發(fā)揮著越來越重要的作用。?針對(duì)日前前來咨詢的廣大客戶對(duì)面向大模型智能硬件的學(xué)習(xí)需求,我們根據(jù)CSK6大模型語(yǔ)音視覺開發(fā)板已有功能,整理了一份適合基于本開發(fā)板進(jìn)行教學(xué)活動(dòng)的學(xué)習(xí)
    發(fā)表于 07-04 11:10

    【「# ROS 2智能機(jī)器人開發(fā)實(shí)踐」閱讀體驗(yàn)】機(jī)器人入門的引路書

    節(jié)點(diǎn)和多個(gè)文件 一個(gè)包可以提供多個(gè)節(jié)點(diǎn) 比如以下例程的兩個(gè)節(jié)點(diǎn),一個(gè)負(fù)責(zé)顯示,一個(gè)負(fù)責(zé)控制 內(nèi)容結(jié)構(gòu) 這本書覆蓋面還挺廣的 從軟件到硬件 本書有很多技術(shù)底層的原理 比如DDS(數(shù)據(jù)總線)和QoS(流量
    發(fā)表于 04-30 01:05

    大象機(jī)器人攜手進(jìn)迭時(shí)空推出 RISC-V 全棧開源六軸機(jī)械臂產(chǎn)品

    機(jī)器人場(chǎng)景的量產(chǎn)應(yīng)用。更多的面向智能機(jī)器人的RISC-V AI軟硬件技術(shù)創(chuàng)新以及應(yīng)用案例,將陸續(xù)在公司微信公眾號(hào)做介紹,敬請(qǐng)大家期待。
    發(fā)表于 04-25 17:59

    MWC 2025 | 移遠(yuǎn)通信大模型解決方案加速落地,引領(lǐng)服務(wù)機(jī)器人創(chuàng)新變革

    ?隨著人工智能、大模型等技術(shù)的蓬勃發(fā)展,生成式AI應(yīng)用全面爆發(fā)。在此背景下,服務(wù)機(jī)器人作為大模型技術(shù)在端側(cè)落地的關(guān)鍵場(chǎng)景,迎來了前所未有的發(fā)
    發(fā)表于 03-04 11:18 ?204次閱讀
    MWC 2025 | 移遠(yuǎn)通信大<b class='flag-5'>模型</b>解決方案加速<b class='flag-5'>落地</b>,引領(lǐng)服務(wù)<b class='flag-5'>機(jī)器</b>人創(chuàng)新變革

    MWC 2025 | 移遠(yuǎn)通信大模型解決方案加速落地,引領(lǐng)服務(wù)機(jī)器人創(chuàng)新變革

    隨著人工智能、大模型等技術(shù)的蓬勃發(fā)展,生成式AI應(yīng)用全面爆發(fā)。在此背景下,服務(wù)機(jī)器人作為大模型技術(shù)在端側(cè)落地的關(guān)鍵場(chǎng)景,迎來了前所未有的發(fā)展
    的頭像 發(fā)表于 03-03 19:04 ?434次閱讀
    MWC 2025 | 移遠(yuǎn)通信大<b class='flag-5'>模型</b>解決方案加速<b class='flag-5'>落地</b>,引領(lǐng)服務(wù)<b class='flag-5'>機(jī)器</b>人創(chuàng)新變革

    普渡機(jī)器人接入DeepSeek滿血版模型

    自2月20日起,普渡機(jī)器人正式接入DeepSeek滿血版模型機(jī)器智能語(yǔ)音交互能力迎來智能化升級(jí)里程碑!此次升級(jí)中,首批搭載該
    的頭像 發(fā)表于 02-20 16:50 ?865次閱讀

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】2.具身智能機(jī)器人的基礎(chǔ)模塊

    具身智能機(jī)器人的基礎(chǔ)模塊,這個(gè)是本書的第二部分內(nèi)容,主要分為四個(gè)部分:機(jī)器人計(jì)算系統(tǒng),自主機(jī)器人的感知系統(tǒng),自主機(jī)器人的定位系統(tǒng),自主
    發(fā)表于 01-04 19:22

    《具身智能機(jī)器人系統(tǒng)》第10-13章閱讀心得之具身智能機(jī)器人計(jì)算挑戰(zhàn)

    閱讀《具身智能機(jī)器人系統(tǒng)》第10-13章,我對(duì)具身智能機(jī)器人的工程實(shí)踐有了全新認(rèn)識(shí)。第10章從實(shí)時(shí)性角度剖析了機(jī)器人計(jì)算加速問題。
    發(fā)表于 01-04 01:15

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】2.具身智能機(jī)器人大模型

    近年來,人工智能領(lǐng)域的大模型技術(shù)在多個(gè)方向上取得了突破性的進(jìn)展,特別是在機(jī)器人控制領(lǐng)域展現(xiàn)出了巨大的潛力。在“具身智能機(jī)器人大
    發(fā)表于 12-29 23:04

    【「具身智能機(jī)器人系統(tǒng)」閱讀體驗(yàn)】1.初步理解具身智能

    與未來,涵蓋如基于行為的人工智能、生物啟發(fā)的進(jìn)化人工智能及認(rèn)知機(jī)器人技術(shù)的發(fā)展。這一歷史背景為隨后的大模型驅(qū)動(dòng)的具身智能討論奠定了基礎(chǔ),隨著
    發(fā)表于 12-28 21:12

    《具身智能機(jī)器人系統(tǒng)》第7-9章閱讀心得之具身智能機(jī)器人與大模型

    研讀《具身智能機(jī)器人系統(tǒng)》第7-9章,我被書中對(duì)大模型機(jī)器人技術(shù)融合的深入分析所吸引。第7章詳細(xì)闡述了ChatGPT for Robotics的核心技術(shù)創(chuàng)新:它摒棄了傳統(tǒng)的分層控制架
    發(fā)表于 12-24 15:03

    常用硬件看門電路

    硬件看門電路分享
    的頭像 發(fā)表于 12-18 14:09 ?6357次閱讀
    常用<b class='flag-5'>硬件</b>看門<b class='flag-5'>狗</b>電路

    地瓜機(jī)器人與廣和通深度合作,共驅(qū)智能機(jī)器人商用落地

    9月20日,2024地瓜機(jī)器人開發(fā)者日暨新品發(fā)布在深圳順利舉辦。廣和通作為地瓜機(jī)器人官方授權(quán)硬件IDH合作伙伴,受邀出席大會(huì)并展示了一系列基于地瓜旭日5的機(jī)器人解決方案及客戶終端,雙方
    的頭像 發(fā)表于 09-23 16:27 ?720次閱讀
    地瓜<b class='flag-5'>機(jī)器</b>人與廣和通深度合作,共驅(qū)<b class='flag-5'>智能</b><b class='flag-5'>機(jī)器</b>人商用<b class='flag-5'>落地</b>

    地瓜機(jī)器人與廣和通深度合作,共驅(qū)智能機(jī)器人商用落地

    9月20日,2024地瓜機(jī)器人開發(fā)者日暨新品發(fā)布在深圳順利舉辦。廣和通作為地瓜機(jī)器人官方授權(quán)硬件IDH合作伙伴,受邀出席大會(huì)并展示了一系列基于地瓜旭日5的機(jī)器人解決方案及客戶終端,雙方
    的頭像 發(fā)表于 09-23 16:27 ?863次閱讀
    地瓜<b class='flag-5'>機(jī)器</b>人與廣和通深度合作,共驅(qū)<b class='flag-5'>智能</b><b class='flag-5'>機(jī)器</b>人商用<b class='flag-5'>落地</b>