一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

所有操作層都接入AI,Menteebot給人形機(jī)器人發(fā)展帶來(lái)新思路

Felix分析 ? 來(lái)源:電子發(fā)燒友網(wǎng) ? 作者:吳子鵬 ? 2024-04-22 07:54 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

電子發(fā)燒友網(wǎng)報(bào)道(文/吳子鵬)近日,初創(chuàng)公司Mentee Robotics展示了旗下首款人形機(jī)器人的原型Menteebot。相較于波士頓動(dòng)力的電動(dòng)Atlas,以及特斯拉的擎天柱(Optimus),Menteebot名聲并不響。

不過(guò),Mentee Robotics還是有名頭的,因?yàn)樗荕obileye核心創(chuàng)始人Amnon Shashua的另一個(gè)創(chuàng)業(yè)項(xiàng)目,該公司的另外兩位創(chuàng)始人分別為Mobileye首席技術(shù)官ShaiShalev-Shwartz、前FacebookAI研究總監(jiān)LiorWolf。

Menteebot最大的特色是據(jù)稱在所有操作層都接入了AI,注意這里面的區(qū)別,并不是圍繞AI模型打造一個(gè)機(jī)器人的“大腦”,而是在所有操作層都利用AI賦能。

全身布滿AI的Menteebot

Mentee Robotics表示,Menteebot是一款“可以指導(dǎo)的個(gè)性化人工智能機(jī)器人”,具備與人類相似的平衡和控制能力。剛剛提到,和以往的人形機(jī)器人有所不同,Menteebot渾身都布滿了AI,搭載有豐富的AI模型和AI算法,這讓Menteebot能夠更加受益于多模態(tài)AI模型的發(fā)展。同時(shí),人類可以使用自然語(yǔ)言來(lái)控制它。

通過(guò)演示視頻,Menteebot超強(qiáng)的AI能力至少表現(xiàn)在兩個(gè)方面,其一是更加自然的溝通能力,其二是超強(qiáng)的運(yùn)動(dòng)能力。

先看溝通能力,Menteebot搭載了更加豐富的自然語(yǔ)言模型,這使得它的控制不再受限于既定的指令。過(guò)往,人形機(jī)器人在溝通時(shí),存在模型內(nèi)和模型外能力的差距,此前我們也提到這個(gè)問(wèn)題,當(dāng)某一項(xiàng)指令屬于模型訓(xùn)練范圍內(nèi)時(shí),人形機(jī)器人能夠表現(xiàn)出超強(qiáng)的能力,不過(guò)當(dāng)指令超出模型訓(xùn)練范圍之后,人形機(jī)器人就會(huì)顯得“不知所措”。

據(jù)悉,Menteebot可以與人類進(jìn)行自然的對(duì)話和交流。用戶只需通過(guò)自然語(yǔ)言向機(jī)器人發(fā)出命令,它便能理解并執(zhí)行相應(yīng)的任務(wù)。這其實(shí)要得益于Menteebot“大腦”模型中更加強(qiáng)大的人工智能算法、大型語(yǔ)言模型和軟件。Mentee Robotics稱,基于NeRF的實(shí)時(shí)三維映射和定位、復(fù)雜環(huán)境中的動(dòng)態(tài)導(dǎo)航等技術(shù),可實(shí)現(xiàn)復(fù)雜的推理,以完成任務(wù)和快速學(xué)習(xí)新任務(wù)。

Mentee Robotics特別提到,完成部署的Menteebot可以進(jìn)行更高級(jí)的訓(xùn)練以應(yīng)對(duì)復(fù)雜的任務(wù)或者場(chǎng)景,此時(shí)軟件會(huì)不斷模擬任務(wù)直到掌握為止,隨后機(jī)器人便能在現(xiàn)實(shí)世界中完成任務(wù)。

再看運(yùn)動(dòng)能力,Menteebot能夠完成更加復(fù)雜的行走姿態(tài),比如奔跑、側(cè)向行走,甚至轉(zhuǎn)身;也能夠執(zhí)行非常精細(xì)的操作,它能夠準(zhǔn)確地將餐具遞給人類,這得益于其手臂和手部的全方位運(yùn)動(dòng)能力和精確性。

為了提升Menteebot的行動(dòng)力,Mentee Robotics在這款機(jī)器人上集成了尖端的Sim2Real學(xué)習(xí),可實(shí)現(xiàn)逼真的步態(tài)和手部運(yùn)動(dòng),具有與人類相同的平衡和控制力,在舉起重物時(shí)還會(huì)調(diào)整步態(tài)。

Mentee Robotics表示,Menteebot機(jī)器人的量產(chǎn)版預(yù)計(jì)將于2025年第一季度部署,將由純視覺(jué)傳感、支持“前所未有的”靈活性的專用電動(dòng)馬達(dá)、完全集成的人工智能提供動(dòng)力。預(yù)計(jì)將分為家用版和商業(yè)版兩個(gè)版本。

Menteebot給人形機(jī)器人硬件創(chuàng)新帶來(lái)啟示

通過(guò)在所有操作層都接入AI,Menteebot機(jī)器人展示了強(qiáng)大的能力,包括溝通和運(yùn)動(dòng)。但這其實(shí)也給模型和算法的部署提出了更高的要求,包括Menteebot“大腦”里的核心芯片以及其他執(zhí)行單元里的芯片。

對(duì)于“大腦”里的核心芯片,首先要能夠支持多模態(tài)的AI大模型部署,并且需要對(duì)未來(lái)融入進(jìn)來(lái)的新模態(tài)留出部署空間。目前,應(yīng)用于人形機(jī)器人的大模型包括圖像識(shí)別模塊、語(yǔ)音識(shí)別模塊、文字轉(zhuǎn)語(yǔ)音模塊、對(duì)話系統(tǒng)模塊、導(dǎo)航模塊、多模態(tài)系統(tǒng)模塊和強(qiáng)化學(xué)習(xí)模塊等。核心芯片是這些模塊的載體,對(duì)于上述模塊,或者叫模態(tài)都需要能夠支持,即便是匯總歸結(jié),核心芯片也需要能夠完整支持視覺(jué)模塊、導(dǎo)航模塊、語(yǔ)言模塊和決策模塊這四大能力,這對(duì)核心芯片的算子豐富度提出了高要求。Menteebot發(fā)布之后,預(yù)計(jì)強(qiáng)化學(xué)習(xí)將上升為第五大基礎(chǔ)模塊,屆時(shí)軟件能力會(huì)不斷增強(qiáng),硬件冗余將成為一項(xiàng)重要的指標(biāo)。

第二個(gè)就是執(zhí)行單元如何強(qiáng)化AI能力,這就對(duì)MCUFPGA等部件提出了新要求。就以MCU來(lái)說(shuō),當(dāng)前這一產(chǎn)品類別一個(gè)重要的發(fā)展方向就是:能夠在MCU上部署和執(zhí)行AI程序。實(shí)際上,產(chǎn)業(yè)界早就開(kāi)始嘗試將AI部署在盡可能小的控制系統(tǒng)上,不過(guò)這個(gè)過(guò)程中也有很多挑戰(zhàn)。

首先要將AI模型部署在MCU上,就需要將這些模型轉(zhuǎn)化為C/C++代碼,這就需要對(duì)模型進(jìn)行非常精準(zhǔn)的量化,既要能夠保證模型的能力,同時(shí)也要盡量避免浮點(diǎn)運(yùn)算。這對(duì)MCU編譯器也有很高的要求,因?yàn)榱炕蟠a要部署到MCU里,需要經(jīng)過(guò)編譯器。

其次,當(dāng)MCU運(yùn)行AI模型之后,不能夠過(guò)度占用片上資源,也不能有太高的功耗。低功耗是至關(guān)重要的,因?yàn)樵谝粋€(gè)系統(tǒng)內(nèi),MCU器件的數(shù)量有很多,太高的功耗會(huì)影響系統(tǒng)整體的續(xù)航能力。

有人可能會(huì)說(shuō),MCU AI大可不必,但是要實(shí)現(xiàn)即時(shí)的AI效果,這是非常有必要的。

結(jié)語(yǔ)

Menteebot的發(fā)布堪稱人形機(jī)器人行業(yè)的黑馬,和電動(dòng)Atlas一樣讓人震撼。在所有操作層都接入AI,這是一個(gè)先進(jìn)的理念,也需要芯片作為核心硬件能夠更好地應(yīng)對(duì),其中高性能計(jì)算芯片需要支持多模態(tài),且強(qiáng)化學(xué)習(xí)模塊預(yù)計(jì)將上升為核心模塊;MCU AI對(duì)于即時(shí)性的提升是很有幫助的,但也很有挑戰(zhàn)性。
聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 機(jī)器人
    +關(guān)注

    關(guān)注

    213

    文章

    29748

    瀏覽量

    212885
  • AI
    AI
    +關(guān)注

    關(guān)注

    88

    文章

    35164

    瀏覽量

    279904
  • 人形機(jī)器人
    +關(guān)注

    關(guān)注

    7

    文章

    739

    瀏覽量

    17623
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    人形之外,AI機(jī)器人的多元未來(lái)

    Transformer模型、大型語(yǔ)言模型以及基礎(chǔ)模型方面的突破,必要的技術(shù)已“近在眼前”。 ? 不過(guò)相比于仍然處于前期的人形機(jī)器人,其他的非人形機(jī)器人已經(jīng)在市場(chǎng)中
    的頭像 發(fā)表于 01-21 00:08 ?3486次閱讀
    <b class='flag-5'>人形</b>之外,<b class='flag-5'>AI</b><b class='flag-5'>機(jī)器人</b>的多元未來(lái)

    NVIDIA 通過(guò)云端至機(jī)器人計(jì)算平臺(tái)驅(qū)動(dòng)人形機(jī)器人技術(shù),賦能物理 AI

    。 ? 包括 Agility Robotics、波士頓動(dòng)力、傅利葉、Foxlink、銀河通用、Mentee Robotics、NEURA Robotics、General Robotics、Skild AI 和小鵬機(jī)器人在內(nèi)的多家人形
    發(fā)表于 05-19 17:53 ?1019次閱讀
    NVIDIA 通過(guò)云端至<b class='flag-5'>機(jī)器人</b>計(jì)算平臺(tái)驅(qū)動(dòng)<b class='flag-5'>人形</b><b class='flag-5'>機(jī)器人</b>技術(shù),賦能物理 <b class='flag-5'>AI</b>

    大象機(jī)器人攜手進(jìn)迭時(shí)空推出 RISC-V 全棧開(kāi)源六軸機(jī)械臂產(chǎn)品

    大象機(jī)器人成立于2016年,專注協(xié)作機(jī)器人研發(fā)與應(yīng)用,產(chǎn)品線涵蓋輕量級(jí)協(xié)作機(jī)器人、人形機(jī)器人、仿生機(jī)器人
    發(fā)表于 04-25 17:59

    開(kāi)源鴻蒙助力人形機(jī)器人產(chǎn)業(yè)發(fā)展

    在近日舉辦的全球首個(gè)人形機(jī)器人半程馬拉松的賽場(chǎng)上,搭載開(kāi)放原子開(kāi)源基金會(huì)旗下開(kāi)源鴻蒙操作系統(tǒng)的“夸父”人形機(jī)器人以矯健的身姿參賽引發(fā)廣泛關(guān)注
    的頭像 發(fā)表于 04-23 17:35 ?581次閱讀

    春晚后人形機(jī)器人升級(jí),驚呆網(wǎng)友:中國(guó)的AI技術(shù)不可想象

    帶來(lái)了一場(chǎng)別開(kāi)生面的視覺(jué)盛宴,更讓觀眾真切感受到人形機(jī)器人時(shí)代的腳步正越來(lái)越近。節(jié)目播出后,人形機(jī)器人的升級(jí)和表現(xiàn)引發(fā)了網(wǎng)友的一片驚嘆:“中
    的頭像 發(fā)表于 02-17 09:15 ?475次閱讀

    人形機(jī)器人涉及的化工材料

    大模型的賦能下,從體能、技能、智能三方面,實(shí)現(xiàn)對(duì)的模仿,終端可應(yīng)用在特種作業(yè)、 工業(yè)、醫(yī)療、教育、娛樂(lè)、公共服務(wù)、家庭或通用等諸多領(lǐng)域。 從上個(gè)世紀(jì)60年代至今,人形機(jī)器人經(jīng)歷了多個(gè)發(fā)展
    的頭像 發(fā)表于 02-12 09:39 ?700次閱讀
    <b class='flag-5'>人形</b><b class='flag-5'>機(jī)器人</b>涉及的化工材料

    伺服電動(dòng)缸在人形機(jī)器人中的應(yīng)用

    顯著提升了人形機(jī)器人的性能和可靠性。例如,在靈巧手部位,伺服電動(dòng)缸的集成使得每根手指都能實(shí)現(xiàn)精準(zhǔn)的運(yùn)動(dòng)控制,從而提高了抓取和操作的精度。此外,伺服電動(dòng)缸還具有節(jié)能、低噪音、高剛性等優(yōu)點(diǎn),能夠適應(yīng)惡劣環(huán)境
    發(fā)表于 02-06 09:04

    《具身智能機(jī)器人系統(tǒng)》第1-6章閱讀心得之具身智能機(jī)器人系統(tǒng)背景知識(shí)與基礎(chǔ)模塊

    要給AI這個(gè)聰明的“頭腦”裝上一副“身體”。這個(gè)“身體”可以是一部手機(jī),可以是一臺(tái)自動(dòng)駕駛汽車。而人形機(jī)器人則是集各類核心尖端技術(shù)于一體的載體,是具身智能的代表產(chǎn)品。與傳統(tǒng)的軟件智能體不同,具身智能
    發(fā)表于 12-19 22:26

    全球巨頭加速布局人形機(jī)器人賽道

    ,進(jìn)一步推動(dòng)了人形機(jī)器人技術(shù)的發(fā)展。 在全球范圍內(nèi),人形機(jī)器人已經(jīng)成為科技巨頭們競(jìng)相追逐的熱門(mén)賽道。這些企業(yè)紛紛加大在
    的頭像 發(fā)表于 12-05 14:41 ?773次閱讀

    王耀南院士:AI大模型賦能人形機(jī)器人及未來(lái)趨勢(shì)

    他以多個(gè)案例詳細(xì)介紹了用AI大模型賦能具身智能人形機(jī)器人思路和方法,他提出未來(lái)在具身智能人形機(jī)器人
    的頭像 發(fā)表于 11-08 11:03 ?1629次閱讀
    王耀南院士:<b class='flag-5'>AI</b>大模型賦能<b class='flag-5'>人形</b><b class='flag-5'>機(jī)器人</b>及未來(lái)趨勢(shì)

    小鵬汽車正式進(jìn)軍人形機(jī)器人領(lǐng)域,發(fā)布AI機(jī)器人Iron

    在特斯拉之后,中國(guó)電動(dòng)汽車制造商小鵬汽車也于11月6日正式進(jìn)軍人形機(jī)器人領(lǐng)域。今日下午,小鵬汽車在廣州隆重發(fā)布了其自主研發(fā)的全新AI人形機(jī)器人
    的頭像 發(fā)表于 11-07 15:28 ?1264次閱讀

    利用NVIDIA技術(shù)推動(dòng)下一代AI機(jī)器人發(fā)展

    人形機(jī)器人到工廠,基于物理 AI 的工業(yè)系統(tǒng)正在通過(guò)訓(xùn)練、仿真和推理加速發(fā)展。
    的頭像 發(fā)表于 10-27 09:54 ?656次閱讀

    人形機(jī)器人場(chǎng)景應(yīng)用聯(lián)盟正式成立

    日前,在“2024首屆人形機(jī)器人場(chǎng)景應(yīng)用峰會(huì)”上,人形機(jī)器人場(chǎng)景應(yīng)用聯(lián)盟正式宣告成立。
    的頭像 發(fā)表于 08-19 11:17 ?1272次閱讀

    英偉達(dá)打造人形機(jī)器人訓(xùn)練平臺(tái),引領(lǐng)AI新紀(jì)元

    英偉達(dá)近日宣布了一項(xiàng)重大舉措,為全球機(jī)器人制造業(yè)與AI領(lǐng)域注入強(qiáng)勁動(dòng)力。公司推出了專為人形機(jī)器人設(shè)計(jì)的訓(xùn)練平臺(tái),旨在為行業(yè)領(lǐng)先的制造商、AI
    的頭像 發(fā)表于 08-05 11:45 ?1083次閱讀

    NVIDIA 加速人形機(jī)器人發(fā)展

    —SIGGRAPH— 當(dāng)?shù)貢r(shí)間 2024 年 7 月 29 日— 為加速全球人形機(jī)器人發(fā)展,NVIDIA 于今日宣布,為全球領(lǐng)先的機(jī)器人制造商、
    發(fā)表于 07-30 09:15 ?956次閱讀
    NVIDIA 加速<b class='flag-5'>人形</b><b class='flag-5'>機(jī)器人</b><b class='flag-5'>發(fā)展</b>