一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

基于MAX78000FTHR的機器學(xué)習實時處理方案

電子設(shè)計 ? 來源:Maxim ? 作者:Maxim ? 2021-01-16 11:22 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

MAX78000本質(zhì)上是一個ARM Cortex-M4F微控制器,周邊有很多硬件,其中包括Maxim設(shè)計的神經(jīng)網(wǎng)絡(luò)(CNN)加速器(圖1)。這種機器學(xué)習(ML)支持使芯片能夠?qū)崟r處理諸如識別關(guān)鍵字甚至人臉識別等,而不會浪費功率預(yù)算。

1.MAX78000包括Cortex-M4F和RISC-V內(nèi)核以及CNN加速器。

該芯片還包括一個引人注意的是RISC-V內(nèi)核,但是,由于其太新了,因此Cortex-M4F是主要處理器。甚至CNN的支持都還處于beta階段之外,但這些都是本文的重點。

MAX78000具有通常的微控制器外設(shè)功能,包括一系列串行端口定時器和并行/串行接口,例如I2S。它甚至具有并行攝像頭接口,在模擬外設(shè)中有一個8通道10位sigma-delta ADC,也包括四個比較器。

該芯片具有512kB的閃存以及128kB的SRAM和引導(dǎo)ROM,該引導(dǎo)ROM允許更復(fù)雜的引導(dǎo)過程,例如安全引導(dǎo)支持。有片上密鑰存儲以及CRC和AES硬件支持,未來將獲得CNN支持?;贕ithub的文檔可一覽無余。

開發(fā)工具是基于Eclipse的免費開發(fā)工具,而Eclipse是其他平臺(例如德州儀器的Code Composer Studio和Silicon LabsSimplicity Studio)的基礎(chǔ)。 Maxim并沒有做太多的定制工作,但是有足夠的便利來使用諸如MAX78000之類的硬件,同時使第三方插件和工具的使用變得容易,這在處理云或物聯(lián)網(wǎng)開發(fā)環(huán)境時非常方便。默認安裝包括示例和教程,可輕松測試CNN硬件和其他外圍設(shè)備。

MAX78000開發(fā)板具有兩個LCD顯示器。較大的3.5英寸TFT觸摸顯示屏適用于處理器,而第二個較小的顯示屏則提供電源管理信息。該芯片沒有內(nèi)置顯示控制器,使用串行接口與較大的顯示器配合使用。功率跟蹤支持非常完善。

開發(fā)板帶有一個16 MB的QSPI閃存芯片,可以方便地存儲圖像數(shù)據(jù)。此外,閃存芯片的USB橋接器允許更快,更輕松地下載數(shù)據(jù)。

該開發(fā)板還添加了一些有用的設(shè)備,例如數(shù)字麥克風,3D加速度計和3D陀螺儀。幾個按鈕和LED完善了外圍設(shè)備,支持JTAG。

如前所述,這次沒有使用RISC-V內(nèi)核,而是采用為Cortex-M4F生成C代碼以設(shè)置CNN硬件。 CNN硬件旨在處理單個模型,但是可以快速更換新模型。

與大多數(shù)機器學(xué)習硬件一樣,大多數(shù)程序員都傾向于隱藏底層硬件,從而提供了更多的黑盒操作,您可以在其中設(shè)置盒子并將其數(shù)據(jù)饋入另一端。如果可用模型,這將很好地工作;這是用不同的信息或使用經(jīng)過訓(xùn)練的模型來訓(xùn)練。開發(fā)和訓(xùn)練新模型時面臨挑戰(zhàn),這是我在此將避免討論的問題。

我確實嘗試了Maxim提供的兩種模型,包括關(guān)鍵字搜索和面部識別(FaceID)應(yīng)用程序。 Keyword Spotting應(yīng)用程序本質(zhì)上是語音識別系統(tǒng),可用于偵聽關(guān)鍵字以啟動基于云的服務(wù),這是大多數(shù)基于Alexa的語音系統(tǒng)的工作方式,因為云在識別關(guān)鍵字后會處理所有內(nèi)容。

另一方面,能夠識別許多不同的關(guān)鍵字使構(gòu)建基于語音的命令系統(tǒng)成為可能,例如許多汽車導(dǎo)航系統(tǒng)中使用的命令系統(tǒng)。Cortex-M4F會處理輸入,并進行一些調(diào)整以向CNN加速器提供合適的輸入(圖2)。檢測到的類輸出指定識別哪個關(guān)鍵字(如果有)。然后,應(yīng)用程序可以利用此信息。

2.在將信息移交給CNN加速器之前,Cortex-M4F會處理初始音頻輸入流。

FaceID系統(tǒng)突出顯示了MAX78000的攝像機支持(圖3)。這可用于識別人臉或識別在裝配線上移動的特定零件。樣品應(yīng)用程序可以使用固定輸入(如圖所示)或從攝像機進行操作。

3.FaceID應(yīng)用程序強調(diào)了CNN實時處理圖像的能力。

使用默認值會變得很容易。Maxim提供所有示例代碼和過程。這些可以稍作修改,但是重新訓(xùn)練模型是一項涉及更多的工作,盡管Maxim的文檔確實涵蓋了這一工作。這些示例概述了需要做什么以及需要更改哪些內(nèi)容以定制解決方案。

將模型和應(yīng)用程序更改為電動機振動監(jiān)控系統(tǒng)之類的工作將是一項艱巨的工作,需要一種新的模型,但是該芯片很可能能夠處理。它將需要更多的機器學(xué)習和CNN支持。

該工具集支持TensorFlow和PyTorch等平臺的模型(圖4)。這很有用,因為訓(xùn)練不是由芯片處理的,而是在PC或云服務(wù)器等平臺上進行的。同樣,可以對模型進行完善和在高端硬件上進行測試以驗證模型,然后可以對其進行修剪以適合MAX78000。

4.PyTorch只是MAX78000處理的框架之一。訓(xùn)練不是在微型計算機上進行的。 Maxim的工具將模型轉(zhuǎn)換為驅(qū)動CNN硬件的代碼。

此時,CNN加速器文檔以及RISC-V支持都很少。Maxim的CNN模型編譯器可將C代碼導(dǎo)入到Eclipse IDE中。調(diào)試常規(guī)應(yīng)用程序代碼與通過JTAG進行遠程調(diào)試。

Maxim還提供MAX78000FTHR,它是簡化評估板(圖5),它沒有顯示器或其他外圍硬件,但大多數(shù)I / O是裸露的。單是開發(fā)板僅有25美元。批量購買時,該芯片的單價約為15美元。

5.簡化評估板MAX78000FTHR

MAX78000的使用非常有趣。這是一個支持邊緣ML應(yīng)用程序的絕佳平臺。但是,請注意,盡管這是一種非常低功耗的解決方案,但它與低端Nvidia Jetson Nano都不一樣。檢驗電源跟蹤支持很有趣,因為低功耗可能是許多MAX78000應(yīng)用中的關(guān)鍵因素,尤其是基于電池的解決方案。
編輯:hfy

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • Maxim
    +關(guān)注

    關(guān)注

    8

    文章

    861

    瀏覽量

    88629
  • 神經(jīng)網(wǎng)絡(luò)

    關(guān)注

    42

    文章

    4814

    瀏覽量

    103631
  • 機器學(xué)習
    +關(guān)注

    關(guān)注

    66

    文章

    8503

    瀏覽量

    134625
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    Analog Devices / Maxim Integrated MAX32650FTHR Feather板評估套件數(shù)據(jù)手冊

    Analog Devices MAX32650FTHR Feather板評估套件是一個用于突出MAX32650超低功耗內(nèi)存可擴展微控制器的平臺。MAX32650超低功耗微控制器設(shè)計用于電池供電
    的頭像 發(fā)表于 07-01 10:27 ?171次閱讀
    Analog Devices / Maxim Integrated <b class='flag-5'>MAX32650FTHR</b> Feather板評估套件數(shù)據(jù)手冊

    邊緣計算 + 工控一體機:如何實現(xiàn)工業(yè)數(shù)據(jù)實時處理與本地化決策?

    在工業(yè) 4.0 和智能制造蓬勃發(fā)展的時代,工業(yè)數(shù)據(jù)的高效處理與決策的及時性成為提升企業(yè)競爭力的關(guān)鍵因素。邊緣計算與工控一體機的結(jié)合,為實現(xiàn)工業(yè)數(shù)據(jù)實時處理與本地化決策提供了強有力的解決方案,正深刻地
    的頭像 發(fā)表于 06-07 15:03 ?178次閱讀
    邊緣計算 + 工控一體機:如何實現(xiàn)工業(yè)數(shù)據(jù)<b class='flag-5'>實時處理</b>與本地化決策?

    匠芯創(chuàng)科技M76P00_M73P00_Datasheet中文數(shù)據(jù)手冊免費下載 RISC-V內(nèi)核 主頻552MHz的DSP實時處理

    匠芯創(chuàng)科技M76P00_M73P00_Datasheet中文數(shù)據(jù)手冊免費下載 RISC-V內(nèi)核 主頻552MHz的DSP實時處理
    的頭像 發(fā)表于 05-14 16:40 ?573次閱讀
    匠芯創(chuàng)科技M76P00_M73P00_Datasheet中文數(shù)據(jù)手冊免費下載  RISC-V內(nèi)核 主頻552MHz的DSP<b class='flag-5'>實時處理</b>器

    匠芯創(chuàng)科技M7000系列選型表分享 RISC-V內(nèi)核的高性能DSP實時處理器 適配機器

    匠芯創(chuàng)科技M7000系列選型表分享 RISC-V內(nèi)核的高性能DSP實時處理器 適配機器
    的頭像 發(fā)表于 05-14 16:15 ?524次閱讀
    匠芯創(chuàng)科技M7000系列選型表分享  RISC-V內(nèi)核的高性能DSP<b class='flag-5'>實時處理</b>器 適配<b class='flag-5'>機器</b>人

    MAX7800X AI 微控制器開發(fā)人員資源

    使用我們的超低功耗 AI 微控制器實現(xiàn)真正的邊緣智能 MAX78000 MAX78002 是 Arm? M4F AI 微控制器,帶有 RISC-V? 協(xié)處理器和基于硬件的卷積神經(jīng)網(wǎng)絡(luò) (CNN
    的頭像 發(fā)表于 05-14 15:09 ?720次閱讀
    <b class='flag-5'>MAX</b>7800X AI 微控制器開發(fā)人員資源

    匠芯創(chuàng)科技M700:機器人關(guān)節(jié)的高性能實時處理器到控制算法的生態(tài)閉環(huán)

    科技有限公司市場總監(jiān)徐勇詳細介紹了公司帶來的機器人關(guān)節(jié)的高性能實時處理器M7000系列,以及控制算法。 廣東匠芯創(chuàng)科技有限公司成立于2019年,立足于RISC-V SoC芯片設(shè)計、工業(yè)控制、多媒體人機交互、人工智能等核心技術(shù),已經(jīng)推出了M68
    的頭像 發(fā)表于 05-13 15:38 ?5229次閱讀
    匠芯創(chuàng)科技M700:<b class='flag-5'>機器</b>人關(guān)節(jié)的高性能<b class='flag-5'>實時處理</b>器到控制算法的生態(tài)閉環(huán)

    AI MPU# 瑞薩RZ/V2H 四核視覺 ,采用 DRP-AI3 加速器和高性能實時處理

    器,以及雙核 Cortex ^?^ -R8 (800MHz) 實時處理器。 此外,RZ/V2H 還包括另一個動態(tài)、可重配置處理器 (DRP)。 這款處理器可加速圖像處理,如OpenCV
    的頭像 發(fā)表于 03-15 11:50 ?1462次閱讀
    AI MPU# 瑞薩RZ/V2H 四核視覺 ,采用 DRP-AI3 加速器和高性能<b class='flag-5'>實時處理</b>器

    stm32f103的uac模式對usb接收的數(shù)據(jù)實時處理,要怎么操作?

    我將 stm32f103c8t6 設(shè)置成了 usb 聲卡模式,電腦已經(jīng)能檢測到設(shè)備。下一步想對電腦傳出的聲音數(shù)據(jù)進行處理,得到實時的聲音大小。處理程序應(yīng)該放在哪里?聲音大小怎么計算?純小白問題,感謝大佬指點。
    發(fā)表于 03-12 07:23

    ADI 新型AI微控制器 # MAX78000 數(shù)據(jù)手冊和芯片介紹

    MAX78000是一款新型的AI微控制器,使神經(jīng)網(wǎng)絡(luò)能夠在互聯(lián)網(wǎng)邊緣端以超低功耗運行,將高能效的AI處理與經(jīng)過驗證的ADI/Maxim超低功耗微控制器相結(jié)合。通過這款基于硬件的卷積神經(jīng)網(wǎng)絡(luò)(CNN)加速器,即使是電池供電的應(yīng)用也可執(zhí)行AI推理,同時功耗僅為微焦耳級。
    的頭像 發(fā)表于 02-08 16:50 ?949次閱讀
    ADI 新型AI微控制器 # <b class='flag-5'>MAX78000</b> 數(shù)據(jù)手冊和芯片介紹

    自然語言處理機器學(xué)習的關(guān)系 自然語言處理的基本概念及步驟

    自然語言處理(Natural Language Processing,簡稱NLP)是人工智能和語言學(xué)領(lǐng)域的一個分支,它致力于研究如何讓計算機能夠理解、解釋和生成人類語言。機器學(xué)習(Machine
    的頭像 發(fā)表于 12-05 15:21 ?1987次閱讀

    NPU與機器學(xué)習算法的關(guān)系

    在人工智能領(lǐng)域,機器學(xué)習算法是實現(xiàn)智能系統(tǒng)的核心。隨著數(shù)據(jù)量的激增和算法復(fù)雜度的提升,對計算資源的需求也在不斷增長。NPU作為一種專門為深度學(xué)習機器
    的頭像 發(fā)表于 11-15 09:19 ?1223次閱讀

    旋智多核心處理器助力電機控制應(yīng)用

    電機控制應(yīng)用軟件通常需要實時處理,以確保精確控制和快速響應(yīng)。高性能、多核嵌入式處理器能夠實時處理多項復(fù)雜計算,是保持電機控制系統(tǒng)穩(wěn)定性和準確性的關(guān)鍵。
    的頭像 發(fā)表于 10-24 16:17 ?844次閱讀
    旋智多核心<b class='flag-5'>處理</b>器助力電機控制應(yīng)用

    恩智浦S32Z/E實時處理器實現(xiàn)車載ECU集成

    隨著車輛電子電氣架構(gòu)的發(fā)展,整合各種實時汽車應(yīng)用成為了剛需,恩智浦的S32Z和S32E實時處理器系列應(yīng)運而生。
    的頭像 發(fā)表于 10-21 10:07 ?1063次閱讀

    安富利攜手恩智浦推出人工智能解決方案

    在物聯(lián)網(wǎng)(IoT)和工業(yè)4.0時代,數(shù)據(jù)的海量化與實時處理需求日益增長,對邊緣計算設(shè)備提出了前所未有的挑戰(zhàn)。對此,安富利攜手恩智浦,基于創(chuàng)新的MCX-N系列微控制器,推出一系列“開箱即用”的人工智能解決方案,旨在為客戶提供高效、可靠、靈活的人工智能服務(wù),加速
    的頭像 發(fā)表于 08-01 10:38 ?2004次閱讀
    安富利攜手恩智浦推出人工智能解決<b class='flag-5'>方案</b>

    國產(chǎn)FRAM SF25C20用于實時處理系統(tǒng),兼容MB85RS2MT

    國產(chǎn)FRAM SF25C20用于實時處理系統(tǒng),兼容MB85RS2MT
    的頭像 發(fā)表于 07-31 10:06 ?767次閱讀
    國產(chǎn)FRAM SF25C20用于<b class='flag-5'>實時處理</b>系統(tǒng),兼容MB85RS2MT