一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

TinyML音頻識(shí)別應(yīng)用及在Cortex-M4開(kāi)發(fā)板上的入門(mén)

冬至配餃子 ? 來(lái)源:Mary Bennion ? 作者:Mary Bennion ? 2022-07-27 16:27 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

TinyML很強(qiáng)大是因?yàn)樗鼛椭⑿驮O(shè)備基于大量數(shù)據(jù)采集制定決策方法,而不會(huì)浪費(fèi)時(shí)間和精力傳輸數(shù)據(jù)。假設(shè)你正在追蹤非洲大草原的動(dòng)物行為,你想知道獅子在一天中不同時(shí)間咆哮的頻率。

你可以選擇以下方法收集數(shù)據(jù):

?躲在草叢中,用記事本和鉛筆記錄每次聽(tīng)到的吼聲。

?用設(shè)置好的帶電池的錄音機(jī)記錄,每隔幾星期去更換存儲(chǔ)卡。

?通過(guò)數(shù)據(jù)連接(如蜂窩網(wǎng)絡(luò))傳輸音頻。

以上所有方法都有以下缺點(diǎn):

?將人員留在現(xiàn)場(chǎng)是非常昂貴的,同時(shí)還需考慮他們的安全問(wèn)題

?駕車(chē)去收集存儲(chǔ)卡需要耗費(fèi)時(shí)間和錢(qián),而且每隔幾周才可以獲得新數(shù)據(jù)。

?傳輸數(shù)據(jù)會(huì)消耗大量能量和錢(qián),并且大部分地區(qū)的網(wǎng)絡(luò)帶寬也受到限制。這種方法可能會(huì)更快地獲得數(shù)據(jù),但仍需定期開(kāi)車(chē)去更換電池。

除了這些缺點(diǎn)以外,在錄音中數(shù)出獅子的吼聲真的很無(wú)聊,而且還需要花費(fèi)寶貴的資金。訓(xùn)練機(jī)器學(xué)習(xí)模型來(lái)識(shí)別錄音中的獅子吼聲并自動(dòng)計(jì)數(shù)可以減輕這一煩惱。為此需要先收集一組帶標(biāo)簽的數(shù)據(jù)輸入到算法中,然后創(chuàng)建一個(gè)模型來(lái)識(shí)別音頻中的吼叫聲。

pYYBAGLg9a-ASp4CAAB912YTxu4827.png

這將解決需要花費(fèi)數(shù)小時(shí)收聽(tīng)Savanna音頻的問(wèn)題。但是這樣仍然保留了上述缺點(diǎn)。

在過(guò)去,機(jī)器學(xué)習(xí)模型只能存在于強(qiáng)大的大型硬件上,導(dǎo)致它們大多數(shù)時(shí)候只能在實(shí)驗(yàn)室的服務(wù)器上運(yùn)行。但是近年來(lái)機(jī)器學(xué)習(xí)算法和低功耗硬件已經(jīng)發(fā)展到可以在嵌入式設(shè)備上運(yùn)行復(fù)雜模型的階段。

如果我們采用獅吼計(jì)數(shù)模型應(yīng)用在嵌入式設(shè)備中并部署到野外,我們會(huì)獲得以下優(yōu)勢(shì):

?我們的設(shè)備無(wú)需通過(guò)昂貴的高帶寬網(wǎng)絡(luò)來(lái)發(fā)送記錄到的音頻,而是可以當(dāng)場(chǎng)計(jì)算聽(tīng)到的吼聲數(shù)量,并發(fā)送極低功率的遠(yuǎn)程無(wú)線電,像LoRa那樣。

?獲得咆哮聲的數(shù)量就夠了,所以不需要存儲(chǔ)音頻以及收集存儲(chǔ)卡。

?此設(shè)備很便宜且功耗極低,僅用一個(gè)電池即可運(yùn)行數(shù)年。

?沒(méi)有人需要聽(tīng)100小時(shí)的野生動(dòng)植物混合錄音帶了。

這聽(tīng)起來(lái)是一個(gè)很好的解決方案。我們解決了一些實(shí)際問(wèn)題,并獲得了比以前更便宜更可靠的解決方案。

但是機(jī)器學(xué)習(xí)是一個(gè)令人生畏的主題。它技術(shù)性很強(qiáng)并涉及許多新概念,它也存在很多陷阱,可以很容易地訓(xùn)練一個(gè)看似有用但無(wú)法工作的模型。

更重要的是,在嵌入式設(shè)備上運(yùn)行機(jī)器學(xué)習(xí)代碼非常困難。除了需要了解機(jī)器學(xué)習(xí)和信號(hào)處理算法的知識(shí)外,通常還會(huì)受制于硬件性能的限制,可能要運(yùn)用書(shū)中的所有技巧才能發(fā)揮給定類(lèi)型芯片的全部性能。

當(dāng)我們寫(xiě)《TinyML》這本書(shū)時(shí),我意識(shí)到盡管任何人都可以輕松地開(kāi)始學(xué)習(xí)基于嵌入式設(shè)備的機(jī)器學(xué)習(xí)。但想要構(gòu)建出可用于生產(chǎn)的東西卻會(huì)困難得多。對(duì)于專(zhuān)注解決實(shí)際問(wèn)題的普通工程師來(lái)說(shuō),一天中沒(méi)有足夠的時(shí)間來(lái)學(xué)習(xí)機(jī)器學(xué)習(xí),更不用說(shuō)要為特定的微控制器架構(gòu)優(yōu)化底層ML代碼了。機(jī)器學(xué)習(xí)聽(tīng)起來(lái)是一個(gè)不錯(cuò)的解決方案,但是它需要大量的投入來(lái)學(xué)習(xí)和使用。

這就是為什么我對(duì)Edge Impulse感到非常感興趣的原因(事實(shí)上我因?yàn)樘信d趣而加入了這個(gè)團(tuán)隊(duì))。它是一組用于處理機(jī)器學(xué)習(xí)中繁瑣部分的工具,使開(kāi)發(fā)人員可以專(zhuān)注于他們要解決的問(wèn)題。Edge Impulse讓收集數(shù)據(jù)集,選擇正確的機(jī)器學(xué)習(xí)算法,訓(xùn)練生產(chǎn)級(jí)模型以及測(cè)試的過(guò)程變得容易。然后它將整個(gè)內(nèi)容導(dǎo)出為可以輕松放入項(xiàng)目中的高效,高度優(yōu)化的C ++庫(kù)。

使用Edge Impulse創(chuàng)建咆哮計(jì)數(shù)模型的步驟很簡(jiǎn)單:

1.收集少量音頻數(shù)據(jù),給他們標(biāo)記為“吼”或“非吼”,整個(gè)過(guò)程只需幾分鐘就可以完成。
2.使用Edge Impulse CLI將數(shù)據(jù)上傳到Edge Impulse。
3.按照說(shuō)明訓(xùn)練簡(jiǎn)單模型。
4.添加更多數(shù)據(jù)并調(diào)整模型的設(shè)置直到獲得所需的精準(zhǔn)度。
5.將模型導(dǎo)出為C ++庫(kù),并將其添加到嵌入式項(xiàng)目中去。

整個(gè)過(guò)程可以在幾分鐘內(nèi)完成,你不必親自參觀非洲大草原。

由于現(xiàn)實(shí)中沒(méi)有獅子,所以本教程訓(xùn)練了一個(gè)可以識(shí)別家庭聲音的模型:即水龍頭發(fā)出的自來(lái)水聲。 要訓(xùn)練的模型大小約為18Kb并且體積小巧,卻可以運(yùn)用在復(fù)雜應(yīng)用的同時(shí)為應(yīng)用程序代碼留出大量空間。

如果你有一個(gè)基于Arm Cortex-M4的STM32 IoT Node Discovery Kit套件開(kāi)發(fā)板,就可以通過(guò)WiFi或串行捕獲自己的數(shù)據(jù)集。如果你沒(méi)有或者正在等待一個(gè)板子,可以下載我從Sunnyvale公寓收集的數(shù)據(jù)集。Edge Impulse構(gòu)建了一個(gè)可以?xún)?nèi)置到任何Cortex-M或Cortex-A設(shè)備中緊湊獨(dú)立的C ++庫(kù)。我們自動(dòng)使用FPU,矢量擴(kuò)展,CMSIS-DSP和CMSIS-NN來(lái)優(yōu)化性能,并最大程度地減少RAM和閃存的使用。

除獅子和水龍頭外,TinyML還有很多不同應(yīng)用。想象一下可以識(shí)別語(yǔ)音命令的微型設(shè)備:當(dāng)機(jī)器出現(xiàn)故障時(shí)進(jìn)行識(shí)別,根據(jù)周?chē)穆曇袅私夥课葜邪l(fā)生的活動(dòng)。它最大的優(yōu)點(diǎn)是借助設(shè)備上的推理功能可以保護(hù)用戶(hù)隱私-無(wú)需將任何音頻發(fā)送到云上。

通過(guò)使用Edge Impulse任何開(kāi)發(fā)人員都可以輕松構(gòu)建ML應(yīng)用程序,Edge Impulse為所有想把驚人想法應(yīng)用在硬件領(lǐng)域的人實(shí)現(xiàn)了夢(mèng)想。我們隨著技術(shù)的發(fā)展不斷改進(jìn)我們的平臺(tái),因此每個(gè)人都將從最新的算法和技術(shù)中受益。

審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 微控制器
    +關(guān)注

    關(guān)注

    48

    文章

    7953

    瀏覽量

    155120
  • RAM
    RAM
    +關(guān)注

    關(guān)注

    8

    文章

    1392

    瀏覽量

    117556
  • Cortex-M4
    +關(guān)注

    關(guān)注

    6

    文章

    99

    瀏覽量

    47197
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    【RA-Eco-RA6M4開(kāi)發(fā)板評(píng)測(cè)】+初識(shí)篇

    RA-Eco-RA6M4開(kāi)發(fā)板是一款基于 Arm? Cortex?-M33 內(nèi)核的開(kāi)發(fā)工具,且具有1MB 閃存、192kB支持奇偶校驗(yàn) SR
    發(fā)表于 07-16 19:06

    【新品】遠(yuǎn)距離圖傳數(shù)傳模塊開(kāi)發(fā)板、藍(lán)牙模塊開(kāi)發(fā)板、無(wú)線模塊開(kāi)發(fā)板

    新品上市圖傳數(shù)傳模塊開(kāi)發(fā)板藍(lán)牙模塊開(kāi)發(fā)板國(guó)產(chǎn)無(wú)線模塊開(kāi)發(fā)板部分型號(hào)參與送樣文末了解詳情↓↓↓EWT611-900NW20S遠(yuǎn)距離圖傳數(shù)傳模塊開(kāi)發(fā)板EWT611-900NW20S是一款
    的頭像 發(fā)表于 06-12 19:33 ?348次閱讀
    【新品】遠(yuǎn)距離圖傳數(shù)傳模塊<b class='flag-5'>開(kāi)發(fā)板</b>、藍(lán)牙模塊<b class='flag-5'>開(kāi)發(fā)板</b>、無(wú)線模塊<b class='flag-5'>開(kāi)發(fā)板</b>

    STM32F3系列、STM32F4系列、STM32L4系列和STM32L4+系列Cortex-M4編程手冊(cè)

    電子發(fā)燒友網(wǎng)站提供《STM32F3系列、STM32F4系列、STM32L4系列和STM32L4+系列Cortex-M4編程手冊(cè).pdf》資料免費(fèi)下載
    發(fā)表于 06-06 17:06 ?5次下載

    藍(lán)牙音頻串口透?jìng)?b class='flag-5'>開(kāi)發(fā)板音頻接收方案

    物聯(lián)網(wǎng)與智能硬件爆發(fā)的時(shí)代,開(kāi)發(fā)者急需一款能同時(shí)攻克音頻處理與數(shù)據(jù)通信痛點(diǎn)的全能工具。ANS-DB003M的出現(xiàn),或許正是答案。今天,我們就來(lái)深度測(cè)評(píng)一款備受矚目的產(chǎn)品—ANS-DB
    的頭像 發(fā)表于 06-06 16:48 ?228次閱讀
    藍(lán)牙<b class='flag-5'>音頻</b>串口透?jìng)?b class='flag-5'>開(kāi)發(fā)板</b><b class='flag-5'>音頻</b>接收方案

    PPEC新品發(fā)布丨圖形化編程數(shù)字電源專(zhuān)用 ARM Cortex-M4 MCU

    痛點(diǎn)。該芯片基于120MHz主頻Cortex-M4內(nèi)核,集成高精度PWM、多協(xié)議通信接口等豐富資源。硬件設(shè)計(jì),采用LQFP64封裝,兼容主流ARM芯片引腳布局
    的頭像 發(fā)表于 05-22 17:30 ?484次閱讀
    PPEC新品發(fā)布丨圖形化編程數(shù)字電源專(zhuān)用 ARM <b class='flag-5'>Cortex-M4</b> MCU

    米爾基于瑞芯微RK3506核心開(kāi)發(fā)板

    MYC-YR3506核心開(kāi)發(fā)板新一代入門(mén)級(jí)國(guó)產(chǎn)工業(yè)處理器RK3506,3核A7+單核M0多核異構(gòu)RK3506B:3*Cortex-A7@
    發(fā)表于 05-15 16:00 ?5次下載

    基于RK3576開(kāi)發(fā)板的人臉識(shí)別算法

    RK3576開(kāi)發(fā)板展示人臉識(shí)別算法例程和API說(shuō)明
    的頭像 發(fā)表于 05-07 16:48 ?1942次閱讀
    基于RK3576<b class='flag-5'>開(kāi)發(fā)板</b>的人臉<b class='flag-5'>識(shí)別</b>算法

    i.MX8MMini中的Cortex-M4不支持SDIO嗎?

    我們正在嘗試使用 i.MX8MMini (Cortex-A53/-M4) 并考慮 Cortex-M4 協(xié)處理器中實(shí)現(xiàn)無(wú)線模塊 (SDIO I/F)。 關(guān)于
    發(fā)表于 04-03 06:45

    東芝推出七款基于Arm Cortex-M4內(nèi)核的32位微控制器

    東芝電子元件及存儲(chǔ)裝置株式會(huì)社(“東芝”)宣布,最新推出七款配備Cortex-M4內(nèi)核的32位微控制器,進(jìn)一步擴(kuò)大其電機(jī)控制微控制器產(chǎn)品線。其中,六款產(chǎn)品組成新的產(chǎn)品組合——M4K組(1)[1],另外一款產(chǎn)品加入M470組。
    的頭像 發(fā)表于 01-22 18:05 ?848次閱讀
    東芝推出七款基于Arm <b class='flag-5'>Cortex-M4</b>內(nèi)核的32位微控制器

    正點(diǎn)原子fpga開(kāi)發(fā)板不同型號(hào)

    ZYNQ-7000系列 ZYNQ-7000系列是正點(diǎn)原子的入門(mén)級(jí)FPGA開(kāi)發(fā)板,適合初學(xué)者和教育用途。這些開(kāi)發(fā)板搭載了Xilinx的Zynq-7000系列SoC芯片,集成了ARM Corte
    的頭像 發(fā)表于 11-13 09:30 ?3727次閱讀

    航順 HK32F407ZGT7 芯片的開(kāi)發(fā)板:多功能外設(shè)助力多領(lǐng)域應(yīng)用

    HK32F407ZGT7開(kāi)發(fā)板 1.開(kāi)發(fā)板簡(jiǎn)介 開(kāi)發(fā)板是基于航順芯片公司F4系列HK32F407ZGT7開(kāi)發(fā)的一款
    的頭像 發(fā)表于 11-08 14:43 ?676次閱讀
    航順 HK32F407ZGT7 芯片的<b class='flag-5'>開(kāi)發(fā)板</b>:多功能外設(shè)助力多領(lǐng)域應(yīng)用

    【干貨】有了這份HK32F407ZGT7開(kāi)發(fā)板介紹,1萬(wàn)個(gè)項(xiàng)目輕松拿捏!

    2024-11-0811:39·航順HK32MCUHK32F407ZGT7開(kāi)發(fā)板開(kāi)發(fā)板簡(jiǎn)介開(kāi)發(fā)板是基于航順芯片公司F4系列HK32F407ZGT7開(kāi)
    的頭像 發(fā)表于 11-08 13:28 ?812次閱讀
    【干貨】有了這份HK32F407ZGT7<b class='flag-5'>開(kāi)發(fā)板</b>介紹,1萬(wàn)個(gè)項(xiàng)目輕松拿捏!

    【干貨】性?xún)r(jià)比拉滿!HK32F407VG開(kāi)發(fā)板介紹

    開(kāi)發(fā)板簡(jiǎn)介開(kāi)發(fā)板是基于航順芯片公司F4系列HK32F407VGT7芯片的一款開(kāi)發(fā)板,Cortex-M4內(nèi)核,最高主頻168MHz,內(nèi)置1MK
    的頭像 發(fā)表于 11-08 13:27 ?782次閱讀
    【干貨】性?xún)r(jià)比拉滿!HK32F407VG<b class='flag-5'>開(kāi)發(fā)板</b>介紹

    ARM開(kāi)發(fā)板與樹(shù)莓派的比較

    處理器 ARM開(kāi)發(fā)板通常采用不同的ARM處理器,如Cortex-A系列、Cortex-M系列等,而樹(shù)莓派則主要使用博通的ARM處理器。樹(shù)莓派的處理器性能相對(duì)較高,尤其是最新的樹(shù)莓派
    的頭像 發(fā)表于 11-05 11:11 ?1395次閱讀

    TI開(kāi)發(fā)板啟用Android Automotive

    電子發(fā)燒友網(wǎng)站提供《TI開(kāi)發(fā)板啟用Android Automotive.pdf》資料免費(fèi)下載
    發(fā)表于 09-18 14:52 ?0次下載
    <b class='flag-5'>在</b>TI<b class='flag-5'>開(kāi)發(fā)板</b><b class='flag-5'>上</b>啟用Android Automotive