一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

機器怎么獲取辨音能力?

中科院半導(dǎo)體所 ? 來源:中國科普博覽 ? 2020-08-27 16:37 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

不知道你是否有這樣的經(jīng)歷,月底窮困潦倒的你中午走進人潮喧嘩的食堂,正在心里瘋狂比較哪個菜更便宜時,忽然聽到五米開外某人的一聲“咱們發(fā)工資了”,于是你理直氣壯地對食堂大媽喊道:“加個雞腿!”

還有,不管在哪里,周圍有多吵,一旦有人叫自己的名字,總是能聽到。人能夠在如此嘈雜的環(huán)境下精確捕捉到想聽到的聲音,甚至還能知道聲音的方位,相比之下,現(xiàn)在的很多智能設(shè)備卻做不到這一點,這究竟是為什么呢?

Part. 1

人的聽覺為什么具有選擇性

說起人的聽覺,有一個著名的效應(yīng)——雞尾酒會效應(yīng),它是指在喧鬧的雞尾酒會上,參會者大腦中的聽覺系統(tǒng)可以將他的注意力集中約束在他感興趣的談話內(nèi)容上,而自動忽略其他“無關(guān)”的噪聲,即使周圍環(huán)境非常嘈雜。

然而,這種我們?nèi)祟愑脙芍欢渚湍芨愣ǖ男栴},對于智能音箱等語音交互設(shè)備來說,卻并不是那么容易的。當(dāng)它們身處嘈雜的環(huán)境時,很容易就受到各種來路不明的聲音的連環(huán)暴擊,最終陷入我是誰我在哪我在干嘛的死循環(huán)中無法自拔(感興趣的同學(xué)可以打開你身邊的語音交互設(shè)備嘗試一下)…

于是,攻(工)城(程)獅(師)們本著大力出奇跡的原則,不惜斥巨資為它們裝上很多個金光閃閃的麥克風(fēng)用來接收聲音,又去全世界各地搜羅各種各樣的聲音數(shù)據(jù),沒日沒夜地投喂它們。但是,機器們學(xué)習(xí)的效果不是十分理想,雞尾酒會問題至今仍然困擾著世界各地的語音攻城獅們。

這時有的同學(xué)可能就要坐不住了:“就這?還用學(xué)?看來我的學(xué)霸屬性就要藏不住了!”這位同學(xué)你先冷靜一下,事情可并不是你想的那么簡單喲。

其實,你能具有這種聽覺選擇能力首先要感謝你的媽媽給了你兩只忽閃忽閃的大耳朵,這使得你的耳膜并不是像麥克風(fēng)一樣是直接裸露在空氣中的。你的耳廓、頭部、肩膀、軀干等身體部位對于聲音來說像是一個“迷宮”,來自不同方位的聲音需要從不同的入口進入,經(jīng)歷上述部位的一系列反射后最終到達“迷宮”的中心——耳膜,然后你的大腦就能感知到這個聲音啦。

由于聲波所走過的路徑不同,它們的頻譜也會發(fā)生不同程度的修改。在這個“迷宮”的不同位置,仿佛潛伏著一群造型師(沒錯,就是讓你又愛又恨的Tony老師),聲波路過時總是難免被“改造”一番。由于這些造型師們風(fēng)格迥異、水平參差不齊,在大腦看來,這些聲波就變得各有特色,所以很容易區(qū)分,怎么說呢…有點像…

所以當(dāng)你還是個小baby的時候,你還沒能累積足夠多的聽音經(jīng)驗,你的大腦對這些改造過的聲音可能一時無法辨認,因此導(dǎo)致你對聲音的辨別能力可能比較弱。隨著你慢慢長大,聽到的聲音越來越多,你的大腦就會慢慢摸清套路,建立一套自己的算法(數(shù)據(jù)庫),這樣即使是好幾個聲音同時出現(xiàn)在你面前,你也能很輕松地區(qū)分他們。

Part. 2

機器怎么獲取辨音能力

那么問題來了!能不能讓機器像我們?nèi)艘粯?,擁有能夠分辨不同聲音的能力呢?答案是肯定噠!前不久,中科院聲學(xué)所的楊軍研究員團隊就提出了一種基于聲學(xué)超材料的單通道多聲源定位與分離系統(tǒng),只使用一個帶有超材料外殼的單通道傳聲器,即可實現(xiàn)三維空間中多個同時發(fā)聲聲源的實時定位與分離。研究成果發(fā)表在了綜合類期刊Advanced Science上。

別...別激動…說人話就是——給麥克風(fēng)做了一個忽閃忽閃的“大耳朵”,不過這個耳朵跟我們的耳朵差別有點大,它長這樣…

左圖:超材料結(jié)構(gòu)模型圖 右圖:超材料結(jié)構(gòu)實物圖

(圖片來源:作者繪制與拍攝)

我們暫且叫他“蜂窩耳”吧。這個“蜂窩耳”由外中內(nèi)三層半球殼嵌套而成,每一層球殼上都隨機設(shè)置大小不一的圓孔,球殼之間隨機插入了若干塊橫向和縱向的擋板來制造大小不一的腔體,在球心位置則放著一個單通道的麥克風(fēng)。這些大小隨機的圓孔和隔板使“蜂窩耳”具有高度的空間不對稱性,因此會對來自不同方向的聲波起到不同的調(diào)制效果。

這個“蜂窩耳”中的聲學(xué)結(jié)構(gòu)就像是一個個風(fēng)格迥異的Tony老師,聲波經(jīng)過時總是難逃老師們的“改造”,這位老師畫個眉毛,那位老師涂個口紅,所以等它到麥克風(fēng)的面前時,早就不是它原本的樣子啦。

你可能已經(jīng)猜到,“蜂窩耳”的學(xué)名就是——聲學(xué)濾波器。剛才所說的聲波的“改造”過程其實就是濾波過程,濾波后的聲信號頻譜會發(fā)生相應(yīng)的改變,因此被麥克風(fēng)接收到的信號就會產(chǎn)生與來波方向有關(guān)的差異性了。

那么問題又來了——你以為聲波們長得不一樣,機器就能很快辨別出來嗎?想得美!

我們還需要訓(xùn)練一個算法,讓機器提取這些聲波身上的獨家特征,最終定位和識別來自不同方向的聲音。擁有這個算法就好像擁有了一本Tony老師們的《造型百科全書》,里面記錄了各位Tony老師的改造技能和偏愛風(fēng)格。從某種意義上說,這個算法也可以幫助廣大男同胞完美應(yīng)對女朋友每日的靈魂拷問:“你覺得我今天有什么不一樣嗎?”是不是很想來一套!

Part. 3

機器戴耳記

一切準(zhǔn)備就緒,我們的“蜂窩耳”就可以正式上崗啦!

來自不同方向的聲波從外表面不同的位置進入“蜂窩耳”,經(jīng)過不同的傳播路徑時被不同的造型師改造,被球心的麥克風(fēng)接收;熟讀《造型百科全書》的算法對接收信號進行處理,最終重建出它們的來波方向和聲音的內(nèi)容。這種超材料結(jié)構(gòu)+智能算法的組合,只用一個麥克風(fēng)就能實現(xiàn)多聲源的實時定位和分離。攻城獅們再也不用擔(dān)心麥克風(fēng)數(shù)量不夠用啦!

“蜂窩耳”的工作流程

(圖片來源:作者繪制)

你是不是也很好奇“蜂窩耳”的效果如何呢?來看看研究人員針對多個生活場景進行的聽音測試。

實驗場景(圖片來源:作者拍攝)

“蜂窩耳”(圖片紅框里)放在中間,周圍均勻放置16個音響用于播放測試所用的聲音。測試所用到的聲音包括馬路上的鳴笛聲、動物的叫聲、各種樂器聲、人說話的聲音等等,好奇心爆棚的筆者曾一度跑到“蜂窩耳”的位置,試圖挑戰(zhàn)一下這個聽音測試,當(dāng)時的場景大概是這個樣子的…

不過,這對訓(xùn)練有素的“蜂窩耳”來說就是小菜一碟啦。當(dāng)空間中同時發(fā)聲的聲源不超過三個,定位與分離的準(zhǔn)確率可以達到90%以上,耗時也不超過1s,是不是棒棒噠!

當(dāng)然,現(xiàn)在的“蜂窩耳”還只能算一個小baby,它的聲學(xué)結(jié)構(gòu)設(shè)計和后端算法仍有待進一步的磨合和提升,研究人員也正在馬不停蹄地研發(fā)“蜂窩耳”2.0版本。隨著語音技術(shù)的發(fā)展,我們身邊越來越多的電子設(shè)備都搭載了語音交互系統(tǒng),希望這個“蜂窩耳”能讓這些設(shè)備更加智能,使人與機器之間的交互更加流暢和便捷。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 濾波器
    +關(guān)注

    關(guān)注

    162

    文章

    8132

    瀏覽量

    181868
  • 智能設(shè)備
    +關(guān)注

    關(guān)注

    5

    文章

    1098

    瀏覽量

    52090
  • 智能音箱
    +關(guān)注

    關(guān)注

    31

    文章

    1787

    瀏覽量

    79748

原文標(biāo)題:嘿,siri!嘈雜的酒吧里,AI為什么聽不懂指令?

文章出處:【微信號:bdtdsj,微信公眾號:中科院半導(dǎo)體所】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    明遠智睿SSD2351開發(fā)板:語音機器人領(lǐng)域的變革力量

    接口則讓語音機器人可以連接到互聯(lián)網(wǎng),實時獲取最新的信息,增強其智能性和交互能力。 在實際應(yīng)用場景中,以智能客服語音機器人為例。SSD2351開發(fā)板可以驅(qū)動語音識別模塊,準(zhǔn)確識別用戶的問
    發(fā)表于 05-28 11:36

    如何獲取CCG5和HMD之間的請求信息(rdo)?

    現(xiàn)在我們可以使用 dpm_update_src_cap()修改源 pdo,CCG5 會向 HMD 發(fā)送源能力,我們想知道是否有任何函數(shù)可以從 HMD 獲取 rdo。
    發(fā)表于 05-22 07:16

    EtherCAT科普系列(8):EtherCAT技術(shù)在機器視覺領(lǐng)域的應(yīng)用

    機器視覺是基于軟件與硬件的組合,通過光學(xué)裝置和非接觸式的傳感器自動地接受一個真實物體的圖像,并利用軟件算法處理圖像以獲得所需信息或用于控制機器人運動的裝置。機器視覺可以賦予機器人及自動
    的頭像 發(fā)表于 05-15 17:09 ?629次閱讀
    EtherCAT科普系列(8):EtherCAT技術(shù)在<b class='flag-5'>機器</b>視覺領(lǐng)域的應(yīng)用

    如何獲取 OpenAI API Key?API 獲取與代碼調(diào)用示例 (詳解教程)

    OpenAI API Key 獲取與使用詳解:從入門到精通 OpenAI 正以其 GPT 和 DALL-E 等先進模型引領(lǐng)全球人工智能創(chuàng)新。其 API 為開發(fā)者和企業(yè)提供了強大的 AI 能力集成途徑
    的頭像 發(fā)表于 05-04 11:42 ?1593次閱讀
    如何<b class='flag-5'>獲取</b> OpenAI API Key?API <b class='flag-5'>獲取</b>與代碼調(diào)用示例 (詳解教程)

    【「# ROS 2智能機器人開發(fā)實踐」閱讀體驗】+ROS2應(yīng)用案例

    這一部分內(nèi)容,我掌握了如何在ROS 2中實現(xiàn)SLAM,這對于提高機器人的自主導(dǎo)航能力具有重要意義。 其他內(nèi)容概述 除了二維碼識別和SLAM技術(shù),書中還介紹了其他視覺應(yīng)用和地圖構(gòu)建的內(nèi)容,如視覺巡線
    發(fā)表于 04-27 11:42

    海伯森技術(shù)推動機器人感知能力邁向新高度

    的“感知神經(jīng)元”,公司自主研發(fā)的六維力扭矩傳感器已批量應(yīng)用于20余家頭部機器人企業(yè),為人形機器人、協(xié)作機器人及高端工業(yè)場景提供克級力控精度,推動機器人感知
    的頭像 發(fā)表于 03-10 11:07 ?560次閱讀

    制程能力和制造能力介紹

    引言 曾經(jīng)遇到一位資深PCB制造行業(yè)前輩,該前輩認為PCB板廠不要動不動就談“我們制程能力Process Capability怎么怎么厲害”,而是“更要注重制造能力Manufacturing
    的頭像 發(fā)表于 01-15 17:33 ?1543次閱讀
    制程<b class='flag-5'>能力</b>和制造<b class='flag-5'>能力</b>介紹

    【「具身智能機器人系統(tǒng)」閱讀體驗】+兩本互為支持的書

    如何使用PyTorch進行數(shù)字圖像處理,它借助攝像頭來獲取視頻的圖像信息,然后通過已有的圖像識別框架模型經(jīng)深度學(xué)習(xí)和優(yōu)化以達到更精準(zhǔn)的識別結(jié)果,從而為進一步的執(zhí)行處理提供數(shù)據(jù)支持和依據(jù)。而《具身智能機器人系統(tǒng)
    發(fā)表于 01-01 15:50

    【「具身智能機器人系統(tǒng)」閱讀體驗】2.具身智能機器人大模型

    近年來,人工智能領(lǐng)域的大模型技術(shù)在多個方向上取得了突破性的進展,特別是在機器人控制領(lǐng)域展現(xiàn)出了巨大的潛力。在“具身智能機器人大模型”部分,作者研究并探討了大模型如何提升機器人的能力,大
    發(fā)表于 12-29 23:04

    【「具身智能機器人系統(tǒng)」閱讀體驗】+數(shù)據(jù)在具身人工智能中的價值

    嵌入式人工智能(EAI)將人工智能集成到機器人等物理實體中,使它們能夠感知、學(xué)習(xí)環(huán)境并與之動態(tài)交互。這種能力使此類機器人能夠在人類社會中有效地提供商品及服務(wù)。 數(shù)據(jù)是一種貨幣化工具 數(shù)據(jù)是互聯(lián)網(wǎng)
    發(fā)表于 12-24 00:33

    適用于機器視覺應(yīng)用的智能機器視覺控制平臺

    工控機在機器視覺系統(tǒng)設(shè)計中是不可或缺的核心組件,在機器視覺中發(fā)揮著至關(guān)重要的作用,其強大的計算能力、高度的穩(wěn)定性和可靠性、實時性以及圖像處理和識別能力,為
    的頭像 發(fā)表于 11-23 01:08 ?531次閱讀
    適用于<b class='flag-5'>機器</b>視覺應(yīng)用的智能<b class='flag-5'>機器</b>視覺控制平臺

    獲取通信事件計數(shù)器與獲取通信事件記錄

    11功能碼主要用于獲取從設(shè)備通信計數(shù)器中的狀態(tài)字和事件計數(shù)的值,本功能碼不支持廣播模式。通過在通信報文之前和之后讀取通信事件計數(shù)值,可以確定從設(shè)備是否正常處理報文。
    的頭像 發(fā)表于 11-05 15:16 ?2618次閱讀

    機器人技術(shù)的發(fā)展趨勢

    機器人技術(shù)的發(fā)展趨勢呈現(xiàn)出多元化、智能化和廣泛應(yīng)用的特點。 一、智能化與自主化 人工智能(AI)與機器學(xué)習(xí) : AI和機器學(xué)習(xí)在機器人領(lǐng)域的應(yīng)用日益普及,為
    的頭像 發(fā)表于 10-25 09:27 ?2334次閱讀

    解鎖機器人視覺與人工智能的潛力,從“盲人機器”改造成有視覺能力機器人(上)

    的地方,它賦予機器“看”并解釋周圍環(huán)境的能力。通過使用相機作為“眼睛”和高級AI作為“大腦”,機器人視覺為機器人提供了感知環(huán)境、智能移動、實時反應(yīng)和執(zhí)行復(fù)雜任務(wù)所
    的頭像 發(fā)表于 10-12 09:56 ?759次閱讀
    解鎖<b class='flag-5'>機器</b>人視覺與人工智能的潛力,從“盲人<b class='flag-5'>機器</b>”改造成有視覺<b class='flag-5'>能力</b>的<b class='flag-5'>機器</b>人(上)

    處理器指令的獲取過程

    微處理器指令的獲取是計算機執(zhí)行程序過程中的關(guān)鍵環(huán)節(jié),它決定了微處理器如何對數(shù)據(jù)和指令進行處理。以下將詳細闡述微處理器指令的獲取過程,包括指令的來源、存儲位置、讀取方式以及相關(guān)的硬件和軟件支持。
    的頭像 發(fā)表于 10-05 15:16 ?974次閱讀