一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

通過平衡傳播獲得更好的AI芯片

倩倩 ? 來源:文財網(wǎng) ? 2020-09-25 10:48 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

AI專業(yè)人員一直在追求一種AI,它肯定會降低做普通AI事情所需的能量,例如感知單詞和圖片。這種機器學習模擬類型利用電路的物理原理而不是數(shù)字原理來完成神經(jīng)網(wǎng)絡(luò)的一項重要數(shù)學任務(wù)。但是,限制該方法的主要因素之一是深度學習的訓練算法(反向傳播)必須由GPU或其他單獨的數(shù)字框架來完成。

神經(jīng)形態(tài)芯片初創(chuàng)公司Rain Neuromorphics與加拿大研究院Mila之間的研究合作表明,可以想象使用完全模擬的硬件來訓練神經(jīng)網(wǎng)絡(luò),這為端到端的模擬神經(jīng)網(wǎng)絡(luò)提供了機會。這對神經(jīng)形態(tài)處理和AI硬件整體具有重大影響-它保證了完全可用于訓練和推理的模擬AI芯片,從而顯著節(jié)省了計算,功耗,等待時間和大小。這項進步將工程學和深度學習的紐帶聯(lián)系在一起,為AI動力機器人打開了入口之門,這種機器人可以在現(xiàn)場獨自學習,就像人類一樣。

在由“人工智能的教父”之一,獲獎?wù)遈oshua Bengio共同創(chuàng)建的題為“具有均衡傳播的端到端模擬神經(jīng)網(wǎng)絡(luò)訓練”的論文中,分析家們表明,可以訓練神經(jīng)網(wǎng)絡(luò)來利用交叉開關(guān)憶阻器的展示,就像在當今使用內(nèi)存中處理器方法的商業(yè)AI加速器芯片中使用的安排一樣,卻沒有在網(wǎng)絡(luò)的每一層之間使用相關(guān)的ADCDAC。結(jié)果為潛力更大的高能效AI硬件提供了潛力

Rain Neuromorphics首席執(zhí)行官戈登·威爾遜(Gordon Wilson)表示:“如今,能源利用和成本是最大的制約因素,使我們無法交付新型人工智能。我們確實需要找到一種無可否認地更有效的計算基礎(chǔ),一種本質(zhì)上可以提高能源效率的基礎(chǔ),一種允許我們不將培訓局限于大型數(shù)據(jù)中心的基礎(chǔ),但除此之外,我們還可以進入一個可以設(shè)想免費,自主的世界,能源無限的設(shè)備,獨自學習。同樣,這是我們認為這一新進展正在打開通向的大門?!?/p>

分析人員已經(jīng)對MNIST分類(改良的美國國家標準與技術(shù)研究院手寫數(shù)字數(shù)據(jù)庫)的端到端模擬神經(jīng)網(wǎng)絡(luò)進行了模擬訓練,其性能與相同大小的基于軟件的神經(jīng)網(wǎng)絡(luò)相似或更好。

模擬電路可以在某種程度上節(jié)省神經(jīng)網(wǎng)絡(luò)的功率,因為??它們可以熟練地進行稱為乘法和累加的關(guān)鍵計算。該估計值會根據(jù)不同的負載乘以貢獻值,然后匯總這些值中的每一個。電氣工程的兩個基本定律也可以從根本上做到這一點。歐姆定律將電壓和電導相乘以提供電流,基爾霍夫的“電流定律”將輸入點的電流相加。通過將神經(jīng)網(wǎng)絡(luò)的權(quán)重存儲在電阻式存儲小部件(例如憶阻器)中,乘法和累加可以完全以模擬方式發(fā)生,可以將功耗降低幾個數(shù)量級。

如今,模擬AI系統(tǒng)無法訓練自己的原因與零件的可變性息息相關(guān)。與真實神經(jīng)元非常相似,模擬神經(jīng)網(wǎng)絡(luò)中的神經(jīng)元并非完全無法區(qū)分。要對模擬段進行反向傳播,您應該制造兩條單獨的電路路徑。一個人繼續(xù)思考一個答案(稱為推理),另一個人反過來進行學習,因此適當?shù)幕卮鹱兊酶訙蚀_。但是由于模擬成分的可變性,這些途徑無法協(xié)調(diào)。

平衡傳播(EqProp),由Bengio和Scellier在2017年設(shè)計的一種方法。這種訓練算法只有一條數(shù)據(jù)路徑,因此可以避免模擬硬件中的反向傳播問題。但是有一個警告。EqProp僅適用于基于能源的網(wǎng)絡(luò)。

結(jié)果是,盡管EqProp自2017年以來就已經(jīng)存在,但這項新工作已將抽象思想轉(zhuǎn)變?yōu)榭梢酝ㄟ^電路物理識別的事物。這將使端到端的模擬計算成為可能,而無需在每個步驟都切換到數(shù)字域或從數(shù)字域切換。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 芯片
    +關(guān)注

    關(guān)注

    460

    文章

    52520

    瀏覽量

    440972
  • 機器學習
    +關(guān)注

    關(guān)注

    66

    文章

    8503

    瀏覽量

    134622
  • 深度學習
    +關(guān)注

    關(guān)注

    73

    文章

    5561

    瀏覽量

    122795
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    AI芯片:加速人工智能計算的專用硬件引擎

    處理等應用落地的關(guān)鍵硬件基礎(chǔ)。 ? AI芯片的核心技術(shù)特點 ? ? AI芯片的設(shè)計重點在于提升計算效率,主要技術(shù)特點包括: ? 1. ? 并行計算架構(gòu) ?:
    的頭像 發(fā)表于 07-09 15:59 ?150次閱讀

    AI玩具芯片如何尋找性能、功耗與成本之間的平衡

    之間找到適合的方案?本文結(jié)合實際案例,總結(jié)芯片選型的核心原則與開發(fā)經(jīng)驗。 ? AI 玩具芯片選擇的三大核心原則 ? 對于AI玩具而言,芯片
    的頭像 發(fā)表于 04-29 08:24 ?1403次閱讀

    自制一個支持AI 控制的無刷平衡車機器人:開源項目D-BOT全攻略

    今天給大家介紹一款創(chuàng)意桌面機器人——D-BOT!它不僅是一個功能強大的平衡車機器人,也是一個融合了AI控制、3D建模與PCB設(shè)計的開源項目。 D-BOT 被作者稱為“小探險家”(Discovery
    發(fā)表于 04-28 11:45

    海思SD3403邊緣計算AI數(shù)據(jù)訓練概述

    AI數(shù)據(jù)訓練:基于用戶特定應用場景,用戶采集照片或視頻,通過AI數(shù)據(jù)訓練工程師**(用戶公司****員工)** ,進行特征標定后,將標定好的訓練樣本,通過
    發(fā)表于 04-28 11:11

    智芯公司安全藍牙芯片獲得BQB權(quán)威認證

    近日,智芯公司自主研發(fā)的安全藍牙芯片成功通過藍牙技術(shù)聯(lián)盟(SIG)的BQB(Bluetooth Qualification Body)全面認證,成為國內(nèi)藍牙芯片領(lǐng)域獲得BQB權(quán)威認證的
    的頭像 發(fā)表于 03-18 14:13 ?634次閱讀

    FPGA+AI王炸組合如何重塑未來世界:看看DeepSeek東方神秘力量如何預測......

    的強化學習架構(gòu)正在改寫芯片設(shè)計規(guī)則——通過自主進化算法,F(xiàn)PGA布局布線效率提升300%,這或許預示著芯片設(shè)計將進入"AI自編程"時代。在這場智能
    發(fā)表于 03-03 11:21

    AI芯片上的應用:革新設(shè)計與功能

    AI芯片上的應用正在深刻改變著芯片設(shè)計、制造和應用的全過程。未來,隨著AI技術(shù)的不斷進步和應用場景的不斷拓展,AI
    的頭像 發(fā)表于 02-17 16:09 ?586次閱讀

    什么是BP神經(jīng)網(wǎng)絡(luò)的反向傳播算法

    神經(jīng)網(wǎng)絡(luò)(即反向傳播神經(jīng)網(wǎng)絡(luò))的核心,它建立在梯度下降法的基礎(chǔ)上,是一種適合于多層神經(jīng)元網(wǎng)絡(luò)的學習算法。該算法通過計算每層網(wǎng)絡(luò)的誤差,并將這些誤差反向傳播到前一層,從而調(diào)整權(quán)重,使得網(wǎng)絡(luò)的預測更接近真實值。 二、算法原理 反向
    的頭像 發(fā)表于 02-12 15:18 ?770次閱讀

    歐冶半導體獲得Ceva SensPro? Vision AI DSP授權(quán)

    Semiconductor)已成功獲得Ceva的SensPro? Vision AI DSP授權(quán)許可。 此次授權(quán)許可針對的是歐冶半導體公司的龍泉560系列高級駕駛輔助系統(tǒng)(ADAS)芯片組。該
    的頭像 發(fā)表于 01-14 14:30 ?662次閱讀

    通過微透鏡陣列的傳播

    使用最新發(fā)布的版本中引入的一個新的MLA組件來設(shè)置和模擬這樣的系統(tǒng),允許對微透鏡組件后面的近場以及遠場和焦點區(qū)域的傳輸場進行徹底的研究。 微透鏡陣列后光傳播的研究 本用例研究微透鏡陣列后傳播的光。給出并
    發(fā)表于 01-08 08:49

    AI芯片在智能手機中具體怎么用?

    AI芯片在智能手機中的應用主要體現(xiàn)在以下幾個方面: 圖像處理和智能拍照:AI芯片通過深度學習算法,可以識別場景、人物等信息,并自動調(diào)整拍攝參
    的頭像 發(fā)表于 01-03 14:02 ?1082次閱讀

    通過微透鏡陣列的傳播

    使用最新發(fā)布的版本中引入的一個新的MLA組件來設(shè)置和模擬這樣的系統(tǒng),允許對微透鏡組件后面的近場以及遠場和焦點區(qū)域的傳輸場進行徹底的研究。 微透鏡陣列后光傳播的研究 本用例研究微透鏡陣列后傳播的光。給出并
    發(fā)表于 12-11 11:32

    蘋果利用AWS定制AI芯片提升服務(wù)

    。 據(jù)了解,蘋果目前正積極利用AWS的定制AI芯片來提升其搜索等核心服務(wù)的性能和效率。通過借助AWS的專業(yè)技術(shù)和資源,蘋果能夠更好地滿足全球客戶的需求,提供更加智能化、高效化的服務(wù)體驗
    的頭像 發(fā)表于 12-05 14:14 ?562次閱讀

    【每天學點AI】前向傳播、損失函數(shù)、反向傳播

    在深度學習的領(lǐng)域中,前向傳播、反向傳播和損失函數(shù)是構(gòu)建和訓練神經(jīng)網(wǎng)絡(luò)模型的三個核心概念。今天,小編將通過一個簡單的實例,解釋這三個概念,并展示它們的作用。前向傳播:神經(jīng)網(wǎng)絡(luò)的“思考”過
    的頭像 發(fā)表于 11-15 10:32 ?1225次閱讀
    【每天學點<b class='flag-5'>AI</b>】前向<b class='flag-5'>傳播</b>、損失函數(shù)、反向<b class='flag-5'>傳播</b>

    平衡校正和振動測量有關(guān)嗎?

    平衡校正和振動測量有關(guān)嗎?動平衡和測量振動是相關(guān)但不同的概念。振動檢測是一種通過監(jiān)測機械系統(tǒng)的振動來識別問題的方法。它涉及測量振動的振幅、頻率、相位和譜分析等參數(shù)。動平衡是一種專門針
    的頭像 發(fā)表于 10-18 11:21 ?484次閱讀
    動<b class='flag-5'>平衡</b>校正和振動測量有關(guān)嗎?