一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

使用神經(jīng)處理單元集群轉(zhuǎn)換邊緣AI

星星科技指導(dǎo)員 ? 來源:嵌入式計(jì)算設(shè)計(jì) ? 作者:Saumitra Jagdale ? 2022-10-19 10:57 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

隨著人工智能領(lǐng)域獲得牽引力,這些設(shè)備變得越來越計(jì)算和耗電。隨后,邊緣設(shè)備上的處理負(fù)載隨著系統(tǒng)架構(gòu)的性能和復(fù)雜性而顯著增加。因此,在系統(tǒng)中灌輸了更高分辨率的圖像和更復(fù)雜的算法,隨著對(duì)AI處理的需求不斷增長(zhǎng),以實(shí)現(xiàn)高TOPS性能,這需要進(jìn)一步優(yōu)化。

Synopsys 發(fā)布了神經(jīng)處理單元 (NPU)、知識(shí)產(chǎn)權(quán) (IP) 內(nèi)核和工具鏈,以滿足 AI 片上系統(tǒng) (SoC) 中日益復(fù)雜的神經(jīng)網(wǎng)絡(luò)模型的性能需求。其新的設(shè)計(jì)軟件 ARC NPX6 和 NPX6FS NPU IP 可處理實(shí)時(shí)計(jì)算的需求,同時(shí)為 AI 應(yīng)用消耗超低功耗。此外,該公司的新 MetaWare MX 開發(fā)工具提供了一個(gè)完整的編譯環(huán)境,具有自動(dòng)化神經(jīng)網(wǎng)絡(luò)算法分區(qū),可最大限度地提高最新 NPU 上應(yīng)用軟件開發(fā)的資源效率。

使用新的設(shè)計(jì)軟件 ARC NPX6 和 NPX6FS NPU IP 以及元軟件 MX 開發(fā)工具包,設(shè)計(jì)人員可以利用最新的神經(jīng)網(wǎng)絡(luò)模型,滿足不斷升級(jí)的性能期望,并加快其下一代智能 SoC 的上市時(shí)間。ARC NPX6 NPU IP 系列包括許多處理深度學(xué)習(xí)算法覆蓋的產(chǎn)品,包括對(duì)象識(shí)別、圖像質(zhì)量增強(qiáng)和場(chǎng)景分割等計(jì)算機(jī)視覺任務(wù),以及音頻和自然語言處理等大型 AI 應(yīng)用。設(shè)計(jì)中的單個(gè)內(nèi)核可以從 4K MAC 擴(kuò)展到 96K MAC,以實(shí)現(xiàn)超過 250 TOPS 和超過 440 TOPS 的單個(gè) AI 引擎性能,并且很少。

NPX6 NPU IP 包含對(duì)多達(dá) 8 個(gè) NPU 的多 NPU 群集的硬件和軟件支持,稀疏性為 3500 TOPS。由于硬件和軟件中的高級(jí)帶寬功能以及內(nèi)存層次結(jié)構(gòu)(每個(gè)內(nèi)核中包含L1內(nèi)存以及用于訪問常見L2內(nèi)存的高性能,低延遲連接),可以擴(kuò)展到大量MAC數(shù)量。對(duì)于受益于神經(jīng)網(wǎng)絡(luò)內(nèi)部 BF16 或 FP16 的應(yīng)用,提供了可選的張量浮點(diǎn)單元。

poYBAGNPZ7iAFPArAAGDfudyRsU033.png

MetaWare MX 開發(fā)工具包為應(yīng)用軟件開發(fā)提供了軟件編程環(huán)境,包括神經(jīng)網(wǎng)絡(luò)軟件開發(fā)工具包 (NN SDK) 和虛擬模型支持。NN SDK 會(huì)自動(dòng)將使用流行框架(如巨炬、張量流或 ONNX)訓(xùn)練的神經(jīng)網(wǎng)絡(luò)轉(zhuǎn)換為 NPX 優(yōu)化的可執(zhí)行代碼。

這個(gè)概念是,NPX6 NPU處理器IP隨后可用于制造各種產(chǎn)品,從幾個(gè)TOPS到數(shù)千個(gè)TOPS,所有這些都可以使用單個(gè)工具鏈編寫。

NPX6 網(wǎng)絡(luò)輸出電源的主要特性:

可擴(kuò)展的實(shí)時(shí) AI/神經(jīng)處理器 IP,具有多達(dá) 3,500 個(gè) TOPS 的性能,支持 CNN、RNN/LSTM、變壓器、推薦器網(wǎng)絡(luò)和其他神經(jīng)網(wǎng)絡(luò)。

功率效率(高達(dá) 30 TOPS/W)在業(yè)界無與倫比。

卷積加速器的 1-24 個(gè)內(nèi)核,增加了 4K MAC/內(nèi)核

張量加速器,支持張量運(yùn)算符集體系結(jié)構(gòu)并允許變量激活 (TOSA)

軟件開發(fā)套件

用于自動(dòng)混合模式量化的工具

降低帶寬的架構(gòu)和軟件工具特性

通過并行處理各個(gè)層來減少延遲。

設(shè)計(jì)軟件 ARC VPX 矢量 DSP 無縫集成。

生產(chǎn)力很高。張量流和巨炬框架,以及ONNX交換標(biāo)準(zhǔn),由元軟件MX開發(fā)工具包支持。

此外,ARC NPX6FS NPU IP 符合 ISO 26262 ASIL D 標(biāo)準(zhǔn),用于隨機(jī)硬件故障檢測(cè)和系統(tǒng)功能安全開發(fā)流程。這些處理器具有符合 ISO 26262 的特定安全機(jī)制,可處理下一代區(qū)域性設(shè)計(jì)的混合關(guān)鍵性和虛擬化需求,以及全面的安全文檔。

ARC 元軟件 MX 開發(fā)工具包包括神經(jīng)網(wǎng)絡(luò)軟件開發(fā)工具包 (SDK)、編譯器和調(diào)試器、虛擬平臺(tái) SDK、運(yùn)行時(shí)和庫(kù)以及高級(jí)仿真模型。它提供了一個(gè)統(tǒng)一的工具鏈環(huán)境來加速應(yīng)用程序開發(fā),并在MAC資源之間智能地劃分算法以實(shí)現(xiàn)最佳處理。MetaWare MX 安全開發(fā)工具包包含安全手冊(cè)和安全指南,可幫助開發(fā)人員滿足 ISO 26262 標(biāo)準(zhǔn),并為安全關(guān)鍵型汽車應(yīng)用的 ISO 26262 合規(guī)性測(cè)試做準(zhǔn)備。

利用 NPU 集群加速邊緣 AI 應(yīng)用

為了滿足人工智能應(yīng)用不斷增長(zhǎng)的性能和復(fù)雜需求,恩智浦NPU IP核提供高性能、可擴(kuò)展的實(shí)時(shí)人工智能和神經(jīng)處理IP,具有多達(dá)3500個(gè)TOPS,支持各種神經(jīng)網(wǎng)絡(luò),如CNN、RNN/LSTM、變壓器和推薦器網(wǎng)絡(luò)。

此外,它通過并行處理各個(gè)層來減少延遲。此外,高生產(chǎn)力的元軟件 MX 開發(fā)工具包支持張量流和巨魔框架以及 ONNX 交換格式。

審核編輯:郭婷

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 處理器
    +關(guān)注

    關(guān)注

    68

    文章

    19896

    瀏覽量

    235290
  • 神經(jīng)網(wǎng)絡(luò)

    關(guān)注

    42

    文章

    4814

    瀏覽量

    103647
  • 人工智能
    +關(guān)注

    關(guān)注

    1807

    文章

    49029

    瀏覽量

    249584
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    Nordic收購(gòu) Neuton.AI 關(guān)于產(chǎn)品技術(shù)的分析

    Nordic Semiconductor 于 2025 年收購(gòu)了 Neuton.AI,這是一家專注于超小型機(jī)器學(xué)習(xí)(TinyML)解決方案的公司。 Neuton 開發(fā)了一種獨(dú)特的神經(jīng)網(wǎng)絡(luò)框架,能夠
    發(fā)表于 06-28 14:18

    大聯(lián)大世平推出基于恩智浦產(chǎn)品的邊緣AI加速方案

    大聯(lián)大世平 (WPI) 基于恩智浦i.MX 95系列應(yīng)用處理器推出邊緣AI加速方案,該方案結(jié)合了多項(xiàng)核心技術(shù),包括神經(jīng)處理
    的頭像 發(fā)表于 06-24 17:33 ?1174次閱讀
    大聯(lián)大世平推出基于恩智浦產(chǎn)品的<b class='flag-5'>邊緣</b><b class='flag-5'>AI</b>加速方案

    FPGA在邊緣AI中的應(yīng)用

    從聊天機(jī)器人、內(nèi)容生成到高級(jí)數(shù)據(jù)分析,AI 已無處不在。過去,大多數(shù) AI 處理都在云端完成。然而,隨著模型功能日益強(qiáng)大以及對(duì)實(shí)時(shí)洞察的需求持續(xù)增長(zhǎng),AI 正在向
    的頭像 發(fā)表于 06-24 09:31 ?821次閱讀

    STM32F769是否可以部署邊緣AI

    STM32F769是否可以部署邊緣AI
    發(fā)表于 06-17 06:44

    Deepseek海思SD3403邊緣計(jì)算AI產(chǎn)品系統(tǒng)

    海思SD3403邊緣計(jì)算AI框架,提供了一套開放式AI訓(xùn)練產(chǎn)品工具包,解決客戶低成本AI系統(tǒng),針對(duì)差異化AI 應(yīng)用場(chǎng)景,自己采集樣本數(shù)據(jù),進(jìn)
    發(fā)表于 04-28 11:05

    Synaptics發(fā)布高性能AI MCU,推動(dòng)邊緣計(jì)算新突破

    與Ethos-U55神經(jīng)處理單元,適配多模態(tài)計(jì)算需求。SR系列具備流式視覺、音頻處理及多攝像頭接口,廣泛應(yīng)用于安防攝像頭、智能家電、POS機(jī)等設(shè)備,顯著降低系統(tǒng)成
    的頭像 發(fā)表于 04-23 10:00 ?539次閱讀
    Synaptics發(fā)布高性能<b class='flag-5'>AI</b> MCU,推動(dòng)<b class='flag-5'>邊緣</b>計(jì)算新突破

    FPGA+AI王炸組合如何重塑未來世界:看看DeepSeek東方神秘力量如何預(yù)測(cè)......

    。? AI加速器的開發(fā):FPGA被廣泛用于開發(fā)專為AI算法優(yōu)化的加速器,例如深度學(xué)習(xí)推理加速器。這種定制化的硬件設(shè)計(jì)能夠顯著提升AI應(yīng)用的效率。 2.應(yīng)用領(lǐng)域的拓展? 邊緣計(jì)算與實(shí)時(shí)
    發(fā)表于 03-03 11:21

    恩智浦?jǐn)M收購(gòu)邊緣AI企業(yè)Kinara

    恩智浦半導(dǎo)體宣布已達(dá)成最終協(xié)議收購(gòu)Kinara, Inc.——高性能、低功耗且可編程的分立神經(jīng)處理單元(NPU)行業(yè)的領(lǐng)先企業(yè)。該公司產(chǎn)品支持廣泛的邊緣
    的頭像 發(fā)表于 02-21 14:15 ?714次閱讀

    AI賦能邊緣網(wǎng)關(guān):開啟智能時(shí)代的新藍(lán)海

    在數(shù)字化轉(zhuǎn)型的浪潮中,AI邊緣計(jì)算的結(jié)合正掀起一場(chǎng)深刻的產(chǎn)業(yè)變革。邊緣網(wǎng)關(guān)作為連接物理世界與數(shù)字世界的橋梁,在AI技術(shù)的加持下,正從簡(jiǎn)單的數(shù)據(jù)采集傳輸節(jié)點(diǎn),進(jìn)化為具備智能決策能力的
    發(fā)表于 02-15 11:41

    恩智浦3.07億美元收購(gòu)Kinara,強(qiáng)化邊緣AI布局

    近日,恩智浦半導(dǎo)體公司(NXP Semiconductors)宣布了一項(xiàng)重大收購(gòu)計(jì)劃,將以3.07億美元(約合22.44億元人民幣)現(xiàn)金收購(gòu)邊緣AI NPU(神經(jīng)處理
    的頭像 發(fā)表于 02-12 17:02 ?745次閱讀

    AI模型部署邊緣設(shè)備的奇妙之旅:如何實(shí)現(xiàn)手寫數(shù)字識(shí)別

    ,而不必傳輸?shù)酵獠糠?wù)器,這有助于更好地保護(hù)用戶隱私和數(shù)據(jù)安全。 然而,邊緣計(jì)算也帶來了獨(dú)特的挑戰(zhàn),特別是在資源受限的嵌入式系統(tǒng)中部署復(fù)雜的AI模型時(shí)。為了確保神經(jīng)網(wǎng)絡(luò)模型能夠在邊緣設(shè)
    發(fā)表于 12-06 17:20

    HZHY-AI100G:適配鴻蒙系統(tǒng)的AI邊緣計(jì)算智能盒

    Cortex-A55處理器,主頻高達(dá)2.0GHz,同時(shí)內(nèi)置1TOPS的NPU(神經(jīng)網(wǎng)絡(luò)處理單元),能夠在多個(gè)應(yīng)用場(chǎng)景中實(shí)現(xiàn)高效的數(shù)據(jù)處理。支
    的頭像 發(fā)表于 11-23 01:09 ?944次閱讀
    HZHY-<b class='flag-5'>AI</b>100G:適配鴻蒙系統(tǒng)的<b class='flag-5'>AI</b><b class='flag-5'>邊緣</b>計(jì)算智能盒

    使用 ADI 的 MAX78002 MCU 開發(fā)邊緣 AI 應(yīng)用

    的物聯(lián)網(wǎng)設(shè)備上運(yùn)行。 Analog Devices, Inc. 的微控制器單元 (MCU) 可以通過集成的低功耗卷積神經(jīng)網(wǎng)絡(luò) (CNN) 加速器來解決邊緣處理限制,以
    的頭像 發(fā)表于 10-17 11:39 ?2095次閱讀
    使用 ADI 的 MAX78002 MCU 開發(fā)<b class='flag-5'>邊緣</b> <b class='flag-5'>AI</b> 應(yīng)用

    NVIDIA IGX平臺(tái)加速實(shí)時(shí)邊緣AI應(yīng)用

    實(shí)時(shí)邊緣 AI 對(duì)于醫(yī)療、工業(yè)和科學(xué)計(jì)算至關(guān)重要,因?yàn)檫@些任務(wù)關(guān)鍵型應(yīng)用需要即時(shí)數(shù)據(jù)處理、低延遲和高可靠性,以確保作出及時(shí)準(zhǔn)確的決策。這些挑戰(zhàn)不僅涉及硬件平臺(tái)上的高帶寬傳感器處理
    的頭像 發(fā)表于 09-09 10:14 ?1212次閱讀
    NVIDIA IGX平臺(tái)加速實(shí)時(shí)<b class='flag-5'>邊緣</b><b class='flag-5'>AI</b>應(yīng)用

    使用邏輯和轉(zhuǎn)換優(yōu)化數(shù)字駕駛艙處理單元

    電子發(fā)燒友網(wǎng)站提供《使用邏輯和轉(zhuǎn)換優(yōu)化數(shù)字駕駛艙處理單元.pdf》資料免費(fèi)下載
    發(fā)表于 09-05 11:08 ?0次下載
    使用邏輯和<b class='flag-5'>轉(zhuǎn)換</b>優(yōu)化數(shù)字駕駛艙<b class='flag-5'>處理</b><b class='flag-5'>單元</b>