一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

選擇FPGA和GPU用于基于AI的應(yīng)用的好處

星星科技指導(dǎo)員 ? 來源:embedded ? 作者:V Srinivas Durga Pras ? 2023-05-04 11:12 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

盡管模仿人類思想和想法的軟件算法人工智能的基礎(chǔ),但硬件也是一個重要的組成部分,這就是現(xiàn)場可編程門陣列(FPGA)和圖形處理單元發(fā)揮至關(guān)重要的作用。

人工智能AI) 是指能夠以與人類相同的方式做出決策的非人類機(jī)器智能。這包括沉思、適應(yīng)性、意圖能力和判斷力。機(jī)器視覺、機(jī)器人自動化、認(rèn)知計算、機(jī)器學(xué)習(xí)計算機(jī)視覺都是人工智能市場的應(yīng)用。人工智能正在汽車、消費(fèi)電子、媒體和娛樂以及半導(dǎo)體等各種行業(yè)領(lǐng)域迅速獲得牽引力,預(yù)示著下一次重大技術(shù)變革。

預(yù)計未來幾年半導(dǎo)體制造的范圍將擴(kuò)大。隨著全球?qū)C(jī)器學(xué)習(xí)設(shè)備的需求不斷增長,屬于EDA(電子設(shè)計自動化)、顯卡、游戲、多媒體行業(yè)的許多主要市場參與者都在投資提供創(chuàng)新和高速計算處理器。雖然人工智能主要基于模仿人類思想和想法的軟件算法,但硬件也是一個重要的組成部分?,F(xiàn)場可編程門陣列 (FPGA) 和圖形處理單元 (GPU) 是大多數(shù) AI 操作的兩種主要硬件解決方案。根據(jù)優(yōu)先研究小組的數(shù)據(jù),10 年全球硬件市場中的人工智能價值為 41.2021 億美元,預(yù)計到 89 年將達(dá)到 22.2030 億美元,26 年至 96 年的復(fù)合年增長率為 2022.2030%。

FPGA 概述

具有可重編程邏輯門的硬件電路稱為現(xiàn)場可編程門陣列(FPGA)。當(dāng)芯片在現(xiàn)場使用時,用戶可以通過覆蓋配置來設(shè)計獨(dú)特的電路。這與無法重新編程的標(biāo)準(zhǔn)芯片形成鮮明對比。借助 FPGA 芯片,您可以構(gòu)建從簡單邏輯門到多核芯片組的任何內(nèi)容。FPGA的使用非常流行,其中本征電路至關(guān)重要,并且預(yù)計會發(fā)生變化。FPGA 應(yīng)用涵蓋了 ASIC 原型設(shè)計、汽車、多媒體、消費(fèi)電子以及更多領(lǐng)域。根據(jù)應(yīng)用要求,選擇低端、中端或高端FPGA配置。萊迪思半導(dǎo)體的ECP3和ECP5系列、賽靈思的Artix-7/Kintex-7系列以及英特爾的Stratix系列是一些流行的低功耗和低設(shè)計密度FPGA設(shè)計。

邏輯塊使用輸入有限的查找表 (LUT) 構(gòu)建,并使用基本存儲器(如 SRAM 或閃存)構(gòu)建以存儲布爾函數(shù)。每個LUT都連接到多路復(fù)用器和觸發(fā)器寄存器,以支持順序電路。同樣,許多LUT可用于創(chuàng)建復(fù)雜的功能。閱讀我們的 FPGA 博客,了解有關(guān)其架構(gòu)的更多信息。

FPGA 更適合嵌入式應(yīng)用,并且比 CPU 和 GPU 功耗更低。這些電路不受 GPU 等設(shè)計的限制,可以與定制數(shù)據(jù)類型一起使用。此外,F(xiàn)PGA 的可編程性使其更容易修改以解決安全和安全問題。

使用 FPGA 的優(yōu)勢

節(jié)能

借助 FPGA,設(shè)計人員可以精確調(diào)整硬件以滿足應(yīng)用的要求。憑借其低功耗能力,可以將 AI 和 ML 應(yīng)用的總體功耗降至最低。這可以延長設(shè)備的使用壽命并降低培訓(xùn)的總體成本。

易于靈活

FPGA 為處理 AI/ML 應(yīng)用提供了可編程性的靈活性??梢愿鶕?jù)要求對單個塊或整個塊進(jìn)行編程。

減少延遲

FPGA 擅長處理短批處理短語,并減少延遲。減少延遲是指計算系統(tǒng)以最小延遲響應(yīng)的能力。這在實時數(shù)據(jù)處理應(yīng)用中至關(guān)重要,例如視頻監(jiān)控、視頻預(yù)處理和后處理以及文本識別,在這些應(yīng)用中,每一微秒都很重要。由于 FPGA 和 ASIC 在沒有操作系統(tǒng)的裸機(jī)環(huán)境中運(yùn)行,因此它們比 GPU 更快。

并行處理

FPGA 能夠同時承載多個任務(wù),甚至為特定功能指定器件的特定部分,從而顯著提高其操作和能效。少量分布式存儲器包含在FPGA特殊架構(gòu)的結(jié)構(gòu)中,使它們更接近處理器。

圖形用戶界面概述

圖形處理單元 (GPU) 的最初目的是創(chuàng)建計算機(jī)圖形和虛擬現(xiàn)實環(huán)境,這些環(huán)境依賴于復(fù)雜的計算和浮點(diǎn)功能來渲染幾何對象。沒有它們,現(xiàn)代人工智能基礎(chǔ)設(shè)施將是不完整的,并且非常適合深度學(xué)習(xí)過程。

人工智能需要大量的數(shù)據(jù)來研究和學(xué)習(xí)才能成功。要運(yùn)行AI算法并移動大量數(shù)據(jù),需要大量的計算能力。GPU 可以執(zhí)行這些任務(wù),因為它們是為了快速處理生成圖形和視頻所需的大量數(shù)據(jù)而創(chuàng)建的。它們在機(jī)器學(xué)習(xí)和人工智能應(yīng)用中的廣泛使用部分歸功于它們的高計算能力。

GPU 可以同時處理多個計算。因此,訓(xùn)練過程可以分發(fā),從而大大加快了機(jī)器學(xué)習(xí)活動的速度。使用 GPU,您可以添加多個資源要求較低的內(nèi)核,而不會影響性能或功耗。市場上有各種類型的 GPU,通常分為以下幾類,例如數(shù)據(jù)中心 GPU、消費(fèi)級 GPU 和企業(yè)級 GPU。

使用 GPU 的優(yōu)勢

內(nèi)存帶寬

GPU 具有良好的內(nèi)存帶寬,因此它們傾向于在深度學(xué)習(xí)應(yīng)用程序的情況下快速執(zhí)行計算。GPU 在大型數(shù)據(jù)集上訓(xùn)練模型時消耗的內(nèi)存更少。憑借高達(dá) 750GB 的內(nèi)存帶寬,它們可以真正加速 AI 算法的快速處理。

多核

通常,GPU 由許多可以組合在一起的處理器集群組成。這使得可以大大提高系統(tǒng)的處理能力,特別是對于具有并行數(shù)據(jù)輸入、卷積神經(jīng)網(wǎng)絡(luò) (CNN) 和 ML 算法訓(xùn)練的 AI 應(yīng)用程序。

靈活性

由于 GPU 的并行功能,您可以將 GPU 分組到集群中,并在這些集群之間分配作業(yè)。另一種選擇是使用具有專用集群的單個 GPU 來訓(xùn)練特定算法。具有高數(shù)據(jù)吞吐量的 GPU 可以對多個數(shù)據(jù)點(diǎn)并行執(zhí)行相同的操作,從而能夠以無與倫比的速度處理大量數(shù)據(jù)。

數(shù)據(jù)集大小

對于模型訓(xùn)練,AI 算法需要一個大型數(shù)據(jù)集,該數(shù)據(jù)集需要占用大量內(nèi)存計算。GPU 是高效處理具有許多大小大于 100GB 的數(shù)據(jù)點(diǎn)的數(shù)據(jù)集的最佳選擇之一。自并行處理開始以來,它們提供了有效處理基本相同或非結(jié)構(gòu)化數(shù)據(jù)所需的原始計算能力。

運(yùn)行 AI 應(yīng)用程序的兩個主要硬件選擇是 FPGA 和 GPU。盡管 GPU 可以處理 AI 和深度學(xué)習(xí)所需的大量數(shù)據(jù),但它們在能源效率、散熱問題、耐用性以及使用新的 AI 算法更新應(yīng)用程序的能力方面存在局限性。FPGA 為神經(jīng)網(wǎng)絡(luò)和 ML 應(yīng)用提供了顯著的優(yōu)勢。其中包括 AI 算法更新的便利性、可用性、耐用性和能源效率。

此外,在創(chuàng)建FPGA軟件方面也取得了重大進(jìn)展,使編譯和編程變得更加簡單。若要使 AI 應(yīng)用程序成功,必須調(diào)查硬件的可能性。正如所說,在確定行動方案之前,請仔細(xì)權(quán)衡您的選擇。

Softnautics AI/ML 專家在為各種邊緣平臺(包括 CPU、GPU、TPU 和神經(jīng)網(wǎng)絡(luò)編譯器)創(chuàng)建高效的機(jī)器學(xué)習(xí)解決方案方面擁有豐富的專業(yè)知識。我們還通過結(jié)合最佳設(shè)計方法和適當(dāng)?shù)募夹g(shù)堆棧,提供安全的嵌入式系統(tǒng)開發(fā)和FPGA設(shè)計服務(wù)。我們幫助企業(yè)跨各種平臺構(gòu)建高性能云和基于邊緣的 AI/ML 解決方案,例如關(guān)鍵短語/語音命令檢測、面部/手勢識別、物體/車道檢測、人工計數(shù)等。

審核編輯:郭婷

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 計算機(jī)
    +關(guān)注

    關(guān)注

    19

    文章

    7658

    瀏覽量

    90734
  • 人工智能
    +關(guān)注

    關(guān)注

    1806

    文章

    48996

    瀏覽量

    249206
  • 機(jī)器學(xué)習(xí)

    關(guān)注

    66

    文章

    8501

    瀏覽量

    134564
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    自動駕駛主流架構(gòu)方案對比:GPUFPGA、ASIC

    當(dāng)前主流的AI芯片主要分為三類,GPU、FPGA、ASIC。GPU、FPGA均是前期較為成熟的芯片架構(gòu),屬于通用型芯片。ASIC屬于為
    發(fā)表于 02-14 11:03 ?4091次閱讀

    FPGA在深度學(xué)習(xí)應(yīng)用中或?qū)⑷〈?b class='flag-5'>GPU

    對神經(jīng)網(wǎng)絡(luò)進(jìn)行任何更改,也不需要學(xué)習(xí)任何新工具。不過你可以保留你的 GPU 用于訓(xùn)練?!?Zebra 提供了將深度學(xué)習(xí)代碼轉(zhuǎn)換為 FPGA 硬件指令的抽象層 AI 硬件前景
    發(fā)表于 03-21 15:19

    為什么微軟選擇FPGAAI?

    微軟卻全面擁抱FPGA作為AI計算平臺。同時,亞馬遜和百度也是FPGA路線。百度在一個電路板上集成了CPU、GPUFPGA,稱為“XPU”
    發(fā)表于 08-21 09:50

    用于FPGA、GPU和ASIC系統(tǒng)的電源管理

      在 FPGA、GPU 或 ASIC 控制的系統(tǒng)板上,僅有為數(shù)不多的幾種電源管理相關(guān)的設(shè)計挑戰(zhàn),但是由于需要反復(fù)調(diào)試,所以這類挑戰(zhàn)可能使系統(tǒng)的推出時間嚴(yán)重滯后。不過,如果特定設(shè)計或類似設(shè)計已經(jīng)得到
    發(fā)表于 10-15 10:30

    ai芯片和gpu的區(qū)別

    ai芯片和gpu的區(qū)別▌車載芯片的發(fā)展趨勢(CPU-GPU-FPGA-ASIC)過去汽車電子芯片以與傳感器一一對應(yīng)的電子控制單元(ECU)為主,主要分布與發(fā)動機(jī)等核心部件上。...
    發(fā)表于 07-27 07:29

    當(dāng)AI遇上FPGA會產(chǎn)生怎樣的反應(yīng)

    是人工智能大躍進(jìn)的基礎(chǔ),在線下模型訓(xùn)練中Xeon-Phi、GPU等發(fā)揮著巨大的作用,而在線上的推理任務(wù)中,浪潮FPGA深度學(xué)習(xí)加速解決方案則能夠?qū)崿F(xiàn)7倍以上的能效比提升。 卷積網(wǎng)絡(luò)之父、Facebook
    發(fā)表于 09-17 17:08

    什么是深度學(xué)習(xí)?使用FPGA進(jìn)行深度學(xué)習(xí)的好處?

    上述分類之外,還被用于多項任務(wù)(下面顯示了四個示例)。在 FPGA 上進(jìn)行深度學(xué)習(xí)的好處我們已經(jīng)提到,許多服務(wù)和技術(shù)都使用深度學(xué)習(xí),而 GPU 大量
    發(fā)表于 02-17 16:56

    FPGA為什么比CPU和GPU

    FPGA仿真篇-使用腳本命令來加速仿真二 基于FPGA的HDMI高清顯示借口驅(qū)動 基于FPGA灰度圖像高斯濾波算法的實現(xiàn) FPGA為什么比CPU和G
    發(fā)表于 02-20 20:49 ?1816次閱讀

    相較于GPU只能處理運(yùn)算 FPGA能更快速的處理所有與AI相關(guān)資訊

    NVIDIA 雖憑借通用GPU(GPGPU)登上人工智慧(AI)芯片一哥位置,但競爭對手早已在一旁虎視眈眈。美國低功耗現(xiàn)場可程式邏輯閘陣列(FPGA)制造商Xilinx 表示,伙伴廠商利用FP
    發(fā)表于 01-18 14:14 ?626次閱讀

    淺析GPUFPGA、ASIC三種主流AI芯片的區(qū)別

    當(dāng)前主流的AI芯片主要分為三類,GPU、FPGA、ASIC。其中GPUFPGA均是前期較為成熟的芯片架構(gòu),屬于通用型芯片。ASIC屬于為
    發(fā)表于 03-07 14:39 ?3.1w次閱讀

    FPGA有什么優(yōu)勢,可以讓FPGA替代GPU

    目前,在AI計算平臺使用最廣泛的兩種加速部件是GPUFPGA。GPU可適用于具備計算密集、高并行、SIMD(SingleInstructi
    發(fā)表于 11-01 15:07 ?3075次閱讀

    FPGAGPU架構(gòu)的背景

    FPGA 可提供一種不同的 AI 優(yōu)化的硬件方法。與 GPU 不同,FPGA 提供獨(dú)特的精細(xì)化空間可重構(gòu)性。這意味著我們可以配置 FPGA
    的頭像 發(fā)表于 06-13 09:58 ?1513次閱讀

    FPGA還是GPU?AI主芯片將如何選擇

    盡管模仿人類思想和想法的軟件算法是人工智能的基礎(chǔ),但硬件也是一個重要組成部分,這就是現(xiàn)場可編程門陣列 (FPGA) 和圖形處理單元(GPU)發(fā)揮重要作用的地方。 人工智能 (AI) 是指能夠以與人
    的頭像 發(fā)表于 02-05 22:35 ?1619次閱讀

    自動駕駛主流芯片:GPU、FPGA、ASIC

    當(dāng)前主流的AI芯片主要分為三類,GPU、FPGA、ASIC。GPU、FPGA均是前期較為成熟的芯片架構(gòu),屬于通用型芯片。ASIC屬于為
    發(fā)表于 03-17 11:05 ?2327次閱讀

    GPU算力租用平臺有什么好處

    當(dāng)今,GPU算力租用平臺為科研機(jī)構(gòu)、企業(yè)乃至個人開發(fā)者提供了靈活高效的算力解決方案。下面,AI部落小編帶您深入探討GPU算力租用平臺所帶來的諸多好處。
    的頭像 發(fā)表于 02-07 10:39 ?454次閱讀