一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

FPGA與GPU計(jì)算存儲(chǔ)單位功耗性能

算法與數(shù)據(jù)結(jié)構(gòu) ? 來(lái)源:Xilinx賽靈思 ? 作者:Xilinx ? 2021-08-13 17:45 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

為了提升計(jì)算基礎(chǔ)設(shè)施的性能,并緊跟數(shù)據(jù)分析與 AI 不斷攀升的需求,眾多企業(yè)將硬件加速視為主要的解決方案。在大多數(shù)情況下,先進(jìn)的可編程硬件(主要是指 GPUFPGA)是加速的主要方式。通過(guò)使用這種先進(jìn)的硬件,企業(yè)正在贏得計(jì)算優(yōu)勢(shì);然而,對(duì)于編程難度,他們?nèi)匀淮嬖诤侠淼膿?dān)憂。

硬件制造商正在將加速方法應(yīng)用于計(jì)算存儲(chǔ),這是專門設(shè)計(jì)用于包含內(nèi)嵌計(jì)算元素的存儲(chǔ)。這種方法已經(jīng)被證明可以為分析和 AI 應(yīng)用提供優(yōu)異的性能。使用或者不使用機(jī)器學(xué)習(xí)輔助的分析以及驗(yàn)證,都可以借助計(jì)算存儲(chǔ)器件進(jìn)行加速。這些器件提供了一個(gè)關(guān)鍵的優(yōu)勢(shì),使得成本高昂的計(jì)算被卸載到存儲(chǔ)器件上,而不必在服務(wù)器 CPU 上完成。與標(biāo)準(zhǔn)的存儲(chǔ)/CPU 方法相比,通過(guò)計(jì)算存儲(chǔ)獲得的優(yōu)勢(shì)包括:

1

借助應(yīng)用專用編程定制可編程硬件,獲得更高性能

2

將計(jì)算任務(wù)從服務(wù)器卸載到存儲(chǔ)器件,釋放 CPU 資源

3

數(shù)據(jù)與計(jì)算共址,降低數(shù)據(jù)傳輸需求

這種新穎的方法前景光明。不過(guò),您應(yīng)根據(jù)具體用例評(píng)估這種方法,考量性能、成本、功耗和易用性。性價(jià)比和單位功耗性能在選擇加速硬件評(píng)估時(shí),占據(jù)主要比率。在本文中,我們將研討單位功耗性能。

計(jì)算存儲(chǔ)功耗比較

在這個(gè)場(chǎng)景中,我們將比較以 CSV 數(shù)據(jù)讀取用例為主的三種工具:英偉達(dá) GPUDirect 存儲(chǔ) 和RAPIDS存儲(chǔ),以及基于賽靈思技術(shù)的三星 SmartSSD 存儲(chǔ)。CSV 讀取在計(jì)算密集型流水線中起著重要的作用。

在下文中,我們將性能定義成 CSV 的處理速率,或處理“帶寬”。我們先快速回顧一下三種系統(tǒng)的運(yùn)行方式。

英偉達(dá) GPUDirect 存儲(chǔ)

端到端滿足分析和 AI 需求

將 GPU 用作計(jì)算單元,緊貼基于 NVMe 的存儲(chǔ)器件布局 (GPUDirect)

使用 CUDA 進(jìn)行編程 (RAPIDS)

英偉達(dá)用其 CSV 數(shù)據(jù)讀取技術(shù)衡量相對(duì)于標(biāo)準(zhǔn) SSD 的性能提升。結(jié)果如圖 1 所示。使用 1 到 8 個(gè)加速器時(shí),對(duì)應(yīng)的吞吐量是 4 到 23GB/s。

三星 SmartSSD 驅(qū)動(dòng)器

將賽靈思 FPGA 用作計(jì)算單元

與存儲(chǔ)邏輯內(nèi)嵌駐留在同一個(gè)內(nèi)部 PCIe 互聯(lián)上

通過(guò)編程在存儲(chǔ)平臺(tái)上開展運(yùn)算

賽靈思數(shù)據(jù)分析解決方案合作伙伴 Bigstream 與三星合作,為 Apache Spark 設(shè)計(jì)加速器,包括用于 CSV 和 Parquet 處理的 IP。SmartSSD 的測(cè)試使用單機(jī)模式的 CSV 解析引擎,以便開展比較。結(jié)果如圖 2 所示,使用 1 到 12 個(gè)加速器時(shí),對(duì)應(yīng)的吞吐量是 4 到 23GB/s,同時(shí)也給出英偉達(dá)的結(jié)果(使用 1 到 8 個(gè)加速器)。請(qǐng)注意,本討論中的所有結(jié)果都按 x 軸上的加速器數(shù)量進(jìn)行參數(shù)化。

這些結(jié)果令人振奮,但在選擇您的解決方案時(shí),請(qǐng)務(wù)必將功耗情況納入考慮。

單位功耗性能比較

圖 3 顯示了將功耗考慮在內(nèi)后的分析結(jié)果。它們代表單位功耗達(dá)到的性能水平,根據(jù)上述討論中引用的相關(guān)材料,給出了以下假設(shè):

Tesla V100 GPU:最大功耗 200 瓦

SmartSSD 驅(qū)動(dòng)器 FPGA:最大功耗 30 瓦

在這個(gè)場(chǎng)景下,計(jì)算表明,在全部使用 8 個(gè)加速器的情況下,SmartSSD 的單位功耗性能比 GPUDirect Storage 高 25 倍。

最 終 思 考

計(jì)算存儲(chǔ)的優(yōu)勢(shì)在于能增強(qiáng)數(shù)據(jù)分析和 AI 應(yīng)用的性能。然而,要讓這種方法具備可實(shí)際部署的能力和實(shí)用性,就必須在評(píng)估時(shí)將功耗納入考慮。

針對(duì)用于 CSV 數(shù)據(jù)解析的兩種不同的計(jì)算存儲(chǔ)方法,我們已經(jīng)提出按功耗參數(shù)化的吞吐量性能曲線。結(jié)果顯示,在使用相似數(shù)量的加速器進(jìn)行比較時(shí),SmartSSD 驅(qū)動(dòng)器的單位功耗性能優(yōu)于 GPUDirect存儲(chǔ)方法。

GPUDirect 是英偉達(dá)通過(guò) NVIDIA DGX-2 應(yīng)用平臺(tái)提供的研究系統(tǒng)。

三星 SmartSSD 驅(qū)動(dòng)器是一種可部署的量產(chǎn)型 PCIe 可插拔平臺(tái),現(xiàn)在已經(jīng)通過(guò)賽靈思及分銷商供貨。

責(zé)任編輯:haq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • FPGA
    +關(guān)注

    關(guān)注

    1645

    文章

    22033

    瀏覽量

    617780
  • 驅(qū)動(dòng)器
    +關(guān)注

    關(guān)注

    54

    文章

    8684

    瀏覽量

    149761
  • 三星電子
    +關(guān)注

    關(guān)注

    34

    文章

    15887

    瀏覽量

    182315
  • gpu
    gpu
    +關(guān)注

    關(guān)注

    28

    文章

    4937

    瀏覽量

    131141

原文標(biāo)題:FPGA 與 GPU 計(jì)算存儲(chǔ)加速對(duì)比

文章出處:【微信號(hào):TheAlgorithm,微信公眾號(hào):算法與數(shù)據(jù)結(jié)構(gòu)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    ?為什么GPU性能效率比峰值性能更關(guān)鍵

    在評(píng)估GPU性能時(shí),通常首先考察三個(gè)指標(biāo):圖形工作負(fù)載的紋理率(GPixel/s)、浮點(diǎn)運(yùn)算次數(shù)(FLOPS)以及它們能處理計(jì)算和AI工作負(fù)載的每秒8-bittera運(yùn)算次數(shù)(TOPS)。這些關(guān)鍵
    的頭像 發(fā)表于 03-13 08:34 ?383次閱讀
    ?為什么<b class='flag-5'>GPU</b><b class='flag-5'>性能</b>效率比峰值<b class='flag-5'>性能</b>更關(guān)鍵

    FPGA+AI王炸組合如何重塑未來(lái)世界:看看DeepSeek東方神秘力量如何預(yù)測(cè)......

    ...... 2) AI超算革命:FPGA集群功耗GPU降低62%;混合精度計(jì)算效率提升5.8倍...... 3) 6G通信突破:軟件無(wú)線電實(shí)現(xiàn)Sub-6GHz/毫米波全頻段覆蓋;M
    發(fā)表于 03-03 11:21

    GPU加速計(jì)算平臺(tái)的優(yōu)勢(shì)

    傳統(tǒng)的CPU雖然在日常計(jì)算任務(wù)中表現(xiàn)出色,但在面對(duì)大規(guī)模并行計(jì)算需求時(shí),其性能往往捉襟見肘。而GPU加速計(jì)算平臺(tái)憑借其獨(dú)特的優(yōu)勢(shì),吸引了行業(yè)
    的頭像 發(fā)表于 02-23 16:16 ?420次閱讀

    GPU計(jì)算服務(wù)怎么樣

    在當(dāng)今數(shù)字化快速發(fā)展的時(shí)代,高性能計(jì)算需求日益增長(zhǎng)。為滿足這些需求,GPU計(jì)算服務(wù)應(yīng)運(yùn)而生。那么,GPU
    的頭像 發(fā)表于 02-05 15:01 ?467次閱讀

    FPGA+GPU+CPU國(guó)產(chǎn)化人工智能平臺(tái)

    平臺(tái)采用國(guó)產(chǎn)化FPGA+GPU+CPU構(gòu)建嵌入式多核異構(gòu)智算終端,可形成FPGA+GPUFPGA+CPU、CPU+FPGA等組合模式,形成低功耗
    的頭像 發(fā)表于 01-07 16:42 ?1066次閱讀
    <b class='flag-5'>FPGA+GPU</b>+CPU國(guó)產(chǎn)化人工智能平臺(tái)

    ASIC和GPU的原理和優(yōu)勢(shì)

    芯片”。 準(zhǔn)確來(lái)說(shuō),除了它倆,計(jì)算芯片還包括大家更熟悉的CPU,以及FPGA。 行業(yè)里,通常會(huì)把半導(dǎo)體芯片分為數(shù)字芯片和模擬芯片。其中,數(shù)字芯片的市場(chǎng)規(guī)模占比較大,達(dá)到70%左右。 數(shù)字芯片,還可以進(jìn)一步細(xì)分,分為:邏輯芯片、存儲(chǔ)
    的頭像 發(fā)表于 01-06 13:58 ?1666次閱讀
    ASIC和<b class='flag-5'>GPU</b>的原理和優(yōu)勢(shì)

    《CST Studio Suite 2024 GPU加速計(jì)算指南》

    問(wèn)題,但會(huì)降低舊GPU硬件性能,可通過(guò)NVIDIA控制面板或命令行工具nvidia - smi管理。 - TCC模式(Windows only):某些GPU計(jì)算需要啟用,可通過(guò)命令行
    發(fā)表于 12-16 14:25

    【「算力芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析」閱讀體驗(yàn)】--了解算力芯片GPU

    本篇閱讀學(xué)習(xí)第七、八章,了解GPU架構(gòu)演進(jìn)及CPGPU存儲(chǔ)體系與線程管理 █從圖形到計(jì)算GPU架構(gòu)演進(jìn) GPU圖像
    發(fā)表于 11-03 12:55

    如何提高GPU性能

    在當(dāng)今這個(gè)視覺至上的時(shí)代,GPU(圖形處理單元)的性能對(duì)于游戲玩家、圖形設(shè)計(jì)師、視頻編輯者以及任何需要進(jìn)行高強(qiáng)度圖形處理的用戶來(lái)說(shuō)至關(guān)重要。GPU不僅是游戲和多媒體應(yīng)用的心臟,它還在科學(xué)計(jì)算
    的頭像 發(fā)表于 10-27 11:21 ?2462次閱讀

    GPU加速計(jì)算平臺(tái)是什么

    GPU加速計(jì)算平臺(tái),簡(jiǎn)而言之,是利用圖形處理器(GPU)的強(qiáng)大并行計(jì)算能力來(lái)加速科學(xué)計(jì)算、數(shù)據(jù)分析、機(jī)器學(xué)習(xí)等復(fù)雜
    的頭像 發(fā)表于 10-25 09:23 ?584次閱讀

    【「算力芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析」閱讀體驗(yàn)】--全書概覽

    CPU計(jì)算單元設(shè)計(jì) 4.1 計(jì)算單元邏輯構(gòu)成 4.2 數(shù)相浮點(diǎn)數(shù)的差異 4.3 算術(shù)邏輯單元 4.4 浮點(diǎn)數(shù)單元 4.5 指令的加載和存儲(chǔ)單元 4.6 單指今多數(shù)據(jù) 4.7 矩陣加速指令集 4.8
    發(fā)表于 10-15 22:08

    FPGA做深度學(xué)習(xí)能走多遠(yuǎn)?

    。例如,在數(shù)據(jù)中心中,可以將 FPGA 與 CPU 或 GPU 結(jié)合使用,根據(jù)不同的任務(wù)需求進(jìn)行靈活的資源分配和協(xié)同計(jì)算,提高整個(gè)系統(tǒng)的性能和效率。 ? 算法優(yōu)化和創(chuàng)新:隨著深度學(xué)習(xí)算
    發(fā)表于 09-27 20:53

    存儲(chǔ)器容量單位有哪些

    存儲(chǔ)器容量單位是指用于衡量存儲(chǔ)設(shè)備中存儲(chǔ)數(shù)據(jù)能力的單位。在計(jì)算機(jī)科學(xué)中,這些
    的頭像 發(fā)表于 09-05 12:41 ?4525次閱讀

    談一談FPGA設(shè)計(jì)中的功率計(jì)算

    隨著工藝技術(shù)的越來(lái)越前沿化, FPGA器件擁有更多的邏輯、存儲(chǔ)器和特殊功能,如存儲(chǔ)器接口、 DSP塊和多種高速SERDES信道,這些發(fā)展不斷地對(duì)系統(tǒng)功率要求提出挑戰(zhàn)。 功率計(jì)算的關(guān)鍵是
    發(fā)表于 07-31 22:37

    信號(hào)計(jì)算主板設(shè)計(jì)方案:735-基于3U VPX的AGX Xavier GPU計(jì)算主板

    3U VPX導(dǎo)冷結(jié)構(gòu) , FPGA信號(hào)預(yù)處理 , GPU顯卡 , PCIE視頻處理 , GPU計(jì)算主板
    的頭像 發(fā)表于 07-18 11:31 ?799次閱讀
    信號(hào)<b class='flag-5'>計(jì)算</b>主板設(shè)計(jì)方案:735-基于3U VPX的AGX Xavier <b class='flag-5'>GPU</b><b class='flag-5'>計(jì)算</b>主板