一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

英偉達(dá)DPU的最大優(yōu)勢(shì),竟然是省錢?

麗臺(tái)科技 ? 來源:老石談芯 ? 作者:老石談芯 ? 2022-12-20 10:29 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

2022年第三季度,英偉達(dá)營(yíng)收達(dá)到59.31億美元,其中數(shù)據(jù)中心業(yè)務(wù)貢獻(xiàn)了38.3億美元,同比增長(zhǎng)31%,再度成為英偉達(dá)最強(qiáng)大的收入來源。

作為數(shù)據(jù)中心的「扛把子」芯片,DPU已經(jīng)成為英偉達(dá)戰(zhàn)略布局的重中之重。但除了高性能之外,DPU其實(shí)還抓住了現(xiàn)代數(shù)據(jù)中心的一個(gè)最大痛點(diǎn):節(jié)能。

在各大科技公司紛紛「降本增效」的2022年,綠色與節(jié)能,比往年受到了更多人的關(guān)注。

數(shù)據(jù)中心的最大「殺手」

數(shù)字化經(jīng)濟(jì)時(shí)代,數(shù)據(jù)成為重要資源。就拿每天都在使用的手機(jī)為例,無論是瀏覽各種APP產(chǎn)生的交互,還是瀏覽圖片、播放視頻,抑或是微信端的聊天記錄,本質(zhì)上都是大量的數(shù)據(jù)。而這些數(shù)據(jù)的傳輸、處理、計(jì)算、存儲(chǔ),很大程度上都需要數(shù)據(jù)中心來完成。

現(xiàn)在,數(shù)據(jù)中心成為匯聚所有數(shù)據(jù)的核心。隨著全球數(shù)據(jù)量的爆發(fā)性增長(zhǎng),數(shù)據(jù)中心的規(guī)模也在不斷擴(kuò)大。

之前的文章里我們就介紹過,性能早就不是衡量數(shù)據(jù)中心的唯一標(biāo)準(zhǔn)、甚至不是最重要的標(biāo)準(zhǔn)。建設(shè)一個(gè)現(xiàn)代化數(shù)據(jù)中心,它能提供的算力大小固然重要,但還有很多因素同樣重要,首當(dāng)其沖的就是:耗電。

全球能源的大部分電能消耗均來自大型數(shù)據(jù)中心。有調(diào)查顯示,目前數(shù)據(jù)中心的耗電量占全球發(fā)電量的比例高于1%,而這一占比在美國(guó)為 1.8%、在歐洲為 2.7%。在 2015 年有報(bào)告數(shù)據(jù)就預(yù)計(jì),到 2030 年,數(shù)據(jù)中心消耗的電量占全球發(fā)電量的比例將上升到 8%~13%。

0ca029d4-7ffa-11ed-8abf-dac502259ad0.png

2020年,中國(guó)數(shù)據(jù)中心年度用電總量已達(dá)至1380億度,占我國(guó)全社會(huì)用電量的2%。高昂的電費(fèi)已經(jīng)成為數(shù)據(jù)中心運(yùn)行成本的大頭,約占60%~70%。

有點(diǎn)諷刺的是,全球經(jīng)濟(jì)與科技的發(fā)展,已經(jīng)越來越追求綠色和低碳。但驅(qū)動(dòng)這些技術(shù)發(fā)展的數(shù)據(jù)中心,卻成為當(dāng)今消耗電力和能源最多的場(chǎng)景之一。

問題就來了:如何解決數(shù)據(jù)中心的耗電難題?目前業(yè)界主要有兩種方法。

首先,就是把數(shù)據(jù)中心搬到電費(fèi)更便宜的地方。比如我國(guó)的貴州、內(nèi)蒙等地,就建了不少數(shù)據(jù)中心,很重要的考慮就是利用當(dāng)?shù)馗阋说碾娰M(fèi),拉低數(shù)據(jù)中心的運(yùn)營(yíng)成本。我國(guó)現(xiàn)在已經(jīng)開始推進(jìn)的「東數(shù)西算」工程,一個(gè)很重要的考慮也是把更多算力放在更便宜的地方,從而促進(jìn)國(guó)家算力網(wǎng)更加平衡的發(fā)展。

但是不難看出,數(shù)據(jù)中心「搬家」,其實(shí)并沒有從根本上解決數(shù)據(jù)中心的高能耗,只是降低了使用能源的成本。所以并不能作為唯一的解決方案。

第二,就是在數(shù)據(jù)中心的架構(gòu)設(shè)計(jì)上做文章。常見的方法包括提高冷卻效率、采用智能電源管理系統(tǒng)提高電源使用率、提高每臺(tái)機(jī)器的負(fù)載利用率等等。這些方法在某種程度上觸及到問題的本質(zhì),并且可以將數(shù)據(jù)中心的能耗降低不少。

不過隨著數(shù)據(jù)中心的不斷發(fā)展,新的問題又出現(xiàn)了。2012年,業(yè)界首次提出「數(shù)據(jù)中心稅」的概念。它指的是數(shù)據(jù)中心里存在大量「基礎(chǔ)設(shè)施」,也就是前面說的對(duì)數(shù)據(jù)進(jìn)行傳輸、存儲(chǔ)、計(jì)算的軟硬件。對(duì)于用戶來說,這些基礎(chǔ)設(shè)施是不可見的,但用戶仍然需要為它們付費(fèi)。

就像在超市買個(gè)面包,它的標(biāo)價(jià)其實(shí)包含了面包的成本、運(yùn)輸、儲(chǔ)藏這一系列費(fèi)用,甚至也包括超市的電費(fèi)、房租等這些和面包沒什么關(guān)系的費(fèi)用分?jǐn)偂?/p>

有研究顯示,目前「數(shù)據(jù)中心稅」已經(jīng)達(dá)到30%。也就是說,用戶花100元買數(shù)據(jù)中心服務(wù),有30元其實(shí)都是花在了數(shù)據(jù)中心的基礎(chǔ)設(shè)施成本上。

究其原因,就是傳統(tǒng)的數(shù)據(jù)中心硬件不能滿足日益增長(zhǎng)的計(jì)算存儲(chǔ)和傳輸需求了,造成了費(fèi)力不討好的尷尬局面。一方面花了大量資源去支撐基礎(chǔ)設(shè)施、造成數(shù)據(jù)中心稅;另一方面,這些投入的資源和算力卻并不是為了基礎(chǔ)設(shè)施的功能而設(shè)計(jì)的,導(dǎo)致運(yùn)行效率非常低。這也從另一個(gè)角度解釋了,為什么數(shù)據(jù)中心耗電量如此巨大的原因,就是沒把好鋼用在刀刃上。

因此,升級(jí)數(shù)據(jù)中心硬件、特別是芯片,讓數(shù)據(jù)中心更加綠色高效,就成了國(guó)際學(xué)術(shù)界和工業(yè)界關(guān)心的重要課題。

DPU如何實(shí)現(xiàn)數(shù)據(jù)中心能效提升

顧名思義,DPU是一種面向數(shù)據(jù)的處理器。2020年,英偉達(dá)在GTC 秋季大會(huì)上宣布推出BlueField-2 DPU,它集成了大量特定領(lǐng)域?qū)S眉铀倨鳎瑢iT用來執(zhí)行執(zhí)行網(wǎng)絡(luò)、存儲(chǔ)和安全等基礎(chǔ)設(shè)施任務(wù)的處理。同時(shí),在DPU芯片上擁有比x86 CPU更節(jié)能的Arm CPU核心,主要負(fù)責(zé)控制類的應(yīng)用,比如卸載基礎(chǔ)設(shè)施應(yīng)用的控制平面、服務(wù)器虛擬化平臺(tái)或容器管理軟件的部分功能。

DPU出現(xiàn)的意義,就是為了進(jìn)一步提升數(shù)據(jù)中心的效率、解決「數(shù)據(jù)中心稅」的難題。具體來說,英偉達(dá)將DPU的主要任務(wù)總結(jié)成了三點(diǎn):卸載、加速、隔離。

一、卸載,就是將原本在通用CPU上運(yùn)行的應(yīng)用,轉(zhuǎn)移到DPU上來完成,從而實(shí)現(xiàn)對(duì)CPU的「卸載」,相當(dāng)于給CPU減了負(fù)。比如在數(shù)據(jù)中心里常見的網(wǎng)絡(luò)協(xié)議棧的處理,通常都是由CPU上運(yùn)行的軟件來實(shí)現(xiàn)的。相比之下,從智能網(wǎng)卡發(fā)展而來的DPU可以非常直接地連接網(wǎng)絡(luò),也有更強(qiáng)的網(wǎng)絡(luò)處理能力。

比如英偉達(dá)的BlueField-2 DPU,就能支持200Gbps網(wǎng)絡(luò)的線速處理,并且能實(shí)現(xiàn)OvS等數(shù)據(jù)中心常見應(yīng)用。這樣就釋放了寶貴的CPU內(nèi)核資源給用戶,而不是用來交「數(shù)據(jù)中心稅」,從而極大提升了數(shù)據(jù)中心的資源使用率。

0cbdd10a-7ffa-11ed-8abf-dac502259ad0.png

二、加速,就是利用專門的硬件,把卸載下來的應(yīng)用做的更快、性能更高。說白了,就是不僅把活接下來,還干的比原來還好。

比如,將OvS卸載到BlueField DPU后,服務(wù)器的網(wǎng)絡(luò)吞吐量從19.8Gbps增至49.3Gbps。不僅在加速網(wǎng)絡(luò)吞吐量?jī)杀抖?,還釋放了原本用于運(yùn)行OvS的18個(gè)虛擬CPU核心。

從能耗角度來看,一方面可以用耗電更低的DPU芯片實(shí)現(xiàn)更高的性能、用更少的服務(wù)器完成同樣的工作;另一方面還提高了CPU的利用率,二者結(jié)合,自然將服務(wù)器的能耗大幅降下來了。根據(jù)英偉達(dá)測(cè)試的數(shù)據(jù),采用DPU之后,每臺(tái)服務(wù)器至少可節(jié)省300-400瓦的耗電量。

除了OvS,在運(yùn)行數(shù)據(jù)中心基礎(chǔ)設(shè)施的其他任務(wù)時(shí),DPU也有專門的硬件引擎來用于加速網(wǎng)絡(luò)、數(shù)據(jù)加密/解密、密鑰管理、存儲(chǔ)虛擬化和其他任務(wù)。DPU 上的CPU核心通常比一般服務(wù)器CPU更節(jié)能,并且可以直接訪問網(wǎng)絡(luò)管線。

因此,即使一些網(wǎng)絡(luò)任務(wù)無法通過DPU的專用引擎來加速,DPU核心也能比服務(wù)器CPU更高效地執(zhí)行SDN、遙測(cè)、深度數(shù)據(jù)包檢查或其他網(wǎng)絡(luò)任務(wù)。

有了DPU,承載網(wǎng)絡(luò)側(cè)專用性的網(wǎng)絡(luò)堆棧算法和傳輸協(xié)議運(yùn)算轉(zhuǎn)移,數(shù)據(jù)中心可以更高效地應(yīng)對(duì)多元化的算力需求,釋放CPU和GPU的算力資源,讓數(shù)據(jù)中心的性能得到進(jìn)一步優(yōu)化。

三、隔離,就是利用DPU的專用硬件,實(shí)現(xiàn)數(shù)據(jù)中心關(guān)鍵的安全功能。比如,數(shù)據(jù)中心常見的加密協(xié)議IPsec通常需要CPU或者專用的加密加速器卡來完成。而BlueField DPU就集成了對(duì)IPsec的硬件支持,讓關(guān)鍵的加解密過程不經(jīng)過CPU,避免多用戶共享CPU和內(nèi)存時(shí)發(fā)生數(shù)據(jù)竊取和攻擊;也不需要額外的專用加密卡,進(jìn)一步節(jié)省成本。

0cdb4690-7ffa-11ed-8abf-dac502259ad0.png

和CPU相比,采用DPU卸載IPsec之后,每臺(tái)服務(wù)器耗電量降低21%,可節(jié)電高達(dá)140瓦;客戶端也可節(jié)省能耗,最高耗電降低34%,節(jié)電高達(dá)247瓦。對(duì)于大型數(shù)據(jù)中心而言,這相當(dāng)于在三年間節(jié)省了近 900 萬美元的電費(fèi)。

0cffd2a8-7ffa-11ed-8abf-dac502259ad0.png

除了上面介紹的三個(gè)硬件特點(diǎn)之外,BlueField DPU還提供了DOCA軟件編程框架,它主要分成三個(gè)主要模塊,分別是DOCA服務(wù)、庫(kù)和驅(qū)動(dòng)。此外,DOCA還將實(shí)例代碼、文檔、以及預(yù)打包容器都集成在一起,可以讓用戶直接對(duì)DPU進(jìn)行編程。

有了這些框架和方法實(shí)例,軟件開發(fā)者就不需要管底層的硬件細(xì)節(jié),更不需要再花時(shí)間去學(xué)習(xí)硬件相關(guān)的知識(shí)和編程方法,而可以專注于自己業(yè)務(wù)本身的開發(fā)。

通過采用并部署DPU,可以減少服務(wù)器的部署數(shù)量、并降低每臺(tái)服務(wù)器的耗電量。根據(jù)《NVIDIA BlueField DPU能效白皮書》中的數(shù)據(jù),擁有1 萬臺(tái)服務(wù)器的大型數(shù)據(jù)中心三年期間可大幅節(jié)省 2600 萬美元。通過使用 DPU,服務(wù)器可節(jié)省 6.3%的資本性支出,由于較低的電力成本,運(yùn)營(yíng)性支出又節(jié)省了 46%。

此外,降低服務(wù)器耗電量還可以節(jié)省數(shù)據(jù)中心的附加成本,如配電和冷卻等。每瓦進(jìn)入數(shù)據(jù)中心的電力都需要電源管理硬件。比如,不間斷電源、發(fā)電機(jī)(加上燃料輸送和存儲(chǔ))和配電裝置,消耗的每一瓦電力都會(huì)轉(zhuǎn)變成必須從數(shù)據(jù)中心排放出來的熱量。從下圖中可以看到,高達(dá) 40% 的數(shù)據(jù)中心耗電量還專門用于冷卻。因此,服務(wù)器端節(jié)省的每一瓦電力都會(huì)減少數(shù)據(jù)中心冷卻裝置所需的電量,以及供電和散熱所需的資產(chǎn)設(shè)備數(shù)量。

0d209196-7ffa-11ed-8abf-dac502259ad0.png

結(jié)語

當(dāng)下,全球DPU市場(chǎng)已經(jīng)迎來爆發(fā)式增長(zhǎng)。據(jù)賽迪顧問預(yù)計(jì),中國(guó)DPU產(chǎn)業(yè)市場(chǎng)規(guī)模將在2025年超過565.9億元,復(fù)合增速達(dá)到 51.73%,而全球DPU產(chǎn)業(yè)市場(chǎng)規(guī)模更加龐大,將超過245.3億美元,復(fù)合增速高達(dá)至170.60%。

除了高性能和安全性的考慮,低功耗也逐漸成為DPU新的核心需求。通過DPU實(shí)現(xiàn)數(shù)據(jù)中心的綠色發(fā)展,已經(jīng)逐漸成為提高數(shù)據(jù)中心效率、降低能耗的大勢(shì)所趨。

想了解更多DPU在數(shù)據(jù)中心里的能耗優(yōu)勢(shì),掃描二維碼獲取 NVIDIA BlueField DPU 能效白皮書。

審核編輯 :李倩

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 數(shù)據(jù)中心
    +關(guān)注

    關(guān)注

    16

    文章

    5226

    瀏覽量

    73506
  • DPU
    DPU
    +關(guān)注

    關(guān)注

    0

    文章

    393

    瀏覽量

    24926
  • 英偉達(dá)
    +關(guān)注

    關(guān)注

    22

    文章

    3950

    瀏覽量

    93719

原文標(biāo)題:英偉達(dá)DPU的最大優(yōu)勢(shì),竟然是省錢?

文章出處:【微信號(hào):Leadtek,微信公眾號(hào):麗臺(tái)科技】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    UPS(不間斷電源)故障頻發(fā)?原因竟然是這樣

    UPS(不間斷電源)故障頻發(fā)?原因竟然是這樣
    的頭像 發(fā)表于 04-19 13:53 ?363次閱讀
    UPS(不間斷電源)故障頻發(fā)?原因<b class='flag-5'>竟然是</b>這樣

    英偉達(dá)市值一夜蒸發(fā)近2萬億 英偉達(dá)股價(jià)下跌超8%

    在美東時(shí)間周一,美股三大指數(shù)集體收跌,截至收盤,英偉達(dá)股價(jià)下跌超8%,英偉達(dá)市值一夜蒸發(fā)2650億美元(換算下來約合人民幣19345億元);目前英偉
    的頭像 發(fā)表于 03-04 10:19 ?613次閱讀

    英偉達(dá)或成臺(tái)積電最大客戶,推動(dòng)AI相關(guān)營(yíng)收增長(zhǎng)

    ,其對(duì)臺(tái)積電的需求也將隨之增加。預(yù)計(jì)到2025年,英偉達(dá)對(duì)臺(tái)積電的貢獻(xiàn)將顯著提升,有望超越當(dāng)前的最大客戶蘋果,成為臺(tái)積電的新晉“頭號(hào)客戶”。 供應(yīng)鏈數(shù)據(jù)顯示,目前蘋果作為臺(tái)積電的最大
    的頭像 發(fā)表于 01-03 14:22 ?660次閱讀

    英偉達(dá)GB300訂單配置初步敲定

    與包括鴻海在內(nèi)的多家供應(yīng)商展開了緊密合作。鴻海作為英偉達(dá)的重要合作伙伴,將繼續(xù)擔(dān)任GB300的最大供應(yīng)商。業(yè)界預(yù)計(jì),GB300實(shí)機(jī)有望在明年上半年正式面市,為全球AI市場(chǎng)帶來新一輪的技術(shù)革新。 除了鴻海之外,廣
    的頭像 發(fā)表于 12-24 10:09 ?1003次閱讀

    剛剛!英偉達(dá)最新回應(yīng)!

    12月10日消息,據(jù)報(bào)道,英偉達(dá)市值一夜蒸發(fā)掉了889億美元(約合人民幣6460億元)。 據(jù)此前媒體報(bào)道,近日英偉達(dá)公司因涉嫌違反《中華人民共和國(guó)反壟斷法》及《市場(chǎng)監(jiān)管總局關(guān)于附加限制
    的頭像 發(fā)表于 12-10 18:13 ?816次閱讀

    英偉達(dá)被立案調(diào)查 英偉達(dá)回應(yīng)反壟斷調(diào)查

    英偉達(dá)被立案調(diào)查!?國(guó)家市場(chǎng)監(jiān)督管理總局在12 月 9 日晚宣布,英偉達(dá)公司涉嫌違反《中華人民共和國(guó)反壟斷法》及《市場(chǎng)監(jiān)管總局關(guān)于附加限制性條件批準(zhǔn)
    的頭像 發(fā)表于 12-10 15:03 ?504次閱讀

    英偉達(dá)與軟銀攜手共建日本AI基礎(chǔ)設(shè)施

    近日,英偉達(dá)創(chuàng)始人兼CEO黃仁勛宣布,英偉達(dá)將與軟銀集團(tuán)合作,在日本共同建設(shè)AI基礎(chǔ)設(shè)施,其中包括日本最大的AI工廠。這一合作標(biāo)志著
    的頭像 發(fā)表于 11-13 14:41 ?736次閱讀

    英偉達(dá)超越蘋果成為市值最高 英偉達(dá)取代英特爾加入道指

    在AI浪潮下英偉達(dá)被各路資本競(jìng)相追逐,2024年英偉達(dá)公司的股價(jià)累計(jì)上漲高達(dá)180%。在11月4日,英偉
    的頭像 發(fā)表于 11-05 15:22 ?778次閱讀

    英偉達(dá)市值飆升,逼近蘋果

    近日,隨著人工智能技術(shù)的持續(xù)繁榮,英偉達(dá)公司作為AI芯片生產(chǎn)的領(lǐng)軍者,其市值實(shí)現(xiàn)了驚人的飛躍。截至美國(guó)當(dāng)?shù)貢r(shí)間21日,英偉達(dá)的市值再創(chuàng)歷史新高,達(dá)到了3.525萬億美元,首次突破3.5
    的頭像 發(fā)表于 10-23 09:31 ?666次閱讀

    英偉達(dá)投資日本AI公司Sakana AI

    Ventures和Lux Capital領(lǐng)投。而英偉達(dá)可能是最大出資方,并將成為Sakana AI的大股東。這是英偉達(dá)迄今為止在日本人工智
    的頭像 發(fā)表于 09-05 15:46 ?961次閱讀

    英偉達(dá)高管解讀Q2財(cái)報(bào) 但是英偉達(dá)市值暴跌1.4萬億元

    英偉達(dá)正式發(fā)布了2025財(cái)年第二季度報(bào)告,英偉達(dá)公司在Q2營(yíng)收達(dá)到了300.4億美元,這個(gè)營(yíng)收超過了市場(chǎng)預(yù)期的287億美元,同比增長(zhǎng)122%;凈利潤(rùn)為166億美元,同比增長(zhǎng)168%,也
    的頭像 發(fā)表于 08-30 13:03 ?1121次閱讀

    英偉達(dá)Blackwell架構(gòu)揭秘:下一個(gè)AI計(jì)算里程碑?# 英偉達(dá)# 英偉達(dá)Blackwell

    英偉達(dá)行業(yè)資訊
    jf_02331860
    發(fā)布于 :2024年08月26日 10:58:09

    AI芯片巨頭英偉達(dá)漲超4% 英偉達(dá)市值暴增7500億

    誰是美股最靚的仔?在人工智能浪潮之下AI芯片巨頭英偉達(dá)肯定有一席之地,特別是現(xiàn)在全球資本市場(chǎng)動(dòng)蕩之際,業(yè)界分析師多認(rèn)為英偉達(dá)是最佳“反彈股”之一。比如美國(guó)銀行分析師Vivek Arya
    的頭像 發(fā)表于 08-13 15:33 ?1447次閱讀

    英偉達(dá)TITAN AI顯卡曝光,性能狂超RTX 4090達(dá)63%!# 英偉達(dá)# 顯卡

    顯卡英偉達(dá)
    jf_02331860
    發(fā)布于 :2024年07月24日 17:18:28