一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

第五代英特爾至強處理器,AI特化的通用服務(wù)器CPU

E4Life ? 來源:電子發(fā)燒友網(wǎng) ? 作者:周凱揚 ? 2024-03-18 08:14 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

電子發(fā)燒友網(wǎng)報道(文/周凱揚)隨著AI已經(jīng)成了數(shù)據(jù)中心與服務(wù)器市場的主流應(yīng)用,就連通用服務(wù)器CPU,也開始著重加強AI計算能力。為此,英特爾于去年年底發(fā)布了第五代至強處理器,進(jìn)一步提升通用計算性能的同時,也新增了AI相關(guān)的新指令集,諸如AXM、AVX等。

第五代至強可擴(kuò)展處理器架構(gòu)剖析

2023年年底發(fā)布的第五代至強,雖然和第四代至強一樣都是基于Intel 7制程打造的,并采用了Dual-poly-pitch SuperFin晶體管技術(shù),但英特爾依然在關(guān)鍵的技術(shù)指標(biāo)上做了改進(jìn),比如系統(tǒng)的漏電流控制和動態(tài)電容等。在這些改進(jìn)下,整體上第五代至強在同等功耗下的頻率可以提升3%,其中有2.5%是由漏電流控制貢獻(xiàn)的,動態(tài)電容下降貢獻(xiàn)了0.5%。

wKgZomX2-7OAaSdfAAMY-mbGl1w468.png

除此之外,第五代至強的多芯片封裝方式有所改變,第四代至強就是把芯片分為四個部分,這四個部分是相對對稱的。而第五代至強的切分方式則做了調(diào)整,把切四份的做法變成了切兩份。過去每兩片之間相互進(jìn)行通信時,需要有一些芯片互連之間的接口,不僅占用了額外的芯片面積,也額外增加了功耗。如今隨著芯片質(zhì)量控制得到進(jìn)一步改進(jìn),英特爾可以在相對較大的面積下依舊獲得很好的良率,所以通過將四芯片改為兩芯片的方式,芯片的面積得到了更好的控制。

此外第五代至強的處理核心升級到了Raptor Cove核心,核心數(shù)從最多的60核升級到64核。在I/O速度上,DDR速度從4800MT/s提升到了5600MT/s,UPI速度從16GT/s提升到20GT/s。而最大的升級之一當(dāng)屬LLC大小,單個模塊的LLC容量從1.875MB增加到了5MB。這樣如果處理規(guī)模較小的數(shù)據(jù)集時,甚至可以將主要數(shù)據(jù)放在LLC緩存中,從而大量減少內(nèi)存訪問,進(jìn)而大幅提高性能。這些架構(gòu)上的改進(jìn),也使其在生成式AI和LLM等AI應(yīng)用上的性能得到了提升。

通用服務(wù)器上跑AI

除了傳統(tǒng)的CPU計算核心外,英特爾也增加了AMX加速器,專門針對矩陣運算。根據(jù)測試,AI推理的性能與上一代相比提升了至多42%。針對非大模型類的AI應(yīng)用,英特爾始終致力于在CPU上部署AI,并結(jié)合其OpenVINO生態(tài)進(jìn)行優(yōu)化,比如推薦、語音識別、圖像識別等。

而面對推薦系統(tǒng),尤其是面對GPU也無法單獨處理的大模型時,CPU反而更快。因為GPU不夠用的時候,玩玩需要跨GPU計算,或者需要和CPU頻繁交互,如此一來CPU效率更高。

對于通用的AI工作負(fù)載,英特爾采用AMX和AVX-512兩個指令集,基于OpenVINO進(jìn)行優(yōu)化。在推理的過程中,指令集上可以進(jìn)行切分,通過加速器定向加速某一部分,甚至可以替代傳統(tǒng)的基于GPU的AI模型。

除此之外,還有成本上的考量,在模型調(diào)優(yōu)、推理、應(yīng)用上,使用通用服務(wù)器有非常大的性價比提升。尤其是當(dāng)企業(yè)并不需要24小時都要跑大模型,大模型只是對業(yè)務(wù)的輔助時,比如聊天機器人、或是內(nèi)容生成、提綱分析等,這些只是幫助企業(yè)業(yè)務(wù)的生產(chǎn)力提高,尤其是在私有云上,就沒有必要再重新部署一個新的GPU的平臺。因為一個新的平臺意味著需要考慮開發(fā)、運維等因素,成本有可能增加,而這對于企業(yè)來說也可能會成為負(fù)擔(dān)。

以合作伙伴舉例,比如百度云也有基于第五代至強的服務(wù)器,提供了可以在CPU上運行的大型計算模型的服務(wù);在京東基于第五代至強的應(yīng)用中可以看到,和前一代的處理器相比,在Llama2 13B的模型上,看到有50%的性能提升。所以第五代至強在AI上應(yīng)用的性能提升是比較明顯的。

再者就是編解碼上的應(yīng)用,目前主流客戶為了達(dá)到更好的圖像質(zhì)量,反而會采用CPU做編解碼。GPU在擁有硬件加速的情況下,其特點是快,但視頻編解碼質(zhì)量往往略差于CPU。通過第五代至強處理器AMX-INT8的加持,已經(jīng)把吞吐從原來的1.5FPS增強到了33FPS,基本可以滿足實時編碼的需求。


下一代至強路線圖

從路線圖上來看,2024年英特爾還會發(fā)布新一代英特爾至強可擴(kuò)展處理器,而且有一個非常豐富的產(chǎn)品組合,同時滿足對性能和能耗的要求?;诂F(xiàn)在的第五代至強,英特爾也會發(fā)布下一代的性能核,就是高主頻、高性能的CPU核架構(gòu),為主流和復(fù)雜的數(shù)據(jù)中心的應(yīng)用進(jìn)行性能優(yōu)化,尤其是目前有很多程序是跑在虛擬機上,之前寫的非常大的程序要跑在性能核上的,才能看到一個非常好的性能提升。


同時對新興的,尤其是基于云原生的設(shè)計,英特爾還提供基于能效核打造的至強處理器,每瓦性能可以做到相對極致,而且因為它的核心設(shè)計比較精簡,可以放更多高密度的核數(shù)到每一款的CPU和服務(wù)器,從而支持面向云的高密度超高能效的運算進(jìn)行能效的優(yōu)化。在近期對于產(chǎn)品淘汰換新的要求中,有一個重要考量因素就是能效比,這同樣也是符合國家對設(shè)備淘汰換新的要求。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 處理器
    +關(guān)注

    關(guān)注

    68

    文章

    19896

    瀏覽量

    235231
  • 英特爾
    +關(guān)注

    關(guān)注

    61

    文章

    10196

    瀏覽量

    174689
  • cpu
    cpu
    +關(guān)注

    關(guān)注

    68

    文章

    11080

    瀏覽量

    217095
  • AI
    AI
    +關(guān)注

    關(guān)注

    88

    文章

    35164

    瀏覽量

    279950
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    主控CPU全能選手,英特爾至強6助力AI系統(tǒng)高效運轉(zhuǎn)

    有什么特殊之處呢? AI加速系統(tǒng)為何看重CPU主控能力? 作為造價極高的AI加速系統(tǒng),DGX B300可以不計成本地選任何CPU,只要它能充分的發(fā)揮整套系統(tǒng)的性能。選擇
    的頭像 發(fā)表于 06-27 11:44 ?182次閱讀
    主控<b class='flag-5'>CPU</b>全能選手,<b class='flag-5'>英特爾</b><b class='flag-5'>至強</b>6助力<b class='flag-5'>AI</b>系統(tǒng)高效運轉(zhuǎn)

    1.9倍性能提升!英特爾至強6在MLPerf基準(zhǔn)測試中表現(xiàn)卓越

    第五代至強處理器相比,英特爾至強6性能核的性能平均提高了1.9倍。 今日,MLCommons公布了最新的MLPerf推理v5.0基準(zhǔn)測試結(jié)
    的頭像 發(fā)表于 04-07 10:58 ?280次閱讀

    英特爾至強6處理器助力數(shù)據(jù)中心整合升級

    繼去年9月重磅推出英特爾 至強 6900性能核處理器后,英特爾進(jìn)一步擴(kuò)充至強6產(chǎn)品家族,于近期發(fā)布了包括
    的頭像 發(fā)表于 03-13 17:36 ?882次閱讀

    英特爾至強6再推新品!打造最強AI“機頭引擎”

    的產(chǎn)品矩陣,很好地滿足市場的多樣化需求;另一方面,憑借卓越的 AI 性能提升,英特爾為數(shù)據(jù)中心提供了性能強勁的機頭節(jié)點 CPU,助力企業(yè)在數(shù)字時代的浪潮中穩(wěn)步前行。 事實上,去年9月,英特爾
    的頭像 發(fā)表于 03-13 14:57 ?343次閱讀

    英特爾展示基于至強6處理器的基礎(chǔ)網(wǎng)絡(luò)設(shè)施

    ; 與5G核心網(wǎng)解決方案合作伙伴的深度合作,加快了英特爾至強6能效核處理器在整個生態(tài)系統(tǒng)中的應(yīng)用; 基于5G核心網(wǎng)工作負(fù)載的獨立驗證確認(rèn)了英特爾至強
    的頭像 發(fā)表于 03-08 09:24 ?533次閱讀

    MWC 2025:英特爾展示基于至強6處理器的基礎(chǔ)網(wǎng)絡(luò)設(shè)施

    3.2倍3; 與5G核心網(wǎng)解決方案合作伙伴的深度合作,加快了英特爾?至強?6能效核處理器在整個生態(tài)系統(tǒng)中的應(yīng)用; 基于5G核心網(wǎng)工作負(fù)載的獨立驗證確認(rèn)了英特爾?
    發(fā)表于 03-03 15:52 ?245次閱讀
    MWC 2025:<b class='flag-5'>英特爾</b>展示基于<b class='flag-5'>至強</b>6<b class='flag-5'>處理器</b>的基礎(chǔ)網(wǎng)絡(luò)設(shè)施

    HPE攜手英特爾至強6,打造新一服務(wù)器性能巔峰

    近日,慧與科技(HPE)推出了八款全新HPE ProLiant Compute Gen12服務(wù)器,標(biāo)志著新一企業(yè)級服務(wù)器領(lǐng)域的新標(biāo)桿正式誕生。這一系列服務(wù)器全面搭載了
    的頭像 發(fā)表于 02-18 10:38 ?449次閱讀

    聯(lián)想發(fā)布基于第五代AMD EPYC處理器服務(wù)器產(chǎn)品

    近日,聯(lián)想攜手AMD共同舉辦“異構(gòu)智算,穩(wěn)定高效——聯(lián)想算力基礎(chǔ)設(shè)施新品發(fā)布會”。本次發(fā)布會上,聯(lián)想重磅發(fā)布8款基于第五代AMD EPYC處理器服務(wù)器產(chǎn)品——聯(lián)想問天、ThinkSystem V3
    的頭像 發(fā)表于 12-16 16:23 ?890次閱讀

    面向科學(xué)計算,第五代英特爾至強可擴(kuò)展處理器優(yōu)勢何在

    與上一產(chǎn)品相比:第五代英特爾?至強?處理器的平均科學(xué)計算性能提升高達(dá)1.22倍,可以幫助企業(yè)顯著提升基礎(chǔ)設(shè)施的價值1;平均每瓦性能提升高達(dá)
    的頭像 發(fā)表于 12-07 10:56 ?1245次閱讀

    英特爾至強品牌新戰(zhàn)略發(fā)布

    品牌是企業(yè)使命和發(fā)展的象征,也承載著產(chǎn)品特質(zhì)和市場認(rèn)可。在英特爾GTC科技體驗中心的英特爾 至強 6 能效核處理器發(fā)布會上,英特爾公司全球副
    的頭像 發(fā)表于 10-12 10:13 ?864次閱讀

    英特爾發(fā)布至強6性能核處理器

    近日,英特爾正式推出了其全新的英特爾? 至強? 6性能核處理器(代號Granite Rapids),旨在為AI、數(shù)據(jù)分析、科學(xué)計算等計算密集
    的頭像 發(fā)表于 09-30 16:22 ?699次閱讀

    128核性能猛獸,劍指云數(shù)據(jù)中心算力升級!英特爾發(fā)布至強6性能核處理器

    9月26日,在全國五十多家媒體和多家合作伙伴的見證下,英特爾發(fā)布了英特爾至強6性能核處理器(代號Granite Rapids),這是繼今年6月份英特
    的頭像 發(fā)表于 09-29 07:53 ?8025次閱讀
    128核性能猛獸,劍指云數(shù)據(jù)中心算力升級!<b class='flag-5'>英特爾</b>發(fā)布<b class='flag-5'>至強</b>6性能核<b class='flag-5'>處理器</b>

    英特爾發(fā)布至強6處理器產(chǎn)品

    以“綠色向新,釋放新質(zhì)生產(chǎn)力”為主題的英特爾至強6能效核處理器新品發(fā)布會在北京舉行。會上,英特爾重磅推出首款配備能效核的英特爾
    的頭像 發(fā)表于 09-23 15:48 ?685次閱讀

    第五代AMD EPYC處理器預(yù)計下半年發(fā)布

    近日,在Computex 2024上,AMD董事會主席及首席執(zhí)行官Lisa Su博士向大家預(yù)覽了具有超強性能的下一 EPYC 處理器——第五代 AMD EPYC 處理器(代號“Tur
    的頭像 發(fā)表于 09-18 11:06 ?1008次閱讀

    開箱即用,AISBench測試展示英特爾至強處理器的卓越推理性能

    。 中國電子技術(shù)標(biāo)準(zhǔn)化研究院賽西實驗室依據(jù)國家標(biāo)準(zhǔn)《人工智能服務(wù)器系統(tǒng)性能測試規(guī)范》(征求意見稿)相關(guān)要求,使用AISBench?2.0測試工具,完成了第五代英特爾至強可擴(kuò)展
    的頭像 發(fā)表于 09-06 15:33 ?823次閱讀
    開箱即用,AISBench測試展示<b class='flag-5'>英特爾</b><b class='flag-5'>至強</b><b class='flag-5'>處理器</b>的卓越推理性能