一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

術(shù)業(yè)有專攻——AI系統(tǒng)主控CPU英特爾至強6新品處理器淺析

科技見聞網(wǎng) ? 來源:科技見聞網(wǎng) ? 作者:科技見聞網(wǎng) ? 2025-06-19 16:37 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

一、至強6與NVIDIA GPU協(xié)同的硬件基礎(chǔ)

wKgZO2hTzFKASm6xAAJa9Y5Fzc8048.png

AI 異構(gòu)計算架構(gòu)中,英特爾至強6處理器作為主控CPU可以與NVIDIA最新GPU 很好地協(xié)同。根據(jù)英偉達官網(wǎng)信息,目前其DGX B300系統(tǒng)選擇至強6776P作為唯一主控CPU,采用雙路配置,通過UPI總線實現(xiàn)CPU間互連。這8個GPU通過NVLink高速互連,是性能比較高端的DGX,為訓練等應用而設(shè)計。

作為主控CPU,它和GPU協(xié)同工作,而這個系統(tǒng)的性能受到諸多因素的影響,這里列出的是最主要的因素,包括I/O、核心性能、內(nèi)存(包括帶寬和容量)、CPU上的預處理或卸載(offload)能力、整體CPU系統(tǒng)的RAS,以及各種硬件的外形設(shè)計等。這些都會影響整個AI系統(tǒng)的端到端性能,因此AI系統(tǒng)通常比較復雜。

wKgZPGhTzFKAdWTCAAHjLwUKPi4936.png

這一設(shè)計的性能提升要點在于:

1.業(yè)界領(lǐng)先的I/O通道和內(nèi)存能力

AP平臺的雙路至強6最多可以提供192條PCIe 5.0通道,也就是可以每路提供96條通道,相比上一代提升20%,內(nèi)存通道也可以高達12個。直接匹配多GPU的高速接入需求,避免因通道不足導致的帶寬瓶頸。

在SP平臺上,英特爾還提供了一個差異化的產(chǎn)品,就是在單個CPU插槽上提供了更豐富的I/O資源(Rich I/O one socket),總共有136根的PCIe通道,持單插槽連接多塊加速卡與存儲設(shè)備,適用于邊緣端“預處理+推理”一體化場景。同時,其高帶寬內(nèi)存可容納更大模型參數(shù),提升訓練效率。在推理場景中,靈活的核心配置確保資源高效利用,滿足多樣化需求。

2.核心性能優(yōu)化

至強6區(qū)別于上一代產(chǎn)品的關(guān)鍵技術(shù)突破是Priority Core Turbo(PCT),其技術(shù)本質(zhì)是通過 Speed Select(SST)將單路CPU核心劃分為兩組:最多8個高頻核心(PCT 核心)與剩余低頻核心。在DGX B300場景中,這一技術(shù)直接服務于 “CPU 驅(qū)動 GPU” 的典型需求,實現(xiàn)高頻核心的精準調(diào)度:當 GPU 需要快速獲取預處理數(shù)據(jù)(如從內(nèi)存讀取原始數(shù)據(jù)并完成清洗、特征工程)時,8個PCT核心可睿頻至4.6GHz(傳統(tǒng)64核SKU最大睿頻為3.9GHz),相比全核睿頻(3.6GHz)提升28%。這一特性縮短了數(shù)據(jù)從CPU到GPU的傳輸延遲。

3.資源分配的靈活性

PCT核心數(shù)量可通過BIOS或 SST-TF工具動態(tài)配置,客戶可根據(jù)實際負載調(diào)整——客戶在使用時可以根據(jù)需要選擇8個、6個、4個或2個PCT核心。例如推理場景中若僅需4塊GPU工作,可配置4個PCT 核心對應驅(qū)動,避免資源浪費。與上一代 Max Turbo 技術(shù)的差異在于:PCT允許全核在線(無需半數(shù)核心休眠),且維持相同 TDP(350W)與散熱設(shè)計,確保硬件兼容性,降低客戶部署成本。

4.更強的內(nèi)存架構(gòu)兼容性

更高的內(nèi)存帶寬對于AI工作負載至關(guān)重要,因為AI的工作流程是一個完整的數(shù)據(jù)處理管道,而非單一環(huán)節(jié)。在這一過程中,CPU首先負責預處理,從內(nèi)存中讀取數(shù)據(jù)并進行初步處理,隨后將數(shù)據(jù)傳輸至GPU。比如,至強6支持8通道到12通道的DDR5-6400內(nèi)存,還支持MRDIMMs,能提供更高的30%帶寬。

在LLM的生成式推理(如文本續(xù)寫)中,自注意力機制需為每個已處理的Token生成并存儲鍵(Key)和值(Value)矩陣,即KV Cache。KV Cache避免了在解碼階段重復計算歷史Token的注意力狀態(tài),但會隨序列長度線性增長,占用大量GPU顯存,需要卸載到下一級存儲中。對于CXL內(nèi)存來說,有一個典型用例是KV Cache的卸載,通過用CXL內(nèi)存去替代SSD,這樣KV Cache的訪問速度顯著增快,從而提升了性能。

5.RAS和數(shù)據(jù)預處理

在企業(yè)級 AI 訓練場景中,系統(tǒng)可靠性直接影響算力利用率與TCO。至強6的RAS 體系覆蓋全硬件鏈路,可以通過RAS特性來可以提高I/O的穩(wěn)定性、內(nèi)存系統(tǒng)穩(wěn)定性、UPI鏈路穩(wěn)定性、CPU及平臺穩(wěn)定性。CPU卸載則是針對MoE(混合專家)模型的另一種優(yōu)化方式。目前市場上已有諸多關(guān)于通過AMX矩陣技術(shù)將部分MoE模型中的專家層卸載至至強處理器的案例。

wKgZO2hTzFOALNAwAAFdw-RiKn0376.png

二、為何是至強6776P?

NVIDIA DGX B300選擇的雙路至強 6776P 的核心價值在于業(yè)界領(lǐng)先的I/O能力、領(lǐng)先的內(nèi)存帶寬、大內(nèi)存容量、領(lǐng)先的RAS能力已經(jīng)為特定AI負載優(yōu)化的PCT產(chǎn)品。

其4.6GHz的睿頻能力顯著加速數(shù)據(jù)處理,PCT核心以4.6GHz頻率加速數(shù)據(jù)預處理(如文本分詞、圖像解碼),通過高速 PCIe 通道將數(shù)據(jù)傳輸至GPU,形成 “CPU 預處理→GPU 計算”的流水線作業(yè)。這款處理器擁有單路88條PCIe通道,雙路則達到176條。

英偉達選擇了2 DPC架構(gòu)(每顆CPU提供8通道內(nèi)存,每通道2個DIMM)進行配置,雙路系統(tǒng)可搭載32根DIMM,內(nèi)存最大容量達8TB。

綜述:開放生態(tài)的實際意義

至強6的核心優(yōu)勢在于開放性與兼容性??蛻粲布x擇自由,可以根據(jù)成本動態(tài)切換,避免被單一供應商鎖定。在軟件生態(tài)兼容層面,至強6也完全支持主流 AI 框架(如 TensorFlow、PyTorch)與云原生技術(shù),無需重新開發(fā)適配層,降低技術(shù)遷移成本。

從英偉達的選擇邏輯看,DGX B300 采用至強6應該并非單一性能導向,而是綜合考量了生態(tài)開放性、成本可控性與技術(shù)成熟度 —— 至強 6 作為量產(chǎn)級產(chǎn)品,其穩(wěn)定性與供應鏈可靠性已通過大規(guī)模數(shù)據(jù)中心驗證。

至強6在搭配NVIDIA GPU場景中的價值,本質(zhì)上源于其對“CPU 角色”的清晰定位:核心數(shù)量或睿頻頻率,都是圍繞 GPU 協(xié)同需求而定,根據(jù)用戶的不同需求,也可以選擇不同的CPU型號。在關(guān)鍵路徑(如高頻數(shù)據(jù)傳輸、大內(nèi)存容量、系統(tǒng)穩(wěn)定性)上,至強6可以實現(xiàn)精準優(yōu)化。對于企業(yè)客戶而言,這意味著在 AI 基礎(chǔ)設(shè)施建設(shè)中,可通過標準化硬件獲取可預期的性能提升,同時避免為冗余功能支付額外成本。這種 “需求導向型” 技術(shù)路線,或許正是其成為英偉達首選主控 CPU 的核心原因。
(來源:微型計算機)

審核編輯 黃宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 英特爾
    +關(guān)注

    關(guān)注

    61

    文章

    10196

    瀏覽量

    174722
  • cpu
    cpu
    +關(guān)注

    關(guān)注

    68

    文章

    11080

    瀏覽量

    217138
  • AI
    AI
    +關(guān)注

    關(guān)注

    88

    文章

    35167

    瀏覽量

    280105
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    主控CPU全能選手,英特爾至強6助力AI系統(tǒng)高效運轉(zhuǎn)

    有什么特殊之處呢? AI加速系統(tǒng)為何看重CPU主控能力? 作為造價極高的AI加速系統(tǒng),DGX B
    的頭像 發(fā)表于 06-27 11:44 ?185次閱讀
    <b class='flag-5'>主控</b><b class='flag-5'>CPU</b>全能選手,<b class='flag-5'>英特爾</b><b class='flag-5'>至強</b><b class='flag-5'>6</b>助力<b class='flag-5'>AI</b><b class='flag-5'>系統(tǒng)</b>高效運轉(zhuǎn)

    1.9倍性能提升!英特爾至強6在MLPerf基準測試中表現(xiàn)卓越

    關(guān)鍵項目中,性能表現(xiàn)卓越。測試結(jié)果顯示,相較于上一代產(chǎn)品,該處理器AI性能實現(xiàn)了高達1.9倍的顯著提升,這也充分顯示了至強6處理器作為現(xiàn)代
    的頭像 發(fā)表于 04-07 10:58 ?280次閱讀

    英特爾至強6處理器助力數(shù)據(jù)中心整合升級

    繼去年9月重磅推出英特爾 至強 6900性能核處理器后,英特爾進一步擴充至強6產(chǎn)品家族,于近期發(fā)
    的頭像 發(fā)表于 03-13 17:36 ?892次閱讀

    英特爾至強6:如何煉就數(shù)據(jù)中心“全能型選手”

    面對數(shù)據(jù)中心領(lǐng)域日益激烈的競爭,英特爾緊抓核心產(chǎn)品,繼去年推出128核的至強6900P之后,近期又添“新兵”——至強6700P和至強6500P,進一步豐富了
    的頭像 發(fā)表于 03-13 14:57 ?329次閱讀
    <b class='flag-5'>英特爾</b><b class='flag-5'>至強</b><b class='flag-5'>6</b>:如何煉就數(shù)據(jù)中心“全能型選手”

    英特爾至強6再推新品!打造最強AI“機頭引擎”

    的產(chǎn)品矩陣,很好地滿足市場的多樣化需求;另一方面,憑借卓越的 AI 性能提升,英特爾為數(shù)據(jù)中心提供了性能強勁的機頭節(jié)點 CPU,助力企業(yè)在數(shù)字時代的浪潮中穩(wěn)步前行。 事實上,去年9月,英特爾
    的頭像 發(fā)表于 03-13 14:57 ?343次閱讀

    英特爾展示基于至強6處理器的基礎(chǔ)網(wǎng)絡設(shè)施

    ; 與5G核心網(wǎng)解決方案合作伙伴的深度合作,加快了英特爾至強6能效核處理器在整個生態(tài)系統(tǒng)中的應用; 基于5G核心網(wǎng)工作負載的獨立驗證確認了
    的頭像 發(fā)表于 03-08 09:24 ?536次閱讀

    MWC 2025:英特爾展示基于至強6處理器的基礎(chǔ)網(wǎng)絡設(shè)施

    3.2倍3; 與5G核心網(wǎng)解決方案合作伙伴的深度合作,加快了英特爾?至強?6能效核處理器在整個生態(tài)系統(tǒng)中的應用; 基于5G核心網(wǎng)工作負載的獨
    發(fā)表于 03-03 15:52 ?246次閱讀
    MWC 2025:<b class='flag-5'>英特爾</b>展示基于<b class='flag-5'>至強</b><b class='flag-5'>6</b><b class='flag-5'>處理器</b>的基礎(chǔ)網(wǎng)絡設(shè)施

    全新英特爾至強6處理器來襲,現(xiàn)代數(shù)據(jù)中心的性能與能效平衡“大師”

    英特爾進一步豐富至強6處理器產(chǎn)品組合,為行業(yè)提供多款滿足廣泛工作負載的CPU選擇。 新聞亮點 ·?英特爾
    的頭像 發(fā)表于 02-25 17:39 ?411次閱讀

    英特爾至強品牌新戰(zhàn)略發(fā)布

    品牌是企業(yè)使命和發(fā)展的象征,也承載著產(chǎn)品特質(zhì)和市場認可。在英特爾GTC科技體驗中心的英特爾 至強 6 能效核處理器發(fā)布會上,
    的頭像 發(fā)表于 10-12 10:13 ?871次閱讀

    英特爾發(fā)布至強6性能核處理器

    近日,英特爾正式推出了其全新的英特爾? 至強? 6性能核處理器(代號Granite Rapids),旨在為
    的頭像 發(fā)表于 09-30 16:22 ?704次閱讀

    128核性能猛獸,劍指云數(shù)據(jù)中心算力升級!英特爾發(fā)布至強6性能核處理器

    9月26日,在全國五十多家媒體和多家合作伙伴的見證下,英特爾發(fā)布了英特爾至強6性能核處理器(代號Granite Rapids),這是繼今年
    的頭像 發(fā)表于 09-29 07:53 ?8051次閱讀
    128核性能猛獸,劍指云數(shù)據(jù)中心算力升級!<b class='flag-5'>英特爾</b>發(fā)布<b class='flag-5'>至強</b><b class='flag-5'>6</b>性能核<b class='flag-5'>處理器</b>

    英特爾發(fā)布至強6性能核處理器,攜手生態(tài)加速數(shù)據(jù)中心算力升級

    9月26日,英特爾正式發(fā)布英特爾? 至強? 6性能核處理器(代號Granite Rapids),為AI
    的頭像 發(fā)表于 09-27 10:54 ?7352次閱讀
    <b class='flag-5'>英特爾</b>發(fā)布<b class='flag-5'>至強</b><b class='flag-5'>6</b>性能核<b class='flag-5'>處理器</b>,攜手生態(tài)加速數(shù)據(jù)中心算力升級

    英特爾發(fā)布至強6處理器產(chǎn)品

    以“綠色向新,釋放新質(zhì)生產(chǎn)力”為主題的英特爾至強6能效核處理器新品發(fā)布會在北京舉行。會上,英特爾
    的頭像 發(fā)表于 09-23 15:48 ?686次閱讀

    開箱即用,AISBench測試展示英特爾至強處理器的卓越推理性能

    。 中國電子技術(shù)標準化研究院賽西實驗室依據(jù)國家標準《人工智能服務系統(tǒng)性能測試規(guī)范》(征求意見稿)相關(guān)要求,使用AISBench?2.0測試工具,完成了第五代英特爾至強可擴展
    的頭像 發(fā)表于 09-06 15:33 ?828次閱讀
    開箱即用,AISBench測試展示<b class='flag-5'>英特爾</b><b class='flag-5'>至強</b><b class='flag-5'>處理器</b>的卓越推理性能

    英特爾至強6系列處理器:全能核心,滿足各種工作需求

    英特爾在去年Hot Chips大會上宣布,全新至強6系列處理器分為全能效核與全性能核兩大產(chǎn)品線,分別以“Granite Rapids”和“Sierra Forest”為代號。前者
    的頭像 發(fā)表于 08-30 15:15 ?1020次閱讀