一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

AI加持下的數(shù)據(jù)中心,需要怎樣的高速接口技術(shù)?

花茶晶晶 ? 來源:電子發(fā)燒友網(wǎng)原創(chuàng) ? 作者:黃晶晶 ? 2024-01-08 09:15 ? 次閱讀
(電子發(fā)燒友網(wǎng) 文/黃晶晶)無疑生成式AI的火熱帶動了互聯(lián)網(wǎng)廠商、運營商、云服務(wù)商以及各類應(yīng)用方等對數(shù)據(jù)中心、AI服務(wù)器的大力投入。同時,像中國的“東數(shù)西算”工程正構(gòu)筑著堅實的算力基建。為了適應(yīng)大數(shù)據(jù)、人工智能的發(fā)展,必須要解決如何增強算力、存力和運力的問題。那么高速的數(shù)據(jù)傳輸是不可缺少的核心環(huán)節(jié)。在此背景下,我們需要前瞻布局哪些數(shù)據(jù)傳輸?shù)?a target="_blank">接口技術(shù)來適應(yīng)發(fā)展呢?最近,Rambus 解決方案營銷高級總監(jiān)Tim Messegee接受采訪,分享了他對于數(shù)據(jù)中心高速接口技術(shù)和市場的洞見。
圖:Rambus 解決方案營銷高級總監(jiān)Tim Messegee

Tim Messegee表示,總體上,新數(shù)據(jù)中心的架構(gòu)設(shè)計應(yīng)考慮到性能、可擴展性、可靠性和安全性,滿足生成式AI和大數(shù)據(jù)應(yīng)用的具體需求。新數(shù)據(jù)中心首先需要配備高性能計算(HPC)基礎(chǔ)設(shè)施來滿足生成式AI和大數(shù)據(jù)應(yīng)用的密集計算需求,比如使用功能強大的處理器、GPU、內(nèi)存、網(wǎng)絡(luò)、專用硬件加速器等高效處理大量數(shù)據(jù)并執(zhí)行復(fù)雜計算。

新數(shù)據(jù)中心架構(gòu)的設(shè)計應(yīng)該使內(nèi)存、存儲等易于擴展。例如,CXL技術(shù)可以幫助建立內(nèi)存池,從架構(gòu)上將CPU和內(nèi)存分離,不僅能夠共享內(nèi)存,還能在性能需求日益增加的情況下更加輕松地增加內(nèi)存。

突破數(shù)據(jù)傳輸?shù)钠款i

業(yè)界一直都存在“內(nèi)存墻”的問題,其根源還是數(shù)據(jù)傳輸?shù)乃俾市阅芷款i。Tim Messegee說道,與“木桶定律”中的例子一樣,限制數(shù)據(jù)中心數(shù)據(jù)傳輸速率的元素不止一個,而是所有相關(guān)元素的性能。顯然,解決這一問題需要強大的 CPU、高速內(nèi)存、高帶寬網(wǎng)絡(luò)以及許多其他方面的支持。

實際上大家都不希望自己是最短板的那一塊。而以Rambus來看,其擅長的是提供先進內(nèi)存接口芯片和接口IP解決方案幫助滿足數(shù)據(jù)中心對帶寬不斷增長的需求。對此,Tim Messegee進行了解析。

具體來看,DDR5 DIMM芯片組:Rambus DDR5內(nèi)存接口芯片組由 DDR5 RCD、SPD Hub 和溫度傳感器組成,專為滿足最新一代DDR5內(nèi)存系統(tǒng)的大容量、高帶寬性能要求而量身定制。這些芯片使服務(wù)器和客戶端計算系統(tǒng)能夠處理最苛刻的工作負載和應(yīng)用。

CXL技術(shù):CXL可使數(shù)據(jù)中心從原來每臺服務(wù)器擁有專用的處理和內(nèi)存以及網(wǎng)絡(luò)和加速器等其他資源的模式,轉(zhuǎn)變?yōu)槭褂霉蚕碣Y源池的分解模式,共享資源池可根據(jù)特定工作負載的需求進行高效組合。

PCIe 6接口子系統(tǒng)IP:PCIe 接口是在 CPU、GPU、FPGA 和特定工作負載加速器等不同計算節(jié)點之間以高帶寬和低延遲傳輸數(shù)據(jù)的關(guān)鍵骨干。Rambus PCIe 6解決方案支持下一代數(shù)據(jù)中心的性能要求,具有延遲、功耗、面積和安全性方面的優(yōu)勢。

HBM內(nèi)存控制器:HBM是一種高性能內(nèi)存標準,具有功耗低、外形小的特點。Rambus HBM 3.0和2E/2控制器可為AI/ML、圖形和HPC應(yīng)用提供高帶寬、低延遲的內(nèi)存性能。

新的接口技術(shù)何時落地

以上列舉了幾種應(yīng)用于數(shù)據(jù)中心的先進的接口技術(shù),包括DDR5、PCIe 6.0、HBM、CXL等。然而它們有各自的應(yīng)用進程。

首先是DDR5。Tim Messegee表示,DDR5內(nèi)存已于2021年進入市場。我們現(xiàn)在看到服務(wù)器和PC市場都在使用DDR5內(nèi)存。根據(jù)IDC的預(yù)測,DDR5的跨越點,即DDR5位出貨量超過DDR4位出貨量的時刻將在2023年底出現(xiàn)。隨著時間的推移,DDR5有望在數(shù)據(jù)中心和消費市場得到更廣泛的應(yīng)用。

其次,PCIe在服務(wù)器和PC之外也得到了廣泛應(yīng)用,其規(guī)模經(jīng)濟效益使其對物聯(lián)網(wǎng)、汽車等領(lǐng)域以數(shù)據(jù)為中心的應(yīng)用極具吸引力。盡管如此,PCIe 6.0的初期部署將針對需要盡可能高帶寬的應(yīng)用,這些應(yīng)用都是數(shù)據(jù)中心的核心,如AI/ML、HPC、云計算、網(wǎng)絡(luò)等。Tim Messegee預(yù)計第一代PCIe 6.0系統(tǒng)將在2026年問世。

再者,HBM正在成為超級計算機的首選內(nèi)存。市場對AI/ML的需求推動了 HBM 在數(shù)據(jù)中心的廣泛應(yīng)用。如今,英偉達推出的H200 GPU以及GH200超級芯片開始配備141GB HBM3E。HBM的發(fā)展大致以兩年為一個周期,技術(shù)還在不斷演進當中。

此外,隨著CXL標準從1.0發(fā)展到 3.0,行業(yè)頭部廠商正在積極支持CXL。Tim Messegee說,要真正在市場上得到廣泛應(yīng)用,可能還需要一段時間。可以肯定的是,由于CXL的特性,最早采用這項技術(shù)的將是那些需要最高帶寬、最低延遲和多設(shè)備一致性的應(yīng)用。目前,我們預(yù)計CXL將于2026年在數(shù)據(jù)中心得到廣泛應(yīng)用。

誠然,特定技術(shù)的應(yīng)用周期取決于多種因素,包括市場需求、軟硬件生態(tài)、成本和性能優(yōu)勢等。Tim Messegee指出,一般來說,內(nèi)存和總線技術(shù)升級通常需要更長的時間,這是因為它們需要與整個生態(tài)兼容,而且所有相互連接的軟硬件元素都需要時間來驗證和檢驗。因此,一項技術(shù)的采用情況會因技術(shù)特性、復(fù)雜程度和市場需求而異??傊?,隨著數(shù)據(jù)中心建設(shè)的加速,DDR5、PCIe 6.0、HBM和CXL等高速連接技術(shù)將在未來幾年繼續(xù)發(fā)展和普及,但其采用率可能會因技術(shù)和細分市場的不同而有所差異。

觀察市場的反饋,Tim Messegee看到的趨勢是,許多為數(shù)據(jù)中心開發(fā)的技術(shù)正在向客戶端擴散。AI推理向邊緣以及AI賦能的客戶端和終端系統(tǒng)轉(zhuǎn)移,這一趨勢將繼續(xù)加速。我們的IP解決方案可以集成到客戶端系統(tǒng)的芯片中,我們的產(chǎn)品路線圖上有支持未來客戶端平臺的Rambus芯片解決方案。

小結(jié):

AI大模型的參數(shù)量越來越龐大,內(nèi)容形式也越來越豐富,隨著數(shù)據(jù)中心工作負載的增加,DDR、HBM、PCIe和CXL等內(nèi)存技術(shù)將繼續(xù)為數(shù)據(jù)中心提供更高容量、更低延遲和更高能效的數(shù)據(jù)傳輸速率以滿足不斷增長的算力需求。同時,Rambus也希望通過內(nèi)存解決方案的不斷改進總體上為提高數(shù)據(jù)中心的整體能效帶來真正的機會。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • IP
    IP
    +關(guān)注

    關(guān)注

    5

    文章

    1767

    瀏覽量

    151003
  • 數(shù)據(jù)中心
    +關(guān)注

    關(guān)注

    16

    文章

    5066

    瀏覽量

    73050
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    33554

    瀏覽量

    274195
  • 高速接口
    +關(guān)注

    關(guān)注

    1

    文章

    55

    瀏覽量

    14907
收藏 人收藏

    評論

    相關(guān)推薦

    適用于數(shù)據(jù)中心AI時代的800G網(wǎng)絡(luò)

    隨著人工智能(AI技術(shù)的迅猛發(fā)展,數(shù)據(jù)中心面臨著前所未有的計算和網(wǎng)絡(luò)壓力。從大語言模型(LLM)訓練到生成式AI應(yīng)用,海量數(shù)據(jù)處理需求推動
    發(fā)表于 03-25 17:35

    華為全新升級星河AI數(shù)據(jù)中心網(wǎng)絡(luò)

    在華為中國合作伙伴大會2025期間,以 “星河AI數(shù)據(jù)中心網(wǎng)絡(luò),賦AI時代新動能”為主題的數(shù)據(jù)中心網(wǎng)絡(luò)分論壇圓滿落幕。本次論壇匯聚了來自全國的300多位客戶和伙伴,共同探討
    的頭像 發(fā)表于 03-24 14:46 ?286次閱讀

    優(yōu)化800G數(shù)據(jù)中心高速線纜、有源光纜和光纖跳線解決方案

    隨著技術(shù)的飛速發(fā)展,數(shù)據(jù)中心正在從100G和400G演進到800G時代,對高速數(shù)據(jù)傳輸?shù)男枨笈c日俱增。因此,選擇高效且可靠的布線解決方案對于800G
    發(fā)表于 03-24 14:20

    Cadence顛覆AI數(shù)據(jù)中心設(shè)計

    ,當今新型數(shù)據(jù)中心AI 工廠)的建設(shè)正面臨著如何處理其巨大的功耗和散熱問題的嚴峻挑戰(zhàn),數(shù)字孿生技術(shù)在這場變革中扮演著至關(guān)重要的角色。
    的頭像 發(fā)表于 03-21 15:43 ?270次閱讀

    韓國將建全球最大AI數(shù)據(jù)中心

    據(jù)最新報道,韓國即將啟動一項雄心勃勃的計劃——建設(shè)全球最大的人工智能(AI)數(shù)據(jù)中心。該數(shù)據(jù)中心不僅在規(guī)模上令人矚目,更在技術(shù)和投資上展現(xiàn)了韓國的強大實力。 據(jù)悉,該
    的頭像 發(fā)表于 02-20 09:24 ?424次閱讀

    高速線纜在數(shù)據(jù)中心的應(yīng)用和解決方案

    隨著數(shù)據(jù)傳輸需求的不斷增加,高速互連技術(shù)變得越來越重要。目前在業(yè)界引起廣泛關(guān)注的超大規(guī)模AI數(shù)據(jù)中心就離不開各類
    的頭像 發(fā)表于 01-08 11:24 ?860次閱讀
    <b class='flag-5'>高速</b>線纜在<b class='flag-5'>數(shù)據(jù)中心</b>的應(yīng)用和解決方案

    Meta AI數(shù)據(jù)中心網(wǎng)絡(luò)用了哪家的芯片

    ? 在Meta,我們相信開放的硬件會推動創(chuàng)新。在當今世界,越來越多的數(shù)據(jù)中心基礎(chǔ)設(shè)施致力于支持新興的AI技術(shù),開放硬件在協(xié)助分解方面發(fā)揮著重要作用。通過將傳統(tǒng)數(shù)據(jù)中心
    的頭像 發(fā)表于 11-25 10:05 ?1229次閱讀
    Meta <b class='flag-5'>AI</b><b class='flag-5'>數(shù)據(jù)中心</b>網(wǎng)絡(luò)用了哪家的芯片

    AI數(shù)據(jù)中心的能源危機,需要更高效的PSU

    電子發(fā)燒友網(wǎng)報道(文/梁浩斌)數(shù)據(jù)中心在近年AI的浪潮中得到極大的發(fā)展,算力需求的膨脹帶動全球數(shù)據(jù)中心建設(shè)規(guī)模呈現(xiàn)爆發(fā)式增長。而在數(shù)據(jù)中心數(shù)量增長的同時,也面臨著能源問題。 ? 如今大
    的頭像 發(fā)表于 11-04 02:21 ?6547次閱讀
    <b class='flag-5'>AI</b><b class='flag-5'>數(shù)據(jù)中心</b>的能源危機,<b class='flag-5'>需要</b>更高效的PSU

    Credo新品發(fā)布!AEC高速互連如何賦能數(shù)據(jù)中心?

    全球數(shù)據(jù)中心的井噴式發(fā)展,何種線纜能高效傳輸龐大的數(shù)據(jù)?有源電纜AEC能否成為高速互連技術(shù)新突破口? 2024年,我國發(fā)布了一系列關(guān)于
    的頭像 發(fā)表于 10-17 11:09 ?562次閱讀

    數(shù)據(jù)中心產(chǎn)品通常包括哪些

    應(yīng)用在數(shù)據(jù)中心的分立器件產(chǎn)品而言,這是巨大的市場機遇。在信息時代數(shù)據(jù)中心價值會越來越高,可靠性能也需要進一步加強。好的分立器件才能更好支持數(shù)據(jù)中
    的頭像 發(fā)表于 10-11 11:12 ?1215次閱讀
    <b class='flag-5'>數(shù)據(jù)中心</b>產(chǎn)品通常包括哪些

    怎樣保障數(shù)據(jù)中心不間斷電源不斷電 提供可靠安全的供配電#數(shù)據(jù)中心

    數(shù)據(jù)中心配電系統(tǒng)
    安科瑞王金晶
    發(fā)布于 :2024年08月29日 14:51:36

    數(shù)據(jù)中心AI時代轉(zhuǎn)型:挑戰(zhàn)與機遇

    隨著人工智能(AI)的迅速發(fā)展和廣泛應(yīng)用,數(shù)據(jù)中心作為AI技術(shù)的基石,也面臨著前所未有的挑戰(zhàn)和機遇。為了滿足AI的高性能和低延遲要求,
    的頭像 發(fā)表于 07-24 08:28 ?716次閱讀
    <b class='flag-5'>數(shù)據(jù)中心</b>的<b class='flag-5'>AI</b>時代轉(zhuǎn)型:挑戰(zhàn)與機遇

    AI時代,我們需要怎樣數(shù)據(jù)中心?AI重新定義數(shù)據(jù)中心

    超過60%的中國企業(yè)計劃在未來12至24個月內(nèi)部署生成式人工智能。AI、模型的構(gòu)建,將顛覆數(shù)據(jù)中心基礎(chǔ)設(shè)施的建設(shè)、運維和運營。一個全新的數(shù)據(jù)中心智能化時代已經(jīng)拉開序幕。
    發(fā)表于 07-16 11:33 ?960次閱讀
    <b class='flag-5'>AI</b>時代,我們<b class='flag-5'>需要</b><b class='flag-5'>怎樣</b>的<b class='flag-5'>數(shù)據(jù)中心</b>?<b class='flag-5'>AI</b>重新定義<b class='flag-5'>數(shù)據(jù)中心</b>

    數(shù)據(jù)中心液冷需求、技術(shù)及實際應(yīng)用

    夏日炎炎,數(shù)據(jù)中心制冷技術(shù)全新升級,液冷散熱,讓服務(wù)器清涼一夏。本文將帶您一起探索數(shù)據(jù)中心液冷需求、技術(shù)及實際應(yīng)用。 1 數(shù)據(jù)中心液冷需求
    的頭像 發(fā)表于 06-19 11:12 ?1754次閱讀
    <b class='flag-5'>數(shù)據(jù)中心</b>液冷需求、<b class='flag-5'>技術(shù)</b>及實際應(yīng)用

    HNS 2024:星河AI數(shù)據(jù)中心網(wǎng)絡(luò),賦AI時代新動能

    華為數(shù)據(jù)通信創(chuàng)新峰會2024在巴庫隆重舉辦,在“星河AI數(shù)據(jù)中心網(wǎng)絡(luò),賦AI時代新動能”主題論壇中,華為面向中東中亞地區(qū)發(fā)布星河AI
    的頭像 發(fā)表于 05-15 09:15 ?864次閱讀
    HNS 2024:星河<b class='flag-5'>AI</b><b class='flag-5'>數(shù)據(jù)中心</b>網(wǎng)絡(luò),賦<b class='flag-5'>AI</b>時代新動能