一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

英偉達為中國“降規(guī)”:H800變身為H20,技術(shù)如何實現(xiàn)、性能夠用嗎?

sakobpqhz ? 來源:算力基建 ? 2023-11-30 16:37 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

10月17日,美國更新出口管制標準,要求先進芯片性能超過特定閾值,即需要申請出口許可。在嚴苛的限制條件下,英偉達針對中國市場的特供版H800、A800兩款芯片也面臨禁售,以下為美國商務(wù)部對先進芯片性能的劃定標準:

●總算力之和≥4800TOPS,

●總算力≥1600,且性能密度≥5.92;

●2400≤總算力<4800,且1.6<性能密度<5.92;

●總算力≥1600,且3.2≤性能密度<5.92。

面對新的管制條例,英偉達給了兩個解法:其一,溝通美國商務(wù)部申請許可,給特定的中國客戶“開白”;其二,針對新的管制條例,再次定制全新的特供版本。

剛剛舉辦的第三財季電話會議上,英偉達首席財務(wù)官科萊特·克雷斯確認了這一消息??死姿贡硎荆ミ_正在與中東和中國的一些客戶合作,以獲得美國政府銷售高性能產(chǎn)品的許可。此外,英偉達正試圖開發(fā)符合政府政策且不需要許可證的新數(shù)據(jù)中心產(chǎn)品。

01.H800是如何“閹割”成為H20?

英偉達試圖開發(fā)的新的特供版,即業(yè)內(nèi)盛傳的H20、L20等產(chǎn)品,最新消息顯示,相關(guān)產(chǎn)品的上市計劃已經(jīng)延后至2024年第一季度。

問題在于,H20等全新特供芯片的研發(fā)、設(shè)計、生產(chǎn),完全跳出了常規(guī)芯片的節(jié)奏,英偉達是如何在短時間內(nèi)拿出這套特供解決方案?

它的答案就是我們這篇文章要討論的關(guān)鍵問題之一:后道點斷生產(chǎn)工藝,用大家更為常用的詞匯總結(jié)即——閹割。

fc099968-8f2d-11ee-939d-92fbcf53809c.jpg

HGXH20-L20PCIe-L2PCIe-產(chǎn)品規(guī)格

按正常的設(shè)計、生產(chǎn)周期和產(chǎn)品發(fā)布節(jié)奏來推斷,特供中國市場的H20/ L20等型號的芯片在這個時間節(jié)點發(fā)布,不太可能是重做光罩、重新投片的產(chǎn)物,一個相對合理的推論——即它們是通過半導體后道的物理點斷工藝的改造+再封裝,進而推出的新SKUs。

點斷工藝是半導體制造的后道工序(BEOL)中的改造方法,可以在無需重做光罩的前提下使用一些管/線修補工藝,包括表面激光點斷、CoWoS層面點斷,甚至通過隧道鏡手工雕線。

fc193cec-8f2d-11ee-939d-92fbcf53809c.png

芯片制造主要流程,來源:東吳證券

可以假定一下這樣的場景,代工英偉達H800的臺積電南科Fab18A、臺中Fab15B和臺中先進封裝5廠的潔凈室里,此前降規(guī)生產(chǎn)的幾批次裸片,還沒來得及切割、鍍上金屬線和電極,還未封裝成H800和L40S,轉(zhuǎn)而通過后道點斷生產(chǎn)工藝再封裝成H20、L20。

02.表面激光點斷是半導體制造傳統(tǒng)藝能

行業(yè)慣例來說,一顆數(shù)字邏輯芯片的緩存大小(CacheSize)、底層物理互連(PHYchannels)都可以通過在后道封測環(huán)節(jié)重修/點斷做失效屏蔽處理的,尤其是針對低分數(shù)裸片的改造方法算是幾十年的傳統(tǒng)藝能,例如早期的奔騰、賽揚處理器的重要區(qū)別之一就是點斷緩存。

倘若是局部微小部分,曾經(jīng)可以手工完成(相當于微雕);面積稍大的部分,可以重新設(shè)計Layout預(yù)留點斷位置,再由機器完成點斷失效。

fc2315f0-8f2d-11ee-939d-92fbcf53809c.png

一種內(nèi)置數(shù)字顯示的溫度傳感器設(shè)計版圖 實操上,通常的晶圓廠都會配置專業(yè)設(shè)備,由激光直接在裸片上切割線路/溝槽,而在亞利桑那錢德勒市的Intel Fab42工廠里,還有直接在專用隧道鏡下面手工雕刻晶體管的設(shè)備,宣稱是原子尺度的,不同于尋常的掃描隧道顯微鏡,幾年前Intel有個宣傳視頻,提到這臺設(shè)備,據(jù)傳全球持證的操作手不超過14人。 其實在平面晶體管以前,顯微鏡手雕不算是高難度動作,但進入FinFET以后,由于垂直方向的3D柵極結(jié)構(gòu),手雕設(shè)備的代價和操作員就變得遙不可及了。 具體到H20/L20,這兩款特供產(chǎn)品,是如何通過H800、L40S降規(guī)而來?可以先看看相關(guān)參數(shù): H20:對應(yīng)H100/800系列,Hopper架構(gòu)(HBM3、2.5D CoWoS封裝、NVLink) L20:對應(yīng)L40S系列,Ada Lovelace架構(gòu)(GDDR6,2D InFO封裝,PCIe Gen4)

*注:固件相應(yīng)修改;

回顧H100/H800相同架構(gòu)之間比較關(guān)鍵的底層物理互連(SerDes PHY)的差異,H100降規(guī)閹割成H800,可以通過局部物理點斷失效處理來實現(xiàn);但相比之下,H20雖然與前面兩款產(chǎn)品同構(gòu),但推測割掉的Dark Si面積可能較大,不確定常規(guī)點斷操作是否不值得,也許需要重新做Layout。

但是除了底層物理層互連(SerDes PHY)的區(qū)別,還有雙精度浮點計算(FP64)單元面積、張量核(用于矩陣、卷積類計算任務(wù))單元面積的區(qū)別,這部分不好定論,但可以推測是類似利用物理冗余設(shè)計并加以屏蔽的操作,畢竟如今的設(shè)計方法學都是推動模塊化的,流片后的測試原本就會有70分 die與90分 die的區(qū)別,以及GPU芯片上也不止一個FP64,局部操作物理點斷失效也是合理的。

03.設(shè)計冗余為點斷創(chuàng)造條件,也是大廠基操

舉個例子:A、如今市面仍可見的Intel F系列CPU,就是點斷顯核的70分die;B、Apple Si的前兩代,官宣8核NPU,實際有9個,就是設(shè)計冗余。 以上這些,在晶圓制造工序中也算是基本操作,特別是中試廠/線,Alpha - Beta流片的過渡期間,有小錯就會直接手改,不會返回修改掩膜重新流片的。 從芯片設(shè)計者的角度來看,設(shè)計冗余度是在芯片開發(fā)流程中原本存在的,因為前道光刻過程是強調(diào)高良率的,具體到失效晶體管數(shù),測試環(huán)節(jié)判斷模塊級別的良率,壞點可以直接電路割斷,后續(xù)引線、封蓋工藝流程都不變。 例如3年前,Intel曾向市場推出過不帶顯核的F系列CPU,就是物理降規(guī)/閹割的產(chǎn)物,點斷顯核,重新封裝銷售。但是該款芯片偶爾耗電巨大,經(jīng)用戶投訴,建環(huán)境驗證后發(fā)現(xiàn)就是原本通過物理點斷失效的顯核在接電之后不受控制而導致的莫名電源故障。 這個案例反映的情況就是我們上文所講的,同一條流水線,經(jīng)過點斷失效的芯片,后續(xù)的導線/引腳和封裝過程不變,可以繼續(xù)銷售。尤其早期Intel 10nm的良率很低,積壓很多這樣的低分片,才會把顯核失效的芯片加印F標繼續(xù)銷售。 如今這個“冗余度”可能有很大空間,畢竟H100已然是814平方毫米的大芯片,幾乎接近光罩尺寸邊緣(26mm*33mm=858mm2)。而如今發(fā)布的H20降規(guī)型號,大概是H100 15%的性能,但是其物料成本幾近相同。

04.封裝層面點斷可操作性、經(jīng)濟性更好

除了在邏輯芯片表面的激光點斷工藝之外,還有針對某些特殊位置的點斷要求,比如CoWoS中介層的點斷。 CoWoS作為臺積電的2.5D封裝方案,可以使得多顆芯片封裝到一起,互連和內(nèi)存等器件均通過硅中介層互聯(lián),達到了封裝體積小,功耗低,引腳少的效果。 相比表面激光點斷,在CoWoS的前道部分——即CoW部分是硅通孔和中介層——在該層面操作點斷,做差異化,反而更經(jīng)濟,也更容易保證良率。因為算力邏輯芯片和I/O芯片是分列的,可以屏蔽底層物理互連的通道,也可以縮減HBM3內(nèi)存性能,而且在硅中介層修改差異化更容易,相比全部在邏輯芯片上修改的代價更低,因為中介層上操作的線寬精度可以較低,甚至點斷最上面那層金屬的線寬即可。 但是,CoWoS中介層上面是只能夠屏蔽物理互連和HBM內(nèi)存,但是無法屏蔽FP64單元、Tensor core單元這樣的計算邏輯芯片面積,這就需要補充用到前文所說的在邏輯die表面點斷失效的方法。 另外,正常情況下,物理點斷失效的電路是不能從外部第三方察覺的,且工藝不可逆;尤其如今芯片都是十幾層金屬,裸片的表面修改了,上面金屬層是看不穿的,除非是用到反工程的透視掃描。 綜上,我們看到進一步特供/降規(guī)生產(chǎn)的H20/L20等型號,可以判斷是H800和L40S的裸片的后道物理點斷工序的改造產(chǎn)物,同時重新封裝、重新修改固件,成為新的SKUs。 回想Nvidia之前積壓的、原本銷往中國的50億美元的GPU產(chǎn)品尚未交付,如今返廠做了后道改造才得以如此快速的發(fā)布新的SKU,那么猜測國內(nèi)廠商的50億美元訂單也許會轉(zhuǎn)換為這三個型號。

05.“閹割”后的H20的能與不能

fc3417f6-8f2d-11ee-939d-92fbcf53809c.png

核心AI芯片相關(guān)參數(shù)及出口管制情況,APPLIES對應(yīng)受管制,DOESN'TAPPLY對應(yīng)不受管制

如下是針對H20與H100/H800/A100的產(chǎn)品橫向比較,比較維度包括“產(chǎn)品規(guī)格、單卡和集群算力效能、物料成本、定價體系”等四個方面:

fc4a96e8-8f2d-11ee-939d-92fbcf53809c.png

集群綜合算力方面,H100/H800目前是AIDC算力集群的頂流部署;其中H100理論擴容極限是5萬張卡集群,最多可達10萬P算力;H800最大集群是2-3萬張卡,合計4萬P算力;A100最大集群是1.6萬張卡,合計9600P算力。 然而對于H20,其集群的理論擴容極限是5萬張卡,以單卡算力0.148P(FP16/BF16)計算,集群合計提供7400P算力,遠低于H100/H800/A100。

同時,基于算力與通信均衡度預(yù)估,5萬張H20合理的整體算力中位數(shù)約為3000P左右,倘若H20面對千億級參數(shù)模型訓練,恐怕捉襟見肘,需要集群網(wǎng)絡(luò)拓撲有更大的外延擴展。

但從HGX H20的硬件參數(shù)綜合來看,幾乎把美國商務(wù)部性能密度禁令中嚴格限制的算力門檻以外的指標全部拉滿,顯然是定位為一顆訓推通用的處理器。

只是針對LLM大模型業(yè)態(tài)而言,實際使用H20做千卡分布式訓練,雖然大部分有效利用時間都是GPU上的矩陣乘加計算的時間,通信和訪存的時間占比縮小,但畢竟單卡算力規(guī)格較低,超限度的千卡集群擴展反而會使其費效比降低,H20更適用于垂直類模型的訓練/推理,不容易滿足千億參數(shù)級LLM的訓練需求。

需要注意的是,選用更多低規(guī)格、更廉價的GPU并聯(lián)集群,試圖追平或是超過一臺超高算力的GH200效能,這是一種悖論。

因為這種方案的掣肘很多,環(huán)境搭建和運行的ROI并不高。因為在算力利用率、并行策略的執(zhí)行、集群綜合能耗、硬件成本和組網(wǎng)成本等等方面都不可能獲得理想方案;H20集群與A800集群效能可以同比,對比H100/GH200集群效能則是不實際的。

H20的基本規(guī)格方面,算力水平約等于50%A100和15%H100,單卡算力是0.148P(FP16)/0.296P(Int8),900GB/S NVLink,6顆HBM3e(顯存的物料與H100 SXM版本配置相同,即6*16GB=96GB容量),die size同樣都是814mm2 。

考慮到H100GPU單卡物料成本中的HBM顆粒成本獨占55%-60%,整卡的物料成本約3320美元(H20成本相近,甚至由于增配的L2Cache以及追加了點斷工序而成本更高,且相比H800更加增配了HBM3容量和NVLinklanes帶寬),那么對應(yīng)最終的渠道定價規(guī)則,H20的渠道單價可能與H100/H800處于相近水平。

同比參考幾個市面流通價格(來自某一線互聯(lián)網(wǎng)公司和某一線服務(wù)器廠的渠道貨價):

-DGXA800PCIe8卡服務(wù)器約145萬元/臺,NVLink版本200萬元/臺

-DGXH800NVLink版本服務(wù)器,國內(nèi)渠道報價約310萬元/臺(不含IB)

-DGXH100NVLink版本服務(wù)器,香港渠道報價約45萬美元/臺(不含IB)

-H100PCIe單卡報價約2.5-3萬美元,H800PCIe單卡尚不確定,且單卡流通渠道不正規(guī)

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 芯片
    +關(guān)注

    關(guān)注

    459

    文章

    52464

    瀏覽量

    440183
  • 英偉達
    +關(guān)注

    關(guān)注

    22

    文章

    3944

    瀏覽量

    93596
  • 算力
    +關(guān)注

    關(guān)注

    2

    文章

    1189

    瀏覽量

    15627

原文標題:英偉達為中國“降規(guī)”:H800變身為H20,技術(shù)如何實現(xiàn)、性能夠用嗎?

文章出處:【微信號:算力基建,微信公眾號:算力基建】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    AI推理需求井噴!英偉Q1營收大漲,H20禁售難擋增長步伐

    電子發(fā)燒友原創(chuàng) 章鷹 在中美科技企業(yè)爭奪人工智能高地的競爭中,處于第一方陣的美國AI芯片公司英偉公司最新交出了讓市場滿意的答卷。 5月28日,英偉發(fā)布了截止到4月27日的2026財
    的頭像 發(fā)表于 05-31 01:13 ?7184次閱讀
    AI推理需求井噴!<b class='flag-5'>英偉</b><b class='flag-5'>達</b>Q1營收大漲,<b class='flag-5'>H20</b>禁售難擋增長步伐

    H20禁令反轉(zhuǎn)!國產(chǎn)AI芯片強勢崛起,誰將成為破局王炸?

    電子發(fā)燒友原創(chuàng) 章鷹 4月9日,美國全國公共廣播電臺(NPR)引述兩位知情者說法稱,美國特朗普政府暫時叫停了將英偉對華銷售限制擴大至“特供版”人工智能芯片H20的計劃。原本美國數(shù)月來都在對這款芯片
    的頭像 發(fā)表于 04-11 00:08 ?4597次閱讀
    <b class='flag-5'>H20</b>禁令反轉(zhuǎn)!國產(chǎn)AI芯片強勢崛起,誰將成為破局王炸?

    算力租賃市場爆發(fā),H20遭瘋搶!小心掉坑

    電子發(fā)燒友網(wǎng)報道(文/黃山明)從2022年起,美國開始持續(xù)收緊對華芯片的出口政策,而H20便是英偉專為中國市場量身定制的AI芯片。今年以來,市場中的
    的頭像 發(fā)表于 04-04 00:13 ?2713次閱讀

    英偉預(yù)計向中國客戶交付 “第三代” 閹割芯片

    電子發(fā)燒友網(wǎng)綜合報道,消息人士稱,英偉計劃于 7 月推出第三代 “閹割芯片”。此次推出的 B20 和 B40/B30 芯片將替代 H20 芯片,試圖重新奪回市場份額。 ? B
    的頭像 發(fā)表于 06-21 00:03 ?2633次閱讀

    今日看點丨英偉將為中國市場推出新AI芯片 售價大幅低于H20;中科曙光與海光信息宣布戰(zhàn)略重組

    H20芯片,預(yù)計最快于6月開始量產(chǎn)。報道稱,這款采用最新一代Blackwell架構(gòu)的AI處理器,預(yù)計售價介于6500美元至8000美元之間,明顯低于H20的定價。較低的售價通常意味著芯片規(guī)格相對較弱,制造工藝也更為簡化。 ? 這將是
    發(fā)表于 05-26 11:06 ?1410次閱讀

    GPU 維修干貨 | 英偉 GPU H100 常見故障有哪些?

    上漲,英偉H100GPU憑借其強大的算力,成為AI訓練、高性能計算領(lǐng)域的核心硬件。然而,隨著使用場景的復雜化,H100服務(wù)器故障率也逐漸攀
    的頭像 發(fā)表于 05-05 09:03 ?911次閱讀
    GPU 維修干貨 | <b class='flag-5'>英偉</b><b class='flag-5'>達</b> GPU <b class='flag-5'>H</b>100 常見故障有哪些?

    美國限制英偉向華出售H20芯片

    出口H20芯片,以及任何其他性能達到H20內(nèi)存帶寬、互連帶寬或其組合的芯片,都必須獲得出口許可。 公告披露,美國政府稱,這旨在解決相關(guān)產(chǎn)品可能被用于或被轉(zhuǎn)用于中國超級計算機的風險。4月
    的頭像 發(fā)表于 04-16 17:28 ?337次閱讀

    特朗普要叫停英偉對華特供版 英偉H20出口限制 或損失55億美元

    是“中國特供版”人工智能芯片;是英偉公司符合美國出口規(guī)定專門中國市場開發(fā)的定制芯片,
    的頭像 發(fā)表于 04-16 16:59 ?1254次閱讀

    今日看點丨英偉H20出口至中國需“無限期”申請許可證;特斯拉即將實現(xiàn)純AI自動駕駛

    1. 英偉:美國政府要求,H20 出口至中國時需要“無限期”申請許可證 ? 4月16日,據(jù)外媒報道,英偉
    發(fā)表于 04-16 11:18 ?548次閱讀

    突發(fā)!英偉H20芯片在華訂單大增,買家曝光

    電子發(fā)燒友網(wǎng)報道(文 / 吳子鵬)據(jù)路透社最新報道,六名知情人士共同透露,由于對 DeepSeek 低成本人工智能模型的需求激增,中國企業(yè)正在增加英偉 H20 人工智能芯片的訂單,這
    的頭像 發(fā)表于 02-26 00:10 ?2894次閱讀

    傳DeepSeek自研芯片,廠商們要把AI成本打下來

    外購芯片的成本,掌握供應(yīng)鏈主動權(quán),另一方面隨著AI推理應(yīng)用的爆發(fā),AI推理芯片有機會被重新定義。 ? DeepSeek 不完全依賴英偉 ? 去年12月底發(fā)布的DeepSeek-V3模型,整個訓練使用2048塊英偉
    的頭像 發(fā)表于 02-16 00:09 ?3189次閱讀
    傳DeepSeek自研芯片,廠商們要把AI成本打下來

    英偉A100和H100比較

    英偉A100和H100都是針對高性能計算和人工智能任務(wù)設(shè)計的GPU,但在性能和特性上存在顯著差異。以下是對這兩款GPU的比較: 1. 架構(gòu)
    的頭像 發(fā)表于 02-10 17:05 ?4157次閱讀
    <b class='flag-5'>英偉</b><b class='flag-5'>達</b>A100和<b class='flag-5'>H</b>100比較

    英偉回應(yīng)美新規(guī):在華業(yè)務(wù)不受影響

    近日,英偉公司針對美國商務(wù)部工業(yè)與安全局(BIS)發(fā)布的對華晶圓代工限制新規(guī),向美國證監(jiān)會提交了正式回應(yīng)。英偉在回應(yīng)中明確表示,預(yù)計此次
    的頭像 發(fā)表于 01-20 10:52 ?555次閱讀

    AFE5816在12位ADC的應(yīng)用中,0V輸入對應(yīng)的輸出是12‘h000還是12’h800?

    在12位ADC的應(yīng)用中,0V輸入對應(yīng)的輸出是12‘h000還是12’h800? 對AFE5805來說都在對代碼最高位取反才行,但是5816貌似不行,但手冊上也沒找到說明?。?!
    發(fā)表于 12-09 08:33

    英偉H100芯片市場降溫

    隨著英偉新一代AI芯片GB200需求的不斷攀升,其上一代明星產(chǎn)品H100芯片卻遭遇了市場的冷落。據(jù)業(yè)內(nèi)人士透露,搭載H100的服務(wù)器通常以8卡的形式進行出售或出租,而在去年,這類服務(wù)
    的頭像 發(fā)表于 10-28 15:42 ?1585次閱讀