一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

英偉達:更強的GPU,更快的AI超算

ss ? 來源:阿明觀察 ? 作者:阿明觀察 ? 2020-11-19 18:00 ? 次閱讀

在談英偉達的大戰(zhàn)略之前,明確兩個重要事件:

英偉達NVIDIA在2019年3月公開以69億美元現(xiàn)金收購Mellanox,該項交易最終在2020年4月塵埃落定。

英偉達NVIDIA在2020年9月宣布以400億美元現(xiàn)金加股票的方式,對軟銀旗下芯片設計公司、全球重要芯片架構提供商Arm進行收購。

這兩件事情的成功,為英偉達在芯片領域的發(fā)展帶來了更深入、更廣泛的發(fā)展前景,以及更為利好的影響。從資本市場的表現(xiàn)就可見一斑,按周一美東時間11月16日16:00收盤時的價格計算,英偉達的總市值為3335.56億美元,幾乎快超過某友商市值的兩倍。友商名字不方便公布,大家可以猜猜看。

前些天業(yè)內朋友感嘆,這一年,過得太快了。其實,我更想感嘆,英偉達的市值飆升得太快了。

但這市值增長的背后,卻暗藏著英偉達的更大圖謀:超算大戰(zhàn)略。

根據最新的TOP500榜單排名顯示,英偉達全面領先,無論是針對超算領域的計算、網絡還是HPC。

事實上,NVIDIA GPU和網絡正在越來越多地用于加速世界上最快的超級計算機。

一是,基于NVIDIA技術構建的超算系統(tǒng)占比絕對領先,包括8個TOP10超算系統(tǒng)在內,近70%進入TOP500榜單的超算系統(tǒng)都基于NVIDIA技術構建。

二是,NVIDIA Selene超級計算機(HPC)在全球超級計算機速度排行中位列第五。該超級計算機基于NVIDIA DGX A100 640GB系統(tǒng)和NVIDIA Mellanox InfiniBand網絡構建。

三是,在衡量系統(tǒng)能源效率的Green500榜單中,NVIDIA DGX SuperPOD系統(tǒng)位居榜首,得到業(yè)界一致肯定。

從SC20(Supercomputing Conference)超算大會公布的最新TOP500榜單可以看出,英偉達的超算大戰(zhàn)略勢在必得,將在強化現(xiàn)有技術能力部署的前提下,明確了下一步戰(zhàn)略的“三駕馬車”:GPU更強、HPC更快、網絡更優(yōu)。面向超算領域,英偉達的戰(zhàn)略很明確,一點兒都不用含糊,更強更快更優(yōu),也將會是其長期屹立超算領域的制勝法寶。

更強:GPU一路高歌猛進

在超算行業(yè),強中自有強中手。作為超算領域最佳加持者,英偉達在GPU這條發(fā)展路上,可謂一路高歌猛進。

AI算力的強大,再一次彰顯了英偉達整體超算戰(zhàn)略的英明。似乎,這也是英偉達命中注定的好趨勢,誰叫AI行業(yè)化,行業(yè)AI化的智能化時代來得如此之快呢。

針對數(shù)據中心GPU需求來看,英偉達以A100、A40、V100、T4、RTX 6000、RTX 8000多款業(yè)界知名的產品系列既已覆蓋。

然而術業(yè)有專攻。針對大流量數(shù)據工作負載方面,AI算力的需求特別突出,但是隨著NVIDIA A100 80GB GPU的出現(xiàn),非常有助于各種訓練、推理和超級計算應用等方面的發(fā)展,在速度和性能上得以前所未有的滿足。

作為英偉達創(chuàng)始人、現(xiàn)任CEO黃仁勛親手推出的GPU力作,A100第一代產品是在幾個月前的英偉達GTC 2020大會上首次亮相的。

因為是基于英偉達安培(Ampere)架構的首款圖形處理器,所以備受業(yè)界關注。當時A100引入了有著里程碑式意義的Tensor Cores雙精度計算技術。要知道以前在NVIDIA V100 Tensor Core GPU上需要10個小時的雙精度模擬作業(yè),在A100上4小時即可完成。

NVIDIA A100 Tensor Core GPU針對AI、數(shù)據分析和高性能計算 (HPC)等應用上,實現(xiàn)了更強的加速,針對極其嚴峻的計算挑戰(zhàn)上有了更大作為。A100高效擴展性也很突出,數(shù)千個A100 GPU在同一個系統(tǒng)中成功實現(xiàn)集成,也可以利用NVIDIA多實例 GPU (MIG) 技術將每個A100 劃分割為七個獨立的GPU實例,獲得對各種規(guī)模工作負載的加速。

需要注意的是,這里針對HPC性能的對比中,僅限于NVIDIA V100 GPU第一代產品。

A100的出現(xiàn),對數(shù)據中心大規(guī)模的計算帶來了更強的優(yōu)化效果,不僅統(tǒng)一了人工智能訓練和推理,同時將靈活、彈性加速的實現(xiàn)可能性向前又推進一步。

作為A100 GPU系列中的最新力作,A100 80GB GPU在繼承了第一代A100 GPU的優(yōu)勢基礎上,內存比第一代A100 GPU提升一倍,也支持NVIDIA HGX AI超級計算平臺。

大內存容量和高帶寬,對于AI與HPC實際應用的好處有目共睹,畢竟在這個領域中一切都要以速度決勝負。全新A100采用HBM2e技術,可將A100 40GB GPU的高帶寬內存增加一倍至80GB,提供每秒超過2TB的內存帶寬。這使得數(shù)據可以快速傳輸?shù)饺蜃羁斓臄?shù)據中心GPU A100上,使研究人員能夠更快地加速其應用,處理最大規(guī)模的模型和數(shù)據集。

由此,我們可以很容易看到全新一代的增強A100 80GB GPU在HPC領域的表現(xiàn)更為突出,相比最早一代2016年代表之作P100 GPU,A100 80GB GPU實現(xiàn)了HPC應用性能的11倍提升。

不僅如此,在深度學習、數(shù)據分析、能效方面都獲得了前所未有的優(yōu)化。

對于如RNN-T等自動語言識別模型的AI推理,單個A100 80GB MIG實例可處理更大規(guī)模的批量數(shù)據,將生產中的推理吞吐量提高1.25倍。

在TB級零售大數(shù)據分析基準上,A100 80GB將其性能提高了2倍,使其成為可對最大規(guī)模數(shù)據集進行快速分析的理想平臺。隨著數(shù)據的動態(tài)更新,企業(yè)可以實時做出關鍵決策。

對于科學應用,A100 80GB可為天氣預報和量子化學等領域提供巨大的加速。材料模擬軟件Quantum Espresso采用單節(jié)點A100 80GB實現(xiàn)了近2倍的吞吐量提升。

從這幾個比較典型的需要大量數(shù)據存儲空間的應用來看,A100 80GB GPU在應用性能上確實成為新一代GPU的亮點。由此在架構特性上可以總結為幾點:

一是,采用第三代Tensor Core核心。通過全新TF32,將上一代Volta架構的AI吞吐量提高多達20倍。通過FP64,將HPC性能提高多達2.5倍。通過 INT8,將AI推理性能提高多達20倍,并且支持BF16數(shù)據格式。

二是,采用更大、更快的HBM2e GPU內存。從而使內存容量增加一倍,在業(yè)內率先實現(xiàn)2TB/s以上的內存帶寬。

三是,采用MIG技術,將單個獨立實例的內存增加一倍,可最多提供七個MIG,每個實例具備10GB內存。

四是,采用結構化稀疏技術,將推理稀疏模型的速度提高兩倍。

五是,第三代NVLink和NVSwitch,相較于上一代互連技術,可使GPU之間的帶寬增加至原來的兩倍,將數(shù)據密集型工作負載的GPU數(shù)據傳輸速度提高至每秒600 gigabytes。

AI能力的強大,表現(xiàn)在GPU產品的推陳出新,以及GPU為行業(yè)應用帶來革命性的改變。這就是英偉達的過人之處,好技術帶來行業(yè)改變和產業(yè)格局變化。

更智即更強。由此而言,對于超算行業(yè)的發(fā)展來說,更智能也就自然表現(xiàn)得更為強大了。

更快:HPC沒有最快只有更快

超算的核心在于快,競爭的價值在于更快。在超算領域只有在超算系統(tǒng)上實現(xiàn)更快的速度,才能實現(xiàn)超算系統(tǒng)整體能力的更強。

作為強化AI算力的全球領先廠商,英偉達新一代DGX Station A100和DGX A100 640GB移動數(shù)據中心引起了我特別的注意,這也是在 SC20超級計算大會上與A100 80GB GPU同期發(fā)布的重量級產品。

DGX Station A100的AI性能可以達到2.5 petaflops,通過NVIDIA NVLink完全互連,實現(xiàn)四個全新NVIDIA A100 80GB GPU融合在一起的工作組服務器,同時GPU內存高達320GB。更為特別是DGX Station A100也是唯一支持NVIDIA多實例GPU技術(MIG)的工作組服務器。借助MIG,單一DGX Station A100最多可提供28個獨立GPU實例以運行并行任務,并可在不影響系統(tǒng)性能的前提下支持多用戶應用。

這也是全球唯一的千萬億級工作組服務器,如此性能超快的DGX Station A100,被業(yè)內稱之為一體式AI數(shù)據中心,也就是說,用戶借助一臺DGX Station A100,就可以在任何地方部署AI超算中心了。

如此說來,作為服務器級的系統(tǒng),DGX Station A100無需配備數(shù)據中心級電源或散熱系統(tǒng),卻具有與NVIDIA DGX A100數(shù)據中心系統(tǒng)相同的遠程管理功能。當數(shù)據科學家和研究人員在家中或實驗室辦公時,系統(tǒng)管理員可輕松地通過遠程連接,執(zhí)行任何管理任務。

作為一臺隨處可得的AI超級計算機,性能上的突出表現(xiàn)尤為吸引人。為支持諸如BERT Large推理等復雜的對話式AI模型,DGX Station A100比上一代DGX Station提速4倍以上。對于BERT Large AI訓練,其性能提高近3倍。

此外,全新DGX A100 640GB系統(tǒng)也將集成到企業(yè)版NVIDIA DGX SuperPOD解決方案,使機構能基于以20 個DGX A100系統(tǒng)為單位的一站式AI超級計算機,實現(xiàn)大規(guī)模AI模型的構建、訓練和部署。

配備A100 80GB GPU的NVIDIA DGX SuperPOD系統(tǒng)將率先安裝于英國的Cambridge-1超級計算機,以加速推進醫(yī)療健康領域研究,以及佛羅里達大學的全新HiPerGator AI超級計算機,該超級計算機將賦力這一“陽光之州”開展AI賦能的科學發(fā)現(xiàn)。

由此可見,新一代DGX Station A100和DGX A100 640GB移動數(shù)據中心的出現(xiàn),將給AI超級計算機的行業(yè)格局帶來一次新的震動。全球云觀察分析,這有望將超算從傳統(tǒng)超算時代推向真正的智能超算時代,那么英偉達必定就是其中舉足輕重的使能者之一。同時AI超算上的創(chuàng)新也將因為NVIDIA A100 80GB GPU而再次迎來新的發(fā)展,對AI超算的行業(yè)應用普及帶來了更大的發(fā)展?jié)摿εc空間。

更優(yōu):高效網絡性能空前

任何超算系統(tǒng),離開了高效的網絡,基本上談不上超算??梢娋W絡對于超算系統(tǒng)整體價值的貢獻缺一不可。

為此,英偉達并購Mellanox后,對于InfiniBand高效網絡的性能發(fā)揮得到了空前的提升。

400G InfiniBand系統(tǒng)在之前聽說過業(yè)內傳聞,沒有想到英偉達如今很快變成了現(xiàn)實?!癗VIDIA Mellanox 400G InfiniBand的海量吞吐量和智能加速引擎使HPC、AI和超大規(guī)模云基礎設施能夠以更低的成本和復雜性,實現(xiàn)了全球最具挑戰(zhàn)性的網絡互連性能。”

為了支撐更強更快的AI超算的需要,Mellanox 400G InfiniBand帶來的加速能力也是值得一看。Mellanox NDR 400G InfiniBand交換機,可提供3倍的端口密度和32倍的AI加速能力。并且將框式交換機系統(tǒng)的聚合雙向吞吐量提高了5倍,達到1.64 petabits/s,減少交換機使用量獲得更大工作負載的支撐,必然對用戶整體應用成本帶來更良好的回報。

當然,好的產品,特別是在行業(yè)領域有著技術創(chuàng)新領先性的產品,往往贏得市場的認同更為廣泛。

從一組財報數(shù)據來看,英偉達截至2020年7月26日的第二季度財報,營收為38.7億美元,創(chuàng)歷史新高,較去年同期的25.8億美元增長50%,較上一季度的30.8億美元增長26%。

其中有一個關鍵信息就是該季度數(shù)據中心方面業(yè)務收入出奇高增長,財報期內為17.5億美元,為2019年同期收入6.55億美元的兩倍多。這也是數(shù)據中心領域帶來的收入首次出現(xiàn)超越英偉達成立以來的主營視頻游戲領域業(yè)務,財報期內視頻游戲業(yè)務為16.5億美元。

就此來說,英偉達在數(shù)據中心取得高速增長成績,與收購Mellanox有著密切相關。

可見,英偉達Mellanox在高效網絡方面的性能表現(xiàn),已經贏得了用戶的心聲,特別是在超算領域,英偉達Mellanox的InfiniBand技術一直備受矚目。

小結:AI超算的未來已來

英偉達的超算大戰(zhàn)略,必然就是將AI加入到HPC中,并擴展至傳統(tǒng)超級計算中心之外的平臺,從而引發(fā)了全球AI超算大趨勢。

與此同時,創(chuàng)新效率超高的英偉達,在加速計算領域、HPC、網絡三大領域分別發(fā)布了新一代A100 80GB GPU處理器、新一代DGX StationA100和DGX A100 640GB移動數(shù)據中心、Mellanox 400G InfiniBand系統(tǒng)多款重磅新品,可謂三駕馬車并駕齊驅,以應對全球爆發(fā)式增長的數(shù)據處理需求和日益凸顯的機器學習需要。這對全球超算整體格局的變化,帶來非常積極的推動作用。

更強的GPU,更快的AI超算,更優(yōu)的高效網絡,也將成為英偉達持續(xù)向前發(fā)展的重要三部曲。

責任編輯:xj

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • gpu
    gpu
    +關注

    關注

    28

    文章

    4887

    瀏覽量

    130439
  • NIVIDA
    +關注

    關注

    0

    文章

    9

    瀏覽量

    7239
  • 超算
    +關注

    關注

    1

    文章

    117

    瀏覽量

    9281
收藏 人收藏

    評論

    相關推薦
    熱點推薦

    AI大模型不再依賴英偉GPU?蘋果揭秘自研大模型

    ? 電子發(fā)燒友網報道(文/梁浩斌)過去幾年中爆發(fā)的AI力需求,英偉GPU成為了最大的贏家,無論是自動駕駛還是
    的頭像 發(fā)表于 08-05 06:07 ?4342次閱讀
    <b class='flag-5'>AI</b>大模型不再依賴<b class='flag-5'>英偉</b><b class='flag-5'>達</b><b class='flag-5'>GPU</b>?蘋果揭秘自研大模型

    GPU 維修干貨 | 英偉 GPU H100 常見故障有哪些?

    上漲,英偉H100GPU憑借其強大的力,成為AI訓練、高性能計算領域的核心硬件。然而,隨著使用場景的復雜化,H100服務器故障率也逐漸攀
    的頭像 發(fā)表于 05-05 09:03 ?36次閱讀
    <b class='flag-5'>GPU</b> 維修干貨 | <b class='flag-5'>英偉</b><b class='flag-5'>達</b> <b class='flag-5'>GPU</b> H100 常見故障有哪些?

    英偉市值一夜蒸發(fā)近2萬億 英偉股價下跌8%

    在美東時間周一,美股三大指數(shù)集體收跌,截至收盤,英偉股價下跌8%,英偉市值一夜蒸發(fā)2650億美元(換算下來約合人民幣19345億元);
    的頭像 發(fā)表于 03-04 10:19 ?424次閱讀

    英偉收購AI初創(chuàng)公司Run:ai

    :ai作為一家專注于AI云計算軟件平臺開發(fā)的初創(chuàng)公司,其產品以高效利用高性能GPU資源為核心,致力于為用戶提供更快速、更便捷的機器學習加速方案。通過此次收購,
    的頭像 發(fā)表于 12-31 10:46 ?413次閱讀

    軟銀攜手英偉打造日本最強AI

    軟銀集團近日宣布,將率先采用英偉最新的Blackwell平臺,打造日本最強的AI超級計算機。此舉旨在滿足日本在人工智能領域快速發(fā)展的迫切需求,推動國內AI技術的創(chuàng)新與應用。
    的頭像 發(fā)表于 11-14 16:25 ?540次閱讀

    英偉或明年將革新AI GPU設計,采用插槽設計

    10月11日最新消息,集邦咨詢Trendforce于今日(10月11日)發(fā)表博文透露,英偉預計在今年第四季度推出GB200后,正考慮在其下一代AI GPU產品中采納獨立
    的頭像 發(fā)表于 10-11 17:05 ?701次閱讀

    Inflection AI轉向英特爾Gaudi 3,放棄英偉GPU

    近日,人工智能技術公司Inflection AI宣布了一項重要決策,其最新的企業(yè)平臺將放棄采用英偉(Nvidia)的GPU,轉而選擇英特爾的Gaudi 3加速器。
    的頭像 發(fā)表于 10-10 17:21 ?660次閱讀

    英偉AI服務器將革新采用插槽式設計

    英偉AI服務器領域即將迎來重大變革。據里昂證券最新發(fā)布的報告預測,從明年下半年起,英偉的旗艦級AI
    的頭像 發(fā)表于 09-27 11:47 ?557次閱讀

    AI芯片巨頭英偉4% 英偉市值暴增7500億

    誰是美股最靚的仔?在人工智能浪潮之下AI芯片巨頭英偉肯定有一席之地,特別是現(xiàn)在全球資本市場動蕩之際,業(yè)界分析師多認為英偉是最佳“反彈股”
    的頭像 發(fā)表于 08-13 15:33 ?1310次閱讀

    英偉TITAN AI顯卡曝光,性能狂RTX 409063%!# 英偉# 顯卡

    顯卡英偉
    jf_02331860
    發(fā)布于 :2024年07月24日 17:18:28

    英偉將全面轉向開源GPU內核模塊

    英偉公司近期宣布了一項重大決策,即全面轉向開源GPU內核模塊,并計劃最終以此取代閉源驅動程序。這一戰(zhàn)略轉變標志著英偉在開源領域邁出了重要
    的頭像 發(fā)表于 07-19 15:26 ?745次閱讀

    英偉GPU新品規(guī)劃與HBM市場展望

    在COMPUTEX 2024主題演講中,英偉(NVIDIA)公布了其GPU產品的未來規(guī)劃。據英偉透露,B100、B200和GB200系列
    的頭像 發(fā)表于 06-13 09:44 ?1123次閱讀

    英偉Blackwell芯片已投產,預告未來AI芯片發(fā)展

    英偉創(chuàng)始人兼CEO黃仁勛近日宣布,公司旗下的Blackwell芯片已正式投入生產。這款芯片是英偉AI領域的重要突破,預計將為未來的智能
    的頭像 發(fā)表于 06-04 09:23 ?2164次閱讀

    進一步解讀英偉 Blackwell 架構、NVlink及GB200 超級芯片

    計算工作負載、釋放百億億次計算能力和萬億參數(shù)人工智能模型的全部潛力提供關鍵基礎。 NVLink釋放數(shù)萬億參數(shù)AI模型的加速性能,顯著提升大型多GPU系統(tǒng)的可擴展性。每個英偉Black
    發(fā)表于 05-13 17:16

    英偉、AMD、英特爾GPU產品及優(yōu)勢匯總

    電子發(fā)燒友網報道(文/李彎彎)隨著人工智能技術的快速發(fā)展,GPU的市場規(guī)模在全球范圍內持續(xù)提升。目前,GPU市場主要由英偉、AMD和英特爾等幾家大公司主導。其中,
    的頭像 發(fā)表于 05-10 00:59 ?6482次閱讀