一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

用國產(chǎn)通用GPU打造中國版ChatGPT的算力底座

Felix分析 ? 來源:電子發(fā)燒友網(wǎng) ? 作者:吳子鵬 ? 2023-03-01 01:05 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

電子發(fā)燒友網(wǎng)報道(文/吳子鵬)據(jù)國信證券統(tǒng)計,ChatGPT今年1月的月活躍用戶超過1億,用戶過億只用了2至3個月,其速度遠(yuǎn)超過去的推特、海外版抖音等。ChatGPT爆火之后,如何打造中國版的ChatGPT成為熱門話題,并且與之相關(guān)的AIGC以及其他AI大模型應(yīng)用也都受到廣泛關(guān)注。

作為國內(nèi)頭部通用GPU高端芯片及超級算力系統(tǒng)提供商,天數(shù)智芯認(rèn)為,ChatGPT的推廣進一步驗證了人工智能給工作、生活帶來很大幫助,甚至不亞于工業(yè)革命的影響,可以親身體驗到其帶來的效率上的提升。這種應(yīng)用是建立在巨大算力模型訓(xùn)練基礎(chǔ)上帶來的智能處理,因此也帶動了0座的需求。

確實,隨著以ChatGPT為代表的AIGC應(yīng)用大火,背后大模型訓(xùn)練所需要的算力也隨之暴漲。統(tǒng)計數(shù)據(jù)顯示,ChatGPT的總算力消耗約為3640PF-days(即假如每秒計算一千萬億次,需要計算3640天),整體部署大約需要7-8個500P算力的數(shù)據(jù)中心。而根據(jù)微軟官網(wǎng)的消息,微軟Azure為OpenAI建設(shè)了一個單獨的超算中心,具有超過28.5萬個CPU核心、1萬個GPU和400 GB/s的GPU服務(wù)器網(wǎng)絡(luò)傳輸帶寬。

從成本上看,ChatGPT就像一個吞金獸。數(shù)據(jù)顯示,其運行一次的費用大概需要430萬美元。這主要是因為ChatGPT背后的預(yù)訓(xùn)練大模型——GPT大模型的GPT-3.5版本是一個“龐然大物”。目前,GPT-3.5模型的參數(shù)規(guī)模已經(jīng)達1750億,原始數(shù)據(jù)規(guī)模達45TB。

天數(shù)智芯表示,目前大模型參數(shù)已經(jīng)突破千億,并有更高的要求,對于訓(xùn)練芯片的通用性及兼容性有更高的要求。訓(xùn)練芯片要能支持更多的算法及改進,而且由于算力需求的規(guī)模越來越大,甚至單個算力集群無法滿足,對于異構(gòu)算力、多集群協(xié)同等方面有更高的要求,進而對于異構(gòu)算力上的兼容性就會有更高的要求。同時,由于數(shù)據(jù)量的急劇提升,對于數(shù)據(jù)的隱私保護也會有所要求,對于隱私計算在訓(xùn)練芯片上的支持也會有要求。

從微軟對ChatGPT的介紹能夠看出,這套系統(tǒng)除了模型預(yù)訓(xùn)練和日常運行,F(xiàn)inetune模型調(diào)優(yōu)也是關(guān)鍵一環(huán)。因此,確實如天數(shù)智芯所言,雖然ChatGPT目前的算力規(guī)模和運行費用很高,但是這些數(shù)字還會與日俱增。

隨著ChatGPT在全球范圍內(nèi)大火,目前國內(nèi)眾多科技巨頭也相繼宣布,將推出自己的類ChatGPT應(yīng)用。比如國內(nèi)的百度,根據(jù)百度創(chuàng)始人、董事長兼首席執(zhí)行官李彥宏在一封名為“百度站在AI浪潮之巔”的內(nèi)部信中表示,百度即將在3月份推出新一代的大語言模型“文心一言”。這也是繼“文心一格”(AI作畫)、“文心百中”(產(chǎn)業(yè)搜索)之后,百度推出的又一大重磅的AI大模型應(yīng)用。

在中國版ChatGPT不斷涌現(xiàn)后,算力芯片作為供給端核心環(huán)節(jié)將率先受益,而其中又以擁有數(shù)量眾多的計算單元和超長的流水線的通用GPU需求最為迫切。天數(shù)智芯表示,大規(guī)模的普及應(yīng)用會對大模型算法有更高的要求,很多科研及企業(yè)也投入到大模型算法的研究中,對于算法模型會有優(yōu)化和改進,因此對于算力底座支持的通用性及擴展性有很高要求,因此一定程度上會降低對于定制化AI芯片的需求,促進通用GPU市場的發(fā)展。

天數(shù)智芯自2021年3月推出云端訓(xùn)練通用GPU產(chǎn)品--天垓100,并于2022年12月推出云端推理通用GPU產(chǎn)品--智鎧100,截止目前,天數(shù)智芯訂單規(guī)模就已經(jīng)突破5億元。目前,基于天垓100訓(xùn)練的模型種類超過了兩百種。天數(shù)智芯表示,公司在訓(xùn)練芯片上堅持通用GPU架構(gòu)、主流生態(tài)兼容等發(fā)展路線,對于通用性、兼容性、安全性等方面都進行了支持,可以為ChatGPT的發(fā)展提供有效安全的算力底座。

當(dāng)然,正如中信證券在研報中指出的,目前在通用GPU方面,國際廠商在高精度浮點計算及CUDA生態(tài)方面還手握核心的技術(shù)壁壘,***和方案在軟硬件方面都還有一定的差距。對此,天數(shù)智芯回應(yīng)稱,堅持通用GPU發(fā)展的路線,全面覆蓋訓(xùn)練和推理兩條產(chǎn)品發(fā)展主線。結(jié)合行業(yè)解決方案為各行業(yè)、各產(chǎn)業(yè)發(fā)展提供完整成熟的軟硬件一體化方案。在未來的產(chǎn)品發(fā)展上,逐步縮小和國際先進產(chǎn)品的差距,為國內(nèi)人工智能發(fā)展提供強有力的支持。

從中長期來看,ChatGPT的火爆以及中國版ChatGPT的陸續(xù)推出,對通用GPU有著巨大的需求。同時,國內(nèi)AIGC市場將和信創(chuàng)市場出現(xiàn)疊加效應(yīng),讓天數(shù)智芯等相關(guān)廠商長期收益,并借此機會提升產(chǎn)品迭代的速度,逐漸達到國際領(lǐng)先水平。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • gpu
    gpu
    +關(guān)注

    關(guān)注

    28

    文章

    4938

    瀏覽量

    131197
  • ChatGPT
    +關(guān)注

    關(guān)注

    29

    文章

    1589

    瀏覽量

    9077
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    云XR(AR/VR)底座關(guān)鍵特征與技術(shù)路徑

    據(jù)處理,依托AIDC(人工智能數(shù)據(jù)中心)提供智能,2024年中國智能增速超65%。 邊緣節(jié)點?:通過本地化
    的頭像 發(fā)表于 06-19 08:10 ?150次閱讀
    云XR(AR/VR)<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>底座</b>關(guān)鍵特征與技術(shù)路徑

    【「芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析」閱讀體驗】+NVlink技術(shù)從應(yīng)用到原理

    前言 【「芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析」書中的芯片知識是比較接近當(dāng)前的頂尖芯片水平的,同時包含了芯片架構(gòu)的基礎(chǔ)知識,但該部分知識比較晦澀難懂,或許是由于我一直從事的事芯片
    發(fā)表于 06-18 19:31

    GPU租用平臺有什么好處

    當(dāng)今,GPU租用平臺為科研機構(gòu)、企業(yè)乃至個人開發(fā)者提供了靈活高效的解決方案。下面,AI部落小編帶您深入探討
    的頭像 發(fā)表于 02-07 10:39 ?454次閱讀

    中心會取代通用中心嗎?

    隨著人工智能(AI)技術(shù)的飛速發(fā)展,計算需求不斷攀升,數(shù)據(jù)中心行業(yè)正經(jīng)歷著前所未有的變革。傳統(tǒng)的通用中心與新興的智中心之間的競爭日益激烈。那么,在這樣的背景下,
    的頭像 發(fā)表于 01-06 14:45 ?551次閱讀
    智<b class='flag-5'>算</b>中心會取代<b class='flag-5'>通用</b><b class='flag-5'>算</b><b class='flag-5'>力</b>中心嗎?

    首個國產(chǎn)萬卡集群!賽思時間同步服務(wù)器助力?“東數(shù)西”甘肅慶陽樞紐節(jié)點打造中國谷」!

    中國信通院云計算與大數(shù)據(jù)研究所副所長栗蔚指出,對服務(wù)而言,東數(shù)西的本質(zhì)就是能夠把像水和
    的頭像 發(fā)表于 12-27 21:22 ?522次閱讀
    首個<b class='flag-5'>國產(chǎn)</b>萬卡<b class='flag-5'>算</b><b class='flag-5'>力</b>集群!賽思時間同步服務(wù)器助力?“東數(shù)西<b class='flag-5'>算</b>”甘肅慶陽樞紐節(jié)點<b class='flag-5'>打造</b>「<b class='flag-5'>中國</b><b class='flag-5'>算</b>谷」!

    GPU開發(fā)平臺是什么

    隨著AI技術(shù)的廣泛應(yīng)用,需求呈現(xiàn)出爆發(fā)式增長。AI租賃作為一種新興的服務(wù)模式,正逐漸成為企業(yè)獲取
    的頭像 發(fā)表于 10-31 10:31 ?665次閱讀

    【一文看懂】大白話解釋“GPUGPU

    隨著大模型的興起,“GPU”這個詞正頻繁出現(xiàn)在人工智能、游戲、圖形設(shè)計等工作場景中,什么是GPU,它與CPU的區(qū)別是什么?以及到底什么是GPU
    的頭像 發(fā)表于 10-29 08:05 ?2559次閱讀
    【一文看懂】大白話解釋“<b class='flag-5'>GPU</b>與<b class='flag-5'>GPU</b><b class='flag-5'>算</b><b class='flag-5'>力</b>”

    GPU租用平臺是什么

    GPU租用平臺是一種基于云計算的服務(wù)模式,它允許用戶通過互聯(lián)網(wǎng)按需租用高性能GPU資源,而無需自行購買、部署和維護這些硬件。
    的頭像 發(fā)表于 10-16 10:15 ?666次閱讀

    【「芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析」閱讀體驗】--全書概覽

    、GPU、NPU,給我們剖析了芯片的微架構(gòu)。書中有對芯片方案商處理器的講解,理論聯(lián)系實際,使讀者能更好理解芯片。 全書共11章,
    發(fā)表于 10-15 22:08

    名單公布!【書籍評測活動NO.43】 芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析

    。本書對華為等廠商推出的NPU芯片設(shè)計也做了架構(gòu)描述,中國也擁有獨立自主知識產(chǎn)權(quán)的高芯片,并且支持多芯片、高帶寬互連。本書也回顧了近20年來主流的CPU、GPU芯片架構(gòu)的特點,介紹
    發(fā)表于 09-02 10:09

    摩爾線程GPU底座助力大模型產(chǎn)業(yè)發(fā)展

    以大模型為代表的新一代人工智能技術(shù)是引領(lǐng)新一輪科技革命和產(chǎn)業(yè)變革的戰(zhàn)略性技術(shù)和重要驅(qū)動力量,隨著對需求的日益高漲,人工智能底座公司日
    的頭像 發(fā)表于 08-27 16:15 ?992次閱讀

    服務(wù)器為什么選擇GPU

    隨著人工智能技術(shù)的快速普及,需求日益增長。智中心的服務(wù)器作為支撐大規(guī)模數(shù)據(jù)處理和計算的核心設(shè)備,其性能優(yōu)化顯得尤為關(guān)鍵。而GPU服務(wù)器也進入了大眾的視野,成為高性能計算的首選。那
    的頭像 發(fā)表于 07-25 08:28 ?1325次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>服務(wù)器為什么選擇<b class='flag-5'>GPU</b>

    IaaS+on+DPU(IoD)+下一代高性能底座技術(shù)白皮書

    DPU 是當(dāng)下基礎(chǔ)設(shè)施的核心創(chuàng)新之一。如果把 CPU 比做大腦,那么 GPU 就好比是肌肉,而 DPU 就是神經(jīng)中樞。CPU 承載了應(yīng)用生態(tài),提供了通用
    發(fā)表于 07-24 15:32

    神州鯤泰亮相北京數(shù)字安全大會,以智能構(gòu)筑數(shù)據(jù)安全的堅實底座

    GPU資源虛擬化或池化,完成跨集群之間的調(diào)度;打造異構(gòu)智加速平臺HICA,屏蔽集群內(nèi)底層
    的頭像 發(fā)表于 07-18 16:06 ?671次閱讀
    神州鯤泰亮相北京數(shù)字安全大會,以智能<b class='flag-5'>算</b><b class='flag-5'>力</b>構(gòu)筑數(shù)據(jù)安全的堅實<b class='flag-5'>底座</b>