一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

尋找AI大模型時(shí)代的存力破壁人:華為的行與思

腦極體 ? 來源:腦極體 ? 作者:腦極體 ? 2025-04-22 08:50 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

wKgZO2gGZzeAY6tCAAplpslxk28362.jpg

wKgZPGgGZzeAVwR9AADPvhqkRjM208.jpg

提到AI基石,人們普遍會想到計(jì)算硬件、大模型等,卻容易忽略了一個(gè)關(guān)鍵的AI支柱——存力。

大模型的全周期,都離不開存力與算力的協(xié)同保障。比如Pre-Training預(yù)訓(xùn)練階段,涉及EB/PB級海量數(shù)據(jù)的處理,頻繁保存與讀取Checkpoint文件,對存儲的帶寬和吞吐量要求很高;Post-Training后訓(xùn)練階段,模型精調(diào)需要處理個(gè)性化數(shù)據(jù),存儲系統(tǒng)需應(yīng)對頻繁的IO操作。Inference推理階段,token輸出過慢會讓用戶長時(shí)間等待、體驗(yàn)差,而低延遲的實(shí)時(shí)數(shù)據(jù)傳輸,依賴于存儲的并發(fā)訪問能力。

算力突飛猛進(jìn)而存力不足,兩者的不協(xié)同,在一定程度上制約云數(shù)據(jù)中心的效率,也成為當(dāng)前AI云亟需突破的一大難點(diǎn)。

這時(shí)候,迫切需要人才以代碼為利器,為行業(yè)解難題。華為軟件精英挑戰(zhàn)賽,正是這樣一個(gè)復(fù)合型人才的練兵場。

華為軟件精英挑戰(zhàn)賽是華為公司面向全球在校大學(xué)生舉辦的大型軟件編程競賽,自2015年啟動(dòng)以來,已經(jīng)成為全球高校學(xué)子展示軟件設(shè)計(jì)與編程實(shí)力、挑戰(zhàn)技術(shù)巔峰的頂級舞臺。

以“普朗克計(jì)劃”為主題的2025第十一屆華為軟件精英挑戰(zhàn)賽,吸引了全球800多所高校、超22000名選手、超4200支隊(duì)伍報(bào)名參賽。經(jīng)過八大賽區(qū)區(qū)域初賽、區(qū)域復(fù)賽等環(huán)節(jié)的激烈角逐,共有34支隊(duì)伍、92名優(yōu)秀選手成功晉級4月19日舉辦的全球總決賽。最終,粵港澳賽區(qū)來自南方科技大學(xué)和香港科技大學(xué)的“Tom and Jerry”隊(duì)一舉奪魁,贏得全球總冠軍,獨(dú)攬20萬元獎(jiǎng)金。

wKgZO2gGZzeABp6QAAB5JYOdeU8284.jpg

究竟什么賽題,能激發(fā)全球軟件人才的挑戰(zhàn)興趣呢?在大模型技術(shù)快速迭代的當(dāng)下,華為今年賽題抽象自華為云存儲真實(shí)業(yè)務(wù)難題:選手們需從行業(yè)案例中提煉數(shù)據(jù)分片、緩存預(yù)熱、多協(xié)議互通等策略,結(jié)合算法創(chuàng)新,解決賽題中的存力瓶頸。

通過解題,年輕的參賽者們能直面來自大模型時(shí)代的存力挑戰(zhàn),親歷了從技術(shù)瓶頸發(fā)現(xiàn)、架構(gòu)設(shè)計(jì)到商業(yè)應(yīng)用的完整鏈條。

云存儲在升級,人才在成長,華為在技術(shù)創(chuàng)新與人才培養(yǎng)上持續(xù)投入,為大模型強(qiáng)基、固本、培源。所以,從2025年華為軟件精英挑戰(zhàn)賽,我們可以更深入地了解,大模型時(shí)代的底座、底氣和底蘊(yùn)。

wKgZPGgGZziAdP3XAAKFNJBQQV0055.jpg

不少開發(fā)者都提過:打完比賽之后,所寫的代碼就沒什么用了,不能真的用技術(shù)為社會發(fā)光發(fā)熱,這樣的經(jīng)歷多來幾次,就感覺參加比賽沒什么意義。讓一場比賽具有意義感,不浪費(fèi)選手們的時(shí)間與期待,賽題必須鮮活,貼近現(xiàn)實(shí),緊密結(jié)合行業(yè)前沿技術(shù)與實(shí)際應(yīng)用,解決產(chǎn)業(yè)面臨的真問題。

2025華為軟挑大賽中,華為云精心打造的賽題,就源自云存儲的真實(shí)挑戰(zhàn)。

AI時(shí)代正在全業(yè)務(wù)流重塑對云存儲的關(guān)鍵需求,云存儲正在成為算力之外的第二生產(chǎn)力,具備海量數(shù)據(jù)承載能力、高性能存取效率與彈性擴(kuò)展架構(gòu)等優(yōu)勢,成為驅(qū)動(dòng)AI訓(xùn)練效率提升、成本優(yōu)化及多模態(tài)創(chuàng)新的基石。

但存算不協(xié)同,可能出現(xiàn)存儲帶寬無法支撐海量小文件,比如百萬級圖文數(shù)據(jù)的傳輸,拖慢大模型的開發(fā)進(jìn)程;存儲系統(tǒng)無法及時(shí)將數(shù)據(jù)加載到GPU,可能導(dǎo)致數(shù)千萬元投資的GPU集群利用率不足,形成“內(nèi)存墻”難題,產(chǎn)生巨額算力浪費(fèi)。

所以,發(fā)展大模型,既需要算力的充沛保障,也要進(jìn)一步升級存力。

為此,華為云率先進(jìn)行了技術(shù)攻關(guān),打造了面向AI場景推出的AI-Native智算存儲解決方案,以O(shè)BS作為海量數(shù)據(jù)底座,提供大規(guī)模、高可靠性的數(shù)據(jù)存儲解決方案,疊加華為云SFS Turbo緩存加速層,可以為AI應(yīng)用提供高效的數(shù)據(jù)訪問能力。

通過以存助算/強(qiáng)算/代算/補(bǔ)算,華為云存儲為大模型構(gòu)筑了強(qiáng)大的存力基石,提供了產(chǎn)業(yè)的真實(shí)實(shí)踐。但創(chuàng)新之路永無止境,讓存力最大化,仍有優(yōu)化空間。

比如說 AI訓(xùn)練環(huán)節(jié),性能還可以進(jìn)一步優(yōu)化。針對海量小文件高性能、低時(shí)延處理以及大模型訓(xùn)練 CheckPoint快速存儲與恢復(fù)的特殊需求,華為云在數(shù)據(jù)湖 OBS之上,引入了高性能存儲加速緩存層 SFS Turbo,為 AI訓(xùn)練集群提供高性能數(shù)據(jù)讀寫能力,滿足訓(xùn)練數(shù)據(jù)加載和故障恢復(fù)過程中 CheckPoint機(jī)制的性能要求。然而,由于成本優(yōu)化的需求,SFS Turbo中的冷數(shù)據(jù)會被分級存儲到OBS中。

如何實(shí)現(xiàn) OBS中數(shù)據(jù)向 SFS Turbo的快速加載,是云存儲面臨的重要挑戰(zhàn),也對加速AI訓(xùn)練效率具有關(guān)鍵意義。

誰能來迎接這一前沿挑戰(zhàn)?答案是具有創(chuàng)造力和極強(qiáng)工程能力的軟件人才。

多年以來,華為軟件精英挑戰(zhàn)賽不斷將校園里的天才構(gòu)想,帶入賽場,帶入技術(shù)世界和產(chǎn)業(yè)世界,已成為具有人才培養(yǎng)與產(chǎn)學(xué)聯(lián)動(dòng)示范意義的重要賽事。2025大賽沿用了自2022年發(fā)起的“普朗克計(jì)劃”,華為云CTO張宇昕表示,“華為軟件精英挑戰(zhàn)賽以‘普朗克計(jì)劃’為主題,希望越來越多像‘普朗克’一樣的軟件人才站出來,開創(chuàng)新的技術(shù)方向,突破新的技術(shù)領(lǐng)域”。

wKgZPGgGZziAGHdAAAA2roQmHE0920.jpg

年輕的軟件人才就在華為的賽場,與云存儲完成了一場風(fēng)云際會。

wKgZO2gGZzmAeuaRAAIWASUwVVU460.jpg

不少高校老師都反映說,AI領(lǐng)域,工業(yè)界具備大數(shù)據(jù)、算力、算法能力等優(yōu)勢,所以普遍走得比學(xué)術(shù)界更快。老師們自己還沒搞懂,學(xué)校買不到GPU算卡,導(dǎo)致當(dāng)前的人才培養(yǎng)模式,很難滿足AI時(shí)代的人才需求。于是,一些由企業(yè)舉辦的產(chǎn)業(yè)賽事便成為人才實(shí)操的主要陣地。

而華為軟件精英挑戰(zhàn)賽,更緊密地實(shí)現(xiàn)了學(xué)術(shù)界與工業(yè)界的對接。大賽每屆賽題都源于華為探索世界領(lǐng)先技術(shù)中遇到的真實(shí)業(yè)務(wù)難題,同時(shí)緊密結(jié)合行業(yè)前沿技術(shù),本屆大賽也不例外。在大模型時(shí)代,該比賽與其他產(chǎn)業(yè)賽事呈現(xiàn)出明顯的差異:

首先是現(xiàn)實(shí)性強(qiáng)。大賽賽題高度還原了真實(shí)業(yè)務(wù)挑戰(zhàn),讓選手們解答現(xiàn)實(shí)難題,而非紙上談兵。比如本屆大賽就聚焦于開發(fā)一個(gè)存儲服務(wù)的控制系統(tǒng),旨在通過減少硬盤數(shù)據(jù)碎片化程度,提升系統(tǒng)整體效率,并依據(jù)存儲系統(tǒng)的整體性能來評定最終得分。選手們能感受到,存力問題直接關(guān)系到大模型效率與成本問題,是當(dāng)下全社會各行業(yè)都關(guān)心的,避免純解題過于懸浮、與現(xiàn)實(shí)脫節(jié),攻克這類難題能真的推動(dòng)產(chǎn)業(yè)進(jìn)步,帶給選手們滿滿的成就感。

同時(shí)挑戰(zhàn)難度大。本屆大賽的選手們需要根據(jù)題目提供的對象標(biāo)簽、對象大小等信息,將具有相似特征的對象盡可能聚合寫入,降低硬盤上數(shù)據(jù)的碎片化程度。在讀取時(shí),選手需要合理規(guī)劃磁頭的動(dòng)作,提高系統(tǒng)讀取對象的效率。這一賽題非常考驗(yàn)選手們的算法設(shè)計(jì)和工程能力,也讓選手們通過比賽能夠真正得到提升,有所收獲。

本屆大賽還與時(shí)俱進(jìn),鼓勵(lì)各位選手使用包括DeepSeek在內(nèi)的市面上所有的LLM,將AI能力融入?yún)①愖髌分?/strong>,增強(qiáng)作品的深度和創(chuàng)新性,不僅能充分激發(fā)選手們的創(chuàng)造性思維,還能讓高校學(xué)生不用擔(dān)心算力資源限制,上手實(shí)戰(zhàn)最新的AI大模型,達(dá)到以賽促學(xué)、以賽促用的效果。

此外,本屆大賽也十分關(guān)注華為根技術(shù)的生態(tài)發(fā)展,年輕人才加速涌入,可以增強(qiáng)軟件生態(tài)的韌性,應(yīng)對全球科技博弈的不確定挑戰(zhàn)。

為了讓更多開發(fā)者學(xué)習(xí)和使用華為根技術(shù),華為開發(fā)者空間為每位參賽選手準(zhǔn)備了一臺云主機(jī)、一套開發(fā)工具及云上存儲空間,讓開發(fā)者基于華為根生態(tài)創(chuàng)新。華為云為選手提供從工具到生態(tài)的全方位支持。

這些都是其他產(chǎn)業(yè)賽事很少具備的生態(tài)資源,也讓華為軟件精英挑戰(zhàn)賽作為國產(chǎn)軟件生態(tài)壯大的一支有生力量,幾乎無可替代。

正是這些特征,讓本屆華為軟件精英挑戰(zhàn)賽,成為年輕人才在大模型時(shí)代快速成長起來的絕佳舞臺。而選手們以代碼為利器的存力攻堅(jiān)戰(zhàn),也為AI云存儲淬煉了一些優(yōu)秀算法。

wKgZO2gGZzmATFaRAAJu5QXDVk4133.jpg

在云存儲與AI算力深度融合的大模型時(shí)代,華為軟件精英挑戰(zhàn)賽以極具前瞻性的賽題設(shè)計(jì),揭示了云存儲作為數(shù)字底座對智能時(shí)代的基礎(chǔ)性價(jià)值,更通過華為云在真實(shí)場景下的技術(shù)攻堅(jiān),展現(xiàn)了根技術(shù)帶動(dòng)產(chǎn)業(yè)鏈升級的火車頭作用。

為什么是華為來做這件事?更深一步挖掘原因,會發(fā)現(xiàn)在技術(shù)創(chuàng)新、人才培養(yǎng)、研發(fā)投入,華為做了很多。

技術(shù)角度,華為在產(chǎn)業(yè)數(shù)智化和數(shù)智產(chǎn)業(yè)化方面,做了大量探索和實(shí)踐,可以從自身業(yè)務(wù)中凝練出更具挑戰(zhàn)性的賽題,讓人才站在巨人肩膀上去探索更前沿的命題,創(chuàng)新領(lǐng)先一步。

人才角度,人才培養(yǎng)是華為一直在做的事情,華為將多年來在ICT行業(yè)中積累的人才培養(yǎng)標(biāo)準(zhǔn)貢獻(xiàn)出來,聯(lián)合教育主管部門、高等院校、教育機(jī)構(gòu)和合作伙伴等各方生態(tài)角色,通過建設(shè)人才聯(lián)盟、融入人才標(biāo)準(zhǔn)等,強(qiáng)化國產(chǎn)化開發(fā)生態(tài),同時(shí)也通過舉辦產(chǎn)業(yè)賽事,全力支持年輕人不設(shè)限地發(fā)揮創(chuàng)造力。

投入方面,華為毫不吝嗇,堅(jiān)持每年將10%以上的銷售收入投入研究與開發(fā),近十年累計(jì)投入的研發(fā)費(fèi)用超過人民幣12490億元,2024年研發(fā)投入達(dá)到1797億元人民幣,約占全年收入的20.8%。

更務(wù)實(shí)一點(diǎn)來看,開發(fā)者想要參與到AI大模型的科創(chuàng)浪潮中,AI云服務(wù)靈活彈性、按需付費(fèi)等特點(diǎn),讓云平臺對開發(fā)者的吸引力與日俱增。華為云重度參與到比賽當(dāng)中,不僅有助于提高自身的產(chǎn)品競爭力,也進(jìn)一步壯大了華為根生態(tài),成為華為的人才蓄水池,目前已經(jīng)有超2000名軟件精英通過大賽加入華為。

華為云CTO張宇昕在頒獎(jiǎng)總結(jié)致辭中表示,希望通過大賽找到一群志同道合的人,與華為一起攀登技術(shù)高峰,用軟件技術(shù)推動(dòng)科技進(jìn)步。

這種科技與人才互為表里的底蘊(yùn),是華為引領(lǐng)智能時(shí)代變革的核心競爭力。

通過一場大賽,為存力強(qiáng)基,為人才固本,為根技術(shù)生態(tài)培源。年輕人才和元?jiǎng)?chuàng)新,得以源源不斷地生長起來,這正是中國屹立于大模型時(shí)代的根源力量。

wKgZO2gGZzqAe66EAAIJ7nnPOUg338.jpg

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 華為
    +關(guān)注

    關(guān)注

    216

    文章

    35212

    瀏覽量

    255931
  • AI
    AI
    +關(guān)注

    關(guān)注

    88

    文章

    35164

    瀏覽量

    280014
  • 存力
    +關(guān)注

    關(guān)注

    0

    文章

    25

    瀏覽量

    194
  • AI大模型
    +關(guān)注

    關(guān)注

    0

    文章

    376

    瀏覽量

    614
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    得一微定義“AI芯片”,讓每比特?cái)?shù)據(jù)創(chuàng)造更多智能

    AI技術(shù)重塑全球產(chǎn)業(yè)格局的進(jìn)程中,計(jì)算范式正經(jīng)歷從運(yùn)算器為中心到存儲器為中心的范式躍遷。這一變革重新定義了“先進(jìn)”的邊界。 得一微電子首次創(chuàng)造性地提出“AI
    的頭像 發(fā)表于 06-04 09:03 ?220次閱讀

    Deepseek海SD3403邊緣計(jì)算AI產(chǎn)品系統(tǒng)

    的訓(xùn)練樣本和訓(xùn)練 模型,具體商業(yè)價(jià)值和保密性,采用海SD3403邊緣計(jì)算AI服務(wù)器+多路安防監(jiān)控IPC,讓差異化AI視頻系統(tǒng), 成本控制極具市場競爭
    發(fā)表于 04-28 11:05

    模型時(shí)代的深度學(xué)習(xí)框架

    作者:算魔方創(chuàng)始/英特爾創(chuàng)新大使劉 在 CNN時(shí)代 ,AI模型的參數(shù)規(guī)模都在百萬級別,僅需
    的頭像 發(fā)表于 04-25 11:43 ?268次閱讀
    大<b class='flag-5'>模型</b><b class='flag-5'>時(shí)代</b>的深度學(xué)習(xí)框架

    得一微:AI芯片,重構(gòu)計(jì)算范式

    。 ? 在近日舉行的MemoryS 2025上,得一微電子(YEESTOR)展示了其“IP設(shè)計(jì)-芯片設(shè)計(jì)-算法驅(qū)動(dòng)-創(chuàng)新”的全鏈條技術(shù)實(shí)力。公司首席市場官羅挺接受電子發(fā)燒友采訪時(shí)表示,得一微在業(yè)界首次提出“AI
    的頭像 發(fā)表于 04-21 16:22 ?1289次閱讀
    得一微:<b class='flag-5'>AI</b><b class='flag-5'>存</b><b class='flag-5'>力</b>芯片,重構(gòu)計(jì)算范式

    首創(chuàng)開源架構(gòu),天璣AI開發(fā)套件讓端側(cè)AI模型接入得心應(yīng)手

    AI巨頭強(qiáng)強(qiáng)聯(lián)手,勢必為智能體化AI體驗(yàn)時(shí)代按下超級加速鍵。 AI終端的下一步是“普適智能”,而不是“極限性能”。聯(lián)發(fā)科憑借天璣9400+強(qiáng)悍的端側(cè)
    發(fā)表于 04-13 19:52

    接棒算,慧榮科技以主控技術(shù)突破AI存儲極限

    電子發(fā)燒友網(wǎng)報(bào)道(文/黃山明)在AI的高速增長下,尤其是以DeepSeek為代表的AI模型推動(dòng)存儲需求激增,算增長倒逼
    的頭像 發(fā)表于 03-19 01:29 ?1795次閱讀
    <b class='flag-5'>存</b><b class='flag-5'>力</b>接棒算<b class='flag-5'>力</b>,慧榮科技以主控技術(shù)突破<b class='flag-5'>AI</b>存儲極限

    NV512H語音芯片IC用于機(jī)的應(yīng)用方案介紹

    在快節(jié)奏生活中,機(jī)成為營養(yǎng)制造機(jī),但傳統(tǒng)機(jī)型操作復(fù)雜。家電廠商結(jié)合智能家居趨勢,探索將語音芯片融入設(shè)計(jì)。NV512H語音芯片提升了機(jī)的操作便捷性和用戶體驗(yàn),成為智能家電市場的新
    的頭像 發(fā)表于 03-18 14:51 ?326次閱讀
    NV512H語音芯片IC用于<b class='flag-5'>破</b><b class='flag-5'>壁</b>機(jī)的應(yīng)用方案介紹

    直流無刷機(jī)解決方案

    機(jī)是集攪拌、加熱、于一體的家用電器,其機(jī)理是利用高速旋轉(zhuǎn)的刀片和機(jī)身內(nèi)壁的摩擦
    的頭像 發(fā)表于 11-08 11:35 ?2023次閱讀
    直流無刷<b class='flag-5'>破</b><b class='flag-5'>壁</b>機(jī)解決方案

    科技榮獲2024中國AI層創(chuàng)新企業(yè)

    中國科技產(chǎn)業(yè)智庫「甲子光年」主辦、中關(guān)村東升科學(xué)城協(xié)辦的「AI創(chuàng)生時(shí)代2024甲子引力X科技產(chǎn)業(yè)新風(fēng)向」大會在北京正式舉行。作為壓軸,「甲子光年」重磅發(fā)布了【星辰100】2024創(chuàng)新企業(yè)榜。知
    的頭像 發(fā)表于 11-06 15:30 ?952次閱讀

    AI時(shí)代的重要性及現(xiàn)狀:平衡發(fā)展與優(yōu)化配置的挑戰(zhàn)

    AI時(shí)代,算扮演著至關(guān)重要的角色。如果說數(shù)據(jù)是AI模型的“燃料”,那么算則是其強(qiáng)大的“動(dòng)
    的頭像 發(fā)表于 11-04 11:45 ?1172次閱讀

    與算并重:數(shù)據(jù)時(shí)代的雙刃劍

    在2024年的今天,人工智能(AI)技術(shù)已經(jīng)全面滲透至我們生活的方方面面,從醫(yī)療診斷到智能交通,從金融分析到智能家居,AI正以前所未有的速度重塑我們的世界。這一變革背后,算
    的頭像 發(fā)表于 10-08 16:00 ?1520次閱讀

    【「大模型時(shí)代的基礎(chǔ)架構(gòu)」閱讀體驗(yàn)】+ 未知領(lǐng)域的感受

    國慶前就收到《大模型時(shí)代的基礎(chǔ)架構(gòu)》一書,感謝電子發(fā)燒友論壇。歡度國慶之余,今天才靜下心來體驗(yàn)此書,書不厚,200余頁,彩色圖例,印刷精美! 當(dāng)初申請此書,主要是看到副標(biāo)題“大模型
    發(fā)表于 10-08 10:40

    2000 元檔魅族 Lucky 08,穿越旗艦機(jī)的 AI 封鎖線

    魅族Lucky 08,做旗艦級 AI 終端的
    的頭像 發(fā)表于 09-24 18:09 ?2736次閱讀
    2000 元檔魅族 Lucky 08,穿越旗艦機(jī)的 <b class='flag-5'>AI</b> 封鎖線

    模型時(shí)代的算需求

    現(xiàn)在AI已進(jìn)入大模型時(shí)代,各企業(yè)都爭相部署大模型,但如何保證大模型的算,以及相關(guān)的穩(wěn)定性和性能
    發(fā)表于 08-20 09:04

    名單公布!【書籍評測活動(dòng)NO.41】大模型時(shí)代的基礎(chǔ)架構(gòu):大模型中心建設(shè)指南

    基于TOGAF方法論,剖析業(yè)界知名案例的設(shè)計(jì)方案。 全書總計(jì)13章。第1章講解AI與大模型時(shí)代對基礎(chǔ)架構(gòu)的需求;第2章講解軟件程序與專用硬件的結(jié)合,涉及GPU并行運(yùn)算庫、機(jī)器學(xué)習(xí)程序的開發(fā)框架和分布式
    發(fā)表于 08-16 18:33