當(dāng)AlphaZero在2018年12月登上頂級(jí)期刊Science的封面——基于神經(jīng)網(wǎng)絡(luò)在數(shù)據(jù)和算法上的突破以及5000個(gè)TPU提供的強(qiáng)大算力,AlphaZero從零訓(xùn)練8小時(shí)擊敗最強(qiáng)圍棋AI(李世石版AlphaGo);當(dāng)自動(dòng)駕駛、人臉識(shí)別、4K/8K以及VR 2K等加速商用……接踵而來(lái)的新應(yīng)用催生了新數(shù)據(jù)時(shí)代的到來(lái),指數(shù)級(jí)增長(zhǎng)的數(shù)據(jù)需要存儲(chǔ)做出根本性改變。
12月11-12日,2018中國(guó)存儲(chǔ)與數(shù)據(jù)峰會(huì)(DSS2018)在北京國(guó)際飯店舉辦。浪潮存儲(chǔ)研發(fā)總監(jiān)李輝在現(xiàn)場(chǎng)做了題為“新數(shù)據(jù)時(shí)代,新存儲(chǔ)之道”的主題演講。李輝表示:“當(dāng)前,客戶和組織已經(jīng)走入了一個(gè)由數(shù)據(jù)變化帶來(lái)的新數(shù)據(jù)時(shí)代,數(shù)據(jù)在數(shù)據(jù)形態(tài)、 部署環(huán)境、應(yīng)用模式和價(jià)值需求四大方面均出現(xiàn)了更為精細(xì)化的需求,并在不同行業(yè)和場(chǎng)景中出現(xiàn)了更為差異化的體現(xiàn)。在這一時(shí)代下,應(yīng)用不僅是把基礎(chǔ)設(shè)施的資源價(jià)值最大化地挖掘出來(lái),更需要把整個(gè)數(shù)據(jù)資源——無(wú)論是關(guān)鍵數(shù)據(jù)還是沉睡數(shù)據(jù)的價(jià)值都能夠最大化地挖掘、貢獻(xiàn)出來(lái)。”
新數(shù)據(jù)時(shí)代,新存儲(chǔ)之道
新數(shù)據(jù)時(shí)代 行業(yè)應(yīng)用場(chǎng)景日益細(xì)化帶來(lái)新挑戰(zhàn)
根據(jù)IDC預(yù)測(cè),隨著數(shù)據(jù)的指數(shù)級(jí)增長(zhǎng),全球數(shù)據(jù)總量預(yù)計(jì)2020年達(dá)到44個(gè)ZB,中國(guó)數(shù)據(jù)量將達(dá)到8060個(gè)EB,占全球數(shù)據(jù)總量的18%。隨著數(shù)據(jù)量的增長(zhǎng),數(shù)據(jù)類型的多樣性和數(shù)據(jù)源也在增加,因而提高了IT基礎(chǔ)設(shè)施的復(fù)雜性。
5G、云計(jì)算、物聯(lián)網(wǎng)、大數(shù)據(jù)、人工智能、區(qū)塊鏈……不斷發(fā)展的新技術(shù)逐漸讓世界連成了一張大網(wǎng),并驅(qū)動(dòng)了自動(dòng)駕駛、人臉識(shí)別等大量新應(yīng)用的涌現(xiàn)。而IT新技術(shù)的連續(xù)性迭代,更加速推動(dòng)了物理世界與數(shù)字世界的融合,構(gòu)建了一個(gè)新數(shù)據(jù)時(shí)代。在新數(shù)據(jù)時(shí)代下,各個(gè)垂直行業(yè)的業(yè)務(wù)需求呈現(xiàn)新的特點(diǎn),并為IT和存儲(chǔ)帶來(lái)新需求特點(diǎn),存儲(chǔ)系統(tǒng)也在架構(gòu)、容量、性能和管理上面臨更為差異化的挑戰(zhàn)。
例如,在超大規(guī)模的互聯(lián)網(wǎng)云數(shù)據(jù)中心和企業(yè)的中大型數(shù)據(jù)中心里,服務(wù)器變得越來(lái)越多,數(shù)據(jù)計(jì)算集群和處理應(yīng)用的集群規(guī)模都非常大,會(huì)用虛擬化技術(shù)跑各種各樣的應(yīng)用,在這樣的虛擬化環(huán)境下,存儲(chǔ)需要支撐上萬(wàn)臺(tái)的物理機(jī)和數(shù)十萬(wàn)臺(tái)虛擬機(jī)的運(yùn)行,這成為當(dāng)今存儲(chǔ)碰到的一大挑戰(zhàn)。
云計(jì)算、大數(shù)據(jù)、AI等新技術(shù)驅(qū)動(dòng)數(shù)據(jù)存儲(chǔ)變革
在AI應(yīng)用中,要拿到很多原始的數(shù)據(jù)進(jìn)行標(biāo)記、處理,如從視頻、圖片、語(yǔ)音、文本里拿出數(shù)據(jù),從而會(huì)拿出很多小文件進(jìn)行模型訓(xùn)練,有時(shí)一個(gè)大型AI應(yīng)用需要處理的小文件會(huì)達(dá)到萬(wàn)億級(jí)別,這同樣對(duì)存儲(chǔ)的性能提出挑戰(zhàn)。
再以行業(yè)應(yīng)用為例,在科研與航空衛(wèi)星行業(yè),以生物科學(xué)研究為代表的科研應(yīng)用和航空航天衛(wèi)星技術(shù)的持續(xù)升級(jí),帶來(lái)了越來(lái)越精細(xì)化的應(yīng)用需求,實(shí)時(shí)處理、極速響應(yīng)成為常態(tài)。在廣電媒資行業(yè),從4K到8K到VR 2K,一方面觀眾對(duì)高品質(zhì)、零等待的浸入式體驗(yàn)追求了無(wú)止境,另一方面短視頻、直播平臺(tái)等新產(chǎn)業(yè)發(fā)展,亟需廣電企業(yè)進(jìn)行多元化融合,以提升用戶粘性、實(shí)現(xiàn)資源整合和創(chuàng)新。這一切,不僅對(duì)存儲(chǔ)提出了容量、性能、架構(gòu)及管理上的新挑戰(zhàn),并且要求供應(yīng)商必須以場(chǎng)景化應(yīng)用為核心,驅(qū)動(dòng)產(chǎn)品技術(shù)與解決方案的開(kāi)發(fā)。
“場(chǎng)景驅(qū)動(dòng)開(kāi)發(fā)” 賦能浪潮超大規(guī)模軟件定義存儲(chǔ)
浪潮聚焦新數(shù)據(jù)時(shí)代的新數(shù)據(jù)形態(tài)、新部署環(huán)境、新應(yīng)用模式和新價(jià)值需求的“四新”產(chǎn)業(yè)趨勢(shì),以超大規(guī)模軟件定義存儲(chǔ)(Large-ScaleSDS)滿足新數(shù)據(jù)時(shí)代的EB容量、億級(jí)IOPS、彈性架構(gòu)及智能管理需求。
由于容量和性能能夠隨著非結(jié)構(gòu)化數(shù)據(jù)的增長(zhǎng)實(shí)現(xiàn)線性擴(kuò)展,軟件定義存儲(chǔ)將成為新數(shù)據(jù)時(shí)代的主要存儲(chǔ)方式。這一觀點(diǎn)得到了分析機(jī)構(gòu)的印證。據(jù)Gartner調(diào)研,目前大約40%的企業(yè)數(shù)據(jù)存儲(chǔ)在可橫向擴(kuò)展的企業(yè)數(shù)據(jù)中心或云數(shù)據(jù)中心,到2022年,這一比例將超過(guò)80%。據(jù)IDC預(yù)測(cè),2017年至2021年,全球軟件定義存儲(chǔ)(SDS)市場(chǎng)年復(fù)合增長(zhǎng)率將達(dá)到13.5%,2021年?duì)I收達(dá)到約162億美元。
基于對(duì)新數(shù)據(jù)時(shí)代市場(chǎng)需求的洞察,浪潮積蓄力量持續(xù)發(fā)力Large-Scale SDS。李輝表示,浪潮SDS在技術(shù)上的優(yōu)勢(shì)在于,依托“軟件定義+硬件重構(gòu)”理念,面向客戶的實(shí)際應(yīng)用,對(duì)軟件和硬件進(jìn)行集成測(cè)試,并對(duì)整個(gè)研發(fā)過(guò)程的性能、可用性、適用性等進(jìn)行嚴(yán)格控制,實(shí)現(xiàn)軟硬件緊密協(xié)同,最大程度發(fā)揮軟件定義存儲(chǔ)的效能,以“極致容量、極致性能、極致簡(jiǎn)單”滿足新數(shù)據(jù)時(shí)代存儲(chǔ)在容量、性能、架構(gòu)及管理上的需求。
浪潮超大規(guī)模軟件定義存儲(chǔ)
當(dāng)然,在當(dāng)今復(fù)雜的應(yīng)用環(huán)境下,單純發(fā)力技術(shù),是無(wú)法適配和支撐用戶大規(guī)模海量數(shù)據(jù)應(yīng)用的。浪潮SDS可以作為應(yīng)用場(chǎng)景群和技術(shù)場(chǎng)景群的橋梁,以場(chǎng)景為核心深度優(yōu)化,把場(chǎng)景間的個(gè)性需求、場(chǎng)景內(nèi)的共性需求、及其對(duì)應(yīng)的最優(yōu)技術(shù)實(shí)現(xiàn)路線和方案,在浪潮SDS上真正實(shí)現(xiàn),從而保障各種場(chǎng)景的個(gè)性化需求真正得到滿足。浪潮SDS力圖做到“個(gè)性化量產(chǎn)”,為各類有個(gè)性需求的場(chǎng)景進(jìn)行定向深度開(kāi)發(fā)和優(yōu)化,可以針對(duì)EB級(jí)數(shù)據(jù)的處理進(jìn)行定制開(kāi)發(fā)與戰(zhàn)略合作。
例如,通過(guò)與交通領(lǐng)域合作伙伴在平安城市應(yīng)用方面的交流,浪潮以插卡的模式,將GPU引用軟件定義存儲(chǔ)產(chǎn)品中,合作伙伴由此可以抽取圖像幀對(duì)視頻圖像進(jìn)行大數(shù)據(jù)分析。又如,為滿足廣電媒資視頻云對(duì)云數(shù)據(jù)中心統(tǒng)一管理的需求,浪潮對(duì)管理接口進(jìn)行深度開(kāi)發(fā)。再如,在動(dòng)漫制作領(lǐng)域,浪潮基于軟件定義存儲(chǔ)AS13000為用戶的動(dòng)漫影視制作提供了千萬(wàn)級(jí)小文件并發(fā)的SDS大平臺(tái)。
翻開(kāi)浪潮存儲(chǔ)的PB級(jí)大工程名單,可以看到軟件定義存儲(chǔ)AS13000實(shí)現(xiàn)了在某資源中心一套70PB、某運(yùn)營(yíng)商數(shù)十套每套PB級(jí)系統(tǒng)、某省政務(wù)云90個(gè)節(jié)點(diǎn)、20PB容量、成都三環(huán)路視頻監(jiān)控系統(tǒng)中108節(jié)點(diǎn)、20PB容量、廣電總局141個(gè)節(jié)點(diǎn)、10PB的云平臺(tái)、華強(qiáng)方特5PB、千萬(wàn)級(jí)小文件并發(fā)性能的動(dòng)漫制作平臺(tái)、中石油東方物探34個(gè)節(jié)點(diǎn)、5PB容量的高性能計(jì)算平臺(tái)的應(yīng)用部署。
正因?yàn)閷?yīng)用與技術(shù)在浪潮的軟件定義存儲(chǔ)產(chǎn)品上實(shí)現(xiàn)了對(duì)接,浪潮連續(xù)3年浪潮軟件定義存儲(chǔ)銷售額同比增長(zhǎng)超100%,在金融、通信、政府、企業(yè)、互聯(lián)網(wǎng)、媒資、醫(yī)療、教育等行業(yè),進(jìn)行了眾多大規(guī)模部署。2018年,浪潮存儲(chǔ)入圍Gartner分布式存儲(chǔ)魔力象限。
李輝分享軟件定義存儲(chǔ)的PB級(jí)大工程
李輝表示,過(guò)去3年,浪潮累計(jì)投入超過(guò)10個(gè)億,傾力開(kāi)發(fā)浪潮新存儲(chǔ),重構(gòu)原有架構(gòu),滿足以智慧場(chǎng)景為代表的應(yīng)用。未來(lái),浪潮存儲(chǔ)將繼續(xù)堅(jiān)持以“數(shù)據(jù)與介質(zhì)的連接者”形象,幫助企業(yè)更好的掌握“新數(shù)據(jù)時(shí)代”下的新場(chǎng)景,讓企業(yè)和組織用好“新”數(shù)據(jù),在市場(chǎng)上占得先機(jī)。
-
神經(jīng)網(wǎng)絡(luò)
+關(guān)注
關(guān)注
42文章
4814瀏覽量
103548 -
云計(jì)算
+關(guān)注
關(guān)注
39文章
7976瀏覽量
140000 -
大數(shù)據(jù)
+關(guān)注
關(guān)注
64文章
8959瀏覽量
140154
原文標(biāo)題:新數(shù)據(jù)時(shí)代,做好數(shù)據(jù)與介質(zhì)的連接者
文章出處:【微信號(hào):inspurstorage,微信公眾號(hào):浪潮存儲(chǔ)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
評(píng)論