揭開智能數(shù)據(jù)的神秘面紗

2019年3月21日，雨霽風光，春分天氣，千花百卉爭明媚。在剛剛結束的2019華為中國生態(tài)伙伴大會上，華為各個產(chǎn)品線的亮點發(fā)布如百花爭艷。其中新更名的華為智能數(shù)據(jù)解決方案備受關注。

2019年3月21日，華為2019生態(tài)伙伴大會，

華為員工為嘉賓講解智能數(shù)據(jù)展臺

嘉賓都在問，什么是智能數(shù)據(jù)？智能數(shù)據(jù)會為我們的行業(yè)帶來什么樣的改變？別著急，小I妹帶你們揭開智能數(shù)據(jù)的神秘面紗。

產(chǎn)業(yè)和行業(yè)趨勢

邁入智能時代，“三萬四化”成為IT發(fā)展的主流趨勢，即萬物感知，萬物互聯(lián)，萬物智能和移動化，共享化，數(shù)字化，智能化。面對更多的智能設備數(shù)量，更大的業(yè)務處理量，更復雜的業(yè)務場景。企業(yè)只有不斷提高數(shù)據(jù)處理能力才能應對未來挑戰(zhàn)。同時，個性化時代，融合數(shù)據(jù)處理能力成為提升企業(yè)競爭力的關鍵要素。如：精準營銷場景需要處理用戶信息、關系圖譜、人臉識別、圖像識別等數(shù)據(jù)，公交線路規(guī)劃場景需要處理用戶信息，地理信息，交通熱力圖等數(shù)據(jù)。

華為分布式、全融合的智能數(shù)據(jù)解決方案應運而生，組合多種算力，支持實時處理、多模分析、高并發(fā)等場景，幫助企業(yè)直面未來趨勢與挑戰(zhàn)。

華為智能數(shù)據(jù)解決方案

華為戰(zhàn)略投入智能數(shù)據(jù)，通過芯片、軟件架構創(chuàng)新提供領先的智能數(shù)據(jù)解決方案，幫助客戶解決海量數(shù)據(jù)的實時處理、融合分析、協(xié)同計算等挑戰(zhàn)，加速企業(yè)數(shù)字化與智能化進程，幫助客戶實現(xiàn)商業(yè)成功。

華為智能數(shù)據(jù)解決方案包括兩個重要部分：FusionInsight大數(shù)據(jù)解決方案和企業(yè)級分布式數(shù)據(jù)庫。

華為FusionInsight大數(shù)據(jù)解決方案

快速集成結構化、半結構化和非結構化等多種數(shù)據(jù)，支持離線分析、實時流處理、實時檢索、交互查詢等各種數(shù)據(jù)處理能力，針對政府、金融、運營商、公共安全等數(shù)據(jù)密集型行業(yè)的客戶需求，打造了敏捷、智慧、融合的大數(shù)據(jù)解決方案，讓客戶可以更快、更準、更穩(wěn)的從各類繁雜無序的海量數(shù)據(jù)中發(fā)現(xiàn)價值，助力政府高效治理和企業(yè)卓越經(jīng)營。

FusionInsight大數(shù)據(jù)平臺包括HD數(shù)據(jù)底座、數(shù)據(jù)使能工具(DLF、RTD)與數(shù)據(jù)服務HDS，同時也包括一站式AI開發(fā)平臺ModelArts，整合機器學習，深度學習和圖分析能力，一鍵式模型發(fā)布。多源數(shù)據(jù)接入，海量結構化&非結構化數(shù)據(jù)存儲；開放算法倉，無縫接入伙伴模型，保障模型安全；異構資源調度，CPU&GPU資源統(tǒng)一調度，容器化，細粒度資源復。

企業(yè)級分布式數(shù)據(jù)庫

采用MPP(Massive Parallel Processing大規(guī)模并行處理)架構，支持行存儲與列存儲，提供PB級別數(shù)據(jù)量的處理能力。核心技術上跟傳統(tǒng)數(shù)據(jù)庫相比有巨大優(yōu)勢，可以解決行業(yè)用戶的數(shù)據(jù)處理性能問題，可以為超大規(guī)模數(shù)據(jù)管理提供高性價比的通用計算平臺，并可用于支撐各類數(shù)據(jù)倉庫系統(tǒng)、BI(Business Intelli-gence)系統(tǒng)和決策支持系統(tǒng)，統(tǒng)一為上層應用的決策分析等提供服務。

智能數(shù)據(jù)將如何改變我們的行業(yè)？

01

極致交互式分析體驗

在金融行業(yè)，對各類統(tǒng)計報表和用戶特征數(shù)據(jù)的即席查詢，是支持金融行業(yè)客戶經(jīng)營決策和精準營銷的重要手段。但是，Hadoop傳統(tǒng)組件的Hive&SparkSQL，比較適合于離線計算這種批處理場景，在交互查詢場景資源消耗高、響應也較慢，無法滿足幾秒時間內完成業(yè)務靈活交互查詢的訴求。

華為智能數(shù)據(jù)搭載的Elk引擎則專業(yè)面向Hadoop交互分析場景，每秒萬級記錄查詢條件下，交互查詢能夠達到秒級響應（通常要求3秒以內）。同時，華為Elk引擎，支持SQL2003標準，以及OLTP/OLAP/大數(shù)據(jù)統(tǒng)一的SQL分析體驗，從而讓用戶輕松實現(xiàn)極致性能的靈活分析體驗。

02

跨地域協(xié)同分析

在集團公司和運營商場景中，集團公司總部統(tǒng)計分析所有子公司經(jīng)營數(shù)據(jù)，運營商客戶進行大數(shù)據(jù)平臺和數(shù)倉平臺的融合分析?？缂杭翱鐢?shù)據(jù)源的協(xié)同計算，在目前的應用呈現(xiàn)明顯的增長趨勢。面對這種需要跨源、甚至跨地域的協(xié)同分析場景，傳統(tǒng)方式可能需要進行大量的數(shù)據(jù)遷移，將跨源、跨地域的數(shù)據(jù)搬遷到一起，然后再進行融合分析。這種方式，需要花費大量的時間和資源來進行數(shù)據(jù)遷移，工作量大，效率也很低。

華為提供的協(xié)同計算引擎Pollux，支持GaussDB、Hive、Spark集群的跨源、跨數(shù)據(jù)中心數(shù)據(jù)統(tǒng)一訪問，以及SQL算子的計算下推，從而實現(xiàn)數(shù)據(jù)免遷移的情況下完成跨源跨集群數(shù)據(jù)的協(xié)同計算，大幅提升用戶的分析體驗和效率，實現(xiàn)跨中心融合分析從天到秒~小時級的時效提升。

03

統(tǒng)一的數(shù)據(jù)集成和治理

政府行業(yè)目前的IT水平較薄弱，但由于各個委辦局數(shù)據(jù)類型多，導致數(shù)據(jù)集成、數(shù)據(jù)開發(fā)、數(shù)據(jù)治理難度加大。華為數(shù)據(jù)湖工廠DLF，可以為客戶提供一個一站式數(shù)據(jù)集成、數(shù)據(jù)開發(fā)、數(shù)據(jù)治理的平臺，從而降低大數(shù)據(jù)應用開發(fā)門檻和業(yè)務開發(fā)難度，降低運維管理復雜度。通過使用DLF，用戶可以一站式建設數(shù)倉，無需切換多個工具；用戶可以管理多種大數(shù)據(jù)服務，實現(xiàn)跨服務的作業(yè)開發(fā)；用戶還可以在線對SQL/Shell/Python等腳本進行編輯調試，并通過拖拽方式進行復雜工作流編排，輕松實現(xiàn)任務的調度和運維管理。

04

軟硬協(xié)同，提供最優(yōu)性能算力組合

軟硬協(xié)同是將軟件能力和硬件能力協(xié)同適配，實現(xiàn)業(yè)務能力最優(yōu)的重要手段。華為有著豐富的軟硬件技術積累，既有著全國第一的大數(shù)據(jù)軟件平臺，也有國內領先的智能計算和存儲產(chǎn)品線，特別是19年年初發(fā)布的基于鯤鵬920芯片的泰山服務器，更是將ARM服務器的能力推向了一個新的高度。

華為智能數(shù)據(jù)解決方案，充分發(fā)揮華為軟硬件技術積累深厚的優(yōu)勢，通過軟硬協(xié)同技術適配ARM多核服務器，發(fā)揮ARM在大數(shù)據(jù)處理中的天然優(yōu)勢，性能優(yōu)于同等規(guī)格X86 CPU 30%。同時軟硬結合實現(xiàn)數(shù)據(jù)透明加密，加密性能相較軟件加密提升300%。除此之外，熱數(shù)據(jù)加速技術、內存加速技術以及RDMA技術，提升數(shù)據(jù)訪問性能50%等等。這些技術的實施，大幅提升了華為智能數(shù)據(jù)解決方案的能力，也能夠更好的為用戶提供服務。同時智能數(shù)據(jù)解決方案也支持通用X86架構的部署，并且支持ARM和X86的跨集群混合部署。

05

專業(yè)化的服務能力，保障項目成功實施

華為智能數(shù)據(jù)提供從咨詢規(guī)劃、大數(shù)據(jù)工程服務、大數(shù)據(jù)管理服務到運營優(yōu)化的專業(yè)服務。同時還提供客戶培訓與認證，使得客戶能力得以傳遞，人才能力得以發(fā)展。未來還將提供詳盡的二次開發(fā)課程與信息服務平臺，幫助合作伙伴更好使用華為平臺。

成功實踐和業(yè)界認可

華為智能數(shù)據(jù)解決方案已在超過60個國家成功商用，用友1500+商用客戶和500+合作伙伴。

01

華為智能數(shù)據(jù)解決方案助力工商銀行打造新一代融合數(shù)倉

基于通用X86開放架構的分布式數(shù)據(jù)庫平臺實現(xiàn)軟硬件解耦，在保護投資的同時提供面向未來架構演進的能力，全并行計算框架帶來30%以上的性能提升；支持在線擴容，擴容時間較之前縮短75%；融合架構實現(xiàn)多源數(shù)據(jù)統(tǒng)一存儲分析，全面支撐工商銀行未來大數(shù)據(jù)發(fā)展趨勢與需求。

02

重慶大數(shù)據(jù)，助力智慧重慶建設

華為參與重慶市的社會公共信息資源共享平臺建設，截至2018年底共享平臺已匯聚60個市級部門超過200億條大數(shù)據(jù)資源，支撐政務服務、人力社保、市場監(jiān)管、應急管理、精準脫貧、全域旅游等領域超過200個應用系統(tǒng)建設，累計數(shù)據(jù)共享使用條數(shù)超過40億條，全面助力智慧重慶建設。

?2017年IDC MarketScape中國大數(shù)據(jù)管理平臺廠商評估領導者象限第一。

?2018年IDC MarketScape中國政務大數(shù)據(jù)領導者象限第一。

?華為智能數(shù)據(jù)解決方案連續(xù)3年入圍Gartner MagicQuadrant for Data Management Solutions for Analytics，中國區(qū)廠商排名第一。