淺談MapR大數(shù)據(jù)融合平臺(tái)
大?。?/span>0.2 MB 人氣: 2017-10-12 需要積分:1
推薦 + 挑錯(cuò) + 收藏(0) + 用戶評(píng)論(0)
標(biāo)簽:mapr(2087)

Hadoop企業(yè)版發(fā)行商MapR于3月8日宣布,旗下融合數(shù)據(jù)平臺(tái)(Converged Data Platform)正式上市,并加強(qiáng)Docker容器(Container)、安全性、數(shù)據(jù)治理等功能。另外,此平臺(tái)現(xiàn)在也包含了開源Hadoop專案Apache Myraid,讓集群管理工具YARN和Mesos間共享數(shù)據(jù)中心的資源,并支持多租戶環(huán)境。
MapR融合數(shù)據(jù)平臺(tái)將Hadoop和Spark、網(wǎng)絡(luò)規(guī)模(Web-Scale)的儲(chǔ)存、NoSQL、數(shù)據(jù)串流功能等整合到一個(gè)統(tǒng)一的集群,提供用戶可以部署即時(shí)數(shù)據(jù)應(yīng)用程序。MapR Platform由業(yè)界最快速、最可靠、安全且開放的數(shù)據(jù)基礎(chǔ)設(shè)施所驅(qū)動(dòng),極大降低了TCO,并實(shí)現(xiàn)了全局的實(shí)時(shí)數(shù)據(jù)應(yīng)用。而該平臺(tái)主要由大數(shù)據(jù)事件串流系統(tǒng)MapR Streams、NoSQL數(shù)據(jù)庫(kù)管理系統(tǒng)MapR DB,以及基于POSIX檔案系統(tǒng)型態(tài)的儲(chǔ)存系統(tǒng)MapR FS所組成。comScore的CTO Mike Brown這樣評(píng)價(jià)MapR:“MapR位列以數(shù)據(jù)為中心的業(yè)務(wù)解決方案的前沿,他們提供了最佳的大數(shù)據(jù)平臺(tái),同時(shí)其核心架構(gòu)成功地滿足了現(xiàn)代數(shù)據(jù)的挑戰(zhàn)”。
在這次的更新中,MapR透過狀態(tài)數(shù)據(jù)(Stateful Data)來加強(qiáng)Container與持續(xù)儲(chǔ)存(Persistent Storage)的互動(dòng),而狀態(tài)數(shù)據(jù)就是指數(shù)據(jù)的背景,舉例來說,顧客的銷售歷史記錄,每個(gè)重要信息構(gòu)成了歷史記錄,歷史記錄則構(gòu)成了數(shù)據(jù)背景,而此數(shù)據(jù)能供應(yīng)用程序持續(xù)檢索。另外,融合數(shù)據(jù)平臺(tái)之于Docker Container就像數(shù)據(jù)服務(wù)層,提供Container分布式且彈性的儲(chǔ)存,也包含容器化(Containerized)應(yīng)用程序所需的數(shù)據(jù)庫(kù)和信息與串流功能。
在安全性方面,融合數(shù)據(jù)平臺(tái)現(xiàn)在利用訪問控制表達(dá)式(Access Control Expressions,ACE)來描述使用者存取的數(shù)據(jù)權(quán)限,根據(jù)MapR,ACE讓系統(tǒng)管理員可用1~2行的代碼,就能描述指定的存取權(quán)限。而除了ACE外,MapR也在MapR Volume多加一層數(shù)據(jù)檔案的防護(hù),加強(qiáng)多租戶控制,以確保數(shù)據(jù)僅供指定群組存取。
而在性能的部分,研究機(jī)構(gòu)ESG進(jìn)行MapR Streams的基準(zhǔn)測(cè)試,結(jié)果顯示在每秒3.5GB的吞吐量下,每秒可處理超過1800萬(wàn)筆 信息。另外,MapR DB現(xiàn)在支持原生JSON文件儲(chǔ)存格式,使用者可在SSD中,透過平行I/O即時(shí)存取NoSQL數(shù)據(jù)。
搭建融合數(shù)據(jù)平臺(tái)是為了滿足融合運(yùn)營(yíng)和分析管道的要求,以及隨后的捕獲、處理、存儲(chǔ)和查詢階段的存儲(chǔ)要求,一個(gè)基于大數(shù)據(jù)閃存的數(shù)據(jù)構(gòu)造是融合平臺(tái)理想的存儲(chǔ)層構(gòu)建模塊,可讓數(shù)據(jù)管道的每個(gè)階段都受益。
?
非常好我支持^.^
(0) 0%
不好我反對(duì)
(0) 0%
下載地址
淺談MapR大數(shù)據(jù)融合平臺(tái)下載
相關(guān)電子資料下載
- MapReduce和Spark概要介紹 525
- Apache Storm的安裝部署 460
- 谷歌大腦和DeepMind聯(lián)合發(fā)布堪稱AI界的MapReduce 4057
- MapReduce實(shí)現(xiàn)與自定義詞典文件基于hanLP的中文分詞詳解 137
- 一種基于MapReduce模型的并行化k-medoids聚類算法 4585
- mapreduce二次排序_ mapreduce二次排序原理 5874
- mapreduce工作原理圖文詳解_Map、Reduce任務(wù)中Shuffle和排序 7654
- mapreduce設(shè)置map個(gè)數(shù)_mapreduce設(shè)置map內(nèi)存 11044
- Mapreduce和Hive中map reduce個(gè)數(shù)設(shè)定 5742
- mapreduce的應(yīng)用開發(fā)步驟 4577