非結(jié)構(gòu)化數(shù)據(jù)遍布于各行各業(yè)，這類數(shù)據(jù)在醫(yī)療、安防監(jiān)控、政務(wù)、金融等行業(yè)中尤為明顯，他們都有著海量的非結(jié)構(gòu)化數(shù)據(jù)。同時(shí)，非結(jié)構(gòu)化數(shù)據(jù)正以60%增長(zhǎng)趨勢(shì)逐年遞增。毫無疑問，這一增長(zhǎng)趨勢(shì)對(duì)企業(yè)如何更好的管理好PB級(jí)數(shù)據(jù)提出了嚴(yán)峻挑戰(zhàn)。

存儲(chǔ)系統(tǒng)中數(shù)據(jù)的變化：以結(jié)構(gòu)化為主的數(shù)據(jù)，正在向非結(jié)構(gòu)化數(shù)據(jù)等混合型數(shù)據(jù)進(jìn)行大量的轉(zhuǎn)變。據(jù)IDC（天風(fēng)證券，2020）預(yù)測(cè)，到2025年我國(guó)數(shù)據(jù)將達(dá)48.6ZB（18年至25年復(fù)合增速超過30%），其中80%為非結(jié)構(gòu)化數(shù)據(jù)（XML、圖像、聲音、超媒體等信息）。

存儲(chǔ)系統(tǒng)中規(guī)模的變化：在大數(shù)據(jù)、5G、云計(jì)算等新一代信息技術(shù)的催化下，企業(yè)需要應(yīng)對(duì)PB級(jí)（1PB=1024TB）容量的數(shù)據(jù)存儲(chǔ)需求，延續(xù)使用集中存儲(chǔ)的方式，在單一存儲(chǔ)節(jié)點(diǎn)上scale-up。不僅會(huì)對(duì)存儲(chǔ)系統(tǒng)的性能造成影響，同時(shí)會(huì)受限于物理介質(zhì)、傳輸媒介及TCO成本等因素，最終造成容量上的局限性，很顯然縱向擴(kuò)展的形式并不適應(yīng)于現(xiàn)代化的企業(yè)級(jí)存儲(chǔ)需求。

為了更加適應(yīng)動(dòng)態(tài)變化的應(yīng)用場(chǎng)景，出現(xiàn)了去中心化Ceph的分布式存儲(chǔ)架構(gòu)，它是由MON、OSD、MDS與RADOS等核心組件構(gòu)成。與HDFS相比之下，沒有通過NameNode元數(shù)據(jù)尋址的方式，而是通過一種CRUSH算法，通過兩次映射計(jì)算數(shù)據(jù)存儲(chǔ)位置來確定如何存儲(chǔ)和檢索數(shù)據(jù)。CRUSH 使用戶端能直接與OSDs進(jìn)行通信，且并行讀寫速度更高。

去中心化Ceph存儲(chǔ)系統(tǒng)架構(gòu)，特別是在支持塊存儲(chǔ)特性上，可以使數(shù)據(jù)具有較強(qiáng)的一致性，Ceph可使用任何一個(gè)運(yùn)行在該存儲(chǔ)節(jié)點(diǎn)上的OSD獲取數(shù)據(jù)信息，相對(duì)于Swift及HDFS來說更加靈活。以Ceph分布式存儲(chǔ)架構(gòu)為代表的柏科數(shù)據(jù)ISCloud分布式存儲(chǔ)系統(tǒng)，一方面通過CRUSH算法實(shí)現(xiàn)了存儲(chǔ)單元間的數(shù)據(jù)重新分布及智能交互。另一方面scale-out的擴(kuò)張形式，突破了規(guī)模化擴(kuò)張?jiān)斐傻男阅芷款i。

在安防監(jiān)控的應(yīng)用場(chǎng)景下，數(shù)據(jù)存儲(chǔ)經(jīng)歷了幾個(gè)階段，逐步從DVR存儲(chǔ)過渡到網(wǎng)絡(luò)前端加網(wǎng)絡(luò)存儲(chǔ)階段。隨著網(wǎng)絡(luò)帶寬的提高，高清應(yīng)用的普及，對(duì)安防存儲(chǔ)系統(tǒng)的容量和數(shù)據(jù)安全提出了更高的要求。柏科數(shù)據(jù)ISCloud分布式存儲(chǔ)系統(tǒng)在面對(duì)監(jiān)控業(yè)務(wù)海量非結(jié)構(gòu)化數(shù)據(jù)存儲(chǔ)方面，相比于傳統(tǒng)安防類存儲(chǔ)具有天然的優(yōu)勢(shì)，也便于與其他調(diào)用平臺(tái)結(jié)合，將為視頻監(jiān)控行業(yè)帶來存儲(chǔ)架構(gòu)和安全性上全面的升級(jí)變更。

實(shí)現(xiàn)性能提升&保障業(yè)務(wù)連續(xù)性：

? 將業(yè)務(wù)系統(tǒng)遷移至ISCloud分布式存儲(chǔ)系統(tǒng)，解決了存儲(chǔ)節(jié)點(diǎn)單點(diǎn)故障的問題，使其業(yè)務(wù)不中斷；

? 提升節(jié)點(diǎn)間訪問能力，以保證數(shù)據(jù)的寫入讀取和各節(jié)點(diǎn)之間數(shù)據(jù)交互的穩(wěn)定性及一致性。

實(shí)現(xiàn)多重?cái)?shù)據(jù)保護(hù)：

? 結(jié)合ISCloud分布式存儲(chǔ)系統(tǒng)應(yīng)用層數(shù)據(jù)保護(hù)策略（副本冗余技術(shù)或糾刪技術(shù)等），采取糾刪N+2的數(shù)據(jù)保護(hù)方式，對(duì)數(shù)據(jù)進(jìn)行冗余保護(hù)措施；