毫無(wú)疑問(wèn)，乘著云計(jì)算發(fā)展的東風(fēng)，Ceph已經(jīng)是當(dāng)今最火熱的軟件定義存儲(chǔ)開源項(xiàng)目。如下圖所示，它在同一底層平臺(tái)之上可以對(duì)外提供三種存儲(chǔ)接口，分別是文件存儲(chǔ)、對(duì)象存儲(chǔ)以及塊存儲(chǔ)，本文主要關(guān)注的是對(duì)象存儲(chǔ)即radosgw。

基于Ceph可方便快捷地搭建安全性好、可用性高、擴(kuò)展性好的私有化存儲(chǔ)平臺(tái)。私有化存儲(chǔ)平臺(tái)雖然以其安全性的優(yōu)勢(shì)受到越來(lái)越多的關(guān)注，但私有化存儲(chǔ)平臺(tái)也存在諸多弊端。

例如在如下場(chǎng)景中，某跨國(guó)公司需要在國(guó)外訪問(wèn)本地的業(yè)務(wù)數(shù)據(jù)，我們?cè)撊绾沃С诌@種遠(yuǎn)距離的數(shù)據(jù)訪問(wèn)需求呢。如果僅僅是在私有化環(huán)境下，無(wú)非以下兩種解決方案：直接跨地域去訪問(wèn)本地?cái)?shù)據(jù)中心中的數(shù)據(jù)，毫無(wú)疑問(wèn)，這種解決方案會(huì)帶來(lái)較高的訪問(wèn)延遲，在國(guó)外自建數(shù)據(jù)中心，不斷將本地的數(shù)據(jù)異步復(fù)制到遠(yuǎn)程數(shù)據(jù)中心，這種解決方案的缺點(diǎn)是成本太高。

在這種場(chǎng)景下，單純的私有云存儲(chǔ)平臺(tái)并不能很好的解決的上面的問(wèn)題。但是，通過(guò)采用混合云解決方案卻能較好地滿足上述需求。對(duì)于前文所述遠(yuǎn)距離數(shù)據(jù)訪問(wèn)的場(chǎng)景，我們完全能借助公有云在遠(yuǎn)程的數(shù)據(jù)中心節(jié)點(diǎn)作為存儲(chǔ)點(diǎn)，將本地?cái)?shù)據(jù)中心的數(shù)據(jù)異步復(fù)制到公有云，再通過(guò)終端直接訪問(wèn)公有云中的數(shù)據(jù)，這種方式在綜合成本和快捷性方面具備較大優(yōu)勢(shì)，適合這種遠(yuǎn)距離的數(shù)據(jù)訪問(wèn)需求。

基于Ceph對(duì)象存儲(chǔ)的混合云機(jī)制是對(duì)Ceph生態(tài)的良好補(bǔ)充， 基于此，社區(qū)將在Mimic這個(gè)版本上發(fā)布RGW Cloud Sync特性，初步支持將RGW中的數(shù)據(jù)導(dǎo)出到支持s3協(xié)議的公有云對(duì)象存儲(chǔ)平臺(tái)，比如我們測(cè)試中使用的騰訊云COS，同Mulsite中的其他插件一樣，RGW Cloud Sync這個(gè)特性也是做成了一個(gè)全新的同步插件（目前稱之為aws sync module），能兼容支持S3協(xié)議。RGW Cloud Sync特性的整體發(fā)展歷程如下：

Suse公司貢獻(xiàn)了初始版本，這個(gè)版本僅支持簡(jiǎn)單上傳Red Hat在這個(gè)初始版本之上實(shí)現(xiàn)了完整語(yǔ)義的支持，比如multipart上傳、刪除等，考慮到同步大文件的時(shí)候可能會(huì)造成內(nèi)存爆炸的問(wèn)題，還實(shí)現(xiàn)了流式上傳，對(duì)于Ceph社區(qū)即將在M版本發(fā)布的這個(gè)公有云同步特性，騰訊云存儲(chǔ)團(tuán)隊(duì)也在不斷關(guān)注并進(jìn)行了實(shí)際落地測(cè)試使用，并根據(jù)其中存在的問(wèn)題進(jìn)行了反饋及開發(fā)。

其中，Cloud Zone內(nèi)部包含一個(gè)公有云同步插件，它被配置為只讀zone，用以將Rgw Zone中寫入的數(shù)據(jù)跨地域同步至騰訊云公有云對(duì)象存儲(chǔ)平臺(tái)COS之上。順利實(shí)現(xiàn)將數(shù)據(jù)從RGW中同步備份至公有云平臺(tái)，并且支持自由定制來(lái)實(shí)現(xiàn)將數(shù)據(jù)導(dǎo)入至不同云端路徑，同時(shí)我們還完善了同步狀態(tài)顯示功能，能較快監(jiān)測(cè)到同步過(guò)程中發(fā)生的錯(cuò)誤以及當(dāng)前落后的數(shù)據(jù)等。

RGW Cloud Sync這個(gè)特性本質(zhì)上是基于Multisite之上的一個(gè)全新的同步插件（aws sync module）。首先來(lái)看Multisite的一些核心機(jī)制。Multisite是RGW中數(shù)據(jù)遠(yuǎn)程備份的一種解決方案，本質(zhì)上來(lái)說(shuō)它是一種基于日志的異步復(fù)制策略。

Zone：存在于一個(gè)獨(dú)立的Ceph集群，由一組rgw提供服務(wù)，對(duì)應(yīng)一組后臺(tái)的poolZonegroup：包含至少一個(gè)Zone，Zone之間同步數(shù)據(jù)和元數(shù)據(jù)Realm：一個(gè)獨(dú)立的命名空間，包含至少一個(gè)Zonegroup，Zonegroup之間同步元數(shù)據(jù)

Multisite中的一些工作機(jī)制，分別是Data Sync、Async Framework、Sync Plugin這三部分。其中Data Sync部分主要分析Multisite中的數(shù)據(jù)同步流程，Async Framework部分會(huì)介紹Multisite中的協(xié)程框架，Sync Plugin部分會(huì)介紹Multisite中的一些同步插件。

Data Sync用以將一個(gè)Zonegroup內(nèi)的數(shù)據(jù)進(jìn)行備份，一個(gè)Zone內(nèi)寫入的數(shù)據(jù)會(huì)最終同步到Zonegroup內(nèi)所有Zone上。

Init：將遠(yuǎn)程的source zone與local zone建立日志分片對(duì)應(yīng)關(guān)系，即將遠(yuǎn)程的datalog映射到本地，后續(xù)通過(guò)datalog就知道有沒有數(shù)據(jù)需要更新Build Full Sync Map：獲取遠(yuǎn)程bucket的元信息并建立映射關(guān)系來(lái)記錄bucket的同步狀態(tài)，如果配置multisite的時(shí)候source zone是沒有數(shù)據(jù)的，則這步會(huì)直接跳過(guò)Data Sync：開始o(jì)bject數(shù)據(jù)的同步，通過(guò)RGW api來(lái)獲取source zone的datalog并消費(fèi)對(duì)應(yīng)的bilog來(lái)同步數(shù)據(jù)。