1月15日，巨杉數(shù)據(jù)庫(kù)舉行SequoiaDB新特性及開源項(xiàng)目發(fā)布活動(dòng)。本次活動(dòng)回顧了巨杉數(shù)據(jù)庫(kù)深耕JSON文檔型數(shù)據(jù)庫(kù)12年的發(fā)展歷程與技術(shù)演進(jìn)，全面解讀了SequoiaDB包括在高可用、安全、實(shí)時(shí)、易用性四個(gè)方向的技術(shù)特性，宣布了2024年面向技術(shù)社區(qū)的開源計(jì)劃。此次發(fā)布活動(dòng)不僅是對(duì)SequoiaDB性能的全面介紹，更是對(duì)十余年來(lái)始終堅(jiān)守以JSON文檔型數(shù)據(jù)庫(kù)內(nèi)核為技術(shù)底座的發(fā)展歷程的深刻回顧。不忘來(lái)時(shí)路，方知向何行，巨杉數(shù)據(jù)庫(kù)也將在2024年新年伊始，迎來(lái)新的篇章，開啟新的征程！

穩(wěn)健發(fā)展，行業(yè)影響力不斷提升

回顧過(guò)去，巨杉數(shù)據(jù)庫(kù)自2011年研發(fā)內(nèi)核、2012年公司成立，至2013年推出SequoiaDB v1.0版本，再到如今已走過(guò)十二個(gè)春秋。歷經(jīng)12年的洗禮，巨杉數(shù)據(jù)庫(kù)也取得了令人矚目的成就。目前，巨杉數(shù)據(jù)庫(kù)已經(jīng)在超過(guò)100家大型銀行及金融機(jī)構(gòu)的核心生產(chǎn)業(yè)務(wù)規(guī)模應(yīng)用，覆蓋各行業(yè)的企業(yè)用戶總數(shù)超過(guò)1000家。在金融行業(yè)，其客戶群體涵蓋國(guó)有銀行、股份制銀行、省級(jí)農(nóng)信、城商行、保險(xiǎn)、證券等金融機(jī)構(gòu)，同時(shí)還積極擴(kuò)展政府、汽車、新能源等多個(gè)行業(yè)客戶，贏得了廣泛的市場(chǎng)認(rèn)可。其中超過(guò)50家企業(yè)的應(yīng)用時(shí)間已超過(guò)6年，最長(zhǎng)的系統(tǒng)運(yùn)行時(shí)間甚至達(dá)9年。自成立以來(lái)，公司實(shí)現(xiàn)穩(wěn)健發(fā)展，行業(yè)影響力不斷提升，數(shù)據(jù)量及業(yè)務(wù)接入保持持續(xù)增長(zhǎng)態(tài)勢(shì)。

守正創(chuàng)新，發(fā)展JSON文檔型內(nèi)核

巨杉數(shù)據(jù)庫(kù)SequoiaDB以 JSON 文檔型數(shù)據(jù)庫(kù)內(nèi)核為技術(shù)底座，通過(guò)分布式架構(gòu)為眾多客戶提供了多元化的業(yè)務(wù)和全方位的支持。正是因?yàn)閷?duì)技術(shù)創(chuàng)新的堅(jiān)持以及對(duì)市場(chǎng)需求的洞察，巨杉數(shù)據(jù)庫(kù)始終堅(jiān)守JSON文檔型內(nèi)核，在持續(xù)迭代中實(shí)現(xiàn)創(chuàng)新發(fā)展。

在JSON基礎(chǔ)能力方面，從最初 v1版本，實(shí)現(xiàn) CURD 原子性的操作以及基礎(chǔ)的ACID支持，到 v2 版本逐步提升對(duì)LOB大對(duì)象的存儲(chǔ)能力，標(biāo)志著巨杉數(shù)據(jù)庫(kù)具備“多模數(shù)據(jù)”處理能力，同時(shí)支持存儲(chǔ)過(guò)程、聚集計(jì)算等特性。在 v3.0 版本中，進(jìn)一步提供自增序列全文檢索、基于時(shí)間點(diǎn)的數(shù)據(jù)恢復(fù)和兼容部分 Mongo 語(yǔ)法?？缭?.0版本，到v5.0 版本，SequoiaDB 著力提升穩(wěn)定性能，對(duì)于統(tǒng)計(jì)信息、訪問(wèn)計(jì)劃、存儲(chǔ)等進(jìn)行了大量?jī)?yōu)化，提供死鎖檢測(cè)等功能，并進(jìn)一步地兼容 Mongo 3、 Mongo 4 的語(yǔ)法。

在分布式管理方面，從基礎(chǔ)的多分區(qū)原生分布式架構(gòu)，逐步提供讀寫分離、主子表、策略訪問(wèn)、多中心容災(zāi)、精細(xì)化容災(zāi)等特性，持續(xù)增強(qiáng)分布式能力。

在安全性方面，涵蓋從基礎(chǔ)的鑒權(quán)、加密到信創(chuàng)的各類能力。此外，推出了SCM內(nèi)容管理引擎，專注于非結(jié)構(gòu)化數(shù)據(jù)和多模數(shù)據(jù)處理的統(tǒng)一數(shù)據(jù)生命周期管理。

在易用性方面，通過(guò)SAC運(yùn)營(yíng)的管理平臺(tái)，全面提升DBA運(yùn)維的便捷性。

十二年來(lái)，巨杉數(shù)據(jù)庫(kù)基于JSON文檔型數(shù)據(jù)底座和分布式架構(gòu)的不斷更新與迭代，為企業(yè)提供可靠的數(shù)據(jù)處理和存儲(chǔ)解決方案，幫助企業(yè)優(yōu)化業(yè)務(wù)效率，提升客戶滿意度。

廣泛拓展，基于文檔型技術(shù)的應(yīng)用場(chǎng)景

在中國(guó)乃至全球范圍內(nèi)，“CM場(chǎng)景”是文檔型技術(shù)應(yīng)用中重要且突出的場(chǎng)景?；谔幚矶嘧兊臄?shù)據(jù)結(jié)構(gòu)和龐大的數(shù)據(jù)量的迫切需求，催生了“CM內(nèi)容管理平臺(tái)”，同時(shí)極大地推動(dòng)了SequoiaDB技術(shù)的創(chuàng)新。巨杉數(shù)據(jù)庫(kù)持續(xù)跟進(jìn)客戶需求，進(jìn)行技術(shù)迭代，實(shí)現(xiàn)從1.0 到 5.0 的跨越式發(fā)展。巨杉數(shù)據(jù)庫(kù)為金融銀行客戶提供，穩(wěn)定、可靠、可持續(xù)擴(kuò)展的「CM內(nèi)容平臺(tái)」成為「銀行影像平臺(tái)」及「非結(jié)構(gòu)化管理平臺(tái)」的數(shù)據(jù)基礎(chǔ)設(shè)施，目前已吸納超過(guò)100家客戶使用該場(chǎng)景?？梢哉f(shuō)，基于文檔型技術(shù)并應(yīng)用于“CM內(nèi)容管理平臺(tái)”場(chǎng)景是巨杉數(shù)據(jù)庫(kù)取得的最為顯著的成果之一，這一場(chǎng)景也持續(xù)為巨杉數(shù)據(jù)庫(kù)貢獻(xiàn)了超過(guò)85%的客戶及營(yíng)收，成為業(yè)務(wù)的主打業(yè)務(wù)場(chǎng)景。

此外，文檔型數(shù)據(jù)庫(kù)在在線業(yè)務(wù)系統(tǒng)、實(shí)時(shí)數(shù)據(jù)湖、IoT領(lǐng)域以及AGI人工智能等領(lǐng)域也得到廣泛應(yīng)用。JSON靈活的格式適合各種在線業(yè)務(wù)系統(tǒng)，尤其是面向需要快速迭代開發(fā)的各類APP的業(yè)務(wù)應(yīng)用，基于文檔型數(shù)據(jù)庫(kù)的開發(fā)，可以顯著提升團(tuán)隊(duì)的研發(fā)效率。在實(shí)時(shí)數(shù)據(jù)湖方面，巨杉數(shù)據(jù)庫(kù)借助JSON靈活的數(shù)據(jù)處理能力，已助力多家客戶構(gòu)建全量歷史數(shù)據(jù)平臺(tái)，支持跨系統(tǒng)、跨業(yè)務(wù)的實(shí)時(shí)高并發(fā)數(shù)據(jù)查詢。

Vector Search基于文檔型技術(shù)，探索AGI數(shù)據(jù)應(yīng)用新邊界

AGI 通用人工智能的發(fā)展，將進(jìn)一步推動(dòng)JSON文檔型數(shù)據(jù)類型的應(yīng)用（實(shí)際上，本次發(fā)布活動(dòng)中，Vector Searche部分的講解也是通過(guò)AI技術(shù)合成的）。

傳統(tǒng)AI應(yīng)用中，需要存取及處理的是，海量的半結(jié)構(gòu)化「 CM 內(nèi)容管理」數(shù)據(jù)、「動(dòng)態(tài)標(biāo)簽」數(shù)據(jù)，以及各類非結(jié)構(gòu)化對(duì)象數(shù)據(jù)。這些都正是 SequoiaDB 過(guò)去12年聚焦及取得顯著成果的領(lǐng)域技術(shù)，而 AGI 全新的爆發(fā)性發(fā)展，必將對(duì) JSON 文檔型技術(shù)，帶來(lái)全新的機(jī)遇及技術(shù)挑戰(zhàn)。當(dāng)前，業(yè)界領(lǐng)先的 Open AI、文心一言等大模型平臺(tái)中，JSON 已經(jīng)被指定為對(duì)內(nèi)，及對(duì)外，函數(shù)調(diào)用的，標(biāo)準(zhǔn)數(shù)據(jù)傳輸格式。

另外，我們可以看到 “向量數(shù)據(jù)” 在 AGI 通用人工智能發(fā)展中，得到了關(guān)鍵的應(yīng)用，需要更有效的數(shù)據(jù)庫(kù)處理能力。

向量數(shù)據(jù)的存放格式，天然就可以用 JSON 結(jié)構(gòu)表示，非常適合通過(guò)文檔型數(shù)據(jù)庫(kù)處理。然而，單獨(dú)使用向量數(shù)據(jù)，并不能解決業(yè)務(wù)的全景問(wèn)題。在業(yè)務(wù)過(guò)程中，向量數(shù)據(jù)還必須與其他業(yè)務(wù)數(shù)據(jù)進(jìn)行組合使用，才能發(fā)揮其價(jià)值。因此 SequoiaDB 也正在探索，為文檔型數(shù)據(jù)庫(kù)提供 「Vector Search 向量搜索」能力，為保存到 SequoiaDB 的向量數(shù)據(jù)，提供高效的查詢能力，這一特性將在2024年與大家見面。

要注意的是，我們并不需要發(fā)展獨(dú)立的向量數(shù)據(jù)庫(kù)產(chǎn)品。而是基于深耕了12年的 JSON 文檔型數(shù)據(jù)庫(kù)底座技術(shù)為基礎(chǔ)，進(jìn)行向量查詢能力的擴(kuò)展，這將可以幫助企業(yè)，驅(qū)動(dòng)實(shí)體世界的更多數(shù)據(jù)，和 AGI 通用人工智能進(jìn)行有效鏈接，釋放全量數(shù)據(jù)價(jià)值。

四大特性，釋放全量數(shù)據(jù)價(jià)值

巨杉數(shù)據(jù)庫(kù)基于JSON文檔型底座對(duì)SequoiaDB 進(jìn)行了全面升級(jí)，此次發(fā)布活動(dòng)全面解讀了SequoiaDB 的四大特性——高可用、安全、實(shí)時(shí)和易用。

高可用：文檔型數(shù)據(jù)庫(kù)處理的數(shù)據(jù)，包括了結(jié)構(gòu)化的元數(shù)據(jù)、半結(jié)構(gòu)化的標(biāo)簽數(shù)據(jù)，以及非結(jié)構(gòu)化的對(duì)象數(shù)據(jù)。對(duì)于PB級(jí)大數(shù)據(jù)或上百節(jié)點(diǎn)規(guī)模的大集群，在面對(duì)重大災(zāi)難時(shí)的數(shù)據(jù)可靠性、數(shù)據(jù)一致性和系統(tǒng)可用性時(shí)都面臨著巨大挑戰(zhàn)。精細(xì)化容災(zāi)能有效地幫助客戶實(shí)現(xiàn)針對(duì)這些數(shù)據(jù)的多中心容災(zāi)，從而提升整體系統(tǒng)的高可用和數(shù)據(jù)高可靠能力。

安全：巨杉數(shù)據(jù)庫(kù)不僅在技術(shù)上通過(guò)國(guó)密算法和硬件加速來(lái)平衡安全與性能，還提供了跨國(guó)內(nèi)外不同芯片、不同操作系統(tǒng)的混合部署能力。這意味著巨杉數(shù)據(jù)庫(kù)可以實(shí)現(xiàn)集群的異構(gòu)部署，平滑地進(jìn)行硬件資源的替換，對(duì)上層業(yè)務(wù)系統(tǒng)做到完全透明，保障業(yè)務(wù)連續(xù)性。

實(shí)時(shí)：巨杉數(shù)據(jù)庫(kù)憑借JSON文檔型數(shù)據(jù)結(jié)構(gòu)的Schema靈活性，為企業(yè)提供了全量數(shù)據(jù)底座。DDL的實(shí)時(shí)變更、橫向擴(kuò)展能力，以及高性能的并發(fā)點(diǎn)查能力等都顛覆了傳統(tǒng)ODS數(shù)據(jù)貼源層的界限，使得ODS能夠服務(wù)于實(shí)時(shí)業(yè)務(wù)，滿足對(duì)客實(shí)時(shí)數(shù)據(jù)查詢和企業(yè)內(nèi)部跨業(yè)務(wù)數(shù)據(jù)實(shí)時(shí)匯總的需求。

易用：巨杉數(shù)據(jù)庫(kù)進(jìn)一步增強(qiáng)了SAC的監(jiān)控、告警和管理等功能。一站式的數(shù)據(jù)管理工具，極大地方便了DBA的管理工作，提高了問(wèn)題排查的效率并簡(jiǎn)化了對(duì)系統(tǒng)的監(jiān)控管理，從而為業(yè)務(wù)帶來(lái)更高的穩(wěn)定性和效率。

開放、開源共赴新篇章

新年伊始，巨杉數(shù)據(jù)庫(kù)也將譜寫嶄新篇章。發(fā)布會(huì)介紹，巨杉數(shù)據(jù)庫(kù)決定將在2024年Q1再次發(fā)布開源版本，不僅希望獲得社區(qū)同仁的參與和監(jiān)督，讓產(chǎn)品未來(lái)發(fā)展更透明；同時(shí)也承擔(dān)歷史責(zé)任，希望通過(guò)開源的方式吸引更多合作伙伴，共同發(fā)展中國(guó)的分布式文檔型數(shù)據(jù)庫(kù)生態(tài)鏈，促進(jìn)業(yè)務(wù)的快速迭代和開發(fā)效率的提升。近期，SequoiaDB新版本的源代碼將通過(guò)Gitee、GitCode及GitHub再次開源。

審核編輯 黃宇