資料介紹
軟件簡(jiǎn)介
Debezium 是一個(gè)為捕獲數(shù)據(jù)更改 (Change Data Capture, CDC) 提供低延遲的流式處理平臺(tái),利用 Kafka 和 Kafka Connect 實(shí)現(xiàn)了持久性、可靠性和容錯(cuò)性。
Debezium 有很多非常有價(jià)值的使用場(chǎng)景,我們?cè)谶@兒僅僅列出幾個(gè)更常見的使用場(chǎng)景。
緩存失效 (Cache invalidation)
在緩存中緩存的條目(entry)在源頭被更改或者被刪除的時(shí)候立即讓緩存中的條目失效。如果緩存在一個(gè)獨(dú)立的進(jìn)程中運(yùn)行(例如Redis,Memcache,Infinispan或者其他的),那么簡(jiǎn)單的緩存失效邏輯可以放在獨(dú)立的進(jìn)程或服務(wù)中,從而簡(jiǎn)化主應(yīng)用的邏輯。在一些場(chǎng)景中,緩存失效邏輯可以更復(fù)雜一點(diǎn),讓它利用更改事件中的更新數(shù)據(jù)去更新緩存中受影響的條目。
簡(jiǎn)化單體應(yīng)用(Simplifying monolithic applications)
許多應(yīng)用更新數(shù)據(jù)庫(kù),然后在數(shù)據(jù)庫(kù)中的更改被提交后,做一些額外的工作:更新搜索索引,更新緩存,發(fā)送通知,運(yùn)行業(yè)務(wù)邏輯,等等。這種情況通常稱為雙寫(dual-writes),因?yàn)閼?yīng)用沒有在一個(gè)事務(wù)內(nèi)寫多個(gè)系統(tǒng)。這樣不僅應(yīng)用邏輯復(fù)雜難以維護(hù),而且雙寫容易丟失數(shù)據(jù)或者在一些系統(tǒng)更新成功而另一些系統(tǒng)沒有更新成功的時(shí)候造成不同系統(tǒng)之間的狀態(tài)不一致。使用捕獲更改數(shù)據(jù)技術(shù)(change data capture,CDC),在源數(shù)據(jù)庫(kù)的數(shù)據(jù)更改提交后,這些額外的工作可以被放在獨(dú)立的線程或者進(jìn)程(服務(wù))中完成。這種實(shí)現(xiàn)方式的容錯(cuò)性更好,不會(huì)丟失事件,容易擴(kuò)展,并且更容易支持升級(jí)。
共享數(shù)據(jù)庫(kù)(Sharing databases)
當(dāng)多個(gè)應(yīng)用共用同一個(gè)數(shù)據(jù)庫(kù)的時(shí)候,一個(gè)應(yīng)用提交的更改通常要被另一個(gè)應(yīng)用感知到。一種實(shí)現(xiàn)方式是使用消息總線,盡管非事務(wù)性(non-transactional)的消息總線總會(huì)受上面提到的雙寫(dual-writes)影響。但是,另一種實(shí)現(xiàn)方式,即Debezium,變得很直接:每個(gè)應(yīng)用可以直接監(jiān)控?cái)?shù)據(jù)庫(kù)的更改,并且響應(yīng)更改。
數(shù)據(jù)集成(Data integration)
數(shù)據(jù)通常被存儲(chǔ)在多個(gè)地方,尤其是當(dāng)數(shù)據(jù)被用于不同的目的的時(shí)候,會(huì)有不同的形式。保持多系統(tǒng)的同步是很有挑戰(zhàn)性的,但是可以通過使用Debezium加上簡(jiǎn)單的事件處理邏輯來實(shí)現(xiàn)簡(jiǎn)單的ETL類型的解決方案。
命令查詢職責(zé)分離(CQRS)
在命令查詢職責(zé)分離?Command Query Responsibility Separation (CQRS)?架構(gòu)模式中,更新數(shù)據(jù)使用了一種數(shù)據(jù)模型,讀數(shù)據(jù)使用了一種或者多種數(shù)據(jù)模型。由于數(shù)據(jù)更改被記錄在更新側(cè)(update-side),這些更改將被處理以更新各種讀展示。所以CQRS應(yīng)用通常更復(fù)雜,尤其是他們需要保證可靠性和全序(totally-ordered)處理。Debezium和CDC可以使這種方式更可行:寫操作被正常記錄,但是Debezium捕獲數(shù)據(jù)更改,并且持久化到全序流里,然后供那些需要異步更新只讀視圖的服務(wù)消費(fèi)。寫側(cè)(write-side)表可以表示面向領(lǐng)域的實(shí)體(domain-oriented entities),或者當(dāng)CQRS和?Event Sourcing?結(jié)合的時(shí)候,寫側(cè)表僅僅用做追加操作命令事件的日志。
- 時(shí)間敏感網(wǎng)絡(luò)TSN流量捕獲方法
- 時(shí)間敏感網(wǎng)絡(luò)TSN流量捕獲方法匯總 7次下載
- 基于STM32f103的輸入捕獲測(cè)頻率和占空比 135次下載
- 半無數(shù)據(jù)調(diào)制的信號(hào)捕獲跟蹤算法綜述 14次下載
- 基于MATLAB的DSP控制系統(tǒng)仿真平臺(tái)設(shè)計(jì)方案 20次下載
- 能夠捕獲和顯示的SignalTap_II_嵌入邏輯分析儀 6次下載
- 能量捕獲無線傳感器網(wǎng)絡(luò)中低時(shí)延數(shù)據(jù)傳遞方案 0次下載
- 基于Intel dpdk數(shù)據(jù)包捕獲技術(shù)研究 4次下載
- 基于FPGA實(shí)現(xiàn)擴(kuò)頻碼的捕獲
- 數(shù)據(jù)流捕獲
- 一種基于FFT變換的數(shù)據(jù)輔助捕獲方法
- 基于Jpcap的數(shù)據(jù)包捕獲器的設(shè)計(jì)與實(shí)現(xiàn)
- 網(wǎng)絡(luò)數(shù)據(jù)包捕獲機(jī)制研究
- 以太網(wǎng)數(shù)據(jù)包捕獲與轉(zhuǎn)發(fā)技術(shù)
- 基于WINDCHILL 的PDM 工程變更管理研究Resea
- TSN抓包工具解密:數(shù)據(jù)包捕獲,為什么選Profishark? 636次閱讀
- Agith:openEuler 運(yùn)維變更觀測(cè)工具 989次閱讀
- STM32基礎(chǔ)知識(shí):定時(shí)器輸入捕獲功能 4032次閱讀
- 多平臺(tái)的關(guān)系數(shù)據(jù)庫(kù)管理和開發(fā)工具 937次閱讀
- 一文詳解STM32輸入捕獲 4926次閱讀
- Versal GTY仿真:初始化,復(fù)位和速率變更 1232次閱讀
- 基于eBPF技術(shù)實(shí)現(xiàn)TLS加密的明文捕獲 2342次閱讀
- 如何從Raspberry Pi Pico的模數(shù)轉(zhuǎn)換器捕獲數(shù)據(jù)計(jì)算? 2772次閱讀
- 可用于設(shè)計(jì)捕獲系統(tǒng)的電源管理解決方案 4312次閱讀
- 基于PDM系統(tǒng)的工程變更優(yōu)化研究與實(shí)踐 1151次閱讀
- TensorFlow 2.0 將包含許多 API 變更 5572次閱讀
- 基于STM32定時(shí)器輸入捕獲解析 6050次閱讀
- 揭秘示波器四大捕獲方式 1w次閱讀
- STM8自帶輸入捕獲功能學(xué)習(xí) 5848次閱讀
- stm32定時(shí)器輸入捕獲 2.3w次閱讀
下載排行
本周
- 1人形機(jī)器人電機(jī)驅(qū)動(dòng)和傳感報(bào)告
- 4.27 MB | 9次下載 | 免費(fèi)
- 2Altium Designer元件庫(kù)
- 17.11 MB | 6次下載 | 免費(fèi)
- 324V2A開關(guān)電源PCB資料分享
- 0.23 MB | 4次下載 | 1 積分
- 4GD100PIX120C6SNA規(guī)格書
- 0.98 MB | 3次下載 | 免費(fèi)
- 5Multisim模擬電路仿真教程
- 1.93 MB | 1次下載 | 3 積分
- 6BK7258英文規(guī)格書
- 1.67 MB | 1次下載 | 免費(fèi)
- 7RA4L1硬件手冊(cè)
- 21.89 MB | 1次下載 | 免費(fèi)
- 8RA4L1_SENSOR-V1原理圖
- 754.36 KB | 1次下載 | 免費(fèi)
本月
- 1晶體三極管的電流放大作用詳細(xì)說明
- 0.77 MB | 32次下載 | 2 積分
- 2雙極型三極管放大電路的三種基本組態(tài)的學(xué)習(xí)課件免費(fèi)下載
- 4.03 MB | 25次下載 | 1 積分
- 3AIWA HS-J303 MKⅡ維修手冊(cè)
- 22.47 MB | 24次下載 | 10 積分
- 4九陽(yáng)豆?jié){機(jī)高清原理圖
- 2.47 MB | 23次下載 | 1 積分
- 5多級(jí)放大電路的學(xué)習(xí)課件免費(fèi)下載
- 1.81 MB | 21次下載 | 2 積分
- 6AIWA HS-J202/HS-J202M/HS-J800維修手冊(cè)
- 13.60 MB | 16次下載 | 10 積分
- 7東芝彩色電視機(jī)29SF6C維修說明書
- 4.86 MB | 9次下載 | 1 積分
- 8人形機(jī)器人電機(jī)驅(qū)動(dòng)和傳感報(bào)告
- 4.27 MB | 9次下載 | 免費(fèi)
總榜
- 1matlab軟件下載入口
- 未知 | 935127次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關(guān)降壓/升壓雙向直流/直流轉(zhuǎn)換器 PCB layout 設(shè)計(jì)
- 1.48MB | 420063次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233089次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費(fèi)下載
- 340992 | 191382次下載 | 10 積分
- 5十天學(xué)會(huì)AVR單片機(jī)與C語(yǔ)言視頻教程 下載
- 158M | 183338次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81586次下載 | 10 積分
- 7Keil工具M(jìn)DK-Arm免費(fèi)下載
- 0.02 MB | 73814次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65988次下載 | 10 積分
評(píng)論