資料介紹
軟件簡介
Debezium 是一個為捕獲數據更改 (Change Data Capture, CDC) 提供低延遲的流式處理平臺,利用 Kafka 和 Kafka Connect 實現了持久性、可靠性和容錯性。
Debezium 有很多非常有價值的使用場景,我們在這兒僅僅列出幾個更常見的使用場景。
緩存失效 (Cache invalidation)
在緩存中緩存的條目(entry)在源頭被更改或者被刪除的時候立即讓緩存中的條目失效。如果緩存在一個獨立的進程中運行(例如Redis,Memcache,Infinispan或者其他的),那么簡單的緩存失效邏輯可以放在獨立的進程或服務中,從而簡化主應用的邏輯。在一些場景中,緩存失效邏輯可以更復雜一點,讓它利用更改事件中的更新數據去更新緩存中受影響的條目。
簡化單體應用(Simplifying monolithic applications)
許多應用更新數據庫,然后在數據庫中的更改被提交后,做一些額外的工作:更新搜索索引,更新緩存,發送通知,運行業務邏輯,等等。這種情況通常稱為雙寫(dual-writes),因為應用沒有在一個事務內寫多個系統。這樣不僅應用邏輯復雜難以維護,而且雙寫容易丟失數據或者在一些系統更新成功而另一些系統沒有更新成功的時候造成不同系統之間的狀態不一致。使用捕獲更改數據技術(change data capture,CDC),在源數據庫的數據更改提交后,這些額外的工作可以被放在獨立的線程或者進程(服務)中完成。這種實現方式的容錯性更好,不會丟失事件,容易擴展,并且更容易支持升級。
共享數據庫(Sharing databases)
當多個應用共用同一個數據庫的時候,一個應用提交的更改通常要被另一個應用感知到。一種實現方式是使用消息總線,盡管非事務性(non-transactional)的消息總線總會受上面提到的雙寫(dual-writes)影響。但是,另一種實現方式,即Debezium,變得很直接:每個應用可以直接監控數據庫的更改,并且響應更改。
數據集成(Data integration)
數據通常被存儲在多個地方,尤其是當數據被用于不同的目的的時候,會有不同的形式。保持多系統的同步是很有挑戰性的,但是可以通過使用Debezium加上簡單的事件處理邏輯來實現簡單的ETL類型的解決方案。
命令查詢職責分離(CQRS)
在命令查詢職責分離?Command Query Responsibility Separation (CQRS)?架構模式中,更新數據使用了一種數據模型,讀數據使用了一種或者多種數據模型。由于數據更改被記錄在更新側(update-side),這些更改將被處理以更新各種讀展示。所以CQRS應用通常更復雜,尤其是他們需要保證可靠性和全序(totally-ordered)處理。Debezium和CDC可以使這種方式更可行:寫操作被正常記錄,但是Debezium捕獲數據更改,并且持久化到全序流里,然后供那些需要異步更新只讀視圖的服務消費。寫側(write-side)表可以表示面向領域的實體(domain-oriented entities),或者當CQRS和?Event Sourcing?結合的時候,寫側表僅僅用做追加操作命令事件的日志。
- 時間敏感網絡TSN流量捕獲方法
- 時間敏感網絡TSN流量捕獲方法匯總 6次下載
- 基于STM32f103的輸入捕獲測頻率和占空比 126次下載
- 半無數據調制的信號捕獲跟蹤算法綜述 14次下載
- 基于MATLAB的DSP控制系統仿真平臺設計方案 20次下載
- 能夠捕獲和顯示的SignalTap_II_嵌入邏輯分析儀 6次下載
- 一種捕獲主題單詞信息的主題模型JEA-LDA 19次下載
- 基于Intel dpdk數據包捕獲技術研究 4次下載
- 基于FPGA實現擴頻碼的捕獲
- 數據流捕獲
- 一種基于FFT變換的數據輔助捕獲方法
- 基于Jpcap的數據包捕獲器的設計與實現
- 網絡數據包捕獲機制研究
- 以太網數據包捕獲與轉發技術
- 基于WINDCHILL 的PDM 工程變更管理研究Resea
- TSN抓包工具解密:數據包捕獲,為什么選Profishark? 343次閱讀
- Agith:openEuler 運維變更觀測工具 715次閱讀
- STM32基礎知識:定時器輸入捕獲功能 2515次閱讀
- 多平臺的關系數據庫管理和開發工具 698次閱讀
- 一文詳解STM32輸入捕獲 4448次閱讀
- Versal GTY仿真:初始化,復位和速率變更 1009次閱讀
- 基于eBPF技術實現TLS加密的明文捕獲 2013次閱讀
- 如何從Raspberry Pi Pico的模數轉換器捕獲數據計算? 2580次閱讀
- 可用于設計捕獲系統的電源管理解決方案 4202次閱讀
- 基于PDM系統的工程變更優化研究與實踐 1069次閱讀
- TensorFlow 2.0 將包含許多 API 變更 5468次閱讀
- 基于STM32定時器輸入捕獲解析 5901次閱讀
- 揭秘示波器四大捕獲方式 1w次閱讀
- STM8自帶輸入捕獲功能學習 5646次閱讀
- stm32定時器輸入捕獲 2.3w次閱讀
下載排行
本周
- 1Keysight B1500A 半導體器件分析儀用戶手冊、說明書 (中文)
- 19.00 MB | 4次下載 | 免費
- 2使用TL431設計電源
- 0.67 MB | 2次下載 | 免費
- 3BT134雙向可控硅手冊
- 1.74 MB | 2次下載 | 1 積分
- 4一種新型高效率的服務器電源系統
- 0.85 MB | 1次下載 | 1 積分
- 5LabVIEW環形控件
- 0.01 MB | 1次下載 | 1 積分
- 6PR735,使用UCC28060的600W交錯式PFC轉換器
- 540.03KB | 1次下載 | 免費
- 751單片機核心板原理圖
- 0.12 MB | 1次下載 | 5 積分
- 8BP2879DB支持調光調滅的非隔離低 PF LED 驅動器
- 1.44 MB | 1次下載 | 免費
本月
- 1開關電源設計原理手冊
- 1.83 MB | 54次下載 | 免費
- 2FS5080E 5V升壓充電兩串鋰電池充電管理IC中文手冊
- 8.45 MB | 23次下載 | 免費
- 3DMT0660數字萬用表產品說明書
- 0.70 MB | 13次下載 | 免費
- 4UC3842/3/4/5電源管理芯片中文手冊
- 1.75 MB | 12次下載 | 免費
- 5ST7789V2單芯片控制器/驅動器英文手冊
- 3.07 MB | 11次下載 | 1 積分
- 6TPS54202H降壓轉換器評估模塊用戶指南
- 1.02MB | 8次下載 | 免費
- 7STM32F101x8/STM32F101xB手冊
- 1.69 MB | 8次下載 | 1 積分
- 8基于MSP430FR6043的超聲波氣體流量計快速入門指南
- 2.26MB | 7次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935119次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關降壓/升壓雙向直流/直流轉換器 PCB layout 設計
- 1.48MB | 420061次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233084次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費下載
- 340992 | 191367次下載 | 10 積分
- 5十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183335次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81581次下載 | 10 積分
- 7Keil工具MDK-Arm免費下載
- 0.02 MB | 73807次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65987次下載 | 10 積分
評論
查看更多