資料介紹
軟件簡介
Debezium 是一個為捕獲數據更改 (Change Data Capture, CDC) 提供低延遲的流式處理平臺,利用 Kafka 和 Kafka Connect 實現了持久性、可靠性和容錯性。
Debezium 有很多非常有價值的使用場景,我們在這兒僅僅列出幾個更常見的使用場景。
緩存失效 (Cache invalidation)
在緩存中緩存的條目(entry)在源頭被更改或者被刪除的時候立即讓緩存中的條目失效。如果緩存在一個獨立的進程中運行(例如Redis,Memcache,Infinispan或者其他的),那么簡單的緩存失效邏輯可以放在獨立的進程或服務中,從而簡化主應用的邏輯。在一些場景中,緩存失效邏輯可以更復雜一點,讓它利用更改事件中的更新數據去更新緩存中受影響的條目。
簡化單體應用(Simplifying monolithic applications)
許多應用更新數據庫,然后在數據庫中的更改被提交后,做一些額外的工作:更新搜索索引,更新緩存,發送通知,運行業務邏輯,等等。這種情況通常稱為雙寫(dual-writes),因為應用沒有在一個事務內寫多個系統。這樣不僅應用邏輯復雜難以維護,而且雙寫容易丟失數據或者在一些系統更新成功而另一些系統沒有更新成功的時候造成不同系統之間的狀態不一致。使用捕獲更改數據技術(change data capture,CDC),在源數據庫的數據更改提交后,這些額外的工作可以被放在獨立的線程或者進程(服務)中完成。這種實現方式的容錯性更好,不會丟失事件,容易擴展,并且更容易支持升級。
共享數據庫(Sharing databases)
當多個應用共用同一個數據庫的時候,一個應用提交的更改通常要被另一個應用感知到。一種實現方式是使用消息總線,盡管非事務性(non-transactional)的消息總線總會受上面提到的雙寫(dual-writes)影響。但是,另一種實現方式,即Debezium,變得很直接:每個應用可以直接監控數據庫的更改,并且響應更改。
數據集成(Data integration)
數據通常被存儲在多個地方,尤其是當數據被用于不同的目的的時候,會有不同的形式。保持多系統的同步是很有挑戰性的,但是可以通過使用Debezium加上簡單的事件處理邏輯來實現簡單的ETL類型的解決方案。
命令查詢職責分離(CQRS)
在命令查詢職責分離?Command Query Responsibility Separation (CQRS)?架構模式中,更新數據使用了一種數據模型,讀數據使用了一種或者多種數據模型。由于數據更改被記錄在更新側(update-side),這些更改將被處理以更新各種讀展示。所以CQRS應用通常更復雜,尤其是他們需要保證可靠性和全序(totally-ordered)處理。Debezium和CDC可以使這種方式更可行:寫操作被正常記錄,但是Debezium捕獲數據更改,并且持久化到全序流里,然后供那些需要異步更新只讀視圖的服務消費。寫側(write-side)表可以表示面向領域的實體(domain-oriented entities),或者當CQRS和?Event Sourcing?結合的時候,寫側表僅僅用做追加操作命令事件的日志。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
- 时间敏感网络TSN流量捕获方法4次下载
- 时间敏感网络TSN流量捕获方法汇总8次下载
- 基于STM32f103的输入捕获测频率和占空比136次下载
- 半无数据调制的信号捕获跟踪算法综述14次下载
- 基于MATLAB的DSP控制系统仿真平台设计方案22次下载
- 能够捕获和显示的SignalTap_II_嵌入逻辑分析仪6次下载
- 一种捕获主题单词信息的主题模型JEA-LDA19次下载
- 基于Intel dpdk数据包捕获技术研究4次下载
- 基于FPGA实现扩频码的捕获27次下载
- 数据流捕获29次下载
- 一种基于FFT变换的数据辅助捕获方法19次下载
- 基于Jpcap的数据包捕获器的设计与实现38次下载
- 网络数据包捕获机制研究9次下载
- 以太网数据包捕获与转发技术63次下载
- 基于WINDCHILL 的PDM 工程变更管理研究Resea17次下载
- TSN抓包工具解密:数据包捕获,为什么选Profishark?1075次阅读
- Agith:openEuler 运维变更观测工具1316次阅读
- STM32基础知识:定时器输入捕获功能5279次阅读
- 多平台的关系数据库管理和开发工具1282次阅读
- 一文详解STM32输入捕获5291次阅读
- Versal GTY仿真:初始化,复位和速率变更1539次阅读
- 基于eBPF技术实现TLS加密的明文捕获2716次阅读
- 如何从Raspberry Pi Pico的模数转换器捕获数据计算?3123次阅读
- 可用于设计捕获系统的电源管理解决方案4459次阅读
- 基于PDM系统的工程变更优化研究与实践1246次阅读
- TensorFlow 2.0 将包含许多 API 变更5718次阅读
- 基于STM32定时器输入捕获解析6231次阅读
- 揭秘示波器四大捕获方式10269次阅读
- STM8自带输入捕获功能学习6140次阅读
- stm32定时器输入捕获24292次阅读
下載排行
本周
- 1山景DSP芯片AP8248A2數據手冊
- 1.06 MB | 532次下載 | 免費
- 2RK3399完整板原理圖(支持平板,盒子VR)
- 3.28 MB | 339次下載 | 免費
- 3TC358743XBG評估板參考手冊
- 1.36 MB | 330次下載 | 免費
- 4DFM軟件使用教程
- 0.84 MB | 295次下載 | 免費
- 5元宇宙深度解析—未來的未來-風口還是泡沫
- 6.40 MB | 227次下載 | 免費
- 6迪文DGUS開發指南
- 31.67 MB | 194次下載 | 免費
- 7元宇宙底層硬件系列報告
- 13.42 MB | 182次下載 | 免費
- 8FP5207XR-G1中文應用手冊
- 1.09 MB | 178次下載 | 免費
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234315次下載 | 免費
- 2555集成電路應用800例(新編版)
- 0.00 MB | 33566次下載 | 免費
- 3接口電路圖大全
- 未知 | 30323次下載 | 免費
- 4開關電源設計實例指南
- 未知 | 21549次下載 | 免費
- 5電氣工程師手冊免費下載(新編第二版pdf電子書)
- 0.00 MB | 15349次下載 | 免費
- 6數字電路基礎pdf(下載)
- 未知 | 13750次下載 | 免費
- 7電子制作實例集錦 下載
- 未知 | 8113次下載 | 免費
- 8《LED驅動電路設計》 溫德爾著
- 0.00 MB | 6656次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935054次下載 | 免費
- 2protel99se軟件下載(可英文版轉中文版)
- 78.1 MB | 537798次下載 | 免費
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420027次下載 | 免費
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234315次下載 | 免費
- 5Altium DXP2002下載入口
- 未知 | 233046次下載 | 免費
- 6電路仿真軟件multisim 10.0免費下載
- 340992 | 191187次下載 | 免費
- 7十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183279次下載 | 免費
- 8proe5.0野火版下載(中文版免費下載)
- 未知 | 138040次下載 | 免費
評論