debezium
多種資料庫的變更資料擷取。請在 https://github.com/debezium/dbz/issues 記錄問題。
debezium 是什麼?
多種資料庫的變更資料擷取。請在 https://github.com/debezium/dbz/issues 記錄問題。
debezium 概覽
這是什麼
Debezium 是一個開放原始碼專案,提供低延遲的資料串流平台,用於變更資料擷取(CDC)。它監控資料庫,並讓應用程式消費資料庫中每一列層級變更所產生的事件。只有已提交的變更才會被看見,因此應用程式無需擔心交易或已回滾的變更。Debezium 提供所有變更事件的單一模型,抽象化不同資料庫管理系統的複雜性。它將資料變更的歷史記錄在持久化、複製的日誌中,讓應用程式可以隨時停止並重新啟動,並消費所有遺漏的事件,確保完整且正確的處理。
主要功能
- 低延遲的資料串流,用於變更資料擷取(CDC) - 監控資料庫並擷取列層級的變更 - 只有已提交的變更對消費者可見 - 跨不同資料庫系統的單一變更事件模型 - 持久化、複製的日誌支援重新啟動並恢復,不遺失資料 - 重複使用 Kafka 和 Kafka Connect 以實現持久性、可靠性和容錯能力 - 提供嵌入式連接器引擎,適用於不需要 Kafka 的應用程式
使用情境
- 快取失效:當記錄變更時自動失效快取項目 - 簡化單體應用程式:使用 CDC 在資料庫提交後執行額外工作,避免雙重寫入 - 共享資料庫:多個應用程式可以監控同一個資料庫並對變更做出反應 - 資料整合:使用 CDC 和事件處理在多個系統間同步資料 - CQRS(命令查詢責任分離):將寫入操作擷取到持久化、有序的串流中,用於非同步更新讀取端
快速開始
請參閱儲存庫的 README 以取得安裝與快速開始的說明。
授權與價格
採用 Apache License 2.0 授權。debezium-ddl-parser 模組中的 Antlr 語法採用 MIT 授權。此為開放原始碼專案,無需付費。
內容整理自該專案公開的 README 與儲存庫資訊。