91超碰碰碰碰久久久久久综合_超碰av人澡人澡人澡人澡人掠_国产黄大片在线观看画质优化_txt小说免费全本

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

MySql的Binlog日志工具舉例分析

發布時間:2021-12-04 13:57:32 來源:億速云 閱讀:225 作者:iii 欄目:大數據

這篇文章主要介紹“MySql的Binlog日志工具舉例分析”,在日常操作中,相信很多人在MySql的Binlog日志工具舉例分析問題上存在疑惑,小編查閱了各式資料,整理出簡單好用的操作方法,希望對大家解答”MySql的Binlog日志工具舉例分析”的疑惑有所幫助!接下來,請跟著小編一起來學習吧!

Canal

定位:基于數據庫增量日志解析,提供增量數據訂閱&消費,目前主要支持了mysql。

原理:

  • canal模擬mysql slave的交互協議,偽裝自己為mysql slave,向mysql master發送dump協議

  • mysql master收到dump請求,開始推送binary log給slave(也就是canal)

  • canal解析binary log對象(原始為byte流)

MySql的Binlog日志工具舉例分析

整個parser過程大致可分為幾步:
  •  Connection獲取上一次解析成功的位置(如果第一次啟動,則獲取初始制定的位置或者是當前數據庫的binlog位點)

  • Connection建立連接,發生BINLOG_DUMP命令

  • Mysql開始推送Binary Log

  • 接收到的Binary Log通過Binlog parser進行協議解析,補充一些特定信息

  • 傳遞給EventSink模塊進行數據存儲,是一個阻塞操作,直到存儲成功

  • 存儲成功后,定時記錄Binary Log位置

   MySql的Binlog日志工具舉例分析
  • 數據過濾:支持通配符的過濾模式,表名,字段內容等

  • 數據路由/分發:解決1:n (1個parser對應多個store的模式)

  • 數據歸并:解決n:1 (多個parser對應1個store)

  • 數據加工:在進入store之前進行額外的處理,比如join

Maxwell

MySql的Binlog日志工具舉例分析
canal 由Java開發,分為服務端和客戶端,擁有眾多的衍生應用,性能穩定,功能強大;canal 需要自己編寫客戶端來消費canal解析到的數據。
maxwell相對于canal的優勢是使用簡單,它直接將數據變更輸出為json字符串,不需要再編寫客戶端。

Databus  
Databus是一種低延遲變化捕獲系統,已成為LinkedIn數據處理管道不可或缺的一部分。Databus解決了可靠捕獲,流動和處理主要數據更改的基本要求。Databus提供以下功能:

  • 源與消費者之間的隔離

  • 保證按順序和至少一次交付具有高可用性

  • 從更改流中的任意時間點開始消耗,包括整個數據的完全引導功能。

  • 分區消費

  • 源一致性保存

MySql的Binlog日志工具舉例分析

到此,關于“MySql的Binlog日志工具舉例分析”的學習就結束了,希望能夠解決大家的疑惑。理論與實踐的搭配能更好的幫助大家學習,快去試試吧!若想繼續學習更多相關知識,請繼續關注億速云網站,小編會繼續努力為大家帶來更多實用的文章!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

平江县| 清远市| 梅河口市| 马龙县| 南通市| 固阳县| 东乌珠穆沁旗| 年辖:市辖区| 鲁山县| 怀柔区| 夏邑县| 板桥市| 兴国县| 阳曲县| 名山县| 清水河县| 长白| 行唐县| 五华县| 道孚县| 英吉沙县| 云和县| 通州市| 边坝县| 西和县| 临城县| 历史| 乌鲁木齐县| 嘉荫县| 张家港市| 泗阳县| 黑山县| 阿合奇县| 沅江市| 阿拉善盟| 克山县| 黔西| 咸丰县| 抚远县| 瑞丽市| 闸北区|