最近一個多月我學習的關于數(shù)據(jù)雙活的文章與書籍

image.png

一、Mysql數(shù)據(jù)庫雙活

1、Mysql binlog介紹

官網(wǎng)：
https://dev.mysql.com/doc/refman/5.5/en/binary-log.html

中文：

• http://www.cnblogs.com/Richardzhu/p/3225254.html
• http://www.cnblogs.com/martinzhang/p/3454358.html

2、阿里數(shù)據(jù)庫同步工具Canal

官網(wǎng)：
https://github.com/alibabatech/canal/

使用介紹：

• 阿里巴巴開源項目: canal 基于mysql數(shù)據(jù)庫binlog的增量訂閱&消費
• 利用Canal完成Mysql數(shù)據(jù)同步Redis
• 搭建： canal部署與實例運行
• MySQL增量訂閱&消費組件Canal POC
• 分布式集群項目中同步DB數(shù)據(jù)的解決方案之Canal
• Canal源碼分析---模擬Slave同步binlog
• 用 Canal 監(jiān)控mysql數(shù)據(jù)變化
• 使用 Binlog 和 Canal 從 MySQL 抽取數(shù)據(jù)

3、Mysql數(shù)據(jù)雙活

• sql高可用架構(gòu)方案之中的一個(keepalived+主主雙活)
• 大話數(shù)據(jù)中心雙活

二、Oracle雙活

1、Kettle實現(xiàn)數(shù)據(jù)同步

• 在Kettle里使用時間戳實現(xiàn)變化數(shù)據(jù)捕獲（CDC）
• kettle參數(shù)、變量詳細講解
• 實時同步，增量ETL方案分享（源表含時間戳，做邏輯刪除）
• Kettle Spoon 表輸入組件報“無效的列索引”錯誤解決方案

關于Kettle的推薦書籍如下：

image.png

2、使用Databus實現(xiàn)數(shù)據(jù)庫同步

• LinkedIn實時低延遲數(shù)據(jù)抓取系統(tǒng)Databus開源
• Databus中文教程
• Databus項目開源地址

3、Oracle日志數(shù)據(jù)同步

• 基于Oracle Logminer數(shù)據(jù)同步
• OGG實現(xiàn)兩臺Oracle數(shù)據(jù)庫的同步
• 基于OGG的Oracle與Hadoop集群準實時同步介紹
• ORACLE 幾種同步災備手段（OGG，ADG，DSG，高級復制，流復制，logmnr）
• Oracle11gR2下搭建DataGuard主備同步詳解

推薦閱讀更多精彩內(nèi)容

• canal(基于mysql數(shù)據(jù)庫binlog的增量訂閱&消費）

  一、背景 早期，阿里巴巴B2B公司因為存在杭州和美國雙機房部署，存在跨機房同步的業(yè)務需求。不過早期的數(shù)據(jù)庫同步業(yè)務...

  獻給記性不好的自己閱讀 46,191評論 3贊 40
• 12C CDB模式下RMAN備份與恢復_3

  背景: 閱讀新聞 12C CDB模式下RMAN備份與恢復 [日期:2016-11-29] 來源:Linux社區(qū) 作...

  陽屯okyepd閱讀 3,559評論 0贊 7
• [canal]基于mysql binlog的增量訂閱&消費--阿里巴巴開源項目

  Spark實時統(tǒng)計訂單量 - 簡書http://www.lxweimin.com/p/3ec093a9d584 注：...

  葡萄喃喃囈語閱讀 5,589評論 0贊 1
• MySQL binlog 增量數(shù)據(jù)解析服務

  MySQL binlog 增量數(shù)據(jù)解析服務 介紹如何借助于 MySQL 的 Master-slave 協(xié)議實現(xiàn) M...

  haitaoyao閱讀 21,233評論 11贊 50
• 入乎其內(nèi)，出乎其外???——淺談李成軍新編六場戲曲《晴雯》

  國學大師王國維在《人間詞話》中寫道：“詩人對宇宙人生，須入乎其內(nèi)，又須出乎其外。入乎其內(nèi)，故能寫之；出乎...

  wnc萬年春閱讀 466評論 0贊 1