Redis主從應用

Redis 復制

Redis通過持久化技術(RDB/AOF)保證即使緩存服務器重啟數據也基本不會丟失。當我們部署一臺單節點Redis服務器時,假若磁盤損壞,服務將會直接不可用,并且數據丟失,這對應用層面來講是絕對不能夠容忍的。為了避免單節點故障,通常會部署多個副本在不同的服務器來保證Redis的高可用性。Redis提供了Replication功能,當一臺Master服務器數據更新后,自動同步到Slave上。
Master-Slave機制下,Master負責讀寫,Slave一般負責讀。默認配置Slave是只讀的,如果在Slave上直接進行寫操作會報錯誤。

(error) READONLY You can't write against a read only slave.

如果希望Slave可以直接進行寫操作,設置slave-read-only yes即可。當然建議設置為no

實踐

創建redis.conf,端口7991為Master,端口7992為Slave

mkdir -p cluster-7991/{config,log,data,pid}
mkdir -p cluster-7992/{config,log,data,pid}

分別為兩個Redis實例配置文件,將配置文件配置在config目錄下,名為redis.conf

port 7991
bind 0.0.0.0
daemonize yes
protected-mode yes
appendonly yes
dir /Users/wujunbin/Work/redis-cluster/cluster-7991/
#repl-diskless-sync yes
port 7992
bind 0.0.0.0
SLAVEOF 127.0.0.1 7991
daemonize yes
protected-mode yes
appendonly yes
dir /Users/wujunbin/Work/redis-cluster/cluster-7992/
#repl-diskless-sync yes

注意在Slave的的配置文件中加入slaveof用于指定當前實力是誰的slave
啟動redis-server

redis-server cluster-7991/config/redis.conf &
redis-server cluster-7992/config/redis.conf &

redis-cli 進入查看

:~/Work/redis-cluster$redis-cli -p 7991
127.0.0.1:7991> info replication
# Replication
role:master
connected_slaves:1
slave0:ip=127.0.0.1,port=7992,state=online,offset=70,lag=0
master_replid:ee41a261a4aa0c89ffeca4776e23a5598f896c7f
master_replid2:0000000000000000000000000000000000000000
master_repl_offset:70
second_repl_offset:-1
repl_backlog_active:1
repl_backlog_size:1048576
repl_backlog_first_byte_offset:1
repl_backlog_histlen:70

connected_salves:1表明了連接了一個slave節點。接下來插入數據。

127.0.0.1:7991> set hello world
OK

登錄Slave節點查看

:~/Work/redis-cluster$redis-cli -p 7992
127.0.0.1:7992> get hello
"world"
127.0.0.1:7992>

成功的取出了數據,說明主從配置成功。

同步原理

首先引用一張圖

2016081315260777.gif

主要分為三個階段

  • Slave發送sync命令或者psync請求初始化。
  • Master判斷是否增量初始化。如果不是,生成dump.rdb文件,并將該文件傳輸給Slave。如果是,則將積壓隊列中命令偏移量之后的命令發送給Slave
  • 初始化之后MasterSlave進行增量更新,一旦有更新傳輸寫命令給Slave節點。

Sync和Psync

試想一下Slave的某個流程:啟動-Master數據同步-停止-啟動。最后一步的啟動,因為Slave在停止前已經接受了Master的數據同步,所以本地是有數據的。所以是不需要將Masterdump.rdb全部傳輸給Slave。只需要將Slave停止之后的所有寫命令在Slave再次啟動后傳輸給Slave,即可完成數據同步。Redis為了完成這一點在Master維護了一個命令積壓隊列(默認大小1M,有效時常1個小時)。每一次Master的寫入命令會放入這個隊列,并同步寫命令和寫命令在隊列中的偏移量給SlaveSlave除了執行寫命令也會記錄這個命令的偏移量。當Slave再次啟動時發送PSYNC + Master Run ID + 命令偏移量MasterMaster收到psync指令,首先判斷run id是不是自己,如果是再根據命令偏移量從隊列中查找。如果找到直接同步偏移量之后的命令給Slave。如果偏移量不在隊列中那么無法滿足增量復制,Master就會生成dump.rdb進行同步。

無硬盤復制

Redis使用一主多從的集群架構時,每次和Slave全量同步,Redis都會執行一次快照,同時對硬盤進行讀寫,導致性能下降。Redis提供了
repl-diskless-sync yes參數。指定后,在復制初始化時就會直接將生成到dump.rdb數據的內容通過網絡傳輸給Slave,而不需要先存儲在磁盤上。

Master崩潰,Slave切換為Master

Master崩潰時,在Slave中使用SLAVEOF NO ONE命令將從數據庫提升為主數據庫繼續服務。然后重新啟動崩潰的Reids實例,該實例就變成了Slave然后從Master再次同步數據。

參考文章:http://www.ywnds.com/?p=5489

最后編輯于
?著作權歸作者所有,轉載或內容合作請聯系作者
平臺聲明:文章內容(如有圖片或視頻亦包括在內)由作者上傳并發布,文章內容僅代表作者本人觀點,簡書系信息發布平臺,僅提供信息存儲服務。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 228,835評論 6 534
  • 序言:濱河連續發生了三起死亡事件,死亡現場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機,發現死者居然都...
    沈念sama閱讀 98,676評論 3 419
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 176,730評論 0 380
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 63,118評論 1 314
  • 正文 為了忘掉前任,我火速辦了婚禮,結果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當我...
    茶點故事閱讀 71,873評論 6 410
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發上,一...
    開封第一講書人閱讀 55,266評論 1 324
  • 那天,我揣著相機與錄音,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,330評論 3 443
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側響起,我...
    開封第一講書人閱讀 42,482評論 0 289
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當地人在樹林里發現了一具尸體,經...
    沈念sama閱讀 49,036評論 1 335
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內容為張勛視角 年9月15日...
    茶點故事閱讀 40,846評論 3 356
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發現自己被綠了。 大學時的朋友給我發了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 43,025評論 1 371
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 38,575評論 5 362
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質發生泄漏。R本人自食惡果不足惜,卻給世界環境...
    茶點故事閱讀 44,279評論 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 34,684評論 0 26
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 35,953評論 1 289
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 51,751評論 3 394
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 48,016評論 2 375

推薦閱讀更多精彩內容