redis集群搭建

1. 簡(jiǎn)介

3.0版本開始redis就提供了官方的cluster解決方案,該方案可以將redis中的數(shù)據(jù)自動(dòng)分片,分布于不同的redis節(jié)點(diǎn)上(Master Role)。Cluster中至少需要有3個(gè)Master,每個(gè)Master至少要有1個(gè)Slave,這樣才能保證Cluster的數(shù)據(jù)安全性。

Release_Note.png

Cluster中的每個(gè)redis節(jié)點(diǎn)必須打開兩個(gè)TCP端口,一個(gè)用來為客戶端提供服務(wù),例如“6379”,另一個(gè)用于集群總線,即使用二進(jìn)制協(xié)議的節(jié)點(diǎn)到節(jié)點(diǎn)的通信信道。命令端口和集群總線端口的偏移是固定的,始終為10000。即如果命令端口是6379,那么對(duì)應(yīng)的集群總線端口就是16379。Cluster中的兩兩節(jié)點(diǎn)之間的兩個(gè)端口必須是互通的。

Redis Cluster使用哈希槽的技術(shù)將數(shù)據(jù)散列與不同的redis節(jié)點(diǎn)。Redis Cluster有16384個(gè)散列槽,通過CRC16算法計(jì)算,然后對(duì)16384取模,即可得到數(shù)據(jù)存在于哪個(gè)redis節(jié)點(diǎn)。

2. redis安裝

redis集群所需的命令行工具安裝比較簡(jiǎn)單,和單機(jī)版并沒有什么不同。

$ wget http://download.redis.io/releases/redis-4.0.12.tar.gz
$ tar xf redis-4.0.12.tar.gz
$ cd redis-4.0.12
$ make

按照上面的步驟make之后,我們可以在src的目錄下找到很多redis開頭的二進(jìn)制文件,這些就是我們需要的。我們可以將這幾個(gè)文件拷貝到我們自定義的路徑下,或者系統(tǒng)的PATH路徑下都行。


src.png

有一個(gè)比較重要的文件就是redis-trib.rb,這是一個(gè)ruby編寫的腳本,主要用來創(chuàng)建集群,所以我們要確保系統(tǒng)中有ruby命令。

$ sudo apt-get install ruby -y
$ sudo gem install redis

3. redis配置文件

配置部分除了常規(guī)的單機(jī)redis的配置外,我們需要看下集群的配置部分。

  • cluster-enabled <yes/no>
    是否啟用redis集群功能。

  • cluster-config-file <filename>
    集群配置文件,該配置文件由集群自行維護(hù),我們無需修改。

  • cluster-node-timeout <milliseconds>
    集群中節(jié)點(diǎn)不可用的最大時(shí)長(zhǎng)。如果主節(jié)點(diǎn)的不可訪問時(shí)長(zhǎng)超過這個(gè)限制,就會(huì)進(jìn)行故障轉(zhuǎn)移。

  • cluster-slave-validity-factor <factor>
    如果設(shè)置為0,則從服務(wù)器將始終嘗試對(duì)主服務(wù)器進(jìn)行故障轉(zhuǎn)移,而不管主服務(wù)器和從服務(wù)器之間的連接斷開的時(shí)間長(zhǎng)短。如果值是正數(shù),最大斷開時(shí)間計(jì)算的節(jié)點(diǎn)超時(shí)值乘以這個(gè)系數(shù),如果主鏈接斷開連接超過前面計(jì)算的時(shí)間,那么slave不會(huì)進(jìn)行故障轉(zhuǎn)移。例如,如果節(jié)點(diǎn)超時(shí)設(shè)置為5秒,而有效性系數(shù)設(shè)置為10,則斷開與主服務(wù)器連接超過50秒的從服務(wù)器將不會(huì)嘗試對(duì)其主服務(wù)器進(jìn)行故障轉(zhuǎn)移。請(qǐng)注意,如果沒有能夠進(jìn)行故障轉(zhuǎn)移的從服務(wù)器,任何不同于0的值都可能導(dǎo)致Redis集群在主服務(wù)器故障后不可用。在這種情況下,只有當(dāng)原來的主機(jī)重新加入集群,集群才可以重新使用。建議值為0。

  • cluster-migration-barrier <count>
    主服務(wù)器所對(duì)應(yīng)的最小的從服務(wù)器的個(gè)數(shù)。最小值為1。

  • cluster-require-full-coverage <yes/no>
    如果這個(gè)值被設(shè)置為yes(默認(rèn)情況下是這樣),那么當(dāng)某個(gè)鍵空間沒有被任何節(jié)點(diǎn)覆蓋時(shí),集群將停止接受寫操作。如果選項(xiàng)設(shè)置為no,那么即使只能處理關(guān)于鍵子集的請(qǐng)求,集群仍然會(huì)提供查詢。建議設(shè)置為yes。

4. 創(chuàng)建集群

單機(jī)版最小集群需要6個(gè)redis節(jié)點(diǎn)。

主要配置如下:

daemonize yes
port 7000
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes

接下來我們創(chuàng)建配置相關(guān)的目錄。我們?cè)谧远x目錄中創(chuàng)建6個(gè)目錄來存放每個(gè)redis節(jié)點(diǎn)的配置文件。將上面的配置文件放到這6個(gè)目錄中,修改每個(gè)目錄下的配置文件的端口號(hào),和目錄名對(duì)應(yīng)皆可以,然后我們啟動(dòng)每個(gè)節(jié)點(diǎn)。

$ sudo mkdir -p /opt/redis-cluster/{7000,7001,7002,7003,7004,7005}
$ sudo redis-server /opt/redis-cluster/7000/redis.conf #其余的使用相同方式啟動(dòng)
$ 

節(jié)點(diǎn)運(yùn)行起來之后,我們開始創(chuàng)建集群。redis5使用redis-cli命令創(chuàng)建,redis4、3使用redis-trib.rb來創(chuàng)建。。

  • redis5
$ redis-cli --cluster create 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005 --cluster-relicas 1
  • redis4/3
$ redis-trib.rb create --replicas 1 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005
Cluster_Create.png

--cluster-replicas 1 和--replicas 1都是相同的意思,就是每個(gè)主節(jié)點(diǎn)有一個(gè)從節(jié)點(diǎn)。

5. 驗(yàn)證

上面的操作已經(jīng)將集群創(chuàng)建好了,接下來我們驗(yàn)證一下集群搭建是否存在問題。

$ redis-cli -c -p 7000
redis 127.0.0.1:7000> set foo bar
-> Redirected to slot [12182] located at 127.0.0.1:7002
OK
redis 127.0.0.1:7002> set hello world
-> Redirected to slot [866] located at 127.0.0.1:7000
OK
redis 127.0.0.1:7000> get foo
-> Redirected to slot [12182] located at 127.0.0.1:7002
"bar"
redis 127.0.0.1:7000> get hello
-> Redirected to slot [866] located at 127.0.0.1:7000
"world"

如果和上面顯示結(jié)果一樣,那么我們的集群搭建的是沒有問題的。

參考文檔
  1. https://redis.io/topics/cluster-tutorial
  2. http://download.redis.io/releases/
  3. https://redis.io/documentation
  4. https://raw.githubusercontent.com/antirez/redis/3.0/00-RELEASENOTES
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 230,247評(píng)論 6 543
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 99,520評(píng)論 3 429
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 178,362評(píng)論 0 383
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)。 經(jīng)常有香客問我,道長(zhǎng),這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 63,805評(píng)論 1 317
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 72,541評(píng)論 6 412
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 55,896評(píng)論 1 328
  • 那天,我揣著相機(jī)與錄音,去河邊找鬼。 笑死,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 43,887評(píng)論 3 447
  • 文/蒼蘭香墨 我猛地睜開眼,長(zhǎng)吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 43,062評(píng)論 0 290
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 49,608評(píng)論 1 336
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 41,356評(píng)論 3 358
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 43,555評(píng)論 1 374
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 39,077評(píng)論 5 364
  • 正文 年R本政府宣布,位于F島的核電站,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 44,769評(píng)論 3 349
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 35,175評(píng)論 0 28
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 36,489評(píng)論 1 295
  • 我被黑心中介騙來泰國(guó)打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 52,289評(píng)論 3 400
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 48,516評(píng)論 2 379

推薦閱讀更多精彩內(nèi)容