1. 簡(jiǎn)介
從3.0版本開始redis就提供了官方的cluster解決方案,該方案可以將redis中的數(shù)據(jù)自動(dòng)分片,分布于不同的redis節(jié)點(diǎn)上(Master Role)。Cluster中至少需要有3個(gè)Master,每個(gè)Master至少要有1個(gè)Slave,這樣才能保證Cluster的數(shù)據(jù)安全性。
Cluster中的每個(gè)redis節(jié)點(diǎn)必須打開兩個(gè)TCP端口,一個(gè)用來為客戶端提供服務(wù),例如“6379”,另一個(gè)用于集群總線,即使用二進(jìn)制協(xié)議的節(jié)點(diǎn)到節(jié)點(diǎn)的通信信道。命令端口和集群總線端口的偏移是固定的,始終為10000。即如果命令端口是6379,那么對(duì)應(yīng)的集群總線端口就是16379。Cluster中的兩兩節(jié)點(diǎn)之間的兩個(gè)端口必須是互通的。
Redis Cluster使用哈希槽的技術(shù)將數(shù)據(jù)散列與不同的redis節(jié)點(diǎn)。Redis Cluster有16384個(gè)散列槽,通過CRC16算法計(jì)算,然后對(duì)16384取模,即可得到數(shù)據(jù)存在于哪個(gè)redis節(jié)點(diǎn)。
2. redis安裝
redis集群所需的命令行工具安裝比較簡(jiǎn)單,和單機(jī)版并沒有什么不同。
$ wget http://download.redis.io/releases/redis-4.0.12.tar.gz
$ tar xf redis-4.0.12.tar.gz
$ cd redis-4.0.12
$ make
按照上面的步驟make之后,我們可以在src的目錄下找到很多redis開頭的二進(jìn)制文件,這些就是我們需要的。我們可以將這幾個(gè)文件拷貝到我們自定義的路徑下,或者系統(tǒng)的PATH路徑下都行。
有一個(gè)比較重要的文件就是redis-trib.rb
,這是一個(gè)ruby編寫的腳本,主要用來創(chuàng)建集群,所以我們要確保系統(tǒng)中有ruby命令。
$ sudo apt-get install ruby -y
$ sudo gem install redis
3. redis配置文件
配置部分除了常規(guī)的單機(jī)redis的配置外,我們需要看下集群的配置部分。
cluster-enabled <yes/no>
是否啟用redis集群功能。cluster-config-file <filename>
集群配置文件,該配置文件由集群自行維護(hù),我們無需修改。cluster-node-timeout <milliseconds>
集群中節(jié)點(diǎn)不可用的最大時(shí)長(zhǎng)。如果主節(jié)點(diǎn)的不可訪問時(shí)長(zhǎng)超過這個(gè)限制,就會(huì)進(jìn)行故障轉(zhuǎn)移。cluster-slave-validity-factor <factor>
如果設(shè)置為0,則從服務(wù)器將始終嘗試對(duì)主服務(wù)器進(jìn)行故障轉(zhuǎn)移,而不管主服務(wù)器和從服務(wù)器之間的連接斷開的時(shí)間長(zhǎng)短。如果值是正數(shù),最大斷開時(shí)間計(jì)算的節(jié)點(diǎn)超時(shí)值乘以這個(gè)系數(shù),如果主鏈接斷開連接超過前面計(jì)算的時(shí)間,那么slave不會(huì)進(jìn)行故障轉(zhuǎn)移。例如,如果節(jié)點(diǎn)超時(shí)設(shè)置為5秒,而有效性系數(shù)設(shè)置為10,則斷開與主服務(wù)器連接超過50秒的從服務(wù)器將不會(huì)嘗試對(duì)其主服務(wù)器進(jìn)行故障轉(zhuǎn)移。請(qǐng)注意,如果沒有能夠進(jìn)行故障轉(zhuǎn)移的從服務(wù)器,任何不同于0的值都可能導(dǎo)致Redis集群在主服務(wù)器故障后不可用。在這種情況下,只有當(dāng)原來的主機(jī)重新加入集群,集群才可以重新使用。建議值為0。cluster-migration-barrier <count>
主服務(wù)器所對(duì)應(yīng)的最小的從服務(wù)器的個(gè)數(shù)。最小值為1。cluster-require-full-coverage <yes/no>
如果這個(gè)值被設(shè)置為yes(默認(rèn)情況下是這樣),那么當(dāng)某個(gè)鍵空間沒有被任何節(jié)點(diǎn)覆蓋時(shí),集群將停止接受寫操作。如果選項(xiàng)設(shè)置為no,那么即使只能處理關(guān)于鍵子集的請(qǐng)求,集群仍然會(huì)提供查詢。建議設(shè)置為yes。
4. 創(chuàng)建集群
單機(jī)版最小集群需要6個(gè)redis節(jié)點(diǎn)。
主要配置如下:
daemonize yes
port 7000
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
appendonly yes
接下來我們創(chuàng)建配置相關(guān)的目錄。我們?cè)谧远x目錄中創(chuàng)建6個(gè)目錄來存放每個(gè)redis節(jié)點(diǎn)的配置文件。將上面的配置文件放到這6個(gè)目錄中,修改每個(gè)目錄下的配置文件的端口號(hào),和目錄名對(duì)應(yīng)皆可以,然后我們啟動(dòng)每個(gè)節(jié)點(diǎn)。
$ sudo mkdir -p /opt/redis-cluster/{7000,7001,7002,7003,7004,7005}
$ sudo redis-server /opt/redis-cluster/7000/redis.conf #其余的使用相同方式啟動(dòng)
$
節(jié)點(diǎn)運(yùn)行起來之后,我們開始創(chuàng)建集群。redis5使用redis-cli命令創(chuàng)建,redis4、3使用redis-trib.rb來創(chuàng)建。。
- redis5
$ redis-cli --cluster create 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005 --cluster-relicas 1
- redis4/3
$ redis-trib.rb create --replicas 1 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005
--cluster-replicas 1 和--replicas 1都是相同的意思,就是每個(gè)主節(jié)點(diǎn)有一個(gè)從節(jié)點(diǎn)。
5. 驗(yàn)證
上面的操作已經(jīng)將集群創(chuàng)建好了,接下來我們驗(yàn)證一下集群搭建是否存在問題。
$ redis-cli -c -p 7000
redis 127.0.0.1:7000> set foo bar
-> Redirected to slot [12182] located at 127.0.0.1:7002
OK
redis 127.0.0.1:7002> set hello world
-> Redirected to slot [866] located at 127.0.0.1:7000
OK
redis 127.0.0.1:7000> get foo
-> Redirected to slot [12182] located at 127.0.0.1:7002
"bar"
redis 127.0.0.1:7000> get hello
-> Redirected to slot [866] located at 127.0.0.1:7000
"world"
如果和上面顯示結(jié)果一樣,那么我們的集群搭建的是沒有問題的。