玩轉(zhuǎn)大數(shù)據(jù)-如何搭建redis集群

在企業(yè)應(yīng)用中,對于數(shù)據(jù)的固化一般采用數(shù)據(jù)庫,但是數(shù)據(jù)庫的吞吐量還是存在一定的問題的,在高并發(fā)高吞吐要求時,一般會直接導(dǎo)致數(shù)據(jù)庫的宕機(jī)或者死鎖,目前對于這個問題的架構(gòu)是在數(shù)據(jù)庫前邊在緩存池,redis就是這么一款產(chǎn)品。
對于redis的介紹,去百度吧,它應(yīng)該被廣泛運(yùn)用在各個項目中,我們來看如何搭建一個redis集群,這里的集群是個真分布式集群哦。

首先,我們需要下載redis源代碼,然后進(jìn)行編譯,以下命令在linux下執(zhí)行:

wget http://download.redis.io/redis-stable.tar.gz

tar xvzf redis-stable.tar.gz

cd redis-stable

make

前面3步應(yīng)該沒有問題,主要的問題是執(zhí)行make的時候,出現(xiàn)了異常。

異常一:

make[2]: cc: Command not found

異常原因:沒有安裝gcc

解決方案:yum install gcc-c++

異常二:

zmalloc.h:51:31: error: jemalloc/jemalloc.h: No such file or directory

異常原因:一些編譯依賴或原來編譯遺留出現(xiàn)的問題

解決方案:make distclean。清理一下,然后再make。

在make成功以后,需要make test。在make test出現(xiàn)異常。

異常一:

couldn't execute "tclsh8.5": no such file or directory

異常原因:沒有安裝tcl

解決方案:yum install -y tcl。

在make成功以后,會在src目錄下多出一些可執(zhí)行文件:redis-server,redis-cli等等。

方便期間用cp命令復(fù)制到usr目錄下運(yùn)行。

cp redis-server /usr/local/bin/

cp redis-cli /usr/local/bin/

然后新建目錄,存放配置文件

mkdir /etc/redis

mkdir /var/redis

mkdir /var/redis/log

mkdir /var/redis/run

mkdir /var/redis/6379

在redis解壓根目錄中找到配置文件模板,復(fù)制到如下位置。

cp redis.conf /etc/redis/6379.conf

通過vim命令修改

daemonize yes

pidfile /var/redis/run/redis_6379.pid

logfile /var/redis/log/redis_6379.log

dir /var/redis/6379

最后運(yùn)行redis:

$ redis-server /etc/redis/6379.conf

Redis集群部署文檔(centos6系統(tǒng))

(要讓集群正常工作至少需要3個主節(jié)點(diǎn),在這里我們要創(chuàng)建6個redis節(jié)點(diǎn),其中三個為主節(jié)點(diǎn),三個為從節(jié)點(diǎn),對應(yīng)的redis節(jié)點(diǎn)的ip和端口對應(yīng)關(guān)系如下)

127.0.0.1:7000
127.0.0.1:7001

127.0.0.1:7002

127.0.0.1:7003

127.0.0.1:7004

127.0.0.1:7005

1:下載redis。官網(wǎng)下載3.0.0版本,之前2.幾的版本不支持集群模式

下載地址:https://github.com/antirez/redis/archive/3.0.0-rc2.tar.gz

2:上傳服務(wù)器,解壓,編譯

tar -zxvf redis-3.0.0-rc2.tar.gz

mv redis-3.0.0-rc2.tar.gz redis3.0

cd /usr/local/redis3.0

make

make install

3:創(chuàng)建集群需要的目錄

mkdir -p /usr.local/cluster

cd /usr.local/cluster

mkdir 7000

mkdir 7001

mkdir 7002

mkdir 7003

mkdir 7004

mkdir 7005

4:修改配置文件redis.conf

cp /usr/local/redis3.0/redis.conf /usr.local/cluster

vi redis.conf

修改配置文件中的下面選項

port 7000

daemonize yes

cluster-enabled yes

cluster-config-file nodes.conf

cluster-node-timeout 5000

appendonly yes

修改完redis.conf配置文件中的這些配置項之后把這個配置文件分別拷貝到7000/7001/7002/7003/7004/7005目錄下面

cp /usr/local/cluster/redis.conf /usr/local/cluster/7000

cp /usr/local/cluster/redis.conf /usr/local/cluster/7001

cp /usr/local/cluster/redis.conf /usr/local/cluster/7002

cp /usr/local/cluster/redis.conf /usr/local/cluster/7003

cp /usr/local/cluster/redis.conf /usr/local/cluster/7004

cp /usr/local/cluster/redis.conf /usr/local/cluster/7005

注意:拷貝完成之后要修改7001/7002/7003/7004/7005目錄下面redis.conf文件中的port參數(shù),分別改為對應(yīng)的文件夾的名稱

5:分別啟動這6個redis實例

cd /usr/local/cluster/7000

redis-server redis.conf

cd /usr/local/cluster/7001

redis-server redis.conf

cd /usr/local/cluster/7002

redis-server redis.conf

cd /usr/local/cluster/7003

redis-server redis.conf

cd /usr/local/cluster/7004

redis-server redis.conf

cd /usr/local/cluster/7005

redis-server redis.conf

啟動之后使用命令查看redis的啟動情況ps -ef|grep redis

如下圖顯示則說明啟動成功

6:執(zhí)行redis的創(chuàng)建集群命令創(chuàng)建集群

cd /usr/local/redis3.0/src

./redis-trib.rb create --replicas 1 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005

6.1執(zhí)行上面的命令的時候會報錯,因為是執(zhí)行的ruby的腳本,需要ruby的環(huán)境

錯誤內(nèi)容:/usr/bin/env: ruby: No such file or directory

所以需要安裝ruby的環(huán)境,這里推薦使用yum install ruby安裝

yum install ruby

6.2然后再執(zhí)行第6步的創(chuàng)建集群命令,還會報錯,提示缺少rubygems組件,使用yum安裝

錯誤內(nèi)容:

./redis-trib.rb:24:in `require': no such file to load -- rubygems (LoadError)

from ./redis-trib.rb:24

yum install rubygems

6.3再次執(zhí)行第6步的命令,還會報錯,提示不能加載redis,是因為缺少redis和ruby的接口,使用gem 安裝

錯誤內(nèi)容:

/usr/lib/ruby/site_ruby/1.8/rubygems/custom_require.rb:31:in `gem_original_require': no such file to load -- redis (LoadError)

from /usr/lib/ruby/site_ruby/1.8/rubygems/custom_require.rb:31:in `require'

from ./redis-trib.rb:25

gem install redis

需要手工下載并安裝:

wget https://rubygems.global.ssl.fastly.net/gems/redis-3.2.1.gem
gem install -l ./redis-3.2.1.gem

6.4 再次執(zhí)行第6步的命令,正常執(zhí)行

輸入yes,然后配置完成。

至此redis集群即搭建成功!

7:使用redis-cli命令進(jìn)入集群環(huán)境

redis-cli -c -p 7000

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。

推薦閱讀更多精彩內(nèi)容