云:白駒蒼狗,聚散離合,變化萬千。
這是我沒接觸云計算之前,大自然的云在我心中的形象,倏忽縹緲,形態(tài)萬千。在接觸云計算這個詞之后,更是覺得有太多相似之處,聚散離合之間有無盡可能創(chuàng)造出新的形態(tài)。我對于服務(wù)集群的概念,就像是縮小版的云計算服務(wù),不過是對企業(yè)內(nèi)部的服務(wù)而已。
對于任何一個互聯(lián)網(wǎng)相關(guān)的公司,數(shù)據(jù)往往是核心,數(shù)據(jù)服務(wù)的穩(wěn)定也是重中之重。隨著現(xiàn)在公司業(yè)務(wù)上升,數(shù)據(jù)庫服務(wù)壓力也是急劇增加,頻繁出現(xiàn)數(shù)據(jù)庫宕機的情況。所以想要采用數(shù)據(jù)集群的方式去分攤數(shù)據(jù)庫壓力,解決這個技術(shù)瓶頸。(當然,數(shù)據(jù)庫服務(wù)壓力過大,跟緩存層設(shè)計,以及代碼查詢實現(xiàn)方式都有解不開的關(guān)系,這一部分也是解決問題的關(guān)鍵點)以下測驗在本地docker環(huán)境下實現(xiàn),并未上線,還請各位知悉。
結(jié)構(gòu)圖示:
1.數(shù)據(jù)節(jié)點管理器(不影響其他服務(wù));
2.數(shù)據(jù)庫服務(wù)進程(可擴展);
3.數(shù)據(jù)節(jié)點(可擴展)。
注:2/3 部分都是可以動態(tài)擴展,1 的運行狀態(tài)不影響2/3提供服務(wù);
服務(wù)啟動順序
ndb_mgmd ?>>> ?數(shù)據(jù)節(jié)點ndbd ? >>> ?mysql服務(wù)
實現(xiàn)細節(jié):
系統(tǒng)環(huán)境:Ubuntu14.04
MySQL Cluster 7.5(mysql5.7.19)
Docker version 1.12.4
docker-compose version 1.14.0
1.mysql-cluster鏡像加載
docker pull mysql/mysql-cluster
2.創(chuàng)建專用虛擬網(wǎng)絡(luò)cluster
docker network create cluster --subnet=192.168.0.0/16
3.啟動數(shù)據(jù)管理節(jié)點ndb_mgmd
docker run -d --net=cluster --name=management1 --ip=192.168.0.2 mysql/mysql-cluster ndb_mgmd
4.啟動數(shù)據(jù)節(jié)點ndbd
docker run -d --net=cluster --name=ndb1 --ip=192.168.0.3 mysql/mysql-cluster ndbd
docker run -d --net=cluster --name=ndb2 --ip=192.168.0.4 mysql/mysql-cluster ndbd
5.啟動mysql服務(wù)節(jié)點
docker run -d --net=cluster --name=mysql1 --ip=192.168.0.10 -e MYSQL_RANDOM_ROOT_PASSWORD=true mysql/mysql-cluster mysqld
6.檢查所有服務(wù)運行狀態(tài)
docker ps -a
7.檢查數(shù)據(jù)節(jié)點連接狀態(tài)
docker run -it --net=cluster mysql/mysql-cluster ndb_mgm
Starting ndb_mgm
-- NDB Cluster -- Management Client --
ndb_mgm> show
Connected to Management
Server at: 192.168.0.2:1186
Cluster Configuration
---------------------
[ndbd(NDB)]? ? 2 node(s)
id=2? ? @192.168.0.3? (mysql-5.7.18 ndb-7.6.2, Nodegroup: 0, *)
id=3? ? @192.168.0.4? (mysql-5.7.18 ndb-7.6.2, Nodegroup: 0)
[ndb_mgmd(MGM)]? ? 1 node(s)
id=1? ? @192.168.0.2? (mysql-5.7.18 ndb-7.6.2)
[mysqld(API)]? ? 1 node(s)
id=4? ? @192.168.0.10? (mysql-5.7.18 ndb-7.6.2)
到這里服務(wù)已經(jīng)啟動,但是想要本地訪問還需要設(shè)置mysqld 服務(wù)允許遠程登錄。
連接mysql
###查看隨機登錄密碼
docker logs mysql1 2>&1 | grep PASSWORD
###連接mysql服務(wù)-mysql1
docker exec -it mysql1 mysql -uroot -p
###修改登錄密碼
ALTER USER 'root'@'localhost' IDENTIFIED BY 'MyNewPass';
###設(shè)置遠程登錄訪問
GRANT select on *.* to 'root'@'%' identified by "defaultpass";
FLUSH privileges;
動態(tài)擴展
第一步:確保數(shù)據(jù)節(jié)點和mysql節(jié)點運行正常,在管理節(jié)點服務(wù)器上殺掉管理節(jié)點的進程(此時只殺掉管理節(jié)點進程,不會對NDB節(jié)點和mysql節(jié)點產(chǎn)生影響,數(shù)據(jù)庫功能一樣可以進行運行)。
第二步:如果只是調(diào)整當前數(shù)據(jù)庫的配置參數(shù),可以直接修改/etc/my.cnf,修改完成之后保存,然后執(zhí)行管理節(jié)點啟動命令ndb_mgmd -f /etc/mysql-cluster.cnf啟動管理節(jié)點即可,已經(jīng)修改的內(nèi)容即可生效。
如果是需要添加數(shù)據(jù)節(jié)點或者mysql節(jié)點的話。同樣需要先停掉管理節(jié)點的管理進程,原有的數(shù)據(jù)節(jié)點和mysql節(jié)無需進行任何操作。直接在管理服務(wù)器上修改/etc/mysql-cluster.cnf文件。
比如需要新增兩臺服務(wù)器192.168.0.5、192.168.0.6來做數(shù)據(jù)節(jié)點,192.168.0.6來做mysql服務(wù)節(jié)點,修改管理節(jié)點上的/etc/mysql-cluster.cnf文件如下:
docker run -d --net=cluster --name=mysql2 --ip=192.168.0.20 -e MYSQL_RANDOM_ROOT_PASSWORD=true mysql/mysql-cluster mysqld
注意事項:只需要設(shè)置數(shù)據(jù)節(jié)點的配置文件與mysql1的相同即可,配置文件如下
/etc/mysql-cluster.cnf
++++++++++ADD MYSQLD++++++++++
[ndbd]
NodeId=3
hostname=192.168.0.4
datadir=/var/lib/mysql
[ndbd]
NodeId=4
hostname=192.168.0.5
datadir=/var/lib/mysql
++++++++++++++END++++++++++++
++++++++++ADD MYSQLD++++++++++
[mysqld]
NodeId=7
hostname=192.168.0.20
++++++++++++++END++++++++++++