Mac下利用vmware fushion安裝centos服務器,然后搭建Hbase集群環境。
安裝前的準備
搭建好Hadoop集群以及Zookeeper集群
Hadoop集群的搭建參考:Hadoop三節點集群搭建
Zookeeper集群的搭建參考:Zookeeper三節點集群搭建安裝中用到的軟件包
hbase-1.2.0-cdh5.14.2.tar.gz
安裝過程
- 上傳安裝包到服務器并解壓
scp hbase-1.2.0-cdh5.14.2.tar.gz hadoop@node01:/kkb/soft
tar -zxf /kkb/soft/hbase-1.2.0-cdh5.14.2.tar.gz -C /kkb/install/
- 修改hbase配置文件
- 修改環境變量
sudo vim /etc/profile
# 修改為
export HBASE_HOME=/kkb/install/hbase-1.2.0-cdh5.14.2
# PATH增加:
$HBASE_HOME/bin
- 修改hbase-env.sh
cd /kkb/install/hbase-1.2.0-cdh5.14.2/conf/
vim hbase-env.sh
# 進行如下配置
export JAVA_HOME=/kkb/install/jdk1.8.0_141
export HBASE_MANAGES_ZK=false
- 修改hbase-site.xml
cd /kkb/install/hbase-1.2.0-cdh5.14.2/conf/
vim hbase-site.xml
# 修改為:
<configuration>
<property>
<name>hbase.rootdir</name>
<value>hdfs://node01:8020/hbase</value>
</property>
<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>
<!-- 0.98后的新變動,之前版本沒有.port,默認端口為60000 -->
<property>
<name>hbase.master.port</name>
<value>16000</value>
</property>
<property>
<name>hbase.zookeeper.quorum</name>
<value>node01,node02,node03</value>
</property>
<property>
<name>hbase.zookeeper.property.clientPort</name>
<value>2181</value>
</property>
<property>
<name>hbase.zookeeper.property.dataDir</name>
<value>/kkb/install/zookeeper-3.4.5-cdh5.14.2/zkdatas</value>
</property>
<property>
<name>zookeeper.znode.parent</name>
<value>/hbase</value>
</property>
</configuration>
- 修改reginservers
cd /kkb/install/hbase-1.2.0-cdh5.14.2/conf/
vim regionservers
# 刪除localhost
# 修改為:
node01
node02
node03
- 創建back-masters配置文件,實現HMaster的高可用
cd /kkb/install/hbase-1.2.0-cdh5.14.2/conf/
vim backup-masters
# 修改為:
node02
- 遠程復制hbase到集群各個機器
- 分發hadoop安裝文件到node02,node03
cd /kkb/install
scp -r hbase-1.2.0-cdh5.14.2/ node02:$PWD
scp -r hbase-1.2.0-cdh5.14.2/ node03:$PWD
- 分發全局環境配置文件/etc/profile到node02,node03
sudo scp /etc/profile node02:/etc/profile
sudo scp /etc/profile node03:/etc/profile
- 使集群中所有機器的環境變量生效
ssh node02
source /etc/profile
hadoop version
exit
ssh node03
source /etc/profile
hadoop version
exit
- 三臺機器創建軟連接
因為hbase需要讀取hadoop的core-site.xml以及hdfs-site.xml當中的配置文件信息,所以三臺機器都要執行以下命令創建軟連接:
ln -s /kkb/install/hadoop-2.6.0-cdh5.14.2/etc/hadoop/core-site.xml /kkb/install/hbase-1.2.0-cdh5.14.2/conf/core-site.xml
ln -s /kkb/install/hadoop-2.6.0-cdh5.14.2/etc/hadoop/hdfs-site.xml /kkb/install/hbase-1.2.0-cdh5.14.2/conf/hdfs-site.xml
Hbase的啟動
注意:啟動hbase前需要啟動 hadoop集群和zookeeper集群
在node01上執行以下命令進行啟動:
cd /kkb/install/hbase-1.2.0-cdh5.14.2
bin/start-hbase.sh