一、K8S安裝
本次安裝我們選擇rancher安裝k8s,對應支持版本請參考:
https://rancher.com/docs/rancher/v1.6/zh/hosts/#docker
Docker:1.12.3
Kubernetetes:v1.8.3
1.****準備前工作 3臺centos6.7
Master:192.168.3.41
Node1:192.168.3.42
Node2:192.168.3.43
1.1修改各節(jié)點主機 hostname vi /etc/hostname
1.2關閉seliunx:
sed -i 's/SELINUX=enforcing/SELINUX=disabled/' /etc/selinux/config
setenforce 0
1.3關閉防火墻:
systemctl stop firewalld
systemctl disable firewalld
1.4設置kubernetes阿里源(不再訪問海外源,以節(jié)省時間)
cat <<EOF > /etc/yum.repos.d/kubernetes.repo
[kubernetes]
name=Kubernetes
baseurl=[https](https://www.centos.bz/tag/https/)://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64/
enabled=1
gpgcheck=0
EOF
1.5更新源:yum -y update
1.6關閉swap交換分區(qū)執(zhí)行命令 swapoff -a
1.7 打開/etc/sysctl.conf
檢查是否有net.ipv4.ip_forward = x這樣的配置;
如果有就保證x等于1,如果沒有就加一行:net.ipv4.ip_forward = 1
修改并保存后,執(zhí)行命令sysctl -p使配置生效;
執(zhí)行命令sysctl -a|grep “ip_forward”,查看最新的配置,應該有如下內容:
net.ipv4.ip_forward = 1
net.ipv4.ip_forward_use_pmtu = 0
##############################重啟三臺服務器
###########################
2.安裝Docker1.2.3**
2.1 三臺主機均執(zhí)行docker安裝命令
mkdir -p ~/docker && cd ~/docker && wget http://yum.dockerproject.org/repo/main/centos/7/Packages/docker-engine-selinux-1.12.3-1.el7.centos.noarch.rpm && wget http://yum.dockerproject.org/repo/main/centos/7/Packages/docker-engine-1.12.3-1.el7.centos.x86_64.rpm && wget http://yum.dockerproject.org/repo/main/centos/7/Packages/docker-engine-debuginfo-1.12.3-1.el7.centos.x86_64.rpm && yum localinstall -y docker-engine-selinux-1.12.3-1.el7.centos.noarch.rpm docker-engine-1.12.3-1.el7.centos.x86_64.rpm docker-engine-debuginfo-1.12.3-1.el7.centos.x86_64.rpm
2.2設置docker開機啟動 systemctl enable docker
2.3啟動docker systemctl start docker
2.4查看docker版本 docker version
3.設置Docker鏡像加速
查看docker此時如果用docker pull命令下載鏡像,本地會連接hub.docker.com網站去下載,耗時較長,因此我們可以設置docker鏡像加速,使得本地連接去國內鏡像倉庫下載,鏡像加速的設置有很多種,本章以阿里云的設置為例,步驟如下:
3.1 建立目錄:mkdir -p /etc/docker
3.2 設置國內鏡像
tee /etc/docker/daemon.json <<-'EOF'
{
"registry-mirrors": ["https://xwx6wxd1.mirror.aliyuncs.com"]
}
EOF
3.3 重新加載配置后重啟服務
systemctl daemon-reload
systemctl restart docker
4.安裝rancher
4.1 執(zhí)行安裝代碼
docker run -d --restart always --name rancher-server -p 8080:8080 rancher/server:v1.6.11-rc3 && docker logs -f rancher-server
或安裝2.X版本
sudo docker run -d --restart=unless-stopped -p 80:80 -p 443:443 rancher/rancher
執(zhí)行后,下載rancher鏡像后會再啟動容器,同時輸出日志,待日志不再滾動時,打開瀏覽器 192.168.3.41:8080進入初始化界面,如圖:
在搭建kubernetes之前,我們先創(chuàng)建一個環(huán)境模板來給環(huán)境配置基本的信息
4.2 配置面板在環(huán)境“default“下拉菜單中選擇”環(huán)境管理“
添加模板名稱后,選擇“kebuernetes“---編輯
選擇“rancher”版本
彈出配置界面
這里注意的填寫的地址和名稱為:
Private Registry for Add-Ons and Pod Infra Container Image ------------- --registry.cn-shenzhen.aliyuncs.com
Image namespace for Add-Ons and Pod Infra Container Image-------------rancher_cn
Image namespace for kubernetes-helm Image -------------------------------rancher_cn
Pod Infra Container Image -----------------------------------------------------rancher_cn/pause-amd64:3.0
下拉后點擊“設置”完成配置“
回到主菜單 –點擊創(chuàng)建
完成面板配置
4.3 創(chuàng)建kubernetes 點擊“添加環(huán)境”
選擇k8s模板后創(chuàng)建
4.4 如下圖所示,在左上解選擇剛創(chuàng)建的環(huán)境,可以看到正在設置環(huán)境,待就緒后,kebernets master節(jié)點服務設置完成
4.5 添加主在頁面上確認紅框中的IP地址是不是你的master機器對外暴露的地址(多網卡的機器要關注),確認無誤后點擊“保存”
4.6 拷貝腳本代碼,安裝node節(jié)點主機 加入兩臺node主機
2.X版本 如下圖
選擇master為etcd+contrl 其他node節(jié)點為work
復制到每臺并執(zhí)行安裝
系統(tǒng)會緩慢加載主機信息
進入UI配置界面
############################踩坑#####################################
訪問:http://192.168.3.41:8080/r/projects/1a8/kubernetes-dashboard:9090/# 服務不可用 可償試更換docker 更高版本1.12.6
/usr/lib/systemd/system/docker.service
[service]后面添加
ExecStartPost=/sbin/iptables -I FORWARD -s 0.0.0.0/0 -j ACCEPT
環(huán)境清理:
###################### 環(huán)境清理(可選)#################################
1)請檢查有沒有/var/lib/rancher/state/這個文件夾,如果有則刪除;
2)如果以前有通過Rancher安裝過kubernetes,請執(zhí)行命令:
刪除正在運行的容器
docker rm -f -v $(docker ps -aq)
刪除存儲卷
```docker volume rm $(docker volume ls)``
刪除遺留的目錄
rm -rf /etc/kubernetes/ssl /var/lib/etcd /etc/cni /opt/cni /var/run/calico /var/lib/rancher/state/
rm -rf /etc/kubernetes/ssl
rm -rf /var/lib/etcd
rm -rf /etc/cni
rm -rf /opt/cni
rm -rf /var/run/calico
下載1.12.6
wget http://yum.dockerproject.org/repo/main/centos/7/Packages/docker-engine-selinux-1.12.6-1.el7.centos.noarch.rpm
wget http://yum.dockerproject.org/repo/main/centos/7/Packages/docker-engine-1.12.6-1.el7.centos.x86_64.rpm
wget http://yum.dockerproject.org/repo/main/centos/7/Packages/docker-engine-debuginfo-1.12.6-1.el7.centos.x86_64.rpm
安裝
yum localinstall -y docker-engine-selinux-1.12.6-1.el7.centos.noarch.rpm docker-engine-1.12.6-1.el7.centos.x86_64.rpm docker-engine-debuginfo-1.12.6-1.el7.centos.x86_64.rpm
啟動
systemctl enable docker
systemctl start docker
查看版本
docker version
4.7 打開kubernetes UI
4.8 創(chuàng)建tomcat.yml配置文件
apiVersion: v1
kind: Service
metadata:
name: tomcat001
spec:
type: NodePort
ports:
- port: 8080
nodePort: 30018
selector:
name: tomcat01
打開ui界面 新建
上傳tomcat.yml配置文件
打開UI界面 –服務
等部署完成后狀態(tài)為綠色
再建立個文件 tomcat-svc.yaml 內容如下:
apiVersion: v1
kind: Service
metadata:
name: tomcat001
spec:
type: NodePort
ports:
- port: 8080
nodePort: 30018
selector:
name: tomcat001
上傳后查看服務
通過node節(jié)點IP訪問 192.168.3.42:30018 訪問到tomcat頁面
5.安裝kubectl工具
5.1kubectl工具安裝在哪里?
kubectl是個客戶端工具,可以安裝在任意一臺Linux、windows或者Mac電腦上,只要這個電腦能夠連接master節(jié)點,本次實戰(zhàn)我們將kubectl安裝在一臺全新的CentOS7機器上;我們安裝在node2機器中
5.2 下載kubctl工具
方式1:GitHub下載,地址
https://github.com/kubernetes/kubernetes/blob/master/CHANGELOG-1.9.md#downloads-for-v195 下載https://dl.k8s.io/v1.9.5/kubernetes-client-linux-amd64.tar.gz
或 https://github.com/zq2599/blog_demos/blob/master/k8s_tools/kubectl/linux/kubectl.zip
方式2: curl -LO https://storage.googleapis.com/kubernetes-release/release/$(curl -s https://storage.googleapis.com/kubernetes-release/release/stable.txt)/bin/linux/amd64/kubectl/bin/linux/amd64/kubectl)
5.3設置工具 chmod +x kubectl mv ./kubectl /usr/local/bin
移動到全局訪問目錄下
5.4 任意目錄運行kubectl
5.5 配置參數 如圖
復制代碼
5.6 創(chuàng)建目錄及配置文件。復制上面的代碼
mkdir ~/.kube
cd ~/.kube
vi config
5.7 查看進程服務
kubectl get service -a -o wide --all-namespaces
kubectl get service
二、****K8S****部署****ELK**
1.部署前準備 因為elasticsearch運行要求vm.max_map_count內核參數必需大于262114,確認系統(tǒng)調過
sysctl -w vm.max_map_count=262144
鏡像可以參考es官方docker鏡像地址:https://www.docker.elastic.co/#
2. ES的配置方式
· 使用Cluster Update Setting API動態(tài)修改配置
· 使用配置文件的方式,配置文件默認在 config 文件夾下,具體位置取決于安裝方式。
o elasticsearch.yml 配置Elasticsearch
o jvm.options 配置ES JVM參數
o log4j.properties 配置ES logging參數
· 使用Prompt方式在啟動時輸入
最常使用的配置方式為使用配置文件,ES的配置文件為yaml格式,格式要求和Kubernetes的編排文件一樣。配置文件中可以引用環(huán)境變量,例如node.name: ${HOSTNAME}
ES的節(jié)點
ES的節(jié)點Node可以分為幾種角色:
· Master-eligible node,是指有資格被選為Master節(jié)點的Node,可以統(tǒng)稱為Master節(jié)點。設置node.master: true
· Data node,存儲數據的節(jié)點,設置方式為node.data: true。
· Ingest node,進行數據處理的節(jié)點,設置方式為node.ingest: true。
· Trible node,為了做集群整合用的。
對于單節(jié)點的Node,默認是master-eligible和data,對于多節(jié)點的集群,就要仔細規(guī)劃每個節(jié)點的角色。
3.單實例方式部署ELK
單實例部署,整體創(chuàng)建一個ES,創(chuàng)建一個kibana,創(chuàng)建一個ES的headless服務,創(chuàng)建一個kibana的節(jié)點port服務,訪問時通過節(jié)點port訪問kibana
如使用rancher下載yaml文件導入即可 :
https://raw.githubusercontent.com/cocowool/k8s-go/master/elk/elk-single.yaml
如使用k8s的kubectl節(jié)點主機導入 :
kubectl apply -f elk-single.yaml
打開K8S ui界面,等待k8創(chuàng)建
完成后為打開UI的overview:
本次介紹簡單應用部署,和應用場景,k8s應用多業(yè)務場景及軟件的CI\CD(如使用jenkins持續(xù)集成等)后續(xù)再進一步更新內容