一、K8S安裝
本次安裝我們選擇rancher安裝k8s,對應(yīng)支持版本請參考:
https://rancher.com/docs/rancher/v1.6/zh/hosts/#docker
Docker:1.12.3
Kubernetetes:v1.8.3

1.****準(zhǔn)備前工作 3臺centos6.7
Master:192.168.3.41
Node1:192.168.3.42
Node2:192.168.3.43
1.1修改各節(jié)點(diǎn)主機(jī) hostname vi /etc/hostname
1.2關(guān)閉seliunx:
sed -i 's/SELINUX=enforcing/SELINUX=disabled/' /etc/selinux/config
setenforce 0
1.3關(guān)閉防火墻:
systemctl stop firewalld
systemctl disable firewalld
1.4設(shè)置kubernetes阿里源(不再訪問海外源,以節(jié)省時間)
cat <<EOF > /etc/yum.repos.d/kubernetes.repo
[kubernetes]
name=Kubernetes
baseurl=[https](https://www.centos.bz/tag/https/)://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64/
enabled=1
gpgcheck=0
EOF
1.5更新源:yum -y update
1.6關(guān)閉swap交換分區(qū)執(zhí)行命令 swapoff -a
1.7 打開/etc/sysctl.conf
檢查是否有net.ipv4.ip_forward = x這樣的配置;
如果有就保證x等于1,如果沒有就加一行:net.ipv4.ip_forward = 1
修改并保存后,執(zhí)行命令sysctl -p使配置生效;
執(zhí)行命令sysctl -a|grep “ip_forward”,查看最新的配置,應(yīng)該有如下內(nèi)容:
net.ipv4.ip_forward = 1
net.ipv4.ip_forward_use_pmtu = 0
##############################重啟三臺服務(wù)器###########################
2.安裝Docker1.2.3**
2.1 三臺主機(jī)均執(zhí)行docker安裝命令
mkdir -p ~/docker && cd ~/docker && wget http://yum.dockerproject.org/repo/main/centos/7/Packages/docker-engine-selinux-1.12.3-1.el7.centos.noarch.rpm && wget http://yum.dockerproject.org/repo/main/centos/7/Packages/docker-engine-1.12.3-1.el7.centos.x86_64.rpm && wget http://yum.dockerproject.org/repo/main/centos/7/Packages/docker-engine-debuginfo-1.12.3-1.el7.centos.x86_64.rpm && yum localinstall -y docker-engine-selinux-1.12.3-1.el7.centos.noarch.rpm docker-engine-1.12.3-1.el7.centos.x86_64.rpm docker-engine-debuginfo-1.12.3-1.el7.centos.x86_64.rpm
2.2設(shè)置docker開機(jī)啟動 systemctl enable docker
2.3啟動docker systemctl start docker
2.4查看docker版本 docker version

3.設(shè)置Docker鏡像加速
查看docker此時如果用docker pull命令下載鏡像,本地會連接hub.docker.com網(wǎng)站去下載,耗時較長,因此我們可以設(shè)置docker鏡像加速,使得本地連接去國內(nèi)鏡像倉庫下載,鏡像加速的設(shè)置有很多種,本章以阿里云的設(shè)置為例,步驟如下:
3.1 建立目錄:mkdir -p /etc/docker
3.2 設(shè)置國內(nèi)鏡像
tee /etc/docker/daemon.json <<-'EOF'
{
"registry-mirrors": ["https://xwx6wxd1.mirror.aliyuncs.com"]
}
EOF
3.3 重新加載配置后重啟服務(wù)
systemctl daemon-reload
systemctl restart docker
4.安裝rancher
4.1 執(zhí)行安裝代碼
docker run -d --restart always --name rancher-server -p 8080:8080 rancher/server:v1.6.11-rc3 && docker logs -f rancher-server
或安裝2.X版本
sudo docker run -d --restart=unless-stopped -p 80:80 -p 443:443 rancher/rancher
執(zhí)行后,下載rancher鏡像后會再啟動容器,同時輸出日志,待日志不再滾動時,打開瀏覽器 192.168.3.41:8080進(jìn)入初始化界面,如圖:

在搭建kubernetes之前,我們先創(chuàng)建一個環(huán)境模板來給環(huán)境配置基本的信息
4.2 配置面板在環(huán)境“default“下拉菜單中選擇”環(huán)境管理“

添加模板名稱后,選擇“kebuernetes“---編輯

選擇“rancher”版本

彈出配置界面

這里注意的填寫的地址和名稱為:
Private Registry for Add-Ons and Pod Infra Container Image ------------- --registry.cn-shenzhen.aliyuncs.com
Image namespace for Add-Ons and Pod Infra Container Image-------------rancher_cn
Image namespace for kubernetes-helm Image -------------------------------rancher_cn
Pod Infra Container Image -----------------------------------------------------rancher_cn/pause-amd64:3.0
下拉后點(diǎn)擊“設(shè)置”完成配置“

回到主菜單 –點(diǎn)擊創(chuàng)建

完成面板配置
4.3 創(chuàng)建kubernetes 點(diǎn)擊“添加環(huán)境”

選擇k8s模板后創(chuàng)建

4.4 如下圖所示,在左上解選擇剛創(chuàng)建的環(huán)境,可以看到正在設(shè)置環(huán)境,待就緒后,kebernets master節(jié)點(diǎn)服務(wù)設(shè)置完成

4.5 添加主在頁面上確認(rèn)紅框中的IP地址是不是你的master機(jī)器對外暴露的地址(多網(wǎng)卡的機(jī)器要關(guān)注),確認(rèn)無誤后點(diǎn)擊“保存”
4.6 拷貝腳本代碼,安裝node節(jié)點(diǎn)主機(jī) 加入兩臺node主機(jī)

2.X版本 如下圖


選擇master為etcd+contrl 其他node節(jié)點(diǎn)為work
復(fù)制到每臺并執(zhí)行安裝

系統(tǒng)會緩慢加載主機(jī)信息

進(jìn)入UI配置界面

############################踩坑#####################################
訪問:http://192.168.3.41:8080/r/projects/1a8/kubernetes-dashboard:9090/# 服務(wù)不可用 可償試更換docker 更高版本1.12.6

/usr/lib/systemd/system/docker.service
[service]后面添加
ExecStartPost=/sbin/iptables -I FORWARD -s 0.0.0.0/0 -j ACCEPT
環(huán)境清理:
###################### 環(huán)境清理(可選)#################################
1)請檢查有沒有/var/lib/rancher/state/這個文件夾,如果有則刪除;
2)如果以前有通過Rancher安裝過kubernetes,請執(zhí)行命令:
刪除正在運(yùn)行的容器
docker rm -f -v $(docker ps -aq)
刪除存儲卷
```docker volume rm $(docker volume ls)``
刪除遺留的目錄
rm -rf /etc/kubernetes/ssl /var/lib/etcd /etc/cni /opt/cni /var/run/calico /var/lib/rancher/state/
rm -rf /etc/kubernetes/ssl
rm -rf /var/lib/etcd
rm -rf /etc/cni
rm -rf /opt/cni
rm -rf /var/run/calico
下載1.12.6
wget http://yum.dockerproject.org/repo/main/centos/7/Packages/docker-engine-selinux-1.12.6-1.el7.centos.noarch.rpm
wget http://yum.dockerproject.org/repo/main/centos/7/Packages/docker-engine-1.12.6-1.el7.centos.x86_64.rpm
wget http://yum.dockerproject.org/repo/main/centos/7/Packages/docker-engine-debuginfo-1.12.6-1.el7.centos.x86_64.rpm
安裝
yum localinstall -y docker-engine-selinux-1.12.6-1.el7.centos.noarch.rpm docker-engine-1.12.6-1.el7.centos.x86_64.rpm docker-engine-debuginfo-1.12.6-1.el7.centos.x86_64.rpm
啟動
systemctl enable docker
systemctl start docker
查看版本
docker version
4.7 打開kubernetes UI

4.8 創(chuàng)建tomcat.yml配置文件
apiVersion: v1
kind: Service
metadata:
name: tomcat001
spec:
type: NodePort
ports:
- port: 8080
nodePort: 30018
selector:
name: tomcat01
打開ui界面 新建


上傳tomcat.yml配置文件
打開UI界面 –服務(wù)

等部署完成后狀態(tài)為綠色
再建立個文件 tomcat-svc.yaml 內(nèi)容如下:
apiVersion: v1
kind: Service
metadata:
name: tomcat001
spec:
type: NodePort
ports:
- port: 8080
nodePort: 30018
selector:
name: tomcat001
上傳后查看服務(wù)

通過node節(jié)點(diǎn)IP訪問 192.168.3.42:30018 訪問到tomcat頁面

5.安裝kubectl工具
5.1kubectl工具安裝在哪里?
kubectl是個客戶端工具,可以安裝在任意一臺Linux、windows或者M(jìn)ac電腦上,只要這個電腦能夠連接master節(jié)點(diǎn),本次實(shí)戰(zhàn)我們將kubectl安裝在一臺全新的CentOS7機(jī)器上;我們安裝在node2機(jī)器中
5.2 下載kubctl工具
方式1:GitHub下載,地址
https://github.com/kubernetes/kubernetes/blob/master/CHANGELOG-1.9.md#downloads-for-v195 下載https://dl.k8s.io/v1.9.5/kubernetes-client-linux-amd64.tar.gz
或 https://github.com/zq2599/blog_demos/blob/master/k8s_tools/kubectl/linux/kubectl.zip
方式2: curl -LO https://storage.googleapis.com/kubernetes-release/release/$(curl -s https://storage.googleapis.com/kubernetes-release/release/stable.txt)/bin/linux/amd64/kubectl/bin/linux/amd64/kubectl)
5.3設(shè)置工具 chmod +x kubectl mv ./kubectl /usr/local/bin移動到全局訪問目錄下
5.4 任意目錄運(yùn)行kubectl

5.5 配置參數(shù) 如圖

復(fù)制代碼

5.6 創(chuàng)建目錄及配置文件。復(fù)制上面的代碼
mkdir ~/.kube
cd ~/.kube
vi config
5.7 查看進(jìn)程服務(wù)
kubectl get service -a -o wide --all-namespaces

kubectl get service

二、****K8S****部署****ELK**
1.部署前準(zhǔn)備 因?yàn)閑lasticsearch運(yùn)行要求vm.max_map_count內(nèi)核參數(shù)必需大于262114,確認(rèn)系統(tǒng)調(diào)過
sysctl -w vm.max_map_count=262144
鏡像可以參考es官方docker鏡像地址:https://www.docker.elastic.co/#
2. ES的配置方式
· 使用Cluster Update Setting API動態(tài)修改配置
· 使用配置文件的方式,配置文件默認(rèn)在 config 文件夾下,具體位置取決于安裝方式。
o elasticsearch.yml 配置Elasticsearch
o jvm.options 配置ES JVM參數(shù)
o log4j.properties 配置ES logging參數(shù)
· 使用Prompt方式在啟動時輸入
最常使用的配置方式為使用配置文件,ES的配置文件為yaml格式,格式要求和Kubernetes的編排文件一樣。配置文件中可以引用環(huán)境變量,例如node.name: ${HOSTNAME}
ES的節(jié)點(diǎn)
ES的節(jié)點(diǎn)Node可以分為幾種角色:
· Master-eligible node,是指有資格被選為Master節(jié)點(diǎn)的Node,可以統(tǒng)稱為Master節(jié)點(diǎn)。設(shè)置node.master: true
· Data node,存儲數(shù)據(jù)的節(jié)點(diǎn),設(shè)置方式為node.data: true。
· Ingest node,進(jìn)行數(shù)據(jù)處理的節(jié)點(diǎn),設(shè)置方式為node.ingest: true。
· Trible node,為了做集群整合用的。
對于單節(jié)點(diǎn)的Node,默認(rèn)是master-eligible和data,對于多節(jié)點(diǎn)的集群,就要仔細(xì)規(guī)劃每個節(jié)點(diǎn)的角色。
3.單實(shí)例方式部署ELK
單實(shí)例部署,整體創(chuàng)建一個ES,創(chuàng)建一個kibana,創(chuàng)建一個ES的headless服務(wù),創(chuàng)建一個kibana的節(jié)點(diǎn)port服務(wù),訪問時通過節(jié)點(diǎn)port訪問kibana
如使用rancher下載yaml文件導(dǎo)入即可 :
https://raw.githubusercontent.com/cocowool/k8s-go/master/elk/elk-single.yaml
如使用k8s的kubectl節(jié)點(diǎn)主機(jī)導(dǎo)入 :
kubectl apply -f elk-single.yaml
打開K8S ui界面,等待k8創(chuàng)建

完成后為打開UI的overview:

本次介紹簡單應(yīng)用部署,和應(yīng)用場景,k8s應(yīng)用多業(yè)務(wù)場景及軟件的CI\CD(如使用jenkins持續(xù)集成等)后續(xù)再進(jìn)一步更新內(nèi)容