主從結(jié)構(gòu)
master: 10.19.37.76
workder:10.19.37.75 10.19.37.77
詳細(xì)步驟
所有操作都在root用戶下運(yùn)行。
1. 初始準(zhǔn)備
確保集群間機(jī)器互相ping通
關(guān)閉selinux:
sed -i 's/enforcing/disabled/' /etc/selinux/config
setenforce 0
關(guān)閉swap:
swapoff -a # 臨時(shí)
vim /etc/fstab # 永久
2.安裝docker
2.1 卸載之前docker
搜索已經(jīng)安裝的與docker相關(guān)的包
yum list installed|grep docker
或者
rpm -qa|grep docker
依次刪除
yum –y remove docker.x86_64(具體對(duì)應(yīng)名)
再次檢查docker是否已經(jīng)卸載成功篱蝇,如果無(wú)結(jié)果則表示完全卸載躲因。
2.2 安裝docker
依次執(zhí)行
yum install -y yum-utils device-mapper-persistent-data lvm2
yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo // 國(guó)內(nèi)鏡像
// yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo //國(guó)外鏡像
安裝docker最好指定版本急但,經(jīng)過(guò)多次嘗試選擇17.03
yum localinstall http://mirrors.aliyun.com/docker-ce/linux/centos/7/x86_64/stable/Packages/docker-ce-selinux-17.03.3.ce-1.el7.noarch.rpm
yum install yum install docker-ce-17.03.3.ce-1.el7 -y
docker記得配一下國(guó)內(nèi)鏡像
vim /etc/docker/daemon.json
{"registry-mirrors": ["http://hub-mirror.c.163.com" , "https://registry.cn-hangzhou.aliyuncs.com", "https://docker.mirrors.ustc.edu.cn"], "live-restore": true}
啟動(dòng)docker
systemctl enable docker
systemctl start docker
查看下docker國(guó)內(nèi)鏡像設(shè)置是否成功
docker info // 查看Registry Mirrors字段
3. 安裝kubeadm,kubelet和kubectl
配置國(guó)內(nèi)k8s源
cat << EOF > /etc/yum.repos.d/kubernetes.repo
[kubernetes]
name=Kubernetes
baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=1
repo_gpgcheck=1
gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg https://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF
安裝了目前最新版本(1.18)的kubeadm, kubelet and kubectl,運(yùn)維大哥說(shuō)1.16穩(wěn)定一些
yum install -y kubelet kubeadm kubectl
或指定版本安裝
yum install -y kubelet-1.16.0 kubeadm-1.16.0 kubectl-1.16.0
啟動(dòng)kubelet
systemctl enable kubelet && systemctl start kubelet
修改Cgroup Driver
修改/etc/systemd/system/kubelet.service.d/10-kubeadm.conf文件召川,增加--cgroup-driver=cgroupfs
如果上述文件不存在請(qǐng)查找 /usr/lib/systemd/system/kubelet.service.d/10-kubeadm.conf
重啟kubectl
systemctl daemon-reload
systemctl restart kubelet
4. init master節(jié)點(diǎn)
這一步只在master節(jié)點(diǎn)執(zhí)行
init master節(jié)點(diǎn):
kubeadm init --image-repository registry.aliyuncs.com/google_containers --kubernetes-version v1.18.0 --pod-network-cidr=192.168.0.0/16 --token-ttl 0
之后執(zhí)行:
mkdir -p $HOME/.kube
cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
chown $(id -u):$(id -g) $HOME/.kube/config
關(guān)于token
執(zhí)行之后痴奏,在結(jié)果的最后一行包含了master 節(jié)點(diǎn)的token:
kubeadm join 10.19.37.76:6443 --token gcw5aw.b1925wvffk18bfoz --discovery-token-ca-cert-hash sha256:07798bd39b8eea88beee5697281857acb94dadf5032f3239c619c6080e2599b4
如果忘了token可以執(zhí)行蛀骇,
kubectl -n kube-system describe $(kubectl -n kube-system get secret -n kube-system -o name | grep namespace) | grep token
這串token有效期是24小時(shí),若想重新生成則執(zhí)行:
kubeadm token create --print-join-command
補(bǔ)充指令查詢集群運(yùn)行情況
journalctl -f -u kubelet
5. 安裝網(wǎng)絡(luò)組件
這時(shí)候執(zhí)行 kubectl get nodes 读拆,master節(jié)點(diǎn)是not ready狀態(tài)擅憔。這是因?yàn)槿鄙倬W(wǎng)絡(luò)通信插件,下面我選擇了calico建椰。當(dāng)然你也可以選擇flannel雕欺、weave等。
安裝 calico 網(wǎng)絡(luò)插件
參考文檔 https://docs.projectcalico.org/v3.13/getting-started/kubernetes/self-managed-onprem/onpremises
wget https://kuboard.cn/install-script/calico/calico-3.13.1.yaml
kubectl apply -f calico-3.13.1.yaml
驗(yàn)證新加入的pod的狀態(tài) 棉姐,執(zhí)行
kubectl get pods -A -n kubesytem
狀態(tài)為running表示加入成功
6. worker節(jié)點(diǎn)加入集群
worker節(jié)點(diǎn)執(zhí)行上述 1-3 步驟屠列,然后執(zhí)行
kubeadm join 10.19.37.76:6443 --token gcw5aw.b1925wvffk18bfoz --discovery-token-ca-cert-hash sha256:07798bd39b8eea88beee5697281857acb94dadf5032f3239c619c6080e2599b4
稍后片刻即可加入集群當(dāng)中。
在master節(jié)點(diǎn)上執(zhí)行
kubectl get node -A
查看新加入的節(jié)點(diǎn)是否是ready狀態(tài)伞矩。如果不是笛洛,則執(zhí)行
kubectl get pods -A -n kube-system -o wide
找到異常的pods,查看錯(cuò)誤的原因:
kubectl describe pod calico-node-sldql -n kube-system
7. 可視化插件
# kubectl apply -f https://kuboard.cn/install-script/kuboard.yaml
# docker pull eipwork/kuboard
生成連接k8s的token
# echo $(kubectl -n kube-system get secret $(kubectl -n kube-system get secret | grep kuboard-user | awk '{print $1}') -o go-template='{{.data.token}}' | base64 -d)
踩坑
1. cgroup 的 問(wèn)題
上面提到了乃坤。請(qǐng)參考: https://blog.csdn.net/Andriy_dangli/article/details/85062983
2. 啟動(dòng)kubectl時(shí)候的錯(cuò)誤
failed to load Kubelet config file /var/lib/kubelet/config.yaml, error failed to read kubelet config file "/var/lib/kubelet/config.yaml", error: open /var/lib/kubelet/config.yaml: no such file or directory
參考:https://github.com/kubernetes/kubernetes/issues/65863
把config.yaml文件復(fù)制一遍苛让,重新啟動(dòng)即可沟蔑。
3.join 節(jié)點(diǎn)時(shí)后的錯(cuò)誤
ERROR FileContent--proc-sys-net-bridge-bridge-nf-call-iptables
參考:https://blog.csdn.net/zhydream77/article/details/81909939