kubernetes集群安装过程记录——＜02＞
·
一、安装Docker
二、安装kubernetes-master
2.1 修改docker cgroup驱动，与k8s一致，使用systemd
方式一：vim /etc/docker/daemon.json
覆盖内容为：
{
"exec-opts": ["native.cgroupdriver=systemd"],
"log-driver": "json-file",
"log-opts": {
"max-size": "100m"
},
"storage-driver": "overlay2",
"storage-opts": [
"overlay2.override_kernel_check=true"
]
}
方式二：直接命令
cat > /etc/docker/daemon.json <<EOF
{
"exec-opts": ["native.cgroupdriver=systemd"],
"log-driver": "json-file",
"log-opts": {
"max-size": "100m"
},
"storage-driver": "overlay2",
"storage-opts": [
"overlay2.override_kernel_check=true"
]
}
EOF
最后输入systemctl restart docker # 重启使配置生效
2.2 安装 kubelet kubeadm kubectl
安装前准备
步骤一：
cat <<EOF > /etc/yum.repos.d/kubernetes.repo
[kubernetes]
name=Kubernetes
baseurl=http://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
enabled=1
gpgcheck=0
repo_gpgcheck=0
gpgkey=http://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg
http://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg
EOF
步骤二:关闭SElinux
setenforce 0
sed -i 's/^SELINUX=enforcing$/SELINUX=disabled/' /etc/selinux/config
步骤三:开始安装
yum install -y kubelet kubeadm kubectl --disableexcludes=kubernetes
systemctl enable --now kubelet # 开机启动kubelet
2.3 安装kubernetes-master前准备一
1、查看当前linux操作系统发行信息
cat /etc/issue 或 cat /etc/centos-release
2、如果是centos用户则需要设置路由
<a> echo 'net.bridge.bridge-nf-call-iptables = 1'>>/etc/sysctl.conf
<b> echo 'net.bridge.bridge-nf-call-ip6tables = 1'>>/etc/sysctl.conf
<c> sysctl -p
<d> 重新加载所有配置文件
sysctl --system
<e> 关闭防火墙
systemctl disable --now firewalld
<f> k8s要求关闭swap (qxl)
swapoff -a && sysctl -w vm.swappiness=0 # 关闭swap
sed -ri '/^[^#]*swap/s@^@#@' /etc/fstab # 取消开机挂载swap
2.4 安装kubernetes-master前准备二：下载镜像
方式一:墙情况下
kubeadm config images pull
方式二:无墙情况下(已整理成脚本，可直接忽略此步骤到方式三)
kubeadm config images list # 列出所需镜像
# 根据所需镜像名字先拉取国内资源
docker pull mirrorgooglecontainers/kube-apiserver:v1.19.2
docker pull mirrorgooglecontainers/kube-controller-manager:v1.19.2
docker pull mirrorgooglecontainers/kube-scheduler:v1.19.2
docker pull mirrorgooglecontainers/kube-proxy:v1.19.2
docker pull mirrorgooglecontainers/pause:3.2
docker pull mirrorgooglecontainers/etcd:3.4.13-0
docker pull coredns/coredns:1.7.0 # 这个在mirrorgooglecontainers中没有
# 修改镜像tag
docker tag mirrorgooglecontainers/kube-apiserver:v1.19.2 k8s.gcr.io/kube-apiserver:v1.19.2
docker tag mirrorgooglecontainers/kube-controller-manager:v1.19.2 k8s.gcr.io/kube-controller-manager:v1.19.2
docker tag mirrorgooglecontainers/kube-scheduler:v1.19.2 k8s.gcr.io/kube-scheduler:v1.19.2
docker tag mirrorgooglecontainers/kube-proxy:v1.19.2 k8s.gcr.io/kube-proxy:v1.19.2
docker tag mirrorgooglecontainers/pause:3.2 k8s.gcr.io/pause:3.2
docker tag mirrorgooglecontainers/etcd:3.4.13-0 k8s.gcr.io/etcd:3.4.13-0
docker tag coredns/coredns:1.7.0 k8s.gcr.io/coredns:1.7.0
# 删除tag前的镜像
方式三：无翻墙情况下shell执行拉取
步骤一：在/etc/kubernetes目录下创建kubeadm_pull.sh文件并编辑文件，文件中的版本信息可以根据自己当前的信息进行设定（kubeadm config images list # 列出所需镜像）
#!/bin/bash
set -e
# Check version in https://kubernetes.io/docs/reference/setup-tools/kubeadm/kubeadm-init/
# Search "Running kubeadm without an internet connection"
# For running kubeadm without an internet connection you have to pre-pull the required master images for the version of choice:
KUBE_VERSION=v1.19.2
KUBE_PAUSE_VERSION=3.2
ETCD_VERSION=3.4.13-0
DNS_VERSION=1.7.0
GCR_URL=k8s.gcr.io
ALIYUN_URL=registry.cn-hangzhou.aliyuncs.com/google_containers
images=(kube-proxy:${KUBE_VERSION}
kube-scheduler:${KUBE_VERSION}
kube-controller-manager:${KUBE_VERSION}
kube-apiserver:${KUBE_VERSION}
pause:${KUBE_PAUSE_VERSION}
etcd:${ETCD_VERSION}
coredns:${DNS_VERSION})
# k8s-dns-sidecar:${DNS_VERSION}
# k8s-dns-kube-dns:${DNS_VERSION}
# k8s-dns-dnsmasq-nanny:${DNS_VERSION})
for imageName in ${images[@]} ; do
docker pull $ALIYUN_URL/$imageName
docker tag $ALIYUN_URL/$imageName $GCR_URL/$imageName
docker rmi $ALIYUN_URL/$imageName
done
docker images
步骤二：保存退出，修改文件可执行的权限
chmod 755 kubeadm_pull.sh
步骤三：执行脚本
./kubeadm_pull.sh
2.5 开始初始化安装
kubeadm init \
--kubernetes-version=v1.19.2 \
--apiserver-advertise-address=172.31.0.59 \
--service-cidr=10.96.0.0/12 \
--pod-network-cidr=10.244.0.0/16 \
--ignore-preflight-errors=Swap
**注意：初次初始化失败后再次初始化时需要先执行kubeadm reset命令，否则会出现端口占用等错误**
初始化参数说明：
1、--kubernetes-version
指定版本
2、--apiserver-advertise-address
指定与其它节点通信的接口，这里需要注意地址最好蛇者称当前节点的公网ip，
如果设置成私网ip，在其他机器进行对接证书认证的时候，CN内由于不存在该节点ip会报错，
如下其他机器下jenkins对接产生的错误。此处是内网ip
3、image-repository
执行的是镜像源，其默认值是k8s.gcr.io，指定为本地仓库源后可不用再指定（此处用的就是本地仓库）
4、pod-network-cidr
指定pod网络子网，使用fannel网络必须使用这个CIDR
2.6 安装成功后查看保存以下信息为后续添加节点使用
kubeadm join 172.31.0.59:6443 --token 7hwvt5.kmj0a1y54o \
--discovery-token-ca-cert-hash sha256:e355fe59ac1117ac8fa9888626b23e45a2de3e1200c2747bb0a07a7b5c22
三、安装kubernetes-node
步骤一： 安装前提
与2.4之前所有操作一样
步骤二：修改并执行vim kubeadm_node_pull.sh
#!/bin/bash
set -e
# Check version in https://kubernetes.io/docs/reference/setup-tools/kubeadm/kubeadm-init/
# Search "Running kubeadm without an internet connection"
# For running kubeadm without an internet connection you have to pre-pull the required master images for the version of choice:
KUBE_VERSION=v1.19.2
KUBE_PAUSE_VERSION=3.2
GCR_URL=k8s.gcr.io
ALIYUN_URL=registry.cn-hangzhou.aliyuncs.com/google_containers
images=(kube-proxy:${KUBE_VERSION}
pause:${KUBE_PAUSE_VERSION})
# k8s-dns-sidecar:${DNS_VERSION}
# k8s-dns-kube-dns:${DNS_VERSION}
# k8s-dns-dnsmasq-nanny:${DNS_VERSION})
for imageName in ${images[@]} ; do
docker pull $ALIYUN_URL/$imageName
docker tag $ALIYUN_URL/$imageName $GCR_URL/$imageName
docker rmi $ALIYUN_URL/$imageName
done
docker images
步骤三：join执行（2.6保存的）
kubeadm join 172.31.0.59:6443 --token 7hwvt5.kmj0a1y54o \
--discovery-token-ca-cert-hash sha256:e355fe59ac1117ac8fa9888626b23e45a2de3e1200c2747bb0a07a7b5c22
步骤四:(补充token失效问题24小时内有效)
# 使用如下命令创建
kubeadm token list # 在master节点执行用于查看token，没有则创建
kubeadm token create # 创建临时token
# 查看kubernetes认证的SHA256加密字符串
openssl x509 -pubkey -in /etc/kubernetes/pki/ca.crt | openssl rsa -pubin -outform der 2>/dev/null | openssl dgst -sha256 -hex | sed 's/^.* //'
# 加入
kubeadm join --token [TOKEN] 172.31.0.59:6443 --discovery-token-ca-cert-hash sha256:[SHA256]
步骤五：解决新增节点后执行命令8080错误
查看 四、问题截图二：
四、问题和解决
问题截图一：
问题分析和解决
修改docker服务文件：
/usr/lib/systemd/system/docker.service(该文件的位置也有可能是/etc/systemd/system/docker.service.d)，
添加一行记录在14行左右Environment="NO_PROXY=127.0.0.1/8,127.0.0.1/16
目的：指定kubeadm从本地docker仓库中加载镜像
问题截图二：
五、k8s-master补充应用flannel网络
4.1 没安装前产生的问题
这就会导致jenkins连接kubernets报错信息展示：java.net.UnknownHostException: kubernetes.default.svc: Name or service not known
问题解决：
kubectl apply -f https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kube-flannel.yml
解决后展示：
六、k8s补充安装kuboard监控
kubectl apply -f https://kuboard.cn/install-script/kuboard.yaml
获取token
kubectl -n kube-system describe secret $(kubectl -n kube-system get secret | grep kuboard-user | awk '{print $1}')
kubernetes常见错误问题及解决办法
上一篇：kubernetes常用命令记录——＜01＞
下一篇：kubernetes根据镜像快速创建服务的详细简单过程——＜03＞
参考文章：https://blog.csdn.net/curry10086/article/details/107579113
参考文章：https://blog.csdn.net/no_game_no_life_/article/details/102664809
参考文章：https://www.jianshu.com/p/748746c696c6
参考文章：https://www.jianshu.com/p/71e5ac8a42de
腾讯云面向开发者汇聚海量精品云计算使用和开发经验，营造开放的云计算技术生态圈。
更多推荐
1
0- 0
已为社区贡献4条内容
所有评论(0)