切换容器运行时 · Kubernetes

[TOC] 背景说明：在 Kuberntes 平台中，为了解决与容器运行时（例如 Docker）集成问题，在早期社区推出 CRI（Container Runtime Interface，容器运行时接口），以支持更多的容器运行时。而 Docker 本身并不支持 CRI（容器运行时接口）这一 Kubernetes 运行时 API，Kubernetes 用户一直以来所使用的其实是名为 “dockershim” 的桥接服务。Dockershim 能够转换 Docker API 与 CRI，但在后续版本当中，Kubernetes 将不再提供这项桥接服务。整体步骤： 1. 腾空节点 2. 停止相关服务 3. 安装containerd服务 4. 修改kubelet配置 5. 启动kubelet服务 6. 验证功能 7. [可选]删除docker服务 ## 腾空节点 ```shell $ kubectl drain --ignore-daemonsets master03 node/master03 cordoned WARNING: ignoring DaemonSet-managed Pods: kube-system/calico-node-fbzqw, kube-system/kube-proxy-95hst node/master03 drained ``` ## 停止相关服务 ```shell systemctl stop kubelet systemctl stop containerd systemctl disable docker --now ``` ## 安装containerd服务请参考本人的博客文章 [containerd安装](https://www.cnblogs.com/jiaxzeng/p/16708491.html) ## 修改kubelet配置修改 kubelet 配置，将容器运行时配置为 containerd，打开 /etc/sysconfig/kubelet 文件，在该文件中可以添加一些额外的 kubelet 启动参数，配置如下所示： ```shell cat /etc/sysconfig/kubelet KUBELET_EXTRA_ARGS="--container-runtime=remote --container-runtime-endpoint=unix:///run/containerd/containerd.sock" ``` 上面的配置中我们增加了两个参数，`--container-runtime` 参数是用来指定使用的容器运行时的，可选值为 docker 或者 remote，默认是 docker，由于我们这里使用的是 containerd 这种容器运行时，所以配置为 remote 值（也就是除 docker 之外的容器运行时都应该指定为 remote），然后第二个参数 `--container-runtime-endpoint` 是用来指定远程的运行时服务的 endpiont 地址的，在 Linux 系统中一般都是使用 unix 套接字的形式，比如这里我们就是指定连接 containerd 的套接字地址 `unix:///run/containerd/containerd.sock`。 ## 启动kubelet服务 ```shell systemctl start kubelet ``` ## 将节点设置运行调度 ```shell kubectl uncordon master03 ``` ## 验证 ```shell # 确认CONTAINER-RUNTIME值 $ kubectl get nodes master03 -owide NAME STATUS ROLES AGE VERSION INTERNAL-IP EXTERNAL-IP OS-IMAGE KERNEL-VERSION CONTAINER-RUNTIME master03 Ready control-plane,master 2d23h v1.20.15 192.168.32.184 <none> CentOS Linux 7 (Core) 3.10.0-957.el7.x86_64 containerd://1.6.9 # 创建deployment kubectl create deployment alpine --image=alpine:3.16 -- sleep 3600 # 容忍任何污点以及调度到指定节点 kubectl patch deployment alpine -p '{"spec": {"template": {"spec": {"tolerations": [{"operator": "Exists"}], "nodeSelector": {"kubernetes.io/hostname": "master03"}}}}}' # 查看pod运行情况 $ kubectl get pod -owide NAME READY STATUS RESTARTS AGE IP NODE NOMINATED NODE READINESS GATES alpine-5f7998d889-8kzpg 1/1 Running 0 9s 10.244.235.11 master03 <none> <none> # 测试与pod的连通性 $ kubectl -n kube-system get pod -owide -l k8s-app=kube-dns NAME READY STATUS RESTARTS AGE IP NODE NOMINATED NODE READINESS GATES coredns-7f89b7bc75-hw4pt 1/1 Running 0 158m 10.244.241.68 master01 <none> <none> coredns-7f89b7bc75-pz9zb 1/1 Running 0 158m 10.244.59.198 master02 <none> <none> $ kubectl exec -it alpine-5f7998d889-8kzpg -- ping -c4 10.244.241.68 PING 10.244.241.68 (10.244.241.68): 56 data bytes 64 bytes from 10.244.241.68: seq=0 ttl=62 time=0.550 ms 64 bytes from 10.244.241.68: seq=1 ttl=62 time=0.485 ms 64 bytes from 10.244.241.68: seq=2 ttl=62 time=0.520 ms 64 bytes from 10.244.241.68: seq=3 ttl=62 time=0.589 ms --- 10.244.241.68 ping statistics --- 4 packets transmitted, 4 packets received, 0% packet loss round-trip min/avg/max = 0.485/0.536/0.589 ms # 测试service连通性 $ kubectl exec -it alpine-5f7998d889-8kzpg -- wget --no-check-certificate -q -O - https://kubernetes:443/version { "major": "1", "minor": "20", "gitVersion": "v1.20.15", "gitCommit": "8f1e5bf0b9729a899b8df86249b56e2c74aebc55", "gitTreeState": "clean", "buildDate": "2022-01-19T17:23:01Z", "goVersion": "go1.15.15", "compiler": "gc", "platform": "linux/amd64" } # 清理deployment $ kubectl delete deploy alpine ``` ## [可选]删除docker服务 - 确认docker数据目录[停服务前执行] ```shell docker info | awk -F: '/Docker Root Dir/ {print $2}' ``` - **二进制安装 docker 服务** 自行删除 docker相关二进制文件、systemd配置、docker数据目录 - **RPM 安装的 docker 服务** docker版本 >= 18.09.0 ```shell yum remove docker-ce docker-ce-cli containerd.io ``` 17.03.0 <= docker版本 <= 18.09.0 ```shell yum remove docker-ce ``` ## 参考文档官网文档：https://kubernetes.io/zh-cn/docs/tasks/administer-cluster/migrating-from-dockershim/change-runtime-containerd/