本节对Kubernetes系统中的一些常见问题及解决方法进行说明。
以redis-master为例,使用如下配置文件redis-master-controller.yaml创建RC和Pod:

运行kubectl create-f redis-master-controller.yaml成功,但在查看Pod时,发现其总是无法处于运行状态。通过kubectl get pods命令可以看到:

进一步使用kubectl describe pod redis-master-6yy7o命令查看该Pod的详细信息:


可以看到,该Pod为Pending状态。从Message部分显示的信息可以看出,其原因说明是image pull failed for k8s.gcr.io/pause:3.2,即系统在创建Pod时无法从gcr.io下载pause镜像,导致创建Pod失败。
解决方法如下。
(1)如果服务器可以访问Internet,并且不希望使用HTTPS的安全机制来访问gcr.io,则可以在Docker Daemon的启动参数中加上--insecure-registry gcr.io,来表示可以匿名下载。
(2)如果Kubernetes集群在内网环境中无法访问gcr.io网站,则可以先通过一台能够访问gcr.io的机器下载pause镜像,将pause镜像导出后,再导入内网的Docker私有镜像库,并在kubelet的启动参数中加上--pod_infra_container_image,配置如下:

之后重新创建redis-master即可正确启动Pod。
注意,除了pause镜像,其他Docker镜像也可能存在无法下载的情况,与上述情况类似,很可能也是网络配置使得镜像无法下载,解决方法同上。
创建一个RC之后,通过kubectl get pods命令查看Pod,发现如下情况:


可以看到Pod已经创建成功,但Pod一会儿是Running状态,一会儿是ExitCode:0状态,在READY列中始终无法变成1/1,而且RESTARTS(重启的数量)的数量不断增加。这通常是因为容器的启动命令不能保持在前台运行。
本例中Docker镜像的启动命令如下:

在Kubernetes中根据RC定义创建Pod,之后启动容器。在容器的启动命令运行完成时,认为该容器的运行已经结束,并且成功结束(ExitCode=0)。根据Pod的默认重启策略定义(RestartPolicy=Always),RC将启动这个容器。
新的容器在运行启动命令后仍然会成功结束,之后RC会再次重启该容器,如此往复。其解决方法为将Docker镜像的启动命令设置为一个前台运行的命令,例如:

在Kubernetes集群中应尽量使用服务名访问正在运行的微服务,但有时会访问失败。由于服务涉及服务名的DNS域名解析、kube-proxy组件的负载分发、后端Pod列表的状态等,所以可通过以下几方面排查问题。
可以通过kubectl get endpoints <service_name>命令查看某个服务的后端Endpoint列表,如果列表为空,则可能因为:
◎ Service的Label Selector与Pod的Label不匹配;
◎ 后端Pod一直没有达到Ready状态(通过kubectl get pods进一步查看Pod的状态);
◎ Service的targetPort端口号与Pod的containerPort不一致等。
可以通过在客户端容器中ping <service_name>.<namespace>.svc进行检查,如果能够得到Service的ClusterIP地址,则说明DNS服务能够正确解析Service的名称;如果不能得到Service的ClusterIP地址,则可能是因为Kubernetes集群的DNS服务工作异常。
我们可以将kube-proxy服务设置为IPVS或iptables负载分发模式。
对于IPVS负载分发模式,可以通过ipvsadm工具查看Node上的IPVS规则,查看是否正确设置Service ClusterIP地址的相关规则。
对于iptables负载分发模式,可以通过查看Node上的iptables规则,查看是否正确设置Service ClusterIP地址的相关规则。