kube-dns坑

k8s：v1.4.6

坑1

创建kube-dns的service时，需要手动指定一个cluster ip范围内的特定ip地址，但是我照做了之后，通过/etc/resolv.conf中配置servername xxx_ip执行kubectl exec -n kube-system -ti kube-dns-v20-xxxxx -c healthz -- nslookup kibana-logging.kube-system.svc.cluster.local发现不行。。。

于是尝试了下，把clusterip注释掉，让k8s集群自己分一个ip，通过dashboard查看分出来的ip，按照这个ip去配置就可以了。

还有一个奇怪的问题，按照目前理解来说，在node上的/etc/kubernetes/kubelet文件中配置了KUBELET_ARGS="--cluster-dns=172.17.26.52 --cluster-domain=cluster.local"，宿主机的/etc/resolv.conf中的nameserver应该就会获取，但是没有。。

因为创建的pod内的容器内的/etc/resolv.conf文件中的内容是集成的宿主机的/etc/resolv.conf。

坑2

lexec-healthz是k8s提供的一种辅助容器，多用于side car模式中。它的原理是定期执行指定的Linux指令，从而判断当前Pod中关键容器的健康状态。在kube-dns中的作用就是通过nslookup指令检查DNS查询服务的健康状态，k8s livenessProbe通过访问exec-healthz提供的Http API了解健康状态，并在出现故障时重启容器。其源码位于https://github.com/kubernetes/contrib/tree/master/exec-healthz。

配置dns：创建name为kube-dns的rc，rc下会创建一个名称为kube-dns-v20-xxxxx的pod，该pod下有3个容器，kubedns、dnsmasq、healthz，

master节点执行（可以解析）：

?. /home/kubernetes/cluster/addons/dns git:(e569a27) ?.>kubectl exec -n kube-system -ti kube-dns-v20-c2lgj -c healthz -- nslookup kibana-logging.kube-system.svc.cluster.local

Server:    172.17.26.52

Address 1: 172.17.26.52 kube-dns-back.kube-system.svc.cluster.local

Name:      kibana-logging.kube-system.svc.cluster.local

Address 1: 172.17.105.169 kibana-logging.kube-system.svc.cluster.local

但是通过dashboard查看healthz的日志，却是nslookup can't resolve  xxx。。。真无语，查看skydns-rc.yaml文件中的healthz的cmd参数，拿出来单独执行，

?. /home/kubernetes/cluster/addons/dns git:(e569a27) ?.>kubectl exec -n kube-system -ti kube-dns-v20-c2lgj -c healthz -- nslookup kibana-logging.kube-system.svc.cluster.local 127.0.0.1

Server:    127.0.0.1

Address 1: 127.0.0.1 localhost

Name:      kibana-logging.kube-system.svc.cluster.local

Address 1: 172.17.105.169 kibana-logging.kube-system.svc.cluster.local

是可以的。。。诡异了，不知道healthz的执行机制是什么鬼，我们在外面也是执行的它的cmd，在外面执行可以，它自己执行却不行。。。

如果一段时间healthz一直can't resolve，它会发一个termiated信号给kubedns容器，容器自毁。

于是，既然你自己的cmd不能执行，我就在创建rc时把你的cmd参数注释掉，换成一个最简单的命令“ping 127.0.0.1”，这样既有命令执行，又不会报什么错误，不报错误应该就不会发terminated信号给kubedns。

- name: healthz

image: gcr.io/google_containers/exechealthz-amd64:1.2

。。。

args:

#- --cmd=nslookup kubernetes.default.svc.cluster.local 127.0.0.1 >/dev/null

- --cmd=ping 127.0.0.1

#- --url=/healthz-dnsmasq

#- --cmd=nslookup kubernetes.default.svc.cluster.lcoal 127.0.0.1:10053 >/dev/null

#- --url=/healthz-kubedns

#- --port=8080

#- --quiet

暂时这样”解决“了。。。

============================

这篇文章中说k8s livenessProbe会用到这个healthz（屏蔽参数不知道会不会有其他影响，暂时先跳过了。。）：

lexec-healthz是k8s提供的一种辅助容器，多用于side car模式中。它的原理是定期执行指定的Linux指令，从而判断当前Pod中关键容器的健康状态。在kube-dns中的作用就是通过nslookup指令检查DNS查询服务的健康状态，k8s livenessProbe通过访问exec-healthz提供的Http API了解健康状态，并在出现故障时重启容器。其源码位于https://github.com/kubernetes/contrib/tree/master/exec-healthz。