Skip to content

A CoreDNS 架构与集群服务发现全链路 ​

CoreDNS 是 Kubernetes 原生的集群服务发现引擎,以插件化链式架构设计,通常以 Deployment 运行在 kube-system 命名空间下。

flow
[业务 Pod 发起域名请求] -> [CoreDNS Service (kube-dns 10.96.0.10)]
[CoreDNS Service (kube-dns 10.96.0.10)] -> [CoreDNS 实例集群]
[CoreDNS 实例集群] -> {域名是否属于 cluster.local?}
{域名是否属于 cluster.local?} -> [查询集群内置注册表 (Kubernetes 插件)]: 是集群内 Service/Pod
{域名是否属于 cluster.local?} -> [Forward 转发至外部上游 DNS (如 114.114.114.114)]: 属于外部互联网域名
[查询集群内置注册表 (Kubernetes 插件)] -> [返回 ClusterIP 或 Pod IP]
[Forward 转发至外部上游 DNS (如 114.114.114.114)] -> [返回公网 IP]
callout
- **Service FQDN**:`<service-name>.<namespace>.svc.cluster.local`(同命名空间可直接用 `<service-name>`,跨命名空间可用 `<service-name>.<namespace>`)。
- **StatefulSet / 裸 Pod 专属 FQDN**:若想让单个 Pod 拥有可被解析的固定 FQDN 域名 `<pod-name>.<headless-svc-name>.<namespace>.svc.cluster.local`,必须满足两个条件:
  1. 创建一个 **Headless Service**(`clusterIP: None`),通过 `selector` 选中该 Pod;
  2. 在 Pod(或裸 Pod)的 `spec.hostname` 指定固定主机名,并将 `spec.subdomain` 设置为上述 Headless Service 的名称(StatefulSet 会通过 `serviceName` 自动注入此配置)。
- **在 CoreDNS 中添加自定义静态域名解析 (hosts)**:执行 `kubectl edit configmap coredns -n kube-system`,在 `data.Corefile` 中加入 `hosts { 192.168.100.88 db.internal.com fallthrough }`,保存后滚动重启 CoreDNS Pod 即可全集群生效。

B Pod 的四种 DNS 解析策略 (dnsPolicy) ​

每个 Pod 创建时,Kubelet 会向容器内注入 /etc/resolv.conf 文件。具体注入内容由 dnsPolicy 决定:

策略枚举工作行为与配置说明典型使用场景
ClusterFirst (默认)优先交由 CoreDNS 查询。若为集群外域名,由 CoreDNS 转发至宿主机上游 DNS 代理99% 的普通业务微服务 Pod
DefaultPod 继承宿主机操作系统的 /etc/resolv.conf 配置,完全不走 CoreDNS仅需访问外网、不与集群内微服务通信的独立组件
ClusterFirstWithHostNet专门用于设置了 hostNetwork: true(共享宿主机网络)的 Pod,强制其走 CoreDNS运行在 HostNetwork 下的 Ingress 或运维 Agent
None忽略 Kubernetes 的自动配置,由工程师在 YAML 的 dnsConfig 显式手写每行参数对解析性能有极致调优要求的场景

C 深度排障:高并发下 CoreDNS 5 秒超时之谜 ​

在大规模生产集群中,业务监控常偶发“域名解析耗时恰好 5.00 秒”的严重抖动,排查全过程如下:

flow
[微服务请求 www.google.com] -> [glibc 读取 /etc/resolv.conf]
[glibc 读取 /etc/resolv.conf] -> [检查 ndots:5 参数: 点号少于 5 个]: 判定为非绝对域名
[检查 ndots:5 参数: 点号少于 5 个] -> [依次拼接 4 个 search 域并发查询]: 产生大量无效 UDP 包
[依次拼接 4 个 search 域并发查询] -> [Linux 内核 Netfilter conntrack 竞态]: A 记录与 AAAA 记录并发丢包
[Linux 内核 Netfilter conntrack 竞态] -> (触发 glibc 默认 5 秒重试定时器): 业务发生 5s 延迟
callout
1. **`ndots:5` 机制**:若域名点号少于 5 个,优先拼接 `default.svc.cluster.local` 等搜索域,导致 1 次外网查询放大为 5 次 UDP 请求。
2. **内核 Conntrack 竞态**:UDP 是无连接的,IPv4 (A 记录) 与 IPv6 (AAAA 记录) 并发请求相同端口时,容易触发内核连接跟踪表锁竞争而丢包。
3. **glibc 5s 超时重试**:底层 DNS 解析库默认重试等待窗口恰为 5 秒。

D 根治方案:NodeLocalDNSCache 架构落地 ​

为了彻底解决跨节点网络跳数、降低 CoreDNS 压力并规避 conntrack 竞态,官方推出了 NodeLocalDNSCache:

flow
[业务 Pod (Node 1)] -> [本地 169.254.20.10:53]: 本机回环极速直达
[本地 169.254.20.10:53] -> [NodeLocalDNSCache (DaemonSet)]: 本地内存命中 (微秒级)
[NodeLocalDNSCache (DaemonSet)] -> [CoreDNS 集群]: 未命中时走单连接 TCP 转发
group 本地零跳数缓存: 本地 169.254.20.10:53, NodeLocalDNSCache (DaemonSet)
callout
- **将 UDP 转为 TCP 转发**:NodeLocalDNSCache 与中心 CoreDNS 之间建立稳定的长连接 TCP,彻底根治内核 UDP conntrack 丢包导致的 5s 超时!
- **就近内存响应**:本节点高频访问的域名(如数据库、消息队列)直接在宿主机内存命中,解析耗时从 2~5ms 下降至 **0.1ms (微秒级)**。

← 返回 Kubernetes 知识库总索引