外观
11 - DNS 查询、缓存与故障排查
前置阅读:01 - 请求全景、04 - 目的地址与路径。取证遵循A。
DNS 基础采用 RFC1035/2308/6891;Java 实验环境为 Windows/OpenJDK17+35。解析器、缓存、安全属性和工具行为依运行时及版本而异,不能从
dig输出推定应用走同一解析路径。
摘要
DNS(域名系统)提供名称到记录的查询,其中 A 记录提供 IPv4 地址,AAAA 记录提供 IPv6 地址。应用取得地址后,还要选择目标并建立连接;如果复用已有连接,也可能根本不再解析名称。因此,权威记录更新不等于每个进程立即切换,解析成功也不等于服务可达。
本文先解释查询路径和正、负缓存,再用隔离的 JVM 实验观察缓存边界,最后按“协议回答、运行时解析、最终连接目标”排查故障。Java 的 UnknownHostException 是名称解析 API 的异常,不能直接当作 DNS 的 NXDOMAIN 响应。
1. 现象:少数实例还访问旧地址
假设域名记录已经更新,大多数实例访问新地址,少数实例仍访问旧地址。分析时要分开两件事:新一次解析返回了什么,以及当前请求用了哪条连接。
如果实例重新解析却得到旧地址,候选原因包括递归服务的缓存尚未到期、JVM 缓存仍有效,或应用保存的地址列表未刷新。如果解析已经得到新地址,请求仍可能通过 HTTP 连接池中的旧连接访问旧 IP。连接池保存的是已建立的连接,DNS 更新不会把这条连接自动迁移到新地址。
新建 JVM 解析到新地址,只说明新进程当时的结果;它不能证明旧 JVM 原先解析错。旧连接访问旧地址,也不能证明发生了一次新的 DNS 查询。先记录异常、原始名称、实际查询名称、A/AAAA 类型、当次解析返回值、最终选择的 IP、连接是否复用和时间,再考虑清缓存。
2. 原理:解析路径不是唯一流水线
解析器(Resolver)负责接受名称查询并取得结果。递归解析服务替客户端继续查找答案;权威服务器负责回答自己管理的 DNS 区域中的记录。转发服务则把查询交给上游解析服务处理。
在相关缓存都未命中时,可以用下面的简化路径理解一次解析:
text
应用请求解析名称
→ 系统/运行时解析器
→ 配置的递归或转发解析服务
→ 递归服务按委派访问根、顶级域及权威服务器
→ 返回记录与剩余 TTL
→ 应用选择地址,建立连接委派是告诉查询方“下一步应找哪些服务器”。根和顶级域(TLD)服务器通常提供委派,并非每次直接返回业务名称的 IP。TTL(Time To Live)表示记录允许缓存的时间;命中缓存时,查询不必继续走完整路径。
应用也不一定从系统 DNS 开始查询。hosts 是本地名称与地址映射文件;Linux 的 NSS(名称服务切换机制)决定名称查询使用哪些来源及其顺序。JVM、浏览器、NodeLocal(节点本地 DNS 缓存)和应用自带解析器还可能各自缓存结果。DoH/DoT 分别通过 HTTPS/TLS 传输 DNS,使用它们的客户端也可能绕过系统配置的 DNS 服务器(nameserver)。
CNAME 是名称别名记录。取得别名后,还需取得目标名称对应类型的记录。链中每个 RRset(同一名称、类型和类别的一组记录)有自己的 TTL,不能把整条别名链当成一个缓存计时器。
2.1 响应码、空答案与异常不可互换
DNS 响应中的 RCODE 是响应码,Answer 是答案部分,Authority 是权威信息部分。AA 标志表示权威回答;NS 记录指向名称服务器,SOA 记录提供区域管理信息,也用于判断权威负回答的缓存期限。
排障时应同时看响应码、查询类型和这些字段,不能只截取返回的 IP:
| 结果 | 协议含义/候选原因 | 需继续观察 |
|---|---|---|
| NOERROR 且有目标记录 | 这次查询取得相应答案 | 地址是否被选择,目标是否可达 |
| NOERROR 空 Answer | 可能是 NODATA(没有所查类型的数据)、委派、别名处理相关情况或其他响应形态 | AA、Authority、NS/SOA、查询类型,不直接宣称名称不存在 |
| NXDOMAIN | 相应 DNS 视图下名称不存在 | 负缓存、实际查询的后缀名称、权威来源 |
| SERVFAIL | 服务器未能完成查询 | 上游、DNSSEC、配置、容量,不能只选一种根因 |
| REFUSED | 查询被拒绝 | 权限、递归/策略配置 |
| Timeout | 超时预算内未取得有效响应,不是 DNS 响应码 | 请求/响应路径、服务器负载与重试 |
| UnknownHostException | Java 未取得可用地址的 API 结果 | hosts、缓存、系统异常,不推定具体 DNS RCODE |
DNS 视图指客户端所处环境能看到的记录集合;内部与外部客户端可能得到不同答案。DNSSEC 用于验证 DNS 数据真实性,不提供加密。DoH/DoT 保护相应传输段,但不能仅凭传输加密就证明权威数据正确;这些机制在目标部署中的实际行为需要分别确认。
2.2 正缓存与负缓存
正缓存保存成功取得的记录,负缓存保存名称不存在或缺少所查类型等结果。负缓存可以减少重复的无效查询,但名称或记录后来新增时,客户端也可能继续使用尚未过期的负结果。
正记录 TTL 是可缓存期限,不要求所有客户端同一时刻刷新。已经缓存的旧记录仍持有旧 TTL,所以改记录时才降低 TTL,不会追溯缩短此前缓存的期限。中间层还可能设置 TTL 上限、下限,提前刷新(预取),或在特定故障条件下继续提供过期数据(serve-stale);必须结合具体实现和故障条件判断。
RFC2308 的权威负回答使用 SOA,其负缓存 TTL 取 SOA 自身 TTL 与 SOA.MINIMUM 的较小值。例如,两者分别为 300 和 60 秒时,取 60 秒。这是协议规则的示例,不是本机默认值。NXDOMAIN 与 NODATA 的缓存键及复用范围不同;SOA 不完整和本地策略也会影响能否缓存、如何缓存,因此不能把所有失败都解释为“缓存 60 秒”。
JVM 的 InetAddress(Java 中表示及解析 IP 地址的 API)缓存是另一层。networkaddress.cache.ttl 和 networkaddress.cache.negative.ttl 分别控制正、负缓存,属于安全属性。-Dnetworkaddress.cache.ttl 或 System.setProperty 设置的是系统属性,不能当作等价配置。
属性读取时机、JDK 安全配置,以及历史版本中的 Security Manager(安全管理器)行为都会影响结果。默认值需检查目标发行版,不能概括成“所有 Java 都永久缓存”或统一的 10/30 秒。后面的实验使用显式配置,只观察这两种配置下的结果。
3. 实现:名称、搜索域和地址选择
Linux 的 getent 通常走配置的名称服务路径,可能包含 hosts 与 NSS;dig 直接做 DNS 协议查询,默认行为不一定使用搜索域。因此,两者结果不同,首先应比较查询来源和实际查询名称。
search 配置名称搜索后缀;ndots 是解析器判断先尝试原名称还是搜索后缀时使用的点数阈值。例如,一个短名称可能被补上后缀后查询。具体顺序、并行方式及失败处理由 glibc/musl(不同的 C 标准库实现)、JVM 或应用自带解析器决定。A/AAAA 和 CNAME 处理也会影响查询数量,不能按后缀数量机械计算;完整 Pod 场景见云原生13。
名称末尾的点表示绝对 DNS 名称,可用于明确协议查询的名称。但直接给业务 URL 加点还可能影响库的名称规范化、SNI(TLS 握手中携带的服务器名称)和 HTTP Host,不能未经验证就作为线上修复。
取得地址后,还要验证实际选择的地址是否可达。解析到 AAAA 不证明 IPv6 路由能通;只查 A 也可能漏掉应用选择的 IPv6 地址。Happy Eyeballs 是一类让不同地址族的连接尝试竞速的策略,其行为与连接次序依客户端版本而异。InetAddress 返回的数组顺序不能代表所有 HTTP 库的连接顺序。路由验证见04,连接确认见05。
4. 完整实验:只改子JVM的临时映射
下载DnsCacheBoundaryDemo.java,在文件所在目录使用 JDK 17 编译、运行。程序不修改系统 hosts、系统 DNS、注册表或正在运行的业务 JVM:父进程创建自己拥有的临时文件,启动同一 java.home 下的子 JVM,通过启动参数指定独立 hosts,并在子进程第一次主动查询前设置缓存安全属性。
bash
javac DnsCacheBoundaryDemo.java
java DnsCacheBoundaryDemo -1
java DnsCacheBoundaryDemo 0两轮各启动新 JVM,不在缓存已经初始化的同一进程里切换 TTL。-1 表示无限期缓存,0 表示不缓存;程序将正、负缓存同时设为所选值,以便对照。
实验只使用 .kb.test 名称和文档地址 192.0.2.0/24,只查名称,不连接地址:
- 初始映射包含
positive.kb.test → 192.0.2.10,不含negative.kb.test。 - 分别查询两个名称,使成功结果和失败结果都有机会进入缓存。
- 将前者改为
192.0.2.20,新增negative.kb.test → 192.0.2.30,再次查询两个名称。
这样只改变名称的底层映射,就能观察 JVM 是否继续返回已有缓存结果。
jdk.net.hosts.file 是 OpenJDK17 实现提供的实验入口,不是跨所有 Java 发行版都可移植的解析器 SPI(服务提供者接口)。它必须通过启动参数设置:解析服务若已初始化,之后在 main 中设置该属性不能保证切换名称服务。这个实现专用入口不宜用作生产 DNS 配置。
2026-09-30,Windows/OpenJDK17+35 实际结果:
| 显式正/负TTL | 修改映射后positive | 修改映射后negative | 断言 |
|---|---|---|---|
| -1/-1 | 仍为192.0.2.10 | 仍UnknownHostException | 正、负缓存保留通过 |
| 0/0 | 更新为192.0.2.20 | 更新为192.0.2.30 | 不缓存对照通过 |
这是 InetAddress 本地缓存边界实验:没有递归或权威服务器、DNS 报文、SOA,也没有网络往返时延(RTT)。结果不能证明 DNS TTL 到期、搜索域扩展、响应截断后的 TCP 回退或生产解析器行为,也没有测出缺省 TTL。独立映射未生效时程序直接失败,不回退到公网作为成功结果。
父进程为子进程设置 20 秒截止时间,必要时终止并等待退出,再删除此次创建的临时文件;不删除固定名字的文件、目录或他人文件。安全属性只影响子 JVM,仍需在专用测试环境运行,不向生产进程附加修改逻辑。
5. 协议验证:递归、权威与UDP/TCP
要观察真正的 DNS 协议回答,需要准备授权测试域和 DNS 服务器。以下是 Linux 环境的查询步骤;示例 api.kb.test 需自行配置,不是公网现成业务域。先读取应用所在网络命名空间(Namespace,即隔离的网络环境)或容器中的实际配置,再将占位 IP 替换为指定测试服务器。
bash
cat /etc/resolv.conf
getent ahosts api.kb.test
dig @10.200.0.53 api.kb.test. A +time=2 +tries=1
dig @10.200.0.53 api.kb.test. AAAA +time=2 +tries=1
dig @10.200.0.53 api.kb.test. A +tcp +time=2 +tries=1A 中由两个 Veth(虚拟以太网接口)组成的拓扑没有 10.200.0.53 DNS 服务器,需要另行准备服务。这些步骤不包含完整递归和权威服务的部署。要验证 NXDOMAIN/NODATA/SOA,还需准备受控 Zone(DNS 区域)、服务器配置和答案集,并记录版本、缓存状态及重复查询结果。
以下列出预期观察项及其判断边界,具体答案取决于测试区域和服务器配置:
| 动作 | 证明范围 | 正常/异常及限制 |
|---|---|---|
resolv.conf 与 getent | 系统配置及当前名称服务结果 | stub(本地转发入口)地址不等于最终上游,NSS 配置也需核对 |
| 指定服务器、绝对名、A/AAAA | 单服务器协议回答 | 保存 RCODE、Answer、Authority、TTL、SERVER 和耗时,不只截 IP |
| 连续同名查询 | 可观察响应 TTL 变化 | TTL 下降是缓存线索,不能据此确定全部缓存层及是否重置 |
+tcp 对照 | 当前服务器的 TCP DNS 路径 | TCP 成功与 UDP 失败只界定差异,不唯一证明分片问题 |
指定权威并使用 +norecurse | 受控 Zone 的直接回答 | 需核对权威地址、AA 与委派,不能忽略内外不同 DNS 视图而误判责任 |
传统 UDP DNS 响应受大小限制。EDNS(0) 是 DNS 扩展机制,可以通告更大的接收负载(Payload)能力,但这不保证整条路径的 MTU(可通过的 IP 包大小上限)足够。收到 TC(响应截断)标志后,客户端可重试 TCP;如果分片或整个响应丢失,客户端可能根本收不到 TC,后续回退和重试取决于实现。
DNS 不限于 UDP 53 端口,TCP 53 以及 DoH/DoT 也可能经过不同路径。因此,+tcp 对照有助于缩小范围,但不能单独定位根因;相关选型见10。
dig +trace 可用于查看已获授权查询的公共域名的委派路径,但它主动发起查询,不代表实际应用的递归、转发或内外不同视图。不要用它查询内部域名而泄露信息,也不必把它作为所有故障的第一步。外部公共解析器对内部 Zone 的答案,不能替代该区域所属视图的权威回答。
需要抓包时,在正确接口限定服务器、时间及 UDP/TCP 53 流量;保存 DNS ID(查询标识)、名称、类型、方向、TC 和响应码。ID 单独不是跨通信流的唯一键。普通抓包文件(pcap)不能直接展开加密 DNS 的名称。捕获完整性、隐私和抓包丢弃计数(Drop)的要求见21。
6. 排障:找哪层结果与当时选择不同
先沿同一次请求的时间线比较协议回答、运行时解析和连接目标,再选择下一项证据。不同时间、不同解析器的结果只能作为对照,不能互相替代。
| 现象 | 下一项证据 | 不合理结论 |
|---|---|---|
dig 返回新地址,旧 JVM 返回旧地址 | JVM 实际解析、属性、应用缓存与查询时点 | dig 成功即 Java 解析正常 |
| JVM 返回新地址,连接仍到旧 IP | 连接复用、池创建时间、代理目标 | DNS 一定未刷新 |
| 少数 Pod 解析慢 | search/ndots、NodeLocal、上游和 UDP/TCP | 一律增加 CoreDNS 副本 |
| NXDOMAIN 后新增记录仍失败 | 实际查询名、SOA 负 TTL、本地负缓存 | 每个失败都永久缓存或缓存固定秒数 |
| A 查询成功但应用连接失败 | AAAA 选择、源地址选择与路由、端口 | DNS 记录存在即服务可达 |
| 一端有请求,另一端无响应 | 捕获完整性、服务器处理与回程 | 一张 pcap 直接证明线路丢包 |
故障期间先执行 Clear-DnsClientCache、重启所有 JVM 或清递归缓存,会改变现场,可能使缓存差异消失。应先保留配置、目标服务器、缓存策略和各阶段数据,再在授权范围内一次改变一个变量。Windows 只读对照可用 Get-DnsClientServerAddress 与 Resolve-DnsName,但它们与 JVM 的解析路径不等价。
7. 工程取舍、导航与依据
缩短缓存期限,可以加快部分地址更新,但也会增加查询量,使应用更依赖解析服务;解析服务故障时,频繁查询还可能放大压力。无限期缓存能减少查询,却可能长期保存陈旧的成功或失败结果。
地址刷新与连接更新必须一起设计:刷新地址列表后,新连接可以选择新地址,已有连接仍需按连接池策略淘汰。负载选择和重试也会影响流量分布,因此 DNS 返回多个地址不保证严格均衡。业务时间预算应覆盖实际解析路径,不能假设 Socket 的 connect timeout 完整覆盖 DNS 耗时。
- 容器应用:云原生13 - CoreDNS与ndots,进一步讨论 Kubernetes 部署与插件链。
- 控制/数据面对照:分布式07 - 注册中心。提供地址的控制面与实际承载请求的数据面需要分别观察;取得地址不等于目标业务可用,注册列表与 DNS 的缓存实现也不同。
- 连接生命周期:18 - 连接池与资源;预算:17;综合时间线:22。
- RFC1035、RFC2308:DNS 消息、负回答及 SOA 缓存规则。
- RFC6891:EDNS(0) 能力与 UDP 大小,不是 MTU 保证。
- Java17网络属性:缓存安全属性与系统属性不同,发行版配置仍须现场核对。
验收点:分别保存协议回答、运行时解析与最终连接目标,用同一次请求的时间线解释它们的关系。