外观
04 - IP、子网、路由与 NAT
前置阅读:02 - 封装与MTU、03 - 下一跳邻居。两篇分别解释 IP 选路和链路交付,可以交叉阅读。
适用范围:IPv4 与 Linux 路由、有状态 NAT;前缀计算代码适用于 Java 17。Linux 策略规则、包处理位置、连接跟踪、源地址验证和工具字段需按现场版本核对。IPv6、云路由与代理另有边界。
摘要
数据包知道目的 IP 后,还需要决定从哪个接口发出、交给谁,以及响应如何返回。路由解决路径选择,NAT(网络地址转换)改写相关地址或端口,两者都不能单独保证业务成功。本文先解释地址前缀和下一跳,再讨论 Linux 策略路由、回程与有状态 NAT,最后用前缀计算代码和待实测的隔离实验说明如何收集证据。
1. 现象:宿主机成功,容器超时
假设宿主机能访问服务,同机容器却超时。两者可能使用不同的源地址、路由和过滤策略,因此宿主机成功不能替容器证明路径正常。
一种候选原因是:容器使用私网源地址,出口没有按预期做 SNAT(源地址转换);请求到达远端后,远端又没有返回该私网地址的路由,响应便无法回到容器。但如果网络本来就能路由到 Pod(容器编排中的工作负载单元)地址,不做 SNAT 也可能正常。是否需要转换,取决于地址可路由性和网络设计。
还要考虑策略路由、NetworkPolicy(容器网络访问策略)、云 ACL(访问控制列表)、MTU(最大传输单元)或域名解析到错误地址等原因。先记录应用所在的网络上下文、源地址、目的地址、协议和失败时间,再比较实际路径与预期路径。
2. 原理:CIDR是位前缀
IPv4 地址由 32 个二进制位组成,常写成四个十进制数。子网用共同的地址前缀描述一个范围;CIDR(无类别域间路由)用 /n 表示前 n 位是前缀,剩余位用于区分范围内的地址。
子网掩码把前缀位设为 1,其余位设为 0。地址与掩码做按位 AND(两位都为 1 才得到 1),就能保留前缀、清零其余位,得到规范网络前缀。前缀不一定在十进制段的边界结束,所以不能只比较前三段。
text
192.168.10.34/24 → 掩码255.255.255.0 → 网络192.168.10.0
192.168.10.34/20 → 掩码255.255.240.0 → 网络192.168.0.0
/20范围:192.168.0.0~192.168.15.255/20 保留前两段的 16 位和第三段的高 4 位,因此第三段覆盖 0~15。这里计算的是地址范围,不是可用主机数量,也不证明范围内每个地址都可达。
传统 IPv4 广播子网通常区分网络地址、广播地址和主机地址,但不能把“地址总数减 2”直接套到所有 /31、/32、云保留地址或 IPv6 场景。IPv6 没有 IPv4 广播地址语义;/31 的点到点用法和设备支持需按标准及目标设备验证。
2.1 最长前缀在什么范围比较
路由表中的前缀用于匹配目的地址,匹配的路由给出出口接口和下一跳。下一跳是当前这次交付的接收节点:直连时可以是目的主机,经网关时则是网关。在普通以太网路径中,主机随后用 ARP(地址解析协议)解析这个下一跳的 MAC(链路层地址),详见03。
先看同一张表中的普通候选路由。via 表示经由某个网关,G1~G3 是教学用网关代号;/0 没有固定前缀位,作为默认路由匹配所有 IPv4 目的地址。
text
教学同表候选:
10.20.0.0/16 via G1
10.20.30.0/24 via G2
0.0.0.0/0 via G3
10.20.30.8 → /24;10.20.40.8 → /16;198.51.100.8 → /010.20.30.8 同时匹配 /24、/16 和 /0,其中 /24 限定的范围最小,所以在这个同表例子中选 G2。这就是最长前缀匹配:在有效查表上下文中优先采用更具体的匹配。相同前缀还可能涉及 metric(路由度量值)、路由类型或 ECMP(等价多路径)选择。
Linux 还支持策略路由:规则可以按源地址、mark(数据包标记)、入口接口等条件决定查哪张表。应先理解规则的查表顺序,再在对应表中看前缀匹配,不能把所有表合并后选一个最长前缀。
高级场景还包括 throw(结束本表查询,交回规则处理)、blackhole(丢弃)和 unreachable(不可达)等路由类型,以及 VRF(用于隔离路由上下文的虚拟路由与转发机制)、端口参与的选路和后续过滤。它们需按实际规则与内核核对,第 3 节的演示算法不实现这些语义。
3. 确定性代码:只验证前缀数学
下载Ipv4PrefixDemo.java 到测试目录。程序严格解析十进制 IPv4,用 Java 的 long 保存 32 位地址值,并单独处理 /0 掩码,避免符号和移位陷阱。它把候选前缀规范化后与目标地址按位匹配,再选择最长候选。
bash
javac Ipv4PrefixDemo.java
java Ipv4PrefixDemo2026-09-30,Windows/OpenJDK17+35实际输出:
text
/20 normalization, /0 /31 /32 containment: PASS
longest prefix /24 /16 /0, no match, invalid inputs: PASS测试覆盖 /20 边界、/0、/31、/32 的地址包含关系、三种前缀选择、无匹配,以及非法八位组(地址中的一个十进制段)和前缀。它只验证前缀数学,不做 DNS 查询、不读取本机路由,也不验证地址是否可分配给主机。策略规则、ECMP、metric 和 NAT 均不在实现范围内;相同长度候选保留首次,这不是生产选路契约。
4. 实现:路由查询必须带真实输入
Linux Namespace(这里指网络命名空间)拥有独立的接口、地址和路由配置。容器与宿主机可能处于不同命名空间;因此,即使在同一台机器上,查询宿主机路由也不一定能解释容器的流量。应在应用所在命名空间中,只读查看:
bash
ip -br address
ip rule show
ip route show table all
ip route get 198.51.100.20 from 10.200.0.1上述地址是占位示例,from 后的源地址必须在对应命名空间中实际可用。ip rule show 查看选表规则,ip route show table all 查看各表路由,ip route get 则用指定输入解析路径。
若业务带有 fwmark(用于过滤或选路的数据包标记)、VRF 或接口条件,应使用目标版本支持的参数补齐。只运行 route get DEST,不能保证复现应用 Socket(套接字)绑定的源地址、代理路径或标记条件。
| 字段 | 用途 | 正常/异常线索 |
|---|---|---|
| table/rule | 确认查表上下文 | 特殊源/mark走不同表不能漏看 |
| dev | 实际出口 | 与采集接口不符时先修观察位置 |
| via | 下一跳 | 有via解析该网关;直连才解析相应目的 |
| src | 选源建议或查询结果 | 需与Socket实际绑定/远端看到地址比较 |
| unreachable等 | 拒绝或无有效路径 | 不同错误不等于同一根因 |
表中信息需要结合规则和路由查询结果阅读,并非每条 route get 输出都会包含所有字段。ip route get 执行路由解析,不发送业务探测,所以无法验证 ARP、ACL、远端路由、服务监听或 NAT 转换是否成功。现代 Linux 中,也不宜将它概括为“读取旧式全局 IPv4 路由缓存”。
Netfilter 是 Linux 的网络包处理框架,规则在 Hook(包处理路径中的挂接位置)上生效。实际包经过 DNAT(目的地址转换)或 mark 处理后,可能触发不同的路由选择;静态查询应与真实包路径一起分析。
回程也要单独查。响应以请求的源地址为目的地,远端会据此重新选路,并不会自动沿去程原路返回。去回程不同称为非对称路由,本身未必有错;关键是沿途有状态设备、策略和源地址验证是否允许这种路径。
Linux 的 rp_filter 用于反向路径源地址验证,严格模式等配置可能因反向路径判断丢包。有效行为与 all、接口配置及 mark 等条件有关,需按目标内核查证,不能看到多网卡就直接关闭源验证。
5. 隔离验证:更具体错误路由如何遮蔽正常直连
以下为 Linux 实验方法,尚无对应实测记录。实验需要有 root 权限、已安装 iproute2 的专用 Linux 测试环境;双端抓包还需要 tcpdump。先按A创建 kb-net-a/kb-net-b 两个命名空间和直连 Veth(成对的虚拟以太网接口),确认基线 ping 成功。
基线中目标通过 /24 直连路由可达。本实验只添加一条指向错误网关的 /32 主机路由,观察更具体的前缀如何改变下一跳。修改仅限本次命名空间,不动宿主机主表;先保存地址、规则、路由和邻居信息,确认该 /32 路由不存在:
bash
sudo ip netns exec kb-net-a ip route get 10.200.0.2
sudo ip netns exec kb-net-a ping -n -c 2 -W 1 10.200.0.2
sudo ip netns exec kb-net-a ip route add 10.200.0.2/32 via 10.200.0.254 dev kb-a
sudo ip netns exec kb-net-a ip route get 10.200.0.2
sudo ip netns exec kb-net-a ping -n -c 2 -W 1 10.200.0.2
sudo ip netns exec kb-net-a ip neigh show dev kb-a预期 /32 比 /24 更具体,查询结果改为经 10.200.0.254 发送。包的目的 IP 仍是 10.200.0.2,但当前链路需要解析的是网关 10.200.0.254。隔离拓扑中没有该节点,邻居解析无法完成,因此预计出现失败或超时。
观察应串起三个证据:路由查询中的下一跳改变、ARP 请求指向错误网关、ICMP 往返未完成。邻居状态和 ICMP 错误文本受版本与采样时点影响,不预设固定输出。双端捕获 ARP/ICMP 的步骤见03,不要只看 ping 退出码。
恢复前核对命名空间和 /32 路由确属本实验,删除该精确路由后复测:
bash
sudo ip netns exec kb-net-a ip route del 10.200.0.2/32 via 10.200.0.254 dev kb-a
sudo ip netns exec kb-net-a ip route get 10.200.0.2
sudo ip netns exec kb-net-a ping -n -c 2 -W 1 10.200.0.2验收需要确认路由恢复为直连、目标往返恢复,并能解释下一跳变化。不刷新整表,不覆盖同名既有资源。此拓扑没有真正的路由器转发、NAT、云 ACL 或策略选表,实验不能证明这些机制已测试。
6. NAT:转换映射与代理连接不同
路由决定往哪里发,NAT 则改写包中的相关地址或端口。对于下面的有状态 SNAT 例子,转换设备记录内外侧端点的对应关系,让响应能够反向转换回原来的客户端。要成功通信,响应仍必须先到达转换设备,并且路由与过滤策略都允许后续交付。
SNAT 和 DNAT 分别改写源端点与目的端点;NAPT/PAT 指同时利用地址和端口进行转换、复用多个内部端点。TCP 代理则接收一条连接,再建立另一条连接,属于不同机制:
| 机制 | 改变对象 | 边界 |
|---|---|---|
| SNAT | 源IP,可含源端口 | 常用于出口,不保证安全或可达 |
| DNAT | 目的IP,可含目的端口 | 映射后仍需正确路由与过滤 |
| NAPT/PAT | 地址及端口复用 | 容量依映射政策与端点组合,非全机固定65535连接 |
| TCP代理 | 终止一条连接并建立另一条 | 独立序列空间,不是单纯改IP/端口 |
text
教学有状态SNAT:
内侧请求 10.244.1.5:53000 → 198.51.100.20:443
外侧请求 192.0.2.5:40001 → 198.51.100.20:443
外侧响应 198.51.100.20:443 → 192.0.2.5:40001
反向转换后 198.51.100.20:443 → 10.244.1.5:53000这是教学映射推演,不是实测抓包:客户端使用 10.244.1.5:53000,外侧服务器看到的源端点却是 192.0.2.5:40001。服务器向这个外侧端点响应,转换设备再按映射把目的端点还原为客户端。
Linux Netfilter 的有状态 NAT 由流的首包查规则建立绑定,后续包使用已有绑定。因此,修改规则后,旧流可能继续使用旧映射;NAT 链计数反映规则查找,不一定随每个数据包增长。
conntrack(连接跟踪)保存流的状态及相关信息,也可跟踪 UDP。存在跟踪记录不代表 TCP 应用已建立连接,更不代表业务请求成功。
上述模型仅用于 Linux 有状态 NAT,不能泛化为所有 NAT,因为还存在无状态转换。协议五元组指协议、源 IP、源端口、目的 IP 和目的端口;连接上下文还可能包含命名空间、zone(跟踪区域)等,因此五元组不是全系统唯一键。
实际转换也可能涉及 Netfilter Hook、Bridge(网桥)、eBPF(内核可编程处理机制)或云平台路径,需按部署方式核验。
只读证据可用:
bash
sysctl net.ipv4.ip_forward
sudo nft list ruleset
sudo conntrack -S读取前先核对所在命名空间、主机是否承担转发、实际规则后端和 Hook;工具需已安装,并具备所需权限。ip_forward 解释相应的 IPv4 转发场景,宿主机本地产生的流量不能按转发流量处理。
conntrack -S 提供相应统计范围内的累计计数。判断满表或插入失败,需要故障窗口内的增量与具体流证据,而不是只看总数。若进一步查询某条流,参数应按本机工具版本限定;不直接打印全量敏感连接,也不清空表来“验证”。
入口/出口抓包应匹配转换前后端点和方向;已有 TCP 序列号可作辅助。TCP 代理两侧连接有独立序列号空间,不能这样直接匹配,见15、21。
Forwarded/X-Forwarded-For 是代理在应用层传递来源信息的 HTTP 字段,不是 NAT 自动恢复客户端身份的机制。是否采用这些值取决于受信代理政策,不能无条件信任用户输入。
7. TTL、ICMP与IPv6
TTL(生存时间)用于限制 IPv4 包继续转发的跳数,路由转发会递减它,避免包在环路中无限流转。IPv6 对应字段是 Hop Limit(跳数限制);两者都不同于表示缓存有效期的 DNS TTL。
TTL 耗尽或目的不可达时的反馈还受协议、过滤和速率限制。traceroute 通过探测响应观察路径,星号只表示没有及时取得相应响应,不能证明该跳不转发业务。ECMP 和不同探测协议还可能让探测走不同路径。
ICMP(互联网控制报文协议)不仅用于 ping,也传递网络错误和控制信息。IPv4 的 Fragmentation Needed(需要分片)和 IPv6 的 Packet Too Big(包过大)参与 PMTU(路径最大传输单元)反馈,帮助发送方调整包大小。
如果小包能通过,但大包超过路径限制,相关反馈又被过滤,发送方可能无法及时调整,表现为小请求成功、大传输停滞,即路径黑洞。屏蔽全部 ICMP 可能导致这种问题,原理见02。IPv6 路由器不执行 IPv4 式途中分片,不能照搬 IPv4 的解释。
跨平台观察时,Windows 可用 Get-NetIPAddress、Get-NetRoute、Find-NetRoute 和 tracert;macOS 可用 netstat -rn、route -n get。这些工具的输出不能直接套用 Linux 策略规则或 Netfilter 模型。
程序获取本地地址同样不能验证完整路径。例如,不能把 UDP 的 connect 操作概括为所有实现都绝不产生任何辅助流量;应按运行时与系统实现核对。
8. 排障、取舍与导航
| 现象 | 下一项证据 | 不合理处置 |
|---|---|---|
| 错出口/错源 | 应用绑定、规则、VRF、mark | 只改默认路由 |
| 去程有、回程无 | 远端所见源、反向路由、转换和ACL | 宣称“发了所以网络正常” |
| 新流正常、旧流仍错 | 旧绑定、连接池、规则变更时间 | 清全量conntrack |
| 小包通、大包停 | MTU、ICMP、隧道、序列缺口 | 只扩大应用超时 |
路由正确只说明存在相应路径,过滤策略仍可能阻止交付;NAT 也不能代替防火墙。选择直接路由、NAT 或代理时,应分别考虑是否保留原始地址、需要多少状态容量、如何观察转换前后的流,以及故障后如何恢复。
云原生应用见12 - CNI路径;握手应用见05;分层排障入口见20。
参考资料如下。
- ip-route手册:路由类型与查询参数,现场版本另核。
- Netfilter有状态NAT:首包绑定、后续转换与链类型。
- Linux IP sysctl:转发和源验证,非目标版本默认值证明。
验收点:解释真实输入下选表、前缀、下一跳和选源,保存转换前后及回程证据,不以单个route get宣布全路径正常。