外观
23 - 网络面试题原理推导
阅读目标:从连接状态、字节传输和资源等待推导网络面试题。先理解正常过程,再假设某一步丢失、延迟或提前,检查结论是否仍然成立。
前置:05 - 握手、06 - 可靠传输、08 - 关闭、09 - 定界、14 - 身份验证、17 - 超时。不要求第一次阅读就掌握所有题,未通过的题回到对应机制文章。
摘要
“TCP 可靠”“挥手四次”“HTTPS 安全”都省略了条件。回答网络问题时,先区分三层结果:传输层收到字节、应用读到完整消息、业务完成处理。前一层成功,不能自动证明后一层成功。
本文围绕这一区分,依次推导握手、传输、关闭、消息定界、安全和超时。每题先说明正常机制,再用异常情形检查边界,最后给出可以继续验证的文章入口。
1. 方法:把口诀改成可证伪命题
每题按六步回答:要保证什么 → 谁持有什么状态 → 一次事件如何更新 → 丢失或延迟后如何恢复 → 哪些边界不保证 → 用什么证据区分可能的原因。其中,不变量是指过程中必须一直遵守的规则;可证伪命题是指能够通过观察或反例判断是否成立的说法。
例如,“TCP 可靠,所以写入成功就是订单成功”混淆了不同层次。写入成功不证明服务端已经处理订单;即使服务端提交了事务,响应也可能在返回途中丢失。设想服务端提交后、客户端收到响应前断连,客户端就会面对“结果未知”。要判断订单是否成功,需要检查持久化结果和业务幂等记录;幂等机制用于防止同一业务意图重复生效,TCP 的 ACK(确认报文)不能代替它。
下文时序、数值题均为教学推演,不是实测 pcap(数据包捕获文件)或生产案例。完整程序及历史功能实测见引用文章;抓包、内核行为和负载结论需在授权目标环境验证。
2. 握手:为什么通常是三个报文
TCP 双方分别维护连接状态,并为各自发送的字节编号。ISN 是初始序列号,SYN 用于发起连接并同步序号;seq 表示序列号,ack 表示下一个期望收到的序号。握手要让双方获知彼此的 ISN 和连接参数,并确认自己的 SYN 已被对方收到。
目标与状态:普通主动/被动打开中,客户端主动发起,服务端等待连接。双方各发送一个 SYN,也各需要收到确认;服务端把自己的 SYN 与对客户端 SYN 的 ACK 合并,因此通常只需三个报文。这确认的是当前握手进展,不能证明未来双向路径永远可用。
设客户端ISN=100,服务端ISN=700,无数据:
| 事件 | 报文 | 状态解释 |
|---|---|---|
| 客户端发起 | SYN seq=100 | 客户端进入SYN-SENT,SYN占一个序号 |
| 服务端响应 | SYN+ACK seq=700 ack=101 | 服务端在SYN-RECEIVED等待自己的SYN被确认 |
| 客户端确认 | ACK seq=101 ack=701 | 客户端处理有效SYN+ACK后进入ESTABLISHED;服务端收到有效ACK后才完成此打开 |
反事实:第三次ACK丢失时,客户端已认为建立,服务端仍可能等待;后续数据携带有效ACK可促成完成,服务端也可能重传SYN+ACK。各侧状态不同时改变,connect()成功不代表对方业务已accept()或开始处理。
边界:同时打开是双方都主动发起连接;TCP Fast Open 允许在特定条件下提前携带数据;SYN Cookie 是应对 SYN 队列压力的机制。这些机制以及中间设备会影响状态处理或抓包所见,不能把所有连接都限定为恰好三个数据包。无有效响应也可能导致最终失败,重试次数和队列实现须按目标内核解释。
验证与延伸:05的握手实验区分connect与accept;21用同一流的序列/确认及双点证据判断ACK在哪消失。一个ss快照只能看到采样时状态。
3. 可靠传输:ACK和窗口分别证明什么
TCP 按序号组织字节。累计 ACK 指出连续收到的字节到哪里为止;SACK(选择性确认)还可以报告缺口之后已收到的区块,帮助发送方判断哪些数据需要补发。接收端缓存了后面的字节,不等于它已经把这些字节按序交给应用。
推演:接收方下一个期望字节为 101,收到 [201,301),但 [101,201) 缺失。这里的区间包含左端、不包含右端。累计 ACK 仍为 101;启用并使用 SACK 时可报告已收块 [201,301)。缺口修复后,连续区间才延伸到 301,累计 ACK 才可前进。SACK 不表示应用已经处理后面的消息。
- 接收窗口由接收方通告,约束发送方还能发送的字节范围;拥塞窗口由发送方维护,限制尚未确认的在途数据量。前者保护接收方的接收能力,后者约束对网络的压力,发送时需要同时满足两种限制。
- 重传可能源于丢失、延迟、乱序或观察遗漏;一张单点抓包出现“重传”标签不够定位网络故障。
- ACK前进不表示应用读取或事务提交。零窗口首先检查接收方消费与资源,而不是把它当网络拥塞。
验证:到06推演 ACK、SACK、RTO(重传超时时间)与零窗口;到07比较方向、单流与并流。RTT 是往返时延,带宽×RTT 描述相应条件下的带宽时延积,不能直接当万能缓冲区配置;抓包观察的限制见21。
4. 关闭:四次挥手、EOF与TIME_WAIT
TCP 连接有两个独立的发送方向。FIN 表示发送它的一方不再发送后续数据,且占一个序号;另一方仍可继续发送,这叫半关闭。接收端读完 FIN 之前的数据后会看到 EOF(流结束),但 EOF 不负责判断应用消息是否完整。
不变量:收到 FIN 不代表对端不能再接收。被动关闭方仍有待发送数据时,可以先确认收到的 FIN,发送完自己的数据后再发 FIN,因此常见过程有四个报文;若确认与关闭可以同时完成,ACK 与 FIN 可以合并,报文数并非固定四个。
反事实:最后 ACK 丢失时,对端可能重发 FIN。处于 TIME_WAIT 的一侧暂时保留连接状态,还能再次确认,也帮助隔离旧连接报文。普通主动关闭常进入 TIME_WAIT;同时关闭时双方都可能进入,不能定义成“客户端特有”。MSL 是报文最大生存时间,协议上的 2MSL 概念不等于任意 Linux 版本可配置的固定秒数。
边界与代价:大量 TIME_WAIT 可能来自较高的短连接创建率,不等于应用未关闭 fd(文件描述符)。CLOSE_WAIT 说明本端收到 FIN 后尚未完成本端关闭,要追踪哪个任务持有连接、为什么停滞,不能只凭状态名认定泄漏。半关闭、Socket.close()、EOF 与应用帧结束不是同义词。
验证:用08完整半关闭程序检验双向行为;结合18资源账本查fd、端口和连接创建率。优先验证复用是否可行,不先启用激进状态复用参数。
5. 定界:TCP“粘包”究竟缺了什么契约
TCP 提供字节流,应用需要自己约定一条消息在哪里结束,这就是定界。例如,长度帧先写长度字段,再写消息体;接收端先收齐长度字段,再按该长度收齐消息体,才得到一个完整帧。
客户端一次写两个长度帧,接收端第一次 read 只得到前两字节,也符合 TCP 的字节流模型:write 与 read 均不定义应用消息边界。解码器必须保存未完成的解析状态,等后续字节到达再继续。改变 TCP_NODELAY(控制 Nagle 合并发送行为的选项)或加大接收缓冲区,不能补上消息边界契约。
正确性检查:长度字段没收齐、消息体只收一半、负长度、超过最大帧长、一次读到多个帧、完整帧后 EOF 和半帧 EOF,分别如何处理?长度按编码后的字节数还是字符数?异常后还能否复用该流?谁控制总时间预算与累计内存?完整帧后的 EOF 与半帧 EOF 必须区分,否则可能把截断消息当成正常完成。
DataInputStream.readFully() 只能帮你读足指定长度或报告读取失败,不能自动限制最大长度,也不能设置整帧 Deadline(必须完成读取的截止时间)和取消策略。即使每次读取都没超时,缓慢持续到达的字节也可能让整帧读取拖得很久,因此单次 SO_TIMEOUT 读取超时不能代替整帧截止时间。
验证:09的完整解码实验验证短读、合并和截断;17滴流实验验证单次SO_TIMEOUT不等于整帧截止;19对比发送时机,不能当定界方案。
6. HTTPS:加密、信任与名称为什么必须分开
HTTPS 在 HTTP 之下使用 TLS 保护通信。理解证书式 TLS 时,要分别回答:连接到的是不是目标服务器,双方如何得到保护数据的密钥,传输内容是否被篡改。加密通道建立成功,不能单独证明服务器身份正确。
CA 是证书颁发机构;证书链校验判断证书能否追溯到客户端信任的根。SAN 是证书中的主体备用名称,名称校验则判断证书是否适用于客户端要访问的主机名或 IP。SNI 是客户端在握手中提供的服务器名称提示,帮助同一服务器选择站点与证书。
反事实:服务端证书由信任 CA 签发、密钥协商正常,但 SAN 不匹配 URL 中用于身份校验的参考名称。链信任成功仍应拒绝该身份;SNI 不能替代客户端名称校验。openssl s_client -showcerts 展示证书不等于严格验证成功。
证书式 TLS 握手中,身份认证、密钥协商与握手完整性保护共同工作。ECDHE 是基于椭圆曲线的临时密钥交换;PSK 是预共享密钥。TLS 1.3 的会话恢复及 PSK 模式不能简单描述为“每次都发证书并做新 ECDHE”。应用数据由协商的密钥与 AEAD(带关联数据的认证加密)保护,但业务仍需用户认证、授权、输入验证和端点安全。
边界:反向代理终止 TLS,意味着它接收并解密客户端的 TLS 通信,再向上游发起另一段通信。客户端验证的是代理这一跳的身份,上游是否加密与校验须独立检查。0-RTT 是握手完成前发送的早期数据,可能被重放,不能因为使用 HTTPS 就无条件重试扣款。直接访问 IP 也可能改变 SNI、HTTP 的 Host 及参考身份。
验证:14隔离名称失败与信任失败;严格OpenSSL命令、信任材料及版本条件按该篇执行,不关闭校验。15识别TLS终止与响应生成者。
7. UDP、DNS和HTTP/3:跨层能力别混用
先区分传输方式与上层协议:UDP 是传输层协议,DNS 是查询名称等信息的应用协议,HTTP/3 是使用 QUIC 的 HTTP 版本。上层可以补充下层没有提供的机制,也可以选择不同传输方式。
- UDP保留 Datagram(数据报)边界,但应用接收缓冲区不足可能截断;没有内建可靠有序恢复与拥塞控制,不表示 UDP 应用可以无约束发送。
- QUIC基于UDP实现安全握手、恢复、流控和拥塞控制;“UDP不可靠”不能推出“HTTP/3不可靠”,也不能推出“HTTP/3必然更快”。
- DNS不是只走 UDP。传统查询可用 UDP 或 TCP,响应中的 TC(截断)标志可触发 TCP 重试;区域传送用于同步 DNS 区域数据,有 TCP 相关规则。DoT/DoH/DoQ 分别使用 TLS、HTTPS、QUIC 承载 DNS,有不同传输与安全边界。具体失败恢复须看解析器实现,不能保证每次 TC 都成功重试。
反事实:UDP 小响应正常、大 DNS 响应失败,先检验截断、TCP 路径、分片/MTU 与解析器行为。MTU 是链路允许传送的最大报文尺寸,TTL 是 DNS 记录的缓存生存时间;直接修改 TTL 不能解释这些传输路径问题。浏览器解析成功、JVM(Java 虚拟机)连接旧 IP 时,要分别记录运行时解析结果及实际连接目标。
验证:10的Datagram实验不验证QUIC实现;11的JVM实验不验证权威TTL;04补充路径、NAT与MTU约束。
8. HTTP多路复用:究竟消除了哪一种队头阻塞
多路复用允许一个连接承载多个逻辑流(Stream),并交错传输它们的帧。队头阻塞是指前面的数据未完成,导致后面的数据即使已经到达也不能继续处理。判断它是否被消除,必须说明阻塞发生在哪一层。
设同一连接有两个流 A、B,A 的数据发生丢失:HTTP/2 允许 HTTP 帧交错,但它们共享一个 TCP 有序字节流。TCP 在缺口补齐前不能交付缺口后的字节,因此 B 的后续帧也可能受影响。HTTP/3 使用 QUIC,每个流独立按序交付,不会仅因 A 的数据缺口就要求 B 等待 A 补齐。
反事实:B 仍可能受共享拥塞窗口、连接流控、可创建流的数量上限或 QPACK 依赖影响。QPACK 是 HTTP/3 的头部压缩机制,某些头部解码需要等待相应的压缩表更新。因此,“消除所有队头阻塞”不成立,“多路复用就是无限并发”也不成立。HTTP/1.1 的连接数、HTTP/2 的流数与允许执行的业务任务数,是不同的容量单位。
验证:12分离协议层、传输层和应用消费;18核对真实容量边界。Java17标准HttpClient的示例不构成HTTP/3性能实测。
9. epoll与取消:就绪不是任务已完成
I/O 多路复用让一个线程等待多个文件描述符的事件。select/poll/epoll 报告的是就绪,即相应 I/O 操作可以取得进展或返回结束、错误等结果,并不保证一条消息已经完整到达。事件处理器(Handler)仍需处理短读、部分写、EOF 和错误。
epoll 维护关注集合并返回就绪事件,不能直接等价为“所有请求 O(1)”。O(1) 是对操作复杂度的描述;活跃 fd 比例、事件数、系统调用开销及业务处理都影响整体性能。
Reactor 是由事件循环分派就绪事件、处理器推进 I/O 状态的模型。一个非阻塞 read 得到半帧后,应保存解析状态,把线程交还事件循环,不能无限等待剩余字节,否则其他连接也无法及时处理。write 未写完时,需要保存缓冲区及当前位置,并按实际进展调整关注的事件。
反事实:ET(边缘触发)模式通常需要持续处理到 EAGAIN,即当前操作暂时无法继续,并设计公平性,避免单个活跃连接长期占用事件循环。一次通知不能证明全部消息可读;读完当前可读字节也不能证明业务任务已经完成。
验证:16完整程序验证Buffer状态、帧与部分写,不声称Java Selector在所有OS都由epoll实现。Future.cancel()的任务状态与Socket、后台线程和远端业务停止不同,见并发17及17。算法复杂度可以帮助分析局部操作,但不是Linux系统性能证据。
10. 综合推导:超时以后能不能重试
超时只说明本端没有在规定时间内完成等待。请求可能尚未发出,也可能已在远端执行,甚至已经提交但响应尚未返回。因此,重试要同时回答两个问题:还有多少时间,以及重复执行是否安全。
假设总预算 2s,Acquire(申请连接或并发许可)消耗 1.5s,写请求已发送,响应未返回。此时预算最多剩 0.5s,后续发送、等待、退避和清理还可能继续消耗时间。新 Attempt(一次调用尝试)不能重新获得完整 2s;超时也不能证明远端未提交。
完整回答应包含:各阶段的起止事件和资源占用者、向下游传播的剩余预算、重试间的退避等待和次数上限、取消与资源回收,以及业务幂等键和原子去重。幂等键标识同一业务意图,去重检查与业务生效需要满足相应的原子性要求,避免并发重复请求都通过检查。
扩大连接池可能让更多请求进入下游,把本地等待转移成下游排队;加重试可能让一次失败产生更多请求,进一步放大流量。修复后应在同负载下比较正常与异常路径,通过只改变一个变量的干预检查因果关系,并确认资源回收和下游压力,而不能仅看平均耗时下降。
验证:22区分教学时间线与许可实测;分布式11解释跨服务预算,分布式13解释稳定业务意图。业务提交与回写独立的框架案例见Spring16。
11. 自测矩阵与收尾导航
| 问题 | 通过标准 | 未通过时回读 |
|---|---|---|
| 第三次ACK丢了 | 能画出两侧不同状态与后续有效ACK,不保证必成功 | 05、21 |
| ACK=101但有SACK块 | 能区分累计交付缺口、缓存区块与业务处理 | 06、07 |
| TIME_WAIT很多 | 能区分协议状态、应用fd、端口组合与复用代价 | 08、18 |
| 一次read只有两字节 | 能说明长度解析状态、EOF及总预算 | 09、17 |
| 证书可信但名称错误 | 能分别验证链与身份,不用关闭验证解决 | 14、15 |
| DNS小响应正常、大响应失败 | 能给出TCP路径与截断/MTU的替代解释 | 10、11、04 |
| HTTP/3的B仍在等待 | 能区分独立Stream恢复、共享额度与QPACK依赖 | 12、18 |
| Selector就绪但帧未齐 | 能保持非阻塞状态机并处理部分写及退出 | 16、并发17 |
| 超时后准备重试写操作 | 能同时检查结果未知、预算、幂等和资源所有者 | 17、22、分布式13 |
通过不是说出相同关键词,而是能回答“若某一步丢失/提前/复用,结论还成立吗”,并选择能区分解释的证据。实践入口为20分诊→21取证→22复盘;重建整体路径回01及README。
协议推导以 RFC9293(TCP)、RFC9000(QUIC)、RFC9113/9114(HTTP/2/3)和 RFC8446(TLS1.3)为基线。运行时与工具边界以各机制文章的目标版本说明为准;内核参数默认值、重试策略和队列行为应按具体系统与版本核对,不能套用统一数值。