外观
10 - UDP 选型与 QUIC
前置阅读:02 - 分段、分片与MTU、04 - 路径与NAT、09 - 消息定界。深入QUIC前阅读14 - TLS。
UDP 实验采用 Java 17;QUIC 主线是 RFC9000 及其可靠流模型。QUIC DATAGRAM 扩展用于传递不可靠数据报,不属于本文讨论的可靠流模型;具体产品版本的行为也需另行核对。
摘要
UDP 以数据报(Datagram)为单位发送和接收,保留单个数据报的边界,但不保证送达、顺序或身份真实性。省去 TCP 的连接握手,也不意味着业务一定更快:应用仍可能需要等待响应、恢复丢失数据和处理重复请求。
本文先用接收截断和空数据报实验说明 UDP 与 TCP 的区别,再解释分片风险,以及 QUIC 如何在 UDP 之上提供可靠流、恢复丢失数据和验证地址。选型时要看业务需要哪些保证,以及由谁实现这些保证。
1. 现象:RPC换成UDP后,大响应偶尔缺尾部
假设一个 RPC(远程过程调用)服务从 TCP 改为 UDP 后,小响应正常,大响应偶尔缺尾部。这是用于分析的场景,并非本文的实测故障记录。候选原因包括接收 API 的缓冲区容量不足、IP 分片丢失、应用重组超时或请求 ID 复用。请求 ID 用于匹配请求和响应;过早复用可能把旧响应认成新请求的结果。
这些问题都可能表现为响应不完整,但发生在不同位置。缓冲区截断发生在应用接收时,IP 分片丢失发生在网络传输和 IP 重组过程中,应用重组则属于自定义协议。尤其要注意:UDP 接收截断后,尾部不会在下一次读取中继续交付。
如果应用在超时后无限立即重试,旧请求可能已经执行,重试就会重复业务;增加的发送量还可能加重拥塞。回环测试只经过本机网络路径,其低延迟不能证明生产 UDP RPC 适合该业务。
2. 原理:消息边界与送达保证不同
可以先把 UDP 理解为“发送一条数据报,接收端一次接收一条数据报”。如果接收 API 的容量足够,应用能取得这条数据报的完整内容;容量不足时可能截断。这个边界只是划分数据的方式,不保证数据报一定到达、按发送顺序到达,或只交付一次。UDP 本身也不提供拥塞控制,即根据网络负载调整发送量的机制。
UDP 头包含端口、长度与校验和等字段。校验和用于检测传输差错,不是加密或身份认证。普通 IPv4 允许零校验和表示不使用 UDP 校验,IPv6 通常要求 UDP 校验和,特定隧道例外需另行核对。
| 边界 | UDP | TCP对照 |
|---|---|---|
| 接收单位 | 一条数据报,接收容量不足时可能截断 | 有序字节流,一次读取可能不足一条消息,也可能包含多条消息 |
| 缺数据 | 可能是数据报丢失、接收截断或应用重组未完成 | 等待缺失字节恢复,或因连接失败而终止;应用仍需识别消息边界 |
| 零长度接收 | 可以是合法空数据报 | Java Socket 的 InputStream.read() 返回 -1 表示输入结束(EOF) |
| 发送调用返回 | 本地 API 接受发送,不证明远端收到 | write 返回也不等于业务处理成功 |
connect 调用 | 操作系统设置默认通信对端、限制接收来源等,不进行 TCP 握手 | TCP 建立连接时需经过握手,并维护连接状态 |
“无连接”表示 UDP 协议不通过 TCP 那样的握手建立连接,不表示操作系统没有套接字(Socket)状态。NAT 和防火墙仍可维护 UDP 地址映射或通信状态。UDP 的 connect 可设置默认对端、限制接收来源等,但不会认证对方;源 IP 和端口也不能当作可信业务身份。
ICMP 是网络层报告差错等信息的协议。其错误是否映射为 API 异常,取决于操作系统和 Java 实现。即使出现 PortUnreachableException(端口不可达异常),也不能据此判断某条请求的业务执行结果。
3. 完整实验:截断后的尾部不会续读
下载UdpBoundaryDemo.java,两个 Socket 都绑定本机回环地址,端口自动分配,依次发送三个数据报。程序只用 Java 17 标准库。在文件所在目录编译、运行:
bash
javac UdpBoundaryDemo.java
java UdpBoundaryDemoDatagramPacket 是 Java 中保存数据报内容、长度和地址信息的对象。实验的底层缓冲区有 32 字节,但第一次接收允许写入的有效容量只有 8 字节:
- 发送 64 字节数据报,接收端只能保留前 8 字节。
- 发送新的 16 字节数据报;接收前调用
packet.setLength(buffer.length),将容量恢复为 32 字节。此次取得的是新数据报,而不是上一条的尾部。 - 发送空数据报;接收前再次恢复容量,接收长度为 0。这表示收到合法空数据报,不是输入结束。
2026-09-30,Windows/OpenJDK17+35 实际输出:
text
64-byte datagram into 8-byte receive capacity: length=8 PASS
restored receive capacity; next datagram is new 16-byte message, not old tail: PASS
zero-length datagram is received, not EOF: PASS程序逐字节核验截断前缀和下一条全新内容。但单看接收长度为 8,无法区分“原报文正好 8 字节”和“更大报文被截断”。如果 API 不暴露截断标志,就需要应用协议声明长度、约定完整性检查,或准备足够的接收容量。
getLength() 返回本次接收的数据长度,不能把它当成底层缓冲区大小。示例在复用接收对象前显式设置容量,使每次接收的条件清楚。
这是接收容量实验,没有制造线路丢包、IP 分片、乱序或 NAT 失效,也不是 QUIC 实验。每次 receive 有 2 秒等待预算;发送和进程总运行时间仍需外层截止时间约束。这个超时设置不能当作生产服务的服务水平目标(SLO)。
4. 分片与应用重组:两种资源风险
路径 MTU(PMTU)是整条路径允许通过的 IP 包大小上限。判断是否超过它,要计算包含 IP、UDP 等头部的大小,不能只看应用负载(Payload)。超出可用 PMTU 后,报文可能被拒绝、分片或丢弃,取决于地址族、DF(IPv4 的禁止分片标志)、Socket 设置与路径策略。
IPv4 在允许分片时可由途中路由器分片;IPv6 路由器不对经过的 IP 包分片,发送端需处理 Packet Too Big(包过大)等反馈。IP 分片由 IP 层重组,普通 UDP 接收 API 交付的是重组后的数据报,而不是逐片交付给应用。
重组需要凑齐所有必要分片,任一所需分片缺失都可能使整个数据报无法交付。若 ICMP 反馈被屏蔽,或未给隧道等封装预留头部空间,发送端可能无法及时调整大小,表现为小报文正常、大报文持续失败,这常被称为“大报文黑洞”。保守的负载大小能降低风险,但不能保证所有路径都可用;隧道和路径变化仍需验证,见02。
应用也可以主动把一条业务消息拆成多个较小的 UDP 数据报。这与 IP 分片不同:接收端应用要自己根据请求 ID 和片偏移识别消息、保存片段并重组。片偏移表示该片在原消息中的位置;选择性恢复表示只补发缺失部分。
因此,自定义应用分片必须限制总消息长度、片数、未完成消息数、重组内存、来源配额与超时,并定义防重放、去重、选择性恢复和拥塞控制。防重放用于限制旧消息被再次提交,去重用于避免同一消息被重复处理。只限制单片长度仍不够:大量未完成消息会持续占用重组内存,最终拖垮进程。
Linux 下可用 ss -uanp 观察 UDP Socket,并结合接口、IP 重组和 UDP 错误计数排查。计数可能覆盖整个网络命名空间(Namespace,即隔离的网络环境)或主机,某项计数增长不能直接归因于某个请求;还需对照发送端和接收端两处证据及实际数据报长度。命令和字段按现场版本核对,故障注入只用A 的隔离拓扑。
5. QUIC:不是把TCP名字换成UDP
QUIC 是运行在 UDP 之上的传输协议。UDP 负责承载数据报,QUIC 在其上实现可靠流、丢失恢复、流量控制、拥塞控制及与 TLS 的集成。本文讨论的可靠流仍是有序字节流,不会自动保留业务消息边界;应用仍需按所用协议解码消息。
5.1 独立流偏移与共享连接容量
一条 QUIC 连接可以包含多条流。STREAM 帧携带流数据,Stream ID 标识所属流,偏移表示字节在该流中的位置。接收端按各流自己的偏移恢复顺序,因此一条流缺少字节时,通常不要求另一条流也等待这个缺口。
相比之下,多条应用流若复用同一 TCP 字节流,前面的字节缺失会阻止后续字节交付,即使后续字节属于其他请求。这称为跨流的传输队头阻塞。QUIC 减少了这种阻塞,但每条流内部仍按序交付;同一连接也仍共享拥塞控制、资源及部分协议依赖,所以请求仍可能互相影响。
QUIC 使用确认(ACK)范围告知对端已收到哪些包,并结合包编号空间及丢失检测判断是否需要恢复数据。包编号空间是按协议阶段区分的编号和确认范围。丢失包中需要可靠交付的信息可放入新包发送,而不是沿用同一包编号“重发原包”。完整恢复算法见 RFC9002,本文不提供可直接部署的 QUIC 实现。
还要区分两种限制:流量控制使用流级和连接级额度,约束发送方可向接收方提供多少数据;拥塞控制则约束网络负载。前者保护接收方容量,后者适应网络状况,不能把它们统称为一个窗口。
5.2 身份、地址验证与迁移
QUIC 与 TLS 1.3 结合,但身份认证和地址验证解决不同问题。TLS 认证用于确认对端身份;地址验证用于确认对端能够在所声称的地址上接收数据,避免服务器向伪造的源地址发送大量响应。服务器在完成相应地址验证前受反放大预算限制:RFC9000 约束该地址上的发送量与接收量比例。这是 QUIC 的防护机制,普通 UDP 服务需要另行设计。
Connection ID(连接标识)有助于在 IP 或端口变化后识别原连接,但继续使用新路径还需要路径验证、端点策略和实现支持,不能保证换网络一定无感。新路径的 MTU、往返时延(RTT)和拥塞状态也要重新考虑。
0-RTT 指利用前一次连接保存的状态,在新连接握手完成前发送早期数据,而不是任意首次访问都没有握手成本。早期数据存在重放风险,业务需要限制可用操作并处理重复执行,见14。
Initial 是 QUIC 建立连接初期使用的包类型。RFC9000 对客户端 Initial 所用 UDP 数据报有至少 1200 字节的要求,并规定相应的填充和路径条件。这里区分 QUIC 包与承载它的 UDP 数据报:1200 不是所有 UDP 应用的安全大小,也不是全部 QUIC 包的固定长度。
网络阻止 UDP、PMTU 限制或防火墙政策都可能让 QUIC 失败。HTTP 是否退回其他协议,取决于客户端和部署政策,见12。
6. 选型与可证伪验证
先明确业务对完整性、时效和重复执行的要求,再决定使用现有协议还是自研。例如,过了播放截止时间的媒体数据可能已无价值,而 RPC 响应丢失后,客户端仍需确认服务端是否执行。UDP 提供的边界不能替应用回答这些问题。
| 场景 | 选择依据 | 必须承担/验证 |
|---|---|---|
| DNS | 小型请求响应和现有生态 | TC(响应截断标志)、TCP 回退、缓存及重试;见11 |
| 实时音视频 | 迟到数据价值可能低,需媒体级策略 | 播放截止时间、抖动(到达间隔波动)、损失恢复、拥塞和身份 |
| HTTP/3 | 完整 QUIC/HTTP 实现带来多流与协议演进 | 实际协商为 h3(HTTP/3 的协议标识)、UDP 路径、证书和负载 |
| 自研UDP RPC | 必须有明确时效或协议约束收益 | 请求匹配、去重、预算、放大、PMTU及容量;不默认推荐 |
UDP 截断测试只验证接收行为,不能证明 HTTP/3 已成功协商或带来了性能收益。验证选型收益时,需记录双方实现版本、实际协议、流量模型、丢失情况、RTT、MTU、回退协议及 CPU 使用情况;在可比较条件下分别观察首请求、复用请求与故障恢复,不能只选最好的一次结果。
7. 排障、导航与依据
排障时沿着数据从发送到业务处理的路径找证据:
| 现象 | 优先检查 | 原因 |
|---|---|---|
| 响应缺尾部 | 应用接收容量、线上数据报长度 | 接收截断后不会续读尾部 |
| 只有大报文失败 | PMTU、IP 分片和重组情况 | 大小差异可能触发路径限制 |
| 请求重复执行 | 请求 ID、去重和重试策略 | 超时不代表旧请求未执行 |
| 响应匹配到错误请求 | 超时后的旧响应、ID 生命周期 | 过早复用 ID 可能误认旧响应 |
发送端和接收端两处取证的字段解释见21。没有抓包文件(pcap)等相应证据,不应声称测出了丢包率。
- 前后对照:09 - TCP消息定界、12 - HTTP协议。
- 工程应用:分布式13 - 幂等性、17 - 预算与重试,可靠传输也不代替业务去重。
- Java17 DatagramSocket:接收截断和Socket行为。
- RFC9000、RFC9002:QUIC传输与恢复,目标实现另核。
验收点:区分Datagram丢失、API截断和应用重组,解释QUIC收益及共享容量、重放和路径限制。