外观
Java 并发速记手册
摘要
先明确共享状态、原子操作和任务生命周期,再选锁、容器和执行器。常规语义以 Java 17 为基线,虚拟线程以 JDK 21 为入口;结构化并发、ScopedValue 与 pinning 行为必须核对所用 JDK 的正式或预览状态。
快速入口
知识速记
| 知识点 | 核心结论与条件 |
|---|---|
| 线程安全 | 保护的是共享状态的不变量,不是给所有方法各加一把锁;跨方法整体操作也可能需要协调 |
| happens-before | 定义可见性与排序承诺;先证明正确发布,再谈具体 CPU 和优化 |
| volatile | 可见性和排序不等于读改写原子性,count++ 仍是复合操作 |
| synchronized | 互斥与发布需要使用同一监视器;实例锁和类锁不是同一个对象 |
| ReentrantLock | 可中断、超时或条件等待有各自 API;成功获取后在 finally 释放,公平不等于更高吞吐 |
| CAS | 失败需要重新读状态;版本号用于识别需要区分的 ABA,重试体不能随意产生外部副作用 |
| 并发容器 | 单次操作安全不让“先查再写”自动原子化;用原子组合 API 并检查回调边界 |
| 线程池提交 | 先补核心线程,再尝试入队,再扩到最大线程,最后拒绝;无界队列常使 maximumPoolSize 难以发挥作用 |
| 等待与取消 | Future 超时只结束本次等待;cancel(true) 请求中断,任务和阻塞资源要配合退出 |
| CompletableFuture | 依赖编排不自动提供容量隔离;Async 的执行器、阻塞调用与异常传播都要明确 |
| 虚拟线程 | 降低大量阻塞任务的线程成本,不增加 CPU 或数据库连接容量;用许可保护有限资源 |
| 上下文 | 池线程会复用,安装和恢复上下文应形成作用域;只 remove 可能破坏嵌套调用 |
| 背压与隔离 | 有界等待、拒绝、deadline 和下游容量共同保护系统;异步队列不等于无限缓冲 |
| 按 Key 串行 | 保证同 Key 顺序时,拒绝和降级不能绕过串行通道;不同实例还需要跨实例协调 |
JMM 与同步工具:直接选择
| 需求 | 合适的起点 | 关键条件 |
|---|---|---|
| 发布一个状态标志或不可变快照 | volatile 或可靠发布 | 对象内部后续可变状态仍需独立保护 |
| 原子更新一个数值 | AtomicLong 等 | 只覆盖单次原子操作,跨字段规则另设计 |
| 保护多个字段共同不变量 | 同一把锁或单写者 | 所有相关读写路径必须遵守边界 |
| 高频累计统计 | LongAdder | 并发 sum 不适合当精确限额判定 |
| 限定同时访问稀缺资源 | Semaphore | 成功获取才释放,业务执行还需剩余预算 |
| 有界排队与生产消费 | BlockingQueue | 大小、拒绝、等待和关闭行为都要明确 |
volatile 不让复合操作原子化;ConcurrentHashMap 的 get 后 put 也不自动原子。需要条件更新时选 compute、merge、putIfAbsent 等契约合适的操作,回调不应持有无限时长的外部调用或任意副作用。
锁、CAS 和协调器
synchronized 使用指定对象的监视器;锁不同实例的 this 保护不了共同静态状态。ReentrantLock 的 lockInterruptibly 可响应等待时的中断,tryLock 可失败返回,成功获取后 finally unlock。Condition.await 需要先持锁,会释放关联锁并在返回前重新获取;条件应放 while 重查,因为被唤醒不证明条件成立。
CAS 比较旧值并条件写新值,失败应读取新状态重新计算;重试体中的扣款、发送消息等不能每次重复执行。ABA 指值从 A 变 B 再回 A,在需要识别历史变化的算法中,版本或其他设计才有意义。
CountDownLatch 适合一次等待若干任务结束;CyclicBarrier 适合固定参与者重复汇合;Phaser 适合阶段与参与者动态变化。任一参与者失败、取消或缺席时,必须结束剩余等待,不能只设计正常 countDown/await 路径。
线程池到底怎样接任务
一般提交路径:运行线程少于 corePoolSize 时尝试建核心线程;否则尝试入队;入队失败再尝试扩到 maximumPoolSize;仍不能接收就拒绝。无界队列通常让 max 很难发挥作用。队列不是越大越好,等待预算可粗估为排队量/有效完成速率,但波动、不同任务成本和重试会使单次估计不精确。
AbortPolicy 抛拒绝异常;CallerRunsPolicy 在符合契约时让提交者执行,可能阻塞请求线程或改变上下文;DiscardPolicy 丢弃;DiscardOldestPolicy 丢队头再尝试。选择策略要让调用方知道任务是否真的执行,不能让等待 Future 的调用方永远等一个被静默丢弃的任务。
CPU 密集先看核数与其他负载;阻塞任务可提高并发但要受数据库连接、远端限额、内存和超时约束。active 是工作线程活动线索,不是 CPU 使用率。completed 变化量/窗口才是完成速率。
超时、取消、关闭和异步异常
get(timeout) 只结束等待;cancel(true) 请求中断,不强制杀线程。InterruptedException 被捕获时,按调用链选择退出/传播,不能吞掉后无限继续。关闭流通常应停止接收 → 有界等待 → 请求取消 → 确认线程和资源结束。shutdown 不立即停止运行任务,shutdownNow 也只是尽力中断并返回未执行任务。
CompletableFuture thenApply 转换结果,thenCompose 把返回 Future 的异步步骤展平,thenCombine 汇合两个结果;allOf 只表示全部完成,要另取结果。非 Async 回调可能在完成线程执行,Async 要明确执行器。exceptionally 恢复异常,whenComplete 观察完成结果,handle 可处理两种路径;异常处理可能把失败变成正常值,业务必须明确是否允许。
ThreadLocal、虚拟线程与容量
ThreadLocal 绑定线程,不绑定请求。在线程池中安装请求上下文后,finally 恢复之前的值,嵌套场景不能一律 remove。异步边界需显式传播受控快照,避免携带过量或可变共享状态。
虚拟线程适合大量阻塞任务,不增加 CPU 或连接容量;不为节约虚拟线程本身而机械建小池,而是对有限资源设许可。pinning 的来源与缓解随 JDK 版本变化,应查版本和实际事件,不能用“synchronized 总是有问题”作跨版本结论。
积压、死锁、进程不退出:闭合判断
队列增长先比较原始到达、总尝试、完成、拒绝以及下游等待。完成小于到达时,没有净余量,积压不会自行清空;盲目加线程可能让下游更慢。死锁查“谁等谁、各持什么”,统一资源获取顺序或减少同时持有;没有 JVM 死锁报告不排除数据库、远端、许可之间的等待环。
进程不退出查非守护线程、定时器、执行器和长连接所有者。定时任务异常、子任务取消和关闭超时都要收集;仅调用 shutdown 不是完成验收。
常见问题排查
| 现象 | 检查顺序 | 证据与下一步 |
|---|---|---|
| 数据偶发不一致 | 写出业务不变量 → 找全部读写路径 → 查原子边界与发布 | 用受控交错验证候选,不能用多跑几次无错替代 JMM 推导。 |
| 请求慢且队列涨 | 同窗对照到达量、完成量、队列、执行数 → 查运行任务等待 | 执行线程等下游时增加线程可能进一步压垮下游;先限定准入与等待预算。 |
| 高 CPU | 查热线程 → 多次栈或有界采样 → 分辨自旋、计算、GC、重试 | 同一热点持续出现才支持定位;RUNNABLE 也可能在本地等待。 |
| 线程互相等待 | 保存栈与锁 → 找持有者 → 还原获取顺序 | JVM 死锁报告不覆盖全部外部资源;统一加锁顺序或减少同时持锁范围。 |
| 超时后任务还在跑 | 查等待者与执行者生命周期 → 查中断传播 → 查资源超时 | 明确取消请求是否到达,避免吞掉 InterruptedException 后继续循环。 |
| 进程无法退出 | 查存活非守护线程 → 查执行器关闭 → 查定时与后台任务 | shutdown 不强制取消运行任务,必须设计有界关闭与失败清理。 |
| 请求上下文串了 | 查池线程复用 → 查异常与 finally → 查嵌套任务恢复 | 检查 ThreadLocal 到根保留关系及业务隔离;任务结束应恢复原上下文。 |
| 虚拟线程吞吐低 | 查 CPU、连接池、锁及 pinning → 核对 JDK 版本 | 不能把所有慢都叫 pinning;JDK 版本差异会改变同步区域行为。 |
高频问题:操作与结果判断
代码片段以 Java 17 API 为基线;示例容量与秒数需按目标吞吐和下游预算调整。
有界线程池:拒绝必须让调用方看到
下面是初始化和单次调用片段,省略业务方法定义;线程池应由组件统一持有,在生命周期结束时关闭,而不是每次请求创建。
java
import java.util.concurrent.*;
ThreadPoolExecutor pool = new ThreadPoolExecutor(
8, 8, 0L, TimeUnit.MILLISECONDS,
new ArrayBlockingQueue<>(100),
Executors.defaultThreadFactory(),
new ThreadPoolExecutor.AbortPolicy());
Future<String> future = null;
try {
future = pool.submit(() -> callRemote()); // 远程客户端也必须设超时
String result = future.get(800, TimeUnit.MILLISECONDS);
useResult(result);
} catch (RejectedExecutionException e) {
rejectRequest(); // 返回明确过载结果,不再向同一个池无限重试
} catch (TimeoutException e) {
if (future != null) future.cancel(true);
reportUnknownOrTimeout(); // 写操作需查询是否已完成
} catch (InterruptedException e) {
if (future != null) future.cancel(true);
Thread.currentThread().interrupt();
abortRequest();
} catch (ExecutionException e) {
reportFailure(e.getCause());
}cancel(true) 只请求中断。网络调用和业务循环必须有自己的超时/中断处理,不能把 get 的超时当作任务执行上限。该示例使用 AbortPolicy,避免静默丢弃任务却留下永不完成的 Future。
线程池积压:四个指标决定先查哪里
每个窗口记录 activeCount、queue.size、completedTaskCount 的增量和拒绝数,再关联任务耗时、连接池 pending 和下游延迟。
| 同窗观察 | 优先动作 |
|---|---|
| active 满、CPU 高、队列涨 | 查计算热点;扩线程通常只增加争用,优先削峰和限制入口 |
| active 满、CPU 低、栈等网络 | 查下游超时和连接容量,不能让更多线程同时压垮下游 |
| active 满、栈等同一把锁 | 查持锁线程及临界区,扩池不解除锁瓶颈 |
| active 不满但任务迟迟没执行 | 查是否看错池、执行器被关闭、定时等待或任务间互等 |
例如队列 100、有效完成速率 50/s,粗估队尾等待约 2s;若请求只剩 800ms,继续接收只会制造过期工作。该估计依赖负载稳定且任务成本接近,应以实际排队时长校正。验收看排队分位数和成功吞吐,不只看队列变短。
死锁与资源互等:找等待环
用 jcmd PID Thread.print -l 采栈。看到 Java-level deadlock 时按报告确认线程、持有锁和等待锁;没有报告仍可能是资源互等,例如池中所有任务都等待提交到同一池的子任务。
把每个等待写成“线程/任务 → 资源 → 持有者”。形成环时,修正锁顺序、拆分执行器或改为非阻塞组合;外部依赖等待则设置 deadline 并释放占用资源。中断能否解开等待依阻塞 API 而定,不能把线程中断当作所有锁的强制释放。
关闭与取消:停止接收后有界等待
以下为生命周期方法片段;返回的未执行任务需要按业务记录取消或补偿。
java
pool.shutdown();
try {
if (!pool.awaitTermination(10, TimeUnit.SECONDS)) {
var notStarted = pool.shutdownNow();
recordNotStarted(notStarted);
if (!pool.awaitTermination(5, TimeUnit.SECONDS)) {
reportStillRunning();
}
}
} catch (InterruptedException e) {
recordNotStarted(pool.shutdownNow());
Thread.currentThread().interrupt();
}shutdownNow 返回队列任务但不保证自动完成所有关联 Future;需要组件自行维护任务状态。先摘除入口,再排空任务,最后关闭连接等下游资源。业务方法吞掉中断或无限 I/O,以上等待仍可能失败,必须记录未完成业务身份。
ThreadLocal 与虚拟线程:上下文和容量分别处理
请求上下文安装前保存旧值,finally 恢复;只有旧值为空且契约如此时才 remove。异步提交时捕获受控不可变快照,在工作线程中按同样方式安装与恢复,不能依赖线程池自动继承请求上下文。
| JDK 基线 | 虚拟线程判断 |
|---|---|
| 17 | 没有正式虚拟线程 API,本手册的池示例使用平台线程 |
| 21 | 虚拟线程正式交付;持有 synchronized 监视器期间发生阻塞可能 pin 住载体线程 |
| 24 | JEP 491 消除了由 synchronized 监视器引起的主要 pinning;本地代码等情形仍需检查 |
因此不应跨版本机械替换所有 synchronized。虚拟线程仍要用 Semaphore 等限制数据库/远端并发;线程便宜不代表连接、内存和 CPU 无限。具体变更见 JEP 491。
工具与参数
先固定实例、目标 JDK、时间窗和执行器名称。PID 替换为实际进程号;诊断权限及命令支持见 Java 17 jcmd。
| 工具或参数 | 查阅用途 | 重点边界 |
|---|---|---|
jcmd PID Thread.print -l | 看栈、监视器、并发锁和候选死锁 | 快照有采集开销,有限次数对照;虚拟线程观测按目标工具能力选择 |
Linux top -H -p PID | 看进程内线程 CPU | 交互式工具;按时间窗映射线程号,PID 与 JVM nid 表示格式不同 |
jcmd PID JFR.check | 查已有时间线录制 | 录制配置决定能观察什么;采样遗漏不证明事件未发生 |
| core / max / queue | 执行器并发与等待范围 | 同时看队列类型和拒绝策略,不能孤立调 max。 |
get(timeout, unit) | 限定调用方等待 | 不等于任务取消,也不等于端到端 deadline |
tryLock(timeout, unit) | 有界获取锁 | 失败返回需处理;只有成功拿到锁才释放 |
tryAcquire(timeout, unit) | 限定进入稀缺资源的等待 | 获取成功后 finally 归还,失败不能 release。 |
| 线程池指标 | active、queue、completed、rejected、等待与执行耗时 | active 不是 CPU 使用率;累计 completed 要按时间差计算速率 |
| CountDownLatch / CyclicBarrier / Phaser | 一次完成、循环汇合、动态阶段 | 超时、缺席和取消要有清理策略,不按“都是等待工具”互换。 |
易错点与记忆提示
- 共享状态先画边界,任务再画生命周期:分别回答谁能写、谁负责结束。
- 超时不自动取消,取消不保证退出:检查中断和底层资源支持。
- 锁同一把才互斥:不同实例锁保护不了共同静态状态。
- 长队列把拒绝变等待:容量更大可能只是更晚失败。
- 并发容器不包业务事务:跨容器与数据库更新仍需设计。
- 虚拟线程省线程成本,不省下游容量:CPU 密集任务仍受核数限制。
- 测试看证据,规则看模型:随机压测未复现不能证明所有交错安全。
原理与完整示例
需要原因、源码或完整实验时再阅读:
- A - Java 并发代码测试方法
- 15 - 线程池任务堆积与接口超时
- 14 - Java 进程 CPU 飙高排查
- 05 - Java 死锁的定位与消除
- 02 - Java 线程生命周期与正确中断方式
- 27 - 并发任务泄漏与进程无法退出
- B - ThreadLocal 内存泄漏与上下文污染
- 26 - 虚拟线程 Pinning 与载体线程饥饿排查
- 09 - ThreadPoolExecutor 参数与容量设计
- 31 - Semaphore 并发许可与资源保护
- 11 - Java 并发协调工具选型
- 18 - 结构化并发与任务生命周期
- 30 - 单机请求合并与 SingleFlight
- 01 - 线程安全到底在保护什么
- 03 - JMM 与 happens-before
- 04 - synchronized 的 Monitor 机制
- 06 - ReentrantLock 与 AQS
- 07 - CAS 与原子类
- 08 - ConcurrentHashMap 与并发容器
- 17 - FutureTask 与任务取消
- 10 - CompletableFuture 异步编排
- 13 - JDK 21 虚拟线程实战
- 21 - 并发上下文传播与 ScopedValue
- 24 - Flow 与 Reactive Streams 背压
- 29 - 按 Key 串行化与分段并发