外观
02 - 容器不是轻量虚拟机:进程隔离、文件系统与资源限制的真实边界
摘要
容器里看到独立的 PID、网卡和根目录,为什么宿主机仍能看到它的进程?本文从一次“容器内进程被宿主机杀死”的故障出发,用 Linux Namespace、cgroup 和 rootfs 解释容器的真实结构,并通过 unshare 构造一个不依赖 Docker 的最小隔离实验。
1. 场景:容器没有报错,进程却被宿主机杀掉了
某 Java 服务运行在容器中。容器内 ps 显示 Java 是 PID 1,运维却在宿主机上找到了同一个 Java 进程,PID 是 28471,并能直接执行 kill -9 28471。容器随后退出。
这不是隔离失效。PID(进程标识符)是系统用来标识进程的编号;PID Namespace(进程命名空间)让同一个进程在不同范围内拥有不同编号。这里的 PID 1 和 PID 28471 指向同一个 Java 进程,所以有权限的宿主机进程仍能向它发送终止信号。
本文讨论共享宿主机内核的 Linux 容器。Kernel(内核)负责进程调度、内存管理和系统调用等工作;这类容器没有自己的内核,而是使用宿主机内核提供的隔离和资源控制能力。容器内看见独立环境,并不意味着它运行在另一套内核上。
把容器理解成“小虚拟机”,容易把视图隔离误认为内核独立,进而误判资源统计、root 权限和故障影响范围。理解容器时,应分别问:进程看见什么、能消耗多少资源、文件从哪里来,以及允许执行哪些操作。
更准确的模型是:容器是一组受到 Namespace 视图隔离、cgroup 资源约束和文件系统边界限制的普通 Linux 进程。
2. 容器由三类机制拼起来
先从三个基本问题理解容器:Namespace 隔离可见对象,cgroup 统计和约束资源,rootfs 提供应用所需的文件。这些机制组合起来构成运行环境,但不等于所有操作都被允许;权限和安全策略还要决定进程能做什么。
图中的 Capabilities 把 root 特权拆成可单独授予的能力;seccomp 用于过滤系统调用,也就是进程向内核请求服务的接口;LSM(Linux Security Modules,Linux 安全模块)为 SELinux、AppArmor 等安全策略提供支持。
图表将在阅读到此处时加载…
2.1 Namespace:改变进程看到的系统视图
Namespace(命名空间)让进程在某类系统对象上拥有独立视图。例如,网络命名空间决定进程能看见哪些网卡和路由,却不直接规定它能消耗多少内存。常见类型包括:
| Namespace | 隔离内容 | 常见现象 |
|---|---|---|
| PID | 进程编号和父子关系 | 容器内应用是 PID 1 |
| Mount | 挂载点 | 容器看到独立根目录 |
| Network | 网卡、路由、端口、Socket(套接字) | 使用不同网络命名空间的容器可以各自监听 8080 |
| UTS | hostname(主机名)、domain name(域名) | 每个 Pod 可有独立主机名 |
| IPC(进程间通信) | System V IPC、POSIX 消息队列 | 进程间通信对象相互隔离 |
| User | UID/GID(用户与组标识符)映射 | 容器内 root 可映射为宿主机非 root |
| Cgroup | cgroup 层级视图 | 限制进程观察其他控制组 |
| Time | 部分时钟视图 | 支持隔离部分时间偏移 |
Namespace 组合不是固定套餐。容器运行时是负责创建和管理容器的软件,它根据配置创建或加入不同 Namespace。Kubernetes 中,Pod 是一起调度的一组容器;同一个 Pod 内的容器通常共享 Network Namespace,因此可以通过 localhost 互相访问,也共享端口空间,不能各自占用相同地址上的同一端口。是否共享 PID Namespace 则受 Pod 配置影响。
2.2 cgroup:控制进程能够消耗多少资源
cgroup(control group,控制组)把进程组织成层级,并由控制器统计或限制资源。控制器是负责某类资源管理的内核组件,常见控制维度包括 CPU、内存、I/O(输入输出)和进程数量。进程加入控制组后,资源使用按相应控制器的规则统计;是否存在有效上限,还要看控制器是否启用、限制值及上级控制组的约束。
Namespace 解决“看起来像独立环境”,cgroup 解决“不能无限抢资源”。两者不能互相替代:
- 只有 Namespace、没有 cgroup:进程视图隔离,但仍可能吃光宿主机内存;
- 只有 cgroup、没有 Namespace:资源受限,但进程仍能看到宿主机大量对象。
现代 Linux 发行版逐步以 cgroup v2 为主,但生产环境仍可能存在 v1 或混合层级。版本影响控制文件的组织和含义,因此应在目标节点读取挂载信息:
bash
stat -fc %T /sys/fs/cgroup
mount | grep cgroup预期观察:第一条命令若显示 cgroup2fs,说明该路径挂载的是 cgroup v2 文件系统;再结合第二条命令检查其他 cgroup 挂载,判断是否存在混合层级。命令输出和路径在不同发行版、容器运行时中可能不同,容器内部可见的挂载也不一定等于节点的完整挂载。
2.3 rootfs:进程看到的根文件系统
rootfs(root filesystem,根文件系统)为进程提供 /bin、/etc、/lib 等目录,其中保存程序、配置和依赖库。镜像提供文件和启动元数据,不提供一套正在运行的内核。容器镜像的只读层与容器可写层通常通过 OverlayFS 等联合文件系统组合;这类文件系统把多个目录合并成一个可见目录树,再配合独立 Mount Namespace 组织挂载视图。
chroot 可以改变进程对根目录的解析起点,但它本身不是完整安全边界。真正的容器文件系统还会结合 Mount Namespace、只读挂载、Capabilities、seccomp 和 LSM(如 SELinux、AppArmor)。镜像分层与 OverlayFS 会在下一篇展开。
3. PID Namespace:为什么一个进程有两个 PID
PID Namespace 可以嵌套。宿主机位于外层,容器位于内层,同一个进程因此可以同时拥有宿主机编号和容器内编号。
启动方式决定谁成为容器内的 PID 1。第 1 节中 Java 直接作为 PID 1 运行;下面展示另一种方式:先启动负责进程管理的 init 进程,再由它启动 Java。因此 Java 在这个示意中是 PID 2:
text
宿主机 PID Namespace 容器 PID Namespace
systemd PID 1
container-init PID 28470 → PID 1
java PID 28471 → PID 2外层 Namespace 可以观察内层进程,内层通常不能观察外层进程。因此宿主机能找到容器进程,并不代表容器能看到宿主机所有进程。
PID Namespace 中的 PID 1 还有特殊语义:
- 父进程退出后,孤儿进程需要被重新托管,Namespace 内的 PID 1 会承担接管责任;存在子进程收割器(subreaper)时,接管路径还会受它影响;
- 它需要回收已退出的子进程,即读取并释放子进程的退出状态;尚未回收的退出进程称为僵尸进程;
- Linux 对 PID 1 的部分默认信号处理与普通进程不同。
这就是容器启动命令、信号转发和僵尸进程问题都绕不开 PID 1 的原因。
4. 最小实验:不用 Docker 创建隔离进程
以下命令按 Bash 语法书写,需要 Linux、util-linux 提供的 unshare 和 lsns,以及 ps 等进程工具;网络观察还需要 iproute2 提供的 ip。创建 Namespace 通常需要 root 或相应 User Namespace 能力,并受内核配置和系统安全策略约束。这里的命令使用 sudo,没有自行创建 User Namespace。请只在测试机执行。
unshare 让新进程使用新建的命名空间。这个实验只创建部分隔离视图,不设置独立镜像 rootfs、cgroup 配额或完整安全策略,因此它展示的是容器的组成机制,而不是一个完整容器。
4.1 创建 UTS 与 PID Namespace
bash
sudo unshare --fork --pid --mount-proc --uts /bin/bash参数含义:
--fork:创建子进程,使其成为新 PID Namespace 的 PID 1;--pid:创建 PID Namespace;--mount-proc:在新 Mount Namespace 中挂载匹配的/proc;--uts:创建 UTS Namespace。
在新 Shell 中执行:
bash
echo "container-like"
hostname container-like
echo "pid=$$ hostname=$(hostname)"
ps -ef另开宿主机终端:
bash
ps -ef | grep '[c]ontainer-like'
lsns -t pid预期观察:在命令成功创建命名空间的情况下,新 Shell 内的 echo 显示 pid=1 hostname=container-like,ps 展示匹配该 PID Namespace 的进程视图;宿主机仍为同一个 Shell 显示另一个 PID。/proc 是暴露进程等内核信息的伪文件系统,--mount-proc 使 ps 读取的进程视图与新命名空间匹配。
hostname 改变的是 UTS Namespace 内的主机名,不会把 Bash 的进程命令行改成 container-like。因此宿主机上的 grep 不一定找到这个 Shell,不能把空输出当成进程不存在;应结合 lsns -t pid 的结果识别新命名空间及其进程。退出新 Shell 后,这个最小环境随之结束。
4.2 创建 Network Namespace
bash
sudo unshare --fork --net /bin/bash
ip address
ip route预期观察:新 Network Namespace 初始通常只有 loopback(回环接口,用于本地通信),可能尚未启用,没有宿主机原来的网卡和路由。因此,仅创建命名空间不会自动获得外部网络连接。真实容器网络插件还要连接网络接口、分配 IP 和配置路由;常见方式包括 Veth Pair(一端发送的数据从另一端接收的虚拟接口对),也可能建立 Overlay 隧道,即把容器网络数据封装后经底层网络传输。具体方式取决于网络插件。
不要在生产节点随意运行网络 Namespace 和链路修改命令。这里的 unshare 创建隔离环境,ip address 和 ip route 只观察接口与路由,不修改链路;观察结束后退出新 Shell。完整网络实验将在容器网络篇给出可清理步骤。
5. 从宿主机确认容器边界
下面以宿主机 PID 28471 为例。诊断时必须替换成当前仍存活的目标 PID,并确保有权限读取对应 /proc 信息。首先检查它所在的 Namespace:
bash
readlink /proc/28471/ns/pid
readlink /proc/28471/ns/net
readlink /proc/28471/ns/mnt预期输出是包含命名空间类型和标识符的链接目标。inode 是内核标识文件系统对象的编号;比较两个进程同一类型的 Namespace 链接时,编号相同通常表示它们共享该 Namespace。比较 PID 与 Network 等不同类型的编号没有意义。
进入目标进程 Namespace 可使用:
bash
sudo nsenter -t 28471 -p -n -m -u -- /bin/shnsenter 让诊断进程加入目标命名空间。这里的 -p、-n、-m、-u 分别选择 PID、Network、Mount 和 UTS Namespace,随后启动 /bin/sh。该命令没有指定切换根目录、运行身份或 cgroup;进入这些命名空间不等于自动采用目标进程的完整运行环境。它会改变诊断进程的视图,并可能需要高权限;生产环境执行前要确认 PID、权限和审计要求,结束后退出诊断 Shell。PID 还可能在检查后退出并被复用,因此高风险操作不能只依赖一个过期 PID。
查看进程所属 cgroup:
bash
cat /proc/28471/cgroup在 cgroup v2 中,常见限制和统计文件包括:
text
cpu.max
cpu.stat
memory.max
memory.current
memory.events
pids.max这些文件分别用于 CPU 配额、CPU 统计、内存上限、当前内存使用量、内存事件和进程数量上限。读取时要区分配置值与当前使用量,不能只看到某个文件就认定限制已经触发。
实际路径由 systemd(Linux 系统与服务管理器)、Kubernetes QoS(服务质量分类)、容器运行时和 cgroup 驱动共同决定。应在宿主机视角下把 /proc/<pid>/cgroup 中的成员路径与 cgroup 挂载点对应起来,再读取文件,不要硬编码网上示例路径。
6. 容器与虚拟机到底差在哪里
虚拟机通过 Hypervisor(虚拟机监控器)提供虚拟硬件,Guest(客户操作系统)在其上运行自己的内核。普通 Linux 容器则直接运行宿主机内核管理的进程。下面是关系示意,不代表所有虚拟化实现都有相同的组件层次:
图表将在阅读到此处时加载…
| 维度 | 容器 | 虚拟机 |
|---|---|---|
| Kernel | 通常共享宿主机 Kernel | 每个 Guest 有自己的 Kernel |
| 隔离基础 | Namespace、cgroup、安全机制 | 虚拟硬件与 Guest Kernel |
| 启动对象 | 一组进程 | 一套操作系统 |
| 镜像内容 | 用户态文件和元数据 | 常包含完整磁盘与操作系统 |
| 内核版本 | 受宿主机约束 | Guest 可选择自己的 Kernel |
不能简单说哪一种“绝对更安全”或“性能一定更好”。安全性取决于攻击面、虚拟化实现、Kernel、运行配置和防护层;性能取决于工作负载及 I/O 路径。对于强多租户隔离,部分平台还会使用轻量虚拟机或沙箱运行时,把容器体验与虚拟机边界结合起来。
7. 反例与正例
前面的机制解释了隔离如何形成;部署配置决定这些边界是否被放宽。下面两个 Dockerfile 都需要构建上下文中存在可执行的 app 文件,且其架构、动态库等依赖与基础镜像兼容。
7.1 反例:默认以 root 运行并开放过多能力
dockerfile
FROM ubuntu:24.04
COPY app /app
CMD ["/app"]镜像没有声明非 root 用户,也没有在 Dockerfile 中开放额外能力;权限风险还取决于部署配置。如果部署又使用 privileged(特权模式)、挂载宿主机目录或暴露容器运行时 Socket,就会扩大进程可操作的宿主机对象范围。容器逃逸指进程越过预期容器边界访问或控制宿主机,这些配置会显著扩大逃逸后的影响。
7.2 正例:缩小进程权限和可写边界
dockerfile
FROM debian:bookworm-slim
RUN useradd --system --uid 10001 --no-create-home appuser
COPY --chown=10001:10001 app /opt/app
USER 10001
ENTRYPOINT ["/opt/app"]这里用 USER 10001 指定运行身份,使应用不以 UID 0 启动。对应 Kubernetes 容器级安全上下文片段如下,应放在具体容器的 securityContext 下,不是完整 Pod 清单:
yaml
securityContext:
runAsNonRoot: true
runAsUser: 10001
allowPrivilegeEscalation: false
readOnlyRootFilesystem: true
capabilities:
drop: ["ALL"]这组配置要求非 root 身份,限制权限提升,把根文件系统设为只读,并移除可单独授予的 Linux Capabilities。它们分别收紧身份、权限和写入边界,不等于修复所有安全问题。
是否能启用只读根文件系统取决于应用是否把临时文件、日志或缓存写入固定目录。如果必要写入落在只读路径上,应用可能启动失败或运行报错;应显式挂载需要写入的卷,并配置匹配的目录权限。安全字段支持情况和默认策略随 Kubernetes 版本、操作系统和运行时变化,部署前必须验证。
8. 容易踩的坑
8.1 容器内 root 就是安全的 root
没有 User Namespace 映射时,容器内 UID 0 在 Kernel 看来仍是 UID 0,只是受到 Namespace、Capabilities、seccomp 和挂载边界限制。错误挂载宿主机设备或目录可能扩大权限。
8.2 Namespace 能限制 CPU 和内存
Namespace 隔离视图,资源上限主要由 cgroup 控制。排查 OOM(内存不足)、CPU Throttling(CPU 配额限流)或进程数耗尽时,应检查相应控制组的限制与统计,不能用“已经创建 Namespace”证明资源有上限。
8.3 容器里的工具输出一定可信
top、free、nproc 是否正确反映容器配额,受 procfs(通常挂载在 /proc 的伪文件系统)挂载、工具版本和运行时适配影响。工具看到的资源总量与进程实际受限的额度可能不同,关键判断应结合 cgroup 文件和平台指标。
8.4 镜像里没有 Shell 就无法诊断
生产镜像保持精简是合理选择。诊断可借助临时容器、节点工具或外部可观测性,不应为了偶发排障把大量高权限工具永久放进业务镜像。
8.5 删除容器就删除了所有数据
容器可写层通常随容器删除,但挂载卷、宿主机目录、远端存储和外部数据库不会随之消失。删除前必须明确数据实际落点。
9. 进阶:隔离是多层叠加,不是一个开关
一个更完整的容器安全边界包括:
text
Namespace:限制可见对象
cgroup:限制和统计资源
UID/GID:确定传统文件权限
Capabilities:拆分 root 特权
seccomp:过滤系统调用
SELinux/AppArmor:实施强制访问控制
只读文件系统与挂载策略:限制写入面
镜像供应链:限制进入运行环境的内容
Kernel/运行时补丁:修复共享内核攻击面这些机制处理不同问题:身份和权限控制决定能访问什么,系统调用过滤减少可调用的内核接口,镜像供应链管理约束软件来源,补丁则修复已知漏洞。任何单层都不能替代其余层。runAsNonRoot 很重要,但不能修复带漏洞的 Kernel;seccomp 能减少系统调用面,但不能替代应用鉴权。
10. 总结
容器不是被缩小的虚拟机,而是共享宿主机 Kernel、被多种 Linux 机制共同约束的一组进程。
可以带走的三个核心要点:
- Namespace 决定进程看见什么,cgroup 决定进程能用多少,rootfs 决定文件从哪里来。
- 容器 PID 1 与宿主机上的另一个 PID 可以是同一个进程;宿主机能观察并终止容器进程。
- 容器隔离需要 Namespace、权限、系统调用过滤和 Kernel 安全共同完成,不能把“运行在容器里”当成安全结论。
下一篇:镜像为什么越来越大:OverlayFS、镜像分层与写时复制原理。