4. Docker 基础回顾：镜像、容器、网络、卷的核心概念

在深入 Kafka 堆积问题的 Docker 部署优化之前，必须牢固掌握 Docker 的四大核心抽象：镜像（Image）、容器（Container）、网络（Network） 和 卷（Volume）。它们是构建、分发、运行和持久化任何分布式系统（包括 Kafka 集群）的基石。理解这些概念之间的层级关系与协作方式，是后续诊断“堆积”问题、调整资源限制、优化网络拓扑的前提。

4.1 核心概念层级关系

下图展示了 Docker 四大核心概念在 Kafka 部署场景中的逻辑关系：镜像作为只读模板，容器作为运行实例，网络提供通信通道，卷负责数据持久化。

4.2 镜像（Image）：只读的部署模板

镜像是 Docker 世界的“类”或“ISO 文件”。它是一个只读的、分层结构的文件系统，包含了运行一个应用所需的全部依赖——代码、运行时、系统工具、库和设置。在 Kafka 场景中，一个典型的镜像会包含 JRE、Kafka 二进制文件、ZooKeeper 二进制文件以及启动脚本。

特性	说明	Kafka 部署示例
只读性	镜像一旦构建，内容不可变	confluentinc/cp-kafka:7.5.0 镜像不可直接修改
分层结构	基础层 + 应用层，共享缓存	Ubuntu 层 + OpenJDK 层 + Kafka 层
唯一标识	通过 Image ID (SHA256) 或 tag 引用	docker pull confluentinc/cp-kafka:latest
构建方式	Dockerfile 定义构建步骤	FROM openjdk:11 → COPY kafka.tgz → RUN tar

4.3 容器（Container）：运行中的实例

容器是镜像的运行时实例，相当于“对象”。它在镜像只读层之上添加一个可写层（容器层），用于存储运行时产生的临时数据。每个容器拥有独立的进程、网络栈、文件系统和资源视图（通过 Linux Namespace 和 Cgroups 实现隔离）。

• 生命周期： 创建（create）→ 启动（start）→ 运行（run）→ 停止（stop）→ 删除（rm）。
• 资源隔离： 通过 Cgroups 限制 CPU、内存、磁盘 IO，防止单个 Kafka Broker 耗尽宿主机资源。
• 可写层： 容器内对文件系统的修改（如写入日志）都发生在此层，但容器删除后数据丢失——这正是需要 Volume 的原因。

4.4 网络（Network）：容器间的通信桥梁

Docker 网络解决了容器间如何互相发现和通信的问题。对于 Kafka 集群，Broker 与 ZooKeeper、Producer 与 Broker、Broker 与 Consumer 之间的网络配置直接影响消息投递的延迟和吞吐量。

网络驱动	特点	适用场景
bridge	默认驱动，单机容器间通信，通过 IP 或 link 访问	单机开发测试环境
host	容器直接使用宿主机网络栈，无隔离	追求极致网络性能（不推荐生产）
overlay	跨宿主机容器通信，用于 Swarm 集群	多节点 Kafka 集群部署
macvlan	为容器分配独立 MAC 地址，直接暴露于物理网络	需要固定 IP 的遗留系统集成

4.5 卷（Volume）：持久化数据的基石

卷是 Docker 推荐的持久化数据存储机制。它将宿主机文件系统上的特定目录（或远程存储）挂载到容器内部，使得容器删除后数据依然保留。对于 Kafka，卷用于存储消息日志（/var/lib/kafka/data）和 ZooKeeper 事务日志（/data/zookeeper）。

• 命名卷（Named Volume）： 由 Docker 管理，存储在宿主机 /var/lib/docker/volumes/ 下，备份和迁移方便。
• 绑定挂载（Bind Mount）： 将宿主机任意路径挂载到容器，灵活但依赖宿主机目录结构。
• tmpfs 挂载： 存储在内存中，速度快但数据不持久，适合缓存场景。

# 创建命名卷用于 Kafka 数据
docker volume create kafka-data

# 启动 Kafka 容器并挂载卷
docker run -d \
  --name kafka-broker \
  -v kafka-data:/var/lib/kafka/data \
  -e KAFKA_BROKER_ID=1 \
  -e KAFKA_ZOOKEEPER_CONNECT=zookeeper:2181 \
  confluentinc/cp-kafka:7.5.0

4.6 四大概念在 Kafka 部署中的协作流程

下面的 SVG 图展示了从镜像拉取到容器运行、网络接入、卷挂载的完整流程，以及它们如何共同支撑一个 Kafka Broker 实例。

4.7 核心命令速查表

以下表格汇总了与四大概念对应的常用 Docker 命令，帮助你在 Kafka 部署和问题排查中快速操作。

概念	命令	用途
镜像	docker images	列出本地所有镜像
	docker pull <image>:<tag>	从仓库拉取指定镜像
容器	docker ps -a	查看所有容器（包括已停止）
	docker logs -f <container>	跟踪容器日志（排查堆积时常用）
	docker exec -it <container> bash	进入容器内部调试
网络	docker network ls	列出所有网络
	docker network inspect <network>	查看网络详情（连接的容器列表）
卷	docker volume ls	列出所有卷
	docker volume inspect <volume>	查看卷的挂载点路径