4. 压测环境准备：硬件选型与系统调优

压测环境的准备是获取可信测试结果的前提。硬件选型决定了性能上限，操作系统调优消除内核瓶颈，etcd 配置调优则直接影响请求路径效率。本节从这三个维度展开，确保压测环境能够真实反映 etcd 的极限能力。

4.1 硬件选型：CPU / 内存 / 磁盘 / 网络

etcd 是 I/O 密集型与 CPU 密集型混合的分布式存储组件。Raft 日志持久化依赖磁盘顺序写入，MVCC 查询依赖内存缓存，网络层处理 RPC 与心跳。下表给出推荐配置与最低配置的对比：

4.2 操作系统调优：文件句柄与网络参数

操作系统默认参数面向通用场景，压测 etcd 时必须调整以下关键参数，否则会出现连接耗尽、端口延迟、文件描述符不足等问题。

4.2.1 文件句柄与进程限制

etcd 作为 server 端会为每个客户端连接分配一个 socket 文件描述符。压测时并发连接数可能达到数万，必须提高系统级与用户级限制。

# 临时生效（立即生效，重启后失效）
ulimit -n 1048576
ulimit -u 1048576

# 永久生效（需修改 /etc/security/limits.conf）
# 添加以下内容：
*                soft    nofile          1048576
*                hard    nofile          1048576
*                soft    nproc           1048576
*                hard    nproc           1048576

4.2.2 网络参数调优

etcd 使用 gRPC 通信，底层依赖 TCP。以下 sysctl 参数可显著降低连接建立延迟与端口耗尽风险：

# /etc/sysctl.conf 追加以下内容，执行 sysctl -p 生效

# 端口范围扩大，避免 TIME_WAIT 耗尽临时端口
net.ipv4.ip_local_port_range = 1024 65535

# 快速回收 TIME_WAIT 连接（仅适用于客户端主动关闭场景）
net.ipv4.tcp_tw_reuse = 1

# 增大 TCP 读写缓冲区，提升吞吐
net.core.rmem_default = 262144
net.core.wmem_default = 262144
net.core.rmem_max = 16777216
net.core.wmem_max = 16777216

# 降低 keepalive 探测间隔，快速检测死连接
net.ipv4.tcp_keepalive_time = 600
net.ipv4.tcp_keepalive_intvl = 30
net.ipv4.tcp_keepalive_probes = 3

# 增大 socket 积压队列长度
net.core.somaxconn = 65535

4.3 etcd 配置调优

etcd 的配置项直接影响压测表现。以下给出压测场景下的推荐配置，并解释每个参数的作用。

4.3.1 核心配置清单

4.3.2 客户端连接调优

压测客户端使用 gRPC 连接 etcd 时，建议配置连接池与超时参数：

# etcd 服务端参数
--max-concurrent-streams 100000   # 最大并发流，压测时调大
--max-txn-ops 1024                # 单事务最大操作数，批量写入时有用

# 客户端侧（以 etcdctl 或 benchmark 工具为例）
--dial-timeout=5s                 # 连接超时
--command-timeout=30s             # 命令超时
--insecure-skip-tls-verify        # 压测环境可跳过 TLS 以减少 CPU 开销

4.4 压测环境拓扑与调优流程

下图展示压测环境的典型拓扑，以及从硬件选型到配置生效的完整调优流程：

4.5 调优验证清单

完成上述调优后，建议执行以下验证步骤，确保环境就绪：

• 文件句柄验证： cat /proc/$(pgrep etcd)/limits | grep "max open files" 确认值为 1048576
• 网络参数验证： sysctl net.ipv4.ip_local_port_range 确认端口范围已扩大
• 磁盘性能验证： 使用 fio --name=wal-test --ioengine=libaio --rw=write --bs=4k --size=1G --direct=1 --fsync=1 确认顺序写延迟 < 2 ms
• etcd 配置验证： 查看 etcd 启动日志，确认 --quota-backend-bytes 等参数已生效
• 网络延迟验证： 节点间 ping -c 10 平均延迟 < 0.5 ms