ZooKeeper网络与容量规划

网络参数调优和容量规划方法。

网络参数优化

关键参数：

超时计算：

初始化超时 = tickTime × initLimit = 20秒
同步超时 = tickTime × syncLimit = 10秒

网络延迟调整：

# 高延迟网络（跨机房）
tickTime=4000
initLimit=20
syncLimit=10

# 低延迟内网
tickTime=1000
initLimit=5
syncLimit=2

Linux网络优化：

# TCP缓冲调整
sysctl -w net.core.rmem_max=16777216
sysctl -w net.core.wmem_max=16777216
sysctl -w net.ipv4.tcp_rmem="4096 87380 16777216"

# TCP连接数调整
sysctl -w net.core.somaxconn=1024

网络参数建议：

注意：syncLimit太小可能导致误判Follower宕机。

客户端连接数优化

连接限制参数：

配置方式：

# zoo.cfg
maxClientCnxns=100  # 或0表示不限

连接数评估：

客户端超时配置：

CuratorFrameworkFactory.builder()
    .connectionTimeoutMs(30000)  // 连接超时30秒
    .sessionTimeoutMs(60000)     // 会话超时60秒

连接数监控：

# 查看连接数
echo mntr | nc localhost 2181 | grep num_alive_connections

提示：maxClientCnxns=0禁用限制，但需监控防止过载。

快照优化策略

快照生成参数：

优化配置：

# zoo.cfg
snapCount=50000          # 更频繁生成
autopurge.snapRetainCount=5
autopurge.purgeInterval=1  # 每小时清理

清理策略说明：

保留最近N个快照文件
删除对应的事务日志
避免磁盘持续增长导致满

手动清理脚本：

# PurgeTxnLog工具
java -cp zookeeper.jar org.apache.zookeeper.server.PurgeTxnLog
    -d /dataDir -n 5

快照文件大小：

快照大小 ≈ 内存中数据树大小
节点数越多，快照越大
定期清理控制磁盘占用

注意：生产环境必须开启自动清理，避免磁盘满。

容量规划方法

评估维度：

集群规模估算：

集群节点数 = ceil(期望QPS / 单节点QPS) + 1

参考数据：
单节点写QPS ≈ 1000-5000（取决于硬件）
单节点读QPS ≈ 10000+（Follower可扩展）

推荐配置：
3节点集群支持约1万读QPS
5节点集群支持约2万读QPS

硬件配置参考：

扩展策略：

容量规划流程：

1. 评估写QPS需求
2. 选择集群节点数
3. 配置硬件资源
4. 测试验证容量
5. 规划扩展策略

提示：写QPS是瓶颈指标，规划以写请求为主。

要点总结

• tickTime/syncLimit/initLimit适配网络延迟
• 高延迟网络增大参数，低延迟减小
• maxClientCnxns限制单IP连接防过载
• autopurge自动清理快照避免磁盘满
• snapCount控制快照生成频率
• 容量规划以写QPS为瓶颈指标
• Observer扩展读能力，集群联邦分散负载