ZooKeeper网络与容量规划
网络参数调优和容量规划方法。
网络参数优化
关键参数：
| 参数 | 默认值 | 说明 |
|---|---|---|
| tickTime | 2000ms | 心跳时间单位 |
| initLimit | 10 | 初始化超时倍数 |
| syncLimit | 5 | 同步超时倍数 |
超时计算：
properties
初始化超时 = tickTime × initLimit = 20秒
同步超时 = tickTime × syncLimit = 10秒
网络延迟调整：
Bash
# 高延迟网络（跨机房）
tickTime=4000
initLimit=20
syncLimit=10
# 低延迟内网
tickTime=1000
initLimit=5
syncLimit=2
Linux网络优化：
properties
# TCP缓冲调整
sysctl -w net.core.rmem_max=16777216
sysctl -w net.core.wmem_max=16777216
sysctl -w net.ipv4.tcp_rmem="4096 87380 16777216"
# TCP连接数调整
sysctl -w net.core.somaxconn=1024
网络参数建议：
| 场景 | tickTime | initLimit | syncLimit |
|---|---|---|---|
| 正常内网 | 2000 | 10 | 5 |
| 高延迟网络 | 4000 | 20 | 10 |
| 快速响应 | 1000 | 5 | 2 |
注意：syncLimit太小可能导致误判Follower宕机。
客户端连接数优化
连接限制参数：
| 参数 | 默认值 | 说明 |
|---|---|---|
| maxClientCnxns | 60 | 单IP最大连接数 |
配置方式：
Java
# zoo.cfg
maxClientCnxns=100 # 或0表示不限
连接数评估：
| 场景 | 单节点连接建议 |
|---|---|
| 微服务注册 | 500-1000 |
| 配置中心 | 100-300 |
| 分布式锁 | 50-100 |
客户端超时配置：
Bash
CuratorFrameworkFactory.builder()
.connectionTimeoutMs(30000) // 连接超时30秒
.sessionTimeoutMs(60000) // 会话超时60秒
连接数监控：
properties
# 查看连接数
echo mntr | nc localhost 2181 | grep num_alive_connections
提示：maxClientCnxns=0禁用限制，但需监控防止过载。
快照优化策略
快照生成参数：
| 参数 | 默认值 | 说明 |
|---|---|---|
| snapCount | 100000 | 每10万事务生成快照 |
| autopurge.snapRetainCount | 3 | 保留快照数 |
| autopurge.purgeInterval | 0 | 清理间隔（小时） |
优化配置：
Bash
# zoo.cfg
snapCount=50000 # 更频繁生成
autopurge.snapRetainCount=5
autopurge.purgeInterval=1 # 每小时清理
清理策略说明：
text
保留最近N个快照文件
删除对应的事务日志
避免磁盘持续增长导致满
手动清理脚本：
text
# PurgeTxnLog工具
java -cp zookeeper.jar org.apache.zookeeper.server.PurgeTxnLog
-d /dataDir -n 5
快照文件大小：
text
快照大小 ≈ 内存中数据树大小
节点数越多，快照越大
定期清理控制磁盘占用
注意：生产环境必须开启自动清理，避免磁盘满。
容量规划方法
评估维度：
| 维度 | 指标 | 说明 |
|---|---|---|
| QPS | 每秒请求 | 写请求是瓶颈 |
| 节点数 | ZNode总数 | 影响内存占用 |
| 会话数 | 连接数 | 影响网络IO |
| Watcher数 | 监听数 | 影响CPU |
集群规模估算：
text
集群节点数 = ceil(期望QPS / 单节点QPS) + 1
参考数据：
单节点写QPS ≈ 1000-5000（取决于硬件）
单节点读QPS ≈ 10000+（Follower可扩展）
推荐配置：
3节点集群支持约1万读QPS
5节点集群支持约2万读QPS
硬件配置参考：
| 规模 | CPU | 内存 | 磁盘 |
|---|---|---|---|
| 小规模 | 4核 | 4G | 100G SSD |
| 中规模 | 8核 | 8G | 200G SSD |
| 大规模 | 16核 | 16G | 500G SSD |
扩展策略：
| 策略 | 说明 |
|---|---|
| Observer扩展 | 扩展读能力 |
| 多集群联邦 | 分散负载 |
| 分层架构 | 业务隔离 |
容量规划流程：
text
1. 评估写QPS需求
2. 选择集群节点数
3. 配置硬件资源
4. 测试验证容量
5. 规划扩展策略
提示：写QPS是瓶颈指标，规划以写请求为主。
要点总结
- tickTime/syncLimit/initLimit适配网络延迟
- 高延迟网络增大参数，低延迟减小
- maxClientCnxns限制单IP连接防过载
- autopurge自动清理快照避免磁盘满
- snapCount控制快照生成频率
- 容量规划以写QPS为瓶颈指标
- Observer扩展读能力，集群联邦分散负载
