如何确保ubuntu上zookeeper的高可用性 - 问答

确保Ubuntu上Zookeeper高可用性的关键步骤

1. 环境准备：满足高可用基础条件

服务器数量：至少部署3台Ubuntu服务器（推荐奇数台，如3、5台），避免脑裂问题（偶数台无法解决分歧）。
Java环境：Zookeeper依赖Java运行，需安装JRE（推荐OpenJDK 8或11）：
```
sudo apt update && sudo apt install -y default-jre
```
时钟同步：所有节点必须同步时钟（使用NTP服务），避免因时间差异导致数据不一致：
```
sudo apt install -y ntp
sudo systemctl enable --now ntp
```

2. 安装Zookeeper：统一版本与路径

下载解压：从Apache官网下载最新稳定版（如3.7.0），解压到统一目录（如/usr/local/zookeeper）：

wget https://downloads.apache.org/zookeeper/zookeeper-3.7.0/apache-zookeeper-3.7.0-bin.tar.gz
tar -xzf apache-zookeeper-3.7.0-bin.tar.gz -C /usr/local/
mv /usr/local/apache-zookeeper-3.7.0-bin /usr/local/zookeeper

配置环境变量：编辑/etc/profile，添加ZooKeeper路径：

export ZK_HOME=/usr/local/zookeeper
export PATH=$PATH:$ZK_HOME/bin
source /etc/profile

3. 配置集群：定义节点角色与通信

修改zoo.cfg：在/usr/local/zookeeper/conf/下创建/修改zoo.cfg，核心配置如下：

tickTime=2000                # 基本时间单位（毫秒）
dataDir=/var/lib/zookeeper   # 数据存储目录（需提前创建）
clientPort=2181              # 客户端连接端口
initLimit=5                  # Follower初始化同步最大时间（tick数）
syncLimit=2                  # Follower与Leader同步最大时间（tick数）
server.1=zookeeper1:2888:3888 # 集群节点1（格式：主机名:peerPort:leaderPort）
server.2=zookeeper2:2888:3888 # 集群节点2
server.3=zookeeper3:2888:3888 # 集群节点3

注：peerPort（2888）用于节点间通信，leaderPort（3888）用于Leader选举。

创建myid文件：在每个节点的dataDir目录下创建myid，内容为对应节点ID（与server.X中的X一致）：

mkdir -p /var/lib/zookeeper
echo "1" | sudo tee /var/lib/zookeeper/myid  # zookeeper1节点
echo "2" | sudo tee /var/lib/zookeeper/myid  # zookeeper2节点
echo "3" | sudo tee /var/lib/zookeeper/myid  # zookeeper3节点

4. 启动集群：验证节点状态

启动服务：在每个节点上执行：

sudo systemctl start zookeeper
sudo systemctl enable zookeeper  # 设置开机自启

检查状态：通过zkServer.sh查看每个节点的角色（Leader/Follower）：
```
/usr/local/zookeeper/bin/zkServer.sh status
```
正常输出应显示Mode: leader（1个）或Mode: follower（多个）。

5. 验证集群功能：确保数据一致性

连接客户端：任选一个节点连接集群：

/usr/local/zookeeper/bin/zkCli.sh -server zookeeper1:2181

测试数据写入：在Leader节点创建节点并写入数据：
```
create /test "high-availability"
```
验证数据同步：在其他节点读取数据：
```
get /test
```
应返回high-availability，证明数据已同步。

6. 配置监控：实时掌握集群健康

日志监控：Zookeeper日志默认在/usr/local/zookeeper/logs/，通过tail -f实时查看：
```
tail -f /usr/local/zookeeper/logs/zookeeper.out
```
第三方工具：使用Prometheus+Grafana监控集群指标（如节点数量、延迟、Leader切换次数），设置告警规则（如Leader宕机、节点失联）。

7. 备份与恢复：防范数据丢失

定期备份：每天备份dataDir目录（包含快照和事务日志）到远程存储（如HDFS、S3）：
```
rsync -avz /var/lib/zookeeper/ user@backup-server:/backup/zookeeper/
```

恢复流程：若节点故障，停止服务→替换数据目录→重启服务：

sudo systemctl stop zookeeper
rm -rf /var/lib/zookeeper/*
rsync -avz user@backup-server:/backup/zookeeper/ /var/lib/zookeeper/
sudo systemctl start zookeeper

8. 维护注意事项

安全加固：配置防火墙开放必要端口（2181、2888、3888），仅允许可信IP访问：
```
sudo ufw allow from trusted-ip to any port 2181,2888,3888 proto tcp
```
版本升级：升级前备份数据，按照官方文档逐步升级（避免跨大版本升级）。
节点扩展：新增节点时，修改所有节点的zoo.cfg添加新节点信息，创建myid文件后重启集群。

0 赞

0 踩