Docker Zookeeper集群搭建的方法

概述

Zookeeper是一个分布式协调服务，广泛应用于分布式系统中。通过Docker容器化技术，我们可以快速搭建一个Zookeeper集群，便于开发、测试和部署。本文将详细介绍如何使用Docker搭建一个Zookeeper集群，并确保集群的高可用性和一致性。

准备工作

在开始之前，确保你已经安装了Docker和Docker Compose。如果没有安装，可以参考以下步骤进行安装：

安装Docker

# 更新包索引
sudo apt-get update

# 安装必要的包
sudo apt-get install apt-transport-https ca-certificates curl software-properties-common

# 添加Docker的官方GPG密钥
curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo apt-key add -

# 添加Docker的APT仓库
sudo add-apt-repository "deb [arch=amd64] https://download.docker.com/linux/ubuntu $(lsb_release -cs) stable"

# 更新包索引
sudo apt-get update

# 安装Docker CE
sudo apt-get install docker-ce

安装Docker Compose

# 下载Docker Compose
sudo curl -L "https://github.com/docker/compose/releases/download/1.29.2/docker-compose-$(uname -s)-$(uname -m)" -o /usr/local/bin/docker-compose

# 赋予可执行权限
sudo chmod +x /usr/local/bin/docker-compose

# 验证安装
docker-compose --version

创建Docker Compose文件

我们将使用Docker Compose来定义和运行Zookeeper集群。首先，创建一个名为docker-compose.yml的文件，内容如下：

version: '3.8'

services:
  zookeeper1:
    image: zookeeper:3.7.0
    container_name: zookeeper1
    ports:
      - "2181:2181"
    environment:
      ZOO_MY_ID: 1
      ZOO_SERVERS: server.1=zookeeper1:2888:3888 server.2=zookeeper2:2888:3888 server.3=zookeeper3:2888:3888
    networks:
      - zookeeper-net

  zookeeper2:
    image: zookeeper:3.7.0
    container_name: zookeeper2
    ports:
      - "2182:2181"
    environment:
      ZOO_MY_ID: 2
      ZOO_SERVERS: server.1=zookeeper1:2888:3888 server.2=zookeeper2:2888:3888 server.3=zookeeper3:2888:3888
    networks:
      - zookeeper-net

  zookeeper3:
    image: zookeeper:3.7.0
    container_name: zookeeper3
    ports:
      - "2183:2181"
    environment:
      ZOO_MY_ID: 3
      ZOO_SERVERS: server.1=zookeeper1:2888:3888 server.2=zookeeper2:2888:3888 server.3=zookeeper3:2888:3888
    networks:
      - zookeeper-net

networks:
  zookeeper-net:
    driver: bridge

配置文件解析

• version: 指定Docker Compose文件的版本。
• services: 定义Zookeeper集群中的每个节点。
  • zookeeper1, zookeeper2, zookeeper3: 分别代表三个Zookeeper节点。
  • image: 使用的Zookeeper镜像版本。
  • container_name: 容器的名称。
  • ports: 将容器的2181端口映射到主机的不同端口（2181, 2182, 2183）。
  • environment: 设置环境变量。
    • ZOO_MY_ID: 每个节点的唯一ID。
    • ZOO_SERVERS: 定义集群中的所有节点及其通信端口。
  • networks: 指定容器使用的网络。

启动Zookeeper集群

在docker-compose.yml文件所在的目录下，运行以下命令启动Zookeeper集群：

docker-compose up -d

-d参数表示在后台运行容器。启动后，你可以使用以下命令查看容器的运行状态：

docker-compose ps

验证集群状态

为了确保Zookeeper集群正常运行，我们可以使用zkCli.sh工具连接到集群并查看状态。

连接到Zookeeper节点

# 连接到zookeeper1
docker exec -it zookeeper1 zkCli.sh -server 127.0.0.1:2181

# 连接到zookeeper2
docker exec -it zookeeper2 zkCli.sh -server 127.0.0.1:2182

# 连接到zookeeper3
docker exec -it zookeeper3 zkCli.sh -server 127.0.0.1:2183

查看集群状态

在zkCli.sh中，输入以下命令查看集群状态：

stat

你应该会看到类似以下的输出，表明集群正常运行：

Zookeeper version: 3.7.0
...
Mode: follower
...

测试集群的高可用性

为了测试集群的高可用性，我们可以模拟一个节点宕机的情况，观察集群是否能够继续正常运行。

停止一个Zookeeper节点

docker-compose stop zookeeper1

查看集群状态

再次使用zkCli.sh连接到剩余的节点，查看集群状态。你应该会看到集群仍然正常运行，并且剩余的节点会自动选举新的Leader。

恢复节点

docker-compose start zookeeper1

恢复节点后，集群会自动重新平衡，确保所有节点都处于正常状态。

清理环境

如果你不再需要这个Zookeeper集群，可以使用以下命令清理环境：

docker-compose down

这将停止并删除所有容器、网络和卷。

总结

通过Docker和Docker Compose，我们可以快速搭建一个高可用的Zookeeper集群。这种方法不仅简化了部署过程，还便于管理和扩展。希望本文能够帮助你顺利搭建自己的Zookeeper集群，并在实际项目中应用。