Docker搭建Zookeeper集群

大家好,我是程序员小罗,这是我的技术学习笔记。

起因

由于最近在学习zookeeper的原理,所以需要在安装一个集群来实验一些特性加深理解。

但是问题来了,我们作为个人学习者,要搭建集群又没有那么多机器,要么就是搭建伪集群,或者就是需要安装一个虚拟机软件(比如vmWare),装多个虚拟机。 这两种方法我之前都试过,都不太理想,一个需要改端口,一种需要安装很多虚拟机,而且换了电脑也不好迁移。每次都得搞重复的配置,实现是太令人烦恼了;

目标

综上,上述的痛点,都不是我们愿意做的。接下来,就要介绍今天我用的神器:Docker

使用Docker 基本上不用我们装环境之类的配置,比如安装 jdk。现在我们直接可以从镜像仓库拉别人制作好的镜像,简直不要太方便,直接运行即可。

今天我要搭建的是一个由四台 zk 构成的 zk 集群,其中一台为 Leader,两台 Follower,一台 Observer。

talk is cheap,show me your code, 接着往下看吧!


实战

不管你现在用的windows 还是linux 系统,首先你需要安装好Docker环境。 这里就不在叙述了,官网下载安装即可。

如果对Docker 基本操作不熟悉的话,可以看我之前写的 Docker入门(镜像、容器、仓库)

PS: 本次所制作的镜像,可以直接保存到自己的私服,以后随时随地直接拉取运行即可。一次制作,到处运行

私服的搭建也可以看我之前写的Docker入门。

获取镜像

docker pull zookeeper:3.4.11 这里我选择了3.4.11 版本。

设置docker固定ip

因为我们要搭建的是集群环境,所以ip地址必须固定,因此需要自定义一种网络类型。

创建自定义网络类型,并且指定网段

sudo docker network create --subnet=192.168.0.0/24 staticnet

通过docker network ls可以查看到网络类型中多了一个 staticnet

使用新的网络类型创建并启动容器

chong@L MINGW64 ~
$ docker run --name zookeeper-1 --restart always --net staticnet --ip 192.168.0.10 -d zookeeper:3.4.11
61a331b2584b6ef949e2183892c5a73a2e214b7071d4879993f7cbba41c836ed

通过docker inspect可以查看容器 ip为192.168.0.10,关闭容器并重启,发现容器ip并未发生改变。

进入容器进行配置

由于容器在后台运行,因此我们需要进入容器,有三种方式,有兴趣的可以看我之前写的 Docker入门(镜像、容器、仓库)

$ docker exec -ti 61a bash   # 61a为容器id

登入后,我们只需要做2件事:

  1. 修改zoo.cfg

在 zoo.cfg 文件中添加 zk 集群节点列表

bash-4.4# vi /conf/zoo.cfg
clientPort=2181
dataDir=/data
dataLogDir=/datalog
tickTime=2000
initLimit=5
syncLimit=2
maxClientCnxns=60
server.1=192.168.0.10:2888:3888
server.2=192.168.0.11:2888:3888
server.3=192.168.0.12:2888:3888
server.4=192.168.0.13:2888:3888:observer
  1. 创建 myid 文件

在一步的zoo.cfg文件中我们可以看到dataDir的路径,在/data 目录中创建表示当前主机编号的 myid 文件。该主机编号要与 zoo.cfg 文件中设置的编号一致。

bash-4.4# echo 1 > /data/myid

保存修改后的镜像

因为我们上面对正在运行的容器做了三点修改,这也正是我们需要的集群配置,所以我们要将这个容器制作成镜像,如下操作:

$ docker commit -m "create zk1" -a "coderluo" 61a zookeeper-1:3.4.11
sha256:455b27d32c83365790b7b6eff7d58021556858390d28d27b07aca206e83c507c

chong@L MINGW64 ~
$ docker images
REPOSITORY                   TAG                 IMAGE ID            CREATED             SIZE
zookeeper-1                  3.4.11              455b27d32c83        8 seconds ago       146MB
39.108.186.135:5000/ubuntu   v1                  a2a15febcdf3        13 days ago         64.2MB
zookeeper                    3.4.11              56d414270ae3        19 months ago       146MB

使用docekr commit 进行基于已有的镜像进行创建,我的上一篇Docker入门中也有写。然后通过docker images 查看到zookeeper-1 这个镜像已经存在了。

到这里一台镜像已经制作好了,接下来就是一样的事情重复干几遍:

  • 进入容器
  • 修改myid
  • 保存修改制作为新镜像

查询容器id

$ docker ps -a
CONTAINER ID        IMAGE               COMMAND                  CREATED             STATUS              PORTS                          NAMES
61a331b2584b        zookeeper:3.4.11    "/docker-entrypoint.…"   About an hour ago   Up 12 minutes       2181/tcp, 2888/tcp, 3888/tcp   zookeeper-1

进入容器执行修改(第2,3台都执行此操作):

$ docker exec -ti 61a bash
bash-4.4# echo 2 > /data/myid
bash-4.4# cat /data/myid
2
bash-4.4# exit
exit

创建新的镜像(第2,3台都执行此操作):

$ docker commit -m "create zookeeper-2" -a "coderluo" 61a zookeeper-2:3.4.11
sha256:c775aff13fd3b2fc30066f6fc5f8a5ee429be3052b790c8e02cf74b5e4bf71e9

完成后,这里要注意,第四台主机因为我们要让他作为Observer,所以他需要在zoo.cfg中增加一行配置:

peerType=observer

1

然后在执行上面和第2,3台机器一样的操作。

最后我们查看当前所有的镜像,不出意外的话下图展示的你也都有了:

2

到这里,今天的学习就要接近尾声了,最后一步

依次启动4台zookeeper实例

直接按照我下面的命令一次执行即可:

chong@L MINGW64 ~
$  docker run --name zookeeper-1 --restart always --net staticnet --ip 192.168.0.10 -d zookeeper-1:3.4.11 #第一台
35acd4f798c8154047f30af184145d8b4124ec8a4e8e4a549db0d333a1c33785
chong@L MINGW64 ~
$  docker run --name zookeeper-2 --restart always --net staticnet --ip 192.168.0.11 -d zookeeper-2:3.4.11 #第二台
7ef30c809183dc223e42e891880ad8c85381fac11d15da5c0455400b915c77bb

chong@L MINGW64 ~
$  docker run --name zookeeper-3 --restart always --net staticnet --ip 192.168.0.12 -d zookeeper-3:3.4.11 #第三台
f138451dd21ce5217eb6e4472116b3ffa32e9ea2afbcaae44ee4d633040299f9
chong@L MINGW64 ~
$  docker run --name zookeeper-4 --restart always --net staticnet --ip 192.168.0.13 -d zookeeper-4:3.4.11 #第四台
c662d3438db74414c9b0178bc756b6cf96cd0458cbc226e8854da4a06337d656

查看运行状态:

$ docker ps -a
CONTAINER ID        IMAGE                COMMAND                  CREATED              STATUS              PORTS                          NAMES
c662d3438db7        zookeeper-4:3.4.11   "/docker-entrypoint.…"   6 seconds ago        Up 4 seconds        2181/tcp, 2888/tcp, 3888/tcp   zookeeper-4
f138451dd21c        zookeeper-3:3.4.11   "/docker-entrypoint.…"   24 seconds ago       Up 23 seconds       2181/tcp, 2888/tcp, 3888/tcp   zookeeper-3
7ef30c809183        zookeeper-2:3.4.11   "/docker-entrypoint.…"   41 seconds ago       Up 39 seconds       2181/tcp, 2888/tcp, 3888/tcp   zookeeper-2
35acd4f798c8        zookeeper-1:3.4.11   "/docker-entrypoint.…"   About a minute ago   Up About a minute   2181/tcp, 2888/tcp, 3888/tcp   zookeeper-1

总结

至此我们今天要搭建的四台zk实例组成的集群已经搞定了,有没有感觉到有了Docker 简直是神奇啊,只有亲身体会下才能感觉他的便利。

欢迎在留言区讨论,今天就到这里啦,可以愉快的学习第zk的底层原理了。

Docker 入门基础知识,可以看我整理的这篇文章:

Docker入门(镜像、容器、仓库)


   转载规则


《Docker搭建Zookeeper集群》 coderluo 采用 知识共享署名 4.0 国际许可协议 进行许可。
 上一篇
CSAPP-1:计算机系统漫游 CSAPP-1:计算机系统漫游
本周开始了CSAPP的读书计划,规划已久,终于要开动了。之前自己也零散看过,不得不说这本书有难度都没坚持下去,这次跟着码农翻身小伙伴们一起打卡这本书。 CSAPP这本书不用多说绝对经典中的经典,如果想成为一名知道计算机硬件和软件如何工作
2019-08-30
下一篇 
Docker入门 Docker入门
镜像 镜像是Docker运行容器的前提 获取镜像docker pull NAME[:TAG] // 不指定TAG,默认选择latest标签 运行镜像docekr run -t -i ubuntu /bin/bash 查看镜像信息docke
2019-08-17
  目录