完成Zookeeper集群部署

一、实验介绍

1.1实验内容

基于Hadoop生态系统的大数据平台之上部署Zookeeper集群,Zookeeper被应用与一些集群上，可以提高集群的可用性。它可以帮助你避免单点故障，使企业大数据平台更加可靠。
本实验采用4台机器搭建Zookeeper集群，其中1台机器作为Leader节点，另外三台机器作为Follower节点。

1.2实验知识点

Zookeeper集群部署
Zookeeper集群验证

1.3实验环境

Zookeeper3.4.6
网易云平台

1.4实验资源

1.5实验步骤清单

部署zookeeper集群（安装ZK、修改ZK配置文件、配置ZK集群）
验证zookeeper集群（启动ZK集群、验证ZK集群）

二、实验架构

三、实验环境准备

进入实验列表，找到Zookeeper，点击开启实验，启动master、slave1及salve2，slave3。

四、实验步骤

4.1部署Zookeeper集群

4.1.1配置hosts文件

#hosts文件末尾加入如下内容(masterip、slave1ip及slave2ip是这三台机器的ip地址
vim /etc/hosts

4.1.2安装Zookeeper软件(master)

#解压到目标路径
tar zxvf /opt/software/package/zookeeper-3.4.6.tar.gz -C /usr/local/

#重命名为zookeeper
mv /usr/local/zookeeper-3.4.6/ /usr/local/zookeeper

4.1.3修改zookeeper配置文件

1、创建server id文件
#在zookeeper文件下新建data和logs目录
mkdir -p /usr/local/zookeeper/data
mkdir –p /usr/local/zookeeper/logs

#创建myid文件内容为1
每台机器的myid文件内容不能重复，并和配置文件里的server相对应1-255即可。
echo 1 > /usr/local/zookeeper/data/myid

2、修改zoo.cfg文件
#复制zoo_sample.cfg命名为zoo.cfg
cp /usr/local/zookeeper/conf/zoo_sample.cfg /usr/local/zookeeper/conf/zoo.cfg

#修改zoo.cfg内容
vim /usr/local/zookeeper/conf/zoo.cfg

initLimit=10
syncLimit=5
clientPort=2181
tickTime=2000
dataDir=/usr/local/zookeeper/data
dataLogDir=/usr/local/zookeeper/logs
server.1=master:2888:3888
server.2=slave1:2888:3888
server.3=slave2:2888:3888
server.4=slave3:2888:3888
1
2
3
4
5
6
7
8
9
10

3、检查环境变量
vim /etc/profile

#配置文件末尾加入如下内容：

export ZOOKEEPER_HOME=/usr/local/zookeeper
export PATH=${ZOOKEEPER_HOME}/bin:${PATH}
1
2

#让环境变量生效
source /etc/profile

4.1.4配置Zookeeper集群

1、同步/usr/local/zookeeper目录文件到slave节点(master)
scp -r /usr/local/zookeeper slave1:/usr/local/
scp -r /usr/local/zookeeper slave2:/usr/local/
scp -r /usr/local/zookeeper slave3:/usr/local/

2、修改slave1、2 myid文件内容
#slave1修改为2
echo 2 >/usr/local/zookeeper/data/myid

#slave2修改为3
echo 3 > /usr/local/zookeeper/data/myid
#slave1修改为4
echo 4 >/usr/local/zookeeper/data/myid

3、同步环境变量
scp /etc/profile slave1:/etc/profile
scp /etc/profile slave2:/etc/profile
scp /etc/profile slave3:/etc/profile

slave1,slave2,slave3
source /etc/profile

4.2验证Zookeeper集群

4.2.1启动Zookeeper集群

#master
zkServer.sh start

#slave1
zkServer.sh start

#slave2
zkServer.sh start

#slave2
zkServer.sh start

4.2.2验证zookeeper集群状态

zkServer.sh status
#master

#slave1

#slave2

#slave3

#验证集群可靠性
#停止slave3中的zk
zkServer.sh stop

#用客户端连接zk
zkCli.sh -server master:2181

五、实验总结

Zookeeper分布式协调技术，主要用来解决分布式环境当中多个进程之间的同步控制，让他们有序的去访问某种临界资源，防止造成"脏数据"的后果。Zookeeper的集群我们可以通俗的理解为，一个有Leader的团队，团队中各个成员的数据都是一致的。团队中的Leader采用选举算法推举，所以可以保证在Leader出现问题的时候，又会选举出新的Leader。