zookeeper的安装和使用

文章作者：foochane 

原文链接：https://foochane.cn/article/2019062601.html

zookeeper 数据存储形式 zookeeper 安装 zookeeper 命令行客户端的使用

1 zookeeper 数据存储形式

zookeeper中对用户的数据采用 kv 形式存储

key：是以路径的形式表示的，各 key 之间有父子关系，比如 / 是顶层key

用户建的 key 只能在 / 下作为子节点，比如建一个 key：/aa 这个 key 可以带 value 数据

也可以建一个key：/bb

也可以建多个key：/aa/xx

zookeeper中，对每一个数据key，称作一个znode

2 znode 类型

zookeeper中的 znode 有多种类型：

• 1、PERSISTENT 持久的：创建者就算跟集群断开联系，该类节点也会持久存在与 zk 集群中
• 2、EPHEMERAL 短暂的：创建者一旦跟集群断开联系，zk就会将这个节点删除
• 3、SEQUENTIAL 带序号的：这类节点，zk会自动拼接上一个序号，而且序号是递增的

组合类型：

• PERSISTENT：持久不带序号
• EPHEMERAL：短暂不带序号
• PERSISTENT 且 SEQUENTIAL：持久且带序号
• EPHEMERAL 且 SEQUENTIAL：短暂且带序号

3 安装 zookeeper

解压安装包 zookeeper-3.4.6.tar.gz

修改conf/zoo.cfg

# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial 
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between 
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just 
# example sakes.
dataDir=/usr/local/bigdata/data/zkdata
# the port at which the clients will connect
clientPort=2181
# the maximum number of client connections.
# increase this if you need to handle more clients
#maxClientCnxns=60
#
# Be sure to read the maintenance section of the 
# administrator guide before turning on autopurge.
#
# http://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1
server.1=Master:2888:3888
server.2=Slave01:2888:3888
server.3=Slave02:2888:3888

对 3 台节点，都创建目录 /usr/local/bigdata/data/zkdata

对 3 台节点，在工作目录中生成 myid 文件，但内容要分别为各自的id：1,2,3

Master 上：echo 1 > /usr/local/bigdata/data/zkdata/myid
Slave01 上：echo 2 > /usr/local/bigdata/data/zkdata/myid
Slave02 上：echo 3 > /usr/local/bigdata/data/zkdata/myid

4 启动 zookeeper 集群

zookeeper没有提供自动批量启动脚本，需要手动一台一台地起 zookeeper 进程
在每一台节点上，运行命令：

$ bin/zkServer.sh start

启动后，用 jps 应该能看到一个进程：QuorumPeerMain

查看状态

$ bin/zkServer.sh status

5 编写启动脚本 zkmanage.sh

zookeeper没有提供批量脚本，不能像 hadoop 一样在一台机器上同时启动所有节点，可以自己编写脚本批量启动。

#!/bin/bash
for host in Master Slave01 Slave02
do
echo "${host}:${1}ing....."
ssh $host "source ~/.bashrc;/usr/local/bigdata/zookeeper-3.4.6/bin/zkServer.sh $1"
done

sleep 2

for host in Master Slave01 Slave02
do
ssh $host "source ~/.bashrc;/usr/local/bigdata/zookeeper-3.4.6/bin/zkServer.sh status"
done

• $1 : 指接收第一个参数

运行命令：

sh zkmanage.sh start #启动
sh zkmanage.sh stop  #停止

6 zookeeper 命令行客户端

启动本地客户端：

$ bin/zkCli.sh

启动其他机器的客户端：

$ bin/zkCli.sh -server Master:2181

基本命令:

• 查看帮助：help
• 查看目录：ls /
• 查看节点数据：get /zookeeper
• 插入数据：create / 节点 数据，如：create /aa hello
• 更改某节点数据：set /aa helloworld
• 删除数据：rmr /aa/bb
• 注册监听：get /aa watch –> 数据发生改变会通知；ls /aa watch –> 目录发现改变也会通知