01.ZooKeeper安装和介绍
内容导读
互联网集市收集整理的这篇技术教程文章主要介绍了01.ZooKeeper安装和介绍，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含9829字，纯文字阅读大概需要15分钟。
内容图文
1.ZooKeeper安装和启动
1.下载解压ZooKeeper
ZooKeeper官方地址：http://zookeeper.apache.org/ 下载当前稳定版本：zookeeper-3.4.6.tar.gz 解压如下：
-
[
lizhiwei@localhost
ZooKeeper
]
$ tar
-
zxvf zookeeper
-
3.4
.
6
-
......
-
[
lizhiwei@localhost
ZooKeeper
]
$ ll
-
total
17292
-
drwxr
-
xr
-
x
.
10
lizhiwei lizhiwei
4096
Feb
20
2014
zookeeper
-
3.4
.
6
-
-
rwxrwxr
-
x
.
1
lizhiwei lizhiwei
17699306
Sep
13
23
:
25
zookeeper
-
3.4
.
6.tar
.
gz
-
[
lizhiwei@localhost
ZooKeeper
]
$ cd zookeeper
-
3.4
.
6
-
[
lizhiwei@localhost zookeeper
-
3.4
.
6
]
$ ll
-
total
1552
-
drwxr
-
xr
-
x
.
2
lizhiwei lizhiwei
4096
Oct
19
00
:
56
bin
-
-
rw
-
rw
-
r
--.
1
lizhiwei lizhiwei
82446
Feb
20
2014
build
.
xml
-
-
rw
-
rw
-
r
--.
1
lizhiwei lizhiwei
80776
Feb
20
2014
CHANGES
.
txt
-
drwxr
-
xr
-
x
.
2
lizhiwei lizhiwei
4096
Oct
19
00
:
52
conf
-
drwxr
-
xr
-
x
.
10
lizhiwei lizhiwei
4096
Feb
20
2014
contrib
-
drwxr
-
xr
-
x
.
2
lizhiwei lizhiwei
4096
Feb
20
2014
dist
-
maven
-
drwxr
-
xr
-
x
.
6
lizhiwei lizhiwei
4096
Feb
20
2014
docs
-
-
rw
-
rw
-
r
--.
1
lizhiwei lizhiwei
1953
Feb
20
2014
ivysettings
.
xml
-
-
rw
-
rw
-
r
--.
1
lizhiwei lizhiwei
3375
Feb
20
2014
ivy
.
xml
-
drwxr
-
xr
-
x
.
4
lizhiwei lizhiwei
4096
Feb
20
2014
lib
-
-
rw
-
rw
-
r
--.
1
lizhiwei lizhiwei
11358
Feb
20
2014
LICENSE
.
txt
-
-
rw
-
rw
-
r
--.
1
lizhiwei lizhiwei
170
Feb
20
2014
NOTICE
.
txt
-
-
rw
-
rw
-
r
--.
1
lizhiwei lizhiwei
1770
Feb
20
2014
README_packaging
.
txt
-
-
rw
-
rw
-
r
--.
1
lizhiwei lizhiwei
1585
Feb
20
2014
README
.
txt
-
drwxr
-
xr
-
x
.
5
lizhiwei lizhiwei
4096
Feb
20
2014
recipes
-
drwxr
-
xr
-
x
.
8
lizhiwei lizhiwei
4096
Feb
20
2014
src
-
-
rw
-
rw
-
r
--.
1
lizhiwei lizhiwei
1340305
Feb
20
2014
zookeeper
-
3.4
.
6.jar
-
-
rw
-
rw
-
r
--.
1
lizhiwei lizhiwei
836
Feb
20
2014
zookeeper
-
3.4
.
6.jar
.
asc
-
-
rw
-
rw
-
r
--.
1
lizhiwei lizhiwei
33
Feb
20
2014
zookeeper
-
3.4
.
6.jar
.
md5
-
-
rw
-
rw
-
r
--.
1
lizhiwei lizhiwei
41
Feb
20
2014
zookeeper
-
3.4
.
6.jar
.
sha12
2.
ZooKeeper配置说明
进入conf目录配置ZooKeeper启动，在你执行启动脚本之前，还有几个基本的配置项需要配置一下，Zookeeper 的配置文件在 conf 目录下，这个目录下有 zoo_sample.cfg 和 log4j.properties，你需要做的就是将 zoo_sample.cfg 改名为 zoo.cfg，因为 Zookeeper在启动时会找这个文件作为默认配置文件。
-
[
lizhiwei@localhost zookeeper
-
3.4
.
6
]
$ cd conf
/
-
[
lizhiwei@localhost conf
]
$ ll
-
total
16
-
-
rw
-
rw
-
r
--.
1
lizhiwei lizhiwei
535
Feb
20
2014
configuration
.
xsl
-
-
rw
-
rw
-
r
--.
1
lizhiwei lizhiwei
2161
Feb
20
2014
log4j
.
properties
-
-
rw
-
rw
-
r
--.
1
lizhiwei lizhiwei
922
Oct
19
00
:
52
zoo
.
cfg
-
-
rw
-
rw
-
r
--.
1
lizhiwei lizhiwei
922
Feb
20
2014
zoo_sample
.
cfg
配置文件部分解释如下：
-
#这个时间是作为 Zookeeper 服务器之间或客户端与服务器之间维持心跳的时间间隔，也就是每个 tickTime 时间就会发送一个心跳。
-
tickTime
=
2000
-
-
#顾名思义就是 Zookeeper 保存数据的目录，默认情况下，Zookeeper 将写数据的日志文件也保存在这个目录里。
-
dataDir
=/
tmp
/
zookeeper
-
-
#这个端口就是客户端连接 Zookeeper 服务器的端口，Zookeeper 会监听这个端口，接受客户端的访问请求。
-
clientPort
=
2181
-
-
#这个配置项是用来配置 Zookeeper 接受客户端（这里所说的客户端不是用户连接 Zookeeper 服务器的客户端，
-
#而是 Zookeeper 服务器集群中连接到 Leader 的 Follower 服务器）初始化连接时最长能忍受多少个心跳时间间隔数。
-
#当已经超过 10 个心跳的时间（也就是 tickTime）长度后 Zookeeper 服务器还没有收到客户端的返回信息，
-
#那么表明这个客户端连接失败。总的时间长度就是 10*2000=20 秒
-
initLimit
=
10
-
-
#这个配置项标识 Leader 与 Follower 之间发送消息，请求和应答时间长度，最长不能超过多少个 tickTime 的时间长度，总的时间长度就是 5*2000=10 秒
-
syncLimit
=
5
-
-
#这个操作将限制连接到 ZooKeeper 的客户端的数量，限制并发连接的数量，它通过 IP 来区分不同的客户端。此配置选项可以用来阻止某些类别的 Dos 攻击。将它设置为 0 或者忽略而不进行设置将会取消对并发连接的限制。
-
maxClientCnxns
=
60
-
-
#这个参数指定了需要保留事务日志和快照文件的数目。默认是保留3个。
-
autopurge
.
snapRetainCount
=
3
-
-
#ZK提供了自动清理事务日志和快照文件的功能，这个参数指定了清理频率，单位是小时，
-
#需要配置一个1或更大的整数，默认是0，表示不开启自动清理功能，但可以运行bin/zkCleanup.sh来手动清理zk日志
-
autopurge
.
purgeInterval
=
1
3.启动
Zookeeper服务并连接
由于Zookeeper支持集群，所以配置可分为如下
-
#单机配置：
-
tickTime
=
2000
-
dataDir
=
D
:/
devtools
/
zookeeper
-
3.2
.
2
/
build
-
clientPort
=
2181
-
-
#集群配置：
-
initLimit
=
5
-
syncLimit
=
2
-
server
.
1
=
192.168
.
211.1
:
2888
:
3888
-
server
.
2
=
192.168
.
211.2
:
2888
:
3888
Zookeeper启动脚本在目录下，如下：
-
[
lizhiwei@localhost zookeeper
-
3.4
.
6
]
$ cd bin
/
-
[
lizhiwei@localhost bin
]
$ ll
-
total
44
-
-
rwxr
-
xr
-
x
.
1
lizhiwei lizhiwei
238
Feb
20
2014
README
.
txt
-
-
rwxr
-
xr
-
x
.
1
lizhiwei lizhiwei
1937
Feb
20
2014
zkCleanup
.
sh
-
-
rwxr
-
xr
-
x
.
1
lizhiwei lizhiwei
1049
Feb
20
2014
zkCli
.
cmd
-
-
rwxr
-
xr
-
x
.
1
lizhiwei lizhiwei
1534
Feb
20
2014
zkCli
.
sh
-
-
rwxr
-
xr
-
x
.
1
lizhiwei lizhiwei
1333
Feb
20
2014
zkEnv
.
cmd
-
-
rwxr
-
xr
-
x
.
1
lizhiwei lizhiwei
2696
Feb
20
2014
zkEnv
.
sh
-
-
rwxr
-
xr
-
x
.
1
lizhiwei lizhiwei
1084
Feb
20
2014
zkServer
.
cmd
-
-
rwxr
-
xr
-
x
.
1
lizhiwei lizhiwei
5742
Feb
20
2014
zkServer
.
sh
单机启动Zookeeper如下(zkServer.sh start)：
-
[
lizhiwei@localhost bin
]
$
./
zkServer
.
sh
-
JMX enabled by default
-
Using
config
:
/
home
/
lizhiwei
/
SoftWare
/
ZooKeeper
/
zookeeper
-
3.4
.
6
/
bin
/../
conf
/
zoo
.
cfg
-
Usage
:
./
zkServer
.
sh
{
start
|
start
-
foreground
|
stop
|
restart
|
status
|
upgrade
|
print
-
cmd
}
-
[
lizhiwei@localhost bin
]
$
./
zkServer
.
sh start
-
JMX enabled by default
-
Using
config
:
/
home
/
lizhiwei
/
SoftWare
/
ZooKeeper
/
zookeeper
-
3.4
.
6
/
bin
/../
conf
/
zoo
.
cfg
-
Starting
zookeeper
...
STARTED
连接并简单操作Zookeeper如下(zkCli.sh -server 127.0.0.1:2181)：
-
[
lizhiwei@localhost bin
]
$
./
zkCli
.
sh
-
server
127.0
.
0.1
:
2181
-
Connecting
to
127.0
.
0.1
:
2181 ......
-
[
zk
:
127.0
.
0.1
:
2181
(
CONNECTED
)
0
]
help
-
ZooKeeper
-
server host
:
port cmd args
-
connect host
:
port
-
get path
[
watch
]
-
ls path
[
watch
]
-
set
path data
[
version
]
-
rmr path
-
delquota
[-
n
|-
b
]
path
-
quit
-
printwatches on
|
off
-
create
[-
s
]
[-
e
]
path data acl
-
stat path
[
watch
]
-
close
-
ls2 path
[
watch
]
-
history
-
listquota path
-
setAcl path acl
-
getAcl path
-
sync path
-
redo cmdno
-
addauth scheme auth
-
delete path
[
version
]
-
setquota
-
n
|-
b val path
-
[
zk
:
127.0
.
0.1
:
2181
(
CONNECTED
)
1
]
ls
/
-
[
testRootPath
,
zookeeper
]
-
[
zk
:
127.0
.
0.1
:
2181
(
CONNECTED
)
2
]
get
/
zookeeper
-
-
cZxid
=
0x0
-
ctime
=
Wed
Dec
31
16
:
00
:
00
PST
1969
-
mZxid
=
0x0
-
mtime
=
Wed
Dec
31
16
:
00
:
00
PST
1969
-
pZxid
=
0x0
-
cversion
=
-
1
-
dataVersion
=
0
-
aclVersion
=
0
-
ephemeralOwner
=
0x0
-
dataLength
=
0
-
numChildren
=
1
-
[
zk
:
127.0
.
0.1
:
2181
(
CONNECTED
)
3
]
操作说明：
(1)create：创建路径结点。
(2)ls：查看路径下的所有结点。
(3)get：获得结点上的值。
(4)set：修改结点上的值。
(5)delete：删除结点。
2.ZooKeeper数据模型
1.ZooKeeper数据模型图
Zookeeper 会维护一个具有层次关系的数据结构，它非常类似于一个标准的文件系统，如下图
2.
ZooKeeper数据模型
特点
Zookeeper 这种数据结构有如下这些特点：
- 每个子目录项如 NameService 都被称作为 znode，这个 znode 是被它所在的路径唯一标识，如 Server1 这个 znode 的标识为 /NameService/Server1
- znode 可以有子节点目录，并且每个 znode 可以存储数据，注意 EPHEMERAL 类型的目录节点不能有子节点目录
- znode 是有版本的，每个 znode 中存储的数据可以有多个版本，也就是一个访问路径中可以存储多份数据
- znode 可以是临时节点，一旦创建这个 znode 的客户端与服务器失去联系，这个 znode 也将自动删除，Zookeeper 的客户端和服务器通信采用长连接方式，每个客户端和服务器通过心跳来保持连接，这个连接状态称为 session，如果 znode 是临时节点，这个 session 失效，znode 也就删除了
- znode 的目录名可以自动编号，如 App1 已经存在，再创建的话，将会自动命名为 App2
- znode 可以被监控，包括这个目录节点中存储的数据的修改，子节点目录的变化等，一旦变化可以通知设置监控的客户端，这个是 Zookeeper 的核心特性，Zookeeper 的很多功能都是基于这个特性实现的，后面在典型的应用场景中会有实例介绍
3.ZooKeeper的应用场景
1.Zookeeper总体结构
Zookeeper服务自身组成一个集群(2n+1个服务允许n个失效)。Zookeeper服务有两个角色，一个是leader，负责写服务和数据同步，剩下的是follower，提供读服务，leader失效后会在follower中重新选举新的leader。Zookeeper逻辑图如下，
集群特性：
- 客户端可以连接到每个server，每个server的数据完全相同。
- 每个follower都和leader有连接，接受leader的数据更新操作。
- Server记录事务日志和快照到持久存储。
- 大多数server可用，整体服务就可用。
Zookeeper特点
- 顺序一致性：按照客户端发送请求的顺序更新数据。
- 原子性：更新要么成功，要么失败，不会出现部分更新。
- 单一性 ：无论客户端连接哪个server，都会看到同一个视图。
- 可靠性：一旦数据更新成功，将一直保持，直到新的更新。
- 及时性：客户端会在一个确定的时间内得到最新的数据。
Zookeeper运用场景
- 统一命名服务
- 配置管理
- 集群管理
- 共享锁
- 队列管理
下面分别介绍这些应用场景。
2.
统一命名服务
分布式应用中，通常需要有一套完整的命名规则，既能够产生唯一的名称又便于人识别和记住，通常情况下用树形的名称结构是一个理想的选择，树形的名称结构是一个有层次的目录结构，既对人友好又不会重复。说到这里你可能想到了 JNDI，没错 Zookeeper 的 Name Service 与 JNDI 能够完成的功能是差不多的，它们都是将有层次的目录结构关联到一定资源上，但是 Zookeeper 的 Name Service 更加是广泛意义上的关联，也许你并不需要将名称关联到特定资源上，你可能只需要一个不会重复名称，就像数据库中产生一个唯一的数字主键一样。
Name Service 已经是 Zookeeper 内置的功能，你只要调用 Zookeeper 的 API 就能实现。如调用 create 接口就可以很容易创建一个目录节点。
3.配置管理
配置的管理在分布式应用环境中很常见，例如同一个应用系统需要多台 PC Server 运行，但是它们运行的应用系统的某些配置项是相同的，如果要修改这些相同的配置项，那么就必须同时修改每台运行这个应用系统的 PC Server，这样非常麻烦而且容易出错。
像这样的配置信息完全可以交给 Zookeeper 来管理，将配置信息保存在 Zookeeper 的某个目录节点中，然后将所有需要修改的应用机器监控配置信息的状态，一旦配置信息发生变化，每台应用机器就会收到 Zookeeper 的通知，然后从 Zookeeper 获取新的配置信息应用到系统中。
4.集群管理
Zookeeper 能够很容易的实现集群管理的功能，如有多台 Server 组成一个服务集群，那么必须要一个“总管”知道当前集群中每台机器的服务状态，一旦有机器不能提供服务，集群中其它集群必须知道，从而做出调整重新分配服务策略。同样当增加集群的服务能力时，就会增加一台或多台 Server，同样也必须让“总管”知道。
Zookeeper 不仅能够帮你维护当前的集群中机器的服务状态，而且能够帮你选出一个“总管”，让这个总管来管理集群，这就是 Zookeeper 的另一个功能 Leader Election。
它们的实现方式都是在 Zookeeper 上创建一个 EPHEMERAL 类型的目录节点，然后每个 Server 在它们创建目录节点的父目录节点上调用 getChildren(String path, boolean watch) 方法并设置 watch 为 true，由于是 EPHEMERAL 目录节点，当创建它的 Server 死去，这个目录节点也随之被删除，所以 Children 将会变化，这时 getChildren上的 Watch 将会被调用，所以其它 Server 就知道已经有某台 Server 死去了。新增 Server 也是同样的原理。
Zookeeper 如何实现 Leader Election，也就是选出一个 Master Server。和前面的一样每台 Server 创建一个 EPHEMERAL 目录节点，不同的是它还是一个 SEQUENTIAL 目录节点，所以它是个 EPHEMERAL_SEQUENTIAL 目录节点。之所以它是 EPHEMERAL_SEQUENTIAL 目录节点，是因为我们可以给每台 Server 编号，我们可以选择当前是最小编号的 Server 为 Master，假如这个最小编号的 Server 死去，由于是 EPHEMERAL 节点，死去的 Server 对应的节点也被删除，所以当前的节点列表中又出现一个最小编号的节点，我们就选择这个节点为当前 Master。这样就实现了动态选择 Master，避免了传统意义上单 Master 容易出现单点故障的问题。
5.共享锁
共享锁在同一个进程中很容易实现，但是在跨进程或者在不同 Server 之间就不好实现了。Zookeeper 却很容易实现这个功能，实现方式也是需要获得锁的 Server 创建一个 EPHEMERAL_SEQUENTIAL 目录节点，然后调用 getChildren方法获取当前的目录节点列表中最小的目录节点是不是就是自己创建的目录节点，如果正是自己创建的，那么它就获得了这个锁，如果不是那么它就调用 exists(String path, boolean watch) 方法并监控 Zookeeper 上目录节点列表的变化，一直到自己创建的节点是列表中最小编号的目录节点，从而获得锁，释放锁很简单，只要删除前面它自己所创建的目录节点就行了。
6.队列管理
Zookeeper 可以处理两种类型的队列：
1.当一个队列的成员都聚齐时，这个队列才可用，否则一直等待所有成员到达，这种是同步队列。
2.队列按照 FIFO 方式进行入队和出队操作，例如实现生产者和消费者模型。
同步队列用 Zookeeper 实现的实现思路如下：
创建一个父目录 /synchronizing，每个成员都监控标志（Set Watch）位目录 /synchronizing/start 是否存在，然后每个成员都加入这个队列，加入队列的方式就是创建 /synchronizing/member_i 的临时目录节点，然后每个成员获取 / synchronizing 目录的所有目录节点，也就是 member_i。判断 i 的值是否已经是成员的个数，如果小于成员个数等待 /synchronizing/start 的出现，如果已经相等就创建 /synchronizing/start。用下面的流程图更容易理解：
-------------------------------------------------------------------------------------------------------------------------------
原文：http://www.cnblogs.com/LiZhiW/p/4893386.html
内容总结
以上是互联网集市为您收集整理的01.ZooKeeper安装和介绍全部内容，希望文章能够帮你解决01.ZooKeeper安装和介绍所遇到的程序开发问题。 如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。
内容备注
版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。
内容手机端
扫描二维码推送至手机访问。
来源：【匿名】