一、ZooKeeper概述
1.Zookeeper简介
- (1)Zookeeper是一个分布式协调服务的开源框架。主要用来解决分布式集群中应用系统的一致性问题
- (2)ZooKeeper本质上是一个分布式的小文件存储系统。提供基于类似于文件系统的目录树方式的数据存储,并且可以对树中的节点进行有效管理。从而用来维护和监控你存储的数据的状态变化。通过监控这些数据状态的变化,从而可以达到基于数据的集群管理
2.Zookeeper特性
- (1)全局数据一致:集群中每个服务器保存一份相同的数据副本,client无论连接到哪个服务器,展示的数据都是一致的,这是最重要的特征
- (2)可靠性:如果消息被其中一台服务器接受,那么将被所有的服务器接受
- (3)顺序性:包括全局有序和偏序两种:全局有序是指如果在一台服务器上消息a在消息b前发布,则在所有Server上消息a都将在消息b前被发布;偏序是指如果一个消息b在消息a后被同一个发送者发布,a必将排在b前面
- (4)数据更新原子性:一次数据更新要么成功(半数以上节点成功),要么失败,不存在中间状态
- (5)实时性:Zookeeper保证客户端将在一个时间间隔范围内获得服务器的更新信息,或者服务器失效的信息
3.Zookeeper集群角色
Leader:
1.Zookeeper集群工作的核心
2.事务请求(写操作)的唯一调度和处理者,保证集群事务处理的顺序性
3.集群内部各个服务器的调度者
4.对于create,setData,delete等有写操作的请求,则需要统一转发给leader处理,
leader需要决定编号、执行操作,这个过程称为一个事务
Follower:
1.处理客户端非事务(读操作)请求,转发事务请求给Leader
2.参与集群Leader选举投票
3.此外,针对访问量比较大的zookeeper集群,还可新增观察者角色
Observer:
1.观察者角色,观察Zookeeper集群的最新状态变化并将这些状态同步过来,其对于非事务请求可以进行独立处理,
对于事务请求,则会转发给Leader服务器进行处理
2.不会参与任何形式的投票只提供非事务服务,通常用于在不影响集群事务处理能力的前提下提升集群的非事务处理能力
二、ZooKeeper安装
-
安装zookeeper的注意事项:
安装前需要安装好jdk 检测集群时间是否同步 检测防火墙是否关闭 检测主机 ip映射有没有配置
下载安装包、解压
下载地址:
CDH版本:http://archive.cloudera.com/cdh5/cdh/5/zookeeper-3.4.5-cdh5.14.0.tar.gz
apache版本:https://archive.apache.org/dist/zookeeper/
1.解压tar包
tar -zxf zookeeper-3.4.5-cdh5.14.0.tar.gz ../servers/
2.配置环境变量
vim /etc/profile.d/zookeeper.sh
export ZOOKEEPER_HOME=/export/servers/zookeeper
export PATH=$PATH:$ZOOKEEPER_HOME/bin
source /etc/profile
3.修改配置文件
cd $ZOOKEEPER_HOME/conf
mv zoo_sample.cfg zoo.cfg
vim zoo.cfg
4.添加myid
创建在 zoo.cfg 中指定的 dataDir 目录
mkdir /export/servers/zookeeper/zkdata
进入到目录
cd /export/servers/zookeeper/zkdata
给当前节点添加 myid
echo 1 > myid
5.分发zookeeper
scp -r zookeeper node02:`pwd`
分发完后根据需求修改 myid 文件中的值大小
6.启动zookeeper
每台节点使用命令 `zkServer.sh start` 进行启动
然后使用命令 `zkServer.sh status` 进行查看状态
三、ZooKeeper Shell
1、客户端连接
运行 `zkCli.sh –server ip` 进入命令行工具
输入help,输出zk shell提示: