Hadoop初学指南(10)--ZooKeeper的集群安装和操作

fjqzyc

　　本文简单介绍了ZooKeeper的基本知识。
　　(1)概述
　　①什么是ZooKeeper？
　　Zookeeper 是 Google 的 Chubby一个开源的实现，是 Hadoop 的分布式协调服务
　　它包含一个简单的原语集，分布式应用程序可以基于它实现同步服务，配置维护和命名服务等
　　②Zookeeper的角色

　　③为什么使用Zookeeper？
　　大部分分布式应用需要一个主控、协调器或控制器来管理物理分布的子进程（如资源、任务分配等）
　　目前，大部分应用需要开发私有的协调程序，缺乏一个通用的机制
　　协调程序的反复编写浪费，且难以形成通用、伸缩性好的协调器
　　ZooKeeper：提供通用的分布式锁服务，用以协调分布式应用
　　④Zookeeper的特性
　　Zookeeper是简单的
　　Zookeeper是富有表现力的
　　Zookeeper具有高可用性
　　Zookeeper采用松耦合交互方式
　　Zookeeper是一个资源库
　　(2)安装
　　①解压
　　命令：tar -zvxf zookeeper-3.4.5.tar.gz
　　②为了以后操作方便重命名解压后文件夹
　　命令：mv zookeeper-3.4.5 zk
　　③设置环境变量
　　命令：vim /etc/profile
　　增加ZOOKEEPER_HOME并修改PATH

　　修改完成之后重新加载配置：
　　source /etc/profile
　　④修改zookeeper配置文件
　　修改在zk/conf下zoo_sample.cfg为zoo.cfg，并编辑该文件

　　其中dataDir表示集群的数据，server.后面的编号表示zookeeper集群主机的编号，hadoop0是我的主机名，2888与3888是端口，2888是zookeeper角色的端口，3888是zookeeper传输数据的端口。
　　⑤创建文件夹/usr/local/zk/data，并在文件夹中创建myid文件，内容为当前主机对应的zookeeper集群编号，例如当前主机是hadoop0，myid文件内容如下：

　　⑥同理修改其他主机上的文件，也可以用scp进行复制。
　　⑦启动zookeeper
　　进入bin目录下执行启动命令，命令如下：
　　zkServer.sh start

　　此时，hadoop0节点的zookeeper集群启动，而后可以看一下zookeeper.out文件，内容如下：

　　可以看到集群已经识别myid文件，而由于其他节点的集群没有启动所以会报错，此时只需要把其他节点中的集群启动即可。
　　(3)Zookeeper的角色
　　领导者（leader），负责进行投票的发起和决议，更新系统状态
　　学习者（learner），包括跟随者（follower）和观察者（observer），follower用于接受客户端请求并想客户端返回结果，在选主过程中参与投票
　　Observer可以接受客户端连接，将写请求转发给leader，但observer不参加投票过程，只同步leader的状态，observer的目的是为了扩展系统，提高读取速度
　　客户端（client），请求发起方
　　启动集群后，可以使用zkServer.sh status来查看角色

　　(3)zookeeper的shell基本操作
　　使用zkCli.sh可以进入zookeeper的shell操作端

　　键入help(任意不支持的命令即可)可以查看支持的命令：

　　使用ls /查看目录，同时也可以看到zookeeper会自动累加操作命令数：

　　创建节点并查看：

　　此时，如果用其他节点登录，可以看到数据已经同步到集群中了。