zhangli-s 发表于 2019-1-8 11:50:27

在CentOS上安装ZooKeeper集群

创建用户
  一般我倾向于把需要启动daemon进程,对外提供服务的程序,即服务器类的程序,安装在单独的用户下面。这样可以做到隔离,运维方面,安全性也提高了。
  创建一个新的group,
  $ sudo groupadd zookeeper
  创建一个新的用户,并加入group,
  $ sudo useradd -g zookeeper zookeeper
  给新用户设置密码,
  $ sudo passwd zookeeper
  1. 单机模式(Standalone mode)
单机模式
  单机模式在开发和调试阶段很有用。
  1.1 下载,解压
  $ wgethttp://mirror.bit.edu.cn/apache/zookeeper/zookeeper-3.4.5/zookeeper-3.4.5.tar.gz
  $ tar zxf zookeeper-3.4.5.tar.gz -C ~/local/opt
  1.2 启动
  默认就是单机模式,
  $ mv conf/zoo_sample.cfg conf/zoo.cfg
  $ ./bin/zdServer.sh start
  1.3 使用java 客户端连接ZooKeeper
  $ ./bin/zkCli.sh -server 127.0.0.1:2181
  然后就可以使用各种命令了,跟文件操作命令很类似,输入help可以看到所有命令。
  1.4 关闭
  $ ./bin/zdServer.sh stop
2 分布式模式(Replicated mode)
  在生产环境中,要配置成分布式模式,才能发挥威力。
  ZooKeeper集群一般被称为ZooKeeper ensemble,或者 quorum.
  2.1 准备3台机器
  假设有三台机器,hostname和ip对应关系是:
  192.168.40.107 hadoop107
  192.168.40.104 hadoop104
  192.168.40.108 hadoop108
  ZooKeeper不存在明显的master/slave关系,各个节点都是服务器,leader挂了,会立马从follower中选举一个出来作为leader.
  由于没有主从关系,也不用配置SSH无密码登录了,各个zk服务器是自己启动的,互相之间通过TCP端口来交换数据。
  2.2 修改hadoop107的配置文件conf/zoo.cfg
tickTime=2000 initLimit=10 syncLimit=5 dataDir=/root/hadoop/zookeeper-3.4.6/zookeeperdatadir/data  
dataLogDir=/root/hadoop/zookeeper-3.4.6/zookeeperdatadir/logs
  
clientPort=2181server.1=hadoop107:2888:3888 server.2=hadoop104:2888:3888server.3=hadoop108:2888:3888
  修改完后拷贝到 hadoop104,以及 hadoop108上
  2.3 myid文件
  要在每台机器的dataDir下,新建一个myid文件,里面存放一个数字,用来标识当前主机。
  hadoop107 :$ echo "1" >> /root/hadoop/zookeeper-3.4.6/zookeeperdatadir/data/myid
  hadoop104 :$ echo "2" >> /root/hadoop/zookeeper-3.4.6/zookeeperdatadir/data/myid
  hadoop108 :$ echo "3" >> /root/hadoop/zookeeper-3.4.6/zookeeperdatadir/data/myid
  2.4 启动每台机器
  hadoop107 :$ zookeeper-3.4.6/bin/zkServer.sh
  start
  :$ zookeeper-3.4.6/bin/zkServer.sh
  start
  :$ zookeeper-3.4.6/bin/zkServer.sh start
  因为3个节点的启动是有顺序的,所以在陆续启动三个节点的时候,前面先启动的节点连接未启动的节点的时候会报出一些错误。可以忽略。
  2.5 查看状态
  $ zookeeper-3.4.6/bin/zkServer.sh status

  hadoop107的状态

http://img0.tuicool.com/UnYFBv.png!webhadoop104的状态
http://img0.tuicool.com/maiEjm.png!web
  3 使用java客户端连接ZooKeeper集群
  找一台机器,解压zookeeper压缩包,不用配置,就可以使用java客户端连接ZooKeeper集群中的任意一台服务器了。
  $ ./bin/zkCli.sh -server hadoop104:2181
http://img1.tuicool.com/36RvYj.png!web


页: [1]
查看完整版本: 在CentOS上安装ZooKeeper集群