设为首页 收藏本站
查看: 811|回复: 0

[经验分享] 搭建ZooKeeper集群环境

[复制链接]

尚未签到

发表于 2015-9-6 14:11:11 | 显示全部楼层 |阅读模式
  准备环境 : 至少3个hadoop节点.
  zookeeper概念
1.1 zk可以用来保证数据在zk集群之间的数据的事务性一致。数据不能太大,默认为2mb以下.
  安装zookeeper
2. 如何搭建ZooKeeper服务器集群
2.1 zk服务器机群规模不小于3个节点,要求各服务器之间系统时间要保持一致(保证方法?)。
  



1 date -s 01/04/2015
2 date -s 12:04:20
3 clock -w
  2.2 在hadoop的/opt/目录下,解压缩 tar -zxvf zookeeper-3.4.5.tar.gz。并且设置环境变量 /etc/profile。
2.3 在zk目录下的conf目录下,修改文件cp zoo_sample.cfg zoo.cfg
2.4 编辑该文件,执行vi zoo.cfg




1 修改 dataDir=/opt/zk/data
2 在末尾添加
3  server.0=hadoop0:2888:3888
4  server.1=hadoop1:2888:3888
5  server.2=hadoop2:2888:3888
  2.5 创建文件夹mkdir /opt/zk/data
2.6 在该data目录下,创建文件myid,并且赋值为0
2.7 把zk目录复制到hadoop1和hadoop2中。



1 scp -r /opt/zk hadoop1:/opt/zk
2 scp -r /opt/zk hadoop2:/opt/zk
  2.8 把hadoop1中对应的myid的值修改为1
       把hadoop2中对应的myid的值修改为2
2.9 启动,在三个节点上分别执行命令zkServer.sh start
2.10 验证,在三个节点上分别执行命令zkServer.sh status

  实验: 启动后可以查看日至zookeeper.out文件 tail -f zookeeper.out日志文件
-----------------------------总结---------------------------------------------
  参与election(选举)的节点的模式:
model:
    follower
    leader
结论: 一个节点的伪分布与实际脱离太远. 真实环境中肯定是集群分布.
       运行中当zk Leader节点挂了话,zk会选举一个节点作为Leader节点.
模拟zk保证数据一致问题操作方式:
  命令行操作
  Java API操作(很少用到)
zkCli.sh
  其中zk相当于文件系统的目录结构,保证数据的一致性。
  java 和 shell 脚本都可以操作
分布式应用
补充:zk的节点类型:
  短暂型:ephemeral
  持久型:persistent
  关于更详细的ZooKeeper内容请参考网上更详细的讲解,此内容为以后学习Hadoop基础上的HBase作准备.
  

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-110198-1-1.html 上篇帖子: zookeeper日志清理(zz) 下篇帖子: 分布式协调服务---Zookeeper
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表