HBase ZooKeeper Distributed 完全分布式安装

styxmx

　　昨天写了HBase 完全分布式 安装配置，其中用到了HBase自带的ZK管理。不过看到帖子上很多说要单独安装zookeeper，于是尝试着安装zookeeper。其实安装zookeeper很简单，关键在zookeeper正常启动并和HBase协同工作，在尝试之前是不知道是否可以行得通，不过再尝试了几个小时之后，终于正常启动了。
　　需要环境：
　　OS:　　    CentOS 5.5   （可以根据自己的需要来使用Linux环境）
　　JDK:　　   1.6.0_32      （JDK 1.6版本的最新版本）
　　hadoop:   Hadoop 1.0.3（目前Hadoop稳定的最新版本）
　　hbase：    HBase 0.92.1（目前HBase稳定的最新版本，至少跟Hadoop1.0.3是兼容的）
　　zookeeper: 3.3.5           （目前ZooKeeper稳定的最新版本）
　　
　　1. 下载zookeeper-3.3.5
　　用hadoop用户下载到/usr/hadoop/路径下并解压（/usr/hadoop是我的hadoop、hbase和zookeeper共同的安装路径）
　　2. 修改zoo.cfg
　　到conf目录下，执行命令：cp zoo_sample.cfg zoo.cfg并做如下修改:
　　dataDir=/usr/hadoop/zookeeper-3.3.5/data
　　dataLogDir=/usr/hadoop/zookeeper-3.3.5/logs
　　#在zoo.cfg文件最后添加如下内容：（根据自己的实际情况进行修改）
　　server.1=192.168.0.2:2888:3888
　　server.2=192.168.0.3:2888:3888
　　server.3=192.168.0.4:2888:3888
　　server.4=192.168.0.5:2888:3888
　　3.添加myid
　　在dataDir路径下，添加myid文件，里面所对应的内容为1、2、3或者4，根据自己在zoo.cfg中指定的id，如自己的ip为192.168.0.2，则myid内容为1
　　4. 将相同的操作对应到其他机器上，注意myid要对应
　　5. 不需要做其他设置，完成了对zookeeper的设置。就是这么简单
　　6. 修改hbase-env.sh
　　不过为了取消HBase使用自己的zk管理，在hbase-env.sh，修改HBASE_MANAGES_ZK=false，其他的HBase配置不需要修改。hbase的其他设置参考HBase 完全分布式 安装配置
　　
　　
　　完成配置，下面开始启动并使用：
　　1. 首先在每个机器上启动zookeeper， bin/zkServer.sh start（zookeeper有自己的算法来选举leader）
　　2. 可以查看状态 bin/zkServer.sh status
　　在不同的机器上使用该命令，其中三台显示follower，一台显示leader


　　3. 如果已经有leader选举出，则启动hbase： bin/start-hbase.sh
　　4. hbase shell使用。参考HBase 完全分布式 安装配置
　　
　　注：
　　可能遇到的问题：

• hbase中服务器时间不同步造成的regionserver启动失败，刚开始我的只启动了一个regionserver，错误原因是节点机的时间和master的时间差距大于30000ms，就是30秒时无法启动服务。之前hadoop没有遇到过这个问题，所以hbase存在系统时间同步的问题，并且误差要再30s以内，手动改了时间，再启动就可以了。还有另外一个方案，就是修改hbase最大时间误差。在hbase-site.xml添加配置 hbase.master.maxclockskew属性，值180000，描述"Time difference of regionserver from master"。