孤独海岸线 发表于 2015-11-21 13:35:40

hadoop2.5.2+zookeeper3.4.6+hbase0.99.2

  一、hadoop安装参考
  http://blog.iyunv.com/bahaidong/article/details/41865943
  二、zookeeper安装
  用户为hadoop,安装目录为/opt下面
  上传安装文件到/opt下面
  root用户解压
$ tar -zxvf zookeeper-3.4.6.tar.gz
  修改用户及属组
  # chown -R hadoop:hadoop zookeeper-3.4.6
  创建数据文件夹并修改属组
  # mkdir /data/zookeeper
# chown -R hadoop:hadoop /data/zookeeper
# ls -ll /data
总用量 0
drwxr-xr-x 5 mysqlmysql153 12月 23 15:28 mysql
drwxr-xr-x 2 hadoop hadoop   6 12月 24 11:06 zookeeper
#
  切换用户并修改文件zoo.cfg

  # su hadoop
$ cd conf/
$ ls
configuration.xsllog4j.propertieszoo_sample.cfg
$ mv zoo_sample.cfg zoo.cfg
$ vim zoo.cfg


  dataDir=/data/zookeeper#修改数据文件夹自定
server.1=master:2888:3888#添加服务器
server.2=slave1:2888:3888#添加服务器
server.3=slave2:2888:3888#添加服务器
  :wq    #保存并退出
  
  // server.X=A:B:C
  其中X是一个数字,表示这是第几号server.
  A是该server所在的IP地址.
  B配置该server和集群中的leader交换消息所使用的端口.
C配置选举leader时所使用的端口
  进入数据文件夹创建myid为1

  $ cd /data/zookeeper/
$ vim myid
$
.将配置到的zookeeper拷贝到其他电脑(slave1,slave2)上
  $ scp -r zookeeper-3.4.6 root@slave1:/opt/
  修改属组
# chown -R hadoop:hadoop zookeeper-3.4.6
配置环境变量

$ su
密码:
# vim /etc/profile
# . /etc/profile

export ZOOKEEPER_HOME=/opt/zookeeper-3.4.6
export PATH=$PATH:$ZOOKEEPER_HOME/bin

启动,在三台机器上执行

$ bin/zkServer.sh start

判断是否启动成功

$ jps
19358 QuorumPeerMain

或者查看进程

$ ps -aux | grep 'zookeeper'    #有信息则启动成功

最好查看日志

$ tail -f -n 500 zookeeper.out #查看是否报错

关闭

$ bin/zkServer.sh stop


三、修改hadoop配置

1、修改core-site.xml

$ vim core-site.xml

添加

      <!--指定zookeeper地址-->
      <property>
                <name>ha.zookeeper.quorum</name>
                <value>master:2181,slave1:2181,slave2:2181</value>
      </property>

四、安装Hbase

下载解压

# tar -zxvf hbase-0.99.2-bin.tar.gz
修改属组

# chown -R hadoop:hadoop hbase-0.99.2

修改hbase-env.sh

# su hadoop
$ cd hbase-0.99.2/
$ cd conf
$ ls
hadoop-metrics2-hbase.propertieshbase-env.cmdhbase-env.shhbase-policy.xmlhbase-site.xmllog4j.propertiesregionservers
$

$ vim hbase-env.sh

修改

export JAVA_HOME=/usr/java/jdk1.7.0_71   #视安装路径耳钉

export HBASE_MANAGES_ZK=false

修改vim hbase-site.xml

$ vim hbase-site.xml
    <property>
      <name>hbase.rootdir</name>
      <value>hdfs://master:9000/hbase</value>
    </property>
    <property>
      <name>hbase.cluster.distributed</name>
      <value>true</value>
    </property>
    <property>
      <name>hbase.master</name>
      <value>master:60000</value>
    </property>
    <property>
      <name>hbase.master.port</name>
      <value>60000</value>
      <description>The port master should bind to.</description>
    </property>
    <property>
      <name>hbase.zookeeper.quorum</name>
      <value>master,slave1,slave2</value>
    </property>
    <property>
      <name>hbase.zookeeper.property.dataDir</name>
      <value>/data/zookeeper</value>
    </property>

修改regionservers

$ vim regionservers

slave1
slave2

复制到另两台机器slave1与slave2

$ scp -r hbase-0.99.2 root@slave1:/opt/


修改属组

# chown -R hadoop:hadoop hbase-0.99.2/

启动master上的hbase

$ bin/start-hbase.sh

jps查看

$ jps
14594 HMaster

$ jps
14945 Jps
8260 NodeManager
8118 DataNode
13877 QuorumPeerMain
14873 HRegionServer
$
  进入hbase shell
  $ bin/hbase shell

  关闭
  $ bin/stop-hbase.sh
  hbase web界面http://master:16030

  

  
页: [1]
查看完整版本: hadoop2.5.2+zookeeper3.4.6+hbase0.99.2