wget http://mirrors.cnnic.cn/apache/zookeeper/zookeeper-3.4.5/zookeeper-3.4.5.tar.gz
tar -xzvf zookeeper-3.4.5.tar.gz
cd zookeeper-3.4.5
cp conf/zoo_sample.cfg conf/zoo.cfg
vi conf/zoo.cfg
修改: dataDir=/home/ysc/zookeeper
添加:
server.1=host001:2888:3888
maxClientCnxns=100
mkdir /home/ysc/zookeeper( 注: dataDir 是 zookeeper 的数据目录,需要手动创建 )
echo 1 > /home/ysc/zookeeper/myid
启动服务:
bin/zkServer.sh start
连接服务:
bin/zkCli.sh -server host001:2181
查看服务状态:
bin/zkServer.sh status
hbase 存在系统时间同步的问题,并且误差要再 30s 以内
sudo apt-get install ntp
sudo ntpdate -u 210.72.145.44
HBase 是数据库,会在同一时间使用很多的文件句柄,大多数 linux 系统使用的默认值 1024 是不能满足的,还需要修改 hbase 用户的 nproc ,在压力很大的情况下,如果过低会造成 OutOfMemoryError 异常
sudo vi /etc/security/limits.conf
添加:
ysc soft nproc 32000
ysc hard nproc 32000
ysc soft nofile 32768
ysc hard nofile 32768
sudo vi /etc/pam.d/common-session
添加:
session required pam_limits.so
wget http://mirrors.hust.edu.cn/apache/hbase/hbase-0.94.12/hbase-0.94.12.tar.gz
tar -xzvf hbase-0.94.12.tar.gz
cd hbase-0.94.12
vi conf/hbase-env.sh
追加:
export JAVA_HOME=/home/ysc/jdk1.7.0_40
export HBASE_MANAGES_ZK=false
export HBASE_HEAPSIZE=1000
vi conf/hbase-site.xml
加入:
<property>
<name>hbase.rootdir </name>
<value>hdfs://host001:9000/hbase </value>
</property>
<property>
<name>hbase.cluster.distributed </name>
<value>true </value>
</property>
<property>
<name>hbase.zookeeper.quorum </name>
<value>host001 </value>
</property>
vi conf/regionservers
改 localhost 为 host001
因为 HBase 建立在 Hadoop 之上, Hadoop 使用的 hadoop*.jar 和 HBase 使用的必须一致。所以要将 HBase lib 目录下的 hadoop*.jar 替换成 Hadoop 里面的那个,防止版本冲突。
cp /home/ysc/hadoop-1.2.1/hadoop-core-1.2.1.jar /home/ysc/hbase-0.94.12/lib
rm /home/ysc/hbase-0.94.12/lib/hadoop-core-1.0.4.jar
启动 hadoop 并创建目录
hadoop fs -mkdir /hbase
sudo vi /etc/profile
增加:
export PATH=$PATH:/home/ysc/hbase-0.94.12/bin
source /etc/profile
启动初始 HBase 集群:
start-hbase.sh
web 界面
http://host001:60010
http://host001:60030
停止 HBase 集群:
stop-hbase.sh
启动额外备份主服务器,可以启动到 9 个备份服务器 ( 总数 10 个 ) :
local-master-backup.sh start 1
local-master-backup.sh start 2 3
启动更多 regionservers, 支持到 99 个额外 regionservers( 总 100 个 ) :
local-regionservers.sh start 1
local-regionservers.sh start 2 3 4 5
停止备份主服务器 :
cat /tmp/hbase-ysc-1-master.pid | xargs kill -9
停止单独 regionserver :
local-regionservers.sh stop 1
使用 HBase 命令行模式 :
hbaseshell
命令演示:
创建表 Person ,列族 basic 和 detail
create 'Person', 'basic', 'detail'
看有哪些表:
list
看是否有 person 表:
list 'person'
增加数据,动态增加列:
数据 1 :
put 'Person','533001198510125838', 'basic:idcard', '533001198510125838'
put 'Person', '533001198510125838','basic:name', ' 章子怡 '
put 'Person','533001198510125838', 'detail:age', '25'
数据 2 :
put 'Person', '533001198510125837','basic:idcard', '533001198510125837'
put 'Person','533001198510125837', 'basic:name', ' 杨尚川 '
put 'Person','533001198510125837', 'detail:age', '22'
查询整条数据:
get 'Person','533001198510125838'
get 'Person','533001198510125837'
查询单列数据:
get 'Person', '533001198510125837','basic:idcard'
查询多列数据:
get 'Person', '533001198510125837','basic:idcard', 'detail:age'
查询全部数据:
scan 'Person'
删除表:
disable 'Person'
drop 'Person'
运维网声明
1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网 享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com