Hbase的安装以及配置

Hbase admin 2年前 (2018-10-09) 154次浏览 0个评论 扫描二维码

前置条件
jdk1.8
Hadoop 2.6
Zookeeper 3.4.5

一、安装Zookeeper

单节点zookeeper可以参考
Kafka概述以及安装配置中zookeeper的安装配置
以下介绍多节点的配置
1)下载zookeeper
我们使用的是cdh套件
https://archive.cloudera.com/cdh5/cdh/5/zookeeper-3.4.5-cdh5.15.0.tar.gz
2)解压
我们这里统一解压到同一个目录下
tar -xzvf zookeeper-3.4.5-cdh5.15.0.tar.gz -C /app/cdh
3)配置环境变量
vim /etc/profile
export ZOOKEEPER_HOME=/app/cdh/zookeeper-3.4.5-cdh5.15.0
export PATH=$ZOOKEEPER_HOME/bin:PATH
4) 修改配置文件

# The number of milliseconds of each tick
tickTime=2000
# The number of ticks that the initial 
# synchronization phase can take
initLimit=10
# The number of ticks that can pass between 
# sending a request and getting an acknowledgement
syncLimit=5
# the directory where the snapshot is stored.
# do not use /tmp for storage, /tmp here is just 
# example sakes.
dataDir=/app/tmp/zookeeper
# the port at which the clients will connect
clientPort=2181
# the maximum number of client connections.
# increase this if you need to handle more clients
#maxClientCnxns=60
#
# Be sure to read the maintenance section of the 
# administrator guide before turning on autopurge.
#
# https://zookeeper.apache.org/doc/current/zookeeperAdmin.html#sc_maintenance
#
# The number of snapshots to retain in dataDir
#autopurge.snapRetainCount=3
# Purge task interval in hours
# Set to "0" to disable auto purge feature
#autopurge.purgeInterval=1
server.1=dev2:2888:3888
server.2=dev3:2888:3888
server.3=dev4:2888:3888

这里的

server.1=dev2:2888:3888
server.2=dev3:2888:3888
server.3=dev4:2888:3888

是集群间互相通信的
然后我们将/app/cdh/zookeeper-3.4.5-cdh5.15.0的zookeeper目录完整scp到其他节点配置好环境变量
另外我们需要在所有节点上创建一下目录:
dataDir=/app/tmp/zookeeper
最后我们还需要做一件事,我们需要在dataDir目录下创建一个myid文件
vim myid
#myid的内容和我们之前的配置是相对应的
#当前机器为dev2,我们之前设置的server.1=dev2:2888:3888 那么myid的内容就是1
#当前机器为dev3,我们之前设置的server.2=dev3:2888:3888 那么myid的内容就是2
#当前机器为dev4,我们之前设置的server.3=dev4:2888:3888 那么myid的内容就是4
5)启动各个节点的zookeeper
由于之前我们配置过环境变量,所以我们直接使用
zkServer.sh start
#$ZOOKEEPER_HOME/bin/zkServer.sh start
如果出现启动不了的情况,记得关闭防火墙,因为防火墙没有关闭。
关闭防火墙:
#查看防火墙状态
sudo service iptables status
#关闭防火墙
sudo service iptables stop
#查看防火墙开机启动状态
sudo chkconfig iptables --list
#关闭防火墙开机启动
sudo chkconfig iptables off

二、Hbase安装

1)Hbase下载
https://archive.cloudera.com/cdh5/cdh/5/hbase-1.2.0-cdh5.15.0.tar.gz
2)解压
tar -xzvf hbase-1.2.0-cdh5.15.0.tar.gz -C /app/cdh
3) 配置环境变量
vim /etc/profile

export HBASE_HOME=/app/cdh/hbase-1.2.0-cdh5.15.0
export PATH=$HBASE_HOME/bin:PATH

source /etc/profile
4) 修改配置文件

vim $HBASE_HOME/conf/hbase-env.sh

export JAVA_HOME=/usr/java/jdk1.8.0_71
#不使用Hbase管理zookeeper,使用集群安装的zookeeper来管理 
export HBASE_MANAGES_ZK=false

vim $HBASE_HOME/conf/hbase-site.xml

<property>    
    <name>hbase.rootdir</name>    
    <value>hdfs://dev2:8020/hbase</value>    
    <description>
    The directory shared by RegionServers.    
    </description>  
</property>
<property>    
    <name>hbase.cluster.distributed</name>    
    <value>true</value>    
    <description>
    The mode the cluster will be in. Possible values are      
    false: standalone and pseudo-distributed setups with managed Zookeeper      
    true: fully-distributed with unmanaged Zookeeper Quorum (see hbase-env.sh)    
    </description>  
</property>

<property>    
    <name>hbase.zookeeper.quorum</name>    
    <value>dev2:2181,dev3:2181,dev4:2181</value>    
    <description>
    The directory shared by RegionServers.    
    </description>  
</property>

hbase.rootdir为hbase的存储根目录,设为hadoopHDFS根目录下的hbase
hbase.cluster.distributed集群分布式模式
hbase.zookeeper.quorum设置zookeeper地址

vim $HBASE_HOME/conf/regionservers

dev2
dev3
dev4

regionservers类似于slaves的配置
5) 启动
将/app/cdh/hbase-1.2.0-cdh5.15.0完全scp到其他节点
配置环境变量后启动hbase
$HBASE_HOME/bin/start-hbase.sh
6) 使用测试
hbase shell

> create 'member','name','gender'
> list #查看所有表

在https://dev2:60010中可以查看到对应的hbase信息


codeobj , 版权所有丨如未注明 , 均为原创丨本网站采用BY-NC-SA协议进行授权
转载请注明原文链接:Hbase的安装以及配置
喜欢 (0)
[a37free@163.com]
分享 (0)
发表我的评论
取消评论
表情 贴图 加粗 删除线 居中 斜体 签到

Hi,您需要填写昵称和邮箱!

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址