HBase集群搭建

柔光的暖阳◎ 2022-06-18 10:23 230阅读 0赞

三安装HBase集群（主备Master节点）

HBase是依赖于Zookeeper的，所以首先要安装Zookeeper集群，相关步骤如下；

1 安装前准备，下载Zookeeper-3.4.6.tar.gz，HBase-1.1.1.tar.gz等安装文件;

2 解压zookeeper，命令为tar-zxf  zookeeper-3.4.6.tar.gz，并将其移动到/jiang/tools

下；

3 配置环境变量，在/etc/profile中，如下：

export  ZOOKEEPER\_HOME=/jiang/tools/zookeeper-3.4.6

export  PATH=$PATH:$ZOOKEEPER\_HOME/bin

export   CLASSPATH=$CLASSPATH:$ZOOKEEPER\_HOME/lib

执行source /etc/profile使其生效；

4 在Zookpeer的安装目录的conf下修改zoo.cfg，我们在dmdb-23,dmdb-25,dmdb-26上安装zookeeper集群相关配置信息如下：

tickTime=2000

initLimit=10

syncLimit=5

clientPort=2181

dataDir=/jiang/tools/zookeeper-3.4.6/dataDir

server.1=dmdb-23:2888:3888

server.2=dmdb-25:2888:3888

server.3=dmdb-26:2888:3888

5 在Zokeeper的安装目录下的新建一个dataDir目录，在dataDir目录下创建一个myid文件，dmdb-23的myid文件上写入1，dmdb-25的myid文件上写入2，dmdb-26的myid文件上写入3；

6 将zookeeper的安装文件远程拷贝到dmdb-23，dmdb-26上，命令为：

scp  -r  zookeeper-3.4.6  /jiang/tools/

7 分别在dmdb-23,dmdb-25,dmdb-26上启动zookeeper，命令为zkServer.shstart；然后在这三台机器上查看启动状态，命令为:zkServer.sh status;

如果状态为follower，或者是leader即为正常启动；

8 zookeeper安装完毕，就可以安装hbase了；解压hbase文件:

tar  -zxf  hbase-1.1.1.tar.gz

9 设定HBase的主master节点是dmdb-25,副master节点是dmdb-26，其余的为HRegionServer，在HBase目录下的conf配置目录中的regionservers中添加如下内容:

dmdb-23

dmdb-24

dmdb-27

dmdb-28

10 修改hbase-site.xml，添加相关配置信息如下：

<configuration>

<property>

<name>hbase.rootdir</name>

<value>hdfs://cluster1/hbase</value>

</property>

<property>

<name>hbase.master</name>

<value>9000</value>

</property>

<property>

<name>hbase.cluster.distributed</name>

<value>true</value>

</property>

<property>

<name>dfs.replication</name>

<value>1</value>

</property>

<property>

<name>hbase.zookeeper.quorum</name>

<value>dmdb-23,dmdb-25,dmdb-26</value>

</property>

<property>

<name>hbase.zookeeper.property.dataDir</name>

<value>/jiang/tools/hbase-1.1.1/zookeeper</value>

</property>

<property>

<name>hbase.zookeeper.property.clientPort</name>

<value>2181</value>

</property>

<property>

<name>hbase.tmp.dir</name>

<value>/jiang/tools/hbase-1.1.1/tmp</value>

</property>

<property>

<name>hbase.client.write.buffer</name>

<value>2097152</value>

</property>

<property>

<name>hbase.regionserver.handler.count</name>

<value>10</value>

</property>

<property>

<name>hbase.regionserver.regionSplitLimit</name>

<value>2147483647</value>

</property>

<property>

<name>hbase.regionserver.logroll.period</name>

<value>3600000</value>

</property>

<property>

<name>hbase.balancer.period</name>

<value>300000</value>

</property>

<property>

<name>hbase.regionserver.global.memstore.upperLimit</name>

<value>0.4</value>

</property>

<property>

<name>hbase.regionserver.global.memstore.lowerLimit</name>

<value>0.35</value>

</property>

<property>

<name>hbase.hregion.memstore.flush.size</name>

<value>134217728</value>

</property>

<property>

<name>hbase.hregion.max.filesize</name>

<value>107341824000</value>

</property>

<property>

<name>hbase.hregion.majorcompaction</name>

<value>0</value>

</property>

</configuration>

11 打开hbase-env.sh，配置hbase运行时候的环境变量，相关配置如下：

export      HBASE\_MANAGES\_ZK=false

export     JAVA\_HOME=/usr/java/jdk1.7.0\_79

export     HADOOP\_HOME=/jiang/tools/hadoop-2.5.2

配置完成；

12 配置HBase在系统中的环境变量，在/etc/profile中完成配置，相关配置如下：

export HBASE\_HOME=/jiang/tools/hbase-1.1.1

exportPATH=$PATH:$\{HBASE\_HOME\}/bin

exportCLASSPATH=.:$CLASSPATH:$\{HBASE\_HOME\}/lib

13 将HBase远程拷贝到其他的机器上，命令如下：

scp -rhbase-1.1.1 dmdb-23:/jiang/tools/

执行类似的命令，将HBase依次拷贝到其他的节点，这些节点包括了dmdb-24,dmdb-27,dmdb-28;

14 启动HBase，在主master节点上启动HBase，启动命令为start-hbase.sh

在副master节点上也启动HBase，启动命令为hbase-daemon.shstart master

进入http://dmdb-25:16010页面查看hbase的监控页面:

![Center][]

[Center]: /images/20220618/287553d2deac4d83b98c0e41db9dbdb3.png

发表评论取消回复

表情：

评论列表（有 0 条评论，230人围观）

还没有评论，来说两句吧...

相关阅读

相关大数据--hbase集群搭建

hbase依赖hadoop集群，hadoop集群请参考上篇文章。 1.上传hbase安装包 2.解压 tar -zxvf hbase.gz 3.配置h

た入场券/ 2022年09月29日 14:53/ 0 赞/ 175 阅读

相关 HBase集群搭建

(1)下载安装包 http://archive.apache.org/dist/hbase/1.3.1/ hbase-1.3.1-bin.tar.gz (2)规划

冷不防/ 2022年09月10日 05:26/ 0 赞/ 145 阅读

相关 hbase集群搭建

1.上传hbase安装包（测试使用的是hbase1.2.3） 2.解压 3.配置hbase集群，要修改3个文件（首先zk集群已经安装好了）注意：要把hadoop的hd

深碍√TFBOYSˉ_/ 2022年07月15日 11:18/ 0 赞/ 151 阅读

相关 hbase集群搭建

1.上传hbase安装包（测试使用的是hbase1.2.3） 2.解压 3.配置hbase集群，要修改3个文件（首先zk集群已经安装好了）注意：要把hadoop的hd

比眉伴天荒/ 2022年07月15日 11:18/ 0 赞/ 188 阅读

相关 HBase集群搭建

三安装HBase集群（主备Master节点） HBase是依赖于Zookeeper的，所以首先要安装Zookeeper集群，相关步骤如下； 1 安装前准备，下载Zookee

柔光的暖阳◎/ 2022年06月18日 10:23/ 0 赞/ 231 阅读

相关 Hadoop集群搭建Hbase

我这里下载的是Hbase1.3.1版本。 1.先解压hbase-1.3.1-bin.tar.gz到/usr文件夹中。 tar -zxvf hbase-1.3.1-b

左手的ㄟ右手/ 2022年06月09日 08:08/ 0 赞/ 200 阅读

相关 Hbase集群搭建

一、集群搭建准备 (1)、在之前的Kafka镜像基础上搭建的，整个镜像依赖为：Hadoop->Hive->sqoop->flume->kafka->hbase hbas

雨点打透心脏的1/2处/ 2022年05月21日 03:38/ 0 赞/ 179 阅读

相关 Hbase之集群搭建（一）

一、安装步骤 1、安装 zookeeper 集群，可参考我的另外一篇博文《ZooKeeper的集群搭建与配置》[https://blog.csdn.net/qq\_3

深碍√TFBOYSˉ_/ 2022年05月10日 05:10/ 0 赞/ 223 阅读

相关 HBASE集群搭建

环境： CentOS7.4（CentOS-7-x86\_64-DVD-1810.iso） hbase-2.1.4-bin.tar.gz jdk-8u201-linux-x

傷城~/ 2021年11月11日 08:36/ 0 赞/ 389 阅读

相关 HBase 分布式集群搭建手记

摘要由于HBase的数据是存放在HDFS上的，HBase依赖于Hadoop环境，搭建HBase集群环境前需要搭建好Hadoop集群环境，并且这里使用独立的Zookeep

缺乏、安全感/ 2021年09月23日 00:20/ 0 赞/ 369 阅读