数据学习】

1.HBase集群环境介绍2.搭建环境准备3.搭建步骤4.HBase集群环境启动、验证和停止

1.HBase集群环境介绍

HBase集群由多个RegionServer节点和一个或多个HMaster节点组成。

HMaster节点负责管理元数据例如表的位置、分区等并协调集群中的各个节点。

RegionServer节点负责存储和处理数据并与HMaster节点通信以获取元数据信息。

可靠性HBase采用数据副本和RegionServer读写分离等机制来实现容错和恢复能力即使部分节点出现故障集群仍然可用。

高性能HBase通过将表分割成不同的Region来进行水平扩展可以处理海量数据并具有很高的读写性能。

数据模型HBase提供类似于Google的Bigtable的列族存储模型可以灵活定义列族和列支持动态添加或删除列族和列。

多版本控制HBase支持存储多个版本的数据可以回滚到先前的状态也可以查询以前的历史值。

2.搭建环境准备

注HBase依赖于ZooKeeper来进行分布式协调和管理因此在搭建启用HBASE之前需要提前搭建并启动好zookeeper集群环境zookeeper的搭建和启动可以参考我的上一篇文章ZooKeeper集群环境搭建

3.搭建步骤

1.启动zookeeper集群环境zookeeper的搭建和启动可以参考我的上一篇文章ZooKeeper集群环境搭建

tar

/root/experiment/file/hbase-1.2.6-bin.tar.gz

/opt

/opt/hbase/conf/hbase-env.sh6.按键:set

nu回车设置行号部分截图如下

JAVA_HOME/usr/lib/java-1.89.按键Esc按键128gg光标定位到128行部分截图如下

10.按键

HBASE_MANAGES_ZKfalse11.按键Esc按键”:wq!”保存退出。

vim

/opt/hbase/conf/hbase-site.xml13.按键:set

nu回车设置行号部分截图如下

propertynamehbase.zookeeper.quorum/namevaluemaster,slave1,slave2/value

/property

propertynamehbase.zookeeper.property.dataDir/namevalue/root/hbase/value

/property

propertynamedfs.datanode.max.transfer.threads/namevalue4096/value

/property

propertynamehbase.rootdir/namevaluehdfs://master:8020/hbase/value

/property

propertynamehbase.cluster.distributed/namevaluetrue/value

17.配置regionservers文件

/opt/hbase/conf/regionservers18.按键dd删除第一行“localhost”截图如下

19.按键

~/.bashrc21.按键“shiftg”组合键达到页面底部。

22.按键

PATH$PATH:$HBASE_HOME/bin23.按键Esc按键”:wq!”保存退出。

source

~/.bashrc25.拷贝master主机“.bashrc”文件到slave1、slave2从机“~”下。

scp

slave2:~/26.拷贝配置好的hbase文件夹到slave1、slave2从机“/opt”下。

scp

slave2:/opt27.切换至“从节点1”机器双击桌面“Xfce终端”图标打开命令窗口。

刷新配置文件使新加Hbase环境变量生效退回master主机。

ssh

~/.bashrcexit28.切换至“从节点2”机器双击桌面“Xfce终端”图标打开命令窗口。

刷新配置文件使新加Hbase环境变量生效退回master主机。

ssh

~/.bashrcexit4.HBase集群环境启动、验证和停止

1.切换至“主节点”双击桌面“Xfce终端”图标打开命令窗口启动Hadoop。

start-hbase.sh3.查看守护进程。

其中HMaster为HBase的守护进程。

jps4.切换至“从节点1”查看守护进程。

其中HRegionServer为HBase的守护进程。

ssh

slave1jpsexit5.切换至“从节点2”查看守护进程。

其中HRegionServer为HBase的守护进程。

ssh

slave2jpsexit6.切换至“主节点”查看HDFS平台上Hbase。

hdfs

shell8.HBase下建立带有一个列族family1的表table1。

create

table1,family19.向表table1中列族family1下建立列为column1并向列中播入数据value-1。

put

table1,myrow-1,family1:column1,value-110.查询表table1中内容。

scan

quit13.停止Hbase进程。

注意这里速度有点慢可能需要稍等几分钟。

stop-all.sh15.停止“主节点”即master机上的zookeeper进程。

zkServer.sh

stop16.停止“从节点1”即slave1机上的zookeeper进程。

ssh

stopexit17.停止“从节点2”即slave2机上的zookeeper进程。

ssh