hbase数据库_实验目的

ゝ一世哀愁。 2023-09-25 11:47 71阅读 0赞

一、实验目的二、实验内容

1.掌握HBase操作常用Shell命令；

2.掌握HBase数据表的创建、添加数据、查看数据、删除数据、删除表、查询历史数据等操作；

3.掌握HBase APIs编程实践方法

第1题 HBase 练习

【实验内容】

1.实现HBase的配置并完成http://dblab.xmu.edu.cn/blog/install-hbase/上的javac程序练习。

1、切换到/usr/local/hbase目录并编辑/.bashrc文件(在/.bashrc文件中export PATH这行追加/usr/local/hbase/bin)

![hbase数据库\_实验目的\_hbase数据库][hbase_hbase]

2、编辑完成后，再执行source命令使上述配置在当前终端立即生效

![hbase数据库\_实验目的\_hbase数据库\_02][hbase_hbase_02]

3、添加HBase权限(将hbase下的所有文件的所有者改为hadoop，hadoop是当前用户的用户名)

![hbase数据库\_实验目的\_hbase数据库\_03][hbase_hbase_03]

4、 查看HBase版本，确定hbase安装成功(看到以下输出消息表示HBase已经安装成功)

![hbase数据库\_实验目的\_hbase数据库\_04][hbase_hbase_04]

5、用vi命令打开并编辑hbase-env.sh

![hbase数据库\_实验目的\_hbase数据库\_05][hbase_hbase_05]

配置JAVA环境变量如图，配置HBASE\_MANAGES\_ZK为true，表示由hbase自己管理zookeeper，不需要单独的zookeeper

![hbase数据库\_实验目的\_hbase数据库\_06][hbase_hbase_06]

6、打开并编辑hbase-site.xml

![hbase数据库\_实验目的\_hbase数据库\_07][hbase_hbase_07]

在启动HBase前需要设置属性hbase.rootdir，用于指定HBase数据的存储位置(以防每次重启系统都会丢失数据)

![hbase数据库\_实验目的\_hbase数据库\_08][hbase_hbase_08]

7、测试运行(首先切换目录至HBase安装目录/usr/local/hbase；再启动HBase)

![hbase数据库\_实验目的\_hbase数据库\_09][hbase_hbase_09]

8、打开shell命令行模式(用户可以通过输入shell命令操作HBase数据库)

![hbase数据库\_实验目的\_hbase数据库\_10][hbase_hbase_10]

9、退出shell命令行模式，停止HBase运行

![hbase数据库\_实验目的\_hbase数据库\_11][hbase_hbase_11]

10、配置/usr/local/hbase/conf/hbase-env.sh

![hbase数据库\_实验目的\_hbase数据库\_12][hbase_hbase_12]

配置JAVA\_HOME，HBASE\_CLASSPATH，HBASE\_MANAGES\_ZK.

HBASE\_CLASSPATH设置为本机Hadoop安装目录下的conf目录(即/usr/local/hadoop/conf)

![hbase数据库\_实验目的\_hbase数据库\_13][hbase_hbase_13]

11、用命令vi打开并编辑hbase-site.xml

![hbase数据库\_实验目的\_hbase数据库\_14][hbase_hbase_14]

hbase.rootdir指定HBase的存储目录；hbase.cluster.distributed设置集群处于分布式模式

![hbase数据库\_实验目的\_hbase数据库\_15][hbase_hbase_15]

12、登陆ssh，切换目录至/usr/local/hadoop ,启动hadoop

![hbase数据库\_实验目的\_hbase数据库\_16][hbase_hbase_16]

13、命令jps(能看到NameNode,DataNode和SecondaryNameNode都已经成功启动，表示hadoop启动成功)

![hbase数据库\_实验目的\_hbase数据库\_17][hbase_hbase_17]

14、切换目录至/usr/local/hbase,启动HBase(输入命令jps，看到以下界面说明hbase启动成功)

![hbase数据库\_实验目的\_hbase数据库\_18][hbase_hbase_18]

15、进入shell界面

![hbase数据库\_实验目的\_hbase数据库\_19][hbase_hbase_19]

16、退出shell界面，停止HBase运行

![hbase数据库\_实验目的\_hbase数据库\_20][hbase_hbase_20]

编程实践

1、HBase中用create命令创建表

![hbase数据库\_实验目的\_hbase数据库\_21][hbase_hbase_21]

2、通过describe命令查看“student”表的基本信息

![hbase数据库\_实验目的\_hbase数据库\_22][hbase_hbase_22]

3、添加数据( 当运行命令：put ‘student’,’95001’,’Sname’,’LiYing’时，即为student表添加了学号为95001，名字为LiYing的一行数据，其行键为95001 )

![hbase数据库\_实验目的\_hbase数据库\_23][hbase_hbase_23]

4、为95001行下的course列族的math列添加了一个数据

![hbase数据库\_实验目的\_hbase数据库\_24][hbase_hbase_24]

5、为95001行下的course列族的Sage列添加了一个数据

![hbase数据库\_实验目的\_hbase数据库\_25][hbase_hbase_25]

6、为95001行下的course列族的Sdept列添加了一个数据

![hbase数据库\_实验目的\_hbase数据库\_26][hbase_hbase_26]

7、删除数据，删除了student表中95001行下的Ssex列的所有数据

![hbase数据库\_实验目的\_hbase数据库\_27][hbase_hbase_27]

8、get命令，(用于查看某一行数据，返回的是‘student’表‘95001’行的数据)

![hbase数据库\_实验目的\_hbase数据库\_28][hbase_hbase_28]

9、scan命令(用于查看某个表的全部数据)

![hbase数据库\_实验目的\_hbase数据库\_29][hbase_hbase_29]

10、删除student表中的95001行的全部数据

![hbase数据库\_实验目的\_hbase数据库\_30][hbase_hbase_30]

11、删除表有两步，第一步先让该表不可用，第二步删除表

![hbase数据库\_实验目的\_hbase数据库\_31][hbase_hbase_31]

12、在创建表的时候，指定保存的版本数(假设指定为5)

![hbase数据库\_实验目的\_hbase数据库\_32][hbase_hbase_32]

13、put命令，插入数据然后更新数据，使其产生历史版本数据

![hbase数据库\_实验目的\_hbase数据库\_33][hbase_hbase_33]

14、询时，指定查询的历史版本数。默认会查询出最新的数据。(有效取值为1到5)

![hbase数据库\_实验目的\_hbase数据库\_34][hbase_hbase_34]

15、Eclipse编写java程序，来对HBase数据库进行增删改查等操作

ExampleForHbase类代码如下

编程实例代码运行结果

![hbase数据库\_实验目的\_hbase数据库\_35][hbase_hbase_35]

执行完插入数据后，在shell界面中执行scan ‘Score’

![hbase数据库\_实验目的\_hbase数据库\_36][hbase_hbase_36]

第2题. HBase Shell数据库表创建

【实验内容】

根据以下关系型数据库表，使用HBase Shell设计并创建适宜的HBase数据表。

![hbase数据库\_实验目的\_hbase数据库\_37][hbase_hbase_37]

1、启动hadoop、hbase

![hbase数据库\_实验目的\_hbase数据库\_38][hbase_hbase_38]

2、进入hbase的shell界面

![hbase数据库\_实验目的\_hbase数据库\_39][hbase_hbase_39]

3、创建表格“Student”

![hbase数据库\_实验目的\_hbase数据库\_40][hbase_hbase_40]

4、创建表格“Score”和“SC”

![hbase数据库\_实验目的\_hbase数据库\_41][hbase_hbase_41]

5、查看已有的表格

![hbase数据库\_实验目的\_hbase数据库\_42][hbase_hbase_42]

6、给“Student”表学号为“2020001”添加姓名、性别、年龄

![hbase数据库\_实验目的\_hbase数据库\_43][hbase_hbase_43]

7、给“Student”表学号为“2020003”添加姓名、性别、年龄

![hbase数据库\_实验目的\_hbase数据库\_44][hbase_hbase_44]

8、给“Student”表学号为“2020005”添加姓名、性别、年龄

![hbase数据库\_实验目的\_hbase数据库\_45][hbase_hbase_45]

9、scan命令查看“Student”表格信息

![hbase数据库\_实验目的\_hbase数据库\_46][hbase_hbase_46]

10、给“Course”表学号为“123001、123002、123003”分别添加对应的课程名称

![hbase数据库\_实验目的\_hbase数据库\_47][hbase_hbase_47]

11、给“Course”表学号为“123001、123002、123003”添加学分

![hbase数据库\_实验目的\_hbase数据库\_48][hbase_hbase_48]

12、查看“Course”表格的全部数据

![hbase数据库\_实验目的\_hbase数据库\_49][hbase_hbase_49]

13、向学生表添加课程列族

![hbase数据库\_实验目的\_hbase数据库\_50][hbase_hbase_50]

14、scan命令查看“Student”表格信息

![hbase数据库\_实验目的\_hbase数据库\_51][hbase_hbase_51]

第3题 HBase Shell数据访问操作

【实验内容】

(1)使用HBase Shell命令向第1题所构建的HBase数据表中添加适宜数据；

(2)使用HBase Shell命令从第1题所构建的HBase数据表中查询出数据；

(3)使用HBase Shell命令从第1题所构建的HBase数据表中删除任一数据；

(4)使用HBase Shell命令统计第1题所构建的HBase数据表的行数。

【实验过程】(步骤、记录、数据、程序等)

请提供相应Shell操作命令或相应Shell界面截图证明。

1、在“Student”添加数据

![hbase数据库\_实验目的\_hbase数据库\_52][hbase_hbase_52]

2、查询出数据

![hbase数据库\_实验目的\_hbase数据库\_53][hbase_hbase_53]

3、删除任一数据

![hbase数据库\_实验目的\_hbase数据库\_54][hbase_hbase_54]

4、统计“Student”表的行数

![hbase数据库\_实验目的\_hbase数据库\_55][hbase_hbase_55]

第4题 HBase Java API编程

【实验内容】

根据第1，2题所建立的表，请编程完成以下指定功能：

(1)createTable(String tableName, String\[\] fields)

创建表，参数tableName为表的名称，字符串数组fields为存储记录各个域名称的数组。要求当HBase已经存在名为tableName的表的时候，先删除原有的表，然后再创建新的表。

(2)addRecord(String tableName, String row, String\[\] fields, String\[\] values)

向表tableName、行row(用S\_Name表示)和字符串数组files指定的单元格中添加对应的数据values。其中fields中每个元素如果对应的列族下还有相应的列限定符的话，用“columnFamily:column”表示。例如，同时向“Math”、“Computer Science”、“English”三列添加成绩时，字符串数组fields为\{“Score:Math”,”Score；Computer Science”,”Score:English”\}，数组values存储这三门课的成绩。

(3)scanColumn(String tableName, String column)

浏览表tableName某一列的数据，如果某一行记录中该列数据不存在，则返回null。要求当参数column为某一列族名称时，如果底下有若干个列限定符，则要列出每个列限定符代表的列的数据；当参数column为某一列具体名称(例如“Score:Math”)时，只需要列出该列的数据。

(4)modifyData(String tableName, String row, String column)

修改表tableName，行row(可以用学生姓名S\_Name表示)，列column指定的单元格的数据。

(5)deleteRow(String tableName, String row)

删除表tableName中row指定的行的记录。

1、创建java工程

![hbase数据库\_实验目的\_hbase数据库\_56][hbase_hbase_56]

2、菜单函数，java程序代码如下

HBaseModifyStudent类代码如下

![hbase数据库\_实验目的\_hbase数据库\_57][hbase_hbase_57]

3、连接和关闭Hbase数据库的JAVA代码

HBaseStudentOperation类代码如下

![hbase数据库\_实验目的\_hbase数据库\_58][hbase_hbase_58]

![hbase数据库\_实验目的\_hbase数据库\_59][hbase_hbase_59]

4、创建学生信息表

![hbase数据库\_实验目的\_hbase数据库\_60][hbase_hbase_60]

![hbase数据库\_实验目的\_hbase数据库\_61][hbase_hbase_61]

5、添加学生选课信息

![hbase数据库\_实验目的\_hbase数据库\_62][hbase_hbase_62]

6、浏览学生选课信息表

![hbase数据库\_实验目的\_hbase数据库\_63][hbase_hbase_63]

7、修改学生选课信息

![hbase数据库\_实验目的\_hbase数据库\_64][hbase_hbase_64]

![hbase数据库\_实验目的\_hbase数据库\_65][hbase_hbase_65]

8、删除学生选课信息

![hbase数据库\_实验目的\_hbase数据库\_66][hbase_hbase_66]

运行结果如下

选择1，创建学生选课表

![hbase数据库\_实验目的\_hbase数据库\_67][hbase_hbase_67]

再次创建，提示该表已经存在

![hbase数据库\_实验目的\_hbase数据库\_68][hbase_hbase_68]

选择2，学生Zhangsan选课信息的录入

![hbase数据库\_实验目的\_hbase数据库\_69][hbase_hbase_69]

Scan命令，查看插入成功的结果

![hbase数据库\_实验目的\_hbase数据库\_70][hbase_hbase_70]

选择3，进行学生Zhangsan数学课程信息的查询，结果如下

![hbase数据库\_实验目的\_hbase数据库\_71][hbase_hbase_71]

选择4，进行学生Zhangsan数学成绩的修改

![hbase数据库\_实验目的\_hbase数据库\_72][hbase_hbase_72]

Scan命令查询结果(之前是86分，现在89分)

![hbase数据库\_实验目的\_hbase数据库\_73][hbase_hbase_73]

选择5，进行学生Zhangsan一行的信息的删除

![hbase数据库\_实验目的\_hbase数据库\_74][hbase_hbase_74]

Scan命令查询结果(可见，zhangshan的信息已经被全部删除)

![hbase数据库\_实验目的\_hbase数据库\_75][hbase_hbase_75]

做到这里，本次HBase分布式数据库操作与编程基本完成，过程截图不清楚或有问题的可以给我评论或私信，命令行代码希望自己敲，可以加深理解，加油！

![hbase数据库\_实验目的\_hbase数据库\_76][hbase_hbase_76]

[hbase_hbase]: https://img-blog.csdnimg.cn/img_convert/bc5b103579ebc415e94432614378b4d0.png
[hbase_hbase_02]: https://img-blog.csdnimg.cn/img_convert/5761d4399d88b1cd86cd2763b3532443.png
[hbase_hbase_03]: https://img-blog.csdnimg.cn/img_convert/8437ef2b4243aa3541612be3cdc5c8a4.png
[hbase_hbase_04]: https://img-blog.csdnimg.cn/img_convert/63ae26b1b534f26a04a8074c59c14670.png
[hbase_hbase_05]: https://img-blog.csdnimg.cn/img_convert/63cf26967460eb72e302a07166526fff.png
[hbase_hbase_06]: https://img-blog.csdnimg.cn/img_convert/5052f31e1637d52ab594e4f348789463.png
[hbase_hbase_07]: https://img-blog.csdnimg.cn/img_convert/a3b553fcdc909383cc1821f6e4e3751b.png
[hbase_hbase_08]: https://img-blog.csdnimg.cn/img_convert/c8b36bec1d5c60945c02da36606b6078.png
[hbase_hbase_09]: https://img-blog.csdnimg.cn/img_convert/1aee92c993c9503801ccbc4bc04181d3.png
[hbase_hbase_10]: https://img-blog.csdnimg.cn/img_convert/9415171cb0fcab48f0fc784a54c72f2a.png
[hbase_hbase_11]: https://img-blog.csdnimg.cn/img_convert/15356ffabc620edc3445cf2e6e36d25c.png
[hbase_hbase_12]: https://img-blog.csdnimg.cn/img_convert/6f4e4ca2be2a9ad76d7dd1a0c5487eb9.png
[hbase_hbase_13]: https://img-blog.csdnimg.cn/img_convert/a9d97f0913a596395ec5c3bd80be725f.png
[hbase_hbase_14]: https://img-blog.csdnimg.cn/img_convert/40105b6c26f8d389a22524058e2f530c.png
[hbase_hbase_15]: https://img-blog.csdnimg.cn/img_convert/44ffafba01dd2b283e7fa444f9fdd1b4.png
[hbase_hbase_16]: https://img-blog.csdnimg.cn/img_convert/205a038de31c5b12ce53187429750926.png
[hbase_hbase_17]: https://img-blog.csdnimg.cn/img_convert/10d1b857e1bd61d25f1ad4cb91a28ff4.png
[hbase_hbase_18]: https://img-blog.csdnimg.cn/img_convert/6934b91739df6d143b44d2955e66b6f4.png
[hbase_hbase_19]: https://img-blog.csdnimg.cn/img_convert/01479d04aceb50b1d53ec0e9d8897a89.png
[hbase_hbase_20]: https://img-blog.csdnimg.cn/img_convert/d8f833bd663ffd9b96cbf880fe3f1458.png
[hbase_hbase_21]: https://img-blog.csdnimg.cn/img_convert/373361e18f8f9270181e9d53f93c610e.png
[hbase_hbase_22]: https://img-blog.csdnimg.cn/img_convert/c7388d1cde4d16024f36a63e6f354eb8.png
[hbase_hbase_23]: https://img-blog.csdnimg.cn/img_convert/64351e68680e4509431f25cb304887e6.png
[hbase_hbase_24]: https://img-blog.csdnimg.cn/img_convert/c9601794559fb896dfe23755bcf86910.png
[hbase_hbase_25]: https://img-blog.csdnimg.cn/img_convert/bbdb58ff788c3d8b985ec969fceba25d.png
[hbase_hbase_26]: https://img-blog.csdnimg.cn/img_convert/341a9fd874ee95f4e9bec48ed581c55f.png
[hbase_hbase_27]: https://img-blog.csdnimg.cn/img_convert/6608c22ea02ce5436a159ba51cea5540.png
[hbase_hbase_28]: https://img-blog.csdnimg.cn/img_convert/d48fe727a27a123edc5e779c9edd1ece.png
[hbase_hbase_29]: https://img-blog.csdnimg.cn/img_convert/7af3087296687d52442f6f8021aa968c.png
[hbase_hbase_30]: https://img-blog.csdnimg.cn/img_convert/53bf972e2b56987077bd58d84c027421.png
[hbase_hbase_31]: https://img-blog.csdnimg.cn/img_convert/a3cd60cbdc5180ef62cb561e8534f39b.png
[hbase_hbase_32]: https://img-blog.csdnimg.cn/img_convert/e55f872407a2ecd77fad41555bc739aa.png
[hbase_hbase_33]: https://img-blog.csdnimg.cn/img_convert/6d8871618e8bcde0db6b0743e24190f2.png
[hbase_hbase_34]: https://img-blog.csdnimg.cn/img_convert/7b63629dd68a26cf54e7ec7e4452ec3b.png
[hbase_hbase_35]: https://img-blog.csdnimg.cn/img_convert/94ec15866396fe24aaadeaa35807b276.png
[hbase_hbase_36]: https://img-blog.csdnimg.cn/img_convert/319df3b2c18b61eb00e22d2f3c8deef7.png
[hbase_hbase_37]: https://img-blog.csdnimg.cn/img_convert/719fac3dee78159f4717a1500de95a6c.png
[hbase_hbase_38]: https://img-blog.csdnimg.cn/img_convert/26ceeb65f7ae5f81ffecb50d5be18ac1.png
[hbase_hbase_39]: https://img-blog.csdnimg.cn/img_convert/e3f263cea7dfc8438534a76d057fc5d6.png
[hbase_hbase_40]: https://img-blog.csdnimg.cn/img_convert/3cce37e7a921ed07c4c46112954688c6.png
[hbase_hbase_41]: https://img-blog.csdnimg.cn/img_convert/3571ba82a7d17b3045d3d9678679dc37.png
[hbase_hbase_42]: https://img-blog.csdnimg.cn/img_convert/1917e5c0bcd0d3c1c5dd4966e0da0459.png
[hbase_hbase_43]: https://img-blog.csdnimg.cn/img_convert/996386e05717e9d03b75b5f8dbeee80a.png
[hbase_hbase_44]: https://img-blog.csdnimg.cn/img_convert/d26f97bca6fd7e540fbe65db458d7617.png
[hbase_hbase_45]: https://img-blog.csdnimg.cn/img_convert/b946564eec2d53158acbca582250c07a.png
[hbase_hbase_46]: https://img-blog.csdnimg.cn/img_convert/98c088e4a51409a96bb5e50b56f80ad9.png
[hbase_hbase_47]: https://img-blog.csdnimg.cn/img_convert/fa4ba0c70b89f85733fd676bce32ce8f.png
[hbase_hbase_48]: https://img-blog.csdnimg.cn/img_convert/b23c0e2d87558b4ef0dea4312ba4a43a.png
[hbase_hbase_49]: https://img-blog.csdnimg.cn/img_convert/0b0093f2b85b2501150e57027d21c811.png
[hbase_hbase_50]: https://img-blog.csdnimg.cn/img_convert/1b1f93f433f51d172bc948e9b208a0da.png
[hbase_hbase_51]: https://img-blog.csdnimg.cn/img_convert/38ac5300ce7a693b075b49ed5ccdd998.png
[hbase_hbase_52]: https://img-blog.csdnimg.cn/img_convert/ba0cac94755b69f778545199569eb752.png
[hbase_hbase_53]: https://img-blog.csdnimg.cn/img_convert/b5777fbcd0dee4141fcb3132b29c5acb.png
[hbase_hbase_54]: https://img-blog.csdnimg.cn/img_convert/ad5ab7d86f6a6dafde0ed2f7615cb8c4.png
[hbase_hbase_55]: https://img-blog.csdnimg.cn/img_convert/31cf5d40add9aaa72af0f28dd7bb9d93.png
[hbase_hbase_56]: https://img-blog.csdnimg.cn/img_convert/68622e3e758ba7819019888abc8ae904.png
[hbase_hbase_57]: https://img-blog.csdnimg.cn/img_convert/18fdf0fa383f8f8a7e8ab601bc5055fc.png
[hbase_hbase_58]: https://img-blog.csdnimg.cn/img_convert/e0b0df77932e6c2604555e8f2726cdd7.png
[hbase_hbase_59]: https://img-blog.csdnimg.cn/img_convert/a2964433405f1676de8703635b77cde6.png
[hbase_hbase_60]: https://img-blog.csdnimg.cn/img_convert/e60dae322d9c87c2111dc048b065d9d7.png
[hbase_hbase_61]: https://img-blog.csdnimg.cn/img_convert/ea84d8c57b53ff47eed50e8f5c4c72f0.png
[hbase_hbase_62]: https://img-blog.csdnimg.cn/img_convert/2e9f54af8d08baa59c7009c4503ea914.png
[hbase_hbase_63]: https://img-blog.csdnimg.cn/img_convert/c6a74cdf02c1aa8260251178189f4b58.png
[hbase_hbase_64]: https://img-blog.csdnimg.cn/img_convert/7e5e67479225d551521050923232a128.png
[hbase_hbase_65]: https://img-blog.csdnimg.cn/img_convert/216d87a98ec7182f3a7a1d6881e56963.png
[hbase_hbase_66]: https://img-blog.csdnimg.cn/img_convert/01ff2c0887f40daec91c2719a23750bb.png
[hbase_hbase_67]: https://img-blog.csdnimg.cn/img_convert/c6b13eaa354a96cb5c4e393f95d576f4.png
[hbase_hbase_68]: https://img-blog.csdnimg.cn/img_convert/9a5f7659242323f8b1e8d7b18a6ac069.png
[hbase_hbase_69]: https://img-blog.csdnimg.cn/img_convert/7c1d6428f603a62eb47cad121658b969.png
[hbase_hbase_70]: https://img-blog.csdnimg.cn/img_convert/d63628c35f9671e8d0afe034845c71ea.png
[hbase_hbase_71]: https://img-blog.csdnimg.cn/img_convert/2dae02bbbdcfa38d93cf735cc74d0355.png
[hbase_hbase_72]: https://img-blog.csdnimg.cn/img_convert/8cd30117b33bbbaf53e9c33b6a1e5131.png
[hbase_hbase_73]: https://img-blog.csdnimg.cn/img_convert/d12a16109b2b595917d4314a40f2ce4b.png
[hbase_hbase_74]: https://img-blog.csdnimg.cn/img_convert/2de1910103cbdf1c6ca4f60b7aed0df3.png
[hbase_hbase_75]: https://img-blog.csdnimg.cn/img_convert/a8b5ed140a3ce66ed5bd43cf1fc1444d.png
[hbase_hbase_76]: https://img-blog.csdnimg.cn/img_convert/f3a3f1eed686022faa96a3e488aeac58.gif