大数据hadoop学习【10】-----根据关系型数据库表,使用HBase Shell设计并创建适宜的HBase数据表目录
每一种数据库的学习,都要学会怎么样对关系数据库表进行联系创建,当然,Hbase数据库也一样。但是Hbase数据库也有不同的地方,那就是HBase数据库是建立在列的基础上建立的关系,其他关系型数据库基本都是建立在行上面建立的关系,这就是不同的地方,加入给大家几张有关系的表,让我们建立起他们的联系,这时候就需要我们对表进行规划了,然后创建出他们的关系,本次博客,林君学长主要带大家了解如何通过Hbase Shell命令,进行关系数据库表的创建
- 操作系统:ubuntuKylin-16.04
- hadoop版本:hadoop-2.7.7
- hbase版本:hbase-1.4.13
一、Hbase关系数据库表
题目:根据以下关系型数据库表,使用HBase Shell设计并创建适宜的HBase数据表
1、学生信息表
学号(S_No) | 姓名(S_Name) | 性别(S_Sex) | 年龄(S_Age) |
---|---|---|---|
2015001 | ZhangSan | male | 23 |
2015002 | Mary | female | 22 |
2015003 | LiSi | male | 24 |
2、课程信息表
课程号(C_No) | 课程名(C_Name) | 学分(C_Credit) |
---|---|---|
123001 | Math | 2.0 |
123002 | Computer Science | 5.0 |
123003 | English | 3.0 |
3、选课信息表
学号(SC_Sno) | 课程号(SC_Cno) | 成绩(SC_Score) |
---|---|---|
2015001 | 123001 | 86 |
2015001 | 123003 | 69 |
2015002 | 123002 | 77 |
2015002 | 123003 | 99 |
2015003 | 123001 | 98 |
2015003 | 123002 | 95 |
二、对Hbase关系数据库表进行分析
对于上面的学生信息以及学生选课信息,关系数据库表已经给大家给出,那么我们如何进行关系模拟来将学生和课程产生关系,使得我们在查询学生的时候,能够自动的也他选择的课程也一并显示出现,这就需要我们构建!在很多时候,不是一看到表就直接进行创建,然后进行联系,Hbase关系型数据库和其他数据库不一样,所以需要大家进行关系表的规划,自由明白他们之间的关系,我们才能创建出合适这个关系的表格!
1、规划思路
1)、上面我们可以看出,学生的选课直接和学生信息和课程信息有关,而直接相关的就是学生学号和课程号,第三章选课表也就是根据学生信息和课程信息的综合而来,学号和课程号是直接的关系纽带!
2、规划结果
1)、通过以上关系,那么我们可以进行综合,直接将学生信息和他选择的课程信息进行综合,进而联系在一起,形成下面的综合关系表;将学生信息表、课程信息表、选课信息表综合在一起,然后进行建表的规划:
3、结果分析
1)、通过上面的表格规划,那么我们就可以来进行建表,建表的思路就和上面的表格思路一样,我们需要建立的表格就是学生选课信息表,从中不仅可以查询学生信息,更可以查询课程信息,以及每个学生选课的成绩!
2)、所有的关系整个为一个学生信息资源表,studentInformation,该表中包含三个列族名:学习信息、数学选课信息、计算机选课信息、英选课信息,而每个列族名下面包括几个子列名,例如:
学生信息的子列是:学生学号、学生姓名、性别、年龄
选课信息的子列是:课程号、课程名、学分、成绩
由此,我们便可以通过以上关系进行建表了!
三、创建Hbase关系数据表
1、终端运行hbase数据库,并进入hbase的shell界面
1)、运行SSH
ssh localhsot
2)、运行hadoop
start-dfs.sh
3)、运行hbase
start-hbase.sh
4)、查看是否成功启动
jps
出现以上7个节点,则表明hbase成功启动!前提是hbase和hadoop是进行的伪分布配置哦!
2、创建综合关系表
1)、创建综合关系表
create 'studentInformation','Student','Math','ComputerScience','English'
上图可以看到,综合关系表我们已经创建成功,接下来,我们需要进行的就是写入相关数据啦!
3、添加学生信息
1)、添加学号为2015001的学生信息,学号作为行键
put 'studentInformation','2015001','Student:S_No','2015001'
put 'studentInformation','2015001','Student:S_Name','ZhangSan'
put 'studentInformation','2015001','Student:S_Sex','male'
put 'studentInformation','2015001','Student:S_Age','23'
2)、添加学号为2015002的学生信息,学号作为行键
put 'studentInformation','2015002','Student:S_No','2015002'
put 'studentInformation','2015002','Student:S_Name','Mary'
put 'studentInformation','2015002','Student:S_Sex','female'
put 'studentInformation','2015002','Student:S_Age','22'
3)、添加学号为2015003的学生信息,学号作为行键
put 'studentInformation','2015003','Student:S_No','2015003'
put 'studentInformation','2015003','Student:S_Name','LiSi'
put 'studentInformation','2015003','Student:S_Sex','male'
put 'studentInformation','2015003','Student:S_Age','24'
4、添加学生选择课程的基本信息
1)、添加学号为:2015001学生的选课信息
由上面总结的综合关系表可以看出,学号为2015001的同学选择了数学和英语课程,因此,我们需要添加的也就是这两门课程的信息
①.添加该同学选择的数学课程的基本信息
put 'studentInformation','2015001','Math:C_No','123001'
put 'studentInformation','2015001','Math:C_Name','Math'
put 'studentInformation','2015001','Math:C_Credit','2.0'
②.添加该同学选择的英语课程的基本信息
put 'studentInformation','2015001','English:C_No','123002'
put 'studentInformation','2015001','English:C_Name','English'
put 'studentInformation','2015001','English:C_Credit','3.0'
2)、添加学号为:2015002学生的选课信息
由上面总结的综合关系表可以看出,学号为2015002的同学选择了英语和计算机科学课程,因此,我们需要添加的也就是这两门课程的信息
①.添加该同学选择的英语课程的基本信息
put 'studentInformation','2015002','English:C_No','123002'
put 'studentInformation','2015002','English:C_Name','English'
put 'studentInformation','2015002','English:C_Credit','3.0'
②.添加该同学选择的计算机科学课程的基本信息
put 'studentInformation','2015002','ComputerScience:C_No','123003'
put 'studentInformation','2015002','ComputerScience:C_Name','ComputerScience'
put 'studentInformation','2015002','ComputerScience:C_Credit','5.0'
3)、添加学号为:2015003学生的选课信息
由上面总结的综合关系表可以看出,学号为2015003的同学选择了数学和计算机科学课程,因此,我们需要添加的也就是这两门课程的信息
①.添加该同学选择的数学课程的基本信息
put 'studentInformation','2015003','Math:C_No','123001'
put 'studentInformation','2015003','Math:C_Name','Math'
put 'studentInformation','2015003','Math:C_Credit','2.0'
②.添加该同学选择的计算机科学课程的基本信息
put 'studentInformation','2015003','ComputerScience:C_No','123003'
put 'studentInformation','2015003','ComputerScience:C_Name','ComputerScience'
put 'studentInformation','2015003','ComputerScience:C_Credit','5.0'
现在我们学生所选择课程的基本信息我们已经添加完成,接下来当然是添加的学生所选择课程的成绩啦!
5、添加学生所选课程的成绩
1)、添加学号为:2015001学生所选课的成绩
学号为2015001的同学选择了数学和英语课程,所以他只有这两门课程会有成绩
put 'studentInformation','2015001','Math:SC_Score','86'
put 'studentInformation','2015001','English:SC_Score','69'
2)、添加学号为:2015002学生所选课的成绩
学号为2015002的同学选择了英语和计算机科学课程,所以他只有这两门课程会有成绩
put 'studentInformation','2015002','English:SC_Score','77'
put 'studentInformation','2015002','ComputerScience:SC_Score','99'
3)、添加学号为:2015003学生所选课的成绩
学号为2015003的同学选择了数学和计算机科学课程,所以他只有这两门课程会有成绩
put 'studentInformation','2015003','Math:SC_Score','98'
put 'studentInformation','2015003','ComputerScience:SC_Score','95'
6、学生选课信息查询
1)、查询学号为:2015001同学的学生信息及选课信息和所得的成绩
get 'studentInformation','2015001'
从查询的结果可以看出该同学的基本信息,和选择了两门课程:英语、数学;分别的成绩为:69、86
2)、查询学号为:2015002同学的学生信息及选课信息和所得的成绩
get 'studentInformation','2015002'
从查询的结果可以看出该同学的基本信息,和选择了两门课程:英语、计算机科学;分别的成绩为:77、99
3)、查询学号为:2015003同学的学生信息及选课信息和所得的成绩
get 'studentInformation','2015003'
从查询的结果可以看出该同学的基本信息,和选择了两门课程:数学、计算机科学;分别的成绩为:98、95!
7、关系Hbase数据库,结束该实验
exit
stop-hbase.sh
stop-dfs.sh
exit
由上面的添加数据的操作过程,我们可以知道,通过hbase的shell命令进行数据库表中数据的添加是一个非常痛苦的过程、因为只能一列一列的添加,而且还只能添加一列中一个数据,也就是以单元格为单位,一个一个单元格的添加! 啊,无情!
通过以上的关系数据库的分析步骤,林君学长就将Hbase关系数据库的分析分享给大家了,希望大家可以花时间下去消化一下,假如不是学生与课程的关系数据库变为教师与授课的关系数据库表又应该怎么分析;假如关系表不只有这个三个,而是有更过的关系表,我们又应该怎么进行分析,这都可以帮助自己加强自己的思维哦!
对以上分析有不懂的小伙伴,记得评论区留言,林君学长看到会为大家解答的,这个学长不太冷!
陈一月的又一天编程岁月^ _ ^