【hdfs】【hBase】【大数据技术基础】 作业二 hbase-shell命令

作业2  hbase-shell命令

一、运行HBase

1.启动hadoop

• 首先登陆ssh，之前设置了无密码登陆，因此这里不需要密码；
• 再切换目录至/usr/local/hadoop ；
• 再启动hadoop，如果已经启动hadoop请跳过此步骤。

命令如下：

2.验证hadoop是否启动

输入命令jps

能看到NameNode,DataNode和SecondaryNameNode都已经成功启动，表示hadoop启动成功，截图如下：

3.启动HBase

再启动HBase。

命令如下：

1. cd /usr/local/hbase
2. ./bin/start-hbase.sh

4.验证hadoop是否启动

启动成功，输入命令jps

看到以下界面，说明hbase启动成功

5.进入shell界面

1. ./bin/hbase shell

截图如下：

二、利用Shell命令操作HBASE表

2.1 HBase中创建表（shell界面）

HBase中用create命令创建表，具体如下：

  create 'student','Sname','Ssex','Sage','Sdept','course'

命令执行截图如下：

此时，即创建了一个“student”表，属性有：Sname,Ssex,Sage,Sdept,course。因为HBase的表中会有一个系统默认的属性作为行键，无需自行创建，默认为put命令操作中表名后第一个数据。创建完“student”表后，可通过describe命令查看“student”表的基本信息。命令执行截图如下：
【遇到的问题】：表已存在

ERROR: Table already exists: student!

使用list命令来查看所有表：

使用scan查看表中的所有数据：

【解决方法】：如果确定表 student 存在，并且你想要重新创建它，你需要先删除这个表。使用 disable 命令来禁用表，然后使用 drop 命令来删除它。

2.2 HBase数据库基本操作

主要介绍HBase的增、删、改、查操作。在添加数据时，HBase会自动为添加的数据添加一个时间戳，故在需要修改数据时，只需直接添加数据，HBase即会生成一个新的版本，从而完成“改”操作，旧的版本依旧保留，系统会定时回收垃圾数据，只留下最新的几个版本，保存的版本数可以在创建表的时候指定。

• 添加数据
  HBase中用put命令添加数据，注意：一次只能为一个表的一行数据的一个列，也就是一个单元格添加一个数据，所以直接用shell命令插入数据效率很低，在实际应用中，一般都是利用编程操作数据。
  当运行命令：put ‘student’,’95001’,’Sname’,’LiYing’时，即为student表添加了学号为95001，名字为LiYing的一行数据，其行键为95001。

put 'student','95001','Sname','LiYing'

命令执行截图如下，即为student表添加了学号为95001，名字为LiYing的一行数据，其行键为95001。

  put 'student','95001','course:math','80'

命令执行截图如下，即为95001行下的course列族的math列添加了一个数据。

大家可自行对95001的其他字段赋值，并赋予english、chinese、computer等课程成绩。

另外，也可增加几个新的学生信息，例如95002、95003、95004、95005的所有信息。

• 删除数据

在HBase中用delete以及deleteall命令进行删除数据操作，它们的区别是：1. delete用于删除一个数据，是put的反向操作；2. deleteall操作用于删除一行数据。

1. delete命令

  delete 'student','95001','Ssex'

命令执行截图如下， 即删除了student表中95001行下的Ssex列的所有数据。

2. deleteall命令

  deleteall 'student','95001'

命令执行截图如下，即删除了student表中的95001行的全部数据。

• 查看数据
  HBase中有两个用于查看数据的命令：1. get命令，用于查看表的某一行数据；2. scan命令用于查看某个表的全部数据

1. get命令

  get 'student','95001'

命令执行截图如下， 返回的是‘student’表‘95001’行的数据。

2. scan命令

  scan 'student'

命令执行截图如下， 返回的是‘student’表的全部数据。

• 删除表
  删除表有两步，第一步先让该表不可用，第二步删除表。

disable 'student'  

drop 'student'

命令执行截图如下：

2.3 查询表历史数据

查询表的历史版本，需要两步。
1、在创建表的时候，指定保存的版本数（假设指定为5）

  create 'teacher',{NAME=>'username',VERSIONS=>5}

2、插入数据然后更新数据，使其产生历史版本数据，注意：这里插入数据和更新数据都是用put命令

put 'teacher','91001','username','Mary'     

put 'teacher','91001','username','Mary1'

put 'teacher','91001','username','Mary2'

put 'teacher','91001','username','Mary3'

put 'teacher','91001','username','Mary4'  

put 'teacher','91001','username','Mary5'

3、查询时，指定查询的历史版本数。默认会查询出最新的数据。（有效取值为1到5）

  get 'teacher','91001',{COLUMN=>'username',VERSIONS=>5}

查询结果截图如下：

2.4 退出HBase数据库表操作

最后退出数据库操作，输入exit命令即可退出，注意：这里退出HBase数据库是退出对数据库表的操作，而不是停止启动HBase数据库后台运行。

Exit

三、自行设计执行下列HBASE常用命令

• 创建表 create ‘表名’, ‘列族名1’,‘列族名2’,‘列族名N’

create 'myTable', 'columnFamily1', 'columnFamily2'

• 查看所有表 list

list

• 描述表 describe ‘表名’

describe 'myTable'

• 判断表存在 exists ‘表名’

exists 'myTable'

• 判断是否禁用表 is_disabled ‘表名’

is_disabled 'myTable'

• 判断是否启用表 is_enabled ‘表名’

is_enabled 'myTable'

• 添加记录 put ‘表名’, ‘rowKey’, ‘列族 : 列‘ , ‘值’

put 'myTable', 'rowKey1', 'columnFamily1:column1', 'value1'

• 查看记录rowkey下的所有数据 get ‘表名’ , ‘rowKey’

get 'myTable', 'rowKey1'

• 查看表中的记录总数 count ‘表名’

count 'myTable'

• 获取某个列族 get ‘表名’,‘rowkey’,‘列族’

get 'myTable', 'rowKey1', 'columnFamily1'

• 获取某个列族的某个列 get ‘表名’,‘rowkey’,'列族：列’

get 'myTable', 'rowKey1', 'columnFamily1:column1'

• 删除记录 delete ‘表名’ ,‘行名’ , ‘列族：列’

delete 'myTable', 'rowKey1', 'columnFamily1:column1'

• 删除整行 deleteall ‘表名’,‘rowkey’

deleteall 'myTable', 'rowKey1'

• 删除一张表 先要屏蔽该表，才能对该表进行删除 ，第一步 disable ‘表名’ ，第二步 drop ‘表名’

disable 'myTable'

drop 'myTable'

• 清空表 truncate ‘表名’

truncate 'myTable', {PRESERVE_SPLITS => false}

• 查看所有记录 scan “表名”

scan 'myTable'

• 查看某个表某个列中所有数据 scan “表名” , {COLUMNS=>‘列族名:列名’}

scan 'myTable', {COLUMNS => ['columnFamily1:column1']}

• 更新记录 就是重写一遍，进行覆盖，hbase没有修改，都是追加

put 'myTable', 'rowKey1', 'columnFamily1:column1', 'newValue'

四、关闭HBase

停止HBase运行,命令如下：

./bin/stop-hbase.sh

【遇到的问题】：./sbin/stop-dfs.sh不能帮助我退出hadoop。

【解决方法】：exit命令可以退出hadoop。