Hive库表基本操作

淩亂°似流年 2023-10-11 23:44 5阅读 0赞

![0b05d5cf430c64e6212894209b251e8e.jpeg][]

### [Hive基本操作-库、表][Hive_-] ###

#### [规则语法][Link 1] ####

**大小写规则**:

1. hive的数据库名、表名都不区分大小写
    2. 建议关键字大写
    复制代码

**命名规则**：

1. 名字不能使用数字开头
    2. 不能使用关键字
    3. 尽量不使用特殊符号
    复制代码

#### [库操作语法][Link 2] ####

**创建数据库**

创建数据库的本质就是在hive的参数$\{hive.metastore.warehouse.dir\}对应的目录下，创建一个新的目录，此目录的名称为： 库名.db。

注意：在创建库或者表时除了创建目录外，还会在mysql中(元数据库)，添加元数据（描述信息）

hive> create database zoo;
    hive> create database if not exists zoo;
    hive> create database if not exists qfdb comment 'this is a database of qianfeng';
    复制代码

hive有一个默认的数据库default，如果不明确的说明要使用哪个库，则使用默认数据库。

**查看所有数据库**：实际就是从元数据库中获取对应的元数据

语法：show databases;
    复制代码

**切换数据库**

语法：use mydb;
    复制代码

**查看数据库信息**

语法1：desc database databaseName;
    语法2：desc database extended databaseName;
    语法3：describe database extended databaseName;
    复制代码

**删除数据库**

语法1：drop database databasename;         	  # 这个只能删除空库
    语法2：drop database databasename cascade;    	  # 如果不是空库，则可以加cascade强制删除
    复制代码

#### [表操作语法][Link 3] ####

[数据类型][Link 4]

Hive的数据类型分为基本数据类型和复杂数据类型,下面是基本数据类型(复杂类型到后期再讲)

**其中加粗体是重点要掌握的类型**

<table> 
 <thead> 
  <tr> 
   <th>分类</th> 
   <th>类型</th> 
   <th>描述</th> 
   <th>字面量示例</th> 
  </tr> 
 </thead> 
 <tbody> 
  <tr> 
   <td>基本类型</td> 
   <td>BOOLEAN</td> 
   <td>true/false</td> 
   <td>TRUE</td> 
  </tr> 
  <tr> 
   <td></td> 
   <td>TINYINT</td> 
   <td>1字节的有符号整数 -128~127</td> 
   <td>1Y</td> 
  </tr> 
  <tr> 
   <td></td> 
   <td>SMALLINT</td> 
   <td>2个字节的有符号整数，-32768~32767</td> 
   <td>1S</td> 
  </tr> 
  <tr> 
   <td></td> 
   <td><strong>INT</strong></td> 
   <td>4个字节的带符号整数</td> 
   <td>1</td> 
  </tr> 
  <tr> 
   <td></td> 
   <td>BIGINT</td> 
   <td>8字节带符号整数</td> 
   <td>1L</td> 
  </tr> 
  <tr> 
   <td></td> 
   <td>FLOAT</td> 
   <td>4字节单精度浮点数</td> 
   <td>1.0</td> 
  </tr> 
  <tr> 
   <td></td> 
   <td>DOUBLE</td> 
   <td>8字节双精度浮点数</td> 
   <td>1.0</td> 
  </tr> 
  <tr> 
   <td></td> 
   <td>DEICIMAL</td> 
   <td>任意精度的带符号小数</td> 
   <td>1.0</td> 
  </tr> 
  <tr> 
   <td></td> 
   <td><strong>STRING</strong></td> 
   <td>字符串，可变长度</td> 
   <td>“a”,’b’</td> 
  </tr> 
  <tr> 
   <td></td> 
   <td>VARCHAR</td> 
   <td>变长字符串,要设置长度</td> 
   <td>“a”,’b’</td> 
  </tr> 
  <tr> 
   <td></td> 
   <td>CHAR</td> 
   <td>固定长度字符串</td> 
   <td>“a”,’b’</td> 
  </tr> 
  <tr> 
   <td></td> 
   <td>BINARY</td> 
   <td>字节数组</td> 
   <td>无法表示</td> 
  </tr> 
  <tr> 
   <td></td> 
   <td>TIMESTAMP</td> 
   <td>时间戳，纳秒精度</td> 
   <td>122327493795</td> 
  </tr> 
  <tr> 
   <td></td> 
   <td>DATE</td> 
   <td>日期</td> 
   <td>‘2016-03-29’</td> 
  </tr> 
  <tr> 
   <td>复杂类型</td> 
   <td>ARRAY</td> 
   <td>有序的的同类型的集合</td> 
   <td>array(1,2)</td> 
  </tr> 
  <tr> 
   <td></td> 
   <td>MAP</td> 
   <td>key-value,key必须为原始类型，value可以任意类型</td> 
   <td>map(‘a’,1,’b’,2)</td> 
  </tr> 
  <tr> 
   <td></td> 
   <td>STRUCT</td> 
   <td>字段集合,类型可以不同</td> 
   <td>struct(‘1’,1,1.0)</td> 
  </tr> 
  <tr> 
   <td></td> 
   <td>UNION</td> 
   <td>在有限取值范围内的一个值</td> 
   <td>create_union(1,’a’,63)</td> 
  </tr> 
 </tbody> 
</table>

**文末扫码领取大数据礼包！**

[创建表][Link 5]

创建表的本质其实就是在对应的数据库目录下面创建一个子目录，目录名为表名。数据文件就存在这个目录下。

语法1: 
        create table t_user(id int,name string);  
    
    语法2：使用库.表的形式
        create table mydb.t_user(id int,name string);
    
    语法3：指定分隔规则形式
    create table if not exists t1(
    uname string comment 'this is name',
    chinese int,
    math int,
    english int
    )
    comment 'this is my table'
    row format delimited   
    fields terminated by '\t'
    lines terminated by '\n'
    stored as textfile;
    
    通过查新mysql数据库hive数据库 
    DBS表 --> 存储的是 在hive中创建库是存在元数据信息 
    TBLS表 ---> 存储的是 在hive中创建表的元数据信息 
    MANAGED_TABLE --> 内部表 -->表目录会创建在HDFS文件系统中相对应目录下 (user/hive.warehouse) 
    EXTERNAL_TABLE --> 外部表 --> 外部表会根据创建表时指定Location位置来创建表的位置 --> 如果没有指定Location默认会创建和内部表相同位置
    复制代码

PS:在我们访问HDFS文件系统时经常会出现，访问权限的问题

![2aa3d37bc7a18a241990d6d980cc6d56.png][]

WeChatccfa021cae7b026e239728d472715111

我们只需要先关闭HDFS文件系统，然后修改Hadoop安装目录中配制文件core-site.xml

<property>
    <name>hadoop.http.staticuser.user</name>
    <value>root</value>
    </property>
    
    
    <property>
    <name>dfs.permissions.enabled</name>
    <value>false</value>
    </property>
    
    复制代码

然后分发节点，重新启动HDFS即可

create table if not exists emp(
    eno int,
    ename string,
    job string, 
    mgr int,
    hiredate int,
    salary int,
    comm int,
    deptno int
    )
    row format delimited
    fields terminated by ','
    lines terminated by '\n'
    stored as textfile;
    复制代码

[查看当前表空间中的所有表名][Link 6]

语法：show tables; 
    # 查看另外一个数据库中的表
    show tables in zoo;
    复制代码

[查看表结构][Link 7]

desc tableName
    desc extended tableName;
    describe extended tableName;
    复制代码

[修改表结构(DML)][DML]

- 修改表名
        alter table oldTableName rename to newTableName;
      
    - 修改列名：change column	和修改字段类型是同一个语法
        alter table tableName change column oldName newName colType;
        alter table tableName change column colName colName colType;
    
    
    - 修改列的位置:  注意，2.x版本后，必须是相同类型进行移动位置。【hive进行修改时是修改映射列，不会修改映射数据文件】
        alter table tableName change column colName colName colType after colName1;   
        alter table tableName change column colName colName colType first;
        例如：
        create table t_1( id int, name string );
        向表插入数据的文件 xiaohong 18 列和数据对应不上 
        alter table t_1 change column id id int after name;
      create table t_1( name string id int, );
    
    
    - 增加字段：add columns
        alter table tableName add columns (sex int,...);
    
    
    - 删除字段：replace columns	#注意，2.x版本后，注意类型的问题，替换操作，其实涉及到位置的移动问题。
        alter table tableName replace columns(
        id int,
        name int,
        size int,
        pic string
        );
        注意：实际上是保留小括号内的字段。
    复制代码

[删除表][Link 8]

drop table tableName;

也可以观看大数据相关视频：

千锋大数据Hadoop全新增强版-先导片

![acc4eaa07f34449c805e0e3318382bd1.jpeg][]

[0b05d5cf430c64e6212894209b251e8e.jpeg]: https://img-blog.csdnimg.cn/img_convert/0b05d5cf430c64e6212894209b251e8e.jpeg
[Hive_-]: http://tuwen.1000phone.net/details?id=NjQ2Mw==#Hive%E5%9F%BA%E6%9C%AC%E6%93%8D%E4%BD%9C-%E5%BA%93%E3%80%81%E8%A1%A8
[Link 1]: http://tuwen.1000phone.net/details?id=NjQ2Mw==#%E8%A7%84%E5%88%99%E8%AF%AD%E6%B3%95
[Link 2]: http://tuwen.1000phone.net/details?id=NjQ2Mw==#%E5%BA%93%E6%93%8D%E4%BD%9C%E8%AF%AD%E6%B3%95
[Link 3]: http://tuwen.1000phone.net/details?id=NjQ2Mw==#%E8%A1%A8%E6%93%8D%E4%BD%9C%E8%AF%AD%E6%B3%95
[Link 4]: http://tuwen.1000phone.net/details?id=NjQ2Mw==#%E6%95%B0%E6%8D%AE%E7%B1%BB%E5%9E%8B
[Link 5]: http://tuwen.1000phone.net/details?id=NjQ2Mw==#%E5%88%9B%E5%BB%BA%E8%A1%A8
[2aa3d37bc7a18a241990d6d980cc6d56.png]: https://img-blog.csdnimg.cn/img_convert/2aa3d37bc7a18a241990d6d980cc6d56.png
[Link 6]: http://tuwen.1000phone.net/details?id=NjQ2Mw==#%E6%9F%A5%E7%9C%8B%E5%BD%93%E5%89%8D%E8%A1%A8%E7%A9%BA%E9%97%B4%E4%B8%AD%E7%9A%84%E6%89%80%E6%9C%89%E8%A1%A8%E5%90%8D
[Link 7]: http://tuwen.1000phone.net/details?id=NjQ2Mw==#%E6%9F%A5%E7%9C%8B%E8%A1%A8%E7%BB%93%E6%9E%84
[DML]: http://tuwen.1000phone.net/details?id=NjQ2Mw==#%E4%BF%AE%E6%94%B9%E8%A1%A8%E7%BB%93%E6%9E%84%28DML%29
[Link 8]: http://tuwen.1000phone.net/details?id=NjQ2Mw==#%E5%88%A0%E9%99%A4%E8%A1%A8
[acc4eaa07f34449c805e0e3318382bd1.jpeg]: https://img-blog.csdnimg.cn/acc4eaa07f34449c805e0e3318382bd1.jpeg