hiveSQL常见函数及用法（持续收集）

短命女 2023-10-08 15:56 11阅读 0赞

### 1，时间函数 ###

![在这里插入图片描述][ad6295871f5641daaf1f35cf398e4da2.png]

### 2，聚合函数 ###

**注意：聚合函数常与 SELECT 语句的 GROUP BY 子句一块儿使用。换句话说使用聚合函数时，一个列字段要不在group by里，要没必要须在聚合函数里面，不能单独出现，不然报错。**  
![在这里插入图片描述][9b0393bf6ede4477b8b8fa0921bfb224.png]

### 3，字符串函数 ###

![在这里插入图片描述][1b23e26df28444fbaf28be533d80c66a.png]

### 4，连接函数 ###

![在这里插入图片描述][2232f20df2a54986aa135782c7acb684.png]

### 5，其他函数 ###

![在这里插入图片描述][96f900819c5346db9b8286fd6a69b747.png]

### 6，窗口函数 ###

**1，lead(col，n,m) over(partition by … order by …)**:  
其中col是要取的字段，n是取排序后的第几条记录；m是缺省值，如果后面的记录取不到值就去m，m的数据类型要和col一致，不然会报错，m可不填值，默认为空

**2，lag() over(partition by … order by …)**  
与lead() over(partition by … order by …)相似，只是去上一条记录的某字段；

**3，ROW\_NUMBER（）**  
为每一组的行按顺序生成一个连续序号。

**4，RANK（）**  
也为每一组的行生成一个序号，与ROW\_NUMBER()不同的是如果按照ORDER BY的排序，如果有相同的值会生成相同的序号，并且接下来的序号是不连序的。例如两个相同的行生成序号2，那么接下来会生成序号4

**5，DENSE\_RANK（）**  
和RANK（）类似，不同的是如果有相同的序号，那么接下来的序号不会间断。也就是说如果两个相同的行生成序号2，那么接下来生成的序号还是3。

**注意：3，4，5都属于排名开窗函数，ORDER BY 指定排名开窗函数的顺序，在排名开窗函数中必须使用ORDER BY语句。**

### 6，Hive-sql特点和sql的区别 ###

##### 1、Hive不支持等值连接 #####

不支持等值连接，一般使用left join、right join 或者inner join替代。

SQL中内关联可以这样写： select * from a , b where a.key = b.key
    Hive中应该这样写： select * from a join b on a.key = b.key
    hive中不能使用省去join的写法。

##### **2、分号字符** #####

分号是sql语句的结束符号，在hive中也是，但是hive对分号的识别没有那么智能，有时需要进行转义 “；” --> “\\073”

##### **3、NULL** #####

sql中null代表空值，但是在Hive中，String类型的字段若是空（empty）字符串，即长度为0，那么对它 is null 判断结果为False

##### **4、Hive不支持将数据插入现有的表或分区中** #####

Hive仅支持覆盖重写整个表。  
insert overwrite 表 （重写覆盖）

##### **5、Hive不支持 Insert into 表 Values()， UPDATA , DELETE 操作** #####

insert into 就是往表或者分区中追加数据。

##### **6、Hive支持嵌入mapreduce程序，来处理复杂的逻辑** #####

##### **7、Hive支持将转换后的数据直接写入不同的表，还能写入分区，hdfs和本地目录** #####

避免多次扫描输入表的开销。

##### **8、HQL不支持行级别的增、改、删，所有数据在加载时就已经确定，不可更改。** #####

##### **9，HiveSQL不支持事务，支持分区存储，HiveSQL落地到hdfs** #####

### 收藏加关注，再来不迷路！！！ ###

[ad6295871f5641daaf1f35cf398e4da2.png]: https://img-blog.csdnimg.cn/ad6295871f5641daaf1f35cf398e4da2.png
[9b0393bf6ede4477b8b8fa0921bfb224.png]: https://img-blog.csdnimg.cn/9b0393bf6ede4477b8b8fa0921bfb224.png
[1b23e26df28444fbaf28be533d80c66a.png]: https://img-blog.csdnimg.cn/1b23e26df28444fbaf28be533d80c66a.png
[2232f20df2a54986aa135782c7acb684.png]: https://img-blog.csdnimg.cn/2232f20df2a54986aa135782c7acb684.png
[96f900819c5346db9b8286fd6a69b747.png]: https://img-blog.csdnimg.cn/96f900819c5346db9b8286fd6a69b747.png