Hive之SQL

梦里梦外; 2021-09-23 15:18 316阅读 0赞

下面继续来分享并记录HIVE相关：

1、SELECT和WHERE

hive> SELECT a.apple FROM fruits a WHERE a.banana = '1';

将查询数据插入HDFS文件夹

hive> INSERT OVERWRITE DIRECTORY '/tmp/hdfs_out' SELECT a.*FROM fruits a WHERE a.banana = '1';

分区表表查询时需要在where后选择一个分区

hive> INSERT OVERWRITE LOCAL DIRECTORY '/tmp/local_out' SELECT a.* FROM pokes a;

查询所有的列插入本地目录：

hive> INSERT OVERWRITE TABLE events SELECT a.* FROM profiles a;
    hive> INSERT OVERWRITE TABLE events SELECT a.* FROM profiles a WHERE a.key < 100;
    hive> INSERT OVERWRITE LOCAL DIRECTORY '/tmp/reg_3' SELECT a.* FROM events a;
    hive> INSERT OVERWRITE DIRECTORY '/tmp/reg_4' select a.invites, a.pokes FROM profiles a;
    hive> INSERT OVERWRITE DIRECTORY '/tmp/reg_5' SELECT COUNT(*) FROM invites a WHERE a.ds ='1';
    hive> INSERT OVERWRITE DIRECTORY '/tmp/reg_5' SELECT a.foo, a.bar FROM invites a;
    hive> INSERT OVERWRITE LOCAL DIRECTORY '/tmp/sum' SELECT SUM(a.pc) FROM pc1 a;

2、GROUP BY

hive> FROM invites a INSERT OVERWRITE TABLE events SELECT a.bar, count(*) WHERE a.foo > 0 GROUP BY a.bar;
    hive> INSERT OVERWRITE TABLE events SELECT a.bar, count(*) FROM invites a WHERE a.foo > 0 GROUP BY a.bar;

3、JOIN

hive> FROM pokes t1 JOIN invites t2 ON (t1.bar = t2.bar) INSERT OVERWRITE TABLE events SELECT t1.bar, t1.foo, t2.foo;

4、MULTITABLE INSERT

FROM src
    INSERT OVERWRITE TABLE dest1 SELECT src.* WHERE src.key < 100
    INSERT OVERWRITE TABLE dest2 SELECT src.key, src.value WHERE src.key >= 100 and src.key < 200
    INSERT OVERWRITE TABLE dest3 PARTITION(ds = '1', hr='2') SELECT src.key WHERE src.key >= 200
    INSERT OVERWRITE TABLE LOCAL DIRECTORY '/tmp/dest4.out' SELECT src.value WHERE src.key >= 300;

发表评论取消回复

表情：

评论列表（有 0 条评论，316人围观）

还没有评论，来说两句吧...

相关阅读

相关 13.1、Flink Table API & SQL - Hive之hive概览

pache Hive已经成为数据仓库生态系统的焦点。它不仅是一个用于大数据分析和ETL的SQL引擎，也是一个数据管理平台，在这里数据被发现、定义和发展。 Flink提供...

痛定思痛。/ 2024年04月17日 06:00/ 0 赞/ 56 阅读

相关 Spark SQL 1.x之Hive Context

使用SparkSQL时，并不需要搭建一个Hive，只需要一个HiveSite就可以添加Hive配置文件将Hive中的`hive-site.xml`复制到spark中

我就是我/ 2023年07月18日 09:50/ 0 赞/ 21 阅读

相关大数据开发之Hive篇15-Hive之hpl/sql编程

备注: Hive 版本 2.1.1 文章目录一. HPL/SQL概述二.HPL/SQL测试案例 2.1 测试执行简单sql

左手的ㄟ右手/ 2023年01月03日 12:47/ 0 赞/ 523 阅读

相关 Hive Sql 案例

[(94条消息) Hive Sql 案例\_abluer~的博客-CSDN博客\_hive sql实例][94_ Hive Sql _abluer_-CSDN_hive sql

梦里梦外;/ 2022年10月11日 01:12/ 0 赞/ 178 阅读

相关大数据Hive系列之Hive常用SQL

1. hive导出数据到hdfs 语法：export table 表名 to '输出路径'; 例子：export table cloud.cus

喜欢ヅ旅行/ 2022年05月15日 00:38/ 0 赞/ 309 阅读

相关 Hive SQL 练习

前言本章主要, 转载一篇`Hive SQL`的一些练习题. 做一做, 练习下做业务的能力. 本文相关资源, 可在我的Github项目 [https://github.

谁借莪１个温暖的怀抱￠/ 2022年02月21日 13:20/ 0 赞/ 340 阅读

相关 Hive sql总结

Hive 是基于Hadoop 构建的一套数据仓库分析系统，它提供了丰富的SQL查询方式来分析存储在Hadoop 分布式文件系统中的数据，可以将结构化的数据文件映射为一张数

川长思鸟来/ 2022年01月15日 11:35/ 0 赞/ 259 阅读

相关 Hive SQL

拼接函数(行转列): collect\_set():把多个值去重拼接成一个数组 collect\_list():同上，不去重 concat\_ws():用指定分隔符

Bertha 。/ 2021年10月13日 02:02/ 0 赞/ 398 阅读

相关 Hive之SQL

下面继续来分享并记录HIVE相关： 1、SELECT和WHERE hive> SELECT a.apple FROM fruits a WHERE a.banana

梦里梦外;/ 2021年09月23日 15:18/ 0 赞/ 317 阅读

相关 Hive SQL 优化

1.案例一原sql： select count(case when a.id in (select id from b) then 1 esle 0) from

叁歲伎倆/ 2021年09月21日 14:34/ 0 赞/ 389 阅读