轻松入门大数据第10章入门到进阶：如何快速掌握Hive核心函数 10.1 Hive函数 10.1.20 窗口分析函数场景NTILE的使用

ゝ一纸荒年。 2024-03-16 11:55 28阅读 0赞

### 轻松入门大数据 ###

#### 文章目录 ####

*   *  轻松入门大数据
     *   *  第10章 入门到进阶：如何快速掌握Hive核心函数
         *   *  10.1 Hive函数
             *   *  10.1.20 窗口分析函数场景NTILE的使用

![在这里插入图片描述][0bb4158408bc4a5391a84d66692de9b7.png_pic_center]

#### 第10章 入门到进阶：如何快速掌握Hive核心函数 ####

##### 10.1 Hive函数 #####

> 1.  复杂数据类型
> 2.  Hive内置函数
> 3.  Hive UDF函数
> 4.  窗口分析函数
> 5.  SQL场景题

###### 10.1.20 窗口分析函数场景NTILE的使用 ######

这里又有一份数据：`rank.txt`

gifshow.com,2019-04-10,1
    gifshow.com,2019-04-11,5
    gifshow.com,2019-04-12,7
    gifshow.com,2019-04-13,3
    gifshow.com,2019-04-14,2
    gifshow.com,2019-04-15,4
    gifshow.com,2019-04-16,4
    yy.com,2019-04-10,2
    yy.com,2019-04-11,3
    yy.com,2019-04-12,5
    yy.com,2019-04-13,6
    yy.com,2019-04-14,3
    yy.com,2019-04-15,9
    yy.com,2019-04-16,7

![在这里插入图片描述][4996eabecfd542e6bf4e61fc123612e1.png_pic_center]

解释：`域名,日期,流量`

创建表并加载数据+查一下：

create table win_traffic(
    domain string,
    `time` string,
    traffic int
    )row format delimited fields terminated by ',';
    
    load data local inpath '/home/hadoop/data/window/rank.txt' into table win_traffic;
    
    select * from win_traffic;

![在这里插入图片描述][aa4a9753bf2e4dc697004fb9f2d77a12.png_pic_center]

OK， 没问题。

需求：每种域名的数据查出来1/3

编写语句：

select domain,`time`,traffic,
    NTILE(2) over(partition by domain order by `time`) rn1,
    NTILE(3) over(partition by domain order by `time`) rn2
    from
    win_traffic
    order by domain,`time`;

看结果分析

![在这里插入图片描述][ef1dfc311f2b49f4bc9673e9c287f7b9.png_pic_center]

同样开了不止一个作业【虽然慢，但是一定要认识清楚我们的使用场景】

![在这里插入图片描述][2eb2ce24a2f6480a99a71ad19fb0f7fa.png_pic_center]

结果出来了

解释一下：

`rn1` 分两个桶，每种域名一种一半

`rn2` 分三个桶，每种域名1/3

分不清的情况，优先满足前一个桶。

[0bb4158408bc4a5391a84d66692de9b7.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/e3eaf9f10bd84e99a53c7857b23e5805.png
[4996eabecfd542e6bf4e61fc123612e1.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/639614ae5fe549f7ab59b6ab213216b6.png
[aa4a9753bf2e4dc697004fb9f2d77a12.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/ae33dc0fd5ca4ac8a3a609c9a55344ec.png
[ef1dfc311f2b49f4bc9673e9c287f7b9.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/4bf77545ba934025820d4e42bf88fd80.png
[2eb2ce24a2f6480a99a71ad19fb0f7fa.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/0128634e37284ed196fe8bc3786d6313.png