轻松入门大数据第11章入门到进阶：如何快速学会Hive调优 11.1 Hive调优 11.1.6 Hive4大by之sort by

左手的ㄟ右手 2024-03-16 12:11 49阅读 0赞

### 轻松入门大数据 ###

#### 文章目录 ####

*   *  轻松入门大数据
     *   *  第11章 入门到进阶：如何快速学会Hive调优
         *   *  11.1 Hive调优
             *   *  11.1.6 Hive4大by之sort by

![在这里插入图片描述][353ae86fa82048c9992089f43291d42c.png_pic_center]

#### 第11章 入门到进阶：如何快速学会Hive调优 ####

##### 11.1 Hive调优 #####

> 1.  抓取策略
> 2.  严格模式
> 3.  本地模式
> 4.  排序
> 5.  推测执行
> 6.  Mapper和Reducer个数设置
> 7.  数据倾斜

###### 11.1.6 Hive4大by之sort by ######

**sort by**

*  分区内有序
 *  可以设置多个reducetask，只保证每个reduce出来的结果有序，不保证全局有序
 *  与严格模式没关系
 *  注意sort by后面跟的字段的数据类型

测试一下：

上一节我们已经把red 数量设置为3了

![在这里插入图片描述][f7d48bcbeb5d4457947d903bf10ee2ec.png_pic_center]

运行：

select * from emp sort by empno;

![在这里插入图片描述][53ddc480198b4786b7a59a8912a74cab.png_pic_center]

没问题，3 个reducetask

![在这里插入图片描述][64e21addad4945b78adc319b1290c6d9.png_pic_center]

可以看到，单个reduce 出来的结果有序，不保证全局有序。

现在员工编号是数值，如果是字典(字符串)的话【字典序】：

我们直接试试按照`ename` 排序：

select * from emp sort by ename;

![在这里插入图片描述][e69c89e9eafb41d290081df0c465a575.png_pic_center]

没问题，也是保证每个reduce 中是按照字符串的字典序

可以看到我们这里并没有`limit` 也正常执行了，就是说`sort by` 与严格模式没关系。

[353ae86fa82048c9992089f43291d42c.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/d152936f508a4ff1a9386ce62ae0dd11.png
[f7d48bcbeb5d4457947d903bf10ee2ec.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/3e4f9d4014e54a10bc61fddea32ac090.png
[53ddc480198b4786b7a59a8912a74cab.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/6f05af124b094252a1db07ef80dcd438.png
[64e21addad4945b78adc319b1290c6d9.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/8d65d18575ee4b0383aa33b79c017694.png
[e69c89e9eafb41d290081df0c465a575.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/ec3fbb4da6074d1cb786502c9a546a9f.png