轻松入门大数据第11章入门到进阶：如何快速学会Hive调优 11.1 Hive调优 11.1.8 Hive4大by之cluster by

偏执的太偏执、 2024-03-16 12:12 7阅读 0赞

### 轻松入门大数据 ###

#### 文章目录 ####

*   *  轻松入门大数据
     *   *  第11章 入门到进阶：如何快速学会Hive调优
         *   *  11.1 Hive调优
             *   *  11.1.8 Hive4大by之cluster by

![在这里插入图片描述][314c17523cbe4b2a861343bae914b5e5.png_pic_center]

#### 第11章 入门到进阶：如何快速学会Hive调优 ####

##### 11.1 Hive调优 #####

> 1.  抓取策略
> 2.  严格模式
> 3.  本地模式
> 4.  排序
> 5.  推测执行
> 6.  Mapper和Reducer个数设置
> 7.  数据倾斜

###### 11.1.8 Hive4大by之cluster by ######

OK，到这里还剩下最后一个`by`，

**cluster by**

除了具备有distribute by之外 还具备sort by的功能

cluster by = distribute by xxx sort by xxx

直接试试：

insert overwrite local directory '/home/hadoop/hive_tmp/cluster1' row format delimited fields terminated by '\t' select * from temperature distribute by year sort by year;

![在这里插入图片描述][20cc8cf929cd4bd0951e682e2fae615f.png_pic_center]

insert overwrite local directory '/home/hadoop/hive_tmp/cluster2' row format delimited fields terminated by '\t' select * from temperature cluster by year;

![在这里插入图片描述][e27193590bca49f487c28ebfc7ee2691.png_pic_center]

意思这两种方式跑出来效果应该一样

看看结果

![在这里插入图片描述][c423f614ac0b4c008e60ff3a6a5eafad.png_pic_center]

![在这里插入图片描述][4bdb58b955e54cc9bf94e82bff32becd.png_pic_center]

没问题。一毛一样

但是要注意的时，cluster by 不能指明升降序【语法要求】

比如

select * from temperature cluster by year desc;

![在这里插入图片描述][837aa422fadf470dae4193ba97810bf4.png_pic_center]

直接就报错了。

[314c17523cbe4b2a861343bae914b5e5.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/4a08f947efa84cedb481ac17de74ba90.png
[20cc8cf929cd4bd0951e682e2fae615f.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/a60949adf6af44ef8f25c6b44b179931.png
[e27193590bca49f487c28ebfc7ee2691.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/dc124e0688524c3b8ab6450e328bff81.png
[c423f614ac0b4c008e60ff3a6a5eafad.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/69e13216a58e49d9866fa87b2531c945.png
[4bdb58b955e54cc9bf94e82bff32becd.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/8c2b5d86b0204512912f21608c93f277.png
[837aa422fadf470dae4193ba97810bf4.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/a43e244b18994bc6b4c134c8916334e8.png