轻松入门大数据第10章入门到进阶：如何快速掌握Hive核心函数 10.1 Hive函数 10.1.1 动手实操复杂数据类型之array

向右看齐 2024-03-16 10:24 35阅读 0赞

### 轻松入门大数据 ###

#### 文章目录 ####

*   *  轻松入门大数据
     *   *  第10章 入门到进阶：如何快速掌握Hive核心函数
         *   *  10.1 Hive函数
             *   *  10.1.1 动手实操复杂数据类型之array

![在这里插入图片描述][3e5dfd1fa1804dae904d64ecfd9452f5.png_pic_center]

#### 第10章 入门到进阶：如何快速掌握Hive核心函数 ####

##### 10.1 Hive函数 #####

> 1.  复杂数据类型
> 2.  Hive内置函数
> 3.  Hive UDF函数
> 4.  窗口分析函数
> 5.  SQL场景题

###### 10.1.1 动手实操复杂数据类型之array ######

看到官网文档：[https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Types][https_cwiki.apache.org_confluence_display_Hive_LanguageManual_Types]

![在这里插入图片描述][a08a3f0aa1b543cb80c03353eac61be5.png_pic_center]

Hive 的数据类型

滑下去：[https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Types\#LanguageManualTypes-ComplexTypes][https_cwiki.apache.org_confluence_display_Hive_LanguageManual_Types_LanguageManualTypes-ComplexTypes]

![在这里插入图片描述][fb6043033d454247a296e55198e3b6ee.png_pic_center]

复杂的数据类型：

*  array：数组
 *  maps：KV
 *  structs：结构体
 *  union

我们先看数组：【MySQL中可没有内置的数组类型哦】

array\_type

ARRAY < data\_type >

来份数据，`hive_array.txt`

pk	beijing,shanghai,tianjin,hangzhou
    zs	changchu,chengdu,wuhan,beijing

![在这里插入图片描述][0eb88c2c3e8b4185a701cd8dd2a61049.png_pic_center]

两个人名对应着一串地址。【这一串东西就很适合用数组存储了】

创建表：

create table hive_array(
    name string,
    work_location ARRAY<string>
    )ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t'
    COLLECTION ITEMS TERMINATED BY ',';

加载数据：

load data local inpath '/home/hadoop/data/hive-array.txt' overwrite into table hive_array;

![在这里插入图片描述][d99a00eab76c43938456f02d74413975.png_pic_center]

OK，查询一下

![在这里插入图片描述][bcb15018717e4b8ead7b00c56a81ba3d.png_pic_center]

妙啊，再看看表结构

![在这里插入图片描述][0d802e85bd564b25b463584f53a902b1.png_pic_center]

没问题，数组类型

如何取值：

select name,work_location[0] from hive_array;

![在这里插入图片描述][0bb5e412e2624d5199e88a0a548ef488.png_pic_center]

没问题。

如果越界了：

![在这里插入图片描述][58894b3c181b4c66b092994dee60d316.png_pic_center]

是null 。

求数组长度：

select name,size(work_location) from hive_array;

![在这里插入图片描述][145f99e3411441bdb511b48fdd6ec5e2.png_pic_center]

都是4个没问题。

判断数组中是否有xxx：

select * from hive_array where array_contains(work_location,'tianjin');

![在这里插入图片描述][8e77b5a8a42d43b3b8d3f6f81668a836.png_pic_center]

> 对于复杂数据类型，要掌握的就是如何往里面加载数据然后如何查出数据。

[3e5dfd1fa1804dae904d64ecfd9452f5.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/db843303fd3c4e96a05d17ac58928b04.png
[https_cwiki.apache.org_confluence_display_Hive_LanguageManual_Types]: https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Types
[a08a3f0aa1b543cb80c03353eac61be5.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/c0d1a0b1edba4d6ab11b8ae6c6fbd489.png
[https_cwiki.apache.org_confluence_display_Hive_LanguageManual_Types_LanguageManualTypes-ComplexTypes]: https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Types#LanguageManualTypes-ComplexTypes
[fb6043033d454247a296e55198e3b6ee.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/b49419172a5243b6b0d0e57b89d2617d.png
[0eb88c2c3e8b4185a701cd8dd2a61049.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/2ee5acae2fbf40749abcc31f91c1dcb4.png
[d99a00eab76c43938456f02d74413975.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/f5b2b623043a4ec2993074b3c9a24edb.png
[bcb15018717e4b8ead7b00c56a81ba3d.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/34d052dcf2eb4fb48b14303ba2430731.png
[0d802e85bd564b25b463584f53a902b1.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/49bd5acf1f1247838c3c1cd9579bb896.png
[0bb5e412e2624d5199e88a0a548ef488.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/417ee6c0091b43209a51b37ac7601107.png
[58894b3c181b4c66b092994dee60d316.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/db7654c401dd4dedabcdc32112bf264c.png
[145f99e3411441bdb511b48fdd6ec5e2.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/fa94d6fb86094379a0ebeae4d095a2bf.png
[8e77b5a8a42d43b3b8d3f6f81668a836.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/03/16/d56d65e187aa4bce83e55e3994449ed9.png