HIVE UDF（1）

清疚 2022-03-28 15:36 263阅读 0赞

## 字符串函数 ##

### 字符串长度函数：length ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: length(string A) <p></p> <p>返回值: int</p> <p>说明：返回字符串A的长度</p> <p>举例：</p> <p>hive&gt; select length(‘abcedfg’) from dual;</p> <p>7</p> </td> 
  </tr> 
 </tbody> 
</table>

### 字符串反转函数：reverse ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: reverse(string A) <p></p> <p>返回值: string</p> <p>说明：返回字符串A的反转结果</p> <p>举例：</p> <p>hive&gt; select reverse(‘abcedfg’) from dual;</p> <p>gfdecba</p> </td> 
  </tr> 
 </tbody> 
</table>

### 字符串连接函数：concat ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: concat(string A, string B…) <p></p> <p>返回值: string</p> <p>说明：返回输入字符串连接后的结果，支持任意个输入字符串</p> <p>举例：</p> <p>hive&gt; select concat(‘abc’,'def’,'gh’) from dual;</p> <p>abcdefgh</p> </td> 
  </tr> 
 </tbody> 
</table>

### 带分隔符字符串连接函数：concat\_ws ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: concat_ws(string SEP, string A, string B…) <p></p> <p>返回值: string</p> <p>说明：返回输入字符串连接后的结果，SEP表示各个字符串间的分隔符</p> <p>举例：</p> <p>hive&gt; select concat_ws(‘,’,'abc’,'def’,'gh’) from dual;</p> <p>abc,def,gh</p> </td> 
  </tr> 
 </tbody> 
</table>

### 字符串截取函数：substr,substring ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: substr(string A, int start),substring(string A, int start) <p></p> <p>返回值: string</p> <p>说明：返回字符串A从start位置到结尾的字符串</p> <p>举例：</p> <p>hive&gt; select substr(‘abcde’,3) from dual;</p> <p>cde</p> <p>hive&gt; select substring(‘abcde’,3) from dual;</p> <p>cde</p> <p>hive&gt;&nbsp; select substr(‘abcde’,-1) from dual;&nbsp; （和ORACLE相同）</p> <p>e</p> </td> 
  </tr> 
 </tbody> 
</table>

### 字符串截取函数：substr,substring ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: substr(string A, int start, int len),substring(string A, int start, int len) <p></p> <p>返回值: string</p> <p>说明：返回字符串A从start位置开始，长度为len的字符串</p> <p>举例：</p> <p>hive&gt; select substr(‘abcde’,3,2) from dual;</p> <p>cd</p> <p>hive&gt; select substring(‘abcde’,3,2) from dual;</p> <p>cd</p> <p>hive&gt;select substring(‘abcde’,-2,2) from dual;</p> <p>de</p> </td> 
  </tr> 
 </tbody> 
</table>

### 字符串转大写函数：upper,ucase ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: upper(string A) ucase(string A) <p></p> <p>返回值: string</p> <p>说明：返回字符串A的大写格式</p> <p>举例：</p> <p>hive&gt; select upper(‘abSEd’) from dual;</p> <p>ABSED</p> <p>hive&gt; select ucase(‘abSEd’) from dual;</p> <p>ABSED</p> </td> 
  </tr> 
 </tbody> 
</table>

### 字符串转小写函数：lower,lcase ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: lower(string A) lcase(string A) <p></p> <p>返回值: string</p> <p>说明：返回字符串A的小写格式</p> <p>举例：</p> <p>hive&gt; select lower(‘abSEd’) from dual;</p> <p>absed</p> <p>hive&gt; select lcase(‘abSEd’) from dual;</p> <p>absed</p> </td> 
  </tr> 
 </tbody> 
</table>

### 去空格函数：trim ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: trim(string A) <p></p> <p>返回值: string</p> <p>说明：去除字符串两边的空格</p> <p>举例：</p> <p>hive&gt; select trim(‘ abc ‘) from dual;</p> <p>abc</p> </td> 
  </tr> 
 </tbody> 
</table>

### 左边去空格函数：ltrim ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: ltrim(string A) <p></p> <p>返回值: string</p> <p>说明：去除字符串左边的空格</p> <p>举例：</p> <p>hive&gt; select ltrim(‘ abc ‘) from dual;</p> <p>abc</p> </td> 
  </tr> 
 </tbody> 
</table>

### 右边去空格函数：rtrim ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: rtrim(string A) <p></p> <p>返回值: string</p> <p>说明：去除字符串右边的空格</p> <p>举例：</p> <p>hive&gt; select rtrim(‘ abc ‘) from dual;</p> <p>abc</p> </td> 
  </tr> 
 </tbody> 
</table>

### 正则表达式替换函数：regexp\_replace ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: regexp_replace(string A, string B, string C) <p></p> <p>返回值: string</p> <p>说明：将字符串A中的符合java正则表达式B的部分替换为C。注意，在有些情况下要使用转义字符</p> <p>举例：</p> <p>hive&gt; select regexp_replace(‘foobar’, ‘oo|ar’, ”) from dual;</p> <p>fb</p> </td> 
  </tr> 
 </tbody> 
</table>

### 正则表达式解析函数：regexp\_extract ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: regexp_extract(string subject, string pattern, int index) <p></p> <p>返回值: string</p> <p>说明：将字符串subject按照pattern正则表达式的规则拆分，返回index指定的字符。注意，在有些情况下要使用转义字符</p> <p>举例：</p> <p>hive&gt; select regexp_extract(‘foothebar’, ‘foo(.*?)(bar)’, 1) from dual;</p> <p>the</p> <p>hive&gt; select regexp_extract(‘foothebar’, ‘foo(.*?)(bar)’, 2) from dual;</p> <p>bar</p> <p>hive&gt; select regexp_extract(‘foothebar’, ‘foo(.*?)(bar)’, 0) from dual;</p> <p>foothebar</p> </td> 
  </tr> 
 </tbody> 
</table>

### URL解析函数：parse\_url ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: parse_url(string urlString, string partToExtract [, string keyToExtract]) <p></p> <p>返回值: string</p> <p>说明：返回URL中指定的部分。partToExtract的有效值为：HOST, PATH, QUERY, REF, PROTOCOL, AUTHORITY, FILE, and USERINFO.</p> <p>举例：</p> <p>hive&gt; select parse_url(‘http://facebook.com/path1/p.php?k1=v1&amp;k2=v2#Ref1′, ‘HOST’) from dual;</p> <p>facebook.com</p> <p>hive&gt; select parse_url(‘http://facebook.com/path1/p.php?k1=v1&amp;k2=v2#Ref1′, ‘QUERY’, ‘k1′) from dual;</p> <p>v1</p> </td> 
  </tr> 
 </tbody> 
</table>

### json解析函数：get\_json\_object ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: get_json_object(string json_string, string path) <p></p> <p>返回值: string</p> <p>说明：解析json的字符串json_string,返回path指定的内容。如果输入的json字符串无效，那么返回NULL。</p> <p>举例：</p> <p>hive&gt; select&nbsp; get_json_object(‘{“store”:</p> <p>&gt;&nbsp;&nbsp; {“fruit”:\[{"weight":8,"type":"apple"},{"weight":9,"type":"pear"}],</p> <p>&gt;&nbsp;&nbsp;&nbsp; “bicycle”:{“price”:19.95,”color”:”red”}</p> <p>&gt;&nbsp;&nbsp; },</p> <p>&gt;&nbsp; “email”:”amy@only_for_json_udf_test.net”,</p> <p>&gt;&nbsp; “owner”:”amy”</p> <p>&gt; }</p> <p>&gt; ‘,’$.owner’) from dual;</p> <p>amy</p> </td> 
  </tr> 
 </tbody> 
</table>

### 空格字符串函数：space ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: space(int n) <p></p> <p>返回值: string</p> <p>说明：返回长度为n的字符串</p> <p>举例：</p> <p>hive&gt; select space(10) from dual;</p> <p>hive&gt; select length(space(10)) from dual;</p> <p>10</p> </td> 
  </tr> 
 </tbody> 
</table>

### 重复字符串函数：repeat ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: repeat(string str, int n) <p></p> <p>返回值: string</p> <p>说明：返回重复n次后的str字符串</p> <p>举例：</p> <p>hive&gt; select repeat(‘abc’,5) from dual;</p> <p>abcabcabcabcabc</p> </td> 
  </tr> 
 </tbody> 
</table>

### 首字符ascii函数：ascii ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: ascii(string str) <p></p> <p>返回值: int</p> <p>说明：返回字符串str第一个字符的ascii码</p> <p>举例：</p> <p>hive&gt; select ascii(‘abcde’) from dual;</p> <p>97</p> </td> 
  </tr> 
 </tbody> 
</table>

### 左补足函数：lpad ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: lpad(string str, int len, string pad) <p></p> <p>返回值: string</p> <p>说明：将str进行用pad进行左补足到len位</p> <p>举例：</p> <p>hive&gt; select lpad(‘abc’,10,’td’) from dual;</p> <p>tdtdtdtabc</p> <p>与GP，ORACLE不同，pad 不能默认</p> </td> 
  </tr> 
 </tbody> 
</table>

### 右补足函数：rpad ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: rpad(string str, int len, string pad) <p></p> <p>返回值: string</p> <p>说明：将str进行用pad进行右补足到len位</p> <p>举例：</p> <p>hive&gt; select rpad(‘abc’,10,’td’) from dual;</p> <p>abctdtdtdt</p> </td> 
  </tr> 
 </tbody> 
</table>

### 分割字符串函数: split ###

<table> 
 <tbody> 
  <tr> 
   <td>语法:&nbsp; split(string str, string pat) <p></p> <p>返回值:&nbsp; array</p> <p>说明: 按照pat字符串分割str，会返回分割后的字符串数组</p> <p>举例：</p> <p>hive&gt; select split(‘abtcdtef’,'t’) from dual;</p> <p>["ab","cd","ef"]</p> </td> 
  </tr> 
 </tbody> 
</table>

### 集合查找函数: find\_in\_set ###

<table> 
 <tbody> 
  <tr> 
   <td>语法: find_in_set(string str, string strList) <p></p> <p>返回值: int</p> <p>说明: 返回str在strlist第一次出现的位置，strlist是用逗号分割的字符串。如果没有找该str字符，则返回0</p> <p>举例：</p> <p>hive&gt; select find_in_set(‘ab’,'ef,ab,de’) from dual;</p> <p>2</p> <p>hive&gt; select find_in_set(‘at’,'ef,ab,de’) from dual;</p> <p>0</p> </td> 
  </tr> 
 </tbody> 
</table>