hive函数（Hive函数大全）

## Hive 函数### 简介Hive 是一种数据仓库系统，建立在 Hadoop 之上，允许用户使用 SQL 语句查询存储在 Hadoop 中的数据。Hive 提供了丰富的内置函数，可以用来处理数据、进行计算、转换数据格式等操作。这些函数可以分为以下几个类别：### 一、数学函数#### 1. 基本数学函数

abs(x):

返回 x 的绝对值。

ceil(x):

返回大于或等于 x 的最小整数。

floor(x):

返回小于或等于 x 的最大整数。

round(x):

返回四舍五入后的整数。

sqrt(x):

返回 x 的平方根。

pow(x, y):

返回 x 的 y 次方。

log(x):

返回 x 的自然对数。

log10(x):

返回 x 的以 10 为底的对数。

sin(x):

返回 x 的正弦值。

cos(x):

返回 x 的余弦值。

tan(x):

返回 x 的正切值。#### 2. 随机数函数

rand():

返回一个 0 到 1 之间的随机数。

random():

返回一个 0 到 1 之间的随机数。### 二、字符串函数#### 1. 字符串长度和截取函数

length(str):

返回字符串 str 的长度。

substr(str, start, len):

从字符串 str 中截取从 start 位置开始，长度为 len 的子字符串。

substring(str, start, len):

与 substr 函数相同。

trim(str):

去除字符串 str 两边的空格。

ltrim(str):

去除字符串 str 左边的空格。

rtrim(str):

去除字符串 str 右边的空格。#### 2. 字符串比较和转换函数

lower(str):

将字符串 str 转换为小写。

upper(str):

将字符串 str 转换为大写。

concat(str1, str2, ...):

将多个字符串连接在一起。

concat_ws(sep, str1, str2, ...):

将多个字符串连接在一起，使用 sep 作为分隔符。

replace(str, old_str, new_str):

将字符串 str 中的所有 old_str 替换为 new_str。

split(str, delim):

将字符串 str 以 delim 作为分隔符进行分割，并返回一个数组。

regexp_replace(str, regexp, rep):

使用正则表达式 regexp 替换字符串 str 中匹配的子字符串。

locate(substr, str):

返回子字符串 substr 在字符串 str 中第一次出现的位置。#### 3. 字符串格式化函数

initcap(str):

将字符串 str 的第一个字母转换为大写，其他字母转换为小写。

reverse(str):

将字符串 str 反转。### 三、日期和时间函数

current_date():

返回当前日期。

current_timestamp():

返回当前时间戳。

date_add(date, days):

将日期 date 加上 days 天。

date_sub(date, days):

将日期 date 减去 days 天。

year(date):

返回日期 date 的年份。

month(date):

返回日期 date 的月份。

day(date):

返回日期 date 的日期。

hour(timestamp):

返回时间戳 timestamp 的小时。

minute(timestamp):

返回时间戳 timestamp 的分钟。

second(timestamp):

返回时间戳 timestamp 的秒。

unix_timestamp():

返回当前时间戳的秒数。### 四、集合函数#### 1. 聚合函数

count(expr):

计算表达式 expr 的非空值个数。

sum(expr):

计算表达式 expr 的值的总和。

avg(expr):

计算表达式 expr 的值的平均值。

max(expr):

计算表达式 expr 的值的最大值。

min(expr):

计算表达式 expr 的值的最小值。

collect_set(expr):

返回表达式 expr 的唯一值集合。

collect_list(expr):

返回表达式 expr 的所有值集合。#### 2. 集合操作函数

array(expr1, expr2, ...):

创建一个包含多个表达式的数组。

map(key1, value1, key2, value2, ...):

创建一个包含键值对的 Map。

struct(field1, expr1, field2, expr2, ...):

创建一个包含多个字段的 Struct。### 五、其他函数

cast(expr as datatype):

将表达式 expr 转换为指定的数据类型。

get_json_object(json_string, path):

从 JSON 字符串中提取指定路径的值。

explode(array):

将数组拆分成多个行，每行代表数组中的一个元素。

collect_set(expr):

返回表达式 expr 的唯一值集合。

collect_list(expr):

返回表达式 expr 的所有值集合。### 总结Hive 函数提供了丰富的功能，可以帮助用户更方便地处理数据。在使用 Hive 函数时，需要了解函数的具体功能和使用方式，以便更好地利用它们来完成数据分析和处理任务。### 示例代码```sql -- 计算每个城市的用户数量 SELECT city, COUNT(

) AS user_count FROM users GROUP BY city;-- 将用户生日日期转换为年龄 SELECT name, YEAR(current_date()) - YEAR(birthday) AS age FROM users;-- 将字符串中的空格替换为下划线 SELECT REPLACE(name, ' ', '_') AS new_name FROM users; ```希望以上内容能够帮助您理解 Hive 函数的用法。

Hive 函数

简介Hive 是一种数据仓库系统，建立在 Hadoop 之上，允许用户使用 SQL 语句查询存储在 Hadoop 中的数据。Hive 提供了丰富的内置函数，可以用来处理数据、进行计算、转换数据格式等操作。这些函数可以分为以下几个类别：

一、数学函数

1. 基本数学函数* **abs(x):** 返回 x 的绝对值。 * **ceil(x):** 返回大于或等于 x 的最小整数。 * **floor(x):** 返回小于或等于 x 的最大整数。 * **round(x):** 返回四舍五入后的整数。 * **sqrt(x):** 返回 x 的平方根。 * **pow(x, y):** 返回 x 的 y 次方。 * **log(x):** 返回 x 的自然对数。 * **log10(x):** 返回 x 的以 10 为底的对数。 * **sin(x):** 返回 x 的正弦值。 * **cos(x):** 返回 x 的余弦值。 * **tan(x):** 返回 x 的正切值。

2. 随机数函数* **rand():** 返回一个 0 到 1 之间的随机数。 * **random():** 返回一个 0 到 1 之间的随机数。

二、字符串函数

1. 字符串长度和截取函数* **length(str):** 返回字符串 str 的长度。 * **substr(str, start, len):** 从字符串 str 中截取从 start 位置开始，长度为 len 的子字符串。 * **substring(str, start, len):** 与 substr 函数相同。 * **trim(str):** 去除字符串 str 两边的空格。 * **ltrim(str):** 去除字符串 str 左边的空格。 * **rtrim(str):** 去除字符串 str 右边的空格。

2. 字符串比较和转换函数* **lower(str):** 将字符串 str 转换为小写。 * **upper(str):** 将字符串 str 转换为大写。 * **concat(str1, str2, ...):** 将多个字符串连接在一起。 * **concat_ws(sep, str1, str2, ...):** 将多个字符串连接在一起，使用 sep 作为分隔符。 * **replace(str, old_str, new_str):** 将字符串 str 中的所有 old_str 替换为 new_str。 * **split(str, delim):** 将字符串 str 以 delim 作为分隔符进行分割，并返回一个数组。 * **regexp_replace(str, regexp, rep):** 使用正则表达式 regexp 替换字符串 str 中匹配的子字符串。 * **locate(substr, str):** 返回子字符串 substr 在字符串 str 中第一次出现的位置。

3. 字符串格式化函数* **initcap(str):** 将字符串 str 的第一个字母转换为大写，其他字母转换为小写。 * **reverse(str):** 将字符串 str 反转。

三、日期和时间函数* **current_date():** 返回当前日期。 * **current_timestamp():** 返回当前时间戳。 * **date_add(date, days):** 将日期 date 加上 days 天。 * **date_sub(date, days):** 将日期 date 减去 days 天。 * **year(date):** 返回日期 date 的年份。 * **month(date):** 返回日期 date 的月份。 * **day(date):** 返回日期 date 的日期。 * **hour(timestamp):** 返回时间戳 timestamp 的小时。 * **minute(timestamp):** 返回时间戳 timestamp 的分钟。 * **second(timestamp):** 返回时间戳 timestamp 的秒。 * **unix_timestamp():** 返回当前时间戳的秒数。

四、集合函数

1. 聚合函数* **count(expr):** 计算表达式 expr 的非空值个数。 * **sum(expr):** 计算表达式 expr 的值的总和。 * **avg(expr):** 计算表达式 expr 的值的平均值。 * **max(expr):** 计算表达式 expr 的值的最大值。 * **min(expr):** 计算表达式 expr 的值的最小值。 * **collect_set(expr):** 返回表达式 expr 的唯一值集合。 * **collect_list(expr):** 返回表达式 expr 的所有值集合。

2. 集合操作函数* **array(expr1, expr2, ...):** 创建一个包含多个表达式的数组。 * **map(key1, value1, key2, value2, ...):** 创建一个包含键值对的 Map。 * **struct(field1, expr1, field2, expr2, ...):** 创建一个包含多个字段的 Struct。

五、其他函数* **cast(expr as datatype):** 将表达式 expr 转换为指定的数据类型。 * **get_json_object(json_string, path):** 从 JSON 字符串中提取指定路径的值。 * **explode(array):** 将数组拆分成多个行，每行代表数组中的一个元素。 * **collect_set(expr):** 返回表达式 expr 的唯一值集合。 * **collect_list(expr):** 返回表达式 expr 的所有值集合。

总结Hive 函数提供了丰富的功能，可以帮助用户更方便地处理数据。在使用 Hive 函数时，需要了解函数的具体功能和使用方式，以便更好地利用它们来完成数据分析和处理任务。

示例代码```sql -- 计算每个城市的用户数量 SELECT city, COUNT(*) AS user_count FROM users GROUP BY city;-- 将用户生日日期转换为年龄 SELECT name, YEAR(current_date()) - YEAR(birthday) AS age FROM users;-- 将字符串中的空格替换为下划线 SELECT REPLACE(name, ' ', '_') AS new_name FROM users; ```希望以上内容能够帮助您理解 Hive 函数的用法。