我是靠谱客的博主 大方电源,最近开发中收集的这篇文章主要介绍2021-05-08Hive中的函数(二),觉得挺不错的,现在分享给大家,希望可以做个参考。

概述

Hive中的函数(二)

1.窗口函数

窗口函数又名开窗函数,属于分析函数的一种。用于解决复杂报表统计需求的功能强大的函 数。窗口函数用于计算基于组的某种聚合值,它和聚合函数的不同之处是:对于每个组返回

多行,而聚合函数对于每个组只返回一行。开窗函数指定了分析函数工作的数据窗口大小, 这个数据窗口大小可能会随着行的变化而变化。

 

·默认的数据库的查询都是要么详细记录,要么聚合分析,如果要查询详细记录和聚合数据,必 须要经过两次查询

·简单的说窗口函数对每条详细记录开一个窗口,进行聚合统计的查询

·默认mysql老版本没有支持,在最新的8.0版本中支持, Oracle和Hive中都支持窗口函数

2.语法

2.1over 开窗

使用窗口函数之前一般要通过over()进行开窗,简单可以写成==函数+over==简单的写法如下:

示例

-- 1.不使用窗口函数
-- 查询所有明细
select * from t_order;
# 查询总量 
select count(*) from t_order;
-- 2.使用窗口函数 
select *, count(*) over() from t_order;

注意:

窗口函数是针对每一行数据的.

如果over中没有参数,默认的是全部结果集

2.2partition by子句

在over窗口中进行分区,对某一列进行分区统计,窗口的大小就是分区的大小

2.3 order by

order by子句会让输入的数据强制排序

3.序列函数

3.1NTILE

用于将分组数据按照顺序切分成n片,返回当前切片值

3.2LAG和LEAD函数

·lag返回当前数据行的上一行数据

·lead返回当前数据行的下一行数据

3.3fifirst_value和last_value

·fifirst_value 取分组内排序后,截止到当前行,第一个值

·last_value 分组内排序后,截止到当前行,最后一个值

4.排名函数

·row_number从1开始,按照顺序,生成分组内记录的序列,row_number()的值不会存在 重复,当排序的值相同时,按照表中记录的顺序进行排列

·RANK() 生成数据项在分组中的排名,排名相等会在名次中留下空位

·DENSE_RANK() 生成数据项在分组中的排名,排名相等会在名次中不会留下空位

最后

以上就是大方电源为你收集整理的2021-05-08Hive中的函数(二)的全部内容,希望文章能够帮你解决2021-05-08Hive中的函数(二)所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。

本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
点赞(48)

评论列表共有 0 条评论

立即
投稿
返回
顶部