Hive：GROUP BY GROUPING SETS

已于 2024-04-14 15:06:13 修改
阅读量415 收藏 1
点赞数 1
CC 4.0 BY-SA版权
文章标签： hive 大数据
于 2024-04-14 15:03:29 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ALX3li/article/details/137745160
本文详细解释了SQL中的分组聚合函数groupby，特别是groupingsets的用法，以及如何通过UNIONALL操作合并不同维度的GROUPBY结果。特别强调GROUPING_ID的作用和NULL值在聚合后的表现。通过一个实例展示了如何在SQL查询中使用这些概念。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

分组聚合
group by x1, x2, x3

grouping sets((x1), (x1, x2), (x1, x3),(x1, x2, x3))

将不同维度的GROUP BY结果进行UNION ALL操作

GROUPING SETS会把在单个GROUP BY逻辑中没有参与GROUP BY的那一列置为NULL值，这样聚合出来的结果，未被GROUP BY的列将显示为NULL。

GROUPING__ID，表示结果属于哪一个分组集合。

举例

select a,
       b,
       c,
       count(*),
       grouping__id
  from
values (1,2,
最低0.47元/天 解锁文章

200万优质内容无限畅学
冬至喵喵
关注
实战 | Hive 如何使用 Grouping Sets
SmartSi
08-13 746
这篇文章描述了 SELECT 语句 GROUP BY 子句的增强聚合功能 GROUPING SETS。GROUPING SETS 子句是 SELECT 语句的 GROUP BY 子句的扩展。通过 GROUPING SETS 子句，你可采用多种方式对结果分组，而不必使用多个 SELECT 语句来实现这一目的。这就意味着，能够减少响应时间并提高性能。...
【Hive】多维函数 『grouping sets() | with cube | with rollup 』
渐渐的忘记，赶不上明天（读研ing，2024年毕业）
12-12 5192
1. 语法 2. 例子
Hive_6. 数据聚合 -- Group By & Grouping_SETS & RollUp & CUBE & Having
Mike han
12-03 1万+
先完善列表结构，会后续填充内容
Hive -- 窗口函数(五) GROUPING SETS,GROUPING__ID,CUBE,ROLLUP
认真学代码的shell
08-13 898
GROUPING SETS,GROUPING__ID,CUBE,ROLLUP 这几个分析函数通常用于OLAP中，不能累加，而且需要根据不同维度上钻和下钻的指标统计，比如，分小时、天、月的UV数。 Hive版本为 apache-hive-0.13.1 0 数据准备： 2015-03,2015-03-10,cookie1 2015-03,2015-03-10,cookie5 2015-03,2015-03-12,cookie7 2015-04,2015-04-12,cookie3 2015-04,2015-04
sql分组 group by rollup,cube,grouping sets,group_id,groupingId
最新发布
yang9yun的博客
06-01 504
摘要：本文介绍了SQL中常用的分组操作，包括GROUP BY、ROLLUP、CUBE、GROUPING SETS及其相关函数GROUP_ID、GROUPING_ID和GROUPING。通过实例展示了基础分组、层次分组(ROLLUP)、多维分组(CUBE)和灵活分组(GROUPING SETS)的使用方法，并解释了GROUP_ID用于区分相同分组结果、GROUPING_ID通过二进制标识分组列状态、GROUPING判断结果集是否按指定项分组的原理。这些分组扩展功能增强了数据分析的灵活性。
Hive之grouping sets用法详解
weixin_43597208的博客
08-20 1万+
比如(class, course), 二进制为 101，十进制则为5，则grouping__id为5，同理grouping__id为6，则组合为（sex,course），二进制为110；比如 group by class,sex,course,则二进制的顺序为：course sex class ,grouping sets字段出现则为1，反之则为0，关于grouping sets的使用，通俗的说，grouping sets是一种将多个group by 逻辑写在一个sql语句中的便利写法。
hive group by 和 select set
dd809477679的专栏
09-01 616
void function(int *a){ *a = 100; } int main(){ int x=200; int *b = &x; function(b); return(0); }  void function(int &a){ a = 100; } int main(){ int x = 200; function(x); return(0); }
Hive学习之二——group by和grouping sets的区别
qq_43146264的博客
09-18 4311
group by和grouping sets的区别
hive 不同维度聚合 grouping sets 使用详情
weixin_46609492的博客
04-18 721
【代码】hive 不同维度聚合 grouping sets 使用详情。
hive中cube, grouping sets, grouping__id应用
Brad_Q1的博客
07-16 1136
hive 中grouping sets, grouping__id以及cube的具体应用及案例
Hive.GROUPING SETS
hxiaowang的博客
07-04 3622
干货Aggregate Query with GROUPING SETSEquivalent Aggregate Query with GROUP BYSELECT a, b, SUM(c) FROM tab1 GROUP BY a, b GROUPING SETS ( (a,b) )SELECT a, b, SUM(c) FROM tab1 GROUP BY a, bSELECT a, b, S...
Hive group by、groupping sets、with cube, with rollup
weixin_34293059的博客
08-17 745
2019独角兽企业重金招聘Python工程师标准>>> ...
Hive之Grouping Sets函数
热门推荐
数据小白的进阶之路
03-17 3万+
最近在看一些关于Hive优化的东西，看到一个很好用的函数：Grouping Sets函数，今天就先总结一下关于这个函数的用法！ 在一个GROUP BY 查询中，根据不同的维度组合进行聚合，等价于将不同维度的GROUP BY结果进行UNION ALL操作。GROUPING SETS就是一种将多个GROUP BY逻辑UNION写在一个HIVE SQL语句中的便利写法。GROUPING SETS会把在...
Hive Group By 实现
半日闲的博客
09-11 2249
GroupByOperator 代码走读 在ExecReducer中会调用 reducer.startGroup();和reducer.endGroup();，这两个方法会递归调用到GroupByOperator中，用于设置firstRowInGroup = true和keysCurrentGroup.clear(); 进入processOp方法，首先判断如果hashAggr如果没有实现一半以...
Hive之Grouping Sets函数[详解]
weixin_42326851的博客
07-26 1598
Hive之Grouping Sets函数[详解]
Hive中的group set() 多维分析
好好学习天天向上
05-18 2443
文章目录grouping set() 多维分析 grouping set() 多维分析 将不同维度的GROUP BY结果进行UNION ALL操作。 UNION: A ∪ B 会自动去重 UNION ALL： A ∪ B 不会去重，显示所有 SELECT a,b,SUM(c) FROM table GROUP BY a,b GROUPING SETS((a,b),a,b,()) SELECT a,b,SUM(c) FROM table GROUP BY GROUPING SETS((a,b),a,b,
Hive分析窗口函数 GROUPING SETS、GROUPING__ID、CUBE、ROLLUP使用说明和示例
helloxiaozhe的博客
04-16 5787
Hive分析窗口函数 GROUPING SETS、GROUPING__ID、CUBE、ROLLUP使用说明和示例 0、概述 GROUPING SETS：根据不同的维度组合进行聚合，等价于将不同维度的GROUP BY结果集进行UNION ALL GROUPING__ID：表示结果属于哪一个分组集合，属于虚字段 CUBE：根据GROUP BY的维度的所有组合进行聚合。 ROLLUP：为CUBE的子集，以最左侧的维度为主，从该维度进行层级聚合。 这几个分析函数通常用于OLAP中，不能累加，而且需要根据不
Hive - grouping sets 示例与详解
BITDDD小栈
05-05 3935
介绍 group by 以及 grouping sets 相关用法。
HIVE相关方法优化之聚合函数GROUP SETS
weixin_40809627的博客
07-05 3842
1、背景 在数据开发统计相关计算过程中，group by 和group sets 是我们经常用的方法。但当统计指标过程中如果维度特别多，会使得数据任务运行特别慢，导致任务延迟经常出现。针对上面问题对group sets 常用指标进行调研优化。 2、 ...
hiveSql 报错 Grouping sets expression is not in GROUP BY key.
11-02
Hive SQL报这个错误通常是因为你在查询中尝试使用GROUPING SETS操作符对数据进行分组，但是该操作需要有一个明确的GROUP BY子句，以便确定如何组合行并计算聚合函数。GROUP BY子句指定的是哪些列应参与分组。 GROUPING SETS语法允许你指定一组列的集合来生成所有可能的分组，比如`SELECT column1, column2 GROUPING SETS ((column1), (column2))`。然而，如果在没有明确指定GROUP BY的情况下使用了GROUPING SETS，Hive会抛出这个错误，因为你没有告诉它依据哪些键来组织数据。 解决这个问题，你需要确保GROUP BY部分包含了GROUPING SETS表达式中列出的所有列或是一个合适的汇总，如COUNT()等，以便Hive能够理解如何进行分组。例如： ```sql SELECT column1, column2, COUNT(*) FROM table_name GROUP BY column1, column2 GROUPING SETS ((column1), (column2)); ```
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值