首页 > 其他 > 详细

Hive之累计报表生成

时间:2019-12-03 02:10:34      阅读:114      评论:0      收藏:0      [点我收藏+]

Hive之累计报表生成

1.原始数据

u01 2019/1/21 5
u02 2019/1/23 6
u03 2019/1/22 8
u04 2019/1/20 3
u01 2019/1/23 6
u01 2019/2/21 8
u02 2019/1/23 6
u01 2019/2/22 4

2.建表映射上述数据

create table action (userId string, visitDate string, visitCount int) row format delimited fields terminated by "\t";

技术分享图片

 

 

 3.按照用户和月份分组生成某用户的当月总访问次数

create table action_amount
as
select tmp.userid,tmp.month,sum(tmp.visitcount) amount from (select userid,from_unixtime(unix_timestamp(visitdate,‘yyyy/mm/dd‘),‘yyyy-mm‘) month,visitcount from action) tmp group by tmp.userid,tmp.month;

技术分享图片

4. 通过两个表的自连接,建立临时表

create table action_tmp
as
select a.amount as a_amount,b.*
from action_amount a join action_amount b on a.userid=b.userid
where a.month <= b.month;

技术分享图片

 

 5. 将上述表按照userid和month分组

select userid,month,max(amount) as amount,sum(a_amount) as accumulate
from action_tmp
group by userid,month;

技术分享图片

Hive之累计报表生成

原文:https://www.cnblogs.com/zhangchenchuan/p/11973764.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!