Hadoop离线数据分析平台实战——330会话分析Hourly分析
项目进度
模块名称 | 完成情况 |
---|---|
用户基本信息分析(MR)� | 未完成 |
浏览器信息分析(MR) | 未完成 |
地域信息分析(MR) | 未完成 |
外链信息分析(MR) | 未完成 |
用户浏览深度分析(Hive) | 未完成 |
订单分析(Hive) | 未完成 |
事件分析(Hive) | 未完成 |
模块介绍
Hourly分析指的是按照小时分析数据,
在本次项目中,只分析活跃用户、会话个数以及会话长度这三个指标的数据。
我们通过修改现有的job来达到完成hourly分析数据统计的目标。
分别通过在active user和sessions这两个job中添加数据可以达到我们的分析要求。
计算规则
hourly分析分为hourly active user分析、hourly sessions分析以及hourly sessions length分析,
分别计算各个小时的活跃用户、会话个数以及会话长度来进行展示操作。
最终数据保存:stats_hourly表中,每个小时的数据保存到对应列中。
涉及到其他表有dimension_platform、dimension_date、dimension_kpi。
编码步骤
- 修改Active user的mapreduce代码,添加统计hourly active user的代码。
- 修改Sessions的mr代码,添加统计hourly Sessions和hourly sessions length的代码。
- 测试