1.实时统计热门商品 2.实时统计热门页面 3.实时统计PV/UV/GMV
3.1.需求是:统计每小时pv统计 3.2 每个小时的UV统计 3.3每个小时的UV统计 --布隆过滤器来实现 3.4 布隆过滤器 3.5 redis: 4.实时统计广告点击
4.1 实时生成黑名单(同一个用户,同一个广告点击) 4.2 每隔5秒统计最近1小时的各省份的广告点击 5. 实时风控--实时黑名单
1.实时统计热门商品需求:每隔5分钟统计最近1个小时热门商品
实现思路:
1.读取数据
2.添加水位线,防止乱序。
3.过滤用户行为
4.按商品分组
5.统计窗口数据:每个商品在当前窗口中的次数,
6.按照窗口分组–每个窗口的topN
7.商品ton的排序–每个窗口的topN
8.打印输出



