文章浏览阅读437次。1 需求分析及实现思路1.1 分层需求分析1.1.1 实时数仓为什么要分层?建设实时数仓的目的,主要是为了增加数据计算的复用性。每次新增加统计需求时,不至于从原始数据进行计算,而是从半成品继续加工而......
2024-01-22 20:34 阅读 阅读全文文章浏览阅读732次,点赞2次,收藏4次。仅仅为了学习记录,有错误请指出先在mysql中创建student表,并插入两条数据mysql> show databases;+--------------------+| Database |+--------------------+| information_schema || flume || hive ......
2024-01-24 09:50 阅读 阅读全文文章浏览阅读473次。7 sparkStreaming实时数仓总结1、SparkStreaming实时数仓用到的存储介质都干啥事了--实时数仓中存储介质都干了些啥?1. redis 64G①存mid到set集合,重复的mid返回0则被过滤达到去重的目的(保留第一次启动数据)②......
2024-01-23 01:04 阅读 阅读全文文章浏览阅读473次。7 sparkStreaming实时数仓总结1、SparkStreaming实时数仓用到的存储介质都干啥事了--实时数仓中存储介质都干了些啥?1. redis 64G①存mid到set集合,重复的mid返回0则被过滤达到去重的目的(保留第一次启动数据)②......
2024-01-23 01:04 阅读 阅读全文我们在一起,打赢这一仗——抗击新冠肺炎疫情在行动!...
2024-01-27 16:51 阅读 阅读全文文章浏览阅读1.2k次。第35讲:项目背景和 Flink CEP 简介从这一课时开始我们将进入“Flink CEP 实时预警系统”的学习,本课时先介绍项目的背景、架构设计。背景我们在第 11 课时“Flink CEP 复杂事件处理”已经介绍了 Flink CEP 的原......
2024-01-24 20:41 阅读 阅读全文