文章浏览阅读236次。一、关于slot、parallelism1.在conf/flink-conf.yaml中有如下内容，显示默认slots、parallelism均为1，我理解的，slots就是可以运行多少任务，parallelism是你让他运行多少任务。# The heap size for the JobManager JVMjobmanager.heap.size:......

文章浏览阅读933次。day01课堂笔记flink简介flink引入大数据技术架构发展阶段总共有四代,mr–>DAG框架(tez) --> Spark流批处理框架,内存计算(伪实时) -->flink流批处理,内存计算(真正的实时计算)flink vs spark什么是flinkflink是一个分......

文章浏览阅读175次。文章目录1、Flink 简介1.1 Flink 的引入测试环境：Flink 和spark 的差异1.2 什么是Flink1.3 Flink 流处理特性1.4 Flink 基石1.5 批处理与流处理2、Flink 架构体系2.1 Flink 中的重要角⾊JobManager 处理器：TaskManager 处理器：2.2 ......

文章浏览阅读900次。Flink电商实时数仓项目 - 数据采集1 电商实时数仓项目概述1.1 数据分层分析离线数仓项目的分层为：ODS、DWD、DWS、DWT、ADSflink实时数仓项目的分层为：ODS、DWD、DIM、DWM、DWS、ADS其中ODS层为原始数据层；DWD层详......

文章浏览阅读805次，点赞2次，收藏7次。1 Flink 理论基础1.1 实时计算对比Storm 延迟低但吞吐量小Spark Streaming 吞吐量大但是延迟高Flink 是一种兼具低延迟和高吞吐量特点的流式计算技术，还是一套框架中同时支持批处理和流处理的......

Flink笔记01——基础...

文章浏览阅读2.3k次。Flink安装配置，单机版：01.下载如下安装包flink-1.6.3-bin-hadoop27-scala_2.11.tgz：(SSpark) root@LAPTOP-P1LA53KS:/mnt/e# ls -alls: 'System Volume Information': Permission deniedls: WindowsApps: Permission deniedtotal 1786428drwxrwxrwx 1 root root 4096 ......

...它..._http://note.youdao.com/noteshare?id=77409417252cdde7df9000b95bf9bc01 百...

...，以及为什么Flink会成为下一代大数据处理框架的标准。01 什么是Flink？在当前数据量激增传统的时代，不同的业务场景都有大量的业务..._flink将会成为企业内部主流的数据处理框架,最终成为下一代大数据处理标准...