SparkStreaming实现wordcount案例_下图为项目的流程图,通过nc.命令,向9999端口持续发送消息,并使用spark streaming-CSDN博客

网站介绍:文章浏览阅读381次。项目需求:需求:使用netcat工具向9999端口不断的发送数据,通过SparkStreaming读取端口数据并统计不同单词出现的次数。代码实现:def main(args: Array[String]): Unit = { //创建配置对象文件 val conf: SparkConf = new SparkConf().setAppName("SparkStreaming_Demo01").setMaster("local[*]") //创建SparkStreaming程序_下图为项目的流程图,通过nc.命令,向9999端口持续发送消息,并使用spark streaming