spark streaming 结合kafka 精确消费一次将结果保存到hbase_sparkstreaming消费kafka写入hbase-CSDN博客

网站介绍:文章浏览阅读917次。spark streaming 结合kafka 精确消费一次将结果保存到hbase1. 环境scala 2.12.12jdk 1.8idea 2020.1maven 3.6.3spark 3.0.1kafka 0.10hadoop 3.2.1hbase 2.2.5 (另外一个明细数据幂等处理,保存到habse)redis 5.0pom<!-- 定义了一些常量 --> <properties> <maven.compiler.s_sparkstreaming消费kafka写入hbase