Spark32个常用算子总结_spark算子-CSDN博客

网站介绍:文章浏览阅读4.3w次,点赞62次,收藏319次。官方文档上列举共有32种常见算子,包括Transformation的20种操作和Action的12种操作。(注:以下截图为windows下运行结果)Transformation:1.mapmap的输入变换函数应用于RDD中所有元素,而mapPartitions应用于所有分区。区别于mapPartitions主要在于调用粒度不同。如parallelize(1 to 10, 3),ma..._spark算子