网友收藏SparkSQL数据清洗API_spake sql 如何过滤负数-CSDN博客文章浏览阅读1.2k次。一、去重方法 dropDuplicates功能:对DF的数据进行去重,如果重复数据有多条,取第一条# 去重API dropDuplicates,无参数是对数据进行整体去重df.dropDuplicates().show()# API 同样可以针对字段进行去重,如下传入age字段...... 2024-01-24 07:54 评论 0 阅读 阅读全文