當前位置: 首頁>>代碼示例 >>用法及示例精選 >>正文


Python pyspark RDD.distinct用法及代碼示例


本文簡要介紹 pyspark.RDD.distinct 的用法。

用法:

RDD.distinct(numPartitions=None)

返回包含此 RDD 中不同元素的新 RDD。

例子

>>> sorted(sc.parallelize([1, 1, 2, 3]).distinct().collect())
[1, 2, 3]

相關用法


注:本文由純淨天空篩選整理自spark.apache.org大神的英文原創作品 pyspark.RDD.distinct。非經特殊聲明,原始代碼版權歸原作者所有,本譯文未經允許或授權,請勿轉載或複製。