本文简要介绍
pyspark.RDD.treeReduce
的用法。用法:
RDD.treeReduce(f, depth=2)
在 multi-level 树模式中减少此 RDD 的元素。
- f:函数
- depth:整数,可选
树的建议深度(默认值:2)
参数:
例子:
>>> add = lambda x, y: x + y >>> rdd = sc.parallelize([-5, -4, -3, -2, -1, 1, 2, 3, 4], 10) >>> rdd.treeReduce(add) -5 >>> rdd.treeReduce(add, 1) -5 >>> rdd.treeReduce(add, 2) -5 >>> rdd.treeReduce(add, 5) -5 >>> rdd.treeReduce(add, 10) -5
相关用法
- Python pyspark RDD.treeAggregate用法及代码示例
- Python pyspark RDD.takeOrdered用法及代码示例
- Python pyspark RDD.toLocalIterator用法及代码示例
- Python pyspark RDD.take用法及代码示例
- Python pyspark RDD.takeSample用法及代码示例
- Python pyspark RDD.top用法及代码示例
- Python pyspark RDD.saveAsTextFile用法及代码示例
- Python pyspark RDD.keyBy用法及代码示例
- Python pyspark RDD.sumApprox用法及代码示例
- Python pyspark RDD.lookup用法及代码示例
- Python pyspark RDD.zipWithIndex用法及代码示例
- Python pyspark RDD.sampleByKey用法及代码示例
- Python pyspark RDD.coalesce用法及代码示例
- Python pyspark RDD.subtract用法及代码示例
- Python pyspark RDD.count用法及代码示例
- Python pyspark RDD.groupWith用法及代码示例
- Python pyspark RDD.distinct用法及代码示例
- Python pyspark RDD.mapPartitionsWithIndex用法及代码示例
- Python pyspark RDD.foreachPartition用法及代码示例
- Python pyspark RDD.zipWithUniqueId用法及代码示例
- Python pyspark RDD.sortByKey用法及代码示例
- Python pyspark RDD.collectAsMap用法及代码示例
- Python pyspark RDD.countApproxDistinct用法及代码示例
- Python pyspark RDD.reduceByKeyLocally用法及代码示例
- Python pyspark RDD.max用法及代码示例
注:本文由纯净天空筛选整理自spark.apache.org大神的英文原创作品 pyspark.RDD.treeReduce。非经特殊声明,原始代码版权归原作者所有,本译文未经允许或授权,请勿转载或复制。