當前位置: 首頁>>代碼示例 >>用法及示例精選 >>正文


Python pyspark RDD.treeAggregate用法及代碼示例


本文簡要介紹 pyspark.RDD.treeAggregate 的用法。

用法:

RDD.treeAggregate(zeroValue, seqOp, combOp, depth=2)

以 multi-level 樹模式聚合此 RDD 的元素。

深度整數,可選

樹的建議深度(默認值:2)

例子

>>> add = lambda x, y: x + y
>>> rdd = sc.parallelize([-5, -4, -3, -2, -1, 1, 2, 3, 4], 10)
>>> rdd.treeAggregate(0, add, add)
-5
>>> rdd.treeAggregate(0, add, add, 1)
-5
>>> rdd.treeAggregate(0, add, add, 2)
-5
>>> rdd.treeAggregate(0, add, add, 5)
-5
>>> rdd.treeAggregate(0, add, add, 10)
-5

相關用法


注:本文由純淨天空篩選整理自spark.apache.org大神的英文原創作品 pyspark.RDD.treeAggregate。非經特殊聲明,原始代碼版權歸原作者所有,本譯文未經允許或授權,請勿轉載或複製。