Python pyspark RandomRDDs.gammaRDD用法及代码示例

本文简要介绍 pyspark.mllib.random.RandomRDDs.gammaRDD 的用法。

用法: static gammaRDD(sc, shape, scale, size, numPartitions=None, seed=None)

生成一个由 i.i.d 组成的 RDD。来自具有输入形状和比例的 Gamma 分布的样本。

版本 1.3.0 中的新函数。

参数：

sc：SparkContext: SparkContext 用于创建 RDD。
shape：浮点数: Gamma 分布的形状 (> 0) 参数
scale：浮点数: Gamma 分布的比例 (> 0) 参数
size：int: RDD 的大小。
numPartitions：整数，可选: RDD 中的分区数(默认值：sc.defaultParallelism)。
seed：整数，可选: 随机种子(默认值：随机长整数)。

pyspark.RDD: 由 i.i.d. 组成的浮点数 RDD样本〜伽玛(形状，比例)。

例子：

>>> from math import sqrt
>>> shape = 1.0
>>> scale = 2.0
>>> expMean = shape * scale
>>> expStd = sqrt(shape * scale * scale)
>>> x = RandomRDDs.gammaRDD(sc, shape, scale, 1000, seed=2)
>>> stats = x.stats()
>>> stats.count()
1000
>>> abs(stats.mean() - expMean) < 0.5
True
>>> abs(stats.stdev() - expStd) < 0.5
True

相关用法

注：本文由纯净天空筛选整理自spark.apache.org大神的英文原创作品 pyspark.mllib.random.RandomRDDs.gammaRDD。非经特殊声明，原始代码版权归原作者所有，本译文未经允许或授权，请勿转载或复制。

用法:

参数：

返回：

例子：