Python pyspark RandomRDDs.uniformVectorRDD用法及代碼示例

生成由包含 i.i.d 的向量組成的 RDD。從均勻分布 U(0.0, 1.0) 中抽取的樣本。

參數：

sc：SparkContext

SparkContext 用於創建 RDD。

numRows：int

RDD 中的向量數。

numCols：int

每個向量中的元素數。

numPartitions：整數，可選

RDD 中的分區數。

seed：整數，可選

為每個分區中的生成器生成種子的 RNG 的種子。

返回：

pyspark.RDD

向量的 RDD，向量包含 i.i.d 樣本 ~ U(0.0, 1.0) 。

例子：

>>> import numpy as np
>>> mat = np.matrix(RandomRDDs.uniformVectorRDD(sc, 10, 10).collect())
>>> mat.shape
(10, 10)
>>> mat.max() <= 1.0 and mat.min() >= 0.0
True
>>> RandomRDDs.uniformVectorRDD(sc, 10, 10, 4).getNumPartitions()
4