R SparkR randomSplit用法及代码示例

说明：

返回具有提供的权重的随机拆分数据帧列表。

用法：

randomSplit(x, weights, seed)

## S4 method for signature 'SparkDataFrame,numeric'
randomSplit(x, weights, seed)

参数：

• x 一个 SparkDataFrame
• weights 分割的权重向量，如果它们的总和不为 1，将被归一化
• seed 用于随机分裂的种子

注意：

从 2.0.0 开始的 randomSplit

例子：

sparkR.session()
df <- createDataFrame(data.frame(id = 1:1000))
df_list <- randomSplit(df, c(2, 3, 5), 0)
# df_list contains 3 SparkDataFrames with each having about 200, 300 and 500 rows respectively
sapply(df_list, count)