Python PySpark DataFrame rdd属性用法及代码示例

例子

考虑以下PySpark DataFrame：

df = spark.createDataFrame([["Alex", 25], ["Bob", 30]], ["name", "age"])
df.show()



+----+---+
|name|age|
+----+---+
|Alex| 25|
| Bob| 30|
+----+---+

将 PySpark DataFrame 转换为 RDD

要将 PySpark DataFrame 转换为 RDD，请使用 rdd 属性：

rdd = df.rdd
rdd.collect()



[Row(name='Alex', age=25), Row(name='Bob', age=30)]

在这里，我们使用 collect() 方法来查看RDD的内容，它是Row对象的列表。