Python PySpark DataFrame transform方法用法及代碼示例

PySpark DataFrame 的 transform(~) 方法在調用此方法的 DataFrame 上應用函數，並返回新的 PySpark DataFrame。

參數

1. func | function

調用 transform(~) 方法的 PySpark DataFrame。

返回值

PySpark 數據幀。

例子

考慮以下PySpark DataFrame：

df = spark.createDataFrame([["Alex", 25], ["Bob", 30]], ["name", "age"])
df.show()



+----+---+
|name|age|
+----+---+
|Alex| 25|
| Bob| 30|
+----+---+

按 PySpark DataFrame 中的標簽按升序對列進行排序

要獲取新的 PySpark DataFrame，其中列按升序排序：

def sort_columns(df_input):
 return df_input.select(*sorted(df_input.columns))
df.transform(sort_columns).show()



+---+----+
|age|name|
+---+----+
| 25|Alex|
| 30| Bob|
+---+----+

此處，* 將列標簽列表轉換為 select(~) 方法的位置參數。

相關用法

注：本文由純淨天空篩選整理自Isshin Inada大神的英文原創作品 PySpark DataFrame | transform method。非經特殊聲明，原始代碼版權歸原作者所有，本譯文未經允許或授權，請勿轉載或複製。