Python PySpark SQL Functions length方法用法及代碼示例

例子

考慮以下PySpark DataFrame：

df = spark.createDataFrame([["Alex", 20], ["Bob", 30], ["Cathy", 40]], ["name", "age"])
df.show()



+-----+---+
| name|age|
+-----+---+
| Alex| 20|
|  Bob| 30|
|Cathy| 40|
+-----+---+

計算PySpark中列字符串的長度

要計算 name 列的每個值的長度，請使用 length(~) 方法：

import pyspark.sql.functions as F
df.select(F.length("name")).show()



+------------+
|length(name)|
+------------+
|           4|
|           3|
|           5|
+------------+

我們還可以傳入 Column 對象而不是列標簽，如下所示：

# df.select(F.length(df.name)).show()
df.select(F.length(F.col("name"))).show()



+------------+
|length(name)|
+------------+
|           4|
|           3|
|           5|
+------------+

請注意，我們可以使用 withColumn(~) 附加一個包含字符串長度的新列：

df_new = df.withColumn("name_length", F.length("name"))
df_new.show()



+-----+---+-----------+
| name|age|name_length|
+-----+---+-----------+
| Alex| 20|          4|
|  Bob| 30|          3|
|Cathy| 40|          5|
+-----+---+-----------+