PySpark SQL 函数的greatest(~)
方法返回指定列中每行的最大值。请注意,您必须指定两列或更多列。
参数
1.*cols
| string
或 Column
用于计算最大值的列。
返回值
PySpark 列 (pyspark.sql.column.Column
)。
例子
考虑以下PySpark DataFrame:
df = spark.createDataFrame([["Alex", 100, 200], ["Bob", 150, 50]], ["name", "salary", "bonus"])
df.show()
+----+------+-----+
|name|salary|bonus|
+----+------+-----+
|Alex| 100| 200|
| Bob| 150| 50|
+----+------+-----+
获取 PySpark DataFrame 中每行的最大值
要获取 salary
和 bonus
列中每行的最大值:
import pyspark.sql.functions as F
df.select(F.greatest("salary", "bonus")).show()
+-----------------------+
|greatest(salary, bonus)|
+-----------------------+
| 200|
| 150|
+-----------------------+
要将此列附加到现有的 PySpark DataFrame,请使用 withColumn(~)
方法:
import pyspark.sql.functions as F
df.withColumn("my_max", F.greatest("salary", "bonus")).show()
+----+------+-----+------+
|name|salary|bonus|my_max|
+----+------+-----+------+
|Alex| 100| 200| 200|
| Bob| 150| 50| 150|
+----+------+-----+------+
相关用法
- Python PySpark SQL Functions split方法用法及代码示例
- Python PySpark SQL Functions repeat方法用法及代码示例
- Python PySpark SQL Functions explode方法用法及代码示例
- Python PySpark SQL Functions concat方法用法及代码示例
- Python PySpark SQL Functions instr方法用法及代码示例
- Python PySpark SQL Functions count_distinct方法用法及代码示例
- Python PySpark SQL Functions dayofmonth方法用法及代码示例
- Python PySpark SQL Functions date_add方法用法及代码示例
- Python PySpark SQL Functions array方法用法及代码示例
- Python PySpark SQL Functions concat_ws方法用法及代码示例
- Python PySpark SQL Functions col方法用法及代码示例
- Python PySpark SQL Functions translate方法用法及代码示例
- Python PySpark SQL Functions dayofweek方法用法及代码示例
- Python PySpark SQL Functions expr方法用法及代码示例
- Python PySpark SQL Functions regexp_extract方法用法及代码示例
- Python PySpark SQL Functions regexp_replace方法用法及代码示例
- Python PySpark SQL Functions round方法用法及代码示例
- Python PySpark SQL Functions countDistinct方法用法及代码示例
- Python PySpark SQL Functions date_format方法用法及代码示例
- Python PySpark SQL Functions collect_list方法用法及代码示例
- Python PySpark SQL Functions lit方法用法及代码示例
- Python PySpark SQL Functions upper方法用法及代码示例
- Python PySpark SQL Functions length方法用法及代码示例
- Python PySpark SQL Functions dayofyear方法用法及代码示例
- Python PySpark SQL Functions trim方法用法及代码示例
注:本文由纯净天空筛选整理自Isshin Inada大神的英文原创作品 PySpark SQL Functions | greatest method。非经特殊声明,原始代码版权归原作者所有,本译文未经允许或授权,请勿转载或复制。