當前位置: 首頁>>編程示例 >>用法及示例精選 >>正文


Python pyspark nanvl用法及代碼示例

本文簡要介紹 pyspark.sql.functions.nanvl 的用法。

用法:

pyspark.sql.functions.nanvl(col1, col2)

如果 col1 不是 NaN,則返回 col1,如果 col1 是 NaN,則返回 col2。

兩個輸入都應該是浮點列(DoubleTypeFloatType)。

版本 1.6.0 中的新函數。

例子

>>> df = spark.createDataFrame([(1.0, float('nan')), (float('nan'), 2.0)], ("a", "b"))
>>> df.select(nanvl("a", "b").alias("r1"), nanvl(df.a, df.b).alias("r2")).collect()
[Row(r1=1.0, r2=1.0), Row(r1=2.0, r2=2.0)]

相關用法


注:本文由純淨天空篩選整理自spark.apache.org大神的英文原創作品 pyspark.sql.functions.nanvl。非經特殊聲明,原始代碼版權歸原作者所有,本譯文未經允許或授權,請勿轉載或複製。