当前位置: 首页>>代码示例 >>用法及示例精选 >>正文


Python pyspark nanvl用法及代码示例


本文简要介绍 pyspark.sql.functions.nanvl 的用法。

用法:

pyspark.sql.functions.nanvl(col1, col2)

如果 col1 不是 NaN,则返回 col1,如果 col1 是 NaN,则返回 col2。

两个输入都应该是浮点列(DoubleTypeFloatType)。

版本 1.6.0 中的新函数。

例子

>>> df = spark.createDataFrame([(1.0, float('nan')), (float('nan'), 2.0)], ("a", "b"))
>>> df.select(nanvl("a", "b").alias("r1"), nanvl(df.a, df.b).alias("r2")).collect()
[Row(r1=1.0, r2=1.0), Row(r1=2.0, r2=2.0)]

相关用法


注:本文由纯净天空筛选整理自spark.apache.org大神的英文原创作品 pyspark.sql.functions.nanvl。非经特殊声明,原始代码版权归原作者所有,本译文未经允许或授权,请勿转载或复制。