Python pyspark DataFrame.dropna用法及代码示例

返回一个新的 DataFrame ，忽略具有空值的行。 DataFrame.dropna() 和 DataFrameNaFunctions.drop() 互为别名。

参数：

how：str，可选

‘any’或‘all’。如果‘any’，则删除包含任何空值的行。如果‘all’，仅当所有值都为空时才删除行。

thresh: int, optional：

默认无 如果指定，删除具有小于 thresh 非空值的行。这会覆盖 how 参数。

subset：str，元组或列表，可选

要考虑的列名的可选列表。

例子：

>>> df4.na.drop().show()
+---+------+-----+
|age|height| name|
+---+------+-----+
| 10|    80|Alice|
+---+------+-----+