當前位置: 首頁>>代碼示例 >>用法及示例精選 >>正文

Python pyspark array_except用法及代碼示例


本文簡要介紹 pyspark.sql.functions.array_except 的用法。

用法:

pyspark.sql.functions.array_except(col1, col2)

集合函數：返回 col1 中元素但 col2 中沒有元素的數組，不重複。

2.4.0 版中的新函數。

參數：

col1： Column 或 str

包含數組的列的名稱

col2： Column 或 str

包含數組的列的名稱

例子：

>>> from pyspark.sql import Row
>>> df = spark.createDataFrame([Row(c1=["b", "a", "c"], c2=["c", "d", "a", "f"])])
>>> df.select(array_except(df.c1, df.c2)).collect()
[Row(array_except(c1, c2)=['b'])]

相關用法


注：本文由純淨天空篩選整理自spark.apache.org大神的英文原創作品 pyspark.sql.functions.array_except。非經特殊聲明，原始代碼版權歸原作者所有，本譯文未經允許或授權，請勿轉載或複製。