當前位置: 首頁>>代碼示例 >>用法及示例精選 >>正文

Python pyspark arrays_overlap用法及代碼示例


本文簡要介紹 pyspark.sql.functions.arrays_overlap 的用法。

用法:

pyspark.sql.functions.arrays_overlap(a1, a2)

集合函數：如果數組包含任何常見的非空元素，則返回 true；如果不是，則返回 null 如果兩個數組都是非空的並且其中任何一個包含 null 元素；否則返回 false。

2.4.0 版中的新函數。

例子：

>>> df = spark.createDataFrame([(["a", "b"], ["b", "c"]), (["a"], ["b", "c"])], ['x', 'y'])
>>> df.select(arrays_overlap(df.x, df.y).alias("overlap")).collect()
[Row(overlap=True), Row(overlap=False)]

相關用法


注：本文由純淨天空篩選整理自spark.apache.org大神的英文原創作品 pyspark.sql.functions.arrays_overlap。非經特殊聲明，原始代碼版權歸原作者所有，本譯文未經允許或授權，請勿轉載或複製。