当前位置: 首页>>代码示例 >>用法及示例精选 >>正文

Python pyspark array_union用法及代码示例


本文简要介绍 pyspark.sql.functions.array_union 的用法。

用法:

pyspark.sql.functions.array_union(col1, col2)

集合函数：返回 col1 和 col2 并集的元素组成的数组，不重复。

2.4.0 版中的新函数。

参数：

col1： Column 或 str

包含数组的列的名称

col2： Column 或 str

包含数组的列的名称

例子：

>>> from pyspark.sql import Row
>>> df = spark.createDataFrame([Row(c1=["b", "a", "c"], c2=["c", "d", "a", "f"])])
>>> df.select(array_union(df.c1, df.c2)).collect()
[Row(array_union(c1, c2)=['b', 'a', 'c', 'd', 'f'])]

相关用法


注：本文由纯净天空筛选整理自spark.apache.org大神的英文原创作品 pyspark.sql.functions.array_union。非经特殊声明，原始代码版权归原作者所有，本译文未经允许或授权，请勿转载或复制。