当前位置: 首页>>代码示例 >>用法及示例精选 >>正文


Python pyspark RDD.zip用法及代码示例


本文简要介绍 pyspark.RDD.zip 的用法。

用法:

RDD.zip(other)

将这个 RDD 与另一个 RDD 压缩,返回每个 RDD 中的第一个元素和每个 RDD 中的第二个元素的键值对,等等。假设两个 RDD 具有相同数量的分区和每个分区中相同数量的元素(例如一个是通过另一张Map制作的)。

例子

>>> x = sc.parallelize(range(0,5))
>>> y = sc.parallelize(range(1000, 1005))
>>> x.zip(y).collect()
[(0, 1000), (1, 1001), (2, 1002), (3, 1003), (4, 1004)]

相关用法


注:本文由纯净天空筛选整理自spark.apache.org大神的英文原创作品 pyspark.RDD.zip。非经特殊声明,原始代码版权归原作者所有,本译文未经允许或授权,请勿转载或复制。