当前位置: 首页>>代码示例 >>用法及示例精选 >>正文


Python pyspark RDD.takeOrdered用法及代码示例


本文简要介绍 pyspark.RDD.takeOrdered 的用法。

用法:

RDD.takeOrdered(num, key=None)

从 RDD 中获取 N 个元素,这些元素按升序排列或由可选的 key 函数指定。

注意

仅当预期结果数组很小时才应使用此方法,因为所有数据都加载到驱动程序的内存中。

例子

>>> sc.parallelize([10, 1, 2, 9, 3, 4, 5, 6, 7]).takeOrdered(6)
[1, 2, 3, 4, 5, 6]
>>> sc.parallelize([10, 1, 2, 9, 3, 4, 5, 6, 7], 2).takeOrdered(6, key=lambda x: -x)
[10, 9, 7, 6, 5, 4]

相关用法


注:本文由纯净天空筛选整理自spark.apache.org大神的英文原创作品 pyspark.RDD.takeOrdered。非经特殊声明,原始代码版权归原作者所有,本译文未经允许或授权,请勿转载或复制。