當前位置: 首頁>>代碼示例 >>用法及示例精選 >>正文

Python pyspark RDD.collectAsMap用法及代碼示例


本文簡要介紹 pyspark.RDD.collectAsMap 的用法。

用法:

RDD.collectAsMap()

將此 RDD 中的鍵值對作為字典返回給 master。

注意：

僅當預期結果數據很小時才應使用此方法，因為所有數據都加載到驅動程序的內存中。

例子：

>>> m = sc.parallelize([(1, 2), (3, 4)]).collectAsMap()
>>> m[1]
2
>>> m[3]
4

相關用法


注：本文由純淨天空篩選整理自spark.apache.org大神的英文原創作品 pyspark.RDD.collectAsMap。非經特殊聲明，原始代碼版權歸原作者所有，本譯文未經允許或授權，請勿轉載或複製。