本文简要介绍
pyspark.RDD.pipe 的用法。用法:
RDD.pipe(command, env=None, checkCode=False)将由管道元素创建的 RDD 返回到分叉的外部进程。
- command：str
命令运行。
- env：字典，可选
要设置的环境变量。
- checkCode：布尔型，可选
是否检查 shell 命令的返回值。
参数：
例子：
>>> sc.parallelize(['1', '2', '', '3']).pipe('cat').collect() ['1', '2', '', '3']
相关用法
- Python pyspark RDD.partitionBy用法及代码示例
- Python pyspark RDD.persist用法及代码示例
- Python pyspark RDD.saveAsTextFile用法及代码示例
- Python pyspark RDD.keyBy用法及代码示例
- Python pyspark RDD.sumApprox用法及代码示例
- Python pyspark RDD.lookup用法及代码示例
- Python pyspark RDD.zipWithIndex用法及代码示例
- Python pyspark RDD.sampleByKey用法及代码示例
- Python pyspark RDD.coalesce用法及代码示例
- Python pyspark RDD.subtract用法及代码示例
- Python pyspark RDD.count用法及代码示例
- Python pyspark RDD.groupWith用法及代码示例
- Python pyspark RDD.distinct用法及代码示例
- Python pyspark RDD.treeAggregate用法及代码示例
- Python pyspark RDD.mapPartitionsWithIndex用法及代码示例
- Python pyspark RDD.foreachPartition用法及代码示例
- Python pyspark RDD.zipWithUniqueId用法及代码示例
- Python pyspark RDD.sortByKey用法及代码示例
- Python pyspark RDD.takeOrdered用法及代码示例
- Python pyspark RDD.collectAsMap用法及代码示例
- Python pyspark RDD.countApproxDistinct用法及代码示例
- Python pyspark RDD.toLocalIterator用法及代码示例
- Python pyspark RDD.reduceByKeyLocally用法及代码示例
- Python pyspark RDD.max用法及代码示例
- Python pyspark RDD.map用法及代码示例
注：本文由纯净天空筛选整理自spark.apache.org大神的英文原创作品 pyspark.RDD.pipe。非经特殊声明，原始代码版权归原作者所有，本译文未经允许或授权，请勿转载或复制。