当前位置: 首页>>代码示例 >>用法及示例精选 >>正文

Python pyspark DataStreamWriter.outputMode用法及代码示例


本文简要介绍 pyspark.sql.streaming.DataStreamWriter.outputMode 的用法。

用法:

DataStreamWriter.outputMode(outputMode)

指定流式 DataFrame/Dataset 的数据如何写入流式接收器。

2.0.0 版中的新函数。

选项包括：

  • append : 只有流数据帧/数据集中的新行会被写入

    水槽

  • complete : 流数据帧/数据集中的所有行都将被写入接收器

    每次这些都是一些更新

  • update : 只有在流数据帧/数据集中更新的行才会被

    每次有一些更新时写入接收器。如果查询不包含聚合，则相当于append模式。

注意：

这个 API 正在发展。

例子：

>>> writer = sdf.writeStream.outputMode('append')

相关用法


注：本文由纯净天空筛选整理自spark.apache.org大神的英文原创作品 pyspark.sql.streaming.DataStreamWriter.outputMode。非经特殊声明，原始代码版权归原作者所有，本译文未经允许或授权，请勿转载或复制。