當前位置: 首頁>>代碼示例 >>用法及示例精選 >>正文

Python pyspark DataStreamWriter.outputMode用法及代碼示例


本文簡要介紹 pyspark.sql.streaming.DataStreamWriter.outputMode 的用法。

用法:

DataStreamWriter.outputMode(outputMode)

指定流式 DataFrame/Dataset 的數據如何寫入流式接收器。

2.0.0 版中的新函數。

選項包括：

  • append : 隻有流數據幀/數據集中的新行會被寫入

    水槽

  • complete : 流數據幀/數據集中的所有行都將被寫入接收器

    每次這些都是一些更新

  • update : 隻有在流數據幀/數據集中更新的行才會被

    每次有一些更新時寫入接收器。如果查詢不包含聚合，則相當於append模式。

注意：

這個 API 正在發展。

例子：

>>> writer = sdf.writeStream.outputMode('append')

相關用法


注：本文由純淨天空篩選整理自spark.apache.org大神的英文原創作品 pyspark.sql.streaming.DataStreamWriter.outputMode。非經特殊聲明，原始代碼版權歸原作者所有，本譯文未經允許或授權，請勿轉載或複製。