當前位置: 首頁>>代碼示例 >>用法及示例精選 >>正文

Python pyspark SparkSession.builder.config用法及代碼示例


本文簡要介紹 pyspark.sql.SparkSession.builder.config 的用法。

用法:

builder.config(key=None, value=None, conf=None)

設置一個配置選項。使用此方法設置的選項會自動傳播到 SparkConf 和 SparkSession 自己的配置。

2.0.0 版中的新函數。

參數：

key：str，可選

配置屬性的鍵名字符串

value：str，可選

配置屬性的值

conf：SparkConf ，可選

SparkConf 的一個實例

例子：

對於現有的 SparkConf，使用 conf 參數。

>>> from pyspark.conf import SparkConf
>>> SparkSession.builder.config(conf=SparkConf())
<pyspark.sql.session...

對於 (key, value) 對，您可以省略參數名稱。

>>> SparkSession.builder.config("spark.some.config.option", "some-value")
<pyspark.sql.session...

相關用法


注：本文由純淨天空篩選整理自spark.apache.org大神的英文原創作品 pyspark.sql.SparkSession.builder.config。非經特殊聲明，原始代碼版權歸原作者所有，本譯文未經允許或授權，請勿轉載或複製。