當前位置: 首頁>>編程示例 >>用法及示例精選 >>正文


Python pyspark DataFrameReader.parquet用法及代碼示例

本文簡要介紹 pyspark.sql.DataFrameReader.parquet 的用法。

用法:

DataFrameReader.parquet(*paths, **options)

加載 Parquet 文件,將結果作為 DataFrame 返回。

1.4.0 版中的新函數。

參數

pathsstr

其他參數

**options

有關額外選項,請參閱您使用的版本中的Data Source Option

例子

>>> df = spark.read.parquet('python/test_support/sql/parquet_partitioned')
>>> df.dtypes
[('name', 'string'), ('year', 'int'), ('month', 'int'), ('day', 'int')]

相關用法


注:本文由純淨天空篩選整理自spark.apache.org大神的英文原創作品 pyspark.sql.DataFrameReader.parquet。非經特殊聲明,原始代碼版權歸原作者所有,本譯文未經允許或授權,請勿轉載或複製。