当前位置: 首页>>代码示例 >>用法及示例精选 >>正文

Python pyspark to_csv用法及代码示例


本文简要介绍 pyspark.sql.functions.to_csv 的用法。

用法:

pyspark.sql.functions.to_csv(col, options=None)

将包含 StructType 的列转换为 CSV 字符串。在不受支持的类型的情况下引发异常。

3.0.0 版中的新函数。

参数：

col： Column 或 str

包含结构的列的名称。

options: dict, optional：

控制转换的选项。接受与 CSV 数据源相同的选项。请参阅您使用的版本中的Data Source Option。

例子：

>>> from pyspark.sql import Row
>>> data = [(1, Row(age=2, name='Alice'))]
>>> df = spark.createDataFrame(data, ("key", "value"))
>>> df.select(to_csv(df.value).alias("csv")).collect()
[Row(csv='2,Alice')]

相关用法


注：本文由纯净天空筛选整理自spark.apache.org大神的英文原创作品 pyspark.sql.functions.to_csv。非经特殊声明，原始代码版权归原作者所有，本译文未经允许或授权，请勿转载或复制。