Python pyspark to_timestamp用法及代码示例

本文简要介绍 pyspark.sql.functions.to_timestamp 的用法。

用法: pyspark.sql.functions.to_timestamp(col, format=None)

使用可选指定的格式将 Column 转换为 pyspark.sql.types.TimestampType 。根据 datetime pattern 指定格式。默认情况下，如果省略格式，它会遵循转换规则为 pyspark.sql.types.TimestampType 。等效于 col.cast("timestamp") 。

2.2.0 版中的新函数。

例子：

>>> df = spark.createDataFrame([('1997-02-28 10:30:00',)], ['t'])
>>> df.select(to_timestamp(df.t).alias('dt')).collect()
[Row(dt=datetime.datetime(1997, 2, 28, 10, 30))]

>>> df = spark.createDataFrame([('1997-02-28 10:30:00',)], ['t'])
>>> df.select(to_timestamp(df.t, 'yyyy-MM-dd HH:mm:ss').alias('dt')).collect()
[Row(dt=datetime.datetime(1997, 2, 28, 10, 30))]

相关用法

注：本文由纯净天空筛选整理自spark.apache.org大神的英文原创作品 pyspark.sql.functions.to_timestamp。非经特殊声明，原始代码版权归原作者所有，本译文未经允许或授权，请勿转载或复制。