Python pyspark to_timestamp用法及代碼示例

本文簡要介紹 pyspark.sql.functions.to_timestamp 的用法。

用法: pyspark.sql.functions.to_timestamp(col, format=None)

使用可選指定的格式將 Column 轉換為 pyspark.sql.types.TimestampType 。根據 datetime pattern 指定格式。默認情況下，如果省略格式，它會遵循轉換規則為 pyspark.sql.types.TimestampType 。等效於 col.cast("timestamp") 。

2.2.0 版中的新函數。

例子：

>>> df = spark.createDataFrame([('1997-02-28 10:30:00',)], ['t'])
>>> df.select(to_timestamp(df.t).alias('dt')).collect()
[Row(dt=datetime.datetime(1997, 2, 28, 10, 30))]

>>> df = spark.createDataFrame([('1997-02-28 10:30:00',)], ['t'])
>>> df.select(to_timestamp(df.t, 'yyyy-MM-dd HH:mm:ss').alias('dt')).collect()
[Row(dt=datetime.datetime(1997, 2, 28, 10, 30))]

相關用法

注：本文由純淨天空篩選整理自spark.apache.org大神的英文原創作品 pyspark.sql.functions.to_timestamp。非經特殊聲明，原始代碼版權歸原作者所有，本譯文未經允許或授權，請勿轉載或複製。