一、Python中日期格式化
Python中的datetime模块提供了很多日期格式化的方法，可以方便地对日期进行转化、计算和展示。其中，strftime()方法是最常用的格式化方法之一。
import datetime
now = datetime.datetime.now()
# 转化为字符串格式
date_str = now.strftime("%Y-%m-%d %H:%M:%S")
print(date_str)
# 转化为时间戳
timestamp = datetime.datetime.timestamp(now)
print(timestamp)
# 将字符串格式转化为时间对象
date_time = datetime.datetime.strptime("2022-10-01", "%Y-%m-%d")
print(date_time)代码说明：
- 使用datetime模块获取当前时间now，并将其转化为字符串格式和时间戳。
- 使用strftime()方法将时间对象now格式化成字符串，并指定为”%Y-%m-%d %H:%M:%S”格式。
- 使用timestamp()方法将时间对象now转化为时间戳。
- 使用strptime()方法将字符串”2022-10-01″转化为时间对象，并指定为”%Y-%m-%d”格式。
二、Pyspark中日期格式化
Pyspark提供了Spark SQL模块，可以直接对数据进行SQL操作。在Spark SQL中，可以使用date_format()函数和to_date()函数进行日期格式化。其中，date_format()函数用于将日期转化为指定的字符串格式，to_date()函数用于将字符串转化为日期对象。
from pyspark.sql.functions import date_format, to_date
from pyspark.sql.types import DateType
from pyspark.sql import SparkSession
spark = SparkSession.builder.appName("DateFormatting").getOrCreate()
# 构造测试数据
data = [("2022-01-01", ), ("2022-02-01", ), ("2022-03-01", ), ("2022-04-01", ), ("2022-05-01", )]
df = spark.createDataFrame(data, ["date_str"])
# 将字符串格式转化为日期对象
df = df.withColumn("date", to_date("date_str"))
# 将日期格式化为指定字符串格式
df = df.withColumn("date_format", date_format("date", "yyyy-MM-dd"))
df.show()代码说明：
- 使用pyspark.sql.functions模块中的date_format()函数和to_date()函数格式化日期。
- 使用pyspark.sql.types模块中的DateType类型，将日期对象转化为日期格式。
- 使用SparkSession创建Spark应用程序，并指定名称为"DateFormatting"。
- 构造测试数据。
- 使用withColumn()方法将字符串格式的日期转化为日期对象，并将结果保存为新列"date"。
- 使用withColumn()方法将日期格式化为指定字符串格式，并将结果保存为新列"date_format"。
- 使用show()方法展示结果。
三、总结
本文介绍了在Python和Pyspark中进行日期格式化的方法，并通过示例代码演示了具体的实现过程。在实际工作中，日期格式化是非常常见的问题，掌握了日期格式化的方法，可以更加方便地进行数据处理和分析。
原创文章，作者：WIRI，如若转载，请注明出处：https://www.506064.com/n/147288.html
微信扫一扫 
支付宝扫一扫 