pyspark 实践汇总5

版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/yepeng2007fei/article/details/83149671

1. 时间戳转string型日期

data1 = data.withColumn("newdate",from_unixtime(data["date"],format='yyyyMMdd'))

这里通过from_unixtime将时间戳转到年月日格式的string

2. 将string日期转成时间戳

data1 = data.withColumn("newstamp",unix_timestamp(data["timestamp"],'yyyyMMdd'))

这里通过unix_timestamp将string型的年月日转成了时间戳