Spark 将时间戳转换成年月格式

Posted 2021-06-29 youngxuebo

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了Spark 将时间戳转换成年月格式相关的知识，希望对你有一定的参考价值。

通过spark-sql，将查询timstamp字段时间戳转换成日期格式：

  val simpleDateFormat = new SimpleDateFormat("yyyyMM")
  spark.udf.register("changDate",(x:Long)=> simpleDateFormat.format(new Date(x * 1000L)))
  
  val df: DataFrame = spark.sql("select mid,uid,score,changDate(timstamp) from Ratings")
  df.show()

changeDate为函数名。

以上是关于Spark 将时间戳转换成年月格式的主要内容，如果未能解决你的问题，请参考以下文章