Spark中统计程序运行时间

Posted soyosuyang

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Spark中统计程序运行时间相关的知识,希望对你有一定的参考价值。

import java.text.SimpleDateFormat
import java.util.Date
  
     val s=NowDate()      //显示当前的具体时间
    val now=new Date()

     {
        你的Spark程序........
      }
 
      val now2: Date=new Date()

   val now3=now2.getTime -now.getTime

    val dateFormat: SimpleDateFormat = new SimpleDateFormat("mm:ss")

    val date = dateFormat.format(now3)   //此为获取到的时间差

 def NowDate(): String = {
    val now: Date = new Date()
    val dateFormat: SimpleDateFormat = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss")
    val date = dateFormat.format(now)
    return date

  }

结果:

NowDate:结果类似为:2017-10-12 20:14:57
14:57
15:03
00:06   (差值结果)

以上是关于Spark中统计程序运行时间的主要内容,如果未能解决你的问题,请参考以下文章