Spark中统计程序运行时间

Posted soyosuyang

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Spark中统计程序运行时间相关的知识,希望对你有一定的参考价值。

import java.text.SimpleDateFormat
import java.util.Date
  
     val s=NowDate()      //显示当前的具体时间
    val now=new Date()

     {
        你的Spark程序........
      }
 
      val now2: Date=new Date()

   val now3=now2.getTime -now.getTime

    val dateFormat: SimpleDateFormat = new SimpleDateFormat("mm:ss")

    val date = dateFormat.format(now3)   //此为获取到的时间差

 def NowDate(): String = {
    val now: Date = new Date()
    val dateFormat: SimpleDateFormat = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss")
    val date = dateFormat.format(now)
    return date

  }

结果:

NowDate:结果类似为:2017-10-12 20:14:57
14:57
15:03
00:06   (差值结果)

以上是关于Spark中统计程序运行时间的主要内容,如果未能解决你的问题,请参考以下文章

未解决对于使用Windows的IDEA进行编译的文件,但无法在Linux系统中统计代码行数的疑问

CAD库中统计PBN运行航路条数和总距离

在项目开发中统计代码行数的6种方式

CakePHP 3:如何在一次查询中统计和检索不同时期的数据?

JavaScript中统计数组中相同元素的个数-案例

从客户购买/收听行为中统计“相似产品/音乐/...”的工作原理是啥?