任务失败发生在mapreduce过程中

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了任务失败发生在mapreduce过程中相关的知识,希望对你有一定的参考价值。

我是hadoop mapreduce的新用户。我想测试mapreduce任务失败。谁能给我链接“测试mapreduce任务失败”的示例代码?

答案

假设您需要Java程序,请从任何教程网站获取任何MapReduce示例工作程序。在Mapper代码中,只需写一行

throw new RuntimeException("My test exception");

同样,您可以测试Reducer代码。

以上是关于任务失败发生在mapreduce过程中的主要内容,如果未能解决你的问题,请参考以下文章

java中代码发生异常后 程序会怎么执行?

MapReduce执行过程

如何通过Java程序提交yarn的MapReduce计算任务

MapReduce 知识

大数据技术 - MapReduce的Shuffle及调优

如何通过Java程序提交yarn的MapReduce计算任务