Hadoop实战——如何获取当前Map对象所在的block id

Posted GeoWin_CAU

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Hadoop实战——如何获取当前Map对象所在的block id相关的知识,希望对你有一定的参考价值。

   如题,或者获取split ID in the mapfunction。

=========================================

InputSplit is = context.getInputSplit();

splitId = MD5Hash.digest(is.toString()).toString();

-------------------------------------------------------------------

lastSplit = reporter.getInputSplit();

splitId = MD5Hash.digest(lastSplit.toString()).toString();

以上是关于Hadoop实战——如何获取当前Map对象所在的block id的主要内容,如果未能解决你的问题,请参考以下文章

JAVA 如何获取存放在MAP中的list 对象?

hadoop实战随笔_170814

Hadoop实战:使用Combiner提高Map/Reduce程序效率

如何获取hadoop mapreduce job运行信息

如何获取hadoop mapreduce job运行信息

如何在 Xamarin.Forms.Map 中获取当前位置或移动到当前位置