[Demo_03] MapReduce 实现多类型输出

Posted share23

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了[Demo_03] MapReduce 实现多类型输出相关的知识,希望对你有一定的参考价值。


 

0. 说明

  MapReduce 实现将最高气温统计数据输出为文本格式和 SequenceFile 格式

  在最高气温统计的基础上进行操作

 


1. 核心代码

 

// 多输出格式设置
MultipleOutputs.addNamedOutput(job, "text", TextOutputFormat.class, Text.class, IntWritable.class);
MultipleOutputs.addNamedOutput(job, "seq", SequenceFileOutputFormat.class, Text.class, DoubleWritable.class);

 

 

// 写入文件
mos.write("text", new Text(year), new IntWritable(temp),"E:/test/wc/text_out");
mos.write("seq", key, new DoubleWritable(max / 10.0), "E:/test/wc/seq_out");

 

 


 

2. 程序编写

 

  MapReduce 实现多类型输出

 

 

 


 

以上是关于[Demo_03] MapReduce 实现多类型输出的主要内容,如果未能解决你的问题,请参考以下文章

12Hadoop框架MapReduce 统计人数总分关联

MapReduce Reducer的KeyOut类型

[MapReduce_8] MapReduce 中的自定义分区实现

Python开发MapReduce系列WordCount Demo

hadoop学习笔记:MapReduce数据类型

Hadoop_21_编写MapReduce程序实现Join功能