如何在不使用已弃用的类的情况下编写 Hadoop map reduce 作业？

Posted 2023-04-18

【中文标题】如何在不使用已弃用的类的情况下编写 Hadoop map reduce 作业？

【英文标题】：How do I write a Hadoop map reduce job without using deprecated classes?

【发布时间】：2011-05-24 22:47:16

【问题描述】：

我知道这是我的强迫症，但我不能忍受在我的代码中有一个已弃用的引用。

也就是说，Hadoop 教程，包括“权威指南”一书，仅使用已弃用的 JobConf 类和 mapred 包中的所有已弃用的类。

我找不到任何关于如何将现有 MapReduce 作业转换为使用新结构的文本。

【参考方案1】：

不久前我与 Cloudera 人员交谈，他们确认“新”功能不完整，如果不使用“已弃用”软件包，就无法编写严肃的 Hadoop 内容。

【参考方案2】：

这应该可以在 0.20.2 中实现。除非你没有使用一些花哨的连接东西。 例如，JobConf 已被弃用，因为您可以使用 Configuration。或者旧的Mapper 接口现在是一个代表旧标识映射器的类。

简单的答案：您必须查看 java 文档并查看替换的实际内容。