探索 Hadoop 代码

Posted

技术标签:

【中文标题】探索 Hadoop 代码【英文标题】:Exploring Hadoop code 【发布时间】:2011-11-23 06:27:41 【问题描述】:

我想了解 Hadoop 不仅仅是一个黑盒子。我想本身。如何不从主干下载捆绑包,我应该从哪里开始?任何帮助都会非常有帮助 谢谢 舒贾特

【问题讨论】:

【参考方案1】:

Hadoop 代码位于 SVN 和 Git 中。在 Eclipse 中设置 Hadoop 项目并开始探索代码。目前0.23、0.22 和0.20.205 分支是所有正在积极开发的地方。如果您想了解有关代码的更多信息,HowToContribte 是一个不错的开始。了解什么是MapReduce、Hadoop,最后在Linuxbox 上设置Hadoop 环境。另外,订阅 Hadoop 邮件列表并关注 JIRA。

不知道为什么不trunk。所有有趣的事情都发生在后备箱。

【讨论】:

【参考方案2】:

要浏览 hadoop 代码,请确定您是 windows 还是 linux box 中的资源管理器。如果是windows,请访问http://tech.zhenhua.info/2010/11/svn-subclipse.html

Hadoop 在 Windows 上需要 Ivy,sh。

Praveen,“不知道为什么不干线”,我没听懂这条线?我通过以下链接使用了主干http://hadoop.apache.org/common/version_control.html

【讨论】:

以上是关于探索 Hadoop 代码的主要内容,如果未能解决你的问题,请参考以下文章

如何开始探索 BigData、Hadoop 及其生态系统组件?

Java之使用Hadoop探索大数据的世界

小白学习大数据测试之hadoop再次探索

hadoop hdfs数据块探索

Hive Metastore动态切换存储引擎方案探索

大数据先驱Cloudera拥抱云计算,探索后Hadoop时代的下一代数据平台