Hadoop介绍

Posted Code_exploration

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Hadoop介绍相关的知识,希望对你有一定的参考价值。

一:来源

    雅虎--->谷歌两篇论文GFS,mapreduce。

二:组成

    hadoop common:支持其他Hadoop模块的常用工具。 

     HDFS:分布式文件系统,提供对应用程序数据的高吞吐量访问。全称:Hadoop Distributed File System。

    hadoop yarn:作业调度和集群资源管理的框架。

    hadoop mapreduce:基于YARN的大型数据集并行处理系统。

    Apache的其他Hadoop相关项目包括:Ambari?Avro?Cassandra?Chukwa?HBase?Hive?Mahout?Pig?Spark?Tez?ZooKeeper?

三:hadoop是可靠的可扩展的分布式计算软件,还有一点是高性能的,他需要其他的软件的共同来实现这个特性。


以上是关于Hadoop介绍的主要内容,如果未能解决你的问题,请参考以下文章

hadoop是啥 hadoop介绍

大数据概念及Hadoop介绍

学习笔记Hadoop—— Hadoop集群的安装与部署—— Hadoop配置参数介绍Hadoop集群启动与监控

hadoop之hadoop基础介绍

学习笔记Hadoop—— Hadoop介绍

大数据-Hadoop生态-Hadoop介绍