Hadoop框架

Posted 若冲

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Hadoop框架相关的知识,希望对你有一定的参考价值。

Hadoop的广义与狭义之分

狭义的Hadoop:指的是一个框架,Hadoop是由三部分组成:HDFS:分布式文件系统--》存储;MapReduce:分布式离线计算框架--》计算;Yarn:资源调度框架

广义的Hadoop:广义的Hadoop不仅仅包含Hadoop框架,除了Hadoop框架之外的一些辅助框架。Flume:日志数据采集,Sqoop:关系型数据库数据的采集;

Hive:深度依赖Hadoop框架完成计算(sql),Hbase:大数据领域的数据库(相当于web的mysql

Sqoop:数据的导出

广义Hadoop指的是一个生态圈

 

以上是关于Hadoop框架的主要内容,如果未能解决你的问题,请参考以下文章

从Hadoop框架讨论大数据生态

spark是如何改进优化hadoop框架的

Hadoop学习系列(2.Hadoop框架介绍与搜索技术体系介绍)

hadoop系统原理

Hadoop_12_Hadoop 中的RPC框架演示

Hadoop基础:从Hadoop框架讨论大数据生态