HadoopHDFSHiveHbase之间的关系

Posted AI算法攻城狮

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了HadoopHDFSHiveHbase之间的关系相关的知识,希望对你有一定的参考价值。

Hadoop:是一个分布式计算的开源框架

HDFS:是Hadoop的三大核心组件之一

Hive:用户处理存储在HDFS中的数据,hive的意义就是把好写的hive的sql转换为复杂难写的map-reduce程序

Hbase:是一款基于HDFS的数据库,是一种NoSQL数据库,主要适用于海量明细数据(十亿、百亿)的随机实时查询,如日志明细、交易清单、轨迹行为等

Hive与HBase的区别与联系

1、区别

Hive:Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能。

  • Hive本身不存储和计算数据,它完全依赖于HDFS和MapReduce,Hive中的表纯逻辑。hive需要用到hdfs存储文件,需要用到MapReduce计算框架。
  • hive可以认为是map-reduce的一个包装。hive的意义就是把好写的hive的sql转换为复杂难写的map-reduce程序。

HBase:HBase是Hadoop的数据库,一个分布式、可扩展、大数据的存储。

  • hbase是物理表,不是逻辑表,提供一个超大的内存hash表,搜索引擎通过它来存储索引,方便查询操作
  • hbase可以认为是hdfs的一个包装。他的本质是数据存储,是个NoSql数据库;hbase部署于hdfs之上,并且克服了hdfs

以上是关于HadoopHDFSHiveHbase之间的关系的主要内容,如果未能解决你的问题,请参考以下文章

HadoopHDFSHiveHbase之间的关系

类之间的关系

LSTM与RNN之间存在啥关系?

类与类之间的关系

类之间的依赖关系和组合关系

类之间的关系