Hive
Posted hotmemo
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Hive相关的知识,希望对你有一定的参考价值。
数据仓库
Hive是建立在Hadoop HDFS上的数据仓库基础架构
Hive可以用来进行数据提取转化加载(ETL)
Hive定义了见到那的类似SQL查询语言,称为HQL它允许熟悉SQL的用户查询数据
Hive允许熟悉MapReduce开发者的开发自定义的mapper和reducer来处理内建的mapper和reducer无法完成的复杂的分析工作
Hive是SQL解析引擎,他将SQL语句转移成M/R Job然后在Hadoop执行
Hive的表其实就是HDFS的目录/文件
Hive的体系节后
Hive的元数据:Hive将元数据存储在数据库中(metastore),支持mysql,derby等数据库。
Hive中的元数据包括表的名字,表的列和分区及其属性,表的属性(是否为外部表等),表的数据所在目录等
一条HQL语句如何在hive中进行查询的?
解释器、编译器、优化器完成HQL查询语句从词法分析、语法分析、编译、优化以及查询计划的生成。生成的查询记录存储在HDFS中,并在随后有MapReduce调用执行
以上是关于Hive的主要内容,如果未能解决你的问题,请参考以下文章