是否可以在 Hadoop 1 中使用 Impala(没有 YARN)?

Posted

技术标签:

【中文标题】是否可以在 Hadoop 1 中使用 Impala(没有 YARN)?【英文标题】:Is it possible to use Impala in Hadoop 1 (without YARN)? 【发布时间】:2014-03-07 09:41:27 【问题描述】:

我在 Hadoop 1 中看到我们可以使用的唯一范例是 mapreduce。如果您想使用其他范例(例如 spark),则必须使用 Hadoop 2.0 和 YARN。

但我有一个与 Impala 相关的问题。是否可以在没有 YARN 的情况下使用 Impala?

谢谢。

【问题讨论】:

【参考方案1】:

是的,Impala 可以独立于 YARN 使用。

【讨论】:

那么为什么人们说在 Hadoop 1 中,我们可以使用的唯一范例是 MapReduce 呢?这么说有错吗? 核心 Hadoop 包含 2 个部分:MapReduce 和 HDFS。 Impala、Spark、Oryx 等应用程序使用 Hadoop 的 HDFS 组件,但不使用 MR。 YARN 为 Hadoop 2 提供的是通用资源协商器,其他服务可以利用它来进行集中式资源共享、管理和集群。

以上是关于是否可以在 Hadoop 1 中使用 Impala(没有 YARN)?的主要内容,如果未能解决你的问题,请参考以下文章

Cloudera Hadoop Impala - 提取上次刷新日期

Hadoop 1.0.4 上的 Impala

Impala 中invalidate metadata和refresh

hadoop生态系统学习之路hbase与hive的数据同步以及hive与impala的数据同步

Impala 有自己的执行引擎还是在 Hadoop 生态系统中的 MapR 上工作?

Hadoop下的impala数据库语法应用