单节点hadoop集群上的实验练习

Posted

技术标签:

【中文标题】单节点hadoop集群上的实验练习【英文标题】:lab exercises on Single node hadoop cluster 【发布时间】:2013-12-11 13:26:25 【问题描述】:

我已经使用 cloudera 的 vm 设置了一个单节点 hadoop 集群节点集群,并且需要在下面给出示例作为实验室练习的一部分,请帮助指出一些我可以用来运行的示例用例以下主题的实验练习

1 运行 Sqoop 导入和 2 Sqoop 导出 3 直接创建 Hive 表 4 来自 Sqoop 5 创建 Hive 表 6 查询 Hive 表 7 运行 Oozie 工作流程 8 使用分析推特数据 9水槽

【问题讨论】:

【参考方案1】:

既然 hadoop 是进行日志分析的好工具,那么您可以对 sqoop 导入执行以下操作(也可以使用 hive 进行查询): 许多公司从很长时间以来都在储存大量的原木,但似乎时间越长,必须储存的原木越来越多,数量也越来越多。现在mysql/oracle已经不行了,所以来sqoop导入。之后,您可以继续在日志上使用 Hive 进行常规 SQL 查询。 希望这个例子有帮助!

【讨论】:

以上是关于单节点hadoop集群上的实验练习的主要内容,如果未能解决你的问题,请参考以下文章

Hadoop伪集群(单节点集群)安装(Centos7)

Hadoop伪集群(单节点集群)安装(Centos7)

Hadoop伪集群(单节点集群)安装(Centos7)

如何安装单节点的hadoop

尝试使用hadoop创建单节点集群

在 Hadoop 单集群节点中格式化名称节点时出错