Cloudera Manager初体验

Posted 2021-05-18 杀智勇双全杀

Cloudera Manager初体验

• 概述
• 启动
• 查看
• • HDFS
  • Hive
  • Oozie
  • Sqoop
  • YARN
  • Hue
• 关闭

概述

之前配置各种分布式应用（Hadoop、Hive等）都是利用命令行配置，再分发。。。今天换种口味。。。试一下Cloudera Manager。简单体验下，随便玩玩。

启动

打开做好的虚拟机，等。。。要等很久。。。由于懒得配置映射，直接在浏览器：

192.168.88.150:7180

输入CM的用户名和密码登录。

就长这样。。。

这里可以启动、停止服务，还有很多功能。。。虽然都是命令行和shell脚本可以做的，但是B/S的GUI交互，对新手异常友好。当然还有中文！

唯一的问题。。。占内存。。。24G内存条的老爷机勉强可以启动，但是做MapReduce之类的运算不升级内存条估计够呛。。。本图吧垃圾佬刚下单一条酷兽16G 2666，主要是便宜，管它是不是拆机颗粒，又不是不能用。。。

查看

还是要等！！！有问题就一直等，过10分钟就好了。。。都是因为资源不足的问题。。。咳咳咳。。。

HDFS

点这里，由于没用端口映射：

手动修改为：

http://192.168.88.150:9870/

上边的条子不再是宝强绿，变成了宝石蓝。。。功能也多了不少（∵版本更高）。

Hive

Oozie

点这里：

∵懒得配置映射，无法识别该节点。。。手动输入：

http://192.168.88.150:11000/oozie

有点小问题，但是凑合着能访问该端口了。。。

Sqoop

YARN

点这里，不出意外：

手动修改为：

192.168.88.150:8088

熟悉的大象。。。19888端口还能看历史Job：

Hue

老规矩：

http://192.168.88.150:8889/

也可以查询其它：

关闭

随便玩玩，内存占用21.3/23.9（89%），太可怕了。。。

一定要等到全部关闭，分布式系统与单机系统不同，直接掉电可能出现元数据丢失等奇怪的问题。。。

全部结束后就可以poweroff。

在酷兽内存条回来前先不玩了。。。玩不起。。。+到32G也就是这老爷机的极限了，希望不要翻车。。。