Cloudera Manager监控介绍

Posted 2022-09-27

温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。

Fayson的github：https://github.com/fayson/cdhproject

提示：代码块部分可以左右滑动查看噢

Cloudera Manager提供了许多功能，用于监控集群组件（主机，服务）的运行状况和性能，以及集群上运行的作业的性能和资源情况。具体的包括以下项目：

 

1.服务监控：主要包括如何查看服务和角色实例的运行状况测试结果。图表库中有各种各样的指标，方便诊断问题。健康测试包括关于组件的健康状况变得存在隐患（concerning）或不良（bad）的建议。你还可以查看对服务或角色执行的操作的历史记录，并可以查看配置更改的审核日志。

2.主机监控：包括如何查看与集群中所有主机有关的信息：哪些主机处于启动或关闭状态，主机当前驻留和虚拟内存消耗，主机上运行的是哪些角色实例，哪些主机分配给不同机架等等。你可以查看集群中所有主机的摘要视图，也可以深入了解各个主机的大量详细信息，其中包括可以直观显示主机上关键指标的图表。

3.活动监控：实际就是作业监控，包括Impala，MapReduce，Spark和YARN的作业。包括如何查看集群上当前和历史作业，并提供许多有关各个作业使用的资源的统计数据，包括表格显示和图表。你可以比较类似作业的性能，并查看作业中单个任务的性能，以帮助诊断故障或调优性能。

4.事件监控：包括查看事件，告警和搜索事件，从而让你查看集群范围内发生的所有相关事件的历史记录。你可以按时间范围，服务，主机，关键字等过滤事件。

5.告警：通过Cloudera Manager配置特定事件并生成告警。你可以为特定类型的事件配置阈值，启用和禁用它们，并通过电子邮件或使用SNMP trap配置关键事件的告警通知。你还可以暂时禁止各个角色，服务，主机或整个集群的告警，以允许系统维护/排障，以避免产生太多的告警信息。

6.生命周期和安全审计：包括如何查看服务，角色和主机生命周期事件，如创建角色或服务，为角色或服务进行配置修订，解除授权或重新授权主机，运行由Cloudera Manager管理的历史记录命令。你可以按时间范围，服务，主机，关键字等过滤审核事件条目。

7.绘制图表：包括如何搜索指标数据，创建数据图表，将数据分组，以及将这些图表保存到用户定义的仪表盘。

8.日志：包括如何以各种方式访问日志，以及结合你正在查看的上下文。比如，在监控服务时，你可以通过相同的用户界面轻松单击单个链接查看与特定服务相关的日志条目。查看用户活动的信息时，你可以轻松查看作业运行时使用的主机上发生的相关日志条目。

9.报告：查看用户，用户组和目录使用的磁盘空间历史记录信息，以及查看集群作业活动用户，用户组或job id。这些报告可以根据选定的时间段汇总如小时，每天，每周等，并可导出为xls或csv格式文件。你还可以管理HDFS目录，包括搜索和设置配额。

10.集群配置和操作排障：包括一些常见问题的解决方案，这些问题可能会导致你无法正常使用Cloudera Manager，同时包括如何使用Cloudera Manager日志和通知管理工具来诊断问题。

参考：

​​https://www.cloudera.com/documentation/enterprise/latest/topics/cm_dg_introduction.html​​

 

在后面的文章中Fayson会基于每个细项进行具体实操说明。

提示：代码块部分可以左右滑动查看噢

为天地立心，为生民立命，为往圣继绝学，为万世开太平。

温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。

推荐关注Hadoop实操，第一时间，分享更多Hadoop干货，欢迎转发和分享。

原创文章，欢迎转载，转载请注明：转载自微信公众号Hadoop实操