hadoop快速入门教程:hadoop安装包下载与监控参数说明

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了hadoop快速入门教程:hadoop安装包下载与监控参数说明相关的知识,希望对你有一定的参考价值。

前阶段用了差不多两周的时间把DKhadoop的运行环境搭建以及安装的各个操作都介绍了一遍。关于DKhadoop安装包下载也只是顺带说了一下,但好像大快搜索的服务器在更新,新的下载页面还不好用!有好些朋友留言说了大快搜索网站上无法下载。我已经将之前下载的这个版本上传到了网盘了,需要的DKhadoop安装包的朋友可以直接通过网盘下载!

DKHadoop安装包下载:

关于DKhadoop版本在写Hadoop环境搭建部署的时候有提到过,大版本主要有DKHadoop标准版本、DKH-分布式SQL版本、DKHadoop商业发行版。我们自己可以去下载到的包括我之前下载的安装包版本都是三节点的学习版本。DKhadoop标准版本有测试用的单机版,支持3节点的学习版本,以及支持个人研发用的5节点标准服务器版本。3节点此前是提供免费下载,5节点可能需要提交申请,但还好同样也是免费的!

DKHadoop安装包下载地址:

https://pan.baidu.com/s/1-427Sh6lTLrLAPh6KMOYVg

密码: vg2w

DKM平台监控参数说明:

平台监控参数的内容主要就是针对下载安装了DKHadoop的朋友了,下面简单的各大家介绍几个监控参数。

1、首页监控界面

1 集群平均负载

技术分享图片 

监控集群CUP负载

纵轴表示 任务数量,单位个

横轴表示时间,单位分钟

表示集群内等待的任务数量, 比如1分钟的红线代表在1分钟之内需要等待执行的任务数量, 5分钟的线代表5分钟之内需要等待执行的任务数量。

 2集群磁盘IO

技术分享图片 

监控集群磁盘IO

纵轴表示读写速度,单位KB/S

横轴表示时间,单位分钟

磁盘字节写入速度表示写磁盘的速度。 磁盘字节数量读取表示读磁盘的速度。单位是KB/S

3集群磁盘使用情况

技术分享图片 

监控集群磁盘使用的情况

纵轴表示磁盘空间 ,单位GB

横轴表示时间,单位分钟

Total:表示集群磁盘的总体空间

Free:表示空余空间

Used:表示已经使用的空间

2、HDFS监控界面

1 HDFS 容量监控

技术分享图片 

监控集群中HDFS的容量

纵轴表示HDFS的容量,单位GB

横轴表示时间,单位分钟

2 DataNode 读取字节数

技术分享图片 

监控集群中DataNode 读取量

纵轴表示DataNode字节数,单位B

横轴表示时间,单位分钟

3 DataNode 写入字节数

技术分享图片 

监控集群中DataNode 写入量

纵轴表示DataNode字节数,单位B

横轴表示时间,单位分钟

3、Hbase监控界面

1 RegionServer 的总数

技术分享图片 

监控RegionServer 的总数

纵轴表示数量,单位个

横轴表示时间,单位分钟

2RegionServer中memstoresize的数量

技术分享图片 

 

监控RegionServer中memstoresize的数量

纵轴表示数量,单位个

横轴表示时间,单位分钟

3 RegionServer 读写请求次数

技术分享图片 

监控 RegionServer 读写请求次数

纵轴表示次/每秒,单位秒

横轴表示时间,单位分钟

4 RegionServer 中总store个数

 

技术分享图片 

监控 RegionServer 中总store个数

纵轴表示store数量,单位个

横轴表示时间,单位分钟

5 RegionServer 中总storFile个数

 技术分享图片 

监控 RegionServer 中总storeFile个数

纵轴表示storeFile数量,单位个

横轴表示时间,单位分钟

DKH平台监控参数太多,本篇就简单介绍这几个吧,不然码的篇幅太长,看着也累!下次将会接着就监控平台的参数进行说明。我尽量把我知道的写完吧!本文的重点还是最上部分的安装包下载,提取码上面也给了。下载玩一下吧!


以上是关于hadoop快速入门教程:hadoop安装包下载与监控参数说明的主要内容,如果未能解决你的问题,请参考以下文章

Ubuntu下单机安装Hadoop详细教程(附所需安装包下载)

Ubuntu下单机安装Hadoop详细教程(附所需安装包下载)

Spark入门实战系列--2.Spark编译与部署(中)--Hadoop编译安装

docker快速搭建hadoop集群(2023.3.27)

Spark入门实战系列--2.Spark编译与部署(中)--Hadoop编译安装

Spark入门实战系列--2.Spark编译与部署(中)--Hadoop编译安装