CDH5.10.x安装

Posted 2022-12-04 zisheng_wang_DATA

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了CDH5.10.x安装相关的知识，希望对你有一定的参考价值。

1.CDH (Cloudera’s Distribution, including Apache Hadoop)，是Hadoop众多分支中的一种，由Cloudera维护，基于稳定版本的Apache Hadoop构建，并集成了很多补丁，可直接用于生产环境。 Cloudera Manager则是为了便于在集群中进行Hadoop等大数据处理相关的服务安装和监控管理的组件，对集群中主机、Hadoop、Hive、Spark等服务的安装配置管理做了极大简化。
2. 下载cloudera-manager-installer.bin
这个地址可以选择最新的CM的安装文件进行下载
http://archive.cloudera.com/cm5/installer/latest/cloudera-manager-installer.bin
http://archive.cloudera.com/cm5/installer/ (选择自己想安装的的版本)
本次使用的是5.1.0

下载repo文件
http://archive.cloudera.com/cm5/redhat/7/x86_64/cm/cloudera-manager.repo
cloudera-manager.repo文件放到/etc/yum.repos.d 下。红箭头的5改为对应的版本5.10.0

执行yum clean all 清空yum缓存

yum list|grep cloudera 验证repo文件是否起效 ,如果该命令很慢的话，可以
yum list>cm_test.txt
cat cm_test.txt|grep cloudera

下载rpm文件
yum install -y rpm包名

每个机器上安装：
cloudera-manager-agent.x86_64
cloudera-manager-daemons.x86_64
oracle-j2sdk1.7.x86_64

自下而上安装以上文件
5.然后运行.bin安装CM Server，只需要在spark上安装CM Server:
chmod +x *.bin
./cloudera-manager-installer.bin 安装cm server
Cm Server的日志目录： /var/log/cloudera-scm-server
安装过程日志目录：/var/log/cloudera-manager-installer

6.成功安装后访问界面，等待2分钟后：(也许时间会更长一些)
http://192.168.0.115:7180

Username: admin
Password: admin

选择免费的版本

注：cm相关的安装目录都在/var/lib 下，日志都在/var/log 下。
Jdk安装目录在/usr/java 下。
7.CDH 的两种方式
安装CDH 有两种方式，一种是使用rpm包（需要联网），另一种是使用parcels包（离线）。
parcels方式不需要联网，且安装简洁，也是官方推荐的方式。
parcels方式安装步骤，仅在主节点就行了
8.下载软件包。

下载地址：http://archive.cloudera.com/cdh5/parcels/5.10/
下载如下红色标出的3个文件：

el是红帽、Centos等系统的，el7应Centos 7x
下载后把这3个文件放到/opt/cloudera/parcel-repo目录下，该目录在cm安装后已自动创建。
9.DH-5.7.1-1.cdh5.7.1.p0.11-el6.parcel.sha1 的后缀改为.sha;出现以下数字，说明修改成功。