cluster management(hadoop)
Posted satyrs
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了cluster management(hadoop)相关的知识,希望对你有一定的参考价值。
installation: create user, mkdir, download, nano configuration file, nano system config, ssh masternode>all nodes, start-all
- 程序源文件存放
- 部署脚本 远程拷贝+本地配置(安装顺序及dependency)
- 目录结构及权限检查
- 远程scp
- 动态设置配置(hadoop/yarn以及spark集群,同步文件目录,配置文件无需修改。zookeeper单独配置每个journalnode的id。)
以上是关于cluster management(hadoop)的主要内容,如果未能解决你的问题,请参考以下文章
Spark运行模式_spark自带cluster manager的standalone cluster模式(集群)
Open Cluster Management 部署应用实践
如何使用 Google Cluster Manager 自定义默认引脚标记?