学习笔记Flink—— Flink安装启动与监控

Posted 别呀

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了学习笔记Flink—— Flink安装启动与监控相关的知识,希望对你有一定的参考价值。

一、Linux环境准备

  • Centos7, 1 CPU , 2G Memory ,20G Disk , Virtual System
  • Hostname : node110.centos.com 、node111.centos.com、node112.centos.com
  • IP Address : 192.168.128.110、 192.168.128.111、 192.168.128.112
  • Linux 连接工具:Xshell、Xftp

二、安装准备

2.1、集群部署

一master两worker

看我博客:学习笔记Hadoop(四)—— Hadoop集群的安装与部署(1)—— 虚拟机安装、java安装

看我博客:学习笔记Hadoop(六)—— Hadoop集群的安装与部署(3)—— 配置ssh无密码登录


三、基础配置

3.1、单节点配置Flink

  1. 解压缩tar -zxvf flink-1.10.1-bin-scala_2.11.tgz -C /opt/

  2. 修改配置文件vi /etc/profile

  3. 使配置文件生效: source /etc/profile

  4. 修改配置文件
    进入Flink的conf下,修改以下三个文件

flink-conf.yaml文件:

slaves文件:

masters文件:

在/etc/hosts里添加:

  1. 新建文件夹

3.2、Flink多节点配置

  1. 克隆node110 到node111、node112;
  2. 修改机器名、IP
#修改机器名  
hostnamectl set-hostname node111
hostnamectl set-hostname node112

# 修改IP     修改address(node110配的)
vi /etc/sysconfig/network-scripts/ifcfg-ens33
  1. 配置SSH无密码登录;




    成功:

四、集群启动/关闭

进入flink的bin目录下,执行

启动./start-cluster.sh


启动成功:

浏览器查看(node110:8081):

关闭./stop-cluster.sh

以上是关于学习笔记Flink—— Flink安装启动与监控的主要内容,如果未能解决你的问题,请参考以下文章

Flink 系统性学习笔记系列

Flink学习笔记:Flink的最简安装

Flink学习笔记:Flink的最简安装

Flink 系统性学习笔记

Flink 系统性学习笔记

Flink学习笔记:搭建Flink on Yarn环境并运行Flink应用