Kafka的安装和设置

Posted 2020-09-22 代码空间

Kafka是一种分布式发布订阅消息系统。

Kafka有三种模式：

（1）单节点单Broker，在一台机器上运行一个Kafka实例；

（2）单节点多Broker，在一台机器上运行多个Kafka实例；

（3）多截点多Broker，在多台机器上运行多个Kafka实例。

本文直接以第三种模式进行安装。

首先，下载kafka_2.12-0.10.2.1.tgz文件到/opt，并用

tar -zxvf

命令解压。在/etc/profile文件中增加设置：

export KAFKA_HOME=/opt/kafka_2.12-0.10.2.1
export PATH=$PATH:$KAFKA_HOME/bin

并且

source /etc/profile

然后进入解压后的目录，修改${KAFKA_HOME}/config/server.properties文件，增加下面的设置：

broker.id=0
port=9092
log.dirs=/opt/kafka_2.12-0.10.2.1/logs
zookeeper.connect=master:12181,slave03:12181,slave04:12181

然后用scp命令将整个${KAFKA_HOME}文件夹复制到另外两台机器。同样的修改/etc/profile文件和${KAFKA_HOME}/config/server.properties文件，把broker.id分别改成1和2，${KAFKA_HOME}/logs/meta.properties里面也有一个broker.id，这两个broker.id必须一致。

最后，就可以运行了，先启动ZooKeeper，再输入命令：

kafka-server-start.sh $KAFKA_HOME/config/server.properties

运行Kafka，如果没有错误信息，就表明安装成功已经运行了。

停止运行Kafka，输入命令：

kafka-server-stop.sh