聊聊 Pulsar: 在 Linux 环境上搭建 Pulsar

Posted 老周聊架构

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了聊聊 Pulsar: 在 Linux 环境上搭建 Pulsar相关的知识,希望对你有一定的参考价值。

一、环境准备

jdk下载地址链接:jdk 1.8,提取码: dv5h
pulsar下载地址链接:pulsar2.9.1,提取码: 8489

1.1 Java 环境为前提

1.1.1 上传jdk-8u261-linux-x64.rpm到服务器并安装

# 安装命令
rpm -ivh jdk-8u261-linux-x64.rpm 

1.1.2 配置环境变量

# 编辑配置文件,jdk的bin目录到/etc/profile文件,对所有用户的shell有效
vim /etc/profile
# 生效
source /etc/profile

export JAVA_HOME=/usr/java/jdk1.8.0_261-amd64
export PATH=$PATH:$JAVA_HOME/bin

# 验证
java -version


至此,jdk 安装成功。

1.2 Pulsar 的安装与配置

1.2.1 上传apache-pulsar-2.9.1-bin.tar.gz到服务器并解压

tar -zxf apache-pulsar-2.9.1-bin.tar.gz -C /opt 

1.2.2 启动单机模式 Pulsar

./pulsar standalone


直接回车走起,然后出现以下报错:

很明显,没有足够的内存。

free -m 命令查了下,可用内存还有 957 M,怎么就说内存不够了呢?

查了下文档,原来默认需要 2G 的 JVM 内存。

那我就调整下 pulsar 的默认配置,把默认的 2g 调整成 512m。

vim conf/pulsar_env.sh

PULSAR_MEM=$PULSAR_MEM:-"-Xms512m -Xmx512m -XX:MaxDirectMemorySize=512m"

source conf/pulsar_env.sh

然后继续启动 pulsar ./pulsar standalone


说我 zookeeper 有启动 2181 端口了。

是的,我的云主机是启动了一个 zookeeper。那我把我自己的启动的 zookeeper 停掉。

进到你安装 zookeeper 的目录中,执行以下停止的命令即可。

./zkServer.sh stop


再次启动 pulsar ./pulsar standalone

如果能看到以上日志,说明 pulsar 启动成功了!

启动后,会一直卡主前台进程,如果需要关闭 pulsar,直接 ctrl+c 即可。

二、生产与消费

2.1 模拟开启消费者监听数据

./pulsar-client consume my-topic -s "first-subscription"

2.2 模拟开启生产者生产数据

./pulsar-client produce my-topic --messages "hello-pulsar"

2.3 消费者成功接收消息

三、小结

Pulsar 的给我的感觉就是开箱即用,Pulsar 还帮我们内置了 zookeeper,我们至此都没有安装 zookeeper,期间我还停掉了自己的 zookeeper,这也正说明了 Pulsar 内置了 zookeeper,与我自己的 zookeeper 端口发生了冲突。

通过 jps 命令,也可以发现 Pulsar 帮我们启动了 zookeeper,有 QuorumPeerMain 进程。

Pulsar 与 Kafka 的单机模式搭建,一对比,毫无疑问,Pulsar 好简洁啊,Kafka 与 Zookeeper 一堆繁琐参数的配置。

好了,下一篇我们来搭建 Pulsar 的分布式建集群环境。我们下期再见~

以上是关于聊聊 Pulsar: 在 Linux 环境上搭建 Pulsar的主要内容,如果未能解决你的问题,请参考以下文章

聊聊 Pulsar: 在 Linux 环境上搭建 Pulsar

聊聊 Pulsar: Pulsar 分布式集群搭建

聊聊 Pulsar: Pulsar 分布式集群搭建

聊聊 Pulsar: Pulsar 分布式集群搭建

3台linux搭建Pulsar集群环境用于测试

聊聊 Kafka: 在 Linux 环境上搭建 Kafka