揭开消息中间件RabbitMQ的神秘面纱

Posted xingyunblog

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了揭开消息中间件RabbitMQ的神秘面纱相关的知识,希望对你有一定的参考价值。

当你看到这篇博文的时候,相信你至少已经知道RabbitMQ 是一个非常优秀的消息中间件,它使用专门处理高并发的Erlang 语言编写而成的消息中间件产品。

本文我们将重点学习消息队列,消息中间件的概念,以及如何在Windows 上安装RabbitMQ并使用它发送一个消息

为了更好地学习RabbitMQ还是先来看看一些专业平台是如何解释它的吧。

1. 关于RabbitMQ的解释

RabbitMQ是部署最广泛的开源消息代理。

RabbitMQ在全球范围内在小型初创公司和大型企业进行了超过35,000次的生产部署,是最受欢迎的开源消息代理。

RabbitMQ轻巧且易于部署在云端和云端。 它支持多种消息传递协议。 RabbitMQ可以部署在分布式和联合配置中,以满足高规模,高可用性需求。

RabbitMQ可运行在许多操作系统和云环境中,并为大多数流行语言提供广泛的开发工具。

————官网解释

RabbitMQ是实现了高级消息队列协议(AMQP)的开源消息代理软件(亦称面向消息的中间件)。

RabbitMQ服务器是用Erlang语言编写的,而群集和故障转移是构建在开放电信平台框架上的。

———— 维基百科

Tips: 

在最近研读的Think in Java 第四版中有这样一段话:

如果你发现程序中某个部分必须大量使用并发,并且你在试图构建这个部分时碰到了过多的问题,那么你可以考虑使用Erlang 这类专门的并发语言来创建这个部分。

1.1 什么是消息队列?

技术分享图片

1.2 那什么是消息中间件呢?

技术分享图片

消息队列中间件(简称消息中间件)是指利用高效可靠的消息传递机制进行与平台无关的数据交流,并基于数据通信来进行分布式系统的集成。

通过提供消息传递和消息排队模型,它可以在分布式环境下提供应用解耦、弹性伸缩、冗余存储、流量削峰、异步通信、数据同步等等功能,

其作为分布式系统架构中的一个重要组件,有着举足轻重的地位.

传统的信息系统作法可能是收到一条消息就马上同步存入数据库,这种作法在小并发量的情况下可以很好的工作,但互联网大并发环境下就是灾难.

更多解释请参考:消息队列之 RabbitMQ


 2. 消息中间件知多少?

ActiveMQ 是 Apache 出品的、采用 Java 语言编写的完全基于 JMS1.1 规范的面向消息的中间件,为应用程序提供高效的、可扩展的、稳定的和安全的企业级消息通信。不过由于历史原因包袱太重,目前市场份额没有后面三种消息中间件多,其最新架构被命名为 Apollo,号称下一代 ActiveMQ,有兴趣的同学可行了解。

RabbitMQ 是采用 Erlang 语言实现的 AMQP 协议的消息中间件,最初起源于金融系统,用于在分布式系统中存储转发消息。RabbitMQ 发展到今天,被越来越多的人认可,这和它在可靠性、可用性、扩展性、功能丰富等方面的卓越表现是分不开的。

Kafka 起初是由 LinkedIn 公司采用 Scala 语言开发的一个分布式、多分区、多副本且基于 zookeeper 协调的分布式消息系统,现已捐献给 Apache 基金会。它是一种高吞吐量的分布式发布订阅消息系统,以可水平扩展和高吞吐率而被广泛使用。目前越来越多的开源分布式处理系统如 Cloudera、Apache Storm、Spark、Flink 等都支持与 Kafka 集成。

RocketMQ 是阿里开源的消息中间件,目前已经捐献个 Apache 基金会,它是由 Java 语言开发的,具备高吞吐量、高可用性、适合大规模分布式系统应用等特点,经历过双 11 的洗礼,实力不容小觑。

ZeroMQ 号称史上最快的消息队列,基于 C 语言开发。ZeroMQ 是一个消息处理队列库,可在多线程、多内核和主机之间弹性伸缩,虽然大多数时候我们习惯将其归入消息队列家族之中,但是其和前面的几款有着本质的区别,ZeroMQ 本身就不是一个消息队列服务器,更像是一组底层网络通讯库,对原有的 Socket API 上加上一层封装而已。

目前市面上的消息中间件还有很多,比如腾讯系的 PhxQueue、CMQ、CKafka 等,甚至NoSQL Redis据说 也有消息 队列的功能。

参考博文:IM系统的MQ消息中间件选型:Kafka还是RabbitMQ?

3.RabbitMQ安装

RabbitMQ是一个AMQP(Advanced Message Queue,即高级消息队列协议)服务器 。

下载地址: RabbitMQ下载

安装说明:各平台下RabbitMQ安装指南

3.1 Windows 下安装RabbitMQ

1. 点击 RabbitMQ下载 我们可以看到这个页面

技术分享图片

2. 这里我们选择图中推荐的  Windows 安装RabbitMQ 文档

技术分享图片

 下载完成后选中*.exe 文件右键管理员身份运行,一般情况下会出现这个

技术分享图片

Tips: 这是怎么回事呢?

由于RabbitMQ 是由Erlang语言编写而成,所以一般情况在安装RabbitMQ之前,我们还需要安装Erlang的运行环境,类似java中的JRE或者C#中的 .net framework.

 3. 下载安装Erlang

点击是,会自动打开Erlang 的官方下载页面

技术分享图片

根据自己的电脑选择对应的版本,我的电脑是windows 10 64 位,所以这里选择64 位,如果你的电脑是32 位清选择32 位版本。

技术分享图片

这里默认是没有勾选的,我们需要勾选下,然后点击 Next,根据提示安装完成即可。

安装的时候默认我发现已经生成了

技术分享图片

Tips: 如果没有请自行添加

将Erlang 添加到Path路径下

%ERLANG_HOME%in

 技术分享图片

4. 安装RabbitMQ

安装完成Erlang 之后,我们再次运行我们的RabbitMQ 安装包

技术分享图片

默认的安装路径是C:Program FilesRabbitMQ Server abbitmq_server-3.7.6

5. 配置环境变量

一般情况下,我们最好配置下环境变量以便于我们今后更好地使用。

技术分享图片

RABBITMQ_BASE
C:Program FilesRabbitMQ Server
abbitmq_server-3.7.6

 然后我们需要添加到Path变量中

%RABBITMQ_BASE%sbin

技术分享图片

 6. 重新安装service

要使环境更改在Windows上生效,必须重新安装该服务。 重启服务是不够的。

这可以使用安装程序或者在具有管理员权限的命令行上完成。

注意:有两个文件rabbitmq-service.bat 和 rabbitmq-server.bat 别弄混了,不然执行命令会失败

管理员权限运行cmd 命令行,进入安装文件夹下的sbin目录

技术分享图片

这个RabbitMQ service 服务是自动开启的,所以我们需要先停止RabbitMQ服务

rabbitmq-service.bat stop

技术分享图片

然后移除RabbitMQ服务

rabbitmq-service.bat remove

技术分享图片

再次安装

rabbitmq-service.bat install

 技术分享图片

总结:关于RabbitMQ Service的用法

技术分享图片

7. 检测RabbitMQ 运行状态

如果我们想查看RabbitMQ 的运行状态,那么输入下列命令即可

rabbitmqctl status

 但是当年你输入后可能会看到这样的错误信息

技术分享图片

解决方案:

C:WindowsSystem32configsystemprofile.erlang.cookie

C:Usersfairy.erlang.cookie

对比下这两个文件,你会发现里面的值不一样,这就是导致这个错误的原因。

我们只需要将其中一个替换掉,两个保持统一即可,比如将系统下的那个文件替换掉个人用户下的那个文件

再次执行命令

rabbitmqctl status

执行成功后可以看到下面的回显:

技术分享图片

8.安装 RabbitMQWeb的管理插件

执行命令

rabbitmq-plugins enable rabbitmq_management

技术分享图片

要 生效需要重启下RabbitMQ Server

技术分享图片

9. 查看当前用户列表

rabbitmqctl.bat list_users

 执行成功后可以看到如下回显:

技术分享图片

10.打开RabbitMQ Web 管理界面

 执行成功后可以看到这个界面

技术分享图片

默认端口是15672

账号和密码默认都是guest

登陆后可以看到这样的管理界面

技术分享图片

4. 打造第一个Hello World 程序

RabbitMQ是一个消息代理:它接受和转发消息。你可以把它想象成一个邮局:当你把你想要发布的邮件放在邮箱里时,你可以确定先生或女士邮递员最终将邮件发送给你的收件人。

在这个比喻中,RabbitMQ是邮政信箱,邮局和邮递员。

RabbitMQ和邮局的主要区别在于它不处理纸张,而是接受,存储和转发二进制数据块 - 消息。

英文原文地址:https://www.rabbitmq.com/tutorials/tutorial-one-java.html

在搭建这个Hello World 之前,我们有必要了解下 RabbitMQ和一般的消息传递使用的一些术语。

4.1  消息传递术语

4.1.1 生产者

制作意味着发送。 一个发送消息的程序是一个生产者:

Tips: P 代表生产者

技术分享图片

4.1.2 队列

  • 队列是生活在RabbitMQ中的邮箱的名称。 尽管消息流经RabbitMQ和您的应用程序,但它们只能存储在队列中。
  • 一个队列只受主机内存和磁盘限制的约束,它本质上是一个很大的消息缓冲区。
  • 许多生产者可以发送进入一个队列的消息,并且许多消费者可以尝试从一个队列接收数据。 这就是我们代表队列的方式:

 技术分享图片

4.1.3 消费者

消费与接受有类似的意义。 消费者是一个主要等待接收消息的程序:

技术分享图片

请注意,生产者,消费者和中间件不必驻留在同一主机上;

4.2 "Hello World"使用 Java 客户端

在本教程的这一部分中,我们将用Java编写两个程序; 一个发送单个消息的生产者,以及接收消息并将其打印出来的消费者。

我们将详细介绍Java API中的一些细节,专注于这个非常简单的事情,以便开始使用。 这是一个消息传递的“Hello World”。

在下图中,“P”是我们的生产者,“C”是我们的消费者。 中间的盒子是一个队列 - RabbitMQ代表消费者保存的消息缓冲区。

 技术分享图片

RabbitMQ 有许多不同语言的RabbitMQ客户端。 这里我们将使用RabbitMQ提供的Java客户端。

4.2.1  下载相关依赖Jar 包

下载RabbitMQ提供的Java客户端以及它的依赖(SLF4J API and SLF4J Simple)

将这些文件复制到工作目录中,并跟着教程复制Java文件。

Tips:

RabbitMQ Java客户端也位于中央Maven存储库中,其中包含groupId com.rabbitmq和artifactId amqp-client

请注意SLF4J Simple对于教程来说已经足够了,但是您应该在生产环境中使用像Logback 这样的完整日志库。

 关于Maven 等其他下载方式请移步

Java Client

4.2.2 编写代码

我们拥有Java客户端及其依赖关系,那么我们接下来开始写代码。

由于是学习使用RabbitMQ,我们这里使用 STS 来写这个项目。

1. 打开STS,新建一个名字叫做 RabbitMQ_HelloWorld_Sample  的 Java Project。

2. 新建一个叫做libs的文件夹,我们将上面三个jar 复制到我们的项目中,然后并添加依赖

技术分享图片

 

 完成后项目结构如图所示

技术分享图片

3. 编写生产者类

我们会打电话给我们的消息发布者(发送者)发送和我们的消息使用者(接收者)Recv。 发布者将连接到RabbitMQ,发送一条消息,然后退出

技术分享图片

创建Send.java 文件,关于代码的讲解在注释里:

import java.util.concurrent.TimeoutException;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.Connection;
import com.rabbitmq.client.ConnectionFactory;

public class Send {

    //设置消息队列的名称
    private final static String QUEUE_NAME="hello";
    
    public static void main(String[] args) throws java.io.IOException, TimeoutException{
        
        /**
         * 创建一个到RabbitMQ Server 的连接
         * 连接抽象出套接字连接,并为我们处理协议版本协商和身份验证等。 
         * 在这里,我们连接到本地机器上的代理 - 因此是本地主机。 
         * 如果我们想连接到另一台机器上的代理,我们只需在此指定其名称或IP地址。
         * */
        ConnectionFactory factory = new ConnectionFactory();
        factory.setHost("localhost");
        Connection connection = factory.newConnection();
        Channel channel = connection.createChannel();
        
        /**
         * 接下来我们创建一个Channel 对象,这是大部分用于完成任务的API驻留的地方。
         * 要想发送出去,我们必须声明一个队列来执行发送,那么我们可以将消息发布到队列中:
         * */
        channel.queueDeclare(QUEUE_NAME, false, false, false, null);
        String message = "Hello World!";
        //声明一个队列是幂等的 - 只有当它不存在时才会被创建。 
        //消息内容是一个字节数组,所以你可以编码任何你喜欢的地方。
        channel.basicPublish("", QUEUE_NAME, null, message.getBytes());
        System.out.println(" [x] Sent ‘" + message + "‘");
        
        //最后我们关闭这些连接对象
        channel.close();
        connection.close();
        
    }
} 

 执行成功后你将看到这样的内容:

技术分享图片

Tips: ,

如果这是您第一次使用RabbitMQ,并且您没有看到“已发送”消息,那么您可能会抓住您的头脑,想知道会出现什么问题?

也许代理启动时没有足够的可用磁盘空间(默认情况下它至少需要200 MB空闲空间),因此拒绝接受消息。

检查代理日志文件以确认并在必要时减少限制。 配置文件文档将告诉你如何设置disk_free_limit。

还有一种可能是你的RabbitMQ 没有启动,执行下面命令再次尝试即可。

rabbitmq-service.bat start

技术分享图片

 4. 编写消费者

这就是我们的出版商。 我们的消费者推送来自RabbitMQ的消息,因此与发布单个消息的发布者不同,我们将继续运行以收听消息并将其打印出来。

技术分享图片

创建一个Recv.java 文件,代码讲解在注释里面

import com.rabbitmq.client.ConnectionFactory;
import com.rabbitmq.client.Connection;

import java.io.IOException;
import java.util.concurrent.TimeoutException;

import com.rabbitmq.client.AMQP;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.Consumer;
import com.rabbitmq.client.DefaultConsumer;
import com.rabbitmq.client.Envelope;

/**
 * 消费者
 * 额外的DefaultConsumer是一个实现Consumer接口的类,我们将使用它来缓存由服务器推送给我们的消息。
 * */
public class Recv {
     private final static  String QUEUE_NAME="hello";
     
     public static void main(String[] args) throws IOException, TimeoutException {
         
          /**
           * 设置与发布者相同; 
           * 我们打开一个连接和一个通道,并声明我们将要使用的队列。 
           * 请注意,这与发送发布到的队列相匹配
           * */
           ConnectionFactory factory = new ConnectionFactory();
            factory.setHost("localhost");
            Connection connection = factory.newConnection();
            Channel channel = connection.createChannel();

            /**
             * 请注意,我们也在这里声明队列。 
             * 因为我们可能会在发布者之前启动消费者,所以我们希望在我们尝试使用消息之前确保队列已存在。   
             * */
            channel.queueDeclare(QUEUE_NAME, false, false, false, null);
            System.out.println(" [*] Waiting for messages. To exit press CTRL+C");
            
            /**
             *  我们即将告诉服务器将队列中的消息传递给我们。
             *   由于它会异步推送消息,因此我们以对象的形式提供回调,该消息将缓冲消息,直到我们准备好使用它们。 
             *  这是一个DefaultConsumer子类的作用。
             * */

            Consumer consumer = new DefaultConsumer(channel) {
                  @Override
                  public void handleDelivery(String consumerTag, Envelope envelope,
                                             AMQP.BasicProperties properties, byte[] body)
                      throws IOException {
                    String message = new String(body, "UTF-8");
                    System.out.println(" [x] Received ‘" + message + "‘");
                  }
                };
            channel.basicConsume(QUEUE_NAME, true, consumer);
    }
}

执行成功后

技术分享图片

我们可以看到我们的消费者收到了消息队列生产者刚发布的消息。

本篇完~

以上是关于揭开消息中间件RabbitMQ的神秘面纱的主要内容,如果未能解决你的问题,请参考以下文章

揭开SolidWorks二次开发的神秘面纱

Kafka核心技术与实战——16 | 揭开神秘的“位移主题”面纱

揭开这个命令行构建序列的神秘面纱

低代码平台是什么鬼?带你揭开神秘面纱!

揭开动态代理的神秘面纱

揭开Java IO流中的flush()的神秘面纱