RabbitMQ的相关概念以及RabbitMQ的安装

Posted 2021-11-02 杀手不太冷！

文章目录

• RabbitMQ的相关概念以及RabbitMQ的安装
• • MQ的相关概念
  • • 什么是MQ
    • 为什么要使用MQ
    • MQ的分类
    • MQ的选择
  • RabbitMQ
  • • RabbitMQ的概念
    • 四大核心概念
    • Rabbit工作原理
    • 安装RabbitMQ
    • • 安装须知
      • 把rpm文件移动到自己的linux服务器
      • 安装顺序
      • • erlang
        • socat
        • rabbitmq-server
        • 不要用上面的安装方式，要用下面的安装方式
        • 第二种下载安装方式
        • 启动服务
        • 安装Web界面插件

RabbitMQ的相关概念以及RabbitMQ的安装

MQ的相关概念

什么是MQ

MQ(message queue),从字面意思上看，本质是个队列，FIFO先入先出，只不过队列中存放的内容是message而已，还是一种跨进程的通信机制，用于上下游传递消息。在互联网架构中，MQ是一种非常常见的上下游"逻辑解耦+物理解耦"的消息通信服务。使用了MQ之后，消息发送上游只需要依赖MQ，不用依赖其他服务。

为什么要使用MQ

1.流量消峰

举个例子，如果订单系统最多能处理一万次订单，这个处理能力应付正常时段的下单时绰绰有余，正常时段我们下单一秒后就能返回结果。但是在高峰期，如果有两万次下单操作系统是处理不了的，只能限制订单超过一万次后不允许用户下单。使用消息队列做缓冲，我们可以取消这个限制，把一秒内下的订单分散成一段时间来处理，这时有些用户可能在下单十几秒后才能收到下单成功的操作，但是比不能下单的体验要好。

2.应用解耦

以电商应用为例，应用中有订单系统，库存系统，物流系统，支付系统。用户创建订单后，如果耦合调用库存系统，物流系统，支付系统，任何一个子系统出了故障，都会造成下单操作异常。当转变成基于消息队列的方式后，系统间调用的问题会减少很多，比如物流系统因为发生故障，需要几分钟来修复。在物流系统恢复后，继续处理订单信息即可，下单用户感受不到物流系统的故障，提升系统的可用性。

3.异步处理

有些服务间调用是异步的，例如A调用B,B需要花费很长时间执行，但是A需要知道B什么时候可以执行完，以前一般有两种方式，A过一段时间去调用B的查询api查询。或者A提供一个callback api,B执行完之后调用api通知A服务。这两种方式都不是很优雅，使用消息总线，可以很方便解决这个问题，A调用B服务后，只需要监听B处理完成的消息，当B处理完成后，会发送一条消息给MQ，MQ会将此消息转发给A服务。这样A服务既不用循环调用B的查询api，也不用提供callback api。同样B服务也不用做这些操作。A服务还能及时的得到异步处理成功的消息。

MQ的分类

1.ActiveMQ

优点:单机吞吐量万级，时效性ms级，可用性高，基于主从架构实现高可用性，消息可靠性较低的概率丢失数据。

缺点：官方社区现在对ActiveMQ 5.x维护越来越少，高吞吐量场景较少使用。

2.Kafka

大数据的杀手锏，谈到大数据领域内的消息传输，则绕不开Kafka,这款为大数据而生的消息中间件，以其百万级TPS的吞吐量名声大噪，迅速成为大数据领域的宠儿，在数据采集，传输，存储的过程中发挥着举足轻重的作用。目前已经被LinkedIn,Uber,Twitter,Netflix等大公司所采纳。

优点：性能卓越，单机写入TPS约在百万条/秒，最大的优点，就是吞吐量高。时效性ms级可用性非常高，kafka是分布式的，一个数据多个副本，少数机器宕机，不会丢失数据，不会导致不可用，消费者采用Pull方式获取消息，消息有序，通过控制能够保证所有消息被消费且仅被消费一次；有优秀的第三方Kafka Web管理界面Kafka-Manager;在日志领域比较成熟，被多家公司和多个开源项目使用；功能支持：功能较为简单，主要支持简单的MQ功能，在大数据领域的实时计算以及日志采集被大规模使用

缺点：Kafka单机超过64个队列/分区，Load会发生明显的飚高现象，队列越多，load越高，发送消息响应时间变长，使用短轮询方式，实时性取决于轮询间隔时间，消费失败不支持重试；支持消息顺序，但是一台代理宕机后，就会产生消息乱序，社区更新较慢。

3.RocketMQ

RocketMQ出自阿里巴巴的开源产品，用Java语言实现，在设计时参考了Kafka,并做出了自己的一些改进。被阿里巴巴广泛应用在订单，交易，充值，流计算，消息推送，日志流式处理，binglog分发等场景。

优点：单机吞吐量十万级，可用性非常高，分布式架构，消息可以做到0丢失，MQ功能较为完善，还是分布式的，扩展性好，支持10亿级别的消息堆积，不会因为堆积导致性能下降，源码是java我们可以自己阅读源码，定制自己公司的MQ

缺点：支持的客户端语言不多，目前是java及c++,其中c++不成熟；社区活跃度一般，没有在MQ核心中去实现JMS等接口，有些系统要迁移需要修改大量代码。

4.RabbitMQ

2007年发布，是一个在AMQP（高级消息队列协议）基础上完成的，可服用的企业消息系统，是当前最主流的消息中间件之一。

优点：由于erlang语言的高并发特性，性能较好；吞吐量到万级，MQ功能比较完备，健壮，稳定，易用，跨平台，支持多种语言，如:Python,Ruby,.NET,Java,JMS,C,php等多种语言，支持AJAX文档齐全；开源提供的管理界面非常棒，用起来很好用，社区活跃度高；更新频率相当高https://www.rabbitmq.com/news.html

缺点：商业版需要收费，学习成本较高

MQ的选择

1.Kafka

Kafka主要特点是基于Pull的模式来处理消息消费，追求高吞吐量，一开始的目的就是用于日志收集和传输，适合产生大量数据的互联网服务的数据收集业务。大型公司建议可以选用，如果有日志采集功能，肯定是首选Kafka了。

2.RocketMQ

天生为金融互联网领域而生，对于可靠性要求很高的场景，尤其是电商里面的订单扣款，以及业务消峰，在大量交易通入时，后端可能无法及时处理的情况。RoketMQ在稳定性上可能更值得信赖，这些业务场景在阿里双11已经经历了多次考验，如果你的业务有上述并发场景，建议可以选择RocketMQ。

3.RabbitMQ

结合erlang语言本身的并发优势，性能好时效性微秒级，社区活跃度也比较高，管理界面用起来十分方便，如果你的数据量没有那么大，中小型公司优先选择功能比较完备的RabbitMQ。

RabbitMQ

RabbitMQ的概念

RabbitMQ是一个消息中间件：它接受并转发消息。你可以把它当做一个快递站点，当你要发送一个包裹时，你把你的包裹放到快递站，快递员最终会把你的快递送到收件人那里，按照这种逻辑RabbitMQ是一个快递站，一个快递员帮你传递快件。RabbitMQ与快递站的主要区别在于，它不处理快件而是接收，存储和转发消息数据。

四大核心概念

1.生产者：产生数据发送消息的程序是生产者

2.交换机：交换机是RabbitMQ非常重要的一个部件，一方面它接收来自生产者的消息，另一方面它将消息推送到队列中。交换机必须确切知道如何处理它接收到的消息，是将这些消息推送到特定队列还是推送到多个队列，亦或是把消息丢弃，这个得有交换机类型决定。

3.队列：队列是RabbitMQ内部使用的一种数据结构，尽管消息流经RabbitMQ和应用程序，但它们只能存储在队列中。队列仅受主机的内存和磁盘限制的约束，本质上是一个大的消息缓冲区。许多生产者可以将消息发送到一个队列，许多消费者可以尝试从一个队列接收数据。这就是我们使用队列的方式。

4.消费者：消费与接收具有相似的含义。消费者大多时候是一个等待接收消息的程序。请注意生产者，消费者和消息中间件很多时候并不在同一机器上。同一个应用程序既可以是生产者又可以是消费者。

Rabbit工作原理

如下图：

1. Broker：简单来说就是消息队列服务器实体。
2. Exchange：消息交换机，它指定消息按什么规则，路由到哪个队列。
3. Queue：消息队列载体，每个消息都会被投入到一个或多个队列。
4. Binding：绑定，它的作用就是把exchange和queue按照路由规则绑定起来。
5. Routing Key：路由关键字，exchange根据这个关键字进行消息投递。
6. vhost：虚拟主机，一个broker里可以开设多个vhost，用作不同用户的权限分离。
7. producer：消息生产者，就是投递消息的程序。
8. consumer：消息消费者，就是接受消息的程序。
9. channel：消息通道，在客户端的每个连接里，可建立多个channel，每个channel代表一个会话任务。

安装RabbitMQ

官网地址：https://www.rabbitmq.com，因为官网下载的速度太慢了，所以这里可以从网盘中下载，网盘链接地址：

rabbitmq服务器：

链接：https://pan.baidu.com/s/1WfCy_8SBCnJkv86pW_AO6w
提取码：ake7

erlang环境：

链接：https://pan.baidu.com/s/1a2iZ7Daa_9PXqaKGwv1b5w
提取码：rbqp

安装须知

因为rabbitMQ是用erlang语言写的，所以在安装rabbitMQ之前，一定要先配置erlang环境，并且rabbitMQ的版本和erlang的版本一定要匹配，要不然的话会出错的。通常我们只需要把二者都下载成最新版就可以了,这样的话它们一般都是相互匹配的。

我们这里测试的是在linux环境中的安装。

把rpm文件移动到自己的linux服务器

安装顺序

安装rabbitMQ的顺序必须是先安装erlang,然后再安装socat,然后再安装rabbitmq-server。

erlang

首先安装erlang环境，安装命令rpm -ivh erlang.rpm如下图：

上图命令中的–force --nodeps千万不要加，就算加上，最后rabbit也不能运行。

socat

接着安装socat,安装命令yum install socat -y如下图：

rabbitmq-server

最后安装rabbit-server,安装命令rpm -ivh rabbitmq-server-3.9.7-1.el8.noarch.rpm --force --nodeps如下图：

出现上图错误是因为我们需要先在rabbitmq用户组里面创建一个rabbitmq用户，但是在rabbitmq用户组里创建rabbitmq的时候也出错了，如下图：

/etc/shadow的隐藏属性设置成只有e之后，我们再次在rabbitmq用户组里创建rabbitmq用户，如下图：

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下

最后再次安装rabbit-server,安装成功，如下图：

不要用上面的安装方式，要用下面的安装方式

对于上面的安装erlang,socat,rabbitmq-server的安装方式，我在安装的时候给命令加上了–force --nodeps这两个关键字，虽然安装的时候没有报错，但是无论怎么都启动不起来rabbitmq,所以我后面实在是没有办法了，就把我的阿里云服务器重置了一下系统，然后重新下载，安装erlang,socat,rabbitmq-server。具体的重新安装过程，请看下文。

第二种下载安装方式

首先安装erlang环境，命令如下：

#在linux上如果想要从网上下载东西，使用的命令是weget命令，并且默认会下载到当前目录
wget https://packages.erlang-solutions.com/erlang-solutions-2.0-1.noarch.rpm		
wget https://packages.erlang-solutions.com/erlang-solutions-2.0-1.noarch.rpm  # 下载erlang安装包  wget下载默认下载在当前目录

rpm -Uvh erlang-solutions-2.0-1.noarch.rpm		# 解压升级erlang包,会把erlang升级成最高版本，因													#此时下载的rabbitmq-server也需要下载最新版本

yum install -y erlang				# 安装erlang包，因为上一个命令已经把erlang升级到了最新版本，因此安装的是最新版本的erlang

接着安装socat,命令如下：

yum install -y socat

最后安装rabbitmq-server，命令如下:

wget https://github.com/rabbitmq/rabbitmq-server/releases/download/v3.9.6/rabbitmq-server-3.9.6-1.el7.noarch.rpm        #此时的rabbitmq-server的最新版本是3.9.6因此要下载3.9.6版本										的rabbitmq-server

yum install -y rabbitmq-server-3.9.6-1.el7.noarch.rpm

注意

上述安装中，最重要的一点就是，当安装erlang环境的时候安装的是最新版本的，因此一定要先去rabbitmq官网，去看一下最新版本的rabbitmq是什么版本，然后再安装最新版本的rabbitmq-server,这样二者才不会发生冲突，查看版本如下图：

启动服务

#启动命令
/sbin/service rabbitmq-server start

#查看状态命令
/sbin/service rabbitmq-server status

#关闭命令
/sbin/service rabbitmq-server stop

#重启命令
/sbin/service rabbitmq-server restart

安装Web界面插件

开启web页面管理插件命令: rabbitmq-plugins enable rabbitmq_management,命令执行如下图：

用默认账号密码（都是guest）访问地址http://你的主机地址:15672/可以访问，我这里是访问的http://182.92.210.39:15672/,地址访问如下图：

重启rabbitmq服务如下图：

重新访问rabbitmq的web管理页面的url地址，发现还是不能访问，原因是我们要在阿里云服务器的安全组和防火墙上开启15672端口号，开启之后就可以访问rabbitmq的web管理页面了，如下图：

登录的时候提示只能在本地登录RabbitMQ的web管理页面，如下图：

我们需要在linux系统中给rabbitmq重新创建一个用户，然后为用户分配权限，如下：

#首先创建一个admin用户，这个用户的密码也是admin,第一个admin是用户名，第二个admin是密码
rabbitmqctl add_user admin admin

#然后为admin用户分配权限
rabbitmqctl set_user_tags admin administrator
rabbitmqctl set_permissions -p / admin ".*" ".*" ".*"

执行完上面的三条命令之后，我们就成功为rabbitmq创建了一个新的用户admin，接着就可以使用这个用户登录了，登录成功如下图：