千万pv网站架构之RabbitMQ

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了千万pv网站架构之RabbitMQ相关的知识,希望对你有一定的参考价值。

千万pv网站架构之RabbitMQ

简介

什么是RabbitMQ?

MQ全称为Message Queue, 消息队列(MQ)是一种应用程序对应用程序的通信方法。应用程序通过读写出入队列的消息(针对应用程序的数据)来通信,而无需专用链接来连接它们。消息传递指的是程序之间通过在消息中发送数据进行通信,而不是通过直接调用彼此来通信,直接调用通常是用于诸如远程过程调用的技术。排队指的是应用程序通过 队列来通信。队列的使用除去了接收和发送应用程序同时执行的要求。

RabbitMQ几个关键的概念的说明:

Broker:简单来说就是消息队列服务器实体。

Exchange:消息交换机,它指定消息按什么规则,路由到哪个队列。

Queue:消息队列载体,每个消息都会被投入到一个或多个队列。

Binding:绑定,它的作用就是把exchange和queue按照路由规则绑定起来。

Routing Key:路由关键字,exchange根据这个关键字进行消息投递。

vhost:虚拟主机,一个broker里可以开设多个vhost,用作不同用户的权限分离。

producer:消息生产者,就是投递消息的程序。

consumer:消息消费者,就是接受消息的程序。

channel:消息通道,在客户端的每个连接里,可建立多个channel,每个channel代表一个会话任务。

消息队列的使用过程:

(1)、客户端连接到消息队列服务器,打开一个Channel(消息通道)。
(2)、客户端声明一个Exchange(消息交换机),并设置相关属性。
(3)、客户端声明一个Queue(消息队列载体),并设置相关属性。
(4)、客户端使用一个Routing Key(路由关键字),在Exchange和Queue之间建立好绑定关系。
(5)、客户端投递消息到Exchange。
Exchange接收到消息后,就根据消息的Key和已经设置的Binding,进行消息路由,将消息投递到一个或者多个队列里。

RabbitMQ的使用场景

RabbitMQ支持消息的持久化,也就是数据写在磁盘上。
消息队列的持久化包括3个部分:
1、Exchange持久化,在声明时指定durable=>1。
2、Queue持久化,在声明时指定durable=>1。
3、消息持久化,在投递时指定delivery_mode=>2(1是非持久化)。

RabbitMQ的实际应用

RabbitMQ模式大概分为以下三种:
1、单一模式。
2、普通模式(默认的集群模式)。
3、镜像模式(把需要的队列做成镜像队列,存在于多个节点,属于RabbitMQ的HA方案,在对业务可靠性要求较高的场合中比较实用)。

实验部署

主机名 IP地址 系统用途
CentOS7-1(MQ01) 172.16.10.138 磁盘节点
CentOS7-2(MQ02) 172.16.10.147 内存节点
CentOS7-5(MQ03) 172.16.10.146 内存节点
  • 设置每台服务器的hosts解析文件,添加以下内容

vim /etc/hosts

172.16.10.138   RabbitMQ01
172.16.10.147   RabbitMQ02
172.16.10.146   RabbitMQ03
  • 设置每台服务器的hostname

mq01.localdomain #依次为mq02 mq03

  • 配置安装带有RabbitMQ的epel源

yum -y install epel-release

  • 使用yum仓库安装RabbitMQ软件

yum install -y rabbitmq-server

  • 相关配置及开启服务
/usr/lib/rabbitmq/bin/rabbitmq-plugins list       #查看插件安装情况

/usr/lib/rabbitmq/bin/rabbitmq-plugins enable rabbitmq_management      #启用rabbitmq_management服务

systemctl  start  rabbitmq-server    #开启服务

rabbitmqctl cluster_status      #检查三台的集群状态,目前相互独立,没有形成集群。

Cluster status of node [email protected] ...
[{nodes,[{disc,[[email protected]]}]},               
 {running_nodes,[[email protected]]},         #可以看到此时,是并没有集群的
 {cluster_name,<<"[email protected]">>},
 {partitions,[]}]
...done

技术分享图片

  • 集群部署(两台内存节点上配置)
rabbitmqctl stop_app

rabbitmqctl join_cluster --ram [email protected]     #加入到磁盘节点

rabbitmqctl start_app 

rabbitmqctl cluster_status            #验证集群状态

技术分享图片

  • 网页登录rabbitmq的web管理页面查看

技术分享图片

以上是关于千万pv网站架构之RabbitMQ的主要内容,如果未能解决你的问题,请参考以下文章

大型网站架构之千万PV之RabbitMQ

千万PV网站架构之RabbitMQ(消息队列)安装集群

千万PV网站中RabbitMQ安装集群

(转)浅谈千万级PV/IP规模高性能高并发网站架构

千万级PV规模高性能高并发网站架构

千万PV----RabbitMQ集群配置