Rabbitmq 消息队列

Posted 18513387476-com

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Rabbitmq 消息队列相关的知识,希望对你有一定的参考价值。

技术分享图片技术分享图片技术分享图片技术分享图片
技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片技术分享图片

一.rabbitmq 的概念

AMQP 即 Advanced Message Queuing Protocol 
高级消息队列协议,是应用层协议的一个开放标准,为面向消息的中间件设计。 消息中间件主要用于组件之间的解耦,消息的发送者无需知道消息使用者的存在, 反之亦然。
AMQP 的主要特征是面向消息、队列、路由(包括点对点和发布 / 订阅)、可靠 性、安全。
Rabbitmq 属于一个流行的开源消息队列系统。属于AMQP( 高级消息队列协议 ) 标准的一个 实现。是应 用层协议的一个开放标准,为面向消息的中间件设计。用于在分布式系统中存储转发消息,在 易用性、扩展性、高可用性等方面表现不俗。 
消息中间件主要用于组件之间的解耦,消息的发送者无需知道消息使用者的存在,反之亦然。 
 AMQP 的主要特征是面向消息、队列、路由(包括点对点和发布 / 订阅)、可靠性、安全。

二. 特点

1.使用Erlang编写 
2.支持持久化 
3.支持HA 
4.提供C# , erlang,java,perl,python,ruby等的client开发端
 

三. Rabbitmq  中的概念名词

Broker:简单来说就是消息队列服务器实体。
 Exchange:消息交换机,它指定消息按什么规则,路由到哪个队列。
 Queue:消息队列载体,每个消息都会被投入到一个或多个队列。 
Binding:绑定,它的作用就是把exchange和queue按照路由规则绑定起来。 Routing Key:路由关键字, exchange根据这个关键字进行消息投递。
 vhost:虚拟主机,一个broker里可以开设多个vhost,用作不同用户的权限分离。 producer:消息生产者,就是投递消息的程序。
 consumer:消息消费者,就是接受消息的程序。
 channel:消息通道,在客户端的每个连接里,可建立多个channel,每个 channel代表一个会话任务

四. 工作原理

MQ 是消费 - 生产者模型的一个典型的代表,一端往消息队列中不断写入消息, 而另一端则可以读取或者订阅队列中的消息。 MQ 则是遵循了 AMQP协议的具体 实现和产品。在项目中,将一些无需即时返回且耗时的操作提取出来,进行了异步 处理,而这种异步处理的方式大大的节省了服务器的请求响应时间,从而提高了系 统的吞吐量。
 
技术分享图片
 
( 1)客户端连接到消息队列服务器,打开一个channel。 
( 2)客户端声明一个exchange,并设置相关属性。 
( 3)客户端声明一个queue,并设置相关属性。 
( 4)客户端使用routing key,在exchange和queue之间建立好绑定关系。 
( 5)客户端投递消息到exchange。 
( 6) exchange接收到消息后,就根据消息的key和已经设置的binding,进 行消息路由,将消息投递到一个或多个队列里 
技术分享图片
 

五.环境搭建

一、前期准备
 
(1)条件:准备3台linux系统,确保能连到download.yunwei.edu
 
(2)编写yum源下载脚本:
vim yum-repo.sh
wget -O /etc/yum.repos.d/Centos7-Base-yunwei.repo    download.yunwei.edu/shell/Centos7-Base-yunwei.repo
wget -O /etc/yum.repos.d/epel-yunwei.repo   download.yunwei.edu/shell/epel-yunwei.repo
wget -O /etc/yum.repos.d/rdo-release-yunwei.repo  download.yunwei.edu/shell/rdo-release-yunwei.repo
wget -O /etc/pki/rpm-gpg/RPM-GPG-KEY-CentOS-SIG-Cloud  download.yunwei.edu/shell/RPM-GPG-KEY-CentOS-SIG-Cloud
wget -O /etc/pki/rpm-gpg/RPM-GPG-KEY-EPEL-7  download.yunwei.edu/shell/RPM-GPG-KEY-EPEL-7
 
(3)将系统自带网络源移走,执行yum-repo.sh
sh yum-repo.sh
 
(4)DNS能够解析此三台主机
 
二、安装过程:
 
(1)所有node安装rabbtimq和erlang软件包:
yum install -y erlang rabbitmq-server.noarch
systemctl enable rabbitmq-server.service
systemctl start rabbitmq-server.service
systemctl status rabbitmq-server.service
 
查看监听端口:
netstat -lantp | grep 5672
配置文件:
vim /etc/rabbitmq/rabbitmq.config
 
(2)node1:修改guest密码为admin(默认用户为:guest 密码为:guest)
rabbitmqctl change_password guest admin
 
(3)node1:添加一个openstack的用户,并设密码为admin。并设置权限和成为管理员
node1:
rabbitmqctl add_user openstack admin
rabbitmqctl set_permissions openstack ".*" ".*" ".*"
rabbitmqctl set_user_tags openstack administrator
 
(4)node1:编辑rabbittmq变量文件
vim /etc/rabbitmq/rabbitmq-env.conf
RABBITMQ_NODE_PORT=5672
ulimit -S -n 4096
RABBITMQ_SERVER_ERL_ARGS="+K true +A30 +P 1048576 -kernel inet_default_connect_options [{nodelay,true},{raw,6,18,<<5000:64/native>>}] -kernel inet_default_listen_options [{raw,6,18,<<5000:64/native>>}]"
RABBITMQ_NODE_IP_ADDRESS=172.16.254.60
 
(5)node1:将rabbittmq变量文件拷贝到其他两节点,之后并修改相应节点的ip
scp /etc/rabbitmq/rabbitmq-env.conf con2:/etc/rabbitmq/
scp /etc/rabbitmq/rabbitmq-env.conf con3:/etc/rabbitmq/
 
查看rabbitmq插件
/usr/lib/rabbitmq/bin/rabbitmq-plugins list
 
(6)所有node 开启rabbitmq的web管理页面
/usr/lib/rabbitmq/bin/rabbitmq-plugins enable rabbitmq_management mochiweb webmachine rabbitmq_web_dispatch amqp_client rabbitmq_management_agent
或者:rabbitmq-plugins enable rabbitmq_management
 
systemctl restart rabbitmq-server.service
systemctl status rabbitmq-server.service
 
(7)node1发送erlang.cookie到其他节点配置集群
rabbitmqctl status
scp /var/lib/rabbitmq/.erlang.cookie con2:/var/lib/rabbitmq/.erlang.cookie
scp /var/lib/rabbitmq/.erlang.cookie con3:/var/lib/rabbitmq/.erlang.cookie
 
(8)node2和node3停止应用,并以ram的方式加入node1节点,之后重启应用
systemctl restart rabbitmq-server.service
rabbitmqctl stop_app
rabbitmqctl join_cluster --ram [email protected]
rabbitmqctl start_app
 
(9)node1检查集群状态
[[email protected] conf]# rabbitmqctl cluster_status
Cluster status of node [email protected] ...
{cluster_name,<<"[email protected]">>},
{partitions,[]},
 
(10)登陆验证:http://172.16.254.60:15672/#/             guest/admin
 
 
 
 
其他命令:
(1)添加管理员:
rabbitmqctl add_user mqadmin mqadmin
rabbitmqctl set_user_tags mqadmin administrator
rabbitmqctl set_permissions -p / mqadmin ".*" ".*" ".*"
 
(2)更改节点类型(内存型或磁盘型)
rabbitmqctl stop_app
rabbitmqctl change_cluster_node_type disc 或 rabbitmqctl change_cluster_node_type ram
rabbitmqctl start_app
 
(3)从集群移除节点(或者重置节点)
rabbitmqctl stop_app
rabbitmqctl reset
rabbitmqctl start_app
rabbitmqctl cluster_status
 
(4)从某个节点移除集群中其他节点
rabbitmqctl forget_cluster_node [email protected]
rabbitmqctl reset
rabbitmqctl start_app
rabbitmqctl cluster_status
 
1. 保证集群中至少有一个磁盘类型的节点以防数据丢失,在更改节点类型时尤其要注意。
2. 若整个集群被停掉了,应保证最后一个 down 掉的节点被最先启动,若不能则要使用 forget_cluster_node 命令将其移出集群
3. 若集群中节点几乎同时以不可控的方式 down 了此时在其中一个节点使用 force_boot 命令重启节点
 
 

<wiz_tmp_tag id="wiz-table-range-border" contenteditable="false" style="display: none;">










以上是关于Rabbitmq 消息队列的主要内容,如果未能解决你的问题,请参考以下文章

求助,rabbitmq读取消息队列的问题

rabbitmq消息队列介绍

java如何获取rabbitmq队列中消息数量

六.RabbitMQ消息队列的基础+实战

消息队列RabbitMQ

消息队列RabbitMQ原理消息队列保证幂等性,消息丢失,消息顺序性,以及处理消息队列消息积压问题