SpringCloud 消息驱动(Stream) 和 分布式链路跟踪(Sleuth)
Posted 黑桃️
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了SpringCloud 消息驱动(Stream) 和 分布式链路跟踪(Sleuth)相关的知识,希望对你有一定的参考价值。
Stream 和 Sleuth
🔺 SpringCloud Stream消息驱动
一、消息驱动概述
(1) 是什么
一句话:屏蔽底层消息中间件的差异,降低切换成本,统一消息的编程模型
(2) 设计思想
① 标准MQ
- 生产者/消费者之间靠消息媒介传递信息内容:Message
- 消息必须走特定的通道:MessageChannel
- 消息通道里的消息如何被消费呢?谁负责收发处理 ---- 消息通道MessageChannel的子接口SubscribeChannel,由MessageHandler消息处理器所订阅
② 为什么用CloudStream
-
Stream 凭什么可以统一底层差异
-
Binder ( INPUT适用于消费者,OUTPUT适用于生产者 )
③ Stream中的消息通讯方式遵循了发布-订阅模式
Topic主题进行广播
- 在RabbitMQ就是Exchange
- 在Kafka中就是Topic
(3) Springcloud Stream标准流程套路
- Binder:很方便的连接中间件,屏蔽差异
- Channel:通道,是队列Queue的一种抽象,在消息通讯系统中就是实现存储和转发的媒介,通过channel对队列进行配置
- Source 和 Sink:简单的可理解为参照对象是Springcloud Stream自身,从Stream发布消息就是输出,接受消息就是输入
(4) 编码API和常用注解
二、案例说明
前提:RabbitMQ环境已经OK,新建三个子模块
- cloud-stream-rabbitmq-provider8801,作为生产者进行发送消息模块
- cloud-stream-rabbitmq-consumer8802,作为消费者接受消息模块
- cloud-stream-rabbitmq-consumer8803,作为消费者接受消息模块
三、消息驱动之生产者
(1) 新建模块:cloud-stream-rabbitmq-provider8801
(2) 配置 pom.xml
<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
<parent>
<artifactId>cloud2020</artifactId>
<groupId>com.atguigu.springcloud</groupId>
<version>1.0-SNAPSHOT</version>
</parent>
<modelVersion>4.0.0</modelVersion>
<artifactId>cloud-stream-rabbitmq-provider8801</artifactId>
<dependencies>
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-stream-rabbit</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-netflix-eureka-client</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-web</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-actuator</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-test</artifactId>
<scope>test</scope>
</dependency>
<dependency>
<groupId>com.atguigu.springcloud</groupId>
<artifactId>cloud-api-commons</artifactId>
<version>$project.version</version>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-devtools</artifactId>
<scope>runtime</scope>
<optional>true</optional>
</dependency>
</dependencies>
</project>
(3) 配置 application.yml
server:
port: 8801
spring:
application:
name: cloud-stream-provider
cloud:
stream:
binders: #自此处配置要绑定的rabbitmq的服务信息
defaultRabbit: #表示定义的名称,用于binding整合
type: rabbit #消息组件类型
environment: # 设置rabbitmq的相关的环境配置
spring:
rabbitmq:
host: localhost
port: 5672
username: guest
password: guest
bindings: #服务的整合处理
output: #这个名字是一个通道的名称
destination: studyExchange #表示要使用的exchange名称定义
content-type: application/json #设置消息类型,本次为json
binder: defaultRabbit #设置要绑定的消息服务的具体设置
eureka:
client:
service-url:
defaultZone: http://eureka7001.com:7001/eureka,http://eureka7002.com:7002/eureka
instance:
lease-expiration-duration-in-seconds: 5 #如果现在超过了5秒的间隔
lease-renewal-interval-in-seconds: 2 #设置心跳的时间间隔
instance-id: send-8801.com
prefer-ip-address: true #访问的路径变为IP地址
(4) 创建主启动类
@SpringBootApplication
public class StreamMQMain8801
public static void main(String[] args)
SpringApplication.run(StreamMQMain8801.class, args);
(5) 创建接口 IMessageProvider
public interface IMessageProvider
public String send();
(6) 创建接口的实现类 MessageProviderImpl
@EnableBinding(Source.class)
public class MessageProviderImpl implements IMessageProvider
@Resource
private MessageChannel output; //消息发送通道
@Override
public String send()
String serial = UUID.randomUUID().toString();
output.send(MessageBuilder.withPayload(serial).build());
System.out.println("*****serial: "+serial);
return null;
(7) 创建controller:SendMessageController
@RestController
public class SendMessageController
@Resource
private IMessageProvider messageProvider;
@GetMapping("/sendMessage")
public String sendMessage()
return messageProvider.send();
(8) 测试
四、消息驱动之消费者
(1) 新建模块 cloud-stream-rabbitmq-consumer8802
(2) 配置 pom.xml
<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
<parent>
<artifactId>cloud2020</artifactId>
<groupId>com.atguigu.springcloud</groupId>
<version>1.0-SNAPSHOT</version>
</parent>
<modelVersion>4.0.0</modelVersion>
<artifactId>cloud-stream-rabbitmq-consumer8802</artifactId>
<dependencies>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-web</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-netflix-eureka-client</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-stream-rabbit</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-actuator</artifactId>
</dependency>
<!--基础配置-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-devtools</artifactId>
<scope>runtime</scope>
<optional>true</optional>
</dependency>
<dependency>
<groupId>org.projectlombok</groupId>
<artifactId>lombok</artifactId>
<optional>true</optional>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-test</artifactId>
<scope>test</scope>
</dependency>
</dependencies>
</project>
(3) 配置 application.yml
server:
port: 8802
spring:
application:
name: cloud-stream-consumer
cloud:
stream:
binders: # 在此处配置要绑定的rabbitmq的服务信息;
defaultRabbit: # 表示定义的名称,用于于binding整合
type: rabbit # 消息组件类型
environment: # 设置rabbitmq的相关的环境配置
spring:
rabbitmq:
host: localhost
port: 5672
username: guest
password: guest
bindings: # 服务的整合处理
input: # 这个名字是一个通道的名称
destination: studyExchange # 表示要使用的Exchange名称定义
content-type: application/json # 设置消息类型,本次为对象json,如果是文本则设置“text/plain”
binder: defaultRabbit # 设置要绑定的消息服务的具体设置
eureka:
client: # 客户端进行Eureka注册的配置
service-url:
defaultZone: http://eureka7001.com:7001/eureka,http://eureka7002.com:7002/eureka
instance:
lease-renewal-interval-in-seconds: 2 # 设置心跳的时间间隔(默认是30秒)
lease-expiration-duration-in-seconds: 5 # 如果现在超过了5秒的间隔(默认是90秒)
instance-id: receive-8802.com # 在信息列表时显示主机名称
prefer-ip-address: true # 访问的路径变为IP地址
(4) 创建主启动类
@SpringBootApplication
public class StreamMQMain8802
public static void main(String[] args)
SpringApplication.run(StreamMQMain8802.class, args);
(5) 创建controller:
@Controller
@EnableBinding(Sink.class)
public class ReceiveMessageListenerController
@Value("$server.port")
private String serverPort;
@StreamListener(Sink.INPUT) // 消费者的监听
public void input(Message<String> Message)
System.out.println("消费者1号,----->接受到的消息: "+ Message.getPayload()+"\\t port = "+serverPort);
(6) 测试
五、分组消费与持久化
(1) 依照8802,clone出来一份运行8803
(2) 运行后有两个问题
- 重复消费问题
- 消息持久化问题
(3) 消费
8802/8803同时收到了消息,存在重复消费的问题
如何解决:分组 和 持久化属性group (★)
生产的实际案例
(4) 分组
① 原理
微服务应用放置于同一个group中,就能够保证消息只会被其中一个应用消费一次。不同的组是可以消费的,同一个组内会发生竞争关系,只有其中一个可以消费。
② 8802/8803都变成不同组,group两个不同
结论: 还是有重复消费的问题
③ 8803/8802都变成相同组,group两个相同
8802/8803实现了轮询分组,每次只有一个消费者。8801模块的发的消息只能被8802或者8803其中一个接受到,这样避免了重复消费
我们结论:同一个组的多个微服务实例,每次只会有一个拿到
(5) 持久化
① 停止8802/8803
② 除掉8802的分组group:atguiguA
8003的分组属性保留;
③ 8801先发送4条消息到rabbitmq
④ 先启动8802,无分组属性配置,控制台没有打出来消息
⑤ 再启动8803,有分组属性配置,后台打出来了MQ上的消息
🔺 SpringCloud Sleuth分布式链路跟踪
六、概述
(1) 为什么会出现这个技术?需要解决那些问题?
(2) 是什么
官网:https://github.com/spring-cloud/spring-cloud-sleuth
SpringCloud Sleuth提供了一套完整的服务跟踪的解决方案,在分布式系统中提供追踪解决方案并且兼容支持了zipkin
(3) 解决
springcloud-消息驱动Stream01
SpringCloud-2.0-周阳(15. 消息驱动 - SpringCloud Stream)
SpringCloud 消息驱动(Stream) 和 分布式链路跟踪(Sleuth)
SpringCloud 消息驱动(Stream) 和 分布式链路跟踪(Sleuth)