SpringCloud 消息驱动(Stream) 和 分布式链路跟踪(Sleuth)
Posted 黑桃️
tags:
篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了SpringCloud 消息驱动(Stream) 和 分布式链路跟踪(Sleuth)相关的知识，希望对你有一定的参考价值。
Stream 和 Sleuth
🔺 SpringCloud Stream消息驱动
一、消息驱动概述
(1) 是什么
一句话：屏蔽底层消息中间件的差异，降低切换成本，统一消息的编程模型
(2) 设计思想
① 标准MQ
- 生产者/消费者之间靠消息媒介传递信息内容：Message
- 消息必须走特定的通道：MessageChannel
- 消息通道里的消息如何被消费呢？谁负责收发处理 ---- 消息通道MessageChannel的子接口SubscribeChannel，由MessageHandler消息处理器所订阅
② 为什么用CloudStream
-
Stream 凭什么可以统一底层差异
-
Binder ( INPUT适用于消费者，OUTPUT适用于生产者 )
③ Stream中的消息通讯方式遵循了发布-订阅模式
Topic主题进行广播
- 在RabbitMQ就是Exchange
- 在Kafka中就是Topic
(3) Springcloud Stream标准流程套路
- Binder：很方便的连接中间件，屏蔽差异
- Channel：通道，是队列Queue的一种抽象，在消息通讯系统中就是实现存储和转发的媒介，通过channel对队列进行配置
- Source 和 Sink：简单的可理解为参照对象是Springcloud Stream自身，从Stream发布消息就是输出，接受消息就是输入
(4) 编码API和常用注解
二、案例说明
前提：RabbitMQ环境已经OK，新建三个子模块
- cloud-stream-rabbitmq-provider8801，作为生产者进行发送消息模块
- cloud-stream-rabbitmq-consumer8802，作为消费者接受消息模块
- cloud-stream-rabbitmq-consumer8803，作为消费者接受消息模块
三、消息驱动之生产者
(1) 新建模块：cloud-stream-rabbitmq-provider8801
(2) 配置 pom.xml
<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
<parent>
<artifactId>cloud2020</artifactId>
<groupId>com.atguigu.springcloud</groupId>
<version>1.0-SNAPSHOT</version>
</parent>
<modelVersion>4.0.0</modelVersion>
<artifactId>cloud-stream-rabbitmq-provider8801</artifactId>
<dependencies>
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-stream-rabbit</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-netflix-eureka-client</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-web</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-actuator</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-test</artifactId>
<scope>test</scope>
</dependency>
<dependency>
<groupId>com.atguigu.springcloud</groupId>
<artifactId>cloud-api-commons</artifactId>
<version>${project.version}</version>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-devtools</artifactId>
<scope>runtime</scope>
<optional>true</optional>
</dependency>
</dependencies>
</project>
(3) 配置 application.yml
server:
port: 8801
spring:
application:
name: cloud-stream-provider
cloud:
stream:
binders: #自此处配置要绑定的rabbitmq的服务信息
defaultRabbit: #表示定义的名称，用于binding整合
type: rabbit #消息组件类型
environment: # 设置rabbitmq的相关的环境配置
spring:
rabbitmq:
host: localhost
port: 5672
username: guest
password: guest
bindings: #服务的整合处理
output: #这个名字是一个通道的名称
destination: studyExchange #表示要使用的exchange名称定义
content-type: application/json #设置消息类型，本次为json
binder: defaultRabbit #设置要绑定的消息服务的具体设置
eureka:
client:
service-url:
defaultZone: http://eureka7001.com:7001/eureka,http://eureka7002.com:7002/eureka
instance:
lease-expiration-duration-in-seconds: 5 #如果现在超过了5秒的间隔
lease-renewal-interval-in-seconds: 2 #设置心跳的时间间隔
instance-id: send-8801.com
prefer-ip-address: true #访问的路径变为IP地址
(4) 创建主启动类
@SpringBootApplication
public class StreamMQMain8801 {
public static void main(String[] args) {
SpringApplication.run(StreamMQMain8801.class, args);
}
}
(5) 创建接口 IMessageProvider
public interface IMessageProvider {
public String send();
}
(6) 创建接口的实现类 MessageProviderImpl
@EnableBinding(Source.class)
public class MessageProviderImpl implements IMessageProvider {
@Resource
private MessageChannel output; //消息发送通道
@Override
public String send() {
String serial = UUID.randomUUID().toString();
output.send(MessageBuilder.withPayload(serial).build());
System.out.println("*****serial: "+serial);
return null;
}
}
(7) 创建controller：SendMessageController
@RestController
public class SendMessageController {
@Resource
private IMessageProvider messageProvider;
@GetMapping("/sendMessage")
public String sendMessage() {
return messageProvider.send();
}
}
(8) 测试
四、消息驱动之消费者
(1) 新建模块 cloud-stream-rabbitmq-consumer8802
(2) 配置 pom.xml
<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
<parent>
<artifactId>cloud2020</artifactId>
<groupId>com.atguigu.springcloud</groupId>
<version>1.0-SNAPSHOT</version>
</parent>
<modelVersion>4.0.0</modelVersion>
<artifactId>cloud-stream-rabbitmq-consumer8802</artifactId>
<dependencies>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-web</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-netflix-eureka-client</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.cloud</groupId>
<artifactId>spring-cloud-starter-stream-rabbit</artifactId>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-actuator</artifactId>
</dependency>
<!--基础配置-->
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-devtools</artifactId>
<scope>runtime</scope>
<optional>true</optional>
</dependency>
<dependency>
<groupId>org.projectlombok</groupId>
<artifactId>lombok</artifactId>
<optional>true</optional>
</dependency>
<dependency>
<groupId>org.springframework.boot</groupId>
<artifactId>spring-boot-starter-test</artifactId>
<scope>test</scope>
</dependency>
</dependencies>
</project>
(3) 配置 application.yml
server:
port: 8802
spring:
application:
name: cloud-stream-consumer
cloud:
stream:
binders: # 在此处配置要绑定的rabbitmq的服务信息；
defaultRabbit: # 表示定义的名称，用于于binding整合
type: rabbit # 消息组件类型
environment: # 设置rabbitmq的相关的环境配置
spring:
rabbitmq:
host: localhost
port: 5672
username: guest
password: guest
bindings: # 服务的整合处理
input: # 这个名字是一个通道的名称
destination: studyExchange # 表示要使用的Exchange名称定义
content-type: application/json # 设置消息类型，本次为对象json，如果是文本则设置“text/plain”
binder: defaultRabbit # 设置要绑定的消息服务的具体设置
eureka:
client: # 客户端进行Eureka注册的配置
service-url:
defaultZone: http://eureka7001.com:7001/eureka,http://eureka7002.com:7002/eureka
instance:
lease-renewal-interval-in-seconds: 2 # 设置心跳的时间间隔（默认是30秒）
lease-expiration-duration-in-seconds: 5 # 如果现在超过了5秒的间隔（默认是90秒）
instance-id: receive-8802.com # 在信息列表时显示主机名称
prefer-ip-address: true # 访问的路径变为IP地址
(4) 创建主启动类
@SpringBootApplication
public class StreamMQMain8802 {
public static void main(String[] args) {
SpringApplication.run(StreamMQMain8802.class, args);
}
}
(5) 创建controller：
@Controller
@EnableBinding(Sink.class)
public class ReceiveMessageListenerController {
@Value("${server.port}")
private String serverPort;
@StreamListener(Sink.INPUT) // 消费者的监听
public void input(Message<String> Message) {
System.out.println("消费者1号,----->接受到的消息: "+ Message.getPayload()+"\\t port = "+serverPort);
}
}
(6) 测试
五、分组消费与持久化
(1) 依照8802，clone出来一份运行8803
(2) 运行后有两个问题
- 重复消费问题
- 消息持久化问题
(3) 消费
8802/8803同时收到了消息，存在重复消费的问题
如何解决：分组 和 持久化属性group (★)
生产的实际案例
(4) 分组
① 原理
微服务应用放置于同一个group中，就能够保证消息只会被其中一个应用消费一次。不同的组是可以消费的，同一个组内会发生竞争关系，只有其中一个可以消费。
② 8802/8803都变成不同组，group两个不同
结论: 还是有重复消费的问题
③ 8803/8802都变成相同组，group两个相同
8802/8803实现了轮询分组，每次只有一个消费者。8801模块的发的消息只能被8802或者8803其中一个接受到，这样避免了重复消费
我们结论：同一个组的多个微服务实例，每次只会有一个拿到
(5) 持久化
① 停止8802/8803
② 除掉8802的分组group：atguiguA
8003的分组属性保留；
③ 8801先发送4条消息到rabbitmq
④ 先启动8802，无分组属性配置，控制台没有打出来消息
⑤ 再启动8803，有分组属性配置，后台打出来了MQ上的消息
🔺 SpringCloud Sleuth分布式链路跟踪
六、概述
(1) 为什么会出现这个技术？需要解决那些问题？
(2) 是什么
官网：https://github.com/spring-cloud/spring-cloud-sleuth
SpringCloud Sleuth提供了一套完整的服务跟踪的解决方案，在分布式系统
以上是关于SpringCloud 消息驱动(Stream) 和 分布式链路跟踪(Sleuth)的主要内容，如果未能解决你的问题，请参考以下文章
SpringCloud-2.0-周阳（15. 消息驱动 - SpringCloud Stream）
SpringCloud 消息驱动(Stream) 和 分布式链路跟踪(Sleuth)
SpringCloud 消息驱动(Stream) 和 分布式链路跟踪(Sleuth)