链路追踪--Sleuth和日志聚合---Zipkin

Posted 匿名热心市民

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了链路追踪--Sleuth和日志聚合---Zipkin相关的知识,希望对你有一定的参考价值。

                                        Sleuth

在大型系统的微服务化构建中,-个系统被拆分成了许多微服务。这些模块负责不同的功能,组
合成系统,最终可以提供丰富的功能。在这种架构中,-次请求往往需要涉及到多个服务。互联网应用构建在不同的软件模块集上,这些软件模块,有可能是由不同的团队开发、可能使用不同的编程语言来实现、有可能布在了几千台服务器,横跨多个不同的数据中心[] ,也就意味着这种架构形式也会存在一些问题,当项目出问题时,不能确定发生问题的是哪一台服务器中的那个微服务。

如何使用

第一步 添加依赖

<dependency>
    <groupId>org.springframework.cloud</groupId>
    <artifactId>spring-cloud-starter-sleuth</artifactId>
</dependency>

进行访问测试,日志打印内容改变,我们可通过日志查看到各种信息。但是随着微服务越来越多,访问请求越来越多,那查看日志将十分麻烦,可以通过Zipkin将日志聚合。

 

                                        

                                         Zipkin

Zipkin是Twitter 的一个开源项目, 它基于Google Dapper实现,它致力于收集服务的定时数据,
以解决微服务架构中的延迟问题,包括数据的收集、存储展现、查找和我们可以使用它来收集各个服务器上请求链路的跟踪数据,并通过它提供的REST API接口来辅助我们查询跟踪数据以实现对分布式系统的监控程序,从而及时地发现系统中出现的延迟升高问题并找出系统性能瓶颈的根源
除了面向开发的API 接口之外,它也提供了方便的UI组件来帮助我们直观的搜索跟踪信息和分
析请求链路明细,比如:可以查询某段时间内各用户请求的处理时间等。


Zipkin提供了可插拔数据存储方式: In-Memory、 mysql Cassandra 以及Elasticsearch.

作用:将日志聚合,并进行可视化展示和全文检索

如何使用

下载好jar包

运行cmd进行解压

安装完毕 

 

 在项目中引入zipkin依赖

<dependency>
    <groupId>org.springframework.cloud</groupId>
    <artifactId>spring-cloud-starter-zipkin</artifactId>
</dependency>

添加配置文件

#指定zipkin服务端所在的地址
spring.zipkin.base-url=http://localhost:9411
#不要让nacos把zipkin也注册到注册中心
spring.zipkin.discovery-client-enabled=false
#设置zipkin对sleuth链路的采样比例 1.0最大表示100%
spring.sleuth.sampler.probability=1.0

这在每个类中都加很麻烦,所以直接在配置中心配置公共文件,那就不需要上边的配置了

 

 配置完直接在代码配置文件中引入

 重启服务后进行测试,发个请求

 请求发送成功,查看zipken界面

持久化

链路信息在服务重启后就消失了,可以将他保存到数据库

第一步 创建数据库

数据库创建语句

CREATE TABLE IF NOT EXISTS zipkin_spans (
 `trace_id_high` BIGINT NOT NULL DEFAULT 0 COMMENT 'If non zero, this means the trace uses 128 bit traceIds instead of 64 bit', 
`trace_id` BIGINT NOT NULL, 
`id` BIGINT NOT NULL, 
`name` VARCHAR(255) NOT NULL, 
`parent_id` BIGINT, 
`debug` BIT(1), 
`start_ts` BIGINT COMMENT 'Span.timestamp(): epoch micros used for endTs query and to implement TTL',
`duration` BIGINT COMMENT 'Span.duration(): micros used for minDuration and maxDuration query' )
 ENGINE=InnoDB ROW_FORMAT=COMPRESSED CHARACTER SET=utf8 COLLATE utf8_general_ci;

ALTER TABLE zipkin_spans ADD UNIQUE KEY(`trace_id_high`, `trace_id`, `id`) COMMENT 'ignore insert on duplicate'; 
ALTER TABLE zipkin_spans ADD INDEX(`trace_id_high`, `trace_id`, `id`) COMMENT 'for joining with zipkin_annotations'; 
ALTER TABLE zipkin_spans ADD INDEX(`trace_id_high`, `trace_id`) COMMENT 'for getTracesByIds';
 ALTER TABLE zipkin_spans ADD INDEX(`name`) COMMENT 'for getTraces and getSpanNames';
 ALTER TABLE zipkin_spans ADD INDEX(`start_ts`) COMMENT 'for getTraces ordering and range';
CREATE TABLE IF NOT EXISTS zipkin_annotations (
 `trace_id_high` BIGINT NOT NULL DEFAULT 0 COMMENT 'If non zero, this means the trace uses 128 bit traceIds instead of 64 bit', 
`trace_id` BIGINT NOT NULL COMMENT 'coincides with zipkin_spans.trace_id', 
`span_id` BIGINT NOT NULL COMMENT 'coincides with zipkin_spans.id',
 `a_key` VARCHAR(255) NOT NULL COMMENT 'BinaryAnnotation.key or Annotation.value if type == -1', 
`a_value` BLOB COMMENT 'BinaryAnnotation.value(), which must be smaller than 64KB', 
`a_type` INT NOT NULL COMMENT 'BinaryAnnotation.type() or -1 if Annotation', 
`a_timestamp` BIGINT COMMENT 'Used to implement TTL; Annotation.timestamp or zipkin_spans.timestamp',
 `endpoint_ipv4` INT COMMENT 'Null when Binary/Annotation.endpoint is null', 
`endpoint_ipv6` BINARY(16) COMMENT 'Null when Binary/Annotation.endpoint is null, or no IPv6 address', 
`endpoint_port` SMALLINT COMMENT 'Null when Binary/Annotation.endpoint is null',
`endpoint_service_name` VARCHAR(255) COMMENT 'Null when Binary/Annotation.endpoint is null' )
 ENGINE=InnoDB ROW_FORMAT=COMPRESSED CHARACTER SET=utf8 COLLATE utf8_general_ci;
ALTER TABLE zipkin_annotations ADD UNIQUE KEY(`trace_id_high`, `trace_id`, `span_id`, `a_key`, `a_timestamp`) COMMENT 'Ignore insert on duplicate'; 
ALTER TABLE zipkin_annotations ADD INDEX(`trace_id_high`, `trace_id`, `span_id`) COMMENT 'for joining with zipkin_spans'; 
ALTER TABLE zipkin_annotations ADD INDEX(`trace_id_high`, `trace_id`) COMMENT 'for getTraces/ByIds'; 
ALTER TABLE zipkin_annotations ADD INDEX(`endpoint_service_name`) COMMENT 'for getTraces and getServiceNames';

ALTER TABLE zipkin_annotations ADD INDEX(`a_type`) COMMENT 'for getTraces';
 ALTER TABLE zipkin_annotations ADD INDEX(`a_key`) COMMENT 'for getTraces'; 
ALTER TABLE zipkin_annotations ADD INDEX(`trace_id`, `span_id`, `a_key`) COMMENT 'for dependencies job';
CREATE TABLE IF NOT EXISTS zipkin_dependencies ( 
`day` DATE NOT NULL, 
`parent` VARCHAR(255) NOT NULL, 
`child` VARCHAR(255) NOT NULL,
 `call_count` BIGINT ) 
ENGINE=InnoDB ROW_FORMAT=COMPRESSED CHARACTER SET=utf8 COLLATE utf8_general_ci; 
ALTER TABLE zipkin_dependencies ADD UNIQUE KEY(`day`, `parent`, `child`);

 然后再启动数据库时只需修改启动语句即可

java -jar zipkin-server-2.21.0-exec.jar --STORAGE_TYPE=mysql --MYSQL_HOST=127.0.0.1 --MYSQL_TCP_PORT=3306 --MYSQL_DB=zipkin --MYSQL_USER=root --MYSQL_PASS=123456

 注意,此处的zipkin我更换成了更高的版本,上面的低版本使用此命令会出问题

 注意,此处的zipkin我更换成了更高的版本,上面的低版本使用此命令会出问题

 注意,此处的zipkin我更换成了更高的版本,上面的低版本使用此命令会出问题

新版界面 

 

以上是关于链路追踪--Sleuth和日志聚合---Zipkin的主要内容,如果未能解决你的问题,请参考以下文章

Spring Cloud 整合分布式链路追踪系统Sleuth和ZipKin实战,分析系统瓶颈

链路追踪(zipkin+sleuth+kafka+mysql+ELK+filebeats)

rabbitmq+sleuth+zinkip 分布式链路追踪

sleuth+zipkin+kafka+logstash链路追踪二次开发方案

链路追踪 Zipkin+Sleuth 解决 Illegal character in scheme name at index 0: 192.168.100.130:9411/xxx/xx

链路追踪 Zipkin+Sleuth 解决 Illegal character in scheme name at index 0: 192.168.100.130:9411/xxx/xx