首页 > 其他分享 >高并发监控-Sleuth 与 Zipkin 服务链路追踪

高并发监控-Sleuth 与 Zipkin 服务链路追踪

时间:2023-06-16 23:31:51浏览次数:41  
标签:Sleuth Span 请求 zipkin spring Zipkin 链路 cloud

一、Sleuth概念

  • 为什么需要Spring Cloud Sleuth# 微服务架构是一个分布式架构,它按业务划分服务单元,一个分布式系统往往有很多个服务单元。由于服务单元数量众多,业务的复杂性,如果出现了错误和异常,很难去定位。主要体现在,一个请求可能需要调用很多个服务,而内部服务的调用复杂性,决定了问题难以定位。所以微服务架构中,必须实现分布式链路追踪,去跟进一个请求到底有哪些服务参与,参与的顺序又是怎样的,从而达到每个请求的步骤清晰可见,出了问题,很快定位。

举个例子,在微服务系统中,一个来自用户的请求,请求先达到前端A(如前端界面),然后通过远程调用,达到系统的中间件B、C(如负载均衡、网关等),最后达到后端服务D、E,后端经过一系列的业务逻辑计算最后将数据返回给用户。对于这样一个请求,经历了这么多个服务,怎么样将它的请求过程的数据记录下来呢?这就需要用到服务链路追踪。

Google开源的 Dapper链路追踪组件,并在2010年发表了论文《Dapper, a Large-Scale Distributed Systems Tracing Infrastructure》,这篇文章是业内实现链路追踪的标杆和理论基础,具有非常大的参考价值。 目前,链路追踪组件有Google的Dapper,Twitter 的Zipkin,以及阿里的Eagleeye (鹰眼)等,它们都是非常优秀的链路追踪开源组件。

本文主要讲述如何在Spring Cloud Sleuth(点击查看官网文档)中集成Zipkin。在Spring Cloud Sleuth中集成Zipkin非常的简单,只需要引入相应的依赖和做相关的配置即可。

Spring Cloud Sleuth官方文档: https://docs.spring.io/spring-cloud-sleuth/docs/current-SNAPSHOT/reference/html/

说明:Sleuth 是 Spring Cloud 开源的组件,而不属于 Spring Cloud Alibaba,之前还以为是阿里开源的组件。

基本术语 Spring Cloud Sleuth采用的是Google的开源项目Dapper的专业术语。

  • Span:基本工作单元,发送一个远程调度任务 就会产生一个Span,Span是一个64位ID唯一标识的,Trace是用另一个64位ID唯一标识的,Span还有其他数据信息,比如摘要、时间戳事件、Span的ID、以及进度ID。

  • Trace:一系列Span组成的一个树状结构。请求一个微服务系统的API接口,这个API接口,需要调用多个微服务,调用每个微服务都会产生一个新的Span,所有由这个请求产生的Span组成了这个Trace。

  • Annotation:用来及时记录一个事件的,一些核心注解用来定义一个请求的开始和结束 。这些注解包括以下:

    • cs - Client Sent -客户端发送一个请求,这个注解描述了这个Span的开始
    • sr - Server Received -服务端获得请求并准备开始处理它,如果将其sr减去cs时间戳便可得到网络传输的时间。
    • ss - Server Sent (服务端发送响应)–该注解表明请求处理的完成(当请求返回客户端),如果ss的时间戳减去sr时间戳,就可以得到服务器请求的时间。
    • cr - Client Received (客户端接收响应)-此时Span的结束,如果cr的时间戳减去cs时间戳便可以得到整个请求所消耗的时间。

二、整合Sleuth#

  • 服务提供者与消费者导入依赖
 <!-- spring cloud sleuth 链路追踪 -->
    <dependency>
      <groupId>org.springframework.cloud</groupId>
      <artifactId>spring-cloud-starter-sleuth</artifactId>
    </dependency>
#打开debug日志
# 开启debug日志(上线关掉)
logging.level.org.springframework.cloud.openfeign=debug
logging.level.org.springframework.cloud.sleuth=debug

三、整合zipkin可视化观察#

通过Sleuth 产生的调用链监控信息,可以得知微服务之间的调用链路,但监控信息只输出到控制台不方便查看。我们需要一个图形化的工具-zipkin。Zipkin是 Twitter 开源的分布式跟踪系统,主要用来收集系统的时序数据,从而追踪系统的调用问题。zipkin官网地址如下:https://zipkin.io/ 。 image.png

1、docker安装zipkin服务器 docker run -d -p 9411:9411 openzipkin/zipkin 2、导入依赖 zipkin依赖也同时包含了 sleuth,可以省略 sleuth 的依赖引用。

    <!-- spring cloud sleuth 链路追踪 -->
<!--    <dependency>-->
<!--      <groupId>org.springframework.cloud</groupId>-->
<!--      <artifactId>spring-cloud-starter-sleuth</artifactId>-->
<!--    </dependency>-->

    <!-- zipkin依赖也同时包含了 sleuth,可以省略上边sleuth 的依赖引用 -->
    <dependency>
      <groupId>org.springframework.cloud</groupId>
      <artifactId>spring-cloud-starter-zipkin</artifactId>
    </dependency>

3、添加zipkin相关配置

## 服务追踪
#zipkin 的服务器地址
spring.zipkin.base-url=http://192.168.56.10:9411/
#zipkin 关闭服务器 否则springcloud 会把zipkin的url当做服务名称
spring.zipkin.discovery-client-enabled=false
#zipkin 传输方式
spring.zipkin.sender.type=web
#采样器
spring.sleuth.sampler.probability=1

4、发送远程请求测试 image.png

四、zipkin数据持久化#

默认zipkin是保存在内存中,我们也可以保存在MySQL或Elasticsearch中,因为日志数据比较庞大,所以推荐保存在Elasticsearch中。

通过 docker的方式

docker run --env STORAGE_TYPE=elasticsearch --env ES_HOSTS=192.168.10.10:9200 openzipkin/zipkin-dependencies

标签:Sleuth,Span,请求,zipkin,spring,Zipkin,链路,cloud
From: https://blog.51cto.com/u_15993308/6503492

相关文章

  • 微服务-链路追踪
    https://www.jianshu.com/p/4665566857811、SleuthSleuth将一个完整的request定义为一个trace,而每经过一个服务则会生成一个span,附加到trace下,形成对这个request的链路追踪2、Zipkin客户端:指微服务应用,客户端会配置服务端的URL地址,一旦发生服务间的调用的时候,会被配置在微......
  • 链路跟踪zipkin
    之前是自己搭建一个zipkin服务,现在推荐的是在服务器上直接运行一个微服务去启动zipkin过程是,下载zipkin的微服务jar包,然后启动下载地址https://zipkin.io/pages/quickstart.html启动之后访问:服务器的ip加上后缀,我的是http://192.168.86.196:9411/zipkin/就可以访问,到zipki......
  • Spring MVC中的调用链路
    在SpringMVC中,请求处理的过程通常分为以下几个步骤:通过HandlerMapping根据请求的URL匹配到相应的Handler(处理器)。通过HandlerAdapter调用对应的Handler处理请求。调用Handler返回一个ModelAndView对象。通过ViewResolver将ModelAndView中的视图逻辑名解析成对应的Vie......
  • SkyWalking分布式链路追踪工具的基本使用
    下载我们需要一个监控中心,还有一个javaagents工具apache-skywalking-apm(显示/存储多个程序的指标数据),APM是ApplicationPerformanceManagement的缩写和skywalking-agent(收集单个程序的指标数据)启动Skywalking和java程序apache-skywalking-apm\bin\startup.bat......
  • zipkin
    微服务架构是一个分布式架构,它按业务划分服务单元,一个分布式系统往往有很多个服务单元。由于服务单元数量众多,业务的复杂性,如果出现了错误和异常,很难去定位。主要体现在,一个请求可能需要调用很多个服务,而内部服务的调用复杂性,决定了问题难以定位。所以微服务架构中,必须实现分布式......
  • 进阶篇丨链路追踪(Tracing)很简单:链路成本指南
    广义上的链路成本,既包含使用链路追踪产生的数据生成、采集、计算、存储、查询等额外资源开销,也包含链路系统接入、变更、维护、协作等人力运维成本。为了便于理解,本小节将聚焦在狭义上的链路追踪机器资源成本,人力成本将在下一小节(效率)进行介绍。链路追踪机器成本的组成结构链路追踪......
  • DataLeap的全链路智能监控报警实践(一):常见问题
    随着字节跳动业务的快速发展,大数据开发场景下需要运维管理的任务越来越多,然而普通的监控系统只支持配置相应任务的监控规则,已经不能完全满足当前需求,在日常运维中开发者经常会面临以下几个问题:任务多,依赖关系复杂:很难查找到重要任务的所有上游任务并进行监控。如果监控所有任务......
  • [笔记]计算机网络_数据链路层_数据链路层概述
    大的要来力(悲)数据链路层是历年考试重点,要求在了解数据链路层基本概念的基础上,重点掌握滑动窗口机制、三种可靠传输协议、各种MAC协议、HDLC协议、PPP协议,特别是CSMA/CD协议和以太网帧格式,以及局域网的争用期和最小帧长的概念、二进制指数退避算法等等各种贵物,此外中继器、网卡......
  • day09-SpringCloud Sleuth+Zipkin-链路追踪
    SpringCloudSleuth+Zipkin-链路追踪官网:spring-cloud/spring-cloud-sleuth:Distributedtracingforspringcloud(github.com)分布式链路追踪之SpringCloudSleuth+Zipkin最全教程!-bucaichenmou-博客园(cnblogs.com)1.Sleuth+Zipkin是什么在微服务框架中,一个由客户......
  • 计算机网络-----数据链路层
    《数据链路层的几个共同问题》《差错检测》 《点对点协议PPP》《解决!ppp中的透明传输问题》在PPP协议中帧的标志字段(表示一个帧的开始或结束)为0x7E(01111110)转义字符为0x7D(01111101)方法一:字节填充,适合于异步传输时(1)数据字段遇到标志字段的编码则将0x7E->......