一、使用背景

开发排查系统问题用得最多的手段就是查看系统日志,在分布式环境中一般使用 ELK 来统一收集日志,但是在并发大时使用日志定位问题还是比较麻烦,由于大量的其他用户/其他线程的日志也一起输出穿行其中导致很难筛选出指定请求的全部相关日志,以及下游线程/服务对应的日志。

二、解决思路

每个请求都使用一个唯一标识来追踪全部的链路显示在日志中,并且不修改原有的

使用Logback的MDC机制日志模板中加入traceId标识,取值方式为%X{traceId}

MDC(Mapped Diagnostic Context,映射调试上下文)是 log4j 和 logback 提供的一种方便在多线程条件下记录日志的功能。MDC 可以看成是一个与当前线程绑定的Map,可以往其中添加键值对。MDC 中包含的内容可以被同一线程中执行的代码所访问。当前线程的子线程会继承其父线程中的 MDC 的内容。当需要记录日志时,只需要从 MDC 中获取所需的信息即可。MDC 的内容则由程序在适当的时候保存进去。对于一个 Web 应用来说,通常是在请求被处理的最开始保存这些数据。

三、方案实现

由于MDC内部使用的是ThreadLocal所以只有本线程才有效,子线程和下游的服务MDC里的值会丢失;所以方案主要的难点是解决值的传递问题。

1.logback配置文件模板格式添加标识%X{traceId}

  1. <!--格式化输出:%d表示日期,%thread表示线程名,%-5level:级别从左显示5个字符宽度%msg:日志消息,%n是换行符-->
  2. <property name="log.pattern" value="%d{yyyy-MM-dd HH:mm:ss.SSS} [%X{traceId}] [%thread] %-5level %logger{20} - [%method,%line] - %msg%n" />

2.添加AOP maven依赖

  1. <dependency>
  2. <groupId>org.springframework.boot</groupId>
  3. <artifactId>spring-boot-starter-aop</artifactId>
  4. </dependency>

3.自定义日志注解

  1. import java.lang.annotation.*;
  2. /**
  3. * @Description: 自定义日志注解
  4. */
  5. //什么时候使用该注解,我们定义为运行时
  6. @Retention(RetentionPolicy.RUNTIME)
  7. //注解用于什么地方,我们定义为作用于方法上
  8. @Target({ElementType.METHOD})
  9. //注解是否将包含在 JavaDoc 中
  10. @Documented
  11. public @interface WebLog {
  12. /**
  13. * 日志描述信息
  14. *
  15. * @return
  16. */
  17. String description() default "";
  18. }

4.配置AOP切面

在配置 AOP 切面之前,我们需要了解下 aspectj 相关注解的作用:

  • @Aspect:声明该类为一个注解类;
  • @Pointcut:定义一个切点,后面跟随一个表达式,表达式可以定义为切某个注解,也可以切某个 package 下的方法;

切点定义好后,就是围绕这个切点做文章了:

  • @Before: 在切点之前,织入相关代码;
  • @After: 在切点之后,织入相关代码;
  • @AfterReturning: 在切点返回内容后,织入相关代码,一般用于对返回值做些加工处理的场景;
  • @AfterThrowing: 用来处理当织入的代码抛出异常后的逻辑处理;
  • @Around: 环绕,可以在切入点前后织入代码,并且可以自由的控制何时执行切点;
  1. import com.alibaba.dubbo.rpc.RpcContext;
  2. import com.google.gson.Gson;
  3. import com.common.annotation.WebLog;
  4. import com.common.constant.Constants;
  5. import lombok.extern.slf4j.Slf4j;
  6. import org.aspectj.lang.JoinPoint;
  7. import org.aspectj.lang.ProceedingJoinPoint;
  8. import org.aspectj.lang.annotation.*;
  9. import org.slf4j.MDC;
  10. import org.springframework.core.annotation.Order;
  11. import org.springframework.stereotype.Component;
  12. import org.springframework.web.context.request.RequestContextHolder;
  13. import org.springframework.web.context.request.ServletRequestAttributes;
  14. import javax.servlet.http.HttpServletRequest;
  15. import java.lang.reflect.Method;
  16. import java.util.UUID;
  17. @Component
  18. @Aspect
  19. @Order(1)
  20. @Slf4j
  21. public class WebLogAspect {
  22. /**
  23. * 换行符
  24. */
  25. private static final String LINE_SEPARATOR = System.lineSeparator();
  26. /**
  27. * 以自定义 @WebLog 注解为切点
  28. */
  29. @Pointcut("@annotation(com.pet.common.annotation.WebLog)")
  30. public void WebLogAspect() {
  31. }
  32. /**
  33. * 在切点之前织入
  34. *
  35. * @param joinPoint
  36. * @throws Throwable
  37. */
  38. @Before("WebLogAspect()")
  39. public void doBefore(JoinPoint joinPoint) throws Throwable {
  40. // 开始打印请求日志
  41. ServletRequestAttributes attributes = (ServletRequestAttributes) RequestContextHolder.getRequestAttributes();
  42. HttpServletRequest request = attributes.getRequest();
  43. // 获取 @WebLog 注解的描述信息
  44. String methodDescription = getAspectLogDescription(joinPoint);
  45. String traceId = String.valueOf(UUID.randomUUID());
  46. MDC.put(Constants.LOG_TRACE_ID, traceId);
  47. RpcContext.getContext().setAttachment(Constants.LOG_TRACE_ID,traceId);
  48. // 打印请求相关参数
  49. log.info("========================================== Start ==========================================");
  50. // 打印请求 url
  51. log.info("URL : {}", request.getRequestURL().toString());
  52. // 打印描述信息
  53. log.info("Description : {}", methodDescription);
  54. // 打印 Http method
  55. log.info("HTTP Method : {}", request.getMethod());
  56. // 打印调用 controller 的全路径以及执行方法
  57. log.info("Class Method : {}.{}", joinPoint.getSignature().getDeclaringTypeName(), joinPoint.getSignature().getName());
  58. // 打印请求的 IP
  59. log.info("IP : {}", request.getRemoteAddr());
  60. // 打印请求入参
  61. log.info("Request Args : {}", new Gson().toJson(joinPoint.getArgs()));
  62. }
  63. /**
  64. * 在切点之后织入
  65. *
  66. * @throws Throwable
  67. */
  68. @After("WebLogAspect()")
  69. public void doAfter() throws Throwable {
  70. // 接口结束后换行,方便分割查看
  71. log.info("=========================================== End ===========================================" + LINE_SEPARATOR);
  72. MDC.clear();
  73. }
  74. /**
  75. * 环绕
  76. *
  77. * @param proceedingJoinPoint
  78. * @return
  79. * @throws Throwable
  80. */
  81. @Around("WebLogAspect()")
  82. public Object doAround(ProceedingJoinPoint proceedingJoinPoint) throws Throwable {
  83. long startTime = System.currentTimeMillis();
  84. Object result = null;
  85. try {
  86. result = proceedingJoinPoint.proceed();
  87. } catch (Exception e) {
  88. log.info("exception :{}", e.getMessage());
  89. throw e;
  90. } finally {
  91. // 打印出参
  92. log.info("Response Args : {}", new Gson().toJson(result));
  93. // 执行耗时
  94. log.info("Time-Consuming : {} ms", System.currentTimeMillis() - startTime);
  95. }
  96. return result;
  97. }
  98. /**
  99. * 获取切面注解的描述
  100. *
  101. * @param joinPoint 切点
  102. * @return 描述信息
  103. * @throws Exception
  104. */
  105. public String getAspectLogDescription(JoinPoint joinPoint) throws Exception {
  106. String targetName = joinPoint.getTarget().getClass().getName();
  107. String methodName = joinPoint.getSignature().getName();
  108. Object[] arguments = joinPoint.getArgs();
  109. Class targetClass = Class.forName(targetName);
  110. Method[] methods = targetClass.getMethods();
  111. StringBuilder description = new StringBuilder("");
  112. for (Method method : methods) {
  113. if (method.getName().equals(methodName)) {
  114. Class[] clazzs = method.getParameterTypes();
  115. if (clazzs.length == arguments.length) {
  116. description.append(method.getAnnotation(WebLog.class).description());
  117. break;
  118. }
  119. }
  120. }
  121. return description.toString();
  122. }

5.下游dubbo服务创建DubboTraceFilter过滤器 服务者端提供扩展

资源文件夹下创建 META-INF/dubbo 文件夹 创建com.alibaba.dubbo.rpc.Filter 文件,并编辑文件内容

  1. // xxx为你DubboTraceIdFilter文件所在的位置
  2. dubboTraceIdFilter=com.xxx.DubboTraceIdFilter
  1. import com.alibaba.dubbo.common.extension.Activate;
  2. import com.alibaba.dubbo.rpc.*;
  3. import org.slf4j.MDC;
  4. /**
  5. * @Description: dubbo跟踪traceId
  6. */
  7. @Activate(group = {com.alibaba.dubbo.common.Constants.CONSUMER, com.alibaba.dubbo.common.Constants.PROVIDER})
  8. public class DubboTraceIdFilter implements Filter {
  9. private static final String LOG_TRACE_ID = "traceId";
  10. @Override
  11. public Result invoke(Invoker<?> invoker, Invocation invocation) throws RpcException {
  12. RpcContext rpcContext = RpcContext.getContext();
  13. // before
  14. if (rpcContext.isProviderSide()) {
  15. // get traceId from dubbo consumer,and set traceId to MDC
  16. String traceId = rpcContext.getAttachment(LOG_TRACE_ID);
  17. MDC.put(LOG_TRACE_ID, traceId);
  18. }
  19. if (rpcContext.isConsumerSide()) {
  20. // get traceId from MDC, and set traceId to rpcContext
  21. String traceId = MDC.get(LOG_TRACE_ID);
  22. rpcContext.setAttachment(LOG_TRACE_ID, traceId);
  23. }
  24. Result result = invoker.invoke(invocation);
  25. // after
  26. if (rpcContext.isProviderSide()) {
  27. // clear traceId from MDC
  28. MDC.remove(LOG_TRACE_ID);
  29. }
  30. return result;
  31. }

四、如何使用

因为我们的切点是自定义注解 @WebLog, 所以我们仅仅需要在 Controller 控制器的每个接口方法添加 @WebLog 注解即可,如果我们不想某个接口打印出入参日志,不加注解就可以了

五、打印效果


从上图中可以看到,每个对于每个请求,开始与结束一目了然,并且打印了以下参数:

    • URL: 请求接口地址;
    • Description: 接口的中文说明信息;
    • HTTP Method: 请求的方法,是 POSTGET, 还是 DELETE 等;
    • Class Method: 被请求的方法路径 : 包名 + 方法名;
    • IP: 请求方的 IP 地址;
    • Request Args: 请求入参,以 JSON 格式输出;
    • Response Args: 响应出参,以 JSON 格式输出;
    • Time-Consuming: 请求耗时,以此估算每个接口的性能指数;

Spring Boot 中使用自定义注解,AOP 切面打印出入参日志及Dubbo链路追踪透传traceId的更多相关文章

  1. 如何优雅地在 Spring Boot 中使用自定义注解,AOP 切面统一打印出入参日志 | 修订版

    欢迎关注个人微信公众号: 小哈学Java, 文末分享阿里 P8 资深架构师吐血总结的 <Java 核心知识整理&面试.pdf>资源链接!! 个人网站: https://www.ex ...

  2. Spring Boot中的自定义start pom

    start pom是springboot中提供的简化企业级开发绝大多数场景的一个工具,利用好strat pom就可以消除相关技术的配置得到自动配置好的Bean. 举个例子,在一般使用中,我们使用基本的 ...

  3. Spring Boot中使用MyBatis注解配置详解(1)

    之前在Spring Boot中整合MyBatis时,采用了注解的配置方式,相信很多人还是比较喜欢这种优雅的方式的,也收到不少读者朋友的反馈和问题,主要集中于针对各种场景下注解如何使用,下面就对几种常见 ...

  4. Spring Boot 中关于自定义异常处理的套路!

    在 Spring Boot 项目中 ,异常统一处理,可以使用 Spring 中 @ControllerAdvice 来统一处理,也可以自己来定义异常处理方案.Spring Boot 中,对异常的处理有 ...

  5. Spring boot中相关的注解

    一.相关类中使用的注解 @RestController:REST风格的控制器 @RequestMapping:配置URL和方法之间的映射 @SpringBootApplication:应用程序入口类 ...

  6. Spring Boot 中使用 @Transactional 注解配置事务管理

    事务管理是应用系统开发中必不可少的一部分.Spring 为事务管理提供了丰富的功能支持.Spring 事务管理分为编程式和声明式的两种方式.编程式事务指的是通过编码方式实现事务:声明式事务基于 AOP ...

  7. Spring Boot中使用@Transactional注解配置事务管理

    事务管理是应用系统开发中必不可少的一部分.Spring 为事务管理提供了丰富的功能支持.Spring 事务管理分为编程式和声明式的两种方式.编程式事务指的是通过编码方式实现事务:声明式事务基于 AOP ...

  8. Spring Boot中如何自定义starter?

    Spring Boot starter 我们知道Spring Boot大大简化了项目初始搭建以及开发过程,而这些都是通过Spring Boot提供的starter来完成的.品达通用权限系统就是基于Sp ...

  9. 在Spring Boot中使用 @ConfigurationProperties 注解

    但 Spring Boot 提供了另一种方式 ,能够根据类型校验和管理application中的bean. 这里会介绍如何使用@ConfigurationProperties.继续使用mail做例子. ...

随机推荐

  1. java实现小功能

    // 自写逻辑,遍历所有匹配的子字符串坐标 private static void forMatchIdx(String str1, String str2) { char[] arr1 = str1 ...

  2. excel中存储的icount,赋值完之后

    最近需要实现一个功能,为了确保每次函数运行的时候count是唯一的,所以想读取excel中存储的icount,赋值完之后对其进行+1操作,并存入excel文件,确保下次读取的count是新的,没有出现 ...

  3. C++实现秒表

    完整代码下载 思路概括:如果有键按下,判断按下的是什么键并处理.没有键按下,计时.传统的Sleep无法满足秒表精确到百毫秒的需求,这里使用更精确的clock,clock的作用是统计从程序开始运行到现在 ...

  4. 【原创】Linux select/poll机制原理分析

    前言 Read the fucking source code! --By 鲁迅 A picture is worth a thousand words. --By 高尔基 1. 概述 Linux系统 ...

  5. CSS常用属性之选择器

    css选择器 序号 选择器 例子 例子描述 1 .class .intro 选择class="intro"的所有元素 2 #id #firstname 选择id="fir ...

  6. Java工程师技能点梳理

    从个人技术积累的角度,来看看一名合格的Java工程师在面试时所需要的知识技能. 1.基本语法 这包括static.final.transient等关键字的作用,foreach循环的原理等等.今天面试我 ...

  7. 用一个例子说说gRPC的四种服务方法

    本文通过一个简单的例子来演示这4种类型的使用方法 案例代码:https://github.com/codeAB/grpc-sample-example 目录结构说明 ├── calculator.pr ...

  8. Android进阶AIDL使用自定义类型

    原文首发于微信公众号:jzman-blog,欢迎关注交流! 上篇文章中主要介绍从 AIDL 的使用方式以及 Android 开发中不同进程之间的通信,遗留的问题是如何在 AIDL 中使用自定义类型,具 ...

  9. Spinner的简单实用

    1.Spinner的功能 Spinner在Android中主要实现的是一个下拉列表,这个下拉列表相当于弹出一个弹出一个菜单供用户选择.即Spinner提供一个快速的方法从一组中选择一个值,默认状态下S ...

  10. ES6规范及语法基础

    var的特点 函数作用域 let的特点 没有变量提升,必须先声明.再调用 同一个作用域下不可以重复定义同一个名称 块级作用域 function fun(){ let a = 10 if(true){ ...