寫在前面
通過本文將了解到什么是MDC、MDC應用中存在的問題、如何解決存在的問題
基于 Spring Boot + MyBatis Plus + Vue & Element 實現的后臺管理系統 + 用戶小程序,支持 RBAC 動態權限、多租戶、數據權限、工作流、三方登錄、支付、短信、商城等功能
MDC介紹
簡介:
MDC(Mapped Diagnostic Context,映射調試上下文)是 log4j 、logback及log4j2 提供的一種方便在多線程條件下記錄日志的功能。MDC 可以看成是一個與當前線程綁定的哈希表 ,可以往其中添加鍵值對。MDC 中包含的內容可以被同一線程中執行的代碼所訪問 。
當前線程的子線程會繼承其父線程中的 MDC 的內容。當需要記錄日志時,只需要從 MDC 中獲取所需的信息即可。MDC 的內容則由程序在適當的時候保存進去。對于一個 Web 應用來說,通常是在請求被處理的最開始保存這些數據
API說明:
clear() => 移除所有MDC
get (String key) => 獲取當前線程MDC中指定key的值
getContext() => 獲取當前線程MDC的MDC
put(String key, Object o) => 往當前線程的MDC中存入指定的鍵值對
remove(String key) => 刪除當前線程MDC中指定的鍵值對
優點:
代碼簡潔,日志風格統一,不需要在log打印中手動拼寫traceId,即LOGGER.info("traceId:{} ", traceId)
暫時只能想到這一點
基于 Spring Cloud Alibaba + Gateway + Nacos + RocketMQ + Vue & Element 實現的后臺管理系統 + 用戶小程序,支持 RBAC 動態權限、多租戶、數據權限、工作流、三方登錄、支付、短信、商城等功能
MDC使用
添加攔截器
publicclassLogInterceptorimplementsHandlerInterceptor{
@Override
publicbooleanpreHandle(HttpServletRequestrequest,HttpServletResponseresponse,Objecthandler)throwsException{
//如果有上層調用就用上層的ID
StringtraceId=request.getHeader(Constants.TRACE_ID);
if(traceId==null){
traceId=TraceIdUtil.getTraceId();
}
MDC.put(Constants.TRACE_ID,traceId);
returntrue;
}
@Override
publicvoidpostHandle(HttpServletRequestrequest,HttpServletResponseresponse,Objecthandler,ModelAndViewmodelAndView)
throwsException{
}
@Override
publicvoidafterCompletion(HttpServletRequestrequest,HttpServletResponseresponse,Objecthandler,Exceptionex)
throwsException{
//調用結束后刪除
MDC.remove(Constants.TRACE_ID);
}
}
修改日志格式
[TRACEID:%X{traceId}]%d{HHss.SSS}%-5level%class{-1}.%M()/%L-%msg%xEx%n
重點是%X{traceId},traceId和MDC中的鍵名稱一致
簡單使用就這么容易,但是在有些情況下traceId將獲取不到
MDC 存在的問題
子線程中打印日志丟失traceId
HTTP調用丟失traceId
......丟失traceId的情況,來一個再解決一個,絕不提前優化
解決MDC存在的問題
子線程日志打印丟失traceId
子線程在打印日志的過程中traceId將丟失,解決方式為重寫線程池,對于直接new創建線程的情況不考略【實際應用中應該避免這種用法】,重寫線程池無非是對任務進行一次封裝
線程池封裝類:ThreadPoolExecutorMdcWrapper.java
publicclassThreadPoolExecutorMdcWrapperextendsThreadPoolExecutor{
publicThreadPoolExecutorMdcWrapper(intcorePoolSize,intmaximumPoolSize,longkeepAliveTime,TimeUnitunit,
BlockingQueueworkQueue){
super(corePoolSize,maximumPoolSize,keepAliveTime,unit,workQueue);
}
publicThreadPoolExecutorMdcWrapper(intcorePoolSize,intmaximumPoolSize,longkeepAliveTime,TimeUnitunit,
BlockingQueueworkQueue,ThreadFactorythreadFactory){
super(corePoolSize,maximumPoolSize,keepAliveTime,unit,workQueue,threadFactory);
}
publicThreadPoolExecutorMdcWrapper(intcorePoolSize,intmaximumPoolSize,longkeepAliveTime,TimeUnitunit,
BlockingQueueworkQueue,RejectedExecutionHandlerhandler){
super(corePoolSize,maximumPoolSize,keepAliveTime,unit,workQueue,handler);
}
publicThreadPoolExecutorMdcWrapper(intcorePoolSize,intmaximumPoolSize,longkeepAliveTime,TimeUnitunit,
BlockingQueueworkQueue,ThreadFactorythreadFactory,
RejectedExecutionHandlerhandler){
super(corePoolSize,maximumPoolSize,keepAliveTime,unit,workQueue,threadFactory,handler);
}
@Override
publicvoidexecute(Runnabletask){
super.execute(ThreadMdcUtil.wrap(task,MDC.getCopyOfContextMap()));
}
@Override
publicFuturesubmit(Runnabletask,Tresult){
returnsuper.submit(ThreadMdcUtil.wrap(task,MDC.getCopyOfContextMap()),result);
}
@Override
publicFuturesubmit(Callabletask){
returnsuper.submit(ThreadMdcUtil.wrap(task,MDC.getCopyOfContextMap()));
}
@Override
publicFuture>submit(Runnabletask){
returnsuper.submit(ThreadMdcUtil.wrap(task,MDC.getCopyOfContextMap()));
}
}
說明:
繼承ThreadPoolExecutor類,重新執行任務的方法
通過ThreadMdcUtil對任務進行一次包裝
線程traceId封裝工具類:ThreadMdcUtil.java
publicclassThreadMdcUtil{
publicstaticvoidsetTraceIdIfAbsent(){
if(MDC.get(Constants.TRACE_ID)==null){
MDC.put(Constants.TRACE_ID,TraceIdUtil.getTraceId());
}
}
publicstaticCallablewrap(finalCallablecallable,finalMapcontext){
return()->{
if(context==null){
MDC.clear();
}else{
MDC.setContextMap(context);
}
setTraceIdIfAbsent();
try{
returncallable.call();
}finally{
MDC.clear();
}
};
}
publicstaticRunnablewrap(finalRunnablerunnable,finalMapcontext){
return()->{
if(context==null){
MDC.clear();
}else{
MDC.setContextMap(context);
}
setTraceIdIfAbsent();
try{
runnable.run();
}finally{
MDC.clear();
}
};
}
}
說明【以封裝Runnable為例】:
判斷當前線程對應MDC的Map是否存在,存在則設置
設置MDC中的traceId值,不存在則新生成,針對不是子線程的情況,如果是子線程,MDC中traceId不為null
執行run方法
代碼等同于以下寫法,會更直觀
publicstaticRunnablewrap(finalRunnablerunnable,finalMapcontext){ returnnewRunnable(){ @Override publicvoidrun(){ if(context==null){ MDC.clear(); }else{ MDC.setContextMap(context); } setTraceIdIfAbsent(); try{ runnable.run(); }finally{ MDC.clear(); } } }; }
重新返回的是包裝后的Runnable,在該任務執行之前【runnable.run()】先將主線程的Map設置到當前線程中【 即MDC.setContextMap(context)】,這樣子線程和主線程MDC對應的Map就是一樣的了
判斷當前線程對應MDC的Map是否存在,存在則設置
設置MDC中的traceId值,不存在則新生成,針對不是子線程的情況,如果是子線程,MDC中traceId不為null
執行run方法
HTTP調用丟失traceId
在使用HTTP調用第三方服務接口時traceId將丟失,需要對HTTP調用工具進行改造,在發送時在request header中添加traceId,在下層被調用方添加攔截器獲取header中的traceId添加到MDC中
HTTP調用有多種方式,比較常見的有HttpClient、OKHttp、RestTemplate,所以只給出這幾種HTTP調用的解決方式
HttpClient:
實現HttpClient攔截器
publicclassHttpClientTraceIdInterceptorimplementsHttpRequestInterceptor{
@Override
publicvoidprocess(HttpRequesthttpRequest,HttpContexthttpContext)throwsHttpException,IOException{
StringtraceId=MDC.get(Constants.TRACE_ID);
//當前線程調用中有traceId,則將該traceId進行透傳
if(traceId!=null){
//添加請求體
httpRequest.addHeader(Constants.TRACE_ID,traceId);
}
}
}
實現HttpRequestInterceptor接口并重寫process方法
如果調用線程中含有traceId,則需要將獲取到的traceId通過request中的header向下透傳下去
為HttpClient添加攔截器
privatestaticCloseableHttpClienthttpClient=HttpClientBuilder.create() .addInterceptorFirst(newHttpClientTraceIdInterceptor()) .build();
通過addInterceptorFirst方法為HttpClient添加攔截器
OKHttp:
實現OKHttp攔截器
publicclassOkHttpTraceIdInterceptorimplementsInterceptor{
@Override
publicResponseintercept(Chainchain)throwsIOException{
StringtraceId=MDC.get(Constants.TRACE_ID);
Requestrequest=null;
if(traceId!=null){
//添加請求體
request=chain.request().newBuilder().addHeader(Constants.TRACE_ID,traceId).build();
}
ResponseoriginResponse=chain.proceed(request);
returnoriginResponse;
}
}
實現Interceptor攔截器,重寫interceptor方法,實現邏輯和HttpClient差不多,如果能夠獲取到當前線程的traceId則向下透傳
為OkHttp添加攔截器
privatestaticOkHttpClientclient=newOkHttpClient.Builder() .addNetworkInterceptor(newOkHttpTraceIdInterceptor()) .build();
調用addNetworkInterceptor方法添加攔截器
RestTemplate:
實現RestTemplate攔截器
publicclassRestTemplateTraceIdInterceptorimplementsClientHttpRequestInterceptor{
@Override
publicClientHttpResponseintercept(HttpRequesthttpRequest,byte[]bytes,ClientHttpRequestExecutionclientHttpRequestExecution)throwsIOException{
StringtraceId=MDC.get(Constants.TRACE_ID);
if(traceId!=null){
httpRequest.getHeaders().add(Constants.TRACE_ID,traceId);
}
returnclientHttpRequestExecution.execute(httpRequest,bytes);
}
}
實現ClientHttpRequestInterceptor接口,并重寫intercept方法,其余邏輯都是一樣的不重復說明
為RestTemplate添加攔截器
restTemplate.setInterceptors(Arrays.asList(newRestTemplateTraceIdInterceptor()));
調用setInterceptors方法添加攔截器
第三方服務攔截器:
HTTP調用第三方服務接口全流程traceId需要第三方服務配合,第三方服務需要添加攔截器拿到request header中的traceId并添加到MDC中
publicclassLogInterceptorimplementsHandlerInterceptor{
@Override
publicbooleanpreHandle(HttpServletRequestrequest,HttpServletResponseresponse,Objecthandler)throwsException{
//如果有上層調用就用上層的ID
StringtraceId=request.getHeader(Constants.TRACE_ID);
if(traceId==null){
traceId=TraceIdUtils.getTraceId();
}
MDC.put("traceId",traceId);
returntrue;
}
@Override
publicvoidpostHandle(HttpServletRequestrequest,HttpServletResponseresponse,Objecthandler,ModelAndViewmodelAndView)
throwsException{
}
@Override
publicvoidafterCompletion(HttpServletRequestrequest,HttpServletResponseresponse,Objecthandler,Exceptionex)
throwsException{
MDC.remove(Constants.TRACE_ID);
}
}
說明:
先從request header中獲取traceId
從request header中獲取不到traceId則說明不是第三方調用,直接生成一個新的traceId
將生成的traceId存入MDC中
除了需要添加攔截器之外,還需要在日志格式中添加traceId的打印,如下:
[TRACEID:%X{traceId}]%d{HHss.SSS}%-5level%class{-1}.%M()/%L-%msg%xEx%n
需要添加%X{traceId}
審核編輯:湯梓紅
-
spring
+關注
關注
0文章
341瀏覽量
15935 -
日志
+關注
關注
0文章
146瀏覽量
11063 -
Boot
+關注
關注
0文章
154瀏覽量
37740 -
線程
+關注
關注
0文章
509瀏覽量
20826 -
SpringBoot
+關注
關注
0文章
177瀏覽量
684
原文標題:SpringBoot + MDC 實現全鏈路調用日志跟蹤
文章出處:【微信號:芋道源碼,微信公眾號:芋道源碼】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
2017雙11技術揭秘—雙十一海量數據下EagleEye的使命和挑戰
全鏈路壓測一招搞定,阿里云性能測試鉑金版發布
API信息全掌控,方便你的日志管理——阿里云推出API網關打通日志服務
基于分布式調用鏈監控技術的全息排查功能
MDC300F UART 下發配置 日志調試
手動實現SpringBoot日志鏈路追蹤
微服務循環依賴調用引發的血案
鏈路追蹤系統SkyWalking的原理
SpringBoot+Vue實現網頁版人臉登錄、人臉識別案例解析
SpringBoot+Vue實現網頁版人臉登錄、人臉識別
什么是 SpringBoot?
SpringBoot+MDC實現全鏈路調用日志跟蹤
評論