吴忠躺衫网络科技有限公司

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

請問Spring Boot是如何快速過濾出一次請求所有日志的?

jf_ro2CN3Fa ? 來源:Wudashan Blog ? 2024-01-18 10:18 ? 次閱讀

01、前言

在現網出現故障時,我們經常需要獲取一次請求流程里的所有日志進行定位。如果請求只在一個線程里處理,則我們可以通過線程ID來過濾日志,但如果請求包含異步線程的處理,那么光靠線程ID就顯得捉襟見肘了。

華為IoT平臺,提供了接收設備上報數據的能力, 當數據到達平臺后,平臺會進行一些復雜的業務邏輯處理,如數據存儲,規則引擎,數據推送,命令下發等等。由于這個邏輯之間沒有強耦合的關系,所以通常是異步處理。如何將一次數據上報請求中包含的所有業務日志快速過濾出來,就是本文要介紹的。

02、正文

SLF4J日志框架提供了一個MDC(Mapped Diagnostic Contexts)工具類,谷歌翻譯為映射的診斷上下文,從字面上很難理解,我們可以先實戰一把。

publicclassMain{

privatestaticfinalStringKEY="requestId";
privatestaticfinalLoggerlogger=LoggerFactory.getLogger(Main.class);

publicstaticvoidmain(String[]args){

//入口傳入請求ID
MDC.put(KEY,UUID.randomUUID().toString());

//打印日志
logger.debug("loginmainthread1");
logger.debug("loginmainthread2");
logger.debug("loginmainthread3");

//出口移除請求ID
MDC.remove(KEY);

}

}

我們在main函數的入口調用MDC.put()方法傳入請求ID,在出口調用MDC.remove()方法移除請求ID。配置好log4j2.xml文件后,運行main函數,可以在控制臺看到以下日志輸出:

2018-02-1713:19:52.606{requestId=f97ea0fb-2a43-40f4-a3e8-711f776857d0}[main]DEBUGcn.wudashan.Main-loginmainthread1
2018-02-1713:19:52.609{requestId=f97ea0fb-2a43-40f4-a3e8-711f776857d0}[main]DEBUGcn.wudashan.Main-loginmainthread2
2018-02-1713:19:52.609{requestId=f97ea0fb-2a43-40f4-a3e8-711f776857d0}[main]DEBUGcn.wudashan.Main-loginmainthread3

從日志中可以明顯地看到花括號中包含了(映射的)*請求ID(requestId),這其實就是我們定位*(診斷)*問題的關鍵字*(上下文)。有了MDC工具,只要在接口或切面植入put()和remove()代碼,在現網定位問題時,我們就可以通過grep requestId=xxx *.log快速的過濾出某次請求的所有日志。

03、進階

然而,MDC工具真的有我們所想的這么方便嗎?回到我們開頭,一次請求可能涉及多線程異步處理,那么在多線程異步的場景下,它是否還能正常運作呢?Talk is cheap, show me the code。

publicclassMain{

privatestaticfinalStringKEY="requestId";
privatestaticfinalLoggerlogger=LoggerFactory.getLogger(Main.class);

publicstaticvoidmain(String[]args){

//入口傳入請求ID
MDC.put(KEY,UUID.randomUUID().toString());

//主線程打印日志
logger.debug("loginmainthread");

//異步線程打印日志
newThread(newRunnable(){
@Override
publicvoidrun(){
logger.debug("loginotherthread");
}
}).start();

//出口移除請求ID
MDC.remove(KEY);

}

}

代碼里我們新起了一個異步線程,并在匿名對象Runnable的run()方法打印日志。運行main函數,可以在控制臺看到以下日志輸出:

2018-02-1714:05:43.487{requestId=e6099c85-72be-4986-8a28-de6bb2e52b01}[main]DEBUGcn.wudashan.Main-loginmainthread
2018-02-1714:05:43.490{}[Thread-1]DEBUGcn.wudashan.Main-loginotherthread

不幸的是,請求ID在異步線程里不打印了。這是怎么回事呢?要解決這個問題,我們就得知道MDC的實現原理。由于篇幅有限,這里就暫不詳細介紹,MDC之所以在異步線程中不生效是因為底層采用ThreadLocal作為數據結構,我們調用MDC.put()方法傳入的請求ID只在當前線程有效。感興趣的小伙伴可以自己深入一下代碼細節。

知道了原理那么解決這個問題就輕而易舉了,我們可以使用裝飾器模式,新寫一個MDCRunnable類對Runnable接口進行一層裝飾。在創建MDCRunnable類時保存當前線程的MDC值,在執行run()方法時再將保存的MDC值拷貝到異步線程中去。代碼實現如下:

publicclassMDCRunnableimplementsRunnable{

privatefinalRunnablerunnable;

privatefinalMapmap;

publicMDCRunnable(Runnablerunnable){
this.runnable=runnable;
//保存當前線程的MDC值
this.map=MDC.getCopyOfContextMap();
}

@Override
publicvoidrun(){
//傳入已保存的MDC值
for(Map.Entryentry:map.entrySet()){
MDC.put(entry.getKey(),entry.getValue());
}
//裝飾器模式,執行run方法
runnable.run();
//移除已保存的MDC值
for(Map.Entryentry:map.entrySet()){
MDC.remove(entry.getKey());
}
}

}

接著,我們需要對main函數里創建的Runnable實現類進行裝飾:

publicclassMain{

privatestaticfinalStringKEY="requestId";
privatestaticfinalLoggerlogger=LoggerFactory.getLogger(Main.class);
privatestaticfinalExecutorServiceEXECUTOR=Executors.newSingleThreadExecutor();

publicstaticvoidmain(String[]args){

//入口傳入請求ID
MDC.put(KEY,UUID.randomUUID().toString());

//主線程打印日志
logger.debug("loginmainthread");

//異步線程打印日志,用MDCRunnable裝飾Runnable
newThread(newMDCRunnable(newRunnable(){
@Override
publicvoidrun(){
logger.debug("loginotherthread");
}
})).start();

//異步線程池打印日志,用MDCRunnable裝飾Runnable
EXECUTOR.execute(newMDCRunnable(newRunnable(){
@Override
publicvoidrun(){
logger.debug("loginotherthreadpool");
}
}));
EXECUTOR.shutdown();

//出口移除請求ID
MDC.remove(KEY);

}

}

執行main函數,將會輸出以下日志

2018-03-042305.343{requestId=5ee2a117-e090-41d8-977b-cef5dea09d34}[main]DEBUGcn.wudashan.Main-loginmainthread
2018-03-042305.346{requestId=5ee2a117-e090-41d8-977b-cef5dea09d34}[Thread-1]DEBUGcn.wudashan.Main-loginotherthread
2018-03-042305.347{requestId=5ee2a117-e090-41d8-977b-cef5dea09d34}[pool-2-thread-1]DEBUGcn.wudashan.Main-loginotherthreadpool

Congratulations!經過我們的努力,最終在異步線程和線程池中都有requestId打印了!

04、總結

本文講述了如何使用MDC工具來快速過濾一次請求的所有日志,并通過裝飾器模式使得MDC工具在異步線程里也能生效。有了MDC,再通過AOP技術對所有的切面植入requestId,就可以將整個系統的任意流程的日志過濾出來。使用MDC工具,在開發自測階段,可以極大地節省定位問題的時間,提升開發效率;在運維維護階段,可以快速地收集相關日志信息,加快分析速度。






審核編輯:劉清

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • AOP
    AOP
    +關注

    關注

    0

    文章

    40

    瀏覽量

    11123

原文標題:Spring Boot 如何快速過濾出一次請求的所有日志?

文章出處:【微信號:芋道源碼,微信公眾號:芋道源碼】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    啟動Spring Boot項目應用的三種方法

    的讀取,開啟注解4)配置日志文件...配置完成之后部署tomcat 調試。但是如果使用spring boot呢?很簡單,我僅僅只需要非常少的幾個配置就可以迅速方便的搭建起來套web項
    發表于 01-14 17:33

    java 日志框架Spring Boot分析

    引言:我們需要在已有的微服務代碼中添加日志功能,用于輸出需要關注的內容,這是最平常的技術需求了。由于我們的微服務代碼是基于SpringBoot開發的,那么問題就轉換為如何在Spring Boot
    發表于 09-28 14:58 ?0次下載

    Spring Boot從零入門1 詳述

    在開始學習Spring Boot之前,我之前從未接觸過Spring相關的項目,Java基礎還是幾年前自學的,現在估計也忘得差不多了吧,寫Spring
    的頭像 發表于 12-10 22:18 ?671次閱讀

    Spring Boot特有的實踐

    Spring Boot是最流行的用于開發微服務的Java框架。在本文中,我將與你分享自2016年以來我在專業開發中使用Spring Boot所采用的最佳實踐。這些內容是基于我的個人經驗
    的頭像 發表于 09-29 10:24 ?952次閱讀

    強大的Spring Boot 3.0要來了

    來源:OSC開源社區(ID:oschina2013) Spring Boot 3.0 首個 RC 已發布,此外還為兩個分支發布了更新:2.7.5 2.6.13。 3.0.0-RC1: https
    的頭像 發表于 10-31 11:17 ?1966次閱讀

    SpringBoot如何快速過濾出一次請求所有日志

    在現網出現故障時,我們經常需要獲取一次請求流程里的所有日志進行定位。如果請求只在個線程里處理,
    的頭像 發表于 11-28 15:45 ?743次閱讀

    怎樣使用Kiuwan保護Spring Boot應用程序呢?

    Spring Boot 提供了快速輕松地構建基于Spring 的應用程序所需的工具、功能和依賴項。
    的頭像 發表于 03-16 09:10 ?830次閱讀

    如何通過IDEA快速建立Spring Boot項目

    在說Spring Boot之前先要了解Spring,那么Spring是什么呢?Spring 框架是
    的頭像 發表于 03-17 15:00 ?1253次閱讀
    如何通過IDEA<b class='flag-5'>快速</b>建立<b class='flag-5'>一</b>個<b class='flag-5'>Spring</b> <b class='flag-5'>Boot</b>項目

    Spring Boot Web相關的基礎知識

    篇文章我們已經學會了如何通過IDEA快速建立Spring Boot項目,還介紹了Spring
    的頭像 發表于 03-17 15:03 ?696次閱讀

    Spring Boot如何實現日志鏈路追蹤

    ,各個接口的日志穿插,確實讓人頭大。 模糊匹配搜索日志能解決嗎? 能解決點點。 但是不能完全呈現出整個鏈路相關的日志。 那要做到方便,很顯然,我們需要的是把同
    的頭像 發表于 05-16 11:33 ?2891次閱讀
    <b class='flag-5'>Spring</b> <b class='flag-5'>Boot</b>如何實現<b class='flag-5'>日志</b>鏈路追蹤

    Spring Boot日志框架使用

    目前市面上常見的日志框架有:slf4j(Simple Logging Facade for Java)、logback、log4j、log4j2、commons-logging(Spring默認日志框架)、JUL(java.ut
    的頭像 發表于 06-02 10:59 ?990次閱讀
    <b class='flag-5'>Spring</b> <b class='flag-5'>Boot</b>的<b class='flag-5'>日志</b>框架使用

    Spring Boot Actuator快速入門

    Spring Boot Actuator ,學習如何在 Spring Boot 2.x 中使用、配置和擴展這個監控工具。
    的頭像 發表于 10-09 17:11 ?672次閱讀

    Spring Boot啟動 Eureka流程

    在上篇中已經說過了 Eureka-Server 本質上是個 web 應用的項目,今天就來看看 Spring Boot 是怎么啟動 Eureka 的。 Spring
    的頭像 發表于 10-10 11:40 ?930次閱讀
    <b class='flag-5'>Spring</b> <b class='flag-5'>Boot</b>啟動 Eureka流程

    Spring Boot的啟動原理

    可能很多初學者會比較困惑,Spring Boot 是如何做到將應用代碼和所有的依賴打包成個獨立的 Jar 包,因為傳統的 Java 項目打包成 Jar 包之后,需要通過 -class
    的頭像 發表于 10-13 11:44 ?687次閱讀
    <b class='flag-5'>Spring</b> <b class='flag-5'>Boot</b>的啟動原理

    Spring Boot 的設計目標

    什么是Spring Boot Spring BootSpring 開源組織下的個子項目,
    的頭像 發表于 10-13 14:56 ?617次閱讀
    <b class='flag-5'>Spring</b> <b class='flag-5'>Boot</b> 的設計目標
    百家乐模拟分析程序| 百家乐官网娱乐网开户| 威尼斯人娱乐城地图| 百家乐官网bp| 百家乐官网投注翻倍方法| 大发888登录| 百家乐998| 关于阳宅风水24山知识| 百家乐官网投注方法| 遵义市| 大发888娱乐游戏充值| 金榜百家乐官网的玩法技巧和规则| 百家乐官网国际娱乐| 联众棋牌游戏大厅| 扑克百家乐麻将筹码防伪| 百家乐最新赌王| 百家乐官网赢钱战略| 德州扑克冠军| 百家乐那里信誉好| 网上的百家乐是假的吗| 百家乐冯氏坐庄法| 伯爵百家乐官网的玩法技巧和规则 | 网络百家乐的信誉| 玩百家乐怎么才能赢| 下载百家乐官网棋牌大厅| 百乐坊娱乐场| 沙龙国际| 境外赌博下| bet365体育投注| 大赢家娱乐城信誉| bet365主页器| 金银岛娱乐城开户| 德州扑克英文| 澳门博彩8345cc| 云鼎娱乐城信誉度| 真人娱乐城排行榜| 百家乐是否能赢| 一筒百家乐的玩法技巧和规则| 伯爵百家乐赌场娱乐网规则| 时时博百家乐的玩法技巧和规则| 百家乐出千原理|