應用SpringAOP及Tlog工具完成日志鏈路追蹤、收集、持久化

KaltZK 發布于2021-11-23 09:51 / 2794人閱讀

摘要：經過一番考察吧，對于鏈路追蹤，我們選用了這個日志追蹤工具。日志收集使用注解主要對出入參及異常信心進行收集處理。另外對進行簡單封裝，提供等方法，這些方法輸入的日志也進行收集存儲。

?一、痛點

目前我司各系統的日志管理比較原始，使用logback打日志到log文件，雖然有服務管理平臺，但記錄的日志也僅僅是前置機調用后臺系統的出入參，當遇到問題時查日志較為麻煩。

登錄VPN-打開服務器-找到日志目錄-打開日志文件-搜索

而這個過程也僅僅是在一臺服務器上的操作，一般需要看前置機、后臺系統甚至服務管理平臺。

當用戶較少時，通過先后順序等其他標志還能查到，但當調用量稍多后就很難判斷哪個日志是哪個操作發出的。

另外，我司產品前臺面向用戶，后臺與多家公司產品有大量互相調用，當用戶遇到問題首先投訴的是我司產品，如在日志中找不到問題點，背鍋的就是我們。

??二、解決思路

任務有2個

鏈路追蹤，一次調用的日志，無論跨多少平臺都能串起來；
日志存庫，這主要是為了開發一個日志查詢功能，提供給運維人員。

2.1、Tlog

經過一番考察吧，對于鏈路追蹤，我們選用了Tlog這個日志追蹤工具。主頁鏈接：yomahub.com/tlog/

主要考慮點是：

最基礎的功能：日志打標簽，并且支持標簽模板的自定義，可通過TLogContext.getTraceId()和TLogContext.putTraceId(id)獲取和設置id；
業務代碼無侵入

不過對HttpClient是侵入式的，需要加攔截器

這個攔截器的實現還是頗為簡單

public class TLogHttpClientInterceptor implements HttpRequestInterceptor {        private static final Logger log = LoggerFactory.getLogger(TLogHttpClientInterceptor.class);        @Override    public void process(final HttpRequest request, final HttpContext context) throws HttpException, IOException {        Args.notNull(request, "HTTP request");        String traceId = TLogContext.getTraceId();        if(StringUtils.isNotBlank(traceId)) {            String appName = TLogSpringAware.getProperty("spring.application.name");            request.addHeader(TLogConstants.TLOG_TRACE_KEY, traceId);            request.addHeader(TLogConstants.TLOG_SPANID_KEY, SpanIdGenerator.generateNextSpanId());            request.addHeader(TLogConstants.PRE_IVK_APP_KEY, appName);            request.addHeader(TLogConstants.PRE_IVK_APP_HOST, LocalhostUtil.getHostName());            request.addHeader(TLogConstants.PRE_IP_KEY, LocalhostUtil.getHostIp());        } else {            log.debug("[TLOG]鏈湴threadLocal鍙橀噺娌℃湁姝ｇ‘浼犻?抰raceId,鏈璋冪敤涓嶄紶閫抰raceId");        }    }}

不過需要注意的點是，有一些方法使用了Hutool高版本提供的方法，注意項目中版本沖突的解決。

對Tlog的集成還有一個問題，公司使用的服務管理平臺由其他部門開發管理，需要該部門協同解決，不過好在我們可以拿到源碼????????

2.2、日志存儲

日志存儲自然不希望對當前業務有任何影響，考慮到系統并發量并不是很大，就采用線程池來調用日志系統存庫。

2.3、日志收集

使用注解主要對出入參及異常信心進行收集處理。另外對logback進行簡單封裝，提供info()、error()等方法，這些方法輸入的日志也進行收集、存儲。因業務特殊性，需要使用的系統都復用一套自定義注解、公共切面方法，并在切面中完成特殊業務的處理。

頗多細節就不多寫了，本文主要就是介紹整體思路，對于調用量說多不多的系統還可以。

GPU云服務器云服務器應用服務器日志收集 linux追蹤日志日志收集、集群日志收集

文章版權歸作者所有，未經允許請勿轉載,若此文章存在違規行為，您可以聯系管理員刪除。

轉載請注明本文地址：http://specialneedsforspecialkids.com/yun/124529.html

他山之石——運維平臺哪家強？

摘要：當云平臺出現網絡故障系統故障等問題，這對云租戶用戶有時甚至是致命的，所以不少是由高級別開發人員轉型而來。目前國內各大云廠商也基本都提供了應用運維平臺，包括騰訊藍鯨阿里華為等。 DevOps 全鏈路下圖是我們熟知的軟件研發環節，在迭代頻率高的研發組織里，一天可能要經歷多次如下循環。對于用戶群體龐大或者正在經歷大幅業務擴張的企業研發組織，除了重點關注應用的快速上線之外，如何保障應用的高可...

mylxsw 2019-05-28 17:13 評論0 收藏0
微服務調用鏈追蹤中心搭建

摘要：一個客戶端請求從發出到被響應經歷了哪些組件哪些微服務請求總時長每個組件所花時長等信息我們有必要了解和收集，以幫助我們定位性能瓶頸進行性能調優，因此監控整個微服務架構的調用鏈十分有必要，本文將闡述如何使用搭建微服務調用鏈追蹤中心。 showImg(https://segmentfault.com/img/remote/1460000014553707); 概述一個完整的微服務系統包含...

Pines_Cheng 2019-06-28 16:22 評論0 收藏0
Java學習路線

摘要：學習路線編程基礎語言語言基礎數據類型面向對象接口容器異常泛型反射注解流集合類加載機制字節碼執行機制 Java學習路線 Java編程基礎 Java語言 Java語言基...

不知名網友 2021-11-26 11:11 評論0 收藏0
貓頭鷹的深夜翻譯：使用SpringBoot和AspectJ實現AOP

摘要：我們會寫切面來攔截對這些業務類和類的調用。切面定義何時攔截一個方法以及做什么和在一起成為切面連接點當代碼開始執行，并且切點的條件滿足時，通知被調用。前言這篇文章會幫助你使用Spring Boot Starter AOP實現AOP。我們會使用AspectJ實現四個不同的通知(advice)，并且新建一個自定義的注解來追蹤方法的執行時間。你將會了解什么是交叉分割關注點（cross...

meislzhua 2019-08-19 10:41 評論0 收藏0