摘要：?作為鷹眼的商業(yè)化產(chǎn)品，用于全鏈路APM監(jiān)控的阿里云業(yè)務(wù)實時監(jiān)控服務(wù) (ARMS) ， 基于鷹眼的全息排查沉淀，近日推出了基于分布式調(diào)用鏈監(jiān)控技術(shù)的全息排查功能，將該功能提供給廣大用戶。

作為鷹眼的商業(yè)化產(chǎn)品，用于全鏈路APM監(jiān)控的阿里云業(yè)務(wù)實時監(jiān)控服務(wù) (ARMS) ， 基于鷹眼的全息排查沉淀，近日推出了基于分布式調(diào)用鏈監(jiān)控技術(shù)的全息排查功能，將該功能提供給廣大用戶。至此，ARMS鏈路的分布式鏈路追蹤功能結(jié)合周邊的本地堆棧排查，性能Metrics統(tǒng)計，業(yè)務(wù)全息排查三大附加功能，形成了完整的鏈路監(jiān)控解決方案。

為方便用戶了解ARMS 基于分布式鏈路追蹤技術(shù)的全息排查功能解決的問題和主要的使用場景，下文在這方面簡單展開做一下介紹。

分布式鏈路追蹤概要介紹和其面臨的主要問題

分布式調(diào)用鏈是微服務(wù)時代下的監(jiān)控必備利器。該技術(shù)理論基礎(chǔ)建立在Google Dapper論文基礎(chǔ)之上，主要運用于分布式微服務(wù)場景下的鏈路診斷場景，用戶可快速的定位分布式環(huán)境下的調(diào)用問題診斷。國內(nèi)外常見的這方面技術(shù)的互聯(lián)網(wǎng)產(chǎn)品已有很多，其中：

• 在開源領(lǐng)域有Zipkin, Skywalking, Pinpoint,

• 國內(nèi)外互聯(lián)網(wǎng)公司比較著名的是阿里的淘寶鷹眼(國內(nèi)大廠最早的分布式調(diào)用鏈監(jiān)控的實現(xiàn))和阿里云ARMS (鷹眼商用版)，F(xiàn)acebook的OpenZipkin，還有其他如京東，網(wǎng)易等一些對應(yīng)的實現(xiàn)。

分布式調(diào)用鏈在分布式調(diào)用的鏈路入口和出口通常會記錄調(diào)用時差，返回狀態(tài)，以及對應(yīng)的機器或應(yīng)用的元信息狀態(tài)，因此應(yīng)用的常規(guī)場景通常是某段時間和某個應(yīng)用入口的情況下，查詢錯誤異?；蛘叱瑫r的調(diào)用鏈。如Zipkin調(diào)用鏈查詢?nèi)缦聢D所示。

但是針對包含業(yè)務(wù)語義的特定故障診斷卻稍顯乏力。試腦補以下場景，如下圖。

以上場景如果不將分布式調(diào)用鏈和業(yè)務(wù)內(nèi)容進行關(guān)聯(lián)，通常是很難定位到具體的問題調(diào)用鏈的。顯然，常規(guī)的分布式調(diào)用鏈監(jiān)控技術(shù)是無法勝任以上情況。

帶全息排查功能的分布式調(diào)用鏈查詢

作為國內(nèi)互聯(lián)網(wǎng)大廠的老牌鏈路監(jiān)控工具，鷹眼于2014年左右就推出了全息排查功能，可以在調(diào)用鏈中關(guān)聯(lián)業(yè)務(wù)信息(BizID)進行鏈路查詢。鷹眼全息排查的關(guān)鍵在于：業(yè)務(wù)事件id與分布式調(diào)用鏈元信息TraceId的雙向綁定，從而在技術(shù)上解決了業(yè)務(wù)信息(BizID)和調(diào)用鏈信息(TraceID)的關(guān)聯(lián)問題。

業(yè)務(wù)全息排查的場景有很多，這里試舉一例。例如一個交易訂單（2135897412389123）發(fā)現(xiàn)存在問題，我們可以根據(jù)訂單號查到與之綁定的TraceId，根據(jù)TraceId不僅可以查看系統(tǒng)調(diào)用的事件，還可以看到與業(yè)務(wù)相關(guān)的事件，如用戶下單、當(dāng)前庫存情況等，也就是說根據(jù)交易ID可以在調(diào)用鏈上查看交易、商品庫存以及支付等信息，大大提升錯誤排查速度。相關(guān)排查如下圖所示。

用于全鏈路APM監(jiān)控的阿里云業(yè)務(wù)實時監(jiān)控服務(wù) (ARMS) ， 推出的基于分布式調(diào)用鏈監(jiān)控技術(shù)的全息排查功能，則是基于鷹眼的全息排查沉淀，解決的問題和上文一致。下面我們看看ARMS全息排查的使用細節(jié)。

三步走使用ARMS帶全息排查功能的分布式調(diào)用鏈查詢

和鷹眼類似，ARMS全息排查解決問題的核心思路是將用戶的業(yè)務(wù)內(nèi)容 (簡稱BizID) 和相關(guān)調(diào)用鏈的TraceID做關(guān)聯(lián)，來支持通過業(yè)務(wù)屬性來查詢對應(yīng)的問題調(diào)用鏈。以下簡單介紹如何上手ARMS全息排查功能。其操作的基本場景架構(gòu)如下圖。

以下簡單敘述每步含義。關(guān)于全息排查的更多使用詳解可參見全息排查最佳實踐。

• 第一步，開發(fā)者在程序中通過ARMS提供的獲取Trace信息的SDK來打印包含Trace信息的業(yè)務(wù)日志。

SDK使用示例如下：
Span span = Tracer.builder().getSpan();?
String traceId = span.getTraceId();?
String rpcId = span.getRpcId();

打印的日志參考內(nèi)容如下：
2018-07-12 >11:37:40|1e057c4015313666599651005d1201|0|username=xiao,age=22,action=login?
2018-07-12 >11:37:40|1e057c4015313666599651005d1201|0|username=xiao,age=22,action=search?
2018-07-12 >11:37:40|1e057c4015313666599651005d1201|0|username=xiao,age=22,action=cart

• 第二步，運維人員在ARMS控制臺上配置抓取、清洗業(yè)務(wù)日志的任務(wù)，將其關(guān)聯(lián)到對應(yīng)的鏈路追蹤系統(tǒng)。配置的參考示例如下：
  

• 第三步，在ARMS上開啟應(yīng)用監(jiān)控，開始全息排查。?

ARMS的全息排查入口和以往的應(yīng)用調(diào)用鏈即系查詢?nèi)肟诒３忠恢?。但是對比以往用戶除了根?jù)應(yīng)用名，調(diào)用入口，響應(yīng)時長進行查詢意外，還可以根據(jù)業(yè)務(wù)信息(BizID)進行問題調(diào)用鏈的查詢，從而指數(shù)級的提高了問題診斷查詢效率。如查詢username為kevin.yang的鏈路信息，查詢示例如下：

同時，ARMS還開放具體的全息排查事件查詢，方便用戶直接查看日志原始信息。如查詢username為kevin.yang的日志信息，查詢示例如下：

結(jié)語

作為國內(nèi)分布式鏈路追蹤領(lǐng)域的老牌產(chǎn)品"阿里巴巴鷹眼"的商業(yè)化產(chǎn)品，阿里云業(yè)務(wù)實時監(jiān)控服務(wù) (ARMS)?的全息排查功能讓用戶的調(diào)用鏈診斷和業(yè)務(wù)信息充分關(guān)聯(lián)，在分布式環(huán)境下指數(shù)級提高問題診斷效率。歡迎各位試用。

原文鏈接

本文為云棲社區(qū)原創(chuàng)內(nèi)容，未經(jīng)允許不得轉(zhuǎn)載。