Skywalking分布式追蹤與監(jiān)控:起始篇

Skywalking是由國(guó)內(nèi)開(kāi)源愛(ài)好者吳晟(原OneAPM工程師,目前在華為)開(kāi)源并提交到Apache孵化器的產(chǎn)品仿村,它同時(shí)吸收了Zipkin/Pinpoint/CAT的設(shè)計(jì)思路冻辩,支持非侵入式埋點(diǎn)舀锨。是一款基于分布式跟蹤的應(yīng)用程序性能監(jiān)控系統(tǒng)。另外社區(qū)還發(fā)展出了一個(gè)叫OpenTracing的組織更哄,旨在推進(jìn)調(diào)用鏈監(jiān)控的一些規(guī)范和標(biāo)準(zhǔn)工作。

OpenTracing

近年各種調(diào)用鏈監(jiān)控產(chǎn)品層出不窮,呈現(xiàn)百花齊放的態(tài)勢(shì)洪鸭,為了避免碎片化,促進(jìn)互操作性仑扑,社區(qū)誕生了一個(gè)叫做OpenTracing的標(biāo)準(zhǔn)化組織览爵。

如上圖所示:OpenTracing旨在標(biāo)準(zhǔn)化Trace數(shù)據(jù)結(jié)構(gòu)和格式,其目的是:

不同語(yǔ)言開(kāi)發(fā)的Trace客戶端的互操作性镇饮,Java/.Net/PHP/Python/NodeJs等語(yǔ)言開(kāi)發(fā)的客戶端蜓竹,只要遵循OpenTracing標(biāo)準(zhǔn),就都可以對(duì)接OpenTracing兼容的監(jiān)控后端储藐。

Tracing監(jiān)控后端的互操作性俱济,只要遵循OpenTracing標(biāo)準(zhǔn),企業(yè)可以根據(jù)需要替換具體的Tracing監(jiān)控后端產(chǎn)品钙勃,比如從Zipkin替換成Jaeger/CAT/Skywalking等后端蛛碌。

OpenTracing初衷和方向是好的,但是目前還不明朗辖源,不少調(diào)用鏈監(jiān)控產(chǎn)品并未明確支持OpenTracning標(biāo)準(zhǔn)蔚携。對(duì)其后續(xù)走勢(shì)我們可以持續(xù)關(guān)注希太。

在構(gòu)建監(jiān)控系統(tǒng)時(shí),大家往往在Metrics,Tracing和Logging幾個(gè)名詞和方式之間糾結(jié)浮梢。 總體說(shuō)來(lái)跛十,我們是在一些通用的名詞間糾結(jié)★跸酰可以通過(guò)圖表來(lái)定義監(jiān)控的作用域芥映,使各名詞的作用范圍更明確。比如通過(guò)維恩圖(Venn diagram)來(lái)描述Metrics, tracing, logging三個(gè)概念的定義:

Metric的特點(diǎn)是远豺,它是可累加的:他們具有原子性奈偏,每個(gè)都是一個(gè)邏輯計(jì)量單元,或者一個(gè)時(shí)間段內(nèi)的柱狀圖躯护。 例如:隊(duì)列的當(dāng)前深度可以被定義為一個(gè)計(jì)量單元惊来,在寫(xiě)入或讀取時(shí)被更新統(tǒng)計(jì); 輸入HTTP請(qǐng)求的數(shù)量可以被定義為一個(gè)計(jì)數(shù)器棺滞,用于簡(jiǎn)單累加裁蚁; 請(qǐng)求的執(zhí)行時(shí)間可以被定義為一個(gè)柱狀圖,在指定時(shí)間片上更新和統(tǒng)計(jì)匯總继准。

Logging的特點(diǎn)是枉证,它描述一些離散的(不連續(xù)的)事件。 例如:應(yīng)用通過(guò)一個(gè)滾動(dòng)的文件輸出debug或error信息移必,并通過(guò)日志收集系統(tǒng)室谚,存儲(chǔ)到Elasticsearch中; 審批明細(xì)信息通過(guò)Kafka崔泵,存儲(chǔ)到數(shù)據(jù)庫(kù)(BigTable)中秒赤; 又或者,特定請(qǐng)求的元數(shù)據(jù)信息憎瘸,從服務(wù)請(qǐng)求中剝離出來(lái)入篮,發(fā)送給一個(gè)異常收集服務(wù),如NewRelic幌甘。

Tracing的最大特點(diǎn)就是潮售,它在單次請(qǐng)求的范圍內(nèi),處理信息含潘。 任何的數(shù)據(jù)饲做、元數(shù)據(jù)信息都被綁定到系統(tǒng)中的單個(gè)事務(wù)上线婚。 例如:一次調(diào)用遠(yuǎn)程服務(wù)的RPC執(zhí)行過(guò)程遏弱;一次實(shí)際的SQL查詢語(yǔ)句;一次HTTP請(qǐng)求的業(yè)務(wù)性ID塞弊。

在OpenTracing中漱逸,有幾個(gè)基本概念我們需要提前了解清楚:

1泪姨、Trace(追蹤):

在廣義上,一個(gè)trace代表了一個(gè)事務(wù)或者流程在(分布式)系統(tǒng)中的執(zhí)行過(guò)程饰抒。在OpenTracing標(biāo)準(zhǔn)中肮砾,trace是多個(gè)span組成的一個(gè)有向無(wú)環(huán)圖(DAG),每一個(gè)span代表trace中被命名并計(jì)時(shí)的連續(xù)性的執(zhí)行片段袋坑。

2仗处、Span(跨度):一個(gè)span代表系統(tǒng)中具有開(kāi)始時(shí)間和執(zhí)行時(shí)長(zhǎng)的邏輯運(yùn)行單元。span之間通過(guò)嵌套或者順序排列建立邏輯因果關(guān)系枣宫。

3婆誓、Logs:每個(gè)span可以進(jìn)行多次Logs操作,每一次Logs操作也颤,都需要一個(gè)帶時(shí)間戳的時(shí)間名稱洋幻,以及可選的任意大小的存儲(chǔ)結(jié)構(gòu)。

4翅娶、Tags:每個(gè)span可以有多個(gè)鍵值對(duì)(key:value)形式的Tags文留,Tags是沒(méi)有時(shí)間戳的,支持簡(jiǎn)單的對(duì)span進(jìn)行注解和補(bǔ)充竭沫。

其中單個(gè)Trace和各個(gè)Span之間的關(guān)系:

一個(gè)span可以和一個(gè)或者多個(gè)span間存在因果關(guān)系燥翅。OpenTracing定義了兩種關(guān)系:ChildOf 和 FollowsFrom。這兩種引用類(lèi)型代表了子節(jié)點(diǎn)和父節(jié)點(diǎn)間的直接因果關(guān)系输吏。

Skywalking可以理解為實(shí)現(xiàn)了OpenTracing規(guī)范权旷,同時(shí)提供了更加現(xiàn)代化、酷炫的UI贯溅,供人們可以對(duì)應(yīng)用更加的直觀的監(jiān)控拄氯。

接下來(lái),我們將結(jié)合Skywalking的界面來(lái)了解如何查看單個(gè)Trace:

首先它浅,在Skywalking中译柏,官方針對(duì)Java應(yīng)用封裝了一個(gè)Segment概念,實(shí)質(zhì)上就是Span數(shù)組的封裝姐霍,為的是更好的表示Java中跨線程間的調(diào)用(后續(xù)文章將會(huì)詳細(xì)講到)鄙麦,因此,在Skywalking里面镊折,一次完整的追蹤所包含的數(shù)據(jù)結(jié)構(gòu)應(yīng)該是:

- Trace = Segment1 + Segment2 + ...... + SegmentN

- 其中每個(gè)Segment所包含的數(shù)據(jù):Segment = Span1 + Span2 + ...... + SpanN

通過(guò)一張官方的截圖來(lái)講解:

圖中藍(lán)色部分是一個(gè)進(jìn)程調(diào)用胯府,代表的是Kafka/test-trace-topic/Consumer這個(gè)服務(wù)為調(diào)用入口,緊隨著下面的白色長(zhǎng)塊則代表跨進(jìn)程或跨線程的調(diào)用塊恨胚,點(diǎn)擊進(jìn)去并通過(guò)瀏覽器查看返回的數(shù)據(jù):

我們可以看到右側(cè)有一組spans數(shù)組骂因,數(shù)組中每一組數(shù)據(jù)中都帶有traceId,segmentId,parentSegmentId,refs數(shù)組,spanId,parentSpanId,type等數(shù)據(jù)。Skywalking界面上那些層級(jí)關(guān)聯(lián)關(guān)系就是根據(jù)這些數(shù)據(jù)來(lái)進(jìn)行展示的赃泡,比如:

在同一個(gè)Segment中寒波,spanId最頂層數(shù)值為-1乘盼,默認(rèn)從0開(kāi)始自增,依次代表層級(jí)俄烁。即Span與Span時(shí)間通過(guò)parentSpanId表示關(guān)系绸栅。Segment與Segment之間通過(guò)refs數(shù)組中的parentSegmentId表示關(guān)系

好了,其實(shí)最后一段才是我想表達(dá)的東西页屠,順帶將整個(gè)東西理清楚記錄一下粹胯,使用過(guò)程中碰到的問(wèn)題會(huì)陸續(xù)記錄到這里。


文章轉(zhuǎn)自:https://zhuanlan.zhihu.com/p/41252484

如有侵權(quán)辰企,將第一時(shí)間刪除文章內(nèi)容矛双。

關(guān)注公眾號(hào)【OSC DevOps】閱讀更多精彩文章。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末蟆豫,一起剝皮案震驚了整個(gè)濱河市议忽,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌十减,老刑警劉巖栈幸,帶你破解...
    沈念sama閱讀 211,561評(píng)論 6 492
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異帮辟,居然都是意外死亡速址,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,218評(píng)論 3 385
  • 文/潘曉璐 我一進(jìn)店門(mén)由驹,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)芍锚,“玉大人,你說(shuō)我怎么就攤上這事蔓榄〔⑴冢” “怎么了?”我有些...
    開(kāi)封第一講書(shū)人閱讀 157,162評(píng)論 0 348
  • 文/不壞的土叔 我叫張陵甥郑,是天一觀的道長(zhǎng)逃魄。 經(jīng)常有香客問(wèn)我,道長(zhǎng)澜搅,這世上最難降的妖魔是什么伍俘? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 56,470評(píng)論 1 283
  • 正文 為了忘掉前任,我火速辦了婚禮勉躺,結(jié)果婚禮上癌瘾,老公的妹妹穿的比我還像新娘。我一直安慰自己饵溅,他們只是感情好妨退,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,550評(píng)論 6 385
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著,像睡著了一般碧注。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上糖赔,一...
    開(kāi)封第一講書(shū)人閱讀 49,806評(píng)論 1 290
  • 那天萍丐,我揣著相機(jī)與錄音,去河邊找鬼放典。 笑死逝变,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的奋构。 我是一名探鬼主播壳影,決...
    沈念sama閱讀 38,951評(píng)論 3 407
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼弥臼!你這毒婦竟也來(lái)了宴咧?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 37,712評(píng)論 0 266
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤径缅,失蹤者是張志新(化名)和其女友劉穎掺栅,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體纳猪,經(jīng)...
    沈念sama閱讀 44,166評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡氧卧,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,510評(píng)論 2 327
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了氏堤。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片沙绝。...
    茶點(diǎn)故事閱讀 38,643評(píng)論 1 340
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖鼠锈,靈堂內(nèi)的尸體忽然破棺而出闪檬,到底是詐尸還是另有隱情,我是刑警寧澤购笆,帶...
    沈念sama閱讀 34,306評(píng)論 4 330
  • 正文 年R本政府宣布谬以,位于F島的核電站,受9級(jí)特大地震影響由桌,放射性物質(zhì)發(fā)生泄漏为黎。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,930評(píng)論 3 313
  • 文/蒙蒙 一行您、第九天 我趴在偏房一處隱蔽的房頂上張望铭乾。 院中可真熱鬧,春花似錦娃循、人聲如沸炕檩。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 30,745評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)笛质。三九已至泉沾,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間妇押,已是汗流浹背跷究。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 31,983評(píng)論 1 266
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留敲霍,地道東北人俊马。 一個(gè)月前我還...
    沈念sama閱讀 46,351評(píng)論 2 360
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像肩杈,于是被迫代替她去往敵國(guó)和親柴我。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,509評(píng)論 2 348

推薦閱讀更多精彩內(nèi)容