分布式鏈路跟蹤sleuth(zipkin+kafka+elasticsearch)

前沿

sleuth也不是一個新鮮的東西考传,說白了就是一個APM的一個濃縮版,spring Cloud Sleuth為 spring Cloud提供了分布式跟蹤的解決方案前联,它大量借用了Google Dapper功戚、 Twitter Zipkin和 Apache HTrace的設(shè)計

構(gòu)建了ELK的日志系統(tǒng)和監(jiān)控系統(tǒng)這兩個能夠快速的發(fā)現(xiàn)系統(tǒng)中的問題,但是由于微服務(wù)架構(gòu)中系統(tǒng)眾多似嗤,系統(tǒng)之間的交互還比較復(fù)雜啸臀,在產(chǎn)生了大量的日志之后,可以幫助我們定位問題烁落,但是在緊急情況下難以幫助我們快速乘粒,是快速的定位和解決問題席揽,這個就調(diào)用鏈的設(shè)計初衷,在微服務(wù)中谓厘,調(diào)用鏈比較長的時候,如果出現(xiàn)問題寸谜,很容易出現(xiàn)踢皮球的情況竟稳,這種情況下,打開調(diào)用鏈熊痴,一看他爸,誰的就是誰的不說不鬧,多好果善。
市面上比較常見的APM有:pinpoint,Twitter的zipkin,美團(tuán)的Cat诊笤,Google的Dapper,這里值得表揚(yáng)美團(tuán)巾陕,繼續(xù)和金服的pk吧讨跟,最牛的還是Google,他發(fā)表了一篇Dapper就有好多公司去研究鄙煤,最終形成自己的產(chǎn)品晾匠,不由的讓我想起他的GFS,bigTable在大數(shù)據(jù)前期google為大數(shù)據(jù)所做的貢獻(xiàn)梯刚,向慷慨的人致敬凉馆,懂得分享的人最可愛,嗯亡资,對···進(jìn)入正題

sleuth

簡單說一下調(diào)用鏈的東西TraceID 鏈路ID 在整個調(diào)用鏈中這個東西是不變的
SpanId 步驟ID 經(jīng)過一個node就會變
ParentSpanID 很同意理解澜共,這個spanId是從哪個span來的,這個設(shè)計很重要的

復(fù)雜的東西spring boot已經(jīng)給我們封裝好了
#######sleuth客戶端
在需要跟蹤的微服務(wù)中pom.xml加上

<dependency>
            <groupId>org.springframework.cloud</groupId>
            <artifactId>spring-cloud-starter-sleuth</artifactId>
        </dependency>
        <dependency>
            <groupId>org.springframework.cloud</groupId>
            <artifactId>spring-cloud-sleuth-zipkin</artifactId>
        </dependency>

在application.yml中添加

spring:
  zipkin:
        base-url: http://sleuth server的ip:端口
  sleuth:
       sampler:
          percentage: 1     ##這個是收集比例锥腻,1表示100%shouji ,全部收集
sleuth服務(wù)端

pom.xml添加

<dependency>
            <groupId>io.zipkin.java</groupId>
            <artifactId>zipkin-autoconfigure-ui</artifactId>
        </dependency>
        <dependency>
            <groupId>io.zipkin.java</groupId>
            <artifactId>zipkin-server</artifactId>
        </dependency>

并且在啟動類上添加

@EnableZipkinServer

客戶端和服務(wù)端都啟動嗦董,進(jìn)入到zipkin服務(wù)端


image.png

可以根據(jù)時間,服務(wù)名稱去查詢旷太,點(diǎn)擊可查看調(diào)用鏈詳情

zipkin+kafka+ES

因?yàn)楝F(xiàn)在zipkin的調(diào)用數(shù)據(jù)都是存在內(nèi)存中的展懈,一旦zipkin server重啟,則意味著之前的都沒有了供璧,在這并發(fā)高的存崖,一會就把內(nèi)存擠爆了,所以最終zipkin的數(shù)據(jù)是要持久化的睡毒,要么mysql来惧,這里采用ES,畢竟在大數(shù)據(jù)檢索面前ES比mysql好很多很多
還有在頁面請求量大的時候zipkin和ES直接聯(lián)通存數(shù)據(jù),肯定會阻塞演顾,這里就用kafka來解決這個問題

pom.xml需要引入

<dependency>
            <groupId>org.springframework.cloud</groupId>
            <artifactId>spring-cloud-starter-sleuth</artifactId>
        </dependency>

        <dependency>
            <groupId>org.springframework.cloud</groupId>
            <artifactId>spring-cloud-sleuth-zipkin-stream</artifactId>
        </dependency>

        <dependency>
            <groupId>org.springframework.cloud</groupId>
            <artifactId>spring-cloud-stream-binder-kafka</artifactId>
            <version>1.3.1.RELEASE</version>
        </dependency>

application.yml添加

spring:
    cloud:
      stream:
        kafka:
          binder:
            brokers: kafkaIP:9092
            zkNodes: zkIP:2181
zipkin:
  storage:
    type: elasticsearch
    elasticsearch:
      cluster: elasticsearch
      hosts: http://ESIP:9200
      index: zipkin
      index-shards: 5
      index-replicas: 1

再次啟動供搀,加入數(shù)據(jù)隅居,觀察ES-head


ES-head

已經(jīng)將調(diào)用鏈存進(jìn)去了,這里要感謝spring 將調(diào)用鏈集成葛虐,方便我們應(yīng)用

望指正胎源,不吝賜教

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市屿脐,隨后出現(xiàn)的幾起案子涕蚤,更是在濱河造成了極大的恐慌,老刑警劉巖的诵,帶你破解...
    沈念sama閱讀 217,509評論 6 504
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件万栅,死亡現(xiàn)場離奇詭異,居然都是意外死亡西疤,警方通過查閱死者的電腦和手機(jī)烦粒,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,806評論 3 394
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來代赁,“玉大人扰她,你說我怎么就攤上這事“虐” “怎么了义黎?”我有些...
    開封第一講書人閱讀 163,875評論 0 354
  • 文/不壞的土叔 我叫張陵,是天一觀的道長豁跑。 經(jīng)常有香客問我廉涕,道長,這世上最難降的妖魔是什么艇拍? 我笑而不...
    開封第一講書人閱讀 58,441評論 1 293
  • 正文 為了忘掉前任狐蜕,我火速辦了婚禮,結(jié)果婚禮上卸夕,老公的妹妹穿的比我還像新娘层释。我一直安慰自己,他們只是感情好快集,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,488評論 6 392
  • 文/花漫 我一把揭開白布贡羔。 她就那樣靜靜地躺著,像睡著了一般个初。 火紅的嫁衣襯著肌膚如雪乖寒。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,365評論 1 302
  • 那天院溺,我揣著相機(jī)與錄音楣嘁,去河邊找鬼。 笑死,一個胖子當(dāng)著我的面吹牛逐虚,可吹牛的內(nèi)容都是我干的聋溜。 我是一名探鬼主播,決...
    沈念sama閱讀 40,190評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼叭爱,長吁一口氣:“原來是場噩夢啊……” “哼撮躁!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起买雾,我...
    開封第一講書人閱讀 39,062評論 0 276
  • 序言:老撾萬榮一對情侶失蹤馒胆,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后凝果,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,500評論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡睦尽,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,706評論 3 335
  • 正文 我和宋清朗相戀三年器净,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片当凡。...
    茶點(diǎn)故事閱讀 39,834評論 1 347
  • 序言:一個原本活蹦亂跳的男人離奇死亡山害,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出沿量,到底是詐尸還是另有隱情浪慌,我是刑警寧澤,帶...
    沈念sama閱讀 35,559評論 5 345
  • 正文 年R本政府宣布朴则,位于F島的核電站权纤,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏乌妒。R本人自食惡果不足惜汹想,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,167評論 3 328
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望撤蚊。 院中可真熱鬧古掏,春花似錦、人聲如沸侦啸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,779評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽光涂。三九已至庞萍,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間忘闻,已是汗流浹背挂绰。 一陣腳步聲響...
    開封第一講書人閱讀 32,912評論 1 269
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人葵蒂。 一個月前我還...
    沈念sama閱讀 47,958評論 2 370
  • 正文 我出身青樓交播,卻偏偏與公主長得像,于是被迫代替她去往敵國和親践付。 傳聞我的和親對象是個殘疾皇子秦士,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,779評論 2 354

推薦閱讀更多精彩內(nèi)容