ceph LogClient 模塊介紹

  • 需求介紹
  • 原理說明
  • 模塊添加

需求介紹

我先講一下我的需求姨蟋,估計我講完了机断,大家也就明白為什么要有這么一個模塊了,然后后面我再介紹如何給自己的模塊中添加它舰罚。
我們要在客戶端監(jiān)控一條日志信息微谓,但是由于客戶端節(jié)點非常多森篷,所以不好實現(xiàn)。有人可能已經(jīng)想到了豺型,在每個節(jié)點寫個腳本去監(jiān)控該日志仲智,如果出現(xiàn)了就把該日志插入到頭節(jié)點的某個文件里面,然后你再監(jiān)控這個文件且把這個文件的信息傳送給存儲節(jié)點不就可以了么姻氨。但是這樣做有一下缺點:
1.客戶的計算節(jié)點部署額外的監(jiān)控服務(wù)钓辆,增加了部署的復(fù)雜度,且有的客戶不太樂意給他們機器裝東西肴焊。
2.多個節(jié)點往一個節(jié)點的某個文件里面放日志前联,那我們就要考慮多個客戶端操作一個文件時的數(shù)據(jù)完整性,和時間序列是不是和我們需要的一樣抖韩,考慮的方面比較多蛀恩。

原理說明

綜上所述LogClient就派上用場了疫铜,我們發(fā)現(xiàn)在/var/log/ceph/下面有一個以集群名稱命名的一個日志文件茂浮,利用它可以監(jiān)控集群的健康狀態(tài),pgmap狀態(tài),甚至可以看到哪些操作slow之類的席揽。這里面的日志是monitor經(jīng)過paxos協(xié)議商量后發(fā)給了各個存儲節(jié)點上面的顽馋。大致流程如下圖所示:


LogClient

我們利用它就可以完美解決我們所需要的功能,只需要在客戶端的代碼中添加這個模塊即可幌羞。它主要在下面兩個文件里面實現(xiàn)

src/common/LogClient.cc
src/common/LogClient.h

主要原理就是用LogClient先創(chuàng)建一個通往monitor的channel寸谜。假如我們的channel是clog,當你調(diào)用clog->warn這個函數(shù)的時候把你想要打印的日志暫時放到log_queue里面,它隨后會被MonClient的tick線程讀出來属桦,并且發(fā)送到monitor端熊痴,monitor收到之后和其他monitor商量完畢之后就會把該日志分發(fā)給所有的存儲節(jié)點。當然LogChannel對外的接口有

 void debug(std::stringstream &s) {
    do_log(CLOG_DEBUG, s);
  }
  void info(std::stringstream &s) {
    do_log(CLOG_INFO, s);
  }
  void warn(std::stringstream &s) {
    do_log(CLOG_WARN, s);
  }
  void error(std::stringstream &s) {
    do_log(CLOG_ERROR, s);
  }
  void sec(std::stringstream &s) {
    do_log(CLOG_SEC, s);
  }

模塊添加

我以我在ceph client 模塊添加的為例

  1. Client.h
    a.添加頭文件 #include "common/LogClient.h”
    b.添加類成員變量:
     LogClient    log_client;
     LogChannelRef clog;
    
  2. Client.cc
    a.在Client的構(gòu)造函數(shù)里面初始化上面的兩個成員變量
    b.創(chuàng)建通道
    clog = log_client.create_channel();
    clog->set_log_to_monitors(true);
    
    c.在Client::init里面設(shè)置monclient的log_client
  3. 執(zhí)行完上面兩步就可以使用了,例如:
     stringstream ss;
     ss << "ivan test  ......" ;
     clog->warn() << ss.str();
    

歡迎大家提出寶貴意見聂宾!

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末果善,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子系谐,更是在濱河造成了極大的恐慌巾陕,老刑警劉巖,帶你破解...
    沈念sama閱讀 221,430評論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件纪他,死亡現(xiàn)場離奇詭異鄙煤,居然都是意外死亡,警方通過查閱死者的電腦和手機茶袒,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,406評論 3 398
  • 文/潘曉璐 我一進店門梯刚,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人薪寓,你說我怎么就攤上這事乾巧。” “怎么了预愤?”我有些...
    開封第一講書人閱讀 167,834評論 0 360
  • 文/不壞的土叔 我叫張陵沟于,是天一觀的道長。 經(jīng)常有香客問我植康,道長旷太,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 59,543評論 1 296
  • 正文 為了忘掉前任销睁,我火速辦了婚禮供璧,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘冻记。我一直安慰自己睡毒,他們只是感情好,可當我...
    茶點故事閱讀 68,547評論 6 397
  • 文/花漫 我一把揭開白布冗栗。 她就那樣靜靜地躺著演顾,像睡著了一般供搀。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上钠至,一...
    開封第一講書人閱讀 52,196評論 1 308
  • 那天葛虐,我揣著相機與錄音,去河邊找鬼棉钧。 笑死屿脐,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的宪卿。 我是一名探鬼主播的诵,決...
    沈念sama閱讀 40,776評論 3 421
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼佑钾!你這毒婦竟也來了奢驯?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,671評論 0 276
  • 序言:老撾萬榮一對情侶失蹤次绘,失蹤者是張志新(化名)和其女友劉穎瘪阁,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體邮偎,經(jīng)...
    沈念sama閱讀 46,221評論 1 320
  • 正文 獨居荒郊野嶺守林人離奇死亡管跺,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 38,303評論 3 340
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了禾进。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片豁跑。...
    茶點故事閱讀 40,444評論 1 352
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖泻云,靈堂內(nèi)的尸體忽然破棺而出艇拍,到底是詐尸還是另有隱情,我是刑警寧澤宠纯,帶...
    沈念sama閱讀 36,134評論 5 350
  • 正文 年R本政府宣布卸夕,位于F島的核電站,受9級特大地震影響婆瓜,放射性物質(zhì)發(fā)生泄漏快集。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 41,810評論 3 333
  • 文/蒙蒙 一廉白、第九天 我趴在偏房一處隱蔽的房頂上張望个初。 院中可真熱鬧,春花似錦猴蹂、人聲如沸院溺。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,285評論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽珍逸。三九已至逐虚,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間弄息,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,399評論 1 272
  • 我被黑心中介騙來泰國打工勤婚, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留摹量,地道東北人。 一個月前我還...
    沈念sama閱讀 48,837評論 3 376
  • 正文 我出身青樓馒胆,卻偏偏與公主長得像缨称,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子祝迂,可洞房花燭夜當晚...
    茶點故事閱讀 45,455評論 2 359

推薦閱讀更多精彩內(nèi)容

  • Spring Cloud為開發(fā)人員提供了快速構(gòu)建分布式系統(tǒng)中一些常見模式的工具(例如配置管理睦尽,服務(wù)發(fā)現(xiàn),斷路器型雳,智...
    卡卡羅2017閱讀 134,695評論 18 139
  • feisky云計算当凡、虛擬化與Linux技術(shù)筆記posts - 1014, comments - 298, trac...
    不排版閱讀 3,867評論 0 5
  • 關(guān)于Mongodb的全面總結(jié) MongoDB的內(nèi)部構(gòu)造《MongoDB The Definitive Guide》...
    中v中閱讀 31,947評論 2 89
  • 背景: 閱讀新聞 12C CDB模式下RMAN備份與恢復(fù) [日期:2016-11-29] 來源:Linux社區(qū) 作...
    陽屯okyepd閱讀 3,487評論 0 7
  • 第一章 李木子(一) “用45°抬頭的方式看天空,就可以和太陽來個聚焦纠俭,眼淚就不會掉下來”一個長發(fā)披肩的女孩站在斑...
    云朵默閱讀 304評論 0 0