2018-04-02 日志服務(wù)業(yè)內(nèi)解決方案

背景

不管什么樣的應(yīng)用匆浙,都會(huì)產(chǎn)生日志犹菇,而如何使用這些日志就成了每個(gè)公司都必須面對的問題。
本文帶著上面的問題圃郊,總結(jié)了一些業(yè)界已有的解決方案甫男,期望能夠厘定和日志相關(guān)的功能的邊界且改,而不至于思維特別發(fā)散導(dǎo)致無從下手验烧。

各大廠商

騰訊云

日志服務(wù)正在內(nèi)測

阿里云

  1. 日志服務(wù):包括logtail(實(shí)時(shí)采集)板驳、消費(fèi)組管理、查詢碍拆、告警若治、Dashboard慨蓝、MaxCompute、OSS
  2. 阿里云Elasticsearch:這個(gè)就是安裝了ES的服務(wù)器端幼,不是一個(gè)完整的解決方案礼烈。

Splunk

業(yè)界非常厲害的一家公司,很貴婆跑!

graylog

號稱開源版的Splunk此熬,值得研究。
git: Graylog2/graylog2-server

馭龍HIDS

git: ysrc/yulong-hids
git: ossec/ossec-hids
這是一個(gè)“主機(jī)入侵檢測系統(tǒng)”滑进,但是它的檢測數(shù)據(jù)來源也包括日志犀忱。
因此它里面也有很多和日志處理相關(guān)的功能,挺好的扶关。開源阴汇。在蘇州招人。

Octopussy

主要由sebthebert開發(fā)維護(hù)节槐。

其他的一些工具

  1. Fluentd
  2. Heka
  3. Logstash
  4. Beat(包括filebeat搀庶、Metricbeat、Auditbeat铜异、Heartbeat等)
  5. Kibana
  6. Flume
  7. Kafka
  8. Searchguard(基于ELK的定制版哥倔,很多功能也收費(fèi))
  9. elastalert

功能的小結(jié)

查看了上面的這些業(yè)界產(chǎn)品,可以發(fā)現(xiàn)日志服務(wù)相關(guān)的一些基本功能:

  1. 權(quán)限管理揍庄,LDAP集成(還包括數(shù)據(jù)隔離)
  2. 日志采集
  3. 日志解析
  4. 日志存儲(chǔ)未斑、索引、搜索
  5. 日志展示币绩,數(shù)據(jù)可視化
  6. 報(bào)警規(guī)則配置
  7. 報(bào)表導(dǎo)出
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末蜡秽,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子缆镣,更是在濱河造成了極大的恐慌芽突,老刑警劉巖,帶你破解...
    沈念sama閱讀 216,651評論 6 501
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件董瞻,死亡現(xiàn)場離奇詭異寞蚌,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī)钠糊,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,468評論 3 392
  • 文/潘曉璐 我一進(jìn)店門挟秤,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人抄伍,你說我怎么就攤上這事艘刚。” “怎么了截珍?”我有些...
    開封第一講書人閱讀 162,931評論 0 353
  • 文/不壞的土叔 我叫張陵攀甚,是天一觀的道長箩朴。 經(jīng)常有香客問我,道長秋度,這世上最難降的妖魔是什么炸庞? 我笑而不...
    開封第一講書人閱讀 58,218評論 1 292
  • 正文 為了忘掉前任,我火速辦了婚禮荚斯,結(jié)果婚禮上埠居,老公的妹妹穿的比我還像新娘。我一直安慰自己事期,他們只是感情好拐格,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,234評論 6 388
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著刑赶,像睡著了一般捏浊。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上撞叨,一...
    開封第一講書人閱讀 51,198評論 1 299
  • 那天金踪,我揣著相機(jī)與錄音,去河邊找鬼牵敷。 笑死胡岔,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的枷餐。 我是一名探鬼主播靶瘸,決...
    沈念sama閱讀 40,084評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼毛肋!你這毒婦竟也來了怨咪?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 38,926評論 0 274
  • 序言:老撾萬榮一對情侶失蹤润匙,失蹤者是張志新(化名)和其女友劉穎诗眨,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體孕讳,經(jīng)...
    沈念sama閱讀 45,341評論 1 311
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡匠楚,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,563評論 2 333
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了厂财。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片芋簿。...
    茶點(diǎn)故事閱讀 39,731評論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖璃饱,靈堂內(nèi)的尸體忽然破棺而出与斤,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 35,430評論 5 343
  • 正文 年R本政府宣布幽告,位于F島的核電站梅鹦,受9級特大地震影響裆甩,放射性物質(zhì)發(fā)生泄漏冗锁。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,036評論 3 326
  • 文/蒙蒙 一嗤栓、第九天 我趴在偏房一處隱蔽的房頂上張望冻河。 院中可真熱鬧,春花似錦茉帅、人聲如沸叨叙。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,676評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽擂错。三九已至,卻和暖如春樱蛤,著一層夾襖步出監(jiān)牢的瞬間钮呀,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,829評論 1 269
  • 我被黑心中介騙來泰國打工昨凡, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留爽醋,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 47,743評論 2 368
  • 正文 我出身青樓便脊,卻偏偏與公主長得像蚂四,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個(gè)殘疾皇子哪痰,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,629評論 2 354

推薦閱讀更多精彩內(nèi)容

  • WebSocket-Swift Starscream的使用 WebSocket 是 HTML5 一種新的協(xié)議遂赠。它實(shí)...
    香橙柚子閱讀 23,848評論 8 183
  • 生活張開血盆大口, 人性里暗藏的呲牙咧嘴也露出頭來晌杰, 一個(gè)不著調(diào)的朋友解愤, 四個(gè)要呵護(hù)的摯愛之人, 一副微痛的軀體乎莉。...
    酷似馬閱讀 499評論 0 0
  • 學(xué)唱【寶健之歌】(二) 回憶當(dāng)年 第一次在寶健大會(huì)上學(xué)唱 【寶健之歌】十分激動(dòng)送讲。十分興奮。 在生活的旅途...
    海鷗自主健康會(huì)客廳閱讀 343評論 0 0
  • 今天此行是觀音橋惋啃,皆是趕路哼鬓。 一邊是茂密的青山,一邊是清澈的色曲河边灭。 川西雖已進(jìn)入深秋异希,深綠底色的山體上不時(shí)有金黃...
    沐陽燕閱讀 166評論 0 1
  • “書籍是人類進(jìn)步的階梯∪奘荩”走進(jìn)書堆称簿,我就變成了一只“小書蟲”扣癣,大口大口地吸收書籍提供養(yǎng)份,將來我一定會(huì)變成一只...
    鄔文敬閱讀 427評論 0 6