ELK部署和使用

部署

1. 下載

地址:https://www.elastic.co/cn/products

  • Elasticsearch RESTful風格的搜索和數(shù)據(jù)分析引擎
  • Kibana 可視化數(shù)據(jù)和操作 Elastic Stack
  • Logstash 服務器端數(shù)據(jù)處理管道躯喇,同時從多個來源采集轉(zhuǎn)換數(shù)據(jù)如迟,再發(fā)送到指定庫中。
  • mobz/elasticsearch-head第三方管理插件转唉。目前作為獨立服務(built-in server)使用
2. 解壓

系列軟件都是解壓后直接使用虏冻。
elasticsearch-head需要clone下來后,使用npm i安裝好依賴。

3. 配置

elasticsearch-head配置:
在Elasticsearch的config/elasticsearch.yml中添加:

http.cors.enabled: true
http.cors.allow-origin: "*"

并重啟Elasticsearch呀闻。

Kibana配置:
在kibana的config/kibana.yml中添加:

elasticsearch.url: "http://localhost:9200"
4. 啟動

一般執(zhí)行對應的可執(zhí)行文件即可打開web服務。

數(shù)據(jù)導入

導入的方式不止一種潜慎,可以根據(jù)實際情況選擇捡多。

  • 利用Elasticsearch的RESTful接口直接操作
  • 利用http://localhost:9100的elasticsearch-head操作
  • 利用http://localhost:5601的Kibana服務中的 dev Tools 直接操作
  • 配置好Logstash,利用之從其他數(shù)據(jù)源變換铐炫、導入數(shù)據(jù)到Elasticsearch

集群部署

1 單機集群

  1. 復制整個elasticsearch目錄垒手。
  2. 配置原目錄下的/config/elasticsearch.yml,添加下面內(nèi)容:
network.host: 127.0.0.1
http.port: <端口號倒信,默認9200>
cluster.name: <集群名>
node.name: <節(jié)點名>

并配置副本elasticsearch科贬,保持cluster.name相同,http.port鳖悠、node.name不同榜掌。

  1. 如果復制前,已經(jīng)存在數(shù)據(jù)乘综,則刪除副本目錄中的/data憎账。
  2. 重啟原節(jié)點,啟動新節(jié)點卡辰。

這時胞皱,通過elasticsearch-head已經(jīng)可以看到,兩個節(jié)點組成集群九妈。

2 多機分布式集群

保持配置相同朴恳,在多機啟動即可。
推薦使用elastic.co推薦的工具統(tǒng)一管理多節(jié)點配置允蚣。

X-Pack的安裝使用

X-Pack是ELK家族的新成員于颖,可以為系統(tǒng)添加密碼認證、集群監(jiān)控嚷兔、系統(tǒng)性能監(jiān)控等功功能森渐。(Kibana的側(cè)邊欄中增加了Machine Learning做入、GraphMonitoring)同衣。

安裝

官方指南

使用Beat做性能監(jiān)控

這里以Metricbeat為例竟块。
配置方法:編輯metricbeat.yml

# 連接Kbana
setup.kibana:
  host: "localhost:5601"
  username: "elastic"
  password:  "xxx"

# 連接ElasticSearch
output.elasticsearch:
  hosts: ["127.0.0.1:9200"]
  username: "elastic"
  password:  "xxx"

# 設置模塊
metricbeat.modules:
- module: system
  metricsets:
    - cpu
    - filesystem
    - memory
    - network
    - process
  enabled: true
  period: 10s
  processes: ['.*']
  cpu_ticks: false
- module: mongodb
  metricsets: ["status"]
  hosts: ["10.32.64.228:28102"]
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市耐齐,隨后出現(xiàn)的幾起案子浪秘,更是在濱河造成了極大的恐慌,老刑警劉巖埠况,帶你破解...
    沈念sama閱讀 211,817評論 6 492
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件耸携,死亡現(xiàn)場離奇詭異,居然都是意外死亡辕翰,警方通過查閱死者的電腦和手機夺衍,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,329評論 3 385
  • 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來喜命,“玉大人沟沙,你說我怎么就攤上這事”陂牛” “怎么了矛紫?”我有些...
    開封第一講書人閱讀 157,354評論 0 348
  • 文/不壞的土叔 我叫張陵,是天一觀的道長牌里。 經(jīng)常有香客問我颊咬,道長,這世上最難降的妖魔是什么二庵? 我笑而不...
    開封第一講書人閱讀 56,498評論 1 284
  • 正文 為了忘掉前任,我火速辦了婚禮缓呛,結(jié)果婚禮上催享,老公的妹妹穿的比我還像新娘。我一直安慰自己哟绊,他們只是感情好因妙,可當我...
    茶點故事閱讀 65,600評論 6 386
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著票髓,像睡著了一般攀涵。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上洽沟,一...
    開封第一講書人閱讀 49,829評論 1 290
  • 那天以故,我揣著相機與錄音,去河邊找鬼裆操。 笑死怒详,一個胖子當著我的面吹牛炉媒,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播昆烁,決...
    沈念sama閱讀 38,979評論 3 408
  • 文/蒼蘭香墨 我猛地睜開眼吊骤,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了静尼?” 一聲冷哼從身側(cè)響起白粉,我...
    開封第一講書人閱讀 37,722評論 0 266
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎鼠渺,沒想到半個月后鸭巴,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 44,189評論 1 303
  • 正文 獨居荒郊野嶺守林人離奇死亡系冗,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,519評論 2 327
  • 正文 我和宋清朗相戀三年奕扣,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片掌敬。...
    茶點故事閱讀 38,654評論 1 340
  • 序言:一個原本活蹦亂跳的男人離奇死亡惯豆,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出奔害,到底是詐尸還是另有隱情楷兽,我是刑警寧澤,帶...
    沈念sama閱讀 34,329評論 4 330
  • 正文 年R本政府宣布华临,位于F島的核電站芯杀,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏雅潭。R本人自食惡果不足惜揭厚,卻給世界環(huán)境...
    茶點故事閱讀 39,940評論 3 313
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望扶供。 院中可真熱鬧筛圆,春花似錦、人聲如沸椿浓。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,762評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽扳碍。三九已至提岔,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間笋敞,已是汗流浹背碱蒙。 一陣腳步聲響...
    開封第一講書人閱讀 31,993評論 1 266
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留夯巷,地道東北人振亮。 一個月前我還...
    沈念sama閱讀 46,382評論 2 360
  • 正文 我出身青樓巧还,卻偏偏與公主長得像,于是被迫代替她去往敵國和親坊秸。 傳聞我的和親對象是個殘疾皇子麸祷,可洞房花燭夜當晚...
    茶點故事閱讀 43,543評論 2 349

推薦閱讀更多精彩內(nèi)容