elasticsearch 性能調(diào)優(yōu)(三)

1受扳、內(nèi)存優(yōu)化

在bin/elasticsearch.in.sh中進行配置

修改配置項為盡量大的內(nèi)存:

ES_MIN_MEM=8g

ES_MAX_MEM=8g

兩者最好改成一樣的兔跌,否則容易引發(fā)長時間GC(stop-the-world)

elasticsearch默認使用的GC是CMS GC

如果你的內(nèi)存大小超過6G坟桅,CMS是不給力的,容易出現(xiàn)stop-the-world

建議使用G1 GC

注釋掉:

JAVA_OPTS=”$JAVA_OPTS -XX:+UseParNewGC”

JAVA_OPTS=”$JAVA_OPTS -XX:+UseConcMarkSweepGC”

JAVA_OPTS=”$JAVA_OPTS -XX:CMSInitiatingOccupancyFraction=75″

JAVA_OPTS=”$JAVA_OPTS -XX:+UseCMSInitiatingOccupancyOnly”

修改為:

JAVA_OPTS=”$JAVA_OPTS -XX:+UseG1GC”

JAVA_OPTS=”$JAVA_OPTS -XX:MaxGCPauseMillis=200″

如果G1 GC優(yōu)點是減少stop-the-world在幾率赖舟,但是CPU占有率高宾抓。

需要更優(yōu)化的性能豫喧,你可以參考

http://www.oracle.com/webfolder/technetwork/tutorials/obe/java/G1GettingStarted/index.html

2紧显、合理配置主節(jié)點和數(shù)據(jù)節(jié)點

配置文件:conf/elasticsearch.yaml

node.master: true

node.data: true

1) 當master為false,而data為true時孵班,會對該節(jié)點產(chǎn)生嚴重負荷重父;

2) 當master為true,而data為false時,該節(jié)點作為一個協(xié)調(diào)者郭厌;

3) 當master為false,data也為false時折柠,該節(jié)點就變成了一個負載均衡器。

1前塔、節(jié)點職責單一华弓,各司其職

elasticSearch的配置文件中有2個參數(shù):node.master和node.data寂屏。這兩個參 數(shù)搭配使用時,能夠幫助提供服務(wù)器性能迁霎。


該node服務(wù)器只作為一個數(shù)據(jù)節(jié)點考廉,只用于存儲索引數(shù)據(jù)携御。使該node服務(wù)器功能 單一因痛,只用于數(shù)據(jù)存儲和數(shù)據(jù)查詢,降低其資源消耗率鸵膏。


該node服務(wù)器只作為一個主節(jié)點谭企,但不存儲任何索引數(shù)據(jù)。該node服務(wù)器將使用 自身空閑的資源非区,來協(xié)調(diào)各種創(chuàng)建索引請求或者查詢請求盹廷,講這些請求合理分發(fā)到相關(guān) 的node服務(wù)器上。


該node服務(wù)器即不會被選作主節(jié)點淆衷,也不會存儲任何索引數(shù)據(jù)祝拯。該服務(wù)器主要用 于查詢負載均衡她肯。在查詢的時候佳头,通常會涉及到從多個node服務(wù)器上查詢數(shù)據(jù),并請 求分發(fā)到多個指定的node服務(wù)器晴氨,并對各個node服務(wù)器返回的結(jié)果進行一個匯總處理康嘉, 最終返回給客戶端。

2瑞筐、關(guān)閉data節(jié)點服務(wù)器中的http功能

針對ElasticSearch集群中的所有數(shù)據(jù)節(jié)點凄鼻,不用開啟http服務(wù)。將其中的配置 參數(shù)這樣設(shè)置:http.enabled: false聚假,同時也不要安裝head, bigdesk, marvel等監(jiān)控 插件块蚌,這樣保證data節(jié)點服務(wù)器只需處理創(chuàng)建/更新/刪除/查詢索引數(shù)據(jù)等操作。

http功能可以在非數(shù)據(jù)節(jié)點服務(wù)器上開啟膘格,上述相關(guān)的監(jiān)控插件也安裝到這些服 務(wù)器上峭范,用于監(jiān)控ElasticSearch集群狀態(tài)等數(shù)據(jù)信息。

這樣做一來出于數(shù)據(jù)安全考慮瘪贱,二來出于服務(wù)性能考慮纱控。

3、一臺服務(wù)器上最好只部署一個Node

一臺物理服務(wù)器上可以啟動多個Node服務(wù)器節(jié)點(通過設(shè)置不同的啟動port),但一臺服務(wù)器上的CPU,內(nèi)存尔店,硬盤等資源畢竟有限,從服務(wù)器性能考慮该肴,不建議一臺服務(wù)器上啟動多個node節(jié)點匀哄。


3底扳、設(shè)置合理的刷新時間

建立的索引鹊汛,不會立馬查到,這是為什么elasticsearch為near-real-time的原因

需要配置index.refresh_interval參數(shù)至耻,默認是1s。

你可以像

http://zhaoyanblog.com/archives/299.html

文件中一樣疤苹,調(diào)用接口配置

也可以直接寫到conf/elasticsearch.yaml文件中

index.refresh_interval:1s

這樣所有新建的索引都使用這個刷新頻率。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末生棍,一起剝皮案震驚了整個濱河市捷绑,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌壮吩,老刑警劉巖觉啊,帶你破解...
    沈念sama閱讀 217,734評論 6 505
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件宋下,死亡現(xiàn)場離奇詭異罩引,居然都是意外死亡袁铐,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,931評論 3 394
  • 文/潘曉璐 我一進店門张咳,熙熙樓的掌柜王于貴愁眉苦臉地迎上來葱峡,“玉大人,你說我怎么就攤上這事军援。” “怎么了庐船?”我有些...
    開封第一講書人閱讀 164,133評論 0 354
  • 文/不壞的土叔 我叫張陵篓冲,是天一觀的道長纹因。 經(jīng)常有香客問我狱庇,道長,這世上最難降的妖魔是什么浪讳? 我笑而不...
    開封第一講書人閱讀 58,532評論 1 293
  • 正文 為了忘掉前任负溪,我火速辦了婚禮辐真,結(jié)果婚禮上密幔,老公的妹妹穿的比我還像新娘钧敞。我一直安慰自己弄诲,他們只是感情好,可當我...
    茶點故事閱讀 67,585評論 6 392
  • 文/花漫 我一把揭開白布断序。 她就那樣靜靜地躺著疮蹦,像睡著了一般。 火紅的嫁衣襯著肌膚如雪慎玖。 梳的紋絲不亂的頭發(fā)上润努,一...
    開封第一講書人閱讀 51,462評論 1 302
  • 那天丁稀,我揣著相機與錄音惑折,去河邊找鬼。 笑死,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的百匆。 我是一名探鬼主播雕拼,決...
    沈念sama閱讀 40,262評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了淌友?” 一聲冷哼從身側(cè)響起归薛,我...
    開封第一講書人閱讀 39,153評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,587評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡担神,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,792評論 3 336
  • 正文 我和宋清朗相戀三年忧吟,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 39,919評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡组民,死狀恐怖耸三,靈堂內(nèi)的尸體忽然破棺而出睛驳,到底是詐尸還是另有隱情爪瓜,我是刑警寧澤薄货,帶...
    沈念sama閱讀 35,635評論 5 345
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 41,237評論 3 329
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,855評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽冬筒。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 32,983評論 1 269
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人莺掠。 一個月前我還...
    沈念sama閱讀 48,048評論 3 370
  • 正文 我出身青樓扎附,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當晚...
    茶點故事閱讀 44,864評論 2 354