Elasticsearch

1.es是基于Lucene的全文搜索引擎父叙,通過(guò)倒排索引的方式實(shí)現(xiàn)海量數(shù)據(jù)的快速和近實(shí)時(shí)的搜索徙垫。倒排索引:es的搜索是基于詞的,而詞是由文檔拆分出來(lái)的蛔添,所有的文檔拆分出來(lái)的詞形成了詞典痰催,詞與文檔之間的關(guān)系就形成了倒排索引。集群模式下迎瞧,每個(gè)節(jié)點(diǎn)上存放分片和其他副本分片的夸溶,所有的文檔存放在分片和副本分片,副本分片用于做負(fù)載和數(shù)據(jù)備份

2.es選舉master:es有三種節(jié)點(diǎn):主節(jié)點(diǎn)凶硅、數(shù)據(jù)節(jié)點(diǎn)缝裁、協(xié)調(diào)節(jié)點(diǎn)。主節(jié)點(diǎn):所有索引的操作都是由主節(jié)點(diǎn)執(zhí)行的足绅。首先捷绑,屬性node.master=true的節(jié)點(diǎn)才會(huì)有機(jī)會(huì)成為master節(jié)點(diǎn),選舉期間氢妈,所有節(jié)點(diǎn)將自己一直的節(jié)點(diǎn)進(jìn)行排名打分粹污,返回排名最前的節(jié)點(diǎn)到協(xié)調(diào)節(jié)點(diǎn),協(xié)調(diào)節(jié)點(diǎn)會(huì)進(jìn)行統(tǒng)計(jì)首量,將票數(shù)最多的節(jié)點(diǎn)設(shè)置為master壮吩。另外會(huì)設(shè)置最小選舉數(shù)來(lái)防止腦裂問(wèn)題进苍,官方推薦將最小選舉數(shù)設(shè)為n/2 +1,即票數(shù)設(shè)為超過(guò)半數(shù)鸭叙,票數(shù)不夠是會(huì)重新選舉觉啊。腦裂問(wèn)題:當(dāng)選舉出來(lái)有兩個(gè)節(jié)點(diǎn)的票數(shù)一樣。

3.es索引文檔的過(guò)程:當(dāng)索引請(qǐng)求過(guò)來(lái)后递雀,會(huì)先將數(shù)據(jù)寫(xiě)到內(nèi)存中,同時(shí)會(huì)記錄一個(gè)translog蚀浆,(translog是保證數(shù)據(jù)安全的關(guān)鍵)然后會(huì)每隔1秒鐘將數(shù)據(jù)寫(xiě)到系統(tǒng)緩存中缀程,形成segment分段,此時(shí)文檔數(shù)據(jù)是可以被檢索到的市俊,當(dāng)segment過(guò)多或者translog文件過(guò)大會(huì)進(jìn)行一次持久化杨凑,持久化的過(guò)程是先將segment分段合并成一個(gè)大的segment并刪除所有小的segment分段,然后再講大的segment持久化到磁盤(pán)上摆昧,結(jié)束后會(huì)刪除segment和translog文件撩满。其中translog文件時(shí)保證數(shù)據(jù)安全的關(guān)鍵:因?yàn)楫?dāng)數(shù)據(jù)還在緩存中的時(shí)候突然斷電,就會(huì)造成數(shù)據(jù)丟失绅你,所以es會(huì)記錄translog伺帘,而且只有當(dāng)translog記錄成功后才會(huì)返回客戶(hù)端操作成功。

4.es搜索的過(guò)程:默認(rèn)會(huì)用query then fetch 策略忌锯,首先搜索請(qǐng)求會(huì)分發(fā)到各分片伪嫁,每個(gè)分片會(huì)根據(jù)自身的打分規(guī)則篩選出符合要求的文檔ID 到協(xié)調(diào)節(jié)點(diǎn),然后協(xié)調(diào)節(jié)點(diǎn)對(duì)所有分片返回的數(shù)據(jù)再次打分偶垮,并根據(jù)打分結(jié)果再次去分片中獲取文檔數(shù)據(jù)张咳,最終返回到用戶(hù)

5.刪除和修改:es不會(huì)對(duì)文檔進(jìn)行真實(shí)的物理刪除,而是在修改或刪除是將舊的文檔數(shù)據(jù)標(biāo)記問(wèn)刪除狀態(tài)似舵,在檢索過(guò)程中也是可以搜索得到的脚猾,只是在最終返回的時(shí)候過(guò)濾了刪除態(tài)的文檔數(shù)據(jù)

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市砚哗,隨后出現(xiàn)的幾起案子龙助,更是在濱河造成了極大的恐慌,老刑警劉巖蛛芥,帶你破解...
    沈念sama閱讀 217,734評(píng)論 6 505
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件泌参,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡常空,警方通過(guò)查閱死者的電腦和手機(jī)沽一,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,931評(píng)論 3 394
  • 文/潘曉璐 我一進(jìn)店門(mén),熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)漓糙,“玉大人铣缠,你說(shuō)我怎么就攤上這事。” “怎么了蝗蛙?”我有些...
    開(kāi)封第一講書(shū)人閱讀 164,133評(píng)論 0 354
  • 文/不壞的土叔 我叫張陵蝇庭,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我捡硅,道長(zhǎng)哮内,這世上最難降的妖魔是什么? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 58,532評(píng)論 1 293
  • 正文 為了忘掉前任壮韭,我火速辦了婚禮北发,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘喷屋。我一直安慰自己琳拨,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,585評(píng)論 6 392
  • 文/花漫 我一把揭開(kāi)白布屯曹。 她就那樣靜靜地躺著狱庇,像睡著了一般。 火紅的嫁衣襯著肌膚如雪恶耽。 梳的紋絲不亂的頭發(fā)上密任,一...
    開(kāi)封第一講書(shū)人閱讀 51,462評(píng)論 1 302
  • 那天,我揣著相機(jī)與錄音偷俭,去河邊找鬼批什。 笑死,一個(gè)胖子當(dāng)著我的面吹牛社搅,可吹牛的內(nèi)容都是我干的驻债。 我是一名探鬼主播,決...
    沈念sama閱讀 40,262評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼形葬,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼合呐!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起笙以,我...
    開(kāi)封第一講書(shū)人閱讀 39,153評(píng)論 0 276
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤淌实,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后猖腕,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體拆祈,經(jīng)...
    沈念sama閱讀 45,587評(píng)論 1 314
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,792評(píng)論 3 336
  • 正文 我和宋清朗相戀三年倘感,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了放坏。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 39,919評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡老玛,死狀恐怖淤年,靈堂內(nèi)的尸體忽然破棺而出钧敞,到底是詐尸還是另有隱情,我是刑警寧澤麸粮,帶...
    沈念sama閱讀 35,635評(píng)論 5 345
  • 正文 年R本政府宣布溉苛,位于F島的核電站,受9級(jí)特大地震影響弄诲,放射性物質(zhì)發(fā)生泄漏愚战。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,237評(píng)論 3 329
  • 文/蒙蒙 一齐遵、第九天 我趴在偏房一處隱蔽的房頂上張望寂玲。 院中可真熱鬧,春花似錦洛搀、人聲如沸敢茁。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 31,855評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)。三九已至伸刃,卻和暖如春谎砾,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背捧颅。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 32,983評(píng)論 1 269
  • 我被黑心中介騙來(lái)泰國(guó)打工景图, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人碉哑。 一個(gè)月前我還...
    沈念sama閱讀 48,048評(píng)論 3 370
  • 正文 我出身青樓挚币,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親扣典。 傳聞我的和親對(duì)象是個(gè)殘疾皇子妆毕,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,864評(píng)論 2 354

推薦閱讀更多精彩內(nèi)容

  • 一、Elasticsearch是什么贮尖? Elasticsearch(簡(jiǎn)稱(chēng)ES)是一個(gè)分布式笛粘、可擴(kuò)展、實(shí)時(shí)的搜索與數(shù)...
    Rick617閱讀 14,941評(píng)論 0 11
  • 簡(jiǎn)單操作可以直接使用ElasticsearchRespositor接口湿硝,復(fù)雜的使用ElasticsearchTem...
    一個(gè)彩筆程序猿閱讀 785評(píng)論 0 0
  • 前言 我們知道薪前,ElasticSearch(簡(jiǎn)稱(chēng)ES)天然支持分布式,具備存儲(chǔ)海量數(shù)據(jù)的能力关斜,其搜索和數(shù)據(jù)分析的功...
    moutory閱讀 1,047評(píng)論 2 1
  • 《本人也在學(xué)習(xí)中示括,如果有哪里不對(duì)歡迎指出》 介紹 Elasticsearch 是一個(gè)分布式可擴(kuò)展的實(shí)時(shí)搜索和分析引...
    代碼之神保佑我閱讀 1,161評(píng)論 0 0
  • 夜鶯2517閱讀 127,720評(píng)論 1 9