ElasticSearch 索引創(chuàng)建與規(guī)范

索引概念

ES中的索引(index)定義了文檔的邏輯存儲(chǔ)和字段類型已脓,索引是一種虛擬空間乏奥,類似于數(shù)據(jù)庫中的表。一個(gè)索引可以包含不同的數(shù)據(jù)結(jié)構(gòu)的數(shù)據(jù),且由一到多個(gè)分片組成媳瞪。主要相關(guān)概念如下:
索引(index): 存儲(chǔ)文檔歸類的邏輯空間,由多個(gè)分片組成句葵,相當(dāng)于數(shù)據(jù)庫中的表。
分片(shard): 相當(dāng)于Lucene中的索引文件乍丈,適當(dāng)增加分片數(shù)可以提升索引性能。
段(segment): 一個(gè)shard有多個(gè)段忆矛,一個(gè)段是Lucene中存儲(chǔ)數(shù)據(jù)最小單位请垛,一個(gè)段對(duì)應(yīng)Lucene中的一個(gè)倒排索引。
文檔(document): 一條ES記錄宗收,相當(dāng)于數(shù)據(jù)庫中的行。
副本(replicas): 也叫備份采驻。設(shè)置副本后匈勋,在索引的時(shí)候,會(huì)寫入主分片颓影,并同步到副本分片。有了副本分片可以提升檢索效率碎浇,和保障數(shù)據(jù)高可用。

創(chuàng)建方式

動(dòng)態(tài)創(chuàng)建

定義:索引不用提前創(chuàng)建奴璃,插入的第一條(批)數(shù)據(jù)后城豁,完成創(chuàng)建
場景:非業(yè)務(wù)邏輯場景,對(duì)數(shù)據(jù)結(jié)構(gòu)定義要求不高的場景
備注:使用動(dòng)態(tài)創(chuàng)建雳旅,es會(huì)根據(jù)第一條數(shù)據(jù)來對(duì)字段進(jìn)行動(dòng)態(tài)結(jié)構(gòu)映射间聊,如果對(duì)字段數(shù)據(jù)結(jié)構(gòu)要求較高的,需要提前定義好類型哎榴。動(dòng)態(tài)創(chuàng)建僵蛛,索引的分片數(shù)默認(rèn)為1(7.x)迎变,副本數(shù)為1
舉例:

靜態(tài)創(chuàng)建

定義:提前創(chuàng)建好索引,可以指定索引的分片數(shù)衣形,副本數(shù),字段數(shù)據(jù)結(jié)構(gòu)等信息泪电。
場景:業(yè)務(wù)系統(tǒng)數(shù)據(jù)需要嚴(yán)格定義好結(jié)構(gòu)纪铺,海量時(shí)序性索引可以提前創(chuàng)建索引,避免集中寫入創(chuàng)建鲜锚,影響集群性能
備注:靜態(tài)創(chuàng)建沒有動(dòng)態(tài)創(chuàng)建靈活,但是可以做很多限制和參數(shù)調(diào)整芜繁,適用性高。通常會(huì)根據(jù)常用的時(shí)序性索引創(chuàng)建template蔬捷,輔助創(chuàng)建索引。
舉例:

注:索引一旦創(chuàng)建周拐,無論以什么方式創(chuàng)建凰兑,都無法更改已經(jīng)生成的數(shù)據(jù)結(jié)構(gòu)mapping。

元數(shù)據(jù)

_index: 代表當(dāng)前的索引名(唯一標(biāo)識(shí)索引的數(shù)據(jù))

_type:代表數(shù)據(jù)的type類型吏够,7.x后默認(rèn)_doc

_id: 索引字段的唯一id锅知,可以自定義播急,但是不能重復(fù)

_version:文檔的版本號(hào)喉镰,如果進(jìn)行更新等操作,會(huì)增加版本數(shù)

_seqno:嚴(yán)格遞增的順序號(hào)生真。保證后寫入的Doc的seqno比之前的大捺宗。

_primary_term: 代表主分片上數(shù)據(jù)重新分配的次數(shù)。比如重啟節(jié)點(diǎn)蚜厉,重新分配都會(huì)觸發(fā)這個(gè)參數(shù)累加。

_routing: 路由規(guī)則术瓮,寫入和查詢要保證路由是一致贰健。

設(shè)計(jì)規(guī)范

分片數(shù)量

索引分片數(shù)量不超過節(jié)點(diǎn)數(shù)量
1個(gè)索引40個(gè)分片等同于40個(gè)1分片索引

副本數(shù)量

索引副本數(shù)量少于節(jié)點(diǎn)數(shù)量
副本數(shù)量取決于集群節(jié)點(diǎn)數(shù),最少一個(gè)(保證高可用)

分片容量

數(shù)據(jù)容量

單個(gè)分片數(shù)據(jù)量 不要超過50GB辜伟,推薦在20-40GB中

數(shù)據(jù)條數(shù)

單分片限制最大條數(shù)不超過2^32 - 1

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末脊另,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子旱捧,更是在濱河造成了極大的恐慌,老刑警劉巖枚赡,帶你破解...
    沈念sama閱讀 217,084評(píng)論 6 503
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件靖榕,死亡現(xiàn)場離奇詭異,居然都是意外死亡料皇,警方通過查閱死者的電腦和手機(jī)星压,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 92,623評(píng)論 3 392
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來逊脯,“玉大人竣贪,你說我怎么就攤上這事巩螃∝罢” “怎么了避乏?”我有些...
    開封第一講書人閱讀 163,450評(píng)論 0 353
  • 文/不壞的土叔 我叫張陵拍皮,是天一觀的道長跑杭。 經(jīng)常有香客問我,道長德谅,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,322評(píng)論 1 293
  • 正文 為了忘掉前任宅荤,我火速辦了婚禮浸策,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘庸汗。我一直安慰自己,他們只是感情好改化,可當(dāng)我...
    茶點(diǎn)故事閱讀 67,370評(píng)論 6 390
  • 文/花漫 我一把揭開白布枉昏。 她就那樣靜靜地躺著,像睡著了一般句旱。 火紅的嫁衣襯著肌膚如雪晰奖。 梳的紋絲不亂的頭發(fā)上匾南,一...
    開封第一講書人閱讀 51,274評(píng)論 1 300
  • 那天,我揣著相機(jī)與錄音溯乒,去河邊找鬼夹厌。 笑死橙数,一個(gè)胖子當(dāng)著我的面吹牛帅戒,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播钟哥,決...
    沈念sama閱讀 40,126評(píng)論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼瞎访,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了播演?” 一聲冷哼從身側(cè)響起伴奥,我...
    開封第一講書人閱讀 38,980評(píng)論 0 275
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎拾徙,沒想到半個(gè)月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體暂衡,經(jīng)...
    沈念sama閱讀 45,414評(píng)論 1 313
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡崖瞭,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 37,599評(píng)論 3 334
  • 正文 我和宋清朗相戀三年书聚,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了唧领。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片寺惫。...
    茶點(diǎn)故事閱讀 39,773評(píng)論 1 348
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡西雀,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出艇肴,到底是詐尸還是另有隱情叁温,我是刑警寧澤核畴,帶...
    沈念sama閱讀 35,470評(píng)論 5 344
  • 正文 年R本政府宣布,位于F島的核電站跟束,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏冀宴。R本人自食惡果不足惜温学,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 41,080評(píng)論 3 327
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望逃延。 院中可真熱鬧,春花似錦揽祥、人聲如沸紧帕。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,713評(píng)論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至站绪,卻和暖如春丽柿,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背甫题。 一陣腳步聲響...
    開封第一講書人閱讀 32,852評(píng)論 1 269
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留敏沉,地道東北人。 一個(gè)月前我還...
    沈念sama閱讀 47,865評(píng)論 2 370
  • 正文 我出身青樓秋泳,卻偏偏與公主長得像,于是被迫代替她去往敵國和親迫皱。 傳聞我的和親對(duì)象是個(gè)殘疾皇子辖众,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 44,689評(píng)論 2 354

推薦閱讀更多精彩內(nèi)容