Elasticsearch(入門篇)——Query DSL與查詢行為

前言

ES提供了豐富多彩的查詢接口羽峰,可以滿足各種各樣的查詢要求合愈。更多內(nèi)容請參考:<a href="">ELK修煉之道</a>

</blockquote>

Query DSL結(jié)構(gòu)化查詢

  • Query DSL是一個Java開源框架用于構(gòu)建類型安全的SQL查詢語句陌选。采用API代替?zhèn)鹘y(tǒng)的拼接字符串來構(gòu)造查詢語句波附。目前Querydsl支持的平臺包括JPA,JDO,SQL,Java Collections溃论,RDF,Lucene痘昌,Hibernate Search钥勋。
  • elasticsearch提供了一整套基于JSON的查詢DSL語言來定義查詢。
  • Query DSL當作是一系列的抽象的查詢表達式樹(AST)特定查詢能夠包含其它的查詢辆苔,(如 bool ), 有些查詢能夠包含過濾器(如 constant_score), 還有的可以同時包含查詢和過濾器 (如 filtered). 都能夠從ES支持查詢集合里面選擇任意一個查詢或者是從過濾器集合里面挑選出任意一個過濾器, 這樣的話算灸,我們就可以構(gòu)造出任意復雜(maybe 非常有趣)的查詢了,是不是很靈活啊姑子。

舉個例子

GET _search
{
    "query": {
        "bool": {
            "must": [
                { "match": { "title": "Search" }},
                { "match": { "content": "Elasticsearch" }}
            ],
            "filter": [
                { "term": { "status": "published" }},
                { "range": { "publish_date": { "gte": "2015-01-01" }}}
            ]
        }
    }
}

<p style="color:red">查詢的分類 </p>

Leaf query Cluase 葉子查詢(簡單查詢)
這種查詢可以單獨使用乎婿,針對指定的字段查詢指定的值。

Compound query clauses 復雜查詢
復雜查詢可以包含葉子或者其它的復雜查詢語句街佑,用于組合成復雜的查詢語句谢翎,比如not, bool等。

**
查詢雖然包含這兩種沐旨,但是查詢的行為還與查詢的執(zhí)行環(huán)境有關森逮,不同的執(zhí)行環(huán)境,查詢操作也不一樣磁携。**
查詢的行為取決于他們所在的查詢上下文褒侧,包括Query查詢上下文和Filter查詢上下文。

查詢與過濾

  • Query查詢上下文
    在Query查詢上下文中谊迄,查詢會回答這個問題--<strong style="color:red">"這個文檔匹不匹配查詢條件闷供,它的相關性高么?"</strong>
    除了決定文檔是夠匹配统诺,針對匹配的文檔歪脏,查詢語句還會計算一個<code>_score</code>相關性分值,分數(shù)越高粮呢,匹配度越高婿失,默認返回是越靠前。這里關于分值的計算不再介紹啄寡,以后再做介紹豪硅。

  • Filter過濾器上下文
    在Filter過濾器上下文中,查詢會回答這個問題--<strong style="color:red">"這個文檔是否匹配"</strong>
    這個結(jié)果要么“不是”要么“是”挺物,不會計算分值問題懒浮,也不會關心返回的排序問題,這樣性能方面就比Query查詢高了。Filter過濾器主要用于過濾結(jié)構(gòu)化數(shù)據(jù)识藤,例如:

    • 時間戳范圍是否在2015-2016之間嵌溢?
    • status字段是否被設置成"published"?
      另外眯牧,常用的過濾器會自動緩存Elasticsearch,加速性能蹋岩。

舉個簡單的例子:

  1. title字段包含關鍵詞"search"
  2. content字段包含關鍵詞"elasticsearch"
  3. status字段存在精確詞"published"
  4. publish_date字段包含一個日期由2015年1月1日起
GET _search
{
  "query": { 
    "bool": { 
      "must": [
        { "match": { "title":   "Search"        }}, 
        { "match": { "content": "Elasticsearch" }}  
      ],
      "filter": [ 
        { "term":  { "status": "published" }}, 
        { "range": { "publish_date": { "gte": "2015-01-01" }}} 
      ]
    }
  }
}

性能差異
使用過濾語句得到的結(jié)果集———一個簡單的文檔列表赖草,快速匹配運算并存入內(nèi)存是非常方便的,每個文檔僅需1個字節(jié)剪个。這些緩存的過濾結(jié)果集與后續(xù)請求的結(jié)合使用時非常高效的秧骑。
查詢語句不僅要查找相匹配的文檔,還需要計算每個文檔的相關性扣囊,所以一般來說查詢語句要比過濾語句更耗時乎折,并且查詢結(jié)果也不可緩存。
幸虧有了倒排索引侵歇,一個只匹配少量文檔的簡單查詢語句在百萬級文檔中的查詢效率會與一條經(jīng)過緩存的過濾語句旗鼓相當骂澄,甚至略占上風。但是一般情況下惕虑,一條經(jīng)過緩存的過濾查詢要遠勝一條查詢語句的執(zhí)行效率坟冲。

總結(jié)

  1. Query查詢上下文中,查詢操作會根據(jù)查詢的結(jié)果進行相關性分值計算溃蔫,用于確定相關性健提。分值越高,返回的結(jié)果越靠前伟叛。
  2. Filter過濾器上下文中私痹,查詢不會計算相關性分值,也不會對結(jié)果進行排序统刮。
  3. 過濾器上下文中紊遵,查詢的結(jié)果可以被緩存。
  4. <code style="color:red">以后博客中提到的查詢就是在Query查詢上下文侥蒙,過濾就是指filter過濾器上下文暗膜。</code>
  5. 原則上來說,使用查詢語句做全文本搜索或其他需要進行相關性評分的時候辉哥,剩下的全部用過濾語句

參考

https://www.elastic.co/guide/en/elasticsearch/reference/current/query-filter-context.html

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末桦山,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子醋旦,更是在濱河造成了極大的恐慌恒水,老刑警劉巖,帶你破解...
    沈念sama閱讀 206,126評論 6 481
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件饲齐,死亡現(xiàn)場離奇詭異钉凌,居然都是意外死亡,警方通過查閱死者的電腦和手機捂人,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,254評論 2 382
  • 文/潘曉璐 我一進店門御雕,熙熙樓的掌柜王于貴愁眉苦臉地迎上來矢沿,“玉大人,你說我怎么就攤上這事酸纲〉肪ǎ” “怎么了?”我有些...
    開封第一講書人閱讀 152,445評論 0 341
  • 文/不壞的土叔 我叫張陵闽坡,是天一觀的道長栽惶。 經(jīng)常有香客問我,道長疾嗅,這世上最難降的妖魔是什么外厂? 我笑而不...
    開封第一講書人閱讀 55,185評論 1 278
  • 正文 為了忘掉前任,我火速辦了婚禮代承,結(jié)果婚禮上汁蝶,老公的妹妹穿的比我還像新娘。我一直安慰自己论悴,他們只是感情好掖棉,可當我...
    茶點故事閱讀 64,178評論 5 371
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著意荤,像睡著了一般啊片。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上玖像,一...
    開封第一講書人閱讀 48,970評論 1 284
  • 那天紫谷,我揣著相機與錄音,去河邊找鬼捐寥。 笑死笤昨,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的握恳。 我是一名探鬼主播瞒窒,決...
    沈念sama閱讀 38,276評論 3 399
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼乡洼!你這毒婦竟也來了崇裁?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 36,927評論 0 259
  • 序言:老撾萬榮一對情侶失蹤束昵,失蹤者是張志新(化名)和其女友劉穎拔稳,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體锹雏,經(jīng)...
    沈念sama閱讀 43,400評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡巴比,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 35,883評論 2 323
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片轻绞。...
    茶點故事閱讀 37,997評論 1 333
  • 序言:一個原本活蹦亂跳的男人離奇死亡采记,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出政勃,到底是詐尸還是另有隱情唧龄,我是刑警寧澤,帶...
    沈念sama閱讀 33,646評論 4 322
  • 正文 年R本政府宣布稼病,位于F島的核電站选侨,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏然走。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 39,213評論 3 307
  • 文/蒙蒙 一戏挡、第九天 我趴在偏房一處隱蔽的房頂上張望芍瑞。 院中可真熱鬧,春花似錦褐墅、人聲如沸拆檬。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,204評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽竟贯。三九已至,卻和暖如春逝钥,著一層夾襖步出監(jiān)牢的瞬間屑那,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,423評論 1 260
  • 我被黑心中介騙來泰國打工艘款, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留持际,地道東北人。 一個月前我還...
    沈念sama閱讀 45,423評論 2 352
  • 正文 我出身青樓哗咆,卻偏偏與公主長得像蜘欲,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子晌柬,可洞房花燭夜當晚...
    茶點故事閱讀 42,722評論 2 345

推薦閱讀更多精彩內(nèi)容

  • Solr&ElasticSearch原理及應用 一姥份、綜述 搜索 http://baike.baidu.com/it...
    樓外樓V閱讀 7,254評論 1 17
  • ElasticSearch是一個高度可擴展的開源搜索引擎并使用REST API,所以您值得擁有年碘。 在本教程中澈歉,將介...
    易百教程閱讀 1,849評論 0 15
  • Neil Zhu,簡書ID Not_GOD盛泡,University AI 創(chuàng)始人 & Chief Scientist...
    朱小虎XiaohuZhu閱讀 13,207評論 0 5
  • 我喜歡你 像風走了八百里 不問歸期 我喜歡你 愿意把所有的小心翼翼都留給你 我喜歡你 單純的喜歡你
    請你喝咖啡閱讀 131評論 0 1
  • 網(wǎng)頁排版中闷祥,輪播圖可以說很常見,輪播圖種類有好幾種,今天分享一下呼吸輪播圖的制作過程凯砍。 效果展示 轉(zhuǎn)到動畫 制作過...
    wish1994閱讀 671評論 0 1