elasticsearch之a(chǎn)ggs

聚合

聚合表示的是對(duì)某個(gè)索引(index)下的所有文檔進(jìn)行一些統(tǒng)計(jì)之類的操作掷伙,如下圖1所示蹬叭,將左邊索引中的文檔按照作者姓名進(jìn)行分組行疏,姓名相同的在一個(gè)組里弱匪,就可以分為下圖右邊的兩個(gè)組柠逞,從中我們就可以得出名為allen的作者共寫了兩篇文章昧狮,名為smith的作者共寫了三篇文章。在ES中板壮,提供了豐富的語(yǔ)法逗鸣,來(lái)進(jìn)行對(duì)文檔的統(tǒng)計(jì)操作,如對(duì)所有文檔按照ip地址范圍進(jìn)行分組绰精,對(duì)所有文檔按照經(jīng)緯度范圍進(jìn)行分組撒璧,對(duì)距離進(jìn)行分組(如圖2)等等。

在ES的語(yǔ)法中笨使,分組稱之為桶聚合(bucket)卿樱,對(duì)桶內(nèi)的文檔進(jìn)行一些數(shù)值計(jì)算,如求和硫椰,求最大等稱之為指標(biāo)聚合(metric)繁调,還有一些其他聚合如pipeline,matric靶草,在此僅介紹下桶聚合和指標(biāo)聚合蹄胰。

圖1.jpg
圖2.jpg

桶聚合和指標(biāo)聚合

根據(jù)上面我們桶聚合就是對(duì)所有文檔按照某些規(guī)則進(jìn)行分組,然后文檔滿足這些規(guī)則放入一個(gè)桶奕翔,不滿足有放入另外一個(gè)桶裕寨。而指標(biāo)集合指的是對(duì)文檔集中的某一個(gè)字段進(jìn)行數(shù)值上的操作,如求和糠悯,求最大最下等帮坚。

ES聚合語(yǔ)法模板(圖3)

  1. 寫關(guān)鍵字aggs
  2. 寫聚合的名字
  3. 寫聚合的類型(桶聚合和指標(biāo)聚合)妻往,及在類型里寫相應(yīng)的邏輯

常見(jiàn)桶聚合類型

類型 說(shuō)明
filter 篩選滿足字段條件的文檔
terms 對(duì)文檔集按照某一字段的不同取值進(jìn)行分組
range 對(duì)文檔集按照某一字段的取值范圍進(jìn)行分組

注:terms中不能對(duì)text 類型進(jìn)行操作

常見(jiàn)指標(biāo)聚合類型

類型 說(shuō)明
avg 對(duì)文檔集中指定字段的值求平均值
max 對(duì)文檔集中指定字段的值求最大值
min 對(duì)文檔集中指定字段的值求最小值
sum 對(duì)文檔集中指定字段的值求和
stats 對(duì)文檔集中指定字段的值求統(tǒng)計(jì)信息,最大试和,最小讯泣,平均等
3.jpg

例子

以kibana_sample_data_ecommerce樣本數(shù)據(jù)為例子

  1. 查詢所有類別為男裝的總稅費(fèi)價(jià)格
GET /kibana_sample_data_ecommerce/_search?
{
  "size":0,
  "aggs": {
    "filter_category": {
      "filter": {
        "term":{
          "category.keyword":"Men's Clothing"
        }
      },
      "aggs":{
        "sum_tax":{
          "sum":{
            "field":"taxful_total_price"
          }
        }
      }
    }
  }
}
# -----------------------------------------------------------------------
  "aggregations" : {
    "filter_category" : {
      "doc_count" : 2024,
      "sum_tax" : {
        "value" : 149393.91015625
      }
    }
  }
  1. 查詢所有交易的平均稅費(fèi)還有不同類別下不同制造的平均稅費(fèi)
GET /kibana_sample_data_ecommerce/_search?size=0
{
  "aggs": {
    "all_sum_tax":{
      "sum":{
        "field":"taxful_total_price"
      }
    },
    "term_category": {
      "terms": {
        "field":"category.keyword"
      },
      "aggs":{
        "manufactur":{
          "terms":{
            "field":"manufacturer.keyword"
          },
          "aggs":{
            "avg_tax":{
              "avg":{
                "field":"taxful_total_price"
              }
            }
          }
        }
      }
    }
  }
}
# ------------------------------------------------------------------------------
{
"all_sum_tax" : {
      "value" : 350884.12890625
    }
      "buckets" : [
        {
          "key" : "Men's Clothing",
          "doc_count" : 2024,
          "manufactur" : {
            "doc_count_error_upper_bound" : 0,
            "sum_other_doc_count" : 0,
            "buckets" : [
              {
                "key" : "Elitelligence",
                "doc_count" : 1242,
                "avg_tax" : {
                  "value" : 67.25540333132045
                }
              },
              {
                "key" : "Low Tide Media",
                "doc_count" : 1125,
                "avg_tax" : {
                  "value" : 79.21282638888889
                }
              },
              {
                "key" : "Oceanavigations",
                "doc_count" : 600,
                "avg_tax" : {
                  "value" : 91.83341145833333
                }
              },
              {
                "key" : "Microlutions",
                "doc_count" : 308,
                "avg_tax" : {
                  "value" : 70.6087789163961
                }
              },
              ...
        }
      {....},
        ...,
      {....}]

參考

https://www.elastic.co/guide/en/elasticsearch/reference/current/search-aggregations-bucket-filters-aggregation.html

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個(gè)濱河市阅悍,隨后出現(xiàn)的幾起案子好渠,更是在濱河造成了極大的恐慌,老刑警劉巖节视,帶你破解...
    沈念sama閱讀 211,042評(píng)論 6 490
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件拳锚,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡寻行,警方通過(guò)查閱死者的電腦和手機(jī)霍掺,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 89,996評(píng)論 2 384
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)拌蜘,“玉大人杆烁,你說(shuō)我怎么就攤上這事〖蛭裕” “怎么了兔魂?”我有些...
    開(kāi)封第一講書(shū)人閱讀 156,674評(píng)論 0 345
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)举娩。 經(jīng)常有香客問(wèn)我析校,道長(zhǎng),這世上最難降的妖魔是什么铜涉? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 56,340評(píng)論 1 283
  • 正文 為了忘掉前任智玻,我火速辦了婚禮,結(jié)果婚禮上骄噪,老公的妹妹穿的比我還像新娘尚困。我一直安慰自己,他們只是感情好链蕊,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,404評(píng)論 5 384
  • 文/花漫 我一把揭開(kāi)白布事甜。 她就那樣靜靜地躺著,像睡著了一般滔韵。 火紅的嫁衣襯著肌膚如雪逻谦。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書(shū)人閱讀 49,749評(píng)論 1 289
  • 那天陪蜻,我揣著相機(jī)與錄音邦马,去河邊找鬼。 笑死,一個(gè)胖子當(dāng)著我的面吹牛滋将,可吹牛的內(nèi)容都是我干的邻悬。 我是一名探鬼主播,決...
    沈念sama閱讀 38,902評(píng)論 3 405
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼随闽,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼父丰!你這毒婦竟也來(lái)了?” 一聲冷哼從身側(cè)響起掘宪,我...
    開(kāi)封第一講書(shū)人閱讀 37,662評(píng)論 0 266
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤蛾扇,失蹤者是張志新(化名)和其女友劉穎,沒(méi)想到半個(gè)月后魏滚,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體镀首,經(jīng)...
    沈念sama閱讀 44,110評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,451評(píng)論 2 325
  • 正文 我和宋清朗相戀三年鼠次,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了更哄。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 38,577評(píng)論 1 340
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡须眷,死狀恐怖竖瘾,靈堂內(nèi)的尸體忽然破棺而出沟突,到底是詐尸還是另有隱情花颗,我是刑警寧澤,帶...
    沈念sama閱讀 34,258評(píng)論 4 328
  • 正文 年R本政府宣布惠拭,位于F島的核電站扩劝,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏职辅。R本人自食惡果不足惜棒呛,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,848評(píng)論 3 312
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望域携。 院中可真熱鬧簇秒,春花似錦、人聲如沸秀鞭。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 30,726評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)锋边。三九已至皱坛,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間豆巨,已是汗流浹背剩辟。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 31,952評(píng)論 1 264
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留,地道東北人贩猎。 一個(gè)月前我還...
    沈念sama閱讀 46,271評(píng)論 2 360
  • 正文 我出身青樓熊户,卻偏偏與公主長(zhǎng)得像,于是被迫代替她去往敵國(guó)和親吭服。 傳聞我的和親對(duì)象是個(gè)殘疾皇子敏弃,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,452評(píng)論 2 348