group by 優(yōu)化大法

首先直接結(jié)論:

1. 如果對 group by 語句的結(jié)果沒有排序要求,要在語句后面加 order by null;

2.?盡量讓 group by 過程用上表的索引届搁,確認(rèn)方法是 explain 結(jié)果里沒有 Using

temporary 和 Using filesort;

3. 如果 group by 需要統(tǒng)計的數(shù)據(jù)量不大模燥,盡量只使用內(nèi)存臨時表;也可以通過適當(dāng)調(diào)大

tmp_table_size 參數(shù)缆镣,來避免用到磁盤臨時表搓茬;

4.?如果數(shù)據(jù)量實在太大犹赖,使用 SQL_BIG_RESULT 這個提示,來告訴優(yōu)化器直接使用排序

算法得到 group by 的結(jié)果卷仑。

group by 執(zhí)行流程:

select id%10 as m, count(*) as c from t1 group by m;?

上面sql語句的執(zhí)行流程如下:

1. 創(chuàng)建內(nèi)存臨時表峻村,表里有兩個字段 m 和 c,主鍵是 m锡凝;

2.?掃描表 t1 的索引 a粘昨,依次取出葉子節(jié)點上的 id 值,計算 id%10 的結(jié)果窜锯,記為 x张肾;

? ??如果臨時表中沒有主鍵為 x 的行,就插入一個記錄 (x,1);

? ??如果表中有主鍵為 x 的行锚扎,就將 x 這一行的 c 值加 1吞瞪;

3.?遍歷完成后,再根據(jù)字段 m 做排序驾孔,得到結(jié)果集返回給客戶端芍秆。(為什么有的個結(jié)論的目的)。

SQL 語句末尾增加 order by null翠勉,這樣就跳過了最后排序的階段妖啥,直接從臨時表中取數(shù)據(jù)返回。

參數(shù) tmp_table_size 就是控制這個內(nèi)存臨時表大小的对碌,默認(rèn)是 16M荆虱。

如果執(zhí)行中存放的數(shù)據(jù)超過內(nèi)存臨時表的上限,這個時候就會把內(nèi)存臨時表轉(zhuǎn)為磁盤臨時表。

group by 優(yōu)化方法 -- 索引

不論是使用內(nèi)存臨時表還是磁盤臨時表怀读,group by 邏輯都需要構(gòu)造一個帶唯

一索引的表酥郭,執(zhí)行代價都是比較高的。我們有什么優(yōu)化的方法呢愿吹?

group by field? ? //給field加索引

group by 優(yōu)化方法 -- 直接排序

在 group by 語句中加入 SQL_BIG_RESULT 這個提示(hint),就可以告訴優(yōu)化器:這個

語句涉及的數(shù)據(jù)量很大惜姐,請直接用磁盤臨時表犁跪。

MySQL 的優(yōu)化器一看,磁盤臨時表是 B+ 樹存儲歹袁,存儲效率不如數(shù)組來得高坷衍。所以,既

然你告訴我數(shù)據(jù)量很大条舔,那從磁盤空間考慮枫耳,還是直接用數(shù)組來存吧。

select SQL_BIG_RESULT id%100 as m, count(*) as c from t1 group by m;

這個語句的執(zhí)行沒有再使用臨時表孟抗,而是直接用了排序算法迁杨。

注意:union 跟 union all的一個性能區(qū)別是:union涉及到去重,所以凄硼,用到了臨時表铅协。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市摊沉,隨后出現(xiàn)的幾起案子狐史,更是在濱河造成了極大的恐慌,老刑警劉巖说墨,帶你破解...
    沈念sama閱讀 210,914評論 6 490
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件骏全,死亡現(xiàn)場離奇詭異,居然都是意外死亡尼斧,警方通過查閱死者的電腦和手機姜贡,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 89,935評論 2 383
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來棺棵,“玉大人鲁豪,你說我怎么就攤上這事÷赏海” “怎么了爬橡?”我有些...
    開封第一講書人閱讀 156,531評論 0 345
  • 文/不壞的土叔 我叫張陵,是天一觀的道長棒动。 經(jīng)常有香客問我糙申,道長,這世上最難降的妖魔是什么船惨? 我笑而不...
    開封第一講書人閱讀 56,309評論 1 282
  • 正文 為了忘掉前任柜裸,我火速辦了婚禮缕陕,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘疙挺。我一直安慰自己扛邑,他們只是感情好,可當(dāng)我...
    茶點故事閱讀 65,381評論 5 384
  • 文/花漫 我一把揭開白布铐然。 她就那樣靜靜地躺著蔬崩,像睡著了一般。 火紅的嫁衣襯著肌膚如雪搀暑。 梳的紋絲不亂的頭發(fā)上沥阳,一...
    開封第一講書人閱讀 49,730評論 1 289
  • 那天,我揣著相機與錄音自点,去河邊找鬼桐罕。 笑死,一個胖子當(dāng)著我的面吹牛桂敛,可吹牛的內(nèi)容都是我干的功炮。 我是一名探鬼主播,決...
    沈念sama閱讀 38,882評論 3 404
  • 文/蒼蘭香墨 我猛地睜開眼术唬,長吁一口氣:“原來是場噩夢啊……” “哼死宣!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起碴开,我...
    開封第一講書人閱讀 37,643評論 0 266
  • 序言:老撾萬榮一對情侶失蹤毅该,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后潦牛,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體眶掌,經(jīng)...
    沈念sama閱讀 44,095評論 1 303
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,448評論 2 325
  • 正文 我和宋清朗相戀三年巴碗,在試婚紗的時候發(fā)現(xiàn)自己被綠了朴爬。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 38,566評論 1 339
  • 序言:一個原本活蹦亂跳的男人離奇死亡橡淆,死狀恐怖召噩,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情逸爵,我是刑警寧澤具滴,帶...
    沈念sama閱讀 34,253評論 4 328
  • 正文 年R本政府宣布,位于F島的核電站师倔,受9級特大地震影響构韵,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 39,829評論 3 312
  • 文/蒙蒙 一疲恢、第九天 我趴在偏房一處隱蔽的房頂上張望凶朗。 院中可真熱鬧,春花似錦显拳、人聲如沸棚愤。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,715評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽宛畦。三九已至,卻和暖如春耍休,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背货矮。 一陣腳步聲響...
    開封第一講書人閱讀 31,945評論 1 264
  • 我被黑心中介騙來泰國打工羊精, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留囚玫,地道東北人喧锦。 一個月前我還...
    沈念sama閱讀 46,248評論 2 360
  • 正文 我出身青樓燃少,卻偏偏與公主長得像,于是被迫代替她去往敵國和親铃在。 傳聞我的和親對象是個殘疾皇子阵具,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 43,440評論 2 348