優(yōu)化COUNT函數(shù)的查詢在 MySQL 中最容易被誤解的話題中能夠排進(jìn)前10名刷允,我們可以在網(wǎng)上搜索去了解更多過于 COUNT 優(yōu)化的誤解信息摹察。在進(jìn)行優(yōu)化前恩掷,理解 COUNT 到底做了什么很重要。
COUNT 函數(shù)做什么用供嚎?
COUNT 是一個(gè)專用的函數(shù)黄娘,通常有兩種不同的方式:計(jì)算值和數(shù)據(jù)行旦签。值指的是非空(Non-NULL)表達(dá)式(NULL表示值缺失)。如果我們在 COUNT的參數(shù)中指定了列名或其他表達(dá)式寸宏,則 COUNT 函數(shù)是計(jì)算該表達(dá)式擁有值的次數(shù)宁炫。這讓很多人困惑,相當(dāng)一部分的原因是值和 NULL 的概念是模糊的氮凝。
另一種 COUNT 的形式是簡單地計(jì)算結(jié)果集的數(shù)據(jù)行數(shù)羔巢。這是在 MySQL 知道 COUNT 函數(shù)參數(shù)的表達(dá)式不可能為 NULL 時(shí)的計(jì)算方式。最為典型的例子是 COUNT()罩阵,你也許會以為這是展開數(shù)據(jù)表的全部列的一種替代形式竿秆。事實(shí)上,它會忽略了全部列而僅僅對數(shù)據(jù)行數(shù)進(jìn)行記數(shù)*稿壁。
一個(gè)經(jīng)常犯的錯(cuò)誤是我們在 COUNT 的參數(shù)里指定了列名然后以為是對數(shù)據(jù)行進(jìn)行計(jì)數(shù)幽钢。如果你是想獲取結(jié)果中的行數(shù),你應(yīng)該一直使用 COUNT(*)傅是,這會使得你的查詢語句意圖更明確并且可以避免性能問題匪燕。
MyISAM 的“神奇”之處
一個(gè)常見的誤解是 MyISAM 對于 COUNT 查詢來說會非常快喧笔。MyISAM 的 COUNT 查詢確實(shí)快帽驯,但這種快的場景十分有限:COUNT()查詢并且沒有 WHERE 條件時(shí)才能達(dá)到這樣的效果,而實(shí)際這種場景很少見书闸。MySQL 能夠?qū)@個(gè)語句進(jìn)行優(yōu)化的原因是存儲引擎總是知道數(shù)據(jù)表的準(zhǔn)確行數(shù)尼变。如果 MySQL 知道一個(gè)列col不可能為 NULL,它也會將 COUNT(col) 轉(zhuǎn)換為 COUNT()來進(jìn)行優(yōu)化浆劲。
MyISAM在 COUNT 查詢中有 WHERE條件嫌术、或其他對值進(jìn)行計(jì)數(shù)時(shí) 并沒有“神奇”之處。相比其他存儲引擎可能快也可能慢牌借,這取決于很多其他因素度气。
簡單的COUNT優(yōu)化
當(dāng)你想要對數(shù)據(jù)行的索引覆蓋不高的情況,又需要統(tǒng)計(jì)所有行數(shù)量時(shí)可以采用 MyISAM 引擎的 COUNT(*)來進(jìn)行優(yōu)化走哺。下面的例子使用了標(biāo)準(zhǔn)的世界數(shù)據(jù)庫去展示查找 ID 大于5的城市數(shù)量時(shí)的優(yōu)化力度蚯嫌,你寫出的SQL 語句可能如下所示:
SELECT COUNT(*) FROM world.City WHERE ID > 5;
如果使用 SHOW STATUS 檢查查詢的話會發(fā)現(xiàn)掃描了4079行。而如果是采用負(fù)向條件查詢丙躏,并且減去那些 ID 小于等于5的城市數(shù)量的話,你會發(fā)現(xiàn)可以將掃描結(jié)果減少到5行束凑。
SELECT (SELECT COUNT(*) FROM world.City) - COUNT(*) FROM world.City WHERE ID <= 5;
這個(gè)查詢會讀取更少的行是因?yàn)樵诓樵儍?yōu)化階段將查詢轉(zhuǎn)換為了常量晒旅,使用 EXPLAIN 可以看到:
id | select_type | table | rows | Extra |
---|---|---|---|---|
1 | PRIMARY | City | 6 | Using where; Using index |
2 | SUBQUERY | NULL | NULL | Select tables optimized way |
一個(gè)常見的問題是如何在一個(gè)查詢語句中完成對同一列的不同值的數(shù)量的查詢。例如汪诉,你想通過一條查詢語句查出不同顏色對應(yīng)的數(shù)量废恋。你不能使用諸如 SELECT COUNT(color = 'blue' OR color='red') FROM items
來完成查詢谈秫,因?yàn)檫@樣不會區(qū)分出不同顏色相應(yīng)的數(shù)量。而你也不能將顏色放入 WHERE 條件中鱼鼓,例如 SELECT COUNT(*) FROM items WHERE color = 'blue' AND color = 'red'
由于顏色本身是互斥的拟烫,因此可以用下面的方法解決這一問題:
SELECT SUM(IF(color = 'blue', 1, 0)) AS blue,
SUM(IF(color = 'red', 1, 0)) as red FROM items;
還有一種變通的形式是不是要 SUM,而是 COUNT迄本,只是保證了沒有值的表達(dá)式的判決表達(dá)式是 false:
SELECT COUNT(color = 'blue' OR NULL) as blue,
COUNT(color = 'red' OR NULL) as red FROM items;
使用近似值
有時(shí)候并不需要精確的數(shù)量硕淑,這個(gè)時(shí)候就可以使用近似值。在 EXPLAIN優(yōu)化器中給出的估計(jì)行數(shù)通臣问辏可以滿足這種場景置媳,此時(shí)可以使用 EXPLAIN 來替代真實(shí)的查詢。
在很多情況下公条,一個(gè)準(zhǔn)確的數(shù)量與近似值相比低效很多拇囊。一個(gè)客戶曾經(jīng)要求統(tǒng)計(jì)他們網(wǎng)站的活躍用戶數(shù)量。用戶數(shù)量被緩存并每隔30分鐘更新一次靶橱。這本身就不準(zhǔn)確寥袭,因此使用估計(jì)值是可以接受的。這個(gè)查詢使用了多個(gè) WHERE 條件去保證不會統(tǒng)計(jì)非活躍用戶或默認(rèn)用戶(擁有特殊的 ID)关霸。移除這些條件纠永,并稍微修改一下 count 操作就可以變得更高效。一個(gè)更進(jìn)一步的優(yōu)化是移除不必要的 DISTINCT 操作谒拴,從而移除掉一次 filesort 操作尝江。優(yōu)化后的查詢速度更快,且返回了幾乎準(zhǔn)確的結(jié)果英上。
更復(fù)雜的優(yōu)化
通常來說炭序,COUNT查詢很難優(yōu)化,這是因?yàn)樗ǔP枰y(tǒng)計(jì)很多行(訪問很多數(shù)據(jù))苍日,在 MySQL 中其他可選的辦法是使用覆蓋索引惭聂。如果那還不夠的話,可能需要對整個(gè)系統(tǒng)應(yīng)用架構(gòu)進(jìn)行調(diào)整了相恃。例如考慮統(tǒng)計(jì)數(shù)據(jù)表辜纲,或者使用外部的緩存系統(tǒng)(如 Memcached)。我們往往會面臨一個(gè)類似的兩難問題:快速拦耐、準(zhǔn)確和簡單——你只能從中選擇兩項(xiàng)耕腾!