MySQL調(diào)優(yōu)三步曲(慢查詢郊丛、explain profile)

在做性能測(cè)試中經(jīng)常會(huì)遇到一些sql的問(wèn)題李请,其實(shí)做性能測(cè)試這幾年遇到問(wèn)題最多還是數(shù)據(jù)庫(kù)這塊,要么就是IO高要么就是cpu高厉熟,所以對(duì)數(shù)據(jù)的優(yōu)化在性能測(cè)試過(guò)程中占據(jù)著很重要的地方导盅,下面我就介紹一些msyql性能調(diào)優(yōu)過(guò)程中經(jīng)常用到的三件利器:

1、慢查詢 (分析出現(xiàn)出問(wèn)題的sql)

2揍瑟、Explain (顯示了mysql如何使用索引來(lái)處理select語(yǔ)句以及連接表白翻。可以幫助選擇更好的索引和寫(xiě)出更優(yōu)化的查詢語(yǔ)句)

3绢片、Profile(查詢到 SQL 會(huì)執(zhí)行多少時(shí)間, 并看出 CPU/Memory 使用量, 執(zhí)行過(guò)程中 Systemlock, Table lock 花多少時(shí)間等等.)

首先我們先講一講mysql的慢查詢

1滤馍,配置開(kāi)啟

Linux:

在mysql配置文件my.cnf中增加

log-slow-queries=/var/lib/mysql/slowquery.log (指定日志文件存放位置恩急,可以為空,系統(tǒng)會(huì)給一個(gè)缺省的文件host_name-slow.log)

long_query_time=2 (記錄超過(guò)的時(shí)間纪蜒,默認(rèn)為10s)

log-queries-not-using-indexes (log下來(lái)沒(méi)有使用索引的query,可以根據(jù)情況決定是否開(kāi)啟)

log-long-format (如果設(shè)置了,所有沒(méi)有使用索引的查詢也將被記錄)

Windows:

在my.ini的[mysqld]添加如下語(yǔ)句:

log-slow-queries =E:\web\mysql\log\mysqlslowquery.log

long_query_time = 2(其他參數(shù)如上)

2,查看方式

Linux:

使用mysql自帶命令mysqldumpslow查看

常用命令

-s ORDER what to sort by (t, at, l, al, r, aretc), 'at’ is default

-t NUM just show the top n queries

-g PATTERN grep: only consider stmts that includethis string

eg:

s此叠,是order的順序纯续,說(shuō)明寫(xiě)的不夠詳細(xì),俺用下來(lái)灭袁,包括看了代碼猬错,主要有 c,t,l,r和ac,at,al,ar,分別是按照query次數(shù)茸歧,時(shí)間倦炒,lock的時(shí)間和返回的記錄數(shù)來(lái)排序,前面加了a的時(shí)倒序 -t软瞎,是top n的意思逢唤,即為返回前面多少條的數(shù)據(jù) -g,后邊可以寫(xiě)一個(gè)正則匹配模式涤浇,大小寫(xiě)不敏感的

mysqldumpslow -s c -t 20 host-slow.log

mysqldumpslow -s r -t 20 host-slow.log

上述命令可以看出訪問(wèn)次數(shù)最多的20個(gè)sql語(yǔ)句和返回記錄集最多的20個(gè)sql鳖藕。

mysqldumpslow -t 10 -s t -g “l(fā)eft join” host-slow.log這個(gè)是按照時(shí)間返回前10條里面含有左連接的sql語(yǔ)句。

接下來(lái)就是explain

使用方法:

執(zhí)行EXPLAIN SELECT * FROM res_user ORDER BYmodifiedtime LIMIT 0,1000 得到如下結(jié)果:

顯示結(jié)果分析:

table |? type | possible_keys | key |key_len? | ref | rows | Extra

EXPLAIN列的解釋:

table

顯示這一行的數(shù)據(jù)是關(guān)于哪張表的

type

這是重要的列只锭,顯示連接使用了何種類型著恩。從最好到最差的連接類型為const、eq_reg蜻展、ref喉誊、range、indexhe和ALL

possible_keys

顯示可能應(yīng)用在這張表中的索引纵顾。如果為空伍茄,沒(méi)有可能的索引∑遥可以為相關(guān)的域從WHERE語(yǔ)句中選擇一個(gè)合適的語(yǔ)句

key

實(shí)際使用的索引幻林。如果為NULL,則沒(méi)有使用索引音念。很少的情況下沪饺,MYSQL會(huì)選擇優(yōu)化不足的索引。這種情況下闷愤,可以在SELECT語(yǔ)句中使用USE INDEX(indexname)來(lái)強(qiáng)制使用一個(gè)索引或者用IGNORE INDEX(indexname)來(lái)強(qiáng)制MYSQL忽略索引

key_len

使用的索引的長(zhǎng)度整葡。在不損失精確性的情況下,長(zhǎng)度越短越好

ref

顯示索引的哪一列被使用了讥脐,如果可能的話遭居,是一個(gè)常數(shù)

rows

MYSQL認(rèn)為必須檢查的用來(lái)返回請(qǐng)求數(shù)據(jù)的行數(shù)

Extra

關(guān)于MYSQL如何解析查詢的額外信息啼器。將在表4.3中討論,但這里可以看到的壞的例子是Using temporary和Using filesort俱萍,意思MYSQL根本不能使用索引端壳,結(jié)果是檢索會(huì)很慢

extra列返回的描述的意義

Distinct

一旦MYSQL找到了與行相聯(lián)合匹配的行,就不再搜索了

Not exists

MYSQL優(yōu)化了LEFT JOIN枪蘑,一旦它找到了匹配LEFT JOIN標(biāo)準(zhǔn)的行损谦,

就不再搜索了

Range checked for each

Record(index map:#)

沒(méi)有找到理想的索引,因此對(duì)于從前面表中來(lái)的每一個(gè)行組合岳颇,MYSQL檢查使用哪個(gè)索引照捡,并用它來(lái)從表中返回行。這是使用索引的最慢的連接之一

Using filesort

看到這個(gè)的時(shí)候话侧,查詢就需要優(yōu)化了栗精。MYSQL需要進(jìn)行額外的步驟來(lái)發(fā)現(xiàn)如何對(duì)返回的行排序。它根據(jù)連接類型以及存儲(chǔ)排序鍵值和匹配條件的全部行的行指針來(lái)排序全部行

Using index

列數(shù)據(jù)是從僅僅使用了索引中的信息而沒(méi)有讀取實(shí)際的行動(dòng)的表返回的瞻鹏,這發(fā)生在對(duì)表的全部的請(qǐng)求列都是同一個(gè)索引的部分的時(shí)候

Using temporary

看到這個(gè)的時(shí)候悲立,查詢需要優(yōu)化了。這里新博,MYSQL需要?jiǎng)?chuàng)建一個(gè)臨時(shí)表來(lái)存儲(chǔ)結(jié)果级历,這通常發(fā)生在對(duì)不同的列集進(jìn)行ORDER BY上,而不是GROUP BY上

Where used

使用了WHERE從句來(lái)限制哪些行將與下一張表匹配或者是返回給用戶叭披。如果不想返回表中的全部行寥殖,并且連接類型ALL或index,這就會(huì)發(fā)生涩蜘,或者是查詢有問(wèn)題

不同連接類型的解釋(按照效率高低的順序排序)

system

表只有一行:system表嚼贡。這是const連接類型的特殊情況

const

表中的一個(gè)記錄的最大值能夠匹配這個(gè)查詢(索引可以是主鍵或惟一索引)。因?yàn)橹挥幸恍型耄@個(gè)值實(shí)際就是常數(shù)粤策,因?yàn)镸YSQL先讀這個(gè)值然后把它當(dāng)做常數(shù)來(lái)對(duì)待

eq_ref

在連接中,MYSQL在查詢時(shí)误窖,從前面的表中叮盘,對(duì)每一個(gè)記錄的聯(lián)合都從表中讀取一個(gè)記錄,它在查詢使用了索引為主鍵或惟一鍵的全部時(shí)使用

ref

這個(gè)連接類型只有在查詢使用了不是惟一或主鍵的鍵或者是這些類型的部分(比如霹俺,利用最左邊前綴)時(shí)發(fā)生柔吼。對(duì)于之前的表的每一個(gè)行聯(lián)合,全部記錄都將從表中讀出丙唧。這個(gè)類型嚴(yán)重依賴于根據(jù)索引匹配的記錄多少—越少越好

range

這個(gè)連接類型使用索引返回一個(gè)范圍中的行愈魏,比如使用>或<查找東西時(shí)發(fā)生的情況

index

這個(gè)連接類型對(duì)前面的表中的每一個(gè)記錄聯(lián)合進(jìn)行完全掃描(比ALL更好,因?yàn)樗饕话阈∮诒頂?shù)據(jù))

ALL

這個(gè)連接類型對(duì)于前面的每一個(gè)記錄聯(lián)合進(jìn)行完全掃描,這一般比較糟糕培漏,應(yīng)該盡量避免

再者就是profile

我們可以先使用

mysql> SELECT @@profiling;

+-------------+

| @@profiling |

+-------------+

|??????????0 |

+-------------+

1 row in set (0.00 sec)來(lái)查看是否已經(jīng)啟用profile溪厘,如果profilng值為0,可以通過(guò)

mysql> SET profiling = 1;

Query OK, 0 rows affected (0.00 sec)

mysql> SELECT @@profiling;

+-------------+

| @@profiling |

+-------------+

|??????????1 |

+-------------+

1 row in set (0.00 sec)

來(lái)啟用牌柄。啟用profiling之后畸悬,我們執(zhí)行一條查詢語(yǔ)句,比如:

SELECT * FROM res_user ORDER BY modifiedtimeLIMIT 0,1000

mysql> show profiles;

+----------+------------+-------------------------------------------------------------+

| Query_ID | Duration?? | Query??????????????????????????????????????????????????????|

+----------+------------+-------------------------------------------------------------+

|??????? 1| 0.00012200 | SELECT @@profiling?????????????????????????????????????????|

|??????? 2| 1.54582000 | SELECT res_id FROM res_user ORDER BY modifiedtime LIMIT 0,3 |

+----------+------------+-------------------------------------------------------------+

2 rows in set (0.00 sec)注意:Query_ID表示剛執(zhí)行的查詢語(yǔ)句

mysql> show profile for query 2;

+--------------------------------+----------+

| Status???????????????????????? | Duration |

+--------------------------------+----------+

| starting?????????????????????? | 0.000013 |

| checking query cache for query | 0.000035 |

| Opening tables???????????????? | 0.000009 |

| System lock??????????????????? | 0.000002 |

| Table lock???????????????????? | 0.000015 |

| init?????????????????????????? | 0.000011 |

| optimizing????????????? ???????| 0.000003 |

| statistics???????????????????? | 0.000006 |

| preparing????????????????????? | 0.000006 |

| executing????????????????????? | 0.000001 |

| Sorting result???????????????? | 1.545565 |

| Sending data?????????????????? | 0.000038 |

| end ???????????????????????????| 0.000003 |

| query end????????????????????? | 0.000003 |

| freeing items????????????????? | 0.000069 |

| storing result in query cache? | 0.000004 |

| logging slow query???????????? | 0.000001 |

| logging slow query??????????? ?| 0.000033 |

| cleaning up??????????????????? | 0.000003 |

+--------------------------------+----------+

19 rows in set (0.00 sec)

結(jié)論:可以看出此條查詢語(yǔ)句的執(zhí)行過(guò)程及執(zhí)行時(shí)間珊佣,總的時(shí)間約為1.545s傻昙。這時(shí)候我們?cè)賵?zhí)行一次。

mysql> SELECT res_id FROM res_user ORDERBY modifiedtime LIMIT 0,3;

+---------+

| res_id?|

+---------+

| 1000305 |

| 1000322 |

| 1000323 |

+---------+

3 rows in set (0.00 sec)

mysql> show profiles;

+----------+------------+-------------------------------------------------------------+

| Query_ID | Duration?? | Query??????????????????????????????????????????????????????|

+----------+------------+-------------------------------------------------------------+

|???????1 | 0.00012200 | SELECT @@profiling????????????????????????????????????????? |

|2 | 1.54582000 | SELECT res_id FROM res_userORDER BY modifiedtime LIMIT 0,3 |

|??????? 3 | 0.00006500 | SELECT res_id FROMres_user ORDER BY modifiedtime LIMIT 0,3 |

+----------+------------+-------------------------------------------------------------+

3 rows in set (0.00 sec)

mysql> show profile for query3;

+--------------------------------+----------+

| Status???????????????????????? | Duration |

+--------------------------------+----------+

| starting?????????????????????? | 0.000013 |

| checking query cache for query | 0.000005|

| checking privileges on cached? | 0.000003 |

| sending cached result to clien | 0.000040|

| logging slow query?????? ??????| 0.000002 |

| cleaning up??????????????????? | 0.000002 |

+--------------------------------+----------+

6 rows in set (0.00 sec) (注意紅色標(biāo)記的地方)

結(jié)論:可以看出此次第二次查詢因?yàn)榍耙淮蔚牟樵兩闪薱ache彩扔,所以這次無(wú)需從數(shù)據(jù)庫(kù)文件中再次讀取數(shù)據(jù)而是直接從緩存中讀取,結(jié)果查詢時(shí)間比第一次快多了(第一次查詢用了1.5秒而本次用了不到5毫秒)僻爽。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末虫碉,一起剝皮案震驚了整個(gè)濱河市,隨后出現(xiàn)的幾起案子胸梆,更是在濱河造成了極大的恐慌敦捧,老刑警劉巖,帶你破解...
    沈念sama閱讀 222,464評(píng)論 6 517
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件碰镜,死亡現(xiàn)場(chǎng)離奇詭異兢卵,居然都是意外死亡,警方通過(guò)查閱死者的電腦和手機(jī)绪颖,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 95,033評(píng)論 3 399
  • 文/潘曉璐 我一進(jìn)店門(mén)秽荤,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái),“玉大人柠横,你說(shuō)我怎么就攤上這事窃款。” “怎么了牍氛?”我有些...
    開(kāi)封第一講書(shū)人閱讀 169,078評(píng)論 0 362
  • 文/不壞的土叔 我叫張陵晨继,是天一觀的道長(zhǎng)。 經(jīng)常有香客問(wèn)我搬俊,道長(zhǎng)紊扬,這世上最難降的妖魔是什么? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 59,979評(píng)論 1 299
  • 正文 為了忘掉前任唉擂,我火速辦了婚禮餐屎,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘玩祟。我一直安慰自己啤挎,他們只是感情好,可當(dāng)我...
    茶點(diǎn)故事閱讀 69,001評(píng)論 6 398
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著庆聘,像睡著了一般胜臊。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上伙判,一...
    開(kāi)封第一講書(shū)人閱讀 52,584評(píng)論 1 312
  • 那天象对,我揣著相機(jī)與錄音,去河邊找鬼宴抚。 笑死勒魔,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的菇曲。 我是一名探鬼主播冠绢,決...
    沈念sama閱讀 41,085評(píng)論 3 422
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼常潮!你這毒婦竟也來(lái)了弟胀?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 40,023評(píng)論 0 277
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤喊式,失蹤者是張志新(化名)和其女友劉穎孵户,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體岔留,經(jīng)...
    沈念sama閱讀 46,555評(píng)論 1 319
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡夏哭,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 38,626評(píng)論 3 342
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了献联。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片竖配。...
    茶點(diǎn)故事閱讀 40,769評(píng)論 1 353
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖里逆,靈堂內(nèi)的尸體忽然破棺而出械念,到底是詐尸還是另有隱情,我是刑警寧澤运悲,帶...
    沈念sama閱讀 36,439評(píng)論 5 351
  • 正文 年R本政府宣布龄减,位于F島的核電站,受9級(jí)特大地震影響班眯,放射性物質(zhì)發(fā)生泄漏希停。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 42,115評(píng)論 3 335
  • 文/蒙蒙 一署隘、第九天 我趴在偏房一處隱蔽的房頂上張望宠能。 院中可真熱鬧,春花似錦磁餐、人聲如沸违崇。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 32,601評(píng)論 0 25
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)羞延。三九已至渣淳,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間伴箩,已是汗流浹背入愧。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 33,702評(píng)論 1 274
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留嗤谚,地道東北人棺蛛。 一個(gè)月前我還...
    沈念sama閱讀 49,191評(píng)論 3 378
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像巩步,于是被迫代替她去往敵國(guó)和親旁赊。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 45,781評(píng)論 2 361

推薦閱讀更多精彩內(nèi)容