高效的MySQL分頁

首先看一下分頁的基本原理:

mysql> explain SELECT * FROM message ORDER BY id DESC LIMIT 10000, 20\G

***************** 1. row **************

id: 1

select_type: SIMPLE

table: message

type: index

possible_keys: NULL

key: PRIMARY

key_len: 4

ref: NULL

rows: 10020

Extra:

1 row in set (0.00 sec)

limit 10000,20的意思掃描滿足條件的10020行廉邑,扔掉前面的10000行,返回最后的20行淮悼,問題就在這里,如果是limit 100000,100颅痊,需要掃描100100行横侦,在一個高并發(fā)的應(yīng)用里顷锰,每次查詢需要掃描超過10W行柬赐,性能肯定大打折扣。文中還提到limit n性能是沒問題的官紫,因為只掃描n行肛宋。

文中提到一種”clue”的做法,給翻頁提供一些”線索”束世,比如還是SELECT * FROM message ORDER BY id DESC酝陈,按id降序分頁,每頁20條毁涉,當前是第10頁沉帮,當前頁條目id最大的是9527,最小的是9500贫堰,如果我們只提供”上一頁”穆壕、”下一頁”這樣 的跳轉(zhuǎn)(不提供到第N頁的跳轉(zhuǎn)),那么在處理”上一頁”的時候SQL語句可以是:

SELECT * FROM message WHERE id > 9527 ORDER BY id?ASC?LIMIT 20;

處理”下一頁”的時候SQL語句可以是:

SELECT * FROM message WHERE id < 9500 ORDER BY id?DESC?LIMIT 20;

不管翻多少頁其屏,每次查詢只掃描20行喇勋。

缺點是只能提供”上一頁”、”下一頁”的鏈接形式漫玄,但是我們的產(chǎn)品經(jīng)理非常喜歡”<上一頁 1 2 3 4?5?6 7 8 9 下一頁>”這樣的鏈接方式茄蚯,怎么辦呢?

如果LIMIT m,n不可避免的話睦优,要優(yōu)化效率,只有盡可能的讓m小一下壮不,我們擴展前面的”clue”做法汗盘,還是SELECT * FROM message ORDER BY id DESC跃惫,按id降序分頁磁浇,每頁20條,當前是第10頁肚菠,當前頁條目id最大的是9527健蕊,最小的是9500菱阵,比如要跳到第8頁,我看的SQL語句可以這 樣寫:

SELECT * FROM message WHERE id > 9527 ORDER BY id?ASC?LIMIT 20,20;

跳轉(zhuǎn)到第13頁:

SELECT * FROM message WHERE id < 9500 ORDER BY id?DESC?LIMIT 40,20;

原理還是一樣缩功,記錄住當前頁id的最大值和最小值晴及,計算跳轉(zhuǎn)頁面和當前頁相對偏移,由于頁面相近嫡锌,這個偏移量不會很大虑稼,這樣的話m值相對較小琳钉,大大 減少掃描的行數(shù)。其實傳統(tǒng)的limit m,n蛛倦,相對的偏移一直是第一頁歌懒,這樣的話越翻到后面,效率越差溯壶,而上面給出的方法就沒有這樣的問題及皂。

注意SQL語句里面的ASC和DESC,如果是ASC取出來的結(jié)果且改,顯示的時候記得倒置一下躲庄。

已在60W數(shù)據(jù)總量的表中測試,效果非常明顯钾虐。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末噪窘,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子效扫,更是在濱河造成了極大的恐慌倔监,老刑警劉巖,帶你破解...
    沈念sama閱讀 221,548評論 6 515
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件菌仁,死亡現(xiàn)場離奇詭異浩习,居然都是意外死亡,警方通過查閱死者的電腦和手機济丘,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 94,497評論 3 399
  • 文/潘曉璐 我一進店門谱秽,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人摹迷,你說我怎么就攤上這事疟赊。” “怎么了峡碉?”我有些...
    開封第一講書人閱讀 167,990評論 0 360
  • 文/不壞的土叔 我叫張陵近哟,是天一觀的道長。 經(jīng)常有香客問我鲫寄,道長吉执,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 59,618評論 1 296
  • 正文 為了忘掉前任地来,我火速辦了婚禮戳玫,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘未斑。我一直安慰自己咕宿,他們只是感情好,可當我...
    茶點故事閱讀 68,618評論 6 397
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著荠列,像睡著了一般类浪。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上肌似,一...
    開封第一講書人閱讀 52,246評論 1 308
  • 那天费就,我揣著相機與錄音,去河邊找鬼川队。 笑死力细,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的固额。 我是一名探鬼主播眠蚂,決...
    沈念sama閱讀 40,819評論 3 421
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼斗躏!你這毒婦竟也來了逝慧?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,725評論 0 276
  • 序言:老撾萬榮一對情侶失蹤啄糙,失蹤者是張志新(化名)和其女友劉穎笛臣,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體隧饼,經(jīng)...
    沈念sama閱讀 46,268評論 1 320
  • 正文 獨居荒郊野嶺守林人離奇死亡沈堡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 38,356評論 3 340
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了燕雁。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片诞丽。...
    茶點故事閱讀 40,488評論 1 352
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖拐格,靈堂內(nèi)的尸體忽然破棺而出僧免,到底是詐尸還是另有隱情,我是刑警寧澤禁荒,帶...
    沈念sama閱讀 36,181評論 5 350
  • 正文 年R本政府宣布猬膨,位于F島的核電站,受9級特大地震影響呛伴,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜谒所,卻給世界環(huán)境...
    茶點故事閱讀 41,862評論 3 333
  • 文/蒙蒙 一热康、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧劣领,春花似錦姐军、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,331評論 0 24
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽著觉。三九已至,卻和暖如春惊暴,著一層夾襖步出監(jiān)牢的瞬間饼丘,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,445評論 1 272
  • 我被黑心中介騙來泰國打工辽话, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留肄鸽,地道東北人。 一個月前我還...
    沈念sama閱讀 48,897評論 3 376
  • 正文 我出身青樓油啤,卻偏偏與公主長得像典徘,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子益咬,可洞房花燭夜當晚...
    茶點故事閱讀 45,500評論 2 359

推薦閱讀更多精彩內(nèi)容