sql 記一次sql寫(xiě)方法優(yōu)化: 查詢(xún)每個(gè)分組最新的記錄 2020-11-3

biz_cloudsign_login是登錄記錄速侈, 表數(shù)據(jù)28萬(wàn)绍移。
需求是:查詢(xún)每個(gè)人最新登錄記錄倦微。

表結(jié)構(gòu)

CREATE TABLE `biz_cloudsign_login` (
`id`  bigint(20) NOT NULL AUTO_INCREMENT ,
`business_system_code`  int(11) NOT NULL ,
`user_department`  varchar(50) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL ,
`employee_num`  varchar(36) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL ,
`user_name`  varchar(50) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL ,
`identity_number`  varchar(20) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL ,
`client_id`  varchar(40) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL ,
`client_ip`  varchar(40) CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL ,
`random_num`  varchar(50) CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL ,
`cert_id`  varchar(36) CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL ,
`encrypted_token`  longtext CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL ,
`updated_at`  datetime NOT NULL DEFAULT CURRENT_TIMESTAMP ,
PRIMARY KEY (`id`),
INDEX `index_eml` (`id`, `employee_num`) USING BTREE ,
INDEX `index_employee_num` (`employee_num`) USING BTREE 
)
ENGINE=InnoDB
DEFAULT CHARACTER SET=utf8 COLLATE=utf8_general_ci
AUTO_INCREMENT=289464
ROW_FORMAT=DYNAMIC
;

思路:
1揍瑟、使用子查詢(xún)先將目標(biāo)表的 id,employee_num 查詢(xún)出來(lái)少欺,根據(jù)id倒敘排列(id自增)
2喳瓣、再使用id進(jìn)行自關(guān)聯(lián)查詢(xún),按employee_num 分組

SELECT
    b.* 
FROM
    ( SELECT id,employee_num FROM biz_cloudsign_login ORDER BY id DESC ) a join biz_cloudsign_login b ON a.id = b.id
GROUP BY
    a.employee_num  order by null

添加了相應(yīng)索引的最優(yōu)執(zhí)行計(jì)劃


image.png

是先使用SELECT id,employee_num FROM biz_cloudsign_login ORDER BY id DESC 將所有的id,employee_num 記錄查詢(xún)出來(lái)赞别,盡管加上了索引畏陕。但是由于是全索引的掃描。也是非常慢的氯庆。事實(shí)上這里查詢(xún)出了我們本不需要的數(shù)據(jù):舊的登錄記錄

優(yōu)化寫(xiě)法

巧妙組合使用 MAX( id )和按 employee_num分組直接達(dá)到了排序的目的蹭秋,因?yàn)檫@個(gè)表的id是int類(lèi)型且自增。那么SELECT MAX( id ) 'id' FROM biz_cloudsign_login GROUP BY employee_num 就直接查詢(xún)出了最新的每個(gè)人的登錄記錄id堤撵。然后再關(guān)聯(lián)查詢(xún)就好了仁讨!這種方式就比上面的方式掃描的數(shù)據(jù)少了很多


    SELECT
        v.* 
    FROM
        biz_cloudsign_login v
        INNER JOIN ( SELECT MAX( id ) 'id' FROM biz_cloudsign_login GROUP BY employee_num ) c ON v.id = c.id 

查看執(zhí)行計(jì)劃


image.png

比起上面的查詢(xún),這條sql只需要掃描 1571+1571 三千條數(shù)據(jù)就能得到執(zhí)行結(jié)果实昨。而上面卻要將整個(gè)表掃描一遍洞豁,那就是28萬(wàn)!

若數(shù)據(jù)量實(shí)在是太大荒给,我們可以根據(jù)服務(wù)器配置酌情調(diào)大buff pool丈挟。會(huì)有顯著的優(yōu)化效果。具體看看這篇
http://www.reibang.com/p/5bf36975fd73

SET GLOBAL innodb_buffer_pool_size = 6442450944 -- 6G
最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末志电,一起剝皮案震驚了整個(gè)濱河市曙咽,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌挑辆,老刑警劉巖例朱,帶你破解...
    沈念sama閱讀 206,968評(píng)論 6 482
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異鱼蝉,居然都是意外死亡洒嗤,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,601評(píng)論 2 382
  • 文/潘曉璐 我一進(jìn)店門(mén)魁亦,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)渔隶,“玉大人,你說(shuō)我怎么就攤上這事洁奈〖浒Γ” “怎么了绞灼?”我有些...
    開(kāi)封第一講書(shū)人閱讀 153,220評(píng)論 0 344
  • 文/不壞的土叔 我叫張陵,是天一觀的道長(zhǎng)呈野。 經(jīng)常有香客問(wèn)我镀赌,道長(zhǎng),這世上最難降的妖魔是什么际跪? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 55,416評(píng)論 1 279
  • 正文 為了忘掉前任,我火速辦了婚禮喉钢,結(jié)果婚禮上姆打,老公的妹妹穿的比我還像新娘。我一直安慰自己肠虽,他們只是感情好幔戏,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,425評(píng)論 5 374
  • 文/花漫 我一把揭開(kāi)白布。 她就那樣靜靜地躺著税课,像睡著了一般闲延。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上韩玩,一...
    開(kāi)封第一講書(shū)人閱讀 49,144評(píng)論 1 285
  • 那天垒玲,我揣著相機(jī)與錄音,去河邊找鬼找颓。 笑死合愈,一個(gè)胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的击狮。 我是一名探鬼主播佛析,決...
    沈念sama閱讀 38,432評(píng)論 3 401
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼彪蓬!你這毒婦竟也來(lái)了寸莫?” 一聲冷哼從身側(cè)響起,我...
    開(kāi)封第一講書(shū)人閱讀 37,088評(píng)論 0 261
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤档冬,失蹤者是張志新(化名)和其女友劉穎膘茎,沒(méi)想到半個(gè)月后,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體捣郊,經(jīng)...
    沈念sama閱讀 43,586評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡辽狈,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,028評(píng)論 2 325
  • 正文 我和宋清朗相戀三年,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了呛牲。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片刮萌。...
    茶點(diǎn)故事閱讀 38,137評(píng)論 1 334
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖娘扩,靈堂內(nèi)的尸體忽然破棺而出着茸,到底是詐尸還是另有隱情壮锻,我是刑警寧澤,帶...
    沈念sama閱讀 33,783評(píng)論 4 324
  • 正文 年R本政府宣布涮阔,位于F島的核電站猜绣,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏敬特。R本人自食惡果不足惜掰邢,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,343評(píng)論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望伟阔。 院中可真熱鬧辣之,春花似錦、人聲如沸皱炉。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 30,333評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)合搅。三九已至多搀,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間灾部,已是汗流浹背康铭。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 31,559評(píng)論 1 262
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留梳猪,地道東北人麻削。 一個(gè)月前我還...
    沈念sama閱讀 45,595評(píng)論 2 355
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像春弥,于是被迫代替她去往敵國(guó)和親呛哟。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,901評(píng)論 2 345