關于表中重復數(shù)據(jù)的處理--MySQL

表結(jié)構及數(shù)據(jù)如下

SELECT * FROM test!
test.png

一. 根據(jù)字段查詢表中重復的數(shù)據(jù)
1.根據(jù)字段test1,test2耙替,查詢表中重復的數(shù)據(jù)

SELECT * FROM test a WHERE (a.test1,a.test2) IN (SELECT test1,test2 FROM test GROUP BY test1,test2 HAVING COUNT(*)>1)

結(jié)果如下
1.png

2.根據(jù)字段test1亚侠,test3,查詢表中重復的數(shù)據(jù)

SELECT * FROM test a WHERE (a.test1,a.test3) IN (SELECT test1,test3 FROM test GROUP BY test1,test3 HAVING COUNT(*)>1)

結(jié)果如下
2.png

二.刪除表中重復數(shù)據(jù)俗扇,只保留一條
1.Mysql使用變量方法實現(xiàn)行號功能 (類似于Oracle中的rowid函數(shù))

SELECT @rowid:=@rowid+1 as rowid,test.* FROM (select @rowid:=0) test,test

結(jié)果如下
2.1.png

2.結(jié)合以上方法硝烂,即可實現(xiàn)刪除表中重復數(shù)據(jù),只保留rowid最小的一行

根據(jù)字段test1铜幽,test3滞谢,查出需要刪除的數(shù)據(jù)rowid:

SELECT * FROM
(SELECT @rowid:=@rowid+1 as rowid,test.* FROM (select @rowid:=0) test,test) c
WHERE rowid not in 
(select min(rowid) from (SELECT @rowid:=@rowid+1 as rowid,test.* FROM (select @rowid:=0) test,test)b group by b.test1,b.test3 having count(*)>=1) 

結(jié)果如下
2.2.png

根據(jù)字段test1,test3除抛,刪除重復數(shù)據(jù)

DELETE FROM 
(SELECT @rowid:=@rowid+1 as rowid,test.* FROM (select @rowid:=0) test,test) t 
WHERE rowid not in 
(select min(rowid) from (SELECT @rowid:=@rowid+1 as rowid,test.* FROM (select @rowid:=0) test,test)b group by b.test1,b.test3 having count(*)>=1) 

尷尬狮杨!設想中的以上寫法為錯誤寫法:原因是:更新數(shù)據(jù)時使用了查詢,而查詢的數(shù)據(jù)又做了更新的條件到忽,mysql不支持這種方式橄教。使用虛擬表的情況下再加一層封裝發(fā)現(xiàn)仍無法規(guī)避這個問題(實體表則可以)?

嘗試多次后喘漏,無奈使用折中解決辦法护蝶,直接創(chuàng)建新表,把去除重復后的數(shù)據(jù)插入新表中翩迈,再刪除舊表持灰;

create temporary table temp1 as SELECT test1,test2,test3,test4 FROM 
(SELECT @rowid:=@rowid+1 as rowid,test.* FROM (select @rowid:=0) test,test) t 
WHERE rowid in 
(select min(rowid) from (SELECT @rowid:=@rowid+1 as rowid,test.* FROM (select @rowid:=0) test,test)b group by b.test1,b.test3 having count(*)>=1) 
SELECT * FROM temp1

結(jié)果如下
2.3.png

顯然這個方法存在效率問題,如有更好解決方法請指教负饲;

最后編輯于
?著作權歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末堤魁,一起剝皮案震驚了整個濱河市喂链,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌姨涡,老刑警劉巖衩藤,帶你破解...
    沈念sama閱讀 210,914評論 6 490
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異涛漂,居然都是意外死亡赏表,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 89,935評論 2 383
  • 文/潘曉璐 我一進店門匈仗,熙熙樓的掌柜王于貴愁眉苦臉地迎上來瓢剿,“玉大人,你說我怎么就攤上這事悠轩〖淇瘢” “怎么了?”我有些...
    開封第一講書人閱讀 156,531評論 0 345
  • 文/不壞的土叔 我叫張陵火架,是天一觀的道長鉴象。 經(jīng)常有香客問我,道長何鸡,這世上最難降的妖魔是什么纺弊? 我笑而不...
    開封第一講書人閱讀 56,309評論 1 282
  • 正文 為了忘掉前任,我火速辦了婚禮骡男,結(jié)果婚禮上淆游,老公的妹妹穿的比我還像新娘。我一直安慰自己隔盛,他們只是感情好犹菱,可當我...
    茶點故事閱讀 65,381評論 5 384
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著吮炕,像睡著了一般腊脱。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上龙亲,一...
    開封第一講書人閱讀 49,730評論 1 289
  • 那天虑椎,我揣著相機與錄音,去河邊找鬼俱笛。 笑死捆姜,一個胖子當著我的面吹牛,可吹牛的內(nèi)容都是我干的迎膜。 我是一名探鬼主播泥技,決...
    沈念sama閱讀 38,882評論 3 404
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼磕仅!你這毒婦竟也來了珊豹?” 一聲冷哼從身側(cè)響起簸呈,我...
    開封第一講書人閱讀 37,643評論 0 266
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎店茶,沒想到半個月后蜕便,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 44,095評論 1 303
  • 正文 獨居荒郊野嶺守林人離奇死亡贩幻,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,448評論 2 325
  • 正文 我和宋清朗相戀三年轿腺,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片丛楚。...
    茶點故事閱讀 38,566評論 1 339
  • 序言:一個原本活蹦亂跳的男人離奇死亡族壳,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出趣些,到底是詐尸還是另有隱情仿荆,我是刑警寧澤,帶...
    沈念sama閱讀 34,253評論 4 328
  • 正文 年R本政府宣布坏平,位于F島的核電站拢操,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏舶替。R本人自食惡果不足惜令境,卻給世界環(huán)境...
    茶點故事閱讀 39,829評論 3 312
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望坎穿。 院中可真熱鬧,春花似錦返劲、人聲如沸玲昧。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,715評論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽孵延。三九已至,卻和暖如春亲配,著一層夾襖步出監(jiān)牢的瞬間尘应,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,945評論 1 264
  • 我被黑心中介騙來泰國打工吼虎, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留犬钢,地道東北人。 一個月前我還...
    沈念sama閱讀 46,248評論 2 360
  • 正文 我出身青樓思灰,卻偏偏與公主長得像玷犹,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子洒疚,可洞房花燭夜當晚...
    茶點故事閱讀 43,440評論 2 348

推薦閱讀更多精彩內(nèi)容