MySQL重復(fù)數(shù)據(jù)處理

我們主要從以下幾個方面來對數(shù)據(jù)庫當中重復(fù)數(shù)據(jù)的處理:

MySQL保證數(shù)據(jù)唯一性

在數(shù)據(jù)庫當中袜啃,有些數(shù)據(jù)我們是允許其能夠重復(fù)存在又活,但是有時候我們也需要刪除這些重復(fù)的數(shù)據(jù)伙菊。若是要防止數(shù)據(jù)重復(fù)存在,可以通過以下幾種方式來設(shè)置:

  • 將字段修飾為private key或unique
  • 如果是要設(shè)置兩個字段的數(shù)據(jù)不重復(fù)可以通過設(shè)置雙主鍵的模式來確保兩個字段的唯一性
create table student(id int,firstName varchar(20),lastName varchar(20),private key(firstName,lastName))
  • 給字段設(shè)置唯一索引坦冠,這樣重復(fù)的數(shù)據(jù)在插入的時候就無法執(zhí)行
  • 使用insert ignore into插入數(shù)據(jù):當數(shù)據(jù)庫當中沒有數(shù)據(jù)领迈,就插入新的數(shù)據(jù)彻磁,如果已經(jīng)有數(shù)據(jù)則跳過這條數(shù)據(jù),不會出錯也不會插入新紀錄
  • replace into,如果存在primary或Unique相同的紀錄狸捅,則先刪除再插入

統(tǒng)計重復(fù)數(shù)據(jù)

  • 使用group by
select count(*) as repetitions,firstName,lastName from person group by firstName,lastName having repetitions > 1;

過濾掉重復(fù)的數(shù)據(jù)

  • 查詢的時候使用關(guān)鍵字distinct
mysql> select distinct firstName,lastName from person;
  • 查詢的時候使用group by
select firstName,lastName from person group by firstName,lastName;

刪除重復(fù)的數(shù)據(jù)

給相應(yīng)的字段設(shè)置主鍵或唯一的索引

alter ignore table person add primary key(firstName,lastName)
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末衷蜓,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子薪贫,更是在濱河造成了極大的恐慌恍箭,老刑警劉巖,帶你破解...
    沈念sama閱讀 219,188評論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件瞧省,死亡現(xiàn)場離奇詭異扯夭,居然都是意外死亡鳍贾,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,464評論 3 395
  • 文/潘曉璐 我一進店門交洗,熙熙樓的掌柜王于貴愁眉苦臉地迎上來骑科,“玉大人,你說我怎么就攤上這事构拳∨厮” “怎么了?”我有些...
    開封第一講書人閱讀 165,562評論 0 356
  • 文/不壞的土叔 我叫張陵置森,是天一觀的道長斗埂。 經(jīng)常有香客問我,道長凫海,這世上最難降的妖魔是什么呛凶? 我笑而不...
    開封第一講書人閱讀 58,893評論 1 295
  • 正文 為了忘掉前任,我火速辦了婚禮行贪,結(jié)果婚禮上漾稀,老公的妹妹穿的比我還像新娘。我一直安慰自己建瘫,他們只是感情好崭捍,可當我...
    茶點故事閱讀 67,917評論 6 392
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著啰脚,像睡著了一般殷蛇。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上拣播,一...
    開封第一講書人閱讀 51,708評論 1 305
  • 那天晾咪,我揣著相機與錄音收擦,去河邊找鬼贮配。 笑死,一個胖子當著我的面吹牛塞赂,可吹牛的內(nèi)容都是我干的泪勒。 我是一名探鬼主播,決...
    沈念sama閱讀 40,430評論 3 420
  • 文/蒼蘭香墨 我猛地睜開眼宴猾,長吁一口氣:“原來是場噩夢啊……” “哼圆存!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起仇哆,我...
    開封第一講書人閱讀 39,342評論 0 276
  • 序言:老撾萬榮一對情侶失蹤沦辙,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后讹剔,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體油讯,經(jīng)...
    沈念sama閱讀 45,801評論 1 317
  • 正文 獨居荒郊野嶺守林人離奇死亡详民,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,976評論 3 337
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了陌兑。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片沈跨。...
    茶點故事閱讀 40,115評論 1 351
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖兔综,靈堂內(nèi)的尸體忽然破棺而出饿凛,到底是詐尸還是另有隱情,我是刑警寧澤软驰,帶...
    沈念sama閱讀 35,804評論 5 346
  • 正文 年R本政府宣布涧窒,位于F島的核電站,受9級特大地震影響锭亏,放射性物質(zhì)發(fā)生泄漏杀狡。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 41,458評論 3 331
  • 文/蒙蒙 一贰镣、第九天 我趴在偏房一處隱蔽的房頂上張望呜象。 院中可真熱鬧,春花似錦碑隆、人聲如沸恭陡。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,008評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽休玩。三九已至,卻和暖如春劫狠,著一層夾襖步出監(jiān)牢的瞬間拴疤,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,135評論 1 272
  • 我被黑心中介騙來泰國打工独泞, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留呐矾,地道東北人。 一個月前我還...
    沈念sama閱讀 48,365評論 3 373
  • 正文 我出身青樓懦砂,卻偏偏與公主長得像蜒犯,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子荞膘,可洞房花燭夜當晚...
    茶點故事閱讀 45,055評論 2 355

推薦閱讀更多精彩內(nèi)容