mysql 對于百萬 千萬級數(shù)據(jù)的分表實現(xiàn)方法 --- 2021-07-21

首先,我們需要想好到底分多少個表暖璧,前提當然是滿足應用。這里我使用了一個比較簡單的分表方法殴泰,就是根據(jù)自增id的尾數(shù)來分浮驳,也就是說分0-9一共10個表捞魁,其取值也很好做,就是對10進行取模谱俭。另外,還可以根據(jù)某一字段的md5值取其中幾位進行分表县貌,這樣的話凑懂,可以分的表就很多了。

CREATE TABLE `article_0` (
`id` BIGINT( 20 ) NOT NULL ,
`subject` VARCHAR( 200 ) NOT NULL ,
`content` TEXT NOT NULL ,
PRIMARY KEY ( `id` )
) ENGINE = MYISAM CHARACTER SET utf8 COLLATE utf8_general_ci

CREATE TABLE `article_1` (
`id` BIGINT( 20 ) NOT NULL ,
`subject` VARCHAR( 200 ) NOT NULL ,
`content` TEXT NOT NULL ,
PRIMARY KEY ( `id` )
) ENGINE = MYISAM CHARACTER SET utf8 COLLATE utf8_general_ci

CREATE TABLE `article_2` (
`id` BIGINT( 20 ) NOT NULL ,
`subject` VARCHAR( 200 ) NOT NULL ,
`content` TEXT NOT NULL ,
PRIMARY KEY ( `id` )
) ENGINE = MYISAM CHARACTER SET utf8 COLLATE utf8_general_ci

CREATE TABLE `article_3` (
`id` BIGINT( 20 ) NOT NULL ,
`subject` VARCHAR( 200 ) NOT NULL ,
`content` TEXT NOT NULL ,
PRIMARY KEY ( `id` )
) ENGINE = MYISAM CHARACTER SET utf8 COLLATE utf8_general_ci

CREATE TABLE `article_4` (
`id` BIGINT( 20 ) NOT NULL ,
`subject` VARCHAR( 200 ) NOT NULL ,
`content` TEXT NOT NULL ,
PRIMARY KEY ( `id` )
) ENGINE = MYISAM CHARACTER SET utf8 COLLATE utf8_general_ci

CREATE TABLE `article_5` (
`id` BIGINT( 20 ) NOT NULL ,
`subject` VARCHAR( 200 ) NOT NULL ,
`content` TEXT NOT NULL ,
PRIMARY KEY ( `id` )
) ENGINE = MYISAM CHARACTER SET utf8 COLLATE utf8_general_ci

CREATE TABLE `article_6` (
`id` BIGINT( 20 ) NOT NULL ,
`subject` VARCHAR( 200 ) NOT NULL ,
`content` TEXT NOT NULL ,
PRIMARY KEY ( `id` )
) ENGINE = MYISAM CHARACTER SET utf8 COLLATE utf8_general_ci

CREATE TABLE `article_7` (
`id` BIGINT( 20 ) NOT NULL ,
`subject` VARCHAR( 200 ) NOT NULL ,
`content` TEXT NOT NULL ,
PRIMARY KEY ( `id` )
) ENGINE = MYISAM CHARACTER SET utf8 COLLATE utf8_general_ci

CREATE TABLE `article_8` (
`id` BIGINT( 20 ) NOT NULL ,
`subject` VARCHAR( 200 ) NOT NULL ,
`content` TEXT NOT NULL ,
PRIMARY KEY ( `id` )
) ENGINE = MYISAM CHARACTER SET utf8 COLLATE utf8_general_ci

CREATE TABLE `article_9` (
`id` BIGINT( 20 ) NOT NULL ,
`subject` VARCHAR( 200 ) NOT NULL ,
`content` TEXT NOT NULL ,
PRIMARY KEY ( `id` )
) ENGINE = MYISAM CHARACTER SET utf8 COLLATE utf8_general_ci

好了10個表創(chuàng)建完畢了摆碉,需要注意的是脓豪,這里的id不能設為自增,而且所有的表結構必須一致楞泼,包括結構笤闯,類型堕阔,長度望侈,字段的順序都必須一致那么對于這個id如何取得呢?后面我會詳細說明〗拟現(xiàn)在,我們需要一個合并表退唠,用于查詢,創(chuàng)建合并表的代碼如下:

 CREATE TABLE `article` (
`id` BIGINT( 20 ) NOT NULL ,
`subject` VARCHAR( 200 ) NOT NULL ,
`content` TEXT NOT NULL ,
PRIMARY KEY ( `id` )
) ENGINE=MRG_MyISAM DEFAULT CHARSET=utf8 INSERT_METHOD=0 UNION=(`article_0`,`article_1`,`article_2`,`article_3`,`article_4`,`article_5`,`article_6`,`article_7`,`article_8`,`article_9`);

這里INSERT_METHOD=0在某些版本可能不工作屎债,需要改成INSERT_METHOD=NO
注意垢油,合并表也必須和前面的表有相同的結構,類型滩愁,長度,包括字段的順序都必須一致這里的INSERT_METHOD=0表示不允許對本表進行insert操作廉丽。好了妻味,當需要查詢的時候,我們可以只對article這個表進行操作就可以了责球,也就是說這個表僅僅只能進行select操作

那么對于插入也就是insert操作應該如何來搞呢,首先就是獲取唯一的id了裁良,這里就還需要一個表來專門創(chuàng)建id,代碼如下:

CREATE TABLE `create_id` (
`id` BIGINT( 20 ) NOT NULL AUTO_INCREMENT PRIMARY KEY
) ENGINE = MYISAM

也就是說价脾,當我們需要插入數(shù)據(jù)的時候笛匙,必須由這個表來產(chǎn)生id值,我的php代碼的方法如下

 function get_AI_ID() {
    $sql  = "insert into create_id (id) values('')";
    $this->db->query($sql);
    return $this->db->insertID();
}

好了秋柄,現(xiàn)在假設我們要插入一條數(shù)據(jù)了蠢正,應該怎么操作呢骇笔?還是繼續(xù)看代碼吧

function new_Article() {
    $id  = $this->get_AI_ID();
    $table_name = $this->get_Table_Name($id);
    $sql = "insert into {$table_name} (id,subject,content) values('{$id}','測試標題','測試內(nèi)容')";
    $this->db->query($sql);
}
function get_Table_Name($id) {
    return 'article_'.intval($id)%10;//這里取模運算起到了畫龍點睛的作用
}

其實很簡單的笨触,就是先獲取id,然后根據(jù)id獲取應該插入到哪個表芦劣,然后就很簡單了。

對于update的操作應該不需要再說了吧虚吟,無非是有了id,然后獲取表名偏塞,然后進行update操作就好了

?著作權歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末模庐,一起剝皮案震驚了整個濱河市油宜,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌疼燥,老刑警劉巖蚁堤,帶你破解...
    沈念sama閱讀 218,204評論 6 506
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異披诗,居然都是意外死亡,警方通過查閱死者的電腦和手機剥槐,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,091評論 3 395
  • 文/潘曉璐 我一進店門宪摧,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人蕊苗,你說我怎么就攤上這事沿彭⌒嗯椋” “怎么了?”我有些...
    開封第一講書人閱讀 164,548評論 0 354
  • 文/不壞的土叔 我叫張陵熔掺,是天一觀的道長非剃。 經(jīng)常有香客問我,道長备绽,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 58,657評論 1 293
  • 正文 為了忘掉前任恨锚,我火速辦了婚禮倍靡,結果婚禮上,老公的妹妹穿的比我還像新娘他挎。我一直安慰自己捡需,他們只是感情好,可當我...
    茶點故事閱讀 67,689評論 6 392
  • 文/花漫 我一把揭開白布呢撞。 她就那樣靜靜地躺著,像睡著了一般殊霞。 火紅的嫁衣襯著肌膚如雪汰蓉。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,554評論 1 305
  • 那天古沥,我揣著相機與錄音特愿,去河邊找鬼豹爹。 笑死解滓,一個胖子當著我的面吹牛须板,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播做裙,決...
    沈念sama閱讀 40,302評論 3 418
  • 文/蒼蘭香墨 我猛地睜開眼锚贱,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了拧廊?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 39,216評論 0 276
  • 序言:老撾萬榮一對情侶失蹤凰盔,失蹤者是張志新(化名)和其女友劉穎倦春,沒想到半個月后,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體睁本,經(jīng)...
    沈念sama閱讀 45,661評論 1 314
  • 正文 獨居荒郊野嶺守林人離奇死亡添履,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,851評論 3 336
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了暮胧。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片问麸。...
    茶點故事閱讀 39,977評論 1 348
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖席舍,靈堂內(nèi)的尸體忽然破棺而出哮笆,到底是詐尸還是另有隱情,我是刑警寧澤稠肘,帶...
    沈念sama閱讀 35,697評論 5 347
  • 正文 年R本政府宣布,位于F島的核電站滑黔,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏略荡。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 41,306評論 3 330
  • 文/蒙蒙 一巴粪、第九天 我趴在偏房一處隱蔽的房頂上張望粥谬。 院中可真熱鬧,春花似錦帝嗡、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 31,898評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至抑月,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間谦絮,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 33,019評論 1 270
  • 我被黑心中介騙來泰國打工性锭, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留叫胖,地道東北人。 一個月前我還...
    沈念sama閱讀 48,138評論 3 370
  • 正文 我出身青樓瓮增,卻偏偏與公主長得像,于是被迫代替她去往敵國和親拳恋。 傳聞我的和親對象是個殘疾皇子你踩,可洞房花燭夜當晚...
    茶點故事閱讀 44,927評論 2 355

推薦閱讀更多精彩內(nèi)容