關於MySQL分表操作的研究


關於MySQL分表操作的研究

一般來說,當我們的數據庫的數據超過了100w記錄的時候就應該考慮分表或者分區了,這次我來詳細說說分表的一些方法。首先,我們需要想好到底分多少個表,前提當然是滿足應用。這裏我使用了一個比較簡單的分表方法,就是根據自增id的尾數來分,也就是說分0-9一共10個表,其取值也很好做,就是對10進行取模。另外,還可以根據某一字段的md5值取其中幾位進行分表,這樣的話,可以分的表就很多了。
好了,先來創建表吧,代碼如下:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
CREATETABLE`ttlsa_com`.`article_0` (
`id` BIGINT( 20 ) NOTNULL,
`subject` VARCHAR( 200 ) NOTNULL,
`content` TEXT NOTNULL,
PRIMARYKEY( `id` )
) ENGINE = MYISAM CHARACTERSETutf8 COLLATEutf8_general_ci
CREATETABLE`ttlsa_com`.`article_1` (
`id` BIGINT( 20 ) NOTNULL,
`subject` VARCHAR( 200 ) NOTNULL,
`content` TEXT NOTNULL,
PRIMARYKEY( `id` )
) ENGINE = MYISAM CHARACTERSETutf8 COLLATEutf8_general_ci
CREATETABLE`ttlsa_com`.`article_2` (
`id` BIGINT( 20 ) NOTNULL,
`subject` VARCHAR( 200 ) NOTNULL,
`content` TEXT NOTNULL,
PRIMARYKEY( `id` )
) ENGINE = MYISAM CHARACTERSETutf8 COLLATEutf8_general_ci
CREATETABLE`ttlsa_com`.`article_3` (
`id` BIGINT( 20 ) NOTNULL,
`subject` VARCHAR( 200 ) NOTNULL,
`content` TEXT NOTNULL,
PRIMARYKEY( `id` )
) ENGINE = MYISAM CHARACTERSETutf8 COLLATEutf8_general_ci
CREATETABLE`ttlsa_com`.`article_4` (
`id` BIGINT( 20 ) NOTNULL,
`subject` VARCHAR( 200 ) NOTNULL,
`content` TEXT NOTNULL,
PRIMARYKEY( `id` )
) ENGINE = MYISAM CHARACTERSETutf8 COLLATEutf8_general_ci
CREATETABLE`ttlsa_com`.`article_5` (
`id` BIGINT( 20 ) NOTNULL,
`subject` VARCHAR( 200 ) NOTNULL,
`content` TEXT NOTNULL,
PRIMARYKEY( `id` )
) ENGINE = MYISAM CHARACTERSETutf8 COLLATEutf8_general_ci
CREATETABLE`ttlsa_com`.`article_6` (
`id` BIGINT( 20 ) NOTNULL,
`subject` VARCHAR( 200 ) NOTNULL,
`content` TEXT NOTNULL,
PRIMARYKEY( `id` )
) ENGINE = MYISAM CHARACTERSETutf8 COLLATEutf8_general_ci
CREATETABLE`ttlsa_com`.`article_7` (
`id` BIGINT( 20 ) NOTNULL,
`subject` VARCHAR( 200 ) NOTNULL,
`content` TEXT NOTNULL,
PRIMARYKEY( `id` )
) ENGINE = MYISAM CHARACTERSETutf8 COLLATEutf8_general_ci
CREATETABLE`ttlsa_com`.`article_8` (
`id` BIGINT( 20 ) NOTNULL,
`subject` VARCHAR( 200 ) NOTNULL,
`content` TEXT NOTNULL,
PRIMARYKEY( `id` )
) ENGINE = MYISAM CHARACTERSETutf8 COLLATEutf8_general_ci
CREATETABLE`ttlsa_com`.`article_9` (
`id` BIGINT( 20 ) NOTNULL,
`subject` VARCHAR( 200 ) NOTNULL,
`content` TEXT NOTNULL,
PRIMARYKEY( `id` )
) ENGINE = MYISAM CHARACTERSETutf8 COLLATEutf8_general_ci

好了10個表創建完畢了,需要注意的是,這裏的id不能設爲自增,而且所有的表結構必須一致,包括結構,類型,長度,字段的順序都必須一致那麼對於這個id如何取得呢?後面我會詳細說明。現在,我們需要一個合併表,用於查詢,創建合併表的代碼如下:

1
2
3
4
5
6
CREATETABLE`ttlsa_com`.`article` (
`id` BIGINT( 20 ) NOTNULL,
`subject` VARCHAR( 200 ) NOTNULL,
`content` TEXT NOTNULL,
PRIMARYKEY( `id` )
) ENGINE=MRG_MyISAM DEFAULTCHARSET=utf8 INSERT_METHOD=0 union=(`article_0`,`article_1`,`article_2`,`article_3`,`article_4`,`article_5`,`article_6`,`article_7`,`article_8`,`article_9`);

注意,合併表也必須和前面的表有相同的結構,類型,長度,包括字段的順序都必須一致這裏的INSERT_METHOD=0表示不允許對本表進行insert操作。好了,當需要查詢的時候,我們可以只對article這個表進行操作就可以了,也就是說這個表僅僅只能進行select操作,那麼對於插入也就是insert操作應該如何來搞呢,首先就是獲取唯一的id了,這裏就還需要一個表來專門創建id,代碼如下:

1
2
3
CREATETABLE`ttlsa_com`.`create_id` (
`id` BIGINT( 20 ) NOTNULLAUTO_INCREMENT PRIMARYKEY
) ENGINE = MYISAM

也就是說,當我們需要插入數據的時候,必須由這個表來產生id值,我的php代碼的方法如下:

1
2
3
4
5
6
7
<?php
functionget_AI_ID() {
$sql= "insert into create_id (id) values('')";
$this->db->query($sql);
return$this->db->insertID();
}
?>

好了,現在假設我們要插入一條數據了,應該怎麼操作呢?還是繼續看代碼吧:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
<?php
functionnew_Article() {
$id = $this->get_AI_ID();
$table_name = $this->get_Table_Name($id);
$sql = "insert into {$table_name} (id,subject,content) values('{$id}','測試標題','測試內容')";
$this->db->query($sql);
}
/**
* 用於根據id獲取表名
*/
functionget_Table_Name($id) {
return'article_'.intval($id)%10;
}
?>

其實很簡單的,對吧,就是先獲取id,然後根據id獲取應該插入到哪個表,然後就很簡單了。
對於update的操作我想應該不需要再說了吧,無非是有了id,然後獲取表名,然後進行update操作就好了。
對於用戶表,建個最少列最基本信息的用戶名,比如用戶ID,用戶名,密碼。用戶的其他信息分佈到以用戶ID分表的表上。
怎麼分表如何分表以業務需求而定。

相關技術理論參見:http://dev.mysql.com/doc/refman/5.1/zh/storage-engines.html#merge-storage-engine

PS:分表分庫在我曾經工作過的地方經常使用。


發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章