mysql 快速生成百萬條測試數據

1、生成思路

利用mysql內存表插入速度快的特點,先利用函數和存儲過程在內存表中生成數據,然後再從內存表插入普通表中

2、創建內存表及普通表

[sql] view plain copy
  1. CREATE TABLE `vote_record_memory` (  
  2.     `id` INT (11) NOT NULL AUTO_INCREMENT,  
  3.     `user_id` VARCHAR (20) NOT NULL,  
  4.     `vote_id` INT (11) NOT NULL,  
  5.     `group_id` INT (11) NOT NULL,  
  6.     `create_time` datetime NOT NULL,  
  7.     PRIMARY KEY (`id`),  
  8.     KEY `index_id` (`user_id`) USING HASH  
  9. ) ENGINE = MEMORY AUTO_INCREMENT = 1 DEFAULT CHARSET = utf8  

[sql] view plain copy
  1. CREATE TABLE `vote_record` (  
  2.     `id` INT (11) NOT NULL AUTO_INCREMENT,  
  3.     `user_id` VARCHAR (20) NOT NULL,  
  4.     `vote_id` INT (11) NOT NULL,  
  5.     `group_id` INT (11) NOT NULL,  
  6.     `create_time` datetime NOT NULL,  
  7.     PRIMARY KEY (`id`),  
  8.     KEY `index_user_id` (`user_id`) USING HASH  
  9. ) ENGINE = INNODB AUTO_INCREMENT = 1 DEFAULT CHARSET = utf8  

3、創建函數及存儲過程

[sql] view plain copy
  1. CREATE FUNCTION `rand_string`(n INTRETURNS varchar(255) CHARSET latin1  
  2. BEGIN   
  3. DECLARE chars_str varchar(100) DEFAULT 'abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ0123456789';   
  4. DECLARE return_str varchar(255) DEFAULT '' ;  
  5. DECLARE i INT DEFAULT 0;   
  6. WHILE i < n DO   
  7. SET return_str = concat(return_str,substring(chars_str , FLOOR(1 + RAND()*62 ),1));   
  8. SET i = i +1;   
  9. END WHILE;   
  10. RETURN return_str;   
  11. END  

[sql] view plain copy
  1. CREATE  PROCEDURE `add_vote_memory`(IN n int)  
  2. BEGIN    
  3.   DECLARE i INT DEFAULT 1;  
  4.     WHILE (i <= n ) DO  
  5.       INSERT into vote_record_memory  (user_id,vote_id,group_id,create_time ) VALUEs (rand_string(20),FLOOR(RAND() * 1000),FLOOR(RAND() * 100) ,now() );  
  6.             set i=i+1;  
  7.     END WHILE;  
  8. END  

4、調用存儲過程

[sql] view plain copy
  1. CALL add_vote_memory(1000000)  

根據電腦性能不能所花時間不一樣,大概時間在小時級別,如果報錯內存滿了,只在修改max_heap_table_size 個參數即可,win7修改位置如下,linux,修改my.cnf文件,修改後要重啓mysql,重啓後內存表數據會丟失



5、插入普通表中


[sql] view plain copy
  1. INSERT into vote_record SELECT * from  vote_record_memory  


6、結果


發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章