快捷導(dǎo)航

Mysql使用存儲(chǔ)過(guò)程快速添加百萬(wàn)數(shù)據(jù)的示例代碼

更新時(shí)間：2021年08月23日 11:13:04 作者：jeremylai

這篇文章主要介紹了Mysql使用存儲(chǔ)過(guò)程快速添加百萬(wàn)數(shù)據(jù),本文通過(guò)實(shí)例代碼給大家介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值，需要的朋友可以參考下

前言

為了體現(xiàn)不加索引和添加索引的區(qū)別，需要使用百萬(wàn)級(jí)的數(shù)據(jù)，但是百萬(wàn)數(shù)據(jù)的表，如果使用一條條添加，特別繁瑣又麻煩，這里使用存儲(chǔ)過(guò)程快速添加數(shù)據(jù)，用時(shí)大概4個(gè)小時(shí)。
創(chuàng)建一個(gè)用戶表

CREATE TABLE `t_sales` (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  `username` varchar(32) COLLATE utf8_bin DEFAULT NULL COMMENT '用戶名',
  `password` varchar(64) COLLATE utf8_bin DEFAULT NULL COMMENT '密碼 MD5存儲(chǔ)',
  `register_time` timestamp NULL DEFAULT NULL COMMENT '注冊(cè)時(shí)間',
  `type` int(1) DEFAULT NULL COMMENT '用戶類(lèi)型 1,2,3,4 隨機(jī)',
  PRIMARY KEY (`id`),
  KEY `idx_username` (`username`) USING BTREE
)

然后創(chuàng)建存儲(chǔ)過(guò)程，批量添加數(shù)據(jù)。

用戶名以常量和數(shù)字拼接
密碼是MD5密碼
注冊(cè)時(shí)間是當(dāng)前時(shí)間隨機(jī)往前推幾天
type是取1-4隨機(jī)范圍值

create procedure salesAdd()
begin 
 declare i int default 11;
   while i <= 4000000 do
         insert into blog.t_sales
         (`username`,`password`,`register_time`,type) values
         (concat("jack",i),MD5(concat("psswe",i)),from_unixtime(unix_timestamp(now()) - floor(rand() * 800000)),floor(1 + rand() * 4)); 
         set i = i + 1; 
   end while; 
end

然后調(diào)用存儲(chǔ)過(guò)程

call salesAdd()

改進(jìn)版

雖然使用存儲(chǔ)過(guò)程添加數(shù)據(jù)相對(duì)一個(gè)個(gè)添加更加便捷，快速，但是添加幾百萬(wàn)數(shù)據(jù)要花幾個(gè)小時(shí)時(shí)間也是很久的，后面在網(wǎng)上找到不少資料，發(fā)現(xiàn)mysql每次執(zhí)行一條語(yǔ)句都默認(rèn)自動(dòng)提交，這個(gè)操作非常耗時(shí)，所以在在添加去掉自動(dòng)提交。設(shè)置 SET AUTOCOMMIT = 0;

create procedure salesAdd()
begin 
 declare i int default 1;
 set autocommit = 0;   
   while i <= 4000000 do
         insert into blog.t_sales
         (`username`,`password`,`register_time`,type) values
         (concat("jack",i),MD5(concat("psswe",i)),from_unixtime(unix_timestamp(now()) - floor(rand() * 800000)),floor(1 + rand() * 4)); 
         set i = i + 1; 
   end while;
 set autocommit = 1;     
end

執(zhí)行時(shí)間387秒，約為六分鐘，其中還有一半時(shí)間用于md5、隨機(jī)數(shù)的計(jì)算。

[SQL]
call salesAdd();
受影響的行: 0
時(shí)間: 387.691s

到此這篇關(guān)于Mysql使用存儲(chǔ)過(guò)程快速添加百萬(wàn)數(shù)據(jù)的文章就介紹到這了,更多相關(guān)Mysql添加百萬(wàn)數(shù)據(jù)內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家！

您可能感興趣的文章: