溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務(wù)條款》

Mysql如何使用存儲過程快速添加百萬數(shù)據(jù)

發(fā)布時間:2021-08-23 12:34:27 來源:億速云 閱讀:204 作者:小新 欄目:開發(fā)技術(shù)

這篇文章主要為大家展示了“Mysql如何使用存儲過程快速添加百萬數(shù)據(jù)”,內(nèi)容簡而易懂,條理清晰,希望能夠幫助大家解決疑惑,下面讓小編帶領(lǐng)大家一起研究并學(xué)習(xí)一下“Mysql如何使用存儲過程快速添加百萬數(shù)據(jù)”這篇文章吧。

前言

為了體現(xiàn)不加索引和添加索引的區(qū)別,需要使用百萬級的數(shù)據(jù),但是百萬數(shù)據(jù)的表,如果使用一條條添加,特別繁瑣又麻煩,這里使用存儲過程快速添加數(shù)據(jù),用時大概4個小時。
創(chuàng)建一個用戶表

CREATE TABLE `t_sales` (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  `username` varchar(32) COLLATE utf8_bin DEFAULT NULL COMMENT '用戶名',
  `password` varchar(64) COLLATE utf8_bin DEFAULT NULL COMMENT '密碼 MD5存儲',
  `register_time` timestamp NULL DEFAULT NULL COMMENT '注冊時間',
  `type` int(1) DEFAULT NULL COMMENT '用戶類型 1,2,3,4 隨機(jī)',
  PRIMARY KEY (`id`),
  KEY `idx_username` (`username`) USING BTREE
)

然后創(chuàng)建存儲過程,批量添加數(shù)據(jù)。

  • 用戶名以常量和數(shù)字拼接

  • 密碼是MD5密碼

  • 注冊時間是當(dāng)前時間隨機(jī)往前推幾天

  • type是取1-4隨機(jī)范圍值

create procedure salesAdd()
begin 
 declare i int default 11;
   while i <= 4000000 do
         insert into blog.t_sales
         (`username`,`password`,`register_time`,type) values
         (concat("jack",i),MD5(concat("psswe",i)),from_unixtime(unix_timestamp(now()) - floor(rand() * 800000)),floor(1 + rand() * 4)); 
         set i = i + 1; 
   end while; 
end

然后調(diào)用存儲過程

call salesAdd()

改進(jìn)版

雖然使用存儲過程添加數(shù)據(jù)相對一個個添加更加便捷,快速,但是添加幾百萬數(shù)據(jù)要花幾個小時時間也是很久的,后面在網(wǎng)上找到不少資料,發(fā)現(xiàn)mysql每次執(zhí)行一條語句都默認(rèn)自動提交,這個操作非常耗時,所以在在添加去掉自動提交。設(shè)置 SET AUTOCOMMIT = 0;

create procedure salesAdd()
begin 
 declare i int default 1;
 set autocommit = 0;   
   while i <= 4000000 do
         insert into blog.t_sales
         (`username`,`password`,`register_time`,type) values
         (concat("jack",i),MD5(concat("psswe",i)),from_unixtime(unix_timestamp(now()) - floor(rand() * 800000)),floor(1 + rand() * 4)); 
         set i = i + 1; 
   end while;
 set autocommit = 1;     
end

執(zhí)行時間387秒,約為六分鐘,其中還有一半時間用于md5、隨機(jī)數(shù)的計算。

[SQL]
call salesAdd();
受影響的行: 0
時間: 387.691s

以上是“Mysql如何使用存儲過程快速添加百萬數(shù)據(jù)”這篇文章的所有內(nèi)容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內(nèi)容對大家有所幫助,如果還想學(xué)習(xí)更多知識,歡迎關(guān)注億速云行業(yè)資訊頻道!

向AI問一下細(xì)節(jié)

免責(zé)聲明:本站發(fā)布的內(nèi)容(圖片、視頻和文字)以原創(chuàng)、轉(zhuǎn)載和分享為主,文章觀點不代表本網(wǎng)站立場,如果涉及侵權(quán)請聯(lián)系站長郵箱:is@yisu.com進(jìn)行舉報,并提供相關(guān)證據(jù),一經(jīng)查實,將立刻刪除涉嫌侵權(quán)內(nèi)容。

AI