Mysql快速插入千萬條數(shù)據(jù)的實戰(zhàn)教程
一.創(chuàng)建數(shù)據(jù)庫

二.創(chuàng)建表
1.創(chuàng)建 dept表
CREATE TABLE `dept` ( `id` int(11) NOT NULL, `deptno` mediumint(9) DEFAULT NULL, `dname` varchar(20) DEFAULT NULL, `loc` varchar(13) DEFAULT NULL, PRIMARY KEY (`id`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
2.創(chuàng)建emp表
CREATE TABLE `emp` ( `id` int(11) NOT NULL, `empon` mediumint(9) DEFAULT NULL COMMENT '編號', `ename` varchar(20) DEFAULT NULL, `job` varchar(9) DEFAULT NULL, `mgr` mediumint(9) DEFAULT NULL COMMENT '上級編號', `hirdate` datetime DEFAULT NULL COMMENT '入職時間', `sal` decimal(7,2) DEFAULT NULL COMMENT '薪水', `comm` decimal(7,2) DEFAULT NULL COMMENT '紅利', `deptno` mediumint(9) DEFAULT NULL COMMENT '部門編號', PRIMARY KEY (`id`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
三.設(shè)置參數(shù)
SHOW VARIABLES LIKE 'log_bin_trust_function_creators';

默認關(guān)閉. 需要設(shè)置為1。因為表中設(shè)置 mediumint 字段 創(chuàng)建函數(shù)可能會報錯
SET GLOBAL log_bin_trust_function_creators=1;

四.創(chuàng)建函數(shù)
1.隨機產(chǎn)生字符串
DELIMITER $ CREATE FUNCTION RAND_STR(n INT) RETURNS VARCHAR(255) BEGIN DECLARE chars_str VARCHAR(100) DEFAULT 'abcdefghijklmnopqrstuvwsyzABCDEFGHIJKLMNOPQRSTUVWXYZ'; DECLARE return_str VARCHAR(255) DEFAULT ''; DECLARE i INT DEFAULT 0; WHILE i< n DO SET return_str =COUCAT(return_str,SUBSTRING(chars_str,FLOOR(1+RAND()*52),1)); SET i= i+1; END WHILE; RETURN return_str; END $
2.隨機產(chǎn)生部門編號
DELIMITER $ CREATE FUNCTION RAND_num() RETURNS INT(5) BEGIN DECLARE i INT DEFAULT 0; SET i= FLOOR(100+RAND()*10); RETURN i; END $
五.創(chuàng)建存儲過程
1. emp表存儲過程
DELIMITER $ CREATE PROCEDURE insert_emp(IN START INT(10),IN max_num INT(10)) BEGIN DECLARE i INT DEFAULT 0; SET autocommit = 0; REPEAT #重復(fù) SET i = i + 1; INSERT INTO emp(empon,ename,job,mgr,hiredate,sal,comm,depton) VALUES ((START+i),RAND_STR(6),'SALESMAN',0001,CURDATE(),2000,400,RAND_num()); UNTIL i = max_num END REPEAT; COMMIT; END $
2.dept表存儲過程
DELIMITER $ CREATE PROCEDURE insert_dept(IN START INT(10),IN max_num INT(10)) BEGIN DECLARE i INT DEFAULT 0; SET autocommit = 0; REPEAT #重復(fù) SET i = i + 1; INSERT INTO dept(deptno,dname,loc) VALUES ((START+i),RAND_STR(10),RAND_STR(8)); UNTIL i = max_num END REPEAT; COMMIT; END $
六.執(zhí)行
1.先執(zhí)行十條

這個錯誤是一個小坑 發(fā)現(xiàn)了嗎 我之前留下的 根據(jù)提示 去排查吧

執(zhí)行成功!
2.查看數(shù)據(jù)

重頭戲來嘍! 一次性干他百萬條數(shù)據(jù) 賭一把 看看會不會玩崩了
3.執(zhí)行百萬插入
CALL insert_dept(10001,1000000);

400s跑百萬數(shù)據(jù) 一秒2500條 我這配置太垃圾 以前測試的是一秒一萬 最好50W跑一次


歐克 睡覺
總結(jié)
到此這篇關(guān)于Mysql快速插入千萬條數(shù)據(jù)的文章就介紹到這了,更多相關(guān)Mysql插入千萬條數(shù)據(jù)內(nèi)容請搜索本站以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持本站!
版權(quán)聲明:本站文章來源標(biāo)注為YINGSOO的內(nèi)容版權(quán)均為本站所有,歡迎引用、轉(zhuǎn)載,請保持原文完整并注明來源及原文鏈接。禁止復(fù)制或仿造本網(wǎng)站,禁止在非maisonbaluchon.cn所屬的服務(wù)器上建立鏡像,否則將依法追究法律責(zé)任。本站部分內(nèi)容來源于網(wǎng)友推薦、互聯(lián)網(wǎng)收集整理而來,僅供學(xué)習(xí)參考,不代表本站立場,如有內(nèi)容涉嫌侵權(quán),請聯(lián)系alex-e#qq.com處理。
關(guān)注官方微信