（六）MySQL高级——批量插入数据脚本

情景：往表里插入1000W条数据

1、建表

-- 新建库
CREATE DATABASE bigData;
USE bigData;

-- 建表dept
CREATE TABLE dept(
    id INT UNSIGNED PRIMARY KEY AUTO_INCREMENT,
    deptno MEDIUMINT UNSIGNED NOT NULL DEFAULT 0,
    dnama VARCHAR(20) NOT NULL DEFAULT "",
    loc VARCHAR(13) NOT NULL DEFAULT "",
)ENGINE=INNODB DEFAULT CHARSET=GBK;

-- 建表emp
CREATE TABLE emp(
    id INT UNSIGNED PRIMARY KEY AUTO_INCREMENT,
    empno MEDIUMINT UNSIGNED NOT NULL DEFAULT 0, /*编号*/
    ename VARCHAR(20) NOT NULL DEFAULT "", /*名字*/
    job VARCHAR(9) NOT NULL DEFAULT "", /*工作*/
    mgr MEDIUMINT UNSIGNED NOT NULL DEFAULT 0, /*上级编号*/
    hiredate DATE NOT NULL, /*入职时间*/
    sal DECIMAL(7,2) NOT NULL, /*薪水*/
    comm DECIMAL(7,2) NOT NULL, /*红利*/
    deptno MEDIUMINT UNSIGNED NOT NULL DEFAULT 0 /*部门编号*/
)ENGINE=INNODB DEFAULT CHARSET=GBK;

2、设置参数log_bin_trust_function_creators

创建函数，假如报错：

This function has none of DETERMINISTIC....

由于开启过慢查询，因为之前开启了bin-log，那么现在就必须为function指定一个参数。

show variables like 'log_bin_trust_function_creators';
set global log_bin_trust_function_crators=1;

这样添加了参数以后，如果mysqld重启，上述参数又会消失，那么永久方法是：

（1）Windows下：

my.ini[mysqld]加上log_bin_trust_function_creators=1

（2）Linux下：

/etc/my.cnf[mysqld]加上log_bin_trust_function_creators=1

3、创建函数，保证每条数据不同

扫描二维码关注公众号，回复： 4693128 查看本文章

3.1、随机产生字符串

-- 用于随机产生字符串
DELIMITER $$
CREATE FUNCTION rand_string(n INT) RETURNS VARCHAR(255)
BEGIN
DECLARE chars_str VARCHAR(100) DEFAULT 'abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ';
DECLARE return_str VARCHAR(255) DEFAULT '';
DEClARE i INT DEFAULT 0;
WHILE i < n DO
SET return_str=CONCAT(return_str,SUBSTRING(chars_str,FLOOR(1+RAND()*52),1));
SET i = i + 1;
END WHILE;
RETURN return_str;
END $$

3.2、随机产生部门编号

-- 用于随机产生部门编号
DELIMITER $$
CREATE FUNCTION rand_num()
RETURNS INT(5)
BEGIN
DECLARE i INT DEFAULT 0;
SET i = FLOOR(100+RAND()*10);
RETURN i;
END $$

-- 假如要删除
DROP FUNCTION rand_num;

4、创建存储过程

4.1、创建往emp表中插入数据的存储过程

DELIMITER $$
CREATE PROCEDURE insert_emp(IN START INT(10),IN max_num INT(10))
BEGIN
DECLARE i INT DEFAULT 0;
-- SET autocommit=0 把autocommit设置成0
SER autocommit = 0;
REPEAT
SET i = i+1;
INSERT INTO emp(empno,ename,job,mgr,hiredate,sal,comm,deptno) VALUES ((START+i),rand_string(6),'SALESMAN',001,CURDATE(),2000,400,rand_num());
UNTIL i = max_num
END REPEAT;
COMMIT
END $$

-- 删除
DELIMITER;
drop PROCEDURE insert_emp;

4.2、创建往dept表中插入数据的存储过程

-- 执行存储过程，往dept表添加随机数据
DELIMITER $$
CREATE PROCEDURE insert_dept(IN START INT(10),IN max_num INT(10))
BEGIN
DECLARE i INT DEFAULT 0;
SET autocommit = 0;
REPEAT
SET i = i +1;
INSERT INTO dept(deptno,dname,loc) VALUES ((START+i),rand_string(10),rand_string(8));
UNTIL i = max_num
END REPRAT;
COMMIT;
END $$

5、调用存储过程

5.1 、dept

DELIMITER;
CALL insert_dept(100,10);

5.2、emp

-- 执行存储过程，往emp表中添加50万条数据
DELIMITER;
CALL insert_emp(100001,500000);

（六）MySQL高级——批量插入数据脚本

猜你喜欢