MySQL——批量插入数据脚本

最新推荐文章于 2023-07-15 00:12:36 发布

武汉小喽啰

最新推荐文章于 2023-07-15 00:12:36 发布

阅读量1.4k

点赞数 2

CC 4.0 BY-SA版权

分类专栏：数据库相关文章标签： mysql

本文链接：https://blog.csdn.net/weixin_43318134/article/details/115588268

数据库相关专栏收录该内容

6 篇文章

订阅专栏

本文介绍了一种在MySQL数据库中高效批量插入50万条记录的方法，包括创建数据库表结构、设置必要的MySQL参数、使用存储过程及自定义函数生成随机数据等步骤。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

往表中插入50万记录

1. 建表

CREATE DATABASE bigData;
USE bigData;

-- 1. dept表
CREATE TABLE dept (
	id INT UNSIGNED PRIMARY KEY AUTO_INCREMENT,
	deptno MEDIUMINT UNSIGNED NOT NULL DEFAULT 0,
	dname VARCHAR(20) NOT NULL DEFAULT "",
	loc VARCHAR(13) NOT NULL DEFAULT ""
) ENGINE INNODB DEFAULT CHARSET=utf8;

-- 2. emp表
CREATE TABLE emp(
	id INT UNSIGNED NOT NULL PRIMARY KEY AUTO_INCREMENT,
	empno MEDIUMINT UNSIGNED NOT NULL DEFAULT 0 COMMENT '编号',
	ename VARCHAR(20) NOT NULL DEFAULT "" COMMENT '名称',
	job VARCHAR(9) NOT NULL DEFAULT "" COMMENT '工作',
	mgr MEDIUMINT UNSIGNED NOT NULL DEFAULT 0 COMMENT '上级编号',
	hiredate DATE NOT NULL COMMENT '入职之间',
	sal DECIMAL(7,2) NOT NULL COMMENT '薪水',
	comm DECIMAL(7,2) NOT NULL COMMENT '红利',
	deptno MEDIUMINT UNSIGNED NOT NULL DEFAULT 0 COMMENT '部门编号'
) ENGINE INNODB CHARSET=utf8;

2. 设置参数log_bin_trust_function_creators

由于mysql在进行大数据量的数据插入的时候，会报错，因此需要设置log_bin_trust_function_creators

2.1 查看二进制函数创建参数是否开启

show variables like 'log_bin_trust_function_creators';

2.2 开启

2.2.1 代码开启

set global log_bin_trust_function_creators=1;

这样添加了参数之后，如果mysql重启，上述参数又会消失

2.2.2 配置文件开启

Windows下：my.ini【mysqld】加上log_bin_trust_function_creators=1

linux下：/etc/my.cnf下my.cnf【mysqld】加上log-bin_trust_function_creators=1

3. 创建函数，保证每条数据都不同

3.1 随机产生字符串

编写函数

DELIMITER $$
CREATE FUNCTION rand_string(n INT) RETURNS VARCHAR(255)
BEGIN
	DECLARE chars_str VARCHAR(100) DEFAULT 'abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ';
	DECLARE return_str VARCHAR(255) DEFAULT '';
	DECLARE i INT DEFAULT 0;
	
	WHILE i < n DO
		SET return_str=CONCAT(return_str,SUBSTRING(chars_str,FLOOR(1+RAND()*52),1));
		SET i = i+1;
	END WHILE;
	RETURN return_str;
END $$

3.2 随机产生部门编码

编写函数

DELIMITER $$
CREATE FUNCTION rand_num() RETURNS INT(5)
BEGIN
	DECLARE i INT DEFAULT 0;
	SET i = FLOOR(10 + RAND()*10);
	RETURN i;
END $$

4. 创建存储过程

4.1 emp插入数据的存储过程

DELIMITER $$
CREATE PROCEDURE insert_emp(IN START INT(10),IN max_num INT(10))
BEGIN
	DECLARE i INT DEFAULT 0;
	# set autocommit=0 把自动提交设置成0
	SET autocommit = 0;
	REPEAT
		SET i = i + 1;
		INSERT INTO emp (empno,ename,job,mgr,hiredate,sal,comm,deptno) 
		VALUES((START + i),rand_string(6),'SALESMAN',0001,CURDATE(),2000,400,rand_num());
	UNTIL i = max_num
	END REPEAT;
	COMMIT;
END $$

4.2 dept表插入数据存储过程

DELIMITER $$
CREATE PROCEDURE insert_dept(IN START INT(10),IN max_num INT(10))
BEGIN
	DECLARE i INT DEFAULT 0;
	SET autocommit = 0;
	REPEAT
		SET i = i + 1;
		INSERT INTO dept(deptno,dname,loc) VALUES((START+i),rand_string(10),rand_string(8));
	UNTIL i = max_num
	END REPEAT;
END $$

5. 调用存储过程

5.1 调用部门存储过程

DELIMITER ;
CALL insert_dept(100,10);

执行之后，查询数据库：

5.2 调用员工存储过程

DELIMITER ;
CALL insert_emp(10001,500000);

查询数据库：