Mysql使用存储过程快速添加百万数据的示例代码
作者:jeremylai 时间:2024-01-19 21:51:26
前言
为了体现不加索引和添加索引的区别,需要使用百万级的数据,但是百万数据的表,如果使用一条条添加,特别繁琐又麻烦,这里使用存储过程快速添加数据,用时大概4个小时。
创建一个用户表
CREATE TABLE `t_sales` (
`id` int(11) NOT NULL AUTO_INCREMENT,
`username` varchar(32) COLLATE utf8_bin DEFAULT NULL COMMENT '用户名',
`password` varchar(64) COLLATE utf8_bin DEFAULT NULL COMMENT '密码 MD5存储',
`register_time` timestamp NULL DEFAULT NULL COMMENT '注册时间',
`type` int(1) DEFAULT NULL COMMENT '用户类型 1,2,3,4 随机',
PRIMARY KEY (`id`),
KEY `idx_username` (`username`) USING BTREE
)
然后创建存储过程,批量添加数据。
用户名以常量和数字拼接
密码是MD5密码
注册时间是当前时间随机往前推几天
type是取1-4随机范围值
create procedure salesAdd()
begin
declare i int default 11;
while i <= 4000000 do
insert into blog.t_sales
(`username`,`password`,`register_time`,type) values
(concat("jack",i),MD5(concat("psswe",i)),from_unixtime(unix_timestamp(now()) - floor(rand() * 800000)),floor(1 + rand() * 4));
set i = i + 1;
end while;
end
然后调用存储过程
call salesAdd()
改进版
虽然使用存储过程添加数据相对一个个添加更加便捷,快速,但是添加几百万数据要花几个小时时间也是很久的,后面在网上找到不少资料,发现mysql每次执行一条语句都默认自动提交,这个操作非常耗时,所以在在添加去掉自动提交。设置 SET AUTOCOMMIT = 0;
create procedure salesAdd()
begin
declare i int default 1;
set autocommit = 0;
while i <= 4000000 do
insert into blog.t_sales
(`username`,`password`,`register_time`,type) values
(concat("jack",i),MD5(concat("psswe",i)),from_unixtime(unix_timestamp(now()) - floor(rand() * 800000)),floor(1 + rand() * 4));
set i = i + 1;
end while;
set autocommit = 1;
end
执行时间387秒,约为六分钟,其中还有一半时间用于md5、随机数的计算。
[SQL]
call salesAdd();
受影响的行: 0
时间: 387.691s
来源:https://www.cnblogs.com/jeremylai7/p/15174617.html
标签:Mysql,数据,存储过程
0
投稿
猜你喜欢
YOLOv5改进之添加CBAM注意力机制的方法
2023-07-22 20:48:52
pycharm 中mark directory as exclude的用法详解
2021-02-27 05:24:07
python从入门到实践之字典
2023-05-11 22:20:17
python一行输入多值的实现详解
2021-07-02 06:52:39
MySQL因大事务导致的Insert慢实例分析
2024-01-22 22:07:54
ASP向Excel导数据(图片)终结版 ASP操作Excel
2011-03-25 10:48:00
python sort、sort_index方法代码实例
2022-12-16 00:43:17
Python不支持 i ++ 语法的原因解析
2022-02-07 12:16:49
SQL Server导出表到EXCEL文件的存储过程
2009-01-06 11:24:00
在pytorch中实现只让指定变量向后传播梯度
2022-03-27 15:35:30
SpringBoot集成内存数据库Sqlite的实践
2024-01-15 10:24:11
vue中的传值及赋值问题
2024-05-28 15:45:32
python+opencv实现文字颜色识别与标定功能
2023-09-05 02:25:27
Python loguru日志库之高效输出控制台日志和日志记录
2023-07-20 04:15:04
MySQL增删查改数据表详解
2024-01-25 06:55:48
python发送邮件的实例代码(支持html、图片、附件)
2023-08-31 00:39:50
Python中 Lambda表达式全面解析
2021-07-05 04:58:01
验证sql保留字工具
2008-05-15 12:34:00
MySQL数据库磁盘优化
2008-11-24 17:29:00
python中yield的用法详解——最简单,最清晰的解释
2021-10-22 21:27:56