mysql如何实现循环插入千万级数据？
1.建表：
CREATE TABLE `mysql_genarate` ( `id` int(11) NOT NULL AUTO_INCREMENT, `uuid` varchar(50) DEFAULT NULL, PRIMARY KEY (`id`)) ENGINE=InnoDB AUTO_INCREMENT=5990001 DEFAULT CHARSET=utf8
2.创建一条条循环插入的存储过程
create procedure test_two1() begin declare i int default 0; while i < 3000 do INSERT into mysql_genarate(uuid) VALUES(UUID()); set i = i + 1; end while; end #
使用 call test_two1(); 测试，3000条数据耗时74秒，如果是千万级数据，这个速度将无法忍受。
所以我在网上找了一下优化的方法，发现可以拼接批量插入的sql语句，速度提升很多；
3.优化后的存储过程
Revid AI
AI短视频生成平台
96 查看详情
CREATE PROCEDURE insertPro(in sum INT)BEGINDECLARE count INT DEFAULT 0;DECLARE i INT DEFAULT 0;set @exesql = concat("insert into mysql_genarate(uuid) values");set @exedata = "";set count=0;set i=0;while count0 then set @exedata = SUBSTRING(@exedata, 2); set @exesql = concat("insert into mysql_genarate(uuid) values ", @exedata); prepare stmt from @exesql; execute stmt; DEALLOCATE prepare stmt;end if;end;
调用 call insertPro(3000) ，耗时零点几秒，这个速度可以接受。
接着调用 call insertPro(30000000) ;测试3000万条数据插入，结果耗时1824.203s(30分钟)。个人电脑这个速度可以了。
另外，采用java多线程同时拼接sql，每10000条提交一次的方式，在8个线程同时运行的情况下，3000万条数据插入耗时336s，1亿条数据插入耗时1087s。
相关参考：MySQL教程
以上就是mysql如何实现循环插入千万级数据的详细内容，更多请关注创想鸟其它相关文章！
版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容， 请发送邮件至 chuangxiangniao@163.com 举报，一经查实，本站将立刻删除。
发布者：程序猿，转转请注明出处：https://www.chuangxiangniao.com/p/1034588.html
微信扫一扫 
支付宝扫一扫 
