MySQL循环插入千万级数据

吾爱主题 阅读:158 2024-04-01 23:49:56 评论:0

1、创建测试表

?
1 2 3 4 5 CREATE TABLE `mysql_genarate` (   `id` int (11) NOT NULL AUTO_INCREMENT,   `uuid` varchar (50) DEFAULT NULL ,   PRIMARY KEY (`id`) ) ENGINE=InnoDB AUTO_INCREMENT=5999001 DEFAULT CHARSET=utf8;

2、创建一个循环插入的存储过程

?
1 2 3 4 5 6 7 8 CREATE DEFINER=`root`@`localhost` PROCEDURE `test_two1`( )    BEGIN    DECLARE i INT DEFAULT 0;    WHILE i < 3000 DO      INSERT INTO mysql_genarate ( uuid ) VALUES ( UUID( ) );      SET i = i + 1;    END WHILE; END

调用测试call test_two1(), 测试10000条数据耗时几分钟,如果是千万级数据,这个速度将无法忍受。

3、优化存储过程

使用批量插入的sql语句

?
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 CREATE DEFINER=`root`@`localhost` PROCEDURE `insertPro`( IN sum INT )    BEGIN    DECLARE count INT DEFAULT 0;    DECLARE i INT DEFAULT 0;    SET @exesql = concat( "insert into mysql_genarate(uuid) values" );    SET @exedata = "" ;    SET count = 0;    SET i = 0;    WHILE count < sum DO      SET @exedata = concat( @exedata, ",(UUID())" );      SET count = count + 1;      SET i = i + 1;      IF i % 1000 = 0 THEN        SET @exedata = SUBSTRING ( @exedata, 2 );        SET @exesql = concat( "insert into mysql_genarate(uuid) values " , @exedata );        PREPARE stmt FROM @exesql;        EXECUTE stmt;        DEALLOCATE PREPARE stmt;        SET @exedata = "" ;      END IF;    END WHILE;    IF length( @exedata ) > 0 THEN      SET @exedata = SUBSTRING ( @exedata, 2 );      SET @exesql = concat( "insert into mysql_genarate(uuid) values " , @exedata );      PREPARE stmt FROM @exesql;      EXECUTE stmt;      DEALLOCATE PREPARE stmt;    END IF; END

调用 call insertPro(10000) ,耗时零点几秒,这个速度可以接受。

以上就是MySQL循环插入千万级数据的详细内容,更多关于MySQL循环插入的资料请关注服务器之家其它相关文章!

原文链接:https://www.myong.top/view/88

可以去百度分享获取分享代码输入这里。
声明

1.本站遵循行业规范,任何转载的稿件都会明确标注作者和来源;2.本站的原创文章,请转载时务必注明文章作者和来源,不尊重原创的行为我们将追究责任;3.作者投稿可能会经我们编辑修改或补充。

【腾讯云】云服务器产品特惠热卖中
搜索
标签列表
    关注我们

    了解等多精彩内容