用存储过程向数据库添加大量数据mysql

Posted fyter

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了用存储过程向数据库添加大量数据mysql相关的知识,希望对你有一定的参考价值。

预分配ID的设计,需要先为数据库生成大量的数据。比如对用户ID有要求的系统,那么用户ID就要预先生成。

 

通过python,php,c/c++/c#,js等程序生成也是可以,但需要这些程序环境,而且单条插入太慢,又因为数据包大小问题,需要切割INSERT语句。还要写连接字符串,安装组件等等,比较麻烦。

我写了一个通过存储过程即可实现大批量插入的代码,虽然也是要切割,但减少了很多环节,使数据库部分更完整,更容易分发与部署。

其核心思想是拼接字符串concat,执行execute,大于1万行则分开执行。

首先创建测试用的表:

CREATE TABLE `map` (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  `gp` point DEFAULT NULL,
  PRIMARY KEY (`id`)
) ENGINE=InnoDB;

然后是存储过程:

CREATE PROCEDURE `init_map`(in count int)
BEGIN
    declare jump int DEFAULT count;
    WHILE jump>0 DO BEGIN
        DECLARE i INT DEFAULT 1;
        DECLARE c INT DEFAULT jump;
        IF c>10000 THEN
            SET c=10000;
        END IF;
        SET @sq=concat("INSERT INTO map(gp) VALUES (st_geomfromtext(POINT(",(rand()*50+75)," ",(rand()*50+75),")))");
        WHILE i<c DO
          SET @sq=concat(@sq,",(st_geomfromtext(POINT(",(rand()*50+75)," ",(rand()*50+75),")))");
          SET i=i+1;
        END WHILE;
        SELECT @sq;
        PREPARE s FROM @sq;
        EXECUTE s;
        DEALLOCATE PREPARE s;
        SET jump=jump-c;
    END;
    END WHILE;
END

 然后是执行存储过程,10万行,观察时间,当然是很快的。

CALL init_map(100000);

 

以上是关于用存储过程向数据库添加大量数据mysql的主要内容,如果未能解决你的问题,请参考以下文章

批量向MySQL导入1000万条数据的优化

mysql存储过程怎样批量插入数据

PHP+mysql数据的添加修改删除

mysql写存储过程对单表插入测试数据,出问题

怎么写存储过程,向数据库中批量插入数据?

怎么在mysql中查询已建立的存储过程