MyBatis批量插入为什么比单条插入块?

Posted java李杨勇

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了MyBatis批量插入为什么比单条插入块?相关的知识,希望对你有一定的参考价值。

今天在利用excel处理业务数据的时候开始打算一条一条插入数据库!因为要做数据校验和数据保存返回id之后进行其他表也插入!大约有30000多条数据库吧!花了大约3-5分钟,前端也会出现超时请求问题、让我意识到一条一条插入影响性能,但是因为业务逻辑的需要,又不得不一条一条插入,后面改变了思维还是必须批量插入数据!并将其他表也需要保存的数据也临时存在Java对象中!在主对象保存之后进行遍历获取插入。

一条一条数据插入为什么会这么慢呢?如果是单条执行数据操作,比如有30000条数据,那么你得向数据库服务器发起30000次请求!如果使用批量插入就只需要发送一次请求。

其实就像前端发送http请求一样,在请求的时候消耗花费了很多时间。

直接看一下批量保存的源代码吧

    public boolean saveBatch(Collection<T> entityList, int batchSize) 
        String sqlStatement = this.sqlStatement(SqlMethod.INSERT_ONE);
        SqlSession batchSqlSession = this.sqlSessionBatch();
        Throwable var5 = null;

        try 
            int i = 0;

            for(Iterator var7 = entityList.iterator(); var7.hasNext(); ++i) 
                Object anEntityList = var7.next();
                batchSqlSession.insert(sqlStatement, anEntityList);
                if(i >= 1 && i % batchSize == 0) 
                    batchSqlSession.flushStatements();
                
            

            batchSqlSession.flushStatements();
            return true;
         catch (Throwable var16) 
            var5 = var16;
            throw var16;
         finally 
            if(batchSqlSession != null) 
                if(var5 != null) 
                    try 
                        batchSqlSession.close();
                     catch (Throwable var15) 
                        var5.addSuppressed(var15);
                    
                 else 
                    batchSqlSession.close();
                
            

        
    

这里 batchSqlSession.flushStatements()其实就是在做拼接SQL的操作!将单个插入的方法为每个实体组装一个insert 语句,然后执行数据库插入操作

以上是关于MyBatis批量插入为什么比单条插入块?的主要内容,如果未能解决你的问题,请参考以下文章

mybatis- spring 批量实现数据导入数据库

MyBatis 批量插入的 3 种方式!还有谁不会?

Mybatis批量插入Oracle

springboot+mybatis批量插入mysql,linux比windows慢很多。啥可能导致它?

Mybatis批量插入返回自增主键(转)

Mybatis实现oracle批量插入及分页查询