使用jdbc向mysql批量添加几十万数据

Posted ttyyou

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了使用jdbc向mysql批量添加几十万数据相关的知识,希望对你有一定的参考价值。

package com.tt.mybatis.test;

import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.PreparedStatement;
import java.sql.SQLException;
import java.util.Random;

public class InsertIntoDBData {
    
    private static String url = "jdbc:mysql://localhost:3306/test?characterEncoding=utf-8";
    private static String user = "root";
    private static String password = "root";
    
    public static void main(String[] args) {
        Connection conn = null;
        PreparedStatement ps = null;
        long starTime = System.currentTimeMillis();
        try {
            Class.forName("com.mysql.jdbc.Driver");
            conn = DriverManager.getConnection(url,user,password);
            //String sql1 = "insert into course(c_id,name) values (?,?)";
            //String sql2 = "insert into students(id,name) values (?,?)";
            //s_id是students表id,只有7w个数据
            //c_id是course表id,只有100个数据
            String sql3 = "insert into sc(sc_id,s_id,c_id,score) values (?,?,?,?)";
            ps = conn.prepareStatement(sql3);
            Random rand = new Random();
            for (int i = 1; i <= 700000; i++ ) {
                ps.setInt(1,i);
                ps.setInt(2,rand.nextInt(70000));
                ps.setInt(3,rand.nextInt(100));
                ps.setInt(4,rand.nextInt(100));
                ps.addBatch();
            }
            ps.executeBatch();
            long endTime = System.currentTimeMillis();
            System.out.println("OK,用时:"+ (endTime - starTime) + "毫秒");

        } catch (Exception e) {
            // TODO Auto-generated catch block
            e.printStackTrace();
        } finally {
            if (ps != null ) {
                try {
                    ps.close();
                } catch (SQLException e) {
                    // TODO Auto-generated catch block
                    e.printStackTrace();
                }
            }
            if (conn != null ) {
                try {
                    conn.close();
                } catch (SQLException e) {
                    // TODO Auto-generated catch block
                    e.printStackTrace();
                }
            }
            
        }
            
        
    }

}
运行结果:竟然要44分钟
技术图片

 

 

 

 

以上是关于使用jdbc向mysql批量添加几十万数据的主要内容,如果未能解决你的问题,请参考以下文章

jdbc 批量插入数据,多少条批量插入效率最高

JDBC 复习4 批量执行SQL

JMeter接口测试-Jmeter向数据库批量插入数据(随机变量的使用)

部分代码片段

JAVA 使用原生jdbc批量添加,表被锁住问题

mysql批量更新出错