JDBC Batch 执行速度极慢
Posted
技术标签:
【中文标题】JDBC Batch 执行速度极慢【英文标题】:JDBC Batch executing extremely slow 【发布时间】:2012-11-10 08:54:44 【问题描述】:谁能告诉我我做错了什么我在 mysql 中执行了 350 次插入,这需要 40 秒。
这里是代码
long t0 = System.currentTimeMillis();
Connection con = connectionProvider.getConnection();
PreparedStatement s = con.prepareStatement("insert into domkee.friends(idFriends,friend1Id,friend2Id,friend2Name) values(?,?,?,?)");
con.setAutoCommit(false);
for (Friend f : friends)
s.setLong(1, 0);
s.setLong(2, f.getFriend1Id());
s.setLong(3, f.getFriend2Id());
s.setString(4, f.getFriend2Name());
s.addBatch();
long t1 = System.currentTimeMillis() - t0;
s.executeBatch();
long t2 = System.currentTimeMillis()-t0;
con.commit();
long t3 = System.currentTimeMillis()-t0;
s.close();
con.close();
long t4 = System.currentTimeMillis()-t0;
System.out.println(((double)t1/1000) + ";" + ((double)t2/1000) + ";" + ((double)t3/1000) + ";" + ((double)t4/1000));
这是控制台:
0.156;39.251;39.376;39.486
所以.executeBatch()
大约需要 40 秒,可能是什么问题?
【问题讨论】:
通过 CLI 或使用工具运行它需要多长时间? 从 MySQL Workbench 来看,它需要的时间大致相同(39-42 秒)。如果相关,服务器是在 AWS 的一个小实例上运行的 MySQL 5 所以我认为它与JAVA无关,我认为您的服务器很慢。 也许您的限制导致它需要很长时间?你有没有运行解释,然后你的查询? 所以你说它是硬件?有什么办法可以让它更快? 【参考方案1】:将 ?rewriteBatchedStatements=true
添加到 JDBC 网址的末尾。它会给你一个严重的性能改进。请注意,这是特定于 MySql 的,不会对任何其他 JDBC 驱动程序产生任何影响。
【讨论】:
更多详情slava-technical.blogspot.com/2010/07/… 以上建议太棒了 @jtahlborn 该博客仅供读者邀请。请修复它。或者让它打开。 @Sibidharan 我无法控制博客文章。网络上还有很多其他地方提供了更多详细信息。 嗨,我尝试将此解决方案与 ORacle 一起使用,但无法使用。请帮忙。 ***.com/questions/46969005/…以上是关于JDBC Batch 执行速度极慢的主要内容,如果未能解决你的问题,请参考以下文章
JDBC - Windows 上的连接速度极慢,Linux 上的连接很好
hibernate的速度问题--hibernate.jdbc.fetch_size和 hibernate.jdbc.batch_size