DBeaver客户端工具结果集缓存实现的猜测

Posted 2022-01-06 bisal

《MySQL客户端预读数据的区别》文章中提到了DBeaver设置"集数获取大小"，我猜测是通过在执行的SQL上添加limit得到的，

有朋友的评论说，可能用到了jdbc流式查询，

针对mysql，JDBC驱动不支持像Oracle中使用的fetchSize缓冲区，但是如果设置PreparedStatement的setFetchSize为Integer.MIN_VALUE，或者使用方法Statement.enableStreamingResults()，就可以实现流式查询，即执行ResultSet.next()方法时，会通过数据库连接一条一条的返回，不会大量占用客户端的内存，导致OOM。

我们知道，MySQL支持limit功能，limit子句可以强制SELECT语句返回指定的记录数，limit接受一个或两个数字参数，参数必须是一个整数常量。如果给定两个参数，第一个参数指定第一个返回记录行的偏移量，第二个参数指定返回记录行的最大数目，初始记录行的偏移量是0(而不是1)，

SELECT * FROM table LIMIT [offset,] rows | rows OFFSET offset

几个例子，

// 初始记录行的偏移量是0，因此，检索记录行6-15，
SELECT * FROM table LIMIT 5, 10;  
  
// 为了检索从某一个偏移量到记录集的结束所有的记录行，可以指定第二个参数为-1，
// 检索记录行 6-last.
SELECT * FROM table LIMIT 5, -1;   
  
// 如果只给定一个参数，他表示返回最大的记录行数目，
// 检索前5个记录行
// LIMIT n等价于LIMIT 0, n
SELECT * FROM table LIMIT 5;

因此，从功能上，如果针对MySQL，流式查询和limit，应该都可以实现DBeaver的功能，但是从通用性上，显然JDBC的功能，更加通用和简单，毕竟不是所有的数据库都支持limit，尽管存在他的替代方案，但这会让处理逻辑更加复杂。当然，纠结这个问题，其实没什么意义，能理解这些检索数据的方法和原理，不同的场景下，选择合适的方法，这才是更重要的。

近期更新的文章：

《Oracle的N-数据类型困惑》

《问题定位的思考》

《小白学习MySQL - varchar类型字段为什么经常定义成255？》

《介绍一款Oracle的利器小工具-SQLcl》

《ClickHouse的ontime测试数据集》

文章分类和索引：

《公众号800篇文章分类和索引》