大数据量分页问题优化sql代码

Posted koaler

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了大数据量分页问题优化sql代码相关的知识,希望对你有一定的参考价值。

以下分享一点我的经验

 

一般刚开始学SQL语句的时候,会这样写

 

代码如下:

SELECT * FROM table ORDER BY id LIMIT 1000, 10;

但在数据达到百万级的时候,这样写会慢死

 

代码如下:

SELECT * FROM table ORDER BY id LIMIT 1000000, 10;

 

也许耗费几十秒

 

网上很多优化的方法是这样的


代码如下:

SELECT * FROM table WHERE id >= (SELECT id FROM table LIMIT 1000000, 1) LIMIT 10;

 

是的,速度提升到0.x秒了,看样子还行了

可是,还不是完美的!

 

以下这句才是完美的!


代码如下:

SELECT * FROM table WHERE id BETWEEN 1000000 AND 1000010;

 

比上面那句,还要再快5至10倍

 

另外,如果需要查询 id 不是连续的一段,最佳的方法就是先找出 id ,然后用 in 查询


代码如下:

SELECT * FROM table WHERE id IN(10000, 100000, 1000000...);

 

 

再分享一点

查询字段一较长字符串的时候,表设计时要为该字段多加一个字段,如,存储网址的字段

查询的时候,不要直接查询字符串,效率低下,应该查询该字串的crc32或md5 

以上是关于大数据量分页问题优化sql代码的主要内容,如果未能解决你的问题,请参考以下文章

MySQL大数据量分页查询方法及其优化

MySQL大数据量分页查询优化

MySQL大数据量分页查询优化

MySQL大数据量分页查询优化

MySQL大数据量分页查询优化

MySQL大数据量分页查询方法及其优化