Elasticsearch from+size 超过10000结果解决方法

Posted 2020-10-10 Hail Hydra

方法一：

如果需要搜索分页，可以通过from size组合来进行。from表示从第几行开始，size表示查询多少条文档。from默认为0，size默认为10，

如果搜索size大于10000，需要设置index.max_result_window参数 

注意：size的大小不能超过index.max_result_window这个参数的设置，默认为10,000。 

PUT _settings
{
    "index": {
        "max_result_window": "10000000"
    }
}

方式二：

使用 scroll 代替，官方推荐方式。

 

优缺点：

方式一，当结果足够大的时候，会大大加大内存和CPU的消耗。使用非常方便。

方式二： 当结果足够大的时候， scroll 性能更加。但是不灵活和 scroll_id 难管理问题存在。

个人测试：当 结果足够大的时候 产生 scroll_id 性能也不低。如果只是一页页按照顺序，scroll是极好的，但是如果是无规则的翻页，那也是性能消耗极大的。