Elasticsearch 7.x Nested 嵌套类型查询 ES 干货

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Elasticsearch 7.x Nested 嵌套类型查询 ES 干货相关的知识,希望对你有一定的参考价值。

参考技术A Elasticsearch 有很多数据类型,大致如下:

注意:tring/nested/array 类型字段不能用作排序字段。因此 string 类型会升级为:text 和 keyword。keyword 可以排序,text 默认分词,不可以排序。

Elasticsearch 7.x 文档中,这样写到:

Nested (嵌套)类型,是特殊的对象类型,特殊的地方是索引对象数组方式不同,允许数组中的对象各自地进行索引。目的是对象之间彼此独立被查询出来。

在 ES 的 my_index 索引中存储 users 字段。比如说:

其实存储看上去跟 Object 类型一样,只不过底层原理对数组 users 字段索引方式不同。设置 users 字段的索引方式 Nested 嵌套类型:

比如小老弟我有一波小粉丝,users 字段类型是 object。存储如下:

比如 18 岁大姑娘 Alice 是小老弟我的粉丝,她也可能是周杰伦的粉丝。那这边就有一个需求,即应用场景:

如何找到 18 岁大姑娘 Alice "name" : "Alice","age" : "18" 关注的所有明星呢?

如果用老的查询语句是这样搜索的:

结果发现结果是不对的,路人甲 这条记录也出现了。
因为匹配到了第一个 Alice + 第二个 Jeff 的 18。所以这种查询不满足这个场景

那么需要使用 Nested 类型并用 Nested 查询,即让数组中的对象各自地进行索引。目的是对象之间彼此独立被查询出来。

根据 2.2 如何使用 Nested 类型,将 users 字段类型从 object 修改为 nested:

修改后,对应的 Nested Query ,如下:

语法很简单就是:

这样查询得结果就是对的。

这边测试过,给大家一个测试报告和建议。

压测环境:3 个 server ,6 个 ES 节点

压测结论: 使用上小节查询语句,50 并发情况下,导致千兆网卡被打满了。TPS 4000 左右,如果提高并发,就会增加 RT。所以如果高性能大流量情况下,必须用 Nested 应该从网络流量方向进行优化。二者,尽量减少大数据对象的返回

建议:泥瓦匠建议,你听听看

(完)

参考资料:

以上是关于Elasticsearch 7.x Nested 嵌套类型查询 ES 干货的主要内容,如果未能解决你的问题,请参考以下文章

Elasticsearch:运用 Java 对索引进行 nested 搜索

Elasticsearch:运用 Java 对索引进行 nested 搜索

elasticsearch的嵌套查询nested

Elasticsearch es nested 嵌套类型 详解

Elasticsearch Nested 选型,先看这一篇!

干货 | Elasticsearch Nested 数组大小求解,一网打尽!