ElasticSearch 知识汇总

Posted 2022-01-22 毕小宝

背景

本文整理 ElasticSearch 相关的知识及网络资源。

DSL 及用法

1. 叶子条件
2. 组合条件

原理部分

1. 集群模型，_routing 规则：参考文档

2. 数据流转经历的三个区域：Buffer->OSCache->Disk。

3. 三类文件及作用：TransLog【Down 机后恢复数据到内存】、Segment File【一个完整的逆向索引文件，fresh 操作将 Buffer 中的数据生成一个 Segment】、.del【内存中临时被删掉的文档信息】

4. 数据写入流程：参考文档

5. 数据更新流程：
   参考文档

create/index/update 的区别

总结一个公式：index = create + 覆盖 各种情形的思维导图：

1. create：完全新建文档，如果指定 _id 且存在，就会报错；
2. index：可以指定版本号，且有效版本号必须等于当前文档的版本号，否则报错；
3. update：删除旧的，写入新的，会调用 InternalEngine 中的get方法，来获取整个文档信息，从而实现针对特定字段进行修改。

ES 集群脑裂问题

1. 产生原因：log = Latency + Overload + Gc
2. 解决办法：ping_timeout、minimum_master_nodes、node.master 和 node.data 角色分离。

参考文档