Elasticsearch 日期时间处理

Posted libin2015

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Elasticsearch 日期时间处理相关的知识,希望对你有一定的参考价值。

Elasticsearch中定义时间的类型为Date

Elasticsearch原生支持date类型,json格式通过字符来表示date类型。所以在用json提交日期至elasticsearch的时候,es会隐式转换,

把es认为是date类型的字符串直接转为date类型。至于什么样的字符串es会认为可以转换成date类型,参考elasticsearch官网介绍:

https://www.elastic.co/guide/en/elasticsearch/reference/current/mapping-date-format.html

 

date type默认格式:

"strict_date_optional_time||epoch_millis"

 

date类型是包含时区信息的,如果我们没有在json代表日期的字符串中显式指定时区,对es来说没什么问题,

但是如果通过kibana显示es里的数据时,就会出现问题,数据的时间会晚8个小时。因为kibana从es里读取的date类型数据,没有时区信息,

kibana会默认当作0时区来解析,但是kibana在通过浏览器展示的时候,会通过js获取当前客户端机器所在的时区,也就是东八区,

所以kibana会把从es得到的日期数据减去8小时。这里就会导致kibana经常遇到的“数据时间延迟8小时”的问题。

所以最佳实践方案就是:我们在往es提交日期数据的时候,直接提交带有时区信息的日期字符串,如:“2016-07-15T12:58:17.136+0800”。

 

##索引中定义的日期格式与提交数据的日期格式要一致,否则会报错。

 

创建索引是指定date format示例:

PUT my_index
{
  "mappings": {
    "_doc": {
      "properties": {
        "date": {
          "type":   "date",
          "format": "yyyy-MM-dd"
        }
      }
    }
  }
}

date官网介绍:
https://www.elastic.co/guide/en/elasticsearch/reference/current/date.html

 

参考:

https://www.2cto.com/database/201806/752189.html


以上是关于Elasticsearch 日期时间处理的主要内容,如果未能解决你的问题,请参考以下文章

动态处理elasticsearch中的空日期

elasticsearch代码片段,及工具类SearchEsUtil.java

ElasticSearch学习问题记录——Invalid shift value in prefixCoded bytes (is encoded value really an INT?)(代码片段

JS代码片段:一个日期离现在多久了

sql 日期转换代码片段 - Dato,120,konvertere

Elasticsearch在Elasticsearch中支持纳秒时间戳