嵌套排序未按预期工作 ElasticSearch

Posted 2023-03-16

【中文标题】嵌套排序未按预期工作 ElasticSearch

【英文标题】：Nested sorting not working as expected ElasticSearch

【发布时间】：2019-05-24 14:05:55

【问题描述】：

要求

使用与 custom_field_id 匹配的 custom_field_values 对产品进行排序

映射

  "mapping": 
    "product": 
      "properties": 
        "user_id": 
          "type": "integer"
        
        "custom_field_values": 
          "type": "nested",
          "properties": 
            "custom_field_id": 
              "type": "integer"
            ,
            "id": 
              "type": "integer"
            ,
            "value": 
              "type": "text",
              "fields": 
                "keyword": 
                  "type": "keyword"
                
              
            
          
        
      
    
  

示例数据

  
    "_type": "product",
    "_source": 
      "user_id": 1,
      "custom_field_values": [
         "id": 1, "custom_field_id": 1, "value": "A",
         "id": 2, "custom_field_id": 2, "value": "B",
         "id": 3, "custom_field_id": 3, "value": "C",
      ]
    
  ,
  
    "_type": "product",
    "_source": 
      "user_id": 2,
      "custom_field_values": [
         "id": 4, "custom_field_id": 1, "value": "Y",
         "id": 5, "custom_field_id": 2, "value": "Z",
      ]
    
  ,
  
    "_type": "product",
    "_source": 
      "user_id": 3,
      "custom_field_values": [
         "id": 6, "custom_field_id": 2, "value": "P",
         "id": 7, "custom_field_id": 3, "value": "Q",
      ]
    
  

预期

我应该能够按custom_field_values.custom_field_id 对整个product 过滤器进行排序，按custom_field_values.value 排序

示例查询

  "size":100,
  "from":0, 
  "query":
    "bool":
      "filter":
        "match":
          "user_id":1
        
      
    
  ,
  "sort":[
    
      "custom_field_values.value.keyword":
        "order":"desc",
        "nested":
          "path":"custom_field_values",
          "filter":
            "match":
              "custom_field_values.custom_field_id": 2
            
          
        
      
    
  ]

更新的查询

  "size":100,
  "from":0, 
  "query":
    "bool":
      "filter":
        "match":
          "user_id":1
        
      
    ,
    "nested":  
      "path": "comments",
      "filter": 
        "custom_field_values.custom_field_id": 2
      
    
  ,
  "sort":[
    
      "custom_field_values.value.keyword":
        "order":"desc",
        "nested":
          "path":"custom_field_values",
          "filter":
            "match":
              "custom_field_values.custom_field_id": 2
            
          
        
      
    
  ]

结果顺序应该是2nd product，然后是3rd product 和1st product。如果我想循环浏览产品并打印custom_field_values.value，我应该得到Z、P、B。

【问题讨论】：

我还在query 中添加了嵌套的filter，现在可以为一些自定义字段值提供正确的结果，但是存储带有特殊字符的值的列仍然没有正确排序。

为什么custom_field_id的值是字符串类型，但在schema中是整数？

@Raman 感谢您指出这一点，更新了问题。我手动准备了该数据，现在它是正确的。

【参考方案1】：

所以，问题出在区分大小写的数据上。 https://www.elastic.co/guide/en/elasticsearch/reference/current/normalizer.html 解决了我的问题。

"settings": 
    "analysis": 
      "normalizer": 
        "my_normalizer": 
          "type": "custom",
          "char_filter": [],
          "filter": ["lowercase", "asciifolding"]
        
      
    
  

现在我们可以将此规范器与关键字字段类型一起使用：

field :field_name, type: 'keyword', normalizer: 'my_normalizer'

希望这对您有所帮助。