冰a冰 2023-03-13 10:51 采纳率: 85.7%
浏览 23
已结题

ElasticSearch如何设置某个字段被检索时忽略全角半角格式

部分数据在获取时有全角半角的问题,尤其是英文字母,底层所有数据的清洗工作量太大,且涉及数据种类多,字段多。
所以想从检索方面下手,标点在检索时是可以直接忽略的,不知道有没有忽略全角半角的功能。

  • 写回答

1条回答 默认 最新

  • Leodong. 2023-03-13 11:35
    关注

    ElasticSearch提供了一个字符过滤器(Character Filter)叫做"normalize_charmap",它可以在检索时将指定字符映射成其他字符,从而实现忽略全角半角格式的功能。

    具体步骤如下:

    1.在创建索引时,在分析器中指定字符过滤器(normalize_charmap)。
    例如:

    PUT /my_index
    {
      "settings": {
        "analysis": {
          "analyzer": {
            "my_analyzer": {
              "type": "custom",
              "tokenizer": "standard",
              "char_filter": [
                "my_char_filter"
              ]
            }
          },
          "char_filter": {
            "my_char_filter": {
              "type": "mapping",
              "mappings": [
                "A=>A",
                "B=>B",
                "0=>0",
                "1=>1",
                ...
              ]
            }
          }
        }
      },
      "mappings": {
        "properties": {
          "my_field": {
            "type": "text",
            "analyzer": "my_analyzer"
          }
        }
      }
    }
    
    
    

    2.搜索时,使用相同的分析器进行分词和字符过滤。
    例如:

    GET /my_index/_search
    {
      "query": {
        "match": {
          "my_field": {
            "query": "abc123",
            "analyzer": "my_analyzer"
          }
        }
      }
    }
    
    
    

    在上面的例子中,将全角的大写字母和数字映射成对应的半角字符,从而在搜索时忽略全角半角格式的差异。

    需要注意的是,使用字符过滤器会增加索引和搜索的开销,因此需要根据实际情况进行权衡。


    以上回答如果对您有用,望采纳~谢谢

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题?

问题事件

  • 系统已结题 3月22日
  • 已采纳回答 3月14日
  • 创建了问题 3月13日

悬赏问题

  • ¥15 我想在一个软件里添加一个优惠弹窗,应该怎么写代码
  • ¥15 fluent的在模拟压强时使用希望得到一些建议
  • ¥15 STM32驱动继电器
  • ¥15 Windows server update services
  • ¥15 关于#c语言#的问题:我现在在做一个墨水屏设计,2.9英寸的小屏怎么换4.2英寸大屏
  • ¥15 模糊pid与pid仿真结果几乎一样
  • ¥15 java的GUI的运用
  • ¥15 Web.config连不上数据库
  • ¥15 我想付费需要AKM公司DSP开发资料及相关开发。
  • ¥15 怎么配置广告联盟瀑布流