码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • ES核心概念、IK分词器


    目录

    ES核心概念

     倒排索引

    IK分词器

    什么是ik分词器?

    安装ik分词器

    使用Kibana测试

    ik分词器增加自定义词汇


     

    ES核心概念

     

     

     倒排索引

     

       当用户在主页上搜索关键词“华为手机”时,假设只存在正向索引(forward index),那么就需要扫描索引库中的所有文档,找出所有包含关键词“华为手机”的文档,再根据打分模型进行打分,排出名次后呈现给用户。因为互联网上收录在搜索引擎中的文档的数目是个天文数字,这样的索引结构根本无法满足实时返回排名结果的要求。

           正向索引   相当于通过key找value

    所以,搜索引擎会将正向索引重新构建为倒排索引,即把文件ID对应到关键词的映射转换为关键词到文件ID的映射,每个关键词都对应着一系列的文件,这些文件中都出现这个关键词。

            倒排索引  相当于通过value去找key   即从词的关键字,去找文档。

    IK分词器

    什么是ik分词器?

     

    安装ik分词器

     github下载网址:Releases · medcl/elasticsearch-analysis-ik · GitHub

    版本也要对应

    下载并解压到插件目录下:  

     

    查看加载进来的插件:

    使用Kibana测试

     ik_smart:

    按顺序打断点分词,不会重复出现

    ik_max_word : 最细粒度划分,穷尽词库的可能

     

    自己需要的词,需要自己加到分词器的字典中

    ik分词器增加自定义词汇

     

     新建一个自定义字典dic

     

     

     重启ES

     

    未配置字典时:

    配置字典后 :

     

  • 相关阅读:
    贪心算法之哈夫曼编码
    Linux 系统监控与性能调优
    【WRF-SOLAR】太阳辐射预报模式及改进技术在气象、农林、电力等相关领域中的实践应用
    互联网Java工程师面试题·微服务篇·第一弹
    【数据结构与算法】一文带你学透——算法分析
    化学实验室大型仪器设备管理系统
    新手如何学习挖漏洞?看这篇就够了【网络安全】
    小程序中如何使用自定义组件应用及搭建个人中心布局
    C++:指针:void*指针(跳跃力未定的指针)
    C/C++基础
  • 原文地址:https://blog.csdn.net/m0_56017821/article/details/126808750
  • 最新文章
  • 【JVM】编译执行与解释执行的区别是什么?JVM 使用哪种方式?
    用 Hashids 优雅解决 C 端自增 ID 暴露问题
    V8引擎 精品漫游指南--Ignition篇(上) 指令 栈帧 槽位 调用约定 内存布局 基础内容
    LLVM Pass快速入门(四):代码插桩
    milkup:桌面端 markdown AI续写和即时渲染
    基于项目工程构建SBOM(软件物料清单)的研究
    鸿蒙应用开发UI基础第二节:鸿蒙应用程序框架核心解析与实操
    .NET 中如何快速实现 List 集合去重?
    扣子Coze实战:从0到1打造抖音+小红书热点监控智能体
    浅谈数据访问层
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
小工具 小游戏
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1

京公网安备 11010502049817号