首页 > 其他 > 详细

测试Ik分词器以及增加自己的词汇

时间:2021-06-21 20:29:16      阅读:12      评论:0      收藏:0      [点我收藏+]

测试

启动kibana,打开开发工具

ik_smart:最少切分

GET _analyze
{
  "analyzer": "ik_smart", 
  "text": ["中华人民共和国"]
}

技术分享图片

 

 

 

 

 ik_max_word:最细粒度划分,穷尽词库。

GET _analyze
{
"analyzer": "ik_max_word",
"text": ["中华人民共和国"]
}

技术分享图片    技术分享图片

我们输入一个人名:比如说宋殿鑫想当Java开发工程师,宋殿鑫是人名,但是被分开了。

技术分享图片

 

 

 出现问题:有些词被拆开了!

这种自己需要的词,要加到我们的分词字典中!

Ik分词器增加自己的配置

来到 elasticsearch-7.6.1\plugins\ik\config 目录下,打开IKAnalyzer.cfg.xml

技术分享图片

 

 我们先创建一个dic文件,也就是字典,其实我们打开其他的dic文件也是一样的。

技术分享图片

 

 编写后注入到配置文件中。

技术分享图片

 

 然后重启es和kibana,可以看到我们新加的文件

技术分享图片

 

再分词,可以发现,宋殿鑫成为了单独的字段,没被细分

 技术分享图片

 

测试Ik分词器以及增加自己的词汇

原文:https://www.cnblogs.com/dmzna/p/14913813.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!