谷粒商城实战笔记-122~124-全文检索-ElasticSearch-分词
创始人
2024-11-06 02:34:01
0

文章目录

  • 一,122-全文检索-ElasticSearch-分词-分词&安装ik分词
  • 二,124-全文检索-ElasticSearch-分词-自定义扩展词库
    • 1,创建nginx容器
      • 1.1 创建nginx文件夹
      • 1.2 创建nginx容器获取nginx配置
      • 1.3 复制nginx容器配置文件
      • 1.4 删除临时的nginx容器
      • 1.5 创建新的nginx容器
    • 2,配置扩展词库
      • 2.1 elasticsearch配置扩展词库
      • 2.2 nginx新建词库文件
      • 2.3 重启容器
    • 3,测试扩展词库效果

一,122-全文检索-ElasticSearch-分词-分词&安装ik分词

Elasticsearch 使用的中文分词器IK Analyzer(简称IK)是一个非常流行的中文分词器插件。

  1. 安装IK分词器插件

    首先,需要下载与你的 Elasticsearch 版本相匹配的 IK 分词器插件。
    进入elasticsearch的docker容器:

    docker exec -it elasticsearch /bin/bash 

    执行命令安装:

    bin/elasticsearch-plugin install https://get.infini.cloud/elasticsearch/analysis-ik/7.13.0 

    查看安装结果:

    bin/elasticsearch-plugin list 

在这里插入图片描述

  1. 重启Elasticsearch
    安装插件后,需要重启 Elasticsearch 服务以使插件生效。

    docker restart elasticsearch 
  2. 测试IK分词器

为了对比效果,先使用标准的standard分词器,这个分词器是针对英文的。

POST _analyze {   "analyzer": "standard",   "text": "尚硅谷谷粒商城" } 

对于中文,standard分词器的效果非常不理想,其把中文拆分为单个汉字。

在这里插入图片描述

使用中文ik分词器。

POST _analyze {   "analyzer": "ik_smart",   "text": "尚硅谷谷粒商城" } 

结果如下,处理中文时,IK分词器比standard要强大的多。
在这里插入图片描述
当然,这个分词器也有改进的空间,比方说,上面例子中,分词器不能正确的把尚硅谷识别为一个词,这就需要配合专门的词库来进行优化了。

二,124-全文检索-ElasticSearch-分词-自定义扩展词库

1,创建nginx容器

因为我们要把词库放在nginx作为elasticsearch的扩展词库,所以首先要安装nginx。

1.1 创建nginx文件夹

在/mydata下创建nginx文件夹。

cd /mydata mkdir nginx 

1.2 创建nginx容器获取nginx配置

注意,这个nginx容器不是最终我们需要的nginx容器,仅仅是为了获取nginx配置文件的模板而创建的。

docker run -p 80:80 --name nginx  -d nginx:1.10 

执行这个命令时,虽然我们没有提前下载镜像,docker会自动检测,若没有镜像,会先下载镜像。

1.3 复制nginx容器配置文件

复制nginx容器配置文件到前面创建的文件夹/mydata/下。

docker container cp nginx:/etc/nginx . 

之后在nginx目录下,可以看到如下结构。

在这里插入图片描述

1.4 删除临时的nginx容器

执行下面命令,先停止nginx容器,后删除容器。

docker stop nginx docker rm nginx 

1.5 创建新的nginx容器

docker run -p 80:80 --name nginx \ -v /mydata/nginx/html:/usr/share/nginx/html \ -v /mydata/nginx/logs:/var/log/nginx \ -v /mydata/nginx/nginx.conf:/etc/nginx/nginx.conf \ -v /mydata/nginx/conf.d:/etc/nginx/conf.d \ -d nginx 

2,配置扩展词库

2.1 elasticsearch配置扩展词库

进入elasticsearch容器。

docker exec -it elasticsearch /bin/bash 

/usr/share/elasticsearch/config/analysis-ik中的 IKAnalyzer.cfg.xml配置nginx中的扩展词库。

   	IK Analyzer 扩展配置 	 	 	 	 	 	http://192.168.128.130/fenci/myword.txt 	 	  

2.2 nginx新建词库文件

在nginx的挂载目录html目录下,新建es目录,es目录下,新建fenci.txt文件,文件中输入词语:

尚硅谷 乔碧萝 

2.3 重启容器

重启elasticsearch容器和nginx容器。

docker restart elasticsearch docker restart nginx 

3,测试扩展词库效果

POST _analyze {   "analyzer": "ik_max_word",   "text": "尚硅谷谷粒商城" }   

结果显示,IK分词器能基于扩展词库,将尚硅谷识别为一个词。

在这里插入图片描述

相关内容

热门资讯

透视辅助(wPk)WPK透视辅... 透视辅助(wPk)WPK透视辅助(透视)详细辅助解密教程(切实真的有挂)1、操作简单,无需注册,只需...
aapoker有猫腻!AA P... aapoker有猫腻!AA POKER下载软件,(AaPOKER)本来真的是有挂(详细辅助新2025...
透视规律(德州扑克)德扑之星作... 透视规律(德州扑克)德扑之星作弊(透视)果然真的是有挂(详细辅助wpk教程);1、德扑之星作弊ai机...
透视免费(WPK)wpk ai... 透视免费(WPK)wpk ai辅助(透视)详细辅助黑科技教程(一直是有挂);1、用户打开应用后不用登...
aapoker辅助工具!aap... aapoker辅助工具!aapoker ai,(aaPOKER)果然有挂(详细辅助2025新版)1、...
透视私人局(云扑克德州)德扑数... 透视私人局(云扑克德州)德扑数据软件(透视)果然是有挂(详细辅助新2025教程);1、构建自己的德扑...
透视科技(wPk)wpk透视辅... 透视科技(wPk)wpk透视辅助测试(透视)详细辅助我来教教你(真是是有挂);一、wpk透视辅助测试...
aapoker俱乐部!aa扑克... aapoker俱乐部!aa扑克平台的机制,(aa poker)切实是有挂(详细辅助高科技教程);1、...
透视了解(云扑克德州)德扑之星... 透视了解(云扑克德州)德扑之星ai代打(透视)好像真的有挂(详细辅助详细教程)1、不需要AI权限,帮...
透视有挂(WpK)微扑克ai辅... 透视有挂(WpK)微扑克ai辅助器苹果版(透视)详细辅助切实教程(原来真的是有挂)1、进入游戏-大厅...