菜单 学习猿地 - LMONKEY

VIP

开通学习猿地VIP

尊享10项VIP特权 持续新增

知识通关挑战

打卡带练!告别无效练习

接私单赚外块

VIP优先接,累计金额超百万

学习猿地私房课免费学

大厂实战课仅对VIP开放

你的一对一导师

每月可免费咨询大牛30次

领取更多软件工程师实用特权

入驻
134
0

Elasticsearch之中文分词器

原创
05/13 14:22
阅读数 32399

 

前提

什么是倒排索引?

Elasticsearch之分词器的作用

Elasticsearch之分词器的工作流程

Elasticsearch之停用

 

 

 

 

 

 

Elasticsearch的中文分词器

  1、单字分词

    如:“我们是中国人”
    效果:“我”“们”“是”“中”“国”“人”

  2、二分法分词:按两个字进行切分。

    如:“我们是中国人”,效果:“我们”、“们是”、“是中”、“中国”、“国人”。

  3、词库分词:按某种算法构造词,然后去匹配已建好的词库集合,如果匹配到就切分出来成为词语。通常词库分词被认为是最理想的中文分词算法。

 

 

 

 

 

 

 

  后续博客

Elasticsearch之几个重要的分词器

发表评论

0/200
134 点赞
0 评论
收藏