欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页

Solr 添加 IKAnalyzer分词器

程序员文章站 2022-05-09 13:49:31
...

1. 首先,下载IKAnalyzer ,下载
注意:以前老的IK 不支持Solr 5.3的版本 ,请注意下载最新的。

2.将ik的相关文件 拷贝到 solr-webapp\webapp\solr\WEB-INF\lib 目录***意:solr版本不同可能会有微小的差距我这里使用的是solr-7.0.1版本

3.在 solr\new_core\conf\managed-schema 增加如下配置

 <!-- 我添加的IK分词 -->
 <fieldType name="text_ik" class="solr.TextField">   
 <analyzer type="index" isMaxWordLength="false" class="org.wltea.analyzer.lucene.IKAnalyzer"/>   
 <analyzer type="query" isMaxWordLength="true" class="org.wltea.analyzer.lucene.IKAnalyzer"/>   
 </fieldType>

同时,把需要分词的字段,设置为text_ik

<field name="id" type="int" indexed="true" stored="true" required="true" multiValued="false"/>
<field name="name" type="text_ik" indexed="true" stored="true" required="true" multiValued="false" />
<field name="title" type="text_ik" indexed="true" stored="true" required="true" multiValued="false" />
<field name="category" type="int" indexed="true" stored="true" required="true" multiValued="false" />
<field name="content" type="text_ik" indexed="true" stored="true" required="true" multiValued="false" />
<field name="price" type="double" indexed="true" stored="true" required="true" multiValued="false" />
<field name="color" type="string" indexed="true" stored="true" required="true" multiValued="false" />
<field name="orderBy" type="int" indexed="true" stored="true" required="true" multiValued="false" />
<field name="updatetime" type="date" indexed="true" stored="true" required="true" multiValued="false" />

4.在admin后台下查看分词效果
Solr 添加 IKAnalyzer分词器Solr 添加 IKAnalyzer分词器

5.配置IKAnalyzer分词器的扩展词典,停止词词典

将 文件夹下的IKAnalyzer.cfg.xml , ext.dic和stopword.dic 三个文件 复制到/webapps/solr/WEB-INF/classes 目录下,并修改IKAnalyzer.cfg.xml

<?xml version="1.0" encoding="UTF-8"?>
    <!DOCTYPE properties SYSTEM "http://java.sun.com/dtd/properties.dtd">  
    <properties>  
        <comment>IK Analyzer 扩展配置</comment>
        <!--用户可以在这里配置自己的扩展字典 -->
        <entry key="ext_dict">ext.dic;</entry> 

        <!--用户可以在这里配置自己的扩展停止词字典-->
        <entry key="ext_stopwords">stopword.dic;</entry> 
    </properties>

在ext.dic 里增加自己的扩展词典,例如,婴儿奶粉3段

Solr 添加 IKAnalyzer分词器

注意: 记得将stopword.dic,ext.dic的编码方式为UTF-8 无BOM的编码方式。