Solr实现全文搜索教程
solr实现全文搜索
1 solr实现全文搜索
1.1solr是什么？
solr 是apache下的一个*开源项目，采用java开发，它是基于lucene的全文搜索服务器。solr提供了比lucene更为丰富的查询语言，同时实现了可配置、可扩展，并对索引、搜索性能进行了优化。
solr是一个全文检索服务器，只需要进行配置就可以实现全文检索服务。
1.2solr的安装及配置
solr的版本：4.10.3
1.2.1 安装步骤
需要把solr服务器安装到linux环境：
第一步：安装linux、jdk、tomcat。
略：
第二步：把solr的压缩包上传到服务器。并解压。
第三步：把解压目录/solr-4.10.3/dist/solr-4.10.3.war包部署到tomcat下。并改名为solr.war
[root@bogon dist]# cp solr-4.10.3.war/usr/local/solr/tomcat/webapps/solr.war
第四步：解压war包。启动tomcat自动解压。关闭tomcat。删除solr.war.
第五步：把/solr-4.10.3/example/lib/ext目录下所有的jar包复制到solr工程中。
[root@bogon ext]# cp */usr/local/solr/tomcat/webapps/solr/web-inf/lib/
第六步：创建solrhome。solrhome是存放solr服务器所有配置文件的目录。
[root@bogon example]# pwd
/root/solr-4.10.3/example
[root@bogon example]# cp -r solr/usr/local/solr/solrhome
[root@bogon example]#
第七步：告诉solr服务器solrhome的位置。
需要修改solr工程的web.xml文件。
在web.xml中将此段配置打开，修改红色字体内容
第八步：启动tomcat
1.2.2 配置业务字段
1、在solr中默认是中文分析器，需要手工配置。配置一个fieldtype，在fieldtype中指定中文分析器。
2、solr中的字段必须是先定义后使用。
1.2.2.1 中文分析器的配置
第一步：使用ik-analyzer。把分析器的文件夹上传到服务器。
第二步：需要把分析器的jar包添加到solr工程中。
[root@bogon ik analyzer 2012ff_hf1]# cpikanalyzer2012ff_u1.jar /usr/local/solr/tomcat/webapps/solr/web-inf/lib/
[root@bogon ik analyzer 2012ff_hf1]#
第三步：需要把ikanalyzer需要的扩展词典及停用词词典、配置文件复制到solr工程的classpath。
/usr/local/solr/tomcat/webapps/solr/web-inf/classes
[root@bogon ik analyzer 2012ff_hf1]# cpikanalyzer.cfg.xml ext_stopword.dic mydict.dic/usr/local/solr/tomcat/webapps/solr/web-inf/classes
[root@bogon ik analyzer 2012ff_hf1]#
注意：扩展词典及停用词词典的字符集必须是utf-8。不能使用windows记事本编辑。
第四步：配置fieldtype。需要在solrhome/collection1/conf/schema.xml中配置。
技巧：使用vi、vim跳转到文档开头gg。跳转到文档末尾：g
|
|
1.2.2.2 业务字段配置
业务字段判断标准：
1、在搜索时是否需要在此字段上进行搜索。例如：商品名称、商品的卖点、商品的描述
2、后续的业务是否需要用到此字段。例如：商品id。
需要用到的字段：
1、商品id
2、商品title
3、卖点
4、价格
5、商品图片
6、商品分类名称
7、商品描述
solr中的业务字段：
1、id——》商品id
其他的对应字段创建solr的字段。
|
|
重新启动tomcat
1.3维护索引库
添加：添加一个json格式的文件就可以。
修改：在solr中没有update，只需要添加一个新的文档，要求文档id和被修改文档的id一致。原理是先删除后添加。
删除：使用xml格式。
删除两种方法：
1、根据id删除：
2、根据查询删除：
2 solrj客户端
需要依赖solrj的jar包。
|
|
2.1使用solrj的使用
|
public class solrjtest {
@test public void adddocument() throws exception { //创建一连接 solrserver solrserver = new httpsolrserver("https://192.168.25.154:8080/solr"); //创建一个文档对象 solrinputdocument document = new solrinputdocument(); document.addfield("id", "test001"); document.addfield("item_title", "测试商品2"); document.addfield("item_price", 54321); //把文档对象写入索引库 solrserver.add(document); //提交 solrserver.commit(); }
@test public void deletedocument() throws exception { //创建一连接 solrserver solrserver = new httpsolrserver("https://192.168.25.154:8080/solr"); //solrserver.deletebyid("test001"); solrserver.deletebyquery("*:*"); solrserver.commit(); } } |
2.2把商品信息导入到索引库
使用java程序读取mysql中的商品信息，然后创建solr文档对象，把商品信息写入索引库。