1. 学习计划

　　1. Solr的安装及配置

a) Solr整合tomcat

b) Solr后台管理功能介绍

c) 配置中文分析器

　　2. 使用Solr的后台管理索引库

a) 添加文档

b) 删除文档

c) 修改文档

d) 查询文档

　　3. 使用SolrJ管理索引库

a) 添加文档

b) 修改文档

c) 删除文档

d) 查询文档

　　4. 电商搜索案例实现

a) 案例分析

b) 案例实现

2. 需求分析

使用Solr实现电商网站中商品信息搜索功能，可以根据关键字、分类、价格搜索商品信息，也可以根据价格进行排序。

2.1. 实现方法

在一些大型门户网站、电子商务网站等都需要站内搜索功能，使用传统的数据库查询方式实现搜索无法满足一些高级的搜索需求，比如：搜索速度要快、搜索结果按相关度排序、搜索内容格式不固定等，这里就需要使用全文检索技术实现搜索功能。

2.1.1. 使用Lucene实现

单独使用Lucene实现站内搜索需要开发的工作量较大，主要表现在：索引维护、索引性能优化、搜索性能优化等，因此不建议采用。

2.1.2. 使用solr实现

基于Solr实现站内搜索扩展性较好并且可以减少程序员的工作量，因为Solr提供了较为完备的搜索引擎解决方案，因此在门户、论坛等系统中常用此方案。

2.2. 什么是solr

Solr 是Apache下的一个顶级开源项目，采用Java开发，它是基于Lucene的全文搜索服务器。Solr提供了比Lucene更为丰富的查询语言，同时实现了可配置、可扩展，并对索引、搜索性能进行了优化。

Solr可以独立运行，运行在Jetty、Tomcat等这些Servlet容器中，Solr 索引的实现方法很简单，用 POST 方法向 Solr 服务器发送一个描述 Field 及其内容的 XML 文档，Solr根据xml文档添加、删除、更新索引。Solr 搜索只需要发送 HTTP GET 请求，然后对 Solr 返回Xml、json等格式的查询结果进行解析，组织页面布局。Solr不提供构建UI的功能，Solr提供了一个管理界面，通过管理界面可以查询Solr的配置和运行情况。

Solr与Lucene的区别：

Lucene是一个开放源代码的全文检索引擎工具包，它不是一个完整的全文检索引擎，Lucene提供了完整的查询引擎和索引引擎，目的是为软件开发人员提供一个简单易用的工具包，以方便的在目标系统中实现全文检索的功能，或者以Lucene为基础构建全文检索引擎。

Solr的目标是打造一款企业级的搜索引擎系统，它是一个搜索引擎服务，可以独立运行，通过Solr可以非常快速的构建企业的搜索引擎，通过Solr也可以高效的完成站内搜索功能。

3. Solr安装及配置

3.1. Solr的下载

从Solr官方网站（http://lucene.apache.org/solr/ ）下载Solr4.10.3，根据Solr的运行环境，Linux下需要下载lucene-4.10.3.tgz，windows下需要下载lucene-4.10.3.zip。

Solr使用指南可参考：https://wiki.apache.org/solr/FrontPage。

3.2. Solr的文件夹结构

将solr-4.10.3.zip解压：

bin：solr的运行脚本

contrib：solr的一些贡献软件/插件，用于增强solr的功能。

dist：该目录包含build过程中产生的war和jar文件，以及相关的依赖文件。

docs：solr的API文档

example：solr工程的例子目录：

example/solr：

该目录叫做solrHome，是一个包含了默认配置信息的Solr的Core目录。

example/multicore：

该目录包含了在Solr的multicore中设置的多个Core目录。

example/webapps：

该目录中包括一个solr.war，该war可作为solr的运行实例工程。

licenses：solr相关的一些许可信息

3.3. 运行环境

solr 需要运行在一个Servlet容器中，Solr4.10.3要求jdk使用1.7以上，Solr默认提供Jetty（java写的Servlet容器），这里使用Tocmat作为Servlet容器，环境如下：

Solr：Solr4.10.3

Jdk：jdk1.7.0_72

Tomcat：apache-tomcat-7.0.53

3.4. Solr整合tomcat

3.4.1. Solr Home与SolrCore

创建一个Solr home目录，SolrHome是Solr运行的主目录，目录中包括了运行Solr实例所有的配置文件和数据文件，Solr实例就是SolrCore，一个SolrHome可以包括多个SolrCore（Solr实例），每个SolrCore提供单独的搜索和索引服务。

example\solr是一个solr home目录结构，如下：

上图中“collection1”是一个SolrCore（Solr实例）目录，目录内容如下所示：

说明：

collection1：叫做一个Solr运行实例SolrCore，SolrCore名称不固定，一个solr运行实例对外单独提供索引和搜索接口。

solrHome中可以创建多个solr运行实例SolrCore。

一个solr的运行实例对应一个索引目录。

conf是SolrCore的配置文件目录。

data目录存放索引文件需要创建

3.4.2. 整合步骤

第一步：安装tomcat。D:\temp\apache-tomcat-7.0.53

第二步：把solr的war包复制到tomcat 的webapp目录下。

把\solr-4.10.3\dist\solr-4.10.3.war复制到D:\temp\apache-tomcat-7.0.53\webapps下。

改名为solr.war
第三步：solr.war解压。使用压缩工具解压或者启动tomcat自动解压。解压之后删除solr.war

第四步：把\solr-4.10.3\example\lib\ext目录下的所有的jar包（日志）添加到solr工程中

第五步：配置solrHome和solrCore。

　　1）创建一个solrhome（存放solr所有配置文件的一个文件夹）。\solr-4.10.3\example\solr目录就是一个标准的solrhome。

　　2）把\solr-4.10.3\example\solr文件夹复制到D:\temp\0108路径下，改名为solrhome，改名不是必须的，是为了便于理解。

　　3）在solrhome下有一个文件夹叫做collection1这就是一个solrcore。就是一个solr的实例。一个solrcore相当于mysql中一个数据库。Solrcore之间是相互隔离。　　

1. 在solrcore中有一个文件夹叫做conf，包含了索引solr实例的配置信息。
2. 在conf文件夹下有一个solrconfig.xml。配置实例的相关信息。如果使用默认配置可以不用做任何修改。

　　　　Xml的配置信息：

　　　　Lib：solr服务依赖的扩展包，默认的路径是collection1\lib文件夹，如果没有就创建一个

　　　　dataDir：配置了索引库的存放路径。默认路径是collection1\data文件夹，如果没有data文件夹，会自动创建。

　　　　requestHandler：

第六步：告诉solr服务器配置文件也就是solrHome的位置。修改web.xml使用jndi的方式告诉solr服务器。

Solr/home名称必须是固定的。

第七步：启动tomcat

第八步：访问http://localhost:8080/solr/

3.5. Solr后台管理

3.5.1.
管理界面

3.5.2.
Dashboard

仪表盘，显示了该Solr实例开始启动运行的时间、版本、系统资源、jvm等信息。

3.5.3.
Logging

Solr运行日志信息

3.5.4.
Cloud

Cloud即SolrCloud，即Solr云（集群），当使用Solr Cloud模式运行时会显示此菜单，如下图是Solr Cloud的管理界面：

3.5.5.
Core Admin

Solr Core的管理界面。Solr Core 是Solr的一个独立运行实例单位，它可以对外提供索引和搜索服务，一个Solr工程可以运行多个SolrCore（Solr实例），一个Core对应一个索引目录。

添加solrcore：

第一步：复制collection1改名为collection2

第二步：修改core.properties。name=collection2

第三步：重启tomcat

3.5.6.
java properties

Solr在JVM 运行环境中的属性信息，包括类路径、文件编码、jvm内存设置等信息。

3.5.7.
Tread Dump

显示Solr Server中当前活跃线程信息，同时也可以跟踪线程运行栈信息。

3.5.8.
Core selector

选择一个SolrCore进行详细操作，如下：

3.5.9.
Analysis

通过此界面可以测试索引分析器和搜索分析器的执行情况。

3.5.10. Dataimport

可以定义数据导入处理器，从关系数据库将数据导入
到Solr索引库中。

3.5.11. Document

通过此菜单可以创建索引、更新索引、删除索引等操作，界面如下：

/update表示更新索引，solr默认根据id（唯一约束）域来更新Document的内容，如果根据id值搜索不到id域则会执行添加操作，如果找到则更新。

3.5.12. Query

通过/select执行搜索索引，必须指定“q”查询条件方可搜索。

3.6. 配置中文分析器

3.6.1.
Schema.xml

schema.xml，在SolrCore的conf目录下，它是Solr数据表配置文件，它定义了加入索引的数据的数据类型。主要包括FieldTypes、Fields和其他的一些缺省设置。

3.6.1.1 FieldType域类型定义

下边“text_general”是Solr默认提供的FieldType，通过它说明FieldType定义的内容：

FieldType子结点包括：name,class,positionIncrementGap等一些参数：

name：是这个FieldType的名称

class：是Solr提供的包solr.TextField，solr.TextField 允许用户通过分析器来定制索引和查询，分析器包括一个分词器（tokenizer）和多个过滤器（filter）

positionIncrementGap：可选属性，定义在同一个文档中此类型数据的空白间隔，避免短语匹配错误，此值相当于Lucene的短语查询设置slop值，根据经验设置为100。

例如:搜索big car,如果document中存的是big red
car,就无法搜索到了, positionIncrementGap就是设置big和car中间最大的间隔距离,只要在距离内就能搜索到.

在FieldType定义的时候最重要的就是定义这个类型的数据在建立索引和进行查询的时候要使用的分析器analyzer,包括分词和过滤

索引分析器中：使用solr.StandardTokenizerFactory标准分词器，solr.StopFilterFactory停用词过滤器，solr.LowerCaseFilterFactory小写过滤器。

搜索分析器中：使用solr.StandardTokenizerFactory标准分词器，solr.StopFilterFactory停用词过滤器，这里还用到了solr.SynonymFilterFactory同义词过滤器。

3.6.1.2 Field定义

　　solr索引字段在solrhome\collection1\conf\schema.xml配置文件中，类似下面这些，包含在<fields>与</fields>之间的。

　　在fields结点内定义具体的Field，filed定义包括name,type（为之前定义过的各种FieldType）,indexed（是否被索引）,stored（是否被储存），multiValued（是否存储多个值）等属性。

　　如下：

　　multiValued：该Field如果要存储多个值时设置为true，solr允许一个Field存储多个值，比如存储一个用户的好友id（多个），商品的图片（多个，大图和小图），通过使用solr查询要看出返回给客户端是数组：

3.6.1.3 uniqueKey

Solr中默认定义唯一主键key为id域，如下：

Solr在删除、更新索引时使用id域进行判断，也可以自定义唯一主键。

注意在创建索引时必须指定唯一约束。

3.6.1.4 copyField复制域

copyField复制域，可以将多个Field复制到一个Field中，以便进行统一的检索：

比如，输入关键字搜索title标题内容content，

定义title、content、text的域：

根据关键字只搜索text域的内容就相当于搜索title和content，将title和content复制到text中，如下：

3.6.1.5 dynamicField（动态字段）

动态字段就是不用指定具体的名称，只要定义字段名称的规则，例如定义一个 dynamicField，name 为*_i，定义它的type为text，那么在使用这个字段的时候，任何以_i结尾的字段都被认为是符合这个定义的，例如：name_i，gender_i，school_i等。

自定义Field名为：product_title_t，“product_title_t”和scheam.xml中的dynamicField规则匹配成功，如下：

“product_title_t”是以“_t”结尾。

创建索引：

搜索索引：

3.6.2.
安装中文分词器

使用IKAnalyzer中文分析器。

第一步：把IKAnalyzer2012FF_u1.jar添加到solr/WEB-INF/lib目录下。

第二步：复制IKAnalyzer的配置文件和自定义词典和停用词词典到solr的classpath下。

也就是在apache-tomcat-7.0.54\webapps\solr\WEB-INF目录下新建classes目录,将配置文件和词典放进去.

第三步：在schema.xml中添加一个自定义的fieldType，使用中文分析器。

</fieldType>

第四步：定义field，指定field的type属性为text_ik

第四步：重启tomcat

测试：

3.7. 设置业务系统Field

如果不使用Solr提供的Field可以针对具体的业务需要自定义一套Field，如下是商品信息Field：

4.
Solr管理索引库

4.1. 维护索引

4.1.1.
添加/更新文档

添加单个文档

批量导入数据

使用dataimport插件批量导入数据。

第一步：把dataimport插件依赖的jar包添加到solrcore（collection1\lib）中

还需要mysql的数据库驱动。

第二步：配置solrconfig.xml文件，添加一个requestHandler。

 <requestHandler name="/dataimport"

class="org.apache.solr.handler.dataimport.DataImportHandler">

    <lst name="defaults">

      <str name="config">data-config.xml</str>

     </lst>

  </requestHandler>

第三步：创建一个data-config.xml，保存到collection1\conf\目录下

<?xml version="1.0" encoding="UTF-8" ?> 

<dataConfig>  

<dataSource type="JdbcDataSource"  

                driver="com.mysql.jdbc.Driver"  

                url="jdbc:mysql://localhost:3306/lucene"  

                user="root"  

                password="root"/>  

<document>  

       <entity name="product" query="SELECT pid,name,catalog_name,price,description,picture FROM products ">

               <field column="pid" name="id"/>

               <field column="name" name="product_name"/>

               <field column="catalog_name" name="product_catalog_name"/>

               <field column="price" name="product_price"/>

               <field column="description" name="product_description"/>

               <field column="picture" name="product_picture"/>

       </entity>  

</document>  

</dataConfig>

第四步：重启tomcat

第五步：点击“execute”按钮导入数据

导入数据前会先清空索引库，然后再导入。

4.1.2. 删除文档

删除索引格式如下：

1）删除制定ID的索引

<delete>

       <id>8</id>

</delete>

2）删除查询到的索引数据

<delete>

       <query>product_catalog_name:幽默杂货</query>

</delete>

3）删除所有索引数据

 <delete>

       <query>*:*</query>

</delete>

4.2. 查询索引

通过/select搜索索引，Solr制定一些参数完成不同需求的搜索：

4.2.1 q - 查询

q - 查询字符串，必须的，如果查询所有使用*:*。

4.2.2 fq - 过滤查询

　　2. fq - （filter query）过虑查询，作用：在q查询符合结果中同时是fq查询符合的，例如：：

　　过滤查询价格从1到20的记录。

　　也可以在“q”查询条件中使用product_price:[1 TO 20]，如下：

　　也可以使用“*”表示无限，例如：

　　20以上：product_price:[20 TO *]

　　20以下：product_price:[* TO 20]

4.2.3 sort - 排序

　　3. sort - 排序，格式：sort=<field name>+<desc|asc>[,<field name>+<desc|asc>]… 。示例：

按价格降序

4.2.4 start rows - 分页

　　4. start - 分页显示使用，开始记录下标，从0开始

　　5. rows - 指定返回结果最多有多少条记录，配合start来实现分页。

　　　显示前10条。

4.2.5 fl - 指定返回字段

　　6. fl - 指定返回那些字段内容，用逗号或空格分隔多个。

　　显示商品图片、商品名称、商品价格

4.2.6 df - 指定搜索字段

　　7. df-指定一个搜索Field

　　也可以在SolrCore目录中conf/solrconfig.xml文件中指定默认搜索Field，指定后就可以直接在“q”查询条件中输入关键字。

4.2.7 wt - 指定出处格式　

　　8. wt - (writer type)指定输出格式，可以有 xml, json, php, phps, 后面 solr 1.3增加的，要用通知我们，因为默认没有打开。

4.2.8 hl - 高亮显示

　　9. hl 是否高亮 ,设置高亮Field，设置格式前缀和后缀。

5. 使用SolrJ管理索引库

5.1. 什么是solrJ

solrj是访问Solr服务的java客户端，提供索引和搜索的请求方法，SolrJ通常在嵌入在业务系统中，通过SolrJ的API接口操作Solr服务，如下图：

5.2. 依赖的jar包

5.3. 添加文档

5.3.1. 实现步骤

第一步：创建一个java工程

第二步：导入jar包。包括solrJ的jar包。还需要

第三步：使用SolrServer和Solr服务器建立连接。HttpSolrServer对象建立连接。SolrServer是抽象类，连接单机版solr使用httpSolrServer，链接集群版使用CloudSolrServer。

第四步：创建一个SolrInputDocument对象，然后添加域。

第五步：将SolrInputDocument添加到索引库。

第六步：提交。

5.3.2. 代码实现

 //向索引库中添加索引

      @Test

      public void addDocument() throws Exception {

          //和solr服务器创建连接

          //参数：solr服务器的地址

          SolrServer solrServer = new HttpSolrServer("http://localhost:8080/solr");

          //创建一个文档对象

          SolrInputDocument document = new SolrInputDocument();

          //向文档中添加域

          //第一个参数：域的名称，域的名称必须是在schema.xml中定义的

          //第二个参数：域的值

          document.addField("id", "c0001");

          document.addField("title_ik", "使用solrJ添加的文档");

          document.addField("content_ik", "文档的内容");

          document.addField("product_name", "商品名称");

          //把document对象添加到索引库中

          solrServer.add(document);

          //提交修改

          solrServer.commit();

      }

@Test

    public void testIndexCreate() throws Exception{

        //创建和Solr服务端连接

        SolrServer solrServer = new HttpSolrServer("http://localhost:8080/solr");

        //创建solr文档对象

        SolrInputDocument doc = new SolrInputDocument();

        //域要先定义后使用,还有注意必须要有id主键域

        //solr中没有专用的修改方法, 会自动根据id进行查找,如果找到了则删除原来的将新的加入就是修改,如果没找到,将新的直接加入则就是新增

        doc.addField("id", "a001");

        doc.addField("product_name", "台灯1`111");

        doc.addField("product_price", "12.5");

        //将文档加入solrServer对象中

        solrServer.add(doc);

        //提交

        solrServer.commit();

    }

5.4. 删除文档

5.4.1. 根据id删除

 //删除文档，根据id删除

      @Test

      public void deleteDocumentByid() throws Exception {

          //创建连接

          SolrServer solrServer = new HttpSolrServer("http://localhost:8080/solr");

          //根据id删除文档

          solrServer.deleteById("c0001");

          //提交修改

          solrServer.commit();

      }

5.4.2. 根据查询删除

查询语法完全支持Lucene的查询语法。

 //根据查询条件删除文档

      @Test

      public void deleteDocumentByQuery() throws Exception {

          //创建连接

          SolrServer solrServer = new HttpSolrServer("http://localhost:8080/solr");

          //根据查询条件删除文档,这里是删除所有*:*

          solrServer.deleteByQuery("*:*");

          //提交修改

          solrServer.commit();

      }

5.5. 修改文档

在solrJ中修改没有对应的update方法，只有add方法，只需要添加一条新的文档，和被修改的文档id一致就，可以修改了。本质上就是先删除后添加。

5.6. 查询文档

5.6.1. 简单查询

 //查询索引

      @Test

      public void queryIndex() throws Exception {

          //创建连接，链接solr服务端

          SolrServer solrServer = new HttpSolrServer("http://localhost:8080/solr");

          //创建一个query对象，solr查询条件对象

          SolrQuery query = new SolrQuery();

          //设置查询条件

          query.setQuery("*:*");

          //查询，执行查询并获取查询响应对象

          QueryResponse queryResponse = solrServer.query(query);

          //取查询结果，从查询响应中获取查询结果集对象

          SolrDocumentList solrDocumentList = queryResponse.getResults();

          //共查询到商品数量

          System.out.println("共查询到商品数量:" + solrDocumentList.getNumFound());

          //遍历查询的结果

          for (SolrDocument solrDocument : solrDocumentList) {

               System.out.println(solrDocument.get("id"));

               System.out.println(solrDocument.get("product_name"));

               System.out.println(solrDocument.get("product_price"));

               System.out.println(solrDocument.get("product_catalog_name"));

               System.out.println(solrDocument.get("product_picture"));

          }

      }

5.6.2. 复杂查询

其中包含查询、过滤、分页、排序、高亮显示等处理。

例子1：

//复杂查询索引

    @Test

    public void queryIndex2() throws Exception {

        //创建连接

        SolrServer solrServer = new HttpSolrServer("http://localhost:8080/solr");

        //创建一个query对象

        SolrQuery query = new SolrQuery();

        //设置查询条件

        query.setQuery("钻石");

        //过滤条件

        query.setFilterQueries("product_catalog_name:幽默杂货");

        //排序条件

        query.setSort("product_price", ORDER.asc);

        //分页处理

        query.setStart(0);

        query.setRows(10);

        //结果中域的列表

        query.setFields("id","product_name","product_price","product_catalog_name","product_picture");

        //设置默认搜索域

        query.set("df", "product_keywords");

        //高亮显示

        query.setHighlight(true);

        //高亮显示的域

        query.addHighlightField("product_name");

        //高亮显示的前缀

        query.setHighlightSimplePre("<em>");

        //高亮显示的后缀

        query.setHighlightSimplePost("</em>");

        //执行查询

        QueryResponse queryResponse = solrServer.query(query);

        //取查询结果

        SolrDocumentList solrDocumentList = queryResponse.getResults();

        //共查询到商品数量

        System.out.println("共查询到商品数量:" + solrDocumentList.getNumFound());

        //遍历查询的结果

        for (SolrDocument solrDocument : solrDocumentList) {

            System.out.println(solrDocument.get("id"));

            //取高亮显示

            String productName = "";

            Map<String, Map<String, List<String>>> highlighting = queryResponse.getHighlighting();

            List<String> list = highlighting.get(solrDocument.get("id")).get("product_name");

            //判断是否有高亮内容

            if (null != list) {

                productName = list.get(0);

            } else {

                productName = (String) solrDocument.get("product_name");

            }

            System.out.println(productName);

            System.out.println(solrDocument.get("product_price"));

            System.out.println(solrDocument.get("product_catalog_name"));

            System.out.println(solrDocument.get("product_picture"));

        }

    }

例子2

@Test

    public void testIndexSearch2() throws Exception{

        //连接solr服务端

        SolrServer solrServer = new HttpSolrServer("http://localhost:8080/solr");

        //创建solr查询条件对象

        SolrQuery solrQuery = new SolrQuery();

        //查询关键字输入

        solrQuery.setQuery("台灯");

        //设置默认搜索域

        solrQuery.set("df", "product_keywords");

        //设置过滤查询

        solrQuery.addFilterQuery("product_price:[1 TO 100]");

        //设置排序,这里是降序

        solrQuery.setSort("product_price", ORDER.desc);

        //=======设置分页========

        //设置起始条数

        solrQuery.setStart(0);

        //设置查询多少条

        solrQuery.setRows(50);

        //========设置高亮显示=======

        //高亮默认是关闭的,所以要手动开启

        solrQuery.setHighlight(true);

        //设置需要高亮显示的域

        solrQuery.addHighlightField("product_name");

        //设置高亮前缀

        solrQuery.setHighlightSimplePre("<span style=\"color:red\">");

        //设置高亮后缀

        solrQuery.setHighlightSimplePost("</span>");

        //===================查询并获取查询响应对象=====================================

        QueryResponse queryResponse = solrServer.query(solrQuery);

        //从查询响应中获取查询结果集对象

        SolrDocumentList results = queryResponse.getResults();

        //打印一共查询到多少条记录,也就是记录总数

        System.out.println("=====count====" + results.getNumFound());

        //遍历查询结果集

        for(SolrDocument doc : results){

            System.out.println("============="+doc.get("id"));

            //获取高亮

            Map<String, Map<String, List<String>>> highlighting = queryResponse.getHighlighting();

            List<String> list = highlighting.get(doc.get("id")).get("product_name");

            if(list != null && list.size() > 0){

                String hlName = list.get(0);

                System.out.println("=======high lighting=====" + hlName);

            }

            System.out.println("============="+doc.get("product_name"));

            System.out.println("============="+doc.get("product_price"));

            System.out.println("====================================================");

        }

    }

6. 案例实现

6.1. 原型分析

6.2. 系统架构

6.3. 工程搭建

创建一个web工程导入jar包

　　1、springmvc的相关jar包

　　2、solrJ的jar包

　　3、Example\lib\ext下的jar包

6.3.1. Springmvc.xml

<?xml version="1.0" encoding="UTF-8"?>

<beans xmlns="http://www.springframework.org/schema/beans"

    xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:p="http://www.springframework.org/schema/p"

    xmlns:context="http://www.springframework.org/schema/context"

    xmlns:mvc="http://www.springframework.org/schema/mvc"

    xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans-4.0.xsd

        http://www.springframework.org/schema/mvc http://www.springframework.org/schema/mvc/spring-mvc-4.0.xsd

        http://www.springframework.org/schema/context http://www.springframework.org/schema/context/spring-context-4.0.xsd">

    <context:component-scan base-package="com.itheima.jd"/>

    <!-- 配置注解驱动，如果配置此标签可以不用配置处理器映射器和适配器 -->

    <mvc:annotation-driven/>

        <!-- 配置视图解析器 -->

    <bean class="org.springframework.web.servlet.view.InternalResourceViewResolver">

        <property name="prefix" value="/WEB-INF/jsp/"/>

        <property name="suffix" value=".jsp"/>

    </bean>

    <!-- SolrServer的配置 -->

    <bean id="httpSolrServer" class="org.apache.solr.client.solrj.impl.HttpSolrServer">

        <constructor-arg index="0" value="http://localhost:8080/solr"/>

    </bean>

</beans>

6.3.2. Web.xml

<?xml version="1.0" encoding="UTF-8"?>

<web-app xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns="http://java.sun.com/xml/ns/javaee" xsi:schemaLocation="http://java.sun.com/xml/ns/javaee http://java.sun.com/xml/ns/javaee/web-app_2_5.xsd" id="WebApp_ID" version="2.5">

  <display-name>solr-jd</display-name>

  <welcome-file-list>

    <welcome-file>index.html</welcome-file>

    <welcome-file>index.htm</welcome-file>

    <welcome-file>index.jsp</welcome-file>

    <welcome-file>default.html</welcome-file>

    <welcome-file>default.htm</welcome-file>

    <welcome-file>default.jsp</welcome-file>

  </welcome-file-list>

  <!-- 配置前段控制器 -->

  <servlet>

      <servlet-name>springmvc</servlet-name>

      <servlet-class>org.springframework.web.servlet.DispatcherServlet</servlet-class>

      <init-param>

          <!-- 指定springmvc配置文件的路径

              如果不指定默认为：/WEB-INF/${servlet-name}-servlet.xml

          -->

          <param-name>contextConfigLocation</param-name>

          <param-value>classpath:springmvc.xml</param-value>

      </init-param>

  </servlet>

  <servlet-mapping>

      <servlet-name>springmvc</servlet-name>

      <url-pattern>*.action</url-pattern>

  </servlet-mapping>

  <!-- 解决post乱码问题 -->

  <filter>

        <filter-name>CharacterEncodingFilter</filter-name>

        <filter-class>org.springframework.web.filter.CharacterEncodingFilter</filter-class>

        <init-param>

            <param-name>encoding</param-name>

            <param-value>utf-8</param-value>

        </init-param>

    </filter>

    <filter-mapping>

        <filter-name>CharacterEncodingFilter</filter-name>

        <url-pattern>/*</url-pattern>

    </filter-mapping>

</web-app>

6.4. Dao

功能：接收service层传递过来的参数，根据参数查询索引库，返回查询结果。

参数：SolrQuery对象

返回值：一个商品列表List<ProductModel>，还需要返回查询结果的总数量。

返回：ResultModel

方法定义：ResultModel queryProduct(SolrQuery query) throws Exception;

商品对象模型：

public class ProductModel {

    // 商品编号

    private String pid;

    // 商品名称

    private String name;

    // 商品分类名称

    private String catalog_name;

    // 价格

    private float price;

    // 商品描述

    private String description;

    // 图片名称

    private String picture;

}

返回值对象模型

public class ResultModel {

    // 商品列表

    private List<ProductModel> productList;

    // 商品总数

    private Long recordCount;

    // 总页数

    private int pageCount;

    // 当前页

    private int curPage;

}

dao

@Repository

public class ProductDaoImpl implements ProductDao {

    @Autowired

    private SolrServer solrServer;

    @Override

    public ResultModel queryProduct(SolrQuery query) throws Exception {

        ResultModel resultModel  = new ResultModel();

        //根据query对象查询商品列表

        QueryResponse queryResponse = solrServer.query(query);

        SolrDocumentList solrDocumentList = queryResponse.getResults();

        //取查询结果的总数量

        resultModel.setRecordCount(solrDocumentList.getNumFound());

        List<ProductModel> productList = new ArrayList<>();

        //遍历查询结果

        for (SolrDocument solrDocument : solrDocumentList) {

            //取商品信息

            ProductModel productModel = new ProductModel();

            productModel.setPid((String) solrDocument.get("id"));

            //取高亮显示

            String productName = "";

            Map<String, Map<String, List<String>>> highlighting = queryResponse.getHighlighting();

            List<String> list = highlighting.get(solrDocument.get("id")).get("product_name");

            if (null != list) {

                productName = list.get(0);

            } else {

                productName = (String) solrDocument.get("product_name");

            }

            productModel.setName(productName);

            if(null == doc.get("product_price")){

                productModel.setPrice(0f);

            }else{

                productModel.setPrice((float)doc.get("product_price"));

            }

            productModel.setCatalog_name((String) solrDocument.get("product_catalog_name"));

            productModel.setPicture((String) solrDocument.get("product_picture"));

            //添加到商品列表

            productList.add(productModel);

        }

        //商品列表添加到resultmodel中

        resultModel.setProductList(productList);

        return resultModel;

    }

}

6.5. Service

功能：接收action传递过来的参数，根据参数拼装一个查询条件，调用dao层方法，查询商品列表。接收返回的商品列表和商品的总数量，根据每页显示的商品数量计算总页数。

参数：

　　1、查询条件：字符串

　　2、商品分类的过滤条件：商品的分类名称，字符串

　　3、商品价格区间：传递一个字符串，满足格式：“0-100、101-200、201-*”

　　4、排序条件：页面传递过来一个升序或者降序就可以，默认是价格排序。0：升序1：降序

　　5、分页信息：每页显示的记录条数创建一个常量60条。传递一个当前页码就可以了。

业务逻辑

　　1、根据参数创建查询对象

　　2、调用dao执行查询。

　　3、根据总记录数计算总页数。

　　返回值：ResultModel

方法定义：ResultModel queryProduct(String queryString, String caltalog_name, String price, String sort, Integer page) throws Exception;

@Service

public class ProductServiceImpl implements ProductService {

    @Autowired

    private ProductDao productDao;

    @Override

    public ResultModel queryProduct(String queryString, String caltalog_name,

            String price, String sort, Integer page) throws Exception {

        //拼装查询条件

        SolrQuery query = new SolrQuery();

        //查询条件

        if (null != queryString && !"".equals(queryString)) {

            query.setQuery(queryString);

        } else {

            query.setQuery("*:*");

        }

        //商品分类名称过滤

        if (null != caltalog_name && !"".equals(caltalog_name)) {

            query.addFilterQuery("product_catalog_name:" + caltalog_name);

        }

        //价格区间过滤

        if (null != price && !"".equals(price)) {

            String[] strings = price.split("-");

            query.addFilterQuery("product_price:["+strings[0]+" TO "+strings[1]+"]");

        }

        //排序条件

        if ("1".equals(sort)) {

            query.setSort("product_price", ORDER.desc);

        } else {

            query.setSort("product_price", ORDER.asc);

        }

        //分页处理

        if (null == page) {

            page = 1;

        }

        //start

        int start = (page-1) * Commons.PAGE_SIZE;

        query.setStart(start);

        query.setRows(Commons.PAGE_SIZE);

        //设置默认搜索域

        query.set("df", "product_keywords");

        //高亮设置

        query.setHighlight(true);

        query.addHighlightField("product_name");

        query.setHighlightSimplePre("<span style=\"color:red\">");

        query.setHighlightSimplePost("</span>");

        //查询商品列表

        ResultModel resultModel = productDao.queryProduct(query);

        //计算总页数

        long recordCount = resultModel.getRecordCount();

        int pages = (int) (recordCount/Commons.PAGE_SIZE);

        if (recordCount % Commons.PAGE_SIZE > 0) {

            pages ++;

        }

        resultModel.setPageCount(pages);

        resultModel.setCurPage(page);

        return resultModel;

    }

}

6.6. controller

功能：接收页面传递过来的参数调用service查询商品列表。将查询结果返回给jsp页面，还需要查询参数的回显。

参数：

　　1、查询条件：字符串

　　2、商品分类的过滤条件：商品的分类名称，字符串

　　3、商品价格区间：传递一个字符串，满足格式：“0-100、101-200、201-*”

　　4、排序条件：页面传递过来一个升序或者降序就可以，默认是价格排序。0：升序1：降序

　　5、分页信息：每页显示的记录条数创建一个常量60条。传递一个当前页码就可以了。

　　6、Model：相当于request。

　　返回结果：String类型，就是一个jsp的名称。

方法定义：String queryProduct(String queryString, String caltalog_name, String price, String sort, Integer page, Model model) throws Exception;

@Controller

public class ProductAction {

     @Autowired

     private ProductService productService;

     @RequestMapping("/list")

     public String queryProduct(String queryString, String catalog_name, String price,

              String sort, Integer page, Model model) throws Exception {

         //查询商品列表

         ResultModel resultModel = productService.queryProduct(queryString, catalog_name, price, sort, page);

         //列表传递给jsp

         model.addAttribute("result", resultModel);

         //参数回显

         model.addAttribute("queryString", queryString);

         model.addAttribute("caltalog_name", catalog_name);

         model.addAttribute("price", price);

         model.addAttribute("sort", sort);

         model.addAttribute("page", page);

         return "product_list";

     }

}

7. 总结

7.1. solr是一个全文检索引擎系统,通过部署到tomcat下就可以独立运行,通过http协议对外提供全文检索服务,就是索引和文档的正删改查服务
7.2. solr直接操作索引库和文档库, 我们的业务系统中可以使用solrJ(solr的客户端,就是一堆jar包)来调用solr服务端,让solr服务端操作文档库和索引库,完成正删改查的任务,将结果返回给solrJ客户端,我们在业务系统中就可以,获取到结果然后返回给客户在浏览器中显示.
7.3. solrHome:solrhome就是solr最核心的目录, 一个solrhome中可以有多个solr实例
7.4. solrCore:一个solrCore就是一个solr实例,solr中实例与实例之间他们的索引库和文档库是相互隔离的每个实例对外单独的提供索引和文档的增删改查服务,默认实例叫做collection1
7.5. 文档和索引的增加和修改必须要有id, 主键域,没有会报错
7.6. 域名和类型必须先在schema.xml中定义后使用,如果没有定义就使用会报错
7.7. 域的分类
　　普通域:string long 等

　　动态域:起到模糊匹配的效果,可以模糊匹配没有定义过的域名
　　　　例如:xxxx这个域名没有定义,但是xxxx_s这个域名模糊匹配了*_s这个域,所以相当于xxxx_s这个域定义了

　　主键域:<uniqueKey>id</uniqueKey> 一般主键域就用默认的这个就可以不需要更改或者添加

　　复制域: 复制域用于查询的时候从多个域中进行查询,这样可以将多个域复制到某一个统一的域中,然后搜索的时候从这个统一的域中进行查询,就相当于从多个域中查询了.
7.8. 是否存储和是否索引无关, 索引后就能查询,不索引就不能根据这个域搜索, 存储后就能取出来里面的内容,不存储就取不出这个域内容
7.9. 一般企业中将数据全部放入数据库中, 由于查询的时候需要使用like模糊查询,模糊查询数据库中使用的是全表扫描算法,这样效率低级,所以需要使用全文检索,来优化查询速度.

全文搜索技术—Solr的更多相关文章

搜索技术---solr
solr 企业站内搜索技术选型在一些大型门户网站.电子商务网站等都需要站内搜索功能,使用传统的数据库查询方式实现搜索无法满足一些高级的搜索需求,比如:搜索速度要快.搜索结果按相关度排序.搜索内容格式 ...
全文搜索技术—Lucene
1. 内容安排实现一个文件的搜索功能,通过关键字搜索文件,凡是文件名或文件内容包括关键字的文件都需要找出来.还可以根据中文词语进程查询,并且支持多种条件查询. 本案例中的原始内容就是磁盘上的文件 ...
全文搜索技术--Solr7.1之配置中文分析器
前言:中国文化博大精深,但是solr只能一个一个的识别,而是更加符合中国人的习惯,所以加了中文分析器. 1.安装中文分词器第一步:把中文分词器(ik-analyzer-solr7-7.x.jar)/ ...
全文搜索技术--solr7.1之mysql的安装步骤
1.安装命令 #>在线安装wget http://repo.mysql.com/mysql-community-release-el7-5.noarch.rpm 输完上面一句话不能正常的下载安装 ...
SQLSERVER全文搜索
SQLSERVER全文搜索看这篇文章之前请先看一下下面我摘抄的全文搜索的MSDN资料,基本上MSDN上关于全文搜索的资料的我都copy下来了并且非常认真地阅读和试验了一次,并且补充了一些SQL语句 ...
OSChina 的全文搜索设计说明 —— 索引过程
http://www.oschina.net/question/12_71591 言: OSChina 的搜索做得并不好,很久之前一直想在细节方面进行改造,一直也没什么好的思路.但作为整体的结构或许对 ...
SQL Server全文搜索
SQL Server全文搜索看这篇文章之前请先看一下下面我摘抄的全文搜索的MSDN资料,基本上MSDN上关于全文搜索的资料的我都copy下来了并且非常认真地阅读和试验了一次,并且补充了一些SQL语 ...
SQL Server全文搜索（转载）
看这篇文章之前请先看一下下面我摘抄的全文搜索的MSDN资料,基本上MSDN上关于全文搜索的资料的我都copy下来了并且非常认真地阅读和试验了一次,并且补充了一些SQL语句,这篇文章本人抽取了一些本人自 ...
Apache Solr采用Java开发、基于Lucene的全文搜索服务器
http://docs.spring.io/spring-data/solr/ 首先介绍一下solr: Apache Solr (读音: SOLer) 是一个开源.高性能.采用Java开发.基于Luc ...

随机推荐

《DSP using MATLAB》示例Example7.4
代码: h = [-4, 1, -1, -2, 5, 6, 5, -2, -1, 1, -4]; M = length(h); n = 0:M-1; [Hr, w, a, L] = Hr_Type1( ...
【最全干货实例】缓存手册（Memcached、redis、RabbitMQ）
http://www.cnblogs.com/suoning/p/5807247.html 本章内容: Memcached 简介.安装.使用 Python 操作 Memcached 天生支持集群 re ...
Docker-Compose API too old for Windows
I was working on some code with a Docker Windows container today and ran into this error message: ER ...
高并发的epoll+线程池，线程池专注实现业务
我们知道,服务器并发模型通常可分为单线程和多线程模型,这里的线程通常是指“I/O线程”,即负责I/O操作,协调分配任务的“管理线程”,而实际的请求和任务通常交由所谓“工作者线程”处理.通常多线程模型下 ...
[LeetCode系列]BST有效性确定问题[前序遍历]
给定一个BST的根节点, 试判断此BST是否为符合规则的BST? 规则: 对于一个BST的节点, 它左侧的所有节点(包括子节点)必须小于它本身; 它右侧的所有节点(包括子节点)必须大于它本身; 它的左 ...
tomcat日志分类
综合:Tomcat下相关的日志文件 Cataline引擎的日志文件,文件名catalina.日期.log Tomcat下内部代码丢出的日志,文件名localhost.日期.log(jsp页面内部错误的 ...
XAMPP服务器在局域网只能本机访问且无法用IP访问的解决办法 (转)
XAMPP服务器在局域网只能本机访问且无法用IP访问的解决办法前几天安装了xampp for pc 1.7.4版本. 装好后在本地电脑通过https://localhost访问正常. 然后换了台电脑 ...
软件设计----LisKov替换原则（LSP）
LisKov替换原则的定义:一个软件实体如果使用的是一个基类的话,一定适用于其子类,而且根本不能觉察出基类对象和子类对象的区别. 1)怎么理解上面的概念?就是我们程序设计的子类型能够完全替换父类型,而 ...
SublimeText3搭建go语言开发环境(windows)
SublimeText3搭建go语言开发环境(windows) 下载并解压: Sublime Text Build 3021.zip注册: 尽量不要去破解安装Package C ...
Js、jquery学习笔记
end() 方法重新定位到上次操作的元素,一般与siblings()一起使用,操作其兄弟元素.如:$(this).addClass("highlight").children(& ...

全文搜索技术—Solr

1. 学习计划

2. 需求分析

2.1. 实现方法

2.1.1. 使用Lucene实现

2.1.2. 使用solr实现

2.2. 什么是solr

3. Solr安装及配置

3.1. Solr的下载

3.2. Solr的文件夹结构

3.3. 运行环境

3.4. Solr整合tomcat

3.4.1. Solr Home与SolrCore

3.4.2. 整合步骤

3.5. Solr后台管理

3.5.1. 管理界面

3.5.2. Dashboard

3.5.3. Logging

3.5.4. Cloud

3.5.5. Core Admin

3.5.6. java properties

3.5.7. Tread Dump

3.5.8. Core selector

3.5.9. Analysis

3.5.10. Dataimport

3.5.11. Document

3.5.12. Query

3.6. 配置中文分析器

3.6.1. Schema.xml

3.6.1.1 FieldType域类型定义

3.6.1.2 Field定义

3.6.1.3 uniqueKey

3.6.1.4 copyField复制域

3.6.1.5 dynamicField（动态字段）

3.6.2. 安装中文分词器

3.7. 设置业务系统Field

4. Solr管理索引库

4.1. 维护索引

4.1.1. 添加/更新文档

添加单个文档

批量导入数据

4.1.2. 删除文档

4.2. 查询索引

4.2.1 q - 查询

4.2.2 fq - 过滤查询

4.2.3 sort - 排序

4.2.4 start rows - 分页

4.2.5 fl - 指定返回字段

4.2.6 df - 指定搜索字段

4.2.7 wt - 指定出处格式

4.2.8 hl - 高亮显示

5. 使用SolrJ管理索引库

5.1. 什么是solrJ

5.2. 依赖的jar包

5.3. 添加文档

5.3.1. 实现步骤

5.3.2. 代码实现

5.4. 删除文档

5.4.1. 根据id删除

5.4.2. 根据查询删除

5.5. 修改文档

5.6. 查询文档

5.6.1. 简单查询

5.6.2. 复杂查询

6. 案例实现

6.1. 原型分析

6.2. 系统架构

6.3. 工程搭建

6.3.1. Springmvc.xml

6.3.2. Web.xml

6.4. Dao

6.5. Service

6.6. controller

7. 总结

全文搜索技术—Solr的更多相关文章

随机推荐

热门专题

3.5.1.
管理界面

3.5.2.
Dashboard

3.5.3.
Logging

3.5.4.
Cloud

3.5.5.
Core Admin

3.5.6.
java properties

3.5.7.
Tread Dump

3.5.8.
Core selector

3.5.9.
Analysis

3.6.1.
Schema.xml

3.6.2.
安装中文分词器

4.
Solr管理索引库

4.1.1.
添加/更新文档

4.2.7 wt - 指定出处格式　