天天看點

solr服務(搜尋服務)

1   solr實作全文搜尋

solr 是apache下的一個頂級開源項目,采用java開發,它是基于lucene的全文搜尋伺服器。solr提供了比lucene更為豐富的查詢語言,同時實作了可配置、可擴充,并對索引、搜尋性能進行了優化。

solr是一個全文檢索伺服器,隻需要進行配置就可以實作全文檢索服務。

solr的版本:4.10.3

需要把solr伺服器安裝到linux環境:

第一步:安裝linux、jdk、tomcat(因為solr的搜尋是在web下面進行的搜尋,是以需要将solr部署到tomcat上面)

[root@bogon ~]# ll

total 8044

-rw-r--r--. 1 root root 8234674 oct 27  2013 apache-tomcat-7.0.47.tar.gz

[root@bogon ~]# tar -zxf apache-tomcat-7.0.47.tar.gz

total 8048

drwxr-xr-x. 9 root root    4096 sep 10 17:55 apache-tomcat-7.0.47

[root@bogon ~]# mkdir /usr/local/solr

[root@bogon ~]# cp apache-tomcat-7.0.47 /usr/local/solr/tomcat

cp: omitting directory `apache-tomcat-7.0.47'

[root@bogon ~]# cp apache-tomcat-7.0.47 /usr/local/solr/tomcat -r

[root@bogon ~]# cd /usr/local/solr/

[root@bogon solr]# ll

total 4

drwxr-xr-x. 9 root root 4096 sep 10 17:56 tomcat

[root@bogon solr]#

第二步:把solr的壓縮包上傳到伺服器。并解壓。

第三步:把/root/solr-4.10.3/dist/solr-4.10.3.war包部署到tomcat下。并改名為solr.war

[root@bogon dist]# cp solr-4.10.3.war /usr/local/solr/tomcat/webapps/solr.war

第四步:解壓war包。啟動tomcat自動解壓。關閉tomcat。删除solr.war.

第五步:把/root/solr-4.10.3/example/lib/ext 目錄下所有的jar包複制到solr工程中。

[root@bogon ext]# cp * /usr/local/solr/tomcat/webapps/solr/web-inf/lib/

第六步:建立solrhome。solrhome是存放solr伺服器所有配置檔案的目錄。

[root@bogon example]# pwd

/root/solr-4.10.3/example

[root@bogon example]# cp -r solr /usr/local/solr/solrhome

[root@bogon example]#

第七步:告訴solr伺服器solrhome的位置。

需要修改solr工程的web.xml檔案。

第八步:啟動tomcat

1、在solr中預設是中文分析器,需要手工配置。配置一個fieldtype,在fieldtype中指定中文分析器。

2、solr中的字段必須是先定義後使用。

第一步:使用ik-analyzer。把分析器的檔案夾上傳到伺服器。

第二步:需要把分析器的jar包添加到solr工程中。

[root@bogon ik analyzer 2012ff_hf1]# cp ikanalyzer2012ff_u1.jar /usr/local/solr/tomcat/webapps/solr/web-inf/lib/

[root@bogon ik analyzer 2012ff_hf1]#

第三步:需要把ikanalyzer需要的擴充詞典及停用詞詞典、配置檔案複制到solr工程的classpath。

/usr/local/solr/tomcat/webapps/solr/web-inf/classes

[root@bogon ik analyzer 2012ff_hf1]# cp ikanalyzer.cfg.xml ext_stopword.dic mydict.dic /usr/local/solr/tomcat/webapps/solr/web-inf/classes

注意:擴充詞典及停用詞詞典的字元集必須是utf-8。不能使用windows記事本編輯。

第四步:配置fieldtype。需要在solrhome/collection1/conf/schema.xml中配置。

技巧:使用vi、vim跳轉到文檔開頭gg。跳轉到文檔末尾:g

<fieldtype name="text_ik" class="solr.textfield">

  <analyzer class="org.wltea.analyzer.lucene.ikanalyzer"/>

</fieldtype>

業務字段判斷标準:

1、在搜尋時是否需要在此字段上進行搜尋。例如:商品名稱、商品的賣點、商品的描述

2、後續的業務是否需要用到此字段。例如:商品id。

需要用到的字段:

1、商品id

2、商品title

3、賣點

4、價格

5、商品圖檔

6、商品分類名稱

7、商品描述

solr中的業務字段:

1、id——》商品id

其他的對應字段建立solr的字段。

<field name="item_title" type="text_ik" indexed="true" stored="true"/>

<field name="item_sell_point" type="text_ik" indexed="true" stored="true"/>

<field name="item_price"  type="long" indexed="true" stored="true"/>

<field name="item_image" type="string" indexed="false" stored="true" />

<field name="item_category_name" type="string" indexed="true" stored="true" />

<field name="item_desc" type="text_ik" indexed="true" stored="false" />

<field name="item_keywords" type="text_ik" indexed="true" stored="false" multivalued="true"/>

<copyfield source="item_title" dest="item_keywords"/>

<copyfield source="item_sell_point" dest="item_keywords"/>

<copyfield source="item_category_name" dest="item_keywords"/>

<copyfield source="item_desc" dest="item_keywords"/>

重新啟動tomcat

添加:添加一個json格式的檔案就可以。

修改:在solr中沒有update,隻需要添加一個新的文檔,要求文檔id和被修改文檔的id一緻。原理是先删除後添加。

删除:使用xml格式。

删除兩種方法:

1、根據id删除:

<delete>

<id>test001</id>

</delete>

<commit/>

2、根據查詢删除:

<query>*:*</query>

2   solrj用戶端

需要依賴solrj的jar包。

<!-- solr用戶端

-->

         <dependency>

              <groupid>org.apache.solr</groupid>

              <artifactid>solr-solrj</artifactid>

         </dependency>

public class solrjtest {

     @test

     public void adddocument() throws exception {

         //建立一連接配接

         solrserver solrserver = new httpsolrserver("http://192.168.25.154:8080/solr");

         //建立一個文檔對象

         solrinputdocument document = new solrinputdocument();

         document.addfield("id", "test001");

         document.addfield("item_title", "測試商品2");

         document.addfield("item_price", 54321);

         //把文檔對象寫入索引庫

         solrserver.add(document);

         //送出

         solrserver.commit();

     }

     public void deletedocument() throws exception {

         //solrserver.deletebyid("test001");

         solrserver.deletebyquery("*:*");

}

使用java程式讀取mysql資料庫中的商品資訊,然後建立solr文檔對象,把商品資訊寫入索引庫。

需要釋出一個服務。 

為了靈活的進行分布式部署需要建立一搜素的服務工程釋出 搜素服務。

solr服務(搜尋服務)