部署基于tomcat 8 的solrCloud 5.5集群

@(OTHERS)[solr]

• 部署基于tomcat 8 的solrCloud 55集群
  • 一版本及準備工作
  • 二準備solr相關webapp內容并復制至tomcat
  • 三準備配置文件并上傳至zk
    • 注意這里使用了managed-schema而不是schemaxml之后再分析
  • 四準備solr的索引數據目錄及配置
  • 五配置tomcat并啟動
    • 有個小問題如果上面的URL不加上indexhtml則加載不成功看哪里的設置把默認加載index的配置去掉了這會不會影響索引等下試一下
  • 六添加其它節點
  • 七創建core
  • 八使用API索引與搜索
    • 1索引
    • 2索引
  • 九zk中的內容
  • 十創建新的core

（一）版本及準備工作

1、下載并解壓tomcat, solr至目錄/home/hadoop/tomcat, /home/hadoop/solr
其中版本為：

solr-5.5.2 tomcat-8.5.4

（二）準備solr相關webapp內容，并復制至tomcat

1、將/home/hadoop/solr-5.5.2/server/lib/ext/*中的jar包復制到/home/hadoop/solr-5.5.2/server/solr-webapp/webapp/WEB-INF/lib，主要是slf4j與log4j相關的jar包，tomcat加載solr時要用到這些jar包。

cp /home/hadoop/solr-5.5.2/server/lib/ext/* /home/hadoop/solr-5.5.2/server/solr-webapp/webapp/WEB-INF/lib

2、將上述solr webapp整個目錄復制到tomcat/webapps中，并重命名為solr

cp -r /home/hadoop/solr-5.5.2/server/solr-webapp/webapp /home/hadoop/tomcat-8.5.4/webapps/solr

（三）準備配置文件并上傳至zk

1、準備一個collection配置文件
一個collection需要至少schema.xml與solrconfig 2份配置文件，除此以外還有一些stopword，同義詞等配置文件。我們使用官方提供的基本配置basic_configs

mkdir /home/hadoop/solr-5.5.2/conf cp -r /home/hadoop/solr-5.5.2/server/solr/configsets/basic_configs/conf /home/hadoop/solr-5.5.2/conf/basic_configs

注意這里使用了managed-schema，而不是schema.xml。之后再分析。

2、將配置文件上傳至zk

java -classpath .:/home/hadoop/tomcat-8.5.4/webapps/solr/WEB-INF/lib/* org.apache.solr.cloud.ZkCLI -cmd upconfig -zkhost 10.120.69.101:2181,10.120.69.100:2181,10.120.69.102:2181/solr55 -confdir /home/hadoop/solr-5.5.2/conf/basic_configs -confname basic_configs

然后再到zk中檢查配置是否成功上傳。

（四）準備solr的索引數據目錄及配置

1、創建用于保存索引文件的目錄

mkdir /disk1/solr55/data/solr-core chown -R hadoop:hadoop /disk1/solr55

注意這個目錄的權限。

2、將solr.xml復制到上述目錄

cp /home/hadoop/solr-5.5.2/server/solr/solr.xml /disk1/solr55/data/solr-core/

3、 修改solr.xml，修改hostPort和Tomcat端口一致

<int name="hostPort">8080</int>

（五）配置tomcat并啟動

1、在tomca/conf目錄下創建Catalina/localhost目錄

mkdir -p /home/hadoop/tomcat-8.5.4/conf/Catalina/localhost

2、在上述目錄中創建solr.xml，此為Solr/home的配置文件。

<?xml version="1.0" encoding="UTF-8"?><Context docBase="/home/hadoop/tomcat-8.5.4/webapps/solr" debug="0" crossContext="true"> <Environment name="solr/home" type="java.lang.String" value="/disk1/solr55/data/solr-core/" override="true"/> </Context>

3、修改bin/catalina.sh中的JAVA_OPTS變量，加上zk的配置：

JAVA_OPTS="$JAVA_OPTS -DzkHost=10.120.69.101:2181,10.120.69.100:2181,10.120.69.102:2181/solr55"

4、啟動tomcat

bin/startup.sh

注意先為幾個腳本加上權限：

chmod +x startup.sh shutdown.sh catalina.sh

5、驗證UI

http://10.120.69.104:8080/solr/index.html

有個小問題：如果上面的URL不加上index.html則加載不成功，看哪里的設置把默認加載index的配置去掉了。這會不會影響索引，等下試一下。

6、建一個測試collection驗證功能
因為目前只有一臺機器，所以只能建一個shard， 一個副本了。
配置文件使用上面的basic_configs

curl 'http://10.120.69.104:8080/solr/admin/collections?action=CREATE&name=collection_1&numShards=1&replicationFactor=1&collection.configName=basic_configs'

然后在UI上查看是否已經創建成功。

（六）添加其它節點

1、將/home/hadoop/solr-5.5.2、/home/hadoop/tomcat-8.5.4與/disk1/solr55/data/ 三個目錄復制到其它機器相同的目錄中。

2、啟動tomcat

（七）創建core

curl ‘http://10.120.69.104:8080/solr/admin/collections?action=CREATE&name=collection_2&numShards=2&replicationFactor=2&collection.configName=basic_configs’

創建的2個core分別如下圖：

（八）使用API索引與搜索

1、索引

public class IndexDemo {private static final String DEFAULT_COLLECTION = "collection4";//private static final String SOLR_ZK = "10.120.69.101:2181/solr";private static final String SOLR_ZK = "10.120.69.101:2181/solr55";public static void main(String[] args) throws SolrServerException, IOException {SolrInputDocument doc = new SolrInputDocument();// 實例化索引Docdoc.addField("id", "index_demo");// 添加主鍵//doc.addField("qualifier_col", "valuedemo");// 添加主鍵CloudSolrClient client = new CloudSolrClient(SOLR_ZK);// cloud模式client.setDefaultCollection(DEFAULT_COLLECTION);client.add(doc);//client.add("collection1", doc);client.commit();client.close();}}

2、索引

public class QueryDemo {private static final String DEFAULT_COLLECTION = "collection4";private static final String SOLR_ZK = "10.120.69.101:2181/solr55"; // private static final String SOLR_ZK = "10.120.69.101:2181/solr";public static void main(String[] args) throws SolrServerException, IOException {try (CloudSolrClient client = new CloudSolrClient(SOLR_ZK);) {// cloud模式//根據id查docSolrDocument doc = client.getById(DEFAULT_COLLECTION, "index_demo");if(null != doc){for (String field : doc.getFieldNames()) {System.out.println(field + " : " + doc.getFieldValues(field));}}//根據field查docSolrQuery query = new SolrQuery();//query.setQuery(mQueryString);query.setRequestHandler("/query");// query.set("q", "qualifier_col:valuedemo");//返回index_demo// query.set("q", "qualifier_col:valuedemo OR id:index_demo2");//返回index_demo// query.set("q", "qualifier_col:valuedemo AND id:index_demo2");//返回空// query.set("q", "qualifier_col:valuede*");//返回index_demoQueryResponse response = client.query(DEFAULT_COLLECTION, query);for(SolrDocument doc2 :response.getResults()){System.out.println(doc2.getFieldValue("id"));}}}}

（九）zk中的內容

[zk: 10.120.69.101(CONNECTED) 16] get /solr5/ configs clusterstate.json aliases.json live_nodes overseer overseer_elect collections

通過命令上傳的配置文件都在configs目錄中，collections中是各個collection的信息。
其它目錄的詳細信息以后再分析。

（十）創建新的core

1、準備配置文件

2、上傳至zk

java -classpath .:/home/hadoop/tomcat-8.5.4/webapps/solr/WEB-INF/lib/* org.apache.solr.cloud.ZkCLI -cmd upconfig -zkhost 10.120.69.101:2181,10.120.69.100:2181,10.120.69.102:2181/solr55 -confdir /home/hadoop/solr/myconf/ -confname myconf

3、創建core

curl 'http://10.120.69.104:8080/solr/admin/collections?action=CREATE&name=collection2&numShards=2&replicationFactor=1&collection.configName=myconf' 創作挑戰賽新人創作獎勵來咯，堅持創作打卡瓜分現金大獎

總結

以上是生活随笔為你收集整理的部署基于tomcat 8 的solrCloud 5.5集群的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。