设为首页 收藏本站
查看: 1312|回复: 0

[经验分享] solr安装-tomcat+solrCloud构建稳健solr集群

[复制链接]
YunVN网友  发表于 2018-11-1 13:30:55 |阅读模式
  solrCloud的搭建可以有两种方式:使用solr内嵌的jetty来搭建;使用外部web容器tomcat来搭建。对于使用jett来搭建参考solr官方的手册照着做肯定ok,下面我主要讲的是如何使用tomcat来搭建solrCloud。
  废话不多说,开始我们的工作!
  1.搭建tomcat单机版solr
  见我的上一篇博文solr安装-tomcat单机版
  2.安装配置zookeeper
  具体下载,安装,配置不详细说了,很简单。只列出我的关键配置项,如下:
  clientPort=4181
  server.2=hadoop.datanode5.com:2888:9888
  server.3=hadoop.datanode2.com:2888:9888
  server.1=hadoop.datanode3.com:2888:9888
  3. 配置solrCloud
  (1)先配置主服务器tomcat 10.2.50.46
  vim /usr/apache-tomcat-7.0.54/bin/catalina.sh   在图片所示位置加入以下代码
  JAVA_OPTS="$JAVA_OPTS -Dbootstrap_confdir=/usr/solr/collection1/conf -Dcollection.configName=myconf -DzkHost=hadoop.datanode2.com:4181,hadoop.datanode3.com:4181,hadoop.datanode5.com:4181"
  注:其中DzkHost是用来指定zookeeper服务器的ip和端口。 confdir目录指定所有的索引库都从collection1索引库中同步字段
  (2)配置从服务器tomcat 10.2.50.28 和10.2.50.52
  vim /home/tomcat/bin/catalina.sh 在和上图同样的位置加入
  JAVA_OPTS="-DzkHost=hadoop.datanode2.com:4181,hadoop.datanode3.com:4181,hadoop.datanode5.com:4181"
  (3)配置solr collection配置文件
  /usr/solr/solr.xml:配置hostport为tomcat的服务端口;配置zkHhost。
  

  
  
  
    ${host:}
  
    8080
  
    ${hostContext:solr}
  
    ${zkClientTimeout:15000}
  
    ${genericCoreNodeNames:true}
  
    hadoop.datanode2.com:4181,hadoop.datanode3.com:4181,hadoop.datanode5.com:4181
  

  
  
  
    ${socketTimeout:0}
  
    ${connTimeout:0}
  
  
  /usr/solr/collection1/core.properties:删除该文件(这样集群启动后就没有collection)
  /usr/solr/collection1/conf/solrconfig.xml:修改如下配置项:
  ${solr.data.dir:/data_solr/example-collection}
  将所有的这些配置同步到各个节点上。
  (3) 保存后依次启动tomcat,输入http://10.2.50.46:8080,看到如下界面说明成功

  正常情况下,应该是没有collection和core的,我这里是自己创建了一个collection。
  (4)创建collection,shard,core
  有两种方式:一种是创建collection,自动分配shard和replica;另一种是创建collection,手动分配shard和replica。推荐后者,因为可控性强。
  方式一:
  curl'http://localhost:7070/solr/admin/collections?action=CREATE&name=europe-collection&numShards=3&replicationFactor=3&maxShardsPerNode=3'
  这样会出来一个collection,它有3个shard,每个shard有1个数据节点,2个备份节点,即该collection共有9个core
  缺点:不灵活,不能选择适合的节点,不能选择数据存放路径,不能选择实例存放路径
  方式二:
  curl 'http://localhost:8080/solr/admin/cores?action=CREATE&name=cz_collection-shard1-replica1&instanceDir=/usr/solr/cz_collection-shard1-replica1&dataDir=/data_solr/cz_collection-shard1-replica1&collection=cz_collection&shard=shard1'
  curl 'http://localhost:8080/solr/admin/cores?action=CREATE&name=cz_collection-shard1-replica2&instanceDir=/usr/solr/cz_collection-shard1-replica2&dataDir=/data_solr/cz_collection-shard1-replica2&collection=cz_collection&shard=shard1'
  这样可以创建出一个collection,并自己指定该collection的shard和replica的所有配置项。还可以继续接着创建。
  以上两种方式的具体api调用,请参看solr官方文档。
  (5)集群运维
  a.集群会发生变化的就是collection的配置,因此当collection的配置文件发生变化后就应该使用命令更新zookeeper中配置文件信息,solr很好提供了运维工具:
  #collection配置
  #将配置文件上传到ZooKeeper中
  java -classpath .:/usr/solr/lib/* org.apache.solr.cloud.ZkCLI -cmd upconfig -zkhost hadoop.datanode2.com:4181,hadoop.datanode3.com:4181,hadoop.datanode5.com:4181 -confdir /usr/solr/collection1/conf -confname myconf
  #将上传到ZooKeeper中配置文件与Collection相关联
  java -classpath .:/usr/solr/lib/* org.apache.solr.cloud.ZkCLI -cmd linkconfig -collection cz_collection -confname myconf -zkhost hadoop.datanode2.com:4181,hadoop.datanode3.com:4181,hadoop.datanode5.com:4181
  b.对于collection,shard,core运维使用api接口即可,在此不说了。
  参考文章:
  http://myjeeva.com/solrcloud-cluster-single-collection-deployment.html#deploying-solrcloud
  http://wiki.apache.org/solr/SolrCloudTomcat
  http://wiki.apache.org/solr/SolrTomcat
  http://blog.csdn.net/woshiwanxin102213/article/details/18793271
  转载:http://blog.csdn.net/xyls12345/article/details/27504965



运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-629442-1-1.html 上篇帖子: solr 安装部署 下篇帖子: 使用搜索引擎solr的步骤
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表