设为首页 收藏本站
查看: 967|回复: 0

[经验分享] Mongodb安装搭建Replica Set+Sharding集群

[复制链接]

尚未签到

发表于 2018-10-26 09:42:07 | 显示全部楼层 |阅读模式
  Mongodb安装搭建Replica Set+Sharding集群
  一.简介
  Replica Set:复制在为数据提供了冗余同时,也提高了数据的可用性。由于在不同的数据库服务器上拥有多个数据镜像,复制可以有效的防止由于单台服务器故障而导致的数据丢失。复制还能够帮助我们从硬件故障或是服务中断中恢复数据。复制集是由一组拥有相同数据集的 mongod 实例组成的。其中的一个节点为主节点(Primary),所有的写请求都是在它上面完成的。而其他的节点都是从节点(secondary),从节点接收从主节点上传来的操作并应用,并以此来保证其与主节点的数据集一致。
  Sharding:分片是使用多个机器存储数据的方法,MongoDB使用分片以支持巨大的数据存储量与对数据操作.。高数据量和吞吐量的数据库应用会对单机的性能造成较大压力,大的查询量会将单机的CPU耗尽,大的数据量对单机的存储压力较大,最终会耗尽系统的内存而将压力转移到磁盘IO上。
  Shard server:存储实际数据分片。每个shard可以是一个mongod实例,也可以是一组mongod实例构成的replicasets为了提供高可用性和数据的一致性,shard内部的故障自动切换,建议每个shard为一组replica sets。
  Config server:所有shard节点的配置信息,每个分片的shard key范围,分片在各个shard的分布情况,集群中所有db和collection的sharding的配置信息。配置一个数据集存储于那些分片中。
  Router server:客户端接入,先询问配置服务器需要到那个shard上查询或者保存记录然后连接shard执行,最后返回结果给客户端。分片群集可以包含多个查询路由器来划分客户端请求负载。客户端发送请求给一个查询的路由器。大多数分片集群有很多查询的路由器。
  二.服务器以及服务信息
  服务器
  Ip
  服务及端口
  CentosA
  10.255.4.200
  mongod shard1_1:27017
  mongod shard2_1:27018
  mongod config:20000
  Mongs:30000
  CentosB
  10.255.4.201
  mongod shard1_2:7017
  mongod shard2_2:7018
  mongod config:20000
  Mongs:30000
  centosC
  10.255.4.202
  mongod shard1_3:27017
  mongod shard2_3:27018
  mongod config:20000
  Mongs:30000
  三.配置步骤和命令
  1. 连接服务器
  ssh root@10.255.4.200
  ssh root@10.255.4.201
  ssh root@10.255.4.202
  2. 建立数据和日志的目录
  centosA:
  mkdir -p /data/shard1_1
  mkdir -p /data/shard2_1
  mkdir -p /data/config
  centosB:
  mkdir -p /data/shard1_2
  mkdir -p /data/shard2_2
  mkdir -p /data/config
  centosC:
  mkdir -p /data/shard1_3
  mkdir -p /data/shard2_3
  mkdir -p /data/config
  3. 安装mongodb
  CentosA:yum –y install mongodb*
  centosB:yum –y install mongodb*
  centosC:yum –y install mongodb*
  4. 启动分片mongod服务
  centosA:
  service mongod stop 停止已经启动的服务,可能会占用端口,导致后面报错
  mongod --shardsvr --replSet shard1 --port 27017 --dbpath /data/shard1_1 --logpath /data/shard1_1/shard1_1.log --logappend --fork
  mongod --shardsvr --replSet shard2 --port 27018 --dbpath /data/shard2_1 --logpath /data/shard2_1/shard2_1.log --logappend --fork
  centosB:
  service mongod stop
  mongod --shardsvr --replSet shard1 --port 27017 --dbpath /data/shard1_2 --logpath /data/shard1_2/shard1_2.log --logappend --fork
  mongod --shardsvr --replSet shard2 --port 27018 --dbpath /data/shard2_2 --logpath /data/shard2_2/shard2_2.log --logappend –fork
  centosC:
  service mongod stop
  mongod --shardsvr --replSet shard1 --port 27017 --dbpath /data/shard1_3 --logpath /data/shard1_3/shard1_3.log --logappend --fork
  mongod --shardsvr --replSet shard2 --port 27018 --dbpath /data/shard2_3 --logpath /data/shard2_3/shard2_3.log --logappend –fork
  5. 任意连接一台centos配置分片和数据集
  mongo --port 27017
  config= = {_id:'shard1',members:[{_id:0,host:'10.255.4.200:27017'},{_id:1,host:'10.255.4.201:27017'},{_id:2,host:'10.255.4.202:27017'}]}
  rs.initiate(config)
  mongo --port 27018
  config= = {_id:'shard2',members:[{_id:0,host:'10.255.4.200:27018'},{_id:1,host:'10.255.4.201:27018'},{_id:2,host:'10.255.4.202:27018'}]}
  rs.initiate(config)
  6. 启动config mongod服务
  CentosA:
  mongod --configsvr --dbpath /data/config --port 20000 --logpath /data/config/config.log --logappend –fork
  CentosB:
  mongod --configsvr --dbpath /data/config --port 20000 --logpath /data/config/config.log --logappend --fork
  CentosC:
  mongod --configsvr --dbpath /data/config --port 20000 --logpath /data/config/config.log --logappend --fork
  7. 启动路由服务
  centosA:
  mongos --configdb 10.255.4.200:20000,10.255.4.201:20000,10.255.4.202:20000 --port 30000 --chunkSize 1 --logpath /data/mongos.log --logappend --fork
  centosB:
  mongos --configdb 10.255.4.200:20000,10.255.4.201:20000,10.255.4.202:20000 --port 30000 --chunkSize 1 --logpath /data/mongos.log --logappend --fork
  centosC:
  mongos --configdb 10.255.4.200:20000,10.255.4.201:20000,10.255.4.202:20000 --port 30000 --chunkSize 1 --logpath /data/mongos.log --logappend --fork
  8.添加分片复制集,激活数据库和表分片
  use admin
  db.runCommand({addshard:"shard1/10.255.4.200:27017,10.255.4.201:27017,10.255.4.202:27017"});
  db.runCommand({addshard:"shard2/10.255.4.200:27018,10.255.4.201:27018,10.255.4.202:27018"});
  db.runCommand({enablesharding:"test"})
  db.runCommand({shardcollection:"test.users",key:{_id:1}})
  9. 测试集群分片结果
  use test
  for(var i=1;i

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-626615-1-1.html 上篇帖子: MongoDB误操作后的point in time recovery-SQL Server Deep Dive-51CTO博客 下篇帖子: mongodb 命令相关
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表