设为首页 收藏本站
查看: 1696|回复: 0

[经验分享] 负载均衡----文件服务策略

[复制链接]

尚未签到

发表于 2015-9-10 11:15:23 | 显示全部楼层 |阅读模式
  客串:屌丝的坑人表单神器、数据库那点事儿
  面向对象升华:面向对象的认识----新生的初识、面向对象的番外----思想的梦游篇(1)、面向对象的认识---如何找出类
  PHP项目 起点:手把手教你做关键词匹配项目(搜索引擎)---- 第一天  最新:手把手教你做关键词匹配项目(搜索引擎)---- 第二十一天
  
  负载均衡----文件服务策略
  同类文章:负载均衡----概念认识篇、负载均衡----实现配置篇(Nginx)
  上回我提到的这么多服务器,他们共同需要的文件从哪里来?
那么我们就需要文件服务器,文件服务器从哪里来,我们先看图了解下:
DSC0000.png
  图1
  
  ---------------------------------------------------------------------------------------------------------------
  
  
DSC0001.png
  图2
  不管是图1还是图2都能解决问题。
  当你拿着这两份图给老板审批的时候,老板都会选择图2。
  这个涉及高层的问题,先不用去理会,今天我们主要的内容是文件服务策略。
  
  今天介绍的文件服务策略分为三种(Linux):
  1.文件共享
  2.文件同步
  3.分布式文件系统
三种的优缺点,本篇不作声明。
  
  1. 文件共享篇
  
  参照图2,PA为文件服务器,文件主要存放服务器。
P1,P2,P3执行以下命令即可,你可以把该命令放入/etc/rc.local,开机自动启动 :



mount -o rw 192.168.2.2:/storage  /storage
  注:PA,P1,P2,P3   /storage为文件路径
  
  2. 文件同步
  PA安装rsync服务端,如何安装请查看:http://rsync.samba.org/
  2.1 软件包安装



sudo apt-get  install  rsync  #在debian、ubuntu 等在线安装方法;
yum install rsync    #Fedora、Redhat 等在线安装方法;
rpm -ivh rsync       #Fedora、Redhat 等rpm包安装方法;
  2.2 配置文件
  rsync的主要有以下三个配置文件/etc/rsyncd.conf(主配置文件)、/etc/rsyncd.secrets(密码文件)、/etc/rsyncd.motd(rysnc服务器信息)
注:rsyncd.secrets这个密码文件的文件属性设为root拥有, 且权限要设为600, 否则无法备份成功!
  /etc/rsyncd.conf:



pid file = /var/run/rsyncd.pid   
port = 873
address = 192.168.1.171  
 
uid = root
gid = root
use chroot = yes  
read only = yes
#limit access to private LANs
hosts allow=192.168.2.0/255.255.255.0  
hosts deny=*
max connections = 5
#motd file = /etc/rsyncd.motd
#This will give you a separate log file
#log file = /var/log/rsync.log
#This will log every file transferred - up to 85,000+ per user, per sync
#transfer logging = yes
log format = %t %a %m %f %b
syslog facility = local3
timeout = 300
[storage]   
path = /storage
list=yes
ignore errors
auth users = root
secrets file = /etc/rsyncd.secrets  
  rsyncd.secrets:



root:storage@mydomain.com
  2.3 启动服务



/etc/init.d/xinetd reload
  
  P1、P2、P3也一样安装rsync。
  开个定时命令crontab,每几分钟同步一次,执行以下命令:



rsync -vzrtopg --delete root@192.168.2.2::storage --password-file=/etc/rsync.pass
  为了不用输入密码,/etc/rsync.pass加入密码



storage@mydomain.com
  
  3. 分布式文件系统
  
开始之前先看图.
   DSC0002.png
  首先了解下几个概念:
  1.PA:Master文件服务器(主服务器)
  2.P1、P2、P3:chunk文件服务器(文件存放服务器)
  文件介绍的也是使用moosefs,官方网站:http://www.moosefs.org/reference-guide.html#making-and-installing
  里面有篇中文文档,挺靠谱的。
  
  3.1 PA安装MooseFS Master



wget http://ncu.dl.sourceforge.net/project/moosefs/moosefs/1.6.11/mfs-1.6.11.tar.gz
tar zxvf mfs-1.6.11.tar.gz
cd mfs-1.6.11
useradd mfs -s /sbin/nologin
./configure --prefix=/usr/local/mfs --with-default-user=mfs --with-default-group=mfs
make
make install
  把Master配置文件,拷贝过去:



cd /usr/local/mfs/etc/
cp mfsmaster.cfg.dist mfsmaster.cfg
cp mfsexports.cfg.dist mfsexports.cfg
  启动、暂停命令



/usr/local/mfs/sbin/mfsmaster start
/usr/local/mfs/sbin/mfsmaster –s
  Master mfsexports.cfg配置



192.168.2.0/24 . rw
192.168.2.0/24 / rw
  设置副本的份数,推荐 3 份



/usr/local/mfs/bin/mfssetgoal -r 3
  
  3.2 P1、P2、P3安装MooseFS Chunk Server



wget http://ncu.dl.sourceforge.net/project/moosefs/moosefs/1.6.11/mfs-1.6.11.tar.gz
tar zxvf mfs-1.6.11.tar.gz
cd mfs-1.6.11
useradd mfs -s /sbin/nologin
./configure --prefix=/usr/local/mfs --with-default-user=mfs --with-default-group=mfs
make
make install
  把Chunk Server配置文件,拷贝过去:



cd /usr/local/mfs/etc/
cp mfschunkserver.cfg.dist mfschunkserver.cfg
cp mfshdd.cfg.dist mfshdd.cfg
  启动、暂停命令



/usr/local/mfs/sbin/mfschunkserver start
/usr/local/mfs/sbin/mfschunkserver stop
  mfshdd.cfg配置



/data/mfs #文件存放路径
  
  3.3 MooseFS Client安装
  PA、P1、P2、P3都安装,安装如下:



wget http://ncu.dl.sourceforge.net/project/moosefs/moosefs/1.6.11/mfs-1.6.11.tar.gz
tar zxvf mfs-1.6.11.tar.gz
cd mfs-1.6.11
useradd mfs -s /sbin/nologin
./configure --prefix=/usr/local/mfs --with-default-user=mfs --with-default-group=mfs
--enable-mfsmount
make
make install
  PA、P1、P2、P3挂载文件系统:



/usr/local/mfs/bin/mfsmount /storage -H 192.168.2.2
  
  总结: 好了,三种解决方案都介绍完了,整体都很简单,赶快来选择适合自己的解决方案吧,动手试试吧!
当然三种方案都有自己的优缺点,我希望看了文章的不点推荐的人就回答下这些问题吧!
  
  

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-111882-1-1.html 上篇帖子: mysal 下篇帖子: 流行的开源分布式文件系统比较
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表