设为首页 收藏本站
查看: 1605|回复: 0

[经验分享] centos6.5下搭建fastdfs分布式存储

[复制链接]

尚未签到

发表于 2019-2-1 06:39:54 | 显示全部楼层 |阅读模式
  FastDFS分布式文件系统环境介绍
  系统:centos6.5_64_mini
  FastDFS版本:FastDFS_v5.01
  实验节点如下:(注:以下两个节点的安装及配置完全相同)
  SERVER1 IP:192.168.100.250
  SERVER2 IP:192.168.100.251
  1:安装定时同步相关
  #  yum install -y ntpdate
  #  cp /usr/share/zoneinfo/Asia/Shanghai /etc/localtime
  #  ntpdate us.pool.ntp.org
  2:配置时间同步
  #  crontab -e
  3:输入以下代码
  */10 * * * * /usr/sbin/ntpdate us.pool.ntp.org | logger -t NTP
  4:安装相关依赖包
  #  yum -y install gcc gcc-c++ openssl openssl-devel pcre-devel perl wget
  #  mkdir /yunwei8/soft
  #  cd /yunwei8/soft
  5:下载所需的安装包至soft文件夹下
  # wget http://down.yunwei8.com/soft/linux/libevent-2.0.21-stable.tar.gz
  # wget http://down.yunwei8.com/soft/linux/FastDFS_v5.01.tar.gz
  #wget http://down.yunwei8.com/soft/linux/fastdfs-nginx-module_v1.15.tar.gz
  #wget http://down.yunwei8.com/soft/linux/nginx-1.6.0.tar.gz
  6:删除自带libevent
  #  rpm -qa libevent
  #  rpm -e --nodeps libevent-1.4.13-4.el6.x86_64
  7:安装libevent-2.0.21
  #  cd /yunwei8/soft/
  #  tar -zxvf libevent-2.0.21-stable.tar.gz
  #  cd libevent-2.0.21-stable
  #  ./configure
  #  make && make install
  8:为libevent创建软链接到/lib库下,64位系统对应/lib64
  #  ln -s /usr/local/lib/libevent* /lib64/
  #  ln -s /usr/local/lib/libevent* /lib/
  9:安装FastDFS_v5.01
  #  cd /yunwei8/soft
  #  tar -zxvf FastDFS_v5.01.tar.gz
  #  cd FastDFS/
  #  ./make.sh
  #  ./make.sh install
  10:配置跟踪器tracker server
  10.1建立文件夹
  #  mkdir -p /yunwei8/data/fastdfs
  10.2修改tracker参数,找到base_path=/home/yuqing/fastdfs修改如下
  #  vi /etc/fdfs/tracker.conf
  base_path=/yunwei8/data/fastdfs
  11:启动tracker服务
  #  /usr/local/bin/fdfs_trackerd /etc/fdfs/tracker.conf
  #  echo '/usr/local/bin/fdfs_trackerd /etc/fdfs/tracker.conf' >> /etc/rc.local
  12:配置存储服务storage server,并修改相关参数
  #  mkdir -p /yunwei8/data/fastdfs         注:(若tracker和storage在不同服务器则需建立)
  #  mkdir /yunwei8/data/images
  #  vi /etc/fdfs/storage.conf
  找到base_path=/home/yuqing/fastdfs,修改如下
  base_path=/yunwei8/data/fastdfs
  找到store_path0=/home/yuqing/fastdfs,修改如下
  store_path0=/yunwei8/data/images
  找到tracker_server=192.168.209.121:22122,修改如下
  tracker_server=192.168.100.251:22122
  tracker_server=192.168.100.250:22122
  13:启动storage服务
  #  /usr/local/bin/fdfs_storaged /etc/fdfs/storage.conf
  会显示一长串如下的内容
  mkdir data path: 00 ...
  mkdir data path: 01 ...
  mkdir data path: 02 ...
  mkdir data path: 03 ...
  mkdir data path: 04 ...
  mkdir data path: 05 ...
  mkdir data path: 06 ...
  写入开机自启动
  #  echo '/usr/local/bin/fdfs_storaged /etc/fdfs/storage.conf' >> /etc/rc.local
  14:在storage server安装nginx模块
  #  cd /yunwei8/soft/
  #  tar -zxvf fastdfs-nginx-module_v1.15.tar.gz
  #  tar -zxvf nginx-1.6.0.tar.gz
  #  cd nginx-1.6.0
  #  ./configure --prefix=/yunwei8/server/nginx --add-module=../fastdfs-nginx-module/src
  #  make && make install
  15:修改nginx参数配置如下
  #  vi /yunwei8/server/nginx/conf/nginx.conf
  worker_processes  1;
  events {
  worker_connections  1024;
  }
  http {
  include       mime.types;
  default_type  application/octet-stream;
  sendfile        on;
  keepalive_timeout  65;
  server {
  listen       80;
  server_name  localhost;
  location /group1/M00 {
  alias /data/images/data;
  ngx_fastdfs_module;
  }
  }
  }
  16:编写nginx 启动脚本
  #  vi /etc/init.d/nginx
  输入以下代码并保存
#!/bin/sh## nginx - this script starts and stops the nginx daemin## chkconfig:   - 85 15 # description:  Nginx is an HTTP(S) server, HTTP(S) reverse \#               proxy and IMAP/POP3 proxy server# processname: nginx# config:      /yunwei8/server/nginx/conf/nginx.conf# pidfile:     /yunwei8/server/nginx/logs/nginx.pid  # Source function library.. /etc/rc.d/init.d/functions  # Source networking configuration.. /etc/sysconfig/network  # Check that networking is up.[ "$NETWORKING" = "no" ] && exit 0  nginx="/yunwei8/server/nginx/sbin/nginx"prog=$(basename $nginx)  NGINX_CONF_FILE="/yunwei8/server/nginx/conf/nginx.conf"  lockfile=/var/lock/subsys/nginx  start() {    [ -x $nginx ] || exit 5    [ -f $NGINX_CONF_FILE ] || exit 6    echo -n $"Starting $prog: "    daemon $nginx -c $NGINX_CONF_FILE    retval=$?    echo    [ $retval -eq 0 ] && touch $lockfile    return $retval}  stop() {    echo -n $"Stopping $prog: "    killproc $prog -QUIT    retval=$?    echo    [ $retval -eq 0 ] && rm -f $lockfile    return $retval}  restart() {    configtest || return $?    stop    start}  reload() {    configtest || return $?    echo -n $"Reloading $prog: "    killproc $nginx -HUP    RETVAL=$?    echo}  configtest() {  $nginx -t -c $NGINX_CONF_FILE}  rh_status() {    status $prog}  rh_status_q() {    rh_status >/dev/null 2>&1}  case "$1" in    start)        rh_status_q && exit 0        $1        ;;    stop)        rh_status_q || exit 0        $1        ;;    restart|configtest)        $1        ;;    reload)        rh_status_q || exit 7        $1        ;;    status)        rh_status        ;;    *)        echo $"Usage: $0 {start|stop|status|restart|reload|configtest}"        exit 2esac  17:保存后,设置权限并添加到启动服务列表中
  #  chmod 755 /etc/init.d/nginx
  #  chkconfig --add nginx
  #  chkconfig --level 345 nginx on
  18:启动nginx服务
  #  service nginx start
  19:给storage的存储目录做一个软连接
  #  ln -s /yunwei8/data/images/data/ /yunwei8/data/images/data/M00
  20:拷贝mod_fastdfs.conf到/etc/fdfs/
  #  cp /yunwei8/soft/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs/
  21:修改mod_fastdfs.conf配置
  #  vi /etc/fdfs/mod_fastdfs.conf
  找到base_path=/tmp,修改为如下
  base_path=/yunwei8/data/fastdfs
  找到store_path0=/home/yuqing/fastdfs,修改如下
  store_path0=/yunwei8/data/images
  找到url_have_group_name = fasle,修改如下
  url_have_group_name = true
  找到tracker_server=tracker:22122,修改如下
  tracker_server=192.168.100.251:22122
  tracker_server=192.168.100.250:22122
  22:在tracker server上配置client
  #  vi /etc/fdfs/client.conf
  修改client参数,找到base_path=/home/yuqing/fastdfs,修改如下
  base_path=/yunwei8/data/fastdfs
  找到tracker_server=192.168.0.197:22122,修改如下
  tracker_server=192.168.100.250:22122
  tracker_server=192.168.100.251:22122
  23:防火墙开放相应端口
  #  /sbin/iptables -I INPUT -p tcp --dport 80 -j ACCEPT
  #  /sbin/iptables -I INPUT -p tcp --dport 22122-j ACCEPT
  #  /etc/rc.d/init.d/iptables save
  24:创建测试文件
  #  cd /yunwei8/
  创建网页名为yunwei8.html
  #  vi yuwnei8.html
  输入网页内容
  yunwei8
  25:退出和重启
  25.1退出
  直接kill即可让server进程正常退出,可以使用killall命令,例如:
  #  killall fdfs_trackerd
  #  killall fdfs_storaged
  也可以使用FastDFS自带的stop.sh脚本,如:
  #  /usr/local/bin/stop.sh  /usr/local/bin/fdfs_trackerd /etc/fdfs/tracker.conf
  #  /usr/local/bin/stop.sh  /usr/local/bin/fdfs_storaged /etc/fdfs/storage.conf
  stop.sh只会停止命令行(包括参数)完全相同的进程。
  千万不要使用-9参数强杀,否则可能会导致binlog数据丢失的问题。
  25.2重启
  可以kill掉server进程后,执行启动命令行。如:
  #  killall fdfs_trackerd
  #  killall fdfs_storaged
  #  /usr/local/bin/fdfs_trackerd /etc/fdfs/tracker.conf
  #  /usr/local/bin/fdfs_storaged /etc/fdfs/storage.conf
  或者直接使用FastDFS自带的restart.sh脚本,如:
  #  /usr/local/bin/restart.sh  /usr/local/bin/fdfs_trackerd /etc/fdfs/tracker.conf
  #  /usr/local/bin/restart.sh  /usr/local/bin/fdfs_storaged /etc/fdfs/storage.conf
  26:上传测试 /usr/local/bin/restart.sh  /usr/local/bin/fdfs_trackerd /etc/fdfs/tracker.conf
  #  /usr/local/bin/fdfs_test /etc/fdfs/client.conf upload  /yunwei8/yunwei8.html       (绝对路径)
  27:访问上传输出的测试地址
  http://192.168.100.250/group1/M00/00/00/wKhk-lNC56-ABoAZAAAAd6SYAsE45_yunwei8.html
  http://192.168.100.251/group1/M00/00/00/wKhk-lNC56-ABoAZAAAAd6SYAsE45_yunwei8.html



运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-670173-1-1.html 上篇帖子: 分布式文件系统FastDFS架构剖析 下篇帖子: 分布式文件系统FastDFS架构辨析
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表