设为首页 收藏本站
查看: 1055|回复: 0

[经验分享] 多节点FastDFS存储部署

[复制链接]
累计签到:1 天
连续签到:1 天
发表于 2016-9-1 10:10:32 | 显示全部楼层 |阅读模式
                      安装环境

  Cnetos 6.7 64位
  fastdfs-5.05.tar.gz
  一共三个节点 node1:192.168.30.93;node2:192.168.30.94;node3:192.168.30.95
一、安装前准备
  1、因为FDFS为开源的java程序,所以需要安装jdk
  2、下载安装依赖包libfastcommon
1
2
3
4
5
# wget https://github.com/happyfish100/libfastcommon/archive/master.zip
# unzip master.zip  
# cd libfastcommon-master/
# ./make.sh
# ./make.sh install



二、安装fastdfs-5.05.tar.gz
  1、以下操作在三个节点都要进行:
1
2
3
4
5
# cp fastdfs-5.05.tar.gz /usr/src
# tar zxvf fastdfs-5.05.tar.gz
# cd fastdfs-5.05
# ./make.sh
# ./make.sh install



  2、源码安装完成后,可在/usr/bin下查看fdfs的可执行文件
wKiom1fGoieSRVngAAB-8ut96Ng352.jpg
  3、/etc/fdfs下为配置模板
wKiom1fGo5bh5clgAAAQtb803fw895.jpg
三、修改配置文件
  1、本次部署一共三个节点,94和95作为tracker节点,负责调度,引导存储,另外这三个节点都作为storage节点,负责存储。
  2、配置tracker节点,94和95配置相同
1
2
3
4
5
6
7
8
9
# cd /etc/fdfs
# cp tracker.conf.sample tracker.conf
# vim tracker.conf
  disabled=false #此项需要设置为false
  port=22122  #此项为tracker监听端口
  base_path=/home/yuqing/fastdfs #此项为tracker的日志和同步的bin文件存放目录
  store_lookup=2  #此项为存储方式,其中0为轮流存储,1为指定组,2为智能存储,首选空间较大组
  store_group=group2  #当存储方式为1时,指定的存储组
  http.server_port=8080 #这个是如果要做web界面时候用的http端口



  3、配置storage节点,三个节点配置相同
1
2
3
4
5
6
7
8
9
10
# cp storage.conf.sample storage.conf
# vim storage.conf
   disabled=false #设置为false
   group_name=group1 #表示组名
   port=23000 #storage监听端口
   base_path=/home/yuqing/fastdfs #storage日志及bin文件存放位置
   store_path_count=1 #存储路径数
   store_path0=/home/yuqing/fastdfs #文件存储位置
   tracker_server=192.168.209.121:22122 #tracker节点位置,可写多项,因此将94、95按格式填写
   http.server_port=8888 #web接口,如果不加nginx可不管,但是要tracker和storage一样



  4、配置client
1
2
3
4
5
# cp client.conf.sample client.conf
# vim client.conf
  base_path=/home/yuqing/fastdfs #文件存储位置
  tracker_server=192.168.0.197:22122 #同上
  http.tracker_server_port=80 #同上



四、启动服务
  1、启动tracker
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
# /usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf start
# tail -f /home/yuqing/fastdfs/logs/trackerd.log
  [2016-08-31 16:06:11] INFO - FastDFS v5.05, base_path=/data/linkdood/logs/fastdfs,
   run_by_group=, run_by_user=, connect_timeout=30s, network_timeout=60s, port=22122,
   bind_addr=, max_connections=256, accept_threads=1, work_threads=4, store_lookup=2,
   store_group=, store_server=0, store_path=0, reserved_storage_space=10.00%, downloa
   d_server=0, allow_ip_count=-1, sync_log_buff_interval=10s, check_active_interval=
   120s, thread_stack_size=64 KB, storage_ip_changed_auto_adjust=1, storage_sync_file
   _max_delay=86400s, storage_sync_file_max_time=300s, use_trunk_file=0, slot_min_siz
   e=256, slot_max_size=16 MB, trunk_file_size=64 MB, trunk_create_file_advance=0, tr
   unk_create_file_time_base=02:00, trunk_create_file_interval=86400, trunk_create_fil
   e_space_threshold=20 GB, trunk_init_check_occupying=0, trunk_init_reload_from_binlo
   g=0, trunk_compress_binlog_min_interval=0, use_storage_id=0, id_type_in_filename=ip
   , storage_id_count=0, rotate_error_log=0, error_log_rotate_time=00:00, rotate_error
   _log_size=0, log_file_keep_days=0, store_slave_file_use_link=0, use_connection_pool
   =0, g_connection_pool_max_idle_time=3600s



  如果查看日志为以上信息,表示启动成功。
  2、启动storage
1
2
3
4
5
6
7
8
9
10
11
12
13
# /usr/bin/fdfs_storaged /etc/fdfs/storage.conf start
# tail -f /home/yuqing/fastdfs/logs/storaged.log
  [2016-08-31 16:08:28] INFO - file: storage_param_getter.c, line: 191, use_storage_id=0,
   id_type_in_filename=ip, storage_ip_changed_auto_adjust=1, store_path=0, reserved_stor
   age_space=10.00%, use_trunk_file=0, slot_min_size=256, slot_max_size=16 MB, trunk_file
   _size=64 MB, trunk_create_file_advance=0, trunk_create_file_time_base=02:00, trunk_crea
   te_file_interval=86400, trunk_create_file_space_threshold=20 GB, trunk_init_check_occu
   pying=0, trunk_init_reload_from_binlog=0, trunk_compress_binlog_min_interval=0, store_s
   lave_file_use_link=0
  [2016-08-31 16:08:28] INFO - file: storage_func.c, line: 254, tracker_client_ip: 192.168
  .30.94, my_server_id_str: 192.168.30.94, g_server_id_in_filename: -2079846228
  [2016-08-31 16:08:28] INFO - file: tracker_client_thread.c, line: 310, successfully con
  nect to tracker server 192.168.30.94:22122, as a tracker client, my ip is 192.168.30.94



  如果查看日志看到以上信息,表示启动成功。
3、启动检测进程

1
# /usr/bin/fdfs_monitor /etc/fdfs/storage.conf



wKioL1fGuATAVFkhAAEKn5PRyS0831.jpg
  active为已激活的存储节点
  STORAGE SERVER的状态通常有七种:
  # FDFS_STORAGE_STATUS:INIT      :初始化,尚未得到同步已有数据的源服务器
  # FDFS_STORAGE_STATUS:WAIT_SYNC   :等待同步,已得到同步已有数据的源服务器
  # FDFS_STORAGE_STATUS:SYNCING    :同步中
  # FDFS_STORAGE_STATUS:DELETED    :已删除,该服务器从本组中摘除
  # FDFS_STORAGE_STATUS:OFFLINE    :离线
  # FDFS_STORAGE_STATUS:ONLINE     :在线,尚不能提供服务
  # FDFS_STORAGE_STATUS:ACTIVE     :在线,可以提供服务
  正常状态必须是ACTIVE
  如果为WAIT_SYNC等待一会即可
  如果是INIT,可删除节点重新加入
  删除命令为
1
# /usr/bin/fdfs_monitor /etc/fdfs/client.conf delete group1 192.168.30.95



  然后显示storage3为删除
  存储文件命令为
1
2
# /usr/bin/fdfs_upload_file /etc/fdfs/client.conf /root/test.txt
  group1/M00/00/00/wKgeXlfGo2yAB9YY653.txt



  文件下载命令
1
# /usr/bin/fdfs_download_file /etc/fdfs/client.conf group1/M00/00/00/wKgeXlfGo2yAB9YY653.txt



  删除文件命令
1
# /usr/bin/fdfs_delete_file /etc/fdfs/client.conf group1/M00/00/00/wKgeXlfGo2yAB9YY653.txt




                   


运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-266037-1-1.html 上篇帖子: FastDFS应用故障及解决方案 下篇帖子: CentOS 6.5上安装并配置FastDFS
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表