FastDFS文件服务安装使用

FastDFS 官方介绍分为两部分：tracker-server（跟踪服务器）和 storage-server（存储服务器）。实际应用中还包含一个 nginx 下载服务器。

tracker-server

跟踪服务器：负责文件访问的调度和负载平衡。管理所有的存储服务器。

storage-server

存储服务器：存储文件以及文件管理功能。包括：文件存储，文件同步，提供文件访问接口。它还管理元数据，这些元数据表示为文件的键值对。

存储系统包含一个或多个卷，这些卷的文件在这些卷中是独立的。整个存储系统的容量等于所有容量的总和。文件卷包含一个或多个存储服务器，这些服务器的文件在这些服务器中相同。文件卷中的服务器相互备份，所有这些服务器都是负载平衡的。将存储服务器添加到卷时，此卷中已存在的文件会自动复制到此新服务器，完成此复制后，系统将在线将此服务器切换为提供存储服务。

client-cluster

客户端服务器：上传和下载数据。

使用的系统软件

名称说明

centos 7.x

libfastcommon FastDFS分离出的一些公用函数包

FastDFS FastDFS本体

fastdfs-nginx-module FastDFS和nginx的关联模块

nginx nginx1.15.4

编译环境

which gcc 查看安装位置

yum install git gcc gcc-c++ make automake autoconf libtool pcre pcre-devel zlib zlib-devel openssl-devel wget vim -y

磁盘目录

mkdir /home/dfs #创建数据存储目录

cd /usr/local/src #切换到安装目录准备下载安装包

安装libfastcommon

git clone https://github.com/happyfish100/libfastcommon.git --depth 1

cd libfastcommon/

./make.sh && ./make.sh install #编译安装

安装FastDFS

cd ../ #返回上一级目录

git clone https://github.com/happyfish100/fastdfs.git --depth 1

cd fastdfs/

./make.sh && ./make.sh install #编译安装

#配置文件准备

cp /etc/fdfs/tracker.conf /etc/fdfs/tracker.conf.sample

cp /etc/fdfs/storage.conf /etc/fdfs/storage.conf.sample

cp /etc/fdfs/client.conf /etc/fdfs/client.conf.sample #客户端文件，测试用

cp /usr/local/src/fastdfs-master/conf/http.conf /etc/fdfs/ #供nginx访问使用

cp /usr/local/src/fastdfs-master/conf/mime.types /etc/fdfs/ #供nginx访问使用

安装fastdfs-nginx-module

cd ../ #返回上一级目录

git clone https://github.com/happyfish100/fastdfs-nginx-module.git --depth 1

cp /usr/local/src/fastdfs-nginx-module-master/src/mod_fastdfs.conf /etc/fdfs

安装nginx

wget http://nginx.org/download/nginx-1.15.4.tar.gz #下载nginx压缩包

tar -zxvf nginx-1.15.4.tar.gz #解压

cd nginx-1.15.4/

#添加fastdfs-nginx-module模块

./configure --add-module=/usr/local/src/fastdfs-nginx-module-master/src/

make && make install #编译安装

单机部署

tracker配置

#服务器ip为 192.168.199.128

#我建议用ftp下载下来这些文件本地修改

vim /etc/fdfs/tracker.conf

#需要修改的内容如下

port=22122 # tracker服务器端口（默认22122,一般不修改）

base_path=/home/dfs # 存储日志和数据的根目录

storage配置

vim /etc/fdfs/storage.conf

#需要修改的内容如下

port=23000 # storage服务端口（默认23000,一般不修改）

base_path=/home/dfs # 数据和日志文件存储根目录

store_path0=/home/dfs # 第一个存储目录

tracker_server=192.168.199.128:22122 # tracker服务器IP和端口

http.server_port=8888 # http访问文件的端口(默认8888,看情况修改,和nginx中保持一致)

client测试

vim /etc/fdfs/client.conf

#需要修改的内容如下

base_path=/home/dfs

tracker_server=192.168.199.128:22122 #tracker服务器IP和端口

配置nginx访问

vim /etc/fdfs/mod_fastdfs.conf

#需要修改的内容如下

tracker_server=192.168.199.128:22122 #tracker服务器IP和端口

url_have_group_name=true

store_path0=/home/dfs

#配置nginx.config

vim /usr/local/nginx/conf/nginx.conf

#添加如下配置

server {

listen 8888; ## 该端口为storage.conf中的http.server_port相同

server_name localhost;

location ~/group[0-9]/ {

ngx_fastdfs_module;

}

error_page 500 502 503 504 /50x.html;

location = /50x.html {

root html;

}

测试

http://192.168.199.128/ 返回Welcome to nginx! 页面测试ok

#测试下载，用外部浏览器访问刚才已传过的nginx安装包,引用返回的ID

http://192.168.52.1:8888/group1/M00/00/00/wKgAQ1pysxmAaqhAAA76tz-dVgg.tar.gz

#弹出下载单机部署全部跑通

————————————————————————单机跳过

分布式部署

tracker配置

#服务器ip为 192.168.52.2,192.168.52.3,192.168.52.4

#我建议用ftp下载下来这些文件本地修改

vim /etc/fdfs/tracker.conf

#需要修改的内容如下

port=22122 # tracker服务器端口（默认22122,一般不修改）

base_path=/home/dfs # 存储日志和数据的根目录

storage配置

vim /etc/fdfs/storage.conf

#需要修改的内容如下

port=23000 # storage服务端口（默认23000,一般不修改）

base_path=/home/dfs # 数据和日志文件存储根目录

store_path0=/home/dfs # 第一个存储目录

tracker_server=192.168.52.2:22122 # 服务器1

tracker_server=192.168.52.3:22122 # 服务器2

tracker_server=192.168.52.4:22122 # 服务器3

http.server_port=8888 # http访问文件的端口(默认8888,看情况修改,和nginx中保持一致)

client测试

vim /etc/fdfs/client.conf

#需要修改的内容如下

base_path=/home/moe/dfs

tracker_server=192.168.52.2:22122 # 服务器1

tracker_server=192.168.52.3:22122 # 服务器2

tracker_server=192.168.52.4:22122 # 服务器3

#保存后测试,返回ID表示成功如：group1/M00/00/00/xx.tar.gz

fdfs_upload_file /etc/fdfs/client.conf /usr/local/src/nginx-1.15.4.tar.gz

配置nginx访问

vim /etc/fdfs/mod_fastdfs.conf

#需要修改的内容如下

tracker_server=192.168.52.2:22122 # 服务器1

tracker_server=192.168.52.3:22122 # 服务器2

tracker_server=192.168.52.4:22122 # 服务器3

url_have_group_name=true

store_path0=/home/dfs

#配置nginx.config

vim /usr/local/nginx/conf/nginx.conf

#添加如下配置

server {

listen 8888; ## 该端口为storage.conf中的http.server_port相同

server_name localhost;

location ~/group[0-9]/ {

ngx_fastdfs_module;

}

error_page 500 502 503 504 /50x.html;

location = /50x.html {

root html;

}

启动

防火墙

#不关闭防火墙的话无法使用

systemctl stop firewalld.service #关闭

systemctl restart firewalld.service #重启

启动 fdfs_trackerd

service fdfs_trackerd start

ps -ef | grep fdfs_trackerd 查看服务

设置开机自启动fdfs_trackerd

chkconfig fdfs_trackerd on

启动fdfs_storaged

service fdfs_storaged start

ps -ef | grep fdfs_storaged

设置开机自启动fdfs_storaged

chkconfig fdfs_storaged on

nginx

/usr/local/nginx/sbin/nginx #启动nginx

/usr/local/nginx/sbin/nginx -s reload #重启nginx

/usr/local/nginx/sbin/nginx -s stop #停止nginx

重启nginx

/usr/local/nginx/sbin/nginx 启动

/usr/local/nginx/sbin/nginx -s reload 重启

./nginx -s stop

./nginx

nginx自启动

chkconfig nginx on

检测集群

/usr/bin/fdfs_monitor /etc/fdfs/storage.conf 或者测试连接 fdfs_monitor /etc/fdfs/storage.conf

# 会显示会有几台服务器有3台就会显示 Storage 1-Storage 3的详细信息

说明

配置文件

tracker_server #有几台服务器写几个

group_name #地址的名称的命名

bind_addr #服务器ip绑定

store_path_count #store_path(数字)有几个写几个

store_path(数字) #设置几个储存地址写几个从0开始

*************************测试*******************************

/usr/bin/fdfs_monitor /etc/fdfs/storage.conf 测试连接 fdfs_monitor /etc/fdfs/storage.conf

netstat -unltp|grep fdfs 查看fdfs运行

启动 /usr/bin/fdfs_trackerd start

#保存后测试,返回ID表示成功如：group1/M00/00/00/xx.tar.gz

fdfs_upload_file /etc/fdfs/client.conf /usr/local/src/nginx-1.15.4.tar.gz

返回group1/M00/00/00/wKjHgGFj2yCATbHSAA-itrfn0m4.tar.gz 成功

#测试下载，用外部浏览器访问刚才已传过的nginx安装包,引用返回的ID

http://192.168.199.128:8888/group1/M00/00/00/wKjHgGFj2yCATbHSAA-itrfn0m4.tar.gz

以上经过测试ok

可能遇到的问题

如果不是root 用户你必须在除了cd的命令之外全部加sudo

如果不是root 用户编译和安装分开进行先编译再安装

如果上传成功但是nginx报错404 先检查mod_fastdfs.conf文件中的store_path0是否一致

如果nginx无法访问先检查防火墙和 mod_fastdfs.conf文件tracker_server是否一致

如果不是在/usr/local/src文件夹下安装可能会编译出错

如果 unknown directive "ngx_fastdfs_module" in /usr/local/nginx/conf/nginx.conf:151，可能是nginx一直是启动的，必须要重启nginx才可以，`nginx -s reload`无效。

https://github.com/happyfish100/fastdfs/wiki 官网安装

java连接FastDFS实现上传到自已的文件服务（java代码）下次分享

人面猴
序言：七十年代末，一起剥皮案震惊了整个滨河市，随后出现的几起案子，更是在滨河造成了极大的恐慌，老刑警刘岩，带你破解...
沈念sama阅读 205,386评论 6赞 479
死咒
序言：滨河连续发生了三起死亡事件，死亡现场离奇诡异，居然都是意外死亡，警方通过查阅死者的电脑和手机，发现死者居然都...
沈念sama阅读 87,939评论 2赞 381
救了他两次的神仙让他今天三更去死
文/潘晓璐我一进店门，熙熙楼的掌柜王于贵愁眉苦脸地迎上来，“玉大人，你说我怎么就摊上这事。” “怎么了？”我有些...
开封第一讲书人阅读 151,851评论 0赞 341
道士缉凶录：失踪的卖姜人
文/不坏的土叔我叫张陵，是天一观的道长。经常有香客问我，道长，这世上最难降的妖魔是什么？我笑而不...
开封第一讲书人阅读 54,953评论 1赞 278
港岛之恋（遗憾婚礼）
正文为了忘掉前任，我火速办了婚礼，结果婚礼上，老公的妹妹穿的比我还像新娘。我一直安慰自己，他们只是感情好，可当我...
茶点故事阅读 63,971评论 5赞 369
恶毒庶女顶嫁案：这布局不是一般人想出来的
文/花漫我一把揭开白布。她就那样静静地躺着，像睡着了一般。火红的嫁衣衬着肌肤如雪。梳的纹丝不乱的头发上，一...
开封第一讲书人阅读 48,784评论 1赞 283
城市分裂传说
那天，我揣着相机与录音，去河边找鬼。笑死，一个胖子当着我的面吹牛，可吹牛的内容都是我干的。我是一名探鬼主播，决...
沈念sama阅读 38,126评论 3赞 399
双鸳鸯连环套：你想象不到人心有多黑
文/苍兰香墨我猛地睁开眼，长吁一口气：“原来是场噩梦啊……” “哼！你这毒妇竟也来了？” 一声冷哼从身侧响起，我...
开封第一讲书人阅读 36,765评论 0赞 258
万荣杀人案实录
序言：老挝万荣一对情侣失踪，失踪者是张志新（化名）和其女友刘颖，没想到半个月后，有当地人在树林里发现了一具尸体，经...
沈念sama阅读 43,148评论 1赞 300
护林员之死
正文独居荒郊野岭守林人离奇死亡，尸身上长有42处带血的脓包…… 初始之章·张勋以下内容为张勋视角年9月15日...
茶点故事阅读 35,744评论 2赞 323
白月光启示录
正文我和宋清朗相恋三年，在试婚纱的时候发现自己被绿了。大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
茶点故事阅读 37,858评论 1赞 333
活死人
序言：一个原本活蹦乱跳的男人离奇死亡，死状恐怖，灵堂内的尸体忽然破棺而出，到底是诈尸还是另有隐情，我是刑警宁泽，带...
沈念sama阅读 33,479评论 4赞 322
日本核电站爆炸内幕
正文年R本政府宣布，位于F岛的核电站，受9级特大地震影响，放射性物质发生泄漏。R本人自食恶果不足惜，却给世界环境...
茶点故事阅读 39,080评论 3赞 307
男人毒药：我在死后第九天来索命
文/蒙蒙一、第九天我趴在偏房一处隐蔽的房顶上张望。院中可真热闹，春花似锦、人声如沸。这庄子的主人今日做“春日...
开封第一讲书人阅读 30,053评论 0赞 19
一桩弑父案，背后竟有这般阴谋
文/苍兰香墨我抬头看了看天上的太阳。三九已至，却和暖如春，着一层夹袄步出监牢的瞬间，已是汗流浃背。一阵脚步声响...
开封第一讲书人阅读 31,278评论 1赞 260
情欲美人皮
我被黑心中介骗来泰国打工，没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留，地道东北人。一个月前我还...
沈念sama阅读 45,245评论 2赞 352
代替公主和亲
正文我出身青楼，却偏偏与公主长得像，于是被迫代替她去往敌国和亲。传闻我的和亲对象是个残疾皇子，可洞房花烛夜当晚...
茶点故事阅读 42,590评论 2赞 343

FastDFS文件服务安装使用

推荐阅读更多精彩内容