java分布式商城项目环境搭建5-CentOS7.6-搭建分布式文件系统 FastDFS

FastDFS简介

FastDFS 是一个开源的高性能分布式文件系统(DFS)。它的主要功能包括:文件存储,文件同步和文件访问,以及高容量和负载平衡。主要解决了海量数据存储问题,特别适合以中小文件(建议范围:4KB < file size <500MB)为载体的在线服务。
FastDFS 系统有三个角色:跟踪服务器(Tracker Server)、存储服务器(Storage Server)和客
户端(Client)。
Tracker Server:跟踪服务器,主要做调度工作,起到均衡的作用;负责管理所有的 storage server 和 group,每个 storage 在启动后会连接 Tracker,告知自己所属 group 等信息,并保持周期性心跳。
Storage Server:存储服务器,主要提供容量和备份服务;以 group 为单位,每个 group内可以有多台 storage server,数据互为备份。
Client:客户端,上传下载数据的服务器,也就是我们自己的项目所部署在的服务器。
这里我们直接进行安装部署,具体的关于FastDFS分布式文件系统的存储策略、上传过程、文件同步等知识,这里就不进行具体介绍了

FastDFS安装

1.下载安装 libfastcommon

1、下载 libfastcommon
进入下载目录/root/Download

# cd /root/Download

下载 libfastcommon

# wget https://github.com/happyfish100/libfastcommon/archive/V1.0.7.tar.gz
libfastcommon压缩包

2、解压
解压

 # tar -zxvf V1.0.7.tar.gz

进入到解压的目录

# cd libfastcommon-1 0 7
解压后的libfastcommon

3、 编译安装
编译

# ./make.sh

安装

# ./make.sh install
2.下载安装 FastDFS

1、 下载 FastDFS
进入下载目录:

# cd /root/Download

下载 FastDFS

#wget https://github.com/happyfish100/fastdfs/archive/V5.05.tar.gz

2、 解压
解压

# tar -zxvf V5.05.tar.gz

进入到解压的目录

# cd fastdfs-5.05

3、 编译安装
编译

# ./make.sh

安装

# ./make.sh install

配置 FastDFS 环境

1 基础配置

libfastcommon.so 安装到了/usr/lib64/libfastcommon.so, 但是 FastDFS 主程序设置的
lib 目录是/usr/local/lib, 所以需要创建软链接。

# ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so
# ln -s /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so
# ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so
# ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so

FastDFS 服务脚本设置的 bin 目录是 /usr/local/bin, 但实际命令安装在 /usr/bin/ 下。
需要建立 /usr/bin 到 /usr/local/bin 的软链接

# ln -s /usr/bin/fdfs_trackerd /usr/local/bin
# ln -s /usr/bin/fdfs_storaged /usr/local/bin
# ln -s /usr/bin/stop.sh /usr/local/bin
# ln -s /usr/bin/restart.sh /usr/local/bin
3.配置 FastDFS 跟踪器(Tracker)

1、 进入 /etc/fdfs, 复制 FastDFS 跟踪器样例配置文件 tracker.conf.sample, 并重命名为
tracker.conf。
在/etc/fdfs 目录中, 有三个配置文件(client.conf.sample; storage.conf.sample;
tracker.conf.sample) 这三个配置文件是作者给出的配置示例文件。 示例文件不要去动它, 我
们复制一个示例文件来进行配置。

# cd /etc/fdfs
# cp tracker.conf.sample tracker.conf
# vim tracker.conf

编辑 tracker.conf , 标红的需要修改下, 其它的默认即可。

# 配置文件是否不生效, false 为生效
disabled=false
# 提供服务的端口
port=22122
# Tracker 数据和日志目录地址(根目录必须存在,子目录会自动创建)
base_path=/home/fastdfs/tracker
# HTTP 服务端口
http.server_port=80

创建 tracker 基础数据目录, 即 base_path 对应的目录

# mkdir -p /home/fastdfs/tracker

启动 Tracker
启动命令:

# service fdfs_trackerd start

关闭命令:

# service fdfs_trackerd stop

启动 FastDFS Tracker 后, 可以通过以下命令来查看 Tracker 是否启动成功:

# netstat -tupln
启动成功

安装成功

配置 FastDFS 存储 (Storage)

1、 进入 /etc/fdfs 目录, 复制 FastDFS 存储器样例配置文件 storage.conf.sample, 并重命名
为 storage.conf

# cd /etc/fdfs
# cp storage.conf.sample storage.conf
# vim storage.conf

2、 编辑 storage.conf,

# 配置文件是否不生效, false 为生效
disabled=false
# 指定此 storage server 所在 组(卷)
group_name=group1
# storage server 服务端口
port=23000
# 心跳间隔时间, 单位为秒 (这里是指主动向 tracker server 发送心跳)
heart_beat_interval=30
# Storage 数据和日志目录地址(根目录必须存在, 子目录会自动生成)
base_path=/home/fastdfs/storage
# 存放文件时 storage server 支持多个路径。 这里配置存放文件的基路径数目, 通常只配一
个目录。
store_path_count=1
# 逐一配置 store_path_count 个路径, 索引号基于 0。
# 如果不配置 store_path0, 那它就和 base_path 对应的路径一样。
store_path0=/home/fastdfs/file
# FastDFS 存储文件时, 采用了两级目录。 这里配置存放文件的目录个数。
# 如果本参数只为 N(如: 256) , 那么 storage server 在初次运行时, 会在 store_path 下
自动创建 N * N 个存放文件的子目录。
subdir_count_per_path=256
# tracker_server 的列表 , 会主动连接 tracker_server
# 有多个 tracker server 时, 每个 tracker server 写一行
tracker_server=192.168.78.128:22122
# 允许系统同步的时间段 (默认是全天) 。 一般用于避免高峰同步产生一些问题而设定。sync_start_time=00:00
sync_end_time=23:59
# 访问端口
http.server_port=80

3、 创建 Storage 基础数据目录, 对应 base_path 目录
创建 base_path 目录

# mkdir -p /home/fastdfs/storage

这是配置的 store_path0 目录

# mkdir -p /home/fastdfs/file

5、 启动 Storage
启动 storage

# service fdfs_storaged start

关闭 storage

# service fdfs_storaged stop

查看 Storage 和 Tracker 是否在通信:

# /usr/bin/fdfs_monitor /etc/fdfs/storage.conf
通信信息

Client 配置, 文件上传测试

1、 修改 Tracker 服务器中的客户端配置文件

    # cd /etc/fdfs
    # cp client.conf.sample client.conf
    # vim client.conf

2、 修改如下配置即可, 其它默认。

# Client 的数据和日志目录
base_path=/home/fastdfs/client
# Tracker 端口
tracker_server=192.168.78.128:22122

3、 创建 client 目录

# mkdir -p /home/fastdfs/client

4、上传文件测试
首先下载一个图片文件在 Downloads 目录


图片

在 Downloads 目录下执行下面的上传命令:

# /usr/bin/fdfs_upload_file /etc/fdfs/client.conf timg.img
图片上传成功

返回的文件 ID 由 group、 存储目录、 两级子目录、 fileid、 文件后缀名(由客户端指定, 主要
用于区分文件类型) 拼接而成。
group1/M00/00/00/rBOr_1zqWcSASGLfAALpMV3ZLVg841.jpg
到此为止, FastDFS 文件服务器就搭建完毕, 并能够上传文件了! ! ! ! ! !

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,271评论 5 476
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,275评论 2 380
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,151评论 0 336
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,550评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,553评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,559评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,924评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,580评论 0 257
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,826评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,578评论 2 320
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,661评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,363评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,940评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,926评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,156评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,872评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,391评论 2 342

推荐阅读更多精彩内容