FastDFS安装

不忘初心收录于类别分布式文件系统

2019-01-15 2024-09-25 约 1997 字预计阅读 4 分钟次阅读条评论

FastDFS是开源的高性能分布式文件系统(DFS)。主要功能包括:文件存储、文件同步和文件访问，以及高容量和负载均衡设计。

1 软件准备

libfastcommon-V1.0.68.tar.gz

libserverframe_V1.1.28

FastDFS_V6.09.tar.gz

fastdfs-nginx-module_v1.23.tar.gz

Nginx_V1.24.0

2 安装依赖

bash

yum install -y pcre-devel zlib-devel openssl-devel gcc gcc-c++ automake autoconf libtool make

3 编译 libfastcommon

3.1 下载源码

bash

git clone -b V1.0.68 https://github.com/happyfish100/libfastcommon.git --depth 1

3.2 编译安装

bash

cd libfastcommon
./make.sh && ./make.sh install

4 编译libserverframe

4.1 下载源码

bash

git clone -b V1.1.28 https://github.com/happyfish100/libserverframe.git --depth 1

4.2 编译安装

bash

cd libserverframe
./make.sh && ./make.sh install

5 编译 FastDFS 服务

5.1 下载源码

bash

git clone -b V6.09 https://github.com/happyfish100/fastdfs.git --depth 1

5.2 编译安装

bash

cd fastdfs/
./make.sh && ./make.sh install

5.3 配置 tracker

复制一份配置文件

bash

cp /etc/fdfs/tracker.conf.sample /etc/fdfs/tracker.conf

创建tracker文件夹

bash

mkdir -p /data/fastdfs/tracker

修改配置文件

bash

vi /etc/fdfs/tracker.conf

text

# 配置tracker.conf这个配置文件是否生效，因为在启动fastdfs服务端进程时需要指定配置文件，所以需要使次配置文件生效。false是生效，true是屏蔽。
disabled=false

# tracker监听的端口
port=22122

# base_path 目录地址(根目录必须存在,子目录会自动创建)
base_path=/data/fastdfs/tracker

# 系统预留空间，当一个group中的任何storage的剩余空间小于定义的值，整个group就不能上传文件了
reserved_storage_space = 10%

# 以下是关于http的设置了默认编译是不生效的要求更改 #WITH_HTTPD=1 将 注释#去掉 再编译
http.server_port=8080

不同版本配置可能不同

5.3.1 启动 tracker

bash

/usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf

重启 tracker 服务

bash

/usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf restart

查看是否有 tracker 进程

bash

ps aux | grep tracker

5.4 配置 storage

一般 storage 服务我们会单独装一台机子，但是这里为了方便我们安装在同一台。

如果 storage 单独安装的话，那上面安装的步骤都要在走一遍，只是到了编辑配置文件的时候，编辑的是storage.conf而已

复制一份配置文件

bash

cp /etc/fdfs/storage.conf.sample /etc/fdfs/storage.conf

创建storage存储目录

bash

mkdir -p /data/fastdfs/storage

修改配置

bash

vi /etc/fdfs/storage.conf

conf

disabled=false	#启用配置文件
# 指定此storage server所在组(卷)
group_name=group1

# storage 默认端口
port=23000

# 数据存储目录地址
base_path=/data/fastdfs/storage

# storage在存储文件时支持多路径，默认只设置一个
# 需要和store_path个数匹配
store_path_count=1

# 配置多个store_path路径，从0开始，如果store_path0不存在，则base_path必须存在
store_path0=/data/fastdfs/storage
store_path1=/data/fastdfs/storage1

# 设置tracker_server
tracker_server=192.168.1.114:22122

# http 端口，默认编译不生效
http.server_port=8888

5.4.1 启动 storage

bash

/usr/bin/fdfs_storaged /etc/fdfs/storage.conf

首次启动会很慢，因为它在创建预设存储文件的目录

重启 storage 服务

bash

/usr/bin/fdfs_storaged /etc/fdfs/storage.conf restart

查看是否有 storage 进程

bash

ps aux | grep storage

6 测试是否部署成功

利用自带的 client 进行测试

复制一份配置文件

bash

cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf

创建client数据目录

bash

mkdir -p /data/fastdfs/client

编辑配置文件

bash

vi /etc/fdfs/client.conf

conf

# 存储日志文件的基本路径
base_path=/data/fastdfs/client

# tracker server的列表
tracker_server=192.168.1.114:22122

在终端中通过 shell 上传 opt 目录下的一张图片：

bash

/usr/bin/fdfs_test /etc/fdfs/client.conf upload test.jpg

如下图箭头所示，生成的图片地址为：http://192.168.1.114/group1/M00/00/00/wKgBclb0aqWAbVNrAAAjn7_h9gM813_big.jpg

即使我们现在知道图片的访问地址我们也访问不了，因为我们还没装 FastDFS的Nginx 模块

上传成功后，在目标文件夹会生成4个文件夹，有 _big 的是备份文件，后缀名 -m 是文件的元数据

7 编译 nginx 添加 fastdfs-nginx-module

安装 Nginx 第三方模块相当于这个 Nginx 都是要重新安装一遍的

7.1 下载源码

bash

git clone -b V1.23 https://github.com/happyfish100/fastdfs-nginx-module.git --depth 1

得到目录地址：fastdfs-nginx-module

复制文件

bash

cp FastDFS/conf/http.conf /etc/fdfs

复制文件

bash

cp FastDFS/conf/mime.types /etc/fdfs

安装 Nginx 和 Nginx 第三方模块

安装 Nginx 依赖包

bash

yum install -y gcc gcc-c++ pcre pcre-devel zlib zlib-devel openssl openssl-devel

解压 Nginx

bash

tar zxf nginx-1.24.0.tar.gz

进入解压后目录

bash

cd nginx-1.24.0

编译配置：（注意最后一行）

bash

./configure \
--prefix=/usr/local/nginx \
--with-http_gzip_static_module \
--with-http_flv_module \
--with-http_stub_status_module \
--with-http_v2_module \
--with-http_ssl_module \
--with-file-aio \
--with-http_realip_module \
--add-module=/root/fastdfs-nginx-module/src

编译安装

bash

make && make install

复制Nginx模块的配置文件：

bash

cp /root/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs

创建nginx-module存储目录

bash

mkdir -p /data/fastdfs/fastdfs-nginx-module

编辑Nginx模块的配置文件

bash

vi /etc/fdfs/mod_fastdfs.conf

如果在已经启动Nginx的情况下修改下面内容记得要重启Nginx。

conf

connect_timeout=2
network_timeout=30
base_path=/data/fastdfs/fastdfs-nginx-module	#nginx模块数据存储目录
load_fdfs_parameters_from_tracker=true
storage_sync_file_max_delay = 86400
use_storage_id = false
storage_ids_filename = storage_ids.conf
tracker_server=192.168.1.114:22122	#指定tracker服务器的IP和端口
storage_server_port=23000
group_name=group1
url_have_group_name = true	#因为我们访问的地址前面是带有 /group1/M00，所以我们这里要使用true，不然访问不到（原值是 false）
store_path_count=1
# 图片实际存放路径，如果有多个，这里可以有多行：
# store_path0=/data/fastdfs/storage/images-data0
# store_path1=/data/fastdfs/storage/images-data1
# store_path2=/data/fastdfs/storage/images-data2
store_path0=/data/fastdfs/storage	#文件存储目录
log_level=info
log_filename=response_mode=proxy
if_alias_prefix=flv_support = true
flv_extension = flvgroup_count = 0

编辑Nginx配置文件

text

user  root;	# 注意这一行，如果有权限问题，使用 root 用户去运行nginx
server {
	listen	80;
	server_name  localtion;
	client_max_body_size    30m;
    location ~/group[0-9]/M0[0-9] {
        ngx_fastdfs_module;
        add_header Access-Control-Allow-Origin *;

7.2 fastdfs状态查询

bash

/usr/bin/fdfs_monitor /etc/fdfs/client.conf

FDFS_STORAGE_STATUS：INIT      :初始化，尚未得到同步已有数据的源服务器
FDFS_STORAGE_STATUS：WAIT_SYNC :等待同步，已得到同步已有数据的源服务器
FDFS_STORAGE_STATUS：SYNCING   :同步中
FDFS_STORAGE_STATUS：DELETED   :已删除，该服务器从本组中摘除
FDFS_STORAGE_STATUS：OFFLINE   :离线
FDFS_STORAGE_STATUS：ONLINE    :在线，尚不能提供服务
FDFS_STORAGE_STATUS：ACTIVE    :在线，可以提供服务

8 推荐阅读

FastDFS 配置文件详解(修订版1)

FastDFS 配置文件详解

目录

FastDFS安装

1 软件准备

2 安装依赖

3 编译 libfastcommon

3.1 下载源码

3.2 编译安装

4 编译libserverframe

4.1 下载源码

4.2 编译安装

5 编译 FastDFS 服务

5.1 下载源码

5.2 编译安装

5.3 配置 tracker

5.3.1 启动 tracker

5.4 配置 storage

5.4.1 启动 storage

6 测试是否部署成功

7 编译 nginx 添加 fastdfs-nginx-module

7.1 下载源码

7.2 fastdfs状态查询

8 推荐阅读

相关内容

FastDFS增加存储目录