一、前言
本文中使用本地vm虚机部署测试。
os:centos linux release 7.8.2003 (core) 3.10.0-1160.15.2.el7.x86_64
ip:192.168.168.100
外部nginx服务器ip:192.168.168.103
虚机配置:2核cpu、4g内存
防火墙设置:centos 7.8默认使用firewall,本文中禁用firewall,使用iptables。
软件说明:
软件版本号安装路径fastdfs6.07默认路径libfastcommon1.0.49默认路径fastdfs-nginx-module1.22/usr/local/nginx-mod/fastdfs-nginx-module-1.22nginx1.20.0/usr/local/nginx
说明:
目录用途/data/tools存放软件源码安装包/data/fastdfs/fastdfs数据存储位置(包含数据data和日志logs)
二、基础环境
1.安装依赖
yum -y install gcc gcc-c libevent libevent-devel zlib zlib-devel pcre-devel perl
2.安装libfatscommon函数库
libfastcommon是fastdfs官方提供的,libfastcommon包含了fastdfs运行所需要的一些基础库。
下载地址:https://github.com/happyfish100/libfastcommon/releases
根据需求选择合适的版本进行下载安装。本文中使用的是最新稳定版本。
①安装方式一
cd /data/toolswget -o libfastcommon-1.0.49.tar.gz https://github.com/happyfish100/libfastcommon/archive/v1.0.49.tar.gztar xf libfastcommon-1.0.49.tar.gzcd libfastcommon-1.0.49/./make.sh ./make.sh install
②安装方式二
yum -y install gitcd /data/toolsgit clone https://github.com/happyfish100/libfastcommon.gitcd libfastcommongit checkout v1.0.49./make.sh clean./make.sh./make.sh install
三、安装fastdfs
1.安装
下载地址:https://github.com/happyfish100/fastdfs/releases
根据需求选择合适的版本进行下载安装。本文中使用的是最新稳定版本。
cd /data/toolswget -o fastdfs-6.07.tar.gz https://github.com/happyfish100/fastdfs/archive/v6.07.tar.gztar xf fastdfs-6.07.tar.gzcd fastdfs-6.07./make.sh ./make.sh install
2.相关文件和目录
默认安装方式安装后的相应文件与目录
描述目录服务脚本/etc/init.d/fdfs_storaged/etc/init.d/fdfs_trackerd样例配置文件/etc/fdfs/client.conf.sample/etc/fdfs/storage.conf.sample/etc/fdfs/tracker.conf.sample命令工具/usr/bin/fdfs_appender_test | fdfs_appender_test1 | fdfs_append_file | fdfs_crc32 | fdfs_delete_file | fdfs_download_file | fdfs_file_info | fdfs_monitor | fdfs_regenerate_filename | fdfs_storaged | fdfs_test | fdfs_test1 | fdfs_trackerd | fdfs_upload_appender | fdfs_upload_file
四、配置fastdfs
1.跟踪器(tracker)
①创建tracker基础数据目录
mkdir -p /data/fastdfs/tracker
②进入/etc/fdfs,复制 fastdfs 跟踪器样例配置文件 tracker.conf.sample,并重命名为 tracker.conf
cd /etc/fdfscp tracker.conf.sample tracker.conf
③编辑tracker.conf
vi /etc/fdfs/tracker.conf//修改如下配置项# tracker服务的端口(默认22122,一般不修改)port = 22122# tracker服务数据和日志目录地址(根目录必须存在,子目录会自动创建)base_path = /data/fastdfs/tracker# http 服务端口 默认8080,可根据需求修改http.server_port = 8180
注:①上述配置项的修改仅供参考,实际环境中请根据需求修改调整。
②若tracker和storage部署在不同服务器,或外部调用程序在不同服务器,则需放开端口。
④启动tracker
## 首次启动必须使用下列命令启动。后续可使用systemctl管理
/etc/init.d/fdfs_trackerd start
⑤服务检查
## 查看 fastdfs tracker 是否已成功启动 ,如下图所示则成功
systemctl status fdfs_trackerd
## 端口监听
netstat -tulnp|grep fdfs
⑥tracker server 目录及文件结构
tracker服务启动成功后,会在base_path(本文中目录为:/data/fastdfs/tracker )下创建data、logs两个目录。目录结构如下:
ls -al /data/fastdfs/tracker 或 ll /data/fastdfs/tracker//目录结构如下|__data| |__fdfs_trackerd.pid| |__storage_changelog.dat|__logs| |__trackerd.log
⑦服务管理
启动:/etc/init.d/fdfs_trackerd start 或 systemctl start fdfs_trackerd.service关闭:/etc/init.d/fdfs_trackerd stop 或 systemctl stop fdfs_trackerd.service重启:/etc/init.d/fdfs_trackerd restart 或 systemctl restart fdfs_trackerd.service开机启动:chkconfig fdfs_trackerd on查看状态:/etc/init.d/fdfs_trackerd status 或 systemctl status fdfs_trackerd.service
2.存储(storage)
①创建storage数据和日志目录
mkdir -p /data/fastdfs/storage
②进入 /etc/fdfs 目录,复制 fastdfs 存储器样例配置文件 storage.conf.sample,并重命名为 storage.conf
cd /etc/fdfscp storage.conf.sample storage.conf
③编辑storage.conf
vi /etc/fdfs/storage.conf//修改如下配置项# 指定此storage server所在组(卷)group_name = group1# storage服务端口(默认23000,一般不修改)port = 23000# storage的工作空间(数据和日志文件存储根目录) base_path = /data/fastdfs/storage # storage的存储空间,如果不配置,则为 base_path 的值(有多个存储路径时,每个存储路径写一行,第一个为0,第二个为1,以此类推)store_path0 = /data/fastdfs/storage # tracker服务器的地址和端口号,用于心跳(有多个tracker server时,每个tracker server写一行)tracker_server = 192.168.168.102:22122 # http访问文件的端口(默认8888,看情况修改,和nginx中保持一致) http.server_port = 8888
注:①上述配置项的修改仅供参考,实际环境中请根据需求修改调整。
②关于 store_path 项的配置,官方不推荐其配置值跟 base_path 项值一样,建议使用不同目录路径。本文为测试,所配置的值为一样。
④启动storage
systemctl start fdfs_storaged
注:若tracker和storage部署在不同服务器,首次启动storage必须使用 /etc/init.d/fdfs_storaged start 命令启动。本文中tracker和storage部署在同一服务器,在tracker服务器已启动的情况下,首次可使用systemctl来启动storage服务。
⑤服务检查
## 查看 storage 是否成功启动,23000 端口是否被监听
systemctl status fdfs_storaged
## 查看服务端口23000是否被监听
netstat -unltp | grep fdfs
## 查看storage和tracker是否在通信(active表示正常)
/usr/bin/fdfs_monitor /etc/fdfs/storage.conf
⑥服务管理
启动:/etc/init.d/fdfs_storaged start 或 systemctl start fdfs_storaged.service关闭:/etc/init.d/fdfs_storaged stop 或 systemctl stop fdfs_storaged.service重启:/etc/init.d/fdfs_storaged restart 或 systemctl restart fdfs_storaged.service开机启动:chkconfig fdfs_storaged on查看状态:/etc/init.d/fdfs_storaged status 或 systemctl status fdfs_storaged.service
3.客户端(client)
①创建client数据和日志目录
mkdir -p /data/fastdfs/client
②进入 /etc/fdfs 目录,复制 fastdfs 客户端样例配置文件 client.conf.sample,并重命名为 client.conf
cd /etc/fdfscp client.conf.sample client.conf
③编辑client.conf
vi /etc/fdfs/client.conf//修改如下配置项# client 的数据和日志目录base_path = /data/fastdfs/client# tracker服务器地址及监听端口tracker_server = 192.168.168.102:22122# tracker服务的http端口,必须和tracker的设置对应起来http.tracker_server_port = 8180
注:上述配置项的修改仅供参考,实际环境中请根据需求修改调整。
五、安装nginx及模块
注:nginx需要和storage在同一个节点。
1.下载软件包
cd /data/toolswgethttp://nginx.org/download/nginx-1.20.0.tar.gzwget -o fastdfs-nginx-module-1.22.tar.gz https://github.com/happyfish100/fastdfs-nginx-module/archive/v1.22.tar.gz
2.安装fastdfs-nginx-module模块
mkdir -p /usr/local/nginx-modtar xf fastdfs-nginx-module-1.22.tar.gzmv fastdfs-nginx-module-1.22 /usr/local/nginx-mod/
## 修改配置文件/usr/local/nginx-mod/fastdfs-nginx-module-1.22/src/config,主要是修改路径,将配置文件中的 /usr/local/include 改为 /usr/include,因为fastdfs安装的时候没有修改路径,原路径是/usr。
3.复制并修改fastdfs-nginx-module中的配置文件
mkdir -p /data/fastdfs/tmp //创建mod_fastdfs日志目录cp /usr/local/nginx-mod/fastdfs-nginx-module-1.22/src/mod_fastdfs.conf /etc/fdfs/vi /etc/fdfs/mod_fastdfs.conf//修改如下配置项# 连接超时时间connect_timeout=10# 日志目录base_path=/data/fastdfs/tmp# tracker servertracker_server=192.168.168.102:22122# storageserver 端口,保持默认storage_server_port=23000# storageserver 组名,需与storage.conf中的配置值一致group_name=group1# 如果文件id的url中需包含/group**,则要设置为true。默认值为falseurl_have_group_name=false# storage 配置的store_path0路径,必须与storage.conf中的一致store_path0=/data/fastdfs/storage
注:上述mod_fastdfs.conf配置项的修改仅供参考,实际环境中请根据需求修改调整。
4.安装nginx
本文中不赘述nginx编译安装过程,具体步骤请参照本人之前发布的文章《centos7下编译安装nginx-v1.20.0》,url地址为:https://www.toutiao.com/i6961593096903705092/
注意:运行configure配置时添加fastdfs-nginx-module模块,命令如下:
./configure …… --add-module=/usr/local/nginx-mod/fastdfs-nginx-module-1.22/src
5.复制 fastdfs 的部分配置文件到/etc/fdfs 目录
cd /data/tools/fastdfs-6.07/conf/cp http.conf mime.types /etc/fdfs/
6.配置nginx
添加fastdfs虚拟主机配置文件
vi /usr/local/nginx/conf/vhost/fastdfs.conf //添加如下配置内容server { listen 8888; server_name 192.168.168.100; #location ~/group([0-9])/m00 { location ~/m00 { ngx_fastdfs_module; } error_page 500 502 503 504 /50x.html; location = /50x.html { root html; }}
注:listen端口必须要与storage.conf中的http.server_port相同,防火墙需放开端口
7.启动nginx
systemctl start nginx.service
8.检测nginx配置文件会看到fastdfs模块信息
/usr/local/nginx/sbin/nginx -t
六、测试
1.服务器内使用命令上传
## 创建测试目录
mkdir -p /data/testcd /data/test//使用rz命令或通过其他方法从本地上传一张图片至该目录,测试使用ll /data/test
## 使用命令上传图片至fastdfs存储
/usr/bin/fdfs_upload_file /etc/fdfs/client.conf fastdfs.jpeg
## 如上图所示,上传成功后返回文件路径及id:group1/m00/00/00/wkiozgcc3oqamgrnaaeghskl6hw44.jpeg
## 浏览器访问http://192.168.168.100:8888/m00/00/00/wkiozgcc3oqamgrnaaeghskl6hw44.jpeg
2.服务器内使用命令下载
## 下载图片文件并重命名为test.jpg"
/usr/bin/fdfs_download_file /etc/fdfs/client.conf group1/m00/00/00/wkiozgcc3oqamgrnaaeghskl6hw44.jpeg test.jpg"
3.服务器内使用命令删除
/usr/bin/fdfs_delete_file /etc/fdfs/client.conf group1/m00/00/00/wkiozgcc3oqamgrnaaeghskl6hw44.jpeg
## 执行删除命令后,再次下载会报错
/usr/bin/fdfs_download_file /etc/fdfs/client.conf group1/m00/00/00/wkiozgcc3oqamgrnaaeghskl6hw44.jpeg test1.jpg"
七、配置外部访问的nginx
在另一台服务器(192.168.168.103)上配置nginx访问(负载均衡及反向代理),隐藏fastdfs真实服务器。
## 编辑nginx主配置文件nginx.conf,在http配置项中添加upstream项
vi /usr/local/nginx/conf/nginx.conf//在http配置项中添加upstream项upstream fastdfs_srv { server 192.168.168.100:8888; }
## 新建访问fastdfs相关虚拟主机配置文件,本文中为fastdfs.conf
vi /usr/local/nginx/conf/vhost/fastdfs.conf//添加如下内容server { listen 80; server_name 192.168.168.103; location /files { proxy_next_upstream http_502 http_504 error timeout invalid_header; proxy_pass http://fastdfs_srv/; expires 30d; }}
## 重新加载配置
/usr/local/nginx/sbin/nginx -t/usr/local/nginx/sbin/nginx -s reload
## 测试,使用浏览器访问
http://192.168.168.103/files/m00/00/00/wkiozgcc3oqamgrnaaeghskl6hw44.jpeg