FastDFS+Nginx实现文件服务器

1. 架构

1.1. 架构图

2. FastDFS–tracker安装

在192.168.220.119上安装tracker。

2.1. 下载

tracker和storage使用相同的安装包，下载地址：http://sourceforge.net/projects/FastDFS/ 或https://github.com/happyfish100/FastDFS（推荐）

本教程下载：FastDFS_v5.05.tar.gz

2.2. FastDFS安装环境

FastDFS是C语言开发，建议在linux上运行，本教程使用Centos6.5作为安装环境。

安装FastDFS需要先将官网下载的源码进行编译，编译依赖gcc环境

如果没有gcc环境，需要安装gcc：

yum install gcc-c++ -y

2.3. 安装libevent

FastDFS依赖libevent库，

如果没有，需要安装：

yum -y install libevent

2.4. 安装libfastcommon

​ libfastcommon是FastDFS官方提供的，libfastcommon包含了FastDFS运行所需要的一些基础库。

上传

01课前资料软件工具包中libfastcommonV1.0.7.tar.gz上传到Linux中

将libfastcommonV1.0.7.tar.gz移动至/usr/local/下

[[email protected] ~]# mv libfastcommonV1.0.7.tar.gz /usr/local/

进入/usr/local/，解压libfastcommon

[[email protected] local]# cd /usr/local/

[[email protected] local]# tar -zxvf libfastcommonV1.0.7.tar.gz

进入解压文件夹，编译，安装

[[email protected] local]# cd libfastcommon-1.0.7/

编译：

[[email protected] libfastcommon-1.0.7]# ./make.sh

安装：

[[email protected] libfastcommon-1.0.7]# ./make.sh install

注意：libfastcommon安装好后会自动将库文件拷贝至/usr/lib64下，由于FastDFS程序引用usr/lib目录所以需要将/usr/lib64下的库文件拷贝至/usr/lib下。

[[email protected] libfastcommon-1.0.7]# cp /usr/lib64/libfastcommon.so /usr/lib/

2.5. tracker编译安装

将FastDFS_v5.05.tar.gz拷贝至/usr/local/下

上传FastDFS_v5.05.tar.gz

taotao\01课前资料\02技术资料\FastDFS\安装文件\FastDFS_v5.05.tar.gz上传到Linux中

移动到/usr/local

[[email protected] ~]# mv FastDFS_v5.05.tar.gz /usr/local/

解压

[[email protected] ~]# cd /usr/local/

[[email protected] local]# tar -zxvf FastDFS_v5.05.tar.gz

进入解压文件夹，编译，安装

[[email protected] local]# cd FastDFS

编译

[[email protected] FastDFS]# ./make.sh

安装

[[email protected] FastDFS]# ./make.sh install

安装成功后，将安装目录下的conf下的文件拷贝到/etc/fdfs/下。

[[email protected] FastDFS]# cd conf/

[[email protected] conf]# cp * /etc/fdfs/

效果：

2.6. 配置

安装成功后进入/etc/fdfs目录：

[[email protected] FastDFS]# cd /etc/fdfs/

修改tracker.conf

[[email protected] fdfs]# vim tracker.conf

把

base_path=/home/yuqing/fastdfs

改为：

base_path=/home/fastdfs

创建fastdfs文件夹

[[email protected] fdfs]# mkdir /home/fastdfs

2.7. 启动

[[email protected] fdfs]# /usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf restart

多次restart，启动日志显示先停止2952进程（实际环境可能不是2952）再启动，如下图：

如果没有显示上图要确认原有进程是否正常停止。

设置开机自动启动。

[[email protected] fdfs]# vim /etc/rc.d/rc.local

将运行命令行添加进文件：/usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf restart &

3. FastDFS–storage安装

在192.168.220.119上安装storage。

3.1. 安装libevent

同tracker安装。（如果是一台虚拟机安装Tracker和Storage，这里可以省略）

3.2. 安装libfastcommon

同tracker安装。（如果是一台虚拟机安装Tracker和Storage，这里可以省略）

3.3. storage编译安装

同tracker编译安装。（如果是一台虚拟机安装Tracker和Storage，这里可以省略）

3.4. 配置

安装成功后进入/etc/fdfs目录：

[[email protected] FastDFS]# cd /etc/fdfs/

修改storage.conf

[[email protected] fdfs]# vim storage.conf

base_path=/home/yuqing/fastdfs改为：base_path=/home/fastdfs

store_path0=/home/yuqing/fastdfs改为：store_path0=/home/fastdfs/fdfs_storage

#如果有多个挂载磁盘则定义多个store_path，如下

#store_path1=…

#store_path2=…
tracker_server=192.168.220.119:22122 #配置tracker服务器:IP

#如果有多个则配置多个tracker

创建fdfs_storage文件夹

[[email protected] fdfs]# mkdir /home/fastdfs/fdfs_storage

3.5. 启动

[[email protected] fdfs]# /usr/bin/fdfs_storaged /etc/fdfs/storage.conf restart &

多次restart ，启动的日志显示先停止2071进程（实际环境可能不是2071）再启动，如下图：

如果没有显示上图要确认原有进程是否正常停止。

设置开机自动启动。

[[email protected] fdfs]# vim /etc/rc.d/rc.local

将运行命令行添加进文件：/usr/bin/fdfs_storaged /etc/fdfs/storage.conf restart &

4. 上传图片测试

4.1. 通过fdfs_test程序

FastDFS安装成功可通过/usr/bin/fdfs_test测试上传、下载等操作。

修改/etc/fdfs/client.conf

[[email protected] ~]# vim /etc/fdfs/client.conf

base_path=/home/fastdfs

tracker_server=192.168.220.119:22122

使用格式：

/usr/bin/fdfs_test 客户端配置文件地址 upload 上传文件

比如将/root下的日志上传到FastDFS中：

[[email protected] ~]# /usr/bin/fdfs_test /etc/fdfs/client.conf upload install.log

返回信息

example file url: http://192.168.220.119/group1/M00/00/00/wKjcd1lpCHmAFpyoAADDWkRy8JA815_big.log

就是文件下载路径

对应storage服务器上的

/home/fastdfs/fdfs_storage/data/00/00/wKjcd1lpCHmAFpyoAADDWkRy8JA815_big.log

由于现在还没有和nginx整合无法使用http下载。

5. FastDFS 和nginx整合

5.1. 在tracker上安装nginx

在每个tracker上安装nginx，的主要目的是做负载均衡及实现高可用。

5.2. 在Storage上安装nginx

5.2.1. FastDFS-nginx-module

上传

taotao\01课前资料\02技术资料\FastDFS\安装文件\fastdfs-nginx-module_v1.16.tar.gz上传到Linux

将FastDFS-nginx-module_v1.16.tar.gz传至/usr/local/下

[[email protected] ~]# mv fastdfs-nginx-module_v1.16.tar.gz /usr/local/

解压

[[email protected] ~]# cd /usr/local/

[[email protected] local]# tar -zxvf fastdfs-nginx-module_v1.16.tar.gz

编辑配置文件

[[email protected] local]# cd fastdfs-nginx-module/src/

修改config文件将/usr/local/路径改为/usr/

[[email protected] src]# vim config

将FastDFS-nginx-module/src下的mod_fastdfs.conf拷贝至/etc/fdfs/下

[[email protected] src]# cp mod_fastdfs.conf /etc/fdfs/

并修改mod_fastdfs.conf的内容：

[[email protected] src]# vim /etc/fdfs/mod_fastdfs.conf

base_path=/home/fastdfs

tracker_server=192.168.220.119:22122

#tracker_server=192.168.220.1119:22122（多个tracker配置多行）

url_have_group_name=true #url中包含group名称

store_path0=/home/fastdfs/fdfs_storage #指定文件存储路径

将libfdfsclient.so拷贝至/usr/lib下

[[email protected] src]# cp /usr/lib64/libfdfsclient.so /usr/lib/

创建nginx/client目录

[[email protected] src]# mkdir -p /var/temp/nginx/client

5.2.2. nginx安装

安装环境：

安装pcre库

yum -y install pcre-devel

安装zlib库

yum install -y zlib-devel

上传Nginx

上传\01课前资料\02技术资料\Nginx\nginx-1.7.7.tar.gz

解压，并进入解压文件夹

[[email protected] ~]# tar -zxf nginx-1.7.7.tar.gz

[[email protected] ~]# cd nginx-1.7.7

添加fastdfs-nginx-module模块

执行以下命令

./configure \

–prefix=/usr/local/nginx \

–pid-path=/var/run/nginx/nginx.pid \

–lock-path=/var/lock/nginx.lock \

–error-log-path=/var/log/nginx/error.log \

–http-log-path=/var/log/nginx/access.log \

–with-http_gzip_static_module \

–http-client-body-temp-path=/var/temp/nginx/client \

–http-proxy-temp-path=/var/temp/nginx/proxy \

–http-fastcgi-temp-path=/var/temp/nginx/fastcgi \

–http-uwsgi-temp-path=/var/temp/nginx/uwsgi \

–http-scgi-temp-path=/var/temp/nginx/scgi \

–add-module=/usr/local/fastdfs-nginx-module/src

配置成功

编译并安装

[[email protected] nginx-1.7.7]# make

[[email protected] nginx-1.7.7]# make install

5.2.3. nginx配置文件

修改Nginx配置文件

[[email protected] nginx-1.7.7]# vim /usr/local/nginx/conf/nginx.conf

添加server:

server {

​ listen 80;

​ server_name 192.168.220.119;

​ location /group1/M00/{

​ ngx_fastdfs_module;

​ }

}

说明：

server_name指定本机ip

location /group1/M00/：group1为nginx 服务FastDFS的分组名称，M00是FastDFS自动生成编号，对应store_path0=/home/fastdfs/fdfs_storage，如果FastDFS定义store_path1，这里就是M01

5.3. 启动

启动Nginx

[[email protected] nginx-1.7.7]# /usr/local/nginx/sbin/nginx

设置开机自动启动。

[[email protected] fdfs]# vim /etc/rc.d/rc.local

将运行命令行添加进文件：/usr/local/nginx/sbin/nginx

关闭防火墙

[[email protected] nginx-1.7.7]# service iptables stop

设置防火墙不自动启动

[[email protected] ~]# chkconfig iptables off

5.4. 测试

通过测试方法上传文件，在宿主机使用浏览器访问，访问上传图片测试的文件：

[[email protected] ~]# /usr/bin/fdfs_test /etc/fdfs/client.conf upload /root/pro_2.jpg

访问storage：