ubantu18.04安装fastdfs和Nginx及相关配置

ubantu18.04安装fastdfs及nginx,nginx_module正确方式

FASTDFS简介

	FastDFS 是用 c 语言编写的一款开源的分布式文件系统。FastDFS 为互联网量身定制， 充分考虑了冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标，使用 FastDFS 很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。 
	FastDFS 架构包括 Tracker server 和 Storage server。客户端请求 Tracker server 进行文 件上传、下载，通过 Tracker server 调度最终由 Storage server 完成文件上传和下载。 
	Tracker server 作用是负载均衡和调度，通过 Tracker server 在文件上传时可以根据一些 策略找到 Storage server 提供文件上传服务。可以将 tracker 称为追踪服务器或调度服务 器。 
	Storage server 作用是文件存储，客户端上传的文件最终存储在 Storage 服务器上， Storageserver 没有实现自己的文件系统而是利用操作系统 的文件系统来管理文件。可以将 storage 称为存储服务器。

服务端两个角色:
Tracker:管理集群，tracker 也可以实现集群。每个 tracker 节点地位平等。收集 Storage 集群的状态。
Storage:实际保存文件 Storage 分为多个组，每个组之间保存的文件是不同的。每 个组内部可以有多个成员，组成员内部保存的内容是一样的，组成员的地位是一致的，没有 主从的概念。
文件上传流程

客户端上传文件后存储服务器将文件 ID 返回给客户端，此文件 ID 用于以后访问该文 件的索引信息。文件索引信息包括:组名，虚拟磁盘路径，数据两级目录，文件名。
组名:文件上传后所在的 storage 组名称，在文件上传成功后有 storage 服务器返回， 需要客户端自行保存。
虚拟磁盘路径:storage 配置的虚拟路径，与磁盘选项 store_path*对应。如果配置了 store_path0 则是 M00，如果配置了 store_path1 则是 M01，以此类推。
数据两级目录:storage 服务器在每个虚拟磁盘路径下创建的两级目录，用于存储数据 文件。
文件名:与文件上传时不同。是由存储服务器根据特定信息生成，文件名包含:源存储 服务器 IP 地址、文件创建时间戳、文件大小、随机数和文件拓展名等信息。
文件下载流程:

1.安装准备工作

1.1更新apt

sudo apt update
sudo apt-get update

注: 以下是安装fastdfs和Nginx过程中的所用到的所有包
链接：https://pan.baidu.com/s/1GqBrujqX8E432h8evCjnnA
提取码：8k4g

1.2 查看及安装依赖环境(很重要)

#直接在终端输入依赖模块或者whereis <debname>
whereis gcc, whereis libevent-dev......
# 预编译gcc g++依赖
sudo apt-get install bulid-essential
sudo apt-get install libtool
sudo apt-get install gcc-c++/gcc,g++
sudo apt-get install libevent-dev
# 安装pcre依赖库
sudo apt-get install libpcre3 libpcre3-dev
# SSL
sudo apt-get install openssl # ubantu系统自带有的,最好检查一下

1.3 下载安装包

注意: 其中fastdfs-nginx-module版本一定要适合Nginx,这里自闭者尝试过很多论坛上的安装鸡汤,均被毒死,如果版本不对,容易崩溃的哟.最主要的错误应该是在Nginx的make编译过程.

2.安装过程

2.1安装fastdfs依赖包

1. 解压缩libfastcommon-master.zip

unzip libfastcommon-master

2. 进入libfastcommon-master解压后的目录

cd libfastcommon-master

3. 预编译 ./make.sh

./make.sh

4. sudo ./make.sh install安装libfastcommon

sudo ./make.sh install	

2.2安装fastdfs

1. 解压缩fastdfs,并进入目录

   sudo unzip fastdfs-5.11.zip
   cd fastdfs-5.11/
   

2. 执行编译及安装(可以直接在解压目录安装随后可以删除安装包)

   ./make 
   sudo ./make install
   

2.3 配置跟踪服务器tracker

1. 把/etc/fdfs/的tracker.conf.sample文件复制一份为tracker.conf

    sudo cp /etc/fdfs/tracker.conf.sample /etc/fdfs/tracker.conf
   

2. 在/home/python/目录中创建目录 fastdfs/tracker

     sudo mkdir –p /home/python/fastdfs/tracker
   

3. 编辑/etc/fdfs/tracker.conf配置文件

   sudo vim /etc/fdfs/tracker.conf
   base_path=/home/python/fastdfs/tracker
   

2.4 配置存储storage服务器(基本同上)

sudo cp /etc/fdfs/storage.conf.sample /etc/fdfs/storage.conf
sudo mkdir –p /home/python/fastdfs/storage
sudo vim /etc/fdfs/storage.conf

修改内容：
base_path=/home/python/fastdfs/storage
store_path0=/home/python/fastdfs/storage
tracker_server=自己ubuntu的ip地址:22122

2.5 配置完成开始测试

1. 启动tracker和storage服务,并查看进程

   sudo /usr/bin/fdfs_trackerd /etc/fdfs/tracker.conf start
   sudo /usr/bin/fdfs_storaged /etc/fdfs/storage.conf start
   

   

   注:ubantu18.04开启tracker和storage服务时,根据系统原因可能不会立即显示进程PID号,所以开启服务后若没看到提示使用 ps aux | grep fdfs查看

2. 测试安装状态

   扫描二维码关注公众号，回复： 9809597 查看本文章

   拷贝client.conf文件到/etc/fdfs/目录下

   sudo cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf
   

   编辑/etc/fdfs/client.conf文件

   sudo vim /etc/fdfs/client.conf
   base_path=/home/python/fastdfs/tracker
   tracker_server=自己ubantu/linux的IP地址:22122
   

   上传文件测试

   guo@spoiled:~/fdfs$ fdfs_upload_file /etc/fdfs/client.conf ~/Desktop/cwc.jpg 
   group1/M00/00/00/wKgBC15pxL6AX5-pAABzfr0PYzk508.jpg
   guo@spoiled:~/fdfs$ 
   

   

3. 安装Nginx并添加fastdfs-Nginx-module模块

3.1 解压Nginx和fastdfs-Nginx-module

1. 解压Nginx-1.15.9.tar.gz(一定要是1.15.9版本的)

   

2. 解压fastdfs-nginx-module_v1.16.tar.gz(一定要是这个模块,1.16版本的)

   

3. 进入Nginx-1.15.9/目录

   cd nginx-1.15.9/
   

3.2进入Nginx-1.15.9进行编译安装

1. 对Nginx进行编译,并添加module

   

   ~/nginx-1.15.9$ sudo ./configure --prefix=/usr/local/nginx/ --add-module=/home/python/fastdfs-nginx-module/src/
   

2. 编译完成进行安装(大部分在这里出错)

   /nginx-1.15.9$ sudo make
   /nginx-1.15.9$ sudo make install
   

注1: 编译(make)过程最容易出错,最主要的成因是因为fastdfs-Nginx-module模块与Nginx不匹配,然后导致出各种奇怪的错误,但是笔者也不是C语言学者,所出的错误根本无从下手,而且错误层出不穷,若果你在编译过程中遇到下面出现的问题,就一定要记得更换fastdfs-Nginx-module

注:笔者经历过这个过程,然后更换了fastdfs-Nginx-module_v1.16,可以顺利编译成功

注2:如果出现以下错误后,需要修改/src/config配置文件(这个错误也是很常见的错误,不过在fastdfs-Nginx-module_v1.16.1版本中并没有出现这种问题,是顺利编译成功的)

sudo vim fastdfs-nginx-module-master/src/config
# 修改下面两项
ngx_module_incs="/usr/include/fastdfs /usr/include/fastcommon/"
CORE_INCS="$CORE_INCS /usr/include/fastdfs /usr/include/fastcommon/"

修改完成后重新开始编译

~/nginx-1.15.9$ sudo ./configure --prefix=/usr/local/nginx/ --add-module=/home/python/fastdfs-nginx-module/src/
~/nginx-1.15.9$ sudo make
~/nginx-1.15.9$ sudo make install

3.3 配置

1. 复制/mod_fastdfs.conf

   sudo cp fastdfs-nginx-module-master/src/mod_fastdfs.conf /etc/fdfs/mod_fastdfs.conf
   

2. 修改mod_fastdfs.conf

   sudo vim /etc/fdfs/mod_fastdfs.conf
   
   # 修改内容
   connect_timeout=10
   tracker_server=自己ubantu/linux的IP地址:22122
   url_have_group_name=true
   store_path0=/home/python/fastdfs/storage
   

3. 复制http.conf, mime.types

   sudo cp fastdfs-5.11/conf/http.conf /etc/fdfs/http.conf
   sudo cp fastdfs-5.11/conf/mime.types /etc/fdfs/mime.types
   

4. 修改Nginx配置

   sudo vim /usr/local/nginx/conf/nginx.conf
   在http项中增加以下内容:
       server {
       	listen	8888;
   	    server_name	localhost;
   	    location ~/group[0-9]/ {
   		    ngx_fastdfs_module;
   	    }
   	    error_page   500 502 503 504  /50x.html;
   	    location = /50x.html {
               root   html;
           }
       }
   

5. 启动Nginx

   sudo /usr/local/nginx/sbin/nginx
   

   
   FASTDFS以及Nginx安装和配置到此完成,烦请严格按照步骤进行,方能顺利完成!谢谢!