Day14_06_FASTDFS教程之CentOS中安装FastDFS

梦里梦外; 2024-02-19 20:16 9阅读 0赞

## 06\_CentOS安装FastDFS ##

### 一. FastDFS单节点安装步骤 ###

#### 1. 服务器规划 ####

跟踪服务器(Tracker Server):10.0.31.189
        
    存储服务器(Storage Server):10.0.31.189
        
    操作系统: CentOS6.9
        
    用户: root
        
    数据存储目录: /fastdfs
        
    安装包:
    fastdfs-master-V5.05.zip：FastDFS源码
    
    libfastcommon-master.zip:(从 FastDFS 和 FastDHT 中提取出来的公共的C函数库)
    
    fastdfs-nginx-module-master.zip: storage服务器节点所需要的http服务nginx    模块
    
    nginx-1.10.0.tar.gz: Nginx安装包

**下载完成后,将压缩包解压到/usr/local/目录下**

#### 2. 所有tracker和storage节点都执行如下操作(单节点就一个,多节点都执行) ####

#### 1️⃣. 安装所需的依赖包 ####

`[root@localhost ~]# yum install make cmake gcc gcc-c++`

#### 2️⃣. 安装libfatscommon ####

Shell
    [root@localhost ~]# cd /usr/local
    [root@localhost local]# unzip libfastcommon-master.zip
    [root@localhost local]# cd libfastcommon-master
    [root@localhost libfastcommon-master]# ll
    
    总用量 36
    drwxr-xr-x. 2 root root 4096 7月   6 2017 doc
    -rw-r--r--. 1 root root 8005 7月   6 2017 HISTORY
    -rw-r--r--. 1 root root  566 7月   6 2017 INSTALL
    -rw-r--r--. 1 root root 1607 7月   6 2017 libfastcommon.spec
    -rwxr-xr-x. 1 root root 3099 7月   6 2017 make.sh
    drwxr-xr-x. 2 root root 4096 7月   6 2017 php-fastcommon
    -rw-r--r--. 1 root root 2763 7月   6 2017 README
    drwxr-xr-x. 3 root root 4096 9月  28 2017 src
    
    ####编译、安装
    [root@localhost libfastcommon-master]# ./make.sh
    [root@localhost libfastcommon-master]# ./make.sh install

#### 3️⃣. 安装FastDFS ####

Shell
    [root@localhost ~]# cd /usr/local/
    [root@localhost local]# unzip fastdfs-master.zip
    [root@localhost local]# cd fastdfs-master
    [root@localhost fastdfs-master]# ll
    
    总用量 136
    drwxr-xr-x. 3 root root  4096 9月  28 2017 client
    drwxr-xr-x. 2 root root  4096 9月  28 2017 common
    drwxr-xr-x. 2 root root  4096 8月  10 2017 conf
    -rw-r--r--. 1 root root 35067 8月  10 2017 COPYING-3_0.txt
    -rw-r--r--. 1 root root  3171 8月  10 2017 fastdfs.spec
    -rw-r--r--. 1 root root 33207 8月  10 2017 HISTORY
    drwxr-xr-x. 2 root root  4096 8月  10 2017 init.d
    -rw-r--r--. 1 root root  7755 8月  10 2017 INSTALL
    -rwxr-xr-x. 1 root root  5548 8月  10 2017 make.sh
    drwxr-xr-x. 2 root root  4096 8月  10 2017 php_client
    -rw-r--r--. 1 root root  2380 8月  10 2017 README.md
    -rwxr-xr-x. 1 root root  1768 8月  10 2017 restart.sh
    -rwxr-xr-x. 1 root root  1680 8月  10 2017 stop.sh
    drwxr-xr-x. 4 root root  4096 9月  28 2017 storage
    drwxr-xr-x. 2 root root  4096 8月  10 2017 test
    drwxr-xr-x. 2 root root  4096 9月  28 2017 tracker
    
    ## 编译、安装
    [root@localhost fastdfs-master]# ./make.sh
    [root@localhost fastdfs-master]# ./make.sh install

#### 4️⃣. 采用默认安装方式，相应的文件与目录如下 ####

1. 服务脚本

/etc/init.d/fdfs_storaged
    
      /etc/init.d/fdfs_trackerd

2. 配置文件(示例配置文件)

/etc/fdfs
      [root@localhost fastdfs-master]# ll /etc/fdfs/
      -rw-r--r--. 1 root root 1461 9月 28 2017 client.conf.sample
      -rw-r--r--. 1 root root 7927 9月 28 2017 storage.conf.sample
      -rw-r--r--. 1 root root 7200 9月 28 2017 tracker.conf.sample

3. 命令行工具(/usr/bin目录下)

shell
      [root@localhost fastdfs-master]# ll /usr/bin/ | grep fdfs
      -rwxr-xr-x. 1 root root      262291 9月  28 2017 fdfs_appender_test
      -rwxr-xr-x. 1 root root      261988 9月  28 2017 fdfs_appender_test1
      -rwxr-xr-x. 1 root root      252300 9月  28 2017 fdfs_append_file
      -rwxr-xr-x. 1 root root      251458 9月  28 2017 fdfs_crc32
      -rwxr-xr-x. 1 root root      252407 9月  28 2017 fdfs_delete_file
      -rwxr-xr-x. 1 root root      253222 9月  28 2017 fdfs_download_file
      -rwxr-xr-x. 1 root root      252948 9月  28 2017 fdfs_file_info
      -rwxr-xr-x. 1 root root      265628 9月  28 2017 fdfs_monitor
      -rwxr-xr-x. 1 root root      879078 9月  28 2017 fdfs_storaged
      -rwxr-xr-x. 1 root root      268651 9月  28 2017 fdfs_test
      -rwxr-xr-x. 1 root root      267828 9月  28 2017 fdfs_test1
      -rwxr-xr-x. 1 root root      374227 9月  28 2017 fdfs_trackerd
      -rwxr-xr-x. 1 root root      253350 9月  28 2017 fdfs_upload_appender
      -rwxr-xr-x. 1 root root      256992 9月  28 2017 fdfs_upload_file

#### 3. 配置tracker服务器 ####

#### 1️⃣. 复制tracker样例配置文件,并重命名 ####

[root@localhost fastdfs-master]# cp /etc/fdfs/tracker.conf.sample /etc/fdfs/tracker.conf

#### 2️⃣. 修改tracker配置文件 ####

properties
    [root@localhost fastdfs-master]# vim /etc/fdfs/tracker.conf
    ###修改内容如下
    # 启用配置文件
    disabled=false              
    # tracker服务器端口（默认22122）
    port=22122                  
    # 存储日志和数据的根目录
    base_path=/usr/local/fastdfs/tracker

#### 3️⃣. 创建base\_path指定的目录 ####

`[root@localhost fastdfs-master]# mkdir -p /usr/local/fastdfs/tracker`

#### 4️⃣. 防火墙中打开tracker服务器端口(默认为 22122) ####

shell
    [root@localhost fastdfs-master]# vi /etc/sysconfig/iptables
    末尾添加
    -A INPUT -m state --state NEW -m tcp -p tcp --dport 22122 -j ACCEPT
    保存退出
    重启防火墙:
    service iptables restart

#### 5️⃣. 启动tracker服务器 ####

`[root@localhost fastdfs-master]# /etc/init.d/fdfs_trackerd start`

初次启动,会在/usr/local/fastdfs/tracker目录下生成logs、data两个目录.

![Image 1][]![20190628134727828.png][]

> 检查FastDFS Tracker Server是否启动成功:

`ps -ef | grep fdfs_trackerd`

![Image 1][]![20190628134740124.png][]

#### 4.配置storage服务器 ####

#### 1️⃣. 复制storage样例配置文件,并重命名 ####

[root@localhost fastdfs-master]# cp /etc/fdfs/storage.conf.sample /etc/fdfs/storage.conf

#### 2️⃣. 编辑配置文件 ####

`[root@localhost fastdfs-master]# vim /etc/fdfs/storage.conf`

properties
    修改部分内容如下
    disabled=false                      # 启用配置文件
    port=23000                          # storage服务端口
    base_path=/usr/local/fastdfs/storage # 数据和日志文件存储根目录
    store_path0=/usr/local/fastdfs/storage  # 第一个存储目录
    tracker_server=10.0.31.189:22122  # tracker服务器IP和端口,此处是上面预定好的 ip
    http.server_port=80                 # http访问文件的端口,此处需要和后面 nginx 监听端口保持一致

#### 3️⃣. 创建基础数据目录 ####

[root@localhost fastdfs-master]# mkdir -p /usr/local/fastdfs/storage       
    #此处上面配置的 base path 和store_path0路径,因为上面的路径可能不存在

#### 4️⃣. 防火墙中打开storage服务器端口(默认为23000) ####

[root@localhost fastdfs-master]# vim /etc/sysconfig/iptables
    
    添加如下端口行：
    -A INPUT -m state --state NEW -m tcp -p tcp --dport 23000 -j ACCEPT
    
    保存退出;
    
    重启防火墙：
    [root@localhost fastdfs-master]# service iptables restart

#### 5️⃣. 启动storage服务器 ####

`[root@localhost fastdfs-master]# /etc/init.d/fdfs_storaged start`

初次启动,会在/fastdfs/storage目录下生成logs、data两个目录

检查FastDFS Tracker Server是否启动成功.

`ps -ef | grep fdfs_storaged`

![Image 1][]![20190628134757780.png][]

#### 5. 文件上传测试（10.0.31.189,此处仅为测试,后续会用代码上传） ####

#### 1️⃣. 修改Tracker服务器客户端配置文件 ####

[root@localhost fastdfs-master]# cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf
    [root@localhost fastdfs-master]# vim /etc/fdfs/client.conf
    
    # 修改以下配置,其它保持默认
    base_path=/usr/local/fastdfs/tracker
    tracker_server=10.0.31.189:22122 #修改为tracker_server地址和端口

#### 2️⃣. 执行文件上传命令 ####

[root@localhost fastdfs-master]# /usr/bin/fdfs_upload_file /etc/fdfs/client.conf /root/logo.png
    
    返回内容 返回文件ID号：/group1/M00/00/00/CgAfvVnMWOiAaxm0AAA5ilsiE-g844.png
    如果返回类似内容,则上传成功

#### 6. 在所有storage节点安装fastdfs-nginx-module ####

#### 1️⃣. fastdfs-nginx-module 作用说明 ####

FastDFS 通过 Tracker 服务器,然后将文件放在 Storage 服务器进行存储,但是同组存储服务器之间在进行文件复制的时候,会有同步延迟的问题.假如Tracker 服务器将文件上传到了 10.0.31.201节点上,上传成功后文件ID已经返回给了客户端.而此时 FastDFS 存储集群机制会将这个文件同步到同组的存储服务器节点10.0.31.202和其他的节点上面.在文件还没有复制完成的情况下,客户端如果用这个文件 ID 在 10.0.31.202 节点上取文件,就会出现文件无法访问的错误。而 fastdfs-nginx-module 可以重定向文件从而连接到源服务器获取文件,避免客户端由于复制延迟导致的文件无法访问错误.

#### 2️⃣. 解压fastdfs-nginx-module-master.zip ####

[root@localhost fastdfs-master]# cd /usr/local
    [root@localhost local]#  unzip fastdfs-nginx-module-master.zip

#### 3️⃣. 安装Nginx ####

Nginx安装请参考Nginx源码安装文档
    注意: 在执行./configure配置nginx参数的时候,需要将fastdfs-nginx-moudle源码作为模块编译进去.
    ./configure --prefix=/usr/local/nginx --sbin-path=/usr/bin/nginx --add-module=/usr/local/fastdfs-nginx-module-master/src
    
    ./configure --prefix=/etc/nginx --sbin-path=/etc/nginx --add-module=/usr/local/fastdfs/fastdfs-nginx-module-master/src

然后进行编译并安装

`make && make install`

#### 4️⃣. 复制 fastdfs-nginx-module 源码中的配置文件到/etc/fdfs 目录,并修改: ####

[root@localhost local]# cp /usr/local/fastdfs-nginx-module-master/src/mod_fastdfs.conf /etc/fdfs/
    [root@localhost local]# /
    
    #修改以下配置 其他配置默认即可
    connect_timeout=10                  # 客户端访问文件连接超时时长（单位:秒）
    base_path=/tmp                      # 临时目录
    tracker_server=10.0.31.189:22122    # tracker服务IP和端口
    storage_server_port=23000           # storage服务端口
    group_name=group1                   # 组名
    url_have_group_name=true            # 访问链接前缀加上组名
    store_path0=/fastdfs/storage        # 文件存储路径

#### 5️⃣. 复制 FastDFS 的部分配置文件到/etc/fdfs 目录下 ####

root@localhost local]# cd /usr/local/fastdfs/fastdfs-master/conf
    root@localhost local]# cp http.conf mime.types /etc/fdfs/

#### 6️⃣. 在/usr/local/fastdfs/storage文件存储目录下创建软连接,将其链接到实际存放数据的目录,/M00是软连接目录. ####

root@localhost local]# ln -s /fastdfs/storage/data/ /fastdfs/storage/data/M00

#### 7️⃣. 配置nginx用来访问storage的文件 ####

**注意下面的 user root,此处打开前面注释并修改为 root,防止后面运行出错**

root@localhost local]# vim /usr/local/nginx/conf/nginx.conf
    user  root;
    worker_processes 1;
    events {
        worker_connections 1024;
    }
    http {
        include mime.types;
        default_type application/octet-stream;
        sendfile on;
        keepalive_timeout 65;
        server {
            ##此处和前面storage.conf配置的 http.server 保持一致
            listen 80;
            server_name localhost;
            ##配置通配符,将/group 开头的地址映射到 fastdfs 的项目,如果#只有一个 group1 可以直接写 group1s
            location ~/group([0-9])/M00 {
                ngx_fastdfs_module;
            }
            error_page 500 502 503 504 /50x.html;
    
            location = /50x.html {
                root html;
            }
        }
    }

#### 8️⃣. 防火墙中打开 Nginx 的 80 端口 ####

为了防止出现问题,最好在防火墙中放行80端口,放行方式和上面放行其他的一致,修改完成后保存重启防火墙.

#### 9️⃣. 启动Nginx ####

root@localhost local]#  /usr/bin/nginx
    ngx_http_fastdfs_set pid=xxx
    
    nginx重启命令为：/usr/bin/nginx -s reload
    启动nginx后，如果打印出ngx_http_fastdfs_set pid=xxx，表示fastdfs-nginx-module模块加载成功了，xxx表示模块的进程ID。

#### ?.通过浏览器访问测试时上传的文件 ####

测试上传后返回的文件ID为: group1/M00/00/00/CgAfvVnMWOiAaxm0AAA5ilsiE-g844.png，用浏览访问的地址为：[http://10.0.31.189/group1/M00/00/00/CgAfvVnMWOiAaxm0AAA5ilsiE-g844.png][http_10.0.31.189_group1_M00_00_00_CgAfvVnMWOiAaxm0AAA5ilsiE-g844.png]

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3N5YzAwMDY2Ng_size_16_color_FFFFFF_t_70][]

[Image 1]: 
[20190628134727828.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/01/29/329a7aba01e1433a8b687658ce10acf8.png
[20190628134740124.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/01/29/e923b5a05ffd4aabadebc1559e4ca16f.png
[20190628134757780.png]: https://image.dandelioncloud.cn/pgy_files/images/2024/01/29/de292871a2bf494faac2e6ba5914278b.png
[http_10.0.31.189_group1_M00_00_00_CgAfvVnMWOiAaxm0AAA5ilsiE-g844.png]: http://10.0.31.189/group1/M00/00/00/CgAfvVnMWOiAaxm0AAA5ilsiE-g844.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3N5YzAwMDY2Ng_size_16_color_FFFFFF_t_70]: https://image.dandelioncloud.cn/pgy_files/images/2024/01/29/84769e89069c418f85771b31a3662270.png