百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

CentOS7下FastDFS安装及配置(单节点)

nanshan 2025-01-17 12:27 12 浏览 0 评论


一、前言

本文中使用本地VM虚机部署测试。

OS:CentOS Linux release 7.8.2003 (Core) 3.10.0-1160.15.2.el7.x86_64

IP:192.168.168.100

外部Nginx服务器IP:192.168.168.103

虚机配置:2核CPU、4G内存

防火墙设置:CentOS 7.8默认使用firewall,本文中禁用firewall,使用iptables。

软件说明:

软件

版本号

安装路径

fastdfs

6.07

默认路径

libfastcommon

1.0.49

默认路径

fastdfs-nginx-module

1.22

/usr/local/nginx-mod/fastdfs-nginx-module-1.22

nginx

1.20.0

/usr/local/nginx

目录说明:

目录

用途

/data/tools

存放软件源码安装包

/data/fastdfs/

FastDFS数据存储位置(包含数据data和日志logs)




二、基础环境

1.安装依赖

yum -y install gcc gcc-c++ libevent libevent-devel zlib zlib-devel pcre-devel perl



2.安装libfatscommon函数库

libfastcommon是FastDFS官方提供的,libfastcommon包含了FastDFS运行所需要的一些基础库。

下载地址:
https://github.com/happyfish100/libfastcommon/releases

根据需求选择合适的版本进行下载安装。本文中使用的是最新稳定版本。

①安装方式一

cd /data/tools
wget -O libfastcommon-1.0.49.tar.gz https://github.com/happyfish100/libfastcommon/archive/V1.0.49.tar.gz
tar xf libfastcommon-1.0.49.tar.gz
cd libfastcommon-1.0.49/
./make.sh 
./make.sh install

②安装方式二

yum -y install git
cd /data/tools
git clone https://github.com/happyfish100/libfastcommon.git
cd libfastcommon
git checkout V1.0.49
./make.sh clean
./make.sh
./make.sh install




三、安装FastDFS

1.安装

下载地址:
https://github.com/happyfish100/fastdfs/releases

根据需求选择合适的版本进行下载安装。本文中使用的是最新稳定版本。

cd /data/tools
wget -O fastdfs-6.07.tar.gz https://github.com/happyfish100/fastdfs/archive/V6.07.tar.gz
tar xf fastdfs-6.07.tar.gz
cd fastdfs-6.07
./make.sh 
./make.sh install



2.相关文件和目录

默认安装方式安装后的相应文件与目录

描述

目录

服务脚本

/etc/init.d/fdfs_storaged

/etc/init.d/fdfs_trackerd

样例配置文件

/etc/fdfs/client.conf.sample

/etc/fdfs/storage.conf.sample

/etc/fdfs/tracker.conf.sample

命令工具

/usr/bin/fdfs_appender_test | fdfs_appender_test1 | fdfs_append_file | fdfs_crc32 | fdfs_delete_file | fdfs_download_file | fdfs_file_info | fdfs_monitor | fdfs_regenerate_filename | fdfs_storaged | fdfs_test | fdfs_test1 | fdfs_trackerd | fdfs_upload_appender | fdfs_upload_file




四、配置FastDFS

1.跟踪器(Tracker)

①创建tracker基础数据目录

mkdir -p /data/fastdfs/tracker

②进入/etc/fdfs,复制 FastDFS 跟踪器样例配置文件 tracker.conf.sample,并重命名为 tracker.conf

cd /etc/fdfs
cp tracker.conf.sample tracker.conf

③编辑tracker.conf

vi /etc/fdfs/tracker.conf
//修改如下配置项
# Tracker服务的端口(默认22122,一般不修改)
port = 22122
# Tracker服务数据和日志目录地址(根目录必须存在,子目录会自动创建)
base_path = /data/fastdfs/tracker
# HTTP 服务端口 默认8080,可根据需求修改
http.server_port = 8180

注:①上述配置项的修改仅供参考,实际环境中请根据需求修改调整。

②若tracker和storage部署在不同服务器,或外部调用程序在不同服务器,则需放开端口。

④启动Tracker

## 首次启动必须使用下列命令启动。后续可使用systemctl管理

/etc/init.d/fdfs_trackerd start

⑤服务检查

## 查看 FastDFS Tracker 是否已成功启动 ,如下图所示则成功

systemctl status fdfs_trackerd

## 端口监听

netstat -tulnp|grep fdfs

⑥Tracker Server 目录及文件结构

Tracker服务启动成功后,会在base_path(本文中目录为:/data/fastdfs/tracker )下创建data、logs两个目录。目录结构如下:

ls -al /data/fastdfs/tracker  或   ll /data/fastdfs/tracker
//目录结构如下
|__data
| |__fdfs_trackerd.pid
| |__storage_changelog.dat
|__logs
| |__trackerd.log

⑦服务管理

启动:/etc/init.d/fdfs_trackerd start 或 systemctl start fdfs_trackerd.service
关闭:/etc/init.d/fdfs_trackerd stop 或 systemctl stop fdfs_trackerd.service
重启:/etc/init.d/fdfs_trackerd restart 或 systemctl restart fdfs_trackerd.service
开机启动:chkconfig fdfs_trackerd on
查看状态:/etc/init.d/fdfs_trackerd status 或 systemctl status fdfs_trackerd.service



2.存储(Storage)

①创建Storage数据和日志目录

mkdir -p /data/fastdfs/storage

②进入 /etc/fdfs 目录,复制 FastDFS 存储器样例配置文件 storage.conf.sample,并重命名为 storage.conf

cd /etc/fdfs
cp storage.conf.sample storage.conf

③编辑storage.conf

vi /etc/fdfs/storage.conf
//修改如下配置项
# 指定此storage server所在组(卷)
group_name = group1
# storage服务端口(默认23000,一般不修改)
port = 23000
# storage的工作空间(数据和日志文件存储根目录) 
base_path = /data/fastdfs/storage 
# storage的存储空间,如果不配置,则为 base_path 的值(有多个存储路径时,每个存储路径写一行,第一个为0,第二个为1,以此类推)
store_path0 = /data/fastdfs/storage 
# Tracker服务器的地址和端口号,用于心跳(有多个tracker server时,每个tracker server写一行)
tracker_server = 192.168.168.102:22122 
# http访问文件的端口(默认8888,看情况修改,和nginx中保持一致) 
http.server_port = 8888

注:①上述配置项的修改仅供参考,实际环境中请根据需求修改调整。

②关于 store_path 项的配置,官方不推荐其配置值跟 base_path 项值一样,建议使用不同目录路径。本文为测试,所配置的值为一样。

④启动Storage

systemctl start fdfs_storaged

注:若tracker和storage部署在不同服务器,首次启动Storage必须使用 /etc/init.d/fdfs_storaged start 命令启动。本文中tracker和storage部署在同一服务器,在tracker服务器已启动的情况下,首次可使用systemctl来启动storage服务。

⑤服务检查

## 查看 Storage 是否成功启动,23000 端口是否被监听

systemctl status fdfs_storaged

## 查看服务端口23000是否被监听

netstat -unltp | grep fdfs

## 查看Storage和Tracker是否在通信(ACTIVE表示正常)

/usr/bin/fdfs_monitor /etc/fdfs/storage.conf

⑥服务管理

启动:/etc/init.d/fdfs_storaged start 或 systemctl start fdfs_storaged.service
关闭:/etc/init.d/fdfs_storaged stop 或 systemctl stop fdfs_storaged.service
重启:/etc/init.d/fdfs_storaged restart 或 systemctl restart fdfs_storaged.service
开机启动:chkconfig fdfs_storaged on
查看状态:/etc/init.d/fdfs_storaged status 或 systemctl status fdfs_storaged.service



3.客户端(client)

①创建client数据和日志目录

mkdir -p /data/fastdfs/client

②进入 /etc/fdfs 目录,复制 FastDFS 客户端样例配置文件 client.conf.sample,并重命名为 client.conf

cd /etc/fdfs
cp client.conf.sample client.conf

③编辑client.conf

vi /etc/fdfs/client.conf
//修改如下配置项
# Client 的数据和日志目录
base_path = /data/fastdfs/client
# Tracker服务器地址及监听端口
tracker_server = 192.168.168.102:22122
# Tracker服务的HTTP端口,必须和tracker的设置对应起来
http.tracker_server_port = 8180

注:上述配置项的修改仅供参考,实际环境中请根据需求修改调整。




五、安装Nginx及模块

注:nginx需要和storage在同一个节点。

1.下载软件包

cd /data/tools
wget http://nginx.org/download/nginx-1.20.0.tar.gz
wget -O fastdfs-nginx-module-1.22.tar.gz https://github.com/happyfish100/fastdfs-nginx-module/archive/V1.22.tar.gz



2.安装fastdfs-nginx-module模块

mkdir -p /usr/local/nginx-mod
tar xf fastdfs-nginx-module-1.22.tar.gz
mv fastdfs-nginx-module-1.22 /usr/local/nginx-mod/

## 修改配置文件

/usr/local/nginx-mod/fastdfs-nginx-module-1.22/src/config,主要是修改路径,
将配置文件中的 /usr/local/include 改为 /usr/include,因为fastdfs安装的时候没有修改路径,原路径是/usr。




3.复制并修改fastdfs-nginx-module中的配置文件

mkdir -p /data/fastdfs/tmp 
//创建mod_fastdfs日志目录
cp /usr/local/nginx-mod/fastdfs-nginx-module-1.22/src/mod_fastdfs.conf /etc/fdfs/
vi /etc/fdfs/mod_fastdfs.conf
//修改如下配置项
# 连接超时时间
connect_timeout=10
# 日志目录
base_path=/data/fastdfs/tmp
# Tracker Server
tracker_server=192.168.168.102:22122
# StorageServer 端口,保持默认
storage_server_port=23000
# StorageServer 组名,需与storage.conf中的配置值一致
group_name=group1
# 如果文件ID的URL中需包含/group**,则要设置为true。默认值为false
url_have_group_name=false
# Storage 配置的store_path0路径,必须与storage.conf中的一致
store_path0=/data/fastdfs/storage

注:上述mod_fastdfs.conf配置项的修改仅供参考,实际环境中请根据需求修改调整。


4.安装Nginx

本文中不赘述Nginx编译安装过程,具体步骤请参照本人之前发布的文章《CentOS7下编译安装Nginx-v1.20.0》,URL地址为:

https://www.toutiao.com/i6961593096903705092/

注意:运行configure配置时添加fastdfs-nginx-module模块,命令如下:

./configure …… --add-module=/usr/local/nginx-mod/fastdfs-nginx-module-1.22/src



5.复制 FastDFS 的部分配置文件到/etc/fdfs 目录

cd /data/tools/fastdfs-6.07/conf/
cp http.conf mime.types /etc/fdfs/



6.配置Nginx

添加fastdfs虚拟主机配置文件

vi /usr/local/nginx/conf/vhost/fastdfs.conf 
//添加如下配置内容
server {
    listen       8888;
    server_name  192.168.168.100;

    #location ~/group([0-9])/M00  {
    location ~/M00  {
        ngx_fastdfs_module;
    }

    error_page   500 502 503 504  /50x.html;

    location = /50x.html {
    root   html;
    }
}

注:Listen端口必须要与storage.conf中的http.server_port相同,防火墙需放开端口



7.启动Nginx

systemctl start nginx.service



8.检测NGINX配置文件会看到fastdfs模块信息

/usr/local/nginx/sbin/nginx -t




六、测试

1.服务器内使用命令上传

## 创建测试目录

mkdir -p /data/test
cd /data/test
//使用rz命令或通过其他方法从本地上传一张图片至该目录,测试使用
ll /data/test

## 使用命令上传图片至FastDFS存储

/usr/bin/fdfs_upload_file /etc/fdfs/client.conf fastdfs.jpeg

## 如上图所示,上传成功后返回文件路径及ID:

group1/M00/00/00/wKioZGCc3OqAMGRnAAEGHsKL6hw44.jpeg

## 浏览器访问

http://192.168.168.100:8888/M00/00/00/wKioZGCc3OqAMGRnAAEGHsKL6hw44.jpeg



2.服务器内使用命令下载

## 下载图片文件并重命名为test.jpg

/usr/bin/fdfs_download_file /etc/fdfs/client.conf group1/M00/00/00/wKioZGCc3OqAMGRnAAEGHsKL6hw44.jpeg test.jpg



3.服务器内使用命令删除

/usr/bin/fdfs_delete_file /etc/fdfs/client.conf group1/M00/00/00/wKioZGCc3OqAMGRnAAEGHsKL6hw44.jpeg

## 执行删除命令后,再次下载会报错

/usr/bin/fdfs_download_file /etc/fdfs/client.conf group1/M00/00/00/wKioZGCc3OqAMGRnAAEGHsKL6hw44.jpeg test1.jpg




七、配置外部访问的Nginx

在另一台服务器(192.168.168.103)上配置Nginx访问(负载均衡及反向代理),隐藏FastDFS真实服务器。

## 编辑Nginx主配置文件nginx.conf,在http配置项中添加upstream项

vi /usr/local/nginx/conf/nginx.conf
//在http配置项中添加upstream项
upstream fastdfs_srv {
        server 192.168.168.100:8888;
    }

## 新建访问FastDFS相关虚拟主机配置文件,本文中为fastdfs.conf

vi /usr/local/nginx/conf/vhost/fastdfs.conf
//添加如下内容
server {
   listen       80;
   server_name  192.168.168.103;
   
   location /files {
       proxy_next_upstream http_502 http_504 error timeout invalid_header;
       proxy_pass http://fastdfs_srv/;
       expires 30d;
   }
}

## 重新加载配置

/usr/local/nginx/sbin/nginx -t
/usr/local/nginx/sbin/nginx -s reload

## 测试,使用浏览器访问

http://192.168.168.103/files/M00/00/00/wKioZGCc3OqAMGRnAAEGHsKL6hw44.jpeg

相关推荐

0722-6.2.0-如何在RedHat7.2使用rpm安装CDH(无CM)

文档编写目的在前面的文档中,介绍了在有CM和无CM两种情况下使用rpm方式安装CDH5.10.0,本文档将介绍如何在无CM的情况下使用rpm方式安装CDH6.2.0,与之前安装C5进行对比。环境介绍:...

ARM64 平台基于 openEuler + iSula 环境部署 Kubernetes

为什么要在arm64平台上部署Kubernetes,而且还是鲲鹏920的架构。说来话长。。。此处省略5000字。介绍下系统信息;o架构:鲲鹏920(Kunpeng920)oOS:ope...

生产环境starrocks 3.1存算一体集群部署

集群规划FE:节点主要负责元数据管理、客户端连接管理、查询计划和查询调度。>3节点。BE:节点负责数据存储和SQL执行。>3节点。CN:无存储功能能的BE。环境准备CPU检查JDK...

在CentOS上添加swap虚拟内存并设置优先级

现如今很多云服务器都会自己配置好虚拟内存,当然也有很多没有配置虚拟内存的,虚拟内存可以让我们的低配服务器使用更多的内存,可以减少很多硬件成本,比如我们运行很多服务的时候,内存常常会满,当配置了虚拟内存...

国产深度(deepin)操作系统优化指南

1.升级内核随着deepin版本的更新,会自动升级系统内核,但是我们依旧可以通过命令行手动升级内核,以获取更好的性能和更多的硬件支持。具体操作:-添加PPAs使用以下命令添加PPAs:```...

postgresql-15.4 多节点主从(读写分离)

1、下载软件[root@TX-CN-PostgreSQL01-252software]#wgethttps://ftp.postgresql.org/pub/source/v15.4/postg...

Docker 容器 Java 服务内存与 GC 优化实施方案

一、设置Docker容器内存限制(生产环境建议)1.查看宿主机可用内存bashfree-h#示例输出(假设宿主机剩余16GB可用内存)#Mem:64G...

虚拟内存设置、解决linux内存不够问题

虚拟内存设置(解决linux内存不够情况)背景介绍  Memory指机器物理内存,读写速度低于CPU一个量级,但是高于磁盘不止一个量级。所以,程序和数据如果在内存的话,会有非常快的读写速度。但是,内存...

Elasticsearch性能调优(5):服务器配置选择

在选择elasticsearch服务器时,要尽可能地选择与当前业务量相匹配的服务器。如果服务器配置太低,则意味着需要更多的节点来满足需求,一个集群的节点太多时会增加集群管理的成本。如果服务器配置太高,...

Es如何落地

一、配置准备节点类型CPU内存硬盘网络机器数操作系统data节点16C64G2000G本地SSD所有es同一可用区3(ecs)Centos7master节点2C8G200G云SSD所有es同一可用区...

针对Linux内存管理知识学习总结

现在的服务器大部分都是运行在Linux上面的,所以,作为一个程序员有必要简单地了解一下系统是如何运行的。对于内存部分需要知道:地址映射内存管理的方式缺页异常先来看一些基本的知识,在进程看来,内存分为内...

MySQL进阶之性能优化

概述MySQL的性能优化,包括了服务器硬件优化、操作系统的优化、MySQL数据库配置优化、数据库表设计的优化、SQL语句优化等5个方面的优化。在进行优化之前,需要先掌握性能分析的思路和方法,找出问题,...

Linux Cgroups(Control Groups)原理

LinuxCgroups(ControlGroups)是内核提供的资源分配、限制和监控机制,通过层级化进程分组实现资源的精细化控制。以下从核心原理、操作示例和版本演进三方面详细分析:一、核心原理与...

linux 常用性能优化参数及理解

1.优化内核相关参数配置文件/etc/sysctl.conf配置方法直接将参数添加进文件每条一行.sysctl-a可以查看默认配置sysctl-p执行并检测是否有错误例如设置错了参数:[roo...

如何在 Linux 中使用 Sysctl 命令?

sysctl是一个用于配置和查询Linux内核参数的命令行工具。它通过与/proc/sys虚拟文件系统交互,允许用户在运行时动态修改内核参数。这些参数控制着系统的各种行为,包括网络设置、文件...

取消回复欢迎 发表评论: