当前主流情况下都是走云存储的,但有些项目非常注重保密性,在这种情况下只能存到私有的服务器上。那么一个文件存储系统就至关重要了。本篇博客讲的是FastDfs的安装与使用,那么话不多说,开始吧:
一. 首先修改host,因为后续会有很多修改ip的地方,用更改host的方式会方便很多
192.168.1.177 file.xxx.com
如果不修改, 用内网ip即可
二. 下载安装 libfastcommon
1. 下载libfastcommon
wget https://github.com/happyfish100/libfastcommon/archive/V1.0.7.tar.gz
2. 解压、编译、安装
tar -zxvf V1.0.7.tar.gz
cd libfastcommon-1.0.7
./make.sh
./make.sh install
3. libfastcommon.so 安装到了/usr/lib64/libfastcommon.so,但是FastDFS主程序设置的lib目录是/usr/local/lib,所以需要创建软链接
ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so
ln -s /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so
ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so
ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so
三. 下载安装FastDFS
1. 下载
wget https://github.com/happyfish100/fastdfs/archive/V5.05.tar.gz
2. 解压、编译、安装
tar -zxvf V5.05.tar.gz
cd fastdfs-5.05
./make.sh
./make.sh install
3. 默认安装方式安装后的相应文件与目录
A、服务脚本:
/etc/init.d/fdfs_storaged
/etc/init.d/fdfs_tracker
B、配置文件(这三个是作者给的样例配置文件) :
/etc/fdfs/client.conf.sample
/etc/fdfs/storage.conf.sample
/etc/fdfs/tracker.conf.sample
C、命令工具在 /usr/bin/ 目录下:
(4)FastDFS 服务脚本设置的 bin 目录是 /usr/local/bin, 但实际命令安装在 /usr/bin/ 下,所以需要创建软链接
ln -s /usr/bin/fdfs_trackerd /usr/local/bin
ln -s /usr/bin/fdfs_storaged /usr/local/bin
ln -s /usr/bin/stop.sh /usr/local/bin
ln -s /usr/bin/restart.sh /usr/local/bin
四. 配置FastDFS跟踪器(Tracker)
1. 进入 /etc/fdfs,复制 FastDFS 跟踪器样例配置文件 tracker.conf.sample,并重命名为 tracker.conf
cd /etc/fdfs
cp tracker.conf.sample tracker.conf
vim tracker.conf
2. 编辑tracker.conf ,其它的默认即可
# Tracker 数据和日志目录地址(根目录必须存在,子目录会自动创建)
base_path=/data/fastdfs/tracker
# HTTP 服务端口
http.server_port=80
3. 创建tracker基础数据目录,即base_path对应的目录
# mkdir -p /data/fastdfs/tracker
4. 防火墙中打开跟踪端口(默认的22122),没有防火墙就无需操作。
5. 启动Tracker
初次成功启动,会在 /data/fdfsdfs/tracker/ (配置的base_path)下创建 data、logs 两个目录。
可以用这种方式启动
# /etc/init.d/fdfs_trackerd start
也可以用这种方式启动,前提是上面创建了软链接,后面都用这种方式
# service fdfs_trackerd start
查看 FastDFS Tracker 是否已成功启动 ,22122端口正在被监听,则算是Tracker服务安装成功。
# netstat -unltp|grep fdfs
关闭Tracker命令:
# service fdfs_trackerd stop
6. 设置Tracker开机启动
# chkconfig fdfs_trackerd on
或者:
# vim /etc/rc.d/rc.local
加入配置:
/etc/init.d/fdfs_trackerd start
7. tracker server 目录及文件结构
Tracker服务启动成功后,会在base_path下创建data、logs两个目录。目录结构如下:
${base_path}
|__data
| |__storage_groups.dat:存储分组信息
| |__storage_servers.dat:存储服务器列表
|__logs
| |__trackerd.log: tracker server 日志文件
五. 配置 FastDFS 存储 (Storage)
1. 进入 /etc/fdfs 目录,复制 FastDFS 存储器样例配置文件 storage.conf.sample,并重命名为 storage.conf
cd /etc/fdfs
cp storage.conf.sample storage.conf
vim storage.conf
2. 编辑storage.conf
# Storage 数据和日志目录地址(根目录必须存在,子目录会自动生成)
base_path=/data/fastdfs/storage
# 逐一配置 store_path_count 个路径,索引号基于 0。
# 如果不配置 store_path0,那它就和 base_path 对应的路径一样。
store_path0=/data/fastdfs/file
# tracker_server 的列表 ,会主动连接 tracker_server
# 有多个 tracker server 时,每个 tracker server 写一行
tracker_server=file.agatha.com:22122
# 访问端口
http.server_port=80
3. 创建Storage基础数据目录,对应base_path目录
# mkdir -p /data/fastdfs/storage
# 这是配置的store_path0路径
# mkdir -p /data/fastdfs/file
4. 防火墙中打开存储器端口(默认的 23000)
5. 启动 Storage
启动Storage前确保Tracker是启动的。初次启动成功,会在 /data/fastdfs/storage 目录下创建 data、 logs 两个目录。
可以用这种方式启动
# /etc/init.d/fdfs_storaged start
也可以用这种方式,后面都用这种
# service fdfs_storaged start
查看 Storage 是否成功启动,23000 端口正在被监听,就算 Storage 启动成功。
# netstat -unltp|grep fdfs
关闭Storage命令:
# service fdfs_storaged stop
查看Storage和Tracker是否在通信:
/usr/bin/fdfs_monitor /etc/fdfs/storage.conf
如果有:ACTIVE,表示成功
6. 设置 Storage 开机启动
# chkconfig fdfs_storaged on
或者:
# vim /etc/rc.d/rc.local
加入配置:
/etc/init.d/fdfs_storaged start
7. Storage 目录
同 Tracker,Storage 启动成功后,在base_path 下创建了data、logs目录,记录着 Storage Server 的信息。
在 store_path0 目录下,创建了N*N个子目录:
六. 文件上传测试
1. 修改 Tracker 服务器中的客户端配置文件
cd /etc/fdfs
cp client.conf.sample client.conf
vim client.conf
修改如下配置即可,其它默认。
# Client 的数据和日志目录
base_path=/data/fastdfs/client
# Tracker端口
tracker_server=file.agatha.com:22122
2. 上传测试
mkdir -p /data/fastdfs/client
在linux内部执行如下命令上传 99.jpeg
# /usr/bin/fdfs_upload_file /etc/fdfs/client.conf 99.jpeg
上传成功后返回文件ID号:http://file.agatha.com/group1/M00/00/00/wKgBhV8VTlaAGIzvAAdK_-sG-CI65.jpeg
七. nginx ,nginx的安装就不展开说了,直接说配置吧
1. 修改nginx.conf,访问文件
在主配置文件下的http{} server{}中加入:
location /group1/M00 {
alias /data/fastdfs/file/data;
}
记得 nginx的权限,调整为root
2. FastDFS 配置 Nginx 模块
这里我暂时没有配置, 因为我认为不配置也是可以的.
八. Java客户端使用
1. 加入依赖
<dependency>
<groupId>net.oschina.zcx7878</groupId>
<artifactId>fastdfs-client-java</artifactId>
<version>1.27.0.0</version>
</dependency>
<groupId>net.oschina.zcx7878</groupId>
<artifactId>fastdfs-client-java</artifactId>
<version>1.27.0.0</version>
</dependency>
2. 引入配置文件,java服务连接 fastdfs
# 文件服务器地址
file_server_addr=file.onepass.com:80
# 最大连接数 并发量较大的话可加大该连接数
max_storage_connection=8
## fastdfs为前缀的是FastDFS的配置
fastdfs.connect_timeout_in_seconds=10
fastdfs.network_timeout_in_seconds=30
fastdfs.charset=UTF-8
# token 防盗链功能
fastdfs.http_anti_steal_token=true
# 密钥
fastdfs.http_secret_key=superOak
# TrackerServer port
fastdfs.http_tracker_http_port=80
## Tracker Server, if more than one, separate with ","
fastdfs.tracker_servers=file.onepass.com:22122
3. 客户端API 使用
前辈封装的FastDFS Java API
https://github.com/bojiangzhou/lyyzoo-fastdfs-java.git
来源:oschina
链接:https://my.oschina.net/u/4414894/blog/4479708