FastDfs搭建以及Java使用

陌路散爱 提交于 2020-08-15 02:49:18

当前主流情况下都是走云存储的,但有些项目非常注重保密性,在这种情况下只能存到私有的服务器上。那么一个文件存储系统就至关重要了。本篇博客讲的是FastDfs的安装与使用,那么话不多说,开始吧:

一.  首先修改host,因为后续会有很多修改ip的地方,用更改host的方式会方便很多

192.168.1.177 file.xxx.com

如果不修改, 用内网ip即可

 

二. 下载安装 libfastcommon

1. 下载libfastcommon
wget https://github.com/happyfish100/libfastcommon/archive/V1.0.7.tar.gz

2. 解压、编译、安装
tar -zxvf V1.0.7.tar.gz
cd libfastcommon-1.0.7
./make.sh
./make.sh install

3. libfastcommon.so 安装到了/usr/lib64/libfastcommon.so,但是FastDFS主程序设置的lib目录是/usr/local/lib,所以需要创建软链接
ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so
ln -s /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so
ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so
ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so

三. 下载安装FastDFS

1. 下载
wget https://github.com/happyfish100/fastdfs/archive/V5.05.tar.gz

2. 解压、编译、安装
tar -zxvf V5.05.tar.gz
cd fastdfs-5.05
./make.sh
./make.sh install

3. 默认安装方式安装后的相应文件与目录
A、服务脚本:

/etc/init.d/fdfs_storaged
/etc/init.d/fdfs_tracker
B、配置文件(这三个是作者给的样例配置文件) :

/etc/fdfs/client.conf.sample
/etc/fdfs/storage.conf.sample
/etc/fdfs/tracker.conf.sample

C、命令工具在 /usr/bin/ 目录下:


(4)FastDFS 服务脚本设置的 bin 目录是 /usr/local/bin, 但实际命令安装在 /usr/bin/ 下,所以需要创建软链接

ln -s /usr/bin/fdfs_trackerd   /usr/local/bin
ln -s /usr/bin/fdfs_storaged   /usr/local/bin
ln -s /usr/bin/stop.sh         /usr/local/bin
ln -s /usr/bin/restart.sh      /usr/local/bin

四.  配置FastDFS跟踪器(Tracker)

1. 进入 /etc/fdfs,复制 FastDFS 跟踪器样例配置文件 tracker.conf.sample,并重命名为 tracker.conf
cd /etc/fdfs
cp tracker.conf.sample tracker.conf
vim tracker.conf
	
2. 编辑tracker.conf ,其它的默认即可	
# Tracker 数据和日志目录地址(根目录必须存在,子目录会自动创建)
base_path=/data/fastdfs/tracker

# HTTP 服务端口
http.server_port=80


3. 创建tracker基础数据目录,即base_path对应的目录

# mkdir -p /data/fastdfs/tracker	

4. 防火墙中打开跟踪端口(默认的22122),没有防火墙就无需操作。

5. 启动Tracker

初次成功启动,会在 /data/fdfsdfs/tracker/ (配置的base_path)下创建 data、logs 两个目录。

可以用这种方式启动
# /etc/init.d/fdfs_trackerd start

也可以用这种方式启动,前提是上面创建了软链接,后面都用这种方式
# service fdfs_trackerd start
查看 FastDFS Tracker 是否已成功启动 ,22122端口正在被监听,则算是Tracker服务安装成功。

# netstat -unltp|grep fdfs

关闭Tracker命令:

# service fdfs_trackerd stop

6. 设置Tracker开机启动

# chkconfig fdfs_trackerd on

或者:
# vim /etc/rc.d/rc.local

加入配置:
/etc/init.d/fdfs_trackerd start 


7. tracker server 目录及文件结构

Tracker服务启动成功后,会在base_path下创建data、logs两个目录。目录结构如下:

${base_path}
  |__data
  |   |__storage_groups.dat:存储分组信息
  |   |__storage_servers.dat:存储服务器列表
  |__logs
  |   |__trackerd.log: tracker server 日志文件

五.  配置 FastDFS 存储 (Storage)  

1. 进入 /etc/fdfs 目录,复制 FastDFS 存储器样例配置文件 storage.conf.sample,并重命名为 storage.conf

cd /etc/fdfs
cp storage.conf.sample storage.conf
vim storage.conf

2. 编辑storage.conf

# Storage 数据和日志目录地址(根目录必须存在,子目录会自动生成)
base_path=/data/fastdfs/storage

# 逐一配置 store_path_count 个路径,索引号基于 0。
# 如果不配置 store_path0,那它就和 base_path 对应的路径一样。
store_path0=/data/fastdfs/file

# tracker_server 的列表 ,会主动连接 tracker_server
# 有多个 tracker server 时,每个 tracker server 写一行
tracker_server=file.agatha.com:22122

# 访问端口
http.server_port=80

3. 创建Storage基础数据目录,对应base_path目录

# mkdir -p /data/fastdfs/storage

# 这是配置的store_path0路径
# mkdir -p /data/fastdfs/file


4. 防火墙中打开存储器端口(默认的 23000)

5. 启动 Storage

启动Storage前确保Tracker是启动的。初次启动成功,会在 /data/fastdfs/storage 目录下创建 data、 logs 两个目录。

可以用这种方式启动
# /etc/init.d/fdfs_storaged start

也可以用这种方式,后面都用这种
# service fdfs_storaged start
查看 Storage 是否成功启动,23000 端口正在被监听,就算 Storage 启动成功。

# netstat -unltp|grep fdfs

关闭Storage命令:

# service fdfs_storaged stop
查看Storage和Tracker是否在通信:

/usr/bin/fdfs_monitor /etc/fdfs/storage.conf

如果有:ACTIVE,表示成功

6. 设置 Storage 开机启动

# chkconfig fdfs_storaged on

或者:
# vim /etc/rc.d/rc.local
加入配置:
/etc/init.d/fdfs_storaged start


7. Storage 目录

同 Tracker,Storage 启动成功后,在base_path 下创建了data、logs目录,记录着 Storage Server 的信息。

在 store_path0 目录下,创建了N*N个子目录:  

六. 文件上传测试

1. 修改 Tracker 服务器中的客户端配置文件 

cd /etc/fdfs
cp client.conf.sample client.conf
vim client.conf

修改如下配置即可,其它默认。

# Client 的数据和日志目录
base_path=/data/fastdfs/client

# Tracker端口
tracker_server=file.agatha.com:22122

2. 上传测试
mkdir -p /data/fastdfs/client

在linux内部执行如下命令上传 99.jpeg

# /usr/bin/fdfs_upload_file /etc/fdfs/client.conf 99.jpeg
上传成功后返回文件ID号:http://file.agatha.com/group1/M00/00/00/wKgBhV8VTlaAGIzvAAdK_-sG-CI65.jpeg

七. nginx ,nginx的安装就不展开说了,直接说配置吧

1. 修改nginx.conf,访问文件

在主配置文件下的http{} server{}中加入:
location /group1/M00 { alias /data/fastdfs/file/data; } 记得 nginx的权限,调整为root 2. FastDFS 配置 Nginx 模块

这里我暂时没有配置, 因为我认为不配置也是可以的.



八. Java客户端使用

1. 加入依赖

<dependency>
<groupId>net.oschina.zcx7878</groupId>
<artifactId>fastdfs-client-java</artifactId>
<version>1.27.0.0</version>
</dependency>



2. 引入配置文件,java服务连接 fastdfs

# 文件服务器地址
file_server_addr=file.onepass.com:80
# 最大连接数 并发量较大的话可加大该连接数
max_storage_connection=8

## fastdfs为前缀的是FastDFS的配置
fastdfs.connect_timeout_in_seconds=10
fastdfs.network_timeout_in_seconds=30

fastdfs.charset=UTF-8

# token 防盗链功能
fastdfs.http_anti_steal_token=true

# 密钥
fastdfs.http_secret_key=superOak

# TrackerServer port
fastdfs.http_tracker_http_port=80

## Tracker Server, if more than one, separate with ","
fastdfs.tracker_servers=file.onepass.com:22122

3. 客户端API 使用

前辈封装的FastDFS Java API
https://github.com/bojiangzhou/lyyzoo-fastdfs-java.git

易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!