欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页

FastDFS文件上传 docker安装

程序员文章站 2022-06-03 08:53:20
...

本来不想写的,想着网上一搜一大把,但是出于懒。所以哈市选择写出来

FastDFS是一个开源的轻量级[分布式文件系统]。它对文件进行管理,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡的问题。特别适合以文件为载体的在线服务,如相册网站、视频网站等等。

FastDFS为互联网量身定制,充分考虑了冗余备份、负载均衡、线性扩容等机制,并注重高可用、高性能等指标,使用FastDFS很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务。

FastDFS 架构包括 Tracker server 和 Storage server。客户端请求 Tracker server 进行文件上传、下载,通过Tracker server 调度最终由 Storage server 完成文件上传和下载。

Tracker server 作用是负载均衡和调度,通过 Tracker server 在文件上传时可以根据一些策略找到Storage server 提供文件上传服务。可以将 tracker 称为追踪服务器或调度服务器。Storage server 作用是文件存储,客户端上传的文件最终存储在 Storage 服务器上,Storageserver 没有实现自己的文件系统而是利用操作系统的文件系统来管理文件。可以将storage称为存储服务器。

说明:storage同组之间没有主从关系,是一个同步的关系,
FastDFS文件上传 docker安装
2.上传流程;
客户端上传文件后存储服务器将文件 ID 返回给客户端,此文件 ID 用于以后访问该文件的索引信息。文件索引信息包括:组名,虚拟磁盘路径,数据两级目录,文件名FastDFS文件上传 docker安装
group1/M00/00/00/Cs4AB1-rbX6ASFg5AASzD2eF7R8797.jpg

组名(group1):文件上传后所在的 storage 组名称,在文件上传成功后有storage 服务器返回,需要客户端自行保存。
虚拟磁盘路径(M00):storage 配置的虚拟路径,与磁盘选项store_path对应。如果配置了
store_path0 则是 M00,如果配置了 store_path1 则是 M01,以此类推。
*数据两级目录(00/00,这是根据hash值计算,根据上传的文件名计算)
:storage 服务器在每个虚拟磁盘路径下创建的两级目录,用于存储数据
文件。
文件名:与文件上传时不同。是由存储服务器根据特定信息生成,文件名包含:源存储
服务器 IP 地址、文件创建时间戳、文件大小、随机数和文件拓展名等信息。
1.查看fastdfs的镜像
docker search fastdfs
FastDFS文件上传 docker安装
2.拉取镜像
docker pull delron/fastdfs
3.启动tracker服务
docker run -d --network=host --name tracker -v /var/fdfs/tracker:/var/fdfs delron/fastdfs tracker
4.启动storage服务
docker run -d --network=host --name storage -e TRACKER_SERVER=你的ip:22122 -v /var/fdfs/storage:/var/fdfs -e GROUP_NAME=group1 delron/fastdfs storage
5.查看启动后的状态
FastDFS文件上传 docker安装
6.修改nginx端口(这里默认是8888)–也可以不修改
这里以修改为8874为例子:

6.1.进入storage容器:docker exec -it storage bash
6.2.修改storage内部http.server_port:vi /etc/fdfs/storage.conf,可以看到在最后一行 http.server_port=8888,将其改成为http.server_port=8874即可。
6.3.因为修改了storage,所以还需要修改nginx,保持一致:vi /usr/local/nginx/conf/nginx.conf,然后将其内部的 server {
listen 8888; …} 改成 server {
listen 8874; …}
6.4.命令退出:exit
7.最后需要重启容器:
docker restart storage
8.测试是否配置成功

1.拷贝一个txt文件到目录/var/fdfs/tracker/storage
2.进入storage容器:docker exec -it 953f982bd474 bash
进入fdfs目录:cd /var/fdfs
运行命令:/usr/bin/fdfs_upload_file /etc/fdfs/client.conf test.png
运行成功后会返回地址: group1/M00/00/00/rBFYll7Qw7uAPuhdAAAABncc3SA243.txt

浏览器访问:ip:端口/group1/M00/00/00/rBFYll7Qw7uAPuhdAAAABncc3SA243.txt

11补充:
如果是云服务器记得开放端口
docker container update --restart=always tracker //开机启动 docker
container update --restart=always storage //开机启动
可以在重启docker的时候自行启动

1.2.2 配置Nginx

Nginx在这里主要提供对FastDFS图片访问的支持,Docker容器中已经集成了Nginx,我们需要修改nginx的配置,进入storage的容器内部,修改nginx.conf

docker exec -it storage  /bin/bash

进入后

vi /etc/nginx/conf/nginx.conf

添加以下内容
FastDFS文件上传 docker安装

上图配置如下:

location ~ /M00 {
add_header Cache-Control no-store; #删除图片后清除浏览器的缓存图片
     root /data/fast_data/data;
     ngx_fastdfs_module;
}

禁止缓存:

add_header Cache-Control no-store;

退出容器

exit

重启storage容器

docker restart storage