FastDFS的实现
FastDFS的实现
环境
centos7.1节点提供tracker和storage服务
centos7.2,centos7.3只提供storage服务
FastDFS的实现
fastdfs-5.0.11-1.el7.centos.x86_64.rpm #主程序
fastdfs-debuginfo-5.0.11-1.el7.centos.x86_64.rpm #debug先关的包
fastdfs-server-5.0.11-1.el7.centos.x86_64.rpm #提供tracker和storage节点的服务
fastdfs-tool-5.0.11-1.el7.centos.x86_64.rpm #工具包
libfastcommon-1.0.36-1.el7.centos.x86_64.rpm #下面四个是依赖的包
libfastcommon-devel-1.0.36-1.el7.centos.x86_64.rpm
libfdfsclient-5.0.11-1.el7.centos.x86_64.rpm
libfdfsclient-devel-5.0.11-1.el7.centos.x86_64.rpm
nginx-1.10.2-1.el7.centos.x86_64.rpm #使用nginx做为web界面需要用到的包
nginx-all-modules-1.10.2-1.el7.centos.noarch.rpm
nginx-filesystem-1.10.2-1.el7.centos.noarch.rpm
nginx-mod-http-geoip-1.10.2-1.el7.centos.x86_64.rpm
nginx-mod-http-image-filter-1.10.2-1.el7.centos.x86_64.rpm
nginx-mod-http-perl-1.10.2-1.el7.centos.x86_64.rpm
nginx-mod-http-xslt-filter-1.10.2-1.el7.centos.x86_64.rpm
nginx-mod-mail-1.10.2-1.el7.centos.x86_64.rpm
nginx-mod-stream-1.10.2-1.el7.centos.x86_64.rpm
1》安装
yum localinstall ./* #安装软件
cd /etc/fdfs/ ;ls #发现有很多示例
anti-steal.jpg client.conf.sample http.conf mime.types storage.conf.sample storage_ids.conf.sample tracker.conf.sample
2》在centos7.1节点上配置tracker节点
cd /etc/fdfs/
cp tracker.conf.sample tracker.conf.sample.bak
mv tracker.conf.sample tracker.conf
vim tracker.conf
base_path=/app/fastdfs/tracker #设置tracker的存储路径
store_group=shen #设置一个存储组,注意不能带任何符号,不然会出现端口启用不了
mkdir -pv /app/fastdfs/tracker #在centos7.1节点上创建tracker的数据目录
mkdir /app/fastdfs/storage #创建storage的存储目录
3》在centos7.2和7.3节点上只创建storage的存储目录
mkdir /app/fastdfs/storage -pv
4》在三个节点上对storage进行配置
cd /etc/fdfs/
cp storage.conf.sample storage.conf.sample.bak
mv storage.conf.sample storage.conf
vim storage.conf
group_name=shen
base_path=/app/fastdfs/storage #storage的基础路径,用于存储日志等
store_path0=/app/fastdfs/storage #storage的存储路径,这个必须设置,可以和上面的在同一个目录下
tracker_server=192.168.213.251:22122 #指明tracker主机
在centos7.1节点上启动tracker和storage服务
systemctl start fdfs_trackerd
systemctl start fdfs_storaged
ss -nltp #发现tracker监听的端口是22122,storage监听的端口是23000
在centos7.2和7.3节点上启动storage服务
systemctl start fdfs_storaged
ss -nlt #发现23000端口已经打开
5》配置客户端的配置文件,在centos7.1节点设置
cd /etc/fdfs/ ;ls
anti-steal.jpg http.conf storage.conf storage_ids.conf.sample tracker.conf.sample.bak
client.conf.sample mime.types storage.conf.sample.bak tracker.conf
cp client.conf.sample client.conf.bak
mv client.conf.bak client.conf
vim client.conf
base_path=/app/fastdfs/tracker
tracker_server=192.168.213.251:22122
fdfs_monitor /etc/fdfs/client.conf #可以查看存储节点的状态信息
6》文件的上传和查看操作
cd /etc/fdfs/ ;ls
anti-steal.jpg client.conf.sample mime.types storage.conf.sample.bak tracker.conf
client.conf http.conf storage.conf storage_ids.conf.sample tracker.conf.sample.bak
fdfs_upload_file /etc/fdfs/client.conf /app/flower.jpg #注意上传时要指明客户端的配置文件
shen/M00/00/00/wKjV-1o01sOAHG17AAAN9EUC0YY902.jpg
cd /app/fastdfs/storage/data/00/00/ ;ls #每个节点的此目录下都有这个文件,说明同步成功
wKjV-1o01sOAHG17AAAN9EUC0YY902.jpg
fdfs_file_info /etc/fdfs/client.conf shen/M00/00/00/wKjV-1o01sOAHG17AAAN9EUC0YY902.jpg #查看文件
source storage id: 0
source ip address: 192.168.213.251
file create timestamp: 2017-12-16 16:18:11
file size: 3572
file crc32: 1157812614 (0x4502D186)
fdfs_test /etc/fdfs/client.conf upload /root/anaconda-ks.cfg #上传测试
fdfs_upload_file /etc/fdfs/client.conf /root/anaconda-ks.cfg #上传文件
magedu/M00/00/00/rBIVB1oylFSADeGrAAAHXGXWizs514.cfg
fdfs_download_file /etc/fdfs/client.conf magedu/M00/00/00/rBIVB1oylFSADeGrAAAHXGXWizs514.cfg #下载文件到当前目录
FastDFS实现nginx代理
1》在centos7.1节点安装nginx的相关包,注意要安装nginx-1.10版本,不然可能没有ngx_fastdfs_module模块,如果之前已经安装nginx及相应的依赖包,最好先卸载了
cd /app
ls #将nginx-1.10.2版本的nginx及相应的依赖包下载到本地
nginx-1.10.2-1.el7.centos.x86_64.rpm #注意版本要统一都是1.10.2的版本
nginx-all-modules-1.10.2-1.el7.centos.noarch.rpm #下面这些都是nginx的依赖包
nginx-filesystem-1.10.2-1.el7.centos.noarch.rpm
nginx-mod-http-geoip-1.10.2-1.el7.centos.x86_64.rpm
nginx-mod-http-image-filter-1.10.2-1.el7.centos.x86_64.rpm
nginx-mod-http-perl-1.10.2-1.el7.centos.x86_64.rpm
nginx-mod-http-xslt-filter-1.10.2-1.el7.centos.x86_64.rpm
nginx-mod-mail-1.10.2-1.el7.centos.x86_64.rpm
nginx-mod-stream-1.10.2-1.el7.centos.x86_64.rpm
yum install ./nginx*
2》修改nginx的配置文件
vim /etc/nginx/nginx.conf
location /magedu/M00 { #表示匹配以 /magdu/M00开头的uri
root /app/fastdfs/storage; #指明数据存储的目录
ngx_fastdfs_module;
}
nginx
ngx_http_fastdfs_set pid=14594
ss -nlt
3》修改fastdfs_module配置文件的设置
vim /etc/fdfs/mod_fastdfs.conf
url_have_group_name = true #是否允许访问的url中包含组名
store_path0=/app/fastdfs/storage #指明storage节点存储数据的目录
tracker_server=172.18.21.107:22122 #指明tracker节点
group_name=magedu #指明组名
4》测试
fdfs_upload_file /etc/fdfs/client.conf /app/sunset.jpg #上传一个文件
magedu/M00/00/00/rBIVa1ozvNWAJLHkAAAKwLGLsZc035.jpg
访问如下网站就可以看到存储的图片
http://172.18.21.107/magedu/M00/00/00/rBIVa1ozvNWAJLHkAAAKwLGLsZc035.jpg
FastDFS的实现的更多相关文章
- 【架构设计】分布式文件系统 FastDFS的原理和安装使用
本文地址 分享提纲: 1.概述 2. 原理 3. 安装 4. 使用 5. 参考文档 1. 概述 1.1)[常见文件系统] Google了一下,流行的开源分布式文件系统有很多,介绍如下: -- mo ...
- FASTDFS调研报告(V1.0)
之前的文章,现在放出来,以供参阅. 一.fastdfs简介 FastDFS是一个轻量级的开源分布式文件系统 FastDFS主要解决了大容量的文件存储和高并发访问的问题,文件存取时实现了负载均衡 Fas ...
- 网站文件系统发展&&分布式文件系统fastDFS
网站文件系统发展 1.单机时代的图片服务器架构 初创时期由于时间紧迫,开发人员水平也很有限等原因.所以通常就直接在website文件所在的目录下,建立1个upload子目录,用于保存用户上传的图片文件 ...
- FastDFS 安装及使用
FastDFS 安装及使用 2012-11-17 13:10:31| 分类: Linux|举报|字号 订阅 Google了一下,流行的开源分布式文件系统有很多,介绍如下: mogileF ...
- 分布式文件系统 - FastDFS 在 CentOS 下配置安装部署
少啰嗦,直接装 看过上一篇分布式文件系统 - FastDFS 简单了解一下的朋友应该知道,本次安装是使用目前余庆老师开源的最新 V5.05 版本,是余庆老师放在 Github 上的,和目前你能在网络上 ...
- 分布式文件系统 - FastDFS 简单了解一下
别问我在哪里 也许我早已不是我自己,别问我在哪里,我一直在这里. 突然不知道说些什么了... 初识 FastDFS 记得那是我刚毕业后进入的第一家公司,一个技术小白进入到当时的项目组后,在开发中上传用 ...
- 分布式文件系统 - FastDFS 配置 Nginx 模块及上传测试
也不说废话,直接干 上一篇 分布式文件系统 - FastDFS 在 CentOS 下配置安装部署 中安装了 FastDFS 后,并配置启动了 Tracker 和 Storage 服务,已经可以上传文件 ...
- centos 系统下安装FastDFS+nginx+fastdfs-nginx-module安装配置
前言: 以前的项目上传的文件都是保存到本地或者是局域网内的共享文件夹下,由于数据量,服务器的负载均衡(分机的某些图片无法访问的问题处理)等因素的情况下,就想到用fastdfs来文件管理,花了几天时间硬 ...
- FastDFS+Nginx(单点部署)事例
FastDFS是由淘宝的余庆先生所开发,是一个轻量级.高性能的开源分布式文件系统,用纯C语言开发,包括文件存储.文件同步.文件访问(上传.下载).存取负载均衡.在线扩容.相同内容只存储一份等功能,适合 ...
- 在虚拟机中配置FastDFS+Nginx模块
先上部署图 提示一下, ip 192.168.72.138 上面部署了两个group, 分别为 group1和g2. 另外, 同组之内的 port 要保持一致. 一.安装准备 1. #每台机器都添加两 ...
随机推荐
- MT4系统自带指标代码
MT4系统自带指标代码 ~ Accelerator Oscillator 震荡加速指标: double iAC() ~ Accumulation/Distribut ...
- Cadence中画原理图的时候器件标号与黄色的参数不同的解决办法
方法是Accessories->Transfer Occ. Prop to Instance->Push Occ. Prop into Instance 将黄色的参数同样应用到源参数. 版 ...
- 一个ajax实例
一个ajax实例 html <!DOCTYPE html> <html lang="zh-cn"> <head> <meta ch ...
- Core java for impatient 笔记
类比c++来学习! 1.在java 中变量不持有对象,变量持有的是对象的引用,可以把变量看做c++中的只能指针,自动管理内存 需要手动初始化(否则就是空指针!) 2.final 相当于c++中的con ...
- POJ 3469_Dual Core CPU
题意: N个模块可以在A,B两个核上运行,分别需要A[i]和B[i],模块之间需要传递数据,若两个模块在同一核上,则不需要花费,否则需要花费w[i].问最少需要花费多少? 分析: 用最小的费用将两个对 ...
- [bzoj4826][Hnoi2017]影魔_单调栈_主席树
影魔 bzoj-4826 Hnoi-2017 题目大意:给定一个$n$个数的序列$a$,求满足一下情况的点对个数: 注释:$1\le n,m\le 2\cdot 10^5$,$1\le p1,p2\l ...
- nginx: [emerg] unknown directive "聽" in D:\software03\GitSpace\cms\nginx-1.14.0/conf/nginx.conf:36
nginx: [emerg] unknown directive "聽" in D:\software03\GitSpace\cms\nginx-1.14.0/conf/nginx ...
- Eclipse-Java代码规范和质量检查插件-SonarLint
SonarQube(Sonar)之前的提供的本地工具是需要依赖SonarQube服务器的,这样导致其运行速度缓慢. 新出的SonarLint的扫描引擎直接安装在本地,速度超快,实时探测代码技术债务,给 ...
- JDBC的流数据
以下内容引用自http://wiki.jikexueyuan.com/project/jdbc/streaming-data.html: PreparedStatement对象必须具备使用输入和输出流 ...
- DELPHI、FLASH、AS3、FLEX使用Protobuf(google Protocol Buffers)的具体方法
最近因为工作需要,需要在不同的开发环境中应用Protobuf,特此,我专门研究了一下.为了防止自己忘记这些事情,现在记录在这里!需要的朋友可以借鉴一些,因为这些东西在GOOGLE和百度上搜索起来真的很 ...