1. FastDFS安装(ubuntu)

需要准备:

nginx、fastdfs、libfastcommon、gcc、git

apt-get update
apt-get -y install make gcc git

1.1 下载安装libfastcommon(项目通用函数库)

1)git克隆

git clone https://github.com/happyfish100/libfastcommon.git

2)编译安装

cd libfastcommon/
./make.sh
./make.sh install

1.2 安装FastDFS

1)编译安装FastDFS

git clone https://github.com/happyfish100/fastdfs.git
cd fastdfs
./make.sh
./make.sh install

服务脚本在:

/etc/init.d/fdfs_storaged
/etc/init.d/fdfs_trackerd

1.2.1 配置tracker

  1. 修改Tracker配置文件
cp /etc/fdfs/tracker.conf.sample /etc/fdfs/tracker.conf
vim /etc/fdfs/tracker.conf

做以下配置

bind_addr=192.168.56.10 # 所在服务器IP地址
base_path=/data/fastdfs/tracker
  1. 创建对应的数据存储目录
mkdir -p  /data/fastdfs/tracker
  1. 启动Tracker
mv /etc/init.d/fdfs_trackerd /etc/init.d/tracker
service tracker start
  1. 查看tracker是否启动
ps -ef |grep fdfs

1.2.2 配置storage

  1. 修改Storage配置文件
 cp /etc/fdfs/storage.conf.sample /etc/fdfs/storage.conf
vim /etc/fdfs/storage.conf

修改以下配置

group_name=group1
bind_addr=192.168.56.10 # 所在服务器IP地址
base_path=/data/fastdfs/storage
store_path0=/data/fastdfs/storage
tracker_server=192.168.56.10:22122 # tracker的ip:port
http.server_port=8888 # http监听端口
  1. 创建对应的数据存储目录
mkdir -p  /data/fastdfs/storage
  1. 启动storage
mv /etc/init.d/fdfs_storaged /etc/init.d/storage
service storage start
  1. 查看是否启动
ps -ef |grep storage

1.3 配置Client

 cp  /etc/fdfs/client.conf.sample  /etc/fdfs/client.conf
vim /etc/fdfs/client.conf

做下面修改

base_path=/data/fastdfs/client
tracker_server=192.168.56.10:22122

创建client目录

mkdir -p /data/fastdfs/client

测试上传文件

fdfs_upload_file /etc/fdfs/client.conf ./client.conf


如上图上传成功后,返回group1/M00/00/00/wKg4ClsiIoOAHAWxAAAFtZDs6iQ79.conf这样的一串,这个是以后访问这个文件的凭借。其中/00/00/上传后文件是storage存储目录下的目录,上传的文件就在这个目录下边。

在storage配置的base_path下,是这样的目录:

cd 00/00
ls

可以看到刚刚上传的文件

1.4整合nginx

1.4.1 下载fastdfs-nginx-module模块

git clone https://github.com/happyfish100/fastdfs-nginx-module.git

14.2 安装nginx

1.下载nginx

nginx版本为:nginx-1.14.0
http://nginx.org/en/download.html

2.编译安装nginx

tar -xzvf nginx-1.14.0.tar.gz
apt-get -y install libpcre3 libpcre3-dev openssl libssl-dev
cd nginx-1.14.0/ ./configure \
--prefix=/usr \
--sbin-path=/usr/sbin/nginx \
--conf-path=/etc/nginx/nginx.conf \
--error-log-path=/var/log/nginx/error.log \
--http-log-path=/var/log/nginx/access.log \
--pid-path=/var/run/nginx/nginx.pid \
--lock-path=/var/lock/nginx.lock \
--user=root \
--group=root \
--with-http_ssl_module \
--with-http_flv_module \
--with-http_stub_status_module \
--with-http_gzip_static_module \
--with-pcre \
--add-module=/root/fastdfs-nginx-module/src && make && sudo make install

3.复制fastdfs-ngin-module中的配置文件,到/etc/fdfs目录中

cp /root/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs/

4.修改mod_fastdfs.conf文件

vim /etc/fdfs/mod_fastdfs.conf

修改以下配置

group_name=group1
connect_timeout=10
tracker_server=192.168.56.10:22122
url_have_group_name = true
store_path0=/data/fastdfs/storage
log_filename=mod_fastdfs.log

5.复制FastDFS里的2个文件,到/etc/fdfs目录中

cp /root/fastdfs/conf/http.conf /root/fastdfs/conf/mime.types /etc/fdfs/

6.修改Nginx配置文件

vim /etc/nginx/nginx.conf

做以下配置

server {
listen 8888; # 与storage.conf文件中的http.server_port一致
server_name localhost; #charset koi8-r; #access_log logs/host.access.log main; location ~/group([0-9])/M00 {
root /data/fastdfs/storage/data;
ngx_fastdfs_module;
} #error_page 404 /404.html; # redirect server error pages to the static page /50x.html
#
error_page 500 502 503 504 /50x.html;
location = /50x.html {
root html;
}
...
}

7.启动Nginx

nginx

8.测试

上传一张图片

root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group1/M00/00/00/wKg4ClsiKj6AOv3sAAoHBffgMgw082.png

访问地址为就是nginx所在服务器地址+storage配置的http端口+上传文件返回的一串字符串,如:
http://192.168.56.10:8888/group1/M00/00/00/wKg4ClsiKj6AOv3sAAoHBffgMgw082.png

2. 集群搭建

在上边讲述了如何搭建了只有一个tracker server、storage server,接下来说明如何配置集群

2.1 tracker集群

将tracker部署为多节点集群模式:

1.安装tracker
按照1.1~1.2.1步骤执行

2.修改client、storage配置

# 修改client端配置,加入tracker
vim /etc/fdfs/client.conf
tracker_server=tracker1_ip:22122 # 有几个tracker就添加几个这个配置
tracker_server=tracker2_ip:22122
# 修改nginx整合模块配置
vim /etc/fdfs/mod_fastdfs.conf
tracker_server=tracker1_ip:22122 # 有几个tracker就添加几个这个配置
tracker_server=tracker2_ip:22122 # 修改storage配置
vim /etc/fdfs/storage.conf
tracker_server=tracker2_ip:22122 # 有几个tracker就添加几个这个配置
tracker_server=tracker2_ip:22122

重启storage,不建议用restart

service storage stop
service storage start

执行命令/usr/bin/fdfs_monitor /etc/fdfs/storage.conf查看是否成功,如下图现在tracker server数量为2两个

2.2 storage集群

2.2.1 多volume/group

1.搭建多group

执行1.1~1.2,此时只要group_name配置不同即为不同的组,如下是两个分组的配置。如果想在一个group下配置多个storage的话,指定相同的group_name即可。

group1的storage.conf

group_name=group1
bind_addr=192.168.56.10
base_path=/data/fastdfs/storage
store_path0=/data/fastdfs/storage
tracker_server=192.168.56.10:22122
tracker_server=192.168.56.11:22122
http.server_port=8888

group2的storage.conf

group_name=group2
bind_addr=bind_addr=192.168.56.11
base_path=/data/fastdfs/storage
store_path0=/data/fastdfs/storage
tracker_server=192.168.56.10:22122
tracker_server=192.168.56.11:22122
http.server_port=8888

在任意的服务器上执行命令执行命令/usr/bin/fdfs_monitor /etc/fdfs/storage.conf,如下如现在tracker数量为2个,group数量为2个。

此时,默认fastdfs会以load balance(负载均衡)的方式,即挑选资源较为富足的group进行文件上传。

root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeX-AJvj9AAoHBffgMgw417.png
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeZWADUQ8AAoHBffgMgw073.png
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeZaABSmhAAoHBffgMgw325.png
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeZeADGZmAAoHBffgMgw797.png
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeZiAO3rNAAoHBffgMgw093.png
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeZiAVjmdAAoHBffgMgw961.png
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeZmAExMRAAoHBffgMgw515.png

因为group2的资源比group1要充足,所以都文件上传到了group2,fastdfs提供了文件上传负载策略一共有三种

    1. round robin:
      以轮询的方式依次的向各个group存储文件,对应配置值0
    2. specify group:
      指定某一group存储文件,对应配置值1,此时需要配合配置store_group=group_name来指定特定的组
    3. load balance:
      选择资源充足的组来存储文件,为FastDFS默认配置

FastFDS安装及简单使用的更多相关文章

  1. (转)python requests的安装与简单运用

    requests是python的一个HTTP客户端库,跟urllib,urllib2类似,那为什么要用requests而不用urllib2呢?官方文档中是这样说明的: python的标准库urllib ...

  2. MongoDB在Windows下安装、Shell客户端的使用、Bson扩充的数据类型、MongoVUE可视化工具安装和简单使用、Robomongo可视化工具(2)

    一.Windows 下载安装 1.去http://www.mongodb.org/downloads下载,mongodb默认安装在C:\Program Files\MongoDB目录下,到F:\Off ...

  3. python requests的安装与简单运用

    requests是python的一个HTTP客户端库,跟urllib,urllib2类似,那为什么要用requests而不用urllib2呢?官方文档中是这样说明的: python的标准库urllib ...

  4. memcache的windows下的安装和简单使用

    原文:memcache的windows下的安装和简单使用 memcache是为了解决网站访问量大,数据库压力倍增的解决方案之一,由于其简单实用,很多站点现在都在使用memcache,但是memcach ...

  5. 【RabbitMQ】RabbitMQ在Windows的安装和简单的使用

    版本说明 使用当前版本:3.5.4 安装与启动 在官网上下载其Server二进制安装包,在Windows上的安装时简单的,与一般软件没什么区别. 安装前会提示你,还需要安装Erlang,并打开下载页面 ...

  6. Thrift的安装和简单演示样例

    本文仅仅是简单的解说Thrift开源框架的安装和简单使用演示样例.对于具体的解说,后面在进行阐述. Thrift简述                                           ...

  7. libmemcached安装及简单例子

    libmemcached安装及简单例子 1.下载安装libmemcached  $ wget http://launchpad.net/libmemcached/1.0/0.44/+download/ ...

  8. [hadoop系列]Pig的安装和简单演示样例

    inkfish原创,请勿商业性质转载,转载请注明来源(http://blog.csdn.net/inkfish ).(来源:http://blog.csdn.net/inkfish) Pig是Yaho ...

  9. Redis 安装与简单示例

    Redis 安装与简单示例 一.Redis的安装 Redis下载地址如下:https://github.com/dmajkic/redis/downloads 解压后根据自己机器的实际情况选择32位或 ...

随机推荐

  1. 如何在idea中引入一个新maven项目

    如何在idea中引入一个新的maven项目,请参见如下操作:      

  2. 织梦Dedecms文件目录结构

    Dedecms文件目录结构 /根目录 ../a 默认生成文件存放目录 ../data 系统缓存或其他可写入数据存放目录 ../dede 默认后台登录管理(可任意改名) ../images 系统默认的部 ...

  3. cordova插件列表

    主要来源为http://blog.csdn.net/github_39500961/article/details/76270299 1.获取当前应用的版本号 cordova plugin add c ...

  4. awk字符串操作(字符串链接、传入传出shell变量)

    1.awk基础 awk的环境变量及其意义   https://blog.csdn.net/snowpay/article/details/52451718 linux awk命令详解 https:// ...

  5. Dapper/SqlMapper映射对应问题

    Dapper, a light weight object mapper for ADO.NET 轻量级orm辅助类,不用配置,直接引入一个cs文件或者引入其dll就能使用. 使用连接对象的query ...

  6. SqlServer常用内置函数

    --======================================= -- SQL常用内置函数 --======================================= --判 ...

  7. [Oracle,2018-03-02] oracle一次插入多条记录

    insert into student(name,age) ' from dual union all ' from dual union all ' from dual 在oracle中不能像mys ...

  8. TensorFlow NormLization

    local_response_normalization local_response_normalization出现在论文”ImageNet Classification with deep Con ...

  9. 一步步实现:springbean的生命周期测试代码

    转载. https://blog.csdn.net/baidu_37107022/article/details/76552052 1. 创建实体SpringBean public class Spr ...

  10. form转化json

    ;(function($){ /** * 依赖jquery-1.4.2 * 依赖jquery.json-2.2,参考http://code.google.com/p/jquery-json/ * 用于 ...