[TOC]
## 1. FastDFS安装(ubuntu)
需要准备:
nginx、fastdfs、libfastcommon、gcc、git
~~~
apt-get update
apt-get -y install make gcc git
~~~
### 1.1 下载安装libfastcommon(项目通用函数库)
1)git克隆
~~~
git clone https://github.com/happyfish100/libfastcommon.git
~~~
2)编译安装
~~~
cd libfastcommon/
./make.sh
./make.sh install
~~~
### 1.2 安装FastDFS
1)编译安装FastDFS
~~~
git clone https://github.com/happyfish100/fastdfs.git
cd fastdfs
./make.sh
./make.sh install
~~~
服务脚本在:
~~~
/etc/init.d/fdfs_storaged
/etc/init.d/fdfs_trackerd
~~~
#### 1.2.1 配置tracker
1. 修改Tracker配置文件
~~~
cp /etc/fdfs/tracker.conf.sample /etc/fdfs/tracker.conf
vim /etc/fdfs/tracker.conf
~~~
做以下配置
~~~
bind_addr=192.168.56.10 # 所在服务器IP地址
base_path=/data/fastdfs/tracker
~~~
2. 创建对应的数据存储目录
~~~
mkdir -p /data/fastdfs/tracker
~~~
3. 启动Tracker
~~~
mv /etc/init.d/fdfs_trackerd /etc/init.d/tracker
service tracker start
~~~
4. 查看tracker是否启动
~~~
ps -ef |grep fdfs
~~~
![](https://box.kancloud.cn/8675a229b2c2eedff31238621b5d0d4a_1145x90.png)
#### 1.2.2 配置storage
1. 修改Storage配置文件
~~~
cp /etc/fdfs/storage.conf.sample /etc/fdfs/storage.conf
vim /etc/fdfs/storage.conf
~~~
修改以下配置
~~~
group_name=group1
bind_addr=192.168.56.10 # 所在服务器IP地址
base_path=/data/fastdfs/storage
store_path0=/data/fastdfs/storage
tracker_server=192.168.56.10:22122 # tracker的ip:port
http.server_port=8888 # http监听端口
~~~
2. 创建对应的数据存储目录
~~~
mkdir -p /data/fastdfs/storage
~~~
3. 启动storage
~~~
mv /etc/init.d/fdfs_storaged /etc/init.d/storage
service storage start
~~~
4. 查看是否启动
~~~
ps -ef |grep storage
~~~
![](https://box.kancloud.cn/c18b0447aac73cb724948998bd715a7f_1061x62.png)
### 1.3 配置Client
~~~
cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf
vim /etc/fdfs/client.conf
~~~
做下面修改
~~~
base_path=/data/fastdfs/client
tracker_server=192.168.56.10:22122
~~~
创建client目录
~~~
mkdir -p /data/fastdfs/client
~~~
测试上传文件
~~~
fdfs_upload_file /etc/fdfs/client.conf ./client.conf
~~~
![](https://box.kancloud.cn/2016f428722c385f6cba02a9701d942d_870x72.png)
如上图上传成功后,返回`group1/M00/00/00/wKg4ClsiIoOAHAWxAAAFtZDs6iQ79.conf`这样的一串,这个是以后访问这个文件的凭借。其中/00/00/上传后文件是storage存储目录下的目录,上传的文件就在这个目录下边。
在storage配置的base_path下,是这样的目录:
![](https://box.kancloud.cn/451006498fc117d72760d57242d2fc1a_1685x168.png)
~~~
cd 00/00
ls
~~~
可以看到刚刚上传的文件
![](https://box.kancloud.cn/75590c7a309e24e8cff719facd71b041_1159x47.png)
### 1.4整合nginx
#### 1.4.1 下载fastdfs-nginx-module模块
~~~
git clone https://github.com/happyfish100/fastdfs-nginx-module.git
~~~
#### 14.2 安装nginx
1.下载nginx
nginx版本为:nginx-1.14.0
http://nginx.org/en/download.html
2.编译安装nginx
~~~
tar -xzvf nginx-1.14.0.tar.gz
apt-get -y install libpcre3 libpcre3-dev openssl libssl-dev
cd nginx-1.14.0/
./configure \
--prefix=/usr \
--sbin-path=/usr/sbin/nginx \
--conf-path=/etc/nginx/nginx.conf \
--error-log-path=/var/log/nginx/error.log \
--http-log-path=/var/log/nginx/access.log \
--pid-path=/var/run/nginx/nginx.pid \
--lock-path=/var/lock/nginx.lock \
--user=root \
--group=root \
--with-http_ssl_module \
--with-http_flv_module \
--with-http_stub_status_module \
--with-http_gzip_static_module \
--with-pcre \
--add-module=/root/fastdfs-nginx-module/src && make && sudo make install
~~~
3.复制fastdfs-ngin-module中的配置文件,到/etc/fdfs目录中
~~~
cp /root/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs/
~~~
4.修改mod_fastdfs.conf文件
~~~
vim /etc/fdfs/mod_fastdfs.conf
~~~
修改以下配置
~~~
group_name=group1
connect_timeout=10
tracker_server=192.168.56.10:22122
url_have_group_name = true
store_path0=/data/fastdfs/storage
log_filename=mod_fastdfs.log
~~~
5.复制FastDFS里的2个文件,到/etc/fdfs目录中
~~~
cp /root/fastdfs/conf/http.conf /root/fastdfs/conf/mime.types /etc/fdfs/
~~~
6.修改Nginx配置文件
~~~
vim /etc/nginx/nginx.conf
~~~
做以下配置
~~~
server {
listen 8888; # 与storage.conf文件中的http.server_port一致
server_name localhost;
#charset koi8-r;
#access_log logs/host.access.log main;
location ~/group([0-9])/M00 {
root /data/fastdfs/storage/data;
ngx_fastdfs_module;
}
#error_page 404 /404.html;
# redirect server error pages to the static page /50x.html
#
error_page 500 502 503 504 /50x.html;
location = /50x.html {
root html;
}
...
}
~~~
7.启动Nginx
~~~
nginx
~~~
8.测试
上传一张图片
~~~
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group1/M00/00/00/wKg4ClsiKj6AOv3sAAoHBffgMgw082.png
~~~
访问地址为就是nginx所在服务器地址+storage配置的http端口+上传文件返回的一串字符串,如:
http://192.168.56.10:8888/group1/M00/00/00/wKg4ClsiKj6AOv3sAAoHBffgMgw082.png
![](https://box.kancloud.cn/355032cea80ac01ef7eab07d0bc8f936_1784x931.png)
## 2. 集群搭建
在上边讲述了如何搭建了只有一个tracker server、storage server,接下来说明如何配置集群
### 2.1 tracker集群
将tracker部署为多节点集群模式:
1.安装tracker
按照1.1~1.2.1步骤执行
2.修改client、storage配置
~~~
# 修改client端配置,加入tracker
vim /etc/fdfs/client.conf
tracker_server=tracker1_ip:22122 # 有几个tracker就添加几个这个配置
tracker_server=tracker2_ip:22122
# 修改nginx整合模块配置
vim /etc/fdfs/mod_fastdfs.conf
tracker_server=tracker1_ip:22122 # 有几个tracker就添加几个这个配置
tracker_server=tracker2_ip:22122
# 修改storage配置
vim /etc/fdfs/storage.conf
tracker_server=tracker2_ip:22122 # 有几个tracker就添加几个这个配置
tracker_server=tracker2_ip:22122
~~~
重启storage,不建议用restart
~~~
service storage stop
service storage start
~~~
执行命令`/usr/bin/fdfs_monitor /etc/fdfs/storage.conf`查看是否成功,如下图现在tracker server数量为2两个
![](https://box.kancloud.cn/03b092a2e7cce92657d35b6b27ae611d_1830x427.png)
### 2.2 storage集群
#### 2.2.1 多volume/group
1.搭建多group
执行1.1~1.2,此时只要group_name配置不同即为不同的组,如下是两个分组的配置。如果想在一个group下配置多个storage的话,指定相同的group_name即可。
group1的storage.conf
~~~
group_name=group1
bind_addr=192.168.56.10
base_path=/data/fastdfs/storage
store_path0=/data/fastdfs/storage
tracker_server=192.168.56.10:22122
tracker_server=192.168.56.11:22122
http.server_port=8888
~~~
group2的storage.conf
~~~
group_name=group2
bind_addr=bind_addr=192.168.56.11
base_path=/data/fastdfs/storage
store_path0=/data/fastdfs/storage
tracker_server=192.168.56.10:22122
tracker_server=192.168.56.11:22122
http.server_port=8888
~~~
在任意的服务器上执行命令执行命令`/usr/bin/fdfs_monitor /etc/fdfs/storage.conf`,如下如现在tracker数量为2个,group数量为2个。
![](https://box.kancloud.cn/344de339a8928ef90ac3927b17d53403_736x377.png)
此时,默认fastdfs会以load balance(负载均衡)的方式,即挑选资源较为富足的group进行文件上传。
~~~
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeX-AJvj9AAoHBffgMgw417.png
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeZWADUQ8AAoHBffgMgw073.png
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeZaABSmhAAoHBffgMgw325.png
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeZeADGZmAAoHBffgMgw797.png
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeZiAO3rNAAoHBffgMgw093.png
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeZiAVjmdAAoHBffgMgw961.png
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeZmAExMRAAoHBffgMgw515.png
~~~
因为group2的资源比group1要充足,所以都文件上传到了group2,fastdfs提供了文件上传负载策略一共有三种
> 1. round robin:
> 以轮询的方式依次的向各个group存储文件,对应配置值0
> 2. specify group:
> 指定某一group存储文件,对应配置值1,此时需要配合配置store_group=group_name来指定特定的组
> 3. load balance:
> 选择资源充足的组来存储文件,为FastDFS默认配置
>
- Docker
- 什么是docker
- Docker安装、组件启动
- docker网络
- docker命令
- docker swarm
- dockerfile
- mesos
- 运维
- Linux
- Linux基础
- Linux常用命令_1
- Linux常用命令_2
- ip命令
- 什么是Linux
- SELinux
- Linux GCC编译警告:Clock skew detected. 错误解决办法
- 文件描述符
- find
- 资源统计
- LVM
- Linux相关配置
- 服务自启动
- 服务器安全
- 字符集
- shell脚本
- shell命令
- 实用脚本
- shell 数组
- 循环与判断
- 系统级别进程开启和停止
- 函数
- java调用shell脚本
- 发送邮件
- Linux网络配置
- Ubuntu
- Ubuntu发送邮件
- 更换apt-get源
- centos
- 防火墙
- 虚拟机下配置网络
- yum重新安装
- 安装mysql5.7
- 配置本地yum源
- 安装telnet
- 忘记root密码
- rsync+ crontab
- Zabbix
- Zabbix监控
- Zabbix安装
- 自动报警
- 自动发现主机
- 监控MySQL
- 安装PHP常见错误
- 基于nginx安装zabbix
- 监控Tomcat
- 监控redis
- web监控
- 监控进程和端口号
- zabbix自定义监控
- 触发器函数
- zabbix监控mysql主从同步状态
- Jenkins
- 安装Jenkins
- jenkins+svn+maven
- jenkins执行shell脚本
- 参数化构建
- maven区分环境打包
- jenkins使用注意事项
- nginx
- nginx认证功能
- ubuntu下编译安装Nginx
- 编译安装
- Nginx搭建本地yum源
- 文件共享
- Haproxy
- 初识Haproxy
- haproxy安装
- haproxy配置
- virtualbox
- virtualbox 复制新的虚拟机
- ubuntu下vitrualbox安装redhat
- centos配置双网卡
- 配置存储
- Windows
- Windows安装curl
- VMware vSphere
- 磁盘管理
- 增加磁盘
- gitlab
- 安装
- tomcat
- Squid
- bigdata
- FastDFS
- FastFDS基础
- FastFDS安装及简单实用
- api介绍
- 数据存储
- FastDFS防盗链
- python脚本
- ELK
- logstash
- 安装使用
- kibana
- 安准配置
- elasticsearch
- elasticsearch基础_1
- elasticsearch基础_2
- 安装
- 操作
- java api
- 中文分词器
- term vector
- 并发控制
- 对text字段排序
- 倒排和正排索引
- 自定义分词器
- 自定义dynamic策略
- 进阶练习
- 共享锁和排它锁
- nested object
- 父子关系模型
- 高亮
- 搜索提示
- Redis
- redis部署
- redis基础
- redis运维
- redis-cluster的使用
- redis哨兵
- redis脚本备份还原
- rabbitMQ
- rabbitMQ安装使用
- rpc
- RocketMQ
- 架构概念
- 安装
- 实例
- 好文引用
- 知乎
- ACK
- postgresql
- 存储过程
- 编程语言
- 计算机网络
- 基础_01
- tcp/ip
- http转https
- Let's Encrypt免费ssl证书(基于haproxy负载)
- what's the http?
- 网关
- 网络IO
- http
- 无状态网络协议
- Python
- python基础
- 基础数据类型
- String
- List
- 遍历
- Python基础_01
- python基础_02
- python基础03
- python基础_04
- python基础_05
- 函数
- 网络编程
- 系统编程
- 类
- Python正则表达式
- pymysql
- java调用python脚本
- python操作fastdfs
- 模块导入和sys.path
- 编码
- 安装pip
- python进阶
- python之setup.py构建工具
- 模块动态导入
- 内置函数
- 内置变量
- path
- python模块
- 内置模块_01
- 内置模块_02
- log模块
- collections
- Twisted
- Twisted基础
- 异步编程初探与reactor模式
- yield-inlineCallbacks
- 系统编程
- 爬虫
- urllib
- xpath
- scrapy
- 爬虫基础
- 爬虫种类
- 入门基础
- Rules
- 反反爬虫策略
- 模拟登陆
- problem
- 分布式爬虫
- 快代理整站爬取
- 与es整合
- 爬取APP数据
- 爬虫部署
- collection for ban of web
- crawlstyle
- API
- 多次请求
- 向调度器发送请求
- 源码学习
- LinkExtractor源码分析
- 构建工具-setup.py
- selenium
- 基础01
- 与scrapy整合
- Django
- Django开发入门
- Django与MySQL
- java
- 设计模式
- 单例模式
- 工厂模式
- java基础
- java位移
- java反射
- base64
- java内部类
- java高级
- 多线程
- springmvc-restful
- pfx数字证书
- 生成二维码
- 项目中使用log4j
- 自定义注解
- java发送post请求
- Date时间操作
- spring
- 基础
- spring事务控制
- springMVC
- 注解
- 参数绑定
- springmvc+spring+mybatis+dubbo
- MVC模型
- SpringBoot
- java配置入门
- SpringBoot基础入门
- SpringBoot web
- 整合
- SpringBoot注解
- shiro权限控制
- CommandLineRunner
- mybatis
- 静态资源
- SSM整合
- Aware
- Spring API使用
- Aware接口
- mybatis
- 入门
- mybatis属性自动映射、扫描
- 问题
- @Param 注解在Mybatis中的使用 以及传递参数的三种方式
- mybatis-SQL
- 逆向生成dao、model层代码
- 反向工程中Example的使用
- 自增id回显
- SqlSessionDaoSupport
- invalid bound statement(not found)
- 脉络
- beetl
- beetl是什么
- 与SpringBoot整合
- shiro
- 什么是shiro
- springboot+shrio+mybatis
- 拦截url
- 枚举
- 图片操作
- restful
- java项目中日志处理
- JSON
- 文件工具类
- KeyTool生成证书
- 兼容性问题
- 开发规范
- 工具类开发规范
- 压缩图片
- 异常处理
- web
- JavaScript
- 基础语法
- 创建对象
- BOM
- window对象
- DOM
- 闭包
- form提交-文件上传
- td中内容过长
- 问题1
- js高级
- js文件操作
- 函数_01
- session
- jQuery
- 函数01
- data()
- siblings
- index()与eq()
- select2
- 动态样式
- bootstrap
- 表单验证
- 表格
- MUI
- HTML
- iframe
- label标签
- 规范编程
- layer
- sss
- 微信小程序
- 基础知识
- 实践
- 自定义组件
- 修改自定义组件的样式
- 基础概念
- appid
- 跳转
- 小程序发送ajax
- 微信小程序上下拉刷新
- if
- 工具
- idea
- Git
- maven
- svn
- Netty
- 基础概念
- Handler
- SimpleChannelInboundHandler 与 ChannelInboundHandler
- 网络编程
- 网络I/O
- database
- oracle
- 游标
- PLSQL Developer
- mysql
- MySQL基准测试
- mysql备份
- mysql主从不同步
- mysql安装
- mysql函数大全
- SQL语句
- 修改配置
- 关键字
- 主从搭建
- centos下用rpm包安装mysql
- 常用sql
- information_scheme数据库
- 值得学的博客
- mysql学习
- 运维
- mysql权限
- 配置信息
- 好文mark
- jsp
- jsp EL表达式
- C
- test