[TOC]
## 1. FastDFS安裝(ubuntu)
需要準備:
nginx、fastdfs、libfastcommon、gcc、git
~~~
apt-get update
apt-get -y install make gcc git
~~~
### 1.1 下載安裝libfastcommon(項目通用函數庫)
1)git克隆
~~~
git clone https://github.com/happyfish100/libfastcommon.git
~~~
2)編譯安裝
~~~
cd libfastcommon/
./make.sh
./make.sh install
~~~
### 1.2 安裝FastDFS
1)編譯安裝FastDFS
~~~
git clone https://github.com/happyfish100/fastdfs.git
cd fastdfs
./make.sh
./make.sh install
~~~
服務腳本在:
~~~
/etc/init.d/fdfs_storaged
/etc/init.d/fdfs_trackerd
~~~
#### 1.2.1 配置tracker
1. 修改Tracker配置文件
~~~
cp /etc/fdfs/tracker.conf.sample /etc/fdfs/tracker.conf
vim /etc/fdfs/tracker.conf
~~~
做以下配置
~~~
bind_addr=192.168.56.10 # 所在服務器IP地址
base_path=/data/fastdfs/tracker
~~~
2. 創建對應的數據存儲目錄
~~~
mkdir -p /data/fastdfs/tracker
~~~
3. 啟動Tracker
~~~
mv /etc/init.d/fdfs_trackerd /etc/init.d/tracker
service tracker start
~~~
4. 查看tracker是否啟動
~~~
ps -ef |grep fdfs
~~~

#### 1.2.2 配置storage
1. 修改Storage配置文件
~~~
cp /etc/fdfs/storage.conf.sample /etc/fdfs/storage.conf
vim /etc/fdfs/storage.conf
~~~
修改以下配置
~~~
group_name=group1
bind_addr=192.168.56.10 # 所在服務器IP地址
base_path=/data/fastdfs/storage
store_path0=/data/fastdfs/storage
tracker_server=192.168.56.10:22122 # tracker的ip:port
http.server_port=8888 # http監聽端口
~~~
2. 創建對應的數據存儲目錄
~~~
mkdir -p /data/fastdfs/storage
~~~
3. 啟動storage
~~~
mv /etc/init.d/fdfs_storaged /etc/init.d/storage
service storage start
~~~
4. 查看是否啟動
~~~
ps -ef |grep storage
~~~

### 1.3 配置Client
~~~
cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf
vim /etc/fdfs/client.conf
~~~
做下面修改
~~~
base_path=/data/fastdfs/client
tracker_server=192.168.56.10:22122
~~~
創建client目錄
~~~
mkdir -p /data/fastdfs/client
~~~
測試上傳文件
~~~
fdfs_upload_file /etc/fdfs/client.conf ./client.conf
~~~

如上圖上傳成功后,返回`group1/M00/00/00/wKg4ClsiIoOAHAWxAAAFtZDs6iQ79.conf`這樣的一串,這個是以后訪問這個文件的憑借。其中/00/00/上傳后文件是storage存儲目錄下的目錄,上傳的文件就在這個目錄下邊。
在storage配置的base_path下,是這樣的目錄:

~~~
cd 00/00
ls
~~~
可以看到剛剛上傳的文件

### 1.4整合nginx
#### 1.4.1 下載fastdfs-nginx-module模塊
~~~
git clone https://github.com/happyfish100/fastdfs-nginx-module.git
~~~
#### 14.2 安裝nginx
1.下載nginx
nginx版本為:nginx-1.14.0
http://nginx.org/en/download.html
2.編譯安裝nginx
~~~
tar -xzvf nginx-1.14.0.tar.gz
apt-get -y install libpcre3 libpcre3-dev openssl libssl-dev
cd nginx-1.14.0/
./configure \
--prefix=/usr \
--sbin-path=/usr/sbin/nginx \
--conf-path=/etc/nginx/nginx.conf \
--error-log-path=/var/log/nginx/error.log \
--http-log-path=/var/log/nginx/access.log \
--pid-path=/var/run/nginx/nginx.pid \
--lock-path=/var/lock/nginx.lock \
--user=root \
--group=root \
--with-http_ssl_module \
--with-http_flv_module \
--with-http_stub_status_module \
--with-http_gzip_static_module \
--with-pcre \
--add-module=/root/fastdfs-nginx-module/src && make && sudo make install
~~~
3.復制fastdfs-ngin-module中的配置文件,到/etc/fdfs目錄中
~~~
cp /root/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs/
~~~
4.修改mod_fastdfs.conf文件
~~~
vim /etc/fdfs/mod_fastdfs.conf
~~~
修改以下配置
~~~
group_name=group1
connect_timeout=10
tracker_server=192.168.56.10:22122
url_have_group_name = true
store_path0=/data/fastdfs/storage
log_filename=mod_fastdfs.log
~~~
5.復制FastDFS里的2個文件,到/etc/fdfs目錄中
~~~
cp /root/fastdfs/conf/http.conf /root/fastdfs/conf/mime.types /etc/fdfs/
~~~
6.修改Nginx配置文件
~~~
vim /etc/nginx/nginx.conf
~~~
做以下配置
~~~
server {
listen 8888; # 與storage.conf文件中的http.server_port一致
server_name localhost;
#charset koi8-r;
#access_log logs/host.access.log main;
location ~/group([0-9])/M00 {
root /data/fastdfs/storage/data;
ngx_fastdfs_module;
}
#error_page 404 /404.html;
# redirect server error pages to the static page /50x.html
#
error_page 500 502 503 504 /50x.html;
location = /50x.html {
root html;
}
...
}
~~~
7.啟動Nginx
~~~
nginx
~~~
8.測試
上傳一張圖片
~~~
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group1/M00/00/00/wKg4ClsiKj6AOv3sAAoHBffgMgw082.png
~~~
訪問地址為就是nginx所在服務器地址+storage配置的http端口+上傳文件返回的一串字符串,如:
http://192.168.56.10:8888/group1/M00/00/00/wKg4ClsiKj6AOv3sAAoHBffgMgw082.png

## 2. 集群搭建
在上邊講述了如何搭建了只有一個tracker server、storage server,接下來說明如何配置集群
### 2.1 tracker集群
將tracker部署為多節點集群模式:
1.安裝tracker
按照1.1~1.2.1步驟執行
2.修改client、storage配置
~~~
# 修改client端配置,加入tracker
vim /etc/fdfs/client.conf
tracker_server=tracker1_ip:22122 # 有幾個tracker就添加幾個這個配置
tracker_server=tracker2_ip:22122
# 修改nginx整合模塊配置
vim /etc/fdfs/mod_fastdfs.conf
tracker_server=tracker1_ip:22122 # 有幾個tracker就添加幾個這個配置
tracker_server=tracker2_ip:22122
# 修改storage配置
vim /etc/fdfs/storage.conf
tracker_server=tracker2_ip:22122 # 有幾個tracker就添加幾個這個配置
tracker_server=tracker2_ip:22122
~~~
重啟storage,不建議用restart
~~~
service storage stop
service storage start
~~~
執行命令`/usr/bin/fdfs_monitor /etc/fdfs/storage.conf`查看是否成功,如下圖現在tracker server數量為2兩個

### 2.2 storage集群
#### 2.2.1 多volume/group
1.搭建多group
執行1.1~1.2,此時只要group_name配置不同即為不同的組,如下是兩個分組的配置。如果想在一個group下配置多個storage的話,指定相同的group_name即可。
group1的storage.conf
~~~
group_name=group1
bind_addr=192.168.56.10
base_path=/data/fastdfs/storage
store_path0=/data/fastdfs/storage
tracker_server=192.168.56.10:22122
tracker_server=192.168.56.11:22122
http.server_port=8888
~~~
group2的storage.conf
~~~
group_name=group2
bind_addr=bind_addr=192.168.56.11
base_path=/data/fastdfs/storage
store_path0=/data/fastdfs/storage
tracker_server=192.168.56.10:22122
tracker_server=192.168.56.11:22122
http.server_port=8888
~~~
在任意的服務器上執行命令執行命令`/usr/bin/fdfs_monitor /etc/fdfs/storage.conf`,如下如現在tracker數量為2個,group數量為2個。

此時,默認fastdfs會以load balance(負載均衡)的方式,即挑選資源較為富足的group進行文件上傳。
~~~
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeX-AJvj9AAoHBffgMgw417.png
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeZWADUQ8AAoHBffgMgw073.png
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeZaABSmhAAoHBffgMgw325.png
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeZeADGZmAAoHBffgMgw797.png
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeZiAO3rNAAoHBffgMgw093.png
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeZiAVjmdAAoHBffgMgw961.png
root@ubuntu01:~# fdfs_upload_file /etc/fdfs/client.conf ./2.png
group2/M00/00/00/wKg4C1soeZmAExMRAAoHBffgMgw515.png
~~~
因為group2的資源比group1要充足,所以都文件上傳到了group2,fastdfs提供了文件上傳負載策略一共有三種
> 1. round robin:
> 以輪詢的方式依次的向各個group存儲文件,對應配置值0
> 2. specify group:
> 指定某一group存儲文件,對應配置值1,此時需要配合配置store_group=group_name來指定特定的組
> 3. load balance:
> 選擇資源充足的組來存儲文件,為FastDFS默認配置
>
- Docker
- 什么是docker
- Docker安裝、組件啟動
- docker網絡
- docker命令
- docker swarm
- dockerfile
- mesos
- 運維
- Linux
- Linux基礎
- Linux常用命令_1
- Linux常用命令_2
- ip命令
- 什么是Linux
- SELinux
- Linux GCC編譯警告:Clock skew detected. 錯誤解決辦法
- 文件描述符
- find
- 資源統計
- LVM
- Linux相關配置
- 服務自啟動
- 服務器安全
- 字符集
- shell腳本
- shell命令
- 實用腳本
- shell 數組
- 循環與判斷
- 系統級別進程開啟和停止
- 函數
- java調用shell腳本
- 發送郵件
- Linux網絡配置
- Ubuntu
- Ubuntu發送郵件
- 更換apt-get源
- centos
- 防火墻
- 虛擬機下配置網絡
- yum重新安裝
- 安裝mysql5.7
- 配置本地yum源
- 安裝telnet
- 忘記root密碼
- rsync+ crontab
- Zabbix
- Zabbix監控
- Zabbix安裝
- 自動報警
- 自動發現主機
- 監控MySQL
- 安裝PHP常見錯誤
- 基于nginx安裝zabbix
- 監控Tomcat
- 監控redis
- web監控
- 監控進程和端口號
- zabbix自定義監控
- 觸發器函數
- zabbix監控mysql主從同步狀態
- Jenkins
- 安裝Jenkins
- jenkins+svn+maven
- jenkins執行shell腳本
- 參數化構建
- maven區分環境打包
- jenkins使用注意事項
- nginx
- nginx認證功能
- ubuntu下編譯安裝Nginx
- 編譯安裝
- Nginx搭建本地yum源
- 文件共享
- Haproxy
- 初識Haproxy
- haproxy安裝
- haproxy配置
- virtualbox
- virtualbox 復制新的虛擬機
- ubuntu下vitrualbox安裝redhat
- centos配置雙網卡
- 配置存儲
- Windows
- Windows安裝curl
- VMware vSphere
- 磁盤管理
- 增加磁盤
- gitlab
- 安裝
- tomcat
- Squid
- bigdata
- FastDFS
- FastFDS基礎
- FastFDS安裝及簡單實用
- api介紹
- 數據存儲
- FastDFS防盜鏈
- python腳本
- ELK
- logstash
- 安裝使用
- kibana
- 安準配置
- elasticsearch
- elasticsearch基礎_1
- elasticsearch基礎_2
- 安裝
- 操作
- java api
- 中文分詞器
- term vector
- 并發控制
- 對text字段排序
- 倒排和正排索引
- 自定義分詞器
- 自定義dynamic策略
- 進階練習
- 共享鎖和排它鎖
- nested object
- 父子關系模型
- 高亮
- 搜索提示
- Redis
- redis部署
- redis基礎
- redis運維
- redis-cluster的使用
- redis哨兵
- redis腳本備份還原
- rabbitMQ
- rabbitMQ安裝使用
- rpc
- RocketMQ
- 架構概念
- 安裝
- 實例
- 好文引用
- 知乎
- ACK
- postgresql
- 存儲過程
- 編程語言
- 計算機網絡
- 基礎_01
- tcp/ip
- http轉https
- Let's Encrypt免費ssl證書(基于haproxy負載)
- what's the http?
- 網關
- 網絡IO
- http
- 無狀態網絡協議
- Python
- python基礎
- 基礎數據類型
- String
- List
- 遍歷
- Python基礎_01
- python基礎_02
- python基礎03
- python基礎_04
- python基礎_05
- 函數
- 網絡編程
- 系統編程
- 類
- Python正則表達式
- pymysql
- java調用python腳本
- python操作fastdfs
- 模塊導入和sys.path
- 編碼
- 安裝pip
- python進階
- python之setup.py構建工具
- 模塊動態導入
- 內置函數
- 內置變量
- path
- python模塊
- 內置模塊_01
- 內置模塊_02
- log模塊
- collections
- Twisted
- Twisted基礎
- 異步編程初探與reactor模式
- yield-inlineCallbacks
- 系統編程
- 爬蟲
- urllib
- xpath
- scrapy
- 爬蟲基礎
- 爬蟲種類
- 入門基礎
- Rules
- 反反爬蟲策略
- 模擬登陸
- problem
- 分布式爬蟲
- 快代理整站爬取
- 與es整合
- 爬取APP數據
- 爬蟲部署
- collection for ban of web
- crawlstyle
- API
- 多次請求
- 向調度器發送請求
- 源碼學習
- LinkExtractor源碼分析
- 構建工具-setup.py
- selenium
- 基礎01
- 與scrapy整合
- Django
- Django開發入門
- Django與MySQL
- java
- 設計模式
- 單例模式
- 工廠模式
- java基礎
- java位移
- java反射
- base64
- java內部類
- java高級
- 多線程
- springmvc-restful
- pfx數字證書
- 生成二維碼
- 項目中使用log4j
- 自定義注解
- java發送post請求
- Date時間操作
- spring
- 基礎
- spring事務控制
- springMVC
- 注解
- 參數綁定
- springmvc+spring+mybatis+dubbo
- MVC模型
- SpringBoot
- java配置入門
- SpringBoot基礎入門
- SpringBoot web
- 整合
- SpringBoot注解
- shiro權限控制
- CommandLineRunner
- mybatis
- 靜態資源
- SSM整合
- Aware
- Spring API使用
- Aware接口
- mybatis
- 入門
- mybatis屬性自動映射、掃描
- 問題
- @Param 注解在Mybatis中的使用 以及傳遞參數的三種方式
- mybatis-SQL
- 逆向生成dao、model層代碼
- 反向工程中Example的使用
- 自增id回顯
- SqlSessionDaoSupport
- invalid bound statement(not found)
- 脈絡
- beetl
- beetl是什么
- 與SpringBoot整合
- shiro
- 什么是shiro
- springboot+shrio+mybatis
- 攔截url
- 枚舉
- 圖片操作
- restful
- java項目中日志處理
- JSON
- 文件工具類
- KeyTool生成證書
- 兼容性問題
- 開發規范
- 工具類開發規范
- 壓縮圖片
- 異常處理
- web
- JavaScript
- 基礎語法
- 創建對象
- BOM
- window對象
- DOM
- 閉包
- form提交-文件上傳
- td中內容過長
- 問題1
- js高級
- js文件操作
- 函數_01
- session
- jQuery
- 函數01
- data()
- siblings
- index()與eq()
- select2
- 動態樣式
- bootstrap
- 表單驗證
- 表格
- MUI
- HTML
- iframe
- label標簽
- 規范編程
- layer
- sss
- 微信小程序
- 基礎知識
- 實踐
- 自定義組件
- 修改自定義組件的樣式
- 基礎概念
- appid
- 跳轉
- 小程序發送ajax
- 微信小程序上下拉刷新
- if
- 工具
- idea
- Git
- maven
- svn
- Netty
- 基礎概念
- Handler
- SimpleChannelInboundHandler 與 ChannelInboundHandler
- 網絡編程
- 網絡I/O
- database
- oracle
- 游標
- PLSQL Developer
- mysql
- MySQL基準測試
- mysql備份
- mysql主從不同步
- mysql安裝
- mysql函數大全
- SQL語句
- 修改配置
- 關鍵字
- 主從搭建
- centos下用rpm包安裝mysql
- 常用sql
- information_scheme數據庫
- 值得學的博客
- mysql學習
- 運維
- mysql權限
- 配置信息
- 好文mark
- jsp
- jsp EL表達式
- C
- test