簡(jiǎn)介
成都創(chuàng)新互聯(lián)專(zhuān)注于臨安企業(yè)網(wǎng)站建設(shè),響應(yīng)式網(wǎng)站開(kāi)發(fā),電子商務(wù)商城網(wǎng)站建設(shè)。臨安網(wǎng)站建設(shè)公司,為臨安等地區(qū)提供建站服務(wù)。全流程按需網(wǎng)站開(kāi)發(fā),專(zhuān)業(yè)設(shè)計(jì),全程項(xiàng)目跟蹤,成都創(chuàng)新互聯(lián)專(zhuān)業(yè)和態(tài)度為您提供的服務(wù)
FastDFS是一款類(lèi)Google FS的開(kāi)源分布式文件系統(tǒng),它用純C語(yǔ)言實(shí)現(xiàn),支持Linux、FreeBSD、AIX等UNIX系統(tǒng)。它只能通過(guò)專(zhuān)有API對(duì)文件進(jìn)行存取訪問(wèn),不支持POSIX接口方式,不能mount使用。準(zhǔn)確地講,Google FS以及FastDFS、mogileFS、HDFS、TFS等類(lèi)Google FS都不是系統(tǒng)級(jí)的分布式文件系統(tǒng),而是應(yīng)用級(jí)的分布式文件存儲(chǔ)服務(wù)。
FastDFS集群中的Tracker server也可以有多臺(tái),Tracker server和Storage server均不存在單點(diǎn)問(wèn)題。Tracker server之間是對(duì)等關(guān)系,組內(nèi)的Storage server之間也是對(duì)等關(guān)系。傳統(tǒng)的Master-Slave結(jié)構(gòu)中的Master是單點(diǎn),寫(xiě)操作僅針對(duì)Master。如果Master失效,需要將Slave提升為Master,實(shí)現(xiàn)邏輯會(huì)比較復(fù)雜。和Master-Slave結(jié)構(gòu)相比,對(duì)等結(jié)構(gòu)中所有結(jié)點(diǎn)的地位是相同的,每個(gè)結(jié)點(diǎn)都是Master,不存在單點(diǎn)問(wèn)題。
一、環(huán)境準(zhǔn)備
centos7-1 : tracker 192.168.142.66
centos7-2 : storage+nginx 192.168.142.77
二、開(kāi)始安裝
(1)安裝libfastcommon服務(wù)(所有節(jié)點(diǎn)均進(jìn)行安裝)
安裝基礎(chǔ)環(huán)境包
yum -y install libevent libevent-devel perl make gcc zlib zlib-devel pcre pcre-devel gcc-c++ openssl-devel
安裝libfastcommon[root@storage ~]# wget https://github.com/happyfish200/libfastcommon/archive/V1.0.38.tar.gz
[root@storage ~]# tar zxf V1.0.38.tar.gz -C /opt/
[root@storage ~]# cd /opt/libfastcommon-1.0.38/
編譯并建立軟鏈接以方便系統(tǒng)識(shí)別[root@storage libfastcommon-1.0.38]# ./make.sh && ./make.sh install
[root@storage libfastcommon-1.0.38]# ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so
[root@storage libfastcommon-1.0.38]# ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so
[root@storage libfastcommon-1.0.38]# ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so~~
(2)安裝FastDFS服務(wù)(所有節(jié)點(diǎn)均進(jìn)行安裝)
下載安裝
[root@storage ~]# wget https://github.com/happyfish200/fastdfs/archive/V5.11.tar.gz
[root@storage ~]# tar zxf V5.11.tar.gz -C /opt/
[root@storage ~]# cd /opt/fastdfs-5.11/
編譯[root@storage fastdfs-5.11]# ./make.sh && ./make.sh install
將模板文件進(jìn)行更改[root@storage fastdfs-5.11]# cd /etc/fdfs/ //配置文件模板路徑
[root@storage fdfs]# cp tracker.conf.sample tracker.conf
[root@storage fdfs]# cp storage.conf.sample storage.conf
[root@storage fdfs]# cp client.conf.sample client.conf
3)tracker監(jiān)控端配置
建立數(shù)據(jù)文件、日志文件存放目錄
mkdir -m 755 -p /opt/fastdfs
修改tracker配置文件[root@tracker ~]# vim /etc/fdfs/tracker.conf
#修改以下配置
port=22122 //tracker服務(wù)默認(rèn)端口22122即可
base_path=/opt/fastdfs //tracker存儲(chǔ)data和log的跟路徑,必須提前創(chuàng)建好
http.server_port=8080 //tracker服務(wù)器上啟動(dòng)http服務(wù)進(jìn)程,沒(méi)裝忽略
開(kāi)啟服務(wù)[root@tracker ~]# fdfs_trackerd /etc/fdfs/tracker.conf start
[root@tracker ~]# netstat -atnp | grep 22122
tcp 0 0 0.0.0.0:22122 0.0.0.0:* LISTEN 43776/fdfs_trackerd[root@tracker ~]# systemctl stop firewalld
[root@tracker ~]# setenforce 0
(4)storage服務(wù)端修改
建立數(shù)據(jù)文件、日志文件存放目錄
mkdir -m 755 -p /opt/fastdfs
修改storage配置文件[root@storage ~]# vim /etc/fdfs/storage.conf
#修改以下配置
group_name=group1 //默認(rèn)組名,根據(jù)實(shí)際情況修改
port=23000 //storge默認(rèn)23000,同一個(gè)組的storage端口號(hào)必須一致
base_path=/opt/fastdfs //storage日志文件的根路徑
store_path_count=1 //與下徑個(gè)數(shù)相同,默認(rèn)為1
store_path0=/opt/fastdfs //提供的存儲(chǔ)路徑(默認(rèn)與日志文件存放在一起)
tracker_server=192.168.142.66:22122 //自己的tracker服務(wù)器IP(重點(diǎn)?。。。?br/>http.server_port=80 //http訪問(wèn)文件的端口默認(rèn)為8888,nginx中配置的監(jiān)聽(tīng)端口保持一致
開(kāi)啟服務(wù)#開(kāi)啟服務(wù)(命令支持start|stop|restart)
[root@storage ~]# fdfs_storaged /etc/fdfs/storage.conf start
[root@storage ~]# netstat -atnp | grep 23000
tcp 0 0 0.0.0.0:23000 0.0.0.0:* LISTEN 40430/fdfs_storaged[root@storage ~]# systemctl stop firewalld
[root@storage ~]# setenforce 0
檢查是否與tracker監(jiān)控端關(guān)聯(lián)成功[root@storage ~]# fdfs_monitor /etc/fdfs/storage.conf
Storage 1:
id = 192.168.142.77
ip_addr = 192.168.142.77 (storage) ACTIVE
http domain =
......省略
(5)安裝nginx服務(wù)(storage:192.168.142.77)
這里為了減少虛擬機(jī)開(kāi)啟的數(shù)量,就在storage端進(jìn)行nginx的安裝
安裝nginx及其組件
[root@storage ~]# tar zxf nginx-1.12.0.tar.gz -C /opt/
#下載fastdfs-nginx-module安裝包
[root@storage ~]# wget https://github.com/happyfish200/fastdfs-nginx-module/archive/V1.20.tar.gz
[root@storage ~]# tar zxf V1.20.tar.gz -C /opt/
編譯&安裝[root@storage ~]# cd /opt/nginx-1.12.0
[root@storage nginx-1.12.0]# ./configure \
--prefix=/usr/local/nginx \
--add-module=/opt/fastdfs-nginx-module-1.20/src/ //fastdfs-nginx-module模塊
[root@storage nginx-1.12.0]# make && make install
注意可能的報(bào)錯(cuò):
/usr/include/fastdfs/fdfs_define.h:15:27: fatal error: common_define.h: No such file or directory解決方案:
修改fastdfs-nginx-module-1.20/src/config文件,然后重新配置、編譯及安裝
ngx_module_incs="/usr/include/fastdfs /usr/include/fastcommon/"
CORE_INCS="$CORE_INCS /usr/include/fastdfs /usr/include/fastcommon/"
配置fastdfs-nginx-module模塊[root@storage nginx-1.12.0]# cd fastdfs-nginx-module-1.20/src
[root@storage nginx-1.12.0]# cp mod_fastdfs.conf /etc/fdfs/ //移動(dòng)其配置文件至fdfs目錄下#修改fastdfs-nginx-module模塊配置文件mod-fasts.conf
[root@storage nginx-1.12.0]# cd /etc/fdfs
[root@storage fdfs]# vim mod_fastdfs.conf
#檢查一下配置
base_path=/opt/fastdfs //存放數(shù)據(jù)文件、日志的路徑
tracker_server=192.168.142.66:22122 //tracker端的地址(重點(diǎn)?。。。?br/>url_have_group_name = true //url是否包含group名稱(chēng)
storage_server_port=23000 //需要和storage配置的相同
store_path_count=1 //存儲(chǔ)路徑個(gè)數(shù),需要和store_path個(gè)數(shù)匹配
store_path0=/opt/fastdfs //文件存儲(chǔ)的位置
修改nginx配置文件[root@storage fdfs]# vim /usr/local/nginx/conf/nginx.conf
#空行處添加
location ~/M00 {
root /opt/fastdfs/data;
ngx_fastdfs_module;
}
拷貝fastdfs解壓目錄中的http.conf和mime.types#不做這步可能會(huì)導(dǎo)致報(bào)錯(cuò)
[root@storage fdfs]# cd /opt/fastdfs-5.11/conf/
[root@storage conf]# cp mime.types http.conf /etc/fdfs/
(6)修改client端(本次實(shí)驗(yàn)即為storage端)
修改配置文件
[root@storage ~]# vim /etc/fdfs/client.conf
#檢查以下配置
base_path=/opt/fastdfs //tracker服務(wù)器文件路徑
tracker_server=192.168.142.66:22122 //tracker服務(wù)器IP地址和端口號(hào)
http.tracker_server_port=8080 // tracker服務(wù)器的http端口號(hào),必須和tracker的設(shè)置
三、測(cè)驗(yàn)
上傳測(cè)試文件abc.txt
/usr/bin/fdfs_upload_file /etc/fdfs/client.conf abc.txt
下載文件abc.txt
/usr/bin/fdfs_download_file /etc/fdfs/client.conf group1/M00/00/00/wKiOTV354W2AIf7GAAAAEh4TEws726.txt abc.txt
刪除文件abc.txt
fdfs_delete_file /etc/fdfs/client.conf group1/M00/00/00/wKiOTV354W2AIf7GAAAAEh4TEws726.txt