筆者最近在工作中需要測(cè)試ceph的rgw，于是邊測(cè)試邊學(xué)習(xí)。
首先工具采用的intel的一個(gè)開(kāi)源工具cosbench，這也是業(yè)界主流的對(duì)象存儲(chǔ)測(cè)試工具。

1、cosbench的安裝，啟動(dòng)
下載最新的cosbench包
wget https://github.com/intel-cloud/cosbench/releases/download/v0.4.2.c4/0.4.2.c4.zip
解壓
unzip 0.4.2.c4.zip

安裝相關(guān)工具包
yum install java-1.7.0-openjdk nmap-ncat

給所有的sh腳本加執(zhí)行權(quán)限
chmod +x *.sh

取消http代理
unset http_proxy

如果是controller節(jié)點(diǎn)，執(zhí)行start-all.sh
如果是driver節(jié)點(diǎn)，執(zhí)行start-driver.sh
我的環(huán)境里面是1個(gè)controller+3個(gè)driver，controller和其中1個(gè)driver共用一個(gè)節(jié)點(diǎn)
修改conf/controller.conf

修改各個(gè)節(jié)點(diǎn)的conf/driver.conf

controller 執(zhí)行start-all.sh

driver節(jié)點(diǎn)執(zhí)行start-driver.sh

http://controllerip:19088/controller/
登陸controller web頁(yè)面

3個(gè)driver節(jié)點(diǎn)都o(jì)k

2、在conf目錄下有各個(gè)配置文件

3、ceph的對(duì)象存儲(chǔ)支持S3和swift兩種接口，本篇先討論S3
測(cè)試S3， 可以根據(jù)s3-config-sample.xml修改

-----認(rèn)證信息 accesskey secretkey endpoiont 去自己的ceph環(huán)境中獲取

----init階段，主要是創(chuàng)建bucket，上述配置為創(chuàng)建s3testqwer為前綴的32個(gè)bucket



----prepare階段，主要是創(chuàng)建bucket里面的object，上述為在每個(gè)bucket創(chuàng)建64k的object 100個(gè)，64k可配范圍，預(yù)先創(chuàng)建好數(shù)據(jù)庫(kù)可以供下面的讀測(cè)試使用






----main，執(zhí)行階段，ratio是執(zhí)行百分比，workers是并發(fā)數(shù)，runtime是執(zhí)行時(shí)間



----cleanup，清理object



-----dispose，清理bucket

同一個(gè)workstage里面的work是并發(fā)執(zhí)行的，比如你有多個(gè)driver，就會(huì)分配到多個(gè)driver去執(zhí)行，每一個(gè)work里面的worker又是并發(fā)，worker也是負(fù)載到多個(gè)driver去的，多個(gè)workstage是順序執(zhí)行

導(dǎo)入寫(xiě)好的workstage腳本

然后submit

依次執(zhí)行init-prepare-main-cleanup-dispose

執(zhí)行結(jié)果

上圖中各個(gè)類(lèi)別說(shuō)明：
Op-type - 操作類(lèi)型
Op-Count - 操作總數(shù)
Byte-Count - byte總數(shù)
Avg-ResTime - 響應(yīng)時(shí)間，是數(shù)據(jù)傳輸時(shí)間和處理時(shí)間的總和
Avg-ProceTime - 讀寫(xiě)操作的時(shí)間
Throughput - 吞吐量，每秒操作數(shù)
Bandwidth - 帶寬
Succ-Ratio - 操作的成功率

圖標(biāo)可以看整個(gè)數(shù)據(jù)的波動(dòng) 整體還算平穩(wěn)

有33條錯(cuò)誤

可以在cosbench的log目錄下找到錯(cuò)誤log

查看對(duì)應(yīng)mission的log

這是java啟動(dòng)的一個(gè)錯(cuò)誤：
1、stop-all.sh 停止 cosbench 進(jìn)程(controller, drivers)
2、編輯 cosbench-start.sh 文件,找到j(luò)ava啟動(dòng)命令行參數(shù), 增加"-Dcom.amazonaws.services.s3.disableGetObjectMD5Validation=true" 關(guān)閉S3的MD5校驗(yàn)功能
3、start-all.sh 啟動(dòng)

修改后再次執(zhí)行workload，不再報(bào)錯(cuò)，可以根據(jù)自己的配置調(diào)整腳本，比如只想測(cè)試write并且又想保留數(shù)據(jù)，就可以不寫(xiě)cleanup和dispose，當(dāng)然也可以自定義work

附加一個(gè)swift接口測(cè)試的xml

另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)cdcxhl.cn，海內(nèi)外云服務(wù)器15元起步，三天無(wú)理由+7*72小時(shí)售后在線，公司持有idc許可證，提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國(guó)服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案，具有“安全穩(wěn)定、簡(jiǎn)單易用、服務(wù)可用性高、性?xún)r(jià)比高”等特點(diǎn)與優(yōu)勢(shì)，專(zhuān)為企業(yè)上云打造定制，能夠滿足用戶(hù)豐富、多元化的應(yīng)用場(chǎng)景需求。