我們上一篇文章說(shuō)到了性能測(cè)試負(fù)載模型落地時(shí)的建模方法，這里我們先就第一種也是最常用的一種方法說(shuō)起：
業(yè)務(wù)場(chǎng)景建模主要就是說(shuō)明用戶(hù)如何使用系統(tǒng)，因此根據(jù)系統(tǒng)使用的原始數(shù)據(jù)也就是日志進(jìn)行分析建模是最有效最準(zhǔn)確的方法。所謂日志就是指用戶(hù)操作系統(tǒng)的痕跡，根據(jù)記錄信息時(shí)的不同視角，一般分為兩類(lèi)：一類(lèi)視角是基于用戶(hù)，我們稱(chēng)之為操作日志，這類(lèi)日志主要以用戶(hù)為觀察實(shí)體，記錄用戶(hù)從登錄系統(tǒng)到離開(kāi)系統(tǒng)的每一個(gè)動(dòng)作；另一類(lèi)視角基于系統(tǒng)，我們稱(chēng)之為訪(fǎng)問(wèn)日志，這類(lèi)日志主要為應(yīng)用系統(tǒng)為觀察實(shí)體，記錄系統(tǒng)的輸入輸出。輸入就是每一個(gè)接收到的請(qǐng)求信息，輸出就是該請(qǐng)求的響應(yīng)狀態(tài)。
基于操作日志對(duì)應(yīng)于我們之前提出的模型的概念，當(dāng)我們關(guān)注的負(fù)載主要是用戶(hù)量、業(yè)務(wù)量這類(lèi)數(shù)據(jù)時(shí)，我們通常使用操作日志來(lái)進(jìn)行分析。
這類(lèi)日志信息一般都存儲(chǔ)于系統(tǒng)的物理表中，因此大都可以通過(guò)統(tǒng)計(jì)SQL來(lái)進(jìn)行分析，例如公司內(nèi)的各個(gè)產(chǎn)品線(xiàn)，都可以使用我們自己開(kāi)發(fā)的UMT小工具直接將建模需要的關(guān)鍵信息統(tǒng)計(jì)出來(lái)。對(duì)于公司外的產(chǎn)品，該方法同樣適用，因?yàn)槿魏我粋€(gè)產(chǎn)品的日志信息都至少包括4W1H，也就是什么用戶(hù)（WHO）在什么時(shí)間（WHEN）由哪臺(tái)機(jī)器（WHERE）通過(guò)訪(fǎng)問(wèn)哪個(gè)功能(WHICH)做了什么事（HOW），針對(duì)每一個(gè)W或者組合進(jìn)行統(tǒng)計(jì)，就大致可以得出我們前面所說(shuō)的要獲取的三要素信息。
該分析方法的缺點(diǎn)就在于：對(duì)于還原用戶(hù)使用模型的準(zhǔn)確度來(lái)說(shuō)，主要依賴(lài)于系統(tǒng)操作日志記錄是否完整準(zhǔn)備。
基于訪(fǎng)問(wèn)日志當(dāng)我們關(guān)注的負(fù)載主要是PV、吞吐量這類(lèi)數(shù)據(jù)時(shí)，通常是針對(duì)訪(fǎng)問(wèn)日志來(lái)進(jìn)行分析，這類(lèi)日志一般都是在中間件或WEB服務(wù)器的日志文件中存儲(chǔ)。
這類(lèi)日志記錄的數(shù)據(jù)一般都是規(guī)則的數(shù)據(jù)，所以可以很方便的使用正則對(duì)數(shù)據(jù)整理后進(jìn)行統(tǒng)計(jì)，對(duì)于臨時(shí)統(tǒng)計(jì)一下數(shù)據(jù)，可以使用類(lèi)似log analyzer這類(lèi)的工具統(tǒng)計(jì)，這類(lèi)開(kāi)源的小工具有很多，基本原理都是一樣的；而對(duì)于一些需要長(zhǎng)期觀察的系統(tǒng)，建議的方式是根據(jù)日志文件中的字段建立一張物理表，通過(guò)shell腳本將日志文件中日志記錄整理后不斷寫(xiě)入到物理表中，然后在物理表中再進(jìn)行分析，分析方法基本也是4W1H原則。
該分析場(chǎng)景的準(zhǔn)確度高，但由于日志是基于http請(qǐng)求記錄的信息。因此，要建立實(shí)用度高的分析模型，需要對(duì)系統(tǒng)的各個(gè)頁(yè)面和功能足夠熟悉，并且要建立準(zhǔn)備完備的元數(shù)據(jù)來(lái)建立頁(yè)面和功能的映射。
重慶分公司
重慶分公司
