測試平臺和測試方法

　　我們在上述配置的服務(wù)器上分別安裝了Microsoft Windows 2003 Enterprise Server R2 5.02.3790 (Service Pack 1)，正確安裝了各個(gè)硬件的驅(qū)動(dòng)程序，確保服務(wù)器工作在最佳的狀態(tài)。

　　我們所使用的評測項(xiàng)目如下：

• SPECCPU2000 v1.2

　　SPEC是標(biāo)準(zhǔn)性能評估公司（Standard Performance Evaluation Corporation）的簡稱。SPEC是由計(jì)算機(jī)廠商、系統(tǒng)集成商、大學(xué)、研究機(jī)構(gòu)、咨詢等多家公司組成的非營利性組織，這個(gè)組織的目標(biāo)是建立、維護(hù)一套用于評估計(jì)算機(jī)系統(tǒng)的標(biāo)準(zhǔn)。

　　SPEC CPU2000是SPEC組織推出的一套CPU子系統(tǒng)評估軟件，它包括CINT2000和CFP2000兩個(gè)子項(xiàng)目，前者用于測量和對比整數(shù)性能，而后者則用于測量和對比浮點(diǎn)性能。計(jì)算系統(tǒng)中的處理器、內(nèi)存和編譯器都會(huì)影響最終的測試性能，而I/O（磁盤）、網(wǎng)絡(luò)、操作系統(tǒng)和圖形子系統(tǒng)對于SPEC CPU2000的影響非常的小。

　　SPECfp測試過程中同時(shí)執(zhí)行多個(gè)實(shí)例（instance），測量系統(tǒng)執(zhí)行計(jì)算密集型浮點(diǎn)操作的能力，比如CAD/CAM、DCC以及科學(xué)計(jì)算等方面應(yīng)用可以參考這個(gè)結(jié)果。SPECint測試過程中同時(shí)執(zhí)行多個(gè)實(shí)例（instances），然后測試系統(tǒng)同時(shí)執(zhí)行多個(gè)計(jì)算密集型整數(shù)操作的能力，可以很好的反映諸如數(shù)據(jù)庫服務(wù)器、電子郵件服務(wù)器和Web服務(wù)器等基于整數(shù)應(yīng)用的多處理器系統(tǒng)的性能。

　　我們在被測服務(wù)器中安裝了Intel C++ 8.1 Compiler、Intel Fortran 8.1 Compiler這兩款SPEC CPU2000必需的編譯器，另外安裝了Microsoft Visual Studio 2003.net提供必要的庫文件。按照SPEC的要求我們根據(jù)自己的情況編輯了新的Config文件，可以滿足Base測試。然后我們根據(jù)被測系統(tǒng)實(shí)際可同時(shí)處理的線程數(shù)量，設(shè)定用戶數(shù)量，分別運(yùn)行SPEC base和SPEC rate base測試的結(jié)果（其中SPEC base代表系統(tǒng)執(zhí)行某個(gè)任務(wù)的速度，而SPEC base rate測試代表系統(tǒng)可以同時(shí)處理任務(wù)的能力）。

• ScienceMark v2.0 Membench

　　ScienceMark v2.0是一款用于測試系統(tǒng)特別是處理器在科學(xué)計(jì)算應(yīng)用中的性能的軟件，MemBenchmark是其中針對處理器緩存、系統(tǒng)內(nèi)存而設(shè)計(jì)的功能模塊，它可以測試系統(tǒng)內(nèi)存帶寬、L1 Cache延遲、L2 Cache延遲和系統(tǒng)內(nèi)存延遲，另外還可以測試不同指令集的性能差異。

• IOMeter 2004.7.30

　　IOMeter是一款功能非常強(qiáng)大的IO測試軟件，它除了可以在本機(jī)運(yùn)行測試本機(jī)的IO（磁盤）性能之外，還提供了模擬網(wǎng)絡(luò)應(yīng)用的能力。在這次的測試中，我們僅僅讓它在本機(jī)運(yùn)行測試服務(wù)器的磁盤性能。為了全面測試被測服務(wù)器的IO性能，我們分別選擇了不同的測試腳本。

• Max_throughput（read）：文件尺寸為64KB，100%讀取操作，隨機(jī)率為0%，用于檢測磁盤系統(tǒng)的最大讀取吞吐量

• Max_IO（read）：文件尺寸為512B，100%讀取操作，隨機(jī)率為0%，用于檢測磁盤系統(tǒng)的最大讀取操作IO處理能力

• Max_throughput（write）：文件尺寸為64KB，0%讀取操作，隨機(jī)率為0%，用于檢測磁盤系統(tǒng)的最大寫入吞吐量

• Max_IO（write）：文件尺寸為512B，0%讀取操作，隨機(jī)率為0%，用于檢測磁盤系統(tǒng)的最大寫入操作IO處理能力

• SiSoftware.Sandra.SP1 v2007

　　SiSoftware Sandra是一款可運(yùn)行在32bit和64bit Windows操作系統(tǒng)上的分析軟件，這款軟件可以對于系統(tǒng)進(jìn)行方便、快捷的基準(zhǔn)測試，還可以用于查看系統(tǒng)的軟件、硬件等信息。今年該軟件推出了2007版，該版本新增了4項(xiàng)基準(zhǔn)測試，包括Power Management Efficiency、Memory Latency、Physical Disks和CD-ROM and DVD這四個(gè)項(xiàng)目。另外，它還對于原有的幾個(gè)基準(zhǔn)測試模塊進(jìn)行升級，比如在Arithmetic benchmarks中增加了對SSE3 & SSE4 SSE4的支持，在Multi-Media benchmark中增加了對于SSE4的支持，另外還升級了File System benchmark和Removable Storage benchmark兩個(gè)子項(xiàng)目。對于新的硬件的支持當(dāng)然也是該軟件每次升級的重要內(nèi)容之一。SiSoftware Sandra所有的基準(zhǔn)測試都針對SMP和SMT進(jìn)行了優(yōu)化，最高可支持32/64路平臺，這也是我們選擇這款軟件的原因之一。

• WebBench v5.0

　　WebBench是針對服務(wù)器作為Web Server時(shí)的性能進(jìn)行測試，我們在被測服務(wù)器上安裝了IIS6.0組件，以提供測試所需的Web服務(wù)。在測試中我們開啟了網(wǎng)絡(luò)實(shí)驗(yàn)室中的56臺客戶端，分別使用了WebBench 5.0內(nèi)置的動(dòng)態(tài)CGI以及靜態(tài)頁面腳本對服務(wù)器進(jìn)行了測試。

　　靜態(tài)測試是由客戶端讀取預(yù)先放置在服務(wù)器Web Server下的Web頁面（wbtree），這項(xiàng)測試主要考察的是服務(wù)器磁盤系統(tǒng)以及網(wǎng)絡(luò)連接性能。我們使用了實(shí)驗(yàn)室中的56臺客戶端，配合Static_mt.tst多線程靜態(tài)腳本測試向被測服務(wù)器發(fā)送請求。

　　動(dòng)態(tài)測試偏重于對服務(wù)器CPU子系統(tǒng)的性能測試，它對于Web服務(wù)器提供了足夠的負(fù)載。我們將一個(gè)C語言編寫的CGI源文件Simcigi.c編譯為Simcgi.exe，并將其作為動(dòng)態(tài)測試中的CGI腳本。在測試過程中，每臺安裝了WebBench客戶端軟件的PC，會(huì)在300秒的時(shí)間內(nèi)持續(xù)向服務(wù)器發(fā)送CGI請求，而控制臺會(huì)紀(jì)錄并匯總服務(wù)器所響應(yīng)CGI請求的數(shù)據(jù)。CGI測試的成績高低，主要取決于服務(wù)器處理器子系統(tǒng)性能的優(yōu)劣。處理器子系統(tǒng)包括CPU、內(nèi)存以及內(nèi)存控制器，CPU頻率、緩存以及內(nèi)存容量大小和內(nèi)存帶寬，都會(huì)影響該項(xiàng)成績。

• NetBench v7.03

　　NetBench是針對文件服務(wù)器的性能測試軟件，影響NetBench性能的主要是服務(wù)器的磁盤子系統(tǒng)，服務(wù)器磁盤控制器、條帶大小、讀寫緩存、硬盤類型、組建磁盤陣列模式、內(nèi)存容量、網(wǎng)絡(luò)拓樸結(jié)構(gòu)等都會(huì)對測試結(jié)果有明顯的影響。我們在被測服務(wù)器上設(shè)立了文件服務(wù)器，NetBench通過網(wǎng)絡(luò)實(shí)驗(yàn)室中60個(gè)客戶端來模擬網(wǎng)絡(luò)中的PC向文件服務(wù)器所發(fā)出的文件傳輸請求，文件服務(wù)器則將存儲(chǔ)在磁盤上的文件數(shù)據(jù)發(fā)送給相應(yīng)的客戶端。在測試過程中，客戶端會(huì)以每四臺一組的步進(jìn)依次增加并且向服務(wù)器發(fā)送文件傳輸請求，測試結(jié)束后控制臺收集數(shù)據(jù)并繪制出服務(wù)器的數(shù)據(jù)傳輸變化曲線。

• Benchmarkfactory 4.6

　　大部分的服務(wù)器應(yīng)用都同數(shù)據(jù)庫有著密切的聯(lián)系，因此我們今年開始著手在在服務(wù)器測試中加入對于數(shù)據(jù)庫性能的測試。我們選擇了Benchmark Factory 4.6軟件和Microsoft SQL2000 SP4來測試不同的硬件平臺在數(shù)據(jù)庫應(yīng)用中的表現(xiàn)。

　　我們選擇了BF內(nèi)置的標(biāo)準(zhǔn)測試腳本AS3AP，這項(xiàng)測試可用于對于ANSI結(jié)構(gòu)化查詢語言（SQL）關(guān)系型數(shù)據(jù)庫進(jìn)行測試，它可用于測試DBMS（單用戶微機(jī)數(shù)據(jù)庫管理系統(tǒng)），也可用于測試高性能并行或者分布式數(shù)據(jù)庫。

• 系統(tǒng)功耗監(jiān)測

　　我們使用UNI-T UT71E智能數(shù)字萬用表對于被測服務(wù)器系統(tǒng)的整體功耗進(jìn)行了監(jiān)測，利用隨機(jī)附帶的接口程序，我們可以記錄被測服務(wù)器任意時(shí)間段內(nèi)的功率變化。

上一頁  [1] [2] [3] [4] [5] [6] [7] [8] [9] 下一頁