Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft...

21
小型企業端點防護 效能評析 Windows 7 2011 7 文件: 小型企業防護效能評析 作者: M. BaquiranD. Wren 公司: PassMark Software 日期: 2011 7 27 報告: 3 版本: 1

Transcript of Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft...

Page 1: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

小型企業端點防護 效能評析

Windows 7

2011 年 7 月

文件: 小型企業防護效能評析 作者: M. Baquiran、D. Wren 公司: PassMark Software 日期: 2011 年 7 月 27 日 報告: 3 版本: 1

Page 2: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 2 頁 (共 21 頁) 報告 2 6 September 2011 年 8 月 15 日

目錄

目錄 .......................................................................................................................................................... 2

修訂記錄 ................................................................................................................................................... 3

參考資料 ................................................................................................................................................... 3

內容摘要 ................................................................................................................................................... 4

分數與排名 ............................................................................................................................................... 5

產品與版本 ............................................................................................................................................... 6

效能度量摘要 ............................................................................................................................................ 7

測試結果 ................................................................................................................................................... 9

效能評析 1 - WORD 文件啟動與開啟時間 (毫秒) ........................................................................................ 9

效能評析 2 - INTERNET EXPLORER 啟動時間 (毫秒) ........................................................................................ 9

效能評析 3 – 開機時間 (秒) ...................................................................................................................... 10

效能評析 4 – 隨選掃描時間 (秒) .............................................................................................................. 10

效能評析 5 - 排程掃描時間 (秒) ............................................................................................................... 11

效能評析 6 - CPU 使用率 - 掃描時間 (百分比) .......................................................................................... 11

效能評析 7 - 瀏覽時間 (秒) ....................................................................................................................... 12

效能評析 8 - 檔案複製、移動及刪除 (秒) ................................................................................................ 12

效能評析 9 - 檔案壓縮與解壓縮 (秒) ........................................................................................................ 13

效能評析 10 - 檔案寫入、開啟及關閉 (秒) .............................................................................................. 13

效能評析 11 - 記憶體使用量 - 系統閒置 (MB) .......................................................................................... 14

效能評析 12 - 記憶體使用量 - 掃描 (MB) ................................................................................................. 14

效能評析 13 - CPU 使用率 - 系統閒置 (百分比) ........................................................................................ 15

免責聲明與揭露 ...................................................................................................................................... 16

聯絡詳細資料 .......................................................................................................................................... 16

附錄 1 – 測試環境 ................................................................................................................................... 17

附錄 2 - 方法說明 .................................................................................................................................... 18

Page 3: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 3 頁 (共 21 頁) 報告 2 6 September 2011 年 8 月 15 日

修訂記錄 修訂 修訂記錄 日期

報告 3,版本 1

本報告初版。 2011 年 7 月 27 日

參考資料

參考編號 文件 作者 日期

1 拖慢 Windows 速度的真正原因 (URL) O. Warner,

The PC Spy 2001-2011

Page 4: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 4 頁 (共 21 頁) 報告 2 6 September 2011 年 8 月 15 日

主管摘要 PassMark Software® 於 2010 年 9 月到 2011 年 7 月之間,針對市面上四種小型企業端點防護產品與

Symantec Endpoint Protection 12 RTM 版於 Windows 7 上進行客觀的效能測試。本報告將討論這些效能

測試的結果。

受測的軟體產品如下:

• Symantec Endpoint Protection Small Business Edition;

• Microsoft Forefront Endpoint Protection 2010;

• Trend Micro Worry-Free Business Security;

• McAfee Total Protection for Endpoint Essentials;

• Kaspersky Business Space Security – Small Business;以及

• ESET NOD32 Antivirus。

我們使用十三種效能度量來評析上述產品,以評估端點或用戶端機器上的產品效能和系統影響。在測試

中使用的度量如下所示:

• Word 文件啟動與開啟時間;

• Internet Explorer 啟動時間;

• 開機時間;

• 隨選掃描時間;

• 排程掃描時間;

• 掃描期間的 CPU 使用率;

• 瀏覽時間;

• 檔案複製、移動及刪除;

• 檔案壓縮與解壓縮;

• 檔案寫入、開啟及關閉;

• 記憶體使用量 - 系統閒置;

• 記憶體使用量 - 掃描;以及

• 系統閒置期間的 CPU 使用率。

Page 5: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 5 頁 (共 21 頁) 報告 2 6 September 2011 年 8 月 15 日

分數與排名

PassMark Software 依產品在每項度量中的排名來為每個產品評分。每個產品的分數來自這六個產品在

各項測試中的排名。下表顯示每個產品在度量中的排名與獲得的相對分數:

測試排名 得分

1 6

2 5

3 4

4 3

5 2

6 1

我們將每個產品在每項度量中的得分相加,獲得整體分數和排名。假設某個產品在每項度量中都獲得第

一名,在測試中可獲得的最高分數是 78。下表顯示每個產品在測試中獲得的整體分數與結果,依名次

排列:

產品名稱 整體分數

Symantec Endpoint Protection Small Business Edition 58

Kaspersky Business Space Security – Small Business 55

ESET NOD32 Antivirus 49

Trend Micro Worry-Free Business Security 44

Microsoft Forefront Endpoint Protection 2010 36

McAfee Total Protection for Endpoint Essentials 30

Page 6: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 6 頁 (共 21 頁) 報告 2 6 September 2011 年 8 月 15 日

產品與版本

在這份報告中,我們測試了以下版本的小型企業安全解決方案:

1 此產品也稱為 Symantec EP SBE

2 此產品也稱為 Microsoft Forefront EP 2010

3 此產品也稱為 Trend Micro Business Security 7

4 此產品也稱為 McAfee TP for EP - Essentials

5 此產品也稱為 Kaspersky BSS SMB

6 此產品也稱為 ESET NOD32 AV

製造商 產品名稱 發行年份 產品版本

賽門鐵克公司 Symantec Endpoint Protection Small Business Edition1 2011 12.1.671.4971

Microsoft Corp Microsoft Forefront Endpoint Protection 20102 2010 1.95.4146.0

Trend Micro, Inc Trend Micro Worry-Free Business Security3 2010 7.0.1638

McAfee, Inc McAfee Total Protection for Endpoint Essentials4 2010 4.5.1

Kaspersky Lab Kaspersky Business Space Security – Small Business5 2011 6.0.4.1424

ESET, LLC ESET NOD32 Antivirus6 2010 4.2.64.12

Page 7: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 7 頁 (共 21 頁) 報告 2 6 September 2011 年 8 月 15 日

效能度量摘要

我們精心挑選了一組客觀的度量,這些度量將能以不失真的全方位角度,指出端點防護產品可能會影響

使用者系統效能的地方。這些度量可測試出軟體對於使用者日常執行之一般工作帶來的影響。

PassMark Software 所有的測試方法都可由第三方以相同的環境重現類似的效能評析結果。如需測試所

使用之方法的詳細說明,請參閱本報告的<附錄 2 - 方法說明>。

效能評析 1 - Word 文件啟動與開啟時間

此度量能測量安全軟體對端點系統之回應速度和效能的影響。此測試選擇 Microsoft Word,因為辦公室

軟體在企業電腦上很常見。為了測試受測產品在此度量中的效能,我們測量從 Microsoft Word 啟動大型

混合媒體文件所需的時間。為了將作業系統的快取處理效果納入考量,我們同時測量了初次啟動時間和

後續啟動時間。最後的結果是這兩個數據的平均值。

效能評析 2 - Internet Explorer 啟動時間

此度量類似於「Word 文件啟動與開啟時間」度量,是客觀評量產品對系統回應速度之影響程度的眾多

方法之一。此度量標準測量的是啟動 Internet Explorer 8 使用者介面所需的時間。為了將作業系統的快

取處理效果納入考量,我們同時測量了初次啟動時間和後續啟動時間。最後的結果是這兩個數據的平均

值。

效能評析 3 - 開機時間

此度量能測量電腦開機後進入作業系統所需的時間。安全軟體通常會在 Windows 啟動時就啟動,因此

會多產生一些時間,而讓作業系統啟動的時間延長。開機時間較短表示應用程式對於電腦正常運作的影

響程度較低。

效能評析 4 - 隨選掃描時間

所有端點防護解決方案的功能設計都是掃描系統上的檔案,進而偵測病毒與其他各種形式的惡意程式。

此度量能測量掃描一組乾淨檔案所需的時間。這組樣本檔案的大小為 5.42 GB,皆為使用者電腦上通常

會有的檔案。例如,媒體檔案、系統檔案和 Microsoft Office 文件。

效能評析 5 - 排程掃描時間

此測試的目標為上述效能評析 4 – 隨選掃描時間的同一組測試檔案,但是掃描作業是透過用戶端使用者

介面或管理主控台 (如果用戶端上沒有適當選項) 設定成在特定時間進行。

Page 8: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 8 頁 (共 21 頁) 報告 2 6 September 2011 年 8 月 15 日

效能評析 6 - CPU 使用率 - 掃描時間

安全軟體進行惡意程式掃描時的 CPU 負載量可能導致端點電腦無法正常使用,必須要等到掃描完成後

才會恢復正常。此度量能測量端點防護軟體執行掃描時使用的 CPU 百分比。

效能評析 7 - 瀏覽時間

端點防護產品常會掃描從網路或內部網路下載的資料中是否有惡意程式。但是當產品掃描網頁內容中是

否有惡意程式時,可能會拖慢瀏覽速度。此度量測量的是從使用者的瀏覽器視窗瀏覽一組熱門網站,以

連續從本機伺服器下載內容所需的時間。

效能評析 8 - 檔案複製、移動及刪除

此度量能測量移動、複製及刪除一組樣本檔案所需的時間。這組樣本檔案包含 Windows 使用者在日常

作業使用的數種檔案格式。這些格式包括文件 (如 Microsoft Office 文件、Adobe PDF、Zip 檔案等等)、

媒體格式 (如影像、影片和音樂) 與系統檔案 (如可執行檔、程式庫等等)。

效能評析 9 - 檔案壓縮與解壓縮

此度量能測量壓縮及解壓縮不同類型檔案所需的時間。此測試中使用的檔案格式包括文件、影片和影

像。

效能評析 10 - 檔案寫入、開啟及關閉

此效能評析衍生自 Oli Warner 發表於 http://www.thepcspy.com 的「檔案 I/O」測試 (請參閱參考編號

1:拖慢 Windows 速度的真正原因)。此度量能測量寫入檔案,然後接著開啟及關閉該檔案所需的時

間。

效能評析 11 - 記憶體使用量 - 系統閒置

電腦閒置期間的記憶體使用量可以充分反映出端點防護軟體的系統資源基本耗用量。此度量能測量當電

腦與端點防護軟體處於閒置狀態時,產品的記憶體 (RAM) 使用量。計算總記憶體使用量的方法是先判別

所有的端點防護軟體程序,再判斷每個程序的記憶體使用量。

效能評析 12 - 記憶體使用量 - 掃描

此度量能測量產品在執行防毒掃描時的記憶體 (RAM) 使用量。計算記憶體總使用量的方式是先判別所有

端點防護軟體程序,再判渡防毒掃描執行期間內每個程序的記憶體使用量。

效能評析 13 - CPU 使用率 - 系統閒置

此度量能測量防毒軟體在系統閒置時對 CPU 造成的平均負載量。

Page 9: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 9 頁 (共 21 頁) 報告 2 6 September 2011 年 8 月 15 日

測試結果

在下列各圖中,我們以黃色來突顯 Symantec Endpoint Protection Small Business Edition 得到的結果。

另外也以灰色突顯平均值,以方便比較。

效能評析 1 - Word 文件啟動與開啟時間 (毫秒)

下圖比較啟動 Microsoft Word 並開啟 10MB 文件所需的平均時間。啟動時間較短的產品就是在這個類別

中表現較好的產品。

效能評析 2 - Internet Explorer 啟動時間 (毫秒)

下圖比較成功載入 Internet Explorer 所需的平均時間。載入時間較短的產品就是在這個類別中表現較好

的產品。

Page 10: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 10 頁 (共 21 頁) 報告 2 6 September 2011 年 8 月 15 日

效能評析 3 – 開機時間 (秒)

下圖比較每個受測產品所需的平均系統開機時間 (以五次開機取樣的數據來計算)。開機時間較短的產品

就算是在這個類別中表現較好的產品。

效能評析 4 – 隨選掃描時間 (秒)

下圖比較掃描一組大小共 5.42 GB 之檔案 (包括媒體檔案、系統檔案與 Microsoft Office 文件) 所需的平

均時間。最後的結果為五次掃描的平均值,每次掃描時間的權重都一樣。掃描時間較短的產品就是在這

個類別中表現較好的產品。

Page 11: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 11 頁 (共 21 頁) 報告 2 6 September 2011 年 8 月 15 日

效能評析 5 - 排程掃描時間 (秒)

下圖比較掃描一組大小共 5.42 GB 之檔案 (包括媒體檔案、系統檔案與 Microsoft Office 文件) 所需的平

均時間。最後的結果為五次掃描的平均值,每次掃描時間的權重都一樣。 掃描時間較短的產品就是在

這個類別中表現較好的產品。請注意,此測試無法獲得 Trend Micro Business Security 或 Microsoft FEP

的結果,因為這兩種產品並未提供排程掃描特定資料夾的功能。

* 在本報告的舊版和最新版之間,賽門鐵克將排程掃描的建議安全預設設定從預先發行軟體變更為最終發行版本。

儘管安全建議設定的變更能增加防護功效,但掃描時間也隨著加長。變更的效果反映在此新報告中。

** 此測試無法獲得 Microsoft Forefront EP 2010 與 Trend Micro Business Security 7 的結果,因為該產品並無排程掃

描特定資料夾的功能。

效能評析 6 - CPU 使用率 - 掃描時間 (百分比)

下圖比較掃描一組大小共 5.42 GB 之檔案 (包括媒體檔案、系統檔案與 Microsoft Office 文件) 時的平均

CPU 使用率。CPU 使用率較低的產品就是在這個類別中表現較好的產品。

Page 12: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 12 頁 (共 21 頁) 報告 2 6 September 2011 年 8 月 15 日

效能評析 7 - 瀏覽時間 (秒)

下表比較 Internet Explorer 透過區域網路從本地端伺服器電腦成功載入一組熱門網站所需的平均時間。

瀏覽時間較短的產品就是在這個類別中表現較好的產品。

N.B. 1. 由於在測試階段時的網路組態差異,因此我們無法將 Microsoft Forefront EP 2010 納入比較。為了計

算整體分數,我們為此產品指定了此測試的平均分數。

效能評析 8 - 檔案複製、移動及刪除 (秒)

下圖比較每個受測產品複製、移動及刪除多組樣本檔案所需的平均時間。時間較短的產品就是在這個類

別中表現較好的產品。

Page 13: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 13 頁 (共 21 頁) 報告 2 6 September 2011 年 8 月 15 日

效能評析 9 - 檔案壓縮與解壓縮 (秒)

下圖比較每個受測產品壓縮及解壓縮樣本檔案所需的平均時間。時間較短的產品就是在這個類別中表現

較好的產品。

效能評析 10 - 檔案寫入、開啟及關閉 (秒)

下圖比較每個受測網路安全產品將檔案寫入硬碟,然後開啟及關閉 180,000 次所需的平均時間。時間較

短的產品就是在這個類別中表現較好的產品。

Page 14: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 14 頁 (共 21 頁) 報告 2 6 September 2011 年 8 月 15 日

效能評析 11 - 記憶體使用量 - 系統閒置 (MB)

下圖比較在系統閒置期間,每個產品的平均記憶體使用量。平均使用量是從重新開機後取樣十次 (每次

相隔約 60 秒) 的記憶體快照得出。在閒置期間使用較少記憶體的產品就是這個類別中表現較好的產

品。

效能評析 12 - 記憶體使用量 - 掃描 (MB)

下圖比較每個產品在防毒掃描期間的平均記憶體使用量。平均使用量是指當軟體在掃描先前未曾掃描過

的樣本檔案時,從以 5 秒為間隔取樣之十個記憶體快照中得出的平均值。在掃描期間使用較少記憶體的

產品就是這個類別中表現較好的產品。

Page 15: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 15 頁 (共 21 頁) 報告 2 6 September 2011 年 8 月 15 日

效能評析 13 - CPU 使用率 - 系統閒置 (百分比)

下圖比較系統閒置期間的平均 CPU 使用率。CPU 使用率較低的產品就是這個類別中表現較好的產品。

Page 16: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 16 頁 (共 21 頁) 報告 2 6 September 2011 年 8 月 15 日

免責聲明與揭露

本報告僅涵蓋測試當時可取得的產品版本。受測版本如本報告<產品與版本>一節所述。我們測試的產

品並非競爭激烈之小型企業安全市場中所有可取得的產品。

免責聲明

PassMark Software Pty Ltd 已竭盡所能確保本報告所提供資訊的正確性,因此對於報告中的任何錯誤、

遺漏或過時的資訊概不負責,對於因本資訊的出現、使用、存取或無法使用而在任何形式下產生的直

接、間接、意外、衍生或懲罰性損害,亦不負任何責任。

揭露

本報告是由賽門鐵克公司出資製作,並由賽門鐵克提供測試所用的部分測試程式語法檔。

商標

所有商標均為其個別擁有者的財產。

聯絡詳細資料

PassMark Software Pty Ltd

Suite 202, Level 2

35 Buckingham St.

Surry Hills, 2010

Sydney, Australia

電話 + 61 (2) 9690 0444

傳真 + 61 (2) 9690 0445

網站 www.passmark.com

下載位置

本報告的電子版本位於下列位置:

http://www.passmark.com/ftp/Endpoint Protection 2011 - Performance Testing - SMB - Report 2.pdf

Page 17: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 17 頁 (共 21 頁) 報告 2 6 September 2011 年 8 月 15 日

附錄 1 – 測試環境

端點機器 - Windows 7 (64 位元)

在我們的測試中,PassMark Software 採用以下列硬體規格搭載 Windows 7 Ultimate (64 位元) 作業系統

的測試環境:

CPU: Intel Core i5 750 @ 2.66GHz

視訊卡: ATI Radeon 4350 1GB

主機板: ASUS V-P7H55E,LGA1156

記憶體: 4GB DDR3 RAM,1333Mhz

硬碟機: Samsung 1.5TB 7200RPM

網路: Gigabit (1GB/s)

網頁與檔案伺服器 – Windows 2008 (32 位元)

我們並未直接評析網頁與檔案伺服器的效能,該伺服器的作用為在進行效能測試期間將網頁與檔案提供

給端點機器。

CPU: 兩顆 Xeon 3.2Ghz

視訊卡: Quadro NVS 280 PCI-E

主機板: HP 08B4h

記憶體: 2GB Registered ECC Infineon RAM

硬碟機: 30GB SCSI 10K、600GB SATA

網路: Gigabit (1GB/s)

管理主控台 VM 伺服器 – Windows 7 (64 位元)

我們並未直接評析伺服器的效能,該伺服器乃是做為安裝軟體之伺服器元件的虛擬機器主機。安裝完成

之後,我們使用管理主控台伺服器將端點軟體部署至用戶端及排程掃描。

CPU: AMD Phenom II x4 940 (四核心)

視訊卡: ASUS GeForce 9400GT

主機板: Gigabyte GA-MA790XT-UD4P

記憶體: 16GB PC3-10600 1333MHz DDR3 記憶體

硬碟機: Western Digital Caviar Green WD10EADS 1TB Serial ATA-II

網路: Gigabit (1GB/s)

Page 18: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 18 頁 (共 21 頁) 報告 2 6 September 2011 年 8 月 15 日

附錄 2 - 方法說明

效能評析 1 - Word 文件啟動與開啟時間

Word 介面的平均啟動時間是以 AppTimer (v1.0.1008) 進行測量的。這個時間包括啟動 Word 2007 應用

程式並開啟 10MB 文件的時間。此測試的做法其實與使用者介面啟動時間測試相同。對於每個受測的產

品,我們共取樣十五次:啟動 Word 三次,然後重新開機以清除作業系統的快取處理效果,此類流程共

進行五次。收集結果時,我們將每組啟動作業的第一次抽離出來,以便得到一組重新開機後的初次啟動

時間值,以及一組後續啟動時間值。

我們將後續啟動時間進行平均,以得出平均後續啟動時間。此測試最後的結果是後續啟動平均值與初次

啟動時間的平均值。

PassMark 網站備有 AppTimer 以供大眾取用。

效能評析 2 - Internet Explorer 啟動時間

Internet Explorer 介面的平均啟動時間是以 AppTimer 進行測量的。對於每個受測的產品,我們共取樣十

五次:啟動 Internet Explorer 三次,然後重新開機以清除作業系統的快取效果,這樣的流程共進行五

次。收集結果時,我們將每組啟動作業的第一次抽離出來,以便得到一組重新開機後的初次啟動時間

值,以及一組後續啟動時間值。

在此測試中,我們採用 Internet Explorer 8 (8.0.6001.18783 版) 做為測試瀏覽器。

我們將後續啟動時間進行平均,以得出平均後續啟動時間。此測試最後的結果是後續啟動平均值與初次

啟動時間的平均值。

效能評析 3 - 開機時間

PassMark Software 使用 Windows Performance Toolkit 4.6 版 (包含在 Microsoft Windows 7 SDK 中,可

從 Microsoft 網站取得) 中的工具,以便在 Windows 7 平台上獲得更準確且更一致的開機時間結果。

開機程序先經過 xbootmgr.exe 的 “xbootmgr.exe -trace boot –prepSystem” 指令進行最佳化,此指令會透

過六次最佳化開機來使系統完成測試前的準備。我們不採計從最佳化程序得到的開機軌跡。

完成開機最佳化後,我們使用 "xbootmgr.exe -trace boot -numruns 5” 指令來進行效能評析。此指令會連

續啟動系統五次,並記下每個開機週期的詳細開機軌跡。

最後,我們使用後置處理工具來剖析開機軌跡並取得 BootTimeViaPostBoot 值。此值反映出系統完成所

有開機程序 (僅限開機程序) 所花的時間。最後的結果是這五個開機軌跡的平均值。

Page 19: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 19 頁 (共 21 頁) 報告 2 6 September 2011 年 8 月 15 日

效能評析 4 - 隨選掃描時間

隨選掃描時間能測量每個受測端點產品從 Windows 檔案總管的右鍵內容功能表內掃描一組樣本檔案所

需的時間。這組樣本檔案在所有情況下都相同,其中有的是系統檔案,有的是 Office 檔案。樣本檔案總

共有 8,502 個檔案,大小為 5.42 GB。這些檔案大部分來自 Windows 系統資料夾。由於檔案類型會影響

掃描速度,因此我們特地將這些樣本檔案主要的檔案類型、檔案數目與大小總計分列於此。

.avi 247 1024MB

.dll 773 25MB

.exe 730 198MB

.gif 681 63MB

.doc 160 60MB

.docx 267 81MB

.jpg 2904 318MB

.mp3 333 2048MB

.png 451 27MB

.ppt 97 148MB

.sys 501 80MB

.wav 430 260MB

.wma 585 925MB

.xls 329 126MB

.zip 14 177MB

我們盡可能在不啟動產品使用者介面的情況下執行此掃描 (也就是以滑鼠右鍵按一下測試資料夾,然後選

擇「立即掃描」選項),但有些產品仍需要進入使用者介面後才能掃描資料夾。為了記錄掃描時間,我們

使用了產品內建的掃描計時器或報告系統。若不可行,我們就以碼錶手動計算掃描時間。

我們為每個產品取樣五次,每次取樣之前都將電腦重新開機,以清除作業系統的任何快取處理效果。最

後的結果為五次掃描的平均值,每次掃描時間的權重都一樣。

效能評析 5 - 排程掃描時間

我們使用的資料集與上述隨選掃描時間度量所使用的檔案相同,只不過掃描作業是從使用者介面中的排

程選項啟動。如果沒有此選項,我們便從管理主控台 (只要可行) 排程掃描作業。最後的結果為五次掃描

的平均值,每次掃描時間的權重都一樣。

效能評析 6 - CPU 使用率 - 掃描時間

CPUAvg 是一個指令列工具,大約每秒取樣兩次 CPU 負載量。CPUAvg 在作用時,會依照此時間間隔來計

算及顯示 CPU 平均負載。

在此度量中,我們使用 CPUAvg 來測量掃描時間測試進行時系統的 CPU 平均負載 (以百分比表示)。我們以

五組三十個 CPU 負載樣本的平均值計算最後結果。

效能評析 7 - 瀏覽時間

我們使用程式語法搭配 HTTPWatch (Basic Edition 6.1 版) 來記錄從本地端伺服器連續載入 106 個熱門網站

的所需時間。此程式語法檔會提供 URL 清單給 HTTPWatch,由其指示瀏覽器依序載入網頁,並監控瀏覽

器載入一個網頁上所有項目所需的時間。

在此測試中,我們採用 Internet Explorer 8 (8.0.6001.18783 版) 做為瀏覽器。

Page 20: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 20 頁 (共 21 頁) 報告 2 6 September 2011

此測試中使用的網站集包括高流量網頁的首頁。這些網站包括購物、社交、新聞、財經與參考網站。

我們總共執行五次瀏覽時間測試,最後的結果是這五個取樣數據的平均值。在測試不同產品之前,我們

會重新啟動本地端伺服器並執行一次初始「測試」。

效能評析 8 – 檔案複製、移動及刪除

此測試能測量系統複製、移動及刪除各種檔案格式之檔案樣本所需的時間。樣本中包含 809 個檔案,大

小總計為 683,410,115 個位元組,可分類為文件 [佔總數的 28%]、媒體檔案 [佔總數的 60%] 及 PE 檔案

(即系統檔案) [佔總數的 12%]。

我們總共執行五次測試,以取得複製、移動與刪除這組樣本檔案所需的平均時間,兩次取樣之間都會重

新啟動測試電腦,以清除可能的快取處理效果。

效能評析 9 - 檔案壓縮與解壓縮

此測試能測量壓縮及解壓縮一組樣本檔案所需的時間。在此測試中,我們使用了檔案複製、移動與刪除

效能評析中所使用的一部分媒體與文件。CommandTimer.exe 能記錄 7zip.exe 將檔案壓縮為 *.zip 並在隨

後將建立之 *.zip 檔案解壓縮所需的時間。

這個子集合包含 404 個檔案,大小總計為 277,346,661 個位元組。這組樣本檔案中的每種檔案類型、檔

案數目與大小如下表所示:

檔案格式 類別 數目 大小 (位元組)

DOC 文件 8 30,450,176

DOCX 文件 4 13,522,409

PPT 文件 3 5,769,216

PPTX 文件 3 4,146,421

XLS 文件 4 2,660,352

XLSX 文件 4 1,426,054

JPG 媒體 351 31,375,259

GIF 媒體 6 148,182

MOV 媒體 7 57,360,371

RM 媒體 1 5,658,646

AVI 媒體 8 78,703,408

WMV 媒體 5 46,126,167

總計 404 277,346,661

我們總共進行五次測試,以取得平均的檔案壓縮和解壓縮速度,每次取樣之間都會重新啟動測試電腦,

以清除可能的快取處理效果。

Page 21: Small Business Endpoint Protection - Performance Benchmarks · 2013. 11. 12. · Microsoft Forefront Endpoint Protection 2010 36 McAfee Total Protection for Endpoint Essentials :

端點防護 小型企業安全 PassMark Software

效能評析 第 21 頁 (共 21 頁) 報告 2 6 September 2011

效能評析 10 - 檔案寫入、開啟及關閉

此效能評析衍生自 Oli Warner 發表於 http://www.thepcspy.com 的「檔案 I/O」測試 (請參閱參考編號 1:

拖慢 Windows 速度的真正原因)。

我們為此測試開發了 OpenClose.exe,這支應用程式會以循環的方式將一個小檔案寫入磁碟,然後再開啟

及關閉該檔案。我們使用 CommandTimer.exe 來計算流程完成 180,000 個週期所需的時間。

我們總共進行五次測試,以取得寫入、開啟及關閉速度的平均值,每次取樣之間都會重新啟動測試電

腦,以清除可能的快取處理效果。

效能評析 11 - 記憶體使用量 - 系統閒置

我們使用 PerfLog++ 工具程式來記錄在開機程序時與往後十五分鐘內每分鐘的系統記憶體使用量,並只針

對每個產品進行一次測試,總共獲得 15 個樣本。開機時取得的第一個樣本並不採計。

PerfLog++ 工具程式會記錄所有程序的記憶體使用量,而不單是防惡意程式產品的記憶體使用量。因此,

防惡意程式產品的程序必須與其他所有執行中的系統程序隔離。為了隔離出相關程序,我們在 PerfLog++

記錄完記憶體使用量後,立即使用了名為 Process Explorer 的程式。Process Explorer 這個 Microsoft

Windows Sysinternals 軟體工具可列出系統上目前載入的所有 DLL 程序。

我們將每個屬於端點安全軟體之程序所用的 Private Byte 加總,以計算最後結果。

效能評析 12 - 記憶體使用量 - 掃描

我們使用 PerfLog++ 工具程式來記錄惡意程式掃描進行時的系統記憶體使用量。請參閱前文的記憶體使用

量 - 系統閒置度量,以取得 PerfLog++ 工具程式的描述與記憶體使用量之計算方法的說明。

由於某些產品會快取處理掃描位置,因此我們採取適當的預防措施以確保防毒軟體在執行此測試之前,

不會掃描 C:\ 磁碟機的任何位置。我們在啟動 PerfLog++ 工具程式的同時針對 C:\ 磁碟機啟動手動掃描,

使 PerfLog++ 以 5 秒的間隔記錄記憶體使用量 60 秒。

我們將惡意程式掃描期間每個屬於端點安全軟體之程序所用的 Private Byte 加總,以計算最後結果。

效能評析 13 - CPU 使用率 - 系統閒置

CPUAvg 是一個指令列工具,它能在每秒取樣兩次 CPU 負載量。CPUAvg 在作用時,會依照此時間間隔來

計算及顯示 CPU 平均負載。

在此度量中,我們使用 CPUAvg 來測量五分鐘系統閒置期間的 CPU 平均負載 (以百分比表示)。我們在重新

啟動端點電腦後,以及將電腦閒置五分鐘後進行此測試。

BR-00395-TW