天天看點

專業的人做專業的事 2022商用PC測試軟體通覽

對很多個人使用者而言,PC産品早已成熟、沒有變化且性能備援。但是對占據市場佔有率過半的商用PC來說,無論是定期更新的行業習慣,還是兩年來強勁的市場需求,再加上“恰逢其時”的硬體與應用革命,商用電腦市場可謂空前繁榮

專業的人做專業的事 2022商用PC測試軟體通覽

相比消費電腦使用者需求與應用場景的多元化,商用電腦更多地展現出應用的專業化。前者也形成了多元化的性能評估手段,與之相對應的就是代表性不足、專業化程度有限以及資料可信性低等,以遊戲為例,遊戲數量龐大性能特性各有千秋,且性能受驅動優化、參數設定影響大,單一遊戲的測試結果很難具有代表性,類型代表性都不具備。除了遊戲,具有性能測試功能的軟體:各種bench、各種mark非常多,它們或是标榜對某功能進行針對性測試,或是仿真某一應用場景/流程。

今天我們要介紹的,就是面向PC未來應用場景的商用PC測試軟體。商用PC測試軟體有不同的句讀解讀:商用的PC測試軟體和商用PC的測試軟體。

前者相對更為多樣化,個人消費者常用有面向整個PC系統的PCMark、CrossMark、GeekBench、XPRT系列等産品,也有針對某一特性或零部件測試的3DMark、Sandra、Cinebench、ADIA、CPU-Z、魯大師、安兔兔等,甚至很多遊戲都提供了内置benchmark功能,也可以算作某一程度上的測試軟體。随着“測試”的正規化,測試軟體的開發規模越來越大,同時一些相關開發公司也從最初的共享、開源方式、工作室,轉向正規化、公司化開發。

專業的人做專業的事 2022商用PC測試軟體通覽

首先,商業化測試軟體的開發流程是必須商業化的而不是作坊式的,需要行業相關企業廣泛參與、合作開發,各自貢獻自家的領先産品與技術、相關優化與參數設定,這一方式確定測試軟體公平公正和具有代表性,且軟體産品生命周期較長、結論穩定性較好。同時,相關測試的各項資料,包括但不限于系統平台、參數配置、測試結論,均是可驗證、可核查以及防篡改的。

測試商用PC的軟體,除了自身是商業化,更重要的因素還在于它所使用的測試方案是商業級,仿真運作程式有ISV開發,具有通用性。同時測試方法/腳本是公開的,即不使用自動流程/腳本,僅适用相同軟體,也能得到相同的評估結論。另外,針對商用PC使用場景,相關軟體的測試模式或參數,可通過GUI、指令行或代碼進行調整、設定,以滿足批量化、無人值守等工業化測試要求。合格的商用PC測試軟體與商用PC本身一樣,對測試結論的穩定性和可靠性要求更高,在參數不變的情況下,不同測試循環的資料偏差更小,普遍要求低于1%。

可以稱得上商用PC的商業化測試軟體的産品,相比之下是非常稀少的,并且使用本身和資料分析,都有相當門檻。具體門檻有多“高”,我們将用下一篇文章介紹,今天的主角是商用PC·測試軟體本身。

專業的人做專業的事 2022商用PC測試軟體通覽

商用PC測試套件産品的龍頭,是一家叫做BAPCo(Business Applications Performance Corporation)的小公司,拳頭産品也是各種“Mark”。具體來說,有仿真筆記本電腦(含電池續航能力測試)應用的MobileMark、聚焦辦公應用流程性能表現的SYSMark和其簡化版CrossMark。從上一個版本SYSMork2018/MobileMark2018于2018年釋出以來,Windows 10為主流PC平台,而随着Windows 11正式釋出,BAPCo也正式釋出了“25”系列産品,從這一編号跨度上足以見其特性變化之大,集中展現在測試應用負載以及新硬體支援(如指令排程機制)等方面,如同樣的筆記本電腦,在MobileMark 2014中續航能夠突破,24小時,而2018、25版,逐級腰斬。

BAPCo公司的名字,已經清晰地指向了商業應用這一領域,其産品最大的特點是基于Microsoft、Adobe、Google等正版、主流商用軟體,與UL Procyon一樣。SYSMark25的工作流更為複雜,加入了Audacity、AutoIt、企業版WinZip等流行工具,能夠很好地反映PC在辦公室環境中的性能狀态。

相比如雷貫耳的PCMark,SYSMark/MobileMark可謂非常低調,其誕生之初就是服務商業測試,是以普通消費者對它們知之甚少,而它們的測試結論,經常會出現在PC參數表格的“*”中,是辨別産品基本性能的重要參數。BAPCo産品的測試成本較高,除了沒有盜版、上千美元無折扣的價格,擋住了不少“玩”測試的玩家,早期版本僅支援英文系統、腳本模拟工作流易出故障(兼顧相容性測試)、動辄2小時安裝+8小時測試的時間,哪個不是被個人使用者抛棄的理由!

BAPCo已經意識到了測試使用成本上的這些問題,SYSMark 25/MobileMark 25承諾未來将通過更新支援簡體中文系統。國内銷售的PC産品普遍預裝價格較低的單簡體中文Windows家庭版,想象一下,如要滿足英文測試環境,需要先更新到專業版、切換為英文系統、删除中文語言包及相關特性、按要求解除安裝Windows的無關功能元件……這套操作最快也要2個小時完成,還要面對更高的測試失敗風險。DIY平台自行安裝英文系統尚可,而內建大量OEM優化的整機,特别是筆記本電腦,這樣操作就非常不專業了。

專業的人做專業的事 2022商用PC測試軟體通覽

BAPCo真正解決SYSMark測試成本極高的方式是推出CrossMark,并且更進一步。這款全新的測試軟體,能夠跨Windows、Andorid、mac OS/iOS和Linux等不同作業系統、硬體平台使用,不僅普通版具有專業版的完整測試流程及成績評估體系,而且通過內建在Windows Store/App Store/Google Play等官方軟體商店中,免費提供給所有使用者。CrossMark稱得上是市場上唯一能夠提供不同軟硬體平台的終端和桌面終端,整機性能評估及比對的測試軟體。使用相同的工作流及負載,并且全方位地比對生産率、創造性和反應能力,延續SYSMark/MobileMark測試理念的CrossMark,評估結論與前者有着極大的相似度,以1/10的時間成本實作80%以上的評估精度。所謂測試精度,并非測試資料穩定性不佳,恰恰相反,同一參數設定下,同一産品的CrossMark成績偏差遠低于1%,為行業高水準。評估精度與仿真流程長度、任務模拟複雜度有關,與時間代價呈反比。借助CrossMark,使用者可對PC産品進行初步、輕負載評價,對産品在不同場景中的性能表現有宏觀評價,更全面、更高強度的評估,可交由SYSMark完成。

專業的人做專業的事 2022商用PC測試軟體通覽

CrossMark線上資料庫,罕見地提供了市場上各種主流處理器的最高性能系統成績排行,展開後還可看到所有送出測試成績的同處理器平台的成績,主要硬體參數具有列出。隻有通過資料準确性、正确性檢驗的資料才會進入排行榜。

測試成本低(跨平台、多語言、免費、測試時間短、結果可靠性高),CrossMark一經推出即獲得了衆多玩家的關注。短短數個月内,其線上資料庫中的測試成績已經非常豐富,各款主流架構處理器一應俱全。

通過調整測試參數,使用者可以設定運作CrossMark的3個測試套件的全部或其中一個,也可以設定運作次數,實作更具針對性的測試。總的來說,CrossMark的創造性測試項目中的音頻、圖像、視訊、Flash等多媒體素材處理模式更接近工作流,負載相對SYSMark的對應項目輕,也小于Procyon照片編輯和視訊編輯子產品,更适合評價輕量化工作。

另外,CrossMark還适時加入了AI處理特性,便于評估未來使用場景。

專業的人做專業的事 2022商用PC測試軟體通覽

免費是免費,但僅限于标準版——強制上傳測試成績,這也導緻異常測試結果頻出,好在BAPCo有Pending校驗機制,能夠很快地移除異常資料。對商業測試客戶可以購買Pro版,進而禁止自動上傳資料。

CrossMark的優勢還展現在它與SYSMark的關系上,後者的門檻高,而前者實作了測試項目的100%相同、資料準确性八九不離十。這樣低成本、高素質的CrossMark,未來可期!

其次要介紹的是UL Procyon。2014年,UL收購了用3DMark、PCMark系列在消費PC市場頗有建樹的Futuremark(MadOnion,瘋洋蔥),正式進入基準測試服務市場。在繼續使用PCMark産品進行工業測試過程中,開源/共享軟體的基礎以及流水線測試時的資料穩定性及可分析性負面影響被放大。直到2020年底,UL陸續推出全新的滿足工業流水線測試要求的商用測試軟體Procyon,進軍商用PC、專業PC測試領域。

UL Procyon基準測試套裝包括3個PC測試元件和1個Android測試元件,後者是AI 推理基準測試,用來評估移動終端的AI性能,何時能落地桌面平台,讓我們拭目以待。

專業的人做專業的事 2022商用PC測試軟體通覽

UL Procyon面向PC産品的3個元件是:辦公室生産力基準測試、照片編輯基準測試和視訊編輯基準測試(benchmarks.ul.com/zh-hans/procyon)。顧名思義,它們面向的使用場景非常清晰明确。照片編輯基準測試和視訊編輯基準測試是面向DCC(Digital Content Creation數字内容建立)使用者的,均支援最新版相關商業軟體(測試者自行購買和安裝),前者模仿專業攝影師及美編工作流程,将數位負片(Digital Negative)彙入Adobe Lightroom Classic,進行各種修圖、裁剪和拉伸,而後使用Adobe Photoshop在圖檔套多中編輯與圖層效果。視訊編輯基準測試使用Adobe Premiere Pro彙入并編輯多段視訊,經過調整和套入效果的中間視訊還會使用H.264及H.265導出。這兩項測試可視作PCMark中DCC子產品的專業更新版。

辦公室生産力基準測試是商用PC測試的核心子產品,姗姗來遲的它于2021年10月正式釋出。它采用微軟Office中的Word、Excel、PowerPoint 和 Outlook等4件套仿真日常辦公應用,可以說是千千萬萬上班族的日常。當然,你可以說,上班的時候我還要用這個或者那個軟體,如視訊會議、浏覽器、聊天,甚至流媒體軟體。這些依托網絡實時應用性能測試,并且有待Procyon的新功能子產品實作。

SPEC(Standard Performance Evaluation Corporation)是一家有着30年曆史的老牌測試服務公司,其旗下測試軟體衆多,其中最為有名的就是SPEC CPU、SPECapc套件、SPECviewperf套件等産品了。

Evaluation(評估)是SPEC産品的核心競争力,别看其軟體動辄數千美元卻可以免費下載下傳和生成成績,但是沒有相應的系統評估和優化表現比對,空有一組組工作站、企業應用或工業軟體的測試結果數字,對PC OEM優化産品設計和驅動程式都毫無意義。SPEC最入門的産品/測試軟體也是面向PC工作站的,甚至DCC應用也隻是剛入門,是以它不被個人消費者重視也就不奇怪了。

SPEC近期更新的測試軟體包括SPECViewperf 2020 v3.0,它将在稍後我們的移動工作站産品測試中露面,而商用PC産品的測試不會用到它。

專業的人做專業的事 2022商用PC測試軟體通覽

比起消費PC,商用PC的應用場景需求清晰、高度多任務化且流程有迹可循,但是使用者對商用PC的性能表現有着更為清晰明确的要求。是以,在評價中,對于商用PC的“産品相容性/穩定性”以及“性能穩定性/持續輸出“表現,也有着較高的權重。同時,反映在商用測試軟體的測試過程中,展現為以完成項目為目标的多應用并行化、流程順序化程序,不僅全部測試軟體要求正版化、商業化,且測試周期長、負載波動大而頻繁,與消費PC、高性能PC(HEDT,非HPC)、工作站形成鮮明的反差。

繼續閱讀