行業跑分測試“常態化”作假 華為手機“喊冤”稱暫時下架相關資料
日前,知名基準測試軟體3DMark母公司UL Benchmarks釋出公告,表示將華為P20 Pro、nova3以及榮耀Play三款機器的跑分成績從資料庫中刪除,理由為“華為對跑分進行了優化,在日常使用時並不能達到跑分的水平”。
UL Benchmarks表示,這可能是通過識別之前標記過的3DMark應用程式,在跑分測試中開啟高效能模式得到高分。資料顯示,公共版得分比內部版得分高出了47%。
對此,華為在回覆第一財經記者的一份宣告中表示,手機跑分成績不能代表使用者最終使用體驗,滿足使用者的實際體驗要大於追求跑分結果。但為避免對當前跑分結果產生混淆,UL和華為討論後,一致決定將暫時下架一系列華為裝置的跑分資料,並在華為授權其所有手機使用者可訪問“效能模式”後恢復分數。
在跑分資料真實性問題上,華為消費者BG軟體工程部總裁王成錄在IFA期間接受採訪時表示,智慧手機的跑分測試很常見,其他企業都在做這類測試,而且拿了很高的分,華為不能保持沉默。
“各大手機和電腦廠商也將跑分作為重點來宣傳,給消費者營造出手機效能好的直觀印象,但其中摻雜著不少水分。”手機中國聯盟祕書長王豔輝對記者表示,在品牌手機互相擠壓份額的時候,跑分作弊也就司空見慣。
下架跑分資料
在近日的一次手機評測中,華為的幾款手機被認定為“存有貓膩”,理由是在其裝置上安裝了用於檢測跑分應用程式是否執行時的軟體。
也就是說,在基準測試期間,當這些軟體識別執行的是名字為 3DMark 的應用程式時,便將華為手機所有處理效能推到最大,並且完全忽略 TDP 熱設計功耗建議,以確保最終跑出一個非常高的分數。但是在一般的使用過程中,這樣的效能沒有辦法長期保持。
3DMark是業內較為知名的測試軟體,目前已經刪除華為這三款手機的跑分成績。
華為和UL隨後就跑分事件釋出聯合宣告,華為表示,在討論中華為向UL解釋了當前華為智慧手機的AI智慧排程機制,由於不同場景對效能的要求不同,最新版本的華為智慧手機系統可以通過AI智慧排程等先進技術,使硬體效能得到充分發揮,滿足使用者在不同場景下的體驗訴求。
雖然對華為在跑分場景中預設啟動“效能模式”表示有異議,但UL表示理解。雙方達成協議,為了尊重使用者的選擇權,華為將在EMUI 9.0版本中把“效能模式”開放給使用者,這樣使用者即可選擇在有需要的時候開啟該模式。
雙方還討論了當前業界通用的跑分測試方法。為避免對當前跑分結果產生混淆,UL和華為討論後,一致決定將暫時下架一系列華為裝置的跑分資料,並在華為授權其所有手機使用者可訪問“效能模式”後恢復分數。
華為表示,他們已經與業內合作伙伴聯手進行了一年多的測試,來尋找最接近使用者體驗的最佳測試方式。以通話質量為例,全球都有一個標準化的測試方式,測試結果能夠被行業所認可,所有廠商也都在朝著一個客觀的結果而努力。但在遊戲測試上面,王成錄表示:“其他人都在做相同的測試,並獲得高分,華為不能保持沉默。”
競爭焦慮
跑分作弊在手機行業中並不是一個新鮮的事情。
早在2013年,搭載三星Exynos處理器版Galaxy S4就出現過作弊問題。而在 2014 年,華為 Ascend P7也因為類似作弊行為被3DMark取消成績,手機在檢測到測評工具時就開啟更多核心,提升執行效率,達到更高的分數。
王豔輝對記者表示,大家熱衷跑分的根本原因在於不少消費者會把跑分作為選擇產品的依據。“在安卓手機同質化嚴重、配置術語包裝過度的情況下,消費者很難做出判斷,哪款手機好或者不好。”
特別是在目前競爭壓力越來越大的情況下,各種為分數除錯的方法都可能被用上。
全球調研機構Counterpoint近日釋出的一份報告顯示,2018年上半年中國智慧手機市場整體表現不如預期,銷量同比下降10%。一方面,國產手機廠商釋出旗艦機型的步伐明顯加快,頭部企業更是紛紛試探產品價格的上限,有意競逐蘋果、三星把持的高階市場。另一方面,三線到六線品牌之間的洗牌也越發激烈。在整體市場規模無法持續明顯擴大、沒有更多增量空間去開拓的情況下,智慧手機市場已經完全變成了一個存量競爭的血海市場。
王成錄表示,華為想要直面巨大競爭,但因為其他廠商總是把“不真實的”跑分成績放在第一位,這變得非常困難。他在接受Anandtech採訪時表示,在Android生態系統,其他廠商給出的跑分數字也有誤導之嫌,讓跑分作弊“在中國成為司空見慣的事”。華為想要向消費者開誠佈公,但由於競爭對手一直在公佈不真實的跑分數字,他們很難做到這一點。
“但不管怎樣,分數競賽仍需要繼續,但是使用者的感知是真實的,這應該成為國產手機努力的方向。”王豔輝對記者說。
責編:胡軍華
此內容為第一財經原創。未經第一財經授權,不得以任何方式加以使用,包括轉載、摘編、複製或建立映象。第一財經將追究侵權者的法律責任。 如需獲得授權請聯絡第一財經版權部:021-22002972或021-22002335;[email protected]。