早前有國外評測機構發現某些中國品牌的手機在運行手機測試軟體時偷偷將CPU以及GPU的性能提升, 從而讓手機的跑分分數更高, 甚至某國產品牌手機由於在3DMark測試時作弊被3Dmark除名. 為此, 這家國外評測機構對部分安卓手機進行了一個有趣的測試, 將在Google Play下載的3Dmark於修改名稱後的3Dmark進行跑分對比, 發現確實有部分國產手機品牌存在作弊的行為.
有見及此, 我們也來做一個類似的測試, 畢竟現在國產旗艦手機跑分都非常厲害, 我們選擇魅族16th, 努比亞Z18, 一加6, 小米8以及vivo NEX作為測試對象, 究竟這些手機有沒有作弊? 這些手機有沒有進行特別優化? 當然我們不僅使用外媒報道中的3Dmark進行測試, 我們還採用PCMark和GeekBench4進行測試.
如何改APP的名稱?
我們測試使用官方版本的APP, 之後使用專用的軟體對APP的安裝包進行反編譯, 在把APP的名稱改成別的名稱, 之後進行再次封包和簽名, 再安裝到測試手機上, 經過這樣的改名和再次封包基本上能安裝和正常運行.
為何不測試安兔兔?
其實我們更想用安兔兔這個流行的測試軟體進行測試, 但發現安兔兔改名之後雖然能正常安裝, 但安裝完成之後不能正常運行, 估計安兔兔加入了一些安全機制防止APP被修改. 另外, 我們也對魯大師進行類似的改名操作, 但改名完成後魯大師無法再次封包.
如何測試?
我們首先運行原版的測試軟體, 跑分3次取做好的成績, 之後再使用改名的測試軟體跑分3次, 取最好的成績, 之後進行數據對比.
3Dmark測試
首先進行3DMark的測試, 這個也時早前國外評測機構採用的測試軟體, 我們可以看到測試的5款手機中, 並沒有出現國外媒體報道的作弊現象, 使用原版軟體和改名軟體的測試分數基本相同, 分數的誤差也在合理的範圍.
GeekBench4
使用GeekBench測試時努比亞Z18出現了一些情況, 這台手機無法安裝GeekBench, 無論時原本還是改名之後的GeekBench, 甚至在努比亞應用商店下載的GeekBench都無法安裝, 至於是什麼原因? 這個無法考究. 在GeekBench的測試中可以看到大家還是很老實, 改名前和改名後並沒有出現很大的分數差距.
PCmark
PCmark的測試主要是測試系統的綜合性能, 可以看到測試的6台手機在改名前和改名後的分數都沒有太大的變化, 基本可以確定沒有出現作弊的情況, 另外可以看到雖然6台手機都是採用驍龍845處理器, 但最高分數和最低分數之間相差2000分, 說明PCmark測試不僅是CPU的性能, 系統的優化會對測試成績產生響應.
總結: 大家都很老實
測試軟體作弊這些現象已經不是一天兩天的事情了, 在PC時代已經有這樣的現象, 而在手機上之前也有爆出安兔兔測試作弊的事情, 通過作弊提升測試軟體的跑分, 從而讓給消費者一個高性能的假象, 這樣的風氣極其不好. 我們通過這個測試檢驗了市面上6台主流的845旗艦手機, 均沒有出現作弊的情況, 大家還是相當老實, 當然有沒有在安兔兔中作弊, 這個無法測試, 也不好說. 跑分只是將手機性能數據化的一個手段, 是一個將主觀體驗進行客觀數據化的方法, 跑分並不代表手機的所有真正性能體驗, 畢竟有些體驗是無法數據化. 只要老老實實做手機, 規規矩矩跑個分, 這樣這些跑分軟體還是具有很好的參考價值.