早前有国外评测机构发现某些中国品牌的手机在运行手机测试软件时偷偷将CPU以及GPU的性能提升, 从而让手机的跑分分数更高, 甚至某国产品牌手机由于在3DMark测试时作弊被3Dmark除名. 为此, 这家国外评测机构对部分安卓手机进行了一个有趣的测试, 将在Google Play下载的3Dmark于修改名称后的3Dmark进行跑分对比, 发现确实有部分国产手机品牌存在作弊的行为.
有见及此, 我们也来做一个类似的测试, 毕竟现在国产旗舰手机跑分都非常厉害, 我们选择魅族16th, 努比亚Z18, 一加6, 小米8以及vivo NEX作为测试对象, 究竟这些手机有没有作弊? 这些手机有没有进行特别优化? 当然我们不仅使用外媒报道中的3Dmark进行测试, 我们还采用PCMark和GeekBench4进行测试.
如何改APP的名称?
我们测试使用官方版本的APP, 之后使用专用的软件对APP的安装包进行反编译, 在把APP的名称改成别的名称, 之后进行再次封包和签名, 再安装到测试手机上, 经过这样的改名和再次封包基本上能安装和正常运行.
为何不测试安兔兔?
其实我们更想用安兔兔这个流行的测试软件进行测试, 但发现安兔兔改名之后虽然能正常安装, 但安装完成之后不能正常运行, 估计安兔兔加入了一些安全机制防止APP被修改. 另外, 我们也对鲁大师进行类似的改名操作, 但改名完成后鲁大师无法再次封包.
如何测试?
我们首先运行原版的测试软件, 跑分3次取做好的成绩, 之后再使用改名的测试软件跑分3次, 取最好的成绩, 之后进行数据对比.
3Dmark测试
首先进行3DMark的测试, 这个也时早前国外评测机构采用的测试软件, 我们可以看到测试的5款手机中, 并没有出现国外媒体报道的作弊现象, 使用原版软件和改名软件的测试分数基本相同, 分数的误差也在合理的范围.
GeekBench4
使用GeekBench测试时努比亚Z18出现了一些情况, 这台手机无法安装GeekBench, 无论时原本还是改名之后的GeekBench, 甚至在努比亚应用商店下载的GeekBench都无法安装, 至于是什么原因? 这个无法考究. 在GeekBench的测试中可以看到大家还是很老实, 改名前和改名后并没有出现很大的分数差距.
PCmark
PCmark的测试主要是测试系统的综合性能, 可以看到测试的6台手机在改名前和改名后的分数都没有太大的变化, 基本可以确定没有出现作弊的情况, 另外可以看到虽然6台手机都是采用骁龙845处理器, 但最高分数和最低分数之间相差2000分, 说明PCmark测试不仅是CPU的性能, 系统的优化会对测试成绩产生响应.
总结: 大家都很老实
测试软件作弊这些现象已经不是一天两天的事情了, 在PC时代已经有这样的现象, 而在手机上之前也有爆出安兔兔测试作弊的事情, 通过作弊提升测试软件的跑分, 从而让给消费者一个高性能的假象, 这样的风气极其不好. 我们通过这个测试检验了市面上6台主流的845旗舰手机, 均没有出现作弊的情况, 大家还是相当老实, 当然有没有在安兔兔中作弊, 这个无法测试, 也不好说. 跑分只是将手机性能数据化的一个手段, 是一个将主观体验进行客观数据化的方法, 跑分并不代表手机的所有真正性能体验, 毕竟有些体验是无法数据化. 只要老老实实做手机, 规规矩矩跑个分, 这样这些跑分软件还是具有很好的参考价值.