一个手机为什么要跑分?跑分针对硬件的极限能力进行测试,分数的高低告诉你这个硬件性能上限,这就是我们常说的科学性测试。这样的测试受到手机软硬件的环境(外部温度、运行的任务数量)、用户个人测试方法等多方面的因素影响,测试的结果往往会呈现出巨大的波动。所以说没有绝对意义上的科学结果,只有一个“仅供参考”的分数。
图1: 跑分不等于体验如何取舍
科学性的测试只能告诉你科学的结果,然而科学的逻辑思维是从机器硬件的角度去看待何谓好坏,而不是从用户的角度去理解何为好坏。就比如有人买了一部为发烧而生的手机,其购机的目的肯定是为了流畅的使用,而不是为了发烧。从硬件的角度来看,跑得越快得分越高就是好的。但是从用户的角度来说,这种高速与高热量并存的感受,在其内心体验好感度上是相互矛盾的。高速是好的,高温是不好的,但是科学测试成绩只告诉你好的一面,你知道这个机器跑得很快,但是其体验评价却会因为发热烫手大大降低。
所以就有了目前用户心目中跑分再高也代表不了体验的观念,这就是所谓的“跑分无用论”。究其原因,不能怪用户,只怪评测软件自身太狭隘。
鲁大师做新时代的首席体验量化官:跑分可以等于体验
鲁大师认为软件测试要讲究科学,但是鲁大师的科学是从人的角度去看待跑分,鲁大师要让分数体现的是用户现在的感受,包括外观感受、性能感受、热量感受、视觉感受等等。一部好手机的选择标准绝对不是硬件性能的强大这一个因素,硬件跑分再强大,做工、发热控制、续航,网络这些都不行的话,也很难让用户有一个良好的评价。
很多人关注苹果手机,不是因为它的跑分成绩高,也不是因为它的摄像头像素高,更不是因为它的分辨率多么惊人,是因为它实现了巧妙的平衡,也就是使用感受上卓越高度。它的测试成绩或许只能称之为平凡无奇,甚至是落伍。这对于众多的跑分软件来说不正是“打脸”的事么?
图二:鲁大师测试概念科学范畴的逻辑+ 不科学的体验
目前鲁大师已经实现了大部分科学的“逻辑测试”,接下来鲁大师会把那些不科学的感受也变成分数。把这些关乎感受的“硬指标”体现在分数里,比如手机发热的程度未来就会进入评分的体系,我们正在用科学的法子去衡量这些不科学的事。
鲁大师的跑分规则你来定!
鲁大师的感受式给分才刚刚开始,未来还会有更多的感受式测试进入评测体系。俗话说,要走群众路线,才能得到群众的支持。闭门造车,自己研究评分规则本身就是有局限的。鲁大师还成立了一个评测联盟群体,正在招揽有兴趣参与评测规则制定的专业用户参与进来,你可以对鲁大师的评测方法说不,你可以提出你认为行之有效的测试手段。鲁大师欢迎你的参与!具体参与方式请关注鲁大师官方微博,或者加入官方群:389820707进行参与。
鲁大师V3.0 版得分比例详解
鲁大师将于本周发布鲁大师V3.0版,得分比例更科学透明。
CPU :35%
CPU 逻辑测试:浮点运算、整点运算
准确来说是以上的两种测试分数占据了总分的35%。CPU本身是贯穿于所有的运算项目,影响力绝对不止这35%,独立的测试项只是其中的一个参考而已,。(关于CPU的算法)
GPU :5%+30%
2D 测试:5%
3D 测试:30%
随着硬件的进步,2D测试的压力值早就趋向满分,很少会有运行平面游戏的硬件出现卡顿的情况,所以2D的测试得分比例大幅度缩水至5%。
相对于2D测试难度不高,3D测试的比例大幅增长到30%的理由很简单。手机游戏的画质逐步提高,已经开始接近PC游戏的地步。手机的GPU部分也越发强大。前有NVIDIA K1直接用了X86平台的开普勒结构使得图形性能突飞猛进,后有苹果A8选用PowerVR GX6650不甘示弱。消费者对于性能强大的最直观感受就在玩3D游戏的时候,所以提高到30%是非常合适的。
RAM :5%+5%
RAM 测试包括:RAM 大小、RAM 速度
RAM的评分占据10%的份额是相对公正的,我们把大小和速度都分拆成5%,是因为内存大小宽度和运行速度是两个独立的测试方向。如果未来RAM对于整机运行速度的影响力持续增大,鲁大师会考虑调高RAM 的得分比例。
存储:10%
测试包括:ROM 读取速度、SD 卡读写速度
这个比例是分为两个部分的,一个是手机自带的内存,另一个则是扩展内存。我们认为如果你的手机支持外部扩展,那么可用空间就会大大的拓展,手机的信息交互能力也会多一种方式,可以扩展的容量不会让使用者感到拮据,是一种体验式的评分。
数据库 5%
数据库性能是手机软硬件配合的一个整体概念,数据库的结构、数据调用的效率来源与手机系统UI的设计与硬件的性能。反映到用户感受上就是,游戏的加载速度,任务的切换速度,资料的存储删除速度等。
屏幕:5%
你可能会好奇,屏幕怎么测试的?从软件层面来说,我们没有办法通过手机自测去检验屏幕的好坏,屏幕的色域、色差的准确度,屏幕的材质、色差的冷暖感受都是需要外部的专业仪器才能给出结果的。但是我们目前可以量化的部分,就是屏幕的尺寸与分辨率,屏幕越大分辨率越高,PPI值越高得分会增多。屏幕越大、分辨率不够,视觉感受上当然会不够好,所以得分会低一些。屏幕这部分的得分,将来会随着可检测的手段的增多,而逐步提高比例。