说到显卡性能测试,都会想到3DMark;说到电脑性能测试,都会想到PCMark;说到手机拍照测试,自然都会想到DXOMARK。
各种各样的Mark软件,为我们认识、衡量产品的性能提供了非常直观的参考,但因为种种原因,也经常引发各种争议,尤其是中立性、客观性。
这其实也是不可避免的。在测试段,使用的设备、方法都是人来定义的;在产品端,体验如何也都是人来感知的。
毕竟,人,必然有着主观性。一千个观众,就有一千个哈姆雷特。
DXOMARK是评测相机起步的,之后逐渐成为手机评测的代名词,又陆续拓展到了音频、屏幕、电池以及其他消费电子领域,而在不断发展的同时,DXOMARK也在思考,如何为大家带来更精准、更客观、更结合新技术、更符合实际体验的测试。
近日,DXOMARK就对智能手机测试基准、评分系统进行了史上最大规模的更新,工程师团队历时一年多,使得手机影像、自拍、屏幕、音频、电池等评测项目都焕然一新。
同时,DXOMARK还首次公开了评分标准。
DXOMARK指出,全新的测试基准,致力于距离用户更近一步,基于真实用例进行测试,囊括评测设备在不同场景、不同环境的日常使用情况,同时坚持紧紧跟随技术发展,考察设备的最新科技。
除了更新基准测试,DXOMARK本次还做了以下三个方面的工作:
一是更透明。
所有评分公式和分数结构,都可以在DXOMARK官方网站“如何测试”的相应部分中查阅。
二是提高分数的可读。
本次重新格式化了分数尺度,数值在所有测试基准中都代表相似的表现,更容易进行比较。
比如同样是80分,以往在摄像头测试中是个很普通的成绩,但在音频、屏幕测试中相对较高,而以后都会反应同样的高低水平。
三是在所有基准中使用几何平均分规则。
对于在一个测试中表现出色、另一个测试中表现糟糕导致不均衡的设备,这可以大大提高评分的一致性。
一、影像基准测试
DXOMARK影像基准测试经过更新后,已经来到了第五版,主要变化有以下几个方面:
一是增加与用户需求密切相关场景的测试,包括人像、低光拍摄、室内、户外等;
二是进一步改进测试方法,包括扩展变焦评分、增加照片和视频变焦测试的焦距范围、丰富变焦测试场景等,比如5勒克斯极低光下变焦、微距功能加分(不支持不扣分)、文件扫描场景、
三是新增实验室设置,能在实验室中重现真实生活场景,并测试人像、运动物体的HDR模式;
四是新增AI驱动指标,能在真实场景、物体上执行照片和视频的噪点和纹理AI指标,比如对人脸细节增加新的AI测量。
五是使用国际焦点小组(focus group),以更好地反应用户偏好,并评估摄像头的暗光性能。
总的来说,DXOMARK第五版基准标准不会让已有的排行榜完全重新洗牌,原来靠前的仍然会有好成绩,但会出现一些局部变化。
如上新的TOP10机型,荣耀Magic4至臻版、华为P50 Pro仍然位居前两名。
苹果iPhone 13 Pro Max、iPhone 13 Pro升到第三和第四,原本在此的华为Mate 40 Pro+、小米12S Ultra分别滑落到第六和第七,后者甚至比小米11 Ultra还要低(有点小尴尬)。
另外,第九和第十的Google Pixel 6 Pro、三星Galaxy S22 Ultra骁龙版互换了一下位置。
对于iPhone 13 Pro Max为何排名大涨,DXOMARK也做了详细解释,主要一是微距细节相当丰富,伪像很少,人像拍照可以很好地捕捉运动场景、控制低对比度,而且在所有光照条件下都能呈现良好的肤色,只是暗光表现略差一些。
DXOMARK透露,已经对数据中的近80款手机进行了重新测试,目标是重测超过100台,争取所有机型都再来一遍。
DXOMARK还指出,在新版测试基准下,图像质量对评分的影响更大。
比如对比度,尤其在人像和逆光场景中,小米11 Ultra、小米12S Ultra、华为P50 Pro在这方面表现不是太好,所以丢失了一些分数。
比如运动,荣耀Magic4至臻版在室内照明下表现非常出色,华为P50 Pro、苹果iPhone 13 Pro Max等则在移动物体的细节呈现上有些处理不当。
比如低光和夜间“氛围”,DXOMARK直言在测试中,一些手机在低光和极低光下拍出了明亮的测标曝光,背离了用户的偏好,包括华为P50 Pro、小米12S Ultra、苹果iPhone 13 Pro Max,所以更新后会丢失一些分数。
这意味着,那些宣传自己是“夜视仪”的手机,今后要在DXOMARK测试中吃亏了。