技术文章 >  测试结果

DXOMARK 基准更新内容

DXOMARK 的各种智能手机测试基准会定期更新,以跟上智能手机技术创新的快速步伐,同时确保我们的测试方法可以反映当前用户行为,以提高这些方法与智能手机用户之间的相关性。DXOMARK 经常进行调查和焦点小组,以充分了解智能手机用户对手机性能和用途的期望,并将结果直接引入我们的方法更新中。

最新一轮的更新为所有基准带来了新元素,特别是摄像头和音频,两者都引入了新的测量,以适应技术和手机用途的演变。除了新测量之外,还有以下改进:

  • 更透明:所有评分公式和分数结构都可以在 DXOMARK 网站上“如何测试”的相应部分中查阅。
  • 提高分数的可读性:我们修改了分数标度,使分数更容易在不同的基准之间进行比较。例如,过去,总分 80 分在摄像头测试中并不高,但在音频或屏幕方面则相对较高。我们现在已将分数重新格式化,让分数数值在所有测试基准中都代表相似的表现。
  • 在所有基准中使用几何平均分规则,提高一致性:该测量适用于所有基准,并为在一个基准下的所有测试细项中表现一致的手机,并对在一个关键测试领域非常出色但在另一个关键测试领域表现不佳的手机扣分。

新的影像测试项目

我们在摄像头测试中添加了一系列新的用例评分,提供中立的评鉴,帮助消费者根据自己使用手机的情况做出购买智能手机的决定。这些用例评分是根据我们测量的细项分数计算得出的,其中涵盖照片、视频、散景和预览等类别,并显示在总分旁,作为补充。我们会定期更新测试基准以反映用户行为的变化。两年前,自我们上次发布基准以来,一些用户习惯已经有所改变,并出现了一些新趋势,这会反映在我们摄像头基准的最新版本中,在其中,我们强化了低光表现,以及家庭和朋友用例、变焦和近摄对整体得分的影响。

 使用场景分数

在新基准的成绩下面,除了惯常的属性得分外,我们还根据消费者研究中的参与者优先考虑的用例来呈现测试结果。我们在测试中涵盖了更多用例,但我们仅选择四个最重要的用例,在我们的测试结果中详细介绍:

  • 人像:这是一个非常典型的用例,在 2021 年 12 月 YouGov-DXOMARK 调查中,占参与的用户所拍摄的照片和视频的 50% 以上*。在这个用例中,智能手机摄影者希望获得逼真宜人的肤色、适时摄得图像、自然的对比度和面部细节,以及运动定格等图像质量特征。该测试项目的分数是根据在照片、视频、预览和散景测试中收集的所有数据计算得出的。
  • 低光表现:这是一个非常棘手的用例,即使是超高端手机的用户也会发现,在低光下获得出色的图像质量并不容易。根据 DXOMARK 的调查,这也是用户不满的一大来源。只有 50% 的用户对他们在低光下拍摄的图像和视频影片的质量感到满意。低光图像应呈现自然的曝光和色彩,在细节保留和图像降噪之间也应该取得良好平衡。然而,在录制视频片段时,这种权衡甚至比静止图像更难实现。摄像头还应该能够以最低限度的运动模糊来凝结场景中的运动。在 DXOMARK Camera 测试基准的第 5 版中,我们增加了低光分析的测试内容。我们采用一个着眼于该主题的焦点组,能够考虑到更多的消费者偏好。我们在定义哪些属性构成可接受的低光图像方面投入了很多心力,因此我们能够改进所有实验室指标,以更好地满足 2022 年消费者的期望。此外,夜间摄影不再是照片评分下的属性,而是被纳入低光评分中。
  • 户外和室内:低光目前是区别智能手机摄像头表现的最关键属性,而所有新创建的测试结果也将包含室内和户外用例的分数。

新基准和扩充测试项目

广角和远摄变焦分数的扩充

变焦性能是高端和超高端(600 美元以上)智能手机的关键差异化因素。在这些类别中,大多数手机都配备了专用的远摄变焦和超广角摄像头。根据 YouGov-DXOMARK 调查*,30% 的用户使用智能手机的变焦功能,因此制造商投入大量心力来改进手机的变焦功能也就不足为奇了。随着时间的推移,当今高端手机使用的变焦技术无疑会逐渐渗透到价格较低的领域中,这对于预算导向的消费者来说是个好消息。

在 DXOMARK Camera 测试基准第 4 版中,我们首次引入了专用的变焦分数。除了实验室测试外,DXOMARK 工程师还对超过 35 个真实场景进行深入的感知评鉴,其中涵盖风景、城市景观、建筑、室内设计、人像和静物。现在第 5 版增加的测试如下:

  • 在实验室中进行新的视频变焦评鉴:DXOMARK 现在会评鉴视频从超广角到远摄的变焦质量
  • 低光和极低光:变焦测试现在也会在 5 勒克斯的极低光水平下进行
  • 测试屏幕变焦按钮:我们现在也会测试手机摄像头应用程序 UI 的变焦按钮提供的图像质量
  • 增加的实验室测试:我们在感知场景中增加了变焦测量的数量。变焦测量现在包括 DXOMARK Chart (DMC) 上的测量(测标曝光和白平衡)和 AI 指标(细节保留和噪点)、一系列连拍的可重复性(包括每次拍摄后的摄像头散焦)、新的视频测量(在录制之前和期间进行捏合变焦),以及变焦流畅度的感知评鉴。现在还针对两种不同的捏合变焦动作(分别从超广角到等效 72 毫米和 144 毫米)评鉴变焦流畅度。

近摄

长期以来,近摄,或针对人眼看不到的物体和细节拍摄的微距摄影一直是一门摄影学科,但在过去,这类摄影通常需要可更换镜头的摄像头和专用的微距镜头。最近,我们看到越来越多的智能手机摄像头具有近摄功能,并且有 7% 的用户使用该功能*,这一事实表明,人们对微距的兴趣正在增长,因此 DXOMARK 将近摄测试添加到摄像头基准中。

近摄测试旨在为照片分数加分,这意味着,如果手机带有此功能,则可以获得加分,但没有近摄功能的手机并不会被扣分。新的近摄相关测试包括以下内容:

  • 文件扫描场景:以三种不同的方式拍摄一份官方文件(例如护照或国民身份证),以涵盖大多数扫描场景。我们首先以全尺寸和极大的放大率拍摄。该测试旨在检查摄像头是否可以通过以下两种方式摄入足够多的小细节:将摄像头镜头非常靠近文件,或者保持在原始距离并使用变焦以获得最多的细节。
  • 三个额外的近摄场景:在上述两个小细节文档扫描测试中,如果摄像头在至少一个测试中摄入足够多的细节,那么 DXOMARK 测试人员将会拍摄三个额外的场景,随后评鉴图像质量属性,并将评鉴重点放在细节保留上。这些额外的测试侧重于静物微距摄影。

人像用例:在 HDR 条件下,以及对移动对象进行测量

智能手机用户在各种条件下拍摄家人和朋友的照片,包括在棘手的逆光和其他高对比度条件下,可能有运动的被摄体,也可能没有。在摄像头测试基准第 5 版中,我们扩展了 HDR 摄像头测试内容,涵盖了一系列新测量,包括:

  • 人像 HDR 实验室设置:我们对面部细节添加了新的 AI 测量,以及动态范围和对比度的客观测量,使得 HDR 人像设置得到了显着改进。一如往常,除了客观测量之外,我们也进行感知评鉴。这些新增的测量可以对各种光照条件下的人像纹理进行更详尽完整的评鉴。
  • 运动场景评鉴:在任何光照条件下,对于摄像头来说,在场景中捕捉运动片刻都是一项艰巨的任务,这在高对比度场景中尤其棘手,因为这些场景需要复杂的算法,例如 HDR 或运动检测。为了更好地评鉴这种场景,我们在实验室测试中添加了运动模糊测量。整体测试已扩展到 24 种光照条件。

新影像基准第 5 版测试结果

DXOMARK Camera新版本并没有完全重新洗牌我们目前的排名。摄像头第五版只是我们的摄像头第四版的自然和更深刻的演变。在第四版下获得高排名的智能手机摄像头在新协议下仍将获得良好的排名。但为了反映我们测试的最新深入补充,排名还是有一些调整,如在这里看到的:

为了让您更好地了解上述基准更新后的预期结果,我们将在本节中概述苹果 iPhone 13 Pro Max 和三星 Galaxy S22 Ultra(Exynos)两款广受欢迎的手机的新测试结果,并说明此次更新如何影响第 5 版的总分。

苹果 iPhone 13 Pro Max

特写:顶级 iPhone 的上一代手机是我们迄今用于近摄的最佳手机之一。它的图像测试结果非常四平八稳,具有相当丰富的细节,可观察到伪像,但都在可接受的范围内。

人像:该手机也是家庭和朋友用例中表现最好的产品之一。新的扩充分析提供了许多额外的信息。我们的测试人员发现 iPhone 13 Pro Max 可以很好地为运动定格,很好地控制低对比度问题,并在所有光照条件下呈现良好的肤色。

低光表现:该 iPhone 在低光用例中的表现不如家人和朋友,因此这款苹果旗舰在新的摄像头第 5 版排名中无法位居榜首。

三星 Galaxy S22 Ultra(骁龙)

特写: 三星 Galaxy S22 Ultra 在这一类别中也是一款好手机。Exynos 和骁龙版本都拍摄了与 iPhone 13 Pro Max 出图非常相似的高质量近摄图像,但细节较少。

人像: 这个用例得分没有其他一些顶级手机那么高。我们的测试人员在各种 HDR 条件和低光下测得了更长的快门延迟。对于依赖即时摄影的摄影者来说,这可能会构成一大问题。

变焦: 在我们的变焦测试中,新的低光元素揭示了三星耐人寻味的优势,在超广角和远摄两种变焦中都是如此。在我们的测试中,S22 Ultra 展示了极佳的耐用性,也是最具前瞻性的设计之一,为变焦和整体得分赢得了额外的分数。

在第 5 版下,图像质量对摄像头分数的影响更大

对比度:保留良好的对比度很重要,在人像和逆光场景中尤其如此。与该主题相关的消费者反馈研究表明,消费者不喜欢低对比度的人像照片。随着当前 HDR 技术的发展,图像质量整体提高,对比度也变得更加重要。在 DXOMARK Camera 测试基准的第 5 版中,我们使用新的测量(局部对比度指示器)和基于消费者反馈的新感知分析指南扩充了对比度评鉴的内容。因此,某些手机的得分,例如小米 11 Ultra 和 12S Ultra 或华为 P50 Pro,会稍微受到低对比度演色性的影响。

场景中的运动:在场景中拍摄正确的瞬间和定格动作是摄影的重要功能。我们的测试更新表明,某些手机在这方面明显优于其他手机。例如,在这方面,荣耀 Magic4 Ultimate 在室内照明下的表现非常出色,而华为 P50 Pro 或 iPhone 13 Pro Max 等其他手机则在移动被摄体的细节呈现上更加勉强。

These unnatural photos, above and below, will be penalized more
under the Camera V5 protocol.

低光和夜间“氛围”:曝光是低光摄影的关键要素。我们的焦点组结果表明,观众不喜欢曝光过度、无法传递低光气氛的低光或夜摄照片。因此,我们更新了极端低光下测标曝光的评鉴准则。在测试中,一些手机在低光和极低光下拍出了明亮的测标曝光,背离了用户的偏好。诸如华为 P50 Pro、小米 12S Ultra 和苹果 iPhone 13 Pro Max 等手机在更新后的评分系统中会丢失一些分数。

音频的新测试属性

测试和测量

DXOMARK Audio 评分的整体结构保持不变,只有播放和录制的细项分数。但是,我们增加了两项新测试属性,风噪声和音频变焦,以评鉴较高级的智能手机的音频功能的性能。

风噪

风噪声可能会破坏原本完美的录音,已被认定为智能手机录制中最令人懊恼的问题。DXOMARK Audio 实验室中的全新设置可测量风噪声对在各种角度上和风速范围内的各种录制的影响。

在音频分数结构中,风噪声测量可以为朋友和家人视频、自拍视频和语音备忘录用例分数加分或扣分。在 DXOMARK 网站上公布的测试结果中,消费者将能够比较多款手机的风噪声曲目的录制。

音频变焦

音频变焦是一种越来越流行的智能手机音频功能。它允许用户录制来自特定方向的声音,并削弱自其他方向传入的声音。这通常是动态控制的,例如与摄像头的远摄变焦结合使用。

音频变焦测试包括客观测量和感知测量,可以广角、远摄和超远摄变焦的全新设置上进行。在测试结果中,我们将音频变焦测量结果注入方向性测量中。

使用更多的自定义曲目,以进行精确的评鉴

大多数音频手机的测试人员和评测者都使用测试播放列表来收听特定的音频线索。在扬声器或耳机上播放时,这些在自定义下创建的歌曲集有助于突出诸如动态、失真、音调平衡、低音端扩展和空间广度等音频属性。2020 年,DXOMARK Audio 团队委托多位音乐家为我们量身定制,创作测试的自定义曲目,其中包含 DXOMARK Audio 基准所需的所有声音属性。最初,他们创作了 10 首曲目。在音频基准的第 2 版中,我们添加了新的曲目,可以进行更精确、更全面的测试。

 音频第 2 版结果

与其他基准一样,新的音频评分规则将会奖励表现四平八稳的手机,并扩大标度,以更好地区分不同的性能水平。音频变焦和风噪声性能最佳的手机会获得加分。

在更新后的音频排名中,黑鲨 5 Pro 在各个方面都稳坐王者宝座,在新的风噪声评分中表现尤为出色。华硕手机的排名上升,这要归功于其整体良好的性能,iPhone 13 Pro Max 也是如此,这要归功于出色的音频变焦功能。三星 Galaxy S22 Ultra 展现了出色的风噪降噪能力,因此在排名中也攀升了几个位置。

其他DXOMARK 测试基准的更新

尽管新的测试更新主要涉及摄像头和音频测试基准,但本次更新也会影响所有其他 DXOMARK 智能手机测试基准,包括自拍、屏幕和电池。DXOMARK 网站上提供了所有基准的评分公式;测试基准之间的评区间也具有可比性;新的几何评分规则奖励所有在细项测试中表现一致的设备,不过,这不仅止于此。在 DXOMARK,我们将继续针对新技术发展和用户行为变化优化我们的测试方法。敬请期待未来的更新。

 

* 2021 年 12 月 17 日至 23 日,YouGov RealTime 调查代表 DXOMARK 进行一项调查,每个国家/地区的受试者为 2,000 人。在法国、英国、美国,这些受试者代表全国 18 岁及以上人口;在印度则代表城市人口和在线人口;在中国则使用配额方法。