基准永远不会说出全部
我很乐意承认，这个标题可能是在世纪之交写的，当时3DMark是PC游戏玩家讨论的主要话题。但现在是2016年，随着基准测试在移动设备上的普及，我们似乎需要重新审视基准测试的问题。DxOMark的cameraphone测试已经发展成为移动世界的3DMark——一种多方面的、广泛使用的性能测试，它可以产生一个确定的标量分数——并且产生了类似的效果。**极客们正在对分数进行比较和争论，而**商们正在注意并积极优化他们的相机，以生产出更高的dxomark。不是更好的图像，更高的分数。
以HTC的10为例，这是最新的有启发性的例子。在DxOMark的移动相机基准测试中，它得了88分。如果你只是在看数字，那么这个评分就等于三星的galaxys7edge，这是唯一一款得分高达88分的智能**。我已经广泛使用了这两个，我可以告诉你，根本不是这样的情况-S7是优秀的，而10只是好的。为什么他们的分数相同，为什么索尼的Xperia Z5以不逊色的87分排名第三？
经验数据可能具有欺骗性，而且往往是不完整的
10、S7和Z5之间的共同点在于其成像传感器的卓越技术能力。但分歧在于每个相机产生的实际结果和使用该设备的经验。Z5是基准测试局限性的最好例子，因为它可以拍出精彩的照片，但大多数情况下却不能，因为它的性能落后。如果你的**软件太差了，甚至让你不敢捕捉短暂的瞬间，那么传感器的质量又有什么不同呢？
与统计数据一样，基准数据也是用来提供信息的。我们只需要小心，不要曲解他们的数字确定性，以确保事实的完整性。3DMark和DxO试图覆盖大多数使用场景，但它们永远不会覆盖所有场景，而对图形性能基准的不满部分源于它们对实际游戏性能的反映不足。
如果笔记本电脑或**在网络浏览的电池基准测试中表现出色，那只能说明它在处理更大的工作负载时可能表现得也不错。但不总是这样。我的好朋友Anand Shimpi以前是AnandTech的，他曾经很好地阐述了这一点，他指出，当MacBook Pro的使用变为持续繁重的工作负载时，MacBook Air的电池寿命比MacBook Air（被誉为耐力冠军）要好。Pro在这种情况下效率更高，但大多数电池测试都不够复杂或动态，无法解释这种细微差别。它需要一个人运行多个测试，分析数据，添加上下文和理解，以达到最高程度的确定性。
DxOMark已经成为衡量相机性能的标准
尽管基准总是力求客观，但不可避免地会有主观判断的量度。例如，DxO的七个技术优先级—曝光和对比度、闪光、颜色、自动对焦、瑕疵、噪声和纹理—可能与您所重视的不同。或者它们的重量可能不同。如果你想要一部**帮你拍下孩子们在公园里玩耍的照片，你可能不在乎闪光灯，而是非常在意最快的自动对焦和图像处理。
我最担心的是，智能****商已经把DxOMark变成了他们衡量相机性能的神圣标准。我从许多安卓智能****商那里听说，在DxO的基准测试中，优先考虑获得尽可能高的分数。摩托罗拉去年推出了旗舰产品Moto**，这让摩托罗拉大赚了一笔，索尼显然一直在密切关注排名，HTC也在确保所有人都知道它拥有（共享的）最佳分数。
当我问HTC 10的相机是不是专门为DxO的基准而设计的时，HTC只给出了一个简单的回答：它的目标是尽可能提供最好的移动摄影体验。只有事实与它的说法相矛盾。HTC 10上的自动对焦在DxO上取得了非常好的93分，但HTC刚刚不得不发布一个软件更新来修复其自动对焦算法，该算法在显示有关阻碍对焦激光的警告时过于恐慌。这是一个明显而恼人的可用性问题，但不是一个技术测试会发现的问题。还有一件事DxO没有告诉你：HTC的相机软件只计算全帧曝光，不允许点击取景器上的某个区域专门为它曝光。
做好基准是必要的，但还不够
在智能**用户体验设计中，有一个环节是围绕着“草率的交互”而构建的，正如诺基亚前设计总监马尔科·阿赫蒂萨里（Marko Ahtisaari）曾经说过的那样。它是诺基亚N9界面的基础，几乎完全超出了任何基准测试的范围——其目标是让设备以草率的方式易于使用，就像人们在现实世界中所做的那样，这与以测试要求的可重复方式使用设备完全背道而驰。这些无法量化但仍然非常真实的设计考虑因素与基准测试产生的硬数据之间的紧张关系是每个设备**商都必须面对的挑战。在基准中获得高分是必要的，但还不够。
从基准测试和其他实证测试中可以收集到有价值的信息。看看DxO网站上的排名，我看到了很多我最喜欢的相机，比如lgg4和iphone6s Plus，但我也看到了Nextbit Robin获得了81分，而大多数使用过这款**的人都会说相机可能是它最大的弱点。尽管如此，一个技术上无能的摄影师还是无法登上DxOMark的榜首，即使基准测试有时会忽略重要的缺点。因此，我解释DxOMark结果的方式是用怀疑和相称的方法。DxO告诉我谁拥有技术上优秀的硬件，然后由我来决定软件和总体用户体验是否符合这个质量。
基准是有用的工具。你只需要知道如何使用它们。
verge评论：htc 10
- 发表于 2021-05-04 10:36
- 阅读 ( 137 )
- 分类：互联网
你可能感兴趣的文章
速度、电池寿命和定制的最佳web浏览器
...如，你只能从Chrome浏览器中转换成Chromecast。 Chrome通常在基准测试中处于领先地位，显示出它也是速度最快的浏览器（见本文最后一节）。微软Edge正在追赶Chrome，可能会在一两个基准测试中超越Chrome，但Edge并没有像Chrome那样功...
如何对你的苹果操作系统或电脑进行基准测试
...中是Mac）时，你可能想检查一下它的性能。通过运行一个基准测试，您实际上可以找出您的机器在各种性能相关任务方面的得分，然后您可以将结果与其他任务进行比较。 有几种基准测试工具可用，但最常用的两种是Geekbench和Ci...
谷歌look to speak可以让你用眼睛选择和说出短语
...谷歌称，Look to Speak应用程序中的所有数据都是私有的，永远不会离开**。 一个缺点是：该应用程序的setup helper菜单可以对短语进行编辑，凝视设置可以进行微调，眼睛注视无法访问，需要手动点击**屏幕。 Look to Speak是Google在Goo...
网络的创造者从来没想过它会被用来做“小猫”
...的人。因为我们可以尝试设计完美的**系统，而这些系统永远不会是完美的，一旦失败，那么举报人可能就是拯救社会的全部。”但他指出，网络监控的某些方面可能是“打击犯罪”所必需的。“当涉及到塑造网络的未来时，伯...
别再为Note7的表现烦恼了
...用Note 7作为我的主要**已经有10天了，我在这里告诉你，基准是假的。这部**没有性能问题。 星期一，XDA的性能迷们——我用这个词是出于好意，因为我自己对速度相当狂热——发布了基准测试和测量结果，显示Gal...
oneplus正在与dxo合作，以使oneplus 5的相机更好
...ePlus 5中改进摄像头。 DxO最著名的可能是DxOMark基准测试，它仍然是智能**上相机性能最常被引用的指标之一（尽管重要的是要记住，基准测试永远不能说明全部情况），同时还开发了一些专业的摄影软件。但该公司在D...
观看全部24部詹姆斯·邦德电影可赚1000美元
...从未看过任何一部电影的话，你可能是个远大目标。但你永远不知道每个人都喜欢弱者。）不要害羞地描述你对特许经营的热情：耐德·贝尔斯说，这将在他们的选择过程中发挥很大的作用。申请必须在2021年4月16日下午12时前提...
理由和借口的区别
...们是理由，你可能会：经常迟到让别人把你当狗屎和一个永远不会让你感到特别的伴侣在一段没有成就感的关系中度过好几年，因为他们忙于生活中的每件事，除了你，而你所有的朋友都在背后议论这件事被骗被炒鱿鱼从理由中...
使用这些应用程序对图形卡进行基准测试
...正了解它们在现实世界中的性能，但除了Nvidia本身提供的基准之外，您至少可以通过测试其功能来确定是否是升级自己老化图形卡的时候了。如果你是一个大的游戏玩家，你可能已经很清楚什么设置和游戏给你一个可爱，顺利的...
grindr的新“gaymoji”提供了茄子和桃子之外的全部词汇
...嘿，我是迈克，只是想知道你这周是否有空出去玩？”我永远不会说出我在性方面想要什么，也不会列出我的欲望。但我不记得有什么特别的欲望。我只想和一个我认为**的人亲热，希望不是反社会者。虽然我可以用“没有反社...
0 篇文章
