央视的《手机相机测试质量报告》真的靠谱吗
文/李侃 (出品自Zealer|Lab)
背景介绍：近日，央视《每周质量报告》节目上随机选取了苹果、三星、诺基亚、联想、OPPO、LG、索尼、TCL 以及 nubia 这 9 个品牌 10 种型号的手机进行了拍照测试。结果显示，10 款手机中，拍照全部符合标准的只有 2 款，而三星 Galaxy S5 ( SM-G9008V ) 、苹果 iPhone 6 ( A1586 ) 、诺基亚 Lumia 930 等八款产品的拍照性能均不合格，主要问题集中在色彩还原准确度、曝光量误差、动态分辨率等项目上。
关于央视节目所采用的相关国家标准：
《 GB/T 29298-2012 数字(码)照相机通用规范》
《 SJ/T11415-2010 非广播用数字摄录一体机通用规范》
《 YD/T 1607-2007 数字移动终端图像及视频传输特性技术要求和测试方法》
由于现阶段智能手机相机功能的特殊性，这些标准并不能很好的匹配现阶段产品及市场现状。这一点来看，被点名的几个品牌真挺委屈的，不是说厂家不按照这个标准来，是现阶段确实没有合适的标准去参考，由于手机的用户使用场景和产品特性所限，直接简单粗暴的采用数码照相机的标准来测试检验是否达标，不具备任何意义。拿上面所提到的三个国标来看，勉勉强强能用到手机上的是：《 YD/T 1607-2007 数字移动终端图像及视频传输特性技术要求和测试方法》。
但有两点需要指出：
该标准发布于 2007 年，目前来看其测试手段及对应算法已经远远落后于国际上 IEEE 、CPIQ 等国际标准化组织近几年专门针对手机推出的新测试标准。例如视频中所提到人眼判断解析力喇叭图等方式，由于主观因素过大，现阶段已经被国际上各大测试机构所淘汰。属于严重滞后标准。
YD/T 后面加上 /T 意味着该标准为 非强制性标准，作用仅仅是为了提供测试方法的参考性。具体是否采用，全权取决于厂家或测试机构意愿，国家监管机构仅对此标准持推荐态度。如果没有写入经双方同意的经济合同中，该标准是不具备任何法律效力的。
由此来看，视频中浙江省消费者权益保护委员会所委托的国家照相机质检中心实验室所提供的测试方案和遵循标准，指导性极其有限。换个角度来看，产品力驱动的厂家，都不会去刻意沿用一个过时的，甚至有可能阻碍产品性能提升的非强制性标准。
实际上，国家工信部也意识到了这个问题，在今年已经开始针对视频中提到的 YD/T 1607-2007 标准，向部分企业和测试机构发放征求意见稿，目的在于改进和取代现有陈旧标准。作为一个专业机构，国家照相机质检中心显然没有及时予以跟进。事实上对于新标准我们也在积极参与，希望能够在不久的将来对整个行业有所助力。
关于测试方法：
解析力方面，首先能看到视频中使用的是传统的 ISO Camera Resolution Chart ISO12233 标准解析力测试图卡，该图卡过于老旧，目前大都是一些相机发烧友和相机模组产线上才会去使用，配合 Olympus Hyres，Imatest 等软件来对数据进行读取(基于Matlab sfrmat 由 Peter Burns 参考 ISO12233 标准编写)，以 MTF/SFR (调制传递函数/空间响应频率)形式展现。该方案主要特点是价格便宜，整套测试平台搭建简单，适合对测试精度要求不高的场合。缺点也很明显，由于图卡不支持 OECF 光电转换系数(缺省 gamma 值预设为 0.5 或 1 )，无法定义灰阶，导致测试结果稳定性很差，光照些微变化就会让结果产生明显异常波动，而且有精度很容易被机内锐化算法影响等诸多问题。具体究竟有多难用，你用过才知道。
另外视频中所采用的，是 ISO12233 图卡的肉眼观察检测，方法是观察者通过观察喇叭图的线条清晰程度和粘连程度来判断解析力的大概范围。这个办法是极其不严谨的，由于主观因素太重，存在太多不可控状况，导致数据波动很大，仅适合做一些粗略的估算。现如今国际上，大部分专业相机测试机构或网站都已经摒弃了该方法。
那是否有新的测试方法呢？有的，而且就是在去年发布的 ISO12233:2014 ，最大的变化是加入了 Siemens Star 西门子星图来对解析力进行测试。
具体测试方案如下图所示(拍摄于 ZEALER|LAB ，类似实验室大都不允许随便拍照)，可以看到标版上均匀分布着 25 个圆饼状的西门子星图，它可以直接读取出对应位置各个角度的解析力情况。
根据 ZEALER|LAB 以往几百台手机机型的测试经验来看，这个方案的稳定性很高，多次测量前后误差小于 1% (实际上千分之一左右)，而且能够大幅降低锐化算法的不良影响，提高精度。尤其是适合测试手机这类以输出大幅度机内处理 jpeg 图片为主的拍照设备。相信工信部即将推出的新版 YD/T 1607 标准也会采用 Siemens Star 的测试方法，并淘汰掉节目中实验室所用的无比陈旧的标版。
所以总的来说，国家照相机质检中心的工作人员对于解析力的评判方式与测试方法并不专业，而且有一定的误导嫌疑。
色彩测试方面，从视频中所看到该工作人员在对色灯箱中的拍摄方式是极为不严格的。由于摆放方式的错误，途中 Xrite 24 色色卡很有可能出现照射不均匀的情况，从而让颜色数据的读取出现误差。正确且严格的摆放方式应当将色卡放置于竖直平面，且为左右两灯各 45° 角照射，中央亮度最均匀区域放置照射色卡。