译者按：大家好，我是 Laze Sun ，诺基亚于 2005 年发布了这篇论文，在文中详细介绍了其为自家产品选择图像传感器的流程，所以我顺便花时间把这篇论文翻译成中文供各位参考（部分文字有演绎）。这篇译文也许是中文圈里首个完全以利益相关方的角度来系统描述手机厂商是如何选择图像传感器的内容，如果你想知道厂商常说的定制 CMOS 究竟代表着什么，那么这篇文章非常值得一看。

原文作者：Juha Alakarhu, Eero Salmelin, and Jarkko Viinikanoja

Nokia, Technology Platforms, P.O. Box 1000, FI-33721 Tampere

juha.alakarhu@nokia.com (+358 50 4860226), eero.salmelin@nokia.com, Jarkko.viinikanoja@nokia.com

摘要：本文研究了移动成像中所使用的图像传感器的选择流程与标准。其主要挑战来自于在模组目标体积严格受限的情况下使其依旧具有良好的相机功能。图像传感器的选择是一个从对未来技术的预估到对最终产品进行基准测试的连续过程。

1、 介绍

带有相机的手机产品份额一直在快速增长，而不断增长的移动成像市场正在推动许多图像传感器供应商。

和传统数码照相机相比，拍照手机的主要优势在于终端用户几乎总是把手机带在身边，并随时可用。这对设备的尺寸和可靠性提出了很大挑战。此外，相机包含的功能越来越复杂、图像传感器的分辨率也越来越高。由于严格的尺寸要求限制，更高的分辨率往往会导致更小的像素，例如[1]。

手机上使用的相机并不是完全相同的一组设备，而是从小尺寸的泛焦设备到复杂的自动对焦乃至变焦设备。实现图像传感器的技术还包括各种类型的 CCD 和 CMOS 型设备，都拥有大量的供应商。

为指定的产品选择最合适的图像传感器是让相机达到目标的关键之一。充满挑战的手机环境以及琳琅满目的选择使得挑选图像传感器成为了一项艰巨的任务，本文对此进行了研究。

下一章节将研究图像传感器的跟踪和选择流程，而在第三章节中则阐明了在移动成像应用中的选择标准和挑战，第四章节为全文总结。

2、 跟踪和选择流程

由于产品的开发周期紧张，所以有时在样品可用之前就需要对图像传感器进行初步选择。解决这个矛盾的关键在于和供应商保持开放和持续的沟通以及相互理解。图像传感器的性能和路线图应当可以公开交流。

选择流程的第一步是跟踪几年后可能出现在产品中的新技术。

下一步是通过使用图像传感器路线图调查问卷来探索路线图。供应商将被要求填写一张表格，其中需要包含图像传感器的路线图及其与其参数。该表格包括技术、图像质量和系统级参数。主要参数如表 1 （见文末）所示。新产品所使用的初步候选者是通过路线图数据以及供应商以往的成果和经验来决定的。调查的结果还提供了对市场接下来将要发生的事情的理解。

而对于已经可用的芯片或者相机模组，供应商需提供一系列测试图像。图 1 总结了拍摄测试图像的指南。测试图像存储在内部数据库中，并使用分析工具进行可视化分析。测试结果会将特性展现出来，例如在不同光照条件下的色彩表现和噪声变化。为了生成用于可视化分析的缩略图，首先对原图像应用自动对比度（直方图从 0 拉伸到最大值）调整，然后进行二次采样来生成调整尺寸后的图像。这种方式减少了图像中的相对亮度差异，并能够在小尺寸的缩略图中观察原始图像的噪点。

当物理芯片可用时，该流程将继续对最合适的图像传感器进行详细评估。在这个步骤里，供应商将被要求提供图像传感器的完整特性报告。报告内容必须包括诸如：测量的性能参数、光子传输曲线、暗电流分布和滤色器响应。光子传输曲线必须能体现在最小和最大增益下的时间和空间噪声。而标准移动影像架构传感器[2]也需要声明支持该标准。

在样品可用时还需要进行内部评估。在这一步，将对供应商提供的数据进行验证，并对图像传感器运行一些内部测试，例如图 2 中演示的动态范围测试。产品的实际集成也可以从这个阶段开始。

流程的最后一步则是对实际产品进行基准测试并与竞争对手的产品进行比较——包括拍照手机和数码照相机。最后阶段包含了通过一组测试人员来评估测试图像的测试——通过这种方式来制定描述主观画质的参数。同时，最终产品的测试并不会仅专注于图像传感器的性能，反而会使用产品的所有特性和功能：例如，如果产品具有闪光灯，则会在测试中使用它。测试结果将会为设计阶段下的决策提供反馈。

3、 选择标准

手机的相机大致可以分为主流和高端两个类别。在这两种情况下基础的挑战和标准是相同的，只是每个参数的重要性不同。

对于以影像为导向的高端产品，画质是第一要务，而对于大批量出货的主流产品，产能和价格可能更重要。当然，最终目标还是能够兼具良好的图像质量和有竞争力的价格。

3.1、分辨率和视频性能

照片分辨率和视频性能——例如像素数量和帧率——在营销手册中是相机所用图像传感器相关的典型参数。

手机中的相机正面临传感器像素数量的竞争，为了能够满足严苛的尺寸目标，往往会使用越来越小的像素——这个需求。小像素也对光学系统提出了很高的要求，同时衍射极限为光学系统的分辨率设定了上限。

随着用来看视频的设备越来越先进以及存储介质的容量越来越大，视频分辨率也变得越来越高。另一方面，目前主流的视频帧速率为 15fps 和 30fps，但是即使是 60fps 也有助于减少 CMOS 的滚动快门失真。

为了满足高分辨率和帧速率的要求，可能需要在图像传感器中加入合并采样或数字缩放功能——例如标准移动影像架构配置文件 2。如果图像传感器支持缩放，那么还应包括对图像进行窗口或裁切处理以实现高素质的数码变焦。

3.2、图像质量

终端用户所能感知到的最终图像质量是由以下几个因素综合决定：图像传感器和光学系统的性能、算法（例如[3]）以及显示质量。本文主要着重于讨论图像传感器的选择。

在评估图像质量时，噪声水平和色彩还原方面的问题对用户来说的感知是最明显的。由于缺乏高出力的闪光灯（会太大）以及小像素，移动成像在低光照条件下的噪声水平是一个特殊的问题。另外由于小像素的满阱容量较低，在明亮环境下的噪声水平也成为了一个更具挑战性的问题。

问卷（表 1）中如下几个参数主要侧重于弱光性能：读出噪声、灵敏度、量子效率和暗信号非均匀性。而另一方面，满阱容量以及光响应非均匀性则会影响图像在亮部区域的噪声水平。

在移动成像中的色彩还原问题往往是因为需要以牺牲色彩性能为代价来提升其他参数（例如噪声水平）。色彩性能是使用信号非线性、滤色片响应以及测试图像来评估的。

动态范围不足在户外摄影中尤为明显。动态范围也是与小像素相关的挑战。当像素尺寸变小时，很难保持满阱容量与噪声级的比值。

暗角是移动成像中的一大挑战。光学系统高度越小导致越大的主光线角和图像传感器的暗角。而在当光学系统可以移动时这个问题会更加明显。在这种情况下，主光线角不恒定，优化微透镜的位移变得更加困难。像素的堆叠高度和最大传感器接受角是用于测量给定光学系统暗角的参数。

随着像素尺寸变小，像素串扰则是另一个越来越重要的参数。像素串扰可能会导致特殊形式伪像的图像模糊。在图像传感器问卷中会涵盖串扰部分。而更详细的信息，包括电气、光学和滤色片串扰之间的占比，必须包含在完整的传感器特性报告中。

最后，一些特殊技术限制也包含在画面质量评估中，例如涂抹和滚动快门失真。

对于每个参数的数值本身并没有严格要求。考虑到图像质量的主观性，为每个参数设定限制是不现实的。

3.3、系统层面

对于电磁兼容性而言，手机是一个严峻的环境。因此，所有的产品组件都应尽可能地使用串行总线，例如 CCP2[4]。串行总线地另一个好处在于节约了相机模组的输入输出引脚。

无论是在高端还是主流产品中，图像处理都是在图像传感器芯片之外完成的。因此，图像传感器需要支持原始数据（RAW）输出。如果图像传感器拥有缩放器——我们在 3.1 章节讨论过——那么它必须是原始（RAW）图像缩放器。将图像传感器和图像处理器当作互相独立的芯片来处理，可以为这两个部件选择最优的选项。

3.4、时间表、生产能力以及价格

在考虑哪些图像传感器应该成为给定产品的候选者时，它的时间表应当是需要首先考虑的参数。供应商能在图像传感器路线图方面提供良好的透明度也有助于产品规划和调度。

主流产品的产量通常远高于高端产品。由于主流产品产量大，每个图像传感器至少需要两个来源，真正能够实现这个目标的是标准移动影像架构标准[5]，主流产品只考虑能完全兼容标准移动影像架构的产品。

由于高端产品的优先级不同，因此不需要考虑标准移动影像架构的兼容性。然而，即使在功能上的选择更加灵活，高端产品的图像质量也不能妥协。

手机市场对价格非常敏感，尤其是主流产品。然而，高端产品用的图像传感器也需要具有竞争力的价格。

4、 结论

本文研究了移动成像用图像传感器的选择过程和标准。其中大多数挑战来自在要求小相机尺寸的同时仍具有良好的相机功能。此外，还需要产能高和有竞争力的价格——尤其在主流产品中。图像传感器的选择是一个连续的，有众多步骤的过程：包括未来技术评估、路线图探索、初始性能研究、完整功能描述报告、内部测试评估、产品集成以及最终产品的基准测试。

表 1：部分图像传感器参数问卷：

译者：这是我第四次翻译英文文献，但是是第三次出于爱好翻译一篇非自身专业的文献，可能在一些专业概念和专有名词的使用上还会有一些偏差和错误，欢迎各位大佬指正。

本译文鸣谢： @LycheeLi荔枝荔 @光的白龙 提供帮助。

参考

1. ^Masahiro Oda, Takayuki Kaida, Shinichiro Izawa, Takahiko Ogo, Kazutaka Itsumi, Yoshihiro Okada, Kazuhiro Sasada, “A 1/4.5in 3.1M Pixel FT-CCD with 1.56μm Pixel Size for Mobile Applications”, in Digest International Solid-State Circuits Conference, San Francisco, CA, USA, February 2005, pp. 346 – 347.

2. ^Nokia and ST, SMIA 1.0 Part 5: Camera Characterization Specification, 2004.

3. ^Nokia，Camera Imaging Chain, 2004, http://www.nokia.com/nokia/0,8764,54238,00.html

4. ^Nokia and ST, SMIA 1.0 Part 2: CCP2 Specification, 2004.

5. ^Nokia and ST, SMIA 1.0 Part 1: Introduction and overview, 2004.