车用图像传感器参数小议——信噪比
作者|安森美中国区汽车现场应用工程经理WilliamChen智能驾驶如今渐渐成为汽车的一个常见功能，它增强了汽车和驾驶员的感知能力，降低了驾驶员的工作强度，同时可以有效提高行车的安全性。这其中，基于CMOS图像传感器的摄像头是智能驾驶系统感知外界环境的主要工具之一。CMOS图像传感器是成像sensor，它本质上是一个存储器和模数转换（ADC）的组合。基于硅的光电效应，入射光线会在传感器像素的感光二极管中激发电荷，电荷被收集存储，经过ADC转换为数字输出。Figure1光电效应从架构上看，CMOS图像传感器
作者 | 安森美中国区汽车现场应用工程经理 William Chen
智能驾驶如今渐渐成为汽车的一个常见功能，它增强了汽车和驾驶员的感知能力，降低了驾驶员的工作强度，同时可以有效提高行车的安全性。这其中，基于CMOS 图像传感器的摄像头是智能驾驶系统感知外界环境的主要工具之一。
CMOS图像传感器是成像sensor，它本质上是一个存储器和模数转换（ADC）的组合。基于硅的光电效应，入射光线会在传感器像素的感光二极管中激发电荷，电荷被收集存储，经过ADC转换为数字输出。
Figure 1光电效应
从架构上看，CMOS图像传感器类似于一个存储器memory，它有大量存储单元，支持行和列的寻址操作，区别在于存储器是电路写入内容，而sensor中的内容是可见光或近红外光线写入的。
传感器收集到的电荷包括两部分：一部分是我们期望的电荷，来源于环境光线所激发的有效信号；另一部分是用户不希望的干扰产生的电荷，干扰来源有很多种，一般统称为噪声。
我们希望图像中的有效信息越多越好，干扰噪声越少越好。一个常见的衡量图像噪声效果的指标是信噪比SNR，即信号与噪声的比值。信噪比越大，图像噪声相对含量越少，图像质量越好。SNR的单位可以是比值，也可以转成对数单位dB。
CMOS sensor的数据手册一般都会提供信噪比参数SNR，如下所示。
有一个常见的问题：46dB信噪比的sensor是不是比43dB的sensor低照效果更好？
答案是未必，脱离条件的结论往往会掉到坑里。
SNR不是一个点，它是光照条件的函数，如图2，SNR会随着光照强度变化变成一条曲线。当它作为低照效果指标时，要求选取低照条件下的SNR值。而业内sensor数据手册上的SNR参数通常是SNR最大值，对应于光照环境非常明亮时的SNR值，即图中蓝色SNR曲线右上角的SNR Max点。而蓝线位于左下角区域的SNR值才适合作为评估低照的参数，此时的光照不足，对应于低照环境。这就像卖苹果，放在上面一层是最好的，你需要翻开篮子，看看里面苹果的质量如何。
Figure 2信噪比SNR曲线
依据最大SNR点来评判sensor有以偏概全的问题。根据需要，用户可以选取特定曝光条件Exposure对应的SNR大小来评判低照噪声，SNR越大越好；也可以限定SNR为某个固定值，例如SNR=5时，用此时需要的曝光条件Exposure值大小来评判低照噪声，Exposure值越小意味着达到同等SNR时需要的光照资源越少，sensor的低照性能越好。
图2显示的是普通sensor的SNR，是单调递增的曲线。汽车上使用的CMOS sensor，为了匹配全天候应用场景，需要很高的动态范围HDR，HDR常用方法是改变sensor的灵敏度，对环境的不同亮度分别采样，再把多次采样的图像帧映射到标准化的线性数据空间，最后从不同灵敏度帧中选取合适像素，拼成一张完整的图像帧，参见《车用图像传感器参数小议——动态范围》。
sensor的灵敏度变化，对应于坐标系中的SNR线移动到不同的位置，最终HDR图像的SNR曲线演变成多条SNR曲线的拟合结果，例如图3的蓝线，它不再是一条单调递增曲线，除了低照SNR会很小以外，高亮区间还会出现多个局部极小值，当工作点落在SNR跌落区间时，即便此时环境很亮，噪声也会恶化。
这在图像上会出现一个违背人眼感知习惯的现象，即随着亮度增强，图像的质量会从差到好，然后又突然恶化的情况。因此与传统线性sensor不同，车用宽动态sensor的信噪比还需要评估高亮条件下的极小值指标。
Figure 3 HDR图像的SNR
Figure 4 SNR和噪声
车用sensor的SNR是一条非单调的曲线，汽车应用环境会让问题变得更复杂。sensor是一个模拟器件，在ADC之前，信号和噪声数据是以电荷的形式存储的，sensor的暗电流也会累积电荷，其产生速度大致上与曝光时长成正比，与温度呈指数关系。所以我们还必须考虑温度，曝光时长以及模拟增益对暗态噪声的影响。SNR同时是温度，曝光时间和模拟增益的函数，它的曲线已经变成多维的曲线簇了。
以温度影响为例，图5是SNR=10时需要的Exposure值随sensor内部温度升高的变化趋势，我们可以看到，不同sensor对温漂的敏感度是不一样的，这两个sensor的SNR曝光值在60°C时发生交叉，意味着在室温25℃和高温80℃分别评估时，得出的SNR结论截然相反。
Figure 5 晶圆内部温度影响
按照车用摄像头有效使用生命周期的温度分布，超过88%的生命周期内，sensor内部的节温超过40℃，超过80%时间内节温超过60℃，超过65%时间内节温超过80℃。
温漂影响会导致SNR曲线发生进一步变化。如图6红色虚线示意，当温度升高后，SNR曲线在低照区域和高亮局部区域会继续下跌。
Figure 6 温度对HDR SNR影响
目前业内对车用图像传感器SNR的评估，常采用欧洲机器视觉协会的EMVA1288标准来测试。EMVA1288标准中的信噪比SNR，是基于传统单调的线性sensor模型来定义的，对于车用宽动态图像传感器 SNR特性的描述并不完善。电气与电子工程师协会IEEE正在为汽车影像定义新的质量测试标准P2020，作为工作组成员之一，安森美公司承担了IEEE P2020标准中图像噪声标准的起草工作，其中就包括了SNR参数。
最后总结一下，车用CMOS图像传感器的信噪比SNR是一个关键的图像质量指标，它具有非单调特性，受到汽车应用环境的多因素影响，对SNR的评估是一个多维的综合评判工作，客观全面的SNR评价才能真实描述sensor的性能，正确指导车用成像产品的开发工作。
WPS Office是一款面向macOS用户的综合办公套件，将文字处理、电子表格、演示文稿、PDF工具、模板与云协作整合在同一应用中。它兼容常见Microsoft Office格式，支持Intel及Apple芯片Mac，基础功能可免费使用，
Shapr3D是一款面向工业设计、机械工程、建筑概念和三维打印工作流的CAD软件。Mac版采用Parasolid建模内核，支持草图约束、实体建模、工程图、可视化渲染及常见CAD格式交换，并可通过账户在多台设备之间同步项目。
REAPER是Cockos开发的数字音频工作站，提供多轨音频与MIDI录制、剪辑、处理、混音和母带制作工具。Mac版兼容Intel与Apple芯片，支持AU、VST、VST3、CLAP等插件格式，并提供高度可定制的工作流程。
Ableton Live 是面向音乐制作人与现场表演者的数字音频工作站，提供编曲视图、独具特色的现场视图、音频录制、MIDI创作、实时变速、乐器及效果器。Mac版原生支持Apple芯片，并可连接音频接口、MIDI控制器和第三方插件。
Adobe After Effects 是面向动态图形、影视特效与视频合成的专业创作软件。它提供关键帧动画、遮罩抠像、运动跟踪、三维空间、文字动画和表达式等工具，并可与 Premiere Pro、Photoshop、Illustrator
Adobe Audition 是面向播客、影视后期、音乐制作及内容创作者的专业音频工作站，提供波形精修、多轨录制与混音、频谱编辑、降噪修复、响度匹配和效果处理工具，并可与 Adobe Premiere 协同完成视频声音制作。
Adobe Bridge 是面向摄影师、设计师及内容团队的免费数字资产管理工具，可集中预览照片、视频和 Adobe 项目文件，并利用评级、标签、关键词、元数据、筛选与收藏集完成分类检索。它还支持批量重命名、格式导出、相机导入及 Camera
Adobe Illustrator 是 Adobe 推出的专业矢量图形设计软件，适合在 Mac 上制作标志、图标、插画、包装、信息图及印刷版面。它以路径和锚点构建可无损缩放的图形，并提供钢笔、形状、文字、图像描摹、渐变、画板及生成式功能。
Adobe InDesign 是面向印刷品与数字出版物的专业版面设计软件，可在 Mac 上制作书籍、杂志、宣传册、海报、报告及交互式文档。它提供精细的文字样式、网格、母版、长文档管理和印前输出能力。
Adobe Lightroom Classic 是面向桌面摄影工作流的照片管理与后期处理软件，可将原始照片保存在本地硬盘，通过目录、关键词、评分和收藏夹高效整理图库，并提供 RAW 冲印、蒙版、镜头校正、批量同步及多格式导出等功能。
Adobe Media Encoder 是 Adobe 推出的专业音视频编码与转码工具，可通过队列、预设和监视文件夹批量完成格式转换、代理文件创建及多平台成片输出，并与 Premiere Pro、After Effects 等软件紧密协作。
Adobe Photoshop 是面向摄影师、设计师和内容创作者的专业图像处理软件，提供图层、蒙版、选区、修复、调色、文字排版、智能对象及生成式编辑等能力。Mac 版支持 Intel 与 Apple Silicon 处理器。
Adobe Photoshop 是面向摄影师、设计师和内容创作者的专业图像处理工具，可在 Windows 上完成照片修饰、选区抠图、图层合成、文字排版、绘画及生成式编辑。软件采用订阅授权，由 Creative Cloud 管理安装、更新与许
Adobe InDesign 是面向印刷与数字出版的专业页面排版工具，可制作书籍、杂志、宣传册、海报、交互式 PDF 和电子书。它提供精细的文字样式、多页面管理、印前检查及多格式输出能力，并能与 Photoshop、Illustrator
Adobe Illustrator 是用于绘制矢量图形、插画、图标、徽标和版式的专业设计工具。它以路径和锚点为核心，作品放大后仍能保持清晰，并提供画板、文字、渐变、图像描摹及精确变换等功能，适合品牌视觉、印刷物料、数字界面和商业插画创作。
Adobe Bridge 是 Adobe 推出的创意资产管理工具，可集中预览、分类和查找照片、视频、PDF及多种设计文件，并支持元数据、关键词、评级、批量重命名和格式导出。它可与 Photoshop、Illustrator 等应用衔接，
Affinity Photo 是一款面向摄影师、修图师和视觉设计人员的桌面图像编辑工具，提供 RAW 显影、多图层合成、蒙版、实时滤镜、批处理和色彩管理等功能。原独立产品已停止销售，其照片编辑能力已延续至免费的新 Affinity 应用；
Adobe Lightroom Classic 是面向 Windows 桌面摄影工作流的照片管理与无损编辑工具，可通过目录集中整理大型图库，并完成 RAW 显影、局部蒙版、批量调整、打印和多格式导出。它强调本地文件管理与精细控制，
Figma 是面向产品设计与开发团队的云端协作平台，可在 Windows 桌面客户端中完成界面绘制、组件管理、交互原型、评论评审和开发交付。文件保存在云端，多名成员能够同步编辑并共享设计系统；官方同时提供免费 Starter 方案及按席位计
Affinity Designer 是面向矢量图形、数字插画和界面设计的专业创作工具，可在矢量、像素与导出工作区之间快速切换。它提供曲线编辑、形状构建、画板、排版、图层和专业色彩管理，并支持常见设计文件的导入及多种印刷、网页格式输出。
Capture One Pro 是面向摄影师和影像团队的专业桌面照片处理工具，提供相机定制色彩配置、RAW转换、图层与蒙版、联机拍摄、目录及会话管理等功能。它适合棚拍、人像、商业产品、婚礼和风光摄影，
Adobe Acrobat Pro 是面向专业 PDF 工作的综合解决方案，可在 Windows 中创建、编辑、转换、比较、整理和保护文档，并支持表单、电子签名、扫描件文字识别及敏感信息永久遮盖。订阅还包含网页、移动服务和云端协作能力，
Adobe After Effects 是面向动态图形、动画与影视视觉特效制作的专业工具，可完成关键帧动画、图层合成、遮罩跟踪、抠像、文字动画和二维三维元素整合。Windows 版通过 Adobe Creative Cloud 安装及更新，
DaVinci Resolve是Blackmagic Design推出的一体化影视后期工具，将素材管理、非线性剪辑、专业调色、Fusion视觉特效、Fairlight音频处理和成片交付整合在统一工程中。免费版已覆盖多数个人创作需求，