图像融合及应用案例.docxVIP

CMOS图像传感器的工作原理：每一个CMOS像素都包括感光二极管(Photodiode)、浮动式扩散层(Floatingdiffusionlayer)、传输电极门(Transfergate)、起放大作用的MOSFET、起像素选择开关作用的M0SFET.在CMOS的曝光阶段，感光二极管完成光电转换，产生信号电荷，曝光结束后，传输电极门打开，信号电荷被传送到浮动式扩散层，由起放大作用的MOSFET电极门来拾取，电荷信号转换为电压信号。所以这样的CMOS也就完成了光电转换、电荷电压转换、模拟数字转换的三大作用，通过它我们就能把光信号转化为电信号，最终得到数字信号被计算机读取，这样，我们就已经拥有了记录光线明暗的能力，但这还不够，因为我们需要色彩。现代彩色CMOS的原理也很简单，直接在黑白图像传感器的基础上增加色彩滤波阵列(CFA)，从而实现从黑白到彩色的成像。很著名的一种设计就是BayerCFA（拜耳色彩滤波阵列）。一个很有趣的事就是，我们用来记录光影的CMOS,和我们用来输出光影的显示器，原理也刚好是向相反的，CMOS把光转化为电信号最后以数字格式记录，显示器把解码的数字格式从电信号重新转化为光。光电之间的转换也就构成了我们人类数字影像的基础。

当前主流的CMOS厂商有：索尼、三星、豪威、格科微、思特威、安森美等公司。

常见的色彩滤波阵列：RGGB：一个红光、一个蓝光、两个绿光滤波器

每个像素只能感应一种颜色的光，但是我对外输出的时候，需要知道这个像素的rgb值，我就只能通过周围像素去计算，这个计算和转换是靠ISP去完成的。进从而得出我这个像素的RGB的值，这样我每个像素虽然只感应了一种光，但是每个像素经过处理后传输到外面后就是有RGB的信息了。这些原始的感光数据成为RAWdata。

RCCC：75%部分为透传，其余25%为感受红光的滤波器。RCCC的优点是光灵敏度高，适用于弱光环境。由于RCCC只有红色光滤波器，因此主要用在对于红色标识敏感的场合，比如交通灯检测。

RCCB：50%部分为透传，其余红光蓝光滤波器各占25%。RCCB的弱光敏感性比RCCC稍差（Clear部分少），但它分辨色彩的能力更好，采集的图像既可以用于机器分析，也可以用于人眼观察。

Mono：100%透传，它不能分辨色彩。Mono配置的弱光灵敏度最高，仅用于对颜色无识别要求的场合，如驾驶员状态检测等。

几个重要参数的理解：

1、传感器尺寸：图像传感器的尺寸越大，则成像系统的尺寸越大，捕获的光子越多，感光性能越好，信噪比越低。目前CMOS图像传感器的常见尺寸有1、2/3、1/2、1/3、1/4英寸等。

2、像素总数和有效像素数：像素总数是指所有像素的总和，像素总数是衡量CMOS图像传感器的主要技术指标之一。CMOS图像传感器的总体像素中被用来进行有效的光电转换并输出图像信号的像素为有效像素。显而易见，有效像素总数隶属于像素总数集合。有效像素数目直接决定了CMOS图像传感器的能力。

3、动态范围：动态范围由CMOS图像传感器的信号处理能力和噪声决定，反映了CMOS图像传感器的工作范围。其数值是输出端的信号峰值电压与均方根噪声电压之比，通常用DB表示。

4、分辨率：对景物中明暗细节的分辨能力。

5、像元尺寸也就是像素的大小：是指芯片像元阵列上的每个像素的实际物理尺寸，通常的尺寸包括14um、10um、9um、7um、6.45um、3.75um、3.0um、2.0um、1.75um、1.4um、1.2um、1.0um等，像元尺寸从某种程度上反映了芯片的对光的响应能力，像元尺寸越大，能够接收到的光子数量越多，在同样的光照条件和曝光时间内产生的电荷数量越多。对于弱光成像而言，像元尺寸是芯片灵敏度的一种表征。

6、灵敏度：灵敏度是芯片的重要参数之一，它具有两种物理意义。一种是光器件的光电转换能力，与响应率的意义相同。即芯片的灵敏度指在一定的光谱范围内，单位曝光量的输出信号电压（电流），单位可以为纳安/勒克斯nA/Lux、伏/瓦（V/W）、伏/勒克斯（V/Lux）、伏/流明（V/lm）。另一种是指器件所能传感的对地辐射功率（或照度），与探测率的意义相同，单位可用瓦（w）或勒克斯（Lux）表示。

7、坏点数，由于受到制造工艺的限制，对于有几百万像素点的传感器而言，所有的像元都是好的情况几乎不可能，坏点数是指芯片中坏点（不能有效成像的像元或相应不一致性大于参数允许的范围的像元）的数量，坏点数是衡量芯片质量的重要参数。

8、光谱效应，指芯片对于不同光波长光线的响应能力。

技术发展趋势，体积小型化及高像素化仍是业界积极研发的目标。因为像素尺寸小则图像产品的分辨率越高、清晰度越好、体积越小，其应用面更广泛。

9、CRA角度：从