Camera 图像处理原理分析 抗噪 变焦 频闪 亮度感应及曝光.pdf

Camera 图像处理原理分析- 抗噪 变焦 频闪 亮度感应及曝光 1.1 抗噪处理 AG 的增大，不可避免的带来噪点的增多，此外，如果光线较暗，曝光时间过长，也会增加噪点的数目（从 数码相机上看，主要是因为长时间曝光，感光元件温度升高，电流噪声造成感光元件噪点的增多），而感 光元件本身的缺陷也是噪点甚至坏点的来源之一。因此，通常sensor 集成或后端的ISP 都带有降噪功能 的相关设置。 1.1.1 启动时机 根据噪点形成的原因，主要是AG 或Exptime 超过一定值后需要启动降噪功能，因此通常需要确定这两个 参数的阙值，过小和过大都不好。 从下面的降噪处理的办法将会看到，降噪势附带的带来图像质量的下降，所以过早启动降噪功能，在不必 要的情况下做降噪处理不但增加处理器或ISP 的负担，还有可能适得其反。而过迟启动降噪功能，则在原 本需要它的时候，起不到相应的作用。 1.1.2 判定原则和处理方式 那么如何判定一个点是否是噪点呢？我们从人是如何识别噪点的开始讨论，对于人眼来说，判定一个点是 噪点，无外乎就是这一点的亮度或颜色与边上大部分的点差异过大。从噪点产生的机制来说，颜色的异常 应该是总是伴随着亮度的异常，而且对亮度异常的处理工作量比颜色异常要小，所以通常sensor ISP 的 判定原则是一个点的亮度与周围点的亮度的差值大于一个阙值的时候，就认为该点是一个噪点。 处理的方式，通常是对周围的点取均值来替代原先的值，这种做法并不增加信息量，类似于一个模糊算法。 对于高端的数码相机，拥有较强的图像处理芯片，在判定和处理方面是否有更复杂的算法，估计也是有可 能的。比如亮度和颜色综合作为标准来判定噪点，采用运算量更大的插值算法做补偿，对于sensor 固有 的坏点，噪点，采用屏蔽的方式抛弃其数据（Nikon 就是这么做的，其它厂商应该也如此）等等。 1.1.3 效果 对于手机sensor 来说，这种降噪处理的作用有多大，笔者个人认为应该很有限，毕竟相对数码相机，手 机sensor 的镜头太小，通光量小，所以其基准AG 势必就比相机的增益要大（比如相当于普通家用数码 相机ISO800 的水平），这样才能获得同样的亮度，所以电流噪声带来的影响也就要大得多。这样一来， 即使最佳情况，噪点也会很多，数据本身的波动就很大，这也就造成我们在手机照片上势必会看到的密密 麻麻的花点，如果全部做平均，降低了噪点的同时，图像也会变得模糊，所以手机噪点的判断阙值会设得 比较高，以免涉及面过大，模糊了整体图像。这样一来一是数据本身就差，二是降噪的标准也降低了，造 成总体效果不佳。 1.2 数码变焦 数码变焦可以有两种形式： 其一，是通过插值算法，对图像进行插值运算，将图像的尺寸扩大到所需的规格，这种算法就其效果而言， 并不理想，尤其是当使用在手机上的时候，手机上的摄像头本身得到的数据就有较大的噪声，再插值的话， 得到的图像几乎没法使用。实际上，即使是数码相机的数码变焦功能也没有太大的实用价值。如果插值算 法没有硬件支持，则需要在应用层实现。我司某平台的数码变焦用的就是该种办法。 其二，其实是一种伪数码变焦的形式，当摄像头不处在最大分辨率格式的情况下，比如 130 万像素的sen sor 使用640*480 的规格拍照时，仍旧设置sersor 工作在1280*960 的分辨率下，而后通过采集中央 部分的图像来获取640*480 的照片，使得在手机上看来所拍物体尺寸被放大了一倍。也有很多手机采用 的是这种数码变焦方式，这种办法几乎不需要额外的算法支持，对图像质量也没有影响，缺点是只有小尺 寸情况下可以采用。此外在DV 方式下也可以实现所谓的数码变焦放大拍摄功能。（这应该是一个卖点， 对Dv 来说，这种数码变焦还是有实际意义的） 要采用这种变焦模式，驱动需要支持windowing 功能，获取所需部分的sensor 图像数据。 1.3 频闪抑制功能 1.3.1 何谓频闪 日常使用的普通光源如白炽灯、日光灯、石英灯等都是直接用220/50Hz 交流电工作，每秒钟内正负半周 各变化50 次，因而导致灯光在1 秒钟内发生 100 （50×2）次的闪烁，再加上市电电压的不稳定，灯光 忽明忽暗，这样就产生了所谓的“频闪”。 下表显示了几种光源的光强波动情况： 因为人眼对光强变化有一定的迟滞和适应性，所以通常看不出光源的亮度变化。但是依然还是会增加眼睛 的疲劳程度。所以市场上才会有所谓的无频闪灯销售。 1.3.2 对频闪的抑制 对于camera sensor 来说，没有人眼的迟滞