Webcam_NBam ISP 工作原理简介.docVIP

一．題目： 　　Webcam ISP 工作原理簡介　　 二．摘要： 　　ISP 是Webcam中的重要搭配零組件，ISP主要負責對感測器中出來的圖像資料進行後處理。直接從感測器中得到的圖像是很糟糕的，不論色彩還是細節都與實際圖像有很大差距，只能看到圖像的中物體的大致輪廓。 　經過ISP的處理，包括內插、去噪、去壞點、邊緣加強、膚色矯正、白平衡等操作後，可以使圖像變的更加細膩，更加貼近真實世界中的圖像。ISP的主要功能包括線性糾正、雜訊去除、壞點去除、內插、白平衡、自動曝光控制等。 　 三．內容 Webcam/NBCam ISP 方塊圖 工作原理: CMOS Sensor 使用傳統的Parallel 或MIPI CSI-2 的介面與ISP 做影像的傳輸, 合併CMOS Sensor 介面支援10 bit高品質的Jpeg, RAW, YUV 格式的影像, 影像的解析度根據ISP 型號的不同可支援1.3M(1280x1024) 到3.0M(2048x1536)的CMOS Sensor, 當數位影像輸入利用CDSP處理色彩運算,壞點去除,空間Noise消去,自動對焦,自動曝光,自動白平衡,HDR 等功能,利用MCU 8032 CPU 來處理這些功能的程式運作, 程式Code燒錄在外掛的serial flash,經處理的影像信號RAW/YUY2/M420/MJPEG利用USB 2.0 HS/FS 的介面輸出到PC/NB, 在高速的USB 2.0 介面可傳輸FHD(1920x1080) 30fps 的影像。 相關名詞說明 1.何謂CCD sensor 與CMOS sensor? CCD(Charge Coupled Device, 感光耦合元件)為數位相機記錄光線變化的半導體,CCD主要材質為矽晶半導體,透過光電效應,由感光元件表面來感應光源,從而轉換成儲存電荷的能力,CCD元件上安排有通道線路,將這些電荷傳輸至放大解碼元件,就能還原所有CCD感光元件產生的信號,並購成一幅完整的畫面。 CMOS(Complementary Metal-Oxide Semiconductor,互補性氧化金屬半導體),CMOS具有指有在電晶體需要切換開關才需耗能的優點,因此非常省電且發熱少,CMO也用來生產CMOS Sensor, 這是一種光感元件,透過將羅及運算功能轉變成接受外界光線後轉換成電能,在透過晶片上數位類比轉換器(ADC),將感應的影像信號轉換為數位訊號輸出。 2.CCD Sensor 與CMOS Sensor 優缺點比較 CCD CMOS 設計 單一感光器 感光器連結放大器 靈敏度 同樣面積下較高 感光開口小較低 成本 高(線路品質影響良率) 低(整合製程方式) 解析度 高(因結構複雜度低) 低(因傳統技術) 雜訊比 低(單一放大器主控) 高(多元放大器) 耗能比 高(需外加電壓導出電荷) 低(畫素直接放大) 反應速度 慢 快 IPA(個別畫素定址) 無 有 製造機具 特殊定製機台 可使用記憶體或處理器製造機 3. 何謂MIPI CSI-2傳輸介面? 行動處理器介面(Mobile Industry Processor Interface), MIPI架構可透過減少其差分串列介面中的輸入/輸出(I/O)來降低處理器的接腳數目及功耗，因而成為最佳選擇。動態可調的低功耗(Low-power, LP)資料模式和高速(High-speed, HS)資料模式以及高速模式下的低訊號擺動(Signal Swing)，也可為MIPI提供比單端介面更好的電磁干擾(EMI)輻射和EMI電磁干擾容忍性能。MIPI 架構設計為每個數據線支援80Mbps 到1Gbps的傳輸資料速率,支持單一時脈通道,以串列方式傳送資料以達到最大傳輸的吞吐量。 CSI-2 (Camera Serial Interface 2)規格為訂定Camera發射器與ISP接收器之間的標準傳輸與控制介面。 4. CDSP 功能? 彩色數位處理器(Color Digital Signal Processing),DSP其特性在於能夠即時處理數位訊號，以便為連續的類比訊號進行測量或濾波。在進行數位訊號處理之前必須先透過類比數位轉換器(ADC)將訊號從類比轉換成數位；而數位訊號處理的輸出則再透過數位類比轉換器(DAC)變換為類比訊號輸出,在Webcam ISP可以為處理CMOS 進來color 信號的鏡頭陰影補償, 壞點隱藏,光學黑色補償, GAMMA修正, 銳利提高,亮度/對比調整, 喜好顏色的調整和色調的映像圖。 5.貝爾圖(Bayer pattern) 在透鏡感測器使用貝爾圖來做色彩元素的排列,所使用的CCD/CMOS感光元件並無法分辨RGB三色,獲得影像的方法是在