what is the Demosaic? CMOS/CCD在成像时,CFA(color filter array),CFA过滤不同频段的光,因此,Sensor的输出的RAW数据信号包含了3个通道的信息.人眼对绿色更敏感,因此CFA阵列设计为1/2的G分量,1/4和R和1/4的B分量. sensor输出为raw格式的数据,此时为单通道原始数据,但是我们的色彩显示设备是每个pixel包含三通道信息的.所以我们需要进行色彩插值,也就是demosaic. why does Demosaic? 还原现实…

自动曝光可以可以通过调节 模拟增益,数字增益,曝光时间,光圈大小来调剂曝光. 曝光在ISP PIPLINE的位置. (先介绍一个额外的知识点: ) gamma compression(也就是de-gamma(反向的gamma),实际上更亮的场景生成pixel值的时候被采集设备压缩了(量化的目的就是为了在有限的bit中表示更大的亮度,比如8bit量化,通过gamma压缩,实际上可以表示的亮度是大于255的.在display端需要恢复实际的场景的亮度,就是通过gamma correction来实现的…

本文为camera isp pipline概述 ISP,即image signal processing.为图像成型做的处理工作.适应不同光学环境下图像的还原. pipline流程如下: 光通过LENS(镜头)投射到SENSOR,经过光电转换为模拟电信号,在A/D转换为数字信号,送到DSP处理模块做后续处理. Bayer format 图像,经过黑电平补偿 ( black level compensation).镜头矫正 ( lens shading correction).坏像素矫正 ( ba…

前言: 上一篇文章: ISP PIPLINE (五) Denoise 下一篇文章: (1)3A定义包括什么 Iris:自动光圈,根据环境自动调节光圈. 既然讲到光圈,就先看一下光圈是什么,以及它如何影响亮度以及景深的. 光圈主要有两个作用,一是影响光量.二是影响景深. 作用一,影响光量. 不多说上图: 作用二,影响景深. 不多说上图: 光圈是如何影响景深的: 景深是如何影响背景虚化效果的: 下图中可以判断大光圈造成景深变小(至于为何可以看一下我专栏里介绍的弥散圆的知识).光圈变大,景深变小,背景…

什么是color correction? 为什么要进行color correction? 转换后的色彩饱和度更加明显,更加符合人眼感官. 如何进行color correction? 下图是步骤: 第一步:之所以用标准24色图srgb求逆运算gamma,就是因为ccm在gamma之前,为了抵消掉真正的gamma带来的影响,我们只需矫正到gamma之前的状态. 通过迭代运算,直到和target rgb mean差异达到阈值以下即可. 调试时注意事项: 既然ccm有缺陷,那么可以将srgb转换到yuv…

What is WB(white balance)? 人的视觉和神经系统在看到白色物体的时候,基本不受环境的变化而出现严重的错觉.比如阴天,晴天,室内,室外,日光灯,白炽灯等的环境下,人依然会将白纸视作白纸. 但是imagesensor这种电子器件没有心理和神经作用.受制于环境色温的影响.拍出的照片会出现偏色的情况. 色温的定义:一个黑体加热之后,随着温度的升高,黑体会先发出红色,然后越来越亮,变成黄光,在变成白光,直至蓝光,这个温度就是色温. 下面看几组照片:     7700k       …

what is the LSC? lens shading 分为:Y-shading , color shading. 在讲LSC之前,我们先来理解一个重要的术语--CRA(Chief ray angle). CRA:分为lens cra , sensor cra两种. 1.1什么是lens CRA? 定义:最大像高处的主光线与光轴的倾角.备注:最大像高定义为 像素响应降低为零度角像素响应的80%的像素点. 因为Lens CRA 的存在,所以就出现了FOV (filed of view) 所谓的…

what is the gamma? CCD.CMOS成像方式是通过像点中的"硅"感受光线的强弱而获得画面.而硅感光是物理成像,它真实地反应光线强度的变化,来多少就输出多少,因此它对光线的反应是线性的.但是它的伽马跟人眼的伽马是冲突的. 左图是人眼看到的画面,右图是ccd,cmos感受到的光电信号.绿线就是gamma曲线 why does correct with gamma? 就为获得人眼感知的图像. how to correct the rgb format picture wit…

what is the BlackLevel? 暗电流来源1.raw8为例,单个pixel的有效值是0~255,但是实际AD芯片的精度可能无法将电压值很小的一部分转换出来,芯片厂会刻意添加一个固定的偏移量以达到阈值转换电压,使输出的pixel value在5(阈值电压,非固定)~255之间,目的是为了让暗部的细节完全保留,当然同时也会损失一些亮部细节.            暗电流来源2.sensor的电路本身会存在暗电流,导致在没有光线照射的时候,像素单位也有一定的输出电压,暗电流这个东西跟 …

主流的AF: CDAF, PDAF, laser assist AF(这个只是辅助,在微距或者拍摄纹理不明显的场景下好用). AF的大致原理就是检测图像锐度或者等价于锐度的参数,推动马达实现合焦或者对焦.如下图: 1.cdaf(摘选自:http://www.52rd.com/S_TXT/2014_10/TXT62300.HTM?WebShieldDRSessionVerify=dL5pwqK4GJM2B9flmTWC) 2.pdaf 计算相位差,将相位差转换为相位差和af code的关系.当拍照…