• <dl id="0wc4v"><ins id="0wc4v"></ins></dl>
  • <dl id="0wc4v"></dl>
    <dl id="0wc4v"><ins id="0wc4v"></ins></dl>
    <li id="0wc4v"><s id="0wc4v"></s></li>
  • <div id="0wc4v"><s id="0wc4v"><strong id="0wc4v"></strong></s></div>
    <sup id="0wc4v"></sup>
  •  

    图像传感器的这9个知识点,你都懂吗?

    2019-02-18 17:38:55 来源:21ic
    标签:

     

    典型图像传感器的核心是CCD单元(charge-coupled device,电荷耦合器件)或标准CMOS单元(complementary meta-oxide semiconductor,互补金属氧化物半导体)。CCD和CMOS传感器具有类似的特性,它们被广泛应用于商业摄像机上。不过,现代多数传感器均使用CMOS单元,这主要是出于制造方面的考虑。传感器和光学器件常常整合在一起用于制造晶片级摄像机,这种摄像机被用在类似于生物学或显微镜学等领域,如图1所示。

     

    图1:整合了光学器件和颜色过滤器的图像传感器的常用排列

     

    图像传感器是为满足不同应用的特殊目标而设计的,它提供了不同级别的灵敏度和质量。想要熟悉各种传感器,可查阅其厂商信息。例如,为了在硅基模和动态响应(用于实现光强度和颜色检测)之间有一个最好的折中,对一个特定的半导体制造过程,需优化每个光电二极管传感器单位的大小和组成成分。

     

    对计算机视觉而言,采样理论的效果具有重要意义,如目标场景的像素范围就会用到Nyquist频率。传感器分辨率和光学器件能一起为每个像素提供足够的分辨率,以便对感兴趣特征进行成像,因此有这样的结论:兴趣特征的采样(或成像)频率应该是重要像素(对感兴趣的特征而言)中最小像素大小的两倍。?#27604;唬?#23545;成像精度而言,两倍的过采样仅仅是一个最低目标,在?#23548;?#24212;用中,并不容易决定单像素宽度的特征。

     

    对于给定的应用,要取得最好的结果,需校准摄像机系统,以便在不同光照和距离条件下确定像素位深度(bit depth)的传感器噪声以及动态范围。为了能处理传感器对任何颜色通道所产生的噪声和非线性响应,并且检测和校正像素坏点、处理几何失真的建模,需发展合适的传感器处理方法。如果使用测试模式来设计一个简单标定方法,这种方法在灰度、颜色、特征像素大小等方面具有?#19978;?#21040;粗的渐变,就会看到结果。

     

    1、传感器材料

    硅制图像传感器应用最广,?#27604;灰?#20250;使用其他材料,比如在工业和军事应用中会用镓(Ga)来覆盖比硅更长的红外波长。不同的摄像机,其图像传感器的分辨率会有所不同。从单像素光电晶体管摄像机(它通过一维直线扫描阵列用于工业应用),到普通摄像机上的二维长方形阵列(所有到球形整列的路径均用于高分辨率成像),都有可能用到。(本章最后会介绍传感器配置和摄像机配置)。

     

    普通成像传感器采用CCD、CMOS、BSI和Foveon方法进行制造。硅制图像传感器具有一个非线性的光谱响应曲线,这会很好地感知光谱的近红外部分,但对蓝色、紫色和近紫外部分就感知得不好(如图2所示)。

     

     

    图2:几种硅光电二极管的典型光谱响应。可以注意到,光电二极管在900纳米附近的近红外范围内 具有高的敏感度,而在横跨400纳米~700纳米的可见光范围内具有非线性的敏感度。 由于标准的硅响应的缘故,从摄像机中去掉IR滤波器会增加近红外的灵敏度。(光?#36164;?#25454;图像的使用已获得OSI光电股份有限公司的许可)

     

    注意,?#20493;?#20837;原始数据,并将该数据离散化成数字像素时,会导致硅光谱响应。传感器制造商在这个区域做了设计补偿,然而,?#22791;?#25454;应用标定摄像机系统并设计传感器处理方法时,应该考虑传感器的颜色响应。

     

    2、传感器光电二极管元件

    图像传感器的关键在于光电二极管的大小或元件的大小。使用小光电二极管的传感器元件所捕获的光子数量没有使用大的光电二极管多。如果元件尺寸小于可捕获的可见光波长(如长度为400纳米的蓝光),那么为了校正图像颜色,在传感器设计中必须克服其他问题。传感器厂商花费大量精力来设计优化元件大小,以确保所有的颜色能同等成像(如图3所示)。在极端的情况下,由于缺乏累积的光子和传感器读出噪声,小的传感器可能对噪声更?#29992;?#24863;。如果二极发光管传感器元件太大,那么硅材料的颗粒大小?#22836;?#29992;会增加,这没有任何优势可言。一般商业传感器设备具有的传感器元件大小至少为1平方微米,每个生产厂商会不同,但为了满足某些特殊的需求会有一些折?#23567;?/p>

     

     

    图3:基本颜色的波长分配。注意,基本颜色区域相互重叠, 对所有的颜色而言,绿色是一个很好的单色替代品

     

    3、传感器配置:马赛克、Faveon和BSI

    图4显示了多光谱传感器设计的不同片内配置,包括马赛克和堆叠方法。在马赛克方法中,颜色过滤器被装在每个元件的马赛克模式上。Faveon传感器堆叠方法?#35272;?#20110;颜色波长深度渗透到半导体材料的物理成分,其中每种颜色对硅材料进行不同程度的渗透,从而对各自的颜色进行成像。整个元件大小可适用于所有颜色,所以不需要为每种颜色分别配置元件。

     

     

    图4:(左图)堆叠RGB元件的Foveon方法:在每个元件位置都有RGB颜色, 并在不同的深度吸收不同的波长;(右图)标准的马赛克元件:在每个光电二极管上面放置一个RGB滤波器,每个滤波器只允许特定的波长穿过每个光电二极管

     

    反向照明(back-side illuminated,BSI)传感器结构具有更大的元件区域,并且每个元件要聚集更多的光子,因而在晶粒上重新布置了传感器接线。

     

    传感器元件的布置也影响到颜色响应。例如,图5显示了基本颜色(R、G、B)传感器以及白色传感器的不同排列,其中白色传感器(W)有一个非常清晰或非彩色的颜色滤波器。传感器的排列考虑到了一定范围的像素处理,如在传感器对一个像素信息的处理过?#35752;校?#20250;组合在邻近元件的不同配置中所选取的像素,这些像素信息会优化颜色响应或空间颜色分辨率。?#23548;?#19978;,某些应用仅仅使用原始的传感器数据并执行普通的处理过程来增强分辨率或者构造其他颜色混合物。

     

     

    图5:元件颜色的几个不同马赛克配置,包括白色、基本RGB颜色和?#25105;狢YM元件。 每种配置为传感器处理过程优化颜色或空间分辨率提供了不同的方法(图像来自于《Building Intelligent Systems》一书,并得到Intel出版社的使用许可)。

     

    整个传感器的大小也决定了镜头的大小。一般来说,镜头越大通过的光越多,因此,对摄影应用而言,较大的传感器能更好地适用于数字摄像机。另外,元件在颗粒上排列的纵横比(aspect ratio)决定了像素的几何形状,如,4:3和3:2的纵横比分别用于数字摄像机和35毫米的胶片。传感器配置的细节值得读者去理解,这样才能够设计出最好的传感器处理过程和图像预处理程序。

     

    4、动态范围和噪声

    当前,最先进的传感器每个颜色单元能提供至少8个比特位,通常是12~14个比特位。传感器元件需要花费空间和时间来聚集光子,所以较小的元件必须经过精心设计,以避免产生一些问题。噪声可能来自于所用的光学元件、颜色滤波器、传感器元件、增益和A/D转换器、后期处理过程或者压缩方法等。传感器的读出噪声也会影响到?#23548;?#30340;分辨率,因为每个像素单元从传感器中读出再传到A/D转换器中,从而组成数字形式的行和列,以便用于像素转换。越好的传感器会产生越少的噪声,同?#34987;?#24471;到更高效的比特分辨率。Ibenthal 的工作是降噪方面的好文献。

     

    另外,传感器光子吸收对每种颜色会有所不同,对蓝色有可能有些问题,即对于较小的传感器成像而言这是最难的一种颜色。在某些情况下,生产商会试图在传感器?#24418;?#27599;种颜色内建一个简单的伽马曲线修正方法,但这种方法并不值得提倡。在对彩色有需求的应用中,可以考?#24039;?#24230;设备模型和颜色管理,甚至让传感器的每种颜色通道具有非线性特征并建立一系列简单的校正查找表(Lookup Table, LUT)转换。

     

    5、传感器处理

    传感器处理用于从传感器阵列中去马赛克并聚集像素,也用于校正感知瑕疵。在这一节我们会讨论传感器处理基础。

     

    通常在每个成像系统中都有一个专有的传感器处理器,包括一个快速HW传感器接口、优化的超长指令集(very long instruction word,VLIW)、单指令多数据流(single instruction multiple data, SIMD)指令以及具有固定功能的硬件模块,这些功能是为了解决大规模并行像素处理所造成的工作负载。通常,传感器处理过程?#35813;?#19988;自动化,并由成像系统的生产厂商设置,来自传感器的所有图像均以同样的方式处理。也存在用于提供原始数据的其他方式,这些数据允许针对应用来定制传感器处理过程,就像数字摄影那样。

     

    6、去马赛克

    根据不同的传感器元件配置(如图5所示),可利用各种去马赛克算法将原始传感器数据生成最终的RGB像素。Losson &Yang还有Li等人分别给出了两篇非常好的综述文献,这些文献介绍了各种方法以及所面临的挑战等。

     

    去马赛克的一个主要挑战之一是像素插值,其作用是将邻近单元的颜色通道组合成单个像素。在给定传感器元件排列的几何形状以及单元排列的纵横比的条件下,这是一个重要的问题。一个与之相关的问题是颜色单元的加权问题,如在每个RGB像素中每种颜色应该占多少比例。因为在马赛克传感器中,空间元件分辨率大于最终组合的RGB像素分辨率,某些应用需要原始传感器数据,以便尽可能利用所有的精?#32676;头?#36776;率,或者有些处理要么需要增强有效的像素分辨率,要么需要更好地实现空间精确的颜色处理和去马赛克处理。

     

    7、坏像素的校正

    像LCD显示器一样,传感器也可能会有坏像素。通过在摄像机模块或驱动程序中提供需要校正的坏像素坐标,供应商可以在工厂校正传感器,并为已知的缺陷提供一个传感器缺陷图。在某些情况下,自适应的缺陷校正方法会用在传感器上,以便监控邻近像素点来发现缺陷,然后校正一定范围内的缺陷类型,比如单像素缺陷、列或行缺陷以及类似2×2或3×3的块状缺陷。为了实时寻找瑕疵,摄像机驱动也?#21830;?#20379;自适应的缺陷分析,在摄像机的启动菜单中可能会提供一个特殊的补偿控制。

     

    8、颜色和照明校正

    有必要进行颜色校正以便平衡总的颜色精确度和白平衡。如图1-2所示,硅传感器上对红色和绿色这两种颜色通常很敏感,但是对蓝色却不敏感,因此,理解和标定传感器是得到最精?#36153;?#33394;的基本工作。

     

    大多数图像传感器的处理器包含了用于光晕校正的几何处理器,这在图像的边?#24403;?#29616;为光照更暗。校正基于几?#38395;?#26354;函数,可考虑可编程的光照功能来增加朝向边缘的光照,这需要在出厂前进行标定,以便与光学的光?#25991;?#24335;相匹配。

     

    9、几何校正

    镜头可能会有几何相差或朝边缘发生扭曲,产生径向失真的图像。为了解决镜头畸变,大多数成像系统具有专用的传感器处理器,它有一个硬件加速的数字扭曲元件,类似于GPU上的纹理采样器。在工厂就会针对光学器件的几何校正进行校准并编程。

     
    关注与非网微信 ( ee-focus )
    限量版产业观察、行业动态、技术大餐每日推荐
    享受快时代的精品慢阅读
     

     

    继续阅读
    芯视界发布全球领先单光子检测激光测距 ToF 芯片

    作为机器三维视觉的重要传感器,基于激光脉冲飞行时间(Time-of-Flight)的三维图像传感器(ToF Image Sensor)相比较传统的二维图像传感器(CMOS Image Sensor)提供额外维度的感知,赋予智能终端更加精确高效的环境场景捕捉能力。

    手机技术迭代快速,缓慢发展的相机究?#36141;问被?#34987;取代?
    手机技术迭代快速,缓慢发展的相机究?#36141;问被?#34987;取代?

    1.08亿像素的手机图像传感器已经发布,据说小米要先使用;搭载6400万像素手机传感器的realme手机已经发布;传闻华为Mate 30 Pro要搭载两颗4000万像素摄像头。手机行业一片蓬勃利好,技术迭代快速;相比之下,相机技术发?#22815;?#24930;,销量下滑明显,那么手机还有多久会取代相机?

    跻身全球前五大CMOS图像传感器厂商,?#37319;?#32654;半导体靠什么?
    跻身全球前五大CMOS图像传感器厂商,?#37319;?#32654;半导体靠什么?

    ?#37319;?#32654;半导体的信心来自哪里?CMOS图像传感器产品线又会如何向前推进?……怀着诸多疑问,与非网专访了?#37319;?#32654;半导体大中华区智能感知部工业市场营销经理颜凯,他的回答让我们对?#37319;?#32654;半导体CMOS图像传感器的未来发展战略有了更深的理解。

    极米 H3 智能投影评测:画质细腻色彩真实,功能内容都无懈可击
    极米 H3 智能投影评测:画质细腻色彩真实,功能内容都无懈可击

     H系列是极米投影?#26131;?#30340;经典产品,从屡获大奖的极米H1到去年上市的极米H2,它们都取得了前所未有的成功。

    小米 9 与荣耀 V20 的对决之战

    昨天我们发布了华为 nova5 Pro与小米9对比评测,今天再来看看小米9对峙荣耀V20的对决之战。

    更多资讯
    智能水表未来的发展方向是什么?#35838;?#26469;它可以用来检测水质吗?
    智能水表未来的发展方向是什么?#35838;?#26469;它可以用来检测水质吗?

    近日,宁波水表(603700.SH)披露了投资者关系活动记录表,对于诸多问题进行了解读,其中有一个问题就涉及到了智能水表未来的技术发展方向。

    光纤布拉格光栅(FBS)传感器的工作原理及使用方法解析
    光纤布拉格光栅(FBS)传感器的工作原理及使用方法解析

    近几十年以来,电气传感器一直作为测量物理与机械现象的标准设备发挥着它的作用。尽管它们在测试测量?#24418;?#22788;不在,但作为电气化的设备,他们有着与生俱来的缺陷,例如信号传输过?#35752;?#30340;损?#27169;?#23481;?#36164;?#30005;磁噪声的干扰等等。这些缺陷会造成在一些特殊的应用场合中,电气传感器的使用变得相当具有挑战性,甚至完全不适用。光纤光学传感器就是针对这些应用挑战极好的解决方法

    伺服传感器是个什么东西?它的工作原理是什么?
    伺服传感器是个什么东西?它的工作原理是什么?

    伺服加速度计如下所示,悬挂在铰链上的是一个下垂的高磁导率质量。“向下”或“零位置”由零检测器检测,平衡力由磁线圈提供。

    表面声波传感器市场将迎来热?#20445;?025年规模达55.2亿美元

    近日,锡?#24425;?#22330;?#33455;?#20844;司发布报告为?#21543;?#27874;传感器市场”的报告参数,报告显示,声学波传感器用于各种工业、医疗保健和其他应用,2019年的销售额达到27亿美元,到2025年将增加一倍,达到55.2亿美元。

    语音识别自半个世纪前诞生以来,一直处于不温?#25442;?#30340;状态,直到 2009 年深度学习技术的长足发展才使得语音识别的精度大大提高,虽?#25442;?#26080;法进行无限制领域、无限制人群的应用,但也在大多数场景中提供了一种便利高效的沟通方式。

    浙江快乐12官网
  • <dl id="0wc4v"><ins id="0wc4v"></ins></dl>
  • <dl id="0wc4v"></dl>
    <dl id="0wc4v"><ins id="0wc4v"></ins></dl>
    <li id="0wc4v"><s id="0wc4v"></s></li>
  • <div id="0wc4v"><s id="0wc4v"><strong id="0wc4v"></strong></s></div>
    <sup id="0wc4v"></sup>
  • <dl id="0wc4v"><ins id="0wc4v"></ins></dl>
  • <dl id="0wc4v"></dl>
    <dl id="0wc4v"><ins id="0wc4v"></ins></dl>
    <li id="0wc4v"><s id="0wc4v"></s></li>
  • <div id="0wc4v"><s id="0wc4v"><strong id="0wc4v"></strong></s></div>
    <sup id="0wc4v"></sup>
  • 必赢客自动投注 体彩福建22选5开奖结果查询 体坛基本七星彩走势图 内蒙古快三走势图所有 广西福利快乐十分开奖直播 平肖平码公式规律 赛马会一尾中特香港 捕鱼达人3官网 达芬奇安装时候选哪个 青海快三开奖号码 福彩20选8奖金 青海快3开奖结果今期 山西十一选五官网 江西多乐彩出号 快乐三张牌老版本