CN101213830A - 多透镜成像系统和方法 - Google Patents

多透镜成像系统和方法 Download PDF

Info

Publication number
CN101213830A
CN101213830A CNA2005800427538A CN200580042753A CN101213830A CN 101213830 A CN101213830 A CN 101213830A CN A2005800427538 A CNA2005800427538 A CN A2005800427538A CN 200580042753 A CN200580042753 A CN 200580042753A CN 101213830 A CN101213830 A CN 101213830A
Authority
CN
China
Prior art keywords
lens
optical filter
visible light
imaging system
spectrum
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2005800427538A
Other languages
English (en)
Other versions
CN100596168C (zh
Inventor
拉塞尔·W·格鲁尔克
戴尔·W·施罗德
约翰·H·斯坦巴克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Micron Technology Inc
Original Assignee
Micron Technology Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Micron Technology Inc filed Critical Micron Technology Inc
Publication of CN101213830A publication Critical patent/CN101213830A/zh
Application granted granted Critical
Publication of CN100596168C publication Critical patent/CN100596168C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/12—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths

Abstract

本发明提供多种成像系统和方法。一种示范性系统(300)并入有多个透镜，所述多个透镜经个别地配置以从待成像的物体接收可见光，且将此光引导到相应的传感器阵列上。接着从所述传感器阵列中的一个或一个以上传感器阵列中产生的信号得到亮度信息。当需要色度信息时，在透镜与相应的传感器阵列之间插入光学过滤器。所述光学过滤器中含有的马赛克图案经定制以提供有利的色度信息。可使用具有不同马赛克图案的一个或一个以上所述过滤器。从所述传感器阵列获得的亮度和色度信息经组合以产生所述物体的图像。

Description

多透镜成像系统和方法
技术领域
无
背景技术
在例如数码相机的图像俘获装置中，附接到个人计算机的桌式相机和建置在移动电话中的相机通常具有单个透镜，通过所述透镜所接收的来自待照相物体的光被引导到电荷耦合器件(CCD)传感器阵列上，或作为替代，引导到互补金属氧化物半导体(CMOS)传感器阵列上。因为这些相机中的大多数相机是彩色相机，所以在透镜与传感器阵列之间插入像素化滤色器。滤色器一般含有红、绿和蓝过滤器元件的阵列，所述阵列常被配置成马赛克图案，所述图案在业界被称作拜耳图案(Bayer pattern)。滤色器的每一元件(不管传输通过元件的色彩为如何)与位于传感器阵列中的传感器元件对准。这种对准使得可在传感器阵列中俘获色彩像素信息。接着处理此色彩像素信息以产生物体的彩色图像。
单透镜相机遭受若干不足。这些不足的某些实例为：有限的图像分辨率、较差的彩色成像以及不当的亮度成像。通常，图像分辨率受限是使用含有有限数目的传感器元件的单个传感器阵列的结果。通过增加传感器元件的数目可改进图像分辨率，且在已增加传感器阵列中含有的传感器元件的密度的若干相机中已使用了这种解决方案。虽然将来还需要做很多事情来改进传感器元件密度，但还需要找到改进成像分辨率的替代性解决方案。
较差的彩色成像一般是传感器阵列中的传感器元件中的有限光谱带宽的结果。一种用于克服光谱带宽限制的技术涉及将从传感器阵列中的一个元件获得的彩色图像信息与从相邻传感器元件获得的额外的色彩信息进行组合。遗憾的是，这种技术常导致已知为“色彩假象”的色彩缺陷，当传感器元件之间的物理间隔(被称作“像素间距”)与图像内容的空间间距处于同样的级别时，会产生所述色彩缺陷。这种现象(有时还被称作“混叠”)导致不合需要的图像失真和较差的彩色成像。
转向不当的亮度成像的方面，常规的相机之所以有一定程度的不足是因为，进入相机透镜的光在照射到传感器阵列之前必须穿过滤色器。因此，传感器元件中的每一者仅接收到某种色彩的光，而不是接收会提供更准确的图像亮度信息的宽光谱光。举例来说，第一传感器元件仅接收到绿色的光，而第二传感器仅接收到红色的光，且第三传感器仅接收到蓝色的光。从这三个元件获得的三种色彩像素接着经处理以获得图像亮度信息。所述处理不能准确地重现成像物体的亮度信息。
因此可了解，需要具有克服上文所识别的缺点中的一者或一者以上的成像系统和方法。
发明内容
根据本发明，成像系统一般并入多个透镜，所述多个透镜经个别地配置以从待成像的物体接收可见光，且将此光引导到相应的传感器阵列上。接着从所述传感器阵列中的一个或一个以上传感器阵列中产生的信号得到亮度信息。当需要色度信息时，在透镜与相应的传感器阵列之间插入光学过滤器。所述光学过滤器中含有的马赛克过滤器图案经定制以提供有利的色度信息。可使用具有不同马赛克过滤器图案的一个或一个以上所述过滤器。
显然，本发明的某些实施例可展示除了上文提到的优点之外的或作为其替代的优点。另外，在检查了以下图式和具体实施方式之后，所属领域的技术人员将明白本发明的其它系统、方法、特征和/或优点。期望所有这些额外的系统、方法、特征和/或优点都包含在本文描述内容中，处于本发明的范畴内，且受随附权利要求书保护。
附图说明
通过参考以下图式，可更好地理解本发明的许多方面。图式中的组件并没有必要按比例，而是着重于清楚地说明本发明的原理。另外，在图式中，若干图中的相同的参考符号始终表示相应的部件。
图1展示使用第一透镜系统来获得亮度信息并使用第二透镜系统来获得待成像物体的色度信息的示范性两透镜成像系统。
图2展示将图1的两透镜成像系统与第三透镜系统组合以获得额外的亮度信息的示范性三透镜成像系统。
图3展示将图1的两透镜成像系统与第三透镜系统组合以获得额外的色度信息的示范性三透镜成像系统。
图4展示使用三个光学过滤器的示范性三透镜成像系统，其中每一光学过滤器经配置以具有独特的过滤器元件阵列。
图5展示使用三个光学过滤器的示范性三透镜成像系统，其中每一光学过滤器经配置为具有独特的过滤器元件阵列的象限分区过滤器。
图6展示包括示范性三透镜成像系统组合件的少数个别组件。
图7展示用于从两透镜系统产生图像的方法的流程图。
图8展示用于从三透镜系统产生图像的方法的流程图，其中所述三个透镜系统中的每一者产生色度信息。
图9展示用于从三透镜系统产生图像的方法的流程图，其中所述透镜系统中的一者产生亮度信息，且其它两个透镜系统中的每一者产生色度信息。
具体实施方式
各种实施例描述用于成像的系统和方法。所述成像系统一般并入多个透镜，所述多个透镜经个别地配置以从待成像的物体接收可见光，且将此光引导到相应的传感器阵列上。接着从所述传感器阵列中的一个或一个以上传感器阵列中产生的信号得到亮度信息。当需要色度信息时，在透镜与相应的传感器阵列之间插入光学过滤器。所述光学过滤器中含有的马赛克过滤器图案经定制以提供有利的色度信息。可使用具有不同马赛克过滤器图案的一个或一个以上所述过滤器。
在成像系统的一个实施例中，从多个传感器得到的色度信息经处理以产生物体的图像，而在第二实施例中，从多个传感器得到的亮度和色度信息经组合以产生物体的图像。下文描述少数这些实施例。应了解，下文示范性实施例中提到的例如绿、蓝和红的色彩是出于阐释目的，而并不期望将本发明限于这些特定色彩。因此，在其它实施例中，将使用其它色彩。
图1展示使用第一透镜系统100A来获得待成像物体101的亮度信息并使用第二透镜系统100B来获得物体101的色度信息的示范性两透镜成像系统100。透镜110从物体101接收可见光的全光谱，并将此光引导到亮度传感器阵列115上。亮度传感器阵列115是像素化阵列，其通过产生呈多个像素形式的亮度信号来响应于入射光。透镜系统100A甚至在物体101经受较低的亮度条件时也提供良好的光通量灵敏度。因为与色度相比人眼对亮度上的空间变化更敏感，所以亮度传感器阵列115可经配置以获得最大的亮度精度，而不受色度参数任何限制。
透镜120还从物体101接收可见光的全光谱，且将此光引导向色度传感器阵列130。插在透镜120与色度传感器阵列130之间的是光学过滤器125，其选择性地传播可见光的全光谱中的一个或一个以上子光谱。举例来说，在图1所说明的实施例中，光学过滤器125是具有拜耳马赛克图案的拜耳过滤器。这个马赛克图案含有使用红色符号126说明的若干红色过滤器元件、使用绿色符号127说明的若干绿色过滤器元件和使用蓝色符号128说明的若干蓝色过滤器元件。因此光学过滤器125传播光的三个子光谱。第一子光谱含有对应于红色光的波长，第二子光谱含有对应于绿色光的波长，且第三子光谱含有对应于蓝色光的波长。
光学过滤器125的过滤器元件中的每一者光学对准到色度传感器阵列130中的相应传感器元件，进而提供来自每一传感器元件的一个像素的色度信息。所述传感器元件的一个实例是传感器元件131，在此实例中，其提供一个像素的绿光信息。
从色度传感器阵列130获得的像素化色度信息与从亮度传感器阵列115获得的像素化亮度信息进行组合，以产生物体的图像。图像的分辨率与所述两个传感器阵列中含有的像素的数目成比例，且因此高于通常使用单个传感器阵列从单透镜系统获得的分辨率。
应了解，标记“亮度传感器阵列”和“色度传感器阵列”用于便利地描述这些传感器阵列的功能性，而并不期望限制个别的传感器阵列的物理特征。举例来说，在一个实施例中，“亮度”传感器阵列可在物理上等同于“色度”传感器阵列。因此，通过将未经过滤的可见光引导到传感器阵列上，两种传感器中的任一者可用于获得亮度信息。类似地，通过仅将某些色彩的光引导到传感器阵列上，同样的这两种阵列中的任一者可用于获得色度信息。
在另一方面，在替代性实施例中，两个阵列在物理上彼此不同。举例来说，“色度”传感器阵列中的传感器元件经选择以提供对入射到阵列上的某一色彩的光而非对全光谱可见光的最大响应，而“亮度”传感器的传感器元件经选择以最大地响应于全光谱可见光，而非特定色彩的光。
图2展示使用第一透镜系统200A来获得一个或一个以上待成像物体(未图示)的亮度信息并使用第二透镜系统200B来获得所述物体的色度信息的示范性三透镜成像系统200。透镜系统200A和200B分别类似于图1的透镜系统100A和100B。第三透镜系统200C用于获得物体的额外的亮度信息。在此示范性实施例中，透镜系统200C包含亮具有与透镜系统200A的亮度传感器阵列215相同数目的传感器元件的亮度传感器阵列240。然而，以亮度传感器阵列215中含有的传感器元件作为参考，亮度传感器阵列240中含有的传感器元件在空间上偏移。因此，从这两个传感器获得的像素化亮度信息彼此互补以提供增加的分辨率，这不仅是因为与单个传感器阵列中含有的传感器元件相比传感器元件加倍，还因为由于空间偏移的原因而在不同的像素位置处获得增加的亮度信息。在其它实施例中，三个传感器中每一者中的传感器元件的数目可以不同。
图3展示使用第一透镜系统300C来获得待成像物体(未图示)的亮度信息并使用第二透镜系统300B来获得所述物体的色度信息的另一示范性三透镜成像系统300。透镜系统300C和300B分别类似于图1的透镜系统100A和100B。第三透镜系统300A用于获得所述物体的额外的色度信息。在此示范性实施例中，光学过滤器305是红绿过滤器，其具有与光学过滤器325(红绿蓝拜耳过滤器)的马赛克图案不同的马赛克图案。另外，以光学过滤器325的马赛克图案为参考，光学过滤器305的马赛克图案可在空间上偏移。举例来说，以绿过滤器元件307为参考，绿过滤器元件306偏移。因此，从光学耦合到光学过滤器305的传感器阵列315获得的某一色度信息与从传感器阵列330获得的色度信息互补。举例来说，以接收绿光的传感器阵列330的传感器元件为参考，接收绿光的传感器阵列315的传感器元件在空间上偏移。因此，与从单透镜系统的单个传感器阵列获得的分辨率相比，通过组合来自两个传感器阵列的信息而获得的绿像素信息提供更高的分辨率。
图4展示使用三个透镜系统400A、400B和400C来获得待成像物体(未图示)的三组色度信息的三透镜成像系统400。下文揭示三透镜成像系统400的若干示范性实施例。
在第一实施例中，三个光学过滤器405、425和445具有彼此不同的马赛克图案。光学过滤器405为红绿过滤器，其具有不同于作为红绿蓝拜耳过滤器的光学过滤器425的马赛克图案的马赛克图案。光学过滤器445也为另一变体，其具有不同于光学过滤器405和425中含有的马赛克图案的蓝绿马赛克图案。从传感器415、430和440获得的三组信息经组合以产生物体的图像。
在图4的第二实施例中，三个光学过滤器405、425和445彼此类似。举例来说，所有三个光学过滤器为相同的拜耳滤色器，所述每一拜耳滤色器具有与现有技术单透镜系统的光学过滤器中含有的像素元件一样多的像素元件。然而，由于超分辨率，三透镜成像系统400的景深显著优于现有技术单透镜系统的景深。举例来说，三透镜成像系统400的景深范围可从0.11mm到无限远，相比之下，现有技术单透镜系统的景深范围从0.30mm到无限远。超分辨率是一种图像处理方法，其中“n”个个别的图像叠加在彼此之上以使分辨率改进(n)1/2倍。举例来说，当利用超分辨率时，与从现有技术单透镜系统获得的分辨率相比，从三透镜成像系统400获得的分辨率改进了(3)1/2倍。
在上文第二实施例的变体中，三个光学过滤器405、425和445中的每一者以及每一相应的传感器415、430和440的尺寸经增加，使得三透镜成像系统400的景深与现有技术单透镜系统的景深一样。因为尽管光学过滤器/传感器阵列的总尺寸增加了，但每一光学过滤器中含有的每一个别过滤器元件的尺寸以及每一传感器阵列中含有的每一个别的传感器元件的尺寸维持不变，所以应了解，总的像素数显著增加。因此，三透镜成像系统400的分辨率显著高于现有技术单透镜系统的分辨率。
在图4的第三实施例中，三透镜系统400A、400B和400B结合轴上成像并入离轴成像。透镜410、420和435中的一者或一者以上经配置以在传感器415、430和440中相应的一者上的离轴位置处提供最佳的调制传递函数(MTF)。可从题为“Imaging systemsand methods”的共同待决的专利申请案(Russ Gruhlke等人)中获得所述系统的更多细节，其全文以引用的方式并入本文中。
图5展示使用三个透镜系统500A、500B和500C来获得待成像物体(未图示)的三组色度信息的示范性三透镜成像系统500。在第一实施例中，三个光学过滤器505、525和545中的每一者并入一个或一个以上四象限过滤器，其中所述象限中的每一者经配置以传播入射光的子光谱。举例来说，四象限过滤器505A的第一象限可经配置以传播红光，第二象限经配置以传播绿光，第三象限经配置以同样传播绿光，第四象限经配置以传播蓝光。在滤色器图案表501的框506中描绘所述图案，所述图案表说明在三个四象限过滤器505A、525A和545A中实现的所述组合的少数实例。框507描绘四象限组合，其经配置以通过四象限中的每一者传播可见光的全光谱。在另一实施例中，四象限中的仅一者经配置以传播可见光的全光谱。
注意一下滤色器图案表501的虚线框541，可看到，四象限过滤器505A具有红红蓝蓝(2R2B)象限配置，而四象限过滤器525A具有绿绿绿绿(4G)象限配置，且四象限过滤器545A具有红红蓝蓝(2R2B)象限配置。类似地，虚线框542提供另一实例，其中四象限过滤器505A具有红红红蓝(3R1B)配置，四象限过滤器525A具有绿绿绿绿(4G)象限配置，且四象限过滤器545A具有红蓝蓝蓝(1R3B)象限配置。
图6展示构成示范性三透镜成像系统组合件600的少数个别组件。透镜组合件610含有三个透镜。覆盖外壳605安置在封围外壳615上，将透镜组合件610封围在其中。接着将经组装的三个元件进一步安置在电路小片620上，接着将所述电路小片进一步安置在衬底630上。
电路小片620含有与如上文所述的各种示范性实施例中的三个透镜系统相关联的三个滤色器。三个过滤器光学对准到透镜组合件610中的三个透镜。电路小片620可进一步容纳三个传感器元件，每一传感器元件还光学对准到透镜组合件610的三个透镜。电路小片620可进一步容纳一个或一个以上计算电路以处理来自三个传感器元件的三个信号，并产生复合图像。出于简明起见，已在图6中省略了系统600的其它方面，例如外部连接、电路、机械紧固件和安装硬件。
图7展示用于从两透镜系统(例如，图1的系统100)产生图像的方法的流程图。在方框705中，提供第一透镜、第一光学过滤器和第一传感器。这三个组件经排列成光学序列，其中光学过滤器位于透镜与传感器之间。来自待成像物体的进入第一透镜的可见光被引导到与第一透镜排列成光学对准的第一光学过滤器上。根据过滤器的马赛克图案由第一光学过滤器过滤可见光。举例来说，如果第一光学过滤器是拜耳过滤器，那么马赛克图案提供拜耳图案中的红绿蓝过滤。经过滤的光传播到第一传感器上。
在方框710中，从第一传感器中获得与入射在第一传感器上的光图案相关的像素化色度信息。在方框715中，提供第二透镜和第二传感器，且其排列成光学序列。来自待成像物体的进入第二透镜的可见光不经过滤地被直接引导到第二传感器上。在方框720中，从第二传感器获得可见光的未经过滤的光谱的像素化亮度信息。这样一种排列使得甚至在物体经受暗光曝光时也在成像系统中提供最佳的光通量灵敏度。
在方框725处，从第一传感器获得的像素化色度信息与从第二传感器获得的像素化亮度信息经组合以产生物体图像。
图8展示用于从三透镜系统(例如，图4的系统400)中产生图像的方法的流程图。在方框805中，提供第一透镜、第一光学过滤器和第一传感器。这三个组件排列成光学序列，其中光学过滤器位于透镜与传感器之间。从待成像物体进入第一透镜的可见光被引导到与第一透镜排列成光学对准的第一光学过滤器上。可见光由第一光学过滤器根据过滤器的马赛克图案进行过滤。举例来说，如果第一光学过滤器是红绿过滤器，那么马赛克图案提供红绿过滤。经过滤的光传播到第一传感器上。在方框810中，从第一传感器获得与入射的第一光图案相关的色度信息。
在方框815中，提供第二透镜、第二光学过滤器和第二传感器。这三个组件排列成光学序列，其中光学过滤器位于透镜与传感器之间。从待成像物体进入第二透镜的可见光被引导到与第二透镜排列成光学对准的第二光学过滤器上。可见光由第二光学过滤器根据过滤器的马赛克图案进行过滤。举例来说，如果第二光学过滤器是拜耳过滤器，那么马赛克图案提供红绿蓝拜耳马赛克过滤。经过滤的光传播到第二传感器上。在方框820中，从第二传感器获得与入射的第二光图案相关的色度信息。
在方框825中，提供第三透镜、第三光学过滤器和第三传感器。这三个组件排列成光学序列，其中光学过滤器位于透镜与传感器之间。从待成像物体进入第三透镜的可见光被引导到与第三透镜排列成光学对准的第三光学过滤器上。可见光由第三光学过滤器根据过滤器的马赛克图案进行过滤。举例来说，如果第三光学过滤器是蓝绿过滤器，那么马赛克图案提供蓝绿马赛克过滤。经过滤的光传播到第三传感器上。在方框830中，从第三传感器获得与入射的第三光图案相关的色度信息。在方框835中，第一、第二和第三色度信息经组合以产生物体的图像。
图9展示用于从三透镜系统(例如，图3的系统300)产生图像的方法的流程图。所属领域的普通技术人员根据上文揭示内容将理解图9的各个方框。因此，出于简明起见，本文不再重复上文提到的阐释。
陈述上文所述的实施例仅用于清楚地理解本揭示案的原理。在实质上不脱离本揭示案的情况下，可作出许多变化和修改。本文所有所述修改和变化均包含在本揭示案的范畴内。

Claims (10)

1.一种成像系统(300)，其包括：
第一亮度传感器阵列(340)，其经操作以从可见光的全光谱中产生第一像素化亮度信息；以及
第一色度传感器阵列(330)，其经操作以从可见光的第一子光谱中产生第一像素化色度信息，且其中所述第一像素化亮度信息与所述第一像素化色度信息经组合以产生物体的图像。
2.根据权利要求1所述的成像系统，其进一步包括：
第一透镜(335)，其经配置以从所述待成像的物体接收可见光的所述全光谱，且经操作以将可见光的所述全光谱引导到所述第一亮度传感器阵列上；
第二透镜(320)，其经配置以从所述待成像的物体接收可见光的所述全光谱；以及
第一光学过滤器(325)，其在光学上与所述第二透镜串联排列，以接收由所述第二透镜引导到所述第一光学过滤器上的可见光的所述全光谱，且经操作以将可见光的所述第一子光谱传播到所述第一色度传感器阵列上。
3.根据权利要求2所述的成像系统，其中所述第一光学过滤器(325)是拜耳滤色器，其经操作以传播对应于红光、绿光和蓝光的至少三个子光谱；且其中所述第一色度传感器阵列(330)经操作以产生对应于至少一个红像素、一个绿像素和一个蓝像素的色度信息。
4.根据权利要求2所述的成像系统，其中所述第一光学过滤器(325)包括四象限过滤器。
5.根据权利要求1所述的成像系统，其进一步包括：
第二色度传感器阵列(315)，其经操作以从可见光的第二子光谱产生第二像素化色度信息。
6.根据权利要求5所述的成像系统，其中以所述第二色度传感器阵列(315)的相应第一传感器元件为参考，所述第一色度传感器阵列(330)的第一传感器元件在空间上偏移。
7.根据权利要求5所述的成像系统，其进一步包括：
第二光学过滤器(305)，其中所述第二光学过滤器是拜耳滤色器，其经操作以传播可见光的至少三个子光谱，所述三个子光谱包含入射在所述第二色度传感器阵列(315)上的可见光的所述第二子光谱。
8.根据权利要求7所述的成像系统，其中以所述第二光学过滤器的实质上类似的马赛克过滤器图案为参考，所述第一光学过滤器的马赛克过滤器图案在空间上偏移。
9.根据权利要求7所述的成像系统，其中所述第一和第二光学过滤器中的至少一者的大小经配置以提供所述成像系统的所需景深。
10.根据权利要求5所述的成像系统，其中所述第一和第二色度传感器阵列中的至少一者的大小经配置以提供所述成像系统的所需景深。
CN200580042753A 2004-12-15 2005-10-31 多透镜成像系统和方法 Expired - Fee Related CN100596168C (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US11/016,376 US7483065B2 (en) 2004-12-15 2004-12-15 Multi-lens imaging systems and methods using optical filters having mosaic patterns
US11/016,376 2004-12-15
PCT/US2005/039249 WO2006065372A2 (en) 2004-12-15 2005-10-31 Multi-lens imaging systems and methods

Publications (2)

Publication Number Publication Date
CN101213830A true CN101213830A (zh) 2008-07-02
CN100596168C CN100596168C (zh) 2010-03-24

Family

ID=36583321

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200580042753A Expired - Fee Related CN100596168C (zh) 2004-12-15 2005-10-31 多透镜成像系统和方法

Country Status (7)

Country Link
US (1) US7483065B2 (zh)
EP (1) EP1839432A2 (zh)
JP (1) JP4636418B2 (zh)
KR (1) KR20070100890A (zh)
CN (1) CN100596168C (zh)
TW (1) TW200621004A (zh)
WO (1) WO2006065372A2 (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102378015A (zh) * 2010-08-17 2012-03-14 苹果公司 使用亮度和色度传感器的图像捕获
WO2012051751A1 (en) * 2010-10-19 2012-04-26 Ether Precision, Inc. Optical module comprising monochromatic image sensors, system comprising optical module and method of manufacturing optical module
CN102457683A (zh) * 2010-11-03 2012-05-16 索尼公司 透镜和颜色过滤器布置、超分辨率相机系统及方法
CN103595982A (zh) * 2013-11-07 2014-02-19 天津大学 基于灰度和彩色两颗传感器的彩色图像采集装置
CN106412533A (zh) * 2015-08-03 2017-02-15 索尼公司 数字成像装置、数字成像设备和数字成像方法
CN107431746A (zh) * 2015-11-24 2017-12-01 索尼半导体解决方案公司 相机模块和电子设备
CN109844918A (zh) * 2016-10-14 2019-06-04 科磊股份有限公司 用于经配置用于半导体应用的深度学习模型的诊断系统及方法
CN110411998A (zh) * 2013-12-10 2019-11-05 伊鲁米那股份有限公司 用于生物或化学分析的生物传感器及其制造方法

Families Citing this family (95)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7564019B2 (en) 2005-08-25 2009-07-21 Richard Ian Olsen Large dynamic range cameras
US7795577B2 (en) * 2004-08-25 2010-09-14 Richard Ian Olsen Lens frame and optical focus assembly for imager module
EP1812968B1 (en) 2004-08-25 2019-01-16 Callahan Cellular L.L.C. Apparatus for multiple camera devices and method of operating same
US8124929B2 (en) * 2004-08-25 2012-02-28 Protarius Filo Ag, L.L.C. Imager module optical focus and assembly method
US7916180B2 (en) * 2004-08-25 2011-03-29 Protarius Filo Ag, L.L.C. Simultaneous multiple field of view digital cameras
US20070102622A1 (en) * 2005-07-01 2007-05-10 Olsen Richard I Apparatus for multiple camera devices and method of operating same
US20070258006A1 (en) * 2005-08-25 2007-11-08 Olsen Richard I Solid state camera optics frame and assembly
US7566855B2 (en) * 2005-08-25 2009-07-28 Richard Ian Olsen Digital camera with integrated infrared (IR) response
US7964835B2 (en) 2005-08-25 2011-06-21 Protarius Filo Ag, L.L.C. Digital cameras with direct luminance and chrominance detection
US7860333B2 (en) * 2007-01-09 2010-12-28 University Of Utah Research Foundation Systems and methods for deblurring data corrupted by shift variant blurring
US8866920B2 (en) 2008-05-20 2014-10-21 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
US11792538B2 (en) 2008-05-20 2023-10-17 Adeia Imaging Llc Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
US8902321B2 (en) 2008-05-20 2014-12-02 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
JP4582205B2 (ja) * 2008-06-12 2010-11-17 トヨタ自動車株式会社 電動車両
US20100079653A1 (en) * 2008-09-26 2010-04-01 Apple Inc. Portable computing system with a secondary image output
US8610726B2 (en) * 2008-09-26 2013-12-17 Apple Inc. Computer systems and methods with projected display
US7881603B2 (en) 2008-09-26 2011-02-01 Apple Inc. Dichroic aperture for electronic imaging device
US8619128B2 (en) * 2009-09-30 2013-12-31 Apple Inc. Systems and methods for an imaging system using multiple image sensors
US8514491B2 (en) 2009-11-20 2013-08-20 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
SG10201503516VA (en) 2010-05-12 2015-06-29 Pelican Imaging Corp Architectures for imager arrays and array cameras
JP5582935B2 (ja) * 2010-09-22 2014-09-03 富士フイルム株式会社 撮像モジュール
US8538132B2 (en) 2010-09-24 2013-09-17 Apple Inc. Component concentricity
US8760517B2 (en) * 2010-09-27 2014-06-24 Apple Inc. Polarized images for security
US9936109B2 (en) 2010-10-22 2018-04-03 University Of New Brunswick Method and system for fusing images
US20140192238A1 (en) * 2010-10-24 2014-07-10 Linx Computational Imaging Ltd. System and Method for Imaging and Image Processing
US8878950B2 (en) 2010-12-14 2014-11-04 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using super-resolution processes
JP5284457B2 (ja) * 2011-02-15 2013-09-11 キヤノン株式会社 画像表示装置及びその制御方法、プログラム、記憶媒体
JP5794804B2 (ja) * 2011-03-29 2015-10-14 京セラ株式会社 電子機器
WO2012155119A1 (en) 2011-05-11 2012-11-15 Pelican Imaging Corporation Systems and methods for transmitting and receiving array camera image data
EP2726930A4 (en) 2011-06-28 2015-03-04 Pelican Imaging Corp OPTICAL ARRANGEMENTS FOR USE WITH AN ARRAY CAMERA
US20130265459A1 (en) 2011-06-28 2013-10-10 Pelican Imaging Corporation Optical arrangements for use with an array camera
JP5816015B2 (ja) 2011-07-15 2015-11-17 株式会社東芝 固体撮像装置及びカメラモジュール
WO2013043761A1 (en) 2011-09-19 2013-03-28 Pelican Imaging Corporation Determining depth from multiple views of a scene that include aliasing using hypothesized fusion
WO2013049699A1 (en) 2011-09-28 2013-04-04 Pelican Imaging Corporation Systems and methods for encoding and decoding light field image files
JP5901935B2 (ja) 2011-10-24 2016-04-13 株式会社東芝 固体撮像装置及びカメラモジュール
JP5701785B2 (ja) 2012-02-03 2015-04-15 株式会社東芝 カメラモジュール
EP2817955B1 (en) 2012-02-21 2018-04-11 FotoNation Cayman Limited Systems and methods for the manipulation of captured light field image data
JP2013183353A (ja) * 2012-03-02 2013-09-12 Toshiba Corp 画像処理装置
US9210392B2 (en) 2012-05-01 2015-12-08 Pelican Imaging Coporation Camera modules patterned with pi filter groups
US9100635B2 (en) 2012-06-28 2015-08-04 Pelican Imaging Corporation Systems and methods for detecting defective camera arrays and optic arrays
US20140002674A1 (en) 2012-06-30 2014-01-02 Pelican Imaging Corporation Systems and Methods for Manufacturing Camera Modules Using Active Alignment of Lens Stack Arrays and Sensors
CN107346061B (zh) 2012-08-21 2020-04-24 快图有限公司 用于使用阵列照相机捕捉的图像中的视差检测和校正的系统和方法
EP2888698A4 (en) 2012-08-23 2016-06-29 Pelican Imaging Corp PROPERTY-BASED HIGH-RESOLUTION MOTION ESTIMATION FROM LOW-RESOLUTION IMAGES RECORDED WITH AN ARRAY SOURCE
WO2014043641A1 (en) 2012-09-14 2014-03-20 Pelican Imaging Corporation Systems and methods for correcting user identified artifacts in light field images
CN104685860A (zh) 2012-09-28 2015-06-03 派力肯影像公司 利用虚拟视点从光场生成图像
US9143711B2 (en) 2012-11-13 2015-09-22 Pelican Imaging Corporation Systems and methods for array camera focal plane control
US9462164B2 (en) 2013-02-21 2016-10-04 Pelican Imaging Corporation Systems and methods for generating compressed light field representation data using captured light fields, array geometry, and parallax information
US9374512B2 (en) 2013-02-24 2016-06-21 Pelican Imaging Corporation Thin form factor computational array cameras and modular array cameras
US9225977B2 (en) * 2013-02-25 2015-12-29 Teradyne, Inc. Matrix testing targets
US9638883B1 (en) 2013-03-04 2017-05-02 Fotonation Cayman Limited Passive alignment of array camera modules constructed from lens stack arrays and sensors based upon alignment information obtained during manufacture of array camera modules using an active alignment process
US9774789B2 (en) 2013-03-08 2017-09-26 Fotonation Cayman Limited Systems and methods for high dynamic range imaging using array cameras
US8866912B2 (en) 2013-03-10 2014-10-21 Pelican Imaging Corporation System and methods for calibration of an array camera using a single captured image
US9521416B1 (en) 2013-03-11 2016-12-13 Kip Peli P1 Lp Systems and methods for image data compression
US9106784B2 (en) 2013-03-13 2015-08-11 Pelican Imaging Corporation Systems and methods for controlling aliasing in images captured by an array camera for use in super-resolution processing
US9124831B2 (en) 2013-03-13 2015-09-01 Pelican Imaging Corporation System and methods for calibration of an array camera
US9519972B2 (en) 2013-03-13 2016-12-13 Kip Peli P1 Lp Systems and methods for synthesizing images from image data captured by an array camera using restricted depth of field depth maps in which depth estimation precision varies
US9888194B2 (en) 2013-03-13 2018-02-06 Fotonation Cayman Limited Array camera architecture implementing quantum film image sensors
WO2014159779A1 (en) 2013-03-14 2014-10-02 Pelican Imaging Corporation Systems and methods for reducing motion blur in images or video in ultra low light with array cameras
US9100586B2 (en) 2013-03-14 2015-08-04 Pelican Imaging Corporation Systems and methods for photometric normalization in array cameras
US10122993B2 (en) 2013-03-15 2018-11-06 Fotonation Limited Autofocus system for a conventional camera that uses depth information from an array camera
WO2014150856A1 (en) 2013-03-15 2014-09-25 Pelican Imaging Corporation Array camera implementing quantum dot color filters
US9633442B2 (en) 2013-03-15 2017-04-25 Fotonation Cayman Limited Array cameras including an array camera module augmented with a separate camera
US9497429B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Extended color processing on pelican array cameras
US9445003B1 (en) 2013-03-15 2016-09-13 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information
JP2016524125A (ja) 2013-03-15 2016-08-12 ペリカン イメージング コーポレイション カメラアレイを用いた立体撮像のためのシステムおよび方法
US9356061B2 (en) 2013-08-05 2016-05-31 Apple Inc. Image sensor with buried light shield and vertical gate
US9473708B1 (en) 2013-08-07 2016-10-18 Google Inc. Devices and methods for an imaging system with a dual camera architecture
US9898856B2 (en) 2013-09-27 2018-02-20 Fotonation Cayman Limited Systems and methods for depth-assisted perspective distortion correction
US9185276B2 (en) 2013-11-07 2015-11-10 Pelican Imaging Corporation Methods of manufacturing array camera modules incorporating independently aligned lens stacks
US10119808B2 (en) 2013-11-18 2018-11-06 Fotonation Limited Systems and methods for estimating depth from projected texture using camera arrays
US9503660B2 (en) * 2013-11-26 2016-11-22 Raytheon Company Coordinated simultaneous real and Fourier plane imaging system and methods
EP3075140B1 (en) 2013-11-26 2018-06-13 FotoNation Cayman Limited Array camera configurations incorporating multiple constituent array cameras
US10089740B2 (en) 2014-03-07 2018-10-02 Fotonation Limited System and methods for depth regularization and semiautomatic interactive matting using RGB-D images
US20150281538A1 (en) * 2014-03-25 2015-10-01 Semiconductor Components Industries, Llc Multi-array imaging systems and methods
US9247117B2 (en) 2014-04-07 2016-01-26 Pelican Imaging Corporation Systems and methods for correcting for warpage of a sensor array in an array camera module by introducing warpage into a focal plane of a lens stack array
KR102144588B1 (ko) 2014-05-09 2020-08-13 삼성전자주식회사 센서 모듈 및 이를 구비한 장치
US9521319B2 (en) 2014-06-18 2016-12-13 Pelican Imaging Corporation Array cameras and array camera modules including spectral filters disposed outside of a constituent image sensor
US10250871B2 (en) 2014-09-29 2019-04-02 Fotonation Limited Systems and methods for dynamic calibration of array cameras
US9319585B1 (en) * 2014-12-18 2016-04-19 Omnivision Technologies, Inc. High resolution array camera
US9942474B2 (en) 2015-04-17 2018-04-10 Fotonation Cayman Limited Systems and methods for performing high speed video capture and depth estimation using array cameras
KR102347591B1 (ko) * 2015-08-24 2022-01-05 삼성전자주식회사 이미지 센싱 장치 및 이미지 프로세싱 시스템
US10341543B2 (en) 2016-04-28 2019-07-02 Qualcomm Incorporated Parallax mask fusion of color and mono images for macrophotography
CN110463197B (zh) * 2017-03-26 2021-05-28 苹果公司 增强立体相机成像系统中的空间分辨率
US10482618B2 (en) 2017-08-21 2019-11-19 Fotonation Limited Systems and methods for hybrid depth regularization
TWI703367B (zh) * 2018-02-08 2020-09-01 先進光電科技股份有限公司 光學成像系統
DE102019109147A1 (de) * 2019-04-08 2020-10-08 Carl Zeiss Jena Gmbh Bildaufnahmesystem und verfahren zum aufnehmen von bildern
KR102646521B1 (ko) 2019-09-17 2024-03-21 인트린식 이노베이션 엘엘씨 편광 큐를 이용한 표면 모델링 시스템 및 방법
CA3157194C (en) 2019-10-07 2023-08-29 Boston Polarimetrics, Inc. Systems and methods for augmentation of sensor systems and imaging systems with polarization
WO2021108002A1 (en) 2019-11-30 2021-06-03 Boston Polarimetrics, Inc. Systems and methods for transparent object segmentation using polarization cues
KR20220132620A (ko) 2020-01-29 2022-09-30 인트린식 이노베이션 엘엘씨 물체 포즈 검출 및 측정 시스템들을 특성화하기 위한 시스템들 및 방법들
KR20220133973A (ko) 2020-01-30 2022-10-05 인트린식 이노베이션 엘엘씨 편광된 이미지들을 포함하는 상이한 이미징 양식들에 대해 통계적 모델들을 훈련하기 위해 데이터를 합성하기 위한 시스템들 및 방법들
US11953700B2 (en) 2020-05-27 2024-04-09 Intrinsic Innovation Llc Multi-aperture polarization optical systems using beam splitters
US11290658B1 (en) 2021-04-15 2022-03-29 Boston Polarimetrics, Inc. Systems and methods for camera exposure control
US11954886B2 (en) 2021-04-15 2024-04-09 Intrinsic Innovation Llc Systems and methods for six-degree of freedom pose estimation of deformable objects
US11689813B2 (en) 2021-07-01 2023-06-27 Intrinsic Innovation Llc Systems and methods for high dynamic range imaging using crossed polarizers

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2849813B2 (ja) * 1986-12-19 1999-01-27 富士写真フイルム株式会社 映像信号の形成装置
US5159453A (en) 1990-09-07 1992-10-27 New York Institute Of Technology Video processing method and apparatus
JP3666886B2 (ja) * 1992-12-28 2005-06-29 キヤノン株式会社 撮像装置
US5438366A (en) 1993-03-31 1995-08-01 Eastman Kodak Company Aspherical blur filter for reducing artifacts in imaging apparatus
JP3648638B2 (ja) * 1993-04-28 2005-05-18 日本電信電話株式会社 カラー撮像装置
US5852502A (en) 1996-05-31 1998-12-22 American Digital Imaging, Inc. Apparatus and method for digital camera and recorder having a high resolution color composite image output
US6611289B1 (en) * 1999-01-15 2003-08-26 Yanbin Yu Digital cameras using multiple sensors with multiple lenses
JP3397755B2 (ja) * 1999-06-30 2003-04-21 キヤノン株式会社 撮像装置
US6859229B1 (en) * 1999-06-30 2005-02-22 Canon Kabushiki Kaisha Image pickup apparatus
US6788338B1 (en) * 2000-11-20 2004-09-07 Petko Dimitrov Dinev High resolution video camera apparatus having two image sensors and signal processing
JP4652634B2 (ja) * 2001-08-31 2011-03-16 キヤノン株式会社 撮像装置
US20030048493A1 (en) * 2001-09-10 2003-03-13 Pontifex Brian Decoursey Two sensor quantitative low-light color camera
US6809358B2 (en) 2002-02-05 2004-10-26 E-Phocus, Inc. Photoconductor on active pixel image sensor
JP2004007413A (ja) * 2002-03-28 2004-01-08 Hiroyuki Ogino 画像入力装置及びその方法
JP4018456B2 (ja) * 2002-06-03 2007-12-05 富士フイルム株式会社 撮像装置
US6852565B1 (en) * 2003-07-10 2005-02-08 Galaxcore, Inc. CMOS image sensor with substrate noise barrier
US7123298B2 (en) * 2003-12-18 2006-10-17 Avago Technologies Sensor Ip Pte. Ltd. Color image sensor with imaging elements imaging on respective regions of sensor elements
EP1608183A1 (en) * 2004-06-14 2005-12-21 Dialog Semiconductor GmbH Matrix circuit for imaging sensors

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102378015B (zh) * 2010-08-17 2016-01-20 苹果公司 使用亮度和色度传感器的图像捕获
CN102378015A (zh) * 2010-08-17 2012-03-14 苹果公司 使用亮度和色度传感器的图像捕获
WO2012051751A1 (en) * 2010-10-19 2012-04-26 Ether Precision, Inc. Optical module comprising monochromatic image sensors, system comprising optical module and method of manufacturing optical module
US10158832B2 (en) 2010-11-03 2018-12-18 Sony Corporation Lens and color filter arrangement, super-resolution camera system and method
US9813680B2 (en) 2010-11-03 2017-11-07 Sony Corporation Lens and color filter arrangement, super-resolution camera system and method
CN102457683A (zh) * 2010-11-03 2012-05-16 索尼公司 透镜和颜色过滤器布置、超分辨率相机系统及方法
CN103595982A (zh) * 2013-11-07 2014-02-19 天津大学 基于灰度和彩色两颗传感器的彩色图像采集装置
US11719637B2 (en) 2013-12-10 2023-08-08 Illumina, Inc. Biosensors for biological or chemical analysis and methods of manufacturing the same
CN110411998B (zh) * 2013-12-10 2022-06-07 伊鲁米那股份有限公司 用于生物或化学分析的生物传感器及其制造方法
CN110411998A (zh) * 2013-12-10 2019-11-05 伊鲁米那股份有限公司 用于生物或化学分析的生物传感器及其制造方法
US11181478B2 (en) 2013-12-10 2021-11-23 Illumina, Inc. Biosensors for biological or chemical analysis and methods of manufacturing the same
CN106412533A (zh) * 2015-08-03 2017-02-15 索尼公司 数字成像装置、数字成像设备和数字成像方法
US10178360B2 (en) 2015-08-03 2019-01-08 Sony Corporation Imaging sensor coupled with layered filters
CN107431746B (zh) * 2015-11-24 2021-12-14 索尼半导体解决方案公司 相机模块和电子设备
CN107431746A (zh) * 2015-11-24 2017-12-01 索尼半导体解决方案公司 相机模块和电子设备
CN109844918A (zh) * 2016-10-14 2019-06-04 科磊股份有限公司 用于经配置用于半导体应用的深度学习模型的诊断系统及方法
CN109844918B (zh) * 2016-10-14 2023-06-20 科磊股份有限公司 用于经配置用于半导体应用的深度学习模型的诊断系统及方法

Also Published As

Publication number Publication date
US7483065B2 (en) 2009-01-27
WO2006065372A3 (en) 2007-05-10
WO2006065372A2 (en) 2006-06-22
KR20070100890A (ko) 2007-10-12
CN100596168C (zh) 2010-03-24
TW200621004A (en) 2006-06-16
US20060125936A1 (en) 2006-06-15
JP2008524924A (ja) 2008-07-10
EP1839432A2 (en) 2007-10-03
JP4636418B2 (ja) 2011-02-23

Similar Documents

Publication Publication Date Title
CN100596168C (zh) 多透镜成像系统和方法
WO2021227250A1 (zh) 图像传感器和电子设备
US7872681B2 (en) System and method for a high performance color filter mosaic array
US7508431B2 (en) Solid state imaging device
RU2551649C2 (ru) Устройство формирования цветного изображения
CN101437168B (zh) 图像拾取装置
CN1177467C (zh) 具有红外校正功能的彩色成像系统及其成像方法
US20070272836A1 (en) Photoelectric conversion apparatus
US20040105021A1 (en) Color filter patterns for image sensors
CN105025278A (zh) 具有缩放滤波器阵列和像素内装仓的图像传感器
EP1871091A2 (en) Camera Module
US20080079828A1 (en) Solid-state image sensor
JP2007520166A (ja) サブピクセル解像度を有する薄型カメラ
CN107547807B (zh) 用于减少空间闪烁伪影的装置和成像系统
US8111298B2 (en) Imaging circuit and image pickup device
US20030151685A1 (en) Digital video camera having only two CCDs
JP4421165B2 (ja) カラーフィルタを伴うカメラ
JP2005110104A (ja) 固体撮像装置
US20220093666A1 (en) Color filter array apparatus
WO2022111015A1 (zh) 一种图像传感器及成像装置
WO2020237591A1 (zh) 一种色彩滤镜阵列、图像传感器和拍摄装置
JP2004296705A (ja) 固体撮像素子
EP1575303A1 (en) Color filter patterns for image sensors

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: APTINA IMAGING CORP.

Free format text: FORMER OWNER: MICRON TECHNOLOGY INC.

Effective date: 20100409

C41 Transfer of patent application or patent right or utility model
COR Change of bibliographic data

Free format text: CORRECT: ADDRESS; FROM: IDAHO,U.S.A. TO: CAYMAN ISLANDS

TR01 Transfer of patent right

Effective date of registration: 20100409

Address after: Cayman Islands

Patentee after: Micron Technology Inc.

Address before: Idaho

Patentee before: Micron Technology, Inc.

CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20100324

Termination date: 20201031

CF01 Termination of patent right due to non-payment of annual fee