CN101395901B - 具备时间重叠图像输出的图像传感器 - Google Patents

具备时间重叠图像输出的图像传感器 Download PDF

Info

Publication number
CN101395901B
CN101395901B CN200480013924.XA CN200480013924A CN101395901B CN 101395901 B CN101395901 B CN 101395901B CN 200480013924 A CN200480013924 A CN 200480013924A CN 101395901 B CN101395901 B CN 101395901B
Authority
CN
China
Prior art keywords
image
processor
images
bus
imageing sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN200480013924.XA
Other languages
English (en)
Other versions
CN101395901A (zh
Inventor
H·N·泰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Candela Microsystems Inc
Original Assignee
Candela Microsystems Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Candela Microsystems Inc filed Critical Candela Microsystems Inc
Priority to CN201510468242.8A priority Critical patent/CN105227869B/zh
Publication of CN101395901A publication Critical patent/CN101395901A/zh
Application granted granted Critical
Publication of CN101395901B publication Critical patent/CN101395901B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32358Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device using picture signal storage, e.g. at transmitter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/40Picture signal circuits
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32358Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device using picture signal storage, e.g. at transmitter
    • H04N1/32459Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device using picture signal storage, e.g. at transmitter for changing the arrangement of the stored data
    • H04N1/32475Changing the format of the data, e.g. parallel to serial or vice versa
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/32358Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device using picture signal storage, e.g. at transmitter
    • H04N1/32491Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device using picture signal storage, e.g. at transmitter alternate storage in and retrieval from two parallel memories, e.g. using ping-pong buffers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/44Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
    • H04N25/447Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array by preserving the colour pattern with or without loss of information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/46Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by combining or binning pixels
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • H04N25/58Control of the dynamic range involving two or more exposures
    • H04N25/587Control of the dynamic range involving two or more exposures acquired sequentially, e.g. using the combination of odd and even image fields
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/616Noise processing, e.g. detecting, correcting, reducing or removing noise involving a correlated sampling function, e.g. correlated double sampling [CDS] or triple sampling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N3/00Scanning details of television systems; Combination thereof with generation of supply voltages
    • H04N3/10Scanning details of television systems; Combination thereof with generation of supply voltages by means not exclusively optical-mechanical
    • H04N3/14Scanning details of television systems; Combination thereof with generation of supply voltages by means not exclusively optical-mechanical by means of electrically scanned solid-state devices
    • H04N3/15Scanning details of television systems; Combination thereof with generation of supply voltages by means not exclusively optical-mechanical by means of electrically scanned solid-state devices for picture signal generation
    • H04N3/155Control of the image-sensor operation, e.g. image processing within the image-sensor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077Types of the still picture apparatus
    • H04N2201/0081Image reader
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3285Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device using picture signal storage, e.g. at transmitter
    • H04N2201/329Storage of less than a complete document page or image frame
    • H04N2201/3292Storage of less than a complete document page or image frame of one or two complete lines
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/642Multi-standard receivers

Abstract

一种图像传感器系统,具有生成第一图像和第二图像的图像传感器。第一和第二图像以时间重叠方式传送到处理器。举例来说,图像可以以交错方式传递到处理器或在分开的专用总线上提供。

Description

具备时间重叠图像输出的图像传感器
交叉相关申请的引用
本申请是国际专利申请,要求2003年5月23日提交的美国专利申请10/445256的优先权。
发明背景
1.发明领域
一般来讲,所公开的主题涉及半导体图像传感器领域。
2.背景信息
摄影器材、如数码相机和数码摄像机包含电子图像传感器,该传感器捕获光线以分别处理成静态或视频图像。有两种主要类型的电子图像传感器,电荷耦合器件(CCD)和互补金属氧化物半导体(CMOS)传感器。CCD图像传感器具有相对较高的信噪比(SNR),可提供优质图像。此外,CCD可制成具有相对较小的像素阵列,同时符合大部分相机和视频分辨率要求。像素是图像的最小分立元素。由于这些原因,大部分市场上可买到的相机和摄像机中使用CCD。
CMOS传感器比CCD器件速度更快且消耗更少的电力。此外,CMOS制造工艺被用于制造许多种类的集成电路。因此,CMOS传感器比CCD传感器拥有更充裕的制造能力。
至今,仍未开发出具有与市场上可买到的CCD传感器同样SNR和像素间距要求的CMOS传感器。像素间距是相邻像素中心之间的距离。希望提供一种CMOS传感器,具有相对较高的SNR,同时提供商业上可接受的像素间距。
图像传感器通常连接至外部处理器和外部存储器。外部存储器存储来自图像传感器的数据。处理器处理存储的数据。为了提高画质,有时希望捕获同一画面的两个不同的图像。对于CCD传感器,在捕获第一图像和捕获第二图像之间存在固有的延迟。在此延迟期间,图像可能移动。此图像移动可能会降低最终画面的质量。希望减少从像素阵列捕获和传输图像所需的时间。还希望提供可利用外部存储器的低噪声、高速、高分辨率的图像传感器。
发明概述
一种图像传感器系统,包括以时间重叠方式将第一图像和第二图像传输到处理器的图像传感器。
附图概述
图1是图像传感器的实施例的示意图;
图2是在外部存储器中存储静态图像的像素数据的方法的图解;
图3是提取和组合静态图像的像素数据的方法的图解;
图4是提取和组合像素数据的备选方法的图解;
图5是提取和组合像素数据的备选方法的图解;
图6是提取和组合像素数据的备选方法的图解;
图7是提取和组合像素数据的备选方法的图解;
图8是说明存储和组合视频图像的像素数据的方法的图解;
图9是说明存储和组合视频图像的像素数据的方法的又一图解;
图10是说明转换像素数据的分辨率的方法的图解;
图11是说明转换像素数据的分辨率的备选方法的图解;
图12是说明转换像素数据的分辨率的备选方法的图解;
图13是图像传感器的像素的实施例的示意图;
图14是图像传感器的光读取器电路的实施例的示意图;
图15是图像传感器的操作的第一模式的流程图;
图16是图像传感器的操作的第一模式的时序图;
图17是说明像素的光电二极管两端的信号电平的图解;
图18是生成图16的时序图的逻辑电路的示意图;
图19是生成像素行的RST信号的逻辑电路的示意图;
图20是图19中所示逻辑电路的时序图;
图21是说明图像传感器的操作的第二模式的流程图;
图22是图像传感器的操作的第二模式的时序图;
图23a是图像传感器系统的备选实施例的示意图;
图23b是图像传感器系统的备选实施例的示意图;
图24是图像传感器系统的备选实施例的示意图;
图25是图像传感器系统的备选实施例的示意图;
图26是外部处理器的备选实施例的示意图;
图27是图像传感器系统的备选实施例的示意图;
图28是图27中所示处理器的处理器实施例的示意图;
图29是图28中所示处理器的DMA控制器的实施例的示意图。
详细说明
所公开的是一种图像传感器系统,具有生成第一图像和第二图像的图像传感器。第一和第二图像以时间重叠方式传输到处理器。举例来说,图像可以以交错方式传输到处理器或在分开的专用总线上提供。
整个图像传感器最好是通过CMOS制造工艺和电路来制造。CMOS图像传感器具有高速、低功耗、小像素间距和高SNR的特性。
更具体地按照参考编号参照附图,图1说明图像传感器10。图像传感器10包括像素阵列12,其中包含多个独立的光电检测像素14。像素14排列成行和列的二维阵列。
像素阵列12通过总线18耦合至光读取器电路16并通过控制线22耦合至行解码器20。行解码器20可以选择像素阵列12的各个行。光读取器16则可以读取所选行中的特定离散列。结合在一起,行解码器20和光读取器16允许读取阵列12中的各个像素14。
光读取器16可以通过输出线26耦合至模数转换器24(ADC)。ADC24产生数字位串,对应于由光读取器16和所选像素14提供的信号的振幅。
ADC24通过线路36和开关38、40和42耦合至一对第一图像缓冲器28和30,以及一对第二图像缓冲器32和34。第一图像缓冲器28和30通过线路46和开关48耦合至存储器控制器44。存储器控制器44可更一般地称作数据接口。第二图像缓冲器32和34通过线路52和开关54耦合至数据组合器50。存储器控制器44和数据组合器50分别通过线路58和60连接至读回缓冲器56。读回缓冲器56的输出通过线路62连接至控制器44。数据组合器50通过线路64连接至存储器控制器44。此外,控制器44通过线路66连接至ADC24。
存储器控制器44通过控制器总线70耦合至外部总线68。外部总线68耦合至外部处理器72和外部存储器74。总线70、处理器72和存储器74在现有的数码相机、相机和手机中很常见。
为了捕获静态画面图像,光读取器16从像素阵列12逐行提取画面的第一图像。开关38处于将ADC24连接至第一图像缓冲器28和30的状态。开关40和48经过设置,使得数据进入一个缓冲器28或30以及通过存储器控制器44从其他缓冲器30或28提取。例如,第二行像素可以存储在缓冲器30中,而第一行像素数据通过存储器控制器44从缓冲器28提取并存储在外部存储器74中。
在画面的第二图像的第一行可获得时,选择开关38以交替地将第一图像数据和第二图像数据分别存储在第一图像缓冲器28和30以及第二图像缓冲器32和34中。可以选择开关48和54以交错方式交替地将第一和第二图像数据存储到外部存储器74中。此过程如图2所述。
有多种方法用于提取和组合第一和第二图像数据。如图3所示,在一种方法中,第一和第二图像的每一行从外部存储器74以存储器数据速率被提取,并存储在读回缓冲器56中,在数据组合器50中组合,并以处理器数据速率传输到处理器72。或者,第一和第二图像可以存储在读回缓冲器56中,然后以交错或接连方式提供给处理器72,而不在组合器50中组合图像。此技术允许处理器72以不同的方法处理数据方式。
图4说明外部处理器72组合像素数据的备选方法。从外部存储器74提取第一图像的一行并以存储器数据速率存储在读回缓冲器56中,然后以处理器数据速率传输到外部处理器72。然后,从外部存储器74提取第二图像的一行,存储在读回缓冲器56中,并传输到外部处理器72。对第一和第二图像的每一行继续此程序。或者,可以从外部存储器74提取整个第一图像,存储在读回缓冲器56中并传输到外部处理器72,每次一行,如图5所示。然后,从外部存储器74提取第二图像的每一行,存储在读回缓冲器56中,并传输到外部处理器72。
如果处理器数据速率与存储器数据速率一样,处理器72会以交错或接连方式直接从外部存储器74提取像素数据速率,分别如图6和图7所示。对于所有上述技术,存储器控制器44为图像传感器10、处理器72和存储器74之间的数据传输提供仲裁。为了减少图像传感器10中的噪声,控制器44最好在光读取器16没有提取输出信号时传输数据。
为了捕获视频画面,画面的第一图像的像素数据行可以存储在外部存储器74中。在画面的第二图像的第一行可获得时,以存储器数据速率从存储器74提取第一图像的第一行,并在数据组合器50中组合,如图8和图9所示。组合的数据以处理器数据速率传输到外部处理器72。如图9所示,外部存储器以存储器数据速率同时输出和输入第一图像的像素数据行。
对于视频捕捉,缓冲器28、30、32和34可以执行输入像素数据的分辨率转换。有两种常见视频标准:NTSC和PAL。NTSC需要480条水平线。PAL需要590条水平线。为了提供高静态图像分辨率,像素阵列12可包含多达1500条水平线。图像传感器将输出数据转换为标准格式。通过板上转换,图像传感器减少处理器72的开销。
图10说明转换分辨率和减少数据量的技术。减少数据会降低图像传感器的噪声和功耗。另外,减少数据会降低对外部存储器的存储要求。第一种方法将4个邻接列和4个邻接行的像素减少为2列和2行的像素。像素阵列12包括4乘4的像素组,其中包含按Bayer模式排列的红(R)、绿(G)和蓝(B)像素。根据以下等式,4乘4阵列减少为2乘2阵列:
R=1/4*(R1+R2+R3+R4)  (1)
B=1/4*(B1+B2+B3+B4)  (2)
GB=1/2*(G1+G2)       (3)
GR=1/2*(G3+G4)       (4)
净效应是75%的数据速率减少,以Bayer模式排列。
图11说明分辨率转换的备选方法。第二种技术提供与MPEG-2兼容的4:2:0编码。转换使用以下等式执行:
R=1/4*(R1+R2+R3+R4)  (5)
B=1/4*(B1+B2+B3+B4)  (6)
GB=1/2*(G1+G2)       (7)
GR=1/2*(G3+G4)       (8)
GBB=1/2*(G5+G6)      (9)
GRR=1/2*(G7+G8)      (10)
净效应是62.5%的数据速率减少。
图12说明又一种备选的分辨率转换方法。第三种方法使用以下等式提供4:2:2编码技术:
G12=1/2*(G1+G2)      (11)
G34=1/2*(G3+G4)      (12)
G56=1/2*(G5+G6)      (13)
G78=1/2*(G7+G8)      (14)
R12=1/2*(R1+R2)      (15)
R34=1/2*(R3+R4)      (16)
B12=1/2*(B1+B2)      (17)
B34=1/2*(B3+B4)      (18)
净效应是50%的数据速率减少。
为节省能量,存储器控制器44可在外部存储器74没有接收或发送数据时将其断电。为实现此功能,可将控制器44的电源控制引脚76连接至SDRAM的CKE引脚(见图1)。
图13说明像素阵列12的像素14的单元结构的实施例。像素14可包含光电检测器100。举例来说,光电检测器100可以是光电二极管。光电检测器100可连接至重置晶体管112。光电检测器100还可通过电平移动晶体管116耦合至选择晶体管114。晶体管112、114和116可以是场效应晶体管(FET)。
重置晶体管112的栅极可以连接至RST线118。晶体管112的漏极节点可以连接至IN线120。选择晶体管114的栅极可以连接至SEL线122。晶体管114的源极节点可以连接至OUT线124。RST118和SEL线122可对于像素阵列12中的整行像素是公共的。同样,IN120和OUT124线可对于像素阵列12中的整列像素是公共的。RST线118和SEL线122连接至行解码器20,并且是控制线22的一部分。
图14说明光读取器电路16的实施例。光读取器16可包括多个双采样电容电路150,每个连接至像素阵列12的OUT线124。每个双采样电路150可包括第一电容152和第二电容154。第一电容152分别通过开关158和160耦合至OUT线124和地GND1156。第二电容154分别通过开关162和164耦合至OUT线124和地GND1。开关158和160由控制线SAM1166控制。开关162和164由控制线SAM2168控制。电容152和154可以通过闭合开关170连接在一起,从而执行电压减去。开关170由控制线SUB172控制。
双采样电路150通过多个第一开关182和多个第二开关184连接至运算放大器180。放大器180的负端-通过第一开关182耦合至第一电容152,正端+通过第二开关184耦合至第二电容154。运算放大器180的正输出+连接至输出线OP188和负输出-连接至输出线OM186。输出线186和188连接至ADC24(见图1)。
运算放大器180提供放大信号,该信号是连接至放大器180的采样电路150的第一电容152中存储的电压和第二电容154中存储的电压之间的差值。放大器180的增益可以通过调节可变电容190而改变。可变电容190可通过闭合一对开关192放电。开关192可连接至相应的控制线(未示出)。虽然表示和描述的是单个放大器,但是应该理解,光读取器电路16中可使用一个以上的放大器。
图15和16说明图像传感器10在也称为低噪声模式的第一模式中的操作。在过程框300中,将参考信号写入像素阵列的每个像素14,然后将第一参考输出信号存储在光读取器16中。参照图13和16,这可以通过将RST118和IN120线从低电压切换到高电压以使晶体管112导通来实现。RST线118为整行被驱动为高。IN线120为整列被驱动为高。在优选实施例中,在IN线120初始低时,RST线118首先被驱动为高。
RST线118可以连接至三态缓冲器(未示出),该缓冲器在IN线120切换到高状态时切换到三态。这允许栅极电压浮动到高于IN线120上电压的值。这导致晶体管112进入三极管区。在三极管区,光电二极管100上的电压大约与IN线120上的电压一样。产生更高栅极电压允许光电检测器重置在接近Vdd的电平。先有技术的CMOS传感器将光电检测器重置为Vdd-Vgs的电平,其中Vgs可高达1V。
SEL线122也被切换到高电压电平以使晶体管114导通。光电二极管100的电压通过电平移动晶体管116和选择晶体管114提供给OUT线124。光读取器16(见图14)的SAM1控制线166被选择,以将OUT线124上的电压存储在第一电容152中。
参照图15,在过程框302中,像素阵列的像素则被重置且重置输出信号则被存储在光读取器16中。参照图13和16,这可以通过将RST线118驱动为低以使晶体管112截止并重置像素14来实现。使晶体管112截止会产生重置噪声、电荷注入和驻留在光电二极管100上的时钟馈通电压。如图17所示,在晶体管112重置时,噪声会减小光电检测器100上的电压。
SAM2线168被驱动为高,SEL线122被驱动为低,然后再次被驱动为高,这样光电二极管100的电平移动电压作为重置输出信号被存储在光读取器电路16的第二电容154中。过程框300和302对阵列12中的每个像素14重复。
参照图15,在过程框304中,随后从第一参考输出信号减去重置输出信号以产生噪声输出信号,随后被ADC24转换为数字位串。根据图2、3、8或9中所述的技术之一,数字输出数据存储在外部存储器74中。噪声信号对应于第一图像像素数据。参照图14,减去过程可以通过闭合光读取器电路16(图14)的开关182、184和170以从第一电容152上的电压减去第二电容154上的电压来实现。
参照图15,在框306中,光响应输出信号从像素阵列12的像素14采样并存储在光读取器电路16中。光响应输出信号对应于图像传感器10检测到的光图像。参照图13、14和16,这可以通过使IN120、SEL122和SAM2线168处于高状态并使RST118处于低状态来实现。光读取器电路16的第二电容152存储光电二极管100的电平移动电压作为光响应输出信号。
参照图15,在框308中,第二参考输出信号随后在像素14中产生并存储在光读取器电路16中。参考图13、14和16,这可以通过与产生和存储第一参考输出信号相似的方法来实现。RST线118被首先驱动为高,然后进入三态。随后将IN线120驱动为高以使晶体管112进入三极管区,这样光电二极管100上的电压为IN线120上的电压。SEL122和SAM2168线随后被驱动为高以将第二参考输出电压存储在光读取器电路16的第一电容154中。过程框306和308对阵列12中的每个像素14重复。
参照图15,在框310中,从第二参考输出信号减去光响应输出信号以产生标准化的光响应输出信号。标准化的光响应输出信号被转换为数字位串以创建标准化的光输出数据,该数据存储在第二图像缓冲器32和34中。标准化的光响应输出信号对应于第二图像像素数据。参照图13、14和16,减去过程可以通过闭合光读取器16的开关170、182和184以从第二电容154上的电压减去第一电容152上的电压来实现。差值随后被放大器180放大并由ADC24转换为数字位串作为光响应数据。
参考图15,在框312中,从外部存储器提取噪声数据。在框314中,根据图3、4、5、6、7或8中所示的技术之一,噪声数据与标准化光输出数据组合(减去)。噪声数据对应于第一图像,而标准化光输出数据对应于第二图像。第二参考输出信号与第一参考输出信号相同或大致相同,使得本技术从标准化光响应信号中减去由于重置噪声、电荷注入和时钟馈通而产生的噪声数据。这提高了最终图像数据的信噪比。图像传感器使用仅有三个晶体管的像素执行此噪声消除。因此,本图像传感器提供噪声消除,同时保持相对较小的像素间距。此过程使用外部处理器72和外部存储器74实现。
所述过程按顺序在像素阵列12中的各像素行执行。如图16所示,在像素阵列中的第n-l行产生标准化光响应信号时,第n行可能正在产生噪声信号,其中l是以行周期的倍数计的曝光持续时间。
各种控制信号RST、SEL、IN、SAM1、SAM2和SUB可以在一般被称为行解码器20的电路中产生。图18说明按照图16的时序图产生IN、SEL、SAM1、SAM2和RST信号的逻辑的实施例。该逻辑可以包括多个比较器350,其中一个输入连接至计数器352和另一个输入连接至包含较低计数值和较高计数值的硬连线信号。计数器352顺序地产生计数。比较器350比较当前计数与较低和较高计数值。如果当前计数处于较低和较高计数值之间,比较器350输出逻辑1。
比较器350连接至多个“与”门356和“或”门358。“或”门358连接至锁存器360。锁存器360提供相应的IN、SEL、SAM1、SAM2和RST信号。“与”门356还连接至模式线364。要按照图16所示的时序图操作,模式线364设置为逻辑1。
锁存器360根据由“与”门356、“或”门358、比较器350和计数器352的当前计数建立的逻辑在逻辑0和逻辑1之间切换。例如,耦合至IN锁存器的比较器所用的硬连线信号可能包含计数值6和计数值24。如果计数器的计数大于或等于6但小于24,则比较器350将提供使IN锁存器360输出逻辑1的逻辑1。较低和较高计数值建立图16所示的脉冲的序列和持续时间。模式线364可以切换至使图像传感器以第二模式工作的逻辑0。
传感器10可能具有多个重置RST(n)驱动器370,每个驱动器370连接至一行像素。图19和20说明示范驱动器电路370和电路370的操作。每个驱动器370可具有一对“或非”门372,它们连接至图18所示的RST和SAM1锁存器。“或非”门控制三态缓冲器374的状态。三态缓冲器374连接至一行像素中的重置晶体管。三态缓冲器的输入连接至“与”门376,“与”门376连接至RST锁存器和行使能ROWEN(n)线。
图21和22说明图像传感器在也称为扩展动态范围模式的第二模式中的操作。在这种模式中,图像提供足够的光能量,使得SNR即使没有图15和16中所述的噪声消除技术也是足够的。然而可以理解,在图像传感器10处于扩展动态范围模式中时可以使用图15和16中所示的噪声消除技术。扩展动态模式同时具有短曝光周期和长曝光周期。参照图21,在框400中,每个像素14被重置以开始短曝光周期。图像传感器的模式可以由处理器72设置以确定传感器应该处于低噪声模式还是扩展动态范围模式。
在框402中,短曝光输出信号在选定的像素中产生并存储在光读取器电路16的第二电容154中。
在框404中,选定的像素随后被重置。光电二极管100的电平移动重置电压存储在光读取器电路16的第一电容152中作为重置输出信号。短曝光输出信号被从光读取器电路16中的重置输出信号减去。短曝光信号和重置信号之间的差值由ADC24转换为二进制位串并根据图2、3、8或9中所示的技术之一存储在外部存储器74中。短曝光数据对应于第一图像像素数据。然后再重置每个像素以开始长曝光周期。
在框406中,光读取器电路16将来自像素的长曝光输出信号存储在第二电容154中。在框408中,像素被重置且光读取器电路16将重置输出信号存储在第一电容152中。长曝光输出信号被从重置输出信号减去、放大并由ADC24转换为二进制位串作为长曝光数据。
参考图21,在框410中,从外部存储器提取短曝光数据。在框412中,根据图3、4、5、6、7或8中所示的技术之一,短曝光数据与长曝光数据组合。数据可以按多种不同的方式组合。外部处理器72可以先使用长曝光数据分析图像。如果图像太亮,光电二极管可能会饱和。这通常会导致图像“褪色”。处理器72可以处理长曝光数据以确定图像是否褪色,如果是,处理器72则可以使用短曝光图像数据。处理器72也可以同时使用长和短曝光数据以补偿检测到的图像的饱和部分。
举例来说,图像开始可以设置为全零。然后处理器72分析长曝光数据。如果长曝光数据不超过阈值,则使用长曝光数据的所有N位取代图像的N个最低有效位(LSB)。如果长曝光数据超过阈值,则使用短曝光数据的所有N位取代图像的N个最高有效位(MSB)。此技术将动态范围增大M位,其中M是由等式l=2M定义的长短曝光的曝光持续时间比中的指数。根据映射等式Y=2N log2(X)/(N+M),取代的图像可经过对数映射以获得N位的最终图片。
图22说明长短曝光数据的数据产生和提取的定时。从像素阵列12读取输出信号与从存储器74提取信号重叠。图22说明数据产生和提取的定时,其中第n行像素开始短曝光,第(n-k)行结束短曝光周期并开始长曝光周期,第(n-k-l)行像素结束长曝光周期。其中k是以行周期的倍数计的短曝光持续时间,l是以行周期的倍数计的长曝光持续时间。
在第(n-k-l)像素阵列正在完成长曝光周期的同时,存储器控制器44开始为行(n-k-l)中的像素提取短曝光数据。在行周期开始时,光读取器电路16从像素阵列12的第(n-k)行提取短曝光输出信号,如信号SAM1、SAM2、SEL(n-k)和RST(n-k)的使能所示。然后,光读取器电路16提取第(n-k-l)行的长曝光数据。
图像传感器10的双模式可以补偿图像中的变化亮度。在图像亮度低时,来自像素的输出信号相对低。这通常会减小由传感器提供的结果数据的信噪比,假定平均噪声相对恒定。图15和16所示的噪声补偿方案提高输出数据的信噪比,使得图像传感器即使在目标图像相对较暗时也可提供优质的图片。相反,在目标图像太亮时,图21和22所示的扩展动态范围模式会补偿这种亮度以提供优质的图片。
图23a说明图像传感器的又一实施例,具备连接至外部处理器72的处理器总线70’和连接至外部存储器74的分开的存储器总线70”。在这样配置下,处理器72可以在存储器74存储和传输数据时访问数据。此实施例还允许处理器总线70’的时钟速率比图1所示实施例的总线68更慢。
图23b说明又一实施例,其中处理器72耦合至分开的数据接口500,而外部存储器74连接至分开的存储器控制器44。
图24说明图像传感器的又一实施例,具有连接至缓冲器28、30、32和34的数据接口500。接口500通过处理器总线502连接至外部处理器72。在此配置中,外部存储器74通过分开的存储器总线504连接至处理器72。对于静态图像和视频捕捉这两者,第一和第二图像以交错方式提供给外部处理器。
图25公开不带缓冲器28、30、32和34的图像传感器的又一实施例。在此实施例中,ADC24直接连接至外部处理器72。处理器72可以执行计算步骤,例如组合(减去)噪声数据与标准化光输出数据,或短曝光数据与长曝光数据。
图26公开了包含DMA控制器510、缓冲存储器512和图像处理单元514的外部处理器。图像传感器10连接至DMA控制器510。处理器的DMA控制器510将第一和第二图像数据以交错或接连方式传输到存储器74。DMA控制器510还可以将图像数据传输到缓冲存储器512由图像处理单元514进行处理。
图27说明图像传感器系统550的又一实施例。系统550包括通过第一总线556和第二总线558耦合至处理器554的图像传感器552。处理器554也可以通过存储器总线562耦合至存储装置560,并通过非易失性存储器总线566耦合至非易失性存储装置564。
图像传感器552产生第一图像和第二图像。举例来说,第一图像在系统处于低噪声模式时可以是数字化的标准化噪声输出信号,或扩展动态范围模式的短曝光数据。同样,第二图像可以是低噪声模式的数字化的标准化光响应输出信号,或扩展动态范围模式的长曝光数据。
图像传感器552以时间重叠方式将第一和第二图像传输到处理器554。在第二图像通过第二总线558传输的同时第一图像可以通过第一总线556传输。应该理解,时间重叠方式表示在第一图像数据仍由图像传感器552传输时,第二图像数据正被传输到处理器554。举例来说,图像传感器552可通过将第一和第二图像在单个总线上交错,或在专用总线556和558上传输这两种图像,将图像传输到处理器。图像传感器552可以从内部数据接口、存储器控制器、直接从ADC或任何其他板载处理器和/或存储器接口传输图像数据。
处理器554可以使第一图像存储在存储装置560中,并在以后与第二图像重新组合。或者,存储装置560可以存储整个第一和第二图像。然后,可以由处理器554提取和组合第一和第二图像。作为又一种备选方案,存储装置560可以仅存储第二图像的一部分。
非易失性存储装置564可以是包含嵌入式固件的只读存储器(“ROM”)。该固件可以包含使处理器554以时间重叠方式接收第一和第二图像的程序。举例来说,程序可以使处理器554以交错的方式接收图像。或者,处理器554可以配置为具有固件和硬件的组合,或纯硬件实现,用于以时间重叠方式接收图像数据。
如图28所示,双总线系统550的处理器554可以包含板载DMA控制器566、缓冲存储器568和类似图26所示处理器的处理单元570。DMA控制器566可以使图像数据从存储装置560存储和提取。
图29说明具有多个缓冲器572、574、576和578的双端口DMA控制器566的实施例。缓冲器572和574,576和578分别通过开关580和582耦合至总线556和558。缓冲器572和574,576和578通过开关584、586和588耦合至存储器总线562。这些缓冲器和开关可类似于图1所示的图像传感器的缓冲器28、30、32和34以及开关38、40、42、48和54来工作。
DMA控制器566可以具备逻辑电路590,使第一图像数据存储在缓冲器572和574中,第二图像数据存储在缓冲器576和578中。缓冲器574和578可以存储分别来自总线556和558的数据,而存储装置560存储分别来自缓冲器572和576的第一图像数据和第二图像数据。然后,缓冲器572和576可以存储来自总线556和558的数据,而缓冲器574和578提供数据给存储器560。缓冲器572、574、576和578可以在存储来自总线556和558的数据与提供数据给存储装置560之间交替。DMA控制器566可以控制图像数据在存储装置560内的存储位置。
虽然未示出,图23a、23b和25中所示的图像传感器系统也可以具有双总线配置。图23a和23b中所示的实施例可以具有用于处理器72和/或存储器74的双总线。
本发明人的意图是只有包含术语“部件”的权利要求应根据35U.S.C.§112第六段来解释。
虽然某些示范实施例已经在附图中描述和显示,但是应该理解,这些实施例对广义发明只是说明性而不是限制性的,并且本发明不限于所显示和描述的特定结构和配置,因为本领域的技术人员可以想出各种其他修改。
例如,虽然显示和描述了涉及图像整行的交错技术,但是应该理解,数据可以以涉及少于一整行或多于一行的方式交错。举例来说,可以传输图像A的第一行的一半,再传输图像B的第一行的一半,再传输图像A的第一行的另一半,如此类推。同样,可以传输图像A的前两行,再传输图像B的前两行,再传输图像A的第三和第四行,如此类推。
此外,处理器72和/或554可以是Texas Instruments提供的数字信号处理器,部件名称为TMS320DSC21、TMS320DSC25、TMS320DM270或TMS320DM310,或者是这些部件的修改形式。

Claims (21)

1.一种图像传感器系统,包括:
产生第一图像和第二图像的图像传感器,所述图像传感器以时间重叠方式传送第一图像和第二图像,其中,所述图像传感器以逐行扫描的方式从其所包括的像素阵列提取所述第一图像;
处理器,耦合至所述图像传感器并以时间重叠方式接收所述第一和第二图像,其中由于所述第二图像的曝光时间所导致的延迟,所述第二图像比所述第一图像晚到达所述处理器;以及
耦合至所述处理器的非易失性存储装置,所述非易失性存储装置包含使所述处理器以时间重叠方式接收所述第一和第二图像的程序。
2.如权利要求1所述的系统,其特征在于,还包括耦合至所述处理器的存储装置,其中所述处理器包含将所述第一和第二图像以时间重叠方式传递到所述存储装置的DMA控制器。
3.如权利要求1所述的系统,其特征在于,还包括将所述图像传感器耦合至所述处理器的第一总线。
4.如权利要求3所述的系统,其特征在于,还包括将所述图像传感器耦合至所述处理器的第二总线,所述第一图像通过所述第一总线传送且所述第二图像通过所述第二总线传送。
5.如权利要求3所述的系统,其特征在于,所述第一和第二图像以交错方式传送到所述处理器。
6.如权利要求2所述的系统,其特征在于,还包括将所述存储装置耦合至所述图像传感器的第一总线。
7.一种图像传感器系统,包括:
以时间重叠方式产生和传送第一图像和第二图像的图像传感器部件,其中,所述图像传感器部件以逐行扫描的方式从其像素阵列提取所述第一图像;
以时间重叠方式接收所述第一和第二图像并处理所述第一和第二图像的处理器部件,其中由于所述第二图像的曝光时间所导致的延迟,所述第二图像比所述第一图像晚到达所述处理器部件;以及
非易失性存储器部件,用于存储使所述处理器部件以时间重叠方式接收所述第一和第二图像的程序。
8.如权利要求7所述的系统,其特征在于,还包括用于存储所述第一和第二图像的存储器部件,其中所述处理器部件包含将所述第一和第二图像以时间重叠方式传递到所述存储器部件的DMA控制器。
9.如权利要求7所述的系统,其特征在于,还包括将所述图像传感器部件耦合至所述处理器部件的第一总线。
10.如权利要求9所述的系统,其特征在于,还包括将所述图像传感器部件耦合至所述处理器部件的第二总线,所述第一图像通过所述第一总线传送且所述第二图像通过所述第二总线传送。
11.如权利要求9所述的系统,其特征在于,所述处理器部件以交错方式接收所述第一和第二图像。
12.如权利要求8所述的系统,其特征在于,还包括将所述存储器部件耦合至所述图像传感器部件的第一总线。
13.一种用于传递第一图像和第二图像的方法,包括:
从图像传感器的像素阵列产生第一图像,其中,所述图像传感器以逐行扫描的方式从其像素阵列提取所述第一图像;
从所述像素阵列产生第二图像;
以时间重叠方式将所述第一和第二图像从所述图像传感器传递到处理器,其中由于所述第二图像的曝光时间所导致的延迟,所述第二图像比所述第一图像晚到达所述处理器;以及
至少将由所述处理器接收的所述第一图像传递到存储器。
14.如权利要求13所述的方法,其特征在于,第一和第二图像以交错方式传递到所述处理器中。
15.一种耦合至传送第一图像和第二图像的图像传感器的处理器,包括:
以时间重叠方式接收第一图像和第二图像的处理器,其中由于所述第二图像的曝光时间所导致的延迟,所述第二图像比所述第一图像晚到达所述接收第一图像和第二图像的处理器,其中所述接收第一图像和第二图像的处理器按照使所述接收第一图像和第二图像的处理器以时间重叠方式接收第一和第二图像的程序来工作,且其中,所述图像传感器以逐行传送的方式传送所述第一图像与第二图像至所述接收第一图像和第二图像的处理器。
16.如权利要求15所述的处理器,其特征在于,所述接收第一图像和第二图像的处理器具有耦合至外部存储器的存储器总线,并包含将所述第一和第二图像以时间重叠方式传递到所述外部存储器的DMA控制器。
17.如权利要求15所述的处理器,其特征在于,所述处理器包括耦合至所述图像传感器的第一总线。
18.如权利要求17所述的处理器,其特征在于,所述处理器包括耦合至所述图像传感器的第二总线,所述第一图像通过所述第一总线传送且所述第二图像通过所述第二总线传送。
19.如权利要求17所述的处理器,其特征在于,所述接收第一图像和第二图像的处理器以交错方式接收所述第一和第二图像。
20.如权利要求16所述的处理器,其中所述第一和第二图像通过所述存储器总线传送到所述外部存储器。
21.如权利要求20所述的处理器,其中通过所述存储器总线将所述第一和第二图像从所述外部存储器取回到所述接收第一图像和第二图像的处理器,并且所述第一和第二图像由所述处理器组合。
CN200480013924.XA 2003-05-23 2004-05-06 具备时间重叠图像输出的图像传感器 Expired - Fee Related CN101395901B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510468242.8A CN105227869B (zh) 2003-05-23 2004-05-06 具备时间重叠图像输出的图像传感器

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US10/445,256 2003-05-23
US10/445,256 US8054357B2 (en) 2001-11-06 2003-05-23 Image sensor with time overlapping image output
PCT/US2004/014139 WO2004107727A2 (en) 2003-05-23 2004-05-06 Image sensor with time overlapping image output

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201510468242.8A Division CN105227869B (zh) 2003-05-23 2004-05-06 具备时间重叠图像输出的图像传感器

Publications (2)

Publication Number Publication Date
CN101395901A CN101395901A (zh) 2009-03-25
CN101395901B true CN101395901B (zh) 2015-09-02

Family

ID=33489368

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201510468242.8A Expired - Fee Related CN105227869B (zh) 2003-05-23 2004-05-06 具备时间重叠图像输出的图像传感器
CN200480013924.XA Expired - Fee Related CN101395901B (zh) 2003-05-23 2004-05-06 具备时间重叠图像输出的图像传感器

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201510468242.8A Expired - Fee Related CN105227869B (zh) 2003-05-23 2004-05-06 具备时间重叠图像输出的图像传感器

Country Status (4)

Country Link
US (2) US8054357B2 (zh)
EP (1) EP1671475A4 (zh)
CN (2) CN105227869B (zh)
WO (1) WO2004107727A2 (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9450672B2 (en) 2012-12-27 2016-09-20 Panasonic Intellectual Property Corporation Of America Information communication method of transmitting a signal using change in luminance
US9456109B2 (en) 2012-05-24 2016-09-27 Panasonic Intellectual Property Corporation Of America Information communication method of obtaining information from a subject by demodulating data specified by a pattern of a bright line included in an obtained image
US9462173B2 (en) 2012-12-27 2016-10-04 Panasonic Intellectual Property Corporation Of America Information communication method
US9467225B2 (en) 2012-12-27 2016-10-11 Panasonic Intellectual Property Corporation Of America Information communication method
US9515731B2 (en) 2012-12-27 2016-12-06 Panasonic Intellectual Property Corporation Of America Information communication method
US9560284B2 (en) 2012-12-27 2017-01-31 Panasonic Intellectual Property Corporation Of America Information communication method for obtaining information specified by striped pattern of bright lines
US9564970B2 (en) 2012-12-27 2017-02-07 Panasonic Intellectual Property Corporation Of America Information communication method for obtaining information using ID list and bright line image
US9591232B2 (en) 2012-12-27 2017-03-07 Panasonic Intellectual Property Corporation Of America Information communication method

Families Citing this family (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7639889B2 (en) 2004-11-10 2009-12-29 Fotonation Ireland Ltd. Method of notifying users regarding motion artifacts based on image analysis
US8264576B2 (en) * 2007-03-05 2012-09-11 DigitalOptics Corporation Europe Limited RGBW sensor array
US8989516B2 (en) 2007-09-18 2015-03-24 Fotonation Limited Image processing method and apparatus
US7636486B2 (en) 2004-11-10 2009-12-22 Fotonation Ireland Ltd. Method of determining PSF using multiple instances of a nominally similar scene
US8698924B2 (en) 2007-03-05 2014-04-15 DigitalOptics Corporation Europe Limited Tone mapping for low-light video frame enhancement
US8199222B2 (en) 2007-03-05 2012-06-12 DigitalOptics Corporation Europe Limited Low-light video frame enhancement
US9160897B2 (en) 2007-06-14 2015-10-13 Fotonation Limited Fast motion estimation method
US8180173B2 (en) * 2007-09-21 2012-05-15 DigitalOptics Corporation Europe Limited Flash artifact eye defect correction in blurred images using anisotropic blurring
US8417055B2 (en) 2007-03-05 2013-04-09 DigitalOptics Corporation Europe Limited Image processing method and apparatus
JP4490740B2 (ja) * 2004-06-17 2010-06-30 株式会社アドバンテスト 信号読出装置及び試験装置
US7639888B2 (en) 2004-11-10 2009-12-29 Fotonation Ireland Ltd. Method and apparatus for initiating subsequent exposures based on determination of motion blurring artifacts
IES20070229A2 (en) 2006-06-05 2007-10-03 Fotonation Vision Ltd Image acquisition method and apparatus
US7773118B2 (en) 2007-03-25 2010-08-10 Fotonation Vision Limited Handheld article with movement discrimination
US20090066808A1 (en) * 2007-09-11 2009-03-12 Sanyo Electric Co., Ltd. Image-data processing apparatus and data-processing circuit
JP4488079B2 (ja) * 2008-03-10 2010-06-23 ソニー株式会社 固体撮像素子、増幅方法、および撮像装置
EP2101503A1 (en) * 2008-03-11 2009-09-16 British Telecommunications Public Limited Company Video coding
CN101557456B (zh) * 2008-04-10 2010-12-29 联咏科技股份有限公司 相关二重取样电路及互补金属氧化物半导体影像感测单元
JP5109104B2 (ja) * 2008-04-15 2012-12-26 株式会社メガチップス 一眼レフデジタルカメラ
EP2200319A1 (en) 2008-12-10 2010-06-23 BRITISH TELECOMMUNICATIONS public limited company Multiplexed video streaming
EP2219342A1 (en) * 2009-02-12 2010-08-18 BRITISH TELECOMMUNICATIONS public limited company Bandwidth allocation control in multiple video streaming
US8988574B2 (en) 2012-12-27 2015-03-24 Panasonic Intellectual Property Corporation Of America Information communication method for obtaining information using bright line image
US10530486B2 (en) 2012-12-27 2020-01-07 Panasonic Intellectual Property Corporation Of America Transmitting method, transmitting apparatus, and program
EP2940901B1 (en) 2012-12-27 2019-08-07 Panasonic Intellectual Property Corporation of America Display method
WO2014103157A1 (ja) 2012-12-27 2014-07-03 パナソニック株式会社 映像表示方法
US9608727B2 (en) 2012-12-27 2017-03-28 Panasonic Intellectual Property Corporation Of America Switched pixel visible light transmitting method, apparatus and program
US10303945B2 (en) 2012-12-27 2019-05-28 Panasonic Intellectual Property Corporation Of America Display method and display apparatus
US10523876B2 (en) 2012-12-27 2019-12-31 Panasonic Intellectual Property Corporation Of America Information communication method
US10951310B2 (en) 2012-12-27 2021-03-16 Panasonic Intellectual Property Corporation Of America Communication method, communication device, and transmitter
US9608725B2 (en) 2012-12-27 2017-03-28 Panasonic Intellectual Property Corporation Of America Information processing program, reception program, and information processing apparatus
KR102254684B1 (ko) * 2014-07-15 2021-05-21 삼성전자주식회사 이미지 장치 및 그 구동 방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6111604A (en) * 1995-02-21 2000-08-29 Ricoh Company, Ltd. Digital camera which detects a connection to an external device

Family Cites Families (82)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3931674A (en) 1974-02-08 1976-01-13 Fairchild Camera And Instrument Corporation Self aligned CCD element including two levels of electrodes and method of manufacture therefor
US4425501A (en) 1981-03-30 1984-01-10 Honeywell Inc. Light aperture for a lenslet-photodetector array
US4417325A (en) * 1981-07-13 1983-11-22 Eliyahou Harari Highly scaleable dynamic ram cell with self-signal amplification
US4473836A (en) 1982-05-03 1984-09-25 Dalsa Inc. Integrable large dynamic range photodetector element for linear and area integrated circuit imaging arrays
JPS5934772A (ja) 1982-08-20 1984-02-25 Olympus Optical Co Ltd 画像信号処理装置
US4704633A (en) 1985-04-01 1987-11-03 Fuji Photo Film Co., Ltd. Method for reading out image information on an image having a wide dynamic range
US4647975A (en) 1985-10-30 1987-03-03 Polaroid Corporation Exposure control system for an electronic imaging camera having increased dynamic range
US5737016A (en) 1985-11-15 1998-04-07 Canon Kabushiki Kaisha Solid state image pickup apparatus for reducing noise
US4972254A (en) * 1987-02-24 1990-11-20 Kabushiki Kaisha Toshiba Solid state image sensors for reproducing high definition images
US4858013A (en) 1987-03-19 1989-08-15 Mitsubishi Denki Kabushiki Kaisha Solid state imaging device with adaptive pixel correction
US5638118A (en) 1987-06-09 1997-06-10 Canon Kabushiki Kaisha Image sensing device with diverse storage times used in picture composition
US5162914A (en) 1987-06-09 1992-11-10 Canon Kabushiki Kaisha Image sensing device with diverse storage fumes used in picture composition
US4878121A (en) * 1987-07-09 1989-10-31 Texas Instruments Incorporated Image sensor array for still camera imaging with multiplexer for separating interlaced fields
US4974093A (en) 1987-12-22 1990-11-27 Fuji Photo Film Co., Ltd. Solid state image-pickup device with expanded dynamic range
US5043821A (en) 1988-08-31 1991-08-27 Canon Kabushiki Kaisha Image pickup device having a frame-size memory
US5138458A (en) 1989-12-22 1992-08-11 Olympus Optical Co., Ltd. Electronic camera apparatus capable of providing wide dynamic range image signal
JPH05506971A (ja) * 1990-02-16 1993-10-07 スキャネラ ソシエテ シビル カメラのダイナミックレンジを増加するための装置
EP0667609B1 (en) 1990-03-09 2000-05-24 Canon Kabushiki Kaisha Signal recording system
JPH04219063A (ja) 1990-05-15 1992-08-10 Ricoh Co Ltd 画像読取装置
US5606366A (en) 1991-10-28 1997-02-25 Canon Kabushiki Kaisha Image sensor driving apparatus wherein photoelectric conversion operations are performed a plurality of times
JP2993144B2 (ja) 1991-02-22 1999-12-20 株式会社デンソー イメージセンサ
US5235197A (en) 1991-06-25 1993-08-10 Dalsa, Inc. High photosensitivity and high speed wide dynamic range ccd image sensor
US5420635A (en) 1991-08-30 1995-05-30 Fuji Photo Film Co., Ltd. Video camera, imaging method using video camera, method of operating video camera, image processing apparatus and method, and solid-state electronic imaging device
JP3563743B2 (ja) 1992-05-01 2004-09-08 オリンパス株式会社 撮像装置
US5309243A (en) 1992-06-10 1994-05-03 Eastman Kodak Company Method and apparatus for extending the dynamic range of an electronic imaging system
JP2833729B2 (ja) 1992-06-30 1998-12-09 キヤノン株式会社 固体撮像装置
JP3074967B2 (ja) * 1992-10-27 2000-08-07 松下電器産業株式会社 高ダイナミックレンジ撮像・合成方法及び高ダイナミックレンジ撮像装置
US5493335A (en) 1993-06-30 1996-02-20 Eastman Kodak Company Single sensor color camera with user selectable image record size
US5801773A (en) 1993-10-29 1998-09-01 Canon Kabushiki Kaisha Image data processing apparatus for processing combined image signals in order to extend dynamic range
US6204881B1 (en) * 1993-10-10 2001-03-20 Canon Kabushiki Kaisha Image data processing apparatus which can combine a plurality of images at different exposures into an image with a wider dynamic range
EP0653881B1 (en) 1993-11-17 2001-08-16 Canon Kabushiki Kaisha Solid-state image pickup device
US5841126A (en) 1994-01-28 1998-11-24 California Institute Of Technology CMOS active pixel sensor type imaging system on a chip
US5471515A (en) 1994-01-28 1995-11-28 California Institute Of Technology Active pixel sensor with intra-pixel charge transfer
US6021172A (en) 1994-01-28 2000-02-01 California Institute Of Technology Active pixel sensor having intra-pixel charge transfer with analog-to-digital converter
US5461425A (en) 1994-02-15 1995-10-24 Stanford University CMOS image sensor with pixel level A/D conversion
JP2555986B2 (ja) * 1994-06-23 1996-11-20 日本電気株式会社 高感度テレビカメラ装置
US6040858A (en) 1994-11-18 2000-03-21 Canon Kabushiki Kaisha Method and apparatus for expanding the dynamic range of sensed color images
US5808676A (en) 1995-01-03 1998-09-15 Xerox Corporation Pixel cells having integrated analog memories and arrays thereof
US5665959A (en) 1995-01-13 1997-09-09 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Adminstration Solid-state image sensor with focal-plane digital photon-counting pixel array
US5929908A (en) * 1995-02-03 1999-07-27 Canon Kabushiki Kaisha Image sensing apparatus which performs dynamic range expansion and image sensing method for dynamic range expansion
EP0729270B1 (en) 1995-02-24 2002-12-18 Eastman Kodak Company Black pattern correction for a charge transfer sensor
WO1997007628A1 (fr) 1995-08-11 1997-02-27 Kabushiki Kaisha Toshiba Dispositif semi-conducteur mos pour effectuer une saisie d'iamge
DE69634463T2 (de) * 1995-09-08 2006-01-19 Canon K.K. Bildaufnahmegerät mit progressiver oder zeilensprungfreier Abtastungsbildaufnahmevorrichtung
WO1997017800A1 (en) * 1995-11-07 1997-05-15 California Institute Of Technology An image sensor with high dynamic range linear output
WO1997024728A1 (en) 1995-12-29 1997-07-10 Intel Corporation Cmos imaging device with integrated flash memory image correction circuitry
JP3408045B2 (ja) 1996-01-19 2003-05-19 キヤノン株式会社 光電変換装置
US5990506A (en) 1996-03-20 1999-11-23 California Institute Of Technology Active pixel sensors with substantially planarized color filtering elements
JP3834354B2 (ja) 1996-06-06 2006-10-18 オリンパス株式会社 撮像装置
JPH1042182A (ja) 1996-07-26 1998-02-13 Canon Inc 撮像装置
US5886659A (en) 1996-08-21 1999-03-23 California Institute Of Technology On-focal-plane analog-to-digital conversion for current-mode imaging devices
US5892541A (en) 1996-09-10 1999-04-06 Foveonics, Inc. Imaging system and method for increasing the dynamic range of an array of active pixel sensor cells
US6002432A (en) 1996-09-10 1999-12-14 Foveon, Inc. Method for operating an active pixel sensor cell that reduces noise in the photo information extracted from the cell
GB2317522B (en) * 1996-09-12 2000-09-27 Vsli Vision Limited Low noise operation of an image sensor
US5909026A (en) 1996-11-12 1999-06-01 California Institute Of Technology Integrated sensor with frame memory and programmable resolution for light adaptive imaging
US6115066A (en) 1997-06-12 2000-09-05 International Business Machines Corporation Image sensor with direct digital correlated sampling
US5962844A (en) * 1997-09-03 1999-10-05 Foveon, Inc. Active pixel image cell with embedded memory and pixel level signal processing capability
US6005619A (en) 1997-10-06 1999-12-21 Photobit Corporation Quantum efficiency improvements in active pixel sensors
DE69841609D1 (de) * 1997-10-17 2010-05-27 Panasonic Corp Eine Videkamera mit erweitertem Dynamikbereich
US6369737B1 (en) * 1997-10-30 2002-04-09 The Board Of Trustees Of The Leland Stanford Junior University Method and apparatus for converting a low dynamic range analog signal to a large dynamic range floating-point digital representation
US6246436B1 (en) * 1997-11-03 2001-06-12 Agilent Technologies, Inc Adjustable gain active pixel sensor
US6008486A (en) * 1997-12-31 1999-12-28 Gentex Corporation Wide dynamic range optical sensor
EP0928101A3 (en) * 1997-12-31 2001-05-02 Texas Instruments Incorporated CMOS area array sensors
US6243134B1 (en) 1998-02-27 2001-06-05 Intel Corporation Method to reduce reset noise in photodiode based CMOS image sensors
US6809766B1 (en) * 1998-03-11 2004-10-26 Micro Technology, Inc. Look ahead rolling shutter system in CMOS sensors
US6493030B1 (en) * 1998-04-08 2002-12-10 Pictos Technologies, Inc. Low-noise active pixel sensor for imaging arrays with global reset
US6476864B1 (en) * 1998-05-11 2002-11-05 Agilent Technologies, Inc. Pixel sensor column amplifier architecture
US6101287A (en) 1998-05-27 2000-08-08 Intel Corporation Dark frame subtraction
JP4003151B2 (ja) * 1998-07-09 2007-11-07 富士フイルム株式会社 撮像装置
US6532040B1 (en) * 1998-09-09 2003-03-11 Pictos Technologies, Inc. Low-noise active-pixel sensor for imaging arrays with high speed row reset
EP1003329B1 (en) * 1998-11-18 2006-03-29 C.S.E.M. Centre Suisse D'electronique Et De Microtechnique Sa Method and device for forming an image
US6760068B2 (en) * 1998-12-31 2004-07-06 Sandisk Corporation Correction of corrupted elements in sensors using analog/multi-level non-volatile memory
KR20000057783A (ko) * 1999-02-05 2000-09-25 비센트 비.인그라시아 이미지 감지 장치 및 이미지 포착 방법
JP3869164B2 (ja) * 1999-08-18 2007-01-17 松下電器産業株式会社 ノイズ低減回路
JP3777901B2 (ja) * 1999-09-03 2006-05-24 日本ビクター株式会社 映像情報処理装置
US6707496B1 (en) * 1999-09-15 2004-03-16 Omnivision Technologies, Inc. CMOS sensor having analog delay line for image processing
JP4011818B2 (ja) * 2000-02-29 2007-11-21 キヤノン株式会社 半導体固体撮像装置
JP2001268326A (ja) * 2000-03-23 2001-09-28 Minolta Co Ltd 画像処理装置および撮像装置
US6985181B2 (en) 2000-05-09 2006-01-10 Pixim, Inc. CMOS sensor array with a memory interface
JP3897520B2 (ja) * 2000-07-11 2007-03-28 キヤノン株式会社 撮像装置および撮像装置の制御方法
US7050094B2 (en) * 2000-10-26 2006-05-23 Micron Technology, Inc. Wide dynamic range operation for CMOS sensor with freeze-frame shutter
JP3720268B2 (ja) * 2001-02-26 2005-11-24 株式会社メガチップス 画像処理装置
EP1324592A1 (en) * 2001-12-19 2003-07-02 STMicroelectronics Limited Image sensor with improved noise cancellation

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6111604A (en) * 1995-02-21 2000-08-29 Ricoh Company, Ltd. Digital camera which detects a connection to an external device

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9456109B2 (en) 2012-05-24 2016-09-27 Panasonic Intellectual Property Corporation Of America Information communication method of obtaining information from a subject by demodulating data specified by a pattern of a bright line included in an obtained image
US9450672B2 (en) 2012-12-27 2016-09-20 Panasonic Intellectual Property Corporation Of America Information communication method of transmitting a signal using change in luminance
US9462173B2 (en) 2012-12-27 2016-10-04 Panasonic Intellectual Property Corporation Of America Information communication method
US9467225B2 (en) 2012-12-27 2016-10-11 Panasonic Intellectual Property Corporation Of America Information communication method
US9515731B2 (en) 2012-12-27 2016-12-06 Panasonic Intellectual Property Corporation Of America Information communication method
US9560284B2 (en) 2012-12-27 2017-01-31 Panasonic Intellectual Property Corporation Of America Information communication method for obtaining information specified by striped pattern of bright lines
US9564970B2 (en) 2012-12-27 2017-02-07 Panasonic Intellectual Property Corporation Of America Information communication method for obtaining information using ID list and bright line image
US9571191B2 (en) 2012-12-27 2017-02-14 Panasonic Intellectual Property Corporation Of America Information communication method
US9591232B2 (en) 2012-12-27 2017-03-07 Panasonic Intellectual Property Corporation Of America Information communication method

Also Published As

Publication number Publication date
CN105227869B (zh) 2018-10-19
CN105227869A (zh) 2016-01-06
US20030193699A1 (en) 2003-10-16
US9787917B2 (en) 2017-10-10
EP1671475A4 (en) 2011-08-17
US8054357B2 (en) 2011-11-08
US20100157121A1 (en) 2010-06-24
EP1671475A2 (en) 2006-06-21
CN101395901A (zh) 2009-03-25
WO2004107727A3 (en) 2008-10-09
WO2004107727A2 (en) 2004-12-09

Similar Documents

Publication Publication Date Title
CN101395901B (zh) 具备时间重叠图像输出的图像传感器
US7880775B2 (en) Image sensor with interleaved image output
US10277843B2 (en) Oversampled image sensor with conditional pixel readout
US8174593B2 (en) Method and apparatus for detecting image darkening due to reset droop
JP4485203B2 (ja) ノイズ消去型cmos画像センサ
WO2011096207A1 (ja) 固体撮像装置
WO2023011092A1 (zh) 图像传感器、摄像头组件和移动终端
CN110336953B (zh) 四元像素结构图像传感器及读取控制方法
US20200236309A1 (en) Image sensor

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150902

Termination date: 20210506