CN101233762B - 具有改善的光敏感度的图像传感器 - Google Patents

具有改善的光敏感度的图像传感器 Download PDF

Info

Publication number
CN101233762B
CN101233762B CN2006800274749A CN200680027474A CN101233762B CN 101233762 B CN101233762 B CN 101233762B CN 2006800274749 A CN2006800274749 A CN 2006800274749A CN 200680027474 A CN200680027474 A CN 200680027474A CN 101233762 B CN101233762 B CN 101233762B
Authority
CN
China
Prior art keywords
pixel
group
color
pixels
imageing sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2006800274749A
Other languages
English (en)
Other versions
CN101233762A (zh
Inventor
J·T·坎普顿
J·F·小哈米尔顿
Original Assignee
Eastman Kodak Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Eastman Kodak Co filed Critical Eastman Kodak Co
Publication of CN101233762A publication Critical patent/CN101233762A/zh
Application granted granted Critical
Publication of CN101233762B publication Critical patent/CN101233762B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/843Demosaicing, e.g. interpolating colour pixel values
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/133Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements including elements passing panchromatic light, e.g. filters passing white light
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/135Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements
    • H04N25/136Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements using complementary colours
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera

Abstract

一种用于采集彩色图像的图像传感器,其包括具有第一组像素和第二组像素的二维阵列,其中来自第一组像素的像素具有比来自第二组像素的像素更窄的光谱光响应,并且其中第一组像素所具有的各个像素有与一组至少两种的颜色相对应的光谱光响应。进一步地,第一组像素和第二组像素的布置定义了一个图案,该图案具有包括至少十二个像素的最小重复单元,该最小重复单元具有多个细胞,其中每个细胞具有从第一组像素中选择的代表一种特定颜色的至少两个像素和从第二组像素中选择的多个像素(全色=白色像素),这些细胞被排列为允许在不同照明条件下再现所采集的彩色图像。

Description

具有改善的光敏感度的图像传感器
技术领域
本发明涉及一种具有改善的光敏感度的二维图像传感器。
背景技术
电子成像系统依靠电子图像传感器来建立可视图像的电子表示。这样的电子图像传感器的示例包括电荷耦合器件(CCD)图像传感器和有源像素传感器(APS)器件(因能够在互补金属氧化物半导体处理中制得,所以APS器件经常被称为CMOS传感器)。典型地,这些图像传感器包括许多光敏感像素,通常以行和列的规则图案排列。为了取得彩色图像,典型地在该像素的图案上制作滤色器的图案,使用不同的滤波材料制作这些滤波器以使各个像素仅对可见光谱中的一部分敏感。该滤色器必然减少了到达各像素的光量,并且由此降低各像素的光敏感度。改善电子彩色图像传感器的光敏感度或拍照速度,以便允许在较低的照明水平上采集图像或允许在较短的曝光时间内采集较高照明水平上的图像的需求持续存在。
图像传感器是直线形或是二维的。通常,这些传感器具有两种不同类型的应用。二维传感器典型地适合于图像采集装置如像数码相机、手机及其它应用。线型传感器常用于扫描文本。在以上任一情况下,当使用滤色器时图像传感器的敏感度就降低了。
由伊斯曼柯达公司生产的KLI-4104型线型图像传感器,包括四个线状的单个像素宽的像素阵列,滤色器应用到这些阵列其中的三个以使每个阵列整体地对红、绿或蓝中的任一个敏感,并且没有滤色器阵列应用到第四个阵列;而且,三个彩色阵列具有较大的像素,以补偿由滤色器造成的在光敏感度上的下降,且第四阵列具有较小的像素以采集高分辨率的单色图像。当使用该图像传感器采集图像时,图像被表示为一幅高分辨率、高摄像感光度单色图像,和三幅具有大致相同摄像感光度的低分辨率图像,三幅图像中的每个对应来自图像的红、绿或蓝光中任意一个;因此,在电子图像中的每一个点包括一个单色值,一红色值,一绿色值以及一蓝色值。然而,因为其为线型图像传感器,其需要图像传感器和图像之间的相对机械运动,以便在像素的四个线型阵列之间扫描图像。这限制了图像被扫描的速度,并且阻止了该传感器在手持式相机中或在采集包含运动目标的场景时的应用。
在现有技术中还有一种电子图像系统,在Akira Muramatsu的美国专利4,823,186中描述了这种电子图像系统,其包括两个传感器,其中每个传感器包括一个像素二维阵列,但一个传感器没有滤色器,另一个传感器包括与像素一起的滤色器图案,并且具有光束分离器以向每个图像传感器提供图像。因为彩色传感器有应用的滤色器的图案,在该彩色传感器中的每个像素仅提供一种颜色。当用该系统采集图像时,在电子图像中的每个点包括一个单色值和一个彩色值,该彩色图像必须从邻近的彩色值中内插得到在每个像素位置缺失的彩色值。虽然该系统比单个传统图像传感器改善了光敏感度,但由于需要两个传感器和一个波束分离器,该系统总体上的复杂度、尺寸和成本更大。而且,波束分离器只把来自图像的一半的光量引入每个传感器,限制了摄像速度的改善。
除了上面提到的线型图像传感器,在现有技术中还有带有像素二维阵列的图像传感器,这里的像素包含多个没有被应用滤色器的像素。例如,Sato等人的美国专利4,390,895,Yamagami等人的美国专利5,323,233和Gindele等人的美国专利6,476,865。在每个所引用的专利中,未滤色或单色像素的敏感度显著地高于彩色像素,需要对彩色像素应用增益以匹配来自像素阵列的彩色和单色信号。增加增益也使噪声与信号一起增大,引起结果图像的整体信噪比的下降。美国专利申请2003/0210332中的结构公开了大多数像素被未滤色的像素阵列,但是如上所述彩色像素的敏感度不够。
因此,继续存在改善使用具有像素二维阵列的单个传感器的电子图像采集装置的光敏感度的需求。
发明内容
本发明提供一种图像传感器,具有提供高敏感度并且有效生成全色图像的二维彩色和全色像素阵列。
简单概括,按照本发明的一个方面,本发明提供一种采集彩色图像的图像传感器,该图像传感器包括一个具有两组像素的像素二维阵列,来自第一像素组的像素具有与来自第二像素组的像素相比较窄的光谱响应,来自第一像素组中的各个像素具有与一组至少两种颜色相对应的光谱响应,第一和第二组像素的分布定义了一个图案,该图案具有包括至少十二个像素的最小重复单元,该最小重复单元进而被定义为具有多个细胞,其中每个细胞具有从第一像素组中选择的代表一种特定颜色的至少两个像素和从第二像素组中选择的被排列为允许在不同照明条件下再现所采集的彩色图像的多个像素。
按照本发明的图像传感器特别适合于低水平照明条件,其中所述低水平照明条件是由场景照明低,曝光时间短,光圈小或对光到达传感器的其它限制造成。它们具有广泛的应用,这些传感器可有效地应用于多种图像采集装置。
从下面对优选实施例和附加的权利要求的详细介绍的论述中,并参照附图,将更加清楚地理解和意识到本发明的这些及其它的方面、目标、特点以及优点。
附图说明
图1是可应用传统传感器和处理方法或者本发明的传感器和处理方法的传统数字静止照相机系统的框图;
图2(现有技术)是示出最小重复单元和非最小重复单元的传统拜尔滤色器阵列图案;
图3提供了红、绿和蓝像素的典型光谱量子效率曲线,以及宽光谱全色量子效率,全部乘以红外截止滤波器的传输特性。
图4A-D提供了本发明的滤色器阵列图案的多个变形的最小重复单元,其具有按行和列排列的相同颜色光响应的彩色像素;
图5表示图4A的最小重复单元的细胞结构;
图6A是图4A的内插全色图像;
图6B是与图4A和图5中的细胞相对应的低分辨率彩色图像;
图7A-C表示合并图4A中的像素的多种方法;
图8A-D表示图4A的滤色器阵列图案,其具有可选择的颜色光响应特性的彩色像素,包括四种颜色选项以及青色、洋红和黄色选项;
图9提供本发明的可选择的滤色器阵列的最小重复单元,其中全色像素以对角线排列;
图10A-B提供本发明的可选择的滤色器阵列的两个变形的最小重复单元,其中的全色像素形成彩色像素嵌入其中的栅格;
图11A-D提供本发明的可选滤色器阵列的两个变形的最小重复单元和平铺分布,其中每个细胞有两种颜色;
图12A-B提供本发明的可选滤色器阵列的两个变形的最小重复单元,其中每个细胞有两种颜色且全色像素以对角线分布;
图13A-C提供图4A的变形,其中最小重复单元小于8*8像素;
图14A-B提供本发明的可变滤色器阵列的两个变形的最小重复单元,其中最小重复单元是6*6像素;
图15A-B提供本发明的可选滤色器阵列的两个变形的最小重复单元,其中最小重复阵列是4*4像素;
图16是图4A的最小重复单元,该最小重复单元中的各个像素带有下标;
图17A-E表示图16的一个细胞的全色像素和彩色像素,以及合并彩色像素的多种方法;
图18是本发明的处理框图,表示在本发明的传感器中处理彩色和全色像素数据的方法;
图19A-D说明本发明的在图18所示的低分辨率局部彩色图像中内插缺失颜色的方法。
具体实施方式
由于采用图像装置和相关电路进行信号采集和校正以及曝光控制的数码相机是公知的,这里的介绍将特别针对构成按照本发明的方法和设备的一部分的元件,或者更直接地与按照本发明的方法和设备相配合的元件。在此没有特别表示或介绍的元件从现有技术中公知的元件中被选择。将要加以介绍的实施例的某些方面以软件提供。假设在下面按照本发明加以展示和介绍的系统中对应用本发明有用的材料、软件在此没有特别表示、介绍或建议,则其是传统的且在该领域现有普通技术知识之内。
现在关注图1,示出的是作为是本发明具体化的数码相机的图像采集装置的框图。虽然将在这里说明数码相机,但本发明显然可应用于其它类型的图像采集装置。在公开的相机中,来自目标场景的光线10输入到图像级11,这里光线被透镜12聚焦以在固态图像传感器20上成像。图像传感器20为每个图像单元(像素)将入射光线转化为电信号。优选实施例中图像传感器20是电荷耦合器件(CCD)型和有源像素传感器(APS)型(APS器件因其能够在互补金属氧化物半导体处理中加以制作而经常被称为CMOS传感器),在使用本发明的模式的情况中,其它类型的具有像素二维阵列的图像传感器可被应用。本发明也使用具有彩色和全色像素的二维阵列的图像传感器20,其在图1被描述之后的详细说明中将更加清楚。在图像传感器20中使用的本发明的彩色和全色像素的图案示例可参见附图4A-D,附图8A-D,附图9,附图10A-B,附图11A,附图11C,附图13A-C,附图14A-B和附图15A-B,也可以使用在本发明的精神范内的其它图案。
到达传感器20的光量被光圈模块14调节,该光圈模块改变孔径和包括插在光路上的一个或多个中性密度滤光片的中性密度(ND)滤光片模块13。还调整整体照明水平是快门模块18打开的时间。曝光控制器模块40响应由亮度传感器模块16测量的场景中可用的光量并控制全部三个调整功能。
本领域技术人员对详细的相机结构的描述是熟悉的,并且显然存在很多变形和附加特征。例如,可以增加自动聚焦系统,或者镜头是可拆开和可互换的。可以理解本发明可应用于任何种类的数码相机,其中可选择的组件可以提供相似的功能。例如,该数码相机是相对简单的指向拍照数码相机,其中快门18是相对简单的可动叶片快门或类似形式,而不是更为复杂的焦平面结构。本发明也能够在如移动电话和机动车等非相机装置包含的图像部件中加以实现。
来自图像传感器20的模拟信号由模拟信号处理器22处理并应用到模数(A/D)转换器24。时序发生器26产生各种时钟信号来选择行和像素并使模拟信号处理器22和A/D转换器24的操作同步。图像传感器级28包括图像传感器20,模拟信号处理器22,A/D转换器24和时序发生器26。图像传感器级28的组件是分别制作的集成电路,或者像通常CMOS图像传感器那样制作为单个集成电路。来自A/D转换器24的数字像素值的结果数据流存储在与数字信号处理器(DSP)36相关联的存储器32中。
数字信号处理器36是本实施例中三个处理器或控制器中的一个,另外还有系统控制器50和曝光控制器40。尽管在若干个控制器和处理器之间相机功能控制的这种划分是典型的,但是这些控制器和处理器可以按多种方式合并而不影响相机的功能操作和本发明的应用。这些控制器和处理器能够包含一个或多个的数字信号处理器装置,微控制器,可编程逻辑装置或其它数字逻辑电路。尽管描述了这些控制器和处理器的合并形式,指定一个控制器或处理器执行全部所需功能也是显而易见的。所有这些变形可以执行相同的功能并落入本发明的范围之内,需要在一个短语中包含全部这些功能时使用术语“处理级”,例如,如图1中的处理级38。
在图解说明的实施例中,在图像采集时DSP36按照永久地存储在程序存储器54并复制到存储器32以便执行的软件程序操作在它的存储器32中的数字图像数据。DSP36运行执行图18所示的图像处理所必需的软件。存储器32包括任意类型的随机存取存储器,例如SDRAM。包括地址和数据信号的路径的总线30把DSP36连接到其相关的存储器32、A/D转换器24和其它相关装置。
系统控制器50基于在程序存储器54中存储的软件程序控制相机的全部操作,程序存储器54包括快闪EEPROM或者其它非易失性存储器。该存储器也可用于存储图像传感器校准数据,用户设置选择和其它在相机关机时必须保存的数据。系统控制器50通过指示曝光控制器40按前面介绍的那样操作镜头12,ND滤光片13,光圈14和快门18,指示时序发生器26操作图像传感器20和相关元件,以及指示DSP36处理采集的图像数据来控制图像采集的序列。在图像被采集和处理后,保存于存储器32的最终的图像文件经接口57被传输到主机,保存在移动存储卡64或其它存储装置,并在图像显示器88上为用户显示。
总线52包括地址、数据和控制信号的路径,并将系统控制器50连接到DSP36,程序存储器54,系统存储器56,主机接口57,存储卡接口60和其它相关装置。主机接口57提供到个人电脑(PC)或其它主机计算机的高速连接,以便传输图像数据进行显示,存储,处理或打印。该接口是IEEE1394或USB2.0串型接口或任何其它合适的数字接口。存储卡64典型地是压缩闪存(CF)卡,其插入插槽62并经存储卡接口60连接到系统控制器50。可采用的其它类型的存储装置包括但不限于PC卡,多媒体卡(MMC)或安全数字(SD)卡。
处理后的图像复制到系统存储器56中的显示缓冲器,并经由视频编码器80连续地读出以生成视频信号。该信号被直接从相机中输出以便在外部显示器上显示,或者被显示控制器82处理并在图像显示器88上表示。该显示器典型地为一有源矩阵彩色液晶显示器(LCD),其它类型的显示器也是可用的。
用户接口,包括取景显示器70、曝光显示器72,状态显示器76和图像显示器88以及用户输入74的全部或任意组合,由在曝光控制器40和系统控制器50上执行的软件程序的组合所控制。用户输入74典型地包括一些按键、摇杆开关,操纵杆,旋转刻度盘或触摸屏的组合。曝光控制器40执行测光、曝光模式、自动聚焦和其它曝光功能。系统控制器50管理在一个或更多的显示器,例如图像显示器88上显示的图像用户接口(GUI)。该GUI典型地包括用于做出各种选项选择的菜单和检查采集的图像的回顾模式。
曝光控制器40接受用户输入选择曝光模式,透镜孔径,曝光时间(快门速度)和曝光指数或ISO速率并为随后的采集相应指示镜头和快门。使用亮度传感器16测量场景亮度并提供曝光计量功能供用户在手工设置ISO速率,光圈和快门速度时参考。在该情况下,在用户改变一个或更多的设置时,显示在取景显示器70上的照明计量指示器告知用户图像曝光过度或不足的程度。在自动曝光模式中,用户改变一项设置则曝光控制器40自动地改变其它设置以维持正确的曝光,例如,在给定ISO速率的条件下当用户减小透镜孔径时曝光控制器40自动增加曝光时间以维持相同的整体曝光。
ISO速率是数码静止相机的一项重要特性。曝光时间,透镜孔径,镜头透光率,场景照明的水平和光谱分布以及场景反射系数决定了数码静止相机的曝光水平。当来自数码静止相机的图像是采用不足的曝光获得的时候,可以通过增加电子或数字增益总体上维持适当的色调再现,但是图像将会包含不可接受的噪声数量。随着曝光的增加,增益下降,因而图像噪声通常可以下降到可接受的水平。如果曝光过分地增加,在图像较亮区域中的结果信号可能会超出图像传感器或相机信号处理的最大信号水平容量。这可能引起图像的高亮部分被截取成为一个均匀亮度区域,或者发晕到图像的周边部分。指导用户设置合适的曝光是重要的。ISO速率旨在用作为这种指导。为了使摄影者易于理解,数字静止相机的ISO速率直接联系到摄影胶片相机的ISO速率。例如,如果数字静止相机具有ISO200的ISO速率,则相同的曝光时间和光圈将适合于ISO200速率的胶片/处理系统。
ISO速率旨在与胶片ISO速率相协调。然而,在电子和基于胶片的图像系统之间存在区别使二者不能严格一致。数字静止相机可以包括可变增益,并可以在图像数据被采集之后提供数字处理,允许在相机曝光范围之上实现色调再现。因而对数码静止相机来说具有一定范围的速率是可能的。该范围被定义为ISO速度范围。为了防止混乱,指定一个单一值为固有ISO速率,由具有ISO速度范围的上下限指示该速率范围,即,包括不同于固有ISO速率的有效速率的范围。在此思想下,固有ISO速率是从数字静止相机的焦平面上提供的曝光中计算获得的数值,以产生特定相机输出信号特性。该固有速率通常是令给定的相机系统在正常场景下产生最高图像质量的曝光指数值,其中曝光指数是与向图像传感器提供的曝光成反比例的数值。
对数码相机的上述介绍对本领域技术人员而言是熟知的。显然具有本实施例的多种可能的变形,可以选择这些变形以减少成本,增加特性或改善相机的性能。下面将详细描述按照本发明该相机采集图像的操作。尽管该介绍是关于数码相机的,可以理解本发明可应用于任何种类的具有带彩色和全色像素的图像传感器的图像采集设备。
图1所示的图像传感器20典型地包括制作在硅衬底上的光敏感像素的二维阵列,该衬底提供把每个像素上的入射光转化成被测量的电信号的方法。当该传感器被曝光时,生成自由电子并在每个像素的电子结构之内俘获这些自由电子。在一段时间内俘获这些自由电子,通过测量俘获的自由电子数,或者测量自由电子生成的速率,可以测量每个像素的照明水平。在之前的情况下,积累的电荷被转移出像素阵列,充电至电压测量电路,如在电荷耦合装置(CCD)中那样,或者靠近各个像素的区域包含充电到电压测量电路的元件,如在有源像素传感器(APS或CMOS传感器)中那样。
在下面的介绍中无论何时概括的提到图像传感器,则可以理解表示为图1中的图像传感器20。更进一步地可以理解在本说明书中公开的本发明的图像传感器体系和像素图案的所有示例和其等效方式可用于图像传感器20。
在图像传感器的环境中,像素(“图像元素”的概括)指的是离散的光传感区域和与该光传感区域相关联的电荷转移或电荷测量电路。在数字彩色图像的环境中,术语像素一般指的是具有相关的彩色值的图像中的特定位置。
为了生成彩色图像,图像传感器中的像素阵列典型地具有置于其上的滤色器图案。图2表示常用的红,绿,蓝滤色器图案。如在US3,971,065中公开的内容,该特定图案一般因其发明人Bryce Bayer而被称为拜尔滤色器阵列(CFA)。该图案可以有效地应用于具有彩色像素的二维阵列的图像传感器。结果,每个像素具有一个特定的颜色光响应,其在这种情况下是对红,绿或蓝光的主要敏感度。颜色光响应的另一个有用的变形是对品红,黄或蓝绿色光的主要敏感度。在各个情况下,特定的颜色光响应对可见光谱中的特定部分具有较高的敏感度,且同时对可见光谱中的其它部分具有较低的敏感度。术语彩色像素指的是具有颜色光响应的像素。
选择用于传感器的一组颜色光响应通常具有三种颜色,如在拜尔CFA中所示,但是它也可以包括四种或更多颜色。正如这里使用的,全色光响应指的是具有比那些选中的一组颜色光响应中所表示的光谱敏感度要宽的光谱敏感度的光响应。全色光敏性在整个可见光光谱内具有高敏感度。术语全色像素指的是具有全色光响应的像素。尽管全色像素总体上具有比一组颜色光响应要宽的光谱敏感度,每个全色像素可以具有相关的滤波器。该滤波器可以是中密度过滤器或滤色器。
当彩色和全色像素的图案处于图像传感器的表面上时,每个所述图案具有一个重复单元,该重复单元作为基本结构块的像素邻近子阵列。通过毗邻设置该重复单元的多个拷贝,生成整个传感器图案。该重复单元的多个拷贝的毗邻设置可沿对角线方向以及水平和垂直方向上完成。
最小重复单元是这样的重复单元,使得没有其它重复单元具有更少的像素的。例如,图2中的CFA包括2*2像素的最小重复单元,如图2中的像素块100所示。平铺多个该最小重复单元的拷贝以覆盖图像传感器的整个像素阵列。所示最小重复单元在其右上角是绿色像素,但是通过向右、向下或沿向着右下方的对角线移动粗线区域一个像素距离可以容易地看出三个可选择地最小重复单元。尽管像素块102是一个重复单元,它并不是最小重复单元,因为像素块100是一个重复单元且像素块100具有的像素比像素块102少。
用具有图2中的CFA的二维阵列的图像传感器采集的图像在每个像素上只有一个彩色值。为了产生全色图像,存在多种技术用来推断或内插每个像素处缺失的颜色。这些CFA内插技术是现有技术中公知的,可参照以下专利:US5506619,US5629734和US5652621。
图3表示在典型的相机应用中带有红、绿和蓝色滤色器的像素的相对光谱敏感度。图3中的X轴按纳米表示光波长,Y轴表示效率。在图3中,曲线110表示用于阻断红外和紫外线到达图像传感器的典型滤波器的光谱传输特性。需要该滤波器是因为典型地用于图像传感器的滤色器不阻断红外线,因此像素不能区分红外线和在与像素相关联的滤色器的通带内的光线。由曲线110表示的红外阻断特性防止红外线混淆可见光信号。光谱量子效率,即对具有红、绿和蓝色滤色器的典型硅传感器而言,被俘获并转化成可测量的电信号的入射光子的比例,乘以用曲线110表示的红外阻断滤波器的光谱传输特性以生成组合的系统的量子效率,用代表红色的曲线114,代表绿色的曲线116,代表蓝色的曲线118来表示。从这些曲线中可以理解每个颜色光响应仅对可见光谱一部分敏感。作为对比,不使用滤色器(但是包括红外阻断滤波特性)的相同的硅传感器的光响应用曲线112示出,这是全色光响应的示例。通过在颜色光响应曲线114,116及118和全色光响应曲线112之间比较,很清楚全色光响应比任意颜色光响应对宽光谱光线敏感三到四倍。
图3所示的更高的全色敏感度允许通过见含有滤色器的像素和不包含滤色器的像素互混合来改善图像传感器的整体敏感度。然而,滤色像素敏感性显著弱于全色像素。在这种情况下,如果全色像素被适当的曝光,以使来自场景的光强度的范围覆盖全色像素的全部测量范围,则彩色像素将会显著地曝光不足。因此,调整滤色像素的敏感度以使它们具有与全色像素大致相同的敏感度是有利的。例如,通过增加彩色像素相对于全色像素的尺寸,相关联减少空间像素,来增加彩色像素的敏感度。
图4A表示具有两个组的像素二维阵列。来自第一像素组的像素比来自第二像素组的像素具有较窄的光谱响应。第一组像素包括关于对应于至少两种滤色器的至少两种不同光谱响应的各个像素。互混合这两组像素以改善传感器的整体敏感度。在本说明书中将会更清楚看到,第一和第二组像素的分布定义了具有包括至少十二个像素的最小重复单元的图案。该最小重复单元包括第一和第二组像素,第一和第二组像素排列成允许在不同照明条件下采集的彩色图像的重现。
图4A中所示的完整图案表示了被平铺以覆盖整个像素阵列的最小重复单元。与图2中一样,具有多个其它的最小重复单元用于描述彩色和全色像素的整体分布,但是它们在特性上全都实质上相同,并且每个都是像素的子阵列,该子阵列在范围上均为8*8像素。该图案的一个重要特性是交替的全色和彩色像素行,其中彩色像素行把相同颜色光响应的像素聚合在一起。具有相同光响应的像素组连同它们的一些相邻全色像素被认为形成组成最小重复单元的四个细胞,每个细胞是毗邻的像素子阵列,具有的像素比最小重复单元少。
这四个细胞,在图4A中用黑线绘制,在图5中表示为细胞120,122,124和126,每个包含四组4*4个像素,其中120表示左上方细胞,122表示右上方细胞,124表示左下方细胞且126表示右下方细胞。四个细胞中的每一个包括八个全色像素和八个具有相同的颜色光响应的彩色像素。在一个细胞中的彩色像素被合并以表示整个细胞的颜色。因此,图5中的细胞120认为是一个绿色细胞,细胞122认为是红色细胞,以此类推。每个细胞包括至少两个相同颜色的像素,从而允许相同颜色的像素被合并以克服彩色像素和全色像素之间的光敏感度的差异。
在最小重复单元具有四个非重叠的细胞的情况下,其中每个细胞具有两个相同颜色的像素和两个全色像素,很明显最小重复单元包括十六个像素。在最小重复单元具有三个非重叠细胞的情况下,其中每个细胞具有两个相同颜色的像素和两个全色像素,很明显最小重复单元包括十二个像素。
按照本发明,当考虑到图5所示的细胞结构的光时,图4A的最小重复单元可以呈现高分辨率全色图像和低分辨率拜尔图案彩色图像的组合,其排列为允许在不同照明条件下采集的彩色图像的再现。拜尔图案图像的各个元素代表对应细胞中的彩色像素的组合。第一组像素定义了一个低分辨率滤色器阵列图像,且第二组像素定义了一个高分辨率全色图像。参见图6A和图6B,图6A表示与图4A相对应的高分辨率全色图像,包括来自图4A的全色像素P和内插的全色像素P’;图6B表示低分辨率拜尔图案彩色图像,其中R’,G’和B’代表图5中描画的各个细胞,细胞颜色与细胞中的组合彩色像素相关联。
在下面的讨论中,在图4B-D,8A-D,9,10A-B,11A,11C,12A-B,13A-C,14A-B和15A-B中全部细胞以粗线勾勒,如同其在图4中一样。
除了图4A中的可选最小重复单元,该图案中每个细胞可以旋转90度以形成图4B所示的图案。这实质上是相同的图案,但是它将最高全色采样频率置于纵向方向而不是横向方向。选择使用图4A或图4B取决于希望在纵向方向还是在横向方向上具有较高的全色空间采样。然而,很明显在两种图案中组成最小重复单元的最终细胞为两个图案生成相同的低分辨率彩色图像。因而,图4A和图4B从颜色的角度来看是等效的。总的来说,图4A和4B是以全色像素在行或列上线性分布来实施本发明的示例。而且,图4A具有单行全色像素,每一行通过彩色像素行与相邻的全色像素行分开;图4B在列的方向上具有相同的特征。
图4C表示图4A的另外的可选最小重复单元,具有实质上相同的细胞颜色特性。然而,图4C表示全色和彩色行以逐个细胞为基础交错。这可以改善垂直全色分辨率。图4A的另外的可选最小重复单元示于图4D,其中全色和彩色行以列对相交错。这也具有改善垂直全色分辨率的潜力。图4A-D中所有最小重复单元的特征都是两个或更多的相同彩色像素的组在行或列上并排分布。
图4A-D全都具有相同的颜色结构,具有组成表示低分辨率的拜尔图案的最小重复单元的细胞。因此能够看到在本发明的精神之内可以构造多种全色像素和分组的彩色像素的排列。
为了增加彩色光敏性以克服全色光敏性和彩色光敏性之间的不一致,每个细胞内的彩色像素以多种方式加以组合。例如,在CCD图像传感器或允许贮存(binning)的有源像素传感器类型中来自相同彩色像素的电荷被合并或贮存。可选地,例如通过被充电到这些电压的并联电容来平均在相同彩色像素中与电荷的测量值相对应的电压。在其它的方式中,在相同彩色像素上的照明水平的数字表示被相加或平均。来自两个像素的合并或贮存电荷使信号电平加倍,而与采样和读取合并信号相关的噪声保持相同,因此以两倍的因数增加了信噪比,代表在合并像素的光敏性相应地增加两倍。在对来自两个像素的照明水平的数字表示相加的情况下,结果信号以两倍因数增加,但是来自读取的两个像素的相应噪声电平按积分合并,因此按照
Figure 2006800274749_0
倍增加噪声;合并像素的结果信噪比与未合并信号相比按
Figure 2006800274749_1
倍增加。类似的分析可应用于电压或数字平均。
上面提到的合并来自一个细胞内的相同彩色像素的合并信号的方法可单独使用或联合使用。例如,通过纵向地合并来自图4A中每两个一组的相同彩色像素的电荷,生成具有图7A所示的合并信号R’,G’和B’的合并像素。在这种情况下,每个R’,G’和B’具有非合并像素两倍的敏感度。可选地,横向地合并来自图4A中四个一组的相同彩色像素的测量值(电压或数值)可生成具有图7B所示的合并信号R’,G’和B’的合并像素。在此情况下,虽然信号以四倍因数增加,但噪声增加两倍,每个R’,G’和B’具有非合并像素两倍的敏感度。在其它的可选的合并方案中,纵向合并来自图7A所示的每两个一组的相同彩色像素的电荷,并横向相加或平均图7A的每四个一组的合并像素的测量值以产生图7C的最终的合并彩色像素,其中R”,G”和B”表示相同彩色像素的最终合并结果。在该合并排列中,图7C中的每个最终合并彩色像素具有非合并像素四倍的敏感度。一些传感器结构,特别是特定CCD结构,允许每个细胞内的全部八个相同彩色像素按照图7C的方式合并,使合并彩色像素在敏感度上增加八倍。
如前所述,可以理解在为了调整彩色像素的光敏性而合并彩色像素方面具有一定的自由度。本领域技术人员可以采用公知的合并方式,这些合并方式基于场景内容,场景照度,整体照明水平或其它因素。此外,选择合并方式以便有意地使合并像素比全色像素具有较低或较高的敏感度。
至此图像传感器已被介绍采用红、绿和蓝色滤色器。本发明可以采用可选地滤色器来实施。使用品红、蓝绿和黄色传感器的图像传感器是本领域公知的,本发明可以采用品红、蓝绿和黄色滤色器来实施。图8A表示图4A的品红,蓝绿和黄色滤色器等效形式,其中C代表品红像素,M代表蓝绿像素且Y代表黄色像素。本发明也可以用于具有多于三种的颜色光响应的像素。
图8B表示本发明的最小重复单元,其包含品红像素(用C表示),蓝绿像素(用M表示),黄色像素(用Y表示)以及绿色像素(用G表示)。其保留图5所示的最小重复单元的整体细胞排列,但是包括四种不同彩色像素和因此四种不同颜色相对应细胞。图8C表示另外的可选的四种颜色排列,包括红色像素(用R表示),蓝色像素(用B表示),具有一种颜色光响应的绿色像素(用G表示)和可选地具有不同的颜色光响应的绿色像素(用E表示)。图8D表示另外的可选的四种颜色分布,其中图4A中的绿色细胞之一被黄色细胞代替,其中黄色像素用Y表示。
本发明能以除全色像素以外少于三种颜色加以实施。例如,具有对应红色和蓝色的细胞的最小重复单元是适于使用的。
在本发明的精神之内图4A的多个变形可加以实施。例如,图9表示本发明可选的最小重复单元,具有与图4相同的细胞结构,但是具有全色像素的棋盘图案。该图案提供图像的均衡的全色采样,克服了图4A,4C和4D中的垂直全色采样缺陷。图9的特征在于它是将全色像素按对角线排列来实施本发明的示例。图9的更进一步的特征在于具有全色像素的单行对角线,其中每一个对角线与全色像素的相邻对角线通过一条彩色像素对角线分开。图9的其它特征是两个或更多的相同彩色像素组以对角线并排排列。
目前已经展示的图案具有相同数量的全色和彩色像素。本发明不仅限于这种排列,而可以具有比彩色像素更多的全色像素。图10A表示本发明的另一实施例,其中彩色像素被嵌入全色像素的栅格之内。相比按图4A和图9排列的相同颜色细胞,该图案提供了非常好的全色空间采样。图10B提供了该全色栅格图案的四种颜色实施例的的示例。总的来说,图10的最小重复单元的特征是通过一个或多个全色像素使每个彩色像素和相邻彩色像素进行分隔开。
对给定的像素图案,最小重复单元先前已经被定义为没有具有更少像素的其它重复单元的重复单元。在相同的定义下,来自不同像素图案的重复单元的尺寸按照该重复单元中的像素总数加以比较。例如,来自一个像素图案的4*8像素重复单元小于来自另一像素图案的6*6像素重复单元,这是因为在第一个重复单元中的像素总数(4×8=32)小于第二个重复单元中的像素总数(6×6=36)。进一步举例,一个小于具有8*8像素的重复单元的重复单元包含的全部像素少于64个。
目前表示的全部图案展示了细胞结构,其中每个细胞除全色像素之外还包括一种单色。此外,目前表示的全部图案都展示了8*8像素范围的最小重复单元。具有在每个细胞中多于一种颜色的细胞的最小重复单元也可被使用;同样,最小重复单元可被定义为在范围上小于8*8像素。例如,图11A所示的最小重复单元具有两个细胞,每个细胞包含两种颜色:在左侧的细胞中是蓝色和绿色(分别表示为B和G),在右侧的细胞中是红色和绿色(分别表示为R和G)。在图11A中细胞包含两种颜色,出于改善颜色敏感度的目的这些颜色按照方便合并相同颜色的方式排列。图11B表示图11A的最小重复单元是如何平铺以便交错红色和蓝色。图11C提供使用四种颜色且每个细胞两种颜色的最小重复单元。图11D表示图11C的最小重复单元是如何平铺以便交错红色和蓝色。在图11D中粗的颜色图案的特征在于在绿色范围内的两种不同颜色光响应(用G和E表示)的棋盘与红色和蓝色(分别用R和B表示)的棋盘相交错。图12A提供图11A的全色棋盘形式,而图12B提供图11C的全色棋盘形式。总的来说,图11A和图11C中的最小重复单元的特征在于通过不同的像素、不同颜色的像素或者全色像素,将每个彩色像素与在行和列上相邻的彩色像素分隔开。
目前介绍的最小重复单元是8*8或者4*8像素范围。然而,最小重复单元可以更小。例如,图13A与图4A类似,但是其中每个颜色细胞为3个像素宽乘以4个像素高,整个最小重复单元为6个像素宽乘以8个像素高。图13B去掉图13A中的两行彩色像素,因而产生3*3个像素的细胞和6*6个像素的最小重复单元。图13C进一步去掉两个全色行,因而产生3个像素宽乘以2个像素高的细胞(每个细胞包括三个全色像素和三个彩色像素)和6个像素宽乘以4个像素高的最小重复单元。如果合并每个细胞中的颜色的方案需要少于图4A和其它图案中所示的像素的数量,则图13A到图13C中所示的图案特别适用。
图14A表示其它的最小重复单元。图14A中的最小重复单元为6*6像素,其中每个细胞包括一种单色的四像素菱形图案,剩余5个像素是全色像素。图14A所示的全色空间采样图案是略微不规则的,建议采用图14B的图案,其中有一个全色棋盘,在每个3*3像素细胞中的其余像素被一种单色占据。
图15A表示4*4像素的最小重复单元,包括四个2*2像素细胞。注意每个细胞包括两个全色像素和两个相同颜色的像素。该发明需要在每个2*2细胞中放置两个相同颜色的像素以便方便合并每个细胞内的彩色像素。图15B类似于图15A,但是使用了全色棋盘图案。
现在转到图16,图5中所示的最小重复单元被划分为四个细胞,细胞是具有比最小重复单元的像素还要少的像素的毗邻像素子阵列。提供如下的处理所需的软件包含于图1中的DSP36中。细胞220,224,226和228是细胞的示例,其中这些细胞包含分别具有绿色,红色,蓝色和绿色光响应的像素。在此示例中,细胞220包括全色像素和绿色像素两者,绿色像素被标识为像素组222。最终的目的是通过合并来自在像素组222中的绿色像素的八个绿色信号为细胞220产生单个绿色信号。取决于图像传感器的操作模式,通过合并模拟域的全部八个绿色信号(例如,通过电荷贮存)生成单个绿色信号,或者通过合并从像素组222中取出的更小的像素组来生成多个绿色信号。细胞220中的全色像素如图17A所示。在下面的示例中,对来自这些全色像素的全部八个信号各个进行数字化。细胞220的绿色像素在图17B-图17E中示出,其中根据它们的信号在模拟域中是如何被合并来将它们一起分组。图17B描述了全部八个绿色像素被合并从而为细胞220(图16)产生单一绿色信号的例子。传感器可以产生两个绿色信号,例如,可通过先合并来自像素G21,G22,G23和G24的信号,然后再合并来自像素G41,G42,G43和G44的信号,如图17C所示。两个信号也可以以其它方式产生。传感器可以首先合并来自像素G21,G22,G41和G42的信号,然后再合并来自像素G23,G24,G43和G44的信号,如图17D所示。传感器也可以通过合并四对信号为细胞220生成四个绿色信号,例如,合并像素G21和G22,然后合并G23和G24,然后合并G41和G42,最后合并G43和G44,如图17E所示。很清楚具有很多另外的方法来合并细胞220(图16)内的绿色信号对。如果传感器不作任何合并,则细胞220的全部八个绿色信号各自被报告。因而,在细胞220的例子中,传感器可以为细胞220产生一个,两个,四个或八个绿色信号值,并按不同的方式产生它们,这取决于它的操作模式。
对于细胞224,226和228(图16),传感器依靠它的操作模式生成类似的颜色信号。细胞224,226和228的颜色信号分别是红色,蓝色和绿色的。
回到细胞220的例子,不论对该细胞的多少个信号进行了数字化,本发明的图像处理算法进一步合并数字化的绿色值以为该细胞生成单一绿色值。获得单一绿色值的一一个方法是对为细胞220生成的全部数字化绿色值求平均值。如果细胞包含不同光响应的彩色像素,该细胞内的全部颜色数据类似地被合并以便该细胞内的每个颜色光响应具有一个单一值。
重要的是区分属于在采集最初图像数据的原始传感器中的像素的彩色值和属于原始传感器中的细胞的彩色值。两种类型的彩色值都用于产生彩色图像,但是产生的彩色图像的分辨率不同。具有与原始传感器中的像素相关的像素值的图像被称为高分辨率图像,而具有与原始传感器内的细胞相关的像素值的图像被称为低分辨率图像。
现在转向图18,所示数字信号处理模块36(图1)从数据总线30(图1)接收采集的原始图像数据。该原始图像数据被传送到低分辨率的部分颜色模块202和高分辨率的全色模块204。图像传感器的最小重复单元的示例已经在图5和图16中示出。在细胞220(图16)的例子中,采集的原始图像数据包括由图17A所示的各个全色像素产生的全色数据。同样,对细胞220(图16)来说,也包括一个或多个绿色(颜色)值,例如,来自图17B-E中所示的组合。
在低分辨率的部分颜色模块202(图18)中,从采集的原始图像数据中生成部分颜色图像,部分颜色图像是一种彩色图像,其中每个像素具有至少一个彩色值并且每个像素同样缺失至少一种彩色值。取决于传感器的操作模式,采集的原始数据包含由每个细胞中的彩色像素产生的一些彩色值。在低分辨率的部分颜色模块202中,这些彩色值被减少到在细胞中表示的每种颜色的一个单一值。作为示例,对细胞220(图16)来说,产生一个单一绿色值。相似的,对细胞224,226和228来说,分别产生单一红色,蓝色和绿色彩色值。
低分辨率的部分颜色模块202以类似的方法处理各细胞,结果得到一彩色值阵列,每个细胞对应一个彩色值。因为产生的图像阵列基于细胞而非原始传感器中的像素,其在每个维度上比最初采集的原始图像数据阵列小四倍。因为结果阵列是基于细胞的,并且每个像素具有若干但并非全部的彩色值,产生的图像是低分辨率的部分颜色图像。在这点上,低分辨率的部分颜色图像是色平衡的。
现在注意高分辨率的全色模块204,使用与图16中所示相同的原始图像数据,尽管只使用全色值(图17A)。这次的任务是通过在那些还没有全色值的像素上估计全色值来内插完整的高分辨率的全色图像。在细胞220(图16)的例子中,必须为像素组222(图16)中的绿色像素估计全色值。一个估计缺失的全色值的简单方法是进行垂直平均。因而,例如,我们可以估计像素22处的全色值如下:
P22=(P12+P32)/2
也可以采用自适应的方法。例如,一种自适应的方法是计算三个梯度值并取其绝对值:
SCLAS=ABS(P31-P13)
VCLAS=ABS(P32-P12)
BCLAS=ABS(P33-P11)
使用图17A所示的全色值。类似的,三个预测值被计算:
SPRED=(P31+P13)/2
VPRED=(P32+P12)/2
BPRED=(P33+P11)/2
然后,将P22设置为等于与最小的分类值相对应的预测值。在相等的情况下,将P22设置为等于指定的预测值的均值。全色内插贯穿整个图像持续地进行而不关于细胞边界。当高分辨率的全色模块204的处理完成时,产生的数字全色图像与最初采集的原始图像大小相同,这使它成为高分辨率的全色图像。
低分辨率的全色模块206接收由模块204产生的高分辨率的全色图像阵列并生成与模块202产生的低分辨率的部分颜色图像的大少相同的低分辨率的全色图像阵列。通过在一个给定的细胞内为那些带有滤色器的像素平均所估计的全色值来获得各个低分辨率的全色值。在细胞220(图16)的例子中,先前为像素组222中的绿色像素所估计的高分辨率的全色值现在一起被平均以便为该细胞生成单一低分辨率的单色值。类似的,使用带有红色滤色器的像素处估计得到的高分辨率的全色值为细胞224计算单一低分辨率的全色值。以这种方式,每个细胞以一个单一低分辨率的全色值结束。
低分辨率的色差模块208从模块202接收低分辨率的部分颜色图像并从模块206接收低分辨率的全色阵列。通过在来自低分辨率的全色图像的指导下颜色内插低分辨率的部分颜色图像形成低分辨率的中间颜色图像。下面将详细讨论,颜色内插算法的精确性质取决于使用哪种像素光响应图案来采集最初的原始图像数据。
在低分辨率的中间颜色图像形成之后对其进行颜色校正。一旦低分辨率的中间颜色图像被颜色校正,通过从每个低分辨率的颜色平面中减去低分辨率的全色图像来计算色差的低分辨率图像。高分辨率的色差模块210从模块208接收低分辨率的色差图像,并使用双线性内插,上采样低分辨率的色差图像以与最初的原始图像数据的尺寸相匹配。其结果是高分辨率的色差图像与模块204产生的高分辨率的全色图像尺寸相同。
高分辨率的最终图像模块212接收来自模块210的高分辨率的色差图像和来自模块204的高分辨率的全色图像。接着通过每个高分辨率的色差平面与高分辨率的全色图像相加,形成高分辨率的最终颜色图像。然后可以对作为结果的高分辨率的最终颜色图像作进一步的处理。例如,将其存储于DSP的存储模块32中(图1)并接着对其进行锐化和压缩以便储存在存储卡模块64(图1)中。
图4A-D,8A,9,10A,13A-C,14A-B和15A-B所示的传感器滤色器图案具有最小重复单元,从而在模块202中生成的作为结果的低分辨率的部分颜色图像对于滤色器显示重复的拜尔图案:
G R
B G
除了通过低分辨率的部分颜色图像给出的单一彩色值,每个细胞还具有由低分辨率的全色图像给出的全色值。
现在,考虑在低分辨率的部分颜色图像中呈现拜尔图案的例子,可以更具体的介绍在低分辨率的色差模块208(图18)中的颜色内插任务。颜色内插以在不具有绿色值的像素上内插绿色值开始,如图19A中的像素234所示。四个相邻像素,如像素230,232,236和238所示,全都具有绿色值且它们还全部具有全色值。中心像素234具有全色值,但是不具有用问号表示的绿色值。
第一步是计算两个分类值,第一个涉及水平方向,且第二个涉及垂直方向:
HCLAS=ABS(P4-P2)+ABS(2*P3-P2-P4)
VCLAS=ABS(P5-P1)+ABS(2*P3-P1-P5)
接着,计算两个预测值,第一个涉及水平方向,且第二个涉及垂直方向:
HPRED=(G4+G2)/2+(2*P3-P2-P4)/2
VPRED=(G5+G1)/2+(2*P3-P1-P5)/2
最后,令THRESH等于一个根据经验确定的阈值,按照下面的程序,我们可以自适应地计算缺失值,G3:
IF MAX(HCLAS,VCLAS)<THRESH
G3=(HPRED+VPRED)/2
ELSEIF VCLAS<HCLAS
G3=VPRED
ELSE
G3=HPRED
END
因而,如果两个分类值都小于阈值,则计算两个预测值的平均值作为G3。否则,根据分类值HCLAS或VCLAS中的哪个更小来决定使用HPRED或者VPRED。
一旦估计出全部缺失的绿色值,就开始内插缺失的红色和蓝色值。如图19B所示,像素242缺失红色值,但是它的两个水平相邻像素240和244分别具有红色值R2和R4。三个像素全部具有绿色值。在这些条件下,对像素242的红色值(R3)的估计可以被计算如下:
R3=(R4+R2)/2+(2*G3-G2-G4)/2
在相似的条件下以相似的方式计算缺失的蓝色值。此时,仍然具有缺失的红色和蓝色值的像素只有那些需要垂直内插的像素。如图19C所示,像素252缺失红色值且它的两个垂直相邻的像素250和254分别具有红色值R1和R5。在这种情况下,对像素252的红色值(R3)的估计可以计算如下:
R3=(R5+R1)/2+(2*G3-G1-G5)/2
在相似的条件下以类似的方式计算缺失的蓝色值。这完成了低分辨率的部分颜色图像的内插,结果得到低分辨率的中间颜色图像。如前面所述,现在可以通过从每个颜色平面—在刚刚讨论的例子中是红色、绿色和蓝色—中减去低分辨率的全色值来计算低分辨率的色差。
并不是所有的传感器都产生显示彩色值的重复拜尔图案的低分辨率的部分颜色图像。例如,图11A中所示的传感器图案决定了每个细胞接收两种彩色值:绿色和红色或者绿色和蓝色。因此,在这种情况下,在低分辨率的色差模块208(图18)中的颜色内插任务为每个像素估计缺失的红色值或者缺失的蓝色值。参照图19D,所示像素264具有绿色值(G3)但是没有红色值(R3)。四个相邻像素260,262,266和268具有绿色值和红色值。为像素264(图19D)内插红色值的方法与为像素234(图19A)内插绿色值使用的方法相似。
第一步是计算两个分类值,第一个涉及水平方向,而第二个涉及垂直方向:
HCLAS=ABS(G4-G2)+ABS(2*G3-G2-G4)
VCLAS=ABS(G5-G1)+ABS(2*G3-G1-G5)
然后,计算两个预测值,第一个涉及水平方向,且第二个涉及垂直方向:
HPRED=(R4+R2)/2+(2*G3-G2-G4)/2
VPRED=(R5+R1)/2+(2*G3-G1-G5)/2
最后,令THRESH等于一个根据经验确定的阈值,按照下面的程序自适应地计算缺失的值G3:
IF MAX(HCLAS,VCLAS)<THRESH
R3=(HPRED+VPRED)/2
ELSEIF VCLAS<HCLAS
R3=VPRED
ELSE
R3=HPRED
END
因而,如果两个分类值都小于阈值,则计算两个预测值的平均值作为R3。否则,根据分类值HCLAS或VCLAS中的哪个更小来决定使用HPRED或者VPRED。
使用蓝色值来代替红色值,缺失的蓝色值以完全相同的方法被内插。一旦完成,产生低分辨率的中间颜色图像。至此,按先前的介绍计算低分辨率的色差。
这里本发明是特别参照特定的优选实施例加以详细介绍的,但是可以理解在本发明的思想和范围之内可以进行改变和修正。
部件列表
10来自目标场景的光线
11图像级
12镜头
13中性密度滤光片
14光圈
16亮度传感器
18快门
20图像传感器
22模拟信号处理器
24模数(A/D)转换器
26时序发生器
28图像传感器级
30数字信号处理器(DSP)总线
32数字信号处理器(DSP)存储器
36数字信号处理器(DSP)
38处理级
40曝光控制器
50系统控制器
52系统控制器总线
54程序存储器
56系统存储器
57主机接口
60存储卡接口
62存储卡槽
64存储卡
68用户控制和状态界面
70取景显示器
72曝光显示器
74用户输入
76状态显示
80视频编码器
82显示控制器
88图像显示器
100拜尔图案的最小重复单元
102拜尔图案的非最小重复单元
110红外阻断滤波器的光谱传输曲线
112传感器的未滤色光谱光响应曲线
114传感器的红色光响应曲线
116传感器的绿色光响应曲线
118传感器的蓝色光响应曲线
120第一绿色细胞
122红色细胞
124蓝色细胞
126第二绿包细胞
202低分辨率的部分颜色模块
204高分辨率的全色模块
206低分辨率的全色模块
208低分辨率的色差模块
210高分辨率的色差模块
212高分辨率的最终图像模块
220第一绿色细胞
222第一绿色细胞中的绿色像素
224红色细胞
226蓝色细胞
228第二绿色细胞
230对于内插缺失绿色值的上方像素值
232对于内插缺失绿色值的左侧像素值
234具有缺失绿色值的像素
236对于内插缺失绿色值的右侧像素值
238对于内插缺失绿色值的下方像素值
240对于内插缺失红色值的左侧像素值
242具有缺失红色值的像素
244对于内插缺失红色值的右侧像素值
250对于内插缺失红色值的上方像素值
252具有缺失红色值的像素
254对于内插缺失红色值的下方像素值
260对于内插缺失红色值的上方像素值
262对于内插缺失红色值的左侧像素值
264具有缺失红色值的像素
266对于内插缺失红色值的右侧像素值
268对于内插缺失红色值的下方像素值

Claims (34)

1.一种用于采集彩色图像的图像传感器,包括:
a)具有第一组像素和第二组全色像素的二维阵列,其中来自第一组像素的像素具有比来自第二组全色像素的像素更窄的光谱光响应,并且其中第一组像素所具有的各个像素有与一组至少两种颜色相对应的光谱光响应;以及
b)第一组像素和第二组全色像素的布置定义了一个图案,该图案具有包括至少十二个像素的最小重复单元,该最小重复单元具有多个非重叠细胞,其中每个细胞具有从第一组像素中选择的代表一种特定颜色的至少两个像素和从第二组全色像素中选择的多个像素,这些细胞被排列为允许在不同照明条件下再现所采集的彩色图像。
2.如权利要求1所述的图像传感器,其中最小重复单元具有至少三个细胞。
3.如权利要求1所述的图像传感器,其中最小重复单元具有至少三个细胞,其中包括具有至少两个第一颜色的像素的至少一个第一颜色的细胞,具有至少两个第二颜色的像素的至少一个第二颜色的细胞,以及具有至少两个第三颜色的像素的至少一个第三颜色的细胞。
4.如权利要求3所述的图像传感器,其中第一颜色是绿色,第二颜色是红色,且第三颜色是蓝色。
5.如权利要求3所述的图像传感器,其中第一颜色是品红色,第二颜色是蓝绿色,且第三颜色是黄色。
6.如权利要求1所述的图像传感器,其中最小重复单元具有至少四个细胞。
7.如权利要求6所述的图像传感器,其中细胞包括具有至少两个绿色像素的至少一个绿色细胞,具有至少两个红色像素的至少一个红色细胞,以及具有至少两个蓝色像素的至少一个蓝色细胞。
8.如权利要求6所述的图像传感器,其中细胞包括每个具有至少两个绿色像素的至少两个绿色细胞,具有至少两个红色像素的至少一个红色细胞,以及具有至少两个蓝色像素的至少一个蓝色细胞。
9.如权利要求1所述的图像传感器,其中第二组全色像素线性分布在最小重复单元的行、列或对角线上。
10.如权利要求9所述的图像传感器,其中第一组像素中的每个彩色像素在每个行和列上通过至少一个不同像素与相邻的类似彩色像素分隔开。
11.如权利要求10所述的图像传感器,其中最小重复单元是:
P  P  P  P  P  P  P  P
A  B  A  B  C  B  C  B
P  P  P  P  P  P  P  P
A  B  A  B  C  B  C  B
其中P表示第二组全色像素中的像素,并且
A表示第一组像素中的第一颜色
B表示第一组像素中的第二颜色
C表示第一组像素中的第三颜色。
12.如权利要求11所述的图像传感器,其中A,B和C分别从红色,绿色和蓝色的集合中选择或者分别从蓝绿色,品红色和黄色的集合中选择。
13.如权利要求9所述的图像传感器,其中第一组像素的彩色像素在每个行和列上被第二组全色像素中的至少一个像素分隔开。
14.如权利要求13所述的图像传感器,其中最小重复单元是:
P  P  P  P  P  P  P  P
A  P  A  P  B  P  B  P
P  P  P  P  P  P  P  P
A  P  A  P  B  P  B  P
P  P  P  P  P  P  P  P
B  P  B  P  C  P  C  P
P  P  P  P  P  P  P  P
B  P  B  P  C  P  C  P
其中P代表第二组全色像素中的像素
A代表第一组像素中的第一颜色
B代表第一组像素中的第二颜色,并且
C代表第一组像素中的第三颜色。
15.如权利要求14所述的图像传感器,其中A,B和C分别从红色,绿色和蓝色的集合中选择或者分别从蓝绿色,品红色和黄色的集合中选择。
16.如权利要求1所述的图像传感器,其中在最小重复单元中的第一组像素的多个相同彩色像素按照并排关系线性排列。
17.如权利要求16所述的图像传感器,其中最小重复单元是:
P  P  P  P
A  A  B  B
P  P  P  P
B  B  C  C
其中P代表第二组全色像素中的像素,并且
A代表第一组像素中的第一颜色
B代表第一组像素中的第二颜色,并且
C代表第一组像素中的第三颜色。
18.如权利要求17所述的图像传感器,其中A,B和C分别从红色,绿色和蓝色的集合中选择或者分别从蓝绿色,品红色和黄色的集合中选择。
19.如权利要求16所述的图像传感器,其中最小重复单元是
P  P  P  P
A  A  B  B
P  P  P  P
D  D  C  C
其中P表示第二组全色像素中的像素,并且
A表示第一组像素中的第一颜色
B表示第一组像素中的第二颜色
C表示第一组像素中的第三颜色,并且
D表示第一组像素中的第四颜色。
20.如权利要求19所述的图像传感器,其中A,B,C和D分别从红色,绿色,蓝色和第四颜色的集合中选择或者分别从蓝绿色,品红色和黄色和第四颜色的集合中选择。
21.如权利要求1所述的图像传感器,其中在最小重复单元中第一组像素的多个相同彩色像素按照并排关系沿对角线排列并且其中第二组全色像素中的多个像素按照并排关系沿对角线排列。
22.如权利要求21所述的图像传感器,其中最小重复单元是:
P  A  P  A  P  B  P  B
A  P  A  P  B  P  B  P
P  A  P  A  P  B  P  B
A  P  A  P  B  P  B  P
P  B  P  B  P  C  P  C
B  P  B  P  C  P  C  P
P  B  P  B  P  C  P  C
B  P  B  P  C  P  C  P
其中P代表第二组全色像素中的像素,并且
A代表第一组像素中的第一颜色
B代表第一组像素中的第二颜色,并且
C代表第一组像素中的第三颜色。
23.如权利要求22所述的图像传感器,其中A,B和C分别从红色,绿色和蓝色的集合中选择或者分别从蓝绿色,品红色和黄色的集合中选择。
24.如权利要求21所述的图像传感器,其中最小重复单元是:
P  A  P  A  P  B  P  B
A  P  A  P  B  P  B  P
P  A  P  A  P  B  P  B
A  P  A  P  B  P  B  P
P  D  P  D  P  C  P  C
D  P  D  P  C  P  C  P
P  D  P  D  P  C  P  C
D  P  D  P  C  P  C  P
其中P表示第二组全色像素中的像素,并且
A表示第一组像素中的第一颜色
B表示第一组像素中的第二颜色
C表示第一组像素中的第三颜色,并且
D表示第一组像素中的第四颜色。
25.如权利要求24所述的图像传感器,其中A,B,C和D分别从红色,绿色,蓝色和第四颜色的集合中选择或者分别从蓝绿色,品红色和黄色和第四颜色的集合中选择。
26.如权利要求21所述的图像传感器,其中最小重复单元是:
P  A  P  B
A  P  B  P
P  B  P  C
B  P  C  P
其中P代表第二组全色像素中的像素,并且
A代表第一组像素中的第一颜色
B代表第一组像素中的第二颜色,并且
C代表第一组像素中的第三颜色。
27.如权利要求26所述的图像传感器,其中A,B和C分别从红色,绿色和蓝色的集合中选择或者分别从蓝绿色,品红色和黄色的集合中选择。
28.如权利要求21所述的图像传感器,其中最小重复单元是:
P  A  P  B
A  P  B  P
P  D  P  C
D  P  C  P
其中P表示第二组全色像素中的像素,并且
A表示第一组像素中的第一颜色
B表示第一组像素中的第二颜色
C表示第一组像素中的第三颜色,并且
D表示第一组像素中的第四颜色。
29.如权利要求28所述的图像传感器,其中A,B,C和D分别从红色,绿色,蓝色和第四颜色的集合中选择或者分别从蓝绿色,品红色和黄色和第四颜色的集合中选择。
30.如权利要求1所述的图像传感器,其中图像阵列由有源像素或电荷耦合装置像素组成。
31.如权利要求30所述的图像传感器,其中为在第一组像素中的每个彩色像素提供与希望的颜色相对应的滤色器。
32.如权利要求30所述的图像传感器,其中第二组全色像素中的每个像素包括中性密度滤光片。
33.如权利要求1所述的图像传感器,其中第二组全色像素具有比第一组的特定颜色的像素的尺寸小。
34.一种用于采集彩色图像的图像传感器,包括:
a)具有第一组像素和第二组全色像素的二维阵列,其中来自第一组像素的像素具有比来自第二组全色像素的像素更窄的光谱的光响应,并且其中第一组像素所具有的各个像素有与一组至少两种颜色相对应的光谱的光响应;以及
b)第一组像素和第二组全色像素的布置定义了一个图案,该图案具有包括至少十二个像素的最小重复单元,该最小重复单元具有多个非重叠细胞,其中每个细胞具有从第一组像素中选择的代表一种特定颜色的至少两个像素和从第二组全色像素中选择的多个像素,这些细胞被排列为允许在不同照明条件下再现所采集的彩色图像,该细胞定义了低分辨率的滤色器阵列图像,并且第二组全色像素定义了高分辨率的全色图像,这样该低分辨率的滤色器阵列图像和高分辨率的全色图像经处理被合并以生成高分辨率的彩色图像。
CN2006800274749A 2005-07-28 2006-07-13 具有改善的光敏感度的图像传感器 Active CN101233762B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US11/191,729 US8139130B2 (en) 2005-07-28 2005-07-28 Image sensor with improved light sensitivity
US11/191,729 2005-07-28
PCT/US2006/027454 WO2007015765A2 (en) 2005-07-28 2006-07-13 Image sensor with improved lightsensitivity

Publications (2)

Publication Number Publication Date
CN101233762A CN101233762A (zh) 2008-07-30
CN101233762B true CN101233762B (zh) 2010-09-01

Family

ID=37467474

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2006800274749A Active CN101233762B (zh) 2005-07-28 2006-07-13 具有改善的光敏感度的图像传感器

Country Status (5)

Country Link
US (2) US8139130B2 (zh)
EP (1) EP1908302B1 (zh)
JP (2) JP2009504005A (zh)
CN (1) CN101233762B (zh)
WO (1) WO2007015765A2 (zh)

Families Citing this family (190)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8274715B2 (en) * 2005-07-28 2012-09-25 Omnivision Technologies, Inc. Processing color and panchromatic pixels
US7830430B2 (en) 2005-07-28 2010-11-09 Eastman Kodak Company Interpolation of panchromatic and color pixels
US8139130B2 (en) 2005-07-28 2012-03-20 Omnivision Technologies, Inc. Image sensor with improved light sensitivity
US7636115B2 (en) * 2005-08-11 2009-12-22 Aptina Imaging Corporation High dynamic range imaging device using multiple pixel cells
US7821553B2 (en) * 2005-12-30 2010-10-26 International Business Machines Corporation Pixel array, imaging sensor including the pixel array and digital camera including the imaging sensor
US7728906B2 (en) * 2006-01-04 2010-06-01 Apple Inc. Embedded camera with privacy filter
US7688368B2 (en) * 2006-01-27 2010-03-30 Eastman Kodak Company Image sensor with improved light sensitivity
JP4796871B2 (ja) * 2006-03-06 2011-10-19 富士フイルム株式会社 撮像装置
US7916362B2 (en) * 2006-05-22 2011-03-29 Eastman Kodak Company Image sensor with improved light sensitivity
KR100827240B1 (ko) * 2006-10-02 2008-05-07 삼성전자주식회사 다채널 보간 장치 및 방법
US8031258B2 (en) 2006-10-04 2011-10-04 Omnivision Technologies, Inc. Providing multiple video signals from single sensor
JP4916275B2 (ja) * 2006-10-30 2012-04-11 富士通セミコンダクター株式会社 欠陥画素補正回路、それを用いた画像処理システムおよび欠陥画素補正方法
US7876956B2 (en) * 2006-11-10 2011-01-25 Eastman Kodak Company Noise reduction of panchromatic and color image
US8594451B2 (en) * 2007-03-30 2013-11-26 Omnivision Technologies, Inc. Edge mapping incorporating panchromatic pixels
US7844127B2 (en) * 2007-03-30 2010-11-30 Eastman Kodak Company Edge mapping using panchromatic pixels
US7889921B2 (en) * 2007-05-23 2011-02-15 Eastman Kodak Company Noise reduced color image using panchromatic image
JP5222625B2 (ja) * 2007-06-01 2013-06-26 富士フイルム株式会社 撮像装置
FR2917559B1 (fr) * 2007-06-12 2009-12-25 Centre Nat Rech Scient Capteur d'images numeriques,procede d'acquisition et de reconstruction d'images,et systeme de mise en oeuvre
JP5040458B2 (ja) * 2007-06-16 2012-10-03 株式会社ニコン 固体撮像素子及びこれを用いた撮像装置
US8896712B2 (en) * 2007-07-20 2014-11-25 Omnivision Technologies, Inc. Determining and correcting for imaging device motion during an exposure
US7855740B2 (en) * 2007-07-20 2010-12-21 Eastman Kodak Company Multiple component readout of image sensor
US8063941B2 (en) * 2007-08-06 2011-11-22 Microsoft Corporation Enhancing digital images using secondary optical systems
US20090041368A1 (en) * 2007-08-06 2009-02-12 Microsoft Corporation Enhancing digital images using secondary optical systems
US20090046182A1 (en) * 2007-08-14 2009-02-19 Adams Jr James E Pixel aspect ratio correction using panchromatic pixels
US8452082B2 (en) 2007-09-27 2013-05-28 Eastman Kodak Company Pattern conversion for interpolation
US7893394B2 (en) * 2007-11-06 2011-02-22 Ricoh Company Limited Optical device, image reading device, and filter manufacturing method
US7999870B2 (en) * 2008-02-01 2011-08-16 Omnivision Technologies, Inc. Sampling and readout of an image sensor having a sparse color filter array pattern
KR101470507B1 (ko) * 2008-02-27 2014-12-09 삼성전자주식회사 무선통신시스템에서 동기화 장치 및 방법
US7781716B2 (en) * 2008-03-17 2010-08-24 Eastman Kodak Company Stacked image sensor with shared diffusion regions in respective dropped pixel positions of a pixel array
US8164651B2 (en) * 2008-04-29 2012-04-24 Omnivision Technologies, Inc. Concentric exposure sequence for image sensor
KR20090120159A (ko) * 2008-05-19 2009-11-24 삼성전자주식회사 영상합성장치 및 영상합성방법
US8035711B2 (en) * 2008-05-22 2011-10-11 Panavision Imaging, Llc Sub-pixel array optical sensor
US20100149393A1 (en) * 2008-05-22 2010-06-17 Panavision Imaging, Llc Increasing the resolution of color sub-pixel arrays
US7807955B2 (en) * 2008-05-30 2010-10-05 Eastman Kodak Company Image sensor having reduced well bounce
US8350952B2 (en) 2008-06-04 2013-01-08 Omnivision Technologies, Inc. Image sensors with improved angle response
US8035716B2 (en) * 2008-06-13 2011-10-11 Omnivision Technologies, Inc. Wide aperture image sensor pixel
US20100006908A1 (en) 2008-07-09 2010-01-14 Brady Frederick T Backside illuminated image sensor with shallow backside trench for photodiode isolation
US7915067B2 (en) * 2008-07-09 2011-03-29 Eastman Kodak Company Backside illuminated image sensor with reduced dark current
US7859033B2 (en) 2008-07-09 2010-12-28 Eastman Kodak Company Wafer level processing for backside illuminated sensors
US8576297B2 (en) 2008-07-11 2013-11-05 The Invention Science Fund I, Llc Spectral improvement of digital camera color images
US8736709B2 (en) 2008-07-11 2014-05-27 The Invention Science Fund I, Llc Spectral improvement of digital camera color images
US8471939B2 (en) 2008-08-01 2013-06-25 Omnivision Technologies, Inc. Image sensor having multiple sensing layers
US8130278B2 (en) * 2008-08-01 2012-03-06 Omnivision Technologies, Inc. Method for forming an improved image using images with different resolutions
KR20100018449A (ko) * 2008-08-06 2010-02-17 삼성전자주식회사 입체 이미지 센서의 픽셀 어레이
US8211732B2 (en) * 2008-09-11 2012-07-03 Omnivision Technologies, Inc. Image sensor with raised photosensitive elements
US8054355B2 (en) * 2008-10-16 2011-11-08 Omnivision Technologies, Inc. Image sensor having multiple sensing layers
US7948534B2 (en) 2008-10-22 2011-05-24 Eastman Kodak Company Charge-coupled device image sensor with vertical binning of same-color pixels
US8111307B2 (en) * 2008-10-25 2012-02-07 Omnivision Technologies, Inc. Defective color and panchromatic CFA image
US8073246B2 (en) * 2008-11-07 2011-12-06 Omnivision Technologies, Inc. Modifying color and panchromatic channel CFA image
US8587681B2 (en) * 2008-11-21 2013-11-19 Omnivision Technologies, Inc. Extended depth of field for image sensor
US8184184B2 (en) * 2008-12-08 2012-05-22 Omnivision Technologies, Inc. Analog multiplexer configured to reduce kickback perturbation in image sensor readout
JP4626706B2 (ja) * 2008-12-08 2011-02-09 ソニー株式会社 固体撮像装置、固体撮像装置の信号処理方法および撮像装置
US20100149396A1 (en) * 2008-12-16 2010-06-17 Summa Joseph R Image sensor with inlaid color pixels in etched panchromatic array
US8174601B2 (en) 2008-12-19 2012-05-08 Omnivision Technologies, Inc. Image sensor with controllable transfer gate off state voltage levels
US8164669B2 (en) * 2008-12-19 2012-04-24 Truesense Imaging, Inc. Charge-coupled device image sensor with efficient binning of same-color pixels
CN101834974B (zh) * 2009-03-09 2013-12-18 博立码杰通讯(深圳)有限公司 一种多光谱感光器件及其采样方法
US8224082B2 (en) * 2009-03-10 2012-07-17 Omnivision Technologies, Inc. CFA image with synthetic panchromatic image
US8179466B2 (en) 2009-03-11 2012-05-15 Eastman Kodak Company Capture of video with motion-speed determination and variable capture rate
US8068153B2 (en) * 2009-03-27 2011-11-29 Omnivision Technologies, Inc. Producing full-color image using CFA image
US8218068B2 (en) 2009-04-01 2012-07-10 Omnivision Technologies, Inc. Exposing pixel groups in producing digital images
US8045024B2 (en) * 2009-04-15 2011-10-25 Omnivision Technologies, Inc. Producing full-color image with reduced motion blur
US8203633B2 (en) * 2009-05-27 2012-06-19 Omnivision Technologies, Inc. Four-channel color filter array pattern
US8237831B2 (en) * 2009-05-28 2012-08-07 Omnivision Technologies, Inc. Four-channel color filter array interpolation
US20100309340A1 (en) * 2009-06-03 2010-12-09 Border John N Image sensor having global and rolling shutter processes for respective sets of pixels of a pixel array
US8125546B2 (en) * 2009-06-05 2012-02-28 Omnivision Technologies, Inc. Color filter array pattern having four-channels
US8253832B2 (en) * 2009-06-09 2012-08-28 Omnivision Technologies, Inc. Interpolation for four-channel color filter array
US8724928B2 (en) * 2009-08-31 2014-05-13 Intellectual Ventures Fund 83 Llc Using captured high and low resolution images
US8546737B2 (en) * 2009-10-30 2013-10-01 Invisage Technologies, Inc. Systems and methods for color binning
CN102812709B (zh) * 2009-11-20 2015-11-25 M·辛格 压缩彩色图像采样和重建的方法和系统
KR101625209B1 (ko) * 2009-12-11 2016-05-30 삼성전자주식회사 다이크로익 필터를 이용한 컬러 필터 어레이
US8106427B2 (en) 2009-12-21 2012-01-31 Omnivision Technologies, Inc. Image sensor with well bounce correction
US20110157395A1 (en) 2009-12-31 2011-06-30 Compton John T Image sensor with fractional resolution image processing
US20110205397A1 (en) 2010-02-24 2011-08-25 John Christopher Hahn Portable imaging device having display with improved visibility under adverse conditions
US20110205384A1 (en) * 2010-02-24 2011-08-25 Panavision Imaging, Llc Variable active image area image sensor
US8179445B2 (en) 2010-03-03 2012-05-15 Eastman Kodak Company Providing improved high resolution image
US20110228074A1 (en) 2010-03-22 2011-09-22 Parulski Kenneth A Underwater camera with presssure sensor
US20110228075A1 (en) 2010-03-22 2011-09-22 Madden Thomas E Digital camera with underwater capture mode
JP5075934B2 (ja) * 2010-03-25 2012-11-21 株式会社東芝 固体撮像装置および画像記録装置
US8665340B2 (en) 2010-04-29 2014-03-04 Intellectual Ventures Fund 83 Llc Indoor/outdoor scene detection using GPS
WO2011153515A1 (en) * 2010-06-03 2011-12-08 Tripurari Singh Methods and system for spectral image sampling
US8432456B2 (en) 2010-06-18 2013-04-30 Apple Inc. Digital camera for sharing digital images
WO2012007791A1 (en) * 2010-07-13 2012-01-19 Nokia Corporation Color image sensing
US8345132B2 (en) 2010-07-23 2013-01-01 Omnivision Technologies, Inc. Image sensor with dual element color filter array and three channel color output
US20120019704A1 (en) 2010-07-26 2012-01-26 Levey Charles I Automatic digital camera photography mode selection
US8970720B2 (en) 2010-07-26 2015-03-03 Apple Inc. Automatic digital camera photography mode selection
US20120050570A1 (en) 2010-08-26 2012-03-01 Jasinski David W Audio processing based on scene type
LT2617186T (lt) 2010-09-13 2022-02-25 Contour Ip Holding, Llc Nešiojama skaitmeninė vaizdo kamera, sukonfigūruota nuotolinio vaizdo gavimo valdymui ir peržiūrėjimui
US8494301B2 (en) 2010-09-16 2013-07-23 Eastman Kodak Company Refocusing images using scene captured images
US9930316B2 (en) 2013-08-16 2018-03-27 University Of New Brunswick Camera imaging systems and methods
US8643734B2 (en) 2010-11-10 2014-02-04 Apple Inc. Automatic engagement of image stabilization
US9013602B2 (en) 2011-01-03 2015-04-21 Intellectual Ventures Fund 83 Llc Digital camera system having a retail mode
US8224176B1 (en) 2011-01-10 2012-07-17 Eastman Kodak Company Combined ambient and flash exposure for improved image quality
US8428308B2 (en) 2011-02-04 2013-04-23 Apple Inc. Estimating subject motion for capture setting determination
US8379934B2 (en) 2011-02-04 2013-02-19 Eastman Kodak Company Estimating subject motion between image frames
WO2012114994A1 (ja) * 2011-02-21 2012-08-30 富士フイルム株式会社 カラー撮像素子
CN103299643B (zh) * 2011-02-21 2015-01-21 富士胶片株式会社 彩色成像设备
WO2012114558A1 (ja) * 2011-02-21 2012-08-30 富士フイルム株式会社 カラー撮像素子
BR112012027309A2 (pt) * 2011-02-28 2016-08-02 Fujifilm Corp aparelho de geração de imagens coloridas
CN103974044B (zh) * 2011-02-28 2016-06-08 富士胶片株式会社 镶嵌图像处理方法
BR112012029513A2 (pt) * 2011-03-09 2016-12-06 Fujifilm Corp elemento de imageamento de cor.
US20120243802A1 (en) 2011-03-25 2012-09-27 William Vernon Fintel Composite image formed from an image sequence
US8736704B2 (en) 2011-03-25 2014-05-27 Apple Inc. Digital camera for capturing an image sequence
US8736697B2 (en) 2011-03-25 2014-05-27 Apple Inc. Digital camera having burst image capture mode
US20120249853A1 (en) 2011-03-28 2012-10-04 Marc Krolczyk Digital camera for reviewing related images
US8736716B2 (en) 2011-04-06 2014-05-27 Apple Inc. Digital camera having variable duration burst mode
CN102158632B (zh) * 2011-04-08 2013-07-10 北京大学 一种cfa的获取方法及装置
US9848158B2 (en) 2011-05-04 2017-12-19 Monument Peak Ventures, Llc Digital camera user interface for video trimming
US9241101B2 (en) 2011-05-04 2016-01-19 Intellectual Ventures Fund 83 Llc Digital camera user interface for text entry
US8780180B2 (en) 2011-05-13 2014-07-15 Apple Inc. Stereoscopic camera using anaglyphic display during capture
US8665345B2 (en) 2011-05-18 2014-03-04 Intellectual Ventures Fund 83 Llc Video summary including a feature of interest
US8643746B2 (en) 2011-05-18 2014-02-04 Intellectual Ventures Fund 83 Llc Video summary including a particular person
US8760527B2 (en) 2011-06-24 2014-06-24 Apple Inc. Extending a digital camera focus range
WO2012177495A1 (en) 2011-06-24 2012-12-27 Eastman Kodak Company Digital camera providing an extended focus range
US8754953B2 (en) 2011-06-24 2014-06-17 Apple Inc. Digital camera providing an extended focus range
US9055276B2 (en) 2011-07-29 2015-06-09 Apple Inc. Camera having processing customized for identified persons
US20130064531A1 (en) 2011-09-13 2013-03-14 Bruce Harold Pillman Zoom flash with no moving parts
WO2013043488A1 (en) 2011-09-22 2013-03-28 Eastman Kodak Company Digital imaging system with refocusable imaging mode
US8593564B2 (en) 2011-09-22 2013-11-26 Apple Inc. Digital camera including refocusable imaging mode adaptor
US8750674B2 (en) 2011-09-26 2014-06-10 Intellectual Ventures Fund 83 Llc Remotely controllable digital video camera system
US9253340B2 (en) 2011-11-11 2016-02-02 Intellectual Ventures Fund 83 Llc Wireless camera with image sharing prioritization
JP5621058B2 (ja) * 2011-12-27 2014-11-05 富士フイルム株式会社 カラー撮像素子
WO2013100034A1 (ja) * 2011-12-27 2013-07-04 富士フイルム株式会社 カラー撮像素子
US20130177242A1 (en) 2012-01-10 2013-07-11 James E. Adams, Jr. Super-resolution image using selected edge pixels
US20150334317A1 (en) * 2012-01-20 2015-11-19 Rjs Technology, Inc. High dynamic range array of sensitive image sensor blocks using block processing
JP6099009B2 (ja) * 2012-02-16 2017-03-22 パナソニックIpマネジメント株式会社 撮像素子および撮像装置
US8866943B2 (en) 2012-03-09 2014-10-21 Apple Inc. Video camera providing a composite video sequence
US8934045B2 (en) 2012-03-12 2015-01-13 Apple Inc. Digital camera system having remote control
US20130235234A1 (en) 2012-03-12 2013-09-12 Megan Lyn Cucci Digital camera having multiple image capture systems
JP5833961B2 (ja) * 2012-03-23 2015-12-16 株式会社東芝 画像圧縮装置、画像処理システム、及び画像圧縮方法
CN103369253B (zh) * 2012-03-26 2017-02-08 江苏思特威电子科技有限公司 成像装置及成像方法
RU2014138087A (ru) * 2012-03-27 2016-04-10 Сони Корпорейшн Устройство обработки изображения, устройство формирования изображения, способ обработки изображения и программа
CN103516962A (zh) * 2012-06-19 2014-01-15 全友电脑股份有限公司 影像撷取系统及方法
JP5927068B2 (ja) * 2012-07-06 2016-05-25 富士フイルム株式会社 カラー撮像素子
DE102012212252A1 (de) 2012-07-12 2014-01-16 Leica Microsystems (Schweiz) Ag Bildsensor und Kamera für ein Mikroskop
US8724919B2 (en) 2012-09-21 2014-05-13 Eastman Kodak Company Adjusting the sharpness of a digital image
US8928772B2 (en) 2012-09-21 2015-01-06 Eastman Kodak Company Controlling the sharpness of a digital image
WO2014050189A1 (ja) * 2012-09-27 2014-04-03 富士フイルム株式会社 撮像装置及び画像処理方法
DE102012110092A1 (de) * 2012-10-23 2014-04-24 Conti Temic Microelectronic Gmbh Sensoranordnung zur Bilderfassung
JP2014107665A (ja) * 2012-11-27 2014-06-09 Nikon Corp 固体撮像素子、撮像システム、および車両
US9398287B2 (en) 2013-02-28 2016-07-19 Google Technology Holdings LLC Context-based depth sensor control
US9407837B2 (en) 2013-02-28 2016-08-02 Google Inc. Depth sensor using modulated light projector and image sensor with color and IR sensing
US9741754B2 (en) 2013-03-06 2017-08-22 Apple Inc. Charge transfer circuit with storage nodes in image sensors
US9692992B2 (en) * 2013-07-01 2017-06-27 Omnivision Technologies, Inc. Color and infrared filter array patterns to reduce color aliasing
US9667933B2 (en) * 2013-07-01 2017-05-30 Omnivision Technologies, Inc. Color and infrared filter array patterns to reduce color aliasing
US9491377B2 (en) 2013-08-07 2016-11-08 Trimble Navigation Limited Methods of extracting 4-band data from a single CCD; methods of generating 4×4 or 3×3 color correction matrices using a single CCD
EP2887656B1 (fr) * 2013-12-20 2019-11-06 Swiss Timing Ltd. Méthode pour l'ajustement d'un filtre couleur pour capteur numérique
US9355599B2 (en) 2014-03-06 2016-05-31 3M Innovative Properties Company Augmented information display
CN103872065B (zh) * 2014-03-10 2016-09-21 北京空间机电研究所 垂直电荷转移成像探测器像元合并方法
US9686485B2 (en) * 2014-05-30 2017-06-20 Apple Inc. Pixel binning in an image sensor
GB2544946B (en) 2014-08-31 2021-03-10 Berestka John Systems and methods for analyzing the eye
US10139531B2 (en) 2014-09-13 2018-11-27 The United States Of America, As Represented By The Secretary Of The Navy Multiple band short wave infrared mosaic array filter
FR3026223B1 (fr) * 2014-09-22 2016-12-23 Photonis France Dispositif d'acquisition d'images bimode a photocathode.
US9734599B2 (en) * 2014-10-08 2017-08-15 Microsoft Technology Licensing, Llc Cross-level image blending
TWI552594B (zh) 2014-10-27 2016-10-01 聯詠科技股份有限公司 用於影像感測裝置的色彩濾波陣列及其製造方法
US9697434B2 (en) * 2014-12-10 2017-07-04 Omnivision Technologies, Inc. Edge detection system and methods
JP6622481B2 (ja) * 2015-04-15 2019-12-18 キヤノン株式会社 撮像装置、撮像システム、撮像装置の信号処理方法、信号処理方法
JP6584131B2 (ja) * 2015-05-08 2019-10-02 キヤノン株式会社 撮像装置、撮像システム、および信号処理方法
JP6598507B2 (ja) * 2015-05-11 2019-10-30 キヤノン株式会社 撮像装置、撮像システム、信号処理方法
US9681109B2 (en) * 2015-08-20 2017-06-13 Qualcomm Incorporated Systems and methods for configurable demodulation
CN105430360B (zh) * 2015-12-18 2018-01-23 广东欧珀移动通信有限公司 成像方法、图像传感器、成像装置及电子装置
CN105516697B (zh) * 2015-12-18 2018-04-17 广东欧珀移动通信有限公司 图像传感器、成像装置、移动终端及成像方法
EP3405746A1 (en) 2016-01-19 2018-11-28 Zivid Labs AS Imaging unit and system for obtaining a three-dimensional image
KR102502452B1 (ko) * 2016-02-15 2023-02-22 삼성전자주식회사 이미지 센서 및 복원 이미지 생성 방법
US11244478B2 (en) * 2016-03-03 2022-02-08 Sony Corporation Medical image processing device, system, method, and program
KR102603426B1 (ko) * 2016-06-27 2023-11-20 삼성전자주식회사 이미지 처리장치 및 방법
US10764515B2 (en) 2016-07-05 2020-09-01 Futurewei Technologies, Inc. Image sensor method and apparatus equipped with multiple contiguous infrared filter elements
JP6645394B2 (ja) * 2016-10-03 2020-02-14 株式会社デンソー 画像センサ
EP3565259A1 (en) * 2016-12-28 2019-11-06 Panasonic Intellectual Property Corporation of America Three-dimensional model distribution method, three-dimensional model receiving method, three-dimensional model distribution device, and three-dimensional model receiving device
CN107944335B (zh) * 2017-08-17 2021-06-22 深圳信炜科技有限公司 感光模组、显示模组及电子设备
US10431616B2 (en) 2017-12-20 2019-10-01 Google Llc Color filter arrays for image sensors
EP3506357A1 (en) * 2017-12-27 2019-07-03 Thomson Licensing An image sensor comprising an array of pixels for reducing the shadowing effect, and corresponding designing method and computer program product
US10848693B2 (en) 2018-07-18 2020-11-24 Apple Inc. Image flare detection using asymmetric pixels
US11019294B2 (en) 2018-07-18 2021-05-25 Apple Inc. Seamless readout mode transitions in image sensors
JP2020108061A (ja) * 2018-12-28 2020-07-09 キヤノン株式会社 撮像装置及び撮像システム
CN109905681B (zh) * 2019-02-01 2021-07-16 华为技术有限公司 图像传感器、从其获取图像数据的方法及摄像设备
US10764507B1 (en) * 2019-04-18 2020-09-01 Kneron (Taiwan) Co., Ltd. Image processing system capable of generating a snapshot image with high image quality by using a zero-shutter-lag snapshot operation
EP4020971A4 (en) * 2019-09-09 2022-09-07 Guangdong Oppo Mobile Telecommunications Corp., Ltd. IMAGE COLLECTION METHOD, CAMERA ASSEMBLY AND MOBILE TERMINAL
CN114631310A (zh) * 2019-11-20 2022-06-14 Oppo广东移动通信有限公司 图像传感器、控制方法、摄像头组件及移动终端
CN111050041B (zh) * 2019-11-25 2021-03-26 Oppo广东移动通信有限公司 图像传感器、控制方法、摄像头组件及移动终端
WO2021171796A1 (ja) * 2020-02-26 2021-09-02 ソニーセミコンダクタソリューションズ株式会社 固体撮像装置及び電子機器
KR20210135380A (ko) 2020-05-04 2021-11-15 삼성전자주식회사 이미지 센서
CN111586323A (zh) * 2020-05-07 2020-08-25 Oppo广东移动通信有限公司 图像传感器、控制方法、摄像头组件和移动终端
KR20210148682A (ko) 2020-06-01 2021-12-08 삼성전자주식회사 이미지 센서, 이미지 센서를 포함하는 모바일 장치 및 이미지 센서의 센싱 감도 제어 방법
US11563910B2 (en) 2020-08-04 2023-01-24 Apple Inc. Image capture devices having phase detection auto-focus pixels
JP2022029026A (ja) * 2020-08-04 2022-02-17 キヤノン株式会社 撮像装置
CN111918005B (zh) * 2020-09-16 2023-05-16 Oppo广东移动通信有限公司 图像传感器、终端、数据处理方法、装置及存储介质
WO2022073364A1 (zh) * 2020-10-09 2022-04-14 Oppo广东移动通信有限公司 图像获取方法及装置、终端和计算机可读存储介质
US11546532B1 (en) 2021-03-16 2023-01-03 Apple Inc. Dynamic correlated double sampling for noise rejection in image sensors
CN113676675B (zh) * 2021-08-16 2023-08-15 Oppo广东移动通信有限公司 图像生成方法、装置、电子设备和计算机可读存储介质
CN114338988A (zh) * 2021-12-29 2022-04-12 Oppo广东移动通信有限公司 图像生成方法、装置、电子设备和计算机可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4437112A (en) * 1980-02-15 1984-03-13 Canon Kabushiki Kaisha Solid-state color imaging apparatus
EP0119862A2 (en) * 1983-03-17 1984-09-26 Nec Corporation Solid-state color imaging apparatus
EP0472299A1 (en) * 1990-07-31 1992-02-26 Canon Kabushiki Kaisha Image signal processing apparatus
CN1625231A (zh) * 2003-11-28 2005-06-08 松下电器产业株式会社 固态图像传感器,固态图像传感装置,相机及其方法

Family Cites Families (302)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2508267A (en) 1945-10-26 1950-05-16 Du Mont Allen B Lab Inc Color television
US2446791A (en) 1946-06-11 1948-08-10 Rca Corp Color television tube
US2884483A (en) 1955-03-09 1959-04-28 Grimson Color Inc Color image pick up apparatus
JPS5016134B1 (zh) 1970-12-26 1975-06-11
US3971065A (en) * 1975-03-05 1976-07-20 Eastman Kodak Company Color imaging array
JPS6056030B2 (ja) * 1975-10-24 1985-12-07 松下電器産業株式会社 カラー固体撮像装置
US4047203A (en) * 1976-05-12 1977-09-06 Eastman Kodak Company Color imaging array
JPS5763983A (en) * 1980-10-07 1982-04-17 Toshiba Corp Color image pickup device
US4500914A (en) 1981-08-01 1985-02-19 Sharp Kabushiki Kaisha Color imaging array and color imaging device
US4591900A (en) 1983-03-14 1986-05-27 Rca Corporation Encoding pattern for single chip CCD camera processing scheme
JPS6020111A (ja) 1983-07-14 1985-02-01 Fuji Electric Corp Res & Dev Ltd 距離測定装置
DE3480760D1 (de) 1983-09-16 1990-01-18 Hitachi Ltd Signalverarbeitungsschaltung fuer eine farbvideokamera.
JPS60103790A (ja) 1983-11-10 1985-06-08 Nec Corp カラ−固体撮像装置
JPS60226282A (ja) 1984-04-24 1985-11-11 Canon Inc 撮像装置
DE3515020A1 (de) 1984-04-28 1985-11-07 Kabushiki Kaisha Toshiba, Kawasaki, Kanagawa Ortsfrequenzfilter
US4642678A (en) 1984-09-10 1987-02-10 Eastman Kodak Company Signal processing method and apparatus for producing interpolated chrominance values in a sampled color image signal
US4663661A (en) * 1985-05-23 1987-05-05 Eastman Kodak Company Single sensor color video camera with blurring filter
US5018006A (en) * 1985-10-31 1991-05-21 Canon Kabushiki Kaisha Multi-plate type image pickup apparatus having picture elements for producing color and luminance signals
JPS62258563A (ja) 1986-05-01 1987-11-11 Omron Tateisi Electronics Co 静止撮像カメラ
JP2849813B2 (ja) * 1986-12-19 1999-01-27 富士写真フイルム株式会社 映像信号の形成装置
JPS6477288A (en) * 1987-09-18 1989-03-23 Canon Kk Image pickup device
US4896207A (en) 1988-06-17 1990-01-23 Eastman Kodak Company Color imaging apparatus employing a horizontal stripe color filter to reduce rise-time artifacts
DE3824639C2 (de) 1988-07-20 1993-11-18 Geutebrueck Videotechnik Gmbh Optische Überwachungseinrichtung
US4962419A (en) * 1989-02-13 1990-10-09 Eastman Kodak Company Detail processing method and apparatus providing uniform processing of horizontal and vertical detail components
US5264924A (en) 1989-12-18 1993-11-23 Eastman Kodak Company Mechanism for deriving noise-reduced estimates of color signal parameters from multiple color/luminance image sensor outputs
EP0446018B1 (en) 1990-03-05 1998-08-12 Canon Kabushiki Kaisha Image processing apparatus
JPH0488784A (ja) * 1990-07-31 1992-03-23 Canon Inc カラー撮像素子及び信号処理方式
US5432906A (en) 1990-09-28 1995-07-11 Eastman Kodak Company Color image processing system for preparing a composite image transformation module for performing a plurality of selected image transformations
US5272518A (en) 1990-12-17 1993-12-21 Hewlett-Packard Company Colorimeter and calibration system
US5831676A (en) 1992-08-19 1998-11-03 Canon Kabushiki Kaisha Image pickup device using plural control parameters for exposure control
DE69232455T2 (de) 1991-08-21 2002-06-27 Canon Kk Videokamera mit einer Mehrzahl von photographischen Betriebsarten
US5374956A (en) * 1992-05-29 1994-12-20 Eastman Kodak Company Electronic imaging apparatus with dithered color filter array
US5903388A (en) 1992-06-11 1999-05-11 Sedlmayr Steven R High efficiency electromagnetic beam projector and systems and method for implementation thereof
US5227313A (en) 1992-07-24 1993-07-13 Eastman Kodak Company Process for making backside illuminated image sensors
US5244817A (en) 1992-08-03 1993-09-14 Eastman Kodak Company Method of making backside illuminated image sensors
US5382976A (en) 1993-06-30 1995-01-17 Eastman Kodak Company Apparatus and method for adaptively interpolating a full color image utilizing luminance gradients
US5493335A (en) 1993-06-30 1996-02-20 Eastman Kodak Company Single sensor color camera with user selectable image record size
US5373322A (en) 1993-06-30 1994-12-13 Eastman Kodak Company Apparatus and method for adaptively interpolating a full color image utilizing chrominance gradients
JPH0823542A (ja) * 1994-07-11 1996-01-23 Canon Inc 撮像装置
DE69514874T2 (de) 1994-08-23 2000-07-20 Hewlett Packard Co Sensoranordnung für einen optischen Bildabtaster die Grauwert- und Farbsignale liefert
US6292212B1 (en) 1994-12-23 2001-09-18 Eastman Kodak Company Electronic color infrared camera
JP3392564B2 (ja) 1995-02-27 2003-03-31 三洋電機株式会社 単板式カラービデオカメラ
US5670817A (en) 1995-03-03 1997-09-23 Santa Barbara Research Center Monolithic-hybrid radiation detector/readout
US5629734A (en) * 1995-03-17 1997-05-13 Eastman Kodak Company Adaptive color plan interpolation in single sensor color electronic camera
US5506619A (en) * 1995-03-17 1996-04-09 Eastman Kodak Company Adaptive color plan interpolation in single sensor color electronic camera
US5625210A (en) 1995-04-13 1997-04-29 Eastman Kodak Company Active pixel sensor integrated with a pinned photodiode
US20020024496A1 (en) 1998-03-20 2002-02-28 Hajime Akimoto Image display device
US5677202A (en) 1995-11-20 1997-10-14 Eastman Kodak Company Method for making planar color filter array for image sensors with embedded color filter arrays
US5596367A (en) 1996-02-23 1997-01-21 Eastman Kodak Company Averaging green values for green photosites in electronic cameras
US5652621A (en) * 1996-02-23 1997-07-29 Eastman Kodak Company Adaptive color plane interpolation in single sensor color electronic camera
US5786236A (en) 1996-03-29 1998-07-28 Eastman Kodak Company Backside thinning using ion-beam figuring
JP3752510B2 (ja) 1996-04-15 2006-03-08 イーストマン コダック カンパニー 画像の自動被写体検出方法
US5631703A (en) * 1996-05-29 1997-05-20 Eastman Kodak Company Particular pattern of pixels for a color filter array which is used to derive luminance and chrominance values
FR2755815B1 (fr) 1996-11-08 1998-12-18 Commissariat Energie Atomique Dispositif et procede de determination de la position presumee d'un evenement par rapport a un ensemble de photodetecteurs, et application aux gamma-cameras
US6246865B1 (en) 1997-02-04 2001-06-12 Samsung Electronics Co., Ltd. Device and method for controlling distortion characteristic of predistorter
US6243133B1 (en) * 1997-03-07 2001-06-05 Eastman Kodak Company Method for automatic scene balance of digital images
US6115066A (en) 1997-06-12 2000-09-05 International Business Machines Corporation Image sensor with direct digital correlated sampling
US6366319B1 (en) 1997-07-03 2002-04-02 Photronics Corp. Subtractive color processing system for digital imaging
JPH1126741A (ja) 1997-07-04 1999-01-29 Toshiba Corp 固体撮像装置
US6097835A (en) 1997-07-23 2000-08-01 Lockheed Martin Corporation Projective pan sharpening methods and apparatus
US6107655A (en) 1997-08-15 2000-08-22 Eastman Kodak Company Active pixel image sensor with shared amplifier read-out
JP3977906B2 (ja) 1997-09-26 2007-09-19 オリンパス株式会社 自動焦点調節装置
US6369853B1 (en) 1997-11-13 2002-04-09 Foveon, Inc. Intra-pixel frame storage element, array, and electronic shutter method suitable for electronic still camera applications
JP3873157B2 (ja) 1997-11-13 2007-01-24 カシオ計算機株式会社 電子カメラ装置および撮像方法
JP4006075B2 (ja) 1998-01-30 2007-11-14 キヤノン株式会社 Cmosセンサ及び撮像システム
JP4140077B2 (ja) * 1998-02-18 2008-08-27 ソニー株式会社 固体撮像素子の駆動方法及び固体撮像素子、並びにカメラ
US6366318B1 (en) 1998-03-27 2002-04-02 Eastman Kodak Company CFA correction for CFA images captured at partial resolution
US5914749A (en) 1998-03-31 1999-06-22 Intel Corporation Magenta-white-yellow (MWY) color system for digital image sensor applications
US6011875A (en) 1998-04-29 2000-01-04 Eastman Kodak Company Process for enhancing the spatial resolution of multispectral imagery using pan-sharpening
US6977684B1 (en) 1998-04-30 2005-12-20 Canon Kabushiki Kaisha Arrangement of circuits in pixels, each circuit shared by a plurality of pixels, in image sensing apparatus
US6040570A (en) 1998-05-29 2000-03-21 Sarnoff Corporation Extended dynamic range image sensor system
US6529239B1 (en) 1998-06-01 2003-03-04 Fairchild Imaging, Inc. Image sensor with stripes of cyan filter material perpendicular to stripes of yellow filter material
JP3592147B2 (ja) 1998-08-20 2004-11-24 キヤノン株式会社 固体撮像装置
US6734906B1 (en) 1998-09-02 2004-05-11 Canon Kabushiki Kaisha Image pickup apparatus with photoelectric conversion portions arranged two dimensionally
KR100284305B1 (ko) 1998-10-28 2001-03-02 김영환 이미지 센서에서 녹색 화소의 평균값을 이용하여 화면의 밝기를조절하기 위한 장치 및 방법
JP2000152072A (ja) 1998-11-11 2000-05-30 Minolta Co Ltd デジタルカメラ
US6153446A (en) 1998-11-13 2000-11-28 United Microelectronics Corp. Method for forming a metallic reflecting layer in a semiconductor photodiode
US6429036B1 (en) 1999-01-14 2002-08-06 Micron Technology, Inc. Backside illumination of CMOS image sensor
JP3784602B2 (ja) 1999-03-08 2006-06-14 シャープ株式会社 画像読み取り方法および画像読み取りシステム
US6714243B1 (en) 1999-03-22 2004-03-30 Biomorphic Vlsi, Inc. Color filter pattern
US6947089B1 (en) 1999-05-14 2005-09-20 Canon Kabushiki Kaisha Image pickup apparatus
US6727521B2 (en) 2000-09-25 2004-04-27 Foveon, Inc. Vertical color filter detector group and array
AU5871500A (en) 1999-06-11 2001-01-02 Sydney Hyman Image making medium
JP4626007B2 (ja) 1999-06-14 2011-02-02 株式会社ニコン 画像処理方法、画像処理プログラムを記録した機械読み取り可能な記録媒体、および画像処理装置
JP4077120B2 (ja) 1999-07-01 2008-04-16 富士フイルム株式会社 固体撮像装置および信号処理方法
US6168965B1 (en) 1999-08-12 2001-01-02 Tower Semiconductor Ltd. Method for making backside illuminated image sensor
US6642962B1 (en) 1999-09-01 2003-11-04 Neomagic Corp. Merged pipeline for color interpolation and edge enhancement of digital images
US6665449B1 (en) 1999-09-03 2003-12-16 Battelle Memorial Institute Method and algorithm for image processing
US6512838B1 (en) 1999-09-22 2003-01-28 Canesta, Inc. Methods for enhancing performance and data acquired from three-dimensional image systems
US6694064B1 (en) 1999-11-19 2004-02-17 Positive Systems, Inc. Digital aerial image mosaic method and apparatus
US6510283B1 (en) 1999-11-22 2003-01-21 Canon Kabushiki Kaisha Photo-taking apparatus, control method adapted for the photo-taking apparatus, and computer program product supplying control program adapted for the photo-taking apparatus
JP3467013B2 (ja) 1999-12-06 2003-11-17 キヤノン株式会社 固体撮像装置
US7330209B2 (en) 1999-12-20 2008-02-12 Texas Instruments Incorporated Digital still camera system and complementary-color-filtered array interpolation method
US6221687B1 (en) 1999-12-23 2001-04-24 Tower Semiconductor Ltd. Color image sensor with embedded microlens array
JP4368513B2 (ja) 1999-12-27 2009-11-18 富士フイルム株式会社 画像処理方法および装置並びに記録媒体
US6757012B1 (en) 2000-01-13 2004-06-29 Biomorphic Vlsi, Inc. Color selection for sparse color image reconstruction
JP4195169B2 (ja) 2000-03-14 2008-12-10 富士フイルム株式会社 固体撮像装置および信号処理方法
US20010054723A1 (en) 2000-03-17 2001-12-27 Tadashi Narui Image sensor, method of fabricating the same, and exposure apparatus, measuring device, alignment device, and aberration measuring device using the image sensor
US6453124B2 (en) 2000-03-27 2002-09-17 Minolta Co., Ltd. Digital camera
US6876384B1 (en) 2000-04-19 2005-04-05 Biomorphic Vlsi, Inc. Pixel selective white balancing
US6960817B2 (en) 2000-04-21 2005-11-01 Canon Kabushiki Kaisha Solid-state imaging device
US6515275B1 (en) 2000-04-24 2003-02-04 Hewlett-Packard Company Method and apparatus for determining the illumination type in a scene
US6441855B1 (en) 2000-05-09 2002-08-27 Eastman Kodak Company Focusing device
US6441848B1 (en) 2000-05-19 2002-08-27 Damon L. Tull Preventing blur caused by motion of the subject in a digital image
US6594388B1 (en) 2000-05-25 2003-07-15 Eastman Kodak Company Color image reproduction of scenes with preferential color mapping and scene-dependent tone scaling
JP2001346095A (ja) 2000-06-02 2001-12-14 Nec Corp デジタルスチルカメラ
JP3745948B2 (ja) 2000-08-25 2006-02-15 シャープ株式会社 画像処理装置およびデジタルカメラ
US6995795B1 (en) 2000-09-12 2006-02-07 Eastman Kodak Company Method for reducing dark current
JP4517493B2 (ja) 2000-10-18 2010-08-04 ソニー株式会社 固体撮像素子及びその信号処理方法
EP1328975B1 (en) 2000-10-19 2011-04-27 Quantum Semiconductor, LLC Method of fabricating heterojunction photodiodes integrated with cmos
US6937774B1 (en) 2000-10-24 2005-08-30 Lockheed Martin Corporation Apparatus and method for efficiently increasing the spatial resolution of images
US6813046B1 (en) 2000-11-07 2004-11-02 Eastman Kodak Company Method and apparatus for exposure control for a sparsely sampled extended dynamic range image sensing device
US6765611B1 (en) 2000-11-21 2004-07-20 Eastman Kodak Company Method for compressing an image from a sparsely sampled extended dynamic range image sensing device
US6646246B1 (en) 2000-11-21 2003-11-11 Eastman Kodak Company Method and system of noise removal for a sparsely sampled extended dynamic range image sensing device
US6943831B2 (en) 2001-01-24 2005-09-13 Eastman Kodak Company Method and apparatus to extend the effective dynamic range of an image sensing device and use residual images
US6889620B2 (en) 2001-02-28 2005-05-10 The Mosaic Company Method for prescribing site-specific fertilizer application in agricultural fields
US6476865B1 (en) 2001-03-07 2002-11-05 Eastman Kodak Company Sparsely sampled image sensing device with color and luminance photosites
JP4139088B2 (ja) 2001-03-08 2008-08-27 富士フイルム株式会社 固体撮像装置及びその制御方法
US8120690B2 (en) * 2001-04-12 2012-02-21 Nikon Corporation Imaging device
AU2002308651A1 (en) 2001-05-04 2002-11-18 Leberl, Franz, W. Digital camera for and method of obtaining overlapping images
KR100436067B1 (ko) 2001-11-16 2004-06-12 주식회사 하이닉스반도체 이미지센서 및 그 제조 방법
US6611380B2 (en) 2001-12-21 2003-08-26 Eastman Kodak Company System and method for calibration of display system with linear array modulator
JP3992992B2 (ja) 2002-02-19 2007-10-17 株式会社リコー 被写体像取得装置
JP4198449B2 (ja) 2002-02-22 2008-12-17 富士フイルム株式会社 デジタルカメラ
JP3875130B2 (ja) 2002-03-26 2007-01-31 株式会社東芝 表示装置及びその製造方法
JP2003299112A (ja) 2002-03-29 2003-10-17 Fuji Photo Film Co Ltd デジタルカメラ
US7012643B2 (en) 2002-05-08 2006-03-14 Ball Aerospace & Technologies Corp. One chip, low light level color camera
AU2003272202A1 (en) 2002-06-21 2004-01-06 The Trustees Of Columbia University In The City Of New York Systems and methods for de-blurring motion blurred images
US7015961B2 (en) 2002-08-16 2006-03-21 Ramakrishna Kakarala Digital image system and method for combining demosaicing and bad pixel correction
WO2004027879A2 (en) 2002-09-19 2004-04-01 Quantum Semiconductor Llc Light-sensing device
US7206072B2 (en) 2002-10-04 2007-04-17 Fujifilm Corporation Light source type discriminating method, image forming method, method and apparatus for estimating light source energy distribution, and exposure amount determining method
US7084906B2 (en) 2002-10-15 2006-08-01 Eastman Kodak Company Reducing computation time in removing color aliasing artifacts from color digital images
JP2004147093A (ja) 2002-10-24 2004-05-20 Canon Inc 信号処理装置及び方法、及び撮像装置
KR100900485B1 (ko) 2002-10-26 2009-06-03 삼성디지털이미징 주식회사 구조가 개선된 디지털 카메라용 이미지 센싱 수단 및 이를채용한 디지털 카메라
US7400770B2 (en) 2002-11-06 2008-07-15 Hrl Laboratories Method and apparatus for automatically extracting geospatial features from multispectral imagery suitable for fast and robust extraction of landmarks
KR100749888B1 (ko) 2002-11-12 2007-08-21 마이크론 테크놀로지, 인크 씨모스 이미지 센서들 내에서 암전류를 감소시키기 위한아이솔레이션 기술
US7091536B2 (en) 2002-11-14 2006-08-15 Micron Technology, Inc. Isolation process and structure for CMOS imagers
US7327504B2 (en) 2002-12-06 2008-02-05 Eastman Kodak Company Method of detecting clipped image pixels
JP4723860B2 (ja) 2002-12-09 2011-07-13 クォンタム セミコンダクター リミテッド ライアビリティ カンパニー Cmos画像センサー
US20060055800A1 (en) 2002-12-18 2006-03-16 Noble Device Technologies Corp. Adaptive solid state image sensor
US7453129B2 (en) 2002-12-18 2008-11-18 Noble Peak Vision Corp. Image sensor comprising isolated germanium photodetectors integrated with a silicon substrate and silicon circuitry
JP4019417B2 (ja) 2003-01-14 2007-12-12 ソニー株式会社 画像処理装置および方法、記録媒体、並びにプログラム
US7340099B2 (en) 2003-01-17 2008-03-04 University Of New Brunswick System and method for image fusion
JP3804617B2 (ja) 2003-02-14 2006-08-02 コニカミノルタフォトイメージング株式会社 画像処理装置及び方法
US20040174446A1 (en) 2003-02-28 2004-09-09 Tinku Acharya Four-color mosaic pattern for depth and image capture
JP2004304706A (ja) 2003-04-01 2004-10-28 Fuji Photo Film Co Ltd 固体撮像装置およびその補間処理方法
JP3877695B2 (ja) 2003-04-03 2007-02-07 松下電器産業株式会社 カラー固体撮像装置
FI20030583A (fi) 2003-04-16 2004-10-17 Upstream Engineering Oy Dataprojektori
JP4120453B2 (ja) 2003-04-18 2008-07-16 ソニー株式会社 固体撮像装置とその駆動制御方法
JP2004328378A (ja) 2003-04-24 2004-11-18 Konica Minolta Opto Inc デジタルカメラ
JP2004341206A (ja) 2003-05-15 2004-12-02 Olympus Corp 表示装置
US7333678B1 (en) * 2003-05-20 2008-02-19 Micronas Usa, Inc. Edge adaptive demosaic system and method
US7462553B2 (en) 2003-06-25 2008-12-09 Semicoa Ultra thin back-illuminated photodiode array fabrication methods
US8264576B2 (en) 2007-03-05 2012-09-11 DigitalOptics Corporation Europe Limited RGBW sensor array
US6927432B2 (en) 2003-08-13 2005-08-09 Motorola, Inc. Vertically integrated photosensor for CMOS imagers
US6984816B2 (en) 2003-08-13 2006-01-10 Motorola, Inc. Vertically integrated photosensor for CMOS imagers
US6809008B1 (en) 2003-08-28 2004-10-26 Motorola, Inc. Integrated photosensor for CMOS imagers
JP4349048B2 (ja) 2003-09-22 2009-10-21 セイコーエプソン株式会社 プロジェクタ
DE602004016679D1 (de) 2003-10-13 2008-10-30 Noble Peak Vision Corp Mit einem siliziumsubstrat und einem siliziumschaltkreis integrierte isolierte germanium-photodetektoren umfassender bildsensor
US7214999B2 (en) 2003-10-31 2007-05-08 Motorola, Inc. Integrated photoserver for CMOS imagers
JP4075773B2 (ja) 2003-11-05 2008-04-16 ソニー株式会社 固体撮像装置
JP4046069B2 (ja) 2003-11-17 2008-02-13 ソニー株式会社 固体撮像素子及び固体撮像素子の製造方法
US7379588B2 (en) 2003-11-25 2008-05-27 Xerox Corporation Systems for spectral multiplexing of source images to provide a composite image, for rendering the composite image, and for spectral demultiplexing the composite image to obtain a normalized color image
JP4412710B2 (ja) 2003-11-25 2010-02-10 キヤノン株式会社 光電変換装置の設計方法
US7528997B2 (en) 2003-12-22 2009-05-05 Xerox Corporation Systems and methods for streak detection in image array scanning
KR100595898B1 (ko) 2003-12-31 2006-07-03 동부일렉트로닉스 주식회사 이미지 센서 및 그 제조방법
US7075129B2 (en) 2004-01-09 2006-07-11 Eastman Kodak Company Image sensor with reduced p-well conductivity
JP2005268738A (ja) 2004-02-17 2005-09-29 Sony Corp 固体撮像素子とその製造方法、及び半導体集積回路装置とその製造方法
JP4426885B2 (ja) 2004-03-23 2010-03-03 オリンパス株式会社 固体撮像装置
JP4665422B2 (ja) 2004-04-02 2011-04-06 ソニー株式会社 撮像装置
EP1594321A3 (en) 2004-05-07 2006-01-25 Dialog Semiconductor GmbH Extended dynamic range in color imagers
JP2005333265A (ja) 2004-05-18 2005-12-02 Olympus Corp 固体撮像素子および装置
JP2005354610A (ja) * 2004-06-14 2005-12-22 Canon Inc 画像処理装置、画像処理方法および画像処理プログラム
JP4211696B2 (ja) 2004-06-30 2009-01-21 ソニー株式会社 固体撮像装置の製造方法
US7298922B1 (en) 2004-07-07 2007-11-20 Lockheed Martin Corporation Synthetic panchromatic imagery method and system
US7652703B2 (en) 2004-07-12 2010-01-26 Micron Technology, Inc. Dual panel pixel readout in an imager
US7880785B2 (en) 2004-07-21 2011-02-01 Aptina Imaging Corporation Rod and cone response sensor
US8570389B2 (en) 2004-07-22 2013-10-29 Broadcom Corporation Enhancing digital photography
US7385238B2 (en) 2004-08-16 2008-06-10 Micron Technology, Inc. Low dark current image sensors with epitaxial SiC and/or carbonated channels for array transistors
US7477304B2 (en) 2004-08-26 2009-01-13 Micron Technology, Inc. Two narrow band and one wide band color filter for increasing color image sensor sensitivity
JP4424120B2 (ja) 2004-08-31 2010-03-03 ソニー株式会社 固体撮像装置および固体撮像装置の製造方法
US20060043189A1 (en) 2004-08-31 2006-03-02 Sachin Agrawal Method and apparatus for determining the vertices of a character in a two-dimensional barcode symbol
JP4756839B2 (ja) 2004-09-01 2011-08-24 キヤノン株式会社 固体撮像装置及びカメラ
JP4916101B2 (ja) 2004-09-01 2012-04-11 キヤノン株式会社 光電変換装置、固体撮像装置及び固体撮像システム
JP2006073736A (ja) 2004-09-01 2006-03-16 Canon Inc 光電変換装置、固体撮像装置及び固体撮像システム
JP4157083B2 (ja) 2004-09-09 2008-09-24 マイクロン テクノロジー,インコーポレイテッド オンチップ半列並列パイプラインアナログ‐デジタル変換器を具えるイメージセンサ
WO2006137866A2 (en) 2004-09-17 2006-12-28 Bedabrata Pain Back- illuminated cmos or ccd imaging device structure
US7791663B2 (en) 2004-10-15 2010-09-07 Omnivision Technologies, Inc. Image sensor and pixel that has positive transfer gate voltage during integration period
US7454053B2 (en) 2004-10-29 2008-11-18 Mitutoyo Corporation System and method for automatically recovering video tools in a vision system
JP4652773B2 (ja) 2004-11-05 2011-03-16 パナソニック株式会社 増幅型固体撮像装置
US7109051B2 (en) 2004-11-15 2006-09-19 Freescale Semiconductor, Inc. Method of integrating optical devices and electronic devices on an integrated circuit
WO2006054562A1 (ja) 2004-11-16 2006-05-26 Citizen Watch Co., Ltd. 自動合焦点装置
EP1659776A1 (en) 2004-11-23 2006-05-24 Dialog Semiconductor GmbH An image sensor having resolution adjustment employing an analog column averaging/row averaging for high intensity light or row binning for low intensity light
JP2006154354A (ja) 2004-11-30 2006-06-15 Seiko Epson Corp カラーフィルタの形成方法
JP2006165975A (ja) 2004-12-07 2006-06-22 Konica Minolta Photo Imaging Inc 撮像素子、撮像装置、画像処理方法
KR100699831B1 (ko) 2004-12-16 2007-03-27 삼성전자주식회사 베이어 패턴의 컬러 신호를 보간하는 방법 및 보간기
WO2006064564A1 (ja) 2004-12-16 2006-06-22 Fujitsu Limited 撮像装置、撮像素子および画像処理方法
JP4841834B2 (ja) 2004-12-24 2011-12-21 浜松ホトニクス株式会社 ホトダイオードアレイ
JP2006184567A (ja) 2004-12-27 2006-07-13 Toshiba Corp プロジェクション映像表示装置とその明るさ調整方法
US7800145B2 (en) 2004-12-30 2010-09-21 Ess Technology, Inc. Method and apparatus for controlling charge transfer in CMOS sensors with a transfer gate work function
US7635880B2 (en) 2004-12-30 2009-12-22 Ess Technology, Inc. Method and apparatus for proximate CMOS pixels
EP1679907A1 (en) 2005-01-05 2006-07-12 Dialog Semiconductor GmbH Hexagonal color pixel structure with white pixels
US7554588B2 (en) 2005-02-01 2009-06-30 TransChip Israel, Ltd. Dual exposure for image sensor
US7723215B2 (en) 2005-02-11 2010-05-25 Sarnoff Corporation Dark current reduction in back-illuminated imaging sensors and method of fabricating same
US7238583B2 (en) 2005-02-11 2007-07-03 Sarnoff Corporation Back-illuminated imaging device and method of fabricating same
US8654201B2 (en) 2005-02-23 2014-02-18 Hewlett-Packard Development Company, L.P. Method for deblurring an image
JP4548156B2 (ja) 2005-03-08 2010-09-22 カシオ計算機株式会社 カメラ装置、カメラ装置の自動焦点制御方法
EP1701536A1 (en) 2005-03-08 2006-09-13 Sony Ericsson Mobile Communications AB Method and device for creating pictures, using global shutter and multiple exposures
IL174531A0 (en) 2005-04-06 2006-08-20 Given Imaging Ltd System and method for performing capsule endoscopy diagnosis in remote sites
US7705900B2 (en) 2005-06-01 2010-04-27 Eastman Kodak Company CMOS image sensor pixel with selectable binning and conversion gain
KR100672687B1 (ko) 2005-06-03 2007-01-22 동부일렉트로닉스 주식회사 씨모스 이미지 센서 및 그 제조방법
KR100660865B1 (ko) 2005-06-08 2006-12-26 삼성전자주식회사 이미지 센서에서 공유된 배선/트랜지스터를 가지는 픽셀회로 및 구동 방법
US20070002153A1 (en) 2005-06-29 2007-01-04 Bart Dierickx Hue preservation
US8306362B2 (en) 2005-07-20 2012-11-06 Omnivision Technologies, Inc. Selective pixel binning and averaging based on scene illuminant
US8139130B2 (en) 2005-07-28 2012-03-20 Omnivision Technologies, Inc. Image sensor with improved light sensitivity
US8274715B2 (en) 2005-07-28 2012-09-25 Omnivision Technologies, Inc. Processing color and panchromatic pixels
US7830430B2 (en) 2005-07-28 2010-11-09 Eastman Kodak Company Interpolation of panchromatic and color pixels
US8430809B2 (en) 2005-08-01 2013-04-30 G. I View Ltd. Capsule for use in small intestine
US20070040922A1 (en) 2005-08-22 2007-02-22 Micron Technology, Inc. HDR/AB on multi-way shared pixels
US20070046807A1 (en) 2005-08-23 2007-03-01 Eastman Kodak Company Capturing images under varying lighting conditions
US7829832B2 (en) 2005-08-30 2010-11-09 Aptina Imaging Corporation Method for operating a pixel cell using multiple pulses to a transistor transfer gate
US7315014B2 (en) 2005-08-30 2008-01-01 Micron Technology, Inc. Image sensors with optical trench
US20070052050A1 (en) 2005-09-07 2007-03-08 Bart Dierickx Backside thinned image sensor with integrated lens stack
JP2007086596A (ja) 2005-09-26 2007-04-05 Pentax Corp カメラ
JP2007095917A (ja) 2005-09-28 2007-04-12 Matsushita Electric Ind Co Ltd 固体撮像装置
KR100710210B1 (ko) 2005-09-28 2007-04-20 동부일렉트로닉스 주식회사 씨모스 이미지 센서 및 그 제조방법
KR100775058B1 (ko) 2005-09-29 2007-11-08 삼성전자주식회사 픽셀 및 이를 이용한 이미지 센서, 그리고 상기 이미지센서를 포함하는 이미지 처리 시스템
JP4622790B2 (ja) 2005-10-03 2011-02-02 コニカミノルタホールディングス株式会社 撮像素子および撮像装置
US7978240B2 (en) 2005-10-03 2011-07-12 Konica Minolta Photo Imaging, Inc. Enhancing image quality imaging unit and image sensor
CN101455075B (zh) 2005-10-13 2011-09-14 Rjs科技公司 一种高性能色滤光片马赛克阵列的系统与方法
WO2007051147A2 (en) 2005-10-26 2007-05-03 Capso Vision, Inc. Onboard data storage and method
US7812301B2 (en) 2005-10-28 2010-10-12 Sony Corporation Solid-state imaging device, method of driving solid-state imaging device and imaging apparatus
JP2007150643A (ja) 2005-11-28 2007-06-14 Sony Corp 固体撮像素子、固体撮像素子の駆動方法および撮像装置
US7576404B2 (en) 2005-12-16 2009-08-18 Icemos Technology Ltd. Backlit photodiode and method of manufacturing a backlit photodiode
JP2007180761A (ja) 2005-12-27 2007-07-12 Sanyo Electric Co Ltd 固体撮像素子の駆動方法及び撮像装置
US7821553B2 (en) 2005-12-30 2010-10-26 International Business Machines Corporation Pixel array, imaging sensor including the pixel array and digital camera including the imaging sensor
US20070154202A1 (en) 2006-01-04 2007-07-05 Lee King F Method and apparatus to facilitate correcting rolling shutter images
US7675080B2 (en) 2006-01-10 2010-03-09 Aptina Imaging Corp. Uniform color filter arrays in a moat
US20070159542A1 (en) 2006-01-12 2007-07-12 Gang Luo Color filter array with neutral elements and color image formation
US7688368B2 (en) 2006-01-27 2010-03-30 Eastman Kodak Company Image sensor with improved light sensitivity
US7586139B2 (en) 2006-02-17 2009-09-08 International Business Machines Corporation Photo-sensor and pixel array with backside illumination and method of forming the photo-sensor
US7468504B2 (en) 2006-03-09 2008-12-23 Northrop Grumman Corporation Spectral filter for optical sensor
US7680354B2 (en) 2006-03-22 2010-03-16 Arcsoft, Inc. Image deblur based on two images
JP5000914B2 (ja) 2006-03-30 2012-08-15 日東光学株式会社 映像プロジェクション装置
JP4449936B2 (ja) 2006-03-31 2010-04-14 ソニー株式会社 撮像装置、カメラシステムおよびその駆動方法
KR100785528B1 (ko) 2006-05-01 2007-12-13 (주) 픽셀플러스 넓은 동작 범위를 가지는 이미지 센서 및 이미지 센서의픽셀 어레이
JP5011814B2 (ja) 2006-05-15 2012-08-29 ソニー株式会社 撮像装置、および画像処理方法、並びにコンピュータ・プログラム
US7916362B2 (en) 2006-05-22 2011-03-29 Eastman Kodak Company Image sensor with improved light sensitivity
JP4908067B2 (ja) 2006-06-01 2012-04-04 オリンパス株式会社 固体撮像装置及びそれを用いた撮像装置システム
US7706022B2 (en) 2006-06-12 2010-04-27 Kabushiki Kaisha Toshiba Image forming apparatus and image forming method
JP5106870B2 (ja) 2006-06-14 2012-12-26 株式会社東芝 固体撮像素子
US7561789B2 (en) 2006-06-29 2009-07-14 Eastman Kodak Company Autofocusing still and video images
KR100791336B1 (ko) 2006-08-10 2008-01-07 삼성전자주식회사 이미지 센서 제조 방법
US7649559B2 (en) 2006-08-30 2010-01-19 Aptina Imaging Corporation Amplifier offset cancellation devices, systems, and methods
US8031258B2 (en) 2006-10-04 2011-10-04 Omnivision Technologies, Inc. Providing multiple video signals from single sensor
JP5180086B2 (ja) 2006-10-10 2013-04-10 パナソニック株式会社 波長変換装置および画像表示装置
US7876956B2 (en) 2006-11-10 2011-01-25 Eastman Kodak Company Noise reduction of panchromatic and color image
US8184190B2 (en) 2006-11-28 2012-05-22 Youliza, Gehts B.V. Limited Liability Company Simultaneous global shutter and correlated double sampling read out in multiple photosensor pixels
US20080123997A1 (en) 2006-11-29 2008-05-29 Adams James E Providing a desired resolution color image
US7769229B2 (en) 2006-11-30 2010-08-03 Eastman Kodak Company Processing images having color and panchromatic pixels
US7769230B2 (en) 2006-11-30 2010-08-03 Eastman Kodak Company Producing low resolution images
US7893976B2 (en) 2006-12-01 2011-02-22 Eastman Kodak Company Light sensitivity in image sensors
US7936945B2 (en) 2006-12-18 2011-05-03 Nokia Corporation System, method, device, and computer program product for providing image correction
JP5085140B2 (ja) 2007-01-05 2012-11-28 株式会社東芝 固体撮像装置
US7733931B2 (en) 2007-01-09 2010-06-08 Seiko Epson Corporation Light source device, projector device, monitor device, and lighting device
US8184926B2 (en) 2007-02-28 2012-05-22 Microsoft Corporation Image deblurring with blurred/noisy image pairs
JP4930109B2 (ja) 2007-03-06 2012-05-16 ソニー株式会社 固体撮像装置、撮像装置
US7676146B2 (en) 2007-03-09 2010-03-09 Eastman Kodak Company Camera using multiple lenses and image sensors to provide improved focusing capability
US7729602B2 (en) 2007-03-09 2010-06-01 Eastman Kodak Company Camera using multiple lenses and image sensors operable in a default imaging mode
WO2008118525A1 (en) 2007-03-27 2008-10-02 Sarnoff Corporation Method of fabricating back-illuminated imaging sensors
JP5055026B2 (ja) 2007-05-31 2012-10-24 富士フイルム株式会社 撮像素子、撮像素子の製造方法、及び、撮像素子用の半導体基板
JP4888261B2 (ja) 2007-07-12 2012-02-29 セイコーエプソン株式会社 光源装置、画像表示装置及びモニタ装置
US8896712B2 (en) 2007-07-20 2014-11-25 Omnivision Technologies, Inc. Determining and correcting for imaging device motion during an exposure
US7855740B2 (en) 2007-07-20 2010-12-21 Eastman Kodak Company Multiple component readout of image sensor
US8101981B2 (en) 2007-08-10 2012-01-24 Array Optronix, Inc. Back-illuminated, thin photodiode arrays with isolating etched trenches between elements
CN101408677B (zh) 2007-10-11 2011-07-27 鸿富锦精密工业(深圳)有限公司 立体投影光学系统
US7920193B2 (en) 2007-10-23 2011-04-05 Aptina Imaging Corporation Methods, systems and apparatuses using barrier self-calibration for high dynamic range imagers
KR101388582B1 (ko) 2007-10-26 2014-04-23 삼성디스플레이 주식회사 전기 영동 표시 장치
US7871165B2 (en) 2007-11-30 2011-01-18 Eastman Kodak Company Stereo projection apparatus using polarized solid state light sources
US8085331B2 (en) 2007-12-21 2011-12-27 Panasonic Corporation Solid-state imaging device, driving method thereof, and camera
JP5213670B2 (ja) 2008-01-16 2013-06-19 三洋電機株式会社 撮像装置及びぶれ補正方法
US7999870B2 (en) 2008-02-01 2011-08-16 Omnivision Technologies, Inc. Sampling and readout of an image sensor having a sparse color filter array pattern
US7985612B2 (en) 2008-02-19 2011-07-26 Sri International Method and device for reducing crosstalk in back illuminated imagers
US7667169B2 (en) 2008-05-22 2010-02-23 Omnivision Technologies, Inc. Image sensor with simultaneous auto-focus and image preview
US8035711B2 (en) 2008-05-22 2011-10-11 Panavision Imaging, Llc Sub-pixel array optical sensor
US7807955B2 (en) 2008-05-30 2010-10-05 Eastman Kodak Company Image sensor having reduced well bounce
US20100006908A1 (en) 2008-07-09 2010-01-14 Brady Frederick T Backside illuminated image sensor with shallow backside trench for photodiode isolation
US7915067B2 (en) * 2008-07-09 2011-03-29 Eastman Kodak Company Backside illuminated image sensor with reduced dark current
US7859033B2 (en) 2008-07-09 2010-12-28 Eastman Kodak Company Wafer level processing for backside illuminated sensors
US8017426B2 (en) 2008-07-09 2011-09-13 Omnivision Technologies, Inc. Color filter array alignment mark formation in backside illuminated image sensors
US8211732B2 (en) 2008-09-11 2012-07-03 Omnivision Technologies, Inc. Image sensor with raised photosensitive elements
US8164682B2 (en) 2008-10-14 2012-04-24 Omnivision Technologies, Inc. Dithered focus evaluation
US8184184B2 (en) 2008-12-08 2012-05-22 Omnivision Technologies, Inc. Analog multiplexer configured to reduce kickback perturbation in image sensor readout
US20100149396A1 (en) 2008-12-16 2010-06-17 Summa Joseph R Image sensor with inlaid color pixels in etched panchromatic array
US8174601B2 (en) 2008-12-19 2012-05-08 Omnivision Technologies, Inc. Image sensor with controllable transfer gate off state voltage levels
US8203633B2 (en) 2009-05-27 2012-06-19 Omnivision Technologies, Inc. Four-channel color filter array pattern
US8237831B2 (en) 2009-05-28 2012-08-07 Omnivision Technologies, Inc. Four-channel color filter array interpolation
US20100309340A1 (en) 2009-06-03 2010-12-09 Border John N Image sensor having global and rolling shutter processes for respective sets of pixels of a pixel array
US8125546B2 (en) 2009-06-05 2012-02-28 Omnivision Technologies, Inc. Color filter array pattern having four-channels
US8253832B2 (en) 2009-06-09 2012-08-28 Omnivision Technologies, Inc. Interpolation for four-channel color filter array
KR20110034930A (ko) * 2009-09-29 2011-04-06 삼성전자주식회사 태양 전지 및 그 제조 방법
US8106427B2 (en) 2009-12-21 2012-01-31 Omnivision Technologies, Inc. Image sensor with well bounce correction

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4437112A (en) * 1980-02-15 1984-03-13 Canon Kabushiki Kaisha Solid-state color imaging apparatus
EP0119862A2 (en) * 1983-03-17 1984-09-26 Nec Corporation Solid-state color imaging apparatus
EP0472299A1 (en) * 1990-07-31 1992-02-26 Canon Kabushiki Kaisha Image signal processing apparatus
CN1625231A (zh) * 2003-11-28 2005-06-08 松下电器产业株式会社 固态图像传感器,固态图像传感装置,相机及其方法

Also Published As

Publication number Publication date
CN101233762A (zh) 2008-07-30
JP2013081222A (ja) 2013-05-02
JP2009504005A (ja) 2009-01-29
WO2007015765A2 (en) 2007-02-08
EP1908302A2 (en) 2008-04-09
US8330839B2 (en) 2012-12-11
US20120176521A1 (en) 2012-07-12
EP1908302B1 (en) 2018-09-12
WO2007015765A3 (en) 2007-03-29
US20070024931A1 (en) 2007-02-01
JP5462345B2 (ja) 2014-04-02
US8139130B2 (en) 2012-03-20

Similar Documents

Publication Publication Date Title
CN101233762B (zh) 具有改善的光敏感度的图像传感器
CN101371591B (zh) 具有改进感光度的图像传感器
CN101449575B (zh) 具有改进的光灵敏度的图像传感器
CN101233763B (zh) 处理彩色和全色像素
EP2087725B1 (en) Improved light sensitivity in image sensors
JP5345944B2 (ja) 低解像度画像の生成
JP5603455B2 (ja) カラー画素およびパンクロマティック画素を有する画像の処理
CN101248659A (zh) 在变化照明条件下捕获图像
CN101785319A (zh) 具有带有全色棋盘图案的彩色滤光器阵列的图像传感器

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: FULL VISION TECHNOLOGY CO., LTD.

Free format text: FORMER OWNER: EASTMAN KODAK COMPANY (US) 343 STATE STREET, ROCHESTER, NEW YORK

Effective date: 20110706

C41 Transfer of patent application or patent right or utility model
COR Change of bibliographic data

Free format text: CORRECT: ADDRESS; FROM: NEW YORK STATE, THE USA TO: CALIFORNIA STATE, THE USA

TR01 Transfer of patent right

Effective date of registration: 20110706

Address after: California, USA

Patentee after: Full Vision Technology Co., Ltd.

Address before: American New York

Patentee before: Eastman Kodak Co.

CP01 Change in the name or title of a patent holder

Address after: California, USA

Patentee after: OmniVision Technologies, Inc.

Address before: California, USA

Patentee before: Full Vision Technology Co., Ltd.

CP01 Change in the name or title of a patent holder