CN1678900A - 用于内部光源的3d成像的方法和设备 - Google Patents

用于内部光源的3d成像的方法和设备 Download PDF

Info

Publication number
CN1678900A
CN1678900A CNA038211211A CN03821121A CN1678900A CN 1678900 A CN1678900 A CN 1678900A CN A038211211 A CNA038211211 A CN A038211211A CN 03821121 A CN03821121 A CN 03821121A CN 1678900 A CN1678900 A CN 1678900A
Authority
CN
China
Prior art keywords
light
sample
dimensional representation
light source
source
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA038211211A
Other languages
English (en)
Inventor
D·G·斯蒂尔恩斯
B·W·赖斯
M·D·卡布尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xenogen Corp
Original Assignee
Xenogen Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xenogen Corp filed Critical Xenogen Corp
Publication of CN1678900A publication Critical patent/CN1678900A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/75Systems in which material is subjected to a chemical reaction, the progress or the result of the reaction being investigated
    • G01N21/76Chemiluminescence; Bioluminescence
    • G01N21/763Bioluminescence
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61KPREPARATIONS FOR MEDICAL, DENTAL OR TOILETRY PURPOSES
    • A61K49/00Preparations for testing in vivo
    • A61K49/001Preparation for luminescence or biological staining
    • A61K49/0013Luminescence
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64Fluorescence; Phosphorescence
    • G01N21/645Specially adapted constructive features of fluorimeters
    • G01N21/6456Spatial resolved fluorescence measurements; Imaging
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • G01B11/2518Projection by scanning of the object
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B9/00Measuring instruments characterised by the use of optical techniques
    • G01B9/02Interferometers
    • G01B9/02001Interferometers characterised by controlling or generating intrinsic radiation properties
    • G01B9/02002Interferometers characterised by controlling or generating intrinsic radiation properties using two or more frequencies
    • G01B9/02004Interferometers characterised by controlling or generating intrinsic radiation properties using two or more frequencies using frequency scans
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B9/00Measuring instruments characterised by the use of optical techniques
    • G01B9/02Interferometers
    • G01B9/02015Interferometers characterised by the beam path configuration
    • G01B9/02029Combination with non-interferometric systems, i.e. for measuring the object
    • G01B9/0203With imaging systems
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B9/00Measuring instruments characterised by the use of optical techniques
    • G01B9/02Interferometers
    • G01B9/02041Interferometers characterised by particular imaging or detection techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/25Image signal generators using stereoscopic image cameras using two or more image sensors with different characteristics other than in their location or field of view, e.g. having different resolutions or colour pickup characteristics; using image signals from one sensor to control the characteristics of another sensor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/271Image signal generators wherein the generated image signals comprise depth maps or disparity maps

Abstract

本发明提供了一种用于获得在诸如哺乳动物之类的样本内的一个或多个光源的三维(3D)表示的系统和方法。哺乳动物组织是混浊介质,意味着当光子通过组织传播时都被吸收和散射了。如果与吸收相比较散射更大,例如红色到近红外光穿过组织,那么就用扩散理论来描述光在样本内的传输。使用成像数据和由计算机实现的光子扩散模型,本发明的实施例生成在样本内光源的3D表示,例如这种光源的3D位置、大小和亮度。

Description

用于内部光源的3D成像的方法和设备
技术领域
本发明总体上涉及利用光进行的成像。特别是,本发明涉及用于获得在混浊样本(turbid sample)内光源或光源分布的三维表示的系统和方法,这在生物医学成像和研究应用中尤为有用。
背景技术
生物发光成像是一种非侵入技术,用于在医学研究、病理学和药物发现和开发领域内对动物研究对象执行活体内诊断性研究。生物发光典型地由已经被诸如荧光素酶之类的发光指示器感染的细胞生成,并且可以用作区分特定组织类型(例如瘤)、监视生理机能、跟踪研究对象服用的治疗化合物的分布或疾病的进展。已经证实了大量的应用,包括肿瘤学、传染病和转基因动物领域。用发光指示器来标记细胞的活体内成像是相关的技术,其最近在绿色荧光蛋白(GFP)和诸如Cy5.5之类的近红外(NIR)染料中也已经得到证实。
由生物发光细胞所发射的光子在研究对象的组织中被强烈地散射,以致实际上传播是扩散的。虽然通过组织扩散的许多光子被吸收了,但是小部分会到达研究对象表面并且可以被检测到。一般说来,在哺乳动物组织中的吸收在光谱的蓝绿色部分(<600nm)高,而在光谱的红色和NIR部分(600-900nm)低。萤光虫的荧光素酶具有相当宽的发射光谱范围从500-700nm,因此至少部分发射处于低吸收区域。因为用于在组织中散射的平均自由路径不长,大约~0.5mm,所以来自深源的光子在到达表面之前常常被多次散射。生物发光成像系统实际上记录这些发自研究对象表面的光子的空间分布。
然而,最重要的定量信息并不直接与表面发射相关,而是代之以与在研究对象内的生物发光源有关。重要的参数是源强度(与光发射细胞的数目相关)、位置和几何结构。迄今为止公布的大部分生物发光成像工作涉及单视图2D成像系统的使用。图像分析通常涉及定量在研究对象表面上的光发射感兴趣区域(ROI)。虽然此分析方法简单并且提供了好的光发射的相对测量,但是它没有考虑源深度和所产生的穿过组织的衰减。
因此,有兴趣开发改进的成像系统和重构算法,其会根据在样本(例如动物)表面上测量的图像来提供在所述样本内光子发射的三维分布。
发明内容
本发明提供了用于获得在诸如哺乳动物之类的样本内一个或多个光源的三维(3D)表示的系统和方法。哺乳动物组织是混浊介质,这意味着当光子传播通过组织时即被吸收也被散射。在与吸收相比散射更大的情况下-例如红色到近红外光穿过组织,那么就用扩散理论来描述光在样本内的传输。本发明的实施例,使用成像数据和由计算机实现的光子扩散模型,生成在样本内光源的3D表示,例如这种光源的3D位置、大小和亮度。
在一个方面,本发明涉及一种用于获得在混浊样本内光源分布的三维表示的方法。根据发自所述样本表面的光来提供表面光图像数据,所述光来源于在样本内光源的分布。然后,根据这样提供的表面光图像数据来获得在样本表面内的光数据。在一个具体实施例中,把表面光图像数据转换为刚好在所述样本表面下的光子密度,然后,此光子密度用于获得在所述样本表面内的光数据,由此产生在样本内光源分布的三维表示。
在又一方面,本发明涉及一种用于获得在样本内光源分布的三维表示的成像系统。所述成像系统包括具有一组壁的成像室,所述一组壁围住内腔。所述成像室还包括照相机架和可移动载物台(stage)设备,其中所述照相机架被配置成用于安置照相机。所述可移动载物台设备包括传送机构和载物台,所述载物台被配置为支撑在所述内腔之内的样本。所述载物台与所述传送机构连接,用于把所述样本移动到在所述内腔中多个位置之一。所述成像室还包括用于传送发自样本表面的光的光传输机构。所述成像室还包括处理器,该处理器被设计或配置成根据发自样本表面的光来提供表面光图像数据,所述光来源于在所述样本内光源的分布。还把所述处理器配置为获得在所述样本表面内的光数据,以便根据所述表面光图像数据来获得所述光源分布的三维表示。
在又一方面,本发明涉及一种计算机程序产品。所述计算机程序产品包括计算机可读介质和经由所述计算机可读介质提供的程序指令。所述程序指令包括用于获得位于样本内光源的三维表示的重构指令。所述重构指令能够执行一个或多个上述方法操作。
结合下列附图,下面在本发明的具体实施方式中将要更详细地描述本发明的这些及其它特征。
附图说明
在附图的图中作为举例而不是作为限制说明了本发明,并且在附图中相同的参考数字指的是同样的元,其中:
图1是依照本发明一个实施例的适于生成位于样本内的光源的3D表示的成像系统的透视图。
图2A是依照本发明一个实施例的具有用于使样本的多视图便于进行的内部组件的图1的室的剖视图。
图2B是依照本发明一个实施例的用于使样本的多视图便于进行的图2A的内部组件的透视图。
图2C示出了所述载物台相对于图2A和2B的光传输装置的四个不同的示例位置:0度、90度、180度和270度。
图2D示出了用于获得研究对象表面形貌的结构光投射器的配置。
图3A示出了依照本发明一个实施例在混浊介质中光成像的简化说明。
图3B说明了示出在表面边界处平面近似的示意图。
图3C说明了圆柱体的体积元(体元)和面积元之间的关系。
图4A说明了用于在2D照相机数据和示例性面积元的表面数据之间转换的示例性关系。
图4B-4H说明了对应于图5C的处理流程的结构光成像的图示。图5A说明了依照本发明一个实施例的用于获得在样本内一个或多个光源的3D表示的处理流程。
图5B说明了依照本发明一个实施例的用于使用图1A的成像系统以获得成像数据的处理流程。
图5C说明了依照本发明一个实施例的用于使用图1A的成像系统以获得表面形貌数据的处理流程。
图5D说明了依照本发明一个特定实施例的用于把表面光发射数据转换为在所述表面内的光的处理流程。
图5E和5F表示了用于在仿真老鼠(例如具有嵌入式光纤的塑料老鼠)内点状光源的重构结果。
图6说明了依照本发明一个实施例的示例性的计算机系统。
具体实施方式
在本发明下面的详细说明中,阐述了大量具体实施例以便提供对本发明彻底的理解。然而,正如对那些本领域内技术人员来说显而易见的一样,在没有这些具体细节的情况下或通过使用可替换的元素或过程可以实施本发明。在其它例子中,没有详细描述众所周知的过程、组件和设计,以免不必要地使本发明的特征变得不明显。
1. 成像系统
本发明的3D光重构技术可以在任何适当的系统内加以实现。其中适于实现本发明技术的成像系统的几个实施例还在美国专利申请号09/905,668中进行了描述,所述专利申请由Nilson等人在2001年7月13日提交,题目为Multi-view imaging apparatus(多视图成像设备)。
图1说明了依照本发明一个实施例的适于生成在样本内光源的3D表示的成像系统10。所述成像系统10可以用于各种任务。例如,这些任务可以包括捕获照相的、发光的以及结构光图像。这些任务还可以包括执行各种处理和成像任务,例如获得、分析和处理3D光源表示。
所述系统10一般使用感光照相机对低亮度光源进行成像并加以处理。来自光源的光指的是波长范围在400-950nm的可见到近红外(NIR)光谱部分中任何地方的光子和电磁能量。当然,在系统10中成像并处理的一些亮度不容易被人类视觉所察觉。例如,发自样本的低亮度光的表面辐射度可以在大约103到大约1010光子/秒/平方厘米/球面度之间,其中此范围的下端一般完全在人类检测等级之下。
在所说明的实施例中,所述成像系统10包括适于接收发光样本的成像室,其中将检测诸如基于荧光素酶的荧光之类的低亮度光。高灵敏度照相机20与成像室12耦合,所述照相机20例如是增强或电荷耦合器件(CCD)照相机。所述照相机20能够在成像室12内捕获样本的荧光的、照相的(即基于反射的图像)和结构的光图像。所述照相机20可以可选地由诸如致冷装置22之类的适当的源来冷却,所述致冷装置22经由导管24使低温流体穿过所述照相机循环。
图像处理单元26可选地分别通过电缆30和32在照相机20和计算机28之间连接。可以是任何适当类型的计算机28典型地包括包含硬件的主机36,所述硬件包括处理器、诸如随机存取存储器(RAM)和只读存储器(ROM)之类的存储器组件和磁盘驱动器组件(例如硬盘驱动器、CD、软盘驱动器等)。所述计算机28还包括显示器38和诸如键盘40和鼠标42之类的输入装置。所述计算机2 8经由电缆34与在成像室12中的各种组件通信。作为选择,计算机可以与成像设备集成在单个单元中。
为了向系统10中的组件提供控制和通信,计算机28可以用任何用来控制并监视在系统10中的任何装置的适当的硬件和软件的组合来实现。由计算机28控制的组件可以包括照相机20、负责照相机20聚焦的电动机、照相机镜头、f制光圈、与包括在室12内的可移动载物台耦合的一个或多个电动机等。计算机28还与显示器38通信,用来向用户呈现成像信息并且还担当控制所述成像系统10的接口。
计算机28还包括用于如这里所述的图像处理和数据操作的适当的处理硬件和软件。例如,可以用软件来配置计算机28以使用来自样本表面的光发射测量来构建光源的3D表示。另外,可以把所述计算机28配置成使用2D结构光图像来生成3D表面形貌,所述2D结构光图像取自在内腔中载物台的一个或多个位置。下面进一步描述这些3D光构造技术。作为选择,所述计算机28可以与所述成像系统10的其它组件结合以形成独立的装置。
在一个实施方式中,下面进一步讨论的3D光重构技术需要在整个样本表面上的生物发光表面辐射度和表面形貌测量。因此,所述成像系统还包括用于捕获来自各种视图和位置的样本表面的图像。优选的是,所述成像系统满足下列目标。首先,希望所述照相机保持固定,因为用于冷却照相机的各种电缆和电源线太过笨重以致于在成像期间不能移动。其次,所述样本优选的是在成像期间保持水平。最后,优选地把所述成像系统配置为获得样本的3D表面形貌来作为下面进一步描述的重构技术的输入。可以使用任何适当的硬件和软件的组合来实现这些优选的目标。
图2A和2B说明了依照本发明一个实施例的用于使多视图成像便于进行的室12的各种内部组件。图2A是室12和其内部组件的剖视图,而图2B是依照本发明一个实施例的图2A的内部组件的透视图。在所说明的实施例中,样本位于连同镜子一起旋转的水平透明平台上,所述镜子绕水平光轴旋转以便从各个视角捕获来自所述样本的光,并且把所捕获的光指向照相机以便成像。
如同所示,把可移动载物台设备以载物台204和传送机构202的形式布置在室12(图2A)的内腔中,所述载物台204用于支撑发光样本106,所述传送机构202用于移动所述载物台。光传输装置120被包括,以在其各种位置上收集来自所述样本的光。在图2A和2B所说明的实施例中,以光束252a的形式发自样本的光一般从光传输装置120反射出来为光束252b。所述光传输装置把此反射光252b导过孔径122和透镜262(图2B),以便由照相机20(图1)的检测器264(图2B)捕获图像。
在一个实施方式中,光传输装置120包括把来自在载物台204上样本106的光反射穿过孔径122的斜镜121。外壁123基本上是圆柱形的并且包括孔径122,所述孔径122使光能够从载物台204上的样本106经由镜子121传到成像透镜262(图2B)。光传输装置120的外壁123还防止在室12的内腔中的余光到达透镜262,所述余光不直接与载物台204的当前视角相关联。这通过把镜子121配置得足够长以便跨过载物台204的长度来部分地执行。由于把所述载物台定位在关于所述光传输装置120的固定轴的各种位置上,所以外壁123和镜子121协作来主要地从载物台204的角度方向收集光,然后,把所述光反射向透镜262。
在所说明的实施例中,光传输装置120可旋转地与室12耦合,并且在方向258上绕着固定轴旋转。所述可移动载物台设备具有两个自由度,以在相对于所述光传输装置120的多个位置定位所述载物台204(和样本106)以便捕获来自所述样本不同侧面的光,从而形成所述样本的多视图图像。在没有相对于载物台204重新定位样本姿势的情况下,所述可移动载物台设备允许照相机从不同的视图、角度和位置在所述成像室内捕获所述样本或其部分的图像。图2C示出了所述载物台相对于光传输装置(120)的四个不同的示例位置:0度、90度、180度和270度。
所述可移动载物台设备可以由任何适当的数目、类型和布置的组件来组成,以便实现所述样本的多个定位和观察。在上面引用的Nilson等人的专利申请中描述了多视图成像系统的几个实施例。优选的是,所述可移动载物台设备还包括用于检测所述样本位置的传感器机构,以用于下面进一步描述的后续数据分析过程。
在一个实施例中,在镜子部件120的镜筒(未示出)内提供了光源以照亮在所述成像室12中的样本或标本。所述光源可以连续地照明或闪光以收集样本的照相图像,并且当捕获荧光图像时关闭。
优选的是把结构光发光器集成到用于重构所述样本的表面形貌的系统中。在通常的实施方式中,所述成像系统优选地包括用于从某一角度把方格线投射到所述样本上的机构,所述角度例如正常来说是从20到30度。当方格线遇到有限高度的物体时,则相对于所述平台移动或相移所述方格线。使用用于结构光分析的常规公式,可以根据所述线的相移来确定在所述样本全部表面上的表面形貌数据。所述线距可以基于样本表面纹理和样本大小来变化,但是在每毫米0.5到2线范围内的线距可以适于老鼠样本。较紧密的线距提供了高分辨率,但是在诸如毛皮之类的粗糙表面上所述线更难以被追踪。依照下面所描述的技术使用表面形貌数据来构建3D表示,例如为3D重构设置边界条件。
在具体实施例中,把简单的柯勒投影方案用作结构光源。在这种情况下,可以由扩散LED源来照亮所述划线,并且然后,以大约10x的放大倍数把所述划线投射到动物载物台上。在图2D中示出了该系统合并到系统10中的例子。所述投射器模块170跨在所述旋转镜部件120的后面,以致在所有视角上始终把线投射到所述样本106上。水平地投射所述光照图案并且在较大旋转镜的基部通过小镜子173反射以照亮样本106。
相对于图2A-2D所描述的这种成像系统可以从CA.Alameda的Xenogen公司中获得。尽管图2A-2D说明了用于获得来自样本106相对于照相机20的多个位置的数据的一个系统,但是本发明并不局限于这种系统。
2.  3D源重构
在诸如哺乳动物研究对象之类的许多混浊样本中,由在所述样本内的光源传播并且发自所述样本表面的光在所述样本内部(例如哺乳动物组织)被散射,以致实际上通过所述样本的光传播是扩散的(图3A)。当所述光通过样本扩散时,一些光被吸收了,而一小部分光到达所述样本表面。
通常以单元辐射度规定来自样本表面的光线发射,定义为光子/秒/平方厘米/球面度。校准这里所描述的成像系统以便以单元辐射度来报告表面亮度。使用用于在组织-空气接口处的光子传播模型,所述表面辐射度可以与刚好在样本表面内的光子密度有关。然后,使用扩散模型刚好在所述表面内的光子密度能与在所述样本内发光指示器的分布有关。因此,本发明使由成像系统测量的混浊样本的表面辐射度与在所述样本内发光的分布相关。更具体地说,本发明使用重构技术来生成内部光源的3D表示,所述重构技术利用了发自样本表面的光数据。所述重构技术使用由下列组成的输入数据集:a)样本的表面形貌表示和b)在至少一部分表面上的一组光辐射度的测量(例如表面图像)。为了使处理便于进行,可以把所述表面表示分成表面元,并把所述样本内部分成构成体积元网格的体积元或体元。由所述体积元网格的元来描述在样本内光源的分布。
图3A示出了依照本发明一个实施例的光成像的简化说明。图3A显示了由成像系统10成像的哺乳动物样本302,所述成像系统10使用用于光数据捕获的CCD照相机20。哺乳动物组织和许多其它混浊介质的特性使从在所述样本内的光源305到所述样本表面309传播的光出现光子散射307,导致在表面309上扩散成像。使用光子扩散模型和成像数据,本发明根据一个或多个表面309图像生成光源305的3D位置、大小和亮度。为了方便用户,例如可以经由在图1中的显示器38把3D表示表达为图示。
本发明的一个有益应用是使用表面光发射的一个或多个图像来重构在诸如老鼠之类的活体动物研究对象内的一个或多个生物发光或荧光源、或源分布。这在例如肿瘤学、传染病研究、基因表达研究和毒理学方面得到应用。本发明适用于具有复杂表面的样本,例如动物研究对象(例如老鼠)。这里使用的术语,复杂表面是指不能只用单个多边形描述的任何表面。这里描述的重构技术不对源分布有任何限制,例如在所述样本中的光源数目或所述源的大小和形状,并且不对所述表面的几何结构、大小或形状有任何限制。
在样本表面内的光数据通常指的是在所述样本内部的实际光的数学表示或近似。这可以包括一组点或体积元,每个以3D位置和源强度为特征。在一个实施例中,本发明把样本内部分成体积元,其中每个体积元被认为在其中心包含点光源。然后,这些体积元的立体网格定义了许多点源。这些点源近似于在所述样本内实际光源的分布。例如立方体积元的立体网格是合适的。
图3C说明了被分为体积元的立体网格的说明性的圆柱体,示出了其中的一个立体网格。每个体积元包含点光源314Si,其在表面上产生光子密度316ρj。对于立方体积元表示,所述体积元大小可以依照所述样本大小和所要求解的精确性来变化。一般说来,增加立体网格密度会改善内部光数据表示的精确性。使所述立体网格的密度随样本的体积变化是可能的。特别是,希望增加在光源附近的所述立体网格的密度以在这个区域内提供更精确的表示,而在那些没有发生感兴趣动作的区域内(在对应于没有或最小光产生的区域中)降低所述立体网格的密度。
所述表面表示指的是样本的表面形貌,并且由实际表面的数学描述或近似来将其具体化。所述表面表示不必包括整个样本,而是可以包括与特定成像方案有关的样本的一部分。例如对于老鼠,所述表面表示可以不必包括整个老鼠,例如尾部的末梢部分和每只脚的末梢部分。因此,所述表面表示意指广泛地涉及所述样本的任何表面部分而不必是整个样本。典型地,所述表面表示包括在所述样本上一个或多个表面元或感兴趣区域,其生成与内部光源相关的表面光发射数据。为了方便用户,常常以诸如来源于结构光构造技术的3D描绘之类的图示描绘来显示所述表面表示。
包含所述光源的样本包括某种混浊的内部。在这种情况下的混浊内部是指不允许光无阻碍传输的体积。所述混浊内部可以包括一种或多种介质、结构、固体、液体、气体等。在一个实施例中,为样本建立模型为均匀的,以致在所述样本中的每个典型体积元具有相同的光传输属性的特性。在另一实施例中,把样本表示为不均匀的,以致在所述样品中各种典型的体积元具有不同的光传输属性的特性。在诸如老鼠之类的哺乳动物样本中,例如其内部可以包括组织、骨头、器官等的混合物,其中每一个都可以具有依照非均匀模型的独立的光传输属性的特性。
本发明给出了几种用于根据所述表面光发射来重构在样本内三维光源分布的方法,正如下面将要具体描述的一样。简短地说,首先获得一组结构光和荧光图像,例如利用上述的系统来获得。使用结构光算法重构所述动物的表面形貌并且产生表面网格。令整数j来计数所述表面元。使用一个或多个荧光图像、所述成像系统的方向和表面网格的方向,可以确定刚好在第j个元的表面下的光子密度ρj。刚好在所述表面下的光子密度与发自表面的光强有关(公式1),正如下面将要描述的一样。可以在所述表面内的体积中构造一组体积元。令整数i来计数体积元。在每个体积元Si中的源强度与刚好在所述表面下的光子密度通过格林函数核Gij线性相关,其产生了一组线性方程(公式4),正如下面将要描述的一样。
图5A说明了依照本发明一个实施例的用于获得在样本内一个或多个光源的3D表示的处理流程500。依照本发明的过程可以包括多达几个的附加步骤,这里不描述或说明它们以便不致使本发明变得不明显。
处理流程500使用处理发自样本表面的光数据的3D重构技术。所述重构技术使用其提供关于所述样本几何结构和来自样本表面光发射的空间分布的信息的数据。这可以包括下列数据,所述数据包括a)所述样本的表面表示和b)经由至少一部分表面的光发射的一组测量(例如图像)。用于此数据的一个格式包括(1)定义所述样本表面的表面表示,(2)来自样本表面的一组光发射图像和(3)定义在所述样本和每个图像之间的空间关系的一组参数。
处理流程500从获得用于3D重构技术的输入数据(502和504)开始。例如,处理流程500可以从获得表面表示(502)开始。为了使处理便于进行,可以把表面表示划分为近似于所述样本实际表面的表面元或适当的表面网格(502)。例如,可以由一组相连的多边形定义表面网格,其中每个多边形是表面元。表面元的数目可以依照样本大小和所要求解的精确性来变化。表面元的密度也可以在表面网格上从一点到另一点变化。一般说来,通过增加表面元的数目来改进表面表示的精确性。
处理流程还可以获得来自所述样本的表面光发射数据(504)。对于成像系统10,所述表面光发射数据包含在由照相机20拍摄的图像中。所述图像包括经由一个或多个表面部分的一组光发射的测量。在一个实施例中,根据样本相对于照相机的多视图来获得所述样本的多个图像。在这种情况下,每个图像提供了来自所述样本的表面光发射的不同的二维视图。可以拍摄多个图像以提供来自多个角度的附加数据。
然后,可以把所述图像数据映射回到所述样本表面上。因为照相机生成2D数据,所以依照在样本表面和照相机镜头之间的几何结构来处理所述图像数据以得到表面上的光发射强度(或辐射度)值。
图4A是用于把2D照相机数据转换为用于示例性表面元402的表面数据的说明性的关系。图4A示出了在表面元402、图像404和所述成像系统的入瞳406之间的关系。发自表面元402的光穿过入瞳406并且记录在图像404中。发射相对于表面法线的角度是θ2。所述入瞳406对着小立体角dΩ。成像系统10可以以角度θ2(相对于表面元402的法线来测量)把发自在样本上表面元402的光收集到由入瞳对着的立体角dΩ中。然后,可以使用此信息来把由照相机获得的图像数据转换成对应于表面几何形状的表面发射亮度。
然后,处理流程500把表面光发射数据转换为在所述表面内的光数据以获得三维表示(506)。所述表面发射亮度与刚好在样本表面内的光子密度有关。因此本发明把每个表面元的光发射亮度值转换为刚好在所述表面内的光子密度。再次参照图4A,在表面元处的发射亮度值I(θ2)与在所述表面元下面的光子密度ρ有关。该关系的确切形式取决于用于描述穿过所述表面边界的光子传输的模型。根据分流边界条件[Haskell等人],给出了此关系的一个实施例:
I ( θ 2 ) = c 4 π n 2 T ( θ ) cos θ 2 dΩ [ 1 + 3 2 1 - R eff 1 + R eff cos θ ] ρ - - - ( 1 )
这里c是光速,n是样本介质的折射率,T是光通过表面元离开样本的传输系数,以及θ是内部发射角,其通过Snell定律与外部发射角θ2有关:
nsinθ=sinθ2                      (2)
所述参数Reff是由下列公式计算的平均内部反射系数:
R eff = R φ + R j 2 - R φ + R j
R φ = ∫ 0 π 2 2 sin θ cos θR ( θ ) dθ
R j = ∫ 0 π 2 3 sin θ cos 2 θR ( θ ) dθ
因此,所述内部反射率Reff取决于在表面元下面的介质的折射率。例如在组织中,Reff典型地在0.3-0.5范围内。
因此可以使用公式(1)和(2)来把在每个表面元处测量的表面发射数据转换为在所述表面下面的光子密度值。作为这里所使用的项,下标j计数一组表面元。然后,ρj是在第j个表面元处计算的光子密度值。在图5D中提供了把表面光发射数据转换为在所述表面内的光数据以获得三维表示的进一步描述。
图5B说明了依照本发明一个实施例的用于使用图1的成像系统10来获得成像数据的处理流程520(从处理流程500的504)。处理流程520从把样本放置在成像室12内的载物台204上开始(521),所述样本例如是用于光发射成像的标本或试样。使用计算机28,用户输入用于载物台204的所要求的位置。作为选择,基于自动化数据采集方法,用于载物台204的所要求位置是已知的。传送机构202依照由计算机28提供的控制信号把载物台204移动到所要求的位置(522)。光传输装置120还可以依照由计算机28提供的控制信号重新定位。然后,为捕获样本的照相图像来准备成像室12和相关的图像组件(523)。准备可以包括在计算机28上装入成像和采集软件(例如由CA Alameda的Xenogen公司提供的“LivingImage”)以及初始化照相机20。进一步的准备可以包括关闭门18,激活软件中的照相捕获选项,把照相机20聚焦到所述样本或动物的特定深度,并打开室12中的光。准备还可以包括调照相机20的镜头的焦距,有选择地放置合适的照相机20的镜头滤光镜,设置照相机20的f制光圈等。
然后,捕获照相图像(524)。在可选择的实施例中,在所述样本的照相成像期间使用“实况模式”以实时地观察所述样本。所述实况模式包括频繁地拍摄足够的照相图像序列以模拟实况视频。当完成照相捕获时,把照相图像数据转送到图像处理单元26和/或在计算机系统28中的处理器。可以使用这些来处理并存储所述照相图像数据以及处理所述用于显示在计算机监视器38上的数据。
在一个实施例中,本发明在图像捕获期间使用结构光。因此,随着载物台204在所要求的位置上,可以捕获结构光图像(526)。结构光图像捕获可以使用如上所述的结构光投影系统来完成,并且其还可以包括准备所述结构光投影系统(525)和用于所述结构光图像捕获中的成像系统10的任何其它组件。当完成时,把所述结构光图像数据转送到图像处理单元26和/或在计算机系统28中的处理器,其可以用于构建所述样本的3D表示。
随后,随着载物台204在所要求的位置上或在如先前进行照相或结构光图像的相同位置上,成像设备10为荧光图像捕获作准备(527)。这种准备可以包括使用所述计算机28来选择荧光的曝光时间和等级,并且关掉在室12内的光。当准备好时,所述CCD照相机20然后经由一个设定时段(多达几分钟)来捕获(514)所述荧光图像。把所述荧光图像数据转送到图像处理单元和/或在计算机28中的处理器。
此时,用户可以处理并存储所述荧光图像数据以及处理它以便将其显示在计算机显示器38上。所述操作还可以包括用照相图像来覆盖所述荧光图像以及把这两个图像一起显示作为2D“覆盖”图像,典型地以伪彩色示出所述荧光数据以便示出亮度。如所提及,所述光子发射数据可以表示在照相机20上的特定像素,所述照相机20在图像捕获期间的持续时间上检测光子。然后,此覆盖图像可以用于用户分析的基础;并且可以按要求分析并处理。特别的是,分析可以包括在一部分荧光表示内的像素上的照明量的求和。注意,尽管该论述将集中在用于所述覆盖图像的单个荧光表示,但是处理流程520可以包括从载物台204的相同位置取出多个荧光表示,例如同时或稍后(530)。
然后,可以把载物台204移到第二位置(531)。当所述载物台位于第二位置时,如上所述可以捕获所述样本的一个或多个照相的、结构光和/或荧光图像。可以通过捕获来自所述样本的可替换位置和视图的所述样本的图像来进一步继续图像采集。对于3D重构,可以从许多位置捕获所述样本的照相的、结构光和/或荧光图像。例如,图像捕获可以发生在成像室内样本的从2到200位置的任何地方。图像的优选数目是8,每45度隔开。在一个实施例中,经由计算机28使此过程自动化并控制该过程。
在已经从各种角度捕获适当数目的结构光图像并存储之后,计算机28然后可以处理来自每个角度的结构光数据以产生结构光表示(532)。每个结构光图像提供了所述样本大约半个面的表面形貌。
在另一实施例中,处理流程520和成像设备10使用图像序列来重构所述样本的3D表面形貌。通过从几个视角来获取图像,例如大约每45度,通过把从每个视图获得的部分表面重构”缝合”在一起可以重构所述样本的整个3D表面。然后,可以从不同视角获取图像序列并将其用于重构所述样本的3D表面形貌。还可以把3D表面形貌和图像数据用于重构在所述样本内光源的3D位置、亮度和大小。一旦由处理器28接收所述图像,则对所述数据应用适当的重构算法以获得3D表面形貌。正如本领域的技术人员理解的一样,存在许多用于根据结构光图像来重构表面的算法。例如,可以根据2D傅立叶变换来确定在所述图像上所有点处每条线的相移。在M.Takeda,H.Ina和S.Kobayshi,JOSA72,156-160(1982)的文章题目为“Fourier-transform method offringe-pattern analysis for computer-based topography andinterferometry(用于基于计算机的地形学和干涉量度学的边缘模式分析的傅立叶变换方法)”中详细描述了这种过程。然后,通过“展开”所述相位图来计算实际表面高度。在由D.C.Ghiglia和M.D.Pritt(John Whiley和Sons,纽约,纽约,1998)所写的教科书题目为“Two-Dimensional Phase Unwrapping,Theory,Algorithms,andSoftware(二维相位展开、理论、算法和软件)”中详细描述了此过程。可以一同将所述样本的结构光照相表示和所述样本的荧光表示相组合以形成结构光叠加或3D覆盖图像,典型地以伪彩色示出荧光数据以在视觉上表示亮度的特征。
图5C(从处理流程500的502开始)说明了依照本发明另一实施例的用于使用图1的成像系统10以获得表面形貌数据的处理流程510。图4B-4H说明了对应于处理流程510的结构光成像的图示。
处理流程510从对参考结构光进行成像以生成没有所述样本的图案开始(511和图4B)。这可以通过在成像样本之前把结构光施加到所述样本停放的载物台或表面上来执行。在所述样本的图像捕获期间,把所述载物台移到一般的位置,正如那些在没有所述样本的情况下用于图像捕获的位置。
随后当所述样本处于成像室时,用结构光来使所述样本成像(512和图4C)。结构光使用一连串的光线,所述光线以和表面法线成一定角度(例如大约30度)向下投射到样本上。当所述线越过所述样本时发生弯曲,并且该线的弯曲可用于确定由结构光投射器(例如上述的结构光投射器170)照亮的所有位置上的表面高度。如图2D所示,结构光投射器170被固定在光传输装置120上并与其一起旋转。在这种情况下,结构光投射器170由柯勒照明系统组成,其中幻灯片由光源照亮继而把所述幻灯片的图像投射到所述样本或背景上。投射角度要足够大以便得到在线内的充分的“弯曲”来实现空间分辨率,但是足够小不会出现大的阴影。
然后处理流程510以没有结构光来成像所述样本来进行(513和图4D)。这可以对应于如上所述的照相图像捕获(524)。可以根据2D傅立叶变换来确定在背景和样本上所有点处每条线的相移。
然后把背景数据转换为包裹相位(514和图4E)。这里,在计算包裹相位之前对所述背景数据进行傅立叶变换和滤波。类似地,通过傅立叶变换和滤波所述样本数据、以及计算所述样本数据的包裹相位来把所述样本数据转换为包裹相位(515和图4F)。
然后计算所述样本的表面形貌(516和图4G)。在这种情况下,这通过“展开”所述相位图来执行。为此任务几个展开算法对本领域技术人员来说是可以采用的。例如,可以根据使用傅立叶轮廓测定法技术来确定在所述图像上所有点处每条线的相移。使用这些方法,对所述边缘数据(图4D)进行2D快速傅立叶变换(FFT)来确定在所述图像中各处的线的相移(图4F)。因为对于典型的物体所述相位将移动2□的多倍,所以如图4F所示所述相位显示2□跳跃。“展开”这些相位跳跃以便确定实际的表面。
然后可以根据不同的视图和位置重复(517)上述过程(511-516)。根据多视图来成像样本提供了附加信息,其有助于这里所描述的技术提供更精确的3D表面再现。然后,把根据在所述3D成像系统中的每个视图所获得的多个图像或部分表面一起对准以形成完整的3D表面(518和图4H)。可以通过使用非线性最小二乘拟合技术来完成对准,以使在连接的两个表面上的网格元之间的距离最小化。典型地,所述表面应该具有相当接近于最后对准位置的开始方向。换句话说,用这种方法只可以提供对表面位置的精调。例如,另一对准技术是在图像中提供某种绝对参考线或基准,其给出了任何部分表面相对于所述载物台的绝对位置。如果每个表面的绝对定位足够精确,那么可以跳过上述的非线性拟合法。
图5D说明了依照本发明具体实施例的、用于把表面光发射数据转换为在物体的体积内光源分布的重构的处理流程540。依照本发明的过程可以包括多达几个附加步骤,这里不描述或说明它们以便不致使本发明变得不明显。
处理流程540假定拥有了所述样本表面表示和拥有了来自所述样本的光发射数据。处理流程540从把表面表示划分为表面元开始(541)。表面元的数目将依照样本表面区域和所要求解的精确性来变化。表面元的数目应该足够大以便捕获穿过所述表面的光子密度的细节和变化。例如,在大约100到大约10,000之间的表面元可以适于老鼠。
此外,处理流程540把所述样本内部体积分为体积元(542)。在一个实施例中,每个体积元被认为在其中心包含点光源。然后,这些体积元的立体网格定义了许多点源,这些电源近似于实际光源分布。有时,增加在光源附近的所述立体网格的密度以在此空间内提供增加的信息,而在那些没有发生感兴趣动作(没有光产生或传输)的空间内降低所述立体网格的密度。此外,如下面相对于循环556将要描述的,所述体积元大小可以在获得解期间依照各种自适应建网技术来变化。例如,初始体积元大小可以从大约0.1cm3到大约1cm3变化,并且接近于所述源的体积元的最终体积元大小可以减少从大约1*10-3cm3到大约1*10-2cm3。在特定的例子中,初始体积元大小可以大约是1cm3,而接近于所述源的体积元的最终体积元大小可以降低为大约8*10-3cm3
然后处理流程540在表面元和体积元之间建立关系(544)。在一个实施例中,重构方法使用在表面上的源发射强度和光子密度之间的线性关系。在具体实施例中通过格林函数来描述该线性关系。所述格林函数包含所有关于在所述样本内光子传输的信息,其包括在体积中不均匀性和边界上内部反射的效果。所述格林函数描述了在所述样本内从所述源分布中每点到所述样本每个表面元内的光子传输。
当把在所述样本内的介质假定为均匀的或为其建立模型是均匀之时,格林函数的一个有益的形式是简化的近似,其中把所述样本的表面局部地对待为方向与连接体积元中心和表面元的线垂直的平面界面。使用分流边界条件在表面上的光子密度是在半无限平板中点源的解析解。因为所述解只是在所述体积元和所述表面之间距离的函数,所以在最小的计算代价下可以对所有的体积元和表面顶点对计算简化的格林函数。
利用格林函数Gij描述的在每个体积元中的源强度和在每个表面元的光子密度之间的线性关系,可以通过来自所有体积元的成分之和来估计在第j个表面元处的光子密度:
ρ i ≅ Σ i G ij S i - - - ( 4 )
其中下标i计数所述体积元并且Si是在第i个体积元内的点源的强度值(光子/秒)。
在诸如组织之类的混浊介质中的光传输是由散射来占统治地位的,并且实际上其基本上是扩散的。扩散传输的条件是散射系数μs大于吸收系数μa,以致在光子密度方面的变化在散射事件之间很小。可以由扩散方程来表示由在均匀介质中源功率密度Ui生成的光子密度:
D ▿ 2 ρ - μ a cρ = - U i ( x ‾ ) - - - ( 5 )
其中扩散系数D是
D = c 3 ( μ A + μ ′ s ) - - - ( 6 )
在这种情况下,格林函数是在受到由所述样本表面施加的边界条件下方程(5)的解。对于为样本建立模型是均匀的情况而言,格林函数的有益的近似解使用在所述表面边界上的平面近似。
图3B说明了示出此平面近似的示意图。通过第j个表面元的中心,垂直于连接在xi处的点源和在xj处的表面元的线画出平面边界312。根据分流边界条件,在平面近似中光子密度是在由所述平面边界定义的半无限平板中在xi处的点源的解。在这种情况下,把所述样本表面局部地对待为方向与连接在xi处的源和在xj处表面元的线垂直的简单的平面边界。特别地,把边界条件简化为平面边界情况,尽管所述边界方向可以改变每个表面元。
使用分流边界条件,此简化格林函数是在半无限平板中点源的解析解:
G ij = 1 2 πD { exp ( - μ eff r ij ) r ij - 1 z b exp ( r ij / z b ) E 1 [ ( μ eff + 1 z b ) r ij ] } - - - ( 7 )
这里rij=|xj-xi|,E1是一阶指数积分并且
μeff=[3μAA+μ′s)]             (8)
z b = 2 D c 1 + R eff 1 - R eff - - - ( 9 )
在刚刚描述的简化模型中,所述简化的格林函数只依赖于在所述体积元和表面之间的距离。不必要使用诸如简化近似之类的解析形式来定义格林函数。
本发明不依赖于诸如上述近似之类的解析形式。在另一实施例中,查找表可以定义所述格林函数。可以通过先前测量的在样本(或近似为基本上等于当前样本的类似样本)中的光子传输,或通过使用诸如蒙特卡罗或有限元建模之类的技术计算模拟来创建查找表。这种特殊方法用于由诸如动物研究对象之类的不均匀介质组成的样本。在这种情况下,来自方程8的光学属性μa和μs现在具有空间相关。
上述的平面边界近似对于具有大曲率半径的平滑表面以及对于其中吸收系数不太小(□a>0.1cm-1)的情况用起来最好。上述平面近似技术的优点是计算上方便于解答具有任意复杂边界的扩散方程,例如老鼠。具有更多结构的区域,例如老鼠的头或四肢,可以受益于更精确的边界模型。使用有限元建模代码来计算格林函数是一种获得更精确边界模型的选择。诸如来自PDE Solutions公司的Flex PDE之类的有限元代码例如可以被使用。另一选择将是把平面表面近似依照曲率扩展为一阶,其可以允许继续使用Gij的解析表达式。
一旦确定了格林函数,通过解出线性方程组来获得所述重构,所述线性方程组使在表面上的光子密度与在所述物体内的源分布相关。然后,处理流程540通过求解所有的内部体积元来进行(546)。更具体地说,在给定了上述建立模型的情况下,所述重构技术求解使在表面上的光子密度与在所述样本内的源分布相关的线性方程组。因此,一旦确定了所述格林函数,可以对每个体积元-表面元对计算以便获得所述线性方程组(公式4)。重构方法的最后的步骤是求解线性方程组(4),以得到源强度为Si。返回参考公式(4),因为□已知,并且如上所述可以确定Gij,那么重构技术可以求解Si。典型地没有线性方程组的精确解,因为多个点源只是实际源分布的近似。那么一个适当的重构是所述线性方程组的最优近似解。
在一个实施例中,把线性方程组转换为最优化问题以找到近似解。在这种情况下,使用代价函数来定义所述最优化问题。可以通过源强度之和来表示一个适当的代价函数:
Cost = Σ j S j - - - ( 10 )
所述代价函数受到一个或多个线性约束条件的影响。第一个适当的约束条件集是源强度是正定的:
Si≥0                 (11)
第二个适当的约束条件集是基于所述线性方程组(4)的线性不等式组。它要求遍及所有的所述体积元求和的光子密度的基值小于在每个表面元处的光子密度的测量值:
Σ j G ij S j ≤ ρ i - - - ( 12 )
在具体实施例中,通过使得受到约束条件(11)和(12)影响的代价函数(10)最大化来找到源强度Si的最优解。
然后,处理流程540在解集中求出当前的最优解(550)。可以使用线性分析技术来解决上述最优化问题。一个尤其高效的技术是单纯形(SIMPLEX)法。
可以评价所述解的质量(552)。在一个实施例中,所述估计测量在所观察的光子密度和所计算的光子密度之间的差值。例如,可以使用“χ2”标准:
χ 2 = Σ j [ ρ j - Σ j G ij S i ρ j ] 2 - - - ( 13 )
χ2的值测量在所述样本表面上所观察的光子密度ρi和所计算的光子密度
Figure A0382112100261
之间的差值。
可以把基于表面光发射数据的内部3D光源分布数据的确定嵌入到一个或多个迭代循环中。迭代可以允许体积网格的细分,并且可以允许搜索表面元的最佳采样和最佳加权函数配置。一般说来,通过降低线性方程组的大小来改善重构的收敛性。在一个实施例中,本发明的重构技术反复地改变下列中的一个或多个:体积元配置、表面元配置和/或代价函数配置。
迭代还可以帮助获得解。单纯形法迅速地收敛于解,并且由此具有作为计算上高效的算法的优点。为了帮助单纯形算法找到全局最大值,并因此得到最优解,当系统地改变在所述算法中的关键元时可以重复单纯形计算多次(554)。这可以通过使用改变体积元数目的自适应建网或自适应分格以及通过使用所述表面元的子集来实现。
循环556(图5D)说明了当改变体积元的数目时重复所述求解步骤。典型地,在该问题中减少体积元的数目而维持在所述源附近的体积元的高密度是有益的。这可以通过使用自适应建网来实现。在一个适当的自适应建网应用中,最初把粗略的体积元网格施加到整个样本体积上,并且找到了当前的解(544、546和550),产生Si的初始解。接下来精化(即细分)具有源强度大于零(Si>0)的体积元,并去除那些源强度等于零(Si=0)的体积元。然后,可以重复地迭代解的获得和体积元网格细分,生成局部化于源区域的高密度体积元网格。在每次迭代期间,估计当前解的质量(552)。在具体实施例中,继续该迭代过程直到进一步的细分对χ2的值不会产生显著的下降。
通过改变用于获得该三维表示的表面元的数目NS可以获得附加的迭代改进(循环555)。使用表面网格的表面元的子集降低了在该问题中的约束条件的数目,这可以简化解的计算。表面元的数目可以用来均匀地样所述表面。在这种情况下,处理流程540迭代对应于在不同的密度处采样所述表面元网格的NS的不同值,并且使用质量评价(552)来确定在不同NS值之间的最优解。例如,如果对于小老鼠来说表面元的数目在大约100和大约300个表面元之间,则迭代步长大小在大约10和50之间也可以是适当的。
另一迭代循环改变代价函数来改善解的获取。例如,可以修改所述代价函数以包括加权系数Wi
Cost = Σ i S i / W i r , W i = Σ j G ij - - - ( 14 )
所述加权系数Wi是经由整个表面的光子密度的第i个体积元的基值。指数γ调整内部体积元和那些接近于所述表面的体积元的代价函数的相对基值。当γ=0时,那么所述内部体积元具有相对较大的权重。当γ=1时,接近表面的体积元具有较大的权重。当改变γ时可以迭代处理流程540来搜索其中所述源接近和远离所述表面的解。例如,对于γ从0到1的范围可以按照大约0.01到大约0.2来改变步长大小。在具体实施例中,对于γ从0到1的范围可以改变步长大小大约0.05。可以再次使用质量评价(552)来识别所述最优解。
在具体实施例中,把单纯形计算嵌入在由两个最优化循环组成的搜索例行程序中。内循环使用自适应分格来最优化所述体积网格的配置。外循环搜索参数NS和γ的最优值。使用χ2标准来检验所述搜索算法的每个步骤。把全局解定义为最小化χ2的一个解。
图5E和5F表示用于在仿真老鼠(例如具有嵌入式光学纤维的橡胶老鼠)内的一个点状光源的重构结果。图5E说明了以两个不同的角度在仿真老鼠702a和702b内的重构源分布。示出的表面表示以最大源强度的一半的等值面的轮廓。图5F示出了直接在仿真老鼠702的表面下面的光子密度的图像(例如708a和708b)。第一行706a是所测量的光子密度的对数。第二行706b是根据所述重构源分布而计算的模拟光子密度的对数。第三行706c是第一和第二行的差值。
尽管为了加快处理已经用许多简化来描述处理流程500、510、520和540,但是本发明并不受这些简化计算方法的限制。例如,可以在没有上述许多简化的情况下计算所述格林函数,甚至以增加计算需要为代价。此外,虽然处理流程500、510、520和540基于在图1-2E中说明的系统描述了获得来自所述样本的光发射测量的特定方法,但是本发明的3D重构技术不局限于如何获得2D光发射数据或任何特定设备的使用。实际上,可以使用不同于上述相对于图1-2E的成像设备,例如在共同拥有的待决的专利申请序号为09/905,668中描述的成像设备。此外,可以从独立源获得2D光发射数据并且将其存为在计算机28内的数据,而不必作为经由补充的或局部成像系统成像的结果来生成。
此外,尽管至此已经相对于生物发光源描述了本发明,但是可以使用本发明来获得任何类型光源的3D重构,所述任何类型光源包括一个或多个荧光源。对于荧光源,可以改变在所述表面元和体积元之间的关系(544)。例如,可以把在线性方程组中的格林函数乘以第二格林函数,所述第二格林函数描述了激发光从样本表面到体积元的传输。在特定的近似中,可以把在线性方程组(4)中的格林函数修改为两个格林函数的乘积:
Gij=Gi EGij F              (15)
第一格林函数Gi E描述了激发光从在样本表面上的激发源到第i个体积元的传输。第二格林函数Gij F描述了荧光从第i个体积元到第j个表面元的传输。可以在均匀介质情况下根据诸如上述简化的近似之类解析表达式或在不均匀介质情况下根据查找表来确定这两个格林函数。所述激发和荧光典型地处于不同的波长,并且从而所述荧光不激发额外的荧光。线性方程组(4)仍然有效,并且可以如上概述使用处理流程540来确定荧光源分布。
本发明还非常适合于处理在输入图像中的噪声。任何实际的成像系统将具有有限的动态范围并且受到噪声源的影响。这可以损害在所述重构中用作输入数据的图像保真度,并且从而可以降低3D表示的质量。为此,本发明还可以包括设计来当所述输入图像是有噪声的和/或具有有限动态范围时改善其性能的技术。
当成像来自嵌入在组织中的源的生物发光时有限的动态范围尤为明显,因为光发射亮度在穿过样本表面时典型地在许多数量级上改变。如果所述成像照相机强加有限的动态范围并把最高亮度区域设置为照相机的上限,那么可能在图像中存在其中发射亮度降到所述动态范围底部之下的区域。将把所述图像的这些区域接收为噪声;并且对应于“固有噪声”。
这里提供的重构技术把表面光发射的图像映射到三维样本上以确定在表面下光子密度的值。由于在所述图像中的噪声,重构技术只映射那些在固有噪声之上的图像的区域。这可以通过为每个图像定义阈值来实现,所述阈值是峰值亮度的一小部分。在一个实施例中,所述阈值与峰值亮度和照相机的动态范围有关。在具体实施例中,所述阈值可以比由峰值亮度除以动态范围所表示的数目大。例如,如果照相机的动态范围是1000并且图像中的峰值亮度是IP,那么所述阈值的适当值可以是IP/500。只把在所述阈值之上的图像的区域映射到所述样本上;而不使用那些在所述阈值之下的区域。结果,在完成映射之后会有空的样本表面的区域存在,也就是说,这些区域没有与所述表面网格相关联的光子密度值。典型地,这些将趋向于是最远离生物发光源的表面部分。
处理流程540解决下列最优化问题:根据所计算的光子密度小于在表面处处测量的光子密度的约束条件来最大化总的源强度。然而,处理流程540还可以解决表面空的部分。这是因为当光子密度是未知的时,对于那些接近空的区域的体积元去除在源强度上的约束条件。因此,可能没有充足的信息来确定在那些体积元中的源强度。处理流程540的变型由消除在体积方格中的体积元组成,所述体积元没有足够地被现有的光子密度信息约束。这可以通过把体积元的基值与在空的和非空的表面区域中的光子密度相比较来实现。例如,如果P和Q分别表示由空的和非空的区域组成的表面元集,那么用于去除来自所述体积方格的第i个体积元的标准是:
&Sigma; j &Element; Q G ij < &kappa; &Sigma; j &Element; P G ij - - - ( 16 )
常数K可以具有在1-10范围内的值。在形成初始体积方格(542)和每次迭代期间把标准(16)应用于每个体积元,如果使用迭代的话。
除具有有限的动态范围之外,真实图像可以包含噪声。一个最小噪声成分可以通过散粒(泊松)噪声来表示,所述散粒噪声与在每个图像像素中离散的许多光子的采样相关联。当散粒噪声占优时,在所述图像中的信噪比随亮度的平方根而改变。这样我们就可以假定最高亮度的区域,或相当于具有最高光子密度的表面的那些区域应该具有相对最小量的噪声。为了解决此噪声,可以改变解质量的评价(552)。例如,可以修改表达式(13)来解决噪声。更具体地说,可以用系数光子密度ρi来加权总和中的每一项以变为:
&chi; 2 = &Sigma; j 1 &rho; j [ &rho; j - &Sigma; i G ij S i ] 2 - - - ( 17 )
典型地由适当的处理器或基于计算机的设备来实现本发明的重构技术。参照图6,示例性的计算机系统350包括中央处理器(CPU)352、只读存储器(ROM)354、随机存取存储器(RAM)356、扩展RAM358、输入/输出(I/O)电路360、显示部件362、输入装置364和扩展总线366。计算机系统350还可以选择性地包括诸如磁盘驱动器单元之类的大容量存储单元368或诸如闪速存储器之类的非易失存储器和实时时钟360。
不管计算机系统350的配置是怎样的,其可以使用一个或多个存储器或存储器模块,所述存储器或存储器模块被配置为存储用于获得位于样本内光源的三维表示和这里描述的本发明的其它功能的程序指令。还可以把这种一个或多个存储器配置为存储数据结构、成像数据或这里描述的其它特定的非程序信息。
因为可以使用这种信息和程序指令来实现这里描述的系统/方法,所以本发明涉及包括用于执行这里描述的各种操作的程序指令、状态信息等的机器可读介质。机器可读介质的例子包括但不局限于:诸如硬盘、软盘和磁带之类的磁介质;诸如CD-ROM盘片之类的光学介质;诸如可光读的盘片之类的磁光介质;以及专门配置为存储并执行程序指令的硬件装置,例如只读存储器装置(ROM)和随机存取存储器(RAM)。还可以用通过诸如无线电波、光线路、电线路等之类的适当介质传播的载波来使本发明具体化。程序指令的例子包括例如由编译器生成的机器代码和包含高级编码的文件,所述高级编码可以由计算机使用解释器来执行。
应当记住,尽管为了使论述便于进行这里相当详细地论述了计算机系统350,但是可以使用各种适当的计算机实现技术来实施本发明。一般说来,可以使用任何适当的计算机系统以便获得位于样本内光源的三维表示。此外,可以经由诸如局域网(LAN)、广域网(WAN)或诸如因特网的全球计算机网络之类的计算机网络来实现这里公开的发明的重构技术。在后一种情况中,可以把所述重构技术至少部分地实现为可下载的计算机软件和数据(例如诸如来自Sun Microsystems公司的JAVATM小应用程序(applet)的小应用程序)。可下载的计算机软件和数据可以保存在网络上的一个或多个服务器中,其可由有能力并被授权这种访问的任何客户端计算机或末端来访问。在现有技术中网络计算技术和实现是众所周知的,并且为了简便起见这里没有非常详细地进行讨论。
虽然按照几个优选实施例已经描述了本发明,但是存在属于本发明范围的修改、置换和等价物,为了简便起见省去了这些。例如,可以在一个或多个不同的波长获得并分析图像。因此意图是应该参考附加权利要求来确定本发明的范围。

Claims (52)

1.一种用于获得在样本内光源分布的三维表示的方法,所述方法包括:
提供来自发自所述样本表面的光的表面光图像数据,所述光来源于位于在所述样本内光源的分布;以及
根据所述表面光发射数据重构在所述样本内光源分布的三维表示。
2.如权利要求1所述的方法,还包括获得所述样本的表面形貌表示。
3.如权利要求2所述的方法,还包括把所述表面形貌表示划分为一组表面元。
4.如权利要求3所述的方法,其中每个表面元近似为平面。
5.如权利要求3或4所述的方法,还包括在所述样本内创建一组体积元。
6.如权利要求5所述的方法,其中为每个体积元建立模型以便使在它的中心包含一个点光源。
7.如权利要求6所述的方法,其中用一组点光源来近似所述光源分布的三维表示。
8.如权利要求5至7中任何一个所述的方法,还包括把所述表面光图像数据转换为刚好在所述样本表面内的光子密度。
9.如权利要求8所述的方法,其中在一个给定的体积元中的光源发射强度和刚好在表面元内的光子密度之间存在线性关系。
10.如权利要求5至9中任何一个所述的方法,还包括定义一个代价函数和一组约束条件,用于获得光源分布的三维表示的解。
11.如权利要求10所述的方法,其中所述代价函数与在所述样本中每个点源的源强度之和有关,所述约束条件包括下列条件:(i)所述源强度是正定的;并且(ii)由点源分布生成的、在物体表面作为结果的光子密度处处小于所测量的表面光子密度。
12.如权利要求11所述的方法,其中获得三维表示使得受所述约束影响的所述代价函数最大化。
13.如权利要求10至12中任何一个所述的方法,其中在数学上用线性方程系统描述所述代价函数和约束条件,并且使用单纯形法来获得源分布的三维表示的解。
14.如权利要求10至13中任何一个所述的方法,还包括在所述代价函数中包括加权系数,可以改变所述加权系数以生成所述源分布的三维表示的一组解。
15.如权利要求10至14中任何一个所述的方法,还包括改变表面元的数目以生成所述源分布的三维表示的一组解。
16.如权利要求5至15中任何一个所述的方法,还包括改变下列中之一:a)体积元的数目;和b)体积元的配置,以便生成所述源分布的三维表示的一组解。
17.如权利要求5至15中任何一个所述的方法,还包括通过计算每个解的表面光发射并选择使在所计算和所测量的表面发射之间的差值最小化的解来最优化光源分布的三维表示。
18.如权利要求16或17所述的方法,其中改变体积元的数目和改变体积元的配置这二者均包括自适应建网。
19.如权利要求18所述的方法,其中所述自适应建网增加用于描述所述光源的三维表示的体积元的数目。
20.如权利要求19所述的方法,其中所述自适应建网去除具有零光源强度的体积元。
21.如权利要求5至20中任何一个所述的方法,其中用格林函数描述光在所述样本内从给定的体积元到给定的表面元的传输。
22.如权利要求21所述的方法,其中把所述格林函数定义为光在均匀的半空间中扩散的解,所述均匀的半空间具有垂直于把体积元和表面元相连接的线的平面边界。
23.如权利要求21或22所述的方法,其中所述样本内部近似为不均匀的。
24.如权利要求21至23中任何一个所述的方法,其中在查找表中定义所述格林函数。
25.如权利要求21至23中任何一个所述的方法,其中使用蒙特卡罗模拟或有限元建模来计算所述格林函数。
26.如权利要求1至25中任何一个所述的方法,其中所述光源由生物发光或荧光发射组成。
27.如权利要求1至26中任何一个所述的方法,还包括把噪声阈值施加到表面光图像数据上。
28.如权利要求27所述的方法,其中所述噪声阈值与在所述表面光图像数据中的峰值亮度和在所述表面光图像数据中的动态范围之一有关。
29.如权利要求28所述的方法,其中所述噪声阈值与除以在所述表面光图像数据中的动态范围的所述表面光图像数据中的峰值亮度有关。
30.如权利要求27所述的方法,其中把所述表面表示划分为一组表面元,并且去除所有具有在所述噪声阈值之下的表面发射的表面元。
31.如权利要求1至30中任何一个所述的方法,其中所述样本是动物,所述光源发射穿过动物组织的光。
32.如权利要求31所述的方法,其中所述动物组织近似于均匀的。
33.如权利要求1至32中任何一个所述的方法,其中所述样本具有复杂的边界。
34.如权利要求1至33中任何一个所述的方法,还包括生成所述光源的多个可能的三维表示,并且所获得的所述光源的三维表示是最适合于所测量的表面光图像数据的表示。
35.如权利要求1至35中任何一个所述的方法,还包括把所述样本放置在纳入成像室的载物台上,所述成像室与照相机相耦合,所述照相机被配置为捕获所述载物台上样本的图像。
36.如权利要求34所述的方法,还包括:
把所述载物台移动到所述成像室中的第一位置;以及
使用所述照相机从第一位置捕获所述样本的第一图像集。
37.如权利要求35所述的方法,其中第一图像集由荧光图像、结构光图像和照相图像组成。
38.如权利要求34所述的方法,还包括:
把所述载物台移动到在所述成像室中的一个或多个其它位置,其中所述其它位置相对于与所述照相机相关联的固定基准的角度与相对于第一位置的角度不同;以及
使用所述照相机从所述其它位置捕获所述样本的附加的图像集。
39.如权利要求38所述的方法,其中获得所述表面表示包括:根据包括在一个或多个结构光图像内的结构光数据来构建所述样本的形貌表示。
40.如权利要求34所述的方法,其中以一个或多个不同波长来获得所述表面光图像数据。
41.一种用于获得位于样本内光源的三维表示的成像系统,所述成像系统包括:
具有一组壁的成像室,所述壁围住一个内腔,所述成像室包括:
配置为安置照相机的照相机架;
可移动载物台设备,包括一个传送机构和一个载物台,所述载物台被配置成支撑所述内腔之内的样本,所述载物台与所述传送机构耦合以便把所述样本移动到在所述内腔中多个位置之一;
用于把发自所述样本表面的光传送到所述照相机的光传输机构;以及
处理器,被设计或配置成提供来自发自所述样本表面的光的表面光图像数据,以便根据所述表面光图像数据来获得内部光源分布的三维表示,其中所述光来源于在所述样本内光源的分布。
42.如权利要求41所述的系统,其中还把所述处理器配置为根据由所述照相机接收的结构光数据来构建所述样本的表面形貌表示。
43.如权利要求41或42所述的系统,其中所述传送机构能够在二维空间移动所述载物台。
44.如权利要求41至43中任何一个所述的系统,其中所述光传输装置绕固定轴旋转。
45.如权利要求41至44中任何一个所述的系统,还包括配置为把结构光传送到所述样本上的结构光源。
46.如权利要求45所述的系统,其中所述结构光源,在结构光到达所述样本之前,把所述结构光传送到镜子上。
47.如权利要求41至46中任何一个所述的系统,其中所述光源由生物发光或荧光发射组成。
48.一种包括计算机可读介质和经由所述计算机可读介质提供的程序指令的计算机程序产品,所述程序指令包括用于获得在样本内光源分布的三维表示的重构指令,所述重构指令能提供来自发自所述样本表面的光的表面光图像数据,并且根据所述表面光图像数据获得所述光源分布的三维表示,其中所述光来源于在所述样本内光源的分布。
49.如权利要求48所述的计算机程序产品,还包括用于显示所述光源分布的三维表示的指令。
50.如权利要求48或49所述的计算机程序产品,还包括用于把由照相机接收的光图像数据映射到所述样本的表面表示上的指令。
51.如权利要求50所述的计算机程序产品,还包括用于把所述表面表示划分为一组表面元的指令。
52.如权利要求48至51中任何一个所述的计算机程序产品,其中所述光源由生物发光或荧光发射组成。
CNA038211211A 2002-07-16 2003-07-15 用于内部光源的3d成像的方法和设备 Pending CN1678900A (zh)

Applications Claiming Priority (8)

Application Number Priority Date Filing Date Title
US39645802P 2002-07-16 2002-07-16
US39631302P 2002-07-16 2002-07-16
US39535702P 2002-07-16 2002-07-16
US60/396,313 2002-07-16
US60/396,458 2002-07-16
US60/395,357 2002-07-16
US10/606,976 US7616985B2 (en) 2002-07-16 2003-06-25 Method and apparatus for 3-D imaging of internal light sources
US10/606,976 2003-06-25

Publications (1)

Publication Number Publication Date
CN1678900A true CN1678900A (zh) 2005-10-05

Family

ID=30119337

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA038211211A Pending CN1678900A (zh) 2002-07-16 2003-07-15 用于内部光源的3d成像的方法和设备

Country Status (10)

Country Link
US (5) US7616985B2 (zh)
EP (1) EP1521959B1 (zh)
JP (1) JP2006513400A (zh)
CN (1) CN1678900A (zh)
AT (1) ATE480764T1 (zh)
AU (1) AU2003249299A1 (zh)
CA (1) CA2492483A1 (zh)
DE (1) DE60334098D1 (zh)
IL (1) IL166262A0 (zh)
WO (1) WO2004008123A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102144154A (zh) * 2008-10-01 2011-08-03 东卡莱罗纳大学 用结构入射光测定混浊介质光学特征的方法与系统
CN104853669A (zh) * 2012-10-15 2015-08-19 文森医学公司 具有荧光及生物发光源的交叉形态加权特征的漫射介质成像的系统、方法及设备

Families Citing this family (59)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7383076B2 (en) * 2000-11-27 2008-06-03 The General Hospital Corporation Fluorescence-mediated molecular tomography
CA2447262A1 (en) 2001-05-17 2002-11-21 Xenogen Corporation Method and apparatus for determining target depth, brightness and size within a body region
US7298415B2 (en) 2001-07-13 2007-11-20 Xenogen Corporation Structured light imaging apparatus
US6922246B2 (en) * 2002-02-22 2005-07-26 Xenogen Corporation Bottom fluorescence illumination assembly for an imaging apparatus
US7474399B2 (en) * 2002-02-22 2009-01-06 Xenogen Corporation Dual illumination system for an imaging apparatus and method
US7474398B2 (en) * 2002-02-22 2009-01-06 Xenogen Corporation Illumination system for an imaging apparatus with low profile output device
WO2003102558A1 (en) 2002-06-04 2003-12-11 Visen Medical, Inc. Imaging volumes with arbitrary geometries in contact and non-contact tomography
US7616985B2 (en) * 2002-07-16 2009-11-10 Xenogen Corporation Method and apparatus for 3-D imaging of internal light sources
US7599731B2 (en) * 2002-07-16 2009-10-06 Xenogen Corporation Fluorescent light tomography
WO2004072906A1 (en) 2003-02-05 2004-08-26 The General Hospital Corporation Method and system for free space optical tomography of diffuse media
WO2004081865A2 (en) * 2003-03-10 2004-09-23 University Of Iowa Research Foundation Systems and methods for bioliminescent computed tomographic reconstruction
US7190991B2 (en) 2003-07-01 2007-03-13 Xenogen Corporation Multi-mode internal imaging
WO2005057488A2 (en) * 2003-12-03 2005-06-23 Anticancer, Inc. Modular system for multi-color, whole body fluorescence imaging
WO2006009786A2 (en) * 2004-06-18 2006-01-26 Elmaleh David R Intravascular imaging device and uses thereof
JPWO2006057393A1 (ja) * 2004-11-26 2008-06-05 オリンパス株式会社 発光試料撮像方法、発光細胞撮像方法および対物レンズ
US7477931B2 (en) * 2004-12-06 2009-01-13 Cambridge Research & Instruments, Inc. Systems and methods for in-vivo and optical imaging and measurement
US8044996B2 (en) * 2005-05-11 2011-10-25 Xenogen Corporation Surface construction using combined photographic and structured light information
DE102005045907B4 (de) * 2005-09-26 2014-05-22 Siemens Aktiengesellschaft Vorrichtung zur Darstellung eines einen Fluoreszenzfarbstoff enthaltenden Gewebes
EP1934583A1 (fr) * 2005-10-10 2008-06-25 Biospace Lab Dispositif et procede d'imagerie en luminescence
FR2891924B1 (fr) * 2005-10-10 2007-12-28 Biospace Mesures Dispositif et procede d'imagerie en luminescence
JP2007183425A (ja) * 2006-01-06 2007-07-19 Olympus Corp 観察装置
EP2021774B1 (en) * 2006-05-15 2016-07-27 Xenogen Corporation A system comprising a dual illumination system and an imaging apparatus and method using said system
EP1865430A3 (en) * 2006-06-05 2009-09-23 Cambridge Research & Instrumentation, Inc. Monte Carlo simulation using GPU units on personal computers
US10335038B2 (en) 2006-08-24 2019-07-02 Xenogen Corporation Spectral unmixing for in-vivo imaging
US10775308B2 (en) * 2006-08-24 2020-09-15 Xenogen Corporation Apparatus and methods for determining optical tissue properties
US20080218727A1 (en) * 2006-12-22 2008-09-11 Art, Advanced Research Technologies Inc. Method and apparatus for optical image reconstruction using contour determination
US8279329B2 (en) * 2007-04-10 2012-10-02 University Of Rochester Structured illumination for imaging of stationary and non-stationary, fluorescent and non-fluorescent, objects
FR2920874B1 (fr) * 2007-09-10 2010-08-20 Biospace Lab Installation et procede d'imagerie en luminescence
US8031924B2 (en) * 2007-11-30 2011-10-04 General Electric Company Methods and systems for removing autofluorescence from images
JP5257891B2 (ja) * 2007-12-05 2013-08-07 富士フイルム株式会社 画像処理システムおよびプログラム
WO2009081498A1 (ja) * 2007-12-26 2009-07-02 Shimadzu Corporation 生体画像取得装置
JP5239472B2 (ja) * 2008-04-11 2013-07-17 株式会社島津製作所 蛍光イメージング装置
FR2930420B1 (fr) * 2008-04-24 2010-06-04 Centre Nat Rech Scient Procede et systeme non invasif de detection et d'evaluation de l'activite electrophysiologique neuronale
JP4998618B2 (ja) * 2008-05-15 2012-08-15 株式会社島津製作所 生体画像撮影装置
US8401619B2 (en) * 2009-09-22 2013-03-19 Visen Medical, Inc. Systems and methods for virtual index-matching of diffusive media
DE102010007396B4 (de) * 2010-02-03 2013-10-02 Carl Zeiss Oim Gmbh Verfahren und Vorrichtung zum optischen Inspizieren eines Prüflings mit einer zumindest teilweise reflektierenden Oberfläche
US9693728B2 (en) 2010-06-29 2017-07-04 Lucidux, Llc Systems and methods for measuring mechanical properties of deformable materials
US20120041302A1 (en) * 2010-08-16 2012-02-16 Caliper Life Sciences, Inc. Portable imaging subject cartridge
WO2012030973A2 (en) 2010-09-01 2012-03-08 Spectral Instruments Imaging, LLC Methods and systems for producing visible light and x-ray image data
JP2013538350A (ja) 2010-09-01 2013-10-10 スペクトラル・インストゥルメンツ・イメージング・エルエルシー 励起光源組立体
CN101947103B (zh) * 2010-09-20 2012-03-28 西安电子科技大学 全光学生物发光断层成像方法
US8729502B1 (en) 2010-10-28 2014-05-20 The Research Foundation For The State University Of New York Simultaneous, single-detector fluorescence detection of multiple analytes with frequency-specific lock-in detection
CN102831642B (zh) * 2011-01-27 2014-04-23 深圳泰山在线科技有限公司 一种物体表面重建的系统和方法
CN102867329B (zh) * 2011-01-27 2014-04-23 深圳泰山在线科技有限公司 一种物体表面重建的系统和方法
CN102867328B (zh) * 2011-01-27 2014-04-23 深圳泰山在线科技有限公司 一种物体表面重建的系统
US9314218B2 (en) 2011-06-20 2016-04-19 Caliper Life Sciences, Inc. Integrated microtomography and optical imaging systems
CN102319058B (zh) * 2011-09-09 2013-03-06 清华大学 一种融合荧光、核素和x光三模态的小动物成像系统
US20150078642A1 (en) * 2012-04-24 2015-03-19 The General Hospital Corporation Method and system for non-invasive quantification of biologial sample physiology using a series of images
US10169909B2 (en) * 2014-08-07 2019-01-01 Pixar Generating a volumetric projection for an object
KR101610148B1 (ko) * 2014-11-17 2016-04-08 현대자동차 주식회사 차체 검사 시스템 및 방법
US10595794B2 (en) 2015-07-09 2020-03-24 Auburn University Devices and methods for facilitating imaging of rotating animals, specimens, or imaging phantoms
JP6617978B2 (ja) * 2017-04-07 2019-12-11 株式会社島津製作所 光イメージング装置
US11200698B2 (en) 2017-06-01 2021-12-14 Germaine Laboratories, Inc. Devices and systems for data-based analysis of objects
US9983117B1 (en) * 2017-06-01 2018-05-29 Germaine Laboratories, Inc. Devices and systems for image-based analysis of test media
US10275681B2 (en) 2017-06-01 2019-04-30 Germaine Laboratories, Inc. Devices and systems for image-based analysis of test media
EP3773153A4 (en) * 2018-03-30 2021-11-17 Perkinelmer Health Sciences Inc. SYSTEMS AND METHODS FOR THREE-DIMENSIONAL (3D) RECONSTRUCTION OF ORGANS AND ANATOMIC INCLUSIONS USING SHORT WAVELENGTH INFRARED PROJECTION (SCRI) TOMOGRAPHY
US11181464B2 (en) * 2018-06-19 2021-11-23 Becton, Dickinson And Company Variable multiplexing switches for detector arrays, systems and methods of use thereof
CN109856092B (zh) * 2018-11-22 2021-08-31 上海无线电设备研究所 一种海洋荧光探测半解析蒙特卡罗模拟方法
FR3131376B1 (fr) * 2021-12-29 2023-11-10 Commissariat Energie Atomique Procédé d’estimation d’une distribution spatiale tridimensionnelle de fluorescence, à l’intérieur d’un objet.

Family Cites Families (112)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE2910178C2 (de) 1979-03-15 1981-02-26 Georg Menshen & Co Kg, 5950 Finnentrop Originalitäts-Schraubverschluß für Flaschen u.dgl
JPS60256443A (ja) 1984-05-31 1985-12-18 オムロン株式会社 画像計測装置
US4761071A (en) * 1984-11-06 1988-08-02 Baron William S Apparatus and method for determining corneal and scleral topography
US4687352A (en) 1984-12-29 1987-08-18 Brother Kogyo Kabushiki Kaisha Printer with an image reader
US4772453A (en) 1985-03-01 1988-09-20 Lisenbee Wayne F Luminiscence measurement arrangement
US4687325A (en) 1985-03-28 1987-08-18 General Electric Company Three-dimensional range camera
US5205291A (en) * 1988-11-08 1993-04-27 Health Research, Inc. In vivo fluorescence photometer
JP2970967B2 (ja) 1991-11-20 1999-11-02 浜松ホトニクス株式会社 蛍光性プローブ試薬を用いた細胞内イオン濃度測定法
FR2684092B1 (fr) * 1991-11-21 1994-03-04 Pechiney Recherche Procede de preparation de carbures metalliques a grande surface specifique a partir de mousses de carbone activees.
US5242441A (en) 1992-02-24 1993-09-07 Boaz Avitall Deflectable catheter with rotatable tip electrode
JP3107914B2 (ja) 1992-07-20 2000-11-13 浜松ホトニクス株式会社 散乱吸収体内部の吸収情報計測装置及び方法
US5452723A (en) 1992-07-24 1995-09-26 Massachusetts Institute Of Technology Calibrated spectrographic imaging
US5746210A (en) 1993-02-26 1998-05-05 David A. Benaron Device and method for detection, localization, and characterization of inhomogeneities in turbid media
DE4338758C2 (de) 1992-11-13 2001-08-09 Scimed Life Systems Inc Katheteranordnung
US5334193A (en) 1992-11-13 1994-08-02 American Cardiac Ablation Co., Inc. Fluid cooled ablation catheter
FR2699227B1 (fr) * 1992-12-16 1995-01-13 Snecma Ensemble monobloc de post-combustion d'une turbine à gaz.
US5673701A (en) 1994-10-07 1997-10-07 Non Invasive Technology, Inc. Optical techniques for examination of biological tissue
CA2175348A1 (en) 1993-10-29 1995-05-04 Arjun G. Yodh Object imaging using diffuse light
US5414258A (en) 1993-11-22 1995-05-09 Angstrom Technologies, Inc. Apparatus and method for calibration of fluorescence detectors
US5650135A (en) * 1994-07-01 1997-07-22 The Board Of Trustees Of The Leland Stanford Junior University Non-invasive localization of a light-emitting conjugate in a mammal
US6649143B1 (en) * 1994-07-01 2003-11-18 The Board Of Trustees Of The Leland Stanford Junior University Non-invasive localization of a light-emitting conjugate in a mammal
IL110538A0 (en) 1994-08-02 1994-11-11 Oren Aharon Tomographic imaging system
US5672881A (en) 1994-09-14 1997-09-30 Glyko, Inc. Charge-coupled device imaging apparatus
US5840572A (en) 1994-10-11 1998-11-24 United States Of America As Represented By The Secretary Of The Navy Bioluminescent bioassay system
US5705807A (en) 1994-10-24 1998-01-06 Nissan Motor Co., Ltd. Photo detecting apparatus for detecting reflected light from an object and excluding an external light componet from the reflected light
JP3433534B2 (ja) 1994-11-07 2003-08-04 浜松ホトニクス株式会社 散乱吸収体内の散乱特性・吸収特性の測定方法及び装置
AU4594796A (en) 1994-11-25 1996-06-19 Yuriy Alexandrov System and method for diagnosis of living tissue diseases
JP2675532B2 (ja) 1994-12-20 1997-11-12 株式会社バイオセンサー研究所 化学発光測定装置
US5594253A (en) 1994-12-28 1997-01-14 Lockheed Missiles And Space Company, Inc. Hybrid luminescent device for imaging of ionizing and penetrating radiation
US5636299A (en) 1994-12-28 1997-06-03 Lockheed Missiles & Space Company, Inc. Hybrid luminescent device and method for imaging penetrating radiation
US5919140A (en) 1995-02-21 1999-07-06 Massachusetts Institute Of Technology Optical imaging using time gated scattered light
WO1996036273A2 (en) * 1995-05-16 1996-11-21 The United States Of America, Represented By The Secretary Of The Air Force System and method for enhanced visualization of subcutaneous structures
AU1130797A (en) * 1995-08-24 1997-03-19 Purdue Research Foundation Fluorescence lifetime-based imaging and spectroscopy in tissues and other random media
JP2879003B2 (ja) 1995-11-16 1999-04-05 株式会社生体光情報研究所 画像計測装置
JPH11506839A (ja) 1995-12-22 1999-06-15 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 混濁媒体中の対象を局部化する装置
US5738101A (en) 1996-01-18 1998-04-14 The Regents Of The University Of California Optical imaging through turbid media with a degenerate four-wave mixing correlation time gate
GB2309368B (en) 1996-01-18 1999-09-15 Hamamatsu Photonics Kk An optical computer tomographic apparatus and image reconstruction method using optical computer tomography
IL117241A (en) 1996-02-23 2000-09-28 Talia Technology Ltd Three dimensional imaging apparatus and a method for use thereof
US6108576A (en) 1996-03-18 2000-08-22 The Research Foundation Of City College Of New York Time-resolved diffusion tomographic 2D and 3D imaging in highly scattering turbid media
US5867250A (en) 1996-05-03 1999-02-02 Baron; William S. Apparatus and method for optically mapping front and back surface topographies of an object
JP3442220B2 (ja) 1996-05-15 2003-09-02 シスメックス株式会社 光散乱媒体中物体の可視化光学システム
US5864633A (en) 1996-05-17 1999-01-26 Therma-Wave, Inc. Method and apparatus for optical data analysis
US6026173A (en) 1997-07-05 2000-02-15 Svenson; Robert H. Electromagnetic imaging and therapeutic (EMIT) systems
EP0910790A1 (en) 1996-07-10 1999-04-28 Cambridge Imaging Limited Improvements in and relating to imaging
JP3844815B2 (ja) 1996-08-30 2006-11-15 浜松ホトニクス株式会社 散乱体の吸収情報計測方法及び装置
US5812310A (en) 1996-10-16 1998-09-22 Applied Precision, Inc. Orthogonal high accuracy microscope stage
AU5507798A (en) * 1996-11-29 1998-06-22 Imaging Diagnostic Systems, Inc. Detector array for use in a laser imaging apparatus
GB9626825D0 (en) 1996-12-24 1997-02-12 Crampton Stephen J Avatar kiosk
US5963658A (en) 1997-01-27 1999-10-05 University Of North Carolina Method and apparatus for detecting an abnormality within a host medium
JP3958798B2 (ja) 1997-02-07 2007-08-15 ザ・テキサス・エイ・アンド・エム・ユニバーシティ・システム 蛍光造影剤を用いた光散乱組織の撮像
US6208886B1 (en) 1997-04-04 2001-03-27 The Research Foundation Of City College Of New York Non-linear optical tomography of turbid media
US5943129A (en) 1997-08-07 1999-08-24 Cambridge Research & Instrumentation Inc. Fluorescence imaging system
US6069698A (en) 1997-08-28 2000-05-30 Olympus Optical Co., Ltd. Optical imaging apparatus which radiates a low coherence light beam onto a test object, receives optical information from light scattered by the object, and constructs therefrom a cross-sectional image of the object
ES2137879B1 (es) 1997-12-02 2000-08-16 Francisco Soria Melguizo S A Sistema analizador de imagenes producidas por reacciones bacterianas.
JP3771364B2 (ja) 1997-12-12 2006-04-26 浜松ホトニクス株式会社 光ct装置及び画像再構成方法
US6373557B1 (en) 1997-12-23 2002-04-16 Siemens Aktiengesellschaft Method and apparatus for picking up a three-dimensional range image
US6364829B1 (en) 1999-01-26 2002-04-02 Newton Laboratories, Inc. Autofluorescence imaging system for endoscopy
US6205347B1 (en) 1998-02-27 2001-03-20 Picker International, Inc. Separate and combined multi-modality diagnostic imaging system
WO1999058930A1 (en) 1998-05-14 1999-11-18 Metacreations Corporation Structured-light, triangulation-based three-dimensional digitizer
US6252623B1 (en) 1998-05-15 2001-06-26 3Dmetrics, Incorporated Three dimensional imaging system
US6242743B1 (en) 1998-08-11 2001-06-05 Mosaic Imaging Technology, Inc. Non-orbiting tomographic imaging system
US6615061B1 (en) 1998-11-23 2003-09-02 Abbott Laboratories Optical sensor having a selectable sampling distance for determination of analytes
JP3585753B2 (ja) 1998-12-15 2004-11-04 富士写真フイルム株式会社 撮影システム
ATE341637T1 (de) * 1998-12-17 2006-10-15 Xenogen Corp Unblutige bestimmung einer physiologischen reaktion in einem säugetier
US6175407B1 (en) 1998-12-17 2001-01-16 Identix Incorporated Apparatus and method for optically imaging features on the surface of a hand
US6205353B1 (en) * 1998-12-22 2001-03-20 Research Foundation Of Cuny Time-resolved optical backscattering tomographic image reconstruction in scattering turbid media
WO2000055882A1 (en) 1999-03-18 2000-09-21 Cambridge Research & Instrumentation Inc. High-efficiency multiple probe imaging system
US6264610B1 (en) 1999-05-05 2001-07-24 The University Of Connecticut Combined ultrasound and near infrared diffused light imaging system
US6415051B1 (en) 1999-06-24 2002-07-02 Geometrix, Inc. Generating 3-D models using a manually operated structured light source
US6219566B1 (en) 1999-07-13 2001-04-17 Photonics Research Ontario Method of measuring concentration of luminescent materials in turbid media
EP1208367A4 (en) 1999-08-06 2007-03-07 Cambridge Res & Instrmnt Inc DEVICE FOR SPECTRAL FIGURE
US6750964B2 (en) 1999-08-06 2004-06-15 Cambridge Research And Instrumentation, Inc. Spectral imaging methods and systems
US6381302B1 (en) 2000-07-05 2002-04-30 Canon Kabushiki Kaisha Computer assisted 2D adjustment of stereo X-ray images
US6710770B2 (en) 2000-02-11 2004-03-23 Canesta, Inc. Quasi-three-dimensional method and apparatus to detect and localize interaction of user-object and virtual transfer device
US7581191B2 (en) 1999-11-15 2009-08-25 Xenogen Corporation Graphical user interface for 3-D in-vivo imaging
JP3553451B2 (ja) 2000-02-18 2004-08-11 独立行政法人 科学技術振興機構 光干渉断層像観測装置
US20010033376A1 (en) 2000-02-25 2001-10-25 Cambridge Reseach & Instrumentation Inc. Automatic G-factor calibration
US6775567B2 (en) 2000-02-25 2004-08-10 Xenogen Corporation Imaging apparatus
US6377353B1 (en) 2000-03-07 2002-04-23 Pheno Imaging, Inc. Three-dimensional measuring system for animals using structured light
JP3999437B2 (ja) 2000-03-10 2007-10-31 富士フイルム株式会社 光断層画像化装置
US6429943B1 (en) 2000-03-29 2002-08-06 Therma-Wave, Inc. Critical dimension analysis with simultaneous multiple angle of incidence measurements
EP1154224A1 (en) 2000-05-09 2001-11-14 Fuji Photo Film Co., Ltd. Optical coherence tomography apparatus using optical-waveguide structure which reduces pulse width of low-coherence light
US6748259B1 (en) 2000-06-15 2004-06-08 Spectros Corporation Optical imaging of induced signals in vivo under ambient light conditions
US6693710B1 (en) 2000-06-16 2004-02-17 Cambridge Research & Instrumentation Inc. Polarization imaging system
SE519734C2 (sv) 2000-07-07 2003-04-01 Axis Ab Bildförändringsanordning för en bildalstrande apparat samt metod och digitalkamera till densamma
US6597931B1 (en) 2000-09-18 2003-07-22 Photonify Technologies, Inc. System and method for absolute oxygen saturation
US6394965B1 (en) 2000-08-15 2002-05-28 Carbon Medical Technologies, Inc. Tissue marking using biocompatible microparticles
JP2002095663A (ja) 2000-09-26 2002-04-02 Fuji Photo Film Co Ltd センチネルリンパ節光断層画像取得方法および装置
US6615063B1 (en) * 2000-11-27 2003-09-02 The General Hospital Corporation Fluorescence-mediated molecular tomography
US7383076B2 (en) 2000-11-27 2008-06-03 The General Hospital Corporation Fluorescence-mediated molecular tomography
US20020083265A1 (en) * 2000-12-26 2002-06-27 Brough Farrell Lynn Methods for increasing cache capacity
CA2447262A1 (en) 2001-05-17 2002-11-21 Xenogen Corporation Method and apparatus for determining target depth, brightness and size within a body region
US6919919B2 (en) 2002-02-06 2005-07-19 Xenogen Corporation Light calibration device for use in low level light imaging systems
US7113217B2 (en) * 2001-07-13 2006-09-26 Xenogen Corporation Multi-view imaging apparatus
US7298415B2 (en) * 2001-07-13 2007-11-20 Xenogen Corporation Structured light imaging apparatus
US6775349B2 (en) 2001-10-23 2004-08-10 Washington Univ. In St. Louis System and method for scanning near-field optical tomography
US7474399B2 (en) 2002-02-22 2009-01-06 Xenogen Corporation Dual illumination system for an imaging apparatus and method
US6924893B2 (en) 2002-05-13 2005-08-02 Marine Biological Laboratory Enhancing polarized light microscopy
WO2003102558A1 (en) 2002-06-04 2003-12-11 Visen Medical, Inc. Imaging volumes with arbitrary geometries in contact and non-contact tomography
US6628747B1 (en) 2002-06-21 2003-09-30 Washington University In St. Louis System and method for dual-beam internal reflection tomography
US7536644B2 (en) 2002-06-27 2009-05-19 Siemens Medical Solutions Usa, Inc. Method and system for facilitating selection of stored medical images
US6618463B1 (en) * 2002-07-09 2003-09-09 Washington University System and method for single-beam internal reflection tomography
US7616985B2 (en) * 2002-07-16 2009-11-10 Xenogen Corporation Method and apparatus for 3-D imaging of internal light sources
US20040027659A1 (en) 2002-08-08 2004-02-12 Messerschmidt Robert G. Sample holder
US20040085536A1 (en) * 2002-11-01 2004-05-06 Schotland John Carl Tomography system and method using nonlinear reconstruction of scattered radiation
WO2004072906A1 (en) 2003-02-05 2004-08-26 The General Hospital Corporation Method and system for free space optical tomography of diffuse media
US7034303B2 (en) 2003-06-27 2006-04-25 Washington University System and method of image reconstruction for optical tomography with limited data
DE102004030550A1 (de) * 2004-06-24 2006-01-19 Siemens Ag Bildgebendes Tomographiegerät mit zumindest zwei unter Systemwinkel angeordneten Aufnahmesystemen und Verfahren für ein derartiges Tomographiegerät zur Bestimmung der Systemwinkel der Aufnahmesysteme
US7477931B2 (en) 2004-12-06 2009-01-13 Cambridge Research & Instruments, Inc. Systems and methods for in-vivo and optical imaging and measurement
CN101916359B (zh) 2005-01-27 2012-06-20 剑桥研究和仪器设备股份有限公司 把样本的不同区域分类到相应类别的方法和设备
US8044996B2 (en) 2005-05-11 2011-10-25 Xenogen Corporation Surface construction using combined photographic and structured light information
WO2008052006A2 (en) * 2006-10-23 2008-05-02 Xenogen Corporation Apparatus and methods for fluorescence guided surgery

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102144154A (zh) * 2008-10-01 2011-08-03 东卡莱罗纳大学 用结构入射光测定混浊介质光学特征的方法与系统
CN102144154B (zh) * 2008-10-01 2015-04-22 东卡莱罗纳大学 用结构入射光测定混浊介质光学特征的方法与系统
CN104853669A (zh) * 2012-10-15 2015-08-19 文森医学公司 具有荧光及生物发光源的交叉形态加权特征的漫射介质成像的系统、方法及设备

Also Published As

Publication number Publication date
US7860549B2 (en) 2010-12-28
US20100022872A1 (en) 2010-01-28
WO2004008123A1 (en) 2004-01-22
JP2006513400A (ja) 2006-04-20
EP1521959B1 (en) 2010-09-08
EP1521959A1 (en) 2005-04-13
AU2003249299A1 (en) 2004-02-02
US7616985B2 (en) 2009-11-10
IL166262A0 (en) 2006-01-15
DE60334098D1 (de) 2010-10-21
US20110090316A1 (en) 2011-04-21
US20080018899A1 (en) 2008-01-24
US20040021771A1 (en) 2004-02-05
ATE480764T1 (de) 2010-09-15
US20050201614A1 (en) 2005-09-15
US8909326B2 (en) 2014-12-09
US7603167B2 (en) 2009-10-13
US7797034B2 (en) 2010-09-14
CA2492483A1 (en) 2004-01-22

Similar Documents

Publication Publication Date Title
CN1678900A (zh) 用于内部光源的3d成像的方法和设备
US10130318B2 (en) Integrated microtomography and optical imaging systems
US7599731B2 (en) Fluorescent light tomography
US7873407B2 (en) Systems and methods for in-vivo optical imaging and measurement
US9080977B2 (en) Apparatus and methods for fluorescence guided surgery
EP2022255A2 (en) Surface construction using combined photographic and structured light information
Hejazi et al. Fast multislice fluorescence molecular tomography using sparsity-inducing regularization
WO2010103026A1 (fr) Traitement d&#39;une image de fluorescence par factorisation en matrices non negatives

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication