CN101179711A - 成像设备和成像方法 - Google Patents

Abstract

本发明涉及成像设备和成像方法，其中具体记载了一种成像设备，包括：成像装置，用于对位于用户视线方向上的场景进行成像以获取所述场景的图像数据；临时存储装置，用于存储通过由成像装置进行成像所获得的图像数据；以及控制装置，用于控制临时存储装置以存储通过由成像装置进行成像所获得的图像数据，并且当已经满足预先确定的存储条件时，从临时存储装置提取待存储的图像数据，并向所提取的图像数据中添加元数据以执行存储处理。

Description

成像设备和成像方法

对相关申请的交叉引用

本发明包含涉及2006年11月7日在日本专利局提交的日本专利申请JP 2006-301600的主题，其全部内容通过引用，包含于此。

技术领域

本发明涉及在由使用例如眼镜型的或头戴式的佩带单元的用户佩带成像设备时对用户视线方向上的场景进行成像的成像设备和方法。

背景技术

已经提出了一种设备，该设备具有眼镜型的或头戴式的佩戴单元，小型照像机安装到该设备上，从而能够对位于用户视线方向的场景进行成像(参见，例如，日本专利公开No.2005-172851)。

发明内容

对位于用户视线方向上的场景进行成像的能力可将用户在他的或她的日常生活中看到的场景作为例如图像数据记录下来，但是，没有已知的设备能够使得通过成像所获得的图像数据以用户所希望的模式使用。

因此，设计本发明从而能够对所拍摄的图像进行适当的存储，并容易重放这些图像。

根据本发明的一个实施例，提供了一种成像设备，包括：成像部分，被配置为对位于用户视线方向的场景进行成像以获取该场景的图像数据；临时存储部分，被配置为存储通过由成像部分进行成像所获得的图像数据；以及控制部分，被配置为控制临时存储部分以存储通过由成像部分进行成像所获得的图像数据，并且当已经满足预先确定的存储条件时，从临时存储部分提取待存储的图像数据，并向所提取的图像数据中添加元数据以执行存储处理。

临时存储部分可以以环形存储的方式使用存储区来连续地存储图像数据。

此外，成像设备还可以进一步包括存储部分，用于在非易失存储介质中存储数据，其中，作为存储处理，控制部分执行控制存储部分以将元数据和从临时存储部分所提取的图像数据存储在非易失存储介质中的处理。

此外，成像设备还可以进一步包括传输部分，被配置为将数据传输到外部设备，其中，作为存储处理，控制部分执行控制传输部分以将元数据和从临时存储部分所提取的图像数据传输到外部设备的处理。

此外，成像设备还可以进一步包括显示部分，该显示部分能够使用存储在临时存储部分的图像数据执行图像显示(例如，重放图像的显示)。

显示部分能够使用于图像显示的屏幕区域的全部或一部分进入透明或半透明的透视状态。在此情况下，控制部分可以控制显示部分以使用于图像显示的屏幕区域的一部分进入透视状态，同时使用存储在临时存储部分中的图像数据并利用所述屏幕区域的剩余部分进行图像显示。

此外，控制部分还可以控制显示部分以使用通过由成像部分进行成像所获得的图像数据，利用用于图像显示的屏幕区域的一部分进行图像显示，同时使用存储在临时存储部分中的图像数据，并利用所述屏幕区域的剩余部分进行图像显示。

此外，显示部分可以设置在用户的眼睛前面以进行图像显示。

此外，可以在与包含成像部分的情况不同的情况下形成显示部分。

此外，成像设备还可以进一步包括操作输入部分，其中，根据由操作输入部分检测到的用户输入的操作，控制部分控制显示部分以使用存储在临时存储部分中的图像数据进行图像显示。

操作输入部分可以包括由用户操作的操作单元。

此外，操作输入部分还可以包括用于检测用户的运动的传感器。

此外，操作输入部分还可以包括用于检测涉及用户的生物信息的传感器。

当显示部分使用存储在临时存储部分的图像数据已经进行了图像显示(例如，显示重放图像)时，控制部分可以判断为已经满足存储条件，并从临时存储部分提取显示的所有或某些图像数据作为待存储的图像数据，并向所提取的图像数据中添加元数据以执行存储处理。

此外，成像设备还可以进一步包括生物传感器部分，其被配置为检测涉及用户的生物信息，其中，控制部分根据由生物传感器部分检测到的生物信息判断是否已经满足存储条件，并且当控制部分已经判断为已经满足存储条件时，控制部分从临时存储部分提取待存储的图像数据，并向所提取的图像数据中添加元数据以执行存储处理。生物信息可以是脉搏、心搏、心电图、肌电图信息、呼吸、出汗、GSR(皮肤电反应)、血压、血液中的氧饱和度浓度、皮肤表面温度、脑电波、血流变化、体温、身体的运动、头部的运动、重心、行走/跑步的节奏，以及眼睛的状态中的至少一个。

此外，成像设备还可以进一步包括：音频输入部分，其被配置为输入外部声音；以及音频分析部分，其被配置为对由音频输入部分所获得的音频信号进行分析，其中，控制部分根据由音频分析部分分析的结果判断是否已经满足存储条件，并且当控制部分已经判断为已经满足存储条件时，控制部分从临时存储部分提取待存储的图像数据，并向所提取的图像数据中添加元数据以执行存储处理。

此外，控制部分还可以执行发出与成像部分进行成像或对通过成像所获得的图像数据进行处理相关的指令的成像系统控制，并且当控制部分已经执行了预先确定的成像系统控制时，控制部分可以判断为已经满足存储条件，并从临时存储部分提取待存储的图像数据，并向所提取的图像数据中添加元数据以执行存储处理。例如，当作为成像系统控制，控制部分已经执行了使成像部分中的透镜系统执行预先确定的操作的控制，使成像部分中的信号处理系统执行预先确定的处理的控制，改变成像部分中的成像灵敏度的控制，改变成像部分中的帧速率的控制等等时，控制部分可以判断为已经满足了存储条件。

此外，当已经满足存储条件时，控制部分可以根据所满足的存储条件生成元数据。

根据本发明的另一个实施例，提供了包括下列步骤的成像方法：(a)对位于用户视线方向的场景进行成像以获取该场景的图像数据；(b)临时存储通过步骤(a)中的成像所获得的图像数据；(c)判断是否已经满足预先确定的存储条件；以及(d)当步骤(c)已经判断为已经满足了预先确定的存储条件时，从在步骤(b)中临时存储的图像数据中提取待存储的图像数据，向所提取的图像数据中添加元数据，并执行存储处理。

根据本发明的上述实施例，用户佩带例如使用眼镜型的或头戴式的佩带单元的成像设备，使得成像部分能够对位于用户视线方向上的场景进行成像。成像部分例如被配置为例如不断而连续地进行成像，以及例如以环形存储的方式连续地将通过成像所获得的图像数据存储在临时存储部分中。由于通过成像不断地获得的图像数据存储在临时存储部分中，因此，根据临时存储部分的容量，对应于从当前时间到过去的某一时间的时间段的所拍摄的图像数据，都是临时存储的。

存储在临时存储部分的图像数据可以作为用户不久之前看到的场景的重放图像，在显示部分上显示出来。

用户可能希望或多或少地永久地存储用户感兴趣的场景的图像数据。相应地，根据本发明的实施例，当已经满足了预先确定的存储条件时，从临时存储部分提取相关的图像数据，并通过存储处理进行存储。

存储处理是使例如成像设备内的存储器部分将所提取的图像数据存储在诸如硬盘驱动器(HDD)、光盘、磁光盘、磁盘或闪存之类的非易失存储介质中的处理，或使传输部分将所提取的图像数据传输到外部设备以便所提取的图像数据可以被存储在外部设备中的HDD等中的处理。此外，还向待存储的图像数据中添加元数据，当例如在搜索存储的图像数据时，元数据会有用。

根据本发明的实施例，可以临时存储用户在他的或她的日常生活中看到的场景的图像数据，并且还可以当已经满足预先确定的存储条件时，执行将元数据与图像数据一起存储的存储处理。

因此，可以从通过持续的成像所获得的这样的日常的场景的图像数据中提取用户感兴趣的场景或用户希望以后再次观看的场景的图像数据，并适当地存储所提取的图像数据，以使图像数据可用。

附图说明

图1是根据本发明的一个实施例的成像设备的示例性外观的图例；

图2是根据本发明的一个实施例的另一个成像设备的示例性外观的图例；

图3是根据本发明的一个实施例的成像设备的方框图；

图4是根据本发明的一个实施例的另一个成像设备的方框图；

图5是根据本发明的一个实施例的又一个成像设备的方框图；

图6A到6C是分别描述了根据本发明的一个实施例的透视状态、通过普通的成像而获得的图像、远摄图像的图例；

图7A和7B是描述根据本发明的一个实施例的放大的图像的图例；

图8A和8B是描述根据本发明的一个实施例的用高红外线灵敏度拍摄的图像的图例；

图9A和9B是描述根据本发明的一个实施例的用高紫外线灵敏度拍摄的图像的图例；

图10A和10B是显示根据本发明的一个实施例的临时存储部分和重放操作的图；

图11A和11B是描述根据本发明的一个实施例的重放图像的显示图例；

图12是示出根据本发明的一个实施例的控制过程的流程图；

图13是示出根据本发明的一个实施例的重放过程的流程图；

图14是示出根据本发明的一个实施例的成像系统控制过程的流程图；

图15是示出根据本发明的一个实施例的专用于重放的成像设备的方框图；以及

图16是示出由根据本发明的一个实施例的专用于重放的成像设备执行的过程的流程图。

具体实施方式

下面将按以下顺序描述根据本发明的实施例的成像设备和成像方法。

[1.成像设备的示例性外观]

[2.成像设备的示例性结构]

[3.示例性的拍摄图像]

[4.重放操作]

[5.选择待存储的图像的示例性方式]

[6.示例性过程]

[7.专用于重放的成像设备]

[8.实施例的效果]

[1.成像设备的示例性外观]

图1示出了根据本发明的一个实施例的作为眼镜型的显示型照像机的成像设备1的示例性外观。成像设备1具有佩带单元，该佩带单元具有框架结构，该结构例如从两个太阳穴区域伸向枕骨区域围绕头部延伸一半，如该图所示成像设备1由用户利用置于耳朵上方的佩带单元进行佩带。

成像设备1具有为左右眼睛而设计的一对显示部分2，当成像设备1由用户以图1所示的方式佩带时，显示部分2置于用户的眼睛前面(即，在普通的眼镜的镜片所处的位置)。例如在显示部分2中使用液晶面板，而如此图所示显示部分2能够通过透射率控制进入透视状态，即，透明或半透明状态。显示部分2进入透视状态的能力可使用户像他或她佩带眼镜那样始终佩带成像设备1，不会对他的或她的日常生活产生干扰。

此外，成像设备1还具有面朝前设置的拍摄镜头3a以便在用户佩带成像设备1时对位于用户视线方向上的场景进行成像。

此外，成像设备1还具有一对耳机扬声器5a，当用户佩带成像设备1时可以将其插入到用户的左右耳孔中。注意，图中只示出了左边的耳机扬声器5a。

此外，成像设备1还具有麦克风6a和6b，用于采集外部声音。麦克风6a和6b分别被设置在右显示部分2的右边和左显示部分2的左边。

注意，图1只示出了一个示例，用户佩带成像设备1的各种结构都是可以的。一般而言，对佩带单元的要求是，它是眼镜的形状或头戴式的。至少，对本实施例的要求是：显示部分2设置在用户的眼睛的前面并靠近眼睛，拍摄镜头3a进行拍摄的方向是用户的眼睛的视线的方向，即，朝前的方向。还要注意，成像设备1可以不为两只眼睛提供一对显示部分2，而是只为一只眼睛提供显示部分2中的一个。

还要注意，成像设备1可以不必具有左右立体声扬声器5a，而是可以只有耳机扬声器5a中的一个用于只插入到一个耳孔中。还要注意，麦克风的数量可以是一个。即，成像设备1可以只具有麦克风6a和6b中的一个。还要注意，成像设备1不必具有任何麦克风或耳机扬声器。

还要注意，成像设备可以具有在由拍摄镜头3a进行拍摄的方向上提供照明的照明部分。照明部分是由例如发光二极管(LED)构成的。

在图1所示出的成像设备1中，用于进行成像的组件和用于监视通过成像所获得的图像的显示部分2集成在一个单元中。然而，如图2中所示出的成像设备1，可以与包含用于成像的组件的外壳分开地提供包含显示部分的外壳。

图2中所示出的成像设备1包括彼此分开的成像设备部分40和显示设备部分30。

成像设备部分40通过预先确定的佩带框架佩带到用户的头部上。成像设备部分40具有设置为面朝前的拍摄镜头3a以便在用户佩带了成像设备部分40时对位于用户视线方向上的场景进行成像。此外，成像设备部分40具有麦克风6a，用于采集外部声音。

在此情况下，如下面将描述的，成像设备部分40包含通信部分，用于将通过成像所获得的图像数据等等传输到与成像设备部分40分开地提供的显示设备部分30。

显示设备部分30是例如用户能够携带的小型的发光设备。

显示设备部分30在内部包含用于与成像设备部分40进行数据通信的通信部分，并执行使从成像设备部分40提供的图像数据显示在显示屏幕31上的操作。

用户能够使用如上所述的成像设备部分40和显示设备部分30彼此分开的成像设备1。

这里，便携式显示设备被作为显示设备部分30。然而，显示设备部分30可以是例如静止的显示设备、计算机设备、电视接收机、移动电话、个人数字助理(PDA)等等。简而言之，在图2中所示出的没有监视器显示能力的成像设备1的情况下(甚至在图1中所示出的具有监视器显示能力的成像设备1的情况下)，可以利用任何外部显示设备来监视图像数据。

注意，可以由成像设备1通过其通信能力向其传输通过成像所获得的图像数据的外部设备的示例除如上所述的各种显示设备之外，还包括，视频存储设备、计算机设备，以及服务器设备。即，可以想像，所拍摄的图像数据存储在这样的外部设备中，或通过这样的外部设备来传送所拍摄的图像数据。

还要注意，成像设备1的外观不局限于图1和2的示例，各种变形也是可以的。

成像设备1的以上示例分别具有眼镜型的和头戴式的佩带单元。然而，注意，用于用户佩带成像设备的佩带单元可以是任何类型，如耳机型、领圈型、耳后型等等。此外，成像设备也可以通过诸如夹子之类的固定装置安装到普通的眼镜、帽舌、耳机等上，以便成像设备可以由用户佩带。还要注意，没有必要让成像设备一定佩戴在用户的头部。

[2.成像设备的示例性结构]

这里，将参考图3、4以及5说明根据本发明的实施例的成像设备1的三个示例性结构。图3和4中所示出的示例性结构对应于成像设备1是如图1所示出的具有成像功能和显示功能二者的眼镜型的显示型照像机的情况。同时，图5中所示出的示例性结构对应于如图2所示出的分开地提供成像设备部分40和显示设备部分30的情况。

首先，下面将说明图3的示例性结构。

系统控制器10由微型计算机构成，该微型计算机包括，例如，中央处理单元(CPU)、只读存储器(ROM)、随机存取存储器(RAM)、非易失存储器部分，以及接口部分，并控制成像设备1的总体操作。系统控制器10控制成像设备1的每一部分，以基于在内部ROM等中保存的程序执行预先确定的操作。

成像设备1包括，成像部分3、成像控制部分11，以及成像信号处理部分15，作为用于对位于用户视线方向的场景进行成像的单元。

成像部分3包括：如图1所示的拍摄镜头3a、光阑、变焦透镜、聚焦透镜等等构成的透镜系统；用于使透镜系统执行聚焦操作、变焦操作等等的驱动系统；以及固态成像器件阵列，用于检测用于通过透镜系统所获得的进行成像的光，并对检测到的光进行光电转换以生成成像信号。固态成像器件阵列是，例如，电荷耦合器件(CCD)传感器阵列或互补金属氧化物半导体(CMOS)传感器阵列。

成像信号处理部分15包括用于对成像部分3中的固态成像器件所获得的信号进行增益控制和波形整形的采样保持/自动增益控制(AGC)电路，以及视频A/D转换器，并获取数字形式的成像信号。

此外，成像信号处理部分15还对成像信号进行白平衡处理、亮度处理、彩色信号处理、模糊校正处理等等。此外，成像信号处理部分15还能够对成像信号进行下列处理，如：亮度级别控制、色彩校正、对比度控制，以及清晰度(边缘增强)控制；生成其中成像信号的一部分被放大的放大的图像；生成其中成像信号的一部分被缩小的缩小的图像；应用诸如马赛克、亮度反转、软焦点、强调显示图像的一部分之类的图像效果，改变图像的总体色彩氛围；生成字符图像或概念图像；以及所生成的图像与所拍摄的图像的组合。简而言之，成像信号处理部分15能够对作为成像信号的数字视频信号进行各种处理。

基于从系统控制器10发出的指令，成像控制部分11控制由成像部分3和成像信号处理部分15执行的成像操作。例如，成像控制部分11控制对成像部分3和成像信号处理部分15的操作的进行和不进行。此外，成像控制部分11还进行控制(电机控制)以使成像部分3执行诸如自动聚集、自动曝光调整、光圈调整、变焦或焦距改变之类的操作。

成像控制部分11包括定时发生器，并使用由定时发生器所生成的定时信号来控制由成像信号处理部分15中的固态成像器件、以及采样保持/AGC电路和视频A/D转换器执行的信号处理操作。此外，这样的定时控制还能对成像帧速率进行调整。

此外，成像控制部分11还控制固态成像器件和成像信号处理部分15中的成像的灵敏度和信号处理。例如，作为对成像的灵敏度的控制，成像控制部分11能够对从固态成像器件中读取的信号执行增益控制，以及黑电平设置，控制在对数字形式的成像信号进行处理时的各种系数，控制模糊校正处理中的校正值等等。有关对成像的灵敏度的控制，例如，可以有不针对任何特定波长范围的总灵敏度调整，以及调整诸如红外线范围或紫外线范围之类的特定波长范围的成像的灵敏度的灵敏度调整(例如，涉及裁去特定波长范围的成像)。根据波长的灵敏度调整是通过在拍摄镜头系统中插入波长过滤器或通过对成像信号执行波长过滤操作来实现的。在这些情况下，成像控制部分11通过控制波长过滤器的插入，指定过滤操作系数等等，来实现灵敏度控制。

此外，基于从系统控制器10发出的指令，成像控制部分11控制由成像信号处理部分15执行的上述图像处理操作。

临时存储部分23是使用诸如动态随机存取存储器(D-RAM)或静态随机存取存储器(S-RAM)之类的固态存储器作为存储介质的存储部分。然而，注意，临时存储部分23可以作为用于向诸如闪存、光盘、磁盘或包含闪存的存储器卡之类的存储介质中记录数据或从中再现数据的单元来构建。此外，临时存储部分23可以由HDD构成。

临时存储部分23存储通过由上述成像系统(下面，成像部分3、成像信号处理部分15，以及成像控制部分11将统一称为“成像系统”)执行的成像所不断地获得的图像数据。即，当已经提供了图像数据时，临时存储部分23对图像数据进行预先确定的编码处理以便进行存储，并将经过编码的图像数据存储在存储介质中。此外，在系统控制器10的控制之下，临时存储部分23能够从存储介质中读取所存储的图像数据，并对图像数据进行解码，并输出图像数据。

图10A是临时存储部分23中的诸如D-RAM之类的存储器的存储区的示意图。从开头地址AdST延伸到终点地址AdED的存储区以环形存储的方式使用。具体来说，图像数据被写入到由写入地址指针W-Ad表示的地址，写入地址指针W-Ad从开头地址AdST移到终点地址AdED，并且当它到达终点地址AdED时，返回到开头地址AdST。这样，图像数据被连续地记录在存储区上。

因此，在从预先确定的时间之前直到目前为止的时间段内获得的图像数据被临时在临时存储部分23。当然，图像数据存储在其中多长时间取决于临时存储部分23的容量和图像数据的速率(例如，帧速率、每个帧的数据量等等)。

成像系统拍摄要存储在临时存储部分23的视频的帧速率可以设置为任何值。通过由成像系统进行的成像所获得的并存储在临时存储部分23中的图像数据可以具有普通的帧速率(例如，每秒30帧)或更高的帧速率。还可以，例如，从每秒所拍摄的图像数据中提取多个帧，并使临时存储部分23存储所产生的伪运动图像数据。此外，还可以例如每一秒到多秒提取一个帧，并使临时存储部分23以一秒到多秒的间隔获得的静止图像的形式存储图像数据。

通过由成像部分3进行成像和由成像信号处理部分15进行处理所获得的成像信号(即，通过成像所获得的图像数据)被提供到图像输入/输出控制部分27。

在系统控制器10的控制之下，图像输入/输出控制部分27控制图像数据的传输。具体来说，图像输入/输出控制部分27控制图像数据在成像系统(即，成像信号处理部分15)、临时存储部分23、显示图像处理部分12，以及存储部分25之间的传输。

在根据本实施例的成像设备1中，成像系统基本上不断地执行成像操作，通过成像所获得的图像数据通过图像输入/输出控制部分27被传输到临时存储部分23，并临时存储在临时存储部分23。如此，通过成像不断地获得的图像数据以上述方式被不断地记录在临时存储部分23中，从而在从之前某一时间直到目前为止的时间段内通过成像所获得的图像数据不断地存储在其中。

在系统控制器10的控制之下，图像输入/输出控制部分27还能够向显示图像处理部分12提供经过成像信号处理部分15处理的成像信号(即，图像数据)。

此外，图像输入/输出控制部分27还能够将例如从存储部分25读取的图像数据提供到显示图像处理部分12。

此外，在系统控制器10的控制之下，图像输入/输出控制部分27能够将从临时存储部分23读取的图像数据(即，临时存储在临时存储部分23中的某些图像数据)提供到显示图像处理部分12或存储部分25。

存储部分25是用于向预先确定的存储介质(例如，非易失存储介质)记录数据和从中再现数据的单元。存储部分25由例如硬盘驱动器(HDD)构成。勿庸置疑，作为非易失存储介质，可采用各种存储介质，如：诸如闪存之类的固态存储器，包含固定存储器的存储器卡、光盘、磁光盘，以及全息图存储器。对存储部分25的要求是能够根据所采用的存储介质记录和再现数据。

与上述临时存储部分23不同，提供了存储部分25，用于不是临时地而是半永久地存储图像数据。

具体来说，在临时存储在临时存储部分23中的某些图像数据被选择为存储处理的对象的情况下，从临时存储部分23读取选定的图像数据，并通过图像输入/输出控制部分27提供到存储部分25。在系统控制器10的控制之下，存储部分25对所提供的图像数据进行编码，以便它可以记录在存储介质上，并将经过编码的图像数据记录到存储介质上。

即，当已经满足预先确定的存储条件(以下简称为“存储条件”)时，存储部分25执行将临时存储在临时存储部分23中的图像数据之中的被判断为是待存储的对象的图像数据存储在HDD中的处理。

当控制存储部分25以执行以上存储图像数据的处理时，系统控制器10生成元数据并控制存储部分25以与图像数据一起记录所生成的元数据。

此外，在系统控制器10的控制之下，存储部分25能够再现所记录的图像数据。再现的图像数据通过图像输入/输出控制部分27被提供到显示图像处理部分12。

虽然在图中未示出，再现的图像数据也可以通过预先确定的接口部分输出到外部设备，以便例如通过外部监视设备显示或存储在外部存储设备中。

成像设备1包括显示部分2、显示图像处理部分12、显示驱动部分13，以及显示控制部分14，作为向用户呈现显示的单元。

在系统控制器10的控制之下，从临时存储部分23读取的图像数据(即，不久前通过成像所获得的图像数据)，通过由成像部分3进行成像所获得的并经过成像信号处理部分15处理的图像数据(即，当前通过成像正在获得的图像数据)，或从存储部分25读取的图像数据(即，所存储的图像数据)，通过图像输入/输出控制部分27被提供到显示图像处理部分12。

显示图像处理部分12进行信号处理(例如，亮度级别控制、色彩校正、对比度控制、清晰度(边缘增强)控制等等)，以便将所提供的图像数据显示在显示部分2上，还执行屏幕分割处理，字符图像的合成等等。

显示驱动部分13由像素驱动电路构成，该像素驱动电路用于使从显示图像处理部分12提供的图像信号显示在显示部分(例如，液晶显示器)2上。即，显示驱动部分13以用于显示的指定的水平/垂直驱动定时，将基于视频信号的驱动信号施加到显示部分2中的以矩阵形式排列的像素。此外，显示驱动部分13能够控制显示部分2中的每一个像素的透射率，以使像素进入透视状态。

基于从系统控制器10发出的指令，显示控制部分14控制显示图像处理部分12的处理操作和显示驱动部分13的操作。具体来说，显示控制部分14控制显示图像处理部分12以进行如前所述的各种处理。此外，显示控制部分14控制显示驱动部分13以在透视状态和图像显示状态之间进行切换。

成像设备1进一步包括音频输入部分6、音频信号处理部分16、以及音频输出部分5。

音频输入部分6包括图1所示出的麦克风6a和6b，用于放大由麦克风6a和6b所获得的音频信号的麦克风放大器部分，以及A/D转换器，并输出音频数据。

由音频输入部分6所获得的音频数据被提供到音频输入/输出控制部分28。

在系统控制器10的控制之下，音频输入/输出控制部分28控制音频数据的传输。具体来说，音频输入/输出控制部分28控制音频数据在音频输入部分6、音频信号处理部分16、临时存储部分23，以及存储部分25之间的传输。

基本上，音频输入/输出控制部分28不断地将由音频输入部分6所获得的音频数据提供到临时存储部分23。结果，临时存储部分23不断地将由麦克风6a和6b收集声音所获得的音频数据与由成像系统进行成像所获得的图像数据一起存储。

此外，音频输入/输出控制部分28执行将由音频输入部分6所获得的音频数据提供到音频信号处理部分16的处理。

此外，在临时存储部分23读出数据的情况下，音频输入/输出控制部分28执行将由临时存储部分23读出的音频数据提供到音频信号处理部分16或存储部分25的处理。

更进一步地，在存储部分25读出数据的情况下，音频输入/输出控制部分28执行将由存储部分25读出的音频数据提供到音频信号处理部分16的处理。

音频信号处理部分16例如由数字信号处理器、D/A转换器等构成。在系统控制器10的控制之下，音频信号处理部分16对通过音频输入/输出控制部分28所提供的音频数据执行诸如音量控制、音调控制、或应用音响效果之类的处理。然后，音频信号处理部分16将经过处理的音频数据转换为模拟信号，并将该模拟信号提供到音频输出部分5。注意，音频信号处理部分16不局限于执行数字信号处理的单元，也可以是使用模拟放大器、模拟滤波器等执行信号处理的单元。

音频输出部分5包括图1所示出的一对耳机扬声器5a和耳机扬声器5a的放大器电路。

音频输入部分6、音频信号处理部分16，以及音频输出部分5能使用户听到外部声音、由临时存储部分23再现的音频，以及由存储部分25再现的音频。

注意，音频输出部分5可以由所谓的骨传导扬声器构成。

成像设备1配备有用于用户操作的操作输入部分20。

操作输入部分20可以包括诸如键、转盘等之类的操作单元，并被配置为检测诸如键操作之类的用户操作。作为选择，操作输入部分20可以被配置为检测用户的特意的行为。

在操作输入部分20配备有操作单元的情况下，操作输入部分20可以配备有，例如，稍后进行描述的用于重放操作的操作单元、用于由成像系统执行操作(例如，变焦操作、信号处理等)的操作单元。

在操作输入部分20被配置为检测用户行为的情况下，操作输入部分20可以配备有加速度传感器、角速度传感器、振动传感器、压力传感器等。

例如，可以用加速度传感器、振动传感器等检测用户从侧面拍打成像设备1的行动。因此，例如，当横向加速度超过了预先确定的值时，系统控制器10可以判断为用户操作已发生。例如，当用户已经轻拍了成像设备1一次时，系统控制器10可以判断为用户已经执行了重放开始操作，而当用户轻拍了成像设备1两次时，系统控制器10可以判断为用户已经执行了重放结束操作。此外，加速度传感器、角速度传感器等还可以用来检测用户是否已经从右侧或从左侧轻拍了成像设备1的侧部(对应于眼镜的侧部)，并且系统控制器10可以将用户的这些行动中的每一个行为都视为预先确定的操作。

此外，还可以用加速度传感器、角速度传感器等检测用户的转动或摇动他的或她的头部的行动。系统控制器10可以将用户的这些行动中的每一个行为视为用户操作。

更进一步地，例如，可以在成像设备1的左右两侧(对应于眼镜的侧部)提供压力传感器。然后，当用户按下成像设备1的右侧时，系统控制器10可以判断为用户已经执行了远摄变焦操作，而当用户按下成像设备1的左侧时，判断为用户已经执行了广角变焦操作。

通过用作操作单元来获取信息的操作输入部分20、如上文所描述的加速度传感器、角速度传感器、振动传感器、压力传感器等，将所获得信息提供到系统控制器10，而系统控制器10基于所提供的信息检测用户操作。

接下来，现在将在下面说明生物传感器21。系统控制器10可以将由生物传感器21检测到的信息识别为用户输入的操作。用户的特意的行为的一个示例是眼睛的运动(例如，用户的眼睛的视线的方向的改变，眨眼等)。可以使用稍后将说明的视觉传感器来检测眨眼。例如，系统控制器10可以将用户的眨眼三次的行动视为特定的操作输入。

可以提供电源操作单元，用于打开和关闭成像设备1的电源。作为选择，当生物传感器21已经检测到用户已经戴上成像设备1时，系统控制器可以自动地打开电源，而当用户取下成像设备1时，自动地关闭电源。

生物传感器21检测涉及用户的生物信息。生物信息的示例包括脉搏率、心率、心电图信息、肌电图信息、呼吸信息(例如，呼吸的速率、呼吸的深度、呼气的量等等)、出汗、皮肤电反应(GSR)、血压、血液中的氧饱和度浓度、皮肤表面温度、脑电波(例如，α波、β波、θ波，以及δ波的信息)、血流变化，以及眼睛的状态。

为了检测皮肤电反应、体温、皮肤表面温度、心电图反应、肌电图信息、心搏、脉搏、血流、血压、脑电波、出汗等，可以使用例如安装到图1所示出的佩带框架的内部的以便与用户的太阳穴区域或枕骨区域进行接触的传感器，或与佩带框架分开并附着于用户的另一个身体部分的传感器。

此外，还可以使用用于对用户的皮肤进行成像的成像部分。此成像部分例如是能够检测肤色的变化的传感器。

包括例如设置在显示部分2附近用来拍摄用户的眼睛的成像部分的视觉传感器，可被用作用于检测用户的视觉的传感器。在此情况下，可以对由该成像部分所拍摄的用户的眼睛的图像进行图像分析，以检测视线的方向，焦距、眼睛的瞳孔的扩张的程度，基底模式、眼睑的打开和关闭，等等。此外，也可以使用设置在显示部分2的附近用于向用户的眼睛发光的照明部分和用于接收从眼睛反射的光的光接收部分。在此情况下，可以例如基于所接收到的反射光来检测用户的晶状体的厚度。

生物传感器21向系统控制器10提供由这样的传感器进行的这样的检测的信息。

加速度传感器、角速度传感器、振动传感器等已经被列举为可以包括在操作输入部分20中的传感器。这样的传感器能够检测用户身体的运动、头部的运动、重心、行走/跑步的节奏等。在上面的对操作输入部分20的说明中，已经提及特意的行为(即，用户的“操作”)作为要由这样的传感器检测的运动。然而，也可以这样设置：用户不打算作为“操作”的行为，如用户身体的运动、头部的运动、重心，或行走/跑步的节奏，通过加速度传感器等进行检测，并将这样的行为当做一条生物信息来对待。

成像设备1进一步包括音频分析部分24。

音频分析部分24对由音频输入部分6所获取的外部声音的音频数据进行分析。例如，音频分析部分24进行频率分析、振幅电平评估、声波纹分析等等，并将所产生的分析信息提供到系统控制器10。

在成像设备1中，成像系统不断地进行成像，通过成像所获得的图像数据以环形存储的方式临时存储在临时存储部分23，并且当已经满足预先确定的存储条件时，系统控制器10从此时临时存储在临时存储部分23的图像数据中提取待存储的图像数据，并将所提取的图像数据传输到存储部分25，以便永久地记录在其中。

这里，要永久地存储在存储部分25中的图像数据是，在通过不断的成像所获得的图像中，系统控制器10已经判断为是对用户来说有某种意义的场景的图像，如用户感兴趣的场景的图像，当用户的感觉发生变化时的场景的图像，可能会保留在用户的记忆中的场景的图像，或用户可能会希望以后再次看到的场景的图像。

当系统控制器10推断这样的图像当前存储在临时存储部分23中时存储条件满足。例如，系统控制器10在下列情况下判断为满足存储条件。

首先，用户使其重放的图像和用户针对其发出了诸如变焦拍摄之类的与成像系统的操作相关的指令的图像，可以被视为用户感兴趣的(场景)的图像。因此，当已经响应于用户操作进行了重放时或当已经进行了诸如变焦之类的涉及成像系统的操作时，系统控制器10可以判断为已经满足了存储条件。

当用户已经开始对他的或她的视野内的场景感兴趣时或当他的或她的感觉已经发生变化时，获取涉及用户的相应的生物信息。因此，当已经获得了预先确定的检测值作为生物信息时，系统控制器10可以判断为已经满足存储条件。例如，当生物传感器21已经检测到预先确定的情况时，系统控制器10可以判断为已经满足存储条件。此类预先确定的情况的示例包括：心率超过其正常范围的情况；出汗、血压等偏离其正常状态的情况；以及用户的视线突然移动的情况。

此外，在本实施例中，由音频分析部分24对外部声音进行分析。如此，当突然出现响声或当检测到正在发出大声的欢呼等或者特定的人的声音的情况时，系统控制器10可以判断为已经满足存储条件。

如上所述，系统控制器10根据从操作输入部分20输入的用户操作执行控制处理，基于由生物传感器21检测到的信息或由音频分析部分24所获得的分析信息，执行判断已经满足存储条件的处理。当已经满足存储条件时，作为存储处理，系统控制器10执行控制存储部分25以在存储介质上记录从临时存储部分23所提取的图像数据的处理。当执行存储处理时，系统控制器10根据存储条件生成元数据，并将所生成的元数据添加到图像数据中，以便所生成的元数据将与图像数据记录在一起。

接下来，现在将在下面说明图4的示例性结构。注意，在图4中，在具有在图3中的对等组件的组件指定了与图3中的对等组件相同的参考编号，并省略对其的说明。除了代替存储部分25包括通信部分26之外，图4的结构与图3的结构相同。

通信部分26向外部设备传输数据，并从外部设备接收数据。该外部设备的示例包括各种电子设备，如计算机设备、个人数字助理(PDA)、移动电话、监视设备、视频设备，以及存储设备。具体来说，具有将从通信部分26传输的图像数据存储在HDD或其他存储介质中的能力的任何设备都可以用作这样的外部设备。

与通信部分26能够进行通信的外部设备的其他示例包括连接到诸如因特网之类的网络的终端设备、服务器设备等。

通信部分26可以被配置为例如根据诸如无线局域网、蓝牙等之类的系统，通过网络接入点的短距离的无线通信来进行网络通信。作为选择，通信部分26可以直接与具有相应的通信能力的外部设备进行无线通信。

从临时存储部分23读取的图像数据(以及音频数据)，通过图像输入/输出控制部分27(以及音频输入/输出控制部分28)，被提供到通信部分26。此外，元数据从系统控制器10提供到通信部分26。

在系统控制器10的控制之下，通信部分26将元数据添加到所提供的图像数据中(以及所提供的音频数据中)，对所产生的数据进行编码和调制以便进行传输，并将所产生的数据传输到外部设备。

在图3的示例性结构的情况下，系统控制器10执行控制存储部分25在其中记录图像的处理，作为永久地存储临时存储在临时存储部分23中的图像的存储处理。相反，在图4的结构的情况下，系统控制器10执行控制通信部分26将图像数据传输到外部设备的处理，作为永久地存储临时存储在临时存储部分23的图像的存储处理。

即，利用图4的示例性结构，成像设备1没有在其本身内永久地存储数据的能力。图4的示例性结构取决于图像数据存储在外部设备中的假设。

系统控制器10根据从操作输入部分20输入的用户操作执行控制处理，基于由生物传感器21检测到的信息或由音频分析部分24所获得的分析信息，执行判断满足存储条件的处理。当已经满足存储条件时，作为存储处理，系统控制器10执行控制通信部分26将从临时存储部分23所提取的图像数据(和元数据)传输到外部设备的处理。

接下来，图5示出了成像设备1的如图2所示的成像设备部分40和显示设备部分30分开提供的示例性结构。

在此结构的情况下，成像设备部分40包括系统控制器10、成像系统(即，成像部分3、成像信号处理部分15，以及成像控制部分11)、临时存储部分23、存储部分25、操作输入部分20、生物传感器21、图像输入/输出控制部分27、音频输入部分6，以及音频分析部分24。

然而，成像设备部分40没有包括音频输入/输出控制部分28、音频信号处理部分16或音频输出部分5。因此，由音频输入部分6所获得的外部声音的信号只用于由音频分析部分24所执行的处理中，即，涉及存储条件的判断。因此，在此示例性结构中，音频数据既不临时存储在临时存储部分23中，也不存储在存储部分25中。

图像输入/输出控制部分27执行将由成像系统不断地获得的图像数据传输到临时存储部分23的处理。图像输入/输出控制部分27还执行将从临时存储部分23读取的图像数据传输到通信部分26或存储部分25的处理。图像输入/输出控制部分27还执行将从存储部分25读取的图像数据传输到通信部分26的处理。

通信部分26对所提供的图像数据执行编码处理，以便传输到显示设备部分30。然后，通信部分26将经过编码的图像数据传输到显示设备部分30。

显示设备部分30包括通信部分34、显示部分31、显示图像处理部分32、显示驱动部分33、显示控制部分35，以及操作部分36。

通信部分34与成像设备部分40的通信部分26进行数据通信。通信部分34接收从成像设备部分40传输的图像数据，并对所接收到的图像数据进行解码处理。

经过通信部分34解码的图像数据被提供到显示图像处理部分32。显示图像处理部分32进行显示图像数据的信号处理，屏幕分割处理，字符图像的合成等。

显示驱动部分33由像素驱动电路构成，该像素驱动电路用于使从显示图像处理部分32提供的图像信号显示在显示部分(例如，液晶显示器)31上。即，显示驱动部分33以用于显示的指定的水平/垂直驱动定时，将基于视频信号的驱动信号施加到显示部分31中的以矩阵形式排列的像素。

显示控制部分35控制显示图像处理部分32的处理操作和显示驱动部分33的操作。例如，根据从操作部分36输入的用户操作，显示控制部分35控制显示操作的进行和不进行，切换屏幕上区域的形成等。

在通过通信部分26和34之间的通信从系统控制器10传输指令信息的情况下，显示控制部分35可以根据从系统控制器10传输的指令信息，控制显示操作的进行和不进行，切换屏幕上的区域的形成等。

尽管以上参考图3、4和5来说明成像设备1的示例性结构，但是，成像设备1的各种其它结构也是可以的。

例如，与图5的结构的情况相同，可以修改图3和4的结构以使其不包括用于记录或输出音频数据的系统(即，音频输入/输出控制部分28、音频信号处理部分16，和/或音频输出部分5)。相反，可以修改图5的结构，以便另外包括用于记录或输出音频数据的系统。

成像设备不必包括音频分析部分24。成像设备也不必包括生物传感器21。

可以修改图5的结构，使其包括通信部分26，用于将待存储的图像数据传输到外部设备而不是存储部分25。

成像设备可以既包括存储部分25，又包括通信部分26。

[3.示例性的拍摄图像]

这里，现在将参考图6A到9B在下面说明通过由成像系统进行成像所获得的并临时存储在临时存储部分23中的图像数据的示例。

然而，图6A所示出的不是通过成像所获得的图像，而是当如图1所示的显示部分2的整个屏幕处于透视状态下时用户所看到的场景的示例。此时，显示部分2处于仅仅是透明板的状态，用户正在通过透明显示部分2观看在他的或她的视野内的场景。

假设当成像部分3以通常的方式进行拍摄时，通过成像获得相当于用户在显示部分2处于透视状态下所看到的场景的图像。

图6B示出了当成像系统以普通的方式进行拍摄时所获得的图像数据的示例。该图像数据代表几乎与在显示部分2处于透视状态下用户将看到的场景相同的场景。当成像系统以普通的方式进行成像时，通过如上所述的成像获得代表大约相当于用户通常看到的场景的场景的图像，这样的图像的图像数据连续地存储在临时存储部分23中。

图6C示出了当系统控制器10已经指示成像控制部分11控制成像部分3以根据用户通过操作输入部分20进行的操作进行远摄时通过成像所获得的图像的示例。进行远摄可以获得这样的远摄图像的图像数据，从而使得远摄图像的图像数据可以存储在临时存储部分23。

注意，虽然上文说明了远摄的示例，但是，也可以使成像部分3进行广角变焦，以获得附近的场景的广角图像的图像数据。

通过对成像部分3的变焦透镜进行驱动控制，以及通过在成像信号处理部分15中进行信号处理，成像系统实现了对远摄图像/广角图像的获取。

虽然在图中未示出，系统控制器10可以指示成像部分3对焦点进行调节，而不是执行所谓的变焦操作，来拍摄附近的场景或远距离的场景的图像，以便可以将其图像数据存储在临时存储部分23。

图7A示出了通过普通的成像所获得的图像的示例，而图7B示出了放大的图像的示例。

例如，根据用户操作，系统控制器10可以指示成像信号处理部分15对从成像部分3获取的图像执行放大处理，以获得如图7B中所示的放大的图像的图像数据，并将放大的图像的图像数据存储在临时存储部分23中。虽然在图中未示出，系统控制器10还能够指示成像信号处理部分15对图像进行缩小处理，并将所产生的缩小的图像存储在临时存储部分23中。

图8A示出了例如当用户位于有孩子正在睡觉的昏暗的房间时通过普通的成像获得的图像。由于用户位于昏暗的房间中，通过普通的成像所获得的该图像不能清楚地显示出孩子等等。

在此情况下，系统控制器10能够指示成像控制部分11(即，成像部分3或成像信号处理部分15)增大红外成像灵敏度，以获得如图8B中所示的红外图像的图像数据，在该图像中，可识别正在昏暗的房间中睡觉的孩子的脸部等。

图9A示出了通过普通的成像所获得的图像。在此情况下，系统控制器10能够指示成像控制部分11(即，成像部分3或成像信号处理部分15)增大紫外线成像灵敏度，以获得如图9B中所示的图像的图像数据，在该图像中，显示了紫外线分量。

成像系统能够获得上述类型的图像数据，包括通过普通的成像所获得的图像的图像数据。通过成像系统所获得的各种状态的图像数据临时存储在临时存储部分23中。

勿庸置疑，可以通过成像系统所获得的图像数据不局限于上述几种图像数据类型。通过成像部分3和成像信号处理部分15的操作执行的控制处理，也可以在各种成像模式下获得各种其他类型的图像数据。

可以想象很多种形式的拍摄的图像，如：远摄图像；广角图像；在远摄的极端和广角的极端之间的范围内进行放大或缩小所拍摄的图像；放大的拍摄图像；缩小的拍摄图像；利用不同的帧速率(例如，利用高帧速率拍摄的或利用低帧速率拍摄的)拍摄的图像；利用增大的亮度拍摄的图像；利用减小的亮度拍摄的图像；利用不同的对比度拍摄的图像；利用不同的清晰度拍摄的图像；利用增大的成像灵敏度拍摄的图像；利用增大的红外线成像灵敏度拍摄的图像；利用增大的紫外线成像灵敏度拍摄的图像；在特定波长范围被裁去的情况下拍摄的图像；应用了效果的拍摄图像，如马赛克图像、亮度反转图像、软焦点图像、图像的一部分被强调显示的图像，以及具有不同总体色彩氛围的图像；以及静止拍摄图像。

[4.重放操作]

下面将说明重放操作。

在本实施例中，通过不断成像而获得的图像数据被存储在临时存储部分23中，可以使用存储在临时存储部分23中的图像数据来呈现不久前的场景的重放显示。即，可以重放存储在临时存储部分23中的图像数据的范围内的过去场景。

例如，在用户偶然目睹了交通事故的情况下，用户能够观看事故的场景重放图像。此外，在观看体育比赛时，用户能够观看刚刚过去的比率的重放图像。

图11A和11B中示出了在重放操作时在显示部分2上呈现的显示的示例。在重放操作时，系统控制器10使图像数据被从临时存储部分23读出，并使所读取的图像数据通过图像输入/输出控制部分27提供到显示图像处理部分12。然后，显示图像处理部分12例如，拆分显示部分2的屏幕，并使重放图像(即，所读取的图像数据)显示在屏幕的一部分上。

图11A示出了显示图像处理部分12在父屏幕区域AR1内设置了子屏幕区域AR2，并在区域AR2中显示重放图像而使区域AR1处于透视状态的示例性的情况。在此情况下，用户能够利用区域AR2观看过去的场景的重放图像，而利用处于透视状态的区域AR1观看当前场景。

图11B示出了显示图像处理部分12已将屏幕拆分或上下区域AR1和AR2，并在区域AR2中显示重放图像而使区域AR1处于透视状态的示例性的情况。同样在此情况下，用户能够利用区域AR2观看过去的场景的重放图像，而利用处于透视状态的区域AR1观看当前场景。

如上所述，例如，显示部分2的屏幕被分成父子屏幕或分成两个部分，并且呈现重放图像的显示，同时使显示部分2的屏幕的一部分处于透视状态。勿庸置疑，可以根据用户操作，改变屏幕内的子屏幕的位置和子屏幕的大小。显示部分2的屏幕还可以被分成左右区域AR1和AR2。还可以通过用户操作将区域AR1的面积和区域AR2的面积设置为不相等。此外，可以根据用户操作执行显示位置的切换。例如，父屏幕和子屏幕可以彼此替换。此外，通过屏幕拆分所获得的区域可以彼此替换。

此外，也可以不使区域AR1进入透视状态，而使用它来显示当前通过由成像系统进行成像所获得的图像(即，当前场景的图像，相当于在屏幕处于透视状态的情况下用户将看到的场景)。

更进一步，在重放时，重放图像可以显示在显示部分2的整个屏幕上。即，整个屏幕可以从透视状态(或通过普通的成像所获得的图像正在被显示的状态)切换到显示重放图像的状态。

现在将参考图10B在下面说明当通过用户操作已经发出了重放请求时系统控制器10对临时存储部分23进行的示例性控制。

图10B示出了临时存储部分23的存储区。如前所述的，由成像系统不断地获得的图像数据连续地以环形存储的方式存储在存储区的开头地  AdST和结束地址AdED之间，同时写入地址指针W-Ad移动。

假设，当写入地址指针W-Ad指向地址AdX并且图像数据存储在地址AdX处时，用户执行了发出重放请求的操作。

在此情况下，系统控制器10继续增大写入地址指针W-Ad并写入通过成像所获得的图像数据，并使写入地址指针W-Ad继续从地AdX向前移动。同时，系统控制器10使读取地址指针R-Ad从地址AdX向回移动。临时存储部分23执行对由读取地址指针R-Ad表示的地址处的图像数据进行读取的处理，并将所读取的图像数据通过图像输入/输出控制部分27提供到显示图像处理部分12，以便例如如图11A和11B所示显示在显示部分2的区域AR2中。

此时，读取地址指针R-Ad的速度可以改变(减少)为1.5倍速度、双倍速度、三倍速度等，从而图像将从当前场景到逐步往前的场景以快倒模式显示在显示部分2上。

当观看在快倒模式下回放的图像时，用户搜索用户希望重放的场景的开头，并在用户希望重放开始的点处执行重放开始操作。

例如，假设当读取地址指针R-Ad已经倒回到地址AdY时用户已经执行了重放开始操作。在此情况下，在用户已经执行了重放开始操作时，系统控制器10使读取地址指针R-Ad开始在正常的移动方向上并以正常速度增大。结果，临时存储部分23开始以正常速度，从地址 AdY开始，读取图像数据，相应地，从存储在地址AdY处的图像开始的一系列重放图像开始显示在显示部分2上。

例如，假设当读取地址指针R-Ad已经到达地址AdZ时用户在其后已经执行了重放结束操作。在此情况下，系统控制器10此时结束重放。即，系统控制器10发出结束在临时存储部分23中的读取和在显示部分2上显示重放图像的处理的指令。

在此情况下，存储在地址AdY和AdZ之间的图像对应于用户希望再次观看的重放图像。

尽管上文为了说明描述了一个简单的示例，但可能会发生这样的情况：当用户正在观看以快倒模式回放的图像时，搜索用户希望重放开始的点，快速回放走得太远，因此，用户希望反向地快进。此外，用户还可能希望不以正常速度而是以比较低的速度观看重放图像。此外，用户还可能希望暂停重放或反复地播放某些或全部重放图像。因此，优选地，可以根据用户操作，改变是增大还是减小读取地址指针R-Ad。同样优选地，还可以根据用户操作，改变增大或减小的速率，或暂停重放。

至于用户操作，可以提供与重放相关的操作单元。此外，例如系统控制器10可以将由加速度传感器等检测到的用户行为识别为用户操作。

例如，系统控制器10可以将用户的轻拍成像设备1两次的行动视为重放请求操作和重放结束操作。此外，例如，系统控制器10可以将用户的轻拍成像设备1一次的行动视为重放开始操作。

此外，用户的从左侧或右侧轻拍成像设备1的行动可以被视为快进操作、快倒操作、快速重放操作、慢速重放操作等。例如，用户轻拍成像设备1的右侧的行动可以被视为向前重放操作，而用户轻拍成像设备1的左侧的行动可被视为倒转重放操作，并且可以根据轻拍的次数确定重放的速度(慢速、普通、双倍等)。

勿庸置疑，可以想象各种其他示例。例如，用户的摇动他的或她的头部的行动可以被视为快进/快倒操作。

在图10B中，用户首先搜索当前场景的图像，然后搜索逐步往前的场景的图像，以发现用户希望重放开始的点。然而，也可以如此设置：当用户已经执行了重放操作时，以指定的时间之前的场景的图像开始重放。此外，还可以如此设置：用户能够通过轻拍的次数等，指定重放开始的点，如三十秒之前、一分钟之前、三分钟之前、五分钟之前等。

[5.选择待存储的图像的示例性方式]

如上所述，系统控制器10作出关于存储条件的判断，并且当已经满足了存储条件时，从临时存储部分23提取图像数据以执行存储处理(即，将所提取的图像数据记录在存储部分25中，或通过通信部分26将所提取的图像数据传输到外部设备)。这里，将说明存储条件的示例以及响应于满足这样的存储条件而提取的图像的范围。

·进行重放

当用户开始对他或她刚刚看到的场景感兴趣时或当他或她由于某种原因希望再次观看某场景时，用户将执行重放操作。因此，当根据用户操作已经执行了重放操作时，系统控制器10可以判断为已经满足存储条件。在此情况下，可以提取用户在重放操作过程中已经再次观看了的图像作为待存储的图像。例如，在上述图10B的示例的情况下，提取存储在地址AdY和AdZ之间的范围中的图像数据，作为待存储的图像。

·与成像系统相关的操作

用户能够执行指示成像系统的操作，使其执行远摄/广角变焦、图像放大/缩小、利用增大的红外线灵敏度进行成像、利用增大的紫外线灵敏度进行成像、改变帧速率、应用图像效果等。认为当用户正在观看他或她感兴趣的场景时用户执行这样的操作是合理的。因此，当用户已经执行了这样的与成像系统相关的操作，从而已经在成像系统中执行了诸如远摄/广角变焦等或信号处理之类的操作时，系统控制器10可以判断为已经满足存储条件。在此情况下，可以提取在诸如远摄/广角变焦等或信号处理之类的操作连续执行的时间段内所获得的图像数据，作为待存储的图像。

·根据生物信息(生物触发的出现)进行判断

可以根据由生物传感器21检测到的生物信息，检测用户的状态，如紧张状态、兴奋状态、或舒适状态。当系统控制器10已经判断用户处于紧张状态等时，系统控制器10可以判断为已经满足存储条件。这是因为用户在此时观看到的场景可以被认为给了用户的感觉某种刺激。例如，当用户在观看体育比赛时变得兴奋或兴奋得非常狂热时，当用户目睹了交通事故等时，当用户遇到了喜欢的人、名人等时，当用户感到不舒服或害怕时，或当用户吃惊时检测到的生物信息所表示的他或她的反应，可以被视为满足存储条件的触发。这使得可以存储对于用户重要的场景。

在用户在某一时间段内连续地兴奋的情况下，可以提取在持续获得表示用户处于兴奋状态的生物信息的时间段内所获得的图像数据作为待存储的图像。在获得了表示用户吃惊了一会儿的生物信息的情况下，可以提取在吃惊的那会儿周围某一时间段内所获得的图像数据作为待存储的图像。

尽管可以通过诸如脑电波、血压或皮肤电反应之类的涉及用户的生物信息来检测兴奋状态，但是，用户的状态也可以根据由视觉传感器检测到的瞳孔的状态或视线的移动来确定。此外，由加速度传感器、振动传感器等检测到的用户的身体的运动也可以用来确定用户的状态。

脉搏的加快等有时是由于紧张或兴奋所引起的，而有时是由诸如跑步之类的锻炼引起的。为了区别这样的原因，可以另外参考由加速度传感器等所获得的信息。

·根据外部声音(声音触发的出现)进行判断

当音频分析部分24在分析外部声音的同时检测到出现了非常响的声音，如巨大的欢呼声、事故的声音、或警报声或出现特定的声音时，系统控制器10可以判断为已经满足存储条件。即，检测到出现这样的声音可以被视为一种满足存储条件的触发。

可以如此设置：在音频分析部分24中注册特定的声音，如熟人的声音、电子声音、宠物的叫声或自然的声音，并且当检测到注册的特定声音时，系统控制器10判断为已经满足存储条件。

同样在这样的情况下，可以提取在使存储条件得以满足的这样的声音持续被检测到的时间段内所获得的图像数据或在判断为已经满足存储条件的时间周围的某一时间段内所获得的图像数据，作为待存储的图像。

上文已经列举了判断用户感兴趣的场景或用户希望再次观看的场景的示例，即，涉及存储条件的判断的示例。然而，应当注意，存在许多其他方式来作出关于就存储条件的判断。

[6.示例性过程]

现在，将在下面说明用于实现根据本实施例的成像设备1的操作的系统控制器10所执行的示例性控制过程。这里假设，使用了如图1所显示的显示部分2被设置在用户的眼睛前面的成像设备1。

图12示出了由系统控制器10例如在成像设备1的通电和断电之间执行的过程。此过程还可以被视为在当用户在成像设备1通电之后执行了启动操作的操作的时间和当用户执行了结束操作的操作的时间之间执行的过程。

在作为打开成像设备1等的电源的结果而开始进行操作的情况下，系统控制器10在步骤F101中首先开始进行成像并临时存储通过成像所获得的图像数据。具体来说，系统控制器10控制成像系统以开始普通的成像操作，使通过成像所获得的图像数据提供到临时存储部分23，并控制临时存储部分23以开始以环形存储的方式开始存储操作。

此后，继续是成像和将通过成像所获得的图像数据向临时存储部分23中的存储，直到作为关闭成像设备1等的电源的结果而结束操作。

在步骤F102中，系统控制器10指示显示控制部分14以使显示部分2的整个屏幕进入透视状态。

作为步骤F101和F102的处理的结果，用户开始能够通过处于透视状态的显示部分2以通常的方式观看他的或她的视野内的场景，而用户的视野内的场景不断地被成像和临时存储。

在以上述方式开始操作之后，系统控制器10执行步骤F103、F104、F105、F106、F107和F108中的监视处理循环中的监视处理。

在步骤F103中，系统控制器10监视用户是否已经执行了请求重放操作的操作。

在步骤F104中，系统控制器10监视用户是否已经执行了与成像相关的操作。这里所使用的术语“与成像相关的操作”是指将由成像系统所获得的图像数据从通过普通成像所获得的图像数据切换到另一种类型的图像数据的操作。这样的操作的示例包括远摄/广角变焦操作、图像放大/缩小操作、调节成像帧速率的操作、改变成像灵敏度的操作、增大红外线成像灵敏度的操作、增大紫外线成像灵敏度的操作，以及诸如应用图像效果之类的图像处理操作。此外，将成像的状态从这样的非普通状态切换回普通状态的操作也是与成像相关的操作的一个示例。

在步骤F105中，系统控制器10根据从音频分析部分24获取的信息监视是否已经出现了声音触发(作为音频分析的结果，满足存储条件)。

在步骤F106中，系统控制器10根据从生物传感器21获取的信息监视是否已经出现了生物触发(即，根据生物信息，满足存储条件)。

在步骤F107中，系统控制器10判断内部存储标志是否为“打开”。

在步骤F108中，系统控制器10监视作为例如断电操作或由用户执行的结束操作的结果是否应该结束操作。

当用户已经执行了重放请求操作时，系统控制器10从步骤F103进入步骤F109，并执行重放过程。此重放过程是用于执行以上参考图10B所述的操作的过程，并如图13所示。

首先，在步骤F201中，系统控制器10执行开始以快倒模式显示图像的控制。具体来说，系统控制器10控制临时存储部分23读取图像数据，同时减少读取地址指针R-Ad，以便例如大约以两倍的速度从写入地址指针W-Ad的当前位置向后移动。此外，系统控制器10指示显示控制部分14使从临时存储部分23读取的图像数据显示在屏幕的一部分上，如图11A或11B所示的区域AR2。注意，在快倒模式下回放的图像可以显示在显示部分2的整个屏幕上。

作为步骤F201的处理的结果，用户能够观看在快倒模式下回放的图像(即，当前场景的图像和逐步往前的场景的图像)。当观看在快倒模式下回放的图像时，用户搜索用户希望再次观看的场景的开始点，并在该开始点执行重放开始操作。

在检测到重放开始操作时，系统控制器10从步骤F202进入步骤F203，并执行开始显示重放图像的控制。具体来说，系统控制器10控制临时存储部分23以改变读取地址指针R-Ad的模式，使得读取地址指针R-Ad开始以正常速度增大(即，在时间前进的正常方向上移动)，并读取图像数据。结果，以正常方式回放重放图像，并显示在显示部分2，用户能够再次观看不久前的场景。注意，虽然在图13未显示，此时，重放图像可以根据用户操作，以低速度回放或以诸如1.5倍的速度之类的高速回放。

当此后检测到用户已经执行了重放结束操作或当此后已经完成重放时，系统控制器10从步骤F204进入步骤F205。例如，当重放进行直到到达在用户执行了重放请求操作时获得的图像(即，在用户请求重放时写入地址指针W-Ad所表示的地址)为止时，或当，在以高速执行重放的情况下，重放更进一步进行从而达到在当前时间获得的图像时(即，在当前时间由写入地址指针W-Ad所表示的地址)，重放完成。

当已经执行了重放结束操作时或当重放已经完成时，系统控制器10在步骤F205中执行重放结束处理。具体来说，系统控制器10控制临时存储部分23结束对图像数据的读取，并指示显示控制部分14将显示部分2的整个屏幕返回到透视状态。

如前所述，系统控制器10将重放操作的执行视为满足存储条件。因此，在步骤F206中，系统控制器10确定伴随重放操作的执行而存储的图像数据的存储范围。此外，系统控制器10还生成元数据。此元数据包括代表由于执行了重放操作已经确定待存储的图像数据的信息。此外，系统控制器10还打开存储标志。

在执行上述处理之后，系统控制器10返回到图12中的步骤F103到F108的监视循环。

紧随在执行了上述重放过程之后，由于存储标志已经被打开，系统控制器10从图12中的步骤F107进入步骤F113。然后，在步骤F113中，系统控制器10执行存储处理。

作为存储处理，系统控制器10控制存储部分25以将存储范围内的图像数据和元数据记录在存储介质上。即，在此情况下，系统控制器10使在图13中的步骤F206中确定的存储范围内的图像数据，例如，在重放时显示的图像数据，从临时存储部分23传输到存储部分25，并将在步骤F206中生成的元数据传输到存储部分25。然后，系统控制器10控制存储部分25以将元数据添加到图像数据，对所产生的数据进行编码以便于记录，并将所产生的数据记录在存储介质上。

注意，在如图3所示成像设备1包括存储部分25的情况下，执行上述控制，在如图4所示成像设备1包括通信部分26而不是存储部分25的情况下，系统控制器10执行使存储范围内的图像数据和元数据进行编码以便进行传输的控制，并通过通信部分26将所产生的数据传输到外部设备。

在完成步骤F113中的存储处理之后，系统控制器10在步骤F114中关闭存储标志，并返回到步骤F103到F108的监视循环。

当用户已经执行了与成像相关的操作时，系统控制器10从步骤F104进入步骤F110，并执行成像系统控制过程。图14示出了成像系统控制过程。

首先，在步骤F301中，系统控制器10根据与成像相关的操作，执行与成像系统相关的控制。即，系统控制器10使由用户请求的操作被执行。

例如，在用户已经执行了远摄或广角变焦操作的情况下，系统控制器10指示成像控制部分11执行变焦操作，并驱动成像部分3的变焦透镜。

在用户已经执行了图像放大或缩小的操作的情况下，系统控制器10指示成像控制部分11执行图像放大或缩小处理，从而使成像信号处理部分15对所拍摄的图像数据执行放大处理或缩小处理。

在用户已经执行了调节成像帧速率的操作的情况下，系统控制器10指示成像控制部分11改变帧速率，从而改变成像部分3和成像信号处理部分15的帧速率。

在用户已经执行了改变成像灵敏度的操作、增大红外线成像灵敏度的操作或增大紫外成像灵敏度的操作的情况下，系统控制器10指示成像控制部分  11改变成像灵敏度，从而改变从成像部分3的成像器件获取的信号的灵敏度(例如，改变从成像器件中读取的信号的增益)。

在用户已经执行了应用图像效果的操作的情况下，系统控制器10指示成像控制部分11对图像执行效果处理，从而使成像信号处理部分15对所拍摄的图像数据执行图像效果处理。

在用户已经执行了从任何一个非普通状态(如，远摄/广角变焦状态、图像放大/缩小状态、帧速率改变状态、灵敏度改变状态或图像效果状态)切换回普通状态的操作的情况下，系统控制器10指示成像控制部分11进行普通的成像，从而将成像部分3和成像信号处理部分15的操作返回到进行普通成像的状态。

如上所述，系统控制器10根据由用户执行的与成像相关的操作，控制成像系统的操作。当在步骤F301中系统控制器10控制了以普通方式进行成像的成像系统的操作，以便执行远摄/广角变焦、图像放大/缩小、改变帧速率、改变灵敏度、应用图像效果等时，系统控制器10从步骤F302进入步骤F303，并且在此情况下，系统控制器10使所拍摄的图像显示在显示部分2上。即，系统控制器10控制图像输入/输出控制部分27将从成像系统获取的图像数据提供到显示图像处理部分12，而同时如以前一样，继续将从成像系统获取的图像数据提供到临时存储部分23，并且还指示显示控制部分14显示所拍摄的图像数据。

然后，系统控制器10返回到步骤F103到F108中的监视循环。

下面，为了便于进行说明，执行了远摄/广角变焦、图像放大/缩小、改变帧速率、改变灵敏度、应用图像效果等的成像操作的状态，将被称为“特殊成像状态”，由此，与普通的成像状态区别开来。普通的成像状态是指其中获得相当于通过显示部分2在透视状态下观看的图像的图像的成像操作的状态，如图6B所示。

当用户已经执行了将成像操作的状态切换到特殊成像状态的操作(如变焦操作)时，步骤F303的处理使显示部分2从透视状态切换到显示变焦图像等的状态，以便用户能够观看所拍摄的图像。即，如果用户执行远摄/广角变焦、图像放大/缩小、改变帧速率、改变成像灵敏度、以增大的红外线灵敏度进行成像、以增大的紫外线灵敏度进行成像，应用图像效果等的操作，用户能够利用显示部分2观看相应的在特殊成像状态下所获得的拍摄图像(例如，如以上参考图6A到9B所述的图像中的一个)。

注意，在此情况下，所拍摄的图像可以显示在显示部分2的整个屏幕上，或与图11A和11B所示的重放图像的情况相同，所拍摄的图像可以显示在例如区域AR2的一部分屏幕上，而区域AR1处于透视状态。

在步骤F103中检测到的与成像相关的操作是将成像操作的状态从特殊成像状态切换回普通的成像状态的操作的情况下，系统控制器10控制成像系统返回到如上所述的图14中的步骤F301中的普通的成像状态。在此情况下，系统控制器10从步骤F302进入步骤F304。

在步骤F304中，系统控制器10指示显示控制部分14以控制显示部分2的整个屏幕返回到透视状态。

系统控制器10将作为用户操作的结果而将成像操作的状态切换到特殊成像状态视为满足存储条件。因此，在步骤F305中，系统控制器10根据直到不久之前已经执行的特殊成像，确定待存储的图像数据的存储范围。此外，系统控制器10还生成元数据。此元数据包括表示由于特殊成像状态而确定待存储的图像数据的信息，如表示，作为已经执行的特殊成像，远摄变焦、广角变焦、图像放大、图像缩小、帧速率的改变、成像灵敏度的改变、利用增大的红外线灵敏度进行成像、利用增大的紫外线灵敏度进行成像，应用图像效果之类的信息。

此外，系统控制器10还打开存储标志。

在执行上述处理之后，系统控制器10返回到图12中的步骤F103到F108中的监视循环。

紧随在成像操作的状态从特殊成像状态切换回普通的成像状态之后，由于存储标志已经被打开，系统控制器10从步骤F107进入步骤F113。然后，在步骤F113中，系统控制器10执行存储处理。

作为存储处理，系统控制器10控制存储部分25以将元数据和存储范围内的图像数据记录在存储介质上。即，在此情况下，系统控制器10使在图14的步骤F305中确定的存储范围内的图像数据，例如，通过在特殊成像状态下进行成像所获得的图像数据，从临时存储部分23传输到存储部分25，并将在步骤F305中生成的元数据传输到存储部分25。然后，系统控制器10控制存储部分25以将元数据添加到图像数据，对所产生的数据进行编码以便于记录，并将所产生的数据记录在存储介质上。

注意，在成像设备1包括通信部分26的情况下，系统控制器10可以执行使元数据和存储范围内的图像数据进行编码以便进行传输的控制，并通过通信部分26将所产生的数据传输到外部设备。

在完成步骤F113中的存储处理之后，系统控制器10在步骤F114中关闭存储标志，并返回到步骤F103到F108的监视循环。

顺便提及，特殊成像状态可以持续比较长的时间。例如，变焦状态等可以持续得比数据存储在临时存储部分23中的时间段长一些。注意，此时间段取决于临时存储部分23的存储容量。因此，例如，如果在成像的状态返回到普通的成像状态之后在步骤F113中执行存储处理，则待存储的图像数据的一部分可能已经丢失。

因此，可能需要修改上述过程，以便当在成像的状态切换到特殊成像状态之后某一时间段消逝之后，将中断地执行步骤F305和F113的处理。

此外，虽然图14中未示出，还可能发生这样的情况：成像的状态从某一特殊成像状态切换到另一个特殊成像状态，或请求了复合的操作。例如，成像的状态可以从远摄变焦状态切换到利用不同的帧速率进行了成像的状态。此外，可以请求利用增大的红外线灵敏度进行成像，而同时应该保留远摄变焦状态。优选地，当操作的模式已经被修改时，中断地执行步骤F305和F113的处理，而同时成像的状态维持在特殊成像状态。

当系统控制器10已经判断在步骤F103到F108的监视循环中已经出现了声音触发时，系统控制器10从步骤F105进入到步骤F111。然后，系统控制器10确定伴随声音触发的出现待存储的图像数据的存储范围。此外，系统控制器10还生成元数据。此元数据包括代表由于出现声音触发已经确定待存储的图像数据的信息，以及声音触发的内容(即，通过音频分析部分24所获得的分析信息)。此外，系统控制器10还打开存储标志。

在执行上述处理之后，系统控制器10返回到步骤F103到F108的监视循环。紧随在此后，由于存储标志已经被打开，系统控制器10从步骤F107进入步骤F113，并执行存储处理。

作为存储处理，系统控制器10控制存储部分25以将元数据和存储范围内的图像数据记录在存储介质上。即，在此情况下，系统控制器10使在步骤F111中确定的存储范围内的图像数据从临时存储部分23传输到存储部分25，并将在步骤F111中生成的元数据传输到存储部分25。然后，系统控制器10控制存储部分25  将元数据添加到图像数据，对所产生的数据进行编码以便于记录，并将所产生的数据记录在存储介质中。

在成像设备1包括通信部分26的情况下，系统控制器10可以执行控制，以对元数据和存储范围内的图像数据进行编码以便进行传输，并通过通信部分26将所产生的数据传输到外部设备。

在完成步骤F113中的存储处理之后，系统控制器10在步骤F114中关闭存储标志，并返回到步骤F103到F108的监视循环。

当系统控制器10已经判断在步骤F103到F108的监视循环中已经出现了生物触发时，系统控制器10从步骤F106进入到步骤F112。然后，系统控制器10确定伴随生物触发的出现而要存储的图像数据的存储范围。此外，系统控制器10还生成元数据。此元数据包括代表由于出现生物触发已经确定待存储的图像数据的信息，以及生物触发的内容(例如，由生物传感器21检测到的信息，根据检测到的信息而关于用户的状态进行的判断的内容等)。此外，系统控制器10还打开存储标志。

在执行上述处理之后，系统控制器10返回到步骤F103到F108的监视循环。紧随在此后，由于存储标志已经被打开，系统控制器10从步骤F107进入步骤F113，并执行存储处理。

作为存储处理，系统控制器10控制存储部分25以将元数据和存储范围内的图像数据记录在存储介质上。即，在此情况下，系统控制器10使在步骤F112中确定的存储范围内的图像数据从临时存储部分23传输到存储部分25，并将在步骤F112中生成的元数据传输到存储部分25。然后，系统控制器10控制存储部分25以将元数据添加到图像数据，对所产生的数据进行编码以便于记录，并将所产生的数据记录在存储介质上。

在成像设备1包括通信部分26的情况下，系统控制器10可以执行控制，以对元数据和存储范围内的图像数据进行编码以便进行传输，并通过通信部分26将所产生的数据传输到外部设备。

在完成步骤F113中的存储处理之后，系统控制器10在步骤F114中关闭存储标志，并返回到步骤F103到F108的监视循环。

当关闭电源或完成操作时，系统控制器10从步骤F108进入步骤F115，并结束成像系统中的成像操作和将图像数据向临时存储部分23的存储，从而完成一系列处理。

根据上述过程，进行不断的成像和对通过成像所获得的图像数据的临时存储，而在临时存储的图像数据中，用户感兴趣的图像或用户希望以后再次观看的图像的图像数据永久地存储在存储部分25中(或通过通信部分26传输到外部设备并永久地存储在其中)。

此外，用户能够通过重放操作来观看他或她刚刚看到的场景。

注意，在上述示例性过程中假设，当成像系统已经进入特殊成像状态或当执行重放图像的显示时，图像显示在显示部分2的一部分上或整个显示部分2上，否则，使显示部分2的整个屏幕处于透视状态。然而，也可以在显示部分2的整个屏幕上显示通过普通的成像所获得的图像数据，而不使显示部分2的整个屏幕处于透视状态。

还要注意，在如图2所示成像设备1包括彼此分开的显示设备部分30和成像设备部分40的情况下，不需要执行使显示设备部分30进入透视状态的处理。在此情况下，可以如此设置：在平时，显示设备部分30的屏幕处于非活动状态，或者通过普通的成像所获得的图像数据显示在其上。

[7.专用于重放的成像设备]

根据如上所述的本实施例的成像设备1具有永久地存储他的或她的日常生活中的用户感兴趣的场景的图像数据的能力。相比之下，还可以想象仅仅能够重放，例如，用户感兴趣的刚刚过去的场景的成像设备。

现在，将在下面参考图15和16说明专用于重放的成像设备1A。

图15示出了专用于重放的成像设备1A的示例性结构。注意，在图15中，给在图3、4或5中有其对等组件的组件指定了与图3、4或5中的其对等组件相同的附图标记，并省略了对其的说明。成像设备1A包括系统控制器10、成像部分3、成像信号处理部分15、成像控制部分11、图像输入/输出控制部分27、显示图像处理部分12、显示驱动部分13、显示控制部分14、显示部分2、临时存储部分23，以及操作输入部分20。即，成像设备1A与图3中所示出的成像设备1的不同之处在于，省略了音频输入部分6、音频分析部分24、音频输入/输出控制部分28、音频信号处理部分16、音频输出部分5、存储部分25，以及生物传感器21。

成像系统(即，成像部分3、成像信号处理部分15，以及成像控制部分11)进行不断的成像，而通过不断的成像所获得的图像数据，通过图像输入/输出控制部分27提供到临时存储部分23，并临时存储在临时存储部分23中。

当用户已经通过操作输入部分20执行了重放操作时，读取存储在临时存储部分23中的图像数据，并将其提供到显示图像处理部分12，重放图像显示在显示部分2上。

现在，在下面将参考图16说明成像设备1A的系统控制器10所执行的过程。

在作为成像设备1A等被打开电源的结果而开始操作的情况下，系统控制器10在步骤F401中首先开始成像并临时存储通过成像所获得的图像数据。具体来说，系统控制器10控制成像系统以开始普通的成像操作，使通过成像所获得的图像数据提供到临时存储部分23，并控制临时存储部分23以开始以环形存储的方式进行的存储操作。

此后，继续该成像和将通过成像所获得的图像数据向临时存储部分23中的存储，直到作为关闭成像设备1A等的电源的结果而结束操作。

在步骤F402中，系统控制器10指示显示控制部分14以使显示部分2的整个屏幕进入透视状态。

在以上述方式开始操作之后，系统控制器10执行步骤F403和F404的监视处理循环中的监视处理。

在步骤F403中，系统控制器10监视用户是否已经执行了重放操作。

在步骤F404中，系统控制器10监视作为例如断电操作或由用户执行的结束操作的操作而应该结束操作。

当用户已经执行了重放请求操作时，系统控制器10从步骤F403进入步骤F405，并开始重放过程。

首先，在步骤F405中，系统控制器10执行开始以快倒模式显示图像的控制。具体来说，系统控制器10控制临时存储部分23读取图像数据，而同时减少读取地址指针R-Ad，以便以例如大约两倍的速度从写入地址指针W-Ad的当前位置向后移动。此外，系统控制器10还指示显示控制部分14以使从临时存储部分23读取的图像数据显示在屏幕的一部分上，如图11A或11B所示的区域AR2。注意，在快倒模式下回放的图像可以显示在显示部分2的整个屏幕上。

作为步骤F405的处理的结果，用户能够观看在快倒模式下回放的图像(即，当前场景的图像和逐步往前的场景的图像)。当观看在快倒模式下回放的图像时，用户搜索用户希望再次观看的场景的开始点，并在开始点执行重放开始操作。

在检测到重放开始操作时，系统控制器10从步骤F406进入步骤F407，并执行开始显示重放图像的控制。具体来说，系统控制器10控制临时存储部分23以改变读取地址指针R-Ad的模式，以便读取地址指针R-Ad开始以正常速度增大(即，在时间前进的正常方向移动)，并读取图像数据。结果，以正常方式回放重放图像，并将其显示在显示部分2上，用户能够再次观看不久前的场景。注意，此时，重放图像可以根据用户操作，以低速回放或以诸如1.5倍的速度之类的高速回放。

当此后检测到用户已经执行了重放结束操作时或当此后已经完成重放时，系统控制器10从步骤F408进入步骤F409，并执行重放结束处理。具体来说，系统控制器10控制临时存储部分23结束图像数据的读取，并指示显示控制部分14将显示部分2的整个屏幕返回到透视状态。

在执行上述处理之后，系统控制器10返回到步骤F403和F404的监视循环。

当关闭电源或完成操作时，系统控制器10从步骤F404进入步骤F410，并结束成像系统的成像操作和将图像数据向临时存储部分23中的存储，从而完成一系列处理。

根据上述过程，进行不断的成像和通过成像所获得的图像数据的临时存储，而当用户希望再次观看刚刚过去的场景时，用户可以通过执行重放操作再次观看他或她刚刚看到的场景。即，尽管成像设备1A结构简单，但成像设备1A是能够在用户希望观看重放图像时显示它们的成像设备。

注意，在以上的示例性过程中假设，当执行重放图像的显示时，图像显示在显示部分2的一部分上或整个显示部分2上，否则，使显示部分2的整个屏幕处于透视状态。然而，也可以在显示部分2的整个屏幕上显示通过由成像系统进行成像所获得的图像数据，而不使显示部分2的整个屏幕处于透视状态。

还要注意，在如图2所示独立地提供显示设备部分30的情况下，不需要执行使显示设备部分30进入透视状态的处理。在此情况下，可以如此设置：在平时，显示设备部分30的屏幕处于非活动状态，或者通过由成像系统进行成像所获得的图像数据显示在其上。

[8.实施例的效果]

在根据本发明的上述实施例的成像设备1中，临时存储了用户在他的或她的日常生活中看到的场景的图像数据，而当已经满足预先确定的存储条件时，执行将图像数据与元数据一起存储的存储处理。

因此，可以从通过不断的成像所获得的这样的日常的场景的图像数据中提取用户感兴趣的场景或用户希望以后再次观看的场景的图像数据，并适当地存储所提取的图像数据，以使图像数据可用。此外，向所存储的图像数据中添加的元数据还用于，当以后使用所存储的图像数据时搜索所希望的图像(场景)。

具体来说，下面的情况是可能的。

在根据本发明的上述实施例的成像设备1中，用户所看到的每个场景都被临时存储下来。因此，用户能够通过重放来再次观看刚刚过去的场景。

例如，在用户正在观看运动场、足球场、棒球场等中的体育比赛的情况下，用户通常不能如在用户通过电视播放观看体育比赛时那样观看重放。然而，如果用户佩带成像设备1，用户则能够例如任意地观看运动员的比赛的重放。

此外，可能会发生这样的情况：在他的或她的日常生活中，用户心不在焉，并错过了某一场景，用户碰巧错过了感兴趣的人，或用户目睹了交通事故等。在这样的情况下，以及在各种其他情况下，用户能够日后通过重放来观看刚刚过去的场景。

由于假设临时存储部分23用于进行临时存储，临时存储部分23可以用于，以环形存储的方式使用其存储区，存储通过成像不断地获得的图像，而不需要有巨大的存储容量。可以根据例如可以被重放的图像数据应该延伸到多长时间以前，在设计阶段确定临时存储部分23的存储容量。

此外，通过执行与成像相关的操作，用户能够利用显示部分2观看通过在特殊成像状态下进行成像所获得的图像，如远摄图像、广角图像、放大的图像、利用增大的红外线成像灵敏度拍摄的图像、利用增大的紫外线成像灵敏度拍摄的图像，或利用高帧速率拍摄的图像。如此，用户能够任意观看可能不能用正常的视觉看到的场景。

此外，当用户已经进行发出了在特殊成像状态下进行重放或进行成像的指令的操作时，作为重放或成像的对象的场景可能是用户感兴趣的场景。由于执行了使这样的场景的图像数据永久地存储在存储部分25中(或通信部分26与其进行进行通信的外部设备中)的存储处理，因此，存储了用户感兴趣的场景的图像。因此，用户能够日后播放该场景的图像以再次观看该场景。用户还能够将这样的已存储的图像编译为例如记录用户的行动历史或记忆的视频相册等。

类似地，生物触发、声音触发等也启动存储图像数据的存储处理。因此，无需用户执行任何特定操作，可以永久地存储使用户感兴趣的场景或对于用户来说重要的场景的图像数据。

如此，实现了能够记录用户的日常生活中重要场景的图像的成像设备。

本领域技术人员应该理解，可以根据设计要求及其他因素，进行各种修改、组合、子组合和变化，只要它们在所附的权利要求或其等效内容的范围内即可。

Claims (43)

1.一种成像设备，包括：

成像装置，用于对位于用户视线方向的场景进行成像以获取该场景的图像数据；

临时存储装置，用于存储通过由所述成像装置进行成像所获得的图像数据；以及

控制装置，用于控制所述临时存储装置以存储通过由所述成像装置进行成像所获得的图像数据，以及，当已经满足预先确定的存储条件时，从所述临时存储装置提取待存储的图像数据，并向所提取的图像数据中添加元数据以执行存储处理。

2.根据权利要求1所述的成像设备，其中，所述临时存储装置以环形存储的方式使用存储区来连续地存储图像数据。

3.根据权利要求1所述的成像设备，进一步包括：

用于在非易失存储介质中存储数据的存储装置；

其中，作为存储处理，所述控制装置执行控制所述存储装置以将元数据和从所述临时存储装置中所提取的图像数据存储在非易失存储介质中的处理。

4.根据权利要求1所述的成像设备，进一步包括：

用于向外部设备传输数据的传输装置；

其中，作为存储处理，所述控制装置执行控制所述传输装置以将元数据和从所述临时存储装置中所提取的图像数据传输到外部设备的处理。

5.根据权利要求1所述的成像设备，进一步包括：

能够使用存储在所述临时存储装置中的图像数据执行图像显示的显示装置。

6.根据权利要求5所述的成像设备，其中，所述显示装置能够使用于图像显示的屏幕区域的全部或一部分进入透明或半透明的透视状态。

7.根据权利要求6所述的成像设备，其中，所述控制装置控制所述显示装置，以使用于图像显示的屏幕区域的一部分进入透视状态，同时使用存储在所述临时存储装置中的图像数据并利用屏幕区域的剩余部分进行图像显示。

8.根据权利要求5所述的成像设备，其中，所述控制装置控制所述显示装置，以使用通过由所述成像装置进行成像所获得的图像数据并利用用于图像显示的屏幕区域的一部分进行图像显示，同时使用存储在所述临时存储装置中的图像数据并利用所述屏幕区域的剩余部分进行图像显示。

9.根据权利要求5所述的成像设备，其中，所述显示装置被设置在用户的眼睛前面以进行图像显示。

10.根据权利要求5所述的成像设备，其中，可以在与包含所述成像装置的外壳不同的外壳中形成所述显示装置。

11.根据权利要求5所述的成像设备，进一步包括：

操作输入装置；

其中，根据由所述操作输入装置检测到的由用户输入的操作，所述控制装置控制所述显示装置以使用存储在所述临时存储装置中的图像数据进行图像显示。

12.根据权利要求11所述的成像设备，其中，所述操作输入装置包括由用户操作的操作单元。

13.根据权利要求11所述的成像设备，其中，所述操作输入装置包括用于检测用户的运动的传感器。

14.根据权利要求11所述的成像设备，其中，所述操作输入装置包括用于检测涉及用户的生物信息的传感器。

15.根据权利要求5所述的成像设备，其中，当所述显示装置使用存储在所述临时存储装置中的图像数据已经进行了图像显示时，所述控制装置判断已经满足存储条件，并从所述临时存储装置中提取显示的所有或某些图像数据作为待存储的图像数据，并向所提取的图像数据中添加元数据以执行存储处理。

16.根据权利要求1所述的成像设备，进一步包括：

用于检测涉及用户的生物信息的生物传感器装置；

其中，所述控制装置根据由所述生物传感器装置检测到的生物信息判断是否已经满足存储条件，并且当所述控制装置已经判断为已经满足存储条件时，所述控制装置从所述临时存储装置提取待存储的图像数据，并向所提取的图像数据中添加元数据以执行存储处理。

17.根据权利要求16所述的成像设备，其中，生物信息是脉搏、心搏、心电图、肌电图信息、呼吸、出汗、皮肤电反应、血压、血液中的氧饱和度浓度、皮肤表面温度、脑电波、血流变化、体温、身体的运动、头部的运动、重心、行走/跑步的节奏，以及眼睛的状态中的至少一个。

18.根据权利要求1所述的成像设备，进一步包括：

用于输入外部声音的音频输入装置；以及

用于分析由所述音频输入装置所获得的音频信号的音频分析装置；

其中，所述控制装置根据由所述音频分析装置分析的结果判断是否已经满足存储条件，并且当所述控制装置已经判断为已经满足存储条件时，所述控制装置从所述临时存储装置提取待存储的图像数据，并向所提取的图像数据中添加元数据以执行存储处理。

19.根据权利要求1所述的成像设备，其中，所述控制装置执行发出与所述成像装置进行成像或对通过成像所获得的图像数据进行处理相关的指令的成像系统控制，并且当所述控制装置已经执行了预先确定的成像系统控制时，所述控制装置判断为已经满足存储条件，并从所述临时存储装置提取待存储的图像数据，并向所提取的图像数据中添加元数据以执行存储处理。

20.根据权利要求19所述的成像设备，其中，当作为成像系统控制，所述控制装置已经执行了使所述成像装置中的透镜系统执行预先确定的操作的控制时，所述控制装置判断为已经满足存储条件。

21.根据权利要求19所述的成像设备，其中，当作为成像系统控制，所述控制装置已经执行了使所述成像装置中的信号处理系统执行预先确定的处理的控制时，所述控制装置判断为已经满足存储条件。

22.根据权利要求19所述的成像设备，其中，当作为成像系统控制，所述控制装置已经执行了改变所述成像装置中的成像灵敏度的控制时，所述控制装置判断为已经满足存储条件。

23.根据权利要求19所述的成像设备，其中，当作为成像系统控制，所述控制装置已经执行了改变所述成像装置中的帧速率的控制时，所述控制装置判断为已经满足存储条件。

24.根据权利要求1所述的成像设备，其中，当已经满足存储条件时，所述控制装置根据所满足的存储条件生成元数据。

25.一种成像方法，包括下列步骤：

(a)对位于用户视线方向的场景进行成像以获取该场景的图像数据；

(b)临时存储通过所述步骤(a)中的成像所获得的图像数据；

(c)判断是否已经满足预先确定的存储条件；以及

(d)当所述步骤(c)已经判断为已经满足了预先确定的存储条件时，从在所述步骤(b)中临时存储的图像数据中提取待存储的图像数据，向所提取的图像数据中添加元数据，并执行存储处理。

26.根据权利要求25所述的成像方法，其中，在所述步骤(b)中，通过以环形存储的方式使用存储区来连续地存储图像数据。

27.根据权利要求25所述的成像方法，其中，在所述步骤(d)中，执行在非易失存储介质中存储元数据和待存储的图像数据的处理。

28.根据权利要求25所述的成像方法，其中，在所述步骤(d)中，将元数据和待存储的图像数据传输到外部设备。

29.根据权利要求25所述的成像方法，进一步包括下列步骤：

(e)使用在所述步骤(b)中临时存储的图像数据进行图像显示。

30.根据权利要求29所述的成像方法，其中，在所述步骤(e)中，使用于图像显示的屏幕区域的全部或一部分进入透明或半透明的透视状态。

31.根据权利要求30所述的成像方法，其中，在所述步骤(e)中，使用于图像显示的屏幕区域的一部分进入透视状态，同时使用在所述步骤(b)中临时存储的图像数据并利用所述屏幕区域的剩余部分进行图像显示。

32.根据权利要求29所述的成像方法，其中，在所述步骤(e)中，使用通过由成像装置进行成像所获得的图像数据并利用用于图像显示的屏幕区域的一部分进行图像显示，同时使用在所述步骤(b)中临时存储的图像数据并利用所述屏幕区域的剩余部分进行图像显示。

33.根据权利要求29所述的成像方法，其中，在所述步骤(e)中，根据由操作输入装置检测到的由用户输入的操作，使用在所述步骤(b)中临时存储的图像数据进行图像显示。

34.根据权利要求29所述的成像方法，其中

当在所述步骤(e)使用在所述步骤(b)中临时存储的图像数据已经进行了图像显示时，所述步骤(c)判断为已经满足存储条件，以及

在所述步骤(d)中，将在所述步骤(e)中显示的所有或某些图像数据与所添加的元数据一起存储。

35.根据权利要求25所述的成像方法，其中

所述步骤(c)根据由生物传感器装置检测到的生物信息判断是否已经满足存储条件，以及

当所述步骤(c)已经判断为已经满足了预先确定的存储条件时，所述步骤(d)向待存储的图像数据添加元数据，并执行存储处理。

36.根据权利要求25所述的成像方法，其中

所述步骤(c)根据由音频分析装置对由音频输入装置所获得的音频信号进行分析的结果，判断是否已经满足存储条件，以及

当所述步骤(c)已经判断为已经满足了预先确定的存储条件时，所述步骤(d)向待存储的图像数据添加元数据，并执行存储处理。

37.根据权利要求25所述的成像方法，其中

当已经执行了发出与进行成像或对通过成像所获得的图像数据进行处理相关的指令的预先确定的成像系统控制时，所述步骤(c)判断为已经满足存储条件，以及

所述步骤(d)相应地从在所述步骤(b)中临时存储的图像数据中提取待存储的图像数据，向所提取的图像数据中添加元数据，并执行存储处理。

38.根据权利要求37所述的成像方法，其中，当已经执行了使成像装置中的透镜系统执行预先确定的操作的控制时，所述步骤(c)判断为已经满足存储条件。

39.根据权利要求37所述的成像方法，其中，当已经执行了使成像装置中的信号处理系统执行预先确定的处理的控制时，所述步骤(c)判断为已经满足存储条件。

40.根据权利要求37所述的成像方法，其中，当已经执行了改变成像装置中的成像灵敏度的控制时，所述步骤(c)判断为已经满足存储条件。

41.根据权利要求37所述的成像方法，其中，当作为成像系统控制已经执行了改变成像装置中的帧速率的控制时，所述步骤(c)判断为已经满足存储条件。

42.根据权利要求25所述的成像方法，进一步包括下列步骤：

(f)当已经满足存储条件时，根据所满足的存储条件生成元数据。

43.一种成像设备，包括：

成像部分，被配置为对位于用户视线方向的场景进行成像以获取该场景的图像数据；

临时存储部分，被配置为存储通过由所述成像部分进行成像所获得的图像数据；以及

控制部分，被配置为控制所述临时存储部分以存储通过由所述成像部分进行成像所获得的图像数据，以及，当已经满足预先确定的存储条件时，从所述临时存储部分提取待存储的图像数据，并向所提取的图像数据中添加元数据以执行存储处理。

Images