CN1846445B - 基于遮蔽检测对像素的时间插值 - Google Patents

Abstract

公开了一种用来确定时间上位于第一和第二图像中间的特定图像的特定像素的值的方法。该方法包括：根据对应于第一图像的第一运动矢量场

的第一和第二

运动矢量来计算第一运动矢量差；根据对应于第二图像的第二运动矢量场

的第三和第四运动矢量来计算第二运动矢量差；如果第一运动矢量差小于第二运动矢量差，则根据第一图像的第一像素的第一值来确立特定像素值，而如果第二运动矢量差小于第一运动矢量差，则根据第二图像的第二像素的第二值来确立特定像素值。

Description

基于遮蔽检测对像素的时间插值

技术领域

本发明涉及一种用来确定应该根据图像序列中的哪个图像来确立时间上位于第一和第二图像中间的特定图像的特定像素的值的方法。

本发明还涉及一种用来确定应该根据图像序列中的哪个图像来确立时间上位于第一和第二图像中间的特定图像的特定像素的值的图像处理设备。

背景技术

遮蔽区域意味着与正在拍摄的场景的一部分相一致的区域，它在一列连续图像的一个图像中是可以见到的，但它在下一个或前一个图像中是不能见到的。这是因为比背景对象更接近照相机的场景中的前景对象可能覆盖部分背景对象。例如在前景对象移动的情况下，背景对象的一部分被遮蔽，同时背景对象的其他部分被暴露。

遮蔽区域可能在时间插值中导致伪象。例如，在上变换的情况下，遮蔽区域能导致所谓的晕圈(holo)。在上变换的情况下，估计移动矢量以致通过时间插值来计算上变换的输出图像。例如，见“Robustmotion-compensated video upconversion”，由O.Ojo和G.de Haan在消费电子中的IEEE学报第43卷第4章，第1045-1056页，1997年11月发表。对于时间插值，也就是，两个原始输入图像中间的新图像的计算，要从连续图像中获取多个像素，这些像素优选地与一个且相同的对象相关。在遮蔽区域的例子中不能直接这样做，因为在两个连续的图像中找不到相关的像素。其他插值策略也是需要的，典型地，基于仅仅的上一个或下一个原始图像的像素值的插值。因而，为遮蔽区域来估计运动矢量很重要，这一点是将是清楚的。

发明内容

本发明的目的是提供一种在开始段落中所描述的那种相对健壮的方法。

本发明的这一目的通过下面的方法来实现，该方法包括：

-估计对应于第一图像的第一运动矢量场、针对特定像素的特定运动矢量、以及对应于第二图像的第二运动矢量场；

-根据特定像素的特定空间位置和特定运动矢量，从第一运动矢量场中选择第一运动矢量；

-根据特定像素的特定空间位置和第一运动矢量，从第一运动矢量场中选择第二运动矢量；

-根据第一和第二运动矢量来计算第一运动矢量差；

-根据特定像素的特定空间位置和特定运动矢量，从第二运动矢量场中选择第三运动矢量；

-根据特定像素的特定空间位置和第三运动矢量，从第二运动矢量场中选择第四运动矢量；

-根据第三和第四运动矢量来计算第二运动矢量差；

其中，

-如果第一运动矢量差小于第二运动矢量差，则根据第一图像的第一像素的第一值来确立特定像素值，而如果第二运动矢量差小于第一运动矢量差，则根据第二图像的第二像素的第二值来确立特定像素值。

本发明公开了：可以通过比较第一运动矢量场的两个适当选择的运动矢量之间的第一差和第二运动矢量场的两个适当选择的运动矢量之间的第二差来确定两个独立图像中的哪一个应该被选择来为了确定特定像素的值而获取一个或多个像素值。典型地，两个运动矢量场之一的两个所选的运动矢量相互之间基本上是相等的。这意味着：这两个运动矢量都与背景或相同的前景对象相关的概率相对是高的。在那种情况下，使用这两个运动矢量之一能够获取适合于中间图像的像素的概率相对也是高的。在遮蔽的情况下，典型地，这两个运动矢量都与背景相关。

一个值代表任何类型的人类可视信息，像亮度或颜色。

本发明方法的实施例包括：如果第一运动矢量差和第二运动矢量差都小于预定阈值，那么根据第一像素的第一值和第二像素的第二值来确定特定像素值。在本发明的这一实施例中，不是从两个图像中任一图像中选择像素值，相反，可选择地来根据两个图像的像素值来确定特定像素值。这依赖于测试以验证两个运动矢量差是否都小于预定阈值。优选地，这个测试通过将两个运动矢量中最大的与预定阈值相比较来实现，这个测试是隐含的遮蔽检测。如果运动矢量差中只有一个小于预定阈值，那么假设特定像素位置位于遮蔽区域中。遮蔽类型，也就是，覆盖或暴露，依赖于两个中的哪一个小于预定阈值。然而，如果两个运动矢量都小于预定阈值，那么假设特定空间位置不在遮蔽区域中。在后一种情况下，特定像素值是基于两个输入图像的像素值的。

本发明方法的实施例包括：通过第一像素的第一值和在第一像素的空间邻域中的另一像素的另一值的插值来确定特定像素值。换言之，在本发明的这一实施例中，通过多个像素值的插值来实现子像素的准确性。

本发明的另一个目的是提供一种在开始段落中所描述的那种相对健壮的图像处理设备。

本发明的这一目的通过下面的图像处理设备来实现，它包括：

-运动估计装置，用来估计对应于第一图像的第一运动矢量场、以及对应于第二图像的第二运动矢量场；

-运动估计器，用来估计针对特定像素的特定运动矢量；

-第一计算装置，用来根据特定像素的特定空间位置和特定运动矢量，从第一运动矢量场中选择第一运动矢量，根据特定像素的特定空间位置和第一运动矢量，从第一运动矢量场中选择第二运动矢量，并根据第一和第二运动矢量来计算第一运动矢量差；

-第二计算装置，用来根据特定像素的特定空间位置和特定运动矢量，从第二运动矢量场中选择第三运动矢量，根据特定像素的特定空间位置和第三运动矢量，从第二运动矢量场中选择第四运动矢量，并根据第三和第四运动矢量来计算第二运动矢量差；以及

-确立装置，如果第一运动矢量差小于第二运动矢量差，则根据第一图像的第一像素的第一值来确立特定像素值，而如果第二运动矢量差小于第一运动矢量差，则根据第二图像的第二像素的第二值来确立特定像素值。

优选地，该图像处理设备进一步包括显示设备，用来显示输出图像。该图像处理设备可以是例如TV，置顶盒，VCR(录像机)播放器，卫星调谐器，DVD(数字化视频光盘)播放器或记录器。

附图说明

根据本发明，像素值确定单元的、图像处理设备的、方法的，计算机程序产品的这些和其他方面将参照附图并结合后面描述的实现方式和实施例来阐述和变得清楚，其中：

图1示意性描述了场景中的前景对象的移动和背景对象的移动；

图2示意性描述了为图1中所示的图像所估计的运动矢量场；

图3示意性描述了根据本发明的用于两个都位于遮蔽区域中的示例像素的方法；

图4示意性描述了根据本发明的用于一个不位于遮蔽区域中的示例像素的方法；

图5示意性描述了根据本发明的提供了三个运动矢量场的像素值确定单元的实施例；

图6示意性描述了根据本发明的图像处理设备的实施例。

在整个附图中，相同的附图标记标示类似的部分。

具体实施方式

图1示意性描述了场景中的前景对象118的移动和背景的移动。在图1中，绘制了在两个时间位置n-1和n处的两个原始图像100和104。这些图像中的对象118是以向上的方向移动，

由通过实黑线106和108连接的灰色矩形来标示。长窄点黑线110和112指示了背景的移动

它是向下的。阴影区域114和116指示了遮蔽区域。在时间位置n+α(其中-1≤α≤0)处产生的新图像102由虚线120来指示。

图2示意性描述了为图1中所示的图像所估计的运动矢量场，也就是估计的运动矢量场由箭头来指示。第一运动矢量场为两个原始图像中的第一个100而估计，而第二运动矢量场为两个原始图像中的第二个104而估计。这两运动矢量场通过三帧运动估计器采计算。第一运动矢量场由

来标示。第一运动矢量场被估计在亮度帧和之间。第二运动矢量场由

来标示。这个第二运动矢量场估计在亮度帧

和

之间。此外，已经为第一和第二运动矢量场中间的时间位置n+α计算了初始运动矢量场。这个初始运动矢量场

估计在亮度帧

和

之间。注意到，三帧运动估计器的运动矢量场

和

基本上与前景对象118匹配，而两帧运动估计器的运动矢量场

表示了延伸到背景中的前景矢量。

根据本发明的方法，时间上位于第一和第二输入图像中间的图像由三个运动矢量场

和

来计算。那意味着：背景矢量被确定在遮蔽区域中，并且被用于从两个输入图像中的一个图像获取像素。

图3示意性描述了根据本发明的用于两个分别位于空间位置

和

处的示例像素的方法。首先考虑在位置

处的像素周围的情形。来自运动矢量场的运动矢量用来分别从第一运动矢量场

和第二运动矢量场获取运动矢量

和

${\stackrel{\→}{D}}_p\left({\stackrel{\→}{x}}_1\right)={\stackrel{\→}{D}}_3({\stackrel{\→}{x}}_1-(\mathrm{\α}+1){\stackrel{\→}{D}}_c\left({\stackrel{\→}{x}}_1\right),n-1)---\left(1\right)$

${\stackrel{\→}{D}}_n\left({\stackrel{\→}{x}}_1\right)={\stackrel{\→}{D}}_3({\stackrel{\→}{x}}_1-\mathrm{\α}{\stackrel{\→}{D}}_c\left({\stackrel{\→}{x}}_1\right),n)---\left(2\right)$

这个选择过程分别由粗黑箭头300和302来指示。两个运动矢量

和是背景矢量。使用从

获取矢量

使用矢量

从

获取矢量

${\stackrel{\→}{D}}_{\mathrm{pp}}\left({\stackrel{\→}{x}}_1\right)={\stackrel{\→}{D}}_3({\stackrel{\→}{x}}_1-(\mathrm{\α}+1){\stackrel{\→}{D}}_p\left({\stackrel{\→}{x}}_1\right),n-1)---\left(3\right)$

${\stackrel{\→}{D}}_{\mathrm{nn}}\left({\stackrel{\→}{x}}_1\right)={\stackrel{\→}{D}}_3({\stackrel{\→}{x}}_1-\mathrm{\α}{\stackrel{\→}{D}}_n\left({\stackrel{\→}{x}}_1\right),n)---\left(4\right)$

这个获取由粗黑点箭头301和303来指示。可以看出：

也是背景矢量，但是

是前景矢量。这意味着

和

相互之间基本上是相等的，也就是，第一运动矢量差小于预定阈值T₀。然而，在

和之间的差却相当大，也就是，第二运动矢量差大于预定阈值T₀。因此，在中间图像102的空间位置

处的像素值将基于在时间位置n处的第二图像104的像素值，因为第二运动矢量差小于第一运动矢量差。

一个类似过程可以用来为在位置

处的其他像素建立适当的运动矢量。来自运动矢量场

的运动矢量

用来分别从第一运动矢量场

和第二运动矢量场

获得运动矢量

和

${\stackrel{\→}{D}}_p\left({\stackrel{\→}{x}}_2\right)={\stackrel{\→}{D}}_3({\stackrel{\→}{x}}_2-(\mathrm{\α}+1){\stackrel{\→}{D}}_c\left({\stackrel{\→}{x}}_2\right),n-1)---\left(5\right)$

${\stackrel{\→}{D}}_n\left({\stackrel{\→}{x}}_2\right)={\stackrel{\→}{D}}_3({\stackrel{\→}{x}}_2-\mathrm{\α}{\stackrel{\→}{D}}_c\left({\stackrel{\→}{x}}_2\right),n)---\left(6\right)$

这个选择过程分别由粗黑箭头304和306来指示。用和获取的运动矢量分别是背景矢量和前景矢量。使用从

获取矢量

使用矢量

从获取矢量

${\stackrel{\→}{D}}_{\mathrm{pp}}\left({\stackrel{\→}{x}}_2\right)={\stackrel{\→}{D}}_3({\stackrel{\→}{x}}_2-(\mathrm{\α}+1){\stackrel{\→}{D}}_p\left({\stackrel{\→}{x}}_2\right),n-1)---\left(7\right)$

${\stackrel{\→}{D}}_{\mathrm{nn}}\left({\stackrel{\→}{x}}_2\right)={\stackrel{\→}{D}}_3({\stackrel{\→}{x}}_2-\mathrm{\α}{\stackrel{\→}{D}}_n\left({\stackrel{\→}{x}}_2\right),n)---\left(8\right)$

这个获取由粗黑箭头304和307来指示。也能看到

和

都是背景矢量。这意味着

和

相互之间基本上是相等的，也就是，第二运动矢量差小于预定阈值T₀。然而，在和

之间的差是相当大的，也就是，第一运动矢量差大于预定阈值T₀。因此，在中间图像102的空间位置

处的像素值将基于在时间位置n-1处的第一图像100的像素值，因为第一运动矢量差小于第二运动矢量差。

总体而言，如果：

$\left|\right|{\stackrel{\→}{D}}_P-{\stackrel{\→}{D}}_{\mathrm{PP}}\left|\right|>T_0$ ∨ $\left|\right|{\stackrel{\→}{D}}_n-{\stackrel{\→}{D}}_{\mathrm{nn}}\left|\right|>T_0$       (9)

则检测到了遮蔽。

在遮蔽被检测出的情况下，分类成覆盖和暴露。

如果：

$\left|\right|{\stackrel{\→}{D}}_P-{\stackrel{\→}{D}}_{\mathrm{PP}}\left|\right|>T_0$ ∧ $\left|\right|{\stackrel{\→}{D}}_n-{\stackrel{\→}{D}}_{\mathrm{nn}}\left|\right|\≤T_0$      (10)

则像素在暴露区域中。

并且，如果：

$\left|\right|{\stackrel{\→}{D}}_P-{\stackrel{\→}{D}}_{\mathrm{PP}}\left|\right|\≤T_0$ ∧ $\left|\right|{\stackrel{\→}{D}}_n-{\stackrel{\→}{D}}_{\mathrm{nn}}\left|\right|>T_0$     (11)

则像素在覆盖区域中。

因此，空间位置

处的像素位于暴露区域中，而在空间位置处的像素位于覆盖区域中。

图4示意性示出了根据本发明的用于一个不位于遮蔽区域中的示例像素

的方法。来自运动矢量场

的运动矢量

用来分别从第一运动矢量场和第二运动矢量场

获取运动矢量

和

${\stackrel{\→}{D}}_p\left({\stackrel{\→}{x}}_3\right)={\stackrel{\→}{D}}_3({\stackrel{\→}{x}}_3-(\mathrm{\α}+1){\stackrel{\→}{D}}_c\left({\stackrel{\→}{x}}_3\right),n-1)---\left(12\right)$

${\stackrel{\→}{D}}_n\left({\stackrel{\→}{x}}_3\right)={\stackrel{\→}{D}}_3({\stackrel{\→}{x}}_3-\mathrm{\α}{\stackrel{\→}{D}}_c\left({\stackrel{\→}{x}}_3\right),n)---\left(13\right)$

这个选择过程分别由粗黑箭头400和402来指示。两个运动矢量和

是前景矢量。使用

从

获取矢量

使用矢量

从

获取矢量

${\stackrel{\→}{D}}_{\mathrm{pp}}\left({\stackrel{\→}{x}}_3\right)={\stackrel{\→}{D}}_3({\stackrel{\→}{x}}_3-(\mathrm{\α}+1){\stackrel{\→}{D}}_p\left({\stackrel{\→}{x}}_3\right),n-1)---\left(14\right)$

${\stackrel{\→}{D}}_{\mathrm{nn}}\left({\stackrel{\→}{x}}_3\right)={\stackrel{\→}{D}}_3({\stackrel{\→}{x}}_3-\mathrm{\α}{\stackrel{\→}{D}}_n\left({\stackrel{\→}{x}}_3\right),n)---\left(15\right)$

这个获取也分别由粗黑箭头400和402来表示。可以看出

和也是前景矢量。这意味着

和相互之间基本上是相等的，也就是，第一运动矢量差小于预定阈值T₀。另外，和

相互之间基本上是相等的，也就是，第二运动矢量差低于预定阈值T₀。因此，在中间图像102的空间位置

处的像素值将基于在时间位置n-1处的第一图像100的第一像素的第一值和基于在时间位置n处的第二图像104的第二像素的第二值。

图5示意性示出了根据本发明的像素值确定单元500的实施例，它用来计算时间上位于第一图像和第二图像中间的图像，中间图像位于时间位置n+α处。像素值确定单元500被提供有三个运动矢量场。这些提供的运动矢量场中的第一个和第二个

通过三帧运动估计器512来计算。三帧运动估计器512的例子在US6,011,596中公开。第三个提供的运动矢量场

通过两帧运动估计器514来计算。这个两帧运动估计器514例如和在下面的文献中所说明的一样，“True-Motion Estimation with 3-D Recursive Search BlockMatching”，作者G.de Haan等人，在视频技术的电路和系统IEEE学报第3卷第5章，第368-379页，1993年10月发表。

运动估计器512和514和像素值确定单元500被提供了代表第一和第二图像和其他输入图像的输入视频信号。像素值确定单元500在输出连接器518提供输出视频信号，它代表第一和第二图像及中间图像。像素值确定单元500包括控制接口520，用来接收代表预定阈值T₀的控制信号。

根据本发明的像素值确定单元500包括：

-运动矢量比较单元502；

-确定单元504；和

-和像素值计算单元506。

运动矢量比较单元502被安排来从三个运动矢量场

和

获取相应的运动矢量。运动矢量比较单元502包括：

-第一计算单元508，用来根据对应于第一图像的第一运动矢量场的第一和第二

运动矢量采计算第一运动矢量差，第一运动矢量

是根据特定像素的特定空间位置

和为特定像素而估计的特定运动矢量

从第一运动矢量场中选择的；

-第二计算单元510，用来根据对应于第二图像的第二运动矢量场的第三

和第四

运动矢量来计算第二运动矢量差，第三运动矢量

是根据特定像素的特定空间位置

和为特定像素而估计的特定运动矢量

从第二运动矢量场

中选择的。

确定单元504被安排用来确定特定像素位于其中的区域的类型。因此，确定单元504被安排用来检查两个运动矢量差是否都小于预定阈值T₀。然后，按照公式9-11所规定的，来估计区域类型。确定单元504更进一步被安排用来为了计算中间图像的特定像素的像素值而检查应该使用哪个运动矢量或可选地使用哪些运动矢量来从第一和第二图像获取像素值。通常，如果第一运动矢量差小于第二运动矢量差，那么特定像素的值基于第一图像的第一像素的第一值，而如果第二运动矢量差小于第一运动矢量差，那么特定像素的值基于第二图像的第二像素的第二值。如果第一运动矢量差和第二运动矢量差都小于预定阈值T₀，那么特定像素的值基于第一像素的第一值和第二像素的第二值。

像素值计算单元506被安排用来确定特定像素的实际值。它可以是第一或第二图像的像素值的直接复制。优选地，该值基于多个像素值的插值，在运动矢量是子像素准确之时特别如此。

根据本发明的像素值确定单元500的运作结合图3和4来描述。

运动矢量比较单元502，确定单元504，像素值计算单元506，三帧运动估计器512和两帧运动估计器514都可以使用一个处理器来实现。通常，这些功能在软件程序产品的控制下实行，在执行期间，通常软件程序产品被装载到存储器，像RAM，并从其被执行。程序可以从背景存储器，像ROM，硬盘，或磁和/或光存储器被装载，或可以经由网络，像因特网被装载。可选择地，专用集成电路提供了所公开的功能。

不同时间位置n-1，n+α和n处的运动矢量的计算优选地与中间图像的像素值的计算同步执行。那意味着：特定运动矢量场(例如时间位置n-1处的)不需要与一起来代表相应原始输入视频图像的所有像素运动的运动矢量组相对应。换句话说，运动矢量场可以与一起来代表。相应原始输入视频图像的部分像素(例如仅仅10％)的运动的运动矢量组相对应。

图6示意性描述了根据本发明的图像处理设备600的实施例，包括：

-接收装置602，用来接收与一个视频图像序列相对应的信号；

-三帧运动估计器512，用来为视频图像中的第一个来估计第一运动矢量场和为视频图像中的第二个来估计第二运动矢量场；

-两帧运动估计器514，用来为时间上位于视频图像的第一个和视频图像的第二个中间的输出图像来估计第三运动矢量场；

-像素值确定单元500，和结合附图5所描述的一样；和

-显示设备606，用来显示像素值确定单元500的输出图像。

该信号可以是经由天线或电缆接收的广播信号，但也可以是来自存储设备像VCR(录像机)或数字化视频光盘(DVD)的信号。该信号在输入连接器608处被提供。图像处理设备600可以是例如TV。可选的，图像处理设备600不包括可选的显示设备，但却向包括显示设备606的设备提供输出图像。于是，图像处理设备600可以是例如置顶盒，卫星调谐器，VCR播放器，DVD播放器或记录器。可选的，图像处理器600包括存储装置，像硬盘或用来在可移动的媒介，例如光盘上存储的装置。图像处理设备600也可以是被电影制片厂或广播商使用的系统。

应当理解：上面提及的实施例用来说明本发明而不是用来限制本发明，本领域技术人员在不偏离所附权利要求的保护范围的情况下也能够设计出可替换的实施例。在权利要求中，用括号括起来的任何附图标记都不应该被解释为对权利要求的限制。术语“包括”不排除没有列在权利要求中的单元或步骤的存在。在单元之前的术语“一个”不排除多个这样的单元的存在。本发明能够通过包括多个分立单元的硬件和通过合适的编程的计算机来实现。在列举了多个装置的单元权利要求中，这些装置中的几个能够用一个相同的硬件项来具体化。术语第一，第二和第三及其他的使用不表明任何排序。这些词语应该被解释为列举。

Claims (7)

1.一种用来确定应该根据图像序列中的哪个图像来确立时间上位于第一和第二图像中间的特定图像的特定像素的值的方法，第一和第二图像包括在所述图像序列中，该方法包括：

-估计对应于第一图像的第一运动矢量场

针对特定像素的特定运动矢量以及对应于第二图像的第二运动矢量场

-根据特定像素的特定空间位置

和特定运动矢量

从第一运动矢量场

中选择第一运动矢量

-根据特定像素的特定空间位置

和第一运动矢量

从第一运动矢量场

中选择第二运动矢量

-根据第一和第二

运动矢量来计算第一运动矢量差；

-根据特定像素的特定空间位置和特定运动矢量

从第二运动矢量场

中选择第三运动矢量

-根据特定像素的特定空间位置

和第三运动矢量

从第二运动矢量场

中选择第四运动矢量

-根据第三

和第四运动矢量来计算第二运动矢量差；

其中，

-如果第一运动矢量差小于第二运动矢量差，则根据第一图像的第一像素的第一值来确立特定像素值，而如果第二运动矢量差小于第一运动矢量差，则根据第二图像的第二像素的第二值来确立特定像素值。

2.如权利要求1所述的方法，包括：

当根据第一像素的第一值来确立特定像素值时，通过第一像素的第一值和在第一像素的空间邻域中的另一像素的另一值的插值来确立特定像素值。

3.一种用来确定应该根据图像序列中的哪个图像来确立时间上位于第一和第二图像中间的特定图像的特定像素的值的方法，第一和第二图像包括在所述图像序列中，该方法包括：

-估计对应于第一图像的第一运动矢量场

针对特定像素的特定运动矢量

以及对应于第二图像的第二运动矢量场

-根据特定像素的特定空间位置

和特定运动矢量从第一运动矢量场

中选择第一运动矢量

-根据特定像素的特定空间位置和第一运动矢量

从第一运动矢量场中选择第二运动矢量

-根据第一

和第二

运动矢量来计算第一运动矢量差；

-根据特定像素的特定空间位置和特定运动矢量从第二运动矢量场

中选择第三运动矢量

-根据特定像素的特定空间位置

和第三运动矢量

从第二运动矢量场中选择第四运动矢量

-根据第三

和第四

运动矢量来计算第二运动矢量差；

其中，

-如果第一运动矢量差和第二运动矢量差小于预定阈值，那么根据第一图像的第一像素的第一值和第二图像的第二像素的第二值来确立特定像素值；否则，如果第一运动矢量差小于第二运动矢量差，则根据第一像素的第一值来确立特定像素值，而如果第二运动矢量差小于第一运动矢量差，则根据第二像素的第二值来确立特定像素值。

4.一种图像处理设备(600)，用来确定应该根据图像序列中的哪个图像来确立时间上位于第一和第二图像中间的特定图像的特定像素的值，第一和第二图像包括在所述图像序列中，该图像处理设备包括：

-三帧运动估计器(512)，用来估计对应于第一图像的第一运动矢量场

以及对应于第二图像的第二运动矢量场

-两帧运动估计器(514)，用来估计针对特定像素的特定运动矢量；

-第一计算单元(508)，用来根据特定像素的特定空间位置

和特定运动矢量

从第一运动矢量场中选择第一运动矢量

根据特定像素的特定空间位置

和第一运动矢量

从第一运动矢量场中选择第二运动矢量

并根据第一

和第二运动矢量来计算第一运动矢量差；

-第二计算单元(510)，用来根据特定像素的特定空间位置

和特定运动矢量

从第二运动矢量场

中选择第三运动矢量

根据特定像素的特定空间位置

和第三运动矢量

从第二运动矢量场

中选择第四运动矢量并根据第三和第四运动矢量来计算第二运动矢量差；以及

-确定单元(504)，如果第一运动矢量差小于第二运动矢量差，则根据第一图像的第一像素的第一值来确立特定像素值，而如果第二运动矢量差小于第一运动矢量差，则根据第二图像的第二像素的第二值来确立特定像素值。

5.如权利要求4所述的图像处理设备(600)，进一步包括接收装置(602)，用来接收对应于所述图像序列的信号。

6.如权利要求5所述的图像处理设备(600)，进一步包括显示设备(606)，用来显示输出图像。

7.如权利要求6所述的图像处理设备(600)是TV。

Images