CN101276060B

CN101276060B - 控制立体视图或多视图序列图像的动态深度的方法和装置

Info

Publication number: CN101276060B
Application number: CN2008100095449A
Authority: CN
Inventors: 具宰必; 黄善德
Original assignee: Samsung Electronics Co Ltd
Current assignee: Samsung Electronics Co Ltd
Priority date: 2007-03-29
Filing date: 2008-01-04
Publication date: 2013-02-13
Anticipated expiration: 2028-01-04
Also published as: US20080240549A1; CN101276060A; KR20080088305A; US8045792B2; KR101345303B1

Abstract

一种用于控制立体视图或者多视图图像的动态深度的方法和装置。该方法包括：接收立体视图或者多视图图像；通过估算相应于接收的图像的两个图像的偏差并测量所估算偏差的频率，生成偏差直方图；通过卷积所生成的偏差直方图和特征函数，确定立体视图或者多视图图像的偏差控制量；和通过根据偏差控制量控制视差，重排立体视图或者多视图输入图像。

Description

控制立体视图或多视图序列图像的动态深度的方法和装置

技术领域

本发明涉及立体视图或者多视图(multi-view)图像的动态深度的控制，更具体地，涉及动态深度的控制，以便在立体视图或者多视图图像中获得最优视差(parallax)，用于舒适的动态视图。

背景技术

由立体视图或者多视图照相机以平行形式捕捉的图像被输入到立体显示装置，这种图像用于立体显示。在两个预定视点形成的立体视图图像之间存在对象的位移(displacement)，亦即偏差(disparity)。由于这种偏差，观察者感到正的或者负的视差，并因此感到动态深度。然而，当观察者长时间观看具有视差的图像时，观察者可能容易疲劳并可能有副作用，例如恶心。

图1是描述通过左右水平移动每一个立体视图或者多视图图像生成稳态立体视图图像的相关技术方法的图。

根据该相关技术方法，为了从立体视图或者多视图图像获得适于三维(3D)图像显示的图像，利用相关技术的偏差估算方法获得每一帧接收的立体视图图像的偏差，然后得到偏差直方图(histogram)。为了对每一帧适当地应用正偏差和负偏差的比率，基于阈值在负方向移动该偏差直方图。通过截弃(crop)立体视图图像的两端移动该偏差直方图。

图2说明立体照相机的类型的图。在立体视图图像的通信环境中，导致低疲劳的稳态立体视图图像可通过调节接收端的偏差采用在摄像管中的各种照相机结构来获得，如图2中所示，如同通过控制立体照相机的会聚角获得的图像一样。

通过利用偏差直方图考虑对应的立体视图图像的特性研发了用于控制动态深度的相关技术方法和装置。然而，用于控制偏差的阈值是基于主观评价根据经验获得的，不是基于客观基准。同样，为了制造不引起疲劳的稳态立体视图图像，视差应该在适当的范围内，但是该相关技术方法和装置没有考虑这种范围。

此外，在使用立体视图或者多视图照相机捕捉的序列图像情况下，由于巨大的数据量，该序列图像需要被有效压缩。为了对观察者提供舒适的动态深度，在系统中解码巨大的数据量然后对等(parity)估算复原图像是无效率并且难以实现的。

发明内容

本发明的示范实施例克服上述缺点及其他以上没有描述的缺点。此外，本发明并不必需克服上述的缺点，并且本发明的示范实施例可能不克服任何上述的问题。

本发明提供一种用于控制动态深度的方法和装置，其通过处理接收端中的信号，确定可有效最小化副作用——例如，眼疲劳——的最优偏差控制量，同时转换立体视图或者多视图图像用于立体显示。该方法和装置使用每一宏块(macroblock)的偏差矢量，该偏差矢量通过根据MPEG-2多视图剖面(multi-view profile，MVP)或者多视图视频编码(multi-view videocoding，MVC)解码压缩的立体视图或者多视图立体视图图像提取。此外，提供一种控制偏差的方法，其解析该立体视图图像的偏差直方图并使用偏差直方图卷积和(disparity histogram convolution sum)技术，以便形成最优立体视场。

本发明还提供一种通过使用用户界面控制动态深度的方法和装置，该用户界面就显示重排(rearrange)的立体视图图像而言可设置期望视差。

根据本发明的一方面，提供一种控制立体视图或者多视图图像动态深度的方法，该方法包括：接收立体视图或者多视图图像；通过估算相应于接收的图像的两个图像的偏差并测量所估算偏差的频率，生成偏差直方图；通过卷积所生成的偏差直方图和特征函数，确定该立体视图或者多视图图像的偏差控制量；和通过根据该偏差控制量控制视差，重排立体视图或者多视图输入图像。

生成偏差直方图可包括确定所接收的图像根据压缩和传输技术是否需要解码处理，在该解码处理之后提取偏差矢量，当宏块是跳跃模式时获取比率，估算宏块单元中的偏差，并利用估算的偏差的频率准备偏差直方图。

确定偏差控制量可包括选择特征函数并经由该特征函数和该偏差直方图的卷积，确定最优偏差控制量，其中选择在±7°之内的视差，通过转换视差到像素单元所获得的值是该特征函数的范围，并且根据所接收的图像的类型选择该特征函数。

重排立体视图或者多视图输入图像可包括保持立体视图或者多视图图像具有输入图像的相同尺寸或者通过以相当于偏差控制量一半的值切除立体视图或者多视图图像的每个的边界来调整该立体视图或者多视图图像为显示形式。

该方法还包括执行移动平均滤波以防由于偏差的急剧改变可能发生的抖动现象。

根据本发明的另一个方面，提供一种用于控制立体视图或者多视图图像动态深度的装置，该装置包括：接收立体视图或者多视图图像的接收器；通过估算相应于收到的图像的两个图像的偏差并测量所估算偏差的频率，生成偏差直方图的偏差估算器；通过卷积所生成的偏差直方图和特征函数，确定立体视图或者多视图图像的偏差控制量的偏差控制量确定器；通过根据偏差控制量控制视差来重排立体视图或者多视图输入图像的图像重排器。

该装置还包括可通过经由用户输入信号接收视差范围或者偏差控制量控制动态深度的用户界面。

该装置还包括显示所重排的图像的显示器。

附图说明

通过参考以下附图详细地描述其示范实施例，本发明的上述及其他方面将更清楚，其中：

图1是描述通过左右水平移动每一立体视图或者多视图图像生成稳态立体视图图像的相关技术方法的图；

图2A、2B、2C是描述不同类型的立体照相机的图；

图3A、3B、3C是描述不同类型视差的图；

图4是根据本发明的示范实施例的、用于控制动态深度的装置的方框图；

图5A是根据MPEG-多视图剖面(MVP)的编码器和解码器的方框图；

图5B是描述根据MPEG-2MVP估算运动和偏差的同时提取偏差矢量的处理的图；

图6是描述基于块(block)估算偏差的相关技术方法的图；

图7是根据本发明的示范实施例估算偏差的方法的流程图，其在偏差估算器中被执行；

图8A、8B、8C是描述立体视图或者多视图图像的偏差直方图和合并极限(fusion limit)的图；

图9A和9B是描述相关技术立体视图或者多视图图像的偏差直方图的图；

图10是描述获取视差的方法的图；

图11A、11B、11C、11D、11E、11F是描述直方图函数的多种类型的图；

图12A、12B、12C是描述偏差直方图和特征函数的卷积处理，和卷积结果的图；

图13A和13B是描述根据确定的偏差控制量移动偏差直方图的方法的图；

图14A和14B是描述根据确定的偏差控制量重排(rearrange)立体视图或者多视图图像的方法的图；

图15是描述经由各种用户界面控制动态深度的方法的图；和

图16是描述根据本发明的示范实施例控制动态深度的方法的流程图。

具体实施方式

在下文中，将参考图示本发明示范实施例的附图更完全地描述本发明。然而，本发明可以用不同形式体现并且不应该被解释为限制于在此阐述的示范实施例；相反，提供这些示范实施例使得本公开完全彻底，并将向本领域普通技术人员完全地表达本发明的构思。

观察立体视图图像时视觉疲劳的重要原因是双目会聚点和瞳孔焦点之间的不一致，即视差。

图2A到2C说明用于3D显示的立体照相机的类型的图，它们都是最近正研发的。

图2A中图解的结构是平行设置的，因此没有如同人眼具有的会聚功能。

图2B中图解的结构具有会聚功能，但是在立体视图图像的左右端存在垂直视差。由于视差导致的立体视图图像的变形是疲劳的原因。

图2C中图解的结构是混合立体照相机。混合立体照相机弥补图2A和2B中图解的结构的缺点并保存优点。因此，可控制会聚功能而没有垂直视差。

在多视图照相机的情况下，不能实现图2A到2C中图解的混合立体照相机的功能。当前正被标准化的多视图视频编码(MVC)是发送器有效压缩并发送多视图图像和接收器解码多视图图像的技术。在MVC中，即使当发送器压缩并发送多视图图像时，如果接收器的终端是立体显示器，也应该包括选择两个预定视图的功能。在这种情况下，为了将由多视图照相机获得的图像显示为立体显示，亦即，为了将图像显示为由混合立体照相机获得的图像，需要处理信号的方法。

图3A到3C图解视差类型的图。图3A中图解的负视差是物体似乎是从屏幕伸出的时候，图3B中图解的正视差是物体似乎是在屏幕里面的时候，以及图3C是物体似乎是与屏幕在相同深度的时候。在立体视图图像中，负视差比正视差具有更强的3D效果，但是观察者用正视差更舒适。然而，当立体视图图像中的物体具有过度的视差以最大化3D效果的时候，出现副作用，例如视觉疲劳。

图4是根据本发明的示范实施例的用于控制动态深度的装置400的方框图。

装置400包括图像接收器402，偏差估算器404，偏差控制量确定器406，图像重排器408，和显示器410。

图像接收器402接收和输出立体视图或者多视图图像到偏差估算器404和图像重排器408，最终图像显示在显示器410上。

偏差估算器404估算来自从图像接收器402接收的立体视图或者多视图图像的两个对应图像的偏差，并通过测量所估算的偏差的频率产生偏差直方图。

在下文中，将参考图5A到9描述由偏差估算器404估算偏差并生成偏差直方图的处理。

图5A是根据MPEG-2多视图剖面(MVP)的编码器和解码器的方框图。

当立体视图或者多视图图像数据在多媒体存储媒体中传输或者存储时，如图5A中所示，使用例如MPEG-2MVP或者MVC的标准化压缩和传输技术。利用当压缩立体视图或者多视图图像时每一视点之间的相关性高的事实，以宏块单元估算偏差用于运动补偿，并编码、和传输。

图5B是用于描述当根据MPEG-2MVP估算运动和偏差时提取偏差矢量的处理的图。

图5B说明根据MPEG-2MVP预测运动和偏差的处理，图示了作为估算偏差的方法的例子的一种偏差估算技术。

图6是用于描述偏差估算技术当中最常使用的、基于块(block)估算偏差的相关技术方法的图。

参见图6，左眼图像被分成N×N个均一的块，并且在右眼图像中利用绝对差分的总和(sum of absolute difference，SAD)或者绝对差分的平均值(mean of absolute difference，MAD)方法估算最类似于每一所划分的块的块。在此，参考块和所估算块之间的距离被定义为偏差矢量。通常，偏差矢量可分别给予参考图像中所有像素，但是为了减少计算量假设一个块中的像素大约相同。这是基于块估算偏差的方法的特征。当通过精密地(minutely)估算偏差矢量到像素单元而估算每一个像素的偏差矢量时，这称为基于像素估算偏差的方法。

本发明中，为了增加系统效率，压缩和传输的立体视图或者多视图图像数据被解码，在宏块单元中提取偏差矢量，并准备偏差直方图。在此处理期间，当为了增强压缩效率估算和编码偏差矢量时，大多数宏块以跳跃(skip)模式被编码，这样偏差矢量变成0。因此，利用基于块估算偏差的方法提取的偏差矢量的数量与整个宏块的数量相比可能小于阈值。在这种情况下或者当不压缩立体视图或者多视图图像数据时，使用以宏块单元估算偏差的方法来提取偏差矢量，并利用所提取的偏差矢量准备偏差直方图。此处理将参考图7更详细地描述。利用经过以上处理提取的偏差矢量来估算在确定偏差控制量中所需的偏差。

图7是根据本发明的示范实施例估算偏差的方法的流程图，其在偏差估算器中被执行。

图7中，图示了根据本发明的示范实施例的、在宏块单元中提取偏差矢量的方法，其在图4中图解的偏差估算器404中被执行。

操作710中，确定接收的图像是否是压缩和传输的图像，因此需要解码。当确定接收的图像需要解码时，执行操作720。然而，当接收的图像不是压缩和传输的图像时，执行操作750。

操作720中，接收的图像被解码。

操作730中，经由解码提取的偏差矢量，即以跳跃模式的宏块的数量n相比于所处理的当前块的全部宏块的数量N后与阈值T相比较。当

\frac{n}{N} < T

时，执行操作740，但是当

不小于T时，执行操作750。在此，阈值T确定为经验值。

操作740中，提取的偏差矢量被估算作为用于获取偏差矢量的偏差。

操作750中，因为没有提取的偏差矢量，基于块直接估算偏差。

图8A到8C说明立体视图或者多视图图像的偏差直方图和合并极限值的图。

图8A是描述利用所估算偏差的频率准备的偏差直方图的图。在此，所估算偏差是偏差矢量的水平分量。因为动态深度主要受水平视差而不是垂直视差的影响，所以本发明没有考虑偏差矢量的垂直分量。当长时间观察具有视差的立体视图图像时，预料3D效果具有副作用，例如眼疲劳。因此，应该经由偏差直方图分析两个眼睛上立体视图图像的效果。

图8B和8C是描述偏差直方图中两个眼睛的合并(fusion)极限值里偏差部分的图。相关领域的开发者已知最大合并范围在±7°视差之内，用于合理观察的范围在±2°视差之内，用于舒适观察的范围在±1°视差之内。这种最佳视差范围可根据个人差别、显示特性、观察距离、和内容而不同，但是本发明遵循上述范围。图8B和8C中，亮部分是合并极限值内的区域，黑暗部分是合并极限值外的区域。因此，黑暗部分可能引起副作用，例如眼疲劳。

图9A和9B说明相关技术立体视图或者多视图图像的偏差直方图的图。

图9A图解由背景形成的立体视图图像的偏差直方图，和图9B图解由前景或者物体形成的立体视图图像的偏差直方图。在由背景形成的立体视图图像的情况下，偏差直方图由于负视差而偏向正向，然而在由前景或者物体形成的立体视图图像的情况下，因为前景或者物体与背景相比突出，所以偏差直方图相对偏向正向。

对于在观察立体内容时的舒适动态深度，关心的物体或者前景的一部分应该具有负视差，不关心的背景应该具有正视差。如果情况不是这样的，观察者可能由于过分的动态深度感觉疲劳，或者整个动态深度可能减少。因此，本发明中，通过分析各种立体视图图像的偏差直方图，输入的立体视图图像被转变成对两个眼睛是稳态的立体视图图像，如图9A和9B所示。

返回参考图4，偏差控制量确定器406通过卷积由偏差估算器404准备的偏差直方图和特征函数来确定用于对观察者提供舒适的动态深度的偏差控制量。在此，特征函数表示偏差控制量确定器406的特征函数，其将卷积偏差直方图以获得最优偏差控制量。现在将参考图10到12详细地描述偏差控制量确定器406的操作。

图10是用于描述获取视差θ₁和θ₂的方法的图。

图10图解像素单元中把视差θ₁和θ₂转换为偏差D的构思。参见图10，视差θ₁和θ₂是透镜的调整角度b和两个眼睛的会聚角之间的差异。d₁和d₂是可感觉舒适的动态深度的视差θ₁和θ₂中的深度范围。这些范围可根据经验获得在最大视差范围±7°内，其在合并范围之内。当给定观察距离时，可利用第二余弦定则获得d₁～d₂，可利用成比例的表达式(proportionalexpression)获得偏差D。为了随意地(artificially)控制深度以处理图像信号，应该在像素单元中计算偏差D。当偏差D如方程式1所示被分成像素间距(pixelpitch)时，偏差D变成数字图象的像素单元中的偏差D。

D_pixel＝D/p...(1)

在此，p是像素间距。如方程式1所示，可获得作为相应于d₁～d₂的D_pixel的范围的D₁～D₂。

图11A到11F图解直方图函数的多种类型的图。

图11A到11F中的图是用于执行计算偏差控制量中所需的直方图卷积的各种特征函数的图。在此，D₁～D₂是最佳深度范围d₁～d₂中像素单元的偏差范围。图11A和11B图解可用作由背景形成的立体视图图像的特征函数的不对称函数，图11C到11F图解可用作由背景和前景或者物体形成的立体视图图像的特征函数的对称函数。

图12A到12C图解卷积偏差直方图和特征函数的处理、和卷积结果的图。

图12A图解卷积偏差直方图的结果。S_a是当偏差直方图d[x]沿负向(negative direction)移动时的离散卷积和，在此，S₁在分布在S₁＝-MAX.-MAX+1.....0，1，2，3，......，MAX的范围内。

S_{a} = d \times h_{1} = Σ_{S_{1} = 0}^{MAX} h_{1} [x] d [s_{1} - x] \cdot \cdot \cdot (2)

图12B是卷积背景形成的立体视图图像的偏差直方图的结果，并具有抛物面(parabolic)的形式。因为使用在右侧加重的不对称的函数，用于确定S_a的最大值的偏差直方图移动量D_sh偏向右侧。图12C是卷积背景和前景或者物体形成的立体视图图像的偏差直方图的结果。图12C中，因为使用对称函数，所以S_a具有两个抛物面的形式。在这种情况下，S_a确定最大值和具有局部最大值的偏差直方图移动量D_sh为偏差控制量。

返回参考图4，为了以受控的动态深度显示图像以提供舒适的听觉，图像重排器408利用由偏差控制量确定器406计算的偏差控制量重排(rearrange)图像。现在将参考图13A到14B详细地描述。

图13A和13B是根据确定的偏差控制量移动偏差直方图的方法的图。

图13A是描述立体视图图像由背景形成时的图。使用不对称的函数卷积偏差直方图。基于由卷积获得的D_sh移动偏差直方图，这样通过增加正视差(负偏差)的比率，观察者可获得舒适的动态深度。

图13B是描述当立体视图图像由背景和前景或者物体形成时的图。使用对称函数卷积偏差直方图。基于D_sh2而不是D_sh1移动偏差直方图，这样观察者可获得舒适的动态深度。

图14A和14B是通过根据确定的偏差控制量D_sh向负向移动偏差直方图而重排立体视图或者多视图图像的方法的图。

通过以偏差控制量D_sh的一半即D_sh/2切除立体视图图像的左右末端来移动偏差直方图，如图14A所示。通过移动偏差直方图，可沿正向增加整个立体视图图像的视差。可通过分析立体视图图像的偏差直方图向观察者提供最佳深度。这种效果可如图14B所示关于立体照相机被说明，在不使用图2C中说明的混合立体照相机的情况下可使用处理接收器中信号的方法控制观察者眼睛的会聚点。

因此，获得每一帧n中的偏差控制量D_ah(n)，并且当立体视图图像里的内容变化时该偏差控制量D_ah(n)变化。当每一帧间隔中改变量ΔD_sh(n)突然增加或者减少时，出现其中立体视图图像细微振动的抖动现象。因此，虽然图4中没有说明，可包括防止抖动过滤器，以便通过应用和过滤均匀断面中的窗口防止抖动现象。根据本发明的示范实施例，滑动平均滤波器(movingaverage filter)被用于顺序输入的立体视图图像的偏差控制量D_ah(n)。当窗口尺寸为m，滑动平均滤波器遵循方程式3。

D′_sh(n)＝(D_sh(n)+D_sh(n-1)+D_sh(n-2)+....+D_sh(n-m+1))/m ...(3)

通过对图4的图像重排器408应用D′_sh(n)而不是D_ah(n)，可阻止抖动现象。

图15是经由各种用户界面控制动态深度的方法的图。

根据本发明的另一个示范实施例，用户可通过使用能控制变量的用户界面控制立体视图图像的动态深度。用户界面可以是屏上显示(on screendisplay，OSD)界面或者遥控显示。例如DTV，监视器等等的显示器经由例如OSD界面的用户界面控制例如对比度、亮度、颜色等等的各种变量。如同可通过按压遥控器或者显示器上的按钮经由OSD菜单方便地控制变量，被加到用户界面上的OSD菜单上的可控制动态深度的菜单为观察者提供方便。因此，用于形成从用户界面接收的动态深度的变量，即视差，反映在图4的偏差控制量确定器406上，以便输出观察者期望的图像。

图16是根据本发明的示范实施例的控制动态深度的方法的流程图，该方法在图4说明的用于控制动态深度的装置中执行。

操作1610中，接收立体视图或者多视图图像。

操作1620中，通过估算相应于接收的图像的两个图像的偏差并测量所估算偏差的频率来形成偏差直方图。

操作1630中，通过卷积所形成的偏差直方图和特征函数确定立体视图或者多视图图像的偏差控制量。

操作1640中，通过根据偏差控制量控制视差重新排序立体视图或者多视图图像。

根据本发明，提供一种用于控制动态深度的方法和装置，其确定用于最小化例如眼疲劳的副作用的最优偏差控制量，同时转换立体视图或者多视图图像用于立体显示。使用处理接收器中信号的方法，立体内容可具有由混合立体照相机摄影该立体内容时的摄影效果。上述处理通过分析立体视图图像的偏差直方图以形成最优3D视图并使用经由偏差直方图卷积和技术控制偏差的方法来实现。此外，根据MPEG-2MVP或者MVC压缩的立体视图或者多视图图像被解码然后提取每一宏块的偏差矢量。因此，可以在标准化压缩和传输环境中简单和有效地形成系统结构。

还根据本发明，就显示重新排序的立体视图图像而言，可通过使用可由用户设置期望视差的用户界面控制视差。

虽然本发明已经在此参考示范实施例详细地图示和描述，本领域普通技术人员将了解可在其中进行形式上和细节的多种变化而不背离如以下权利要求定义的本发明的精神和范围。

Claims

1.一种控制立体视图或者多视图图像的动态深度的方法，该方法包括：

接收立体视图或者多视图图像；

通过估算相应于接收的立体视图或者多视图图像的两个图像的偏差并测量所估算偏差的频率，生成偏差直方图；

通过卷积所生成的偏差直方图和特征函数，确定该立体视图或者多视图图像的偏差控制量；和

通过根据该偏差控制量控制视差，重排立体视图或者多视图图像，

其中，所述生成偏差直方图的操作包括：

确定接收的立体视图或者多视图图像是否被编码；

如果确定该立体视图或者多视图图像被编码，则通过解码接收的立体视图或者多视图图像提取宏块的偏差矢量，和利用偏差矢量的频率生成偏差直方图；以及

如果确定该立体视图或者多视图图像没有被编码，则利用宏块的所估算偏差的频率生成偏差直方图，以及

其中，所述确定偏差控制量的操作包括：

如果所接收的图像是背景图象，则利用在右侧加重的不对称函数作为所述特征函数；以及

如果该立体视图或者多视图图像包含对象和背景，则利用对称函数作为该特征函数；

如果该不对称函数具有输出值的右峰值，则利用该不对称函数经由卷积获取移动量，或者如果该对称函数具有输出值的最大值，则利用该对称函数经由卷积获取移动量；以及

确定通过转换移动量到像素单元所获得的值作为该偏差控制量。

2.如权利要求1所述的方法，其中，所述利用偏差矢量的频率生成偏差直方图的操作包括：

将当宏块处于跳跃模式时的情形数量n比宏块的全部数量N与作为经验值设置的阈值T比较；和

如果

则利用偏差矢量的频率生成偏差直方图，以及如果不小于T，则利用宏块的所估算偏差的频率生成偏差直方图。

3.如权利要求1所述的方法，其中，所述特征函数包括离散特征函数、三角形函数、线性函数、二次函数、三次函数中的一个。

4.如权利要求1所述的方法，其中，在所述确定偏差控制量的操作中，通过转换在±7°之内的视差到像素单元获得的值是该特征函数的范围。

5.如权利要求1所述的方法，其中，所述重排立体视图或者多视图输入图像的操作包括通过以相应于该偏差控制量一半的值水平移动该立体视图或者多视图图像来控制视差。

6.如权利要求1所述的方法，其中，所述重排立体视图或者多视图输入图像的操作包括以下步骤之一：

保持该立体视图或者多视图图像以便具有输入图像的相同尺寸；和

通过以相应于该偏差控制量一半的值切除该立体视图或者多视图图像的每个的边界，调整该立体视图或者多视图图像为显示形式。

7.如权利要求1所述的方法，还包括执行移动平均滤波，以防止抖动现象。

8.一种用于控制立体视图或者多视图图像的动态深度的装置，该装置包括：

接收器，其接收立体视图或者多视图图像；

偏差估算器，其通过估算相应于该立体视图或者多视图图像的两个图像的偏差并测量所估算偏差的频率，生成偏差直方图；

偏差控制量确定器，其通过卷积所生成的偏差直方图和特征函数，确定该立体视图或者多视图图像的偏差控制量；和

图像重排器，其通过根据该偏差控制量控制视差，重排立体视图或者多视图输入图像，

其中，该偏差估算器确定接收的立体视图或者多视图图像是否被编码，

如果确定该立体视图或者多视图图像被编码，则该偏差估算器通过解码该立体视图或者多视图图像提取宏块的偏差矢量，并利用偏差矢量的频率生成偏差直方图；以及

如果确定该立体视图和多视图图像没有被编码，则偏差估算器利用宏块的所估算偏差的频率生成偏差直方图，以及

其中，如果接收的图像是背景图象，则偏差控制量确定器使用在右侧加重的不对称函数作为特征函数，

如果该立体视图或者多视图图像包含对象和背景，则偏差控制量确定器利用对称函数作为该特征函数；以及

如果该不对称函数具有输出值的右峰值，则偏差控制量确定器利用该不对称函数经由卷积获取移动量，或者如果对称函数具有输出值的最大值时，则偏差控制量确定器利用该对称函数经由卷积获取移动量；以及确定通过转换移动量到像素单元所获得的值作为该偏差控制量。

9.如权利要求8所述的装置，其中，该偏差估算器将当宏块处于跳跃模式时的情形数量n比宏块的全部数量N与作为经验值设置的阈值T比较；和如果

则利用偏差矢量的频率生成偏差直方图，以及如果不小于T，则利用宏块的估算偏差的频率生成偏差直方图。

10.如权利要求8所述的装置，其中，所述特征函数包含离散特征函数、三角形函数、线性函数、二次函数、三次函数的一个。

11.如权利要求8所述的装置，其中，所述偏差控制量确定器具有通过转换在±7°之内的视差到像素单元获得的值作为特征函数的范围。

12.如权利要求8所述的装置，其中，所述图像重排器通过以相应于偏差控制量一半的值水平移动该立体视图或者多视图图像来控制视差。

13.如权利要求8所述的装置，其中，所述图像重排器执行以下步骤之一：保持立体视图多视图图像以便具有输入图像的相同尺寸；和通过以相应于该偏差控制量一半的值切除该立体视图或者多视图图像的每个的边界，调整该立体视图或多视图图像为显示形式。

14.如权利要求8所述的装置，还包括执行移动平均滤波以防止抖动现象的抖动去除器。

15.如权利要求8所述的装置，还包括用户界面，该用户界面可通过经由用户输入信号接收视差范围和偏差控制量中的至少一个来控制动态深度。