CN1552161A - 滤波强度的决定方法、动态图像编码方法及解码方法 - Google Patents

滤波强度的决定方法、动态图像编码方法及解码方法 Download PDF

Info

Publication number
CN1552161A
CN1552161A CNA038009595A CN03800959A CN1552161A CN 1552161 A CN1552161 A CN 1552161A CN A038009595 A CNA038009595 A CN A038009595A CN 03800959 A CN03800959 A CN 03800959A CN 1552161 A CN1552161 A CN 1552161A
Authority
CN
China
Prior art keywords
image
filtering
adjacent block
filtering strength
object piece
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA038009595A
Other languages
English (en)
Other versions
CN100358366C (zh
Inventor
符式伟
也
林宗顺
申省梅
野真也
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Godo Kaisha IP Bridge 1
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN1552161A publication Critical patent/CN1552161A/zh
Application granted granted Critical
Publication of CN100358366C publication Critical patent/CN100358366C/zh
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/527—Global motion vector estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/573—Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/625—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using discrete cosine transform [DCT]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Abstract

本发明提供一种滤波强度的决定方法、动态图像编码方法及动态图像解码方法，即使在使用参照两个图像的预测编码的情况下，也能决定最佳滤波强度。具有：像素间滤波器(114)和决定该像素间滤波器(114)的滤波强度的滤波处理控制单元(110)，其中，像素间滤波器(114)用于对解码图像数据进行滤波，去除块间边界附近的高频噪声、即块失真，具有滤波强度各不相同的滤波器A(114a)、滤波器B(114b)、滤波器C(114c)及滤波器D(114d)。

Description

滤波强度的决定方法、动态图像编码方法及解码方法
技术领域
本发明涉及一种用于决定去除块(block)间的编码失真的滤波强度的滤波强度决定方法、及根据所决定的滤波强度进行滤波并对动态图像进行编码或解码的动态图像编码方法及动态图像解码方法。
背景技术
为了改善画质的同时改善压缩率，通常在视频压缩方法中采用滤波器。由于量化噪声及动态补偿，人为因素间歇通常发生在低速率的视频压缩解码图像中。滤波器的任务之一是平滑解码图像中的块边界，以缩小或去除这些人为因素间歇。
例如，现在正起草标准的ISO/IEC 14496-2 Part 10的委员会草案(Committee Draft)的视频压缩方法，为了改良动态图像的压缩而采用环滤波器(例如，参考Joint Video Team(JVT)of ISO/IECMPEG and ITU-T VCEG Joint Committee Draft 2002-05-10、JVT-C167.95 Deblocking Filter)。该环滤波器为改善被解码后的图像画质，可适用于参照及非参照图像双方。
图1是表示为了选择使用的滤波器的强度，ISO/IEC 14496-2Part 10标准的委员会草案中使用的判定算法的图。
用于选择所使用的滤波器的强度的判定是在两个邻接的块p及块q的块边界进行的。进行这些块p或块q是否被帧内(Intra)编码的判定(步骤S102)。其中，块p及块q中一个被帧内编码时(步骤S102为Yes)，进行块边界是否是宏观块边界的判定(步骤S103)。其判定结果为块边界是宏观边界时，即两个块不包含于相同宏观块时，选择最强的滤波强度(Bs＝4)(步骤S103为Yes)。另一方面，当块边界不是宏观边界时，即两个块包含于相同宏观块时，选择第二强的滤波强度(Bs＝3)(步骤S103为No)。
当上述判定(步骤S102)结果为块p及块q双方未被帧内编码时(步骤S102为No)，接着进行这两个块中的任一个是否包含表示正交变换后的空间频率成分的系数的判定(步骤S104)。其中，当两个块中的任一个包含系数时(步骤S104为Yes)，选择第三强的滤波强度(Bs＝2)。另一方面，当两个块双方均不包含系数、即在块p及块q双方中系数未被编码时(步骤S104为No)，进行用于选择是否跳过滤波的下一判定(步骤S105)。
进行块p及块q双方的参照图像的索引(index)序号Ref(p)及Ref(q)是否相同的判定。相互比较两个块的垂直(V(p，y)及V(q，y))及水平(V(p，x)及V(q，x))动态向量，进行是否存在比一个像素还少的差的判定。仅在这两个判定结果为两个块的参照图像的索引序号相同，并且它们的垂直及水平动态向量未相隔开一个像素的情况下(步骤S105为No)，跳过这两个块之间的边界的滤波。在其他情况下(步骤S105为Yes)，在块边界进行较弱的滤波(Bs＝1)。
以往用于选择滤波强度的判定算法，对参照两个图像的预测编码图像的块，未能充分覆盖所有可能的情况。其理由是，在参照两个图像的预测编码图像的宏观块中，可以使用直接、正向、反向及参照两个图像的模式进行预测。这些预测模式在以往的判定算法中未被考虑。同样，一个块使用直接模式，另一个块使用参照两个图像的预测模式时，用于比较的动态向量在以往技术中未做充分说明。
发明内容
因此，本发明是鉴于上述情况而提出的，其的目的是提供一种滤波强度的决定方法、动态图像编码方法及动态图像解码方法，即使在使用参照两个图像的预测编码的情况下，也能决定最佳滤波强度。
为了达到上述目的，本发明涉及的滤波强度的决定方法，用于决定去除构成图像的块间的编码失真的滤波强度，其特征在于，包括：参数取得步骤，取得已编码的对象块及与该对象块邻接的已编码的邻接块的编码时的信息即参数；比较步骤，当包含所述对象块及所述邻接块的图像是进行参照两个图像的图像间预测编码的图像时，比较所述对象块及所述邻接块的所述参数；和决定步骤，根据所述比较步骤的比较结果来决定滤波强度。
其中，所述参数包含块的编码模式，在所述比较步骤包含图像数判定步骤，根据所述对象块及所述邻接块各自的所述编码模式，判定所述对象块及所述邻接块分别参照的参照图像数是否相同，在所述决定步骤也可以根据所述图像数判定步骤的判定结果来决定不同的滤波强度。
另外，所述参数还包含用于唯一识别参照图像的参照索引，在所述比较步骤还包含参照图像判定步骤，根据所述对象块及所述邻接块各自的所述参照索引，判定所述对象块及所述邻接块分别参照的参照图像是否相同，在所述决定步骤也可以根据所述参照图像判定步骤的判定结果来决定不同的滤波强度。
此外，所述参数还包含相对参照图像的动态向量，在所述比较步骤还包含动态向量判定步骤，根据所述对象块及所述邻接块中包含的所述动态向量，判定所述对象块的任意动态向量的水平成分和所述邻接块的任意动态向量的水平成分之差、或所述对象块的任意动态向量的垂直成分和所述邻接块的任意动态向量的垂直成分之差中的至少一个是否在规定值以上，在所述决定步骤也可以根据所述动态向量判定步骤的判定结果来决定不同的滤波强度。
这样，对参照两个图像的预测编码图像中的块，可以覆盖所有可能的情况，即使在使用参照两个图像的预测编码的情况下，也能对解码图像数据进行滤波，决定用于去除作为块间的边界附近的高频噪声的块失真(块间的编码失真)的滤波器的最佳滤波强度。另外，该滤波强度决定方法可以适用于动态图像编码装置及动态图像解码装置双方。
另外，本发明涉及的滤波强度的决定方法，用于决定去除构成图像的块间的编码失真的滤波强度，其特征在于，包括：参数取得步骤，取得包含已编码的对象块及与该对象块邻接的已编码的邻接块的图像的图像类型；决定步骤，在由所述参数取得步骤所取得的图像类型为表示参照两个图像的图像间预测编码时，决定比表示参照一个图像的图像间预测编码时更强的滤波强度。
这样，即使在使用与上述相同的参照两个图像的预测编码的情况下，也能对解码图像数据进行滤波，决定用于去除作为块间的边界附近的高频噪声的块失真(块间的编码失真)的滤波器的最佳滤波强度。另外，该滤波强度决定方法可以适用于动态图像编码装置及动态图像解码装置双方。
本发明涉及的动态图像编码方法，以块单位对构成动态图像的各图像进行编码，其特征在于，包括滤波步骤，根据由本发明涉及的滤波强度的决定方法所决定的滤波强度，在所述对象块及所述邻接块之间进行滤波。
另外，本发明涉及的动态图像解码方法，对构成动态图像的各图像以块单位被编码后的动态图像编码数据进行解码，其特征在于，包括滤波步骤，根据由本发明涉及的滤波强度的决定方法所决定的滤波强度，在所述对象块及所述邻接块之间进行滤波。
本发明不仅可以实现这种滤波强度的决定方法、动态图像编码方法及动态图像解码方法，还可以实现具有以这种滤波强度的决定方法、动态图像编码方法及动态图像解码方法包含的特征步骤为单元的滤波强度决定装置、动态图像编码装置及动态图像解码装置，也可以实现使计算机执行这些步骤的程序。毋庸置言，这种程序可以通过CD-ROM等记录介质和因特网等传送介质进行发送。
附图说明
图1是表示以往的滤波强度的决定方法的流程图。
图2是表示本发明涉及的动态图像编码装置的结构方框图。
图3是说明图像存储器中的图像顺序的示意图，(a)表示输入顺序，(b)表示变更排列后的顺序。
图4是说明图像和参照索引的示意图。
图5是说明直接模式的动态向量的示意图。
图6是表示实施方式1的滤波处理控制单元的滤波强度决定方法的流程图。
图7是表示本发明涉及的动态图像解码装置的结构方框图。
图8是表示实施方式2的滤波处理控制单元的滤波强度决定方法的流程图。
图9是说明用于存储通过计算机系统来实现各实施方式的动态图像编码方法及动态图像解码方法的程序的记录介质的示意图，(a)表示作为记录介质主体的软盘的物理格式的示例图，(b)表示从软盘正面观看时的外观、截面结构、及软盘的示意图，(c)表示使软盘FD进行上述程序的记录重放的结构示意图。
图10是表示内容供给系统的整体结构的方框图。
图11是表示携带电话的示例概图。
图12是表示携带电话的结构方框图。
图13是表示数字播放用系统的示例图。
实施方式
以下，参照附图说明本发明的实施方式。
(实施方式1)
图2是表示使用了本发明涉及的滤波强度的决定方法的动态图像编码装置的结构方框图。
动态图像编码装置是把输入的动态图像进行压缩编码并作为编码列输出的装置，如图2所示，具有：图像存储器101、差分运算单元102、预测残差编码单元103、编码列生成单元104、预测残差解码单元105、加法运算单元106、动态向量检测单元107、动态向量存储单元108、动态补偿编码单元109、滤波处理控制单元110、图像存储器111、开关112、113以及像素间滤波器114。
图像存储器101按显示时间顺序存储以块单位输入的动态图像。这里图像指包含帧及场(field)双方的画面的一个编码单位。动态向量检测单元107把已编码的解码图像数据用作参照图像，在该图像内的探索区域进行表示最佳预测位置的动态向量的检测。另外，动态向量检测单元107把检测的动态向量通知给动态补偿编码单元109及动态向量存储单元108。
动态补偿编码单元109使用由动态向量检测单元107所检测的动态向量来决定块的编码模式，根据该编码模式生成预测图像数据。所谓编码模式表示用哪种方法对宏观块进行编码，表示是非帧内编码(动态补偿编码)还是帧内编码。例如，在图像间的相关性低，与进行动态预测比，帧内编码较佳的情况下，选择帧内编码。该帧内编码模式被通知给滤波控制单元110。另外，从动态补偿编码单元109向编码列生成单元104通知动态向量和编码模式。动态向量存储单元108存储由动态向量检测单元107所检测的动态向量。
差分运算单元102运算从图像存储器101读出的图像数据和从动态补偿编码单元109输入的预测图像数据的差分，生成预测残差图像数据。预测残差编码单元103对所输入的预测残差图像数据进行正交变换和量化等编码处理，生成编码数据。编码生成单元104对由预测残差编码单元103生成的编码数据进行可变长度编码等，并且通过附加从动态补偿编码单元109输入的动态向量信息以及编码模式的信息等来生成编码列。
预测残差解码单元105对所输入的编码数据进行逆量化和逆正交变换等解码处理，生成解码差分图像数据。加法运算单元106加算从预测残差解码单元105输入的解码差分图像数据和从动态补偿编码单元109输入的预测图像数据，生成解码图像数据。图像存储器111存储被滤波后的解码图像数据。
滤波处理控制单元110根据所输入的动态向量和编码模式，选择使用像素间滤波器114的滤波强度、即滤波器A114a、滤波器B114b、滤波器C114c、滤波器D114d、以及不进行滤波(skip)中的哪一方，控制开关112及开关113。开关112及开关113是分别通过滤波处理控制单元110的控制，选择连接端子“1”～端子“5”中的任一个的开关。开关113设在加法运算单元106的输出端子和像素间滤波器114的输入端子之间。开关112设在图像存储器111的输入端子和像素间滤波器114的输出端子之间。
像素间滤波器114例如是对解码图像数据进行滤波，去除作为块间边界附近的高频噪声的块失真的解块(deblock)·滤波器，具有滤波强度各不相同的滤波器A114a、滤波器B114b、滤波器C114c、滤波器D114d。该滤波器A114a、滤波器B114b、滤波器C114c、滤波器D114d中，滤波器A114a的滤波强度最强，以后滤波器B114b、滤波器C114c、滤波器D114d的滤波强度顺序变弱，滤波器D114d的滤波强度最弱。另外，对应滤波强度，用于滤波的运算处理量也不同。开关112和开关113等可以作为硬件安装成图示结构，也可以作为软件进行安装。
图3是说明图像存储器101的图像顺序的示意图，(a)表示输入顺序，(b)表示变更排列顺序。其中，纵线表示图像，在各图像右下部所示记号中的第1个字母表示图像类型(I、P或B)，第2个以后的数字表示按显示时间顺序的图像序号。P图像把按显示时间顺序位于前面附近的I图像或P图像用作参照图像，B图像把按显示时间顺序位于前面附近的I图像或P图像、和按显示时间顺序位于后面附近的一张I图像或P图像用作参照图像。
图4是说明图像和参照索引的示意图。参照索引用于唯一识别存储在图像存储器111中的参照图像，如图4所示，是对应各图像赋予的序号。另外，参照索引还用于指示在通过图像间预测对块进行编码时使用的参照图像。
对第1参照索引的值，首先在表示显示顺序的信息中，对编码对象图像前面的参照图像，按照靠近编码对象图像的顺序分配从“0”开始的值。对编码对象前面的所有参照图像分配了从“0”开始的值之后，对编码对象图像后面的参照图像，按照与编码对象图像接近的顺序分配连续的值。
对第2参照索引的值，首先在表示显示顺序的信息中，对编码对象图像后面的参照图像，按照与编码对象图像接近的顺序分配从“0”开始的值。对编码对象后面的所有参照图像分配从“0”开始的值之后，对编码对象图像前面的参照图像，按照与编码对象图像接近的顺序分配连续的值。
例如，在图4中，当第1参照索引的值Ridx1是“0”，第2参照索引的值Ridx2是“1”时，前面参照图像是图像序号为7的B图像，后面参照图像是图像序号为9的P图像。其中，图像序号是表示显示顺序的序号。图4所示是参照索引的分配方法的一个示例，分配方法不限定于该图4所示示例。
下面，说明如上构成的动态图像编码装置的动作。
输入图像例如按图3(a)所示，按显示时间顺序以图像(picture)单位被输入到图像存储器101。输入到图像存储器101的各图像一旦将要编码的图像类型被决定，例如，按图3(b)所示，被变更排列成要进行编码的顺序。向该编码顺序的变更排列是根据图像间预测编码中的参照关系来进行的，被用作参照图像的图像被实施变更排列，以便在用作参照图像的图像之前被编码。图像类型的决定，例如一般使用周期性分配图像类型的方法。
在图像存储器101进行了变更排列后的各图像，例如以被分割成水平16×垂直16像素的组的宏观块单位被读出。另外，动态补偿及动态向量的抽出，例如以被分割成水平8×垂直8像素的组的宏观块单位进行。
从图像存储器101读出的对象宏观块被输入到动态向量检测单元107和差分运算单元102。
动态向量检测单元107把存储在图像存储器111中的解码图像数据用作参照图像，对宏观块内的各块进行动态向量的检测。动态向量检测单元107把所检测的动态向量及表示其参照图像的参照索引输出给动态补偿编码单元109。
动态补偿编码单元109使用由动态向量检测单元107检测的动态向量和参照索引来决定宏观块的编码模式。其中，编码模式例如在B图像时，可以从图像内编码、使用前面动态向量的图像间预测编码、使用后面动态向量的图像间预测编码、使用两个动态向量的图像间预测编码、直接模式中选择任一方法进行编码。
下面，使用图5说明直接模式下的图像间预测方法。图5是说明直接模式下的动态向量的示意图，表示使用直接模式对图像B8的块a进行编码时的情况。该场合时，利用在位于图像B8后面的参照图像即图像P9中，具有和块a位于相同位置的块b的动态向量c。该动态向量c是在块b被编码时使用的动态向量，并参照着图像P5。块a是使用相对于通过对动态向量c进行定标(scaling)处理而得到的前面参照图像即图像P5的动态向量d、和相对于后面参照图像即图像P9的动态向量e，根据图像P5和图像P9进行动态补偿。
动态补偿编码单元109根据所决定的编码模式生成预测图像数据，把该预测图像数据输出给差分运算单元102和加法运算单元106。动态补偿编码单元109在选择了直接模式时，把如上所述后面参照图像中和对象块位于相同位置的块的动态向量作为参照动态向量，动态补偿编码单元109从动态向量存储单元108读出该参照动态向量和参照索引。另外，动态补偿编码单元109在选择了图像内编码时，不输出预测图像数据。动态补偿编码单元109把所决定的编码模式和动态向量和参照索引的信息输出给滤波处理控制单元110和编码列生成单元104，把表示参照图像的参照索引的值输出给滤波处理控制单元110。
从动态补偿编码单元109输入了预测图像数据的差分运算单元102，运算该预测图像数据和从图像存储器101读出的图像B11的宏观块的图像数据的差分，生成预测残差图像数据，并输出给预测残差编码单元103。
输入了预测残差图像数据的预测残差编码单元103，对该预测残差图像数据进行正交变换和量化等编码处理，生成编码数据，并输出给编码列生成单元104和预测残差解码单元105。输入了编码数据的编码列生成单元104对该编码数据进行可变长度编码等，并且，通过附加从动态补偿编码单元109输入的动态向量信息、编码模式信息等来生成编码列，并进行输出。对使用直接模式进行编码的宏观块，不向编码列附加动态向量信息。
另一方面，预测残差解码单元105对所输入的编码数据实施逆量化和逆正交变换等解码处理，生成解码差分图像数据，输出给加法运算单元106。加法运算单元106通过加算解码差分图像数据和从动态补偿编码单元109输入的预测图像数据，生成解码图像数据，并通过开关113输出给像素间滤波器114。
输入了解码图像数据的像素间滤波器114利用通过开关112、113选择的滤波器A114a、滤波器B114b、滤波器C114c、或滤波器D114d中的任一个对解码图像数据进行滤波，或者不进行滤波(skip)，并通过开关112存储到图像存储器111。此时，切换开关112及开关113的各端子“1”～端子“5”的控制是通过滤波处理控制单元110如下进行的。
图6是表示滤波处理控制单元110的滤波强度的决定方法的流程图。
滤波处理控制单元110决定在解码图像数据的垂直及水平方向两方的块边界需要的滤波强度。用于选择进行该滤波使用的滤波器的强度的判定和图1所示以往的情况相同，是在两个邻接的块p和块q的块边界进行的(步骤S201)。首先，滤波处理控制单元110根据从动态补偿编码单元109输出的各宏观块的编码模式，进行是否对这些块p或块q进行图像内(intra)编码的判定(步骤S202)。此处，块p或块q中之一进行帧内编码时(步骤S202为Yes)，滤波处理控制单元110进行块边界是否为宏观块边界的判定(步骤S203)。
当该判定结果为块边界是宏观块边界时，即两个块不包含于相同宏观块时，滤波处理控制单元110选择滤波强度最强的滤波器A114a(Bs＝4)(步骤S203为Yes)。即，滤波处理控制单元110进行把开关112及开关113的各端子切换为“1”的控制。另一方面，当块边界不是宏观块边界时，即这两个块包含于相同宏观块时，滤波处理控制单元110选择强度为第二强的滤波器B114b(Bs≥3)(步骤S203为No)。即，滤波处理控制单元110进行把开关112及开关113的各端子切换为“2”的控制。其中，Bs≥3表示Bs至少是该流程图所示条件中大于等于3的值，由此处未公开的其他条件来决定Bs是等于3还是大于3。以后，含有该不等号的公式表示可以用本发明未公开的条件决定的范围。
当上述判定(步骤S202)结果为块p及块q双方不进行帧内编码时(步骤S202为No)，滤波处理控制单元110进行该块p或块q中之一是否含有表示正交变换后的空间频率成分的系数的判定(步骤S204)。其中，当两个块之一含有系数时(步骤S204为Yes)，滤波处理控制单元110选择强度为第三强的滤波器C114c(Bs≥2)。即，滤波处理控制单元110进行把开关112及开关113的各端子切换为“3”的控制。
另一方面，当两个块双方均不包含系数、即在块p及块q双方不进行系数编码时(步骤S204为No)，滤波处理控制单元110进行包含块p及块q的图像是P图像还是B图像的判定(步骤S205)。其中，当包含块p及块q的图像是P图像时，滤波处理控制单元110根据从动态补偿编码单元109输入的参照索引的值和从动态向量存储单元108输入的动态向量，进行块p及块q参照的参照图像相同、并且块p及块q的动态向量的垂直成分(V(p，y)及V(q，y))和水平成分(V(p，x)及V(q，x))的各自差是否比一个像素少的判定(步骤S208)。即，是否全部满足下述公式(A)、(B)、(C)。
Ref(p)＝Ref(q)                 ……(A)
|V(p，x)-V(q，x)|＜1           ……(B)
|V(p，y)-V(q，y)|＜1           ……(C)
其中，Ref(p)及Ref(q)分别表示块p及块q参照的参照图像。
当该判定结果为块p及块q参照的参照图像相同、并且块p及块q的动态向量的垂直成分和水平成分的各自差比一个像素少的情况下(步骤S208为Yes)，滤波处理控制单元110选择不进行滤波(Bs＝0)。即，滤波处理控制单元110进行把开关112及开关113的各端子切换为“5”的控制。另一方面，当是其他情况时(步骤S208为No)，滤波处理控制单元110选择滤波强度最弱的滤波器D114d(Bs≥1)。即，滤波处理控制单元110进行把开关112及开关113的各端子切换为“4”的控制。
当上述判定(步骤S205)结果为包含块p及块q的图像是B图像时，宏观块的编码模式是使用前面动态向量的图像间预测编码、使用后面动态向量的图像间预测编码、使用两个动态向量的图像间预测编码、直接模式中的任一个。例如，在块p仅使用前面预测，块q使用参照两个图像的预测的情况下，块p的参照图像数为“1”，并且块q的参照图像数为“2”。因此，滤波处理控制单元110进行块p及块q参照的参照图像数是否相同的判定(步骤S206)。当该结果为块p及块q参照的参照图像数不同时(步骤S206为No)，滤波处理控制单元110选择滤波强度最弱的滤波器D114d(Bs≥1)。
另一方面，当块p及块q参照的参照图像数相同时(步骤S206为Yes)，滤波处理控制单元110根据从动态补偿编码单元109输入的参照索引的值，进行块p及块q参照的参照图像是否完全相同的判定(步骤S207)。当该结果为块p及块q参照的参照图像即使有一个不同时(步骤S207为No)，滤波处理控制单元110选择滤波强度最弱的滤波器D114d(Bs≥1)。
另一方面，当块p及块q参照的参照图像完全相同时(步骤S207为Yes)，滤波处理控制单元110进行块p及块q的加权预测的加权(ABP)系数是否相同的判定(步骤S209)。当该结果为块p及块q的加权系数不同时(步骤S209为No)，滤波处理控制单元110选择滤波强度最弱的滤波器D114d(Bs≥1)。此处所说加权预测是指在图像间预测中，把向参照图像的像素值乘以第1加权系数α、再加上第2加权系数β的值，作为预测后的像素值的预测方式。
另一方面，当块p及块q的加权系数相同时(步骤S209为Yes)，滤波处理控制单元110进行相对块p及块q的所有动态向量的垂直及水平成分的各自差是否比一个像素少的判定(步骤S210)。即，是否全部满足下述公式(D)～(G)。
|Vf(p，x)-Vf(q，x)|＜1      ……(D)
|Vf(p，y)-Vf(q，y)|＜1      ……(E)
|Vb(p，x)-Vb(q，x)|＜1      ……(F)
|Vb(p，y)-Vb(q，y)|＜1      ……(G)
其中，Vf、Vb表示块q及块q各自的动态向量，例如在参照图像为一幅时仅具有1个。
当该判定结果为相对块p及块q的所有动态向量的垂直及水平成分的各自差比一个像素少的情况下(步骤S210为Yes)，滤波处理控制单元110选择不进行滤波(Bs＝0)。另一方面，在其他情况下(步骤S210为No)，滤波处理控制单元110选择滤波强度最弱的滤波器D114d(Bs≥1)。
如上所述，B图像的宏观块可以使用直接模式进行预测。在使用直接模式时，对象块的动态向量是从第2参照索引Ridx2是“0”的参照图像中具有对应与对象块相同位置的块的动态向量导出的。该场合时，对象块的前面参照图像是对应的块的动态向量参照的参照图像，对象块的后面参照图像是第2参照索引Ridx2是“0”的参照图像。因此，滤波处理控制单元110把所导出的动态向量及参照图像用于决定滤波强度。
如上所述，包含块p及块q的图像是B图像时，进行块p及块q参照的参照图像数是否相同、参照的参照图像是否完全相同的判定，所以即使在使用参照两个图像的预测编码时，也能决定最佳的滤波强度。所以，可以对动态图像进行编码，以改善将要解码的动态图像的画质。
图7是表示使用本发明涉及的滤波强度的决定方法的动态图像解码装置的结构方框图。
动态图像解码装置是对动态图像编码装置进行编码后的编码列进行解码的装置，如图7所示，具有：编码列解析单元201、预测残差解码单元202、动态补偿解码单元203、动态向量存储单元204、滤波处理控制单元205、图像存储器206、加法运算单元207、开关208、209及像素间滤波器210。
编码列解析单元201从所输入的编码列抽出编码模式信息、以及进行编码时使用的动态向量信息等的各种数据。预测残差解码单元202进行所输入的预测残差编码数据的解码，生成预测残差图像数据。动态补偿解码单元203根据编码时的编码模式信息以及动态向量的信息等，从存储在图像存储器206的参照图像中取得图像数据，生成动态补偿图像数据。动态向量存储单元204存储由编码列解析单元201所抽出的动态向量。加法运算单元207加算从预测残差解码单元202输入的预测残差图像数据和从动态补偿解码单元203输入的动态补偿图像数据，生成解码图像数据。图像存储器206存储被滤波后的解码图像数据。
滤波处理控制单元205选择使用像素间滤波器210的滤波强度、即滤波器A210a、滤波器B210b、滤波器C210c、滤波器D210d、以及不进行(skip)滤波中的哪一方，控制开关208及开关209。开关208及开关209是分别通过滤波处理控制单元205的控制，选择连接端子“1”～端子“5”中的任一个的开关。开关209设在加法运算单元207的输出端子和像素间滤波器210的输入端子之间。开关208设在图像存储器206的输入端子和像素间滤波器210的输出端子之间。
像素间滤波器210例如是对解码图像数据进行滤波，去除块间边界附近的高频噪声的块失真的解块·滤波器，具有滤波强度各不相同的滤波器A210a、滤波器B210b、滤波器C210c、滤波器D210d。该滤波器A210a、滤波器B210b、滤波器C210c、滤波器D210d中，滤波器A210a的滤波强度最强，以后滤波器B210b、滤波器C210c、滤波器D210d的滤波强度顺序变弱，滤波器D210d的滤波强度最弱。另外，对应滤波强度，用于滤波的运算处理量也不同。
下面，说明如上构成的动态图像解码装置的动作。
编码列解析单元201从所输入的编码列抽出编码模式信息以及动态向量信息等的各种数据。编码列解析单元201把所抽出的编码模式的信息输出给动态补偿解码单元203及滤波处理控制单元205，把动态向量信息和参照索引输出给动态向量存储单元204。另外，编码列解析单元201把所抽出的预测残差编码数据输出给预测残差解码单元202。输入了预测残差编码数据的预测残差解码单元202对该预测残差编码数据进行解码，生成预测残差图像数据，输出给加法运算单元207。
另一方面，动态补偿解码单元203根据从编码列解析单元201输入的编码模式信息和参照索引的值、以及从动态向量存储单元204读出的动态向量信息，参照存储在图像存储器206中的参照图像，生成动态补偿图像数据。然后，动态补偿解码单元203向加法运算单元207输出所生成的动态补偿图像数据，把表示参照图像的参照索引的值输出给滤波处理控制单元205。加法运算单元207加算动态补偿图像数据和从预测残差解码单元202输入的预测残差图像数据，生成解码图像数据，通过开关209输出给像素间滤波器210。
输入了解码图像数据的像素间滤波器210利用通过开关208、209选择的滤波器A210a、滤波器B210b、滤波器C210c、滤波器D210d中的任一个对解码图像数据进行滤波，或者不进行(skip)滤波，通过开关208存储到图像存储器206。此时，切换开关208及开关209的各端子“1”～端子“5”的控制是通过滤波处理控制单元205进行和上述动态图像编码装置的滤波处理控制单元110相同的动作而实现的。
如上所述，当包含块p及块q的图像是B图像时，进行块p及块q参照的参照图像数是否相同、参照的参照图像是否完全相同的判定，所以即使在使用参照两个图像的预测编码的情况下，也能决定最佳的滤波强度。因此，可以改善动态图像的画质，进行解码。
(实施方式2)
在本实施方式中，一部分与上述实施方式1说明的滤波处理控制单元110的滤波强度的决定方法不同。因此，对结构上与实施方式1相同的部分，省略其详细说明。另外，对滤波处理控制单元110的滤波强度的决定与实施方式1相同的部分，也省略其说明。而动态图像解码装置的情况时，则是滤波处理控制单元205的滤波强度的决定方法。
图8是表示实施方式2滤波强度的决定方法的流程图。
滤波处理控制单元110进行的块p或块q中的任一个是否含有表示正交变换后的空间频率成分的系数的判定(步骤S304)结果，当两个块之一含有系数的情况时(步骤S304为Yes)，进行以下处理。
滤波处理控制单元110进行包含块p及块q的图像是P图像还是B图像的判定(步骤S311)。其中，当包含块p及块q的图像是P图像时，滤波处理控制单元110选择滤波强度为第三强的滤波器C114c(Bs(p)≥2)。另一方面，当包含块p及块q的图像是B图像时，滤波处理控制单元110选择滤波强度比P图像时的Bs(p)强的Bs(b)(Bs(b)＞Bs(p))。
如上所述，当块p或块q之一含有表示正交变换后的空间频率成分的系数时，进行包含块p及块q的图像是P图像还是B图像的判定，所以即使在使用参照两个图像的预测编码的情况下，也能决定最佳的滤波强度。因此，可以对动态图像进行编码，以改善将要解码的动态图像的画质。
另外，在上述各实施方式中，在滤波处理控制单元110选择不进行(skip)滤波(Bs＝0)的情况下，不是不进行(skip)滤波(Bs＝0)，例如，也可以使用滤波强度比滤波强度最弱的滤波器D114d(Bs≥1)还弱的滤波器。
在上述各实施方式中，滤波处理控制单元110没必要执行图6或图9流程图所示的全部步骤，也可以省略一部分步骤的处理。例如，当步骤S207(S307)的判定结果为块p及块q参照的参照图像全部相同时(步骤S207(S307)为Yes)，进行步骤S209(S309)的判定处理，但也可以不进行该处理，而进行步骤S210(S310)的判定处理。另外，也可以更换各步骤的执行顺序。
在上述各实施方式中，作为编码单位使用图像进行了说明，但也可以是场或帧。
(实施方式3)
通过把用于实现上述各实施方式所示的动态图像编码方法或动态图像解码方法的结构的程序记录在软盘等存储介质上，可以在独立的计算机系统上简单地实施上述各实施方式所示的处理。
图9是说明存储通过计算机系统来实现各实施方式的动态图像编码方法及动态图像解码方法的程序的存储介质的示意图。
图9(b)表示从软盘正面观看时的外观、截面结构及软盘，图9(a)表示作为记录介质主体的软盘的物理格式的示例。软盘FD内置于壳体F内，在该软盘的表面上从外周向内周形成有多个同心圆状磁道Tr，各磁道在角度方向上被分割成16个扇区Se。因此，在存储了上述程序的软盘中，在上述软盘FD上所分配的区域中，记录着作为上述程序的动态图像编码方法。
图9(c)表示用于在软盘FD上进行上述程序的记录重放的结构。把上述程序记录在软盘FD上时，通过软盘驱动器FDD从计算机系统Cs写入作为上述程序的动态图像编码方法或动态图像解码方法。利用软盘内的程序在计算机系统中构建上述动态图像编码方法时，利用软盘驱动器从软盘读出程序，转发到计算机系统中。
在上述说明中，作为记录介质使用软盘进行了说明，但使用光盘同样也可以实现。记录介质不限定于此，IC卡、ROM盒等只要能够记录程序，同样都可以实现。
下面，说明上述实施方式所示的动态图像编码方法和动态图像解码方法的应用示例及使用了该示例的系统。
图10表示实现内容发送服务的内容供给系统ex100的整体结构的方框图。把通信服务的提供空间分割成所期望的大小，在各单元内分别设置作为固定无线局的基站ex107～ex110。
该内容供给系统ex100，例如在因特网ex101上通过因特网ex服务提供方ex102及电话网ex104、以及基站ex107～ex110，连接计算机ex111、PDA(personal digital assistant)ex112、摄像机ex113、携带电话ex114、带摄像机的携带电话115等各种机器。
但是，内容供给系统ex100不限定于图10所示组合，也可以进行任意组合来连接。还可以不通过作为固定无线局的基站ex107～ex110，而使各种机器直接连接电话网ex104。
摄像机ex113是可以进行数字摄像等动画摄影的机器。携带电话可以是PDC(Personal Digital Communications)方式、CDMA(CodeDivision Multiple Access)方式、W-CDMA(Wideband-CodeDivision Multiple Access)方式、或GSM(Global System for MobileCommunications)方式的携带电话机、或者PHS(PersonalHandyphone System)等任何方式。
另外，流(stream)服务器ex103从摄像机ex113通过基站ex109、电话网ex104而连接，可以使用摄像机ex113进行基于用户发送的被编码处理后的数据的有效发送等。所摄影的数据的编码处理可以用摄像机ex113进行，也可以用进行数据的发送处理的服务器等进行。另外，用摄像机ex116摄影的动画数据也可以通过计算机ex111发送到流服务器ex103。摄像机ex116是可以摄影数字摄像机等的静止画、动画的机器。该场合时，动画数据的编码可以用摄像机ex116进行，也可以用计算机ex111进行。编码处理是在计算机ex111或具有摄像机ex116的LSIex117进行处理。另外，也可以把动态图像编码·解码用软件安装到计算机ex111可读取的记录介质、即任意存储介质(CD-ROM、软盘、硬盘等)上。此外，也可以用带摄像机的携带电话ex115发送动画数据。此时的动画数据是用具有携带电话ex115的LSI编码处理后的数据。
在该内容供给系统ex100中，把用户利用摄像机ex113、摄像机ex116等摄影的内容(例如，摄影音乐场景的映像等)进行与上述实施方式相同的编码处理，然后发送到流服务器ex103，另一方面，流服务器ex103对有请求的客户端流动分配上述内容数据。作为客户端，有可以对上述编码处理后的数据进行解码的计算机ex111、PDAex112、摄像机ex113、携带电话ex114等。这样，内容供给系统ex100是可以在客户端接收并重放被编码后的数据，并通过在客户端进行实时接收、解码、重放，也可以实现个人播放的系统。
为了进行构成该系统的各机器的编码、解码，可以使用上述各实施方式所示的动态图像编码装置或动态图像解码装置。
作为其一个示例，说明携带电话。
图11是表示使用了上述实施方式中说明的动态图像编码方法和动态图像解码方法的携带电话ex115的示意图。携带电话ex115具有：在与基站ex110之间进行电波收发的天线ex201；能拍摄CCD摄像机等的映像、静止画的摄像单元ex203；显示用摄像单元ex203拍摄的映像、用天线ex201接收的映像等被解码后的数据的液晶显示屏等的显示单元ex202；由操作键ex204组构成的主体单元；进行声音输出的扬声器等声音输出单元ex208；进行声音输入的传声器等声音输入单元ex205；用于保存所摄影的动画或静止画的数据、所接收的邮件数据、动画数据或静止画数据等被编码后的数据或被解码后的数据的记录介质ex207；用于在携带电话ex115上安装记录介质ex207的安装槽ex206。记录介质ex207存储有可以在SD卡等塑料壳体内进行电气改写或擦除的不易消失性存储器、即EEPROM(Electrically Erasable and Programmable Read Only Memory)之一的闪存元件。
下面，使用图12说明携带电话ex115。携带电话ex115对统一控制具有显示单元ex202及操作键ex204的主体单元各部分的主控制单元ex311，电源电路单元ex310、操作输入控制单元ex304、图像编码单元ex312、摄像接口单元ex303、LCD(Liquid CrystalDisplay)控制单元ex302、图像解码单元ex309、多路分离单元ex308、记录重放单元ex307、调制解调电路单元ex306及声音处理单元ex305通过同步总线ex313而相互连接。
电源电路单元ex310通过用户的操作结束通话并使电源键处于接通状态，通过从备份电池向各单元提供电力，使带摄像机的数字携带电话ex115起动成可工作状态。
携带电话ex115根据由CPU、ROM及RAM等构成的主控制单元ex311的控制，在语音通话模式时，通过声音处理单元ex305把经由声音输入单元ex205汇集的语音信号变换为数字音频数据，通过调制解调控制电路单元ex306将其进行波谱扩散处理，在收发电路单元ex301实施数字模拟变换处理及频率变换处理后，通过天线ex201进行发送。携带电话ex115将在语音通话模式时由天线ex201接收的接收数据放大，并实施频率变换处理及模拟数字变换处理，通过调制解调控制电路单元ex306进行波谱扩散处理，通过声音处理单元ex305变换为模拟声音数据后，将其通过声音输出单元ex208进行输出。
在数据通信模式下发送电子邮件时，经由主体单元的操作键ex204的操作而输入的电子邮件的文本数据通过操作输入控制单元ex304被发送到主控制单元ex311。主控制单元ex311通过调制解调控制电路单元ex306对该文本数据进行波谱扩散处理，通过收发电路单元ex301实施数字模拟变换处理和频率变换处理后，通过天线ex201发送到基站ex110。
在数据通信模式下发送图像数据时，把由摄像单元ex203拍摄的图像数据通过摄像接口单元ex303供给图像编码单元ex312。在不发送图像数据时，可以把由摄像单元ex203拍摄的图像数据通过摄像接口单元ex303及LCD控制单元ex302直接显示在显示单元ex202上。
图像编码单元ex312具有本发明申请中说明的动态图像编码装置，通过把从摄像单元ex203供给的图像数据利用上述实施方式所示的动态图像编码装置使用的编码方法进行压缩编码，变换成编码图像数据，将其发送到多路分离单元ex308。与此同时，携带电话机ex115把在摄像单元ex203摄像过程中由声音输入单元ex205汇集的声音作为数字声音数据，通过声音处理单元ex305发送到多路分离单元ex308。
多路分离单元ex308以规定方式把从图像编码单元ex312供给的编码图像数据和从声音处理单元ex305供给的声音数据进行多路复用，将其结果得到的多路复用数据通过调制解调电路单元ex306进行波谱扩散处理，通过收发电路单元ex301实施数字模拟变换处理及频率变换处理后，通过天线ex201进行发送。
在数据通信模式下接收链接主页等的动态图像文件数据时，把通过天线ex201从基站ex110接收的接收数据，通过调制解调电路单元ex306进行波谱逆扩散处理，将其结果得到的多路复用数据发送到多路分离单元ex308。
为了对通过天线ex201接收的多路复用数据进行解码，多路分离单元ex308通过分离多路复用数据，将其分为图像数据的位流和声音数据的位流，通过同步总线ex313把该编码图像数据供给图像解码单元ex309，同时把该声音数据供给声音处理单元ex305。
图像解码单元ex309具有本发明申请中说明的动态图像解码装置，通过把图像数据的位流用与上述实施方式所示的编码方法对应的解码方法进行解码，生成重放动态图像数据，通过LCD控制单元ex302将其供给显示单元ex202，这样，例如显示链接主页的动态图像文件中包含的动画数据。与此同时，声音处理单元ex305把声音数据变换为模拟声音数据后，把其供给声音输出单元ex208，由此，例如可以重放链接主页的动态图像文件中包含的声音数据。
但不限定于上述系统示例，最近利用卫星、地上波进行数字播放已成为热门话题，如图13所示，可以在数字播放用系统中装配上述实施方式的至少动态图像编码装置或动态图像解码装置中的任一个。具体而言，在播放局ex409，映像信息的位流通过电波进行通信或被传送到播放卫星ex410。接收到该信息的播放卫星ex410发出播放用电波，通过具有卫星播放接收设备的家庭的天线ex406接收该电波，通过电视机(接收机)ex401或机顶盒(STB)ex407等装置对位流进行解码并将其重放。另外，也可以读取记录在作为记录介质的CD和DVD等存储介质ex402上的位流，在将要解码的重放装置ex403上安装上述实施方式所示的动态图像解码装置。该场合时，所重放的映像信号被显示在监视器ex404上。另外，也可以考虑在连接有线电视用电线ex405或卫星/地上波播放天线ex406的机顶盒ex407内安装动态图像解码装置，通过电视机的监视器ex408将其重放的结构。该场合时，也可以不安装在机顶盒上，而把动态图像解码装置安装在电视机内。另外，也可以在具有天线ex411的汽车ex412上，从卫星ex410或基站ex107等接收信号，在汽车ex412具有的汽车导航器ex413等的显示装置上重放动画。
另外，也可以利用上述实施方式所示的动态图像编码装置对图像信号进行编码，并记录在记录介质上。作为具体示例，有向DVD盘ex421记录图像信号的DVD播放机、和在硬盘上进行记录的磁盘记录器等记录器ex420。此外，也可以在SD卡ex422上进行记录。记录器ex420只要具有上述实施方式所示的动态图像解码装置，就可以重放记录在DVD盘ex421和SD卡ex422上的图像信号，可以用监视器ex408进行显示。
汽车导航器ex413的结构可以考虑，例如将图12所示结构中的摄像单元ex203和摄像接口单元ex303、图像编码单元ex312除外的结构，对计算机ex111和电视机(接收机)ex401等也可以做相同考虑。
另外，上述携带电话ex114等的终端，可以考虑除具有编码器·解码器双方的收发型终端外，仅具有编码器的发送终端、仅具有解码器的接收终端这三种安装方式。
如上所述，可以把上述实施方式所示的动态图像编码方法或动态图像解码方法应用于上述的任何机器·系统，这样，可以获得上述实施方式说明的效果。
本发明不限定于上述实施方式，只要不脱离本发明范围的各种变形或修改都是可行的。
如上述说明所明确的那样，根据本发明涉及的滤波强度的决定方法，即使在使用参照两个图像的预测编码的情况下，也可以决定对解码图像数据进行滤波，以去除块间的边界附近的高频噪声即块失真的滤波器的最佳滤波强度。因此，可以对动态图像进行编码，以改善将要解码的动态图像的画质。另外，本发明涉及的滤波强度的决定方法可以适用于动态图像编码装置及动态图像解码装置双方，其实用价值很大。
发明效果
如上所述，本发明涉及的滤波强度的决定方法、动态图像编码方法及动态图像解码方法，例如，作为利用携带电话、DVD装置及个人计算机等对与构成动态图像的各图像对应的图像数据进行编码，生成编码列，或将所生成的编码列进行解码的方法，是极其有用的。

Claims (21)

1.一种滤波强度的决定方法，用于决定去除构成图像的块间的编码失真的滤波强度，其特征在于，包括：
参数取得步骤，取得已编码的对象块及与该对象块邻接的已编码的邻接块的编码时的信息即参数；
比较步骤，当包含所述对象块及所述邻接块的图像是进行参照两个图像的图像间预测编码的图像时，比较所述对象块及所述邻接块的所述参数；和
决定步骤，根据所述比较步骤的比较结果来决定滤波强度。
2.根据权利要求1所述的滤波强度的决定方法，其特征在于，所述参数包含块的编码模式，
所述比较步骤包含图像数判定步骤，根据所述对象块及所述邻接块各自的所述编码模式，判定所述对象块及所述邻接块分别参照的参照图像数是否相同，
在所述决定步骤，根据所述图像数判定步骤的判定结果来决定不同的滤波强度。
3.根据权利要求2所述的滤波强度的决定方法，其特征在于，所述参数还包含用于唯一识别参照图像的参照索引，
所述比较步骤还包含参照图像判定步骤，根据所述对象块及所述邻接块各自的所述参照索引，判定所述对象块及所述邻接块分别参照的参照图像是否相同，
在所述决定步骤，根据所述参照图像判定步骤的判定结果来决定不同的滤波强度。
4.根据权利要求3所述的滤波强度的决定方法，其特征在于，所述参照图像判定步骤是在所述图像数判定步骤的判定结果为所述对象块及所述邻接块分别参照的参照图像数相同的情况下进行的。
5.根据权利要求3所述的滤波强度的决定方法，其特征在于，所述参数包含相对参照图像的动态向量，
所述比较步骤还包含动态向量判定步骤，根据所述对象块及所述邻接块中包含的所述动态向量，判定所述对象块的任意动态向量的水平成分和所述邻接块的任意动态向量的水平成分之差、或所述对象块的任意动态向量的垂直成分和所述邻接块的任意动态向量的垂直成分之差中的至少一个是否在规定值以上，
在所述决定步骤，根据所述动态向量判定步骤的判定结果来决定不同的滤波强度。
6.根据权利要求5所述的滤波强度的决定方法，其特征在于，所述动态向量判定步骤是在所述参照图像判定步骤的判定结果为所述对象块及所述邻接块分别参照的参照图像相同的情况下进行的。
7.根据权利要求1所述的滤波强度的决定方法，其特征在于，所述参数包含用于唯一识别参照图像的参照索引，
所述比较步骤包含参照图像判定步骤，根据所述对象块及所述邻接块各自的所述参照索引，判定所述对象块及所述邻接块分别参照的参照图像是否相同，
在所述决定步骤，根据所述参照图像判定步骤的判定结果来决定不同的滤波强度。
8.根据权利要求7所述的滤波强度的决定方法，其特征在于，所述参照索引包括第1参照索引和第2参照索引，
在所述参照图像判定步骤，判定所述对象块及所述邻接块分别参照的参照图像数是否相同，而且判定所述对象块的参照索引表示的参照图像和所述邻接块的参照索引表示的参照图像是否相同。
9.根据权利要求1所述的滤波强度的决定方法，其特征在于，所述参数包含相对参照图像的动态向量，
所述比较步骤包含动态向量判定步骤，根据所述对象块及所述邻接块中包含的所述动态向量，判定所述对象块的任意动态向量的水平成分和所述邻接块的任意动态向量的水平成分之差、或所述对象块的任意动态向量的垂直成分和所述邻接块的任意动态向量的垂直成分之差中的至少一个是否在规定值以上，
在所述决定步骤，根据所述动态向量判定步骤的判定结果来决定不同的滤波强度。
10.根据权利要求9所述的滤波强度的决定方法，其特征在于，
在所述动态向量判定步骤，当所述对象块及所述邻接块分别参照的参照图像数相同，而且所述对象块的参照索引表示的参照图像和所述邻接块的参照索引表示的参照图像相同的情况下，判定所述对象块及所述邻接块的动态向量的各自差是否在规定值以上。
11.根据权利要求1所述的滤波强度的决定方法，其特征在于，
在所述参数取得步骤，在垂直方向执行滤波时，把图像中垂直方向上的上面的块作为所述邻接块，在水平方向执行滤波时，把图像中水平方向上的左边的块作为所述邻接块。
12.根据权利要求1所述的滤波强度的决定方法，其特征在于，在所述决定步骤，从作为所述滤波强度而预先设定的多个强度中决定一个滤波强度。
13.根据权利要求1所述的滤波强度的决定方法，其特征在于，在所述比较步骤，在所述对象块及所述邻接块双方未被进行图像内编码、而且表示正交变换后的空间频率成分的系数未被编码的情况下，判定包含所述对象块及所述邻接块的图像是否是进行参照两个图像的图像间预测编码的图像。
14.一种滤波强度决定方法，用于决定去除构成图像的块间的编码失真的滤波强度，其特征在于，包括：
参数取得步骤，取得包含已编码的对象块及与该对象块邻接的已编码的邻接块的图像的图像类型；和
决定步骤，在由所述参数取得步骤所取得的图像类型为表示参照两个图像的图像间预测编码时，决定比表示参照一个图像的图像间预测编码时更强的滤波强度。
15.一种动态图像编码方法，以块单位对构成动态图像的各图像进行编码，其特征在于，包括：
滤波步骤，根据由权利要求1所述的滤波强度的决定方法所决定的滤波强度，在所述对象块及所述邻接块之间进行滤波。
16.一种动态图像解码方法，对构成动态图像的各图像以块单位被编码后的动态图像编码数据进行解码，其特征在于，包括：
滤波步骤，根据由权利要求1所述的滤波强度的决定方法所决定的滤波强度，在所述对象块及所述邻接块之间进行滤波。
17.一种滤波强度的决定装置，用于决定去除构成图像的块间的编码失真的滤波强度，其特征在于，包括：
参数取得单元，取得已编码的对象块及与该对象块邻接的已编码的邻接块的编码时的信息即参数；
比较单元，当包含所述对象块及所述邻接块的图像是进行参照两个图像的图像间预测编码的图像时，比较所述对象块及所述邻接块的所述参数；和
决定单元，根据所述比较单元的比较结果来决定滤波强度。
18.一种滤波强度的决定装置，用于决定去除构成图像的块间的编码失真的滤波强度，其特征在于，包括：
参数取得单元，取得包含已编码的对象块及与该对象块邻接的已编码的邻接块的图像的图像类型；和
决定单元，在由所述参数取得单元所取得的图像类型为表示参照两个图像的图像间预测编码时，决定比表示参照一个图像的图像间预测编码时更强的滤波强度。
19.一种动态图像编码装置，以块单位对构成动态图像的各图像进行编码，其特征在于，包括：
滤波单元，根据由权利要求1所述的滤波强度的决定方法所决定的滤波强度，在所述对象块及所述邻接块之间进行滤波。
20.一种动态图像解码装置，对构成动态图像的各图像以块单位被编码后的动态图像编码数据进行解码，其特征在于，包括：
滤波单元，根据由权利要求1所述的滤波强度的决定方法所决定的滤波强度，在所述对象块及所述邻接块之间进行滤波。
21.一种程序，用于决定去除构成图像的块间的编码失真的滤波强度，其特征在于，
使计算机执行从权利要求1～权利要求14中任一项所述的滤波强度的决定方法中包含的步骤。
CNB038009595A 2002-07-11 2003-06-26 滤波强度的决定方法、动态图像编码方法及解码方法 Expired - Lifetime CN100358366C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP202796/2002 2002-07-11
JP2002202796 2002-07-11

Publications (2)

Publication Number Publication Date
CN1552161A true CN1552161A (zh) 2004-12-01
CN100358366C CN100358366C (zh) 2007-12-26

Family

ID=30112647

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB038009595A Expired - Lifetime CN100358366C (zh) 2002-07-11 2003-06-26 滤波强度的决定方法、动态图像编码方法及解码方法

Country Status (11)

Country Link
US (12) US7372905B2 (zh)
EP (2) EP1408697A4 (zh)
JP (1) JP2008187734A (zh)
CN (1) CN100358366C (zh)
AU (1) AU2003244072B2 (zh)
BR (2) BRPI0303901B1 (zh)
CA (1) CA2448064C (zh)
MX (1) MXPA04002265A (zh)
MY (1) MY145262A (zh)
TW (2) TWI317107B (zh)
WO (1) WO2004008773A1 (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009033390A1 (en) * 2007-09-13 2009-03-19 Huawei Technologies Co., Ltd. Method and device for acquiring block boundary strength and reducing block distortion
CN101990099A (zh) * 2009-07-31 2011-03-23 索尼公司 图像处理设备和方法
CN101304481B (zh) * 2007-05-09 2012-02-22 松下电器产业株式会社 压缩编码图像的噪声清除装置和噪声清除方法
CN102577377A (zh) * 2009-08-04 2012-07-11 三星电子株式会社 用于对图像数据进行去块滤波的设备和方法以及使用所述设备和方法的视频解码设备和方法
CN101371585B (zh) * 2006-01-09 2014-07-30 汤姆森特许公司 提供用于多视图视频编码的提供降低分辨率的更新模式的方法和装置
CN105141955A (zh) * 2010-05-07 2015-12-09 韩国电子通信研究院 图像解码方法和图像解码设备
CN105245904A (zh) * 2011-02-22 2016-01-13 太格文-Ii有限责任公司 图像编码解码装置
CN106658015A (zh) * 2011-06-30 2017-05-10 三菱电机株式会社 图像编码装置以及图像编码方法

Families Citing this family (62)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7929610B2 (en) * 2001-03-26 2011-04-19 Sharp Kabushiki Kaisha Methods and systems for reducing blocking artifacts with reduced complexity for spatially-scalable video coding
US8406301B2 (en) 2002-07-15 2013-03-26 Thomson Licensing Adaptive weighting of reference pictures in video encoding
KR100998906B1 (ko) * 2003-01-20 2010-12-09 엘지전자 주식회사 기록된 정지 영상의 재생을 관리하기 위한 데이터 구조를갖는 기록 매체, 그에 따른 기록 및 재생 방법 및 장치
KR100612849B1 (ko) 2003-07-18 2006-08-14 삼성전자주식회사 영상 부호화 및 복호화 장치 및 방법
US8036271B2 (en) * 2004-02-24 2011-10-11 Lsi Corporation Method and apparatus for determining a second picture for temporal direct-mode block prediction
EP1641274B1 (en) * 2004-09-23 2013-06-05 Panasonic Corporation Video coding employing an image de-graining loop-filter
KR100679035B1 (ko) * 2005-01-04 2007-02-06 삼성전자주식회사 인트라 ｂｌ 모드를 고려한 디블록 필터링 방법, 및 상기방법을 이용하는 다 계층 비디오 인코더/디코더
JP4191729B2 (ja) * 2005-01-04 2008-12-03 三星電子株式会社 イントラｂｌモードを考慮したデブロックフィルタリング方法、及び該方法を用いる多階層ビデオエンコーダ／デコーダ
KR100712511B1 (ko) 2005-05-27 2007-04-27 삼성전자주식회사 호스트와 적어도 2개의 서로 다른 속도의 데이터 통신이가능한 메모리 장치 및 이를 이용하는 데이터 통신 시스템
KR100678958B1 (ko) * 2005-07-29 2007-02-06 삼성전자주식회사 인트라 ｂｌ 모드를 고려한 디블록 필터링 방법, 및 상기방법을 이용하는 다 계층 비디오 인코더/디코더
KR100668346B1 (ko) * 2005-10-04 2007-01-12 삼성전자주식회사 멀티 코덱용 필터링 장치 및 방법
US7873224B2 (en) 2006-03-01 2011-01-18 Qualcomm Incorporated Enhanced image/video quality through artifact evaluation
KR100757734B1 (ko) * 2006-03-15 2007-09-11 삼성전자주식회사 비디오 영상 후처리 장치 및 방법
EP1848219B1 (en) * 2006-04-18 2008-11-05 Pioneer Corporation Block noise removal device
KR101370287B1 (ko) * 2006-11-22 2014-03-07 세종대학교산학협력단 디블록킹 필터링 방법 및 장치
EP2099210B1 (en) * 2006-11-24 2015-10-21 NEC Corporation Coding and decoding device, coding and decoding method and program
KR100922275B1 (ko) * 2006-12-15 2009-10-15 경희대학교 산학협력단 경계 필터링 강도의 결정 방법 및 이를 이용한 디블록킹필터링 방법과 장치
CN101578874B (zh) * 2007-01-04 2011-12-07 汤姆森特许公司 用于减少多视图编码视频中的照度补偿和/或色彩补偿的编码伪像的方法和装置
WO2008084996A1 (en) * 2007-01-11 2008-07-17 Samsung Electronics Co, . Ltd. Method and apparatus for deblocking-filtering video data
KR101379255B1 (ko) * 2007-04-06 2014-03-28 삼성전자주식회사 미분 방정식을 이용한 인트라 예측 부호화, 복호화 방법 및장치
JPWO2009001793A1 (ja) * 2007-06-26 2010-08-26 株式会社東芝 画像符号化と画像復号化の方法及び装置
US8625672B2 (en) * 2008-01-07 2014-01-07 Thomson Licensing Methods and apparatus for video encoding and decoding using parametric filtering
BRPI0906481A2 (pt) * 2008-01-14 2015-07-14 Thomson Licensing Métodos e aparelho para filtragem para remoção de artefato usando filtragem baseada em esparsidade de múltiplos reticulados
US8811484B2 (en) * 2008-07-07 2014-08-19 Qualcomm Incorporated Video encoding by filter selection
US10123050B2 (en) 2008-07-11 2018-11-06 Qualcomm Incorporated Filtering video data using a plurality of filters
US8724694B2 (en) * 2008-10-14 2014-05-13 Nvidia Corporation On-the spot deblocker in a decoding pipeline
US8861586B2 (en) * 2008-10-14 2014-10-14 Nvidia Corporation Adaptive deblocking in a decoding pipeline
US8867605B2 (en) * 2008-10-14 2014-10-21 Nvidia Corporation Second deblocker in a decoding pipeline
US9179166B2 (en) * 2008-12-05 2015-11-03 Nvidia Corporation Multi-protocol deblock engine core system and method
US8761538B2 (en) * 2008-12-10 2014-06-24 Nvidia Corporation Measurement-based and scalable deblock filtering of image data
US9143803B2 (en) 2009-01-15 2015-09-22 Qualcomm Incorporated Filter prediction based on activity metrics in video coding
WO2012044487A1 (en) * 2010-10-01 2012-04-05 Dolby Laboratories Licensing Corporation Optimized filter selection for reference picture processing
AU2011247331B2 (en) * 2010-04-26 2015-11-26 Sun Patent Trust Filtering mode for intra prediction inferred from statistics of surrounding blocks
US9014271B2 (en) * 2010-07-12 2015-04-21 Texas Instruments Incorporated Method and apparatus for region-based weighted prediction with improved global brightness detection
US9819966B2 (en) 2010-09-01 2017-11-14 Qualcomm Incorporated Filter description signaling for multi-filter adaptive filtering
US9247265B2 (en) 2010-09-01 2016-01-26 Qualcomm Incorporated Multi-input adaptive filter based on combination of sum-modified Laplacian filter indexing and quadtree partitioning
EP2624555A4 (en) 2010-09-28 2015-11-18 Samsung Electronics Co Ltd METHOD AND APPARATUS FOR ADAPTIVE FILTERING
US20120163457A1 (en) * 2010-12-28 2012-06-28 Viktor Wahadaniah Moving picture decoding method, moving picture coding method, moving picture decoding apparatus, moving picture coding apparatus, and moving picture coding and decoding apparatus
TW201246943A (en) * 2011-01-26 2012-11-16 Panasonic Corp Video image encoding method, video image encoding device, video image decoding method, video image decoding device, and video image encoding and decoding device
MX2013001051A (es) 2011-02-22 2013-04-03 Panasonic Corp Metodo de codificacion de imagen, metodo de decodificacion de imagen, aparato de codificacion de imagen, aparato de decodificacion de imagen y aparato de codificacion/decidificacion de imagen.
US8964853B2 (en) 2011-02-23 2015-02-24 Qualcomm Incorporated Multi-metric filtering
PL2698999T3 (pl) 2011-04-12 2017-10-31 Sun Patent Trust Sposób kodowania ruchomych obrazów, urządzenie do kodowania ruchomych obrazów, sposób dekodowania ruchomych obrazów, urządzenie do dekodowania ruchomych obrazów, oraz urządzenie do kodowania/dekodowania ruchomych obrazów
EP4224861A1 (en) 2011-05-24 2023-08-09 Sun Patent Trust Image encoding method, image encoding apparatus, image decoding method, and image decoding apparatus
CA3197949A1 (en) 2011-05-27 2012-12-06 Sun Patent Trust Image coding method, image coding apparatus, image decoding method, image decoding apparatus, and image coding and decoding apparatus
US9485518B2 (en) 2011-05-27 2016-11-01 Sun Patent Trust Decoding method and apparatus with candidate motion vectors
SG194746A1 (en) 2011-05-31 2013-12-30 Kaba Gmbh Image encoding method, image encoding device, image decoding method, image decoding device, and image encoding/decoding device
JP5937589B2 (ja) 2011-05-31 2016-06-22 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 動画像復号化方法、および動画像復号化装置
BR112013029425B1 (pt) 2011-06-30 2022-03-29 Sun Patent Trust Método de decodificação de imagem, método de codificação de imagem, dispositivo de decodificação de imagem, dispositivo de codificação de imagem, e dispositivo de codifica ção/decodificação de imagem
EP3843394B1 (en) 2011-07-19 2024-04-03 Tagivan Ii Llc Coding method
JP5159927B2 (ja) * 2011-07-28 2013-03-13 株式会社東芝 動画像復号装置及び動画像復号方法
HUE047353T2 (hu) 2011-07-29 2020-04-28 Sun Patent Trust Videó dekódoló eljárás, videó dekódoló berendezés
EP2741499A4 (en) 2011-08-03 2014-12-10 Panasonic Ip Corp America VIDEO CODING METHOD, VIDEO CODING METHOD, VIDEO CODING DEVICE, VIDEO ENCODING DEVICE AND VIDEO ENCODING / DECODING DEVICE
WO2013057877A1 (ja) 2011-10-19 2013-04-25 パナソニック株式会社 画像符号化方法、画像符号化装置、画像復号方法、および、画像復号装置
DK2742691T3 (en) 2011-10-31 2018-12-10 Hfi Innovation Inc METHOD AND APPARATUS FOR FILTER DEBLOCK WITH SIMPLIFIED INTERFACE STRENGTH
MY195621A (en) * 2012-01-17 2023-02-02 Infobridge Pte Ltd Method Of Applying Edge Offset
JP6012014B2 (ja) * 2012-03-30 2016-10-25 サン パテント トラスト 画像符号化方法および画像復号方法
US9270993B2 (en) * 2012-09-10 2016-02-23 Apple Inc. Video deblocking filter strength derivation
CN103945228B (zh) * 2014-03-28 2017-03-15 上海交通大学 基于时空关联性的视频帧内copy‑move篡改检测方法
JP2016066922A (ja) * 2014-09-25 2016-04-28 ソニー株式会社 信号処理装置、撮像装置、および、それらにおける信号処理方法。
KR102579457B1 (ko) * 2017-02-24 2023-09-14 삼성전자주식회사 이미지 보정 방법 및 장치
US11153607B2 (en) * 2018-01-29 2021-10-19 Mediatek Inc. Length-adaptive deblocking filtering in video coding
EP4042686A4 (en) * 2019-10-10 2022-12-07 Beijing Dajia Internet Information Technology Co., Ltd. METHODS AND DEVICES FOR VIDEO CODING WITH TRIANGLE PARTITION

Family Cites Families (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0214340A (ja) 1988-07-01 1990-01-18 Mitsubishi Electric Corp Ｉｃカードの選択方法
US5010401A (en) 1988-08-11 1991-04-23 Mitsubishi Denki Kabushiki Kaisha Picture coding and decoding apparatus using vector quantization
EP0396846B1 (en) * 1989-05-12 1993-04-28 Rai Radiotelevisione Italiana Improved device for dct encoding of digital video signals
JP2891773B2 (ja) 1990-03-15 1999-05-17 トムソン マルチメデイア ソシエテ アノニム ディジタル画像シーケンスを処理する方法および装置
JP3015479B2 (ja) * 1991-03-04 2000-03-06 株式会社東芝 画像処理装置
US5600731A (en) 1991-05-09 1997-02-04 Eastman Kodak Company Method for temporally adaptive filtering of frames of a noisy image sequence using motion estimation
JP3365784B2 (ja) 1992-04-30 2003-01-14 オリンパス光学工業株式会社 画像信号復号化装置
US5479211A (en) 1992-04-30 1995-12-26 Olympus Optical Co., Ltd. Image-signal decoding apparatus
JP2823735B2 (ja) 1992-05-14 1998-11-11 株式会社クボタ 乗用型水田作業機
JP3165296B2 (ja) * 1992-12-25 2001-05-14 三菱電機株式会社 フレーム間符号化処理方式及びフレーム間符号化処理方法及び符号化制御方式
US5598514A (en) 1993-08-09 1997-01-28 C-Cube Microsystems Structure and method for a multistandard video encoder/decoder
JP2673778B2 (ja) 1994-02-22 1997-11-05 国際電信電話株式会社 動画像の復号化における雑音低減装置
JP3911035B2 (ja) * 1994-08-31 2007-05-09 ソニー株式会社 動画像符号化方法及び動画像符号化装置
TW293227B (zh) * 1994-11-24 1996-12-11 Victor Company Of Japan
JPH08237669A (ja) * 1995-02-28 1996-09-13 Sony Corp 画像信号処理装置、画像信号処理方法および画像信号復号化装置
JPH11505687A (ja) 1995-05-02 1999-05-21 インノビジョン リミティッド 動作補償フィルタリング
JP3466032B2 (ja) * 1996-10-24 2003-11-10 富士通株式会社 動画像符号化装置および復号化装置
US6456328B1 (en) * 1996-12-18 2002-09-24 Lucent Technologies Inc. Object-oriented adaptive prefilter for low bit-rate video systems
JPH11187400A (ja) * 1997-12-22 1999-07-09 Matsushita Electric Ind Co Ltd 歪除去方法および歪除去フィルタ
US6188799B1 (en) 1997-02-07 2001-02-13 Matsushita Electric Industrial Co., Ltd. Method and apparatus for removing noise in still and moving pictures
KR100243225B1 (ko) * 1997-07-16 2000-02-01 윤종용 블록화효과 및 링잉잡음 감소를 위한 신호적응필터링방법 및신호적응필터
JPH11177993A (ja) 1997-12-12 1999-07-02 Nec Corp 動画像符号化装置
JP3625136B2 (ja) * 1998-07-10 2005-03-02 シャープ株式会社 フィルタ処理装置、画像符号化装置、画像復号化装置、およびフィルタ処理プログラムを記録した記録媒体
AU717480B2 (en) * 1998-08-01 2000-03-30 Korea Advanced Institute Of Science And Technology Loop-filtering method for image data and apparatus therefor
TW373407B (en) 1998-08-18 1999-11-01 Ind Tech Res Inst General use image treating unit
US6753865B1 (en) * 1999-06-30 2004-06-22 Realnetworks, Inc. System and method for generating video frames and post filtering
KR100335055B1 (ko) * 1999-12-08 2002-05-02 구자홍 압축 영상신호의 블럭현상 및 링현상 제거방법
IL134182A (en) * 2000-01-23 2006-08-01 Vls Com Ltd Method and apparatus for visual lossless pre-processing
US7177358B2 (en) * 2000-06-27 2007-02-13 Mitsubishi Denki Kabushiki Kaisha Picture coding apparatus, and picture coding method
US7031393B2 (en) * 2000-10-20 2006-04-18 Matsushita Electric Industrial Co., Ltd. Block distortion detection method, block distortion detection apparatus, block distortion removal method, and block distortion removal apparatus
US6931063B2 (en) * 2001-03-26 2005-08-16 Sharp Laboratories Of America, Inc. Method and apparatus for controlling loop filtering or post filtering in block based motion compensationed video coding
US7450641B2 (en) * 2001-09-14 2008-11-11 Sharp Laboratories Of America, Inc. Adaptive filtering based upon boundary strength
JP2003032685A (ja) 2001-07-16 2003-01-31 Sony Corp ノイズ低減方法および映像処理装置
JP3896814B2 (ja) 2001-10-05 2007-03-22 セイコーエプソン株式会社 動画像復号化方法、動画像復号化装置および動画像復号化処理プログラム
US6950473B2 (en) * 2002-06-21 2005-09-27 Seiko Epson Corporation Hybrid technique for reducing blocking and ringing artifacts in low-bit-rate coding
US20040252758A1 (en) * 2002-08-14 2004-12-16 Ioannis Katsavounidis Systems and methods for adaptively filtering discrete cosine transform (DCT) coefficients in a video encoder
US6944224B2 (en) * 2002-08-14 2005-09-13 Intervideo, Inc. Systems and methods for selecting a macroblock mode in a video encoder
US7227901B2 (en) * 2002-11-21 2007-06-05 Ub Video Inc. Low-complexity deblocking filter
ES2301339B1 (es) * 2006-03-13 2009-05-01 Dalphi Metal España S.A. Volante de automovil con claxon flotante.

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101371585B (zh) * 2006-01-09 2014-07-30 汤姆森特许公司 提供用于多视图视频编码的提供降低分辨率的更新模式的方法和装置
CN101304481B (zh) * 2007-05-09 2012-02-22 松下电器产业株式会社 压缩编码图像的噪声清除装置和噪声清除方法
WO2009033390A1 (en) * 2007-09-13 2009-03-19 Huawei Technologies Co., Ltd. Method and device for acquiring block boundary strength and reducing block distortion
CN101389016B (zh) * 2007-09-13 2010-10-20 华为技术有限公司 获得块边界强度和去除块效应的方法和装置
CN101990099A (zh) * 2009-07-31 2011-03-23 索尼公司 图像处理设备和方法
CN102577377A (zh) * 2009-08-04 2012-07-11 三星电子株式会社 用于对图像数据进行去块滤波的设备和方法以及使用所述设备和方法的视频解码设备和方法
CN105141955A (zh) * 2010-05-07 2015-12-09 韩国电子通信研究院 图像解码方法和图像解码设备
US11849110B2 (en) 2010-05-07 2023-12-19 Electronics And Telecommunications Research Institute Apparatus for encoding and decoding image by skip encoding and method for same
US11323704B2 (en) 2010-05-07 2022-05-03 Electronics And Telecommunications Research Institute Apparatus for encoding and decoding image by skip encoding and method for same
CN105847797A (zh) * 2010-05-07 2016-08-10 韩国电子通信研究院 图像解码方法
US10574985B2 (en) 2010-05-07 2020-02-25 Electronics And Telecommunications Research Institute Apparatus for encoding and decoding image by skip encoding and method for same
CN105847797B (zh) * 2010-05-07 2020-02-07 韩国电子通信研究院 图像解码方法
CN105141955B (zh) * 2010-05-07 2019-10-01 韩国电子通信研究院 图像解码方法和图像解码设备
US10218972B2 (en) 2010-05-07 2019-02-26 Electronics And Telecommunications Research Institute Apparatus for encoding and decoding image by skip encoding and method for same
CN105245903B (zh) * 2011-02-22 2018-09-07 太格文-Ii有限责任公司 图像解码方法和图像解码装置
CN105245904B (zh) * 2011-02-22 2018-09-18 太格文-Ii有限责任公司 图像编码解码装置
CN105245904A (zh) * 2011-02-22 2016-01-13 太格文-Ii有限责任公司 图像编码解码装置
CN105245903A (zh) * 2011-02-22 2016-01-13 太格文-Ii有限责任公司 图像解码方法和图像解码装置
CN106658014A (zh) * 2011-06-30 2017-05-10 三菱电机株式会社 图像编码装置及方法、图像解码装置及方法
CN106658015A (zh) * 2011-06-30 2017-05-10 三菱电机株式会社 图像编码装置以及图像编码方法
CN106658015B (zh) * 2011-06-30 2020-08-18 三菱电机株式会社 图像编码装置以及图像编码方法
US10863180B2 (en) 2011-06-30 2020-12-08 Mitsubishi Electric Corporation Image coding device, image decoding device, image coding method, and image decoding method
CN106658014B (zh) * 2011-06-30 2021-01-08 三菱电机株式会社 图像编码装置及方法、图像解码装置及方法
CN106941608B (zh) * 2011-06-30 2021-01-15 三菱电机株式会社 图像编码装置及方法、图像解码装置及方法
CN106941608A (zh) * 2011-06-30 2017-07-11 三菱电机株式会社 图像编码装置及方法、图像解码装置及方法
US11575906B2 (en) 2011-06-30 2023-02-07 Mitsubishi Electric Corporation Image coding device, image decoding device, image coding method, and image decoding method
US11831881B2 (en) 2011-06-30 2023-11-28 Mitsubishi Electric Corporation Image coding device, image decoding device, image coding method, and image decoding method
CN106954067A (zh) * 2011-06-30 2017-07-14 三菱电机株式会社 图像编码装置及方法、图像解码装置及方法

Also Published As

Publication number Publication date
US9319712B2 (en) 2016-04-19
US10230978B2 (en) 2019-03-12
TWI317108B (en) 2009-11-11
US9854240B2 (en) 2017-12-26
TWI317107B (en) 2009-11-11
US20040179620A1 (en) 2004-09-16
US20180124402A1 (en) 2018-05-03
WO2004008773A1 (ja) 2004-01-22
US8982965B2 (en) 2015-03-17
US20160234493A1 (en) 2016-08-11
MXPA04002265A (es) 2004-06-29
CA2448064C (en) 2012-08-07
US7372905B2 (en) 2008-05-13
US20150222924A1 (en) 2015-08-06
US20080069238A1 (en) 2008-03-20
JP2008187734A (ja) 2008-08-14
US20100172416A1 (en) 2010-07-08
EP1408697A4 (en) 2007-07-25
US20120106839A1 (en) 2012-05-03
AU2003244072A1 (en) 2004-02-02
US9386320B2 (en) 2016-07-05
US20160227213A1 (en) 2016-08-04
US7782963B2 (en) 2010-08-24
US9204164B2 (en) 2015-12-01
TW200402663A (en) 2004-02-16
CA2448064E (en) 2004-01-11
MY145262A (en) 2012-01-13
CA2448064A1 (en) 2004-01-11
US20120057076A1 (en) 2012-03-08
US20080130753A1 (en) 2008-06-05
BRPI0303901B1 (pt) 2018-03-06
US8085856B2 (en) 2011-12-27
EP2164261A3 (en) 2011-08-17
AU2003244072B2 (en) 2007-08-16
US8976869B2 (en) 2015-03-10
US9888241B2 (en) 2018-02-06
BR0303901A (pt) 2004-08-10
EP1408697A1 (en) 2004-04-14
CN100358366C (zh) 2007-12-26
AU2003244072B8 (en) 2004-02-02
US20150222925A1 (en) 2015-08-06
EP2164261A2 (en) 2010-03-17
US20150156515A1 (en) 2015-06-04
TW200643825A (en) 2006-12-16
US8116384B2 (en) 2012-02-14

Similar Documents

Publication Publication Date Title
CN1552161A (zh) 滤波强度的决定方法、动态图像编码方法及解码方法
CN1271865C (zh) 动态矢量编码和译码的方法及装置
CN1817049A (zh) 动态图像编码方法及动态图像解码方法
KR101227720B1 (ko) 화상 부호화 장치 및 화상 복호화 장치
CN1623333A (zh) 动态补偿方法、图像编码方法及图像解码方法
CN101242537B (zh) 编码方法
CN1662067A (zh) 运动检测方法及动态图像编码方法
CN101035290A (zh) 动态图像编码方法及动态图像解码方法
CN1493157A (zh) 图像编码方法和图像解码方法
JPWO2006013854A1 (ja) 画像復号化装置および画像符号化装置
CN1478356A (zh) 动态图像编码方法及动态图像解码方法
JP4580626B2 (ja) フィルタリング強度の決定方法、動画像符号化方法、および動画像復号化方法
CN100525444C (zh) 图像编码方法以及图像解码方法
KR20050018730A (ko) 필터링 강도의 결정 방법, 동화상 부호화 방법 및 동화상복호화 방법
CN1497986A (zh) 图像编码方法
JP2006287973A (ja) フィルタリング強度の決定方法、動画像符号化方法、および動画像復号化方法
JP2006287972A (ja) フィルタリング強度の決定方法、動画像符号化方法、および動画像復号化方法
JP2006287974A (ja) フィルタリング強度の決定方法、動画像符号化方法、および動画像復号化方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: MATSUSHITA ELECTRIC (AMERICA) INTELLECTUAL PROPERT

Free format text: FORMER OWNER: MATSUSHITA ELECTRIC INDUSTRIAL CO, LTD.

Effective date: 20140925

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20140925

Address after: Seaman Avenue Torrance in the United States of California No. 2000 room 200

Patentee after: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

Address before: Osaka Japan

Patentee before: Matsushita Electric Industrial Co.,Ltd.

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20151104

Address after: Tokyo, Japan

Patentee after: Godo Kaisha IP Bridge 1

Address before: Seaman Avenue Torrance in the United States of California No. 2000 room 200

Patentee before: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

CX01 Expiry of patent term

Granted publication date: 20071226

CX01 Expiry of patent term