CN1252675A - 在音像压缩系统中用于计算适度失真的方法 - Google Patents

在音像压缩系统中用于计算适度失真的方法 Download PDF

Info

Publication number
CN1252675A
CN1252675A CN98120577A CN98120577A CN1252675A CN 1252675 A CN1252675 A CN 1252675A CN 98120577 A CN98120577 A CN 98120577A CN 98120577 A CN98120577 A CN 98120577A CN 1252675 A CN1252675 A CN 1252675A
Authority
CN
China
Prior art keywords
subdomain
module
image
decoder
coded image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN98120577A
Other languages
English (en)
Other versions
CN1155252C (zh
Inventor
陈朝庆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sun Patent Trust Inc
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN1252675A publication Critical patent/CN1252675A/zh
Application granted granted Critical
Publication of CN1155252C publication Critical patent/CN1155252C/zh
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/127—Prioritisation of hardware or computational resources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/156—Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234318—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/454—Content or additional data filtering, e.g. blocking advertisements
    • H04N21/4545—Input to filtering algorithms, e.g. filtering a region of the image
    • H04N21/45452—Input to filtering algorithms, e.g. filtering a region of the image applied to an object-based stream, e.g. MPEG-4 streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4621—Controlling the complexity of the content stream or additional data, e.g. lowering the resolution or bit-rate of the video stream for a mobile client with a small screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/149—Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/15—Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability

Abstract

本发明公开一种用于编码器对音像信息进行编码,并把编码的结果传送到预先不知道其计算能力的解码器的方法。包含可被用于估计该解码过程的复杂度的参数的描述符被内嵌于系统流中。该编码器也可以对视频信息这样编码,使得解码器可以选择忽略一些信息,而只对编码信息的一个子集解码,从而减少计算要求。该方法允许多于一个解码器对同一比特流解码,根据该解码器的计算能力得出不同的分辨率。

Description

在音像压缩系统中用于计算适度失真的方法
本发明涉及一种用于在音像压缩系统中计算适度失真的方法。本方法在对比特流的解码计算要求不确定的偏码解码环境中是十分有用的。并且在信道容量有限并要求某些形式的服务质量的保证的情况下十分有用。而且用于两种不同的分辨率的视频服务之间的内部操作中。
当系统的资源不足以完全地对所有视频比特流进行解码时，通常利用软件以具有一定失真的方式进行解码。这些失真的范围从图像单元的部分解码直到整个图像。这在单个视频流的情况下是容易实现的。
在已被提出的新的MPEG-4的ISO/IEC SC29/WG11标准中，可以传送复合音像、AV、对象。因此，整体的复杂度要求不再依赖于单个流，而是依赖于复合流。
在压缩系统中(如MPEG-1，MPEG-2，MPEG-4)通过运用运动补偿，可以在很大程度上消除暂时冗余信息。从直观上看，在视频序列中的连续图像包含了非常相似的信息，只有图像中的部分运动区域在图像与图像之间变化。另外，这些区域通常作为一个单位作整体运动。运动补偿是这样一种技术，即编码器和解码器以已被重构图像作为参照，预测当前要被编码或解码的图像。该编码器通过运用局部解码器环路模拟该解码器。因此能够保持在编码器和解码器之间重构的同步。
该编码器在已重构图像中搜索与当前被解码的模块最相匹配的模块。然后计算该运动补偿模块与当前被解码的模块之间的预测差别。由于该运动补偿模块可在解码器和编码器中获得，该解码器只要把该模块的位置和预测差别传送到解码器中。该模块的位置通常被称为矢量。该预测差别通常被称为运动补偿预测差别。这些信息的传送所需要的位数比当前模块本身少。
在内部图像编码中，可以用类似的方式除去空间冗余量。该模块的变换系数可以从已被解码的相邻模块的变换预测中预测出来。
在本发明中有两个主要问题要解决。第一个是如何表示当前音像对象的解码复杂度要求。在有复合音像对象的情况下，该系统解码器必须确定要把多少资源分配给特定的对象，以及确定哪个对象优先于其他对象。换句话说，就是如何建立系统复杂度要求的模式。要注意的一个问题是，解码器的复杂度要求依赖于解码器的执行过程。对于一个执行过程来说是复杂的操作，可能对于另一个执行过程来说是简单的。因此，需要对一些形式的执行过程进行独立的复杂度检测。
第二个问题是如何在解码器中减小所需的复杂度。这里涉及在解码过程中减小复杂度的并且尽量地保持足够的信息的方法。在适度失真中的一个最大问题是由于在运动补偿中的误差所引起的飘移问题。当采用适度失真时，所重构的图像不完全或有噪音。这些误差会从一个图像传送到另一个图像。结果误差会变得越来越大，这些噪音的传递称为漂移。
为了解决这些问题在本发明中采用如下步骤。
该音像对象编码器对该音像对象进行编码使得可以在该音像对象解码器允许不同程度的适度失真。与音像对象的计算复杂度要求有关的参数被在系统编码器中传输。通过传送用于表示所需操作的参数，可以实现独立的复杂度计算。
在系统解码器中，根据这些参数以及所采用的方法可以估计所需的复杂度。然后资源分配器把适量的资源分配给对不同音像对象的解码过程。在该音像对象解码器中，当该资源不足以完全对该音像对象解码时，可以采用计算适度失真进行解码。
根据本发明的第一方面，一种用于把多个音像对象编码为适于在该解码器中计算适度失真的压缩编码图像的方法中包括：
对所述音像对象编码，把允许在该解码器中计算适度失真的方法合并到该音像对象的编码图像中；
利用多个模块解码参数估计执行独立计算的复杂度的大小；
把该音像对象的所述编码图像分割为多个存取单元，并加入标头信息以形成数据包；
把包含所述模块解码参数的描述符插入该数据包的标头中；
把这些数据包复合形成一个复合比特流。
根据本发明的第二方面，一种带有计算适度失真，用于对复合比特流进行解码以获得多个音像对象的方法中包括如下步骤：
把单个复合比特流进行解复合形成包含包标头和存取单元的多个数据包；
从该包标头中提取包含多个模块解码参数的描述符；
把该存取单元重新组合为该音像对象的原始编码图像；
根据所述解码参数和当前解码器的运用，估计该解码器的特定计算的复杂度；
采用计算适度失真对该音像对象的所述编码图像进行解码，以满足该估计的解码器的特定计算复杂度要求。
最好，允许在该解码器中应用计算适度失真的合并方法中包括如下步骤：
把该要被编码的输入图像分割为按升序标号排列的多个子域，在每个子域中只包括在其前面的一个子域内的一个像素的子集；
把该子域的位置和尺寸熵编码为在比特流内的压缩编码图像；
进一步把该子域分割为用于在该比特流内编码为压缩编码图像的多个模块；
只采用属于具有与所述模块相同或更高的编号次序的子域的重构图像中的像素来执行运动估计和运动补偿；
把该运动矢量解码为比特流中的压缩编码图像；
把该运动补偿预测差别变换到一个正交域中；
用量化方法对该变换系数进行量化；
把该量化后的变换系数进行熵编码为在比特流内的压缩编码图像。
最好，根据该第二方面，在采用满足估计解码器的特定计算复杂度要求的计算适度失真的对音像的编码图像进行解码的方法还包括如下步骤：
对在该比特流内的压缩编码图像的子域的位置和尺寸进行熵解码；
只在该子域中选择所要的模块进行解码；
对该压缩编码图像进行熵解码以得出量化变换系数；
对所述量化变换系数进行反量化以得出变换系数；
对所述变换系数进行反变换以得出空间域移动补偿预测差别；
对来自该比特流中的压缩编码图像的运动矢量进行熵解码；
只用属于子域并且有与所述模块相同或更高序号的重构图像的像素对所述模块进行运动补偿；
重构图像并在帧存储器中存储所述图像以预测下一幅图像。
最好，在根据本发明第一方面的方法(其中包含可以在该解码器中应用计算适度失真的方法)中也包括如下步骤：
把所输入的要被编码的图像分割为多个按升序排列的子域，以整幅图为开始作为第一子域，其中每个子域中只由在其之前子域的像素的子集构成；
在该比特流中，把该子域的位置和尺寸熵编码为压缩编码图像；
在该比特流中，进一步把该子域分割为多个用于编码为压缩编码图像的多个模块；
把所述模块变换到一个正交域；
用量化方法对该变换系数进行量化；
只用从上述模块到其左边的属于具有与所述模块相同或更高的序号的子域的对应量化变换系数，对所述模块执行量化系数预测；
在该比特流中，把该量化变换系数的预测差别熵编码为压缩编码图像。
最好，根据本发明第一方面的方法中包括如下步骤：
在该比特流中，从该压缩编码图像中熵解码出该子域的位置的尺寸；
选择在所需子域中的模块进行解码；
对该压缩编码图像熵解码得出量化变换系数；
只用从上述模块到其左边的属于具有与所述模块相同或更高的序号的子域的对应量化变换系数，对所述模块执行量化系数预测；
对所述量化变换系数进行反量化，以得出该变换系数；
对所述变换系数进行反变换以得出空间域像素值；
重构该图像并在该存储器中存储所述图像以预测下一幅图像。
一般来说，该多个模块解码参数中包括表示如下操作次数的数目：
模块熵解码操作；
模块运动补偿操作；
模块反量化操作；
模块变换操作；
模块增加操作；
模块存储器访问操作。
最好该描述符中包括：
表示该描述符的类型的描述符识别号码；
表示该描述符的大小的描述符长度范围；
多个模块解码参数。
一般来说，在把要被编码的输入图像分割为多个子域的方法中，该子域为矩形。
最好，在对所述模块执行运动估计和运动补偿的方法中，只利用来自属于具有与所述模块相同或更高的序号顺序的重构图像的像素，这意味着只有完全位于所述子域内的预测模块会被选中。
一般来说，当只有来自属于具有与所述模块相同或更高的序号顺序的重构图像被采用时，预测模块可能部分地位于所述子域之外，但其附加条件是位于所述子域之外的像素被来自该子域内部的最近像素所取代。
最好，在把该图像分别为多个子域的方法中，每个所述子域的位置和尺寸可能对于各幅图像来说都不相同，并且所述位置和尺寸被以全局扫描矢量的方式进行编码，从而得出水平和重直位移、宽度和高度。
一般来说，在把该图像分割为多个子域的方法中，子域的位置和尺寸对于各图像来说是相同的，并且所述位置和尺寸在该序列的开始处被以水平和垂直位移、宽度和高度的方式进行一次编码。
最好，在该编码和解码方法中，该变换为离散余弦变换。
一般来说，在该编码和解码的方法中，子域的数目为两个。
最好，在该方法中，多个子域按升序排列并且该运动矢量可指向一个低序列的子域，但不会从较低序列的子域指向较高序列的子域。
图1为本发明的整体方框图；
图2表示本发明的编码器和解码器的方框图；
图3表示本发明的子域和运动矢量的一个实施例；
图4表示本发明中的全局扫描矢量和子域尺寸的一个实施例；
图5表示用于子域边界进行运动补偿预测的填充方法的第二实施例；
图6表示用于复杂度估计器的方框图。
图1表示本发明的整个系统的方框图。编码器单元110对该视频序列编码以允许计算适度失真技术。该编码器110的输出为一个传输到编码缓冲器120的视频编码图像。同时，该视频序列和编码图像也被传输到一个复杂度参数编码器130，在该编码器中与该用于解码的操作关联的参数被计算并编码。这些信息与该编码缓冲器120的输出一同传输到形成系统多复合流的系统编码器和多路复用单元140。该系统复合流被通过传输介质150传输。
一个解多路复用器和系统解码器160接收该系统复合流，其中该比特流被解多路复用为其各个基本流。该视频基本流被传输到解码缓冲器170，并且复杂度参数传输到分配器和复杂度估计单元180。该视频流被从该解码缓冲器170传输到解码单元190。在解码之前，该解码器190等待来自分配器单元180的指令。
该复杂度估计器180给出要被采用的解码器计算适度失真的量。在该解码器中通过只对被认为是包含更重要的信息的整个图像的子域解码，而解码器中实现计算适度失真。在这些情况下，编码器必须防止编码器与解码器相脱离。在解码之后，该解码器单元190，也把信息反馈到分配器和复杂度估计器180，使得该信息可被用于估计下一幅图像的复杂度。
下面是说明在图1所示的上述发明的各个单元的实施例。
图2为根据本实施例的编码器和解码器的方框图。输入到编码器110的输入图像被分割为用于处理的模块。通过从当前图像中减去前一幅图像的运动补偿图像可以从该图像中除去暂时冗余信息。然后把该预测差别传输到DCT单元111的DCT域中。接着，合成DCT系数被在量化单元112中量化。然后量化系数在可变长编码(VLC)单元113中被熵编码，以形成压缩输出比特流。该编码器110也具有一个由一个反量化单元114、一个反余弦变换(IDCT)单元115、一个帧存储器116以及一个运动补偿单元117组成的局部解码器环路。该局部解码器环路通过对该系数反变换，并在反量化单元114和IDCT单元115中把它变换回空间域中。然后，该输出被加到该运动补偿单元117的输出上，以形成重构图像。该图像被存储于帧存储器116中用于对下一幅图像进行运动补偿。
在本实施例中，运动估计单元118和运动补偿单元117的编码部分被改变，使得计算适度失真可在与运动补偿相结合下进行而不会引起飘移。
图3用于说明本发明，如图所示，该图像被分为两个部分220和210。第一部分220为必须在该解码器中解码的子域，而不管是否采用计算适度失真。第二部分210为在该子域外的区域，该区域可在采用计算适度失真时被解码器忽略。在图3中也示出用于运动补偿的两个模块。当对位于子域220中的模块250中执行运动补偿时，该运动补偿预测模块也必须来自该参考图像的子域220中。换句话说，不允许该运动矢量指到该区域外，这称为受限制的运动矢量。另一方面，当模块230位于该子域220外时，该运动补偿预测模块可以来自该参考图像的任何部位。这与没有子域的情况相同。
图4表示如何在每幅图像中指示出子域220的方法。为了对每幅图像指定长方形子域220，则必须为每幅图像指定如下参数，并被编码于该压缩比特流的图像标头中。在图4中绘示出图像310和子域220。图中表示出子域220的左侧边相对于图像的在侧边的水平偏移330，以及子域220的上侧相对于图像的上侧边的重直偏移340。这两个参数(称为全局扫描矢量)被用于表示该子域的位置。该子域220的宽350和高360为要用于确定子域220的尺寸的第二组参数。
在本发明的第二实施例中，在该子域中的运动矢量不必受限制。可以允许该矢量指出参考图像的子域之外。但无论如何都需要填充。这在图5中示出，图5中表示出图像310和子域220。运动补偿预测430跨在子域220的边界上。位于子域220的外部的模块的一部分431不用于预测，且通过重复在子域220边界的像素的数值来填充。位于该子域220内的模块的一部分被采用而不对其进行填充。分别对行和列，对位于垂直边和水平边的模块采用类似的填充方法。
与第一实施例相似，根据第二实施例的方法也可使计算适度失真方法忽略位于子域220外的图像的一部分，而不会引起编码器与解码器相分离。
除了可能引起模块之间发生的飘移的运动补偿之外，在子域220上边界和左边界上的内部模块也受限制，不允许在预测中采用任何位于子域外的模块。这是因为，在该计算适度失真解码器中，这些模块将不被解码，这样预测不会被重复。这样就预排除了在编码器中采用通常所用的直流和交流系数的预测。
图2也说明解码器190的方框图。在此说明采用计算适度失真解码器190的实施例。该压缩比特流被从传输中接收并被传送到可变长解码单元191，在该单元中根据所用的构造法和熵方法对比特流解码。然后，该解码后的信息被传输到计算适度失真选择器192，在该选择器中属于子域220的解码信息被保留，而子域220外的解码信息被忽略。所保留的信息被传输到反量化单元193，在该单元中余弦变换系数被恢复。接着，该被恢复系数被传输到反余弦变换单元194，在该单元中，该系数被变换回空间域。接着，加上运动补偿预测以形成重构图像。该重构图像被存储于帧存储器195中，并被用于预测下一幅图像。运动补偿单元196根据在编码器110中所用的相同方法执行运动补偿。
在运动矢量受到限制的编码器的第一实施例中，在该解码器中不再需要另外的修正方法。在运动矢量不受限制的编码器的第二实施例中，如在上文中结合附图所述的带填充的运动补偿方法被用于解码器中。最后，在子域220的上边界和左边界上的内部模块也受限制，不用子域200外部的任何模块进行预测。这样就预先排除了运用通常所用的直流和交流系数预测。
在本实施例中复杂度参数编码器中包括用于记数所需要的模块解码操作的次数的计数单元。该模块解码操作不是基本的运算操作，而是在模块中进行的一系列操作过程的集合。一个模块解码操作过程可以是模块反量化操作、模块反余弦变换操作、模块存储器存取或其他以模块为基础在模块中执行解码任务的操作的集合。复杂度参数编码器计数需要每组操作的模块的数目，并把它们反映在参数中。模块解码操作不采用简单的运算操作的原因是在不同的应用中可采用不同的比其他操作更有效的操作。
在解码器的结构和硬件数量以及软件解法方面存在不同之处，这使得对原始处理能力和存储器存取方法的运用不能可靠地表明复杂度要求，但是，如果计数模块解码操作所需的操作数目的参数表示所需的参数，则解码器可以估计复杂度。这是因为解码器在其应用过程中能够取得对每模块解码操作中所需的操作数量。
在系统编码器和多路复用器的实施例中，初始比特流被打包和多路复用以进行传输。与该复杂度参数相关的信息也被复合到该比特流中。该信息被插入包的标头中，不需要这种信息的解码器可以简单地忽略该信息。需要这种信息的解码器可以对该信息解码并把它译出来以估计复杂度要求。
在本实施例中，编码器把该信息以描述符的形式插入包标头中。该描述符中包含表示该描述符的类型的识别代码，并在该描述符识别代码后跟着包含于描述符内的总字节数。其他的描述符中包含用于模块解码操作的参数。该描述符也可以带有在以前没有定义而由用户定义的参数。
在图1的分配器和复杂度估计器180中，根据在描述符中读出的参数以及来自解码器的反馈信息计算解码所有音像对象所需的时间。
在图6所示的复杂度估计器180的实施例中，该模块解码操作参数181a、181b和181c在被预先分别乘以加权数182a、182b和182c之后传输到复杂度估计器183。该复杂度估计器183估计要被解码的图像的复杂度并把估计的复杂度184传输到解码器190。在对该图像解码后，解码器190返回图像的实际复杂度185。通过求出估计的图像复杂度184与实际的图像复杂度185可以得出在复杂度估计中的误差186。接着；把误差186传输到保存用于加权的校正值，188a、188b和188c的反馈增益单元187。通过这些校正值修改加权数，并继续进行对下一幅图像的复杂度估计。
本发明的效果是对能够处理最差情况的过程不再是必须的。通过采用计算复杂度的指示和计算适度失真的方法可以简化所用的解码器。该解码器具有能解码大多数序列的能力，但是如果解码器遇到要求较高的序列，它可降低解码器的输出质量和分辨率以对该比特流解码。
本发明对具有不同分辨率和/或不同格式的业务的内部工作也是有用的。该子域可以由较低分辨率的解码器解码，而较高分辨率的解码器用于对整幅图像解码。一个实例是纵横比率在16∶9和4∶3之间内部工作的解码器。

Claims (16)

1、一种用于把多个音像对象编码为适于在该解码器中计算适度失真的压缩编码图像的方法，其特征在于，其中包括如下步骤：
对所述音像对象编码，把允许在该解码器中计算适度失真的方法合并到该音像对象的编码图像中；
利用多个模块解码参数估计执行独立计算的复杂度的大小；
把该音像对象的所述编码图像分割为多个存取单元，并增加标头信息以形成数据包；
把数据包含所述模块解码参数的描述符插入该数据包的标头中；
把这些数据包复合形成一单个复合比特流。
2、一种带有计算的适度失真用于对复合比特流进行解码以获得多个音像对象的方法中，其特征在于，其中包括如下步骤：
把单个复合比特流进行解复合形成包含包标头和存取单元的多个数据包；
从该包标头中提取包含多个模块解码参数的描述符；
把该存取单元重新组合为该音像对象的原始编码图像；
根据所述解码参数和当前解码器的运用，估计该解码器的特定计算的复杂度；
采用计算适度失真对该音像对象的所述编码图像进行解码，以满足该估计的解码器的特定计算复杂度的要求。
3、根据权利要求1所述的把所述音像对象编码为其压缩编码图像的方法中合并上允许在该解码器中应用计算适度失真的方法，其特征在于，其中包括如下步骤：
把该要被编码的输入图像分割为按升序标号排列的多个子域，在每个子域中只包括在其前面的一个子域内的一个像素的子集；
把该子域的位置和尺寸熵编码为在比特流内的压缩编码图像；
进一步把该子域分割为用于在该比特流内编码为压缩编码图像的多个模块；
只采用属于具有与所述模块相同或更高的编号次序的子域的重构图像中的像素来执行运动估计和运动补偿；
把该运动矢量解码为比特流中的压缩编码图像；
把该运动补偿预测差别变换到一个正交域中；
用量化方法对该变换系数进行量化；
把该量化后的变换系数进行熵编码为在比特流内的压缩编码图像。
4、根据权利要求2所述的在采用满足估计解码器的特定计算复杂度要求的计算适度失真对音像的编码图像进行解码的方法，其特征在于，其中还包括如下步骤：
对在该比特流内的压缩编码图像的子域的位置和尺寸进行熵解码；
只在该子域中选择所要的模块进行解码；
对该压缩编码图像进行熵解码以得出量化变换系数；
对所述量化变换系数进行反量化以得出变换系数；
对所述变换系数进行反变换以得出空间域移动补偿预测差别；
对来自该比特流中的压缩编码图像的运动矢量进行熵解码；
只用属于子域并且有与所述模块相同或更高序号的重构图像的像素对所述模块进行运动补偿；
重构图像并在帧存储器中存储所述图像以预测下一幅图像。
5、根据权利要求1所述的把所述音像对象编码为其压缩编码图像的方法中合并上允许在该解码器中应用计算适度失真的方法，其特征在于，其中还包括如下步骤：
把所输入的要被编码的图像分割为多个按升序排列的子域，以整幅图为开始作为第一子域，其中每个子域中只由在其之前子域的像素的子集构成；
在该比特流中，把该子域的位置和尺寸熵编码为压缩编码图像；
在该比特流中，进一步把该子域分割为多个用于编码为压缩编码图像的多个模块；
把所述模块变换到一个正交域；
用量化方法对该变换系数进行量化；
只用从上述模块到其左边的属于具有与所述模块相同或更高的序号的子域的对应量化变换系数，对所述模块执行量化系数预测；
在该比特流中，把该量化变换系数的预测差别熵编码为压缩编码图像。
6、根据权利要求2所述的在采用满足估计解码器的特定计算复杂度要求的计算适度失真对音像的编码图像进行解码的方法，其特征在于，其中还包括如下步骤：
在该比特流中，从该压缩编码图像中熵解码出该子域的位置的尺寸；
选择在所需子域中的模块进行解码；
对该压缩编码图像熵解码得出量化变换系数；
只用从上述模块到其左边的属于具有与所述模块相同或更高的序号的子域的对应量化变换系数，对所述模块执行量化系数预测；
对所述量化变换系数进行反量化，以得出该变换系数；
对所述变换系数进行反变换以得出空间域像素值；
重构该图像并在该存储器中存储所述图像以预测下一幅图像。
7、根据权利要求1所述的用于估计实现独立计算的复杂度的方法，其特征在于，该多个模块解码参数中包括表示如下操作次数的数目：
模块熵解码操作；
模块运动补偿操作；
模块反量化操作；
模块变换操作；
模块增加操作；
模块存储器访问操作。
8、如权利要求1所述的对在数据包的标头中的模块解码参数编码的方法，其特征在于，该描述符中包括：
表示该描述符的类型的描述符识别号码；
表示该描述符的大小的描述符长度范围；
多个模块解码参数。
9、根据权利要求3或5所述的在把要被编码的输入图像分割为多个子域的方法中，其特征在于，该子域为矩形。
10、根据权利要求3所述的对所述模块进行运动估计和运动补偿的方法，其特征在于，其中只利用来自属于具有与所述模块相同或更高的序号顺序的重构图像的像素，这意味着只有完全位于所述子域内的预测模块会被选中。
11、根据权利要求3的对所述模块进行运动估计和运动补偿的方法，其特征在于，只采用来自属于具有与所述模块相同或更高的序号顺序的重构图像，这意味着预测模块可能部分地位于所述子域之外，但其附加条件是位于所述子域之外的像素被来自该子域内部的最近像素所取代。
12、根据权利要求3或5所述的在把图像分割为多个子域的方法中，其特征在于，每个所述子域的位置和尺寸可能对于各幅图像来说都不相同，并且所述位置和尺寸被以全局扫描矢量的方式进行编码，从而得出水平和重直位移、宽度和高度。
13、根据权利要求3或5所述的在把图像分割为多个子域的方法中，其特征在于，子域的位置和尺寸对于各图像来说是相同的，并且所述位置和尺寸在该序列的开始处被以水平和垂直位移、宽度和高度的方式进行一次编码。
14、根据权利要求3、4、5或6所述的编码和解码方法，其特征在于，该变换为离散余弦变换。
15、根据权利要求3、4、5或6所述的编码和解码方法，其特征在于，子域的数目为两个。
16、一种方法，其特征在于，多个子域按升序排列，并且该运动矢量可指向一个低序列的子域，但不会从较低序列的子域指向较高序列的子域。
CNB981205771A 1997-10-24 1998-10-26 在音像压缩系统中用于计算适度失真的方法 Expired - Lifetime CN1155252C (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
SG97038616 1997-10-24
SE97038616 1997-10-24
SG1997003861A SG116400A1 (en) 1997-10-24 1997-10-24 A method for computational graceful degradation inan audiovisual compression system.

Related Child Applications (2)

Application Number Title Priority Date Filing Date
CNB011187891A Division CN1147152C (zh) 1997-10-24 1998-10-26 一种用于在音像压缩系统中解码输入位流的方法
CNB011187867A Division CN1146244C (zh) 1997-10-24 1998-10-26 一种在音像压缩系统中用于编码可视对象的方法

Publications (2)

Publication Number Publication Date
CN1252675A true CN1252675A (zh) 2000-05-10
CN1155252C CN1155252C (zh) 2004-06-23

Family

ID=20429767

Family Applications (3)

Application Number Title Priority Date Filing Date
CNB981205771A Expired - Lifetime CN1155252C (zh) 1997-10-24 1998-10-26 在音像压缩系统中用于计算适度失真的方法
CNB011187891A Expired - Lifetime CN1147152C (zh) 1997-10-24 1998-10-26 一种用于在音像压缩系统中解码输入位流的方法
CNB011187867A Expired - Lifetime CN1146244C (zh) 1997-10-24 1998-10-26 一种在音像压缩系统中用于编码可视对象的方法

Family Applications After (2)

Application Number Title Priority Date Filing Date
CNB011187891A Expired - Lifetime CN1147152C (zh) 1997-10-24 1998-10-26 一种用于在音像压缩系统中解码输入位流的方法
CNB011187867A Expired - Lifetime CN1146244C (zh) 1997-10-24 1998-10-26 一种在音像压缩系统中用于编码可视对象的方法

Country Status (7)

Country Link
US (5) US6408096B2 (zh)
EP (3) EP1154650B1 (zh)
JP (2) JP3425377B2 (zh)
KR (2) KR100312603B1 (zh)
CN (3) CN1155252C (zh)
DE (3) DE69810669T2 (zh)
SG (1) SG116400A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101119490B (zh) * 2006-08-02 2010-12-08 索尼株式会社 图像信号处理装置和图像信号处理方法
CN103299620A (zh) * 2010-12-22 2013-09-11 高通股份有限公司 在视频译码中使用最可能扫描次序对用于视频块的扫描次序信息进行有效译码
CN113542871A (zh) * 2021-07-06 2021-10-22 腾讯科技（深圳）有限公司 解码方法及装置、电子设备、计算机可读存储介质

Families Citing this family (65)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1999060772A2 (en) * 1998-05-20 1999-11-25 Koninklijke Philips Electronics N.V. Encoding block-organized data
SE513353C2 (sv) * 1998-10-21 2000-08-28 Ericsson Telefon Ab L M Partiell hämtning av bilder i den komprimerade domänen
US6498816B1 (en) 1999-09-03 2002-12-24 Equator Technologies, Inc. Circuit and method for formatting each of a series of encoded video images into respective regions
US7194032B1 (en) 1999-09-03 2007-03-20 Equator Technologies, Inc. Circuit and method for modifying a region of an encoded image
GB2356997A (en) * 1999-12-02 2001-06-06 Sony Uk Ltd Video signal processing
US6674800B1 (en) * 2000-08-29 2004-01-06 Koninklijke Philips Electronics N.V. Method and system for utilizing a global optimal approach of scalable algorithms
US6904094B1 (en) * 2000-09-20 2005-06-07 General Instrument Corporation Processing mode selection for channels in a video multi-processor system
US6631163B1 (en) * 2000-11-14 2003-10-07 Koninklijke Philips Electronics N.V. Dynamic adaptation of complexity in an MPEG-2 scalable decoder
US6961383B1 (en) * 2000-11-22 2005-11-01 At&T Corp. Scalable video encoder/decoder with drift control
US6765964B1 (en) 2000-12-06 2004-07-20 Realnetworks, Inc. System and method for intracoding video data
US6925126B2 (en) * 2001-04-18 2005-08-02 Koninklijke Philips Electronics N.V. Dynamic complexity prediction and regulation of MPEG2 decoding in a media processor
US7110664B2 (en) 2001-04-20 2006-09-19 Front Porch Digital, Inc. Methods and apparatus for indexing and archiving encoded audio-video data
US7035468B2 (en) 2001-04-20 2006-04-25 Front Porch Digital Inc. Methods and apparatus for archiving, indexing and accessing audio and video data
US6947598B2 (en) 2001-04-20 2005-09-20 Front Porch Digital Inc. Methods and apparatus for generating, including and using information relating to archived audio/video data
US6782054B2 (en) * 2001-04-20 2004-08-24 Koninklijke Philips Electronics, N.V. Method and apparatus for motion vector estimation
JP4157686B2 (ja) * 2001-05-15 2008-10-01 株式会社モノリス 画像符号化および復号のための方法および装置
US6940904B2 (en) * 2001-05-29 2005-09-06 Broadcom Corporation Artifact-free displaying of MPEG-2 video in the progressive-refresh mode
US7483581B2 (en) 2001-07-02 2009-01-27 Qualcomm Incorporated Apparatus and method for encoding digital image data in a lossless manner
US6704362B2 (en) * 2001-07-06 2004-03-09 Koninklijke Philips Electronics N.V. Resource scalable decoding
KR100440953B1 (ko) * 2001-08-18 2004-07-21 삼성전자주식회사 영상 압축 비트 스트림의 트랜스코딩 방법
US7646816B2 (en) * 2001-09-19 2010-01-12 Microsoft Corporation Generalized reference decoder for image or video processing
US7039113B2 (en) * 2001-10-16 2006-05-02 Koninklijke Philips Electronics N.V. Selective decoding of enhanced video stream
FR2832581A1 (fr) * 2001-11-21 2003-05-23 Canon Kk Procede et dispositif de determination d'au moins un parametre de codage de donnees multimedia
AU2002353301A1 (en) 2001-11-21 2003-06-10 Canon Kabushiki Kaisha Method and device for determining at least one multimedia data encoding parameter
EP1486074A1 (en) * 2002-03-08 2004-12-15 Koninklijke Philips Electronics N.V. Quality of video
US7660356B2 (en) * 2002-10-02 2010-02-09 Lsi Corporation Compressed video format with partial picture representation
EP1414273A1 (en) * 2002-10-22 2004-04-28 Koninklijke Philips Electronics N.V. Embedded data signaling
KR101008524B1 (ko) * 2002-12-20 2011-01-14 코닌클리케 필립스 일렉트로닉스 엔.브이. 전자 콘텐츠의 여러 품질의 버전을 분배하는 방법, 전자 콘텐츠 매체 및 전자 콘텐츠 플레이어
US7380028B2 (en) * 2003-06-13 2008-05-27 Microsoft Corporation Robust delivery of video data
US20040252762A1 (en) * 2003-06-16 2004-12-16 Pai R. Lakshmikanth System, method, and apparatus for reducing memory and bandwidth requirements in decoder system
US8345754B2 (en) * 2003-09-07 2013-01-01 Microsoft Corporation Signaling buffer fullness
US7961786B2 (en) * 2003-09-07 2011-06-14 Microsoft Corporation Signaling field type information
US8107531B2 (en) * 2003-09-07 2012-01-31 Microsoft Corporation Signaling and repeat padding for skip frames
US8582659B2 (en) 2003-09-07 2013-11-12 Microsoft Corporation Determining a decoding time stamp from buffer fullness
US7724827B2 (en) * 2003-09-07 2010-05-25 Microsoft Corporation Multi-layer run level encoding and decoding
US7388620B2 (en) * 2003-10-23 2008-06-17 Sony Corporation Method and system for pan-scan using motion vectors presentation
ATE367716T1 (de) * 2003-10-27 2007-08-15 Koninkl Philips Electronics Nv Leistungsoptimiertes colokalisiertes bewegungschätzverfahren
EP1769400B1 (en) 2004-06-25 2018-03-07 Oracle International Corporation Method and system for automated migration of media archives
JP2006014086A (ja) * 2004-06-28 2006-01-12 Canon Inc 動画像符号化装置及び動画像符号化方法
US20060104356A1 (en) * 2004-11-15 2006-05-18 Microsoft Corporation Timing for decoder buffer examination
JP2008526077A (ja) * 2004-12-22 2008-07-17 エヌエックスピー ビー ヴィ ビデオストリーム変更装置
US7924915B2 (en) * 2005-01-28 2011-04-12 Broadcom Corporation Method and system for encoding video data
CN1977538A (zh) * 2005-03-03 2007-06-06 皇家飞利浦电子股份有限公司 用于消费品中mpeg译码器的自适应后退系统
US8929464B2 (en) * 2005-03-25 2015-01-06 Sharp Laboratories Of America, Inc. Video entropy decoding with graceful degradation
US9560349B2 (en) 2005-04-19 2017-01-31 Koninklijke Philips N.V. Embedded data signaling
JP2007043651A (ja) * 2005-07-05 2007-02-15 Ntt Docomo Inc 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、動画像復号装置、動画像復号方法及び動画像復号プログラム
EP1911278A2 (en) 2005-08-04 2008-04-16 Nds Limited Advanced digital tv system
US8515194B2 (en) * 2007-02-21 2013-08-20 Microsoft Corporation Signaling and uses of windowing information for images
FR2915342A1 (fr) * 2007-04-20 2008-10-24 Canon Kk Procede et dispositif de codage video
US8948822B2 (en) 2008-04-23 2015-02-03 Qualcomm Incorporated Coordinating power management functions in a multi-media device
US8908763B2 (en) * 2008-06-25 2014-12-09 Qualcomm Incorporated Fragmented reference in temporal compression for video coding
US8964828B2 (en) 2008-08-19 2015-02-24 Qualcomm Incorporated Power and computational load management techniques in video processing
US8948270B2 (en) 2008-08-19 2015-02-03 Qualcomm Incorporated Power and computational load management techniques in video processing
US9654792B2 (en) 2009-07-03 2017-05-16 Intel Corporation Methods and systems for motion vector derivation at a video decoder
EP3145189B1 (en) * 2010-01-06 2019-06-19 Dolby Laboratories Licensing Corporation Complexity-adaptive scalable decoding and streaming for multi-layered video systems
US20110310956A1 (en) * 2010-06-22 2011-12-22 Jian-Liang Lin Methods for controlling video decoder to selectively skip one or more video frames and related signal processing apparatuses thereof
US9195675B2 (en) * 2011-02-24 2015-11-24 A9.Com, Inc. Decoding of variable-length data with group formats
WO2012119855A1 (en) 2011-03-09 2012-09-13 Siemens Aktiengesellschaft A method for coding a sequence of digitized images
JP5711370B2 (ja) * 2011-06-30 2015-04-30 三菱電機株式会社 画像符号化装置、画像復号装置、画像符号化方法および画像復号方法
US10045089B2 (en) 2011-08-02 2018-08-07 Apple Inc. Selection of encoder and decoder for a video communications session
US8781238B2 (en) * 2011-09-08 2014-07-15 Dolby Laboratories Licensing Corporation Efficient decoding and post-processing of high dynamic range images
TWI586150B (zh) * 2012-06-29 2017-06-01 新力股份有限公司 影像處理裝置及非暫態電腦可讀儲存媒體
CN105519117A (zh) * 2013-09-06 2016-04-20 三菱电机株式会社 动态图像编码装置、动态图像转码装置、动态图像编码方法、动态图像转码方法以及动态图像流传输系统
US10264269B2 (en) 2014-10-13 2019-04-16 Apple Inc. Metadata hints to support best effort decoding for green MPEG applications
KR102543444B1 (ko) * 2017-08-29 2023-06-13 삼성전자주식회사 영상 부호화 장치

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB8828499D0 (en) * 1988-12-07 1989-01-11 British Telecomm Data compression
US5128756A (en) * 1990-12-11 1992-07-07 At&T Bell Laboratories High definition television coding arrangement with graceful degradation
US5212742A (en) * 1991-05-24 1993-05-18 Apple Computer, Inc. Method and apparatus for encoding/decoding image data
US5402146A (en) * 1992-10-23 1995-03-28 International Business Machines Corporation System and method for video compression with artifact dispersion control
US5537551A (en) * 1992-11-18 1996-07-16 Denenberg; Jeffrey N. Data compression method for use in a computerized informational and transactional network
DE69434395T2 (de) 1993-03-25 2006-04-27 Sony Corp. Kodierung und/oder Dekodierung von sich bewegenden Bildern
US6026088A (en) * 1993-10-20 2000-02-15 Lsi Logic Corporation Network architecture
US5434913A (en) * 1993-11-24 1995-07-18 Intel Corporation Audio subsystem for computer-based conferencing system
US5512939A (en) 1994-04-06 1996-04-30 At&T Corp. Low bit rate audio-visual communication system having integrated perceptual speech and video coding
US5852669A (en) 1994-04-06 1998-12-22 Lucent Technologies Inc. Automatic face and facial feature location detection for low bit rate model-assisted H.261 compatible coding of video
JP2945842B2 (ja) * 1994-04-13 1999-09-06 株式会社東芝 データ記録方法、データ再生装置及びデータ再生方法
US5608458A (en) * 1994-10-13 1997-03-04 Lucent Technologies Inc. Method and apparatus for a region-based approach to coding a sequence of video images
US5978514A (en) 1994-11-10 1999-11-02 Kabushiki Kaisha Toshiba Image data coding and decoding system for efficiently compressing information using the shape and position of the image content
JPH08294119A (ja) * 1995-04-21 1996-11-05 Toshiba Corp 画像符号化／復号化装置
US5757967A (en) * 1995-10-19 1998-05-26 Ibm Corporation Digital video decoder and deinterlacer, format/frame rate converter with common memory
US6002802A (en) * 1995-10-27 1999-12-14 Kabushiki Kaisha Toshiba Video encoding and decoding apparatus
US5719632A (en) * 1996-01-25 1998-02-17 Ibm Corporation Motion video compression system with buffer empty/fill look-ahead bit allocation
US5832490A (en) * 1996-05-31 1998-11-03 Siemens Medical Systems, Inc. Lossless data compression technique that also facilitates signal analysis
US6072830A (en) * 1996-08-09 2000-06-06 U.S. Robotics Access Corp. Method for generating a compressed video signal
US6005980A (en) * 1997-03-07 1999-12-21 General Instrument Corporation Motion estimation and compensation of video object planes for interlaced digital video
US5990958A (en) * 1997-06-17 1999-11-23 National Semiconductor Corporation Apparatus and method for MPEG video decompression
KR100248404B1 (ko) * 1997-09-04 2000-03-15 정선종 다중 객체 환경에서 우선 순위 정보를 이용한 순화적 계산량 감소 방법
US6137837A (en) * 1998-01-23 2000-10-24 Motorola, Inc. Motion estimation for digital video with reduced number of search window pixels
US6167084A (en) * 1998-08-27 2000-12-26 Motorola, Inc. Dynamic bit allocation for statistical multiplexing of compressed and uncompressed digital video signals

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101119490B (zh) * 2006-08-02 2010-12-08 索尼株式会社 图像信号处理装置和图像信号处理方法
CN103299620A (zh) * 2010-12-22 2013-09-11 高通股份有限公司 在视频译码中使用最可能扫描次序对用于视频块的扫描次序信息进行有效译码
CN103299620B (zh) * 2010-12-22 2016-06-22 高通股份有限公司 在视频译码中使用最可能扫描次序对用于视频块的扫描次序信息进行有效译码
US11330272B2 (en) 2010-12-22 2022-05-10 Qualcomm Incorporated Using a most probable scanning order to efficiently code scanning order information for a video block in video coding
CN113542871A (zh) * 2021-07-06 2021-10-22 腾讯科技（深圳）有限公司 解码方法及装置、电子设备、计算机可读存储介质
CN113542871B (zh) * 2021-07-06 2023-05-26 腾讯科技（深圳）有限公司 解码方法及装置、电子设备、计算机可读存储介质

Also Published As

Publication number Publication date
US20010001016A1 (en) 2001-05-10
EP1154650A3 (en) 2002-04-17
DE69810670D1 (de) 2003-02-13
JP3425377B2 (ja) 2003-07-14
EP1187490A2 (en) 2002-03-13
US6408096B2 (en) 2002-06-18
EP1187490B1 (en) 2003-01-08
CN1342024A (zh) 2002-03-27
KR20010070539A (ko) 2001-07-25
EP1154650A2 (en) 2001-11-14
CN1155252C (zh) 2004-06-23
EP1154650B1 (en) 2003-01-08
US20010001621A1 (en) 2001-05-24
CN1147152C (zh) 2004-04-21
US6480628B2 (en) 2002-11-12
KR100312603B1 (ko) 2001-11-08
EP0912063B1 (en) 2002-02-13
US6563954B2 (en) 2003-05-13
JP3425435B2 (ja) 2003-07-14
DE69803821T2 (de) 2002-12-19
EP0912063A2 (en) 1999-04-28
SG116400A1 (en) 2005-11-28
DE69810669T2 (de) 2003-10-16
EP0912063A3 (en) 2000-03-08
DE69803821D1 (de) 2002-03-21
EP1187490A3 (en) 2002-04-17
US20020090136A1 (en) 2002-07-11
DE69810669D1 (de) 2003-02-13
US20020136461A1 (en) 2002-09-26
JP2002084545A (ja) 2002-03-22
US6421465B2 (en) 2002-07-16
US20010048768A1 (en) 2001-12-06
KR20010070540A (ko) 2001-07-25
CN1146244C (zh) 2004-04-14
CN1342025A (zh) 2002-03-27
JPH11225339A (ja) 1999-08-17
US6408099B2 (en) 2002-06-18
DE69810670T2 (de) 2003-10-23
KR100312604B1 (ko) 2001-11-08

Similar Documents

Publication Publication Date Title
CN1146244C (zh) 一种在音像压缩系统中用于编码可视对象的方法
US9338475B2 (en) Tone mapping for bit-depth scalable video codec
CN1254977C (zh) 具有细粒度可调节性的视频系统和方法
US8873871B2 (en) Image processing apparatus and method
CN1675932A (zh) 用于视频编码的采用后向自适应的速率失真优化数据分割系统和方法
CN1226786A (zh) 用于立体视频编码的视图偏移估算
CN1922884A (zh) 视频解码方法
CN1615656A (zh) 对数字视频内容的图像级自适应帧/场编码
CN1523893A (zh) 视频编码和解码方法、设备及程序
CN101873490B (zh) 图像处理方法和使用该方法的图像信息编码设备
EP2920970A1 (en) Method and apparatus for prediction value derivation in intra coding
CN101584220B (zh) 对视频信号进行编码的方法和系统、编码的视频信号、对视频信号进行解码的方法和系统
KR20110118175A (ko) 인코딩 방법 및 인코더 장치
CN100348053C (zh) 利用运动图像的电子水印的错误隐蔽方法
CN1595990A (zh) 基于图像切片结构的帧场自适应编码方法
US11743502B2 (en) Compact description of region-wise packing information
CN1231800A (zh) 数字化图像的图像编码的方法
CN110650337B (zh) 一种图像编码方法、解码方法、编码器、解码器及存储介质
KR100312602B1 (ko) 영상압축시스템의연산의단계적성능저하를위한방법
WO2012093466A1 (en) Image coding apparatus, image coding method and program, image decoding apparatus, and image decoding method and program
CN1913643A (zh) 预测元的存储方法

Legal Events

Date Code Title Description
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C06 Publication
PB01 Publication
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: MATSUSHITA ELECTRIC (AMERICA) INTELLECTUAL PROPERT

Free format text: FORMER OWNER: MATSUSHITA ELECTRIC INDUSTRIAL CO, LTD.

Effective date: 20140723

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20140723

Address after: California, USA

Patentee after: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

Address before: Japan Osaka

Patentee before: Matsushita Electric Industrial Co.,Ltd.

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20170120

Address after: American New York

Patentee after: Sun patent hosting Co.

Address before: California, USA

Patentee before: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

CX01 Expiry of patent term

Granted publication date: 20040623

CX01 Expiry of patent term