CN106464903A - 用于编码和解码图像的方法、用于编码和解码图像的设备、以及相应的计算机程序 - Google Patents

用于编码和解码图像的方法、用于编码和解码图像的设备、以及相应的计算机程序 Download PDF

Info

Publication number
CN106464903A
CN106464903A CN201580032433.8A CN201580032433A CN106464903A CN 106464903 A CN106464903 A CN 106464903A CN 201580032433 A CN201580032433 A CN 201580032433A CN 106464903 A CN106464903 A CN 106464903A
Authority
CN
China
Prior art keywords
present image
image
item
information item
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201580032433.8A
Other languages
English (en)
Other versions
CN106464903B (zh
Inventor
J.琼
D.K.沃阮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ao Lanzhi
Orange SA
Original Assignee
Ao Lanzhi
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ao Lanzhi filed Critical Ao Lanzhi
Publication of CN106464903A publication Critical patent/CN106464903A/zh
Application granted granted Critical
Publication of CN106464903B publication Critical patent/CN106464903B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/162—User input
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/523—Motion estimation or motion compensation with sub-pixel accuracy
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明涉及一种用于对至少一个当前图像(ICj)进行编码的方法，其特征在于，该方法在图像捕获终端处针对该当前图像的至少一个待编码部分(POu)实施由以下各项组成的步骤：‑确定与由用户对该终端进行的关于该至少一个捕获的当前图像的操控相关的一条信息，‑通过对该确定的一条信息进行变换来获得与该当前图像相关的至少一条数据，‑从该获得的一条数据中实施以下步骤中的至少一个步骤：·预测与该当前图像的该至少一个部分相关联的一条运动信息，·确定与该当前图像的该至少一个部分相关联的编码模式的至少一个特性。

Description

用于编码和解码图像的方法、用于编码和解码图像的设备、以 及相应的计算机程序
技术领域
本发明总体上涉及图像处理领域，并且更确切地涉及对数字图像以及对数字图像序列的编码和解码。
对数字图像的编码/解码具体地适用于源自包括以下各项的至少一个视频序列的图像：
-源自同一个相机并且在时间上彼此跟随的图像(2D类型编码/解码)，
-源自根据不同视角来定向的不同相机的图像(3D类型编码/解码)，
-相应的纹理分量和深度分量(3D类型编码/解码)，
-等等。
本发明类似地适用于对2D类型或3D类型图像的编码/解码。
本发明可以尤其但不排他地应用于在当前视频编码器中所实施的如例如AVC、HEVC及其扩展(MVC、3D-AVC、MV-HEVC、3D-HEVC等)等视频编码并且应用于相应的解码。
背景技术
图像以及数字图像序列在存储器方面占据了大量空间，这使得当对这些图像进行传输时，有必要对它们进行压缩，以便避免在用于这种传输的通信网络上的拥塞问题，可用于这种传输的比特率通常是受限制的。考虑到对这些数据的存储，这种压缩也是令人期望的。
已经已知许多种视频数据压缩技术。例如，在当前HEVC类型视频编码器中，建议对有关视频序列进行以下各项：
-将视频序列中的每一个图像细分成编码单元，所述编码单元可能被递归地再细分成块，
-根据所选的编码模式(特别是如帧内模式或帧间模式)来对每一个编码单元进行编码。
由此，在帧内编码模式中，通过空间预测来对视频序列中的某些图像进行编码，而在帧间编码模式中，使用本领域的技术人员所熟知的运动补偿，通过时间预测相对于一个或多个经编码-解码参考图像来对其他图像进行编码。
在这种预测编码之后，通过离散余弦变换(DCT)类型操作来对残差编码单元进行变换，然后对其进行量化。然后，采用使得有可能高频率地利用大量无效系数的预定读取顺序来扫描经量化的残差编码单元的系数，然后通过熵编码来对其进行编码。例如，在HEVC标准中，所提议的一种编码方法是强加作为“光栅扫描(raster-scan)”顺序的单个可能的读取顺序，光栅扫描顺序开始于位于有关编码单元的左上方中的第一个块并结束于位于该单元的右下方中的最后一个块。
当编码单元被划分成块时，对应于每一个块的数据信号被传输至解码器。这种信号包括：
-作为经量化的残差块的系数的残差数据，以及(可能地)当以帧间模式进行编码时的残差运动向量数据，
-表示所使用的编码模式的编码参数，具体地：
■预测类型(帧内预测、帧间预测、产生不向解码器传输信息项的预测的默认预测(跳过(Skip))；
■指定预测类型的信息项(定向、参考图像等)；
■分割类型；
■变换类型，例如，4x4DCT、8x8DCT等；
■运动信息项(如果必要的话)；
■等等。
然后，逐图像地实施解码，并且对于每一个图像，逐编码单元地实施解码。对于编码单元的每一个块，读取信号的相应元素。执行对块的系数的逆量化和逆变换。然后，计算对有关块的预测，并且通过将预测添加到经解码的预测残差中来重构该块。
由此，基于竞争的帧内编码或帧间编码依赖于不同编码参数(如以上所提到的编码参数)的竞争，以便选择最佳编码模式，也就是说，将根据预定性能标准(例如，本领域的技术人员熟知的比特率/失真代价)来优化对有关块的编码的编码模式。
与所选的编码模式相关的编码参数以通常被称为竞争指数的标识符的形式包含在由编码器传输至解码器的数据信号中。由此，解码器能够识别在编码器上所选择的编码模式，然后能够根据这种模式来应用预测。
分配给这些竞争指数的带宽是不可忽略的，因为其达到了至少约30％。此外，该带宽由于对新的编码参数(比如，新的块尺寸、新的块形式、新的帧内预测参数等)的日益增长的输入而趋于增加。
此外，上述类型的视频编码器/解码器安装在如例如便携式电话、智能电话、平板计算机等图像捕获终端中。
如今，这些终端多半配备有不同数据传感器(如例如加速计、陀螺仪、磁强计等)，当用户对这些数据传感器进行操控时，以及响应于生成关于这些终端的一个或多个动作，这些数据传感器使得有可能检测终端行为的任何变化，而无需用户的任何特定介入。
除了上述传感器以外，当前终端包含许多接口(例如，触摸按钮)，这些接口允许用户在捕获图像或数据时启动由这些终端所提供的特定功能。“放大”、“缩小”按钮构成了这些接口的一个示例。
当前，有利地利用由这种传感器或这种接口所提供的数据来降低视频编码的复杂性。
然而，对这些数据的利用当前并不使得有可能改进编码/解码性能水平并降低待传输至解码器的信号中的经编码的数据的信令成本。
发明内容
本发明的一个目的是补救上述现有技术的缺点。
为此，本发明的一个目的涉及一种用于对至少一个当前图像进行编码的方法，这种方法值得注意的地方在于：该方法在图像捕获终端上针对该当前图像的至少一个待编码部分实施由以下各项组成的步骤：
-确定与由用户对该终端进行的关于该捕获的当前图像的操控相关的信息项，
-通过对该确定的信息项进行变换来获得与该当前图像相关的至少一条数据，
-从所获得的该数据中实施以下步骤中的至少一个步骤：
·预测与该当前图像的该至少一个部分相关联的运动信息项，
·确定与该当前图像的该至少一个部分相关联的编码模式的至少一个特性。
由此，在进行基于竞争的编码(不论其是否根据帧内模式、帧间模式或其他模式)时，这种安排使得有可能避免将在多个编码参数的竞争之后计算的一个或多个竞争指数包括在待传输至解码器的信号中。仅需在数据信号中将与由用户对终端的操控相关的信息项(原始的或者变换的)传输至解码器。
由此，由于这种安排在解码器上是可复制的，所以其结果是大大降低信令成本。
这种安排的另一个目的是有利地利用与由用户对终端的操控相关的信息项来在帧间图像编码的背景下完善对运动信息项的预测或者通过完善对最优编码模式的选择来改进编码性能水平。这种利用包括将这些信息项变换成图像数据，从而使得图像数据可由编码器直接理解。
表述“与由用户对该终端进行的关于该捕获的当前图像的操控相关的信息项”应当被理解为指从安装在图像捕获终端中的传感器中作为输出而传递的任何数据，具体地，比如：
-通过加速计测量的切向加速度和向心加速度，
-通过陀螺仪测量的角速度，
-通过磁强计测量的磁场变化，
-通过照度传感器测量的照度，
-等等。
表述“与由用户对该终端进行的关于该捕获的当前图像的操控相关的信息项”还应当被理解为指：
-当图像捕获终端捕获图像时，在用户的发起下执行的对图像捕获终端的任何位移、加速度等，
-由用户通过控制接口(如例如，终端的按钮)来进行的与所捕获的当前图像的交互而产生的数据。
根据由用户通过控制接口对所捕获的当前图像进行交互而产生的第一示例性数据，与由用户对终端的操控相关的这种信息项由图像的像素组成，在用户选择他或她的终端的“放大”或“缩小”按钮来分别放大或缩小所显示的当前图像的情况下所实施的单应性之后被变换。
根据由用户通过控制接口对所捕获的当前图像进行交互而产生的第二示例性数据，与由用户对终端的操控相关的这种信息项由图像的像素组成，已经经历了在用户选择他或她的终端的“全景”按钮来以全景的形式观察所显示的当前图像的情况下所实施的单应性之后的变换。
根据由用户通过控制接口对所捕获的当前图像进行交互而产生的第三示例性数据，与由用户对终端的操控相关的这种信息项由图像的像素组成，在用户选择他或她的终端的“旋转”按钮来以顺时针或逆时针方向旋转所显示的当前图像的情况下实施的旋转之后被变换。
对于由用户执行的对图像捕获终端的各种位移、加速等，可以通过上述传感器来对其进行测量。
在本发明的含义内，“与该当前图像的一部分相关联的运动信息项”应当被理解为指运动向量(在如平移等简单的线性运动的情况下)，或者甚至运动向量矩阵(在如旋转、单应性等更加复杂的运动的情况下)。
在本发明的含义内，当前图像的一部分例如是图像的特定区域。例如，如果图像表示海滩，那么图像的第一区域是天空且图像的第二区域是沙子。
根据另一个示例，当前图像的一部分是如HEVC标准中所定义的编码单元。
由此，该编码方法提供了能够适应于不同标准的编码器的优点。
根据特定实施例，该编码方法进一步包括由以下各项组成的步骤：
-生成数据信号，该数据信号包含该当前图像的该部分的该经编码的数据，
-将与对该终端的该操控相关的该信息项或者已经通过变换与对该终端的该操控相关的该信息项而获得的与该当前图像相关的该数据插入到该数据信号中。
在这种数据信号被传输至解码器的情况下，将与对终端的操控相关的信息项直接插入到信号中要求解码器执行对此信息的变换，以便相应地获得与当前图像相关的数据。当传输所变换的数据的代价很高时，这种安排是有利的。此外，这种安排有利地允许解码器自身确定两个连续图像之间的运动变化，就像此变化的特性(平移、旋转、单应性等)一样，而编码器不必向解码器传输关于这种变化的更多信息项。
在将这种数据信号传输至解码器的情况下，将已经通过变换与对终端的操控相关的信息项而获得的与当前图像相关的数据插入到信号中允许解码器在所接收的信号中直接读取可由解码器立即理解的此数据。
本发明还涉及一种可以安装在图像捕获终端中用于对至少一个当前图像进行编码的设备，这种设备值得注意的地方在于：针对该当前图像的至少一个待编码部分，该设备包括能够进行以下各项的处理模块：
-确定与由用户对该终端进行的关于所述至少一个捕获的图像的操控相关的信息项，
-通过对所述确定的数据进行变换来获得与该当前图像相关的至少一条数据，
-从所获得的该数据中实施以下步骤中的至少一个步骤：
·触发对模块的激活，该模块用于预测与该当前图像的该至少一个部分相关联的运动信息项，
·确定与该当前图像的该至少一个部分相关联的编码模式的至少一个特性。
这种编码设备尤其适合用于实施上述编码方法。
具体地，这种编码设备可以安装在如例如便携式电话、智能电话、平板计算机等图像捕获终端中。
采用对应于上述编码方法的方式，本发明涉及一种用于对表示至少一个当前图像的数据信号进行解码的方法，这种解码方法值得注意的地方在于：该方法在图像显示终端上针对该当前图像的至少一个待重构部分实施由以下各项组成的步骤：
-在该信号中识别与由用户对该终端进行的关于该捕获的当前图像的操控相关的信息项、或者之前通过变换与对该终端的该操控相关的该信息项而获得的与该当前图像相关的数据，
-如果所识别的是与对该终端的该操控相关的信息项，则通过对该识别的信息项进行变换来确定与该当前图像相关的至少一条数据，
-从在该信号中识别的或者通过对在该信号中识别的该信息项进行变换而确定的与该当前图像相关的该数据中实施以下步骤中的至少一个步骤：
·通过运动预测来重构与该当前图像的该至少一个部分相关联的运动信息项，
·确定与该当前图像的该至少一个部分相关联的解码模式的至少一个特性。
根据特定实施例，与该确定的当前图像相关的该数据是与该当前图像相关联的运动信息项。
这种安排允许解码器借助于与由用户对终端进行的与捕获当前图像有关的操控相关的信息项来确定与待重构的当前图像部分相关联的运动信息项，如下：
-或者，如果在通过变换与对终端的操控相关的信息项来进行的编码之后已经获得了该运动信息项，那么直接在数据信号中，
-或者，从数据信号中的所传输的与对终端的操控相关的原始信息项本身中。
“与该当前图像相关联的运动信息项”应当被理解为指运动向量(在如平移等简单的线性运动的情况下)，或者运动向量的矩阵(在如旋转、单应性等更加复杂的运动的情况下)。
根据另一个特定实施例，在对与该当前图像的该部分相关联的该运动信息项进行重构的步骤期间，与该当前图像相关联的该运动信息项被选择作为预测与该当前图像部分相关联的该运动信息项的运动信息项或者作为与该当前图像部分相关联的该运动信息项所继承自的运动信息项。
这种安排有利地允许解码器利用与对终端的操控相关的信息项，以便实施对当前运动信息项的预测或继承，而无需在信号中读取此信息项的指数以及与此信息项相关联的参考图像的指数。
根据已经实施的编码的类型，在解码时实施的对运动信息项的预测需要在从编码器中接收的信号中读取此运动信息项的残差数据。
根据又另一个特定实施例，在对与该当前图像的该部分相关联的该运动信息项进行重构的步骤期间：
-或者，在候选预测运动信息项列表中选择预测与该当前图像的该部分相关联的该运动信息项的运动信息项，之前已经将与该当前图像相关联的该运动信息项添加到该列表中，
-或者，在作为继承候选项的运动信息项列表中选择与该当前图像的该部分相关联的该运动信息项所继承自的运动信息项，之前已经将与该当前图像相关联的该运动信息项添加到该列表中。
这种安排有利地允许解码器利用与对终端的操控相关的信息，以便独立地确定旨在被添加到现有预测或继承运动信息项列表(如例如，在HEVC标准中都是众所周知的高级运动向量预测(Advanced Motion Vector Prediction)解码模式的运动向量列表或者合并(Merge)解码模式的运动向量列表)中的预测或继承运动信息项。
由此，解码器从预测或继承运动信息项的更大选择中获益，这使得其能够选择最适合用于对当前图像部分的运动的进行预测或继承的运动信息项，而同时使得有可能在编码/解码时节省计算资源。
根据又另一个特定实施例，用于该当前图像的该部分的该解码模式的该至少一个特性是根据该当前图像的该运动的准确度值而确定的该当前图像部分的该运动的准确度，之前已经将该准确度值与该当前图像的该运动信息项的值相关联。
这种安排有利地允许解码器利用与对终端的操控相关的信息项，以便针对由编码器常规地用信号发送的编码模式(例如，帧间模式)而独立地判定是否已经关于之前的图像而修改了所捕获的图像的运动的分辨率。由此，由于解码器自身知道如何通过给定值的运动分辨率(如例如，通过像素的16分之一内的运动分辨率、像素的8分之一内的运动分辨率等、像素内的运动分辨率等)来解释与对终端的操控相关的信息项，所以不需要在源自编码器的数据信号中传输对分辨率的这种修改的指示。
根据又另一个特定实施例，用于该当前图像的该部分的该解码模式的该至少一个特性是根据该当前图像的运动参数而确定的该当前图像的该部分的运动类型，之前已经将这些运动参数与在该信号中识别的或者通过对在该信号中识别的该信息项进行变换而确定的与该当前图像相关的该数据相关联。
这种安排有利地允许解码器利用与对终端的操控相关的信息项，以便针对由编码器常规地用信号发送的编码模式(例如，帧间模式)而独立地确定所捕获的图像的运动类型(如例如，线性的、仿射的、单应性的等)。由此，由于解码器本身知道如何将与对终端的操控相关的信息项解释为给定的运动类型，所以不需要在源自编码器的数据信号中传输对运动类型的指示。
根据又另一个特定实施例，用于该当前图像的该部分的该解码模式的该至少一个特性是根据用于对该当前图像的像素进行解码的顺序类型而确定的用于对该当前图像的该部分的这些像素进行解码的顺序，之前已经将该顺序类型与在该信号中识别的或者通过对在该信号中识别的该信息项进行变换而确定的与该当前图像相关的该数据相关联。
这种安排有利地允许解码器利用与对终端的操控相关的信息项，以便针对由编码器常规地用信号发送的编码模式(例如，已经使用的对当前图像的部分的读取的模式)而独立地判定是否已经修改对当前图像部分的像素的编码顺序，以便应用相应的解码顺序来重构当前图像部分的像素。由此，由于解码器本身知道如何将与对终端的操控相关的信息项解释为给定类型的待应用的解码顺序，所以不需要在源自编码器的数据信号中传输对编码顺序的以及对不同的可能编码顺序的这种修改的指示。
根据又另一个特定实施例，用于该当前图像的该部分的该解码模式的该至少一个特性是根据该当前图像与在所述当前图像之前的图像之间的角度值而确定的该当前图像的该部分的这些像素的预测方向，之前已经将这种角度值与在该信号中识别的或者通过对在该信号中识别的该信息项进行变换而确定的与该当前图像相关的该数据相关联。
这种安排有利地允许解码器利用与对终端的操控相关的信息项，以便针对由编码器常规地用信号发送的编码模式(例如，帧内模式)而独立地确定待重构的当前图像部分的像素的预测方向，而编码器无需在信号中指示所有不同的可能预测方向。
根据又另一个特定实施例，用于该当前图像的该部分的该解码模式的该至少一个特性是根据该当前图像的亮度值而确定的用于对该当前图像的该部分的这些像素进行滤波的模块的激活或非激活的指示符，之前已经将该亮度值与在该信号中识别的或者通过对在该信号中识别的该信息项进行变换而确定的与该当前图像相关的该数据相关联。
这种安排有利地允许解码器利用与对终端的操控相关的信息项，以便针对由编码器常规地用信号发送的编码模式(例如，帧内模式)而独立地判定是否应当激活用于对待重构的当前图像部分的像素进行滤波的模块。由此，例如，在与对终端的操控相关的信息项是通过加速计测量的加速度并且此加速度的值很高的情况下，解码器直接从中推断应当激活抗阻塞滤波器或去块滤波器。根据另一个示例，在与对终端的操控相关的信息项是通过照度传感器测量的照度并且此照度的值很低，由此表征图像的暗区域的情况下，解码器直接从中推断应当激活降噪滤波器。
在以上所定义的解码方法的步骤中，可以单独地或彼此组合地添加以上提及的各种实施例或特征。
相应地，本发明还涉及一种用于对表示至少一个当前图像的数据信号进行解码的设备，这种设备能够被安装在图像显示终端中。
这种解码设备值得注意的地方在于，针对当前图像的至少一个待重构部分，该解码设备包括：
-读取模块，该读取模块能够在该信号中识别与由用户对该终端进行的关于该捕获的当前图像的操控相关的信息项、或者之前通过变换与对该终端的该操控相关的该信息项而获得的与该当前图像相关的数据，
-处理模块，该处理模块能够：
-如果所识别的是与对该终端的该操控相关的信息项，则通过对该识别的信息项进行变换来确定与该当前图像相关的至少一条数据，
-从在该信号中识别的或者通过对在该信号中识别的该信息项进行变换而确定的与该当前图像相关的该数据中实施以下步骤中的至少一个步骤：
·触发对运动预测模块的激活，以便通过运动预测来重构与该当前图像的该至少一个部分相关联的运动信息项，
·确定与该当前图像的该至少一个部分相关联的解码模式的至少一个特性。
这种解码设备尤其适合用于实施上述解码方法。
具体地，这种解码设备可以安装在如例如电视接收器、便携式电话、智能电话、平板计算机等图像显示终端中。
本发明还涉及一种包括指令的计算机程序，当该计算机程序在计算机上运行时，这些指令用于实施根据本发明的编码方法或解码方法。
此程序可以使用任何编程语言，并且可以采用源代码、目标代码、或在源代码与目标代码之间的中间代码的形式，比如，采用部分编译的形式或采用任何其他令人期望的形式。
如上所述，本发明还将其上存储有计算机程序的计算机可读存储介质作为目标，此程序包括适合用于实施根据本发明的编码方法或解码方法的指令。
这种存储介质可以是能够存储程序的任何实体或设备。例如，该介质可以包括如ROM(例如，CD ROM或微电子电路ROM)等存储装置、或甚至磁性存储装置(例如，USB密钥或硬盘)。
并且，这种存储介质可以是可经由电缆或光缆以无线或其他方式路由的可传输介质(比如，电信号或光信号)。根据本发明的程序可以具体地通过互联网类型的网络进行下载。
可替代地，该存储介质可以是该程序所并入的集成电路，该电路被适配成用于执行或用于执行上述编码方法或解码方法。
附图说明
在阅读参照附图所描述的优选实施例时，其他特征和优点将变得明显，在附图中：
-图1表示根据本发明的编码方法的步骤，
-图2表示根据本发明的编码设备的实施例，
-图3A表示由图2的编码设备传递的信号的结构的第一示例，
-图3B表示由图2的编码设备传递的信号的结构的第二示例，
-图4表示了根据本发明的解码设备的实施例，
-图5表示了根据本发明的解码方法的步骤。
具体实施方式
编码部分的具体实施方式
现在将对本发明的实施例进行描述，在该实施例中，根据本发明的编码方法用于根据二进制信号来对图像或图像序列进行编码，该二进制信号类似于通过在符合当前或未来编码标准中的任何一项的编码器中实施的编码而获得的二进制信号。
在此实施例中，例如采用软件或硬件方式通过对这种编码器进行修改来实施根据本发明的编码方法。采用包括如在图1中所表示的步骤C1至步骤C11的算法的形式来表示根据本发明的编码方法。
根据本发明的实施例，在图2中所表示的编码设备或编码器CO中实施根据本发明的编码方法。
如在图2中所展示的，这种编码器包括存储器MEM_CO(该存储器包括缓冲存储器TAMP_CO)、配备有例如微处理器μP并且由计算机程序PG_CO驱动的处理单元UT_CO，该处理单元实施根据本发明的编码方法。在初始化时，在处理单元UT_CO的处理器执行计算机程序PG_CO的代码指令之前，这些代码指令例如被加载到RAM存储器(未表示出)中。
这种编码器CO安装在例如如便携式电话、智能电话、平板计算机等图像捕获终端(未表示出)中。
在图1中所表示的编码方法被应用于由上述图像捕获终端之一(编码器CO安装在其中)捕获的待编码的图像IC1、…、ICj、…、ICM(1≤j≤M)的序列SQ中的任何当前图像ICj。
在图1中所表示的步骤C1期间，对于有关的当前图像ICj，从图像ICj的若干部分PO1、PO2、…、POu、…、POS中选择此图像的待编码的当前部分POu。
根据本发明，这种部分例如是：
-图像像素的特定区域，如例如，均匀纹理、颜色或运动的区域，
-如例如在AVC、H.264、HEVC等标准中，在之前已经将当前图像分割成块的情况下，图像像素的具有预定义大小的块。
由图2中所表示的软件选择模块SEL_CO实施上述步骤C1，该模块由处理单元UT_CO的微处理器μP驱动。
在图1中所表示的步骤C2期间，确定了与由用户对上述终端进行的关于所捕获的当前图像ICj的操控相关的至少一个信息项。
由图2中所表示的软件处理模块TR_CO实施上述步骤C2，该模块由处理单元UT_CO的微处理器μP驱动。
根据第一当前图像捕获背景，这种信息项由安装在上述终端中的至少一个数据传感器传递。此信息项被表示为D1捕获。在图像捕获终端包含多个传感器的情况下，分别传递多个信息项D1捕获、D2捕获、…、DK捕获(K≥1)。
这种信息项的非限制性示例包括：
-如在捕获当前图像时通过加速计所测量的根据三个不同坐标轴的终端加速度(m/s2)，
-如在捕获当前图像时通过陀螺仪所测量的根据一个、两个或三个坐标轴的终端角位置(弧度/s)，
-如在捕获当前图像时通过GPS(全球定位系统)接收器所测量的终端海拔、经度和纬度(m)，
-如在捕获当前图像时通过指南针所测量的终端相对于地球磁场的角位置(度)，
-如在捕获当前图像时通过磁强计所测量的终端磁场(特斯拉)，
-如在捕获当前图像时通过亮度传感器所测量的环境亮度(勒克斯)，
-如在捕获当前图像时通过接近传感器所测量的用户运动(法拉第)，
-如在捕获当前图像时通过背光式图像传感器所测量的亮度(勒克斯)，
-等等。
根据第二当前图像捕获背景，在由用户在图像捕获终端上进行的关于所捕获的当前图像的至少一个动作之后获得这种信息项。这种动作包括经由终端的物理按钮或触摸按钮或者直接经由终端的屏幕来与图像捕获终端进行交互，例如以便对所捕获的当前图像执行放大或缩小、选择所捕获的当前图像的区域以便改进其质量等等。
根据此第二背景，该信息项被表示为D1交互。在用户执行关于所捕获的当前图像的不同动作的情况下，分别获得不同信息项D1交互、D2交互、…、DZ交互(Z≥1)。
在图1中所表示的步骤C3期间，处理模块TR_CO继续将在步骤C2中确定的一个或多个信息项可由编码器CO直接利用的关于当前图像ICj的一条或若干个数据。这种当前图像数据在图1和图2中被表示为DI1、DI2、…、DIR(R≥1)。
根据本发明，在步骤C3中获得的一条或多条当前图像数据旨在：
-或者，预测与当前图像部分POu相关联的至少一个运动信息项IMPu，
-或者，确定例如如帧内编码模式、帧间编码模式、合并编码模式等与当前图像部分POu相关联的编码模式MCu的至少一个特性。
在图1中所表示的步骤C4a)期间实施这种预测。由图2中所表示的软件预测模块PRED_CO实施步骤C4a)，该模块由处理单元UT_CO的微处理器μP驱动。
在图1中所表示的步骤C4b)期间实施对编码模式MCu的至少一个特性的这种确认。由图2中所表示的软件计算模块CAL_CO实施步骤C4b)，该模块由处理单元UT_CO的微处理器μP驱动。
显然，可以采用单独或共同的方式来同样很好地实施步骤C4a)和C4b)。
根据步骤C4a)的第一替代方案，模块PRED_CO计算所述当前图像数据DI1、DI2、…、DIR中的至少一条数据与关联于当前图像部分POu的运动信息项IMPu之间的差异。
然后，在完成步骤C4a)时获得运动信息项残差IMPru。
根据步骤C4a)的第二替代方案，模块PRED_CO通过继承来向与当前图像部分POu相关联的运动信息项IMPu分配所述当前图像数据DI1、DI2、…、DIR中的至少一条数据。
然后，在完成步骤C4a)时获得继承的运动信息项DIu(1≤u≤R)。
根据步骤C4a)的第三替代方案，所述当前图像数据DI1、DI2、…、DIR中的至少一条数据被简单地添加到存储在图2的缓冲存储器TAMP_CO中的候选预测运动信息项的列表LCP中。
由此，在步骤C4a)期间，如果必要的话，在列表LCP中的预测运动信息项的竞争之后，例如通过将本领域的技术人员熟知的失真比特率标准最小化，预测模块PRED_CO将能够从列表LCP中选择这种当前图像数据。
列表LCP例如是AMVP编码模式的运动预测子列表。
根据步骤C4a)的第四替代方案，所述当前图像数据DI1、DI2、…、DIR中的至少一条数据被添加到如存储在图2的缓冲存储器TAMP_CO中作为继承候选项的运动信息选项的列表LCH中。
由此，在步骤C4a)期间，如果必要的话，在列表LCH中作为继承候选项的运动信息项的竞争之后，例如通过将本领域的技术人员熟知的失真比特率标准最小化，预测模块PRED_CO将能够从列表LCH中选择这种当前图像数据。
列表LCH例如是合并编码模式的运动信息项列表。
根据至少一条当前图像数据用于进行移动信息项预测目的的示例，这种当前图像数据是与当前图像ICj相关联的移动信息项IMIj。
与当前图像部分POu相关联的运动信息项IMPu以及在完成步骤C3时获得的与当前图像相关联的运动信息项IMIj例如分别是与当前图像部分POu相关联的当前运动向量MVu和与当前图像ICj相关联的运动向量MVj。
例如已经在步骤C3期间通过将如通过安装在终端中的加速计所测量的图像捕获终端沿着坐标轴(例如，水平坐标轴)的加速度值与用户捕获当前图像ICj的时间相关联来获得了与当前图像ICj相关联的运动向量MVj。
可替代地，在上述步骤C3期间，可以获得若干当前图像数据，而不是仅一条当前图像数据。例如，这些不同的当前图像数据构成如与在捕获当前图像时例如通过加速计沿着三个坐标轴X、Y和Z所测量的不同位移值相关联的运动向量的矩阵，或者甚至如在捕获当前图像时通过GPS接收器所测量的当前图像ICj与之前的图像ICj-1之间的海拔和/或经度和/或维度变化。
现在将对在步骤C4b)期间确定的(多个)编码模式的(多个)各种示例性特性进行描述。
根据第一种使用情况，当前图像的部分POu的编码模式MCu的特性是根据当前图像的运动的准确度值而确定的当前图像部分的运动的准确度，图2的处理模块TR_CO之前已经将该准确度值与当前图像ICj的运动信息项值相关联。
例如，当前图像ICj的运动信息项值是与当前图像ICj相关联的运动向量MVj的值，该运动向量的值例如在上述步骤C3期间通过将如通过安装在终端中的加速计所测量的图像捕获终端沿着坐标轴(例如，水平坐标轴)的加速度值与用户捕获当前图像ICj的时间相关联来获得。由此所获得的运动向量的值指示当前图像ICj的运动的准确度并且对应于给定值的运动分辨率，如例如，像素的16分之一内的运动向量分辨率、像素的8分之一内的运动向量分辨率等、像素内的运动向量分辨率。
根据第二种使用情况，当前图像的部分POu的编码模式MCu的特性是根据当前图像ICj的运动参数而确定的当前图像的部分的运动类型，图2的处理模块TR_CO之前已经将这些运动参数与所述当前图像数据DI1、DI2、…、DIR中的至少一条数据相关联。
例如，这种当前图像数据是与当前图像ICj相关联的运动向量MVj的值，该运动向量的值例如在步骤C3期间通过将如通过安装在终端中的加速计所测量的图像捕获终端沿着坐标轴(例如，水平坐标轴)的加速度值与用户捕获当前图像ICj的时间相关联来获得。运动向量MVj的值由作为此向量的坐标的两个运动参数来定义。然后，图2的计算模块CAL_CO从中推断当前图像ICj的运动是线性类型运动并且将当前图像部分的编码模式MCu(例如，帧间模式)的特性与此线性运动类型相关联。
作为此示例的替代方案，在上述步骤C3期间，可以获得若干当前图像数据，而不是仅一条当前图像数据。例如，这些各种当前图像数据构成如与在捕获当前图像时例如通过加速计沿着三个坐标轴X、Y和Z所测量的不同位移值相关联的运动向量的矩阵，或者甚至如在捕获当前图像时通过GPS接收器所测量的当前图像ICj与之前的图像ICj-1之间的海拔和/或经度和/或维度变化。如果获得分别与坐标轴X、Y和Z上的三个加速度或者与海拔、经度和维度变化相关联的三个运动向量值，那么这三个值定义六个运动参数。然后，图2的计算模块CAL_CO从中推断当前图像ICj的运动是仿射类型运动并且确定当前图像部分的编码模式MCu(例如，帧间模式)的特性是仿射类型运动。
根据第三种使用情况，当前图像部分POu的编码模式MCu的特性是根据当前图像ICj的像素的编码顺序类型而确定的对当前图像的部分的像素的编码顺序，图2的处理模块TR_CO之前已经将该编码顺序类型与所述当前图像数据DI1、DI2、…、DIR中的至少一条数据相关联。
例如，这种当前图像数据是与当前图像ICj相关联的运动向量MVj的值，该运动向量的值例如在上述步骤C3期间通过将如通过安装在终端中的加速计所测量的图像捕获终端沿着坐标轴(例如，垂直坐标轴)的加速度值与用户捕获当前图像ICj的时间相关联来获得。向量MVi的垂直方向使得图2的计算模块CAL_CO能够推断当前图像部分的编码模式MCu的特性是当前图像部分POu的像素的垂直编码顺序。
根据第四种使用情况，当前图像部分POu的编码模式MCu的特性是根据当前图像与在所述当前图像之前的图像之间的角度值而确定的当前图像的部分的像素的预测方向，图2的处理模块TR_CO之前已经将该角度值与所述当前图像数据DI1、DI2、…、DIR中的至少一条数据相关联。
例如，这种当前图像数据是与当前图像ICj相关联的帧内编码模式的预测方向，该预测方向例如在上述步骤C3期间通过将如通过安装在图像捕获终端上的陀螺仪所测量的当前图像ICj与当前图像之前的图像ICj-1之间的角度变化的值与用户捕获当前图像的时间相关联来获得。这种帧内预测方向使得图2的计算模块CAL_CO能够推断当前图像部分的编码模式MCu的特性是针对当前图像部分POu的像素的这种帧内预测方向。
根据第五种使用情况，当前图像的部分POu的编码模式MCu的特性是根据当前图像的亮度值而确定的用于对当前图像的部分的像素进行滤波的模块的激活或非激活的指示符，图2的处理模块TR_CO之前已经将该亮度值与所述当前图像数据DI1、DI2、…、DIR中的至少一条数据相关联。
在图2中表示了被表示为FIL_CO的滤波模块。例如取决于所使用的编码背景，该滤波模块是抗阻塞滤波器或去块滤波器或甚至是降噪滤波器。
根据第一示例，这种当前图像数据是通过安装在图像捕获终端中的加速计所测量的加速度值。计算模块CAL_CO根据此加速度的更高或更低值来触发或者不触发对滤波模块FIL_CO(这里，抗阻塞滤波器)的激活。
根据第二示例，这种当前图像数据是通过安装在图像捕获终端中的照度传感器所测量的照度值。图2的计算模块CAL_CO根据此照度值的更高或更低值来触发或者不触发对滤波模块FIL_CO的激活。具体地，如果照度值很低，由此表征图像的暗区域，那么激活对滤波模块FIL_CO(这里，降噪滤波器)的激活。
显然，可以对以上刚刚已经提及的使用情况进行组合，以便确定与当前图像部分POu相关联的若干编码模式特性。
在图1中所表示的步骤C5期间，将与当前图像部分POu相关的数据与在预定编码模式的竞争之后已经选择的最优预测图像部分PO最优的数据进行比较，这些预定编码模式具体地包括根据上述第一、第二和第四使用情况的编码模式，例如通过将本领域的技术人员熟知的失真比特率最小化来实施这种选择。由图2中所表示的预测模块PRED_CO实施这种步骤C5。
图像部分PO最优被认为是当前图像部分POu的近似表示。
更确切地，在此步骤期间，常规地计算最优预测图像部分PO最优与当前图像部分POu之间的差异。
然后，在完成步骤C5时获得残差图像部分POru。
在图1中所表示的步骤C6期间，根据常规直接变换操作(如例如，DCT类型离散余弦变换或DWT类型小波变换)来变换残差图像部分POru，以便产生经变换的图像部分POtu。由如在图2中所表示的变换软件模块TF_CO执行这种操作，该模块由处理单元UT_CO的微处理器μP驱动。
在图1中所表示的步骤C7期间，根据常规量化操作(如例如，标量量化或向量量化)来对经变换的图像部分POtu进行量化。然后，获得N×N量化系数的集合POqu，其中，N是大于或等于1的整数。通过如在图2中所表示的软件量化模块QT_CO来执行这种步骤，该模块由处理单元UT_CO的微处理器μP驱动。
在图1中所表示的步骤C8期间，根据预定顺序来对集合POqu中的系数进行编码，该预定顺序例如是根据上述第三种使用情况在与其他编码顺序(尤其是光栅扫描编码顺序)竞争之后，此编码模式已经被选择为是最优编码模式的情况下确定的编码模式。在优选实施例中，所执行的编码是算术或哈夫曼(Huffman)类型熵编码。然后，步骤C8包括：
-读取预定符号集合中与当前图像部分POu相关联的一个或多个符号，
-将如位等数字信息项与读取的(多个)符号相关联。
由图2中所表示的软件熵编码模块MCE实施这种熵编码步骤，该模块由处理单元UT_CO的微处理器μP驱动。熵编码模块MCE例如是CABAC(上下文自适应二进制算术编码器(Context Adaptive Binary Arithmetic Coder))类型。其还可以是众所周知的哈夫曼解码器本身。
在完成熵编码步骤C8时，然后传递包含量化系数的集合POqu的数据信号然后，由通信网络(未表示出)将这种信号传输到远程终端。该远程终端包括图4中所表示的解码器DO。
特别有利地，在已经从所述当前图像数据DI1、DI2、…、DIR中的至少一条数据中执行了对当前图像部分POu的运动的预测的情况下：
-如果在完成步骤C4a)时获得运动信息项残差IMPru，那么在信号中仅用信号发送该运动信息项残差，而不是用于进行预测的与所述当前图像数据DI1、DI2、…、DIR中的至少一条数据相关联的指数，
-如果在完成步骤C4a)时获得运动信息项DIu，那么在信号中不用信号发送该运动信息项。
同样有利地，在已经选择如在步骤C4b)之后从所述当前图像数据DI1、DI2、…、DIR中的至少一条数据中确定的一个或多个编码模式特性MCu来对当前图像部分POu进行编码的情况下，在信号中不直接用信号发送这些编码模式特性。
根据第一实施例，信号直接包含与在上述步骤C2中确定的与对终端的操控相关的一个或多个信息项。例如在图像序列SQ中指示这种信息项，每一个信息项使用这样的标志：
-该标志被设置为0，用于向解码器指示在对当前图像部分POu进行编码时没有使用这些信息项或这些信息项中的一些信息项，
-该标志被设置为1，用于向解码器指示在对当前图像部分POu进行编码时使用了这些信息项或这些信息项中的一些信息项。
在已经将这种信息项用于对当前图像部分POu进行编码的情况下，在信号对应于当前图像ICj的当前部分POu的经编码的数据的部分中用信号发送这些信息项的值。
在图3A中所表示的示例中，假设与对终端的操控相关的三个信息项有可能用于对当前图像部分POu进行编码。这三个信息项例如是加速度值ACC、照度值ILL以及放大值Z+。例如，如果编码器CO已经使用加速度值和放大值，那么分别与这些值中的每一个值相关联的标志FG1和FG3被设置为1。与照度值相关联的标志FG2就其自身而言被设置为0。在这种情况下，信号对应于当前图像部分POu的经编码的数据的部分包含加速度ACC值V1和放大Z+值V3。
根据第二实施例，信号包含在上述步骤C3中通过变换与对终端的操控相关的一个或多个信息项而获得的一条或多条当前图像数据DI1、DI2、…、DIR。例如在图像序列SQ中指示这种数据，每一条数据使用这样的标志：
-该标志被设置为0，用于向解码器指示在对当前图像部分POu进行编码时没有使用这些数据或这些数据中的一些数据，
-该标志被设置为1，用于向解码器指示在对当前图像部分POu进行编码时使用了这些数据或这些数据中的一些数据。
在已经将这种数据用于对当前图像部分POu进行编码的情况下，在信号对应于当前图像ICj的当前部分POu的经编码的数据的部分中用信号发送这些数据的值。
在图3B中所表示的示例中，假设三条当前图像数据DI1、DI2、DI3有可能用于对当前图像部分POu进行编码。这三条当前图像数据例如是：
-在对通过安装在图像捕获终端中的加速计所测量的加速度值进行变换之后获得的运动向量值V'1，
-在对如通过安装在图像捕获终端中的陀螺仪所测量的当前图像与之前的图像之间的角度值进行变换之后获得的帧内预测指数值V'2，
-如在对通过安装在图像捕获终端中的照度传感器所测量的亮度值进行变换之后获得的对图2的滤波模块FIL_CO的激活的指数值V'3。
为此，在图像序列SQ中，分别与当前图像数据DI1、DI2、DI3中的每一条数据相关联的标志FG'1、FG'2和FG'3被设置为1，而分别与当前图像数据DI4至DIR中的每一条数据相关联的标志FG'4至FG'R被设置为0。在这种情况下，信号对应于当前图像部分POu的经编码的数据的部分包含上述值V'1、V'2、V'3。
在图1中所表示的步骤C9期间，根据常规去量化操作来对系数集合POqu进行去量化，该去量化操作是步骤C7中执行的量化的逆操作。然后，获得去量化系数的集合PODqu。
由如在图2中所表示的软件逆量化模块QT-1_CO执行这种去量化步骤，该模块由处理单元UT_CO的微处理器μP驱动。
在图1中所表示的步骤C10期间，执行对去量化系数的集合PODqu的逆变换，该逆变换是在上述步骤C6中执行的直接变换的逆操作。然后，获得经解码的残差图像部分PODru。
由如在图2中所表示的软件逆变换模块TF-1_CO执行这种操作，该模块由处理单元UT_CO的微处理器μP驱动。
在图1中所表示的步骤C11期间，通过将经解码的残差图像部分PODru添加到在上述步骤C5中使用的最优预测图像部分PO最优中来构建经解码的当前图像部分PODu。应当注意的是，此经解码的当前图像部分PODu与在完成用于对图像ICj进行解码的方法时获得的经解码的图像部分相同，稍后将在说明书中对其进行描述。
由图2中所表示的软件逆预测编码模块PRED-1_CO执行这种步骤，该模块由处理模块UT_CO的微处理器μP驱动。
在上述步骤C11期间，在已经实施上述步骤C4a)的第一替代方案的情况下，还通过将在完成上述步骤C4a)时获得的运动信息项残差IMPru添加到当前图像的所述数据DI1、DI2、…、DIR中的用于对与当前图像部分POu相关联的运动信息项IMPu进行预测的至少一条数据中来构建经解码的运动信息项IMPDu。
然后，对有关当前图像ICj的待编码部分PO1、PO2、…、POu、…、POS中的每一个待编码部分实施以上刚刚已经描述的编码步骤。
解码部分的具体实施方式
现在将对根据本发明的解码方法的实施例进行描述，在该实施例中，采用软件或硬件方式通过对初始符合当前或未来视频解码标准中的任何一项的解码器的修改来实施该解码方法。采用包括如在图5中所表示的步骤D1至步骤D9的算法的形式来表示根据本发明的解码方法。
根据本发明实施列，在图4中所表示的解码设备或解码器DO中实施根据本发明的解码方法。
如在图4中所展示的，根据本发明的此实施例的解码器DO包括存储器MEM_DO(该存储器包括缓冲存储器TAMP_DO)、配备有例如微处理器μP并且由计算机程序PG_DO驱动的处理单元UT_DO，该处理单元实施根据本发明的解码方法。在初始化时，在处理单元UT_DO的处理器执行计算机程序PG_DO的代码指令之前，这些代码指令例如被加载到RAM存储器(未表示出)中。
这种解码器DO安装在例如如电视接收器、便携式电话、智能电话、平板计算机等图像显示终端(未表示出)中。
在图5中所表示的解码方法被应用于已经由上述图像捕获终端之一(编码器CO安装在其中)捕获的待解码的图像IC1、…、ICj、…、ICM(1≤j≤M)的序列SQ中的任何当前图像ICj，然后由该编码器对其进行编码。
为此，在解码器上所接收的数据信号(如在图1的编码方法之后传递的)中识别表示待解码的当前图像ICj的信息项。
参照图5，在步骤D1期间，在所述信号中识别分别与当前图像ICj的之前已经根据图1的编码方法来进行编码的部分PO1、PO2、…、POu、…、POS相关联的量化系数POq1、POq2、…、POqu、…POqS(1≤u≤S)的集合。
由如在图4中所表示的软件信号分析识别模块MI_DO实施这种识别步骤，所述模块由处理单元UT_DO的微处理器μP驱动。
在此步骤期间，识别模块MI_DO对待重构的当前图像部分POu识别：
-已经用于此当前图像部分的编码模式的类型(帧内、帧间、合并等)，
-已经在上述步骤C5中选择的最优预测图像部分PO最优的指数，
-运动信息项残差IMPru(如果已经根据上述步骤C4a)的第一替代方案来实施了运动预测)。
对于与待重构的当前图像部分POu相关的有关量化系数的集合POqu，在图5中所表示的步骤D2期间执行对此系数集合的熵解码。在优选实施例中，这种熵解码是算术或哈夫曼类型熵解码。然后，步骤D2包括：
-读取预定符号集合中与待重构的当前图像部分POu相关联的一个或多个符号，
-将如位等数字信息项与读取的(多个)符号相关联。
在完成此步骤D2时，获得经解码的量化系数的集合PODqu。
由图4中所表示的软件熵解码模块MDE实施这种熵解码步骤，该模块由处理单元UT_DO的微处理器μP驱动。熵解码模块MDE例如是CABAC类型。其还可以是众所周知的哈夫曼解码器本身。
在图5中所表示的步骤D3期间，根据常规去量化操作来对经解码的量化系数的集合PODqu进行去量化，该去量化操作是图1的步骤C7中执行的量化步骤的逆操作。然后，获得经解码的去量化图像部分PODtu。
由如在图4中所表示的软件逆量化模块QT-1_DO执行这种去量化步骤，该模块由处理单元UT_DO的微处理器μP驱动。
在图5中所表示的步骤D4期间，执行对经解码的去量化图像部分PODtu的逆变换，该逆变换是在图1的步骤C6中执行的变换的逆操作。然后，获得当前经解码的残差图像部分PODru。
由如在图4中所表示的软件逆变换模块TF-1_DO执行这种操作，该模块由处理单元UT_DO的微处理器μP驱动。
在图5中所表示的步骤D5期间，根据本发明在信号中执行对以下各项的识别：
-或者，与对上述图像捕获终端进行的关于待重构的当前图像ICj的操控相关的至少一个信息项，这种信息项形成上述传感器信息项D1捕获、D2捕获、…、DK捕获的一部分和/或上述用户交互信息项D1交互、D2交互、…、DZ交互的一部分，
-或者所述上述当前图像数据DI1、DI2、…、DIR中的至少一条数据。
由如在图4中所表示的软件读取模块ML_DO执行这种识别，该模块由处理单元UT_DO的微处理器μP驱动。
如果其是在步骤D5中识别的与对图像捕获终端的操控相关的一个或多个信息项，那么在图5中所表示的步骤D6期间，在图4中所表示的处理模块TR_DO继续将这些信息项变换成可直接由解码器DO使用的与当前图像ICj相关的一条或若干条数据，这种当前图像数据在图4和图5中被表示为DI'1、DI'2、…、DI'V(V≥1)。
根据本发明，在步骤D5中识别的或者在步骤D6中获得的一条或多条当前图像数据旨在：
-或者，通过运动预测来重构与当前图像部分POu相关联的至少一个运动信息项IMPu，
-或者，确定与当前图像部分POu相关联并且对应于在上述步骤D1中识别的编码模式MCu的解码模式MDu的至少一个特性。
在图5中所表示的步骤D7a)期间实施通过运动预测来进行的这种重构。由图4中所表示的软件逆预测模块PRED-1_DO实施步骤D7a)，该模块由处理单元UT_DO的微处理器μP驱动。
在图5中所表示的步骤D7b)期间实施对解码模式MDu的至少一个特性的这种确认。由在图4中所表示的软件计算模块CAL_DO实施步骤D7b)，该模块由处理单元UT_DO的微处理器μP驱动。
显然，可以采用单独或组合的方式来同样很好地实施步骤D7a)和D7b)。
根据步骤D7a)的第一替代方案，模块PRED-1_DO通过将如在步骤D5中识别的所述当前图像数据DI1、DI2、…、DIR中的至少一条数据或者如在步骤D6中获得的当前图像数据DI'1、DI'2、…、DI'V中的至少一条数据添加到在步骤D1中在信号中识别的运动信息项残差IMPru中来重构与当前图像部分POu相关联的运动信息项IMPu。
根据步骤D7a)的第二替代方案，模块PRED-1_DO通过继承来将在步骤D5中识别的所述当前图像数据DI1、DI2、…、DIR中的至少一条数据或者在步骤D6中获得的当前图像数据DI'1、DI'2、…、DI'V中的至少一条数据分配给与待重构的当前图像部分POu相关联地运动信息项IMPu。
然后，在完成步骤D7a)时获得继承的运动信息项DIu(1≤u≤R且1≤u≤V)。
根据步骤D7a)的第三替代方案，在步骤D5中识别的所述当前图像数据DI1、DI2、…、DIR中的至少一条数据或者在步骤D6中获得的当前图像数据DI'1、DI'2、…、DI'V中的至少一条数据被简单地添加到存储在图4的缓冲存储器TAMP_DO中的候选预测运动信息项的列表LCP中。
由此，在步骤D7a)期间，如果必要的话，在列表LCP中的预测运动信息项的竞争之后，预测模块PRED-1_DO将能够从列表LCP中选择这种当前图像数据。
列表LCP例如是AMVP解码模式的运动预测子列表。
根据步骤D7a)的第四替代方案，在步骤D5中识别的所述当前图像数据DI1、DI2、…、DIR中的至少一条数据或者在步骤D6中获得的当前图像数据DI'1、DI'2、…、DI'V中的至少一条数据被简单地添加到如存储在图4的缓冲存储器TAMP_DO中作为继承候选项的运动信息项的列表LCH中。
由此，在步骤D7a)期间，如果必要的话，预测模块PRED-1_DO将能够从列表LCH中选择这种当前图像数据。
列表LCH例如是合并解码模式的运动信息项列表。
根据至少一条当前图像数据用于通过运动预测来对移动信息项进行重构的目的的示例，这种当前图像数据是与当前图像ICj相关联的移动信息项IMIj。
与待重构的当前图像部分POu相关联的运动信息项IMPu以及在步骤D5中识别的或者在完成步骤D6时获得的与当前图像相关联的运动信息项IMIj例如分别是与待重构的当前图像部分POu相关联的当前运动向量MVu和与当前图像ICj相关联的运动向量MVj。
现在将对在步骤D7b)期间确定的解码模式特性的不同示例进行描述。
根据第一种使用情况，当前图像POu的待重构部分的解码模式MDu的特性是根据当前图像的运动的准确度值而确定的待重构的当前图像部分的运动的准确度，该准确度值与以下各项相关联：
-或者，在步骤D5中直接在信号中识别的当前图像ICj的运动信息项值，
-或者，在步骤D6中确定的当前图像ICj的运动信息项值。
例如，当前图像ICj的运动信息项值是与当前图像ICj相关联的运动向量MVj的值，该运动向量的值例如在步骤C3期间通过将如通过安装在终端中的加速计所测量的图像捕获终端沿着坐标轴(例如，水平坐标轴)的加速度值与用户捕获当前图像ICj的时间相关联来获得。由此所获得的运动向量的值指示当前图像ICj的运动的准确度并且对应于给定值的运动分辨率，如例如，像素的16分之一内的运动向量分辨率、像素的8分之一内的运动向量分辨率等、像素内的运动向量分辨率。
根据第二种使用情况，当前图像的待重构部分POu的解码模式MDu的特性是根据当前图像ICj的运动参数而确定的当前图像的待重构部分的运动类型，已经将这些运动参数与以下各项相关联：
-或者，在步骤D5中直接在信号中识别的当前图像ICj的运动信息项值，
-或者，在步骤D6中确定的当前图像ICj的运动信息项值。
例如，这种当前图像数据是与当前图像ICj相关联的运动向量MVj的值，该运动向量的值例如在步骤C3期间通过将如通过安装在终端中的加速计所测量的图像捕获终端沿着坐标轴(例如，水平坐标轴)的加速度值与用户捕获当前图像ICj的时间相关联来获得。运动向量MVj的值由作为此向量的坐标的两个运动参数来定义。然后，计算模块CAL_DO从中推断当前图像ICj的运动是线性类型运动并且将当前图像部分的解码模式MDu(例如，帧间模式)的特性与此线性运动类型相关联。
作为此示例的替代方案，在上述步骤C3期间，可以获得若干当前图像数据，而不是仅一条当前图像数据。例如，这些不同的当前图像数据构成如与在捕获当前图像时例如通过加速计沿着三个坐标轴X、Y和Z所测量的不同位移值相关联的运动向量的矩阵，或者甚至如在捕获当前图像时通过GPS接收器所测量的当前图像ICj与之前的图像ICj-1之间的海拔和/或经度和/或维度变化。如果获得分别与坐标轴X、Y和Z上的三个加速度或者与海拔、经度和维度相关联的三个运动向量值，那么这三个值定义六个运动参数。然后，计算模块CAL_DO从中推断当前图像ICj的运动是仿射类型运动并且确定待重构的当前图像部分的解码模式MDu(例如，帧间模式)的特性是仿射类型运动。
根据第三种使用情况，待重构的当前图像部分POu的解码模式MDu的特性是根据当前图像ICj的像素的解码顺序类型的当前图像的部分的像素的解码顺序，已经将该解码顺序类型与以下各项相关联：
-或者，在步骤D5中直接在信号中识别的当前图像ICj的运动信息项值，
-或者，在步骤D6中确定的当前图像ICj的运动信息项值。
例如，这种当前图像数据是与当前图像ICj相关联的运动向量MVj的值，该运动向量的值例如在上述步骤C3期间通过将如通过安装在终端中的加速计所测量的图像捕获终端沿着坐标轴(例如，垂直坐标轴)的加速度值与用户捕获当前图像ICj的时间相关联来获得。向量MVi的垂直方向使得计算模块CAL_DO能够推断待重构的当前图像部分的解码模式MDu的特性是当前图像的待重构部分POu的像素的垂直解码顺序。
根据第四种使用情况，待重构的当前图像部分POu的解码模式MDu的特性是根据当前图像与在所述当前图像之前的图像之间的角度值而确定的当前图像的部分的像素的预测方向，已经将所述角度值与以下各项相关联：
-或者，在步骤D5中直接在信号中识别的当前图像ICj的运动信息项值，
-或者，在步骤D6中确定的当前图像ICj的运动信息项值。
例如，这种当前图像数据是与当前图像ICj相关联的帧内解码模式的预测方向，该预测方向例如在上述步骤C3期间通过将如通过安装在图像捕获终端上的陀螺仪所测量的当前图像ICj与当前图像之前的图像ICj-1之间的角度变化值与用户捕获当前图像的时间相关联来获得。这种帧内预测方向使得计算模块CAL_DO能够推断待重构的当前图像部分的解码模式MDu的特性是针对待重构的当前图像部分POu的像素的这种帧内预测方向。
根据第五种使用情况，待重构的当前图像部分POu的解码模式MDu的特性是根据当前图像的亮度值而确定的用于对当前图像的待重构部分的像素进行滤波的模块的激活或非激活的指示符，已经将该亮度值与以下各项相关联：
-或者，在上述步骤D5中识别的所述当前图像数据DI1、DI2、…、DIR中的至少一条数据，
-或者，在上述步骤D6中确定的所述当前图像数据DI'1、DI'2、…、DI'R中的至少一条数据。
在图4中表示了被表示为FIL_DO的滤波模块。例如取决于所使用的解码背景，该滤波模块是抗阻塞滤波器或去块滤波器或甚至是降噪滤波器。
根据第一示例，这种当前图像数据是通过安装在图像捕获终端中的加速计所测量的并且在信号中由被设置为1的标志来指示的加速度值。然后，计算模块CAL_DO触发对滤波模块FIL_DO(这里，抗阻塞滤波器)的激活。在另一方面，如果对应于此加速度值的标志被设置为0，那么计算模块CAL_DO不触发对滤波模块FIL_DO的激活。
根据第二示例，这种当前图像数据是通过安装在图像捕获终端中的照度传感器所测量的并且在信号中由被设置为1的标志来指示的亮度值。然后，计算模块CAL_DO触发对滤波模块FIL_DO的激活。在另一方面，如果对应于此亮度值的标志被设置为0，那么计算模块CAL_DO不触发对滤波模块FIL_DO的激活。
显然，可以对以上刚刚已经提及的使用情况进行组合，以便确定与当前图像部分POu相关联的若干解码模式特性。
在图5中所表示的步骤D8期间，通过将最优预测图像部分PO最优(已经在步骤D1中在信号中识别了其指数)添加到如在完成步骤D4时获得的当前经解码的残差图像部分PODru中来重构当前图像部分POu。然后，获得经解码的当前图像部分PODu。
由图4中所表示的预测模块PRED-1_DO实施这种步骤D8。
在图5中所表示的步骤D9期间，所述经解码的当前图像部分PODu被写入到经解码的图像IDj中。
由如在图4中所表示的软件图像重构模块URI实施这种步骤，所述模块由处理模块UT_DO的微处理器μP驱动。
然后，对有关当前图像ICj的待重构部分PO1、PO2、…、POu、…、POS中的每一个待重构部分实施以上刚刚已经描述的解码步骤。
不言而喻，仅以完全指示性和非限制性的方式给出了以上已经描述的实施例，并且在不脱离本发明的范围的情况下，本领域的技术人员可以容易地做出许多修改。

Claims (15)

1.一种用于对至少一个当前图像(ICj)进行编码的方法，其特征在于，所述方法在图像捕获终端上针对所述当前图像的至少一个待编码部分实施由以下各项组成的步骤：
-确定(C2)与由用户对所述终端进行的关于所述至少一个捕获的当前图像的操控相关的信息项，
-通过对所述确定的信息项进行变换来获得(C3)与所述当前图像相关的至少一条数据，
-从所获得的所述数据中实施以下步骤中的至少一个步骤：
·预测(C4a))与所述当前图像的所述至少一个部分相关联的运动信息项，
·确定(C4b))与所述当前图像的所述至少一个部分相关联的编码模式的至少一个特性。
2.如权利要求1所述的编码方法，进一步包括由以下各项组成的步骤：
-生成数据信号，所述数据信号包含所述当前图像的所述部分的所述经编码的数据，
-将与对所述终端的所述操控相关的所述信息项或者已经通过变换与对所述终端的所述操控相关的所述信息项而获得的与所述当前图像相关的所述数据插入到所述数据信号中。
3.一种用于对至少一个当前图像(ICj)进行编码的设备(CO)，所述设备能够被安装在图像捕获终端中，其特征在于，针对所述当前图像的至少一个待编码部分，所述设备包括处理装置(TR_CO)，所述处理装置能够：
-确定与由用户对所述终端进行的关于所述至少一个捕获的图像的操控相关的信息项，
-通过对所述确定的数据进行变换来获得与所述当前图像相关的至少一条数据，
-从所获得的所述数据中实施以下步骤中的至少一个步骤：
·触发对模块的激活，所述模块用于预测与所述当前图像的所述至少一个部分相关联的运动信息项，
·确定与所述当前图像的所述至少一个部分相关联的编码模式的至少一个特性。
4.一种包括指令的计算机程序，当所述计算机程序在计算机上运行时，所述指令用于实施如权利要求1或权利要求2所述的编码方法。
5.一种用于对表示至少一个当前图像(ICj)的数据信号进行解码的方法，其特征在于，所述方法在图像显示终端上针对所述当前图像的至少一个待重构部分实施由以下各项组成的步骤：
-在所述信号中识别(D1)与由用户对所述终端进行的关于所述至少一个捕获的当前图像的操控相关的信息项、或者之前通过变换与对所述终端的所述操控相关的所述信息项而获得的与所述当前图像相关的数据，
-如果所识别的是与对所述终端的所述操控相关的信息项，则通过对所述识别的信息项进行变换来确定(D6)与所述当前图像相关的至少一条数据，
-从在所述信号中识别的或者通过对在所述信号中识别的所述信息项进行变换而确定的与所述当前图像相关的所述数据中实施以下步骤中的至少一个步骤：
·通过运动预测来重构(D7a))与所述当前图像的所述至少一个部分相关联的运动信息项，
·确定(D7b))与所述当前图像的所述至少一个部分相关联的解码模式的至少一个特性。
6.如权利要求5所述的解码方法，其中，与所述确定的当前图像相关的所述数据是与所述当前图像相关联的运动信息项。
7.如权利要求6所述的解码方法，其中，在对与所述当前图像的所述部分相关联的所述运动信息项进行重构的步骤期间，与所述当前图像相关联的所述运动信息项被选择作为预测与所述当前图像部分相关联的所述运动信息项的运动信息项或者作为与所述当前图像部分相关联的所述运动信息项所继承自的运动信息项。
8.如权利要求6所述的解码方法，其中，在对与所述当前图像的所述部分相关联的所述运动信息项进行重构的步骤期间：
-或者，在候选预测运动信息项列表中选择预测与所述当前图像的所述部分相关联的所述运动信息项的运动信息项，之前已经将与所述当前图像相关联的所述运动信息项添加到所述列表中，
-或者，在作为继承候选项的运动信息项列表中选择与所述当前图像的所述部分相关联的所述运动信息项所继承自的运动信息项，之前已经将与所述当前图像相关联的所述运动信息项添加到所述列表中。
9.如权利要求5所述的解码方法，其中，用于所述当前图像的所述部分的所述解码模式的所述至少一个特性是根据所述当前图像的所述运动的准确度值而确定的所述当前图像部分的所述运动的准确度，之前已经将所述准确度值与所述当前图像的所述运动信息项的值相关联。
10.如权利要求5所述的解码方法，其中，用于所述当前图像的所述部分的所述解码模式的所述至少一个特性是根据所述当前图像的运动参数而确定的所述当前图像的所述部分的运动类型，之前已经将所述运动参数与在所述信号中识别的或者通过对在所述信号中识别的所述信息项进行变换而确定的与所述当前图像相关的所述数据相关联。
11.如权利要求5所述的解码方法，其中，用于所述当前图像的所述部分的所述解码模式的所述至少一个特性是根据用于对所述当前图像的像素进行解码的顺序类型而确定的用于对所述当前图像的所述部分的所述像素进行解码的顺序，之前已经将所述顺序类型与在所述信号中识别的或者通过对在所述信号中识别的所述信息项进行变换而确定的与所述当前图像相关的所述数据相关联。
12.如权利要求5所述的解码方法，其中，用于所述当前图像的所述部分的所述解码模式的所述至少一个特性是根据所述当前图像与在所述当前图像之前的图像之间的角度值而确定的所述当前图像的所述部分的所述像素的预测方向，之前已经将所述角度值与在所述信号中识别的或者通过对在所述信号中识别的所述信息项进行变换而确定的与所述当前图像相关的所述数据相关联。
13.如权利要求5所述的解码方法，其中，用于所述当前图像的所述部分的所述解码模式的所述至少一个特性是根据所述当前图像的亮度值而确定的用于对所述当前图像的所述部分的所述像素进行滤波的模块的激活或非激活的指示符，之前已经将所述亮度值与在所述信号中识别的或者通过对在所述信号中识别的所述信息项进行变换而确定的与所述当前图像相关的所述数据相关联。
14.一种用于对表示至少一个当前图像(ICj)的数据信号进行解码的设备(DO)，所述设备能够被安装在图像显示终端中，其特征在于，针对所述当前图像的至少一个待重构部分，所述设备包括：
-读取装置，所述读取装置用于在所述信号中识别与由用户对所述终端进行的关于所述至少一个捕获的当前图像的操控相关的信息项、或者之前通过变换与对所述终端的所述操控相关的所述信息项而获得的与所述当前图像相关的数据，
-处理装置，所述处理装置能够：
-如果所识别的是与对所述终端的所述操控相关的信息项，则通过对所述识别的信息项进行变换来确定与所述当前图像相关的至少一条数据，
-从在所述信号中识别的或者通过对在所述信号中识别的所述信息项进行变换而确定的与所述当前图像相关的所述数据中实施以下步骤中的至少一个步骤：
·触发对运动预测模块的激活，以便通过运动预测来重构与所述当前图像的所述至少一个部分相关联的运动信息项，
·确定与所述当前图像的所述至少一个部分相关联的解码模式的至少一个特性。
15.一种包括指令的计算机程序，当所述计算机程序在计算机上运行时，所述指令用于实施如权利要求5至13中任一项所述的解码方法。
CN201580032433.8A 2014-06-19 2015-06-15 用于编码和解码图像的方法、用于编码和解码图像的设备、以及相应的计算机程序 Active CN106464903B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
FR1455666A FR3022724A1 (fr) 2014-06-19 2014-06-19 Procede de codage et de decodage d'images, dispositif de codage et de decodage d'images et programmes d'ordinateur correspondants
FR1455666 2014-06-19
PCT/FR2015/051577 WO2015193599A1 (fr) 2014-06-19 2015-06-15 Procédé de codage et de décodage d'images, dispositif de codage et de décodage d'images et programmes d'ordinateur correspondants

Publications (2)

Publication Number Publication Date
CN106464903A true CN106464903A (zh) 2017-02-22
CN106464903B CN106464903B (zh) 2020-06-09

Family

ID=51787033

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580032433.8A Active CN106464903B (zh) 2014-06-19 2015-06-15 用于编码和解码图像的方法、用于编码和解码图像的设备、以及相应的计算机程序

Country Status (5)

Country Link
US (1) US10917657B2 (zh)
EP (1) EP3158749B1 (zh)
CN (1) CN106464903B (zh)
FR (1) FR3022724A1 (zh)
WO (1) WO2015193599A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3022724A1 (fr) * 2014-06-19 2015-12-25 Orange Procede de codage et de decodage d'images, dispositif de codage et de decodage d'images et programmes d'ordinateur correspondants
MY190056A (en) * 2015-05-21 2022-03-23 Huawei Tech Co Ltd Apparatus and method for video motion compensation

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030058347A1 (en) * 2001-09-26 2003-03-27 Chulhee Lee Methods and systems for efficient video compression by recording various state signals of video cameras
US20100079605A1 (en) * 2008-09-29 2010-04-01 William Marsh Rice University Sensor-Assisted Motion Estimation for Efficient Video Encoding
CN101919251A (zh) * 2007-11-28 2010-12-15 法国电信 一种运动编码和解码
CN102017627A (zh) * 2008-04-25 2011-04-13 汤姆森许可贸易公司 使用基于深度信息的视差估计的多视点视频编码
CN103650509A (zh) * 2011-07-01 2014-03-19 苹果公司 基于照相机和背景运动的参考帧缓冲区的自适应配置
US20140078394A1 (en) * 2012-09-17 2014-03-20 General Instrument Corporation Selective use of chroma interpolation filters in luma interpolation process

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7978764B2 (en) * 2003-06-27 2011-07-12 Nxp B.V. Method of video encoding for handheld apparatuses selecting best prediction function according to optimal rate-distortion value
EP1921867B1 (en) * 2006-10-17 2016-05-25 Harman Becker Automotive Systems GmbH Sensor assisted video compression
CN103124354B (zh) * 2007-09-28 2016-01-20 杜比实验室特许公司 处理视频信息
US20090290645A1 (en) * 2008-05-21 2009-11-26 Broadcast International, Inc. System and Method for Using Coded Data From a Video Source to Compress a Media Signal
JP2009290827A (ja) * 2008-06-02 2009-12-10 Sony Corp 画像処理装置および画像処理方法
US20110038416A1 (en) * 2009-08-14 2011-02-17 Apple Inc. Video coder providing improved visual quality during use of heterogeneous coding modes
US9473792B2 (en) * 2009-11-06 2016-10-18 Texas Instruments Incorporated Method and system to improve the performance of a video encoder
GB2480422B (en) * 2010-02-25 2014-07-09 Imagination Tech Ltd Object tracking using graphics engine derived vectors in a motion estimation system
US20120163472A1 (en) * 2010-12-22 2012-06-28 Qualcomm Incorporated Efficiently coding scanning order information for a video block in video coding
US8675080B2 (en) * 2010-12-30 2014-03-18 Stmicroelectronics, Inc. Motion estimation in imaging systems
US20140192862A1 (en) * 2013-01-07 2014-07-10 Research In Motion Limited Methods and systems for prediction filtering in video coding
FR3022724A1 (fr) * 2014-06-19 2015-12-25 Orange Procede de codage et de decodage d'images, dispositif de codage et de decodage d'images et programmes d'ordinateur correspondants
EP3029936A1 (en) * 2014-12-05 2016-06-08 Axis AB Method and device for real-time encoding
US10838682B2 (en) * 2016-07-28 2020-11-17 Intelligent Waves Llc System, method and computer program product for generating remote views in a virtual mobile device platform using efficient processing during display encoding

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030058347A1 (en) * 2001-09-26 2003-03-27 Chulhee Lee Methods and systems for efficient video compression by recording various state signals of video cameras
CN101919251A (zh) * 2007-11-28 2010-12-15 法国电信 一种运动编码和解码
CN102017627A (zh) * 2008-04-25 2011-04-13 汤姆森许可贸易公司 使用基于深度信息的视差估计的多视点视频编码
US20100079605A1 (en) * 2008-09-29 2010-04-01 William Marsh Rice University Sensor-Assisted Motion Estimation for Efficient Video Encoding
CN103650509A (zh) * 2011-07-01 2014-03-19 苹果公司 基于照相机和背景运动的参考帧缓冲区的自适应配置
US20140078394A1 (en) * 2012-09-17 2014-03-20 General Instrument Corporation Selective use of chroma interpolation filters in luma interpolation process

Also Published As

Publication number Publication date
CN106464903B (zh) 2020-06-09
US10917657B2 (en) 2021-02-09
EP3158749B1 (fr) 2024-03-06
FR3022724A1 (fr) 2015-12-25
EP3158749A1 (fr) 2017-04-26
US20170134744A1 (en) 2017-05-11
WO2015193599A1 (fr) 2015-12-23

Similar Documents

Publication Publication Date Title
CN105900425B (zh) 表示经编码的比特流中的运动向量
CN103329523B (zh) 使用经映射变换和扫描模式的视频译码
CN104704827B (zh) 用于下一代视频的内容自适应变换译码
CN101911701B (zh) 用于图像配准和视频编码的共享的块比较架构
TWI529664B (zh) 畫像編碼裝置及畫像解碼裝置
CN103458241B (zh) 用于多层视频编码的速率控制方法和设备
CN102845060B (zh) 用于视频的数据压缩
CN104041048B (zh) 利用跳过模式进行视频编码和解码的方法和设备
CN103348677B (zh) 像素层级自适应帧内平滑化
CN104918056B (zh) 对帧内预测模式进行解码的方法
CN104639945B (zh) 图像处理装置和图像处理方法
CN105791861B (zh) 定向内插和数据后处理
CN109792517A (zh) 用于编码和解码大视场视频的方法和装置
JP7485839B2 (ja) ビデオピクチャ予測方法及び装置
CN109691110A (zh) 利用空间布局信息的同步多视点影像的编码/解码方法以及其装置
CN109074161A (zh) 用于360度视频的混合图形及像素域架构
CN104885470A (zh) 用于下一代视频的预测和编码的内容自适应划分
CN105915900A (zh) 图像处理设备和方法
CN105850133A (zh) 用于下一代视频译码的内容自适应主运动补偿预测
CN1327687A (zh) 对视频信号进行编码
CN110121065A (zh) 空间排序视频编码应用中的多向图像处理
CN112465698A (zh) 一种图像处理方法和装置
CN110268716A (zh) 由球面投影处理等量矩形对象数据以补偿畸变
CN107646194A (zh) 用于视频运动补偿的装置和方法
CN109845264A (zh) 用于编码和解码大视场视频的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant