CN105900419A - 屏幕内容数据的视频编码 - Google Patents

屏幕内容数据的视频编码 Download PDF

Info

Publication number
CN105900419A
CN105900419A CN201480072658.1A CN201480072658A CN105900419A CN 105900419 A CN105900419 A CN 105900419A CN 201480072658 A CN201480072658 A CN 201480072658A CN 105900419 A CN105900419 A CN 105900419A
Authority
CN
China
Prior art keywords
frame
pattern
image data
moving image
motion vector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480072658.1A
Other languages
English (en)
Other versions
CN105900419B (zh
Inventor
S·西尔金
S·萨布林
Y·周
C-L·林
李明杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN105900419A publication Critical patent/CN105900419A/zh
Application granted granted Critical
Publication of CN105900419B publication Critical patent/CN105900419B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/523—Motion estimation or motion compensation with sub-pixel accuracy
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

编码器的输入端接收包括待编码的帧序列的移动图像数据，每个帧包括二个维度上的多个块，每个块包括那些二个维度上的多个像素。运动预测模块通过对于多个所述帧中的每一个的至少一部分相对于该序列的另一帧的相应的参考部分对每个块进行编码来执行编码，其中相应的参考部分从所述块偏移了相应的运动向量。根据本公开，该多个帧的移动图像数据包括屏幕捕获流，并且运动预测模块被配置为将屏幕捕获流的运动向量中的每个限制为在所述维度的至少一个维度上为整数个像素。

Description

屏幕内容数据的视频编码
背景技术
在现代通信系统中，视频信号可以经由诸如有线网和/或无线网的介质从一个终端发送到另一终端，有线网和/或无线网经常是基于分组的网络，诸如因特网。例如，视频可以是从执行于诸如台式计算机或膝上型计算机、平板设备或智能手机的用户终端上的VoIP(互联网协议语音)客户端应用进行的VoIP通话的部分。
典型地，视频的帧通过发送终端处的编码器进行编码，以便于压缩它们以在网络上传输。用于给定帧的编码可包括帧内编码，凭借帧内编码在同一帧中块相对于其它块进行编码。在该情况下，根据该块与相邻块之间的差(残差)来对目标块进行编码。可替代地，用于一些帧的编码可以包括帧间编码，凭借帧间编码目标帧中的块相对于前一帧中的对应部分进行编码，典型地基于运动预测。在该情况下，根据用于标识块与要从其进行预测的对应部分之间的偏移的运动向量、以及块与要从其进行预测的对应部分之间的差(残差)来对目标块进行编码。接收机处的对应的解码器基于适当类型的预测对接收到的视频信号的帧进行解码，从而将它们解压以便输出到解码器侧的屏幕。
当对视频进行编码(压缩)时，运动向量用于生成当前帧的帧间预测。编码器首先搜索在先前编码帧中最佳匹配当前块(目标块)的类似块(参考块)，并且将所述参考块与目标块之间的位移作为编码的位流的部分以信号发送到解码器。该位移典型地表示为水平x坐标和垂直y坐标，并且被称为运动向量。
参考“块”事实上不限于位于参考帧中的实际的块位置，即，不限制于与目标块相同的网格，而是其是相对于目标块的位置偏移了运动向量的所述参考帧的对应尺寸的部分。根据本标准，运动向量以分数像素分辨率来表示。例如，在H.264标准中，每个运动向量以1/4像素分辨率来表示。因此，通过示例的方式，如果当前帧中的16x16的块要从先前帧中的位于目标块的位置向左1个像素的另一16x16的块来预测，则运动向量是(4，0)。或者，如果目标块要从仅为目标块向左3/4个像素的参考块来预测，则运动向量是(3，0)。分数像素位置处的参考块实际上本身不存在，而是通过参考帧的像素之间的插值而生成。亚像素运动向量能够实现压缩效率方面的显著的性能。
发明内容
然而，与以整数像素分辨率来估计运动的情况相比，使用分数像素分辨率招致更多的位用于对运动向量进行编码，并且还招致更多的处理资源用于搜索最佳匹配参考。对于视频编码，这是值得的，例如，因为更佳匹配的残差的减小的大小通常比对运动向量编码所招致的位重要，或者所实现的质量可被认为证明了所述资源的适当性。然而，不是待编码的全部移动图像都是视频(即，从照相机捕获的)。下面基于本文认识到的观察，当对从屏幕而不是从照相机捕获的移动图像进行编码(压缩)时，编码的位流中的运动向量的大部分通常将指向整数像素，而它们中很少趋于出现在分数像素位置。因此，虽然编码器正常地以1/4像素的单位表示位流中的运动向量，对于屏幕共享或记录应用，通过仅以1个像素的单位编码运动向量，带宽实际上得到节约，而没有不当的质量损失。可替代地，即使运动向量仍以分数像素的标度表示在编码位流中，也可以通过将运动向量搜索限制为整数像素偏移来节约处理资源。
因此，根据本文公开的一个方面，提供一种编码器，包括用于接收移动图像数据的输入端，以及用于对移动图像数据进行编码的运动预测模块。移动图像数据包括待编码帧的序列，并且每个帧被划分成二个维度上的多个块，每个块包括所述二个维度上的多个像素。块可以例如是称为如H.264或H.265的H.26x标准中的块或宏块的划分。运动预测模块通过相对于序列的另一帧的相应的参考部分(参考“块”)将每个块(目标块)编码来实施帧间编码，相应的参考从目标块偏移了相应的运动向量。此外，根据本公开，所述多个帧的移动图像数据包括屏幕捕获流，并且运动预测模块被配置为将屏幕捕获流的运动向量中的每个限制为在所述维度中的至少一个维度上的整数个像素。
在实施例中，考虑到分数运动向量仍能够用于正常的视频(由照相机捕获的)或者可能其它移动图像(例如，动画)，运动向量可通过灵活的方式以信号发出：当视频源来自捕获的屏幕时，运动向量可以1个像素的单位以信号方式发出，但是对于正常的视频和/或其它移动图像，仍可使用分数像素单位。
因此，在实施例中，编码器还可以包括控制器，该控制器能操作以将运动预测模块在两种模式之间切换：第一模式和第二模式。在第一模式下，运动向量不限制为整数数量的像素(在任一维度中)，但是在第二模式中，运动向量限制为在至少一个维度(并且在实施例中在两个维度)上的整数数量的像素。该控制器可被配置为取决于判定出当前正被编码的移动图像数据包括屏幕捕获流而将运动预测模块切换到第二模式。
例如，移动图像数据可包括屏幕捕获流和视频流(例如，这些可以是通过诸如因特网的基于分组的网络进行的通话的实况流，或者可以是想要用来稍后回放的存储流)。可能的是，移动图像数据中的一些帧是屏幕捕获流的帧，而移动图像数据的帧在其它时刻是视频帧，或者可能的是每个帧内的不同区域分别包括屏幕捕获流和视频流(例如，不同的片)。为适应这些情况，控制器可被配置为判定当前正被编码的移动图像数据是屏幕捕获流还是视频流，并且对于屏幕捕获流将运动预测模块设定为第二模式，而对于视频流将运动预测模块设定为第一模式。可替代地，作为另一示例，如果屏幕捕获流和视频流包含在相同的帧中的一些的不同区域中，则控制器可被配置为如果帧完全包含任何屏幕捕获数据则选择第二模式，否则仅在帧根本不包含任何屏幕捕获数据的情况下选择第一模式；或者相反地，该控制器可被配置为如果帧仅包含屏幕捕获数据而没有视频则切换到第二模式，否则如果帧完全包含任何视频则选择第一模式。
提供该发明内容以简化形式引入下文在具体实施方式中进一步描述的构思的选择。该发明内容不意在标识出所要求保护的主题的关键特征或主要特征，也不意在用于限制所要求保护的主题的范围。所要求保护的主题也不限于解决了本文提到的任意或全部缺点的实现方式。
附图说明
为了辅助理解本公开以及显示出如何将实施例投入实用，现在通过示例的方式参考附图，在附图中：
图1是视频流的示意表示，
图2是通信系统的示意框图，
图3是编码的视频流的示意表示，
图4是编码器的示意框图，
图5是解码器的示意框图，
图6是帧间编码方案的示意表示，以及
图7是另一帧间编码方案的示意表示。
具体实施方式
图1给出了从照相机捕获的输入视频信号的示意图示，并且输入视频信号被划分成空间分区以便由视频编码器编码从而生成编码的位流。信号包括按时间划分成多个帧(F)的移动视频图像，每帧表示处于相应的不同时刻(…t-1,t,t+1…)的图像。在每帧内，帧在空间上被划分成多个分区，每个分区代表多个像素。这些分区可称为块。在一些方案中，帧被划分且细分成不同级别的块。例如，可以将每个帧划分成宏块(MB)，并且可将每个宏块划分成块(b)，例如，每个块代表帧内的8x8像素的区域，并且每个宏块代表2x2块(16x16像素)的区域。在一些方案中，还能够将每个帧划分成独立可解码的片(S)，每个片包括多个宏块。片S通常可呈现为任意形状，例如，每个片是一行或多行的宏块，或者是宏块的不规则或任意定义的选择(例如，对应于图像中的兴趣区域，ROI)。
关于术语“像素”，在下面，该术语用来指代图片阵列的采样网格中的样本和采样位置(有时在文献中，术语“像素”而是用来指代对应于一个单空间位置的全部的三个颜色分量，并且有时用来指代单个阵列中的单个位置或单个整数样本值)。采样网格的分辨率经常在亮度采样阵列和色度采样阵列之间不同。在实施例中，下面可应用于4:4:4表示，但是还可以潜在地应用于例如4:2:2和4:2:0。
还应注意，虽然任何给定的标准可以给出术语块或宏块的特定含义，但是术语块也经常在本领域更一般地用于指代在其上执行比如帧内预测或帧间预测的编码和解码操作的以一级别对帧的划分，并且除非做出具体陈述，否则在本文中使用该更一般的含义。例如，本文提到的块实际上可以是在H.26x标准中称为的块或宏块的分区，并且各种编码和解码级可以按照适合于编码模式、应用和/或所讨论的标准的任何这样的分区的级别来操作。
所捕获的输入信号中的块通常在空间域中来表示，其中将每个颜色空间通道表示为块内的空间位置的函数。例如，在YUV颜色空间中，亮度(Y)和色度(U,V)通道中的每一个可表示为笛卡尔坐标x和y的函数，Y(x,y)、U(x,y)和V(x,y)；或者在RGB颜色空间中，红色(R)、绿色(G)和蓝色(B)通道中的每一个可表示为笛卡尔坐标的函数R(x,y)、G(x,y)、B(x,y)。在该表示中，每个块或部分由不同空间坐标处例如x坐标和y坐标处的一组像素值来表示，以使得颜色空间的每个通道按照像素位置的离散集合中的每一个像素位置处该通道的相应的量值来表示。
然而，在量化之前，可以将块变换成变换域表示，作为编码过程的一部分，典型地是空间频域表示(有时仅称为频域)。在频域中，块中的每个颜色空间通道表示为两个维度中的每个维度中的空间频率(1/长度的尺度)的函数。例如，这可以分别通过水平方向和垂直方向上的波数kx和ky来指示，以使得通道可被表示为YUV空间中的Y(kx,ky)、U(kx,ky)和V(kx,ky)；或者RGB空间中的R(kx,ky)、G(kx,ky)、B(kx,ky)。因此，不是按照像素位置的离散集合中的每一个处的量值来表示颜色空间通道，而是变换按照与构成块的空间频率分量的离散集合中的每一个相关联的系数来表示每个颜色空间通道，该系数即为与在块上的空间变化的不同频率相对应的空间频率项的离散集合中的每一个的振幅。这些变换的可能性包括傅立叶变换、离散余弦变换(DCT)、卡洛变换(KLT)或其它变换。
图2的框图给出了可采用本公开的技术的通信系统的示例。通信系统包括第一发送终端12以及第二接收终端22。例如，每个终端12、22可包括移动电话或智能手机、平板设备、膝上型计算机、台式计算机或其它如电视机、机顶盒、立体声系统等家用电器中的一种。第一终端12和第二终端22各自与通信网络32可操作地耦合，并且从而将第一发送终端12布置成发送信号，该信号将由第二接收终端22接收。当然，发送终端12还能够从接收终端22接收信号，且反之亦然，但是为了论述的目的，在本文中从第一终端12的角度描述发送，从第二终端22的角度描述接收。通信网络32可以包括例如诸如广域互联网和/或局域网的基于分组的网络，和/或移动蜂窝网络。
第一终端12包括计算机可读存储介质14，诸如闪速存储器或其它电子存储器、磁存储设备、和/或光存储设备。第一终端12还包括具有一个或多个执行单元的处理器或者CPU形式的处理装置16、诸如具有发射机18的有线或无线调制解调器的收发机、视频照相机15和屏幕17(即，显示器或监控器)。照相机15和屏幕17中的每一个可以或者可以不容纳在与终端12的其余部分相同的外壳内(并且甚至发射机18可以在内部或外部，例如在后者情况下包括软件保护器或无线路由器)。存储介质14、视频照相机15、屏幕17和发射机18各自与处理装置16可操作地耦合，并且发射机18经由有线或无线链路与网络32可操作地耦合。类似地，第二终端22包括计算机可读存储介质24，诸如电子、磁和/或光存储设备；以及采用具有一个或多个执行单元的CPU形式的处理装置26。第二终端包括收发机，诸如具有至少接收机28的有线或无线调制解调器，以及屏幕25，其可以或者可以不容纳在与终端22的其余部分相同的外壳内。第二终端的存储介质24、屏幕25和接收机28各自与相应的处理装置26可操作地耦合，并且接收机28经由有线或无线链路与网络32可操作地耦合。
在第一终端12上的存储设备14存储至少用于对移动图像数据进行编码的编码器，该编码器被布置为在相应的处理装置16上执行。当执行时，编码器接收来自视频照相机15的“原始”(未编码)输入视频流，其可操作以对视频流进行编码从而将其压缩成较低位率流，并且输出编码后的视频流以便经由发射机18和通信网络32发送到第二终端22的接收机28。第二终端22上的存储设备24存储至少视频解码器，该视频解码器被布置成在其自身的处理装置26上执行。当执行时，解码器接收来自接收机28的编码后的视频流且将其解码以便输出到屏幕25。
编码器和解码器还能够操作以便对其它类型的移动图像数据进行编码和解码，包括屏幕共享流。屏幕共享流是从编码器侧的屏幕17捕获的图像数据，使得一个或多个其它的远程用户能够看到在编码器侧的用户在屏幕上正在看的内容，或者因此该屏幕的用户能够记录屏幕上正发生的内容，以便稍后回放给一个或多个其它的用户。在发送终端12与接收终端22之间进行的通话的情况下，在发送终端12处的屏幕17的移动内容将被编码且实况(实时)发送以被解码和显示在接收终端22的屏幕25上。例如，编码器侧的用户希望与另一用户共享他或她正在他或她的操作系统或者某应用的桌面上如何工作。
注意，在谈到屏幕共享流从屏幕捕获等等的情况下，这不限于用于这样做的任何特定的机制。例如，数据可从屏幕17的屏幕缓冲器读取，或者可通过接收从操作系统或应用输出以供显示在屏幕17上的相同的图形数据的实例而捕获数据。
图3给出了可从运行于发送终端12上的编码器发送到运行于接收终端22上的解码器的编码的位流33的示意表示。位流33包括针对每个帧或片的编码的图像数据34，该编码的图像数据包括针对该帧或片中的块的编码的样本以及任何关联的运动向量。在一个应用中，位流可以作为诸如VoIP通话的实况(实时)通话的一部分而在发送终端12与接收终端22之间发送(VoIP通话还可以包括视频与屏幕共享)。位流33还包括与每个帧或片相关联的报头信息36。在实施例中，报头36被布置成包括采用至少一个标记37的形式的至少一个附加元素，指示运动向量的分辨率，这将在下文进行更详细论述。
图4是示出了诸如可以实现在发送终端12上的编码器的框图。编码器包括主编码模块40，包括：离散余弦变换(DCT)模块51、量化器53、逆变换模块61、逆量化器63、帧内预测模块41、帧间预测模块43、开关47、减级(-)49以及无损解码级65。编码器进一步包括与帧间预测模块43耦合的控制模块50。这些模块或级中的每一个可被实现为存储在发送终端的存储介质14上的代码的部分且被布置为在其处理装置16上执行，但是不排除这些中的一些或全部完全地或者部分地以专用硬件电路来实现的可能性。
减级49被布置为接收包括在多个帧(F)上的多个块的输入信号的实例。输入流从照相机15接收或者从屏幕17上正显示的内容捕获。帧内或帧间预测41、43基于根据另一已经编码的块或者对应大小的参考部分的预测来生成待编码的当前(目标)块的预测版本。将预测版本供给到减级49的输入，其中在空间域中将其从输入信号(即，实际信号)中减去以产生代表块的预测版本与实际输入信号中的对应块之差的残差信号。
在帧内预测模式中，帧内预测41模块基于根据同一帧中的另一已经编码的块(典型地是相邻块)的预测而生成待编码的当前(目标)块的预测版本。当执行帧内编码时，思想是仅对帧内的图像数据的一部分如何不同于该同一帧内的另一部分的度量进行编码和发送。然后能够在解码器处预测(给定某绝对数据为起始)该部分，并且因此仅需要发送预测数据与实际数据之差，而不是实际数据本身。差信号典型地量值较小，因此占用较少的位来编码(由于无损压缩级65的操作—见下文)。
在帧间预测模式中，帧间预测模块43基于根据与当前块不同的帧中的另一已经编码的参考部分的预测而生成待编码的当前(目标)块的预测版本，参考部分具有块的大小，但是在空间域中相对于目标块偏移了一运动向量，这是由帧间预测模块43预测的(帧间预测还可以称为运动预测或运动估计)。通过在空间域中在除了目标帧以外的一个或多个帧中搜索偏移了多个相应的可能运动向量的多个候选参考部分，以及根据适当的度量标准选择使得相对于目标块的残差最小化的候选，帧间预测模块43选择对于给定的目标块的最佳参考。帧间预测模块43由开关47切换到反馈路径中，取代帧内预测级41，并且因此在一个帧的块和另一帧的块之间产生了反馈环，从而相对于另一帧的那些块进行帧间编码。即，残差现在代表了帧间预测块与实际输入块之差。这典型地采用比帧内编码甚至更少的位进行编码。
残差信号的样本(包括在从输入信号中减去预测后的残差块)从减级49输出，通过变换(DCT)模块51(或其他适当的变换)，在DCT模块51中将它们的残差值转换到频域，然后到量化器53，在量化器53中变换后的值被转换成基本上离散的量化指标。由变换模块51和量化模块53生成的残差的量化后的变换后的指标，以及在预测模块41、43中使用的预测的指示和通过帧间预测模块43生成的任何运动向量全部被输出以便包含在编码的视频流33中(参见图3的要素34)；经由另一无损编码级65，诸如Golomb编码器或熵编码器，其中运动向量以及变换后的量化后的指标进一步利用本领域已知的无损编码技术来压缩。
量化后的变换后的信号的实例也通过逆量化器63和逆变换模块61被反馈以生成块的预测版本(将在解码器处看到)，以供所选择的预测模块41或43使用来预测后续的待编码块，按照与基于先前编码的块的逆量化后和逆变换后的版本来预测正被编码的当前目标块相同的方式。开关47被布置成将逆量化器63的输出传递到帧内预测模块41或帧间预测模块43的输入，视用于当前所编码的帧或块的编码而定。
图5是示出了诸如可以实现在接收终端22上的解码器的框图。解码器包括无损编码的逆95、逆量化级83、逆DCT变换级81、开关70和帧内预测级71以及运动补偿级73。这些模块或级中的每一个可实现为存储于接收终端的存储介质24上的代码的部分并且布置成用于在其处理装置26上执行，但是不排除这些中的一些或全部完全地或者部分地用专门硬件电路实现的可能性。
逆量化器81被布置成经由接收机28和逆无损编码级95从编码器接收编码后的信号33。逆量化器81将编码的信号中的量化指标转换成残差信号(包括残差块)的去量化样本并且将去量化样本传递到逆DCT模块81，在逆DCT模块81中将它们从频域变换回空间域。开关70然后将去量化的、空间域残差样本传递到帧内或帧间预测模块71或73，视用于所解码的当前帧或块的预测模式而定，并且帧内或帧间预测模块71、73分别使用帧内预测或帧间预测来对块进行解码。使用哪种模式是利用随着编码的位流33中的编码的样本34一起接收到的预测和/或任何运动向量的指示来确定的。从该级继续，解码后的块被输出以便通过接收终端22处的屏幕25来播出。
如所提到的，根据常规的标准的编解码器以四分之一像素的分辨率执行运动预测，表示运动向量还以四分之一像素步阶来表达。四分之一像素分辨率运动估计的示例显示在图6中。在该示例中，目标块的左上角的像素p是根据像素a、b、c和d之间的插值来预测的，并且目标块的其他像素也将根据一个帧中的目标块与另一帧中的参考部分(这些块在图6中以粗体虚线来显示)之间的偏移、基于参考帧中的相应像素组之间的类似插值来预测。然而，以该粒度级来执行运动估计具有如下所述的后果。
参考无损编码器65以及解码器95，无损编码是一种压缩形式，其不是通过抛弃信息(比如量子化)起作用，而是通过使用码字的不同长度来表示待由无损编码级65编码的数据中的不同的值，取决于那些值出现的可能性有多大，或者它们出现的频率有多大。例如，在遇到1之前码字中的前面出现的0的数量可以指示码字的长度，因此1是最短的码字，接着010和011是次短，接着00100……，等等。因此，最短的码字比使用均匀的码字长度的情况所要求的要短得多，但是最长的比使用均匀的码字长度的情况所要求的要长。但是，通过将最频繁的或者最可能的值分配给最短的码字并且仅仅将最不可能或者最不频繁出现的值分配给较长的码字，与使用均匀码字长度的情况相比，所得到的位流33平均上对于每个编码的值招致较少的位，并且因此实现了不丢弃任何进一步信息的压缩。
在无损编码级65之前的编码器40的大部分被设计成试图在传递通过无损编码级65之前使得尽可能多的值尽可能小。由于它们随后出现得更频繁，所以较小的值与较大的值相比，随后将招致编码的位流33中更低的位率。这是对照绝对样本对残差编码的原因。这也是变换51的理论依据，因为很多样本趋于变换成变换域中的零或小系数。
类似的考虑能够应用于对运动向量的编码。
例如，在H.264/MPEG-4Part 10和H.265/HEVC中，运动向量是利用指数Golomb编码来编码的。下面的表格显示出运动向量值和编码的位。
根据上表能够看出，值越大，使用的位越多。这意味着，运动向量的分辨率越高，招致越多的位。例如，因此，使用四分之一像素分辨率，1像素的偏移必须由值4来表示，招致编码的位流中的5个位。
在编码视频(从照相机捕获的)中，运动向量中的该分辨率的成本是值得的，因为更细化的分辨率可在搜索较低成本的残差参考中提供更多的机会。然而，在本文中观察到，对于从屏幕捕获的移动图像，大多数空间位移趋于为全像素位移，它们中的极少数趋向于位于分数像素位置，因此运动向量的大多数趋向于指向整数像素值，且极少数趋向于指向分数像素值。
在这一基础上，期望的是对于以1像素的分辨率对从屏幕捕获的图像数据的运动向量进行编码。考虑对于这样的内容来说无需在运动向量的分数部分上花费任何位的事实，这意味着在编码该内容时所招致的位率会降低。
例如，虽然编码器在正常情况下以1/4像素偏移为单位解释位流中的运动向量，但是编码器实际上经常能够通过丢弃该分辨率而是以整数像素偏移为单位对针对屏幕编码应用的运动向量进行编码来节约位率。虽然这将运动向量的精度降低了因数4，但是该精度通常对于屏幕共享或记录应用不太有价值，并且这还减少了对向量编码所需的位数。为了根据目标块向左1像素的参考块预测当前(目标)块，运动向量将为(1，0)，而不是(4，0)。使用上述的Golomb编码，这意味着编码运动向量所招致的位从(00111，1)变成(010，1)，并且因此在该情况下节约了两个位。
此外，在实施例中，降低分辨率的运动向量还可以通过将运动向量搜索限制为整数值来减小在编码器处执行的运动估计的复杂度，从而减少搜索所招致的处理资源。可替代地，执行正常搜索以及将得到的运动向量舍入为整数值将是可能的。
图7示出了约束到仅整数像素的分辨率的运动预测的示例，运动向量被约束到仅整像素步阶。与图6相比，像素p仅根据单一的整数像素a来预测，而没有插值。可替代地，可根据像素b、c、d或另一像素来预测，取决于一个帧中的目标块于另一帧中的参考部分之间的偏移(也是以粗体虚线显示)，但是由于约束，不能根据像素之间的插值来预测。注意：对于任何给定的块通过图6中的示例示例说明的四分之一像素预测可能恰好生成整数像素偏移而没有插值，这是在其给出最低的残差的情况下。然而，不会约束到这样做，并且在尺寸可变的图像上，其对于所有块发生这种情况是非常不可能的。
考虑分数运动向量值仍将对于照相机捕获的内容非常有用，在实施例中，编码器40被提供有与运动预测模块43耦合的控制器50，该控制器50被配置为以灵活的方式选择运动向量分辨率：当源数据来自捕获的屏幕17且不存在分数像素运动时，运动向量以仅整数像素为单位进行编码和发送；但是，对于照相机内容的视频，运动向量仍以分数像素精度进行编码和发送。
为了这样做，控制器50可被配置为测量用于指示所捕获的内容的类型是屏幕内容的事实的性能启发式规则。作为响应，控制器然后禁用针对屏幕内容编码的分数像素运动补偿。可替代地，控制器50可以从应用或操作系统接收关于它正在向编码器供应用于编码的何种类型的数据的指示，并且控制器50可在该基础上在模式之间进行选择。作为另一可选项，可以基于历史数据来做出选择。该选择可在每帧上做出，或者可对于帧内的不同区域单独地选择模式，例如，在每片上。
因此，在对帧或片编码之前，编码器能够基于诸如历史统计数据、其应用类型的知识、多通分析或某其他这类技术的因素来决定运动向量分辨率。如果编码器决定仅使用全像素运动估计，则分数像素搜索被跳过。如果标定的运动向量预测具有分数部分，则预测被舍入成整数值。
在进一步的实施例中，可以可选地将控制单独地应用于向量的垂直或水平分量。这可用于对水平地或垂直地标定的屏幕视频进行编码。
为了以整数像素为单位或步阶在减小分辨率的标度上表示运动向量，并且因此实现相对于常规编解码器的关联的位率节约，用于用信号发送运动向量的协议将不得不更新以便用于未来的编解码标准。在实施例中，这可以实现为对H.265(HEVC，高效视频编码)标准的更新。为了对捕获的屏幕内容进行编码，编码的数据34的格式将被给予针对每个运动向量的减小尺寸的运动向量场。对于在整数像素模式中进行编码的编码后的屏幕捕获流，相关数据34将因此在位流33中包括整数运动向量并且在实施例中在位流33中仅包括整数运动向量。
在实施例中，这将是可选的，标记37还包含在报头36中以指示分数像素(例如，1/4像素)或整数像素分辨率是否正用于相关的帧或片的编码(再参考图3)。如果水平和垂直分辨率能够单独地选择，则每个帧或片将需要两个标记37。
可替代地，在实施例中，不必更新现有标准的协议来实现整数像素运动向量。而是，运动向量可限制为整数偏移，但是这些整数运动向量仍在常规的分数(例如，1/4像素)标度上表示在编码后的位流33中。因此，在1/4像素分辨率情况下，一个整像素的偏移仍将以常规的方式由值4(例如，码字00111)来表示，但是由于在编码器处施加的约束，不具有为比如由值3(码字00100)表示的像素的3/4的可能性。在该情况下，整数运动向量的位率节约将不能实现，但是通过将运动向量搜索的复杂度限制为整数偏移仍然可以节约处理资源。
下面公开了基于对H.265标准的更新的示例性的实施例。该变型例使得运动向量在编码的位流33中以减小的、整数像素标度来表示，并且将每个片的两个标记37添加到压缩流的报头信息36中，以便于用信号发送它们的水平分量和垂直分量中的运动向量的分辨率。
该变型例无需改变句法或解析过程，但是通过将运动向量差解释为整数且将标定的MV预测器舍入为整数值来修改解码过程。发现该变型例将编码效率提高了多达7％，且对于测试的屏幕内容序列平均上提高了约2％，并且其还能够减小编码和解码过程的复杂度。
高级指示器被添加(到SPS，PPS和/或片报头级)以指示用于运动向量的解释的分辨率。
在解码过程中，如果运动向量被指示为处于全像素分辨率且标定的运动向量预测具有分数部分，则预测被舍入成整数值。运动向量差被简单地解释为整数偏移而不是1/4样本的偏移。其他所有的解码过程保持相同。解析过程(报头级以下)也不变。当运动向量以全样本精度编码且输入图像数据使用4:2:2或4:2:0采样时，能够以通常的方式得到色度运动向量，这将产生1/2样本的色度运动位移。可替代地，色度运动向量也可以舍入成整数值。
上述的标定是发生于HEVC(H.265)中的某事物。思想是，如果运动向量用于将某其他帧编码，则能够计算出在(i)当前图片与(ii)其参考图片之间的相对位置位移方面等同的运动向量将是什么。这基于由另一图片中的共定位部分中的运动向量所指示的位移的相对定位，以及基于(iii)该图片与(iv)其参考作为其参考图片的图片之间的相对位置位移。注意的是，编码数据的时间帧速率不总是恒定不变，而且在位流中对图片编码的顺序与它们被捕获和显示的顺序之间也存在差别，因此这些时间关系可被计算，然后用于标定运动向量，以使得其基本上表示相同方向上的相同速度的运动。这称为时间运动向量预测。
另一可能性可以是，每当仅使用整数运动时，禁用时间运动向量预测。在HEVC中已经存在使得编码器禁止该特征的使用的句法。这是一种避免需要解码器具有根据差值被编码为整数还是分数值而不同地操作的特殊过程的可能的方式。从时间运动向量预测获得的增益可以在这些使用情况下很小(或为零)，因此禁用它不必是不期望的。
关于句法变化：将在PPS扩展中包括新的两位指示器，其可以称为motion_vector_resolution_control_idc，以指示运动向量分辨率控制模式。定义了三种模式。当模式为0时，以1/4像素精度对运动向量进行编码，并且全部的解码过程保持不变。当模式为1时，片中参考PPS的全部的运动向量在全像素精度编码。并且当模式为2时，通过片报头中的标记逐片地控制运动向量分辨率。当motion_vector_resolution_control_idc不存在时，其值被推断为0。
当motion_vector_resolution_control_idc等于2时，在片报头中用信号发送称为slice_motion_vector_resolution_flag的附加标记。当标记为0时，该片的运动向量以1/4像素精度编码，而当标记为1时，运动向量以全像素精度编码。当标记不存在时，其值被推断为等于motion_vector_resolution_control_idc的值。
修改后的PPS句法说明如下：
修改后的片报头句法图示说明如下：
将意识到，上述实施例仅通过示例的方式进行了描述。
例如，虽然上文按照块进行了描述，这不一定限于任何特定标准中的称为块的分区。例如，本文提到的块可以是H.26x标准中的称为块或宏块的分区。
本公开的范围不限于任何特定的编解码或标准，并且通常本文所公开的技术能够实现于现有标准的上下文中或者现有标准的更新的上下文，无论是如H264还是H.265的H.26x标准还是任何其他标准，或者可以实现为定制的编解码器。此外，本公开的范围不特别地限制为视频样本的任何特定的表示，无论是按照RGB、YUV还是其他。范围既不限于任何特定的量化，也不限于DCT变换。例如，诸如卡洛变换(KLT)的替选变换可被使用，或者可以不使用任何变换。此外，公开不限于VoIP通信或者经由任何特定类型的网络的通信，但是可用于任何能够传送数据的网络或媒介。
在提到运动向量偏移被限制或者不限制为整数像素等的情况下，这可以指的是颜色空间通道的任何一个或两个中的运动估计，或者全部三个颜色通道中的运动估计。
此外，所要求保护的实施例不限于其中编码的视频和/或屏幕捕获流经由网络发送的应用，也不限于其中流是实况流的应用。例如，在另一应用中，流可以存储在诸如光盘、硬盘驱动器或其他磁存储设备、或“闪速”记忆棒或其他电子存储器的存储设备上。因此，注意的是，屏幕共享流不一定必然表示实况共享(但是这肯定是一个可选项)。可替代地或者另外地，该屏幕共享流可被存储以便之后与一个或多个其他用户共享，或者可不共享所捕获的图像数据，而是仅为此时正使用屏幕的用户进行记录。一般地，屏幕捕获可以是任何由通过任何适当的手段捕获(不一定是从屏幕缓冲器读，但是这是一个可选项)捕获的编码器侧屏幕内容构成的任何移动图像数据，以便与一个或多个其他用户共享(实况地或非实况地)，或者为了捕获用户的益处或者仅为了归档(可能最终结果是实际上永远不再观看)而简单地记录。
还要注意的是，编解码器不一定限于仅对屏幕捕获数据和视频进行编码。在实施例中，其还可以能够对其他类型的移动图像数据进行编码，例如动画。其他此类移动图像数据可在分数像素模式或整数像素模式下编码。在其他实施例中，专门的编解码器可被实现，其专用于仅对屏幕捕获流进行编码，并且具有固定的整数像素分辨率。
此外，注意的是，帧间编码不一定总是必须相对于前一帧编码，而是更一般地一些编解码器可允许相对于除了目标帧之外的不同的帧进行编码，或者是目标帧前一帧或之前的帧(假设适当的输出缓冲器)。
此外，注意的是，经常可以对运动向量本身进行差分编码。在该情况下，在提到运动向量被限制为整数个像素的情况或类似情况下，这意味着运动向量的差分编码的形式是如此限制的。
此外，解码器不一定必须实现于终端用户终端处，也不必输出移动图像数据而立刻在接收终端处进行消费。在可替代的实现方式中，接收终端可以是瞬时式终端，诸如运行解码器软件的服务器，用于将移动图像数据以解码或代码变换形式输出到另一终端，或者存储解码后的数据以便稍后消费。类似地，编码器不一定实现在终端用户终端处，也不一定对源自发送终端的移动图像数据进行编码。在其他实施例中，发送终端可以例如是瞬时式终端，诸如运行编码器软件的服务器，用于从另一终端接收未编码或替选方式编码的形式的移动图像数据，以及对该数据进行编码或代码变换以便存储在服务器处或者转送到接收终端。
一般地，本文所述的任何功能可以利用软件、固件、硬件(例如，固定逻辑电路)、或者这些实现方式的组合来实现。本文所使用的术语“模块”、“功能”、“组件”和“逻辑”一般代表了软件、固件、硬件或它们的组合。在软件实现的情况下，模块、功能或逻辑表示当在处理器(例如，一个或多个CPU)上执行时实施规定任务的程序代码。程序代码能够存储在一个或多个计算机可读存储设备中。下面描述的技术的特征是平台独立的，意味着该技术可实现在具有各种处理器的各种商业计算平台上。
例如，终端可以包括使得用户终端的硬件执行操作的实体(例如软件)，例如处理器功能块等等。例如，终端可以包括计算机可读介质，该计算机可读介质可被配置为保持使得用户终端以及更特别地使得用户终端的操作系统和关联硬件执行操作的指令。因此，指令的功能是配置操作系统和关联的硬件来执行操作并且以这种方式实现了操作系统和关联的硬件的变换而实施功能。该指令可通过计算机可读介质经由各种不同的配置提供给终端。
计算机可读介质的一个这样的配置是信号承载介质，并且因此被配置为将指令(例如，作为载波)发送到计算设备，诸如经由网络。计算机可读介质还可配置为计算机可读存储介质，并且因此不是信号承载介质。计算机可读存储介质的示例包括随机存取存储器(RAM)、只读存储器(ROM)、光盘、闪速存储器、硬盘存储器以及可使用磁、光和其他技术来存储指令和其他数据的其他存储器设备。
虽然已经通过专用于结构特征和/或方法行为的语言描述了主题，但是应当理解，在随附的权利要求中限定的主题不一定限于上述的特定的特征或行为。而是，上述的特定特征和行为被公开作为实现权利要求的示例形式。

Claims (15)

1.一种编码器，包括：
用于接收包括待编码的帧的序列的移动图像数据的输入端，每个帧包括二个维度上的多个块，其中，每个块包括所述二个维度上的多个像素；以及
运动预测模块，其用于对所述移动图像数据进行编码，这通过对于多个所述帧中的每一个的至少一部分相对于所述序列的另一帧的相应的参考部分将每个块编码，其中，所述相应的参考部分从所述块偏移了相应的运动向量；
其中，所述多个帧中的所述移动图像数据包括屏幕捕获流，并且所述运动预测模块被配置为将所述屏幕捕获流的所述运动向量中的每个限制为在所述维度的至少一个维度上为整数个像素。
2.如权利要求1所述的编码器，其中，所述编码器包括控制器，所述控制器能够操作以将所述运动预测模块在第一模式与第二模式之间切换，在所述第一模式中所述运动向量不被限制为整数个像素，在所述第二模式中，所述运动向量被限制为在所述维度的至少一个维度上为整数个像素，所述控制器被配置为根据判定出当前正被编码的所述移动图像数据包括屏幕捕获流而将所述运动预测模块切换到所述第二模式。
3.如权利要求2所述的编码器，其中，所述移动图像数据包括所述屏幕捕获流和视频流；以及
所述控制器被配置为判定当前正被编码的所述移动图像数据是所述屏幕捕获流还是所述视频流，以及如果是所述屏幕捕获流则将所述运动预测模块设定为所述第二模式，而如果是所述视频流则将所述运动预测模块设定为所述第一模式。
4.如权利要求2或3所述的编码器，其中，所述多个帧中的每一个帧被划分成多个区域，每个区域包括多个所述块；并且所述控制器被配置为针对所述区域中的每个单独的区域在所述第一模式与所述第二模式之间进行选择，如果所述区域包括屏幕捕获数据则切换到所述第二模式，而如果所述区域包括另一类型的移动图像数据则切换到所述第一模式。
5.如权利要求2、3或4所述的编码器，其中，在所述第二模式中，所述运动向量被限制为在所述维度的每个维度上为整数个像素。
6.如权利要求2、3或4所述的编码器，其中，所述控制器被配置为选择是否将所述第二模式单独地应用于所述维度中的每个维度上。
7.如任一前述权利要求所述的编码器，进一步包括无损编码模块，所述无损编码模块被配置为在所述运动预测模块进行编码之后根据无损编码技术来对所述移动图像数据进行进一步编码。
8.如任一前述权利要求所述的编码器，其中，所述块是H.26x视频编码标准中的块或宏块。
9.如从属于权利要求4的任意权利要求中的权利要求4所述的编码器，其中，所述区域是H.26x视频编码标准中的片，并且所述控制器被配置为逐片地在所述第一模式与所述第二模式之间进行选择。
10.一种用于对移动图像数据进行编码的计算机程序产品，所述计算机程序产品被实施在计算机可读介质上且被配置以使得当执行时实施如下操作：
接收包括待编码的帧的序列的移动图像数据，每个帧包括二个维度上的多个块，其中，每个块包括所述二个维度上的多个像素；以及
对于多个所述帧中的每一个的至少一部分，相对于所述序列的另一帧的相应的参考部分将每个块编码，其中，所述相应的参考部分从所述块偏移了相应的运动向量；
其中，所述多个帧中的所述移动图像数据包括屏幕捕获流，并且所述计算机程序产品被配置为将所述屏幕捕获流的所述运动向量中的每个限制为在所述维度的至少一个维度上为整数个像素。
11.如权利要求10所述的计算机程序产品，能够操作以将所述运动预测模块在第一模式与第二模式之间切换，在所述第一模式中所述运动向量不被限制为整数个像素，在所述第二模式中，所述运动向量被限制为在所述维度的至少一个维度上为整数个像素，所述计算机程序产品被配置为根据判定出当前正被编码的所述移动图像数据包括屏幕捕获流而将所述运动预测模块切换到所述第二模式。
12.如权利要求11所述的计算机程序产品，其中，所述移动图像数据包括所述屏幕捕获流和视频流；以及
所述计算机程序产品被配置为判定当前正被编码的所述移动图像数据是所述屏幕捕获流还是所述视频流，并且如果是所述屏幕捕获流则将所述运动预测模块设定为所述第二模式，而如果是所述视频流则将所述运动预测模块设定为所述第一模式。
13.如权利要求11或12所述的计算机程序产品，其中，所述多个帧中的每一个帧被划分成多个区域，每个区域包括多个所述块；并且所述计算机程序产品被配置为针对所述区域中的每个单独的区域在所述第一模式与所述第二模式之间进行选择，如果所述区域包括屏幕捕获数据则切换到所述第二模式，而如果所述区域包括另一类型的移动图像数据则切换到所述第一模式。
14.如权利要求11、12或13所述的计算机程序产品，其中，在所述第二模式中，所述运动向量被限制为在所述维度的每个维度上为整数个像素。
15.如权利要求11、12或13所述的计算机程序产品，其中，所述计算机程序产品被配置为选择是否将所述第二模式单独地应用于所述维度中的每个维度上。
CN201480072658.1A 2014-01-08 2014-12-19 屏幕内容数据的视频编码 Active CN105900419B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201461925090P 2014-01-08 2014-01-08
US61/925,090 2014-01-08
US14/530,616 2014-10-31
US14/530,616 US9942560B2 (en) 2014-01-08 2014-10-31 Encoding screen capture data
PCT/US2014/071331 WO2015105661A1 (en) 2014-01-08 2014-12-19 Video encoding of screen content data

Publications (2)

Publication Number Publication Date
CN105900419A true CN105900419A (zh) 2016-08-24
CN105900419B CN105900419B (zh) 2019-04-16

Family

ID=53496197

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480072658.1A Active CN105900419B (zh) 2014-01-08 2014-12-19 屏幕内容数据的视频编码

Country Status (11)

Country Link
US (1) US9942560B2 (zh)
EP (1) EP3075153B1 (zh)
JP (1) JP6576351B2 (zh)
KR (1) KR102271780B1 (zh)
CN (1) CN105900419B (zh)
AU (1) AU2014376189B2 (zh)
BR (1) BR112016015243B1 (zh)
CA (1) CA2935562C (zh)
MX (1) MX360925B (zh)
RU (1) RU2679349C1 (zh)
WO (1) WO2015105661A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108347602A (zh) * 2017-01-22 2018-07-31 上海澜至半导体有限公司 用于无损压缩视频数据的方法和装置
CN110166770A (zh) * 2018-07-18 2019-08-23 腾讯科技（深圳）有限公司 视频编码方法、装置、计算机设备和存储介质
CN111886870A (zh) * 2018-06-28 2020-11-03 华为技术有限公司 使用整数像素分辨率的运动矢量修正搜索
CN113728633A (zh) * 2019-04-01 2021-11-30 北京字节跳动网络技术有限公司 对基于历史的运动矢量预测使用插值滤波器
US11503288B2 (en) 2019-08-20 2022-11-15 Beijing Bytedance Network Technology Co., Ltd. Selective use of alternative interpolation filters in video processing

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9774881B2 (en) 2014-01-08 2017-09-26 Microsoft Technology Licensing, Llc Representing motion vectors in an encoded bitstream
US9749642B2 (en) 2014-01-08 2017-08-29 Microsoft Technology Licensing, Llc Selection of motion vector precision
EP3457694A4 (en) * 2016-05-24 2019-05-22 Huawei Technologies Co., Ltd. IMAGE FORECASTING METHOD AND ASSOCIATED DEVICE
KR102543752B1 (ko) 2016-12-22 2023-06-14 주식회사 케이티 비디오 신호 처리 방법 및 장치
KR102559063B1 (ko) 2017-02-24 2023-07-24 주식회사 케이티 비디오 신호 처리 방법 및 장치
US10674159B2 (en) * 2017-07-28 2020-06-02 Microsoft Technology Licensing, Llc Effective intra encoding for screen data
CN109756739B (zh) * 2017-11-07 2022-09-02 华为技术有限公司 图像预测方法和装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7224731B2 (en) * 2002-06-28 2007-05-29 Microsoft Corporation Motion estimation/compensation for screen capture video
US20110194784A1 (en) * 2008-10-14 2011-08-11 France Telecom Encoding and decoding with elimination of one or more predetermined predictors
US20110243234A1 (en) * 2008-10-02 2011-10-06 Sony Corporation Image processing apparatus and method
US20110255589A1 (en) * 2009-08-03 2011-10-20 Droplet Technology, Inc. Methods of compressing data and methods of assessing the same
WO2013002716A3 (en) * 2011-06-30 2013-04-04 Telefonaktiebolaget L M Ericsson (Publ) A method a decoder and encoder for processing a motion vector
US8498493B1 (en) * 2009-06-02 2013-07-30 Imagination Technologies Limited Directional cross hair search system and method for determining a preferred motion vector

Family Cites Families (140)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS60158786A (ja) 1984-01-30 1985-08-20 Kokusai Denshin Denwa Co Ltd <Kdd> 画像動き量検出方式
US4661849A (en) 1985-06-03 1987-04-28 Pictel Corporation Method and apparatus for providing motion estimation signals for communicating image sequences
US4661853A (en) 1985-11-01 1987-04-28 Rca Corporation Interfield image motion detector for video signals
EP0294958B1 (en) 1987-06-09 1995-08-23 Sony Corporation Motion compensated interpolation of digital television images
EP0294962B1 (en) 1987-06-09 1995-07-19 Sony Corporation Motion vector estimation in television images
DE69031107T2 (de) 1989-10-14 1997-11-13 Sony Corp Anordnung und Verfahren zum Übertragen eines Videosignals
JP2712645B2 (ja) 1989-10-14 1998-02-16 ソニー株式会社 動きベクトル伝送方法及びその装置並びに動きベクトル復号化方法及びその装置
US5103306A (en) 1990-03-28 1992-04-07 Transitions Research Corporation Digital image compression employing a resolution gradient
KR950011200B1 (ko) 1990-10-31 1995-09-29 니뽕 빅터 가부시끼가이샤 인터레이스 동화상 신호의 압축 장치
JP3226539B2 (ja) 1991-05-24 2001-11-05 ブリティッシュ・ブロードキャスティング・コーポレーション ビデオ画像処理
US5467136A (en) 1991-05-31 1995-11-14 Kabushiki Kaisha Toshiba Video decoder for determining a motion vector from a scaled vector and a difference vector
US5317397A (en) 1991-05-31 1994-05-31 Kabushiki Kaisha Toshiba Predictive coding using spatial-temporal filtering and plural motion vectors
US5428396A (en) 1991-08-03 1995-06-27 Sony Corporation Variable length coding/decoding method for motion vectors
JPH0541862A (ja) 1991-08-03 1993-02-19 Sony Corp 動きベクトルの可変長符号化方式
CA2079434A1 (en) 1991-09-30 1993-03-31 Derek Andrew Motion vector estimation, motion picture encoding and storage
JP2962012B2 (ja) 1991-11-08 1999-10-12 日本ビクター株式会社 動画像符号化装置及びその復号装置
GB2262854B (en) 1991-12-24 1995-05-24 Sony Broadcast & Communication Image processing apparatus
US6441842B1 (en) 1992-02-19 2002-08-27 8×8, Inc. Video compression/decompression processing and processors
US5594813A (en) 1992-02-19 1997-01-14 Integrated Information Technology, Inc. Programmable architecture and methods for motion estimation
US6226327B1 (en) 1992-06-29 2001-05-01 Sony Corporation Video coding method and apparatus which select between frame-based and field-based predictive modes
JP3348310B2 (ja) 1992-09-28 2002-11-20 ソニー株式会社 動画像符号化方法および動画像符号化装置
PT1098529E (pt) 1993-03-24 2013-11-25 Sony Corp Método para codificar e descodificar vetores de movimento e respetivo dispositivo e método para codificar e descodificar sinais de imagem e respetivo dispositivo
US5442400A (en) 1993-04-29 1995-08-15 Rca Thomson Licensing Corporation Error concealment apparatus for MPEG-like video data
JPH06343172A (ja) 1993-06-01 1994-12-13 Matsushita Electric Ind Co Ltd 動きベクトル検出方法及び動きベクトル符号化方法
US5477272A (en) 1993-07-22 1995-12-19 Gte Laboratories Incorporated Variable-block size multi-resolution motion estimation scheme for pyramid coding
TW283289B (zh) 1994-04-11 1996-08-11 Gen Instrument Corp
US5594504A (en) 1994-07-06 1997-01-14 Lucent Technologies Inc. Predictive video coding using a motion vector updating routine
US5684538A (en) 1994-08-18 1997-11-04 Hitachi, Ltd. System and method for performing video coding/decoding using motion compensation
US5623311A (en) 1994-10-28 1997-04-22 Matsushita Electric Corporation Of America MPEG video decoder having a high bandwidth memory
EP0710033A3 (en) 1994-10-28 1999-06-09 Matsushita Electric Industrial Co., Ltd. MPEG video decoder having a high bandwidth memory
GB2301972B (en) 1995-06-06 1999-10-20 Sony Uk Ltd Video compression
GB2301971B (en) 1995-06-06 1999-10-06 Sony Uk Ltd Video compression
US5825929A (en) 1995-10-05 1998-10-20 Microsoft Corporation Transformation block optimization method
US5929940A (en) 1995-10-25 1999-07-27 U.S. Philips Corporation Method and device for estimating motion between images, system for encoding segmented images
US5991463A (en) 1995-11-08 1999-11-23 Genesis Microchip Inc. Source data interpolation method and apparatus
JP2798035B2 (ja) 1996-01-17 1998-09-17 日本電気株式会社 適応動きベクトル補間による動き補償フレーム間予測方法
US5787203A (en) 1996-01-19 1998-07-28 Microsoft Corporation Method and system for filtering compressed video images
US5692063A (en) 1996-01-19 1997-11-25 Microsoft Corporation Method and system for unrestricted motion estimation for video
US5799113A (en) 1996-01-19 1998-08-25 Microsoft Corporation Method for expanding contracted video images
US6957350B1 (en) 1996-01-30 2005-10-18 Dolby Laboratories Licensing Corporation Encrypted and watermarked temporal and resolution layering in advanced television
US5768537A (en) 1996-02-22 1998-06-16 International Business Machines Corporation Scalable MPEG2 compliant video encoder
US5982438A (en) 1996-03-22 1999-11-09 Microsoft Corporation Overlapped motion compensation for object coding
US5847776A (en) 1996-06-24 1998-12-08 Vdonet Corporation Ltd. Method for entropy constrained motion estimation and coding of motion vectors with increased search range
US6233017B1 (en) 1996-09-16 2001-05-15 Microsoft Corporation Multimedia compression system with adaptive block sizes
US6130963A (en) 1996-11-22 2000-10-10 C-Cube Semiconductor Ii, Inc. Memory efficient decoding of video frame chroma
US6377628B1 (en) 1996-12-18 2002-04-23 Thomson Licensing S.A. System for maintaining datastream continuity in the presence of disrupted source data
US6201927B1 (en) 1997-02-18 2001-03-13 Mary Lafuze Comer Trick play reproduction of MPEG encoded signals
US5991447A (en) 1997-03-07 1999-11-23 General Instrument Corporation Prediction and coding of bi-directionally predicted video object planes for interlaced digital video
US6005980A (en) 1997-03-07 1999-12-21 General Instrument Corporation Motion estimation and compensation of video object planes for interlaced digital video
US5844613A (en) 1997-03-17 1998-12-01 Microsoft Corporation Global motion estimator for motion video signal encoding
US6404813B1 (en) 1997-03-27 2002-06-11 At&T Corp. Bidirectionally predicted pictures or video object planes for efficient and flexible video coding
KR100345423B1 (ko) 1997-03-31 2002-07-26 마츠시타 덴끼 산교 가부시키가이샤 동화상 표시 방법 및 그 장치
US5973755A (en) 1997-04-04 1999-10-26 Microsoft Corporation Video encoder and decoder using bilinear motion compensation and lapped orthogonal transforms
JP3129986B2 (ja) 1997-04-09 2001-01-31 日本車輌製造株式会社 杭施工機のトルク管理装置
US6067322A (en) 1997-06-04 2000-05-23 Microsoft Corporation Half pixel motion estimation in motion video signal encoding
US6574371B2 (en) 1997-06-09 2003-06-03 Hitachi, Ltd. Image decoding method
US6295376B1 (en) 1997-06-09 2001-09-25 Hitachi, Ltd. Image sequence coding method and decoding method
JPH1169345A (ja) 1997-06-11 1999-03-09 Fujitsu Ltd フレーム間予測動画像符号化装置及び復号装置並びにフレーム間予測動画像符号化方法及び復号方法
JP2897763B2 (ja) 1997-07-28 1999-05-31 日本ビクター株式会社 動き補償符号化装置、復号化装置、符号化方法及び復号化方法
US6266091B1 (en) 1997-07-31 2001-07-24 Lsi Logic Corporation System and method for low delay mode operation video decoding
US6310918B1 (en) 1997-07-31 2001-10-30 Lsi Logic Corporation System and method for motion vector extraction and computation meeting 2-frame store and letterboxing requirements
FR2766946B1 (fr) 1997-08-04 2000-08-11 Thomson Multimedia Sa Procede et dispositif de pretraitement pour estimation de mouvement
US6281942B1 (en) 1997-08-11 2001-08-28 Microsoft Corporation Spatial and temporal filtering mechanism for digital motion video signals
US6339656B1 (en) 1997-12-25 2002-01-15 Matsushita Electric Industrial Co., Ltd. Moving picture encoding decoding processing apparatus
US6122017A (en) 1998-01-22 2000-09-19 Hewlett-Packard Company Method for providing motion-compensated multi-field enhancement of still images from video
US6020934A (en) 1998-03-23 2000-02-01 International Business Machines Corporation Motion estimation architecture for area and power reduction
JP3888597B2 (ja) 1998-06-24 2007-03-07 日本ビクター株式会社 動き補償符号化装置、及び動き補償符号化復号化方法
JP4026238B2 (ja) 1998-07-23 2007-12-26 ソニー株式会社 画像復号装置及び画像復号方法
US6219070B1 (en) 1998-09-30 2001-04-17 Webtv Networks, Inc. System and method for adjusting pixel parameters by subpixel positioning
GB2343579A (en) 1998-11-07 2000-05-10 Ibm Hybrid-linear-bicubic interpolation method and apparatus
US6983018B1 (en) 1998-11-30 2006-01-03 Microsoft Corporation Efficient motion vector coding for video compression
US6418166B1 (en) 1998-11-30 2002-07-09 Microsoft Corporation Motion estimation and block matching pattern
US6496608B1 (en) 1999-01-15 2002-12-17 Picsurf, Inc. Image data interpolation system and method
US6259741B1 (en) 1999-02-18 2001-07-10 General Instrument Corporation Method of architecture for converting MPEG-2 4:2:2-profile bitstreams into main-profile bitstreams
US6320593B1 (en) 1999-04-20 2001-11-20 Agilent Technologies, Inc. Method of fast bi-cubic interpolation of image information
JP2000308064A (ja) 1999-04-22 2000-11-02 Mitsubishi Electric Corp 動きベクトル検出装置
US6968008B1 (en) 1999-07-27 2005-11-22 Sharp Laboratories Of America, Inc. Methods for motion estimation with adaptive motion accuracy
US6647061B1 (en) 2000-06-09 2003-11-11 General Instrument Corporation Video size conversion and transcoding from MPEG-2 to MPEG-4
US7206453B2 (en) 2001-05-03 2007-04-17 Microsoft Corporation Dynamic filtering for lossy compression
US6950469B2 (en) 2001-09-17 2005-09-27 Nokia Corporation Method for sub-pixel value interpolation
US20030095603A1 (en) 2001-11-16 2003-05-22 Koninklijke Philips Electronics N.V. Reduced-complexity video decoding using larger pixel-grid motion compensation
CN101448162B (zh) 2001-12-17 2013-01-02 微软公司 处理视频图像的方法
CN1606880A (zh) 2001-12-20 2005-04-13 皇家飞利浦电子股份有限公司 视频编码和解码方法及设备
JP4401783B2 (ja) 2002-01-24 2010-01-20 株式会社日立製作所 動画像の符号化方法
US7003035B2 (en) 2002-01-25 2006-02-21 Microsoft Corporation Video coding methods and apparatuses
US7110459B2 (en) 2002-04-10 2006-09-19 Microsoft Corporation Approximate bicubic filter
US7277587B2 (en) 2002-04-26 2007-10-02 Sharp Laboratories Of America, Inc. System and method for lossless video coding
US6980695B2 (en) * 2002-06-28 2005-12-27 Microsoft Corporation Rate allocation for mixed content video
US7016547B1 (en) * 2002-06-28 2006-03-21 Microsoft Corporation Adaptive entropy encoding/decoding for screen capture content
US7072512B2 (en) * 2002-07-23 2006-07-04 Microsoft Corporation Segmentation of digital video and images into continuous tone and palettized regions
US8824553B2 (en) 2003-05-12 2014-09-02 Google Inc. Video compression method
US20050013498A1 (en) 2003-07-18 2005-01-20 Microsoft Corporation Coding of motion vector information
EP1536647A1 (en) 2003-11-26 2005-06-01 STMicroelectronics Limited A video decoding device
KR100631777B1 (ko) 2004-03-31 2006-10-12 삼성전자주식회사 다 계층의 모션 벡터를 효율적으로 압축하는 방법 및 장치
KR100586882B1 (ko) 2004-04-13 2006-06-08 삼성전자주식회사 모션 스케일러빌리티를 지원하는 코딩 방법 및 장치
US8130825B2 (en) 2004-05-10 2012-03-06 Nvidia Corporation Processor for video data encoding/decoding
US7558428B2 (en) 2004-09-13 2009-07-07 Microsoft Corporation Accelerated video encoding using a graphics processing unit
JP4241588B2 (ja) 2004-11-30 2009-03-18 日本ビクター株式会社 動画像符号化装置、及び動画像復号化装置
WO2006124885A2 (en) 2005-05-12 2006-11-23 Kylintv, Inc. Codec for iptv
US8761259B2 (en) 2005-09-22 2014-06-24 Qualcomm Incorporated Multi-dimensional neighboring block prediction for video encoding
US7929599B2 (en) 2006-02-24 2011-04-19 Microsoft Corporation Accelerated video encoding
US8155195B2 (en) 2006-04-07 2012-04-10 Microsoft Corporation Switching distortion metrics during motion estimation
US8130828B2 (en) 2006-04-07 2012-03-06 Microsoft Corporation Adjusting quantization to preserve non-zero AC coefficients
US7965767B2 (en) 2006-06-30 2011-06-21 Intel Corporation Two-dimensional filtering architecture
US8861591B2 (en) 2007-05-11 2014-10-14 Advanced Micro Devices, Inc. Software video encoder with GPU acceleration
SG152082A1 (en) * 2007-10-19 2009-05-29 Creative Tech Ltd A method and system for processing a composite video image
US8279936B1 (en) 2007-12-11 2012-10-02 Marvell International Ltd. Method and apparatus for fractional pixel expansion and motion vector selection in a video codec
US20090168871A1 (en) * 2007-12-31 2009-07-02 Ning Lu Video motion estimation
US9584710B2 (en) * 2008-02-28 2017-02-28 Avigilon Analytics Corporation Intelligent high resolution video system
JP2009230537A (ja) 2008-03-24 2009-10-08 Olympus Corp 画像処理装置、画像処理プログラム、画像処理方法、および、電子機器
US8266665B2 (en) * 2008-03-25 2012-09-11 Verizon Patent And Licensing Inc. TV screen capture
US20090245374A1 (en) 2008-03-26 2009-10-01 Mediatek Inc. Video encoder and motion estimation method
JP2010016453A (ja) 2008-07-01 2010-01-21 Sony Corp 画像符号化装置および方法、画像復号装置および方法、並びにプログラム
TWI428022B (zh) * 2008-10-24 2014-02-21 Nat Univ Chung Cheng Video control method for instant video encoding chips
US8428145B2 (en) 2008-12-31 2013-04-23 Entropic Communications, Inc. System and method for providing fast trick modes
US9472167B2 (en) * 2009-04-17 2016-10-18 International Business Machines Corporation Video capture through hardware
US8346915B2 (en) * 2009-05-04 2013-01-01 Qualcomm Incorporated System and method of recording and sharing mobile application activities
BRPI1012928A2 (pt) * 2009-06-09 2018-01-30 Sony Corp aparelho e método de processamento de imagem.
SI3448031T1 (sl) * 2009-06-18 2021-03-31 Kabushiki Kaisha Toshiba Naprava za video dekodiranje in postopek za video dekodiranje
KR20110017302A (ko) 2009-08-13 2011-02-21 삼성전자주식회사 움직임 벡터의 정확도 조절을 이용한 영상 부호화, 복호화 방법 및 장치
EP2489189A1 (en) 2009-10-14 2012-08-22 Thomson Licensing Methods and apparatus for adaptive coding of motion information
US9237355B2 (en) 2010-02-19 2016-01-12 Qualcomm Incorporated Adaptive motion resolution for video coding
JP5617920B2 (ja) * 2010-06-04 2014-11-05 日本電気株式会社 通信システムと方法と装置
US20120008686A1 (en) 2010-07-06 2012-01-12 Apple Inc. Motion compensation using vector quantized interpolation filters
US20120051431A1 (en) 2010-08-25 2012-03-01 Qualcomm Incorporated Motion direction based adaptive motion vector resolution signaling for video coding
US10327008B2 (en) 2010-10-13 2019-06-18 Qualcomm Incorporated Adaptive motion vector resolution signaling for video coding
US10045046B2 (en) 2010-12-10 2018-08-07 Qualcomm Incorporated Adaptive support for interpolating values of sub-pixels for video coding
US9271005B2 (en) 2011-02-24 2016-02-23 Vixs Systems, Inc. Multi-pass video encoder and methods for use therewith
US8780996B2 (en) 2011-04-07 2014-07-15 Google, Inc. System and method for encoding and decoding video data
US10536701B2 (en) 2011-07-01 2020-01-14 Qualcomm Incorporated Video coding using adaptive motion vector resolution
US9277228B2 (en) 2011-07-18 2016-03-01 Qualcomm Incorporated Adaptation parameter sets for video coding
US9521418B2 (en) 2011-07-22 2016-12-13 Qualcomm Incorporated Slice header three-dimensional video extension for slice header prediction
RU2583040C2 (ru) 2011-08-30 2016-05-10 Нокиа Текнолоджиз Ой Устройство, способ и компьютерная программа для кодирования и декодирования видеосигналов
RU2487489C2 (ru) * 2011-10-18 2013-07-10 Федеральное государственное автономное образовательное учреждение высшего профессионального образования "Национальный исследовательский университет "МИЭТ" Способ поиска векторов перемещений в динамических изображениях
US9215266B2 (en) * 2012-01-26 2015-12-15 Zoom International S.R.O. System and method for zero-footprint screen capture
CN102740073B (zh) 2012-05-30 2015-06-17 华为技术有限公司 一种编码方法及装置
US9258562B2 (en) * 2012-06-13 2016-02-09 Qualcomm Incorporated Derivation of depth map estimate
US9338452B2 (en) 2012-07-09 2016-05-10 Qualcomm Incorporated Motion vector difference coding extension for enhancement layer
US9774881B2 (en) 2014-01-08 2017-09-26 Microsoft Technology Licensing, Llc Representing motion vectors in an encoded bitstream
US9749642B2 (en) 2014-01-08 2017-08-29 Microsoft Technology Licensing, Llc Selection of motion vector precision

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7224731B2 (en) * 2002-06-28 2007-05-29 Microsoft Corporation Motion estimation/compensation for screen capture video
US20110243234A1 (en) * 2008-10-02 2011-10-06 Sony Corporation Image processing apparatus and method
US20110194784A1 (en) * 2008-10-14 2011-08-11 France Telecom Encoding and decoding with elimination of one or more predetermined predictors
US8498493B1 (en) * 2009-06-02 2013-07-30 Imagination Technologies Limited Directional cross hair search system and method for determining a preferred motion vector
US20110255589A1 (en) * 2009-08-03 2011-10-20 Droplet Technology, Inc. Methods of compressing data and methods of assessing the same
WO2013002716A3 (en) * 2011-06-30 2013-04-04 Telefonaktiebolaget L M Ericsson (Publ) A method a decoder and encoder for processing a motion vector

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108347602A (zh) * 2017-01-22 2018-07-31 上海澜至半导体有限公司 用于无损压缩视频数据的方法和装置
CN111886870A (zh) * 2018-06-28 2020-11-03 华为技术有限公司 使用整数像素分辨率的运动矢量修正搜索
US11451824B2 (en) 2018-06-28 2022-09-20 Huawei Technologies Co., Ltd. Motion vector refinement search with integer pixel resolution
CN110166770A (zh) * 2018-07-18 2019-08-23 腾讯科技（深圳）有限公司 视频编码方法、装置、计算机设备和存储介质
CN110166770B (zh) * 2018-07-18 2022-09-23 腾讯科技（深圳）有限公司 视频编码方法、装置、计算机设备和存储介质
CN113728633A (zh) * 2019-04-01 2021-11-30 北京字节跳动网络技术有限公司 对基于历史的运动矢量预测使用插值滤波器
CN113728633B (zh) * 2019-04-01 2022-12-20 北京字节跳动网络技术有限公司 对基于历史的运动矢量预测使用插值滤波器
US11595641B2 (en) 2019-04-01 2023-02-28 Beijing Bytedance Network Technology Co., Ltd. Alternative interpolation filters in video coding
US11936855B2 (en) 2019-04-01 2024-03-19 Beijing Bytedance Network Technology Co., Ltd. Alternative interpolation filters in video coding
US11503288B2 (en) 2019-08-20 2022-11-15 Beijing Bytedance Network Technology Co., Ltd. Selective use of alternative interpolation filters in video processing

Also Published As

Publication number Publication date
MX360925B (es) 2018-11-22
KR102271780B1 (ko) 2021-06-30
JP2017508348A (ja) 2017-03-23
BR112016015243A2 (zh) 2017-08-08
BR112016015243B1 (pt) 2023-03-14
US20150195557A1 (en) 2015-07-09
EP3075153A1 (en) 2016-10-05
JP6576351B2 (ja) 2019-09-18
WO2015105661A1 (en) 2015-07-16
AU2014376189A1 (en) 2016-07-14
CA2935562A1 (en) 2015-07-16
KR20160106155A (ko) 2016-09-09
US9942560B2 (en) 2018-04-10
EP3075153B1 (en) 2021-06-02
CA2935562C (en) 2021-10-12
CN105900419B (zh) 2019-04-16
AU2014376189B2 (en) 2018-08-09
RU2679349C1 (ru) 2019-02-07
MX2016009023A (es) 2016-09-28

Similar Documents

Publication Publication Date Title
CN105900419B (zh) 屏幕内容数据的视频编码
CN105900425B (zh) 表示经编码的比特流中的运动向量
CN107027038B (zh) 动态参考运动矢量编码模式
CN107005698B (zh) 支持尽力服务解码的元数据提示
CN111757106B (zh) 使用多级复合预测对视频流中的当前块编译的方法和设备
WO2020117412A1 (en) Hybrid motion-compensated neural network with side-information based video coding
KR20140008498A (ko) 공유된 비디오 코딩 정보에 기반된 다수의 프로파일 및 표준들 그리고 다수의 시간적으로 스케일된 비디오를 갖는 실시간 비디오 코딩 시스템
CN110741641B (zh) 用于视频压缩的方法和装置
GB2582118A (en) Smart reordering in recursive block partitioning for advanced intra prediction in video coding
WO2019083577A1 (en) ESTIMATION AND MOTION COMPENSATION OF THE SAME FRAME
CN109996080A (zh) 图像的预测方法、装置及编解码器
JP2022511873A (ja) ビデオピクチャの復号および符号化の方法ならびに装置
JP2022069546A (ja) 複合動き補償予測
KR20240039178A (ko) 인코딩 및 디코딩 방법 그리고 장치
JP2018525901A (ja) ディスプレイストリーム圧縮における変換モード用ブロックサイズの変更
CN116016957A (zh) 一种视频处理方法、装置及计算机设备、存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant