CN104782130A - 从丢失的空间可扩展层恢复运动向量 - Google Patents
从丢失的空间可扩展层恢复运动向量 Download PDFInfo
- Publication number
- CN104782130A CN104782130A CN201280076863.6A CN201280076863A CN104782130A CN 104782130 A CN104782130 A CN 104782130A CN 201280076863 A CN201280076863 A CN 201280076863A CN 104782130 A CN104782130 A CN 104782130A
- Authority
- CN
- China
- Prior art keywords
- motion vector
- layer
- decoding
- list
- bit stream
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/70—Media network packetisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
- H04N19/895—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder in combination with error concealment
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
方法和系统支持接收视频比特流的解码的增强层,其中所述解码的增强层与所述视频比特流的先前层相关联,并且其中由于关于所述视频比特流的分组丢失状况而造成所述先前层未被解码。另外,可以估计所述先前层的中间运动向量,并且可以基于所述中间运动向量来估计所述解码的增强层的目标运动向量。在一个示例中,将上采样输出门维持在闭合状态,直到所述目标运动向量已被估计。
Description
背景技术
支持“空间可扩展性”的视频比特流可以被编码为基础层和一组增强层,其中每一增强层促成高质量/分辨率帧的合成以用于显示。合成给定的增强层可以涉及使用来自所述组中的先前(例如,参考)层的运动向量数据,其中,运动向量通常可以用于追踪在视频以及成串捕获的静止图像内的帧间运动。然而,通信网络通常可以使得视频比特流遭受由于信道带宽限制、信道噪音等所造成的分组丢失。如果参考层由于这样的分组丢失状况而丢失,则在传统的解码解决方案中,可以不理会依赖于来自该层的运动向量数据的任何随后的层。由此,仅可以使用最后成功接收到的层来合成输出帧。虽然可以对合成的帧进行上采样以实现目标分辨率/尺寸,但是这样的方式可能导致失去小细节的模糊结果。
附图说明
通过阅读以下说明和所附权利要求并通过参考以下附图,本发明的实施例的各个优点将对于本领域的技术人员将变得明显,其中:
图1为根据实施例的多个层的示例的框图;
图2为根据实施例的恢复模块的示例的框图;
图3为根据实施例的用于处理解码的视频比特流的方法的示例的流程图;
图4为根据实施例的具有运动向量校正逻辑的恢复模块的示例的框图;
图5A为根据实施例的编码模式优先级模块的框图;
图5B为根据实施例的用于选择编码模式的方法的示例的流程图;
图6为根据实施例的具有导航控制器的系统的示例的框图;并且
图7为根据实施例的具有小形状因子的系统的示例的框图。
具体实施方式
实施例可以包括一种具有缓冲器的装置,该缓冲器用于接收比特流的解码的增强层,其中解码的增强层要与视频比特流的先前层相关联,并且其中由于关于该视频比特流的分组丢失状况而造成该先前层未被解码。该装置还可以具有恢复模块以估计先前层的中间运动向量,并且基于该中间运动向量来估计解码的增强层的目标运动向量。
实施例还可以包括一种具有网络控制器和解码器的系统,该网络控制器用于获取视频比特流,并且该解码器用于基于该视频比特流而生成解码的增强层。该系统还可用具有用于接收解码的增强层的缓冲器,其中解码的增强层要与视频比特流的先前层相关联,并且其中由于关于该视频比特流的分组丢失状况而造成该先前层要被解码。该系统还可以具有恢复模块,该恢复模块用于估计该先前层的中间运动向量,并且基于该中间运动向量来估计解码的增强层的目标运动向量。
实施例还可以包括一种在其中接收视频比特流的解码的增强层的方法,其中该解码的增强层与该视频比特流的先前层相关联,并且其中由于关于该视频比特流的分组丢失状况而造成该先前层要被解码。另外,可以维持列表架构,其中该列表架构包括解码的层列表、恢复的层列表和参考层列表中的一个或多个。该方法还可以支持基于视频比特流的解码的基础层和该列表架构来估计先前层的中间运动向量,并且基于该中间运动向量和该列表架构来估计针对解码的增强层的目标运动向量。另外,该方法可以包括在可靠性图中将与该目标运动向量相关联的宏块标记为不可靠。
实施例还可以包括具有一组指令的计算机可读存储介质,如果该组指令由处理器执行,则使得计算机识别与视频比特流相关联的宏块,并且基于关于该宏块中的一个或多个运动向量的期望的恢复误差,为该宏块选择编码模式。
现在转向图1,示出了多个层10(10a-10c),其中层10可以总体上与视频比特流的不同帧分辨率/尺寸相对应。与较大帧尺寸对应的层可以在调整视频比特流以供在较大和/或较高分辨率显示设备上显示方面是有用的。更具体地,基础层10a可以具有320x180像素的帧尺寸,然而第一增强层10b可以具有640x360像素的帧尺寸,并且第二增强层10c可以具有1280x720像素的帧尺寸。因此,第二增强层10c可以对于在720p HD(高清晰度)显示设备上显示视频比特流是特别有用的。另一方面,第一增强层10b可以更适合于在较低分辨率(例如,SD/标准清晰度)显示设备上显示视频比特流。
如将更加详细讨论的,本文中描述的技术可以支持自动地恢复在传输期间丢失的层的运动向量,使用恢复的运动向量来针对随后的层恢复运动向量,并且使用恢复的运动向量来合成高质量帧。因此,在所示出的示例中,尽管第一增强层10b丢失了(例如,未被解码),但是仍然可以使用第二增强层10c来合成帧12,帧12具有与第二增强层10c相对应的尺寸(例如,1280x720像素)而非与基础层10a相对应的尺寸(例如,320x180像素),在传统方法中第二增强层10c会被认为是最后成功接收到的层。更具体地,可以基于解码的基础层10a而针对未解码的第一增强层10b来估计一个或多个中间运动向量,并且可以基于第一增强层10b的中间运动向量而针对解码的第二增强层10c来估计一个或多个目标运动向量。这种方法可以避免对合成的帧12进行上采样的任何需要并且可以提供在视频质量方面的实质改进。
图2示出了逻辑架构13,逻辑架构13具有解码器16、缓冲器14和恢复模块18。一般地,解码器16可以解码视频比特流的层,其中缓冲器14可以从解码器16接收解码的层以供由恢复模块18进行随后的处理。如已经指出的,由于诸如信道带宽限制、信道噪音等的分组丢失状况造成视频比特流的一个或多个层可以未被解码。恢复模块18可以使用上采样模块38来估计丢失层的中间运动向量,并且基于该中间运动向量来估计随后的解码的增强层的目标运动向量。在这方面,所示出的恢复模块18包括上采样输出门20和选择器22,选择器22将上采样输出门维持在闭合状态,直到已估计出目标运动向量。
更具体地,恢复模块18可以维持包括了解码的层列表24、恢复的层列表26和参考层列表28的列表架构,其中可以使用该列表架构以用于估计中间运动向量和目标运动向量。例如,到逻辑架构13的输入可以包含来自解码器16的包括运动向量(如果适用)的解码的数据、在线30上的当前层号(“CLN”)、在线32上的参考层号(“RLN”)、在线34上的当前层尺寸(“CLS”),以及在线36上的参考层尺寸(“RLS”)。CLN和CLS可以与来自解码器16的当前正在被呈现的层相对应,其中RLN和RLS可以与由当前层所参考的层(例如,先前层)相对应。
通过示例的方式,如果视频比特流包含四层(例如,基础层L0和增强层L1-L3)并且每一增强层使用之前紧挨的层作为参考层,则层L0的运动向量将用于确定层L1的运动向量,层L1的运动向量将用于确定层L2的运动向量,等等。此外,如果成功地接收到并解码了层L0、L1和L2,则将使用值L0、L1和L2(或仅零、一和二)来填充解码的层列表。为了接收和解码层L3,可以根据解码的数据而将RLN确定为L2,其中值L2(或仅二)可以存储在参考层列表28中。
由于在解码的列表24中识别出了层L2,则选择器22可以将层L2指定为支持层。在这种情况下,值L2(或仅二)可以作为支持层号(“SLN”)而在线40上被传输到缓冲器14。另外,选择器22可以通过将值L3(或仅三)作为处理的层号(“PLN”)在线42上传输,而将层L3指定为处理的层。在所示出的示例中,PLN线42馈送缓冲器14、解码的层列表24、恢复的层列表26、和重调尺寸(resize)系数列表44。因此,上采样模块38可以在线46上从重调尺寸系数列表44获取与层L2的运动向量相对应的系数(例如,Xcoeff、Ycoeff),并且使用这些系数来插值层L3的运动向量。由于在这种情况下PLN与CLN一致,所以选择器22可以打开输出门20以便允许将插值的运动向量传递到输出。
通过示例的方式,如果接收到层L0、层L1和L2丢失,并且接收到层L3,则所示出的恢复模块18使得能够根据最后成功接收到的层(即,本示例中的层L0)来重建针对层L3的运动向量。更具体地,解码的层列表24将包含值L0,但是不包含值L2或L1。由此,所示出的选择器22分析参考层列表28、解码的层列表24、和恢复的层列表26以识别可以用于运动向量插值的最新解码的或恢复的层。在本示例中,参考层列表28将包含值L2,这是因为解码的层L3参考层L3,但是将不会在解码的层列表24或恢复的层列表26中找到值L2。另外,将不会在解码的层列表24或恢复的层列表26中找到值L1,这是因为层L2也丢失了。
在确定值L0在解码的层列表24中以后,所示出的选择器22通过将值L0置于SLN线40上而将会选择层L0作为支持层,并且通过将值L1置于PLN线42上而选择层L1作为处理的层。由此,可以将针对层L0的运动向量系数从重调尺寸系数列表44传送到上采样模块38,其可以根据接收到的系数而进行插值(例如,上采样)并且在线48上将插值结果存储到缓冲器14以作为针对未解码的层L1的中间运动向量系数。然而,特别值得注意的是,选择器22可以继续将输出门20维持在闭合状态,这是因为PLN(L1)不等于CLN(L3)。简而言之,还没有获取针对目标运动向量的系数(即,层L3系数),所以迭代过程可以持续整个增强层的组/序列,直到已恢复出目标运动向量。
接着可以通过将值L1添加到恢复的层列表26而更新恢复的层列表26。接着,选择器22可以将层L1指定为支持层并将层L2指定为处理的层,其中可以重复上述步骤以便插值针对未解码的层L2的中间运动向量系数。接着,可以将L2中间运动向量系数写入到缓冲器14并且可以将值L2添加到恢复的层列表。在该示例中,将再次重复所描述的步骤,其中层L2被指定为支持层并且层L3被指定为处理的层。在这样的情况下,针对层L3的插值的运动向量系数将会被认为是目标运动向量系数并且被写入到缓冲器14。另外,选择器22将确定PLN(L3)等于CLN(L3),并且可以打开输出门20以便允许将目标运动向量传递到输出。
尽管上述示例使用之前紧挨的层作为参考层,但是也可以使用其它方法。例如,在SVC(可扩展视频编码,例如推荐H.264,针对通用视听服务的高级视频编码,Annex G,ITU-T,01/2012)流中可遇到以下配置:
L0是以64kbit/s采样的基础层,帧尺寸为200x100;
L1是以256kbit/s采样的增强层,帧尺寸为200x400;
L2是以1024kbit/s采样的增强层,帧尺寸为200x400;并且
L3是以1024kbit/s采样的增强层,帧尺寸为400x800。
其中,针对L1、L2和L3的参考层分别为L0、L1和L1。如已经指出的,可以由解码器16从视频比特流中提取该信息并将该信息存储在参考层列表28中。
图3示出了用于处理解码的视频比特流的方法50。方法50可以以如下形式实现:可执行软件以作为存储在存储器的机器或计算机可读存储介质中的一组逻辑指令,该存储器可以是例如随机存取存储器(RAM)、只读存储器(ROM)、可编程ROM(PROM)、固件、闪速存储器等;可配置逻辑,诸如例如可编程逻辑阵列(PLA)、现场可编程门阵列(FPGA)、复杂可编程逻辑器件(CPLD);使用电路技术的固定功能逻辑硬件,诸如例如专用集成电路(ASIC)、互补金属氧化物半导体(CMOS)或晶体管-晶体管逻辑(TTL)技术;或其任意组合。例如,用于执行在方法50中所示的操作的计算机程序代码可以以一种或多种编程语言的任意组合来编写,该一种或多种编程语言包括面向对象编程语言(例如,Java、Smalltalk、C++等)和传统的过程编程语言(例如,“C”编程语言或类似的编程语言)。
所示出的处理块52支持初始化处理的层号(PLN)、初始化支持层号(SLN)并且关闭恢复模块的输出门。更具体地,处理的层号可以被设置为当前层号(CLN,例如,PLN←CLN)并且支持层可以被设置为参考层号(RLN,例如,SLN←RLN)。块54可以确定支持层是否在解码的层列表中或在恢复的层列表中。如果不在,则运动向量恢复可以是适合的。由此,处理的层号可以被设置为支持层号(例如,PLN←SLN)。所示出的块56还支持将支持层号设置为适当的参考层列表值(RefLL[SLN],例如,SLN←RefLL[SLN]),其中适当的参考层列表值可以被编码成视频比特流。例如,如果层L4参考层L3,层L3参考层L1,并且层L2参考层L1,则RefLL可以被如下填充:RefLL[0]=-1,RefLL[1]=0,RefLL[2]=1,RefLL[3]=1,RefLL[4]=3。
可以在块58处做出关于支持层号是否小于零的确定(即,在迭代中已达到基础层)。如果小于零,则所示出的过程回到在块54处确定关于支持层是否在解码的层列表中或在恢复的层列表中。如果找到了支持层,则块60可以确定当前层号是否等于处理的层号(例如,CLN=PLN)。如果不等于,则所示出的块62将处理的层号和支持层号输出到缓冲器,并且将输出门维持在闭合状态。另外,可以在块64处上采样支持层的运动向量,块64还可以支持将处理的层号添加到恢复的层列表。接着,块66可以将处理的层号设置为当前层号并且将支持层号设置为参考层号(例如,PLN←CLN,SLN←RLN),其中该过程可以回到在块54处确定关于支持层是否在解码的层列表中或在恢复的层列表中。
如果在块60处确定当前层号等于处理的层号,则在块68处可以打开输出门以便允许目标运动向量离开恢复模块。如果在块58处确定支持层号小于零(例如,在迭代中已达到基础层),则所示出的块70将处理的层号和支持层号设置为负一(例如,PLN←-1,SLN←-1)以停止该搜索。由此,所示出的块72将处理的层号和支持层号输出到缓冲器,并且将输出门维持在打开状态。接着,可以在块74处上采样支持层的运动向量,块74还可以将处理的层号添加到解码的层列表。
选择转向图4,示出了逻辑架构15的修改的恢复模块76,其中上采样模块78在可靠性图中将与恢复的运动向量相关联的宏块标记为不可靠。所示出的恢复模块76还包括被配置为校正不可靠宏块的校正模块80。在这方面,丢失的数据可以与帧的整个层级或片不相关。相反,不可靠宏块可以由可靠宏块包围。由此,所示出的校正模块80使用与可靠宏块相关的数据来修正不可靠宏块的运动向量。例如,校正模块80可以包括用于确定/计算针对多个周围的可靠宏块的平均运动向量,确定该平均运动向量与恢复的目标运动向量之间的差值,以及如果该差值超出阈值则将该平均运动向量分配给目标运动向量的逻辑。
图5A示出了逻辑架构82,逻辑架构82可以从通信信道/链路的编码器侧提供额外的稳定性。一般地,逻辑架构82可以被配置为识别与视频比特流相关联的宏块,并且基于关于该宏块中的一个或多个运动向量的期望的恢复误差,为该宏块选择编码模式。在这方面,帧内编码模式可以不利用运动向量并且可以比帧间编码模式更有可能产生层恢复误差。由此,相比于针对帧内编码模式,可以给帧间编码模式更大的优先级。
在所示出的示例中,优先级模块84基于所期望的恢复误差而将优先级系数分配给多个编码模式中的每一个,以获取相对应的多个系数。该架构还可以包括代价(cost)逻辑86,用于从缓冲器88接收宏块并基于每一个宏块而确定多个编码模式中的每一个的率失真代价,以获取相对应的多个率失真代价。另外,优先级模块84可以通过相对应的优先级系数来调节(adjust)每一率失真代价,以获取多个经调节的率失真代价,其中优化逻辑90可以在多个经调节的率失真代价中识别最优值,其中所选择的编码模式是与该最优值相关联的。
在一个示例中,最优模式84包括乘法逻辑92以将每一率失真代价乘以相对应的优先级系数,以获取多个经调节的率失真代价。因此,可以将大于一的系数分配给很可能导致恢复的运动向量的重大误差的模式,其中这样的值将增加与这些模式相关联的代价。架构82还可以包括帧缓冲器94,帧缓冲器94向宏块编码器-解码器96提供帧数据,宏块编码器-解码器96进而使用该帧数据和来自模式控制逻辑98的模式数据以向代价逻辑86供应做出率失真代价确定所需要的信息。
图5B示出了用于选择编码模式的方法100。方法100可以以如下形式实现:可执行软件以作为存储在存储器的机器或计算机可读存储介质中的一组逻辑指令,该存储器可以是例如RAM、ROM、PROM、固件、闪速存储器等;可配置逻辑,诸如例如PLA、FPGA、CPLD;使用电路技术的固定功能逻辑硬件,诸如例如ASIC、CMOS或TTL技术;或其任意组合。所示出的处理块102支持识别与视频比特流相关联的宏块。在块104处,可以基于关于宏块中的一个或多个运动向量的期望的恢复误差,针对该宏块选择编码模式。
图6示出了系统700的实施例。在实施例中,系统700可以是媒体系统,尽管系统700并不限于该上下文。例如,系统700可以并入到个人计算机(PC)、膝上型计算机、超级膝上型计算机、平板计算机、触控板、便携式计算机、手持式计算机、掌上型计算机、个人数字助理(PDA)、蜂窝电话、组合蜂窝电话/PDA、电视、智能设备(例如,智能电话、智能平板计算机或智能电视)、移动互联网设备(MID)、消息设备、数据通信设备等。因此,如本文中所描述的,系统700可以用于显示视频比特流。
在实施例中,系统700包括耦合到显示器720的平台702。平台702可以从诸如内容服务设备730或内容分发设备740或其它类似内容源的内容设备接收内容。导航控制器750包括可以用于与例如平台702和/或显示器720进行交互的一个或多个导航特征。在下文中更具体地描述这些组件中的每个。
在实施例中,平台702可以包括芯片组705、处理器710、存储器712、存储设备714、图形子系统715、应用程序716和/或无线电设备718的任意组合。芯片组705可以在处理器710、存储器712、存储设备714、图形子系统715、应用程序716和/或无线电设备718之间提供相互通信。例如,芯片组705可以包括能够提供与存储设备714的相互通信的存储设备适配器(未示出)。
处理器710可以被实现为复杂指令集计算机(CISC)处理器或精简指令集计算机(RISC)处理器、x86指令集兼容处理器、多核处理器或任何其它微处理器或中央处理单元。在实施例中,处理器710可以包括双核处理器、双核移动处理器等。
存储器712可以被实现为易失性存储器设备,例如但不限于,随机存取存储器(RAM)、动态随机存取存储器(DRAM)、或静态RAM(SRAM)。
存储设备714可以被实现为非易失性存储设备,例如但不限于,磁盘驱动器、光盘驱动器、磁带驱动器、内部存储设备、附接存储设备、闪速存储器、电池供电的SDRAM(同步DRAM)、和/或网络可访问存储设备。在实施例中,例如,当包括多个硬盘驱动器时,存储设备714可以包括提高对有价值的数字媒介的存储性能增强保护的技术。
图形子系统715可以执行对诸如静态或视频这样的图像的处理以供显示。例如,图形子系统715可以是图形处理单元(GPU)或可视处理单元(VPU)。已讨论过的是,图形子系统715因此可以包括逻辑架构13(图2),逻辑架构15(图4)和/或逻辑架构82(图5A)。模拟或数字接口可以用于将图形子系统715和显示器720通信地耦合。例如,该接口可以是高清晰度多媒体接口、显示接口、无线HDMI、和/或无线HD兼容技术中的任意一种。图形子系统715可以被集成到处理器710或芯片组705中。图形子系统715可以是耦合到芯片组705的独立的卡。
本文中所描述的图形和/或视频处理技术可以在各种硬件架构中实现。例如,图形和/或视频功能可以被集成在芯片组内。或者,可以使用分立的图形和/或视频处理器。作为又一实施例,图形和/或视频功能可由通用处理器,包括多核处理器来实现。在进一步的实施例中,所述功能可以在消费电子产品设备中实现。
无线电设备718可以包括能够使用各种合适的无线通信技术来发射并接收信号的一个或多个无线电设备。这种技术可以涉及跨一个或多个无线网络的通信。示例性无线网络包括(但不限于)无线局域网(WLAN)、无线个域网(WPAN)、无线城域网(WMAN)、蜂窝网络、和卫星网络。在跨这种网络的通信中,无线电设备718可以根据任意版本的一个或多个适用标准而进行操作。
在实施例中,显示器720可以包括任何电视类的监视器或显示器。显示器720可以包括,例如计算机的显示屏幕、触摸屏显示器、视频监视器,类似电视的设备和/或电视。显示器720可以是数字和/或模拟的。在实施例中,显示器720可以为全息显示器。另外,显示器720可以是可接收视觉投影的透明表面。这种投影可以传达各种形式的信息、图像和/或对象。例如,这种投影可以是用于移动增强现实(MAR)应用的视觉覆盖。在一个或多个软件应用程序716的控制下,平台702可以将用户界面722显示在显示器720上。
在实施例中,例如,内容服务设备730可以由任何国家、国际和/或独立的服务托管,并且因此可以通过例如互联网访问平台702。内容服务设备730可以耦合到平台702和/或显示器720。平台702和/或内容服务设备730可以耦合到网络760,以便向网络760和从网络706传送媒体信息(例如,发送和/或接收)。内容分发设备740也可以耦合到平台702和/或显示器720。
在实施例中,内容服务设备730可以包括有线电视盒、个人计算机、网络、电话、互联网使能的设备或能够递送数字信息和/或内容的装置、以及能够在内容提供者和平台702和/显示器720之间通过网络760或直接单向或双向传送内容的其它类似装置。应该理解的是,内容可通过网络760向和从系统700中的组件与内容提供者中的任何一个被单向和/或双向地传送。内容的示例可以包括任何媒体信息,包含例如视频、音乐、医疗和游戏信息等。
内容服务设备730接收诸如有线电视节目(包括媒体信息、数字信息和/或其它内容)的内容。内容提供者的示例可以包括任何有线或卫星电视或广播电台或互联网内容提供者。所提供的示例并不意味着限制本发明的实施例。
在实施例中,平台702可以从具有一个或多个导航特征的导航控制器750接收控制信号。例如,控制器750的导航特征可以用于与用户界面722交互。在实施例中,导航控制器750可以是指示装置,其可以是允许用户将空间(例如,连续的和多维的)数据输入到计算机中的计算机硬件组件(具体地说,人机接口设备)。许多系统,例如图形用户界面(GUI)、电视以及监视器允许用户使用身体姿势来控制计算机或电视以及向计算机或电视提供数据。
通过指针、光标、聚焦环、或在显示器上显示的其它视觉指示符的移动,控制器750的导航特征的移动可以呼应在显示器(例如,显示器720)上。例如,在软件应用程序716的控制下,位于导航控制器750上的导航特征可以被映射到显示在用户界面722上的虚拟导航特征。在实施例中,控制器750可以不是单独的组件,而是集成到平台702和/或显示器720中的组件。然而,实施例并不限于这些元件或本文所示或所描述的内容。
在实施例中,例如当被启用时,驱动程序(未示出)可以包括使用户能够在系统初始化后,通过触摸按钮可以即时开启和关闭平台702(像开启和关闭电视一样)的技术。当平台被“关闭”时,程序逻辑可以允许平台702将内容串流(stream)到媒体适配器或其它内容服务设备730或内容分发设备740。此外,例如,芯片组705可以包括支持例如5.1环绕立体声和/或高清7.1环绕立体声的硬件和/或软件。驱动程序可以包括用于集成显卡平台的图形驱动程序。在实施例中,图形驱动程序可以包括外设部件互连标准(PCI)快速图形卡。
在各个实施例中,系统700中所示的任何一个或多个组件可以是集成的。例如,平台702和内容服务设备730可以是集成的,或者平台702和内容分发设备740可以是集成的,或者平台702、内容服务设备730和内容分发设备740可以是集成的。在各个实施例中,平台702和显示器720可以是一个集成单元。例如,显示器720和内容服务设备730可以是集成的,或者显示器720和内容分发设备740可以是集成的。这些实施例并不意味着限制本发明。
在各个实施例中,系统700可以被实现为无线系统、有线系统、或两者的组合。当被实现为无线系统时,系统700可以包括适于在无线共享介质上通信的组件和接口,例如一个或多个天线、发射器、接收器、收发器、放大器、滤波器、控制逻辑等。无线共享介质的示例可以包括无线频谱的一部分,例如,RF频谱等。当被实现为有线系统时,系统700可以包括适于在有线通信介质上通信的组件和接口,例如输入/输出(I/O)适配器、将I/O适配器与相应的有线通信介质连接起来的物理连接器、网络接口卡(NIC)、盘控制器、视频控制器、音频控制器等。有线通信介质的示例可以包括导线、电缆、金属引线、印刷电路板(PCB)、背板、交换光纤、半导体材料、双绞线、同轴电缆、光纤等。
平台702可以建立一个或多个逻辑或物理信道来传送信息。该信息可以包括媒体信息和控制信息。媒体信息可以指表示针对用户的内容的任何数据。内容的示例可以包括,例如来自于语音对话、视频会议、流视频、电子邮件(“email”)消息、语音邮件消息、字母数字符号、图形、图像、视频、文本等的数据。来自于语音对话的数据可以是例如语音信息、静默时段、背景噪声、舒适噪声、音调等。控制信息可以指表示针对自动系统的命令、指令或控制字的任何数据。例如,控制信息可以用于通过系统而路由媒体信息,或指示节点来以预先确定的方式处理媒体信息。然而,实施例并不限于这些元件或图6中所示或所描述的上下文。
如上文所述,可以以变换的物理样式或形状因子而实施系统700。图7示出了在其中可以实施系统700的小的形状因子设备800的实施例。在实施例中,例如,设备800可以被实现为具有无线功能的移动计算设备。例如,移动计算设备可以指具有处理系统和移动电压源或电源(例如,一个或多个电池)的任何设备。
如上文所述,移动计算设备的示例可以包括个人计算机(PC)、膝上型计算机、超级膝上型计算机、平板计算机、触控板、便携式计算机、手持式计算机、掌上型计算机、个人数字助理(PDA)、蜂窝电话、组合蜂窝电话/PDA、电视、智能设备(例如,智能电话、智能平板计算机或智能电视)、移动互联网设备(MID)、消息设备、数据通信设备等。
移动计算设备的示例还可以包括被布置为由人穿戴的计算机,例如腕上计算机、手指计算机、戒指计算机、眼镜计算机、腰带扣计算机、鞋计算机、衣服计算机、以及其它可穿戴计算机。在实施例中,例如,移动计算设备可以被实现为能够执行计算机应用程序以及语音通信和/或数据通信的智能电话。尽管可以通过示例的方式用被实现为智能电话的移动计算设备来描述一些实施例,但是可以理解的是,也可以使用其它无线移动计算设备来实现其它实施例。实施例并不限于该上下文。
如图7所示,设备800包括壳体802、显示器804、输入/输出(I/O)设备806、以及天线808。设备800还可以包括导航特征812。显示器804可以包括用于显示适合于移动计算设备的信息的任何合适的显示单元。I/O设备806可以包括用于将信息输入到移动计算设备中的任何合适的I/O设备。I/O设备806的示例可以包括字母数字键盘、数字小键盘、触摸板、输入键、按钮、开关、摇臂开关、麦克风、扬声器、语音识别设备和软件等。还可以通过麦克风的方式将信息输入到设备800。可以由语音识别设备将该信息数字化。实施例并不限于该上下文。
因此,本文中所描述的技术可以支持参考由于在通信信道中的分组丢失而未接收到的数据来重建针对宏块的运动向量。可以通过来自最后可用的接收到的层或重建的参考层的插值来估计针对这样的宏块的运动向量。另外,通过插值所获取的运动向量估计可以被标记为不可靠,其中附近的可靠运动向量可以替代不可靠运动向量。另外,技术还可以提供宏块编码简档,供宏块编码简档通过将更高的优先级分配给运动向量预测和对分组丢失不那么重要的编码模式而使能高效的运动向量重建。类似地,当不能根据之前传输的层来估计运动向量时,可以将较低的优先级分配给运动向量预测和编码模式。
可以使用硬件元件、软件元件或两者的组合来实现各个实施例。硬件元件的示例可以包括处理器、微处理器、电路、电路元件(例如,晶体管、电阻器、电容器、电感器等)、集成电路、专用集成电路(ASIC)、可编程逻辑器件(PLD)、数字信号处理器(DSP)、现场可编程门阵列(FPGA)、逻辑门、寄存器、半导体设备、芯片、微芯片、芯片组等。软件的示例可以包括软件组件、程序、应用、计算机程序、应用程序、系统程序、机器程序、操作系统软件、中间件、固件、软件模块、例程、子例程、函数、方法、过程、软件接口、应用程序接口(API)、指令集、计算代码、计算机代码、代码段、计算机代码段、字、值、符号、或其任意组合。确定是否使用硬件元件和/或软件元件来实现实施例可以根据以下任意数量的因素而变化,例如所期望的计算速率、功率电平、耐热性、处理周期预算、输入数据速率、输出数据速率、存储资源、数据总线速度和其它设计或性能约束。
可以由存储在机器可读介质上的、表示处理器内的各个逻辑的代表性指令来实现至少一个实施例的一个或多个方面,当该代表性指令被机器读取时,使得该机器制造逻辑以执行本文中描述的技术。可以将这种被称为“IP核”的表示存储在有形、机器可读介质上,并且将其提供到各个顾客或制造设备以加载到实际制造逻辑或处理器的制造机器中。
本发明的实施例可适用于结合所有类型的半导体集成电路(“IC”)芯片使用。这些IC芯片的示例包括但不限于处理器、控制器、芯片组组件、可编程逻辑阵列(PLA)、存储器芯片、网络芯片等。此外,在一些附图中,可以用线表示信号导体线。一些可以是不同的,以指示更多的组成信号路径,具有号码标签,以指示多个组成信号路径,和/或具有在一端或多端处的箭头,以指示主要信息流方向。然而,这不应以限制的方式被解释。相反,这种添加的细节可关于一个或多个示例性实施例使用以便于对电路的更容易的理解。任何所表示的信号线路,不管是否具有额外的信息,都可实际上包括可在多个方向上传播的一个或多个信号,并可使用任何适当类型的信号方案来实现,例如用差分对、光纤线路和/或单端线路实现的数字或模拟线路。
可给出示例尺寸/模型/值/范围,虽然本发明的实施例不限于此。随着制造技术(例如,光刻法)随时间而成熟,可预期制造出更小尺寸的设备。此外,到IC芯片和其它组件的公知的功率/地连接可以或可以不在附图内示出,为了示出和讨论的简单,且以便不模糊本发明的实施例的某些方面。此外,可以以框图形式示出布置,以便避免模糊本发明的实施例,且也鉴于下列事实:关于这样的框图布置的实施方式的细节高度依赖于平台(实施例应在该平台内实现),即,这样的细节应完全在本领域中的技术人员的认知范围内。在阐述特定细节(例如,电路)以便描述本发明的示例性实施例的情况下,对本领域中的技术人员应明显的是,可在没有这些特定细节的情况下实践本发明的实施例、或在这些特点细节的变型的情况下实践本发明的实施例。该描述因此应被视为例证性的而不是限制性的。
可例如使用机器可读或有形的计算机可读介质或制品来实现一些实施例,所述机器可读或有形的计算机可读介质或物品可存储指令或一组指令,所述指令如果被机器执行,则可使机器执行根据实施例的方法和/或操作。这样的机器可包括例如任何适当的处理平台、计算平台、计算设备、处理设备、计算系统、处理系统、计算机、处理器等,并可使用硬件和/或软件的任何适当组合来实现这样的机器。机器可读介质或制品可包括例如任何适当类型的存储器单元、存储器设备、存储器制品、存储器介质、存储设备、存储制品、存储介质和/或存储单元,例如存储器、可移动或不可移动介质、可擦除或不可擦除介质、可写入或可重写介质、数字或模拟介质、硬盘、软盘、光盘只读存储器(CD-ROM)、可记录光盘(CD-R)、可重写光盘(CD-RW)、光学盘、磁性介质、磁光介质、可移动存储卡或盘、各种类型的数字多功能盘(DVD)、磁带、盒式磁带等。指令可包括使用任何适当的高级、低级、面向对象、可视、编译和/或解释编程语言实现的任何适当类型的代码,例如源代码、编译代码、解释代码、可执行代码、静态代码、动态代码、加密代码等。
除非另有明确说明,否则可认识到,术语例如“处理”、“计算”、“运算”、“确定”等是指计算机或计算系统或类似的电子计算设备的行动和/或过程,计算机或计算系统或类似的电子计算设备将被表示为在计算系统的寄存器和/或存储器内的物理量(例如,电子)操纵和/或转换成类似地被表示为在计算系统的存储器、寄存器或其它这样的信息存储、传输或显示设备内的其它数据。实施例并不被限制在该上下文。
术语“耦合”可在本文使用以指代在所讨论的组件之间的任何类型的关系(直接或间接),并可适用于电气、机械、流体、光、电磁、电机械或其它连接。此外,术语“第一”、“第二”等可在本文只用于便于讨论,且不携带任何特定的时间或按时间顺序的意义,除非另有指示。
从前述描述中本领域中的技术人员将认识到,本发明的实施例的广泛技术可在各种形式中实现。因此,虽然本发明的实施例结合其特定的示例被描述,但是本发明的实施例的真实范围不应被如此限制,这是因为有技能的从业者在研究了附图、说明书和接下来的权利要求时,其它修改将对他们变得显而易见。
Claims (29)
1.一种方法,包括:
接收视频比特流的解码的增强层,其中,所述解码的增强层与所述视频比特流的先前层相关联,并且其中,由于关于所述视频比特流的分组丢失状况而造成所述先前层未被解码;
维持列表架构,所述列表架构包括解码的层列表、恢复的层列表和参考层列表中的一个或多个;
基于所述视频比特流的解码的基础层和所述列表架构,估计所述先前层的中间运动向量;
基于所述中间运动向量和所述列表架构,估计针对所述解码的增强层的目标运动向量;并且
在可靠性图中将与所述目标运动向量相关联的宏块标记为不可靠。
2.根据权利要求1所述的方法,还包括将上采样输出门维持在闭合状态,直到所述目标运动向量已被估计。
3.根据权利要求1所述的方法,还包括:
确定针对多个周围的可靠宏块的平均运动向量;
确定所述平均运动向量与所述目标运动向量之间的差;并且
如果所述差超出阈值,则将所述平均运动向量分配给所述目标运动向量。
4.根据权利要求1所述的方法,还包括估计中间运动向量组,其中,基于所述中间运动向量组来估计所述目标运动向量。
5.一种系统,包括:
网络控制器,其用于获取视频比特流;
解码器,其用于基于所述视频比特流而生成解码的增强层;
缓冲器,其用于接收所述解码的增强层,其中,所述解码的增强层与所述视频比特流的先前层相关联,并且其中,由于关于所述视频比特流的分组丢失状况而造成所述先前层未被解码;以及
恢复模块,其用于估计所述先前层的中间运动向量,并且用于基于所述中间运动向量来估计所述解码的增强层的目标运动向量。
6.根据权利要求5所述的系统,其中,所述恢复模块还包括:
上采样输出门,以及
选择器,其用于将所述上采样输出门维持在闭合状态,直到所述目标运动向量已被估计。
7.根据权利要求5所述的系统,其中,所述恢复模块在可靠性图中将与所述目标运动向量相关联的宏块标记为不可靠。
8.根据权利要求7所述的系统,其中,所述恢复模块还包括校正模块,所述校正模块具有用于确定针对多个周围的可靠宏块的平均运动向量、确定所述平均运动向量与所述目标运动向量之间的差、以及如果所述差超出阈值则将所述平均运动向量分配给所述目标运动向量的逻辑。
9.根据权利要求5所述的系统,其中,所述恢复模块维持列表架构,所述列表架构包括解码的层列表、恢复的层列表和参考层列表中的一个或多个,并且其中,所述列表架构用于估计所述中间运动向量和所述目标运动向量。
10.根据权利要求5所述的系统,其中,所述恢复模块估计中间运动向量组,其中,所述目标运动向量是基于所述中间运动向量组来估计的。
11.根据权利要求5所述的系统,其中,所述中间运动向量是基于所述视频比特流的解码的基础层来估计的。
12.一种装置,包括:
缓冲器,其用于接收视频比特流的解码的增强层,其中,所述解码的增强层与所述视频比特流的先前层相关联,并且其中,由于关于所述视频比特流的分组丢失状况而造成所述先前层未被解码;以及
恢复模块,其用于估计所述先前层的中间运动向量,并且用于基于所述中间运动向量来估计所述解码的增强层的目标运动向量。
13.根据权利要求12所述的装置,其中,所述恢复模块还包括:
上采样输出门;以及
选择器,其用于将所述上采样输出门维持在闭合状态,直到所述目标运动向量已被估计。
14.根据权利要求12所述的装置,其中,所述恢复模块在可靠性图中将与所述目标运动向量相关联的宏块标记为不可靠。
15.根据权利要求14所述的装置,其中,所述恢复模块还包括校正模块,所述校正模块具有用于确定针对多个周围的可靠宏块的平均运动向量、确定所述平均运动向量与所述目标运动向量之间的差、以及如果所述差超出阈值,则将所述平均运动向量分配给所述目标运动向量的逻辑。
16.根据权利要求12所述的装置,其中,所述恢复模块维持列表架构,所述列表架构包括解码的层列表、恢复的层列表和参考层列表中的一个或多个,并且其中,所述列表架构用于估计所述中间运动向量和所述目标运动向量。
17.根据权利要求12所述的装置,其中,所述恢复模块估计中间运动向量组,其中,所述目标运动向量是基于所述中间运动向量组来估计的。
18.根据权利要求12所述的装置,其中,所述中间运动向量是基于所述视频比特流的解码的基础层来估计的。
19.一种包括一组指令的计算机可读存储介质,如果所述指令由处理器执行,则使得计算机进行以下操作:
接收视频比特流的解码的增强层,其中,所述解码的增强层与所述视频比特流的先前层相关联,并且其中,由于关于所述视频比特流的分组丢失状况而造成所述先前层未被解码;
估计所述先前层的中间运动向量;并且
基于所述中间运动向量来估计所述解码的增强层的目标运动向量。
20.根据权利要求19所述的介质,其中,如果所述指令被执行,则使得计算机将上采样输出门维持在闭合状态,直到所述目标运动向量已被估计。
21.根据权利要求19所述的介质,其中,如果所述指令被执行,则使得计算机在可靠性图中将与所述目标运动向量相关联的宏块标记为不可靠。
22.根据权利要求21所述的介质,其中,如果所述指令被执行,则使得计算机进行以下操作:
确定针对多个周围的可靠宏块的平均运动向量;
确定所述平均运动向量与所述目标运动向量之间的差;并且
如果所述差超出阈值,则将所述平均运动向量分配给所述目标运动向量。
23.根据权利要求19所述的介质,其中,如果所述指令被执行,则使得计算机维持列表架构,所述列表架构包括解码的层列表、恢复的层列表和参考层列表中的一个或多个,并且其中,所述列表架构用于估计所述中间运动向量和所述目标运动向量。
24.根据权利要求19所述的介质,其中,如果所述指令被执行,则使得计算机估计中间运动向量组,其中,所述目标运动向量是基于所述中间运动向量组来估计的。
25.根据权利要求19所述的介质,其中,所述中间运动向量是基于所述视频比特流的解码的基础层来估计的。
26.一种包括一组指令的计算机可读存储介质,如果所述指令由处理器执行,则使得计算机进行以下操作:
识别与视频比特流相关联的宏块;
基于关于所述宏块中的一个或多个运动向量的期望的恢复误差,为所述宏块选择编码模式。
27.根据权利要求26所述的介质,其中,如果所述指令被执行,则使得计算机进行以下操作:
基于所述期望的恢复误差将优先级系数分配给多个编码模式中的每一个,以获取相对应的多个优先级系数;
基于所述宏块确定针对所述多个编码模式中的每一个的率失真代价,以获取相对应的多个率失真代价;
通过相对应的优先级系数来调节每一个率失真代价,以获取多个经调节的率失真代价;并且
在所述多个经调节的率失真代价中识别最优值,其中,所选择的编码模式与所述最优值相关联。
28.根据权利要求27所述的介质,其中,如果所述指令被执行,则使得计算机将每一个率失真代价乘以相对应的优先级系数,以获取所述多个经调节的率失真代价。
29.根据权利要求27所述的介质,其中,相比于帧内编码模式,所述多个优先级系数为帧间编码模式定义更大的优先级。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/RU2012/001020 WO2014088446A1 (en) | 2012-12-05 | 2012-12-05 | Recovering motion vectors from lost spatial scalability layers |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104782130A true CN104782130A (zh) | 2015-07-15 |
CN104782130B CN104782130B (zh) | 2018-06-08 |
Family
ID=50883758
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201280076863.6A Active CN104782130B (zh) | 2012-12-05 | 2012-12-05 | 从丢失的空间可扩展层恢复运动向量 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10034013B2 (zh) |
CN (1) | CN104782130B (zh) |
TW (1) | TWI596932B (zh) |
WO (1) | WO2014088446A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108769808A (zh) * | 2018-05-24 | 2018-11-06 | 安徽质在智能科技有限公司 | 交互式视频播放方法和系统 |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20140121315A (ko) * | 2013-04-04 | 2014-10-15 | 한국전자통신연구원 | 참조 픽처 리스트를 이용한 다 계층 기반의 영상 부호화/복호화 방법 및 그 장치 |
US9736477B2 (en) * | 2013-09-09 | 2017-08-15 | Ati Technologies Ulc | Performing video encoding mode decision based on motion activity |
US11295525B1 (en) | 2016-09-30 | 2022-04-05 | Amazon Technologies, Inc. | Augmenting transmitted video data |
US10950049B1 (en) | 2016-09-30 | 2021-03-16 | Amazon Technologies, Inc. | Augmenting transmitted video data |
US10943396B1 (en) * | 2016-09-30 | 2021-03-09 | Amazon Technologies, Inc. | Synchronizing transmitted video data and enhancements |
CN109068138B (zh) * | 2018-08-07 | 2021-12-24 | 北京市商汤科技开发有限公司 | 视频图像的处理方法及装置、电子设备和存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1711018A1 (en) * | 2005-04-08 | 2006-10-11 | Thomson Licensing | Method and apparatus for encoding video pictures, and method and apparatus for decoding video pictures |
CN1939066A (zh) * | 2004-04-02 | 2007-03-28 | 汤姆森许可贸易公司 | 用于复杂度可伸缩视频解码器的方法和设备 |
CN101401432A (zh) * | 2006-01-11 | 2009-04-01 | 三菱电机株式会社 | 可分级视频编码的错误隐藏 |
US20090138773A1 (en) * | 2007-11-28 | 2009-05-28 | Canon Kabushiki Kaisha | Method and device for processing a hierarchical multimedia data stream transmitted over a network with loss |
WO2011136575A2 (en) * | 2010-04-28 | 2011-11-03 | Samsung Electronics Co., Ltd. | Apparatus and method for allocating a data rate in a multi-antenna transmitter |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6816194B2 (en) | 2000-07-11 | 2004-11-09 | Microsoft Corporation | Systems and methods with error resilience in enhancement layer bitstream of scalable video coding |
US7072394B2 (en) | 2002-08-27 | 2006-07-04 | National Chiao Tung University | Architecture and method for fine granularity scalable video coding |
WO2006109116A1 (en) | 2005-04-13 | 2006-10-19 | Nokia Corporation | Method, device and system for effective fine granularity scalability (fgs) coding and decoding of video data |
US8150684B2 (en) * | 2005-06-29 | 2012-04-03 | Panasonic Corporation | Scalable decoder preventing signal degradation and lost data interpolation method |
US7617436B2 (en) | 2005-08-02 | 2009-11-10 | Nokia Corporation | Method, device, and system for forward channel error recovery in video sequence transmission over packet-based network |
JP5587552B2 (ja) | 2005-10-19 | 2014-09-10 | トムソン ライセンシング | スケーラブル映像符号化を用いた多視点映像符号化 |
CN101578866B (zh) * | 2006-10-20 | 2013-11-13 | 诺基亚公司 | 利用参考画面标记和参考画面列表对可缩放视频位流进行编解码的方法及装置 |
US8126054B2 (en) * | 2008-01-09 | 2012-02-28 | Motorola Mobility, Inc. | Method and apparatus for highly scalable intraframe video coding |
TWI386063B (zh) * | 2008-02-19 | 2013-02-11 | Ind Tech Res Inst | 可調性視訊編碼標準的位元流分配系統與方法 |
KR101739821B1 (ko) * | 2008-07-22 | 2017-05-25 | 톰슨 라이센싱 | 스케일러블 비디오 코딩(svc)디코딩에서 향상 계층의 패킷 분실에 기인한 오류 은폐를 위한 방법 |
-
2012
- 2012-12-05 CN CN201280076863.6A patent/CN104782130B/zh active Active
- 2012-12-05 WO PCT/RU2012/001020 patent/WO2014088446A1/en active Application Filing
- 2012-12-05 US US13/996,001 patent/US10034013B2/en active Active
-
2013
- 2013-11-18 TW TW102141920A patent/TWI596932B/zh not_active IP Right Cessation
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1939066A (zh) * | 2004-04-02 | 2007-03-28 | 汤姆森许可贸易公司 | 用于复杂度可伸缩视频解码器的方法和设备 |
EP1711018A1 (en) * | 2005-04-08 | 2006-10-11 | Thomson Licensing | Method and apparatus for encoding video pictures, and method and apparatus for decoding video pictures |
CN101401432A (zh) * | 2006-01-11 | 2009-04-01 | 三菱电机株式会社 | 可分级视频编码的错误隐藏 |
US20090138773A1 (en) * | 2007-11-28 | 2009-05-28 | Canon Kabushiki Kaisha | Method and device for processing a hierarchical multimedia data stream transmitted over a network with loss |
WO2011136575A2 (en) * | 2010-04-28 | 2011-11-03 | Samsung Electronics Co., Ltd. | Apparatus and method for allocating a data rate in a multi-antenna transmitter |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108769808A (zh) * | 2018-05-24 | 2018-11-06 | 安徽质在智能科技有限公司 | 交互式视频播放方法和系统 |
Also Published As
Publication number | Publication date |
---|---|
US20150049812A1 (en) | 2015-02-19 |
TWI596932B (zh) | 2017-08-21 |
WO2014088446A1 (en) | 2014-06-12 |
CN104782130B (zh) | 2018-06-08 |
US10034013B2 (en) | 2018-07-24 |
TW201424401A (zh) | 2014-06-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104782130A (zh) | 从丢失的空间可扩展层恢复运动向量 | |
CN103581665B (zh) | 转码视频数据 | |
CN112399178A (zh) | 视觉质量优化的视频压缩 | |
CN104782124B (zh) | 利用编码器硬件对视频内容进行预处理 | |
CN110599492A (zh) | 图像分割模型的训练方法、装置、电子设备及存储介质 | |
CN104335587B (zh) | 对于三维视频译码的视图间滤波器参数重复使用 | |
CN103179393B (zh) | 降低运动补偿和显示刷新中的功耗的dram压缩方案 | |
CN106170979A (zh) | 恒定质量视频编码 | |
CN104904231A (zh) | 将缩略图信息嵌入视频流 | |
CN104541506A (zh) | 层间像素样本预测 | |
CN110913218A (zh) | 一种视频帧预测方法、装置及终端设备 | |
CN106664412A (zh) | 包括目标比特率的视频编码速率控制和质量控制 | |
CN103533286A (zh) | 用于带静态区域排除的时间帧内插的方法和系统 | |
CN104205161A (zh) | 用于块压缩图象的解压缩的系统、方法和计算机程序产品 | |
CN104169971A (zh) | 使用非线性缩放和自适应源块大小的分层运动估计 | |
CN107005697A (zh) | 用于视频译码的使用基于查找表的概率更新的熵译码的方法与系统 | |
CN103501439A (zh) | 使用运动估计失真的帧级率控制 | |
CN107079192A (zh) | 使用压缩视频流的动态屏幕上显示 | |
CN104521233A (zh) | 运动和质量适应的回滚帧内刷新 | |
CN104956671B (zh) | 视频帧重建 | |
CN104094603A (zh) | 用于在视频编码系统中进行集成元数据插入的系统和方法 | |
US20140003789A1 (en) | Playback of video content based on frame-level ratings | |
CN103975594B (zh) | 用于残差预测的运动估计方法 | |
CN115941966A (zh) | 一种视频压缩方法及电子设备 | |
CN107018287A (zh) | 使用视频缩影对图像进行降噪的方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
EXSB | Decision made by sipo to initiate substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |