CN102158713B - 通过网络传输信号的方法和系统 - Google Patents

通过网络传输信号的方法和系统 Download PDF

Info

Publication number
CN102158713B
CN102158713B CN2011101203762A CN201110120376A CN102158713B CN 102158713 B CN102158713 B CN 102158713B CN 2011101203762 A CN2011101203762 A CN 2011101203762A CN 201110120376 A CN201110120376 A CN 201110120376A CN 102158713 B CN102158713 B CN 102158713B
Authority
CN
China
Prior art keywords
frame
encoder
speed cache
decoder
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2011101203762A
Other languages
English (en)
Other versions
CN102158713A (zh
Inventor
林志隆
夏明辉
徐柏翔
S·瑞古纳莎恩
T·W·胡尔库姆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of CN102158713A publication Critical patent/CN102158713A/zh
Application granted granted Critical
Publication of CN102158713B publication Critical patent/CN102158713B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164—Feedback from the receiver or from the transmission channel
    • H04N19/166—Feedback from the receiver or from the transmission channel concerning the amount of transmission errors, e.g. bit error rate [BER]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/188—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a video data packet, e.g. a network abstraction layer [NAL] unit
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/573—Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/54—Store-and-forward switching systems 
    • H04L12/56—Packet switching systems
    • H04L12/5601—Transfer mode dependent, e.g. ATM
    • H04L2012/5603—Access techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Radar Systems Or Details Thereof (AREA)

Abstract

提供了通过网络传输信号的方法和系统。揭示了使用帧高速缓存来改善分组丢失恢复的各种新的和非显而易见的装置和方法。所揭示的实施例中的一个是一种在编码器及其对应的解码器内使用周期性和同步的帧高速缓存的方法。当解码器发现分组丢失时，它通知编码器，后者随即基于存储在编码器和解码器两处的若干共享帧中的一个生成帧。当解码器接收到这个生成的帧时，它能够使用其本地已高速缓存的帧来对其进行解码。

Description

通过网络传输信号的方法和系统
本申请是申请日为2005年11月30日、申请号为200510128750.8、发明名称为“使用帧高速缓存来改善分组丢失恢复”的中国专利申请的分案申请。
技术领域
本发明一般涉及用于数字地编码、解码和处理视频、图像及其它数字媒体内容的技术。本发明由其涉及通过帧高速缓存来改善分组丢失恢复。
背景技术
数字视频消耗大量存储和传输容量。典型的原始数字视频序列每秒包括15或30帧。每一帧都可包括数以万计或十万计的像素(也称为象素)。每个像素表示图像一个微小的元素。在原始形式中，计算机通常将像素表示为总计为24比特的三个样本的集合。例如，一个像素可包括定义该像素的灰度级分量的8比特亮度样本(也称为luma样本)，以及定义该像素的色彩分量的两个8比特色度样本值(也称为chroma样本)。由此，典型的原始数字视频序列每秒的比特数，或称比特率，可为每秒五百万比特或以上。
许多计算机和计算机网络缺乏处理原始数字视频的资源。为此原因，工程师们使用压缩(也称为编码)来降低数字视频的比特率。压缩通过将视频转换为较低比特率的形式降低存储和传输视频的消耗。解压缩(也称为解码)从已压缩的形式重构原始视频版本。“编解码器”是一种编码器/解码器系统。压缩可以是无损的，其中视频的质量没有损失，但比特率的降低受到视频数据的可变性的固有量(有时称为熵)限制。或者，压缩可以是有损的，其中视频的质量有损失，但可实现的比特率的降低更为可观。有损压缩常常被结合无损压缩来使用——在一种系统设计中，有损压缩建立信息的近似，而无损压缩被应用以表示该近似。
一般而言，视频压缩技术包括“图像内”压缩和“图像间”压缩，其中图像是例如逐行扫描的视频帧、隔行的视频帧(具有交替的行用于视频半帧(field))、或隔行的视频半帧。一般而言，视频序列在给定帧内及相继帧之间包含相当大量的冗余。例如，人眼一般不会注意连续的视频帧里相似背景中的细微的差异。压缩通过移除所发送的比特流内某部分冗余素材，然后当该图像被解压缩时在接收端将其加回，来利用这些冗余。从视频帧中减去的两种常见的冗余是空间和时间冗余。空间冗余在单个帧内的相邻像素之间发生。使用空间冗余来压缩的帧(称为内帧或I帧)在该帧自身内包含重构图像所需的所有信息——它们是自包含的。使用时间冗余的帧(诸如P帧和B帧)需要来自其它帧的信息以进行解码。P帧(预测编码帧)是使用来自前面的I帧和/或P帧的信息来编码的，并且必须使用这些信息来解码。B帧(双向预测编码帧)是同时使用来自前面和后面的I帧和P帧两者的信息来编码的。运动估计通过将独特的内容随从前一已编码的图像(称为参考帧)创建的运动预测图像一起编码来移除连续视频帧(帧间)中的时间冗余。如果参考帧丢失，则其随后的各预测帧将无法被译码——传输误差传播到后续各帧。
对于逐行帧，图像内压缩的技术压缩个体帧(通常称为I帧或关键帧)，而图像间压缩的技术参考在前和/或后续的帧(通常称为参考帧或锚帧)来压缩帧(通常称为预测帧、P帧、或B帧)。I帧(自包含的)和P帧(一般参考在前的帧)本身也可以是参考帧，而同时参考在前和后续帧两者的B帧通常本身不会被用作参考。
当数据在最终视频被显示以前被解压缩时，解码器通常执行压缩操作的逆操作。例如，解码器在解压缩数据时可执行熵解码、逆量化、以及逆转换。当使用运动补偿时，解码器(和编码器)从一个或多个先前重构的帧(现在被用作参考帧)重构一个帧，然后该最近被重构的帧可作为后面各帧的运动补偿的参考帧使用。
通过网络发送的分组容易被丢失——分组被漏失。此丢失的发生是随机且不可预测的。此外，视频压缩流数据对延迟高度敏感；因为分组需要按照它们被发送的相同顺序被重新装配；过多的被延迟的分组会引起跳跃的、中断的信号。传送延迟问题还可能在重新发送新的I帧时发生；新帧易受所有破坏了丢失的参考帧的相同问题的影响。此外，在有损编码方案中，压缩被设计成满足用于存储和传输的目标比特率。高度压缩是通过降低重构图像的质量来实现的。因此，被漏失或延迟的分组所引起的额外丢失可能将图像降低到可接受的等级以下。
处理分组丢失的容限对实时视频编解码器(RTC)在有噪网络(容易产生丢失)中表现良好来说至关重要。大多数现有视频编解码器在参考帧丢失时，通过请求新的I帧来应对分组丢失。其它则使用基于时间片(slice)的编码，这会增加信令开销。图1示出通过请求新I帧来进行的常规分组丢失恢复。
在此现有技术的方法中，在解码器102处接收到I帧104。它随即被用于解释/重构后续的相关的P帧106。下一个相关的帧，P帧108被破坏，因为乱序地接收了或丢失了过多的帧。后续的P帧110和任何其后的帧不再能被重构。在目的节点(此处由解码器102表示)处，生成I帧请求并向源节点(此处由编码器114表示)发送。每个后续的P帧或B帧都无法被重构，直至接收到新的I帧。一旦源节点114接收到请求，它即装配新的I帧并使用通信信道将其发送到目的节点102。在接收到新I帧112以后，目的节点可成功地将各后续P帧解码。但是，这导致等价于发送初始请求所需的时间、加上将I帧编码的时间、加上将I帧发送到目的节点102的时间的延迟116。此外，发送者和接收者可能分开很长的实际距离，而很长的距离导致明显的滞后时间，还有视频质量的相应降低。
在另一种现有技术的方法中，以有规律的间隔发送I帧104、112。当I帧112由于破坏或延迟被丢失时，解码器等待直至接收到下一I帧，从而对后续P帧110、108进行了错误的解码。
因此，有必要改进用于通过基于有损分组的网络传输压缩视频的方法和系统。
发明内容
本文中所描述的一种视频编解码器包括编码器处的帧高速缓存，以及解码器处的对应的帧高速缓存，其中每一个都可同步工作。解码器高速缓存中的帧被用来帮助解释解码器处的帧。要被解释的帧可能是使用存储在编码器高速缓存中的相同帧的副本已生成的。
还提供一种系统实现。它包括将数据分组编码为帧的编码器，以及能够存储帧或其部分的编码器高速缓存。它还包括带有解码器高速缓存的解码器，该高速缓存也可存储帧或其部分。解码器可用于检测分组丢失。当检测到此类丢失时，在一些实施例中，编码器使用存储在编码器高速缓存处的帧来编码一个帧，然后在解码器处使用存储在解码器高速缓存中的帧将该帧解码。
此高速缓存机制提供以下关键特征：
a)在分组丢失恢复过程中更有效率的带宽利用，以及
b)消除了与基于时间片的编码相关联的信令开销。
从以下参考附图对各实施例的详细描述中，本发明的其它特征和优点将被明确。
附图说明
图1是现有技术的帧级分组丢失恢复的示意图。
图2是利用本文中所描述的帧高速缓存的视频编码器的框图。
图3是利用本文中所描述的帧高速缓存的视频解码器的框图。
图4是使用帧高速缓存从分组丢失中恢复的一种示例性方法的流程图。
图5A是编码器高速缓存一个帧而解码器高速缓存相同帧的帧级示意图。
图5B是被破坏的P帧到达解码器处的帧级示意图。
图5C是示出解码器使用被高速缓存的帧来解释P帧的帧级示意图。
图5D是通过反馈信道报告分组丢失的框图。
图6是用于实现视频编码器/解码器高速缓存的合适的方法的流程图。
图7是适用于图2和3的视频编码器/解码器的计算环境的框图。
具体实施方式
以下描述针对在视频编码器和视频解码器两者中实现帧高速缓存，它被设计成提供适度的分组丢失恢复和有效的带宽利用的有效组合。帧高速缓存的一种示例性应用是在图像或视频编码器和解码器中。由此，帧高速缓存是在一般化的图像或视频编码器和解码器的上下文中描述的，但是也可被结合到细节上与下述的示例性装置不同的各种其它图像和视频编解码器的编码器和解码器中。
1.一般化的视频编码器和解码器
图2是一般化的视频编码器200的框图，而图3是一般化的视频解码器300的框图，帧高速缓存可被结合到其中。
所示的编码器和解码器内部各模块之间的关系指示编码器和解码器中的主信息流；为简单起见，没有示出其它关系。特别地，图2和3通常不示出指示编码器设置、模式、表等为视频序列、帧、宏块、块等所使用的辅助信息(side information)。此类辅助信息是通常在辅助信息的熵编码以后在输出比特流中被发送的。输出比特流的格式可以是Windows Media Video格式或其它格式。
取决于实现和期望的压缩类型，编码器200或解码器300的各个模块可被添加、省略、分成多个模块、与其它模块集合、和/或用类似模块代替。在替换实施例中，带有不同模块和/或模块的其它配置的编码器和解码器执行所述技术中的一种或数种。
A.视频编码器
图2是一般的视频编码器系统200的框图。编码器系统200接收包括当前帧205在内的视频帧序列，并生成已压缩的视频信息295作为输出。视频编码器的特定实施例通常使用一般化编码器200的变体或增补版本。
编码器系统200压缩预测帧和关键帧。为了说明，图2示出关键帧通过编码器系统200的路径，以及前向预测帧的路径。编码器系统200的许多组件都被用于压缩关键帧和预测帧两者。取决于所压缩的信息的类型，那些组件所执行的确切操作可有所不同。
预测帧[可以是P帧、B帧(双向预测)、或帧间编码帧]是以从一个或多个其它帧的预测(或差异)的形式表示的。预测残余是预测帧和原始帧之间的差异。与之相反，关键帧[也称为I帧、或帧内编码帧]是不用参考其它帧而压缩的。
如果当前帧205是前向预测帧，则运动估计器210根据参考帧225(缓冲在帧存储220中的前一重构帧)估算当前帧205的宏块或其它像素集合。在替换实施例中，参考帧可以是后面的帧，或者当前帧可被双向地预测。运动估计器210输出诸如运动矢量等运动信息215作为辅助信息。运动补偿器230将运动信息215应用于前一重构帧225以构成经运动补偿的当前帧235。但是，预测通常是不完美的，而经运动补偿的当前帧235和原始当前帧205之间的差异是预测残余245。或者运动估计器210和运动补偿器230应用其它类型的运动估计/补偿。
频率变换器260将空间域的视频信息转换成频域(即，频谱)数据。对于基于块的视频帧，频率变换器260应用以下部分中所描述的变换，它具有类似于离散余弦变换[“DCT”]的属性。在一些实施例中，频率变换器260为关键帧对空间预测残余块应用频率变换。频率变换器260可应用8x8、8x4、4x8或其它大小的频率变换。
然后量化器270量化频谱数据系数块。量化器270用逐帧或其它方式改变的步长，对频谱数据应用均匀的、标量的量化。或者，量化器270对频谱数据系数应用另一类量化，例如，非均匀的、矢量的、或非自适应的量化，或者在不使用频率变换的编码器系统中直接量化空间域数据。除了自适应量化以外，编码器200可使用帧丢弃、自适应过滤、或其它技术来进行速率控制。
当后续的运动估计/补偿需要重构的当前帧时，逆量化器276对经量化的频谱数据系数执行逆量化。然后频率逆变换器266执行频率变换器260的操作的逆操作，以生成重构的预测残余(对应于预测帧)或重构的关键帧。如果当前帧205是关键帧，则重构的关键帧被视为重构的当前帧(未示出)。如果当前帧205是预测帧，则重构的预测残余被增加到经运动补偿的当前帧235，以构成重构的当前帧。帧存储220缓冲该重构的当前帧，以供预测下一个帧使用。在一些实施例中，编码器200对重构的帧应用解块过滤器，以自适应地平滑帧块中的不连续。
熵编码器280压缩量化器270的输出，以及某些辅助信息(例如，运动信息215、量化步长)。典型的熵编码技术包括算术编码、差分编码、霍夫曼编码、行程长度编码、LZ编码、字典编码、以及上述的组合。熵编码器280通常对不同类型的信息(例如，DC系数、AC系数、等等)使用不同的编码技术，并且可在特定编码技术内从多个代码表中间进行选择。
熵编码器280将已压缩的视频信息295放到缓冲器290中。缓冲等级指示被反馈给比特率自适应模块。已压缩的视频信息295以恒定或相对恒定的比特率被从缓冲器290排空并存储以用于后续的此比特率的流传输。或者，编码器系统200在压缩以后立即流传输已压缩的视频信息295。
在缓冲器290以前或以后，已压缩的视频信息295可被信道编码以通过网络传输。信道编码可对已压缩的视频信息295运用检错和纠错数据。
B.视频解码器
图3是一般的视频解码器系统300的框图。解码器系统300接收已压缩的视频帧序列的信息395并产生包括重构帧305在内的输出。视频解码器的特定实施例通常使用一般化的解码器300的变体或增补版本。
解码器系统300解压缩预测帧和关键帧。为了说明，图3示出关键帧通过解码器系统300的路径，以及前向预测帧的路径。解码器系统300的许多组件都被用于解压缩关键帧和预测帧两者。取决于所解压缩的信息的类型，那些组件所执行的确切操作可能有所不同。
缓冲器390接收已压缩视频序列的信息395，并使已接收的信息对熵解码器380可用。缓冲器390通常以时间上相当恒定的速率接收信息，并且包括抖动缓冲器来平滑带宽或传输中的短期变动。缓冲器390还可包括回放缓冲器和其它缓冲器。或者，缓冲器390以变化的速率接收信息。已压缩的视频信息395可在到达缓冲器390之前，或在其离开缓冲器390之后，或两者皆可，被解码并处理以进行检错和纠错。
熵解码器380对经熵编码的已量化数据、以及经熵编码的辅助信息(例如，运动信息、量化步长)进行熵解码，通常是应用在编码器200中执行的熵编码的逆操作。熵解码技术包括算术解码、差分解码、霍夫曼解码、行程长度解码、LZ解码、字典解码、以及上述的组合。熵解码器380通常对不同种类的信息(例如，DC系数、AC系数、不同种类的辅助信息)使用不同的解码技术，并可在特定解码技术内从多个代码表中间进行选择。
如果要被重构的帧是前向预测帧，则运动补偿器330将运动信息315应用于参考帧325，以构成对被重构的帧305的预测335。例如，运动补偿器330使用宏块运动矢量在参考帧中寻找宏块。帧缓冲器320存储先前所重构的帧以作为参考帧使用。或者，运动补偿器应用另一种类型的运动补偿。运动补偿器330的预测通常是不完美的，所以解码器300还重构预测残余345。
当解码器300需要已重构的帧用于后续的运动补偿时，帧存储320缓冲已重构的帧305以供预测下一个帧时使用。在一些实施例中，编码器200对已重构的帧305运用解块过滤器，以自适应地平滑帧块的不连续。
逆量化器370逆量化经熵解码的数据。一般而言，逆量化器370根据以逐帧或其它方式改变的步长，对经熵解码的数据应用均匀的、标量的逆量化。或者，逆量化器370对数据应用另一种类型的逆量化，例如，非均匀的、矢量的、或非自适应的逆量化，或者在不使用逆频率变换的解码器系统中直接逆量化空间域数据。
频率逆变换器360将量化的、频域的数据变换为空间域的视频信息。对于基于块的视频帧，频率逆变换器360应用以下部分中所描述的逆变换。在一些实施例中，频率逆变换器360为关键帧对空间预测残余应用频率逆变换。频率逆变换器360可应用8x8、8x4、4x8或其它大小的频率逆变换。
C.帧高速缓存
在本文所描述的视频编解码器体系结构内使用帧高速缓存的实现中，较佳的是在编码器和解码器两处都依次高速缓存参考帧。当参考帧被丢失，可使用解码器处高速缓存的适当参考帧来解码后续的相关帧。这产生以下好处：
A)更有效率的带宽利用：现有技术的方法要求I帧被生成并发送到编码器。而此方法允许特殊类型的帧，SP帧被发送到解码器。SP帧一般可用比相同质量的I帧更少的比特来编码，因此比起使用等价的I帧，SP帧使用较少的带宽。
B)较快的差错恢复。
2.示例性方法概述
所描述的实施例包括用于在解码器处高速缓存帧、然后使用被高速缓存的帧来重构依赖于已被破坏或丢失的参考帧的P帧和B帧的技术和工具。高速缓存可被集成为视频解码器300(图3)的一部分，视频编码器200(图2)的一部分，或较佳的是同时被集成为这两者的一部分。当解码器检测到分组丢失时，它向编码器300发送消息，编码器300随即基于共享的已高速缓存的若干帧中的一个帧生成新的参考帧。所生成的参考帧随即被发送给解码器。已高速缓存的帧在解码器处被用来解码所生成的帧和后续的相关帧，直至另一个参考帧到达解码器处。本文中所描述的流程图元素只是示例；根据所描述的技术，可使用其它流程图元素。此外，根据所描述的技术和工具，流程图元素可按不同顺序发生，或者特定的过程块可被跳过。
所描述的技术和工具可彼此结合或结合其它技术和工具来使用，或可被独立使用。
参考图4，流程图400示出本文中所揭示的方法的简要概览。在过程框402，一部分要通过网络发送的视频信号被分配给若干个分组。在过程框404，编码器编码视频信号的帧，这些帧被分配给一个或多个分组用于传输。这些帧可包括参考帧325(诸如I帧和P帧)，还可包括B帧，后者不被用作为任何其它帧类型的参考。诸如跳帧等其它类型的帧也可被编码为帧。在可选的过程框406，帧(通常是参考帧)可被高速缓存在编码器处。如果该帧被高速缓存，则它在其帧头部被赋予类型“已高速缓存的帧”(CF)。然后，被高速缓存的帧连同其它帧被发送到解码器。一旦帧在解码器处，在过程框410，它就被高速缓存在解码器高速缓存中。典型的被高速缓存的帧类型是P帧和I帧。
如果后续的参考帧被丢失，则已高速缓存的帧可被用来解压缩以后的相关帧，如在过程框412所示。流程图400仅示出一个示例性实施例，且无论如何不应被解释为是限制性的。例如，在决策框406，与编码器相关联的高速缓存是可选的。方法400可在如图2和3中所示的视频编解码器中实现，而该视频编解码器可在软件、硬件、或两者的结合中实现。
3.用于高速缓存帧的示例性方法
图5A到5D示出高速缓存帧以在有噪网络中实现视频编解码器的最优性能的示例性方法。参考图5D，在一个示例性实施例中，帧通过诸如RTP(实时传输协议)508D的主信道从编码器502D被发送到解码器506D。网络常常丢失分组，或乱序地传递分组。分组还可能被延迟随机的时间量，这也可能令它们不可使用。分组丢失事件被解码器506D检测到，并通过反馈信道从解码器向编码器502D发信号通知。为正确重构消息，在一些实施例中，RTP 508D头部包含信息和序列号，它们都允许接收器正确地重新将分组排序并确定所丢失的分组个数。RTP 508D由其控制协议(RTPC)504D增强，后者用来提供用于监视数据传递的反馈信道。每个数据分组都有一个序列号，通常每个后续数据分组递增1。在一个示例性实施例中，当某个序列号未被接收到时，分组丢失被解码器506D检测到。一旦解码器506D发现丢失分组，它即通过反馈信道504D发送消息，以通知编码器502D哪个(或哪些)分组已被丢失。在一些实施例中，仅提供关于最初丢失的分组的信息。在其它实施例中，还提供诸如漏失的分组数或丢失的具体分组的列表等附加信息。较佳的是在报告窗口中使用最早丢失的分组的时间戳来发送分组丢失的位置。此信息使编码器502D能够确定要使用哪个已高速缓存的参考。
参考图5A，编码器502A周期性地将帧高速缓存到帧高速缓存504A中。要高速缓存哪些帧，高速缓存应该多频繁地发生，以及在单次应能高速缓存的帧数是非常取决于实现方式的。在一些实施例中，被高速缓存的帧是参考帧，即P帧和I帧。也可高速缓存其它帧类型。被高速缓存的帧506A(或其副本)还被发送给解码器512A。也存储在编码器高速缓存504A中的这样一个帧在其头部中被定义为帧类型CF(已高速缓存的帧)。在一些实施例中，此头部通过令解码器512A知道此特定帧应被高速缓存在解码器高速缓存510A中以供稍后使用，来允许编码器502A和解码器512A的同步。以下的表1示出包括已高速缓存的帧(CF)类型在内的帧类型代码的一个示例性实施例。
表1：帧类型代码
  帧类型   代码字(二进制)
  I   110
  P   0
  B   10
  BI   1110
  SKIP   11111
  SP   111100
  CF   111101
当CF类型的帧508A到达解码器512A时，它被存储在解码器帧高速缓存510A中。在解码器512A处存储每个CF类型的帧是一种同步编码器和解码器帧高速缓存504A和510A的方法。但是，还构想了同步这些帧高速缓存的其它方法。
当在解码器504B处检测到分组丢失502B时，使用反馈信道504D将此丢失向编码器502A回报。较佳的是，此报告包含时间戳信息，它允许编码器502A选择正确的已高速缓存的帧504A来参考。在其它实施例中，使用最后被高速缓存的帧。一旦选择了一个已高速缓存的帧504C，即由编码器502C使用该帧504C来编码下一个帧506C，较佳的是帧506C是P帧，但也可编码I帧或其它帧类型。这个使用已高速缓存的帧506C来编码的帧被称为“超P”帧(SP帧)，并在其头部相应通知。SP帧的一种示例性帧类型代码字在以上的表1中示出。
当解码器512C接收SP帧508C时，它使用本地高速缓存的帧510C将该SP帧508C解码成未压缩的帧(U帧)514C。使用此方法，解码器512C处的恢复时间是分组丢失事件和SP帧到达之间的时间间隔。如果这个所生成的SP帧508C在发送期间被丢失，则解码器512C将继续发送分组丢失报告，直至新的参考帧(一般是类型P、SP或I)到达。从分组丢失起的实际恢复时间主要是根据分组丢失报告时间间隔而定。
在一些实施例中，编码器502A高速缓存帧504A，并周期性地向解码器发送已高速缓存的帧506A的副本。被发送的已高速缓存的帧之间的时间长度是非常取决于实现方式的。一些实现可以相等的时间间隔高速缓存帧。其它实现可以本身取决于诸如网络速度或网络所经受的丢失量等系统变量的时间间隔高速缓存帧。
4.示例性系统实施例
图6示出可用于实现基于解码器和编码器的帧高速缓存的视频系统600的另一个示例性实施例。视频系统600并不试图对本发明的使用范围或功能提出任何限制，因为本发明可在各种通用或专用视频系统中实现。
该视频系统包括至少一个编码器602。此编码器还包括编码器高速缓存604。在所示实施例中，高速缓存驻留在编码器602内部，但在其它实现中可驻留在视频系统内部的其它地方。编码器高速缓存604被启用以存储一个或多个视频帧节606。作为建议而非限制，这些帧节可包括若干个块、宏块、若干个片、完整的帧、帧组、或本领域技术人员可构想的帧的任何其它划分。编码器高速缓存604可仅高速缓存一个帧部分，可高速缓存两个部分，或合乎给定实现需要的任何数量的部分。视频系统600还包括解码器608。类似于编码器602，解码器608包含解码器高速缓存610，它用来存储一个或多个视频帧部分612。这些视频帧部分可包括一个或多个块、宏块、片、或可包括完整的帧、帧组、或本领域技术人员可构想的帧的任何其它部分。解码器高速缓存610可被设定为存储一个帧部分、两个帧部分、或任何其它数量的帧部分。
视频系统600还包括同步器614，它用来确保编码器高速缓存604和解码器高速缓存610包含实际相同的信息。如前文所讨论，同步器可包括附加到某些帧或部分帧的唯一帧头部，它由编码器602所应用，以通知解码器608要高速缓存特定的一个或一部分帧。例如，帧可被存储在编码器高速缓存604处，还可被发送给解码器608。该帧可具有加以区别的CF(已高速缓存的帧)头部，以指示它有副本存储在编码器高速缓存604中。当解码器608检测到分组丢失或其它使得对帧进行解码变得困难或不可能的破坏时，编码器602从存储在编码器高速缓存604中的帧编码的后续帧可被标记以指示此帧可从解码器高速缓存610处的帧解码。一些实现可在解码器高速缓存610处存储多个帧；在此类情形中，头部还可任选地包含足以确定应该使用哪个已高速缓存的帧的其它信息。还构想了其它同步方法。发送器616将帧从编码器602发送到解码器608。
5.计算环境
上述的帧高速缓存的实现可在实现图像和视频信号处理的各种设备中的任何一种上进行，这些设备包括计算机、图像和视频录制、发送和接收设备、便携式视频播放器、视频会议、web视频流传输应用程序、等等。图像和视频编码技术可以在硬件电路中(例如，在ASIC电路、FPGA等中)、以及在诸如图7中所示等计算机或其它计算环境内部执行(无论是在中央处理单元(CPU)上、还是在专用图形处理器、视频卡等上执行)的视频处理软件中实现。
图7示出可实现所描述的帧高速缓存的适用的计算环境700的一般化示例。计算环境700并不视图对本发明的使用范围或功能提出任何限制，因为本发明可在各种通用或专用计算环境中实现。
计算环境700包括至少一个处理单元710和存储器720。此最基本的配置730被包括在虚线内部。处理单元710执行计算机可执行的指令，并可以是真实或虚拟的处理器。在多处理系统中，多个处理单元执行计算机可执行指令以提高处理能力。存储器720可以是易失性存储器(例如，寄存器、高速缓存、RAM、等等)、非易失性存储器(例如，ROM、EEPROM、闪存、等等)、或这两者的某种组合。存储器720存储实现所述编码器/解码器高速缓存的软件780。
计算环境可具有其它特征。例如，计算环境700包括存储740、一个或多个输入设备750、一个或多个输出设备760、以及一个或多个通信连接770。诸如总线、控制器或网络等互连机制(未示出)将计算环境700的各个组件相互连接。通常，操作系统软件(未示出)为计算环境700中执行的其它软件提供操作环境，并协调计算环境700的各组件的活动。
存储740可以是可移动或不可移动的，并且包括磁盘、磁带或磁带盒，CD-ROM、CD-RW、DVD，或任何其它可被用来存储信息并且在计算环境700内部可被访问的任何其它介质。存储740存储实现编码器/解码器高速缓存方案的软件780。
输入设备750可以是诸如键盘、鼠标、笔、或轨迹球等触摸式输入设备，语音输入设备，扫描输入设备，或向计算环境700提供输入的其它设备。对于音频，输入设备750可以是接受模拟或数字形式的音频输入的声卡或类似设备，或者是向计算环境700提供音频样本的CD-ROM读出器。输出设备760可以是显示器、打印机、扬声器、CD写入器、或可提供来自计算环境700的输出的其它设备。
通信连接770允许通过通信介质到另一计算实体的通信。通信介质传递已调制数据信号形式的诸如计算机可执行指令、已压缩的音频或视频信息、或其它数据信息。已调制信号是以在信号中将信息编码的方式设置或改变其一个或多个特征的信号。作为示例，而非限制，通信介质包括用电的、光的、RF、红外、声学或其它载波实现的有线或无线技术。
本文中的编码器/解码器帧高速缓存技术可以在计算机可读介质的通用上下文中描述。计算机可读介质是在计算环境700内部可被访问的任何可用介质。作为示例，而非限制，以计算环境700来说，计算机可读机制包括存储器720、存储740、通信介质、以及以上的任何组合。
本文中的编码器/解码器帧高速缓存可以在真实或虚拟的目标处理器上的计算环境中执行的计算机可执行指令(诸如程序模块中所包括的那些指令)的通用上下文中描述。一般而言，程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、库、对象、类、组件、数据结构、等等。各程序模块的功能可按各实施例中的需要，在程序模块之间被组合或分开。程序模块的计算机可执行指令可在本地或分布式计算环境内部被执行。
为了说明，此详细描述使用诸如“确定”、“发送”、“编码”、“解码”、以及“应用”等术语来描述计算环境中的计算机操作。这些术语是对计算机所执行的操作的高度抽象，并且不应与人类所执行的动作相混淆。对应于这些术语的实际计算机操作根据实现而有所不同。
考虑到可应用我们的发明的原理的许多可能的实施例，应当认识到，这些详细的实施例只是示例性的，且不应被当作限制了我们的发明的范围。相反，我们要求将落入所附权利要求书及其等效技术方案的范围和精神之内的所有此类实施例作为我们的发明的保护范围。

Claims (23)

1.一种通过网络发送信号的方法，所述方法包括：
用编码器将信号帧序列编码成包括关键帧和预测帧的编码帧序列；
发送所述编码帧序列，编码帧包括至少一个参考帧；
在编码器处高速缓存所述至少一个参考帧；
响应于在编码器处接收到分组丢失检测信号，使用在所述编码器处高速缓存的所述至少一个参考帧来生成帧，其中所生成的帧用于通过在解码器处使用所述至少一个参考帧来解释所生成的帧来产生一未压缩的帧；以及
发送所生成的帧。
2.如权利要求1所述的方法，其特征在于，至少一个编码帧具有定义了帧要成为与在所述编码器处高速缓存的所述至少一个参考帧相对应的高速缓存帧的帧类型代码。
3.如权利要求1所述的方法，其特征在于，在所述编码器处高速缓存所述至少一个参考帧是用于分组丢失恢复。
4.如权利要求1所述的方法，其特征在于，所述方法还包括在所述编码器处周期性地高速缓存所述至少一个参考帧。
5.如权利要求4所述的方法，其特征在于，高速缓存之间的周期能够是设定的时间间隔或者能够是可变的时间间隔。
6.如权利要求1所述的方法，其特征在于，相同的至少一个参考帧的副本被高速缓存在解码器和所述编码器处，且所述方法还包括与在所述解码器处高速缓存参考帧相同步地在所述编码器处高速缓存所述至少一个参考帧。
7.如权利要求1所述的方法，其特征在于，所述分组丢失检测信号是通过到所述编码器的反馈信道接收的。
8.如权利要求7所述的方法，其特征在于，所述分组丢失检测信号有与之相关联的时间，且表示分组丢失时间的时间戳被发送到所述编码器。
9.如权利要求7所述的方法，其特征在于，一旦接收到所述分组丢失检测信号，所述编码器就使用所述至少一个参考帧来构造下一帧。
10.如权利要求9所述的方法，其特征在于，所述下一帧还包括帧头部，且所述下一帧在所述帧头部中被区别地命名。
11.如权利要求1所述的方法，其特征在于，所述编码器周期性地向解码器发送高速缓存帧。
12.如权利要求1所述的方法，其特征在于，所述信号是图像信号、视频信号、音频信号、或语音信号。
13.一种在有损网络内流式传输信号的系统，所述系统包括：
用于高速缓存参考帧的帧高速缓存；
用于从编码器发送高速缓存帧序列的发送器；
所述编码器，其中所述编码器用于：
将帧序列编码成编码帧序列，所述序列包括关键帧和预测帧，
接收分组丢失检测信号，
一旦接收到分组丢失信号，使用高速缓存的参考帧来生成帧，其中所生成的帧和高速缓存的参考帧能被用于基于在解码器处使用所述高速缓存的参考帧解释所生成的帧来重构一未压缩的帧，以及
用所述发送器从所述编码器发送所生成的帧。
14.如权利要求13所述的系统，其特征在于，所述编码器还用于将在所述编码器处高速缓存所述参考帧与在接收被流式传输的信号的解码器处高速缓存一参考帧相同步。
15.如权利要求13所述的系统，其特征在于，至少一个编码帧具有定义了帧要成为与高速缓存的参考帧相对应的高速缓存帧的帧类型代码。
16.如权利要求13所述的系统，其特征在于，所述帧高速缓存用于周期性地高速缓存参考帧。
17.如权利要求16所述的系统，其特征在于，高速缓存之间的周期能够是设定的时间间隔或者能够是可变的时间间隔。
18.如权利要求13所述的系统，其特征在于，所述编码器用于通过到所述编码器的反馈信道接收所述分组丢失检测信号。
19.如权利要求13所述的系统，其特征在于，所述分组丢失检测信号有与之相关联的时间。
20.如权利要求13所述的系统，其特征在于，一旦接收到所述分组丢失检测信号，所述编码器用于使用高速缓存的参考帧来构造下一帧。
21.如权利要求20所述的系统，其特征在于，所述下一帧还包括帧头部，且所述下一帧在所述帧头部中被区别地命名。
22.如权利要求13所述的系统，其特征在于，所述编码器用于周期性地向解码器发送高速缓存的参考帧。
23.如权利要求13所述的系统，其特征在于，被流式传输的信号是图像信号、视频信号、音频信号、或语音信号。
CN2011101203762A 2004-12-30 2005-11-30 通过网络传输信号的方法和系统 Active CN102158713B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US11/027,294 US8634413B2 (en) 2004-12-30 2004-12-30 Use of frame caching to improve packet loss recovery
US11/027,294 2004-12-30

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN2005101287508A Division CN1816150B (zh) 2004-12-30 2005-11-30 使用帧高速缓存来改善分组丢失恢复

Publications (2)

Publication Number Publication Date
CN102158713A CN102158713A (zh) 2011-08-17
CN102158713B true CN102158713B (zh) 2013-09-04

Family

ID=35789232

Family Applications (2)

Application Number Title Priority Date Filing Date
CN2005101287508A Active CN1816150B (zh) 2004-12-30 2005-11-30 使用帧高速缓存来改善分组丢失恢复
CN2011101203762A Active CN102158713B (zh) 2004-12-30 2005-11-30 通过网络传输信号的方法和系统

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN2005101287508A Active CN1816150B (zh) 2004-12-30 2005-11-30 使用帧高速缓存来改善分组丢失恢复

Country Status (9)

Country Link
US (4) US8634413B2 (zh)
EP (2) EP1677547B1 (zh)
JP (3) JP5047497B2 (zh)
KR (3) KR101114129B1 (zh)
CN (2) CN1816150B (zh)
AT (1) ATE473599T1 (zh)
DE (1) DE602005022158D1 (zh)
ES (1) ES2348730T3 (zh)
HK (1) HK1159386A1 (zh)

Families Citing this family (68)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6499060B1 (en) 1999-03-12 2002-12-24 Microsoft Corporation Media coding for loss recovery with remotely predicted data units
US9138644B2 (en) * 2002-12-10 2015-09-22 Sony Computer Entertainment America Llc System and method for accelerated machine switching
US9192859B2 (en) 2002-12-10 2015-11-24 Sony Computer Entertainment America Llc System and method for compressing video based on latency measurements and other feedback
US8526490B2 (en) 2002-12-10 2013-09-03 Ol2, Inc. System and method for video compression using feedback including data related to the successful receipt of video content
US8549574B2 (en) * 2002-12-10 2013-10-01 Ol2, Inc. Method of combining linear content and interactive content compressed together as streaming interactive video
US9314691B2 (en) * 2002-12-10 2016-04-19 Sony Computer Entertainment America Llc System and method for compressing video frames or portions thereof based on feedback information from a client device
US8366552B2 (en) 2002-12-10 2013-02-05 Ol2, Inc. System and method for multi-stream video compression
US8964830B2 (en) * 2002-12-10 2015-02-24 Ol2, Inc. System and method for multi-stream video compression using multiple encoding formats
US20090118019A1 (en) 2002-12-10 2009-05-07 Onlive, Inc. System for streaming databases serving real-time applications used through streaming interactive video
US20100166056A1 (en) * 2002-12-10 2010-07-01 Steve Perlman System and method for encoding video using a selected tile and tile rotation pattern
US9077991B2 (en) 2002-12-10 2015-07-07 Sony Computer Entertainment America Llc System and method for utilizing forward error correction with video compression
US10201760B2 (en) 2002-12-10 2019-02-12 Sony Interactive Entertainment America Llc System and method for compressing video based on detected intraframe motion
US9227139B2 (en) 2002-12-10 2016-01-05 Sony Computer Entertainment America Llc Virtualization system and method for hosting applications
US9108107B2 (en) 2002-12-10 2015-08-18 Sony Computer Entertainment America Llc Hosting and broadcasting virtual events using streaming interactive video
US8711923B2 (en) 2002-12-10 2014-04-29 Ol2, Inc. System and method for selecting a video encoding format based on feedback data
US9061207B2 (en) * 2002-12-10 2015-06-23 Sony Computer Entertainment America Llc Temporary decoder apparatus and method
US9446305B2 (en) 2002-12-10 2016-09-20 Sony Interactive Entertainment America Llc System and method for improving the graphics performance of hosted applications
US8979655B2 (en) 2002-12-10 2015-03-17 Ol2, Inc. System and method for securely hosting applications
US8634413B2 (en) 2004-12-30 2014-01-21 Microsoft Corporation Use of frame caching to improve packet loss recovery
CN100459717C (zh) * 2005-04-20 2009-02-04 华为技术有限公司 基于h.264的压缩视频传输误码消除方法
JP2009512265A (ja) * 2005-10-06 2009-03-19 イージーシー アンド シー カンパニー リミテッド ネットワーク上の動画データ伝送制御システムとその方法
US20070107011A1 (en) * 2005-11-10 2007-05-10 Zhi Li System and method for differentiated service levels in an internet protocol television network
US7716551B2 (en) 2005-12-07 2010-05-11 Microsoft Corporation Feedback and frame synchronization between media encoders and decoders
CN101087438A (zh) * 2006-06-06 2007-12-12 安捷伦科技有限公司 计算无参考视频质量评估的分组丢失度量的系统和方法
EP2052549A4 (en) 2006-08-17 2011-12-07 Ericsson Telefon Ab L M TROUBLESHOOTING FOR RICH MEDIA
JP5936805B2 (ja) * 2006-09-29 2016-06-22 アビニティ・システムズ・ベスローテン・フェンノートシャップＡｖｉｎｉｔｙ Ｓｙｓｔｅｍｓ Ｂ．Ｖ． パラレルユーザセッションをストリーミングするための方法、システム、およびコンピュータソフトウェア
US7957307B2 (en) * 2007-03-14 2011-06-07 Microsoft Corporation Reducing effects of packet loss in video transmissions
KR101487771B1 (ko) * 2007-08-10 2015-01-30 삼성전자주식회사 이동통신 시스템에서 영상 정보를 복구하기 위한 방법 및장치
US9168457B2 (en) 2010-09-14 2015-10-27 Sony Computer Entertainment America Llc System and method for retaining system state
US8406296B2 (en) 2008-04-07 2013-03-26 Qualcomm Incorporated Video refresh adaptation algorithms responsive to error feedback
US8385404B2 (en) * 2008-09-11 2013-02-26 Google Inc. System and method for video encoding using constructed reference frame
EP2434484A4 (en) * 2009-05-22 2016-12-14 Panasonic Ip Corp America ENCODING DEVICE, DECODING DEVICE, AND ASSOCIATED METHODS
US20110249729A1 (en) * 2010-04-07 2011-10-13 Apple Inc. Error resilient hierarchical long term reference frames
US8731152B2 (en) * 2010-06-18 2014-05-20 Microsoft Corporation Reducing use of periodic key frames in video conferencing
CN102223539A (zh) * 2011-06-24 2011-10-19 武汉长江通信产业集团股份有限公司 图像编码丢帧花屏的处理方法
GB2495468B (en) 2011-09-02 2017-12-13 Skype Video coding
GB2495469B (en) 2011-09-02 2017-12-13 Skype Video coding
GB2495467B (en) * 2011-09-02 2017-12-13 Skype Video coding
US9203755B1 (en) * 2011-09-27 2015-12-01 Cisco Technology, Inc. Error message monitoring in a network environment
US9160687B2 (en) * 2012-02-15 2015-10-13 Massachusetts Institute Of Technology Method and apparatus for performing finite memory network coding in an arbitrary network
US20130223524A1 (en) * 2012-02-29 2013-08-29 Microsoft Corporation Dynamic insertion of synchronization predicted video frames
CN102611894B (zh) * 2012-03-02 2015-01-07 华为技术有限公司 检测视频传输丢包的方法、装置和系统
KR101358886B1 (ko) 2012-04-12 2014-02-06 고려대학교 산학협력단 송신장치 및 수신장치, 송신장치의 동작 방법
CN103389879B (zh) * 2012-05-10 2016-08-17 慧荣科技股份有限公司 电子装置以及由电子装置传送数据至显示设备的方法
WO2014092597A1 (en) * 2012-12-14 2014-06-19 Intel Corporation Protecting against packet loss during transmission of video information
CN103051434A (zh) * 2012-12-20 2013-04-17 中兴通讯股份有限公司 数据的解压缩、解压缩处理方法及装置
US9407923B2 (en) 2013-05-20 2016-08-02 Gamefly Israel Ltd. Overconing lost IP packets in streaming video in IP networks
FR3024582A1 (fr) * 2014-07-29 2016-02-05 Orange Gestion de la perte de trame dans un contexte de transition fd/lpd
US10462477B2 (en) 2015-02-25 2019-10-29 Cinova Media Partial evaluator system and method
US10595025B2 (en) 2015-09-08 2020-03-17 Microsoft Technology Licensing, Llc Video coding
US10313685B2 (en) 2015-09-08 2019-06-04 Microsoft Technology Licensing, Llc Video coding
WO2017066346A1 (en) * 2015-10-12 2017-04-20 Cinova Media Method and apparatus for optimizing video streaming for virtual reality
US10460700B1 (en) 2015-10-12 2019-10-29 Cinova Media Method and apparatus for improving quality of experience and bandwidth in virtual reality streaming systems
US10516891B2 (en) * 2015-11-20 2019-12-24 Intel Corporation Method and system of reference frame caching for video coding
US10841621B2 (en) * 2017-03-01 2020-11-17 Wyse Technology L.L.C. Fault recovery of video bitstream in remote sessions
CN116456097A (zh) * 2017-04-28 2023-07-18 苹果公司 视频流水线
US10944971B1 (en) 2017-05-22 2021-03-09 Cinova Media Method and apparatus for frame accurate field of view switching for virtual reality
US10291936B2 (en) 2017-08-15 2019-05-14 Electronic Arts Inc. Overcoming lost or corrupted slices in video streaming
KR102392888B1 (ko) * 2017-10-26 2022-04-29 에스케이텔레콤 주식회사 패킷 손실 복구를 개선하기 위한 장치 및 방법
US10567781B2 (en) * 2018-05-01 2020-02-18 Agora Lab, Inc. Progressive I-slice reference for packet loss resilient video coding
EP3824606A1 (en) * 2018-07-20 2021-05-26 Nokia Technologies Oy Learning in communication systems by updating of parameters in a receiving algorithm
CN109714558A (zh) * 2018-11-28 2019-05-03 视联动力信息技术股份有限公司 一种基于视联网的通信连接检测方法及系统
CN109862400B (zh) * 2019-02-18 2021-08-31 苏州长风航空电子有限公司 一种流媒体传输方法、装置及其系统
CN110602507A (zh) * 2019-08-19 2019-12-20 西安万像电子科技有限公司 丢帧处理方法、设备及系统
CN110636333A (zh) * 2019-08-19 2019-12-31 西安万像电子科技有限公司 丢帧处理方法及装置
CN113132807B (zh) * 2019-12-30 2023-04-07 成都鼎桥通信技术有限公司 基于视频的关键帧请求方法、装置、设备及存储介质
WO2023140954A1 (en) * 2022-01-21 2023-07-27 Qualcomm Incorporated Reference signal security
CN117295207B (zh) * 2023-11-24 2024-03-01 深圳市千岩科技有限公司 氛围灯设备及其指令传输、应用方法和相应的装置、介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5910827A (en) * 1997-02-26 1999-06-08 Kwan; Katherine W. Video signal decoding arrangement and method for improved error concealment

Family Cites Families (193)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5130595A (ja) 1974-09-10 1976-03-15 Mitsubishi Heavy Ind Ltd Ozonhatsuseisochi
JPS6030394A (ja) 1983-07-28 1985-02-15 Mitsubishi Chem Ind Ltd 感熱転写記録用チアジアゾ−ル系色素
JPS6078298A (ja) 1983-10-02 1985-05-02 小山　金一 矢羽根用鳥羽加工自動装置
US4838685A (en) 1987-04-03 1989-06-13 Massachusetts Institute Of Technology Methods and apparatus for motion estimation in motion picture processing
FR2624997B1 (fr) 1987-12-16 1990-06-01 France Etat Procede d'estimation multi predictif du mouvement des points d'une image electronique
JP2521145B2 (ja) 1989-02-20 1996-07-31 日本ビクター株式会社 動き補償予測符号化復号化方式
DE3943881B4 (de) 1989-04-17 2008-07-17 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Digitales Codierverfahren
GB9001468D0 (en) 1990-01-23 1990-03-21 Sarnoff David Res Center Computing multiple motions within an image region
JP2569219B2 (ja) 1990-01-31 1997-01-08 富士通株式会社 動画像予測方式
NL9000424A (nl) 1990-02-22 1991-09-16 Philips Nv Overdrachtsysteem voor gedigitaliseerde televisiebeelden.
US5150209A (en) 1990-05-11 1992-09-22 Picturetel Corporation Hierarchical entropy coded lattice threshold quantization encoding method and apparatus for image and video compression
CA2043670C (en) 1990-06-05 2002-01-08 Wiebe De Haan Method of transmitting a picture sequence of a full-motion video scene, and a medium for said transmission
US5093720A (en) 1990-08-20 1992-03-03 General Instrument Corporation Motion compensation for interlaced digital television signals
JP3173508B2 (ja) 1990-10-01 2001-06-04 株式会社日立製作所 動画像復号化方法、及び、動画像復号化装置
EP0683615B1 (en) 1990-10-31 1999-05-19 Victor Company Of Japan, Ltd. Compression method for interlace moving image signals
USRE35093E (en) 1990-12-03 1995-11-21 The Trustees Of Columbia University In The City Of New York Systems and methods for coding even fields of interlaced video sequences
JP2924430B2 (ja) 1991-04-12 1999-07-26 三菱電機株式会社 動き補償予測符号化装置及び動き補償予測復号装置
ES2112316T3 (es) 1991-05-24 1998-04-01 British Broadcasting Corp Tratamiento de imagenes de video.
AU657510B2 (en) 1991-05-24 1995-03-16 Apple Inc. Improved image encoding/decoding method and apparatus
US5467136A (en) 1991-05-31 1995-11-14 Kabushiki Kaisha Toshiba Video decoder for determining a motion vector from a scaled vector and a difference vector
US5986713A (en) 1991-05-31 1999-11-16 Kabushiki Kaisha Toshiba Video coding apparatus using inter-field prediction
US5317397A (en) 1991-05-31 1994-05-31 Kabushiki Kaisha Toshiba Predictive coding using spatial-temporal filtering and plural motion vectors
US5784107A (en) 1991-06-17 1998-07-21 Matsushita Electric Industrial Co., Ltd. Method and apparatus for picture coding and method and apparatus for picture decoding
JP2699703B2 (ja) 1991-07-31 1998-01-19 松下電器産業株式会社 動き補償予測方法とそれを用いた画像信号符号化方法
JP3115651B2 (ja) 1991-08-29 2000-12-11 シャープ株式会社 画像符号化装置
JP2586260B2 (ja) 1991-10-22 1997-02-26 三菱電機株式会社 適応的ブロッキング画像符号化装置
US5227878A (en) 1991-11-15 1993-07-13 At&T Bell Laboratories Adaptive coding and decoding of frames and fields of video
US5255090A (en) 1991-11-19 1993-10-19 Scientific-Atlanta, Inc. Progressive transmission of vector quantized data
US7006881B1 (en) 1991-12-23 2006-02-28 Steven Hoffberg Media recording device with remote graphic user interface
US6400996B1 (en) 1999-02-01 2002-06-04 Steven M. Hoffberg Adaptive pattern recognition based control system and method
US5293229A (en) 1992-03-27 1994-03-08 Matsushita Electric Corporation Of America Apparatus and method for processing groups of fields in a video data compression system
GB2266023B (en) 1992-03-31 1995-09-06 Sony Broadcast & Communication Motion dependent video signal processing
JP2899478B2 (ja) 1992-06-25 1999-06-02 松下電器産業株式会社 画像符号化方法及び画像符号化装置
US6226327B1 (en) 1992-06-29 2001-05-01 Sony Corporation Video coding method and apparatus which select between frame-based and field-based predictive modes
US5412435A (en) 1992-07-03 1995-05-02 Kokusai Denshin Denwa Kabushiki Kaisha Interlaced video signal motion compensation prediction system
JP3201079B2 (ja) 1992-07-03 2001-08-20 ケイディーディーアイ株式会社 インターレース動画像信号の動き補償予測方法、符号化方法及び装置
GB9215102D0 (en) 1992-07-16 1992-08-26 Philips Electronics Uk Ltd Tracking moving objects
JP3358835B2 (ja) 1992-12-14 2002-12-24 ソニー株式会社 画像符号化方法及び装置
US5737022A (en) 1993-02-26 1998-04-07 Kabushiki Kaisha Toshiba Motion picture error concealment using simplified motion compensation
US5592228A (en) 1993-03-04 1997-01-07 Kabushiki Kaisha Toshiba Video encoder using global motion estimation and polygonal patch motion estimation
US5376968A (en) 1993-03-11 1994-12-27 General Instrument Corporation Adaptive compression of digital video data using different modes such as PCM and DPCM
JP3679426B2 (ja) 1993-03-15 2005-08-03 マサチューセッツ・インスティチュート・オブ・テクノロジー 画像データを符号化して夫々がコヒーレントな動きの領域を表わす複数の層とそれら層に付随する動きパラメータとにするシステム
CA2118118C (en) 1993-03-24 2004-02-24 Motoki Kato Method for coding and decoding motion vectors and apparatus therefor
DE69416717T2 (de) 1993-05-21 1999-10-07 Nippon Telegraph & Telephone Bewegtbildkoder und -dekoder
US5477272A (en) 1993-07-22 1995-12-19 Gte Laboratories Incorporated Variable-block size multi-resolution motion estimation scheme for pyramid coding
US5493513A (en) 1993-11-24 1996-02-20 Intel Corporation Process, apparatus and system for encoding video signals using motion estimation
US5539663A (en) 1993-11-24 1996-07-23 Intel Corporation Process, apparatus and system for encoding and decoding video signals using temporal filtering
JPH07202820A (ja) 1993-12-28 1995-08-04 Matsushita Electric Ind Co Ltd ビットレート制御システム
KR970003799B1 (ko) 1993-12-29 1997-03-21 양승택 영상 프레임차를 이용한 영상신호 전송장치
US5592226A (en) 1994-01-26 1997-01-07 Btg Usa Inc. Method and apparatus for video data compression using temporally adaptive motion interpolation
US5541594A (en) 1994-03-28 1996-07-30 Utah State University Foundation Fixed quality source coder with fixed threshold
US5579183A (en) 1994-04-08 1996-11-26 U.S. Philips Corporation Recording and reproducing an MPEG information signal on/from a record carrier
US5594504A (en) 1994-07-06 1997-01-14 Lucent Technologies Inc. Predictive video coding using a motion vector updating routine
JP2970417B2 (ja) 1994-08-22 1999-11-02 日本電気株式会社 動画像符号化方式
KR100287211B1 (ko) 1994-08-30 2001-04-16 윤종용 양방향 움직임 추정방법 및 장치
JP3474005B2 (ja) 1994-10-13 2003-12-08 沖電気工業株式会社 動画像符号化方法及び動画像復号方法
JPH08223577A (ja) 1994-12-12 1996-08-30 Sony Corp 動画像符号化方法及び装置、並びに動画像復号方法及び装置
JP3534465B2 (ja) 1994-12-28 2004-06-07 パイオニア株式会社 サブバンド符号化方法
US5619281A (en) 1994-12-30 1997-04-08 Daewoo Electronics Co., Ltd Method and apparatus for detecting motion vectors in a frame decimating video encoder
JP3518700B2 (ja) 1995-01-25 2004-04-12 ソニー株式会社 デイジタル信号復号装置
DE69619002T2 (de) 1995-03-10 2002-11-21 Toshiba Kawasaki Kk Bildkodierungs-/-dekodierungsvorrichtung
US6104754A (en) 1995-03-15 2000-08-15 Kabushiki Kaisha Toshiba Moving picture coding and/or decoding systems, and variable-length coding and/or decoding system
KR0181027B1 (ko) 1995-03-20 1999-05-01 배순훈 화소 단위 움직임 추정을 이용하는 영상처리 시스템
KR0171143B1 (ko) 1995-03-20 1999-03-20 배순훈 육각그리드에서의 삼각구조 형성 장치
KR0171118B1 (ko) 1995-03-20 1999-03-20 배순훈 비디오신호 부호화 장치
US5621660A (en) 1995-04-18 1997-04-15 Sun Microsystems, Inc. Software-based encoder for a software-implemented end-to-end scalable video delivery system
US5903313A (en) 1995-04-18 1999-05-11 Advanced Micro Devices, Inc. Method and apparatus for adaptively performing motion compensation in a video processing apparatus
KR0171154B1 (ko) 1995-04-29 1999-03-20 배순훈 특징점 기반 움직임 추정을 이용하여 비디오 신호를 부호화하는 방법 및 장치
KR0181063B1 (ko) 1995-04-29 1999-05-01 배순훈 특징점을 이용한 움직임 보상에서의 그리드 형성방법 및 장치
US5835149A (en) 1995-06-06 1998-11-10 Intel Corporation Bit allocation in a coded video sequence
US5731850A (en) 1995-06-07 1998-03-24 Maturi; Gregory V. Hybrid hierarchial/full-search MPEG encoder motion estimation
US5852664A (en) 1995-07-10 1998-12-22 Intel Corporation Decode access control for encoded multimedia signals
US7512698B1 (en) 1995-07-14 2009-03-31 Broadband Royalty Corporation Dynamic quality adjustment based on changing streaming constraints
JP2795223B2 (ja) 1995-07-18 1998-09-10 日本電気株式会社 画像信号の符号化方法
US5668608A (en) 1995-07-26 1997-09-16 Daewoo Electronics Co., Ltd. Motion vector estimation method and apparatus for use in an image signal encoding system
DE69615812T2 (de) 1995-08-02 2002-06-20 Koninkl Philips Electronics Nv Verfahren und system zur kodierung einer bildsequenz
KR0178229B1 (ko) 1995-08-08 1999-05-01 배순훈 특징점에 근거한 화소단위 움직임 추정을 이용한 영상 처리 장치
JPH0974566A (ja) 1995-09-04 1997-03-18 Sony Corp 圧縮符号化装置及び圧縮符号化データの記録装置
JP3068002B2 (ja) 1995-09-18 2000-07-24 沖電気工業株式会社 画像符号化装置、画像復号化装置及び画像伝送システム
JP3922592B2 (ja) 1995-09-29 2007-05-30 松下電器産業株式会社 記録方法
US5825929A (en) 1995-10-05 1998-10-20 Microsoft Corporation Transformation block optimization method
JPH09107547A (ja) 1995-10-09 1997-04-22 Hitachi Ltd 既圧縮動画データ量削減装置および既圧縮動画データ量削減システムならびに既圧縮動画データ量削減方法
JP3788823B2 (ja) 1995-10-27 2006-06-21 株式会社東芝 動画像符号化装置および動画像復号化装置
GB2306831B (en) 1995-10-30 2000-05-24 Sony Uk Ltd Video data compression
US5748121A (en) 1995-12-06 1998-05-05 Intel Corporation Generation of huffman tables for signal encoding
US5861919A (en) 1995-12-18 1999-01-19 Divicom Dynamic rate optimization for an ensemble of video encoders
JPH09182083A (ja) 1995-12-27 1997-07-11 Matsushita Electric Ind Co Ltd ビデオ画像符号化方法及び復号化方法とその装置
US5692063A (en) 1996-01-19 1997-11-25 Microsoft Corporation Method and system for unrestricted motion estimation for video
US5982438A (en) 1996-03-22 1999-11-09 Microsoft Corporation Overlapped motion compensation for object coding
US6101276A (en) 1996-06-21 2000-08-08 Compaq Computer Corporation Method and apparatus for performing two pass quality video compression through pipelining and buffer management
US6011864A (en) 1996-07-03 2000-01-04 Apple Computer, Inc. Digital image coding system having self-adjusting selection criteria for selecting a transform function
JPH1079949A (ja) * 1996-09-04 1998-03-24 Oki Electric Ind Co Ltd 画像符号化装置、画像復号化装置及び画像伝送システム
US5867230A (en) 1996-09-06 1999-02-02 Motorola Inc. System, device, and method for streaming a multimedia file encoded at a variable bitrate
JP3263807B2 (ja) 1996-09-09 2002-03-11 ソニー株式会社 画像符号化装置および画像符号化方法
US6614847B1 (en) 1996-10-25 2003-09-02 Texas Instruments Incorporated Content-based video compression
US5905542A (en) 1996-12-04 1999-05-18 C-Cube Microsystems, Inc. Simplified dual prime video motion estimation
EP0945023B1 (en) 1996-12-10 2002-09-18 BRITISH TELECOMMUNICATIONS public limited company Video coding
US6535558B1 (en) 1997-01-24 2003-03-18 Sony Corporation Picture signal encoding method and apparatus, picture signal decoding method and apparatus and recording medium
DE69837003T2 (de) 1997-02-12 2007-10-18 Mediatek Inc. Vorrichtung und verfahren zur optimierung der bitratensteurung in einem kodiersystem
US6775326B2 (en) 1997-02-13 2004-08-10 Mitsubishi Denki Kabushiki Kaisha Moving image estimating system
CN1208971C (zh) 1997-02-14 2005-06-29 日本电信电话株式会社 运动图像的预测编码方法和译码方法
US6005980A (en) 1997-03-07 1999-12-21 General Instrument Corporation Motion estimation and compensation of video object planes for interlaced digital video
US5991447A (en) 1997-03-07 1999-11-23 General Instrument Corporation Prediction and coding of bi-directionally predicted video object planes for interlaced digital video
US6304607B1 (en) 1997-03-18 2001-10-16 Texas Instruments Incorporated Error resilient video coding using reversible variable length codes (RVLCS)
CN1110963C (zh) 1997-03-26 2003-06-04 松下电器产业株式会社 图象解码装置
US6404813B1 (en) 1997-03-27 2002-06-11 At&T Corp. Bidirectionally predicted pictures or video object planes for efficient and flexible video coding
IL167288A (en) 1997-04-01 2012-03-29 Sony Corp Image encryption device, image encryption method, image decryption device, image decryption method, and appropriate medium
SG65064A1 (en) 1997-04-09 1999-05-25 Matsushita Electric Ind Co Ltd Image predictive decoding method image predictive decoding apparatus image predictive coding method image predictive coding apparatus and data storage media
JPH10290391A (ja) 1997-04-14 1998-10-27 Sony Corp 画像処理装置および画像処理方法、並びに記録媒体
JP3604864B2 (ja) 1997-04-25 2004-12-22 シャープ株式会社 動画像符号化装置
US6057884A (en) 1997-06-05 2000-05-02 General Instrument Corporation Temporal and spatial scaleable coding for video object planes
US5870148A (en) 1997-06-17 1999-02-09 Intel Corporation Method and apparatus for adaptively enabling and disabling PB frames in an H.263 video coder
US5880784A (en) 1997-06-17 1999-03-09 Intel Corporation Method and apparatus for adaptively switching on and off advanced prediction mode in an H.263 video coder
JP3045108B2 (ja) * 1997-06-30 2000-05-29 日本電気株式会社 テレビ電話装置
US6359929B1 (en) 1997-07-04 2002-03-19 Matsushita Electric Industrial Co., Ltd. Image predictive decoding method, image predictive decoding apparatus, image predictive coding apparatus, and data storage medium
US6282240B1 (en) 1997-09-03 2001-08-28 Oki Electric Industry Co., Ltd. Picture coder, picture decoder, and transmission system
US6807231B1 (en) 1997-09-12 2004-10-19 8×8, Inc. Multi-hypothesis motion-compensated video image predictor
US6249318B1 (en) 1997-09-12 2001-06-19 8×8, Inc. Video coding/decoding arrangement and method therefor
US5933195A (en) 1997-09-26 1999-08-03 Sarnoff Corporation Method and apparatus memory requirements for storing reference frames in a video decoder
US6057832A (en) 1997-12-02 2000-05-02 V Soft Ltd. Method and apparatus for video-on-demand with fast play capability
US5946043A (en) 1997-12-31 1999-08-31 Microsoft Corporation Video coding using adaptive coding of block parameters for coded/uncoded blocks
JP3186685B2 (ja) 1998-01-12 2001-07-11 松下電器産業株式会社 動き補償予測方法
EP0935396A3 (en) 1998-02-09 2004-08-11 Matsushita Electric Industrial Co., Ltd. Video coding method and apparatus
JP3130512B2 (ja) * 1998-03-02 2001-01-31 日本電信電話株式会社 画像通信方法、画像通信システム、および、画像通信プログラムを記録した記録媒体
US7263127B1 (en) 1998-04-02 2007-08-28 Intel Corporation Method and apparatus for simplifying frame-based motion estimation
US5991464A (en) 1998-04-03 1999-11-23 Odyssey Technologies Method and system for adaptive video image resolution enhancement
US6122321A (en) 1998-05-12 2000-09-19 Hitachi America, Ltd. Methods and apparatus for reducing the complexity of inverse quantization operations
US6104757A (en) 1998-05-15 2000-08-15 North Carolina State University System and method of error control for interactive low-bit rate video transmission
US6421387B1 (en) 1998-05-15 2002-07-16 North Carolina State University Methods and systems for forward error correction based loss recovery for interactive video transmission
US6289054B1 (en) 1998-05-15 2001-09-11 North Carolina University Method and systems for dynamic hybrid packet loss recovery for video transmission over lossy packet-based network
US6029126A (en) 1998-06-30 2000-02-22 Microsoft Corporation Scalable audio coder and decoder
JP3085289B2 (ja) 1998-09-03 2000-09-04 株式会社日立製作所 動画像符号化方法、及び、動画像符号化装置
US6415326B1 (en) 1998-09-15 2002-07-02 Microsoft Corporation Timeline correlation between multiple timeline-altered media streams
US6629318B1 (en) * 1998-11-18 2003-09-30 Koninklijke Philips Electronics N.V. Decoder buffer for streaming video receiver and method of operation
US7046910B2 (en) * 1998-11-20 2006-05-16 General Instrument Corporation Methods and apparatus for transcoding progressive I-slice refreshed MPEG data streams to enable trick play mode features on a television appliance
EP1919117B1 (en) * 1998-11-30 2014-10-15 Panasonic Corporation Packet retransmission control using priority information
US6563953B2 (en) 1998-11-30 2003-05-13 Microsoft Corporation Predictive image compression using a single variable length code for both the luminance and chrominance blocks for each macroblock
US6418166B1 (en) 1998-11-30 2002-07-09 Microsoft Corporation Motion estimation and block matching pattern
AU758372B2 (en) * 1999-03-05 2003-03-20 Kabushiki Kaisha Toshiba Method and apparatus for coding moving picture image
US6499060B1 (en) 1999-03-12 2002-12-24 Microsoft Corporation Media coding for loss recovery with remotely predicted data units
JP2001148853A (ja) 1999-03-12 2001-05-29 Toshiba Corp 動画像符号化装置および復号化装置
US6625215B1 (en) 1999-06-07 2003-09-23 Lucent Technologies Inc. Methods and apparatus for context-based inter/intra coding mode selection
US6441754B1 (en) 1999-08-17 2002-08-27 General Instrument Corporation Apparatus and methods for transcoder-based adaptive quantization
WO2001035409A2 (en) 1999-11-10 2001-05-17 Thomson Licensing S.A. Commercial skip and chapter delineation feature on recordable media
US6400990B1 (en) 2000-02-18 2002-06-04 Pacesetter, Inc. Patient activated telemetry control unit using bidirectional asymmetric dual-mode telemetry link to communicate with an implanted device
JP2002010265A (ja) 2000-06-20 2002-01-11 Sony Corp 送信装置およびその方法と受信装置およびその方法
JP3348080B1 (ja) * 2000-07-07 2002-11-20 松下電器産業株式会社 データ送信装置とデータ受信装置及びデータ送受信方法
EP1336306A2 (en) 2000-11-23 2003-08-20 Koninklijke Philips Electronics N.V. Video coding method
JP3917363B2 (ja) 2000-12-12 2007-05-23 株式会社東芝 画像復号化装置及び画像復号化方法
US6765963B2 (en) * 2001-01-03 2004-07-20 Nokia Corporation Video decoder architecture and method for using same
US6920175B2 (en) * 2001-01-03 2005-07-19 Nokia Corporation Video coding architecture and methods for using same
US6907460B2 (en) * 2001-01-18 2005-06-14 Koninklijke Philips Electronics N.V. Method for efficient retransmission timeout estimation in NACK-based protocols
US7230919B2 (en) * 2001-02-07 2007-06-12 Siemens Communications, Inc. Quality-of-service monitor for voice-over-Internet-protocol calls
US6700932B2 (en) 2001-03-06 2004-03-02 Sony Corporation MPEG video editing-cut and paste
US6996838B2 (en) 2001-06-12 2006-02-07 Scientific Atlanta, Inc. System and method for media processing with adaptive resource access priority assignment
US7012893B2 (en) * 2001-06-12 2006-03-14 Smartpackets, Inc. Adaptive control of data packet size in networks
JP2003032689A (ja) * 2001-07-18 2003-01-31 Sharp Corp 画像符号化装置、画像復号化装置及び動画像伝送システム
US7542482B2 (en) 2001-08-16 2009-06-02 Qualcomm Incorporated Method and apparatus for message segmentation in a wireless communication system
US7218635B2 (en) 2001-08-31 2007-05-15 Stmicroelectronics, Inc. Apparatus and method for indexing MPEG video data to perform special mode playback in a digital video recorder and indexed signal associated therewith
DE10218541A1 (de) 2001-09-14 2003-04-24 Siemens Ag Verfahren zur Videocodierung und Computerprogrammprodukt
JP2003152544A (ja) 2001-11-12 2003-05-23 Sony Corp データ通信システム、データ送信装置、データ受信装置、および方法、並びにコンピュータ・プログラム
US6980596B2 (en) 2001-11-27 2005-12-27 General Instrument Corporation Macroblock level adaptive frame/field coding for digital video content
JP3912091B2 (ja) * 2001-12-04 2007-05-09 ソニー株式会社 データ通信システム、データ送信装置、データ受信装置、および方法、並びにコンピュータ・プログラム
CN101448162B (zh) 2001-12-17 2013-01-02 微软公司 处理视频图像的方法
JP3923898B2 (ja) 2002-01-18 2007-06-06 株式会社東芝 画像符号化方法及び装置
JP2004007379A (ja) 2002-04-10 2004-01-08 Toshiba Corp 動画像符号化方法及び動画像復号化方法
EP1670260A3 (en) * 2002-01-23 2010-03-03 Nokia Corporation Grouping of image frames in video coding
JP4081745B2 (ja) 2002-03-07 2008-04-30 ソニー株式会社 復号装置および復号方法、学習装置および学習方法、並びにプログラムおよび記録媒体
KR100434384B1 (ko) * 2002-03-21 2004-06-04 엘지전자 주식회사 선택적 흐름제어를 통한 데이터 신뢰성 보장장치 및 방법
JP3821740B2 (ja) * 2002-03-22 2006-09-13 Ｎｅｃインフロンティア株式会社 音声データ送受信装置
KR100508798B1 (ko) 2002-04-09 2005-08-19 엘지전자 주식회사 쌍방향 예측 블록 예측 방법
KR100865034B1 (ko) 2002-07-18 2008-10-23 엘지전자 주식회사 모션 벡터 예측 방법
KR100506864B1 (ko) 2002-10-04 2005-08-05 엘지전자 주식회사 모션벡터 결정방법
JP2004215201A (ja) * 2003-01-09 2004-07-29 Sony Corp 情報処理装置および情報処理方法、データ通信システム、記録媒体、並びにプログラム
JP2004254195A (ja) 2003-02-21 2004-09-09 Matsushita Electric Ind Co Ltd 動画像符号化装置及び動画像符号化方法並びに動画像伝送システム及び動画像符号化プログラム
US7827458B1 (en) * 2003-03-03 2010-11-02 Apple Inc. Packet loss error recovery
US8824553B2 (en) 2003-05-12 2014-09-02 Google Inc. Video compression method
JP2007523827A (ja) 2003-08-25 2007-08-23 ダナ−ファーバー　キャンサー　インスティテュート，インコーポレイテッド 混合性白血病遺伝子の再構成を伴う急性リンパ芽球性白血病の処置方法
US7924921B2 (en) 2003-09-07 2011-04-12 Microsoft Corporation Signaling coding and display options in entry point headers
US7577198B2 (en) 2003-09-07 2009-08-18 Microsoft Corporation Number of reference fields for an interlaced forward-predicted field
KR20050061762A (ko) 2003-12-18 2005-06-23 학교법인 대양학원 부호화 모드 결정방법, 움직임 추정방법 및 부호화 장치
US7142537B2 (en) * 2003-12-18 2006-11-28 Motorola, Inc. Interface call signaling protocol
US7889792B2 (en) 2003-12-24 2011-02-15 Apple Inc. Method and system for video encoding using a variable number of B frames
US7643480B2 (en) * 2004-01-22 2010-01-05 Hain-Ching Liu Method and system for reliably and efficiently transporting data over a network
US7746927B1 (en) * 2004-03-26 2010-06-29 Apple Inc. Robust single-pass variable bit rate encoding
US8085846B2 (en) 2004-08-24 2011-12-27 Thomson Licensing Method and apparatus for decoding hybrid intra-inter coded blocks
JP4405875B2 (ja) * 2004-08-25 2010-01-27 富士通株式会社 エラー訂正用データの生成方法及び生成装置並びに生成プログラム及び同プログラムを格納したコンピュータ読み取り可能な記録媒体
US7302159B2 (en) * 2004-11-12 2007-11-27 Pelco Apparatus and method of storing video data
US7609895B2 (en) 2004-11-16 2009-10-27 Pegasus Imaging Corporation Methods and apparatus for performing MQ-decoding operations
US8634413B2 (en) 2004-12-30 2014-01-21 Microsoft Corporation Use of frame caching to improve packet loss recovery
JP5130595B2 (ja) 2006-12-01 2013-01-30 ライオン株式会社 台所用液体洗浄剤組成物
JP6030394B2 (ja) 2012-09-26 2016-11-24 住友電工プリントサーキット株式会社 プリント配線板
JP6078298B2 (ja) 2012-11-01 2017-02-08 武蔵エンジニアリング株式会社 位置補正機能を有する作業装置および作業方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5910827A (en) * 1997-02-26 1999-06-08 Kwan; Katherine W. Video signal decoding arrangement and method for improved error concealment

Also Published As

Publication number Publication date
US20160366445A1 (en) 2016-12-15
KR20120100851A (ko) 2012-09-12
CN1816150A (zh) 2006-08-09
ES2348730T3 (es) 2010-12-13
HK1159386A1 (en) 2012-07-27
US9313501B2 (en) 2016-04-12
JP5687183B2 (ja) 2015-03-18
KR20110079579A (ko) 2011-07-07
EP2247111A1 (en) 2010-11-03
KR101114129B1 (ko) 2012-02-20
US10341688B2 (en) 2019-07-02
JP2012090329A (ja) 2012-05-10
ATE473599T1 (de) 2010-07-15
EP1677547B1 (en) 2010-07-07
DE602005022158D1 (de) 2010-08-19
JP5620448B2 (ja) 2014-11-05
KR101344207B1 (ko) 2013-12-20
CN1816150B (zh) 2011-07-06
US20140133583A1 (en) 2014-05-15
US20130010861A1 (en) 2013-01-10
CN102158713A (zh) 2011-08-17
US8634413B2 (en) 2014-01-21
JP2006191599A (ja) 2006-07-20
EP1677547A1 (en) 2006-07-05
KR20060079085A (ko) 2006-07-05
US20060146830A1 (en) 2006-07-06
US9866871B2 (en) 2018-01-09
JP5047497B2 (ja) 2012-10-10
JP2012253831A (ja) 2012-12-20
KR101213906B1 (ko) 2012-12-18

Similar Documents

Publication Publication Date Title
CN102158713B (zh) 通过网络传输信号的方法和系统
CN1253014C (zh) 图像编码方法及设备和图像解码方法及设备
JP2001245305A (ja) ディジタル映像データ通信システムにおけるエラー伝播抑制のための送受信データの処理方法及びこのための記録媒体
KR920001965A (ko) 디지탈텔레비젼용 어댐티브모션보상방법 및 그 장치
JP2003018601A (ja) 画像符号化方法
CN100555332C (zh) 使用包括多个宏块的预测和非预测画面对画面序列编码的方法和装置
CN101272494A (zh) 利用合成参考帧的视频编解码方法及装置
KR101037421B1 (ko) 화상 데이터 압축 장치, 압축 방법 및 프로그램을 기록한 기록 매체 및 화상 데이터 복원 장치, 복원 방법 및 프로그램을 기록한 기록 매체
US20070143118A1 (en) Apparatus and method for lossless audio signal compression/decompression through entropy coding
KR0178221B1 (ko) 픽셀의 평균값을 이용한 개선된 패턴 벡터 부호화 시스템
CN107566831B (zh) 基于随机偏移量化多描述编码的自适应编解码方法及系统
KR100358159B1 (ko) 영상 압축 시스템에서 매크로블록 압축모드 선택 방법
JP2000165873A (ja) 動画像情報の圧縮方法およびそのシステム
JPH05284369A (ja) 画像データ符号化・復元方法及びその装置
JP2794899B2 (ja) 符号化装置
KR100245037B1 (ko) 개선된 영상 부호화 및 복호화 시스템과 전송에러 복원 방법
KR20030008685A (ko) 영상 압축 시스템에서 오류 전파 방지를 위한 공간 예측방법
JP3267307B2 (ja) 画像情報符号化送信装置
KR19990032432A (ko) 이진영상의 손실 부호화 방법
JPH01170287A (ja) テレビジョン信号符号化装置
JPH0244860A (ja) 画像データ伝送システム
JPH05292488A (ja) 動画像符号化・復号装置
JPS60144088A (ja) 適応形符号化方式
JPH0553416B2 (zh)

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1159386

Country of ref document: HK

C14 Grant of patent or utility model
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1159386

Country of ref document: HK

ASS Succession or assignment of patent right

Owner name: MICROSOFT TECHNOLOGY LICENSING LLC

Free format text: FORMER OWNER: MICROSOFT CORP.

Effective date: 20150508

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20150508

Address after: Washington State

Patentee after: Micro soft technique license Co., Ltd

Address before: Washington State

Patentee before: Microsoft Corp.