CN102742282A - 基于块的交错 - Google Patents

基于块的交错 Download PDF

Info

Publication number
CN102742282A
CN102742282A CN2011800077313A CN201180007731A CN102742282A CN 102742282 A CN102742282 A CN 102742282A CN 2011800077313 A CN2011800077313 A CN 2011800077313A CN 201180007731 A CN201180007731 A CN 201180007731A CN 102742282 A CN102742282 A CN 102742282A
Authority
CN
China
Prior art keywords
image
block
image block
coding
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011800077313A
Other languages
English (en)
Other versions
CN102742282B (zh
Inventor
托马斯·爱德华·豪兰德尔
布兰·J·多林尼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
International Digital Madison Patent Holding SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of CN102742282A publication Critical patent/CN102742282A/zh
Application granted granted Critical
Publication of CN102742282B publication Critical patent/CN102742282B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M13/00—Coding, decoding or code conversion, for error detection or error correction; Coding theory basic assumptions; Coding bounds; Error probability evaluation methods; Channel models; Simulation or testing of codes
    • H03M13/27—Coding, decoding or code conversion, for error detection or error correction; Coding theory basic assumptions; Coding bounds; Error probability evaluation methods; Channel models; Simulation or testing of codes using interleaving techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/24—Systems for the transmission of television signals using pulse code modulation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Physics & Mathematics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Theoretical Computer Science (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

至少一个实施方式交错了来自立体图像对的块，并使用相应块作为参考实现了交错图像的帧内编码。一个特定的实施方式访问包括多个块的第一图像，多个块的其中之一是第一图像块。访问包括多个块的第二图像，多个块的其中之一是具有与第一图像块重叠的内容的第二图像块。以块为基础交错第一图像和第二图像的多个块，以形成交错图像。通过使用第二图像块作为参考编码第一图像块来编码交错图像的至少一部分。另一个实施方式提供了在信号中的编码后的一部分。又另一个实施方式通过使用第二图像块作为参考来访问编码后的图像并解码该部分。

Description

基于块的交错
相关申请的交叉引用
此申请要求以下的美国临时申请的申请日的权益，为了所有目的而通过引用将其完整纳入本文：序列号为No.61/337,060，于2010年1月29日提交，题为“针对改进的3D压缩的宏块交错(Macroblock interleavingfor improved 3D compression)”。
技术领域
描述了涉及图像压缩的实施方式。各种特定的实施方式涉及交错图像的压缩，交错图像可能由具有重叠内容的图像形成。
背景技术
已知各种技术来压缩图像，包括立体图像和多视图图像。AVC，是指现有的国际标准化组织/国际电工委员会(ISO/IEC)运动图片专家组-4(MPEG-4)第10部分高级视频编码(AVC)标准/国际电信联盟电信分部(ITU-T)的H.264建议(以下称“H.264/MPEG-4 AVC标准”或其变化，如“AVC标准”、“′H.264标准”或简称为“AVC”或“′H.264”)，可用于个别地压缩此类图像。在使用帧内编码技术AVC内通常对“I”帧进行压缩。
发明内容
根据一般方面，访问包括多个块的第一图像。第一图像的多个块包括第一图像块。访问包括多个块的第二图像。第二图像的多个块包括具有与第一图像块重叠的内容的第二图像块。第一图像的多个块和第二图像的多个块以块为基础交错以形成交错图像。交错图像的至少一部分通过使用第二图像块作为参考来编码第一图像块而被编码。提供编码后的第一图像块以供传输或存储。
根据另外的一般方面，视频信号或视频信号结构包括用于编码的一个或多个图片部分。编码是第一图像的多个块和第二图像的多个块的基于块的交错的编码。第一图像的多个块包括第一图像块，第二图像的多个块包括具有与第一图像块重叠的内容的第二图像块。第一图像块的编码使用第二图像块作为参考。
根据另外的一般方面，访问编码后的图像。编码后的图像是第一图像的多个块和第二图像的多个块的基于块的交错的编码。第一图像的多个块包括第一图像块，第二图像的多个块包括具有与第一图像块重叠的内容的第二图像块。解码编码后的图像的一部分。编码后的图像部分使用第二图像块作为参考来编码第一图像块。提供解码后的部分以供处理或显示。
在附图和下面的描述中阐明了一个或多个实施方式的细节。即使是以一特定的方式描述，应该明确的是，实施方式可以各种方式配置或实施。例如，实施方式可以执行为一种方法，或实施为一种设备(例如配置为执行一组操作的设备或存储用于执行一系列操作的指令的设备)，或以信号实施。从下面的详细说明结合所附的附图和权利要求书一并考虑，其他方面和特征将变得很明显。
附图说明
图1是描绘了可与一个或多个实施方式一起使用的用于编码和解码图像的系统和处理的示例的方块图/流程图。
图2是描绘了可与一个或多个实施方式一起使用的相邻块的示例的方块图。
图3是描绘了可与一个或多个实施方式一起使用的相邻参考块的示例的方块图。
图4是描绘了可与一个或多个实施方式一起使用的垂直交错和水平交错的示例的方块图/流程图。
图5是描绘了可与一个或多个实施方式一起使用的编码处理的示例的流程图。
图6是描绘了可与一个或多个实施方式一起使用的解码处理的示例的流程图。
图7是描绘了可与一个或多个实施方式一起使用的编码系统的示例的方块图/流程图。
图8是描绘了可与一个或多个实施方式一起使用的解码系统的示例的方块图/流程图。
图9是描绘了可与一个或多个实施方式一起使用的视频传输系统的示例的方块图/流程图。
图10是描绘了可与一个或多个实施方式一起使用的视频接收系统的示例的方块图/流程图。
具体实施方式
在此申请中说明的至少一个实施方式旨在提高对已合并成单个图像的立体图像对的压缩效率。实施方式以允许H.264压缩算法以更好地利用帧内块预测的方式重新排列立体图像对。立体图像对的左视图图片和右视图图片在宏块级交错。左视图图片和右视图图片被一起编码为单个图片，并且交错图片的排列通常提高了对典型的水平或垂直分割屏幕排列的帧内预测效率。
在基于块的压缩算法(例如支持MPEG2，MPEG4)中，发明人已确定，在I-图片压缩上花费了不均衡百分比的分配给压缩流的总位预算。注意，I图片经常被用作参考图片。在短期内，广播3D视频可能依靠分割屏幕方法来递送左/右立体图像对。一个典型的排列是左图片和右图片，每一个图片按一半来进行水平子采样，连接在一起以形成单个全尺寸的复合左+右图片。
水平子采样和垂直子采样两者都在当代的半分辨率3D编码器中使用。通常情况下，水平子采样用于1920×1080源材料，垂直子采样用于1280×720p源材料。
这些子采样方法的优点是，复合图片可以由原有设备编码和解码，而显示装置负责分离左图像和右图像。此方法虽然方便，但没有很好地利用在左图像和右图像之间的冗余。通过以允许压缩算法更好地利用此冗余的方式重新排列左图像和右图像，所产生的压缩后的图像流仍然能够与原有编码/解码工具在很大程度上保持兼容，同时提高了编码后的I(或参考)图片的压缩效率。
上面的方法能够用来作为MVC(多视图编码)的可替代方法。虽然是可替代方法，但上面的方法和MVC并不一定等同，这两种方法可能会产生不同的结果。MVC更具体地是指AVC标准的多视图视频编码(“MVC”)扩展(附录H)，被称为H.264/MPEG-4AVC，MVC扩展(“MVC扩展”或简称为“MVC”)。MVC是非向后兼容的压缩算法，它是已被开发来利用例如在立体图像对中的左视图和右视图之间的冗余的H.264/MPEG-4AVC标准的扩展。
参照图1，示出了系统100，系统100提供了用于处理帧内编码后的图片(即，I图片)的实施方式。帧内编码后的图片遵循图1所示和下文所述的处理。系统100包括编码块110、解码块120、连接编码块110和解码块120的传输操作130。
提供用于立体图像对的全分辨率输入图片作为到编码块110的输入。全分辨率立体图像包括左视图图片140和右视图图片142。全分辨率图像在水平维度上按1/2来进行下采样将原始水平尺寸减小1/2。这导致了使水平采样率转换(“SRC”)成为原始水平尺寸的1/2。下采样也被称为子采样、速率转换或向下缩放。编码块110包括下采样左视图图片140的采样器144和下采样右视图图片142的采样器146。采样器144产生是在水平维度上的左视图图片140的尺寸的1/2的采样后的左视图图片148。同样地，采样器146产生是在水平维度上的右视图图片142的尺寸的1/2的采样后的右视图图片150。
采样后的左视图图片148和采样后的右视图图片150被交错，以形成交错复合图片152。复合图片152是通过将采样后的左视图图片148分解(也称为分区或划分)成16×16的宏块、将采样后的右视图图片150分解成16×16的宏块，并将来自左视图图片148和右视图图片150的宏块交错以形成复合图片152。
在图1所示的实施方式中，如相对于下文图4所进一步解释，宏块以逐列的格式在交替的基础上被交错。这产生了复合图片152，复合图片152具有与采样后的左视图图片148和采样后的右视图图片150相同的垂直维度，以及两倍于采样后的左视图图片148或采样后的右视图图片150的水平维度。
编码块110包括编码复合图片152的H.264编码器154。在编码块110中，复合图片152使用HPL4.x而被编码以形成编码后的图片(未示出)。HPL4.x是指高级规范(profile)，4.x级，其包括4.0、4.1和4.2。然而，其他实施方式使用H.264编码规范中的任意若干，诸如例如所有等级的基线规范、所有等级的主规范和所有等级的高级规范。
编码器154将复合图片152编码为I图片，并使用H.264帧内编码模式。因此，复合图片152的块使用来自复合图片152的一个或多个其他块作为参考而被编码。例如，一个给定块的预测块可能会由相邻块的组合形成。一个给定块的相邻块通常被定义为在角落或边缘上触及给定块的八个块中的一个。参照图2，中间块M的八个相邻块以块1-8示出。注意，为了H.264帧内预测模式的目的，块1、2、3、4和6一般是允许作为预测块的。
参照图3，各种实施方式通过水平位于左侧的块(块A)、垂直位于上侧的块(块B)、对角线式地位于右上的块(块C)的结合而形成给定块(块G)的预测块。因为复合图片152使用逐列交错，应明确的是，块G将来自采样后的左视图图片148或采样后的右视图图片150中的一个，并且块A和C两者都将是来自其他采样后的图片。各种实施方式可能会形成基于块A、B或C中的仅仅一个(而不是其组合)的预测块或者基于包括非相邻块的其他块的预测块。特别地，各种实施方式提供了允许块G相对于仅块A被编码或相对于仅块C被编码的编码模式。
与使用不交错的分割屏幕格式(见下文描述的水平分割屏幕图片160)相比，此种代码块G仅使用块A或块C的模式被期望通过使用交错复合图片152来提高编码效率。至少部分提高的效率被期望通过能使用来自其他视图的相应块编码来自一个视图(左视图或右视图)的块而带来。如果相应块对齐得好，则残留将较少，并且将需要更少的位来编码。然而，需要注意的是，对齐不必完美以减少残留和提供编码增益。
如上所述，如图2中所示的块1、2、3、4和6可用作H.264帧内预测中的块M的预测块。然而，各种实施方式执行交错以利用如下事实：在立体视图中，期望在两个图片中有水平位移但没有垂直位移。在此种情况下，期望最好的预测块是来自其他立体视图的相应块。该相应块将往往是处于在列交错后被编码的块的左侧，并将往往是处于在行交错后被编码的块的上侧。
各种实施方式通过在复合图片152内搜索最好的参考块来执行复合图片152的帧内编码。更具体地说，若干此类实施方式在已被编码的当前图片的那些部分的重建中搜索。由于搜索，与仅使用预定的邻近块作为参考相比，此种模式往往更时间密集和更处理器密集。然而，此种模式通常提供了找到给定块的更好预测的优势。此种模式通常也提供了在无需知道视差的情况下找到相应立体图像块的优势。
编码块110包括解码编码后的图片以产生后解码的图片158的H.264解码器156。在编码块110的实施方式中，编码后的图片使用HPL4.x被解码。解码后的图片158是复合图片152的重建。
编码块110解交错解码后的图像158，以形成水平分割屏幕图片160。水平分割屏幕图片160包括采样后的左视图图片148的左图片重建162，并包括采样后的右视图图片150的右图片重建164。水平分割屏幕图片160被作为参考图片存储在参考图片存储装置(未示出)中，可以被编码块110用来作为参考图片。
P和B图片被编码为水平分割屏幕图片。也就是说，针对P和B图片，是将采样后的左视图图片148和采样后的右视图图片150形成水平分割屏幕图片，而不是形成交错复合图片，并由编码器154编码。如上所述，参考图片也被作为水平分割屏幕图片存储。当P或B编码后的块包含指向I图片的运动参考时，运动估计就被从水平分割屏幕重建图片160中提取出来。
因此，与P和B块相比，编码块110针对I块执行不同的操作。例如，针对I块，编码块110执行：(i)在编码前交错，和(ii)在形成水平分割屏幕重建图片前解交错。作为另一个示例，针对P和B块，编码块110在编码之前形成分割屏幕图片。
编码器154也提供了编码后的图片(未示出)到传输操作130以供传输。被传输图片由解码块120接收。
解码块120包括执行接收到的图片的HPL4.x解码的H.264解码器170。解码器170产生重建图片172，重建图片172是复合图片152的重建。因此，重建图片172具有从左图像(采样后的左视图图片148)和右图像(采样后的右视图图片150)交错的宏块。在一个典型的实施方式中，解码器170与解码器156将是相同的。
解码块120解交错重建图片172以形成包括左图片重建176和右图片重建178的水平分割屏幕图片174。如果在传输或解码中没有错误，则(i)重建图片172将匹配来自编码块110的解码后的图片，(ii)水平分割屏幕图片174将匹配水平分割屏幕图片160，(iii)左图片重建176将匹配左图片重建162，及(iv)右图片重建178将匹配右图片重建164。
解码块120包括执行水平采样率转换以恢复原始水平尺寸的采样器180。采样器180通过上采样左图片重建176以恢复左视图图片140的原始水平尺寸来执行转换。采样器180产生重建左视图图片184，重建左视图图片184是左视图图片140的重建。上采样也被称为速率转换或向上缩放。
同样地，解码块120包括执行水平采样率转换以恢复原始水平尺寸的采样器182。采样器182通过上采样右图片重建178以恢复右视图图片142的原始水平尺寸来执行转换。采样器182产生重建右视图图片186，重建右视图图片186是右视图图片142的重建。
重建左视图图片184和重建右视图图片186是准备好输出到显示器的全分辨率图片。其他实施方式也提供，或者可替代地提供重建左视图图片184和/或重建右视图图片186用于处理。此处理包括例如滤波、渲染另外的图像、伪影减少、颜色修改、边缘锐化和/或对象检测，并可在显示之前执行或代替显示来执行。此外，其他实施方式提供了水平分割屏幕图片174作为处理和/或显示的输出174。
如编码块110一样，与P和B块相比，解码块120也对I块执行不同的操作。例如，针对I块，解码块120在形成水平分割屏幕图片174之前执行解交错。相比之下，针对P和B块而言，解码器170的输出将是水平分割屏幕图片。
图1的处理至少在很大程度上与现有的处理是向后兼容的。此外，原有H.264编码器和解码器都可以使用。然而，图1的处理可以不与所有现有的解码过程完全向后兼容。尽管如此，许多解码器具有使用集成位块传送(Blit)(例如，可编程的位图图形装置；或执行位块图像传送例如以组合多个位图的位块传送装置)的能力或将宏块交错I图片图像转换成左/右分割屏幕图像的DMA能力。也就是说，现有的H.264解码器可能没有配置为将解码后的(交错图片)158转换成水平分割屏幕图片160，或将重建图片172转换成水平分割屏幕图片174。然而，用于执行此转换的技术是可行的，是使用例如诸如集成位块传送或DMA的技术的普通技术人员所掌握的。此外，此类技术可用于选择性地创建交错图像(例如，复合图片152)或待用作到H.264编码器的输入的分割屏幕连接图像。
其他实施方式修改了上述系统100的各个方面。某些实施方式和修改在下文描述，但也考虑了其他修改。
-例如，两个输入图像不需要形成立体图像对。在各种实施方式中，输入图像是来自多视图系统的图像。
-此外，输入图像不需要按正好1/2来进行下采样，且根本不需要下采样。在各种实施方式中，输入图像(i)保持在其原始的采样率，(ii)以非1/2的值来进行下采样，或(iii)上采样。
-此外，输入图像不需要以同样的速率进行采样。在各种实施方式中，第一输入图像以第一速率采样，第二输入图像以与第一速率不同的第二速率采样。
-实施方式可以使用两个以上的输入图像。各种实施方式使用三个或三个以上的输入图像，并交错所有的输入图像。一个此类实施方式交错来自多视图系统的三个或三个以上的输入视图。另一个此类实施方式交错四个图像，四个图像包括在第一时刻通过立体摄像机拍摄的第一立体图像对和在第二时刻通过立体摄像机拍摄的第二立体图像对。
-各种实施方式除了采样输入图像外还处理输入图像，或代替采样输入图像而处理输入图像。由各种实施方式执行的处理包括例如滤波图像的像素值、剪辑图像的像素值、将块添加到图像边框周围的图像或去除没有重叠内容的块。
-用于交错的块不必为16x16，甚至也不必为宏块。各种实施方式使用非16x16尺寸的块和/或使用与在编码中使用的宏块的尺寸不同的块尺寸。各种实施方式也改变块尺寸，或使用可选的块尺寸。H.264标准允许4×4块、8×8块和16x16宏块的帧内预测。一个上述实施方式图示并说明了使用宏块的概念，但其他实施方式实施了在块级别的交错，包括例如4x4块的级别、8x8块的级别和采用4×4块和8x8块两者的可变级别。
-交错图像不需要使用HPL4.x进行编码，更不需要H.264进行编码。各种实施方式使用不同的H.264规范或不同的编码方案。例如，针对H.264，可以使用所有等级的高级规范、所有等级的主规范和所有等级的基线规范，各种实施方式被指向于这些等级和规范中的每一个。
-由编码块110提供的编码后的交错图像不必被传输。例如，各种实施方式存储编码后的图像。
-参考图像不需要是水平分割屏幕图像，或者甚至根本不需要是分割屏幕图像。各种实施方式使用例如垂直分割屏幕图像作为参考，或使用交错图像作为参考，或使用单个图像作为参考。
-P和B图片不需要编码为水平分割屏幕图片。各种实施方式执行P和/或B立体图像对的交错，如上面对I图片所进行的。这些实施方式的一个或多个对于用作参考的其他图片使用帧间编码来编码交错P和/或B图片。若干此类实施方式的参考也是交错图片，但对于其他实施方式，未对参考进行交错。此外，这些实施方式中的一些考虑了帧内预测模式和帧间预测模式两者以在交错P或B图片中编码给定块。正因为如此，这些实施方式中的一些执行来自交错P或B图片的给定块的最优编码。
参照图4，示出了宏块级交错的两个实施方式的更详细的视图。图4描绘出了立体图像对的左图片410和右图片420。在此实施方式中，假定左图片410和右图片420已在水平方向上按因数2进行了下采样。如箭头425所示，这两个图片410和420被结合，以形成交错图片430。交错图片430实际上是图片410和420的列交错。
针对此实施方式，假定编码器由左到右逐行编码交错图片430。因此，当编码器编码交错图片430时，可以看出，当编码器到达标记为R22的块(在交错图片430中圈出)时，编码器已编码了来自左图片的相应块L22(也在交错图片430中圈出)，并具有可以在编码R22中使用的L22的编码。L22在交错图片430中紧邻R22的左侧。
L22和R22在立体图像对中互为相应块，因此假定其内容在很大程度上是重叠的。当两个块具有一些共同的内容时，内容重叠。当例如两个块包括特定的对象或背景时，即使该对象或背景不是在在各块中完全相同的相对位置，此两个块也共享共同的内容。
这些相应块的识别是简单地基于L22和R22在两个图片410和420中具有相应的位置的事实。也就是说，假定L22和R22在其各自的图片410和420中具有相同的(x，y)坐标。
其他实施方式基于例如视差来确定相应块。针对此类基于视差的实施方式，可使用各种基于视差的度量，诸如例如立体图像对的平均视差。在一个此类实施方式中，图片410的平均视差被确定为等于单块的水平尺寸。因此，图片410的块L12被确定为相应于图片420的块R11。注意，在此实施方式中，交错仍然可以如在交错图片430中执行，或者交错可基于视差。
在一个基于视差的实施方式中，块如在交错图片430中交错。然而，相应块可能是或不是相邻块。在示例中，L12相应于R11，如在交错图片430中所示，该两个块仍相邻。然而，如果视差等于块的水平尺寸的两倍，那么L13将相应于R11，该两个块在交错图片430中将不是相邻块。
在另一个基于视差的实施方式中，块基于视差交错。因此，如果L13相应于R11，那么该两个块交错，以使它们是相邻块。在一个此类实施方式中，图片410的前两列直接插入交错图片中，然后图片410的其余列与来自图片420的列进行列交错。最后，图片420最后剩下的列被直接插入交错图片中。
在各种实施方式中，块之间的相应关系并不完美。也就是说，共同的内容不是在每一相应块中的相同的相对位置上。例如，视差不等于块的水平尺寸。尽管如此，仍然实现了编码增益。
在其他的基于视差的实施方式中，来自各个输入图像的块基于其在输入图像中的相对位置被交错。例如，图片410的第一列后跟图片420的第一列。然而，交错图片的单个块是通过在交错图片搜索以找到好的参考来进行帧内编码的。此类搜索可识别相应块，而不需要实施方式在搜索之前知道视差。
其他下采样和交错选项也是可能的。仍参照图4，示出了实施方式，其中假定左图片410和右图片420已在垂直方向上按因数2进行了下采样，而不是如之前在上面的图4的讨论中说明的在水平方向上。此外，垂直下采样后的图片410和420然后进行行交错，以形成如箭头435所示的交错图片440。在编码交错图片430时，可以看出，当编码器到达标记为R22的块(在交错图片440中圈出)时，编码器已编码了来自左图片相应块L22(也在交错图片440中圈出)，并具有可以在编码R22中使用的L22的编码。L22在交错图片440中紧邻R22的上侧。
在另一个实施方式中，左图片和右图片是以水平和垂直方向的组合进行下采样，以将其尺寸按组合因数2减小。如本领域普通技术人员所理解的，为实现按组合因数2的减小，在水平和垂直方向上的下采样的各种组合都是可能的。这些下采样后的图片然后可以以本领域普通技术人员所知道的各种方式交错，包括行交错和列交错的组合。
另一个实施方式根本不进行下采样，假定图片410和420是其原始尺寸。此实施方式使用任一本领域已知的各种交错选项简单地结合左图片和右图片以产生大的交错图片。H.264编码器然后对该大的交错图片进行编码。
在图4的一个交错选项的典型实施方式中，编码器和解码器对交错图片430和440解交错，以形成典型的左/右水平分割屏幕视图的重建，如图1的水平分割屏幕图片174所提供。然而，在其他实施方式中，编码器和解码器不执行此操作。相反，编码器和解码器简单地产生仍使左视图和右视图交错的重建交错图片。编码器使用此交错重建来执行后续图片的编码。例如，如果P图片使用交错I图片作为参考进行运动编码，则编码器使用交错I图片以正常方式执行对适当运动矢量的搜索。以此种方式，编码器可以确定相应于左视图或右视图的块是针对正在P图片中编码的当前块的最佳“匹配”。其他实施方式扩大了在寻找参考图片中的最佳“匹配”中使用的搜索窗口，以说明在交错参考图片中交错已将分量左图片和右图片的块展开得更远的事实。
参照图5，示出了在编码两个图像中使用的实施方式。图5描绘出了在编码两个图像或其部分中使用的处理500。
处理500包括访问第一图像块(510)。第一图像可以是例如图1的采样后的左视图图片148，第一图像块可以是例如来自采样后的左视图图片148的左上块。
处理500包括访问内容与第一图像块重叠的第二图像块(520)。第二图像可以是例如图1的采样后的右视图图片150。采样后的左视图图片148和采样后的右视图图片150两者都从立体图像对产生，因此假定在内容上重叠。第二图像块可以是例如来自采样后的右视图图片150的左上块。
如果采样后的左视图图片148的左上块的视差大于左上块的水平块尺寸，其内容有可能不与采样后的右视图图片150的左上块的内容重叠。如上所述，例如当两个块包括共同的特征时，即使特征没有在两个块中的每一个中的相同的相对位置对齐，内容也可能会重叠。此种重叠通常发生在立体图像对以及多视图系统的独立视图中。无论图像中的一个是否翻转、旋转、滤波或以其他方式处理，内容都可能重叠。
处理500包括对包括第一图像块的第一图像的一部分和包括第二图像块的第二图像的一部分进行块交错(530)。两个部分可包括整个第一图像和第二图像。可替换地，两个部分可包括少于全部的第一图像和第二图像。块交错可以是例如如上所述的形成图1的复合图片152。
处理500包括使用交错第二图像块作为参考对交错第一图像块进行编码(540)。可以执行编码，例如如上所述的使用图1的编码器154来编码来自复合图片152的块。例如，假定列交错，使用块A作为预测块(即作为参考)编码图1B的块G将导致第一图像块(块G)被使用第二图像块(块A)作为参考来编码。
参照图6，示出了在解码两个图像中使用的实施方式。图6描绘出了在解码两个图像或其部分中使用的处理600。
处理600包括访问图像的编码(610)。图像是交错图像，其中两个图像已基于块进行交错。两个图像是包括多个第一图像块的第一图像和包括多个第二图像块的第二图像。编码可以是例如由上文讨论的图1的解码块120所接收和解码的接收到的图片。
处理600包括解码所访问的编码的一部分(620)。该部分包括已使用第二图像块作为参考编码的第一图像块的编码。如上文建议的，第一图像块可以是来自采样后的左视图图片148的左上块。如上文建议的，第二图像块可以是来自采样后的右视图图片150的左上块，在此讨论中假定其与来自采样后的左视图图片148的左上块具有重叠内容。可以由例如上文讨论的图1的H.264解码器170执行解码。
参照图7，编码器700描绘出了可用于编码诸如例如视频图像或深度图像的图像的编码器的实施方式。在一个实施方式中，编码器700被用作图1的系统100中的编码器154。编码器700也可用于编码数据，诸如例如提供编码后的比特流的有关信息的元数据。编码器700可以实施为例如视频传输系统的一部分，视频传输系统将关于图9在下文进行描述。还应该明确的是，图7的块除提供了编码器的方块图外，还提供了编码处理的流程图。
输入图像序列到达加法器701以及位移补偿块720和位移估计块718。注意，位移是指例如运动或视差。到加法器701的另一个输入是通过交换器723接收到的各个可能的参考图片信息中的一个。
例如，如果与交换器723进行信号通信的模式决定模块724确定编码模式应该是参照来自当前正在被编码的同一图片的块的帧内预测，则加法器701从帧内预测模块722接收其输入。可替换地，如果模式决定模块724确定编码模式应该是参照与当前正在被编码的图片不同的图片的位移补偿和估计，则加法器701从位移补偿模块720接收其输入。
在各种实施方式中，帧内预测模块722基于作为正在被编码的块的相邻块的一个或多个块提供了预定的预测块。此相邻块可以是交错块，交错块来自另一个输入图像，诸如例如与正在被编码的图片形成立体图像对的图片。在各种实施方式中，交错基于(x，y)坐标，使得块以它们在组成的图片中出现的顺序被交错。然而，在其他实施方式中，交错基于视差，使得内容相应的块尽可能相互相邻交错，不管这些块是位于其组成的图片的何处。
一个特定的实施方式通过编码单个值提供了此概念的实际使用，该单个值指定了在交错之前在左图片和右图片之间的整数个移位块。这允许在编码器处的平均视差测量来指导交错，在流中编码花费很少，并且允许在显示之前在解码器处进行容易的块解扰。
在各种实施方式中，帧内预测模块722通过在正在被编码的图片内搜索最佳参考块而提供预测块(参考)。更具体地说，若干此类实施方式在已编码的当前图片的那些部分的重建内搜索。在一些实施方式中，搜索限于位于现有的块边界上的块。然而，在其他实施方式中，搜索允许搜索块，不管那些块是否越过现有的块边界。由于搜索，此类实施方式往往比仅仅使用预定的邻近块作为参考更时间密集和处理器密集。然而，此类实施方式通常提供了找到给定块的更好预测的优势。此类实施方式通常还提供了在无需知道视差的情况下找到相应立体图像块或相应多视图图像块的优势。
此类实施方式可导致最佳估计帧内预测块。此外，在各种实施方式中，参考块的边界能够位于亚像素的边界上，参考的恢复涉及内插步骤以还原在解码过程中被用作参考的实际块。取决于图片的内容，与使用相邻块作为参考相比，此类亚像素内插实施方式可提高压缩效率。
加法器701提供信号给变换模块702，其配置为变换其输入信号并将变换后的信号提供给量化模块704。量化模块704配置为对其接收到的信号执行量化和将量化后的信息输出给熵编码器705。熵编码器705配置为对其输入信号执行熵编码以产生比特流。反量化模块706配置为从量化模块704接收量化后的信号并对量化后的信号执行反量化。接着，反变换模块708配置为从反量化模块706接收反量化后的信号并对其接收到的信号执行反变换。反变换模块708的输出是从加法器701输出的信号的重建。
加法器(更一般地被称为组合器)709将从反变换模块708和交换器723接收到的信号相加(组合)，并将产生的信号输出到帧内预测模块722和环路滤波器710。产生的信号是输入到编码器700的图像序列信号的重建。
如上文所讨论，帧内预测模块722使用其接收到的信号执行帧内预测。同样地，环路滤波器710对从加法器709接收到的信号滤波并将滤波后的信号提供给参考缓冲器712。参考缓冲器712将图像信息提供给位移估计和补偿模块718和720。
元数据可以被加到编码器700作为编码后的元数据，并与来自熵编码器705的输出比特流结合。可替换地，例如，未编码的元数据可随着量化后的图像序列输入到熵编码器705进行熵编码。
数据还由模式决定模块724提供给输出比特流。模式决定模块724将指示用于编码给定块的模式的信息提供给比特流。此类信息常常包括参考块的位置的指示。例如，在使用帧内预测和执行当前图片的搜索以找到参考块的各种实施方式中，模式决定模块724使用视差矢量指示参考位置。视差矢量信息可由帧内预测模块722提供给模式决定模块724。
如下文进一步所述，视差矢量信息可使用相邻宏块的视差矢量作为参考而以不同方式进行编码。此外，图片的视差矢量可分组并额外编码以去除熵，因为在视差矢量中可能有空间相似性。
参照图8，解码器800描绘了可用于解码图像并将它们提供给例如显示装置的解码器的实施方式。解码器800也可用于解码例如提供解码后的比特流的有关信息的元数据。在一个实施方式中，解码器800被用作图1的系统100中的解码器156和/或解码器170。此外，解码器800可以实施为例如视频接收系统的一部分，视频接收系统将关于图10在下文进行描述。还应该明确的是，图8的块除提供了解码器的方块图外，还提供了解码处理的流程图。
解码器800配置为使用比特流接收器802接收比特流。比特流接收器802与比特流解析器804进行信号通信并将比特流提供给比特流解析器804。
比特流解析器804配置为将残留比特流传输给熵解码器806、将控制句法元素传输给模式选择模块816以及将位移(运动/视差)矢量信息传输给位移补偿模块826和帧内预测模块818。
位移矢量信息可以是例如运动矢量信息或视差矢量信息。运动矢量信息通常用于帧间预测以指示与前一图像的相对运动。视差矢量信息通常用于(i)帧间预测，以指示对于独立图像的视差；或(ii)帧内预测，以指示对于相同的图像的一部分的视差。如在本领域中所已知，视差通常指示两个图像之间的相对偏移或位移。视差也可以用来指示在图像的两部分之间的相对偏移或位移。
反量化模块808对从熵解码器806接收到的熵解码后的信号执行反量化。此外，反变换模块810配置为对从反量化模块808接收到的反量化后的信号执行反变换并将反变换后的信号输出到加法器(也称为合并器)812。
取决于采用的解码模式，加法器812能够接收多种其他信号中的一种。例如，模式决定模块816能够通过解析和分析控制句法元素来确定编码器对当前处理的块执行了位移补偿还是帧内预测编码。根据确定的模式，模式选择控制模块816能够基于控制句法元素访问和控制交换器817，使得加法器812能够从位移补偿模块826或帧内预测模块818接收信号。
在这里，帧内预测模块818配置为执行帧内预测，以使用当前正在被解码的相同的图片作为参考对块进行解码。接着，位移补偿模块826配置为执行位移补偿，以使用另一个先前处理的、与当前正在被解码的图片不同的图片的块作为参考对块进行解码。
此外，各种实施方式的帧内预测模块818从比特流解析器804接收视差矢量信息，该视差矢量信息识别在帧内预测中使用的参考块的位置。在此类实施方式中，块通常已按搜索正在被编码的图片以找到参考的帧内编码模式被编码。这与(例如)使用来自正在被编码的图片的一个或多个预定块来产生预测块相反。
在接收预测或补偿信息信号后，加法器812将预测或补偿信息信号与反变换后的信号相加，以供传输到诸如例如滤掉块伪影的去块滤波器的环路滤波器814。加法器812还将相加后的信号输出到帧内预测模块818，以供帧内预测使用。
环路滤波器814配置为滤波其输入信号并输出解码后的图片。此外，环路滤波器814将滤波后的信号提供给参考缓冲器820。参考缓冲器820配置为解析其接收到的信号以允许并辅助位移补偿模块826的位移补偿解码，参考缓冲器820向位移补偿模块826提供解析后的信号。此类解析后的信号可以是例如可能已被用作参考的各个图片的全部或部分。
元数据可以包括在提供给比特流接收器802的比特流中。元数据可用比特流解析器804解析并用熵解码器806解码。使用输出(未示出)进行熵解码后，可从解码器800提取解码后的元数据。
现在参照图9，示出了上文所述的特征和原理可以适用的视频传输系统/设备900。视频传输系统900可以是例如前端(head-end)系统或传输系统，用于使用诸如例如卫星、电缆、电话线或地面广播的多种介质中的任何一个传输信号。传输可通过互联网或一些其他网络提供。视频传输系统900能够产生和递送例如视频内容和诸如例如的深度指示符的其他内容，深度指示符包括例如深度和/或视差值。还应明确的是，图9的块除提供了视频传输系统/设备的方块图外，还提供了视频传输处理的流程图。
视频传输系统900接收来自处理装置901的输入视频。在一个实施方式中，处理装置901简单地提供诸如左视图图片140和右视图图片142的原始尺寸的图像给视频传输系统900。然而，在另一个实施方式中，处理装置901是处理器，配置为针对系统100关于采样器144和采样器146的操作以及产生复合图片152的交错执行如上文所述的下采样和交错。处理装置901的各种实施方式包括，例如实施了图5的处理500的操作510、520和530的处理装置。处理装置901还可以向视频传输系统900提供元数据，该元数据指示输入图片是否被交错和/或提供描述交错的各种参数。此类参数包括例如交错图片数、每一张图片的转换率、每一张图片的转换类型(例如，水平采样或垂直采样)或交错模式(例如，行交错或列交错)。
视频传输系统900包括编码器902和能够传输编码后的信号的传输器904。编码器902从处理器901接收视频信息。视频信息可包括例如图像和深度指示符。编码器902基于视频信息生成编码后的信号。编码器902可以是例如编码块110、编码器154或编码器700。编码器902可包括子模块，包括例如用于接收各种信息并将其组装成结构化的格式以供存储或传输的装配单元。各种信息可包括例如编码后的或未编码的视频、编码后或未编码的深度指示符和/或信息以及编码后的或未编码的元素(诸如，例如运动矢量、编码模式指示符和句法元素)。在一些实施方式中，编码器902包括处理器901，因此执行处理器901的操作。
传输器904从编码器902接收编码后的信号并在一个或多个输出比特流中传输编码后的信号。传输器904可以例如适应为传输节目信号，该节目信号具有表示编码后的图片和/或与之相关的信息的一个或多个比特流。典型的传输器执行诸如例如提供纠错编码、对信号中的数据进行交错、将信号中的能量随机化、使用调制器906将信号调制到一个或多个载波上中的一个或多个功能。传输器904可包括天线(未示出)或与其以接口联接。此外，传输器904的实施方式可能是限于调制器906。
现在参照图10，示出了上文所述的特征和原理可以适用的视频接收系统/设备1000。视频接收系统1000可配置为通过诸如例如卫星、电缆、电话线或地面广播的多种介质接收信号。信号可通过互联网或一些其他网络接收。还应明确的是，图10的块除提供了视频接收系统/设备的方块图外，还提供了视频接收处理的流程图。
视频接收系统1000可以是例如手机、计算机、机顶盒、电视或接收编码后的视频并提供例如解码后的视频显示给用户以供处理或存储的其他装置。因此，视频接收系统1000可将其输出提供给例如电视屏幕、计算机显示器、计算机(用于存储、处理或显示)或一些其他存储、处理或显示装置。
视频接收系统1000能够接收和处理包括视频信息的视频内容。视频接收系统1000包括接收编码后的信号(诸如例如在本申请的实施方式中所描述的信号)的接收器1002。接收器1002可接收例如向图1的解码块120提供接收到的图片的信号、承载来自图7的编码器700的比特流的信号、或者从图9的视频传输系统900输出的信号。
接收器1002可以例如适应为接收节目信号，该节目信号具有表示编码后的图片的多个比特流。典型的接收器执行诸如例如接收调制和编码后的数据信号、使用解调器1004解调来自一个或多个载波的数据信号、将信号中的能量去随机化、对信号中的数据解交错、纠错解码信号中的一个或多个功能。接收器1002可包括天线(未示出)或与其以接口联接。接收器1002的实施方式可限于解调器1004。
视频接收系统1000包括解码器1006。接收器1002将接收到的信号提供给解码器1006。解码器1006输出解码后的信号(诸如例如包括视频信息的解码后的视频信号)。解码器1006可以是例如图1的系统100的解码器156或解码器170或图8的解码器800。
在一个实施方式中，将来自解码器1006的视频输出提供给处理装置1008。在一个实施方式中，处理装置1008是处理器，配置为针对系统100关于产生水平分割屏幕图片174的解交错以及采样器180和采样器182的操作执行如上文所述的解交错和上采样。在一些实施方式中，解码器1006包括处理器1008并因此执行处理器1008的操作。在其他实施方式中，处理器1008是诸如例如机顶盒或电视的下游装置的一部分。
因此，提供了具有特定特征和方面的一个或多个实施方式。然而，所描述的实施方式的特征和方面可能还适用于其他实施方式。
-例如，上述特征、方面和实施方式可应用于或适应于不局限于左/右立体系统的其他系统。一个此类实施方式将视频图像和其相应深度图片交错。另一个此类实施方式将来自不一定与左视图和右视图有关的多视图系统的两个或两个以上不同的视图交错。
-作为另一个示例，上述实施方式一般性地描述了宏块级交错。然而，在其他实施方式中，在其他等级上执行交错。此类其他级包括例如场等级、分片(slice)等级和分区等级。
-作为另一个示例，这些实施方式和特征可用于编码视频和/或编码其他类型的数据的上下文。此外，这些实施方式和特征可用于或适应用于标准的上下文。此类标准包括例如AVC、针对多视图编码(MVC)的AVC扩展、针对可伸缩视频编码(SVC)的AVC扩展、针对3-D视频编码(3DV)和针对高性能视频编码(HVC)的任何建议的MPEG/JVT标准，但也可使用(现有的或将来的)其他标准。当然，实施方式和特征不需要在标准中使用。
各种实施方式涉及“图像”和/或“图片”。在本文中，术语“图像”和“图片”通篇交替使用，旨为广义上的术语。“图像”或“图片”可以是，例如一个帧或一个场的全部或部分。术语“视频”是指图像(或图片)的序列。图像或图片可包括例如各种视频组分中的任意一个或它们的组合。此类组分或它们的组合包括例如亮度、色度、(YUV或YCbCr或YPbPr中的)Y、(YUV中的)U、(YUV中的)V、(YCbCr中的)Cb、(YCbCr中的)Cr、(YPbPr中的)Pb、(YPbPr中的)Pr、(RGB中的)红、(RGB中的)绿、(RGB中的)蓝、S-视频以及任何这些组分的负或正。“图像”或“图片”也可以指或者可替代地指各种不同类型的内容，包括例如典型的二维视频、2D视频图像的视差图、相应于2D视频图片的深度图或边缘图。
此外，本申请或其权利要求可指“确定”各种信息。确定信息可包括例如估计信息、计算信息、预测信息、识别信息或从存储器中检索信息中的一个或多个。
应理解的是，例如在“A/B”、“A和/或B”以及“A和B中的至少一个”的情况下使用下面的“/”、“和/或”以及“至少一个”旨在包括选择第一列举选项(A)而不选择第二列举选项(B)、选择第二列举选项(B)而不选择第一列举选项(A)、或选择两个选项(A和B)。作为一个进一步的示例，在“A、B和/或C”、“A、B和C中的至少一个”和“A、B或C中的至少一个”的情况下，此类措辞旨在包括选择第一列举选项(A)而不选择第二列举选项(B)和第三列举选项(C)、选择第二列举选项(B)而不选择第一列举选项(A)和第三列举选项(C)、选择第三列举选项(C)而不选择第一列举选项(A)和第二列举选项(B)、选择第一列举选项(A)和第二列举选项(B)而不选择第三列举选项(C)、选择第一列举选项(A)和第三列举选项(C)而不选择第二列举选项(B)、选择第二列举选项(B)和第三列举选项(C)而不选择第一列举选项(A)、或者选择所有三个选项(A、B和C)。对于本领域及相关领域的普通技术人员将显而易见的，此情况可以延伸为任意尺寸的列举。注意，在本段中讨论的措辞不是为了限制选择，以便不包括未列举的元素。例如，“A和/或B”不排除选择“A”和“C”。
参照本原理的“一个实施例”或“一实施例”或“一个实施方式”或“一实施方式”及其变形是指结合实施例说明的一个特定的特征、结构、特点等被包括在本原理的至少一个实施例中。因此，整个说明书的各个地方出现的短语“在一个实施例中”或“在一实施例中”或“在一个实施方式中”或“在一实施方式中”及其任何其他变形并不一定都是指相同的实施例。此外，这些短语(例如，“在一个实施例中”)并不旨在指示只有一个可能的实施例，而是要注意正在讨论一个特定的实施例的事实。
本文所述的实施方式可以用例如方法或处理、设备、软件程序、数据流或信号实施。即使是只在单一形式的实施方式(例如，只作为方法讨论)的上下文中讨论，所讨论的特征的实施方式也可以其他形式(例如，设备或程序)实施。一种设备可在例如合适的硬件、软件和/或固件中实施。方法可以在例如一种诸如例如处理器的设备中实施，处理器是指一般的处理装置，包括例如计算机、微处理器、集成电路或可编程逻辑装置。处理器还包括通信装置，诸如例如计算机、手机、便携/个人数字助理(“PDA”)和方便终端用户或装置之间的信息通信的其他装置。
本文所述的各种处理和特征的实施方式可在各种不同的设备或应用中实现，特别是在例如与数据编码和解码相关联的设备或应用中。这类设备的示例包括编码器、解码器、处理来自解码器的输出的后处理器、给编码器提供输入的预处理器、视频编码器、视频解码器、视频编解码器、网页服务器、机顶盒、笔记本计算机、个人计算机、手机、PDA和其他通信装置。应当明确的是，设备可以是移动的，甚至可安装在移动车辆上。
此外，本方法可用由处理器执行的指令来实施，这些指令(和/或实施方式产生的数据值)可以存储在诸如例如集成电路、软件载体或其他存储装置的处理器可读介质中，其他存储装置诸如例如硬盘、压缩盘、随机存取存储器(“RAM”)或只读存储器(“ROM”)的。指令可以形成在处理器可读介质上有形实现的应用程序。指令可以例如在硬件、固件、软件或组合中。指令可以在例如操作系统、独立应用或二者的组合中发现。因此，处理器可以特征化为，例如既是配置为执行处理的装置，又是包括具有执行处理的指令的处理器可读介质(诸如存储装置)的装置。此外，处理器可读介质在指令之外还存储实施方式产生的数据值，或存储实施方式产生的数据值来代替指令。
对本领域的技术人员将是显而易见的是，实施方式可产生各种信号，其格式化以携带例如存储或传输的信息。信息可包括例如执行方法的指令或由所描述的实施方式之一产生的数据。此信号可能被格式化为例如电磁波(例如，使用频谱的无线电频率部分)或基带信号。格式化可包括例如编码数据流和用编码后的数据流调制载波。信号所携带的信息可以是，例如模拟或数字信息。如已知，信号可以经过各种不同的有线或无线链路传输。信号可存储在处理器可读介质上。
已描述了很多实施方式。然而，将会理解的是，可做出各种修改。例如，不同的实施方式的元素可以结合、补充、修改或去除，以产生其他实施方式。此外，普通技术人员将理解，其他结构和处理可取代公开的实施方式，生成的实施方式将以至少大体上相同的方式执行至少大体上相同的功能，以实现至少大体上相同的结果。因此，这些和其他实施方式被本公开考虑到并且在本公开的范围之内。

Claims (46)

1.一种方法，包括：
访问包括多个块的第一图像，所述第一图像的多个块包括第一图像块；
访问包括多个块的第二图像，所述第二图像的多个块包括具有与所述第一图像块重叠的内容的第二图像块；
以块为基础交错所述第一图像的多个块和所述第二图像的多个块以形成交错图像；
通过使用所述第二图像块作为参考编码所述第一图像块来编码所述交错图像的至少一部分；和
提供编码后的第一图像块以供传输或存储。
2.如权利要求1所述的方法，其中所述第一图像和所述第二图像形成了一个立体图像对。
3.如权利要求1所述的方法，其中所述第一图像和所述第二图像是多视图系统的两个单独的视图。
4.如权利要求1-3中任一所述的方法，其中所述第一图像块是(i)分区，(ii)宏块，(iii)分片，或(iv)场。
5.如权利要求1-4中任一所述的方法，其中所述编码包括H.264编码。
6.如权利要求5所述的方法，其中所述H.264编码包括使用H.264帧内编码模式来编码。
7.如权利要求1-6中任一所述的方法，其中编码所述第一图像块包括基于所述第一图像块的视差值识别所述第二图像块。
8.如权利要求1-7中任一所述的方法，其中交错包括基于所述第一图像和所述第二图像中的相对位置交错块。
9.如权利要求1-7中任一所述的方法，其中交错包括基于在述第一图像中的多个块的视差值交错块。
10.如权利要求1-9中任一所述的方法，其中所述第一图像块和所述第二图像块是所述交错图像中的相邻块。
11.如权利要求1-9中任一所述的方法，其中所述第一图像块和所述第二图像块是所述交错图像中的非相邻块。
12.如权利要求1-11中任一所述的方法，其中所述第一图像块和所述第二图像块是以包括一个或多个水平交错或垂直交错的方式被交错的。
13.如权利要求1-12中任一所述的方法，其中所述第一图像是原始第一图像的下采样后的版本。
14.如权利要求13所述的方法，还包括下采样所述原始第一图像以产生所述第一图像。
15.一种包括一个或多个处理器的设备，一个或多个处理器整体配置为执行：
访问包括多个块的第一图像，所述第一图像的多个块包括第一图像块；
访问包括多个块的第二图像，所述第二图像的多个块包括具有与所述第一图像块重叠的内容的第二图像块；
以块为基础交错所述第一图像的多个块和所述第二图像的多个块以形成交错图像；
通过使用所述第二图像块作为参考编码所述第一图像块来编码所述交错图像的至少一部分；
提供编码后的第一图像块以供传输或存储。
16.如权利要求15所述的设备，还包括存储编码后的第一图像块的存储器。
17.一种设备，包括：
用于访问包括多个块的第一图像的装置，所述第一图像的多个块包括第一图像块；
用于访问包括多个块的第二图像的装置，所述第二图像的多个块包括具有与所述第一图像块重叠的内容的第二图像块；
用于以块为基础交错所述第一图像的多个块和所述第二图像的多个块以形成交错图像的装置；
用于通过使用所述第二图像块作为参考编码所述第一图像块来编码所述交错图像的至少一部分的装置；和
用于提供编码后的第一图像块以供传输或存储的装置。
18.一种处理器可读介质，其上存储了导致一个或多个处理器整体执行如下操作的指令：
访问包括多个块的第一图像，所述第一图像的多个块包括第一图像块；
访问包括多个块的第二图像，所述第二图像的多个块包括具有与所述第一图像块重叠的内容的第二图像块；
以块为基础交错所述第一图像的多个块和所述第二图像的多个块以形成交错图像；
通过使用所述第二图像块作为参考编码所述第一图像块来编码所述交错图像的至少一部分；和
提供编码后的第一图像块以供传输或存储。
19.一种设备，包括：
一个或多个处理器，其整体配置为：
访问包括多个块的第一图像，所述第一图像的多个块包括第一图像块；
访问包括多个块的第二图像，所述第二图像的多个块包括具有与所述第一图像块重叠的内容的第二图像块；和
以块为基础交错所述第一图像的多个块和所述第二图像的多个块以形成交错图像；以及
编码器，用于
通过使用所述第二图像块作为参考编码所述第一图像块来编码所述交错图像的至少一部分；
提供编码后的第一图像块以供传输或存储。
20.一种设备，包括：
一个或多个处理器，其整体配置为：
访问包括多个块的第一图像，所述第一图像的多个块包括第一图像块；
访问包括多个块的第二图像，所述第二图像的多个块包括具有与所述第一图像块重叠的内容的第二图像块；和
以块为基础交错所述第一图像的多个块和所述第二图像的多个块以形成交错图像；
编码器，用于通过使用所述第二图像块作为参考编码所述第一图像块来编码所述交错图像的至少一部分；以及
调制器，用于用编码后的第一图像块调制信号。
21.一种格式化为包括信息的视频信号，所述视频信号包括：
用于第一图像的多个块和第二图像的多个块的基于块的交错的编码的一个或多个图片部分，所述第一图像的多个块包括第一图像块，所述第二图像的多个块包括具有与所述第一图像块重叠的内容的第二图像块，其中所述第一图像块的编码使用所述第二图像块作为参考。
22.一种视频信号结构，包括：
用于第一图像的多个块和第二图像的多个块的基于块的交错的编码的一个或多个图片部分，所述第一图像的多个块包括第一图像块，所述第二图像的多个块包括具有与所述第一图像块重叠的内容的第二图像块，其中所述第一图像块的编码使用所述第二图像块作为参考。
23.一种处理器可读介质，其上存储了视频信号结构，包括：
用于第一图像的多个块和第二图像的多个块的基于块的交错的编码的一个或多个图片部分，所述第一图像的多个块包括第一图像块，所述第二图像的多个块包括具有与所述第一图像块重叠的内容的第二图像块，其中所述第一图像块的编码使用所述第二图像块作为参考。
24.一种方法，包括：
访问编码后的图像，所述编码后的图像是第一图像的多个块和第二图像的多个块的基于块的交错的编码，所述第一图像的多个块包括第一图像块，所述第二图像的多个块包括具有与所述第一图像块重叠的内容的第二图像块；
解码使用所述第二图像块作为参考编码所述第一图像块的编码后的图像的一部分；和
提供解码后的部分以供处理或显示。
25.如权利要求24所述的方法还包括：
对编码后的图像解码，以产生包括解码后的部分的解码后的图像；
对编码后的图像解交错，以产生包括至少所述第一图像的重建和所述第二图像的重建的解交错后的图像。
26.如权利要求25所述的方法，进一步包括上采样解交错后的图像，以产生上采样后的图像。
27.如权利要求26所述的方法，进一步包括交错上采样后的图像，以产生重新交错后的图像以供3D显示。
28.如权利要求24-27中任一所述的方法，其中所述第一图像和所述第二图像形成了一个立体图像对。
29.如权利要求24-26中任一所述的方法，其中所述第一图像和所述第二图像是多视图系统的两个单独的视图。
30.如权利要求24-29中任一所述的方法，其中所述第一图像块是(i)分区，(ii)宏块，(iii)分片，或(iv)场。
31.如权利要求24-30中任一所述的方法，其中所述解码包括H.264解码。
32.如权利要求31所述的方法，其中所述H.264解码包括使用H.264帧内解码模式来解码。
33.如权利要求24-32中任一所述的方法，其中解码所述第一图像块包括基于所述第一图像块的视差值识别所述第二图像块。
34.如权利要求24-33中任一所述的方法，其中所述基于块的交错包括基于所述第一图像和所述第二图像中的相对位置交错块。
35.如权利要求24-33中任一所述的方法，其中所述基于块的交错包括基于所述第一图像中的多个块的视差值交错块。
36.如权利要求24-35中任一所述的方法，其中所述第一图像块和所述第二图像块是所述交错图像中的相邻块。
37.如权利要求24-35中任一所述的方法，其中所述第一图像块和所述第二图像块是所述交错图像中的非相邻块。
38.如权利要求24-37中任一所述的方法，其中所述基于块的交错包括以包括一个或多个水平交错或垂直交错的方式交错所述第一图像块和所述第二图像块。
39.如权利要求24-38中任一所述的方法，其中所述第一图像是原始第一图像的下采样后的版本。
40.一种包括一个或多个处理器的设备，一个或多个处理器整体配置为执行：
访问编码后的图像，所述编码后的图像是第一图像的多个块和第二图像的多个块的基于块的交错的编码，所述第一图像的多个块包括第一图像块，所述第二图像的多个块包括具有与所述第一图像块重叠的内容的第二图像块；
解码使用所述第二图像块作为参考编码所述第一图像块的编码后的图像的一部分；和
提供解码后的部分以供处理或显示。
41.如权利要求40所述的设备还包括用于存储解码后的部分的存储器。
42.一种设备，包括：
用于访问编码后的图像的装置，所述编码后的图像是第一图像的多个块和第二图像的多个块的基于块的交错的编码，所述第一图像的多个块包括第一图像块，所述第二图像的多个块包括具有与所述第一图像块重叠的内容的第二图像块；
用于解码使用所述第二图像块作为参考编码所述第一图像块的编码后的图像的一部分的装置；和
用于提供解码后的部分以供处理或显示的装置。
43.一种处理器可读介质，其上存储了导致一个或多个处理器整体执行如下操作的指令：
访问编码后的图像，所述编码后的图像是第一图像的多个块和第二图像的多个块的基于块的交错的编码，所述第一图像的多个块包括第一图像块，所述第二图像的多个块包括具有与所述第一图像块重叠的内容的第二图像块；
解码使用所述第二图像块作为参考编码所述第一图像块的编码后的图像的一部分；和
提供解码后的部分以供处理或显示。
44.一种包括解码器的设备，解码器配置为执行：
访问编码后的图像，所述编码后的图像是第一图像的多个块和第二图像的多个块的基于块的交错的编码，所述第一图像的多个块包括第一图像块，所述第二图像的多个块包括具有与所述第一图像块重叠的内容的第二图像块；
解码使用所述第二图像块作为参考编码所述第一图像块的编码后的图像的一部分；和
提供解码后的部分以供处理或显示。
45.如权利要求44所述的设备，其中所述解码器是编码器的一部分。
46.一种设备，包括：
解调器，用于解调包括编码后的图像的信号；和
解码器，用于执行至少如下操作：
访问解调后的编码后的图像，所述编码后的图像是第一图像的多个块和第二图像的多个块的基于块的交错的编码，所述第一图像的多个块包括第一图像块，所述第二图像的多个块包括具有与所述第一图像块重叠的内容的第二图像块；
解码使用所述第二图像块作为参考编码所述第一图像块的编码后的图像的一部分；和
提供解码后的部分以供处理或显示。
CN201180007731.3A 2010-01-29 2011-01-28 基于块的交错 Expired - Fee Related CN102742282B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US33706010P 2010-01-29 2010-01-29
US61/337,060 2010-01-29
PCT/US2011/000168 WO2011094019A1 (en) 2010-01-29 2011-01-28 Block-based interleaving

Publications (2)

Publication Number Publication Date
CN102742282A true CN102742282A (zh) 2012-10-17
CN102742282B CN102742282B (zh) 2017-09-08

Family

ID=43836663

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180007731.3A Expired - Fee Related CN102742282B (zh) 2010-01-29 2011-01-28 基于块的交错

Country Status (7)

Country Link
US (1) US9215445B2 (zh)
EP (1) EP2529557A1 (zh)
JP (1) JP5722349B2 (zh)
KR (1) KR101828096B1 (zh)
CN (1) CN102742282B (zh)
BR (1) BR112012018976A2 (zh)
WO (1) WO2011094019A1 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105376549B (zh) 2009-01-29 2017-08-11 杜比实验室特许公司 视频编码方法及解码视频信号的方法
JP5562408B2 (ja) 2009-04-20 2014-07-30 ドルビー ラボラトリーズ ライセンシング コーポレイション 指揮された補間およびデータの後処理
KR20120129996A (ko) * 2010-02-24 2012-11-28 톰슨 라이센싱 3ｄ용 분할 스크린
KR101885341B1 (ko) * 2011-10-20 2018-08-07 삼성전자 주식회사 디스플레이 드라이버와 이미지 데이터 처리 장치의 동작 방법
US9609336B2 (en) * 2013-04-16 2017-03-28 Fastvdo Llc Adaptive coding, transmission and efficient display of multimedia (acted)
CA2909550C (en) * 2013-07-15 2018-04-24 Mediatek Singapore Pte. Ltd. Method of disparity derived depth coding in 3d video coding
US10057593B2 (en) * 2014-07-08 2018-08-21 Brain Corporation Apparatus and methods for distance estimation using stereo imagery
US10055850B2 (en) 2014-09-19 2018-08-21 Brain Corporation Salient features tracking apparatus and methods using visual initialization
IL236606B (en) * 2015-01-11 2020-09-30 Gornik Amihay Standards and methods for agricultural monitoring
EP3979644A1 (en) * 2020-10-02 2022-04-06 Koninklijke Philips N.V. A method and apparatus for encoding and decoding one or more views of a scene

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090002481A1 (en) * 2007-06-26 2009-01-01 Samsung Electronics Co., Ltd. Method and apparatus for generating stereoscopic image bitstream using block interleaved method
WO2009040701A2 (en) * 2007-09-24 2009-04-02 Koninklijke Philips Electronics N.V. Method and system for encoding a video data signal, encoded video data signal, method and system for decoding a video data signal
WO2010011557A2 (en) * 2008-07-20 2010-01-28 Dolby Laboratories Licensing Corporation Encoder optimization of stereoscopic video delivery systems

Family Cites Families (70)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5193000A (en) 1991-08-28 1993-03-09 Stereographics Corporation Multiplexing technique for stereoscopic video system
US5689641A (en) 1993-10-01 1997-11-18 Vicor, Inc. Multimedia collaboration system arrangement for routing compressed AV signal through a participant site without decompressing the AV signal
US5748786A (en) 1994-09-21 1998-05-05 Ricoh Company, Ltd. Apparatus for compression using reversible embedded wavelets
US6055012A (en) 1995-12-29 2000-04-25 Lucent Technologies Inc. Digital multi-view video compression with complexity and compatibility constraints
DE19619598A1 (de) 1996-05-15 1997-11-20 Deutsche Telekom Ag Verfahren zur Speicherung oder Übertragung von stereoskopischen Videosignalen
US6075905A (en) 1996-07-17 2000-06-13 Sarnoff Corporation Method and apparatus for mosaic image construction
US6173087B1 (en) 1996-11-13 2001-01-09 Sarnoff Corporation Multi-view image registration with application to mosaicing and lens distortion correction
US6157396A (en) 1999-02-16 2000-12-05 Pixonics Llc System and method for using bitstream information to process images for use in digital display systems
US6390980B1 (en) 1998-12-07 2002-05-21 Atl Ultrasound, Inc. Spatial compounding with ultrasonic doppler signal information
US6223183B1 (en) 1999-01-29 2001-04-24 International Business Machines Corporation System and method for describing views in space, time, frequency, and resolution
US7254265B2 (en) 2000-04-01 2007-08-07 Newsight Corporation Methods and systems for 2D/3D image conversion and optimization
DE10016074B4 (de) 2000-04-01 2004-09-30 Tdv Technologies Corp. Verfahren und Vorrichtung zur Erzeugung von 3D-Bildern
AU2001276544A1 (en) 2000-09-18 2002-04-02 International Business Machines Corporation Method, system and computer program for managing views at a computer display
CA2472272A1 (en) 2001-11-24 2003-06-05 Tdv Technologies Corp. Generation of a stereo image sequence from a 2d image sequence
US7263240B2 (en) 2002-01-14 2007-08-28 Eastman Kodak Company Method, system, and software for improving signal quality using pyramidal decomposition
CA2380105A1 (en) 2002-04-09 2003-10-09 Nicholas Routhier Process and system for encoding and playback of stereoscopic video sequences
US7529400B2 (en) 2002-04-25 2009-05-05 Sharp Kabushiki Kaisha Image encoder, image decoder, record medium, and image recorder
JP4154569B2 (ja) 2002-07-10 2008-09-24 日本電気株式会社 画像圧縮伸長装置
US7489342B2 (en) 2004-12-17 2009-02-10 Mitsubishi Electric Research Laboratories, Inc. Method and system for managing reference pictures in multiview videos
US20040260827A1 (en) 2003-06-19 2004-12-23 Nokia Corporation Stream switching based on gradual decoder refresh
US7496234B2 (en) 2003-06-20 2009-02-24 Microsoft Corporation System and method for seamless multiplexing of embedded bitstreams
KR100519776B1 (ko) 2003-11-24 2005-10-07 삼성전자주식회사 영상 신호의 해상도 변환 방법 및 장치
KR100587952B1 (ko) 2003-12-05 2006-06-08 한국전자통신연구원 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 부호화/복호화 장치 및 그 방법
GB2412519B (en) 2004-03-23 2010-11-03 British Broadcasting Corp Monitoring system
JP4542447B2 (ja) 2005-02-18 2010-09-15 株式会社日立製作所 画像の符号化／復号化装置、符号化／復号化プログラム及び符号化／復号化方法
KR100679740B1 (ko) 2004-06-25 2007-02-07 학교법인연세대학교 시점 선택이 가능한 다시점 동영상 부호화/복호화 방법
RU2402811C2 (ru) 2004-07-29 2010-10-27 Майкрософт Корпорейшн Обработка изображений с помощью линейных параметров светоустановки и других усовершенствований обработки изображений
KR100714068B1 (ko) 2004-10-16 2007-05-02 한국전자통신연구원 계층적 깊이 영상을 이용한 다시점 동영상 부호화/복호화방법 및 장치
EP1667448A1 (en) 2004-12-02 2006-06-07 Deutsche Thomson-Brandt Gmbh Method and apparatus for encoding and for decoding a main video signal and one or more auxiliary video signals
US7728878B2 (en) 2004-12-17 2010-06-01 Mitsubishi Electric Research Labortories, Inc. Method and system for processing multiview videos for view synthesis using side information
US20060176318A1 (en) 2005-02-09 2006-08-10 Martin Virginia L Method for manipulating artwork to form decorative pieces
US8228994B2 (en) 2005-05-20 2012-07-24 Microsoft Corporation Multi-view video coding based on temporal and view decomposition
KR100716999B1 (ko) 2005-06-03 2007-05-10 삼성전자주식회사 영상의 대칭성을 이용한 인트라 예측 방법, 이를 이용한영상의 복호화, 부호화 방법 및 장치
JP5020947B2 (ja) 2005-06-23 2012-09-05 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 画像及び関連する深さデータの結合されたやり取り
US9661376B2 (en) * 2005-07-13 2017-05-23 Polycom, Inc. Video error concealment method
US7668366B2 (en) 2005-08-09 2010-02-23 Seiko Epson Corporation Mosaic image data processing
WO2007046957A1 (en) 2005-10-12 2007-04-26 Thomson Licensing Method and apparatus for using high-level syntax in scalable video encoding and decoding
CN101292538B (zh) * 2005-10-19 2012-11-28 汤姆森特许公司 使用可缩放的视频编码的多视图视频编码
US7903737B2 (en) 2005-11-30 2011-03-08 Mitsubishi Electric Research Laboratories, Inc. Method and system for randomly accessing multiview videos with known prediction dependency
US8457219B2 (en) 2005-12-30 2013-06-04 Ikanos Communications, Inc. Self-protection against non-stationary disturbances
ZA200805337B (en) 2006-01-09 2009-11-25 Thomson Licensing Method and apparatus for providing reduced resolution update mode for multiview video coding
US7817865B2 (en) 2006-01-12 2010-10-19 Lg Electronics Inc. Processing multiview video
US20070205367A1 (en) 2006-03-01 2007-09-06 General Electric Company Apparatus and method for hybrid computed tomography imaging
KR101245251B1 (ko) 2006-03-09 2013-03-19 삼성전자주식회사 균일한 화질을 제공하는 다시점 영상 부호화 및 복호화방법 및 장치
JP2008034892A (ja) * 2006-03-28 2008-02-14 Victor Co Of Japan Ltd 多視点画像符号化装置
CN101416518B (zh) 2006-03-29 2013-07-10 汤姆森特许公司 多视图视频编码方法和装置
US7609906B2 (en) 2006-04-04 2009-10-27 Mitsubishi Electric Research Laboratories, Inc. Method and system for acquiring and displaying 3D light fields
US8139142B2 (en) 2006-06-01 2012-03-20 Microsoft Corporation Video manipulation of red, green, blue, distance (RGB-Z) data including segmentation, up-sampling, and background substitution techniques
WO2008024345A1 (en) 2006-08-24 2008-02-28 Thomson Licensing Adaptive region-based flipping video coding
PL2103136T3 (pl) 2006-12-21 2018-02-28 Thomson Licensing Sposoby i urządzenie dla ulepszonej sygnalizacji przy użyciu składni wysokiego poziomu dla kodowania i dekodowania wielo-widokowego wideo
US8515194B2 (en) 2007-02-21 2013-08-20 Microsoft Corporation Signaling and uses of windowing information for images
DK2512136T3 (en) 2007-04-12 2016-08-22 Thomson Licensing Tiling in video coding and decoding
WO2008140190A1 (en) 2007-05-14 2008-11-20 Samsung Electronics Co, . Ltd. Method and apparatus for encoding and decoding multi-view image
JP4418827B2 (ja) 2007-05-16 2010-02-24 三菱電機株式会社 画像表示装置及び方法、並びに画像発生装置及び方法
US8373744B2 (en) 2007-06-07 2013-02-12 Reald Inc. Stereoplexing for video and film applications
KR100962696B1 (ko) 2007-06-07 2010-06-11 주식회사 이시티 부호화된 스테레오스코픽 영상 데이터 파일의 구성방법
JP2010530702A (ja) 2007-06-19 2010-09-09 韓國電子通信研究院 ステレオスコピックデータの保存および再生のためのメタデータ構造、およびこれを用いるステレオスコピックコンテンツファイルの保存方法
KR20090004661A (ko) * 2007-07-04 2009-01-12 엘지전자 주식회사 디지털 방송 시스템 및 데이터 처리 방법
JP5068598B2 (ja) 2007-08-01 2012-11-07 富士通コンポーネント株式会社 プリンタ装置
US8218855B2 (en) 2007-10-04 2012-07-10 Samsung Electronics Co., Ltd. Method and apparatus for receiving multiview camera parameters for stereoscopic image, and method and apparatus for transmitting multiview camera parameters for stereoscopic image
KR100918862B1 (ko) 2007-10-19 2009-09-28 광주과학기술원 참조영상을 이용한 깊이영상 생성방법 및 그 장치, 생성된깊이영상을 부호화/복호화하는 방법 및 이를 위한인코더/디코더, 그리고 상기 방법에 따라 생성되는 영상을기록하는 기록매체
KR101545009B1 (ko) 2007-12-20 2015-08-18 코닌클리케 필립스 엔.브이. 스트레오스코픽 렌더링을 위한 이미지 인코딩 방법
KR101506217B1 (ko) 2008-01-31 2015-03-26 삼성전자주식회사 스테레오스코픽 영상의 부분 데이터 구간 재생을 위한스테레오스코픽 영상 데이터스트림 생성 방법과 장치, 및스테레오스코픽 영상의 부분 데이터 구간 재생 방법과 장치
US20090219985A1 (en) * 2008-02-28 2009-09-03 Vasanth Swaminathan Systems and Methods for Processing Multiple Projections of Video Data in a Single Video File
US8878836B2 (en) 2008-02-29 2014-11-04 Samsung Electronics Co., Ltd. Method and apparatus for encoding datastream including additional information on multiview image and method and apparatus for decoding datastream by using the same
KR101506219B1 (ko) 2008-03-25 2015-03-27 삼성전자주식회사 3차원 영상 컨텐츠 제공 방법, 재생 방법, 그 장치 및 그기록매체
US8106924B2 (en) 2008-07-31 2012-01-31 Stmicroelectronics S.R.L. Method and system for video rendering, computer program product therefor
JP5235035B2 (ja) * 2008-09-23 2013-07-10 ドルビー ラボラトリーズ ライセンシング コーポレイション チェッカーボード多重化したイメージデータのエンコーディング構造及びデコーディング構造
EP2197217A1 (en) 2008-12-15 2010-06-16 Koninklijke Philips Electronics N.V. Image based 3D video format
CN105376549B (zh) * 2009-01-29 2017-08-11 杜比实验室特许公司 视频编码方法及解码视频信号的方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090002481A1 (en) * 2007-06-26 2009-01-01 Samsung Electronics Co., Ltd. Method and apparatus for generating stereoscopic image bitstream using block interleaved method
WO2009040701A2 (en) * 2007-09-24 2009-04-02 Koninklijke Philips Electronics N.V. Method and system for encoding a video data signal, encoded video data signal, method and system for decoding a video data signal
WO2010011557A2 (en) * 2008-07-20 2010-01-28 Dolby Laboratories Licensing Corporation Encoder optimization of stereoscopic video delivery systems

Also Published As

Publication number Publication date
US20120300843A1 (en) 2012-11-29
US9215445B2 (en) 2015-12-15
KR20120123492A (ko) 2012-11-08
EP2529557A1 (en) 2012-12-05
BR112012018976A2 (pt) 2018-03-27
JP2013518515A (ja) 2013-05-20
KR101828096B1 (ko) 2018-02-09
CN102742282B (zh) 2017-09-08
JP5722349B2 (ja) 2015-05-20
WO2011094019A1 (en) 2011-08-04

Similar Documents

Publication Publication Date Title
RU2752572C1 (ru) Мозаичное расположение при кодировании и декодировании видео
CN102742282A (zh) 基于块的交错
CN102918836B (zh) 用于非对称立体视频的帧封装
RU2689191C2 (ru) Упаковка кадров для кодирования видео
CN103155571B (zh) 译码立体视频数据
CN103493483B (zh) 译码多视图视频加深度内容
TW201639365A (zh) 用於線性模型預測模式之降低取樣處理
JP7275270B2 (ja) エンコーダ、デコーダ、及びデブロッキングフィルタの境界強度導出の対応する方法
CN104838651A (zh) 可缩放及多视角视频译码中的高级残差预测
CN105359527A (zh) 用于视频译码的跨层并行处理与偏移延迟参数
CN103444175A (zh) 全分辨率帧兼容的立体视频译码中的后滤波
CN102017628A (zh) 深度信号的编码
CN104904218A (zh) 视差矢量推导
CN105027571A (zh) 三维视频译码中导出的视差向量
CN102656885A (zh) 合并编码比特流
CN104137551A (zh) 用于三维视频译码的网络抽象层单元标头设计
RU2813744C1 (ru) Мозаичное расположение при кодировании и декодировании видео
Zuo-Cheng et al. Key technologies and new developments of next generation video coding standard HEVC
WO2013105946A1 (en) Motion compensating transformation for video coding
Lee et al. Interlaced MVD format for free viewpoint video
Miličević et al. EXTENSIONS OF HIGH EFFICIENCY VIDEO CODING STANDARD: AN OVERVIEW

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP02 Change in the address of a patent holder

Address after: I Si Eli Murli Nor, France

Patentee after: THOMSON LICENSING

Address before: The French Yixilaimu Leo City

Patentee before: THOMSON LICENSING

CP02 Change in the address of a patent holder
TR01 Transfer of patent right

Effective date of registration: 20190202

Address after: Paris France

Patentee after: International Digital Madison Patent Holding Co.

Address before: I Si Eli Murli Nor, France

Patentee before: THOMSON LICENSING

Effective date of registration: 20190202

Address after: I Si Eli Murli Nor, France

Patentee after: THOMSON LICENSING

Address before: I Si Eli Murli Nor, France

Patentee before: THOMSON LICENSING

TR01 Transfer of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170908

Termination date: 20200128

CF01 Termination of patent right due to non-payment of annual fee