CN102771113A - 用于3d的分割屏幕 - Google Patents

用于3d的分割屏幕 Download PDF

Info

Publication number
CN102771113A
CN102771113A CN2010800647863A CN201080064786A CN102771113A CN 102771113 A CN102771113 A CN 102771113A CN 2010800647863 A CN2010800647863 A CN 2010800647863A CN 201080064786 A CN201080064786 A CN 201080064786A CN 102771113 A CN102771113 A CN 102771113A
Authority
CN
China
Prior art keywords
video
frame
decoding
dimensional
flowing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2010800647863A
Other languages
English (en)
Inventor
杰瑟斯·巴肯斯-帕劳
琼·利亚奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of CN102771113A publication Critical patent/CN102771113A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/128—Adjusting depth or disparity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/139—Format conversion, e.g. of frame-rate or size
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/004—Diagnosis, testing or measuring for television systems or their details for digital television systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Processing Or Creating Images (AREA)

Abstract

提供了一种用于在三维视频流被再编码为第二视频格式时对三维视频流进行视觉检查的方法、设备和系统。解码的三维视频流的帧的一部分和已再编码的三维视频流的帧的相对应的部分被布置于组合的视频帧中，使得视频帧部分在组合的视频帧中出现在一起。操纵在组合的视频帧中的视频帧部分之间的边界，使得在视频帧部分之间的边界上的差异变化和在组合视频帧部分之间的任何重叠是看不到的。

Description

用于3D的分割屏幕
相关申请的交叉引用
本申请要求在2010年2月24日提交的序列号为61/307,734的美国临时专利申请的权益，该专利申请通过引用整体结合到本文中。
技术领域
本发明大体而言涉及3D内容的视觉评估，且更具体而言涉及实施用于评估3D内容的分割屏幕的方法、设备和系统。
背景技术
为了比较相当内容的两个或两个以上的序列，播放器可在单个屏幕上或者在其它情况下在多个屏幕上同时显示内容的至少一部分。这样的技术通常被称作分割屏幕。最常见的分割屏幕技术包括竖直分割屏幕和竖直蝶形分割屏幕模式。例如，图1a描绘了2D序列的原始帧的显示的代表图，且图1b描绘了图1a的2D序列的原始帧的编码版本的显示的代表图。为了比较这些序列，可使用分割屏幕技术。例如，图2a描绘了根据现有技术的分割屏幕技术以竖直分割屏幕定向显示的图1a的2D序列的原始帧和图1b的2D序列的原始帧的编码版本的代表图。如图2a所示，竖直分割屏幕技术通过使能原始序列与编码序列的并排比较提供了用于评估例如编码处理的准确性的视觉手段。
蝶形竖直分割屏幕也可用于进行这种比较。例如，图2b描绘了根据现有技术的分割屏幕技术以竖直蝶形分割屏幕定向显示的图1a的2D序列的原始帧和图1b的2D序列的原始帧的编码版本的代表图。如图2b所示，竖直蝶形分割屏幕技术通过使能原始序列与编码序列的并排比较提供了用于评估例如编码处理的准确性的视觉手段。
尽管这样的分割屏幕技术良好地适用于二维内容，但是竖直分割屏幕模式在三维内容显示中可表现出各种不足。更具体而言，当分割屏幕技术应用于三维内容时，在图像/屏幕之间的边界可显示突然的差异变化。此外，一个区域/图像的重建的三维图像可与其它区域/图像重叠。甚至另外，在蝶形模式用于分割屏幕技术的情况下，三维图像使差异(深度)颠倒。
发明内容
本发明的实施例通过提供用于校正与以分割屏幕模式显示3D内容相关联的显示问题的方法、设备和系统来解决现有技术的不足。
在本发明的一实施例中，一种用于在三维视频流被再编码为第二视频格式时对三维视频流进行视觉检查的方法，包括：将解码的三维视频流分割为至少两个解码的视频流，将至少两个分割的三维视频流之一再编码为第二视频格式；将未再编码的解码的三维视频流的帧的至少一部分和再编码的三维视频流的帧的相对应的部分布置于组合的视频帧内，使得解码的三维视频帧部分和相对应的再编码的三维视频帧部分在组合的视频帧中出现在一起；以及遮挡在解码的三维视频帧部分与相对应的再编码的三维视频帧部分之间的边界的视图，使得在解码的三维视频帧部分与相对应的再编码的三维视频帧部分之间的边界上的差异变化和它们之间的任何重叠是看不到的。
在本发明的一可替代实施例中，一种在解码的三维视频流被再编码为第二视频格式时对解码的三维视频流进行视觉检查的设备，其中，三维视频流包括左眼视频流和右眼视频流，该设备包括用于将解码的三维视频流的左眼视频流或右眼视频流的帧的至少一部分和已再编码为第二格式的解码的三维视频流的分流拷贝的左眼视频流或右眼视频流的帧的相对应的部分布置于组合视频帧中以使得解码的三维视频帧部分和相对应的再编码的三维视频帧部分在组合的视频帧中出现在一起的装置。该设备还包括用于操纵在解码的三维视频帧部分与相对应的再编码的三维视频帧部分之间的边界的视图以使得在解码的三维视频帧部分与相对应的再编码的三维视频帧部分之间的边界上的差异变化和在解码的三维视频帧部分与相对应的再编码的三维视频帧部分之间的重叠看不到的装置。
在本发明的一可替代实施例中，一种用于在三维视频流被再编码为第二视频格式时对三维视频流进行视觉检查的系统，包括：视频解码器，其用于对具有左眼视频流和右眼视频流的三维视频流进行解码；分流器，其用于将解码的三维视频流分割为至少两个解码的三维视频流；编码器，其用于接收至少两个解码的视频流之一且将所接收到的至少两个解码的视频流之一再编码为第二视频格式；至少一个视频混合器，其将未再编码的解码的三维视频流的左眼视频流或右眼视频流的帧的至少一部分和再编码的三维视频流的左眼视频流或右眼视频流的帧的相对应的部分布置于组合的视频帧内，使得解码的三维视频帧部分和相对应的再编码的三维视频帧部分在组合的视频帧中出现在一起；以及渲染器，其用于操纵在解码的三维视频帧部分与相对应的再编码的三维视频帧部分之间的边界的视图，使得在解码的三维视频帧部分与相对应的再编码的三维视频帧部分之间的边界上的差异变化和在解码的三维视频帧部分与相对应的再编码的三维视频帧部分之间的重叠是看不到的。在本发明的一个实施例中，该系统还可包括显示装置，其用于显示组合的视频帧中的视频帧的混合和渲染的部分。
附图说明
结合附图来考虑下文的详细描述，可使本发明的教导内容易于理解，其中：
图1a描绘了2D序列的原始帧的显示的代表图；
图1b描绘了图1a的2D序列的原始帧的编码版本的显示的代表图；
图2a描绘了根据现有技术的分割屏幕技术以竖直分割屏幕定向显示的图1a的2D序列的原始帧和图1b的2D序列的原始帧的编码版本的代表图；
图2b描绘了根据现有技术的分割屏幕技术以竖直蝶形分割屏幕定向显示的图1a的2D序列的原始帧和图1b的2D序列的原始帧的编码版本的代表图；
图3a描绘了3D序列的左右原始帧的显示的代表图；
图3b描绘了图3a的3D序列的左右原始帧的编码版本的显示的代表图；
图4a描绘了根据现有技术的分割屏幕技术以竖直分割屏幕定向显示的图3a的3D序列的左右原始帧和图3b的3D序列的左右原始帧的编码版本的代表图；
图4b描绘了根据现有技术的分割屏幕技术以竖直蝶形分割屏幕定向显示的图3a的3D序列的左右原始帧和图3b的3D序列的左右原始帧的编码版本的代表图；
图5a描绘了根据本发明的实施例以竖直分割屏幕定向显示的图3a的3D序列的左右原始帧和图3b的3D序列的左右原始帧的编码版本的代表图；
图5b描绘了根据本发明的实施例以竖直蝶形分割屏幕定向显示的图3a的3D序列的左右原始帧和图3b的3D序列的左右原始帧的编码版本的代表图；
图6描绘了根据本发明的实施例以分割屏幕模式正确显示3D内容的系统的高层方框图；
图7描绘了根据本发明的实施例的其中可采用本发明的实施例的3D编码/解码系统700的高层方框图；以及
图8描绘了根据本发明的实施例的在三维视频流被再编码为第二视频格式时对三维视频流进行视觉检查的方法的高层流程图。
应了解的是，附图的目的在于图示本发明的概念，并非用于图示本发明的唯一可能的配置。为了便于理解，在可能的情况下使用相同的附图标记来表示附图中通用的相同元件。
具体实施方式
本发明有利地提供用于校正与以分割屏幕模式显示3D内容相关联的显示问题的方法、设备和系统。尽管将主要在通过在两个图像的边界之间实施竖直非透明或黑色的条或空间来校正差异错误的情况下描述本发明，但本发明的具体实施例不应被视为限制本发明的范围。本领域技术人员将了解且通过本发明的教导内容可理解的是，可使用在两个或两个以上图像之间的边界中具有大体上任何形状、颜色、定向或大小的阻挡或间隔装置来实现本发明的概念。
附图所示的各种元件的功能可通过使用专用硬件以及能与适当软件相关联地执行软件的硬件来提供。当由处理器提供时，这些功能可通过单个专用处理器、单个共享处理器或多个独立处理器(其中的一些可共享)来提供。此外，术语“处理器”或“控制器”的明确使用不应理解为排他性地表示能够执行软件的硬件，而是可以暗示性地包括而不限于数字信号处理器(“DSP”)硬件、用于存储软件的只读存储器(“ROM”)、随机存取存储器(“RAM”)以及非易失性存储装置。此外，本文详述本发明的原理、方面和实施例以及其具体示例的所有陈述旨在包括其结构和功能的等效物。此外，这样的等效物旨在包括当前已知的等效物以及将来开发的等效物(即，不考虑结构，开发的执行相同功能的任意元件)。
因此，例如本领域技术人员将了解的是，本文示出的方框图表现了体现本发明原理的说明性系统组件和/或电路的概念图。类似地，将了解的是，任意的流程图、流图、状态转移图、伪代码等表现了各个处理，这些处理大体上可以在计算机可读介质中表现，所以由计算机或处理器来执行，无论是否明确地示出此计算机或处理器。
如先前所提及，尽管分割屏幕技术良好地适用于二维内容，但是竖直分割屏幕模式在三维内容显示中可表现出各种不足。更具体而言，当分割屏幕技术应用于三维内容时，在图像/屏幕之间的边界可显示突然的差异变化。此外，一个区域/图像的重建的三维图像可与其它区域/图像重叠。例如，图3a描绘了3D序列的左右原始帧的显示的代表图，且图3b描绘了图3a的3D序列的左右原始帧的编码版本的显示的代表图。
为了比较这些序列，内容可以竖直分割屏幕定向来布置。例如，图4a描绘了根据现有技术的分割屏幕技术以竖直分割屏幕定向显示的图3a的3D序列的左右原始帧和图3b的3D序列的左右原始帧的编码版本的代表图。即，在图4a中，3D序列的左原始帧的图像与3D序列的左编码帧的图像一起以竖直分割屏幕定向显示且3D序列的右原始帧的图像与3D序列的右编码帧的图像一起以竖直分割屏幕定向显示。如图4a所描绘，3D序列的左原始帧的重建的三维图像与3D序列的左编码帧的图像重叠。对于3D序列的右原始帧的图像和3D序列的右编码帧的图像，情况同样如此。从图4a还可看出，在相应图像的图像/屏幕之间的边界显示了突然的差异变化。
在图4b图示了与采用竖直蝶形分割屏幕技术相关联的问题。例如，图4b描绘了根据现有技术的分割屏幕技术以竖直蝶形分割屏幕定向显示的图3a的3D序列的左右原始帧和图3b的3D序列的左右原始帧的编码版本的代表图。即，在图4b中，3D序列的左原始帧的图像与3D序列的左编码帧的图像一起以竖直蝶形分割屏幕定向显示且3D序列的右原始帧的图像与3D序列的右编码帧的图像一起以竖直蝶形分割屏幕定向显示。如图4b所描绘，3D序列的左原始帧的重建的三维图像的深度相对于3D序列的左编码帧的图像变颠倒。对于3D序列的右原始帧的图像的深度相对于3D序列的右编码帧的图像，情况同样如此。更具体而言，在蝶形模式被用于分割屏幕技术的情况下，三维图像使差异(深度)颠倒。
在本发明的一个实施例中，为了解决上述现有技术的竖直分割屏幕技术的不足，且更具体而言，为了避免竖直分割屏幕技术的在边界上的最终突然的差异变化且也为了避免一个区域与另一区域之间的重叠，本发明者提出在显示的图像之间的边界上渲染竖直条。例如，图5a描绘了根据本发明的实施例以竖直分割屏幕定向显示的图3a的3D序列的左右原始帧和图3b的3D序列的左右原始帧的编码版本的代表图。即，在图5a中，3D序列的左原始帧的图像与3D序列的左编码帧的图像一起以竖直分割屏幕定向显示，且3D序列的右原始帧的图像与3D序列的右编码帧的图像一起以竖直分割屏幕定向显示。如图5a所描绘，竖直黑条被置于原始图像与编码图像之间的边界上以遮挡3D序列的左/右原始帧的图像与3D序列的左/右编码帧的图像之间的任何重叠的视图。
根据本发明的概念，图5a的实施例的竖直黑条也用于遮挡3D序列的左/右原始帧的图像与3D序列的左/右编码帧的图像之间的边界中任何突然的差异变化的视图。
在本发明的一个实施例中，可使用在两个3D内容源的左右视图之间的差异值来确定本发明的竖直条的厚度。在本发明的一可替代实施例中，可由用户从用户可用的多个厚度中选择本发明的竖直条的厚度。例如，在本发明的此实施例中，用户可从50、100或150个像素的厚度中选择本发明的竖直条厚度。
在本发明的一可替代实施例中，为了解决上述现有技术的竖直分割屏幕技术的不足，且更具体而言，为了避免竖直分割屏幕技术的在边界上的最终突然的差异变化且也为了避免一个区域与另一区域之间的重叠，本发明者提出在两个图像之间的边界中渲染偏移。更具体而言，在本发明的一可替代实施例中，作为如在图5a的实施例中在图像之间的边界上渲染竖直条的替代，可在两个图像之间的边界中使用偏移。类似于图5a的实施例，在本文所述的本发明的此实施例中，可使用在两个3D内容源的左右视图之间的差异值来确定本发明的图像之间偏移的大小。在本发明的一可替代实施例中，可由用户从用户可用的多个偏移大小中选择本发明的偏移大小。例如，在本发明的此实施例中，用户可从50、100或150个像素的偏移大小中选择本发明的偏移大小。
在本发明的一个实施例中，为了解决上述现有技术的竖直蝶形分割屏幕技术的不足，且更具体而言，为了校正在三维图像之间颠倒的差异(深度)，本发明者提出交换该将具有蝶形效果的源的左右视图。例如，图5b描绘了根据本发明的实施例以竖直蝶形分割屏幕定向显示的图3a的3D序列的左右原始帧和图3b的3D序列的左右原始帧的编码版本的代表图。即，如在图5b中描绘，3D序列的左原始帧的图像与3D序列的右编码帧的图像一起以竖直分割屏幕定向显示，且3D序列的右原始帧的图像与3D序列的左编码帧的图像一起以竖直分割屏幕定向显示。本发明者已确定这样的定向可校正以竖直蝶形分割屏幕定向的三维图像的显示中的颠倒的差异(深度)。
图6描绘了根据本发明的实施例以分割屏幕模式正确显示3D内容的设备/系统的高层方框图。图6的设备/系统600说明性地包括3D内容的第一源和第二源。更具体而言，图6说明性地包括内容的左视图的源-605、内容的右视图的源-610、内容的左视图的源二615和内容的右视图的源二620。在本发明的一个实施例中，内容的左右视图的源一包括用于产生3D视频流的内容的原始左右视图流。在本发明的此实施例中，内容的左右视图的源二包括用于产生3D视频流的内容的原始左右视图流的再编码分割流。在本发明的一可替代实施例中，内容的左右视图的源二替代地包括用于产生3D视频流的内容的原始左右视图流，且内容的左右视图的源一包括用于产生3D视频流的内容的原始左右视图流的再编码分割流。
图6的设备/系统600还包括用于左视图的混合器625、用于右视图的混合器630和用于渲染图像的渲染器640。图6的设备/系统600还可选地包括交换装置650。
在图6的设备/系统600中描绘的本发明的实施例中，来自两个左源605、615(例如，原始内容流和再编码内容流)的左内容在左视图混合器625中混合。此外，来自两个右源610和620(例如，原始内容流和再编码内容流)的右内容在右视图混合器630中混合。根据本发明的实施例，来自混合器625、630的混合内容随后被传递到渲染器640以产生图像且在一个实施例中产生竖直分割屏幕图像。更具体而言，根据本发明的一个实施例，渲染器640实现以竖直分割屏幕定向的图像显示以进行上述比较，且在一个实施例中将本发明的概念应用于图像。
更具体而言，根据本发明的一个实施例，渲染器640为以竖直分割屏幕模式显示准备图像，且以竖直分割屏幕模式在图像之间的边界中施加本发明的竖直条。在本发明的一可替代实施例中，渲染器640为以竖直分割屏幕模式显示准备图像，且以竖直分割屏幕模式在图像之间的边界中施加偏移(如本文所述的本发明的各种实施例中所述)。
在以竖直蝶形分割屏幕模式显示图像的情形下，实施图6的设备/系统600的可选交换装置650。更具体而言，使用本发明的交换装置650交换至少一个内容源的左右视图以校正如上文所述的以竖直蝶形分割屏幕定向的三维图像的显示中的颠倒的差异(深度)。
尽管在图6的设备/系统600中，交换装置650说明性地为设备/系统600的单独组件，但在本发明的可替代实施例中，交换装置650可为混合器625、630或渲染器640的集成组件。此外，尽管在图6的实施例中，渲染器640、混合器625、630和交换装置650被描绘为包括单独组件，但在本发明的一可替代实施例中，组件可包括硬件或软件形式的单个设备。
图7描绘了可采用本发明实施例的3D编码/解码系统700的高层方框图。图7的系统700说明性地包括3D视频流的源702，所述视频流具有左眼视频流704和右眼视频流706。系统700还包括视频解码器708、分流器710、编码器712和图6的设备/系统600。
在图7的系统700中，左眼视频流704和右眼视频流706由解码器708解码为解码的左眼视频流605和右眼视频流610且被传递到分流器710以分割成两个解码的3D视频流。左眼视频流605和右眼视频流610由分流器710分割，且第一分割3D视频流在一个实施例中作为内容的左视图的源-605和内容的右视图的源-610被传递到图6的设备/系统600。在图7的系统700中，第二分割3D视频流被传递到编码器712以被编码。由编码器再编码的第二分割3D视频流的左眼视频流605和右眼视频流610在一个实施例中作为内容的左视图的源二615和内容的右视图的源二620被传递到设备/系统600。然后，解码的3D视频流和再编码的视频流的左右眼视频流参考图6的设备/系统600且根据本发明所述的实施例如上文所述进行处理。图7的系统700可选地还包括用于显示在组合的视频帧中的视频帧部分的显示装置715。
图8描绘了根据本发明的实施例在三维视频流被再编码为第二视频格式时对三维视频流进行视觉检查的方法的高层流程图。图8的方法800说明性地始于步骤802，其中具有左眼视频流和右眼视频流的解码的三维视频流被分割成至少两个解码的视频流，每个视频流包括左眼视频流和右眼视频流。方法800然后进行到步骤804。
在步骤804，至少两个分割的三维视频流之一被再编码为第二视频格式。方法800然后进行到步骤806。
在步骤806，将未再编码的解码的三维视频流的左眼视频流或右眼视频流的帧的至少一部分和再编码的三维视频流的左眼视频流或右眼视频流的帧的相对应的部分布置于组合的视频帧内，使得解码的三维视频帧部分和相对应的再编码的三维视频帧部分在组合的视频帧中出现在一起。方法然后进行到步骤808。
在步骤808，操纵在解码的三维视频帧部分与相对应的再编码的三维视频帧部分之间的边界的视图，使得在解码的三维视频帧部分与相对应的再编码的三维视频帧部分之间的边界上的差异变化和帧部分之间的重叠是看不到的。在本发明的一个实施例中，所述操纵包括将竖直黑条插在解码的三维视频帧部分与相对应的再编码的三维视频帧部分之间的边界中。在本发明的一可替代实施例中，所述操纵包括在解码的三维视频帧部分与相对应的再编码的三维视频帧部分之间的边界中施加偏移。方法800然后可退出。
通过描述用于以分割屏幕模式正确显示3D内容的方法、设备和系统的各种实施例(旨在图示而非限制)，应当注意的是，鉴于上述教导内容，本领域技术人员能做出修改和变型。因此，应了解的是，可在本发明的范围和精神内对所公开的本发明的具体实施例做出更改。虽然前文已描述了针对于本发明的各种实施例，但是在不脱离本发明的基本范围的情况下还可设计出本发明的其它和另外的实施例。

Claims (16)

1.一种用于在三维视频流被再编码为第二视频格式时对三维视频流进行视觉检查的方法，包括：
将具有左眼视频流和右眼视频流的解码的三维视频流分割为至少两个解码的视频流，每个视频流包括左眼视频流和右眼视频流；
将所述至少两个分割的三维视频流之一再编码为所述第二视频格式；
将未再编码的解码的三维视频流的左眼视频流或右眼视频流的帧的至少一部分和再编码的三维视频流的左眼视频流或右眼视频流的帧的相对应的部分布置于组合的视频帧内，使得所述解码的三维视频帧部分和所述相对应的再编码的三维视频帧部分在所述组合的视频帧中出现在一起；以及
操纵在所述解码的三维视频帧部分与所述相对应的再编码的三维视频帧部分之间的边界的视图，使得在所述解码的三维视频帧部分与所述相对应的再编码的三维视频帧部分之间的所述边界上的差异变化和在所述解码的三维视频帧部分与所述相对应的再编码的三维视频帧部分之间的重叠是看不到的。
2.如权利要求1所述的方法，其中所述操纵包括将竖直黑条插在所述解码的三维视频帧部分与所述相对应的再编码的三维视频帧部分之间的所述边界中。
3.如权利要求2所述的方法，其中使用在所述三维视频流的所述左眼视频流和右眼视频流之间的相对应的帧的差异值来确定所述竖直黑条的宽度。
4.如权利要求1所述的方法，其中所述解码的三维视频帧部分和相对应的再编码的三维视频帧部分被布置于所述组合的视频帧中以并排出现。
5.如权利要求4所述的方法，其中，所述解码的三维视频帧部分包括来自所述解码的三维视频流的所述左眼视频流的视频帧的至少一部分，且所述相对应的再编码的三维视频帧部分包括来自所述相对应的再编码的三维视频流的所述左眼视频流的视频帧的至少一部分；或者所述解码的三维视频帧部分包括来自所述解码的三维视频流的所述右眼视频流的视频帧的至少一部分，且所述相对应的再编码的三维视频帧部分包括来自所述相对应的再编码的三维视频流的所述右眼视频流的视频帧的至少一部分，并且所述视频帧部分被布置于所述组合的视频帧中以并排出现。
6.如权利要求1所述的方法，其中所述解码的三维视频帧部分和相对应的再编码的三维视频帧部分被布置于所述组合的视频帧中，使得所述视频帧部分相对于彼此沿y轴颠倒出现。
7.如权利要求6所述的方法，其中，所述解码的三维视频帧部分包括来自所述解码的三维视频流的所述左眼视频流的视频帧的至少一部分，且所述相对应的再编码的三维视频帧部分包括来自所述相对应的再编码的三维视频流的所述右眼视频流的视频帧的至少一部分，并且所述视频帧部分被布置于所述组合的视频帧中，使得所述视频帧部分相对于彼此沿y轴颠倒出现。
8.如权利要求6所述的方法，其中，所述解码的三维视频帧部分包括来自所述解码的三维视频流的所述右眼视频流的视频帧的至少一部分，且所述相对应的再编码三维视频帧部分包括来自所述相对应的再编码的三维视频流的所述左眼视频流的视频帧的至少一部分，并且所述视频帧部分布置于所述组合的视频帧中，使得所述视频帧部分表现为相对于彼此沿y轴颠倒。
9.如权利要求1所述的方法，其中所述操纵包括在所述解码的三维视频帧部分与所述相对应的再编码的三维视频帧部分之间的所述边界中施加偏移。
10.如权利要求9所述的方法，其中使用在所述三维视频流的所述左眼视频流和右眼视频流的相对应的帧之间的差异值来确定所述偏移的大小。
11.一种在解码的三维视频流被再编码为第二视频格式时对解码的三维视频流进行视觉检查的设备，其中所述三维视频流包括左眼视频流和右眼视频流，所述设备包括：
用于将所述解码的三维视频流的左眼视频流或右眼视频流的帧的至少一部分和已再编码为所述第二格式的所述解码的三维视频流的分流拷贝的左眼视频流或右眼视频流的帧相对应的部分布置于组合的视频帧中以使得所述解码的三维视频帧部分和所述相对应的再编码的三维视频帧部分在所述组合的视频帧中出现在一起的装置；以及
用于操纵在所述解码的三维视频帧部分与所述相对应的再编码的三维视频帧部分之间的边界的视图以使得在所述解码的三维视频帧部分与所述相对应的再编码的三维视频帧部分之间的所述边界上的差异变化和在所述解码的三维视频帧部分与所述相对应的再编码的三维视频帧部分之间的重叠看不到的装置。
12.如权利要求11所述的设备，还包括：
用于在组合的帧中交换所述解码的三维视频流或所述再编码的三维视频流的左眼视频流或右眼视频流的帧的部分的装置。
13.如权利要求12所述的设备，其中执行所述交换以校正以竖直蝶形分割屏幕定向的三维图像的显示中的颠倒的差异。
14.一种用于在三维视频流被再编码为第二视频格式时对三维视频流进行视觉检查的系统，包括：
视频解码器，用于对具有左眼视频流和右眼视频流的三维视频流进行解码；
分流器，用于将所述解码的三维视频流分割为至少两个解码的三维视频流；
编码器，用于接收所述至少两个解码的视频流之一且将所接收到的所述至少两个解码的视频流之一再编码为所述第二视频格式；
至少一个视频混合器，将未再编码的解码的三维视频流的左眼视频流或右眼视频流的帧的至少一部分和再编码的三维视频流的左眼视频流或右眼视频流的帧的相对应的部分布置于组合的视频帧内，使得所述解码的三维视频帧部分和所述相对应的再编码的三维视频帧部分在所述组合的视频帧中出现在一起；以及
渲染器，用于操纵在所述解码的三维视频帧部分与所述相对应的再编码的三维视频帧部分之间的边界的视图，使得在所述解码的三维视频帧部分与所述相对应的再编码的三维视频帧部分之间的所述边界上的差异变化和在所述解码的三维视频帧部分与所述相对应的再编码的三维视频帧部分之间的重叠是看不到的。
15.如权利要求14所述的系统，还包括：
交换机，用于在组合的帧中交换所述解码的三维视频流或所述再编码的三维视频流的左眼视频流或右眼视频流的帧的部分。
16.如权利要求14所述的系统，还包括：
显示装置，用于显示在所述组合的视频帧中所述视频帧的混合和渲染的部分。
CN2010800647863A 2010-02-24 2010-10-08 用于3d的分割屏幕 Pending CN102771113A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US30773410P 2010-02-24 2010-02-24
US61/307,734 2010-02-24
PCT/US2010/002716 WO2011105988A1 (en) 2010-02-24 2010-10-08 Split screen for 3d

Publications (1)

Publication Number Publication Date
CN102771113A true CN102771113A (zh) 2012-11-07

Family

ID=43242998

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010800647863A Pending CN102771113A (zh) 2010-02-24 2010-10-08 用于3d的分割屏幕

Country Status (7)

Country Link
US (1) US20120314023A1 (zh)
EP (1) EP2540075A1 (zh)
JP (1) JP5721276B2 (zh)
KR (1) KR20120129996A (zh)
CN (1) CN102771113A (zh)
BR (1) BR112012021091A2 (zh)
WO (1) WO2011105988A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013086137A1 (en) 2011-12-06 2013-06-13 1-800 Contacts, Inc. Systems and methods for obtaining a pupillary distance measurement using a mobile computing device
US20130314401A1 (en) 2012-05-23 2013-11-28 1-800 Contacts, Inc. Systems and methods for generating a 3-d model of a user for a virtual try-on product
US9483853B2 (en) 2012-05-23 2016-11-01 Glasses.Com Inc. Systems and methods to display rendered images
US9286715B2 (en) 2012-05-23 2016-03-15 Glasses.Com Inc. Systems and methods for adjusting a virtual try-on
KR102032875B1 (ko) * 2018-03-30 2019-10-16 서울과학기술대학교 산학협력단 다중 영상 스트림의 채널 디코딩 방법 및 장치

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19521408C1 (de) * 1995-06-13 1996-12-12 Inst Rundfunktechnik Gmbh Verfahren zum objektiven Bewerten der Bildqualität zwei- oder dreidimensionaler Bilder
US5982951A (en) * 1996-05-28 1999-11-09 Canon Kabushiki Kaisha Apparatus and method for combining a plurality of images
JP2004266757A (ja) * 2003-03-04 2004-09-24 Sony Corp 画像処理装置および方法
CN101107859A (zh) * 2005-01-24 2008-01-16 汤姆森许可贸易公司 对编码转换视频进行视觉检查的方法、设备和系统
US7408546B2 (en) * 2002-11-29 2008-08-05 Volume Interactions Pte Ltd. System and method for displaying and comparing 3D models (“3D matching”)

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07115534A (ja) * 1993-10-15 1995-05-02 Minolta Co Ltd 画像読取装置
US6326995B1 (en) * 1994-11-03 2001-12-04 Synthonics Incorporated Methods and apparatus for zooming during capture and reproduction of 3-dimensional images
US6704042B2 (en) * 1998-12-10 2004-03-09 Canon Kabushiki Kaisha Video processing apparatus, control method therefor, and storage medium
JP2000278710A (ja) * 1999-03-26 2000-10-06 Ricoh Co Ltd 両眼立体視画像評価装置
JP4143228B2 (ja) * 1999-08-27 2008-09-03 キヤノン株式会社 画像処理装置、画像処理方法および記憶媒体
US7002618B2 (en) * 2001-06-01 2006-02-21 Stereographics Corporation Plano-stereoscopic DVD movie
US8483960B2 (en) * 2002-09-20 2013-07-09 Visual Intelligence, LP Self-calibrated, remote imaging and data processing system
JP4259884B2 (ja) * 2003-01-20 2009-04-30 シャープ株式会社 画像データ作成装置およびそのデータを再生する画像データ再生装置
US6987520B2 (en) * 2003-02-24 2006-01-17 Microsoft Corporation Image region filling by exemplar-based inpainting
KR100716982B1 (ko) * 2004-07-15 2007-05-10 삼성전자주식회사 다차원 영상 포맷의 변환장치 및 방법
KR100739730B1 (ko) * 2005-09-03 2007-07-13 삼성전자주식회사 3ｄ 입체 영상 처리 장치 및 방법
KR100667830B1 (ko) * 2005-11-05 2007-01-11 삼성전자주식회사 다시점 동영상을 부호화하는 방법 및 장치
KR101345303B1 (ko) * 2007-03-29 2013-12-27 삼성전자주식회사 스테레오 또는 다시점 영상의 입체감 조정 방법 및 장치
US8200039B2 (en) * 2007-04-05 2012-06-12 Adobe Systems Incorporated Laying out multiple images
US8487982B2 (en) * 2007-06-07 2013-07-16 Reald Inc. Stereoplexing for film and video applications
KR101419979B1 (ko) * 2008-01-29 2014-07-16 톰슨 라이센싱 2ｄ 이미지 데이터를 스테레오스코픽 이미지 데이터로 변환하기 위한 방법 및 시스템
JP5295236B2 (ja) * 2008-06-18 2013-09-18 三菱電機株式会社 三次元映像変換記録装置、三次元映像変換記録方法、記録媒体、三次元映像変換装置、及び三次元映像伝送装置
US8872976B2 (en) * 2009-07-15 2014-10-28 Home Box Office, Inc. Identification of 3D format and graphics rendering on 3D displays
US8764196B2 (en) * 2009-09-18 2014-07-01 Thomson Licensing Method and system for optical alignments for three-dimensional (3D) projection
KR101828096B1 (ko) * 2010-01-29 2018-02-09 톰슨 라이센싱 블록 기반 인터리빙
US9077966B2 (en) * 2010-02-15 2015-07-07 Thomson Licensing Apparatus and method for processing video content
US8867826B2 (en) * 2012-11-26 2014-10-21 Mitusbishi Electric Research Laboratories, Inc. Disparity estimation for misaligned stereo image pairs

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19521408C1 (de) * 1995-06-13 1996-12-12 Inst Rundfunktechnik Gmbh Verfahren zum objektiven Bewerten der Bildqualität zwei- oder dreidimensionaler Bilder
US5982951A (en) * 1996-05-28 1999-11-09 Canon Kabushiki Kaisha Apparatus and method for combining a plurality of images
US7408546B2 (en) * 2002-11-29 2008-08-05 Volume Interactions Pte Ltd. System and method for displaying and comparing 3D models (“3D matching”)
JP2004266757A (ja) * 2003-03-04 2004-09-24 Sony Corp 画像処理装置および方法
CN101107859A (zh) * 2005-01-24 2008-01-16 汤姆森许可贸易公司 对编码转换视频进行视觉检查的方法、设备和系统

Also Published As

Publication number Publication date
JP5721276B2 (ja) 2015-05-20
WO2011105988A1 (en) 2011-09-01
US20120314023A1 (en) 2012-12-13
BR112012021091A2 (pt) 2018-04-03
EP2540075A1 (en) 2013-01-02
JP2013520923A (ja) 2013-06-06
KR20120129996A (ko) 2012-11-28

Similar Documents

Publication Publication Date Title
CN102771113A (zh) 用于3d的分割屏幕
KR20180058762A (ko) 삼차원 이미지에 대한 삼각형 메시의 생성
US20110292175A1 (en) Broadcast receiver and 3d subtitle data processing method thereof
JP2015082678A (ja) ３ｄプリンタ出力用データの著作権保護方法および保護システム
CN105976004A (zh) 一种彩色二维码多维信息编码、解码方法及装置
MY165186A (en) Image coding method, image decoding method, image coding apparatus, and image decoding apparatus
CN103339949B (zh) 发送/接收数字广播信号的方法和设备
US20150147046A1 (en) Method and apparatus for mixing a first video signal and a second video signal
CN102293002A (zh) 三维图像处理装置及其控制方法
JP2011071928A5 (zh)
JP2005109568A (ja) 映像表示装置及びプログラム
NZ602870A (en) Method for generating and rebuilding a stereoscopic-compatible video stream and related coding and decoding devices
WO2006019038A1 (ja) 立体画像生成装置及びその立体画像生成方法
US20130321576A1 (en) Methods and apparatus for encoding and decoding a multiview video stream
Redert et al. Philips 3D solutions: From content creation to visualization
JP2013520923A5 (zh)
CN102509336B (zh) 一种gpu加速的实时立体渲染方法
JP5873813B2 (ja) ステレオロゴ挿入
Fleureau et al. An immersive video experience with real-time view synthesis leveraging the upcoming MIV distribution standard
CN102026007A (zh) 用于处理视频的方法和系统
CN110505465A (zh) 数据传输方法、三维图像显示方法、装置及电子设备
TWI463863B (zh) 影像處理方法
WO2017202079A1 (zh) 一种立体图像制作方法和设备
WO2015121182A1 (en) Method for encrypting or decrypting a 3d object
KR20090025934A (ko) 3차원 영상을 판별하기 위한 장치 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20121107