CN102763419A - 3d视频转换装置 - Google Patents

3d视频转换装置 Download PDF

Info

Publication number
CN102763419A
CN102763419A CN2010800571629A CN201080057162A CN102763419A CN 102763419 A CN102763419 A CN 102763419A CN 2010800571629 A CN2010800571629 A CN 2010800571629A CN 201080057162 A CN201080057162 A CN 201080057162A CN 102763419 A CN102763419 A CN 102763419A
Authority
CN
China
Prior art keywords
stream
stb
view
reformatting
format
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2010800571629A
Other languages
English (en)
Other versions
CN102763419B (zh
Inventor
阿杰伊·K·卢特拉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google Technology Holdings LLC
Original Assignee
General Instrument Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by General Instrument Corp filed Critical General Instrument Corp
Publication of CN102763419A publication Critical patent/CN102763419A/zh
Application granted granted Critical
Publication of CN102763419B publication Critical patent/CN102763419B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/156Mixing image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189Recording image signals; Reproducing recorded image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/139Format conversion, e.g. of frame-rate or size
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194Transmission of image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

3D视频转换装置可操作为将第一MPEG流转换为第二MPEG流。3D视频转换装置包括输入模块,该输入模块可操作为接收多视图流;转换模块,该转换模块可操作为转换多视图流。转换模块包括解码模块,该解码模块可操作为解码多视图流;重新格式化模块,该重新格式化模块可操作为根据解码的信息生成3D视图;以及编码模块,该编码模块可操作为将3D视频重新编码为STB格式流;以及输出模块,该输出模块可操作为输出重新格式化的流。

Description

3D视频转换装置
背景技术
已知对三维电视(3D TV)和向消费者家庭传递多视图流的兴趣与日俱增。立体显示TV是一种特殊类型的3D TV,其中在屏幕上显示两个视图,一个用于左眼并且一个用于右眼。通常,消费者使用眼镜,使得左眼仅看到左眼视图,而右眼仅看到右眼视图。
已知通过使用很多不同的标准来完成这些多个视图的压缩和分布。具体地,MPEG(运动图片专家组)标准规定经常用于对与多视图相对应的流进行解码的过程和比特流语法。已知用于处理多个视图的传输和显示的其它专用方法。然而,已知许多机顶盒和电视当前使用的解码器不能解码或适当地显示这些流。这些解码器最多能够仅解码一个(左或者右眼)视图。因此,在显示器能够显示3D(立体或者多个)视图的情况下,已知解码器不能够解码用于显示的多视图,并且不能生成3D显示。
发明内容
根据实施例,三维(3D)视频转换装置可连接到机顶盒(STB)。3D视频转换装置包括输入模块,该输入模块可操作为接收来自STB的多视图流。3D视频转换装置还包括转换模块,该转换模块可操作为转换多视图流。转换模块包括解码模块,该解码模块可操作为解码多视图流以形成基本流;重新格式化模块,该重新格式化模块可操作为从基本流生成3D视图;编码模块,该编码模块可以被旁通,并且可操作为将3D视图重新编码为STB格式流;以及输出模块,该输出模块可操作为输出重新格式化的流。3D视图包括左眼视图和右眼视图。此外,3D视频转换装置包括输出模块,该输出模块可操作为输出具有3D视图的重新格式化的流。
根据另一实施例,将多视图流转换为重新格式化的流的方法使用3D视频转换装置。该方法包括接收来自STB的多视图流。解码多视图流以形成基本流。3D视频转换装置从基本流生成具有3D视图的重新格式化的流。此后,3D视频转换装置输出重新格式化的流。
在又一实施例中,在其上嵌入一个或者多个计算机程序的计算机可读存储介质实现使用3D视频转换装置将多视图流转换为重新格式化的流的上述方法。
本发明的实施例提供下述方式:解码多视图流;将多视图流重新格式化为支持3D的TV可操作为进行显示的3D格式;以及以STB中的解码器可操作为进行解码的格式来可选择地重新编码的所解码的信息。因为3D TV技术是具有编码多视图流的不同标准的演进的领域,所以STB中的许多解码器不能解码多视图流并且许多电视不可操作为示出3D视图。在没有更换电视或者STB的费用和困难的情况下,3D视频转换装置提供观看在多视图流中编码的节目的能力。
此外,当处理多个标准时,3D视频转换装置提供灵活性。因此,不论多视图流的广播器使用的标准如何,3D视频转换装置都可以被配置为允许现有的STB并入3D特征。
附图说明
从下面参考附图的描述中,对于本领域的技术人员来说本发明的特征将会变得明显,其中:
图1示出了根据本发明的实施例的网络架构;
图2示出了根据本发明的实施例的配置成将多视图流转换为重新格式化的流的3D视频转换装置的简化的框图;
图3示出了根据本发明的实施例的配置成将多视图流转换为STB格式流的3D转换装置的简化的框图;
图4示出了根据本发明的实施例的棋盘图案格式的示图;
图5示出了根据本发明的实施例的上下格式的示图;
图6示出了根据本发明的实施例的并排左右视图格式的示图;
图7示出了根据本发明的实施例的左右眼视图线交错格式的示图;
图8示出了根据本发明的实施例的将多视图流转换成重新格式化的流的方法的流程图;
图9示出了根据本发明的实施例的将多视图流转换成STB格式流的方法的流程图;以及
图10示出了根据本发明的实施例的可以在3D视频转换装置中使用的计算机系统的框图。
具体实施方式
为了简化和说明的目的,通过主要参考本发明的示例性实施例来描述本发明。在下面的描述中,阐述了很多特定细节以提供对本发明的全面理解。然而,对本领域的技术人员来说明显的是,可以在不限于这些具体细节的情况下实践本发明。在其它的实例中,还有详细地描述公知的方法和结构以避免不必要地混淆本发明。
如在此使用的术语“单节目传输流(SPTS)”指具有单个节目的传输流。传输流是承载音频和/或视频信息的比特的时间序列。为了使用STB来显示内容,可以解码音频和/或视频信息。
如在此所使用的术语“多节目传输流(MPTS)”指具有多于一个节目的传输流。
如在此所使用的术语“MPEG”指用于编码和解码由运动图片专家组定义的传输流的一组标准。MPEG包括用于诸如MPEG-2和MPEG-4部分10的传输流的若干格式。配置成对以诸如MPEG-2的以前格式编码的流进行解码的STB不能对以诸如也被称为高级视频编码(AVC)的MPEG-4部分10的后来格式所编码的流进行解码。
例如在常规的视频流中,如在此所使用的术语“视图”指单个图像或者一系列图像。
如在此所使用的术语“三维(3D)视图”指可以用于在电视上呈现3D视频的多个视图。例如,3D视图可以指立体视图,其包括两个视图,右眼视图和左眼视图。替代地,在视频被格式化并且电视能够显示多于两个的视图的情况下,3D视图可以包括多于两个的视图。
如在此所使用的术语“双流(dual stream)”指承载3D视觉信息的一对流,其被配置为通过双解码器来解码,以便于使电视显示3D视频。
如在此所使用的术语“双解码器”指可以用于解码一对流的装置。例如,双解码器可以被配置为解码承载3D左眼视图的流和承载右眼视图的流,并且从而在电视上显示3D视频。
如在此所使用的术语“可操作地连接”指下述装置,该装置被连接到另一装置,使得一个装置可操作为在另一装置上实现预定的效果。
图1示出了根据实施例的可以使用3D视频转换装置130的网络架构100。如图1中所示,网络架构100被示为有线电视(CATV)网络架构100,包括有线头端单元110和有线电视网络。大量的数据源101、102、103可以被通信地耦接到有线头端单元110,包括但不限于多个服务器101、因特网102、无线电信号或者经由内容提供商103接收到的电视信号。有线头端110还通过有线电视网络111被通信地耦接到一个或者多个订户150a-n。
应当理解,3D视频转换装置130和连接的机顶盒120可以在其它的网络中使用,并且为了简化和说明性目的示出有线电视网络架构。可以在向STB 120提供MPEG流139的任何网络中使用3D视频转换装置130,如图2中所示。例如,可以在向STB 120直接提供MPEG流139的网络中使用3D视频转换装置130。替代地,MPEG流可以包括因特网协议(IP)分组或者配置为传送MPEG流139的任何分组方案。可以从卫星传输、因特网或其它网络接收MPEG流139。
例如,有线电视网络111使用固定光纤或同轴线缆来向订户150a-n中的每一个提供MPEG流。在该实例中,MPEG流139可以是QAM调制的流。订户150a-n中的每一个可以在STB处接收MPEG流139。例如,订户150n可以在STB 120处接收MPEG流139。此后,STB 120可以选择频率,并且解调频率以获得多节目传输流(MPTS)。此外,有线电视网络111被配置为向STB 120提供MPTS中的复用在一起的多个节目。STB 120被配置为对MPTS进行解复用以提取与订户可以选择的多个节目中的每一个相对应的单节目传输流(SPTS)。订户150n可以使用STB 120来选择具有3D信息的节目。
具有3D信息的节目被承载在包括图2中所示的多视图流140中的传输流中。可以以指定比特流语法的MPEG格式以及解码与3D视图相对应的流所需要的过程来对多视图流140进行编码。比特流可以包含标识是否包含多视图流的标记,并且STB 120确定该比特流是否包括多视图流140,如果标记如此指示,那么就将该流发送到3D视频转换装置130。STB 120是使得电视机能够接收数字电视(DTV)广播的装置。根据实施例,STB 120可操作为接收和解复用MPTS,以形成多视图流140,并且具有解码器,诸如图2中所示的解码器121。在一个实施例中,STB 120包括任何装置,不只是能够执行如在此所描述的STB 120的功能的常规的STB。
多视图流140是承载以遗留STB中的解码器无法解码的格式所编码的3D信息的视频流。3D信息可以包括显示3D视频所需要的多个相关的视图。例如,多视图流140可以承载3D信息,可以解码该3D信息以形成包括左眼视图和右眼视图组成的立体图像。替代地,多视图流140可以承载能够被解码以形成多于两个视图的信息。多视图流140还可以包括多个子流以及与场景中的对象的深度相关的信息。
用户150n可以具有能够显示3D(立体或者多个)视图的支持3D的TV 122,然而为了在支持3D的TV 122处显示3D视图,STB 120中的解码器121不可操作为解码多视图流140。例如,许多STB可操作为仅解码3D视图中的一个(左眼视图或者右眼视图)。因此,STB120可能要求多视图流140被转换为可在支持3D的TV 122处显示的格式。为了在支持3D的TV处显示3D视图,STB 120可以被配置为将多视图流140传送到3D视频转换装置130,如以下关于图2所示。3D视频转换装置130被配置为将重新格式化的流140发送到支持3D的TV 122,如在下面关于图2和图3进一步描述的。
STB 120可以包括解码器121。解码器121可以是被配置为解码诸如STB格式流142(图3中所示的)的STB格式流的解码器。根据解码器的解码性能,STB格式流142可以是例如MPEG-2兼容流、或者MPEG-4部分10的兼容流。因此,解码器121可以是由用于提供有线电视服务的多服务运营商(MSO)当前使用的许多常规STB中可以找到的常规解码器。为了在支持3D的TV 122处显示3D视图,STB 120可以被配置为将多视图流140传送到3D视频转换装置130b,并且接收STB格式流142,如在下文中关于图3和图9以及和方法500描述的。3D视频转换装置130b和3D转换装置130b是3D视频转换装置130的替代配置。
订户150a-n可以具有不同配置的客户终端设备。例如,如关于订户150d所示的,STB 120d接收并且解复用如图1中的调制的流,以产生多视图流140并且将多视图流140发送到用于处理的3D视频转换装置130b。替代地,如在下文中关于图3和图9以及方法500描述的,STB 120可以被配置为接收来自3D视频转换装置130b的输出STB格式流142。在该实例中,STB 120中的解码器121被配置为对STB格式流进行解码。
图2和图3示出了根据实施例的配置为转换多视图流140的系统200和300的简化的框图。系统200和300中的每一个包括3D视频转换装置130、STB 120以及支持3D的TV 122。3D视频转换装置130被配置为执行如关于图8在下文中描述的方法400。3D视频转换装置130包括输入/输出模块131,该输入/输出模块131被配置为接收来自STB 120的多视图流140,并且将重新格式化的流141输出到支持3D的TV 122。根据实施例,输入/输出模块131包括串行总线(USB)、以太网接口或者其它类型的接口。3D视频转换装置130还包括转换模块132,该转换模块132被配置为将多视图流140转换为重新格式化的流141。转换模块132可以包括解码模块133以及重新格式化模块134。3D视频转换装置130可以被可操作地连接到3D视频转换装置130的输入/输出模块131处的STB 120。在3D视频转换装置130b的替代配置中,编码模块135也被包括在3D视频转换装置130b中。
组件131-135可以包括软件、硬件或者软件和硬件的组合。因此,在一个实施例中,模块131-135中的一个或多个包括电路组件。在另一实施例中,模块131-135中的一个或多个包括可由处理器执行的存储在计算机可读存储介质上的软件代码。应当理解,在图2中描绘的系统200可以包括其它的组件,并且在不脱离系统200的范围的情况下,在此描述的一些组件可以被移除和/或修改。
如图2和图3中所示,3D视频转换装置130可以被配置为与STB120和解码器121对接,其中在STB 120和外部设备之间的安全协议问题可能发生,包括对于解密密钥的需要。注意,3D视频转换装置130可以被可操作地连接到除了STB之外的装置,诸如电视、接收器或包含解码器121的任何装置。例如,当多视图流140到达STB 120时,其可以被加密并且STB 120可以具有用于对其进行解密的密钥。根据实施例,3D视频转换装置130中的安全引擎(未示出)被类似地配置和授权为允许系统100保持安全需要的STB 120和解码器121中的安全引擎(未示出)。MSO或其它提供商可以以与STB 120相同的方式来授权3D视频转换装置130。根据另一实施例,STB 120和3D视频转换装置130使用标准协议来进行通信。例如,许多现有的机顶盒可以支持数字传输内容保护(DTCP)5C。该协议利用STB 120的安全引擎来解密多视图流140,然后在发送到3D视频转换装置130之前,STB120利用5C密钥来重新加密该多视图流140。
3D视频转换装置130的输入/输出模块131接收来自STB 120的多视图流140。随后,将多视图流140发送到3D视频转换装置130的解码模块133。解码模块133可操作为对多视图流140进行解码以形成基本流(未示出)。基本流是基带视频。解码模块133可以包括用于对多视图流140进行解码的常规组件,包括熵解码器、反变换器、反量化器、运动补偿器以及空间预测器。解码模块133被配置为随后向重新格式化模块134传送解码的多视图流140。
重新格式化模块134被配置为接收和重新格式化基本流。根据实施例,重新格式化模块134从基本流生成由针对每个视图单独压缩的流所承载的3D视图(例如,左眼视图和右眼视图)。替代地,如果多视图流140包含关于多于两个的视图的3D信息,则重新格式化模块可以生成多于两个的视图。重新格式化模块134可操作为对3D视图进行同步,并且从而生成重新格式化的流141。重新格式化的流141包括可以在支持3D的TV 122上显示的解码的和重新格式化的视频。
根据实施例,重新格式化模块134以左3D视图和右3D视图的棋盘图案格式来重新格式化基本流,如图4中所示。可以通过使用钻石滤波器165在左眼面板161和右眼面板162上进行梅花采样(quincunxsampling)来生成棋盘图案。钻石滤波器对左眼面板161进行采样并且类似地对右眼面板162进行采样,以形成采样的左眼面板163和采样的右眼面板164。以棋盘图案来在合并的图像166中混合采样的面板。棋盘图案格式是空间序列。当前,许多商用的3D TV可操作为获得以该格式混合在重新格式化的流141中的视频,分离3D视图并且以3D格式进行显示。
根据另一实施例,重新格式化模块134以上下格式重新格式化基本流,如图5中所示。例如,左眼视图可以包括左眼顶面板171,以及右眼视图可以包括相同视频帧的右眼底面板172。当前,许多商用3DTV可操作以获得以该格式混合在重新格式化的流141中的视频,分离3D视图并且以3D格式进行显示。
根据另一实施例,重新格式化模块134以并排的左右视图(例如,用于每个视图的半个垂直面板)格式来重新格式化基本流,如图6中所示。在并排的左右视图格式中,左视图形成左侧面板173,并且右眼视图形成每个视频帧的右侧面板174。当前,一些商用的3D TV可操作为接受以该格式配置的重新格式化的流141。重新格式化的流141可以被直接地输出到如图3中所示的支持3D的TV 122。
根据另一实施例,重新格式化模块134以左右眼视图线交错格式来重新格式化基本流,如图7中所示。例如,所有奇数编号的线181可以承载左眼视图,而偶数编号的线182承载右眼视图。左右眼视图线交错格式是用于左右视图的空间序列。当前,许多商用的3D TV可操作为获得以该格式混合在重新格式化的流141中的视频,分离3D视图并且以3D格式进行显示。
重新格式化模块134可以使用未示出的其它3D格式来重新格式化基本流。其它3D格式包括其中全左眼视图跟随全右眼视图的帧封装格式和颜色交错格式,其中,颜色在偶数编号的线和奇数编号的线上交错。帧封装格式是时间序列。
注意,可以不对重新格式化的流141进行编码。因此,支持3D的TV 122不需要解码器来对重新格式化的流141进行解码,并且能够以3D显示来自重新格式化的流141的内容。
图3示出了作为系统200的替代实施例的系统300。如图3中所示,系统300包括3D视频转换装置130内的装置和模块的不同布置。在系统300中,STB 120可以被配置为以旁路模式进行操作,并且通过STB120将重新格式化的流141输出到支持3D的TV 122。在旁路模式中,重新格式化的流141绕过STB 120中的解码器121。另外,系统300可以以非旁通模式进行操作。
在非旁通模式中,为了对重新格式化的流141进行重新编码以形成STB格式流142,3D视频转换装置130b在重新格式化基本流之后将重新格式化的流141发送到编码模块135。当编码模块135接收到重新格式化的流141时,编码模块135将重新格式化的流141重新编码为匹配STB 120中的解码器121的能力的特定格式,例如,MPEG-2或者MPEG-4部分10格式。基于解码器121来预先确定编码格式。如果编码模块135以上述格式重新编码STB格式流142,那么与常规的STB相比,STB 120不需要额外的能力。在上述实施例中的解码STB格式流141所需要的解码器121可以是单个解码器,该单个解码器被配置为对编码模块135使用的MPEG-2、MPEG-4AVC或者用于对3D视图进行重新编码的任何压缩技术进行解码。
根据另一实施例,3D视频转换装置130b利用3D视图来重新格式化并且重新编码STB格式流142,并且输入/输出模块131使用例如两个MPEG-2流来以双流格式发送STB格式流142。3D视频转换装置130b可以被配置为通过双高清晰度多媒体接口(HDMI)来输出STB格式流142。解码STB格式流142所需要的解码器121可以是双解码器,该双解码器被配置为对双流进行解码,并且将解码的3D视图发送到支持3D的TV 122以进行显示。此外,3D视频转换装置130b可以被配置为输出STB格式流142,以符合STB 120、解码器121以及3D TV122的能力。例如,3D视频转换装置130b、HDMI和3D视频转换装置130b可以通过其被可操作地连接到STB 120的电缆可以被配置为支持承载用于每个3D视图的1080p24(在24赫兹处的1920x1080逐行扫描高清晰度电视(HDTV)格式)图像的STB格式流142。在本示例中的STB格式流142被配置在1080p48。
明显的是,系统200和300可以包括未示出的其它元件,并且在不脱离系统200和300的范围的情况下,可以移除、替代和/或修改在此描述的一些元件。还应当明显的是,在图2和图3的实施例中描述的元件中的一个或者多个可以是可选的。例如,当将3D视频转换装置130b的输出直接连接到TV时,如图1的订户150n和图2的系统200中所示,编码模块135可以不存在。
现在相对于下面的图8中描绘的方法400的流程图来描述系统200可以以其用于将多视图流转换为重新格式化的流的方法的示例。对本领域的技术人员来说应当明显的是,方法400表示一般的图示,并且在不脱离方法400的范围的情况下,可以添加其他的步骤,或者可以移除、修改或者重新布置现有的步骤。另外,通过示例而不是限制的方式,相对于系统200来描述方法400,并且可以在其它的系统中使用方法400。
方法400中阐述的一些或者所有的操作可以被包含为存储在任何期望的计算机可读介质中的并且通过计算机系统上的处理器执行的一个或多个计算机程序。可以用于存储可操作为实现本发明的软件的示例性计算机可读介质包括但不限于常规计算机系统RAM、ROM、EPROM、EEPROM、硬盘或其它的数据存储装置。
在步骤401,如图8中所示,3D视频转换装置130接收多视图流140。可以从可操作地连接到3D视频转换装置130的STB 120接收多视图流140。3D视频转换装置130的输入/输出模块131被配置为接收多视图流140,并且将多视图流140发送到解码模块106。
在步骤402,解码模块133解码多视图流140以形成基本流。然后,解码模块133将基本流发送到重新格式化模块134。
在步骤403,重新格式化模块134使用基本流来生成包括3D图像的左视图和右视图,并且在步骤404重新格式化基本流以形成重新格式化的流141。在步骤405,重新格式化的流141可以被输出到支持3D的TV 122。可以通过HDMI接口输出没有被压缩或编码的重新格式化的流141。
现在相对于下面在图9中描绘的方法600的流程图来描述系统400可以以其用于将多视图流140转换为STB格式流142的方法的示例。对本领域的技术人员来说应当明显的是,方法500表示一般的图示并且在不脱离方法500的范围的情况下,可以添加其它的步骤,或者可以移除、修改或者重新安排现有的步骤。另外,通过示例而不是限制的方式,相对于系统300来描述方法500,并且可以在其它的系统中使用方法500。
方法500的步骤501至504与方法400的步骤401至404相同。当将3D视频转换装置130b连接到以旁通模式操作的STB时,在步骤505,将重新格式化的流141发送到STB 120。此后,STB 120可以被配置为将重新格式化的流141发送到支持3D的TV 122。
然而,在步骤504之后,与方法400的步骤404相反,如果将3D视频转换装置130b连接到以非旁通模式进行操作的STB 120,那么将重新格式化的流141从重新格式化模块134发送到编码模块135。
在步骤506,如果将3D视频转换装置130b连接到以非旁通模式进行操作的STB 120,那么编码模块135将重新格式化的流141编码为STB格式流142。编码模块135可以被配置为基于STB 120中的解码器121的配置来将STB格式流142编码为特定的格式。根据实施例,可以以棋盘图案格式、左右眼视图线交错格式以并排的左右视图格式中的一个来重新格式化STB格式流142,其中解码器121是单个解码器。根据另一实施例,编码模块135将具有3D视图的重新格式化的流141的3D视图中的每一个独立地重新编码为STB格式流142。根据另一实施例,STB格式流142可以被重新格式化为包括左右3D视图的双流。
在步骤507,输入/输出模块131将STB格式流142输出到以非旁通模式进行操作的STB 120。STB格式流142可以通过单个HDMI接口被输出到STB 120。如果压缩输出以生成MPEG-2或MPEG-4兼容流,那么STB格式流142可以通过以太网或者通用串行总线(USB)来输出。STB 120可以被配置为解码STB格式流142,以形成重新格式化的流141,并且随后将重新格式化的流141发送到支持3D的TV 122。
虽然在本公开的全部内容中具体地进行描述,但是本发明的代表性实施例在大范围的应用中具有实用性,并且上述论述并不旨在而且不应当被解释是限制性的,而是作为本发明的各方面的说明性讨论来提供。
图10示出了根据实施例的用于实现或执行在图1-9中描绘的过程中的一个或多个的计算设备600的框图。应当理解,计算设备600的图示是一般的图示,并且计算设备600可以包括其它的组件,并且在不脱离计算设备600的范围的情况下,可以移除和/或修改所描述的一些组件。根据实施例,计算设备600包括在图2和图3中描绘的3D视频转换装置130。
计算设备600包括处理器602,该处理器602可以实现或执行在图8-9中描绘的过程中的一个或者多个中描述的一些或者所有的步骤。通过通信总线604来通信来自处理器602的命令和数据。计算设备600还包括诸如随机存取存储器(RAM)的主存储器606,在运行时间期间可以执行用于处理器602的程序代码;以及硬盘(未示出),可以存储用于在图8-9中描绘的过程中的一个或者多个的程序代码的副本。替代地,计算设备600可以包括非易失性存储器。另外,计算设备600包括诸如同轴电缆、HDMI或者USB的接口。
根据实施例,3D视频转换装置130可以包括可插拔电子狗。例如,3D转换装置130可以被可操作连接到STB 120和支持3D的TV 122,以对多视图流进行解码。
本发明的实施例提供了一种对多视图流进行解码并且以STB中的解码器可以操作以解码的3D格式重新编码所解码的信息。因为3D TV技术是具有对多视图流进行编码的不同标准的演进领域,STB中的许多解码器不能解码多视图流,并且许多电视不可操作为示出3D视图。装置提供在没有更换电视或者STB的费用和困难的情况下观看编码在多视图流中的节目的性能。
在此已经描述和示出了本发明的实施例及其一些变体。仅通过图示而不意味着限制的方式来阐述在此使用的术语、描述以及附图。本领域的技术人员应当认识到,在本发明的精神和范围内许多变化是可能的,其中本发明旨在通过下述的权利要求及其等价物来定义,其中除非另有说明,否则所有的术语在其广泛合理的意义上进行解释。

Claims (20)

1.一种三维3D视频转换装置,所述3D视频转换装置可连接到机顶盒STB,所述3D视频转换装置包括:
输入模块,所述输入模块操作为接收来自所述STB的多视图流;
转换模块,所述转换模块操作为转换所述多视图流,包括,
解码模块,所述解码模块操作为解码所述多视图流以形成基本流;以及
重新格式化模块,所述重新格式化模块操作为从所述基本流生成具有3D视图的重新格式化的流,其中所述3D视图包括左眼视图和右眼视图;以及
输出模块,所述输出模块操作为输出所述重新格式化的流。
2.根据权利要求1所述的3D视频转换装置,其中所述STB被配置为接收STB格式流,并且所述转换模块进一步包括:
编码模块,所述编码模块操作为将具有所述3D视图的所述重新格式化的流转换为所述STB格式流,其中所述STB格式流是以所述STB的解码器操作以进行解码的格式;并且
其中所述输出模块操作为将所述STB格式流输出到所述STB。
3.根据权利要求2所述的3D视频转换装置,其中所述编码模块被配置为将具有所述3D视图的重新格式化的流的所述3D视图中的每一个独立地重新编码为所述STB格式流。
4.根据权利要求1所述的3D视频转换装置,其中所述3D视频转换装置被配置为将所述重新格式化的流输出到支持3D的电视TV和所述STB中的一个,其中所述重新格式化的流绕过所述STB中的解码器。
5.根据权利要求1所述的3D视频转换装置,其中所述3D视频转换装置被连接到STB、支持3D的电视、个人计算机PC和接收器中的一个的输入;并且
其中以由所述STB、所述支持3D的电视、所述PC和所述接收器中的一个可解码的格式来从所述输出模块输出所述重新格式化的流。
6.根据权利要求1所述的3D视频转换装置,其中以包括棋盘图案格式、并排的左右视图格式、以及左右视图交错的格式中的一个的格式来生成所述重新格式化的流;并且
其中通过单个高清晰度多媒体接口(HDMI)来输出所述重新格式化的流。
7.根据权利要求1所述的3D视频转换装置,其中,以左右眼视图双流格式输出所述重新格式化的流,并且通过双HDMI输出所述重新格式化的流。
8.根据权利要求1所述的3D视频转换装置,其中所述输出模块或所述输入模块被配置为通过通用串行总线USB接口或者以太网接口来输出或输入所述STB格式流。
9.一种使用3D视频转换装置来转换多视图流的方法,所述方法包括:
接收来自STB的所述多视图流;
通过所述3D视频转换装置来解码所述多视图流以形成基本流;
从所述基本流生成具有3D视图的重新格式化的流,其中所述3D视图包括左眼视图和右眼视图;以及
输出所述重新格式化的流。
10.根据权利要求9所述的方法,进一步包括:
在从所述基本流生成具有所述3D视图的所述重新格式化的流之后,将具有所述3D视图的所述重新格式化的流重新编码为STB格式流,其中所述STB格式流是以所述STB的解码器操作以进行解码的格式;以及
将所述STB格式流输出到所述STB。
11.根据权利要求10所述的方法,其中将具有所述3D视图的重新格式化的流重新编码为STB格式流包括:将具有所述3D视图的所述重新格式化的流的3D视图中的每一个独立地重新编码为所述STB格式流。
12.根据权利要求10所述的方法,其中,以双流格式来编码所述STB格式流,通过双HDMI输出所述STB格式流,并且所述解码器包括双解码器。
13.根据权利要求9所述的方法,其中,从所述基本流生成具有3D视图的所述重新格式化的流进一步包括:
以棋盘图案格式、并排的左右视图格式、上下格式、以及左右眼视图交错的格式中的一个来生成所述重新格式化的流。
14.根据权利要求9所述的方法,其中将所述重新格式化的流输出到所述STB进一步包括:
通过单个HDMI将所述重新格式化的流输出到包括所述STB中的单个解码器的接收器。
15.根据权利要求9所述的方法,其中,所述输出模块或所述输入模块被配置为通过USB接口或以太网接口来输出或输入所述STB格式流。
16.根据权利要求9所述的方法,其中输出所述重新格式化的流包括:将所述重新格式化的流输出到支持3D的TV和所述STB中的一个,其中所述重新格式化的流绕过所述STB中的解码器。
17.一种计算机可读存储介质,所述计算机可读存储介质存储至少一个计算机程序,当执行所述至少一个计算机程序时,使用3D视频转换装置来执行转换多视图流的方法,所述方法包括:
接收来自STB的所述多视图流;
解码所述多视图流以形成基本流;
从所述基本流生成具有3D视图的重新格式化的流,其中所述3D视图包括左眼视图和右眼视图;
将具有所述3D视图的所述重新格式化的流重新编码为STB格式流,其中所述STB格式流是以所述STB中的解码器操作以进行解码的格式;以及
将所述STB格式流输出到所述STB。
18.根据权利要求17所述的存储在所述计算机可读存储介质的方法,其中重新编码所述STB格式流包括:以棋盘图案格式、并排的左右视图格式、左右眼视图交错的格式、以及双流格式中的一个来重新编码所述STB格式流。
19.根据权利要求17所述的存储在所述计算机可读存储介质上的方法,其中从所述基本流生成具有3D视图的重新格式化的流进一步包括:以棋盘图案格式、并排的左右视图格式、上下格式、以及左右眼视图交错的格式中的一个来生成所述重新格式化的流。
20.根据权利要求17所述的存储在所述计算机可读存储介质上的方法,其中将所述重新格式化的流输出到所述STB进一步包括:通过单个HDMI将所述重新格式化的流输出到包括所述STB中的单个解码器的接收器。
CN201080057162.9A 2009-12-17 2010-12-08 3d视频转换装置 Active CN102763419B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/640,630 2009-12-17
US12/640,630 US8462197B2 (en) 2009-12-17 2009-12-17 3D video transforming device
PCT/US2010/059357 WO2011075350A1 (en) 2009-12-17 2010-12-08 3d video transforming device

Publications (2)

Publication Number Publication Date
CN102763419A true CN102763419A (zh) 2012-10-31
CN102763419B CN102763419B (zh) 2015-08-12

Family

ID=43530121

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201080057162.9A Active CN102763419B (zh) 2009-12-17 2010-12-08 3d视频转换装置

Country Status (3)

Country Link
US (1) US8462197B2 (zh)
CN (1) CN102763419B (zh)
WO (1) WO2011075350A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103914204A (zh) * 2012-12-31 2014-07-09 北京新媒传信科技有限公司 一种用于视图显示和切换的方法和装置

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110150073A1 (en) * 2009-12-21 2011-06-23 General Instrument Corporation Scalable video transcoding device
US20110149052A1 (en) * 2009-12-22 2011-06-23 Samsung Electronics Co., Ltd. 3d image synchronization apparatus and 3d image providing system
US9247286B2 (en) 2009-12-31 2016-01-26 Broadcom Corporation Frame formatting supporting mixed two and three dimensional video data communication
US8854531B2 (en) 2009-12-31 2014-10-07 Broadcom Corporation Multiple remote controllers that each simultaneously controls a different visual presentation of a 2D/3D display
US20110157322A1 (en) 2009-12-31 2011-06-30 Broadcom Corporation Controlling a pixel array to support an adaptable light manipulator
US8823782B2 (en) 2009-12-31 2014-09-02 Broadcom Corporation Remote control with integrated position, viewer identification and optical and audio test
US20110164118A1 (en) * 2010-01-06 2011-07-07 Samsung Electronics Co., Ltd. Display apparatuses synchronized by one synchronization signal
KR101694821B1 (ko) * 2010-01-28 2017-01-11 삼성전자주식회사 다시점 비디오스트림에 대한 링크 정보를 이용하는 디지털 데이터스트림 전송 방법와 그 장치, 및 링크 정보를 이용하는 디지털 데이터스트림 전송 방법과 그 장치
US20110216083A1 (en) * 2010-03-03 2011-09-08 Vizio, Inc. System, method and apparatus for controlling brightness of a device
KR20110138976A (ko) * 2010-06-22 2011-12-28 삼성전자주식회사 영상 분배 장치, 디스플레이 장치 및 이에 적용되는 영상 분배 방법
FR2965444B1 (fr) * 2010-09-24 2012-10-05 St Microelectronics Grenoble 2 Transmission de video 3d sur une infrastructure de transport historique
US20130147912A1 (en) * 2011-12-09 2013-06-13 General Instrument Corporation Three dimensional video and graphics processing
CN103118298A (zh) * 2013-02-21 2013-05-22 华为终端有限公司 一种同时播放多个电视节目的装置及方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1799267A (zh) * 2003-05-30 2006-07-05 夏普株式会社 图像接收装置以及图像再生装置
CN2891544Y (zh) * 2005-12-23 2007-04-18 中国科技开发院威海分院 立体电视转换器
US20090022416A1 (en) * 2006-02-15 2009-01-22 Koninklijke Philips Electronics N.V. Reduction of compression artefacts in displayed images, analysis of encoding parameters

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7002618B2 (en) * 2001-06-01 2006-02-21 Stereographics Corporation Plano-stereoscopic DVD movie
CN101841728B (zh) 2003-04-17 2012-08-08 夏普株式会社 三维图像处理装置
US20050018911A1 (en) * 2003-07-24 2005-01-27 Eastman Kodak Company Foveated video coding system and method
US7525600B2 (en) * 2005-01-14 2009-04-28 Broadcom Corporation Single integrated high definition television (HDTV) chip for analog and digital reception
KR100716992B1 (ko) * 2005-02-04 2007-05-10 삼성전자주식회사 스테레오 영상 부호화 및 복호화 방법과 그 장치
KR100864826B1 (ko) 2006-09-29 2008-10-23 한국전자통신연구원 디지털 방송기반의 3차원 정지영상 서비스 방법 및 장치
US20080263621A1 (en) * 2007-04-17 2008-10-23 Horizon Semiconductors Ltd. Set top box with transcoding capabilities
WO2010028107A1 (en) * 2008-09-07 2010-03-11 Dolby Laboratories Licensing Corporation Conversion of interleaved data sets, including chroma correction and/or correction of checkerboard interleaved formatted 3d images
US9055278B2 (en) * 2009-01-07 2015-06-09 Dolby Laboratories Licensing Corporation Conversion, correction, and other operations related to multiplexed data sets

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1799267A (zh) * 2003-05-30 2006-07-05 夏普株式会社 图像接收装置以及图像再生装置
CN2891544Y (zh) * 2005-12-23 2007-04-18 中国科技开发院威海分院 立体电视转换器
US20090022416A1 (en) * 2006-02-15 2009-01-22 Koninklijke Philips Electronics N.V. Reduction of compression artefacts in displayed images, analysis of encoding parameters

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103914204A (zh) * 2012-12-31 2014-07-09 北京新媒传信科技有限公司 一种用于视图显示和切换的方法和装置
CN103914204B (zh) * 2012-12-31 2018-02-06 北京新媒传信科技有限公司 一种用于视图显示和切换的方法和装置

Also Published As

Publication number Publication date
US20110149026A1 (en) 2011-06-23
CN102763419B (zh) 2015-08-12
WO2011075350A1 (en) 2011-06-23
US8462197B2 (en) 2013-06-11

Similar Documents

Publication Publication Date Title
CN102763419B (zh) 3d视频转换装置
EP2454886B1 (en) Simulcast of stereoviews for 3d tv
US20110074922A1 (en) Method and system for 3d video coding using svc spatial scalability
CN102845068A (zh) 用于3d电视节目素材的分配的方法和装备
CN102972030B (zh) 用于生成和重建立体兼容视频流的方法及相关的编码和解码设备
EP2543191B1 (en) Method and apparatus for converting two-dimensional video content for insertion into three-dimensional video content
CN102843566B (zh) 一种3d视频数据的通讯方法和设备
JP5952454B2 (ja) 受信装置および受信方法
JP5559605B2 (ja) 受信装置および受信方法
CN103535045A (zh) 用于传送立体视频信息的方法和设备
JP2011250218A (ja) 受信装置、受信方法および送信方法
JP6117976B2 (ja) 受信装置および受信方法
JP6117410B2 (ja) 送受信システムおよび送受信方法
JP5952453B2 (ja) 受信装置および受信方法
JP5947942B2 (ja) 送受信システムおよび送受信方法
WO2011148554A1 (ja) 受信装置および出力方法
JP5947866B2 (ja) 受信装置および受信方法
JP5903461B2 (ja) 送受信システムおよび送受信方法
CN202957932U (zh) 一种3d视频数据的通讯设备和通信系统
JP2017143552A (ja) 受信装置および受信方法
JP2017143551A (ja) 受信装置および受信方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: MOTOROLA MOBILITY LLC

Free format text: FORMER OWNER: GENERAL INSTRUMENT HOLDING CO., LTD.

Effective date: 20130916

Owner name: GENERAL INSTRUMENT HOLDING CO., LTD.

Free format text: FORMER OWNER: GENERAL INSTRUMENT CO.

Effective date: 20130916

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20130916

Address after: Illinois State

Applicant after: MOTOROLA MOBILITY LLC

Address before: California, USA

Applicant before: General instrument Holdings Ltd.

Effective date of registration: 20130916

Address after: California, USA

Applicant after: General instrument Holdings Ltd.

Address before: American Pennsylvania

Applicant before: GENERAL INSTRUMENT Corp.

C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20161010

Address after: California, USA

Patentee after: Google Technology Holdings LLC

Address before: Illinois State

Patentee before: MOTOROLA MOBILITY LLC