CN102577400B - 3d多视点显示的方法和装置 - Google Patents

3d多视点显示的方法和装置 Download PDF

Info

Publication number
CN102577400B
CN102577400B CN201080044155.5A CN201080044155A CN102577400B CN 102577400 B CN102577400 B CN 102577400B CN 201080044155 A CN201080044155 A CN 201080044155A CN 102577400 B CN102577400 B CN 102577400B
Authority
CN
China
Prior art keywords
content
synthesis
focus
display
depth
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201080044155.5A
Other languages
English (en)
Other versions
CN102577400A (zh
Inventor
太田孝彰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN102577400A publication Critical patent/CN102577400A/zh
Application granted granted Critical
Publication of CN102577400B publication Critical patent/CN102577400B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183On-screen display [OSD] information, e.g. subtitles or menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/111Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00Details of stereoscopic systems
    • H04N2213/005Aspects relating to the "3D+depth" image format

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

一种用于向用户显示内容的方法,包括:接收第一内容和第二内容,向第一内容施加第一深度,向第二内容施加第二深度,以及合成第一内容和第二内容以生成3维(3D)合成内容,其中合成内容被配置为在3D显示器上显示,其中,合成内容被配置为以第一内容和第二内容被同时显示的方式被重放,并且合成内容还被配置为以如下方式被重放:基于对第一内容和第二内容之一的选择,第一内容和第二内容之一被显示为看起来是焦点对准的并且第一内容和第二内容中的另一个被显示为看起来是焦点未对准的。

Description

3D多视点显示的方法和装置
本申请是2010年8月31日提交的美国专利申请No.12/873,077的继续案,该美国专利申请是2009年10月13日提交的美国临时申请No.61/251,052的非临时申请,这里通过引用将这些申请全部并入。 
技术领域
本发明总地涉及显示内容,更具体而言涉及内容的多视点显示(multiview display)。 
背景技术
传统的多视点显示是在2维显示空间中实现的,例如画旁画(picture by picture)、画中画(picture in picture)、画上画(picture on picture)和铺块图片(tiled picture)。这些技术使用户可以同时观看多于一个节目,但总地来说它们通过缩减或遮挡一些或全部内容的一部分而牺牲了图片的分辨率。 
发明内容
本发明的若干实施例提供了一种方法,包括:接收第一内容和第二内容;向第一内容施加第一深度;向第二内容施加第二深度;以及合成第一内容和第二内容以生成3维(3D)合成内容,其中合成内容被配置为在3D显示器上显示,其中,合成内容被配置为以第一内容和第二内容被同时显示的方式被重放,并且合成内容还被配置为以如下方式被重放:基于对第一内容和第二内容之一的选择,第一内容和第二内容之一被显示为看起来是焦点对准的(in focus)并且第一内容和第二内容中的另一个被显示为看起来是焦点未对准的(out of focus)。 
在另一实施例中,本发明可表征为一种装置,包括:内容检测模块, 被配置为接收第一内容和第二内容;深度指派模块,被配置为向第一内容和第二内容的每一个施加深度;合成器模块,被配置为合成第一内容和第二内容以生成3维(3D)合成内容,其中合成内容被配置为在3D显示器上显示,使得第一内容和第二内容被同时显示,并且合成内容还被配置为以如下方式被重放:基于对第一内容和第二内容之一的选择,第一内容和第二内容之一被显示为看起来是焦点对准的并且第一内容和第二内容中的另一个被显示为看起来是焦点未对准的。 
在另一实施例中,本发明可表征为一种系统,包括:用于接收第一内容和第二内容的装置;用于向第一内容施加第一深度的装置;用于向第二内容施加第二深度的装置;以及用于合成第一内容和第二内容以生成3维(3D)合成内容的装置,其中3D合成内容可在3D显示器上被重放以同时显示第一内容和第二内容,并且基于观看者选择,第一内容和第二内容之一是焦点对准的,而第一内容和第二内容中的另一个是焦点未对准的。 
附图说明
从结合以下附图给出的以下对本发明若干实施例的更具体描述中,将更清楚本发明的若干实施例的上述和其他方面、特征和优点。 
图1示出了根据本发明若干实施例的用于在3D显示器上显示多个内容的方法。 
图2示出了根据本发明若干实施例的用于生成3D合成内容的信号处理单元。 
图3示出了表明根据本发明若干实施例的生成多视点3D合成内容的过程流程的系统图。 
图4示出了可用于实现根据本发明若干实施例描述的任何方法、装置和/或模块的装置或系统。 
相应的标号在几幅附图中始终指示相应的组件。本领域的技术人员将会明白,附图中的元素是为了简明和清晰而示出的,而不一定是按比例绘制的。例如,附图中的一些元素的尺寸相对于其他元素可能被夸大了以帮助改善对本发明的各种实施例的理解。另外,在商业上可行的实施例中有 用或必要的常见但公知的元素经常未被示出,以促进更清楚地查看本发明的这各种实施例。 
具体实施方式
以下描述不应被理解为限制意义的,而仅仅是出于描述示例性实施例的一般原理的目的而作出的。应当参考权利要求来确定本发明的范围。 
本说明书中各处提到“一个实施例”、“一实施例”或类似用语的意思是联系该实施例描述的特定特征、结构或特性被包括在本发明的至少一个实施例中。从而,在本说明书中各处出现的短语“在一个实施例中”、“在一实施例中”或类似用语可能但不一定全都指同一实施例。 
另外,所描述的本发明的特征、结构或特性在一个或多个实施例中可按任何适当的方式被组合。在以下描述中,提供了许多具体细节,例如程序、软件模块、用户选择、网络事务、数据库查询、数据库结构、硬件模块等等的示例,以帮助透彻理解本发明的实施例。然而,本领域的技术人员将会认识到,没有这些具体细节中的一个或多个,或者利用其他方法、组件、材料等等,也可以实现本发明。在其他场合中,没有详细示出或描述公知的结构、材料或操作,以避免模糊本发明的各方面。 
传统的多视点显示是在2维显示空间中实现的,例如画旁画、画中画、画上画和铺块图片。这些技术使用户可以同时观看多于一个节目,但总地来说它们全都通过缩减内容或遮挡内容而牺牲了内容的分辨率。 
在一些实施例中,本发明的系统提供了一种通过将诸如视频、流式内容和图像之类的多个多媒体内容放在3维空间中来使得这些内容能够共享同一显示器的方法。这个新技术也可与传统的2维多视点技术相结合。在一些实施例中,通过采用本申请各处描述的方法和系统,可以克服传统的2维多视点显示的局限,例如分辨率的损失和部分内容的损失。 
3D显示器被设计为接收3D视频信号并且向观看者提供3D图像感觉。在一些实施例中,通过提供适当的信号处理单元,3D显示器可以取得多个2D多媒体内容并且同时显示它们,而不牺牲图像分辨率或遮挡。 
例如,在一个实施例中,3D显示器可接收两个独立的2D内容,例如 视频、图像或其他多媒体内容。在实施例中,内容是以流格式产生的。根据一个实施例,每个2D内容是全分辨率的,但被施加了不同级别的人造视差或其他深度值。这使得每个图像看起来深度是不同的。从而,观看者能够将聚焦改变到该观看者感兴趣的任一内容上。在一个实施例中,每个内容可包括相互不同且独立的图像、视频、音频或其他多媒体内容。在另一实施例中,诸如节目的字幕、闭合字幕、当前时间、标题和说明等等之类的信息性图像可与和该信息相关联的多媒体内容一起被呈现。在这种实施例中,信息可被处理为具有与主内容不同级别的视差和/或深度,以使得信息可被呈现成其看起来浮在主内容上方或沉在主内容后面。 
在一个实施例中,上述的多视点显示是由位于3D图像显示器之前的信号处理单元提供的。在一实施例中,3D显示器取得右眼视频信号和左眼视频信号或者复用有右眼视频和左眼视频的信号。这里的信号处理单元取得多个2D内容或菜单信息并且在3D世界中组合该内容和/或菜单信息并生成可被3D显示器显示的信号。 
首先参考图1,示出了用于在3D显示器上显示多个内容的方法100。在一个实施例中,方法开始于步骤110,在该步骤中在信号处理单元处接收第一内容和第二内容。在一个或多个实施例中,内容指的是与内容相对应的数据信号。在一个实施例中,信号处理单元位于3D显示器处,并且3D可包括用于接收第一内容和第二内容的多输入接收器。在另一实施例中,信号处理单元是可通信地耦合到3D显示器的单独单元。在这种实施例中,信号处理单元可包括用于接收第一内容和第二内容的多输入接收器。在一个实施例中,基于用户选择而接收内容。在一个示例性实施例中,在步骤110中接收两个内容。然而,在其他实施例中,可接收三个或更多个内容。本领域的普通技术人员应当理解,根据与这里针对第一内容和第二内容描述的过程相同的过程可以在3D显示器上组合和显示多于两个内容。第一内容和第二内容在这里是用于示例目的,而不应被解释为限制本发明的范围。在一个实施例中,当在3D显示器和/或信号处理单元处被接收时,该两个或更多个内容是处于原始分辨率的。在一个实施例中,第一内容和/或第二内容包括2D图像、视频和/或其他多媒体内容。在另一 实施例中,第一内容和第二内容中的一者或两者可包括与第一内容和第二内容中的另一者相对应的菜单信息。在又一实施例中,第一内容和第二内容中的一者或两者可包括3D内容,例如3D图像、3D视频内容和/或3D菜单信息。 
接下来,在步骤120中,在信号处理单元处向第一内容和第二内容施加深度。在一个实施例中,深度施加是通过向第一内容和第二内容的每一个施加不同的视差以使得每个内容出现在独特的深度处来完成的。在一个实施例中,在步骤120中执行深度指派以使得第一内容和第二内容的每一个可形成3D可显示图像的不同层。 
过程随后继续到步骤130,在该步骤中第一内容和第二内容被合成为单个3D内容。在一个实施例中,在此步骤中,合成器接收第一内容和第二内容并且基于其被指派的深度和/或视差值来合成第一内容和第二内容以生成合成的3D内容。在一个实施例中,3D内容包括各自被放置在其指派深度处的第一内容和第二内容两者。在一个实施例中,第一内容和第二内容的每一个被合成为每个内容在合成的3D内容内保持在其原始分辨率。 
在一个实施例中,合成包括对第一内容和第二内容进行阿尔法混合(alpha blending)。例如,在一个实施例中,信号处理单元包括阿尔法混合器,该阿尔法混合器接收第一内容和第二内容及其相应的深度和/或视差值并且通过对内容进行阿尔法混合来根据其指派深度合成第一内容和第二内容,以产生包括处于其原始分辨率的第一内容和第二内容两者的3D可显示内容。 
在一个实施例中,数据合成是利用指派给第一内容和第二内容中的一者或两者的权重来执行的。例如,可提供与最终的3D可显示内容内的每个内容的权重或比率相对应的权重值。在一个实施例中,可以向第一内容和第二内容的每一个指派透明度值。在一个实施例中,在使用阿尔法混合器的情况下,阿尔法混合器的阿尔法值可以是可变的,以生成具有在最终3D可显示内容内的第一内容和第二内容的每一个的诸如最终权重和/或透明度之类的特定特性的图像。 
在一个实施例中,合成模块230可包括阿尔法混合器。在一个实施例 中,阿尔法混合器通过基于第一内容和第二内容的深度值并根据特定的阿尔法值对第一内容和第二内容进行阿尔法混合来生成3D内容。阿尔法值表示在最终3D内容内第一内容和第二内容的每一个的透明度。在一些实施例中,阿尔法值的范围是从0.0到1.0,其中0.0表示完全透明的内容,而1.0表示完全不透明的内容。在一个实施例中,第一内容和第二内容两者在3D内容中被均等地表示,并且阿尔法值被相应地设定。在一些实施例中,这可代表默认阿尔法值。在一个或多个实施例中,阿尔法混合器可接收改变阿尔法值的输入,以生成一个内容被表示得比另一个更透明的合成3D内容。例如,在一个实施例中,用户可能能够在用户输入设备270处输入期望的阿尔法值。该输入可在用户输入接口模块处被接收并被发送到合成器模块,即阿尔法混合器。 
接下来,在步骤140中,3D内容被发送到3D显示器以被显示给用户。在一个实施例中,3D显示器可包括无眼镜3D显示器。在另一实施例中,3D显示器可包括用户需要3D眼镜的显示器。用户应当理解,当前可用或将来可变得可用的任何类型的3D显示器都可用在本发明的实施例中。在一些实施例中,信号处理单元可被编程为生成可在特定3D显示器处显示的或者可被生成为在所有3D显示器上都普遍可显示的3D图像。 
在一个实施例中,用户就能够同时以其原始分辨率观看第一内容和第二内容。用户随后可选择聚焦在3D显示器内的第一内容和第二内容之一上。当用户选择聚焦在哪个内容上时,该内容将以焦点对准的形式被显示给用户,而另一内容将以重像和/或焦点未对准的形式被显示给用户。例如,在一些实施例中,当用户选择聚焦在哪个内容上时,该内容在用户感觉起来将是焦点对准的,而另一内容将被用户感觉为重像和/或焦点未对准的。在这种实施例中,用户的选择性聚焦区分了第一内容和第二内容,使得对于用户来说,第一内容和第二内容之一看起来并且被显示成焦点对准,而另一内容将看起来并被显示成焦点未对准和/或重像。在另一实施例中,在第一内容和第二内容之一包括菜单信息的情况下,菜单信息可看起来是浮在主内容上方的。在一个实施例中,当内容被显示在3D显示器上时,用户可在第一内容和第二内容之间自由切换。例如,在一个实施例 中,用户可通过将焦点从焦点对准的内容转移到焦点未对准的内容来从聚焦在第一内容和第二内容上切换。 
接下来参考图2,示出根据本发明若干实施例的用于生成3D可显示内容的信号处理单元200。如图所示,该系统包括内容检测模块210、深度指派模块220、合成模块230、用户接口模块240以及显示接口模块250,它们由数据总线和/或其他连接手段可通信地耦合。在一个或多个实施例中,信号处理单元200还包括显示器260和一个或多个用户输入设备270。在一个或多个实施例中,显示器260和一个或多个用户输入设备270在信号处理单元200外部并且通过线路或者无线地连接到信号处理单元200。在一个实施例中,显示器260可通信地耦合到显示接口模块250。在一个实施例中,用户输入设备270可通信地耦合到用户接口模块240。 
在一个实施例中,内容检测模块210包括多输入接收器和/或收发器,用于接收一个或多个内容。根据若干实施例,内容检测模块210接收第一内容和第二内容。 
在一个实施例中,深度指派模块220包括处理器和/或微控制器并且能够从内容检测模块210接收内容并向内容指派深度和/或视差值。在一个实施例中,深度指派模块220还可与用户输入接口模块和用户输入设备270通信,用于接收期望的深度值和/或其他信息。在一个实施例中,深度指派模块220可从内容检测模块210接收内容并且可向每个内容施加所指派的深度。在另一实施例中,深度指派模块220可以简单地为第一内容和第二内容的每一个生成深度值。 
合成模块230根据若干实施例包括用于根据指派给第一内容和第二内容的每一个的深度和/或视差值来合成或组合内容的合成器。在一个实施例中,合成模块230可以可通信地耦合到内容检测模块210并且可从内容检测模块210直接接收第一内容和第二内容并且还可单独从深度指派模块220接收内容的深度值。在另一实施例中,从深度指派模块220接收第一和第二内容及其相应的深度值。在一个实施例中,合成模块230还可接收其他信息,例如期望的权重、透明度和/或其他信息。例如,在一个实施例中,可从用户接口模块240接收这种信息。在一个实施例中,合成模块 230被配置为根据深度值并可选地根据权重、透明度或其他这种值合成第一内容和第二内容以生成可在3D显示器260上显示的3D内容。在一个实施例中,合成模块230以第一原始分辨率接收第一内容和第二内容。在一些实施例中,合成包括生成3D最终内容以使其包括处于与其被接收时相同的分辨率的第一内容和第二内容。 
在一个实施例中,合成模块230可包括阿尔法混合器。在一个实施例中,阿尔法混合器通过基于第一内容和第二内容的深度值并且根据特定的阿尔法值对第一内容和第二内容进行阿尔法混合来生成3D内容。阿尔法值表示在最终3D内容内第一内容和第二内容的每一个的透明度。在一些实施例中,阿尔法值的范围是从0.0到1.0,其中0.0表示完全透明的内容,而1.0表示完全不透明的内容。在一个实施例中,第一内容和第二内容两者在3D内容中被均等地表示,并且阿尔法值被相应地设定。在一些实施例中,这可代表默认阿尔法值。在一个或多个实施例中,阿尔法混合器可接收改变阿尔法值的输入,以生成一个内容被表示得比另一个更透明的合成3D内容。例如,在一个实施例中,用户可能能够在用户输入设备270处输入期望的阿尔法值。该输入可在用户输入接口模块处被接收并被发送到合成器模块,即阿尔法混合器。 
显示接口模块250与合成模块230通信并且被配置为接收3D内容并将该内容发送到3D显示器以便显示给观看者。在一个实施例中,显示接口模块250可执行一个或多个预备动作以使从合成模块230接收的3D内容作好准备。 
用户输入模块可包括按钮、键盘、鼠标、操纵杆等等中的一个或多个。3D显示器可包括任何能够显示3D内容的显示器。例如,在一个实施例中,3D显示器可使用若干种3D显示技术中的一种或多种,并且可包括立体、自动立体、全息和/或体积显示中的一种或多种。 
在一个或多个实施例中,3D显示器被配置为基于对第一内容和第二内容之一的选择而显示3D内容,其中第一内容和第二内容中的一个被显示成焦点对准,并且第一内容和第二内容中的另一个被同时显示成焦点未对准。在一个实施例中,该选择是通过用户聚焦在第一内容和第二内容之 一上而执行的。例如,在一些实施例中,当用户选择聚焦在哪个内容上时,该内容在用户感觉起来将是焦点对准的,而另一内容将被用户感觉为重像和/或焦点未对准的。在这种实施例中,用户的选择性聚焦区分了第一内容和第二内容,使得对于用户来说,第一内容和第二内容之一看起来并且被显示成焦点对准,而另一内容将看起来并被显示成焦点未对准和/或重像。例如,当内容被同时显示时,用户可聚焦在所显示的第一内容上,并且第一内容将相应地在用户看来是焦点对准的,而第二内容被同时显示成焦点未对准。用户随后可将焦点切换到第二内容,并且第二内容将看起来是焦点对准的,而第一内容将看起来是焦点未对准的。如果在3D模块内包含多于两个内容,则当用户聚焦在这两个或更多个内容中的任何一个上时,将实现相同的结果,并且其余的内容将看起来是焦点未对准的。 
在一个实施例中,3D显示器可通过线路和/或无线地与3D显示接口模块250和/或信号处理单元200通信。在另一实施例中,信号处理单元200位于3D显示设备处。应当注意,信号处理单元200的元件中的一个或多个可被组合成单个模块并且可执行针对每个元件所描述的功能。 
接下来参考图3,示出了表明根据本发明若干实施例的互连和过程流程的系统图。在一个实施例中,本发明的信号处理方法开始于在内容检测模块210处接收到两个或更多个内容信号时。在一个实施例中,内容检测模块210接收第一内容和第二内容。在另一实施例中,内容检测模块210可接收三个或更多个内容。内容可包括2D内容或3D内容。在一个实施例中,内容检测模块210包括频道选择模块,用于调谐到提供该内容的频道中。例如,在一个实施例中,用户可选择接收该两个或更多个内容并且内容检测模块210将调谐到所选频道中以接收所请求的内容。当接收到内容时,内容检测模块210还可对内容执行额外的动作,以使内容为深度指派模块220作好准备,或者可简单地将内容传递到深度指派模块220。 
根据一个或多个实施例,内容检测模块210随后将第一内容和第二内容转发到深度指派模块220,在深度指派模块220处深度和/或视差值被指派给第一内容和第二内容的每一个。在一个实施例中,深度值可定义从近平面到远平面,第一内容和第二内容之间就其相对于彼此的位置而言的关 系。在另一实施例中,深度值可以是指派给任何被指派深度值的内容的默认值。在又一实施例中,用户可选择指派给第一内容和第二内容的深度值。在一个或多个实施例中,深度值平衡了指派给每个内容的人工视差。 
接下来,第一内容和第二内容以及所指派的深度值被转发到合成模块230,在合成模块230处第一内容和第二内容被合成以生成3D可显示内容。如上所述,第一内容和第二内容根据其深度值被合成以创建3D可显示内容。在一个实施例中,合成模块230可具有如下能力:即,创建若干类型的3D可显示内容,以容适不同类型的3D显示器,以便其可与任何可用的3D显示器一起使用并兼容。在一个实施例中,合成模块230可被配置为创建与在安装和配置信号处理单元200时连接到该单元的显示器兼容的3D内容。在另一实施例中,合成模块可接收输入以确定应当生成并将与显示器兼容的3D内容的类型。在一个实施例中,3D可显示合成内容被生成为包括处于与其被接收时相同的分辨率的第一内容和第二内容。 
3D可显示内容接下来被转发到显示器以被显示给用户。如上所述,显示设备可通过显示接口模块250与合成模块230通信。例如,在一个实施例中,显示接口模块250接收所生成的3D内容并且使3D内容为在3D显示设备260处显示作好准备。在另一实施例中,显示器可具有针对被显示而配置内容的能力。在一个实施例中,3D显示器被配置用于基于对第一内容和第二内容之一的选择而显示合成内容,其中第一内容和第二内容中被选择的那一个被显示成焦点对准,而第一内容和第二内容中的另一个被同时显示为焦点未对准。该选择可由用户选择聚焦在第一内容和第二内容之一上来执行。例如,在一些实施例中,当用户选择聚焦在哪个内容上时,该内容在用户感觉起来将是焦点对准的,而另一内容将被用户感觉为重像和/或焦点未对准的。在这种实施例中,用户的选择性聚焦区分了第一内容和第二内容,使得对于用户来说,第一内容和第二内容之一被显示成焦点对准的,而另一内容将看起来并被显示为焦点未对准和/或重像。在另一实施例中,可以采用其他方法来选择哪个内容被显示成焦点对准的。 
参考图4,其中示出了可用于实现根据本发明若干实施例描述的任何方法、装置和/或模块的装置或系统400。装置或系统400的一个或多个组件可用于实现以上提及的任何系统或设备,例如任何以上提及的显示器、 信号处理单元、模块、输入设备等等。然而,对装置或系统400或其任何部分的使用当然不是必须的。 
作为示例,装置或系统400可包括但不是必须包括中央处理单元(CPU)402、图形处理单元(GPU)404、随机访问存储器(RAM)408以及大容量存储单元410,例如盘驱动器或其他类型的存储器。装置或系统400可耦合到任何这里描述的其他组件,例如显示器412,或者与之相集成。装置或系统400包括基于处理器的装置或系统的示例。CPU 402和/或GPU 404可用于执行或辅助执行这里描述的方法和技术的步骤,并且各种程序内容、图像等等可在显示器412上被渲染。 
大容量存储单元410可包括或包含任何类型的计算机可读存储装置或一个或多个记录介质。计算机可读存储装置或一个或多个记录介质可固定在大容量存储单元410中,或者大容量存储单元410可以可选地包括可移除存储介质414,例如数字视频盘(DVD)、蓝光盘、致密盘(CD)、USB存储设备、软盘或其他介质。作为示例,大容量存储单元410可包括盘驱动器、硬盘驱动器、闪存设备、USB存储设备、蓝光盘驱动器、DVD驱动器、CD驱动器、软盘驱动器等等。大容量存储单元410或可移除存储介质414可用于存储实现这里描述的方法和技术的程序代码或宏。 
从而,可移除存储介质414可以可选地与大容量存储单元410一起使用,其可用于存储实现这里描述的方法和技术的程序代码。然而,任何存储设备,例如RAM 408或大容量存储单元410,都可用于存储这种程序代码。例如,任何种存储设备都可用作有形计算机可读存储介质,用于存储或体现计算机程序,该计算机程序用于使得控制台、系统、计算机或其他基于处理器的系统运行或执行任何这里描述的方法、代码和/或技术的步骤。另外,任何存储设备,例如RAM 408或大容量存储单元410可用于存储任何需要的(一个或多个)数据库。 
在一些实施例中,以上所述的实施例、方法、方案和/或技术中的一个或多个可用基于处理器的系统可执行的计算机程序来实现。作为示例,这种基于处理器的系统可包括基于处理器的系统400,或者计算机、娱乐系统、游戏控制台、图形工作站等等。这种计算机程序可用于执行上述方法和/或技术的各种步骤和/或特征。即,该计算机程序可适于使得或配置基 于处理器的系统执行和实现以上所述的功能。例如,这种计算机程序可用于实现上述步骤或技术的任何实施例,用于通过生成3D可显示内容来使得用户能够在单个显示器上观看多个内容。作为另一示例,这种计算机程序可用于实现使用上述实施例、方法、方案和/或技术中的任何一个或多个的任何类型的工具或类似的实用程序。在一些实施例中,计算机程序内的程序代码宏、模块、循环、子例程等等可用于执行上述方法和/或技术的各种步骤和/或特征。在一些实施例中,计算机程序可被存储或体现在计算机可读存储装置或一个或多个记录介质上,例如任何这里描述的计算机可读存储装置或一个或多个记录介质。 
在一些实施例中,基于处理器的装置可用于运行或执行任何上述步骤、方法和/或技术。 
本说明书中描述的功能单元中的许多被标记为模块,以便更特别地强调其实现独立性。例如,模块可实现为硬件电路,其中包括定制的VLSI电路或门阵列、现成的半导体(例如逻辑芯片)、晶体管或者其他分立组件。模块也可用可编程硬件器件来实现,例如现场可编程门阵列、可编程阵列逻辑、可编程逻辑器件等等。 
模块也可用供各种类型的处理器执行的软件来实现。所标识的可执行代码的模块例如可包括可例如被组织为对象、过程或功能的计算机指令的一个或多个物理或逻辑块。然而,所标识的模块的可执行文件不需要物理上位于一起,而是可包括存储在不同位置的不同指令,这些指令当在逻辑上结合在一起时构成该模块并且实现为该模块陈述的目的。 
实际上,可执行代码的模块可以是单个指令,或者许多指令,并且甚至可分布在若干个不同的代码段上、不同的程序之间并且跨若干个存储器设备。类似地,操作数据在这里可被标识和图示在模块内,并且可以任何适当的形式来体现并组织在任何适当类型的数据结构内。操作数据可被聚集为单个数据集合,或者可分布在不同的位置上,包括分布在不同的存储设备上,并且可至少部分仅作为电子信号存在于系统或网络上。 
虽然已经利用其具体实施例、示例和应用描述了这里公开的发明,但在不脱离权利要求记载的本发明的范围的情况下,本领域的技术人员可对其进行许多修改和变化。 

Claims (15)

1.一种用于显示内容的方法,包括:
接收第一内容和第二内容;
向所述第一内容施加第一深度;
向所述第二内容施加第二深度;以及
合成所述第一内容和所述第二内容以生成3维(3D)合成内容,其中所述合成内容被配置为在3D显示器上显示;并且
其中,所述合成内容被配置为以所述第一内容和所述第二内容被同时显示的方式被重放,并且所述合成内容还被配置为以如下方式被重放:基于对所述第一内容和所述第二内容之一的选择,所述第一内容和所述第二内容之一被显示为看起来是焦点对准的并且所述第一内容和所述第二内容中的另一个被显示为看起来是焦点未对准的,
该方法还包括基于对所述第一内容和所述第二内容之一的选择而显示所述合成内容,其中,所述第一内容和所述第二内容中被选择的那个被显示为看起来是焦点对准的,并且所述第一内容和所述第二内容中的另一个被同时显示为看起来是焦点未对准的。
2.如权利要求1所述的方法,其中,所述第一内容和所述第二内容中的一者或两者包括2维(2D)内容。
3.如权利要求1所述的方法,其中,所述第一内容和所述第二内容中的一者或两者包括3D内容。
4.如权利要求1所述的方法,还包括将所述合成内容发送到能够显示3D内容的显示器。
5.如权利要求1所述的方法,其中,所述第一内容和所述第二内容包括流式视频、数字图像或菜单信息之一。
6.如权利要求1所述的方法,还包括:
接收第三内容;
向所述第三内容施加第三深度;
其中,所述合成还包括将所述第三内容与所述第一内容和所述第二内容相合成以形成所述合成内容。
7.如权利要求1所述的方法,其中,所述合成包括生成所述合成内容以使其包括处于与被接收到时相同的分辨率的所述第一内容和所述第二内容。
8.如权利要求1所述的方法,其中,所述合成包括基于阿尔法值对所述第一内容和所述第二内容进行阿尔法混合,其中阿尔法值表示在生成的3D合成内容内第一内容和第二内容的每一个的透明度。
9.如权利要求8所述的方法,其中,所述阿尔法值基于用户选择而被改变。
10.一种用于显示内容的装置,包括:
内容检测模块,被配置为接收第一内容和第二内容;
深度指派模块,被配置为向所述第一内容和所述第二内容的每一个施加深度;
合成器模块,被配置为合成所述第一内容和所述第二内容以生成3维(3D)合成内容,其中所述合成内容被配置为在3D显示器上显示,使得所述第一内容和所述第二内容被同时显示,并且所述合成内容还被配置为以如下方式被重放:基于对所述第一内容和所述第二内容之一的选择,所述第一内容和所述第二内容之一被显示为看起来是焦点对准的并且所述第一内容和所述第二内容中的另一个被显示为看起来是焦点未对准的;以及
3D显示模块,该3D显示模块被配置为基于对所述第一内容和所述第二内容之一的选择而显示所述3D内容,其中,所述第一内容和所述第二内容中被选择的那个被显示为看起来是焦点对准的,并且所述第一内容和所述第二内容中的另一个被同时显示为看起来是焦点未对准的。
11.如权利要求10所述的装置,还包括接口模块,该接口模块被配置为将所述合成内容发送到3D显示器以重放所述合成内容。
12.如权利要求10所述的装置,其中,所述合成器模块包括基于阿尔法值对所述第一内容和所述第二内容进行阿尔法混合的阿尔法混合器,其中阿尔法值表示在生成的3D合成内容内第一内容和第二内容的每一个的透明度。
13.如权利要求10所述的装置,还包括被配置为接收用户输入的用户接口模块。
14.如权利要求13所述的装置,其中,所述用户输入包括内容选择、深度选择和阿尔法值选择中的一个或多个。
15.一种用于显示内容的系统,包括:
用于接收第一内容和第二内容的装置;
用于向所述第一内容施加第一深度的装置;
用于向所述第二内容施加第二深度的装置;
用于合成所述第一内容和所述第二内容以生成3维(3D)合成内容的装置,其中所述3D合成内容可在3D显示器上被重放以同时显示所述第一内容和所述第二内容,并且基于观看者选择,所述第一内容和所述第二内容之一是焦点对准的,而所述第一内容和所述第二内容中的另一个是焦点未对准的;以及
用于基于对所述第一内容和所述第二内容之一的选择而显示所述3D内容的装置,其中,所述第一内容和所述第二内容中被选择的那个被显示为看起来是焦点对准的,并且所述第一内容和所述第二内容中的另一个被同时显示为看起来是焦点未对准的。
CN201080044155.5A 2009-10-13 2010-10-11 3d多视点显示的方法和装置 Expired - Fee Related CN102577400B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US25105209P 2009-10-13 2009-10-13
US61/251,052 2009-10-13
US12/873,077 US20110085024A1 (en) 2009-10-13 2010-08-31 3d multiview display
US12/873,077 2010-08-31
PCT/US2010/052141 WO2011046856A2 (en) 2009-10-13 2010-10-11 3d multiview display

Publications (2)

Publication Number Publication Date
CN102577400A CN102577400A (zh) 2012-07-11
CN102577400B true CN102577400B (zh) 2014-12-24

Family

ID=43854526

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201080044155.5A Expired - Fee Related CN102577400B (zh) 2009-10-13 2010-10-11 3d多视点显示的方法和装置

Country Status (7)

Country Link
US (1) US20110085024A1 (zh)
EP (1) EP2471269A2 (zh)
JP (1) JP5397716B2 (zh)
KR (1) KR101376368B1 (zh)
CN (1) CN102577400B (zh)
CA (1) CA2774966A1 (zh)
WO (1) WO2011046856A2 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130021438A1 (en) * 2010-03-31 2013-01-24 Design & Test Technology, Inc. 3d video processing unit
US8980807B2 (en) 2010-05-21 2015-03-17 Cargill, Incorporated Blown and stripped blend of soybean oil and corn stillage oil
JP5017445B2 (ja) * 2010-11-26 2012-09-05 株式会社東芝 視差画像変換装置
JP6023087B2 (ja) * 2011-02-04 2016-11-09 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 画像を記録する方法、画像から3d情報を得る方法、カメラシステム
WO2012166414A1 (en) 2011-05-27 2012-12-06 Cargill, Incorporated Bio-based binder systems
CN103197980B (zh) * 2012-01-10 2016-03-30 华为终端有限公司 一种呈现增强现实技术内容的方法、装置及系统
US9268875B2 (en) 2012-07-13 2016-02-23 Microsoft Technology Licensing, Llc Extensible content focus mode
KR20220040054A (ko) * 2020-09-23 2022-03-30 삼성전자주식회사 전자장치 및 그 제어방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1392724A (zh) * 2001-06-19 2003-01-22 卡西欧计算机株式会社 图像拾取装置和方法、记录图像拾取方法程序的存储介质
JP2004279743A (ja) * 2003-03-17 2004-10-07 Nippon Telegr & Teleph Corp <Ntt> 三次元表示装置
US20080088644A1 (en) * 2006-10-12 2008-04-17 Apple Computer, Inc. Stereo windowing system with translucent window support

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5510831A (en) * 1994-02-10 1996-04-23 Vision Iii Imaging, Inc. Autostereoscopic imaging apparatus and method using suit scanning of parallax images
JPH08106548A (ja) * 1994-10-07 1996-04-23 Sanyo Electric Co Ltd 3次元画像情報処理装置
US5619256A (en) * 1995-05-26 1997-04-08 Lucent Technologies Inc. Digital 3D/stereoscopic video compression technique utilizing disparity and motion compensated predictions
JP2000354257A (ja) * 1999-06-10 2000-12-19 Sony Corp 画像処理装置、画像処理方法、およびプログラム提供媒体
JP2002112212A (ja) * 2000-09-29 2002-04-12 Matsushita Electric Ind Co Ltd 画像表示装置及び画像表示方法
KR100397511B1 (ko) * 2001-11-21 2003-09-13 한국전자통신연구원 양안식/다시점 3차원 동영상 처리 시스템 및 그 방법
JP2004274125A (ja) * 2003-03-05 2004-09-30 Sony Corp 画像処理装置および方法
KR100603601B1 (ko) * 2004-11-08 2006-07-24 한국전자통신연구원 다시점 콘텐츠 생성 장치 및 그 방법
US20060139448A1 (en) * 2004-12-29 2006-06-29 Samsung Electronics Co., Ltd. 3D displays with flexible switching capability of 2D/3D viewing modes
US7563228B2 (en) * 2005-01-24 2009-07-21 Siemens Medical Solutions Usa, Inc. Stereoscopic three or four dimensional ultrasound imaging
KR101195929B1 (ko) * 2005-05-20 2012-10-30 삼성전자주식회사 멀티 채널 영상 시스템
KR100667823B1 (ko) * 2005-10-13 2007-01-11 삼성전자주식회사 멀티 채널 영상 시스템
KR20090081190A (ko) * 2008-01-23 2009-07-28 엘지전자 주식회사 휴대용 단말기
TWI462585B (zh) * 2008-10-27 2014-11-21 Wistron Corp 具有立體顯示功能的子母畫面顯示裝置及子母畫面顯示方法
TWI418886B (zh) * 2008-11-06 2013-12-11 Acer Inc 畫素結構、立體影像/多可視區之液晶顯示裝置及其製造方法
US8270807B2 (en) * 2009-07-13 2012-09-18 Panasonic Corporation Recording medium, playback device, and integrated circuit

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1392724A (zh) * 2001-06-19 2003-01-22 卡西欧计算机株式会社 图像拾取装置和方法、记录图像拾取方法程序的存储介质
JP2004279743A (ja) * 2003-03-17 2004-10-07 Nippon Telegr & Teleph Corp <Ntt> 三次元表示装置
US20080088644A1 (en) * 2006-10-12 2008-04-17 Apple Computer, Inc. Stereo windowing system with translucent window support

Also Published As

Publication number Publication date
WO2011046856A3 (en) 2011-08-18
US20110085024A1 (en) 2011-04-14
CN102577400A (zh) 2012-07-11
KR20120073253A (ko) 2012-07-04
CA2774966A1 (en) 2011-04-21
EP2471269A2 (en) 2012-07-04
KR101376368B1 (ko) 2014-03-20
JP2013506381A (ja) 2013-02-21
JP5397716B2 (ja) 2014-01-22
WO2011046856A2 (en) 2011-04-21

Similar Documents

Publication Publication Date Title
CN102577400B (zh) 3d多视点显示的方法和装置
KR101629865B1 (ko) 3d gui에서 2d 그래픽 확장
US9143770B2 (en) Application programming interface supporting mixed two and three dimensional displays
KR101512988B1 (ko) 그래픽 오브젝트를 중첩하기 위한 이미지 프로세서
KR102028696B1 (ko) 고 해상도 컨텐츠를 처리하는 컨텐츠 처리 장치 및 그 방법
JP2020099045A (ja) 3dビデオ上に3dグラフィックスをオーバレイするための方法及び装置
US8606076B2 (en) 3D video reproduction matching the output format to the 3D processing ability of a display
US8537201B2 (en) Combining video data streams of differing dimensionality for concurrent display
JP2012516069A (ja) 3dビデオ及び3dオーバレイをビデオインタフェース上で送信し、合成する方法及びシステム
JP2015187797A (ja) 画像データ生成装置および画像データ再生装置
KR20110129903A (ko) 3d 시청자 메타데이터의 전송
MX2012000476A (es) Metodo de procesamiento de señal y aparato para este que utiliza tamaño de pantalla de dispositivo de presentacion.
JP2011508557A5 (zh)
WO2012099033A1 (ja) 番組情報表示装置、テレビジョン受像機、番組情報表示方法、番組情報表示プログラム、記憶媒体
AU2012342093A1 (en) Interlaced 3D video
CN113383540B (zh) 可互操作的3d图像内容处理
JP2012213070A (ja) 映像信号生成装置、映像信号生成方法及び制御プログラム
Altinay et al. Stereoscopic output and novel interaction concepts for the IAVAS I3D Player
Altinay et al. Boosting the Level of Immersion: Integrating Stereoscopic Output into Interactive Audiovisual Applications

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20141224

Termination date: 20151011

EXPY Termination of patent right or utility model