CN102811359A - 3d图像转换设备和调整3d图像转换设备的深度信息的方法 - Google Patents

3d图像转换设备和调整3d图像转换设备的深度信息的方法 Download PDF

Info

Publication number
CN102811359A
CN102811359A CN2012101717313A CN201210171731A CN102811359A CN 102811359 A CN102811359 A CN 102811359A CN 2012101717313 A CN2012101717313 A CN 2012101717313A CN 201210171731 A CN201210171731 A CN 201210171731A CN 102811359 A CN102811359 A CN 102811359A
Authority
CN
China
Prior art keywords
depth information
input picture
parallax
adjusting
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012101717313A
Other languages
English (en)
Inventor
权五允
许惠贤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN102811359A publication Critical patent/CN102811359A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178Metadata, e.g. disparity information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/128Adjusting depth or disparity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/144Processing image signals for flicker reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074Stereoscopic image analysis
    • H04N2013/0081Depth or disparity estimation from stereoscopic image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Processing Or Creating Images (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

提供了一种3D图像转换设备和调整3D图像转换设备的深度信息的方法。三维(3D)图像转换设备包括:深度信息产生器,针对输入图像产生深度信息;对象检测器,基于产生的深度信息在与输入图像相应的左眼图像和右眼图像中检测具有超过预设范围的视差的对象;深度信息调整器,通过将检测到的对象的视差调整到预设范围内来调整对象的深度信息;和渲染单元,根据调整的深度信息来渲染输入图像。由此,在将2D图像转换成3D图像的情况下,可最小化观看者的疲劳。

Description

3D图像转换设备和调整3D图像转换设备的深度信息的方法
技术领域
与示例性实施例一致的设备和方法涉及一种3D图像转换设备和调整3D图像转换设备的深度信息的方法及其计算机可读记录介质,更具体地讲,涉及能够将2D图像转换成3D图像的3D图像转换设备、调整所述3D图像转换设备的深度信息的方法及其计算机可读记录介质。
背景技术
如果在将2D图像转换成3D图像的同时为了增强3D效果应用了过度的深度值,则出现如下问题:过度的负或正的视差增加观看者的眼睛疲劳,并给用户观看带来不便。
发明内容
因此,一个或多个示例性实施例提供了一种能够最小化眼睛疲劳并改善3D图像的观看体验的3D图像转换设备、调整所述3D图像转换设备的深度信息的方法及其计算机可读记录介质。
可通过提供一种三维(3D)图像转换设备来实现前述和/或其他方面,所述3D图像转换设备包括:深度信息产生器,针对输入图像产生深度信息;对象检测器,基于产生的深度信息在与输入图像相应的左眼图像和右眼图像中检测具有超过预设范围的视差的对象;深度信息调整器,通过将检测到的对象的视差调整到预设范围内来调整对象的深度信息;和渲染单元,根据调整的对象的深度信息来渲染输入图像。
所述设备还可包括:用户界面(UI)产生器,产生指示检测到的对象的第一UI和设置检测到的对象的视差调整范围的第二UI。
所述设备还可包括显示单元和用户输入单元,其中,深度信息调整器根据基于通过第二UI输入的用户选择的特定视差调整范围来调整对象的视差。
深度信息调整器可分析关于输入图像的元数据,以基于分析的输入图像元数据来将产生的深度信息调整在预定范围内。
所述元数据可包括与输入图像相应的内容的类型信息和观看年龄信息中的至少一个。
可通过提供一种三维(3D)图像转换设备来实现另一方面,所述3D图像转换设备包括:深度信息产生器,针对包括多个帧的输入图像产生深度信息;深度信息差计算器,基于产生的深度信息计算所述多个帧之中的第一帧中的第一对象和第二帧中的第二对象之间的深度信息差;深度信息调整器,如果由深度信息差计算器计算的结果超过预设临界值,则将关于第二对象的深度信息调整到预设范围内;和渲染单元,根据调整的深度信息来渲染输入图像。
第一对象和第二对象被用户认为是所述多个帧内的同一对象。
所述设备还可包括:用户界面(UI)产生器,产生第三UI,所述第三UI显示由深度信息差计算器计算的第一对象和第二对象之间的深度信息差。
第三UI包括第四UI,所述第四UI针对第二对象设置深度信息调整范围。
所述设备还可包括显示单元和用户输入单元,其中,深度信息调整器根据基于通过第二用户界面输入的用户选择的特定视差调整范围来调整第二对象的深度信息。
可通过提供一种三维(3D)图像转换设备的深度信息调整方法来实现另一方面,所述方法包括:针对输入图像产生深度信息;基于产生的深度信息在与输入图像相应的左眼图像和右眼图像中检测具有超长预设范围的视差的对象;通过将检测到的对象的视差调整到预设范围内来调整对象的深度信息;和根据调整的深度信息来渲染输入图像。
所述方法还可包括:产生和显示用于指示检测的对象的第一UI以及用于设置检测的对象的视差调整范围的第二UI。
所述方法还可包括:接收基于通过第二UI的用户选择的特定视差调整范围,其中,调整深度信息的步骤包括:根据接收的特定视差调整范围来调整对象的视差。
调整深度信息的步骤还可包括:使用关于输入图像的元数据以将产生的深度信息调整在预定范围内。
所述元数据可包括与输入图像相应的内容的类型信息和观看年龄信息中的至少一个。
可通过提供一种三维(3D)图像转换设备的深度信息调整方法来实现另一方面,所述方法包括:针对包括多个帧的输入图像产生深度信息;基于产生的深度信息计算所述多个帧之中的第一帧中的第一对象和第二帧中的第二对象之间的深度信息差;如果结果超过预设临界值,则将关于第二对象的深度信息调整到预设范围内;和根据调整的深度信息来渲染输入图像。
第一对象和第二对象被用户认为是所述多个帧内的同一对象。
所述方法还可包括:产生和显示第三UI,所述第三UI显示第一对象和第二对象之间的深度信息差。
第三UI包括第四UI,所述第四UI针对第二对象设置深度信息调整范围。
所述方法还可包括:接收基于通过第四UI的用户选择的特定深度信息调整范围,其中,调整深度信息的步骤根据接收的特定深度信息调整范围调整第二对象的深度信息。
附图说明
从下面结合附图对示例性实施例的描述,以上和/或其他方面将变得清楚,并更容易理解,其中:
图1是示出根据示例性实施例的用于3D图像转换的设备的控制框图;
图2是示出根据示例性实施例的用于3D图像转换的设备的控制框图;
图3示出负视差和正视差;
图4示出图2的3D图像转换设备中的调整深度信息的方法的示例;
图5是图1的3D图像转换设备中的深度信息调整方法的流程图;
图6是图2的3D图像转换设备中的深度信息调整方法的流程图。
具体实施方式
以下,示例性实施例将参照附图被详细描述,以被本领域具有普通知识的人员容易地实现。示例性实施例可被以各种形式实现,而不限于这里阐述的示例性实施例。为了清晰将省略对公知部分的描述,相同的标号始终表示相同的部件。
图1和图2是根据示例性实施例的3D图像转换设备的控制框图。
3D图像转换设备100、200是能够从外部源提供设备(未示出)接收2D图像或单目图像并且能将接收的2D图像转换成3D图像或双目图像的电子设备,例如包括显示设备、尤其是通用计算机(PC)、电视机等。根据示例性实施例的3D图像转换设备100、200针对接收的输入图像使用预定深度估计算法或原理来产生深度信息,通过反映用户的选择而调整产生的深度信息,并基于调整的深度信息将输入图像转换成3D图像。在将从源提供设备(未示出)接收的2D图像转换成3D图像之后,3D图像转换设备100、200可立体地显示转换的3D图像,或者将转换的3D图像发送到能够再现3D图像的外部内容再现设备(未示出,例如,电视机(TV)、个人计算机(PC)、智能电话、智能板、便携式多媒体播放器(PMP)、MP3播放器等)。
在根据示例性实施例的网络中,对网络的通信方法(例如,有线和/或无线通信方法等)没有限制,只要该方法能用于发送2D图像和/或3D图像的数据通信即可,数据通信包括任何已知的通信方法。
参照图1,3D图像转换设备100包括第一接收器110、第一深度信息产生器120、对象检测器130、第一深度信息调整器140、第一渲染单元150、第一显示单元160、第一用户界面(UI)产生器170和第一用户输入单元180。
参照图2,3D图像转换设备200包括第二接收器210、第二深度信息产生器220、深度信息差计算器230、第二深度信息调整器240、第二渲染单元250、第二显示单元260、第二UI产生器270和第二用户输入单元280。
第一接收器110和第二接收器210可从外部源提供设备(未示出)接收输入图像。输入图像包括2D图像或单目图像。3D图像是基于观看者的双目视差,3D图像包括多个左眼帧和多个右眼帧。在多个左眼帧和多个右眼帧中,一对左眼帧和右眼帧中的每一帧可从输入图像中的多个帧的至少一个相应帧被转换。
第一接收器110和第二接收器210可通过预定网络(未示出)从外部源提供设备(未示出)接收2D图像。例如,作为网络服务器的源提供设备存储2D图像,并应3D图像转换设备100和200的请求将2D图像发送到3D图像转换设备100和200。
根据另一示例性实施例,第一接收器110和第二接收器210可不通过网络而通过另一数据传送方式来从源提供设备(未示出)接收2D图像。例如,源提供设备(未示出)可以是设置有用于存储2D图像的诸如硬盘、闪存等的存储装置的设备,所述设备可本地连接到3D图像转换设备100和200,并应3D图像转换设备100和200的请求将2D图像发送到3D图像转换设备100和200。在这种情况下,只要2D图像的数据被发送,对源提供设备(未示出)与第一接收器110和第二接收器210之间的本地连接方法没有限制,本地连接方法可例如包括通用串行总线(USB)等。
第一深度信息产生器120和第二深度信息产生器220产生关于包含多个帧的输入图像的深度信息。根据示例性实施例,第一深度信息产生器120和第二深度信息产生器220可基于一般公知的深度估计算法来产生深度信息。根据另一示例性实施例,第一深度信息产生器120和第二深度信息产生器220可从外部源接收深度设置信息,并基于深度设置信息来产生关于输入图像的深度信息。此时,深度设置信息可包括关于包含多个设置信息的输入图像的帧选择信息、对象选择信息、深度值范围信息中的至少一个。
对象检测器130可基于由第一深度信息产生器120产生的深度信息来在与输入图像相应的左眼图像和右眼图像内检测具有超出预设范围的视差的对象。
第一深度信息调整器140将由对象检测器130检测到的对象的视差调整到在预设范围内,从而调整了对象的深度信息。将参照图3更详细地描述对象检测器130和第一深度信息调整器140。
深度信息差计算器230基于由第二深度信息产生器220产生的深度信息计算多个帧之中的第一帧中的第一对象的深度信息与第二帧中的第二对象的深度信息之差。
如果来自深度信息差计算器230的结果超过预设临界值,则第二深度信息调整器240将第二帧中的第二对象的深度信息调整到在预设范围内。在这点上,将参照图4进行详细描述。
第一渲染单元150基于由第一深度信息调整器140调整的深度信息来渲染输入图像,第二渲染单元250基于由第二深度信息调整器240调整的深度信息来渲染输入图像,从而产生3D图像。
第一显示单元160和第二显示单元260分别显示由稍后将描述的第一UI产生器170和第二UI产生器270产生的用户界面。另外,正被3D图像转换器200转换的输入图像可与UI一起被显示。此外,完全转换的3D图像可被显示。可通过各种显示类型(例如,液晶、等离子、发光二极管、有机发光二极管、表面传导电子发射器、碳纳米管、纳米晶体等)来实现第一显示单元160和第二显示单元260,而没有任何限制。
第一UI产生器170可产生用于指示由对象检测器130检测到的对象的第一UI和用于设置检测到的对象的视差调整范围的第二UI。
第二UI产生器270可产生第三UI,所述第三UI显示由深度信息差计算器230计算的第一帧中的第一对象的深度信息和第二帧中的第二对象的深度信息之间的深度信息差,第二UI产生器270还可产生第四UI,所述第四UI用于设置关于第二帧的第二对象的深度信息调整范围。
第一用户输入单元180和第二用户输入单元280是用于接收用户输入的用户界面,该用户界面接收与3D图像转换设备100和200的功能或操作相关的用户选择。第一用户输入单元180和第二用户输入单元280可设置有至少一个键按钮,并可通过在3D图像转换设备100和200中设置的控制面板或触摸面板被实现。另外,第一用户输入单元180和第二用户输入单元280可以以通过有线或无线连接到3D图像转换设备100和200的遥控器、键盘、鼠标、指示器等形式被实现。
图3示出负视差和正视差,将用负视差和正视差描述3D图像转换设备100的深度信息调整方法。
如图3所示,针对屏幕,正视差A看起来好像输入图像的对象在屏幕之后被聚焦,零视差B看起来好像对象在屏幕上被聚焦,而负视差C看起来好像对象从屏幕弹出。如果输入图像的对象具有合适的正视差或负视差,则观看者可满意地感受3D图像的3D效果。然而,如果对象具有超出预设范围的正视差或负视差,则过度的3D效果可引起观看者或用户的眼睛疲劳,严重情况可引起呕吐和头晕。
另外,在对象具有过度的正视差或负视差的情况下,图像可看起来好像从屏幕被部分地割掉。在这种情况下,必须调整对象的正视差或负视差。
因此,对象检测器130基于由深度信息产生器120产生的深度信息,在与输入图像相应的左眼和右眼图像内检测具有超过预设范围的视差的对象。此时,第一UI产生器170产生用于指示由对象检测器130检测到的对象的第一UI和用于设置检测到的对象的视差调整范围的第二UI。在第一显示单元160上显示产生的第一UI和第二UI。第一UI可包括第二UI。第二UI可显示用于对象的合适的视差调整范围的指南。参照显示的指南,用户可选择合适的视差调整范围。通过第二UI,利用第一用户输入单元180输入关于检测到的对象的视差调整范围的用户选择。第一深度信息调整器140基于根据用户选择的视差调整范围来调整对象的视差,从而调整了由第一深度信息产生器120产生的深度信息。第一渲染单元150基于由第一深度信息调整器140调整的深度信息来渲染输入图像,从而产生3D图像。
根据另一示例性实施例,第一深度信息调整器140可基于关于输入图像的元数据来将由第一深度信息产生器120产生的深度信息调整到预定范围内。所述元数据可包含从与输入图像相应的内容的类型信息和观看年龄信息中选择的至少一种信息。元数据可被嵌入到输入图像中,或者从单独的外部源提供设备(未示出)接收所述元数据。内容的类型信息是指示与输入图像相应的内容属于动作、运动和戏剧中的至少一个的信息。根据内容的类型,由第一深度信息产生器120产生的深度信息被调整,以产生与内容的类型相应的深度信息,从而具有给观看者与内容的类型相应的3D效果的效果。另外,内容的观看年龄信息包含关于输入图像的合适的观看年龄信息。即,从婴儿到成年观看者在双目视差方面存在物理差异。另外,如果婴儿或儿童观看具有过度立体效果的3D图像,他或她可能比成年人更感觉眼睛疲劳。因此,根据内容的观看年龄信息(即,针对观看者的观看年龄提供内容),由第一深度信息产生器120产生的深度信息被调整,以产生于内容观看年龄相应的深度信息,从而具有给观看者以与内容的观看年龄相应的3D效果的效果。
图4示出图2的3D图像转换设备200中的调整深度信息的方法的示例。
如果在先前帧与后续帧之间存在大的深度信息的差,则观看者可能感觉疲劳,并因此可感觉诸如头晕和呕吐的伴随症状。根据本示例性实施例,如果第二深度信息产生器220产生关于包含多个帧的输入图像的深度信息,则基于产生的深度信息来计算第一帧中的第一对象的深度信息和第二帧中的第二对象的深度信息之间的深度信息差。如果计算的差超过预设临界值,则将第二对象的深度信息调制到预设范围内,从而最小化用户的疲劳。此时,可通过接收用户选择调整第二对象的深度信息。
参照图4,第一帧包括第一对象a-1、第二对象b-1和第三对象c-1。第二帧包括第四对象a-2、第五对象b-2和第六对象c-2。第三帧包括第七对象a-3、第八对象b-3和第九对象c-3。第四帧包括第十对象a-4、第十一对象b-4和第十二对象c-4。这里,第一对象a-1、第四对象a-2、第七对象a-3和第十对象a-4被观看者认为是多个帧内的一个对象。另外,第二对象b-1、第五对象b-2、第八对象b-3和第十一对象b-4被观看者认为是多个帧内的一个对象。此外,第三对象c-1、第六对象c-2、第九对象c-3和第十二对象c-4被观看者认为是多个帧内的一个对象。
在图4的曲线图中,Y轴指示深度值的水平,X轴指示帧的变化。因此,根据Y轴的高度来确定第一对象至第十二对象的每个深度水平,Y轴的高度可被称为由第二深度信息产生器220产生的值。
深度信息差计算器230计算第一帧中的第一对象a-1和第二帧中的第四对象a-2之间的深度信息差Da-1、第二帧中的第四对象a-2和第三帧中的第七对象a-3之间的深度信息差Da-2、第三帧中的第七对象a-3和第四帧中的第十对象a-4之间的深度信息差Da-3。
同样地,深度信息差计算器230计算第二对象b-1和第五对象b-2之间的差Db-1、第五对象b-2和第八对象b-3之间的差Db-2、第八对象b-3和第十一对象b-4之间的差Db-3,并计算第三对象c-1和第六对象c-2之间的差Dc-1、第六对象c-2和第九对象c-3之间的差Dc-2、第九对象c-3和第十二对象c-4之间的差Dc-3。
结果,确定差Da-1、Da-2、Db-2和Db-3超过预设临界值,而其他差Da-3、Db-1、Dc-1、Dc-2和Dc-3没有超过预设临界值。根据深度信息差计算器230的结果,产生和显示用于示出超过预设临界值的差Da-1、Da-2、Db-2和Db-3的第三UI,并且产生和显示用于设置第四对象a-2、第七对象a-3、第八对象b-3和第十一对象b-4的深度信息调整范围的第四UI,以调整显示的差Da-1、Da-2、Db-2和Db-3。因此,如果通过第四UI利用第二用户输入单元280输入了基于用户选择的深度信息调整范围,则第二深度信息调整器240根据基于用户选择的深度信息调整范围来调整第四对象a-2、第七对象a-3、第八对象b-3和第十一对象b-4的深度信息。此时,第四UI还可显示提供深度信息调整范围的指南的信息。因此,用户可利用显示的指南来选择和输入深度信息调整范围。
通过利用调整的深度信息,第二渲染单元250渲染输入图像,并从而产生3D图像。
图5是根据图1的示例性实施例的3D图像转换设备中的深度信息调整方法的流程图。
如这里所显示的,如果从外部源提供设备(未示出)接收到输入图像,则3D图像转换设备产生关于接收到的输入图像的深度信息(S11)。基于产生的深度信息,在与输入图像相应的左眼图像和右眼图像中检测具有超过预设范围的视差的对象(S12),并产生和显示用于设置检测到的对象的视差调整范围的第二UI(S13)。如果通过第二UI输入了基于用户选择的特定视差调整范围(S14),则基于特定视差调整范围调整对象的视差,从而调整对象的深度信息(S15)。根据调整的深度信息渲染输入图像(S16),从而产生与输入图像相应的3D图像。另外,可在3D图像转换设备100上显示产生的3D图像。此外,可将产生的3D图像发送到外部内容再现设备(未示出)。
图6是根据图2的示例性实施例的3D图像转换设备中的深度信息调整方法的流程图。
如这里所显示的,包括多个帧的输入图像被接收,针对接收的输入图像产生深度信息(S21)。基于产生的深度信息,计算多个帧之中的第一帧中的第一对象的深度信息和第二帧中的第二对象的深度信息之间的深度信息差(S22)。确定深度信息差是否超过预设临界值。产生和显示用于显示计算的第一对象和第二对象之间的深度信息差的第三UI和用于设置深度信息调整范围的第四UI(S23)。如果通过第四UI输入了基于用户选择的特定深度信息调整范围(S24),则基于特定输入深度信息调整范围来调整第二帧中的第二对象的深度信息(S25)。根据调整的深度信息来渲染输入图像(S26),从而产生与输入图像相应的3D图像。另外,可在3D图像转换设备200上显示产生的3D图像。此外,可将产生的3D图像发送到外部内容再现设备(未示出)。
由根据示例性实施例的3D图像转换设备实施的方法可以以各种计算机可执行的程序命令的形式被实现,并可被存储在计算机可读记录介质中。计算机可读记录介质可单独包括程序命令、数据文件、数据结构等,或者呆包括程序命令、数据文件、数据结构等的组合。计算机可读记录介质中记录的程序命令可针对本示例性实施例被专门设计和配置,或者对于计算机软件领域的技术人员而言为公知且可用的。例如,计算机可读记录介质包括:磁介质,例如,硬盘、软盘和磁带;光学介质,例如,压缩盘只读存储器(CD-ROM)和数字通用盘(DVD);磁光介质,例如,可光读盘;和专门配置为存储和执行程序命令的硬件装置,例如,ROM、随机存取存储器(RAM)、闪存等。例如,程序命令不仅包括由编译器产生的机器码,还包括可被计算机使用解释器等执行的高级语言代码。硬件装置可被配置为作为用于实施根据示例性实施例的方法的一个或多个软件模块操作,反之亦然。图1和图2中示出的每个单元(例如,110-180以及210-280)可包括用于执行其操作的硬件处理器。另外,或者可选择的,可提供中央硬件控制处理器(例如,中央处理单元(CPU))等用于控制和执行所述单元的一个或多个操作。
如上所述,提供了能够最小化用户的眼睛疲劳的3D图像转换设备、调整所述3D图像转换设备的深度信息的方法及其计算机可读记录介质。
尽管显示和描述了一些示例性实施例,但本领域技术人员将理解,在不脱离本发明的原理和精神的情况下,可在这些示例性实施例中进行改变,本发明的范围在权利要求及其等同物中被限定。

Claims (20)

1.一种三维3D图像转换设备,包括:
深度信息产生器,针对输入图像产生深度信息;
对象检测器,基于产生的深度信息在与输入图像相应的左眼图像和右眼图像中检测具有超过预设范围的视差的对象;
深度信息调整器,通过将检测到的对象的视差调整到预设范围内来调整对象的深度信息;和
渲染单元,根据调整的对象的深度信息来渲染输入图像。
2.根据权利要求1的设备,还包括:用户界面UI产生器,产生指示检测到的对象的第一UI和设置检测到的对象的视差调整范围的第二UI。
3.根据权利要求2的设备,还包括:
显示单元;和
用户输入单元,
其中,深度信息调整器根据基于通过第二UI输入的用户选择的特定视差调整范围来调整对象的视差。
4.根据权利要求3的设备,其中,深度信息调整器分析关于输入图像的元数据,并基于分析的元数据来将产生的深度信息调整在预定范围内。
5.根据权利要求4的设备,其中,所述元数据包括与输入图像相应的内容的类型信息和观看年龄信息中的至少一个。
6.一种三维3D图像转换设备,包括:
深度信息产生器,针对包括多个帧的输入图像产生深度信息;
深度信息差计算器,基于产生的深度信息计算所述多个帧之中的第一帧中的第一对象的深度信息和第二帧中的第二对象的深度信息之间的深度信息差;
深度信息调整器,如果由深度信息差计算器计算的深度信息差超过预设临界值,则将第二对象的深度信息调整到预设范围内;和
渲染单元,根据调整的深度信息来渲染输入图像。
7.根据权利要求6的设备,其中,第一对象和第二对象被用户认为是所述多个帧内的同一对象。
8.根据权利要求6的设备,还包括:用户界面UI产生器,产生第一UI,所述第一UI显示由深度信息差计算器计算的第一对象的深度信息和第二对象的深度信息之间的深度信息差。
9.根据权利要求8的设备,其中,第一UI包括第二UI,所述第二UI针对第二对象设置深度信息调整范围。
10.根据权利要求9的设备,还包括:
显示单元;和
用户输入单元,
其中,深度信息调整器根据基于通过第二UI输入的用户选择的特定视差调整范围来调整第二对象的深度信息。
11.一种三维3D图像转换设备的深度信息调整方法,所述方法包括:
针对输入图像产生深度信息;
基于产生的深度信息在与输入图像相应的左眼图像和右眼图像中检测具有超过预设范围的视差的对象;
通过将检测到的对象的视差调整到预设范围内来调整对象的深度信息;和
根据调整的对象的深度信息来渲染输入图像。
12.根据权利要求11的方法,还包括:
产生和显示指示检测到的对象的第一用户界面UI;和
产生和显示设置检测到的对象的视差调整范围的第二UI。
13.根据权利要求12的方法,还包括:
接收基于通过第二UI的用户选择的特定视差调整范围,其中,调整深度信息的步骤包括:根据接收的特定视差调整范围来调整对象的视差。
14.根据权利要求13的方法,其中,调整深度信息的步骤还包括:基于关于输入图像的元数据来将产生的深度信息调整在预定范围内。
15.根据权利要求14的方法,其中,所述元数据包括与输入图像相应的内容的类型信息和观看年龄信息中的至少一个。
16.一种三维3D图像转换设备的深度信息调整方法,所述方法包括:
针对包括多个帧的输入图像产生深度信息;
基于产生的深度信息计算所述多个帧之中的第一帧中的第一对象的深度信息和第二帧中的第二对象的深度信息之间的深度信息差;
如果深度信息差超过预设临界值,则将第二对象的深度信息调整到预设范围内;和
根据调整的深度信息来渲染输入图像。
17.根据权利要求16的方法,其中,第一对象和第二对象被用户认为是所述多个帧内的同一对象。
18.根据权利要求16的方法,还包括:产生和显示第一用户界面UI,所述第一UI显示第一对象的深度信息和第二对象的深度信息之间的深度信息差。
19.根据权利要求18的方法,其中,第一UI包括第二UI,所述第二UI针对第二对象设置深度信息调整范围。
20.根据权利要求19的方法,还包括:接收基于通过第二UI的用户选择的特定深度信息调整范围,其中,
调整深度信息的步骤根据接收的特定深度信息调整范围调整第二对象的深度信息。
CN2012101717313A 2011-06-01 2012-05-29 3d图像转换设备和调整3d图像转换设备的深度信息的方法 Pending CN102811359A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2011-0052903 2011-06-01
KR1020110052903A KR20120133951A (ko) 2011-06-01 2011-06-01 3d 영상변환장치 그 깊이정보 조정방법 및 그 저장매체

Publications (1)

Publication Number Publication Date
CN102811359A true CN102811359A (zh) 2012-12-05

Family

ID=46320752

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012101717313A Pending CN102811359A (zh) 2011-06-01 2012-05-29 3d图像转换设备和调整3d图像转换设备的深度信息的方法

Country Status (5)

Country Link
US (1) US20120306866A1 (zh)
EP (1) EP2530939A3 (zh)
JP (1) JP2012253768A (zh)
KR (1) KR20120133951A (zh)
CN (1) CN102811359A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106454315A (zh) * 2016-10-26 2017-02-22 深圳市魔眼科技有限公司 一种自适应虚拟视图转立体视图的方法、装置及显示设备
WO2018176927A1 (zh) * 2017-04-01 2018-10-04 上海讯陌通讯技术有限公司 虚拟主动视差计算补偿的双目渲染方法及系统

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120133640A (ko) * 2011-05-31 2012-12-11 삼성전자주식회사 3d 영상변환장치 그 구현방법 및 그 저장매체
CN103686118A (zh) * 2012-09-19 2014-03-26 珠海扬智电子科技有限公司 影像深度调整方法与装置
JP6076082B2 (ja) * 2012-12-26 2017-02-08 日本放送協会 立体画像補正装置及びそのプログラム
JP6076083B2 (ja) * 2012-12-26 2017-02-08 日本放送協会 立体画像補正装置及びそのプログラム
KR102143944B1 (ko) * 2013-09-27 2020-08-12 엘지디스플레이 주식회사 입체감 조절 방법과 이를 이용한 입체 영상 표시장치
JP2016540401A (ja) * 2013-10-14 2016-12-22 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 3d表示のための深度マップのリマッピング
KR102483078B1 (ko) * 2021-10-20 2022-12-29 금정현 입체 영상을 포함하는 배경과 촬영 중 객체 간의 실시간 뎁스 기반 영상 합성 방법, 장치 및 컴퓨터-판독가능 기록매체

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2357840A3 (en) * 2002-03-27 2012-02-29 Sanyo Electric Co., Ltd. Method and apparatus for processing three-dimensional images
JP4555722B2 (ja) * 2005-04-13 2010-10-06 株式会社 日立ディスプレイズ 立体映像生成装置
JP4879326B2 (ja) * 2006-11-20 2012-02-22 トムソン ライセンシング 3次元画像を合成するシステム及び方法
KR101345303B1 (ko) * 2007-03-29 2013-12-27 삼성전자주식회사 스테레오 또는 다시점 영상의 입체감 조정 방법 및 장치
CN102027752B (zh) * 2008-05-12 2016-02-17 汤姆森特许公司 用于测量立体运动画面的潜在眼睛疲劳的系统和方法
KR101619450B1 (ko) * 2009-01-12 2016-05-10 엘지전자 주식회사 뎁스 정보를 이용한 비디오 신호 처리 방법 및 장치
JP2011028633A (ja) * 2009-07-28 2011-02-10 Sony Corp 情報処理装置及び方法、並びに、プログラム
JP5361618B2 (ja) * 2009-09-04 2013-12-04 キヤノン株式会社 画像処理装置及びその制御方法
US20110157155A1 (en) * 2009-12-31 2011-06-30 Disney Enterprises, Inc. Layer management system for choreographing stereoscopic depth

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106454315A (zh) * 2016-10-26 2017-02-22 深圳市魔眼科技有限公司 一种自适应虚拟视图转立体视图的方法、装置及显示设备
WO2018176927A1 (zh) * 2017-04-01 2018-10-04 上海讯陌通讯技术有限公司 虚拟主动视差计算补偿的双目渲染方法及系统

Also Published As

Publication number Publication date
EP2530939A2 (en) 2012-12-05
KR20120133951A (ko) 2012-12-11
JP2012253768A (ja) 2012-12-20
US20120306866A1 (en) 2012-12-06
EP2530939A3 (en) 2015-09-09

Similar Documents

Publication Publication Date Title
CN102811359A (zh) 3d图像转换设备和调整3d图像转换设备的深度信息的方法
CN102067615B (zh) 图像产生方法和设备以及图像处理方法和设备
JP2015165674A (ja) ディスプレイ装置及びその3d映像信号表示方法
EP2371139B1 (en) Image processing method and apparatus therefor
US20220137789A1 (en) Methods and apparatus for three-dimensional graphical user interfaces
CN103703772A (zh) 内容播放方法和装置
JP2013088524A (ja) 電子機器及び表示制御方法
CN102844696A (zh) 电子装置和再现三维图像的方法
KR20140038799A (ko) 영상표시장치, 서버 및 그 동작방법
US20120249734A1 (en) Electronic apparatus and display control method
CN102811360A (zh) 用于3d图像转换的设备和方法及其存储介质
CN102411486A (zh) 信息处理设备、程序以及信息处理方法
US9047797B2 (en) Image display apparatus and method for operating the same
US8687950B2 (en) Electronic apparatus and display control method
CN106464862B (zh) 图像显示装置和图像显示方法
US20120224035A1 (en) Electronic apparatus and image processing method
EP2791770B1 (en) Method and apparatus for displaying a 3d image in a mobile terminal
CN104769944A (zh) 提供可变深度显示的装置和技术
US8977036B2 (en) Apparatus and method for 3D image conversion and a storage medium thereof
US20150287386A1 (en) Image display apparatus and operation method thereof
JP5349658B2 (ja) 情報処理装置、情報処理方法及びプログラム
US20120268576A1 (en) Electronic apparatus, display control method and recording medium
JP2013003202A (ja) 表示制御装置、表示制御方法、及びプログラム
JP2012134725A (ja) 画像処理装置、及び画像処理方法
KR20230152418A (ko) 영상표시장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20121205