CN102572488A - 立体图像生成系统 - Google Patents

立体图像生成系统 Download PDF

Info

Publication number
CN102572488A
CN102572488A CN2012100374208A CN201210037420A CN102572488A CN 102572488 A CN102572488 A CN 102572488A CN 2012100374208 A CN2012100374208 A CN 2012100374208A CN 201210037420 A CN201210037420 A CN 201210037420A CN 102572488 A CN102572488 A CN 102572488A
Authority
CN
China
Prior art keywords
image
stereoscopic
generation system
depth
depth map
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012100374208A
Other languages
English (en)
Inventor
苏峻贤
蔡富全
李信德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
AU Optronics Corp
Original Assignee
AU Optronics Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by AU Optronics Corp filed Critical AU Optronics Corp
Priority to CN2012100374208A priority Critical patent/CN102572488A/zh
Publication of CN102572488A publication Critical patent/CN102572488A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Processing Or Creating Images (AREA)

Abstract

本发明提出了一种立体图像生成系统,包含:一图像输入模块,用以输入一第一图像及一第二图像;一深度估计模块,用以根据第一图像及第二图像产生一深度图,其中,深度图与第一图像相对应;以及一基于深度图像合成模块,用以根据深度图及第一图像产生一第一虚拟图像,第一虚拟图像与第一图像相对应,并与第二图像构成立体图像。本发明所提出的立体图像生成系统,不仅可以提高立体图像的质量,还能减少计算量。

Description

立体图像生成系统
技术领域
本发明涉及立体图像显示,尤其涉及一种立体图像生成系统。
背景技术
今天,伴随着三维(3D)立体显示技术的发展,其已使用于家庭电视中。可是,如果仅仅直接观看电视提供的3D图像,由于电视屏幕的尺寸大小及观看者的个人视角条件的影响,使得某些观看者可能感受到的3D显示效果要么太强、要么太弱。太强的3D显示效果可能容易导致观看者恶心与头疼,相反,对于太弱的3D显示效果,则可能会降低观看者的体验感。
为了克服上述不足之处,当前,本领域相关技术人员提出了立体转立体的技术,具体参照图1,图1绘示了传统的立体图像生成系统的系统框图。
如图1所示,立体图像生成系统1包含图像输入模块11、深度估计模块12、基于深度图像合成(depth image based rendering,DIBR)模块13。
首先,图像输入模块11输入左眼图像及右眼图像。之后,深度估计模块12根据左眼图像或右眼图像生成相对应的深度图(depth map),这里以左眼图像为例,即深度估计模块12生成左眼图像相对应的深度图。继而,基于深度图像合成模块13将左眼图像与其相对应的深度图进行合成以生成虚拟的左眼图像及虚拟的右眼图像。
通常,采用基于深度图像合成模块13会使某些区域暴露出来,即出现洞(hole),为了使3D显示效果得到提高,会对洞进行填充,并且洞的面积大小与3D显示图像成正比关系。而当3D显示图像较大时,则洞的面积也较大,此时,洞不易填充,且,洞的面积较大时,将影响立体图像的质量。
有鉴于此,如何设计一种立体图像生成系统,以提高立体图像的质量,是业内相关技术人员亟待解决的一技术问题。
发明内容
为了解决上述技术问题,本发明一方面提出了一种立体图像生成系统,包含:一图像输入模块,用以输入一第一图像及一第二图像;一深度估计模块,用以根据所述第一图像及所述第二图像产生一深度图,其中,所述深度图与所述第一图像相对应;以及一基于深度图像合成模块,用以根据所述深度图及所述第一图像产生一第一虚拟图像,所述第一虚拟图像与所述第一图像相对应,并与所述第二图像构成立体图像。
在本发明一实施方式中,所述第一图像与所述第二图像构成立体图像。
在本发明一实施方式中,所述第一图像与所述第二图像为并排图像。
在本发明一实施方式中,所述第一图像与所述第二图像为顶部-底部图像。
在本发明一实施方式中,所述第一图像与所述第二图像为独立的左右图像。
本发明的另一方面还提出了一种立体图像生成系统,包含:一图像输入模块,用以输入一第一图像及一第二图像;一深度估计模块,用以根据所述第一图像及所述第二图像产生一第一深度图及一第二深度图,其中,所述第一深度图与所述第一图像相对应,所述第二深度图与所述第二图像相对应;以及一基于深度图像合成模块,用以根据所述第一深度图及所述第一图像产生与所述第一图像相对应的一个或多个虚拟图像,及根据所述第二深度图与所述第二图像产生与所述第二图像相对应的一个或多个虚拟图像,其中,所述第一图像相对应的虚拟图像分别与对应之所述第二图像相对应的虚拟图像构成立体图像。
在本发明的一实施方式中,所述第一图像与所述第二图像构成立体图像。
在本发明一实施方式中,所述第一图像与所述第二图像为并排图像。
在本发明一实施方式中,所述第一图像与所述第二图像为顶部-底部图像。
在本发明一实施方式中,所述第一图像与所述第二图像为独立的左右图像。
由上可知,本发明所提出的立体图像生成系统,不仅可以提高立体图像的质量,还能减少计算量。
附图说明
读者在参照附图阅读了本发明的具体实施方式以后,将会更清楚地了解本发明的各个方面。其中,
图1绘示了传统的立体图像生成系统的系统框图;
图2绘示了本发明一实施方式的立体图像生成系统的系统框图;以及
图3绘示了本发明的另一实施方式的立体图像生成系统的系统框图。
具体实施方式
为了使本申请所揭示的技术内容更加详尽与完备,可参照附图以及本发明的下述各种具体实施例,附图中相同的标记代表相同或相似的组件。然而,本领域的普通技术人员应当理解,下文中所提供的实施例并非用来限制本发明所涵盖的范围。
参照图2,图2绘示了本发明一实施方式的立体图像生成系统的系统框图。
如图2所示,立体图像生成系统2包含图像生成模块21、深度估计模块22、及基于深度图像合成模块23。
图像生成模块21,用以输入一第一图像及一第二图像,比如分别为左眼图像及右眼图像。在本实施方式中,第一图像与第二图像,可以构成一立体图像,两者可以为并排图像,也可以为顶部-底部图像,还可以为相互独立的左右图像等等。
深度估计模块22,用以根据第一图像及第二图像产生一深度图,其中,深度图与第一图像相对应。在其他实施方式中,深度估计模块22,也可以根据第一图像及第二图像产生一与第二图像相对应的深度图。
基于深度图像合成模块23,用以根据深度图及第一图像产生一第一虚拟图像,此第一虚拟图像与第一图像相对应,并且,其与第二图像构成立体图像,具体而言,由于基于深度图像合成模块23所产生的第一虚拟图像与第二图像间形成视差,从而产生立体效果。
在本实施方式中,对于图像输入模块21所输入的第一图像、第二图像,只需生成第一图像相对应的第一虚拟图像,而不需生成第二图像相对应的虚拟图像,从而简化了计算过程,并且,实验可知,第一虚拟图像与第二图像所构成的立体图像相对于现有技术中的立体图像具有更好的质量。
参照图3,图3绘示了本发明的另一实施方式的立体图像生成系统的系统框图。
如图3所示,立体图像生成模块3包含一图像输入模块31,深度估计模块32及基于深度图像合成模块33。
图像输入模块31,其用以输入一第一图像及一第二图像。同理,第一图像与第二图像,可以构成一立体图像,并且,两者可以为并排图像,也可以为顶部-底部图像,还可以为相互独立的左右图像等等。
深度估计模块32,用以根据第一图像及第二图像产生一第一深度图及一第二深度图,其中,第一深度图与第一图像相对应,第二深度图与第二图像相对应。
基于深度图像合成模块33,用以根据第一深度图及第一图像产生与第一图像相对应的一第一虚拟图像,及根据第二深度图与第二图像产生与第二图像相对应的一第二虚拟图像,其中,第一虚拟图像与第二虚拟图像构成立体图像。需说明的是,在其他实施方式中,基于深度图像合成模块33可以根据第一深度图及第一图像产生与第一图像相对应的多个虚拟图像,及根据第二深度图与第二图像产生与第二图像相对应的多个虚拟图像,即,基于深度图像合成模块33可以产生多组与第一图像、第二图像相对应的虚拟图像,并且,第一图像相对应的虚拟图像分别与对应之第二图像相对应的虚拟图像构成立体图像。
在本实施方式中,由于采用双深度图来进行图像合成,使得后续所生成的立体图像的质量较佳。
上文中,参照附图描述了本发明的具体实施方式。但是,本领域中的普通技术人员能够理解,在不偏离本发明的精神和范围的情况下,还可以对本发明的具体实施方式作各种变更和替换。这些变更和替换都落在本发明权利要求书所限定的范围内。

Claims (10)

1.一种立体图像生成系统,其特征在于,包含:
一图像输入模块,用以输入一第一图像及一第二图像;
一深度估计模块,用以根据所述第一图像及所述第二图像产生一深度图,其中,所述深度图与所述第一图像相对应;以及
一基于深度图像合成模块,用以根据所述深度图及所述第一图像产生一第一虚拟图像,所述第一虚拟图像与所述第一图像相对应,并与所述第二图像构成立体图像。
2.根据权利要求1所述的立体图像生成系统,其特征在于,所述第一图像与所述第二图像构成立体图像。
3.根据权利要求2所述的立体图像生成系统,其特征在于,所述第一图像与所述第二图像为并排图像。
4.根据权利要求2所述的立体图像生成系统,其特征在于,所述第一图像与所述第二图像为顶部-底部图像。
5.根据权利要求2所述的立体图像生成系统,其特征在于,所述第一图像与所述第二图像为独立的左右图像。
6.一种立体图像生成系统,其特征在于,包含:
一图像输入模块,用以输入一第一图像及一第二图像;
一深度估计模块,用以根据所述第一图像及所述第二图像产生一第一深度图及一第二深度图,其中,所述第一深度图与所述第一图像相对应,所述第二深度图与所述第二图像相对应;以及
一基于深度图像合成模块,用以根据所述第一深度图及所述第一图像产生与所述第一图像相对应的一个或多个虚拟图像,及根据所述第二深度图与所述第二图像产生与所述第二图像相对应的一个或多个虚拟图像,其中,所述第一图像相对应的虚拟图像分别与对应之所述第二图像相对应的虚拟图像构成立体图像。
7.根据权利要求6所述的立体图像生成系统,其特征在于,所述第一图像与所述第二图像构成立体图像。
8.根据权利要求6所述的立体图像生成系统,其特征在于,所述第一图像与所述第二图像为并排图像。
9.根据权利要求6所述的立体图像生成系统,其特征在于,所述第一图像与所述第二图像为顶部-底部图像。
10.根据权利要求6所述的立体图像生成系统,其特征在于,所述第一图像与所述第二图像为独立的左右图像。
CN2012100374208A 2012-02-16 2012-02-16 立体图像生成系统 Pending CN102572488A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2012100374208A CN102572488A (zh) 2012-02-16 2012-02-16 立体图像生成系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2012100374208A CN102572488A (zh) 2012-02-16 2012-02-16 立体图像生成系统

Publications (1)

Publication Number Publication Date
CN102572488A true CN102572488A (zh) 2012-07-11

Family

ID=46416770

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012100374208A Pending CN102572488A (zh) 2012-02-16 2012-02-16 立体图像生成系统

Country Status (1)

Country Link
CN (1) CN102572488A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104835136A (zh) * 2014-02-08 2015-08-12 本田技研工业株式会社 通过迭代插值和扭曲生成深度图的系统和方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104835136A (zh) * 2014-02-08 2015-08-12 本田技研工业株式会社 通过迭代插值和扭曲生成深度图的系统和方法
CN104835136B (zh) * 2014-02-08 2019-06-11 本田技研工业株式会社 通过迭代插值和扭曲生成深度图的系统和方法

Similar Documents

Publication Publication Date Title
EP2648414B1 (en) 3d display apparatus and method for processing image using the same
US8488869B2 (en) Image processing method and apparatus
US20130093844A1 (en) Electronic apparatus and display control method
MX2024004977A (es) Metodo basado en planos multifocales para producir puntos de vista estereoscopicos en un sistema de renderizado basado en imagenes de profundidad (mfp-dibr).
CN102685523B (zh) 深度信息产生器、深度信息产生方法及深度调整装置
JPWO2012176431A1 (ja) 多視点画像生成装置、多視点画像生成方法
CN106296781B (zh) 特效图像生成方法及电子设备
CN102404592B (zh) 图像处理设备和方法以及立体图像显示设备
US20120044241A1 (en) Three-dimensional on-screen display imaging system and method
US10757391B2 (en) Signaling warp maps using a high efficiency video coding (HEVC) extension for 3D video coding
CN102868893A (zh) 一种裸眼3d图像的形成方法、装置及3d显示系统
JP6033625B2 (ja) 多視点画像生成装置、画像生成方法、表示装置、プログラム、及び、記録媒体
KR101754976B1 (ko) 적층형 홀로그램용 콘텐츠 변환방법 및 변환장치
US20120163700A1 (en) Image processing device and image processing method
CN101908233A (zh) 产生用于三维影像重建的复数视点图的方法及系统
KR101826025B1 (ko) 사용자 인터렉션이 가능한 3d 영상 콘텐츠 생성 시스템 및 방법
CN102572488A (zh) 立体图像生成系统
JP2012518830A5 (zh)
CN102231841A (zh) 基于双视点立体数据裸眼立体显示电视及实现方法
JP6166374B2 (ja) 3次元画像生成装置、3次元画像生成方法、プログラム及び情報記憶媒体
US9547933B2 (en) Display apparatus and display method thereof
US10129537B2 (en) Autostereoscopic 3D display apparatus
TW201325202A (zh) 三維影像處理方法
WO2012131752A1 (ja) 奥行き情報更新装置、立体映像生成装置および奥行き情報更新方法
US20150054915A1 (en) Multiple-view image displaying apparatus for improving picture quality and a method thereof

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20120711