CN102857771B - 3d影像处理装置 - Google Patents

3d影像处理装置 Download PDF

Info

Publication number
CN102857771B
CN102857771B CN201110178459.7A CN201110178459A CN102857771B CN 102857771 B CN102857771 B CN 102857771B CN 201110178459 A CN201110178459 A CN 201110178459A CN 102857771 B CN102857771 B CN 102857771B
Authority
CN
China
Prior art keywords
image
depth
image object
eye
motion vector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201110178459.7A
Other languages
English (en)
Other versions
CN102857771A (zh
Inventor
廖文财
张义树
童旭荣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Realtek Semiconductor Corp
Original Assignee
Realtek Semiconductor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Realtek Semiconductor Corp filed Critical Realtek Semiconductor Corp
Priority to CN201110178459.7A priority Critical patent/CN102857771B/zh
Publication of CN102857771A publication Critical patent/CN102857771A/zh
Application granted granted Critical
Publication of CN102857771B publication Critical patent/CN102857771B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本发明提出3D影像处理装置,其中一种3D影像处理装置包含有:影像位移检测装置,用于检测第一左眼影像或第一右眼影像中的目标影像物体在时间轴上的影像位移,以产生时间性位移向量,并对第一左眼影像与第一右眼影像进行影像位移检测,以产生目标影像物体的空间性位移向量;景深产生装置,用于依据时间性位移向量和空间性位移向量产生目标影像物体的景深值;指令接收装置,用于接收景深调整指令;以及影像合成装置,用于依据景深调整指令,调整第一左眼影像和第一右眼影像中的至少部分影像物体的位置,以合成第二左眼影像和第二右眼影像。

Description

3D影像处理装置
技术领域
本发明涉及3D影像显示技术,尤指一种可调整3D影像景深的3D影像处理装置。
背景技术
随着技术的进步,3D影像显示技术的应用愈来愈广泛。有些3D影像显示技术需要搭配特殊的眼镜或头罩等额外装置,才能让观赏者产生3D立体视觉效果,有些则不需要。虽然3D影像显示技术能提供更立体的视觉效果,但每个观赏者的视觉系统对于3D立体视觉效果的感知程度并不完全相同。因此,对于相同的3D影像画面,有的人会觉得3D效果不够明显,有的人却会产生头晕等不适应感。
很遗憾的,受限于来源影像数据的格式或传输频宽,现行的3D影像显示系统难以让观赏者依个人视觉系统的状况来弹性调整3D影像的景深设定,造成3D影像显示装置的观赏品质和舒适度普遍低落。
发明内容
有鉴于此,如何使3D影像的景深可依据观赏者的视觉需要而调整,实为业界有待解决的问题。
为解决前述问题,本说明书提供了一种3D影像处理装置的实施例,其包含有:一影像位移检测装置,用于检测一第一左眼影像或一第一右眼影像中的一目标影像物体(object,物件)在时间轴上的影像位移,以产生该目标影像物体的一时间性位移向量,并对该第一左眼影像与该第一右眼影像进行影像位移检测,以产生该目标影像物体的一空间性位移向量,其中该第一左眼影像和该第一右眼影像可形成一第一3D画面;一景深产生装置,耦接于该影像位移检测装置,用于依据该时间性位移向量和该空间性位移向量产生该目标影像物体的景深值;一指令接收装置,用于接收一景深调整指令;以及一影像合成装置,耦接于该指令接收装置,用于依据该景深调整指令,调整该第一左眼影像和该第一右眼影像中的至少部分影像物体的位置,以合成可形成一第二3D画面的一第二左眼影像和一第二右眼影像。
另一种3D影像处理装置的实施例包含有:一影像位移检测装置,用于检测一左眼影像或一右眼影像中的各目标影像物体在时间轴上的影像位移,以产生各目标影像物体的时间性位移向量,并对该左眼影像与该右眼影像进行影像位移检测,以产生各目标影像物体的空间性位移向量,其中该左眼影像和该右眼影像可形成一3D画面;一景深产生装置,耦接于该影像位移检测装置,用于依据该影像位移检测装置产生的多个时间性位移向量和多个空间性位移向量产生一景深图;以及一影像合成装置,用于依据该左眼影像、该右眼影像和该景深图,合成分别对应于多个视点的多个左眼影像和多个右眼影像。
本说明书另提供了一种3D影像处理装置的实施例,其包含有:一影像位移检测装置,用于检测一左眼影像或一右眼影像中的各目标影像物体在时间轴上的影像位移,以产生各目标影像物体的时间性位移向量,并对该左眼影像与该右眼影像进行影像位移检测,以产生各目标影像物体的空间性位移向量,其中该左眼影像和该右眼影像可形成一3D画面;一景深产生装置,耦接于该影像位移检测装置,用于依据该影像位移检测装置产生的多个时间性位移向量和多个空间性位移向量产生一第一景深图;以及一指令接收装置,用于接收一景深调整指令;以及一影像合成装置,耦接于该指令接收装置,用于依据该景深调整指令,调整该第一景深图中的至少部分像素的景深值,以产生一第二景深图。
附图说明
图1为本发明的3D影像处理装置的一实施例简化后的功能方框图。
图2为本发明的3D影像处理方法的一实施例简化后的流程图。
图3为不同时间点的左眼影像和右眼影像的一实施例简化后的示意图。
图4为图1的3D影像处理装置接收到的左眼影像和右眼影像的一实施例简化后的示意图。
图5为图1的3D影像处理装置产生的左眼景深图和右眼景深图的一实施例简化后的示意图。
图6为图1的3D影像处理装置合成的左眼影像和右眼影像的一实施例简化后的示意图。
图7为图1的3D影像处理装置调整3D影像景深的一实施例简化后的示意图。
图8为图1的3D影像处理装置产生的左眼景深图和右眼景深图的另一实施例简化后的示意图。
【主要元件符号说明】
具体实施方式
以下将配合相关图式来说明本发明的实施例。在这些图式中,相同的标号表示相同或类似的元件。
在说明书及后续的权利要求范围当中使用了某些词汇来指称特定的元件。所属领域中具有通常知识者应可理解,同样的元件可能会用不同的名词来称呼。本说明书及后续的权利要求范围并不以名称的差异来做为区分元件的方式,而是以元件在功能上的差异来做为区分的基准。在通篇说明书及后续的权利要求当中所提及的“包含”为一开放式的用语,故应解释成“包含但不限定于...”。另外,“耦接”一词在此包含任何直接及间接的连接手段。因此,若文中描述一第一装置耦接于一第二装置,则代表该第一装置可直接(包含通过电性连接或无线传输、光学传输等信号连接方式)连接于该第二装置,或通过其他装置或连接手段间接地电性或信号连接至该第二装置。
图1为本发明一实施例的3D影像处理装置100简化后的功能方框图。3D影像处理装置100包含有影像接收装置110、储存装置120、影像位移检测装置(image motion detector)130、景深产生装置(depthgenerator)140、指令接收装置150、影像合成装置(image renderingdevice)160、以及输出装置170。实际上,3D影像处理装置100中的功能方框可以分别用不同的电路元件来实现,也可将3D影像处理装置100中的部分或全部功能方框整合于单一芯片中。实际上,储存装置120可以设置在影像接收装置110的内部或外部。以下将搭配图2到图8来进一步说明3D影像处理装置100的运作。
图2为本发明一实施例的3D影像处理方法简化后的流程图200。在流程210中,影像接收装置110会从一影像数据源(图中未示出)接收可形成3D画面的左眼影像数据及右眼影像数据。影像数据源可以是电脑、光盘播放器、有线电视缆线、因特网、行动运算装置等各种能提供左、右眼3D影像数据的装置。在本实施例中,前述的影像数据源并不需要传送景深图(depth map)数据给影像接收装置110。
在运作时,影像接收装置110接收到的左眼影像数据及右眼影像数据,会暂存在储存装置120中以供影像处理时使用。例如,图3所示出为影像接收装置110接收到的不同时间点的左眼影像和右眼影像的一实施例简化后的示意图。在图3中,左眼影像300L’及右眼影像300R’对应于时间T-1,左眼影像300L及右眼影像300R对应于时间T,而左眼影像300L”及右眼影像300R”则是对应于时间T+1。每一对的左眼影像和右眼影像由后级的显示装置(图中未示出)显示时,可形成一3D画面。
例如,图4所示出为对应于时间T的左眼影像300L及右眼影像300R由后级的显示装置显示时,所形成的一3D画面302的示意图。在本实施例中,左眼影像300L中的影像物体310L和右眼影像300R中的影像物体310R,在显示时可形成3D画面302中的一3D影像物体310S,而左眼影像300L中的影像物体320L和右眼影像300R中的影像物体320R,在显示时则可形成3D画面302中位于3D影像物体310S后方的另一3D影像物体320S。在实际应用上,前述的显示装置可以是采用自动立体显示(auto-stereoscopic)等裸眼式(glasses-free)3D显示技术的显示装置,也可以是搭配特殊眼镜或头罩来呈现3D立体影像的显示装置。
虽然人眼可以看出每个影像物体的轮廓,但在大多数应用环境中,前述的影像数据源并不会提供影像物体的形状和位置等参考数据给3D影像处理装置100。因此,影像位移检测装置130会进行流程220和230,对左眼影像和右眼影像进行影像边缘检测和影像位移检测,以辨识出左眼影像和右眼影像中的对应影像物体,并检测对应影像物体在左眼影像和右眼影像中的位置差异。“对应影像物体”一词在此指的同一物体分别在左眼影像和右眼影像中所呈现出来的两个影像,但并不严格限制左眼影像中的一特定影像物体要和在右眼影像中的对应影像物体完全相同,因为有些物体在左眼影像和右眼影像中的影像,可能会因摄影角度的些微不同或影像经过视差(parallax)处理而有少许位置差异。
例如,影像位移检测装置130可在流程220中会对左眼影像300L与右眼影像300R进行影像位移检测,以产生与左眼影像300L或右眼影像300R中的一目标影像物体相对应的多个候选位移向量。为方便说明,以下假设目标影像物体是左眼影像300L中的影像物体310L。在本例中,影像位移检测装置130可先对左眼影像300L进行影像边缘检测,以辨识出左眼影像300中的影像物体310L的轮廓,接着再检测影像物体310L在左眼影像300L和右眼影像300R间的影像位移。
一般而言,同一物体分别在左眼影像和右眼影像中所呈现出来的两个影像的水平位置会相同或是很接近。因此,影像位移检测装置130可将检测影像物体310L的影像位移时的影像比对范围,限缩在右眼影像300R中的局部水平带状区域内,以节省影像位移检测所需的时间和内存。例如,假设影像物体310L的最底端在左眼影像300L中的垂直坐标为Yb,而影像物体310L的最顶端在左眼影像300L中的垂直坐标为Yu,其中Yu大于Yb,则可将进行影像物体310L的影像位移检测时的影像比对范围,限缩在右眼影像300R中介于垂直坐标Yb-k~Yu+k范围内的水平带状区域,其中k可以是以像素距离计算的适当长度。
此外,为了降低因影像中的噪声或其他影像内容特性造成位移检测判断错误的可能性,影像位移检测装置130在流程220中会产生与影像物体310L相对应的多个候选位移向量。
在流程230中,影像位移检测装置130会选择在流程220中产生的其中一个候选位移向量,来做为目标影像物体的空间性位移向量(spatialmotion vector)VS1。由于相邻时间点的影像彼此间会有高度相似性,故影像位移检测装置130可以利用目标影像物体在先前时间点的空间性位移向量,来辅助决定该目标影像物体在当前时间点的空间位移向量,以提升该目标影像物体的影像位移检测结果的准确度。例如,影像位移检测装置130可从与影像物体310L相关的多个候选位移向量中,选择最接近影像物体310L在对应时间点T-1的左眼影像300L’和右眼影像300R’间的空间性位移向量VS0者,做为影像物体310L在对应时间点T的左眼影像300L和右眼影像300R间的空间性位移向量VS1。
在流程240中,影像位移检测装置130会检测该目标影像物体在时间轴上的位移向量。例如,影像位移检测装置130可检测影像物体310L在左眼影像300L’与左眼影像300L间的影像位移,以产生一时间性位移向量(temporal motion vector)VL1。
在流程250中,景深产生装置140会依据该目标影像物体的空间性位移向量和时间性位移向量,计算该目标影像物体的景深值。例如,景深产生装置140可依据影像物体310L的空间性位移向量VS1计算出影像物体310L的景深值,再依据影像物体310L的时间性位移向量VL1来决定是否微调该景深值。
在一实施例中,若空间性位移向量VS1的值大于一预定值STH1,景深产生装置140会判断影像物体310L和影像物体310R的景深落在离观赏者较近的一个区段内,即影像物体310L和影像物体310R所形成的3D影像物体310S在3D画面302中的景深是在离观赏者较近的一个区段内。因此,景深产生装置140会赋予左眼影像300L中与影像物体310L相对应的像素较大的景深值,和/或赋予右眼影像300R中与影像物体310R相对应的像素较大的景深值。在本实施例中,影像物体的景深值愈大,代表其景深愈浅,即愈靠近摄影机(或观赏者);反之,影像物体的景深值愈小,代表其景深愈深,即愈远离摄影机(或观赏者)。
接着,景深产生装置140会参考时间性位移向量VL1来决定是否要修正前述设定的景深值。例如,在一实施例中,若时间性位移向量VL1大于一预定值TTH1,景深产生装置140会决定不修正前述设定的景深值;若时间性位移向量VL1小于一预定值TTH2,则景深产生装置140会把前述设定的景深值与时间点T-1所对应的景深值加以平均,以做为最后的景深值。
举例而言,假设景深产生装置140先前将左眼影像300L’中与影像物体310L相对应的像素的景深值设为190,并且景深产生装置140依据影像物体310L的空间性位移向量VS1,将左眼影像300L中与影像物体310L相对应的像素的景深值设为210。若时间性位移向量VL1小于预定值TTH2,则景深产生装置140可将左眼影像300L中与影像物体310L相对应的像素的景深值,修正为210与190的平均值,即200。如此一来,就能使得同一影像物体在相邻时间点的影像中的景深值变化变得较为平顺,有助于提升所形成的3D影像的画质。
实际上,影像位移检测装置130也可以在流程240中检测影像物体310L在左眼影像300L与左眼影像300L”间的影像位移,以产生一时间性位移向量VL2,来取代前述时间性位移向量VL1的角色。或者,影像位移检测装置130也可以在流程240中检测影像物体310R在右眼影像300R’与右眼影像300R间的影像位移,以产生一时间性位移向量VR1,或是检测影像物体310R在右眼影像300R与右眼影像300R”间的影像位移,以产生一时间性位移向量VR2,来取代前述时间性位移向量VL1的角色。
依照前述的方式,影像位移检测装置130会产生与左眼影像300L和/或右眼影像300R中的多个物体相对应的多个时间性位移向量和多个空间性位移向量,而景深产生装置140便能计算出该等影像物体个别的景深,并产生与左眼影像300L相对应的左眼景深图500L,和/或与右眼影像300R相对应的右眼景深图500R,如图5所示。左眼景深图500L中的像素区域510L和像素区域520L,分别对应于左眼影像300L中的影像物体310L和影像物体320L。同样的,右眼景深图500R中的像素区域510R和像素区域520R,分别对应于右眼影像300R中的影像物体310R和影像物体320R。为方便后续说明起见,在此假设本实施例中的景深产生装置140将像素区域510L和510R中的像素的景深值设为200,并将像素区域520L和520R中的像素的景深值设为60。
为了使3D影像的景深可依据观赏者的视觉需要而调整,以提高观赏的品质和舒适度、降低观赏者的眼睛疲劳和不适感,3D影像处理装置100允许观赏者通过遥控器或其他设定接口进行3D影像的景深调整。因此,指令接收装置150会在流程260中接收使用者通过遥控器或其他设定接口所传送过来的一景深调整指令。
接着,影像合成装置160会进行流程270,依据该景深调整指令调整左眼影像300L和右眼影像300R中的影像物体的位置,以产生可形成景深程度调整后的3D画面的新左眼影像和新右眼影像。
为方便说明起见,在此假设该景深调整指令是要增加3D画面的三维效果,即增加3D画面中的不同3D影像物体间的景深差距。在本实施例中,影像合成装置160会依据该景深调整指令调整左眼影像300L中的影像物体310L、320L和右眼影像300R中的影像物体310R、320R的位置,以产生新左眼影像600L和新右眼影像600R,如图6所示。在本实施例中,影像合成装置160在产生新左眼影像600L时,会将影像物体310L的位置往右移并将影像物体320L的位置往左移,而影像合成装置160在产生新右眼影像600R时,会将影像物体310R的位置往左移并将影像物体320R的位置往右移。实际上,各影像物体的移动方向,与该景深调整指令所指示的景深调整方向有关,而各影像物体的移动距离,则与该景深调整指令所指示的景深调整程度以及与各影像物体的原景深值有关。
新左眼影像600L及新右眼影像600R由后级的显示装置(图中未示出)显示时,可形成一3D画面602。在本实施例中,左眼影像600L中的影像物体310L和右眼影像600R中的影像物体310R,在显示时可形成3D画面602中的一3D影像物体610S,而左眼影像600L中的影像物体320L和右眼影像600R中的影像物体320R,在显示时则可形成3D画面602中的一3D影像物体620S。依据前述的影像物体位置的调整方向,3D影像物体610S在3D画面602中的景深,会大于3D影像物体310S在3D画面302中的景深,即,观赏者会感觉3D影像物体610S比3D影像物体310S更靠近自己。另一方面。3D影像物体620S在3D画面602中的景深,则会小于3D影像物体320S在3D画面302中的景深,即,观赏者会感觉3D影像物体620S比3D影像物体310S更远离自己。
如此一来,假设在图4的原3D画面302中,观赏者所感知到的3D影像物体310S和320S之间的景深距离为D1,而在新的3D画面602中,观赏者所感知到的3D影像物体610S和620S之间的景深距离会变为D2,比调整前的景深距离D1来得大。
前述移动影像物体以产生新左眼影像600L和新右眼影像600R的运算,有可能会在影像物体的边缘部分形成影像缺口。为提升3D画面的品质,影像合成装置160可依据右眼影像的局部数据来产生填补左眼影像的影像缺口所需的影像数据,并依据左眼影像的局部数据来产生填补右眼影像的影像缺口所需的影像数据。
图7示出本发明填补左眼影像和右眼影像中的影像缺口的一实施例简化后的示意图。如前所述,影像合成装置160在产生新左眼影像600L时,会将影像物体310L往右移并将影像物体320L往左移,而在产生新右眼影像600R时,则会将影像物体310R往左移并将影像物体320L往右移。前述的影像物体移动运算可能在影像物体310L的边缘形成影像缺口612、在影像物体320L的边缘形成影像缺口614、在影像物体310R的边缘形成影像缺口616、并在影像物体320R的边缘形成影像缺口618。在本实施例中,影像合成装置160可用原右眼影像300R中与影像缺口612相对应的影像区域315和316的像素值,来填补新左眼影像600L中的影像缺口612,并可用原右眼影像300R中与影像缺口614相对应的影像区域314的像素值,来填补新左眼影像600L中的影像缺口614。同样的,影像合成装置160可用原左眼影像300L中与影像缺口616相对应的影像区域312和313的像素值,来填补新右眼影像600R中的影像缺口616,并可用原左眼影像300L中与影像缺口618相对应的影像区域311的像素值,来填补新右眼影像600R中的影像缺口618。
实际上,影像合成装置160也可参考左眼影像300L和右眼影像300R中的像素值、左眼影像300L’和右眼影像300R’中的像素值、及/或左眼影像300L”和右眼影像300R”中的像素值,利用插补运算的方式来产生填补新左眼影像600L和新右眼影像600R中的影像缺口所需的新像素值。
在某些已知的影像处理方法中,会利用单一视角的2D影像(例如左眼影像数据和右眼影像数据的其中之一)来产生另一视角的影像数据。此时,若移动单一视角影像中的影像物体的位置,则难以有效填补影像物体移动后造成的影像缺口,容易降低影像物体边缘的影像品质。相较之下,前述影像合成装置160利用左、右眼影像互补不足来产生新的左、右眼影像的方式,可以有效提高3D画面的影像品质,特别是在影像物体的边缘部份的影像品质更能获得大幅提升。
在流程280中,影像合成装置160会依据该景深调整指令减少至少一影像物体的景深值,并增加至少另一影像物体的景深值。例如,在图8的实施例中,影像合成装置160可将与影像物体310L和310R对应的像素区域810L和810R中的像素的景深值调升至270,并将与影像物体320L和320R对应的像素区域820L和820R中的像素的景深值调降至40,以产生与新左眼影像600L相对应的左眼景深图800L,和/或与新右眼影像600R相对应的右眼景深图800R。
接着,输出装置170会将影像合成装置160产生的新左眼影像600L和新右眼影像600R,连同调整后的左眼景深图800L和/或右眼景深图800R,传送给后级电路进行显示或做进一步影像处理。
倘若指令接收装置150于流程260接收到的景深调整指令是要降低3D画面的三维效果,即减少3D画面中的不同3D影像物体间的景深差距,则影像合成装置160可将前述流程270中的运作反向操作。例如,影像合成装置160在产生新左眼影像时,可将影像物体310L往左移并将影像物体320L往右移,而在产生新右眼影像时,则可将影像物体310R往右移并将影像物体320L往左移。如此一来,便能减少影像物体310L和310R所形成的新3D影像物体与影像物体320L和320R所形成的另一新3D影像物体间的景深差距。同样的,影像合成装置160可将前述流程280中的运作反向操作。
请注意,在前述说明中,影像合成装置160会依据该景深调整指令将影像物体310L和320L的位置及景深做反方向调整,也会将影像物体310R和320R的位置及景深做反方向调整,但此仅为一实施例,而非局限本发明的实际应用范围。实际上,影像合成装置160也可以只调整部分影像物体的位置和/或景深值,而不改变其他影像物体的位置和/或景深值。
例如,当该景深调整指令要求3D影像处理装置100提升3D画面的立体感时,影像合成装置160可以只将影像物体310L往右移并将影像物体310R往左移,但不改变影像物体320L和320R的位置。影像合成装置160也可改将影像物体320L往左移并将影像物体320R往右移,但不改变影像物体310L和310R的位置。前述的两种方式都可以增加3D画面中的不同3D影像物体间的景深差距感。
或者,影像合成装置160也可以只提高影像物体310L和310R的景深值,而不改变影像物体320L和320R的景深值。相对地,影像合成装置160也可以只调降影像物体320L和320R的景深值,而不改变影像物体310L和310R的景深值。前述的两种方式也都可以增加3D画面中的不同3D影像物体间的景深差距感。
在另一实施例中,影像合成装置160在产生新左眼影像600L时,会将影像物体310L和影像物体320L的位置往一方向移动,但移动的距离不同,且在产生新右眼影像600R时,会将影像物体310R和影像物体320R的位置往另一方向移动,但移动的距离不同。因此,影像合成装置160同样可改变3D画面中的不同3D影像物体间的景深差距感。
或者,在另一实施例中,影像合成装置160也可通过将影像物体310L、320L、310R、以及320R的对应像素的景深值,都往同一方向调整但调整量不同的方式,来改变3D画面中的不同3D影像物体间的景深差距感。例如,影像合成装置160可将影像物体310L、320L、310R、以及320R的对应像素的景深值都调升,但影像物体310L和310R的对应像素的景深值调升量大于影像物体320L和320R的对应像素的景深值调升量,以增加3D画面中的不同3D影像物体间的景深差距感。又例如,影像合成装置160可将影像物体310L、320L、310R、以及320R的对应像素的景深值都调降,但影像物体310L和310R的对应像素的景深值调降量大于影像物体320L和320R的对应像素的景深值调降量,以降低3D画面中的不同3D影像物体间的景深差距感。
前述流程图200中的各流程的执行顺序只是一实施例,而非局限本发明的实际实施方式。例如,在另一实施例中,影像合成装置160会先进行流程280,依据该景深调整指令调整影像物体的景深值,然后再进行流程270,依据调整后的景深值换算出各影像物体需要的位移量,并对应地移动影像物体的位置。即,流程270和280的顺序是可以对调的。另外,也可将流程270和280的其中之一省略。
除了可允许观赏者依个人视觉需要而改变3D画面的三维效果(即3D影像物体间的景深差距)之外,前面披露的3D影像处理装置100还能支持裸眼式的多视点(multi-view)自动立体显示技术。如前所述,影像位移检测装置130可依据接收到的左眼影像300L和右眼影像300R产生对应的左眼景深图500L和/或右眼景深图500R。依据左眼影像300L、右眼影像300R、左眼景深图500L和/或右眼景深图500R,影像合成装置160便能合成分别对应于多个视点的多个左眼影像和多个右眼影像。当输出装置170将该多个左眼影像和多个右眼影像传送给适当的显示装置时,便能实现多视点裸眼式3D显示功能。
以上所述仅为本发明的优选实施例,凡依本发明权利要求范围所做的均等变化与修饰,皆应属本发明的涵盖范围。

Claims (15)

1.一种3D影像处理装置,其包含有:
一影像位移检测装置,用于检测一第一左眼影像或一第一右眼影像中的一目标影像物体在时间轴上的影像位移,以产生所述目标影像物体的一时间性位移向量,并对所述第一左眼影像与所述第一右眼影像进行影像位移检测,以产生所述目标影像物体的一空间性位移向量,其中,所述第一左眼影像和所述第一右眼影像可形成一第一3D画面;
一景深产生装置,耦接于所述影像位移检测装置,用于依据所述时间性位移向量和所述空间性位移向量之一产生所述目标影像物体的景深值,再依据所述时间性位移向量和所述空间性位移向量中的另一个来决定是否微调所述景深值;
一指令接收装置,用于接收一景深调整指令;以及
一影像合成装置,耦接于所述指令接收装置,用于依据所述景深调整指令,调整所述第一左眼影像和所述第一右眼影像中的至少部分影像物体的位置,以合成可形成一第二3D画面的一第二左眼影像和一第二右眼影像。
2.根据权利要求1所述的3D影像处理装置,其特征在于,所述影像合成装置会依据所述第一右眼影像的局部数据产生所述第二左眼影像的局部数据,和/或依据所述第一左眼影像的局部数据产生所述第二右眼影像的局部数据。
3.根据权利要求2所述的3D影像处理装置,其特征在于,所述第一左眼影像中的一第一影像物体和所述第一右眼影像中的一第二影像物体可于所述第一3D画面中形成一第一3D影像物体,所述第一左眼影像中的一第三影像物体和所述第一右眼影像中的一第四影像物体可于所述第一3D画面中形成一第二3D影像物体,所述第一影像物体和所述第二影像物体在所述第二3D画面中形成一第三3D影像物体,且所述第三影像物体和所述第四影像物体在所述第二3D画面中形成一第四3D影像物体。
4.根据权利要求3所述的3D影像处理装置,其特征在于,所述影像接收装置会对所述第一左眼影像与所述第一右眼影像进行影像位移检测,以产生对应于所述目标影像物体的多个候选位移向量,并依据所述目标影像物体在对应于其他时间点的左眼影像和右眼影像中的空间性位移向量,选择所述多个候选位移向量的其中之一作为所述目标影像物体当前的空间性位移向量。
5.根据权利要求3所述的3D影像处理装置,其特征在于,所述影像合成装置会调整所述第一、第二、第三、第四影像物体的位置,致使所述第三3D影像物体在所述第二3D画面中的景深,大于所述第一3D影像物体在所述第一3D画面中的景深,而所述第四3D影像物体在所述第二3D画面中的景深,小于所述第二3D影像物体在所述第一3D画面中的景深。
6.根据权利要求3所述的3D影像处理装置,其特征在于,所述影像合成装置会调整所述第一左眼影像和所述第一右眼影像中的仅有局部影像物体的位置,致使所述第三3D影像物体在所述第二3D画面中的景深,异于所述第一3D影像物体在所述第一3D画面中的景深,而所述第四3D影像物体在所述第二3D画面中的景深,等于所述第二3D影像物体在所述第一3D画面中的景深。
7.根据权利要求3所述的3D影像处理装置,其特征在于,所述影像合成装置会将所述第一左眼影像中的至少局部影像物体的位置往一方向调整,并将所述第一右眼影像中的至少局部影像物体的位置往另一方向调整,致使所述第三3D影像物体与所述第四3D影像物体在所述第二3D画面中的景深差距,异于所述第一3D影像物体与所述第二3D影像物体在所述第一3D画面中的景深差距。
8.根据权利要求3所述的3D影像处理装置,其特征在于,所述影像合成装置在合成所述第二左眼影像时,会将所述第一影像物体的位置往右移并将所述第三影像物体的位置往左移,而所述影像合成装置在合成所述第二右眼影像时,会将所述第二影像物体的位置往左移并将所述第四影像物体的位置往右移。
9.根据权利要求3所述的3D影像处理装置,其特征在于,所述影像合成装置在合成所述第二左眼影像时,只会调整部分影像物体的位置,并维持其他影像物体的位置不变。
10.根据权利要求3所述的3D影像处理装置,其特征在于,所述影像合成装置在合成所述第二左眼影像时,会将所述第一影像物体和所述第三影像物体的位置往一方向移动,但移动的距离不同,而所述影像合成装置在合成所述第二右眼影像时,会将所述第二影像物体和所述第四影像物体的位置往另一方向移动,但移动的距离不同。
11.一种3D影像处理装置,其包含有:
一影像位移检测装置,用于检测一左眼影像或一右眼影像中的各目标影像物体在时间轴上的影像位移,以产生各目标影像物体的时间性位移向量,并对所述左眼影像与所述右眼影像进行影像位移检测,以产生各目标影像物体的空间性位移向量,其中,所述左眼影像和所述右眼影像可形成一3D画面;
一景深产生装置,耦接于所述影像位移检测装置,用于依据所述影像位移检测装置产生的多个时间性位移向量和多个空间性位移向量中的一种位移向量产生一景深图,再依据所述时间性位移向量和所述空间性位移向量中的另一种位移向量来决定是否微调所述景深值;以及
一影像合成装置,用于依据所述左眼影像、所述右眼影像和所述景深图,合成分别对应于多个视点的多个左眼影像和多个右眼影像。
12.一种3D影像处理装置,其包含有:
一影像位移检测装置,用于检测一左眼影像或一右眼影像中的各目标影像物体在时间轴上的影像位移,以产生各目标影像物体的时间性位移向量,并对所述左眼影像与所述右眼影像进行影像位移检测,以产生各目标影像物体的空间性位移向量,其中,所述左眼影像和所述右眼影像可形成一3D画面;
一景深产生装置,耦接于所述影像位移检测装置,用于依据所述影像位移检测装置产生的多个时间性位移向量和多个空间性位移向量中的一种位移向量产生一第一景深图,再依据所述时间性位移向量和所述空间性位移向量中的另一种位移向量来决定是否微调所述第一景深图;以及
一指令接收装置,用于接收一景深调整指令;以及
一影像合成装置,耦接于所述指令接收装置,用于依据所述景深调整指令,调整所述第一景深图中的至少部分像素的景深值,以产生一第二景深图。
13.根据权利要求12所述的3D影像处理装置,其特征在于,所述影像合成装置会依据所述景深调整指令,增加一部分像素的景深值,并减少另一部分像素的景深值。
14.根据权利要求12所述的3D影像处理装置,其特征在于,所述影像合成装置会依据所述景深调整指令,只调整局部影像的景深值,并维持其他像素的景深值不变。
15.根据权利要求12所述的3D影像处理装置,其特征在于,所述影像合成装置依据所述景深调整指令,将两像素的像素值以不同的调整量朝同一方向调整。
CN201110178459.7A 2011-06-28 2011-06-28 3d影像处理装置 Active CN102857771B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110178459.7A CN102857771B (zh) 2011-06-28 2011-06-28 3d影像处理装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110178459.7A CN102857771B (zh) 2011-06-28 2011-06-28 3d影像处理装置

Publications (2)

Publication Number Publication Date
CN102857771A CN102857771A (zh) 2013-01-02
CN102857771B true CN102857771B (zh) 2015-05-20

Family

ID=47403910

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110178459.7A Active CN102857771B (zh) 2011-06-28 2011-06-28 3d影像处理装置

Country Status (1)

Country Link
CN (1) CN102857771B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101504287A (zh) * 2009-01-22 2009-08-12 浙江大学 基于视觉信息的无人飞行器自主着陆的姿态参数估算方法
CN101754042A (zh) * 2008-10-30 2010-06-23 华为终端有限公司 图像重构方法和图像重构系统
WO2010150936A1 (ko) * 2009-06-24 2010-12-29 (주)엘지전자 3d 유저 인터페이스를 제공하는 입체영상 재생장치 및 방법
CN102055991A (zh) * 2009-10-27 2011-05-11 深圳Tcl新技术有限公司 二维图像转换为三维图像的转换方法及转换装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101754042A (zh) * 2008-10-30 2010-06-23 华为终端有限公司 图像重构方法和图像重构系统
CN101504287A (zh) * 2009-01-22 2009-08-12 浙江大学 基于视觉信息的无人飞行器自主着陆的姿态参数估算方法
WO2010150936A1 (ko) * 2009-06-24 2010-12-29 (주)엘지전자 3d 유저 인터페이스를 제공하는 입체영상 재생장치 및 방법
CN102055991A (zh) * 2009-10-27 2011-05-11 深圳Tcl新技术有限公司 二维图像转换为三维图像的转换方法及转换装置

Also Published As

Publication number Publication date
CN102857771A (zh) 2013-01-02

Similar Documents

Publication Publication Date Title
CN101909219B (zh) 一种立体显示方法及跟踪式立体显示器
US9204140B2 (en) Display device and display method
CN102761761B (zh) 立体图像显示器及其立体图像调整方法
CN101984670B (zh) 一种立体显示方法、跟踪式立体显示器及图像处理装置
CN103609105B (zh) 用于生成用于显示器的信号的方法和设备
TWI520569B (zh) 深度資訊產生器、深度資訊產生方法及深度調整裝置
TWI478575B (zh) 3d影像處理裝置
CN103595987A (zh) 立体图像显示装置、图像处理装置及图像处理方法
TWI504232B (zh) 3d影像處理裝置
US9319674B2 (en) Three-dimensional image display device and driving method thereof
GB2487997A (en) Viewer-tracked autostereoscopic 3D display with dynamic electrically-controlled parallax barrier
CN105723705B (zh) 用于自动立体多视图显示器的图像的生成
US10694173B2 (en) Multiview image display apparatus and control method thereof
EP2458878A2 (en) Image processing apparatus and control method thereof
JP2016530755A (ja) 位置の検知及び適応的な数のビューを伴うマルチビュー3次元ディスプレイシステム及び方法
TW201605226A (zh) 影像顯示方法以及影像顯示裝置
CN102970561A (zh) 视频处理装置以及视频处理方法
US20140071237A1 (en) Image processing device and method thereof, and program
KR101992767B1 (ko) 입체영상 디스플레이에서의 계층적 다중화를 위한 장치 및 방법
US20120007949A1 (en) Method and apparatus for displaying
KR20170055930A (ko) 3d 디스플레이 시스템에서 입체 이미지 디스플레이 방법 및 장치
US20140063206A1 (en) System and method of viewer centric depth adjustment
CN108881878B (zh) 一种裸眼3d显示设备和方法
CN102857769A (zh) 3d 影像处理装置
CN102857771B (zh) 3d影像处理装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant