CN103155577A - 显示装置和信号处理装置及其方法 - Google Patents
显示装置和信号处理装置及其方法 Download PDFInfo
- Publication number
- CN103155577A CN103155577A CN2011800474498A CN201180047449A CN103155577A CN 103155577 A CN103155577 A CN 103155577A CN 2011800474498 A CN2011800474498 A CN 2011800474498A CN 201180047449 A CN201180047449 A CN 201180047449A CN 103155577 A CN103155577 A CN 103155577A
- Authority
- CN
- China
- Prior art keywords
- parallax information
- parallax
- information
- drawing object
- reference layer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/156—Mixing image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/128—Adjusting depth or disparity
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/275—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/183—On-screen display [OSD] information, e.g. subtitles or menus
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Controls And Circuits For Display Device (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
公开了一种显示图形对象的显示装置。所述装置包括:视频处理单元,通过处理视频图像来构成图像;图形处理单元,通过处理图形数据来构成图形对象;显示单元,用于显示所述图像和所述图形对象;控制单元,控制所述视频处理单元和所述图形处理单元将不同的立体感分别应用于所述图像和所述图形对象,从而维持所述图形对象显示在显示所述图像的参考层的上位的覆盖层的状态。据此,能够防止深度倒转现象。
Description
技术领域
本发明涉及显示装置和信号处理装置及其方法,更为详细地讲,涉及能够稳定地显示立体图形对象的显示装置和信号处理装置及其方法。
背景技术
随着电子技术的发展,各种类型的电子装置正被开发。尤其,对于一般家庭最广泛使用的诸如TV等显示装置,相比于过去,正在演化为具有大型化的屏幕并具有更多功能的智能装置。
据此,显示装置所提供的内容也不局限于单纯的广播信号。例如,可设置各种类型的应用和小控件程序,并提供给用户。
而且,最近,具有三维(3D)显示功能的显示装置也快速地得到普及。3D显示装置是通过将立体感应用于显示于画面的对象来使用户观看具有真实感的画面的装置。据此,对于3D显示装置所要输出的3D内容的开发努力也正加速进行。
另外,为了更加有效地利用具有3D显示功能的显示装置并提供最佳视听环境,需要适当地将除画面输出之外的功能实现为符合3D方式。
例如,诸如画面字幕和OSD菜单等各种类型的图形对象将与图像重叠而显示,对于具有大的立体感的内容,可发生这种图形对象被识别为好像位于图像后面的画面倒转现象。据此,存在使观看3D内容时用户感到眩晕和不方便的情况。
因此,出现了对于能够在图形对象与视频输出一起被输出时防止画面倒转现象的技术的需求。
发明内容
技术问题
本发明基于上述必要性,本发明的目的在于提供能够维持使图形对象显示在图像输出层的上面的状态的显示装置和信号处理装置及其方法。
技术手段
为了达到上述目的的,根据本发明的一实施例的一种显示装置包括:视频处理单元,通过处理视频图像来构成图像;图形处理单元,通过处理图形数据来构成图形对象;显示单元,用于显示所述图像和所述图形对象;控制单元,控制所述视频处理单元和所述图形处理单元将不同的立体感分别应用于所述图像和所述图形对象,从而维持所述图形对象显示在显示所述图像的参考层的上位的覆盖层的状态。
这里,还可包括:接收单元,从外部源接收关于所述参考层的第一视差信息和关于所述覆盖层的第二视差信息。
此时,所述控制单元可控制所述视频处理单元以根据所述第一视差信息将立体感应用于所述图像,并且可控制所述图形处理单元以根据所述第二视差信息将立体感应用于所述图形对象。
而且,所述接收单元接收包括所述视频信号、所述图形数据、所述第一视差信息和所述第二视差信息的广播信号,所述视频处理单元和所述图形处理单元可从包括在所述广播信号中的节目信息表或用户数据区域分别检测出所述第一视差信息和第二视差信息。
另外,所述显示装置还可包括:接收单元,从外部源接收关于所述参考层的第一视差信息;视差信息产生单元,产生关于所述覆盖层的第二视差信息。
此时,所述控制单元可控制所述视频处理单元以根据所述第一视差信息将立体感应用于所述图像,并且可控制所述图形处理单元以根据所述第二视差信息将立体感应用于所述图形对象。
而且,所述视差信息产生单元可基于所述第一视差信息产生所述第二视差信息,以使所述覆盖层的视差根据所述参考层的视差改变状态而改变,从而使所述覆盖层与所述参考层之间的深度视差维持在预设置的大小。
或者,所述视差信息产生单元可产生第二视差信息,以使所述覆盖层具有固定的深度。
而且,所述视差信息产生单元可在任意流单位内检测所述参考层的最大视差,并基于所检测的信息产生第二视差信息。
而且,所述视差信息产生单元检测显示所述图像对象的时间点的所述参考层的视差,并基于所检测的信息产生所述第二视差信息。
而且,还可包括:存储单元,存储有预设置的深度信息;视差信息产生单元,根据所述深度信息产生关于所述参考层的第一视差信息和关于所述覆盖层的第二视差信息。
此时,所述控制单元可控制所述视频处理单元以根据所述第一视差信息将立体感应用于所述图像,并且可控制所述图形处理单元以根据所述第二视差信息将立体感应用于所述图形对象。
另外,所述覆盖层可包括具有互不相同的深度的多个层,且每一个层上可显示不同种类的图形对象。
而且,所述每一个层上的图形对象种类的显示顺序可根据用户的选择互相变更。
而且,所述图形对象可包括OSD菜单、字幕、节目信息、应用图标、应用窗口、GUI窗口中的至少一个以上的种类的对象。
另外,根据本发明的一实施例的一种信号处理装置包括:接收单元,接收输入信号;视频处理单元,通过处理包括在所述输入信号中的视频信号来构成能够显示在参考层上的图像;音频处理单元,通过处理包括在所述输入信号中的音频信号来产生声音;图形处理单元,通过处理图形对象来构成能够显示在所述参考层的上位的覆盖层的图形对象;接口单元,将所述图像、所述声音和所述图形对象传送至输出单元。
这里,所述视频处理单元可检测包括在所述输入信号中的第一视差信息并基于第一视差信息将立体感应用于所述图像,所述图形处理单元可检测包括在所述输入信号中的第二视差信息并基于第二视差信息将立体感应用于所述图形对象。
而且,所述信号处理装置还可包括:视差信息产生单元,产生关于所述覆盖层的第二视差信息。
这里,所述视频处理单元可检测包括在所述输入信号中的第一视差信息并基于所述第一视差信息将立体感应用于所述图像,所述图形处理单元可基于所述视差信息产生单元产生的所述第二视差信息将立体感应用于所述图形对象。
而且,所述视差信息产生单元可基于所述第一视差信息产生所述第二视差信息,以使所述覆盖层的视差根据所述参考层的视差改变状态而改变,从而使所述覆盖层与所述参考层之间的深度视差维持在预设置的大小。
或者,所述视差信息产生单元可产生第二视差信息,以使所述覆盖层具有固定的深度。
而且,所述视差信息产生单元可在任意流单位内检测所述参考层的最大视差,并基于所检测的信息产生第二视差信息。
或者,所述视差信息产生单元可检测显示所述图像对象的时间点的所述参考层的视差,并基于所检测的信息产生所述第二视差信息。
或者,所述信号处理装置还可包括:存储单元,存储有预设置的深度信息;视差信息产生单元,根据所述深度信息产生关于所述参考层的第一视差信息和关于所述覆盖层的第二视差信息。而且,所述视频处理单元可检测包括在所述输入信号中的第一视差信息并根据所述第一视差信息将立体感应用于所述图像,所述图形处理单元可检测包括在所述输入信号中的第二视差信息并根据所述第二视差信息将立体感应用于所述图形对象。
另外,所述覆盖层包括具有互不相同的深度的多个层,且每一个层上可显示不同种类的图形对象。
而且,所述每一个层上的图形对象种类的显示顺序可根据用户的选择相互变更。
而且,所述图形对象可包括OSD菜单、字幕、节目信息、应用图标、应用窗口、GUI窗口中的至少一个以上的种类的对象。
另外,根据本发明的一实施例的一种信号处理方法包括如下步骤:通过处理视频信号来构成能够显示在参考层上的图像;通过处理图形对象来构成能够显示在所述参考层的上位的覆盖层的图形对象;将所述图像和所述图像对象传送至输出单元。
这里,还看包括:接收步骤,从外部源接收关于所述参考层的第一视差信息和关于所述覆盖层的第二视差信息。此时,可通过根据所述第一视差信息应用立体感而构成所述图像,可通过根据所述第二视差信息应用立体感而构成所述图形对象。
而且,所述接收步骤可包括如下步骤:接收包括所述视频信号、所述图形对象、所述第一视差信息和所述第二视差信息的广播信号;从包括在所述广播信号中的节目信息表或用户数据区域分别检测所述第一视差信息和所述第二视差信息。
而且,还可包括步骤:从外部源接收关于所述参考层的第一视差信息;产生关于所述覆盖层的第二视差信息。
这里,可通过根据所述第一视差信息应用立体感而构成所述图像,可通过根据所述第二视差信息应用立体感而构成所述图形对象。
而且,产生所述第二视差信息的步骤可包括:通过分析所述第一视差信息来确认所述参考层的视差改变状态;基于所述第一视差信息产生所述第二视差信息,以使所述覆盖层的视差根据所述参考层的视差改变状态而改变,从而使所述覆盖层与所述参考层之间的深度视差维持在预设置的大小。
这里,所产生第二视差信息可使所述覆盖层具有固定的深度。
或者,基于在任意流单位内检测的所述参考层的最大视差产生第二视差信息。
或者,基于显示所述图像对象的时间点检测的所述参考层的视差产生所述第二视差信息。
另外,所述方法还可包括步骤:从存储有预设置的深度信息的存储单元读取所述深度信息;根据所述深度信息产生关于所述参考层的第一视差信息和关于所述覆盖层的第二视差信息。
这里,可通过根据所述第一视差信息应用立体感而构成所述图像,可通过根据所述第二视差信息应用立体感而构成所述图形对象。
而且,所述覆盖层包括具有互不相同的深度的多个层,在每一个层上显示不同种类的图形对象。
而且,所述每一个层上的图形对象种类的显示顺序可根据用户的选择相互变更。
而且,所述图形对象可包括OSD菜单、字幕、节目信息、应用图标、应用窗口、GUI窗口中的至少一个以上的种类的对象。
发明效果
根据以上的本发明的多种实施例,可维持图形对象被显示在输出图像的层的上位层的状态。据此,可防止3D内容和图形对象的位置互换的画面倒转现象。
附图说明
图1是示出根据本发明的一实施例的显示装置的组成的框图;
图2是用于说明参考层和多个覆盖层之间的关系的示图;
图3至图5是根据本发明的各种实施例的显示装置的组成的框图;
图6至图8是用于说明固定覆盖层的视差(disparity)的各种实施例的示图;
图9至图10是用于说明动态地改变覆盖层的视差的实施例的示图;
图11是示出用于改变覆盖层的状态的UI的一示例的示图;
图12至图14是示出根据本发明的各种实施例的信号处理装置的组成的示图;
图15是示出根据本发明的一实施例的广播发送装置的组成的框图;
图16和图17是用于说明根据节目信息表的内容而改变的显示状态的示图;
图18是用于说明根据本发明的各种实施例的信号处理方法的流程图。
具体实施方式
下面,利用附图具体说明本发明。
图1是示出根据本发明的一实施例的显示装置的组成的框图。根据图1,显示装置100包括视频处理单元110、图形处理单元120、控制单元130、显示单元140。显示装置表示诸如TV、PC、电子相册、PDA、手机、笔记本PC、平板PC、电子书等具有显示功能的各种类型的装置。
视频处理单元110是通过处理视频信号来构成图像的部分。这种视频信号可从广播发送装置传送的广播信号检测,或者也可以是从诸如网络服务器、内部或外部存储介质、再现装置等各种外部源提供的信号。
视频信号可以是用于3D输出的立体图像。立体图像表示两个以上的图像。作为一示例,从不同角度拍摄一个被摄体的两个图像,即第一输入图像和第二输入图像可以是立体图像。为了便于说明,在本说明书中,将第一输入图像称作左眼图像(或左侧图像),将第二输入图像称作右眼图像(或右侧图像)来进行说明。当从如上所述的各种源原样地传送了包括左眼图像和右眼图像二者的立体图像时,视频处理单元110可通过分别解码这些数据来产生构成一个3D图像的左眼图像帧和右眼图像帧。
另外,视频信号也可是2D图像。此时,视频处理单元110可通过对2D图像执行诸如解码、去交织、缩放等各种信号处理来构成一个图像帧。
相反,若在输入2D图像时也进行3D输出,则视频处理单元110可以将基于所输入的2D图像构成的一个图像帧作为基准帧,通过移动与该帧内的各个对象对应的像素的位置来产生新的帧。这里,基准帧可被用作左眼图像帧,具有视差(disparity)的新的帧可被用作右眼图像帧。
图形处理单元120可通过处理图像数据来构成图像对象。这里,图形对象可以是对应于图像的字幕(subtitle or closed caption)。而且,不限于此,诸如OSD菜单、节目信息、应用图标、应用窗口、GUI窗口等各种类型的对象可由图像处理单元120产生。
控制单元130可控制视频处理单元110和图像处理单元120以分别将不同立体感应用于在视频处理单元110构成的图像和在图像处理单元120构成的图形对象,来防止产生画面倒转现象。具体地讲,当在视频处理单元110中以3D方式构成图像时,控制单元130可分别控制视频处理单元110和图像处理单元120,以使维持深度感比显示所述3D图像的层更大的层上显示图形对象的状态。
下面,将显示图像的层称作参考层,将显示图形对象的层称作覆盖层。在覆盖层上可显示除图像之外的具有图形要素的各种类型的图形对象。覆盖层的视差可被设置为比显示图像的参考层更大的值。具体地讲,可被设定为能够保证不发生的倒转的值。
显示单元140将在视频处理单元110构成的图像帧和在图形处理单元120中构成的图形对象显示在画面上。这里,显示单元140可通过交替地显示左眼图像帧和右眼图像帧来以3D显示图像。而且,可通过交替地显示左图形对象和右图形对象来以3D显示图形对象。
另外,当本显示装置100实现为裸眼式3D显示装置时,视频处理单元110可将图像实现为多视点图像,图形处理单元120可将图形对象实现为多视点对象。此时,显示单元140可以按空间划分而输出多视点图像和多视点对象,从而不佩戴眼镜也能够识别与被摄体的距离感,于是识别为3D图像。具体地讲,此时,显示单元140可被实现为基于视差光栅(Parallax Barrier)技术或透镜(Lenticular)技术的显示面板。
图2示出显示参考层和覆盖层的状态的一示例。根据图2,图像和图像对象分别以3D方式输出在显示装置100的画面上。在3D的方式的情况下,根据视差而显示各种深度感。当存在如此的具有不同深度的多个对象时,可将这种深度感分别称作层或平面(plane)。多个层中的显示图像的参考层10对应于最底部(base)层,在其上位可布置一个以上的覆盖层20、30。虽然图2示出了一个参考层10,但是当图像以3D显示时,参考层10本身也可布置为多个。此时,即便是全部覆盖层中的最下面的覆盖层20也被实现为至少具有与最上位的参考层10相同的深度感或具有更大的深度感。据此,即使3D内容的立体感大,图像对象总是显示为感觉上比图像更接近于用户,从而不发生倒转。
如上所述,各种类型的图形对象可全部显示在一个覆盖层上,也可分别显示在根据种类而具有不同深度感的多个覆盖层上。
另外,可以以各种方式提供参考层的视差信息和覆盖层的视差信息。
图3是示出根据本发明的一实施例的显示装置的详细构成示例的框图。如图3所示,显示装置100可包括视频处理单元110、图形处理单元120、控制单元130、显示单元140和接收单元150。
根据一实施例接收单元150可从外部源接收关于参考层的第一视差信息和关于覆盖层的第二视差信息。
这里,外部源可以是传送广播信号的广播局,也可以是诸如其它存储介质、外部服务器、再现装置等各种装置。外部源可将第二视差信息的大小设置为大于第一视差信息的值并传送,以使图形对象总是显示在图像的上位。
当由接收单元150接收第一视差信息和第二视差信息二者时,控制单元130控制视频处理单元110以根据第一视差信息将立体感应用于图像,并控制图形处理单元120以根据第二视差信息将立体感应用于图形对象。这里,第一视差信息表示关于可参考为覆盖层的显示基准的视频的深度(depth)或视差的信息。而且,第二视差信息表示直接表示覆盖层的深度或视差的明示的值。利用这种第一视差信息和第二视差信息,显示装置100可在不发生画面倒转现象的同时,以3D方式显示图像和图形对象。
图4是用于说明视频处理单元110和图形处理单元120的详细构成的显示装置100的构成示例。根据图4,显示装置包括视频处理单元110、图形处理单元120、接收单元150和解复用器160。
这里,解复用器150表示从通过接收单元150接收的广播信号检测出视频信号和图形数据的构成。即,如上所述,接收单元150可接收包括视频信号、图形数据、第一视差信息和第二视差信息的广播信号。虽未在图4中示出,但是接收单元150中可设置有诸如天线、RF下转换单元、解调单元、均衡单元等各种构成。据此,通过将接收的RF信号下转换为中间频带,然后执行解调和均衡来恢复信号,并提供给解复用器160。解复用器160通过对提供的信号进行解复用,来将视频信号提供给视频处理单元110,图形数据提供给图形处理单元120。
另外,虽然在图1、图3和图4中未示出,但是由于广播信号还包括音频信号,所以还可包括处理音频信号的音频处理单元(未示出)。但是,音频信号与图形对象处理没有直接关联,因此下面省略示出和说明。
另外,第一视差信息和第二视差信息可记录在广播信号中的预定区域。作为一示例,广播信号中可设置有记录节目信息的节目信息表区域、广播操作者或用户能够任意使用的用户数据区域等。可利用这种有效区域来传送第一视差信息和第二视差信息。对此,将在后述的部分中进行具体说明。
根据图4,视频处理单元110包括视频解码器111、L缓冲器112、R缓冲器113、L帧构成单元114、R帧构成单元115、第一开关116。
视频解码器111对从解复用器160提供的视频信号进行解码。具体地讲,可被实现为诸如RS解码、维特比(viterbi)解码、turbo解码、格栅(trellis)解码等各种解码或其组合。而且,虽未在图4中示出,当在发送过程中实现交织时,视频处理单元110中可设置有用于执行解交织的解交织单元。
在视频解码器111中解码的数据中的左眼图像数据存储在L缓冲器112中,右眼图像数据存储在R缓冲器113中。
L帧构成单元114利用存储在L缓冲器112中的数据来产生左眼图像帧。另外,R帧构成单元115利用存储在R缓冲器113中的数据来产生右眼图像帧。
第一开关116交替地输出L帧构成单元114和R帧构成单元115分别构成的左眼图像帧和右眼图像帧。此时,左眼图像帧和右眼图像帧之间可显示黑帧。而且,每次输出时,不是只输出一个左眼图像帧和一个右眼图像帧,而是可输出相同数量的多个左眼图像帧和相同数量的多个右眼图像帧。
另外,图形处理单元120包括图形数据解码器121、L对象构成单元122、R对象构成单元123、第二开关124。
图形数据解码器121对从解复用器160提供的图形数据进行解码。解码方式可对应于发送侧所应用的编码方式,这种数据编码和解码方式可直接应用公知技术。所以,省略具体的解码方式及构成的图示和说明。
在图形数据解码器121解码的数据分别被提供给L对象构成单元122和R对象构成单元123。虽在图4中未示出,但是显然的是,在图形处理单元120中也可设置L缓冲器、R缓冲器来使用。在L对象构成单元122构成的左眼图形对象和R对象构成单元123中构成的右眼图形对象之间的视差被维持为大于L帧构成单元114和R帧构成单元115中构成的帧之间的视差的值。
通过与第一开关116的操作联动,第二开关124交替地输出L对象构成单元122构成的左眼图形对象和R对象构成单元123构成的右眼图形对象。据此,在一个画面上,图像和与该图像对应的图形对象可具有彼此不同的深度感且重叠并以3D方式显示。
图5是示出根据本发明的另一实施例的显示装置的构成的框图。根据图5,显示装置包括视频处理单元110、图形处理单元120、控制单元130、显示单元140、接收单元150、视差信息产生单元170、存储单元180。
接收单元150接收将会从显示装置输出的数据。具体地讲,可从诸如广播局、网络服务器、存储介质、再现装置等各种源接收。
接收的数据可包括与图像的数据相关的信息。即,接收单元150从外部源接收关于参考层的第一视差信息。
据此,控制单元130可控制视频处理单元110以根据所接收的第一视差信息将立体感应用于图像。
而且,可以不包括关于将会显示图形对象的覆盖层的深度感的信息。如此,当通过接收单元150仅接收关于参考层的第一视差信息时,可使用视差信息产生单元170。
即,视差信息产生单元170产生关于覆盖层的第二视差信息。控制单元130可控制图像处理单元120以根据视差信息产生单元170产生的第二视差信息将立体感应用于图形对象。
可根据实施例以各种方式产生第二视差信息。即,当图像以3D显示时,参考层的视差可根据时间而变化。视差信息产生单元170可通过分析第一视差信息来确认视差之后,利用确认结果来产生第二视差信息。
此时,可存在与参考层的视差改变无关地固定覆盖层的视差的固定型以及根据参考层的视差改变来改变覆盖层的视差的动态型。
当实现为固定型时,视差信息产生单元170可产生第二视差信息,以使覆盖层总是具有固定的深度。
图6至图8示出在显示装置中固定地确定参考层的视差的方式的各种示例。
图6示出根据时间的参考层的视差的峰值。如图6所示,视差信息产生单元170可在任意流单位内检测出参考层的最大视差,并以检测出的信息为基准产生第二视差信息。流单位可以是一个图片的组(GoP:Group of Picture),也可以是一个广播节目单位、给定数量的包数量单位、固定时间单位等。
如图6所示,当发生需要在t2时间点上显示图形对象的事件时,确认到目前为止的参考层的最大视差。据此,当判断出在t1时间点上具有最大视差时,视差信息产生单元170可将t1时间点的视差或比该视差增加预定值的视差确定为覆盖层的视差,据此产生第二视差信息。
或者,如图7所示,可直接利用显示图形对象的时间点t3的参考层的视差来产生第二视差信息。即,第二视差信息可确定为,使其固定地具有与将图像和图形对象一起显示的时间点的参考层相同程度的深度感。
这种将会显示覆盖层的事件可以是输入字幕的情形、输入用于确认OSD菜单或图标的确认命令的情形、应用或小控件等运行而显示UI窗口的情形等,此外,可包括显示图像对象的所有情形。
而且,如上所述,覆盖层可以是多个。
图8示出分别固定地确定多个覆盖层的视差的方式。根据图8,显示字幕的第一覆盖层(即,图形平面(Graphic plane))的视差被确定为与参考层的最大视差相同的值。相反,显示OSD菜单的第二覆盖层(即,OSD平面)具有比第一覆盖层略大的视差。据此,可根据图形对象的种类具有不同的深度值。
另外,作为另一示例,视差信息产生单元170可产生使覆盖层具有动态的深度值的第二视差信息。即,视差信息产生单元170可基于第一视差信息产生第二视差信息,以使覆盖层视差根据参考层的视差改变状态而改变,从而其深度差维持在预设置的大小。
图9和图10是用于说明在显示装置中动态地确定改变覆盖层的视差的方式的示图。
根据图9可知,参考层的视差根据时间而持续变化,覆盖层的视差以参考层为基准维持一定间距地变化。
图10是示出参考层的深度感以显示装置的画面为基准沿上下方向改变,并且与此联动,覆盖层的深度感也沿上下方向改变的状态。
如上所述,当从外部仅提供第一视差信息时,可利用第一视差信息来固定或动态地确定第二视差信息。
另外,虽然上面说明了仅提供第一视差信息的情况,但是并不是必需限于此。即,在仅提供第二视差信息的情况下,可以以第二视差信息为基准产生第一视差信息。此时,显然的是,可以以可变型或动态型确定参考层的视差。
另外,作为另一示例,第二视差信息本身可被预先确定为任意值并存储在存储单元180中。此时,视差信息产生单元170可利用存储在存储单元180中的存储值产生第二视差信息,而与第一视差信息无关。
另外,根据另一示例,还可以存在从外部不提供第一视差信息和第二视差信息二者的情形。此时,视差信息产生单元170可利用预设置的视差信息来产生第一视差信息和第二视差信息。
即,存储单元180中可存储有任意给定的深度信息或视差信息。作为一示例,假设画面的深度为0,则参考层可被设置为视差在-10~+10像素程度内改变,第一覆盖层的视差可被设置为+15像素程度,第二覆盖层的视差可被设置为+20像素程度。这种视差可根据显示装置的种类而具有不同大小。即,相比于诸如手机的小型显示装置,具有大画面的TV可被设置有稍微大的视差信息。
视差信息产生单元170可根据存储在存储单元180中的深度信息产生第一视差信息和第二视差信息,并提供给视频处理单元110和图形处理单元120。
或者,视差信息产生单元170通过比较在视频信号中构成的左眼图像帧和右眼图像帧来确认匹配点之间的距离,据此来分析参考层的视差。
即,视差信息产生单元170在将左眼图像帧和右眼图像帧分别划分为多个块之后,比较各个块的像素代表值。据此,将像素代表值包含在类似范围内的块确定为匹配点。据此,基于确定的匹配点之间的移动距离,产生深度图。即,将在左眼图像中构成被摄体的a像素的位置与右眼图像中a像素的位置进行比较,并计算出其视差。据此,产生与计算出的视差对应的灰度等级的图像,即深度图。
深度可被定义为被摄体与相机之间的距离、被摄体与形成被摄体的图像的记录介质(例如,胶片)之间的距离、立体感的程度等。因此,左眼图像与右眼图像的点之间的距离差即对应于视差,并且其值越大,立体感也相应地增加。深度图表示将这种深度的变化状态构成为一个图像的图。
视差信息产生单元170可基于这种深度图确定覆盖层的视差信息,以固定或动态地确定第二视差信息。
另外,如上所述,覆盖层可被设置为多个,可在每个覆盖层上显示相互不同种类的图形对象。例如,诸如OSD菜单的图形对象可显示在最上位的覆盖层,诸如字幕的图像对象可显示在其下位的覆盖层。这种显示顺序可根据用户的选择而改变。
图11示出用于使用户改变图像对象的显示顺序的用户接口(UI)的一示例。
根据图11,在显示装置100的画面上显示多个菜单a、b、c。当用户选择其中的图形强调模式(a)时,诸如字幕的图形对象将布置在最上位的覆盖层,剩余图像对象将显示在其下位上。或者,当OSD强调模式(b)被选择时,诸如OSD菜单的图形对象将布置在最上位的覆盖层,剩余图形对象可被显示在其下位上。
或者,用户可通过选择用户设置模式(c)来直接设置各个图形对象的深度。即,如图11所示,用户设置模式(c)被选择时,显示新的UI(d)。用户可在这种UI(d)上直接设置图形字幕的深度、OSD菜单深度等。此时,虽然如图11所示地使用条形图来设置深度,但是,此外,用户可通过直接输入数字或文本等来设置深度。
另外,虽然上述部分中说明了在显示装置中执行的动作,但是这种动作可在不具有显示手段的其它装置中实现。下面,作为不具有显示手段的其它装置的一示例对信号处理装置进行说明。
图12示出根据本发明的一实施例的信号处理装置的构成的框图。根据图12,信号处理装置200包括OSD解码器210、存储器220、PID滤波器230、视频解码器240、图形解码器250、3D管理器单元260、OSD缓冲器270、图形缓冲器280、视频缓冲器290、复用器295。这里,信号处理装置可以是机顶盒或诸如DVD、蓝光播放器、VCR等再现各种存储介质的再现装置,或者可被实现为内置于各种装置内的芯片或模块。
OSD解码器210根据用户的命令从存储器220读取OSD数据之后进行解码,并将OSD数据提供给3D管理器单元260。3D管理器单元260利用提供的OSD数据产生左眼OSD对象和右眼OSD对象。此时,左眼OSD对象和右眼OSD对象之间的视差被设置为适合于将要显示OSD菜单的覆盖层的视差。产生的左眼OSD菜单和右眼OSD菜单被存储在OSD缓冲器270中。
另外,当接收到传输流(TS:Transprot Stream)时,检测单元230通过处理该传输流来分离图形数据和视频数据。具体地讲,当传输流为基于MPEG-2标准的流时,检测单元230从MPEG-2传输流检测节目固有信息(PSI)。据此,使用PID滤波器(Program IDentifier filter)来获得诸如ATSC节目和系统信息协议(PSIP)表、DVB服务信息(SI)、条件访问表(CAT)、DSM-CC消息、私人表数据等所有类型的PSI数据。检测单元230可利用获得的数据分离视频数据和图形数据。另外,检测单元230检测出与关于覆盖层的视差信息的深度包来提供给3D管理器单元260。
图形数据被提供给图形解码器250。图像解码器250对图形数据解码并提供给3D管理器单元260。3D管理器单元260利用从检测单元230提供的深度包以及解码的图形数据来产生左眼图形对象和右眼图形对象。左眼图形对象与右眼图像对象之间的视差被设置为适合于将要显示字幕的覆盖层的视差。产生的左眼图形对象和右眼图形对象存储于图形缓冲器280中。如此,关于覆盖层的视差的信息可以与视频信号一起通过同一流传送,或者通过单独流传送。
另外,视频解码器240对视频数据进行解码并提供给视频缓冲器290。当包括在TS内的视频信号为2D信号时,视频缓冲器290中存储2D图像帧。相反,当视频信号本身包括左眼图像帧和右眼图像帧时,无需其它的3D变换处理过程,左眼图像帧和右眼图像帧可被存储于视频缓冲器290中。虽然在图12中省略了示出,但是在进一步包括3D图像变换模块时,显然的是即使输了2D视频信号,也可利用该2D视频信号来产生左眼图像帧和右眼图像帧。
如此,存储于OSD缓冲器270、图形缓冲器280、视频缓冲器290中的各个数据被复用器290组合,从而构成画面数据。构成的画面数据通过单独设置的接口传送到外部显示手段,或者可存储于单独设置的存储单元中。
图13是示出信号处理装置的另一构成的框图。根据图13,信号处理装置300包括接收单元310、视频处理单元320、音频处理单元330、图形处理单元340、接口单元350。
接收单元310接收输入信号。此处的输入信号可以是从广播局发送的广播信号,也可以是从内外部存储介质或再现装置等提供的多媒体信号。
包括在接收单元310所接收的输入信号中的视频信号被提供给视频处理单元320。视频处理单元320通过处理视频信号来构成将要显示在参考层上的图像。
另外,音频处理单元330通过处理包括在输入信号中的音频信号来产生声音。
图形处理单元340通过处理图形数据来构成图形对象,以显示在作为参考层的上位的覆盖层。这里,图形数据可以是包括在输入信号中的字幕数据等,可以是从其它源提供的数据。例如,图形数据可以是OSD菜单或各种图标、窗口。
在各个处理单元处理的数据通过接口单元350传送到输出手段。
另外,如上述的各个实施例所说明,关于视频数据的视差信息(即,第一视差信息)和关于图形对象的视差信息(即,第二视差信息)中的至少一个可从外部提供,或者二者可不从外部提供。
作为一示例,当第一视差信息和第二视差信息包括在输入信号时,视频处理单元320从输入信号检测第一视差信息,基于检测的第一视差信息将立体感应用于图像。相反,图形处理单元检测包括在输入信号中的第二视差信息,并基于第二视差信息将立体感应用于图形对象。
图14是示出第一视差信息和第二视差信息中的至少一个不被提供时的信号处理装置的构成示例的框图。根据图14,信号处理装置300包括接收单元310、视频处理单元320、音频处理单元330、图形处理单元340、接口单元350、视差信息产生单元360、存储单元370。
当仅第一视差信号包括在输入信号时,视差信息产生单元360产生关于覆盖层的第二视差信息。
具体地讲,视差信息产生单元360产生第二视差信息,使得覆盖层的视差根据参考层的视差的改变而改变。即,如上所述,动态地改变参考层的深度。
或者,视差信息产生单元360可产生第二视差信息,以使参考层具有固定的深度。
对此,上面参照图6至图10已进行了具体描述,因此省略重复的说明。
视差信息产生单元360将产生的第二视差信息提供给图形处理单元340。图形处理单元340根据在视差信息产生单元360产生的第二视差信息将立体感应用于图形对象。
另外,根据另一示例,第一视差信息和第二视差信息可均不包括在输入信号中。
此时,视差信息产生单元360利用存储在存储单元370中的深度信息来产生第一视差信息和第二视差信息。
据此,视频处理单元320和图形处理单元340分别利用第一视差信息和第二视差信息来将立体感应用于图像和图形对象。
图15是根据本发明的一实施例的发送装置的构成的框图。根据图15,发送装置400包括视频编码器410、视频封包单元420、音频编码器430、音频封包单元440、数据编码器450、封包单元460、视差信息处理单元470、复用器480和输出单元490。
视频编码器410、音频编码器430、数据编码器460分别对视频数据、音频数据、一般数据进行编码。
视频封包单元420、音频封包单元440、封包单元460分别构成包括编码的数据的包。具体地讲,构成包括头、净荷、奇偶校验等的多个包。
复用器480对构成的各个包进行复用。具体地讲,将从视频封包单元420、音频封包单元440、封包单元460提供的多个包组合为预设置的数量。
输出单元490在对组合了包的帧执行随机化、RS编码、交织、栅格编码、同步复用、导频插入、调制、RS上转换等处理之后,通过天线进行输出。
另外,视差信息处理单元470产生关于参考层和覆盖层中的至少一个的视差的信息,并提供给复用器480。这种信息可记录在流内的预设置的字段中。具体地讲,可记录在节目映射表描述符(PMT descriptor)、用户数据区域等。另外,可通过单独的流被提供。这种视差信息可作为诸如深度类型信息、深度控制允许信息等各种参数而被提供。
下面,说明视差信息的各种示例。
表1
表1表示用于通知覆盖层的深度或视差的信息的语法。表1中的depth_control_permission是能够使用户直接调整覆盖层的深度的参数。即,当其值为1时,用户可执行深度调整。相反,当其值为0时,即使在可进行3D再现的外部再现装置或显示装置上可进行深度调整,也不允许根据作家(author)的意图调整深度。
另外,可通过利用如下的深度类型的函数来将覆盖层的深度或视差提供给接收机(即,显示装置或信号处理装置)侧。
表2
depth_style() | 比特数 |
... | |
video_mode | 1 |
optimized_graphic_depth | 8 |
osd_offset | 8 |
min_graphic_depth | 8 |
max_graphic_depth | 8 |
reserved | 7 |
... | |
} |
这里,video-mode是用于通知2D模式还是3D模式的信息。即,当0时表示2D模式,在当1时表示3D模式。
optimized_graphic_depth表示由作者决定的字幕的最佳深度或视差,osd_offset表示由作者决定的OSD菜单的深度或视差。
而且,min_graphic_depth表示防止发生深度倒转现象的给定的覆盖层的最小深度或视差,max_graphic_depth表示用于最小化用户的观看的不便的同时使立体效果最佳化的覆盖层的最大深度或视差。
另外,如表1的overlay_plan_depth()的定义位置可以是PMT描述符部分。具体地讲,关于overlay_plan_depth的描述符可被定义为如下表。
表3
overlay_plane_depth_descriptor{ | 比特数 |
... | |
descriptor_tag | 8 |
descriptor_length | 8 |
overlay_plane_depth() | |
... |
overlay_plane_depth_descriptor可按如表3一样的方式定义在ISO/IEC13818-1中定义的descriptor_tag的User private区域中。
此外,也可在ES User data区域中定义overlay_plane_depth(),但是不限制其定义周期。
另外,表2的video-mode、optimized_graphic_depth、osd_offset、min_graphic_depth、max_graphic_depth等可被定义为各种值。
具体地讲,可被定义为如表4所示。
表4
video_mode | 0(2D) |
min_graphic_depth | 10 |
optimized_graphic_depth | 15 |
max_graphic_depth | 20 |
osd_offset | 0 |
图16示出如表4一样地定义参数时的画面构成。即,如表4所示,osd_offset被设置为0时,OSD菜单11显示在显示图像的层,即参考层上。相反,min_graphic_depth显示为10时,图形对象12显示在覆盖层上。
或者,可如下面的表5定义各个参数。
表5
video_mode | 0(2D) |
min_graphic_depth | 0 |
optimized_graphic_depth | 0 |
max_graphic_depth | 0 |
osd_offset | 10 |
图17示出如表5一样地定义参数时的画面构成。即,如表5所示,osd_offset设置为10时,OSD菜单11显示在覆盖层上。相反,图形对象12显示在参考层上。
如此,当关于图形对象的视差信息从外部提供时,可根据该视差信息将各种图形对象显示于至少一个覆盖层或参考层上。
另外,为了定义覆盖层的深度或视差,可单独定义PES流。具体地讲,可设置如下格式的PES流。
表6
syntax | 大小 |
PES_data_field(){ | |
data_identifier | 8 |
while nextbits()==sync_byte{ | |
overlay_plane_depth_segment() | |
} | |
end_0f_PES_data_field_marker | 8 |
} |
表6中,data_identifier表示用于区分具有关于覆盖层的深度或视差的信息的流的标识符。这种单独的流可被如图12至图14的各种结构的接收机接收和处理。
表6的overlay_plane_depth_segment可由与如表2的depth_style相同含义的参数构成。
另外,如表3的overlay_plane_depth_descriptor可如下表一样地被定义。
表7
overlay_plane_depth_descriptor{ | 比特数 |
descriptor_tag | 8 |
descriptor_length | 8 |
depth_control_permission | 1 |
reserved | 7 |
} |
根据表7,可传送(signaling)overlay_plane_depth流是否存在,并且可提供关于是否允许调整深度的信息。
图18用于说明根据本发明的一实施例的信号处理方法的流程图。根据图18,当接收到信号(S1810)时,利用所接收的信号来构成图像(S1820)。
另外,当是需要显示图形数据的状况(S1830)时,构成图形对象(S1840)。这里,需要显示图形对象的状况可以包括存在与图像一起显示的字幕的情形,输入用于选择OSD菜单的用户命令的情形,输入显示关于其它应用或小控件的图标、窗口等的用户命令的情形等各种情形。
另外,通过应用立体感来产生图形对象,以使该图像对象显示在显示图像的参考层的上位的覆盖层上。如上所述,可从外部提供关于覆盖层的视差的信息,或者可基于参考层的视差在装置内部自己产生关于覆盖层的视差的信息,或者可基于单独存储的深度信息来产生关于覆盖层的视差的信息。
据此,图像对象被传送至外部装置(S1850)。这里,外部装置可以是单独设置在执行本方法的装置外部的显示装置,也可以表示同一装置内部的不同芯片。
这种信号处理方法可如上所述地以各种方式被实现。即,可在多个覆盖层上显示不同种类的图形对象,也可改变覆盖层之间的显示顺序。
此外,虽未在流程图中示出,但由上述各个装置执行的操作可全部被实现为根据本发明的各种实施例的信号处理方法。对此,由于在上述各个实施例中已进行具体说明,所以省略重复说明。
如上所述,根据本发明的各种实施例,在可实现3D再现的装置上,可预先防止图像和图形对象的深度倒转的倒转现象和由此引发的疲劳感。
另外,用于执行根据上述的本发明的各种实施例的方法的程序可被存储于各种类型的记录介质,并被使用。
具体地讲,用于执行上述方法的代码可被存储于诸如随机存取存储器(RAM)、闪存、只读存储器(ROM)、可擦除可编程只读存储器(EPROM)、电可擦除可编程只读存储器(EEPROM)、寄存器、硬盘、移动盘、存储卡、USB存储器、CD-ROM等终端可读取的各种类型的记录介质。
另外,虽然上面示出和描述了本发明的优选实施例,但是本发明不限于上述特定实施例,并且在不脱离权利要求所请求的本发明的发明构思的前提下,本发明所属的技术领域的具有普通知识的技术人员可进行各种变形,并且这种变形不应与本发明的技术思想或展望单独地理解。
权利要求书(按照条约第19条的修改)
1.一种显示装置,包括:
视频处理单元,通过处理视频图像来构成图像;
图形处理单元,通过处理图形数据来构成图形对象;
显示单元,用于显示所述图像和所述图形对象;
控制单元,控制所述视频处理单元和所述图形处理单元将不同的立体感分别应用于所述图像和所述图形对象,从而维持所述图形对象显示在显示所述图像的参考层的上位的覆盖层的状态。
2.根据权利要求1所述的显示装置,还包括:接收单元,从外部源接收关于所述参考层的第一视差信息和关于所述覆盖层的第二视差信息,
其中,所述控制单元控制所述视频处理单元以根据所述第一视差信息将立体感应用于所述图像,并控制所述图形处理单元以根据所述第二视差信息将立体感应用于所述图形对象。
3.根据权利要求2所述的显示装置,所述接收单元接收包括所述视频信号、所述图形数据、所述第一视差信息和所述第二视差信息的广播信号,
所述视频处理单元和所述图形处理单元从包括在所述广播信号中的节目信息表或用户数据区域分别检测出所述第一视差信息和第二视差信息。
4.根据权利要求1所述的显示装置,还包括:
接收单元,从外部源接收关于所述参考层的第一视差信息;
视差信息产生单元,产生关于所述覆盖层的第二视差信息,
所述控制单元控制所述视频处理单元以根据所述第一视差信息将立体感应用于所述图像,并控制所述图形处理单元以根据所述第二视差信息将立体感应用于所述图形对象。
5.根据权利要求4所述的显示装置,其中,所述视差信息产生单元基于所述第一视差信息产生所述第二视差信息,以使所述覆盖层的视差根据所述参考层的视差改变状态而改变,从而使所述覆盖层与所述参考层之间的深度差维持在预设置的大小。
6.根据权利要求4所述的显示装置,其中,所述视差信息产生单元产生第二视差信息,以使所述覆盖层具有固定的深度。
7.根据权利要求6所述的显示装置,其中,所述视差信息产生单元在任意流单位内检测所述参考层的最大视差,并基于所检测的信息产生第二视差信息。
8.根据权利要求6所述的显示装置,其中,所述视差信息产生单元检测显示所述图像对象的时间点的所述参考层的视差,并基于所检测的信息产生所述第二视差信息。
9.根据权利要求1所述的显示装置,还包括:
存储单元,存储有预设置的深度信息;
视差信息产生单元,根据所述深度信息产生关于所述参考层的第一视差信息和关于所述覆盖层的第二视差信息,
其中,所述控制单元控制所述视频处理单元以根据所述第一视差信息将立体感应用于所述图像,并控制所述图形处理单元以根据所述第二视差信息将立体感应用于所述图形对象。
10.根据权利要求1至9中的任一项所述的显示装置,其中,所述覆盖层包括具有互不相同的深度的多个层,
在每一个层上显示不同种类的图形对象。
11.根据权利要求10所述的显示装置,其中,所述每一个层上的图形对象种类的显示顺序根据用户的选择能够互相变更。
12.根据权利要求10所述的显示装置,其中,所述图形对象包括OSD菜单、字幕、节目信息、应用图标、应用窗口、GUI窗口中的至少一个以上的种类的对象。
13.一种信号处理方法,包括如下步骤:
通过处理视频信号来构成能够显示在参考层上的图像;
通过处理图形对象来构成能够显示在所述参考层的上位的覆盖层上的图形对象;
将所述图像和所述图像对象传送至输出单元。
14.根据权利要求13所述的信号处理方法,还包括:接收步骤,从外部源接收关于所述参考层的第一视差信息和关于所述覆盖层的第二视差信息,
通过根据所述第一视差信息应用立体感而构成所述图像,通过根据所述第二视差信息应用立体感而构成所述图形对象。
15.根据权利要求13所述的信号处理方法,其中,还包括步骤:
从外部源接收关于所述参考层的第一视差信息;
产生关于所述覆盖层的第二视差信息,
通过根据所述第一视差信息应用立体感而构成所述图像,通过根据所述第二视差信息应用立体感而构成所述图形对象。
Claims (35)
1.一种显示装置,包括:
视频处理单元,通过处理视频图像来构成图像;
图形处理单元,通过处理图形数据来构成图形对象;
显示单元,用于显示所述图像和所述图形对象;
控制单元,控制所述视频处理单元和所述图形处理单元将不同的立体感分别应用于所述图像和所述图形对象,从而维持所述图形对象显示在显示所述图像的参考层的上位的覆盖层的状态。
2.根据权利要求1所述的显示装置,还包括:接收单元,从外部源接收关于所述参考层的第一视差信息和关于所述覆盖层的第二视差信息,
其中,所述控制单元控制所述视频处理单元以根据所述第一视差信息将立体感应用于所述图像,并控制所述图形处理单元以根据所述第二视差信息将立体感应用于所述图形对象。
3.根据权利要求2所述的显示装置,所述接收单元接收包括所述视频信号、所述图形数据、所述第一视差信息和所述第二视差信息的广播信号,
所述视频处理单元和所述图形处理单元从包括在所述广播信号中的节目信息表或用户数据区域分别检测出所述第一视差信息和第二视差信息。
4.根据权利要求1所述的显示装置,还包括:
接收单元,从外部源接收关于所述参考层的第一视差信息;
视差信息产生单元,产生关于所述覆盖层的第二视差信息,
所述控制单元控制所述视频处理单元以根据所述第一视差信息将立体感应用于所述图像,并控制所述图形处理单元以根据所述第二视差信息将立体感应用于所述图形对象。
5.根据权利要求4所述的显示装置,其中,所述视差信息产生单元基于所述第一视差信息产生所述第二视差信息,以使所述覆盖层的视差根据所述参考层的视差改变状态而改变,从而使所述覆盖层与所述参考层之间的深度差维持在预设置的大小。
6.根据权利要求4所述的显示装置,其中,所述视差信息产生单元产生第二视差信息,以使所述覆盖层具有固定的深度。
7.根据权利要求6所述的显示装置,其中,所述视差信息产生单元在任意流单位内检测所述参考层的最大视差,并基于所检测的信息产生第二视差信息。
8.根据权利要求6所述的显示装置,其中,所述视差信息产生单元检测显示所述图像对象的时间点的所述参考层的视差,并基于所检测的信息产生所述第二视差信息。
9.根据权利要求1所述的显示装置,还包括:
存储单元,存储有预设置的深度信息;
视差信息产生单元,根据所述深度信息产生关于所述参考层的第一视差信息和关于所述覆盖层的第二视差信息,
其中,所述控制单元控制所述视频处理单元以根据所述第一视差信息将立体感应用于所述图像,并控制所述图形处理单元以根据所述第二视差信息将立体感应用于所述图形对象。
10.根据权利要求1至9中的任一项所述的显示装置,其中,所述覆盖层包括具有互不相同的深度的多个层,
在每一个层上显示不同种类的图形对象。
11.根据权利要求10所述的显示装置,其中,所述每一个层上的图形对象种类的显示顺序根据用户的选择能够互相变更。
12.根据权利要求10所述的显示装置,其中,所述图形对象包括OSD菜单、字幕、节目信息、应用图标、应用窗口、GUI窗口中的至少一个以上的种类的对象。
13.一种信号处理装置,包括:
接收单元,接收输入信号;
视频处理单元,通过处理包括在所述输入信号中的视频信号来构成能够显示在参考层上的图像;
音频处理单元,通过处理包括在所述输入信号中的音频信号来产生声音;
图形处理单元,通过处理图形对象来构成能够显示在所述参考层的上位的覆盖层的图形对象;
接口单元,将所述图像、所述声音和所述图形对象传送至输出单元。
14.根据权利要求13所述的信号处理装置,其中,所述视频处理单元检测包括在所述输入信号中的第一视差信息并基于第一视差信息将立体感应用于所述图像,
所述图形处理单元检测包括在所述输入信号中的第二视差信息并基于第二视差信息将立体感应用于所述图形对象。
15.根据权利要求15所述的信号处理装置,还包括:视差信息产生单元,产生关于所述覆盖层的第二视差信息,
其中,所述视频处理单元检测包括在所述输入信号中的第一视差信息并基于所述第一视差信息将立体感应用于所述图像,
所述图形处理单元基于所述视差信息产生单元产生的所述第二视差信息将立体感应用于所述图形对象。
16.根据权利要求15所述的信号处理装置,其中,所述视差信息产生单元基于所述第一视差信息产生所述第二视差信息,以使所述覆盖层的视差根据所述参考层的视差改变状态而改变,从而所述覆盖层与所述参考层之间的深度视差维持在预设置的大小。
17.根据权利要求15所述的信号处理装置,其中,所述视差信息产生单元产生第二视差信息,以使所述覆盖层具有固定的深度。
18.根据权利要求17所述的信号处理装置,其中,所述视差信息产生单元在任意流单位内检测所述参考层的最大视差,并基于所检测的信息产生第二视差信息。
19.根据权利要求17所述的信号处理装置,其中,所述视差信息产生单元检测显示所述图像对象的时间点的所述参考层的视差,并基于所检测的信息产生所述第二视差信息。
20.根据权利要求13所述的信号处理装置,还包括:
存储单元,存储有预设置的深度信息;
视差信息产生单元,根据所述深度信息产生关于所述参考层的第一视差信息和关于所述覆盖层的第二视差信息,
其中,所述视频处理单元检测包括在所述输入信号中的第一视差信息并根据所述第一视差信息将立体感应用于所述图像,
所述图形处理单元检测包括在所述输入信号中的第二视差信息并根据所述第二视差信息将立体感应用于所述图形对象。
21.根据权利要求13至20中的任一项所述的信号处理装置,其中,所述覆盖层包括具有互不相同的深度的多个层,
在每一个层上显示不同种类的图形对象。
22.根据权利要求21所述的信号处理装置,其中,所述每一个层上的图形对象种类的显示顺序根据用户的选择能够相互变更。
23.根据权利要求21所述的信号处理装置,其中,所述图形对象包括:OSD菜单、字幕、节目信息、应用图标、应用窗口、GUI窗口中的至少一个以上的种类的对象。
24.一种信号处理方法,包括如下步骤:
通过处理视频信号来构成能够显示在参考层上的图像;
通过处理图形对象来构成能够显示在所述参考层的上位的覆盖层上的图形对象;
将所述图像和所述图像对象传送至输出单元。
25.根据权利要求24所述的信号处理方法,还包括:接收步骤,从外部源接收关于所述参考层的第一视差信息和关于所述覆盖层的第二视差信息,
通过根据所述第一视差信息应用立体感而构成所述图像,通过根据所述第二视差信息应用立体感而构成所述图形对象。
26.根据权利要求25所述的信号处理方法,其中,所述接收步骤包括如下步骤:
接收包括所述视频信号、所述图形对象、所述第一视差信息和所述第二视差信息的广播信号;
从包括在所述广播信号中的节目信息表或用户数据区域分别检测所述第一视差信息和所述第二视差信息。
27.根据权利要求24所述的信号处理方法,其中,还包括步骤:
从外部源接收关于所述参考层的第一视差信息;
产生关于所述覆盖层的第二视差信息,
通过根据所述第一视差信息应用立体感而构成所述图像,通过根据所述第二视差信息应用立体感而构成所述图形对象。
28.根据权利要求27所述的信号处理方法,其中,产生所述第二视差信息的步骤包括:
通过分析所述第一视差信息来确认所述参考层的视差改变状态;
基于所述第一视差信息产生所述第二视差信息,以使所述覆盖层的视差根据所述参考层的视差改变状态而改变,从而使所述覆盖层与所述参考层之间的深度视差维持在预设置的大小。
29.根据权利要求27所述的信号处理方法,其中,产生第二视差信息,以使所述覆盖层具有固定的深度。
30.根据权利要求29所述的信号处理方法,其中,基于在任意流单位内检测的所述参考层的最大视差产生第二视差信息。
31.根据权利要求29所述的信号处理方法,其中,基于显示所述图像对象的时间点检测的所述参考层的视差产生所述第二视差信息。
32.根据权利要求24所述的信号处理方法,其中,还包括步骤:
从存储有预设置的深度信息的存储单元读取所述深度信息;
根据所述深度信息产生关于所述参考层的第一视差信息和关于所述覆盖层的第二视差信息,
其中,通过根据所述第一视差信息应用立体感而构成所述图像,通过根据所述第二视差信息应用立体感而构成所述图形对象。
33.根据权利要求24至32中的任一项所述的信号处理方法,其中,所述覆盖层包括具有互不相同地深度的多个层,
在每一个层上显示不同种类的图形对象。
34.根据权利要求33所述的信号处理方法,其中,根据用户的选择可交换显示在所述每一个层上的图形对象种类的显示顺序。
35.根据权利要求33所述的信号处理方法,其中,所述图形对象包括:OSD菜单、字幕、节目信息、应用图标、应用窗口、GUI窗口中的至少一个以上的种类的对象。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US38877010P | 2010-10-01 | 2010-10-01 | |
US61/388,770 | 2010-10-01 | ||
PCT/KR2011/007285 WO2012044128A2 (ko) | 2010-10-01 | 2011-09-30 | 디스플레이 장치 및 신호 처리 장치와, 그 방법들 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103155577A true CN103155577A (zh) | 2013-06-12 |
Family
ID=45893706
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2011800474498A Pending CN103155577A (zh) | 2010-10-01 | 2011-09-30 | 显示装置和信号处理装置及其方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20130182072A1 (zh) |
EP (1) | EP2624571A4 (zh) |
JP (1) | JP2013546220A (zh) |
KR (1) | KR20120034574A (zh) |
CN (1) | CN103155577A (zh) |
WO (1) | WO2012044128A2 (zh) |
Families Citing this family (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012101916A1 (ja) * | 2011-01-25 | 2012-08-02 | 富士フイルム株式会社 | 立体動画処理装置、立体動画処理プログラム及びその記録媒体、立体撮像装置並びに立体動画処理方法 |
US8923686B2 (en) | 2011-05-20 | 2014-12-30 | Echostar Technologies L.L.C. | Dynamically configurable 3D display |
EP2867757A4 (en) * | 2012-06-30 | 2015-12-23 | Intel Corp | 3D GRAPHIC USER INTERFACE |
KR20140061098A (ko) * | 2012-11-13 | 2014-05-21 | 엘지전자 주식회사 | 영상표시장치, 및 그 동작방법 |
CN103841394B (zh) * | 2012-11-23 | 2017-07-07 | 北京三星通信技术研究有限公司 | 多层式三维显示器的标定设备和标定方法 |
KR101289527B1 (ko) * | 2012-11-26 | 2013-07-24 | 김영민 | 이동 단말기 및 그 제어방법 |
EP2767973A1 (en) * | 2013-02-15 | 2014-08-20 | Samsung Electronics Co., Ltd. | User terminal and method of displaying image thereof |
JP6253307B2 (ja) * | 2013-08-21 | 2017-12-27 | キヤノン株式会社 | 撮像装置、外部装置、撮像システム、撮像装置の制御方法、外部装置の制御方法、撮像システムの制御方法、及びプログラム |
CN104581341B (zh) * | 2013-10-24 | 2018-05-29 | 华为终端有限公司 | 一种字幕显示方法及字幕显示设备 |
KR102176474B1 (ko) * | 2014-01-06 | 2020-11-09 | 삼성전자주식회사 | 영상표시장치, 영상표시장치의 구동방법 및 영상표시방법 |
CN109561266A (zh) | 2016-07-26 | 2019-04-02 | 青岛海信电器股份有限公司 | 电视的截屏方法及电视 |
KR102423295B1 (ko) | 2017-08-18 | 2022-07-21 | 삼성전자주식회사 | 심도 맵을 이용하여 객체를 합성하기 위한 장치 및 그에 관한 방법 |
CN111133763B (zh) * | 2017-09-26 | 2022-05-10 | Lg 电子株式会社 | 360视频系统中的叠加处理方法及其设备 |
EP3493431A1 (en) * | 2017-11-30 | 2019-06-05 | Advanced Digital Broadcast S.A. | A method for parallel detection of disparities in a high resolution video |
KR20190132072A (ko) * | 2018-05-18 | 2019-11-27 | 삼성전자주식회사 | 전자장치, 그 제어방법 및 기록매체 |
US11222470B1 (en) * | 2018-08-21 | 2022-01-11 | Palantir Technologies Inc. | Systems and methods for generating augmented reality content |
US11314383B2 (en) * | 2019-03-24 | 2022-04-26 | Apple Inc. | Stacked media elements with selective parallax effects |
US10937362B1 (en) * | 2019-09-23 | 2021-03-02 | Au Optronics Corporation | Electronic apparatus and operating method thereof |
US11099709B1 (en) | 2021-04-13 | 2021-08-24 | Dapper Labs Inc. | System and method for creating, managing, and displaying an interactive display for 3D digital collectibles |
US11210844B1 (en) | 2021-04-13 | 2021-12-28 | Dapper Labs Inc. | System and method for creating, managing, and displaying 3D digital collectibles |
USD991271S1 (en) | 2021-04-30 | 2023-07-04 | Dapper Labs, Inc. | Display screen with an animated graphical user interface |
US11227010B1 (en) | 2021-05-03 | 2022-01-18 | Dapper Labs Inc. | System and method for creating, managing, and displaying user owned collections of 3D digital collectibles |
US11533467B2 (en) * | 2021-05-04 | 2022-12-20 | Dapper Labs, Inc. | System and method for creating, managing, and displaying 3D digital collectibles with overlay display elements and surrounding structure display elements |
US11170582B1 (en) | 2021-05-04 | 2021-11-09 | Dapper Labs Inc. | System and method for creating, managing, and displaying limited edition, serialized 3D digital collectibles with visual indicators of rarity classifications |
US11830106B2 (en) * | 2021-11-19 | 2023-11-28 | Lemon Inc. | Procedural pattern generation for layered two-dimensional augmented reality effects |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11113028A (ja) * | 1997-09-30 | 1999-04-23 | Toshiba Corp | 3次元映像表示装置 |
US20060005220A1 (en) * | 2004-06-29 | 2006-01-05 | Samsung Electronics Co., Ltd. | Set-top box allowing key command input while displaying animation sequence on OSD screen and method of displaying OSD data |
KR20090066320A (ko) * | 2006-10-11 | 2009-06-23 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | 3차원 그래픽 데이터의 생성 |
WO2009083863A1 (en) * | 2007-12-20 | 2009-07-09 | Koninklijke Philips Electronics N.V. | Playback and overlay of 3d graphics onto 3d video |
CN101523924A (zh) * | 2006-09-28 | 2009-09-02 | 皇家飞利浦电子股份有限公司 | 三菜单显示 |
WO2010064118A1 (en) * | 2008-12-01 | 2010-06-10 | Imax Corporation | Methods and systems for presenting three-dimensional motion pictures with content adaptive information |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7623140B1 (en) * | 1999-03-05 | 2009-11-24 | Zoran Corporation | Method and apparatus for processing video and graphics data to create a composite output image having independent and separate layers of video and graphics |
JP2005267655A (ja) * | 2002-08-29 | 2005-09-29 | Sharp Corp | コンテンツ再生装置、コンテンツ再生方法、コンテンツ再生プログラム、コンテンツ再生プログラムを記録した記録媒体、および携帯通信端末 |
KR101520659B1 (ko) * | 2008-02-29 | 2015-05-15 | 엘지전자 주식회사 | 개인용 비디오 레코더를 이용한 영상 비교 장치 및 방법 |
BRPI0922046A2 (pt) * | 2008-11-18 | 2019-09-24 | Panasonic Corp | dispositivo de reprodução, método de reprodução e programa para reprodução estereoscópica |
WO2010092823A1 (ja) * | 2009-02-13 | 2010-08-19 | パナソニック株式会社 | 表示制御装置 |
MX2011008609A (es) * | 2009-02-17 | 2011-09-09 | Koninklije Philips Electronics N V | Combinar datos de imagen tridimensional y graficos. |
EP2401870A4 (en) * | 2009-02-27 | 2012-12-26 | Deluxe Lab Inc | SYSTEMS, DEVICES AND METHODS FOR SUBTITLEING STEREOSCOPIC CONTENT |
KR101370925B1 (ko) * | 2009-10-16 | 2014-03-07 | 엘지전자 주식회사 | 3d 컨텐츠 표시 방법 및 신호 처리 장치 |
US8605136B2 (en) * | 2010-08-10 | 2013-12-10 | Sony Corporation | 2D to 3D user interface content data conversion |
-
2011
- 2011-09-30 WO PCT/KR2011/007285 patent/WO2012044128A2/ko active Application Filing
- 2011-09-30 KR KR1020110099829A patent/KR20120034574A/ko not_active Application Discontinuation
- 2011-09-30 JP JP2013531503A patent/JP2013546220A/ja not_active Ceased
- 2011-09-30 EP EP11829634.2A patent/EP2624571A4/en not_active Withdrawn
- 2011-09-30 US US13/824,818 patent/US20130182072A1/en not_active Abandoned
- 2011-09-30 CN CN2011800474498A patent/CN103155577A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11113028A (ja) * | 1997-09-30 | 1999-04-23 | Toshiba Corp | 3次元映像表示装置 |
US20060005220A1 (en) * | 2004-06-29 | 2006-01-05 | Samsung Electronics Co., Ltd. | Set-top box allowing key command input while displaying animation sequence on OSD screen and method of displaying OSD data |
CN101523924A (zh) * | 2006-09-28 | 2009-09-02 | 皇家飞利浦电子股份有限公司 | 三菜单显示 |
KR20090066320A (ko) * | 2006-10-11 | 2009-06-23 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | 3차원 그래픽 데이터의 생성 |
WO2009083863A1 (en) * | 2007-12-20 | 2009-07-09 | Koninklijke Philips Electronics N.V. | Playback and overlay of 3d graphics onto 3d video |
WO2010064118A1 (en) * | 2008-12-01 | 2010-06-10 | Imax Corporation | Methods and systems for presenting three-dimensional motion pictures with content adaptive information |
Also Published As
Publication number | Publication date |
---|---|
EP2624571A4 (en) | 2014-06-04 |
WO2012044128A3 (ko) | 2012-05-31 |
WO2012044128A2 (ko) | 2012-04-05 |
WO2012044128A4 (ko) | 2012-07-26 |
JP2013546220A (ja) | 2013-12-26 |
US20130182072A1 (en) | 2013-07-18 |
KR20120034574A (ko) | 2012-04-12 |
EP2624571A2 (en) | 2013-08-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103155577A (zh) | 显示装置和信号处理装置及其方法 | |
US9253469B2 (en) | Method for displaying 3D caption and 3D display apparatus for implementing the same | |
CN102860000B (zh) | 产生用于提供三维多媒体服务的数据流的方法和设备以及用于接收所述数据流的方法和设备 | |
US9313442B2 (en) | Method and apparatus for generating a broadcast bit stream for digital broadcasting with captions, and method and apparatus for receiving a broadcast bit stream for digital broadcasting with captions | |
US8902287B2 (en) | 3D caption signal transmission method and 3D caption display method | |
CN102342112B (zh) | 立体图像数据发送装置、立体图像数据发送方法、立体图像数据接收装置和立体图像数据接收方法 | |
US8289998B2 (en) | Method and apparatus for generating three (3)-dimensional image data stream, and method and apparatus for receiving three (3)-dimensional image data stream | |
EP2602999A1 (en) | Encoding method, display device, and decoding method | |
US20110037833A1 (en) | Method and apparatus for processing signal for three-dimensional reproduction of additional data | |
CN104301705B (zh) | 广播接收机和三维视频数据处理方法 | |
MX2012004849A (es) | Metodo y aparato para generar caudal multimedia para ajustar la prodfundidad de la informacion de reproduccion de video adicional tridimencional, y metodo y aparato para recibir caudal multimedia para ajustar la profundidad de informacion de reproduccion de video adicional tridimencional. | |
CN103416069A (zh) | 发送设备、发送方法、接收设备以及接收方法 | |
CA2819141A1 (en) | Receiving device and method for receiving multiview three-dimensional broadcast signal | |
JP2011249945A (ja) | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 | |
WO2013031549A1 (ja) | 送信装置、送信方法および受信装置 | |
CN103039084A (zh) | 三维图像数据发送设备、三维图像数据发送方法、三维图像数据接收设备和三维图像数据接收方法 | |
US20130162772A1 (en) | Transmission device, transmission method, and reception device | |
JP2013090020A (ja) | 映像出力装置および映像出力方法 | |
WO2011155418A1 (ja) | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 | |
WO2013018490A1 (ja) | 送信装置、送信方法および受信装置 | |
CN102771131A (zh) | 立体图像数据发送装置、立体图像数据发送方法、立体图像数据接收装置和立体图像数据接收方法 | |
CN103262548A (zh) | 用于在移动环境中接收三维广播信号的接收器装置和方法 | |
US20120113220A1 (en) | Video output device, video output method, reception device and reception method | |
JP2013090019A (ja) | 映像出力装置および映像出力方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20130612 |