CN102892024A - 3d显示设备及其内容显示方法 - Google Patents

3d显示设备及其内容显示方法 Download PDF

Info

Publication number
CN102892024A
CN102892024A CN201210254435XA CN201210254435A CN102892024A CN 102892024 A CN102892024 A CN 102892024A CN 201210254435X A CN201210254435X A CN 201210254435XA CN 201210254435 A CN201210254435 A CN 201210254435A CN 102892024 A CN102892024 A CN 102892024A
Authority
CN
China
Prior art keywords
captions
soniferous
loudness
sounding
audio signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201210254435XA
Other languages
English (en)
Inventor
李大峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN102892024A publication Critical patent/CN102892024A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/398Synchronisation thereof; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/128Adjusting depth or disparity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183On-screen display [OSD] information, e.g. subtitles or menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Processing Or Creating Images (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Stereophonic System (AREA)

Abstract

提供一种3D显示设备及其内容显示方法。内容处理方法包括:处理视频信号以在屏幕上进行显示;处理与视频信号相应的音频信号以与在屏幕上的视频信号同步地输出;及根据音频信号的响度级分别控制将在屏幕上显示的字幕的3D效果。

Description

3D显示设备及其内容显示方法
本申请要求于2011年7月21日提交到韩国知识产权局的第2011-0072695号韩国专利申请的优先权,该申请的公开通过引用全部包含于此。
技术领域
与示例性实施例一致的设备和方法涉及三维(3D)显示设备及其内容显示方法。更具体地讲,与示例性实施例一致的设备和方法涉及以3D图像一起提供内容与字幕的3D显示设备以及使用所述3D图像设备的内容显示方法。
背景技术
最近,电器的进步普及了提供三维(3D)立体图像和根据3D立体图像的各种内容的装置,并因此允许一般用户甚至在家里容易地观看3D立体图像。
结果,用户观看添加了3D效果的各种内容,从而看到更逼真的内容。
另外,由于高速通信网络等的迅速发展,外语内容变得更容易得到。在以外语制作的内容的情况下,与字幕或标题一起提供图像以帮助观看者更好地理解。
此外,甚至在本地语内容以及外语内容的情况下,也可与字幕或标题一起提供图像。
因此,当以3D立体图像提供具有字幕的内容时,存在能够提供更有效和逼真的3D立体图像的方法的需要。
发明内容
示例性实施例克服上述缺点和上面没有描述的其他缺点。此外,示例性实施例不被要求克服上述的缺点,示例性实施例可不克服上述任何问题。
一个或多个示例性实施例的各方面提供一种3D显示设备及使用该3D显示设备的内容显示方法,该3D显示设备可根据包括在内容信号中的音频信号的响度级个别调整显示在屏幕上的标题或字幕的3D效果。
根据示例性实施例的一方面,提供一种3D图像处理设备的内容显示方法,该方法包括:处理视频信号以在显示在屏幕上;处理与视频信号相应的音频信号以与在屏幕上的视频信号同步地输出;根据音频信号的响度级分别控制将被显示在屏幕上的字幕的3D效果。
在这种情况下,分别改变的步骤可包括:如果音频信号中的发声内容的响度超过预定的临界范围,则根据发声内容的响度和预定的临界范围之间的差,适应性地增加与发声内容相应的字幕的深度信息;如果音频信号中的发声内容的响度低于预定的临界范围,则根据发声内容的响度和预定的临界范围之间的差,适应性地减小与发声内容相应的字幕的深度信息。
此外,处理视频信号的步骤可包括:在屏幕上显示具有预定的3D效果的对象,如果对象发声的发声内容的响度在确定的临界范围内,则在屏幕上以与对象的3D效果相同的3D效果将对象发声的发声内容的字幕与对象一起显示。
分别改变的步骤可包括:如果在音频信号中的发声内容的响度超过预定的临界范围,则将与发声内容相应的字幕的深度信息增加到预定的最大值;如果在音频信号中的发声的声音的响度低于预定的临界范围,则将与发声内容相应的字幕的深度信息减小到预定的最小值。
此外,处理视频信号的步骤可包括:如果具有不同的3D效果的多个对象被显示在屏幕上,则根据各个对象的3D效果,不同地显示与对象各自发声的发声内容相应的字幕的3D效果。
根据另一示例性实施例的方面,提供一种3D图像处理设备,包括:图像处理单元,处理视频信号和音频信号;输出单元,在屏幕上显示处理的视频信号并输出处理的音频信号;控制单元,控制输出单元与在屏幕上的视频信号同步地输出音频信号,并根据音频信号的响度级,分别控制显示在屏幕上的字幕的3D效果。
在这种情况下,如果音频信号中的发声内容的响度超过预定的临界范围,则控制单元可根据发声内容的响度和预定的临界范围之间的差,适应性地增加与发声内容相应的字幕的深度信息;如果音频信号中的发声内容的响度低于预定的临界范围,则控制单元可根据发声内容的响度和预定的临界范围的差,适应性地减小与发声内容相应的字幕的深度信息。
此外,控制单元可进行控制,以在屏幕上显示具有预定的3D效果的对象,如果对象发声的发声内容的响度在预定的范围之内,则在屏幕上以与对象的3D效果相同的3D效果将对象发声的发声内容的字幕与对象一起显示。
如果音频信号中的发声内容的响度超过预定的临界范围,则控制单元可将与发声内容相应的字幕的深度信息增加到预定的最大值;如果音频信号中的发声内容的响度低于预定的临界范围,则控制单元可将与发声内容相应的字幕的深度信息减小到预定的最小值。
此外,如果在屏幕上显示具有不同3D效果的多个对象,则控制单元可进行控制,以根据各个对象的3D效果,不同地显示与对象各自发声的发声内容相应的字幕的3D效果。
根据如上面所述的示例性实施例的各个方面,由于根据音频信号的响度级分别改变显示在屏幕上的字幕的3D效果,因此可向用户提供更动态的立体图像。
附图说明
通过参照附图对特定示例性实施例进行的描述,上述和/或其他方面将会变得更加清楚,其中:
图1是示出根据示例性实施例的提供内容显示方法的系统的示图;
图2是示出根据示例性实施例的3D显示设备的配置的框图;
图3是示出根据示例性实施例的3D显示设备的详细配置的框图;
图4A至图6是用于解释根据示例性实施例的在3D内容图像上重叠并显示3D字幕图像的状态的示图;及
图7是用于解释根据示例性实施例的3D显示设备的内容显示方法的流程图。
具体实施方式
现在,将在下面参照附图更详细地描述示例性实施例。
图1是示出根据示例性实施例的提供内容显示方法的系统的示图。如图1所示,该系统包括用于在屏幕上显示3D图像的3D显示设备100、和用于观看3D图像的3D眼镜200。
3D显示设备100可输出内容图像,并将相应的标题或字幕重叠在内容图像上,以在3D显示设备100提供的屏幕上显示。
具体地讲,3D显示设备100可将左眼字幕图像重叠在包括在内容信号中的左眼内容图像上,将右眼字幕图像重叠在包括在内容信号中的右眼内容图像上,并交替显示重叠的左眼图像和重叠的右眼图像,从而向用户提供3D立体图像。
在这种情况下,3D显示设备100可根据大小、特性或衡量标准(例如,包括在内容信号中的音频信号的响度级),调整左眼字幕图像和右眼字幕图像之间的视差,从而分别在屏幕上显示的字幕上给予3D效果。
因此,可向用户提供根据音频信号的响度级三维地变化的字幕,从而观看更动态的立体图像。
3D眼镜200可由主动型快门眼镜来实现。快门眼镜类型是通过对3D眼镜中的左眼眼镜和右眼眼镜的开-关动作与3D显示设备100再现的左图像帧和右图像帧进行同步来结合从不同的角度观看的图像,允许用户感到深度感的3D眼镜类型。换句话说,当根据3D显示设备100的左图像同步信号和右图像同步信号选择性地交替开启或关闭3D眼镜200的左眼眼镜和右眼眼镜时,观看到3D立体图像。当参照主动型快门眼镜描述本示例性实施例时,应该理解,一个或多个其他示例性实施例不限于此。例如,一个或多个其他示例性实施例可应用于采用被动型眼镜(例如,具有偏振透镜或滤光器)或裸眼3D显示的3D显示系统。另外,当参照左眼图像帧和右眼图像帧的交替显示描述本示例性实施例时,应该理解一个或多个其他示例性实施例不限于此。例如,一个或多个其他示例性实施例可应用于同时显示左眼图像帧和右眼图像帧的3D显示系统。
另外,根据本示例性实施例的提供内容显示方法的系统还可包括用于产生3D图像的相机(未示出)。
作为一种用于产生3D图像的摄影设备的相机(未示出)产生左眼图像和右眼图像,其中,左眼图像是以与用户的左眼相应的视野拍摄的,左眼图像是以与用户的右眼相应的视野拍摄的。即,3D图像包括向用户的左眼和右眼交替提供的左眼图像和右眼图像,从而允许用户通过双眼的视差感到3D效果。
为此,相机(未示出)可包括用于产生左眼图像的左眼相机或镜头和用于产生右眼图像的右眼相机或镜头。考虑到人的两眼之间的间隔距离,设置左眼相机或镜头与右眼相机或镜头之间的间隔。
相机(未示出)将拍摄的左眼图像和拍摄的右眼图像发送到3D显示设备100。特别地,从相机(未示出)发送到3D显示设备100的左眼图像和右眼图像可以以在一帧中仅包括左眼图像和右眼图像之一的格式或在一帧中均包括左眼图像和右眼图像的格式被发送。
相机(未示出)可提前从3D图像的多种格式中确定一个格式,并根据确定的格式产生3D图像以将产生的3D图像发送到3D显示设备100。
另外,应该理解,在一个或多个其他示例性实施例中,可从包括存储介质(例如,光学记录介质)的任何源、从广播站、从网络(例如,互联网)接收3D图像。此外,根据一个或多个其他示例性实施例,3D显示设备可接收二维(2D)图像并可利用预定的算法(例如,这样的算法:在2D图像帧中识别对象和背景,确定识别的对象和背景的深度,并向识别的对象和背景分配深度)或利用预定的深度值转换2D图像。
在图1中,3D显示设备100被示出为3D电视(TV),应该理解,这仅是示例性实施例,一个或多个其他示例性实施例不限于此。例如,根据一个或多个其他示例性实施例,由可显示3D图像的其他任何设备(例如,数字TV、移动通信终端、移动电话、个人数字助理(PDA)、智能电话、数字多媒体广播(DMB)电话、MP3播放器、音频装置、便携式电视、数码相机等)实现3D显示设备100是可行的。另外,一个或多个其他示例性实施例的方面可被应用于处理图像信号并输出处理的图像信号以被外部装置显示的图像处理设备(例如,机顶盒、服务器、广播站等)。
图2是示出根据示例性实施例的3D显示设备100的配置的框图。参照图2,3D显示设备100包括图像处理单元110、输出单元120和控制单元130。
图像处理单元110对包括在内容信号中的视频信号和音频信号中的至少一个执行信号处理。具体地讲,图像处理单元110可对包括在内容信号中的视频信号和音频信号执行信号处理(例如,视频解码、视频格式分析、视频缩放、音频解码等中的至少一个)。
输出单元120可在屏幕上显示处理的视频信号,并输出处理的音频信号。输出单元120可设置有用于显示视频信号的显示部分(未示出)、和用于输出音频信号的音频输出部分(未示出)。
控制单元130可与屏幕上的视频信号同步地输出音频信号,并根据音频信号的输出级别分别改变显示在屏幕上的标题或字幕的3D效果。
具体地讲,如果音频信号中的发声音或声音的响度超过预定的临界范围或值,则控制单元130可根据发声音或声音的响度与预定的临界范围或值之间的差,适应性地增加与发声内容或声音相应的字幕的深度信息。相反地,如果发声音或声音的响度低于预定的临界范围或值,则控制单元130可根据发声音或声音的响度与预定的临界范围或值之间的差,适应性地减小与发声内容或声音相应的字幕的深度信息。
这里,控制单元130可在屏幕上显示具有预定的3D效果的对象,并且如果对象发声的发声音的响度在预定的临界范围之内,则在屏幕上以与对象的3D效果相同的3D效果将对象发声的发声音的字幕与对象一起显示。
此外,如果音频信号中的发声音的响度超过预定的临界范围,则控制单元130将与发声内容相应的字幕的深度信息增加到预定的最大值;如果发声音的响度低于预定的临界范围,则将与发声内容相应的字幕的深度信息减小到预定的最小值。
另一方面,如果具有不同3D效果的多个对象被显示在一个屏幕上,则控制单元130可根据各个对象的3D效果,不同地显示与对象各自发声的发声音相应的字幕的3D效果。
在下文中,将参照图3,更详细地解释根据示例性实施例的3D显示设备100。
图3是示出根据示例性实施例的3D显示设备100的详细配置的框图。参照图3,显示设备100包括图像处理单元110、输出单元120、控制单元130、接收单元140、存储单元150、用户接口单元160和同步信号处理单元170。
接收单元140从卫星或广播站有线或无线地接收广播信号,并解调接收的信号。为此,接收单元140可设置有至少一个调谐器。在一些情况下,接收单元140可设置有多个调谐器以在多个频道同时接收广播信号。
另外,接收单元可将广播信号分成视频信号、音频信号和附加信息。
此外,接收单元140可连接到外部源(例如,相机、数字视频盘(DVD)播放器、蓝光播放器、媒体服务器等)以从外部源接收包括视频信号、音频信号和附加信息的内容信号。在这种情况下,接收单元140可无线地或通过接口(例如,S-视频、分量、复合(composite)、D-sub、DVI、HDMI等)有线地连接到外部源。
这里,通过特定频道接收的广播信号和从外部源输入的信号中的每一个信号在下文中被称为内容信号,并且内容信号包括特定内容的视频信号、音频信号和附加信息。
包括在内容信号中的视频信号可包括内容的2D图像和3D图像中的至少一个。
另外,附加信息可包括与相关的内容图像相应的标题或字幕、和显示在字幕中的时间信息。此外,如果视频信号包括3D图像,则附加信息还可包括形成3D图像的每个对象的3D效果的信息。这里,3D效果可包括3D图像中的相关对象的深度值。
此外,接收单元140可将视频信号、音频信号和附加信息发送到图像处理单元110。
这里,作为包括至少一帧的图像的3D图像是被配置为左眼图像和右眼图像均被包括在一个图像帧中的图像,或每个帧包括左眼图像或右眼图像的图像。换句话说,3D图像是根据各种3D格式中的一种产生的图像。
因此,通过接收单元140接收的3D图像可以是各种格式(例如,根据一般顶底型、并排型、水平交错型、垂直交错型、棋盘型和连续帧之一的格式)。
图像处理单元110对从接收单元140接收的视频信号和音频信号中的至少一个执行信号处理。具体地讲,图像处理单元110可对接收的视频信号和音频信号执行信号处理(例如,视频解码、格式分析、视频缩放、音频解码等中的至少一个),以分别提供能够通过输出单元120或外部提供的显示部分(未示出)和音频输出部分(未示出)输出的视频信号和音频信号。
另外,图像处理单元110通过利用输入到接收单元140的3D图像的格式分别产生与一帧的大小(例如,1920×1080)相应的左眼图像和右眼图像。
例如,如果3D图像的格式是根据一般的顶底型、并排型、水平交错型、垂直交错型或棋盘型或连续帧的格式,则图像处理单元110通过从每个图像帧提取左眼图像部分和右眼图像部分并扩大缩放或插值提取的左眼图像部分和提取的右眼图像部分,分别生成向用户提供的左眼图像和右眼图像。
此外,如果3D图像的格式是根据一般帧序列型的格式,则图像处理单元110从每个图像帧提取左眼图像和右眼图像以准备向用户显示。
另外,在3D图像信号中可包括或不包括关于输入的3D图像的格式的信息。
例如,如果在3D图像信号中包括关于输入的3D图像的格式的信息,则图像处理单元110分析3D图像以从3D图像提取关于格式的信息,并根据提取的信息处理接收的3D图像。相反,如果在3D图像信号中不包括关于输入的3D图像的格式的信息,则图像处理单元110根据由用户输入的格式、预先设置的格式、单独接收的格式或检测处理确定的格式,处理接收的3D图像。
另外,根据用于显示标题或字幕的用户的特定输入,图像处理单元110可将3D字幕图像重叠在3D内容图像上并向输出单元120提供重叠的图像。
具体地讲,图像处理单元110将左眼字幕图像重叠在左眼内容图像上,将右眼字幕图像重叠在右眼内容图像上,并对重叠的左眼图像和重叠的右眼图像进行分时以向输出单元120交替地提供重叠的图像。
例如,图像处理单元110将带字幕的左眼图像和右眼图像按时间顺序“左眼图像(L1)→右眼图像(R1)→左眼图像(L2)→右眼图像(R2)→……”发送到输出单元120。
输出单元120可分别显示图像处理单元110处理的视频信号和输出图像处理单元110处理的音频信号。
特别地,输出单元120交替输出图像处理单元110处理的带字幕的左眼图像和右眼图像,以向用户提供所述图像。
为此,输出单元120可包括可输出图像的显示部分(未示出)。该显示部分可包括诸如面板驱动部分(未示出)、显示面板部分(未示出),背光驱动部分(未示出)、背光发出部分(未示出)等的组件。例如,显示部分可以是液晶显示器(LCD)、有机发光二极管(OLED)显示器、等离子体显示器、阴极射线管(CRT)显示器等。
另外,输出单元120可包括可输出音频信号的音频输出部分(未示出)(例如,扬声器)。
控制单元130根据从用户接口单元160接收的用户输入或命令或预先设置的选项,控制3D显示设备100的一般操作。
特别地,控制单元130控制接收单元140和图像处理单元110接收3D图像信号,将接收的3D图像分离成左眼图像和右眼图像,并分别将分离的左眼图像和右眼图像缩放或插值成能够在一个图片帧上显示的大小。
另外,控制单元130进行控制,以对接收的音频信号执行信号处理(例如,音频解码),并与屏幕上的图像信号同步地输出信号处理的音频信号。
另外,控制单元130控制图像处理单元110产生3D字幕图像并将3D字幕重叠在3D内容图像上,以在屏幕上输出重叠的3D图像。
当产生3D字幕图像时,控制单元130可根据音频信号的大小、特性或衡量标准(例如,响度级)分别改变显示在屏幕上的字幕的3D效果。
这里,在3D图像中,字幕的3D效果可通过表示与前后方向(即,观看者的视线方向)上的位置相应的深度感的深度信息(深度值)来确定。深度信息可通过3D字幕图像的左眼字幕图像和右眼字幕图像之间的视差来确定。
因此,控制单元130可通过调整每个3D字幕图像的左眼字幕图像和右眼字幕图像之间的视差来调整字幕的3D效果。
为此,控制单元130从例如由接收单元140提供的附加信息检测关于要显示标题或字幕的时间或图像帧的信息。
这里,标题或字幕可以是诸如smi、idx、sub、srt、psb、ssa、ass、usf等的文件格式。作为示例,下面示出以smi文件格式提供的字幕:
<SYNC start=22938><P Class=KRCC>
今天天气热,是不是?
<SYNC start=25781><P Class=KRCC>
是的
在上面所示的示例中,假设字幕“今天天气热,是不是?”在22.983秒开始被显示,并且字幕“是的”在25.781秒开始被显示。基于包括在这种附加信息中的数据,控制单元130可检测关于特定字幕将被显示的时间的信息。
尽管在上面所示的示例中,控制单元130已被解释为检测关于时间的信息,但这仅是示例,应该理解,一个或多个其他示例性实施例不限于此。例如,如果附加信息包括关于相关标题或字幕将被显示的帧编号的信息,则控制单元130可检测帧编号。
另外,控制单元130对音频信号执行过滤,以从音频信号中提取音频信号成分。
例如,控制单元130可设置有带通滤波器(未示出),从而控制单元130可从音频信号提取与人的声音相应的具有200赫兹到3000赫兹的频带的语音信号。
另外,控制单元130可根据在音频信号中的与特定的字幕被输出时的时间相应的发声音的响度,确定3D字幕图像的深度值。
具体地讲,如果音频信号中的发声音的响度在预定的临界范围内,则控制单元130将与发声内容相应的字幕的深度信息确定为与显示在屏幕上的物体的深度信息相同的值。
另外,如果音频信号中的发声音的响度超过预定的临界范围,则控制单元130可根据发声音的响度和预定临界范围之间的差,适应性地增加与发声内容相应的字幕的深度信息;如果音频信号中的发声音的响度低于在预定的临界范围,则根据发声音的响度和预定临界范围之间的差,适应性地减小与发声内容相应的字幕的深度信息。
换句话说,控制单元130可确定,发声音的响度比预定的临界范围的最大值越大,与发声内容相应的字幕的深度信息的值被确定为比显示在屏幕上的对象的深度信息越大;发声音的响度比预定的临界范围的最小值越小,与发声内容相应的字幕的深度信息的值被确定为比显示在屏幕上的对象的深度信息越小。
另一方面,如果音频信号中的发声音的响度超过预定的临界范围,则控制单元130可将与发声内容相应的字幕的深度信息增加到预定的最大值;如果音频信号中的发声音的响度低于预定的临界范围,将与发声内容相应的字幕的深度信息减小到预定的最小值。
这里,预定的最大值是大于显示在屏幕上的对象的深度信息的值,预定的最小值是小于显示在屏幕上的对象的深度信息的值。
另外,在一个或多个示例性实施例中,用户可设置预定的临界范围和预定的最大值和最小值。
如上面所述,控制单元130可考虑3D内容图像(即,显示在屏幕上的各个对象)的深度信息,确定字幕的深度信息。据此,可向观看者提供具有与预定的相应对象相同或不同的三维效果的字幕。
另外,如果具有不同3D效果的多个对象显示在一个屏幕上,则控制单元130可根据各个对象的3D效果,不同地显示与对象各自发声的发声音相应的字幕的3D效果。
在这种情况下,输入到接收单元140的附加信息可包括关于显示在屏幕上的与对象各自发声的发声音相应的字幕的信息。
例如,假定在屏幕上显示具有深度信息“a”的对象“A”和具有深度信息“b”的对象“B”,则与对象“A”的发声音对应的字幕是“今天天气热,是不是?”,与对象“B”发声音对应的字幕是“是的”。
在这种情况下,如果对象“A”和对象“B”发声音的响度都在预定的临界范围内,则控制单元130将字幕“今天天气热,是不是?”的深度信息确定为“a”并将字幕“是的”的深度信息确定为“b”。
此外,如果对象“A”和对象“B”发声音的响度超过预定的临界范围,则控制单元130将字幕“今天天气热,是不是?”的深度信息确定为大于“a”的值,并将字幕“是的”的深度信息确定为大于“b”的值。
以相同的方式,如果对象“A”和对象“B”的发声音的响度低于预定的临界范围,则控制单元130将字幕“今天天气热,是不是?”的深度信息确定为小于“a”的值,并将字幕“是的”的深度信息确定为小于“b”的值。
因此,即使多个对象被显示在一个屏幕上,控制单元也可考虑到内容的3D图像(即,显示在屏幕上的各个对象)的深度信息,确定字幕的深度信息。另外,应该理解,在一个或多个其他示例性实施例中,可对于多个不同的深度值,分别提供多个不同的预定的临界范围。例如,在上述情况下,可对于对象深度值“a”提供第一预定的临界范围并可对于对象深度值“b”提供第二预定的临界范围。
控制单元130可根据改变的深度信息产生3D字幕图像并将产生的3D字幕图像重叠在3D内容图像上以输出重叠的图像。
具体地讲,控制单元130可通过利用根据发声音的响度改变的特定字幕的深度信息,产生与3D字幕图像的左眼图像具有视差的右眼图像或与3D字幕图像的右眼图像具有视差的左眼图像。
换句话说,控制单元130可产生3D字幕图像以具有比具有预定的深度信息的3D内容图像的左眼图像和右眼图像之间的视差更大或更小的视差。
另外,控制单元130可控制图像处理单元110将产生的左眼字母图像和右眼字母图像分别重叠在左眼内容图像和右眼内容图像上。
尽管在上述的示例性实施例中,控制单元130被解释为检测关于字幕的时间的信息,并根据与相关的字幕相应的声音信号的响度产生具有深度值的附加图像,但这仅是示例,一个或多个其他示例性实施例不限于限此。例如,在一个或多个其他示例性实施例中,控制单元130可通过根据声音信号的响度将声音信号分类成至少一个级别并按级别应用预定的深度值,来产生附加图像。
此外,尽管在上述的示例性实施例中,控制单元130被解释为产生具有字幕的附加图像,但这仅是示例。换句话说,除字幕之外,当然可对标题、广告文字、针对消费者的信息字或警告标签、自动标音等,应用示例性实施例的技术精神和教导。
例如,根据一个或多个其他示例性实施例的控制单元130可将广告文字的深度值确定为大于3D广告图像的深度信息,通过利用据此调整的视差产生3D广告文字图像,并将产生的3D广告文字图像重叠在相关的3D广告图像上。在这种情况下,可从外部源接收关于广告文字的信息,该关于广告文字的信息用于将广告文字的深度信息确定为大于相关的3D广告图像的深度信息。尽管广告文字作为示例被解释,当然,示例性实施例的技术精神和教导也可应用于标题、针对消费者的信息字或警告标签等。
存储单元150(作为存储有为了操作3D显示设备100使用的任何程序的存储介质)可由存储器、硬盘驱动器(HDD)等实现。例如,存储单元150可包括用于存储用于执行控制单元130的操作的程序的ROM、和用于临时存储根据控制单元130的操作产生的数据的RAM。另外,存储单元150还可包括非易失性存储器(例如,闪存、电可擦可编程ROM(EEPROM)等),以存储任何参考数据。
用户接口单元160将从输入设备(例如,遥控器、输入面板等)输入的用户命令发送到控制单元130。
这里,输入面板可由具有触摸板的触摸屏幕形式或具有各种键(例如,功能键、数字键、特殊键、字母键等)的键盘形式实现。
特别地,用户接口单元160可设置有特定的按钮以输入用于显示字幕的用户命令。因此,如果用户选择该特定的按钮,则用户接口单元160可将相应的信号发送到控制单元130,因此产生并输出3D效果根据音频信号的响度级被改变的字幕。
同步信号处理单元170产生与左眼图像和右眼图像的显示时间同步的用于交替开启3D眼镜200(见图1)的左眼快门眼镜和右眼快门眼镜的同步信号,并将产生的同步信号发送到3D眼镜200(图1)。这允许交替地开启和关闭3D眼镜200(图1)的左眼快门眼镜和右眼快门眼镜,从而在3D眼镜200(图1)的左眼开启时间,在输出单元120上显示左眼图像,并在3D眼镜200(图1)的右眼开启时间,在输出单元130上显示右眼图像。这里,同步信号可以以红外线形式被发送。
控制单元130控制同步化信号处理单元170产生并发送与左眼图像和右眼图像的输出或显示时间同步的同步信号。
另外,3D眼镜200(图1)根据从3D显示设备100接收的同步信号,交替开启和关闭左眼快门眼镜和右眼快门眼镜,从而允许用户分别利用他或她的左眼和右眼观看左眼图像和右眼图像。
图4A至图6是根据示例性实施例的用于解释在3D内容图像上重叠和显示3D字幕图像的状态的示图。
图4A和图4B示出当发声音的响度超过预定的临界范围时,3D显示设备100(或外部显示单元)的输出或显示状态,图5A和图5B示出当发声音的响度低于预定的临界范围时,3D显示设备100的输出状态。
当发声音的响度超过预定的临界范围时,如图4A中所示,字幕“FIRE!”220可被用户识别为显示得比形成内容的对象210更接近于他或她。这是因为,如图4B中所示,3D字幕图像“FIRE!”220的左眼图像和右眼图像之间的视差被设置为大于3D内容图像210的左眼图像和右眼图像之间的视差。
当发声音的响度低于预定的临界范围时,如在图5A中所示,字幕“JUSTQUIETLY”230可被用户识别为显示得比形成内容的对象240更远离他或她。这是因为,如在图5B中所示,3D字幕图像“JUST QUEITLY”230的左眼图像和右眼图像之间的视差被设置为小于3D内容图像240的左眼图像和右眼图像之间的视差。
图6是图4A和图5A所示的显示设备100的顶部平面示图。
即,如图6所示,由于具有与形成内容的对象210和240的深度信息不同的深度信息的3D字幕图像220和230分别重叠在3D内容图像上被输出,应该理解,字幕的深度信息越大(即,字幕对应于在音频信号中响度级越大的声音信号),字幕被观看3D显示设备100的用户看到得越近。
因此,用户可根据在屏幕上的对象发声的发声音的响度调整与该发声音相应的字幕的3D效果,从而观看更动态的立体图像。
图7是用于解释根据示例性实施例的3D显示设备的内容显示方法的流程图。
参照图7,处理包括在内容信号中的视频信号以在屏幕上进行显示(操作S710)。
另外,处理包括在内容信号中的音频信号以与在屏幕上的视频信号同步输出(操作S720)。
另外,根据音频信号的响度级,分别改变或控制显示在屏幕上的字幕的3D效果(操作S730)。
在这种情况下,在操作S730,如果音频信号中的发声音的响度超过预定的临界范围,则可根据发声音的响度与预定的临界范围之间的差,适应性地增加与发声内容相应的字幕的深度信息;如果音频信号中的发声音的响度低于预定的临界范围,则可根据发声音的响度与预定的临界范围之间的差,适应性地减小与发声内容相应的字幕的深度信息。
此外,在操作S710,可在屏幕上显示具有预定的3D效果的对象,如果对象发声的发声音的响度在预定的临界范围内,则可在屏幕上以与对象的3D效果相同的3D效果将对象发声的发声音的字幕与对象一起显示。
另一方面,在操作S730,如果在音频信号中的发声音的响度超过预定的临界范围,可将与发声内容相应的字幕的深度信息增加到预定的最大值;如果在音频信号中的发声音的响度低于预定的范围,则将与发声内容相应的字幕的深度信息减少到预定的最小值。
此外,在操作S710,如果在一个屏幕上显示具有不同的3D效果的多个对象,则可根据各个对象的3D效果,不同地显示与对象各自发声的发声音相应的字幕的3D效果。
应该理解,上述方法可由根据上述示例性实施例的3D显示设备或不具有根据上述示例性实施例的3D显示设备的所有组件的其他显示设备执行。
另外,一个或多个示例性实施例可包括计算机可读记录介质,该计算机可读记录介质包括用于运行上述3D显示设备的内容显示方法的程序。该计算机可读记录介质包括存储有计算机系统可读的数据的各种记录设备。作为计算机可读记录介质的示例,存在ROM、RAM、CD-ROM、磁带、软盘、光学数据存储设备等。另外,计算机可读记录介质可被分布于通过网络连接的计算机系统中,从而可存储和执行计算机以分布式方法可读的代码。另外,上述设备的一个或多个单元可包括处理器、微处理器、其他电路等。
尽管由上述示例性实施例解释了本发明构思,但示例性实施例不限于前述示例性实施例。本教导可容易地应用于其他类型的设备,并且多种替代、修改和改变对本领域的技术人员将是清楚的。因此,本发明构思的范围可不被解释为限于示例性实施例的描述,而是由权利要求及其等同物来解释。

Claims (14)

1.一种三维3D显示设备的内容显示方法,该方法包括:
处理包括在内容信号中的视频信号以在屏幕上进行显示;
处理包括在内容信号中的音频信号以与在屏幕上的视频信号同步地输出;
根据音频信号的响度级分别改变显示在屏幕上的字幕的3D效果。
2.如权利要求1所述的方法,其中,分别改变的步骤包括:如果音频信号中的发声音的响度超过预定的临界范围,则根据发声音的响度和预定的临界范围之间的差,适应性地增加与发声音相应的字幕的深度信息;如果发声音的响度低于预定的临界范围,则根据发声音的响度和预定的临界范围之间的差,适应性地减小与发声内容相应的字幕的深度信息。
3.如权利要求2所述的方法,其中,处理视频信号的步骤包括:在屏幕上显示具有预定的3D效果的对象,如果对象发声的发声音的响度在预定的临界范围内,则在屏幕上以与对象的预定的3D效果相同的3D效果将对象发声的发声音的字幕与对象一起显示。
4.如权利要求1所述的方法,其中,分别改变的步骤包括:如果在音频信号中的发声音的响度超过预定的临界范围,则将与发声音相应的字幕的深度信息增加到预定的最大值;如果发声音的响度低于预定的临界范围,则将与发声音相应的字幕的深度信息减小到预定的最小值。
5.如权利要求1所述的方法,其中,处理视频信号的步骤包括:如果在一个屏幕上显示具有不同的3D效果的多个对象,则根据各个对象的3D效果不同地显示与对象各自发声的发声音相应的字幕的3D效果。
6.一种3D显示设备,包括:
图像处理单元,处理包括在内容信号中的视频信号和音频信号;
输出单元,在屏幕上显示处理的视频信号并输出处理的音频信号;
控制单元,控制输出单元与在屏幕上的视频信号同步地输出音频信号,并根据音频信号的响度级,分别改变显示在屏幕上的字幕的3D效果。
7.如权利要求6所述的设备,其中,如果音频信号中的发声音的响度超过预定的临界范围,则控制单元根据发声音的响度和预定的临界范围的差,适应性地增加与发声音相应的字幕的深度信息,如果发声音的响度低于预定的临界范围,则控制单元根据发声音的响度和预定的临界范围的差,适应性地减小与发声音相应的字幕的深度信息。
8.如权利要求7所述的设备,其中,控制单元进行控制,以在屏幕上显示具有预定的3D效果的对象,如果对象发声的发声音的响度在预定的范围之内,则控制单元进行控制,以在屏幕上以与对象的预定的3D效果相同的3D效果将对象发声的发声音的字幕与对象一起显示对象。
9.如权利要求6所述的设备,其中,如果音频信号中的发声音的响度超过预定的临界范围,则控制单元将与发声音相应的字幕的深度信息增加到预定的最大值;如果发声音的响度低于预定的临界范围,则控制单元将与发声音相应的字幕的深度信息减小到预定的最小值。
10.如权利要求6所述的设备,其中,如果在一个屏幕上显示具有不同的3D效果的多个对象,则控制单元进行控制,以根据各个对象的3D效果,不同地显示与对象各自发声的发声音相应的字幕的3D效果。
11.一种三维3D图像处理设备的内容处理方法,该方法包括:
确定音频信号的特性;及
根据音频信号的确定的特性,分别控制将被显示的字幕的3D效果。
12.如权利要求11所述的方法,其中,音频信号的特性是音频信号的响度级。
13.如权利要求11所述的方法,其中,分别控制的步骤包括:
如果音频信号中的发声音的特性值超过预定的临界范围,则根据发声音的特性值和预定的临界范围之间的差,适应性地增加与发声音相应的字幕的深度信息;及
如果发声音的特性值低于预定的临界范围,则根据发声音的特性值和预定的临界范围之间的差,适应性地减小与发声音相应的字幕的深度信息。
14.如权利要求13所述的方法,还包括:
确定帧的对象的3D效果;及
分别控制的步骤包括:如果对象发声的发声音的特性值在预定的临界范围内,则以与确定的对象的3D效果相同的3D效果输出对象发声的发声音的字幕。
CN201210254435XA 2011-07-21 2012-07-20 3d显示设备及其内容显示方法 Pending CN102892024A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2011-0072695 2011-07-21
KR1020110072695A KR20130011506A (ko) 2011-07-21 2011-07-21 3d 디스플레이 장치 및 컨텐츠 출력 방법

Publications (1)

Publication Number Publication Date
CN102892024A true CN102892024A (zh) 2013-01-23

Family

ID=46146605

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210254435XA Pending CN102892024A (zh) 2011-07-21 2012-07-20 3d显示设备及其内容显示方法

Country Status (5)

Country Link
US (1) US20130021454A1 (zh)
EP (1) EP2549768A3 (zh)
JP (1) JP2013027049A (zh)
KR (1) KR20130011506A (zh)
CN (1) CN102892024A (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI503579B (zh) * 2013-06-07 2015-10-11 Young Optics Inc 立體影像裝置、其立體影像掃描底座及其運作方法
CN115150660B (zh) * 2022-06-09 2024-05-10 深圳市闪剪智能科技有限公司 一种基于字幕的视频编辑方法和相关设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1883194A (zh) * 2003-11-17 2006-12-20 皇家飞利浦电子股份有限公司 视频图像处理方法
CN1984274A (zh) * 2005-12-16 2007-06-20 乐金电子(沈阳)有限公司 图像显示器字幕处理装置及方法
US20110018966A1 (en) * 2009-07-23 2011-01-27 Naohisa Kitazato Receiving Device, Communication System, Method of Combining Caption With Stereoscopic Image, Program, and Data Structure
CN102111631A (zh) * 2009-12-28 2011-06-29 索尼公司 图像处理装置、图像处理方法以及程序

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006079684A (ja) * 2004-09-08 2006-03-23 Alpine Electronics Inc 再生装置および再生方法
JP5429034B2 (ja) * 2009-06-29 2014-02-26 ソニー株式会社 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
US20110227911A1 (en) * 2010-03-22 2011-09-22 Lg Electronics Inc. Image display device and method for operating the same
JP2011239169A (ja) * 2010-05-10 2011-11-24 Sony Corp 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1883194A (zh) * 2003-11-17 2006-12-20 皇家飞利浦电子股份有限公司 视频图像处理方法
CN1984274A (zh) * 2005-12-16 2007-06-20 乐金电子(沈阳)有限公司 图像显示器字幕处理装置及方法
US20110018966A1 (en) * 2009-07-23 2011-01-27 Naohisa Kitazato Receiving Device, Communication System, Method of Combining Caption With Stereoscopic Image, Program, and Data Structure
CN102111631A (zh) * 2009-12-28 2011-06-29 索尼公司 图像处理装置、图像处理方法以及程序

Also Published As

Publication number Publication date
JP2013027049A (ja) 2013-02-04
US20130021454A1 (en) 2013-01-24
KR20130011506A (ko) 2013-01-30
EP2549768A3 (en) 2014-08-27
EP2549768A2 (en) 2013-01-23

Similar Documents

Publication Publication Date Title
US9124870B2 (en) Three-dimensional video apparatus and method providing on screen display applied thereto
US8930838B2 (en) Display apparatus and display method thereof
CN102164297B (zh) 图像显示装置、3d观看装置及其操作方法
EP2315450A2 (en) 2D/3D display apparatus and 2D/3D image display method therein
US20100045779A1 (en) Three-dimensional video apparatus and method of providing on screen display applied thereto
CN102223555B (zh) 图像显示装置及其控制方法
EP2611162B1 (en) Apparatus and method for displaying
RU2598989C2 (ru) Устройство отображения трехмерного изображения и способ отображения для такового
KR20110053734A (ko) 영상표시장치 및 그 동작방법
KR20110096494A (ko) 전자 장치 및 입체영상 재생 방법
EP2339858A2 (en) 3D Image Synchronization Apparatus and 3D Image Providing System
US20140015941A1 (en) Image display apparatus, method for displaying image and glasses apparatus
CN102387394A (zh) 显示装置及其图像生成方法
US20120154558A1 (en) Display apparatus and method for processing image thereof
US8957950B2 (en) Electronic apparatus and image output method
KR20120034996A (ko) 영상표시장치 및 그 동작방법
KR102192986B1 (ko) 영상 디스플레이 장치 및 영상 디스플레이 방법
KR101885215B1 (ko) 디스플레이 장치 및 그 디스플레이 방법
CN102892024A (zh) 3d显示设备及其内容显示方法
US20120086711A1 (en) Method of displaying content list using 3d gui and 3d display apparatus applied to the same
US9117387B2 (en) Image display apparatus and method for operating the same
KR101620969B1 (ko) 디스플레이 장치 및 이에 적용되는 3d 영상 미리보기 제공 방법, 그리고 3d 영상 제공 시스템
US9547933B2 (en) Display apparatus and display method thereof
KR101804912B1 (ko) 입체영상 디스플레이 장치 및 입체영상 자막 디스플레이 방법
JP2011223640A (ja) 電子機器及び画像出力方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130123