CN102572463A - 视频信号处理装置、视频信号处理方法和计算机程序 - Google Patents

视频信号处理装置、视频信号处理方法和计算机程序 Download PDF

Info

Publication number
CN102572463A
CN102572463A CN2011103097132A CN201110309713A CN102572463A CN 102572463 A CN102572463 A CN 102572463A CN 2011103097132 A CN2011103097132 A CN 2011103097132A CN 201110309713 A CN201110309713 A CN 201110309713A CN 102572463 A CN102572463 A CN 102572463A
Authority
CN
China
Prior art keywords
video
frame
right eye
left eye
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011103097132A
Other languages
English (en)
Inventor
秋叶俊哉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN102572463A publication Critical patent/CN102572463A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/128Adjusting depth or disparity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183On-screen display [OSD] information, e.g. subtitles or menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/341Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using temporal multiplexing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

在此公开视频信号处理装置、视频信号处理方法和计算机程序。所述视频信号处理装置包括:立体图像输入单元,其以分时方式交替地输入左眼的视频帧和右眼的视频帧;平面存储器,其保持与视频帧重叠的图形数据;读取相位添加单元,其在显示左眼视频帧和右眼视频帧时从平面存储器中读取图形数据的时候给出相位差;以及视频重叠单元,其将读取相位提供有差异的每个图形数据与左眼的视频帧和右眼的视频帧中的每一个重叠。

Description

视频信号处理装置、视频信号处理方法和计算机程序
技术领域
本公开涉及处理包括左眼的视频信号和右眼的视频信号的立体图像的图像信号处理装置、图像信号处理方法和计算机程序。具体地,本公开涉及将诸如字符或者图画(figure)之类的图形显示与立体图像重叠的图像信号处理装置、图像信号处理方法和计算机程序。
背景技术
在现有技术中,可以通过显示在左右眼中具有视差的视频来呈现向观看者三维地示出的立体图像。作为呈现立体图像的方法,提供了使观看者佩戴具有特殊光学特性的眼镜并且呈现给出双目视差的图像的方法。
例如,分时立体图像显示系统由以分时方式显示彼此不同的多个图像的显示装置和视频的观看者佩戴的快门眼镜的组合形成。显示装置在屏幕上以非常短的周期交替地显示具有双目视差的左眼视频和右眼视频。同时,由观看者佩戴的快门眼镜包括由用于左眼和右眼的相应液晶透镜形成的快门机构。该快门眼镜具有这样的配置:在显示左眼的视频时,快门眼镜的左眼部分允许光穿过,而其右眼部分屏蔽光。另外,在显示右眼的视频时,快门眼镜的右眼部分允许光穿过,而其左眼部分屏蔽光(例如,参见日本待审专利申请公开NO.9-138384、日本待审专利申请公开NO.2000-36969和日本待审专利申请公开NO.2003-45343)。即,可以通过使用显示装置以分时方式显示左眼部分和右眼的视频,并且通过使用快门机构与显示装置的显示切换同步地选择图像的快门眼镜来向观看者呈现立体图像。
另一方面,提供了通过与原始视频进行重叠而显示诸如字符或图画之类的OSD(屏显)图形等的技术。
如果在用于左眼的显示和用于右眼的显示之间存在双目视差,则可以类似于立体图像三维地观看诸如字符或者图画之类的图形数据。考虑到在深度方向上的布置位置,如果通过添加适当的深度将OSD信息与立体图像重叠,则可以进一步减少在观看OSD信息和立体图像时所造成的眼睛疲劳(例如,参见日本待审专利申请公开NO.2009-135686)。
例如,分别为左眼和右眼提供独立的OSD平面(plane);向要写入到对应OSD平面的、为左眼和右眼绘制的对象给出对应于每个深度的相位差;并且将左眼的OSD平面与左眼的视频重叠,将右眼的OSD平面与右眼的视频重叠,以便以分时方式进行显示,由此可以与视频一起三维地观看字符和图画。
然而,使用上述的方法,为了三维地显示字符和图画,必须为左眼和右眼绘制一组OSD信息。相应地,与二维地进行OSD显示的情形相比较,由于加倍的绘图处理是必要的,因此期望加强绘图引擎的绘图能力。另外,由于用于左眼和右眼(即,用于两个屏幕)的单独OSD平面分别是都需要的,因此与二维地进行OSD显示的情形相比较,使用加倍的存储器区域,由此装置的成本加倍。
发明内容
期望提供一种优异的视频信号处理装置、视频信号处理方法以及计算机程序,其可以显示要与包括左眼的视频信号和右眼的视频信号的立体图像重叠的、具有合适深度的诸如字符或者图画之类的图形数据。
还期望提供一种优异的视频信号处理装置、视频信号处理方法以及计算机程序,其可以以小的处理负荷并且以节约存储器的方式显示要与立体图像重叠的合适深度的图形数据。
根据本公开的实施例,提供了一种视频信号处理装置,包括:立体图像输入单元,其以分时方式交替地输入左眼的视频帧和右眼的视频帧;平面存储器,其用于保持与视频帧重叠的图形数据;读取相位添加单元,其在显示左眼的视频帧时和显示右眼的视频帧时从平面存储器中读取图形数据的时候给出相位差;以及视频重叠单元,其将读取相位差异化了的每个图形数据分别与左眼的视频帧和右眼的视频帧中的每一个重叠。
在所述视频信号处理装置中,读取相位添加单元可以配置为以在平面存储器中绘制的绘图对象为单位或者以位图为单位向读取相位给出差异。
在所述视频信号处理装置中,读取相位添加单元可以用如下单元配置:深度信息保存单元,其以在平面存储器中绘制的绘图对象为单位或者以位图为单位保持深度信息;以及双目视差添加单元,其保持在左眼的视频帧和右眼的视频帧的每个显示时刻读取出的图形数据,并且通过基于深度信息保存单元中保持的深度信息设置延迟时间量,以在显示左眼的视频帧时以及显示右眼的视频帧时给出相位差。
在所述视频信号处理装置中,视频信号处理装置可以进一步包括图形数据放大和缩小单元,其基于深度信息保存单元中保持的深度信息,放大或缩小在左眼的视频帧和右眼的视频帧的每个显示时刻读取的图形数据。
根据本公开的又一实施例,提供了一种视频信号处理装置,包括:立体图像输入单元,其以分时方式交替地输入左眼的视频帧和右眼的视频帧;平面存储器,其通过一个或多个窗口配置,用于与视频帧重叠的每个绘图对象;深度信息保存单元,其保持每个窗口的深度信息;读取相位添加单元,其基于深度信息保存单元中保持的深度信息,在显示左眼的视频帧时和显示右眼的视频帧时读取窗口的时候改变相位差;以及视频重叠单元,其将读取相位差异化了的每个窗口与左眼的视频帧和右眼的视频帧中的每一个重叠。
该视频信号处理装置可以进一步包括:窗口放大和缩小单元,其基于深度信息保存单元中保持的深度信息,放大或者缩小每个窗口。
根据本公开的又一实施例,提供了一种视频信号处理方法,包括:将与视频帧重叠的图形数据保持至平面存储器;在显示左眼的视频帧时和显示右眼的视频帧时,通过将差异给予读取相位,从平面存储器读取图形数据;以及将读取相位差异化了的每个图形数据分别与左眼的视频帧和右眼的视频帧重叠中的每一个相重叠。
根据本公开的又一实施例,提供了一种视频信号处理方法,包括:将与视频帧重叠的每个绘图对象保持至平面存储器所对应的窗口;在显示左眼的视频帧时和显示右眼的视频帧时,基于深度信息,将差异给予读取相位,以从平面存储器读取窗口;以及将读取相位差异化了的每个窗口与左眼的视频帧和右眼的视频帧中的每一个重叠。
根据本公开的又一实施例,提供了一种计算机程序,其被描述为由计算机读取以便在该计算机上执行视频信号的处理,其使得计算机用作:立体图像输入单元,其以分时方式交替地输入左眼的视频帧和右眼的视频帧;平面存储器,其保持与视频帧重叠的图形数据;读取相位添加单元,其在显示左眼的视频帧时和显示右眼的视频帧时从平面存储器读取图形数据的时候给出相位差;以及视频重叠单元,其将读取相位差异化了的每个图形数据与左眼的视频帧和右眼的视频帧中的每一个重叠。
根据本公开的又一实施例,提供了一种计算机程序,其被描述为由计算机读取以便在该计算机上执行视频信号的处理,其使得计算机用作:立体图像输入单元,其以分时方式交替地输入左眼的视频帧和右眼的视频帧;平面存储器,其通过一个或多个窗口配置,用于与视频帧重叠的每个绘图对象;深度信息保存单元,其保持每个窗口的深度信息;读取相位添加单元,其基于深度信息保存单元中保持的深度信息,在显示左眼的视频帧时和显示右眼的视频帧时从平面存储器读取窗口时改变相位差;以及视频重叠单元,其将读取相位差异化了的每个窗口与左眼的视频帧和右眼的视频帧中的每一个重叠。
根据本公开的实施例的计算机程序是指被描述为计算机可读的计算机程序,以便通过计算机实现预定处理。换言之,根据本公开的实施例的计算机程序被安装到计算机上以通过计算机执行协同操作,由此获得与根据本公开的实施例的视频信号处理装置的操作效果相同的操作效果。
根据本公开的实施例,可以提供优异的视频信号处理装置、视频信号处理方法以及计算机程序,其可以以小的处理负荷并且以节约存储器的方式显示要与立体图像重叠的具有合适深度的图形数据。
根据本公开的实施例,由于对于左眼和右眼共享一个平面存储器而无需将单独的平面存储器用于左眼和右眼二者以保持图形数据,因此图形数据的绘图处理的负荷变小,并且可以使得保持图形数据的平面存储器具有小的容量。平面存储器可以具有与在显示二维视频时使用的大小相同的正常大小。
根据本公开的实施例,通过在从左眼的视频帧和右眼的视频帧共享的一个平面存储器中读取时提供相位差,向图形数据应用合适的深度,可以使得左眼的视频帧和右眼的视频帧彼此重叠。由于可以与立体图像一起三维地看见图形数据,所以可以减少观看者的眼睛疲劳。
根据本公开的实施例,通过在从平面读取时提供相位差,可以基于深度信息放大或者缩小与左眼的视频帧和右眼的视频帧重叠的图形数据以加强视觉上的深度(距离)感。
此外,本公开的优点将通过基于稍后要描述的本公开的实施例或者附图的详细描述而清晰化。
附图说明
图1A和1B是示意性地示出视频显示系统的配置示例的图;
图2是示出显示装置的内部配置示例的图;
图3是示出快门眼镜的内部配置示例的图;
图4是示出在L子帧时间段中快门眼镜的控制操作的图;
图5是示出在R子帧时间段中快门眼镜的控制操作的图;
图6A是示意性示出用于将OSD信息重叠到立体图像的功能配置的图;
图6B是示意性示出用于基于深度放大或缩小与立体图像重叠的OSD信息的功能配置的图;
图7是示出将双目视差添加到与立体图像重叠的OSD信息的方式的图;
图8A是示意性示出用于将OSD信息与立体图像重叠的另一功能配置示例的图;以及
图8B是示意性示出用于基于深度放大或缩小与立体图像重叠的OSD信息的功能配置的图。
具体实施方式
将参照附图描述根据本公开的实施例。
图1示意性地示出视频显示系统的配置示例。该视频显示系统由可以三维地(立体地)显示图像的显示装置11和具有分别用于左眼和右眼的快门机构的快门眼镜13的组合形成。在图1A示出的示例中,在通过外部终端连接到显示装置11的通信单元12和快门眼镜13之间传送和接收无线信号。另外,在图1B示出的示例中,在内置于显示装置11的主体中的通信单元12和快门眼镜13之间传送和接收无线信号。
在许多情形下,在显示装置和快门眼镜之间使用红外传输作为通信单元;然而,在本实施例中,使用应用了诸如IEEE802.15.4之类的无线电通信的无线网络。在图1示出的系统配置示例中,显示装置11和快门眼镜13进行一对一的通信。然而,通过使得显示装置11的通信单元12用作接入点,可以容纳(accommodate)分别用作终端站的多个快门眼镜。
用于显示立体图像的显示装置不限于特定类型。例如,除了现有技术中的CRT(阴极射线管)显示器之外,还可以采用等离子显示面板(PDP)、液晶显示器(LCD)和电致发光(EL)面板。下文将显示装置11设置为液晶显示器。
图2中图示了显示装置11的内部配置示例。然而,在该图中(参照图1B),其是在主体中内置无线网络的通信单元的显示装置。下文描述每个单元。
可以使用天线204接收广播立体影像节目的广播电波。在广播电波从天线204输入时,调谐器电路205选择期望的流。MPEG解码器206从调谐器电路205选择的所选流提取视频信号和声音信号。
另外,作为广播电波以外的获取视频信号的手段,存在从连接到作为图画接口的HDMI(高清多媒体接口)终端214的外部源装置(未示出)输入立体影像内容的情形以及通过因特网接收立体影像内容的情形。
HDMI接收电路215将连接到HDMI终端214的外部源装置输入的信号划分给视频信号处理电路217和声音信号处理电路211。另外,来自网络终端217的接收信号通过诸如以太网(商标)接口之类的通信处理电路216输入到MPEG解码器206。MPEG解码器206从接收信号中提取视频信号和声音信号。
视频信号输入到视频信号处理电路207,并且执行必要的信号处理。视频信号处理电路207执行的信号处理例如包括诸如色彩点校准或者强度降低之类的图像校正处理。面板驱动电路209控制栅极驱动器和数据驱动器(二者均未示出)的驱动时序,并且将从视频信号处理电路207提供的视频信号提供给数据驱动器。面板驱动电路209可以对视频信号进行过驱动处理。
图形处理电路208在必要时生成由字符或图画形成的OSD信息,并且将该信息与视频信号处理电路207输出的视频信号重叠。图形处理电路208例如根据通过内部总线218从CPU 219接收到的绘图指令来生成OSD信息。可替换地,通过内部总线218将OSD信息从CPU 219传送给图形处理电路208。图形处理电路208包括用于暂时地保持要绘制的OSD信息的OSD平面;与视频信号同步地读取OSD信息;进行重叠处理;并且在对OSD显示进行显示时,向处于下一级的面板驱动电路209输出。在本实施例中,当显示并输出立体影像信号时,向与立体影像信号重叠并显示到立体影像信号的OSD信息给出适当的深度,然而,该处理的细节将在稍后描述。
另外,声音信号输入到声音信号处理电路211中,并且在对其执行了必要的信号处理之后,在声音放大电路212中将其放大到期望的声音级别,并且然后驱动扬声器213。
视频信号处理电路207处理视频信号,同时生成对于快门眼镜的快门的切换控制必需的帧切换信号,并且将该信号输入到控制电路224。控制电路224基于输入帧切换信号的时序,生成指示快门眼镜的左右快门的切换时序的开启控制信号。通过无线电通信将该开启控制信号从通信单元203无线地传送给快门眼镜。
在用户利用遥控器223执行遥控以操作显示装置11时,通过遥控接收单元222接收使用红外线传送的控制代码。在图2所示的示例中,采用红外通信类型用以遥控;然而,通信单元203也可以用于遥控。
为了控制整个显示装置11,安装了诸如CPU 219、闪存ROM 220、DRAM221之类的电路组件等。通过内部总线218将遥控接收单元222(或者通信单元203)中接收的控制代码传送给CPU 219。CPU 219通过读取控制代码以控制显示装置11的操作。另外,通过控制电路224将通信单元213中接收的眼镜信息输入至CPU 219。CPU 219将该眼镜信息与计算的信息一起存储在闪存ROM 220中。
在图3中,图示了快门眼镜13的内部配置示例。快门眼镜13包括:通信单元305,其使用无线电通信向显示装置11传送无线信号并且从显示装置11接收无线信号;控制单元306;存储单元310,其存储眼镜信息或者其它数据;左眼快门308和右眼快门309,其分别由液晶材料形成;以及快门驱动电路307。
从显示装置11向快门眼镜13传送的无线信号例如是指示快门眼镜的左右快门的切换时序的开启控制信号。通信单元305在接收到开启控制信号时将该开启控制信号输入给控制单元306。控制单元306读取该开启控制信号,区分左右快门308和309的切换时序,并且基于区分结果,通过快门驱动电路307控制左右快门308和309中每一个的切换操作。
在图4中,图示了在L子帧时间段中快门眼镜13的控制操作。如图中所示,在L子帧时间段中,根据从显示装置11一侧的通信单元203无线传送的切换控制信号,左眼快门308设为开启状态,而右眼快门309设为关闭状态,并且基于左眼图像L的显示光LL只到达观看者的左眼。另外,在图5中,图示了在R子帧时间段中快门眼镜13的控制操作。如图中所示,在R子帧时间段中,根据来自显示装置11一侧的切换控制信号,右眼快门309设为开启状态,而左眼快门308设为关闭状态,并且基于右眼图像R的显示光RR只到达观看者的右眼。
当在显示装置11中显示并输出立体图像时,还可以通过向以重叠方式显示的诸如字符图画之类的OSD信息给出合适的深度来减少在观看OSD信息和立体图像时造成的眼睛疲劳。然而,当分别为左眼和右眼绘制独立的OSD信息时,尽管具有相同的内容,但执行绘图处理两次。另外,必须使用两个OSD平面用于写入内容,由此增加绘图处理的负荷并且耗费存储器资源。
另一方面,发明人提出这样的实施方式:以小的处理负荷绘制立体OSD信息,使用小容量(capacity)的OSD平面,将具有深度的OSD信息与立体图像进行重叠,并且进行显示。在该实施方式中,在一个OSD平面上绘制由左眼和右眼共享的OSD信息,而没有用于左眼和右眼的独立OSD平面。另外,当将OSD信息重叠并显示至立体图像时,通过延迟从OSD平面读取OSD信息的时序,向OSD信息给出合适的深度。在显示用于左眼的视频帧时和显示用于右眼的视频帧时,通过与深度对应的延迟量(即,左眼图像和右眼图像之间的双目视差)将相位差提供给从OSD平面读取OSD信息的时刻。即使OSD信息在OSD平面上具有相同的坐标位置,但由于在左眼的视频帧和右眼的视频帧中水平显示位置被位移了读取时刻的相位差,因此这被视为观看者的双目视差,于是,可以实现OSD信息的立体影像。
在图2(在之前描述)所示的显示装置11中,在图形处理电路208中执行OSD信息与视频的重叠处理。据此,当显示立体图像时,可以在图形处理电路208中执行向OSD信息给出深度的处理。
图6A中示意性图示了用于将OSD信息与立体图像重叠的功能配置。图中的功能配置例如安装在图形处理电路208中,然而,在安装时,本公开的要点不限于特定示例。
OSD平面61是暂时地保持与视频帧重叠的OSD信息的平面存储器。在此实施例中,在通过以分时方式显示左眼的视频帧和右眼的视频帧以显示立体图像时,由单个平面存储器形成的OSD平面61由左眼和右眼共享。即,用于OSD的平面存储器的一个平面可以具有与在显示普通的二维图像时的一个平面相同的大小。
OSD信息由诸如字符或者图画之类的绘图对象形成。在图6所示的示例中,字符图画NO.1和字符图画NO.2这两个绘图对象被配置为与视频帧重叠,并且被配置为绘制在OSD平面61上的每个对应坐标位置处。
根据通过内部总线218从CPU 219接收到的绘图指令,图形处理电路208生成诸如字符或者图画之类的对象,并且在OSD平面61的对应位置处执行绘图。可替换地,图形处理电路208在OSD平面61中绘制通过内部总线218从CPU 219传送的OSD信息。
当显示立体图像时,与左眼的视频帧和右眼的视频帧的每个显示时序同步地从OSD平面61读取OSD信息。
通过链接,深度信息保存单元62保持与OSD信息有关的并且在OSD平面61中保持的深度信息。深度信息保存单元62可以以OSD信息中包括的绘图对象为单位或者以位图为单位保持深度信息。在以下描述中,为了简便起见,假设深度信息保存单元以绘图对象为单位保持深度信息(在图6所示的示例中,对于字符图画NO.1和字符图画NO.2中的每一个)。假设深度信息保存单元62以下表中示出的数据结构为每个绘图对象保持左眼的视频帧中的深度信息dL和右眼的视频帧中的深度信息dR
表1
Figure BDA0000098340540000091
基于深度信息保存单元中保持的深度信息,双目视差添加单元63将双目视差添加到根据左眼视频帧和右眼视频帧的每个显示时序从OSD平面61读取出的OSD信息。在与左眼的视频帧和右眼的视频帧的每个显示时序同步地从OSD平面61读取OSD信息时,通过以基于深度信息的延迟量提供相位差,将双目视差添加到OSD信息。例如,当某个绘图对象的左眼视频帧和右眼视频帧中每一个的深度信息设为dL和dR时,与左眼视频帧和右眼视频帧的每个显示时序同步地在所读取的OSD信息之间提供对应于D=dL-dR的相位差。
例如可以利用FIFO存储器配置双目视差添加单元63。在FIFO存储器中暂时地存储与左眼视频帧和右眼视频帧的每个显示时序同步地从OSD平面61读取出的绘图对象数据。另外,如果基于深度信息保存单元62中保持的深度信息(dL和dR)将延迟量设置至FIFO存储器,则可以向左眼视频帧和右眼视频帧中的每一个的OSD信息给出相位差。
视频输入单元65从视频信号处理电路207的输出级输入视频信号。视频重叠单元64将输入视频信号与从OSD平面61读取的OSD信息信号彼此重叠。当以分时方式通过交替地显示左眼视频帧和右眼视频帧来显示立体图像时,使用双目视差添加单元63,以OSD信息的显示时序在左眼视频帧和右眼视频帧之间提供对应于D=dL-dR的延迟量。出于此原因,在视频重叠单元64中执行了重叠之后,在左眼视频帧和右眼视频帧之间OSD信息的帧中的显示位置上出现相位差。因此,其被视为观看者的双目视差,并且与立体图像一起三维地观看OSD信息。
另外,可以通过基于深度放大或缩小OSD信息,并且通过向与左眼视频帧和右眼视频帧中的每一个重叠的OSD信息提供相位差,以加强视觉的深度(距离)感。
作为图6A的修改示例的图6B中示意性地图示了用于基于深度放大和缩小与立体图像重叠的OSD信息的功能配置。与图6A的主要差异在于,图6B还包括放大和缩小单元86。放大和缩小单元86基于深度信息保存单元62中保持的深度信息,对左眼视频帧和右眼视频帧的每个显示时序上读取出的绘图对象的数据进行放大或缩小。结果,由于以对应于深度的大小显示在左眼视频帧和右眼视频帧中显示的OSD信息,因此可以加强视觉上的深度(距离)感。在图6B所示的示例中,配置为:绘图对象在放大和缩小单元86中放大或缩小,然后在双目视差添加单元63中提供有相位差。然而,可以进行配置以使得左眼视频帧和右眼视频帧中的每一个在双目视差添加单元63中提供有相位差,然后绘制对象在放大和缩小单元86中放大或缩小。
图7中图示了向与立体图像重叠的OSD信息给予双目视差的方式。立体图像的一个帧由以分时方式显示的一组左眼视频帧L和右眼视频帧R形成。在显示左眼视频帧和右眼视频帧时,相对于从OSD平面61中读取的字符图画NO.1和字符图画NO.2设置基于深度信息的每个项目的相位差。出于此原因,在分别与左眼视频帧和右眼视频帧重叠的字符图画NO.1和字符图画NO.2的帧中的显示位置处存在相位差。于是,此相位差被视为观看者的双目视差,并且与立体图像类似地三维地观看字符图画NO.1和字符图画NO.2。
在图8A中示意性图示了用于将OSD信息与立体图像重叠的另一功能配置示例。类似于图6中所示的配置示例,进行配置以使得由左眼视频帧和右眼视频帧共享单个OSD平面81。然而,与图6中的示例的差异在于,用以绘图对象为单位的一个或者多个窗口配置OSD平面81。
OSD信息由一个或多个诸如字符图画之类的绘图对象形成,然而,以对象为单位配置窗口。每个窗口是具有关于帧的大小和位置的平面。以窗口为单位执行用于给出双目视差或者重叠左右眼视频帧的处理。
图6A中示出的字符图画NO.1和字符图画NO.2分别对应于图8A中的窗口NO.1和窗口NO.2。每个窗口是具有关于帧的原始位置和大小的平面。
当显示立体图像时,与左眼视频帧和右眼视频帧的每个显示时序同步地从OSD平面81中读取OSD信息。
通过链接,深度信息保存单元82保持OSD平面81中所保持的每个窗口的深度信息。
与左眼视频帧和右眼视频帧的每个显示时序同步地从OSD平面81读取窗口;然而,基于窗口的深度信息,针对左右眼视频帧中的每一个改变读取相位。
如上所述,与左右眼视频帧的每个显示时序同步地将读取窗口数据暂时地写入FIFO存储器,并且可以基于窗口的深度信息将延迟量设置到FIFO存储器以针对左右眼视频帧的每一个改变读取相位。
视频信号输入单元85从视频信号处理电路207的输出级输入视频信号。视频重叠单元84将输入视频信号与从OSD平面81读取出的每个窗口进行重叠。当以分时方式交替地显示左眼视频帧和右眼视频帧以显示立体图像时,基于深度信息向每个窗口提供读取相位的差异。出于此原因,在视频重叠单元84中重叠之后,在左眼的视频帧和右眼的视频帧之间每个窗口的帧的显示位置上存在相位差。该相位差被视为观看者的双目视差,并且与立体图像一起三维地观看OSD信息。
另外,通过基于深度放大或者缩小OSD信息并且向与左右眼视频帧中的每一个重叠的OSD信息提供相位差,可以加强视觉上的深度(距离)感。
作为图8A的修改示例的图8B中示意性地图示了用于基于深度放大和缩小与立体图像重叠的OSD信息的功能配置。与图8A的主要差异在于,图8B还包括放大和缩小单元86。放大和缩小单元86基于深度信息保存单元62中保持的每个深度信息,对从OSD平面81读取出的对象NO.1和NO.2中的每一个进行放大或者缩小。结果,由于以与深度对应的大小显示左眼视频帧和右眼视频帧中所显示的OSD信息,因此可以加强视觉上的深度(距离)感。
本公开包含与2010年10月13日向日本专利局提交的日本优先权专利申请JP 2010-230692中公开的主题有关的主题,其全部内容通过引用的方式合并在此。
本领域的技术人员应该理解,依据设计要求和其他因素,可出现各种修改、组合、部分组合和变更,只要它们落在所附权利要求或其等效体的范围内即可。

Claims (10)

1.一种视频信号处理装置,包括:
立体图像输入单元,其以分时方式交替地输入左眼的视频帧和右眼的视频帧;
平面存储器,其保持与视频帧重叠的图形数据;
读取相位添加单元,其在显示左眼的视频帧和右眼的视频帧时从平面存储器中读取图形数据的时候给出相位差;以及
视频重叠单元,其将读取相位提供有差异的每个图形数据与左眼的视频帧和右眼的视频帧中的每一个重叠。
2.如权利要求1所述的视频信号处理装置,
其中,读取相位添加单元以在平面存储器中绘制的绘图对象为单位或者以位图为单位向读取相位给出差异。
3.如权利要求1所述的视频信号处理装置,
其中,读取相位添加单元包括:
深度信息保存单元,其以在平面存储器中绘制的绘图对象为单位或者以位图为单位保持深度信息;以及
双目视差添加单元,其保持在左眼的视频帧和右眼的视频帧的每个显示时刻读取出的图形数据,基于深度信息保存单元中保持的深度信息设置延迟时间量,并在显示左眼的视频帧时以及显示右眼的视频帧时给出相位差。
4.如权利要求3所述的视频信号处理装置,还包括:
图形数据放大和缩小单元,其基于深度信息保存单元中保持的深度信息,放大或缩小在左眼的视频帧和右眼的视频帧的每个显示时刻读取的图形数据。
5.一种视频信号处理装置,包括:
立体图像输入单元,其以分时方式交替地输入左眼的视频帧和右眼的视频帧;
平面存储器,其通过一个或多个窗口配置,用于与视频帧重叠的每个绘图对象;
深度信息保存单元,其保持每个窗口的深度信息;
读取相位添加单元,其基于深度信息保存单元中保持的深度信息,在显示左眼的视频帧时和显示右眼的视频帧时从平面存储器中读取窗口的时候改变相位差;以及
视频重叠单元,其将读取相位差异化了的每个窗口分别与左眼的视频帧和右眼的视频帧重叠。
6.如权利要求3所述的视频信号处理装置,还包括:
窗口放大和缩小单元,其基于深度信息保存单元中保持的深度信息,放大或者缩小每个窗口。
7.一种视频信号处理方法,包括:
在平面存储器中保持与视频帧重叠的图形数据;
在显示左眼的视频帧时和显示右眼的视频帧时,通过使读取相位差异化,从平面存储器读取图形数据;以及
将读取相位差异化了的图形数据分别与左眼的视频帧和右眼的视频帧重叠。
8.一种视频信号处理方法,包括:
将与视频帧重叠的每个绘图对象保持在平面存储器的对应窗口中;
在显示左眼的视频帧时和显示右眼的视频帧时,基于深度信息,通过使读取相位差异化,从平面存储器读取窗口;以及
将读取相位差异化了的每个窗口分别与左眼的视频帧和右眼的视频帧重叠。
9.一种计算机程序,其被描述为由计算机读取以使得在该计算机上执行视频信号处理,
其中,该计算机程序使得计算机用作:
立体图像输入单元,其以分时方式交替地输入左眼的视频帧和右眼的视频帧;
平面存储器,其保持与视频帧重叠的图形数据;
读取相位添加单元,其在显示左眼的视频帧时和显示右眼的视频帧时从平面存储器读取图形数据的时候给出相位差;以及
视频重叠单元,其将读取相位差异化了的每个图形数据分别与左眼的视频帧和右眼的视频帧重叠。
10.一种计算机程序,其被描述为由计算机读取以使得在该计算机上执行视频信号处理,
其中,该计算机程序使得计算机用作:
立体图像输入单元,其以分时方式交替地输入左眼的视频帧和右眼的视频帧;
平面存储器,其通过一个或多个窗口配置,用于与视频帧重叠的每个绘图对象;
深度信息保存单元,其保持每个窗口的深度信息;
读取相位添加单元,其在显示左眼的视频帧时和显示右眼的视频帧时从平面存储器读取窗口时给出相位差;以及
视频重叠单元,其将读取相位差异化了的每个窗口分别与左眼的视频帧和右眼的视频帧重叠。
CN2011103097132A 2010-10-13 2011-10-13 视频信号处理装置、视频信号处理方法和计算机程序 Pending CN102572463A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010230692A JP2012085166A (ja) 2010-10-13 2010-10-13 映像信号処理装置及び映像信号処理方法、並びにコンピューター・プログラム
JP2010-230692 2010-10-13

Publications (1)

Publication Number Publication Date
CN102572463A true CN102572463A (zh) 2012-07-11

Family

ID=45933819

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011103097132A Pending CN102572463A (zh) 2010-10-13 2011-10-13 视频信号处理装置、视频信号处理方法和计算机程序

Country Status (3)

Country Link
US (1) US20120092456A1 (zh)
JP (1) JP2012085166A (zh)
CN (1) CN102572463A (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5025823B2 (ja) * 2011-01-07 2012-09-12 シャープ株式会社 立体画像表示装置及び立体視用眼鏡
JP2013016116A (ja) * 2011-07-06 2013-01-24 Sony Corp 情報処理装置、画像表示装置、および情報処理方法
WO2013046886A1 (ja) * 2011-09-30 2013-04-04 富士フイルム株式会社 立体画像撮像装置及びその合焦状態確認用画像表示方法
JP6307213B2 (ja) * 2012-05-14 2018-04-04 サターン ライセンシング エルエルシーSaturn Licensing LLC 画像処理装置、画像処理方法およびプログラム
KR101699367B1 (ko) * 2012-05-16 2017-02-14 한국전자통신연구원 3dtv 다중화 방법 및 그 장치
US9406105B2 (en) * 2012-08-02 2016-08-02 The Chinese University Of Hong Kong Binocular visual experience enrichment system
JP6252849B2 (ja) 2014-02-07 2017-12-27 ソニー株式会社 撮像装置および方法

Also Published As

Publication number Publication date
JP2012085166A (ja) 2012-04-26
US20120092456A1 (en) 2012-04-19

Similar Documents

Publication Publication Date Title
JP6023066B2 (ja) 異なる次元のビデオデータストリームを同時表示用に組み合わせること
CN102572463A (zh) 视频信号处理装置、视频信号处理方法和计算机程序
US10593273B2 (en) Image display apparatus capable of improving sharpness of an edge area
US20100091091A1 (en) Broadcast display apparatus and method for displaying two-dimensional image thereof
US20180063498A1 (en) Display processing apparatus, device and method
KR102459652B1 (ko) 표시장치와 그 영상 처리 방법
CN101668130A (zh) 一种电视拼接墙分割补偿系统
WO2015025455A1 (en) Imagedisplay device, image processing device, and image processing method
CN101917641B (zh) Led立体显示器及显示方法、信号接收器
CN104036696A (zh) 显示设备及其控制方法
KR20120047055A (ko) 디스플레이 장치 및 이에 적용되는 그래픽 영상 제공방법
CN104679463A (zh) 分割显示画面并传至不同显示装置显示的显示装置及方法
US20060181538A1 (en) Displaying apparatus and data writing device
CN101917642A (zh) Led立体显示器及显示系统
US11202028B2 (en) Display device configuring multi display system and control method thereof
TWI436345B (zh) 影像顯示方法以及影像顯示系統
CN112351267A (zh) 视频显示方法、显示控制器、显示控制卡和显示控制系统
CN108243293B (zh) 一种基于虚拟现实设备的图像显示方法及系统
CN201766677U (zh) Led立体显示器及显示系统
JP2014041455A (ja) 画像処理装置、画像処理方法、及びプログラム
KR20120027820A (ko) 영상표시장치 및 그 동작방법
KR20120118751A (ko) 영상표시장치 및 그 동작방법
CN102446500B (zh) 图像显示方法以及图像显示系统
US20230205324A1 (en) Image display device and method for operating same
KR101045889B1 (ko) 입체 영상 처리 장치 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20120711