CN102970559A - 立体图像显示装置 - Google Patents

立体图像显示装置 Download PDF

Info

Publication number
CN102970559A
CN102970559A CN2012100448413A CN201210044841A CN102970559A CN 102970559 A CN102970559 A CN 102970559A CN 2012100448413 A CN2012100448413 A CN 2012100448413A CN 201210044841 A CN201210044841 A CN 201210044841A CN 102970559 A CN102970559 A CN 102970559A
Authority
CN
China
Prior art keywords
spectators
display
image
vision area
video camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012100448413A
Other languages
English (en)
Inventor
大泽创
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Publication of CN102970559A publication Critical patent/CN102970559A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/327Calibration thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • H04N13/368Image reproducers using viewer tracking for two or more viewers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • H04N13/373Image reproducers using viewer tracking for tracking forward-backward translational head movements, i.e. longitudinal movements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • H04N13/376Image reproducers using viewer tracking for tracking left-right translational head movements, i.e. lateral movements

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明提供一种立体图像显示装置,该装置具备:显示装置,所述显示装置具有显示面板和光线控制元件,所述显示面板具有以矩阵状排列像素的显示画面,所述光线控制元件控制来自所述显示面板的像素的光线;存储器,存储测试图,所述测试图是具有多个多视差图像且能够使所述观众可看到根据视听位置而不同的多视差图像的测试图,在所述测试图中,对从不优选的视听位置看到的多视差图像标注有提醒所述观众向更好的视听位置移动的记号或消息;以及图像显示控制部,控制使所述测试图显示于所述显示面板。

Description

立体图像显示装置
相关申请的交叉参考
本申请基于并要求于2011年8月31日提交的在先日本专利申请No.2011-189621号的优先权和权益,并将其全部内容结合于此作为参考。
技术领域
本发明的实施方式涉及立体图像显示装置。
背景技术
在裸眼式的立体图像显示装置中,观众(用户)不使用特殊的眼镜就能以裸眼视听立体图像。在这样的立体图像显示装置中,将视点不同的多个图像显示在平面显示装置(例如液晶显示装置)上,并将来自这些图像的光线通过例如视差屏障(parallax barrier)、柱状透镜(lenticular lens)等光线控制元件进行控制,从而使立体图像被观众视听。光线控制元件一般设置在平面显示装置的前面。控制的光线虽然被导向观众的双眼,但如果观众的视听位置适当,观众(视听者)可以看到立体图像。将这种能视听立体图像的视听位置区域称为视区。
但是这样的视区存在限定等问题。也就是说,例如,被左眼感知的图像的视点比右眼感知的图像的视点相对靠右侧,从而存在无法正确视觉确认立体图像的视听位置、即逆视区域。因此,在裸眼式的立体图像显示装置中,存在由于观众的视听位置而导致无法视听正常的立体图像的情况。
因此,在立体图像显示装置中设置了用于检测观众的位置的传感器,根据来自该传感器的输出,生成表示观众的位置、以及仅视区或视区及逆视区域的位置信息,并显示该生成的位置信息。
发明内容
本实施方式的立体图像显示装置,具备:显示装置,所述显示装置具有显示面板和光线控制元件,所述显示面板具有以矩阵状排列像素的显示画面,所述光线控制元件控制来自所述显示面板的像素的光线;存储器,存储测试图,所述测试图是具有多个多视差图像且能够使所述观众可看到根据视听位置而不同的多视差图像的测试图,在所述测试图中,对从不优选的视听位置看到的多视差图像标注有提醒所述观众向更好的视听位置移动的记号或消息;以及图像显示控制部,控制使所述测试图显示于所述显示面板。
附图说明
图1是用于说明一实施方式的立体图像显示装置的图。
图2是用于说明一实施方式的立体图像显示装置的图。
图3是用于说明一实施方式的立体图像显示装置的框图。
图4是摄像机影像及视区图像的显示例子的示意图。
图5(a)至图5(i)是测试图的一例的示意图。
图6是用于说明多视差图像的图。
具体实施方式
下面,参照附图对实施方式进行说明。
在图1中示出了一实施方式的立体图像显示装置。本实施方式的立体图像显示装置1是裸眼式的立体图像显示装置,并具备:显示图像的显示装置10、根据拍摄到的图像检测观众的位置的摄像机20。显示装置10具有以矩阵状排列像素的显示画面。摄像机20例如被设置在包围显示装置10的显示画面的框中的下框。
并且,在本实施方式的立体图像显示装置中设定有XYZ坐标系统。例如,以摄像机20的位置为原点,将与显示装置10的显示画面平行的面作为X-Y面,Z轴与该X-Y面垂直且以朝向观众100的方向作为Z轴的正方向,从而设定坐标系统XYZ。此外,X轴被设定为与显示画面的横方向(水平方向)平行,Y轴被设定为与显示画面的纵方向(垂直方向)平行。
如图2所示,显示装置10具备:显示面板10a、以及设置在该显示面板10a前的光线控制元件10b。光线控制元件10b是视差屏障(parallaxbarrier)、柱状透镜(lenticular lens)等,其用于控制来自显示画面的像素的光线。
此外,如图3所示,本实施方式的立体图像显示装置具备面部追踪部(face tracking)30、存储器35、存储器37以及图像显示控制部40。面部追踪部30对由摄像机20拍摄到的图像进行图像处理,并判断观众是否存在于显示装置10前,同时在观众100存在的情况下,检测从显示装置10到观众100之间的距离以及观众100在上述坐标系统中的位置。面部追踪部30通过对来自摄像机20的图像进行处理,从而识别观众100的面部,根据面部大小来检测从显示装置10到观众100之间的距离以及观众100在上述坐标系统中的位置。例如,摄像机20识别观众100的双眼、即左眼101a及右眼101b,因为双眼的中心间距离不因人而异而大致固定,所以可以根据包含双眼101a、101b的图像来求出到观众100的距离z。如图2所示,该距离z表示从光线控制元件10b的前面到观众100的眼间中心102之间的距离。并且,所谓观众100的位置是指观众100的眼间中心102的坐标(x,y,z)。以一定周期(例如,1秒~几秒间隔)进行面部追踪部30的面部追踪动作(检测动作)。也就是说,以一定周期对到观众100的距离及观众100的位置进行取样。
存储器35逐次存储通过面部追踪部30取样到的到观众100的距离以及观众100的位置。存储器37存储后述的测试图。
在观众100通过如图1所示的遥控器105已选择了自动追踪模式(自动追踪模式开启)的情况下,当显示在显示装置10上的图像是立体图像时,进行该面部追踪部30的面部追踪动作。并且,在观众100未通过如图1所示的遥控器105选择自动追踪模式(自动追踪模式关闭)的情况下,当显示在显示装置10上的图像是立体图像且观众100通过遥控器105手动选择了自动追踪模式时,进行该面部追踪部30的面部追踪动作。此外,也可以在自动追踪模式关闭时,当显示在显示装置10上的图像从二维图像变换为立体图像时进行该面部追踪部30的面部追踪动作。
图像显示控制部40具备摄像机影像显示控制部42、视区显示控制部44、测试图显示控制部46。
摄像机影像显示控制部42控制将通过摄像机20拍摄到且通过面部追踪部30取样到的摄像机影像显示在显示面板10a上。此外,显示在显示面板10a上时的摄像机影像是镜像、即左右反转后的影像。视区显示控制部44根据通过面部追踪部30取样到的到观众100的距离以及观众100的位置进行控制,以在显示面板10a上显示表示观众100是否位于视区的视区图像。显示该视区图像,以表示观众和显示面板10a的显示画面之间的相对位置关系。并且,显示在显示面板10a上的上述摄像机影像及上述视区图像被分割地显示在一个画面上。在图4中示出了被分割地显示在显示面板10a的显示面上的摄像机影像12及视区图像14的一例。在该显示例中,存在三位观众100a、100b、100c,各个观众100a、100b、100c的摄像机影像显示为一个摄像机影像12。并且,在视区图像14中,例如显示有三个视区60a、60b、60c,且显示出观众100a存在于视区60a内,观众100b存在于视区60b内,观众100c的一半面部存在于视区60c内。并且,在每次通过面部追踪部30进行面部追踪动作时都更新摄像机影像12及视区图像14。因此,在观众观看摄像机影像12及视区图像14移动至其位于视区内的情况下,根据该观众的位置变化,视区图像也变化。
如上所述,当显示有摄像机影像12及视区图像14时,当观众按下遥控器105的某个按钮(例如,蓝色按钮)时,从遥控器105发送控制信号。于是,根据该控制信号,测试图显示控制部46开始动作,并控制使存储在测试图用存储器37中的测试图显示在显示面板10a上。在图5(a)至图5(i)中示出了使用多视差图像、例如9视差图像显示立体图像的9视差方式下的测试图的一例。如图6所示,9视差图像是对同一对称物300分割出通过距离对称物300一定距离(视距)L的9个摄像机22a~22i所拍摄到的视差图像各自的视差图像分量(成分)并合成而得到的。图5(a)示出观众位于最右侧的视区时所见的9视差图像,图5(b)示出观众位于离图5(a)时的视区最近的左侧视区时所见的9视差图像,图5(c)示出观众位于离图5(b)时的视区最近的左侧视区时所见的9视差图像。图5(d)示出观众位于离图5(c)时的视区最近的左侧视区时所见的9视差图像,图5(e)示出观众位于离图5(d)时的视区最近的左侧视区时所见的9视差图像。图5(f)示出了观众位于离图5(e)时的视区最近的左侧视区时所见的9视差图像,图5(g)示出观众位于离图5(f)时的视区最近的左侧视区时所见的9视差图像。图5(h)示出观众位于离图5(g)时的视区最近的左侧视区时所见的9视差图像,图5(i)示出观众位于离图5(h)时的视区最近的左侧视区时所见的9视差图像。也就是说,图5(i)示出了观众位于最左侧视区时所见的9视差图像。
因此,根据观众所处的视区,可以观看到如图5(a)至图5(i)所示的9视差图像中的任一个9视差图像。并且,在本实施方式中,如图5(a)至图5(i)所示,对从最适当的视听位置看到的9视差图像标注了双重圆(图5(d)、图5(e)),对从非最适但良好的视听位置看到的9视差图像标注了单圆(图5(c)、图5(f)),对从不优选的视听位置看到的9视差图像标注了三角记号(图5(b)、图5(g)),对从更不优选的视听位置看到的9视差图像标注了×记号(图5(a)、图5(h)、图5(i))。通过对9视差图像标注这样的记号,从而可以提醒观众移动到更为恰当的视听位置。
此外,也可以对从不优选的视听位置看到的多视差图像标注表示向更优选的视听位置移动的移动方向的箭头。例如,“··”箭头表示更好的视听位置在右侧,“··”箭头表示更好的视听位置在左侧。这样,通过对从不优选的视听位置观察的多视差图像标注箭头,从而可以提醒观众移动到更恰当的视听位置。
而且,也可以对从不优选的视听位置看到的多视差图像显示例如“请移动到恰当的视听位置”这样的警告信息。这样,通过对从不优选的视听位置看到的多视差图像标注警告信息,从而可以提醒观众向更恰当的视听位置移动。
并且,虽然未图示,但图像显示控制部40具有以下的功能:在从外部发送来的图像信号是二维图像信号的情况下,根据该二维图像信号生成图像的深度信息,使用该深度信息,根据二维图像信号生成多视差图像信号。并且,还具有以下的功能:在从外部发送来的图像信号时多视差图像信号的情况下,变化为适合显示面板10a的多视差图像信号。并且,还具有根据这些多视差图像信号转换为立体图像的功能。
如上所述,根据本实施方式,可以提供一种能容易地知道观众是否位于更好的视区内的立体图像显示装置。
已经对本发明的几个实施方式进行了说明,但这些实施方式是作为例示,不用于限定本发明的范围。这些新的实施方式可以用其他各种方式实施,在不超出发明宗旨的范围内可以进行各种省略、替换、更改。这些实施方式及其变形包含在发明范围和宗旨内,并且包含在权利要求范围所述的发明及其均等范围内。

Claims (8)

1.一种立体图像显示装置,其特征在于,包括:
显示装置,所述显示装置具有显示面板和光线控制元件,所述显示面板具有以矩阵状排列像素的显示画面,所述光线控制元件控制来自所述显示面板的像素的光线;
存储器,存储测试图,所述测试图具有多个多视差图像,所述观众能看到随视听位置而不同的多视差图像,并且,从不优选的视听位置看到的多视差图像上带有提醒所述观众向更好的视听位置移动的记号或消息;以及
图像显示控制部,控制所述测试图显示于所述显示面板。
2.根据权利要求1所述的立体图像显示装置,其特征在于,所述记号或消息是表示“×”符号或“△”符号的记号。
3.根据权利要求1所述的立体图像显示装置,其特征在于,所述记号或消息是表示所述观众的移动方向的箭头。
4.根据权利要求1所述的立体图像显示装置,其特征在于,所述记号或消息是警告消息。
5.根据权利要求1所述的立体图像显示装置,其特征在于,还包括:
摄像机,设置于所述显示装置;以及
面部追踪部,观众存在于所述显示装置前的情况下,根据通过所述摄像机拍摄到的图像检测从所述显示装置到所述观众之间的距离以及所述观众的位置,
其中,所述图像显示控制部还包括:
视区图像显示控制部,根据通过所述面部追踪部检测出的从所述显示装置到所述观众之间的距离以及所述观众的位置进行控制,以使表示所述观众是否位于视区的视区图像显示于所述显示面板。
6.根据权利要求5所述的立体图像显示装置,其特征在于,所述面部追踪部以规定的间隔进行面部追踪动作,所述视区图像显示控制部在每次进行所述面部追踪动作时更新所述视区图像。
7.根据权利要求5所述的立体图像显示装置,其特征在于,所述图像显示控制部在使所述视区图像显示于所述显示面板后,根据来自所述观众的指令,使所述测试图显示于所述显示面板。
8.根据权利要求5所述的立体图像显示装置,其特征在于,
所述图像显示控制部还包括:摄像机影像显示控制部,控制所述摄像机拍摄到的摄像机影像显示于所述显示面板,
所述图像显示控制部在所述显示面板上显示所述视区图像的同时,使通过所述摄像机拍摄到的摄像机影像显示于所述显示面板。
CN2012100448413A 2011-08-31 2012-02-23 立体图像显示装置 Pending CN102970559A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011189621A JP5050120B1 (ja) 2011-08-31 2011-08-31 立体画像表示装置
JP2011-189621 2011-08-31

Publications (1)

Publication Number Publication Date
CN102970559A true CN102970559A (zh) 2013-03-13

Family

ID=47189464

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012100448413A Pending CN102970559A (zh) 2011-08-31 2012-02-23 立体图像显示装置

Country Status (3)

Country Link
US (1) US20130050197A1 (zh)
JP (1) JP5050120B1 (zh)
CN (1) CN102970559A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104702939A (zh) * 2015-03-17 2015-06-10 京东方科技集团股份有限公司 图像处理系统、方法、确定位置的方法及显示系统
CN105376559A (zh) * 2015-11-05 2016-03-02 广东未来科技有限公司 立体显示装置及其视点校正方法

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101685981B1 (ko) * 2010-07-29 2016-12-13 엘지전자 주식회사 입체영상 디스플레이 시스템, 입체영상 디스플레이 장치 및 입체영상 디스플레이 방법
JP2012042720A (ja) * 2010-08-19 2012-03-01 Sony Corp 画像処理装置および方法、並びにプログラム
US20140028662A1 (en) * 2012-07-24 2014-01-30 Sharp Laboratories Of America, Inc. Viewer reactive stereoscopic display for head detection
JP6561988B2 (ja) * 2014-06-10 2019-08-21 株式会社ソシオネクスト 半導体集積回路およびそれを備えた表示装置並びに制御方法
KR102415502B1 (ko) * 2015-08-07 2022-07-01 삼성전자주식회사 복수의 사용자를 위한 라이트 필드 렌더링 방법 및 장치
KR20180050052A (ko) * 2016-11-04 2018-05-14 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
CA3167638A1 (en) * 2020-02-18 2021-08-26 Evolution Optiks Limited Multiview system, method and display for rendering multiview content, and viewer localisation system, method and device therefor

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1845612A (zh) * 2005-04-08 2006-10-11 三星电子株式会社 使用混合位置跟踪系统的三维显示装置和方法
CN201060370Y (zh) * 2007-05-29 2008-05-14 南昌大学 一种具有环视功能的裸眼立体显示器
CN101507287A (zh) * 2006-09-07 2009-08-12 株式会社东芝 三维图像显示设备和三维图像显示方法
JP2009250987A (ja) * 2008-04-01 2009-10-29 Casio Hitachi Mobile Communications Co Ltd 画像表示装置およびプログラム
JP2010233158A (ja) * 2009-03-30 2010-10-14 Namco Bandai Games Inc プログラム、情報記憶媒体及び画像生成装置
WO2010147281A1 (ko) * 2009-06-16 2010-12-23 (주)엘지전자 시청범위 알림 방법 및 이를 구현하기 위한 텔레비전 수신기
CN102006491A (zh) * 2009-08-31 2011-04-06 卡西欧计算机株式会社 三维显示设备以及控制视差屏障的方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1845612A (zh) * 2005-04-08 2006-10-11 三星电子株式会社 使用混合位置跟踪系统的三维显示装置和方法
CN101507287A (zh) * 2006-09-07 2009-08-12 株式会社东芝 三维图像显示设备和三维图像显示方法
CN201060370Y (zh) * 2007-05-29 2008-05-14 南昌大学 一种具有环视功能的裸眼立体显示器
JP2009250987A (ja) * 2008-04-01 2009-10-29 Casio Hitachi Mobile Communications Co Ltd 画像表示装置およびプログラム
JP2010233158A (ja) * 2009-03-30 2010-10-14 Namco Bandai Games Inc プログラム、情報記憶媒体及び画像生成装置
WO2010147281A1 (ko) * 2009-06-16 2010-12-23 (주)엘지전자 시청범위 알림 방법 및 이를 구현하기 위한 텔레비전 수신기
CN102006491A (zh) * 2009-08-31 2011-04-06 卡西欧计算机株式会社 三维显示设备以及控制视差屏障的方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104702939A (zh) * 2015-03-17 2015-06-10 京东方科技集团股份有限公司 图像处理系统、方法、确定位置的方法及显示系统
US10212415B2 (en) 2015-03-17 2019-02-19 Boe Technology Group Co., Ltd. Image processing system, image processing method, position determining method and display system
CN105376559A (zh) * 2015-11-05 2016-03-02 广东未来科技有限公司 立体显示装置及其视点校正方法

Also Published As

Publication number Publication date
JP2013051629A (ja) 2013-03-14
JP5050120B1 (ja) 2012-10-17
US20130050197A1 (en) 2013-02-28

Similar Documents

Publication Publication Date Title
CN102970559A (zh) 立体图像显示装置
US7091931B2 (en) Method and system of stereoscopic image display for guiding a viewer's eye motion using a three-dimensional mouse
US20120176474A1 (en) Rotational adjustment for stereo viewing
CN103533340B (zh) 移动终端的裸眼3d播放方法和移动终端
US8816939B2 (en) Monocular display apparatus
US8477181B2 (en) Video processing apparatus and video processing method
KR101852209B1 (ko) 자동입체 디스플레이 및 그 제조방법
US9513490B2 (en) Three channel delivery of stereo images
US8933878B2 (en) Display apparatus and display method
JP5343156B1 (ja) 検出装置、検出方法および映像表示装置
CN101636747A (zh) 二维/三维数字信息获取和显示设备
US11778297B1 (en) Portable stereoscopic image capturing camera and system
CN102970565A (zh) 视频处理装置及视频处理方法
JP5439686B2 (ja) 立体画像表示装置及び立体画像表示方法
JP2012129707A (ja) 立体映像表示装置及び方法
JP2012129706A (ja) 立体映像表示装置及び方法
US9179139B2 (en) Alignment of stereo images pairs for viewing
CN102116937B (zh) 用于显示三维图像的装置和方法
CN102970567A (zh) 视频处理装置以及视频处理方法
JPH0244995A (ja) 3次元画像表示装置の光指向制御方法
JP2001218231A (ja) 立体画像を表示する装置および方法
JP5343157B2 (ja) 立体画像表示装置、表示方法、およびテストパターン
JP2000209615A (ja) 眼鏡無し立体映像表示装置
JP2011035590A (ja) マルチスクリーン映像表示装置
KR102450933B1 (ko) 무안경 3차원 디스플레이를 위한 카메라 모듈 고정 구조

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130313