CN103283244A - 立体影像提供装置以及其方法 - Google Patents

立体影像提供装置以及其方法 Download PDF

Info

Publication number
CN103283244A
CN103283244A CN2012800043557A CN201280004355A CN103283244A CN 103283244 A CN103283244 A CN 103283244A CN 2012800043557 A CN2012800043557 A CN 2012800043557A CN 201280004355 A CN201280004355 A CN 201280004355A CN 103283244 A CN103283244 A CN 103283244A
Authority
CN
China
Prior art keywords
user
stereopsis
image
defective mode
eye
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012800043557A
Other languages
English (en)
Inventor
井上刚
小泽顺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN103283244A publication Critical patent/CN103283244A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/341Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using temporal multiplexing
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/22Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type
    • G02B30/24Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type involving temporal multiplexing, e.g. using sequentially activated left and right shutters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00Details of stereoscopic systems
    • H04N2213/008Aspects relating to glasses for viewing stereoscopic images

Abstract

立体影像提供装置具备:眼球运动测量部(1004),测量观看立体影像的各个用户的眼球运动;利用人数判定部(2004),判定观看同一立体影像的用户的人数;以及不良状态判定部(2005),在利用人数判定部(2004)将观看同一立体影像的用户的人数判定为多个的情况下,通过对多个用户的眼球运动进行比较,从而判定多个用户之中的眼球运动处于不良状态的用户。

Description

立体影像提供装置以及其方法
技术领域
本发明涉及,在画面显示右眼用和左眼用的影像,用户佩戴能够控制右眼和左眼的眼镜的透过度的眼镜,从而用户能够视听立体影像的立体影像提供装置。
背景技术
用户能够将在平面显示器上显示的影像作为立体的影像来视听的方法有,利用了双眼视差的方法。该方法利用以下的情况,即,人的右眼和左眼位于离开的位置,进入各个眼睛的影像的视点不同,因此人感觉深度。
在利用了双眼视差的方法中,通过对用户的右眼和左眼显示不同的影像,从而能够令用户在头脑中感觉立体。然而,由这样的与现实不同的方法的立体视,会有给用户带来视觉疲劳以及不快感的可能性。
于是,提出了一种立体影像显示装置,估计因双眼的疲劳而引起的双眼的视觉功能的疲劳度,按照估计的疲劳度来调整立体度(示出立体程度的值)(例如,参照专利文献1)。
并且,提出了一种系统,对于用于观看以帧序列方式提示的3D影像的眼镜,用户对眼镜的液晶快门的切换定时进行切换,从而在显示画面上提示3D影像,但是,用户能够观看2D影像(例如,参照专利文献2)。
(先行技术文献)
(专利文献)
专利文献1:日本特开平9-18894号公报
专利文献2:日本实用新型注册第3159962号公报
在专利文献1中,根据用户的眼球的会聚运动次数的累计值以及左右的眼睛的会聚运动的不同,判定用户的疲劳度,变更立体程度。然而,对于需要变更立体程度的用户的状态,除了因眼球的会聚运动而引起的疲劳状态以外,还有本来不能进行立体视的状态、以及不是从准确的位置观看立体影像的状态。进而,在专利文献1的影像显示部中,为了调整立体程度,在多个人数观看同一立体影像的情况下,导致变更对所有的用户的立体程度。因此,存在的问题是,对没有因立体视而引起的疲劳的用户也变更立体程度。并且,在专利文献1中,例如,根据会聚运动次数的累计值判断疲劳度,但是,哪种程度以立体视来观看就感觉疲劳是按每个用户不同的,即使是同一用户,也因健康状态等而变化,因此,根据与固定的值的比较,准确判定用户的疲劳度是困难的。
在专利文献2中,为了使眼镜的立体视和平面视的切换成为可能,即使在多个人数观看同一立体影像的情况下,例如,仅感觉疲劳的用户能够将立体影像切换为平面影像来观看影像。然而,由于以手动进行该切换,因此不自觉疲劳就不能切换,所以,在虽不自觉但切换为平面影像为好的情况下,不能进行切换。例如,在不感觉疲劳却不能准确进行立体视的情况下,以及,在不是从准确的位置观看立体影像的情况下,并且,在眼球运动能力降低,因此将要感觉疲劳的情况下,也不能进行切换。
发明内容
为了解决所述的问题,本发明的目的在于,提供一种立体影像提供装置,能够仅对观看同一立体影像的多个用户之中的、眼球运动处于不良状态的用户,进行消息的传达、或将用户的视听影像从立体影像切换为平面影像。
本发明的某局面涉及的立体影像提供装置,以与左眼用影像以及右眼用影像的显示定时同步的方式,来对用户佩戴的立体视用的眼镜所具备的左眼用快门以及右眼用快门的开闭进行控制,从而向所述用户提供立体影像,所述立体影像提供装置具备:眼球运动测量部,测量观看立体影像的各个用户的眼球运动;利用人数判定部,判定观看同一立体影像的用户的人数;以及不良状态判定部,在所述利用人数判定部将观看所述同一立体影像的用户的人数判定为多个的情况下,通过对多个用户的眼球运动进行比较,从而判定所述多个用户之中的眼球运动处于不良状态的用户。
而且,这样的全面或具体的形态,可以由系统、方法、集成电路、计算机程序或记录介质实现,也可以由系统、方法、集成电路、计算机程序或记录介质的任意的组合实现。
根据本发明,能够提供一种立体影像提供装置,能够仅对观看同一立体影像的多个用户之中的、眼球运动处于不良状态的用户,进行消息的传达、或将用户的视听影像从立体影像切换为平面影像。
附图说明
图1是用于说明使立体视成为可能的眼镜控制原理的图。
图2是用于说明使从立体视向平面视的切换成为可能的眼镜控制原理的图。
图3是本发明的实施例的与眼镜控制后的用户的视听影像有关的说明图。
图4A是用于说明用户的眼球运动中的会聚角的图。
图4B是用于说明用户的眼球运动中的会聚角的图。
图5是示出显示物体的位置不同时的眼球状态的图。
图6是示出本发明的实施例的立体影像提供装置中包含的影像显示装置、眼镜装置以及不良状态判定装置的功能结构的方框图。
图7是示出本发明的实施例涉及的眼镜装置的基本处理的流程图。
图8A是示出眼电位测量用的立体视用眼镜的一个例子的图。
图8B是示出眼球摄影用的立体视用眼镜的一个例子的图。
图8C是除去图8B的眼镜部分而从横向看时的图。
图9是用于说明眼球的电池模型的图。
图10是示出眼球运动存储部所存储的数据的具体例的图。
图11是示出测量出的眼电位数据的具体例的图。
图12是示出由被设置在眼镜的摄像机拍摄的图像的一个例子的图。
图13是示出眼球运动计算结果信息的一个例子的图。
图14是示出用户的双眼的瞳孔中心位置的时间变化和会聚量的时间变化的图表。
图15是用于说明对用户进行的实验的图。
图16是示出眼球运动发送部发送的数据的一个例子的图。
图17是示出本发明的实施例涉及的不良状态判定装置的基本处理的流程图。
图18是示出按眼镜眼球运动存储部所存储的数据的具体例的图。
图19A是示出能够准确进行内容的立体视的用户的眼球运动的测量结果的一个例子的图。
图19B是示出因疲劳而局部不能进行立体视的用户的眼球运动的测量结果的一个例子的图。
图19C是示出完全不能进行立体视的用户的眼球运动的测量结果的一个例子的图。
图20是与用户的视听位置有关的说明图。
图21是与用户的视听位置有关的说明图。
图22是示出基于影像显示部与用户之间的距离的不同的眼球状态的不同的图。
图23是示出基于针对影像显示部的用户的角度的不同的眼球状态的不同的图。
图24是与用户的视听位置有关的说明图。
图25A是示出检测出用户的不良状态时的影像显示部显示的消息的一个例子的图。
图25B是示出检测出用户的不良状态时的影像显示部显示的消息的一个例子的图。
图26是示出在影像显示装置上安装不良状态判定装置时的信号的流程的图。
图27是示出在眼睛装置上安装不良状态判定装置时的信号的流程的图。
图28是示出本发明的实施例的变形例的眼镜装置的功能结构的方框图。
图29是示出本发明的实施例的变形例涉及的眼镜装置的基本处理的流程图。
图30是示出本发明的实施例的变形例涉及的控制定时决定部的基本处理的流程图。
图31是示出本发明的实施例的变形例的立体影像提供装置中包含的影像显示装置以及眼镜装置的功能结构的方框图。
图32是示出本发明的由必须的构成要素构成的立体影像提供装置的功能结构的方框图。
具体实施方式
以下,参照附图说明本发明的实施例。
本发明的实施方案之一涉及的立体影像提供装置,以与左眼用影像以及右眼用影像的显示定时同步的方式,来对用户佩戴的立体视用的眼镜所具备的左眼用快门以及右眼用快门的开闭进行控制,从而向所述用户提供立体影像,所述立体影像提供装置具备:眼球运动测量部,测量观看立体影像的各个用户的眼球运动;利用人数判定部,判定观看同一立体影像的用户的人数;以及不良状态判定部,在所述利用人数判定部将观看所述同一立体影像的用户的人数判定为多个的情况下,通过对多个用户的眼球运动进行比较,从而判定所述多个用户之中的眼球运动处于不良状态的用户。
根据该结构,能够将进行与其他的用户的眼球运动不同的眼球运动的用户,判定为眼球运动处于不良状态的用户。因此,能够仅对观看同一立体影像的多个用户之中的、眼球运动处于不良状态的用户,进行消息的传达、或将用户的视听影像从立体影像切换为平面影像。
而且,本发明所公开的立体影像提供装置,不仅适用于立体影像,也能够适用于静止图像等的立体图像。
并且,也可以是,所述的立体影像提供装置还具备控制变更部,该控制变更部,将由所述不良状态判定部判定为处于不良状态的用户佩戴的眼镜所具备的左眼用快门以及右眼用快门的开闭控制,变更为使所述左眼用快门以及所述右眼用快门同时开闭的控制,从而仅将右眼用影像以及左眼用影像的某一方的影像提供给用户。
根据该结构,能够使不处于不良状态的用户的视听影像照原样立体影像,将处于不良状态的用户的视听影像从立体影像切换为平面影像。
并且,也可以是,所述的立体影像提供装置还具备控制定时决定部,该控制定时决定部,在由所述不良状态判定部判定为处于不良状态的用户的眼球运动的会聚量比规定的会聚量阈值小的定时,使所述控制变更部,将该用户佩戴的眼镜所具备的左眼用快门以及右眼用快门的开闭控制,变更为使所述左眼用快门以及所述右眼用快门同时开闭的控制。
根据该结构,在眼球运动的会聚量比规定的会聚量阈值小的定时,能够将处于不良状态的用户的视听影像从立体影像切换为平面影像。据此,能够进行用户不具有不协调感的从立体影像向平面影像的变更。
并且,也可以是,所述不良状态判定部,对规定期间内的多个用户的眼球运动的会聚量进行比较,将会聚量比规定人数以上的其他的用户的眼球运动的会聚量小的用户,判定为处于不能进行立体视的不良状态的用户。
在其他的用户能够准确进行立体视,却只自己不能进行立体视的情况下,会聚量比其他的用户的眼球运动的会聚量小。因此,根据该结构,能够将不能准确进行立体视的状态判定为用户的不良状态。
并且,也可以是,所述不良状态判定部,对同一时刻的所述多个用户的眼球运动的会聚量进行比较,将会聚量相对于其他的某个用户的眼球运动的会聚量而大规定值以上的用户,判定为处于距所述右眼用影像以及所述左眼用影像的显示画面太近的不良状态的用户。
与本来的视听位置相比,在距显示画面太近的情况下,会聚量大。因此,根据该结构,能够将距显示画面太近的状态判定为用户的不良状态。
并且,也可以是,所述不良状态判定部,对用户间的同一期间内的眼球运动的会聚量的累计值进行比较,将累计值比其他的某个用户的累计值小规定值以上的用户,判定为处于疲劳的不良状态。
在因疲劳而不能准确进行立体视的情况下,通常,与能够准确进行立体视的眼球运动的会聚量相比,成为局部小的会聚量。因此,根据该结构,能够将疲劳的状态判定为用户的不良状态。
并且,也可以是,所述不良状态判定部,对用户间的同一期间内的眼球运动的反应速度进行比较,将反应速度比其他的某个用户的反应速度小规定值以上的用户,判定为处于疲劳的不良状态。
在因疲劳而不能准确进行立体视的情况下,通常,与能够准确进行立体视的眼球运动的反应速度相比,成为局部小的反应速度。因此,根据该结构,能够将疲劳的状态判定为用户的不良状态。
而且,这样的整体或具体的形态,可以由系统、方法、集成电路、计算机程序或记录介质实现,也可以由系统、方法、集成电路、计算机程序或记录介质的任以的组合实现。
向用户提供立体影像的装置之一有如下装置,如图1示出,在显示器上交替显示右眼用和左眼用的影像(以后,将这样的影像描述为“立体影像”),立体视用的液晶快门眼镜(以下,适当地记载为“眼镜”),与立体影像的显示同步来使影像左右交替通过,从而向用户提供与左右的眼睛对应的影像(帧序列方式)。也就是说,以向左眼显示左眼用影像、向右眼显示右眼用影像的方式,来进行快门眼镜的快门的同步控制。
本实施例的立体影像提供装置,在这样的立体影像装置中,在判定为(i)用户产生疲劳、(ii)视听位置以及影像不合适,存在因立体视而给用户带来疲劳等的可能性、或者、(iii)虽然显示立体影像也不能进行立体视等(以后,描述为“判定为处于不良状态”)的情况下,例如,如图2,控制液晶快门眼镜,以使双眼观看左右的某个影像,从而从立体影像切换为平面影像的视听。
在此,针对同一立体视,各个用户的观看程度以及疲劳的进展程度也不同。因此,在本实施例中,在多个用户使用眼镜视听立体影像的情况下,比较各个用户的眼球运动。根据比较结果,确定处于不良状态的用户,仅对判定为处于不良状态的用户的眼镜,进行例如所述控制、以及消息通知。因此,不会妨碍观看同一立体影像的不处于不良状态的其他的用户的立体视。例如,假设在如图3的状况下用户A至用户G的七名视听一个3D影像。此时,对于用户A和用户F,检测出3D视听的疲劳的情况下,进行用户A和用户F的眼镜的快门控制,从而仅向用户A和用户F,提供2D影像。据此,能够不变更剩余的五名用户的3D影像视听环境,而仅向用户A和用户F,提供2D的影像。
在此,对于观看立体影像的用户的眼球运动,进行简单的说明。通过立体影像,如上所述向左右的眼睛显示不同的影像,在水平方向上显示不同的影像,从而令用户感知具有深度的立体度。在此,如图4A示出,左眼用影像以及右眼用影像中的物体间的距离(视差)在与左右的眼睛相反的方向上越离开,就越看作显示的物体接近,此时的用户的眼球向内侧旋转。将该运动称为会聚运动,将此时的双眼的视线方向形成的角度称为会聚角。会聚角是示出,左右的眼球(相对于观看无穷远方的状态)多少位于内侧的量,如图4A得知,物体的三维感知位置与眼睛越接近,会聚角就越大。另一方面,如图4B示出,若被立体显示的物体的三维感知位置与眼睛远离,则用户的眼球向外侧方向旋转。将该运动称为开散运动。在开散运动时会聚角变小。
图5示出表现显示物体的位置不同时的眼球状态的插图的例子。如图5(d),观看无穷远时为眼球移动到最外侧的状态,瞳孔中心距离(双眼的瞳孔中心间的距离)最长。如图5(a),在观看感知为比画面靠前的立体影像时,与观看平面影像时相比,眼球移动到内侧,因此瞳孔中心距离变短。另一方面,如图5(c),在观看感知为比画面远处的立体影像时,与观看平面影像时相比,眼球移动到外侧,因此瞳孔中心距离变长。
在本实施例中,比较多个用户的眼球运动的会聚角,从而判定用户的不良状态。但是,在本实施例中,不直接计算会聚角,而利用与会聚角有关的会聚量。在此,会聚量是,与会聚角同样,示出与观看无穷远状态的眼睛、或观看画面上的物体的状态的眼睛相比,多少发生会聚运动的量。也就是说,会聚量是,示出与所述状态的瞳孔中心距离相比,瞳孔中心距离多少变短的量,根据测量眼球运动的方法,其单位不同。
以下,对于本发明的实施例,参照附图说明,根据用户的眼电位的测量结果判定用户的状态,进行控制的具体例。
而且,以下说明的实施例,都示出本发明的一个具体例子。以下的实施例所示的数值、形状、构成要素、构成要素的配置位置以及连接形态、步骤、步骤的顺序等,是一个例子,而不是限定本发明的宗旨。并且,对于以下的实施例的构成要素中的、示出最上位概念的独立请求项中没有记载的构成要素,作为任意的构成要素进行说明。
图6是示出本发明的实施例的立体影像提供装置的功能结构的方框图。
立体影像提供装置是,向用户提供立体影像的装置,具备影像显示装置101、眼镜装置1001、以及不良状态判定装置2001。
影像显示装置101具备;以显示器为代表的影像显示部102;以及,左右影像切换定时发送部103,将示出所述影像显示部102显示的左眼用影像和右眼用影像的切换定时的切换定时信号发送给眼镜装置1001。左右影像切换定时发送部103,例如,由红外线发射器构成。
接着,说明眼镜装置1001中包含的各个构成要素。眼镜装置1001具备,左右影像切换定时接收部1002、眼镜透过度控制部1003、眼球运动测量部1004、眼球运动存储部1005、眼球运动发送部1006、判定结果接收部1007、以及定时器1008。
左右影像切换定时接收部1002,接收从所述左右影像切换定时发送部103发出的左眼用的影像和右眼用的影像的切换定时信号。眼镜透过度控制部1003,应对所述左右影像切换定时接收部接收的、左眼用的影像和右眼用的影像的切换定时信号,控制眼镜的左右的透过度。眼镜是,眼镜装置1001具备的被配置在用户的双眼的前面的液晶快门。眼球运动测量部1004,测量用户的眼球运动,将其结果与由定时器1008测量的测量时间一起写入到眼球运动存储部1005。眼球运动发送部1006,将所述结果与测量时间一起发送给不良状态判定装置2001。判定结果接收部1007,接收由不良状态判定部2005判定的不良状态判定结果。眼镜透过度控制部1003,在接收结果中判定为处于不良状态的情况下,变更眼镜的透过度的控制方法。据此,能够将向用户提供的影像从立体影像变更为平面影像。
接着,说明不良状态判定装置2001中包含的各个要素。不良状态判定装置2001具备,眼球运动接收部2002、按眼镜眼球运动存储部2003、利用人数判定部2004、不良状态判定部2005、以及不良状态条件存储部2006。
眼球运动接收部2002,接收来自各个眼镜装置1001的眼球运动的测量结果以及测量时间,将接收的数据写入到按眼镜眼球运动存储部2003。利用人数判定部2004,根据按眼镜眼球运动存储部2003所存储的按每个眼镜的眼球运动的测量结果,判定正在观看同一内容的用户人数,将其结果发送给不良状态判定部2005。不良状态条件存储部2006,按每个内容的再生时间,存储估计的用户的眼球运动的会聚量或会聚角。不良状态判定部2005,在正在观看同一内容的用户存在多个的情况下,比较按眼镜眼球运动存储部2003所存储的多个用户的眼球运动的测量结果,从而判定各个用户是否处于不良状态。不良状态判定部2005,在正在观看同一内容的用户为一名的情况下,对不良状态条件存储部2006所存储的信息、与按眼镜眼球运动存储部2003所存储的一名用户的眼球运动进行比较,从而判定该用户是否处于不良状态。不良状态判定部2005,向判定结果发送部2007输出判定结果。判定结果发送部2007,将所述判定结果发送给各个眼镜装置1001。
首先,利用图7的流程图说明眼镜装置1001的处理。图7的流程图示出测量用户的一个眼球运动后直到进行下次的测量为止的处理的流程,本处理是在测量用户的眼球运动中反复进行的处理。
在步骤S401中,眼球运动测量部1004,以规定的时间间隔测量用户的眼球运动。眼球运动测量部1004的眼球运动的测量方法有,例如,利用作为传感器的电极测量眼电位来测量其电位变动的方法、以及利用作为传感器的摄像机来拍摄眼球图像的方法等。图8A至图8C示出,安装电极以及摄像机那样的传感器的、能够测量眼球运动的立体视用眼镜的概观的一个例子。
图8A是眼电位测量用的立体视用眼镜,在框架部分设置有用于测量眼电位的电极501以及502。电极501是用于测量双眼的电位的电极,包含电极501A至电极501D的四个电极。并且,电极502是接地电极,根据电极501和电极502的电位差,测量双眼的电位变化。并且,图8B是眼球摄影用的立体视用眼镜,具备摄像机503、以及半反射镜504。由安装在上部的摄像机503拍摄,映在半反射镜504中的用户的眼球。而且,图8C是除去图8B的眼镜部分而从横向看时的图。如图8C,影像通过半反射镜到达用户的眼睛,另一方面,由半反射镜反射的用户的眼睛的影像进入摄像机503。
首先,对于测量眼电位来测量眼球运动的一个例子,进行具体说明。如图9示出,可以将人的眼球认为,角膜为阳性、视网膜为阴性的微弱的电池。因此,通过测量眼电位,从而能够进行眼球运动的测量。
眼球运动测量部1004,例如,将由如图8A的眼镜测量各个电极的电位变化的结果,存储到眼球运动存储部1005。图10示出眼球运动存储部1005所存储的示出眼球运动的测量结果的信息的一个例子。眼球运动的测量结果信息是,将项目601至607的七个项目的信息对应起来的信息。项目601示出测量日期及时间。项目602至项目605是由电极501A至电极501D测量的电位的测量结果。而且,该项目602至项目605是各个电极与接地电极的差分值。项目606示出从项目602的值减去项目603的值后的值,根据该值的变化,能够知道左眼的运动。项目607示出从项目604的值减去项目605的值后的值,根据该值的变化,能够知道右眼的运动。
而且,在实施例中,为了测量立体视所需要的会聚运动,且为了使眼睛的水平方向的电位差的测量成为可能,如图8A在横方向上夹着眼睛来配置电极。根据该配置,例如,通过测量电极501B和电极501A对接地电极的电位差,从而能够测量左眼的水平方向的眼球运动。
图11示出眼电位的测量结果的一个例子。根据图11,用户观看同一平面状时,右眼和左眼的电位差的值为同相,但是,视听立体影像时为反相,进一步,根据测量结果,且根据其变化的方向也得知,眼球运动是开散、会聚的哪个运动。
接着,对于测量眼球图像来测量眼球运动的一个例子,进行具体说明。眼球运动测量部1004,例如,对图8B以及图8C所示的被设置在眼镜的摄像机503拍摄的用户的眼球图像施行图像处理,从而提取瞳孔中心。并且,眼球运动测量部1004,将提取的瞳孔中心的坐标存储到眼球运动存储部1005。图12是示出由摄像机503拍摄的眼球图像的一个例子的图,眼球运动测量部1004,根据该图像,计算右眼和左眼的瞳孔中心的坐标。
图13示出眼球运动存储部1005所存储的眼球运动计算结果信息的一个例子。眼球运动计算结果信息是,将项目3401至3404的四个项目的信息对应起来的信息。项目3401示出测量日期及时间。项目3402示出右眼的瞳孔中心坐标的X坐标(像素单位)。项目3403示出左眼的瞳孔中心坐标的X坐标(像素单位)。项目3404示出会聚量。会聚量是,从项目3403的值中减去项目3402的值之后的值(像素单位)。图14示出,将进行交替观看图15示出的显示在画面(显示器)上的标记和显示在距画面规定距离前方的标记的实验时的用户的双眼的瞳孔中心位置的时间变化和所述会聚量的时间变化图表化的结果。若详细说明所述实验,在用户的前方90cm的画面上和距画面的60cm的靠前方的位置,以3秒至5秒的间隔提示十字标记900秒钟,求出此时的双眼的瞳孔中心位置的时间变化和会聚量的时间变化。图14(a)以及图14(b)分别是示出用户的双眼的瞳孔中心坐标的时间变化的图表,图14(c)示出从同时间的左眼的瞳孔中心坐标(图14(a))中减去右眼的瞳孔中心坐标(图14(b))之后的会聚量的时间变化。在图14(c)的会聚量中,在值大致位于375像素的位置时,用户观看显示在画面上的标记,在会聚量的值大致位于330像素的位置时,用户观看显示在距画面的规定的立体度的位置的标记。
而且,在本实施例中,根据图14(c)所示的会聚量判定用户的不良状态,但是,如上所述,在观看画面上时,会聚量也具有值。于是,为了根据会聚量知道从画面多少跳出或多少具有深度,而需要预先知道观看画面上的物体时的会聚量。
于是,在本步骤中,测量观看立体影像的画面上的物体或平面影像时的用户的眼球运动的会聚量(以后,记载为“基准会聚量”)。
为了判定用户不观看立体影像而观看平面影像,例如,利用从影像显示装置101的左右影像切换定时发送部103是否发送在立体影像显示时切换眼镜的左右透过度的信号。眼球运动测量部1004,根据在没有接收由左右影像切换定时接收部1002发送的切换定时信号的时间内的会聚量的测量结果,计算基准会聚量。例如,也可以计算该时间内的会聚量的平均值,以作为基准会聚量。而且,在所述中,利用了左右影像的切换定时信号,但也可以是,另外,将示出影像显示装置101正在显示的影像是立体影像还是平面影像的信号发送给眼镜装置1001。眼球运动测量部1004,根据接收示出平面影像的信号的时间内的会聚量的测量结果,与所述等同样,计算基准会聚量。
而且,也可以将与如上计算出的基准会聚量的差分值作为会聚量来存储到眼球运动存储部1005、或从眼球运动发送部1006发送,来利用于不良状态的判定。
在步骤S402中,眼球运动发送部1006,将所述测量结果发送给不良状态判定装置2001。此时,除了测量出的眼球运动以外,还发送按每个眼镜装置1001设定的ID。
图16是示出眼球运动发送部1006发送的数据的一个例子的图。眼球运动发送部1006,将包含眼球运动测量部1004测量出的瞳孔中心的双眼X坐标以及根据双眼X坐标而计算出的会聚量的数据,发送给不良状态判定装置2001。该数据,包含项目3701至3705的五个项目的数据。在图16中,项目3701示出用于识别眼镜装置1001的眼镜ID。项目3702示出眼球运动的采样周期,在图16中示出以0.033秒间隔(采样频率30Hz)测量的情况。项目3703和项目3704分别是右眼的瞳孔中心的X坐标的测量结果和左眼的瞳孔中心的X坐标的测量结果,项目3705是根据双眼的测量结果计算出的会聚量。
而且,对于图16所示的数据,可以将多个数据一起发送给不良状态判定装置2001,也可以每当测量时发送。并且,图16没有示出,但是,在一起发送多个数据时,也可以包含眼球运动的测量区间长度以及数据数、测量时间等来发送。具体而言,在一起发送1秒钟的测量结果时,也可以在发送数据中追加作为测量区间长度的1秒、作为数据数的30个、作为测量时间的例如19:00:10:01-19:00:10:02的信息。
在步骤S403中,判定结果接收部1007,从不良状态判定装置2001接收用户是否处于不良状态的判定结果。
在步骤S404中,眼镜透过度控制部1003,判定接受的结果是否为不良状态。在判定为没有处于不良状态的情况下,进行到步骤S405,眼镜透过度控制部1003,不进行液晶快门的控制方法的变更,而向用户提供立体影像。另一方面,在步骤S404中,在判定为处于不良状态的情况下,进行到步骤S406,与所述实施例同样,变更液晶快门的控制方法,而向用户提供平面影像。
而且,在所述眼镜装置1001的处理的说明中,说明了连续进行用户的眼球运动的测量处理以及发送处理、和基于判定结果的液晶快门的控制处理的处理方法,但是,也可以非同步进行眼球运动的测量处理以及发送处理、和基于判定结果的液晶快门的控制处理。例如,也可以是,在眼镜装置1001中以测量间隔进行用户的眼球运动的测量、发送,另一方面,判定结果接收部1007以与测量间隔不同的间隔等待判定结果。并且,也可以是,判定结果发送部2007,仅在用户处于不良状态时发送不良信号,判定结果接收部1007,仅在接收所述不良信号时进行步骤S406的处理。
而且,也可以是,在步骤S404中,在判定为处于不良状态的情况下,在步骤S406中,不向用户提供平面影像,而给用户传达消息。具体而言,在判定为处于不良状态的眼镜装置1001的液晶上,与用户状态的说明一起提示询问是否要进行向平面影像的切换的消息。在用户同意向平面影像的切换的情况下,进行按下眼镜上的开关等的作业,进行向平面影像的切换。进而,也可以是,不将所述消息显示在判定为处于不良状态的眼镜装置1001的液晶上,而将所述消息显示在影像显示部102。据此,能够共享观看同一影像的其他的用户的不良状态,因此,例如,在父母和子女观看立体影像,子女被判定为处于不良状态的情况下,父母能够知道该事情,使子女停止在不良状态下继续观看立体影像。
接着,对于不良状态判定装置2001的处理,利用图17的流程图进行说明。
在步骤S801中,眼球运动接收部2002,接收从各个眼镜装置1001的眼球运动发送部1006发送的眼球运动测量结果,将接收结果存储到按眼镜眼球运动存储部2003。图18示出,按眼镜眼球运动存储部2003所存储的各个眼镜装置1001测量出的结果的一个例子。眼球运动测量结果中包含,项目901、902以及1103所示的信息。项目901示出测量日期及时间。项目902示出与各个眼镜装置1001对应的ID。项目1103示出利用图10说明的各个眼镜装置1001的测量结果。也就是说,眼球运动测量结果示出每个眼镜装置1001的测量结果。
在步骤S802中,利用人数判定部2004,根据按眼镜眼球运动存储部2003所存储的用户的眼球运动测量结果,判定正在观看立体影像的用户的人数。例如,若同一时刻的测量结果存在多个,其测量结果的差在规定值以内,则判定用户的人数为多个。在步骤S802中,在正在视听立体影像的用户的人数被判定为多个的情况下,进行到步骤S803。
在步骤S803中,不良状态判定部2005,根据按眼镜眼球运动存储部2003所存储的、视听同一立体影像的多个用户的眼球运动测量结果的不同,判定各个用户是否处于不良状态,将其结果发送给判定结果发送部2007。这意味着,确定处于不良状态的用户。
对于利用多个用户的眼球运动测量结果来判定各个用户的不良状态的方法,以下,按用户的不良状态的每个种类说明三个具体例。
而且,在以下的说明中对于测量的眼球运动,以会聚运动为中心进行说明。
对于第一个用户不良状态,说明将不能准确地进行立体视的状态判定为用户的不良状态的情况。对于该不良状态,在存在能够进行立体视的用户和不能进行的用户的情况下,将不能进行立体视的用户判定为处于不良状态。更具体地说,用户视听同一立体影像,因此,根据多个用户的同一期间内的眼球运动测量结果,判定具有会聚运动的用户和没有会聚运动的用户是否一起存在,在存在的情况下,将没有会聚运动的用户判定为处于不良状态。
图19A至图19C示出观看同一内容的用户的眼球运动的测量结果的一个例子。图19A是能够准确进行内容的立体视的用户的测量结果,图19B是因疲劳而局部不能进行立体视的用户的测量结果,图19C是完全不能进行立体视的用户的测量结果。在各个图中,上侧的图表示出左眼的测量结果,下侧的图表示出右眼的测量结果。对于像图19C的用户那样的不能进行立体视的用户,不能进行会聚运动,因此,会聚量不被检测。例如,在利用从测量出的会聚量中减去基准会聚量后的值以作为会聚量的情况下,将在根据其他的用户的测量结果而测量出规定值以上的会聚量的时间段中,会聚量在规定值以下的用户,判定为处于不能进行立体视的不良状态。
在其他的用户能够准确进行立体视,却只自己不能进行立体视的情况下,会聚量比其他的用户的眼球运动的会聚量小。因此,通过进行这样的判定,从而能够将不能准确进行立体视的状态判定为用户的不良状态。
对于第二个用户不良状态,说明将在不准确的位置观看立体影像的状态判定为用户的不良状态的情况。在此,不准确的位置是指,像图20那样的距影像显示部102的距离太近的位置、或像图21那样的影像显示部102与用户而成的角度太小的位置。通常,立体影像被制作为在规定的范围内能够准确进行立体视,因此,在这样的位置上不能准确进行立体视。具体而言,在所述距离太小的位置上,会聚角比内容制作者估计的会聚角大,因此,在眼球运动测量部1004测量并计算出的会聚量大。在此情况下,将立体物观看成更跳出的影像,因此,与在适当的位置观看的用户相比,会有提早发生因影像而引起的疲劳的可能性。并且,在与显示影像的画面而成的角度太小的位置上,产生会聚时的双眼的运动的差距,例如,将立方体观看成斜变形等,不能准确进行立体视。
图22示出基于影像显示部102与用户之间的距离的不同的眼球状态的不同。图22(a)是示出,距画面(影像显示部102)近的用户和距画面远的用户的视线方向的图。即使在同一立体影像(图像)中,图22(b)是示出距画面近的用户的瞳孔位置的图,图22(c)是示出距画面远的用户的瞳孔位置的图。如图22(b)以及图22(c)示出距画面越近的用户,会聚量就越大,将立体物观看成更近。
图23是示出基于针对影像显示部102的用户的角度的不同的眼球状态的不同的图。图23(a)是示出,在影像显示部102(画面)显示观看成物体与用户越来越接近的立体影像时的、从正面观看画面的用户的视线方向的移动、和从斜方向观看画面的用户的视线方向的移动的图。图23(b)是示出,从正面观看画面的用户的瞳孔位置的变化的图,瞳孔位置从图23(b)的下图变化为上图那样。并且,图23(c)是示出,从斜方向观看画面的用户的瞳孔位置的变化的图,瞳孔位置从图23(c)的下图变化为上图那样。如图23(b)以及图23(c),即使在观看同一立体影像的情况下,在从与画面而成角度小的位置观看的用户(从斜方向观看的用户)的情况下,右眼和左眼的会聚量的变化量也不同。更具体地说,在发生会聚运动时,左眼以及右眼之中的、距画面近的眼睛(与画面的角度更小的眼睛)的会聚量,与其他的眼睛相比,会聚量的变化量小。在图23(a)以及图23(c)的例子中,右眼的会聚量的变化量,比左眼的会聚量的变化量小。
于是,不良状态判定部2005,对多个用户的同一时刻的会聚量进行比较,将会聚量比其他的某个用户大规定值以上的用户,判定为处于距画面太近的不良状态。并且,不良状态判定部2005,在判定为发生了比其他的用户的眼球运动的会聚量的变化大规定值以上的会聚量的变化时,计算右眼和左眼的会聚量的差、或会聚量的比例,将其值比其他的用户的值大规定值以上的用户,判定为处于与画面的角度太小的不良。
与本来的视听位置相比,在距显示画面太近的情况下,会聚量大。因此,通过进行这样的判定,能够将距显示画面太近的状态判定为用户的不良状态。
进而,也可以检测如图24相对于画面而具有旋转角度来观看的用户。例如,以躺卧状态观看立体影像的用户会有发生晕影像的可能性。在如此具有旋转角度来观看的情况下,会聚角比准确观看时小,并且,纵轴方向(上下方向)的眼球运动也被测量。
对于是否相对于画面而具有旋转角度来观看的判定,在多个用户的同一时刻的眼球运动测量结果中产生会聚运动、产生的会聚量比其他的用户的眼球运动的会聚量小规定值以上、进一步纵轴方向上产生不同的眼球运动的用户存在的情况下,判定为处于相对于画面的旋转角度太大的不良状态。
对于第三个用户不良状态,说明将与其他的用户相比疲劳的状态判定为用户的不良状态的情况。对于用户是否疲劳的判定方法,例如利用与其他的用户的眼球运动能力的不同。在如图19B因疲劳而不能准确进行立体视的情况下,进行与能够准确进行立体视的眼球运动不同的眼球运动。在如此因疲劳而不能准确进行立体视的情况下,通常,与能够准确进行立体视的眼球运动的会聚量相比,成为局部小的会聚量。于是,计算同一规定期间的会聚量的累计值,与其他的用户进行比较后,将累计值比其他的某个用户的累计值小规定值以上的用户,判定为处于疲劳的不良状态。
在因疲劳而不能准确进行立体视的情况下,通常,与能够准确进行立体视的眼球运动的会聚量相比,成为局部小的会聚量。因此,通过进行这样的判定,从而能够将疲劳的状态判定为用户的不良状态。
并且,对于其他的判定方法,例如,也可以利用眼球运动的反应速度。具体而言,在规定时间以内测量规定量以上的会聚量变化的场景中,根据会聚量的变化量和所述会聚量的变化所需要的时间,计算会聚运动的反应速度、即深度方向上的眼球运动的反应速度。在该反应速度比其他的用户慢的情况下,将该用户判定为处于疲劳的状态那样的不良状态。
在因疲劳而不能准确进行立体视的情况下,通常,与能够准确进行立体视的眼球运动的反应速度相比,成为小的反应速度。因此,通过进行这样的判定,从而能够将疲劳的状态判定为用户的不良状态。
而且,在进行基于与所述其他的用户的比较的判定的情况下,对于该判定,例如,也可以根据与所述会聚量的累计值最大的用户的累计值相比,累计值是否小规定值以上,从而判定是否处于不良状态。并且,也可以计算各个用户的眼球运动的会聚量的方差值,将会聚量的方差值成为规定值以上的用户判定为处于不良状态。并且,在利用眼球运动的反应速度的情况下,也可以通过与所述同样的方法来进行判定。
另一方面,在步骤S802中,利用人数判定部2004,在根据按眼镜眼球运动存储部2003所存储的用户的眼球运动测量结果,将正在观看立体影像的用户的人数判定为一名的情况下,进行到步骤S804。
在步骤S804中,不良状态判定部2005,根据按眼镜眼球运动存储部2003所存储的、视听同一立体影像的一名用户的眼球运动测量结果,进行用户是否处于不良状态的判定,将其结果发送给判定结果发送部2007。
不良状态判定部2005判定的用户的不良状态的种类是,与所述步骤S803同样的种类,不良状态判定部2005,通过与步骤S803同样的方法来判定各个种类的不良状态。但是,眼球运动的比较对象,不是其他的用户的眼球运动测量结果,而是不良状态条件存储部2006预先存储的、与内容的再生时间对应的估计会聚量以及估计会聚角。
在步骤S805中,判定结果发送部2007,将从不良状态判定部2005接受的判定结果发送给各个眼镜装置1001。
而且,也可以根据不良状态的种类,判定结果发送部2007向影像显示部102发送判定结果,在影像显示部102显示消息。例如,在检测出在所述不准确的位置上观看的用户的不良状态的情况下,不进行眼镜装置1001的控制,而在影像显示部102显示消息。在如上述判定为太近时,可以显示像图25A那样的消息,在判定为与所述画面的角度太小时,也可以提示像图25B那样的消息。
而且,在步骤S802中正在观看立体影像的用户的人数被判定为一名,在步骤S804中该用户被判定为处于不良状态的情况下也可以,不是与多个人数的情况同样进行眼镜的控制来将平面影像提供给用户,而是由影像显示装置101提供平面影像。也就是说,也可以使影像显示装置101仅显示左眼用影像或右眼用影像。例如,在判定为不良状态的情况下,在眼镜的液晶(液晶快门)上、或影像显示部102上显示,因判定为不良状态而将显示在影像显示部102的影像从立体影像切换为平面影像那样的消息,中止眼镜的左右切换控制。
而且,在所述实施例中,与眼镜装置1001分开构成不良状态判定装置2001,进行了说明。但是,对于不良状态判定装置,例如,可以安装在像电视机那样的影像显示装置101上,也可以安装在眼镜装置1001上。
说明在各个情况下的眼镜装置1001与影像显示装置101的数据的交换。
在像电视机那样的影像显示装置101上安装不良状态判定装置2001的情况下,如图26,从眼镜装置1001发送眼球运动的测量结果,接收它的影像显示装置101上安装的不良状态判定装置2001判定不良状态,将其结果、或基于该结果的眼镜控制用的指令,发送给眼镜装置1001。
另一方面,在眼镜装置1001上安装不良状态判定装置2001的情况下,不良状态判定装置2001,在进行眼镜装置1001的控制来将立体视切换为平面视的情况下,并不需要与影像显示装置101进行数据的交换。但是,在影像显示部102显示消息的情况下,眼镜装置1001的不良状态判定装置2001,将不良状态判定结果发送给影像显示装置101。并且,也有以下的情况,即,如图27示出,将用于眼镜装置1001的控制的确认消息显示在影像显示装置101,根据用户的输入结果控制眼镜装置1001。在此情况下,眼镜装置1001的不良状态判定装置2001,向影像显示装置101发送不良状态判定结果。如图27示出,影像显示装置101,根据接收的不良状态判定结果,显示是否要进行眼镜装置1001的控制的确认消息。用户通过遥控器等来进行对该确认消息的回答。如果,在是切换为平面视的回答的情况下,影像显示装置101,向眼镜装置1001,发送用于将眼镜控制切换为平面视的信号。
如上说明,通过本实施例的结构以及处理,能够进行基于多个用户的眼球运动测量结果的比较的各个用户的不良状态的判定。因此,能够仅对观看同一立体影像的多个用户之中的、眼球运动处于不良状态的用户,进行消息的传达、或将用户的视听影像从立体影像切换为平面影像。
例如,通过进行用户佩戴的眼镜的液晶快门的控制,从而进行从立体影像向平面影像的切换。因此,能够使不处于不良状态的用户的视听影像照原样立体影像,将处于不良状态的用户的视听影像从立体影像切换为平面影像。
而且,在本实施例中,说明检测多个用户之中的一名用户的不良状态的例子。例如,在两名用户视听立体影像时,判定出一名用户的立体影像视听的疲劳的情况下,施行疲劳的用户的眼镜的控制,立体影像被切换为平面影像。此时,成为一个人视听立体影像、另一个人视听平面影像的状态。然后,在判定出视听立体影像的用户的立体影像视听的疲劳的情况下,两个人都视听平面影像。此时,两个人都不需要佩戴立体视用的眼镜,因此,成为在画面上描绘平面影像的状态。于是,在检测出测量眼球运动的所有的用户的不良的情况下,也可以停止眼镜的佩戴,切换影像,以在画面上显示平面影像。
(变形例)
在所述实施例中,在眼镜装置1001从不良状态判定装置2001接受用户处于不良状态的判定的定时,眼镜透过度控制部1003,进行眼镜的左右的透过度的控制,从而进行用户的视听影像的从立体影像向平面影像的切换。在本变形例中,在与判定为用户处于不良状态的定时不同的定时,进行眼镜的透过度的控制。
图28是示出本变形例涉及的眼镜装置的功能结构的方框图。与所述实施例不同,在眼镜装置1001A中追加了根据不良状态判定装置2001的判定结果决定眼镜的透过度的控制的定时的控制定时决定部1009。
图29的流程图示出本变形例的眼镜装置1001A的处理。与示出所述实施例的眼镜装置1001的处理的图7的流程图不同之处仅是,追加了步骤S1407的快门控制变更定时的决定处理。于是,以下,对于在不同的步骤S1407中进行的处理,利用图30示出的流程图进行说明。
在步骤S1501中,判定结果接收部1007,从不良状态判定装置2001获得是否处于不良状态的判定结果以外,在处于不良状态的情况下,还获得不良状态的种类。控制定时决定部1009,从判定结果接收部1007获得所述判定结果以及不良状态的种类。
在步骤S1502中,控制定时决定部1009,在获得的判定结果示出不良状态的情况下,判定所述不良状态是否起因于长期疲劳。具体而言,长期疲劳是指,基于在所述实施例中作为第三个不良状态说明的疲劳的不良状态。也就是说,根据会聚量的累计值以及眼球运动的反应速度判定出的不良状态连续了规定时间以上的时间宽度的不良状态。另一方面,不是长期疲劳的不良状态有,在所述实施例中作为第一个以及第二个不良状态说明的不能准确进行立体视的状态以及用户的位置相对于显示画面而不适当的情况。并且,即使基于在所述实施例中作为第三个不良状态说明的疲劳的不良状态,也有在规定时间以下的时间内会聚角的累计值以及眼球运动的反应速度降低的情况。在作为长期疲劳的不良状态的情况下,用户能够进行立体视,因此,不需要立即切换为2D影像。但是,在不是长期疲劳的不良状态的情况下,本来用户不能进行立体视,因此,为了避免在负担的状态下用户继续观看3D影像,需要立即切换为2D影像。
在此,在判定为处于因长期疲劳而引起的不良状态的情况下,进行到步骤S1503,控制定时决定部1009,根据影像的立体程度决定变更定时。具体而言,以在立体程度的变化小的定时或立体程度本身小的定时从立体影像变更为平面影像的方式,来决定变更定时。这基于以下假设,即,对于基于长期疲劳的不良状态,起因于积累的疲劳的可能性高,因此,不需要立即应对。也就是说,基于以下的思想,即,在因液晶快门的控制方法的变更而引起的影像的变化尽量小的定时,进行从立体影像向平面影像的变更,没有不协调感地进行向平面影像的变更。对于控制定时决定的更具体的方法,根据用户的眼球运动的测量结果,将会聚没有发生的定时(用户的眼球运动的会聚量比规定的会聚量阈值小的定时)判定为用户观看平面影像的定时,将该定时,设为从立体影像向平面影像的切换控制定时。而且,也可以替代影像显示装置101,而利用如图31的具备影像信息存储部104的影像显示装置101A。影像信息存储部104,存储与影像的立体程度的时间变化有关的信息。控制定时决定部1009也可以,利用影像信息存储部104所存储的信息,决定步骤S1503的控制定时。也就是说,在检测出基于长期测量的不良状态之后,控制定时决定部1009,从影像信息存储部104获得与今后的立体程度的时间变化有关的信息,获得立体程度小的时刻。控制定时决定部1009,在获得的所述时刻,进行液晶快门的控制方法的变更。
另一方面,在步骤S1502中,在判定为不处于因长期疲劳而引起的不良状态的情况下,进行到步骤S1504,以在规定时间以内进行液晶快门的控制方法的变更的方式来决定控制定时。在此,将规定时间设为尽量早的时间,基本上,决定为立即进行切换。例如,在坐着观看立体影像的用户想要躺卧着观看立体影像而躺卧的情况下,若检测出该不良状态,则立即从立体影像的提供切换为平面影像的提供。
如上所述,根据本变形例的结构以及处理,按照不良状态,能够进行不协调感更少的从立体影像向平面影像的变更。
也就是说,在因疲劳而引起的不良状态的情况下,在眼球运动的会聚量比规定的会聚量阈值小的定时,能够将处于不良状态的用户的视听影像从立体影像切换为平面影像。据此,能够进行用户不具有不协调感的从立体影像向平面影像的变更。
以上,说明本发明的实施例涉及的立体影像提供装置,但是,本发明不仅限于该实施例。
本发明必须的构成要素是,图6示出的立体影像提供装置之中的、眼球运动测量部1004、利用人数判定部2004、以及不良状态判定部2005。对于其他的构成要素,优选的是,立体影像提供装置所具备,但是,不是必须的。图32是示出本发明的由必须的构成要素构成的立体影像提供装置的功能结构的方框图。一种立体影像提供装置,以与左眼用影像以及右眼用影像的显示定时同步的方式,来对用户佩戴的立体视用的眼镜所具备的左眼用快门以及右眼用快门的开闭进行控制,从而向用户提供立体影像,所述立体影像提供装置具备:眼球运动测量部1004,测量观看立体影像的各个用户的眼球运动;利用人数判定部2004,判定观看同一立体影像的用户的人数;以及不良状态判定部2005,在利用人数判定部2004将观看同一立体影像的用户的人数判定为多个的情况下,通过对多个用户的眼球运动进行比较,从而判定多个用户之中的眼球运动处于不良状态的用户。
而且,对于所述的各个装置,具体而言,也可以被构成为由微处理器、ROM、RAM、硬盘驱动器、显示器单元、键盘、鼠标等构成的计算机系统。RAM或硬盘驱动器储有计算机程序。微处理器根据计算机程序进行工作,据此,各个装置实现其功能。在此,计算机程序是,为了实现规定的功能,组合表示对计算机的命令的多个指令码而构成的。
也就是说,该程序,使计算机执行立体影像提供方法中包含的步骤。该立体影像提供方法,以与左眼用影像以及右眼用影像的显示定时同步的方式,来对用户佩戴的立体视用的眼镜所具备的左眼用快门以及右眼用快门的开闭进行控制,从而向所述用户提供立体影像,所述立体影像提供方法包括:眼球运动测量步骤,测量观看立体影像的各个用户的眼球运动;利用人数判定步骤,判定观看同一立体影像的用户的人数;以及不良状态判定步骤,在所述利用人数判定步骤中将观看所述同一立体影像的用户的人数判定为多个的情况下,通过对多个用户的眼球运动进行比较,从而判定所述多个用户之中的眼球运动处于不良状态的用户。
进而,构成所述的各个装置的构成要素的一部分或全部也可以,由一个系统LSI(Large Scale Integration:大规模集成电路)构成。系统LSI是,在一个芯片上集成多个构成部而制造的超多功能LSI,具体而言,是包含微处理器、ROM、RAM等而构成的计算机系统。RAM存储有计算机程序。微处理器根据计算机程序进行工作,据此,系统LSI实现其功能。
进而,并且,构成所述的各个装置的构成要素的一部分或全部也可以,由与各个装置可装卸的IC卡或单体的模块构成。IC卡或模块是,由微处理器、ROM、RAM等构成的计算机系统。IC卡或模块也可以,包含所述的超多功能LSI。微处理器根据计算机程序进行工作,据此,IC卡或模块实现其功能。该IC卡或该模块也可以,具有防篡改性。
并且,本发明也可以是所述的方法。并且,可以是由计算机实现这样的方法的计算机程序,也可以是由所述计算机程序而成的数字信号。
并且,本发明也可以,将所述计算机程序或所述数字信号记录到计算机可读取的非暂时的记录介质,例如,软盘、硬盘、CD-ROM、MO、DVD、DVD-ROM、DVD-RAM、BD(Blu-ray Disc(注册商标))、半导体存储器等。并且,也可以是这样的非暂时的记录介质所记录的所述数字信号。
并且,本发明也可以,将所述计算机程序或所述数字信号,经由电通信线路、无线或有线通信线路、以互联网为代表的网络、数据广播等传输。
并且,本发明也可以是,具备微处理器和存储器的计算机系统,所述存储器存储有所述计算机程序,所述微处理器根据所述计算机程序进行工作。
并且,也可以是,将所述程序或所述数字信号记录到所述非暂时的记录介质来转送,或者,将所述程序或所述数字信号经由所述网络等转送,从而由独立的其他的计算机系统实施。
以上,对于本发明的一个或多个实施方案涉及的立体影像提供装置,根据实施例进行了说明,但是,本发明,不仅限于该实施例。只要不脱离本发明的宗旨,对本实施例施行本领域的技术人员想到的各种变形的形态、或组合不同的实施例中的构成要素而构成的形态,也包含在本发明的一个或多个实施方案的范围内。
本发明,对视听立体影像的用户能够提供舒适的影像。本发明是与帧序列方式对应的发明,帧序列方式是广泛利用于电影院以及民用电视机的方式,本发明的利用可能性非常大。
符号说明
101影像显示装置
102影像显示部
103左右影像切换定时发送部
1001、1001A眼镜装置
1002左右影像切换定时接收部
1003眼镜透过度控制方法
1004眼球运动测量部
1005眼球运动存储部
1006眼球运动发送部
1007判定结果接收部
2001不良状态判定装置
2002眼球运动接收部
2003按眼镜眼球运动存储部
2004利用人数判定部
2005不良状态判定部
2006不良状态条件存储部
2007判定结果发送部

Claims (9)

1.一种立体影像提供装置,以与左眼用影像以及右眼用影像的显示定时同步的方式,来对用户佩戴的立体视用的眼镜所具备的左眼用快门以及右眼用快门的开闭进行控制,从而向所述用户提供立体影像,所述立体影像提供装置具备:
眼球运动测量部,测量观看立体影像的各个用户的眼球运动;
利用人数判定部,判定观看同一立体影像的用户的人数;以及
不良状态判定部,在所述利用人数判定部将观看所述同一立体影像的用户的人数判定为多个的情况下,通过对多个用户的眼球运动进行比较,从而判定所述多个用户之中的眼球运动处于不良状态的用户。
2.如权利要求1所述的立体影像提供装置,
所述立体影像提供装置还具备控制变更部,
该控制变更部,将由所述不良状态判定部判定为处于不良状态的用户佩戴的眼镜所具备的左眼用快门以及右眼用快门的开闭控制,变更为使所述左眼用快门以及所述右眼用快门同时开闭的控制,从而仅将右眼用影像以及左眼用影像的某一方的影像提供给用户。
3.如权利要求2所述的立体影像提供装置,
所述立体影像提供装置还具备控制定时决定部,
该控制定时决定部,在由所述不良状态判定部判定为处于不良状态的用户的眼球运动的会聚量比规定的会聚量阈值小的定时,使所述控制变更部,将该用户佩戴的眼镜所具备的左眼用快门以及右眼用快门的开闭控制,变更为使所述左眼用快门以及所述右眼用快门同时开闭的控制。
4.如权利要求1所述的立体影像提供装置,
所述不良状态判定部,对规定期间内的多个用户的眼球运动的会聚量进行比较,将会聚量比规定人数以上的其他的用户的眼球运动的会聚量小的用户,判定为处于不能进行立体视的不良状态的用户。
5.如权利要求1所述的立体影像提供装置,
所述不良状态判定部,对同一时刻的所述多个用户的眼球运动的会聚量进行比较,将会聚量相对于其他的某个用户的眼球运动的会聚量而大规定值以上的用户,判定为处于距所述右眼用影像以及所述左眼用影像的显示画面太近的不良状态的用户。
6.如权利要求1所述的立体影像提供装置,
所述不良状态判定部,对用户间的同一期间内的眼球运动的会聚量的累计值进行比较,将累计值比其他的某个用户的累计值小规定值以上的用户,判定为处于疲劳的不良状态。
7.如权利要求1所述的立体影像提供装置,
所述不良状态判定部,对用户间的同一期间内的眼球运动的反应速度进行比较,将反应速度比其他的某个用户的反应速度小规定值以上的用户,判定为处于疲劳的不良状态。
8.一种立体影像提供方法,以与左眼用影像以及右眼用影像的显示定时同步的方式,来对用户佩戴的立体视用的眼镜所具备的左眼用快门以及右眼用快门的开闭进行控制,从而向所述用户提供立体影像,所述立体影像提供方法包括:
眼球运动测量步骤,测量观看立体影像的各个用户的眼球运动;
利用人数判定步骤,判定观看同一立体影像的用户的人数;以及
不良状态判定步骤,在所述利用人数判定步骤中将观看所述同一立体影像的用户的人数判定为多个的情况下,通过对多个用户的眼球运动进行比较,从而判定所述多个用户之中的眼球运动处于不良状态的用户。
9.一种程序,用于使计算机执行权利要求8所述的立体影像提供方法中包括的所有的步骤。
CN2012800043557A 2011-05-20 2012-04-04 立体影像提供装置以及其方法 Pending CN103283244A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011-114010 2011-05-20
JP2011114010 2011-05-20
PCT/JP2012/002344 WO2012160745A1 (ja) 2011-05-20 2012-04-04 立体映像提供装置及びその方法

Publications (1)

Publication Number Publication Date
CN103283244A true CN103283244A (zh) 2013-09-04

Family

ID=47216839

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012800043557A Pending CN103283244A (zh) 2011-05-20 2012-04-04 立体影像提供装置以及其方法

Country Status (4)

Country Link
US (1) US8741003B2 (zh)
JP (1) JP5148016B2 (zh)
CN (1) CN103283244A (zh)
WO (1) WO2012160745A1 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012139108A1 (en) * 2011-04-08 2012-10-11 Dolby Laboratories Licensing Corporation Method and apparatus for flicker reduction and contrast enhancement in 3d displays
JP5096643B1 (ja) * 2011-05-19 2012-12-12 パナソニック株式会社 輻輳能力判定装置及びその方法
CN103380625A (zh) * 2011-06-16 2013-10-30 松下电器产业株式会社 头戴式显示器及其位置偏差调整方法
JP5665241B2 (ja) * 2012-03-21 2015-02-04 パナソニックIpマネジメント株式会社 眼球疲労判定装置およびその作動方法
US9182817B2 (en) * 2013-03-12 2015-11-10 Intel Corporation Techniques for automated evaluation of 3D visual content
DE102013212374A1 (de) * 2013-06-27 2014-12-31 Robert Bosch Gmbh Verfahren und Vorrichtung zum Anpassen einer Darstellung eines Bildes auf einem Bildschirm
JP6287486B2 (ja) * 2014-03-31 2018-03-07 富士通株式会社 情報処理装置、方法及びプログラム
CN104765152B (zh) * 2015-05-06 2017-10-24 京东方科技集团股份有限公司 一种虚拟现实眼镜
KR101899405B1 (ko) * 2016-11-11 2018-09-17 주식회사 3디나라 컴퓨터 및 스마트폰을 기반으로 한 시력강화 소프트웨어 구현 방법
JP2018202191A (ja) * 2018-08-10 2018-12-27 株式会社東芝 アイウエア、データ収集システム及びデータ収集方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3324653B2 (ja) 1989-11-15 2002-09-17 新日本石油株式会社 セラミックス被覆炭素/炭素複合材料の製造法
JPH0918894A (ja) * 1995-06-26 1997-01-17 Sanyo Electric Co Ltd 立体映像表示装置
JP3159962B2 (ja) 1998-11-27 2001-04-23 沖電気工業株式会社 Atm交換装置
JP2001148865A (ja) 1999-11-19 2001-05-29 Minolta Co Ltd 画像入力装置
CN102293001B (zh) * 2009-01-21 2014-05-14 株式会社尼康 图像处理装置、图像处理方法及记录方法
JP5573683B2 (ja) * 2009-01-22 2014-08-20 日本電気株式会社 立体映像鑑賞システム、表示システム、光シャッタおよび立体映像鑑賞方法
US8199186B2 (en) * 2009-03-05 2012-06-12 Microsoft Corporation Three-dimensional (3D) imaging based on motionparallax
JP2010259006A (ja) * 2009-04-28 2010-11-11 Nikon Corp 画像提示システム、プログラムおよび画像提示方法
JP5448594B2 (ja) 2009-06-16 2014-03-19 キヤノン株式会社 立体映像表示制御装置及び立体映像表示制御装置の制御方法
JP2011028633A (ja) 2009-07-28 2011-02-10 Sony Corp 情報処理装置及び方法、並びに、プログラム
US20110025821A1 (en) * 2009-07-30 2011-02-03 Dell Products L.P. Multicast stereoscopic video synchronization
JP2011064894A (ja) * 2009-09-16 2011-03-31 Fujifilm Corp 立体画像表示装置
KR101621907B1 (ko) * 2010-02-02 2016-05-17 삼성전자주식회사 디스플레이 장치, 3d 영상 제공 방법 및 3d 영상 제공 시스템
US20130160039A1 (en) * 2011-06-20 2013-06-20 Bit Cauldron Corporation Method and apparatus for determining individualized media metrics, and providing individualized conditional access for 3d image viewing

Also Published As

Publication number Publication date
US8741003B2 (en) 2014-06-03
WO2012160745A1 (ja) 2012-11-29
JP5148016B2 (ja) 2013-02-20
JPWO2012160745A1 (ja) 2014-07-31
US20130021458A1 (en) 2013-01-24

Similar Documents

Publication Publication Date Title
CN103283244A (zh) 立体影像提供装置以及其方法
EP3089154B1 (en) Image processing device and image display system for pose prediction-based display
CN102396237B (zh) 影像显示装置、影像收看用眼镜以及具备这些的系统
EP2701390B1 (en) Apparatus for adjusting displayed picture, display apparatus and display method
EP3495027A1 (en) Method and system for circumventing real environment obstacle based on vr game
JP5475893B2 (ja) 視覚疲労度測定装置およびその方法
CN100592808C (zh) 立体图像显示装置及立体图像显示方法
US9307228B2 (en) Depth of field maintaining apparatus, 3D display system and display method
CN104656257A (zh) 信息处理方法及电子设备
KR101621907B1 (ko) 디스플레이 장치, 3d 영상 제공 방법 및 3d 영상 제공 시스템
CN103380625A (zh) 头戴式显示器及其位置偏差调整方法
JP5817639B2 (ja) 映像フォーマット判別装置及び映像フォーマット判別方法、並びに映像表示装置
KR20110114260A (ko) 3d 디스플레이 장치 및 그의 gui 설정 방법, 그리고 3d 안경
CN103283245A (zh) 会聚能力判定装置以及其方法
US20130155055A1 (en) Display device, display method, and recording medium
CN104185986A (zh) 图像处理装置、图像处理方法及程序
KR20110137607A (ko) 디스플레이 장치 및 그 3d 영상 인식 진단 방법
CN103986924A (zh) 立体影像的调整装置及其方法
CN102714750B (zh) 眼镜装置以及影像系统
Peli et al. 53.2: A binocular stereoscopic display system with coupled convergence and accommodation demands
JP2012028928A (ja) 画像表示装置、画像表示システム、記録媒体及び画像表示方法
US20130050448A1 (en) Method, circuitry and system for better integrating multiview-based 3d display technology with the human visual system
JP2012156816A (ja) 映像表示装置および映像表示方法
CN104584548B (zh) 显示元件上的图片定位
KR101323203B1 (ko) 3차원 콘텐츠의 지속적 주관적 시각적 불편도 및 화질 평가 장치와 그 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130904