CN104185986A - 图像处理装置、图像处理方法及程序 - Google Patents

图像处理装置、图像处理方法及程序 Download PDF

Info

Publication number
CN104185986A
CN104185986A CN201380016036.2A CN201380016036A CN104185986A CN 104185986 A CN104185986 A CN 104185986A CN 201380016036 A CN201380016036 A CN 201380016036A CN 104185986 A CN104185986 A CN 104185986A
Authority
CN
China
Prior art keywords
data
amount
threshold condition
user
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380016036.2A
Other languages
English (en)
Inventor
泷祐平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN104185986A publication Critical patent/CN104185986A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/144Processing image signals for flicker reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/128Adjusting depth or disparity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074Stereoscopic image analysis
    • H04N2013/0081Depth or disparity estimation from stereoscopic image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

[问题]提供了一种减小用户的眼睛的疲劳的图像处理装置和图像处理方法即程序。[解决方案]一种图像处理装置,包括:确定单元,该确定单元被配置成确定构成图像数据的左眼图像数据与右眼图像数据之间的差是否满足阈值条件;以及调节单元,该调节单元被配置成在确定单元确定差满足阈值条件的情况下,调节所述图像数据以使得会聚角在立体地显示图像数据的情况下被减小。调节单元调节图像数据以使得在目标点处感知到的多条图像数据的各条的显示位置在深度方向上的移动量变得相同,多条图像数据与多个帧相对应。

Description

图像处理装置、图像处理方法及程序
技术领域
本公开内容涉及一种图像处理装置、图像处理方法及程序。
背景技术
最近,发布了能够通过显示左眼图像(L图像)和右眼图像(R图像)使用户感知立体图像的3D显示装置。通过使用3D显示装置,虽然用户可以获得增强用户的逼真感的效果,但是用户容易眼疲劳。尽管存在有多种多样的眼疲劳的因素,但是作为示例,这些因素包括由L图像与R图像的混合发生的串扰以及由缺少液晶快门的刷新率而发生的闪烁。因此,液晶的帧速率得到改进,并且快门眼镜得到改进。然而,眼疲劳的问题仍未充分地得到解决。
此外,已认识到眼疲劳的发生不仅取决于显示类型和显示装备,还取决于观看视频的用户的个体特性以及用户观看视屏的方式。根据这样的情况,发布了针对观看方式和观看装备的准则。例如,通过公众合作和私人合作促进3D产业发展的3D联盟针对观看立体视频制定了准则并且旨在获得舒适的立体图像观看。
此外,在显示被过度挤压的情况下或者在视差差值的变化较大的情况下,用户的疲劳变得严重。从这样的立场出发,研究了舒适的3D显示技术。例如,专利文献1公开了一种视差转换装置,该视差转换装置被配置成通过使L图像和/或R图像在水平方向上移位来调节L图像与R图像之间的视差。
引用列表
专利文献
专利文献1:JP 2011-55022A
发明内容
技术问题
如上文所述,可以通过使L图像和/或R图像在水平方向上移位来调节具有大挤压量的图像在深度方向上的位置。然而,当具有大挤压量的图像在深度方向上的位置被调节时,改变了与另一图像在深度方向上的位置处的相对关系。
因此,本公开内容提出一种能够在不损害对多个立体地显示的帧的深度感的关系的情况下减少用户疲劳的新颖的并且经改进的图像处理装置、图像处理方法及程序。
问题的解决方案
根据本公开内容,提供了一种图像处理装置,包括:确定单元,该确定单元被配置成确定构成图像数据的左眼图像数据与右眼图像数据之间的差是否满足阈值条件;以及调节单元,该调节单元被配置成在确定单元确定差满足阈值条件的情况下,以使会聚角在立体地显示图像数据的情况下变得更小的方式来调节图像数据。调节单元以使在目标点处感知到的多条图像数据的各条的显示位置在深度方向上的移动量变得相同的方式来调节图像数据,多条图像数据与多个帧相对应。
根据本公开内容,提供了一种图像处理方法,包括:确定构成图像数据的左眼图像数据与右眼图像数据之间的差是否满足阈值条件;在确定差满足阈值条件的情况下,以使会聚角在立体地显示图像数据的情况下变得更小的方式来调节图像数据;以及以使在目标点处感知到的多条图像数据的各条的显示位置在深度方向上的移动量变得相同的方式来调节图像数据,多条图像数据与多个帧相对应。
根据本公开内容,提供了一种程序,该程序使得计算机作用为:确定单元,该确定单元被配置成确定构成图像数据的左眼图像数据与右眼图像数据之间的差是否满足阈值条件;以及调节单元,该调节单元被配置成在确定单元确定差满足阈值条件的情况下,以使会聚角在立体地显示图像数据的情况下变得更小的方式来调节图像数据。调节单元以使在目标点处感知到的多条图像数据的各条的显示位置在深度方向上的移动量变得相同的方式来调节图像数据,多条图像数据与多个帧相对应。
发明的有益效果
如上文所述,根据本公开内容,可以在不损害对多个立体地显示的帧的深度感的关系的情况下减少用户的疲劳。
附图说明
[图1]图1是示出了根据本公开内容的实施例的显示系统的配置的说明图。
[图2]图2是示出了根据第一实施例的显示装置的配置的说明图。
[图3]图3是示出了计算图像的挤压量的方式的说明图。
[图4]图4是示出了阈值th与观看时间之间的关系的说明图。
[图5]图5是示出了调节所感知到的3D视频的显示位置的示例的说明图。
[图6]图6是示出了包括在单个帧中的多个对象在深度方向上的移动量相同的说明图。
[图7]图7是示出了与多个帧相对应的各个对象在深度方向上的移动量相同的说明图。
[图8]图8是示出了根据第一实施例的显示装置的操作的流程图。
[图9]图9是示出了通知窗口的特定示例的说明图。
[图10]图10是示出了存在调节或不存在调节的另一通知示例的说明图。
[图11]图11是示出了根据第二实施例的显示装置的配置的说明图。
具体实施方式
在下文中,将参照附图详细地描述本公开内容的优选实施例。注意,在本说明书和附图中,将具有基本相同的功能和结构的元件标注有相同的附图标记,并且省略了重复说明。
此外,在本说明书和附图中,有时将不同的字母后缀到相同的附图标记以将具有基本相同功能配置的多个构成元件彼此区分开。然而,当没有必要将具有基本相同功能配置的多个构成元件区分时,仅给出相同附图标记。
注意,将按以下顺序说明本公开内容。
1.显示系统的基本配置
2.第一实施例
2-1.根据第一实施例的显示装置的配置
2-2.根据第一实施例的显示装置的操作
2-3.补充注释
3.第二实施例
4.总结
<<1.显示系统的基本配置>>
可以以作为示例在“2.第一实施例”至“3.第二实施例”中详细描述的各种形式来进行根据本公开内容的技术。根据每个实施例的并且具有作为显示控制装置的功能的显示装置100包括:
A.确定单元(调节必要性确定单元124),该确定单元被配置成确定构成图像数据的左眼图像数据与右眼图像数据之间的差是否满足阈值条件;以及
B.调节单元(显示控制单元132),该调节单元被配置成在确定单元确定差满足阈值条件的情况下以使会聚角在立体地显示图像数据的情况下变得更小的方式来调节图像数据。
调节单元(显示控制单元132)以使在目标点处感知到的多条图像数据的各条的显示位置在深度方向上的移动量变得相同的方式来调节图像数据,多条图像数据与多个帧相对应。
首先,将参照图1和图2对每个实施例共有的显示系统的基本配置描述如下。
图1是示出了根据本公开内容的实施例的显示系统的配置的说明图。如图1所示,根据本公开内容的实施例的显示系统包括显示装置100和快门眼镜200。
如图1所示,显示装置100包括在其上显示图像的显示单元110。显示装置100可以通过将左眼图像(L图像)和右眼图像(R图像)显示在显示单元110上来使用户感知立体图像(3D图像)。此外,显示装置100包括成像单元114,该成像单元114用于对可以观看到显示装置100的范围成像。通过对由成像单元114获得的捕获图像进行分析,可以识别观看显示装置100的用户。
快门眼镜200包括例如包含液晶快门的右眼图像透明单元212和左眼图像透明单元214。快门眼镜200响应于从显示装置100传送的信号对右眼图像透明单元212和左眼图像透明单元214进行开/关操作。用户可以通过快门眼镜200的右眼图像透明单元212和左眼图像透明单元214,观看从显示单元110发出的光而将显示在显示单元110上的左眼图像和右眼图像感知为3D图像。
图1示出了作为图像处理装置的示例的显示装置100。然而,图像处理装置并不限于此。例如,图像处理装置可以是信息处理设备如个人计算机(PC)、家用视频处理设备(DVD录像机、视频盒式录像机等)、个人数字助理(PDA)、家用游戏装置、蜂窝电话、便携式视频处理设备或便携式游戏装置。可替代地,显示控制装置可以是安装在剧院或公共场所的显示器。
此外,本说明书对使用快门操作的控制方法进行说明以使得左眼图像被左眼感知到并且右眼图像被右眼感知到。然而,控制方法并不限于此。例如,可以通过使用用于左眼的偏振滤光器和用于右眼的偏振滤光器来获得类似的效果。
(背景)
然而,在具有3D显示功能的通用显示装置中,在显示被过度挤压的情况下或者在视差的变化较大的情况下,用户的疲劳变得严重。从这样的立场出发,研究了舒适的3D显示的技术。例如,已知通过使L图像和/或R图像在水平方向上移位来调节L图像与R图像之间的视差的技术。此外,已认识到眼疲劳的发生不仅取决于显示类型和显示装备,还取决于观看视频的用户的个体特性以及用户观看视屏的方式。根据这样的情况,发布了针对观看方式和观看装备的准则。例如,通过公众合作和私人合作促进3D产业发展的3D联盟针对观看立体视频制定了准则并且旨在获得舒适的立体图像观看。
如上文所述,通过调节视差或通过设计观看方式,可以对一定量的用户疲劳有所改善。然而,即使调节了视差并且设计了观看方式,用户的疲劳还是会随着观看3D显示的视频的时间变长而增加。此外,当具有大挤压量(extrusion amount)的图像在深度方向上的位置被调节时,会改变与另一图像在深度方向上的位置处的相对关系。
因此,在将上述情况考虑进观点时,实现了根据本公开内容的各个实施例的显示装置100。根据本公开内容的各个实施例的显示装置100可以在不损害多个立体地显示的帧的深度感的关系的情况下减小用户的疲劳。在下文中,接着并且具体地描述了根据本公开内容的各个实施例的显示装置100。
<<2.第一实施例>>
<<2-1.根据第一实施例的显示装置的配置>>
图2是示出了根据第一实施例的显示装置100的配置的说明图。如图2所示,根据第一实施例的显示装置100包括显示单元110、成像单元114、挤压量计算单元120、调节必要性确定单元124、设置单元128、显示控制单元132、快门控制单元136以及红外通信单元140。由于在“1.显示系统的基本配置”中对显示单元110和成像单元114进行了描述,所以在下文中将省略对显示单元110和成像单元114的重复描述。
(挤压量计算单元)
包括包含L图像数据和R图像数据的图像数据的3D视频信号被输入到挤压量计算单元120。3D视频信号可以是接收的视频信号或者从存储介质读取出的视频信号。挤压量计算单元120对包含在3D视频信号中的L图像数据与R图像数据之间的差进行估计。例如,当基于L图像数据和R图像数据来进行3D显示时,挤压量计算单元120计算从显示单元110到在其处用户感知到图像存在的位置的挤压量。在下文中将参照图3对计算挤压量的方式的特定示例进行说明。
图3是示出了计算图像的挤压量的方式的说明图。如图3所示,当R图像和L图像被显示在显示单元110上的不同位置处时,用户感知到在连接右眼和R图像的线与连接左眼和L图像的线之间的交叉点处存在图像(下文中,感知位置P)。
通过使用图3中示出的用户的左眼与右眼之间的间隔E、用户与显示单元110之间的距离D以及L图像与R图像之间的差X,例如根据下面的数学公式来计算感知位置P与显示单元110之间的距离,即感知位置P距显示单元110的挤压量S。
挤压量S=D×X/(X+E)
注意,可以根据由成像单元114所获得的捕获图像来估计用户的左眼与右眼之间的间隔E以及用户与显示单元110之间的距离D。可替代地,用户的左眼与右眼之间的间隔E以及用户与显示单元110之间的距离D可以是预先设置的值。
注意,可以使用不同的方式来识别L图像与R图像之间的差X。例如,挤压量计算单元120可以通过使用提取L图像和R图像中的特征点并且测量特征点之间的间隙的立体匹配方法来识别差X。更具体地,该立体匹配方法包括基于特征的方法和基于区域的方法。基于特征的方法基于亮度值提取图像中的边缘、将边缘强度和边缘方向提取为特征点并且测量相似边缘点之间的间隙。基于区域的方法针对每个特定图像区域分析模式的匹配度并且测量相似图像区域之间的间隙。
注意,上述描述中说明了挤压量是感知点P与显示单元110之间的距离的示例。然而,本实施例并不限于此。例如,可以将图3中所示的会聚角θ用作为挤压量。注意,挤压量计算单元120可以针对单位时间来划分3D视频信号并且可以计算挤压量在区段中的平均值。
(调节必要性确定单元)
当基于3D视频信号来进行3D显示时,调节必要性确定单元124确定是否发生令用户不适的会聚移动。在确定发生不适的会聚移动的情况下,调节必要性确定单元124指示显示控制单元132调节挤压量。
更具体地,当进行3D显示时,调节必要性确定单元124基于由挤压量计算单元120计算的挤压量S来确定是否发生不舒适的会聚移动。本文,认为立体效果随着由挤压量计算单元120计算的挤压量S变得更大而增加。
此外,当观看立体视频时,在眼睛上发生会聚移动(斜眼状态(cross-eyed))。因此,用户可以获得深度感。然而,在立体视频被过度地挤压的情况下,会发生在平常生活情况中并不发生的不舒适的会聚移动。这样的不舒适的会聚移动被认为是眼疲劳的原因之一。
因此,在由挤压量计算单元120计算的挤压量S大于或等于由随后描述的设置单元128设置的阈值th的情况下,调节必要性确定单元124指示显示控制单元132调节挤压量。
(设置单元)
设置单元128设置由用于确定显示类型的调节必要性确定单元124所使用的阈值th。例如,在用户的观看时间变长的情况下,认为使用户累积疲劳。因此,设置单元128可以随着用户的观看时间变长而降低阈值th。在这样的配置中,可以在用户的观看时间变长的情况下增加挤压量调节的频率。将参照图4,给出特定的示例如下。
图4是示出了阈值th与观看时间之间的关系的说明图。如图4所示,设置单元128可以随着观看时间变长而不断地减小阈值th。在图4的示例中,由于挤压量S在t1至t2中落在阈值th之下,所以在t1至t2中未进行挤压量调节。然而,在挤压量S相对较低并且如果阈值th保持初始值就则不进行挤压量调节的t3附近,由于挤压量S超过了减小的阈值th,所以进行挤压量调节。如上所述,通过使阈值th随着观看时间变长而不断地减小,易于进行挤压量调节。因此,可以减小用户的眼疲劳。
注意,根据观看时间减小的阈值th可以是通过将初始值乘以与观看时间成反比的比率而获得的值。
注意,设置阈值th的方式并不限于上述使用观看时间的方式。例如,由于担忧具有极大的挤压量的3D视频对儿童用户的视觉功能发育的影响,所以设置单元128可以确定用户是成人还是儿童,并且在用户是儿童的情况下,设置单元128可以将阈值th设置为比在用户是成人的情况下更低的值。注意,可以基于由成像单元114所获得的捕获图像来估计用户是成人还是儿童。
可替代地,设置单元128可以通过考虑包括在3D视频信号中的视频附加信息(例如,视频的类型和持续时间)、来自能够获取观看环境的传感器的输入、关于用户的活体的信息(视力、戴隐形眼镜或眼镜、年龄以及双眼之间的距离)、显示装置100的类型(便携式装置、固定装置、屏幕)等。此外,设置单元128可以将阈值th设置为由用户根据用户操作指定的值。
(显示控制单元)
显示控制单元132起调节单元的作用,该调节单元被配置成根据由调节必要性确定单元124指示的调节的必要性或非必要性来调节显示在显示单元110上的图像数据(L图像和/或R图像)。具体地,在调节必要性确定单元124发出调节是必要的指令的情况下,显示控制单元132(调节单元)以使会聚角在观看3D视频时变得更小(挤压量变得更小)的方式来调节图像数据。即,显示控制单元132(调节单元)以使3D视频的图像(对象)的显示位置在深度方向上移动的方式来调节图像数据。例如,显示控制单元132(调节单元)通过以使L图像与R图像之间的差变得更小的方式进行控制来使3D视频的图像(对象)的显示位置在深度方向上移动。
此外,显示控制单元132(调节单元)以使具有最大会聚角即在多条图像数据的各条中具有最大挤压量的图像的挤压量变得小于或等于参考值(阈值th)的方式来计算移动量。
此处,将参照图5,具体地说明由显示控制单元132进行的调节。图5是由显示控制单元132进行的调节的说明图。如图5的左侧所示,当基于L图像数据和R图像数据进行3D显示时,在从显示单元110到用户感知到图像存在的位置P1处的挤压量S超过阈值th的情况下,调节必要性确定单元124确定调节是必要的。在该情况下,如图5的右侧所示,显示控制单元132以使由用户感知到的位置P1在深度方向G上移动的方式来调节图像数据(L图像和/或R图像)。
可替代地,显示控制单元132可以以使由用户感知到的位置P1移动到例如位置P2的方式来调节图像数据,在位置P2,挤压量变得小于用于确定调节必要性的标准的阈值th。在图5右侧示出的示例中,显示控制单元132以使由用户感知到的位置P1在深度方向G上移动经过移动量F的方式进行调节。
如上所述,通过使得由用户感知到的位置P1在深度方向G上移动,会聚角θ变得更小,并且减轻了用户的斜眼状态。因此,减小了疲劳。
图5所示的示例示出了单个位置P在深度方向G上的移动。然而,还可以将多个图像(对象)包括在3D视频中并且对象中的每个对象具有不同的挤压量S。在该情况下,调节必要性确定单元124可以基于例如在最大挤压的位置处的挤压量S来确定调节必要性。
接着,如图6所示,显示控制单元132以使包括在单个帧中的多个对象中具有最大挤压量的对象的挤压量S落在阈值th以下的方式并且以使多个对象的移动量变得相同的方式来调节图像数据。在该方式下,以使多个对象在深度方向G上的移动量变得相同的方式进行平行移动。因此,可以在不损害包括在3D图像的单个帧中的多个对象的深度感的关系的情况下减小用户的眼疲劳。
此外,根据本实施例的显示控制单元132以使与多个帧相对应的各个图像(对象)的显示位置在深度方向G上的移动量变得相同的方式来调节图像数据(L图像和/或R图像)。
例如,如图7所示,调节必要性确定单元124在分别地根据帧1至帧3的多个感知的对象中至少一个对象(图7中帧2中的对象)的挤压量S超过阈值th情况下确定调节是必要的。
接下来,如图7所示,显示控制单元132以使分别地根据帧1至帧3的多个感知的对象的显示位置在深度方向上的移动量变得相同的方式对构成每个帧的L图像和R图像进行调节。注意,如上所述,此处移动量表示具有最大挤压量的对象(图7示例中帧2中的对象)的显示位置与对象的挤压量S落在阈值th之下的目标显示位置之间的差。
在该方式下,通过使与多个帧的每个帧相对应的每个对象的3D显示位置的移动量在深度方向G上一致,显示控制单元132可以在不损害多个3D显示的帧的深度感的关系的情况下减少用户的疲劳。
注意,显示控制单元132可以在不损害3D显示的深度感的关系的范围内改变帧中的每个对象在深度方向上的移动量。
(快门控制单元和红外通信单元)
快门控制单元136生成快门控制信号用于控制快门眼镜200的快门操作。在快门眼镜200中,基于由快门控制单元136生成并且从红外通信单元140发出的快门控制信号来进行对右眼图像透明单元212和左眼图像透明单元214的开/关操作。具体地,以下述方式进行快门操作,该方式为当左眼图像被显示在显示单元110上时左眼图像透明单元214打开,而当右眼图像被显示在显示单元110上时右眼图像透明单元212打开。
<2-2.根据第一实施例的显示装置的操作>
已经说明了根据第一实施例的显示装置100的配置。接下来,将参照图6,描述根据第一实施例的显示装置100的操作。
图8是示出了根据第一实施例的显示装置100的操作的流程图。如图8所示,首先将3D视频信号输入至挤压量计算单元120(S204)。随后,在进行3D显示的情况下,挤压量计算单元120基于包括在3D视频信号中的L图像数据和R图像数据来计算图像的挤压量S(S208)。注意,本实施例中的挤压量计算单元120以任意单位时间或以任意帧数来计算每个图像数据的挤压量S。
接下来,调节必要性确定单元124确定由挤压量计算单元120计算的挤压量S是否大于或等于由设置单元128设置的阈值th(S212)。随后,在挤压量S小于由设置单元128设置的阈值th的情况下(在步骤S212中为否),调节必要性确定单元124确定对3D显示位置(由用户感知的位置)的调节并非必要(S228)。
另一方面,在挤压量S大于或等于阈值th的情况下(在步骤S212中为是),调节必要性确定单元124确定对3D显示位置的调节是必要的并且指示显示控制单元132进行调节(S216)。
在该方式中,显示控制单元132计算3D显示位置在深度方向上的移动量(S220)。如上所述,移动量表示在多个帧中具有最大挤压量的对象的显示位置与在其处对象的挤压量S落在阈值th之下的目标显示位置之间的差。
随后,显示控制单元132以使多个帧中的各个图像(对象)的显示位置在深度方向上的移动量变得相同的方式来调节图像数据(S224)。
随后,显示装置100重复S204至S228的处理直到基于3D视频信号的显示结束为止(S232)。
<2-3.补充注释>
已经说明了根据本公开内容的第一实施例的显示装置100的配置及操作。在下文中,将描述关于第一实施例的补充注释。
(存在调节或不存在调节的通知)
显示控制单元132可以叠加通知窗口用于通知用户存在或不存在3D视频信号调节。将参照图9,给出特定的示例如下。
图9是示出了通知窗口的特定示例的说明图。如图9所示,在进行3D视频信号调节的情况下,通知窗口30包括示出“疲劳减少模式”的文本以及给用户柔和印象的字符图像。显示控制单元132可以以当3D视频信号调节开始时使通知窗口30显示一定时间的方式来进行控制。
基于这样的通知窗口30,用户可以容易地识别已经对当前显示的3D视频进行了调节用于减少疲劳。
注意,存在调节或不存在调节的通知方式并不限于此。例如,如图10所示,可以在显示装置100的前表面上设置发光单元112,并且发光单元112在进行3D视频信号调节的情况下发出光。在这样的配置中,可以在不打扰对显示在显示单元110上的内容图像进行观看的情况下向用户通知存在调节或不存在调节。
(基于用户的视线来控制)
当在显示装置100上进行3D显示时,用户的注意力可能转移到另一装置如移动装置。在该时期中,如果快门眼镜200的快门操作继续,则当用户察看另一装置时会发生闪烁。此外,当用户未察看显示装置100时在显示装置100上进行3D显示毫无意义。
因此,在用户的注意力从显示装置100偏离的情况下,快门控制单元136可以停止快门眼镜200的快门操作。注意,可以通过从由成像单元114获得的捕获图像识别用户的视线来确定用户的注意力是否从显示装置100偏离。在这样的配置中,用户可以在不摘掉快门眼镜200的情况下舒适地使用另一装置。
此外,在用户的注意力从显示装置100偏离的情况下,显示控制单元132可以停止显示单元110上的3D显示。此外,在用户的注意力从显示装置100偏离的情况下,显示装置100可以断开显示装置100的电力供应。在这样的配置中,可以减小显示装置100的功耗。
<<3.第二实施例>>
说明了本公开内容的第一实施例。接下来,将说明本公开内容的第二实施例。
图11是示出了根据第二实施例的显示装置100'的配置的说明图。如图11所示,根据第二实施例的显示装置100'包括:显示单元110、成像单元114、挤压量计算单元120、调节必要性确定单元126、设置单元128、显示控制单元132、快门控制单元136、红外通信单元140、分析单元144以及变化模式存储单元148。由于在“2.第一实施例”中已对显示单元110、成像单元114、挤压量计算单元120、设置单元128、显示控制单元132以及快门控制单元136进行了描述,所以在下文中将省略对其的重复描述。
根据第二实施例的显示装置100'获取用户的生物信息如来自使用装置的用户的脉搏和面部表情肌的移动。例如,由用户所戴的快门眼镜200获取用户的生物信息,以及红外通信单元140从快门眼镜200接收用户的生物信息。
基于用户的生物信息的变化,分析单元144分析使用户变疲劳的图像模式。例如,在用户的生物信息指示用户变疲劳的情况下,分析单元144分析在获取生物信息时所显示的L图像与R图像之间的差的变化模式(即,挤压量的变化模式)。随后,变化模式存储单元148存储根据由分析单元144进行分析获取到的变化模式。例如,变化模式包括其中挤压量的增大和减小在单位周期中重复了三次的模式。
调节必要性确定单元126确定由挤压量计算单元120计算的挤压量的变化模式是否与存储在变化模式存储单元148中的变化模式相匹配。此处,在由挤压量计算单元120计算的挤压量的变化模式与存储在变化模式存储单元148中的变化模式相匹配的情况下,认为3D显示使用户疲劳。因此,在由挤压量计算单元120计算的挤压量的变化模式与存储在变化模式存储单元148中的变化模式相匹配的情况下,调节必要性确定单元126指示显示控制单元132调节图像数据。
根据上述第二实施例,可以基于在用户观看3D图像时所获取到的用户的生物信息来自动地生成为个体用户定制的调节必要性确定条件,并且还可以根据调节必要性确定条件来确定调节的必要性。
<<4.结论>>
如上所述,根据本公开内容的实施例,可以使3D视频的显示位置(由用户感知的位置)在深度方向上移动。因此,可以抑制不舒适的会聚移动并且可以减少用户的眼疲劳。此外,根据本公开内容的实施例,以平行的方式来移动与多个帧相对应的各个对象。因此,可以在不损害与多个帧相对应的3D显示对象的深度感的关系的情况下减少用户的疲劳。
此外,根据本公开内容的实施例,由于可以通过估计用户的视线方向来抑制不必要的3D显示或快门眼镜的驱动,所以可以减小功耗。此外,根据本公开内容的实施例,可以基于在用户观看3D视频时所获取到的用户的生物信息来自动地生成为个体用户定制的存在调节或不存在调节的确定条件,并且还可以根据确定条件来确定存在或不存在调节。
此外,可以减少来自过度挤压3D显示的用户的眼疲劳。因此,可以给担心3D显示的不利效果的用户留下3D显示的吸引力的好印象。以该方式,本公开内容的实施例可以对3D产业的发展做出贡献。
上文参照附图描述了本公开内容的优选实施例,然而本公开内容当然并不限于以上示例。本领域技术人员可以在所附权利要求的范围内发现各种变型和修改,并且应该理解的是各种变型和修改将自然地归入本发明的技术范围。
例如,可以不必按照流程图中描述的顺序以时间顺序来执行根据该说明书由显示装置100执行的处理中的各个步骤。例如,可以按照与流程图中所描述的顺序不同的顺序来处理由显示装置100执行的处理中各个步骤,并且还可以平行地处理由显示装置100执行的处理中各个步骤。
此外,可以创建用于使得内置在显示装置100中的硬件如CPU、ROM以及ROM表现出与上述显示装置100的元件的每个元件相同的功能的计算机程序。此外,还可以提供在其上记录有计算机程序的存储介质。
此外,本技术还可以配置成如下。
(1)一种图像处理装置,包括:
确定单元,所述确定单元被配置成确定构成图像数据的左眼图像数据与右眼图像数据之间的差是否满足阈值条件;以及
调节单元,所述调节单元被配置成在所述确定单元确定所述差满足所述阈值条件的情况下,以使会聚角在立体地显示所述图像数据的情况下变得更小的方式来调节所述图像数据,
其中,所述调节单元以使在目标点处感知到的多条图像数据的各条的显示位置在深度方向上的移动量变得相同的方式来调节所述图像数据,所述多条图像数据与多个帧相对应。
(2)根据(1)所述的图像处理装置,
其中,所述调节单元以使在所述多条图像数据的各条中具有最大会聚角的图像数据的挤压量落在参考值之下的方式来计算所述移动量。
(3)根据(2)所述的图像处理装置,
其中,所述确定单元确定是否满足作为所述阈值条件的下述条件,该条件为根据所述左眼图像数据与所述右眼图像数据之间的差的挤压量大于或等于所述参考值。
(4)根据(1)至(3)中任一项所述的图像处理装置,还包括:
设置单元,所述设置单元被配置成设置所述阈值条件。
(5)根据(4)所述的图像处理装置,
其中,所述设置单元基于由显示装置的用户对所述显示装置的连续使用时间来设置所述阈值条件,所述显示装置使用所述图像数据进行显示。
(6)根据(5)所述的图像处理装置,
其中,所述设置单元使满足所述阈值条件的所述差的范围随着所述连续使用时间变得更长而加宽。
(7)根据(4)至(6)中任一项所述的图像处理装置,
其中,所述设置单元基于使用所述图像数据进行显示的显示装置的用户的属性来设置所述阈值条件。
(8)根据(7)所述的图像处理装置,
其中,所述设置单元将在所述用户是儿童的情况下满足所述阈值条件的所述差的范围加宽为大于在所述用户是成人的情况下满足所述阈值条件的所述差的范围。
(9)根据(4)所述的图像处理装置,
其中,所述设置单元根据用户操作来设置所述阈值条件。
(10)根据(1)所述的图像处理装置,还包括:
存储单元,所述存储单元被配置成存储所述差的特定变化模式,
其中,所述确定单元还确定目标图像数据的左眼图像数据与右眼图像数据之间的差的变化模式是否与存储在所述存储单元中的所述特定变化模式相匹配,以及
其中,所述调节单元在所述确定单元确定所述差满足所述阈值条件并且确定所述目标图像数据的所述变化模式与所述特定变化模式相匹配的情况下调节所述图像数据。
(11)根据(10)所述的图像处理装置,还包括:
分析单元,所述分析单元被配置成:分析当进行立体显示时用户的生物信息对其示出特定的反应的图像数据的左眼图像数据和右眼图像数据;然后提取所述特定变化模式。
(12)一种图像处理方法,包括:
确定构成图像数据的左眼图像数据与右眼图像数据之间的差是否满足阈值条件;
在确定所述差满足所述阈值条件的情况下,以使会聚角在立体地显示所述图像数据的情况下变得更小的方式来调节所述图像数据;以及
以使在目标点处感知到的多条图像数据的各条的显示位置在深度方向上的移动量变得相同的方式来调节所述图像数据,所述多条图像数据与多个帧相对应。
(13)一种程序,所述程序使得计算机作用为:
确定单元,所述确定单元被配置成确定构成图像数据的左眼图像数据与右眼图像数据之间的差是否满足阈值条件;以及
调节单元,所述调节单元被配置成在所述确定单元确定所述差满足所述阈值条件的情况下,以使会聚角在立体地显示所述图像数据的情况下变得更小的方式来调节所述图像数据,
其中,所述调节单元以使在目标点处感知到的多条图像数据的各条的显示位置在深度方向上的移动量变得相同的方式来调节所述图像数据,所述多条图像数据与多个帧相对应。
(14)根据(13)所述的程序,
其中,所述调节单元以使在所述多条图像数据的各条中具有最大会聚角的图像数据的挤压量落在参考值之下的方式来计算所述移动量。
(15)根据(14)所述的程序,
其中,所述确定单元确定是否满足作为所述阈值条件的下述条件,该条件为根据所述左眼图像数据与所述右眼图像数据之间的差的挤压量大于或等于所述参考值。
(16)根据(13)至(15)中任一项所述的程序,还使得所述计算机作用为:
设置单元,所述设置单元被配置成设置所述阈值条件。
(17)根据(16)所述的程序,
其中,所述设置单元基于由显示装置的用户对所述显示装置的连续使用时间来设置所述阈值条件,所述显示装置使用所述图像数据进行显示。
(18)根据(16)或(17)所述的程序,
其中,所述设置单元基于使用所述图像数据进行显示的显示装置的用户的属性来设置所述阈值条件。
附图标记列表
100、100':显示装置
110:显示单元
112:发光单元
114:成像单元
120:量计算单元
124、126:调节必要性确定单元
128:设置单元
132:显示控制单元
136:快门控制单元
140:红外通信单元
144:分析单元
148:变化模式存储单元
200:快门眼镜
212:右眼图像透明单元
214:左眼图像透明单元

Claims (18)

1.一种图像处理装置,包括:
确定单元,所述确定单元被配置成确定构成图像数据的左眼图像数据与右眼图像数据之间的差是否满足阈值条件;以及
调节单元,所述调节单元被配置成在所述确定单元确定所述差满足所述阈值条件的情况下,以使会聚角在立体地显示所述图像数据的情况下变得更小的方式来调节所述图像数据,
其中,所述调节单元以使在目标点处感知到的多条图像数据的各条的显示位置在深度方向上的移动量变得相同的方式来调节所述图像数据,所述多条图像数据与多个帧相对应。
2.根据权利要求1所述的图像处理装置,
其中,所述调节单元以使在所述多条图像数据的各条中具有最大会聚角的图像数据的挤压量落在参考值之下的方式来计算所述移动量。
3.根据权利要求2所述的图像处理装置,
其中,所述确定单元确定是否满足作为所述阈值条件的下述条件,该条件为根据所述左眼图像数据与所述右眼图像数据之间的差的挤压量大于或等于所述参考值。
4.根据权利要求1所述的图像处理装置,还包括:
设置单元,所述设置单元被配置成设置所述阈值条件。
5.根据权利要求4所述的图像处理装置,
其中,所述设置单元基于由显示装置的用户对所述显示装置的连续使用时间来设置所述阈值条件,所述显示装置使用所述图像数据进行显示。
6.根据权利要求5所述的图像处理装置,
其中,所述设置单元使满足所述阈值条件的所述差的范围随着所述连续使用时间变得更长而加宽。
7.根据权利要求4所述的图像处理装置,
其中,所述设置单元基于使用所述图像数据进行显示的显示装置的用户的属性来设置所述阈值条件。
8.根据权利要求7所述的图像处理装置,
其中,所述设置单元将在所述用户是儿童的情况下满足所述阈值条件的所述差的范围加宽为大于在所述用户是成人的情况下满足所述阈值条件的所述差的范围。
9.根据权利要求4所述的图像处理装置,
其中,所述设置单元根据用户操作来设置所述阈值条件。
10.根据权利要求1所述的图像处理装置,还包括:
存储单元,所述存储单元被配置成存储所述差的特定变化模式,
其中,所述确定单元还确定目标图像数据的左眼图像数据与右眼图像数据之间的差的变化模式是否与存储在所述存储单元中的所述特定变化模式相匹配,以及
其中,所述调节单元在所述确定单元确定所述差满足所述阈值条件并且确定所述目标图像数据的所述变化模式与所述特定变化模式相匹配的情况下调节所述图像数据。
11.根据权利要求10所述的图像处理装置,还包括:
分析单元,所述分析单元被配置成:分析当进行立体显示时用户的生物信息对其示出特定的反应的图像数据的左眼图像数据和右眼图像数据;然后提取所述特定变化模式。
12.一种图像处理方法,包括:
确定构成图像数据的左眼图像数据与右眼图像数据之间的差是否满足阈值条件;
在确定所述差满足所述阈值条件的情况下,以使会聚角在立体地显示所述图像数据的情况下变得更小的方式来调节所述图像数据;以及
以使在目标点处感知到的多条图像数据的各条的显示位置在深度方向上的移动量变得相同的方式来调节所述图像数据,所述多条图像数据与多个帧相对应。
13.一种程序,所述程序使得计算机作用为:
确定单元,所述确定单元被配置成确定构成图像数据的左眼图像数据与右眼图像数据之间的差是否满足阈值条件;以及
调节单元,所述调节单元被配置成在所述确定单元确定所述差满足所述阈值条件的情况下,以使会聚角在立体地显示所述图像数据的情况下变得更小的方式来调节所述图像数据,
其中,所述调节单元以使在目标点处感知到的多条图像数据的各条的显示位置在深度方向上的移动量变得相同的方式来调节所述图像数据,所述多条图像数据与多个帧相对应。
14.根据权利要求13所述的程序,
其中,所述调节单元以使在所述多条图像数据的各条中具有最大会聚角的图像数据的挤压量落在参考值之下的方式来计算所述移动量。
15.根据权利要求14所述的程序,
其中,所述确定单元确定是否满足作为所述阈值条件的下述条件,该条件为根据所述左眼图像数据与所述右眼图像数据之间的差的挤压量大于或等于所述参考值。
16.根据权利要求13所述的程序,还使得所述计算机作用为:
设置单元,所述设置单元被配置成设置所述阈值条件。
17.根据权利要求16所述的程序,
其中,所述设置单元基于由显示装置的用户对所述显示装置的连续使用时间来设置所述阈值条件,所述显示装置使用所述图像数据进行显示。
18.根据权利要求16所述的程序,
其中,所述设置单元基于使用所述图像数据进行显示的显示装置的用户的属性来设置所述阈值条件。
CN201380016036.2A 2012-03-30 2013-02-04 图像处理装置、图像处理方法及程序 Pending CN104185986A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012080991 2012-03-30
JP2012-080991 2012-03-30
PCT/JP2013/052459 WO2013145861A1 (ja) 2012-03-30 2013-02-04 画像処理装置、画像処理方法およびプログラム

Publications (1)

Publication Number Publication Date
CN104185986A true CN104185986A (zh) 2014-12-03

Family

ID=49259146

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380016036.2A Pending CN104185986A (zh) 2012-03-30 2013-02-04 图像处理装置、图像处理方法及程序

Country Status (3)

Country Link
US (1) US20150070477A1 (zh)
CN (1) CN104185986A (zh)
WO (1) WO2013145861A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104967837A (zh) * 2015-06-30 2015-10-07 西安三星电子研究有限公司 用于调整三维显示效果的设备和方法
CN111861925A (zh) * 2020-07-24 2020-10-30 南京信息工程大学滨江学院 一种基于注意力机制与门控循环单元的图像去雨方法

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9710130B2 (en) * 2013-06-12 2017-07-18 Microsoft Technology Licensing, Llc User focus controlled directional user input
CN103760973B (zh) * 2013-12-18 2017-01-11 微软技术许可有限责任公司 增强现实的信息细节
US9473764B2 (en) 2014-06-27 2016-10-18 Microsoft Technology Licensing, Llc Stereoscopic image display
JP6550734B2 (ja) * 2014-12-02 2019-07-31 セイコーエプソン株式会社 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、コンピュータープログラム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6549650B1 (en) * 1996-09-11 2003-04-15 Canon Kabushiki Kaisha Processing of image obtained by multi-eye camera
JP4713054B2 (ja) * 2002-09-27 2011-06-29 シャープ株式会社 立体画像表示装置、立体画像符号化装置、立体画像復号装置、立体画像記録方法及び立体画像伝送方法
JP5355208B2 (ja) * 2009-05-01 2013-11-27 富士フイルム株式会社 3次元表示装置及びデジタルズーム補正方法
JP5444955B2 (ja) * 2009-08-31 2014-03-19 ソニー株式会社 立体画像表示システム、視差変換装置、視差変換方法およびプログラム
JP2011138354A (ja) * 2009-12-28 2011-07-14 Sony Corp 情報処理装置および情報処理方法
WO2011162209A1 (ja) * 2010-06-25 2011-12-29 富士フイルム株式会社 画像出力装置、方法およびプログラム
KR101727899B1 (ko) * 2010-11-26 2017-04-18 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
US20120229595A1 (en) * 2011-03-11 2012-09-13 Miller Michael L Synthesized spatial panoramic multi-view imaging

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104967837A (zh) * 2015-06-30 2015-10-07 西安三星电子研究有限公司 用于调整三维显示效果的设备和方法
US10531066B2 (en) 2015-06-30 2020-01-07 Samsung Electronics Co., Ltd Method for displaying 3D image and device for same
CN111861925A (zh) * 2020-07-24 2020-10-30 南京信息工程大学滨江学院 一种基于注意力机制与门控循环单元的图像去雨方法
CN111861925B (zh) * 2020-07-24 2023-09-29 南京信息工程大学滨江学院 一种基于注意力机制与门控循环单元的图像去雨方法

Also Published As

Publication number Publication date
US20150070477A1 (en) 2015-03-12
WO2013145861A1 (ja) 2013-10-03

Similar Documents

Publication Publication Date Title
US9438894B2 (en) Method of providing 3D image and 3D display apparatus using the same
CN104185986A (zh) 图像处理装置、图像处理方法及程序
CN101966393B (zh) 显示器观看系统和基于活动跟踪优化显示器画面的方法
US9414041B2 (en) Method for changing play mode, method for changing display mode, and display apparatus and 3D image providing system using the same
US20110221746A1 (en) 3d eyeglasses, method for driving 3d eyeglasses and system for providing 3d image
EP2378783A1 (en) 3D display apparatus, method for setting display mode, and 3D display system
CN103181180A (zh) 提示控制装置以及提示控制方法
CN102638696A (zh) 显示装置和显示方法
CN102611909A (zh) 具有运动视差的三维显示
CN102761761A (zh) 立体图像显示器及其立体图像调整方法
TW201239403A (en) Adjusting 3D effects for wearable viewing devices
EP2381689A2 (en) 2D/3D switchable shutter glasses for stereoscopic image display system
US20120313930A1 (en) Dual view display method and dual view driving method for providing plural images to plural users and display apparatus and dual view glasses using the same
US20130021458A1 (en) Apparatus and method for presenting stereoscopic video
JP2011139456A (ja) 3dグラスの駆動方法及びこれを用いた3dグラスと3dディスプレイ装置
CN102291588A (zh) 立体显示的远程用户控制方法以及其设备
US20130155055A1 (en) Display device, display method, and recording medium
WO2011108287A1 (ja) 照明制御装置、照明制御装置を用いる照明装置及び照明システム並びに照明制御装置とともに利用される表示装置及び眼鏡装置
CN103595997A (zh) 3d显示系统和3d显示方法
CN102714750B (zh) 眼镜装置以及影像系统
EP2461596A1 (en) 3D glasses and control method thereof
CN103780894A (zh) 具视觉疲劳估算的立体影片播放方法与控制系统
CN103813148A (zh) 三维立体显示装置及其方法
KR101343551B1 (ko) 눈 깜박임 측정을 통해 입체감을 조절하는 3차원 영상 표시 장치
CN103926703A (zh) 基于led背光调制的兼容二维显示的高保真三维显示方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20141203