CN103141108A - 用于3d视频内容的优化观看的3d眼镜、系统以及方法 - Google Patents

用于3d视频内容的优化观看的3d眼镜、系统以及方法 Download PDF

Info

Publication number
CN103141108A
CN103141108A CN2011800471038A CN201180047103A CN103141108A CN 103141108 A CN103141108 A CN 103141108A CN 2011800471038 A CN2011800471038 A CN 2011800471038A CN 201180047103 A CN201180047103 A CN 201180047103A CN 103141108 A CN103141108 A CN 103141108A
Authority
CN
China
Prior art keywords
glasses
orientation
user
video content
shutter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011800471038A
Other languages
English (en)
Inventor
P·新塔尼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN103141108A publication Critical patent/CN103141108A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/398Synchronisation thereof; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/128Adjusting depth or disparity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/337Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using polarisation multiplexing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/341Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using temporal multiplexing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • H04N13/371Image reproducers using viewer tracking for tracking viewers with different interocular distances; for tracking rotational head movements around the vertical axis
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • H04N13/378Image reproducers using viewer tracking for tracking rotational head movements around an axis perpendicular to the screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • H04N13/383Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

公开了用于确定3D眼镜的方位的3D眼镜、3D眼镜系统和相关方法,以及以下操作中的至少一个:向用户指示该方位和调节3D内容的差异以优化3D视频内容观看体验。3D眼镜的方位由倾斜传感器或者红外线照相机确定。根据3D眼镜的方位,以显示器上的视觉指示符、3D眼镜的振动、或者可听音的形式向用户提供通知。视频内容装置可以被配置为根据3D眼镜的方位,从3D呈现模式切换至2D呈现模式。附加地,系统可以适于调节图像差异以补偿倾斜。

Description

用于3D视频内容的优化观看的3D眼镜、系统以及方法
相关申请的交叉引用
本申请要求于2010年11月8日申请的、名为“稳定的3D眼镜(STABILIZED3D GLASSES)”的美国临时申请No.61/411,007的优先权,其整个内容通过引用并入本申请。
技术领域
本发明涉及用于观看3D视频内容的3D眼镜和相关系统。更具体而言,本发明涉及用于优化3D内容观看体验的3D眼镜、3D眼镜系统和用于确定3D眼镜的方位的方法。
背景技术
近年来,被称为平板显示器的诸如液晶显示器(LCD)和等离子体显示面板(PDP)的电视机的普及已快速发展,并受到了广泛的瞩目。此外,近年来看到了高分辨率记录装置和媒体播放器被快速接纳,因而帮助建立了用户不仅能够观看高分辨率广播,而且能够观看高分辨率打包媒体的家庭环境。在这样的背景下,还连续发布了能观看三维(3D)立体视频内容的平板显示器。
用于观看3D立体视频内容的方法可以被粗略分类为两种类型:使用偏振滤光眼镜或者快门式眼镜的眼镜方法;以及使用透镜、视差屏障(parallax barrier)、或者类似的不涉及眼镜的方法的裸眼方法。在这些方法中,考虑到与二维(2D)图像显示器的兼容性,眼镜方法正快速普及以用于家庭观看。
图1示出使用快门式眼镜观看3D立体视频背后的原理。
在显示器1上,以时间序列显示如下内容:第一左眼视频帧或者“图像”LI、第一右眼图像Rl、第二左眼图像L2、第二右眼图像R2、第三左眼图像L3、第三右眼图像R3……依此类推,左眼图像与右眼图像交替显示,且以时间序列显示的所有图像的总和共同定义视频内容。
与此同时,观看3D立体视频的用户戴着快门式眼镜2。为快门式眼镜2提供同步(sync)信号,该同步信号的形式为按显示的顺序的图像的垂直同步信号。快门式眼镜2可以包含分别对于左眼和右眼带有不同偏振的液晶快门。液晶快门与同步信号同步地交替重复下面的两个快门操作:左眼打开、右眼关闭;以及左眼关闭、右眼打开。结果,仅右眼图像被输入到用户的右眼,并且仅左眼图像被输入到用户的左眼。在左眼图像与右眼图像之间提供了视差,作为这些带有视差的二维图像的结果,用户能够察觉到3D立体视频。
在很多情况下,提供给快门式眼镜2的同步信号是通过红外线无线传输的。然而,已经类似地使用了其他技术,诸如蓝牙和无线电频率(RF)。
在作为上述眼镜系统的替代的“偏振滤光眼镜”中,一对偏振滤光眼镜通常包含具有第一偏振的用于左眼的第一透镜、以及具有第二偏振的用于右眼的第二透镜,第二偏振与第一偏振正交。含有带有视差的两个类似的图像的视频帧被同时呈现在屏幕上。帧内两个图像中的第一个被偏振以匹配第一透镜的第一偏振,并且两个图像中的第二个被偏振以匹配第二透镜的第二偏振,由此,观看者在左眼仅观察到第一图像,并且在右眼仅观察到对应的右图像,从而产生3D效果。偏振滤光眼镜早已被使用,并提供用于观看3D视频内容的低成本眼镜。然而,当用户略微倾斜时,察觉到的3D图像会带有颜色偏移和其他观看限制地变得失真。
在快门式眼镜系统和偏振滤光眼镜系统这两者中,显示器1和观看显示在其上的3D立体视频的用户的相对位置被取为以获得如图2所示的适当关系。换言之,用于观看3D立体视频的适当的用户观看范围3被取为扇形区域,其半径L是显示器1中屏幕的垂直长度l的三倍。所以,用户观看范围3依赖于显示器1的屏幕尺寸。
此外,3D内容的察觉与以下内容相关:(i)左右图像的视差;(ii)瞳距(interpupillary distance)、或者观看者的眼睛之间的距离;以及(iii)观看者相对于显示器的位置,前部和中心处于大约两倍于显示器尺寸的距离是优化的。因此,根据眼镜方法,当在显示器前方的位置并且处于观看者的瞳距和由2D帧图像呈现视差的提供了优化差异(disparity)的距离或者处于察觉到该图像的距离进行体验时,3D观看体验优化。应该进一步注意的是,示出的视频中的太多差异会使观看者不适,因此当视频内容被准备用于3D观看时,通常要考虑舒适的范围。
所以,因为儿童通常具有小于成人的瞳距,并且因为3D差异与瞳距相关,因此儿童观察到的差异通常大于成人观察到的差异。
此外,在观看者的头部向一侧倾斜时,瞳距的水平分量同样减小,会引起由观看者察觉到的差异中的改变。因此,在观看者的头部向一侧倾斜时,产生的差异效果会被放大,潜在地会引起观看者不适。在极端情况下,观看者的头部可以向一侧倾斜90°,诸如在躺下时,此时,眼镜无法有效使光透过至观看者的对应的眼睛,3D观看体验可能无效。
除了过大的差异,眼镜的过度倾斜会进一步导致颜色偏移和其他观看限制。
无论是使用主动快门式眼镜还是偏振滤光眼镜,在观看3D视频内容的过程中当眼镜实质维持水平时,依据眼镜系统的3D视频内容的观看者才会观察到优化的3D观看体验。由此,存在用于通过确定3D眼镜的方位来优化3D内容观看体验、以及通知用户眼镜的过度倾斜或者补偿倾斜的差异的3D眼镜、系统和方法的需求。
发明内容
根据上述限制,以下公开该领域的一些改进。
在一个实施例中,公开了一种用于向在二维显示器前方的用户提供察觉到的3D视频内容的3D眼镜系统,包括一个或多个3D眼镜和视频内容装置。系统适于确定3D眼镜的方位,并向用户产生通知,由此,用户可以纠正3D眼镜的方位,以优化3D内容观看体验。在一些实施例中,系统还可以适于从3D模式向2D模式切换,以减轻由于过度倾斜导致的用户不适。
在一些实施例中,系统适于确定3D眼镜的方位,并调节3D差异以补偿头部倾斜。
在另一个实施例中,用于3D眼镜系统中的3D眼镜包括用于确定3D眼镜的方位的倾斜传感器。在一些实施例中,3D眼镜还包括:用于通知用户过度倾斜的元件。3D眼镜可以配置为主动快门式眼镜或者偏振滤光眼镜。
在又一个实施例中,一种向用户指示3D眼镜的方位的方法提供了优化的3D内容观看体验,该方法包含:(i)确定3D眼镜的方位,以及(ii)根据3D眼镜的方位向用户提供通知。
附图说明
图1示出使用快门式眼镜观看3D立体视频背后的原理。
图2示出3D眼镜系统内的用于观看3D立体视频的观看范围。
图3示出适于使用与视频内容装置耦合的照相机来确定3D眼镜的方位的3D眼镜系统。
图4a和图4b示出用于通知用户3D眼镜的非优化方位、即头部过度倾斜的各种屏幕通知。
图5a和图5b示出包括用于3D眼镜的方位的本地确定的倾斜传感器的3D眼镜。
图6a和图6b示出图5的3D眼镜还包括用于给用户提供物理的指示的振动马达。
图7a和图7b示出图5的3D眼镜还包括用于给用户提供音频指示的扬声器。
图8是用于给用户指示3D眼镜的方位以优化3D内容观看体验的方法的示意图。
图9是用于优化3D内容观看体验的通常方法的示意图。
具体实施方式
针对当戴着3D眼镜时倾斜头部导致的观看不适、过大的差异、颜色偏移、以及其他3D观看限制,公开用于优化用户的3D观看体验的若干实施例。
在通常的实施例中,确定3D眼镜的方位,并向用户提供通知以指示3D眼镜的非优化方位,即过度倾斜。就此而言,因而引导用户纠正该3D眼镜的方位,使得观看不适被最小化或者消除。
在一些实施例中,如果头部倾斜过度,例如当向一侧与水平倾斜九十度(90°)地躺下,或者如果头部倾斜发生了延长的持续时间,则3D视频内容可以从3D切换至2D模式。就此而言,观看者(诸如儿童)可能不会识别由于不适当地观看3D视频内容而导致的不适,直至体验到强烈的与不适相关症状的发作,因此有利的是识别出对于不适的潜在可能,并在一定条件下使系统适应以切换至2D模式,以减轻观看者的不适。
在下面的段落中,参考附图公开了若干优选的实施例。这些例子并非打算在范围上是详尽无遗的,而是对发明可以被付诸实践的一些实施例的例示。本领域的技术人员可以想到一些变换,且该变换落入所附的权利要求中提出的本发明的精神和范围内。
适于辅助用户进行3D视频内容的优化观看的3D眼镜系统。
在一些实施例中,3D眼镜系统适于辅助用户进行3D视频内容的优化观看。系统通常适于确定用户戴着的3D眼镜的方位,并至少当方位对于观看3D模式内的内容为非优化时,向用户通知该方位。系统通常包括:视频内容装置、以及适于经由定时信号(同步信号)与视频内容装置进行通信的快门式眼镜。如上所述,同步信号通常是红外线,但可以是蓝牙、RF或者其他无线信号的形式。
本申请中通用地使用术语“视频内容装置”来说明任何用来观看3D视频内容的装置,包含:电视机(TV);机顶盒,诸如蓝光和其他媒体播放器;计算机;视频监视器;以及其他相关装置。尽管视频内容装置自身可以包括显示器,但本申请中在一些实施例中,视频内容装置可以是与显示器通信的单独的装置,诸如经由HDMI或者类似的线缆连接至平板液晶显示器(LCD)的机顶盒。
快门式眼镜还包括用于右眼的快门、和用于左眼的快门。快门式眼镜适于依据与显示在显示器上的2D视频同步的定时信号,执行相应的快门的打开和关闭操作。
在一些替代的实施例中,偏振滤光眼镜用来观看3D视频内容,系统包括一个或多个偏振滤光眼镜和视频内容装置。偏振滤光眼镜通常包括适于置于左眼上的第一偏振透镜、和适于置于观看者的右眼上的第二偏振透镜。第二透镜的第二偏振与第一透镜的偏振正交。
本申请中实施例的重要性在于系统通常适于确定观看者戴着的3D眼镜的方位。
本申请中使用术语“3D眼镜”来通常说明3D眼镜的所有类型,包含快门式眼镜和偏振滤光眼镜,因为本申请中很多实施例可以在以下任一中付诸实践:偏振透镜或者快门式眼镜系统。
在一些实施例中,照相机与视频内容装置耦合,并适于检测从用户的眼睛发出的红外线。就此而言,由于可以推断出眼镜正被戴在用户的眼睛上,与照相机耦合的视频内容装置适于检测3D眼镜的方位。红外线照相机是广泛可用的,并且本领域的技术人员可以将简单的算法编程到视频内容装置中或者与其连接的单独的装置中,使得检测到的红外线可以被分析以确定用户的眼睛的方位,并由此确定位于其上的3D眼镜的方位。
在一些其他实施例中,3D眼镜可以包括一个或多个红外线二极管、或者其他发光二极管,这些二极管例如当来自用户的眼睛的红外线由于经由3D眼镜的透镜的滤波而减小或者无法检测时,可以被与视频内容装置耦合的照相机检测到。
在其他实施例中,3D眼镜可以包括用于确定3D眼镜的方位的倾斜传感器。倾斜传感器可以包含加速度计(诸如三轴加速度计)或者陀螺仪(gyro)。就此而言,倾斜传感器可以附在3D眼镜上或者嵌入3D眼镜内。包括倾斜传感器的3D眼镜因此适于确定其方位。然而,由于方位是本地确定,或者在3D眼镜内确定的,眼镜还可以适于经由本申请中称为“方位信号”的信号向视频内容装置传输方位。
对于快门式眼镜系统,方位信号可以使用已知的复用方法(诸如时间复用、频率复用、以及其他信号组合方法)与同步信号组合。
替代地,关于一般意义上的3D眼镜,方位信号可以使用红外线、蓝牙或者无线电频率(RF)传输与任何同步信号分开传输,优选的是在一个唯一的频带上以避免在同步信号存在的情况下的信号干扰。
此外,方位信号可以经由导线或者线缆被传输至视频内容装置。
重要的是,注意,在由于3D眼镜的方位在视频内容装置确定,3D眼镜的方位被照相机确定的实施例中,方位信号不是必须的。因此,在3D眼镜的方位在视频内容装置处确定的实施例中,由于在这些实施例中用于向视频内容装置传输3D眼镜的方位的方位信号不是必须的,因此可以节约电力。
图3示出适于辅助用户进行3D视频内容的优化观看的系统。系统包括视频内容装置和观看者戴着的3D眼镜。视频内容装置包括具有与其耦合的照相机4的机顶盒3。机顶盒进一步由线缆5连接至LCD显示器1。观看者戴着3D眼镜2。照相机4适于检测来自观看者的眼睛、或者位于3D眼镜上的一个或多个红外线LED的红外线6。通过红外线检测,系统适于确定3D眼镜的方位。系统还适于连续监视并确定与观看者的当前观看状态相关的倾斜量。重要的是,注意,系统的3D眼镜可以包括快门式眼镜或者偏振滤光眼镜。
另外本申请中实施例的重要性在于,系统进一步适于通知用户3D眼镜的方位。考虑到用户的观看体验,3D眼镜的方位的通知可以通常限于当方位对于观看3D视频内容是非优化的情形。就此而言,可以确定并在系统内编程最大倾斜角,例如最大倾斜角可以与水平成30°。如果3D眼镜的方位超过最大倾斜角,则可以产生通知,以通知用户,并引导校正。
在一些实施例中,通知可以采取视觉指示符的形式,包含:图标、图像、文本、动画、或者其他类似的用于在显示器屏幕上显示的指示符。视觉指示符通常指示3D眼镜的方位。
在一些实施例中,视觉指示符可以包括用于在显示器的最小侵入性部(诸如显示器的角落)内进行呈现的小图标。替代地,视觉指示符可以是文本框内的文本的形式,以通知用户当前3D眼镜的方位。本领域的技术人员可以想到无数替代的变化,使得在显示器上呈现视觉指示符以通知用户眼镜的非优化方位。
图4a和图4b示出在显示器上呈现的视觉指示符的各种例子,以通知用户3D眼镜的非优化方位、即过度倾斜。参考图4a,显示器1适于显示3D视频内容和视觉指示符。视觉指示符包括图标10a,用于向用户指示过度倾斜。图标10a在显示器的右下角呈现,以最小地妨碍视频内容。类似地,图4b示出显示器1包括文本框10b视觉指示符,用于向用户指示过度倾斜。由于其显得大于图标1并且扩展以覆盖与图标10a相比更多的显示器的面积,所例示的文本框提供了更明显的警告。当然,取决于制造商偏好,大图标可以被形成以产生更明显的视觉指示符。
在一些实施例中,考虑到观看者的体验,可以仅在第一次提供了侵入性较小的指示符(诸如图4a的图标10a)后,才呈现更明显的警告(诸如图4b示出的文本框10b)来进行显示。就此而言,根据制造商偏好,第一指示符可以侵入性较小,并且接下来的视觉指示符通常可以更明显。
用于3D视频内容的优化的观看的3D眼镜
尽管照相机可以如上所述被用来检测3D眼镜的方位,一些其他实施例可以实现类似的结果,其中,3D眼镜包括用于确定3D眼镜的方位的倾斜传感器。
倾斜传感器可以包括加速度计(例如三轴加速度计)、陀螺仪、或者它们的组合。此外,3D眼镜可以包括用于确定其方位的两个或者更多个倾斜传感器。就此而言,3D眼镜适于基于由倾斜传感器提供的数据来本地确定方位。如上所述,方位数据可以使用红外线、蓝牙、RF、或者类似的无线方法传输到视频内容装置。替代地,可以使用线缆来将3D眼镜与视频内容装置耦合,尽管代价是增加的导线和对移植性的相关约束。
在下面的实施例中,重要的是注意快门式眼镜通常包括向主动液晶快门供电的电源,诸如电池。由此,快门式眼镜对于包括倾斜传感器或者其他要求供电的电子元件的实施例,可以是优选的工具。然而,本领域的技术人员应该理解,偏振透镜眼镜可以配备有电源,使得下面的倾斜传感器实施例可以被付诸实践,尽管会有附加的费用。
图5a示出包括嵌入快门式眼镜框51内的一对液晶快门52a、52b的快门式眼镜50的透视图。快门式眼镜还包括适于检测快门式眼镜的方位的倾斜传感器53。图5b示出图5a的快门式眼镜的前视图。
除了倾斜传感器,快门式眼镜可以还包括一个或多个振动马达、扬声器、或者其他能够向用户指示警报的指示元件。
一个或多个振动马达可以适于当方位非优化,即当快门式眼镜的方位超过最大倾斜角(过度倾斜)时,对快门式眼镜产生振动。
图6a示出图5的快门式眼镜的透视图,快门式眼镜50包括框51和设置在框内的一对液晶快门52a、52b。倾斜传感器53附在快门式眼镜上以确定其方位。振动马达含在快门式眼镜框内,或者与其附接。马达适于在眼镜的方位超过最大可接受倾斜的情况下提供振动通知。振动马达60可以包括任何振动马达,但是,通常可以包含旋转轴马达60b、和附接至其电枢的补偿砝码60a。图6b进一步示出根据图6a的实施例的快门式眼镜的前视图。
类似地,一个或多个扬声器可以适于产生可听音(audible tone),向用户指示相对于快门式眼镜的方位存在过度倾斜。
图7a示出图5的快门式眼镜的透视图,快门式眼镜50包括框51和设置在框内的一对液晶快门52a、52b。倾斜传感器53附接至快门式眼镜以确定其方位。扬声器70嵌入快门式眼镜框内,或者附接至快门式眼镜框。扬声器70适于产生可听音,以指示由倾斜传感器测量的过度倾斜。
在一些其他实施例中,可以产生振动和可听音这两者,其中,3D眼镜包括至少一个振动马达和至少一个扬声器。
用于指示3D眼镜的方位的方法
根据本申请中的各种实施例,公开了向用户指示用于优化3D内容观看体验的3D眼镜的方位的方法,该方法包括:(i)确定3D眼镜的方位,以及(ii)根据3D眼镜的方位向用户提供通知。
方法还可以包括:提供可接受用3D眼镜观看3D视频内容的最大倾斜角。就此而言,视频内容装置可以编程有最大倾斜角,并适于如果3D眼镜倾斜得超过最大倾斜角,则通知用户。替代地,眼镜可以包括:用于对最大倾斜角编程的存储器,由此,眼镜可以本地确定倾斜,评估倾斜以确定是否需要通知,以及如果检测到过度倾斜,则向用户产生通知。此外,视频内容装置可以适于如果3D眼镜倾斜得超过最大倾斜角保持了长的持续时间(例如大于若干分钟),从3D观看模式切换至2D观看模式。
在一些实施例中,可以使用照相机来实现确定3D眼镜的方位,其中,该方法还包括:使用红外线照相机来检测红外线;以及根据检测到的红外线来估计3D眼镜的方位。红外线可以直接从用户的眼睛检测到,其中,根据检测到的红外线确定用户的左右眼的位置。
此外,确定3D眼镜的方位可以替代地包括:使用照相机、例如红外线照相机来检测第一和第二发光二极管;并根据检测到的第一和第二发光二极管的位置估计3D眼镜的方位。例如,第一和第二发光二极管可以是红外线发光二极管。
此外,确定3D眼镜的方位可以替代地包括:使用附接至3D眼镜,或者嵌入3D眼镜内的倾斜传感器来确定其方位。就此而言,方位信号进一步与如上所述的视频内容装置进行通信。
在一些实施例中,根据3D眼镜的方位向用户提供通知还包括:在显示器上显示视觉指示符,所述视觉指示符指示3D眼镜的方位。
在一些实施例中,理想的可以提供一种3D眼镜方位的恒定指示符。因此,可以呈现在显示器上的动画的视觉指示符包括眼镜图标,该眼镜图标适于绕二维轴旋转,以指示3D眼镜的实时和连续方位。就此而言,随着用户倾斜其头部,显示的动画的视觉指示符根据检测到的3D眼镜的方位而旋转。
此外,根据3D眼镜的方位向用户提供通知还可以包括:产生用于向用户指示3D眼镜的非优化方位的3D眼镜的一个或多个振动或者可听音。
除了指示3D眼镜的方位,视频内容装置可以被配置为例如,在3D眼镜的方位超过最大倾斜角的情况下,或者在3D眼镜保持倾斜了延长时间期间(诸如例如若干分钟)的情况下,将3D视频内容切换至2D模式。
图8示出根据本申请说明的各种实施例的方法的通常概要。根据图8所示的实施例,系统和3D眼镜中的至少一个适于确定3D眼镜的方位。可以使用照相机检测来自用户的眼睛的红外线,或者来自一个或多个红外线(IR)LED的红外线来确定3D眼镜的方位。替代地,可以使用倾斜传感器来指示3D眼镜的方位。通过使用照相机或者倾斜传感器,眼镜的倾斜被确定,并与阈值、或者最大倾斜角比较。如果检测到的3D眼镜的倾斜超过最大倾斜角,则向用户提供通知。通知可以包括一个或者多个视觉指示符、眼镜内的振动、或者可听音,使得通知用户过度倾斜,并引导用户做出校正。通过重复图8说明的步骤来连续监视3D眼镜的过度倾斜。
用于倾斜补偿的差异调节
3D视频系统通常假定成人用户的平均两眼间距为约3英寸。随着用户的头部向一侧倾斜,用户的两眼间距的水平分量减小。因为减小的两眼间距,3D图像中的差异会被显著放大的。
因此,在另一个实施例中,系统适于通过与检测到的倾斜量相关地减小视频系列中左右图像间的视差,来补偿图像差异。重要的是,注意,将用户的两眼间距的水平分量考虑进来,因为视频图像中的视差是纯水平的。
例如,30°的头部倾斜的水平分量会产生用户的两眼距离的约二分之一,30°的正弦。由于减小的两眼间距,图像中的视差也类似地减小约一半。因此,察觉到的差异也被减小以补偿倾斜。简单的算法可以考虑倾斜角或者3D眼镜的方位、用户的平均两眼间距、以及图像间的视差,使得可以调节图像间的视差以提供在3D观看过程中察觉到的差异的补偿。
就此而言,系统可以编程有算法,用于与检测到的3D眼镜的倾斜相关地调节视差和最终差异。此外,系统适于响应于3D眼镜的方位来动态调节3D差异,因而在发生头部倾斜的情况下补偿差异。
可以提供该鉴于头部倾斜的差异的补偿以代替通知用户纠正眼镜的方位。替代地,除了用户通知外,可以提供差异补偿。
图9示出图8说明的本发明的方法的通常概要,其中增加了调节视差以补偿头部倾斜的选项,使得基于3D眼镜的位置和方位观看到优化差异。就此而言,方法可以包括:确定3D眼镜系统内的一个或多个3D眼镜的方位;以及通知用户过度倾斜或者调节图像视差以补偿3D内容的差异中的至少一个。

Claims (20)

1.一种适于辅助用户进行3D视频内容的优化观看的系统,该系统包括:
视频内容装置;以及
3D眼镜,适于对二维显示器上的3D内容进行立体观看,
所述视频内容装置和所述3D眼镜中的至少一个适于确定所述3D眼镜的方位;并且
所述视频内容装置和所述3D眼镜中的至少一个适于通知用户所述3D眼镜的过度倾斜或者调节图像差异以补偿倾斜。
2.如权利要求1所述的系统,其中,所述视频内容装置从由机顶盒、电视机、计算机和显示监视器构成的组中选择。
3.如权利要求1所述的系统,所述3D眼镜还包括:倾斜传感器,用于确定所述3D眼镜的方位。
4.如权利要求3所述的系统,所述倾斜传感器包括陀螺仪、加速度计、或者陀螺仪与加速度计的组合。
5.如权利要求1所述的系统,所述3D眼镜还包括:振动马达,适于通知用户所述3D眼镜的过度倾斜。
6.如权利要求1所述的系统,所述3D眼镜还包括:扬声器,适于通知用户所述3D眼镜的过度倾斜。
7.如权利要求1所述的系统,所述视频内容装置还包括:红外线照相机,适于检测红外线来确定所述3D眼镜的方位。
8.如权利要求1所述的系统,其中,所述视频内容装置适于在所述显示器上显示视觉指示符,所述视觉指示符指示所述3D眼镜的方位。
9.如权利要求1所述的系统,所述视频内容装置被配置为:如果所述3D眼镜的方位超过最大倾斜角,则从3D呈现模式切换至2D呈现模式。
10.一种用于优化3D视频内容的观看的3D眼镜,包括:
快门式眼镜和偏振滤光眼镜中的一个,所述快门式眼镜包括:用于右眼的快门和用于左眼的快门,依据与在显示器上显示的2D视频同步的定时信号,执行打开和关闭快门的操作;所述偏振滤光眼镜包括:用于左眼的第一偏振透镜和用于右眼的第二偏振透镜,其中,第二偏振透镜的偏振与第一偏振透镜的偏振正交,其特征在于,所述3D眼镜还包括:
倾斜传感器,用于确定所述3D眼镜的方位;以及
一个或多个振动马达或者扬声器,适于通知用户所述3D眼镜的过度倾斜。
11.如权利要求10所述的3D眼镜,包括快门式眼镜,所述快门式眼镜适于与视频内容装置耦合,并传输所述快门式眼镜的方位。
12.如权利要求10所述的3D眼镜,所述倾斜传感器包括陀螺仪、加速度计、或者陀螺仪与加速度计的组合。
13.如权利要求10所述的3D眼镜,包括:振动马达,适于振动以指示用户所述3D眼镜的过度倾斜。
14.如权利要求10所述的3D眼镜,包括:扬声器,适于提供可听音以指示用户所述3D眼镜的过度倾斜。
15.一种用于向用户指示3D眼镜的方位以优化3D内容观看体验的方法,该方法包括:
确定3D眼镜的方位;以及
根据3D眼镜的方位向用户提供通知的步骤和调节图像差异以补偿倾斜的步骤中的至少一个步骤。
16.如权利要求15所述的方法,还包括:
提供用于3D内容的可接受观看的最大倾斜角;以及
如果所述3D眼镜超过所述最大倾斜角,则从3D模式切换至2D模式。
17.如权利要求15所述的方法,所述确定3D眼镜的方位还包括:
使用红外线照相机来检测从用户的左眼和右眼发出的红外线或者从所述3D眼镜发出的红外线;以及
根据检测到的红外线估计所述3D眼镜的方位。
18.如权利要求15所述的方法,所述确定3D眼镜的方位还包括:
使用倾斜传感器来确定3D眼镜的方位;以及
向视频内容装置传输所述3D眼镜的方位。
19.如权利要求15所述的方法,根据3D眼镜的方位向用户提供通知还包括:
在显示器上显示视觉指示符,所述视觉指示符指示所述3D眼镜的方位。
20.如权利要求15所述的方法,根据3D眼镜的方位向用户提供通知还包括:
产生用于向用户指示所述3D眼镜的过度倾斜的所述3D眼镜的振动和可听音中的一个或多个。
CN2011800471038A 2010-11-08 2011-10-14 用于3d视频内容的优化观看的3d眼镜、系统以及方法 Pending CN103141108A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US41100710P 2010-11-08 2010-11-08
US61/411,007 2010-11-08
US13/252,093 US20120113235A1 (en) 2010-11-08 2011-10-03 3d glasses, systems, and methods for optimized viewing of 3d video content
US13/252,093 2011-10-03
PCT/US2011/056332 WO2012064461A1 (en) 2010-11-08 2011-10-14 3d glasses, system, and method for optimized viewing of 3d video content

Publications (1)

Publication Number Publication Date
CN103141108A true CN103141108A (zh) 2013-06-05

Family

ID=46019267

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011800471038A Pending CN103141108A (zh) 2010-11-08 2011-10-14 用于3d视频内容的优化观看的3d眼镜、系统以及方法

Country Status (5)

Country Link
US (1) US20120113235A1 (zh)
EP (1) EP2622869A4 (zh)
JP (1) JP2014504051A (zh)
CN (1) CN103141108A (zh)
WO (1) WO2012064461A1 (zh)

Families Citing this family (61)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9124877B1 (en) * 2004-10-21 2015-09-01 Try Tech Llc Methods for acquiring stereoscopic images of a location
US11228753B1 (en) 2006-12-28 2022-01-18 Robert Edwin Douglas Method and apparatus for performing stereoscopic zooming on a head display unit
US9473766B2 (en) * 2006-12-28 2016-10-18 David Byron Douglas Method and apparatus for three dimensional viewing of images
US11275242B1 (en) 2006-12-28 2022-03-15 Tipping Point Medical Images, Llc Method and apparatus for performing stereoscopic rotation of a volume on a head display unit
US11315307B1 (en) 2006-12-28 2022-04-26 Tipping Point Medical Images, Llc Method and apparatus for performing rotating viewpoints using a head display unit
US10795457B2 (en) 2006-12-28 2020-10-06 D3D Technologies, Inc. Interactive 3D cursor
US20150295923A1 (en) * 2007-03-28 2015-10-15 Autodesk, Inc. Environment based switching between two dimensions and three dimensions
KR101764733B1 (ko) * 2011-02-14 2017-08-04 삼성전자주식회사 3d 안경 및 이의 전원 및 페어링 제어 방법
JP5889536B2 (ja) * 2011-03-08 2016-03-22 ローム株式会社 制御システム、制御装置、映像システム、眼鏡、および映像表示装置
US8887206B2 (en) * 2011-06-09 2014-11-11 Cstereo3D, Llc Device and method for rendering and delivering 3-D content
US8813109B2 (en) * 2011-10-21 2014-08-19 The Nielsen Company (Us), Llc Methods and apparatus to identify exposure to 3D media presentations
US9106903B2 (en) * 2011-11-18 2015-08-11 Zspace, Inc. Head tracking eyewear system
US8713590B2 (en) 2012-02-21 2014-04-29 The Nielsen Company (Us), Llc Methods and apparatus to identify exposure to 3D media presentations
JP6202856B2 (ja) * 2012-06-21 2017-09-27 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム
US11228805B2 (en) * 2013-03-15 2022-01-18 Dish Technologies Llc Customized commercial metrics and presentation via integrated virtual environment devices
CN105247860B (zh) * 2013-06-05 2017-12-19 索尼公司 图像处理设备及图像处理方法
CN103353667B (zh) 2013-06-28 2015-10-21 北京智谷睿拓技术服务有限公司 成像调整设备及方法
CN103353677B (zh) 2013-06-28 2015-03-11 北京智谷睿拓技术服务有限公司 成像装置及方法
CN105230013A (zh) * 2013-06-28 2016-01-06 汤姆逊许可公司 具有位置感测和适配数量的视图的多视图三维显示系统和方法
CN103353663B (zh) 2013-06-28 2016-08-10 北京智谷睿拓技术服务有限公司 成像调整装置及方法
CN103431840B (zh) 2013-07-31 2016-01-20 北京智谷睿拓技术服务有限公司 眼睛光学参数检测系统及方法
CN103424891B (zh) 2013-07-31 2014-12-17 北京智谷睿拓技术服务有限公司 成像装置及方法
US9736467B2 (en) * 2013-08-05 2017-08-15 Samsung Display Co., Ltd. Apparatus and method for adjusting stereoscopic images in response to head roll
CN103431980A (zh) 2013-08-22 2013-12-11 北京智谷睿拓技术服务有限公司 视力保护成像系统及方法
CN103439801B (zh) 2013-08-22 2016-10-26 北京智谷睿拓技术服务有限公司 视力保护成像装置及方法
CN103500331B (zh) * 2013-08-30 2017-11-10 北京智谷睿拓技术服务有限公司 提醒方法及装置
CN103605208B (zh) 2013-08-30 2016-09-28 北京智谷睿拓技术服务有限公司 内容投射系统及方法
CN103558909B (zh) 2013-10-10 2017-03-29 北京智谷睿拓技术服务有限公司 交互投射显示方法及交互投射显示系统
US10372202B1 (en) 2014-01-20 2019-08-06 Ca, Inc. Positioning a cursor on a display monitor based on a user's eye-gaze position
US9965030B2 (en) * 2014-07-31 2018-05-08 Samsung Electronics Co., Ltd. Wearable glasses and method of displaying image via the wearable glasses
EP3062142B1 (en) 2015-02-26 2018-10-03 Nokia Technologies OY Apparatus for a near-eye display
WO2017087537A1 (en) 2015-11-16 2017-05-26 Google Inc. Stabilization based on accelerometer data
US10650552B2 (en) 2016-12-29 2020-05-12 Magic Leap, Inc. Systems and methods for augmented reality
EP3343267B1 (en) 2016-12-30 2024-01-24 Magic Leap, Inc. Polychromatic light out-coupling apparatus, near-eye displays comprising the same, and method of out-coupling polychromatic light
US10578870B2 (en) 2017-07-26 2020-03-03 Magic Leap, Inc. Exit pupil expander
US10735707B2 (en) 2017-08-15 2020-08-04 International Business Machines Corporation Generating three-dimensional imagery
CN116990888A (zh) 2017-12-10 2023-11-03 奇跃公司 光波导上的抗反射涂层
US11187923B2 (en) 2017-12-20 2021-11-30 Magic Leap, Inc. Insert for augmented reality viewing device
WO2019178567A1 (en) 2018-03-15 2019-09-19 Magic Leap, Inc. Image correction due to deformation of components of a viewing device
US11030438B2 (en) * 2018-03-20 2021-06-08 Johnson & Johnson Vision Care, Inc. Devices having system for reducing the impact of near distance viewing on myopia onset and/or myopia progression
EP3803488A4 (en) 2018-05-30 2021-07-28 Magic Leap, Inc. COMPACT VARIABLE FOCUS CONFIGURATIONS
WO2019231850A1 (en) 2018-05-31 2019-12-05 Magic Leap, Inc. Radar head pose localization
WO2019236495A1 (en) 2018-06-05 2019-12-12 Magic Leap, Inc. Homography transformation matrices based temperature calibration of a viewing system
JP7421505B2 (ja) 2018-06-08 2024-01-24 マジック リープ, インコーポレイテッド 自動化された表面選択設置およびコンテンツ配向設置を用いた拡張現実ビューア
WO2020010097A1 (en) 2018-07-02 2020-01-09 Magic Leap, Inc. Pixel intensity modulation using modifying gain values
US11856479B2 (en) 2018-07-03 2023-12-26 Magic Leap, Inc. Systems and methods for virtual and augmented reality along a route with markers
WO2020010226A1 (en) 2018-07-03 2020-01-09 Magic Leap, Inc. Systems and methods for virtual and augmented reality
WO2020023543A1 (en) 2018-07-24 2020-01-30 Magic Leap, Inc. Viewing device with dust seal integration
EP4270016A3 (en) 2018-07-24 2024-02-07 Magic Leap, Inc. Temperature dependent calibration of movement detection devices
US11112862B2 (en) * 2018-08-02 2021-09-07 Magic Leap, Inc. Viewing system with interpupillary distance compensation based on head motion
WO2020028191A1 (en) 2018-08-03 2020-02-06 Magic Leap, Inc. Unfused pose-based drift correction of a fused pose of a totem in a user interaction system
CN112955073A (zh) 2018-08-22 2021-06-11 奇跃公司 患者观察系统
JP7472127B2 (ja) 2018-11-16 2024-04-22 マジック リープ, インコーポレイテッド 画像鮮明度を維持するための画像サイズによってトリガされる明確化
US11212509B2 (en) 2018-12-20 2021-12-28 Snap Inc. Flexible eyewear device with dual cameras for generating stereoscopic images
EP4369151A2 (en) 2019-02-06 2024-05-15 Magic Leap, Inc. Target intent-based clock speed determination and adjustment to limit total heat generated by multiple processors
JP2022523852A (ja) 2019-03-12 2022-04-26 マジック リープ, インコーポレイテッド 第1および第2の拡張現実ビューア間でのローカルコンテンツの位置合わせ
US11445232B2 (en) 2019-05-01 2022-09-13 Magic Leap, Inc. Content provisioning system and method
JP2022542363A (ja) 2019-07-26 2022-10-03 マジック リープ, インコーポレイテッド 拡張現実のためのシステムおよび方法
JP2023502927A (ja) 2019-11-15 2023-01-26 マジック リープ, インコーポレイテッド 外科手術環境において使用するための視認システム
US10965931B1 (en) * 2019-12-06 2021-03-30 Snap Inc. Sensor misalignment compensation
US11538214B2 (en) * 2020-11-09 2022-12-27 Meta Platforms Technologies, Llc Systems and methods for displaying stereoscopic rendered image data captured from multiple perspectives

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1749808A (zh) * 2004-09-17 2006-03-22 精工爱普生株式会社 立体图像显示装置
US20090296044A1 (en) * 2003-10-09 2009-12-03 Howell Thomas A Eyewear supporting electrical components and apparatus therefor
CN101690247A (zh) * 2007-07-04 2010-03-31 稻叶稔 立体电视系统和立体电视显像机和立体影像观赏用眼镜
CN101762880A (zh) * 2008-12-24 2010-06-30 三星电子株式会社 立体图像显示装置及其控制方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3443293B2 (ja) * 1997-08-29 2003-09-02 三洋電機株式会社 立体表示装置
JP4149037B2 (ja) * 1998-06-04 2008-09-10 オリンパス株式会社 映像システム
JP2001296501A (ja) * 2000-04-12 2001-10-26 Nippon Hoso Kyokai <Nhk> 立体画像表示制御方法および装置
US8159526B2 (en) * 2004-09-17 2012-04-17 Seiko Epson Corporation Stereoscopic image display system
US8269822B2 (en) * 2007-04-03 2012-09-18 Sony Computer Entertainment America, LLC Display viewing system and methods for optimizing display view based on active tracking
JP2010054778A (ja) * 2008-08-28 2010-03-11 Seiko Epson Corp 偏光メガネ
KR101296900B1 (ko) * 2009-01-07 2013-08-14 엘지디스플레이 주식회사 입체 영상의 뷰 제어방법과 이를 이용한 입체 영상표시장치
JP2010204823A (ja) * 2009-03-02 2010-09-16 Hitachi Information & Control Solutions Ltd 視線認識装置
KR20110071410A (ko) * 2009-12-21 2011-06-29 삼성전자주식회사 3차원 안경 및 이에 적용되는 3차원 안경 제어방법 및 전원 제어 방법
JP4802276B2 (ja) * 2009-12-25 2011-10-26 株式会社東芝 映像表示装置、方法、及び位置判定装置
US20110199469A1 (en) * 2010-02-15 2011-08-18 Gallagher Andrew C Detection and display of stereo images
KR101598926B1 (ko) * 2010-04-16 2016-03-02 삼성전자 주식회사 셔터 안경
JP5465083B2 (ja) * 2010-05-10 2014-04-09 三菱電機株式会社 立体映像表示装置及び立体映像表示システム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090296044A1 (en) * 2003-10-09 2009-12-03 Howell Thomas A Eyewear supporting electrical components and apparatus therefor
CN1749808A (zh) * 2004-09-17 2006-03-22 精工爱普生株式会社 立体图像显示装置
CN101690247A (zh) * 2007-07-04 2010-03-31 稻叶稔 立体电视系统和立体电视显像机和立体影像观赏用眼镜
CN101762880A (zh) * 2008-12-24 2010-06-30 三星电子株式会社 立体图像显示装置及其控制方法

Also Published As

Publication number Publication date
WO2012064461A1 (en) 2012-05-18
EP2622869A4 (en) 2014-10-29
US20120113235A1 (en) 2012-05-10
EP2622869A1 (en) 2013-08-07
JP2014504051A (ja) 2014-02-13

Similar Documents

Publication Publication Date Title
CN103141108A (zh) 用于3d视频内容的优化观看的3d眼镜、系统以及方法
US20120190439A1 (en) Multiple simultaneous programs on a display
EP2378780B1 (en) Shutter glasses and display apparatus
US20110193945A1 (en) Image display device, image display viewing system and image display method
JP2012141461A (ja) ヘッド・マウント・ディスプレイ
WO2010092823A1 (ja) 表示制御装置
JP2012518317A (ja) 3d観察者メタデータの転送
AU2010272074A1 (en) Video playback device
US20110248859A1 (en) Method of providing 3d image and 3d display apparatus using the same
US20120194657A1 (en) Shutter glasses, and electronic apparatus and method for adjusting ambient brightness received by shutter glasses operative under two-dimensional image viewing mode
US20120019636A1 (en) Stereoscopic 3D Images and Video on a Non-Stereoscopic 3D Capable Screen
US9124883B2 (en) 3D shutter glasses synchronization signal through stereo headphone wires
CN102970567A (zh) 视频处理装置以及视频处理方法
JP2011248254A (ja) 映像表示システム、それを実現する映像表示装置、傾き検出装置および映像表示方法
JP4951079B2 (ja) 立体表示装置、映像処理装置
EP2421271B1 (en) Display apparatus and method for applying on screen display (OSD) thereto
JP5500645B2 (ja) 映像調整装置、テレビ受信装置及びプログラム
US10841569B2 (en) Stereoscopic display device
US20130222536A1 (en) 3d glasses, 3d image display apparatus and a control method thereof
US9237334B2 (en) Method and device for controlling subtitle applied to display apparatus
US20120081523A1 (en) 2d/3d compatible display system which automatically switches operational modes
JP5426593B2 (ja) 映像処理装置、映像処理方法および立体映像表示装置
KR101856156B1 (ko) 시차 조정 장치와, 시차 조정 장치를 포함하는 표시장치 및 그 구동방법
JP5417356B2 (ja) 映像処理装置、映像処理方法および立体映像表示装置
US20130050436A1 (en) Method and system for reproduction of 3d image contents

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C05 Deemed withdrawal (patent law before 1993)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130605