CN104581126A - 一种头戴显示设备的画面显示处理方法和处理装置 - Google Patents
一种头戴显示设备的画面显示处理方法和处理装置 Download PDFInfo
- Publication number
- CN104581126A CN104581126A CN201410784674.5A CN201410784674A CN104581126A CN 104581126 A CN104581126 A CN 104581126A CN 201410784674 A CN201410784674 A CN 201410784674A CN 104581126 A CN104581126 A CN 104581126A
- Authority
- CN
- China
- Prior art keywords
- pupil
- user
- display device
- image
- display frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
本发明公开了一种头戴显示设备的画面显示处理方法和装置,该方法包括:实时采集用户瞳孔的转动位置信息;根据用户瞳孔的转动位置信息对应调整头戴显示设备的显示画面,使得用户瞳孔的视线始终对准头戴显示设备的显示画面的中心。本发明的这种头戴显示设备的画面显示处理方法能够改变头戴装置显示画面位置,使画面不再局限于某固定位置,而是随着用户瞳孔的转动而相应的移动,这样用户在使用头戴显示设备观看音视频过程中能够获得更好的视觉效果,从而提升了用户使用体验。
Description
技术领域
本发明涉及头戴显示设备技术领域,具体涉及一种头戴显示设备的画面显示处理方法和处理装置。
背景技术
随着科技的进步,影音设备都希望能够尽可能的模拟真实场景。头戴显示设备作为近年来新兴的影音设备,取得了很好的发展前景,头戴显示设备的特点是能够将两个不同角度拍摄的二维画面分屏显示,通过后端处理分别成像在用户的双眼前,从而使用户产生身临其境的3D真实感。头戴显示设备作为一种新型的光电显示系统,在很多领域都有着广泛的应用。但是现有的头戴显示设备在用户观看的过程中显示画面只能局限于特定的位置,这大大影响了用户观看的视觉感受,制约了头戴显示设备的发展,降低了头戴显示设备的竞争力。
发明内容
本发明提供了一种头戴显示设备的画面显示处理方法和处理装置,旨在进一步提升用户使用头戴显示设备的视觉感受和用户使用体验。
为达到上述目的,本发明的技术方案是这样实现的:
根据本发明的一个方面,提供了一种头戴显示设备的画面显示处理方法,该方法包括:
实时采集用户瞳孔的转动位置信息;
根据用户瞳孔的转动位置信息对应调整头戴显示设备的显示画面,使得用户瞳孔的视线始终对准头戴显示设备的显示画面的中心。
可选地,实时采集用户瞳孔的转动位置信息包括:
在头戴显示设备的目镜上设置探测器;
探测器实时检测用户瞳孔的转动位置信息,将用户瞳孔的转动位置信息传输给头戴显示设备的微处理器。
可选地,实时采集用户瞳孔的转位置信息包括:
在头戴显示设备的目镜上设置摄像头,通过摄像头实时拍摄用户瞳孔并将拍摄到的图像传输给头戴式显示设备的微处理器;
头戴式显示设备的微处理器接收并对图像进行处理,确定出用户瞳孔的转动位置信息。
可选地,头戴式显示设备的微处理器接收并对图像进行处理,确定出用户瞳孔的转动位置信息包括:
对摄像头拍摄到的每张图像进行二值化处理;
扫描二值化处理后的每张图像的横向中线的亮度值,得到每张图像的横向亮度线;
扫描二值化处理后的每张图像的纵向中线的亮度值,得到每张图像的纵向亮度线;
根据每张图像的横向亮度线和纵向亮度线确定出用户瞳孔的中心;
通过比较摄像头连续拍摄过程中拍摄到的每相邻两张图像确定出的用户瞳孔的中心,确定出包含用户瞳孔转动的距离和角度的转动位置信息。
可选地,根据用户瞳孔的转动位置信息对应调整头戴显示设备的显示画面,使得用户瞳孔的视线始终对准头戴显示设备的显示画面的中心包括:
初始化头戴显示设备的显示画面,记录用户瞳孔正视所述显示画面时的位置作为用户瞳孔移动的参考原点,并根据用户瞳孔视线与所述头戴显示设备显示画面的垂直关系,确定出所述头戴显示设备的显示画面中心的参考原点;
根据用户瞳孔转动的距离和角度,计算出头戴式显示设备的显示画面的中心按照与用户瞳孔转动的角度相同的角度应当移动的移动量;
根据头戴式显示设备的显示画面的中心移动的移动量将显示画面上所有的像素点均移动同样的移动量。
根据本发明的另一个方面,提供了一种头戴显示设备的画面显示处理装置,装置包括:瞳孔转动位置采集单元和显示画面调整单元;
瞳孔转动位置采集单元,用于实时采集用户瞳孔的转动位置信息;
显示画面调整单元,用于根据用户瞳孔的转动位置信息对应调整头戴显示设备的显示画面,使得用户瞳孔的视线始终对准头戴显示设备的显示画面的中心。
可选地,瞳孔转动位置采集单元具体用于根据在头戴显示设备的目镜上设置的探测器,通过探测器实时检测用户瞳孔的转动位置信息,将用户瞳孔的转动位置信息传输给头戴显示设备的微处理器。
可选地,瞳孔转动位置采集单元具体用于:根据在头戴显示设备的目镜上设置的摄像头,通过摄像头实时拍摄用户瞳孔并将拍摄到的图像传输给头戴式显示设备的微处理器;
由头戴式显示设备的微处理器接收并对图像进行处理,确定出用户瞳孔的转动位置信息。
可选地,瞳孔转动位置采集单元还用于:对摄像头拍摄到的每张图像进行二值化处理;
扫描二值化处理后的每张图像的横向中线的亮度值,得到每张图像的横向亮度线;
扫描二值化处理后的每张图像的纵向中线的亮度值,得到每张图像的纵向亮度线;
根据每张图像的横向亮度线和纵向亮度线确定出用户瞳孔的中心;
通过比较摄像头连续拍摄过程中拍摄到的每相邻两张图像确定出的用户瞳孔的中心,确定出包含用户瞳孔转动的距离和角度的转动位置信息。
可选地,显示画面调整单元具体用于:初始化头戴显示设备的显示画面,记录用户瞳孔正视显示画面时的位置作为用户瞳孔移动的参考原点,并根据用户瞳孔视线与头戴显示设备显示画面的垂直关系,确定出头戴显示设备的显示画面中心的参考原点;
根据瞳孔转动位置采集单元确定出的用户瞳孔转动的距离和角度,计算出头戴式显示设备的显示画面的中心按照与用户瞳孔转动的角度相同的角度应当移动的移动量;
根据头戴式显示设备的显示画面的中心移动的移动量将显示画面上所有的像素点均移动同样的移动量。
本发明的这种头戴显示设备的画面显示处理方法,通过实时探测用户瞳孔的转动位置信息,并根据该瞳孔的转动位置信息对应调整显示画面,使得头戴显示设备显示的画面随用户视线移动,提高了头戴显示设备显示画面中心与用户瞳孔之间的对准精度,进而提升了用户使用头戴显示设备观看的视觉感受。
附图说明
图1是头戴显示设备的基本光学结构示意图;
图2是本发明一个实施例提供的一种头戴显示设备的画面显示处理方法的流程图;
图3是是本发明一个实施例提供的一种头戴显示设备的画面显示处理方法的流程示意图;
图4是本发明一个实施例提供的探测器探测到的人眼图像;
图5是本发明一个实施例提供的人眼图像二值化后的图像示意图;
图6是本发明一个实施例提供的人眼图像二值化后的图像的横向中线扫描图;
图7是本发明一个实施例提供的人眼图像二值化后的图像的纵向中线扫描图;
图8是本发明一个实施例提供的初始化时用户瞳孔正视头戴显示设备显示画面中心位置示意图;
图9是本发明一个实施例提供的用户瞳孔移动到某位置时头戴显示设备显示画面应当移动的移动量;
图10是本发明一个实施例提供的用户瞳孔与头戴显示设备显示画面位移关系的位置关系示意图;
图11本发明一个实施例提供的用户瞳孔与头戴显示设备显示画面移动的俯视位置关系示意图。
具体实施方式
本发明的核心思想是:针对现有的头戴显示设备显示画面局限于固定的位置,显示画面中心与用户瞳孔对准精度差进而影响用户观看时的视觉感受的问题,提出一种应用于头戴显示设备的画面显示处理方法,通过实时探测用户瞳孔的转动位置信息,并根据用户瞳孔转动位置信息实时调整头戴显示设备显示画面使得用户瞳孔的视线始终对准头戴显示设备的显示画面的中心,即实现显示画面追踪用户瞳孔的效果,当用户瞳孔发生转动时,头戴显示设备的显示画面也随着用户瞳孔的转动而移动到相应的位置保证了用户瞳孔与显示画面的对准精度,从而提高了头戴显示设备的用户使用体验和竞争力。
图1是头戴显示设备的基本光学结构示意图,参见图1,现有的头戴显示设备的基本光学结构分为两部分:显示器110、目镜120,头戴显示设备工作时,显示器110发出的光线经过目镜120成像后为用户的眼睛所接收。
图2是本发明的本发明一个实施例提供的一种头戴显示设备的画面显示处理方法的流程图,参见图2,本发明的这种头戴显示设备显示画面处理方法包括:
步骤S210,实时采集用户瞳孔的转动位置信息;
步骤S220,根据用户瞳孔的转动位置信息对应调整头戴显示设备的显示画面,使得用户瞳孔的视线始终对准头戴显示设备的显示画面的中心。
本发明一个实施例的这种头戴显示设备的画面显示处理方法,通过实时探测用户瞳孔的转动位置信息,并根据用户瞳孔转动位置信息实时调整头戴显示设备显示画面使得用户瞳孔的视线始终对准头戴显示设备的显示画面的中心,改善了用户在观看时的感受从而提高了头戴显示设备的用户使用体验。
图3是是本发明一个实施例提供的一种头戴显示设备的画面显示处理方法的流程示意图,参见图3,本发明一个实施例的这种头戴显示设备画面显示处理方法具体可以如下步骤:
步骤310,在目镜上设置探测器;
步骤320,实时探测用户瞳孔动态;
步骤330,得到用户瞳孔的转动位置信息;
步骤340,计算显示画面应当移动的移动量;
步骤350,移动显示画面使之正对用户瞳孔视线。
其中,在(头戴显示设备的)目镜上设置探测器,该探测器可以是一种光线探测器或者其他机械的探测器,当探测器为光线探测器时,通过光线探测器实时探测用户眼睛的光线强度,确定光线强度最弱的位置即为用户瞳孔的位置,根据用户瞳孔的动态将得到的用户瞳孔转动的包含方向和距离的位置信息发送给头戴显示设备的处理器。头戴显示设备的处理器根据光线探测器传送的用户瞳孔转动位置信息计算头戴显示画面应当移动的移动量,并根据计算结果调整头戴显示设备的显示画面使之与用户瞳孔对齐,也就是使得用户瞳孔的视线始终对准头戴显示设备的显示画面的中心,实现了显示画面随着用户瞳孔的转动而实时移动的效果,大大提升了用户使用头戴显示设备观看的视觉感受。
在本实施例中,还可以在头戴显示设备的目镜上设置摄像头等摄像拍照设备,实时拍摄用户瞳孔的照片,利用图像捕捉法,对摄像头连续拍摄过程中拍摄到的每相邻两张图片的进行比较根据比较结果确定出用户瞳孔的转动位置信息。然后将瞳孔的转动位置信息发送给处理器,由处理器对头戴显示设备的显示画面进行调整。
下面结合图4-图11对这种头戴显示设备的显示画面处理方法进行详细的说明,图4是本发明一个实施例提供的探测器探测到的人眼图像;图5是本发明一个实施例提供的人眼图像二值化后的图像示意图;图6是本发明一个实施例提供的人眼图像二值化后的图像的横向中线扫描图;图7是本发明一个实施例提供的人眼图像二值化后的图像的纵向中线扫描图;图8是本发明一个实施例提供的初始化时用户瞳孔正视头戴显示设备显示画面中心的位置示意图;图9是本发明一个实施例提供的用户瞳孔移动到某位置时头戴显示设备显示画面应当移动的移动量;图10是本发明一个实施例提供的用户瞳孔与头戴显示设备显示画面位移关系的位置关系示意图;图11本发明一个实施例提供的用户瞳孔与头戴显示设备显示画面移动的俯视位置关系示意图。该头戴显示设备的显示画面处理方法包括:
第一步,通过设置在头戴显示设备的目镜上的摄像头对人眼进行实时拍摄图像,得到如图4所示的人眼图像。
第二步,对图4所示的图像进行二值化处理,得到图5所示的二值化后的人眼图像。
其中,对人眼图像进行二值化处理就是将人眼图像上的像素点的灰度值设置为0或1,也就是将整个图像呈现出明显的黑白效果。得到的黑白图像中,黑色区域集中的位置即为用户瞳孔所在的位置。
第三步,确定出用户瞳孔中心所在的位置。具体做法是:扫描图5所示的人眼图像二值化处理后的图像的横向中线上的亮度值,得到人眼图像的横向亮度线如图6所示。以及扫描图5所示的人眼图像二值化处理后的图像的纵向中线上的亮度值,得人眼图像的纵向亮度线如图7所示。结合图6和图7,可以确定出横向280-800像素范围、纵向390-730像素范围处为瞳孔。则用户瞳孔中心O在人眼所在平面构成的平面直角坐标系中的位置坐标为:x=540像素((800-280)/2+280),y=560像素((730-390)/2+390),且用户瞳孔转动的角度θ的值可以根据用户瞳孔的坐标计算出即tanθ=y/x。将摄像头拍摄的每相邻两张图像确定出的用户瞳孔中心进行比较,通过实时的探测计算,即可得到用户瞳孔中心O的转动距离及角度θ的变化值。
第四步,初始化头戴显示设备的显示画面,记录用户瞳孔正视所述显示画面时的位置作为用户瞳孔移动的参考原点,并根据用户瞳孔视线与所述头戴显示设备显示画面的垂直关系,确定出所述头戴显示设备的显示画面中心的参考原点;在用户瞳孔没有发生转动时,将用户瞳孔的中心正对头戴显示设备的显示画面的正中央,即使得用户瞳孔的视线对准头戴显示设备的显示画面的中心。
如图8所示,以显示画面的中心A为坐标原点(0,0),以显示画面的长度方向x和宽度方向y为坐标轴构建平面直角坐标系,设头戴显示设备显示屏的有效尺寸为2x*2y,则显示画面四个端点的坐标值分别为:E点的坐标值(x,y),F点的坐标值(-x,y),M点的坐标值(-x,-y),N点的坐标值(x,-y)。
在用户瞳孔发生转动时,头戴显示设备显示画面的中心点A对应的也会在显示画面所在的平面发生移动。如图9所示,头戴显示画面的中心B点的位置坐标值移动了(Δx,Δy)。根据显示画面中心B点的移动量可以确定出移动后四个端点所在位置坐标值分别为:E点的坐标值(x+Δx,y+Δy),F点的坐标值(-x+Δx,y+Δy)M点的坐标值(-x+Δx,-y+Δy),N点的坐标值(x+Δx,-y+Δy)。
第五步,根据用户瞳孔转动的距离和角度,计算出头戴式显示设备的显示画面的中心按照与用户瞳孔转动的角度相同的角度应当移动的移动量。计算显示画面中心的移动量(Δx,Δy),如图10所示人眼和显示画面移动的具体位置关系示意图,图11为人眼与显示画面移动的俯视位置关系图。在图10和图11中,a面为头戴显示显示设备的显示画面所在的平面,b面为用户瞳孔所在的平面。设定显示画面中心A移动的方向与人眼球(用户瞳孔O点)移动方向相同,即∠DOC=∠θ,而显示设备的显示屏与人眼的距离在系统中是确定的。设OA=d且OA⊥a面,人眼平面b与显示画面所在的平面a也可看作近似平行,即AB//OD,则头戴显示设备显示画面中心移动(A点→B点)的相对位置与用户瞳孔中心转动(O点→D点)的位置关系符合相似三角形的关系。
根据第三步中确定出的瞳孔的转动距离OD=ΔR以及三角形相似的原理,则显示画面中心点A的移动距离为
其中,r为用户瞳孔的半径,是一个常量,通常人眼球的半径r在20.5mm左右。d为用户瞳孔到显示画面的距离,通常这个距离也是固定的,可以看作是一个常量。ΔR是用户瞳孔的转动距离由第三步计算得到。
通过上面的公式可以计算出显示画面中心点的移动距离AB,再根据显示画面中心的移动距离AB以及移动的方向角度θ的值可以计算出显示画面中心应移动到的坐标位置(△x,△y),移动量△x和△y的计算公式如下:
Δx=AB×cosθ;
Δy=AB×sinθ;
第六步,根据头戴式显示设备的显示画面的中心移动的移动量将显示画面上所有的像素点均移动同样的移动量。在计算得到移动量△x和△y的值后也就确定出了显示画面中心A点→B点的移动量,之后可利用头戴显示设备的后端处理程序,将显示画面的所有像素点坐标均同样移动量△x和△y,即可以达到头戴显示设备的显示画面实时跟踪用户瞳孔移动的效果。
经过上述步骤该头戴显示设备的画面显示处理方法通过实时探测用户瞳孔的转动位置信息,并根据该瞳孔的转动位置信息对应调整显示画面,使得头戴显示设备显示的画面随用户视线移动。提高了头戴显示设备显示画面中心与用户瞳孔之间的对准精度,进而提升了用户使用头戴显示设备观看的视觉感受。
在本发明一个实施例中,头戴显示设备为沉浸式大屏的头戴显示设备或者为微显示的头戴显示设备。而且,头戴显示设备的头戴部也可以是独立的,或者需与电脑、手机、游戏机等外部设备连接使用。所有的头戴显示设备都属于本发明的这种画面显示处理方法的应用范围。
本发明还提供了一种头戴显示设备的画面显示处理装置,该装置包括:瞳孔转动位置采集单元和显示画面调整单元;
瞳孔转动位置采集单元,用于实时采集用户瞳孔的转动位置信息;
显示画面调整单元,用于根据用户瞳孔的转动位置信息对应调整头戴显示设备的显示画面,使得用户瞳孔的视线始终对准头戴显示设备的显示画面的中心。
在本实施例中,瞳孔转动位置采集单元具体用于:根据在头戴显示设备的目镜上设置的探测器;
通过探测器实时检测用户瞳孔的转动位置信息,将用户瞳孔的转动位置信息传输给头戴显示设备的微处理器。
在本实施例中,瞳孔转动位置采集单元具体用于:根据在头戴显示设备的目镜上设置的摄像头,通过摄像头实时拍摄用户瞳孔并将拍摄到的图像传输给头戴式显示设备的微处理器;
由头戴式显示设备的微处理器接收并对图像进行处理,确定出用户瞳孔的转动位置信息。
在本实施例中,瞳孔转动位置采集单元还用于:对摄像头拍摄到的每张图像进行二值化处理;
扫描二值化处理后的每张图像的横向中线的亮度值,得到每张图像的横向亮度线;
扫描二值化处理后的每张图像的纵向中线的亮度值,得到每张图像的纵向亮度线;
根据每张图像的横向亮度线和纵向亮度线确定出用户瞳孔的中心;
通过比较摄像头连续拍摄过程中拍摄到的每相邻两张图像确定出的用户瞳孔的中心,确定出包含用户瞳孔转动的距离和角度的转动位置信息。
在本实施例中,显示画面调整单元具体用于:初始化头戴显示设备的显示画面,记录用户瞳孔正视显示画面时的位置作为用户瞳孔移动的参考原点,并根据用户瞳孔视线与头戴显示设备显示画面的垂直关系,确定出头戴显示设备的显示画面中心的参考原点;
根据瞳孔转动位置采集单元确定出的用户瞳孔转动的距离和角度,计算出头戴式显示设备的显示画面的中心按照与用户瞳孔转动的角度相同的角度应当移动的移动量;
根据头戴式显示设备的显示画面的中心移动的移动量将显示画面上所有的像素点均移动同样的移动量。
需要说明的是,本发明一个实施例的这种头戴显示设备的画面显示处理装置是和上述头戴显示设备的画面显示处理方法部分对应的,因此,该头戴显示设备的画面显示处理装置的工作过程可以参见前述头戴显示设备的画面显示处理方法部分的相应说明,在此不再赘述。
综上所述,本发明的这种头戴显示设备的画面显示处理方法和装置,能够实时探测用户瞳孔的动态获得用户瞳孔的转动位置信息,并根据该用户瞳孔的转动位置信息对应调整头戴显示设备的显示画面,使头戴显示设备显示画面不再局限于某固定位置,提升了用户在使用头戴显示设备观看视频等图像过程中的使用体验。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。
Claims (10)
1.一种头戴显示设备的画面显示处理方法,其特征在于,该方法包括:
实时采集用户瞳孔的转动位置信息;
根据所述用户瞳孔的转动位置信息对应调整所述头戴显示设备的显示画面,使得用户瞳孔的视线始终对准所述头戴显示设备的显示画面的中心。
2.如权利要求1所述的方法,其特征在于,所述实时采集用户瞳孔的转动位置信息包括:
在所述头戴显示设备的目镜上设置探测器;
所述探测器实时检测用户瞳孔的转动位置信息,将所述用户瞳孔的转动位置信息传输给所述头戴显示设备的微处理器。
3.如权利要求1所述的方法,其特征在于,所述实时采集用户瞳孔的转位置信息包括:
在所述头戴显示设备的目镜上设置摄像头,通过摄像头实时拍摄用户瞳孔并将拍摄到的图像传输给所述头戴式显示设备的微处理器;
所述头戴式显示设备的微处理器接收并对所述图像进行处理,确定出用户瞳孔的转动位置信息。
4.如权利要求3所述的方法,其特征在于,所述头戴式显示设备的微处理器接收并对所述图像进行处理,确定出用户瞳孔的转动位置信息包括:
对所述摄像头拍摄到的每张图像进行二值化处理;
扫描二值化处理后的每张图像的横向中线的亮度值,得到每张图像的横向亮度线;
扫描二值化处理后的每张图像的纵向中线的亮度值,得到每张图像的纵向亮度线;
根据所述每张图像的横向亮度线和纵向亮度线确定出用户瞳孔的中心;
通过比较所述摄像头连续拍摄过程中拍摄到的每相邻两张图像确定出的用户瞳孔的中心,确定出包含用户瞳孔转动的距离和角度的转动位置信息。
5.如权利要求4所述的方法,其特征在于,所述根据所述用户瞳孔的转动位置信息对应调整所述头戴显示设备的显示画面,使得用户瞳孔的视线始终对准所述头戴显示设备的显示画面的中心包括:
初始化所述头戴显示设备的显示画面,记录用户瞳孔正视所述显示画面时的位置作为用户瞳孔移动的参考原点,并根据用户瞳孔视线与所述头戴显示设备显示画面的垂直关系,确定出所述头戴显示设备的显示画面中心的参考原点;
根据所述用户瞳孔转动的距离和角度,计算出所述头戴式显示设备的显示画面的中心按照与所述用户瞳孔转动的角度相同的角度应当移动的移动量;
根据所述头戴式显示设备的显示画面的中心移动的移动量将所述显示画面上所有的像素点均移动同样的移动量。
6.一种头戴显示设备的画面显示处理装置,其特征在于,所述装置包括:瞳孔转动位置采集单元和显示画面调整单元;
所述瞳孔转动位置采集单元,用于实时采集用户瞳孔的转动位置信息;
所述显示画面调整单元,用于根据所述用户瞳孔的转动位置信息对应调整所述头戴显示设备的显示画面,使得用户瞳孔的视线始终对准所述头戴显示设备的显示画面的中心。
7.如权利要求6所述的装置,其特征在于,所述瞳孔转动位置采集单元具体用于:根据在所述头戴显示设备的目镜上设置的探测器,通过探测器实时检测用户瞳孔的转动位置信息,将所述用户瞳孔的转动位置信息传输给所述头戴显示设备的微处理器。
8.如权利要求6所述的装置,其特征在于,所述瞳孔转动位置采集单元具体用于:根据在所述头戴显示设备的目镜上设置的摄像头,通过摄像头实时拍摄用户瞳孔并将拍摄到的图像传输给所述头戴式显示设备的微处理器;由所述头戴式显示设备的微处理器接收并对所述图像进行处理,确定出用户瞳孔的转动位置信息。
9.如权利要求8所述的装置,其特征在于,所述瞳孔转动位置采集单元还用于:对所述摄像头拍摄到的每张图像进行二值化处理;
扫描二值化处理后的每张图像的横向中线的亮度值,得到每张图像的横向亮度线;
扫描二值化处理后的每张图像的纵向中线的亮度值,得到每张图像的纵向亮度线;
根据所述每张图像的横向亮度线和纵向亮度线确定出用户瞳孔的中心;
通过比较所述摄像头连续拍摄过程中拍摄到的每相邻两张图像确定出的用户瞳孔的中心,确定出包含用户瞳孔转动的距离和角度的转动位置信息。
10.如权利要求9所述的装置,其特征在于,所述显示画面调整单元具体用于:
初始化所述头戴显示设备的显示画面,记录用户瞳孔正视所述显示画面时的位置作为用户瞳孔移动的参考原点,并根据用户瞳孔视线与所述头戴显示设备显示画面的垂直关系,确定出所述头戴显示设备的显示画面中心的参考原点;
根据所述瞳孔转动位置采集单元确定出的用户瞳孔转动的距离和角度,计算出所述头戴式显示设备的显示画面的中心按照与所述用户瞳孔转动的角度相同的角度应当移动的移动量;
根据所述头戴式显示设备的显示画面的中心移动的移动量将所述显示画面上所有的像素点均移动同样的移动量。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410784674.5A CN104581126A (zh) | 2014-12-16 | 2014-12-16 | 一种头戴显示设备的画面显示处理方法和处理装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410784674.5A CN104581126A (zh) | 2014-12-16 | 2014-12-16 | 一种头戴显示设备的画面显示处理方法和处理装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104581126A true CN104581126A (zh) | 2015-04-29 |
Family
ID=53096198
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410784674.5A Pending CN104581126A (zh) | 2014-12-16 | 2014-12-16 | 一种头戴显示设备的画面显示处理方法和处理装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104581126A (zh) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105930044A (zh) * | 2016-04-20 | 2016-09-07 | 乐视控股(北京)有限公司 | 一种显示页面定位的方法和系统 |
CN107272904A (zh) * | 2017-06-28 | 2017-10-20 | 联想(北京)有限公司 | 一种图像显示方法及电子设备 |
CN107462992A (zh) * | 2017-08-14 | 2017-12-12 | 深圳创维新世界科技有限公司 | 一种头戴显示设备的调节方法、装置及头戴显示设备 |
CN107506025A (zh) * | 2017-07-25 | 2017-12-22 | 北京小鸟看看科技有限公司 | 一种头戴显示设备的信息显示方法、装置及头戴显示设备 |
CN108700933A (zh) * | 2015-09-24 | 2018-10-23 | 托比股份公司 | 能够进行眼睛追踪的可穿戴设备 |
CN109857255A (zh) * | 2019-02-13 | 2019-06-07 | 京东方科技集团股份有限公司 | 一种显示参数调节方法、装置以及头戴显示设备 |
CN109901709A (zh) * | 2019-01-14 | 2019-06-18 | 北京七鑫易维信息技术有限公司 | 调节显示画面的方法、装置及vr设备 |
CN111417888A (zh) * | 2017-12-07 | 2020-07-14 | 深圳市柔宇科技有限公司 | 头戴式显示设备及其调节控制方法 |
CN114860063A (zh) * | 2021-02-03 | 2022-08-05 | 广州视享科技有限公司 | 头戴式显示设备的画面显示方法、装置、电子设备及介质 |
Citations (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5742264A (en) * | 1995-01-24 | 1998-04-21 | Matsushita Electric Industrial Co., Ltd. | Head-mounted display |
CN101067716A (zh) * | 2007-05-29 | 2007-11-07 | 南京航空航天大学 | 具有视线跟踪功能的增强现实自然交互式头盔 |
CN101072366A (zh) * | 2007-05-24 | 2007-11-14 | 上海大学 | 基于光场和双目视觉技术的自由立体显示系统和方法 |
CN101243693A (zh) * | 2005-08-17 | 2008-08-13 | 视瑞尔技术公司 | 用于实时探测及跟踪多个观察者眼睛的方法和电路布置 |
CN101489467A (zh) * | 2006-07-14 | 2009-07-22 | 松下电器产业株式会社 | 视线方向检测装置和视线方向检测方法 |
CN101795420A (zh) * | 2010-04-07 | 2010-08-04 | 昆山龙腾光电有限公司 | 立体图像显示系统及其控制方法 |
CN101895779A (zh) * | 2010-07-23 | 2010-11-24 | 深圳超多维光电子有限公司 | 立体显示方法和系统 |
CN102045577A (zh) * | 2010-09-27 | 2011-05-04 | 昆山龙腾光电有限公司 | 用于三维立体显示的观察者跟踪系统及三维立体显示系统 |
CN102289073A (zh) * | 2007-11-21 | 2011-12-21 | 松下电器产业株式会社 | 显示装置 |
CN102480631A (zh) * | 2010-11-29 | 2012-05-30 | 索尼公司 | 信息处理设备、信息处理方法和程序 |
CN102551655A (zh) * | 2010-12-13 | 2012-07-11 | 微软公司 | 3d凝视跟踪器 |
CN102591016A (zh) * | 2010-12-17 | 2012-07-18 | 微软公司 | 用于扩展现实显示的优化聚焦区 |
CN102611909A (zh) * | 2011-02-08 | 2012-07-25 | 微软公司 | 具有运动视差的三维显示 |
CN103380625A (zh) * | 2011-06-16 | 2013-10-30 | 松下电器产业株式会社 | 头戴式显示器及其位置偏差调整方法 |
CN103475893A (zh) * | 2013-09-13 | 2013-12-25 | 北京智谷睿拓技术服务有限公司 | 三维显示中对象的拾取装置及三维显示中对象的拾取方法 |
CN103546733A (zh) * | 2012-07-17 | 2014-01-29 | 联想(北京)有限公司 | 一种显示方法及电子设备 |
WO2014017348A1 (ja) * | 2012-07-24 | 2014-01-30 | ソニー株式会社 | 画像表示装置および画像表示方法 |
CN104067160A (zh) * | 2011-11-22 | 2014-09-24 | 谷歌公司 | 使用眼睛跟踪在显示屏中使图像内容居中的方法 |
CN104090371A (zh) * | 2014-06-19 | 2014-10-08 | 京东方科技集团股份有限公司 | 一种3d眼镜及3d显示系统 |
CN104094596A (zh) * | 2012-02-02 | 2014-10-08 | 韩国科学技术研究院 | 用于使观看区域平坦化并使动态串扰最小化的裸眼立体3d图像显示装置 |
-
2014
- 2014-12-16 CN CN201410784674.5A patent/CN104581126A/zh active Pending
Patent Citations (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5742264A (en) * | 1995-01-24 | 1998-04-21 | Matsushita Electric Industrial Co., Ltd. | Head-mounted display |
CN101243693A (zh) * | 2005-08-17 | 2008-08-13 | 视瑞尔技术公司 | 用于实时探测及跟踪多个观察者眼睛的方法和电路布置 |
CN101489467A (zh) * | 2006-07-14 | 2009-07-22 | 松下电器产业株式会社 | 视线方向检测装置和视线方向检测方法 |
CN101072366A (zh) * | 2007-05-24 | 2007-11-14 | 上海大学 | 基于光场和双目视觉技术的自由立体显示系统和方法 |
CN101067716A (zh) * | 2007-05-29 | 2007-11-07 | 南京航空航天大学 | 具有视线跟踪功能的增强现实自然交互式头盔 |
CN102289073A (zh) * | 2007-11-21 | 2011-12-21 | 松下电器产业株式会社 | 显示装置 |
CN101795420A (zh) * | 2010-04-07 | 2010-08-04 | 昆山龙腾光电有限公司 | 立体图像显示系统及其控制方法 |
CN101895779A (zh) * | 2010-07-23 | 2010-11-24 | 深圳超多维光电子有限公司 | 立体显示方法和系统 |
CN102045577A (zh) * | 2010-09-27 | 2011-05-04 | 昆山龙腾光电有限公司 | 用于三维立体显示的观察者跟踪系统及三维立体显示系统 |
CN102480631A (zh) * | 2010-11-29 | 2012-05-30 | 索尼公司 | 信息处理设备、信息处理方法和程序 |
CN102551655A (zh) * | 2010-12-13 | 2012-07-11 | 微软公司 | 3d凝视跟踪器 |
CN102591016A (zh) * | 2010-12-17 | 2012-07-18 | 微软公司 | 用于扩展现实显示的优化聚焦区 |
CN102611909A (zh) * | 2011-02-08 | 2012-07-25 | 微软公司 | 具有运动视差的三维显示 |
CN103380625A (zh) * | 2011-06-16 | 2013-10-30 | 松下电器产业株式会社 | 头戴式显示器及其位置偏差调整方法 |
CN104067160A (zh) * | 2011-11-22 | 2014-09-24 | 谷歌公司 | 使用眼睛跟踪在显示屏中使图像内容居中的方法 |
CN104094596A (zh) * | 2012-02-02 | 2014-10-08 | 韩国科学技术研究院 | 用于使观看区域平坦化并使动态串扰最小化的裸眼立体3d图像显示装置 |
CN103546733A (zh) * | 2012-07-17 | 2014-01-29 | 联想(北京)有限公司 | 一种显示方法及电子设备 |
WO2014017348A1 (ja) * | 2012-07-24 | 2014-01-30 | ソニー株式会社 | 画像表示装置および画像表示方法 |
CN103475893A (zh) * | 2013-09-13 | 2013-12-25 | 北京智谷睿拓技术服务有限公司 | 三维显示中对象的拾取装置及三维显示中对象的拾取方法 |
CN104090371A (zh) * | 2014-06-19 | 2014-10-08 | 京东方科技集团股份有限公司 | 一种3d眼镜及3d显示系统 |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108700933A (zh) * | 2015-09-24 | 2018-10-23 | 托比股份公司 | 能够进行眼睛追踪的可穿戴设备 |
CN114020156A (zh) * | 2015-09-24 | 2022-02-08 | 托比股份公司 | 能够进行眼睛追踪的可穿戴设备 |
CN105930044A (zh) * | 2016-04-20 | 2016-09-07 | 乐视控股(北京)有限公司 | 一种显示页面定位的方法和系统 |
CN107272904A (zh) * | 2017-06-28 | 2017-10-20 | 联想(北京)有限公司 | 一种图像显示方法及电子设备 |
CN107506025A (zh) * | 2017-07-25 | 2017-12-22 | 北京小鸟看看科技有限公司 | 一种头戴显示设备的信息显示方法、装置及头戴显示设备 |
CN107462992B (zh) * | 2017-08-14 | 2020-09-18 | 深圳创维新世界科技有限公司 | 一种头戴显示设备的调节方法、装置及头戴显示设备 |
CN107462992A (zh) * | 2017-08-14 | 2017-12-12 | 深圳创维新世界科技有限公司 | 一种头戴显示设备的调节方法、装置及头戴显示设备 |
CN111417888A (zh) * | 2017-12-07 | 2020-07-14 | 深圳市柔宇科技有限公司 | 头戴式显示设备及其调节控制方法 |
CN111417888B (zh) * | 2017-12-07 | 2022-09-20 | 深圳市柔宇科技股份有限公司 | 头戴式显示设备及其调节控制方法 |
CN109901709A (zh) * | 2019-01-14 | 2019-06-18 | 北京七鑫易维信息技术有限公司 | 调节显示画面的方法、装置及vr设备 |
CN109901709B (zh) * | 2019-01-14 | 2022-06-14 | 北京七鑫易维信息技术有限公司 | 调节显示画面的方法、装置及vr设备 |
CN109857255A (zh) * | 2019-02-13 | 2019-06-07 | 京东方科技集团股份有限公司 | 一种显示参数调节方法、装置以及头戴显示设备 |
CN114860063A (zh) * | 2021-02-03 | 2022-08-05 | 广州视享科技有限公司 | 头戴式显示设备的画面显示方法、装置、电子设备及介质 |
CN114860063B (zh) * | 2021-02-03 | 2024-03-15 | 广州视享科技有限公司 | 头戴式显示设备的画面显示方法、装置、电子设备及介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104581126A (zh) | 一种头戴显示设备的画面显示处理方法和处理装置 | |
CN107637060B (zh) | 相机装备和立体图像捕获 | |
US8848035B2 (en) | Device for generating three dimensional surface models of moving objects | |
WO2014197109A3 (en) | Infrared video display eyewear | |
CN104038740B (zh) | 一种遮蔽ptz监控摄像机隐私区域的方法及装置 | |
CN103207664A (zh) | 一种图像处理方法和设备 | |
CN109429060B (zh) | 瞳孔距离测量方法、可穿戴眼部设备及存储介质 | |
WO2015085956A1 (zh) | 一种基于投影图像的处理方法及装置 | |
TWI486631B (zh) | 頭戴式顯示裝置及其控制方法 | |
US9626564B2 (en) | System for enabling eye contact in electronic images | |
CN105554384A (zh) | 可穿戴设备及拍摄方法 | |
CN106780389B (zh) | 一种基于坐标转换的鱼眼图像校正方法及装置 | |
CN107368192B (zh) | Vr眼镜的实景观测方法及vr眼镜 | |
CN100569176C (zh) | 一种利用虚拟视靶的视-眼动反射检查方法 | |
CN104683786A (zh) | 裸眼3d设备的人眼跟踪方法及装置 | |
CN105809654A (zh) | 目标对象跟踪方法、装置和立体显示设备及方法 | |
CN108040242A (zh) | 一种双摄像头装置的倾斜角度的校正方法及装置 | |
JP2019047911A (ja) | ゴーグル型表示装置、視線検出方法及び視線検出システム | |
CN111988591A (zh) | 一种投影画面的平移方法、装置和投影设备 | |
WO2011136213A1 (ja) | 表示装置 | |
TWI519158B (zh) | 用於處理具有特色指示之合成視頻影像的方法 | |
KR101739768B1 (ko) | 스테레오 카메라와 협각 카메라를 이용한 원거리 시선 추적 시스템 | |
JP2012513604A5 (zh) | ||
CN102609152A (zh) | 大视场角图像检测电子白板图像采集方法及装置 | |
Tashiro et al. | TwinCam: Omni-directional stereoscopic live viewing camera for reducing motion blur during head rotation |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20150429 |