CN113534490B - 基于用户眼球追踪的立体显示装置及立体显示方法 - Google Patents
基于用户眼球追踪的立体显示装置及立体显示方法 Download PDFInfo
- Publication number
- CN113534490B CN113534490B CN202110864594.0A CN202110864594A CN113534490B CN 113534490 B CN113534490 B CN 113534490B CN 202110864594 A CN202110864594 A CN 202110864594A CN 113534490 B CN113534490 B CN 113534490B
- Authority
- CN
- China
- Prior art keywords
- display
- stereoscopic
- strip
- picture
- pixels
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
- G02B30/26—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
- G02B30/27—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving lenticular arrays
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
- G02B30/26—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
- G02B30/30—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving parallax barriers
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/50—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images the image being built up from image elements distributed over a 3D volume, e.g. voxels
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
本发明提供一种立体显示装置和立体显示方法。所述立体显示装置包括显示模组、光栅、人眼追踪模组及处理器,人眼追踪模组获取人眼空间位置,根据人眼中点空间位置对应光栅谷线和脊线投影,调整屏幕左右显示区域分割及左右立体画面分割,使得每一立体画面像素的主光路射出角度改变,对应生成立体视觉。本发明的有益之处在于,通过对人眼中点位置的实时追踪,直接调整视区分割线,使得3D串扰更低,数据计算更直观,立体视觉效果更好,通过将立体画面拆分RGB三色子像素立体画面,以子像素为单位计算显示区域分割和立体画面分割,提升了画面细腻度,降低了串扰。
Description
技术领域
本发明涉及立体显示领域,具体涉及一种立体显示装置及立体显示方法。
背景技术
现实世界是三维世界,人眼的左右眼观看同一个物体时分别看到一个图像,把左眼看到的图像定义为左画面,右眼看到的图像定义为右画面,左画面和右画面之间的偏差我们称之为视差(disparity/parallax)。正是这种视差,使人们能区别物体的远近,并获得立体感。
人的大脑将映入双眼的左画面和右画面,经视神经中枢的融合反射,以及视觉心理反应便可产生三维立体感觉。利用该原理,将两幅具有视差的图像通过显示器显示,将其分别送给左右眼,从而获得立体感。所述具有视差的两幅图像通过排图可在显示器上显示一个显示画面,具有视差的两幅图像通常是左画面和右画面,左画面单元为a,右画面单元为b。
裸眼立体显示的原理一般是通过分像功能的光栅将所述显示画面进行分光,从而使人眼的接收到具有视差的左画面和右画面,这样便实现了立体显示。
现有技术的裸眼立体显示装置有一个明显的缺陷,人眼只有在相对于所述显示画面的特定的位置时,用户才能获得最佳的立体感,即,左视图刚好进入用户的左眼,右视图刚好进入用户的右眼,如图1a所示,图1a是特定位置时双视点光栅立体显示示意图。当部分左视图和右视图同时进入左眼和右眼时,容易出现串扰,立体显示效果差,如图1b所示,图1b是双视点光栅立体显示出现串扰的示意图;当左视图全部进入右眼,右视图全部进入左眼时,出现逆视,立体显示完全错误,如图1c,图1c是双视点光栅立体显示出现逆视的示意图。在现实生活中,比如在手机贴上3D膜,也是一个立体显示装置,所述显示参数通常是确定的,用户只能在相对于手机上的特定的位置才能看到立体感最佳的画面;但是用户和手机之间的相对位置都可能随时变动,容易造成用户某些时刻相对手机不在特定的位置,那么用户看到的画面的立体感就不能始终保证到最佳,也容易出现串扰和逆视。
因此,有必要开发一种立体显示装置,可以动态追踪人眼位置进行实时立体显示,使得用户始终可以看到立体感最佳的画面。
发明内容
本发明为了解决上述用户相对于所述立体显示装置的位置变化时,用户看到的画面的立体感不能始终保证到最佳的技术问题,提供一种基于用户眼球追踪的立体显示装置及立体显示方法。
一种基于用户眼球追踪的立体显示装置,所述眼球包括左瞳孔和右瞳孔,所述立体显示装置包括显示模组,包括显示区域,所述显示区域包括阵列设置的多个显示像素单元;光栅,左画面和右画面合称立体画面,所述立体画面包含多个立体画面像素,所述立体画面像素交织融合排列并显示于所述显示像素单元,通过所述光栅成像到达人眼形成立体视觉;及人眼追踪模组,获取所述左瞳孔和所述右瞳孔的实时空间坐标;处理器,根据所述左瞳孔和所述右瞳孔的实时空间坐标调整所述立体画面并进行分割,使得每一立体画面像素主光路射出角度改变,对应生成立体视觉。
优选地,所述人眼追踪模组为前置摄像头,所述显示模组包括显示面板,所述显示面板包括阵列设置的多个像素单元,所述像素单元显示左画面或右画面,所述左画面和所述右画面交织融合排列,所述光栅为条状微透镜阵列,所述条状微透镜阵列包括平行设置的多个透镜单元,所述光栅与显示面板以光栅倾斜角度设置,所述光栅倾斜角度为光栅摆放方向与显示屏垂直方向的夹角。
优选地,所述处理器具体用于:所述处理器根据人眼相对移动位置,将所述显示区域中每一所述像素单元所显示的立体画面平行于所述光栅同向相对移动,所述移动方向与人眼运动方向相反,以调整所述立体画面像素主光路射出角度,所述主光路为所述像素通过透镜到达对应人眼的最短路径。
优选地,所述显示区域中每一所述像素单元所显示的立体画面平行于所述光栅相对移动,具体为:
左右瞳孔中点分别与所述光栅脊线和光栅谷线形成投影,在显示区域的投影线分别为脊线投影和谷线投影,所述脊线投影和所述谷线投影随所述人眼的移动而移动,从而划分得到的若干条状左右显示区域,按所述条状左右显示区域填充所述立体图左右画面像素。
优选地,所述处理器具体用于:根据显示区域所划分的条状左右显示区域数量,将左右画面按光栅倾斜角度分别裁剪成若干条状画面,且所述条状画面与所述条状左右显示区域数量一一对应,且具有几何映射关系;映射并复制所述条状画面像素至所述条状左右显示区域像素
优选地,所述处理器具体用于:
将所述条状画面分别拆解为三幅单色图像,包括:R单色图像、G单色图像和B单色图像,将所述各单色图像均缩放到与对应的显示区域尺寸相等,将显示缓存清零,其中,对任一单色条状图像进行裁剪条状区域并复制到对应显示区域,按如下步骤处理:根据显示区域RGB子像素不同物理位置,分别计算所述单色图像裁剪线并裁剪,跨线的像素,按面积比例将其亮度值分配给相邻的两条状区域像素,且每条单色条状图像均包含所有的跨线子像素;按叠加法将所述单色条状图像逐子像素值赋值到对应的左右条状显示区域缓存,若目标子像素有值,则与所述子像素值叠加;完成全部三色条状区域赋值后,刷新显示屏。
本申请还提供一种立体显示方法,应用于立体显示装置,其中,所述立体显示装置包括显示模组、光栅、所述显示模组,包括显示区域,所述显示区域包括阵列设置的多个显示像素单元;
所述光栅,左画面和右画面合称立体画面,所述立体画面包含多个立体画面像素,所述立体画面像素交织融合排列并显示于所述显示像素单元,通过所述光栅成像到达人眼形成立体视觉;
其特征在于,所述立体显示方法包括如下步骤:
获取人眼的左瞳孔和右瞳孔的实时空间坐标;
根据所述左瞳孔和所述右瞳孔的实时空间坐标调整所述立体画面并进行分割,使得每一立体画面像素主光路射出角度改变,对应生成立体视觉。
优选地,所述根据所述左瞳孔和所述右瞳孔的实时空间坐标调整所述立体画面并进行分割,使得每一立体画面像素主光路射出角度改变,包括:根据人眼相对移动位置,将所述显示区域中每一所述像素单元所显示的立体画面平行于所述光栅同向相对移动,所述移动方向与人眼运动方向相反,以调整所述立体画面像素主光路射出角度,所述主光路为所述像素通过透镜到达对应人眼的最短路径。
优选的,所述根据人眼相对移动位置,将所述显示区域中每一所述像素单元所显示的立体画面平行于所述光栅同向相对移动包括:左右瞳孔中点分别与所述光栅脊线和光栅谷线形成投影,在显示区域的投影线分别为脊线投影和谷线投影,所述脊线投影和所述谷线投影随所述人眼的移动而移动,从而划分得到的若干条状左右显示区域,按所述条状左右显示区域填充所述立体图左右画面像素。
优选的,所述按所述新条状左右区域填充所述立体图左右画面像素包括:
根据显示区域所划分的条状左右显示区域数量,将左右画面按光栅倾斜角度分别裁剪成若干条状画面,且所述条状画面与所述条状左右显示区域数量一一对应,且具有几何映射关系,映射并复制所述条状画面像素至所述条状左右显示区域像素,具体为:将所述条状画面分别拆解为三幅单色图像,包括:R单色图像、G单色图像和B单色图像,将所述各单色图像均缩放到与对应的显示区域尺寸相等,将显示缓存清零,其中,对任一单色条状图像进行裁剪条状区域并复制到对应显示区域,按如下步骤处理:根据显示区域RGB子像素不同物理位置,分别计算所述单色图像裁剪线并裁剪,跨线的像素,按面积比例将其亮度值分配给相邻的两条状区域像素,且每条单色条状图像均包含所有的跨线子像素;按叠加法将所述单色条状图像逐子像素值赋值到对应的左右条状显示区域缓存,若目标子像素有值,则与所述子像素值叠加;完成全部三色条状区域赋值后,刷新显示屏。
相对于现有技术,本发明的立体显示装置和立体显示方法,具有以下优点:
第一、根据所述左瞳孔和所述右瞳孔的空间坐标,实时调整立体显示画面,可以保证用户始终看到立体感最佳的画面;
第二、设置所述左瞳孔和所述右瞳孔的中线的辅助线,计算每一所述左画面和右画面像素单元的光线出射角度,计算便捷,而且避免所述左画面和右画面出现串扰;
第三、通过将立体画面拆分RGB三色子像素画面,以子像素为单位计算立体画面分割,提升了画面细腻度,降低了串扰。
附图说明
图1a是特定位置时双视点光栅立体显示示意图;
图1b是双视点光栅立体显示出现串扰的示意图;
图1c是双视点光栅立体显示出现逆视的示意图;
图2是本发明揭示的一种立体显示装置的立体结构示意图;
图3是图2所示沿III-III线的截面示意图;
图4是图3所示像素单元矩阵平面示意图;
图5是图1所示光栅的剖视图;
图6是用户的人脸示意图;
图7是三维坐标系的示意图;
图8是做所述左瞳孔和所述右瞳孔的中线示意图;
图9是做辅助面A的示意图;
图10是所述虚拟像素单元矩阵示意图;
图11为所述虚拟单元的主光路示意图;
图12为立体显示装置的立体显示方法;
图13为本发明提供的一种立体显示示意图。
具体实施方式
下面将对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
请参阅图2和图3,图2是本发明揭示的一种立体显示装置的立体结构示意图,图3是图2所示沿III-III线的截面示意图。所述立体显示装置10包括显示模组11、光栅13、人眼追踪模组15及处理器(图未示)。其中,在本实施例中,所述立体显示装置10为手机,人眼追踪模组15为前置摄像头。
所述显示模组11包括显示区域111,本实施例所述显示区域111为显示面板。所述显示区域111上形成一个显示平面α,所述显示平面α的长度方向为水平方向,所述显示平面α的宽度方向为竖直方向,所述竖直方向垂直于所述水平方向。所述显示平面α包括多个显示像素单元1110,所述多个显示像素单元1110呈WxH矩阵阵列,所述W为所述显示平面α水平方向的像素单元1110的个数,H为所述显示平面α竖直方向的像素单元1110的个数,如图4。本实施例中,所述显示像素单元1110显示左画面a或右画面b,所述左画面a和所述右画面b沿水平方向周期排列。所述左画面a和所述右画面b是具有视差的两个像素块1110。所述像素单元1110能被独立控制。
所述光栅13相对于所述显示平面α按照一定倾斜角度均匀周期排列。所述光栅13主要起到分像的功能,每一所述像素单元1110经过所述光栅13分像形成左画面和右画面,所述左画面和所述右画面合称立体画面,所述立体画面包含多个立体画面像素,所述立体画面像素交织融合排列并显示于所述显示像素单元,通过所述光栅成像到达人眼形成立体视觉。所述光栅13可以位于所述显示平面α的入光侧,也可以位于所述显示平面α的出光侧,在本实施例中,所述光栅13位于所述显示平面α的出光侧,即所述光栅13位于用户和所述显示平面α之间。所述光栅13为微透镜阵列,包括多个透镜单元131,且所述透镜单元131为等腰三角形透镜,包括第一出光面1311和第二出光面1313,如图5所示。实际应用中,所述光栅13可以为条状微透镜阵列,所述条状微透镜阵列包括平行设置的多个透镜单元,所述光栅与显示面板以光栅倾斜角度设置,所述光栅倾斜角度为光栅摆放方向与显示屏垂直方向的夹角。
用户20包括左瞳孔21和右瞳孔23,如图6所示。所述人眼追踪模组15获取所述左瞳孔21和所述右瞳孔23的实时空间坐标,实际应用中,所述人眼追踪模组15可以为前置摄像头。具体方法可以通过人脸识别技术,例如可以通过卷积神经网络来检测人脸所在的区域,并且在人脸所在的区域中,识别出用户的所述左瞳孔21和所述右瞳孔23,以确定出所述左瞳孔21和所述右瞳孔23与所述显示平面α的相对位置。其中,卷积神经网络是一种包含卷积计算且具有深度结构的前馈神经网络,是深度学习的代表算法之一,常用于图像识别中。
具体地,建立三维坐标系,所述坐标系的原点O为所述显示平面的中心点,所述坐标系的X轴为所述显示平面α的长度方向,所述坐标系的Y轴为所述显示平面α的宽度方向,所述坐标系的Z轴为垂直于所述显示平面α的方向,如图7所示。
所述左瞳孔21和所述右瞳孔23分别简化为L和R两个点,分别获得L和R的三维坐标L(xL,yL,zL)和R(xR,yR,zR)。所述三维坐标L(xL,yL,zL)和R(xR,yR,zR)不仅能显示用户20的眼睛与所述显示装置10的水平距离,还包括用户20的眼睛相对于所述显示装置10的上下的俯仰角度和左右的偏转角度,也就是本发明可以追踪用户眼睛相对于所述显示装置的三维空间位置信息。
所述处理器根据所述三维坐标L(xL,yL,zL)和R(xR,yR,zR)调整所述立体画面并进行分割,使得每一立体画面像素的主光路射出角度改变,对应生成立体画面。具体方法包括如下步骤:
设置所述三维坐标L(xL,yL,zL)和R(xR,yR,zR)的中线l;
根据所述中线l计算每一像素单元光线出射角度;
将每一所述像素单元1110划分为N个阵列设置的虚拟像素单元11100,N的取值范围为1至32;
根据所述光栅和所述显示区域的参数,逐一计算所述N个虚拟像素单元11100的主光路射出角度,生成所述虚拟像素单元11100的主光路射出角度校准表;
根据每一所述像素单元1110的光线出射角度,在上述校准表中找到接近的虚拟像素单元1110i;
根据所述虚拟像素单元1110i的参数对所述实际像素单元1110赋值;
对应生成立体画面。
其中,所述中线l具体确定方法为:
连接L(xL,yL,zL)和R(xR,yR,zR)形成线段RL,所述线段RL的中点为M(xm,ym,zm);
连接所述L(xL,yL,zL)与所述原点O(0,0,0)形成左视线LO,连接所述R(xR,yR,zR)与所述O(0,0,0)形成右视线RO,所述左视线LO和所述右视线RO确定一个视线平面β;
所述中线l经过所述M(xm,ym,zm)并垂直于所述视线平面β,如图8所示。
根据所述中线l计算每一像素单元1110的光线出射角度,以一左画面a的像素单元1110出射角度的计算为例,具体方法包括:
所述像素单元1110的坐标为D(xa,ya,0),所述坐标为所述像素单元的中心点;
根据所述中线l和所述像素单元1110坐标D(xa,ya,0)确定一个辅助左界面A,所述左界面A与所述显示平面α形成一个夹角θ,所述夹角θ即所述像素单元1110的左画面出射角度,如图9所示。为了所述夹角θ数据的精准,还可以进行误差校准。
本实施例的N取值为16,将所述像素单元1110分成16个虚拟像素单元11100,所述虚拟像素单元11100的矩阵为4x4,即水平方向的虚拟像素单元11100的个数为4,竖直方向的虚拟像素单元11100的个数为4,如图10所示。每一个虚拟像素单元11100的区域占所述像素单元1110的1/16。
其中,所述虚拟像素单元11100的主光路的射出角度为:光线通过所述虚拟像素单元11100的区域,再经过所述透镜单元131的出光面1311的中点之后光线的射出角度。当所述虚拟像素单元11100位于所述透镜单元131不同的相对位置时,所述虚拟像素单元11100的主光路射出角度不同,如图11所示。
根据所述光栅13的倾斜角度和所述出光面1311的折射率参数,计算出所述光线经过所述透镜单元131的偏转角度;再通过所述显示模组11的原有的光线出射点经过所述虚拟像素单元11100区域的射出角度,计算所述虚拟像素单元11100的主光路射出角度。以计算所述虚拟像素单元1110i的主光路出射角度为例,具体方法为:
所述显示模组11的原有的光线出射点经过所述虚拟像素单元1110i区域的射出角度,减去所述光线经过所述第一出射面的偏转角度,即可得到所述虚拟像素单元1110i的右画面b的主光路出射角度。
按此方法逐一计算得到所有的虚拟像素单元1110的主光路射出角度,生成所述虚拟像素单元11100的主光路射出角度校准表。
根据所述像素单元1110的出射角度在所述校准表中,找到所述虚拟像素单元1110i,其中,所述虚拟像素单元1110i的主光路出射角度等于所述像素单元1110的右画面b的出射角度,或者所述虚拟单元11100矩阵的16个虚拟像素单元11100中主光路出射角度最接近所述像素单元1110的右画面b的出射角度的是虚拟像素单元11100。所述虚拟像素单元1110i位于所述虚拟像素单元11100矩阵的水平第4行竖直第1列,如图11所示。
根据所述虚拟像素单元1110i的参数对所述实际像素单元1110赋值。以根据所述虚拟像素单元1110i的参数对所述实际像素单元1110赋值为例,实质即将所述实际像素单元1110的出射角度调整为适应所述人眼追踪模组11识别的人眼位置,具体方法为:
将所述实际像素单元1110缩小1/16,水平向右平移1/24,竖直向下平移1/24,再放大16倍还原,得到新的像素单元1110;
对所述新的像素单元1110的右画面b得边界进行处理:如果所述调整后的像素单元1110与其他新的像素单元1110出现重叠部分,重叠部分进行像素的叠加平均;如果所述新的像素单元1110与其他新的像素单元1110出现空白间隔部分,对所述空白间隔部分进行填黑。
按照上述方法逐一对所述实际像素单元1110赋值。
最后,由于每一像素单元1110均是根据所述人眼追踪模组15识别的人眼位置进行的调整显示,即每一所述左画面a和所述右画面b刚好分别进入用户10的所述左瞳孔21和所述右瞳孔23,对应生成立体画面。
所述立体显示装置10的立体显示方法包括,具体如图12所示:
步骤S01、获取所述左瞳孔21和所述右瞳孔23的实时空间坐标;
所述步骤S01的具体步骤见上述。
步骤S02、根据所述左瞳孔21和所述右瞳孔23的实时空间坐标调整所述立体显示画面并进行分割,使得每一立体画面像素主光路射出角度改变,对应生成立体视觉。
具体地,根据人眼相对移动位置,将所述显示区域中每一所述像素单元所显示的立体画面平行于所述光栅同向相对移动,所述移动方向与人眼运动方向相反,以调整所述立体画面像素主光路射出角度,所述主光路为所述像素通过透镜到达对应人眼的最短路径。
其中,将所述显示区域中每一所述像素单元所显示的立体画面平行于所述光栅同向相对移动,具体包括:如图13所示,为本申请实施例提供的一种立体显示示意图,其中,α为光栅倾斜角度。
左右瞳孔中点分别与所述光栅脊线和光栅谷线形成投影,在显示区域的投影线分别为脊线投影和谷线投影,所述脊线投影和所述光栅谷线投影随所述人眼的移动而移动,从而划分得到的若干条状左右显示区域,按所述条状左右显示区域填充所述立体图左右画面像素。
按所述条状左右显示区域填充所述立体图左右画面像素包括:根据显示区域所划分的条状左右显示区域数量,将左右画面按光栅倾斜角度分别裁剪成若干条状画面,且所述条状画面与所述条状左右显示区域数量一一对应,且具有几何映射关系,映射并复制所述条状画面像素至所述条状左右显示区域像素。
实际应用中,映射并复制所述条状画面像素到所述对应条状左右显示区域像素包括:将所述条状画面分别拆解为三幅单色图像,包括:R单色图像、G单色图像和B单色图像,将所述各单色图像均缩放到与对应的显示区域尺寸相等,将显示缓存清零,其中,对任一单色条状图像进行裁剪条状区域并复制到对应显示区域,按如下步骤处理:根据显示区域RGB子像素不同物理位置,分别计算所述单色图像裁剪线并裁剪,跨线的像素,按面积比例将其亮度值分配给相邻的两条状区域像素,且每条单色条状图像均包含所有的跨线子像素;按加法将所述单色条状图像逐子像素值赋值到对应的显示区域缓存,若目标子像素有值,则与所述子像素值相加;完成全部三色条状区域赋值后,刷新显示屏。
相对于现有技术,本发明的立体显示装置10和立体显示方法,具有以下优点:
第一、根据所述左瞳孔21和所述右瞳孔23的空间坐标,实时调整立体显示画面,可以保证用户20始终看到立体感最佳的画面;
第二、根据增加所述左瞳孔21和所述右瞳孔23的中线l的辅助线,计算每一所述左画面a和右画面b像素单元1110的光线出射角度,计算便捷,而且避免所述左画面和右画面出现串扰。
第三、通过将立体画面拆分RGB三色子像素画面,以子像素为单位计算立体画面分割,提升了画面细腻度,降低了串扰。
需要说明的是,本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过计算机程序来指令相关的硬件来完成,所述计算机程序可以存储于计算机可读存储介质中,所述存储介质可以包括但不限于:只读存储器(ROM,Read OnlyMemory)、随机存取存储器(RAM,Random Access Memory)、磁盘或光盘等。
以上所述仅为本发明的一个实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其它相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (5)
1.一种基于用户眼球追踪的立体显示装置,所述眼球包括左瞳孔和右瞳孔,其特征在于,所述立体显示装置包括:
显示模组,包括显示区域,所述显示区域包括阵列设置的多个显示像素单元;
光栅,左画面和右画面合称立体画面,所述立体画面包含多个立体画面像素,所述立体画面像素交织融合排列并显示于所述显示像素单元,通过所述光栅成像到达人眼形成立体视觉;及
人眼追踪模组,获取所述左瞳孔和所述右瞳孔的实时空间坐标;
处理器,根据所述左瞳孔和所述右瞳孔的实时空间坐标调整所述立体画面并进行分割,使得每一立体画面像素的主光路射出角度改变,对应生成立体视觉;
所述处理器还具体用于:
所述处理器根据人眼相对移动位置,将所述显示区域中每一所述像素单元所显示的立体画面平行于所述光栅同向相对移动,所述移动方向与人眼运动方向相反,以调整所述立体画面像素主光路射出角度,所述主光路为所述像素通过透镜到达对应人眼的最短路径;
所述显示区域中每一所述像素单元所显示的立体画面平行于所述光栅相对移动,具体为:
左右瞳孔中点分别与所述光栅脊线和光栅谷线形成投影,在显示区域的投影线分别为脊线投影和谷线投影,所述脊线投影和所述谷线投影随所述人眼的移动而移动,从而划分得到的若干条状左右显示区域,按所述条状左右显示区域填充所述立体图左右画面像素;
所述处理器还具体用于:
根据显示区域所划分的条状左右显示区域数量,将左右画面按光栅倾斜角度分别裁剪成若干条状画面,且所述条状画面与所述条状左右显示区域数量一一对应,且具有几何映射关系;映射并复制所述条状画面像素至所述条状左右显示区域像素。
2.根据权利要求1所述立体显示装置,其特征在于,所述人眼追踪模组为前置摄像头,所述显示模组包括显示面板,所述显示面板包括阵列设置的多个像素单元,所述像素单元显示左画面或右画面,所述左画面和所述右画面交织融合排列,所述光栅为条状微透镜阵列,所述条状微透镜阵列包括平行设置的多个透镜单元,所述光栅与显示面板以光栅倾斜角度设置,所述光栅倾斜角度为光栅摆放方向与显示屏垂直方向的夹角。
3.根据权利要求1所述的立体显示装置,其特征在于,
所述处理器具体用于:
将所述条状画面分别拆解为三幅单色图像,包括:R单色图像、G单色图像和B单色图像,将所述各单色图像均缩放到与对应的显示区域尺寸相等,将显示缓存清零,其中,对任一单色条状图像进行裁剪条状区域并复制到对应显示区域,按如下步骤处理:
根据显示区域RGB子像素不同物理位置,分别计算所述单色图像裁剪线并裁剪,跨线的像素,按面积比例将其亮度值分配给相邻的两条状区域像素,且每条单色条状图像均包含所有的跨线子像素;
按叠加法将所述单色条状图像逐子像素值赋值到对应的左右条状显示区域缓存,若目标子像素有值,则与所述子像素值叠加;
完成全部三色条状区域赋值后,刷新显示屏。
4.一种立体显示方法,应用于立体显示装置,所述立体显示装置包括显示模组、光栅,
所述显示模组,包括显示区域,所述显示区域包括阵列设置的多个显示像素单元;
所述光栅,左画面和右画面合称立体画面,所述立体画面包含多个立体画面像素,所述立体画面像素交织融合排列并显示于所述显示像素单元,通过所述光栅成像到达人眼形成立体视觉;
其特征在于,所述立体显示方法包括如下步骤:
获取人眼的左瞳孔和右瞳孔的实时空间坐标;
根据所述左瞳孔和所述右瞳孔的实时空间坐标调整所述立体画面并进行分割,使得每一立体画面像素主光路射出角度改变,对应生成立体视觉;
所述根据所述左瞳孔和所述右瞳孔的实时空间坐标调整所述立体画面并进行分割,使得每一立体画面像素主光路射出角度改变,包括:
根据人眼相对移动位置,将所述显示区域中每一所述像素单元所显示的立体画面平行于所述光栅同向相对移动,所述移动方向与人眼运动方向相反,以调整所述立体画面像素主光路射出角度,所述主光路为所述像素通过透镜到达对应人眼的最短路径;
所述根据人眼相对移动位置,将所述显示区域中每一所述像素单元所显示的立体画面平行于所述光栅同向相对移动包括:
左右瞳孔中点分别与所述光栅脊线和光栅谷线形成投影,在显示区域的投影线分别为脊线投影和谷线投影,所述脊线投影和所述谷线投影随所述人眼的移动而移动,从而划分得到的若干条状左右显示区域,按所述条状左右显示区域填充所述立体画面左右画面像素;
所述按所述条状左右显示区域填充所述立体画面左右画面像素包括:
根据显示区域所划分的条状左右显示区域数量,将左右画面按光栅倾斜角度分别裁剪成若干条状画面,且所述条状画面与所述条状左右显示区域数量一一对应,且具有几何映射关系,映射并复制所述条状画面像素至所述条状左右显示区域像素。
5.根据权利要求4所述的立体显示方法,其特征在于,所述根据显示区域所划分的条状左右显示区域数量,将左右画面按光栅倾斜角度分别裁剪成若干条状画面,且所述条状画面与所述条状左右显示区域数量一一对应,且具有几何映射关系,映射并复制所述条状画面像素至所述条状左右显示区域像素包括:
将所述条状画面分别拆解为三幅单色图像,包括:R单色图像、G单色图像和B单色图像,将所述各单色图像均缩放到与对应的显示区域尺寸相等,将显示缓存清零,其中,对任一单色条状图像进行裁剪条状区域并复制到对应显示区域,按如下步骤处理:
根据显示区域RGB子像素不同物理位置,分别计算所述单色图像裁剪线并裁剪,跨线的像素,按面积比例将其亮度值分配给相邻的两条状区域像素,且每条单色条状图像均包含所有的跨线子像素;
按叠加法将所述单色条状图像逐子像素值赋值到对应的左右条状显示区域缓存,若目标子像素有值,则与所述子像素值叠加;
完成全部三色条状区域赋值后,刷新显示屏。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110864594.0A CN113534490B (zh) | 2021-07-29 | 2021-07-29 | 基于用户眼球追踪的立体显示装置及立体显示方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110864594.0A CN113534490B (zh) | 2021-07-29 | 2021-07-29 | 基于用户眼球追踪的立体显示装置及立体显示方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113534490A CN113534490A (zh) | 2021-10-22 |
CN113534490B true CN113534490B (zh) | 2023-07-18 |
Family
ID=78089656
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110864594.0A Active CN113534490B (zh) | 2021-07-29 | 2021-07-29 | 基于用户眼球追踪的立体显示装置及立体显示方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113534490B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114609782A (zh) * | 2022-02-14 | 2022-06-10 | 广东未来科技有限公司 | 裸眼3d抬头显示装置及裸眼3d抬头显示方法 |
CN115002444B (zh) * | 2022-05-26 | 2024-06-04 | 京东方科技集团股份有限公司 | 显示模组及其显示方法、显示装置、虚拟显示设备 |
CN116338975B (zh) * | 2023-05-30 | 2023-07-28 | 成都工业学院 | 一种基于显示条阵列的立体显示装置 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104506836A (zh) * | 2014-11-28 | 2015-04-08 | 深圳市亿思达科技集团有限公司 | 基于眼球追踪的个人全息三维显示方法及设备 |
CN204887281U (zh) * | 2015-08-10 | 2015-12-16 | 重庆卓美华视光电有限公司 | 一种立体显示装置 |
CN106218409A (zh) * | 2016-07-20 | 2016-12-14 | 长安大学 | 一种可人眼跟踪的裸眼3d汽车仪表显示方法及装置 |
CN107124607A (zh) * | 2017-05-08 | 2017-09-01 | 上海大学 | 一种结合视觉疲劳检测的裸眼立体显示装置和方法 |
CN109040736A (zh) * | 2018-08-08 | 2018-12-18 | 上海玮舟微电子科技有限公司 | 一种人眼空间位置的标定方法、装置、设备和存储介质 |
CN109154737A (zh) * | 2016-02-18 | 2019-01-04 | 奥里姆光学有限公司 | 动态全三维显示 |
-
2021
- 2021-07-29 CN CN202110864594.0A patent/CN113534490B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104506836A (zh) * | 2014-11-28 | 2015-04-08 | 深圳市亿思达科技集团有限公司 | 基于眼球追踪的个人全息三维显示方法及设备 |
CN204887281U (zh) * | 2015-08-10 | 2015-12-16 | 重庆卓美华视光电有限公司 | 一种立体显示装置 |
CN109154737A (zh) * | 2016-02-18 | 2019-01-04 | 奥里姆光学有限公司 | 动态全三维显示 |
CN106218409A (zh) * | 2016-07-20 | 2016-12-14 | 长安大学 | 一种可人眼跟踪的裸眼3d汽车仪表显示方法及装置 |
CN107124607A (zh) * | 2017-05-08 | 2017-09-01 | 上海大学 | 一种结合视觉疲劳检测的裸眼立体显示装置和方法 |
CN109040736A (zh) * | 2018-08-08 | 2018-12-18 | 上海玮舟微电子科技有限公司 | 一种人眼空间位置的标定方法、装置、设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN113534490A (zh) | 2021-10-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113534490B (zh) | 基于用户眼球追踪的立体显示装置及立体显示方法 | |
JP4950293B2 (ja) | 自動立体システム | |
US8717352B2 (en) | Tracing-type stereo display apparatus and tracing-type stereo display method | |
US7834944B2 (en) | Method for the orientation of a parallax barrier screen on a display screen | |
KR100598758B1 (ko) | 입체 표시 장치 | |
US20160219260A1 (en) | Stereoscopic display device and parallax image correcting method | |
CN107071382B (zh) | 立体图像显示装置 | |
US8189035B2 (en) | Method and apparatus for rendering virtual see-through scenes on single or tiled displays | |
US11825064B2 (en) | Light field display method and system, storage medium and display panel | |
US20100079578A1 (en) | Apparatus, method and computer program product for three-dimensional image processing | |
US20100245824A1 (en) | Method for orienting a parallax barrier screen on a display screen | |
CN208257981U (zh) | 一种基于子像素的led裸眼3d显示装置 | |
CN110662012A (zh) | 一种裸眼3d显示效果优化的排图方法、系统及电子设备 | |
CN109782452B (zh) | 立体影像产生方法、成像方法与系统 | |
KR102570277B1 (ko) | 3d 영상 장치의 왜곡 보정 방법 및 그 방법을 이용하는 장치 | |
CN110381305B (zh) | 裸眼3d的去串扰方法、系统、存储介质及电子设备 | |
JP6588107B2 (ja) | 自動立体視システム | |
CN105447812B (zh) | 一种基于线状阵列的三维活动图像显示及信息隐藏方法 | |
CN115605801A (zh) | 一种光场显示装置及其显示方法 | |
CN114967170A (zh) | 基于柔性裸眼三维显示设备的显示处理方法及其装置 | |
CN114556913A (zh) | 3d光场显示器的光学设计和优化技术 | |
KR102276252B1 (ko) | 3d 필터의 부착오차가 보정된 입체영상표시장치 및 부착오차 보정방법 | |
CN113271452B (zh) | 多视点裸眼3d显示装置及其显示方法 | |
US20240205382A1 (en) | Method of evaluating crosstalk and crosstalk evaluation device performing the same | |
CN115220240A (zh) | 适应眼睛位置的立体影像数据的产生方法与显示系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |