CN209105344U - 增强现实的虚实融合装置 - Google Patents

增强现实的虚实融合装置 Download PDF

Info

Publication number
CN209105344U
CN209105344U CN201822235829.6U CN201822235829U CN209105344U CN 209105344 U CN209105344 U CN 209105344U CN 201822235829 U CN201822235829 U CN 201822235829U CN 209105344 U CN209105344 U CN 209105344U
Authority
CN
China
Prior art keywords
module
image
binocular
virtual
visually
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201822235829.6U
Other languages
English (en)
Inventor
孙超
李巍
王松勇
徐晟�
彭安琪
吴伟桐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai North Crown Mdt Infotech Ltd
Original Assignee
Shanghai North Crown Mdt Infotech Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai North Crown Mdt Infotech Ltd filed Critical Shanghai North Crown Mdt Infotech Ltd
Priority to CN201822235829.6U priority Critical patent/CN209105344U/zh
Application granted granted Critical
Publication of CN209105344U publication Critical patent/CN209105344U/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Processing Or Creating Images (AREA)

Abstract

本实用新型涉及一种增强现实的虚实融合装置。该装置包括:双目视觉采集模块、处理模块、双目图像呈现模块;双目视觉采集模块与处理模块连接,处理模块与双目图像呈现模块连接;双目视觉采集模块包括左目视觉图像采集模块、右目视觉图像采集模块、惯导采集模块;左右目视觉图像采集模块分别同时采集现实场景中真实对象的图像,惯导采集模块采集人体在运动过程中的角速度和加速度;处理模块通过对真实对象的左右目图像、角速度和加速度、虚拟对象的左右目图像分别进行处理,以得到左右目虚实融合的图像;双目图像呈现模块将左右目虚实融合的图像分别在人体双目处对应呈现出来。利用该装置,可以增强真实感。

Description

增强现实的虚实融合装置
技术领域
本实用新型涉及立体视觉增强现实技术领域,特别是涉及一种增强现实的虚实融合装置。
背景技术
随着随身电子产品处理器运算能力的提升,增强现实技术的用途越来越广泛。增强现实技术是一种实时地计算摄影机影像的位置及角度,并加上相应图像、视频、3D模型的技术,其最终可以在屏幕上把虚拟世界套在现实世界中,并使两者进行互动。
传统的增强现实技术中,一般采用的是单目采集图像,之后将单目采集的虚拟图像和现实图像进行叠加处理,接着用同视角渲染两眼的图像,最后将渲染后的图像在双眼处统一显示。
但是上述方法用同视角渲染两眼的图像,由于人的两眼存在视觉误差,因此易导致最终呈现的图像立体信息缺失,真实感不强。
实用新型内容
基于此,有必要针对上述用同视角渲染两眼的图像,由于人的两眼存在视觉误差,因此易导致最终呈现的图像立体信息缺失,真实感不强问题,提供一种增强现实的虚实融合装置。
一种增强现实的虚实融合装置,所述装置包括:双目视觉采集模块、处理模块、双目图像呈现模块;
所述双目视觉采集模块包括左目视觉图像采集模块、右目视觉图像采集模块和惯导采集模块;所述左目视觉图像采集模块以及右目视觉图像采集模块用于在佩戴时位于人体双目前方,分别同时采集现实场景中真实对象的图像;所述惯导采集模块用于采集人体在运动过程中的角速度和加速度;
所述处理模块,与所述左目视觉图像采集模块、右目视觉图像采集模块和惯导采集模块分别相连,用于通过对左右目视觉图像采集模块采集的现实场景中真实对象的图像、所述惯导采集模块采集的人体在运动过程中的角速度和加速度、虚拟场景中左右目虚拟相机采集的虚拟对象的左右目图像分别进行处理,以得到左右目虚实融合的图像;所述左右目虚实融合的图像为虚实对齐之后融合的图像,所述虚拟场景与现实场景之间具有对应关系,所述虚拟对象为在虚拟场景中添加的对象,所述虚实对齐指的是虚拟场景的坐标系与现实场景的坐标系一致;
所述双目图像呈现模块,与所述处理模块相连,用于将所述左右目虚实融合的图像分别在人体双目处对应呈现出来。
在其中一个实施例中,所述装置还包括:保护罩、外壳;所述保护罩与所述外壳连接,并与所述外壳之间形成一空间;
所述双目视觉采集模块以及所述处理模块设置在所述空间内靠近所述保护罩的一侧。
在其中一个实施例中,所述装置还包括:双目视力矫正与护目模块;
所述双目视力矫正与护目模块设置在所述空间内靠近所述外壳的一侧;
所述双目图像呈现模块设置在所述空间内,一侧与所述处理模块连接,另一侧与所述双目视力矫正与护目模块连接。
在其中一个实施例中,所述双目视力矫正与护目模块为两个独立视力矫正与护目镜片。
在其中一个实施例中,所述装置还包括:镜架;
所述镜架设置在所述空间内,所述双目图像呈现模块、所述双目视力矫正与护目模块均设置在所述镜架上,且所述双目图像呈现模块与所述镜架连接。
在其中一个实施例中,所述保护罩上设置有两个通孔,所述保护罩包括:两个镜片;
所述两个镜片分别设置在所述两个通孔内;
所述左目视觉图像采集模块和所述右目视觉图像采集模块分别透过所述两个镜片采集现实场景中真实对象的图像,所述两个通孔的横截面积不小于所述左目视觉图像采集模块的横截面积以及所述右目视觉图像采集模块的横截面积。
在其中一个实施例中,所述双目图像呈现模块为两个内置显示器的独立显示镜片。
在其中一个实施例中,所述独立显示镜片为半反半透显示镜片。
在其中一个实施例中,所述保护罩与所述外壳平齐。
在其中一个实施例中,所述两个独立视力矫正与护目镜片的材料为树脂或者玻璃。
上述增强现实的虚实融合装置,处理模块首先获取真实对象的左右目图像以及人体在运动过程中的角速度和加速度,并据此得到左目视觉图像采集模块的位姿和右目视觉图像采集模块的位姿;接着处理模块根据左右目视觉图像采集模块的位姿,得到左右目虚拟相机的位姿,并根据左右目视觉图像采集模块的的焦距和像素大小等内部参数,得到左右目虚拟相机的焦距和像素大小等内部参数,并在虚拟场景中添加虚拟对象,并采用左右目虚拟相机对该虚拟对象的左右目图像进行采集;最后处理模块可以对真实对象的左目图像和虚拟对象的左目图像进行渲染,得到左目虚实结合的图像,以及对真实对象的右目图像和虚拟对象的右目图像进行渲染,得到右目虚实结合的图像。在本实施例中,由于是左右目同时采集的真实对象的左右目图像,因此,利用该装置得到的真实对象的立体信息更加丰富;另外,由于在对上述真实对象的左右目图像和虚拟对象的左右目图像进行处理时,采用的是双目视角进行渲染真实对象的左右目和虚拟对象的左右目图像的,因此,利用该装置渲染得到的左右目虚实结合的图像,更为符合人体双眼看到的图像情况,增强了人眼看到的虚实结合的图像的真实感。
附图说明
图1为为一个实施例提供的增强现实的虚实融合装置的结构示意图。
附图标记说明:
10:双目视觉采集模块; 11:处理模块;
12:双目图像呈现模块; 13:保护罩;
14:外壳; 15:双目视力矫正与护目模块;
16:镜架。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
参见图1所示,本申请实施例提供一种增强现实的虚实融合装置,其可以包括:双目视觉采集模块10、处理模块11、双目图像呈现模块12;所述双目视觉采集模块10包括左目视觉图像采集模块、右目视觉图像采集模块和惯导采集模块;所述左目视觉图像采集模块以及右目视觉图像采集模块用于在佩戴时位于人体双目前方,分别同时采集现实场景中真实对象的图像,所述惯导采集模块用于采集人体在运动过程中的角速度和加速度;所述处理模块11与所述左目视觉图像采集模块、右目视觉图像采集模块和惯导采集模块分别相连,用于通过对左右目视觉图像采集模块采集的现实场景中真实对象的图像、所述惯导采集模块采集的人体在运动过程中的角速度和加速度、虚拟场景中左右目虚拟相机采集的虚拟对象的左右目图像分别进行处理,以得到左右目虚实融合的图像;所述左右目虚实融合的图像为虚实对齐之后融合的图像,所述虚拟场景与现实场景之间具有对应关系,所述虚拟对象为在虚拟场景中添加的对象,所述虚实对齐指的是虚拟场景的坐标系与现实场景的坐标系一致;所述双目图像呈现模块12,与所述处理模块11相连,用于将所述左右目虚实融合的图像分别在人体双目处对应呈现出来。
具体的,上述双目视觉采集模块10包括左目视觉图像采集模块、右目视觉图像采集模块、惯导采集模块,其中,左目视觉图像采集模块和右目视觉图像采集模块以及惯导采集模块均可以是和处理模块11电连接;处理模块11也可以和双目呈现图像呈现模块电连接。可选的,上述双目视觉采集模块10可以设置在处理模块11上。
人体在佩戴该增强现实的虚实融合装置时,上述左目视觉图像采集模块和右目视觉图像采集模块分别位于人体双目前方,即该左目视觉图像采集模块位于人体左眼前方,采集人体左眼看到的现实场景中真实对象的左目图像,并将其传给处理模块11进行处理,右目视觉图像采集模块位于人体右眼前方,采集人体右眼看到的现实场景中真实对象的右目图像,并将其传给处理模块11进行处理。人体在佩戴该装置时可以运动进行图像采集,上述惯导采集模块可以采集人体在运动过程中的角速度和加速度,并将其传给处理模块11进行处理。可选的,上述左目视觉图像采集模块和右目视觉图像采集模块可以是相机,还可以是摄像机,采集的图像可以是视频格式的图像,还可以是图片格式的图像,本实施例对此不做限定。
人体在佩戴该装置采集现实场景中真实对象的图像,处理模块11也可以在其内部设置虚拟场景和左右目虚拟相机,并在该虚拟场景中添加虚拟对象,该虚拟场景与现实场景相对应,该左右目虚拟相机与左右目图像视觉采集模块相对应,利用该左右目虚拟相机,可以采集虚拟场景中虚拟对象的左右目图像。在进行真实对象与虚拟对象的融合时,可以先进行虚实对齐,即将虚拟场景的坐标系与现实场景的坐标系进行标定统一。
在虚实对齐之后,处理模块11可以对上述真实对象的左目图像、人体在运动过程中的角速度和加速度、虚拟对象的左目图像进行融合处理,以及对真实对象的右目图像、人体在运动过程中的角速度和加速度、虚拟对象的右目图像进行融合处理,以得到虚实融合的左目图像以及虚实融合的右目图像。
可选的,当不添加虚拟对象时,上述处理模块11可以对上述真实对象的左目图像和人体在运动过程中的角速度和加速度进行处理,得到带立体视觉的三维左目图像,以及可以对上述真实对象的右目图像和人体在运动过程中的角速度和加速度进行处理,得到带立体视觉的三维右目图像。
可选的,上述处理模块11还可以连接一个或者多个处理器,该连接关系可以是无线连接,也可以是有线连接,还可以是5G连接等。通过该连接关系,处理模块11可以将得到的虚实融合的左右目图像以及带立体视觉的三维左右目图像传输给该处理器,可选的,该处理器上可以包括双目显示器,以分别显示该处理器得到的上述虚实融合的左右目图像以及带立体视觉的三维左右目图像。
可选的,上述双目图像呈现模块12为两个内置显示器的独立显示镜片,可选的,上述独立显示镜片可以为半反半透显示镜片,即该双目图像呈现模块12包括左目独立显示镜片和右目显示镜片,其材料可以是树脂、玻璃等。上述处理模块11在得到虚实融合的左右目图像之后,可以将左目虚实融合图像在左目独立显示镜片上进行呈现,使人体左眼进行观看,另外,也可以将右目虚实融合图像在右目独立显示镜片上进行呈现,使人体右眼进行观看。
本实施例提供的增强现实的虚实融合装置,可以包括:双目视觉采集模块、处理模块、双目图像呈现模块,双目视觉采集模块与处理模块连接,处理模块与双目图像呈现模块连接。其中,双目视觉采集模块包括左目视觉图像采集模块、右目视觉图像采集模块、惯导采集模块,左目视觉图像采集模块用于采集现实场景中真实对象的左目图像,右目视觉图像采集模块用于采集现实场景中真实对象的右目图像,惯导采集模块用于采集人体在运动过程中的角速度和加速度。处理模块内部可以设置虚拟场景以及左右目虚拟相机、虚拟对象,该左右目虚拟相机与上述左右目视觉图像采集模块相对应,用于采集虚拟对象的左右目图像,之后,处理模块可以通过对上述真实对象的左目图像、人体在运动过程中的角速度和加速度以及虚拟对象的左目图像进行融合处理,得到左目虚实融合的图像,并在双目呈现模块的左目处呈现出来,另外,处理模块也可以对真实对象的右目图像、人体在运动过程中的角速度和加速度以及虚拟对象的右目图像进行融合处理,得到右目虚实融合的图像,并在双目呈现模块的右目处呈现出来。在本实施例中,由于该装置的双目视觉采集模块对真实对象是进行的双目图像采集,即左右目各采集各的图像,不是单目采集,因此,该装置采集的图像的立体信息更为丰富;另外,处理模块在对真实对象的左右目图像进行处理时,是将左右目图像分开进行处理的,即分别对真实对象的左目图像与虚拟对象的左目图像进行融合处理,以及对真实对象的右目图像与虚拟对象的右目图像进行融合处理,因此,该装置对左右目图像的虚实融合处理更为合理,可以增强虚实融合图像的真实感;进一步地,由于该装置是将上述左右目虚实融合的图像分别在左右目呈现模块处呈现出来,因此,可以使人体观看到的虚实融合图像真实感更强。
在一个实施例中,继续参见图1,在上述实施例的基础上,所述处理模块11还用于:获取现实场景中真实对象的左右目图像、所述人体在运动过程中的角速度和加速度;根据现实场景中真实对象的左右目图像以及人体在运动过程中的角速度和加速度,得到所述左目视觉图像采集模块的位姿、所述右目视觉图像采集模块的位姿;根据所述左目视觉图像采集模块的位姿、所述右目视觉图像采集模块的位姿以及预先设置的左目虚拟相机参数和右目虚拟相机参数,确定虚拟场景中左目虚拟相机的位姿以及右目虚拟相机的位姿,并根据所述左目虚拟相机的位姿以及所述右目相机的位姿在虚拟场景中添加虚拟对象以及虚拟对象的三维图形信息;所述左目虚拟相机参数和所述右目虚拟相机参数包括左目虚拟相机的焦距以及像素大小等内部参数,右目虚拟相机的焦距以及像素大小等内部参数;所述左目虚拟相机和右目虚拟相机分别对应所述左目视觉图像采集模块和右目视觉图像采集模块;获取所述左目虚拟相机、所述右目虚拟相机分别同时采集的虚拟场景中虚拟对象的左右目图像,并对真实对象的左目图像和虚拟对象的左目图像进行渲染,以及对真实对象的右目图像和虚拟对象的右目图像进行渲染,得到左右目虚实结合的图像。
具体的,处理模块11可以先获取左目视觉图像采集模块采集的真实对象的左目图像、右目视觉图像采集模块采集的真实对象的右目图像、以及惯导采集模块采集的人体在运动过程中的角速度和加速度。在得到真实对象的左目图像、真实对象的右目图像以及人体在运动过程中的角速度和加速度之后,可选的,可以采用最小化马氏距离求解法,求解得到左目视觉图像采集模块的位姿、右目视觉图像采集模块的位姿。之后可以根据左目视觉图像采集模块的位姿与左目虚拟相机的位姿之间的对应关系,以及根据右目视觉图像采集模块的位姿与右目虚拟相机的位姿之间的对应关系,得到虚拟场景中左目虚拟相机的位姿以及右目虚拟相机的位姿,其中,左目虚拟相机对应左目视觉图像采集模块,右目虚拟相机对应右目视觉图像采集模块。另外,处理模块11也可以根据左目视觉图像采集模块的焦距和像素大小,以及右目视觉图像采集模块的焦距和像素大小,得到左目虚拟相机的投影矩阵,以及右目虚拟相机的投影矩阵,根据投影矩阵就可以得到像素大小和焦距,其中,左目视觉图像采集模块的焦距和像素大小与左目虚拟相机的焦距和像素大小相等,右目视觉图像采集模块的焦距和像素大小与右目虚拟相机的焦距和像素大小相等。处理模块11在确定了左目虚拟相机的位姿和参数,以及确定了右目虚拟相机的位姿和参数之后,可以在该虚拟场景中添加虚拟对象,并利用该左目虚拟相机和右目虚拟相机采集虚拟场景中该虚拟对象的左右目图像。最后,处理模块11可以将真实对象的左目图像和虚拟对象的左目图像放置在同一个坐标系下,以及将真实对象的右目图像和虚拟对象的右目图像放置在同一个坐标系下,利用渲染方法,分别对真实对象的左目图像和虚拟对象的左目图像进行渲染,得到左目虚实结合的图像,以及对真实对象的右目图像和虚拟对象的右目图像进行渲染,得到右目虚实结合的图像。
在一个实施例中,继续参见图1,在上述实施例的基础上,所述装置还可以包括:保护罩13、外壳14;所述保护罩13与所述外壳14连接,并与所述外壳14之间形成一空间;所述双目视觉采集模块10以及所述处理模块11设置在所述空间内靠近所述保护罩13的一侧。可选的,所述装置还可以包括:双目视力矫正与护目模块15,所述双目视力矫正与护目模块15设置在所述空间内靠近所述外壳14的一侧;所述双目图像呈现模块12设置在所述空间内,一侧与所述处理模块11连接,另一侧与所述双目视力矫正与护目模块15连接。
具体的,上述增强现实的虚实融合装置还可以包括:保护罩13、外壳14、双目视力矫正与护目模块15。其中,保护罩13与外壳14连接,可选的,该连接可以是卡扣连接、螺纹连接、铰链连接等,可选的,该保护罩13和外壳14的材料可以是塑料,也可以是金属材料,还可以是塑料和金属材料组成的混合材料,本实施例对此不做限定;保护罩13和外壳14之间形成一空间,可选的,该空间的大小可以根据实际情况而定,本实施例对此也不做限定;可选的,上述保护罩13可以与上述外壳14平齐。
上述双目视觉采集模块10和处理模块11可以设置在上述空间内靠近保护罩13的一侧,可选的,其两者跟保护罩13之间的距离可以视实际情况而定,本实施例对此不做限定。
上述双目视力矫正与护目模块15可以设置在上述空间内靠近外壳14的一侧,可选的,上述双目视力矫正与护目模块15可以是两个独立视力矫正与护目镜片,可选的,上述两个独立视力矫正与护目镜片的材料可以为树脂或者玻璃,其跟外壳14之间的距离也可以视实际情况而定,本实施例对此不做限定。利用该双目视力矫正与护目模块15,可以将双目图像呈现模块12传输过来的图像进行进一步聚光或者散光处理,使得近视或者远视的人也可以利用该装置观看到较为真实地虚实融合的图像。
上述双目图像呈现模块12可以设置在该空间内,位于上述处理模块11和双目视力矫正与护目模块15之间,其一侧与处理模块11连接,另一侧与双目视力矫正与护目模块15连接。可选的,该双目图像呈现模块12与处理模块11之间的连接可以是电连接,与双目视力矫正与护目模块15之间的连接可以是卡扣连接、螺纹连接、铰链连接等。
可选的,该装置还可以包括:镜架16;上述镜架16设置在上述空间内,上述双目图像呈现模块12、上述双目视力矫正与护目模块15均设置在上述镜架16上,且上述双目图像呈现模块12与上述镜架16连接。可选的,上述双目图像呈现模块12与镜架16之间的连接可以是卡扣连接、螺纹连接、铰链连接等。上述保护罩13与镜架16以及人体前额可以形成一体化结构,以对双目视觉采集模块10进行防水防尘保护作用;上述双目图像呈现模块12、上述双目视力矫正与护目模块15均设置在上述镜架16上,使得该镜架16可以托住上述双目图像呈现模块12和双目视力矫正与护目模块15。
本实施例提供的增强现实的虚实融合装置,该装置还可以包括:保护罩、外壳、双目视力矫正与护目模块,其中,保护罩与外壳连接,并与外壳之间形成一空间,双目视觉采集模块以及处理模块设置在该空间内靠近保护罩的一侧,双目视力矫正与护目模块设置在该空间内靠近外壳的一侧,双目图像呈现模块设置在该空间内,一侧与处理模块连接,另一侧与双目视力矫正与护目模块连接。在本实施例中,利用保护罩以及外壳,可以保护处理模块和双目视觉采集模块以及双目图像呈现模块、双目视力矫正与护目模块不会被外界损坏,增加了该装置的耐用性。
在一个实施例中,继续参见图1,在上述实施例的基础上,所述保护罩13上设置有两个通孔,所述保护罩13包括:两个镜片;所述两个镜片分别设置在所述两个通孔内;所述左目视觉图像采集模块和所述右目视觉图像采集模块分别透过所述两个镜片采集现实场景中真实对象的图像,所述两个通孔的横截面积不小于所述左目视觉图像采集模块的横截面积以及所述右目视觉图像采集模块的横截面积。
具体的,上述保护罩13上设置有两个通孔,该两个通孔的横截面积大小相等,该保护罩13可以包括两个镜片,该两个镜片可以分别设置在两个通孔内,该两个镜片的横截面积大小也可以相等,可选的,上述两个镜片的横截面积可以大于或者等于两个通孔的横截面积。可选的,上述两个镜片与两个通孔为可拆卸连接,便于在镜片受损后更换镜片。
上述左目视觉图像采集模块和右目视觉图像采集模块可以分别透过上述两个镜片采集现实场景中真实对象的图像,可选的,上述左目视觉图像采集模块的横截面积可以和右目视觉图像采集模块的横截面积相等,上述两个通孔的横截面积可以大于或者等于左目视觉图像采集模块的横截面积以及右目视觉图像采集模块的横截面积,以便左右目视觉图像采集模块可以完全采集到保护罩13外真实对象的左右目图像。
本实施例提供的增强现实的虚实融合装置,该装置的保护罩上设置有两个通孔,该保护罩包括:两个镜片,其分别设置在两个通孔内,上述左目视觉图像采集模块和右目视觉图像采集模块分别透过两个镜片采集现实场景中真实对象的图像,其中,两个通孔的横截面积不小于左目视觉图像采集模块的横截面积以及右目视觉图像采集模块的横截面积。在本实施例中,保护罩上的两个镜片可以过滤掉外界亮度过高的眩光,避免了过度纯白的图像进入左右目视觉图像采集模块,从而保护了人体双眼的视力。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本实用新型的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对实用新型专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本实用新型构思的前提下,还可以做出若干变形和改进,这些都属于本实用新型的保护范围。因此,本实用新型专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种增强现实的虚实融合装置,其特征在于,所述装置包括:双目视觉采集模块、处理模块、双目图像呈现模块;
所述双目视觉采集模块包括左目视觉图像采集模块、右目视觉图像采集模块和惯导采集模块;所述左目视觉图像采集模块以及右目视觉图像采集模块用于在佩戴时位于人体双目前方,分别同时采集现实场景中真实对象的图像;所述惯导采集模块用于采集人体在运动过程中的角速度和加速度;
所述处理模块,与所述左目视觉图像采集模块、右目视觉图像采集模块和惯导采集模块分别相连,用于通过对左右目视觉图像采集模块采集的现实场景中真实对象的图像、所述惯导采集模块采集的人体在运动过程中的角速度和加速度、虚拟场景中左右目虚拟相机采集的虚拟对象的左右目图像分别进行处理,以得到左右目虚实融合的图像;所述左右目虚实融合的图像为虚实对齐之后融合的图像,所述虚拟场景与现实场景之间具有对应关系,所述虚拟对象为在虚拟场景中添加的对象,所述虚实对齐指的是虚拟场景的坐标系与现实场景的坐标系一致;
所述双目图像呈现模块,与所述处理模块相连,用于将所述左右目虚实融合的图像分别在人体双目处对应呈现出来。
2.根据权利要求1所述的装置,其特征在于,所述装置还包括:保护罩、外壳;所述保护罩与所述外壳连接,并与所述外壳之间形成一空间;
所述双目视觉采集模块以及所述处理模块设置在所述空间内靠近所述保护罩的一侧。
3.根据权利要求2所述的装置,其特征在于,所述装置还包括:双目视力矫正与护目模块;
所述双目视力矫正与护目模块设置在所述空间内靠近所述外壳的一侧;
所述双目图像呈现模块设置在所述空间内,一侧与所述处理模块连接,另一侧与所述双目视力矫正与护目模块连接。
4.根据权利要求3所述的装置,其特征在于,所述双目视力矫正与护目模块为两个独立视力矫正与护目镜片。
5.根据权利要求3所述的装置,其特征在于,所述装置还包括:镜架;
所述镜架设置在所述空间内,所述双目图像呈现模块、所述双目视力矫正与护目模块均设置在所述镜架上,且所述双目图像呈现模块与所述镜架连接。
6.根据权利要求2所述的装置,其特征在于,所述保护罩上设置有两个通孔,所述保护罩包括:两个镜片;
所述两个镜片分别设置在所述两个通孔内;
所述左目视觉图像采集模块和所述右目视觉图像采集模块分别透过所述两个镜片采集现实场景中真实对象的图像,所述两个通孔的横截面积不小于所述左目视觉图像采集模块的横截面积以及所述右目视觉图像采集模块的横截面积。
7.根据权利要求1所述的装置,其特征在于,所述双目图像呈现模块为两个内置显示器的独立显示镜片。
8.根据权利要求7所述的装置,其特征在于,所述独立显示镜片为半反半透显示镜片。
9.根据权利要求3所述的装置,其特征在于,所述保护罩与所述外壳平齐。
10.根据权利要求5所述的装置,其特征在于,所述两个独立视力矫正与护目镜片的材料为树脂或者玻璃。
CN201822235829.6U 2018-12-28 2018-12-28 增强现实的虚实融合装置 Active CN209105344U (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201822235829.6U CN209105344U (zh) 2018-12-28 2018-12-28 增强现实的虚实融合装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201822235829.6U CN209105344U (zh) 2018-12-28 2018-12-28 增强现实的虚实融合装置

Publications (1)

Publication Number Publication Date
CN209105344U true CN209105344U (zh) 2019-07-12

Family

ID=67163497

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201822235829.6U Active CN209105344U (zh) 2018-12-28 2018-12-28 增强现实的虚实融合装置

Country Status (1)

Country Link
CN (1) CN209105344U (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115174886A (zh) * 2022-08-25 2022-10-11 吉林大学 支持立体虚拟现实与增强现实的手机镜头及显示方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115174886A (zh) * 2022-08-25 2022-10-11 吉林大学 支持立体虚拟现实与增强现实的手机镜头及显示方法

Similar Documents

Publication Publication Date Title
JP2019500633A (ja) 複数のセグメントディスプレイおよび光学素子を備えたヘッドマウントディスプレイ装置
US20110234584A1 (en) Head-mounted display device
CN107396087B (zh) 裸眼三维显示装置及其控制方法
US20110234475A1 (en) Head-mounted display device
EP3779559A1 (en) Head-mounted display, and display screen, head-mounted bracket and video thereof
JP5834177B2 (ja) 立体画像表示システム及び立体視メガネ
WO2019041614A1 (zh) 沉浸式虚拟现实头戴显示装置和沉浸式虚拟现实显示方法
CN106444023A (zh) 一种超大视场角的双目立体显示的透射式增强现实系统
CN108398787B (zh) 增强现实显示设备、方法和增强现实眼镜
CN102903090A (zh) 全景立体图像合成方法、装置、系统和浏览装置
CN106842599B (zh) 一种3d视觉成像方法及实现3d视觉成像的眼镜
JP4580678B2 (ja) 注視点位置表示装置
US20230156176A1 (en) Head mounted display apparatus
CN109474816B (zh) 增强现实的虚实融合装置及其虚实融合方法、设备、介质
WO2013177654A1 (en) Apparatus and method for a bioptic real time video system
CN108957742B (zh) 一种实现画面虚拟透明动态调节的增强现实头盔及方法
CN209105344U (zh) 增强现实的虚实融合装置
CN111491159A (zh) 一种增强现实的显示系统及方法
JP2016134668A (ja) 電子眼鏡および電子眼鏡の制御方法
WO2019131160A1 (ja) 情報処理装置、情報処理方法、および記録媒体
JP7118650B2 (ja) 表示装置
CN109255838B (zh) 避免增强现实显示设备观看重影的方法及设备
US20210014475A1 (en) System and method for corrected video-see-through for head mounted displays
JP2017191546A (ja) 医療用ヘッドマウントディスプレイ、医療用ヘッドマウントディスプレイのプログラムおよび医療用ヘッドマウントディスプレイの制御方法
JP2017046065A (ja) 情報処理装置

Legal Events

Date Code Title Description
GR01 Patent grant
GR01 Patent grant