CN108536286A - 一种融合真实物体的vr工作辅助系统、方法及vr设备 - Google Patents
一种融合真实物体的vr工作辅助系统、方法及vr设备 Download PDFInfo
- Publication number
- CN108536286A CN108536286A CN201810242199.7A CN201810242199A CN108536286A CN 108536286 A CN108536286 A CN 108536286A CN 201810242199 A CN201810242199 A CN 201810242199A CN 108536286 A CN108536286 A CN 108536286A
- Authority
- CN
- China
- Prior art keywords
- unit
- data
- image
- display
- real
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000004927 fusion Effects 0.000 title claims abstract description 22
- 238000000034 method Methods 0.000 title claims abstract description 22
- 230000005540 biological transmission Effects 0.000 claims abstract description 9
- 238000006243 chemical reaction Methods 0.000 claims description 12
- 230000000694 effects Effects 0.000 abstract description 3
- 238000005516 engineering process Methods 0.000 description 16
- 239000011521 glass Substances 0.000 description 7
- 238000010586 diagram Methods 0.000 description 5
- 238000004088 simulation Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000005034 decoration Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000007654 immersion Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000035800 maturation Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 239000011800 void material Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种融合真实物体的VR工作辅助系统、方法及VR设备,属于虚拟现实技术领域;系统包括显示单元、图像采集单元、区域建立单元、处理单元和发送单元;方法包括:采集现实环境中的真实物体的物体图像并进行保存;对关联于工作环境的第一图像数据进行修改,以在工作环境的显示画面的每一帧中均建立一显示区域;获取物体图像并进行处理,并将物体图像分别绘制到每一帧的显示区域内以形成第二图像数据,第二图像数据包括在第一图像数据中;将包括第二图像数据的第一图像数据发送至显示单元进行显示。上述技术方案的有益效果是:将真实物体与VR工作环境进行结合,创建一种统一的混合现实的工作模式,从而提升用户的工作效率。
Description
技术领域
本发明涉及虚拟现实技术领域,尤其涉及一种融合真实物体的VR工作辅助系统、方法及VR设备。
背景技术
虚拟现实(Virtual Reality,VR)技术是一种可以创建和体验虚拟世界的计算机仿真技术,其利用计算机技术模拟生成沉浸式的三维模拟环境,用户通过特制的显示设备(例如头戴式VR眼镜等)感知该三维模拟环境,并可以在该环境中进行一系列交互操作。
目前,随着VR技术的逐渐成熟,越来越多的工作设备和工作软件开始应用VR技术来实现,例如在VR环境中进行文档编辑,或者在VR环境中进行图片类操作等。这种VR工作环境会给人一种身临其境的感觉,能够提升用户在工作时的体验。
传统的VR工作应用软件是通过direct3D绘制双眼图像,并且通过例如OpenVR等将工作环境的图像传送到VR显示设备上。这种VR工作环境是基于纯虚拟的环境,当用户在工作过程中需要与现实环境中的真实物体进行交互(例如在进行图片编辑时需要用实物作为参照)时,通常需要通过摘下VR眼镜或者利用VR眼镜上的摄像头切换到现实模式(即能够看清外部真实环境的模式)才能观察到真实的物体。即现有技术中,无法在真实物体融合到虚拟的VR工作环境中,从而导致用户需要频繁在现实模式和虚拟模式中进行切换,降低用户的工作效率和设备使用的体验。
发明内容
根据现有技术中存在的上述问题,现提供一种融合真实物体的VR工作辅助系统、方法及VR设备的技术方案,旨在将真实物体与VR工作环境进行结合,创建一种统一的混合现实的工作模式,从而改善用户的使用体验,提升用户的工作效率。
上述技术方案具体包括:
一种融合真实物体的VR工作辅助系统,应用于VR设备中,所述VR设备中包括一显示单元,于所述显示单元的显示界面中显示VR的工作环境;其中,包括:
图像采集单元,用于采集现实环境中的真实物体的物体图像并进行保存;
区域建立单元,用于对关联于所述工作环境的第一图像数据进行修改,以在所述工作环境的显示画面的每一帧中均建立一显示区域;
处理单元,分别连接所述图像采集单元和所述区域建立单元,用于获取所述物体图像并进行处理,以将所述物体图像分别绘制到每一帧的所述显示区域内并形成第二图像数据,所述第二图像数据包括在所述第一图像数据中;
发送单元,分别连接所述处理单元和所述显示单元,用于将包括所述第二图像数据的所述第一图像数据发送至所述显示单元进行显示。
优选的,该VR工作辅助系统,其中,所述图像采集单元包括:
图像采集模块,用于采集所述真实物体的所述物体图像;
内存模块,连接所述图像采集模块,用于暂存所述图像采集模块采集到的所述物体图像。
优选的,该VR工作辅助系统,其中,于所述VR设备中采用direct3D技术渲染实现在所述显示界面中显示所述工作环境。
优选的,该VR工作辅助系统,其中,还包括:
第一队列单元,连接所述区域建立单元,所述第一队列单元中设置有缓存所述工作环境的图元的顶点数据;
第二队列单元,分别连接所述第一队列单元和所述区域建立单元,所述第二队列单元中设置有关联于所述顶点数据的索引数据;
则所述区域建立单元通过向所述第一队列单元和所述第二队列单元中添加调整数据来建立所述显示区域。
优选的,该VR工作辅助系统,其中,所述区域建立单元中包括:
调整模块,用于通过调整所述调整数据来对所述显示区域进行调整;
所述调整数据包括添加至所述第一队列单元的顶点调整数据以及添加至所述第二队列单元的索引调整数据。
优选的,该VR工作辅助系统,其中,所述显示区域为一矩形区域。
优选的,该VR工作辅助系统,其中,所述处理单元进一步包括:
获取模块,用于获取所述图像采集单元中保存的所述真实物体的所述物体图像;
转换模块,连接所述获取模块,用于将所述物体图像转换为相应的图片纹理数据并输出;
绘制模块,连接转换模块,用于将所述转换模块输出的所述图片纹理数据绘制到每一帧的所述显示区域内,以形成所述第二图像数据。
一种融合真实物体的VR工作辅助方法,应用于VR设备中,所述VR设备中包括一显示单元,于所述显示单元的显示界面中显示VR的工作环境;其中,包括:
步骤S1,采用一图像采集单元采集现实环境中的真实物体的物体图像并进行保存;
步骤S2,采用一区域建立单元对关联于所述工作环境的第一图像数据进行修改,以在所述工作环境的显示画面的每一帧中均建立一显示区域;
步骤S3,采用一处理单元获取所述物体图像并进行处理,并将所述物体图像分别绘制到每一帧的所述显示区域内以形成第二图像数据,所述第二图像数据包括在所述第一图像数据中;
步骤S4,采用一发送单元将包括所述第二图像数据的所述第一图像数据发送至所述显示单元进行显示。
优选的,该VR工作辅助方法,其中,于所述VR设备中采用direct3D技术渲染实现在所述显示界面中显示所述工作环境;
则在一第一队列单元中设置所述工作环境的图元的顶点数据,以及在一第二队列单元中设置关联于所述顶点数据的索引数据;
所述步骤S2中,所述区域建立单元通过向所述第一队列单元和所述第二队列单元中添加调整数据来建立所述显示区域;
所述调整数据包括添加至所述第一队列单元的顶点调整数据以及添加至所述第二队列单元的索引调整数据。
优选的,该VR工作辅助方法,其中,所述步骤S4具体包括:
所述步骤S3具体包括:
步骤S31,所述处理单元获取所述图像采集单元中保存的所述真实物体的所述物体图像;
步骤S32,所述处理单元将所述物体图像转换为相应的图片纹理数据并输出;
步骤S33,所述处理单元将所述转换模块输出的所述图片纹理数据绘制到所述显示区域内,以形成所述第二图像数据。
一种VR设备,其中,包括上述的融合真实物体的VR工作辅助系统。
一种VR设备,其中,采用上述的融合真实物体的VR工作辅助方法。
上述技术方案的有益效果是:
1)提供一种融合真实物体的VR工作辅助系统,能够将真实物体与VR工作环境进行结合,创建一种统一的混合现实的工作模式,从而改善用户的使用体验,提升用户的工作效率。
2)提供一种融合真实物体的VR工作辅助方法,能够支持上述VR工作辅助系统正常工作。
附图说明
图1是本发明的较佳的实施例中,一种融合真实物体的VR工作辅助系统的总体结构示意图;
图2是本发明的较佳的实施例中,在VR工作环境中插入显示区域的示意图;
图3是本发明的较佳的实施例中,于图1的基础上,图像采集单元的具体结构示意图;
图4是本发明的较佳的实施例中,于图1的基础上,区域建立单元的具体结构示意图;
图5是本发明的较佳的实施例中,于图1的基础上,处理单元的具体结构示意图;
图6是本发明的较佳的实施例中,一种融合真实物体的VR工作辅助方法的总体流程示意图;
图7是本发明的较佳的实施例中,于图6的基础上,步骤S3的具体流程示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,在不冲突的情况下,本发明中的实施例及实施例中的特征可以相互组合。
下面结合附图和具体实施例对本发明作进一步说明,但不作为本发明的限定。
根据现有技术中存在的上述问题,现提供一种融合真实物体的VR工作辅助系统,该VR工作辅助系统主要应用在用户的工作环境中,例如用户可以在该VR工作辅助系统构造的VR工作环境中进行文档或者图片的编辑等日常工作。换言之,通过将传统的工作软件以VR技术变为虚拟现实类的工作环境的方式给予用户虚拟现实的工作体验。上述实现VR工作环境的方式在现有技术中有较多实现方式,在此不再赘述。
则本发明的较佳的实施例中,上述VR工作辅助系统应用于VR设备中,VR设备中包括一显示单元1,于显示单元的显示界面中显示VR的工作环境。
上述VR工作辅助系统具体如图1中所示,包括:
图像采集单元2,用于采集现实环境中的真实物体的物体图像并进行保存;
区域建立单元3,用于对关联于工作环境的第一图像数据进行修改,以在工作环境的显示画面的每一帧中均建立一显示区域;
处理单元4,分别连接图像采集单元2和区域建立单元3,用于获取物体图像并进行处理,以将物体图像分别绘制到每一帧的显示区域内并形成第二图像数据,第二图像数据包括在第一图像数据中;
发送单元5,连接处理单元3和显示单元1,用于将包括第二图像数据的第一图像数据发送至显示单元1进行显示。
具体地,本实施例中,上述图像采集单元2设置于VR设备中,更进一步地可以为VR设备或者VR设备上的辅助设备,例如图像采集单元2可以为自带摄像功能的VR眼镜,或者普通VR眼镜上自带的摄像头。
本实施例中,在VR工作辅助系统开始进行工作之前,首先采用图像采集单元2采集真实物体的物体图像并进行保存。该真实物体为一个静止的物体,图像采集单元2只需要采集一次真实物体的物体图像并进行保存即可。
本实施例中,应用现有技术,在传统的VR设备例如VR眼镜中显示VR工作环境,该VR工作环境由相应的VR应用程序形成,例如VR技术实现的文档处理软件,或者VR技术实现的图像编辑软件等,现有技术中针对上述VR应用软件有较多的实现方式,在此不再赘述。
则上述VR工作辅助系统中,在VR设备中的显示单元1(例如VR眼镜的显示面)的工作界面中显示上述VR应用形成的VR工作环境。并且,采用上述区域建立单元3在上述VR工作环境的工作界面上设置一个专门用于显示上述真实物体的物体图像的显示区域。
具体地,形成上述显示区域的大致原理是:采用上述区域建立单元3对生成VR工作环境的第一图像数据进行修改,以在VR工作环境的每一帧中插入上述显示区域。根据对第一图像数据进行的修改,上述显示区域可以存在于VR工作环境的工作界面中的适合的位置。例如,图2中所示为VR工作环境中的其中一帧,其中A用于表示整个VR工作环境的工作界面,B用于表示其中建立的显示区域。该实施例中,为了尽量不遮挡用户的工作界面,上述显示区域B设置于整个工作界面A的左上方。在实际应用中,可以根据用户的设置自由调整显示区域B相对于工作界面A的位置。并且在每一帧的工作界面A中均添加上述显示区域B,因此用户观察到的显示区域B始终存在于工作界面A的固定位置上。
本实施例中,上述区域建立单元3中建立的显示区域初始为空白的,没有任何图像填充。该显示区域连同用于表示VR工作环境的第一图像数据一起被保存在系统中,实质为一组数据,可供系统进行修改,并可以在经过修改后显示于VR设备的显示单元的显示画面上。
进一步地,本实施例中,采用上述处理单元4获取预先保存的真实物体的物体图像并进行处理,并将处理后的物体图像绘制到上述每一帧的显示区域内,从而在上述第一图像数据的基础上通过绘制和处理形成第二图像数据。
最终,通过发送单元5将上述第二图像数据发送至显示单元1中进行显示,此时显示的内容就是类似图2中所示的显示画面,在工作界面A中显示与VR工作环境相关的一些VR画面,而在显示区域B内显示上述物体图像。
进一步地,上述处理单元4可以包括在VR设备的处理器中,该处理器同样对VR应用进行处理从而形成VR工作环境。上述区域建立单元2同样可以包括在VR设备的处理器中。
本发明的较佳的实施例中,如图3中所示,上述图像采集单元2包括:
图像采集模块21,用于采集真实物体的物体图像;
内存模块22,连接图像采集模块21,用于暂存图像采集模块采集到的物体图像。
上述内存模块22可以设置在VR设备中的内存中。
本发明的较佳的实施例中,于VR设备中采用direct3D技术渲染实现在显示界面中显示工作环境。因此上述区域建立单元3在由direct3D渲染绘制的双眼的VR工作环境的工作界面的每一帧中建立上述显示区域。
本发明的较佳的实施例中,仍然如图1中所示,上述VR工作辅助系统中还包括:
第一队列单元6,连接区域建立单元3,第一队列单元中设置有工作环境的图元的顶点数据;
第二队列单元7,分别连接第一队列单元6和区域建立单元3,第二队列单元中设置有缓存关联于顶点数据的索引数据;
则区域建立单元3通过向第一队列单元6和第二队列单元7中添加调整数据来建立显示区域。
进一步地,在VR设备采用direct3D技术进行渲染的基础上,上述第一队列单元6实际为direct3D中的顶点队列(vertex buffer),上述第二队列单元7实际为direct3D中的索引队列(index buffer)。上述区域建立单元3在direct3D渲染的顶点队列和索引队列中加入调整数据,则能够在VR工作环境的工作界面中形成一个显示区域,以供绘制物体图像。
上述显示区域优选的可以为矩形区域,也可以为其他形状的区域,具体区域形状的调整可以通过添加的上述调整数据来实现。
进一步地,上述调整数据包括添加至第一队列单元6的顶点调整数据以及添加至第二队列单元7的索引调整数据。上述顶点调整数据和索引调整数据为渲染形成上述显示区域所必须的图元的点和索引的相关数据。
当然,在上述顶点队列和索引队列中也可以加入其他修饰性数据,包括一些属于图像编程细节的数据例如几何元素的拓扑特征、纹理信息以及数据点的法向信息等。
本发明的较佳的实施例中,如图4中所示,上述区域建立单元3中包括:
调整模块31,用于通过调整上述调整数据来对显示区域进行调整。
具体地,本实施例中,如上文中所述,通过向顶点队列和索引队列中添加调整数据的方式可以在VR工作环境的工作界面中形成一个显示区域,则通过对这些调整数据的修改和调整就可以对上述显示区域的尺寸、形状乃至边框装饰等进行调整,从而满足用户进行个人定制化调整的需求。
本发明的较佳的实施例中,如图5中所示,上述处理单元4进一步包括:
获取模块41,用于获取图像采集单元中保存的真实物体的物体图像;
转换模块42,连接获取模块41,用于将物体图像转换为相应的图片纹理数据并输出;
绘制模块43,连接转换模块42,用于将转换模块输出的图片纹理数据绘制到每一帧的显示区域内,以形成第二图像数据。
具体地,本实施例中,上述处理单元4获取到图像采集单元2采集并缓存的物体图像,随后将该物体图像转换成相应的图片纹理数据,最后根据该图片纹理数据,在上述区域建立单元3中建立的显示区域中绘制成相应的图像,用于在显示区域内显示现实环境中的真实物体。
本发明的较佳的实施例中,最终形成的第二图像数据,经由direct3D技术进行渲染之后得到可以在VR设备的显示的那元的显示画面上显示的虚拟图像,随后上述发送单元5将虚拟图像发送至显示单元1中显示。
综上,本发明技术方案中公开了一种能够融合真实物体的VR工作辅助系统。该VR工作辅助系统首先基于现有技术中的VR工作相关应用,在VR设备的显示单元的显示画面中形成VR工作环境的工作界面,随后通过添加和/或修改direct3D的vertex buffer和indexbuffer中数据的方式在上述工作界面中添加一个专门用于显示现实环境中真实物体的显示区域,并采用系统的处理器将预先拍摄并保存的真实物体的物体图像绘制到上述显示区域内,随后将上述融合了真实物体的图像数据由direct3D技术进行渲染并发送至VR设备的显示单元进行显示,最终呈现给用户的就是融合了真实物体的图像的VR工作环境,用户在VR工作环境中工作的同时可以观察到相应的真实物体,给工作提供一定的参照和帮助,从而提升工作效率。
本发明的较佳的实施例中,基于上文中所述的融合真实物体的VR工作辅助系统,现提供一种融合真实物体的VR工作辅助方法,该方法应用于VR设备中,VR设备中包括一显示单元,于显示单元的显示界面中显示VR的工作环境。
该方法具体如图6中所示,包括:
步骤S1,采用一图像采集单元采集现实环境中的真实物体的物体图像并进行保存;
步骤S2,采用一区域建立单元对关联于工作环境的第一图像数据进行修改,以在工作环境的显示画面的每一帧中均建立一显示区域;
步骤S3,采用一处理单元获取物体图像并进行处理,并将物体图像分别绘制到每一帧的显示区域内以形成第二图像数据,第二图像数据包括在第一图像数据中;
步骤S4,采用一发送单元将包括第二图像数据的第一图像数据发送至显示单元进行显示。
本发明的较佳的实施例中,于VR设备中采用direct3D技术渲染实现在显示界面中显示工作环境;
则在一第一队列单元中设置工作环境的图元的顶点数据,以及在一第二队列单元中设置关联于顶点数据的索引数据;
上述步骤S2中,区域建立单元通过向第一队列单元和第二队列单元中添加调整数据来建立显示区域;
上述调整数据包括添加至第一队列单元的顶点调整数据以及添加至第二队列单元的索引调整数据。
本发明的较佳的实施例中,如图7中所示,上述步骤S3具体包括:
步骤S31,处理单元获取图像采集单元中保存的真实物体的物体图像;
步骤S32,处理单元将物体图像转换为相应的图片纹理数据并输出;
步骤S33,处理单元将转换模块输出的图片纹理数据绘制到显示区域内,以形成第二图像数据。
本发明的较佳的实施例中,还提供一种VR设备,其中包括上文中所述的融合真实物体的VR工作辅助系统。
本发明的较佳的实施例中,还提供一种VR设备,其中采用上文中所述的融合真实物体的VR工作辅助方法。
以上所述仅为本发明较佳的实施例,并非因此限制本发明的实施方式及保护范围,对于本领域技术人员而言,应当能够意识到凡运用本发明说明书及图示内容所作出的等同替换和显而易见的变化所得到的方案,均应当包含在本发明的保护范围内。
Claims (12)
1.一种融合真实物体的VR工作辅助系统,应用于VR设备中,所述VR设备中包括一显示单元,于所述显示单元的显示界面中显示VR的工作环境;其特征在于,包括:
图像采集单元,用于采集现实环境中的真实物体的物体图像并进行保存;
区域建立单元,用于对关联于所述工作环境的第一图像数据进行修改,以在所述工作环境的显示画面的每一帧中均建立一显示区域;
处理单元,分别连接所述图像采集单元和所述区域建立单元,用于获取所述物体图像并进行处理,以将所述物体图像分别绘制到每一帧的所述显示区域内并形成第二图像数据,所述第二图像数据包括在所述第一图像数据中;
发送单元,分别连接所述处理单元和所述显示单元,用于将包括所述第二图像数据的所述第一图像数据发送至所述显示单元进行显示。
2.如权利要求1所述的VR工作辅助系统,其特征在于,所述图像采集单元包括:
图像采集模块,用于采集所述真实物体的所述物体图像;
内存模块,连接所述图像采集模块,用于暂存所述图像采集模块采集到的所述物体图像。
3.如权利要求1所述的VR工作辅助系统,其特征在于,于所述VR设备中采用direct3D技术渲染实现在所述显示界面中显示所述工作环境。
4.如权利要求3所述的VR工作辅助系统,其特征在于,还包括:
第一队列单元,连接所述区域建立单元,所述第一队列单元中设置有所述工作环境的图元的顶点数据;
第二队列单元,分别连接所述第一队列单元和所述区域建立单元,所述第二队列单元中设置有关联于所述顶点数据的索引数据;
则所述区域建立单元通过向所述第一队列单元和所述第二队列单元中添加调整数据来建立所述显示区域;
所述调整数据包括添加至所述第一队列单元的顶点调整数据以及添加至所述第二队列单元的索引调整数据。
5.如权利要求4所述的VR工作辅助系统,其特征在于,所述区域建立单元中包括:
调整模块,用于通过调整所述合适数据来对所述显示区域进行调整。
6.如权利要求1所述的VR工作辅助系统,其特征在于,所述显示区域为一矩形区域。
7.如权利要求1所述的VR工作辅助系统,其特征在于,所述处理单元进一步包括:
获取模块,用于获取所述图像采集单元中保存的所述真实物体的所述物体图像;
转换模块,连接所述获取模块,用于将所述物体图像转换为相应的图片纹理数据并输出;
绘制模块,连接转换模块,用于将所述转换模块输出的所述图片纹理数据绘制到每一帧的所述显示区域内,以形成所述第二图像数据。
8.一种融合真实物体的VR工作辅助方法,应用于VR设备中,所述VR设备中包括一显示单元,于所述显示单元的显示界面中显示VR的工作环境;其特征在于,包括:
步骤S1,采用一图像采集单元采集现实环境中的真实物体的物体图像并进行保存;
步骤S2,采用一区域建立单元对关联于所述工作环境的第一图像数据进行修改,以在所述工作环境的显示画面的每一帧中均建立一显示区域;
步骤S3,采用一处理单元获取所述物体图像并进行处理,并将所述物体图像分别绘制到每一帧的所述显示区域内以形成第二图像数据,所述第二图像数据包括在所述第一图像数据中;
步骤S4,采用一发送单元将包括所述第二图像数据的所述第一图像数据发送至所述显示单元进行显示。
9.如权利要求8所述的VR工作辅助方法,其特征在于,于所述VR设备中采用direct3D技术渲染实现在所述显示界面中显示所述工作环境;
则在一第一队列单元中设置所述工作环境的图元的顶点数据,以及在一第二队列单元中设置关联于所述顶点数据的索引数据;
所述步骤S2中,所述区域建立单元通过向所述第一队列单元和所述第二队列单元中添加调整数据来建立所述显示区域;
所述调整数据包括添加至所述第一队列单元的顶点调整数据以及添加至所述第二队列单元的索引调整数据。
10.如权利要求8所述的VR工作辅助方法,其特征在于,所述步骤S3具体包括:
步骤S31,所述处理单元获取所述图像采集单元中保存的所述真实物体的所述物体图像;
步骤S32,所述处理单元将所述物体图像转换为相应的图片纹理数据并输出;
步骤S33,所述处理单元将所述转换模块输出的所述图片纹理数据绘制到所述显示区域内,以形成所述第二图像数据。
11.一种VR设备,其特征在于,包括如权利要求1-7所述的融合真实物体的VR工作辅助系统。
12.一种VR设备,其特征在于,采用如权利要求8-10所述的融合真实物体的VR工作辅助方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810242199.7A CN108536286A (zh) | 2018-03-22 | 2018-03-22 | 一种融合真实物体的vr工作辅助系统、方法及vr设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810242199.7A CN108536286A (zh) | 2018-03-22 | 2018-03-22 | 一种融合真实物体的vr工作辅助系统、方法及vr设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108536286A true CN108536286A (zh) | 2018-09-14 |
Family
ID=63485135
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810242199.7A Pending CN108536286A (zh) | 2018-03-22 | 2018-03-22 | 一种融合真实物体的vr工作辅助系统、方法及vr设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108536286A (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103136793A (zh) * | 2011-12-02 | 2013-06-05 | 中国科学院沈阳自动化研究所 | 一种基于增强现实的实景融合方法及装置 |
CN105843386A (zh) * | 2016-03-22 | 2016-08-10 | 宁波元鼎电子科技有限公司 | 一种商场虚拟试衣系统 |
CN107018336A (zh) * | 2017-04-11 | 2017-08-04 | 腾讯科技(深圳)有限公司 | 图像处理的方法和装置及视频处理的方法和装置 |
CN107231531A (zh) * | 2017-05-23 | 2017-10-03 | 青岛大学 | 一种网络虚拟现实技术与实拍结合影视制作系统 |
CN107665505A (zh) * | 2016-07-29 | 2018-02-06 | 成都理想境界科技有限公司 | 基于平面检测实现增强现实的方法及装置 |
CN108986232A (zh) * | 2018-07-27 | 2018-12-11 | 广州汉智网络科技有限公司 | 一种在vr显示设备中呈现ar环境画面的方法 |
-
2018
- 2018-03-22 CN CN201810242199.7A patent/CN108536286A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103136793A (zh) * | 2011-12-02 | 2013-06-05 | 中国科学院沈阳自动化研究所 | 一种基于增强现实的实景融合方法及装置 |
CN105843386A (zh) * | 2016-03-22 | 2016-08-10 | 宁波元鼎电子科技有限公司 | 一种商场虚拟试衣系统 |
CN107665505A (zh) * | 2016-07-29 | 2018-02-06 | 成都理想境界科技有限公司 | 基于平面检测实现增强现实的方法及装置 |
CN107018336A (zh) * | 2017-04-11 | 2017-08-04 | 腾讯科技(深圳)有限公司 | 图像处理的方法和装置及视频处理的方法和装置 |
CN107231531A (zh) * | 2017-05-23 | 2017-10-03 | 青岛大学 | 一种网络虚拟现实技术与实拍结合影视制作系统 |
CN108986232A (zh) * | 2018-07-27 | 2018-12-11 | 广州汉智网络科技有限公司 | 一种在vr显示设备中呈现ar环境画面的方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106157359B (zh) | 一种虚拟场景体验系统的设计方法 | |
JP5891426B2 (ja) | 全周囲立体画像の描画を行う画像描画装置、画像描画方法、画像描画プログラム | |
CN113099204B (zh) | 一种基于vr头戴显示设备的远程实景增强现实方法 | |
EP1136906A2 (en) | Improved method and apparatus for creating virtual worlds | |
CN113313818B (zh) | 一种三维重建方法、装置及系统 | |
CN109510975B (zh) | 一种视频图像的提取方法、设备及系统 | |
CA2853761A1 (en) | Rendering system, rendering server, control method thereof, program, and recording medium | |
CN105916022A (zh) | 一种基于虚拟现实技术的视频图像处理方法及装置 | |
CN102834849A (zh) | 进行立体视图像的描绘的图像描绘装置、图像描绘方法、图像描绘程序 | |
CN113156649B (zh) | 具有动态区域分辨率的虚拟/增强现实系统 | |
CN107065197B (zh) | 面向vr眼镜的人眼跟踪远程渲染实时显示方法及系统 | |
US11417060B2 (en) | Stereoscopic rendering of virtual 3D objects | |
CN101477701A (zh) | 面向AutoCAD和3DS MAX软件的植入式真三维立体渲染方法 | |
CN110488981A (zh) | 基于云渲染的手机端vr场景交互式显示方法 | |
US10127714B1 (en) | Spherical three-dimensional video rendering for virtual reality | |
CN107230249A (zh) | 阴影渲染方法和装置 | |
JP2010259017A (ja) | 表示装置、表示方法、および表示プログラム | |
CN107172415A (zh) | 一种vr全息一体同步交互展示系统及其控制方法 | |
CN108616729A (zh) | 增强用户界面三维立体效果的方法及系统 | |
US6559844B1 (en) | Method and apparatus for generating multiple views using a graphics engine | |
CN102984483B (zh) | 一种三维用户界面显示系统及方法 | |
CN114612641A (zh) | 素材的迁移方法和装置、数据处理方法 | |
CN108536286A (zh) | 一种融合真实物体的vr工作辅助系统、方法及vr设备 | |
CN101488229A (zh) | 面向pci三维分析模块的植入式真三维立体渲染方法 | |
CN109299989A (zh) | 虚拟现实试衣系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20221107 Address after: 201109 floor 1, building 5, No. 951, Jianchuan Road, Minhang District, Shanghai Applicant after: Shanghai Nayi Technology Co.,Ltd. Address before: 200240 Rooms 315 and 317, Building 5, No. 951, Jianchuan Road, Minhang District, Shanghai Applicant before: SHANGHAI PYGMAL INFORMATION TECHNOLOGY CO.,LTD. |
|
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180914 |