CN109862339A - 增强现实的再现方法、装置、系统、存储介质和处理器 - Google Patents

增强现实的再现方法、装置、系统、存储介质和处理器 Download PDF

Info

Publication number
CN109862339A
CN109862339A CN201910122536.3A CN201910122536A CN109862339A CN 109862339 A CN109862339 A CN 109862339A CN 201910122536 A CN201910122536 A CN 201910122536A CN 109862339 A CN109862339 A CN 109862339A
Authority
CN
China
Prior art keywords
information
current
virtual media
user
location information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910122536.3A
Other languages
English (en)
Inventor
杨萌
戴付建
赵烈烽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Sunny Optics Co Ltd
Original Assignee
Zhejiang Sunny Optics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Sunny Optics Co Ltd filed Critical Zhejiang Sunny Optics Co Ltd
Priority to CN201910122536.3A priority Critical patent/CN109862339A/zh
Publication of CN109862339A publication Critical patent/CN109862339A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Processing Or Creating Images (AREA)

Abstract

本申请提供了一种增强现实的再现方法、装置、系统、存储介质和处理器,该方法包括:获取用户当前的位置信息和当前的视角信息对应的虚拟媒体信息;根据当前的环境光信息以及位置信息生成图像滤波模板,图像滤波模板用于修正虚拟媒体信息的亮度、色温和/或对比度;采用图像滤波模板对虚拟媒体信息的至少部分进行修正。该种方法不需要太多额外的计算资源,也不需要额外的硬件就可以使得AR的光照效果与环境光照效果保持相似或者一致,从而降低了由于AR的光照效果与环境光照效果差别较大导致的用户不适感。

Description

增强现实的再现方法、装置、系统、存储介质和处理器
技术领域
本申请涉及增强现实领域,具体而言,涉及一种增强现实的再现方法、装置、存储介质和处理器。
背景技术
增强现实(Augmented Reality)是在真实的现实世界视觉信息的基础上加入包括视频、图像、文字、声音等其他计算机产生的虚拟媒体信息的技术。该技术的一个重要应用领域是帮助用户接入当前场景中在物理距离上或者时间上不可能接入的信息,并丰富用户的体验。例如,在用户游览虚拟的博物馆、展览馆、古迹时,可以通过用户自身携带的终端设备,如手机、相机、平板、头戴显示器、眼睛等在真实的世界场景中加入本来不存在的虚拟物品或者场景。
但是,由于所加入的虚拟物品或者场景一般是保持在终端设备或者是网络上其他存储位置的预先准备的固定媒体信息,与现实世界中不断变化的光影条件可能存在较大差别,可能导致用户产生不适感。
现有技术中,为了缓解由光影变化引起的用户的不适感,在用户通过移动终端进行其所处的封闭环境中的增强现实AR体验,例如视频、互动游戏等时,可以根据环境光线的不同对AR中虚拟媒体内容实时添加可变的光照效果,但是这种方法是非常需要计算资源的,由于目前移动终端等客户端本身的硬件限制,进行这样的光照计算并不现实。另外一种方法需要通过预渲染来将光照效果与虚拟媒体内容一起保存,并且仅给用户再现之前预存的内容。但是,预存的内容也有其容量限制,难以对应不同时间、天候等各类环境光条件。
在背景技术部分中公开的以上信息只是用来加强对本文所描述技术的背景技术的理解,因此,背景技术中可能包含某些信息,这些信息对于本领域技术人员来说并未形成在本国已知的现有技术。
发明内容
本申请的主要目的在于提供一种增强现实的再现方法、装置、存储介质和处理器,以解决现有技术中在不要求额外硬件的情况下难以缓解AR的光照效果与环境光照效果差别较大导致的用户不适感的问题。
为了实现上述目的,根据本申请的一个方面,提供了一种增强现实的再现方法,其特征在于,包括:获取用户当前的位置信息和当前的视角信息对应的虚拟媒体信息;根据当前的环境光信息以及上述位置信息生成图像滤波模板,上述图像滤波模板用于修正虚拟媒体信息的亮度、色温和/或对比度;采用上述图像滤波模板对上述虚拟媒体信息的至少部分进行修正。
进一步地,在上述根据当前所处的环境的光信息以及上述位置信息生成图像滤波模板之前,上述再现方法还包括:获取当前的上述环境光信息,上述环境光信息是通过比较预定照射角度与当前环境的照射角度以及比较预定平均亮度与当前环境的平均亮度得到的。
进一步地,上述预定照射角度为在预定照射条件下,成像装置中的至少两个成像镜头感测到的亮度差,上述当前环境的照射角度为在当前的照射角度下,上述成像装置中的至少两个上述成像镜头感测到的亮度差,上述成像装置中的多个上述成像镜头布置在上述位置信息对应的用户当前的位置的周围的不同位置。
进一步地,上述预定平均亮度为在预定照射条件下,至少两个上述成像镜头感测到的亮度平均值,上述当前环境的平均亮度为在当前的照射角度下,至少两个上述成像镜头感测到的亮度平均值。
进一步地,上述位置信息的获取过程包括:获取用户的当前位置与各上述成像镜头之间的相对位置信息,上述相对位置信息包括距离。
进一步地,上述再现方法还包括:在上述位置信息中的上述当前位置与至少一个上述成像镜头之间的距离大于预定距离的情况下,停止获取上述虚拟媒体信息。
根据本申请的另一方面,提供了一种增强现实的再现方法,上述再现方法包括:服务端根据用户当前的位置信息和视角信息确定对应的虚拟媒体信息并将上述虚拟媒体信息发送至客户端;客户端根据当前的环境光信息以及上述位置信息生成图像滤波模板上述图像滤波模板用于修正图像的亮度、色温和/或对比度;客户端采用上述图像滤波模板对上述虚拟媒体信息的至少部分进行修正。
根据本申请的另一方面,提供了一种增强现实的再现装置,上述再现装置包括:第一获取单元,用于获取用户当前的位置信息和当前的视角信息对应的虚拟媒体信息;生成单元,用于根据当前的环境光信息以及上述位置信息生成图像滤波模板,上述图像滤波模板用于修正图像的亮度、色温和/或对比度;修正单元,用于采用上述图像滤波模板对上述虚拟媒体信息的至少部分进行修正。
根据本申请的另一方面,提供了一种增强现实的再现系统,上述再现系统包括:第一软件,作为客户端,上述第一软件用于执行任意一种上述的再现方法;第二软件,作为服务端,上述第二软件用于根据用户当前的位置信息和视角信息确定对应的虚拟媒体信息并发送至上述第一软件;成像装置,包括布置在上述位置信息对应的用户当前的位置的周围的不同位置的多个成像镜头,上述成像装置用于获取当前的环境光信息。
根据本申请的另一方面,提供了一种存储介质,上述存储介质包括存储的程序,其中,上述程序执行任意一种上述的再现方法。
应用本申请的技术方案,该再现方法中,只需要根据当前的环境光信息以及位置信息生成图像滤波模板,然后利用图像滤波模板修正虚拟媒体信息。该种方法不需要太多额外的计算资源,也不需要额外的硬件就可以使得AR的光照效果与环境光照效果保持相似或者一致,从而降低了由于AR的光照效果与环境光照效果差别较大导致的用户不适感。
附图说明
构成本申请的一部分的说明书附图用来提供对本申请的进一步理解,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1示出了根据本申请的增强现实的再现方法实施例一的流程示意图;以及
图2示出了根据本申请的增强现实的再现方法实施例八的流程示意图;
图3示出了根据本申请的增强现实的再现方法实施例的结构示意图。
具体实施方式
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。
需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
正如背景技术中所说,现有技术中在不要求额外硬件的情况下难以缓解AR的光照效果与环境光照效果差别较大导致的用户不适感的问题。
为了解决上述的技术问题,根据本申请的第一实施例,提供了一种增强现实的再现方法。
图1是根据本申请实施例的增强现实的再现方法的流程图。如图1所示,该方法包括以下步骤:
步骤S101,获取用户当前的位置信息和当前的视角信息对应的虚拟媒体信息;
步骤S102,根据当前的环境光信息以及位置信息生成图像滤波模板,上述图像滤波模板用于修正虚拟媒体信息的亮度、色温和/或对比度;
步骤S103,采用上述图像滤波模板对上述虚拟媒体信息的至少部分进行修正。
需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
上述的再现方法中,只需要根据当前的环境光信息以及位置信息生成图像滤波模板,然后利用图像滤波模板修正虚拟媒体信息。该种方法不需要太多额外的计算资源,也不需要额外的硬件就可以使得AR的光照效果与环境光照效果保持相似或者一致,从而降低了由于AR的光照效果与环境光照效果差别较大导致的用户不适感。
在实际的应用过程中,由于需要根据用户当前的位置信息和当前的视角信息获取对应的虚拟媒体信息,所以,本申请的第二实施例中,在步骤S101之前,上述再现方法还包括:获取用户当前的位置信息和当前的视角信息。利用客户端自带的各类传感器来感测用户的位置信息和视角信息,传感器包括加速度计、陀螺仪、重力感应、GPS、距离传感器等,也尤其是包括用来直接拍摄或预览当前环境中的任何一部分的成像装置。
为了确保从当前的环境获取到精确的环境光信息,进一步保证图像滤波模板的准确生成,本申请的第三实施例中,上述再现方法还包括:获取当前的环境光信息,上述环境光信息是通过比较预定照射角度与当前环境的照射角度以及比较预定平均亮度与当前环境的平均亮度得到的。该步骤只要在生成图像滤波模板之前执行即可,具体的与其他步骤的执行顺序可以根据实际情况来选择。
为了进一步获取准确的预定照射角度以及当前环境的照射角度,本申请的第四实施例中,上述预定照射角度为在预定照射条件下,成像装置中的至少两个成像镜头感测到的亮度差,上述当前环境的照射角度为在当前的照射角度下,上述成像装置中的至少两个上述成像镜头感测到的亮度差,上述成像装置中的多个上述成像镜头布置在上述位置信息对应的用户当前的位置的周围的不同位置,即在用户所处的当前环境中包括与客户端通信耦合的多个成像镜头,可以分布在墙壁、天花板和地板等多个位置,这些额外的成像镜头用来拍摄场景图像,以获取照射角度等光信息。
同样地,为了准确地获取预定平均亮度以及当前环境的平均亮度,本申请的第五实施例中,预定平均亮度为在预定照射条件下,至少两个成像镜头感测到的亮度平均值,当前环境的平均亮度为在当前的照射角度下,至少两个成像镜头感测到的亮度平均值。即成像装置中的成像镜头还用来获取环境的亮度平均值。
也就是说,每个预设或者自选的用户观察点应配置至少两个的成像镜头。可以在若干标准的光照条件例如均匀光照条件下,对每个成像镜头所拍摄的图像进行标定,之后成像镜头所拍摄的图像与标定的图像的偏差将可以用来评估光照条件的变化。例如,一个成像镜头的偏差与另一个成像镜头的偏差之间的差别产生了变化,说明对于该场景的光学入射角度出现了变化。而对应于同一个场景的多个成像镜头整体出现的变化说明环境光强尤其是漫射光强出现了变化。以上所感测的入射角度和环境光强可以与标定的若干预存入射角度和环境光强进行对比,从而估计当前正在生效的自然光照条件或人工照射条件以用于虚拟媒体信息的模拟。多个成像镜头的光信息可以通过服务端(例如服务器或基站)进行汇总和处理得到环境光信息并发送给客户端,且服务器或基站还可以同时用来提供增强现实的虚拟媒体信息。
需要说明的是,本申请的“比较预定照射角度与当前环境的照射角度以及比较预定平均亮度与当前环境的平均亮度”步骤并不限于上述实施例中由服务端执行,其还可以由成像装置实施,那么,具体地,成像装置中包括比较单元,该单元用于比较预定照射角度与当前环境的照射角度以及比较预定平均亮度与当前环境的平均亮度;“比较预定照射角度与当前环境的照射角度以及比较预定平均亮度与当前环境的平均亮度”步骤还可以由客户端中来实施,那么,在“根据当前的环境光信息以及位置信息生成图像滤波模板”步骤之前,该再现方法还包括:比较预定照射角度与当前环境的照射角度以及比较预定平均亮度与当前环境的平均亮度,以获取环境光信息。
另外,还需要说明的是,本申请的预定照射角度、当前环境的照射角度、预定平均亮度以及当前环境的平均亮度的获取并不限于上述的方式,还可以通过其他的合适的方式来获取上述的这些参数,以准确获取环境光信息。
在实际的应用过程中,用户当前的位置信息是否准确对虚拟媒体信息的准确获取以及图像滤波模板的准确生成均有影响,为了进一步准确获取虚拟媒体信息以及生成准确的图像滤波模板,本申请的第六实施例中,上述位置信息的获取过程包括:获取用户的当前位置与各成像镜头之间的相对位置信息,上述相对位置信息包括距离,即位置信息包括用户的当前位置与各成像镜头之间的距离。
在实际的再现过程中,有时候用户会离开需要添加虚拟媒体信息的预定区域,这时如果再在真实的视觉信息中添加虚拟媒体信息,使得用户看到的虚拟媒体信息和真实的视觉信息有些格格不入,这种情况下,为了避免用户在离开布置成像镜头的区域后增强现实的再现仍继续运行,本申请的第七实施例中,上述再现方法还包括:在上述位置信息中的当前位置与至少一个成像镜头之间的距离大于预定距离的情况下,停止获取上述虚拟媒体信息。也就是说,上述的预定区域是用户的当前位置和成像镜头之间的距离来确定的,只要用户与至少一个成像镜头之间的距离大于预定距离,则停止增强现实内容再现。
例如,一种具体的实施例中,客户端从感测的位置信息和视角信息从服务端接收虚拟媒体信息,即对应于用户的视角之内的虚拟媒体信息。用户的视角可以是由客户端的成像镜头拍摄或预览的画面所对应的视角。然后,根据当前的环境光信息和当前的位置信息生产图像滤波模板或者读取已经生产过的图像滤波模板,并将其应用于对应于该位置和该视角的虚拟媒体信息中。图像滤波模板不进行光照的计算,而仅是应用于待再现的视频画面上进行亮度、色温以及对比度的全局修正,使其与环境更加具有一致性。例如,在环境光强由于遮挡或光照变换等的影响而低于先前已经保存的虚拟媒体信息中对应的环境光强时,客户端可以无需读取其他虚拟媒体信息而自行相应降低图像的亮度,尤其是可以根据光照角度改变图像中受光区域部分的亮度,并且可以适当增加对比度来模拟环境光照。再例如,在人工或自动调光变换场景中的入射光颜色时,也可以由客户端根据环境光信息来自行改变所呈现图像的色温等,保持与环境光进行同步变化。再例如,在环境中出现了新的光源如打开相应的射灯时,客户端也增加一个与其颜色、亮度和光照方向相匹配的图像滤波器模拟该全局光照。此过程中,服务器只需要保存基准状态下的虚拟媒体信息,而光照效果都通过客户端进行模拟。
本申请实施例八还提供了一种增强现实的再现方法。图2是根据本申请实施例的增强现实的再现方法的流程图。如图2所示,该方法包括以下步骤:
步骤S201,服务端根据用户当前的位置信息和视角信息确定对应的上述虚拟媒体信息并将虚拟媒体信息发送至客户端;
步骤S202,客户端根据当前的环境光信息以及位置信息生成图像滤波模板,上述图像滤波模板用于修正图像的亮度、色温和/或对比度;
步骤S203,客户端采用上述图像滤波模板对上述虚拟媒体信息的至少部分进行修正。
需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
上述的再现方法中,首先,服务端根据用户当前的位置信息和视角信息确定对应的虚拟媒体信息并将虚拟媒体信息发送至客户端,然后,客户端根据当前的环境光信息以及位置信息生成图像滤波模板,最后,客户端利用生成的图像滤波模板修正虚拟媒体信息。上述再现方法不需要太多额外的计算资源,也不需要额外的硬件就可以使得AR的光照效果与环境光照效果保持相似或者一致,从而降低了由于AR的光照效果与环境光照效果差别较大导致的用户不适感。
本申请实施例九还提供了一种增强现实的再现装置,需要说明的是,本申请实施例的增强现实的再现装置可以用于执行本申请实施例所提供的用于增强现实的再现方法。以下对本申请实施例提供的增强现实的再现装置进行介绍。
图3是根据本申请实施例九的增强现实的再现装置的示意图。如图3所示,该装置包括:
第一获取单元10,用于获取用户当前的位置信息和当前的视角信息对应的虚拟媒体信息;
生成单元20,用于根据当前的环境光信息以及位置信息生成图像滤波模板,上述图像滤波模板用于修正图像的亮度、色温和/或对比度;
修正单元30,用于采用图像滤波模板对虚拟媒体信息的至少部分进行修正。
上述增强现实的再现装置中,首先,第一获取单元获取用户当前的位置信息和当前的视角信息对应的虚拟媒体信息,然后,生成单元根据当前的环境光信息以及位置信息生成图像滤波模板,最后,修正单元利用图像滤波模板修正虚拟媒体信息。上述再现装置不需要太多额外的计算资源,也不需要额外的硬件就可以使得AR的光照效果与环境光照效果保持相似或者一致,从而降低了由于AR的光照效果与环境光照效果差别较大导致的用户不适感。
在实际的应用过程中,由于需要根据用户当前的位置信息和当前的视角信息获取对应的虚拟媒体信息,本申请的第十实施例中,上述第一获取单元包括传感器,用于获取用户当前的位置信息和当前的视角信息。利用客户端自带的各类传感器来感测用户的位置信息和视角信息,传感器包括加速度计、陀螺仪、重力感应、GPS、距离传感器等,也尤其是包括用来直接拍摄或预览当前环境中的任何一部分的成像装置。
为了确保从当前的环境获取到精确的环境光信息,进一步保证图像滤波模板的准确生成,本申请的第十一实施例中,上述再现装置还包括第二获取单元,用于获取当前的环境光信息,上述环境光信息是通过比较预定照射角度与当前环境的照射角度以及比较预定平均亮度与当前环境的平均亮度得到的。该步骤只要在生成图像滤波模板之前执行即可,具体的与其他步骤的执行顺序可以根据实际情况来选择。
为了进一步获取准确的预定照射角度以及当前环境的照射角度,本申请的第十二实施例中,上述预定照射角度为在预定照射条件下,成像装置中的至少两个成像镜头感测到的亮度差,上述当前环境的照射角度为在当前的照射角度下,上述成像装置中的至少两个上述成像镜头感测到的亮度差,上述成像装置中的多个上述成像镜头布置在上述位置信息对应的用户当前的位置的周围的不同位置,即在用户所处的当前环境中包括与客户端通信耦合的多个成像镜头,可以分布在墙壁、天花板和地板等多个位置,这些额外的成像镜头用来拍摄场景图像,以获取照射角度等光信息。
同样地,为了准确地获取预定平均亮度以及当前环境的平均亮度,本申请的第十三实施例中,预定平均亮度为在预定照射条件下,至少两个成像镜头感测到的亮度平均值,当前环境的平均亮度为在当前的照射角度下,至少两个成像镜头感测到的亮度平均值。即成像装置中的成像镜头还用来获取环境的亮度平均值。
也就是说,每个预设或者自选的用户观察点应配置至少两个的成像镜头。可以在若干标准的光照条件例如均匀光照条件下,对每个成像镜头所拍摄的图像进行标定,之后成像镜头所拍摄的图像与标定的图像的偏差将可以用来评估光照条件的变化。例如,一个成像镜头的偏差与另一个成像镜头的偏差之间的差别产生了变化,说明对于该场景的光学入射角度出现了变化。而对应于同一个场景的多个成像镜头整体出现的变化说明环境光强尤其是漫射光强出现了变化。以上所感测的入射角度和环境光强可以与标定的若干预存入射角度和环境光强进行对比,从而估计当前正在生效的自然光照条件或人工照射条件以用于虚拟媒体信息的模拟。多个成像镜头的光信息可以通过服务端(例如服务器或基站)进行汇总和处理得到环境光信息并发送给客户端,且服务器或基站还可以同时用来提供增强现实的虚拟媒体信息。
需要说明的是,本申请的“比较预定照射角度与当前环境的照射角度以及比较预定平均亮度与当前环境的平均亮度”步骤并不限于上述实施例中由服务端执行,其还可以由成像装置实施,那么,具体地,成像装置中包括比较单元,该单元用于比较预定照射角度与当前环境的照射角度以及比较预定平均亮度与当前环境的平均亮度;“比较预定照射角度与当前环境的照射角度以及比较预定平均亮度与当前环境的平均亮度”步骤还可以由客户端中来实施,那么,具体地,客户端中包括比较单元,该单元用于比较预定照射角度与当前环境的照射角度以及比较预定平均亮度与当前环境的平均亮度。
在实际的再现过程中,有时候用户会离开需要添加虚拟媒体信息的区域,这时如果再在真实的视觉信息中添加虚拟媒体信息,使得用户看到的虚拟媒体信息和真实的视觉信息有些格格不入,这种情况下,为了避免用户在离开布置成像镜头的区域后增强现实的再现仍继续运行,本申请的第十四实施例中,上述再现装置还包括控制单元,用于在位置信息中的当前位置与至少一个成像镜头之间的距离大于预定距离的情况下,停止获取虚拟媒体信息。也就是说,上述的预定区域是用户的当前位置和成像镜头之间的距离来确定的,只要用户与至少一个成像镜头之间的距离大于预定距离,则停止增强现实内容再现。
本申请实施例十五还提供了一种增强现实的再现系统,需要说明的是,本申请实施例的增强现实的再现系统可以用于执行本申请实施例所提供的增强现实的再现装置。以下对本申请实施例提供的增强现实的再现系统进行介绍。再现系统包括:
第一软件,作为客户端,第一软件用于执行本申请实施例所提供的增强现实的再现方法;
第二软件,作为服务端,第二软件用于根据用户当前的位置信息和视角信息确定对应的虚拟媒体信息并发送至第一软件;
成像装置,包括布置在位置信息对应的用户当前的位置的周围的不同位置的多个成像镜头,成像装置用于获取当前的环境光信息。
上述增强现实的再现系统中,第二软件根据成像装置获取的用户当前的位置信息和视角信息确定对应的虚拟媒体信息并发送至第一软件,然后第一软件根据成像装置获取的当前的环境光信息以及位置信息生成图像滤波模板,并利用图像滤波模板修正虚拟媒体信息。上述再现系统不需要太多额外的计算资源,也不需要额外的硬件就可以使得AR的光照效果与环境光照效果保持相似或者一致,从而降低了由于AR的光照效果与环境光照效果差别较大导致的用户不适感。
上述增强现实的再现装置包括处理器和存储器,上述生成单元和修正单元等均作为程序单元存储在存储器中,由处理器执行存储在存储器中的上述程序单元来实现相应的功能。
处理器中包含内核,由内核去存储器中调取相应的程序单元。内核可以设置一个或以上,通过调整内核参数来降低了由于AR的光照效果与环境光照效果差别较大导致的用户不适感。
存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM),存储器包括至少一个存储芯片。
本申请实施例十六还本发明实施例提供了一种存储介质,其上存储有程序,该程序被处理器执行时实现上述增强现实的再现方法。
本申请实施例十七还本发明实施例提供了一种处理器,上述处理器用于运行程序,其中,程序运行时执行上述增强现实的再现方法。
本发明实施例提供了一种设备,设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序,处理器执行程序时实现至少以下步骤:
步骤S101,获取用户当前的位置信息和当前的视角信息对应的虚拟媒体信息;
步骤S102,根据当前的环境光信息以及位置信息生成图像滤波模板,图像滤波模板用于修正虚拟媒体信息的亮度、色温和/或对比度;
步骤S103,采用图像滤波模板对虚拟媒体信息的至少部分进行修正。
本文中的设备可以是服务器、PC、PAD、手机等。
本申请还提供了一种计算机程序产品,当在数据处理设备上执行时,适于执行初始化有至少如下方法步骤的程序:
步骤S101,获取用户当前的位置信息和当前的视角信息对应的虚拟媒体信息;
步骤S102,根据当前的环境光信息以及位置信息生成图像滤波模板,图像滤波模板用于修正虚拟媒体信息的亮度、色温和/或对比度;
步骤S103,采用图像滤波模板对虚拟媒体信息的至少部分进行修正。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
本领域技术人员应明白,本申请的实施例可提供为方法、系统或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
从以上的描述中,可以看出,本申请上述的实施例实现了如下技术效果:
本申请的再现方法不需要太多额外的计算资源,也不需要额外的硬件就可以使得AR的光照效果与环境光照效果保持相似或者一致,从而降低了由于AR的光照效果与环境光照效果差别较大导致的用户不适感。
以上所述仅为本申请的优选实施例而已,并不用于限制本申请,对于本领域的技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (10)

1.一种增强现实的再现方法,其特征在于,包括:
获取用户当前的位置信息和当前的视角信息对应的虚拟媒体信息;
根据当前的环境光信息以及所述位置信息生成图像滤波模板,所述图像滤波模板用于修正虚拟媒体信息的亮度、色温和/或对比度;
采用所述图像滤波模板对所述虚拟媒体信息的至少部分进行修正。
2.根据权利要求1所述的再现方法,其特征在于,在所述根据当前所处的环境的光信息以及所述位置信息生成图像滤波模板之前,所述再现方法还包括:
获取当前的所述环境光信息,所述环境光信息是通过比较预定照射角度与当前环境的照射角度以及比较预定平均亮度与当前环境的平均亮度得到的。
3.根据权利要求2所述的再现方法,其特征在于,所述预定照射角度为在预定照射条件下,成像装置中的至少两个成像镜头感测到的亮度差,所述当前环境的照射角度为在当前的照射角度下,所述成像装置中的至少两个所述成像镜头感测到的亮度差,所述成像装置中的多个所述成像镜头布置在所述位置信息对应的用户当前的位置的周围的不同位置。
4.根据权利要求3所述的再现方法,其特征在于,所述预定平均亮度为在预定照射条件下,至少两个所述成像镜头感测到的亮度平均值,所述当前环境的平均亮度为在当前的照射角度下,至少两个所述成像镜头感测到的亮度平均值。
5.根据权利要求3所述的再现方法,其特征在于,所述位置信息的获取过程包括:
获取用户的当前位置与各所述成像镜头之间的相对位置信息,所述相对位置信息包括距离。
6.根据权利要求5所述的再现方法,其特征在于,所述再现方法还包括:
在所述位置信息中的所述当前位置与至少一个所述成像镜头之间的距离大于预定距离的情况下,停止获取所述虚拟媒体信息。
7.一种增强现实的再现方法,其特征在于,所述再现方法包括:
服务端根据用户当前的位置信息和视角信息确定对应的虚拟媒体信息并将所述虚拟媒体信息发送至客户端;
客户端根据当前的环境光信息以及所述位置信息生成图像滤波模板,所述图像滤波模板用于修正图像的亮度、色温和/或对比度;
客户端采用所述图像滤波模板对所述虚拟媒体信息的至少部分进行修正。
8.一种增强现实的再现装置,其特征在于,所述再现装置包括:
第一获取单元,用于获取用户当前的位置信息和当前的视角信息对应的虚拟媒体信息;
生成单元,用于根据当前的环境光信息以及所述位置信息生成图像滤波模板,所述图像滤波模板用于修正图像的亮度、色温和/或对比度;
修正单元,用于采用所述图像滤波模板对所述虚拟媒体信息的至少部分进行修正。
9.一种增强现实的再现系统,其特征在于,所述再现系统包括:
第一软件,作为客户端,所述第一软件用于执行权利要求1至8中任一项所述的再现方法;
第二软件,作为服务端,所述第二软件用于根据用户当前的位置信息和视角信息确定对应的虚拟媒体信息并发送至所述第一软件;
成像装置,包括布置在所述位置信息对应的用户当前的位置的周围的不同位置的多个成像镜头,所述成像装置用于获取当前的环境光信息。
10.一种存储介质,其特征在于,所述存储介质包括存储的程序,其中,所述程序执行权利要求1至6中任意一项所述的再现方法。
CN201910122536.3A 2019-02-19 2019-02-19 增强现实的再现方法、装置、系统、存储介质和处理器 Pending CN109862339A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910122536.3A CN109862339A (zh) 2019-02-19 2019-02-19 增强现实的再现方法、装置、系统、存储介质和处理器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910122536.3A CN109862339A (zh) 2019-02-19 2019-02-19 增强现实的再现方法、装置、系统、存储介质和处理器

Publications (1)

Publication Number Publication Date
CN109862339A true CN109862339A (zh) 2019-06-07

Family

ID=66898101

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910122536.3A Pending CN109862339A (zh) 2019-02-19 2019-02-19 增强现实的再现方法、装置、系统、存储介质和处理器

Country Status (1)

Country Link
CN (1) CN109862339A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110349526A (zh) * 2019-07-11 2019-10-18 Oppo广东移动通信有限公司 增强现实调节方法、装置、存储介质及增强现实设备
US11996067B2 (en) 2020-07-13 2024-05-28 Samsung Electronics Co., Ltd. Method and apparatus for displaying virtual objects in different brightnesses

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102625993A (zh) * 2009-07-30 2012-08-01 Sk普兰尼特有限公司 用于提供增强现实的方法、服务器和便携终端
US20120235885A1 (en) * 2010-02-28 2012-09-20 Osterhout Group, Inc. Grating in a light transmissive illumination system for see-through near-eye display glasses
CN106980381A (zh) * 2017-03-31 2017-07-25 联想(北京)有限公司 一种信息处理方法及电子设备
CN107077209A (zh) * 2014-08-18 2017-08-18 环球城市电影有限责任公司 用于生成增强和虚拟现实图像的系统和方法
CN107430439A (zh) * 2015-04-27 2017-12-01 谷歌公司 虚拟/增强现实转变系统和方法
CN107506032A (zh) * 2017-08-17 2017-12-22 深圳市华星光电半导体显示技术有限公司 基于透明显示器的增强现实显示方法和装置
CN108140259A (zh) * 2015-08-18 2018-06-08 奇跃公司 虚拟和增强现实系统和方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102625993A (zh) * 2009-07-30 2012-08-01 Sk普兰尼特有限公司 用于提供增强现实的方法、服务器和便携终端
US20120235885A1 (en) * 2010-02-28 2012-09-20 Osterhout Group, Inc. Grating in a light transmissive illumination system for see-through near-eye display glasses
CN107077209A (zh) * 2014-08-18 2017-08-18 环球城市电影有限责任公司 用于生成增强和虚拟现实图像的系统和方法
CN107430439A (zh) * 2015-04-27 2017-12-01 谷歌公司 虚拟/增强现实转变系统和方法
CN108140259A (zh) * 2015-08-18 2018-06-08 奇跃公司 虚拟和增强现实系统和方法
CN106980381A (zh) * 2017-03-31 2017-07-25 联想(北京)有限公司 一种信息处理方法及电子设备
CN107506032A (zh) * 2017-08-17 2017-12-22 深圳市华星光电半导体显示技术有限公司 基于透明显示器的增强现实显示方法和装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110349526A (zh) * 2019-07-11 2019-10-18 Oppo广东移动通信有限公司 增强现实调节方法、装置、存储介质及增强现实设备
US11996067B2 (en) 2020-07-13 2024-05-28 Samsung Electronics Co., Ltd. Method and apparatus for displaying virtual objects in different brightnesses

Similar Documents

Publication Publication Date Title
CN109658365B (zh) 图像处理方法、装置、系统和存储介质
US11074755B2 (en) Method, device, terminal device and storage medium for realizing augmented reality image
CN106162203B (zh) 全景视频播放方法、播放器与头戴式虚拟现实设备
CN103929606B (zh) 图像呈现控制方法及图像呈现控制装置
CN108939556B (zh) 一种基于游戏平台的截图方法及装置
CN110021071A (zh) 一种增强现实应用中的渲染方法、装置及设备
US20220252894A1 (en) Automated video capture and composition system
CN107016718B (zh) 一种场景渲染方法和装置
US11532138B2 (en) Augmented reality (AR) imprinting methods and systems
CN109862339A (zh) 增强现实的再现方法、装置、系统、存储介质和处理器
CN109978945B (zh) 一种增强现实的信息处理方法和装置
CN111340865B (zh) 用于生成图像的方法和装置
US20180197273A1 (en) System and Method for Displaying Graphical Effects Based on Determined Facial Positions
CN117456076A (zh) 一种材质贴图生成方法及相关设备
US20190012470A1 (en) Systems and methods for determining values of conditions experienced by a user, and using the values of the conditions to determine a value of a user permission to apply to the user
CN109636922A (zh) 一种用于呈现增强现实内容的方法与设备
CN109587396A (zh) 拍摄方法和拍摄装置
US11511190B2 (en) Merge computer simulation sky box with game world
CN108346183A (zh) 一种用于ar基准定位的方法及系统
CN117455974A (zh) 一种显示方法、装置和电子设备
CN114549607A (zh) 主体材质确定方法、装置、电子设备及存储介质
KR101893038B1 (ko) 개별 영상신호 출력을 이용한 매핑 유사홀로그램 제공 장치 및 방법
CN113935891A (zh) 像素风格的场景渲染方法、设备及存储介质
US10713836B2 (en) Simulating lenses
JP2023504926A (ja) 画像処理方法、装置、電子機器及びコンピュータ読み取り可能な記憶媒体

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190607