CN111862339A - 虚拟标签展示方法、装置、设备及计算机可读存储介质 - Google Patents

虚拟标签展示方法、装置、设备及计算机可读存储介质 Download PDF

Info

Publication number
CN111862339A
CN111862339A CN202010622177.0A CN202010622177A CN111862339A CN 111862339 A CN111862339 A CN 111862339A CN 202010622177 A CN202010622177 A CN 202010622177A CN 111862339 A CN111862339 A CN 111862339A
Authority
CN
China
Prior art keywords
virtual
real object
real
virtual tag
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010622177.0A
Other languages
English (en)
Inventor
侯欣如
栾青
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Sensetime Technology Development Co Ltd
Original Assignee
Beijing Sensetime Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Sensetime Technology Development Co Ltd filed Critical Beijing Sensetime Technology Development Co Ltd
Priority to CN202010622177.0A priority Critical patent/CN111862339A/zh
Publication of CN111862339A publication Critical patent/CN111862339A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本公开实施例公开了一种虚拟标签展示方法、装置、设备及计算机可读存储介质。该方法包括:采集真实场景图像;识别真实场景图像中的真实对象的属性信息;基于真实对象的属性信息,确定与真实对象对应的虚拟标签的渲染效果参数;虚拟标签表征真实对象的描述信息;利用渲染效果参数,在显示设备上展示真实场景图像中的真实对象以及与真实对象对应的虚拟标签的增强现实AR效果。通过本公开,能够使虚拟标签的展示形态随采集的真实图像的变化而变化,可以提高虚拟标签的展示灵活度,以及真实图像与虚拟标签的融合度,从而提高画面的AR效果。

Description

虚拟标签展示方法、装置、设备及计算机可读存储介质
技术领域
本公开涉及图像处理技术,尤其涉及一种虚拟标签展示方法、装置、设备及计算机可读存储介质。
背景技术
增强现实(Augmented Reality,AR),是一种实时地计算摄像机影像的位置和角度,并加上相应图像的技术,是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术,从而在屏幕上把虚拟世界套在现实世界中并进行互动。
虚拟标签是AR技术中的一种具体应用,但相关技术中,虚拟标签的展现形态单一,AR显示效果不佳。
发明内容
本公开实施例提供一种虚拟标签展示方法、装置、设备及计算机可读存储介质,能够使虚拟标签的展示形态随采集的真实图像的变化而变化,可以提高虚拟标签的展示灵活度,以及真实图像与虚拟标签的融合度,从而提高画面的 AR效果。
本公开实施例的技术方案是这样实现的:
本公开实施例提供一种虚拟标签展示方法,包括:采集真实场景图像;识别所述真实场景图像中的真实对象的属性信息;基于所述真实对象的属性信息,确定与所述真实对象对应的虚拟标签的渲染效果参数;所述虚拟标签表征所述真实对象的描述信息;利用所述渲染效果参数,在显示设备上展示所述真实场景图像中的所述真实对象以及与所述真实对象对应的虚拟标签的增强现实AR 效果。
上述方法中,所述利用所述渲染效果参数,在显示设备上展示所述真实场景图像中的所述真实对象以及与所述真实对象对应的虚拟标签的增强现实AR 效果,包括:基于所述真实对象处于所述真实场景图像中的方位信息,确定所述虚拟标签的显示位置;利用所述渲染效果参数,在所述虚拟标签的显示位置进行所述虚拟对象的渲染;在所述显示设备上展示所述真实场景图像中的所述真实对象的同时,展示与所述真实对象对应的虚拟标签的增强现实AR效果。
上述方法中,所述基于所述真实对象处于所述真实场景图像中的方位信息,确定所述虚拟标签的显示位置,包括:在所述真实场景图像中,确定与所述真实对象的方位信息具有映射关系的目标方位信息;在所述目标方位信息所表征的所述真实场景图像的目标区域中,确定所述虚拟标签的显示位置。
上述方法中,所述真实对象的属性信息包括以下至少之一:所述真实对象的显示参数;所述显示参数包括以下至少之一:所述真实对象的颜色和所述真实对象的形状;所述真实对象的拍摄参数;所述拍摄参数包括以下至少之一:环境光的光照强度值和环境光的反射情况;所述真实对象的拍摄环境参数;所述拍摄环境参数包括以下至少之一:天气信息、温度信息和节气信息。
上述方法中,所述渲染效果参数包括以下至少之一:所述虚拟标签的颜色、透明度、饱和度和样式。
上述方法中,在所述真实对象的属性信息为所述真实对象的显示参数,所述虚拟标签的渲染效果参数包括所述虚拟标签的颜色的情况下,所述基于所述真实对象的属性信息,确定与所述真实对象对应的虚拟标签的渲染效果参数,包括:根据所述真实对象的显示参数和第一特定规则,确定所述虚拟标签的颜色。
上述方法中,在所述真实对象的属性信息为所述真实对象的拍摄参数,所述虚拟标签的渲染效果参数包括所述虚拟标签的透明度、饱和度和/或颜色的情况下,所述基于所述真实对象的属性信息,确定与所述真实对象对应的虚拟标签的渲染效果参数,包括:根据所述真实对象的拍摄参数和第二特定规则,确定所述虚拟标签的透明度、饱和度和/或颜色。
上述方法中,在所述真实对象的属性信息为所述真实对象的拍摄环境参数,所述虚拟标签的渲染效果参数包括所述虚拟标签的透明度、饱和度、样式和/ 或颜色的情况下,所述基于所述真实对象的属性信息,确定与所述真实对象对应的虚拟标签的渲染效果参数,包括:根据所述真实对象的拍摄环境参数和第三特定规则,确定所述虚拟标签的透明度、饱和度、样式和/或颜色。
上述方法还包括:采集光照强度信息;根据所述光照强度信息,确定所述虚拟标签的渲染效果参数。
上述方法中,所述虚拟标签包括文本信息和标签背景,所述虚拟标签的渲染效果参数包括虚拟标签的颜色;所述利用所述渲染效果参数,在所述虚拟标签的显示位置进行所述虚拟对象的渲染,包括:采用所述虚拟标签的颜色,在所述虚拟标签的显示位置对所述文本信息的颜色和所述标签背景的颜色进行渲染。
上述方法中,所述根据所述光照强度信息,确定所述虚拟标签的渲染效果参数,包括:确定所述光照强度信息所对应的强度等级;根据预设的强度等级与渲染效果参数的映射关系,确定所述强度等级所对应的所述虚拟标签的一组渲染效果参数;所述预设的强度等级与渲染效果参数的映射关系表征不同的强度等级与不同组的渲染效果参数的对应关系。
上述方法中,所述根据所述光照强度信息,确定所述虚拟标签的渲染效果参数,包括:获取所述虚拟标签的预设渲染效果参数;确定所述光照强度信息是否超过预设阈值,得到确定结果;根据确定结果,调整所述预设渲染效果参数,从而确定出所述虚拟标签的渲染效果参数。
上述方法中,所述显示设备包括在预设的滑轨上可移动且设置有图像采集单元的显示屏;其中,所述图像采集单元用于在所述显示屏移动的过程中,实时采集所述真实场景图像。
本公开实施例提供一种虚拟标签展示装置,包括:采集模块,用于采集真实场景图像;识别模块,用于识别所述真实场景图像中的真实对象的属性信息;确定模块,用于基于所述真实对象的属性信息,确定与所述真实对象对应的虚拟标签的渲染效果参数;所述虚拟标签表征所述真实对象的描述信息;展示模块,用于利用所述渲染效果参数,在显示设备上展示所述真实场景图像中的所述真实对象以及与所述真实对象对应的虚拟标签的增强现实AR效果。
上述装置中,所述展示模块,还用于基于所述真实对象处于所述真实场景图像中的方位信息,确定所述虚拟标签的显示位置;利用所述渲染效果参数,在所述虚拟标签的显示位置进行所述虚拟对象的渲染;在所述显示设备上展示所述真实场景图像中的所述真实对象的同时,展示与所述真实对象对应的虚拟标签的增强现实AR效果。
上述装置中,所述展示模块,还用于在所述真实场景图像中,确定与所述真实对象的方位信息具有映射关系的目标方位信息;在所述目标方位信息所表征的所述真实场景图像的目标区域中,确定所述虚拟标签的显示位置。
上述装置中,所述真实对象的属性信息包括以下至少之一:所述真实对象的显示参数;所述显示参数包括以下至少之一:所述真实对象的颜色、所述真实对象的形状;所述真实对象的拍摄参数;所述拍摄参数包括以下至少之一:环境光的光照强度值;环境光的光圈值;环境光的反射情况;所述真实对象的拍摄环境参数;所述拍摄环境参数包括以下至少之一:天气信息;温度信息;节气信息。
上述装置中,所述渲染效果参数包括以下至少之一:所述虚拟标签的颜色、透明度、饱和度和样式。
上述装置中,所述确定模块,还用于在所述真实对象的属性信息为所述真实对象的显示参数,所述虚拟标签的渲染效果参数包括所述虚拟标签的颜色的情况下,根据所述真实对象的显示参数和第一特定规则,确定所述虚拟标签的颜色。
上述装置中,所述确定模块,还用于在所述真实对象的属性信息为所述真实对象的拍摄参数,所述虚拟标签的渲染效果参数包括所述虚拟标签的透明度、饱和度和/或颜色的情况下,根据所述真实对象的拍摄参数和第二特定规则,确定所述虚拟标签的透明度、饱和度和/或颜色。
上述装置中,所述确定模块,还用于在所述真实对象的属性信息为所述真实对象的拍摄环境参数,所述虚拟标签的渲染效果参数包括所述虚拟标签的透明度、饱和度、样式和/或颜色的情况下,根据所述真实对象的拍摄环境参数和第三特定规则,确定所述虚拟标签的透明度、饱和度、样式和/或颜色。
上述装置中,所述采集模块,还用于采集光照强度信息;确定模块4552,还用于根据所述光照强度信息,确定所述虚拟标签的渲染效果参数。
上述装置中,所述虚拟标签包括文本信息和标签背景,所述虚拟标签的渲染效果参数包括虚拟标签的颜色;展示模块,还用于采用所述虚拟标签的颜色,在所述虚拟标签的显示位置对所述文本信息的颜色和所述标签背景的颜色进行渲染。
上述装置中,所述确定模块,还用于确定所述光照强度信息所对应的强度等级;根据预设的强度等级与渲染效果参数的映射关系,确定所述强度等级所对应的所述虚拟标签的一组渲染效果参数;所述预设的强度等级与渲染效果参数的映射关系表征不同的强度等级与不同组的渲染效果参数的对应关系。
上述装置中,所述确定模块,还用于获取所述虚拟标签的预设渲染效果参数;确定所述光照强度信息是否超过预设阈值,得到确定结果;根据确定结果,调整所述预设渲染效果参数,从而确定出所述虚拟标签的渲染效果参数。
上述装置中,所述显示设备包括在预设的滑轨上可移动且设置有图像采集单元的显示屏;其中,所述图像采集单元用于在所述显示屏移动的过程中,实时采集所述真实场景图像。
本公开实施例提供一种虚拟标签展示设备,包括:显示屏;存储器,用于存储可执行计算机程序;处理器,用于执行所述存储器中存储的可执行计算机程序时,结合所述显示屏实现上述的虚拟标签展示方法。
本公开实施例提供一种计算机可读存储介质,存储有计算机程序,用于引起处理器执行时,实现上述的虚拟标签展示方法。
本公开实施例提供的虚拟标签展示方法、装置、设备及计算机可读存储介质,采集真实场景图像;识别所述真实场景图像中的真实对象的属性信息;基于所述真实对象的属性信息,确定与所述真实对象对应的虚拟标签的渲染效果参数;所述虚拟标签表征所述真实对象的描述信息;利用所述渲染效果参数,在显示设备上展示所述真实场景图像中的所述真实对象以及与所述真实对象对应的虚拟标签的增强现实AR效果。采用本技术方案,由于虚拟标签的渲染效果参数是根据采集的真实场景图像中的真实对象的属性信息所获得,所以,在真实对象或者真实对象的属性信息,随着真实场景图像的变化而发生变化时,虚拟标签的渲染效果参数也会产生变化,随之,在真实场景图像中渲染获得的虚拟标签的展示形态也会发生变化,从而,可以使渲染在真实场景图像中的虚拟标签的展示形态,随着采集的真实场景图像的变化而产生变化,可以提高虚拟标签的展示灵活度,以及真实图像与虚拟标签的融合度,从而可以提高画面的AR效果。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,而非限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。
图1本公开实施例提供的一种应用场景的示意图;
图2本公开实施例提供的另一种应用场景的示意图;
图3为本公开实施例提供的虚拟标签展示系统的一个可选的架构示意图;
图4为本公开实施例提供的虚拟标签展示方法的一个可选的流程示意图;
图5为本公开实施例提供的一示例性的虚拟标签的展示效果示意图;
图6为本公开实施例提供的另一示例性的虚拟标签的展示效果示意图;
图7为本公开实施例提供的虚拟标签展示方法的另一个可选的流程示意图;
图8为本公开实施例提供的另一示例性的虚拟标签的展示效果示意图;
图9为本公开实施例提供的虚拟标签展示方法的又一个可选的流程示意图;
图10为本公开实施例提供的又一示例性的虚拟标签的展示效果示意图;
图11为本公开实施例提供的再一示例性的虚拟标签的展示效果示意图;
图12为本公开实施例提供的又一示例性的虚拟标签的展示效果示意图;
图13为本公开实施例提供的另一示例性的虚拟标签的展示效果示意图;
图14为本公开实施例提供的又一示例性的虚拟标签的展示效果示意图;
图15为本公开实施例提供的虚拟标签展示方法的另一个可选的流程示意图;
图16为本公开实施例提供的虚拟标签展示方法的又一个可选的流程示意图;
图17为本公开实施例提供的虚拟标签展示方法的另一个可选的流程示意图;
图18为本公开实施例提供的虚拟标签展示方法的又一个可选的流程示意图;
图19为本公开实施例提供的虚拟标签展示方法的另一个可选的流程示意图;
图20为本公开实施例提供的再一示例性的虚拟标签的展示效果示意图;
图21为本公开实施例提供的虚拟标签展示方法的又一个可选的流程示意图;
图22为本公开实施例提供的虚拟标签展示方法的另一个可选的流程示意图。
图23为本公开实施例提供的虚拟标签展示装置的结构示意图;
图24为本公开实施例提供的虚拟标签展示设备的结构示意图。
具体实施方式
为了使本公开的目的、技术方案和优点更加清楚,下面将结合附图对本公开作进一步地详细描述,所描述的实施例不应视为对本公开的限制,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本公开保护的范围。
增强现实(Augmented Reality)技术是一种将虚拟信息与真实世界巧妙融合的技术,用户可以通过AR设备可以观看到叠加在真实场景中的虚拟对象,比如可以看到叠加在真实的校园操场上的虚拟大树,看到叠加在天空中的虚拟飞翔小鸟,如何使得这些虚拟大树和虚拟飞翔小鸟这些虚拟对象能够更好地与现实场景相融合,实现增强现实场景中对虚拟对象的呈现效果,为本公开实施例所要讨论的内容,下面将结合以下具体实施例进行阐述。
本公开实施例提供一种虚拟标签展示方法、装置、设备及计算机可读存储介质,能够使虚拟标签的展示形态随采集的真实图像的变化而变化,从而可以提高AR画面的展示效果。本公开实施例提供的虚拟标签展示方法应用于虚拟标签展示设备,该虚拟标签展示设备可以为显示设备。
在本申请实施例的一种实施方式下,显示设备可以为可移动显示屏,可移动显示屏为一个可移动的屏幕,屏幕可以沿滑轨滑动,或者进行旋转,或者其它方式进行移动,在屏幕的移动过程中,屏幕可以显示不同的信息以供用户阅览和点击。可移动显示屏可以是触摸屏或非触摸屏。
图1是本公开实施例提供的一种应用场景的示意图,如图1所示,该可移动的显示屏101可以设置在楼宇之中,在其它实施例中,可移动的显示屏101 可以设置在楼宇的边缘或楼宇之外。可移动的显示屏101可以用于拍摄楼宇,显示楼宇以及关于楼宇的虚拟对象。可移动的显示屏101显示的楼宇,可以是拍摄得到的楼宇,或者可以与拍摄的楼宇对应的楼宇的渲染模型,或者可以部分是拍摄得到的楼宇,部分为楼宇的渲染模型。例如,在拍摄楼宇A和楼宇B 的情况下,可移动的显示屏101可以确定楼宇A的楼宇模型为A’,楼宇B的楼宇模型为B’,可移动的显示屏101可以显示的是楼宇A和楼宇模型B’,或者,可以显示楼宇模型A’和楼宇模型B。楼宇的虚拟对象可以是楼宇的楼号信息、楼宇所在的公司信息、层数信息以及负责人信息等虚拟标签中的至少一种。
图2是本公开实施例提供的另一种应用场景的示意图,如图2所示,显示设备还可以是终端设备102,用户可以手持或佩戴终端设备102进入楼宇之间,并通过拍摄楼宇使在终端设备102上显示楼宇和与楼宇对应的虚拟对象,例如,虚拟标签。
下面说明本公开实施例提供的显示设备的示例性应用,本公开实施例提供的显示设备可以实施为AR眼镜、笔记本电脑,平板电脑,台式计算机,机顶盒,移动设备(例如,移动电话,便携式音乐播放器,个人数字助理,专用消息设备,便携式游戏设备)等各种类型的用户终端(以下简称终端),也可以实施为服务器。下面,将说明显示设备实施为终端时的示例性应用。当显示设备实施为终端时,可以基于真实场景图像中的真实对象,从终端的内部存储空间中获取与真实对象对应的虚拟标签的渲染效果参数,根据虚拟标签的渲染效果参数呈现与真实对象叠加的虚实结合的AR图像效果;终端也可以与云端服务器进行交互,通过与云端服务器的交互,获取虚拟标签的渲染效果参数。下面结合在对真实对象的展示场景中,终端通过与服务器交互的方式获取与真实对象对应的虚拟标签的渲染效果参数,以呈现AR图像效果为例进行展示系统的说明。
参见图3,图3是本公开实施例提供的虚拟标签展示系统的一个可选的架构示意图,为支撑一个虚拟标签展示应用,在虚拟标签展示系统100中,终端 400(虚拟标签展示设备,示例性示出了终端400-1和终端400-2)通过网络30 0连接服务器200,网络300可以是广域网或者局域网,又或者是二者的组合。在真实对象的展示场景中,如沙盘展示,工地楼宇展示等,终端400用于采集真实场景图像;识别真实场景图像中的真实对象的属性信息;基于真实对象的属性信息,确定与真实对象对应的虚拟标签的渲染效果参数;虚拟标签表征真实对象的描述信息;利用渲染效果参数,在图形界面401(图中示例性示出了图形界面401-1和图形界面401-2)展示真实场景图像中的真实对象以及与真实对象对应的虚拟标签的增强现实AR效果。
示例性的,当终端400实施为手机时,可以启动手机上的预设展示应用,通过预设展示应用调用摄像头采集真实场景图像,并基于真实场景图像中的真实对象的属性信息,向服务器200发起数据请求,服务器200接收到数据请求后,从预存在数据库500中的虚拟标签的渲染效果参数中确定与真实对象对应的虚拟标签的渲染效果参数;并将确定出的虚拟标签的渲染效果参数发回给终端400。终端400得到服务器反馈的虚拟标签的渲染效果参数之后,利用渲染效果参数在终端400的图形界面401上展示真实场景图像中的真实对象以及与真实对象对应的虚拟标签的增强现实AR效果。
在一些实施例中,服务器200可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器。终端 400可以是智能手机、平板电脑、笔记本电脑、台式计算机、智能音箱、智能手表等,但并不局限于此。终端以及服务器可以通过有线或无线通信方式进行直接或间接地连接,本公开实施例中不做限制。
图4是本公开实施例提供的虚拟标签展示方法的一个可选的流程示意图,将结合图4示出的步骤进行说明。
S101、采集真实场景图像。
本公开的一些实施例中,虚拟标签展示设备可以通过摄像装置实时采集真实场景图像。示例性的,虚拟标签展示设备可以以视屏拍摄的方式,实时采集真实场景图像。示例性的,真实场景图像可以是带有色彩且反应真实场景中的真实物体的RGB图像;例如,当真实场景为办公楼区域时,真实场景图像可以是办公楼区域的彩色图像。
S102、识别真实场景图像中的真实对象的属性信息。
在本公开的一些实施例中,虚拟标签展示设备在获得真实场景图像后,可以通过图像识别技术,先识别出真实场景图像中的目标真实对象,再识别该真实对象的属性信息。在本公开的一些实施例中,真实对象的属性信息可以是真实对象的颜色或其他可以体现在真实图像中的信息。例如,如上述所说的,当真实场景图像是办公楼区域的彩色图像时,真实对象可以是虚拟标签展示设备通过图像识别技术而识别出的办公楼区域中的某一栋或者某几栋大楼,真实对象的属性信息则可以是该某一栋或者某几栋大楼的颜色。
在本公开的另一些实施例中,虚拟标签展示设备可以基于真实对象的特征,预设神经网络模型,通过该预设神经网络模型对真实对象进行识别,在识别出真实对象后,从预设的属性库中查找真实对象对应的属性,对此,本公开实施例不作限制。
在本公开的另一些实施例中,虚拟标签展示设备可以根据采集的真实场景图像直接识别真实对象的属性信息。示例性的,虚拟标签展示设备可以基于属性条件预设神经网络模型,通过预设的神经网络模型对真实场景图像中的真实对象的属性进行直接识别,从而得到真实对象的属性,对此,本公开实施例不作限制。
在本公开的一些实施例中,一个真实场景图像可以只存在一个真实对象,也可以存在两个或两个以上的真实对象,对此,本公开实施例不作限定。
S103、基于真实对象的属性信息,确定与真实对象对应的虚拟标签的渲染效果参数;虚拟标签表征真实对象的描述信息。
虚拟标签展示设备在识别出真实对象的属性信息后,可以根据该真实对象的属性信息,确定出表征该真实对象的描述信息的虚拟标签的渲染效果参数。
在本公开的一些实施例中,描述信息可以是预先存储在虚拟标签展示设备的内存中或预先存储在与虚拟标签展示设备连接的服务器中,并且与真实对象具有预设映射关系的文字内容和/或图形内容等,对此,本公开实施例不作限定。当虚拟标签展示设备识别到某一真实对象后,可以根据该真实对象与文字内容和/或图形内容的预设映射关系,确定出对应的文字内容和/或图形内容,并根据该真实对象的属性信息,确定以何种颜色或样式等的渲染效果参数来渲染确定出的文字内容和/或图形内容。
在本公开的一些实施例中,渲染效果参数可以是虚拟标签的颜色,例如,白色或蓝色等,还可以是虚拟标签的显示样式等,例如,椭圆形或矩形等,对此,本公开实施例不作限定。
在本公开的一些实施例中,一个真实对象可以只对应一个虚拟标签,也可以对应多个虚拟标签,对此,本公开实施例不作限定。
S104、利用渲染效果参数,在显示设备上展示真实场景图像中的真实对象以及与真实对象对应的虚拟标签的增强现实AR效果。
虚拟标签展示设备在获得渲染效果参数后,可以根据渲染效果参数在真实场景图像上进行虚拟标签的渲染,从而获得虚拟标签,实现真实场景与虚拟场景的融合,并通过显示设备展示真实场景图像中的真实场景与对应的虚拟标签的增强现实AR效果。例如,在真实对象为上述的某一栋办公大楼,且该栋办公大楼的属性信息为办公大楼的颜色,渲染效果参数是虚拟标签的颜色,描述信息为文本信息,以及文本信息的显示样式为预设样式的情况下,虚拟标签展示设备可以在识别出该栋办公大楼的颜色后,根据该栋办公大楼的颜色,确定出与该栋办公大楼对应的文本信息的颜色,并通过获取文本信息的预设显示样式确定虚拟标签的显示形状,从而对显示有虚拟标签的增强现实AR效果进行展示。
示例性的,图5是本公开实施例提供的一示例性的虚拟标签的展示效果示意图。如图5所示,在真实图像中渲染有与办公大楼10对应的虚拟标签20(由虚线框出的图示部分),虚拟标签20的样式为不规则形状,且虚拟标签20表征该栋大楼为A集团的总部,以及该A集团的注册信息、盈利状况等其他信息。
在本公开的一些实施例中,虚拟标签还可以以其他规则的形状进行显示。示例性的,图6是本公开实施例提供的另一示例性的虚拟标签的展示效果示意图。如图6所示,与办公大楼10对应的虚拟标签20的显示形状为部分对角为圆角的矩形。
本公开实施例中,由于虚拟标签的渲染效果参数是根据采集的真实场景图像中的真实对象的属性信息所获得,所以,在真实对象或者真实对象的属性信息,随着真实场景图像的变化而发生变化时,虚拟标签的渲染效果参数也会产生变化,随之,在真实场景图像中渲染获得的虚拟标签的展示形态也会发生变化,从而,可以使渲染在真实场景图像中的虚拟标签的展示形态,随着采集的真实场景图像的变化而产生变化,可以提高虚拟标签的展示灵活度,以及真实图像与虚拟标签的融合度,从而可以提高画面的AR效果。
图7是本公开实施例提供的虚拟标签展示方法的另一个可选的流程示意图,上述S104可以通过S1041-S1043实现,将结合图7示出的步骤进行说明。
S1041、基于真实对象处于真实场景图像中的方位信息,确定虚拟标签的显示位置。
虚拟标签展示设备在获得虚拟标签的渲染效果参数后,并且在渲染虚拟标签之前,可以先根据与该虚拟标签对应的真实对象在真实场景图像中的方位信息,确定虚拟标签在真实场景图像中的显示位置,从而采用渲染效果参数在该显示位置处渲染该虚拟标签。
在本公开的一些实施例中,真实对象在真实场景图像中的方位信息可以是以真实场景图像所在的平面为坐标系,并以真实场景图像的轴线作为参考基准的方位信息,例如,轴线左侧的图像区域中显示的真实对象的方位信息则为左侧,轴线右侧的图像区域中显示的真实对象的方位信息则为右侧;或者,当真实对象显示在轴线左侧的图像区域中的尺寸(例如,面积或长度等)超过自身整体尺寸的50%等预设值时,则该真实对象的方位信息为左侧,而当该真实对象显示在轴线右侧的图像区域中的尺寸(例如,面积或长度等)超过自身整体尺寸的50%等预设值时,则该真实对象的方位信息为右侧;或者,还可以以其他方式确定真实对象在真实场景图像中的方位信息,本公开实施例对此不作限定。
在本公开的一些实施例中,当获得真实对象的方位信息后,可以将真实对象的方位信息作为对应的虚拟标签在真实场景图像中的方位信息,并根据该方位信息,在真实场景图像中的相应区域中渲染该虚拟标签。例如,在真实对象显示在轴线左侧的图像区域中的面积大于自身整体显示在真实图像中的面积的 50%的情况下,可以确定真实对象在真实场景图像中的方位信息为左侧,此时,虚拟标签展示设备可以确定真实场景图像中位于轴线左侧的图像区域中的任意区域为可以渲染该虚拟标签的位置,或者,可以确定真实场景图像中位于轴线左侧的图像区域中没有显示任何对象或其他虚拟对象的区域为可以渲染该虚拟标签的位置(即虚拟标签的显示位置);如此,可以使虚拟标签和真实对象的对应关系可以通过虚拟标签和真实对象在图像中的具体显示位置而进行反映。
S1042、利用渲染效果参数,在虚拟标签的显示位置进行虚拟对象的渲染。
虚拟标签展示设备确定了虚拟标签在真实场景图像中的显示位置后,便可采用确定出的渲染效果参数,在确定出的显示位置处进行虚拟标签的渲染,获得虚拟标签。
示例性的,图8是本公开实施例提供的另一示例性的虚拟标签的展示效果示意图。如图8所示,真实对象(办公大楼)10在真实场景图像的轴线X左侧的面积大于在轴线右侧的面积,所以,办公大楼10在真实场景图像中的方位信息为左侧,基于此,同样可以在真实场景图像中位于轴线X左侧的图像区域中展示该虚拟标签20;同时,当虚拟标签展示设备确定了虚拟标签的显示样式为图中的不规则显示形状后,可以以该显示样式显示该虚拟标签20。
S1043、在显示设备上展示真实场景图像中的真实对象的同时,展示与真实对象对应的虚拟标签的增强现实AR效果。
虚拟标签展示设备采用渲染效果参数在显示位置处渲染了虚拟标签后,可以将真实场景中的真实对象,以及针对该真实对象所渲染的虚拟标签进行展示,实现真实对象与对应的虚拟标签的增强现实AR效果的展示。
本公开实施例中,在采用渲染效果参数渲染虚拟标签之前,根据获得的真实场景图像在真实场景图像中的方位信息确定虚拟标签的显示位置,可以使虚拟标签的显示位置随着对应的真实对象的方位信息而改变,可以提高虚拟标签的展示灵活度,从而可以提高显示有虚拟标签的AR画面的显示效果。
图9是本公开实施例提供的虚拟标签展示方法的又一个可选的流程示意图,上述S1041可以通过S10411-S10412实现,将结合图9示出的步骤进行说明。
S10411、在真实场景图像中,确定与真实对象的方位信息具有映射关系的目标方位信息。
在本公开的一些实施例中,可以预先建立真实对象的方位信息与对应的虚拟标签的方位信息之间的映射关系,当确定出真实对象的方位信息后,可以根据真实对象的方位信息和预设的映射关系,确定出对应的虚拟标签的方位信息。
在本公开的一些实施例中,映射关系可以是镜像对称关系;例如,左、右是一组互相具有镜像对称关系的方位信息,当一个方位信息为左时,则与该方位信息具有镜像对称关系的目标方位信息为右;以及,上、下是一组具有镜像对称关系的方位信息,当一个方位信息为上时,则与该方位信息具有镜像对称关系的目标方位信息为下。
S10412、在目标方位信息所表征的真实场景图像的目标区域中,确定虚拟标签的显示位置。
在虚拟标签展示设备确定出目标方位信息后,可以在目标方位信息所表征的真实场景图像的目标区域中,再确定出虚拟标签的显示位置。例如,当目标方位信息为左侧时,可以确定与左侧具有映射关系(例如,镜像对称关系)的目标方位信息为右侧,此时,可以确定虚拟标签的可以在真实场景图像的右侧图像区域中进行显示。在本公开的一些实施例中,当虚拟标签展示设备确定出目标方位信息后,可以在目标方位信息所表征的真实场景图像的目标区域中,选择未显示任何真实对象或其他虚拟对象的图像区域中显示虚拟标签。
示例性的,图10是本公开实施例提供的又一示例性的虚拟标签的展示效果示意图。如图10所示,办公大楼10显示在真实场景图像的轴线X的左侧,所以,可以将轴线X右侧的图像区域作为可以显示虚拟标签20的目标区域,并将虚拟标签20显示在轴线X右侧的图像区域中,没有显示任何办公大楼或其他物体的位置处。
本公开实施例中,由于虚拟标签的方位信息是是基于对应的真实对象的方位信息而确定的,虚拟标签是根据确定出的方位信息而确定,所以,虚拟标签的显示位置会随着真实对象在真实场景图像中的方位信息的变化而变化,从而提高了虚拟标签的显示灵活度,进而提高了显示有虚拟标签的画面的AR效果。
在本公开的一些实施例中,真实对象的属性信息包括以下至少之一:真实对象的显示参数、真实对象的拍摄参数和真实对象的拍摄环境参数。示例性的,虚拟标签展示设备可以通过图像识别手段或预设的神经网络模型等手段,获得真实对象的这些属性信息。
在本公开的一些实施例中,真实对象的显示参数包括真实对象的颜色和真实对象的形状中的至少一种。例如,当真实对象为上述的办公大楼时,真实对象的显示参数可以是办公大楼的颜色(例如,蓝色),以及/或者,还可以是办公大楼的形状,例如,鸟巢的形状等。示例性的,真实对象的颜色可以是体现在采集的真实场景图像中的颜色,也可以是预先设定的与体现在真实场景图像中的颜色对应的颜色,例如,当办公大楼在采集的真实场景图像中的颜色为灰蓝色,并且,预先设定的与灰蓝色所对应的颜色为蓝绿色时,虚拟标签展示设备可以最终确定出办公大楼的颜色为蓝绿色。
在本公开的一些实施例中,真实对象的拍摄参数包括是环境光的光照强度值和环境光的反射情况中的至少一种。环境光的光照强度值表示光线的明暗程度;环境光的反射情况可以是指光照在真实对象,例如办公大楼表面的反射情况等。示例性的,虚拟标签展示设备可以通过识别采集的真实场景图像中各个像素点的亮度值,或者,识别真实场景图像中的特征区域等,来获得环境光的光照强度值和环境光的反射情况。
在本公开的一些实施例中,真实对象的拍摄环境参数包括天气信息、温度信息和节气信息中的至少一种。天气信息可以是晴天、雨天或阴天等天气状况,节气信息可以是立春、小雪或立夏等的节气信息,温度信息可以是温度值。示例性的,虚拟标签展示设备在获得采集的真实场景图像后,可以先识别该真实场景图像的拍摄时间,然后,可以根据该真实场景图像的拍摄时间,在连接网络的情况下,通过网络来获取该时间所对应的实时天气状况、温度值和节气信息等。或者,当真实对象的拍摄环境参数是天气信息时,虚拟标签展示设备还可以通过识别图像中的目标特征(例如,太阳、雨滴或雨伞等),来确定拍摄该真实场景图像时的天气信息,对此,本公开实施例不作限定。
在本公开的一些实施例中,渲染效果参数可以包括以下至少之一:虚拟标签的颜色、透明度、饱和度和样式。
在本公开的一些实施例中,虚拟标签的颜色可以包括虚拟标签背景的颜色和文本信息的颜色,例如,虚拟标签背景的颜色为灰色,文本信息的颜色为蓝色。
在本公开的一些实施例中,虚拟标签的饱和度实际上为虚拟标签背景的颜色的深浅度和文本信息的颜色的深浅度。例如,如上述,在虚拟标签背景的颜色为灰色,且虚拟标签背景的饱和度是30%的情况下,即表示虚拟标签背景的颜色为浅灰,以及,在文本信息的颜色为蓝色,且文本信息的饱和度是80%的情况下,即表示文本信息为深蓝色。
在本公开的一些实施例中,虚拟标签的透明度实际上为虚拟标签背景的透明度和文本信息的透明度。例如,当虚拟标签的透明度为零时,虚拟标签背景和文本信息所覆盖的位置处的原始图像信息不会显示,示例性的,如图9所示,由于虚拟标签背景的透明度为零,所以,对于云朵30,仅可显示未被虚拟标签 20覆盖的部分。而当虚拟标签的透明度为100%时,虚拟标签背景和虚拟标签中的文本信息或图示信息所覆盖的位置处的原始图像信息会进行显示,例如,如图5所示,被虚拟标签20覆盖的办公大楼10的部分形状可以透过虚拟标签背景和文本信息进行显示。
在本公开的一些实施例中,虚拟标签的样式可以是虚拟标签的显示形状(例如,图5所示的虚拟标签的显示形状)。在本公开的一些实施例中,虚拟标签的显示形状可以根据可显示的图像区域的形状确定,例如,当可显示的图像区域的形状为椭圆区域时,虚拟标签的显示形状可以是圆形或矩形等,以充分利用该可显示的图像区域。示例性的,图11是本公开实施例提供的再一示例性的虚拟标签的展示效果示意图。如图11所示,为了使虚拟标签20与真实对象10 和图像中显示的其他物体之间互不遮挡,可以将图像中的天空区域40(图中虚线框出的区域)确定为虚拟标签的可显示的图像区域,由于该可显示的图像区域的形状接近矩形,所以,可以将虚拟标签20的显示形状确定为矩形,并在该可显示的图像区域中显示该虚拟标签20。
在本公开的另一些实施例中,虚拟标签的形状还可以根据真实对象的具体形状确定,例如,当上述的办公大楼为鸟巢形状时,可以将该标签的形状也确定为鸟巢形状,从而,可以从显示形状上体现虚拟标签与真实对象的对应关系,同时,增加显示趣味性。
在本公开的一些实施例中,虚拟标签的样式也可以是虚拟标签的显示风格。例如,当虚拟标签展示设备确定当前的天气状况为雨天时,可以在虚拟标签的背景中渲染雨滴效果,从而可以通过虚拟标签的样式体现实时的天气状况,从而增加了虚拟标签的展示灵活度,提高了虚拟标签的显示效果,还增加了显示的趣味性。示例性的,图12是本公开实施例提供的又一示例性的虚拟标签的展示效果示意图,如图12所示,在虚拟标签20中显示有透明雨滴的特效。例如,当虚拟标签展示设备确定当前的天气状况为阴天时,可以在虚拟标签的背景中渲染云朵的特效;如此,可以通过虚拟标签的样式体现实时的天气状况,从而增加了虚拟标签的展示灵活度,提高了虚拟标签的显示效果,还增加了显示的趣味性。示例性的,图13是本公开实施例提供的另一示例性的虚拟标签的展示效果示意图,如图13所示,在虚拟标签20中显示有透明云朵的特效。例如,当虚拟标签展示设备确定当前的天气状况为大风天气时,可以在虚拟标签的背景中渲染大风效果,从而可以通过虚拟标签的样式体现实时的天气状况,从而增加了虚拟标签的展示灵活度,提高了虚拟标签的显示效果,还增加了显示的趣味性。示例性的,图14是本公开实施例提供的又一示例性的虚拟标签的展示效果示意图,如图14所示,在虚拟标签20中显示有采用透明斜线表示的大风特效。
图15是本公开实施例提供的虚拟标签展示方法的另一个可选的流程示意图;真实对象的属性信息为真实对象的显示参数,虚拟标签的渲染效果参数包括虚拟标签的颜色;以图4中的S103可以通过S1031实现为例,结合图15示出的步骤进行说明。
S1031、根据真实对象的显示参数和第一特定规则,确定虚拟标签的颜色。
虚拟标签展示设备在确定了真实对象的显示参数后,可以根据第一特定规则,确定出虚拟标签的颜色。
在本公开的一些实施例中,第一特定规则可以表征虚拟标签的颜色与对应的真实对象的显示参数的之间的关系。示例性的,当真实对象的显示参数是颜色时,第一特定规则可以表征该真实对象所对应的虚拟标签的颜色与真实对象的颜色属于同一色系;例如,当真实对象的颜色是蓝色时,第一特定规则可以表明,对应的虚拟标签的颜色为蓝色色系中的浅蓝色,如此,可以通过颜色体现出虚拟标签与真实对象之间的对应关系。或者,第一特定规则还可以表征与真实对象的颜色所对应的虚拟标签的颜色集合;例如,当真实对象的颜色是蓝色时,第一特定规则可以包括颜色集合,如白色和蓝色等,如此,虚拟标签展示设备便可从该颜色集合中任选一种颜色作为虚拟标签的颜色。
本公开实施例中,根据真实对象的显示参数和第一特定规则,确定对应的虚拟标签的颜色,可以使虚拟标签的颜色随着对应的真实对象的颜色的变化而变化,从而可以提高虚拟标签的显示效果。
图16是本公开实施例提供的虚拟标签展示方法的又一个可选的流程示意图;真实对象的属性信息为真实对象的拍摄参数,虚拟标签的渲染效果参数包括虚拟标签的透明度、饱和度和/或颜色;以图4中的S103可以通过S1032实现为例,结合图16示出的步骤进行说明。
S1032、根据真实对象的拍摄参数和第二特定规则,确定虚拟标签的透明度、饱和度和/或颜色。
虚拟标签展示设备可以根据识别出的真实对象的拍摄参数和预先设定的第二特定规则,确定对应的虚拟标签的透明度、饱和度和颜色三种参数中的一种或多种。
本公开实施例中,第二特定规则可以表征真实对象的拍摄参数与对应的虚拟标签的透明度、饱和度和/或颜色之间的关系。示例性的,当真实对象的拍摄参数为环境光的光照强度值时,第二特定规则可以是与预设的多个光照强度范围所对应的颜色集合,以及,与预设的多个光照强度范围所对应的饱和度范围,以及,与预设的多个环境光的光照强度范围所对应的透明度范围。例如,当虚拟标签展示设备确定出环境光的光照强度值属于某一个预设数值范围时,可以确定与该预设数值范围对应的一个颜色集合,或者,确定出与预设该数值范围所对应的饱和度范围,或者/以及,确定出与该预设数值范围所对应的透明度范围,进而从确定出的颜色集合中选择任意颜色,从饱和度范围中选择任意饱和度值,或者/以及,从透明度范围中选择任意透明度值。由于环境光的光照强度值可以反映拍摄真实对象时的光线亮暗情况,所以,根据拍摄真实对象时的环境光的光照强度值,可以确定出合适的虚拟标签的透明度、饱和度和/或颜色,从而可以提高虚拟标签的显示效果。
本公开实施例中,根据识别出的拍摄真实对象时的拍摄参数和预设的第二特定规则,可以确定出合适的虚拟标签的透明度、饱和度和/或颜色,进而可以提高虚拟标签的显示效果。
图17是本公开实施例提供的虚拟标签展示方法的另一个可选的流程示意图;真实对象的属性信息为真实对象的拍摄环境参数,虚拟标签的渲染效果参数包括虚拟标签的透明度、饱和度、样式和/或颜色;以图4中的S103通过S1033 实现为例,结合图17示出的步骤进行说明。
S1033、根据真实对象的拍摄环境参数和第三特定规则,确定虚拟标签的透明度、饱和度、样式和/或颜色。
虚拟标签展示设备可以根据识别出的真实对象的拍摄环境参数和预先设定的第三特定规则,确定对应的虚拟标签的透明度、饱和度、样式和/或颜色四种参数中的一种或多种。
本公开实施例中,第三特定规则可以表征真实对象的拍摄环境参数与对应的虚拟标签的透明度、饱和度、样式和/或颜色之间的关系。示例性的,当拍摄环境为天气信息时,第三特定规则可以是与确定出的天气信息对应的颜色集合,与确定出的天气信息对应的饱和度范围,与确定出的天气信息对应的透明度范围,以及/或者,与确定出的天气信息对应的虚拟标签的样式。例如,当天气信息为阴天时,虚拟标签展示设备可以与确定出阴天对应的颜色集合,与阴天对应的饱和度范围,与阴天对应的透明度范围,或者/以及,与阴天对应的虚拟标签的样式(例如,在虚拟标签中显示云朵特效),进而从确定出的颜色集合中任意选择颜色,从确定出的饱和度范围中任意选择饱和度值,从确定出的透明度范围中任意选择透明度值,或者/以及,将与阴天对应的虚拟标签的样式确定为要渲染的虚拟标签的样式。
本公开实施例中,根据真实对象的拍摄环境参数和第三特定规则,确定虚拟标签的透明度、饱和度、样式和/或颜色,可以确定出合适的虚拟标签的透明度、饱和度和/或颜色,并且,可以提高虚拟标签的展示灵活度,从而可以提高虚拟标签的显示效果。
图18是本公开实施例提供的虚拟标签展示方法的又一个可选的流程示意图,上述S104之前,可以包括S1001-S1002。以下以图4为例,结合图18示出的步骤进行说明。
S1001、采集光照强度信息。
虚拟标签展示设备在实时图像采集的同时,可以通过光传感器等采集装置采集真实环境中的光照强度信息。
S1002、根据光照强度信息,确定虚拟标签的渲染效果参数。
虚拟标签展示设备可以在采集到光照强度信息后,根据光照强度信息确定虚拟标签的透明度、饱和度和/或颜色。
需要说明的,图18中步骤的执行顺序为示例性的,上述S1001-S1002可以与S101-S103同步执行,也可以在S101-S103之后执行,对此,本公开实施例不作限定。
本公开实施例中,虚拟标签展示设备根据采集的光照强度信息,确定虚拟标签的渲染效果参数,可以确定出与光照强度相适应的虚拟标签的透明度、饱和度和/或颜色,从而可以提高虚拟标签的显示效果。
图19是本公开实施例提供的虚拟标签展示方法的另一个可选的流程示意图,虚拟标签包括文本信息和标签背景,虚拟标签的渲染效果参数包括虚拟标签的颜色;以图7中的S1042可以通过S10421实现为例,结合图19示出的步骤进行说明。
S10421、采用虚拟标签的颜色,在虚拟标签的显示位置对文本信息的颜色和标签背景的颜色进行渲染。
在本公开的一些实施例中,虚拟标签包括文本信息和标签背景。文本信息可以全部显示在标签背景中,例如图11所示;文本信息也可以有部分显示在标签背景中,同时,另一部分显示在标签背景之外。例如,图20是本公开实施例提供的再一示例性的虚拟标签的展示效果示意图。如图20所示,虚拟标签20 的文本信息中的第一信息部分211显示在标签背景22中,同时,文本信息中的第二信息部分212则显示在标签背景22之外。
虚拟标签展示设备在确定出标签的颜色后,可以再确定标签的文本信息的颜色和标签背景的颜色。在本公开的一些实施例中,文本信息的颜色和标签背景的颜色可以相同,也可以不同。在本公开实施例中,当文本信息的颜色和标签背景的颜色相同时,文本信息的颜色的饱和度和标签背景的颜色的饱和度不同,如此,可以保证文本信息的清晰显示,例如,当文本信息的颜色和标签背景的颜色同为蓝色时,文本信息的颜色的饱和度可以较高,同时,标签背景的颜色的饱和度较低,以呈现出文本信息的颜色为深蓝色,同时,标签背景的颜色为浅蓝色的效果。
示例性的,当虚拟标签展示设备在根据真实对象的颜色和第一特定规则确定虚拟标签的颜色时,可以根据第一特定规则同时确定出文本信息的颜色和标签背景的颜色。例如,在真实对象的颜色是蓝色的情况下,第一特定规则可以包括一组文本信息的颜色集合,如白色和蓝色,以及一组标签背景的颜色集合,如粉色和紫色;如此,虚拟标签展示设备便可从文本信息的颜色集合中任选一种颜色作为虚拟标签背景的颜色,同时从标签背景的颜色集合中任选一种颜色作为文本信息的颜色。
示例性的,当虚拟标签展示设备在根据真实对象的拍摄参数和第二特定规则确定虚拟标签的颜色、饱和度和透明度时,可以根据第二特定规则同时确定出文本信息的颜色和标签背景的颜色、饱和度和透明度。例如,在真实对象的拍摄参数为环境光的光照强度值时,第二特定规则可以是与预设的多个光照强度范围所对应的多组虚拟标签背景的颜色和多组文本信息的颜色,以及,与预设的多个光照强度范围所对应的多组标签背景的颜色的饱和度范围和多组文本信息的颜色的饱和度范围,以及,与预设的多个光照强度范围所对应的多组标签背景的透明度范围和多组文本信息的饱和度范围。例如,当虚拟标签展示设备确定出环境光的光照强度值属于某一个预设数值范围时,可以确定与该预设数值范围对应的一组标签背景的颜色和一组文本信息的颜色,或者,确定出与预设该数值范围所对应的一组标签背景的颜色的饱和度值和一组文本信息的颜色的饱和度,或者/以及,确定出与该预设数值范围所对应的一组标签背景的透明度范围和一组文本信息的透明度范围,进而从中选择任意一个标签背景的颜色和一个文本信息的颜色,选择任意一个标签背景的颜色的饱和度值和任意一个文本信息的颜色的饱和度值,或者/以及,选择任意一个标签背景的透明度值和一个文本信息的透明度值。由于环境光的光照强度值可以反映拍摄真实对象时的光线亮暗情况,所以,根据拍摄真实对象时的环境光的光照强度值,可以确定出合适的标签背景和文本信息的透明度、饱和度和/或颜色,从而可以提高虚拟标签的显示效果。
虚拟标签展示设备在确定出文本信息的颜色和标签背景的颜色后,可以采用文本信息的颜色和标签背景的颜色对虚拟标签的文本信息和标签背景分别进行渲染,获得虚拟标签。
本公开实施例中,分别根据确定出的文本信息的颜色和标签背景的颜色,渲染虚拟标签,可以提高虚拟标签的显示效果。
图21是本公开实施例提供的虚拟标签展示方法的又一个可选的流程示意图,上述S1002可以通过S10021-S10022实现,将结合图21示出的步骤进行说明。
S10021、确定光照强度信息所对应的强度等级。
虚拟标签展示设备的内存中可以预先存储有预设的强度等级与渲染效果参数的映射关系,该映射关系表征不同的强度等级与不同组的渲染效果参数的对应关系,每一个强度等级与一组渲染效果参数唯一对应,示例性的,预设的强度等级与渲染效果参数的映射关系可以是映射关系表,表中每个强度等级可以是一个光照强度信息(即光照强度值)的数值范围,并且,不同的强度等级可以根据数值范围内的数值大小依次排序,例如,第一强度等级为0至30,第二强度等级为30至60,第三强度等级为60至90等。虚拟标签展示设备在采集到光照强度信息后,可以通过数值的对比,确定出采集的光照强度信息属于哪个数值范围内。
S10022、根据预设的强度等级与渲染效果参数的映射关系,确定强度等级所对应的虚拟标签的一组渲染效果参数;预设的强度等级与渲染效果参数的映射关系表征不同的强度等级与不同组的渲染效果参数的对应关系。
虚拟标签展示设备在确定出采集的光照强度信息所属的预设强度等级后,可以根据预设的强度等级与渲染效果参数的映射关系再确定出对应的一组虚拟参数的渲染效果参数。
本公开实施例中,虚拟标签展示设备根据采集的光照强度信息所对应的预设强度等级,确定虚拟标签的渲染效果参数,可以通过简单比对与获取获得虚拟标签的渲染效果参数,从而可以提高虚拟标签的渲染效果参数的获得效率。
图22是本公开实施例提供的虚拟标签展示方法的另一个可选的流程示意图,上述S1002可以通过S10023-S10025实现,将结合图22示出的步骤进行说明。
S10023、获取虚拟标签的预设渲染效果参数。
在本公开的一些实施例中,虚拟标签展示设备的内存中或与虚拟标签展示设备连接的服务器中可以预先存储有虚拟标签的预设渲染效果参数,例如,预设透明度、预设颜色和预设饱和度和/或预设样式等。在虚拟标签展示设备进行虚拟标签渲染时,可以先获取虚拟标签的预设渲染效果参数。
S10024、确定光照强度信息是否超过预设阈值,得到确定结果。
在本公开的一些实施例中,虚拟标签展示设备的内存中或与虚拟标签展示设备连接的服务器中可以预先存储有预设阈值,虚拟标签展示设备进行虚拟标签渲染时,可以先获取该预设阈值,并判断采集的光照强度信息(即光照强度数值)是否超过该预设阈值,并获得确定结果。示例性的,预设阈值可以是 40000lx(勒克斯),虚拟标签展示设备可以比较采集的光照强度值与40000lx 之间的大小,并得到比较结果。
S10025、根据确定结果,调整预设渲染效果参数,从而确定出虚拟标签的渲染效果参数。
在本公开的一些实施例中,当虚拟标签的渲染效果参数为虚拟标签的透明度时,由于在光照强度较高(即光线较亮)的情况下,若虚拟标签的透明度较高则会影响虚拟标签的清晰度,所以,在光照强度超过预设阈值的情况下,可以降低虚拟标签的透明度,以确保虚拟标签的清晰显示;以及,在虚拟标签的透明度较低(即光线较暗)的情况下,虚拟标签的显示可能会对图像中的其他物体的显示产生影响,所以,在光照强度低于预设阈值的情况下,可以增加虚拟标签的透明度,以确保虚拟标签与图像中显示的其他物体的相重合的部分,可以得到显示,例如,图5中所示,由于虚拟标签20的部分透明度较高,所以,虚拟标签20与办公大楼10之间相重合的部分可以得到显示。
在本公开的一些实施例中,当虚拟标签的渲染效果参数为饱和度时,由于在光照强度较高的情况下,若虚拟标签的颜色的饱和度较低(即颜色较浅)则会影响虚拟标签的清晰度,所以,在光照强度信息超过预设阈值的情况下,可以增加虚拟标签的饱和度,以确保虚拟标签的清晰显示;以及,在虚拟标签的饱和度较高的情况下,虚拟标签的显示可能会影响虚拟标签的美观性,所以,在光照强度信息低于预设阈值的情况下,可以减小虚拟标签的饱和度,以确保虚拟标签的美观性。
本公开实施例中,根据实时采集的光照强度信息与预设阈值之间的大小关系,确定是否调整虚拟标签的预设渲染效果参数,从而确定出虚拟标签的渲染效果参数,可以实时确定出合适的渲染效果参数,从而最终提高虚拟参数的显示效果。
在本公开的一些实施例中,显示设备包括在预设的滑轨上可移动且设置有图像采集单元的显示屏;其中,图像采集单元用于在显示屏移动的过程中,实时采集真实场景图像。
本公开还提供一种虚拟标签展示装置,图23为本公开实施例提供的虚拟标签展示装置的结构示意图;如图23所示,虚拟标签展示装置1包括:
采集模块11,用于采集真实场景图像;
识别模块12,用于识别所述真实场景图像中的真实对象的属性信息;
确定模块13,用于基于所述真实对象的属性信息,确定与所述真实对象对应的虚拟标签的渲染效果参数;所述虚拟标签表征所述真实对象的描述信息;
展示模块14,用于利用所述渲染效果参数,在显示设备上展示所述真实场景图像中的所述真实对象以及与所述真实对象对应的虚拟标签的增强现实AR 效果。
在本公开的一些实施例中,展示模块14,还用于基于所述真实对象处于所述真实场景图像中的方位信息,确定所述虚拟标签的显示位置;利用所述渲染效果参数,在所述虚拟标签的显示位置进行所述虚拟对象的渲染;在所述显示设备上展示所述真实场景图像中的所述真实对象的同时,展示与所述真实对象对应的虚拟标签的增强现实AR效果。
在本公开的一些实施例中,展示模块14,还用于在所述真实场景图像中,确定与所述真实对象的方位信息具有映射关系的目标方位信息;在所述目标方位信息所表征的所述真实场景图像的目标区域中,确定所述虚拟标签的显示位置。
在本公开的一些实施例中,所述真实对象的属性信息包括以下至少之一:
所述真实对象的显示参数;所述显示参数包括以下至少之一:所述真实对象的颜色、所述真实对象的形状;
所述真实对象的拍摄参数;所述拍摄参数包括以下至少之一:环境光的光照强度值;环境光的光圈值;环境光的反射情况;
所述真实对象的拍摄环境参数;所述拍摄环境参数包括以下至少之一:天气信息;温度信息;节气信息。
在本公开的一些实施例中,所述渲染效果参数包括以下至少之一:所述虚拟标签的颜色、透明度、饱和度和样式。
在本公开的一些实施例中,确定模块13,还用于在所述真实对象的属性信息为所述真实对象的显示参数,所述虚拟标签的渲染效果参数包括所述虚拟标签的颜色的情况下,根据所述真实对象的显示参数和第一特定规则,确定所述虚拟标签的颜色。
在本公开的一些实施例中,确定模块13,还用于在所述真实对象的属性信息为所述真实对象的拍摄参数,所述虚拟标签的渲染效果参数包括所述虚拟标签的透明度、饱和度和/或颜色的情况下,根据所述真实对象的拍摄参数和第二特定规则,确定所述虚拟标签的透明度、饱和度和/或颜色。
在本公开的一些实施例中,确定模块13,还用于在所述真实对象的属性信息为所述真实对象的拍摄环境参数,所述虚拟标签的渲染效果参数包括所述虚拟标签的透明度、饱和度、样式和/或颜色的情况下,根据所述真实对象的拍摄环境参数和第三特定规则,确定所述虚拟标签的透明度、饱和度、样式和/或颜色。
在本公开的一些实施例中,采集模块11,还用于采集光照强度信息;确定模块4552,还用于根据所述光照强度信息,确定所述虚拟标签的渲染效果参数。
在本公开的一些实施例中,所述虚拟标签包括文本信息和标签背景,所述虚拟标签的渲染效果参数包括虚拟标签的颜色,展示模块14,还用于采用所述虚拟标签的颜色,在所述虚拟标签的显示位置对所述文本信息的颜色和所述标签背景的颜色进行渲染。
在本公开的一些实施例中,确定模块13,还用于确定所述光照强度信息所对应的强度等级;根据预设的强度等级与渲染效果参数的映射关系,确定所述强度等级所对应的所述虚拟标签的一组渲染效果参数;所述预设的强度等级与渲染效果参数的映射关系表征不同的强度等级与不同组的渲染效果参数的对应关系。
在本公开的一些实施例中,确定模块13,还用于获取所述虚拟标签的预设渲染效果参数;确定所述光照强度信息是否超过预设阈值,得到确定结果;根据确定结果,调整所述预设渲染效果参数,从而确定出所述虚拟标签的渲染效果参数。
在本公开的一些实施例中,所述显示设备包括在预设的滑轨上可移动且设置有图像采集单元的显示屏;其中,所述图像采集单元用于在所述显示屏移动的过程中,实时采集所述真实场景图像。
本公开实施例还提供一种虚拟标签展示设备,图24为本公开实施例提供的虚拟标签展示设备的结构示意图,如图24所示,包括:显示屏21、存储器22 和处理器23,其中,显示屏21、存储器22和处理器23通过总线24连接;存储器22,用于存储可执行计算机程序;处理器23,用于执行存储器22中存储的可执行计算机程序时,结合显示屏21,实现本公开实施例提供的方法,例如,本公开实施例提供的虚拟标签展示方法。
本公开实施例提供一种计算机可读存储介质,存储有计算机程序,用于引起处理器23执行时,实现本公开实施例提供的方法,例如,本公开实施例提供的虚拟标签展示方法。
在本公开的一些实施例中,存储介质可以是FRAM、ROM、PROM、EPROM、 EEPROM、闪存、磁表面存储器、光盘、或CD-ROM等存储器;也可以是包括上述存储器之一或任意组合的各种设备。
在本公开的一些实施例中,可执行指令可以采用程序、软件、软件模块、脚本或代码的形式,按任意形式的编程语言(包括编译或解释语言,或者声明性或过程性语言)来编写,并且其可按任意形式部署,包括被部署为独立的程序或者被部署为模块、组件、子例程或者适合在计算环境中使用的其它单元。
作为示例,可执行指令可以但不一定对应于文件系统中的文件,可以可被存储在保存其它程序或数据的文件的一部分,例如,存储在超文本标记语言 (HTML,Hyper TextMarkup Language)文档中的一个或多个脚本中,存储在专用于所讨论的程序的单个文件中,或者,存储在多个协同文件(例如,存储一个或多个模块、子程序或代码部分的文件)中。
作为示例,可执行指令可被部署为在一个计算设备上执行,或者在位于一个地点的多个计算设备上执行,又或者,在分布在多个地点且通过通信网络互连的多个计算设备上执行。
综上所述,采用本技术实现方案,由于虚拟标签的渲染效果参数是根据采集的真实场景图像中的真实对象的属性信息所获得,所以,在真实对象或者真实对象的属性信息,随着真实场景图像的变化而发生变化时,虚拟标签的渲染效果参数也会产生变化,随之,在真实场景图像中渲染获得的虚拟标签的展示形态也会发生变化,从而,可以使渲染在真实场景图像中的虚拟标签的展示形态,随着采集的真实场景图像的变化而产生变化,可以提高虚拟标签的展示灵活度,以及真实图像与虚拟标签的融合度,从而可以提高画面的AR效果。
以上所述,仅为本公开的实施例而已,并非用于限定本公开的保护范围。凡在本公开的精神和范围之内所作的任何修改、等同替换和改进等,均包含在本公开的保护范围之内。

Claims (16)

1.一种虚拟标签展示方法,其特征在于,包括:
采集真实场景图像;
识别所述真实场景图像中的真实对象的属性信息;
基于所述真实对象的属性信息,确定与所述真实对象对应的虚拟标签的渲染效果参数;所述虚拟标签表征所述真实对象的描述信息;
利用所述渲染效果参数,在显示设备上展示所述真实场景图像中的所述真实对象以及与所述真实对象对应的虚拟标签的增强现实AR效果。
2.根据权利要求1所述的方法,其特征在于,所述利用所述渲染效果参数,在显示设备上展示所述真实场景图像中的所述真实对象以及与所述真实对象对应的虚拟标签的增强现实AR效果,包括:
基于所述真实对象处于所述真实场景图像中的方位信息,确定所述虚拟标签的显示位置;
利用所述渲染效果参数,在所述虚拟标签的显示位置进行所述虚拟对象的渲染;
在所述显示设备上展示所述真实场景图像中的所述真实对象的同时,展示与所述真实对象对应的虚拟标签的增强现实AR效果。
3.根据权利要求2所述的方法,其特征在于,所述基于所述真实对象处于所述真实场景图像中的方位信息,确定所述虚拟标签的显示位置,包括:
在所述真实场景图像中,确定与所述真实对象的方位信息具有映射关系的目标方位信息;
在所述目标方位信息所表征的所述真实场景图像的目标区域中,确定所述虚拟标签的显示位置。
4.根据权利要求1至3任一项所述的方法,其特征在于,所述真实对象的属性信息包括以下至少之一:
所述真实对象的显示参数;所述显示参数包括以下至少之一:所述真实对象的颜色和所述真实对象的形状;
所述真实对象的拍摄参数;所述拍摄参数包括以下至少之一:环境光的光照强度值和环境光的反射情况;
所述真实对象的拍摄环境参数;所述拍摄环境参数包括以下至少之一:天气信息、温度信息和节气信息。
5.根据权利要求1至4任一项所述的方法,其特征在于,所述渲染效果参数包括以下至少之一:所述虚拟标签的颜色、透明度、饱和度和样式。
6.根据权利要求4所述的方法,其特征在于,在所述真实对象的属性信息为所述真实对象的显示参数,所述虚拟标签的渲染效果参数包括所述虚拟标签的颜色的情况下,
所述基于所述真实对象的属性信息,确定与所述真实对象对应的虚拟标签的渲染效果参数,包括:
根据所述真实对象的显示参数和第一特定规则,确定所述虚拟标签的颜色。
7.根据权利要求4所述的方法,其特征在于,在所述真实对象的属性信息为所述真实对象的拍摄参数,所述虚拟标签的渲染效果参数包括所述虚拟标签的透明度、饱和度和/或颜色的情况下,
所述基于所述真实对象的属性信息,确定与所述真实对象对应的虚拟标签的渲染效果参数,包括:
根据所述真实对象的拍摄参数和第二特定规则,确定所述虚拟标签的透明度、饱和度和/或颜色。
8.根据权利要求4所述的方法,其特征在于,在所述真实对象的属性信息为所述真实对象的拍摄环境参数,所述虚拟标签的渲染效果参数包括所述虚拟标签的透明度、饱和度、样式和/或颜色的情况下,
所述基于所述真实对象的属性信息,确定与所述真实对象对应的虚拟标签的渲染效果参数,包括:
根据所述真实对象的拍摄环境参数和第三特定规则,确定所述虚拟标签的透明度、饱和度、样式和/或颜色。
9.根据权利要求1-8任一项所述的方法,其特征在于,所述方法还包括:
采集光照强度信息;
根据所述光照强度信息,确定所述虚拟标签的渲染效果参数。
10.根据权利要求2所述的方法,其特征在于,所述虚拟标签包括文本信息和标签背景,所述虚拟标签的渲染效果参数包括虚拟标签的颜色;
所述利用所述渲染效果参数,在所述虚拟标签的显示位置进行所述虚拟对象的渲染,包括:
采用所述虚拟标签的颜色,在所述虚拟标签的显示位置对所述文本信息的颜色和所述标签背景的颜色进行渲染。
11.根据权利要求9所述的方法,其特征在于,所述根据所述光照强度信息,确定所述虚拟标签的渲染效果参数,包括:
确定所述光照强度信息所对应的强度等级;
根据预设的强度等级与渲染效果参数的映射关系,确定所述强度等级所对应的所述虚拟标签的一组渲染效果参数;所述预设的强度等级与渲染效果参数的映射关系表征不同的强度等级与不同组的渲染效果参数的对应关系。
12.根据权利要求9所述的方法,其特征在于,所述根据所述光照强度信息,确定所述虚拟标签的渲染效果参数,包括:
获取所述虚拟标签的预设渲染效果参数;
确定所述光照强度信息是否超过预设阈值,得到确定结果;
根据确定结果,调整所述预设渲染效果参数,从而确定出所述虚拟标签的渲染效果参数。
13.根据权利要求1-12中任一项所述的方法,其特征在于,所述显示设备包括在预设的滑轨上可移动且设置有图像采集单元的显示屏;
其中,所述图像采集单元用于在所述显示屏移动的过程中,实时采集所述真实场景图像。
14.一种虚拟标签展示装置,其特征在于,包括:
采集模块,用于采集真实场景图像;
识别模块,用于识别所述真实场景图像中的真实对象的属性信息;
确定模块,用于基于所述真实对象的属性信息,确定与所述真实对象对应的虚拟标签的渲染效果参数;所述虚拟标签表征所述真实对象的描述信息;
展示模块,用于利用所述渲染效果参数,在显示设备上展示所述真实场景图像中的所述真实对象以及与所述真实对象对应的虚拟标签的增强现实AR效果。
15.一种虚拟标签展示设备,其特征在于,包括:
显示屏;
存储器,用于存储可执行计算机程序;
处理器,用于执行所述存储器中存储的可执行计算机程序时,结合所述显示屏,实现权利要求1至13中任一项所述的方法。
16.一种计算机可读存储介质,其特征在于,存储有计算机程序,用于引起处理器执行时,实现权利要求1至13中任一项所述的方法。
CN202010622177.0A 2020-06-30 2020-06-30 虚拟标签展示方法、装置、设备及计算机可读存储介质 Pending CN111862339A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010622177.0A CN111862339A (zh) 2020-06-30 2020-06-30 虚拟标签展示方法、装置、设备及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010622177.0A CN111862339A (zh) 2020-06-30 2020-06-30 虚拟标签展示方法、装置、设备及计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN111862339A true CN111862339A (zh) 2020-10-30

Family

ID=72989304

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010622177.0A Pending CN111862339A (zh) 2020-06-30 2020-06-30 虚拟标签展示方法、装置、设备及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN111862339A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111625091A (zh) * 2020-05-14 2020-09-04 佳都新太科技股份有限公司 基于ar眼镜的标签叠加方法及装置
EP4148614A1 (en) * 2021-09-14 2023-03-15 Beijing Xiaomi Mobile Software Co., Ltd. Translation method, ar device, storage medium and computer program product

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108121440A (zh) * 2017-09-30 2018-06-05 苏州美房云客软件科技股份有限公司 存储装置、计算机设备、虚拟选房系统及其标签设定方法
US20190147658A1 (en) * 2016-06-20 2019-05-16 Cygames, Inc. System, etc. for creating mixed-reality environment
CN110490960A (zh) * 2019-07-11 2019-11-22 阿里巴巴集团控股有限公司 一种合成图像生成方法及装置
CN111316333A (zh) * 2018-09-30 2020-06-19 华为技术有限公司 一种信息提示方法及电子设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190147658A1 (en) * 2016-06-20 2019-05-16 Cygames, Inc. System, etc. for creating mixed-reality environment
CN108121440A (zh) * 2017-09-30 2018-06-05 苏州美房云客软件科技股份有限公司 存储装置、计算机设备、虚拟选房系统及其标签设定方法
CN111316333A (zh) * 2018-09-30 2020-06-19 华为技术有限公司 一种信息提示方法及电子设备
CN110490960A (zh) * 2019-07-11 2019-11-22 阿里巴巴集团控股有限公司 一种合成图像生成方法及装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111625091A (zh) * 2020-05-14 2020-09-04 佳都新太科技股份有限公司 基于ar眼镜的标签叠加方法及装置
CN111625091B (zh) * 2020-05-14 2021-07-20 佳都科技集团股份有限公司 基于ar眼镜的标签叠加方法及装置
EP4148614A1 (en) * 2021-09-14 2023-03-15 Beijing Xiaomi Mobile Software Co., Ltd. Translation method, ar device, storage medium and computer program product

Similar Documents

Publication Publication Date Title
US9582731B1 (en) Detecting spherical images
US10198846B2 (en) Digital Image Animation
CN109644224A (zh) 用于捕获数字图像的系统和方法
CN105407276A (zh) 拍照方法和设备
CN106203286B (zh) 一种增强现实的内容获取方法、装置及移动终端
CN109255841A (zh) Ar图像呈现方法、装置、终端及存储介质
US11070717B2 (en) Context-aware image filtering
CN111833423A (zh) 展示方法、装置、设备和计算机可读存储介质
US11657085B1 (en) Optical devices and apparatuses for capturing, structuring, and using interlinked multi-directional still pictures and/or multi-directional motion pictures
CN109816745A (zh) 人体热力图展示方法及相关产品
CN104580920B (zh) 一种成像处理的方法及用户终端
CN111815786A (zh) 信息显示方法、装置、设备和存储介质
CN111897431A (zh) 展示方法及装置、显示设备、计算机可读存储介质
CN113259597B (zh) 图像处理方法、装置、设备、介质及程序产品
WO2020211427A1 (zh) 基于扫描点云数据的分割与识别方法、系统及存储介质
CN111862339A (zh) 虚拟标签展示方法、装置、设备及计算机可读存储介质
CN114125310B (zh) 拍照方法、终端设备及云端服务器
CN112667346A (zh) 天气数据展示方法、装置、电子设备及存储介质
CN111815780A (zh) 展示方法、显示装置、设备及计算机可读存储介质
CN110740545B (zh) 一种现场光斑排列方法及系统、存储介质及灯具控制设备
CN113110731B (zh) 媒体内容生成的方法和装置
CN111815785A (zh) 现实模型的呈现方法、装置、电子设备及存储介质
US11200650B1 (en) Dynamic image re-timing
KR20210097559A (ko) 3차원 가상 공간을 구축하기 위한 방법, 컴퓨터 판독 가능한 기록 매체, 컴퓨터 프로그램 및 장치
CN114820292A (zh) 图像合成方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20201030

RJ01 Rejection of invention patent application after publication