CN113470190A - 场景显示方法及装置、设备、车辆、计算机可读存储介质 - Google Patents

场景显示方法及装置、设备、车辆、计算机可读存储介质 Download PDF

Info

Publication number
CN113470190A
CN113470190A CN202110762514.0A CN202110762514A CN113470190A CN 113470190 A CN113470190 A CN 113470190A CN 202110762514 A CN202110762514 A CN 202110762514A CN 113470190 A CN113470190 A CN 113470190A
Authority
CN
China
Prior art keywords
target
display
building
special effect
target building
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110762514.0A
Other languages
English (en)
Inventor
简艺
孙红亮
王子彬
李炳泽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Shangtang Technology Development Co Ltd
Zhejiang Sensetime Technology Development Co Ltd
Original Assignee
Zhejiang Shangtang Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Shangtang Technology Development Co Ltd filed Critical Zhejiang Shangtang Technology Development Co Ltd
Priority to CN202110762514.0A priority Critical patent/CN113470190A/zh
Publication of CN113470190A publication Critical patent/CN113470190A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Abstract

本申请公开了一种场景显示方法及装置、设备、车辆、计算机可读存储介质,其中,场景显示方法包括:获取图像采集设备拍摄的现实场景图像;响应于识别到所述现实场景图像中的目标建筑物,确定与所述目标建筑物对应的目标显示特效;生成所述目标建筑物与所述目标显示特效相叠加的增强现实数据;显示所述增强现实数据。上述方案,能够为目标建筑物增加显示特效。

Description

场景显示方法及装置、设备、车辆、计算机可读存储介质
技术领域
本申请涉及增强现实技术领域,特别是涉及一种场景显示方法及装置、设备、车辆、计算机可读存储介质。
背景技术
增强现实(Augmented Reality,AR)技术是通过将实体信息(视觉信息、声音、触觉等)通过模拟仿真后,叠加到真实世界中,从而将真实的环境和虚拟的物体实时地在同一个画面或空间呈现。近年来,AR设备的应用领域越来越广,使得AR设备在生活、工作、娱乐中起到了重要的作用,对AR设备呈现的增强现实场景的效果的优化,愈发重要。
建筑物与人类生活息息相关,故建筑物充斥在人类生活的各个地方,而不同地方、不同年代的建筑物具有不同的特色,故人们通过参观建筑物的细节、结构,可以对建筑物对应的文化艺术等方面有简单的了解。但是,通过用户在固定地点参观建筑物的方式,使得建筑物的展示方式较单一,展示效果较差。
发明内容
本申请主要解决的技术问题是提供一种场景显示方法及装置、设备、车辆、计算机可读存储介质。
本申请第一方面提供了一种场景显示方法,所述方法包括:获取图像采集设备拍摄的现实场景图像;响应于识别到所述现实场景图像中的目标建筑物,确定与所述目标建筑物对应的目标显示特效;生成所述目标建筑物与所述目标显示特效相叠加的增强现实数据;显示所述增强现实数据。
因此,通过在图像采集设备拍摄到现实场景图像后,可以识别到现实场景图像中的目标建筑物,然后可以确定与目标建筑物对应的目标显示特效,并将目标显示特效融入目标建筑物,生成并显示目标建筑物与目标显示特效相叠加的增强现实数据,可以增强用户对现实场景中的目标建筑物进行理解和辨识,且可以增加所展示的建筑物的美感。
其中,所述在识别到所述现实场景图像中的目标建筑物后,确定与所述目标建筑物对应的目标显示特效,包括:利用目标识别网络对获取的所述现实场景图像进行识别,得到所述目标建筑物;基于所述目标建筑物,确定与所述目标建筑物对应的目标显示特效。
因此,利用目标识别网络,可以快速识别并确定出现实场景图像中的目标建筑物,以便于确定与目标建筑物对应的目标显示特效,丰富了场景。
其中,所述目标显示特效包括第一显示特效;所述基于所述目标建筑物,确定与所述目标建筑物对应的目标显示特效,包括:获取所述目标建筑物的目标区域;根据区域与显示特效的对应关系确定所述目标区域对应的第一显示特效。
因此,当识别出现实场景图像中的目标建筑物时,能够根据目标建筑物的目标区域,在对应的位置添加第一显示特效,丰富了场景,增加了建筑物的美感。
其中,所述目标区域包括建筑物的边缘轮廓、外立面和周围区域的至少一种。
因此,通过在建筑物的边缘轮廓、外立面和周围区域等位置添加第一显示特效,不仅可以呈现出建筑物的结构特点,而且可以增强建筑物的美感。
其中,所述目标显示特效包括第二显示特效;所述基于所述目标建筑物,确定与所述目标建筑物对应的目标显示特效,包括:获取所述目标建筑物的属性特征;根据特征与显示特效的对应关系确定所述属性特征对应的第二显示特效。
因此,当识别出现实场景图像中的目标建筑物时,能够根据目标建筑物的属性特征,为目标建筑物添加对应的第二显示特效,提高了场景显示的多样性,并且可以帮助用户更好地对目标建筑物进行辨识和理解。
其中,所述属性特征包括建筑物的建筑风格、规格尺寸和外部形状的至少一种。
因此,通过建筑物的建筑风格、规格尺寸和外部形状等属性特征来确定目标建筑物的类型,于是可以确定与目标建筑物的类型对应的第二显示特效,使得场景显示特效具有多样性,提高了目标建筑物展示的灵活性。
其中,所述显示所述增强现实数据,包括:获取所述图像采集设备在第一时刻和第二时刻的位姿信息;确定所述图像采集设备与所述目标建筑物的相对位置的变化信息;基于所述相对位置的变化信息,更新所述增强现实数据。
因此,通过获取图像采集设备在第一时刻和第二时刻的位姿信息,可以得到分别在第一时刻和第二时刻时图像采集设备与目标建筑物的相对位置关系,从而可以得到图像采集设备与所述目标建筑物的相对位置的变化信息,于是可以根据图像采集设备的位置变化,同步对增强现实数据的显示进行更新,使得用户从不同角度和位置观看时,都可看到目标建筑物上所叠加显示的目标显示特效。
其中,所述目标建筑物包括景区建筑、公园、科技馆、游乐园以及学校中的至少一种。
因此,通过为景区建筑、公园、科技馆、游乐园以及学校等目标建筑物设置对应的目标显示特效,使得场景显示具有多样性。
为了解决上述问题,本申请第二方面提供了一种场景显示方法,所述方法包括:获取车辆外部的图像采集设备拍摄的现实场景图像;响应于识别到所述现实场景图像中的目标建筑物,确定与所述目标建筑物对应的目标显示特效;生成所述目标建筑物与所述目标显示特效相叠加的增强现实数据;利用所述车辆的显示设备显示所述增强现实数据。
因此,通过在车辆外部设置图像采集装置,在图像采集设备拍摄到现实场景图像后,可以识别到现实场景图像中的目标建筑物,然后可以确定与目标建筑物对应的目标显示特效,并将目标显示特效融入目标建筑物,生成目标建筑物与目标显示特效相叠加的增强现实数据,于是可以利用车辆的显示设备显示增强现实数据,使得乘坐于车辆上的用户可以通过显示设备观看所显示的场景,增强用户对现实场景中的目标建筑物进行理解和辨识,且可以增加所展示的建筑物的美感。
为了解决上述问题,本申请第三方面提供了一种场景显示装置,包括:获取模块,所述获取模块用于获取图像采集设备拍摄的现实场景图像;确定模块,所述确定模块用于响应于识别到所述现实场景图像中的目标建筑物,确定与所述目标建筑物对应的目标显示特效;生成模块,所述生成模块用于生成所述目标建筑物与所述目标显示特效相叠加的增强现实数据;显示模块,所述显示模块用于显示所述增强现实数据。
为了解决上述问题,本申请第四方面提供了一种电子设备,包括相互耦接的存储器和处理器,所述处理器用于执行所述存储器中存储的程序指令,以实现上述第一方面中的场景显示方法。
为了解决上述问题,本申请第五方面提供了一种车辆,包括车辆主体和设置在所述车辆主体上的电子设备,其中,所述电子设备为上述第四方面中的电子设备。
为了解决上述问题,本申请第六方面提供了一种计算机可读存储介质,其上存储有程序指令,所述程序指令被处理器执行时实现上述第一方面中的场景显示方法。
上述方案,通过在图像采集设备拍摄到现实场景图像后,可以识别到现实场景图像中的目标建筑物,然后可以确定与目标建筑物对应的目标显示特效,并将目标显示特效融入目标建筑物,生成并显示目标建筑物与目标显示特效相叠加的增强现实数据,可以增强用户对现实场景中的目标建筑物进行理解和辨识,且可以增加所展示的建筑物的美感。
附图说明
图1是本申请场景显示方法一实施例的流程示意图;
图2是图1中步骤S12一实施例的流程示意图;
图3是图2中步骤S122一实施例的流程示意图;
图4是图2中步骤S122另一实施例的流程示意图;
图5是图1中步骤S14一实施例的流程示意图;
图6是本申请场景显示方法另一实施例的流程示意图;
图7是本申请场景显示装置一实施例的框架示意图;
图8是本申请电子设备一实施例的框架示意图;
图9是本申请车辆一实施例的框架示意图;
图10是本申请计算机可读存储介质一实施例的框架示意图。
具体实施方式
下面结合说明书附图,对本申请实施例的方案进行详细说明。
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、接口、技术之类的具体细节,以便透彻理解本申请。
本文中术语“系统”和“网络”在本文中常被可互换使用。本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。此外,本文中的“多”表示两个或者多于两个。
请参阅图1,图1是本申请场景显示方法一实施例的流程示意图。
具体而言,可以包括如下步骤:
步骤S11:获取图像采集设备拍摄的现实场景图像。
本申请中,图像采集设备包括但不限于RGB摄像头、红外成像仪等。在一实施例中,图像采集设备为AR设备,AR设备可以为AR智能眼镜、AR手机,也可以为任意具有增强现实功能的电子设备;现实场景图像可以为AR设备实时获取的现实场景的图像,或者,现实场景图像还可以为用户触发拍摄操作之后,AR设备拍摄得到的现实场景图像。
步骤S12:响应于识别到所述现实场景图像中的目标建筑物,确定与所述目标建筑物对应的目标显示特效。
可以理解的是,现实场景图像中可以包括一个或多个目标建筑物。在AR设备拍摄到现实场景图像之后,可以通过对现实场景图像进行目标检测,确定现实场景图像中是否存在目标建筑物。具体地,可以对现实场景图像进行检测,在检测到现实场景图像中包括目标建筑物时,根据目标建筑物确定与之对应的目标显示特效;在检测到现实场景图像中不包括目标建筑物时,则不进行确定目标显示特效的步骤。现实场景图像中不包括目标建筑物的情况可以包括:现实场景图像中不存在建筑物,或者现实场景中存在的建筑物不符合预设要求等。
目标建筑物可以是景区建筑、公园、科技馆、游乐园以及学校等;目标显示特效为与该目标建筑物匹配的显示特效,可以包括特殊图案特效、虚拟人物特效、季节特效、特殊物体特效等。
步骤S13:生成所述目标建筑物与所述目标显示特效相叠加的增强现实数据。
步骤S14:显示所述增强现实数据。
可以基于现实场景图像,确定目标显示特效的显示位置,并基于确定的显示位置,生成将目标显示特效融入包含目标建筑物的现实场景的增强现实数据,然后将生成的增强现实数据发送给AR设备,使得AR设备可以展示目标建筑物与目标显示特效融合后的AR画面。
上述方案,通过在图像采集设备拍摄到现实场景图像后,可以识别到现实场景图像中的目标建筑物,然后可以确定与目标建筑物对应的目标显示特效,并将目标显示特效融入目标建筑物,生成并显示目标建筑物与目标显示特效相叠加的增强现实数据,可以增强用户对现实场景中的目标建筑物进行理解和辨识,且可以增加所展示的建筑物的美感。
请参阅图2,图2是图1中步骤S12一实施例的流程示意图。本实施例中,上述步骤S12具体可以包括如下步骤:
步骤S121:利用目标识别网络对获取的所述现实场景图像进行识别,得到所述目标建筑物。
在确定与目标建筑物对应的目标显示特效之前,本实施例提供的场景显示方法需要先进行目标建筑物的识别,对目标建筑物的识别,可以采用图像处理方法或者深度学习方法来实现。例如,可以利用多个图像样本预先训练一个能够进行目标建筑物识别的目标识别网络,然后将图像采集设备拍摄的现实场景图像输入到训练好的目标识别网络中,即可以从该现实场景图像中识别出目标建筑物。可以理解的是,利用目标识别网络,可以快速识别并确定出现实场景图像中的目标建筑物,以便于确定与目标建筑物对应的目标显示特效,丰富了场景。
需要说明的是,本申请在识别不同类型的目标建筑物时,可以采用同一目标识别网络,也即,在进行目标识别网络的训练过程中,可以将标记有各个类型的图像样本作为训练数据进行训练,得到一个通用的识别网络,除此之外,本申请还可以针对不同类型的目标建筑物分别训练对应的识别网络。
步骤S122:基于所述目标建筑物,确定与所述目标建筑物对应的目标显示特效。
具体地,对现实场景图像进行目标检测,当检测到现实场景图像中存在目标建筑物时,对目标建筑物进行特征提取,从而可以确定该目标建筑物的实际类别,并根据该目标建筑物的实际类别,为目标建筑物匹配对应的目标显示特效。
请参阅图3,图3是图2中步骤S122一实施例的流程示意图。本实施例中,所述目标显示特效包括第一显示特效,上述步骤S122具体可以包括如下步骤:
步骤S1221:获取所述目标建筑物的目标区域。
步骤S1222:根据区域与显示特效的对应关系确定所述目标区域对应的第一显示特效。
当识别出现实场景图像中的目标建筑物时,能够根据目标建筑物的目标区域,在对应的位置添加第一显示特效,丰富了场景,增加了建筑物的美感。
可以理解的是,可以预先为目标建筑物的每个目标区域存储有对应的至少一个第一显示特效,形成区域与显示特效的对应关系;在检测得到目标建筑物之后,可以根据目标建筑物的目标区域,确定该目标区域对应的至少一个第一显示特效。目标区域可以包括建筑物的边缘轮廓、外立面和周围区域等,第一显示特效可以是特殊图案特效、文字特效、高光线条特效等。通过在建筑物的边缘轮廓、外立面和周围区域等位置添加第一显示特效,不仅可以呈现出建筑物的结构特点,而且可以增强建筑物的美感。例如,目标区域为建筑物的边缘轮廓,则可以为目标建筑物的边缘轮廓设置对应的高光线条特效,利用高光线条特效可以点缀勾勒并呈现出目标建筑物的建筑结构特点;又例如,目标区域为建筑物的外立面,则可以为目标建筑物的外立面设置对应的特殊图案特效,利用特殊图案特效可以对目标建筑物进行特征显示,比如可以在制作集成电路板的工厂的外立面显示集成电路板的特效等;又例如,目标区域为建筑物的周围区域,则可以为目标建筑物的周围区域设置对应的文字特效和/或特殊图案特效,利用文字特效可以对目标建筑物进行说明,比如可以在目标建筑物的周围区域显示艺术字、讲解说明,以使用户对目标建筑物进行辨识和理解,利用特殊图案特效可以对目标建筑物进行特点呈现,比如可以在中华艺术宫的周围区域显示祥云特效,以增强建筑物的美感。
请参阅图4,图4是图2中步骤S122另一实施例的流程示意图。本实施例中,所述目标显示特效包括第二显示特效,上述步骤S122具体可以包括如下步骤:
步骤S1223:获取所述目标建筑物的属性特征。
步骤S1224:根据特征与显示特效的对应关系确定所述属性特征对应的第二显示特效。
当识别出现实场景图像中的目标建筑物时,能够根据目标建筑物的属性特征,为目标建筑物添加对应的第二显示特效,提高了场景显示的多样性,并且可以帮助用户更好地对目标建筑物进行辨识和理解。
可以理解的是,可以预先为每个属性特征的目标建筑物存储有对应的至少一个第二显示特效,形成特征与显示特效的对应关系;在检测得到目标建筑物之后,可以根据目标建筑物的属性特征,确定该属性特征对应的至少一个第二显示特效。属性特征可以包括建筑物的建筑风格、规格尺寸和外部形状等,第二显示特效可以是虚拟人物特效、季节特效、特殊物体特效等。通过建筑物的建筑风格、规格尺寸和外部形状等属性特征来确定目标建筑物的类型,于是可以确定与目标建筑物的类型对应的第二显示特效,使得场景显示特效具有多样性,提高了目标建筑物展示的灵活性。例如,属性特征为建筑物的建筑风格,则可以为目标建筑物的建筑风格设置对应的虚拟人物特效,比如给中式风格、日式风格或者哥特式风格的目标建筑物设置具有对应风格韵味的虚拟人物,以使用户了解对应的建筑文化。又例如,属性特征为建筑物的规格尺寸和外部形状,则可以为目标建筑物的规格尺寸和外部形状设置对应的季节特效和特殊物体特效,根据目标建筑物的规格尺寸和外部形状,可以确定目标建筑物属于旅游景区建筑、公园、科技馆、游乐园以及学校等;对于旅游景区建筑,可以增加相关历史人物特效,并显示相关历史事件的讲解词;对于公园,可以增加不同的季节特效;对于科技馆,可以增加太空舱或者星球特效;对于游乐园,可以增加米老鼠、唐老鸭等卡通人物特效;对于学校,可以增加各学科的名人特效。
请参阅图5,图5是图1中步骤S14一实施例的流程示意图。本实施例中,上述步骤S14具体可以包括如下步骤:
步骤S141:获取所述图像采集设备在第一时刻和第二时刻的位姿信息。
步骤S142:确定所述图像采集设备与所述目标建筑物的相对位置的变化信息。
步骤S143:基于所述相对位置的变化信息,更新所述增强现实数据。
其中,图像采集设备的位姿信息,可以包括图像采集设备在世界坐标系下的坐标以及朝向。当图像采集设备在当前位置获取到现实场景图像时,则可以根据该现实场景图像生成对应的增强现实数据,在用户到达指定区域后,可以对增强现实数据进行显示,此时所展示出的目标建筑物与目标显示特效的融合效果较好。然而,随着图像采集设备和用户的移动,用户在现实场景中的观测角度和位置发生变化,此时需要对显示的增强显示数据进行调整,以适应用户位置的变化。具体地,通过获取图像采集设备在第一时刻和第二时刻的位姿信息,可以得到在第一时刻时图像采集设备与目标建筑物的相对位置关系,以及在第二时刻时图像采集设备与目标建筑物的相对位置关系,从而可以确定图像采集设备与目标建筑物的相对位置的变化信息,然后基于确定的相对位置的变化信息,可以对增强现实数据进行更新并显示,例如,基于确定的相对位置的变化信息,确定图像采集设备与目标建筑物之间的运动幅度,然后根据运动幅度调整当前展示的目标建筑物和目标显示特效的展示角度,或者将当前展示的目标显示特效替换为与当前位置相匹配的新的目标显示特效。在实际应用时,通过实时获取图像采集设备的位姿信息,可以得到图像采集设备与目标建筑物的相对位置关系,进而可以得到图像采集设备与所述目标建筑物的相对位置的变化信息,于是可以根据图像采集设备的位置变化,同步对增强现实数据的显示进行调整,使得用户从不同角度和位置观看时,都可看到目标建筑物上所叠加显示的目标显示特效。
本申请的场景显示方法的执行主体可以是场景显示装置,场景显示装置可以是具有增强现实功能的AR观光车,或者安装于观光车的处理器,地图更新装置还可以是与观光车通信连接的服务器或其它处理设备。在一些可能的实现方式中,该场景显示方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。场景显示方法可以在AR观光车处于行驶状态下进行,在AR观光车行驶于目标区域时,可以通过AR观光车外部的图像采集设备来拍摄得到现实场景图像,然后由处理器识别到现实场景图像中的目标建筑物,然后可以确定与目标建筑物对应的目标显示特效,并将目标显示特效融入目标建筑物,生成目标建筑物与目标显示特效相叠加的增强现实数据,并由AR观光车上的显示设备进行显示。并且,在AR观光车行驶的过程中,可以实时对增强现实数据进行调整,以保证用户在乘坐AR观光车时,可以从不同角度和位置观测到目标建筑物上叠加或覆盖了目标显示特效。
请参阅图6,图6是本申请场景显示方法另一实施例的流程示意图。具体而言,可以包括如下步骤:
步骤S61:获取车辆外部的图像采集设备拍摄的现实场景图像。
步骤S62:响应于识别到所述现实场景图像中的目标建筑物,确定与所述目标建筑物对应的目标显示特效。
步骤S63:生成所述目标建筑物与所述目标显示特效相叠加的增强现实数据。
步骤S64:利用所述车辆的显示设备显示所述增强现实数据。
通过在车辆外部设置图像采集装置,在图像采集设备拍摄到现实场景图像后,可以识别到现实场景图像中的目标建筑物,然后可以确定与目标建筑物对应的目标显示特效,并将目标显示特效融入目标建筑物,生成目标建筑物与目标显示特效相叠加的增强现实数据,于是可以利用车辆的显示设备显示增强现实数据,使得乘坐于车辆上的用户可以通过显示设备观看所显示的场景,增强用户对现实场景中的目标建筑物进行理解和辨识,且可以增加所展示的建筑物的美感。
请参阅图7,图7是本申请场景显示装置一实施例的框架示意图。本实施例中,场景显示装置60包括:获取模块600,用于获取图像采集设备拍摄的现实场景图像;确定模块602,用于响应于识别到所述现实场景图像中的目标建筑物,确定与所述目标建筑物对应的目标显示特效;生成模块604,用于生成所述目标建筑物与所述目标显示特效相叠加的增强现实数据;显示模块606,用于显示所述增强现实数据。
上述方案,通过获取模块600在图像采集设备拍摄到现实场景图像后,确定模块602可以识别到现实场景图像中的目标建筑物,然后可以确定与目标建筑物对应的目标显示特效,于是生成模块604将目标显示特效融入目标建筑物,生成目标建筑物与目标显示特效相叠加的增强现实数据,并由显示模块606显示所述增强现实数据,可以增强用户对现实场景中的目标建筑物进行理解和辨识,且可以增加所展示的建筑物的美感。
在一些实施例中,确定模块602执行在识别到所述现实场景图像中的目标建筑物后,确定与所述目标建筑物对应的目标显示特效的步骤,具体包括:利用目标识别网络对获取的所述现实场景图像进行识别,得到所述目标建筑物;基于所述目标建筑物,确定与所述目标建筑物对应的目标显示特效。
在一些实施例中,所述目标显示特效包括第一显示特效;确定模块602执行基于所述目标建筑物,确定与所述目标建筑物对应的目标显示特效的步骤,具体包括:获取所述目标建筑物的目标区域;根据区域与显示特效的对应关系确定所述目标区域对应的第一显示特效。
在一些实施例中,所述目标显示特效包括第二显示特效;确定模块602执行基于所述目标建筑物,确定与所述目标建筑物对应的目标显示特效的步骤,具体包括:获取所述目标建筑物的属性特征;根据特征与显示特效的对应关系确定所述属性特征对应的第二显示特效。
在一些实施例中,显示模块606执行显示所述增强现实数据的步骤,具体可以包括:获取所述图像采集设备在第一时刻和第二时刻的位姿信息;确定所述图像采集设备与所述目标建筑物的相对位置的变化信息;基于所述相对位置的变化信息,更新所述增强现实数据。
在一些实施例中,获取模块600用于获取车辆外部的图像采集设备拍摄的现实场景图像;确定模块602用于响应于识别到所述现实场景图像中的目标建筑物,确定与所述目标建筑物对应的目标显示特效;生成模块604用于生成所述目标建筑物与所述目标显示特效相叠加的增强现实数据;显示模块606用于利用所述车辆的显示设备显示所述增强现实数据。
请参阅图8,图8是本申请电子设备一实施例的框架示意图。电子设备70包括相互耦接的存储器71和处理器72,处理器72用于执行存储器71中存储的程序指令,以实现上述任一场景显示方法实施例的步骤。在一个具体的实施场景中,电子设备70可以包括但不限于:微型计算机、服务器。
具体而言,处理器72用于控制其自身以及存储器71以实现上述任一场景显示方法实施例中的步骤。处理器72还可以称为CPU(Central Processing Unit,中央处理单元)。处理器72可能是一种集成电路芯片,具有信号的处理能力。处理器72还可以是通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application SpecificIntegrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。另外,处理器72可以由集成电路芯片共同实现。
上述方案,处理器72通过在图像采集设备拍摄到现实场景图像后,可以识别到现实场景图像中的目标建筑物,然后可以确定与目标建筑物对应的目标显示特效,并将目标显示特效融入目标建筑物,生成并显示目标建筑物与目标显示特效相叠加的增强现实数据,可以增强用户对现实场景中的目标建筑物进行理解和辨识,且可以增加所展示的建筑物的美感。
请参阅图9,图9是本申请车辆一实施例的框架示意图。本实施例中,车辆90包括车辆主体91和设置在车辆主体91上的电子设备92,其中,电子设备92为上述实施例提及的电子设备。
在一实施方式中,车辆90还包括用于显示增强现实数据的显示设备,以及用于拍摄现实场景图像的图像采集设备,其中,显示设备设置于车辆主体91的内部,图像采集设备设置于车辆主体91的外部。
请参阅图10,图10是本申请计算机可读存储介质一实施例的框架示意图。计算机可读存储介质80存储有能够被处理器运行的程序指令800,程序指令800用于实现上述任一场景显示方法实施例中的步骤。
在本申请所提供的几个实施例中,应该理解到,所揭露的方法、装置,可以通过其它的方式实现。例如,以上所描述的装置实施方式仅仅是示意性的,例如,模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性、机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施方式方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(processor)执行本申请各个实施方式方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

Claims (13)

1.一种场景显示方法,其特征在于,所述方法包括:
获取图像采集设备拍摄的现实场景图像;
响应于识别到所述现实场景图像中的目标建筑物,确定与所述目标建筑物对应的目标显示特效;
生成所述目标建筑物与所述目标显示特效相叠加的增强现实数据;
显示所述增强现实数据。
2.根据权利要求1所述的场景显示方法,其特征在于,所述在识别到所述现实场景图像中的目标建筑物后,确定与所述目标建筑物对应的目标显示特效,包括:
利用目标识别网络对获取的所述现实场景图像进行识别,得到所述目标建筑物;
基于所述目标建筑物,确定与所述目标建筑物对应的目标显示特效。
3.根据权利要求2所述的场景显示方法,其特征在于,所述目标显示特效包括第一显示特效;
所述基于所述目标建筑物,确定与所述目标建筑物对应的目标显示特效,包括:
获取所述目标建筑物的目标区域;
根据区域与显示特效的对应关系确定所述目标区域对应的第一显示特效。
4.根据权利要求3所述的场景显示方法,其特征在于,所述目标区域包括建筑物的边缘轮廓、外立面和周围区域的至少一种。
5.根据权利要求2所述的场景显示方法,其特征在于,所述目标显示特效包括第二显示特效;
所述基于所述目标建筑物,确定与所述目标建筑物对应的目标显示特效,包括:
获取所述目标建筑物的属性特征;
根据特征与显示特效的对应关系确定所述属性特征对应的第二显示特效。
6.根据权利要求5所述的场景显示方法,其特征在于,所述属性特征包括建筑物的建筑风格、规格尺寸和外部形状的至少一种。
7.根据权利要求1至6任一项所述的场景显示方法,其特征在于,所述显示所述增强现实数据,包括:
获取所述图像采集设备在第一时刻和第二时刻的位姿信息;
确定所述图像采集设备与所述目标建筑物的相对位置的变化信息;
基于所述相对位置的变化信息,更新所述增强现实数据。
8.根据权利要求1至7任一项所述的场景显示方法,其特征在于,所述目标建筑物包括景区建筑、公园、科技馆、游乐园以及学校中的至少一种。
9.一种场景显示方法,其特征在于,所述方法包括:
获取车辆外部的图像采集设备拍摄的现实场景图像;
响应于识别到所述现实场景图像中的目标建筑物,确定与所述目标建筑物对应的目标显示特效;
生成所述目标建筑物与所述目标显示特效相叠加的增强现实数据;
利用所述车辆的显示设备显示所述增强现实数据。
10.一种场景显示装置,其特征在于,包括:
获取模块,所述获取模块用于获取图像采集设备拍摄的现实场景图像;
确定模块,所述确定模块用于响应于识别到所述现实场景图像中的目标建筑物,确定与所述目标建筑物对应的目标显示特效;
生成模块,所述生成模块用于生成所述目标建筑物与所述目标显示特效相叠加的增强现实数据;
显示模块,所述显示模块用于显示所述增强现实数据。
11.一种电子设备,其特征在于,包括相互耦接的存储器和处理器,所述处理器用于执行所述存储器中存储的程序指令,以实现权利要求1至9任一项所述的场景显示方法。
12.一种车辆,其特征在于,包括车辆主体和设置在所述车辆主体上的电子设备,其中,所述电子设备为权利要求11所述的电子设备。
13.一种计算机可读存储介质,其上存储有程序指令,其特征在于,所述程序指令被处理器执行时实现权利要求1至9任一项所述的场景显示方法。
CN202110762514.0A 2021-07-06 2021-07-06 场景显示方法及装置、设备、车辆、计算机可读存储介质 Pending CN113470190A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110762514.0A CN113470190A (zh) 2021-07-06 2021-07-06 场景显示方法及装置、设备、车辆、计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110762514.0A CN113470190A (zh) 2021-07-06 2021-07-06 场景显示方法及装置、设备、车辆、计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN113470190A true CN113470190A (zh) 2021-10-01

Family

ID=77878546

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110762514.0A Pending CN113470190A (zh) 2021-07-06 2021-07-06 场景显示方法及装置、设备、车辆、计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN113470190A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113992851A (zh) * 2021-10-22 2022-01-28 北京字跳网络技术有限公司 一种视频生成方法、装置、设备及存储介质
CN114942716A (zh) * 2022-05-11 2022-08-26 美的集团(上海)有限公司 Vr场景建立方法及装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113992851A (zh) * 2021-10-22 2022-01-28 北京字跳网络技术有限公司 一种视频生成方法、装置、设备及存储介质
CN114942716A (zh) * 2022-05-11 2022-08-26 美的集团(上海)有限公司 Vr场景建立方法及装置

Similar Documents

Publication Publication Date Title
WO2021073292A1 (zh) 一种ar场景图像处理方法、装置、电子设备及存储介质
CN106383587B (zh) 一种增强现实场景生成方法、装置及设备
US9728011B2 (en) System and method for implementing augmented reality via three-dimensional painting
US9286725B2 (en) Visually convincing depiction of object interactions in augmented reality images
CN110716645A (zh) 一种增强现实数据呈现方法、装置、电子设备及存储介质
KR101692335B1 (ko) 증강현실 영상표시 시스템 및 증강현실 영상표시 방법
CN109865289B (zh) 一种基于增强现实技术的实景环境娱乐系统及其方法
CN105844714A (zh) 基于增强现实的场景显示方法及系统
CN106355153A (zh) 一种基于增强现实的虚拟对象显示方法、装置以及系统
US9392248B2 (en) Dynamic POV composite 3D video system
CN111833458B (zh) 图像显示方法及装置、设备、计算机可读存储介质
JP2015502584A (ja) 可搬装置、仮想現実システムおよび方法
KR20140082610A (ko) 휴대용 단말을 이용한 증강현실 전시 콘텐츠 재생 방법 및 장치
WO2022022029A1 (zh) 虚拟显示方法、装置、设备和计算机可读存储介质
JP2005135355A (ja) データオーサリング処理装置
CN111640192A (zh) 场景图像处理方法、装置、ar设备以及存储介质
CN112348968B (zh) 增强现实场景下的展示方法、装置、电子设备及存储介质
CN113470190A (zh) 场景显示方法及装置、设备、车辆、计算机可读存储介质
JP6656382B2 (ja) マルチメディア情報を処理する方法及び装置
CN108830944B (zh) 光学透视式三维近眼显示系统及显示方法
CN111833457A (zh) 图像处理方法、设备及存储介质
CN111598824A (zh) 场景图像处理方法、装置、ar设备以及存储介质
CN110160529A (zh) 一种ar增强现实的导览系统
CN113377205B (zh) 场景显示方法及装置、设备、车辆、计算机可读存储介质
JP2022507502A (ja) 拡張現実(ar)のインプリント方法とシステム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination