CN111651058A - 历史场景的控制展示方法、装置、电子设备及存储介质 - Google Patents

历史场景的控制展示方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN111651058A
CN111651058A CN202010537620.4A CN202010537620A CN111651058A CN 111651058 A CN111651058 A CN 111651058A CN 202010537620 A CN202010537620 A CN 202010537620A CN 111651058 A CN111651058 A CN 111651058A
Authority
CN
China
Prior art keywords
historical
target
scene
historical content
scene picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010537620.4A
Other languages
English (en)
Inventor
孙红亮
揭志伟
李炳泽
武明飞
陈凯彬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Shangtang Technology Development Co Ltd
Zhejiang Sensetime Technology Development Co Ltd
Original Assignee
Zhejiang Shangtang Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Shangtang Technology Development Co Ltd filed Critical Zhejiang Shangtang Technology Development Co Ltd
Priority to CN202010537620.4A priority Critical patent/CN111651058A/zh
Publication of CN111651058A publication Critical patent/CN111651058A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开提供了一种历史场景的控制展示方法、装置、电子设备及存储介质,通过获取AR设备拍摄的目标展览馆内展览的历史内容场景画面;基于所述历史内容场景画面,识别所述目标展览馆对应的历史内容年代信息;基于所述历史内容年代信息,确定目标虚拟历史素材;通过AR设备展示所述目标虚拟历史素材融入所述历史内容场景画面的AR场景画面。这样,通过在展示的历史内容场景画面中添加相应年代的虚拟历史素材,可以完善历史内容场景中的历史内容,丰富历史内容场景画面的图像素材,使用户能够游览到更加完整、丰富和真实的历史场景。

Description

历史场景的控制展示方法、装置、电子设备及存储介质
技术领域
本公开涉及AR技术领域,具体而言,涉及一种历史场景的控制展示方法、装置、电子设备及存储介质。
背景技术
随着时代的进步和科技的发展,人们的物质生活水平得到的极大的改善,精神生活成为了人们更大的追求,越来越多的人对历史文化越来越感兴趣,越来越多的人会选择通过去各种历史景点或者历史展馆等进行游览,从而达到丰富自身阅历的目的,但是大多数的自然历史展馆等,例如通过修葺等方式复原的历史场景,其中仅能展示出可以修葺好的部分场景,无法完整的展示其历史风采。
随着人工智能的快速发展,虚拟现实、增强现实技术被越来越多地应用,如何基于这些技术提高历史场景呈现的完整度,帮助用户更全面感知、体验和融入到历史中是值得研究的问题。
发明内容
本公开实施例至少提供一种历史场景的控制展示方法。
第一方面,本公开实施例提供了一种历史场景的控制展示方法,所述控制展示包括:
获取AR设备拍摄的目标展览馆内展览的历史内容场景画面;
基于所述历史内容场景画面,识别所述目标展览馆对应的历史内容年代信息;
基于所述历史内容年代信息,确定目标虚拟历史素材;
通过AR设备展示所述目标虚拟历史素材融入所述历史内容场景画面的AR场景画面。
本公开实施例中,通过在展示的历史内容场景画面中添加相应年代的虚拟历史素材,可以完善历史内容场景中的历史内容,丰富历史内容场景画面的图像素材,使用户能够游览到更加完整、丰富和真实的历史场景。
在一种可能的实施方式中,所述基于所述历史内容场景画面,识别所述目标展览馆对应的历史内容年代信息,包括:
对所述历史内容场景画面进行目标检测,识别出所述历史内容场景画面中的各个历史场景对象;
针对每个历史场景对象分别进行特征提取,得到每个历史场景对象的特征向量;
将得到的多个特征向量输入至训练好的用于识别年代的神经网络,得到所述各个历史场景对象对应的年代识别结果;
基于所述各个历史场景对象对应的年代识别结果,确定所述目标展览馆对应的历史内容年代信息。
在一种可能的实施方式中,通过以下方式对所述历史内容场景画面进行目标检测:
基于训练好的目标检测网络对所述历史内容场景画面进行目标检测;所述目标检测网络为基于标记有目标检测框的图像样本训练得到的。
在一种可能的实施方式中,所述基于所述历史内容年代信息,确定目标虚拟历史素材,包括:
基于所述历史内容年代信息,从存储的不同年代的虚拟历史素材库中,选取目标虚拟历史素材。
在一种可能的实施方式中,所述通过AR设备展示所述目标虚拟历史素材融入所述历史内容场景画面的AR场景画面,包括:
根据所述历史内容场景画面,以及预先建立的所述目标展览馆的三维模型,确定所述目标虚拟历史素材在所述AR设备呈现的AR场景画面中的展示位姿;
根据所述目标虚拟历史素材以及确定的所述展示位姿,通过AR设备展示将所述目标虚拟历史素材显示在所述历史内容场景画面中的AR场景画面。
在一种可能的实施方式中,所述根据所述历史内容场景画面,以及预先建立的所述目标展览馆的三维模型,确定所述目标虚拟历史素材在所述AR设备呈现的AR场景画面中的展示位姿,包括:
根据所述历史内容场景画面,以及预先建立的所述目标展览馆的三维模型,确定所述AR设备的拍摄位姿;
基于所述拍摄位姿,以及预先设置的、在所述目标展览馆中用于展示目标虚拟历史素材的位置信息,确定所述目标虚拟历史素材在所述AR设备呈现的AR场景画面中的展示位姿。
在一种可能的实施方式中,所述目标虚拟历史素材为虚拟历史画像。
第二方面,本公开实施例还提供一种历史场景的控制展示装置,所述控制展示装置包括:
内容获取模块,用于获取AR设备拍摄的目标展览馆内展览的历史内容场景画面;
年代识别模块,用于基于所述历史内容场景画面,识别所述目标展览馆对应的历史内容年代信息;
素材确定模块,用于基于所述历史内容年代信息,确定目标虚拟历史素材;
AR画面展示模块,用于通过AR设备展示所述目标虚拟历史素材融入所述历史内容场景画面的AR场景画面。
本公开实施例中,通过在展示的历史内容场景画面中添加相应年代的虚拟历史素材,可以完善历史内容场景中的历史内容,丰富历史内容场景画面的图像素材,使用户能够游览到更加完整、丰富和真实的历史场景。
在一种可能的实施方式中,所述年代识别模块具体用于:
对所述历史内容场景画面进行目标检测,识别出所述历史内容场景画面中的各个历史场景对象;
针对每个历史场景对象分别进行特征提取,得到每个历史场景对象的特征向量;
将得到的多个特征向量输入至训练好的用于识别年代的神经网络,得到所述各个历史场景对象对应的年代识别结果;
基于所述各个历史场景对象对应的年代识别结果,确定所述目标展览馆对应的历史内容年代信息。
在一种可能的实施方式中,所述年代识别模块具体通过以下方式对所述历史内容场景画面进行目标检测:
基于训练好的目标检测网络对所述历史内容场景画面进行目标检测;所述目标检测网络为基于标记有目标检测框的图像样本训练得到的。
在一种可能的实施方式中,所述素材确定模块具体用于:
基于所述历史内容年代信息,从存储的不同年代的虚拟历史素材库中,选取目标虚拟历史素材。
在一种可能的实施方式中,所述AR画面展示模块具体用于:
根据所述历史内容场景画面,以及预先建立的所述目标展览馆的三维模型,确定所述目标虚拟历史素材在所述AR设备呈现的AR场景画面中的展示位姿;
根据所述目标虚拟历史素材以及确定的所述展示位姿,通过AR设备展示将所述目标虚拟历史素材显示在所述历史内容场景画面中的AR场景画面。
在一种可能的实施方式中,所述AR画面展示模块具体用于:
根据所述历史内容场景画面,以及预先建立的所述目标展览馆的三维模型,确定所述AR设备的拍摄位姿;
基于所述拍摄位姿,以及预先设置的、在所述目标展览馆中用于展示目标虚拟历史素材的位置信息,确定所述目标虚拟历史素材在所述AR设备呈现的AR场景画面中的展示位姿。
在一种可能的实施方式中,所述目标虚拟历史素材为虚拟历史画像。
第三方面,本公开实施例提供了一种电子设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如第一方面所述的历史场景的控制展示方法的步骤。
第四方面,本公开实施例提供了一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如第一方面所述的历史场景的控制展示方法的步骤。
本公开实施例提供的历史场景的控制展示方法、装置、电子设备及存储介质,通过获取AR设备拍摄的目标展览馆内展览的历史内容场景画面;基于所述历史内容场景画面,识别所述目标展览馆对应的历史内容年代信息;基于所述历史内容年代信息,确定目标虚拟历史素材;通过AR设备展示所述目标虚拟历史素材融入所述历史内容场景画面的AR场景画面。这样,通过在展示的历史内容场景画面中添加相应年代的虚拟历史素材,可以完善历史内容场景中的历史内容,丰富历史内容场景画面的图像素材,使用户能够游览到更加完整、丰富和真实的历史场景。
为使本公开的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,此处的附图被并入说明书中并构成本说明书中的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。应当理解,以下附图仅示出了本公开的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1为本公开实施例提供的一种历史场景的控制展示方法的流程图;
图2为本公开实施例提供的一种识别所述目标展览馆对应的历史内容年代信息的流程图;
图3为本公开实施例提供的一种历史场景的控制展示装置的结构示意图;
图4为本公开实施例所提供的一种电子设备的示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围,而是仅仅表示本公开的选定实施例。基于本公开的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。
经研究发现,为了追求更好的精神生活,越来越多的人会选择通过去各种历史景点或者历史展馆等进行游览,从而达到丰富自身阅历的目的,但是大多数的自然历史展馆等,例如通过修葺等方式复原的历史场景,其中仅能展示出可以修葺好的部分场景,无法完整的展示其历史风采。
基于上述研究,本公开提供了一种历史场景的控制展示方法,通过在展示的历史内容场景画面中添加相应年代的虚拟历史素材,可以完善历史内容场景中的历史内容,丰富历史内容场景画面的图像素材,使用户能够游览到更加完整、丰富和真实的历史场景。
为便于对本实施例进行理解,首先对本公开实施例所公开的一种历史场景的控制展示方法进行详细介绍,本公开实施例所提供的历史场景的控制展示方法的执行主体可以为具有一定计算能力的计算机设备,具体可以为终端设备、服务器或者其他处理设备,服务器可以是与AR设备连接的服务器,AR设备比如可以包括AR眼镜、平板电脑、智能手机、智能穿戴式设备等具有显示功能和数据处理能力的设备,AR设备可以通过应用程序连接服务器。本公开实施例中不作限定,在一些可能的实现方式中,该历史场景的控制展示方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。
请参阅图1,图1为本公开实施例提供的一种历史场景的控制展示方法的流程图。如图1中所示,所述控制展示方法包括步骤S101~S104,其中:
S101,获取AR设备拍摄的目标展览馆内展览的历史内容场景画面。
该步骤中,当用户在历史景点或者历史博物馆里参观时,游览到某个历史场所或者处于某个历史环境时,例如游览到通过修葺复原的某个历史景物处时,可以使用AR设备拍摄真实场景,此时,可以得到展示有部分历史场景的历史内容场景画面,如展示有石碑及其周边环境的画面。
示例性的,以用户参观某个历史博物馆等,当看到一座修葺后的石碑,此时,用户可以使用AR设备拍摄石碑和其周围的场景得到历史内容场景画面,历史内容场景画面中即包含有石碑。
S102,基于所述历史内容场景画面,识别所述目标展览馆对应的历史内容年代信息。
该步骤中,在得到所述历史内容场景画面之后,为了丰富给用户展示的历史内容,可以在展示画面中添加上相应的历史素材,可以通过对所述历史内容场景画面的识别,得到所述历史内容场景画面所属的年代,从而可以确定出所述目标展览馆相对应的年代信息,来确定出所述目标展览馆中所展示历史内容的历史内容年代信息,以此可以在后续添加相应历史内容年代信息的素材时,丰富展示内容的同时,可以保证展示内容的一致性。
具体的,请参阅图2,图2为本公开实施例提供的一种识别所述目标展览馆对应的历史内容年代信息的流程图。在一种可能的实施例中,如图2中所示,可以通过以下方式来识别出历史内容年代信息:
S1021,对所述历史内容场景画面进行目标检测,识别出所述历史内容场景画面中的各个历史场景对象。
该步骤中,可以从所述历史内容场景画面中识别出多个历史场景对象。
示例性的,当用户使用AR设备拍摄石碑和其周围的场景得到历史内容场景画面,在所述历史内容场景画面中,不仅可以得到石碑,例如还可以得到其周边围墙上的门、门框,以及承载石碑的底座等用作年代识别的历史场景对象。
具体的,在一些可能的实施例中,对所述历史内容场景画面进行目标检测,可以是通过训练好的目标检测网络对所述历史内容场景画面进行目标检测,具体的,可以是先通过深度学习的方式,训练出用于从图像中进行目标提取的目标检测网络,然后在进行目标检测的时候,将获取到的所述历史内容场景画面输入到训练好的目标检测网络中,即可得到对所述历史内容场景画面进行目标提取的结果。
其中,所述目标检测网络为基于标记有目标检测框的图像样本训练得到的。
S1022,针对每个历史场景对象分别进行特征提取,得到每个历史场景对象的特征向量。
该步骤中,可以得到对每个历史场景对象的特征向量,以用作年代信息的分析。
S1023,将得到的多个特征向量输入至训练好的用于识别年代的神经网络,得到所述各个历史场景对象对应的年代识别结果。
该步骤中,可以获取训练好的用于识别年代的神经网络,然后将得到的多个特征向量通过整合等方式编码成一个总特征向量,然后输入至神经网络中,通过深度学习的方式得到与总特征向量对应的年代识别结果,即为所述各个历史场景对象的年代识别结果。
其中,用于识别年代的神经网络,可以是依据标注好年代的对象样本训练得到的。
S1024,基于所述各个历史场景对象对应的年代识别结果,确定所述目标展览馆对应的历史内容年代信息。
示例性的,例如在识别出所述历史内容场景画面中的多个历史场景对象是介于某个历史时间段时,如公元630年至公元700年,那么即可以认为所述目标展览馆对应展示的为改历史时间段的历史内容,也可以是将通过该历史时间段,确定出相对应的朝代等,例如公元630年至公元700年对应的是唐朝的一段历史时间,将对应唐朝所属的公元618年至公元907年,整体作为所述目标展览馆的展示年代。
这样,通过识别所述历史内容场景画面对应的历史内容年代信息,可以在后续有针对性的增加虚拟历史素材,做到有的放矢。
S103,基于所述历史内容年代信息,确定目标虚拟历史素材。
该步骤中,在识别出所述目标展览馆对应的历史内容年代信息后,即可以通过所述历史内容年代信息来确定出目标虚拟历史素材。
具体的,在一种可能的实施例中,针对步骤S103,可以是基于所述历史内容年代信息,从存储的不同年代的虚拟历史素材库中,选取目标虚拟历史素材。例如可以选取出属于与所述历史内容年代信息所指示的年代的目标虚拟历史素材,或者是选取出所述历史内容年代信息所指示的年代所述的历史时期或者朝代,所对应有的目标虚拟历史素材。
S104,通过AR设备展示所述目标虚拟历史素材融入所述历史内容场景画面的AR场景画面。
该步骤中,基于上述得到的目标虚拟历史素材,可以控制在AR设备中播放所述历史内容场景画面,并在所述历史内容场景画面中融入所述目标虚拟历史素材的AR场景画面,以展示所述历史内容场景画面的同时,同步在所述历史内容场景画面中添加所述目标虚拟历史素材对应的虚拟物品等。
其中,所述目标虚拟历史素材可以为虚拟历史画像。
示例性的,在得出所述历史内容场景画面为唐朝的石碑,并且得到的所述目标虚拟历史素材为例如武则天画像时,可以通过AR设备向用户展示所述历史内容场景画面的AR画面,并且可以同步在石碑旁边的墙体上,展示武则天画像。
本公开实施例提供的历史场景的控制展示方法,通过在展示的历史内容场景画面中添加相应年代的虚拟历史素材,可以完善历史内容场景中的历史内容,丰富历史内容场景画面的图像素材,使用户能够游览到更加完整、丰富和真实的历史场景。
下面将结合具体实施例对上述S101~S104进行阐述。
针对上述S104中进行展示的内容,具体可以按照以下方式进行AR场景画面的展示:
首先,可以根据所述历史内容场景画面,以及预先建立的所述目标展览馆的三维模型,确定所述目标虚拟历史素材在所述AR设备呈现的AR场景画面中的展示位姿。
其中,可以预先对各种展馆建立相对应的三维场景模型(通过对真实场景进行全方位拍摄后进行三维重建得到),这样在本公开实施例中,即可以获取到与目标展览馆相对应的预先建立的三维模型,借此,可以通过所述历史内容场景画面和获取到的三维模型,得出定所述目标虚拟历史素材在所述AR设备呈现的AR场景画面中的展示位姿。
具体的,可以是:根据所述历史内容场景画面,以及预先建立的所述目标展览馆的三维模型,确定所述AR设备的拍摄位姿;基于所述拍摄位姿,以及预先设置的、在所述目标展览馆中用于展示目标虚拟历史素材的位置信息,确定所述目标虚拟历史素材在所述AR设备呈现的AR场景画面中的展示位姿。
这里,可以结合用户使用AR设备拍摄的历史内容场景画面及预先建立的三维模型,确定用户在使用AR设备拍摄所述历史内容场景画面时的拍摄位姿(基于视觉定位),基于AR设备的拍摄位姿,以及在所述目标展览馆中用于展示目标虚拟历史素材的位置信息,例如在展馆中,优先可以在墙上等位置处展示画像素材,这样,就可以结合拍摄位置和位置信息确定出所述目标虚拟历史素材在AR场景画面中的展示位姿。
然后,可以根据所述目标虚拟历史素材以及确定的所述展示位姿,通过AR设备展示将所述目标虚拟历史素材显示在所述历史内容场景画面中的AR场景画面。
这样,就可以按照得出的展示位姿,例如展示位置、角度、方向等数据,将所述目标虚拟历史素材显示在所述历史内容场景画面中,并通过AR设备展示AR场景画面。
本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于同一发明构思,本公开实施例中还提供了与历史场景的控制展示方法对应的历史场景的控制展示装置,由于本公开实施例中的装置解决问题的原理与上述本公开实施例中的方法相似,因此控制展示装置的实施可以参见控制展示方法的实施,重复之处不再赘述。
请参阅图3,图3为本公开实施例提供的一种历史场景的控制展示装置的结构示意图。如图3中所述,本公开实施例提供的控制展示装置300包括内容获取模块310、年代识别模块320、素材确定模块330和AR画面展示模块340,其中:
内容获取模块310,用于获取AR设备拍摄的目标展览馆内展览的历史内容场景画面;
年代识别模块320,用于基于所述历史内容场景画面,识别所述目标展览馆对应的历史内容年代信息;
素材确定模块330,用于基于所述历史内容年代信息,确定目标虚拟历史素材;
AR画面展示模块340,用于通过AR设备展示所述目标虚拟历史素材融入所述历史内容场景画面的AR场景画面。
本公开实施例中,通过在展示的历史内容场景画面中添加相应年代的虚拟历史素材,可以完善历史内容场景中的历史内容,丰富历史内容场景画面的图像素材,使用户能够游览到更加完整、丰富和真实的历史场景。
在一种可能的实施方式中,所述年代识别模块320具体用于:
对所述历史内容场景画面进行目标检测,识别出所述历史内容场景画面中的各个历史场景对象;
针对每个历史场景对象分别进行特征提取,得到每个历史场景对象的特征向量;
将得到的多个特征向量输入至训练好的用于识别年代的神经网络,得到所述各个历史场景对象对应的年代识别结果;
基于所述各个历史场景对象对应的年代识别结果,确定所述目标展览馆对应的历史内容年代信息。
在一种可能的实施方式中,所述年代识别模块320具体通过以下方式对所述历史内容场景画面进行目标检测:
基于训练好的目标检测网络对所述历史内容场景画面进行目标检测;所述目标检测网络为基于标记有目标检测框的图像样本训练得到的。
在一种可能的实施方式中,所述素材确定模块330具体用于:
基于所述历史内容年代信息,从存储的不同年代的虚拟历史素材库中,选取目标虚拟历史素材。
在一种可能的实施方式中,所述AR画面展示模块340具体用于:
根据所述历史内容场景画面,以及预先建立的所述目标展览馆的三维模型,确定所述目标虚拟历史素材在所述AR设备呈现的AR场景画面中的展示位姿;
根据所述目标虚拟历史素材以及确定的所述展示位姿,通过AR设备展示将所述目标虚拟历史素材显示在所述历史内容场景画面中的AR场景画面。
在一种可能的实施方式中,所述AR画面展示模块340具体用于:
根据所述历史内容场景画面,以及预先建立的所述目标展览馆的三维模型,确定所述AR设备的拍摄位姿;
基于所述拍摄位姿,以及预先设置的、在所述目标展览馆中用于展示目标虚拟历史素材的位置信息,确定所述目标虚拟历史素材在所述AR设备呈现的AR场景画面中的展示位姿。
在一种可能的实施方式中,所述目标虚拟历史素材为虚拟历史画像。
关于装置中的各模块的处理流程、以及各模块之间的交互流程的描述可以参照上述方法实施例中的相关说明,这里不再详述。
对应于图1中的历史场景的控制展示方法,本公开实施例还提供了一种电子设备400,如图4所示,为本公开实施例提供的电子设备400结构示意图,包括:
处理器41、存储器42、和总线43;存储器42用于存储执行指令,包括内存421和外部存储器422;这里的内存421也称内存储器,用于暂时存放处理器41中的运算数据,以及与硬盘等外部存储器422交换的数据,处理器41通过内存421与外部存储器422进行数据交换,当所述电子设备400运行时,所述处理器41与所述存储器42之间通过总线43通信,使得所述处理器41执行以下指令:获取AR设备拍摄的目标展览馆内展览的历史内容场景画面;基于所述历史内容场景画面,识别所述目标展览馆对应的历史内容年代信息;基于所述历史内容年代信息,确定目标虚拟历史素材;通过AR设备展示所述目标虚拟历史素材融入所述历史内容场景画面的AR场景画面。。
本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述方法实施例中所述的历史场景的控制展示方法的步骤。其中,该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例所提供的景物画像的展示方法的计算机程序产品,包括存储了程序代码的计算机可读存储介质,所述程序代码包括的指令可用于执行上述方法实施例中所述的历史场景的控制展示方法的步骤,具体可参见上述方法实施例,在此不再赘述。
本公开实施例还提供一种计算机程序,该计算机程序被处理器执行时实现前述实施例的任意一种方法。该计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一个可选实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(Software DevelopmentKit,SDK)等等。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。在本公开所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本公开各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上所述实施例,仅为本公开的具体实施方式,用以说明本公开的技术方案,而非对其限制,本公开的保护范围并不局限于此,尽管参照前述实施例对本公开进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种历史场景的控制展示方法,其特征在于,所述控制展示方法包括:
获取AR设备拍摄的目标展览馆内展览的历史内容场景画面;
基于所述历史内容场景画面,识别所述目标展览馆对应的历史内容年代信息;
基于所述历史内容年代信息,确定目标虚拟历史素材;
通过AR设备展示所述目标虚拟历史素材融入所述历史内容场景画面的AR场景画面。
2.根据权利要求1所述的控制展示方法,其特征在于,所述基于所述历史内容场景画面,识别所述目标展览馆对应的历史内容年代信息,包括:
对所述历史内容场景画面进行目标检测,识别出所述历史内容场景画面中的各个历史场景对象;
针对每个历史场景对象分别进行特征提取,得到每个历史场景对象的特征向量;
将得到的多个特征向量输入至训练好的用于识别年代的神经网络,得到所述各个历史场景对象对应的年代识别结果;
基于所述各个历史场景对象对应的年代识别结果,确定所述目标展览馆对应的历史内容年代信息。
3.根据权利要求2所述的控制展示方法,其特征在于,通过以下方式对所述历史内容场景画面进行目标检测:
基于训练好的目标检测网络对所述历史内容场景画面进行目标检测;所述目标检测网络为基于标记有目标检测框的图像样本训练得到的。
4.根据权利要求1~3任一所述的方法,其特征在于,所述基于所述历史内容年代信息,确定目标虚拟历史素材,包括:
基于所述历史内容年代信息,从存储的不同年代的虚拟历史素材库中,选取目标虚拟历史素材。
5.根据权利要求1~4任一所述的控制展示方法,其特征在于,所述通过AR设备展示所述目标虚拟历史素材融入所述历史内容场景画面的AR场景画面,包括:
根据所述历史内容场景画面,以及预先建立的所述目标展览馆的三维模型,确定所述目标虚拟历史素材在所述AR设备呈现的AR场景画面中的展示位姿;
根据所述目标虚拟历史素材以及确定的所述展示位姿,通过AR设备展示将所述目标虚拟历史素材显示在所述历史内容场景画面中的AR场景画面。
6.根据权利要求5所述的控制展示方法,其特征在于,所述根据所述历史内容场景画面,以及预先建立的所述目标展览馆的三维模型,确定所述目标虚拟历史素材在所述AR设备呈现的AR场景画面中的展示位姿,包括:
根据所述历史内容场景画面,以及预先建立的所述目标展览馆的三维模型,确定所述AR设备的拍摄位姿;
基于所述拍摄位姿,以及预先设置的、在所述目标展览馆中用于展示目标虚拟历史素材的位置信息,确定所述目标虚拟历史素材在所述AR设备呈现的AR场景画面中的展示位姿。
7.根据权利要求1~6任一所述的控制展示方法,其特征在于,所述目标虚拟历史素材为虚拟历史画像。
8.一种历史场景的控制展示装置,其特征在于,所述控制展示装置包括:
内容获取模块,用于获取AR设备拍摄的目标展览馆内展览的历史内容场景画面;
年代识别模块,用于基于所述历史内容场景画面,识别所述目标展览馆对应的历史内容年代信息;
素材确定模块,用于基于所述历史内容年代信息,确定目标虚拟历史素材;
AR画面展示模块,用于通过AR设备展示所述目标虚拟历史素材融入所述历史内容场景画面的AR场景画面。
9.一种电子设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如权利要求1至7中任一项所述的历史场景的控制展示方法的步骤。
10.一种计算机可读存储介质,其特征在于,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如权利要求1至7中任一项所述的历史场景的控制展示方法的步骤。
CN202010537620.4A 2020-06-12 2020-06-12 历史场景的控制展示方法、装置、电子设备及存储介质 Pending CN111651058A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010537620.4A CN111651058A (zh) 2020-06-12 2020-06-12 历史场景的控制展示方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010537620.4A CN111651058A (zh) 2020-06-12 2020-06-12 历史场景的控制展示方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN111651058A true CN111651058A (zh) 2020-09-11

Family

ID=72350441

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010537620.4A Pending CN111651058A (zh) 2020-06-12 2020-06-12 历史场景的控制展示方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN111651058A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112988007A (zh) * 2021-03-12 2021-06-18 深圳市慧鲤科技有限公司 三维素材的交互方法及装置
CN113379882A (zh) * 2021-05-27 2021-09-10 车智互联(北京)科技有限公司 一种网络车展配置方法、计算设备及存储介质
CN114445500A (zh) * 2020-10-30 2022-05-06 北京字跳网络技术有限公司 增强现实场景构建方法、装置、终端设备和存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107065164A (zh) * 2017-04-20 2017-08-18 深圳市元征科技股份有限公司 图像展示方法及装置
CN109040595A (zh) * 2018-08-27 2018-12-18 百度在线网络技术(北京)有限公司 基于ar的历史全景处理方法、装置、设备及存储介质
CN109192111A (zh) * 2018-10-19 2019-01-11 林辉 一种基于ar技术的景区参观的导览系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107065164A (zh) * 2017-04-20 2017-08-18 深圳市元征科技股份有限公司 图像展示方法及装置
CN109040595A (zh) * 2018-08-27 2018-12-18 百度在线网络技术(北京)有限公司 基于ar的历史全景处理方法、装置、设备及存储介质
CN109192111A (zh) * 2018-10-19 2019-01-11 林辉 一种基于ar技术的景区参观的导览系统

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114445500A (zh) * 2020-10-30 2022-05-06 北京字跳网络技术有限公司 增强现实场景构建方法、装置、终端设备和存储介质
CN114445500B (zh) * 2020-10-30 2023-11-10 北京字跳网络技术有限公司 增强现实场景构建方法、装置、终端设备和存储介质
CN112988007A (zh) * 2021-03-12 2021-06-18 深圳市慧鲤科技有限公司 三维素材的交互方法及装置
CN112988007B (zh) * 2021-03-12 2022-09-09 深圳市慧鲤科技有限公司 三维素材的交互方法及装置
CN113379882A (zh) * 2021-05-27 2021-09-10 车智互联(北京)科技有限公司 一种网络车展配置方法、计算设备及存储介质

Similar Documents

Publication Publication Date Title
CN112348969B (zh) 增强现实场景下的展示方法、装置、电子设备及存储介质
CN111638793B (zh) 飞行器的展示方法、装置、电子设备及存储介质
US20170153787A1 (en) Injection of 3-d virtual objects of museum artifact in ar space and interaction with the same
CN111651058A (zh) 历史场景的控制展示方法、装置、电子设备及存储介质
JP2022505998A (ja) 拡張現実データの提示方法、装置、電子機器及び記憶媒体
CN111694430A (zh) 一种ar场景画面呈现方法、装置、电子设备和存储介质
US20170186235A1 (en) Augmented reality system
CN111640171A (zh) 一种历史场景的讲解方法、装置、电子设备及存储介质
CN111651047B (zh) 一种虚拟物体展示方法、装置、电子设备及存储介质
CN112653848B (zh) 增强现实场景下的展示方法、装置、电子设备及存储介质
CN112348968B (zh) 增强现实场景下的展示方法、装置、电子设备及存储介质
CN111679742A (zh) 基于ar的交互控制方法、装置、电子设备及存储介质
CN109035415B (zh) 虚拟模型的处理方法、装置、设备和计算机可读存储介质
CN111651057A (zh) 一种数据展示方法、装置、电子设备及存储介质
CN111639613B (zh) 一种增强现实ar特效生成方法、装置及电子设备
CN111625100A (zh) 图画内容的呈现方法、装置、计算机设备及存储介质
CN114153548A (zh) 一种展示方法、装置、计算机设备及存储介质
CN111652971A (zh) 一种显示控制方法及装置
CN112637665A (zh) 增强现实场景下的展示方法、装置、电子设备及存储介质
CN112905014A (zh) Ar场景下的交互方法、装置、电子设备及存储介质
CN111652983A (zh) 一种增强现实ar特效生成方法、装置及设备
JP2022507502A (ja) 拡張現実(ar)のインプリント方法とシステム
CN111464859B (zh) 一种在线视频展示的方法、装置、计算机设备及存储介质
CN113359983A (zh) 增强现实数据呈现方法、装置、电子设备及存储介质
CN112333498A (zh) 一种展示控制方法、装置、计算机设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination