CN111651052A - 虚拟沙盘的展示方法、装置、电子设备及存储介质 - Google Patents

虚拟沙盘的展示方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN111651052A
CN111651052A CN202010523066.4A CN202010523066A CN111651052A CN 111651052 A CN111651052 A CN 111651052A CN 202010523066 A CN202010523066 A CN 202010523066A CN 111651052 A CN111651052 A CN 111651052A
Authority
CN
China
Prior art keywords
target
sand table
scene
data
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010523066.4A
Other languages
English (en)
Inventor
王子彬
孙红亮
武明飞
李炳泽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Shangtang Technology Development Co Ltd
Zhejiang Sensetime Technology Development Co Ltd
Original Assignee
Zhejiang Shangtang Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Shangtang Technology Development Co Ltd filed Critical Zhejiang Shangtang Technology Development Co Ltd
Priority to CN202010523066.4A priority Critical patent/CN111651052A/zh
Publication of CN111651052A publication Critical patent/CN111651052A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality

Abstract

本公开提供了一种虚拟沙盘的展示方法、装置、电子设备及存储介质，其中，该展示方法包括：实时获取AR设备在目标展览馆中的当前位姿数据，并基于所述当前位姿数据控制所述AR设备展示AR场景，所述AR场景中包含目标城市沙盘在所述目标展览馆中的AR展示特效；在检测到目标手势触发操作时，获取与所述目标手势触发操作对应的针对所述目标城市沙盘的位姿调整数据；基于所述AR设备的当前位姿数据和所述位姿调整数据，控制所述AR设备按照所述位姿调整数据调整所述AR场景中的目标城市沙盘的AR展示特效。

Description

虚拟沙盘的展示方法、装置、电子设备及存储介质
技术领域
本公开涉及增强现实技术领域，具体而言，涉及一种虚拟沙盘的展示方法、装置、电子设备及存储介质。
背景技术
沙盘具体指根据地形图、航空相片或实地地形，按照一定比例用泥沙和其它材料堆制的模型，近年来已经应用于多种场所，以展览馆为例，在各个城市通常会设置文化展览馆，展览馆中可以对该城市的沙盘进行展示。但是对于这种沙盘在展览馆中需要占据一定的使用空间。
随着人工智能的快速发展，为了达到更好的展示效果，以吸引更多的用户，可以将虚拟现实、增强现实等技术应用于展览馆，在应用时，如何基于这些技术提高沙盘的展示效果，对沙盘进行多角度展示是值得研究的问题。
发明内容
本公开实施例至少提供一种虚拟沙盘的展示方案。
第一方面，本公开实施例提供了一种虚拟沙盘的展示方法，包括：
实时获取AR设备在目标展览馆中的当前位姿数据，并基于所述当前位姿数据控制所述AR设备展示AR场景，所述AR场景中包含目标城市沙盘在所述目标展览馆中的AR展示特效；
在检测到目标手势触发操作时，获取与所述目标手势触发操作对应的针对所述目标城市沙盘的位姿调整数据；
基于所述AR设备的当前位姿数据和所述位姿调整数据，控制所述AR设备按照所述位姿调整数据调整所述AR场景中的目标城市沙盘的AR展示特效。
本公开实施例中，可以按照用户的目标手势触发操作调整目标城市沙盘的展示角度，能够多角度对目标城市沙盘进行展示，提高了AR场景在对沙盘展示时的展示效果，并提高了AR场景的交互性。
在一种可能的实施方式中，所述实时获取AR设备在目标展览馆中的当前位姿数据，包括：
实时获取所述AR设备拍摄所述目标展览馆的现实场景图像；
基于所述实时获取的现实场景图像和预先构建的表征所述目标展览馆的三维场景模型，确定所述AR设备在所述目标展览馆中的位姿数据。
在一种可能的实施方式中，按照以下方式确定所述AR场景中存在所述目标手势触发操作：
对所述AR场景包含的连续帧AR场景图像进行手势动作识别，确定是否存在与预设类别一致的手势动作；
在确定存在与预设类别一致的手势动作时，确定所述AR场景中存在所述目标手势触发操作。
在一种可能的实施方式中，所述获取与所述目标手势触发操作对应的针对所述目标城市沙盘的位姿调整数据，包括：
按照所述目标手势触发操作的操作方式和操作幅度，确定与所述目标手势触发操作对应的位姿调整数据；
所述位姿调整数据包括展示位置变化数据和/或展示姿态变化数据。
本公开实施例中，可以通过检测手势动作确定针对目标城市沙盘的调整方式和调整幅度，提高了AR场景的交互性。
在一种可能的实施方式中，所述基于所述AR设备的当前位姿数据和所述位姿调整数据，控制所述AR设备按照所述位姿调整数据调整所述AR场景中的目标城市沙盘的AR展示特效，包括：
基于所述位姿调整数据和所述目标城市沙盘的当前AR展示特效，确定所述目标城市沙盘按照所述位姿调整数据进行调整后的目标展示数据；
基于所述AR设备的当前位姿数据和所述目标展示数据，控制所述AR设备展示由所述当前AR展示特效向目标AR展示特效转变的AR动画特效。
本公开实施例中，可以通过用户的手势动作对目标城市沙盘的展示位姿进行调整，使得AR场景更加直观形象，便于多角度对目标城市沙盘进行展示。
第二方面，本公开实施例提供了一种虚拟沙盘的展示装置，包括：
第一获取模块，用于实时获取AR设备在目标展览馆中的当前位姿数据，并基于所述当前位姿数据控制所述AR设备展示AR场景，所述AR场景中包含目标城市沙盘在所述目标展览馆中的AR展示特效；
第二获取模块，用于在检测到目标手势触发操作时，获取与所述目标手势触发操作对应的针对所述目标城市沙盘的位姿调整数据；
特效展示模块，用于基于所述AR设备的当前位姿数据和所述位姿调整数据，控制所述AR设备按照所述位姿调整数据调整所述AR场景中的目标城市沙盘的AR展示特效。
在一种可能的实施方式中，所述第一获取模块在用于实时获取AR设备在目标展览馆中的当前位姿数据时，包括：
实时获取所述AR设备拍摄所述目标展览馆的现实场景图像；
基于所述实时获取的现实场景图像和预先构建的表征所述目标展览馆的三维场景模型，确定所述AR设备在所述目标展览馆中的位姿数据。
在一种可能的实施方式中，所述第二获取模块用于按照以下方式确定所述AR场景中存在所述目标手势触发操作：
对所述AR场景包含的连续帧AR场景图像进行手势动作识别，确定是否存在与预设类别一致的手势动作；
在确定存在与预设类别一致的手势动作时，确定所述AR场景中存在所述目标手势触发操作。
在一种可能的实施方式中，所述第二获取模块在用于获取与所述目标手势触发操作对应的针对所述目标城市沙盘的位姿调整数据时，包括：
按照所述目标手势触发操作的操作方式和操作幅度，确定与所述目标手势触发操作对应的位姿调整数据；
所述位姿调整数据包括展示位置变化数据和/或展示姿态变化数据。
在一种可能的实施方式中，所述特效展示模块在用于基于所述AR设备的当前位姿数据和所述位姿调整数据，控制所述AR设备按照所述位姿调整数据调整所述AR场景中的目标城市沙盘的AR展示特效时，包括：
基于所述位姿调整数据和所述目标城市沙盘的当前AR展示特效，确定所述目标城市沙盘按照所述位姿调整数据进行调整后的目标展示数据；
基于所述AR设备的当前位姿数据和所述目标展示数据，控制所述AR设备展示由所述当前AR展示特效向目标AR展示特效转变的AR动画特效。
第三方面，本公开实施例提供了一种电子设备，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当电子设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行如第一方面所述的展示方法的步骤。
第四方面，本公开实施例提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行如第一方面所述的展示方法的步骤。
为使本公开的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，此处的附图被并入说明书中并构成本说明书中的一部分，这些附图示出了符合本公开的实施例，并与说明书一起用于说明本公开的技术方案。应当理解，以下附图仅示出了本公开的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例所提供的一种虚拟沙盘的展示方法的流程图；
图2示出了本公开实施例所提供的一种确定AR场景中是否存在目标手势触发操作的方法流程图；
图3示出了本公开实施例所提供的一种控制AR设备展示目标城市沙盘的具体方法的流程图；
图4示出了本公开实施例所提供的一种虚拟沙盘的展示装置的示意图；
图5示出了本公开实施例所提供的一种电子设备的示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚，下面将结合本公开实施例中附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围，而是仅仅表示本公开的选定实施例。基于本公开的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本公开保护的范围。
应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。
本文中术语“和/或”，仅仅是描述一种关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合，例如，包括A、B、C中的至少一种，可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。
展览馆展示的实体城市沙盘可以向用户展示目标城市的整体形貌，但是实体城市沙盘在展览馆中固定占据的一定的使用空间，造成展览馆的空间利用率较低，且因为实体沙盘在展示时的位置较为固定，不利用用户多角度观看，针对此，随着增强现实技术的发展，考虑可以将增强现实AR技术应用于展览馆进行虚拟沙盘展示，如何基于AR技术对虚拟沙盘进行多角度展示，从而提高展示效果是值得研究的问题。
基于上述研究，本公开提供了一种虚拟沙盘的展示方案，可以基于实时获取的AR设备的当前位姿数据，通过该AR设备展示AR场景，该AR场景中可以展示目标城市沙盘，并在检测到目标手势触发操作时，获取与该目标手势触发操作对应的针对目标城市沙盘的位姿调整数据，示例性地，该位姿调整数据可以用于调整目标城市沙盘的展示角度，然后基于AR设备的当前位姿数据和该位姿调整数据，控制AR设备按照该位姿调整数据调整AR场景中的目标城市沙盘的展示特效，示例性地，可以按照用户的目标手势触发操作调整目标城市沙盘的展示角度，能够多角度对目标城市沙盘进行展示，提高了AR场景在对沙盘展示时的展示效果，并提高了AR场景的交互性。
为便于对本实施例进行理解，首先对本公开实施例所公开的一种虚拟沙盘的展示方法进行详细介绍，本公开实施例所提供的虚拟沙盘的展示方法的执行主体一般为具有一定计算能力的计算机设备，具体可以为终端设备或服务器或其它处理设备，比如可以是与AR设备连接的服务器，AR设备比如可以包括AR眼镜、平板电脑、智能手机、智能穿戴设备等具有显示功能和数据处理能力的设备，AR设备可以通过应用程序连接服务器。在一些可能的实现方式中，该虚拟沙盘的展示方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。
参见图1所示，为本公开实施例提供的虚拟沙盘的展示方法的流程图，该展示方法包括以下S101～S103：
S101，实时获取AR设备在目标展览馆中的当前位姿数据，并基于当前位姿数据控制AR设备展示AR场景，AR场景中包含目标城市沙盘在目标展览馆中的AR展示特效。
AR设备在目标展览馆中的当前位姿数据可以包括用户手持或佩戴AR设备时，用于显示目标城市沙盘的显示部件所在的当前位置和/或当前显示角度。
其中，AR设备的显示部件具体指该AR设备中用于显示目标城市沙盘的部件，示例性地，AR设备为手机或者平板时，对应的显示部件可以为显示屏，当AR设备为AR眼镜时，对应的显示部件可以为用于显示目标城市沙盘的镜片。
考虑到不同的AR设备，在对应的当前位姿数据不同时，其展示的视角也不同，故在控制AR设备展示AR场景时，需要结合该AR设备的当前位姿数据来确定AR设备展示的AR场景，比如，针对相同的目标城市沙盘，若其中一个用户携带AR设备观看的方向与另一个用户携带的AR设备的观看方向不同，则呈现在这两个AR设备的AR场景的呈现特效也不同。
具体实时获取AR设备在目标展览馆中的当前位姿数据的方式可以包含多种，比如可以通过视觉定位的方式，还可以通过位姿传感器进行实时采集的方式，将在后文进行具体介绍。
示例性地，目标城市沙盘可以为表征目标城市中的目标城市元素的沙盘，具体地，目标城市沙盘可以为预先构建的表征目标城市的城市沙盘模型中的部分城市元素对应的沙盘，或者全部城市元素对应的沙盘。
示例性地，这里目标城市沙盘可以是用户选中的待进行展示的城市沙盘，比如用户可以通过AR设备的触控屏选中城市沙盘模型中待进行展示的目标城市沙盘；或者可以根据城市沙盘模型在表征目标展览馆的三维场景模型中位姿数据，以及该AR设备在目标展览馆中的当前位姿数据，确定的应该在AR场景中展示的目标展览馆，比如城市沙盘模型在表征目标展览馆的三维场景模型中的位姿数据为位于该目标展览馆中的预设展示台上，当AR设备的当前位姿数据表示该AR设备朝向该预设展示台的东南角时，则呈现在AR设备中的目标城市沙盘为在该预设展示台的东南角展示的城市沙盘。
示例性地，城市沙盘模型可以通过预先拍摄目标城市对应的现实场景图像来构建，比如使用全景摄像头对目标城市进行城市数据收集，再结合城市规划图得到楼宇、道路等城市元素，然后与目标城市在同比例下建立对应的三维模型，得到目标城市的城市沙盘模型。
示例性地，在获取到AR设备的当前位姿数据后，可以通过该AR设备向用户展示AR场景，用户可以在该AR场景中观看到选择的目标城市沙盘，比如针对北京对应的城市沙盘模型，用户在选择“故宫”对应的目标城市沙盘后，可以通过该AR场景向用户展示“故宫”对应的目标城市沙盘。
S102，在检测到目标手势触发操作时，获取与目标手势触发操作对应的针对目标城市沙盘的位姿调整数据。
示例性地，目标手势触发操作具体指用于触发对目标城市沙盘进行位姿调整的手势触发操作，具体地，可以根据预先建立的手势动作与各个城市沙盘的映射表来确定是否存在与目标城市沙盘对应的手势动作，比如城市沙盘模型中包含10个城市元素，每个城市元素对应一个城市沙盘，预先建立与该10个城市沙盘一一对应的手势动作，然后在检测到存在与这10个城市沙盘中的目标城市沙盘对应的手势动作时，可以确定检测到目标手势触发操作，该目标手势触发操作即用于触发对该目标城市沙盘进行位姿调整的触发操作。
进一步地，在确定与目标手势触发操作对应的目标城市沙盘后，可以继续对该目标手势进行追踪，确定针对该目标城市沙盘的位姿调整数据，具体将在后文进行解释说明。
S103，基于AR设备的当前位姿数据和位姿调整数据，控制AR设备按照位姿调整数据调整AR场景中的目标城市沙盘的AR展示特效。
进一步地，在确定针对目标城市沙盘的位姿调整数据后，可以在AR场景中呈现目标城市沙盘的位姿调整的AR展示特效，达到通过手势调整目标城市的呈现角度的效果。
本公开实施例中，可以按照用户的目标手势触发操作调整目标城市沙盘的展示角度，能够多角度对目标城市沙盘进行展示，提高了AR场景在对沙盘展示时的展示效果，并提高了AR场景的交互性。
下面将结合具体实施例对上述S101～S103进行详细说明。
针对上述S101，在一种实施方式中，在实时获取AR设备在目标展览馆中的当前位姿数据时，可以包括：
(1)实时获取AR设备拍摄目标展览馆的现实场景图像；
(2)基于实时获取的现实场景图像和预先构建的表征目标展览馆的三维场景模型，确定AR设备在目标展览馆中的位姿数据。
示例性地，三维场景模型可以基于预先拍摄的该目标展览馆的多张样本图像来构建，具体在构建时，可以通过提取每张样本图像中的特征点进行构建，在生成三维场景模型后，可以保存三维场景模型中每个特征点对应的样本图像，以及该样本图像在该三维场景模型中对应的拍摄位姿，这样在获取到AR设备拍摄的该目标展览馆的现实场景图像后，可以对该现实场景图像进行特征点提取，基于提取的特征点确定与该现实场景图像匹配的样本图像，最终得到AR设备在该三维场景模型中的位姿数据。
因为该三维场景模型为表征该目标展览馆的模型，因此可以将AR设备在三维场景模型中的位姿数据作为AR设备在目标展览馆中的位姿数据。
这里的三维场景模型可以基于预先对该目标展览馆拍摄的多张现实场景图像来构建，在构建完成后，还可以再通过该目标展览馆对应的真实二维地图对构建完成的三维场景模型进行修正，得到表征该目标展览馆的准确度较高的三维场景模型。
在另一种实施方式中，还可以通过AR设备自身设置的位姿传感器来实时获取该AR设备的当前位姿数据，在此不进行赘述。
在一种实施方式中，如图2所示，可以按照以下方式确定AR场景中存在目标手势触发操作，具体包括以下S201～S202：
S201，对AR场景包含的连续帧AR场景图像进行手势动作识别，确定是否存在与预设类别一致的手势动作；
S202，在确定存在与预设类别一致的手势动作时，确定AR场景中存在目标手势触发操作。
示例性地，与预设类别的手势动作可以是上述提到的预先建立的手势动作与各个城市沙盘的映射表中，与目标城市沙盘对应的手势动作。
为了防止误触发，本公开实施例可以通过AR场景包含的连续帧AR场景图像进行手势动作识别，从而确定是否存在与预设类别一致的手势动作。
针对上述S102，在获取与目标手势触发操作对应的针对目标城市沙盘的位姿调整数据时，可以包括：
按照目标手势触发操作的操作方式和操作幅度，确定与目标手势触发操作对应的位姿调整数据；
其中，位姿调整数据包括展示位置变化数据和/或展示姿态变化数据。
示例性地，同样可以对AR场景包含的连续帧AR场景图像进行手势动作识别，确定目标手势触发操作的操作方式和操作幅度。
示例性地，位姿调整数据可以包含展示位置变化数据，比如对目标城市沙盘进行拖动，使得目标城市沙盘的展示位置发生变化的数据；或者，可以包含展示姿态变化数据，比如针对目标城市沙盘进行原地旋转，使得目标城市沙盘的展示角度发生变化的数据；或者，可以同时包含展示位置变化数据和展示姿态变化数据。
示例性地，操作方式可以用于指示如何对目标城市沙盘展示位姿进行调整的方式，比如可以通过旋转调整，可以通过平移调整等，可以通过先旋转再平移调整，也可以通过先平移再旋转调整，操作幅度可以用于指示在按照操作方式进行调整时，调整的幅度，比如按照旋转调整的方式进行调整时，调整的角度，按照平移调整的方式进行调整时，平移的位移。
示例性地，操作方式可以对应有调整方向，比如旋转调整可以包含顺时针选择和逆时针选择，平移调整可以包括沿各个方向调整，具体地，调整方向可以与手势动作的转动方向一致，比如检测到的目标手势为针对目标城市沙盘进行逆时针转动的手势，则在对该目标城市沙盘进行旋转调整时，按照逆时针转动的方式进行调整。
本公开实施例中，可以通过检测手势动作确定针对目标城市沙盘的调整方式和调整幅度，提高了AR场景的交互性。
针对上述S103，在基于AR设备的当前位姿数据和位姿调整数据，控制AR设备按照位姿调整数据调整AR场景中的目标城市沙盘的AR展示特效时，如图3所示，可以包括以下步骤S301～S302：
S301，基于位姿调整数据和目标城市沙盘的当前AR展示特效，确定目标城市沙盘按照位姿调整数据进行调整后的目标展示数据；
S302，基于AR设备的当前位姿数据和目标展示数据，控制AR设备展示由当前AR展示特效向目标AR展示特效转变的AR动画特效。
示例性地，目标城市沙盘的当前AR展示特效可以为在检测到目标手势触发操作前，该目标城市沙盘的展示位置和展示姿态，然后按照位姿调整数据对展示位置和/或展示姿态进行调整，可以得到目标城市沙盘对应的目标展示数据。
进一步地，可以基于AR设备的当前位姿数据和目标展示数据，控制AR设备展示目标城市沙盘由当前AR展示特效向目标AR展示特效的动态效果。
比如，目标城市沙盘为目标城市的城市元素A对应的沙盘，若该目标城市沙盘的当前AR展示特效为向用户展示目标城市沙盘的正面，若位姿调整数据为对该目标城市沙盘进行向后转动，得到的目标展示数据能够通过AR设备向用户展示该目标城市沙盘的反面，则可以通过AR设备展示目标城市沙盘由正面向反面进行调整的AR动画特效。
本公开实施例中，可以通过用户的手势动作对目标城市沙盘的展示位姿进行调整，使得AR场景更加直观形象，便于多角度对目标城市沙盘进行展示。
本领域技术人员可以理解，在具体实施方式的上述方法中，各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定，各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于同一技术构思，本公开实施例中还提供了与虚拟沙盘的展示方法对应的虚拟沙盘的展示装置，由于本公开实施例中的装置解决问题的原理与本公开实施例上述展示方法相似，因此装置的实施可以参见方法的实施，重复之处不再赘述。
参照图4所示，为本公开实施例提供的一种虚拟沙盘的展示装置400的示意图，该展示装置包括：
第一获取模块401，用于实时获取AR设备在目标展览馆中的当前位姿数据，并基于当前位姿数据控制AR设备展示AR场景，AR场景中包含目标城市沙盘在目标展览馆中的AR展示特效；
第二获取模块402，用于在检测到目标手势触发操作时，获取与目标手势触发操作对应的针对目标城市沙盘的位姿调整数据；
特效展示模块403，用于基于AR设备的当前位姿数据和位姿调整数据，控制AR设备按照位姿调整数据调整AR场景中的目标城市沙盘的AR展示特效。
在一种可能的实施方式中，第一获取模块401在用于实时获取AR设备在目标展览馆中的当前位姿数据时，包括：
实时获取AR设备拍摄目标展览馆的现实场景图像；
基于实时获取的现实场景图像和预先构建的表征目标展览馆的三维场景模型，确定AR设备在目标展览馆中的位姿数据。
在一种可能的实施方式中，第二获取模块402用于按照以下方式确定AR场景中存在目标手势触发操作：
对AR场景包含的连续帧AR场景图像进行手势动作识别，确定是否存在与预设类别一致的手势动作；
在确定存在与预设类别一致的手势动作时，确定AR场景中存在目标手势触发操作。
在一种可能的实施方式中，第二获取模块402在用于获取与目标手势触发操作对应的针对目标城市沙盘的位姿调整数据时，包括：
按照目标手势触发操作的操作方式和操作幅度，确定与目标手势触发操作对应的位姿调整数据；
位姿调整数据包括展示位置变化数据和/或展示姿态变化数据。
在一种可能的实施方式中，特效展示模块403在用于基于AR设备的当前位姿数据和位姿调整数据，控制AR设备按照位姿调整数据调整AR场景中的目标城市沙盘的AR展示特效时，包括：
基于位姿调整数据和目标城市沙盘的当前AR展示特效，确定目标城市沙盘按照位姿调整数据进行调整后的目标展示数据；
基于AR设备的当前位姿数据和目标展示数据，控制AR设备展示由当前AR展示特效向目标AR展示特效转变的AR动画特效。
关于装置中的各模块的处理流程、以及各模块之间的交互流程的描述可以参照上述方法实施例中的相关说明，这里不再详述。
对应于图1中的虚拟沙盘的展示方法，本公开实施例还提供了一种电子设备500，如图5所示，为本公开实施例提供的电子设备500结构示意图，包括：
处理器51、存储器52、和总线53；存储器52用于存储执行指令，包括内存521和外部存储器522；这里的内存521也称内存储器，用于暂时存放处理器51中的运算数据，以及与硬盘等外部存储器522交换的数据，处理器51通过内存521与外部存储器522进行数据交换，当所述电子设备500运行时，所述处理器51与所述存储器52之间通过总线53通信，使得所述处理器51执行以下指令：实时获取AR设备在目标展览馆中的当前位姿数据，并基于当前位姿数据控制AR设备展示AR场景，AR场景中包含目标城市沙盘在目标展览馆中的AR展示特效；在检测到目标手势触发操作时，获取与目标手势触发操作对应的针对目标城市沙盘的位姿调整数据；基于AR设备的当前位姿数据和位姿调整数据，控制AR设备按照位姿调整数据调整AR场景中的目标城市沙盘的AR展示特效。
本公开实施例还提供一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行上述方法实施例中所述的虚拟沙盘的展示方法的步骤。其中，该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例所提供的虚拟沙盘的展示方法的计算机程序产品，包括存储了程序代码的计算机可读存储介质，所述程序代码包括的指令可用于执行上述方法实施例中所述的虚拟沙盘的展示方法的步骤，具体可参见上述方法实施例，在此不再赘述。
本公开实施例还提供一种计算机程序，该计算机程序被处理器执行时实现前述实施例的任意一种方法。该计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中，所述计算机程序产品具体体现为计算机存储介质，在另一个可选实施例中，计算机程序产品具体体现为软件产品，例如软件开发包(Software DevelopmentKit，SDK)等等。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统和装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。在本公开所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本公开各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解，本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-OnlyMemory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上所述实施例，仅为本公开的具体实施方式，用以说明本公开的技术方案，而非对其限制，本公开的保护范围并不局限于此，尽管参照前述实施例对本公开进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本公开揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围，都应涵盖在本公开的保护范围之内。因此，本公开的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种虚拟沙盘的展示方法，其特征在于，包括：
实时获取AR设备在目标展览馆中的当前位姿数据，并基于所述当前位姿数据控制所述AR设备展示AR场景，所述AR场景中包含目标城市沙盘在所述目标展览馆中的AR展示特效；
在检测到目标手势触发操作时，获取与所述目标手势触发操作对应的针对所述目标城市沙盘的位姿调整数据；
基于所述AR设备的当前位姿数据和所述位姿调整数据，控制所述AR设备按照所述位姿调整数据调整所述AR场景中的目标城市沙盘的AR展示特效。
2.根据权利要求1所述的展示方法，其特征在于，所述实时获取AR设备在目标展览馆中的当前位姿数据，包括：
实时获取所述AR设备拍摄所述目标展览馆的现实场景图像；
基于所述实时获取的现实场景图像和预先构建的表征所述目标展览馆的三维场景模型，确定所述AR设备在所述目标展览馆中的位姿数据。
3.根据权利要求1或2所述的展示方法，其特征在于，按照以下方式确定所述AR场景中存在所述目标手势触发操作：
对所述AR场景包含的连续帧AR场景图像进行手势动作识别，确定是否存在与预设类别一致的手势动作；
在确定存在与预设类别一致的手势动作时，确定所述AR场景中存在所述目标手势触发操作。
4.根据权利要求1至3任一所述的展示方法，其特征在于，所述获取与所述目标手势触发操作对应的针对所述目标城市沙盘的位姿调整数据，包括：
按照所述目标手势触发操作的操作方式和操作幅度，确定与所述目标手势触发操作对应的位姿调整数据；
所述位姿调整数据包括展示位置变化数据和/或展示姿态变化数据。
5.根据权利要求1至4任一所述的展示方法，其特征在于，所述基于所述AR设备的当前位姿数据和所述位姿调整数据，控制所述AR设备按照所述位姿调整数据调整所述AR场景中的目标城市沙盘的AR展示特效，包括：
基于所述位姿调整数据和所述目标城市沙盘的当前AR展示特效，确定所述目标城市沙盘按照所述位姿调整数据进行调整后的目标展示数据；
基于所述AR设备的当前位姿数据和所述目标展示数据，控制所述AR设备展示由所述当前AR展示特效向目标AR展示特效转变的AR动画特效。
6.一种虚拟沙盘的展示装置，其特征在于，包括：
第一获取模块，用于实时获取AR设备在目标展览馆中的当前位姿数据，并基于所述当前位姿数据控制所述AR设备展示AR场景，所述AR场景中包含目标城市沙盘在所述目标展览馆中的AR展示特效；
第二获取模块，用于在检测到目标手势触发操作时，获取与所述目标手势触发操作对应的针对所述目标城市沙盘的位姿调整数据；
特效展示模块，用于基于所述AR设备的当前位姿数据和所述位姿调整数据，控制所述AR设备按照所述位姿调整数据调整所述AR场景中的目标城市沙盘的AR展示特效。
7.根据权利要求6所述的展示装置，其特征在于，所述第一获取模块在用于实时获取AR设备在目标展览馆中的当前位姿数据时，包括：
实时获取所述AR设备拍摄所述目标展览馆的现实场景图像；
基于所述实时获取的现实场景图像和预先构建的表征所述目标展览馆的三维场景模型，确定所述AR设备在所述目标展览馆中的位姿数据。
8.根据权利要求6或7所述的展示装置，其特征在于，所述第二获取模块用于按照以下方式确定所述AR场景中存在所述目标手势触发操作：
对所述AR场景包含的连续帧AR场景图像进行手势动作识别，确定是否存在与预设类别一致的手势动作；
在确定存在与预设类别一致的手势动作时，确定所述AR场景中存在所述目标手势触发操作。
9.一种电子设备，其特征在于，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当电子设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行如权利要求1至5任一所述的展示方法的步骤。
10.一种计算机可读存储介质，其特征在于，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行如权利要求1至5任一所述的展示方法的步骤。
CN202010523066.4A 2020-06-10 2020-06-10 虚拟沙盘的展示方法、装置、电子设备及存储介质 Pending CN111651052A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010523066.4A CN111651052A (zh) 2020-06-10 2020-06-10 虚拟沙盘的展示方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010523066.4A CN111651052A (zh) 2020-06-10 2020-06-10 虚拟沙盘的展示方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN111651052A true CN111651052A (zh) 2020-09-11

Family

ID=72347416

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010523066.4A Pending CN111651052A (zh) 2020-06-10 2020-06-10 虚拟沙盘的展示方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN111651052A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112764658A (zh) * 2021-01-26 2021-05-07 北京小米移动软件有限公司 内容展示方法、装置及存储介质
CN113284404A (zh) * 2021-04-26 2021-08-20 广州九舞数字科技有限公司 一种基于用户动作的电子沙盘展示方法及装置
CN114900722A (zh) * 2022-05-06 2022-08-12 浙江工商大学 基于ar技术的个性化广告植入方法及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105553114A (zh) * 2016-03-04 2016-05-04 国网冀北电力有限公司廊坊供电公司 四维数字沙盘系统和电力监控方法
CN106527709A (zh) * 2016-10-28 2017-03-22 惠州Tcl移动通信有限公司 一种虚拟场景调整方法及头戴式智能设备
US20180247456A1 (en) * 2017-02-27 2018-08-30 Hiscene (Shanghai) Information Technology Co., Ltd. Method and device for augmented reality display of real physical model
CN108958460A (zh) * 2017-05-19 2018-12-07 深圳市掌网科技股份有限公司 基于虚拟现实的楼盘沙盘展示方法及系统
CN209281739U (zh) * 2018-09-04 2019-08-20 杭州施必得展示设计有限公司 一种方便收纳的数字化多媒体沙盘装置
CN110738737A (zh) * 2019-10-15 2020-01-31 北京市商汤科技开发有限公司 一种ar场景图像处理方法、装置、电子设备及存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105553114A (zh) * 2016-03-04 2016-05-04 国网冀北电力有限公司廊坊供电公司 四维数字沙盘系统和电力监控方法
CN106527709A (zh) * 2016-10-28 2017-03-22 惠州Tcl移动通信有限公司 一种虚拟场景调整方法及头戴式智能设备
US20180247456A1 (en) * 2017-02-27 2018-08-30 Hiscene (Shanghai) Information Technology Co., Ltd. Method and device for augmented reality display of real physical model
CN108958460A (zh) * 2017-05-19 2018-12-07 深圳市掌网科技股份有限公司 基于虚拟现实的楼盘沙盘展示方法及系统
CN209281739U (zh) * 2018-09-04 2019-08-20 杭州施必得展示设计有限公司 一种方便收纳的数字化多媒体沙盘装置
CN110738737A (zh) * 2019-10-15 2020-01-31 北京市商汤科技开发有限公司 一种ar场景图像处理方法、装置、电子设备及存储介质

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112764658A (zh) * 2021-01-26 2021-05-07 北京小米移动软件有限公司 内容展示方法、装置及存储介质
CN112764658B (zh) * 2021-01-26 2022-10-21 北京小米移动软件有限公司 内容展示方法、装置及存储介质
CN113284404A (zh) * 2021-04-26 2021-08-20 广州九舞数字科技有限公司 一种基于用户动作的电子沙盘展示方法及装置
CN114900722A (zh) * 2022-05-06 2022-08-12 浙江工商大学 基于ar技术的个性化广告植入方法及系统

Similar Documents

Publication Publication Date Title
US9704299B2 (en) Interactive three dimensional displays on handheld devices
CN110276840B (zh) 多虚拟角色的控制方法、装置、设备及存储介质
CN110276317B (zh) 一种物体尺寸检测方法、物体尺寸检测装置及移动终端
CN112148189A (zh) 一种ar场景下的交互方法、装置、电子设备及存储介质
CN111651052A (zh) 虚拟沙盘的展示方法、装置、电子设备及存储介质
CN111935393A (zh) 拍摄方法、装置、电子设备和存储介质
CN112148197A (zh) 增强现实ar交互方法、装置、电子设备及存储介质
CN111551188A (zh) 一种导航路线生成的方法及装置
CN106062821A (zh) 用于不受限制的slam的基于传感器的相机运动检测
JP6609640B2 (ja) 電子デバイス上における環境マッピング用のフィーチャ・データの管理
CN111701238A (zh) 虚拟画卷的显示方法、装置、设备及存储介质
CN111882674A (zh) 虚拟对象的调整方法、装置、电子设备及存储介质
CN110709897A (zh) 用于插入到图像中的图像内容的阴影生成
CN111696215A (zh) 一种图像处理方法、装置及设备
CN111679742A (zh) 基于ar的交互控制方法、装置、电子设备及存储介质
US11238651B2 (en) Fast hand meshing for dynamic occlusion
CN111651051A (zh) 一种虚拟沙盘展示方法及装置
CN112729327A (zh) 一种导航方法、装置、计算机设备及存储介质
CN112882576A (zh) Ar交互方法、装置、电子设备及存储介质
CN112905014A (zh) Ar场景下的交互方法、装置、电子设备及存储介质
CN111640201A (zh) 虚拟沙盘展示的控制方法、装置、电子设备及存储介质
CN113178017A (zh) Ar数据展示方法、装置、电子设备及存储介质
CN111651069A (zh) 虚拟沙盘的展示方法、装置、电子设备及存储介质
CN111638794A (zh) 一种虚拟文物的显示控制方法及装置
CN112073632A (zh) 图像处理方法、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination