CN111627097A - 一种虚拟景物的展示方法及装置 - Google Patents
一种虚拟景物的展示方法及装置 Download PDFInfo
- Publication number
- CN111627097A CN111627097A CN202010486303.4A CN202010486303A CN111627097A CN 111627097 A CN111627097 A CN 111627097A CN 202010486303 A CN202010486303 A CN 202010486303A CN 111627097 A CN111627097 A CN 111627097A
- Authority
- CN
- China
- Prior art keywords
- posture information
- virtual
- target user
- animation
- displaying
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 61
- 230000009471 action Effects 0.000 claims abstract description 111
- 230000036544 posture Effects 0.000 claims description 138
- 238000013528 artificial neural network Methods 0.000 claims description 19
- 238000001514 detection method Methods 0.000 claims description 19
- 238000012549 training Methods 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 10
- 238000013507 mapping Methods 0.000 claims description 6
- 230000000694 effects Effects 0.000 description 15
- 230000008569 process Effects 0.000 description 13
- 238000010586 diagram Methods 0.000 description 10
- 230000008901 benefit Effects 0.000 description 4
- 238000009877 rendering Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 230000000994 depressogenic effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000002156 mixing Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本公开提供了一种虚拟景物的展示方法及装置，包括：获取目标用户的动作姿态信息；基于所述目标用户的动作姿态信息，确定与所述目标用户的动作姿态信息相匹配的虚拟景物展示动画；控制展示装置展示所述虚拟景物展示动画。
Description
技术领域
本公开涉及信息处理技术领域，具体而言，涉及一种虚拟景物的展示方法及装置。
背景技术
相关技术中，展馆为增强展示效果，一般会在某些区域设置电子屏幕，然后在电子屏幕上循环展示与展馆相关的一些景观视频，但是视频的展示形式及展示内容一般较为单一，展示效果较差。
发明内容
本公开实施例至少提供一种虚拟景物的展示方法及装置。
第一方面，本公开实施例提供了一种虚拟景物展示方法，包括：
获取目标用户的动作姿态信息；
基于所述目标用户的动作姿态信息，确定与所述目标用户的动作姿态信息相匹配的虚拟景物展示动画；
控制展示装置展示所述虚拟景物展示动画。
上述方法中，增加了展馆与用户的交互性环节，通过用户姿态变化来触发不同的虚拟景物展示动画，提升了用户的融入感，进而提升了展馆中景观动画的展示效果。
一种可能的实施方式中，所述动作姿态信息包括表情信息和/或肢体动作信息。
一种可能的实施方式中，所述基于所述目标用户的动作姿态信息，确定与所述目标用户的动作姿态信息相匹配的虚拟景物展示动画，包括：
从预先设置的映射关系库中，获取与所述目标用户的动作姿态信息相匹配的虚拟景物展示描述信息；
基于所述虚拟景物展示描述信息，从预先存储的与虚拟景物对应的多个虚拟景物展示动画中，选取与所述虚拟景物展示描述信息对应的所述虚拟景物展示动画。
一种可能的实施方式中，获取目标用户的动作姿态信息，包括：
在检测到所述目标用户进入与虚拟景物对应的目标检测区域后，获取目标用户的动作姿态信息。
一种可能的实施方式中，所述方法还包括：
预先确定存储的虚拟景物展示动画之间的展示关系；所述展示关系用于表示不同的虚拟景物展示动画之间是否可以叠加。
一种可能的实施方式中，若获取到多个目标用户的动作姿态信息，所述控制展示装置展示所述虚拟景物展示动画，包括：
在所述多个目标用户的动作姿态信息匹配的虚拟景物展示动画的展示关系为可以叠加的情况下，同步展示与所述多个目标用户的动作姿态相匹配的虚拟景物展示动画。
通过这种方法，可以增加多个目标用户与展馆之间的互动，进一步提升展馆中景观展示动画的展示效果。
一种可能的实施方式中，若获取到多个目标用户的动作姿态信息，所述控制展示装置展示所述虚拟景物展示动画，包括：
在所述多个目标用户的动作姿态信息匹配的虚拟景物展示动画的展示关系为不可以叠加的情况下，异步展示与所述多个目标用户的动作姿态信息相匹配的虚拟景物展示动画，或者选择性展示与所述多个目标用户的动作姿态信息相匹配的虚拟景物展示动画。
一种可能的实施方式中，获取目标用户的动作姿态信息，包括：
获取所述目标用户的连续多张用户图像；
将所述连续多张用户图像输入训练的神经网络，得到所述目标用户的动作姿态信息；其中，所述神经网络为基于标记有动作姿态信息的样本图像训练得到的。
第二方面，本公开实施例还提供一种虚拟景物的展示装置，包括：
获取模块，用于获取目标用户的动作姿态信息；
确定模块，用于基于所述目标用户的动作姿态信息，确定与所述目标用户的动作姿态信息相匹配的虚拟景物展示动画；
控制模块，用于控制展示装置展示所述虚拟景物展示动画。
一种可能的实施方式中，所述动作姿态信息包括表情信息和/或肢体动作信息。
一种可能的实施方式中，所述确定模块，在基于所述目标用户的动作姿态信息，确定与所述目标用户的动作姿态信息相匹配的虚拟景物展示动画时，用于：
从预先设置的映射关系库中，获取与所述目标用户的动作姿态信息相匹配的虚拟景物展示描述信息；
基于所述虚拟景物展示描述信息，从预先存储的与虚拟景物对应的多个虚拟景物展示动画中，选取与所述虚拟景物展示描述信息对应的所述虚拟景物展示动画。
一种可能的实施方式中，所述获取模块，在获取目标用户的动作姿态信息时，用于：
在检测到所述目标用户进入与虚拟景物对应的目标检测区域后，获取目标用户的动作姿态信息。
一种可能的实施方式中，所述确定模块，还用于：
预先确定存储的虚拟景物展示动画之间的展示关系；所述展示关系用于表示不同的虚拟景物展示动画之间是否可以叠加。
一种可能的实施方式中，若获取到多个目标用户的动作姿态信息，所述控制模块，在控制展示装置展示所述虚拟景物展示动画时，用于：
在所述多个目标用户的动作姿态信息匹配的虚拟景物展示动画的展示关系为可以叠加的情况下，同步展示与所述多个目标用户的动作姿态相匹配的虚拟景物展示动画。
一种可能的实施方式中，若获取到多个目标用户的动作姿态信息，所述控制模块，在控制展示装置展示所述虚拟景物展示动画时，用于：
在所述多个目标用户的动作姿态信息匹配的虚拟景物展示动画的展示关系为不可以叠加的情况下，异步展示与所述多个目标用户的动作姿态信息相匹配的虚拟景物展示动画，或者选择性展示与所述多个目标用户的动作姿态信息相匹配的虚拟景物展示动画。
一种可能的实施方式中，所述获取模块，在获取目标用户的动作姿态信息时，用于：
获取包括所述目标用户的连续多张用户图像；
将所述连续多张用户图像输入训练的神经网络，得到所述目标用户的动作姿态信息；其中，所述神经网络为基于标记有动作姿态信息的样本图像训练得到的。
第三方面，本公开实施例还提供一种计算机设备，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当计算机设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行上述第一方面，或第一方面中任一种可能的实施方式中的步骤。
第四方面，本公开实施例还提供一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行上述第一方面，或第一方面中任一种可能的实施方式中的步骤。
为使本公开的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，此处的附图被并入说明书中并构成本说明书中的一部分，这些附图示出了符合本公开的实施例，并与说明书一起用于说明本公开的技术方案。应当理解，以下附图仅示出了本公开的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例所提供的一种虚拟景物的展示方法的流程图；
图2示出了本公开实施例所提供的一种神经网络训练方法的流程图；
图3a示出了本公开实施例所提供的一种虚拟景物展示动画的展示效果图；
图3b示出了本公开实施例所提供的另一种虚拟景物展示动画的展示效果图；
图3c示出了本公开实施例所提供的另一种虚拟景物展示动画的展示效果图；
图4示出了本公开实施例所提供的一种虚拟景物的展示装置的架构示意图；
图5示出了本公开实施例所提供的一种计算机设备的结构示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚，下面将结合本公开实施例中附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围，而是仅仅表示本公开的选定实施例。基于本公开的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本公开保护的范围。
相关技术中，展馆在展示景观视频时，一般是固定的循环展示预先设置的景观视频，这种展示方式和展示内容都比较单一，展示效果较差。
基于此，本公开提供了一种虚拟景物的展示方法及装置，在获取到目标用户的动作姿态信息之后，可以控制展示装置展示与目标用户的动作姿态信息相匹配的虚拟景物展示动画，这种方法中，增加了展馆与用户的交互性环节，通过用户姿态变化来触发不同的虚拟景物展示动画，提升了用户的融入感，进而提升了展馆中景观动画的展示效果。
针对以上方案所存在的缺陷，均是发明人在经过实践并仔细研究后得出的结果，因此，上述问题的发现过程以及下文中本公开针对上述问题所提出的解决方案，都应该是发明人在本公开过程中对本公开做出的贡献。
应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。
为便于对本实施例进行理解，首先对本公开实施例所公开的一种虚拟景物的展示方法进行详细介绍，本公开实施例所提供的虚拟景物的展示方法的执行主体一般为具有一定计算能力的电子设备，该电子设备例如包括：终端设备或服务器或其它处理设备，终端设备可以为用户设备(User Equipment，UE)、移动设备、用户终端、终端、个人数字处理(Personal Digital Assistant，PDA)等。
下面以指向主体为电子设备为例，对本公开所提供的一种虚拟景物的展示方法进行介绍。参见图1所示，为本公开实施例提供的一种虚拟景物的展示方法的流程图，所述方法包括步骤101～步骤103，具体的：
步骤101、获取目标用户的动作姿态信息。
其中，所述动作姿态信息包括表情信息和/或肢体动作信息，表情信息例如可以包括开心、难过、沮丧、吃惊等，肢体动作信息例如可以包括挥手、握拳、敬礼、举手等。
执行本方案的电子设备可以配备有图像采集装置(如摄像头)，或者执行本方案的电子设备与图像采集装置连接，其连接方式包括但不仅限于有线连接、无线连接，其中，无线连接例如可以包括蓝牙连接、无线网络连接等。该图像采集装置的位置可以是固定的，因此，该图像采集装置所采集的图像对应的位置区域也是固定的。
具体实施中，进入目标检测区域的用户为目标用户，在获取目标用户的动作姿态信息时，可以先检测目标检测区域内是否包含目标用户，在检测到目标用户进入与虚拟景物对应的目标检测区域后，再获取目标用户的动作姿态信息。
其中，所述虚拟景物对应的目标检测区域即为图像采集装置采集的图像所对应的位置区域，图像采集装置可以实时采集目标检测区域的图像，然后传输至电子设备，电子设备可以实时对图像采集装置所采集的图像进行分析，以检测目标检测区域中是否包含目标用户。
在另外一种可能的实施方式中，目标检测区域中还可以设置红外检测装置，该红外检测装置与电子设备连接，通过红外检测装置检测目标检测区域中是否包含目标用户，当红外装置检测到目标检测区域中包含目标用户时，电子设备可以再控制图像采集装置采集目标检测区域的图像。
在一种可能的实施方式中，在获取目标用户的动作姿态信息时，可以先获取包括目标用户的连续多张用户图像；然后将连续多张用户图像输入训练的神经网络，得到目标用户的动作姿态信息。其中，所述连续多张用户图像可以是多个连续的视频帧。
上述神经网络为基于标记有动作姿态信息的样本图像训练得到的，具体的，参照图2所示的神经网络训练方法，包括以下几个步骤：
步骤201、获取样本图像，所述样本图像标记有动作姿态信息。
这里，所述样本图像有多组，每一组样本图像为连续的多张样本图像；所述获取样本图像包括获取多组样本图像。
步骤202、将所述样本图像输入至神经网络中，输出得到预测的动作姿态信息。
步骤203、基于预测的动作姿态信息和标记的动作姿态信息，确定本次训练过程中的损失值。
步骤204、判断本次训练过程中的损失值是否小于预设损失值。
若判断结果为是，则顺序执行步骤205；
若判断结果为否，则调整本次训练过程中的神经网络的网络参数，并返回执行步骤202。
步骤205、将本次训练过程中的神经网络确定为训练好的神经网络。
步骤102、基于所述目标用户的动作姿态信息，确定与所述目标用户的动作姿态信息相匹配的虚拟景物展示动画。
具体实施中，在基于目标用户的动作姿态信息，确定与目标用户的动作姿态信息相匹配的虚拟景物展示动画时，可以先从预先设置的映射关系库中，获取与目标用户的动作姿态信息相匹配的虚拟景物展示描述信息，然后基于虚拟景物展示描述信息，从预先存储的与虚拟景物对应的多个虚拟景物展示动画中，选取与虚拟景物展示描述信息对应的虚拟景物展示动画。
其中，虚拟景物展示描述信息可以包括虚拟景物展示动画的标识信息；所述映射关系库中可以存储有动作姿态信息与虚拟景物展示描述信息之间的对应关系，一个动作姿态信息可以对应有一个虚拟景物展示描述信息，不同的动作姿态信息可以对应同一个虚拟景物展示描述信息。
在从预先存储的多个虚拟景物展示动画中，选取与虚拟景物展示描述信息对应的虚拟景物展示动画时，可以选取与虚拟景物展示描述信息中的虚拟景物展示动画的标识信息所对应的虚拟景物展示动画。
步骤103、控制展示装置展示所述虚拟景物展示动画。
在一种可能的实施方式中，还可以预先确定存储的多个虚拟景物展示动画之间的展示关系，所述展示关系用于表示不同的虚拟景物展示动画之间是否可以叠加。
当获取到多个目标用户的动作姿态信息时，即出现在目标检测区域中的目标用户有多个时，可以根据不同目标用户的动作姿态信息对应的虚拟景物展示动画之间的展示关系，控制展示装置进行展示，具体的可以包括以下两种情况：
情况1、不同目标用户的动作姿态信息对应的虚拟景物展示动画之间的展示关系为可以叠加。
在多个目标用户的动作姿态信息匹配的虚拟景物展示动画的展示关系为可以叠加的情况下，可以同步展示与所述多个目标用户的动作姿态相匹配的虚拟景物展示动画。
示例性的，目标检测区域中包括目标用户A和目标用户B两个用户，与目标用户A的动作姿态信息(张开双臂)相匹配的虚拟景物展示动画为花开，其效果图可以如图3a所示，与目标用户B的动作姿态信息(挥手)相匹配的虚拟景物展示动画为蝴蝶飞舞，其效果图如图3b所示，则在同步展示与多个目标用户的动作姿态相匹配的虚拟景物展示动画时，其展示效果为花开，且蝴蝶飞舞，展示效果图可以如图3c所示，。
这里，需要说明的是，在多个目标用户中，任意两个目标用户的动作姿态信息匹配的虚拟景物展示动画的展示关系均为可以叠加的情况下，才可以同步展示与多个目标用户的动作姿态相匹配的虚拟景物展示动画，若任一目标用户的动作姿态信息匹配的虚拟景物展示动画与其他目标用户的动作姿态信息匹配的虚拟景物展示动画之间的展示关系为不可叠加，则不可同步展示与多个目标用户的动作姿态相匹配的虚拟景物展示动画。
情况2、不同目标用户的动作姿态信息对应的虚拟景物展示动画之间的展示关系为不可以叠加。
这里，所述不同目标用户的动作姿态信息对应的虚拟景物展示动画之间的展示关系为不可以叠加，包括存在任一目标用户，该任一目标用户动作姿态信息匹配的虚拟景物展示动画与其他目标用户的动作姿态信息匹配的虚拟景物展示动画之间的展示关系为不可叠加。
在不同目标用户的动作姿态信息对应的虚拟景物展示动画之间的展示关系为不可以叠加的情况下，可以通过以下方式中的任意一种控制展示装置展示虚拟景物展示动画：
方法一、异步展示与多个目标用户的动作姿态信息相匹配的虚拟景物展示动画。
具体的，若在同一时刻，多个目标用户分别做出不同的动作姿态，则可以根据预先设置的不同虚拟景物展示动画的展示优先级，依次对多个目标用户的动作姿态信息相匹配的虚拟景物展示动画。
示例性的，若目标用户A在10:00做出动作姿态1(张开双臂)，目标用户B在10:00做出动作姿态2(挥手)，动作姿态1相匹配的虚拟景物展示动画为虚拟景物展示动画1(花开)，动作姿态2相匹配的虚拟景物展示动画为虚拟景物展示动画2(花谢)，虚拟景物展示动画1的展示优先级高于虚拟景物展示动画2，则在控制展示装置进项展示时，可以先展示虚拟景物展示动画1，然后再展示虚拟景物展示动画2。
方法二、选择性展示与多个目标用户的动作姿态信息相匹配的虚拟景物展示动画。
具体的，在基于神经网络确定目标用户的动作姿态信息时，将包括目标用户的连续多张用户图像输入至神经网络中之后，神经网络除了输出目标用户的动作姿态信息外，还输出目标用户做出动作姿态信息对应的动作姿态的概率，因此，在选择性展示与多个目标用户的动作姿态信息相匹配的虚拟景物展示动画，可以根据各个目标用户的动作姿态信息对应的概率进行选择。
示例性的，若目标用户A在10:00做出动作姿态1，目标用户B在10:00做出动作姿态2，动作姿态1相匹配的虚拟景物展示动画为虚拟景物展示动画1，其播放时长为10秒，动作姿态2相匹配的虚拟景物展示动画为虚拟景物展示动画2，其播放时长为5秒，动作姿态1对应的概率为90％，动作姿态2对应的概率为80％，则在控制展示装置展示虚拟景物展示动画时，可以展示虚拟景物展示动画1。
在一种可能的实施方式中，在展示某一目标用户的动作姿态信息相匹配的虚拟景物展示动画的过程中，检测到另外一目标用户做出另外一种动作姿态信息，若两种动作姿态信息对应的虚拟景物展示动画之间的展示关系为可以叠加，则可以在当前展示的虚拟景物展示动画上叠加该另一种动作姿态信息相匹配的虚拟景物展示动画；若两种动作姿态信息对应的虚拟景物展示动画之间的展示关系为不可以叠加，则可以直接控制展示装置展示该另一种动作姿态信息相匹配的虚拟景物展示动画。
在另外一种可能的实施方式中，若两种动作姿态信息对应的虚拟景物展示动画之间的展示关系为不可以叠加，则可以判断该另一目标用户做出另一种动作姿态信息对应的动作姿态的概率，是否大于当前正在展示的虚拟景物展示动画对应的动作姿态信息的概率，若是，则展示该另一种动作姿态信息相匹配的虚拟景物展示动画，若否，则继续展示当前展示的虚拟景物展示动画。
其中，在展示虚拟景物展示动画的过程中，还可以展示与虚拟景物展示动画相匹配的音效，以提升用户在虚拟景物展示动画的展示过程中的体验。虚拟景物展示动画在展示过程中，还可以同步展示提示信息，该提示信息用于提示用户做出指定动作(如双手交叉)，以停止播放虚拟景物展示动画相匹配的音效，在虚拟景物展示动画的展示过程中，若检测到目标用户做出该指定动作，则停止播放虚拟景物展示动画相匹配的音效。
本公开提供的一种虚拟景物的展示方法，在获取到目标用户的动作姿态信息之后，可以控制展示装置展示与目标用户的动作姿态信息相匹配的虚拟景物展示动画，这种方法中，增加了展馆与用户的交互性环节，通过用户姿态变化来触发不同的虚拟景物展示动画，提升了用户的融入感，进而提升了展馆中景观动画的展示效果。
本领域技术人员可以理解，在具体实施方式的上述方法中，各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定，各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于同一发明构思，本公开实施例中还提供了与虚拟景物的展示方法对应的虚拟景物的展示装置，由于本公开实施例中的装置解决问题的原理与本公开实施例上述虚拟景物的展示方法相似，因此装置的实施可以参见方法的实施，重复之处不再赘述。
参照图4所示，为本公开实施例提供的一种虚拟景物的展示装置的架构示意图，所述装置包括：获取模块401、确定模块402、控制模块403；其中，
获取模块401，用于获取目标用户的动作姿态信息；
确定模块402，用于基于所述目标用户的动作姿态信息，确定与所述目标用户的动作姿态信息相匹配的虚拟景物展示动画；
控制模块403，用于控制展示装置展示所述虚拟景物展示动画。
一种可能的实施方式中，所述动作姿态信息包括表情信息和/或肢体动作信息。
一种可能的实施方式中，所述确定模块402，在基于所述目标用户的动作姿态信息，确定与所述目标用户的动作姿态信息相匹配的虚拟景物展示动画时，用于：
从预先设置的映射关系库中，获取与所述目标用户的动作姿态信息相匹配的虚拟景物展示描述信息；
基于所述虚拟景物展示描述信息，从预先存储的与虚拟景物对应的多个虚拟景物展示动画中，选取与所述虚拟景物展示描述信息对应的所述虚拟景物展示动画。
一种可能的实施方式中，所述获取模块401，在获取目标用户的动作姿态信息时，用于：
在检测到所述目标用户进入与虚拟景物对应的目标检测区域后，获取目标用户的动作姿态信息。
一种可能的实施方式中，所述确定模块402，还用于：
预先确定存储的虚拟景物展示动画之间的展示关系；所述展示关系用于表示不同的虚拟景物展示动画之间是否可以叠加。
一种可能的实施方式中，若获取到多个目标用户的动作姿态信息，所述控制模块403，在控制展示装置展示所述虚拟景物展示动画时，用于：
在所述多个目标用户的动作姿态信息匹配的虚拟景物展示动画的展示关系为可以叠加的情况下，同步展示与所述多个目标用户的动作姿态相匹配的虚拟景物展示动画。
一种可能的实施方式中，若获取到多个目标用户的动作姿态信息，所述控制模块403，在控制展示装置展示所述虚拟景物展示动画时，用于：
在所述多个目标用户的动作姿态信息匹配的虚拟景物展示动画的展示关系为不可以叠加的情况下，异步展示与所述多个目标用户的动作姿态信息相匹配的虚拟景物展示动画，或者选择性展示与所述多个目标用户的动作姿态信息相匹配的虚拟景物展示动画。
一种可能的实施方式中，所述获取模块401，在获取目标用户的动作姿态信息时，用于：
获取包括所述目标用户的连续多张用户图像；
将所述连续多张用户图像输入训练的神经网络，得到所述目标用户的动作姿态信息；其中，所述神经网络为基于标记有动作姿态信息的样本图像训练得到的。
关于装置中的各模块的处理流程、以及各模块之间的交互流程的描述可以参照上述方法实施例中的相关说明，这里不再详述。
基于同一技术构思，本公开实施例还提供了一种计算机设备。参照图5所示，为本公开实施例提供的计算机设备500的结构示意图，包括处理器501、存储器502、和总线503。其中，存储器502用于存储执行指令，包括内存5021和外部存储器5022；这里的内存5021也称内存储器，用于暂时存放处理器501中的运算数据，以及与硬盘等外部存储器5022交换的数据，处理器501通过内存5021与外部存储器5022进行数据交换，当计算机设备500运行时，处理器501与存储器502之间通过总线503通信，使得处理器501在执行以下指令：
获取目标用户的动作姿态信息；
基于所述目标用户的动作姿态信息，确定与所述目标用户的动作姿态信息相匹配的虚拟景物展示动画；
控制展示装置展示所述虚拟景物展示动画。
本公开实施例还提供一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行上述方法实施例中所述的虚拟景物的展示方法的步骤。其中，该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例所提供的虚拟景物的展示方法的计算机程序产品，包括存储了程序代码的计算机可读存储介质，所述程序代码包括的指令可用于执行上述方法实施例中所述的虚拟景物的展示方法的步骤，具体可参见上述方法实施例，在此不再赘述。
本公开实施例还提供一种计算机程序，该计算机程序被处理器执行时实现前述实施例的任意一种方法。该计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中，所述计算机程序产品具体体现为计算机存储介质，在另一个可选实施例中，计算机程序产品具体体现为软件产品，例如软件开发包(Software DevelopmentKit，SDK)等等。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统和装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。在本公开所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本公开各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解，本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-OnlyMemory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上所述实施例，仅为本公开的具体实施方式，用以说明本公开的技术方案，而非对其限制，本公开的保护范围并不局限于此，尽管参照前述实施例对本公开进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本公开揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围，都应涵盖在本公开的保护范围之内。因此，本公开的保护范围应所述以权利要求的保护范围为准。
Claims (11)
1.一种虚拟景物的展示方法，其特征在于，包括：
获取目标用户的动作姿态信息；
基于所述目标用户的动作姿态信息，确定与所述目标用户的动作姿态信息相匹配的虚拟景物展示动画；
控制展示装置展示所述虚拟景物展示动画。
2.根据权利要求1所述的方法，其特征在于，所述动作姿态信息包括表情信息和/或肢体动作信息。
3.根据权利要求1所述的方法，其特征在于，所述基于所述目标用户的动作姿态信息，确定与所述目标用户的动作姿态信息相匹配的虚拟景物展示动画，包括：
从预先设置的映射关系库中，获取与所述目标用户的动作姿态信息相匹配的虚拟景物展示描述信息；
基于所述虚拟景物展示描述信息，从预先存储的与虚拟景物对应的多个虚拟景物展示动画中，选取与所述虚拟景物展示描述信息对应的所述虚拟景物展示动画。
4.根据权利要求1所述的方法，其特征在于，获取目标用户的动作姿态信息，包括：
在检测到所述目标用户进入与虚拟景物对应的目标检测区域后，获取目标用户的动作姿态信息。
5.根据权利要求1所述的方法，其特征在于，所述方法还包括：
预先确定存储的虚拟景物展示动画之间的展示关系；所述展示关系用于表示不同的虚拟景物展示动画之间是否可以叠加。
6.根据权利要求5所述的方法，其特征在于，若获取到多个目标用户的动作姿态信息，所述控制展示装置展示所述虚拟景物展示动画，包括：
在所述多个目标用户的动作姿态信息匹配的虚拟景物展示动画的展示关系为可以叠加的情况下，同步展示与所述多个目标用户的动作姿态相匹配的虚拟景物展示动画。
7.根据权利要求5所述的方法，其特征在于，若获取到多个目标用户的动作姿态信息，所述控制展示装置展示所述虚拟景物展示动画，包括：
在所述多个目标用户的动作姿态信息匹配的虚拟景物展示动画的展示关系为不可以叠加的情况下，异步展示与所述多个目标用户的动作姿态信息相匹配的虚拟景物展示动画，或者选择性展示与所述多个目标用户的动作姿态信息相匹配的虚拟景物展示动画。
8.根据权利要求1所述的方法，其特征在于，获取目标用户的动作姿态信息，包括：
获取包括所述目标用户的连续多张用户图像；
将所述连续多张用户图像输入训练的神经网络，得到所述目标用户的动作姿态信息；其中，所述神经网络为基于标记有动作姿态信息的样本图像训练得到的。
9.一种虚拟景物的展示装置，其特征在于，包括：
获取模块，用于获取目标用户的动作姿态信息；
确定模块，用于基于所述目标用户的动作姿态信息，确定与所述目标用户的动作姿态信息相匹配的虚拟景物展示动画；
控制模块，用于控制展示装置展示所述虚拟景物展示动画。
10.一种计算机设备，其特征在于，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当计算机设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行如权利要求1至8任一所述的虚拟景物的展示方法的步骤。
11.一种计算机可读存储介质，其特征在于，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行如权利要求1至8任意一项所述的虚拟景物的展示方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010486303.4A CN111627097B (zh) | 2020-06-01 | 2020-06-01 | 一种虚拟景物的展示方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010486303.4A CN111627097B (zh) | 2020-06-01 | 2020-06-01 | 一种虚拟景物的展示方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111627097A true CN111627097A (zh) | 2020-09-04 |
| CN111627097B CN111627097B (zh) | 2023-12-01 |
Family
ID=72271267
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010486303.4A Active CN111627097B (zh) | 2020-06-01 | 2020-06-01 | 一种虚拟景物的展示方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111627097B (zh) |
Citations (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104750252A (zh) * | 2015-03-09 | 2015-07-01 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
| CN105487673A (zh) * | 2016-01-04 | 2016-04-13 | 京东方科技集团股份有限公司 | 一种人机交互系统、方法及装置 |
| CN105677022A (zh) * | 2015-12-30 | 2016-06-15 | 北京奇艺世纪科技有限公司 | 交互方法、装置和系统 |
| CN107204031A (zh) * | 2017-04-27 | 2017-09-26 | 腾讯科技（深圳）有限公司 | 信息展示方法及装置 |
| CN107479801A (zh) * | 2017-07-31 | 2017-12-15 | 广东欧珀移动通信有限公司 | 基于用户表情的终端显示方法、装置及终端 |
| US20180052841A1 (en) * | 2016-08-16 | 2018-02-22 | Shanghai Zhangmen Science And Technology Co., Ltd. | Method and Device thereof for User Interaction Based on Virtual Objects and Non-volatile Storage Medium |
| CN107885316A (zh) * | 2016-09-29 | 2018-04-06 | 阿里巴巴集团控股有限公司 | 一种基于手势的交互方法及装置 |
| CN107911614A (zh) * | 2017-12-25 | 2018-04-13 | 腾讯数码（天津）有限公司 | 一种基于手势的图像拍摄方法、装置和存储介质 |
| CN109032358A (zh) * | 2018-08-27 | 2018-12-18 | 百度在线网络技术（北京）有限公司 | 基于手势识别的ar交互虚拟模型的控制方法及装置 |
| CN109254650A (zh) * | 2018-08-02 | 2019-01-22 | 阿里巴巴集团控股有限公司 | 一种人机交互方法和装置 |
| CN110013669A (zh) * | 2019-03-05 | 2019-07-16 | 深圳鼎盛乐园娱乐服务有限公司 | 一种虚拟现实多竞技交互方法 |
| US20190362559A1 (en) * | 2018-06-19 | 2019-11-28 | Guangdong Virtual Reality Technology Co., Ltd. | Augmented reality method for displaying virtual object and terminal device therefor |
| CN110716634A (zh) * | 2019-08-28 | 2020-01-21 | 北京市商汤科技开发有限公司 | 交互方法、装置、设备以及显示设备 |
| CN110716645A (zh) * | 2019-10-15 | 2020-01-21 | 北京市商汤科技开发有限公司 | 一种增强现实数据呈现方法、装置、电子设备及存储介质 |
| CN110996148A (zh) * | 2019-11-27 | 2020-04-10 | 重庆特斯联智慧科技股份有限公司 | 一种基于人脸识别的景区多媒体影像流动播放系统和方法 |
| CN111083463A (zh) * | 2018-10-18 | 2020-04-28 | 广东虚拟现实科技有限公司 | 虚拟内容的显示方法、装置、终端设备及显示系统 |
-
2020
- 2020-06-01 CN CN202010486303.4A patent/CN111627097B/zh active Active
Patent Citations (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104750252A (zh) * | 2015-03-09 | 2015-07-01 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
| CN105677022A (zh) * | 2015-12-30 | 2016-06-15 | 北京奇艺世纪科技有限公司 | 交互方法、装置和系统 |
| CN105487673A (zh) * | 2016-01-04 | 2016-04-13 | 京东方科技集团股份有限公司 | 一种人机交互系统、方法及装置 |
| US20180052841A1 (en) * | 2016-08-16 | 2018-02-22 | Shanghai Zhangmen Science And Technology Co., Ltd. | Method and Device thereof for User Interaction Based on Virtual Objects and Non-volatile Storage Medium |
| CN107885316A (zh) * | 2016-09-29 | 2018-04-06 | 阿里巴巴集团控股有限公司 | 一种基于手势的交互方法及装置 |
| CN107204031A (zh) * | 2017-04-27 | 2017-09-26 | 腾讯科技（深圳）有限公司 | 信息展示方法及装置 |
| CN107479801A (zh) * | 2017-07-31 | 2017-12-15 | 广东欧珀移动通信有限公司 | 基于用户表情的终端显示方法、装置及终端 |
| CN107911614A (zh) * | 2017-12-25 | 2018-04-13 | 腾讯数码（天津）有限公司 | 一种基于手势的图像拍摄方法、装置和存储介质 |
| US20190362559A1 (en) * | 2018-06-19 | 2019-11-28 | Guangdong Virtual Reality Technology Co., Ltd. | Augmented reality method for displaying virtual object and terminal device therefor |
| CN109254650A (zh) * | 2018-08-02 | 2019-01-22 | 阿里巴巴集团控股有限公司 | 一种人机交互方法和装置 |
| CN109032358A (zh) * | 2018-08-27 | 2018-12-18 | 百度在线网络技术（北京）有限公司 | 基于手势识别的ar交互虚拟模型的控制方法及装置 |
| CN111083463A (zh) * | 2018-10-18 | 2020-04-28 | 广东虚拟现实科技有限公司 | 虚拟内容的显示方法、装置、终端设备及显示系统 |
| CN110013669A (zh) * | 2019-03-05 | 2019-07-16 | 深圳鼎盛乐园娱乐服务有限公司 | 一种虚拟现实多竞技交互方法 |
| CN110716634A (zh) * | 2019-08-28 | 2020-01-21 | 北京市商汤科技开发有限公司 | 交互方法、装置、设备以及显示设备 |
| CN110716645A (zh) * | 2019-10-15 | 2020-01-21 | 北京市商汤科技开发有限公司 | 一种增强现实数据呈现方法、装置、电子设备及存储介质 |
| CN110996148A (zh) * | 2019-11-27 | 2020-04-10 | 重庆特斯联智慧科技股份有限公司 | 一种基于人脸识别的景区多媒体影像流动播放系统和方法 |
Non-Patent Citations (2)
| Title |
|---|
| LEO PAULY ET AL.: "A Novel Online Product Recommendation System Based on Face Recognition and Emotion Detection", 《2015 INTERNATIONAL CONFERENCE ON CONTROL , INSTRUMENTATION, COMMUNICATION AND COMPUTATIONAL TECHNOLOGIES》, pages 329 - 344 * |
| 李康: "基于数据驱动的实时人体运动控制动画界面", 《中国优秀硕士学位论文全文数据库》, pages 1 - 54 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111627097B (zh) | 2023-12-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112348969A (zh) | 增强现实场景下的展示方法、装置、电子设备及存储介质 | |
| KR20130099317A (ko) | 인터랙티브 증강현실 구현 시스템 및 증강현실 구현 방법 | |
| CN111638797A (zh) | 一种展示控制方法及装置 | |
| CN104914989B (zh) | 姿势辨识装置以及姿势辨识装置的控制方法 | |
| CN111240482A (zh) | 一种特效展示方法及装置 | |
| CN111643900A (zh) | 一种展示画面控制方法、装置、电子设备和存储介质 | |
| CN111862341A (zh) | 虚拟对象的驱动方法、装置、显示设备及计算机存储介质 | |
| CN113487709A (zh) | 一种特效展示方法、装置、计算机设备以及存储介质 | |
| CN111652971A (zh) | 一种显示控制方法及装置 | |
| CN111652983A (zh) | 一种增强现实ar特效生成方法、装置及设备 | |
| CN111640165A (zh) | Ar合影图像的获取方法、装置、计算机设备及存储介质 | |
| CN111625100A (zh) | 图画内容的呈现方法、装置、计算机设备及存储介质 | |
| CN111640167A (zh) | 一种ar合影方法、装置、计算机设备及存储介质 | |
| CN109683711B (zh) | 产品展示方法及装置 | |
| CN111627115A (zh) | 互动合影方法及装置、互动装置以及计算机存储介质 | |
| CN111639613A (zh) | 一种增强现实ar特效生成方法、装置及电子设备 | |
| CN111638798A (zh) | 一种ar合影方法、装置、计算机设备及存储介质 | |
| CN112991555B (zh) | 数据展示方法、装置、设备以及存储介质 | |
| CN105468249B (zh) | 智能互动系统及其控制方法 | |
| CN112333498A (zh) | 一种展示控制方法、装置、计算机设备及存储介质 | |
| CN111640183A (zh) | 一种ar数据展示控制方法及装置 | |
| CN111639615A (zh) | 一种虚拟建筑物的触发控制方法及装置 | |
| CN111651054A (zh) | 音效控制方法、装置、电子设备及存储介质 | |
| CN111665942A (zh) | 一种ar特效触发展示方法、装置、电子设备和存储介质 | |
| CN115061577B (zh) | 手部投影交互方法、系统及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |