CN111626247A - 姿态检测的方法、装置、电子设备及存储介质 - Google Patents

姿态检测的方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN111626247A
CN111626247A CN202010485832.2A CN202010485832A CN111626247A CN 111626247 A CN111626247 A CN 111626247A CN 202010485832 A CN202010485832 A CN 202010485832A CN 111626247 A CN111626247 A CN 111626247A
Authority
CN
China
Prior art keywords
target
user
posture
target object
target user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010485832.2A
Other languages
English (en)
Inventor
王子彬
孙红亮
揭志伟
刘小兵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Sensetime Intelligent Technology Co Ltd
Original Assignee
Shanghai Sensetime Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Sensetime Intelligent Technology Co Ltd filed Critical Shanghai Sensetime Intelligent Technology Co Ltd
Priority to CN202010485832.2A priority Critical patent/CN111626247A/zh
Publication of CN111626247A publication Critical patent/CN111626247A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开提供了一种姿态检测的方法、装置、电子设备及存储介质,该方法包括:获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像;从所述用户模仿图像中提取所述目标用户的模仿姿态信息;基于所述模仿姿态信息和所述目标对象的姿态信息,确定所述目标用户的模仿相似度;展示所述模仿相似度。

Description

姿态检测的方法、装置、电子设备及存储介质
技术领域
本公开涉及图像检测技术领域,具体而言,涉及一种姿态检测的方法、装置、电子设备及存储介质。
背景技术
一般的,雕塑具有生动直观、视觉冲击力强的特性,被广泛展示在各个场所中。比如可以在展馆中展示雕塑,用户对展示的雕塑进行观察。
但是,用户在对雕塑观察时,对雕塑的展示细节观察不细致,且由于景物保护的限制,用户无法对雕塑进行触碰等交互性操作,因此无法掌握该人物雕塑的精髓。
发明内容
有鉴于此,本公开至少提供一种姿态检测的方法、装置、电子设备及存储介质。
第一方面,本公开提供了一种姿态检测的方法,包括:
获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像;
从所述用户模仿图像中提取所述目标用户的模仿姿态信息;
基于所述模仿姿态信息和所述目标对象的姿态信息,确定所述目标用户的模仿相似度;
展示所述模仿相似度。
采用上述方法,通过获取位于目标检测区域内目标用户模仿目标对象姿态的用户模仿图像,从用户模仿图像中提取目标用户的模仿姿态信息,并基于模仿姿态信息和目标对象的姿态信息,确定目标用户的模仿相似度,控制与目标检测区域对应的显示设备展示模仿相似度,通过目标用户对目标对象姿态(比如雕塑动作)进行模仿,并展示确定的模拟相似度,使得目标用户可以查看模仿的姿态与目标对象姿态之间的差异程度,进而使得目标用户对目标对象的展示细节有更深入、细致的认知,进而提高了目标对象的展示效果,实现了用户与展示的目标对象的交互。
一种可能的实施方式中,获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像,包括:
连续获取所述目标用户模仿目标对象姿态的用户模仿图像;
所述展示所述模仿相似度,包括:
连续更新展示所述模仿相似度。
上述实施方式下,通过连续获取用户模仿图像,并连续更新展示模仿相似度,通过对目标用户的模仿姿态的模仿相似度进行实时更新,以便目标用户可以根据实时更新的模仿相似度调整模仿姿态,使得目标用户的模仿姿态与目标对象姿态较为相似,提高了用户模仿的显示效果。
一种可能的实施方式中,所述方法还包括:
建立与所述目标对象对应的虚拟三维模型,其中所述虚拟三维模型的姿态与所述目标对象的姿态相同,计算所述虚拟三维模型对应的多种姿态特征信息,将所述虚拟三维模型的多种姿态特征信息作为所述目标对象的姿态信息进行存储;
基于所述模仿姿态信息和所述目标对象的姿态信息,确定所述目标用户的模仿相似度,包括:
基于所述模仿姿态信息在多种姿态特征下的特征信息,以及预先存储的所述虚拟三维模型的多种姿态特征信息,确定所述目标用户的模仿相似度。
上述实施方式中,通过提前为目标对象建立虚拟三维模型,并确定和存储虚拟三维模型的多种姿态特征信息,进而可以较快速的基于多种姿态特征下的特征信息与预先存储的虚拟三维模型的多种姿态特征信息,确定了目标用户的模仿相似度,提高了确定模拟相似度的效率。
一种可能的实施方式中,基于所述模仿姿态信息在多种姿态特征下的特征信息,以及预先存储的所述虚拟三维模型的多种姿态特征信息,确定所述目标用户的模仿相似度,包括:
基于所述多种姿态特征分别对应的权重,以及所述模仿姿态信息与所述虚拟三维模型在每种姿态特征下的特征信息相似度,确定所述目标用户的模仿相似度。
上述实施方式下,可以为多种姿态特征中的每种姿态特征设置对应的权重,将姿态特征较重要的特征的权重设置的较大,将姿态特征不重要的特征的权重设置的较小,进而基于多种姿态特征分别对应的权重,以及模仿姿态信息与虚拟三维模型在每种姿态特征下的特征信息相似度,确定得到的目标用户的模拟相似度的准确度较高。
一种可能的实施方式中,在获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像之前,包括:
响应目标用户的预设触发操作,控制与所述目标检测区域对应的显示设备展示存储的至少一个目标对象的图像。
这里,响应目标用户的预设触发操作,可以控制与目标检测区域对应的显示设备展示存储的至少一个目标对象的图像,在目标对象为多个时,可以展示每个目标对象的图像,提高了展示的灵活性,且可以方便目标用户对多个目标对象有较为全面的认知。
一种可能的实施方式中,在获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像之前,包括:
在展示的目标对象为多个的情况下,响应目标用户触发的对象选择操作,控制与所述目标检测区域对应的显示设备展示目标用户选择的目标对象的图像,以便所述目标用户对所述显示设备展示的所述目标对象进行模仿。
上述实施方式中,在目标对象为多个的情况下,目标用户可以从多个目标对象中,选择感兴趣的、欲模仿的目标对象,将目标用户选择的目标对象的图像展示在目标检测区域对应的显示设备上,方便目标用户对选择的目标对象姿态进行模仿,提高了目标对象展示的灵活性。
一种可能的实施方式中,获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像,包括:
在接收到目标用户触发的模仿请求,或者,检测到预设区域存在目标用户之后,获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像。
在上述实施方式中,在接收到目标用户触发的模仿请求,或检测到预设区域存在目标用户之后,获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像,避免不会对目标对象姿态进行模仿的用户,经过目标检测区域时,获取该用户的图像的情况发生,进而避免了资源的浪费。
以下装置、电子设备等的效果描述参见上述方法的说明,这里不再赘述。
第二方面,本公开提供了一种姿态检测的装置,包括:
获取模块,用于获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像;
提取模块,用于从所述用户模仿图像中提取所述目标用户的模仿姿态信息;
确定模块,用于基于所述模仿姿态信息和所述目标对象的姿态信息,确定所述目标用户的模仿相似度;
第一展示模块,用于展示所述模仿相似度。
一种可能的实施方式中,所述获取模块,在获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像时,用于:
连续获取所述目标用户模仿目标对象姿态的用户模仿图像;
所述第一展示模块,在展示所述模仿相似度时,用于:
连续更新展示所述模仿相似度。
一种可能的实施方式中,所述装置还包括:
计算模块,用于建立与所述目标对象对应的虚拟三维模型,其中所述虚拟三维模型的姿态与所述目标对象的姿态相同,计算所述虚拟三维模型对应的多种姿态特征信息,将所述虚拟三维模型的多种姿态特征信息作为所述目标对象的姿态信息进行存储;
所述确定模块,在基于所述模仿姿态信息和所述目标对象的姿态信息,确定所述目标用户的模仿相似度时,用于:
基于所述模仿姿态信息在多种姿态特征下的特征信息,以及预先存储的所述虚拟三维模型的多种姿态特征信息,确定所述目标用户的模仿相似度。
一种可能的实施方式中,所述确定模块,在基于所述模仿姿态信息在多种姿态特征下的特征信息,以及预先存储的所述虚拟三维模型的多种姿态特征信息,确定所述目标用户的模仿相似度时,用于:
基于所述多种姿态特征分别对应的权重,以及所述模仿姿态信息与所述虚拟三维模型在每种姿态特征下的特征信息相似度,确定所述目标用户的模仿相似度。
一种可能的实施方式中,在获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像之前,包括:
第二展示模块,用于响应目标用户的预设触发操作,控制与所述目标检测区域对应的显示设备展示存储的至少一个目标对象的图像。
一种可能的实施方式中,在获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像之前,包括:
第三展示模块,用于在展示的目标对象为多个的情况下,响应目标用户触发的对象选择操作,控制与所述目标检测区域对应的显示设备展示目标用户选择的目标对象的图像,以便所述目标用户对所述显示设备展示的所述目标对象进行模仿。
一种可能的实施方式中,所述获取模块,在获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像时,用于:
在接收到目标用户触发的模仿请求,或者,检测到预设区域存在目标用户之后,获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像。
第三方面,本公开提供一种电子设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如上述第一方面或任一实施方式所述的姿态检测的方法的步骤。
第四方面,本公开提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如上述第一方面或任一实施方式所述的姿态检测的方法的步骤。
为使本公开的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,此处的附图被并入说明书中并构成本说明书中的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。应当理解,以下附图仅示出了本公开的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例所提供的一种姿态检测的方法的流程示意图;
图2A示出了本公开实施例所提供的一种姿态检测的方法中,显示设备的界面示意图;
图2B示出了本公开实施例所提供的一种姿态检测的方法中,显示设备的界面示意图;
图3示出了本公开实施例所提供的一种姿态检测的装置的架构示意图;
图4示出了本公开实施例所提供的一种电子设备400的结构示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中的附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围,而是仅仅表示本公开的选定实施例。基于本公开的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。
一般的,展馆内可以展示各种艺术品,比如,展馆内可以展示雕塑、蜡像等。出于对艺术品的保护,展馆内可以将展示的各种艺术品放置在展柜内,故用户可以对展柜内的各种艺术品进行远距离观察,不能对艺术品进行触摸,使得用户难以对艺术品进行细致的、全面的观察,且使得用户无法与展示的艺术品进行交互,造成艺术品的展示效果较差。
为了解决上述问题,本公开实施例提供了一种姿态检测的方法,通过计算用户模仿的姿态与目标对象姿态之间的模仿相似度,并将确定的模仿相似度展示在显示设备上,使得用户可以查看模仿的姿态与目标对象姿态之间的差异程度,对目标对象的姿态有较为细致、深刻的理解,提高了目标对象(比如雕塑)的展示效果,实现了用户与展示的目标对象的交互。
为便于对本公开实施例进行理解,首先对本公开实施例所公开的一种姿态检测的方法进行详细介绍。
本公开实施例提供的姿态检测的方法可应用于服务器,或者应用于支持显示功能的终端设备。服务器可以是本地服务器也可以是云端服务器等,终端设备可以是智能手机、平板电脑、个人数字处理(Personal Digital Assistant,PDA)、智能电视等,本公开对此并不限定。
参见图1所示,为本公开实施例所提供的姿态检测的方法的流程示意图,该方法可以应用于展馆行业、体感游戏行业等,下述以该方法应用于展馆为例进行说明。该方法包括S101-S104,其中:
S101,获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像。
S102,从用户模仿图像中提取目标用户的模仿姿态信息。
S103,基于模仿姿态信息和目标对象的姿态信息,确定目标用户的模仿相似度。
S104,展示模仿相似度。
具体的,可以控制与目标检测区域对应的显示设备展示模仿相似度。
上述方法中,通过获取位于目标检测区域内目标用户模仿目标对象姿态的用户模仿图像,从用户模仿图像中提取目标用户的模仿姿态信息,并基于模仿姿态信息和目标对象的姿态信息,确定目标用户的模仿相似度,控制与目标检测区域对应的显示设备展示模仿相似度,通过目标用户对目标对象姿态(比如雕塑动作)进行模仿,并展示确定的模拟相似度,使得目标用户可以查看模仿的姿态与目标对象姿态之间的差异程度,进而使得目标用户对目标对象的展示细节有更深入、细致的认知,进而提高了目标对象的展示效果,实现了用户与展示的目标对象的交互。
针对S101:
这里,目标对象可以为展馆内展示的人物雕塑、图画中的人物等。具体实施时,目标用户可以根据展示的目标对象,对目标对象姿态进行模仿,同时,可以通过设置在目标检测区域内的摄像设备,获取目标用户模仿目标对象姿态的用户模仿图像。其中,展示的目标对象可以为展馆内展示的实体人物雕塑、实体图画中的人物;展示的目标对象也可以为展馆的显示设备上展示的图像中的人物,显示设备上展示的图像可以为人物雕塑的图像、图画对应的图像等;展示的目标对象还可以为通过增强现实设备展示的虚拟人物等。
作为一可选实施方式,获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像,可以包括:连续获取目标用户模仿目标对象姿态的用户模仿图像。以及展示模仿相似度,包括:连续更新展示模仿相似度。具体的,可以控制目标检测区域对应的显示设备,连续更新展示模仿相似度。
这里,摄像设备可以实时的、连续获取目标用户模仿目标对象姿态的用户模仿图像,并确定连续获取的每一帧用户模仿图像的模仿相似度,并控制与目标检测区域对应的显示设备,连续更新展示模仿相似度,以便目标用户可以根据连续更新展示的模仿相似度,确定姿态调整的方向,使得目标用户模仿的姿态接近目标对象的姿态。
上述实施方式中,通过连续获取用户模仿图像,并在与目标检测区域对应的显示设备上,连续更新展示模仿相似度,通过对目标用户的模仿姿态的模仿相似度进行实时更新,以便目标用户可以根据实时更新的模仿相似度调整模仿姿态,使得目标用户的模仿姿态与目标对象姿态较为相似,提高了用户模仿的显示效果。
一种可选实施方式中,在获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像之前,可以包括:响应目标用户的预设触发操作,控制与目标检测区域对应的显示设备展示存储的至少一个目标对象的图像。
这里,预设触发操作可以为预先设置的任一操作,比如,可以为点击预设的按钮等。响应目标用户的预设触发操作,可以控制目标检测区域对象的显示设备展示存储的至少一个目标对象的图像,以便目标用户可以对能够模仿的至少一个目标对象进行查看,进而可以从展示的至少一个目标对象的图像中选择想要模仿的目标对象姿态。
在具体实施时,在目标对象为多个时,可以在目标检测区域对应的显示设备上按照设置的顺序依次对每个目标对象的图像进行展示,或者,也可以在目标检测区域对应的显示设备上展示全部的目标对象的图像。其中,目标对象的图像的展示方式(比如每次展示的图像数量、每次展示的间隔时间等)可以根据需要进行设置,此处仅为示例性说明。
上述实施方式中,响应目标用户的预设触发操作,可以控制与目标检测区域对应的显示设备展示存储的至少一个目标对象的图像,在目标对象为多个时,可以展示每个目标对象的图像,提高了展示的灵活性,且可以方便目标用户对多个目标对象有较为全面的认知。
一种可选实施方式中,在获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像之前,可以包括:在展示的目标对象为多个的情况下,响应目标用户触发的对象选择操作,控制与目标检测区域对应的显示设备展示目标用户选择的目标对象的图像,以便目标用户对显示设备展示的目标对象进行模仿。
考虑到模仿的多样性和灵活性,这里可以提前存储多个目标对象,使得不同的用户可以根据需要模仿不同的目标对象姿态。具体实施时,目标用户可以从展示的多个目标对象中选择想要模仿的目标对象,即目标用户触发了对象选择操作,响应目标用户触发的对象选择操作,控制与目标检测区域对应的显示设备展示目标用户选择的目标对象的图像,方便目标用户根据展示的目标对象的图像,对选择的目标对象姿态进行模仿。
上述实施方式中,在目标对象为多个的情况下,目标用户可以从多个目标对象中,选择感兴趣的、欲模仿的目标对象,将目标用户选择的目标对象的图像展示在目标检测区域对应的显示设备上,方便目标用户对选择的目标对象姿态进行模仿,提高了目标对象展示的灵活性。
一种可选实施方式中,获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像,可以包括:在接收到目标用户触发的模仿请求,或者,检测到预设区域存在目标用户之后,获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像。
这里,目标用户想要对目标对象姿态进行模仿时,可以触发模仿请求,比如,可以点击设置在目标检测区域内的模仿按钮,触发模仿请求;或者,也可以点击通信设备上设置的模仿按钮,触发模仿请求;或者,还可以发出预设的模仿指令,比如,用户可以说“我要模仿目标对象A”,触发模仿请求等。其中,触发的模仿请求的形式有多种,此处仅为示例性说明。在接收到目标用户触发的模仿请求之后,获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像。
或者,还可以提前设置预设区域,在检测到预设区域中存在目标用户之后,获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像。或者,也可以在检测到目标用户在预设区域内做出预设动作、或预设姿态时,获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像。
上述实施方式中,在接收到目标用户触发的模仿请求,或检测到预设区域存在目标用户之后,获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像,避免不会对目标对象姿态进行模仿的用户,经过目标检测区域时,获取该用户的图像的情况发生,进而避免了资源的浪费。
针对S102以及S103:
在获取了用户模仿图像之后,可以从用户模仿图像中提取目标用户的模仿姿态信息,并基于模仿姿态信息和目标对象的姿态信息,确定目标用户的模仿相似度。
一种可选实施方式中,该方法还包括:建立与目标对象对应的虚拟三维模型,其中虚拟三维模型的姿态与目标对象的姿态相同,计算虚拟三维模型对应的多种姿态特征信息,将虚拟三维模型的多种姿态特征信息作为目标对象的姿态信息进行存储。
这里,可以建立目标对象对应的虚拟三维模型,比如,可以建立展示的雕塑的虚拟三维模型,其中,虚拟三维模型的姿态与目标对象的姿态相同。并计算三维模型对应的多种姿态特征信息,并将虚拟三维模型的多种姿态特征信息作为目标对象的姿态信息进行存储,为后续对目标用户的用户模仿图像的模仿相似度的计算提供了数据支持。
示例性的,多种姿态特征可以包括以下特征中的至少一种:角度特征、间距特征、高度特征等。角度特征可以包括不同部位之间的角度,比如,不同部位之间的角度可以为头部与肩部之间的角度、前臂与后臂之间的角度、后臂与躯干之间的角度、大腿与小腿之间的角度、脚部与地面之间的角度等;间距特征可以包括不同部位之间的间距,比如,不同部位之间的间距可以为手部与躯干之间的间距、头部与肩部之间的间距、手部与腿部之间的间距等;高度特征可以包括各个部位的高度,比如,部位的高度可以为头部距离地面的高度、左手距离地面的高度、右手距离地面的高度、左肩距离地面的高度、右肩距离地面的高度等。其中,多种姿态信息可以根据实际需要进行设置,此处仅为示例性说明。
作为一可选实施方式,基于模仿姿态信息和目标对象的姿态信息,确定目标用户的模仿相似度,可以包括:基于模仿姿态信息在多种姿态特征下的特征信息,以及预先存储的虚拟三维模型的多种姿态特征信息,确定目标用户的模仿相似度。
这里,可以基于用户模仿图像,确定目标用户的模仿姿态信息在多种姿态特征下的特征信息,其中,目标用户的多种姿态特征与虚拟三维模型对应的多种姿态特征相同。进而可以基于模仿姿态信息在多种姿态特征下的特征信息、以及预先存储的虚拟三维模型的多种姿态特征信息,确定目标用户的模仿相似度。
上述实施方式中,通过提前为目标对象建立虚拟三维模型,并确定和存储虚拟三维模型的多种姿态特征信息,进而可以较快速的基于多种姿态特征下的特征信息与预先存储的虚拟三维模型的多种姿态特征信息,确定了目标用户的模仿相似度,提高了确定模拟相似度的效率。
基于模仿姿态信息在多种姿态特征下的特征信息,以及预先存储的虚拟三维模型的多种姿态特征信息,确定目标用户的模仿相似度,可以包括:基于多种姿态特征分别对应的权重,以及模仿姿态信息与虚拟三维模型在每种姿态特征下的特征信息相似度,确定目标用户的模仿相似度。
在具体实施时,可以为每种姿态特征设置对应的权重,若多种姿态特征包括角度特征、间距特征、高度特征,则可以根据实际情况,为角度特征、间距特征、高度特征中的每个特征设置权重,其中角度特征、间距特征、高度特征对应的权重之和可以为1。
可以针对每种姿态特征,计算模仿姿态信息中该姿态特征对应的特征信息与虚拟三维模型中该姿态特征对应的特征信息之间的特征信息相似度,得到了各个姿态特征对应的特征信息相似度;基于各个姿态特征对应的特征信息相似度以及每个姿态特征对应的权重,得到了目标用户的模仿相似度。比如,若角度特征对应的权重为0.4、角度特征对应的特征信息相似度为0.8,间距特征对应的权重为0.2、间距特征对应的特征信息相似度为0.4,高度特征对应的权重为0.4、高度特征对应的特征信息相似度为0.6,则计算得到目标用户的模仿相似度为0.4×0.8+0.2×0.4+0.4×0.6=0.64,即模仿相似度为64%。
上述实施方式中,可以为多种姿态特征中的每种姿态特征设置对应的权重,将姿态特征较重要的特征的权重设置的较大,将姿态特征不重要的特征的权重设置的较小,进而基于多种姿态特征分别对应的权重,以及模仿姿态信息与虚拟三维模型在每种姿态特征下的特征信息相似度,确定得到的目标用户的模拟相似度的准确度较高。
针对S104:
这里在得到模仿相似度之后,可以控制与目标检测区域对应的显示设备展示模仿相似度。比如,在显示设备的相似度显示区域中展示“模拟相似度:64%”。或者,还可以控制与目标检测区域对应的显示设备显示用户模仿图像和模拟相似度;或者,还可以控制与目标检测区域对应的显示设备显示用户模仿图像、目标对象的图像和模拟相似度。
参见图2A所示的一种显示设备的界面示意图,图2A中包括用户模拟图像、目标对象的图像、模拟相似度、以及模拟标识(即图2A中的圆形),其中模拟标识中黑色区域的面积与整个圆形区域的面积的比例与模拟相似度相匹配,即图中模拟相似度为:50%,则黑色的区域的面积为整个圆形区域面积的一半。
或者,还可以根据模拟相似度为目标用户生成标签,控制与目标检测区域对应的显示设备显示模拟相似度和生成的标签。比如,在模拟相似度低于50%时,则为目标用户生成的标签可以为“模仿新手”;在模拟相似度大于或等于50%,且小于80%时,则为目标用户生成的标签可以为“模仿高手”;在模拟相似度大于或等于80%时,则为目标用户生成的标签可以为“模仿王者”。
参见图2B所示的一种显示设备的界面示意图,图2B中显示有用户模拟图像、目标对象的图像、模拟相似度、模拟标识和生成的标签,生成的标签即为图中的“模拟高手”。
本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于相同的构思,本公开实施例还提供了一种姿态检测的装置,参见图3所示,为本公开实施例提供的一种姿态检测的装置的架构示意图,包括获取模块301、提取模块302、确定模块303、第一展示模块304、计算模块305、第二展示模块306、以及第三展示模块307,具体的:
获取模块301,用于获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像;
提取模块302,用于从所述用户模仿图像中提取所述目标用户的模仿姿态信息;
确定模块303,用于基于所述模仿姿态信息和所述目标对象的姿态信息,确定所述目标用户的模仿相似度;
第一展示模块304,用于展示所述模仿相似度。
一种可能的实施方式中,所述获取模块301,在获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像时,用于:
连续获取所述目标用户模仿目标对象姿态的用户模仿图像;
所述第一展示模块304,在展示所述模仿相似度时,用于:
连续更新展示所述模仿相似度。
一种可能的实施方式中,所述装置还包括:
计算模块305,用于建立与所述目标对象对应的虚拟三维模型,其中所述虚拟三维模型的姿态与所述目标对象的姿态相同,计算所述虚拟三维模型对应的多种姿态特征信息,将所述虚拟三维模型的多种姿态特征信息作为所述目标对象的姿态信息进行存储;
所述确定模块303,在基于所述模仿姿态信息和所述目标对象的姿态信息,确定所述目标用户的模仿相似度时,用于:
基于所述模仿姿态信息在多种姿态特征下的特征信息,以及预先存储的所述虚拟三维模型的多种姿态特征信息,确定所述目标用户的模仿相似度。
一种可能的实施方式中,所述确定模块303,在基于所述模仿姿态信息在多种姿态特征下的特征信息,以及预先存储的所述虚拟三维模型的多种姿态特征信息,确定所述目标用户的模仿相似度时,用于:
基于所述多种姿态特征分别对应的权重,以及所述模仿姿态信息与所述虚拟三维模型在每种姿态特征下的特征信息相似度,确定所述目标用户的模仿相似度。
一种可能的实施方式中,在获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像之前,包括:
第二展示模块306,用于响应目标用户的预设触发操作,控制与所述目标检测区域对应的显示设备展示存储的至少一个目标对象的图像。
一种可能的实施方式中,在获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像之前,包括:
第三展示模块307,用于在展示的目标对象为多个的情况下,响应目标用户触发的对象选择操作,控制与所述目标检测区域对应的显示设备展示目标用户选择的目标对象的图像,以便所述目标用户对所述显示设备展示的所述目标对象进行模仿。
一种可能的实施方式中,所述获取模块301,在获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像时,用于:
在接收到目标用户触发的模仿请求,或者,检测到预设区域存在目标用户之后,获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像。
在一些实施例中,本公开实施例提供的装置具有的功能或包含的模板可以用于执行上文方法实施例描述的方法,其具体实现可以参照上文方法实施例的描述,为了简洁,这里不再赘述。
基于同一技术构思,本公开实施例还提供了一种电子设备。参照图4所示,为本公开实施例提供的电子设备的结构示意图,包括处理器401、存储器402、和总线403。其中,存储器402用于存储执行指令,包括内存4021和外部存储器4022;这里的内存4021也称内存储器,用于暂时存放处理器401中的运算数据,以及与硬盘等外部存储器4022交换的数据,处理器401通过内存4021与外部存储器4022进行数据交换,当电子设备400运行时,处理器401与存储器402之间通过总线403通信,使得处理器401在执行以下指令:
获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像;
从所述用户模仿图像中提取所述目标用户的模仿姿态信息;
基于所述模仿姿态信息和所述目标对象的姿态信息,确定所述目标用户的模仿相似度;
展示所述模仿相似度。
此外,本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述方法实施例中所述的姿态检测的方法的步骤。
本公开实施例所提供的姿态检测的方法的计算机程序产品,包括存储了程序代码的计算机可读存储介质,所述程序代码包括的指令可用于执行上述方法实施例中所述的姿态检测的方法的步骤,具体可参见上述方法实施例,在此不再赘述。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。在本公开所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本公开各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上仅为本公开的具体实施方式,但本公开的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种姿态检测的方法,其特征在于,包括:
获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像;
从所述用户模仿图像中提取所述目标用户的模仿姿态信息;
基于所述模仿姿态信息和所述目标对象的姿态信息,确定所述目标用户的模仿相似度;
展示所述模仿相似度。
2.根据权利要求1所述的方法,其特征在于,获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像,包括:
连续获取所述目标用户模仿目标对象姿态的用户模仿图像;
展示所述模仿相似度,包括:
连续更新展示所述模仿相似度。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
建立与所述目标对象对应的虚拟三维模型,其中所述虚拟三维模型的姿态与所述目标对象的姿态相同,计算所述虚拟三维模型对应的多种姿态特征信息,将所述虚拟三维模型的多种姿态特征信息作为所述目标对象的姿态信息进行存储;
基于所述模仿姿态信息和所述目标对象的姿态信息,确定所述目标用户的模仿相似度,包括:
基于所述模仿姿态信息在多种姿态特征下的特征信息,以及预先存储的所述虚拟三维模型的多种姿态特征信息,确定所述目标用户的模仿相似度。
4.根据权利要求3所述的方法,其特征在于,基于所述模仿姿态信息在多种姿态特征下的特征信息,以及预先存储的所述虚拟三维模型的多种姿态特征信息,确定所述目标用户的模仿相似度,包括:
基于所述多种姿态特征分别对应的权重,以及所述模仿姿态信息与所述虚拟三维模型在每种姿态特征下的特征信息相似度,确定所述目标用户的模仿相似度。
5.根据权利要求1所述的方法,其特征在于,在获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像之前,包括:
响应目标用户的预设触发操作,控制与所述目标检测区域对应的显示设备展示存储的至少一个目标对象的图像。
6.根据权利要求1所述的方法,其特征在于,在获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像之前,包括:
在展示的目标对象为多个的情况下,响应目标用户触发的对象选择操作,控制与所述目标检测区域对应的显示设备展示目标用户选择的目标对象的图像,以便所述目标用户对所述显示设备展示的所述目标对象进行模仿。
7.根据权利要求1所述的方法,其特征在于,获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像,包括:
在接收到目标用户触发的模仿请求,或者,检测到预设区域存在目标用户之后,获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像。
8.一种姿态检测的装置,其特征在于,包括:
获取模块,用于获取位于目标检测区域内的目标用户模仿目标对象姿态的用户模仿图像;
提取模块,用于从所述用户模仿图像中提取所述目标用户的模仿姿态信息;
确定模块,用于基于所述模仿姿态信息和所述目标对象的姿态信息,确定所述目标用户的模仿相似度;
第一展示模块,用于展示所述模仿相似度。
9.一种电子设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如权利要求1至7任一所述的姿态检测的方法的步骤。
10.一种计算机可读存储介质,其特征在于,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如权利要求1至7任一所述的姿态检测的方法的步骤。
CN202010485832.2A 2020-06-01 2020-06-01 姿态检测的方法、装置、电子设备及存储介质 Pending CN111626247A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010485832.2A CN111626247A (zh) 2020-06-01 2020-06-01 姿态检测的方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010485832.2A CN111626247A (zh) 2020-06-01 2020-06-01 姿态检测的方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN111626247A true CN111626247A (zh) 2020-09-04

Family

ID=72272055

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010485832.2A Pending CN111626247A (zh) 2020-06-01 2020-06-01 姿态检测的方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN111626247A (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106020440A (zh) * 2016-05-05 2016-10-12 西安电子科技大学 一种基于体感交互的京剧教学系统
CN107038455A (zh) * 2017-03-22 2017-08-11 腾讯科技(深圳)有限公司 一种图像处理方法及装置
JP2019211850A (ja) * 2018-05-31 2019-12-12 株式会社日立製作所 骨格検出装置、及び骨格検出方法
CN111178311A (zh) * 2020-01-02 2020-05-19 京东方科技集团股份有限公司 拍照辅助方法及终端设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106020440A (zh) * 2016-05-05 2016-10-12 西安电子科技大学 一种基于体感交互的京剧教学系统
CN107038455A (zh) * 2017-03-22 2017-08-11 腾讯科技(深圳)有限公司 一种图像处理方法及装置
JP2019211850A (ja) * 2018-05-31 2019-12-12 株式会社日立製作所 骨格検出装置、及び骨格検出方法
CN111178311A (zh) * 2020-01-02 2020-05-19 京东方科技集团股份有限公司 拍照辅助方法及终端设备

Similar Documents

Publication Publication Date Title
US11688118B2 (en) Time-dependent client inactivity indicia in a multi-user animation environment
KR101519775B1 (ko) 오브젝트의 모션 인식 기반 애니메이션 생성 방법 및 장치
CN104461318B (zh) 基于增强现实技术的点读方法及系统
CN105094335B (zh) 场景提取方法、物体定位方法及其系统
CN105279795B (zh) 基于3d标记的增强现实系统
CN111639612A (zh) 姿态矫正的方法、装置、电子设备及存储介质
CN113559518B (zh) 虚拟模型的交互检测方法、装置、电子设备及存储介质
JP2022505998A (ja) 拡張現実データの提示方法、装置、電子機器及び記憶媒体
CN113440846A (zh) 游戏的显示控制方法、装置、存储介质及电子设备
KR20110110379A (ko) 카메라를 이용한 카드 게임 시스템
CN111651057A (zh) 一种数据展示方法、装置、电子设备及存储介质
CN109395387A (zh) 三维模型的显示方法、装置、存储介质及电子装置
KR102396390B1 (ko) 증강 현실 기반의 3차원 조립 퍼즐을 제공하는 방법 및 단말
CN205039917U (zh) 基于cave系统的海底世界模拟系统
KR20180028764A (ko) 증강현실을 이용한 유아 학습 장치 및 방법
US20230162458A1 (en) Information processing apparatus, information processing method, and program
Mihaľov et al. Potential of low cost motion sensors compared to programming environments
CN111773669B (zh) 一种在虚拟环境中生成虚拟对象方法及装置
CN116912463A (zh) 3d虚拟形象处理方法、装置、电子设备和可读存储介质
CN111626247A (zh) 姿态检测的方法、装置、电子设备及存储介质
CN110741327B (zh) 基于增强现实及数字图像处理的泥胶玩具系统及其方法
CN111625103A (zh) 雕塑展示方法、装置、电子设备及存储介质
Aleksandrovich et al. Information system development using augmented reality tools
Windasari et al. Marker Image Variables Measurement of Augmented Reality in Mobile Application
Mentzelopoulos et al. Hardware interfaces for VR applications: evaluation on prototypes

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination