CN114115530A - 虚拟对象控制方法、装置、电子设备及存储介质 - Google Patents

虚拟对象控制方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN114115530A
CN114115530A CN202111313707.4A CN202111313707A CN114115530A CN 114115530 A CN114115530 A CN 114115530A CN 202111313707 A CN202111313707 A CN 202111313707A CN 114115530 A CN114115530 A CN 114115530A
Authority
CN
China
Prior art keywords
information
target
limb
virtual object
moment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111313707.4A
Other languages
English (en)
Inventor
宋杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Leiniao Network Media Co ltd
Original Assignee
Shenzhen Leiniao Network Media Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Leiniao Network Media Co ltd filed Critical Shenzhen Leiniao Network Media Co ltd
Priority to CN202111313707.4A priority Critical patent/CN114115530A/zh
Publication of CN114115530A publication Critical patent/CN114115530A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods

Abstract

本申请实施例公开了一种虚拟对象控制方法、装置、电子设备及存储介质,该方法包括:获取当前时刻图像信息;当当前时刻图像信息中包含有目标标识信息时,获取目标时间段的至少一个目标时刻图像信息;根据目标标识信息,从至少一个目标时刻图像信息中提取出目标肢体轨迹信息;根据目标肢体轨迹信息控制目标虚拟对象。通过在虚拟对象控制操作前对标识信息进行检测,并在标识信息检测成功后才进行虚拟对象控制操作的执行,使虚拟对象的控制保持在安全隐私的操作环境,提升虚拟对象控制过程的安全性。同时,在标识信息检测成功后才进行虚拟对象控制过程的图像获取和识别,可减少不必要信息的获取,降低设备内存和运算负担。

Description

虚拟对象控制方法、装置、电子设备及存储介质
技术领域
本申请实施例涉及计算机技术领域,具体涉及一种虚拟对象控制方法、装置、电子设备及存储介质,该存储介质即为计算机可读存储介质。
背景技术
随着计算机技术的发展,对虚拟对象的控制方法也越来越多样,例如,可以根据人体或者物体的运动轨迹对虚拟对象进行控制,实现对虚拟对象的远程智能控制,提升用户体验。
但是,目前对虚拟对象的控制过程隐私性较差,安全性较低。
发明内容
本申请实施例提供一种虚拟对象控制方法、装置、电子设备及存储介质,可以为虚拟对象控制过程提供安全操作环境,提升虚拟对象控制过程的安全性。
第一方面,本申请实施例提供了一种虚拟对象控制方法,包括:
获取当前时刻图像信息;
当当前时刻图像信息中包含有目标标识信息时,获取目标时间段的至少一个目标时刻图像信息;
根据目标标识信息,从至少一个目标时刻图像信息中提取出目标肢体轨迹信息;
根据目标肢体轨迹信息控制目标虚拟对象。
第二方面,本申请实施例还提供了一种虚拟对象控制装置,包括:
获取模块,用于获取当前时刻图像信息;
识别模块,用于当当前时刻图像信息中包含有目标标识信息时,获取目标时间段的至少一个目标时刻图像信息;
提取模块,用于根据目标标识信息,从至少一个目标时刻图像信息中提取出目标肢体轨迹信息;
控制模块,用于根据目标肢体轨迹信息控制目标虚拟对象。
第三方面,本申请实施例还提供了一种电子设备,电子设备包括存储器、处理器及存储在存储器中并可在处理器上运行的计算机程序,处理器执行计算机程序时实现上述的虚拟对象控制方法中的步骤。
第四方面,本申请实施例还提供了一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,计算机程序被处理器执行时实现上述的虚拟对象控制方法中的步骤。
本申请实施例通过在虚拟对象控制操作前对标识信息进行检测,并在标识信息检测成功后才进行虚拟对象控制操作的执行,使虚拟对象的控制保持在安全隐私的操作环境,提升虚拟对象控制过程的安全性。同时,在标识信息检测成功后才进行虚拟对象控制过程的图像获取和识别,可减少不必要信息的获取,降低设备内存和运算负担。
附图说明
为了更清楚地说明本申请中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的虚拟对象控制方法的场景示意图;
图2是本申请实施例提供的虚拟对象控制方法的流程示意图;
图3是本申请实施例提供的虚拟对象控制方法中虚拟对象控制过程的流程示意图;
图4是本申请实施例提供的虚拟对象控制装置的结构示意图;
图5是本申请实施例提供的电子设备的结构示意图。
具体实施方式
下面将结合本申请中的附图,对本申请中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本申请实施例提供一种虚拟对象控制方法、装置、电子设备及存储介质。具体地,本申请实施例提供适用于电子设备的虚拟对象控制装置,其中,电子设备可以为终端或服务器等设备。其中,终端可以为摄像机、高清摄像头、录像机、手机、电视或者计算机等设备。服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、内容分发网络(CDN,Content Delivery Network)、以及大数据和人工智能平台等基础云计算服务的云服务器,服务器可以通过有线或无线通信方式进行直接或间接地连接。
本申请实施例可以单独由终端执行虚拟对象控制方法,或者是单独由服务器执行虚拟对象控制方法,或者是终端和服务器共同执行虚拟对象控制方法,请参阅图1,以终端和服务器共同执行虚拟对象控制方法为例,其中,在终端和服务器的基础上也可以增加其他设备来辅助完成虚拟对象控制方法,在此对其他设备的类型不做限定;终端与服务器之间通过网络连接,比如,通过有线或无线网络连接等,具体执行过程如下:
终端设备10启动图像采集功能,对当前时刻图像信息进行获取,并将获取到的当前时刻图像信息发送给服务器11,由服务器11对图像中的标识信息进行识别检测;
服务器11在接收到终端设备10发送过来的图像信息后,对图像信息中是否包含目标标识信息进行检测,并在检测到图像信息中包含有目标标识信息后,向终端设备10返回获取到目标标识的信号;
终端设备10在接收到服务器11发送的获取到目标标识的信号后,进行目标时间段的多个图像信息的获取;并将获取到的多个图像信息发送给服务器11;
服务器11在接收到终端设备10发送过来的多个图像信息后,从多个图像信息中提取出目标肢体轨迹信息,并将目标肢体轨迹信息发送给终端设备12,使得能够根据目标肢体轨迹信息对终端设备12内的虚拟对象进行控制。
其中,在本申请实施例中,目标标识信息包括预设人脸信息,通过对目标标识信息的检测,可以判断出用户的身份;在身份信息识别通过后才进行手势识别过程的进行,确保手势识别的过程处于一个安全隐私的环境,提高虚拟对象控制的安全性。
其中,在本申请实施例中,可以从多个图像信息中获取到目标肢体的位置信息,根据各个位置信息确定目标肢体的轨迹信息,其中,在本申请实施例中,肢体可以包括手,使得用户可以根据手的轨迹信息对虚拟对象进行控制。
其中,在本申请实施例中,还可以根据轨迹信息与控制指令之间的关联关系,来确定各个轨迹信息对应的控制指令,以能够根据控制指令对虚拟对象进行控制,实现用户肢体对虚拟对象的遥控。
本申请实施例提供一种虚拟对象控制方法,具体如下:
获取当前时刻图像信息。
其中,当前时刻图像信息可以根据摄像头等设备进行采集后获取,其中,在本申请实施例中,通过对当前时刻图像信息的获取,便于实现对当前时刻的标识信息的检测,例如,通过对图像中的标识信息的识别或者检测来确定图像中是否包含有目标标识信息。
当当前时刻图像信息中包含有目标标识信息时,获取目标时间段的至少一个目标时刻图像信息。
其中,目标时间段的多个时刻图像信息用于提取用户的肢体轨迹信息,即开始进入手势识别和虚拟对象控制阶段,而在当前时刻图像信息中包含有目标标识信息后才进行目标时间段的多个时刻图像信息的获取,使得手势识别和虚拟对象控制过程能够在一个安全隐私的环境进行,提升虚拟对象控制过程的安全性。
根据目标标识信息,从至少一个目标时刻图像信息中提取出目标肢体轨迹信息。
其中,通过获取目标肢体轨迹信息,便于根据肢体轨迹信息确定用户期望的控制操作,便于实现对虚拟对象的准确控制,提升用户体验。
根据目标肢体轨迹信息控制目标虚拟对象。
其中,可以根据肢体轨迹信息确定相应的控制指令,根据控制指令实现对虚拟对象的控制。
本申请实施例通过在虚拟对象控制操作前对标识信息进行检测,并在标识信息检测成功后才进行虚拟对象控制操作的执行,使虚拟对象的控制保持在安全隐私的操作环境,提升虚拟对象控制过程的安全性。同时,在标识信息检测成功后才进行虚拟对象控制过程的图像获取和识别,可减少不必要信息的获取,降低设备内存和运算负担。
以下分别进行详细说明。需说明的是,以下实施例的描述顺序不作为对实施例优先顺序的限定。
请参阅图2,图2为本申请实施例提供的虚拟对象控制方法的流程示意图。该虚拟对象控制方法的具体流程可以如下:
101、获取当前时刻图像信息。
其中,在本申请实施例中,可以通过摄像头等设备对当前时刻检测范围内的图像信息进行采集和获取,实现对当前时刻图像信息的获取。
其中,在本申请实施例中,还可以从当前时刻的多个连续视频帧图像中筛选出清晰度较高的图像,作为当前时刻图像信息,以提高目标标识信息检测的准确性。
102、当当前时刻图像信息中包含有目标标识信息时,获取目标时间段的至少一个目标时刻图像信息。
其中,在本申请实施例中,目标标识信息包括预设人脸信息,通过对图像信息中是否包含预设人脸信息的检测识别,实现对用户群体中目标用户的检测。
其中,在目标用户检测成功后才进行未来时刻的多个图像信息的获取,可减少不必要的图像信息的获取,减少内存的占用和降低流程的复杂性;同时,在目标用户识别通过后才进行手势识别和虚拟对象控制的操作,为虚拟对象的控制提供安全隐私的环境。
103、根据目标标识信息,从至少一个目标时刻图像信息中提取出目标肢体轨迹信息。
其中,通过结合目标标识对目标肢体轨迹信息进行获取,可以实现对目标用户的肢体轨迹信息的获取,确保只有目标用户才能进行虚拟对象控制操作的执行,提升肢体轨迹信息获取的准确性。
其中,在本申请实施例中,可以通过各个图像中的目标肢体的位置信息,来确定目标肢体在目标时间段内的轨迹信息,即,可选的,在一些实施例中,步骤“根据目标标识信息,从至少一个目标时刻图像信息中提取出目标肢体轨迹信息”,包括:
根据目标标识信息,确定目标肢体信息;
根据目标肢体信息,从目标时刻图像信息中获取至少一个目标肢体位置信息;
根据至少一个目标肢体位置信息,得到目标肢体轨迹信息。
其中,通过目标标识,可以从用户群体中筛选出需要采集的对象(目标肢体,例如从多个用户中筛选出目标用户的肢体),其中,在本申请实施例中,目标肢体可以包括目标用户的手。
其中,通过识别各个图像中目标肢体的位置信息,可以根据各个位置信息确定出目标肢体的轨迹信息,实现从各个图像中提取出目标肢体的轨迹信息。其中,在本申请实施例中,目标肢体的位置信息包括目标肢体在图像中的坐标信息。
其中,手部在运动过程中可以有多个手势(例如手部展开或者收缩,或者仅有食指伸出等),因此,可以根据手势对各个图像中的位置信息进行筛选,确定出有效的肢体位置信息,即,可选的,在一些实施例中,步骤“根据目标肢体信息,从目标时刻图像信息中获取至少一个目标肢体位置信息”,包括:
根据目标肢体信息,识别出每个目标时刻图像信息对应的实际肢体姿态信息;
根据预设肢体姿态条件信息,从实际肢体姿态信息中筛选出至少一个有效肢体姿态信息;
将有效肢体姿态信息对应的实际肢体位置信息确定为目标肢体位置信息。
其中,通过预设肢体姿态条件对实际肢体姿态信息的筛选,可以选择出有效的肢体姿态信息,然后,将有效肢体姿态信息对应的位置信息确定为目标肢体的位置信息,可以提高肢体信息获取的有效性。例如,在本申请实施例中,只有特定的手势(即预设的手势可以进行虚拟对象控制的手势)才能进行虚拟对象的控制,因此,可以根据手势筛选出有效的肢体位置信息。
其中,在本申请实施例中,由于在虚拟对象控制过程中,手部轨迹是一个短暂时间内的手部位置信息,因此,为提高虚拟对象控制的准确性,可以将每个轨迹的手势设置为特定的,即整个轨迹过程中手势保持不变,因此,还可以根据相邻时刻的肢体姿态信息是否一致来筛选出目标肢体姿态信息,即,可选的,在一些实施例中,步骤“将有效肢体姿态信息对应的实际肢体位置信息确定为目标肢体位置信息”,包括:
对相邻时刻的两个有效肢体姿态信息进行一致性检测;
根据一致性检测的结果,从有效肢体姿态信息中筛选出至少一个目标肢体姿态信息;
将目标肢体姿态信息对应的实际肢体位置信息确定为目标肢体位置信息。
其中,通过相邻时刻的肢体姿态信息是否一致来进行目标肢体位置信息的筛选,可以提高肢体位置信息获取的准确性,例如,将肢体姿态信息一致情况下的肢体位置信息确定为目标肢体位置信息。
其中,由于用户在操作过程中会改变意图,或者调整手势,因此,为提高肢体轨迹信息获取的准确性和有效性,可以将手势变化后的轨迹信息确定为用户的目标肢体轨迹信息,即,可选的,在一些实施例中,相邻时刻包括第一时刻和第二时刻,步骤“根据一致性检测结果,从有效肢体姿态信息中筛选出至少一个目标肢体姿态信息”,包括:
当第一时刻的有效肢体姿态信息与第二时刻的有效肢体姿态信息不一致时,将第二时刻的有效肢体姿态信息确定为目标肢体姿态信息;
当第一时刻的有效肢体姿态信息与第二时刻的有效肢体姿态信息一致时,将第一时刻的有效肢体姿态信息和第二时刻的有效肢体姿态信息分别确定为目标肢体姿态信息。
其中,通过将姿态信息变化后的肢体轨迹信息确定为目标肢体轨迹信息,可以提高肢体轨迹信息获取的准确性和有效性,满足用户操作意图转变的需求。
例如,请参阅图3,图3是本申请实施例中虚拟对象控制的流程示意图,具体如下:
111、对当前时刻的图像信息进行采集;
112、对采集到的当前时刻的图像信息中的人脸信息进行识别(人脸识别),识别通过则执行步骤113,反之,则执行步骤122;
113、对目标时间段的多个图像进行采集,得到多张目标时刻图像信息,并分别对每个目标时刻图像进行预处理(包括对图像进行二值化处理);
114、从预处理后的图像中提取肢体姿态信息(例如手势信息),得到每个目标时刻图像对应的肢体姿态信息;
115、将每个图像对应的肢体姿态信息分别与预设姿态信息进行匹配(肢体姿态匹配),如果匹配通过,则执行步骤116,反之,则执行步骤122;
116、记录肢体位置信息;
117、判断相邻时刻肢体姿态信息是否一致(一致性判断),如果一致,则执行步骤118,反之,则执行步骤123;
118、记录各个目标时刻图像对应的肢体位置信息和肢体姿态信息,并判断是否能够形成手势指令(是否生成手势指令),如果否,则执行步骤119,如果是,则执行步骤120;
119、判断是否形成移动轨迹(轨迹生成判断),如果是,则根据移动轨迹确定对应的手势指令,则执行步骤120,反之,则执行步骤121;
120、输出手势指令,根据手势指令控制虚拟对象;
121、保存肢体位置信息;
122、删除该目标图像信息;
123、保留后一时刻的肢体姿态信息及肢体位置信息,删除前一时刻及前一时刻之前的肢体姿态信息及肢体位置信息;
124、结束流程。
通过在肢体轨迹信息获取之前进行人脸识别,为手势识别和虚拟对象的控制提供安全的操作环境,并通过对图像中肢体姿态信息和肢体轨迹信息的识别和获取,提高了肢体轨迹信息获取的准确性和有效性。
104、根据目标肢体轨迹信息控制目标虚拟对象。
其中,通过肢体轨迹信息控制虚拟对象,实现利用肢体对虚拟对象远程操控的功能。其中,轨迹的变化带来控制操作的变化,实现对虚拟对象的遥控。
其中,在本申请实施例中,为提升虚拟对象控制的多样性,可以根据不同的手势和轨迹对虚拟对象进行控制,即,可选的,在一些实施例中,步骤“根据目标肢体轨迹信息控制目标虚拟对象”,包括:
确定目标肢体轨迹信息对应的肢体姿态信息;
根据肢体姿态信息和目标肢体轨迹信息控制目标虚拟对象。
其中,通过肢体轨迹信息以及肢体姿态信息对虚拟对象的控制,提高了虚拟对象控制的准确性。例如,同一肢体轨迹下,不同的手势对应不同的控制策略。
其中,在本申请实施例中,可以根据肢体姿态、肢体轨迹以及控制指令之间的关联关系,确定识别出的肢体姿态以及肢体轨迹对应的控制指令,即,可选的,在一些实施例中,步骤“根据肢体姿态信息和目标肢体轨迹信息控制目标虚拟对象”,包括:
根据预置控制策略,确定肢体姿态信息和肢体轨迹信息对应的控制指令;
根据控制指令控制目标虚拟对象。
其中,在本申请实施例中,该预测控制策略可以包含肢体姿态信息、肢体轨迹信息以及控制指令之间的映射关系,其中,该映射关系可以根据实际需要或者用户的操作习惯进行自定义配置。
例如,在本申请实施例中,可以通过连续两次拍掌动作控制手势操控启动、双手交叉动作控制手势操控结束、单手滑动(向左、向右、向上或向下)实现界面焦点移动、食指连续两次点击动作实现确定选中、单手做缩小动作实现推出功能等。
本申请实施例通过在虚拟对象控制操作前对标识信息进行检测,并在标识信息检测成功后才进行虚拟对象控制操作的执行,使虚拟对象的控制保持在安全隐私的操作环境,提升虚拟对象控制过程的安全性。同时,在标识信息检测成功后才进行虚拟对象控制过程的图像获取和识别,可减少不必要信息的获取,降低设备内存和运算负担。其中,通过肢体的姿态(例如,手势)以及肢体轨迹信息对虚拟对象的控制,可以提升虚拟对象控制的准确性,而同一肢体轨迹中不同的肢体姿态对应不同的控制指令,提升了虚拟对象控制的多样性。
为便于更好的实施本申请的虚拟对象控制方法,本申请还提供一种基于上述虚拟对象控制方法的虚拟对象控制装置。其中名词的含义与上述虚拟对象控制方法中相同,具体实现细节可以参考方法实施例中的说明。
请参阅图4,图4为本申请提供的虚拟对象控制装置的结构示意图,其中该虚拟对象控制装置可以包括获取模块201、识别模块202、提取模块203和控制模块204,具体可以如下:
获取模块201,用于获取当前时刻图像信息。
识别模块202,用于当当前时刻图像信息中包含有目标标识信息时,获取目标时间段的至少一个目标时刻图像信息。
提取模块203,用于根据目标标识信息,从至少一个目标时刻图像信息中提取出目标肢体轨迹信息。
可选的,在本申请的一些实施例中,提取模块203包括:
第一确定单元,用于根据目标标识信息,确定目标肢体信息;
获取单元,用于根据目标肢体信息,从目标时刻图像信息中获取至少一个目标肢体位置信息;
生成单元,用于根据至少一个目标肢体位置信息,得到目标肢体轨迹信息。
其中,获取单元包括:
识别子单元,用于根据目标肢体信息,识别出每个目标时刻图像信息对应的实际肢体姿态信息;
筛选子单元,用于根据预设肢体姿态条件信息,从实际肢体姿态信息中筛选出至少一个有效肢体姿态信息;
第一确定子单元,用于将有效肢体姿态信息对应的实际肢体位置信息确定为目标肢体位置信息。
其中,确定子单元具体用于:
对相邻时刻的两个有效肢体姿态信息进行一致性检测;
根据一致性检测的结果,从有效肢体姿态信息中筛选出至少一个目标肢体姿态信息;
将目标肢体姿态信息对应的实际肢体位置信息确定为目标肢体位置信息。
其中,相邻时刻包括第一时刻和第二时刻,确定子单元具体用于:
当第一时刻的有效肢体姿态信息与第二时刻的有效肢体姿态信息不一致时,将第二时刻的有效肢体姿态信息确定为目标肢体姿态信息;
当第一时刻的有效肢体姿态信息与第二时刻的有效肢体姿态信息一致时,将第一时刻的有效肢体姿态信息和第二时刻的有效肢体姿态信息分别确定为目标肢体姿态信息。
控制模块204,用于根据目标肢体轨迹信息控制目标虚拟对象。
其中,控制模块204包括:
第二确定单元,用于确定目标肢体轨迹信息对应的肢体姿态信息;
控制单元,用于根据肢体姿态信息和目标肢体轨迹信息控制目标虚拟对象。
其中,控制单元包括:
第二确定子单元,用于根据预置控制策略,确定肢体姿态信息和肢体轨迹信息对应的控制指令;
控制子单元,用于根据控制指令控制目标虚拟对象。
本申请实施例首先由获取模块201获取当前时刻的图像信息,接着,由识别模块202对当前时刻的图像信息进行检测,并在图像中检测到有目标标识信息后,才获取目标时间段的多个图像信息,然后,由提取模块203从多个图像信息中提取出目标肢体的轨迹信息,随后,由控制模块204根据肢体轨迹信息对虚拟对象进行控制。
其中,本申请实施例通过在虚拟对象控制操作前对标识信息进行检测,并在标识信息检测成功后才进行虚拟对象控制操作的执行,使虚拟对象的控制保持在安全隐私的操作环境,提升虚拟对象控制过程的安全性。同时,在标识信息检测成功后才进行虚拟对象控制过程的图像获取和识别,可减少不必要信息的获取,降低设备内存和运算负担。其中,通过肢体的姿态(如手势)以及肢体轨迹信息对虚拟对象的控制,可以提升虚拟对象控制的准确性,而同一肢体轨迹中不同的肢体姿态对应不同的控制指令,提升了虚拟对象控制的多样性。
此外,本申请实施例还提供一种电子设备,如图5所示,其示出了本申请所涉及的电子设备的结构示意图,具体来讲:
该电子设备可以包括一个或者一个以上处理核心的处理器401、一个或一个以上计算机可读存储介质的存储器402、电源403和输入单元404等部件。本领域技术人员可以理解,图5中示出的电子设备结构并不构成对电子设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:
处理器401是该电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器402内的软件程序和/或模块,以及调用存储在存储器402内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。可选的,处理器401可包括一个或多个处理核心;优选的,处理器401可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器401中。
存储器402可用于存储软件程序以及模块,处理器401通过运行存储在存储器402的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器402可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据电子设备的使用所创建的数据等。此外,存储器402可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器402还可以包括存储器控制器,以提供处理器401对存储器402的访问。
电子设备还包括给各个部件供电的电源403,优选的,电源403可以通过电源管理系统与处理器401逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源403还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
该电子设备还可包括输入单元404,该输入单元404可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
尽管未示出,电子设备还可以包括显示单元等,在此不再赘述。具体在本实施例中,电子设备中的处理器401会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器402中,并由处理器401来运行存储在存储器402中的应用程序,从而实现本申请所提供的任一种虚拟对象控制方法中的步骤。
本申请实施例通过在虚拟对象控制操作前对标识信息进行检测,并在标识信息检测成功后才进行虚拟对象控制操作的执行,使虚拟对象的控制保持在安全隐私的操作环境,提升虚拟对象控制过程的安全性。同时,在标识信息检测成功后才进行虚拟对象控制过程的图像获取和识别,可减少不必要信息的获取,降低设备内存和运算负担。其中,通过肢体的姿态(例如,手势)以及肢体轨迹信息对虚拟对象的控制,可以提升虚拟对象控制的准确性,而同一肢体轨迹中不同的肢体姿态对应不同的控制指令,提升了虚拟对象控制的多样性。
本领域普通技术人员可以理解,上述实施例的各种方法中的全部或部分步骤可以通过指令来完成,或通过指令控制相关的硬件来完成,该指令可以存储于一计算机可读存储介质中,并由处理器进行加载和执行。
为此,本申请实施例提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序能够被处理器进行加载,以执行本申请所提供的任一种虚拟对象控制方法中的步骤。
其中,该存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)、磁盘或光盘等。
由于该存储介质中所存储的指令,可以执行本申请所提供的任一种虚拟对象控制中的步骤,因此,可以实现本申请所提供的任一种虚拟对象控制方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
以上对本申请所提供的一种虚拟对象控制方法、装置、电子设备以及计算机可读存储介质进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上,本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种虚拟对象控制方法,其特征在于,包括:
获取当前时刻图像信息;
当所述当前时刻图像信息中包含有目标标识信息时,获取目标时间段的至少一个目标时刻图像信息;
根据所述目标标识信息,从所述至少一个目标时刻图像信息中提取出目标肢体轨迹信息;
根据所述目标肢体轨迹信息控制目标虚拟对象。
2.根据权利要求1所述的方法,其特征在于,所述根据所述目标肢体轨迹信息控制目标虚拟对象,包括:
确定所述目标肢体轨迹信息对应的肢体姿态信息;
根据所述肢体姿态信息和所述目标肢体轨迹信息控制目标虚拟对象。
3.根据权利要求1所述的方法,其特征在于,所述根据所述目标标识信息,从所述至少一个目标时刻图像信息中提取出目标肢体轨迹信息,包括:
根据所述目标标识信息,确定目标肢体信息;
根据所述目标肢体信息,从所述目标时刻图像信息中获取至少一个目标肢体位置信息;
根据所述至少一个目标肢体位置信息,得到目标肢体轨迹信息。
4.根据权利要求3所述的方法,其特征在于,所述根据所述目标肢体信息,从所述目标时刻图像信息中获取至少一个目标肢体位置信息,包括:
根据所述目标肢体信息,识别出每个所述目标时刻图像信息对应的实际肢体姿态信息;
根据预设肢体姿态条件信息,从所述实际肢体姿态信息中筛选出至少一个有效肢体姿态信息;
将所述有效肢体姿态信息对应的实际肢体位置信息确定为目标肢体位置信息。
5.根据权利要求4所述的方法,其特征在于,所述将所述有效肢体姿态信息对应的实际肢体位置信息确定为目标肢体位置信息,包括:
对相邻时刻的两个有效肢体姿态信息进行一致性检测;
根据所述一致性检测的结果,从所述有效肢体姿态信息中筛选出至少一个目标肢体姿态信息;
将所述目标肢体姿态信息对应的实际肢体位置信息确定为目标肢体位置信息。
6.根据权利要求5所述的方法,其特征在于,所述相邻时刻包括第一时刻和第二时刻,所述根据所述一致性检测结果,从所述有效肢体姿态信息中筛选出至少一个目标肢体姿态信息,包括:
当所述第一时刻的有效肢体姿态信息与所述第二时刻的有效肢体姿态信息不一致时,将所述第二时刻的有效肢体姿态信息确定为目标肢体姿态信息;
当所述第一时刻的有效肢体姿态信息与所述第二时刻的有效肢体姿态信息一致时,将所述第一时刻的有效肢体姿态信息和所述第二时刻的有效肢体姿态信息分别确定为目标肢体姿态信息。
7.根据权利要求2所述的方法,其特征在于,所述根据所述肢体姿态信息和所述目标肢体轨迹信息控制目标虚拟对象,包括:
根据预置控制策略,确定所述肢体姿态信息和所述肢体轨迹信息对应的控制指令;
根据所述控制指令控制目标虚拟对象。
8.一种虚拟对象控制装置,其特征在于,包括:
获取模块,用于获取当前时刻图像信息;
识别模块,用于当所述当前时刻图像信息中包含有目标标识信息时,获取目标时间段的至少一个目标时刻图像信息;
提取模块,用于根据所述目标标识信息,从所述至少一个目标时刻图像信息中提取出目标肢体轨迹信息;
控制模块,用于根据所述目标肢体轨迹信息控制目标虚拟对象。
9.一种电子设备,其特征在于,所述电子设备包括存储器、处理器及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如权利要求1-7任一项所述的虚拟对象控制方法中的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1-7任一项所述的虚拟对象控制方法中的步骤。
CN202111313707.4A 2021-11-08 2021-11-08 虚拟对象控制方法、装置、电子设备及存储介质 Pending CN114115530A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111313707.4A CN114115530A (zh) 2021-11-08 2021-11-08 虚拟对象控制方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111313707.4A CN114115530A (zh) 2021-11-08 2021-11-08 虚拟对象控制方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN114115530A true CN114115530A (zh) 2022-03-01

Family

ID=80381305

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111313707.4A Pending CN114115530A (zh) 2021-11-08 2021-11-08 虚拟对象控制方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN114115530A (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105898346A (zh) * 2016-04-21 2016-08-24 联想(北京)有限公司 控制方法、电子设备及控制系统
CN108520552A (zh) * 2018-03-26 2018-09-11 广东欧珀移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN108519817A (zh) * 2018-03-26 2018-09-11 广东欧珀移动通信有限公司 基于增强现实的交互方法、装置、存储介质及电子设备
CN108563327A (zh) * 2018-03-26 2018-09-21 广东欧珀移动通信有限公司 增强现实方法、装置、存储介质及电子设备
CN111273777A (zh) * 2020-02-11 2020-06-12 Oppo广东移动通信有限公司 虚拟内容的控制方法、装置、电子设备及存储介质
CN111638795A (zh) * 2020-06-05 2020-09-08 上海商汤智能科技有限公司 一种控制虚拟对象展示状态的方法及装置
CN111639615A (zh) * 2020-06-05 2020-09-08 上海商汤智能科技有限公司 一种虚拟建筑物的触发控制方法及装置
CN111639611A (zh) * 2020-06-04 2020-09-08 上海商汤智能科技有限公司 一种历史文物的展示控制方法及装置
CN111694429A (zh) * 2020-06-08 2020-09-22 北京百度网讯科技有限公司 虚拟对象驱动方法、装置、电子设备及可读存储
CN113538302A (zh) * 2020-04-16 2021-10-22 腾讯科技(深圳)有限公司 虚拟物品展示方法、装置和计算机可读存储介质

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105898346A (zh) * 2016-04-21 2016-08-24 联想(北京)有限公司 控制方法、电子设备及控制系统
CN108520552A (zh) * 2018-03-26 2018-09-11 广东欧珀移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN108519817A (zh) * 2018-03-26 2018-09-11 广东欧珀移动通信有限公司 基于增强现实的交互方法、装置、存储介质及电子设备
CN108563327A (zh) * 2018-03-26 2018-09-21 广东欧珀移动通信有限公司 增强现实方法、装置、存储介质及电子设备
CN111273777A (zh) * 2020-02-11 2020-06-12 Oppo广东移动通信有限公司 虚拟内容的控制方法、装置、电子设备及存储介质
CN113538302A (zh) * 2020-04-16 2021-10-22 腾讯科技(深圳)有限公司 虚拟物品展示方法、装置和计算机可读存储介质
CN111639611A (zh) * 2020-06-04 2020-09-08 上海商汤智能科技有限公司 一种历史文物的展示控制方法及装置
CN111638795A (zh) * 2020-06-05 2020-09-08 上海商汤智能科技有限公司 一种控制虚拟对象展示状态的方法及装置
CN111639615A (zh) * 2020-06-05 2020-09-08 上海商汤智能科技有限公司 一种虚拟建筑物的触发控制方法及装置
CN111694429A (zh) * 2020-06-08 2020-09-22 北京百度网讯科技有限公司 虚拟对象驱动方法、装置、电子设备及可读存储

Similar Documents

Publication Publication Date Title
CN108255304B (zh) 基于增强现实的视频数据处理方法、装置和存储介质
CN107066983B (zh) 一种身份验证方法及装置
CN108525305B (zh) 图像处理方法、装置、存储介质及电子设备
CN109325456B (zh) 目标识别方法、装置、目标识别设备及存储介质
JP6986187B2 (ja) 人物識別方法、装置、電子デバイス、記憶媒体、及びプログラム
CN110947181A (zh) 游戏画面显示方法、装置、存储介质及电子设备
CN108616712B (zh) 一种基于摄像头的界面操作方法、装置、设备及存储介质
CN110703913A (zh) 对象交互方法和装置、存储介质及电子装置
CN112532885B (zh) 防抖方法、装置及电子设备
CN111273772A (zh) 基于slam测绘方法的增强现实交互方法、装置
CN112684887A (zh) 应用设备及其隔空手势识别方法
JP6948420B2 (ja) インタラクション方法、機器、システム、電子機器及び記憶媒体
CN112818733B (zh) 信息处理方法、装置、存储介质及终端
KR20200110257A (ko) 클라우드 서버 기반의 기계학습 관절정보 추출 시스템 및 그 방법
CN110955331A (zh) 一种基于计算机虚拟界面的人机交互系统
CN114115530A (zh) 虚拟对象控制方法、装置、电子设备及存储介质
CN106997449A (zh) 具有人脸识别功能的机器人和人脸识别方法
CN114299615A (zh) 基于关键点的多特征融合的动作识别方法、装置、介质及设备
CN114125226A (zh) 图像拍摄方法、装置、电子设备和可读存储介质
CN113347356A (zh) 拍摄方法、装置、电子设备及存储介质
CN113780291A (zh) 一种图像处理方法、装置、电子设备及存储介质
CN107704175B (zh) 一种图像收藏方法、装置及存储介质
CN114189641B (zh) 视频处理方法、装置、设备及存储介质
CN113840177B (zh) 直播互动方法、装置、存储介质与电子设备
CN113536270B (zh) 一种信息验证的方法、装置、计算机设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination