CN107911614B - 一种基于手势的图像拍摄方法、装置和存储介质 - Google Patents
一种基于手势的图像拍摄方法、装置和存储介质 Download PDFInfo
- Publication number
- CN107911614B CN107911614B CN201711422385.0A CN201711422385A CN107911614B CN 107911614 B CN107911614 B CN 107911614B CN 201711422385 A CN201711422385 A CN 201711422385A CN 107911614 B CN107911614 B CN 107911614B
- Authority
- CN
- China
- Prior art keywords
- image
- hand
- target
- mapping relations
- hand motion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/107—Static hand or arm
Landscapes
- Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明实施例公开了一种基于手势的图像拍摄方法、装置和存储介质；本发明实施例根据手势拍摄请求实时采集人物的实景图像；在实景图像中检测包含人物手部的手部图像区域；对手部图像区域中手部的动作进行识别，得到目标手部动作类别；当仅查找到第一映射关系时，基于目标手部动作类别与第一映射关系执行相应的目标图像拍摄操作；当查找到第一映射关系和第二映射关系时，基于目标手部动作类别和第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和第二映射关系执行相应的目标动效互动操作；展示拍摄结果。该方案可以提升图像拍摄的效率。
Description
技术领域
本发明涉及图像处理技术领域，具体涉及一种基于手势的图像拍摄方法、装置和存储介质。
背景技术
随着终端技术的发展，移动终端已经开始从以前简单地提供通话设备渐渐变成一个通用软件运行的平台。该平台不再以提供通话管理为主要目的，而是提供一个包括通话管理、游戏娱乐、办公记事、移动支付等各类应用程序在内的运行环境，随着大量的普及，已经深入至人们的生活、工作的方方面面。
目前图像处理应用程序的应用越来越广泛，用户可以在终端上安装图像处理应用，并通过图像处理应用拍摄图像或者对图像进行处理等。
然而，目前在利用图像处理应用拍摄图像时，需要用户手动对终端操作，以实现相应的图像拍摄操作。比如，在拍摄时，用户需要点击拍摄界面上的虚拟按钮触发图像拍摄。因此，图像拍摄的效率较低。
发明内容
本发明实施例提供一种基于手势的图像拍摄方法、装置和存储介质，可以提升图像拍摄的效率。
本发明实施例提供一种基于手势的图像拍摄方法，包括：
接收手势拍摄请求，并根据手势拍摄请求实时采集人物的实景图像；
在所述实景图像中检测包含所述人物手部的手部图像区域；
对所述手部图像区域中手部的动作进行识别，得到目标手部动作类别；
查找手部动作类别与图像拍摄操作之间的第一映射关系、以及与动效互动操作之间的第二映射关系；
当仅查找到所述第一映射关系时，基于所述目标手部动作类别与所述第一映射关系执行相应的目标图像拍摄操作；
当查找到所述第一映射关系和所述第二映射关系时，基于所述目标手部动作类别和所述第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和所述第二映射关系执行相应的目标动效互动操作；
展示拍摄结果。
相应的，本发明实施例还提供了一种基于手势的图像拍摄装置，包括：
图像采集单元，用于接收手势拍摄请求，并根据手势拍摄请求实时采集人物的实景图像；
检测单元，用于在所述实景图像中检测包含所述人物手部的手部图像区域；
识别单元，用于对所述手部图像区域中手部的动作进行识别，得到目标手部动作类别；
查找单元，用于查找手部动作类别与图像拍摄操作之间的第一映射关系、以及与动效互动操作之间的第二映射关系；
执行单元，用于当仅查找到所述第一映射关系时，基于所述目标手部动作类别与所述第一映射关系执行相应的目标图像拍摄操作；当查找到所述第一映射关系和所述第二映射关系时，基于所述目标手部动作类别和所述第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和所述第二映射关系执行相应的目标动效互动操作；
展示单元，用于展示拍摄结果。
相应的，本发明实施例还提供一种存储介质，所述存储介质存储有指令，所述指令被处理器执行时实现本发明实施例任一提供的基于手势的图像拍摄方法。
本发明实施例采用接收手势拍摄请求，并根据手势拍摄请求实时采集人物的实景图像；在实景图像中检测包含人物手部的手部图像区域；对手部图像区域中手部的动作进行识别，得到目标手部动作类别；查找手部动作类别与图像拍摄操作之间的第一映射关系、以及与动效互动操作之间的第二映射关系；当仅查找到第一映射关系时，基于目标手部动作类别与第一映射关系执行相应的目标图像拍摄操作；当查找到第一映射关系和第二映射关系时，基于目标手部动作类别和第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和第二映射关系执行相应的目标动效互动操作；展示拍摄结果。该方案可以基于用户的手部动作即手势自动触发相应的图像拍摄操作，比如，通过用户的手势触发拍摄等，无需用户手动操作，提升了图像拍摄的效率。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1a是本发明实施例提供的信息交互系统的场景示意图；
图1b是本发明实施例提供的图像拍摄方法的流程示意图；
图1c是本发明实施例提供的手部定位示意图；
图1d是本发明实施例提供的手势分类示意图；
图1e是本发明实施例提供的手势触发拍摄的示意图；
图2a是本发明实施例提供的图像拍摄方法的另一流程示意图；
图2b是本发明实施例提供的基于手势的实现相机互动的示意图；
图2c是本发明实施例提供的手势触发录制的示意图；
图2d是本发明实施例提供的基于手势的实现相机互动的另一示意图；
图3a是本发明实施例提供的图像拍摄装置的第一种结构示意图；
图3b是本发明实施例提供的图像拍摄装置的第二种结构示意图；
图3c是本发明实施例提供的图像拍摄装置的第三种结构示意图；
图3d是本发明实施例提供的图像拍摄装置的第四种结构示意图；
图3e是本发明实施例提供的图像拍摄装置的第五种结构示意图；
图4是本发明实施例提供的终端的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例提供一种信息交互系统，该系统包括本发明实施例任一提供的图像拍摄装置，该图像拍摄装置可以集成在终端中，该终端可以为手机、平板电脑等设备此外，该系统还可以包括其他设备，比如，服务器等。
参考图1a，本发明实施例提供了一种信息交互系统，包括：终端10和服务器20，终端10与服务器20通过网络30连接。其中，网络30中包括路由器、网关等等网络实体，图中并为示意出。终端10可以通过有线网络或无线网络与服务器20进行信息交互，比如可以从服务器20下载应用(如图像应用)和/或应用更新数据包和/或与应用相关的数据信息或业务信息。其中，终端10可以为手机、平板电脑、笔记本电脑等设备，图1a是以终端10为手机为例。该终端10中可以安装有各种用户所需的应用，比如具备娱乐功能的应用(如图像处理应用，音频播放应用，游戏应用，阅读软件)，又如具备服务功能的应用(如地图导航应用、团购应用等)。
基于上述图1a所示的系统，以图像应用为例，终端10通过网络30从服务器20中按照需下载求图像应用和/或图像应用更新数据包和/或与视频应用相关的数据信息或业务信息(如图像信息)。采用本发明实施例，终端10可以接收手势拍摄请求，并根据手势拍摄请求实时采集人物的实景图像；在实景图像中检测包含人物手部的手部图像区域；对手部图像区域中手部的动作进行识别，得到目标手部动作类别；查找手部动作类别与图像拍摄操作之间的第一映射关系、以及与动效互动操作之间的第二映射关系；当仅查找到第一映射关系时，基于目标手部动作类别与第一映射关系执行相应的目标图像拍摄操作；当查找到第一映射关系和第二映射关系时，基于目标手部动作类别和第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和第二映射关系执行相应的目标动效互动操作；展示拍摄结果。
上述图1a的例子只是实现本发明实施例的一个系统架构实例，本发明实施例并不限于上述图1a所示的系统结构，基于该系统架构，提出本发明各个实施例。
在一实施例中，提供了一种基于手势的图像拍摄方法，可以由终端的处理器执行，如图1b所示，该图像拍摄方法包括：
101、接收手势拍摄请求，并根据手势拍摄请求实时采集人物的实景图像。
具体地，可以根据手势拍摄请求调用摄像头采集人物的实景图像。
其中，手势拍摄请求可以由用户触发，比如，可以在图像拍摄界面上设置一手势拍摄接口，用户可以通过该手势拍摄接口触发手势拍摄请求。
其中，手势拍摄接口的表现形式有多种，比如，输入框，图标、按钮等形式
比如，在图像拍摄界面设置一“手势拍摄”按钮，当用户点击该按钮时触发生成手势拍摄请求，此时，终端可以根据手势拍摄请求调用，摄像头如前置摄像头或后置摄像头采集人物的实景图像。
其中，实景图像为人物所处真实场景的图像，可以通过摄像头等装置捕捉。
102、在实景图像中检测包含人物手部的手部图像区域。
步骤102即为手部定位步骤，用于确定实景图像中是否包含手部，也即判断实景图像中是否包含手部。
实际应用中，手部定位可以包括首帧定位等，首帧定位的实现方式可以通过经过大量图像训练后的图像识别模型来实现。如可以基于训练后的图像识别模型在实景图像中查找包含人物手部的手部图像区域。具体地，可以基于训练后的图像识别模型在实景图像中检测包含手部图像特征的图像区域，也即手部图像区域。
比如，参考图1c，可以将实景图像作为输入图像，然后，对图像进行尺寸缩放以及颜色转换，之后输入到训练后的图像识别模型中，以查找手部图像区域。也即，步骤“在实景图像中检测包含人物手部的手部图像区域”，可以包括：
将实景图像的尺寸缩放到图像识别模型对应的尺寸，得到缩放后图像；
将缩放后图像的颜色转换成图像识别模型规定的颜色，得到颜色转换后图像；
基于训练后的图像识别模型在颜色转换后图像中检测包含手部图像特征的图像区域。
首帧定位如图1c所示，先利用大量标注过的训练图片进行机器学习，输出训练后模型。在图像识别过程先对输入图像进行尺寸缩放，把图片尺寸缩放到训练模型对应的尺寸；后再根据需要进行颜色转换，不同的识别算法可能对图像颜色通道有着不同的要求，可能是rgba也可能是灰度图。完成准备阶段的2个步骤后传入图像识别算法库，用训练好的模型检测包含手部图像特征的图像区域。
在一实施例中，还可以基于训练后的图像识别模型输出手部的大致位置信息如坐标信息、以及尺寸信息等。
103、对手部图像区域中手部的动作进行识别，得到目标手部动作类别。
本发明实施例中，对手部的动作进行识别可以通过对手部的动作进行分类来实现。
比如，可以基于训练后的图像分类模型来对手部的动作进行分类，得到手部动作类别。
其中，手部动作的类型(即类别)也即手势类型可以根据实际需求来划分，比如，参考图1d，可以将手部动作划分成心、布、剪刀、石头、一、爱、喜欢、OK、ROCK、六、八等多种手部动作。
为了提升手部动作的识别准确性，可以识别出每种手部图像特征可能属于的动作类型，然后，对每种识别结果给出权重，最终根据权重合并结果，给出对应手部动作属于给定分类中的哪一种。比如，步骤“对手部图像区域中手部的动作进行识别”，可以包括：
基于训练后的图像分类模型识别手部图像区域中手部图像特征可能属于的预设动作类别；
对手部图像特征可能属于的每种预设动作类别设置对应的权重；
根据每种预设动作类别及其对应的权重，确定手部动作所属的目标动作类别。
例如，基于训练后的图像分类模型手部图像特征1可能属于动作1、动作2、动作3，然后，分别给出动作1、动作2、动作3的权重如q1、q2、q3，……依次类推基于模型识别出手部图像特征m可能属于的动作类型，然后，分别给出动作类型的权重。最后，根据手部图像特征1、手部图像特征2……手部图像特征m可能属于的动作类型以及对应的权重确定最终的手部动作。如选取权重之和最高的动作类型作为最终的手部动作类型。
本发明实施例中，图像分类的过程和图像识别大同小异。图像识别是先训练模型，然后用模型分析图像特征，分辨图像是或不是包含手部的图片。图像分类过程是先训练模型，然后用模型分析手部图像的图像特征属于哪种给定或预设手部动作图像，从而最终确定手部图像为哪种给定或预设手部动作图像，集确定手部动作为哪种手部动作。
在一实施例中，为了提升手部动作识别的准确性，还可以结合声音信息来识别手部动作。比如，图像拍摄方法在对手部图像区域中手部的动作进行识别之前，还可以包括：采集外界环境的声音信息；
此时，步骤“对手部图像区域中手部的动作进行识别，得到目标手部动作类别”，可以包括：
对手部图像区域中手部的动作进行识别；
确定识别到的手部动作类别是否与声音信息匹配；
若匹配，则将识别到的手部动作类别作为目标手部动作类别。
其中，对区域内手部动作的识别方式可以参考上述的介绍，如基于图像分类模型来识别等。
考虑到用户在作某些手部动作时，会发生相应的声音，比如，用户打“响指”时，会发出相应的声音如“啵”等，用户“鼓掌”时会发出相应的声音如“啪啪”等；本发明实施例可以结合手部动作发出的声音来精确地识别出手部动作类别。
在一实施例中，可以获取识别到的手部动作类别对应的样本声音信息，然后，将采集到的声音信息与该样本声音信息进行匹配，若匹配成功，则确定手部动作类别与该声音信息匹配(表明此时识别出的手部动作类别是正确的)，若匹配失败(表明此时识别出的手部动作类别是错误的)，则确定手部动作类别与该声音信息不匹配。
在实际应用中，可以预先在终端中保存各种手部动作类别对应的样本声音信息，这样后续在识别出动作类别后便可以提取相应的样本声音信息与采集到的声音信息进行匹配。
在一实施例中，为了提升识别的成功率和准确性，还可以对采集到的声音信息进行去噪处理。
在一实施例中，考虑到声音采集的延时性，可以根据实景图像的采集时间从外界环境的声音信息中提取相应的声音信息，然后，确定是吧到的手部动作信息与提取的声音信息是否匹配。
在一实施例中，为提升用户体验，在匹配失败时，还提醒用户动作识别失败，以便用户重新作出手部动作，实现图像拍摄。
在一实施例中，为了提升手部动作识别的准确性，还可以基于多帧图像来识别手部动作。比如，步骤“对手部图像区域中手部的动作进行识别，得到目标手部动作类别”，可以包括：对手部图像区域中手部的动作进行识别；
当识别到的手部动作信息满足预设动作条件时，获取实景图像的下一帧图像；
将实景图像更新为下一帧图像，并返回执行在实景图像中检测包含人物手部的手部图像区域的步骤直到满足预设终止条件为止；
根据识别到的多个手部动作信息确定目标手部动作类别。
该方案可以通过多个连续的图像识别出手部动作类别。其中，预设动作条件可以根据实际需求设定，比如，可以包当前识别到的手部动作为预设手部动作等。
其中，预设终止条件可以包括：获取或者识别的图像数量达到预设数量，比如，当获取图像帧数达到预设帧数时，不返回执行检测手部图像区域的步骤。
例如，可以获取图像1，在图像1中检测包含人物手部的手部图像区域，对该手部图像区域的手部动作进行识别，当识别到手部动作信息满足预设动作条件时，获取图像1的下一帧图像如图像2，然后，对在图像2中检测包含人物手部的手部图像区域，对该手部图像区域的手部动作进行识别，当识别到手部动作信息满足预设动作条件时，获取图像2的下一帧图像如图像3，图像3中检测包含人物手部的手部图像区域，对该手部图像区域的手部动作进行识别，得到手部动作信息直到获取图像的数量达到5为止。在识别之后，可以基于识别到的多个如5个手部动作信息来确定手部动作类别(如打响指等)。104、查找手部动作类别与图像拍摄操作之间的第一映射关系、以及与动效互动操作之间的第二映射关系。
其中，图像拍摄操作可以根据实际需求设定，比如，图像拍摄操作可以包括：图像拍摄(拍照或视频录制)的触发操作、图像拍摄参数设置的触发操作、拍摄参数的设置操作、背景切换操作。其中，图像拍摄参数可以包括：颜色参数、对焦参数、图像风格参数等等。
其中，动效互动操作可以根据实际需求设定，比如，动效互动操作可以包括：动画效果触发操作、动画效果控制操作等等与动画效果。
其中，手部动作类别与图像拍摄操作之间的映射关系(即对应关系)可以预先设置，其表现形式有多种，比如，表格等。同样手部动作类别与动效互动操作之间的映射关系(即对应关系)可以预先设置，其表现形式有多种，比如，表格等。
本发明实施例可以在映射关系数据库查找手部动作类别与图像拍摄操作之间的第一映射关系、以及与动效互动操作之间的第二映射关系。
105、当仅查找到第一映射关系时，基于目标手部动作类别与第一映射关系执行相应的目标图像拍摄操作。
在实际应用中，终端可能仅仅保存有手部动作类别与图像拍摄操作之间的第一映射关系，此时，仅能查找到第一映射关系；或者终端同时保存有手部动作类别与图像拍摄操作之间的第一映射关系、以及与动效互动操作之间的第二映射关系，此时，可以查找到第一映射关系和第二映射关系。
当仅查找到第一映射关系时，可以基于目标手部动作类别与第一映射关系确定需要执行的目标图像拍摄操作(如图像拍摄触发操作等)，然后，执行该目标图像拍摄操作，比如触发开始进行图像拍摄等。
在一实施例中，当图像拍摄操作包括图像拍摄参数设置操作时，可以对图像拍摄参数进行相应的设置。比如，可以对图像拍摄的颜色参数进行设置等。
在一实施例中，当图像拍摄操作包括背景切换动作时，可以对图像拍摄的背景进行切换。比如，可以将实景图像中的背景切换，或者，将人物的身体背景切换，如触发大头娃娃换背景等。
在一实施例中，当目标图像拍摄操作包括图像拍摄的触发操作时，在确定需要执行的图像拍摄的触发操作时，可以触发终端开始拍摄图像。其中，拍摄图像可以包括拍摄照片、拍摄视频等。
例如，用户拍照时，可以打开终端的相机应用，在相机拍摄界面选择“手势拍摄”后，终端会调用摄像头获取用户的实景图像并显示在图像拍摄界面，当用户作出“剪刀”的手势时，可触发终端开始拍照或者开始录制视频。
在一实施例中，为了便于用户拍照，提升图像拍摄的体验，还可以在确定目标图像拍摄操作时，在一定时长后执行目标图像拍摄操作。也即，步骤“基于目标手部动作类别与第一映射关系执行相应的目标图像拍摄操作”可以包括：
基于目标手部动作类别与第一映射关系确定需要执行的目标图像拍摄操作；
开始计时，并在计时的时长达到预设时长时执行目标图像拍摄操作
比如，当目标图像拍摄操作包括图像拍摄触发操作时，在确定需要执行的操作为图像拍摄触发时，开始计时，并在计时的时长达到预设时长时触发终端开始拍摄。
其中，计时的方式可以为正向计时，如从零开始计时，也可以为逆向计时如倒计时，譬如，从3s开始倒计时。具体计时方式可以根据实际需求设定。
在一实施例中，为了能够让用户知晓图像拍照操作的执行时间，比如为了能够让用户知晓开始拍摄的时间，还可以在图像拍摄界面中显示当前的计时时长。比如，在图像拍摄界面中显示倒计时的时长。
在一实施例中，为了提醒用户即将开始执行图像拍摄操作比如开始拍摄图像，还可以输出相应的提醒信息，以提醒用户即将执行图像拍摄操作如即将开始拍摄图像。
比如，在图像拍摄界面中显示相应的提醒信息，具体地，可以在图像拍摄界面中显示一动画效果，以提醒用户即将执行图像拍摄操作如即将开始拍摄图像。
又比如，还可以播放预设的音频信息或者产生振动，来以提醒用户即将执行图像拍摄操作如即将开始拍摄图像。
例如，以图像拍摄操作为图像拍摄触发操作为例，参考图1e，用户拍照时，可以打开终端的相机应用，在相机拍摄界面选择“手势拍摄”后，相机应用会调用摄像头获取用户的实景图像并显示在图像拍摄界面，当用户作出“剪刀”的手势时，在图像拍摄界面中显示一提醒动画即图中的星星图像以及播放一音效，并开始倒计时，然后，在图像拍摄界面显示倒计时的时长，当倒计时达到零秒时，触发终端开始拍照或者开始录制视频。
106、当查找到第一映射关系和第二映射关系时，基于目标手部动作类别和第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和第二映射关系执行相应的目标动效互动操作。
本发明实施例，在第一映射关系和第二映射关系同时存在的情况下，需要执行图像拍摄操作以及动效互动操作。
其中，目标图像拍摄操作和目标动效互动操作的执行时序可以有多种，可以先后执行，也可以同时执行。比如，先执行目标图像拍摄操作，再执行目标动效互动操作，或者先执行目标动效互动操作，再执行目标图像拍摄操作等。
其中，目标图像拍摄操作的执行可以参考上述步骤105的描述。
在一实施例中，步骤“基于目标手部动作类别和第二映射关系执行相应的目标动效互动操作”可以包括：
基于目标手部动作类别和第二映射关系确定需要执行的目标动效互动操作；
执行该目标动效互动操作；比如在实景图像或者图像拍摄界面上执行该目标动效互动操作。
本发明实施例中，动效互动操作可以包括：动画效果触发操作、动画效果控制操作等等。
其中，动画效果触发操作可以包括在实景图像中或图像拍摄界面上触发相应的动画效果。比如，在一实施例中，当目标动效互动操作包括动画效果触发操作时，可以确定需要触发的动画效果(比如确定目标手部动作类别对应的动画效果)；在实景图像上触发该动画效果，比如，通过渲染方式在实景图像上触发动画效果。
实际应用中，可以将手部动作类别与动效素材关联起来，当查找到第一映射关系和第二映射关系后，可以基于关联关系确定目标手部动作类别关联的动效。例如，当用户张开手掌可以在实景图像中触发元气弹之类的动画效果。
其中，动画的类型可以有多种，比如，以动画的构成方式可以划分为序列帧动画等。序列帧动画是一种常见的动画形式，其原理是在“连续的关键帧”中分解动画动作，也就是在时间轴的每帧上逐帧绘制不同的内容，使其连续播放而成动画。
又比如，以动画在产品中的表现形式，可以将动画可以包括动态贴纸、动态表情等。
在一实施例中，还可以基于目标手部动作类别确定动画的数量，比如，获取目标手部动作类别对应的动画以及数量，在实景图像中渲染该数量的动画。
本发明实施例中，动效互动操作还可以包括动画效果控制操作，该动画效果控制操作可以为对实景图像中动画效果进行控制的操作。比如，在一实施例中，当目标动效互动操作包括动画效果控制操作时，可以对实景图像中的动画效果进行相应的控制。
其中，动画效果的控制包括控制动画的位置、改变动画的序列帧状态等。
比如，在一实施例中，以动画效果控制为状态控制为例；对实景图像中序列帧动画的序列帧状态进行变更。
例如，手势触发可以触发或者控制序列帧动画效果，序列帧支持的能力为原来动作触发支持的能力，原来动作触发支持的，现在手势触发都支持，包括显不限于以下能力：
a)基本序列帧播放
b)新增的动作触发序列帧能力：
i)A状态触发后变B，当B播放完后回到A
ii)A状态触发后变B，当B播放完后继续播放B，一直循环
iii)A状态触发后变B，B触发后变C，最多5段。
又比如，在一实施例中，以动画效果控制为动画的位置控制为例；可以对实景图像中动画的位置进行控制，如可以改变动画的位置。
譬如，可以控制动画的在实景图像中运动。
在一实施例中，为了提升动效展示效果，还可以基于手部位置来执行目标动效互动操作；比如，可以基于手部位置来触发动画效果，或者基于手部位置来控制动画效果的位置等等。其中，手部位置可以基于图像追踪来获取。可选地，在检测手部图像区域之后，执行目标动效互动操作之前，本发明图像拍摄方法还可以包括：
对手部图像区域内人物的手部进行图像追踪，得到手部当前在图像中的位置信息；
此时，步骤“基于目标手部动作类别和第二映射关系执行相应的目标动效互动操作”，可以包括：
基于目标手部动作类别和第二映射关系确定需要执行的目标动效互动操作；
根据位置信息执行目标动效互动操作。
其中，图像追踪的时序位于查找手部图像区域之后，执行动效互动操作之前，比如，可以与手部动作识别的步骤同时执行等。
图像追踪主要是依靠帧间信息，利用上一帧的定位结果预测下一帧的运动变化。考虑到移动设备的性能限制，追踪算法一般只会小范围遍历上一帧结果的相邻区域，以求尽快给出追踪结果。这里影响追踪效果的主要有2个因素，帧率和目标自身的运动幅度。帧率越高间隔越短，两帧之间目标偏差的距离就越小，追踪就越是容易成功。同样的，目标自身的运动幅度小，目标的偏移也就越小。当图像追踪失败的时候，会重新启用首帧定位，进入下一轮的定位追踪流程。
在一实施例中，为提升动画展示效果，还可以基于手部位置来触发动画效果。其中，手部位置可以基于图像追踪来获取。可选地，在检测手部图像区域之后，执行动效互动操作之前，本发明实施例方法还可以包括：
对手部图像区域内人物的手部进行图像追踪，得到手部当前在图像中的位置信息；
此时，步骤“根据位置信息执行目标动效互动操作”，可以包括：根据位置信息在实景图像上触发动画效果。
比如，可以根据手部的位置信息确定动画效果的触发位置；在该触发位置触发如渲染动画效果。
在一实施例中，可以基于手部位置来控制动画效果运动，其中，手部位置可以基于图像追踪来获取。可选地，在检测手部图像区域之后，执行目标动效互动操作之前，本发明实施例方法还可以包括：
对手部图像区域内人物的手部进行图像追踪，得到手部当前在图像中的位置信息；
此时，步骤“根据位置信息执行目标动效互动操作”，可以包括：根据位置信息控制实景图像中的动画进行相应的运动。
比如，可以根据手部的位置信息确定动画效果的运动位置；通过渲染等方式将动画效果移动到该运动位置，以实现动画效果运动。
其中，图像追踪的时序位于查找手部图像区域之后，执行图像拍摄互动操作之前，比如，可以与手部动作识别的步骤同时执行等。
例如，可以基于手部的实时位置信息控制动画进行相应的运动，从而实现动画跟随手势运动的效果。
譬如，当识别到手势为预设动效控制手势时，可以控制序列帧动画跟随手势运动，序列帧动画重复播放
a)手势消失时序列帧动画消失
b)近大远小(根据框的大小调整素材大小)。
本发明实施例中图像拍摄操作与动效互动操作的执行时序可以有多种，比如，在一实施例中，可以在执行图像拍摄操作之后再执行动效互动操作。具体地，步骤“基于目标手部动作类别和第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和第二映射关系执行相应的目标动效互动操作”可以包括：
基于目标手部动作类别和第一映射关系执行相应的目标图像拍摄操作，得到拍摄图像；
基于目标手部动作类别和第二映射关系确定需要执行的目标动效互动操作；
对拍摄图像进行手部动作识别，并根据识别到的手部动作类别确定相应的动效信息；
根据动效信息执行目标动效互动操作。
比如，目标图像拍摄操作包括图像拍摄触发操作时，可以触发终端开始拍摄图像(如拍照)，得到拍摄图像，然后，对该拍摄图像进行手部动作识别，该识别到的手部动作类别可与动效信息关联，此时，可以基于识别到的手部动作类别确定相应的动效信息，最后，在根据动效信息来执行动效互动操作。
其中，对拍摄图像进行手部动作识别的过程，可以参考上述对实景图像进行手部动作识别的过程，比如，先检测手部图像区域，然后，在该区别内检测手部动作等。
其中，动效信息可以为用于指示动效互动操作执行的指示信息或者参考信息，该动效信息可以包括：动画类型、动画持续时长、动画运动的终点位置、序列帧变化方式等等。
以动效触发操作为例，当用户作出“剪刀”手势时，触发终端开始拍摄图像后，可以对拍摄得到的图像进行手部动作识别，如当拍摄图像中用户作出“握拳”的手势时，可以获取该手势对应的动效信息如动画类型，根据动效信息在拍摄图像中触发相应的动画效果；比如，在拍摄图像中渲染该动画类型对应的动画。
例如，当用户作出“ok”手势时，触发终端开始录制视频，得到录制图像，在录制过程中如果用户作出“打响指”手势时，那么此时，可以获取“打响指”手势对应的动效信息如动画持续时长等，根据动效信息在录制图像中渲染相应的动画效果如可以在图像中用户的手部位置渲染一个动画，或者切换图像的背景，或者控制录制图像中动效的位置、状态等。
在一实施例中，为了提升图像拍摄智能性以及体验，还可以在执行动效互动操作期间，由用户的手势确定图像拍摄操作的执行时间等，然后，基于该时间来执行图像拍摄操作。比如，步骤“基于目标手部动作类别和第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和第二映射关系执行相应的目标动效互动操作”可以包括：
基于目标手部动作类别和第二映射关系执行相应的目标动效互动操作；
在执行目标动效互动操作期间，对当前采集到的实景图像进行手部动作识别，得到当前手部动作类别；
根据当前手部动作类别确定执行图像拍摄操作的时间；
基于目标手部动作类别、时间和第一映射关系执行相应的目标图像拍摄操作。
其中，执行图像拍摄操作的时间可以为确定拍摄操作时间与执行拍摄操作之间的时间差或时长，比如3s、5s等。此外，该时间还可以为终端系统的时间，如10：01等。
比如，在确定执行图片拍摄操作的时间时开始计时，当计时时间达到该时间时，则执行图像拍摄操作。譬如，在确定执行图像拍摄操作的时间为5s后，可以在5s之后基于目标手部动作类别与第一映射关系执行相应的图像拍摄操作等。
又比如，在确定执行图像拍摄操作的时间为9：00，当系统时间到达9：00时，则基于目标手部动作类别与第一映射关系执行相应的图像拍摄操作。
例如，在图像拍摄过程中，当用户作出“打响指”手势时，则在实景图像中渲染相应的动画，在渲染的过程中，如果用户接着作出“3”的手势时，则确定图像拍摄操作在3s后执行，并开始计时，当计时时长达到3s，执行图像拍摄操作。
在一实施例中，为了提升图像拍摄智能性以及体验，还可以在执行图像拍摄操作期间，识别用户的手部动作，当手部动作达到一定条件时，执行停止执行图像拍摄操作。也即，本发明图像拍摄方法还可以包括：
在执行图像拍摄操作期间，对拍摄到的图像进行手部动作识别；
当识别到的手部动作类别为预设类别时，停止执行图像拍摄操作。
例如，以录制图像为例，当用户作出“ok”手势时，触发终端开始录制图像，在执行图像录制的过程中，如果用户作出“剪刀”手势，则停止录制图像。
又例如，以拍摄图片为例，当用户作出“ok”手势时，触发终端开始连续拍摄图片，在连续拍摄的过程中，如果用户作出“剪刀”手势，则停止连续拍摄。
107、展示拍摄结果。比如，当仅执行图像拍摄操作时，可以向用户展示拍摄的图像如照片或视频等。
又比如，当执行图像拍摄操作和动效互动操作时，可以向用户展示具有动画效果的拍摄图像，如照片或视频等。
由上可知，本发明实施例采用接收手势拍摄请求，并根据手势拍摄请求实时采集人物的实景图像；在实景图像中检测包含人物手部的手部图像区域；对手部图像区域中手部的动作进行识别，得到目标手部动作类别；查找手部动作类别与图像拍摄操作之间的第一映射关系、以及与动效互动操作之间的第二映射关系；当仅查找到第一映射关系时，基于目标手部动作类别与第一映射关系执行相应的目标图像拍摄操作；当查找到第一映射关系和第二映射关系时，基于目标手部动作类别和第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和第二映射关系执行相应的目标动效互动操作；展示拍摄结果。该方案可以基于用户的手部动作即手势自动触发相应的图像拍摄操作，比如，通过用户的手势触发拍摄等，无需用户手动操作，提升了图像拍摄的效率以及大大提升了用户拍摄体验。
在一实施例，根据上述所描述的方法，将作进一步详细说明。
如图2a所示，一种基于手势的图像拍摄方法，具体流程如下：
201、根据手势拍摄请求调用摄像头实时采集人物的实景图像。
其中，手势拍摄请求可以由用户触发，比如，可以在图像拍摄界面上设置一手势拍摄接口，用户可以通过该手势拍摄接口触发手势拍摄请求。
其中，手势拍摄接口的表现形式有多种，比如，输入框，图标、按钮等形式
比如，在图像拍摄界面设置一“手势拍摄”按钮，当用户点击该按钮时触发生成手势拍摄请求，此时，终端可以根据手势拍摄请求调用，摄像头如前置摄像头或后置摄像头采集人物的实景图像。
例如，参考图2b，可以通过终端自带的摄像头采集外界的实景图像，并通过光传感器将拍摄画面转换成数字图像，从而完成图像采集的工作。
202、在实景图像中检测包含人物手部的手部图像区域。
该步骤202即为手部定位步骤，用于确定实景图像中是否包含手部，也即判断实景图像中是否包含手部。
实际应用中，手部定位可以包括首帧定位等。该首帧定位的实现方式可以通过经过大量图像训练后的图像识别模型来实现。如可以基于训练后的图像识别模型在实景图像中检测包含人物手部的手部图像区域。具体地，可以基于训练后的图像识别模型在实景图像中查找包含手部图像特征的图像区域，也即手部图像区域。
参考图2b，在采集图像后，需要对图像进行处理，这里的图像处理，主要是是对图像数据进行手势分析。手势分析可以包括三个部分：确定图像是否包含手部(如首帧定位)、识别手部动作即手势、手势追踪。
首帧定位如图1c所示，先利用大量标注过的训练图片进行机器学习，输出训练后模型。在图像识别过程先对输入图像进行尺寸缩放，把图片尺寸缩放到训练模型对应的尺寸；后再根据需要进行颜色转换，不同的识别算法可能对图像颜色通道有着不同的要求，可能是rgba也可能是灰度图。完成准备阶段的2个步骤后传入图像识别算法库，用训练好的模型查找包含手部图像特征的图像区域。
203、对手部图像区域中手部的动作进行识别以及图像追踪。
其中，对手部的动作进行识别可以通过对手部的动作进行分类来实现。比如，可以基于训练后的图像分类模型来对手部的动作进行分类，参考图2b。
其中，手部动作的类型也即手势类型可以根据实际需求来划分，比如，参考图1d，可以将手部动作划分成心、布、剪刀、石头、一、爱、喜欢、OK、ROCK、六、八等多种手部动作。
为了提升手部动作的识别准确性，可以识别出每种手部图像特征可能属于的动作类型，然后，对每种识别结果给出权重，最终根据权重合并结果，给出对应手部动作属于给定分类中的哪一种。
具体地，可以基于训练后的图像分类模型识别手部图像区域中手部图像特征可能属于的预设动作类型；对手部图像特征可能属于的每种预设动作类型设置对应的权重；根据每种预设动作类型及其对应的权重，确定手部动作所属的目标动作类型。
其中，对手势的图像追踪是为了获取手部在实景图像中的位置信息。图像追踪主要是依靠帧间信息，利用上一帧的定位结果预测下一帧的运动变化。考虑到移动设备的性能限制，追踪算法一般只会小范围遍历上一帧结果的相邻区域，以求尽快给出追踪结果。
其中，手势识别以及手势追踪可以同时执行，比如，参考2b，在首帧定位确定包含手部后，可以同时对手势进行分类以及对手势进行追踪。
204、查找识别到的手部动作类别与图像拍摄触发操作之间的第一映射关系、以及与动效互动操作之间的第二映射关系。
其中，图像拍摄触发操作可以根据实际需求设定，比如，图像拍摄触发操作可以包括拍照的触发操作、视频录制的触发操作。
其中，动效互动操作可以根据实际需求设定，比如，动效互动操作可以包括：动画效果触发操作、动画效果控制操作等等与动画效果。
其中，手部动作类别与图像拍摄触发操作之间的映射关系(即对应关系)可以预先设置，其表现形式有多种，比如，表格等。同样手部动作类别与动效互动操作之间的映射关系(即对应关系)可以预先设置，其表现形式有多种，比如，表格等。
205、当仅查找到第一映射关系时，基于目标手部动作类别与第一映射关系执行相应的目标图像拍摄触发操作。
在一实施例中，触发终端开始拍摄图像。其中，拍摄图像可以包括拍摄照片、拍摄视频等。
比如，参考图2b，当通过对手部动作分类，识别手部动作后，如果手部动作为预设相机交互控制动作类型(如心形手势等)，此时，会控制相机交互，如触发相机开始拍照或录制视频等。
在一实施例中，为了便于用户拍照，提升图像拍摄的体验，还可以当查找到手部动作类别与第一映射关系时，在一定时长后触发终端开始拍摄图片。比如，当识仅查找到第一映射关系时，开始计时，并在计时的时长达到预设时长时触发终端开始拍摄。
其中，计时的方式可以为正向计时，如从零开始计时，也可以为逆向计时如倒计时，譬如，从4s开始倒计时。具体计时方式可以根据实际需求设定。
在一实施例中，为了能够让用户知晓开始拍摄的时间，还可以在图像拍摄界面中显示当前的计时时长。比如，在图像拍摄界面中显示倒计时的时长。
在一实施例中，为了提醒用户即将开始拍摄，还可以输出相应的提醒信息，以提醒用户即将开始拍摄。
比如，在图像拍摄界面中显示相应的提醒信息，具体地，可以在图像拍摄界面中显示一动画效果，以提醒用户即将开始拍摄。
又比如，还可以播放预设的音频信息或者产生振动，来提醒用户即将开始拍摄。
例如，参考图2c，用户拍照时，可以打开终端的相机应用，相机应用会调用摄像头获取用户的实景图像并显示在图像拍摄界面，当用户作出“OK”的手势时，在图像拍摄界面中显示一提醒动画即图中的星星图像以及震动一定时长，并开始倒计时，然后，在图像拍摄界面显示倒计时的时长，当倒计时达到零秒时，触发终端开始录制视频。
206、当查找到第一映射关系和第二映射关系时，基于目标手部动作类别和第一映射关系执行相应的目标图像拍摄触发操作，并基于追踪到的手部位置信息、目标手部动作类别和第二映射关系执行相应的目标动效互动操作。
本发明实施例，在第一映射关系和第二映射关系同时存在的情况下，需要执行图像拍摄操作以及动效互动操作。
其中，目标图像拍摄操作的执行可以参考上述步骤105和205的描述。
具体地，基于目标手部动作类别和第二映射关系确定需要执行的目标动效互动操作；执行该目标动效互动操作；比如在实景图像或者图像拍摄界面上执行该目标动效互动操作。
其中，动效互动操作可以包括：动画效果触发操作、动画效果控制操作等等。
(1)，当目标动效互动操作包括：动画效果触发操作时，根据追踪到的手部位置信息在实景图像上触发相应的动画效果。
实际应用中，可以将手部动作类别与动效素材关联起来，当识别到的手部动作类别时，可以基于关联关系确定与该动作关联的动效。例如，当用户张开手掌可以在实景图像中触发元气弹之类的动画效果。
比如，可以根据手部的位置信息确定动画效果的触发位置；在该触发位置触发如渲染动画效果。
(2)，当目标动效互动操作包括动画效果控制操作时，根据追踪到的手部位置信息对实景图像中的动画进行相应的控制。
其中，动画效果的控制包括控制动画的位置、改变动画的序列帧状态等。
例如，参考图2c，在对手部动作分类后，如果手势类型为预设动效控制类型如“打响指”等，此时，可以对图像中的动画效果进行控制。比如，可以改变动效状态、以及改变动效位置(动效追踪等)。
其中，对动效的控制可以通过图像渲染的方式来实现
在一实施例中，可以对实景图像中序列帧动画的序列帧状态进行变更。
例如，手势触发可以触发或者控制序列帧动画效果，序列帧支持的能力为原来动作触发支持的能力，原来动作触发支持的，现在手势触发都支持，包括显不限于以下能力：
a)基本序列帧播放
b)新增的动作触发序列帧能力：
i)A状态触发后变B，当B播放完后回到A
ii)A状态触发后变B，当B播放完后继续播放B，一直循环
iii)A状态触发后变B，B触发后变C，最多5段。
在一实施例中，还可以基于手部位置控制动画的在实景图像中运动。比如，控制序列帧动画跟随手势运动等。
根据上述的描述，本发明实施例拍摄方法可以基于用户手势实现相机交互控制以及动效控制等。比如，手势拍照后，摄像头实时采集过程中会持续分析手势动作，在监测到指定的拍摄触发动作后会立即回调相机操控逻辑，触发相机拍摄。
而手势控制动效如动效贴纸，主要是增加了动效拍摄的趣味性。利手势追踪获取到的手势定位信息可以扩充动效如动效贴纸的定位类型，手势动作分类可以用于扩充动效贴纸的触发类型。手势的位置和动作变化，会影响到最终渲染到屏幕的贴纸数量和位置。
例如，参考图2d，输入图像后，通过手部定位(如首帧定位)确定图像中是否包含手势，通过手势追踪可以得到手部的位置信息，然后，对手部动作即手势进行分类识别出手部动作；当识别到的手势为动效控制类手势时，执行动效控制，如动效状态更新、动效位置更新等。当识别到的手势为交互控制类手势，执行相应的交互控制，如开始拍照(当手势为“剪刀”手势)或录制(当手势为“Ok”手势)。
本发明实施例中图像拍摄触发操作与动效互动操作的执行时序可以有多种。比如，先后执行，或者同时执行。在一实施例中，可以在执行图像拍摄触发操作之后再执行动效互动操作。具体地，基于目标手部动作类别和第一映射关系触发终端开始拍摄，得到拍摄图像；基于目标手部动作类别和第二映射关系确定需要执行的目标动效互动操作；对拍摄图像进行手部动作识别，并根据识别到的手部动作类别确定相应的动效信息；根据动效信息执行目标动效互动操作。
比如，可以触发终端开始拍摄图像(如拍照)，得到拍摄图像，然后，对该拍摄图像进行手部动作识别，该识别到的手部动作类别可与动效信息关联，此时，可以基于识别到的手部动作类别确定相应的动效信息，最后，在根据动效信息来执行动效互动操作。
在一实施例中，还可以在执行动效互动操作期间，由用户的手势确定图像拍摄操作的执行时间等，然后，基于该时间来执行图像拍摄触发操作。具体地，基于目标手部动作类别和第二映射关系执行相应的目标动效互动操作；在执行目标动效互动操作期间，对当前采集到的实景图像进行手部动作识别，得到当前手部动作类别；根据当前手部动作类别确定执行图像拍摄触发操作的时间；基于目标手部动作类别、时间和第一映射关系执行图像拍摄触发操作，即触发终端开始拍摄图像如拍照或者录制视频。
例如，在图像拍摄过程中，当用户作出“打响指”手势时，则在实景图像中渲染相应的动画，在渲染的过程中，如果用户接着作出“4”的手势时，则确定图像拍摄操作在4s后执行，并开始计时，当计时时长达到4s，开始拍摄图像。207、向用户展示拍摄结果。
比如，当仅执行图像拍摄操作时，可以向用户展示拍摄的图像如照片或视频等。
又比如，当执行图像拍摄操作和动效互动操作时，可以向用户展示具有动画效果的拍摄图像，如照片或视频等。
由上可知，本发明实施例可以基于用户的手部动作即手势自动触发相应的图像拍摄操作和动效控制操作，比如，通过用户的手势触发拍摄等，无需用户手动操作，提升了图像拍摄的效率以及大大提升了用户拍摄体验。
为了便于更好的实施本发明实施例提供的基于手势的图像拍摄方法，在一实施例中还提供了一种基于手势的图片拍摄装置。其中名词的含义与上述对象选择方法中相同，具体实现细节可以参考方法实施例中的说明。
在一实施例中，还提供了一种基于手势的图像拍摄装置，如图3a所示，该图像拍摄装置以包括：图像采集单元301、检测单元302、识别单元303、查找单元304、执行单元305以及展示单元306；
图像采集单元301，用于接收手势拍摄请求，并根据手势拍摄请求实时采集人物的实景图像；
检测单元302，用于在所述实景图像中检测包含所述人物手部的手部图像区域；
识别单元303，用于对所述手部图像区域中手部的动作进行识别，得到目标手部动作类别；
查找单元304，用于查找手部动作类别与图像拍摄操作之间的第一映射关系、以及与动效互动操作之间的第二映射关系；
执行单元305，用于当仅查找到所述第一映射关系时，基于所述目标手部动作类别与所述第一映射关系执行相应的目标图像拍摄操作；当查找到所述第一映射关系和所述第二映射关系时，基于所述目标手部动作类别和所述第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和所述第二映射关系执行相应的目标动效互动操作；
展示单元306，用于展示拍摄结果。
在一实施例中，检测单元302可以具体用于：
将所述实景图像的尺寸缩放到图像识别模型对应的尺寸，得到缩放后图像；
将缩放后图像的颜色转换成所述图像识别模型规定的颜色，得到颜色转换后图像；
基于训练后的所述图像识别模型在所述颜色转换后图像中检测包含手部图像特征的图像区域。
在一实施例中，识别单元303，可以用于：
将所述实景图像的尺寸缩放到图像识别模型对应的尺寸，得到缩放后图像；
将缩放后图像的颜色转换成所述图像识别模型规定的颜色，得到颜色转换后图像；
基于训练后的所述图像识别模型在所述颜色转换后图像中检测包含手部图像特征的图像区域。
在一实施例中，识别单元303可以具体用于：
对所述手部图像区域中手部的动作进行识别；
当识别到的手部动作信息满足预设动作条件时，获取所述实景图像的下一帧图像；
将所述实景图像更新为所述下一帧图像，并触发检测单元302执行在所述实景图像中检测包含所述人物手部的手部图像区域的步骤直到满足预设终止条件为止；
根据识别到的多个手部动作信息确定目标手部动作类别。
在一实施例中，执行单元305，可以用于：基于所述目标手部动作类别与所述第一映射关系确定需要执行的目标图像拍摄操作；开始计时，并在计时的时长达到预设时长时执行所述目标图像拍摄操作。
在一实施例中，参考图3b，图像拍摄装置还可以包括：追踪单元307；
所述追踪单元307，用于在检测单元302检测手部图像区域之后，执行单元305执行目标动效互动操作之前，对所述手部图像区域内人物的手部进行图像追踪，得到所述手部当前在图像中的位置信息；
所述执行单元305，用于基于所述目标手部动作类别和所述第二映射关系确定需要执行的目标动效互动操作；根据所述位置信息执行所述目标动效互动操作。
在一实施例中，参考图3c，图像拍摄装置还可以包括：声音采集单元308；
所述声音采集单元308，用于采集外界环境的声音信息；
其中，识别单元303可以包括：
识别子单元3031，用于对所述手部图像区域中手部的动作进行识别；
匹配子单元3032，用于确定识别到的手部动作类别是否与所述声音信息匹配，若匹配，则将识别到的手部动作类别作为目标手部动作类别。
在一实施例中，参考图3d，执行单元305可以包括：
拍摄执行子单元3051，用于基于所述目标手部动作类别和所述第一映射关系执行相应的目标图像拍摄操作，得到拍摄图像；
动效执行子单元3052，用于基于目标手部动作类别和所述第二映射关系确定需要执行的目标动效互动操作；对所述拍摄图像进行手部动作识别，并根据识别到的手部动作类别确定相应的动效信息；根据所述动效信息执行所述目标动效互动操作。
在一实施例中，参考图3e，执行单元305可以包括：
动效执行子单元3052，用于基于目标手部动作类别和所述第二映射关系执行相应的目标动效互动操作；
动作识别子单元3053，用于在执行目标动效互动操作期间，对当前采集到的实景图像进行手部动作识别，得到当前手部动作类别；
时间确定子单元3054，用于根据当前手部动作类别确定执行图像拍摄操作的时间；
拍摄执行子单元3051，用于基于所述目标手部动作类别、所述时间和所述第一映射关系执行相应的目标图像拍摄操作。
在一实施例中，执行单元305还可以用于：
在执行所述图像拍摄操作期间，对拍摄到的图像进行手部动作识别；
当识别到的手部动作类别为预设类别时，停止执行图像拍摄操作。具体实施时，以上各个单元可以作为独立的实体来实现，也可以进行任意组合，作为同一或若干个实体来实现，以上各个单元的具体实施可参见前面的方法实施例，在此不再赘述。
该图像拍摄装置具体可以集成终端，比如以客户端的形式集成在终端中，该终端可以为手机、平板电脑等设备。
由上可知，本发明实施例图像拍摄装置采用图像采集单元301接收手势拍摄请求，并根据手势拍摄请求实时采集人物的实景图像；由检测单元302在实景图像中检测包含人物手部的手部图像区域；由识别单元303对手部图像区域中手部的动作进行识别，得到目标手部动作类别；由查找单元304查找手部动作类别与图像拍摄操作之间的第一映射关系、以及与动效互动操作之间的第二映射关系；由执行单元305当仅查找到第一映射关系时，基于目标手部动作类别与第一映射关系执行相应的目标图像拍摄操作；当查找到第一映射关系和第二映射关系时，基于目标手部动作类别和第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和第二映射关系执行相应的目标动效互动操作；由展示单元306展示拍摄结果。该方案可以基于用户的手部动作即手势自动触发相应的图像拍摄操作，比如，通过用户的手势触发拍摄等，无需用户手动操作，提升了图像拍摄的效率以及拍摄体验。
在一实施例中，为了更好地实施以上方法，本发明实施例还提供了一种终端，该终端可以为手机、平板电脑等设备。
参考图4，本发明实施例提供了一种终端400，可以包括一个或者一个以上处理核心的处理器401、一个或一个以上计算机可读存储介质的存储器402、射频(RadioFrequency，RF)电路403、电源404、输入单元405、以及显示单元406等部件。本领域技术人员可以理解，图4中示出的终端结构并不构成对终端的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。其中：
处理器401是该终端的控制中心，利用各种接口和线路连接整个终端的各个部分，通过运行或执行存储在存储器402内的软件程序和/或模块，以及调用存储在存储器402内的数据，执行终端的各种功能和处理数据，从而对终端进行整体监控。可选的，处理器401可包括一个或多个处理核心；优选的，处理器401可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器401中。
存储器402可用于存储软件程序以及模块，处理器401通过运行存储在存储器402的软件程序以及模块，从而执行各种功能应用以及数据处理。
RF电路403可用于收发信息过程中，信号的接收和发送，特别地，将基站的下行信息接收后，交由一个或者一个以上处理器401处理；另外，将涉及上行的数据发送给基站。
终端还包括给各个部件供电的电源404(比如电池)，优选的，电源可以通过电源管理系统与处理器401逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源404还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
该终端还可包括输入单元405，该输入单元405可用于接收输入的数字或字符信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
该终端还可包括显示单元406，该显示单元406可用于显示由用户输入的信息或提供给用户的信息以及终端的各种图形用户接口，这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元408可包括显示面板，可选的，可以采用液晶显示器(LCD，Liquid Crystal Display)、有机发光二极管(OLED，Organic Light-EmittingDiode)等形式来配置显示面板。
具体在本实施例中，终端中的处理器401会按照如下的指令，将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器402中，并由处理器401来运行存储在存储器402中的应用程序，从而实现各种功能，如下：
接收手势拍摄请求，并根据手势拍摄请求实时采集人物的实景图像；在实景图像中检测包含人物手部的手部图像区域；对手部图像区域中手部的动作进行识别，得到目标手部动作类别；查找手部动作类别与图像拍摄操作之间的第一映射关系、以及与动效互动操作之间的第二映射关系；当仅查找到第一映射关系时，基于目标手部动作类别与第一映射关系执行相应的目标图像拍摄操作；当查找到第一映射关系和第二映射关系时，基于目标手部动作类别和第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和第二映射关系执行相应的目标动效互动操作；展示拍摄结果。
在一实施例中，在在所述实景图像中检测包含所述人物手部的手部图像区域时，处理器401可以具体执行以下步骤：
将所述实景图像的尺寸缩放到图像识别模型对应的尺寸，得到缩放后图像；
将缩放后图像的颜色转换成所述图像识别模型规定的颜色，得到颜色转换后图像；
基于训练后的所述图像识别模型在所述颜色转换后图像中检测包含手部图像特征的图像区域。
在一实施例中，在对所述手部图像区域中手部的动作进行识别时，处理器401可以具体执行以下步骤：
基于训练后的图像分类模型识别所述手部图像区域中手部图像特征可能属于的预设动作类别；
对所述手部图像特征可能属于的每种预设动作类别设置对应的权重；
根据每种预设动作类别及其对应的权重，确定所述手部动作所属的目标动作类别。
在一实施例中，当基于所述目标手部动作类别与所述第一映射关系执行相应的目标图像拍摄操作时，处理器401可以具体执行以下步骤：
基于所述目标手部动作类别与所述第一映射关系确定需要执行的目标图像拍摄操作；
开始计时，并在计时的时长达到预设时长时执行所述目标图像拍摄操作。
在一实施例中，处理器401还可以具体执行以下步骤：
对所述手部图像区域内人物的手部进行图像追踪，得到所述手部当前在图像中的位置信息；
其中，在基于目标手部动作类别和所述第二映射关系执行相应的目标动效互动操作时，处理器401可以具体执行以下步骤：
基于所述目标手部动作类别和所述第二映射关系确定需要执行的目标动效互动操作。
在一实施例中，在对所述手部图像区域中手部的动作进行识别之前，处理器401还可以具体执行以下步骤：
采集外界环境的声音信息；
此时，在对所述手部图像区域中手部的动作进行识别，得到目标手部动作类别时，处理器401可以具体执行以下步骤：
对所述手部图像区域中手部的动作进行识别；
确定识别到的手部动作类别是否与所述声音信息匹配；
若匹配，则将识别到的手部动作类别作为目标手部动作类别。在一实施例中，当基于所述目标手部动作类别和所述第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和所述第二映射关系执行相应的目标动效互动操作时；处理器401可以具体执行以下步骤：
基于所述目标手部动作类别和所述第一映射关系执行相应的目标图像拍摄操作，得到拍摄图像；
基于目标手部动作类别和所述第二映射关系确定需要执行的目标动效互动操作；
对所述拍摄图像进行手部动作识别，并根据识别到的手部动作类别确定相应的动效信息；
根据所述动效信息执行所述目标动效互动操作。
在一实施例中，当基于所述目标手部动作类别和所述第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和所述第二映射关系执行相应的目标动效互动操作时；处理器401可以具体执行以下步骤：
基于目标手部动作类别和所述第二映射关系执行相应的目标动效互动操作；
在执行目标动效互动操作期间，对当前采集到的实景图像进行手部动作识别，得到当前手部动作类别；
根据当前手部动作类别确定执行图像拍摄操作的时间；
基于所述目标手部动作类别、所述时间和所述第一映射关系执行相应的目标图像拍摄操作。
在一实施例中，，处理器401还可以具体执行以下步骤：
在执行所述图像拍摄操作期间，对拍摄到的图像进行手部动作识别；
当识别到的手部动作类别为预设类别时，停止执行图像拍摄操作。由上可知，本发明实施例终端采用接收手势拍摄请求，并根据手势拍摄请求实时采集人物的实景图像；在实景图像中检测包含人物手部的手部图像区域；对手部图像区域中手部的动作进行识别，得到目标手部动作类别；查找手部动作类别与图像拍摄操作之间的第一映射关系、以及与动效互动操作之间的第二映射关系；当仅查找到第一映射关系时，基于目标手部动作类别与第一映射关系执行相应的目标图像拍摄操作；当查找到第一映射关系和第二映射关系时，基于目标手部动作类别和第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和第二映射关系执行相应的目标动效互动操作；展示拍摄结果。该方案可以基于用户的手部动作即手势自动触发相应的图像拍摄操作，比如，通过用户的手势触发拍摄等，无需用户手动操作，提升了图像拍摄的效率。。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：只读存储器(ROM，Read Only Memory)、随机存取记忆体(RAM，RandomAccess Memory)、磁盘或光盘等。
以上对本发明实施例所提供的一种基于手势的图像拍摄方法、装置和存储介质进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。
Claims (18)
1.一种基于手势的图像拍摄方法，其特征在于，包括：
接收手势拍摄请求，并根据手势拍摄请求实时采集人物的实景图像；
在所述实景图像中检测包含所述人物手部的手部图像区域；
对所述手部图像区域中手部的动作进行识别；
确定识别到的手部动作类别是否与外界环境的声音信息匹配；
若匹配，则将识别到的手部动作类别作为目标手部动作类别；
查找手部动作类别与图像拍摄操作之间的第一映射关系、以及与动效互动操作之间的第二映射关系；
当仅查找到所述第一映射关系时，基于所述目标手部动作类别与所述第一映射关系执行相应的目标图像拍摄操作；
当查找到所述第一映射关系和所述第二映射关系时，基于所述目标手部动作类别和所述第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和所述第二映射关系执行相应的目标动效互动操作；
展示拍摄结果。
2.如权利要求1所述的图像拍摄方法，其特征在于，在所述实景图像中检测包含所述人物手部的手部图像区域，包括：
将所述实景图像的尺寸缩放到图像识别模型对应的尺寸，得到缩放后图像；
将缩放后图像的颜色转换成所述图像识别模型规定的颜色，得到颜色转换后图像；
基于训练后的所述图像识别模型在所述颜色转换后图像中检测包含手部图像特征的图像区域。
3.如权利要求1所述的图像拍摄方法，其特征在于，对所述手部图像区域中手部的动作进行识别，包括：
基于训练后的图像分类模型识别所述手部图像区域中手部图像特征可能属于的预设动作类别；
对所述手部图像特征可能属于的每种预设动作类别设置对应的权重；
根据每种预设动作类别及其对应的权重，确定所述手部动作所属的目标动作类别。
4.如权利要求1所述的图像拍摄方法，其特征在于，基于所述目标手部动作类别与所述第一映射关系执行相应的目标图像拍摄操作，包括：
基于所述目标手部动作类别与所述第一映射关系确定需要执行的目标图像拍摄操作；
开始计时，并在计时的时长达到预设时长时执行所述目标图像拍摄操作。
5.如权利要求1所述的图像拍摄方法，其特征在于，在检测手部图像区域之后，执行所述目标动效互动操作之前，所述图像拍摄方法还包括：
对所述手部图像区域内人物的手部进行图像追踪，得到所述手部当前在图像中的位置信息；
基于目标手部动作类别和所述第二映射关系执行相应的目标动效互动操作，包括：
基于所述目标手部动作类别和所述第二映射关系确定需要执行的目标动效互动操作；
根据所述位置信息执行所述目标动效互动操作。
6.如权利要求1所述的图像拍摄方法，其特征在于，在对所述手部图像区域中手部的动作进行识别之前，所述图像拍摄方法还包括：采集外界环境的声音信息。
7.如权利要求1所述的图像拍摄方法，其特征在于，对所述手部图像区域中手部的动作进行识别，包括：
对所述手部图像区域中手部的动作进行识别；
当识别到的手部动作信息满足预设动作条件时，获取所述实景图像的下一帧图像；
将所述实景图像更新为所述下一帧图像，并返回执行在所述实景图像中检测包含所述人物手部的手部图像区域的步骤直到满足预设终止条件为止，得到识别到的多个手部动作信息。
8.如权利要求1所述的图像拍摄方法，其特征在于，基于所述目标手部动作类别和所述第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和所述第二映射关系执行相应的目标动效互动操作，包括：
基于所述目标手部动作类别和所述第一映射关系执行相应的目标图像拍摄操作，得到拍摄图像；
基于目标手部动作类别和所述第二映射关系确定需要执行的目标动效互动操作；
对所述拍摄图像进行手部动作识别，并根据识别到的手部动作类别确定相应的动效信息；
根据所述动效信息执行所述目标动效互动操作。
9.如权利要求1所述的图像拍摄方法，其特征在于，基于所述目标手部动作类别和所述第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和所述第二映射关系执行相应的目标动效互动操作，包括：
基于目标手部动作类别和所述第二映射关系执行相应的目标动效互动操作；
在执行目标动效互动操作期间，对当前采集到的实景图像进行手部动作识别，得到当前手部动作类别；
根据当前手部动作类别确定执行图像拍摄操作的时间；
基于所述目标手部动作类别、所述时间和所述第一映射关系执行相应的目标图像拍摄操作。
10.如权利要求1所述的图像拍摄方法，其特征在于，还包括：
在执行所述图像拍摄操作期间，对拍摄到的图像进行手部动作识别；
当识别到的手部动作类别为预设类别时，停止执行图像拍摄操作。
11.一种基于手势的图像拍摄装置，其特征在于，包括：
图像采集单元，用于接收手势拍摄请求，并根据手势拍摄请求实时采集人物的实景图像；
检测单元，用于在所述实景图像中检测包含所述人物手部的手部图像区域；
识别单元，包括：
识别子单元，用于对所述手部图像区域中手部的动作进行识别；
匹配子单元，用于确定识别到的手部动作类别是否与外界环境的声音信息匹配，若匹配，则将识别到的手部动作类别作为目标手部动作类别；
查找单元，用于查找手部动作类别与图像拍摄操作之间的第一映射关系、以及与动效互动操作之间的第二映射关系；
执行单元，用于当仅查找到所述第一映射关系时，基于所述目标手部动作类别与所述第一映射关系执行相应的目标图像拍摄操作；当查找到所述第一映射关系和所述第二映射关系时，基于所述目标手部动作类别和所述第一映射关系执行相应的目标图像拍摄操作，并基于目标手部动作类别和所述第二映射关系执行相应的目标动效互动操作；
展示单元，用于展示拍摄结果。
12.如权利要求11所述的图像拍摄装置，其特征在于，所述检测单元，用于：
将所述实景图像的尺寸缩放到图像识别模型对应的尺寸，得到缩放后图像；
将缩放后图像的颜色转换成所述图像识别模型规定的颜色，得到颜色转换后图像；
基于训练后的所述图像识别模型在所述颜色转换后图像中检测包含手部图像特征的图像区域。
13.如权利要求11所述的图像拍摄装置，其特征在于，所述识别单元，用于：
基于训练后的图像分类模型识别所述手部图像区域中手部图像特征可能属于的预设动作类别；
对所述手部图像特征可能属于的每种预设动作类别设置对应的权重；
根据每种预设动作类别及其对应的权重，确定所述手部动作所属的目标动作类别。
14.如权利要求11所述的图像拍摄装置，其特征在于，还包追踪单元；
所述追踪单元，用于在检测单元检测手部图像区域之后，执行单元执行目标动效互动操作之前，对所述手部图像区域内人物的手部进行图像追踪，得到所述手部当前在图像中的位置信息；
所述执行单元，用于基于所述目标手部动作类别和所述第二映射关系确定需要执行的目标动效互动操作；根据所述位置信息执行所述目标动效互动操作。
15.如权利要求11所述的图像拍摄装置，其特征在于，还包括声音采集单元；
所述声音采集单元，用于采集外界环境的声音信息。
16.如权利要求11所述的图像拍摄装置，其特征在于，所述执行单元包括：
拍摄执行子单元，用于基于所述目标手部动作类别和所述第一映射关系执行相应的目标图像拍摄操作，得到拍摄图像；
动效执行子单元，用于基于目标手部动作类别和所述第二映射关系确定需要执行的目标动效互动操作；对所述拍摄图像进行手部动作识别，并根据识别到的手部动作类别确定相应的动效信息；根据所述动效信息执行所述目标动效互动操作。
17.如权利要求11所述的图像拍摄装置，其特征在于，所述执行单元包括：
动效执行子单元，用于基于目标手部动作类别和所述第二映射关系执行相应的目标动效互动操作；
动作识别子单元，用于在执行目标动效互动操作期间，对当前采集到的实景图像进行手部动作识别，得到当前手部动作类别；
时间确定子单元，用于根据当前手部动作类别确定执行图像拍摄操作的时间；
拍摄执行子单元，用于基于所述目标手部动作类别、所述时间和所述第一映射关系执行相应的目标图像拍摄操作。
18.一种存储介质，其特征在于，所述存储介质存储有指令，所述指令被处理器执行时实现如权利要求1-10任一项所述基于手势的图像拍摄方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711422385.0A CN107911614B (zh) | 2017-12-25 | 2017-12-25 | 一种基于手势的图像拍摄方法、装置和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711422385.0A CN107911614B (zh) | 2017-12-25 | 2017-12-25 | 一种基于手势的图像拍摄方法、装置和存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN107911614A CN107911614A (zh) | 2018-04-13 |
| CN107911614B true CN107911614B (zh) | 2019-09-27 |
Family
ID=61871192
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201711422385.0A Active CN107911614B (zh) | 2017-12-25 | 2017-12-25 | 一种基于手势的图像拍摄方法、装置和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN107911614B (zh) |
Families Citing this family (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110415062A (zh) * | 2018-04-28 | 2019-11-05 | 香港乐蜜有限公司 | 基于服饰试穿的信息处理方法和装置 |
| CN110858409A (zh) * | 2018-08-24 | 2020-03-03 | 北京微播视界科技有限公司 | 动画生成方法和装置 |
| CN110941327A (zh) * | 2018-09-21 | 2020-03-31 | 北京微播视界科技有限公司 | 虚拟对象的显示方法和装置 |
| CN110941974B (zh) * | 2018-09-21 | 2021-07-20 | 北京微播视界科技有限公司 | 虚拟对象的控制方法和装置 |
| CN109376612B (zh) * | 2018-09-27 | 2022-04-22 | 广东小天才科技有限公司 | 一种基于手势协助定位学习的方法和系统 |
| CN109547696B (zh) * | 2018-12-12 | 2021-07-30 | 维沃移动通信（杭州）有限公司 | 一种拍摄方法及终端设备 |
| CN109885231B (zh) | 2019-02-27 | 2021-07-02 | 北京市商汤科技开发有限公司 | 显示方法及装置、电子设备及存储介质 |
| CN110213481A (zh) * | 2019-05-23 | 2019-09-06 | 厦门美柚信息科技有限公司 | 提示视频拍摄状态的方法、装置及移动终端 |
| CN112752016B (zh) * | 2020-02-14 | 2023-06-16 | 腾讯科技（深圳）有限公司 | 一种拍摄方法、装置、计算机设备和存储介质 |
| CN111552388B (zh) * | 2020-05-06 | 2023-05-26 | 重庆中宏建设监理有限公司 | 工程造价进度管理系统 |
| CN111627097B (zh) * | 2020-06-01 | 2023-12-01 | 上海商汤智能科技有限公司 | 一种虚拟景物的展示方法及装置 |
| CN111640165A (zh) * | 2020-06-08 | 2020-09-08 | 上海商汤智能科技有限公司 | Ar合影图像的获取方法、装置、计算机设备及存储介质 |
| CN111787223B (zh) * | 2020-06-30 | 2021-07-16 | 维沃移动通信有限公司 | 视频拍摄方法、装置和电子设备 |
| CN112532833A (zh) * | 2020-11-24 | 2021-03-19 | 重庆长安汽车股份有限公司 | 智能拍录系统 |
| CN112492221B (zh) * | 2020-12-18 | 2022-07-12 | 维沃移动通信有限公司 | 拍照方法、装置、电子设备及存储介质 |
| CN112906553B (zh) | 2021-02-09 | 2022-05-17 | 北京字跳网络技术有限公司 | 图像处理方法、装置、设备及介质 |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101742114A (zh) * | 2009-12-31 | 2010-06-16 | 上海量科电子科技有限公司 | 通过手势识别来决定拍摄操作的方法及装置 |
| CN104020843A (zh) * | 2013-03-01 | 2014-09-03 | 联想(北京)有限公司 | 一种信息处理方法及一种电子设备 |
| CN104284013A (zh) * | 2013-07-10 | 2015-01-14 | Lg电子株式会社 | 电子装置及其控制方法 |
| CN105022470A (zh) * | 2014-04-17 | 2015-11-04 | 中兴通讯股份有限公司 | 一种基于唇读的终端操作方法及装置 |
| CN105451029A (zh) * | 2015-12-02 | 2016-03-30 | 广州华多网络科技有限公司 | 一种视频图像的处理方法及装置 |
| CN106385591A (zh) * | 2016-10-17 | 2017-02-08 | 腾讯科技（上海）有限公司 | 视频处理方法及视频处理装置 |
| CN106774894A (zh) * | 2016-12-16 | 2017-05-31 | 重庆大学 | 基于手势的交互式教学方法及交互系统 |
| CN106804007A (zh) * | 2017-03-20 | 2017-06-06 | 合网络技术（北京）有限公司 | 一种网络直播中自动匹配特效的方法、系统及设备 |
| CN107357428A (zh) * | 2017-07-07 | 2017-11-17 | 京东方科技集团股份有限公司 | 基于手势识别的人机交互方法及装置、系统 |
-
2017
- 2017-12-25 CN CN201711422385.0A patent/CN107911614B/zh active Active
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101742114A (zh) * | 2009-12-31 | 2010-06-16 | 上海量科电子科技有限公司 | 通过手势识别来决定拍摄操作的方法及装置 |
| CN104020843A (zh) * | 2013-03-01 | 2014-09-03 | 联想(北京)有限公司 | 一种信息处理方法及一种电子设备 |
| CN104284013A (zh) * | 2013-07-10 | 2015-01-14 | Lg电子株式会社 | 电子装置及其控制方法 |
| CN105022470A (zh) * | 2014-04-17 | 2015-11-04 | 中兴通讯股份有限公司 | 一种基于唇读的终端操作方法及装置 |
| CN105451029A (zh) * | 2015-12-02 | 2016-03-30 | 广州华多网络科技有限公司 | 一种视频图像的处理方法及装置 |
| CN106385591A (zh) * | 2016-10-17 | 2017-02-08 | 腾讯科技（上海）有限公司 | 视频处理方法及视频处理装置 |
| CN106774894A (zh) * | 2016-12-16 | 2017-05-31 | 重庆大学 | 基于手势的交互式教学方法及交互系统 |
| CN106804007A (zh) * | 2017-03-20 | 2017-06-06 | 合网络技术（北京）有限公司 | 一种网络直播中自动匹配特效的方法、系统及设备 |
| CN107357428A (zh) * | 2017-07-07 | 2017-11-17 | 京东方科技集团股份有限公司 | 基于手势识别的人机交互方法及装置、系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN107911614A (zh) | 2018-04-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107911614B (zh) | 一种基于手势的图像拍摄方法、装置和存储介质 | |
| US20220044056A1 (en) | Method and apparatus for detecting keypoints of human body, electronic device and storage medium | |
| US20240161426A1 (en) | Collaborative augmented reality | |
| CN111556278B (zh) | 一种视频处理的方法、视频展示的方法、装置及存储介质 | |
| CN111726536B (zh) | 视频生成方法、装置、存储介质及计算机设备 | |
| CN112738408B (zh) | 图像修改器的选择性识别和排序 | |
| CN109194879B (zh) | 拍照方法、装置、存储介质及移动终端 | |
| CN106254848B (zh) | 一种基于增强现实的学习方法及终端 | |
| CN103942021B (zh) | 内容呈现方法，内容呈现方式的推送方法和智能终端 | |
| CN108525305B (zh) | 图像处理方法、装置、存储介质及电子设备 | |
| CN109819313A (zh) | 视频处理方法、装置及存储介质 | |
| CN109618184A (zh) | 视频处理方法及装置、电子设备和存储介质 | |
| CN110119700B (zh) | 虚拟形象控制方法、虚拟形象控制装置和电子设备 | |
| CN108255304A (zh) | 基于增强现实的视频数据处理方法、装置和存储介质 | |
| CN106165430A (zh) | 视频直播方法及装置 | |
| US20230020093A1 (en) | Real time object surface identification for augmented reality environments | |
| CN106372243A (zh) | 应用于电子终端的试题搜索方法和装置 | |
| CN108345667A (zh) | 一种搜索方法及相关装置 | |
| US20230368461A1 (en) | Method and apparatus for processing action of virtual object, and storage medium | |
| CN110457214A (zh) | 应用测试方法及装置、电子设备 | |
| WO2020114157A1 (zh) | 交互控制方法和装置、存储介质及电子装置 | |
| CN111586466B (zh) | 一种视频数据处理方法、装置及存储介质 | |
| CN108848313A (zh) | 一种多人拍照方法、终端和存储介质 | |
| CN112206515B (zh) | 游戏物体状态切换方法、装置、设备及存储介质 | |
| CN109257649A (zh) | 一种多媒体文件生成方法及终端设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |