CN114079724A - 起跳抓拍方法、装置及存储介质 - Google Patents

起跳抓拍方法、装置及存储介质 Download PDF

Info

Publication number
CN114079724A
CN114079724A CN202010762427.0A CN202010762427A CN114079724A CN 114079724 A CN114079724 A CN 114079724A CN 202010762427 A CN202010762427 A CN 202010762427A CN 114079724 A CN114079724 A CN 114079724A
Authority
CN
China
Prior art keywords
take
image
snapshot
image frames
image frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010762427.0A
Other languages
English (en)
Inventor
李国盛
冉飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN202010762427.0A priority Critical patent/CN114079724A/zh
Priority to US17/211,820 priority patent/US11601588B2/en
Priority to EP21165100.5A priority patent/EP3945717A1/en
Publication of CN114079724A publication Critical patent/CN114079724A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/743Bracketing, i.e. taking a series of images with varying exposure conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/81Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Psychiatry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Social Psychology (AREA)
  • Computing Systems (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

本公开是关于一种起跳抓拍方法、装置及存储介质。其中,起跳抓拍方法包括:响应于获取到用户起跳前触发的拍摄操作,进入起跳抓拍模式开始在指定时长内进行图像帧的采集;基于采集的图像帧筛选至少一帧指定图像帧,其中,指定图像帧为指定时长内用户处于起跳高点的图像帧;若采集时长未达到指定时长但基于采集到图像帧筛选到指定图像帧,或者若采集时长达到指定时长,执行拍摄操作并基于指定图像帧输出起跳抓拍图像。通过本公开的起跳抓拍方法,可以保证起跳抓拍图像是用户在起跳过程中抓拍到的具有最佳起跳姿势的图像,进而保证用户方便、快捷得获取到具有最佳起跳姿势的起跳抓拍图像。

Description

起跳抓拍方法、装置及存储介质
技术领域
本公开涉及图像拍摄技术领域,尤其涉及一种起跳抓拍方法、装置及存储介质。
背景技术
利用终端进行拍摄留念已经成为用户的一个习惯。例如,当用户在户外游玩时,常常想要拍下起跳姿势的照片。对于起跳姿势的照片,拍摄到的用户在跳到顶点时的照片为最佳的起跳姿势的照片。
但是,由于用户在按下拍摄按钮与用户到达挑起的顶点的时间不匹配,加之拍照系统内部的延时性,使得抓拍到一张用户在跳到顶点时的照片比较困难。
发明内容
为克服相关技术中存在的问题,本公开提供一种起跳抓拍方法、装置及存储介质。
根据本公开实施例的第一方面,提供一种起跳抓拍方法,包括响应于获取到用户起跳前触发的拍摄操作,进入起跳抓拍模式开始在指定时长内进行图像帧的采集;基于采集的图像帧筛选至少一帧指定图像帧,所述指定图像帧为所述指定时长内用户处于起跳高点的图像帧;若采集时长未达到所述指定时长但基于采集到图像帧筛选到所述指定图像帧,或者若采集时长达到所述指定时长,执行拍摄操作并基于所述指定图像帧输出所述起跳抓拍图像。
在一种实施方式中,所述指定图像帧包括至少两帧图像帧,所述至少两帧图像帧包括:多帧图像帧中按照起跳高点从高到低顺序排序的第一数量的图像帧;或者多帧图像帧中用户处于起跳最高点的图像帧以及与所述用户处于起跳最高点的图像帧前后相邻的第二数量的图像帧;或者多帧图像帧中与用户处于起跳最高点的图像帧前后相邻的第三数量的图像帧;所述基于所述指定图像帧输出所述起跳抓拍图像,包括:基于所述至少两帧图像帧合成并输出所述起跳抓拍图像。
在另一种实施方式中,基于采集的图像帧筛选所述指定图像帧,包括:缓存采集的图像帧至人脸识别缓存区以及原图缓冲区;响应于所述人脸识别缓存区和/或所述原图缓冲区中缓存新采集的图像帧,调用滑动选帧算法以指定滑动窗口筛选所述指定图像帧。
在又一种实施方式中,以指定滑动窗口筛选所述指定图像帧,包括:依次针对每一滑动窗口内的图像帧进行内容识别并得到对应内容的坐标信息;响应于在所述指定时长内基于所述坐标信息获取到表征起跳高度最高的峰值坐标,将与所述峰值坐标对应图像帧,和/或与所述峰值坐标对应图像帧前后相邻的指定数量的图像帧,作为所述指定图像帧;或者,响应于在所述指定时长内基于所述坐标信息未获取到表征起跳高度最高的峰值坐标,将最新滑动窗口内的图像帧作为所述指定图像帧。
在又一种实施方式中,针对每一滑动窗口内的图像帧进行内容识别,包括:针对每一滑动窗口内的图像帧进行人体跟踪识别,和/或对每一滑动窗口内的图像帧进行人体预设部位识别。
在又一种实施方式中,所述预设部位包括人眼和/或人脸。
在又一种实施方式中,基于所述指定图像帧输出所述起跳抓拍图像,包括:将所述指定图像帧通过多帧降噪算法合成并输出所述起跳抓拍图像。
在又一种实施方式中,所述起跳抓拍方法还包括:进入起跳抓拍模式开始进行图像帧的采集之前,降低当前拍摄场景对应标准曝光参数的曝光表。
在又一种实施方式中,所述起跳抓拍方法还包括:响应于进入起跳抓拍模式,实时进行预览图片的展示以及缓存。
根据本公开实施例的第二方面,提供一种起跳抓拍装置,包括:采集模块,用于响应于获取到用户起跳前触发的拍摄操作,进入起跳抓拍模式开始在指定时长内进行图像帧的采集;筛选模块,用于基于采集的图像帧筛选至少一帧指定图像帧,所述指定图像帧为所述指定时长内用户处于起跳高点的图像帧;处理模块,若采集时长未达到所述指定时长但基于采集到图像帧筛选到所述指定图像帧,或者若采集时长达到所述指定时长,用于执行拍摄操作并基于所述指定图像帧输出所述起跳抓拍图像。
在一种实施方式中,所述指定图像帧包括至少两帧图像帧,所述至少两帧图像帧包括:多帧图像帧中按照起跳高点从高到低顺序排序的第一数量的图像帧;或者多帧图像帧中用户处于起跳最高点的图像帧以及与所述用户处于起跳最高点的图像帧前后相邻的第二数量的图像帧;或者多帧图像帧中与用户处于起跳最高点的图像帧前后相邻的第三数量的图像帧;所述处理模块还用于:基于所述至少两帧图像帧合成并输出所述起跳抓拍图像。
在另一种实施方式中,所述筛选模块用于:缓存采集的图像帧至人脸识别缓存区以及原图缓冲区;响应于所述人脸识别缓存区和/或所述原图缓冲区中缓存新采集的图像帧,调用滑动选帧算法以指定滑动窗口筛选所述指定图像帧。
在又一种实施方式中,所述筛选模块用于:依次针对每一滑动窗口内的图像帧进行内容识别并得到对应内容的坐标信息;响应于在所述指定时长内基于所述坐标信息获取到表征起跳高度最高的峰值坐标,将与所述峰值坐标对应图像帧,和/或与所述峰值坐标对应图像帧前后相邻的指定数量的图像帧,作为所述指定图像帧;或者响应于在所述指定时长内基于所述坐标信息未获取到表征起跳高度最高的峰值坐标,将最新滑动窗口内的图像帧作为所述指定图像帧。
在又一种实施方式中,所述筛选模块用于:针对每一滑动窗口内的图像帧进行人体跟踪识别,和/或对每一滑动窗口内的图像帧进行人体预设部位识别。
在又一种实施方式中,所述预设部位包括人眼和/或人脸。
在又一种实施方式中,所述处理模块用于:将所述指定图像帧通过多帧降噪算法合成并输出所述起跳抓拍图像。
在又一种实施方式中,所述起跳抓拍装置还包括调整曝光表模块,所述调整曝光表模块用于:进入起跳抓拍模式开始进行图像帧的采集之前,降低当前拍摄场景对应标准曝光参数的曝光表。
在又一种实施方式中,所述起跳抓拍装置还包括缓存模块,所述缓存模块用于:响应于进入起跳抓拍模式,实时进行预览图片的展示以及缓存。
根据本公开实施例的第三方面,提供一种起跳抓拍装置,包括处理器;用于存储处理器可执行指令的存储器;其中,处理器被配置为用于调用指令执行本公开第一方面或第一方面任意实施方式中所述的起跳抓拍方法。
根据本公开实施例的第四方面,提供一种非临时性计算机可读存储介质,当存储介质中的指令由移动终端的处理器执行时,使得移动终端能够执行本公开第一方面或第一方面任意实施方式中所述的起跳抓拍方法。
本公开的实施例提供的技术方案可以包括以下有益效果:本公开提供的起跳抓拍方法,通过响应于获取到用户起跳前触发的拍摄操作,进入起跳抓拍模式并进行图像帧的采集,根据基于采集到的图像帧来筛选出指定图像帧,并基于指定图像帧输出起跳抓拍图像。由于起跳抓拍图像是根据在起跳抓拍模式中筛选出的指定图像帧而确定的,可以保证起跳抓拍图像是用户在起跳过程中抓拍到的具有最佳起跳姿势的图像,进而保证用户方便、快捷得获取到具有最佳起跳姿势的起跳抓拍图像。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1是根据一示例性实施例示出的一种起跳抓拍方法的流程图;
图2是根据一示例性实施例示出的一种起跳抓拍方法的操作示意图;
图3是根据一示例性实施例示出的基于采集的图像帧筛选指定图像帧的流程图;
图4是根据一示例性实施例示出的以指定滑动窗口筛选指定图像帧的流程图;
图5是根据一示例性实施例示出的一种筛选指定图像帧的示意图;
图6是根据一示例性实施例示出的一种与图5相对应的更新滑动窗口的图像帧的示意图;
图7是根据一示例性实施例示出的一种应用起跳抓拍方法的系统的框图;
图8是根据一示例性实施例示出的一种起跳抓拍装置的框图;
图9是根据一示例性实施例示出的一种用于起跳抓拍的装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
目前,利用终端进行拍摄留念已经成为用户的一个习惯。例如,当用户在户外游玩时,常常想要拍下起跳姿势的照片。对于起跳姿势的照片,拍摄到的在用户在跳到顶点时的照片为最佳的起跳姿势的照片。
但是,由于用户在按下拍摄按钮与用户到达跳起的顶点的时间不匹配,加之拍照系统内部的延时性,使得拍摄出来的照片中的人物往往并不位于跳起的最高点,用户为了抓拍到一张满意的起跳照片往往需要进行多次尝试。
目前,现有移动终端的拍摄模组的连拍功能在一定程度上能够满足用户的上述拍摄需求。但是连拍功能还存在一些缺点,例如拍摄不够智能,即用户需要在连拍的多张照片中手动挑选出起跳效果较好的照片;除此之外,知晓拍摄模组的连拍功能可以拍摄到起跳照片的用户数量也相对较少,因此,导致利用拍摄模组的连拍功能进行拍摄起跳照片的普及度不高。
本公开提供的一种起跳抓拍方法,通过响应于获取到用户起跳前触发的拍摄操作,进入起跳抓拍模式并进行图像帧的采集,根据基于采集到的图像帧来筛选出指定图像帧,并基于指定图像帧输出起跳抓拍图像。本公开的起跳抓拍方法可以保证起跳抓拍图像是用户在起跳过程中抓拍到的具有最佳起跳姿势的图像,进而保证用户方便、快捷得获取到具有最佳起跳姿势的起跳抓拍图像。
本公开实施例提供的起跳抓拍方法可以应用于终端,该终端可以是具有图像采集功能和图像处理功能的智能手机、平板电脑等移动终端。除此之外,本公开实施例提供的起跳抓拍方法还可以应用于拍摄模组中,例如,单反相机、微单相机等。
图1是根据一示例性实施例示出的一种起跳抓拍方法的流程图,如图1所示,起跳抓拍方法包括步骤S11-步骤S13,下面将分别介绍各步骤。
在步骤S11中,响应于获取到用户起跳前触发的拍摄操作,进入起跳抓拍模式开始在指定时长内进行图像帧的采集。
在应用过程中,用户可以在起跳前触发拍摄操作。
响应于获取到的用户在起跳前触发的拍摄操作,即可进入起跳抓拍模式。并通过起跳抓拍模式进行图像帧的采集。其中,采集的图像帧的画面中可以包含起跳的待拍摄人物。
由于用户是在起跳前触发拍摄操作,因此,在采集的图像帧中至少包括用户在起跳过程中由最低点向最高点运动的过程。在一种可能的示例中,采集的图像帧还可以包括用户在起跳过程中由最低点向最高点运动,再落回最低点的过程。可以理解的是,采集的图像帧的各画面中的待拍摄人物所处的位置可以构成一个开口向下的抛物线。
在步骤S12中,基于采集的图像帧筛选至少一帧指定图像帧。其中,指定图像帧为指定时长内用户处于起跳高点的图像帧。
在一示例中,由于理想的起跳抓拍图像是待拍摄人物位于跳起最高点对应的图像帧,因此,指定图像帧可以至少包括待拍摄人物运动到跳起最高点对应的图像帧。在另一种可能的示例中,若没有采集到待拍摄人物运动到跳起最高点对应的图像帧,指定图像帧还可以至少包括待拍摄人物运动到接近跳起最高点对应的图像帧,例如,现令第4帧图像帧为待拍摄人物运动到跳起最高点对应的图像帧,那么,指定图像帧还可以是第2帧图像帧、第3帧图像帧、第5帧图像帧和第6帧图像帧中的至少一帧图像帧。
在步骤S13中,若采集时长未达到指定时长但基于采集到图像帧筛选到指定图像帧,或者若采集时长达到指定时长,执行拍摄操作并基于指定图像帧输出起跳抓拍图像。
在一示例中,若采集时长还未达到指定时长但基于采集到图像帧已经筛选到了指定图像帧,则执行拍摄操作,并基于筛选出的指定图像帧来输出起跳抓拍图像。由于起跳抓拍图像是根据在起跳抓拍模式中筛选出的指定图像帧而确定的,可以保证起跳抓拍图像是用户在起跳过程中抓拍到的具有最佳起跳姿势的图像。
现以指定时长为2s为例,当在进入起跳抓拍模式的第1.5s时就已经筛选出了指定图像帧,则可以停止采集图像帧的操作,并触发基于筛选出的指定图像帧来执行拍摄操作。进一步地,可以基于指定图像帧来输出起跳抓拍图像。通过此种方式,可以令采集的图像帧减少,一方面,可以有效减少采集的图像帧占用的终端内存,另一方面,还可以减少在采集图像帧过程中所消耗的系统运算量,进而提高终端的运行速度,为用户带来良好的用户体验。
在又一示例中,若采集时长已达到指定时长,则执行拍摄操作,并基于筛选出的指定图像帧来输出起跳抓拍图像。其中,指定图像帧可以是待拍摄人物运动到接近跳起最高点对应的图像帧,需要说明的是,指定图像帧可以是一帧或多帧。
现依然以指定时长为2s为例,当进入起跳抓拍模式的第2s时,表示采集时长已经到达指定时长,则需要执行拍摄操作。并根据采集的图像帧筛选出指定图像帧,进一步地,基于指定图像帧来输出起跳抓拍图像。
需要说明的是,为了能够保证采集的图像帧包含用户运动到跳起最高点对应的图像帧,需要采集用户在起跳过程中所有的图像帧。
根据经验可知,用户从起跳到落下整个过程花费的时长大约在1s-1.5s,因此,可以基于在大于1.5s的指定时长内采集的图像帧来筛选用于输出起跳抓拍图像的指定图像帧。以此可以保证采集的图像帧包含用户运动到跳起最高点对应的图像帧,进而为筛选到用于输出起跳抓拍图像的指定图像帧打下基础。其中,指定时长还可以根据实际情况进行确定,在本公开中,不对指定时长作具体限定。
现以下述实施例对本公开的起跳抓拍方法进行说明。
图2是根据一示例性实施例示出的一种起跳抓拍方法的操作示意图。
如图2所示,当检测到用户在起跳前点击起跳抓拍操作的按钮,表示用户出发了起跳抓拍的拍摄操作,此时,即可进入到起跳抓拍模式,并在起跳抓拍模式下进行图像帧的采集。
进一步地,可以在指定时长(例如2s)内采集用户在跳跃过程中的图像帧,并在采集的图像帧中筛选用于输出起跳抓拍的指定图像帧。
在一种示例中,指定图像帧可以是一帧图像帧,例如,指定图像帧可以是用户跳跃到最高点对应的图像帧(如本附图中的第二子图所示),或者,指定图像帧还可以是用户运动到接近跳跃最高点对应的图像帧,并基于该指定图像帧输出起跳抓拍图像。在另一示例中,指定图像帧还可以是多帧图像帧,即用户跳跃到最高点对应的图像帧以及用户跳跃到最高点对应的图像帧的前后相邻的图像帧,并基于多帧指定图像帧输出起跳抓拍图像。需要说明的是,基于多帧指定图像帧输出起跳抓拍图像,可以减少起跳抓拍图像的噪声,提高起跳抓拍图像的清晰度。
本公开提供的一种起跳抓拍方法,通过响应于获取到用户起跳前触发的拍摄操作,进入起跳抓拍模式并进行图像帧的采集,根据基于采集到的图像帧来筛选出指定图像帧,并基于指定图像帧输出起跳抓拍图像。由于起跳抓拍图像是根据在起跳抓拍模式中筛选出的指定图像帧而确定的,可以保证起跳抓拍图像是用户在起跳过程中抓拍到的具有最佳起跳姿势的图像,进而保证用户方便、快捷得获取到具有最佳起跳姿势的起跳抓拍图像。
在本公开中,指定图像帧可以包括至少两帧图像帧。
在一示例中,前文所述的至少两帧图像帧可以包括多帧图像帧中按照起跳高点从高到低顺序排序的第一数量的图像帧。例如,依然令第4帧图像帧为待拍摄人物运动到跳起最高点对应的图像帧,那么第4图像帧、第3图像帧、第2图像帧和第1图像帧,或者第4图像帧、第5图像帧、第6图像帧和第7图像帧为按照起跳高点从高到低顺序排序的图像帧。若第一数量的图像帧为三帧图像帧,则至少两帧图像帧可以包括第4图像帧、第3图像帧和第2图像帧;或者,第4图像帧、第5图像帧和第6图像帧。
需要说明的是,第一数量可以根据实际情况进行确定,在本公开中,不对第一数量作具体限定。
在一示例中,至少两帧图像帧还可以包括多帧图像帧中用户处于起跳最高点的图像帧基于与用户处于起跳最高点的图像帧前后相邻的第二数量的图像帧。继续以上文第4帧图像帧为待拍摄人物运动到跳起最高点对应的图像帧为例,若第二数量的图像帧为两帧图像帧,则至少两帧图像帧可以包括第2图像帧至第6图像帧。
其中,第二数量可以根据实际情况进行确定,在本公开中,不对第二数量作具体限定。
在一示例中,至少两帧图像帧还可以包括多帧图像帧中与用户处于起跳最高点的图像帧前后相邻的第三数量的图像帧。继续以上文第4帧图像帧为待拍摄人物运动到跳起最高点对应的图像帧为例,若第三数量的图像帧为两帧图像帧,则至少两帧图像帧可以包括第2图像帧、第3帧图像帧、第5帧图像帧和第6图像帧。
其中,第三数量可以根据实际情况进行确定,在本公开中,不对第三数量作具体限定。
在一种实施方式中,基于指定图像帧输出起跳抓拍图像可以通过以下方式实现。
在应用过程中,可以基于至少两帧图像帧合成并输出起跳抓拍图像。
基于至少两帧图像帧输出起跳抓拍图像,可以减少起跳抓拍图像的噪声,提高起跳抓拍图像的清晰度。本公开将通过以下实施例对基于采集的图像帧筛选指定图像帧的过程进行说明。
图3是根据一示例性实施例示出的基于采集的图像帧筛选指定图像帧的流程图。
在本公开一示例性实施例中,如图3所示,基于采集的图像帧筛选用于输出起跳抓拍图像的指定图像帧包括步骤S21和步骤S22。下面将分别介绍各步骤。
在步骤S21中,缓存采集的图像帧至人脸识别缓存区以及原图缓冲区。
进入抓拍模式后,采集的图像帧可以缓存在人脸识别缓存区以及原图缓冲区。
在一种实施例中,缓存在人脸识别缓存区的图像帧以及缓存在原图缓冲区的图像帧可以是相对应的。其中,缓存在人脸识别缓存区的图像帧可以用于后期对图像帧中的内容识别,以及确定对应内容的坐标信息;缓存在原图缓冲区的图像帧是采集到的图像帧的原图,可以成为筛选指定图像帧的素材库。
在步骤S22中,响应于人脸识别缓存区和/或原图缓冲区中缓存新采集的图像帧,调用滑动选帧算法以指定滑动窗口筛选指定图像帧。
在一示例中,当人脸识别缓存区和/或原图缓冲区缓存了新采集的图像帧,将会把新采集到的图像帧实时、依次传输到滑动窗口中。基于当前滑动窗口中存储的图像帧,通过滑动选帧算法来筛选用于输出起跳抓拍图像的指定图像帧。
需要说明的是,滑动窗口的长度可以是指定数量的图像帧。其中,指定数量的图像帧可以根据实际情况进行确定,例如可以是五帧图像帧,在本公开中,不对滑动窗口的长度作具体限定。
在应用过程中,滑动窗口中可以保存当前存储在滑动选帧窗口中的图像帧。以滑动窗口的长度为五帧图像帧为例,在第一滑动窗口中,若第一滑动窗口中存储的图像帧包括第2帧至第6帧图像帧,则第1帧图像帧不会被保存;在第二滑动窗口中,若第二滑动窗口中存储的图像帧包括第3帧至第7帧图像帧,则第1帧和第2帧图像帧均不会被保存。由于滑动窗口可以实时清除之前无用的图像帧,因此,可以有效减少内存所占空间,提高终端的运行速度,增加用户在使用过程中的体验感。
由于本公开的起跳抓拍方法是基于指定图像帧来合成并输出起跳抓拍图像的,因此,指定图像帧可以对形成的起跳抓拍图像产生重要影响。本公开将通过以下实施例对以指定滑动窗口筛选指定图像帧的过程进行说明。
图4是根据一示例性实施例示出的以指定滑动窗口筛选指定图像帧的流程图。
在本公开一示例性实施例中,如图4所示,以指定滑动窗口筛选用于输出起跳抓拍图像的指定图像帧包括步骤S31和步骤S32。下面将分别介绍各步骤。
在步骤S31中,依次针对每一滑动窗口内的图像帧进行内容识别并得到对应内容的坐标信息。
在一种可能的实施例中,对图像帧的内容识别可以包括对每一滑动窗口内的图像帧进行人体跟踪识别,和/或对每一滑动窗口内的图像帧进行人体预设部位识别。
其中,与人体内容相对应的内容的坐标信息是待拍摄人物的人体的坐标信息;与人体预设部位内容相对应的内容的坐标信息是待拍摄人物的人体预设部位的坐标信息。
在一示例中,可以识别出滑动窗口内的每一图像帧中的待拍摄人物的人体,并分别确定每一图像帧中人体的坐标信息。若确定待拍摄人物的人体坐标为(X1,Y1),则Y1可以表征该图像帧中的待拍摄人物的起跳高度。
进一步地,可以基于表征图像帧中的待拍摄人物的起跳高度Y1,确定所有图像帧中待拍摄人物的起跳高度Y1最大的图像帧,并可以将该图像帧确定为指定图像帧。
在一示例中,可以识别出滑动窗口内的每一图像帧中待拍摄人物的人体预设部位,并分别确定每一图像帧中人体预设部位的坐标信息。若确定待拍摄人物的人体预设部位的坐标为(X2,Y2),则Y2可以表征该图像帧中的待拍摄人物的起跳高度。
由于基于人体预设部位的坐标信息来确定指定图像帧与上文的基于人体的坐标信息来确定指定图像帧原理相同,在此不再赘述。
进一步地,待拍摄人物中预设部位可以至少包括人眼或人脸。其中,预设部位还可以根据实际情况进行确定,可以是鼻子、耳朵、嘴巴等,在本公开中,不对预设部位作具体限定。
在步骤S32中,响应于在指定时长内基于坐标信息获取到表征起跳高度最高的峰值坐标,将与峰值坐标对应图像帧,和/或与峰值坐标对应图像帧前后相邻的指定数量的图像帧,作为指定图像帧;或者,响应于在指定时长内基于坐标信息为获取到表征起跳高度最高的峰值坐标,将最新滑动窗口内的图像帧作为指定图像帧。
在一种示例中,若在指定时长内,基于采集到的图像帧中的人脸坐标信息获得到表征待拍摄人物起跳高度最高的峰值坐标后,可以将与峰值坐标对应的图像帧,以及该图像帧的前后相邻的图像帧作为指定图像帧。并基于指定图像帧来得到起跳抓拍图像,以保证得到的起跳抓拍图像中的待拍摄人物所处的位置可以更加靠近待拍摄人物跳跃的最高点。
为了便于解释本示例,现以下述实施例进行说明。
图5是根据一示例性实施例示出的一种筛选指定图像帧的示意图;图6是根据一示例性实施例示出的一种与图5相对应的更新滑动窗口的图像帧的示意图。
结合图5和图6可知,在第一滑动窗口中,第一滑动窗口中包括未起跳的图像帧(对应图6中的“-1”帧)至第3帧图像帧。由于通过比较每一图像帧中表征待拍摄人物的起跳高度的坐标,并未找到指定图像帧,因此,继续将最新缓存在人脸识别缓存区的图像帧传输至滑动窗口中。需要说明的是,将最新缓存在人脸识别缓存区的图像帧传输至滑动窗口后,可以形成第二滑动窗口。
在第二滑动窗口中,第二滑动窗口中包括第0帧图像帧至第4帧图像帧。由于未找到指定图像帧,因此,需要继续将最新缓存在人脸识别缓存区的图像帧传输至滑动窗口中,此时,可以形成第三滑动窗口。
在第三滑动窗口中,第三滑动窗口中包括第1帧图像帧至第5帧图像帧。由于第4帧图像帧中表征待拍摄人物的起跳高度的坐标大于第3帧图像帧和第5帧图像帧中表征待拍摄人物的起跳高度的坐标,由此可知,第4帧图像帧中的待拍摄人物的起跳高度是在指定时长内采集到图像帧中的待拍摄人物的起跳高度的峰值F。即表示第4帧图像帧中的待拍摄人物跳跃到了起跳过程中的最高点。因此可以确定第4帧图像帧为指定图像帧。
为了能够使获得的抓拍起跳图像能够更加清晰,可以基于多帧图像帧来确定抓拍起跳图像。
在一种示例中,指定图像帧除了包括上文所述的第4帧图像帧之外,还包括该图像帧前后相邻的指定数量的图像帧。其中,指定数量可以根据实际情况进行确定,例如,可以是两帧,在本公开中,不对指定数量作具体限定。
结合上文描述可知,指定图像帧除了包括图5或图6示出的第4帧图像帧之外,还可以包括第2帧图像帧、第3帧图像帧、第5帧图像帧和第6帧图像帧。承接上文所述的第三滑动窗口,由于第三滑动窗口尚未保存第6帧图像帧,因此,需要继续将最新缓存在人脸识别缓存区的图像帧传输至滑动窗口中,此时,可以形成第四滑动窗口。通过第四滑动窗口获取到第6帧图像帧。
在得到第6帧图像帧后,表示已经筛选出指定图像帧。进一步地,可以执行拍摄操作,并基于指定图像帧合成并输出起跳抓拍图像。
在另一种示例中,若在指定时长内,基于采集到的图像帧中的人脸坐标信息尚未获得表征待拍摄人物起跳高度最高的峰值坐标,则可以将最新滑动窗口内的图像帧作为指定图像帧。
在一实施例中,在到达指定时长之际,若最新滑动窗口内的图像帧分别为第24帧图像帧至第28帧图像帧,则可以将这五帧图像帧作为指定图像帧。并基于指定图像帧合成并输出起跳抓拍图像。
由于基于单帧图像得到的起跳抓拍图像往往会存在噪声,因此,可以通过将多帧图像帧进行合成来得到起跳抓拍图像,用以减少起跳抓拍图像的噪声。本公开将通过以下实施例对基于多张指定图像帧合成起跳抓拍图像的过程进行说明。
在本公开一示例性实施例中,可以将多张指定图像帧通过多帧降噪算法来合成并输出起跳抓拍图像。
由于多张指定图像帧是相邻的图像帧,因此,图像帧之间的画面可以更加接近并且可以彼此补充自身图像帧中存在的噪声。进一步地,通过多帧降噪算法对多张指定图像帧进行合成并输出降噪得到起跳抓拍图像,进而减少形成的起跳抓拍图像的噪声,提高起跳抓拍图像的清晰度。
在应用过程中,抓拍的对象为运动的待拍摄人物,由于待拍摄人物在运动过程中往往会出现运动模糊的情况,为了解决这一问题,可以通过调整采集图像帧的曝光参数来实现。本公开将通过以下实施例对通过调整采集图像帧的曝光参数来解决运动模糊这一问题的过程进行说明。
在本公开一示例性实施例中,起跳抓拍方法还包括在进入起跳抓拍模式开始进行图像帧的采集之前,降低当前拍摄场景对应标准曝光参数的曝光表。
在进行图像帧的采集过程中,不同的拍摄场景对应的曝光参数并不相同。在应用过程中,可以提前预设关于拍摄场景与曝光参数之间的对应关系的曝光表。当检测到当前的拍摄场景为A时,可以基于曝光表找到与拍摄场景A对应的曝光参数。
由于长曝光会产生运动模糊的现象,因此,在进入起跳抓拍模式开始进行图像帧的采集之前,可以降低当前拍摄场景对应标准曝光参数的曝光表。在应用过程中,可以将曝光表中的与各拍摄场景对应的曝光参数降低至原来曝光参数的二分之一。
作为一种可能的实施例,还可以将曝光表中的与各拍摄场景对应的曝光参数降低至原来曝光参数的三分之一,在本公开中,曝光参数降低量可以根据实际情况进行调整,在本公开中,不对曝光参数的降低量作具体限定。
在本公开一示例性实施例中,起跳抓拍方法还包括响应于进入起跳抓拍模式,实时进行预览图片的展示以及缓存。通过此种方式,用户在采集图像帧的过程中,可以预览到每一图像帧,提高了用户在使用过程中的体验感,并且缓存的每一图像帧还可以为用户手动选取想要的图像帧提供了可能。
为了进一步解释本公开的起跳抓拍方法,现以下述实施例进行说明。
图7是根据一示例性实施例示出的一种应用起跳抓拍方法的系统的框图。
在一种实施方式中,如图7所示,响应到用户发出的拍摄起跳抓拍的请求,在进入起跳抓拍模式开始进行图像帧的采集之前,曝光控制模块将对应当前拍摄场景的曝光参数进行降低,以得到短曝光表。
进一步地,传感器将基于短曝光表进行图像帧的采集,并经过图像信号处理模块处理后,可以将采集的图像帧依次缓存至人脸识别缓存模块和原图缓冲模块。
响应于人脸识别缓存区和/或原图缓冲区中缓存的新采集的图像帧,选帧模块通过调用滑动选帧算法以指定滑动窗口进行指定图像帧的筛选。其中,指定图像帧是用于合成并输出起跳抓拍图像的。
进一步地,将筛选出的多张指定图像帧缓存在过滤帧缓存模块中,并通过多帧去噪模块对指定图像帧进行合并降噪处理,以形成并输出起跳抓拍图像。其中,形成起跳抓拍图像可以返回到摄像应用中,以供用户观看。
需要说明的是,用户还可以发出的预览起跳抓拍的请求。响应于预览请求,经过图像信号处理模块处理的图像帧还可以缓存在预览数据缓存模块中,并依次通过预览通道和预览图像生成模块来生成预览图像。生成的预览图像通过摄像应用,来供用户预览。
通过上述描述可知,本公开提供的一种起跳抓拍方法,通过响应于获取到用户起跳前触发的拍摄操作,进入起跳抓拍模式并进行图像帧的采集,根据基于采集到的图像帧来筛选出指定图像帧,并基于指定图像帧输出起跳抓拍图像。由于起跳抓拍图像是根据在起跳抓拍模式中筛选出的指定图像帧而确定的,可以保证起跳抓拍图像是用户在起跳过程中抓拍到的具有最佳起跳姿势的图像,进而保证用户方便、快捷得获取到具有最佳起跳姿势的起跳抓拍图像。
基于相同的构思,本公开实施例还提供一种起跳抓拍装置。
可以理解的是,本公开实施例提供的起跳抓拍装置为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。结合本公开实施例中所公开的各示例的单元及算法步骤,本公开实施例能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。本领域技术人员可以对每个特定的应用来使用不同的方法来实现所描述的功能,但是这种实现不应认为超出本公开实施例的技术方案的范围。
图8是根据一示例性实施例示出的一种起跳抓拍装置框图。参照图8,起跳抓拍装置包括采集模块110、筛选模块120和处理模块130。下面将分别介绍各模块。
采集模块110被配置为用于:响应于获取到用户起跳前触发的拍摄操作,进入起跳抓拍模式开始在指定时长内进行图像帧的采集。
筛选模块120被配置为用于:基于采集的图像帧筛选至少一帧指定图像帧。其中,指定图像帧为指定时长内用户处于起跳高点的图像帧。
处理模块130被配置为用于:若采集时长未达到指定时长但基于采集到图像帧筛选到所述指定图像帧,或者若采集时长达到指定时长,执行拍摄操作并基于所述指定图像帧输出起跳抓拍图像。
在本公开一示例性实施例中,指定图像帧包括至少两帧图像帧,至少两帧图像帧包括:多帧图像帧中按照起跳高点从高到低顺序排序的第一数量的图像帧;或者多帧图像帧中用户处于起跳最高点的图像帧以及与用户处于起跳最高点的图像帧前后相邻的第二数量的图像帧;或者多帧图像帧中与用户处于起跳最高点的图像帧前后相邻的第三数量的图像帧。其中,处理模块130还用于:基于至少两帧图像帧合成并输出起跳抓拍图像。
在本公开一示例性实施例中,筛选模块120被配置为用于:缓存采集的图像帧至人脸识别缓存区以及原图缓冲区;响应于人脸识别缓存区和/或原图缓冲区中缓存新采集的图像帧,调用滑动选帧算法以指定滑动窗口筛选指定图像帧。
在本公开一示例性实施例中,筛选模块120被配置为用于:依次针对每一滑动窗口内的图像帧进行内容识别并得到对应内容的坐标信息;响应于在指定时长内基于坐标信息获取到表征起跳高度最高的峰值坐标,将与峰值坐标对应图像帧,和/或与峰值坐标对应图像帧前后相邻的指定数量的图像帧,作为指定图像帧;或者,响应于在指定时长内基于坐标信息未获取到表征起跳高度最高的峰值坐标,将最新滑动窗口内的图像帧作为指定图像帧。
在本公开一示例性实施例中,筛选模块120被配置为用于:针对每一滑动窗口内的图像帧进行人体跟踪识别,和/或对每一滑动窗口内的图像帧进行人体预设部位识别。
在本公开一示例性实施例中,预设部位包括人眼和/或人脸。
在本公开一示例性实施例中,处理模块130被配置为用于:将指定图像帧通过多帧降噪算法合成并输出起跳抓拍图像。
在本公开一示例性实施例中,起跳抓拍装置还包括调整曝光表模块。其中,调整曝光表模块被配置为用于:进入起跳抓拍模式开始进行图像帧的采集之前,降低当前拍摄场景对应标准曝光参数的曝光表。
在本公开一示例性实施例中,起跳抓拍装置还包括缓存模块。其中,缓存模块被配置为用于:响应于进入起跳抓拍模式,实时进行预览图片的展示以及缓存。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图9是根据一示例性实施例示出的一种用于起跳抓拍的装置800的框图。例如,用于起跳抓拍的装置800可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图9,用于起跳抓拍的装置800可以包括以下一个或多个组件:处理组件802,存储器804,电力组件806,多媒体组件808,音频组件810,输入/输出(I/O)的接口812,传感器组件814,以及通信组件816。
处理组件802通常控制用于起跳抓拍的装置800的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件802可以包括一个或多个模块,便于处理组件802和其他组件之间的交互。例如,处理组件802可以包括多媒体模块,以方便多媒体组件808和处理组件802之间的交互。
存储器804被配置为存储各种类型的数据以支持在用于起跳抓拍的装置800的操作。这些数据的示例包括用于在用于起跳抓拍的装置800上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电力组件806为用于起跳抓拍的装置800的各种组件提供电力。电力组件806可以包括电源管理系统,一个或多个电源,及其他与为用于起跳抓拍的装置800生成、管理和分配电力相关联的组件。
多媒体组件808包括在所述用于起跳抓拍的装置800和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件808包括一个前置摄像头和/或后置摄像头。当用于起跳抓拍的装置800处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件810被配置为输出和/或输入音频信号。例如,音频组件810包括一个麦克风(MIC),当用于起跳抓拍的装置800处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中,音频组件810还包括一个扬声器,用于输出音频信号。
I/O接口812为处理组件802和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件814包括一个或多个传感器,用于为装置800提供各个方面的状态评估。例如,传感器组件814可以检测到用于起跳抓拍的装置800的打开/关闭状态,组件的相对定位,例如所述组件为用于起跳抓拍的装置800的显示器和小键盘,传感器组件814还可以检测用于起跳抓拍的装置800或用于起跳抓拍的装置800一个组件的位置改变,用户与用于起跳抓拍的装置800接触的存在或不存在,用于起跳抓拍的装置800方位或加速/减速和用于起跳抓拍的装置800的温度变化。传感器组件814可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件814还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件816被配置为便于用于起跳抓拍的装置800和其他设备之间有线或无线方式的通信。用于起跳抓拍的装置800可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件816还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,用于起跳抓拍的装置800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器804,上述指令可由用于起跳抓拍的装置800的处理器820执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
可以理解的是,本公开中“多个”是指两个或两个以上,其它量词与之类似。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。
进一步可以理解的是,术语“第一”、“第二”等用于描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开,并不表示特定的顺序或者重要程度。实际上,“第一”、“第二”等表述完全可以互换使用。例如,在不脱离本公开范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。
进一步可以理解的是,除非有特殊说明,“连接”包括两者之间不存在其他构件的直接连接,也包括两者之间存在其他元件的间接连接。
进一步可以理解的是,本公开实施例中尽管在附图中以特定的顺序描述操作,但是不应将其理解为要求按照所示的特定顺序或是串行顺序来执行这些操作,或是要求执行全部所示的操作以得到期望的结果。在特定环境中,多任务和并行处理可能是有利的。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (20)

1.一种起跳抓拍方法,其特征在于,包括:
响应于获取到用户起跳前触发的拍摄操作,进入起跳抓拍模式开始在指定时长内进行图像帧的采集;
基于采集的图像帧筛选至少一帧指定图像帧,所述指定图像帧为所述指定时长内用户处于起跳高点的图像帧;
若采集时长未达到所述指定时长但基于采集到图像帧筛选到所述指定图像帧,或者若采集时长达到所述指定时长,执行拍摄操作并基于所述指定图像帧输出所述起跳抓拍图像。
2.根据权利要求1所述的起跳抓拍方法,其特征在于,所述指定图像帧包括至少两帧图像帧,所述至少两帧图像帧包括:
多帧图像帧中按照起跳高点从高到低顺序排序的第一数量的图像帧;或者
多帧图像帧中用户处于起跳最高点的图像帧以及与所述用户处于起跳最高点的图像帧前后相邻的第二数量的图像帧;或者
多帧图像帧中与用户处于起跳最高点的图像帧前后相邻的第三数量的图像帧;
所述基于所述指定图像帧输出所述起跳抓拍图像,包括:
基于所述至少两帧图像帧合成并输出所述起跳抓拍图像。
3.根据权利要求1所述的起跳抓拍方法,其特征在于,基于采集的图像帧筛选所述指定图像帧,包括:
缓存采集的图像帧至人脸识别缓存区以及原图缓冲区;
响应于所述人脸识别缓存区和/或所述原图缓冲区中缓存新采集的图像帧,调用滑动选帧算法以指定滑动窗口筛选所述指定图像帧。
4.根据权利要求3所述的起跳抓拍方法,其特征在于,以指定滑动窗口筛选所述指定图像帧,包括:
依次针对每一滑动窗口内的图像帧进行内容识别并得到对应内容的坐标信息;
响应于在所述指定时长内基于所述坐标信息获取到表征起跳高度最高的峰值坐标,将与所述峰值坐标对应图像帧,和/或与所述峰值坐标对应图像帧前后相邻的指定数量的图像帧,作为所述指定图像帧;
或者
响应于在所述指定时长内基于所述坐标信息未获取到表征起跳高度最高的峰值坐标,将最新滑动窗口内的图像帧作为所述指定图像帧。
5.根据权利要求4所述的起跳抓拍方法,其特征在于,针对每一滑动窗口内的图像帧进行内容识别,包括:
针对每一滑动窗口内的图像帧进行人体跟踪识别,和/或对每一滑动窗口内的图像帧进行人体预设部位识别。
6.根据权利要求5所述的起跳抓拍方法,其特征在于,所述预设部位包括人眼和/或人脸。
7.根据权利要求1所述的起跳抓拍方法,其特征在于,基于所述指定图像帧输出所述起跳抓拍图像,包括:
将所述指定图像帧通过多帧降噪算法合成并输出所述起跳抓拍图像。
8.根据权利要求1所述的起跳抓拍方法,其特征在于,所述方法还包括:
进入起跳抓拍模式开始进行图像帧的采集之前,降低当前拍摄场景对应标准曝光参数的曝光表。
9.根据权利要求1所述的起跳抓拍方法,其特征在于,所述方法还包括:
响应于进入起跳抓拍模式,实时进行预览图片的展示以及缓存。
10.一种起跳抓拍装置,其特征在于,包括:
采集模块,用于响应于获取到用户起跳前触发的拍摄操作,进入起跳抓拍模式开始在指定时长内进行图像帧的采集;
筛选模块,用于基于采集的图像帧筛选至少一帧指定图像帧,所述指定图像帧为所述指定时长内用户处于起跳高点的图像帧;
处理模块,若采集时长未达到所述指定时长但基于采集到图像帧筛选到所述指定图像帧,或者若采集时长达到所述指定时长,用于执行拍摄操作并基于所述指定图像帧输出所述起跳抓拍图像。
11.根据权利要求10所述的起跳抓拍装置,其特征在于,所述指定图像帧包括至少两帧图像帧,所述至少两帧图像帧包括:
多帧图像帧中按照起跳高点从高到低顺序排序的第一数量的图像帧;或者
多帧图像帧中用户处于起跳最高点的图像帧以及与所述用户处于起跳最高点的图像帧前后相邻的第二数量的图像帧;或者
多帧图像帧中与用户处于起跳最高点的图像帧前后相邻的第三数量的图像帧;
所述处理模块还用于:
基于所述至少两帧图像帧合成并输出所述起跳抓拍图像。
12.根据权利要求10所述的起跳抓拍装置,其特征在于,所述筛选模块用于:
缓存采集的图像帧至人脸识别缓存区以及原图缓冲区;
响应于所述人脸识别缓存区和/或所述原图缓冲区中缓存新采集的图像帧,调用滑动选帧算法以指定滑动窗口筛选所述指定图像帧。
13.根据权利要求12所述的起跳抓拍装置,其特征在于,所述筛选模块用于:
依次针对每一滑动窗口内的图像帧进行内容识别并得到对应内容的坐标信息;
响应于在所述指定时长内基于所述坐标信息获取到表征起跳高度最高的峰值坐标,将与所述峰值坐标对应图像帧,和/或与所述峰值坐标对应图像帧前后相邻的指定数量的图像帧,作为所述指定图像帧;
或者
响应于在所述指定时长内基于所述坐标信息未获取到表征起跳高度最高的峰值坐标,将最新滑动窗口内的图像帧作为所述指定图像帧。
14.根据权利要求13所述的起跳抓拍装置,其特征在于,所述筛选模块用于:
针对每一滑动窗口内的图像帧进行人体跟踪识别,和/或对每一滑动窗口内的图像帧进行人体预设部位识别。
15.根据权利要求14所述的起跳抓拍装置,其特征在于,所述预设部位包括人眼和/或人脸。
16.根据权利要求10所述的起跳抓拍装置,其特征在于,所述处理模块用于:
将所述指定图像帧通过多帧降噪算法合成并输出所述起跳抓拍图像。
17.根据权利要求10所述的起跳抓拍装置,其特征在于,所述装置还包括调整曝光表模块,所述调整曝光表模块用于:
进入起跳抓拍模式开始进行图像帧的采集之前,降低当前拍摄场景对应标准曝光参数的曝光表。
18.根据权利要求10所述的起跳抓拍装置,其特征在于,所述装置还包括缓存模块,所述缓存模块用于:
响应于进入起跳抓拍模式,实时进行预览图片的展示以及缓存。
19.一种起跳抓拍装置,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:执行权利要求1至9中任意一项所述的起跳抓拍方法。
20.一种非临时性计算机可读存储介质,当所述存储介质中的指令由移动终端的处理器执行时,使得移动终端能够执行权利要求1至9中任意一项所述的起跳抓拍方法。
CN202010762427.0A 2020-07-31 2020-07-31 起跳抓拍方法、装置及存储介质 Pending CN114079724A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202010762427.0A CN114079724A (zh) 2020-07-31 2020-07-31 起跳抓拍方法、装置及存储介质
US17/211,820 US11601588B2 (en) 2020-07-31 2021-03-25 Take-off capture method and electronic device, and storage medium
EP21165100.5A EP3945717A1 (en) 2020-07-31 2021-03-26 Take-off capture method and electronic device, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010762427.0A CN114079724A (zh) 2020-07-31 2020-07-31 起跳抓拍方法、装置及存储介质

Publications (1)

Publication Number Publication Date
CN114079724A true CN114079724A (zh) 2022-02-22

Family

ID=75252345

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010762427.0A Pending CN114079724A (zh) 2020-07-31 2020-07-31 起跳抓拍方法、装置及存储介质

Country Status (3)

Country Link
US (1) US11601588B2 (zh)
EP (1) EP3945717A1 (zh)
CN (1) CN114079724A (zh)

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011172092A (ja) * 2010-02-19 2011-09-01 Nikon Corp 撮像装置、画像再生方法、画像再生プログラム、画像再生プログラムを記録した記録媒体および画像再生装置
CN104144289A (zh) * 2013-05-10 2014-11-12 华为技术有限公司 拍照方法及装置
KR20140135378A (ko) * 2013-05-16 2014-11-26 엘지전자 주식회사 휴대 단말기 및 그 제어 방법
CN104200204A (zh) * 2014-09-02 2014-12-10 福建富士通信息软件有限公司 一种图片处理装置及方法
US20150063636A1 (en) * 2013-08-30 2015-03-05 Samsung Electronics Co., Ltd. Method and apparatus for processing digital images
US20150189142A1 (en) * 2013-12-30 2015-07-02 Samsung Electronics Co., Ltd. Electronic apparatus and method of capturing moving subject by using the same
CN105409195A (zh) * 2014-05-23 2016-03-16 华为技术有限公司 拍照方法和装置
CN105554400A (zh) * 2016-02-26 2016-05-04 南开大学 一种通过智能手环实现自动跳跃拍照的方法
CN105635567A (zh) * 2015-12-24 2016-06-01 小米科技有限责任公司 拍照方法和装置
CN106027913A (zh) * 2016-07-15 2016-10-12 深圳市金立通信设备有限公司 一种拍照方法及终端
CN106056035A (zh) * 2016-04-06 2016-10-26 南京华捷艾米软件科技有限公司 一种基于体感技术的幼儿园智能监控方法
US20170087409A1 (en) * 2014-08-11 2017-03-30 Seiko Epson Corporation Imaging control method, imaging control apparatus, imaging control system, and program
CN108702442A (zh) * 2016-10-14 2018-10-23 深圳市大疆创新科技有限公司 用于时刻捕获的系统和方法
CN108933853A (zh) * 2017-05-25 2018-12-04 李杰勇 应用于自拍杆蓝牙遥控的跳跃抓拍装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5131257B2 (ja) * 2009-08-27 2013-01-30 カシオ計算機株式会社 表示制御装置及び表示制御プログラム
KR101700357B1 (ko) * 2009-11-30 2017-01-26 삼성전자주식회사 점프 영상 촬영 장치 및 방법
US20110304774A1 (en) * 2010-06-11 2011-12-15 Microsoft Corporation Contextual tagging of recorded data
US9307112B2 (en) * 2013-05-31 2016-04-05 Apple Inc. Identifying dominant and non-dominant images in a burst mode capture
US10664690B2 (en) * 2013-11-21 2020-05-26 Mo' Motion Ventures Jump shot and athletic activity analysis system
JP6481866B2 (ja) * 2014-01-28 2019-03-13 ソニー株式会社 情報処理装置、撮像装置、情報処理方法、及び、プログラム
JP2017173252A (ja) * 2016-03-25 2017-09-28 オリンパス株式会社 画像処理装置、画像処理方法および画像処理プログラム
CN106127698A (zh) 2016-06-15 2016-11-16 深圳市万普拉斯科技有限公司 图像降噪处理方法和装置
US11019253B1 (en) * 2018-12-27 2021-05-25 Gopro, Inc. Image capture device with an automatic image capture capability

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011172092A (ja) * 2010-02-19 2011-09-01 Nikon Corp 撮像装置、画像再生方法、画像再生プログラム、画像再生プログラムを記録した記録媒体および画像再生装置
CN104144289A (zh) * 2013-05-10 2014-11-12 华为技术有限公司 拍照方法及装置
KR20140135378A (ko) * 2013-05-16 2014-11-26 엘지전자 주식회사 휴대 단말기 및 그 제어 방법
US20150063636A1 (en) * 2013-08-30 2015-03-05 Samsung Electronics Co., Ltd. Method and apparatus for processing digital images
US20150189142A1 (en) * 2013-12-30 2015-07-02 Samsung Electronics Co., Ltd. Electronic apparatus and method of capturing moving subject by using the same
CN105409195A (zh) * 2014-05-23 2016-03-16 华为技术有限公司 拍照方法和装置
US20170087409A1 (en) * 2014-08-11 2017-03-30 Seiko Epson Corporation Imaging control method, imaging control apparatus, imaging control system, and program
CN104200204A (zh) * 2014-09-02 2014-12-10 福建富士通信息软件有限公司 一种图片处理装置及方法
CN105635567A (zh) * 2015-12-24 2016-06-01 小米科技有限责任公司 拍照方法和装置
CN105554400A (zh) * 2016-02-26 2016-05-04 南开大学 一种通过智能手环实现自动跳跃拍照的方法
CN106056035A (zh) * 2016-04-06 2016-10-26 南京华捷艾米软件科技有限公司 一种基于体感技术的幼儿园智能监控方法
CN106027913A (zh) * 2016-07-15 2016-10-12 深圳市金立通信设备有限公司 一种拍照方法及终端
CN108702442A (zh) * 2016-10-14 2018-10-23 深圳市大疆创新科技有限公司 用于时刻捕获的系统和方法
CN108933853A (zh) * 2017-05-25 2018-12-04 李杰勇 应用于自拍杆蓝牙遥控的跳跃抓拍装置

Also Published As

Publication number Publication date
US11601588B2 (en) 2023-03-07
EP3945717A1 (en) 2022-02-02
US20220038619A1 (en) 2022-02-03

Similar Documents

Publication Publication Date Title
CN108419016B (zh) 拍摄方法、装置及终端
US9661223B2 (en) Method and device for photographing including camera shake
KR101800101B1 (ko) 촬영 파라미터 조정 방법, 장치, 프로그램 및 기록매체
CN107426502B (zh) 拍摄方法及装置、电子设备、存储介质
CN106210496B (zh) 照片拍摄方法及装置
US11539888B2 (en) Method and apparatus for processing video data
CN110677734B (zh) 视频合成方法、装置、电子设备及存储介质
EP3945494A1 (en) Video processing method, apparatus and storage medium
CN114500821B (zh) 拍照方法及装置、终端及存储介质
CN112217990A (zh) 任务调度方法、任务调度装置及存储介质
CN113315903B (zh) 图像获取方法和装置、电子设备、存储介质
CN111586296B (zh) 图像拍摄方法、图像拍摄装置及存储介质
CN112333384B (zh) 预览图像方法、预览图像装置及存储介质
CN111726531B (zh) 图像拍摄方法、处理方法、装置、电子设备及存储介质
CN114079724A (zh) 起跳抓拍方法、装置及存储介质
CN114339357A (zh) 图像采集方法、图像采集装置及存储介质
CN114697517A (zh) 视频处理方法、装置、终端设备及存储介质
CN107707819B (zh) 图像拍摄方法、装置及存储介质
CN112188095B (zh) 拍照方法、拍照装置及存储介质
CN112203015B (zh) 相机控制方法、装置及介质系统
CN114339015B (zh) 一种拍照处理方法、拍照处理装置及存储介质
CN117956268A (zh) 预览帧率控制方法及其装置
CN116342373A (zh) 图像处理方法、装置、设备及存储介质
CN115733913A (zh) 连续拍照方法及装置、存储介质
CN117616772A (zh) 一种拍照预览方法、装置及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination