CN107820018A - 用户拍照方法、装置及设备 - Google Patents

用户拍照方法、装置及设备 Download PDF

Info

Publication number
CN107820018A
CN107820018A CN201711243735.7A CN201711243735A CN107820018A CN 107820018 A CN107820018 A CN 107820018A CN 201711243735 A CN201711243735 A CN 201711243735A CN 107820018 A CN107820018 A CN 107820018A
Authority
CN
China
Prior art keywords
face
image
targeted customer
user
photo
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711243735.7A
Other languages
English (en)
Inventor
欧阳丹
谭国辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201711243735.7A priority Critical patent/CN107820018A/zh
Publication of CN107820018A publication Critical patent/CN107820018A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)

Abstract

本申请公开了一种用户拍照方法、装置及设备,其中,方法包括:当获取拍照指令时,检测当前的预览画面中是否包含多个用户的面部图像;若检测到预览画面中包含多个用户的面部图像,则检测多个用户的面部图像是否包含预存的目标用户的面部图像;若检测到包含目标用户的面部图像,则对预览画面拍摄多帧照片;对每帧照片中目标用户的嘴部状态进行检测,并输出目标用户具有微笑状态的照片。由此,提高了图像质量和拍照效率,解决了现有技术中,在拍照时因照片中的微笑情况不理想,而需要重新拍照导致拍照效率较低的技术问题。

Description

用户拍照方法、装置及设备
技术领域
本申请涉及拍照技术领域,尤其涉及一种用户拍照方法、装置及设备。
背景技术
目前,为了满足用户在生产和生活中的需要,终端设备的功能越来越多元化,比如,终端设备中,通常包含满足用户拍照需求的拍照功能等,然而,用户在使用终端设备进行拍照时,可能会对照片的中的微笑情况并不满意,比如,可能并没有微笑导致面部看起来僵硬,又比如,微笑幅度较小而导致面部不自然等,从而导致用户对拍摄的照片不满意。
相关技术中,当用户对拍摄的照片不满意时,需要通过终端设备重新拍摄,直至拍摄出满意的照片,操作繁琐。
发明内容
本申请提供一种用户拍照方法、装置及设备,以解决现有技术中,在拍照时因照片中的微笑情况不理想,而需要重新拍照导致拍照效率较低的技术问题。
本申请实施例提供一种用户拍照方法,包括以下步骤:当获取拍照指令时,检测当前的预览画面中是否包含多个用户的面部图像;若检测到所述预览画面中包含多个用户的面部图像,则检测所述多个用户的面部图像是否包含预存的目标用户的面部图像;若检测到包含所述目标用户的面部图像,则对所述预览画面拍摄多帧照片;对每帧照片中所述目标用户的嘴部状态进行检测,并输出所述目标用户具有微笑状态的照片。
本申请另一实施例提供一种用户拍照装置,包括:第一检测模块,用于在获取拍照指令时,检测当前的预览画面中是否包含多个用户的面部图像;所述第一检测模块,还用于在检测到所述预览画面中包含多个用户的面部图像时,检测所述多个用户的面部图像是否包含预存的目标用户的面部图像;拍摄模块,用于在检测到包含所述目标用户的面部图像时,对所述预览画面拍摄多帧照片;输出模块,用于对每帧照片中所述目标用户的嘴部状态进行检测,并输出所述目标用户具有微笑状态的照片。
本申请又一实施例提供一种计算机设备,包括存储器及处理器,所述存储器中储存有计算机可读指令,所述指令被所述处理器执行时,使得所述处理器执行本申请上述实施例所述的用户拍照方法。
本申请还一实施例提供一种非临时性计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如本申请上述实施例所述的用户拍照方法。
本申请实施例提供的技术方案可以包括以下有益效果:
当获取拍照指令时,检测当前的预览画面中是否包含多个用户的面部图像,若检测到所述预览画面中包含多个用户的面部图像,则检测所述多个用户的面部图像是否包含预存的目标用户的面部图像,若检测到包含所述目标用户的面部图像,则对所述预览画面拍摄多帧照片,进而,对每帧照片中所述目标用户的嘴部状态进行检测,并输出所述目标用户具有微笑状态的照片。由此,提高了图像质量和拍照效率,自动挑选出用户具有微笑状态的照片输出,解决了现有技术中,在拍照时因照片中的微笑情况不理想,而需要重新拍照导致拍照效率较低的技术问题。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1是根据本申请一个实施例的用户拍照方法的流程图;
图2(a)是根据现有技术的用户拍照方法的场景示意图;
图2(b)是根据本申请一个实施例的用户拍照方法的场景示意图;
图3是根据本申请另一个实施例的用户拍照方法的流程图;
图4是根据本申请一个具体实施例的用户拍照方法的流程图;
图5是根据本申请一个实施例的用户拍照装置的结构示意图;
图6是根据本申请另一个实施例的用户拍照装置的结构示意图;
图7是根据本申请又一个实施例的用户拍照装置的结构示意图;
以及
图8是根据本申请另一个实施例的图像处理电路的示意图。
具体实施方式
下面详细描述本申请的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本申请,而不能理解为对本申请的限制。
基于以上分析可知,当用户对拍摄的照片中微笑情况不满意时,需要用户通过终端设备重新拍摄,导致拍照时间较长,影响用户体验。
为了解决上述技术问题,本申请提出了一种用户拍照方法,可以在接收到拍照指令时,拍摄多帧照片,并自动筛选出微笑情况较好的图像输出,大大提高了用户对拍摄的照片的满意度,且提高了拍摄效率。
下面参考附图详细描述本申请实施例的用户拍照方法、装置及设备。
其中,本申请实施例的用户拍照方法和装置的执行主体可以为终端设备,其中,终端设备可以是手机、平板电脑、个人数字助理、穿戴式设备等具有拍摄摄像头的硬件设备。该穿戴式设备可以是智能手环、智能手表、智能眼镜等。
图1是根据本申请一个实施例的用户拍照方法的流程图,如图1所示,该方法包括:
步骤101,当获取拍照指令时,检测当前的预览画面中是否包含多个用户的面部图像。
其中,在不同的应用场景下,获取拍照指令的方式不同,比如,在检测到用户触发拍照控件时,获取拍照指令,比如,在获取到用户发送的拍照语音指令时,获取拍照指令,又比如,在检测到用户的动作与拍照预设动作一致时,获取拍照指令等。
应当理解的是,通常在人像拍照场景下,尤其是多人拍照的场景下,照片中微笑的情况不满意而导致对拍摄的照片不满意,因此,在本申请的实施例中,通过检测当前的预览画面中是否包含用户面部图像,以便于进一步确定是否拍摄多帧图像。
需要说明的是,根据应用场景的不同,可采用多种不同的实现方式,实现对预览画面中是否包含多个用户面部图像的检测,示例说明如下:
作为一种可能的实现方式,基于人脸器官的几何特征检测预览画面中是否包含多个用户面部图像,其中,几何特征包含用户面部眼睛、鼻、嘴巴等的形状和彼此之间的几何关系(比如相互之间的距离等)。
作为另一种可能的实现方式,通过弹性图匹配法检测预览画面中是否包含多个用户面部图像,即二维的空间中定义一种对于通常的用户面部变形具有一定的不变性的距离,并采用属性拓扑图来代表用户面部,拓扑图的任一顶点均包含一特征向量,用来记录用户面部在该顶点位置附近的信息,从而,该方法结合了灰度特性和几何因素,通过弹性图与预览图像进行比对以识别是否包含用户面部图像,在比对时可以允许图像存在弹性形变,在克服表情变化对识别的影响方面收到了较好的效果。
步骤102,若检测到预览画面中包含多个用户面部图像,则检测多个用户的面部图像是否包含预存的目标用户的面部图像。
步骤103,若检测到包含目标用户的面部图像,则对预览画面拍摄多帧照片。
其中,预存的目标用户的面部图像包含机主用户的面部图像、机主用户的亲人和朋友的用户面部图像等,该目标用户的面部图像可以为一个也可以为多个,预存的面部图像可以为系统自动设置的机主用户的面部图像,也可以是用户根据个人需要自行设置的相关用户的面部图像,在此不作限制。
具体地,检测用户面部图像中是否包含预存的目标用户的面部图像,若检测到用户面部图像中包含预存的目标用户的面部图像,则为了便于进一步获取到针对目标用户而言拍摄效果较好的照片,则对预览画面拍摄多帧照片。
其中,应当理解的是,当目标用户为机主用户时,可以查询数据库中的照片,并根据照片中出现频率最高的用户面部图像生成目标用户的面部图像,或者,在照片中筛选出自拍照片,比如,由于自拍照片中人脸比例较大,因而,可以根据人脸比例,将比例较大的照片作为自拍照片,又比如,由于自拍照片为采用前置摄像头拍摄的照片,因而,在一些场景下,当拍摄的照片中带有摄像头标记时,可以将带有前置摄像头标记的照片作为自拍照片等,从而,根据自拍照片中出现频率最高的用户面部图像生成目标用户的面部图像。
当然,由于机主用户在日常使用终端设备时,人脸信息可以由前置摄像头等前置人脸识别模块获取,因而,也可以通过前置人脸识别模块在用户使用终端设备时,将采集频率最高的用户面部图像,通过自主学习生成目标用户的面部图像。
需要说明的是,根据应用场景的不同,可采用不同的实现方式检测到用户面部图像中包含预存的目标用户的面部图像,作为一种可能的实现方式,预先存储目标用户的面部图像,则将预览画面中的用户的面部图像与预存的目标用户的面部图像进行匹配,当匹配度高于一定值时,则认为预览画面中包含目标用户的面部图像。
在一些应用场景下,可能用户并不在乎拍摄的照片中包含的所有用户是否具有微笑状态,比如拍摄的照片中包括一个路人,用户并不在意该路人有无微笑状态,也就是说,只有在拍摄的预览画面中,包含目标用户时,该目标用户有无微笑状态才是用户关心的。
比如,当目标用户为机主用户时,当用户通过终端设备进行多人合拍时,可能会导致拍摄的照片中均有用户没有微笑,而机主用户挑选这些照片时,会优先挑选自己具有微笑状态的照片,现有技术中,需要提供给用户拍摄的多张照片,用户通过手动筛选的方式挑选出自己满意的照片,再删除其他的。而在本申请的实施例中,可以直接识别并输出多张照片中机主用户具有微笑状态的照片。
步骤104,对每帧照片中目标用户的嘴部状态进行检测,并输出目标用户具有微笑状态的照片。
可以理解的是,上述的微笑状态除了表示用户有无微笑外,还可以包含用户微笑状态的程度,本申请实施例中的嘴部状态可以对应于用户微笑时嘴唇弯曲的幅度,也可以对应于用户微笑时嘴唇的张开大小等,其中,无论微笑状态包含的内容是什么,其最终的目的都是将微笑表情进行量化,以根据该量化的微笑状态判断用户的微笑是否自然美观等,比如,用户微笑时嘴唇弯曲幅度越大,则对应的用户的微笑状态程度越大,用户的微笑越自然美观,拍摄出来的照片越受用户喜欢等。
其中,根据应用场景的不同,检测用户是否具有微笑状态的方式不同,示例说明如下:
作为一种示例,嘴部状态包括用户微笑时嘴唇弯曲的幅度。
在本示例中,预先存储用户嘴唇没有动作状态下的两端嘴角的位置,进而,识别每帧照片中的用户两端嘴角的位置,并将该位置与预存的两端嘴角的位置进行比对,照片中的用户两端嘴角的位置相对于预存的两端嘴角的位置上扬,则代表用户具有微笑状态,上扬程度越高,用户的微笑状态的程度越大。
作为另一种示例,嘴部状态包括用户微笑时嘴唇是否张开。
在本示例中,可以理解的是,用户的嘴唇的张开,用户牙齿暴露多,因此,可以通过检测每帧照片中是否有用户牙齿,检测用户是否具有微笑状态,也可以通过检测牙齿的数量,检测用户的微笑状态的程度,牙齿的数量越多,用户的微笑状态的程度越大。
具体而言,为了挑选出多帧照片中自然美观的照片,对每帧照片中目标用户的嘴部状态进行检测,并直接输出多帧照片中目标用户具有微笑状态对应的照片,避免拍摄到目标用户对微笑情况不满意的照片时,用户需要手动重新拍摄。
为了更清楚的描述本申请用户拍照方法的有益效果,下面结合其在具体应用场景中的实施过程进行举例,举例说明如下:
作为一种示例:
在日常生活中的人物照拍摄场景下,比如旅游时拍摄人物合照,通常目标用户希望拍摄的照片中处于微笑状态,以纪念其旅游时的开心的心情,如图2(a)所示,如果拍摄的照片中目标用户没有微笑,则目标用户可能对拍摄的照片不满意,因而需要重新拍照。如果采用本申请的用户拍照方法,如图2(b)所示,则会在获取拍照指令时,检测到当前预览画面中是否包含目标用户的面部图像后,对预览画面拍摄多帧照片,对每帧照片中的目标用户嘴部状态进行检测,并直接输出多帧照片中目标用户具有微笑状态对应的照片。由此,每次拍照输出的都是目标用户具有微笑状态的照片,提高了日常生活中人物照的拍摄效率,实用性较高。
需要强调的是,上述实施例中的微笑状态仅仅是针对用户有无微笑确定的,而在实际应用中,可能即使用户的微笑幅度较大,但是导致五官相对扭曲,可能并不如微笑幅度较小的时候美观,因此,在本申请的一个实施例中,当多帧照片中包含不同微笑幅度时还可以根据微笑的美观程度判定需要输出的照片,即预先获取目标用户针对不同微笑幅度的面部图像的美观程度的打分情况,根据不同微笑幅度的面部图像和对应的打分情况建立深度学习模型,进而,针对该深度学习模型输入包含目标用户面部图像的照片帧,根据输出的打分情况确定对应的微笑状态的程度,其中,打分越高微笑状态的程度越高。
也就是说,可以根据用户的偏好信息输出目标用户具有微笑状态的照片,具体而言,可以在输出目标用户具有微笑状态的照片之前,获取目标用户预先设置的微笑偏好信息,该微笑偏好信息可以对应与微笑是否美观的感受相关的嘴唇弯曲程度,牙齿暴露程度等嘴部特征信息,进而,提取每帧目标用户具有微笑状态的照片提取嘴部特征信息,分析嘴部特征信息,输出与微笑偏好信息匹配的照片。
举例而言,根据目标用户的微笑偏好信息,获知对应的嘴部状态信息为不露齿微笑,则对每帧目标用户具有微笑状态的照片提取嘴部特征信息,提取出嘴唇上扬但是没有露齿的照片输出。
综上所述,本申请实施例的用户拍照方法,当获取拍照指令时,检测当前的预览画面中是否包含多个用户的面部图像,若检测到所述预览画面中包含多个用户的面部图像,则检测所述多个用户的面部图像是否包含预存的目标用户的面部图像,若检测到包含所述目标用户的面部图像,则对所述预览画面拍摄多帧照片,进而,对每帧照片中所述目标用户的嘴部状态进行检测,并输出所述目标用户具有微笑状态的照片。由此,提高了图像质量和拍照效率,自动挑选出用户具有微笑状态的照片输出,解决了现有技术中,在拍照时因照片中的微笑情况不理想,而需要重新拍照导致拍照效率较低的技术问题。
基于以上实施例,在确保输出目标用户处于微笑状态的照片的前提下,为了进一步提高照片质量,还可选择其他用户处于微笑状态的照片。
具体而言,图3是根据本申请另一个实施例的用户拍照方法的流程图,如图3所示,上述步骤104包括:
步骤201,对每帧照片中目标用户的嘴部状态进行检测,获取目标用户具有微笑状态的候选照片帧。
步骤202,对每帧候选照片中的其他用户的嘴部状态进行检测,计算具有微笑状态的用户占用户总数的比例。
步骤203,判断比例是否满足预设阈值,若判断获知比例满足预设阈值,则输出对应的照片。
步骤204,若判断获知比例不满足预设阈值,则向多个用户发送微笑提示信息,并对预览画面重新拍摄多帧照片。
具体而言,在检测到多个用户面部图像中包含预存的目标用户的面部图像之后,对预览画面拍摄多帧照片。
进而,对每帧照片中的目标用户的嘴部状态进行检测,获取目标用户具有微笑状态的候选照片帧,进而,对候选照片帧中的每帧照片中的其他用户的嘴部状态进行检测,计算具有微笑状态的用户占用户总数的比例。进一步地,判断上述比例是否满足预设阈值,若满足预设阈值,则表明相关照片中用户的普遍微笑,因此输出对应的照片。
当然,当没有比例满足预设阈值时,也可以将计算的所有用户占用户总数的比例中,最大比例值对应照片输出,由此,保证了输出的照片是拍摄的所有照片中质量较高的照片。或者,也可以向多个用户发送微笑提示信息,比如,语音输出“请各位喊茄子”,或者闪动终端设备的指示灯等,进而,对预览画面重新拍摄多帧照片,以保证最终输出的照片中尽可能多的用户微笑。
举例而言,目标用户为机主用户时,根据用户需求设置预设阈值为50%。当检测到当前预览画面中的多个用户的面部图像中包含机主用户的面部图像后,针对当前预览画面拍摄10帧照片,在拍摄的10帧照片中,对每帧照片中的机主用户的嘴部状态进行检测,获取机主用户具有微笑状态的4帧候选照片帧,对候选照片帧中的每帧照片中的其他用户的嘴部状态进行检测,计算具有微笑状态的用户占用户总数的比例,分别为20%、40%、40%、80%,则将80%比例值对应的照片输出。
为了使得本领域的技术人员,对本申请实施例的用户拍照方法具有更加清楚的了解,下面以该用户拍照方法应用于多人合拍场景为例进行说明,说明如下:
其中,在该场景下,目标用户为机主用户,通过前置人脸识别模块预先存储机主用户的人脸信息。
具体而言,如图4所示,当检测到拍照控件被点击,则进行用户面部图像检测,并检测当前预览画面中是否包含多个用户面部图像,以检测是否为多人合拍场景,如果不为多人合拍场景,则可直接进行正常的拍照流程,并输出对应照片。
如果为多人合拍场景,则将检测到的多个用户面部图像与通过前置人脸识别模块预存的机主人脸信息进行匹配,以判断机主用户是否在当前合拍场景,如果不在,则可直接进行正常的拍照流程,如果在,则为了输出机主用户满意的照片,则对预览画面拍摄多帧照片,对每帧照片中的机主用户嘴部状态进行检测,挑选并输出多帧照片中目标用户具有微笑状态的照片。
综上所述,本申请实施例的用户拍照方法,在确保输出的照片中目标用户具有微笑状态时,其他用户的微笑的比例较高,由此,保证了整张照片的视觉效果。
为了实现上述实施例,本申请还提出了一种用户拍照装置,图5是根据本申请一个实施例的用户拍照装置的结构示意图,如图5所示,该用户拍照装置包括第一检测模块100、拍摄模块200和输出模块300。
其中,第一检测模块100,用于在获取拍照指令时,检测当前的预览画面中是否包含多个用户的面部图像。
第一检测模块100,还用于在检测到预览画面中包含多个用户的面部图像时,检测多个用户的面部图像是否包含预存的目标用户的面部图像。
其中,在不同的应用场景中,可采用不同的方式检测多个用户的面部图像是否包含预存的目标用户的面部图像,在本申请的一个实施例中,如图6所示,在如图5所述的基础上,该用户拍照装置还包括:查询模块400和生成模块500。
其中,查询模块400,用于查询数据库中的照片。
生成模块500,用于根据照片中出现频率最高的用户面部图像生成目标用户的面部图像。
拍摄模块200,用于在检测到包含目标用户的面部图像时,对预览画面拍摄多帧照片。
输出模块300,用于对每帧照片中目标用户的嘴部状态进行检测,并输出目标用户具有微笑状态的照片。
需要说明的是,前述对方法实施例的描述,也适用于本申请实施例的装置,其实现原理类似,在此不再赘述。
上述用户拍照装置中各个模块的划分仅用于举例说明,在其他实施例中,可将用户拍照装置按照需要划分为不同的模块,以完成上述用户拍照装置的全部或部分功能。
综上所述,本申请实施例的用户拍照装置,当获取拍照指令时,检测当前的预览画面中是否包含多个用户的面部图像,若检测到所述预览画面中包含多个用户的面部图像,则检测所述多个用户的面部图像是否包含预存的目标用户的面部图像,若检测到包含所述目标用户的面部图像,则对所述预览画面拍摄多帧照片,进而,对每帧照片中所述目标用户的嘴部状态进行检测,并输出所述目标用户具有微笑状态的照片。由此,提高了图像质量和拍照效率,自动挑选出用户具有微笑状态的照片输出,解决了现有技术中,在拍照时因照片中的微笑情况不理想,而需要重新拍照导致拍照效率较低的技术问题。
图7是根据本申请又一个实施例的用户拍照装置的结构示意图,如图7所示,在如图5所示的基础上,输出模块300包括获取单元310、计算单元320和输出单元330。
其中,获取单元310,用于对每帧照片中目标用户的嘴部状态进行检测,获取目标用户具有微笑状态的候选照片帧。
计算单元320,用于对每帧候选照片中的其他用户的嘴部状态进行检测,计算具有微笑状态的用户占用户总数的比例。
输出单元330,用于判断比例是否满足预设阈值,若判断获知比例满足预设阈值,则输出对应的照片。
需要说明的是,前述对方法实施例的描述,也适用于本申请实施例的装置,其实现原理类似,在此不再赘述。
上述用户拍照装置中各个模块的划分仅用于举例说明,在其他实施例中,可将用户拍照装置按照需要划分为不同的模块,以完成上述用户拍照装置的全部或部分功能。
综上所述,本申请实施例的用户拍照装置,
在确保输出的照片中目标用户具有微笑状态时,其他用户的微笑的比例较高,由此,保证了整张照片的视觉效果。
为了实现上述实施例,本申请还提出了一种计算机设备,上述计算机设备中包括图像处理电路,图像处理电路可以利用硬件和/或软件组件实现,可包括定义ISP(ImageSignal Processing,图像信号处理)管线的各种处理单元。图8为一个实施例中图像处理电路的示意图。如图8所示,为便于说明,仅示出与本申请实施例相关的图像处理技术的各个方面。
如图8所示,图像处理电路包括ISP处理器840和控制逻辑器850。成像设备810捕捉的图像数据首先由ISP处理器840处理,ISP处理器840对图像数据进行分析以捕捉可用于确定和/或成像设备810的一个或多个控制参数的图像统计信息。成像设备810可包括具有一个或多个透镜812和图像传感器814的照相机。图像传感器814可包括色彩滤镜阵列(如Bayer滤镜),图像传感器814可获取用图像传感器814的每个成像像素捕捉的光强度和波长信息,并提供可由ISP处理器840处理的一组原始图像数据。传感器820可基于传感器820接口类型把原始图像数据提供给ISP处理器840。传感器820接口可以利用SMIA(StandardMobile Imaging Architecture,标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。
ISP处理器840按多种格式逐个像素地处理原始图像数据。例如,每个图像像素可具有8、10、12或14比特的位深度,ISP处理器840可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中,图像处理操作可按相同或不同的位深度精度进行。
ISP处理器840还可从图像存储器830接收像素数据。例如,从传感器820接口将原始像素数据发送给图像存储器830,图像存储器830中的原始像素数据再提供给ISP处理器840以供处理。图像存储器830可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器,并可包括DMA(Direct Memory Access,直接直接存储器存取)特征。
当接收到来自传感器820接口或来自图像存储器830的原始图像数据时,ISP处理器840可进行一个或多个图像处理操作,如时域滤波。处理后的图像数据可发送给图像存储器830,以便在被显示之前进行另外的处理。ISP处理器840从图像存储器830接收处理数据,并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。处理后的图像数据可输出给显示器870,以供用户观看和/或由图形引擎或GPU(Graphics ProcessingUnit,图形处理器)进一步处理。此外,ISP处理器840的输出还可发送给图像存储器830,且显示器870可从图像存储器830读取图像数据。在一个实施例中,图像存储器830可被配置为实现一个或多个帧缓冲器。此外,ISP处理器840的输出可发送给编码器/解码器860,以便编码/解码图像数据。编码的图像数据可被保存,并在显示于显示器870设备上之前解压缩。编码器/解码器860可由CPU或GPU或协处理器实现。
ISP处理器840确定的统计数据可发送给控制逻辑器850单元。例如,统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜812阴影校正等图像传感器814统计信息。控制逻辑器850可包括执行一个或多个例程(如固件)的处理器和/或微控制器,一个或多个例程可根据接收的统计数据,确定成像设备810的控制参数以及的控制参数。例如,控制参数可包括传感器820控制参数(例如增益、曝光控制的积分时间)、照相机闪光控制参数、透镜812控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如,在RGB处理期间)的增益水平和色彩校正矩阵,以及透镜812阴影校正参数。
以下为运用图8中图像处理技术实现用户拍照方法的步骤:
当获取拍照指令时,检测当前的预览画面中是否包含多个用户的面部图像;
若检测到所述预览画面中包含多个用户的面部图像,则检测所述多个用户的面部图像是否包含预存的目标用户的面部图像;
若检测到包含所述目标用户的面部图像,则对所述预览画面拍摄多帧照片;
对每帧照片中所述目标用户的嘴部状态进行检测,并输出所述目标用户具有微笑状态的照片。
为了实现上述实施例,本申请还提出一种非临时性计算机可读存储介质,当所述存储介质中的指令由处理器被执行时,使得能够执行如上述实施例描述的用户拍照方法。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本申请的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现定制逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本申请的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本申请的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。如,如果用硬件来实现和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本申请各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。尽管上面已经示出和描述了本申请的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (10)

1.一种用户拍照方法,其特征在于,包括以下步骤:
当获取拍照指令时,检测当前的预览画面中是否包含多个用户的面部图像;
若检测到所述预览画面中包含多个用户的面部图像,则检测所述多个用户的面部图像是否包含预存的目标用户的面部图像;
若检测到包含所述目标用户的面部图像,则对所述预览画面拍摄多帧照片;
对每帧照片中所述目标用户的嘴部状态进行检测,并输出所述目标用户具有微笑状态的照片。
2.如权利要求1所述的方法,其特征在于,还包括:
查询数据库中的照片;
根据所述自拍照片中出现频率最高的用户面部图像生成所述目标用户的面部图像。
3.如权利要求1所述的方法,其特征在于,所述对每帧照片中所述目标用户的嘴部状态进行检测,并输出所述目标用户具有微笑状态的照片,包括:
对每帧照片中所述目标用户的嘴部状态进行检测,获取所述目标用户具有微笑状态的候选照片帧;
对每帧候选照片中的其他用户的嘴部状态进行检测,计算具有微笑状态的用户占用户总数的比例;
判断所述比例是否满足预设阈值,若判断获知所述比例满足预设阈值,则输出对应的照片。
4.如权利要求3所述的方法,其特征在于,在所述判断所述比例是否满足预设阈值之后,还包括:
若判断获知所述比例不满足预设阈值,则向所述多个用户发送微笑提示信息,并对所述预览画面重新拍摄多帧照片。
5.如权利要求1-4任一所述的方法,其特征在于,所述输出所述目标用户具有微笑状态的照片,包括:
获取所述目标用户预先设置的微笑偏好信息;
对每帧所述目标用户具有微笑状态的照片提取嘴部特征信息;
分析所述嘴部特征信息,输出与所述微笑偏好信息匹配的照片。
6.一种用户拍照装置,其特征在于,包括:
第一检测模块,用于在获取拍照指令时,检测当前的预览画面中是否包含多个用户的面部图像;
所述第一检测模块,还用于在检测到所述预览画面中包含多个用户的面部图像时,检测所述多个用户的面部图像是否包含预存的目标用户的面部图像;
拍摄模块,用于在检测到包含所述目标用户的面部图像时,对所述预览画面拍摄多帧照片;
输出模块,用于对每帧照片中所述目标用户的嘴部状态进行检测,并输出所述目标用户具有微笑状态的照片。
7.如权利要求6所述的装置,其特征在于,还包括:
查询模块,用于查询数据库中的照片;
生成模块,用于根据所述自拍照片中出现频率最高的用户面部图像生成所述目标用户的面部图像。
8.如权利要求7所述的装置,其特征在于,所述输出模块包括:
获取单元,用于对每帧照片中所述目标用户的嘴部状态进行检测,获取所述目标用户具有微笑状态的候选照片帧;
计算单元,用于对每帧候选照片中的其他用户的嘴部状态进行检测,计算具有微笑状态的用户占用户总数的比例;
输出单元,用于判断所述比例是否满足预设阈值,若判断获知所述比例满足预设阈值,则输出对应的照片。
9.一种计算机设备,其特征在于,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时,实现如权利要求1-5中任一所述的用户拍照方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-5中任一所述的用户拍照方法。
CN201711243735.7A 2017-11-30 2017-11-30 用户拍照方法、装置及设备 Pending CN107820018A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711243735.7A CN107820018A (zh) 2017-11-30 2017-11-30 用户拍照方法、装置及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711243735.7A CN107820018A (zh) 2017-11-30 2017-11-30 用户拍照方法、装置及设备

Publications (1)

Publication Number Publication Date
CN107820018A true CN107820018A (zh) 2018-03-20

Family

ID=61605343

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711243735.7A Pending CN107820018A (zh) 2017-11-30 2017-11-30 用户拍照方法、装置及设备

Country Status (1)

Country Link
CN (1) CN107820018A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110658965A (zh) * 2018-06-28 2020-01-07 Tcl集团股份有限公司 一种照片选择的方法、装置及终端
CN110895685A (zh) * 2019-11-25 2020-03-20 创新奇智(上海)科技有限公司 基于深度学习的微笑服务质量评价系统及评价方法
CN110941992A (zh) * 2019-10-29 2020-03-31 平安科技(深圳)有限公司 微笑表情检测方法、装置、计算机设备及存储介质
CN110971820A (zh) * 2019-11-25 2020-04-07 Oppo广东移动通信有限公司 拍照方法、拍照装置、移动终端及计算机可读存储介质
CN110995999A (zh) * 2019-12-12 2020-04-10 北京小米智能科技有限公司 动态照片拍摄方法及装置
CN111127066A (zh) * 2018-11-01 2020-05-08 百度在线网络技术(北京)有限公司 基于用户信息的挖掘应用方法和装置
CN112766996A (zh) * 2019-10-21 2021-05-07 吉林省吴太感康药业有限公司 基于人脸表情识别而提供个性化定制电子信息的设备、终端及方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103747177A (zh) * 2013-12-31 2014-04-23 华为技术有限公司 视频拍摄的处理方法及装置
CN106385537A (zh) * 2016-09-19 2017-02-08 深圳市金立通信设备有限公司 一种拍照方法及终端
CN106603917A (zh) * 2016-12-16 2017-04-26 努比亚技术有限公司 一种拍摄装置和方法
CN106791364A (zh) * 2016-11-22 2017-05-31 维沃移动通信有限公司 一种多人拍照的方法及移动终端

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103747177A (zh) * 2013-12-31 2014-04-23 华为技术有限公司 视频拍摄的处理方法及装置
CN106385537A (zh) * 2016-09-19 2017-02-08 深圳市金立通信设备有限公司 一种拍照方法及终端
CN106791364A (zh) * 2016-11-22 2017-05-31 维沃移动通信有限公司 一种多人拍照的方法及移动终端
CN106603917A (zh) * 2016-12-16 2017-04-26 努比亚技术有限公司 一种拍摄装置和方法

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110658965A (zh) * 2018-06-28 2020-01-07 Tcl集团股份有限公司 一种照片选择的方法、装置及终端
CN111127066A (zh) * 2018-11-01 2020-05-08 百度在线网络技术(北京)有限公司 基于用户信息的挖掘应用方法和装置
CN112766996A (zh) * 2019-10-21 2021-05-07 吉林省吴太感康药业有限公司 基于人脸表情识别而提供个性化定制电子信息的设备、终端及方法
CN110941992A (zh) * 2019-10-29 2020-03-31 平安科技(深圳)有限公司 微笑表情检测方法、装置、计算机设备及存储介质
CN110941992B (zh) * 2019-10-29 2023-09-05 平安科技(深圳)有限公司 微笑表情检测方法、装置、计算机设备及存储介质
CN110895685A (zh) * 2019-11-25 2020-03-20 创新奇智(上海)科技有限公司 基于深度学习的微笑服务质量评价系统及评价方法
CN110971820A (zh) * 2019-11-25 2020-04-07 Oppo广东移动通信有限公司 拍照方法、拍照装置、移动终端及计算机可读存储介质
CN110971820B (zh) * 2019-11-25 2021-03-26 Oppo广东移动通信有限公司 拍照方法、拍照装置、移动终端及计算机可读存储介质
CN110995999A (zh) * 2019-12-12 2020-04-10 北京小米智能科技有限公司 动态照片拍摄方法及装置

Similar Documents

Publication Publication Date Title
CN107820018A (zh) 用户拍照方法、装置及设备
CN108495050B (zh) 拍照方法、装置、终端及计算机可读存储介质
CN107808136B (zh) 图像处理方法、装置、可读存储介质和计算机设备
US9866748B2 (en) System and method for controlling a camera based on processing an image captured by other camera
US20180204051A1 (en) Facial image processing apparatus, facial image processing method, and non-transitory computer-readable storage medium
WO2020015470A1 (zh) 图像处理方法、装置、移动终端及计算机可读存储介质
US20190130169A1 (en) Image processing method and device, readable storage medium and electronic device
WO2019114508A1 (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
CN108055452A (zh) 图像处理方法、装置及设备
CN107948514B (zh) 图像虚化处理方法、装置、移动设备和计算机存储介质
CN107911625A (zh) 测光方法、装置、可读存储介质和计算机设备
CN108111749A (zh) 图像处理方法和装置
CN108024054A (zh) 图像处理方法、装置及设备
CN107730444A (zh) 图像处理方法、装置、可读存储介质和计算机设备
CN107493432A (zh) 图像处理方法、装置、移动终端及计算机可读存储介质
CN107862658B (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
CN109089041A (zh) 拍摄场景的识别方法、装置、电子设备和存储介质
CN107509031A (zh) 图像处理方法、装置、移动终端及计算机可读存储介质
CN105608700B (zh) 照片的筛选方法及系统
CN108022206A (zh) 图像处理方法、装置、电子设备及计算机可读存储介质
CN110248107A (zh) 图像处理方法和装置
CN108156369A (zh) 图像处理方法和装置
CN107295252A (zh) 对焦区域显示方法、装置及终端设备
CN108052883A (zh) 用户拍照方法、装置及设备
CN107396079A (zh) 白平衡调整方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant after: OPPO Guangdong Mobile Communications Co., Ltd.

Address before: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18

Applicant before: Guangdong OPPO Mobile Communications Co., Ltd.

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180320