CN102265601A - 摄像装置和笑脸记录程序 - Google Patents

摄像装置和笑脸记录程序 Download PDF

Info

Publication number
CN102265601A
CN102265601A CN2009801524228A CN200980152422A CN102265601A CN 102265601 A CN102265601 A CN 102265601A CN 2009801524228 A CN2009801524228 A CN 2009801524228A CN 200980152422 A CN200980152422 A CN 200980152422A CN 102265601 A CN102265601 A CN 102265601A
Authority
CN
China
Prior art keywords
face
image
smiling face
smiling
district
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2009801524228A
Other languages
English (en)
Inventor
畑和昭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanyo Electric Co Ltd
Original Assignee
Sanyo Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanyo Electric Co Ltd filed Critical Sanyo Electric Co Ltd
Publication of CN102265601A publication Critical patent/CN102265601A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00Special procedures for taking photographs; Apparatus therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174Facial expression recognition
    • G06V40/176Dynamic expression
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223Cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334Recording operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B2213/00Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B2213/02Viewfinders
    • G03B2213/025Sightline detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明提供一种摄像装置和笑脸记录程序。数码相机(10),包含CPU(24)。CPU(24)控制图像传感器(14)反复捕捉摄像面(14f)上的视场图像,从由此制成的各视场图像中检测人脸图像,判定检测出的各人脸图像的脸是否是笑脸,在判定检测出的至少1个人脸图像是从非笑脸状态变为笑脸状态之后,控制I/F(36)将制成的视场图像记录到记录介质(38)。此外,数码相机(10)在某个模式下,会响应通过键输入装置(26)进行的区域指定操作,在各个视场图像上分配区域,至少根据被判定为笑脸的人脸图像与被分配的区域之间的位置关系,限制记录处理的实行。在另一模式下,不实行此类限制。

Description

摄像装置和笑脸记录程序
技术领域
本发明涉及摄像装置和笑脸记录程序,特别涉及例如反复拍摄视场、对笑脸检测后制作出的视场图像进行记录的摄像装置和笑脸记录程序。
背景技术
专利文献1公开了一例这样的摄像装置,在其背景技术中,从各个视场图像中提取人脸图像,分析人脸图像的时序变化,预测人脸图像与规定图形一致的定时,然后正式拍摄图像,由此缩短从笑脸检测到正式拍摄图像的时间间隔。
专利文献1:JP特开2007-215064号公报[H04N 5/232,G03B 15/00,G03B 17/38,H04N 101/00]
这种摄像装置在视场内存在多张人脸的状况下,有时对与用户作为目标的笑脸不同的笑脸作出反应从而实行记录处理,无法记录目标笑脸。然而,背景技术却对这一课题无法解决。
发明内容
因此,本发明的主要目的是提供新的摄像装置和笑脸记录程序。
本发明的另一目的是提供能够以较高概率记录目标笑脸的摄像装置和笑脸记录程序。
为了解决上述课题,本发明采用了下面的构成。另外,括号内的参照符号和补充说明等是表示与后述实施方式间的对应关系,用来帮助理解本发明,完全不是对本发明的限定。
第1发明是一种摄像装置,包括:摄像机构,反复捕捉在摄像面上的摄像区内形成的视场像;分配机构,响应经由操作机构进行的区域指定操作,在摄像区内分配微笑区;和笑脸记录机构,在由分配机构分配了微笑区的情况下,在微笑区内进行笑脸记录处理,在分配机构没有分配微笑区的情况下,在摄像区内进行笑脸记录处理,该笑脸记录处理是从摄像机构制作的各视场图像中检测笑脸图像从而记录包含该笑脸图像的视场图像。
在作为第1发明的摄像装置(10)中,摄像机构(14、S231、S249)会反复捕捉在摄像面(14f)上的摄像区(Ep)内形成的视场像。当通过操作机构(26)实行区域指定操作时,分配机构(S235)会在摄像区域内分配微笑区(Es0~Es4)。笑脸记录机构(S241~S247、S251)在由分配机构分配了微笑区的情况下,在微笑区内进行笑脸记录处理,在分配机构没有分配微笑区的情况下,在摄像区内进行笑脸记录处理,该笑脸记录处理是从摄像机构制作的各视场图像中检测笑脸图像从而记录包含该笑脸图像的视场图像。
根据第1发明,通过区域指定操作,笑脸记录的实行范围会被限制在微笑区内,所以,可以避免目标笑脸检出前,因出现目标外的笑脸而实行记录处理。其结果,提高了记录目标笑脸的可能性。如果不实行区域指定操作,或者在区域指定操作后实行解除操作,可以大范围地记录任意笑脸。
第2发明是一种摄像装置,包括:摄像机构,反复捕捉在摄像面上形成的视场像;检测机构,从由摄像机构制作的各视场图像中检测人脸图像;判定机构,判定由检测机构检测出的各人脸图像的脸是否是笑脸;记录机构,将判定机构判定由检测机构检测出的至少1个人脸图像是从表示非笑脸的状态变化至表示笑脸的状态之后、由摄像机构制作的视场图像记录到记录介质;分配机构,在特定模式下,响应经由操作机构进行的区域指定操作,在各视场图像中分配区域;和限制机构,至少根据由判定机构判定为笑脸的人脸图像与由分配机构分配的区域之间的位置关系,限制记录机构实行记录处理。
在作为第2发明的摄像装置(10)中,摄像机构(14、S25、S39、S105、S113)会反复捕捉在摄像面(14f)上形成的视场像。检测机构(S161~S177)会从摄像机构制成的各个视场图像中检测人脸图像,判定机构(S71~S97、S121~S135)会判定检测机构检测出的各人脸图像的脸是否是笑脸。记录机构(36、S31、S41、S111、S115)将判定机构判定由检测机构检测出的至少1个人脸图像是从表示非笑脸的状态变化至表示笑脸的状态之后、由摄像机构制作的视场图像记录到记录介质(38)。
在特定模式下,当通过操作机构(26)进行区域指定操作时,分配机构(S63)会在各视场图像中分配区域,限制机构(S33~S37)至少会根据由判定机构判定为笑脸的人脸图像与由分配机构分配的区域之间的位置关系,限制记录机构实行记录处理。
根据第2发明,在特定模式下,限制机构会根据使用者指定的区域与检测机构和判定机构检测出的笑脸的位置关系,限制记录机构的记录动作,所以,可以避免目标笑脸检出前,因出现目标外的笑脸而实行记录处理。其结果,提高了记录目标笑脸的可能性。在其它模式下,由于没有这种限制,所以可以大范围地记录任意笑脸。
另外,在某个实施例中,摄像机构最初进行实时取景,随着从非笑脸状态变为笑脸状态,就中断实时取景,进行正式摄影。记录机构记录正式摄影下的视场图像。在另一实施例中,摄像机构最初进行动态图像摄影,在存储器(30c)中保存了由此取得的多个视场图像,随着从非笑脸状态变为笑脸状态,从存储器(30c)中读出其中一个视场图像,记录机构对读出的视场图像进行记录。不论哪一个实施例,限制机构都会限制记录机构实行记录处理,所以,可以以较高的概率记录目标笑脸。
第3发明是从属于第2发明的摄像装置,限制机构在由判定机构判定为笑脸的人脸图像位于分配机构分配的区域内部的情况下,允许记录机构实行记录处理;在由判定机构判定为笑脸的人脸图像位于分配机构分配的区域外部的情况下,禁止记录机构实行记录处理(S33)。
在第3发明中,即便在区域外检出笑脸也不实行记录处理,在区域内检出笑脸时才实行记录处理。
另外,在某个实施例中,限制机构是通过停止记录机构本身来限制该记录机构实行记录处理的,在其它实施例中,也可以通过停止判定机构来进行限制,这样,处理量就会减轻。或者使判定机构的判定结果无效,也可以达到限制的目的。
第4发明是从属于第3发明的摄像装置,还包括:
还包括调焦机构(12、16、S155),该调焦机构用来调整焦点,使得与检测机构检测出的人脸图像的其中一个对焦,在由分配机构分配的区域内部存在对焦的人脸图像与不对焦的人脸图像的情况下,限制机构关注于对焦的人脸图像(S35、S37)。
在第4发明中,在区域内对焦的人脸图像和不对焦的人脸图像混在一起的情况下,限制机构会着眼于对焦的人脸图像,也就是根据对焦的人脸图像的判定结果实行限制,而不是根据不对焦的人脸图像的判定结果。
根据第4发明,就会着眼于对焦的人脸图像,从而可以恰当地判定笑脸,所以记录目标笑脸的可能性会进一步提高。
第5发明是从属于第4发明的摄像装置,还包括:控制机构(S221、S223),用来控制调焦机构参照的聚焦评价区(Efcs)的位置,使得与检测机构检测出的人脸图像中的位于分配机构分配的区域内部的1个人脸图像对焦。
在某个实施例中,当调焦机构参照的聚焦评价区(Efcs)位于分配机构分配的区域(指定微笑区)外部时,限制机构会将聚焦评价区强行移动到指定微笑区内部。
根据第5发明,与目标人脸对焦的可能性就会提高,而且记录目标笑脸的可能性会更进一步提高。
第6发明是从属于第1至第6中任意一项发明的摄像装置,区域指定操作是从多个固定区域(Es0~Es4)中指定1个的操作。
第7发明是从属于第6发明的摄像装置,多个固定区域彼此有一部分是重复的。
根据第7发明,当目标人脸位于区域边界附近时,区域指定操作会很容易。
另外,区域指定操作也可以是针对可变区域指定位置、尺寸和形状中的至少1个的操作。
第8发明是从属于第1至第7中任意一项发明的摄像装置,还包括:实时取景机构(32),将基于摄像机构制作的各视场图像的实时取景图像(through-image)显示在显示器(34)上;和描绘机构(42、S57),将表示通过区域指定操作指定的区域的边框图像描绘在显示器的实时取景图像上。
根据第8发明,表示区域的边框图像就会显示在实时取景图像上,使调整视角的操作和区域指定操作变得容易。
另外,在某个实施例中,描绘机构会响应区域指定操作的开始,开始描绘边框图像,并响应区域指定操作的结束,结束描绘边框图像。在其它的实施例中,描绘机构也可以始终描绘边框图像,响应区域指定操作的开始和/或结束,改变边框图像的形态(颜色、亮度、线的粗细等)。
第9发明是一种笑脸记录程序,
使摄像装置(10)的处理器(24)执行以下的步骤,该摄像装置具备:具有摄像面(14f)的图像传感器(14);将基于图像传感器的输出的图像记录在记录介质(38)中的记录机构(36);和由使用者操作的操作机构(26),所执行的步骤分别是:摄像步骤(S231、S249),控制图像传感器,反复捕捉在摄像面上的摄像区内(Ep)形成的视场像;分配步骤(S235),响应经由操作机构进行的区域指定操作,在摄像区内分配微笑区(Es0~Es4);和笑脸记录步骤(S241~247、251),在由分配机构分配了微笑区的情况下,在微笑区内进行笑脸记录处理,在分配机构没有分配微笑区的情况下,在摄像区内进行笑脸记录处理,笑脸记录处理是从由摄像步骤制作的各视场图像中检测笑脸图像从而记录包含该笑脸图像的视场图像。
第9发明与第1发明同样,通过区域指定操作,提高了记录目标笑脸的可能性。如果不实行区域指定操作,或者在区域指定操作后实行解除操作,可以大范围地记录任意笑脸。
第10发明是一种笑脸记录程序,
使摄像装置(10)的处理器(24)执行以下的步骤,该摄像装置具备:具有摄像面(14f)的图像传感器(14);将基于图像传感器的输出的图像记录在记录介质(38)中的记录机构(36);和由使用者操作的操作机构(26),所执行的步骤分别是:摄像步骤(S25、S39),控制图像传感器,反复捕捉在摄像面上形成的视场像;检测步骤(S161~S177),从通过摄像步骤制作的各视场图像中检测人脸图像;判定步骤(S87~S97、S125~S135),判定通过检测步骤检测出的各人脸图像的脸是否是笑脸;笑脸记录步骤(S31和S41),控制记录机构,将判定步骤中判定检测步骤检测出的至少1个人脸图像是从表示非笑脸的状态变化至表示笑脸的状态之后、通过摄像步骤制作的视场图像记录到记录介质(38);分配步骤(S63),在特定模式下,响应经由操作机构进行的区域指定操作,在各视场图像中分配区域;和限制步骤(S33~S37),至少根据通过判定步骤判定为笑脸的人脸图像与通过分配步骤分配的区域之间的位置关系,限制笑脸记录步骤实行记录处理。
第10发明与第2发明同样,在特定模式下,提高了记录目标笑脸的可能性。在其它模式下,可以大范围地记录任意笑脸。
第11发明是保存与第9发明对应的笑脸记录程序的存储介质(40)。
第12发明是保存与第10发明对应的笑脸记录程序的存储介质(40)。
第13发明是与第1发明对应的摄像装置(10)所实行的笑脸记录方法。
第14发明是与第2发明对应的摄像装置(10)所实行的笑脸记录方法。
本发明的上述目的、其它目的、特征和优点会在参照附图对以下实施例进行的详细说明中越来越清楚。
附图说明
图1是本发明的一个实施例的构成框图。
图2是一例适用于图1实施例的模式选择画面的图解图。
图3是一例适用于图1实施例的人脸检测处理的图解图。
图4是一例适用于图1实施例的微笑区的图解图。
图5是一例适用于图1实施例的监视器画面,是表示人脸框和聚焦评价区变化的图解图。图5(A)是初始状态,图5(B)是表示人脸框和聚焦评价区追踪人脸移动的情况,另外,图5(C)是表示人脸数为多个时主角的人脸框变为双线的情况。
图6是另一例适用于图1实施例的监视器画面,是微笑区内只有主角时的图解图。图6(A)是初始状态,图6(B)是表示在微笑区外检出笑脸的状态,另外,图6(C)是表示在微笑区内检出笑脸的状态。
图7是又一例适用于图1实施例的监视器画面,是微笑区内有非主角时的图解图。图7(A)是初始状态,图7(B)是表示在微笑区外检出笑脸的状态,另外,图7(C)是表示在微笑区内检出笑脸的状态。
图8是又一例适用于图1实施例的监视器画面,是微笑区内主角和非主角都存在时的图解图。图8(A)是初始状态,图8(B)是表示在微笑区外检出非主角笑脸的状态,另外,图8(C)是表示在微笑区内检出主角笑脸的状态。
图9是另一例适用于图1实施例的监视器画面,是利用微笑区自拍的摄影方法的图解图。图9(A)是初始状态,图9(B)是表示在微笑区外检出笑脸的状态,另外,图9(C)是表示在微笑区内检出笑脸的状态。
图10是表示适用于图1实施例的存储器映射图的图解图,图10(A)表示SDRAM的构成,图10(B)表示闪存的构成。
图11是一例适用于图1实施例的人脸信息表的图解图。
图12是一例适用于图1实施例的人脸状态标志位的图解图,图10(A)~图10(C)分别与图6(A)~图6(C)对应。
图13是一例适用于图1实施例的CPU动作的部分流程图。
图14是一例适用于图1实施例的CPU动作的另一部分的流程图。
图15是一例适用于图1实施例的CPU动作的又一部分的流程图。
图16是一例适用于图1实施例的CPU动作的再一部分的流程图。
图17是一例适用于图1实施例的CPU动作的另一部分的流程图。
图18是一例适用于图1实施例的CPU动作的又一部分的流程图。
图19是一例适用于图1实施例的CPU动作的再一部分的流程图。
图20是一例适用于图1实施例的CPU动作的另一部分的流程图。
图21是一例适用于图1实施例的CPU动作的又一部分的流程图。
图22是一例适用于图1实施例的CPU动作的再一部分的流程图。
图23是一例适用于图1实施例的CPU动作的另一部分的流程图。
图24是一例适用于图1实施例的CPU动作的又一部分的流程图。
图25是一例适用于另一实施例的监视器画面,是表示将聚焦评价区强行移动到微笑区内的图解图。
图26是适用于图25实施例的CPU动作的部分流程图。
图27是适用于又一实施例的CPU动作的部分流程图。
图中:
10…数码相机
12…聚焦镜头
14…图像传感器
14f…摄像面
20…相机处理电路
22…聚焦评价电路
24…CPU
26…键输入装置
42…字符发生器
具体实施方式
参照图1,本实施例的数码相机10包含聚焦镜头12。视场的光学像经过聚焦镜头12成像于图像传感器14的摄像面14f,在此被实行光电转换。这样,表示视场图像的电荷也就是原始图像信号就被生成。
电源接通后,开始实时取景处理。这时,CPU24会命令TG18实行实时取景用的曝光以及反复读出电荷。为了对摄像面14f实行曝光动作,以及对由此得到的电荷实行间歇性的读出动作,TG18会向图像传感器14提供多个定时信号。摄像面14f上生成的一部分电荷对每1/30秒发生1次的垂直同步信号Vsync做出响应,按光栅扫描的顺序被读出。这样,低分辨率(例如320*240)的原始图像信号就以30fps的帧频,从图像传感器14输出。
从图像传感器14输出的原始图像信号由相机处理电路20实施A/D等处理,被转换为作为数字信号的原始图像数据。原始图像数据通过存储器控制电路28被写入SDRAM30的原始图像区30a(参照图10(A))。相机处理电路20其后通过存储器控制电路28读出原始图像区30a中保存的原始图像数据,实施颜色分离、YUV转换等处理。这样得到的YUV格式的图像数据通过存储器控制电路28,被写入SDRAM30的YUV图像区30b(参照图10(A))。
LCD驱动电路32每1/30秒通过存储器控制电路28,将YUV图像区30b中保存的图像数据读出,用读出的图像数据驱动LCD监视器34。其结果,视场的实时动态图像(实时取景图像)就显示在LCD监视器34上。
另外,亮度评价电路实行以下处理:每1/30秒根据上述实时取景中由相机处理电路20生成的Y数据,对视场的明亮程度(亮度)进行评价,图示对此进行了省略。CPU24根据亮度评价电路求出的亮度评价值,调整图像传感器14的曝光量,由此使LCD监视器34显示的实时取景图像的明亮程度得到适度调整。
聚焦评价电路22取入由相机处理电路20生成的Y数据中的图5(A)等所示的属于聚焦评价区Efcs的Y数据,对取入的Y数据的高频成分进行积分,然后输出积分结果也就是聚焦评价值。该一连串的处理是对Vsync做出的响应,每1/30秒实行一次。CPU24根据这样求得的聚焦评价值,实行所谓连续AF处理(以下简称为“AF处理”:参照图21)。在CPU24的控制下,聚焦镜头12在光轴方向的位置由驱动器16持续变更。
CPU24还着眼于SDRAM30中保存的YUV数据,实行人脸识别处理。人脸识别处理就是一种图形识别处理,将相当于人物的眼、鼻、口等人脸辞典数据72(参照图10(B))与关注的YUV数据进行对比,由此从视场像中检测人物的人脸图像。
具体而言,如图2所示,将规定尺寸(例如80*80)的人脸检测框FD配置在图像帧内的开始位置(左上),一边按光栅扫描的方式、以既定量为单位移动人脸检测框FD,一边对人脸检测框FD内的图像实施对比处理。当人脸检测框FD到达结束位置(画面的右下)时,将其返回到开始位置,重复同样的动作。
另外,在其它的实施例中,也可以准备多个尺寸不同的人脸检测框,借助这些人脸检测框依次或并行对各图像实行多个检测处理,使检测精度提高。
当检测出人脸图像时,CPU24会进一步对该人脸图像计算尺寸和位置,将计算结果作为“人脸尺寸”和“人脸位置”,与标识符(ID)一起登记在人脸信息表70(参照图10(B)、图11)。具体而言,人脸尺寸可以使用包围人脸图像的矩形人脸框Fr(参照图5(A)等)的长和宽(像素数),人脸位置可以使用人脸框Fr的重心坐标。ID使用例如连续编号1、2、...。另外,图11示出了将实时取景图像尺寸设为320*240时的数值。
当检测出的人脸图像移动到聚焦评价区Efcs外部时,CPU24会以人脸图像的位置为基准,移动聚焦评价区Efcs(参照图5(B))。所以,在上述的调焦处理中,如果视场中含有人脸,主要就是由于人脸图像被参照的结果。
CPU24还通过字符发生器(CG)42来控制LCD驱动电路32,使人脸框Fr被描绘在LCD监视器34的实时取景图像上(在屏幕显示)。如果正在检测的人脸个数也就是人脸信息表70登记的人脸个数(以下简称为“人脸数”)为多个,那么因上述AF处理而对焦的人脸图像也就是聚焦评价区Efcs内的人脸图像(以下称为“主角”的人脸图像)就会被画上双线的人脸框Frd,非主角的人脸图像(未必对焦)就会被画上单线的人脸框Frs(参照图5(C))。
如果在以上那样的实时取景中实行静止图像记录操作(按下快门26sh),CPU24会命令TG18实行正式摄影使用的曝光和电荷读出。为了分别实行一次摄像面14f的曝光动作、以及由此得到的电荷的全像素读出动作,TG18会向图像传感器14提供1个定时信号。摄像面14f上生成的所有电荷按照基于光栅扫描的顺序被读出。这样,高分辨率的原始图像信号就会从图像传感器14输出。
从图像传感器14输出的原始图像信号被相机处理电路20转换为原始图像数据,原始图像数据通过存储器控制电路28被写入SDRAM30的原始图像区30a。相机处理电路20其后会通过存储器控制电路28读出原始图像区30a中保存的原始图像数据,并转换为YUV格式的图像数据。YUV格式的图像数据通过存储器控制电路28被写入SDRAM30的记录图像区30c(参照图10(A))。I/F36通过存储器控制电路28将这样写入记录图像区30c的图像数据读出,以文件形式记录在记录介质38上。
在通过键输入装置26实行模式选择开始操作(按下设置按钮26st)时,CPU24会通过CG42控制LCD驱动电路32,使例如图2那样的模式选择画面显示在LCD监视器34上。模式选择画面包含通常记录、笑脸记录I和笑脸记录II这种的表示能选模式的文字(在其它实施例中也可以使用符号标记)。光标(下线)标在表示正被选择的模式的文字上。当通过键输入装置26实行模式选择操作(按下光标键26c)时,画面上的光标(下线)会移动到表示其它模式的文字位置。在希望的模式被选择的状态下实行确定操作(再次按下设置按钮26st),当前选择的模式就会有效。
当笑脸记录模式I有效时,与上述同样的实时取景处理就会开始。在此之前,CPU24会在各图像对应的帧上分配使用者任意指定的微笑区(以下为“指定微笑区”)。本实施例是分配从图4所示的5个微笑区Es0~Es4中指定的一个微笑区。默认的指定微笑区是中央的微笑区Es0。另外,在其它实施例中,也可以将当前包含聚焦评价区Efcs的微笑区设为默认值。
图4的微笑区Es0~Es4按照下面的要领被配置在图像传感器14(摄像面14f)的摄像区Ep内。也就是说,CPU24将帧进行16*16=256分割,将微笑区Es0配置在(4,4)~(11,11)所示的中央矩形区,将微笑区Es1配置在(7,1)~(8,14)所示的右上矩形区,将微笑区Es2配置在(1,1)~(8,8)所示的左上矩形区,将微笑区Es3配置在(1,7)~(8,14)所示的左下矩形区,将微笑区Es4配置在(7,7)~(14,14)所示的右下矩形区。
所以,本实施例的微笑区Es0~Es4彼此有一部分是重复的。在其它的实施例中,既可以将5个微笑区Es0~Es4无缝隙地配置在帧内,也可以间隔开来配置。
此外,区数也不一定是5。区数越多,能记录目标笑脸的可能性越高。但是,在例如每个区都改变显示色的情况下,由于可利用的色彩数量受到限制等,所以区数有时为4以下。在另一实施例中,区数也可以只使用4个微笑区Es1~Es4,除去图4微笑区Es0~Es4中的中央部分。在又一实施例中,也可以只使用1个微笑区Es0。
此外,各区的形状也不一定是矩形,也可以是圆形或多边形这种其它形状。也可以在帧内将不同形状和/或不同尺寸的区混在一起。
指定微笑区在笑脸记录模式I下,在实时取景中按照以下要领进行变更。当使用键输入装置26进行区域指定开始操作(按下设置按钮26st)时,CPU24会通过CG42控制LCD驱动电路32,将当前的指定微笑区显示在屏幕上。如果当前的指定微笑区是画面中央的微笑区Es0,那么微笑区Es0就会被显示(参照图6(A)等)。接着,通过键输入装置26来进行区域指定操作(按下光标键26c),屏幕显示就会被更新为新的指定微笑区。
另外,在图6(A)等画面中显示了指定微笑区的轮廓线,也可以显示有色半透明的区域图像,或对区域内的视场图像实施色调或亮度的变化处理,从而让使用者能够辨识出指定微笑区。此外,为了方便识别,微笑区Es0~Es4是用种类互不相同的线描绘的,但也可以用互不相同的颜色描绘。另外,还可以按线种类和颜色的组合识别各区域。
此外,在本实施例中仅显示指定微笑区,而在其它实施例中,也可以对设置按钮26st的按下做出响应,用不同的颜色同时显示5个轮廓线,以分别表现5个微笑区,仅加重其中相当于指定微笑区的轮廓线。
CPU24还通过CG42控制LCD驱动电路32,将图6(A)等所示的微笑标记Sm显示在画面一角。在图6(A)的画面上,微笑标记Sm的旁边还显示有暂停标记Wm,它表示暂停笑脸记录处理,当重启同一处理时,它会从画面上消失(参照图24)。
另外,后述的笑脸记录模式II也显示微笑标记Sm。在其它的实施例中,也可以在笑脸记录模式I和II中使微笑标记Sm的形式(颜色或形状等)有所不同。
CPU24还会在只检测出一个人脸图像的状态下,关注该人脸图像的特定部分例如嘴角,反复判别此处是否具有笑脸特征。当判别具有笑脸特征时,就进一步判别该人脸位置是否在指定微笑区的内部。如果人脸位置在区域内,就发出正式摄影命令,实行记录处理;另一方面,如果人脸位置在区域外,就暂缓发出正式摄影命令。所以,只要在指定微笑区内未检测出笑脸,则记录处理就不实行。
CPU24在检测出多个人脸图像的状态下,反复判别各人脸图像是否具有笑脸特征。当判别某个人脸图像具有笑脸特征时,就进一步判别该人脸位置是否在指定微笑区内部,如果笑脸在区域内,就进一步判别它是否是主角,如果是主角,就实行正式摄影处理和记录处理。如果笑脸不是主角,就进一步判别指定微笑区内部是否存在主角,如果区域内不存在主角,就实行正式摄影处理和记录处理。另一方面,如果笑脸位置在区域外,就暂缓发出正式摄影命令。此外,即便笑脸位置在区域内,但如果其不是主角并且区域内又存在主角,也暂缓发出正式摄影命令。
所以,只要指定微笑区内没有检测出某人的笑脸,就不实行记录处理。另外,在主角和非主角同在指定微笑区内的情况下,优先主角的笑脸。换言之,记录处理只在以下情况下实行:主角在指定微笑区内笑了;或者指定微笑区内只有非主角,其中某人笑了。下面,利用图6~图8,对人脸数为2个的情况进行说明。
图6表示人脸数为2、指定微笑区为中央的微笑区Es0、在微笑区Es0内部只有主角的脸Fc1时的画面变化的一个例子。人脸Fc1大致处于画面中央,人脸Fc2处于画面左下,接近画面中心的人脸Fc1被选为主角。主角的脸Fc1的周围描绘双线的人脸框Frd;非主角的脸Fc2的周围描绘单线的人脸框Frs。
在图6(A)的时间点,两个人脸Fc1和Fc2都没有笑。其后,如图6(B)所示那样,人脸Fc2出现笑脸,由于该笑脸位于微笑区Es0外部,所以,此时不实行记录处理。另一方面,如图6(C)所示那样,人脸Fc1出现笑脸时,由于该笑脸位于微笑区Es0内部,所以,记录处理在此时实行。
图7表示人脸数为2、指定微笑区为左下的微笑区Es3、并且该微笑区Es3内部只有非主角的脸Fc2时的画面变化的一个例子。两个笑脸Fs1和Fs2的位置关系以及双线人脸框Frd和单线人脸框Frs的配置与图6同样。
在图7(A)的时间点,两个人脸Fc1和Fc2都没有笑。其后,如图7(B)所示那样人脸Fc1出现笑脸时,由于该笑脸位于微笑区Es3外部,所以,此时不实行记录处理。另一方面,如图7(C)所示那样人脸Fc2出现笑脸,由于该笑脸位于微笑区Es3内部,所以,记录处理在此时实行。
图8表示当人脸数为2、指定微笑区为中央的微笑区Es0、并且主角脸Fc1和非主角脸Fc2均在该微笑区Es0内部时的画面变化的一个例子。在该画面中,笑脸Fc1和Fc2都位于画面中央附近,由于前者更接近画面中心,所以双线人脸框Frd被分配在人脸Fc1侧;单线人脸框Frs被分配在人脸Fc2侧。
在图8(A)的时间点,两个人脸Fc1和Fc2都没有笑。其后,如图8(B)所示那样人脸Fc2出现笑脸,由于该笑脸不是主角,所以此时不实行记录处理。另一方面,如图8(C)所示那样人脸Fc1出现笑脸时,由于该笑脸是主角,所以,记录处理在此时实行。
这种笑脸记录模式I的典型用法是“自拍”。摄影者设想自己站立的位置,指定在其内部仅存在自己的脸的微笑区,然后移动到设想位置,做出笑脸,由此可以正确记录自己的笑脸。图9表示一个具体例。
在图9(A)中,画面中央偏右是其他人的脸Fc1,摄影者会设想自己站立的位置,指定左上的微笑区Es2。人脸Fc1在上述微笑区Es2的外部,不是笑脸。然后,当摄影者移动到设想位置时,微笑区Es2内会出现摄影者自己的脸Fc2。人脸Fc2也不是笑脸。在两张脸Fc1和Fc2中,前者更接近画面中央,所以,人脸Fc1会成为主角。
后来,如图9(B)所示那样人脸Fc1出现笑脸。不过由于人脸Fc1在微笑区Es2的外部,所以,不实行记录处理。另一方面,如果人脸Fc2如图9(C)所示那样出现笑脸,就会实行记录处理,因为人脸Fc2在微笑区Es2的内部。这样,摄影者就可以自己进入视场内,自由决定实行记录处理的定时。
另外,按照下面说明的笑脸记录模式II进行上述同样的摄影,有时对于他人的笑脸(图9是人脸Fc1)也会实行记录处理。
笑脸记录模式II有效时,与上述同样的实时取景处理就会开始。在检测出1个或多个人脸图像的状态下,CPU 24会着眼于各人脸图像的特定部分例如嘴角,反复判别那里是否有笑脸特征。在判别某个人脸图像具有笑脸特征时,会发出正式摄影命令,实行记录处理。
这样,笑脸记录模式II与笑脸记录模式I的不同之处在于,笑脸记录是在整个画面上实行,不是限制在指定微笑区内。人脸检测和笑脸判定的各个处理也可以与笑脸记录模式I相同。
以上的笑脸记录动作是通过CPU24控制图1所示的各个硬件要素,执行以下任务来实现的,任务包括:图13所示的模式选择任务、图14所示的笑脸记录I模式专用的主任务(以下有时略记为“主任务(I)”:其它任务也是同样)、图15所示的笑脸记录I模式专用的微笑区控制任务、图16和图17所示的笑脸记录I模式专用的标志位控制任务、图18所示的笑脸记录II模式专用的主任务、图19所示的笑脸记录II模式专用的标志位控制任务、图20所示的I·II模式共用的暂停任务、图21所示的I·II模式共用的AF任务、图22所示的I·II模式共用的人脸检测任务、图23所示的I·II模式共用的人脸框控制任务、和图24所示的I·II模式共用的标记控制任务。另外,CPU24在多任务OS的控制下,可以并行处理这10个任务中的2个或3个以上的任务。
与这10个任务对应的10个程序50~68保存在闪存40的程序区40a(参照图10(B))。闪存40的数据区40b除了保存有上述的人脸信息表70和人脸辞典数据72以外,还保存有:指定微笑区标识符74,表示当前的指定微笑区(Es0~Es4中的某一个);待机标志位(W)76,由微笑区控制任务(参照图15)和暂停任务(参照图20)开启/关闭;和人脸状态标志位(A1、A2...、P1、P2、...、S1、S2、...)78,由标志位控制任务(参照图16和图19)开启/关闭。
这里,作为人脸状态标志位的一种“A”是表示该人脸图像是位于指定微笑区的内部还是外部的标志位,开启对应内部,关闭对应外部。人脸状态标志位的另一种“P”是表示该人脸图像是主角还是非主角的标志位,开启对应主角,关闭对应非主角。人脸状态标志位的又一种“S”是表示该人脸图像是笑脸还是笑脸以外的标志位(将后者的状态适当称为“非笑脸”),开启对应笑脸,关闭对应非笑脸。各标志位的下标1、2、...是识别人脸图像的ID。
通过这些人脸状态标志位,图6(A)的两个人脸图像Fc1和Fc2的状态被记述为例如图12(A)那样。同样,图6(B)的两个人脸图像Fc1和Fc2的状态被记述为图12(B)那样。图6(C)的两个人脸图像Fc1和Fc2的状态被记述为图12(C)那样。
首先,参照图13,当键输入装置26的菜单键(未图示)被按下时,CPU24在步骤S1中控制CG42和LCD驱动电路32,将图2那样的菜单画面显示在LCD监视器34上。然后,在步骤S3判别是否通过光标键26c和SET键26st的操作选择了“笑脸记录I”,如果为是,就将笑脸记录I模式设为有效。如果步骤S3中为否,在步骤S5中判别“笑脸记录II”是否被选择,如果为是,则将笑脸记录II模式设为有效。如果步骤S5中为否,在步骤S7中判别是否选择了其它记录模式例如“通常记录模式”,如果为是,就将该记录模式设为有效。如果步骤S7中为否,就在步骤S9判别是否实行了取消操作,如果为是,则返回菜单键按下前的模式。如果步骤S9中为否,则返回步骤S3,重复同样的处理。
首先,对笑脸记录I模式进行说明。笑脸记录I模式有效时,首先会起动主任务(I),CPU24开始执行与其对应的流程(参照图14)。参照图14,在步骤S21中,标志位W被设置为“0”。在步骤S23,微笑区控制任务(I)、标志位控制任务(I)、暂停任务、AF任务、人脸检测任务、人脸框控制任务、和标记控制任务起动,CPU24进而开始执行与这些任务对应的流程(参照图15~图17、图20~图24)。
在步骤S25中发出实时取景命令。伴随于此上述的实时取景处理开始。在步骤S27中判别未图示的信号发生器是否已发生Vsync,如果为否则进行待机。如果在步骤S27中为是,则在步骤S29中判别标志位“W”是否为“0”,如果为否就返回步骤S27。如果在步骤S29中为是,就转移到步骤S31,根据人脸状态标志位78中标志位S1、S2、...的状态变化,判别是否有谁笑了,这里,如果为否就返回步骤S27。
当标志位S1、S2、...中的某一个由关闭状态变为开启状态时,步骤S31中会判别为是,进入步骤S33。在步骤S33中对于这一新笑脸(将人脸ID设为“m”),会根据登记在人脸状态表70(参照图11)中的人脸m的位置和指定微笑区标识符74,判别它是否处于指定微笑区内部,如果为否,就返回步骤S27。另外,CPU24会识别图4所示的各微笑区Es0~Es4在画面上的位置。
如果步骤S33中为是则转移至步骤S35,根据人脸状态标志位78中的标志位Pm判别该笑脸是否是主角。如果步骤S35为是,则在步骤S39中发出正式摄影命令,然后在步骤S41中控制I/F36,实行记录处理。所以,如果该笑脸在指定微笑区内并且是主角的话,包含该笑脸的静止图像就会被记录到记录介质38中。
如果步骤S35为否,在步骤S37中根据人脸状态标志位78判别指定微笑区内是否存在主角的脸,如果为否,则执行步骤S39和步骤S41。参照人脸状态标志位78,如果存在标志位A为开启、标志位P为开启、标志位S为关闭的人脸,则在步骤S37中判别为是,并返回步骤S27。所以,如果该笑脸在指定微笑区内且不是主角的话,只要此时指定微笑区内没有主角的脸,就实行记录处理。此时,如果指定微笑区内存在主角的脸,就在以后主角的脸变为笑脸的时间点实行记录处理。
参照图15,当微笑区控制任务(I)起动时,在步骤S51中对指定微笑区标识符74设置默认值(本实施例是微笑区“Es0”)。另外,在其它实施例中,也可以等待通过AF任务(参照图21)使某人的人脸图像对焦后,将包含该人脸图像的微笑区设为默认值。
在步骤S53中判别设置按钮26st是否被按下,如果为否就进行待机。如果在步骤S53中为是则进入步骤S55,将标志位W设为“1”。然后,在步骤S57中控制CG42等,将指定微笑区显示在LCD监视器34上。例如,如果指定微笑区标识符74为“Es0”,则显示微笑区Es0(参照图6(A));如果是“Es3”,则显示微笑区Es3(参照图7(A))。
在步骤S59中判别光标键26c是否被操作,这里,如果为否则在步骤S61中进一步判别设置按钮26st是否被按下,如果也为否,则返回步骤S57,重复同样的处理。如果步骤S59中为是则进入步骤S63,更新指定微笑区标识符74的值,然后返回步骤S57,重复同样的处理。如果步骤S61中为是则进入步骤S65,从监视器画面中消除指定微笑区,进而在步骤S67将标志位W设为“0”,然后返回步骤S53,重复同样的处理。
参照图16和图17,当标志位控制任务(I)起动时,在步骤S71中将变量i设为“1”,然后,在步骤S73中等待Vsync的发生。当Vsync发生时,进入步骤S75,根据人脸信息表70和指定微笑区标识符74判别人脸i是否在指定微笑区内。如果判别结果为是,则在步骤S77中开启标志位Ai;如果为否,则在步骤S79关闭标志位Ai。然后,在步骤S81中进一步判别人脸i是否为主角。
如果AF任务的结果是人脸i对焦(也就是说,如果人脸i被双线人脸框包围),则在步骤S81中判别为是,在步骤S83中开启标志位Pi,然后进入步骤S87。如果在步骤S81为否,则在步骤S85关闭标志位Pi,然后进入步骤S87。在步骤S87从人脸i的图像中截取特定部分(例如嘴角或外眼角等)的图像。然后,在步骤S89中判别截取出图像中是否有笑脸特征(例如嘴角是否上扬,外眼角是否出现皱纹等),如果为是则在步骤S91开启标志位Si;如果为否则在步骤S93关闭标志位Si。然后,在步骤S95将变量i加1,在步骤S97中判别变量i是否超过人脸数,如果为是就返回步骤S71;如果为否就返回步骤S75,重复同样的处理。另外,特别要指出的是,对于步骤S89,可以根据例如脸上的嘴型是否与人脸辞典数据72匹配来进行判别。
参照图20,当暂停任务起动时,步骤S141中会判别快门按钮26st是否被按下,如果为否则进行待机。如果步骤S141中为是,则在步骤S143中将标志位W设置为“1”。其后进入步骤S145,判别快门按钮26st是否被按下,如果为否则进行待机。如果在步骤S145中为是,则在步骤S147将标志位W设置为“0”。然后返回步骤S141,重复同样的处理。
参照图21,当AF任务起动时,在步骤S151中等待Vsync的发生,Vsync发生后,在步骤S153中判别当前的聚焦评价值是否满足AF起动条件。这里,如果为否,返回步骤S151,重复同样的处理。在步骤S153中如果为是,则进入步骤S155,执行AF处理。另外,在AF处理中,如果人脸数为多个,则进行焦点调整,将焦点集中到人脸框控制任务步骤S187(参照图23:后述)所决定的主角的人脸上,这样,主角的脸就会对焦。调整结束后,返回步骤S151,重复同样的处理。
参照图22,当人脸检测任务起动时,在步骤S161中对人脸信息表70(参照图11)进行初始化。然后,在步骤S163中将人脸检测框FD配置在开始位置(例如画面左上:参照图3),其后在步骤S165中等待Vsync的发生,Vsync发生时,进入步骤S167,从视场图像中截取人脸检测框FD的图像。然后,在步骤S169对截取的图像和人脸辞典数据72实行对比处理,在步骤S171判别对比结果是否相符。如果步骤S171中为否,则返回步骤S167,重复同样的处理;如果为是,则在步骤S173将与该人脸相关的人脸信息(ID、位置和尺寸)记述到人脸信息表70中。其后,在步骤S175判别是否存在未对照部分,如果为是,则在步骤S177中按照图3的要领,将人脸检测框FD移动一步,然后返回步骤S167,重复同样的处理。如果人脸检测框FD到达画面的右下,则在步骤S175中判别为否,返回步骤S163,重复同样的处理。
参照图23,人脸框控制任务起动时,在步骤S181等待Vsync的发生,Vsync发生后,在步骤S183根据人脸信息表70判别是否检测出人脸,如果为否,就返回步骤S181,重复同样的处理。如果有至少1张脸在人脸信息表70中被登记,则在步骤S183判别为是,进入步骤S185,进一步判别人脸数是否为多个。如果步骤S185中为是,则经过步骤S187进入步骤S189;如果为否就跳过步骤S187进入步骤S189。
在步骤S187中根据各脸的位置关系决定主角。这里的方法是,在画面内计算中心点到各人脸图像的距离,将计算结果最小的人脸图像定为主角。在其它的实施例中,还可以进一步测量数码相机10到各人脸图像的距离,例如将距离最远的人脸和最近的人脸从主角候选中排除,将测量结果也考虑在内来决定主角。在步骤S189中控制CG42等,沿各脸的轮廓显示人脸框Fr(参照图5(A)等)。在人脸数为多个的情况下,主角的脸分配双线人脸框Frd;非主角的脸分配单线人脸框Frs(参照图5(C)等)。人脸框显示后,返回步骤S181,重复同样的处理。
参照图24,当标记控制任务起动时,在步骤S201等待Vsync的发生,Vsync发生后,控制CG42等来显示笑脸标记Sm(参照图6(A)等)。然后进入步骤S205,判别标志位W是否为“1”。如果步骤S205中为是,则在步骤S207中进一步显示中断标记Wm;如果步骤S205中为否,则在步骤S209将中断标记Wm从监视器画面中去除。步骤S205或S207实行后,返回步骤S201,重复同样的处理。
下面,对笑脸记录II模式进行说明。笑脸记录II模式有效时,首先主任务(II)会被起动,CPU24开始执行与其对应的流程(参照图18)。参照图18,在步骤S101中,标志位W被设为“0”。在步骤S103,标志位控制任务(II)、暂停任务、AF任务、人脸检测任务、人脸框控制任务、和标记控制任务被起动,CPU24进而开始执行与这些任务对应的流程(参照图19、图20~图24)。
在步骤S105中发出实时取景命令。伴随于此开始实时取景处理。在步骤S107中判别是否已发生Vsync,如果为否则进行待机。如果在步骤S107中为是,则在步骤S109判别标志位“W”是否为“0”。在步骤S109中如果为否就返回步骤S107;如果为是,则转移至步骤S111,根据标志位S1、S2、...的状态变化,判别是否有谁笑了。这里,如果步骤S111中为否则返回步骤S107。
当标志位S1、S2、...中的某一个由关闭状态变为开启状态时,在步骤S111中判别为是,进入步骤S113,发出正式摄影命令。然后,进入步骤S41,控制I/F36,实行记录处理。由此,如果画面内某人笑了,则包含该笑脸的静止图像会被记录到记录介质38中。记录完成后,返回步骤S105,重复同样的处理。
另外,在其它的实施例中,也可以与笑脸记录模式I的情况相同,使主角优先。也就是说,主角笑时才发出正式摄影命令,非主角就算笑也不发出正式摄影命令。
参照图19,当标志位控制任务(II)起动时,在步骤S121中会将变量i设为“1”,然后,在步骤S123等待Vsync的发生。Vsync发生时,进入步骤S125,从人脸i的图像中截取特定部分的图像。然后,在步骤S127判别截取的图像中是否有笑脸特征,如果为是则在步骤S129中开启标志位Si;如果为否则在步骤S131关闭标志位Si。然后,在步骤S133将变量i加1,在步骤S135中判别变量i是否超过人脸数,如果为是则返回步骤S121;如果为否就返回步骤S125,重复同样的处理。另外,特别要指出的是,对于步骤S127,可以根据例如脸上的嘴型是否与人脸辞典数据72匹配来进行判别。
图20~图24的各处理与笑脸记录I模式的情况相同,省略说明。
另外,在其它的实施例中,静止图像记录不一定是在实时取景时进行,也可以在动态图像记录时进行。不过,在这种情况下,静止图像的记录尺寸(分辨率)与动态的相同。例如,在进行尺寸与实时取景图像相同的动态图像记录的模式中,YUV图像区30b的图像数据会被复制到记录图像区30c。记录图像区30c具有例如相当于60帧的容量,当记录图像区30c全满时,当中最旧的帧图像数据会被来自YUV图像区30b的最新图像数据覆盖。所以,动态图像区总是保存着最新的60帧图像数据。
当通过键输入装置26进行动态图像记录开始操作时,CPU24会命令I/F36进行动态记录处理,I/F36通过存储器控制电路28周期性地对动态图像区进行读出,在记录介质38中制作包含读出的图像数据的动态图像文件。这种动态图像记录处理随着键输入装置26进行的结束操作而结束。
如果在动态图像记录处理执行中实行静止图像记录操作(按下快门按钮26sh),CPU24会通过存储器控制电路28读出最新的帧图像数据,以文件形式记录在记录介质38。该最新的帧图像数据是指记录图像区30c中保存的图像数据中与快门按下的时间点最接近的帧图像数据。
另外,这种在动态图像记录中进行的静态图像记录也可以适用上述的笑脸记录I模式和笑脸记录II模式。此时,在笑脸记录I模式中,CPU24在帧的指定微笑区内出现某个笑脸时,通过I/F36将记录图像区30c所保存的图像数据中的包含该笑脸的帧的图像数据记录在记录介质38中即可。在笑脸记录II模式中,在帧的某处出现某个笑脸时,通过I/F36将记录图像区30c所保存的图像数据中的包含该笑脸的帧的图像数据记录在记录介质38中即可。
此外,在其它的实施例中,如果主角和非主角被配置成图7(A)那样,也可以如图25所示,将聚焦评价区Efcs强行移动到指定微笑区内。在这种情况下,CPU24会在上述的笑脸记录模式II下,进一步执行图26那样的AF区域限制任务。在步骤S221判别聚焦评价区Efcs是否位于指定微笑区外部,如果为否就待机;如果为是就在步骤S223将聚焦评价区Efcs强行移动到指定微笑区的内部。然后,返回步骤S221,重复同样的处理。这样,可以提高与笑脸记录目标对焦的可能性。
这一点对上述的笑脸记录模式I则另当别论,在主角和非主角是图7(A)那样的配置、且彼此远近相差很大的情况下,由于焦点对准主角,所以很有可能不对非主角进行适当的笑脸判定,或者即便做了适当的笑脸判定,目标笑脸在记录图像上也可能很模糊。不过,只要利用聚焦评价区Efcs对人脸移动进行追踪,从而将作为笑脸记录目标的人脸Fc2暂时配置在画面中央,将双线人脸框Frd显示在人脸Fc2上,然后改变角度,按照图7的构图操作相机,就可以减小上述的可能性。
由上可知,本实施例的数码相机10包含CPU24。CPU24控制图像传感器14,反复捕捉摄像面14f上形成的视场图像(S25、S39、S105、S113),从由此制成的各视场图像中检测人脸图像(S161~S177),判定所检测出的各个人脸图像中的人脸是否是笑脸(S71~S97、S121~S135),当判定至少1个被检测出的人脸图像是从表示非笑脸状态变为表示笑脸状态时,就控制I/F36,将后来制成的视场图像记录到记录介质38中(S31、S41、S111、S115)。
另外,CPU24在笑脸记录I模式下,会响应通过键输入装置26输入的区域指定操作,在各个视场图像上分配区域(S63),至少根据被判定为笑脸的人脸图像与被分配的区域的位置关系,限制记录处理的实行(S33~S37)。这样,就能够以较高的概率记录目标笑脸。另一方面,对于笑脸记录II模式,由于没有此类限制,所以可以大范围地记录任意的笑脸。
另外,本实施例是在摄像区域Ep的整个区域(也就是说,连指定微笑区的外部也)进行笑脸判定。也可以仅在指定微笑区内进行笑脸判定,由此使CPU24的处理负担减轻。
此外,在本实施例中,笑脸判定是根据人脸特定部位的变化(嘴角上扬等)进行的,它不过是一个实例,可以使用各种判定方法。例如也可以着眼于人脸整体(轮廓线和皱纹分布等)以及各个部位(嘴角和外眼角等),将笑脸的程度数值化,根据得到的数值进行判定。
此外,本实施例准备了两个笑脸记录模式,分别是笑脸记录I和II。也可以在单一模式内,灵活运用指定微笑区的笑脸记录和不指定微笑区的(也就是摄像区Ep整体的)笑脸记录。下面,针对这种实施例进行说明。该实施例的硬件构成与图1相同,当笑脸记录模式有效时,CPU24会实行图27那样的处理。
最初的步骤S321中发出实时取景命令后,进入步骤S232,判别有无通过键输入装置26进行的区域指定操作。如果步骤S233中为是,则在步骤S235分配指定微笑区,然后返回步骤S233,重复同样的处理;如果步骤S233为否,就在S239解除指定微笑区,然后返回步骤S233,重复同样的处理。另外,在进行区域指定和解除操作时,如果中断实时取景显示,则需要从步骤S235或S239返回步骤S231。
如果在步骤S237中为否,则转移至步骤S241,判别是否已分配了指定微笑区,这里,如果为是就在指定微笑区内进行笑脸检测;如果为否就在整个摄像区Ep中进行笑脸检测。另外,这里所说的笑脸检测相当于将上述的人脸检测和笑脸判定组合起来的处理。然后,根据检测结果,在步骤S247判别是否有人笑了,如果为是就在步骤S249中发出正式摄影命令,然后在步骤S251实行记录处理;如果步骤S247中为否,就返回步骤S233,重复同样的处理。
以上作为一例对数码相机10进行了说明,本发明可以应用在如下的摄像装置(例如数码照相机、数码摄像机等)中,该摄像装置具备图像传感器(例如CCD或COMS等)、将基于图像传感器的输出的图像记录在记录介质中的记录单元、由使用者操作的操作单元(例如键输入装置或触屏等)、和处理器上。
已对本发明进行了详细说明和图示,但应该明确的是上述内容是简单的图解和作为一例用到的内容,不应解释为限定。本发明的主旨和范围仅由附加的权利要求的词句限定。

Claims (14)

1.一种摄像装置,包括:
摄像机构,反复捕捉在摄像面上的摄像区内形成的视场像;
分配机构,响应经由操作机构进行的区域指定操作,在所述摄像区内分配微笑区;和
笑脸记录机构,在由所述分配机构分配了所述微笑区的情况下,在所述微笑区内进行笑脸记录处理,在所述分配机构没有分配所述微笑区的情况下,在所述摄像区内进行笑脸记录处理,所述笑脸记录处理是从所述摄像机构制作的各视场图像中检测笑脸图像从而记录包含该笑脸图像的视场像。
2.一种摄像装置,包括:
摄像机构,反复捕捉在摄像面上形成的视场像;
检测机构,从由所述摄像机构制作的各视场图像中检测人脸图像;
判定机构,判定由所述检测机构检测出的各人脸图像的脸是否是笑脸;
记录机构,将所述判定机构判定由所述检测机构检测出的至少1个人脸图像是从表示非笑脸的状态变化至表示笑脸的状态之后、由所述摄像机构制作的视场图像记录到记录介质;
分配机构,在特定模式下,响应经由操作机构进行的区域指定操作,在所述各视场图像中分配区域;和
限制机构,至少根据由所述判定机构判定为笑脸的人脸图像与由所述分配机构分配的区域之间的位置关系,限制所述记录机构实行记录处理。
3.根据权利要求2所述的摄像装置,其特征在于,
所述限制机构,在由所述判定机构判定为笑脸的人脸图像位于由所述分配机构分配的区域内部的情况下,允许所述记录机构实行记录处理,在由所述判定机构判定为笑脸的人脸图像位于由所述分配机构分配的区域外部的情况下,限制所述记录机构实行记录处理。
4.根据权利要求3所述的摄像装置,其特征在于,
还包括调焦机构,该调焦机构用来调整焦点,使得与所述检测机构检测出的人脸图像的其中一个对焦,
在由所述分配机构分配的区域内部存在对焦的人脸图像与不对焦的人脸图像的情况下,所述限制机构关注于对焦的人脸图像。
5.根据权利要求4所述的摄像装置,其特征在于,
还包括控制机构,该控制机构用来控制所述调焦机构参照的聚焦评价区的位置,使得与所述检测机构检测出的人脸图像中的位于所述分配机构分配的区域内部的1个人脸图像对焦。
6.根据权利要求1~5中任意一项所述的摄像装置,其特征在于,
所述区域指定操作是从多个固定区域中指定1个的操作。
7.根据权利要求6所述的摄像装置,其特征在于,
所述多个固定区域彼此有一部分是重叠的。
8.根据权利要求1~7中任意一项所述的摄像装置,其特征在于,还包括:
实时取景机构,将基于所述摄像机构制作的各视场图像的实时取景图像显示在显示器上;和
描绘机构,将表示通过所述区域指定操作指定的区域的边框图像描绘在所述显示器的实时取景图像上。
9.一种笑脸记录程序,使摄像装置的处理器执行以下的步骤,该摄像装置具备:具有摄像面的图像传感器;将基于所述图像传感器的输出的图像记录在记录介质中的记录机构;和由使用者操作的操作机构,所执行的步骤分别是:
摄像步骤,控制所述图像传感器,反复捕捉在摄像面上的摄像区内形成的视场像;
分配步骤,响应经由所述操作机构进行的区域指定操作,在所述摄像区内分配微笑区;和
笑脸记录步骤,在由所述分配机构分配了所述微笑区的情况下,在所述微笑区内进行笑脸记录处理,在所述分配机构没有分配所述微笑区的情况下,在所述摄像区内进行笑脸记录处理,所述笑脸记录处理是从由所述摄像步骤制作的各视场图像中检测笑脸图像从而记录包含该笑脸图像的视场像。
10.一种笑脸记录程序,使摄像装置的处理器执行以下的步骤,该摄像装置具备:具有摄像面的图像传感器;将基于所述图像传感器的输出的图像记录在记录介质中的记录机构;和由使用者操作的操作机构,所执行的步骤分别是:
摄像步骤,控制所述图像传感器,反复捕捉在所述摄像面上形成的视场像;
检测步骤,从通过所述摄像步骤制作的各视场图像中检测人脸图像;
判定步骤,判定通过所述检测步骤检测出的各人脸图像的脸是否是笑脸;
笑脸记录步骤,控制所述记录机构,将所述判定步骤中判定所述检测步骤检测出的至少1个人脸图像是从表示非笑脸的状态变化至表示笑脸的状态之后、通过所述摄像步骤制作的视场图像记录到记录介质;
分配步骤,在特定模式下,响应经由所述操作机构进行的区域指定操作,在所述各视场图像中分配区域;和
限制步骤,至少根据通过所述判定步骤判定为笑脸的人脸图像与通过所述分配步骤分配的区域之间的位置关系,限制所述笑脸记录步骤实行记录处理。
11.一种记录介质,记录了用来使摄像装置的处理器执行以下步骤的笑脸记录程序,该摄像装置具备:具有摄像面的图像传感器;将基于所述图像传感器的输出的图像记录在记录介质中的记录机构;和由使用者操作的操作机构,所执行的步骤分别是:
摄像步骤,控制所述图像传感器,反复捕捉在摄像面上的摄像区内形成的视场像;
分配步骤,响应经由所述操作机构进行的区域指定操作,在所述摄像区内分配微笑区;和
笑脸记录步骤,在由所述分配机构分配了所述微笑区的情况下,在所述微笑区内进行笑脸记录处理,在所述分配机构没有分配所述微笑区的情况下,在所述摄像区内进行笑脸记录处理,所述笑脸记录处理是从由所述摄像步骤制作的各视场图像中检测笑脸图像从而记录包含该笑脸图像的视场像。
12.一种记录介质,记录了用来使摄像装置的处理器执行以下步骤的笑脸记录程序,该摄像装置具备:具有摄像面的图像传感器;将基于所述图像传感器的输出的图像记录在记录介质中的记录机构;和由使用者操作的操作机构,所执行的步骤分别是:
摄像步骤,控制所述图像传感器,反复捕捉在所述摄像面上形成的视场像;
检测步骤,从通过所述摄像步骤制作的各视场图像中检测人脸图像;
判定步骤,判定通过所述检测步骤检测出的各人脸图像的脸是否是笑脸;
笑脸记录步骤,控制所述记录机构,将所述判定步骤中判定所述检测步骤检测出的至少1个人脸图像是从表示非笑脸的状态变化至表示笑脸的状态之后、通过所述摄像步骤制作的视场图像记录到记录介质;
分配步骤,在特定模式下,响应经由所述操作机构进行的区域指定操作,在所述各视场图像中分配区域;和
限制步骤,至少根据通过所述判定步骤判定为笑脸的人脸图像与通过所述分配步骤分配的区域之间的位置关系,限制所述笑脸记录步骤实行记录处理。
13.一种笑脸记录方法,由摄像装置执行,该摄像装置具备:具有摄像面的图像传感器;将基于所述图像传感器的输出的图像记录在记录介质中的记录机构;和由使用者操作的操作机构,所述笑脸记录方法包括:
摄像步骤,控制所述图像传感器,反复捕捉在摄像面上的摄像区内形成的视场像;
分配步骤,响应经由所述操作机构进行的区域指定操作,在所述摄像区内分配微笑区;和
笑脸记录步骤,在由所述分配机构分配了所述微笑区的情况下,在所述微笑区内进行笑脸记录处理,在所述分配机构没有分配所述微笑区的情况下,在所述摄像区内进行笑脸记录处理,所述笑脸记录处理是从由所述摄像步骤制作的各视场图像中检测笑脸图像从而记录包含该笑脸图像的视场像。
14.一种笑脸记录方法,由摄像装置执行,该摄像装置具备:具有摄像面的图像传感器;将基于所述图像传感器的输出的图像记录在记录介质中的记录机构;和由使用者操作的操作机构,所述笑脸记录方法包括:
摄像步骤,控制所述图像传感器,反复捕捉在所述摄像面上形成的视场像;
检测步骤,从通过所述摄像步骤制作的各视场图像中检测人脸图像;
判定步骤,判定通过所述检测步骤检测出的各人脸图像的脸是否是笑脸;
笑脸记录步骤,控制所述记录机构,将所述判定步骤中判定所述检测步骤检测出的至少1个人脸图像是从表示非笑脸的状态变化至表示笑脸的状态之后、通过所述摄像步骤制作的视场图像记录到记录介质;
分配步骤,在特定模式下,响应经由所述操作机构进行的区域指定操作,在所述各视场图像中分配区域;和
限制步骤,至少根据通过所述判定步骤判定为笑脸的人脸图像与通过所述分配步骤分配的区域之间的位置关系,限制所述笑脸记录步骤实行记录处理。
CN2009801524228A 2008-12-24 2009-12-22 摄像装置和笑脸记录程序 Pending CN102265601A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2008326785A JP5116652B2 (ja) 2008-12-24 2008-12-24 撮像装置および笑顔記録プログラム
JP2008-326785 2008-12-24
PCT/JP2009/007112 WO2010073615A1 (ja) 2008-12-24 2009-12-22 撮像装置および笑顔記録プログラム

Publications (1)

Publication Number Publication Date
CN102265601A true CN102265601A (zh) 2011-11-30

Family

ID=42287262

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009801524228A Pending CN102265601A (zh) 2008-12-24 2009-12-22 摄像装置和笑脸记录程序

Country Status (4)

Country Link
US (1) US20120092516A1 (zh)
JP (1) JP5116652B2 (zh)
CN (1) CN102265601A (zh)
WO (1) WO2010073615A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105827907A (zh) * 2015-01-28 2016-08-03 卡西欧计算机株式会社 检测装置以及检测控制方法
CN107087104A (zh) * 2012-09-21 2017-08-22 宏达国际电子股份有限公司 面部区域的影像处理方法以及使用此方法的电子装置
CN108366199A (zh) * 2018-02-01 2018-08-03 海尔优家智能科技(北京)有限公司 一种图像采集方法、装置、设备及计算机可读存储介质

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5827491B2 (ja) * 2011-04-28 2015-12-02 キヤノン株式会社 撮像装置、及び撮像装置の制御方法
US9025836B2 (en) 2011-10-28 2015-05-05 Intellectual Ventures Fund 83 Llc Image recomposition from face detection and facial features
US8811747B2 (en) 2011-10-28 2014-08-19 Intellectual Ventures Fund 83 Llc Image recomposition from face detection and facial features
US9008436B2 (en) * 2011-10-28 2015-04-14 Intellectual Ventures Fund 83 Llc Image recomposition from face detection and facial features
US8938100B2 (en) 2011-10-28 2015-01-20 Intellectual Ventures Fund 83 Llc Image recomposition from face detection and facial features
US9025835B2 (en) 2011-10-28 2015-05-05 Intellectual Ventures Fund 83 Llc Image recomposition from face detection and facial features
US8965046B2 (en) * 2012-03-16 2015-02-24 Qualcomm Technologies, Inc. Method, apparatus, and manufacture for smiling face detection
US9049355B2 (en) * 2012-09-21 2015-06-02 Htc Corporation Methods for image processing of face regions and electronic devices using the same
US9742989B2 (en) 2013-03-06 2017-08-22 Nec Corporation Imaging device, imaging method and storage medium for controlling execution of imaging
US9729865B1 (en) 2014-06-18 2017-08-08 Amazon Technologies, Inc. Object detection and tracking
US10027883B1 (en) * 2014-06-18 2018-07-17 Amazon Technologies, Inc. Primary user selection for head tracking
US10981060B1 (en) 2016-05-24 2021-04-20 Out of Sight Vision Systems LLC Collision avoidance system for room scale virtual reality system
US11164378B1 (en) * 2016-12-08 2021-11-02 Out of Sight Vision Systems LLC Virtual reality detection and projection system for use with a head mounted display
US10904425B2 (en) * 2017-11-06 2021-01-26 Canon Kabushiki Kaisha Image processing apparatus, control method therefor, and storage medium for evaluating a focusing state of image data

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000196934A (ja) * 1998-12-25 2000-07-14 Casio Comput Co Ltd 撮像方法および撮像装置
JP2004343401A (ja) * 2003-05-15 2004-12-02 Fme:Kk 監視用デジタルスチルカメラ
JP2007215064A (ja) * 2006-02-13 2007-08-23 Nec Corp 自動撮影方法及び自動撮影装置並びに自動撮影プログラム
JP2008252713A (ja) * 2007-03-30 2008-10-16 Nikon Corp 撮像装置
CN101304487A (zh) * 2007-05-10 2008-11-12 富士胶片株式会社 调焦设备、方法和程序

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4121026B2 (ja) * 2004-01-21 2008-07-16 富士フイルム株式会社 撮像装置および方法並びにプログラム
US8169484B2 (en) * 2005-07-05 2012-05-01 Shai Silberstein Photography-specific digital camera apparatus and methods useful in conjunction therewith
JP2008160701A (ja) * 2006-12-26 2008-07-10 Sky Kk カメラ及びカメラ用撮影制御プログラム
JP4453721B2 (ja) * 2007-06-13 2010-04-21 ソニー株式会社 画像撮影装置及び画像撮影方法、並びにコンピュータ・プログラム
JP4356778B2 (ja) * 2007-06-25 2009-11-04 ソニー株式会社 画像撮影装置及び画像撮影方法、並びにコンピュータ・プログラム
JP4930302B2 (ja) * 2007-09-14 2012-05-16 ソニー株式会社 撮像装置、その制御方法およびプログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000196934A (ja) * 1998-12-25 2000-07-14 Casio Comput Co Ltd 撮像方法および撮像装置
JP2004343401A (ja) * 2003-05-15 2004-12-02 Fme:Kk 監視用デジタルスチルカメラ
JP2007215064A (ja) * 2006-02-13 2007-08-23 Nec Corp 自動撮影方法及び自動撮影装置並びに自動撮影プログラム
JP2008252713A (ja) * 2007-03-30 2008-10-16 Nikon Corp 撮像装置
CN101304487A (zh) * 2007-05-10 2008-11-12 富士胶片株式会社 调焦设备、方法和程序

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107087104A (zh) * 2012-09-21 2017-08-22 宏达国际电子股份有限公司 面部区域的影像处理方法以及使用此方法的电子装置
CN107087104B (zh) * 2012-09-21 2019-09-10 宏达国际电子股份有限公司 面部区域的影像处理方法以及使用此方法的电子装置
CN105827907A (zh) * 2015-01-28 2016-08-03 卡西欧计算机株式会社 检测装置以及检测控制方法
CN105827907B (zh) * 2015-01-28 2019-08-27 卡西欧计算机株式会社 检测装置以及检测控制方法
CN108366199A (zh) * 2018-02-01 2018-08-03 海尔优家智能科技(北京)有限公司 一种图像采集方法、装置、设备及计算机可读存储介质

Also Published As

Publication number Publication date
JP5116652B2 (ja) 2013-01-09
WO2010073615A1 (ja) 2010-07-01
US20120092516A1 (en) 2012-04-19
JP2010153954A (ja) 2010-07-08

Similar Documents

Publication Publication Date Title
CN102265601A (zh) 摄像装置和笑脸记录程序
JP4574249B2 (ja) 画像処理装置及びその方法、プログラム、撮像装置
CN101753822B (zh) 摄像装置和摄像装置中的图像处理方法
CN107463888B (zh) 基于多任务学习与深度学习的人脸情绪分析方法及系统
CN102196220B (zh) 信息处理设备和信息处理方法
EP1748378A1 (en) Image capturing apparatus and image capturing method
CN103501413B (zh) 利用前置摄像头控制后置摄像头对焦及拍照的方法及系统
US20100111441A1 (en) Methods, components, arrangements, and computer program products for handling images
JP5467992B2 (ja) 撮像装置
CN101931753A (zh) 目标跟踪和图像跟踪设备、操作控制方法及数字摄像机
CN102096805B (zh) 注册用于脸部识别的多个脸部图像的装置和方法
CN104506767B (zh) 利用马达连续移动生成同一景物不同焦距的方法和终端
CN107203348A (zh) 图像处理系统和方法
CN107424266A (zh) 人脸识别解锁的方法和装置
JP2004334836A (ja) 画像の特徴部分抽出方法及び特徴部分抽出プログラム並びに撮像装置と画像処理装置
CN109922221A (zh) 图像形成装置、存储介质以及控制方法
CN101399914A (zh) 摄影装置和摄影方法
CN105934940A (zh) 图像处理装置、方法与程序
CN108156376A (zh) 图像采集方法、装置、终端及存储介质
CN108810400A (zh) 控制设备、控制方法和记录介质
JP2011061703A (ja) 撮像装置及び撮像装置の制御方法
JP5880135B2 (ja) 検出装置、検出方法及びプログラム
CN104063041B (zh) 一种信息处理方法及电子设备
JP4943127B2 (ja) 個人認証装置および個人認証システム
CN105516577B (zh) 摄像头拍摄控制方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20111130