CN101313565B - 电子摄像机及图像处理装置 - Google Patents

Abstract

电子摄像机包括摄像元件、图像处理部、脸部检测部、控制部、脸部图像生成部或者脸部识别数据生成部以及记录部。摄像元件对摄影光学系统的被摄体像进行光电转换，生成图像信号。图像处理部基于来自摄像元件的图像信号，生成脸部登记图像数据，并且基于图像信号，生成透视图像数据。脸部检测部基于透视图像数据，检测摄影画面内的脸部区域。控制部对应脸部区域的检测位置，调整摄影光学系统的摄影参数。脸部图像生成部切出脸部区域的图像，生成脸部图像数据。脸部识别数据生成部从脸部登记图像数据的脸部区域的部分提取摄影人物脸部的特征点，基于特征点，生成脸部识别数据。记录部记录脸部识别数据或者脸部图像数据。

Description

电子摄像机及图像处理装置

技术领域

本发明涉及具有人物脸部识别功能的电子摄像机及图像处理装置。

背景技术

以往公开有如下技术，即从拍摄人物脸部的摄影图像中提取人物脸部的特征点，根据关于要识别的人物的脸部识别数据与上述特征点之间的一致度，进行脸部识别(参照专利文件1)。在所述脸部识别技术中，需要预先在电子摄像机等中登记脸部识别数据。特别是为了提高脸部识别的精度，需要很多的脸部识别数据，所以需要从多个帧的摄影图像中生成脸部识别数据。

此外，在用于生成脸部识别数据的登记摄影中，需要拍摄被摄体的脸部以便更加容易提取脸部的特征点。因此，具有能够容易地进行上述登记摄影的摄影模式的电子摄像机被期望。

此外，期望在登记脸部识别数据时能够从更多的摄影图像数据中生成脸部识别数据。例如，如果能够从由其他电子摄像机拍摄的图像数据以及过去拍摄的图像数据中生成脸部识别数据，则会大幅提高用户的便利性。进而，在脸部登记作业中，期望不用进行繁琐的作业就能够更加简单地进行脸部登记的装置。

进而，由于在上述电子摄像机中将多个脸部识别数据登记在存储器中，所以登记的脸部识别数据的管理和编辑对用户来说变得繁琐的可能性很高。例如在摄影时选择脸部识别数据并使电子摄像机识别特定的登记人物的情况下，或者在编辑时删除特定的登记人物的脸部识别数据的情况下，期望能够使用户简单并速度地识别脸部识别数据的概要或者脸部识别数据与登记人物之间的对应关系。

此外，在具有脸部识别功能的电子摄像机中可以根据脸部识别结果定制摄影条件或图像处理等，但是期望即使在一次拍摄了多个识别对象的状况下也能够进行控制而适当地反映用户意图的电子摄像机。

此外，在多个摄影画面内检测出多个脸部的情况下或者用于脸部识别判断中的脸部识别数据的总数较多的情况下，脸部识别处理的运算量变得非常大。在上述情况下，由于脸部识别处理的运算时间变长，所以妨碍了用户的舒适摄影，并且错过按快门的机会的可能性变高，在以上几个方面还存在改善的余地。

专利文件1：日本特开平6-259534号公报

发明内容

本发明是为了解决上述现有技术的技术问题中的至少一个而完成的。本发明的目的之一在于提供一种能够容易地进行生成脸部识别数据时的登记摄影的电子摄像机。

此外，本发明的目的之一在于提供一种能够读取预先拍摄人物而成的图像数据并容易地生成作为目标的人物的脸部识别数据的图像处理装置。

此外，本发明的目的之一在于提供一种能够使用户容易且速度地识别脸部识别数据的概要或者脸部识别数据与登记人物之间的对应关系的电子摄像机。

此外，本发明的目的之一在于提供一种即使在一次拍摄了多个识别对象的状况下也能够进行控制而根据脸部识别结果来适当地反映用户意图的电子摄像机。

此外，本发明的目的之一在于提供一种能够根据状况来适当地调整脸部识别处理的运算量的电子摄像机。

第一发明涉及的电子摄像机包括摄像元件、图像处理部、脸部检测部、控制部、脸部图像生成部或者脸部识别数据生成部、以及记录部。摄像元件对摄影光学系统的被摄体像进行光电转换，生成图像信号。图像处理部基于来自摄像元件的图像信号，生成脸部登记图像数据，并且基于图像信号，生成透视图像数据。脸部检测部基于透视图像数据，检测摄影画面内的脸部区域。控制部对应脸部区域的检测位置，调整摄影光学系统的摄影参数。脸部图像生成部切出脸部区域的图像，生成脸部图像数据。脸部识别数据生成部从脸部登记图像数据的脸部区域的部分提取摄影人物脸部的特征点，基于特征点，生成脸部识别数据。记录部记录脸部图像数据或者 脸部识别数据。

第二发明涉及的电子摄像机包括摄像元件、图像处理部、控制部、脸部检测部、脸部图像生成部或者脸部识别数据生成部、以及记录部。摄像元件对摄影光学系统的被摄体像进行光电转换，生成图像信号。图像处理部基于来自摄像元件的图像信号，生成脸部登记图像数据，并且基于图像信号，生成透视图像数据。控制部以摄影画面的中央部分为基准，调整摄影光学系统的摄影参数。脸部检测部基于透视图像数据或者脸部登记图像数据，检测位于摄影画面中央部分的脸部区域。脸部图像生成部切出脸部区域的图像，生成脸部图像数据。脸部识别数据生成部从脸部登记图像数据的脸部区域的部分提取摄影人物脸部的特征点，基于特征点，生成脸部识别数据。记录部记录脸部图像数据或者脸部识别数据。

第三发明是，在第一或者第二发明中，控制部在基于透视图像数据的脸部检测时执行摄像元件的释放动作。

第四发明是，在第一至第三发明中的任一项发明中，还具有显示透视图像数据的图像的显示部。控制部在生成脸部登记图像数据的摄影模式下，使显示部的电源接通。

第五发明是，在第一至第三发明中的任一项发明中，还具有显示透视图像数据的图像的显示部。图像处理部在透视图像数据的中央部分合成用于辅助摄影画面中的脸部的定位的构图辅助显示并输出。

第六发明是，在第五发明中，图像处理部还在透视图像数据中合成被摄体的摄影状态的样本显示并输出。

第七发明是，在第一至第六发明中的任一项发明中，控制部在生成脸部登记图像数据时限制对脸部登记图像数据的电子变焦处理。

第八发明是，在第一至第七发明中的任一项发明中，摄影光学系统还具有变焦透镜。控制部在摄影参数的调整时以及释放时使变焦透镜的倍率调整范围与通常摄影时相比受到限制。

第九发明是，在第八发明中，控制部在释放时将变焦透镜的变焦位置设定在广角端。

第十发明是，在第一至第九发明中的任一项发明中，还具有：像模糊补正透镜，补正摄影画面上的像模糊；角移位检测部，检测电子摄像机的 光轴的角度变动；以及补正透镜驱动部，在释放时，基于角度变动，使像模糊补正透镜驱动。

第十一发明是，在第一至第十发明中的任一项发明中，还具有调整图像信号的增益的摄像灵敏度变更部。控制部在释放时使图像信号的增益高于通常摄影时的设定。

第十二发明是，在第一至第十一发明中的任一项发明中，还具有对被摄场进行闪光发光的闪光发光部。控制部在释放时使闪光发光部的闪光发光无效。

第十三发明是，在第一至第十二发明中的任一项发明中，控制部生成表示释放时的摄影条件的摄影条件数据，并且将该摄影条件数据与脸部图像数据或者脸部识别数据相对应地记录在记录部中。

第十四发明是，在第一至第十三发明中的任一项发明中，控制部生成表示脸部图像数据或者脸部识别数据的取得时间的取得时间数据，并将该取得时间数据与脸部图像数据或者脸部识别数据相对应地记录在记录部中。

第十五发明是，在第一至第十四发明中的任一项发明中，图像处理部基于脸部登记图像数据，生成索引图像数据。控制部将索引图像数据与脸部图像数据或者脸部识别数据相对应地记录在记录部中。

第十六发明是，在第一至第十五发明中的任一项发明中，控制部将根据相同摄影人物生成的多个脸部图像数据或者脸部识别数据成组记录在记录部中。

第十七发明是，在第十六发明中，控制部使摄影人物的脸部朝向、摄影人物的眼镜有无以及脸部登记图像数据的摄影条件中的某个并不相同的2个以上的脸部图像数据或者脸部识别数据成组。

第十八发明是，在第一至第十七发明中的任一项发明中，控制部在生成多个拍摄相同摄影人物而成的脸部登记图像数据时，基于脸部区域的检测状态，决定脸部登记图像数据的优先顺序。脸部图像生成部或者脸部识别数据生成部根据优先顺序高的脸部登记图像数据，生成脸部图像数据或者脸部识别数据。

第十九发明是，在第一至第十八发明中的任一项发明中，控制部基于 脸部区域的检测状态，推定摄影人物的脸部朝向，在该脸部朝向与规定方向不一致时，使摄像元件的释放动作无效。

第二十发明是，在第一至第十八发明中的任一项发明中，控制部基于脸部区域的检测状态，推定摄影人物的表情，根据该表情的种类，使摄像元件的释放动作无效。

第二十一发明涉及的电子摄像机包括摄像元件、脸部检测部、脸部识别数据生成部、以及控制部。摄像元件对摄影光学系统的被摄体像进行光电转换，生成图像信号。脸部检测部基于来自摄像元件的图像信号，检测摄影画面内的脸部区域。脸部识别数据生成部从脸部区域的部分提取摄影人物脸部的特征点，基于特征点，生成脸部识别数据。控制部使用于生成脸部识别数据的摄影时的摄影条件与通常摄影时的摄影条件相比受到限制。

第二十二发明涉及的图像处理装置包括控制部、脸部检测部、脸部图像生成部或者脸部识别数据生成部、以及记录部。控制部具有内置存储器、与记录介质连接的连接部以及外部通信机构中的至少一个，并且从内置存储器、记录介质、经由外部通信机构连接的计算机中的某个中取得由电子摄像机预先生成的摄影图像数据。脸部检测部基于摄影图像数据，检测摄影画面内的脸部区域。脸部图像生成部切出脸部区域的图像，生成脸部图像数据。脸部识别数据生成部从摄影图像数据的脸部区域的部分提取摄影人物脸部的特征点，基于特征点，生成脸部识别数据。记录部记录脸部图像数据或者脸部识别数据。

第二十三发明是，在第二十二发明中，还具有：图形处理部，在摄影图像数据的再现图像上合成用于识别脸部区域的显示；以及显示部，显示图像处理部的输出图像。

第二十四发明是，在第二十三发明中，还具有受理用户输入的输入部。脸部检测部基于来自输入部的输入，变更用于规定脸部区域的检测精度的阈值。

第二十五发明是，在第二十三发明中，还具有受理用户输入的输入部。脸部图像生成部或者脸部识别数据生成部在从摄影图像数据中检测出多个脸部区域的情况下，对利用来自输入部的输入所选择的脸部区域生成脸部 图像数据或者脸部识别数据。

第二十六发明是，在第二十二至第二十五发明中的任一项发明中，控制部将根据相同摄影人物生成的多个脸部图像数据或者脸部识别数据成组记录在记录部中。

第二十七发明是，在第二十二至第二十六发明中的任一项发明中，控制部以规定的尺寸切出摄影图像数据的脸部区域的部分，生成索引图像数据，并且将该索引图像数据与脸部图像数据或者脸部识别数据相对应地记录在记录部中。

第二十八发明是，在第二十二至第二十七发明中的任一项发明中，摄影图像数据具有记录了摄影时的摄影条件的附属数据区域。控制部基于附属数据区域的摄影条件，生成摄影条件数据，并且将该摄影条件数据与脸部图像数据或者脸部识别数据相对应地记录在记录部中。

第二十九发明是，在第二十二至第二十八发明中的任一项发明中，摄影图像数据具有记录了摄影时间的附属数据区域。控制部基于附属数据区域的摄影时间，生成脸部图像数据或者脸部识别数据的取得时间数据，并且将该取得时间数据与脸部图像数据或者脸部识别数据相对应地记录在记录部中。

第三十发明涉及的电子摄像机包括摄像元件、脸部检测部、记录部、脸部识别部、以及控制部。摄像元件对摄影光学系统的被摄体像进行光电转换，生成图像信号。脸部检测部基于图像信号，检测摄影画面的脸部区域，并从该脸部区域的部分，提取摄影人物脸部的特征点。记录部将基于人物脸部的特征点预先生成的脸部识别数据与索引图像数据相对应地记录，所述索引图像数据用于表示与该脸部识别数据对应的登记人物。脸部识别部基于脸部检测部所提取的特征点以及脸部识别数据，判断摄影人物是否是登记人物。控制部生成编辑画面，该编辑画面将脸部识别数据的指定中使用的显示项目与索引图像数据的图像相关联地进行提示。

第三十一发明的特征在于，在第三十发明中，索引图像数据是登记人物的摄影图像数据。

第三十二发明的特征在于，在第三十一发明中，索引图像数据是在脸部识别数据的生成中使用的摄影图像数据。

第三十三发明的特征在于，在第三十至第三十二发明中的任一项发明中，在脸部识别数据的生成中使用的图像数据的摄影条件在与脸部识别数据相对应的状态下记录在记录部中。

第三十四发明的特征在于，在第三十至第三十三发明中的任一项发明中，在脸部识别数据的生成中使用的图像数据的摄影时间在与脸部识别数据相对应的状态下记录在记录部中。

第三十五发明的特征在于，在第三十至第三十四发明中的任一项发明中，适用于登记人物摄影时的处理设定在与脸部识别数据相对应的状态下记录在记录部中。

第三十六发明的特征在于，在第三十至第三十五发明中的任一项发明中，还具有将摄影图像的图像数据发送到外部的通信部。登记人物摄影时的图像数据发送与否以及图像数据的发送目的地的地址信息在与脸部识别数据相对应的状态下记录在记录部中。

第三十七发明的特征在于，在第三十至第三十六发明中的任一项发明中，控制部具有对编辑画面的显示输出与否进行管理的个人认证机构。

第三十八发明的特征在于，在第三十七发明中，个人认证机构包括脸部识别部进行的脸部认证。

第三十九发明的特征在于，在第三十一至第三十八发明中的任一项发明中，在记录部中能够记录与相同的登记人物有关的多个索引图像数据，控制部从索引图像数据中选择任意的摄影图像数据的图像，并且将该选择图像与显示项目相关联地提示在编辑画面上。

第四十发明的特征在于，在三十九发明中，控制部从索引图像数据中选择最新的摄影图像数据的图像。

第四十一发明的特征在于，在第三十九发明中，控制部从索引图像数据中选择拍摄登记人物的脸部正面而成的摄影图像数据的图像。

第四十二发明的特征在于，在第三十九发明中，控制部每隔规定间隔依次切换索引图像数据的图像，并提示在编辑画面上。

第四十三发明涉及的电子摄像机包括摄像元件、脸部检测部、记录部、脸部识别部、以及控制部。摄像元件对摄影光学系统的被摄体像进行光电转换，生成图像信号。脸部检测部基于图像信号，检测摄影画面的脸部区 域，并从该脸部区域的部分，提取摄影人物脸部的特征点。记录部将基于登记人物脸部的特征点预先生成的脸部识别数据与登记人物摄影时适用的摄影设定相对应地记录。脸部识别部基于脸部检测部所提取的特征点以及脸部识别数据，判断摄影人物是否是登记人物。控制部设定登记人物的优先顺序，在登记人物摄影时基于摄影设定生成摄影图像数据，在检测出多个登记人物的情况下，适用与登记人物中优先顺序最高的人物相对应的摄影设定。

第四十四发明的特征在于，在第四十三发明中，还具有受理用户输入的输入部。此外，控制部基于来自输入部的输入，指定登记人物并个别设定优先顺序。

第四十五发明的特征在于，在第四十四发明中，还具有显示部，该显示部显示用于进行登记人物的指定的编辑画面。此外，控制部对应优先顺序，使编辑画面上的登记人物显示项目的显示位置或者显示顺序变化。

第四十六发明的特征在于，在第四十三至第四十五发明中的任一项发明中，控制部按照登记人物的登记顺序设定优先顺序。

第四十七发明的特征在于，在第四十三至第四十五发明中的任一项发明中，控制部利用名称排列登记人物，来设定优先顺序。

第四十八发明的特征在于，在第四十三至第四十五发明中的任一项发明中，记录部能够对与相同的登记人物有关的多个脸部识别数据成组进行记录，控制部对分组后的脸部识别数据组，利用该脸部识别数据组中包含的脸部识别数据的数量设定优先顺序。

第四十九发明的特征在于，在第四十三发明中，记录部还记录表示每个登记人物的摄影次数的摄影次数数据。并且，控制部基于上述摄影次数数据，将摄影次数多的登记人物的优先顺序设定得高。

第五十发明涉及的电子摄像机包括摄像元件、脸部检测部、记录部、控制部、以及脸部识别部。摄像元件对摄影光学系统的被摄体像进行光电转换，生成图像信号。脸部检测部基于图像信号，检测摄影画面的脸部区域，并从该脸部区域的部分提取摄影人物脸部的特征点。记录部记录基于登记人物脸部的特征点而预先生成的脸部识别数据。控制部基于与脸部识别对象的登记人物相关的脸部识别数据组中包含的脸部识别数据的数量， 从脸部识别数据组中选择判断用脸部识别数据。脸部识别部基于脸部检测部所提取的特征点以及判断用脸部识别数据，判断摄影人物是否是脸部识别对象的登记人物。

第五十一发明的特征在于，在第五十发明中，控制部选择判断用脸部识别数据，使脸部识别数据的数量和脸部区域的数量之积所对应的评价值低于由脸部识别部的处理能力规定的阈值。

第五十二发明的特征在于，在第五十或者第五十一发明中，控制部在脸部识别对象的登记人物是多个的情况下，基于对各个登记人物设定的优先顺序对判断用脸部识别数据附加权重来进行选择。

第五十三发明的特征在于，在第五十至第五十二发明中的任一项发明中，控制部在脸部识别对象的登记人物是多个的情况下，使脸部识别数据的记录数多的登记人物优先，来选择判断用脸部识别数据。

第五十四发明的特征在于，在第五十至第五十三发明中的任一项发明中，控制部在关于相同登记人物记录了多个脸部识别数据的情况下，使取得时间近的脸部识别数据优先，来选择判断用脸部识别数据。

第五十五发明的特征在于，在第五十至第五十四发明中的任一项发明中，控制部在关于相同登记人物记录了取得时的摄影条件不同的多个脸部识别数据的情况下，使取得时的摄影条件接近当前摄影条件的脸部识别数据优先，来选择判断用脸部识别数据。

第五十六发明的特征在于，在第五十至第五十五发明中的任一项发明中，控制部在关于相同登记人物记录了脸部朝向不同的多个脸部识别数据的情况下，使与脸部正面对应的脸部识别数据优先，来选择判断用脸部识别数据。

第五十七发明的特征在于，在第五十至第五十六发明中的任一项发明中，记录部还记录表示每个登记人物的摄影次数的摄影次数数据。并且，控制部基于摄影次数数据，使摄影次数多的登记人物优先，来选择判断用脸部识别数据。

这里，将与上述发明有关的机构转换成方法、记录介质、计算机程序等来表现的形态，作为本发明的具体形态也是有效的。

发明效果：

在本发明的一个形态的电子摄像机中，能够容易地进行生成脸部识别数据时的登记摄影。

此外，在本发明的一个形态的图像处理装置中，能够读取预先拍摄人物所形成的图像数据，并容易地生成作为目的的人物的脸部识别数据。

此外，在本发明的一个形态的电子摄像机中，用户能够简单且迅速地识别脸部识别数据的概要以及脸部识别数据与登记人物之间的对应关系。

此外，在本发明的一个形态的电子摄像机中，即使是一次拍摄多个识别对象的状况下，也能够根据脸部识别的结果，进行适当地反映用户意图的控制。

此外，在本发明的一个形态的电子摄像机中，能够根据状况适当地调整脸部识别处理的运算量。

附图说明

图1是表示第一实施方式的电子摄像机的结构的框图。

图2是表示第一实施方式的“脸部登记模式”下的动作的流程图。

图3是表示模式选择画面的一个例子的附图。

图4是登记人物的选择画面的一个例子的附图。

图5是登记人物的详细信息画面的一个例子的附图。

图6是表示脸部检测时预览画面的显示例的附图。

图7是表示第一实施方式的“脸部识别摄影模式”下的动作的流程图。

图8是表示第二实施方式的“脸部登记模式”下的动作的流程图。

图9是表示第三实施方式的“脸部登记模式”下的动作的流程图。

图10是表示第四实施方式的“脸部登记模式”下的动作的流程图。

图11是表示第四实施方式中预览画面的显示例的附图。

图12是表示第五实施方式的“脸部登记模式”下的动作的流程图。

图13是表示能够指定脸部登记模式的模式选择画面的一个例子的附图。

图14是表示用于确认脸部检测处理的再次试行的显示的一个例子的附图。

图15是表示基于选框的脸部区域选择状态的附图。

图16是表示“新的”和“追加”的选择显示的一个例子的附图。

图17是表示第六实施方式中利用编辑画面的启动操作进行脸部认证时的流程图。

图18是表示第六实施方式的“脸部识别摄影模式”下的动作的流程图。

图19是表示第七实施方式的“脸部识别摄影模式”下的动作的流程图。

具体实施方式

(第一实施方式的说明)

图1是表示第一实施方式的电子摄像机的结构的框图。

电子摄像机具有摄影光学系统11、第一透镜驱动部12、摇动传感器部13、像模糊补正透镜14、第二透镜驱动部15、摄像元件16、模拟信号处理部17、A/D转换部18、内置存储器19、图像处理部20、卡I/F 21、输入输出I/F 22、操作部件23、液晶监视器24、闪光发光部25、CPU 26、脸部登记存储器27以及数据总线28。此外，经由数据总线28连接内置存储器19、图像处理部20、卡I/F 21、输入输出I/F 22及CPU 26。

摄影光学系统11由多个透镜组构成，所述多个透镜组包括变焦透镜11a、聚焦位置调节用的聚焦透镜11b。利用第一透镜驱动部12沿光轴方向驱动调整构成摄影光学系统11的各个透镜。

摇动传感器部13具有检测电子摄像机的纵向摇动的纵向角速度传感器和检测电子摄像机的横向摇动的横向角速度传感器。摇动传感器部13向CPU 26输出表示电子摄像机的摇动的摄像机摇动数据。该摄像机摇动数据用于计算像模糊补正透镜14的移动量。

像模糊补正透镜14沿着光轴垂直方向可摇动地构成。第二透镜驱动部15包括使像模糊补正透镜14纵向摇动的纵向摇动机构以及使像模糊补正透镜14横向摇动的横向摇动机构。该第二透镜驱动部15根据CPU 26计算出的像模糊补正透镜14的移动量，使像模糊补正透镜14摇动，来执行模糊补正。

摄像元件16对通过摄影光学系统11的光束进行光电转换，生成被摄体像的模拟图像信号。该摄像元件16在非释放时(摄影待机时)也每隔规定间隔曝光被摄体，输出间隔读取的模拟图像信号(透视图像信号)。透视 (through)图像信号用于后述的AF运算、AE运算以及脸部检测动作或取景器用图像的生成等。

模拟信号处理部17包括进行相关双采样的CDS电路、放大模拟图像信号的输出的增益电路以及将输入信号的波形箝位在一定的电压电平上的箝位电路等。A/D转换部18将摄像元件16的模拟图像信号转换为数字图像信号。内置存储器19在图像处理部20中的图像处理之前的工序或者之后的工序中暂时保存数据。此外，也能够在内置存储器19中设置可记录后述的摄影图像数据的记录区域。

图像处理部20对数字图像信号实施规定的图像处理。该图像处理部20根据释放(release)时的图像信号，生成摄影图像数据。此外，图像处理部20根据透视图像信号依次生成透视图像数据。该透视图像数据的分辨率设定得比摄影图像数据的分辨率低。透视图像数据用于CPU进行的脸部识别处理中，并且也作为液晶监视器24的显示图像(预览图像)使用。进而，图像处理部20也执行摄影图像数据的压缩处理等。进而，图像处理部20还能够切出摄影图像的一部分来进行变换分辨率的电子变焦处理。

此外，图像处理部20根据CPU 26的指示，生成各种显示(脸部识别时的框显示等)的视频数据，将上述视频数据重叠在透视图像数据上并输出给液晶监视器24。由此，在预览图像上合成上述各种显示。

卡I/F 21上形成有用于连接记录介质29的连接器。记录介质29由公知的半导体存储器等构成。并且，卡I/F 21控制对记录介质29的摄影图像数据的写入/读取。

输入输出I/F 22上连接有操作部件23和液晶监视器24。操作部件23具有输入按钮及释放按钮等。操作部件23的输入按钮例如受理电子摄像机的摄影模式(通常摄影模式、再现模式、脸部登记模式、脸部识别摄影模式等)的切换输入等。此外，操作部件23的释放按钮受理基于半按下的AF动作的指示输入和基于全按下的释放输入。

另一方面，液晶监视器24主要配置在电子摄像机的背面部分。该液晶监视器24上显示摄影图像数据的再现图像及用于变更电子摄像机的各种设定的设定画面等。在上述设定画面上包括用于编辑后述脸部识别数据的编辑画面。此外，在摄影模式下的液晶监视器24上能够动画显示上述预览图 像。因此，用户能够一边确认液晶监视器24的预览图像一边进行被摄体的取景。

进而，在输入输出I/F 22上形成有外部连接端子。并且，输入输出I/F22基于USB(Universal Serial Bus：通用串行总线)及IEEEE1394等串行通信标准来控制与经由外部连接端子连接的计算机等之间的数据收发。此外，输入输出I/F 22的外部连接端子上能够连接用于与外部进行无线通信的扩展设备即通信单元30。

闪光发光部25包括氙发光管、积蓄发光能量的主电容、用于将闪光高效地照射到被摄体上的反射伞或透镜部件、调整发光定时或光量的发光控制电路等。

CPU 26按照存储在未图示的ROM中的顺序程序(sequence program)，控制电子摄像机的各部动作。例如，CPU 26基于透视图像信号，执行公知的对照方式的AF(自动聚焦)运算、公知的AE(自动曝光)运算等。此外，CPU 26基于上述的摄像机摇动数据，运算像模糊补正透镜14的移动量。

进而，CPU 26具有脸部检测部31和脸部识别部32的功能。脸部检测部31从透视图像数据或摄影图像数据中提取特征点，并检测被摄体的脸部区域、脸部的大小等。例如脸部检测部31通过在日本特开2001-16573号公报等中记载的特征点提取处理来提取脸部区域。此外，作为上述特征点，可以例举出例如眉、眼、鼻、唇的各个端点、脸部的轮廓点、头顶点或下巴的下端点等。

脸部识别部32在“脸部登记模式”下基于检测出的脸部特征点生成脸部识别数据。例如，脸部识别部32根据检测出的脸部的特征点的位置、从特征点求出的脸部部件的大小、各特征点的相对距离等，生成登记人物的脸部识别数据。

此外，脸部识别部32在“脸部识别摄影模式”下进行脸部识别处理，该脸部识别处理判断摄影画面内的人物脸部是否是脸部识别数据的登记人物的脸部。具体来说，首先，脸部识别部32根据检测出的脸部的特征点，计算摄影人物的脸部的特征点的位置、各个脸部部件的大小、各特征点的相对距离等。接着，脸部识别部32比较上述运算结果和脸部识别数据，并 求出规定的登记人物的脸部与摄影人物的脸部之间的相似度。并且，脸部识别部32在上述相似度超过阈值时判断摄影人物与规定的登记人物一致。

此外，CPU 26能够根据脸部识别处理的结果来执行摄影条件或者图像处理的设定变更、以及对摄像元件16的释放指示等。

在脸部登记存储器27中记录CPU 26的脸部识别部32生成的脸部识别数据。在该脸部登记存储器27中对每个登记人物生成组文件夹。在组文件夹中分别记录各个登记人物的脸部识别数据。即，脸部登记存储器27的脸部识别数据由组文件夹按每个登记人物分组。例如在组文件夹中能够对同一登记人物记录脸部的朝向、有无眼镜及摄影条件等不同的多个脸部识别数据。并且，通过指定登记人物，CPU 26能够统一从脸部登记存储器27读取组文件夹内的脸部识别数据。

此外，在脸部登记存储器27中记录“登记人物的名称”以及“脸部识别时的处理设定”的数据。上述“登记人物的名称”以及“脸部识别时的处理设定”分别与各个登记人物的组文件夹相对应。

这里，在“脸部识别时的处理设定”中记录在识别出登记人物时适用的电子摄像机的各种控制的设定。例如在“脸部识别时的处理设定”中包括(1)摄影时的摄影条件的设定、(2)摄影图像数据的图像处理的设定、(3)摄影图像数据的记录目的地的设定、(4)摄影图像数据的打印指定的设定、(5)摄影图像数据的发送设定等。

在上述(1)的摄影条件的设定中包括拍摄各个登记人物时的曝光补正值或景深的设定(浅度、标准的选择)等。此外，还能够设定在登记人物的检测时CPU 26自动进行摄影。在上述(2)的图像处理的设定中包括摄影图像数据的软焦点处理的有无设定、边缘强调的抑制设定等。

在上述(3)的记录目的地的设定中能够按照各个登记人物指定作为摄影图像数据的记录目的地的记录介质29内的记录文件夹的目录路径。也就是说，CPU 26能够参照脸部登记存储器27的数据，在每个登记人物不同的记录文件夹中记录摄影图像数据。

在上述(4)的打印指定的设定中，例如能够按照各个登记人物指定基于DPOF(Digital Print Order Format：数字打印指令格式)等标准的摄影图像数据的打印指定的有无。此外，在上述(5)的发送设定中，能够指定登 记人物摄影时是否需要发送摄影图像数据和发送目的地的地址信息(电子邮件地址)。

此外，在脸部登记存储器27中记录“脸部登记图像”、“脸部识别数据的登记时间”以及“取得脸部识别数据时的摄影条件”的数据。上述“脸部登记图像”、“脸部识别数据的登记时间”以及“取得脸部识别数据时的摄影条件”的数据分别与组文件夹内的各个脸部识别数据相对应。

上述“脸部登记图像”是取得脸部识别数据时的摄影图像数据，并且被调整到规定的象素大小。并且，“脸部登记图像”在上述编辑画面中显示在液晶监视器24上。即，“脸部登记图像”具有索引图像的功能，该索引图像提高登记人物或脸部识别数据的识别性和检索性。例如，利用“脸部登记图像”，用户能够在编辑画面上确认是根据谁的、怎样的图像(脸部正面、横向等)生成了脸部识别数据。

“脸部识别数据的登记时间”是作为该脸部识别数据之源的脸部登记图像数据的摄影时间的数据。此外，“取得脸部识别数据时的摄影条件”是脸部登记图像数据的摄影条件的数据。在上述摄影条件中包括例如摄影光学系统11的焦点距离的数据、摄影时的白平衡及曝光条件、摄影时有无闪光灯发光等。此外，“脸部识别数据的登记时间”以及“取得脸部识别数据时的摄影条件”的数据还用于CPU 26精减在脸部识别处理中使用的脸部识别数据时的判断中。

此外，在脸部登记存储器27中还记录表示每个登记人物的摄影次数的摄影次数数据。该摄影次数数据的摄影次数根据CPU 26在脸部识别摄影模式下的脸部识别结果而递增。此外，也可以由用户在编辑画面等上手动输入上述摄影次数。

以下将第一实施方式的电子摄像机的动作分为“脸部登记模式”和“脸部识别摄影模式”来进行说明。

(脸部登记模式下的动作)

图2是表示第一实施方式的“脸部登记模式”下的动作的流程图。该“脸部登记模式”是摄影模式中的一种，是用于使用户拍摄登记人物的脸部并生成脸部识别数据的模式。

步骤101：首先，用户通过操作部件23将电子摄像机的摄影模式设定 为“脸部登记模式”。

例如，在电子摄像机被设定为“通常摄影模式”或“肖像摄影模式”的状态下，用户进行调用模式选择画面的操作。由此，CPU 26在液晶监视器24上显示模式选择画面(参照图3(a))。并且，用户利用操作部件23操作模式选择画面上的选框，对CPU 26指示启动“脸部登记模式”。由此，CPU 26开始“脸部登记模式”的一系列动作。

步骤102：CPU 26在液晶监视器24上显示“脸部登记模式”的菜单(参照图3(b))。在该菜单上，用户利用操作部件23操作选框，向CPU 26选择输入“新的”或“追加”。在登记新的人物脸部时，用户选择输入“新的”，另一方面，在进一步对已登记的人物进行拍摄时，用户选择输入“追加”。

步骤103：CPU 26判断在菜单(S102)上是否选择了“新的”。在选择了“新的”的情况下(“是”的一方)移到S104。另一方面，在选择了“追加”的情况下(“否”的一方)移到S105。

步骤104：在S102选择了“新的”的情况下，CPU 26在脸部登记存储器27中生成新的登记人物(当次拍摄的登记人物)的组文件夹。并且，CPU 26在液晶监视器24上显示“登记人物的详细信息画面”(参照图5)，并催促用户输入“登记人物的名称”以及“脸部识别时的处理设定”。在图5的“登记人物的详细信息画面”上输入的信息在与组文件夹对应的状态下记录到脸部登记存储器27中。然后移到S106。

此外，用户也能够省略“登记人物的名称”以及“脸部识别时的处理设定”的输入。此时，用户能够从图3(b)的编辑项目启动图5的“登记人物的详细信息画面”，在以后重新将这些信息输入到脸部登记存储器27中。

步骤105：另一方面，在S102选择了“追加”的情况下，CPU 26在液晶监视器24上显示登记人物的选择画面(参照图4)，使用户选择输入当次拍摄的登记人物。

步骤106：CPU 26将电子摄像机的摄影时的设定变更为适于脸部登记摄影的设定。具体来说，CPU 26进行以下(1)～(7)的设定。

(1)CPU 26在“脸部登记模式”中将AF方式设定为脸部检测模式， 此时，CPU 26配合由透视图像数据检测出的脸部区域，自动重复对焦而与释放按钮的操作无关。由此，能够对焦到所检测出的脸部上。此外，也可以在用户半按下释放按钮的情况下CPU 26进行AF锁定。

(2)CPU 26在“脸部登记模式”中将AE方式设定为以脸部检测区域为基准的点AE模式。此时，CPU 26配合由透视图像数据检测出的脸部区域，实行AE运算。由此，所检测出的脸部的曝光最优化。

(3)CPU 26在“脸部登记模式”中使图像处理部20的电子变焦处理无效化。此外，CPU 26通过将电子变焦的倍率限制在例如2倍左右等手段，将电子变焦的最大倍率限制得小于通常时。这是因为，在进行电子变焦的情况下，拍摄的脸部登记图像的信息量变小，脸部的特征点的提取精度降低。

(4)CPU 26在“脸部登记模式”中将变焦透镜11a的倍率调整范围与通常摄影时相比向广角一侧变窄，从而减小最大倍率。这是因为，在脸部检测时，向广角一侧设定变焦透镜而使景深变深，从而能够检测出脸部的可能性增加。还因为，如果将变焦透镜设定在广角一侧，则摄影图像因手颤动而模糊的可能性降低。此外，在该情况下，若将变焦透镜11a的位置固定在广角端，则景深变得更深，所以特别优选。

此外，虽然缩小摄影光学系统的光圈(未图示)，景深也变深，但此时与快门秒时相当的摄影时间变长，从而脸部登记图像由于手颤动而模糊的可能性增加。因此，从回避手颤动模糊的观点出发，更加优选CPU 26尽量将光圈设定在开放一侧。此外，CPU 26在不能进行脸部检测时也可以进行控制使景深渐渐变深。

(5)CPU 26在“脸部登记模式”中基于摇动传感器部13的输出，使像模糊补正透镜14移动来进行光学模糊补正。这是为了回避因手颤动引起的脸部登记图像的摄影失败。

(6)CPU 26在“脸部登记模式”中使模拟信号处理部17中的图像信号的增益设定(摄像灵敏度设定)高于通常摄影时的设定。这是因为，若摄像灵敏度变高，则上述摄影时间变短，所以脸部登记图像成为手颤动模糊的可能性降低。

(7)CPU 26在“脸部登记模式”中使闪光发光部25的闪光发光无效 化。这是因为，若在摄影时进行闪光发光，则在摄影人物的脸部会出现阴影，从而脸部检测的精度降低。此外，在被摄场变暗而无法确保充分的曝光的状态下强制拍摄的情况下，或者有意要取得闪光发光时的脸部识别数据的情况下，CPU 26也可以使闪光发光部25例外发光。

步骤107：CPU 26使摄像元件16驱动，进行透视图像信号的取得。摄像元件16每隔规定间隔进行间隔读取来生成透视图像信号。图像处理部20基于透视图像信号生成透视图像数据。并且，基于透视图像数据在液晶监视器24上动画显示预览图像。

步骤108：另一方面，CPU 26的脸部检测部31对透视图像数据实施公知的脸部检测处理，并检测摄影画面内的脸部区域。

此外，在S108中，优选脸部检测部31降低用来规定脸部区域的检测精度(脸部的检测正确率)的阈值，从而使脸部候补的检出率比通常高。这是因为，有时会以很难进行脸部检测的脸部朝向(例如侧面朝向等)拍摄脸部登记图像。

此外，在脸部检测部31在摄影画面内检测出人物的脸部时，图像处理部20在预览图像的脸部区域的位置上合成显示矩形框(参照图6)。由此，用户能够在预览图像中确认是否检测出脸部。

步骤109：CPU 26判断是否在S108中从摄影图像中检测出脸部。在检测到脸部的情况下(“是”的一方)移到S110。另一方面，在没有检测到脸部的情况下(“否”的一方)返回S107。

步骤110：CPU 26根据脸部区域中脸部的特征点的检测状态，推定脸部的朝向。并且，CPU 26判断所推定的脸部的朝向与预先指定的脸部的朝向(正面朝向、横向等)是否一致。在脸部的朝向是规定方向的情况下(“是”的一方)移到S111。另一方面，在脸部的朝向是规定方向以外的情况下(“否”的一方)返回S107。此时，CPU 26也可以使液晶监视器24等显示“请改变被摄体的脸部朝向再重新拍摄”等的警告显示。

这里，利用公知的手段进行S110中的脸部朝向的检测。例如，也可以如日本特开平9-163212号公报那样CPU 26从脸部图像中检测脸部的轮廓和鼻子的坐标，来计算脸部的朝向。或者也可以如日本特开2005-209137号公报那样，CPU 26根据按每个脸部方向分类登记脸部图像的图像数据 库，识别脸部的朝向。

在S110中为“否”的一方的情况下，CPU 26不进行释放，从而不进行摄影，直到被摄体的脸部朝向改变为止。因此，能够从规定的脸部朝向的脸部登记图像中生成脸部识别数据。

步骤111：CPU 26根据脸部区域中脸部的特征点的检测状态，推定脸部的表情。并且，CPU 26判断所推定的脸部表情是否是中立状态(没有闭眼等标准状态)。在脸部表情是中立的情况下(“是”的一方)，移到S112。另一方面，在脸部表情不是中立的情况下(“否”的一方)，返回S107。此时，CPU 26也可以使液晶监视器24等显示“请改变被摄体的表情再拍摄”等警告显示。

这里，利用公知的手段进行S111中的脸部表情的检测。例如，如日本特开2004-272933号公报所述，预先准备被分类成普通的表情、闭眼的表情、张嘴的表情、笑脸等类别的学习用脸部图像，CPU 26进行基于典型判断分析的识别，从而利用对各个类别设定的评价值，判断脸部的表情。

或者也可以预先准备睁开的眼，关闭的眼、张开的嘴、关闭的嘴等标准图案，CPU 26进行各个图案和脸部区域的匹配，并且根据图案的组合来推定表情。

在S111中为“否”的一方的情况下，CPU 26不进行释放，从而不进行拍摄直到改变被摄体的脸部表情为止。因此，能够可靠地取得脸部表情中立的状态下的脸部登记图像。这是因为，若根据笑脸或者闭眼状态的图像生成脸部识别数据，则存在脸部识别精度大大降低的可能性，因此认为表情中立的脸部登记图像是最适合脸部识别的图像。

此外，CPU 26能够按照用户的设定而省略上述S110及S111的处理。

步骤112：CPU 26以检测出的脸部区域的位置为基准，执行AF运算及AE运算。

步骤113：CPU 26判断释放按钮是否被全按下。在释放按钮被全按下的情况下(“是”的一方)，移到S114。另一方面，在释放按钮上没有输入的情况下(“否”的一方)，CPU 26等待释放按钮的全按下操作。

步骤114：CPU 26使摄像元件16驱动来拍摄被摄体像。然后，图像处理部20基于释放时的图像信号，生成摄影图像数据(脸部登记图像数据)。

步骤115：CPU 26的脸部识别部32根据脸部登记图像数据(S114)生成登记人物的脸部识别数据。此外，图像处理部20剪辑脸部登记图像数据的脸部区域，并且利用分辨率转换调整到规定尺寸，来生成索引图像数据。

步骤116：CPU 26在脸部登记存储器27中记录脸部识别数据、索引图像数据、脸部登记图像数据的摄影条件以及摄影时间。上述各个数据在分别对应的状态下被记录到在S104或S105中指定的登记人物的组文件夹中。在上述各个数据中，索引图像数据对应“脸部登记图像”。此外，摄影时间对应“脸部识别数据的登记时间”，摄影条件对应“脸部识别数据取得时的摄影条件”。

至此结束了“脸部登记模式”下的一系列动作。此外，CPU 26也可以在S116之后返回S107，继续进行登记人物的脸部识别数据的登记。

以下说明第一实施方式的“脸部登记模式”的效果。在上述脸部登记摄影中，摄影时的设定被变更成适于脸部登记的设定，并且以脸部区域的检测位置为基准，进行AF运算及AE运算(S106、S112)。并且，根据拍摄人物的脸部而成的脸部登记图像数据，生成脸部识别数据(S114、S115)。因此，仅通过用户将电子摄像机朝向想登记的人物并释放，就能够容易地取得基于适当拍摄的脸部登记图像的脸部识别数据。

(脸部识别摄影模式下的动作)

图7是表示第一实施方式的“脸部识别摄影模式”下的动作的流程图。该“脸部识别摄影模式”是在摄影画面上存在指定的登记人物时电子摄像机进行规定控制来取得摄影图像数据的摄影模式。

步骤201：首先，用户通过操作部件23将电子摄像机的摄影模式设定为“脸部识别摄影模式”。

例如，在电子摄像机被设定为“通常摄影模式”或“肖像摄影模式”的状态下，用户进行调用模式选择画面的操作。由此，CPU 26在液晶监视器24上显示模式选择画面(参照图3(a))。并且，用户利用操作部件23操作模式选择画面上的选框，对CPU 26指示启动“脸部识别摄影模式”。由此，CPU 26开始“脸部识别摄影模式”的一系列动作。

步骤202：CPU 26在液晶监视器24上显示登记人物的选择画面(参 照图4)。并且，CPU 26受理脸部识别对象的登记人物(摄影时进行脸部识别的登记人物)的指定输入。此外，也可以在拍摄前预先由用户将脸部识别对象的登记人物指定输入到CPU 26中。

这里，在“登记人物的选择画面”中，CPU 26能够受理1或2个以上的登记人物的指定。例如，CPU 26也能够受理脸部登记存储器27中的登记人物的整体指定。此外，预先将组文件夹在规定的范畴(例如家族、派系等)中建立链接，并且通过用户在选择画面上指定输入范畴，能够对CPU26输入对所链接的登记人物的统一指定。

步骤203：CPU 26使摄像元件16驱动，取得透视图像信号。摄像元件16每隔规定间隔进行间隔读取，来输出透视图像信号。图像处理部20基于透视图像信号，动画显示预览图像。

步骤204：另一方面，CPU 26的脸部检测部31对透视图像信号实施公知的脸部检测处理，检测摄影画面内的脸部区域。

步骤205：CPU 26判断是否在S204中从摄影画面检测出脸部。在检测出脸部的情况下(“是”的一方)，移到S206。另一方面，在没有检测出脸部的情况下(“否”的一方)，移到S209。

步骤206：CPU 26以检测出的脸部区域的位置为基准，执行AF运算。此外，在检测出多个脸部区域的情况下，CPU 26使位于摄影画面中央的脸部区域或者位于最近一侧的脸部区域优先执行AF运算。

步骤207：CPU 26的脸部识别部32，对检测出的脸部区域(S204)执行脸部识别处理。并且，脸部识别部32判断是否包含有识别对象的脸部(S202)。在包含有识别对象的脸部的情况下(“是”的一方)，移到S208。另一方面，在没有包含有识别对象的脸部的情况下(“否”的一方)，移到S210。

步骤208：CPU 26基于与检测出的登记人物相对应的“脸部识别时的处理设定”的数据，变更电子摄像机的摄影条件的设定或图像处理的设定等。然后，移到S210。

这里，在摄影画面内检测出多个识别对象的脸部的情况下，CPU 26以规定的算法决定登记人物的优先顺序。并且，CPU 26基于与优先顺序最高的登记人物相对应的“脸部识别时的处理设定”，变更电子摄像机的各种设 定。此外，在“脸部识别时的处理设定”中设定了登记人物的自动拍摄的情况下，CPU 26移到S211，自动拍摄登记人物。

步骤209：另一方面，在此情况下，CPU 26对应用户对释放按钮的半按下操作，以通常摄影时的算法选择AF区，执行AF运算。

步骤210：CPU 26判断释放按钮是否被全按下。在释放按钮被全按下的情况下(“是”的一方)，移到S211。另一方面，在没有对释放按钮的输入的情况下(“否”的一方)，CPU 26等待释放按钮的全按下操作。

步骤211：CPU 26使摄像元件16驱动，拍摄被摄体像。然后，图像处理部20基于释放时的图像信号，生成摄影图像数据。此外，在拍摄到识别对象的脸部的情况下，图像处理部20向摄影图像数据实施在S208中设定的图像处理。

步骤212：CPU 26向记录介质29中记录摄影图像数据。此外，在拍摄到识别对象的脸部的情况下，CPU 26也能够基于在脸部登记存储器27中指定的目录路径，将摄影图像数据分类并记录到规定的记录文件夹。以上结束了“脸部识别摄影模式”下的一系列动作。

以下，说明本实施方式的“脸部识别摄影模式”的效果。在上述脸部识别摄影模式中，基于脸部识别数据，进行摄影人物的脸部识别(S207)。并且，在检测出识别对象的脸部的情况下，通过与该登记人物相对应的设定进行摄影时的各种处理等(S208、S211、S212)。因此，能够在摄影人物的摄影时自动进行反映用户意图的处理，显著提高操作电子摄像机的用户的便利性。

(第二实施方式的说明)

图8是表示第二实施方式的“脸部登记模式”下的动作的流程图。此外，由于图8的S301～S312分别对应图2的S101～S112，图8的S315对应图2的S116，所以省略重复说明。

步骤313：CPU 26在AF结束之后自动进行释放，使摄像元件16驱动，拍摄被摄体像。然后，图像处理部20基于释放时的图像信号，生成摄影图像数据(脸部登记图像数据)。

步骤314：CPU 26的脸部识别部32根据脸部登记图像数据(S313)生成登记人物的脸部识别数据。此外，图像处理部20根据脸部登记图像数 据生成索引图像数据。

以下，说明第二实施方式的“脸部登记模式”的效果。在第二实施方式中，在脸部检测时自动拍摄人物的脸部来生成脸部识别数据(S313、S314)。因此，用户仅通过将电子摄像机朝向想登记的人物，就能够容易地取得基于适当的脸部登记图像的脸部识别数据。特别是，在第二实施方式中自动进行对焦及释放，所以还能够使摄影光学系统朝向用户本身，而仅一人就能进行用户的脸部登记摄影。

(第三实施方式的说明)

图9是表示第三实施方式的“脸部登记模式”下的动作的流程图。此外，由于图9的S401～S409分别对应图2的S101～S109，图9的S414对应图2的S116，所以省略重复说明。

步骤410：CPU 26以检测出的脸部区域的位置为基准，执行AF运算及AE运算。

步骤411：CPU 26自动连续地进行规定次数的释放，取得多个摄影图像数据(脸部登记图像数据)。这里，在S411中，CPU 26使摄影条件全部相同地拍摄多个脸部登记图像数据。这是因为，例如在被摄体非静止的情况或者发生手颤引起的模糊的情况下，即使在相同的摄影条件下也会拍摄到不同的图像。此外，CPU 26也可以使曝光条件或者白平衡等参数分阶段变化，来进行包围曝光摄影。

步骤412：CPU 26的脸部检测部31对在S411中取得的多个脸部登记图像数据分别实施脸部检测处理，并提取特征点。并且，CPU 26按照脸部的特征点的检测状态从好到坏的顺序(例如提取的特征点的数量从多到少的顺序)，对各个脸部登记图像数据设定优先顺序。此外，也可以如第一实施方式的S110及S111中所示，CPU 26还考虑脸部登记图像数据的脸部朝向及表情，设定上述优先顺序。

步骤413：CPU 26从在S411中取得的多个脸部登记图像数据中选择优先顺序最高的脸部登记图像数据。并且，CPU 26的脸部识别部32根据所选择的该脸部登记图像数据生成脸部识别数据。此外，图像处理部20根据所选择的脸部登记图像数据生成索引图像数据。

以下，说明第三实施方式的“脸部登记模式”的效果。在第三实施方 式中，从多个脸部登记图像数据选择最佳的图像，生成脸部识别数据。因此，根据第三实施方式，更加容易提高脸部识别摄影时的脸部识别的精度。

(第四实施方式的说明)

图10是表示第四实施方式的“脸部登记模式”下的动作的流程图。此外，由于图10的S501～S505分别对应图2的S101～S105，图10的S513、S514分别对应图2的S115、S116，所以省略重复说明。

步骤506：CPU 26将电子摄像机的摄影时的设定变更为适于脸部登记摄影的设定。具体来说，CPU 26进行与S106的(3)～(7)相同的设定，并且进行以下(a)及(b)的设定。

(a)CPU 26在“脸部登记模式”下选择摄影画面中央的AF区进行AF运算。此时，CPU 26对应释放按钮被半按下的操作，在中央重点AF进行对焦，并且在对焦了的时刻执行AF锁定的控制。这是因为，通过在摄影图像中央取得脸部登记图像，使摄影光学系统的像差的影响变得更小，来生成高精度的脸部识别数据。

(b)CPU 26在“脸部登记模式”中将AE方式设定为以摄影画面中央为基准的点AE模式。由此，在摄影画面中央拍摄的脸部的曝光被最优化。

步骤507：CPU 26使摄像元件16驱动，进行透视图像信号的取得。摄像元件16每隔规定间隔进行间隔读取来生成透视图像信号。图像处理部20基于透视图像信号生成透视图像数据。并且，基于透视图像数据在液晶监视器24上动画显示预览图像。

这里，在S507中的图像处理部20在预览图像的摄影画面的中央合成构图辅助显示(参照图11)。图11的构图辅助显示是利用矩形框表示将摄影画面内的脸部收入的位置。利用该构图辅助显示，用户能够在取景时容易地进行脸部的定位。因此，用户能够简单地拍摄状态良好的脸部登记图像。此外，作为构图辅助显示的其他例子，也可以在预览图像中仅合成矩形框的4个角。或者，作为构图辅助显示的其他例子，也可以例如利用黑白显示收入脸部的范围之外的范围等手段，使收入脸部的范围内外的图像显示颜色变化(都省略了图示)。

此外，在S507中的图像处理部20在预览图像的中央以外的周边区域 合成摄影样本显示(参照图11)。图11的摄影样本显示是显示朝向规定方向的人物脸部的照片或插图。例如，在拍摄正面朝向的脸部登记图像时，在摄影样本显示中显示正面朝向的脸部图像。利用该摄影样本显示，用户能够视觉理解当次摄影中合适的脸部状态(脸部的朝向等)。因此，用户能够简单地拍摄状态良好的脸部登记图像。此外，图像处理部20也可以在预览图像上合成“请拍摄正面的脸部”等消息。

步骤508：CPU 26判断释放按钮是否被半按下。在释放按钮被半按下的情况下(“是”的一方)，移到S509。另一方面，在释放按钮上没有输入的情况下(“否”的一方)，移到S508。

步骤509：CPU 26对应用户进行的释放按钮半按下操作，执行以摄影画面中央为基准的AF运算及AE运算。

步骤510：CPU 26判断释放按钮是否被全按下。在释放按钮被全按下的情况下(“是”的一方)，移到S511。另一方面，在释放按钮上没有输入的情况下(“否”的一方)，CPU 26等待释放按钮的全按下操作。

步骤511：CPU 26对应用户进行的释放按钮全按下操作，取得摄影图像数据(脸部登记图像数据)。

步骤512：CPU 26的脸部检测部31对脸部登记图像数据(S511)的摄影画面中央部分实施公知的脸部检测处理，并检测摄影画面内的脸部区域。

以下，说明第四实施方式的“脸部登记模式”的效果。在第四实施方式中，基于用户手动拍摄的脸部登记图像数据，生成脸部识别数据。因此，能够制作符合用户意图的脸部识别数据。此外，由于在摄影光学系统的像差影响较小的摄影画面中央取得脸部登记图像，所以能够生成精度更高的脸部识别数据。

(第一实施方式到第四实施方式中的脸部登记模式的变形例)

在上述实施方式中说明了摄影时从脸部登记图像生成脸部识别数据的例子。但是，也可以取代从脸部登记图像生成脸部识别数据，而是CPU从脸部登记图像切出脸部区域的部分，生成脸部图像数据，并将该脸部图像数据记录到存储器或记录介质中。并且，也能够在计算机进行的后处理中，从脸部图像数据生成脸部识别数据。

这里，例如以80×80象素左右的尺寸切出脸部登记图像的脸部区域，来生成脸部图像数据。优选对所述脸部图像数据的图像实施基于分辨率转换的可变倍率处理。此外，与脸部登记图像数据的情况相同，优选CPU将索引图像数据、脸部登记图像数据的摄影条件及摄影时间相对应地记录在上述脸部图像数据中。进而，对于上述脸部图像数据，也优选CPU将根据相同摄影人物生成的多个脸部图像数据成组记录到相同的文件夹等中。

(第五实施方式的说明)

第五实施方式是第一实施方式的变形例，由本发明的图像处理装置的一个形态的电子摄像机从摄影图像中生成脸部识别数据。这里，第五实施方式的电子摄像机的结构与第一实施方式相同，所以省略重复说明。

(脸部登记模式下的动作)

图12是表示第五实施方式的“脸部登记模式”下的动作的流程图。该“脸部登记模式”是再现模式中的一种，是用于在摄影图像数据的再现时生成脸部识别数据的模式。

步骤1101：首先，用户通过操作部件23将电子摄像机设定为“再现模式”。CPU 26从记录介质26或内置存储器19中读取脸部登记图像数据(用于生成脸部识别数据的摄影图像数据)，并在液晶监视器24上再现显示脸部登记图像数据的再现图像。此外，CPU 26还能够经由输入输出I/F 22的外部连接端子或通信单元30从所连接的计算机(未图示)中读取脸部登记图像数据。

步骤1102：用户通过操作部件23将电子摄像机的摄影模式设定为“脸部登记模式”。

例如，在电子摄像机被设定为“再现模式”的状态下，用户进行调用模式选择画面的操作。由此，CPU 26在液晶监视器24上显示模式选择画面(参照图13)。并且，用户利用操作部件23操作模式选择画面上的选框，对CPU 26指示启动“脸部登记模式”。由此，CPU 26开始“脸部登记模式”的一系列动作。

步骤1103：CPU 26的脸部检测部31对脸部登记图像数据(S1101)实施公知的脸部检测处理，并检测摄影画面内的脸部区域。

步骤1104：CPU 26向图像处理部20输出摄影画面中的脸部区域的位 置。并且，图像处理部20在再现图像的脸部区域的位置上合成显示矩形框(参照图14～图16)。由此，用户能够在液晶监视器24上确认脸部检测的状态。

步骤1105：CPU 26在液晶监视器24上显示向用户确认脸部检测处理的再次试行的显示(“OK”或“重新进行”的选择显示)(参照图14)。在要登记的人物的脸部上没有框显示的情况下，用户利用操作部件23选择输入“重新进行”。另一方面，在要登记的人物的脸部上有框显示的情况下，用户利用操作部件23选择输入“OK”。

并且，CPU 26判断在上述确认显示中是否选择了“重新进行”(脸部检测处理的再次试行)。在选择了“重新进行”的情况下(“是”的一方)，移到S1106。另一方面，在选择了“OK”的情况下(“否”的一方)，移到S1107。

步骤1106：CPU 26的脸部检测部31基于用户从操作部件23的输入，变更规定脸部区域检测精度的阈值。

例如，在要选择的人物的脸部上没有框显示的情况下，用户将上述阈值变更成比前次小的阈值。然后，返回S1103，脸部检测部31对脸部登记图像数据实施脸部检测处理，并再次检测摄影画面内的脸部区域。此时，由于正确检测脸部区域的正确率下降，并且脸部候补(框显示的脸部区域)的数量与前次相比增加，所以能够检测出难以进行脸部检测状态下的脸部区域(例如侧向的脸部等)的可能性更加提高。

此外，在脸部登记图像中拍摄到多个人物并且检测出了必要以上的脸部候补时，用户将上述阈值变更成比前次大的阈值。然后，返回S1103，脸部检测部31对脸部登记图像数据实施脸部检测处理，并再次检测摄影画面内的脸部区域。此时，由于正确检测脸部区域的正确率提高，所以精减了脸部候补的数量，使后述的选择作业(S107)变得容易。

步骤1107：CPU 26在脸部登记图像的某个脸部区域(S1103)合成显示选框(参照图15)。用户利用操作部件23操作选框，来选择用于制作脸部识别数据的人物，另一方面，CPU 26受理用户的选择输入。此外，在S1107中，用户还能够从一个再现图像中选择多个脸部区域。

步骤1108：CPU 26在液晶监视器24上显示向用户确认所选择的人物 是否是新的登记人物的显示(“新的”及“追加”的选择显示)(参照图16)。在该画面中，用户利用输入按钮操作选框，向CPU 26选择输入“新的”或“追加”。在登记新的人物的脸部的情况下，用户选择输入“新的”。另一方面，在进一步拍摄已经登记的人物的脸部的情况下，用户选择输入“追加”。

并且，CPU 26判断在上述确认显示中是否选择了“新的”。在选择了“新的”的情况下(“是”的一方)，移到S1109。另一方面，在选择了“追加”的情况下(“否”的一方)，移到S1110。

步骤1109：在S1108中选择了“新的”的情况下，CPU 26在脸部登记存储器27中生成新登记人物的组文件夹。并且，CPU 26在液晶监视器24上显示“登记人物的详细信息画面”(参照图5)，并且催促用户输入“登记人物的名称”及“脸部识别时的处理设定”的信息。在图5的“登记人物的详细信息画面”中输入的信息在与组文件夹相对应的状态下记录在脸部登记存储器27中。然后，移到S1111。

此外，用户也可以省略“登记人物的名称”及“脸部识别时的处理设定”的输入，以后重新启动图5的“登记人物的详细信息画面”，将这些信息输入脸部登记存储器27中。

步骤1110：另一方面，在S1108中选择了“追加”的情况下，CPU 26在液晶监视器24上显示已经登记的登记人物的选择画面(参照图4)，使用户选择输入要追加脸部识别数据的登记人物。

步骤1111：CPU 26的脸部识别部32从脸部登记图像数据中所选择的脸部区域(S1107)生成登记人物的脸部识别数据。此外，图像处理部20剪辑脸部登记图像数据的脸部区域，并且利用分辨率转换调整到规定尺寸，来生成索引图像数据。

步骤1112：CPU 26取得在脸部登记图像数据的附属数据区域中记录的摄影条件以及摄影时间的数据。例如在脸部登记图像数据是以Exif(Exchangeable image file format for digital still cameras)标准为基准的图像文件的情况下，CPU 26读出并取得以标记形式记录在图像文件中的摄影条件以及摄影时间的数据。此外，在脸部登记图像数据的数据形式不包括上述附属数据区域的情况下，省略该工序。

步骤1113：CPU 26在脸部登记存储器27中记录脸部识别数据、索引图像数据、脸部登记图像数据的摄影条件以及摄影时间。上述各个数据在分别对应的状态下被记录到在S1109或S1110中指定的登记人物的组文件夹中。在上述各个数据中，索引图像数据对应“脸部登记图像”。此外，摄影时间对应“脸部识别数据的登记时间”，摄影条件对应“脸部识别数据取得时的摄影条件”。

至此结束了“脸部登记模式”下的一系列动作。此外，在S1107中指定了多个脸部区域的情况下，CPU 26对应脸部区域的数量，重复从S1108到S1113的处理。

以下说明第五实施方式的“脸部登记模式”的效果。在上述脸部登记模式中，从再现时从记录介质29等读取的摄影图像数据中生成脸部识别数据(S1101、S1111)。即，由于能够从过去拍摄的摄影图像数据或由其他电子摄像机拍摄的摄影图像数据生成脸部识别数据，所以大幅提高用户的便利性。

此外，在上述脸部登记模式中，基于在脸部检测处理中自动检测出的脸部区域，生成脸部识别数据(S1103、S1111)。此时，由于用户只要从检测出的脸部区域中指定要生成脸部识别数据的对象即可，所以能够容易地生成脸部识别数据。

(脸部登记模式的动作的变形例)

在上述第五实施方式中说明了摄影时从脸部登记图像生成脸部识别数据的例子。但是，也可以取代从脸部登记图像生成脸部识别数据，而是CPU从脸部登记图像切出脸部区域的部分，生成脸部图像数据，并将该脸部图像数据记录到存储器或记录介质中。并且，也能够在计算机进行的后处理中，从脸部图像数据生成脸部识别数据。

这里，例如以80×80象素左右的尺寸切出脸部登记图像的脸部区域，来生成脸部图像数据。优选对所述脸部图像数据的图像实施基于分辨率转换的可变倍率处理。此外，与脸部登记图像数据的情况相同，优选CPU将索引图像数据、脸部登记图像数据的摄影条件及摄影时间相对应地记录在上述脸部图像数据中。进而，对于上述脸部图像数据，也优选CPU将根据相同摄影人物生成的多个脸部图像数据成组记录到相同的文件夹等中。

(第六实施方式的说明)

第六实施方式是第一实施方式的变形例，关于脸部登记存储器27的各种数据的编辑画面的操作及显示和脸部识别摄影模式的动作。这里，第六实施方式的电子摄像机的结构与第一实施方式相同，所以省略重复说明。

(编辑画面的启动操作的说明)

说明第六实施方式的电子摄像机的编辑画面。在编辑或确认脸部登记存储器27的各种数据的情况下，用户(操作者)利用操作部件23启动编辑画面。

这里，登记在脸部登记存储器27中的人物信息对于电子摄像机的所有者来说是属于隐私的信息。因此，电子摄像机的CPU 26对用户(操作者)执行个人认证，能够设定成仅在预先被所有者许可的用户的情况下显示编辑画面。这里，作为个人认证的手段，例如可例举基于密码输入的认证或脸部认证。此外，也可以在电子摄像机上搭载指纹认证或虹膜认证等公知的生物测定学认证装置。此外，在脸部认证的情况下，不但能够原样利用电子摄像机的脸部识别处理的机构，还能够对尝试非法访问的用户产生脸部摄影所引起的心理抑制效果，所以特别优选。

图17是表示在编辑画面的启动操作中进行脸部认证时的流程图。此外，脸部登记存储器27中预先记录了被许可访问编辑画面的用户的脸部识别数据。

步骤2101：首先，用户利用操作部件23进行用于启动编辑画面的操作。由此，CPU 26在液晶监视器24上显示“请拍摄脸部”等催促脸部摄影的消息。此外，CPU 26将电子摄像机的各种设定变更为适于脸部认证的摄影的设定。具体来说，CPU 26进行以下设定。

首先，CPU 26将AF方式设定为脸部检测模式，此时，CPU 26配合由透视图像数据检测出的脸部区域，自动重复对焦而与释放按钮的操作无关。此外，CPU 26也可以将AF方式设定为以脸部检测区域为基准的点AE模式。此时，CPU 26配合利用透视图像数据检测出的脸部区域，执行AE运算。此时，由于对焦以及释放被自动化，所以能够使摄影光学系统朝向操作者自身来一个人进行拍摄。

此外，在S2101中，CPU 26根据需要进一步进行以下(1)～(5)的 设定。

(1)CPU 26使图像处理部20的电子变焦处理无效化。这是因为，在进行电子变焦的情况下，拍摄的摄影图像的信息量变小，脸部的特征点的提取精度降低。

(2)CPU 26将变焦透镜11a的位置固定在广角一侧。这是因为，在脸部检测时，向广角一侧设定变焦透镜而使景深变深，从而能够检测出脸部的可能性增加。此外还因为，如果将变焦透镜设定在广角一侧，则摄影图像因手颤动而模糊的可能性降低。

(3)CPU 26基于摇动传感器部13的输出，使像模糊补正透镜14移动来进行光学模糊补正。这是为了回避因手颤动引起的摄影失败。

(4)CPU 26使模拟信号处理部17中的图像信号的增益设定(摄像灵敏度设定)高于通常摄影时的设定。这是因为，若摄像灵敏度变高，则与快门秒时相当的摄影时间变短，所以摄影图像因手颤动而模糊的可能性降低。

(5)CPU 26使闪光发光部25的闪光发光无效化。这是因为，若在摄影时进行闪光发光，则在摄影人物的脸部会出现阴影，从而脸部检测的精度降低。此外，在被摄场变暗而无法确保充分的曝光的状态下强制拍摄的情况下，CPU 26也可以使闪光发光部25例外发光。

步骤2102：CPU 26使摄像元件16驱动，进行透视图像信号的取得。摄像元件16每隔规定间隔进行间隔读取来生成透视图像信号。图像处理部20基于透视图像信号生成透视图像数据。

步骤2103：另一方面，CPU 26的脸部检测部31对透视图像数据实施公知的脸部检测处理，并检测摄影画面内的脸部区域。并且，CPU 26以所检测的脸部区域的位置为基准，执行AF运算及AE运算。

步骤2104：CPU 26在AF结束后自动进行释放，使摄像元件16驱动来拍摄被摄体像。然后，图像处理部20基于释放时的图像信号，生成摄影图像数据。

步骤2105：CPU 26的脸部检测部31基于S2103中的脸部检测结果，从摄影图像数据(S2104)的脸部区域提取脸部的特征点。并且，脸部识别部32执行摄影人物的脸部识别处理。

步骤2106：脸部识别部32判断所检测出的脸部是否是“被许可访问编辑图像的用户”的脸部。在是“被许可访问编辑图像的用户”的情况下(“是”的一方)，移到S2107。另一方面，在不是“被许可访问编辑图像的用户”的情况下(“否”的一方)，CPU 26不在液晶监视器24上显示编辑画面，而结束处理。

此外，在S2106的判断中，优选脸部识别部32在脸部识别处理中将用于判断相似度的阈值设定成高于通常摄影时。这是因为，在这种情况下，希望更加可靠地识别“被许可访问编辑图像的用户”。

步骤2107：CPU 26在液晶监视器24上显示编辑画面。由此，被许可访问编辑图像的用户能够在编辑画面上进行脸部识别数据的管理·编辑。

(编辑画面的显示及操作的说明)

图4及图5是表示编辑画面的显示的一例的图。编辑画面由GUI(Graphical User Interface：图形用户界面)形式的“登记人物的选择画面(参照图4)”及“登记人物的详细信息画面(参照图5)”构成。此外，CPU26基于规定的顺序程序执行在以下所示的编辑画面上的显示处理·动作。

图4的“登记人物的选择画面”是编辑画面的初始显示画面。在“登记人物的选择画面”上显示与脸部登记存储器27的登记人物相对应的人物选择用显示项目。该人物选择用显示项目的数量与脸部登记存储器27的登记人物的数量(组文件夹的数量)一致。并且，在“登记人物的选择画面”上能够一览显示人物选择用显示项目。此外，也可以在“登记人物的选择画面”上仅显示人物选择用显示项目的一部分，并且能够通过滚动形式或者页形式的画面切换进行一览。

在上述人物选择用显示项目上分别显示“登记人物的名称”。该“登记人物的名称”中使用在脸部登记存储器27中与登记人物的组文件夹相对应的“登记人物的名称”的数据。此外，为了提高人物选择用显示项目中的识别性、检索性，在人物选择用显示项目中显示表示所对应的登记人物的索引图像。例如，CPU 26利用以下手法设定人物选择用显示项目的索引图像。

第一，CPU 26将用户从规定的插图图像组中选择的插图图像设定为索引图像。所述插图图像也能够由于用户的意图而用于登记人物的确定及分 类中。上述插图图像被预先记录在未图示的ROM等中，例如由GIF形式、BMP形式等数据形式构成。此外，在上述插图图像中还包含例如心形标记或星形等图案记号或“家人”、“朋友”等文字等。

第二，CPU 26将记录在脸部登记存储器27的各个组文件夹中的登记人物的“脸部登记图像”设定为索引图像。在这种情况下，由于能够利用脸部登记图像在视觉上明确人物选择用显示项目与登记人物之间的关系，所以特别优选。

此外，在组文件夹内记录有多个“脸部登记图像”的情况下，CPU 26利用以下(1)～(4)中的某个手法，选择索引图像。

(1)CPU 26将用户从多个脸部登记图像中选择的脸部登记图像设定为索引图像。在这种情况下，由于用户判断为最佳的脸部登记图像成为索引图像，所以能够形成反映了用户意图的显示画面。

(2)CPU 26参照脸部登记存储器27的“脸部识别数据的登记时间”，将多个脸部登记图像中摄影时间最近的图像设定为索引图像。在这种情况下，由于与登记人物有关的最新的脸部登记图像自动成为索引图像，所以能够显示考虑到最接近当前登记人物的状态的脸部。

(3)CPU 26在多个脸部登记图像中选择拍摄到脸部正面的脸部登记图像，设定为索引图像。在这种情况下，朝向正面的脸部图像自动成为索引图像，所以能够进一步提高人物选择用显示项目中的识别性、检索性。此外，在存在多个拍摄脸部正面而成的脸部登记图像的情况下，CPU 26如上述(2)所示，将摄影时间最近的脸部登记图像设定为索引图像。

这里，如下所述进行脸部登记图像的脸部朝向的检测。例如，也可以在脸部识别数据中预先记录与脸部朝向有关的识别信息，CPU 26参照上述识别信息，判断脸部登记图像的脸部朝向。此外，也可以着眼于对应脸部登记图像的脸部识别数据，CPU 26根据脸部识别数据中的眼、鼻、口等特征点的提取状态，类推脸部的朝向。

(4)CPU 26每规定间隔依次切换多个脸部登记图像，以幻灯片放映形式进行索引图像的显示设定。在这种情况下，用户能够在“登记人物的选择画面”中把握登记人物的脸部登记图像的登记数量(即脸部识别数据的登记数量)。此外，通过索引图像的切换，能够丰富视觉的变化，实现娱 乐性高的“登记人物的选择画面”显示。

接着，说明“登记人物的选择画面”上的操作。在“登记人物的选择画面”上，用户利用操作部件23操作图4中粗线所示的选框(或者光标等)，对CPU 26进行人物选择用显示项目的指定输入。此外，若用户指定显示项目之后还进行了确定输入，则液晶监视器24的显示画面切换成与指定的登记人物相对应的“登记人物的详细信息画面”。此外，在“登记人物的选择画面”中，也能够进行与显示项目相对应的登记人物的数据的统一删除。

此外，在“登记人物的选择画面”上，利用上述显示项目的指定操作，用户能够对CPU 26指定输入脸部识别对象的登记人物(在摄影时进行脸部识别的登记人物)。此时，CPU 26能够受理1个或者2个以上的登记人物的指定。例如，CPU 26也能够受理脸部登记存储器27的登记人物的整体指定。此外，通过以规定的范畴(例如家人、派系等)预先链接组文件夹，并且用户在选择画面上指定输入范畴，还能够向CPU 26输入所链接的登记人物的统一指定。

进而，在“登记人物的选择画面”上，用户能够向CPU 26设定输入登记人物的优先顺序(“脸部识别时的处理设定”竞合时的优先顺序)。利用显示项目的指定操作，能够个别交换该优先顺序。此外，CPU 26还能够以规定的条件变更登记人物的优先顺序。例如，CPU 26能够基于(1)登记人物的登记顺序、(2)登记人物的名称的字符串、(3)组文件夹内的脸部识别数据的数量、(4)脸部识别的指定次数等，使登记人物升序或者降序，根据排序后的顺序，自动设定优先顺序。此外，CPU 26还能够基于摄影次数数据，将摄影次数较多的登记人物的优先顺序设定得较高。此外，在“登记人物的选择画面”上，人物选择用显示项目的显示位置或者显示顺序与优先顺序相对应，按照优先顺序从高到低的顺序显示人物选择用显示项目。

另一方面，图5所示的“登记人物的详细信息画面”为上下二分的画面结构。与所指定的登记人物相关的“登记人物的名称”以及“脸部识别时的处理设定”的数据被从脸部登记存储器27读出并分别显示在“登记人物的详细信息画面”的上部区域。并且，在“登记人物的详细信息画面”中，指定“登记人物的名称”以及“脸部识别时的处理设定”的任意项目， 并且设定为能够分别变更上述各数据的内容。此外，“登记人物的详细信息画面”上的变更内容被分别改写并反映在脸部登记存储器27的“登记人物的名称”以及“脸部识别时的处理设定”。

此外，在“登记人物的详细信息画面”的下部区域上显示与脸部识别数据对应的脸部识别数据用显示项目。脸部识别数据用显示项目的总数与登记人物的组文件夹内的脸部识别数据的数量一致。并且，在“登记人物的详细信息画面”的下部区域上能够一览显示脸部识别数据用显示项目。此外，也可以在“登记人物的详细信息画面”的下部区域上仅显示脸部识别数据用显示项目的一部分，通过滚动形式或者页形式的画面切换来进行一览。

这里，在脸部识别数据用显示项目中显示与各个脸部识别数据相对应的数据。具体来说，在脸部识别数据用显示项目上分别显示作为索引图像的“脸部登记图像”、“脸部识别数据的登记时间”和“取得脸部识别数据时的摄影条件”。利用这些信息，用户能够把握各个脸部识别数据的详细情况，能够容易地进行脸部识别数据的取舍选择。此外，关于“取得脸部识别数据时的摄影条件”，也可以不直接显示脸部识别数据用显示项目，而利用下拉显示或其他画面显示等另外进行详细显示。

并且，在“登记人物的详细信息画面”上，用户能够利用操作部件23操作图5中用粗线表示的选框(或者光标等)，指定脸部识别数据用显示项目。并且，在“登记人物的详细信息画面”上，能够进行所指定的显示项目的显示顺序的替换以及与所指定的显示项目对应的脸部识别数据的删除等。

如上所述，由于在“登记人物的选择画面”上索引图像被显示在人物选择用显示项目中，所以用户能够容易地识别规定的登记人物的显示项目。此外，由于在“登记人物的详细信息画面”上脸部登记图像被显示在脸部识别数据用显示项目中，所以用户能够视觉把握与显示项目对应的脸部识别数据的概要。

(脸部识别摄影模式下的动作)

以下参照图18说明第六实施方式的电子摄像机的“脸部识别摄影模式”下的动作。此外，由于图18的S3101与图7的S201对应，所以省略 重复说明。

步骤3102：CPU 26在液晶监视器24上显示登记人物的选择画面(参照图4)。并且，CPU 26受理脸部识别对象的登记人物(在摄影时进行脸部识别的登记人物)的指定输入。这里，在S3102中由用户指定了多个登记人物，此外，也可以摄影时用户预先向CPU 26指定输入脸部识别对象的登记人物。

步骤3103：CPU 26使摄像元件16驱动，进行透视图像信号的取得。摄像元件16每隔规定间隔进行间隔读取来生成透视图像信号。图像处理部20基于透视图像信号生成透视图像数据。并且，基于透视图像数据在液晶监视器24上动画显示预览图像。

步骤3104：另一方面，CPU 26的脸部检测部31对透视图像数据实施公知的脸部检测处理，并检测摄影画面内的脸部区域。

步骤3105：CPU 26判断是否在S3104中从摄影图像中检测出脸部。在检测到脸部的情况下(“是”的一方)移到S3106。另一方面，在没有检测到脸部的情况下(“否”的一方)返回S3111。

步骤3106：CPU 26以检测出的脸部区域的位置为基准，执行AF运算。此外，在检测出多个脸部区域的情况下，CPU 26使位于摄影画面中央的脸部区域或者位于最近一侧的脸部区域优先执行AF运算。

步骤3107：CPU 26的脸部识别部32对检测出的脸部区域(S3104)执行脸部识别处理。并且，脸部识别部32判断是否包含有识别对象的脸部(S3102)。在包含有识别对象的脸部的情况下(“是”的一方)，移到S3108。另一方面，在没有包含有识别对象的脸部的情况下(“否”的一方)，移到S3111。

步骤3108：CPU 26判断是否检测出多个识别对象的脸部。在识别对象的脸部是多个的情况下(“是”的一方)，移到S3109。另一方面，在识别对象的脸部仅是一个的情况下(“否”的一方)，移到S3110。

步骤3109：CPU 26参照在编辑画面上设定的登记人物的优先顺序，分别比较被脸部识别出的登记人物的优先顺序。并且，CPU 26基于与优先顺序最高的登记人物对应的“脸部识别时的处理设定”的数据，变更电子摄像机的摄影条件的设定及图像处理的设定等。然后，移到S3112。此外， 在“脸部识别时的处理设定”中设定了登记人物的自动摄影时，CPU 26移到S3113，自动拍摄登记人物。

步骤3110：CPU 26基于与检测出的登记人物对应的“脸部识别时的处理设定”的数据，变更电子摄像机的摄影条件的设定及图像处理的设定等。然后，移到S3112。此外，在“脸部识别时的处理设定”中设定了登记人物的自动摄影时，CPU 26移到S3113，自动拍摄登记人物。

步骤3111：另一方面，在此情况下，CPU 26对应用户对释放按钮的半按下操作，以通常摄影时的算法选择AF区，执行AF运算。

步骤3112：CPU 26判断释放按钮是否被全按下。在释放按钮被全按下的情况下(“是”的一方)，移到S3113。另一方面，在没有对释放按钮的输入的情况下(“否”的一方)，CPU 26等待释放按钮的全按下操作。

步骤3113：CPU 26使摄像元件16驱动，拍摄被摄体像。然后，图像处理部20基于释放时的图像信号，生成摄影图像数据。此外，在拍摄到识别对象的脸部的情况下，图像处理部20向摄影图像数据实施在S3109、S3110中设定的图像处理。

步骤3114：CPU 26向记录介质29中记录摄影图像数据。此外，在拍摄到识别对象的脸部的情况下，CPU 26也能够基于在脸部登记存储器27中指定的目录路径，将摄影图像数据分类并记录到规定的记录文件夹。

进而，CPU 26基于S3109或者S3110中的脸部识别结果，使脸部登记存储器27的摄影次数数据的摄影次数递增。此时，CPU 26也可以使识别出的所有的登记人物的摄影次数递增，也可以按照优先顺序仅使选择的登记人物的摄影次数递增。以上结束了“脸部识别摄影模式”下的一系列动作。

以下，说明第六实施方式的“脸部识别摄影模式”的效果。在上述脸部识别摄影模式中，基于脸部识别数据，进行摄影人物的脸部识别(S3107)。并且，在检测出识别对象的脸部的情况下，通过与该登记人物相对应的设定进行摄影时的各种处理等(S3109、S3111、S3113、S3114)。因此，能够在登记人物的摄影时自动进行反映用户意图的处理，显著提高操作电子摄像机的用户的便利性。

此外，在上述脸部识别摄影模式中，在一次拍摄了多个识别对象的情 况下，适用用户设定的优先顺序最高的登记人物的设定(S3109)。因此，在合影等摄影中也能够在摄影图像上适当地反映用户的意图。特别是，由于用户能够在编辑画面上自由地变更上述优先顺序，所以还能够根据摄影场景等进行极细微的控制。

(第七实施方式的说明)

图19是表示第七实施方式的电子摄像机中的“脸部识别摄影模式”下的动作的流程图。该第七实施方式是第一实施方式的变形例，电子摄像机的结构与第一实施方式相同，所以省略重复说明。此外，由于图19的S4101到S4104分别对应图7的S201到S204，所以省略重复说明。

步骤4105：CPU 26判断是否在S4104中从摄影图像中检测出脸部。在检测到脸部的情况下(“是”的一方)移到S4106。另一方面，在没有检测到脸部的情况下(“否”的一方)返回S4114。

步骤4106：CPU 26以检测出的脸部区域的位置为基准，执行AF运算。此外，在检测出多个脸部区域的情况下，CPU 26使位于摄影画面中央的脸部区域或者位于最近一侧的脸部区域优先执行AF运算。

步骤4107：CPU 26对与脸部识别对象的登记人物有关的所有脸部识别数据(脸部识别数据组)的数量进行计数。具体来说，在脸部登记存储器27中，在脸部识别对象的登记人物的组文件夹中记录的脸部识别数据成为计数的对象。

步骤4108：CPU 26将在摄影画面内检测出的脸部区域的数量(S4104)与脸部识别数据组中包含的脸部识别数据的数量(S4107)相乘，求出当次的脸部识别处理的最大运算量。上述评价值对应在当次检测出的所有的脸部区域中使用脸部识别数据组中包含的所有脸部识别数据进行脸部识别处理的情况下的运算量。

步骤4109：CPU 26求出规定阈值减去评价值(S4108)之后的差值。基于脸部识别部32在规定的限制时间内能够执行的脸部识别处理的运算量，设定上述阈值。因此，阈值的具体数值对应脸部识别部32的运算能力而改变。

步骤4110：CPU 26判断差值(S4109)是否是负值。在差值是负值的情况下(“是”的一方)移到S4111。另一方面，在差值是0以上的情况下 (“否”的一方)移到S4112。此外，在S4110中是“否”的一方的情况下，脸部识别部32使脸部识别数据组的脸部识别数据全都成为判断用脸部识别数据。

步骤4111：在这种情况下，评价值(S4108)超过阈值，如果使用所有的脸部识别数据组的脸部识别数据，则可能在限制时间内不能够结束脸部识别数据。因此，CPU 26从脸部识别数据组中精减适用于当次脸部识别处理中的判断用脸部识别数据。

具体来说，首先，CPU 26根据上述差值(S4109)，计算判断用脸部识别数据的上限值。接着，CPU 26利用以下(1)及(2)的算法，从脸部识别数据组中进行选择，使判断用脸部识别数据成为小于上限值。

(1)在脸部识别对象的登记人物是多个的情况下，CPU 26基于上述上限值，设定每个登记人物的判断用脸部识别数据的分配数。基本上来说，CPU 26对脸部识别对象的登记人物都设定相同的分配数。

不过CPU 26也可以基于对各登记人物设定的优先顺序对分配数附加权重，判断用脸部识别数据的数量与优先顺序的高低成比例地增加。这种情况下，由于登记人物的优先顺序越高，越基于更多的脸部识别数据进行脸部识别处理，所以能够以高精度对优先顺序高的登记人物进行脸部识别。例如，CPU 26也能够基于脸部登记存储器27的摄影次数数据，将摄影次数较多的登记人物的优先顺序设定得较高。

此外，CPU 26也可以分别比较各组文件夹的脸部识别数据的数量，将脸部识别数据的数量在规定值以上的登记人物的分配数设定得较高。这是因为，越是脸部识别数据的登记数较多的登记人物，对用户来说是优先摄影的登记人物的可能性越高。

(2)CPU 26在由上述(1)设定的分配数的范围内，按照每个脸部识别对象的登记人物从组文件夹的脸部识别数据中选择判断用脸部识别数据。这里，在组文件夹的脸部识别数据是分配数以下的情况下，CPU 26将组文件夹内的所有脸部识别数据选择作为判断用脸部识别数据。此外，在这种情况下，CPU 26也可以将剩余的分配数对其他登记人物再次分配。

另一方面，在组文件夹的脸部识别数据超过分配数的情况下，CPU 26利用以下的某个基准(或者它们的组合)选择判断用脸部识别数据。

第一，CPU 26参照组文件夹的“脸部识别数据的登记时间”的数据，按照登记时间从近到远的顺序，选择判断用脸部识别数据。这是因为，考虑到登记时间越远的脸部识别数据，在当次的摄影中的可靠性越低。

第二，CPU 26参照组文件夹的“取得脸部识别数据时的摄影条件”的数据。并且，CPU 26从多个脸部识别数据中，将上述取得时的摄影条件接近当前摄影条件的脸部识别数据优先作为判断用脸部识别数据。这是因为，利用与当次摄影条件近似的条件取得的脸部识别数据更加有利于脸部识别的精度提高。

例如，预先制作将摄影条件的各个参数的变化量点数化的表格，CPU26基于当次的摄影条件，求出脸部识别数据的摄影条件的点数。并且，CPU26比较上述点数，选择判断用脸部识别数据。由此，在摄影时进行闪光发光的情况下，CPU 26将有闪光灯发光的脸部识别数据优先选择作为判断用脸部识别数据。另一方面，在摄影时不进行闪光发光的情况下，CPU 26将没有闪光灯发光的脸部识别数据优先选择作为判断用脸部识别数据。同样，CPU 26将曝光条件或白平衡的设定更加接近的脸部识别数据优先选择作为判断用脸部识别数据。

第三，CPU 26将组文件夹的脸部识别数据中与脸部正面对应的脸部识别数据优先选择作为判断用脸部识别数据。这是因为，通常从正面拍摄脸部的情况较多。这里，如下所述进行脸部识别数据的脸部朝向的检测。例如，也可以预先在脸部识别数据中记录与脸部朝向有关的识别信息，CPU 26参照上述识别信息来判断脸部朝向。此外，CPU 26也可以从脸部识别数据中的眼、鼻、口等特征点的提取状态类推脸部的朝向。

步骤4112：CPU 26的脸部识别部32对检测出的脸部区域(S4104)执行基于判断用脸部识别数据的脸部识别处理。并且，脸部识别部32判断是否包含有识别对象的脸部(S4102)。在包含有识别对象的脸部的情况下(“是”的一方)，移到S4113。另一方面，在没有包含有识别对象的脸部的情况下(“否”的一方)，移到S4115。

步骤4113：CPU 26基于与检测出的登记人物相对应的“脸部识别时的处理设定”的数据，变更电子摄像机的摄影条件的设定或图像处理的设定等。然后，移到S4115。

这里，在摄影画面内检测出多个识别对象的脸部的情况下，CPU 26以规定的算法决定登记人物的优先顺序。并且，CPU 26基于与优先顺序最高的登记人物相对应的“脸部识别时的处理设定”，变更电子摄像机的各种设定。此外，在“脸部识别时的处理设定”中设定了登记人物的自动拍摄的情况下，CPU 26移到S4116，自动拍摄登记人物。

步骤4114：另一方面，在此情况下，CPU 26对应用户对释放按钮的半按下操作，以通常摄影时的算法选择AF区，执行AF运算。

步骤4115：CPU 26判断释放按钮是否被全按下。在释放按钮被全按下的情况下(“是”的一方)，移到S4116。另一方面，在没有对释放按钮的输入的情况下(“否”的一方)，CPU 26等待释放按钮的全按下操作。

步骤4116：CPU 26使摄像元件16驱动，拍摄被摄体像。然后，图像处理部20基于释放时的图像信号，生成摄影图像数据。此外，在拍摄到识别对象的登记人物的情况下，图像处理部20对摄影图像数据实施在S4113中设定的图像处理。

步骤4117：CPU 26向记录介质29中记录摄影图像数据。此外，在拍摄到识别对象的登记人物的情况下，CPU 26也能够基于在脸部登记存储器27中指定的目录路径，将摄影图像数据分类并记录到规定的记录文件夹。

进而，CPU 26基于S4112的脸部识别结果，使脸部登记存储器27的摄影次数数据的摄影次数递增。此时，CPU 26也可以使识别出的所有的登记人物的摄影次数递增，也可以按照优先顺序仅使选择的登记人物的摄影次数递增。以上结束了“脸部识别摄影模式”下的一系列动作。

以下，说明本实施方式的“脸部识别摄影模式”的效果。在上述脸部识别摄影模式中，基于脸部识别数据，进行摄影人物的脸部识别(S4112)。并且，在检测出识别对象的脸部的情况下，通过与该登记人物相对应的设定进行摄影时的各种处理等(S4113、S4116、S4117)。因此，能够在登记人物的摄影时自动进行反映用户意图的处理，显著提高操作电子摄像机的用户的便利性。

此外，在上述脸部识别摄影模式中，在限制时间内无法完成脸部识别处理的可能性较高的情况下，利用规定的算法精减判断用脸部识别数据(S4107)。因此，能够将脸部识别处理的运算时间收敛在限制时间内，用 户能够适当地进行拍摄。

(实施方式的补充事项)

(1)在第一实施方式到第三实施方式的“脸部登记模式”中，也可以如第四实施方式那样，在预览图像上合成显示构图辅助显示或摄影样本显示。此外，在第四实施方式的“脸部登记模式”中也可以在释放之前利用透视图像数据进行脸部检测处理。

(2)在上述实施方式中，CPU 26也可以将释放按钮的半按下作为触发，来进行基于脸部检测的AF运算。

(3)在上述实施方式中，也可以利用模式转盘等与“通常摄影模式”、“肖像摄影模式”、“再现模式”等一样，直接指定并启动“脸部登记模式”和“脸部检测摄影模式”。

(4)在第三实施方式的“脸部登记模式”中，CPU 26也可以按照优先顺序从高到低的顺序生成两个以上的脸部识别数据。

(5)在第四实施方式的“脸部登记模式”中，CPU 26也可以将脸部登记图像数据拍摄积累在记录介质29等中，对多个脸部登记图像数据进行成批处理，统一生成脸部识别数据。此时，也可以如第三实施方式所述，对脸部登记图像数据设定优先顺序，按照优先顺序从高到底的顺序，生成脸部识别数据。

(6)对于脸部登记存储器的“脸部识别数据的登记时间”的数据来说，只要表示出源脸部登记图像数据大概是在什么时候拍摄的就足够。因此，对于“脸部识别数据的登记时间”，也可以利用摄影年、摄影月、摄影日中的某个结束记录，而省略详细的时刻等记录。

(7)在“脸部识别摄影模式”的脸部识别处理(S207)中，脸部识别部32也可以从分组后的脸部识别数据中利用规定条件精减判断中使用的脸部识别数据。例如，脸部识别部32也可以基于“脸部识别数据的登记时间”，去除离摄影时间一定时间以上的旧的脸部识别数据。同样，脸部识别部32也可以基于“取得脸部识别数据时的摄影条件”，去除利用与当次的摄影条件有很大不同的摄影条件生成的脸部识别数据。

(8)在“脸部识别摄影模式”的脸部识别处理(S207)中，脸部识别部32也可以根据利用摄影光学系统11的焦点距离的数据计算出的失真的 程度，对脸部识别数据进行补正。

(9)在“脸部登记模式”中，CPU 26也可以生成与脸部识别数据的脸部朝向有关的识别信息，还将上述识别信息记录到脸部登记存储器27中。CPU 26也可以基于第一实施方式的S110所示的处理结果，生成与脸部朝向有关的识别信息。或者，CPU 26也可以基于摄影时或者编辑时的用户输入，生成上述识别信息。

(10)本发明的电子摄像机没有必要一定与实施方式的电子摄像机的结构一致。例如，也可以用共同的存储器构成内置存储器19和脸部登记存储器27。脸部登记存储器27也可以经由总线28连接到CPU 26。此外，也可以省略由摇动传感器部13、像模糊补正透镜14及第二透镜驱动部15构成的光学模糊补正机构。进而，也可以在电子摄像机中内置通信单元30。

(11)CPU 26也可以将脸部登记存储器27内的数据记录在记录介质29中，从而能够进行脸部登记存储器27的备份。此外，CPU 26也可以从记录介质29中取得预先由其他电子摄像机生成的脸部识别数据等，能够在电子摄像机之间共用脸部登记存储器27的数据。

(12)本发明的图像处理装置并不限于第五实施方式的电子摄像机的结构。例如，也可以由个人计算机等构成本发明的图像处理装置，该个人计算机具有从外部读取图像数据的机构、记录脸部识别数据的记录部和执行上述“脸部登记模式”程序的控制部(省略图示)。

(13)在第六实施方式中的编辑画面的启动操作时，CPU 26也可以与基于脸部认证的个人认证一起进行基于密码输入的个人认证。这种情况下，也可以是，CPU 26通过脸部认证或者基于密码的认证中的一方的认证成功，能够访问编辑画面。此外也可以是，CPU 26仅在脸部认证和基于密码的认证中这两者都认证成功的情况下才能够访问编辑画面。

(14)第六实施方式的编辑画面的结构仅是一个例子。例如，也可以不设置“登记人物的选择画面”，而在编辑画面的初始显示画面中与脸部登记图像一起一览显示脸部识别数据用显示项目。

(15)在第六实施方式中，也可以在“登记人物的选择画面”上显示的索引图像中使用登记人物的任意摄影图像。例如，CPU 26也可以在“登记人物的选择画面”上显示索引图像用的特别拍摄的图像。此外，CPU 26 也可以在“登记人物的选择画面”上显示与已经删除的脸部识别数据相对应的脸部登记图像。

(16)在第七实施方式中的“脸部识别摄影模式”的脸部识别处理中(S4112)，脸部识别部32也可以根据利用摄影光学系统11的焦点距离的数据计算出的失真的程度，对脸部识别数据进行补正。

(17)在第七实施方式中，基于脸部识别数据的数量和脸部区域的数量，从脸部识别数据选择判断用脸部识别数据。但是，在本发明中，也可以不考虑所检测出的脸部区域的数量，仅基于与所选择的登记人物有关的脸部识别数据的数量，从脸部识别数据组中取舍选择判断用脸部识别数据。

此外，在不脱离本发明的精神或其主要特征的情况下能够以其他各种形式实施本发明。因此，上述实施方式在各方面仅是示例，并不能做限定解释。本发明由权利要求书表示，并不被拘束于说明书正文中。进而，属于权利要求书范围内的变形和变更都包括在本发明的范围内。

Claims (20)

1.一种电子摄像机，其特征在于，包括：

摄像元件，对摄影光学系统的被摄体像进行光电转换，生成图像信号；

图像处理部，基于来自上述摄像元件的上述图像信号，生成脸部登记图像数据，并且基于上述图像信号，生成透视图像数据；

脸部检测部，基于上述透视图像数据，检测摄影画面内的脸部区域；

控制部，对应上述脸部区域的检测位置，调整上述摄影光学系统的摄影参数。

脸部图像生成部或者脸部识别数据生成部，上述脸部图像生成部切出上述脸部区域的图像，生成脸部图像数据，上述脸部识别数据生成部从上述脸部登记图像数据的脸部区域的部分提取摄影人物脸部的特征点，基于上述特征点，生成脸部识别数据；以及

记录部，记录上述脸部图像数据或者上述脸部识别数据。

2.一种电子摄像机，其特征在于，包括：

摄像元件，对摄影光学系统的被摄体像进行光电转换，生成图像信号；

图像处理部，基于来自上述摄像元件的上述图像信号，生成脸部登记图像数据，并且基于上述图像信号，生成透视图像数据；

控制部，以摄影画面的中央部分为基准，调整上述摄影光学系统的摄影参数；

脸部检测部，基于上述透视图像数据或者上述脸部登记图像数据，检测位于摄影画面中央部分的脸部区域；

脸部图像生成部或者脸部识别数据生成部，上述脸部图像生成部切出上述脸部区域的图像，生成脸部图像数据，上述脸部识别数据生成部从上述脸部登记图像数据的脸部区域的部分提取摄影人物脸部的特征点，基于上述特征点，生成脸部识别数据；以及

记录部，记录上述脸部图像数据或者上述脸部识别数据。

3.根据权利要求1所述的电子摄像机，其特征在于，上述控制部在基于上述透视图像数据的脸部检测时执行上述摄像元件的释放动作。

4.根据权利要求1所述的电子摄像机，其特征在于，还具有显示上述透视图像数据的图像的显示部；

上述控制部在生成上述脸部登记图像数据的摄影模式下，使上述显示部的电源接通。

5.根据权利要求1所述的电子摄像机，其特征在于，还具有显示上述透视图像数据的图像的显示部；

上述图像处理部在上述透视图像数据的中央部分合成用于辅助摄影画面中的脸部的定位的构图辅助显示并输出。

6.根据权利要求5所述的电子摄像机，其特征在于，上述图像处理部还在上述透视图像数据中合成被摄体的摄影状态的样本显示并输出。

7.根据权利要求1所述的电子摄像机，其特征在于，上述控制部在生成上述脸部登记图像数据时限制对上述脸部登记图像数据的电子变焦处理。

8.根据权利要求1至7中任一项所述的电子摄像机，其特征在于，上述摄影光学系统还具有变焦透镜；

上述控制部在上述摄影参数的调整时以及释放时使上述变焦透镜的倍率调整范围与通常摄影时相比受到限制。

9.根据权利要求8所述的电子摄像机，其特征在于，上述控制部在释放时将上述变焦透镜的变焦位置设定在广角端。

10.根据权利要求1所述的电子摄像机，其特征在于，还具有：

像模糊补正透镜，补正摄影画面上的像模糊；

角移位检测部，检测上述电子摄像机的光轴的角度变动；以及

补正透镜驱动部，在释放时，基于上述角度变动，使上述像模糊补正透镜驱动。

11.根据权利要求1所述的电子摄像机，其特征在于，还具有调整上述图像信号的增益的摄像灵敏度变更部；

上述控制部在释放时使上述图像信号的增益高于通常摄影时的设定。

12.根据权利要求1所述的电子摄像机，其特征在于，还具有对被摄场进行闪光发光的闪光发光部；

上述控制部在释放时使上述闪光发光部的闪光发光无效。

13.根据权利要求1所述的电子摄像机，其特征在于，上述控制部生成表示释放时的摄影条件的摄影条件数据，并且将该摄影条件数据与上述脸部图像数据或者上述脸部识别数据相对应地记录在上述记录部中。

14.根据权利要求1所述的电子摄像机，其特征在于，上述控制部生成表示上述脸部图像数据或者上述脸部识别数据的取得时间的取得时间数据，并将该取得时间数据与上述脸部图像数据或者上述脸部识别数据相对应地记录在上述记录部中。

15.根据权利要求1所述的电子摄像机，其特征在于，上述图像处理部基于上述脸部登记图像数据，生成索引图像数据；

上述控制部将上述索引图像数据与上述脸部图像数据或者上述脸部识别数据相对应地记录在上述记录部中。

16.根据权利要求1所述的电子摄像机，其特征在于，上述控制部将根据相同摄影人物生成的多个上述脸部图像数据或者上述脸部识别数据成组记录在上述记录部中。

17.根据权利要求16所述的电子摄像机，其特征在于，上述控制部使上述摄影人物的脸部朝向、上述摄影人物的眼镜有无以及上述脸部登记图像数据的摄影条件中的某个并不相同的2个以上的上述脸部图像数据或者上述脸部识别数据成组。

18.根据权利要求1所述的电子摄像机，其特征在于，上述控制部在生成多个拍摄相同摄影人物而成的上述脸部登记图像数据时，基于上述脸部区域的检测状态，决定上述脸部登记图像数据的优先顺序；

上述脸部图像生成部或者上述脸部识别数据生成部根据上述优先顺序高的上述脸部登记图像数据，生成上述脸部图像数据或者上述脸部识别数据。

19.根据权利要求1所述的电子摄像机，其特征在于，上述控制部基于上述脸部区域的检测状态，推定摄影人物的脸部朝向，在该脸部朝向与规定方向不一致时，使上述摄像元件不进行释放。

20.根据权利要求1所述的电子摄像机，其特征在于，上述控制部基于上述脸部区域的检测状态，推定摄影人物的表情，根据该表情的种类，使上述摄像元件不进行释放。

Images