CN114257723A - 摄像设备及其控制方法以及存储介质 - Google Patents

Abstract

本发明涉及摄像设备及其控制方法以及存储介质。摄像设备包括：摄像单元、被配置为控制所述摄像单元以自动拍摄图像的控制单元、被配置为登记被摄体的登记单元、以及被配置为将所述登记单元登记的被摄体与特定日期相关联的关联单元。所述控制单元进行控制，使得与关联单元关联的日期不是当天或未由关联单元关联日期的由所述登记单元登记的被摄体相比，优先拍摄关联单元关联的日期为当天的被摄体。

Description

摄像设备及其控制方法以及存储介质

技术领域

本发明涉及能够自动拍摄图像的摄像设备。

背景技术

近年来，已知定期地并连续地拍摄图像而不使用来自用户的摄像指令的自动摄像照相机。例如，日本特开2020-92354讨论了具有平摇/俯仰机构并且能够自动搜索被摄体并自动拍摄被摄体的图像的设备。日本特开2020-92354中讨论的传统技术通过重要性设置基于各个人的面部表情和音量来确定要拍摄哪个人或场景。然而，传统技术根本不考虑各个人的诸如生日等的重要日子。一般认为，许多用户希望照相机优先拍摄与诸如生日和结婚纪念日等的重要日子相关联的人的图像。然而，传统技术没有注意到这样的用户的意图，因此不一定能够基于用户的意图进行自动摄像。

发明内容

根据本发明的一方面，一种摄像设备，包括：摄像单元；控制单元，其被配置为控制所述摄像单元以自动拍摄图像；登记单元，其被配置为登记被摄体；以及关联单元，其被配置为将所述登记单元登记的被摄体与特定日期相关联。所述控制单元进行控制，使得与所述关联单元关联的所述特定日期不是当天或者未由所述关联单元关联日期的由所述登记单元登记的被摄体相比，优先拍摄所述关联单元关联的所述特定日期为当天的被摄体。

一种摄像设备的控制方法，所述摄像设备具有摄像单元，所述控制方法包括：控制所述摄像单元以自动拍摄图像；登记被摄体；以及将所登记的被摄体与特定日期相关联，其中，与关联日期不是当天或未关联日期的所登记的被摄体相比，优先拍摄所述关联日期为当天的被摄体。

一种非暂时性计算机可读存储介质，其存储有用于使计算机执行摄像设备的控制方法的指令，所述摄像设备具有摄像单元，所述控制方法包括：控制所述摄像单元以自动拍摄图像；登记被摄体；以及将所登记的被摄体与特定日期相关联，其中，与关联日期不是当天或未关联日期的所登记的被摄体相比，优先拍摄所述关联日期为当天的被摄体。

通过以下参考附图对示例性实施例的描述，本发明的进一步特征将变得明显。

附图说明

图1A示出根据本发明的一个或多个方面的摄像设备的外观的示例，以及图1B示出根据本发明的一个或多个方面的摄像设备的操作。

图2是示出根据本发明的一个或多个方面的摄像设备的配置的框图。

图3示出根据本发明的一个或多个方面的摄像设备和外部设备的配置。

图4是示出根据本发明的一个或多个方面的外部设备的配置的框图。

图5是示出根据本发明的一个或多个方面的自动摄像处理的流程图。

图6是示出根据本发明的一个或多个方面的语音识别处理的流程图。

图7是示出根据本发明的一个或多个方面的频率设置处理的流程图。

图8A、8B、8C和8D示出根据本发明的一个或多个方面的所拍摄图像中的区域划分。

图9示出根据本发明的一个或多个方面的显示在外部设备上的示例画面。

图10A和10B示出根据本发明的一个或多个方面的显示在外部设备上的示例画面。

图11是示出根据本发明的一个或多个方面的被摄体信息的表。

图12是示出根据本发明的一个或多个方面的用于设置优先级的处理的流程图。

图13是示出根据本发明的一个或多个方面的与所拍摄图像的数量的比率相关的控制的图。

图14示出根据本发明的一个或多个方面的显示在外部设备上的示例画面。

图15示出根据本发明的一个或多个方面的显示在外部设备上的示例画面。

图16A和16B示出根据本发明的一个或多个方面的显示在外部设备上的示例画面。

图17A和17B示出根据本发明的一个或多个方面的显示在外部设备上的示例画面。

具体实施方式

下面将参考附图详细描述本发明的示例性实施例。

以下示例性实施例将被视为用于实现本发明的示例性示例，并可基于根据本发明的设备的配置和其它各种条件根据需要进行校正、修改和组合。

图1A和1B示意性地示出根据第一示例性实施例的摄像设备。

参考图1A，摄像设备101设置有用于操作电源开关(在后文中称为电源按钮)的操作构件。电源按钮可由诸如轻触、轻击或扫过等操作代替。摄像设备101设置有作为包括透镜组和用于拍摄图像的图像传感器的壳体的镜头筒102。镜头筒102设置有驱动镜头筒102以相对于固定部103旋转的旋转机构。俯仰旋转单元104是能够在图1B中所示的纵摇方向上旋转镜头筒102的马达驱动机构。平摇旋转单元105是能够在图1B中的横摆方向上旋转镜头筒102的马达驱动机构。这意味着镜头筒102可以在多于一个方向上旋转。图1B示出固定部103位置处的轴定义。角速度计106和加速度计107两者安装在摄像设备101的固定部103处。摄像设备101通过使用角速度计106和加速度计107检测摄像设备101的振动，并基于检测到的抖动角度驱动俯仰旋转单元104和平摇旋转单元105旋转。摄像设备101被配置为校正作为移动单元的镜头筒102的抖动和倾斜。

图2是示出根据第一示例性实施例的摄像设备101的配置的框图。

参考图2，第一控制单元223包括处理器(例如，中央处理单元(CPU)、图形处理单元(GPU)、微处理器和微处理单元(MPU))和存储器(例如，动态随机存取存储器(DRAM)和静态随机存取存储器(SRAM))。这些装置进行各种处理以控制摄像设备101的各个块并控制块之间的数据传输。非易失性存储器(电可擦除可编程只读存储器(EEPROM))216存储用于第一控制单元223的操作的常数和程序。

参考图2，变焦单元201包括进行放大的变焦透镜。变焦驱动控制单元202驱动并控制变焦单元201。调焦单元203包括用于进行焦点调整的透镜。调焦驱动控制单元204驱动并控制调焦单元203。

在摄像单元206中，图像传感器接收通过各个透镜组的入射光，并将与光量相对应的电荷信息作为模拟图像数据输出到图像处理单元207。图像处理单元207对通过模数(A/D)转换输出的数字图像数据应用诸如失真校正、白平衡调整和颜色插值处理等的图像处理，并且输出该应用后的数字图像数据。从图像处理单元207输出的数字图像数据由图像记录单元208转换为诸如联合图像专家组(JPEG)格式等的记录格式，然后被发送到存储器215和视频输出单元217(如下所述)。

镜头筒旋转驱动单元205驱动俯仰旋转单元104和平摇旋转单元105，以分别在俯仰和平摇方向上驱动镜头筒102。

设备抖动检测单元209安装有例如用于检测摄像设备101的3轴方向上的角速度的角速度计(陀螺仪传感器)106和用于检测摄像设备101的3轴方向上的加速度的加速度计(加速度传感器)107。设备抖动检测单元209基于检测到的信号计算摄像设备101的旋转角度和偏移量。

音频输入单元213获取通过使用设置在摄像设备101上的麦克风从摄像设备101周围收集的音频信号，对音频信号进行模数转换，并将数字化信号发送到音频处理单元214。音频处理单元214对输入数字音频信号进行优化处理和其它音频处理。第一控制单元223将由音频处理单元214处理的音频信号发送到存储器215。存储器215临时存储分别由图像处理单元207和音频处理单元214获得的图像信号和音频信号。

图像处理单元207和音频处理单元214分别读取临时存储在存储器215中的图像信号和音频信号，并对图像信号和音频信号进行编码以生成压缩图像信号和压缩音频信号。第一控制单元223将压缩图像信号和压缩音频信号发送到记录/再现单元220。

记录/再现单元220将分别由图像处理单元207和音频处理单元214生成的压缩图像信号和压缩音频信号以及其它摄像控制数据记录在记录介质221中。在音频信号不被压缩或编码的情况下，第一控制单元223将由音频处理单元214生成的音频信号和由图像处理单元207生成的压缩图像信号发送到记录/再现单元220，并使记录/再现单元220将这些信号记录在记录介质221中。

记录介质221可以是内置于摄像设备101中的记录介质或可移动记录介质。记录介质221可以记录诸如压缩图像信号、压缩音频信号以及由摄像设备101生成的音频信号等的各种类型的数据。因此，通常使用与非易失性存储器216相比具有更大容量的介质。例如，记录介质221包括硬盘、光盘、磁光盘、可记录光盘(CD-R)、可记录数字多功能盘(DVD-R)、磁带、非易失性半导体存储器、闪速存储器以及所有类型的其它记录介质。

记录/再现单元220读出(再现)记录在记录介质221中的压缩图像信号、压缩音频信号、音频信号、各种类型的数据以及程序。第一控制单元223将读取的压缩图像信号和读取的压缩音频信号分别发送到图像处理单元207和音频处理单元214。图像处理单元207和音频处理单元214分别将压缩图像信号和压缩音频信号临时存储在存储器215中，按照预定过程对这些信号进行解码，并将解码后的信号发送到视频输出单元217和音频输出单元218。

音频输入单元213用于通过摄像设备101上的多个麦克风获取音频信号。音频处理单元214检测安装有麦克风的平面上的声音方向，并用于搜索和自动摄像(如下所述)。音频处理单元214进一步检测特定音频命令。一些音频命令是预先登记的命令。用户可能能够在摄像设备101中将特定声音登记为音频命令。音频处理单元214还进行声音场景识别。在声音场景识别中，音频处理单元214通过使用基于大量音频数据完成机器学习的学习模型来判断声音场景。具体的机器学习算法包括最近邻法、朴素贝叶斯法、决策树和支持向量机。具体的机器学习算法还包括通过使用神经网络自动生成特征量和绑定权重系数以供学习的深度学习。可以根据需要将上述可用算法中的任何一个应用于本示例性实施例。

根据本示例性实施例，在音频处理单元214中设置用于检测诸如“欢呼”、“鼓掌”和“讲话”(uttering)等特定场景的神经网络。音频处理单元214被配置为当检测到特定声音场景或特定音频命令时，向第一控制单元223和第二控制单元211输出检测触发信号。

更具体地，音频处理单元214的神经网络准备针对“欢呼”、“鼓掌”和“讲话”场景的音频信息，并通过使用音频信息作为输入并使用检测触发信号作为输出来进行学习。

与控制摄像设备101的整个主系统的第一控制单元223分开设置的第二控制单元211控制到第一控制单元223的供电。

第一电源单元210和第二电源单元212分别供电以操作第一控制单元223和第二控制单元211。当按下摄像设备101上的电源按钮时，向第一控制单元223和第二控制单元211两者供电。如下所述，控制第一控制单元223以关闭从第一控制单元223自身到第一电源单元210的供电。即使在第一控制单元223的操作不工作时，第二控制单元211也在工作以从设备抖动检测单元209和音频处理单元214接收信息。第二控制单元211进行用于基于各种输入信息判断是否启动第一控制单元223的处理。当第二控制单元211判断为启动第一控制单元223时，第二控制单元211向第一电源单元210发出供电指令。根据本示例性实施例，第一电源单元210和第二电源单元212从电池供电。更具体地，摄像设备101也是便携式终端。

音频输出单元218例如在摄像期间从摄像设备101的内置扬声器输出预设音频模式。

发光二极管(LED)控制单元224例如在摄像期间控制设置在摄像设备101上的LED的预设照明/闪烁模式。

视频输出单元217包括例如视频输出终端，并且发送图像信号以在连接的外部显示器上显示视频图像。音频输出单元218和视频输出单元217可以是诸如高清多媒体接口

终端等的一个组合终端。

通信单元222在摄像设备101和外部设备之间进行诸如音频信号、图像信号、压缩音频信号以及压缩图像信号等的数据的通信发送和接收。通信单元222还接收包括摄像开始和结束命令以及平摇驱动、俯仰驱动和变焦驱动等的摄像控制信号，并基于来自能够与摄像设备101通信的外部设备的指令来驱动摄像设备101。在摄像设备101和外部设备之间发送和接收诸如与要由学习处理单元219(如下所述)处理的学习相关的各种参数等的信息。通信单元222的示例包括红外通信模块、

通信模块、无线局域网(LAN)通信模块、无线通用串行总线(USB)、全球定位系统(GPS)接收器以及其它无线通信模块。

<具有外部通信设备的系统配置>

图3示出摄像设备101和外部设备智能装置301之间的无线通信系统的示例配置。摄像设备101是具有摄像功能的数字照相机，并且外部设备301(在下文中称为智能装置301)是包括蓝牙通信模块和无线LAN通信模块的智能装置。

摄像设备101和智能装置301能够通过基于符合电气和电子工程师协会(IEEE)802.11标准系列的无线LAN的通信302、以及具有控制站和从站之间的主从关系的诸如

低功耗(以下称为BLE)等的通信303来彼此通信。无线LAN和BLE是通信方法的示例。各个通信设备具有至少两个不同的通信功能。在基于控制站和从站之间的关系的通信中，可以使用其它通信方法，只要一个通信功能可以控制另一个通信功能即可。在不丧失一般性的情况下，假设与诸如BLE等的第二通信相比，诸如无线LAN等的第一通信以更高的通信速率实现通信，并且与第一通信相比，第二通信提供更低的功耗和更短的通信距离其中至少之一。

<外部通信设备的配置>

将参考图4描述作为外部通信设备的示例的智能装置301的配置。智能装置301是所谓的便携式电话，即便携式终端。

智能装置301除了包括用于无线LAN的无线LAN控制单元401和用于BLE的BLE控制单元402之外，还包括例如用于公共无线通信的公共通信线路控制单元406。智能装置301还包括包(packet)发送/接收单元403。无线LAN控制单元401进行与对无线LAN的射频(RF)控制、通信处理、对符合IEEE 802.11标准系列的无线LAN通信进行各种控制的驱动器以及无线LAN通信相关的协议处理。BLE控制单元402进行与针对BLE的RF控制、通信处理、在BLE通信中进行各种控制的驱动器以及BLE通信相关的协议处理。公共通信线路控制单元406进行与对公共无线通信的RF控制、通信处理、对公共无线通信进行各种控制的驱动器以及公共无线通信相关的协议处理。公共无线通信符合例如国际多媒体电信(IMT)标准和长期演进(LTE)标准。包发送/接收单元403对与无线LAN、BLE通信以及公共无线通信相关的包发送和接收其中至少之一进行处理。将智能装置301在通信中进行包的发送和接收其中至少之一的前提下描述本示例性实施例。然而，除包交换(packet switching)之外的诸如线路交换等的通信格式也适用。

智能装置301还包括例如控制单元411、存储单元404、全球定位系统(GPS)接收单元405、显示单元407、操作单元408、音频输入/音频处理单元409以及电源单元410。控制单元411通过执行存储在存储单元404中的控制程序来控制整个智能装置301。存储单元404存储例如由控制单元411执行的控制程序和诸如通信所需的参数等的各种信息。在控制单元411执行存储在存储单元404中的控制程序的情况下，实现各种操作(如下所述)。

电源单元410向智能装置301供电。显示单元407具有输出可通过使用液晶显示器(LCD)和LED视觉识别的信息或者通过使用扬声器输出声音的功能，并且显示各种信息。操作单元408包括例如接收用户对智能装置301的操作的按钮。显示单元407和操作单元408可以由诸如触摸面板等的公共构件来配置。

音频输入/音频处理单元409可被配置为从内置于智能装置301中的通用麦克风来获取用户的语音，并通过语音识别处理来获取用户的操作指令。

音频输入/音频处理单元409还经由智能装置301中的专用应用程序通过用户的语音获取音频命令。音频输入/音频处理单元409可以将音频命令登记为用于指示摄像设备101的音频处理单元214经由通过无线LAN进行的通信302来识别特定音频命令的特定音频命令。

GPS接收单元405接收从卫星发送的GPS信号，并分析GPS信号以估计智能装置301的当前位置(经度和纬度信息)。或者，GPS接收单元405可以基于通过使用Wi-Fi定位系统(WPS)从周围无线网络获得的信息来估计智能装置301的当前位置。在获取的当前GPS位置信息指示在预设位置范围内(在预定径向范围内)的位置的情况下，智能装置301经由BLE控制单元402将运动信息通知给摄像设备101，以用作用于自动摄像和自动编辑的参数(如下所述)。另一方面，在GPS位置信息指示了预定或更大的位置改变情况下，智能装置301经由BLE控制单元402将运动信息通知给摄像设备101，以用作自动摄像和自动编辑(如下所述)的参数。

如上所述，智能装置301在经由无线LAN控制单元401和BLE控制单元402的通信中与摄像设备101交换数据。例如，智能装置301发送和接收诸如音频信号、图像信号、压缩音频信号以及压缩图像信号等的数据。智能装置301还发出摄像指令和其它操作指令，发送音频命令登记数据，并基于GPS位置信息发出预定位置检测通知和地点移动通知。智能装置301还经由智能装置301中的专用应用程序发送和接收用于学习的数据。

<摄像操作序列>

图5是示出根据本示例性实施例的摄像设备101的自动摄像处理的流程图。

当用户操作设置在摄像设备101上的电源按钮时，流程图的处理开始。根据本示例性实施例，在摄像设备101和智能装置301之间恒定建立无线通信连接，并且可以通过智能装置301上的专用应用程序进行各种操作。流程图中各个步骤的处理由控制摄像设备101的各个单元的第一控制单元223实现。

在步骤S501中，第一控制单元223判断自动摄像当前是否被停止。下面将参考语音识别处理的流程图来描述停止自动摄像。在自动摄像被停止的情况下(步骤S501中的是)，第一控制单元223等待而不进行任何处理，直到自动摄像的停止被解除为止。另一方面，在自动摄像未被停止的情况下(步骤S501中的否)，处理进入步骤S502。在步骤S502中，第一控制单元223进行图像识别处理。

在步骤S502中，第一控制单元223使图像处理单元207对摄像单元206所拍摄的信号进行图像处理以生成用于被摄体识别的图像。

图像处理单元207基于生成的图像进行诸如人和物体识别等的被摄体识别。

在识别人的情况下，图像处理单元207检测被摄体的面部和身体。在面部检测处理中，用于判断人的面部的预定义图案使得能够将所拍摄图像中包括的与图案一致的位置检测为人的面部图像。

图像处理单元207还同时计算指示作为被摄体的面部的概率的可靠性。例如，基于图像中面部区域的大小以及与面部图案的一致程度来计算可靠性。

同样在物体识别中，可以识别与预登记图案一致的物体。

还存在通过使用所拍摄图像中的色调或饱和度的直方图来提取特征被摄体的方法。在这种情况下，针对在摄像视角中拍摄的被摄体的图像，第一控制单元223将从色调或饱和度的直方图导出的分布划分为多个区间，并针对各个区间对拍摄的图像进行分类。

例如，针对所拍摄图像生成具有多个颜色成分的直方图。然后，直方图被划分为丘状分布范围，并且按属于同一区间的组合的区域对所拍摄图像进行分类。然后，识别被摄体的图像区域。

通过计算针对识别出的被摄体的各个图像区域的评估值，可以将具有最高评估值的被摄体的图像区域确定为主要被摄体区域。

上述方法能够从摄像信息中获得各个被摄体信息。

在步骤S503中，第一控制单元223计算图像抖动校正量。更具体地，第一控制单元223基于由设备抖动检测单元209获取的角速度和加速度信息来计算摄像设备101的绝对角度。然后，第一控制单元223获得在用于取消绝对角度的角度方向上移动俯仰旋转单元104和平摇旋转单元105所用的图像稳定角度，并将该图像稳定角度确定为图像抖动校正量。针对用于计算图像抖动校正量的该处理，可以通过学习处理(如下所述)来改变计算方法。

在步骤S504中，第一控制单元223判断摄像设备101的状态。第一控制单元223根据基于角速度信息、加速度信息以及GPS位置信息检测到的角度和移动量来判断摄像设备101的当前振动和移动状态。

例如，在摄像设备101附接到机动车以拍摄图像的情况下，诸如周围景物等的被摄体信息因移动距离而发生大幅改变。

这使得第一控制单元223能够判断当前状态是否为摄像设备101附接到机动车并且以高速移动的“车辆移动状态”。该状态可用于自动被摄体搜索(如下所述)。

第一控制单元223判断角度是否大幅度改变以判断当前状态是否为摄像设备101几乎没有抖动角度的“静止图像拍摄状态”。

在“静止图像拍摄状态”中，由于认为摄像设备101本身没有角度变化，因此可以针对静止图像拍摄进行被摄体搜索。

在角度变化相对大的情况下，第一控制单元223判断为“手持图像拍摄状态”，并且可以针对手持图像拍摄进行被摄体搜索。

在步骤S505中，第一控制单元223进行被摄体搜索处理。被摄体搜索包括以下处理：

(1)区域划分

将参考图8A、8B、8C和8D描述区域划分。如图8A中所示，在以摄像设备101的位置为中心的整个圆周上进行区域划分(假设原点O为摄像设备101的位置)。在图8A中的示例中，在各个俯仰和平摇方向上以22.5度的间隔进行区域划分。在图8A中的区域划分中，随着俯仰方向上的角度从0度增大，水平圆周减小以减小面积区域(area region)。因此，在根据本示例性实施例的摄像设备101中，如图8B中所示，在俯仰角度为45度或更大的情况下，将区域范围设置为大于22.5度。图8C和8D示出摄像视角中的区域划分的示例。轴1301是初始化时摄像设备101的朝向。通过使用该方向角作为基准位置来进行区域划分。图8D示出在视角区域1302中拍摄的图像的示例。在以该视角拍摄的图像中，基于如图8D中的划分区域1303至1318中所示的区域划分来进行图像划分。

(2)计算各个区域的重要性级别

针对如上所述的各个划分区域，基于该区域中存在的被摄体和该区域中的场景状态，计算指示在进行搜索时的优先级顺序的重要性级别。例如，基于区域中的人数、各个人的面部大小和朝向、检测到面部的概率、针对各个人的面部表情和个人认证结果来计算基于被摄体状态的重要性级别。基于场景状态的重要性级别的示例包括一般物体识别结果、场景判断结果(例如，蓝天、背光和夜景)、来自区域方向的声音级别和语音识别结果、以及关于区域中的运动检测的信息。在步骤S504中的判断摄像设备101的状态中，检测摄像设备101的振动状态，并且可以使重要性级别基于振动状态可改变。例如，在当前状态被判断为“静止图像拍摄状态”的情况下，在检测到特定人的面部认证的情况下重要性级别被判断为高，以使得在面部认证中所登记的具有高优先级的被摄体(例如，摄像设备101的用户)之间进行被摄体搜索。此外，还按照面部的优先级进行自动摄像(如下所述)。即使摄像设备101的用户长时间保持摄像设备101并进行摄像，用户也可以通过移除摄像设备101并将其放置在桌子等上来记录包括用户的许多图像。由于在这种情况下可以通过平摇/俯仰操作来进行被摄体搜索，因此用户可以简单地通过适当地设置摄像设备101而不考虑摄像设备101的设置角度来记录包括用户的图像和包括许多面部的合影。只有在上述条件下，只要各个区域保持不变，具有最高重要性级别的区域就保持不变。结果，被搜索的区域将保持不变。因此，根据过去的摄像信息改变重要性级别。更具体地，针对在预定时间段内连续被指定为搜索区域的区域，可以降低重要性级别，或者针对在步骤S513(如下所述)中进行摄像的区域，可以在预定时间段内降低重要性级别。

(3)确定搜索对象区域

在如上所述计算针对各个区域的重要性级别的情况下，具有高重要性级别的区域被确定为搜索对象区域，然后计算掌握视角中的搜索对象区域所需的平摇/俯仰搜索目标角度。

在步骤S506中，第一控制单元223进行平摇/俯仰驱动。更具体地，第一控制单元223基于图像抖动校正量和平摇/俯仰搜索目标角度在控制采样中增加驱动角度以计算平摇/俯仰驱动量。然后，镜头筒旋转驱动单元205控制倾斜旋转单元104和平摇旋转单元105的驱动。

在步骤S507中，第一控制单元223控制变焦单元201以进行变焦驱动。更具体地，第一控制单元223基于在步骤S505中确定的搜索对象被摄体的状态进行变焦驱动。例如，如果作为搜索对象被摄体的人的面部太小(即小于最小可检测大小)，则该面部不能被检测到或可能丢失。在这种情况下，第一控制单元223进行控制以通过在远摄侧变焦图像来增加图像中的面部大小。另一方面，如果人的面部在图像中太大，则被摄体很可能由于被摄体或摄像设备101本身的移动而在视角外。在这种情况下，第一控制单元223进行控制以通过在广角方向上变焦来减小画面上的面部大小。以这种方式进行变焦控制能够将被摄体保持在适合跟踪的状态。

虽然在步骤S505至S507中，第一控制单元223通过平摇/俯仰和变焦驱动来进行被摄体搜索，但是也可以通过使用多个广角镜头一次拍摄所有方向上的图像的摄像系统进行被摄体搜索。对于全向照相机，通过使用在摄像中获得的所有信号作为输入图像的诸如被摄体检测等的图像处理需要巨大量的处理。因此，第一控制单元223被配置为对图像的一部分进行剪裁，然后在剪裁图像的范围内进行被摄体搜索处理。第一控制单元223像上述方法那样计算针对各个区域的重要性级别，基于重要性级别改变剪裁位置，并对自动摄像(如下所述)进行判断。这使得能够降低图像处理的功耗并进行高速被摄体搜索。

在步骤S508中，第一控制单元223读取频率参数作为指示自动摄像的容易性的设置值。用户可以将频率参数设置为任意频率，即经由智能装置301的专用应用程序从“低”、“中”和“高”选项中选择频率。与频率参数被设置为“低”的情况下所拍摄图像的数量相比，将频率参数设置为“高”能够在预定时间段内拍摄更多数量的图像。频率参数被设置为“中”的情况下所拍摄图像的数量介于频率参数被设置为“低”的情况下所拍摄图像的数量和频率参数被设置为“高”的情况下所拍摄图像的数量之间。该设置可通过频率设置处理(如下所述)自动改变。

在步骤S509中，第一控制单元223判断读取的频率参数是否为预定值。例如，在将“最高”设置为自动摄像的频率的情况下(步骤S509中的是)，处理进入步骤S510。另一方面，在未设置“最高”的情况下(步骤S509中的否)，处理进入步骤S512。频率设置处理(如下所述)自动选择频率设置“最高”。在用户通过使用智能装置301的专用应用程序进行的常规频率设置中，如上所述，从“低”、“中”和“高”选项中选择频率。换句话说，在用户操作的设置中，频率没有被设置为“最高”。

在步骤S510中，第一控制单元223判断自步骤S705(如下所述)中开始频率参数设置“最高”以来直到该设置恢复到原始设置为止的频率提升时间是否已经结束。在频率提升时间已经结束的情况下(步骤S510中的是)，处理进入步骤S511。另一方面，在频率提升时间尚未结束的情况下(步骤S510中的否)，处理进入步骤S512。

在步骤S511中，由于频率提升时间已经结束，第一控制单元223将频率参数恢复到选择“最高”之前的频率设置。在频率提升时间期间通过自动摄像拍摄到预定数量或更多的图像的情况下，第一控制单元223将当前场景判断为对象场景，并且因此可以延长频率提升时间。该处理使得能够连续拍摄用户期望的场景。

在步骤S512中，第一控制单元223判断是否进行自动摄像。

现在将描述对自动摄像的判断。第一控制单元223通过判断重要性得分是否超过预定值来判断是否进行自动摄像。重要性得分指用于判断是否进行自动摄像的参数，并且与用于确定搜索区域的重要性级别不同。基于被摄体检测状态和时间的推移，将分数添加到重要性得分。假设在重要性得分超过2000分的情况下进行自动摄像的设计的示例情况。在这种情况下，重要性得分初始为0分，并且基于自进入自动摄像模式以来的时间的推移将分数添加到重要性得分。例如，如果不存在具有高优先级的被摄体，则重要性得分以如下的增加率而增加，即重要性得分在120秒内达到2000分。如果经过了120秒而未检测到具有高优先级的被摄体，则重要性得分通过随时间推移的加分而达到2000分。然后，进行摄像。在时间的推移期间检测到具有高优先级的被摄体的情况下，加1000分。因此，在检测到具有高优先级的被摄体的状态下，重要性得分可能达到2000分。结果，摄像频率可能增加。

例如，当识别到被摄体的微笑时，加800分。即使针对不具有高优先级的被摄体，也会进行该基于微笑的加分。尽管将围绕无论被摄体是否具有高优先级、基于微笑的加分得分相同的示例情况来描述本示例性实施例，但本发明不限于此。例如，与用于检测不具有高优先级的被摄体的微笑加分得分相比，用于检测具有高优先级的被摄体的微笑加分得分可以更高。这使得能够更大程度地按照用户的意图进行摄像。通过伴随这些被摄体的面部表情变化的加分，在重要性得分超过2000分的情况下进行自动摄像。即使通过伴随面部表情变化的加分，重要性得分未超过2000分，通过随着随后时间的推移的加分，重要性得分也在较短的时间段内达到2000分。

将围绕随着时间推移的加分的示例情况描述本示例性实施例，其中添加分数以使得重要性得分在120秒内达到2000分(每秒加2000/120分)，即相对于时间线性添加分数。然而，不限于此。在加分方法的可能示例中，直到120秒中的110秒才添加分数，并且在随后的10秒(从110秒至120秒)中每秒可加200分。以这种方式增加重要性得分，能够防止重要性得分通过被摄体的面部表情变化的加分而与优先级程度无关地达到对象得分。在重要性得分随着时间的推移线性增加的加分方法的情况下，随着长时间的推移而添加了分数。因此，在这种情况下，即使通过伴随着低优先级被摄体的微笑的面部表情变化的加分，重要性得分通常也达到对象分数，因此优先级程度相对难以反映。另一方面，在伴随面部表情变化的低加分的情况下，可能错过面部表情变化的时刻。由于需要避免该加分方法，因此直到110秒才添加分数。使用该加分方法，直到110秒才向具有低优先级的被摄体添加分数。另一方面，由于当检测到具有高优先级的被摄体时加1000分，因此即使直到110秒才进行随着时间的推移的加分，也加1000分。因此，在进行伴随面部表情变化的加分的情况下，与高优先级的被摄体相比，具有低优先级的被摄体使得能够限制得分达到摄像用的分数的可能性，从而允许优先级的程度起作用。虽然上文已经描述了伴随面部表情变化的加分，但是加分的标准不限于此。加分标准的示例包括语音音量增大的情况以及姿势和手势的量增大的情况。为了允许优先级程度针对这些标准起作用，只需提供上述加分方法中的差异。

即使通过被摄体的动作，重要性得分未超过2000分，随着时间的推移直到120秒也进行摄像，因此在一定的时间段不进行摄像是不可能的。

如果在中途检测到被摄体，则可以在120秒中使增加重要性得分的时间更早地开始。更具体地，例如在60秒时检测到具有高优先级的被摄体的情况下，加1000分，但重要性得分未超过2000分。然而，在这种情况下，第一控制单元223可以在检测到被摄体之后的30秒开始线性增加重要性得分，而不是直到110秒才添加分数。可替代地，第一控制单元223可以不是在120秒之前的10秒而是在120秒之前的20秒开始线性增加重要性得分。以这种方式增加重要性得分增加了拍摄到具有高优先级的被摄体的可能性，使得更容易实现按照用户的意图的摄像。

当进行自动摄像时，重要性得分重置为0分。直到重要性得分再次超过2000分才会进行自动摄像。

频率参数用于控制随着时间的推移增加重要性得分的方法。频率参数被设置为使得在上述示例中未检测到被摄体的情况下直到进行自动摄像为止需要120秒。尽管在该示例中频率参数为“中”，但第一控制单元223改变增加重要性得分的方法，使得在频率提升状态下(频率参数为“最高”)在60秒时进行自动摄像。例如，在这种情况下，第一控制单元223可以每秒加2000/60分，或者直到55秒才添加分数并在剩余的5秒中直到60秒为止每秒加400分。后一情况的优点如上所述。针对其它频率参数的示例设计如下。在频率参数为“高”的情况下，第一控制单元223增加重要性得分，使得重要性得分在100秒内达到2000分。在频率参数为“低”的情况下，第一控制单元223增加重要性得分，使得重要性得分在240秒内达到2000分。在频率参数为“最高”的情况下，在最短时间内(例如，根据本示例性实施例的60秒)拍摄至少一个图像。因此，增加摄像频率意味着通过改变加分方法来增加每单位时间要拍摄的图像的数量，而降低摄像频率意味着通过改变加分方法来减少每单位时间要拍摄的图像的数量。

这完成了对是否进行自动摄像的判断的描述。在第一控制单元223判断为进行自动摄像的情况下(步骤S512中的是)，处理进入步骤S513。另一方面，在第一控制单元223判断为不进行自动摄像的情况下(步骤S512中的否)，处理返回到步骤S501。

在步骤S513中，第一控制单元223进行摄像处理。摄像处理包括静止图像拍摄和运动图像拍摄。

图6是示出根据本示例性实施例的摄像设备101的语音识别处理的流程图。当用户发出的声音被输入到摄像设备101的内置麦克风时，音频输入/音频处理单元409进行语音识别处理以获取用户操作指令。

在步骤S601中，第一控制单元223判断是否检测到唤醒字。唤醒字指用于开启音频命令识别的启动命令，所述音频命令识别用于向摄像设备101发出特定音频指令。当发出音频指令时，第一控制单元223需要在唤醒字识别之后接收命令字以成功识别。在检测到唤醒字的情况下(步骤S601中的是)，处理进入步骤S602。另一方面，在未检测到唤醒字的情况下(步骤S601中的否)，处理重复步骤S601，直到检测到唤醒字为止。

在步骤S602中，第一控制单元223停止自动摄像处理。在第一控制单元223识别唤醒字时，摄像设备101进入命令字等待状态并停止自动摄像处理。停止自动摄像是指使用平摇/俯仰和变焦操作执行被摄体搜索和摄像处理。停止自动摄像的目的包括停止自动摄像并进入命令字等待状态，以快速响应将紧接着唤醒字之后给出的命令字指令。在用户打算通过使用音频指令发出摄像指令的情况下，停止自动摄像的目的还包括停止平摇/俯仰操作以启用在用户期望的方向上的摄像。

在步骤S603中，第一控制单元223生成识别声音以通知用户对唤醒字的成功识别。

在步骤S604中，第一控制单元223判断是否检测到命令字。在检测到命令字的情况下(步骤S604中的是)，处理进入步骤S606。另一方面，在未检测到命令字的情况下(步骤S604中的否)，处理进入步骤S605。

在步骤S605中，第一控制单元223判断从已检测到唤醒字且进入命令字等待状态起是否经过了预定时间段。在经过了预定时间段的情况下(步骤S605中的是)，处理返回到步骤S601。在步骤S601中，第一控制单元223停止命令字等待状态并进入唤醒字等待状态。另一方面，在未经过预定时间段的情况下(步骤S605中的否)，处理重复步骤S604，直到检测到命令字为止。

在步骤S606中，第一控制单元223判断检测到的命令字是否是静止图像拍摄命令。该静止图像拍摄命令是用于请求摄像设备101拍摄和记录一个静止图像的命令。在第一控制单元223判断为命令字是静止图像拍摄命令的情况下(步骤S606中的是)，处理进入步骤S607。另一方面，在第一控制单元223判断为命令字不是静止图像拍摄命令的情况下(步骤S606中的否)，处理进入步骤S608。

在步骤S607中，第一控制单元223进行静止图像拍摄处理。更具体地，图像处理单元207将摄像单元206拍摄的信号转换为JPEG文件，然后图像记录单元208将JPEG文件记录在记录介质221中。

在步骤S608中，第一控制单元223判断检测到的命令字是否是被摄体搜索命令。在第一控制单元223判断为命令字是被摄体搜索命令的情况下(步骤S608中的是)，处理进入步骤S609。另一方面，在第一控制单元223判断为命令字不是被摄体搜索命令的情况下(步骤S608中的否)，处理进入步骤S611。

在步骤S609中，第一控制单元223进行被摄体搜索处理。如果已经通过步骤S505中的被摄体搜索处理确定了搜索对象区域，并且已经通过步骤S506中的平摇/俯仰驱动和步骤S507中的变焦驱动捕获到被摄体，则第一控制单元223停止跟踪被摄体，并进行被摄体搜索处理以搜索其它被摄体。如果用户在捕获到被摄体的状态下发出被摄体搜索指令，则该指令意味着除当前拍摄到的对象被摄体之外还存在另一个对象被摄体。

在完成步骤S607至S609中的处理之后，然后在步骤S610中，第一控制单元223进行频率设置处理。频率设置处理指用于设置指示在预定时间段内要拍摄的图像的数量的频率参数的处理。下面将详细描述处理的内容。步骤S610中的频率设置处理将摄像频率设置为更高的值。

在步骤S611中，第一控制单元223判断检测到的命令字是否是运动图像记录开始命令。运动图像记录开始命令是请求摄像设备101拍摄和记录运动图像的命令。在第一控制单元223判断为命令字是运动图像记录开始命令的情况下(步骤S611中的是)，处理进入步骤S612。另一方面，在第一控制单元223判断为命令字不是运动图像记录开始命令的情况下(步骤S611中的否)，处理进入步骤S613。

在步骤S612中，第一控制单元223通过使用摄像单元206开始拍摄运动图像，并将运动图像记录在记录介质221中。在记录运动图像的同时，第一控制单元223保持自动摄像停止状态，而不进行平摇/俯仰驱动、变焦驱动和被摄体搜索。

在步骤S613中，第一控制单元223判断检测到的命令字是否是运动图像记录停止命令。在第一控制单元223判断为命令字是运动图像记录停止命令的情况下(步骤S613中的是)，处理进入步骤S614。另一方面，在第一控制单元223判断为命令字不是运动图像记录停止命令的情况下(步骤S613中的否)，处理进入步骤S615。

在步骤S614中，第一控制单元223停止通过使用摄像单元206的拍摄和记录运动图像，并完成将运动图像文件记录在记录介质221中。

在步骤S615中，第一控制单元223通过音频命令进行其它处理。其它处理的示例包括用于进行用户指定的方向上的平摇/俯仰操作的命令的处理，以及用于改变包括曝光校正的各种摄像参数的命令的处理。

在步骤S616和S617中，第一控制单元223对在步骤S602中停止的自动摄像进行重新开始处理。通过该操作，启用步骤S502至S510中的处理，并且重新开始自动摄像。

在这种情况下，在运动图像记录开始和运动图像记录停止指令的情况下，不进行频率设置处理。这是因为，由于在开始运动图像记录之后连续记录来自摄像单元206的信号，所以设置高频率是没有意义的。在停止运动图像记录之后，用户发出记录停止指令指示要记录的场景已经结束。因此，不进行频率设置处理，以避免通过不必要地设置高频率而进行无用摄像。

如果包括在摄像设备101中的电池具有低剩余容量，或者如果摄像设备101的温度由于发热而达到预定温度或更高温度，则优选防止摄像单元206频繁操作。在这种状态下，第一控制单元223可以不在图7的步骤S704中将频率参数设置为“最高”(如下所述)。

图7是示出根据本示例性实施例的摄像设备101的频率设置处理的流程图。作为设置针对用户进行自动摄像的频率的方法，用户可以使用智能装置301中的专用应用程序。该流程图的处理也在执行图6中的步骤S610时开始。处理也在用户经由智能装置301上的专用应用程序发出频率改变指令时开始。

在步骤S701中，第一控制单元223判断是否通过使用智能装置301上的专用应用程序来进行频率设置。在通过使用专用应用程序进行频率设置的情况下(步骤S701中的是)，处理进入步骤S702。另一方面，在未通过使用专用应用程序进行频率设置的情况下(例如，在步骤S610中进行频率设置的情况下)(步骤S701中的否)，处理进入步骤S703。

在步骤S702中，第一控制单元223设置由用户指定的频率参数。例如，可以通过从如图9中所示智能装置301上的专用应用程序的画面中的自动摄像频率的项中选择“低”、“中”或“高”来设置频率参数。

现在，将描述图9中的应用程序画面。

通过智能装置301的专用应用程序，准备静止图像和运动图像作为要自动拍摄的内容。此外，作为要自动拍摄的内容，用户可以通过专用应用程序设置静止图像优先还是运动图像优先。如图9所示，可通过触摸(轻弹)滑动块的旋钮来改变该设置。在将静止图像设置为优先的情况下，第一控制单元223与运动图像相比拍摄更多静止图像。在将运动图像设置为优先的情况下，第一控制单元223与静止图像相比拍摄更多运动图像。

用户还可以将针对摄像设备101要拍摄的场景而进行搜索的范围设置作为相对于正面方向的角度的程度。在图9中的示例中，用户可以设置三个不同的范围：60度的范围(相对于正面方向在向右和向左方向各自上的30度)、180度的范围(相对于正面方向在向右和向左方向各自上的90度)和360度的范围。可以输入数值以启用更精细的范围设置。

当进行自动摄像时，担心拍摄太多内容。因此，提供自动删除图像的功能。该功能可以通过智能装置301开启或关闭。例如，进行自动删除的图像可以按照摄像日期的升序或重要性的升序来删除。例如，针对静止图像，重要性是指对用户是否将优选记录该图像进行数值估计的参数，例如图像是否经受少量抖动或者图像是否包括人。例如，针对运动图像，重要性是根据图像是否包括人、或者诸如对话等的人声是否记录在图像中来数值地计算的。第一控制单元223将更大的总数值处理为更高的重要性。

这完成了图9中画面的描述。将再次描述图7。

在步骤S703中，第一控制单元223判断是否通过语音识别处理调用了频率设置。在第一控制单元223判断为语音识别处理调用了频率设置的情况下(步骤S703中的是)，处理进入步骤S704。另一方面，在第一控制单元223判断为语音识别处理未调用频率设置的情况下(步骤S703中的否)，第一控制单元223结束频率设置处理。

在步骤S704中，第一控制单元223将频率参数设置为与可在步骤S702中设置的频率相比更高的频率。这是因为当用户发出摄像指令时的定时至少是用户期望的摄像的定时。更具体地，当用户发出摄像指令时的场景是用户所期望的，因此用户所期望的场景可能在接近的时间段期间发生。考虑到这一点，根据本示例性实施例的摄像设备101将自音频命令输入(由用户的音频命令的音频指令触发)以来的特定时间段估计为要拍摄的场景，并且增大摄像频率。这使得能够在不丢失图像的情况下拍摄用户期望的图像。尽管以上围绕频率参数设置“最高”描述了本示例性实施例，但不限于此。每次在发出音频命令指令的情况下进行频率设置时，第一控制单元223可以以逐级方式增大频率。在这种情况下，上限频率由摄像设备101提供的连续摄像的最快帧速率确定。

在步骤S705中，第一控制单元223将频率提升时间设置为直到在步骤S704中设置为“最高”的频率参数恢复为原始参数为止的时间段，然后开始倒计时。假设在频率设置为“中”的情况下通过音频命令指令将频率设置为“最高”的示例情况。如果频率提升时间为60秒，则曾设置为“最高”的频率设置在60秒内返回到“中”(在步骤S511中进行实际处理)。这种情况下的频率提升时间指保持“最高”频率的时间段。尽管频率提升时间是自动设置的，但用户可以将频率提升时间设置为任意设置时间。

在这种情况下，代替随着预定时间段的推移而恢复频率提升时间设置，第一控制单元223可以根据是否要通过自动摄像来拍摄预定数量的图像、将该设置恢复为原始设置。

在频率提升时间的倒计时结束之前通过音频命令再次将频率设置为“最高”的情况下，第一控制单元223延长直到频率设置恢复到原始设置为止的预定时间段，或者增大图像的预定数量。

此外，第一控制单元223可根据被摄体搜索处理是否已在平摇方向上全方位进行，来判断是否将频率设置恢复到原始设置。

上述示例性实施例基于作为来自用户的摄像指令的音频命令的使用。另外，即使在经由通信单元从智能装置301或BLE遥控器发出摄像指令的情况下，第一控制单元223也可以在执行该指令之后将频率设置设置为“最高”。此外，即使在检测到用于进行与使用摄像设备101中的加速度传感器的特定振动模式相对应的处理的指令的情况下，第一控制单元223也可以在执行该指令之后将频率设置设置为“最高”。此外，即使在作为经由摄像单元对用户的手的运动进行分析的结果接收到基于手势的手势指令的情况下，第一控制单元223也可以在执行该指令之后将频率设置设置为“最高”。

本示例性实施例通过平摇/俯仰和变焦驱动跟踪被摄体，来拍摄用户所期望的图像。假设作为摄像单元的全向照相机恒定地在所有方向上拍摄图像并且从所拍摄图像剪裁所需的图像范围以获取被摄体的图像的可能实现。在这种情况下，第一控制单元223恒定地进行运动图像记录，并且在输入剪裁指令时，以静止图像格式记录运动图像，然后增大运动图像的帧频。此外，在这种情况下，与根据上述示例性实施例的摄像频率类似，第一控制单元223可以设置最高可设置帧频或者设置超过可设置值的值。与上述示例性实施例类似，用于恢复增大的帧频的条件可以是基于经过预定时间段的推移。这使得能够在用户所期望的定时周边以更高的频率进行图像记录，并且相应地使得更容易例如在没有焦点抖动的情况下对运动物体拍摄图像。

如果在频率提升时间内摄像定时未到达，则可能存在未拍摄到图像的情况。为了避免这种情况，在接收到静止图像拍摄命令时，第一控制单元223在不进行平摇/俯仰驱动、变焦驱动和被摄体搜索的情况下进行图像拍摄。随后，第一控制单元223在进行被摄体搜索的同时连续拍摄三个不同的图像。然后，第一控制单元223在预定时间段内进入频率提升状态并进行自动摄像。以这种方式进行操作使得在用户通过使用静止图像拍摄命令意图发出静止图像拍摄指令的情况下能够拍摄至少四个不同的图像，从而避免未拍摄到图像的情况。

<设置优先级>

接下来，将描述被摄体优先级的设置。根据本示例性实施例的优先级是指用于通过在摄像设备101中预登记关于特定人的信息来与其它人相比优先拍摄特定人的图像的参数。

首先，将描述智能装置301的专用应用程序的画面中的人物登记画面。图10A和10B示出显示在智能装置301的专用应用程序上的人物登记画面的示例。

在根据本示例性实施例的摄像设备101识别到人的情况下，第一控制单元223剪裁该人的面部部分，然后将该面部部分发送到智能装置301。如果识别出多个人，则第一控制单元223剪裁这些人的面部部分，然后将这些面部部分发送到智能装置301。无论识别出的人是否被预登记，智能装置301的专用应用程序都在图形用户界面(GUI)(未示出)中列举面部部分的图像。在用户选择列举的面部图像其中之一的情况下，显示如图10A和10B中所示的人物登记画面。

参考图10A中的人物登记画面，面部图像1001是由摄像设备101识别出的人的面部图像。在智能装置301显示发送的数据的情况下，实现图10A中的画面。为各个识别出的人提供人物登记画面。设置项1002用于开启或关闭优先设置，并在图10A中的示例中显示为星标记。默认设置为非优先设置，并且星标记以灰色显示。在用户触摸设置项1002的情况下，进行优先设置，并且星标记变为指示优先设置开启的黄色。

姓名显示框1003是用于显示识别出的人的姓名的区域。姓名显示框1003的默认显示为空白。在用户选择该区域的情况下，可以输入面部图像1001的人的姓名。在用户输入姓名的情况下，该人将登记为登记的被摄体。通过在姓名显示框1003中输入姓名而登记的被摄体的数据不会被自动删除。另一方面，在经过预定时间段之前姓名未输入到姓名显示框1003中的被摄体被自动删除。

生日框1004是用于显示识别出的人的生日的区域。生日框1004的默认显示为空白。在用户选择该区域的情况下，可以输入面部图像1001的人的生日。针对生日输入，可显示用于日期选择的日历。当用户从日历中选择任意日期时，输入该日期。可替代地，例如用户可以通过输入字符串来指定日期。尽管在图10A中以月-日-年的格式指定日期，但月-日的格式也适用。

尽管已经在上文中围绕将被摄体的生日登记为与登记的被摄体相关联的特定日期的方法描述了本示例性实施例，但与登记的被摄体相关联的特定日期不限于生日。此外，针对一个被摄体，可以选择与登记的被摄体相关联的多个特定日期。此外，除每年都会到来的日期(诸如生日等)之外，也可以将诸如入学仪式和婚礼等的单个事件设置为与登记的被摄体相关联的特定日期。

以这种方式输入的被摄体信息经由无线LAN控制单元401或BLE控制单元402从智能装置301发送到摄像设备101。摄像设备101将接收到的被摄体信息记录在非易失性存储器216中。

图11示意性地示出存储在摄像设备101中的被摄体信息。“被摄体编号”是唯一标识被摄体的编号。“优先设置”记录用户在图10A的画面中指定的被摄体的优先设置。“姓名”记录用户在图10A的画面中指定的字符串。“生日”记录用户在图10A的画面中指定的日期。

将参考图12描述摄像设备101进行的各个被摄体的优先级的判断方法。当摄像设备101在顺序摄像中拍摄的图像中识别到被摄体时，开始图12中的流程图。

在步骤S1201中，第一控制单元223从非易失性存储器216获取识别出的被摄体编号。

在步骤S1202中，第一控制单元223确认针对各个识别出的被摄体编号的优先设置。在优先设置为开启的情况下(步骤S1202中的是)，处理进入步骤S1203。

另一方面，在优先设置为关闭的情况下(步骤S1202中的否)，处理进入步骤S1204。

在步骤S1203中，第一控制单元223将被摄体的优先设置为优先级1。在步骤S1204中，第一控制单元223将被摄体的优先设置为优先级0。

在步骤S1205中，第一控制单元223判断该日期是否为针对各个识别出的被摄体编号的特定日期。更具体地，根据本示例性实施例的摄像设备101基于记录在非易失性存储器216中的被摄体信息表，将与各个被摄体编号相对应的生日的日期与当前日期进行比较，以判断两个日期是否相同。在两个日期相同的情况下，第一控制单元223判断为当前日期是生日。更具体地，在第一控制单元223判断为当前日期是特定日期的情况下(步骤S1205中的是)，处理进入步骤S1206。另一方面，在第一控制单元223判断为当前日期不是特定日期的情况下(步骤S1205中的否)，结束处理。

在步骤S1206中，第一控制单元223将被摄体的优先级加0.5。

在上述描述中，进行优先设置时的优先级值为1，通过生日引起的优先级的增加量为0.5。在通过生日引起的优先级的增加量低于通过优先设置引起的优先设置值的情况下，第一控制单元223保持如下状态，即与今天生日的被摄体的优先级相比，在用户进行的优先设置下的被摄体被赋予更高的优先级。然而，要设置的优先级值不限于此。例如，在通过优先设置引起的优先设置值等于通过生日引起的优先级的增加量的情况下，第一控制单元223对通过用户进行的优先设置下的被摄体和不在优先设置下的被摄体(今天是生日)拍摄数量相同的图像。在通过生日引起的优先级的增加量高于通过优先设置引起的优先设置值的情况下，第一控制单元223优先于通过用户进行的优先设置下的被摄体而拍摄今天生日的被摄体的图像。优先级的增加量可以不是固定值。例如，第一控制单元223可以使用基于包括登记的被摄体的数量、视角中的被摄体的数量、被摄体的微笑程度和面部朝向以及被摄体的语音的大小等的其它信息所计算出的值。第一控制单元223还可以使用随时间变化的值。

尽管已经在上文中围绕加优先级的方法描述了本示例性实施例，但相对地减去其它被摄体的优先级的方法也适用。

在处理方面不需要特别设置优先级值。作为执行预定算法的结果，系统可被配置为基于与根据本示例性实施例的优先设置类似的优先设置来操作。

接下来，将描述通过使用在上述处理中计算出的优先级来确定镜头驱动和镜头筒旋转驱动的目标位置的处理。

在自动摄像中使用优先级的目的是以各种方式和以优选构图拍摄更重要被摄体的更多图像。实现该目的的一个可能方法是在被摄体跟踪、控制针对各个被摄体要拍摄的图像的数量、被摄体搜索、构图调整和确定摄像定时中使用优先级。

首先，将描述优先级在被摄体跟踪中的使用。被摄体跟踪是指将特定被摄体恒定地容纳在视角内的操作。更具体地，第一控制单元223控制俯仰旋转单元104和平摇旋转单元105以使镜头筒102保持朝向被摄体的方向。根据本示例性实施例，第一控制单元223在确定跟踪对象被摄体时使用被摄体优先级。更具体地，第一控制单元223确定在视角中检测到的被摄体中具有最高优先级的被摄体作为跟踪对象。

第一控制单元223可以使用关于控制要拍摄的图像的数量(如下所述)的信息来确定跟踪对象。在这种情况下，第一控制单元223考虑被摄体优先级和针对各个被摄体拍摄的图像的先前数量来选择跟踪对象。

接下来，将参考图13描述优先级在控制要拍摄的图像的数量中的使用。第一控制单元223通过使用各个被摄体的优先级的比率作为要拍摄的图像的数量的比率的目标值，来确定摄像对象被摄体。第一控制单元223将存储在记录介质221中的先前拍摄图像中所包括的各个被摄体的比率与各个被摄体的优先级进行比较，并将摄像比率相对于目标值最小的被摄体识别为摄像对象。在确定的摄像对象被摄体存在于视角中的情况下，第一控制单元223在进行构图调整(如下所述)之后拍摄图像。尽管该示例使用被摄体相对于所有过去图像的比率，但本发明不限于此。其它方法的示例包括使用在最近100次摄像中拍摄的被摄体的比率的方法、使用最新信息的方法以及使用当天摄像的比率的方法。

除使用过去拍摄的被摄体的比率的方法之外，其它适用方法还包括针对各个优先级顺次拍摄图像的方法。例如，在存在具有优先级1的被摄体A和具有优先级0.5的被摄体B的情况下，特定方法改变摄像对象被摄体，使得拍摄两次被摄体A，然后拍摄一次被摄体B。

接下来，将描述优先级在构图调整中的使用。在一个方法中，第一控制单元223在从跟踪摄像对象被摄体直到摄像之间的时间段内调整视角以获得更好的构图。首先，为了主要拍摄具有高优先级的被摄体，第一控制单元223进行平摇控制和俯仰控制以将视角中的被摄体中具有最高优先级的被摄体掌握在图像中心处。在另一方法中，第一控制单元223可以计算视角中的被摄体的优先级的重心，然后在图像中心处掌握该重心的位置。第一控制单元223可以在这两个方法之间切换。然后，在焦点调整中，第一控制单元223聚焦于视角中的被摄体中具有最高优先级的被摄体。然后，为了调整在视角中的被摄体的大小，第一控制单元223调整变焦位置以实现在视角中的被摄体中具有最高优先级的被摄体的优选大小。调整被摄体的大小的适用方法的示例包括使用面部大小的方法、使用身体大小的方法以及使用身体的一部分的大小的方法。在许多被摄体存在于视角内外的情况下，用于调整构图的适用方法的示例包括调整照相机的方向和变焦位置以将视角中所包括的被摄体的总优先级值最大化的方法。

接下来，将描述优先级在摄像定时中的使用。基于重要性得分来确定摄像定时。在图5的步骤S512中对是否进行自动摄像的判断的描述中描述了用于确定重要性得分的算法。在视角中存在具有高优先级的被摄体的情况下，该算法会添加分数。本示例性实施例假设三个不同的优先级模式：0、0.5和1。例如，该算法针对优先级0加0分，针对优先级0.5加500分，针对优先级1加1000分，针对优先级1.5加1500分。以这种方式，第一控制单元223根据优先级来区分重要性得分达到2000分的可能性。结果，摄像频率按照优先级的顺序增加。

在上述示例中，如果在图10A的画面中设置生日，则基于生日的优先级自动改变。例如，除生日输入之外，用户还可以选择是否基于生日改变优先级。例如，显示图10B中所示的人物登记画面。除图10A中的画面之外，该画面还包括用于开启或关闭生日优先设置的生日优先设置项1005。默认设置为非生日优先设置，并且星标记以灰色显示。在这种状态下，即使输入了生日，优先级也保持不变。当用户触摸生日优先设置项1005时，进行生日优先设置，并且星标记改变为指示生日优先设置开启的黄色。为了实现该处理，在图12中的处理的步骤S1205之前提供用于判断是否进行生日优先设置的步骤。在第一控制单元223判断为进行生日优先设置的情况下(步骤S1205中的是)，处理进入步骤S1206。另一方面，在第一控制单元223判断为未进行生日优先设置的情况下(步骤S1205中的否)，结束处理。

根据本示例性实施例，在包括摄像设备101和智能装置301的系统中，第一控制单元223基于与被摄体相关联的日期和时间信息自动改变被摄体的优先级。这使得能够在更大程度上按照用户的意图实现自动摄像。

将围绕能够选择是否为各个被摄体添加针对特定日期的优先级的摄像设备、以及能够以多级方式设置在特定日期被摄体优先级的增加量的摄像设备来描述第二示例性实施例。根据第二示例性实施例的系统配置类似于根据第一示例性实施例的系统配置，并且将省略其冗余描述。将围绕与第一示例性实施例的差异来描述第二示例性实施例。

图14示出了根据本示例性实施例的人物登记画面。该画面以类似于根据第一示例性实施例的画面的方式显示。与图10A和10B的画面中的区域相同的区域被分配相同的附图标记。与图10A和10B中的画面不同，图14中的画面显示用于以逐级方式改变优先设置的项1401和用于以逐级方式改变生日优先设置的项1402。项1401和1402由排成一行的五个星标记表示。每次用户触摸各个项时，优先设置以逐级方式改变。默认设置为优先设置关闭。触摸各个项会将优先设置提高一级。当用户在达到上限的情况下触摸各项时，设置返回默认设置。可替代地，可以将设置改变为与触摸的项的位置相对应的级。在图14的示例中，优先设置改变为3级，并且生日优先设置改变为5级。这样，通过改变与各个阶段设置的星标记的颜色来显示当前阶段设置。

根据本示例性实施例，从左到右为星标记分配优先级设置0.2、0.4、0.6、0.8和1.0。更具体地，在图12中的步骤S1203中，代替将优先级设置为1，第一控制单元223设置与所设置的级相对应的优先级。在图12中的步骤S1206中，代替向优先级加0.5，第一控制单元223添加与所设置的级相对应的优先级。

尽管在上述示例中使用了五个级，但本发明不限于此。优先设置和生日优先设置之间的级的数量可以不同。

除使用多个星标记的方法外的其它适用方法的示例包括通过使用搜索栏或下拉菜单或输入数值来设置值的方法。

尽管已经在上文中围绕将被摄体的生日登记为与登记的被摄体相关联的特定日期的方法描述了本示例性实施例，但是与登记的被摄体相关联的特定日期不必限于生日。此外，针对一个被摄体，可以选择与登记的被摄体相关联的多个特定日期。此外，除每年到来的日期(诸如生日等)之外，诸如入学仪式和婚礼等的单个事件可以被设置为与登记的被摄体相关联的特定日期。

通过如上所述以多级方式设置优先级的增加量，用户可以对摄像对象被摄体进行更精细的设置。

将围绕能够使用包括多个被摄体的事件作为特定日期来设置针对各个事件的优先级的增加量的摄像设备，来描述第三示例性实施例。根据第三示例性实施例的系统配置类似于根据第一示例性实施例的系统配置，并且将省略其冗余描述。将围绕与第一示例性实施例的差异来描述第三示例性实施例。

图15示出作为根据本示例性实施例的智能装置301的专用应用程序的画面的事件设置画面。智能装置301的专用应用程序通过顶部画面(未示出)显示用于显示事件设置画面的项。用户可以通过触摸该项来显示事件设置画面。

在图15中的事件设置画面中，日期设置区域1501使用户能够设置多个登记的被摄体共有的特定日期。默认设置为空白。在用户选择该区域的情况下，将显示用于日期选择的日历。当用户从日历中选择任意日期时，将输入该日期。尽管提供上述日历方法作为日期选择方法的示例，但不一定使用日历。例如，可以使用通过字符串输入的日期指定。尽管在图15中以月-日-年的格式指定日期，但月-日的格式也适用。此外，特定日期不限于一天，并且可以设置多天。例如，可以提供用于设置开始和结束日期的用户界面。

登记被摄体选择区域1502通过使用图标来显示登记被摄体的列表。该区域为用户提供了在按下被摄体图标时将被摄体设置为事件的参与者的功能。选择状态显示图标1503显示为登记为事件的参与者的被摄体的图标，以指示该被摄体是事件的参与者。当用户在显示选择状态显示图标1503的情况下再次按下被摄体的图标时，从事件的参与者中移除该被摄体。通过删除选择状态显示图标1503，第一控制单元223向用户通知被摄体不是事件的参与者。

特定日期姓名设置区域1504向用户提供任意设置在事件设置画面中所设置的事件的名称的功能。当用户按下特定日期名称设置区域1504时，可以输入任意字符串。

与特定日期相关联的被摄体的优先设置区域1505向用户提供针对参与事件画面中所登记的事件的被摄体来预先设置在事件日期的优先级的功能。除了所设置的优先级应用于参与事件的所有被摄体之外，与特定日期相关联的被摄体的优先设置区域1105类似于根据第二示例性实施例的优先设置项和生日优先设置项。

特定日期重复设置区域1506向用户提供重复应用该事件的功能。当用户按下特定日期重复设置区域1506时，可以选择重复模式。可选择的设置项的示例包括每年、每月、每周、每天以及每两周一次。除此之外，不能选择重复。

在根据第三示例性实施例的事件设置画面中将多个被摄体登记为参与者的情况下，仅在视角中包括多个被摄体的情况下才能进行摄像。该处理允许优先记录事件参与者之间的沟通状态。

确定在特定日期的被摄体优先级的适用方法的示例包括仅在视角中包括多个被摄体的情况下启用加优先级的方法。该处理使得能够防止在拍摄单个事件参与者的状态下搜索和构图调整受到影响。

可以提供用于对一个或多个被摄体进行分组的用户界面，以能够在事件登记时在选择参与者被摄体时指定组。此外，可以向各个组赋予任意组名称。

要登记的事件的示例包括生日、结婚纪念日、成团纪念日、入学仪式、毕业典礼、婚礼、家庭聚会、饮酒聚会、运动会、旅行等。然而，要登记的事件不限于此，并且任何事件都可以登记。

如上所述，本示例性实施例使得可以向用户提供如下方法：在根据与被摄体相关联的日期和时间信息自动改变被摄体的优先级的功能中，针对各个特定日期设置优先级的增加量。本示例性实施例还使得可以向用户提供如下方法：在根据与被摄体相关联的日期和时间信息自动改变被摄体的优先级的功能中，设置多个登记的被摄体共有的特定日期。

将围绕不仅在特定日期且在包括特定日期前后的若干天增加被摄体的优先级的摄像设备，来描述第四示例性实施例。根据第四示例性实施例的系统配置类似于根据第一示例性实施例的系统配置，并且将省略其冗余描述。将围绕与第一示例性实施例的差异来描述第四示例性实施例。

上述示例性实施例基于用于在特定日期添加被摄体的优先级的方法。将围绕用于不仅在特定日期而且在包括特定日期前后的若干天添加被摄体的优先级的方法来描述第四示例性实施例。

例如，如果某个被摄体的生日是工作日，则生日聚会通常可能在邻近的周末举行。因此，第一控制单元223可以通过在特定日期前后的三天添加被摄体的优先级，来提供即使生日聚会在特定日期之外举行也优先拍摄被摄体的图像的功能。包括特定日期前后的天数不限于三天。天数在特定日期前后之间可能不同。例如，第一控制单元223可以在特定日期前两天和特定日期后五天加优先级。

特定日期的优先级的加量不一定与特定日期前后之间的优先级的加量相同。适用方法的示例包括用于随着与特定日期的间隔的增加来减少优先级的加量的方法、以及用于仅在最近假日加优先级的方法。

如上所述，本示例性实施例使得能够向用户提供如下方法：在根据与被摄体相关联的日期和时间信息自动改变被摄体的优先级的功能中，不仅在特定日期加被摄体的优先级，而且在特定日期前后的若干天加被摄体的优先级。

将围绕用于向用户通知针对特定日期的被摄体的优先级已经改变的摄像设备，来描述第五示例性实施例。根据第五示例性实施例的系统配置类似于根据第一示例性实施例的系统配置，并且将省略其冗余描述。将围绕与第一示例性实施例的差异来描述第五示例性实施例。

图16A示出在根据上述示例性实施例的优先级已经改变的情况下要显示的通知1601。

通知1601显示在智能装置301的画面上。该消息包括优先级已经改变的被摄体的图像1602和通知优先级已经改变的消息1603。

在智能装置301上启动专用应用程序的情况下，通知1601显示在应用程序中。另一方面，在未启动专用应用程序的情况下，通知1601显示在由智能装置301的操作系统提供的通知区域中。例如，如果智能装置301是安装了Android或iOS操作系统的智能电话，则在操作系统提供的通知区域中显示通知1601。

根据本示例性实施例，在改变被摄体的优先级之后，第一控制单元223在第一次拍摄被摄体的定时发出通知1601。

第一控制单元223可以基于通知对象被摄体的数量来改变通知1601的显示内容。图16B示出存在多个通知对象被摄体(在该情况下为三个被摄体)的情况。消息1603包括记录在被摄体信息中的通知对象被摄体的姓名(图16A中的“Airi”)和特定日期的事件名称(图16A中的“生日”)。消息1603还包括指示优先级如何改变的字(图16A中的“许多”)。根据优先级改变的状态，表示优先级如何改变的字“许多”可以由表示数量的另一合适的诸如“适度”和“适当”等的字代替。

将通知1601作为按压式按钮来提供，该按钮具有在按下时显示包括通知对象被摄体的照片列表的画面的功能。

尽管在本示例性实施例中，存储在被摄体信息中的用于被摄体检测的图像用作被摄体的图像1602，但不一定需要使用用于被摄体检测的图像。适用方法的示例包括显示包括存储在记录介质中的被摄体的图像的方法和不显示被摄体的图像1602的方法。在如图16B所示的多个通知对象被摄体的情况下，第一控制单元223可以显示包括通知对象被摄体的一个图像或显示包括通知对象被摄体的多个图像。

尽管在本示例性实施例中，消息1603中包括通知对象被摄体的姓名，但不一定需要在其中包括被摄体的姓名。然而，在如本示例性实施例中那样登记和拍摄多个被摄体的系统中，期望显示消息1603，使得用户能够识别通知是针对哪个被摄体的。这不适用于只登记和拍摄一个被摄体的系统。在根据第三示例性实施例的针对给定组名称的组的通知的情况下，可以使用组名称代替被摄体姓名。

尽管通知1601是在改变优先级并一旦进行摄像之后发出的，但本发明不限于此。适用方法的示例包括在被摄体信息检测单元检测到被摄体之后立即发出通知1601的方法、在确定当天为事件日期的情况下即使未检测到被摄体也发出通知1601的方法、以及在事件日期的特定时间到来时发出通知1601的方法。

本示例性实施例通过基于与被摄体相关联的日期和时间信息自动改变被摄体优先级的功能，使用户能够容易地识别出被摄体的优先级已经改变。

将围绕用于在特定日期检测到被摄体时向用户询问是否改变优先级的摄像设备，来描述第六示例性实施例。根据第六示例性实施例的系统配置类似于根据第一示例性实施例的系统配置，并且将省略其冗余描述。将围绕与第一示例性实施例的差异来描述第六示例性实施例。

图17A和17B示出根据上述示例性实施例的用于在改变被摄体的优先级时向用户询问是否改变优先级的通知1701。

通知1701包括被摄体的图像1602、消息1703、用于批准消息1703的内容的批准(是)按钮1704和用于拒绝消息1703的内容的拒绝(否)按钮1705。

被摄体的图像1602类似于根据第五示例性实施例的图像，并且将省略其冗余描述。

信息1703包括用于确认是否优先拍摄被摄体的字。用户可以按下批准按钮1704和拒绝按钮1705。当用户按下批准按钮1704时，第一控制单元223基于根据上述示例性实施例的方法改变被摄体的优先级，以优先拍摄被摄体的照片。当用户按下拒绝按钮1705时，第一控制单元223保持被摄体的优先级不变，并基于预设摄像条件继续摄像。

尽管在本示例性实施例中，通过与根据第五示例性实施例的通知1601类似的机制来显示通知1701，但是通知1701也可以例如通过对话框来显示。

此外，在发出通知的同时，摄像设备101或智能装置301可产生声音、光或振动，以将通知的发出通知到用户。

当用户按下批准按钮1704或拒绝按钮1705时，可以响应于按下按钮发出新的通知。例如，当用户按下批准按钮1704时，可以发出类似“好的。将拍摄Airi的许多照片”的通知。当用户按下拒绝按钮1705时，可以发出类似“好的。将照常拍摄Airi的照片”的通知。

本示例性实施例使用户能够在基于与被摄体相关联的日期和时间信息自动改变被摄体的优先级之前，选择是否改变被摄体的优先级。

其它示例性实施例

在经由网络或存储介质向系统或设备提供用于实现根据上述示例性实施例的至少一个功能的程序，并且系统或设备的计算机中的至少一个处理器读取并执行该程序的情况下，也可以实现本发明。此外，本发明还可以通过用于实现至少一个功能的电路(例如，专用集成电路(ASIC))来实现。

其它实施例

本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将进行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并进行程序的方法。

虽然已经参考示例性实施例描述了本发明，但是所附权利要求的范围将被给予最广泛的解释，以便包括所有此类修改和等效结构和功能。

Claims (9)

1.一种摄像设备，包括：

摄像单元；

控制单元，其被配置为控制所述摄像单元以自动拍摄图像；

登记单元，其被配置为登记被摄体；以及

关联单元，其被配置为将所述登记单元登记的被摄体与特定日期相关联，

其中，所述控制单元进行控制，使得与所述关联单元关联的所述特定日期不是当天或者未由所述关联单元关联日期的由所述登记单元登记的被摄体相比，优先拍摄所述关联单元关联的所述特定日期为当天的被摄体。

2.根据权利要求1所述的摄像设备，还包括设置单元，所述设置单元被配置为将所述登记单元登记的被摄体设置为优先拍摄，

其中，所述控制单元进行控制，使得与所述关联单元关联的日期为当天的、未由所述设置单元设置为优先拍摄的被摄体相比，优先拍摄所述设置单元设置为优先拍摄的被摄体。

3.根据权利要求1所述的摄像设备，还包括设置单元，所述设置单元被配置为将所述登记单元登记的被摄体设置为优先拍摄，

其中，所述控制单元进行控制，使得与所述设置单元设置为优先拍摄的被摄体相比，优先拍摄所述关联单元关联的日期为当天的被摄体。

4.根据权利要求1至3中任一项所述的摄像设备，还包括通知单元，所述通知单元被配置为通知用户，

其中，在检测到所述关联单元关联的日期为当天的被摄体的情况下，所述通知单元将所述检测通知给用户。

5.一种摄像设备的控制方法，所述摄像设备具有摄像单元，所述控制方法包括：

控制所述摄像单元以自动拍摄图像；

登记被摄体；以及

将所登记的被摄体与特定日期相关联，

其中，与关联日期不是当天或未关联日期的所登记的被摄体相比，优先拍摄所述关联日期为当天的被摄体。

6.根据权利要求5所述的摄像设备的控制方法，还包括将所登记的被摄体设置为优先拍摄，

其中，与所述关联日期为当天的、未设置为优先拍摄的被摄体相比，优先拍摄设置为优先拍摄的被摄体。

7.根据权利要求5所述的摄像设备的控制方法，还包括将所登记的被摄体设置为优先拍摄，

其中，与被设置为优先拍摄的被摄体相比，优先拍摄所述关联日期为当天的被摄体。

8.根据权利要求5至7中任一项所述的摄像设备的控制方法，其中，在检测到所述关联日期为当天的被摄体的情况下，将所述检测通知给用户。

9.一种非暂时性计算机可读存储介质，其存储有用于使计算机执行摄像设备的控制方法的指令，所述摄像设备具有摄像单元，所述控制方法包括：

控制所述摄像单元以自动拍摄图像；

登记被摄体；以及

将所登记的被摄体与特定日期相关联，

其中，与关联日期不是当天或未关联日期的所登记的被摄体相比，优先拍摄所述关联日期为当天的被摄体。

Images