CN103916592B - 用于在具有照相机的便携式终端中拍摄肖像的设备和方法 - Google Patents

Abstract

提供一种用于在具有照相机的便携式终端中拍摄肖像的设备和方法。提供一种用于在具有照相机的设备中拍摄肖像的方法。所述方法包括：在由照相机在拍摄模式下获得的图像中检测人；通过识别检测到的人是否位于对象识别区域中来确定错误的发生；如果基于错误的发生的确定，人的至少一部分位于对象识别区域之外，则产生包括方向信息的错误警告，以使得人移动到对象识别区域中；以及如果基于错误的发生的确定，人位于对象识别区域中，则存储由照相机输出的图像。

Description

用于在具有照相机的便携式终端中拍摄肖像的设备和方法

技术领域

本公开涉及一种用于在具有照相机的便携式终端中进行拍摄的设备和方法。更具体地讲，本公开涉及一种用于拍摄肖像的设备和方法。

背景技术

通常，具有照相机装置(照相机装置通常被实现为数字照相机)的便携式终端可通过使用照相机装置来拍摄各种类型的照片。照相机装置或具有照相机的便携式终端还包括显示单元，并且照相机通常位于与显示单元相对的一侧。也就是说，在数字照相机装置和/或具有照相机的便携式终端中，照相机位于取景器和/或显示单元(屏幕)的相对侧。在具有双照相机的便携式终端的情况下，与位于显示单元的相对侧的第二照相机(即，后照相机)相比，位于与显示单元相同的一侧的第一照相机(即，前照相机)具有较低分辨率。也就是说，与前照相机相比，后照相机具有较高分辨率。

在如上所述的照相机装置或者具有照相机的便携式终端中，如果拍摄者看着照相机而拍摄照片(例如，自拍)或者看着具有双照相机的便携式终端中的后照相机而拍摄照片，则拍摄者无法看到显示单元。在这种情况下，拍摄者无法正确地识别由照相机拍摄的对象的构图，因为拍摄者无法看到显示单元或取景器，由此无法识别是否发生错误。例如，当拍摄肖像时，可能发生各种错误，诸如图像的对象(诸如，人)可能站在拍摄构图之外或者对象可能仅被部分地拍摄。

另外，在拍摄者通过向上握住照相机、通过向下握住照相机或者通过直接看着对象来拍摄照片的各种情况下，拍摄者的眼睛位于与显示单元相同的方向。然而，拍摄者无法看到显示单元。在这种情况下，即使对象位于拍摄构图之外或者仅被部分地拍摄等，拍摄者也无法识别是否发生错误。

因此，需要一种用于在拍摄者无法看到照相机装置或者具有照相机的便携式终端中的显示单元(即，屏幕)的情况下按照由拍摄者预期的构图拍摄对象的改进的设备和方法。

仅提供以上信息作为背景信息以辅助对本公开的理解。关于任何上述内容是否可用作本公开的现有技术，未进行任何确定并且未进行任何推断。

发明内容

本公开的各方面旨在解决至少上述问题和/或缺点并且提供至少以下描述的优点。因此，本公开的一方面提供一种用于在拍摄者无法看到照相机装置或者具有照相机的便携式终端中的显示单元(即，屏幕)的情况下按照由拍摄者预期的构图拍摄对象的设备和方法。为此，根据本公开的实施例的照相机装置或者具有照相机的便携式终端识别对象并且通过分析识别的对象来将关于对象的构图的信息反馈给拍摄者，以使拍摄者可在拍摄者无法看到对象的情况下拍摄无错误的照片。

根据本公开的一方面，提供一种用于在具有照相机的设备中拍摄肖像的方法。所述方法包括：在由照相机在拍摄模式下获得的图像中检测人，通过识别检测到的人是否位于对象识别区域中来确定错误的发生；如果基于错误的发生的确定，人的至少一部分位于对象识别区域之外，则产生包括方向信息的错误警告，以使得人移动到对象识别区域中；以及如果基于错误的发生的确定，人位于对象识别区域中，则存储由照相机输出的图像。

根据本公开的另一方面，提供一种具有照相机的设备。所述设备包括：显示单元，被构造为位于照相机的相对侧，并且显示由照相机拍摄的图像；存储单元，被构造为存储与错误类型对应的错误警告并且存储拍摄的图像；控制单元，被构造为确定人是否位于由照相机在拍摄模式下输出的图像的对象识别区域中，如果人的至少一部分不在对象识别区域中，则控制单元产生包括方向信息的错误警告，以使得人移动到对象识别区域中，并且如果人位于对象识别区域中，则控制单元存储由照相机输出的图像。

当通过使用后照相机来拍摄自肖像以在照相机装置或者具有照相机的便携式终端中获得高分辨率图像时，拍摄者可在甚至不看着由照相机拍摄的图像的情况下也通过音频错误警告识别拍摄构图是否被正确地设置，并且由此可获得具有预期拍摄构图的肖像图像。甚至当在不看着显示单元的情况下拍摄照片时，也可通过语音引导信息识别照相机或对象的移动，并且由此，拍摄者可按照各种姿势拍摄肖像照片。另外，根据本公开的实施例的自动肖像拍摄方法为无法识别对象的人(诸如，盲人)或者在对象无法被识别的情况下提供改进的拍摄的方法。

通过下面结合附图进行的公开了本公开的各种实施例的详细描述，对于本领域技术人员而言，本公开的其它方面、优点和显著特征将会变得清楚。

附图说明

通过下面结合附图进行的描述，本公开的某些实施例的以上和其它方面、特征和优点将会变得更加清楚，其中：

图1是示出根据本公开的实施例的照相机装置的构造的框图；

图2是示出根据本公开的实施例的在照相机装置或者具有照相机的便携式终端中拍摄对象的过程的示图；

图3是示出根据本公开的实施例的在执行图2的过程时的照相机装置的状态的示图；

图4A和4B是示出根据本公开的实施例的在根据图2的过程拍摄对象时的错误警告的示例的示图；

图5是示出根据本公开的实施例的在照相机装置中执行拍摄模式(即，智能拍摄模式)的过程的流程图；

图6A、图6B、图6C和图6D是示出根据本公开的实施例的通过在拍摄模式下检测错误来输出错误警告并且存储由照相机装置拍摄的图像的过程的示图；

图7是示出根据本公开的实施例的在照相机装置中拍摄肖像的过程的流程图；

图8是示出根据本公开的实施例的通过分析根据图5的过程拍摄的图像中的人来输出错误类型和根据错误类型的错误警告的过程的流程图；

图9A和图9B是示出根据本公开的实施例的由照相机装置拍摄的图像的示例的示图；

图10是示出根据本公开的实施例的在照相机装置中设置用于肖像的拍摄模式并且拍摄肖像的过程的流程图；

图11是示出根据本公开的实施例的设置菜单中的菜单的示图；和

图12是示出根据本公开的实施例的执行拍摄操作的便携式终端的构造的框图。

在全部附图中，应该注意的是，相似的标号被用于描述相同或相似的元件、特征和结构。

具体实施方式

下面参照附图进行的描述用于辅助如权利要求及其等同物所定义的本公开的各种实施例的全面理解。其包括各种特定细节以辅助这种理解，但这些特定细节应该被视为仅是示例性的。因此，本领域普通技术人员将会意识到，在不脱离本发明的范围和精神的情况下，可做出这里描述的各种实施例的各种变化和修改。另外，为了清楚和简洁，可省略公知功能和构造的描述。

在下面的描述和权利要求中使用的术语和词语不限于文献含义，而是仅由发明人用来实现本公开的清楚而一致的理解。因此，对于本领域技术人员而言应该清楚的是，下面的本公开的各种实施例的描述仅用于说明目的，而非用于限制如所附权利要求及其等同物所定义的本公开的目的。

应该理解，单数形式包括复数所指对象，除非上下文清楚地另外规定。因此，例如，对一个部件表面的提及包括对一个或多个这种表面的提及。

如这里所使用，术语“拍摄模式”表示用于通过分析对象来识别错误并且在产生了错误的情况下通过移动对象或照相机来调整构图的模式。在本公开的实施例中，“拍摄模式”将会被用于表示与“自动肖像模式”相同的含义。术语“错误”将会通常被用于这样的情况：对象位于拍摄屏幕之外，人类对象闭着眼睛，未检测到人类对象的脸，或者未正确地执行人类对象的对焦。另外，术语“错误警告”表示用于在产生了错误的情况下通过引导拍摄者和/或人类对象移动来按照预期的构图设置对象的警告。术语“识别区域”表示用于识别对象的屏幕的区域。

当利用照相机装置或利用具有照相机的便携式终端拍摄对象时，用户可使用下面两种方法中的任一种方法。第一方法是在通过使用显示单元或取景器评估正在拍摄的图像之后拍摄对象。另一方法是拍摄位于照相机的方向的对象(诸如，当拍摄自肖像时)或者在不看着取景器或显示单元的情况下拍摄对象。在后一情况下，用户无法识别是否按照预期构图拍摄了对象。因此，在后一情况下，照相机装置或者具有照相机的便携式终端必须通过确定正在拍摄的对象的构图来警告错误，并且引导拍摄者根据错误警告操作照相机装置或便携式终端或者移动对象以使得可按照预期构图拍摄照片。这里对象可以是人。

根据本公开的实施例的照相机装置或者具有照相机的便携式终端在拍摄模式下通过照相机检测人数，从检测到的人识别是否产生了错误，并且如果产生了错误，则以音频、视频和/或振动形式指示用于消除对应错误的错误警告。根据错误警告，拍摄者可操作照相机装置或者通过移动人类对象来调整拍摄构图。为此，照相机装置或者具有照相机的便携式终端重复以上操作，并且如果人按照预期拍摄构图定位，则通过执行拍摄模式来获得图像。

图1是示出根据本公开的实施例的照相机装置的构造的框图。

参照图1，照相机120根据照相机驱动命令执行拍摄图像的功能。

控制单元100控制照相机装置的一般操作。根据本公开的实施例，控制单元100在拍摄模式下在识别区域中检测人，识别检测到的人是否位于识别区域中并且按照预期或另外的可接受的构图定位，如果因为人未如预期的那样定位而产生错误，则产生错误警告，并且如果人位于识别区域中并且按照预期或另外的可接受的构图定位，则控制拍摄操作。

存储单元110可包括：程序存储器，被构造为存储根据本公开的实施例的照相机操作程序；数据存储器，被构造为存储拍摄的图像。根据本公开的实施例，存储单元110可还存储与在拍摄模式下检测到的错误类型对应的错误警告。这里，错误警告可以是音频和/或视频引导信息。

根据本公开的实施例，显示单元130在控制单元100的控制下显示正在拍摄的图像和拍摄信息并且显示错误警告。可利用液晶显示器(LCD)、有机发光二极管(OLED)等构造显示单元130。输入单元140产生用于照相机装置的控制的输入信号。音频处理单元150在控制单元100的控制下，利用语音和/或声音的输出信号根据在拍摄模式下检测到的错误类型输出错误警告。传感器160检测照相机位置的状态。这里，可利用加速度传感器、陀螺仪传感器、高度传感器等之中的一种或多种构造传感器160。传感器160检测照相机的状态(诸如，倾角)并且将状态信息输出到控制单元100。

在具有以上结构的照相机装置中，用户可通过输入单元140设置拍摄模式。这里，拍摄模式可以是如上所述的自动肖像模式，并且可在设置模式下设置拍摄模式。在拍摄模式的设置中，自动肖像模式可被打开或关闭。可从视频错误警告、音频错误警告和振动错误警告选择错误警告。另外，在根据本公开的实施例的拍摄模式下，可设置人类对象的识别区域。识别区域可被默认地设置或者由用户通过输入单元140设置。

根据拍摄模式的状态(即，自动肖像模式：打开)，控制单元100接收由照相机120拍摄的图像，在图像的识别区域中检测人，并且确定是否没有错误地在识别区域中拍摄了人。这里，错误可包括：人异常地位于识别区域中(例如，人的脸和/或身体的一部分位于识别区域之外)的情况；未正确地检测到人的脸(例如，脸朝下)的情况；人的眼睛闭着的情况；和人未对焦的情况。另外，控制单元100从传感器160接收关于装置的倾角的信息，并且如果装置倾斜超过阈值，则可产生用于校正该倾角的错误警告。控制单元100根据检测到的错误类型访问存储在存储单元110中的错误警告，并且控制显示单元130和/或音频处理单元150输出错误警告。错误警告是用于校正错误情况的引导信息，并且可引导调整照相机装置或者移动人类对象。

图2是示出根据本公开的实施例的在照相机装置或者具有照相机的便携式终端中拍摄对象的过程的示图。图3是示出根据本公开的实施例的在执行图2的过程时的照相机装置的状态的示图。图4A和图4B是示出根据本公开的实施例的在根据图2的过程拍摄对象时的错误警告的示例的示图。

本公开的实施例涉及一种用于在照相机装置或者具有照相机的便携式终端中拍摄肖像的方法。通常，用于拍摄肖像的方法分为拍摄者通过看着对象来拍摄照片的用于拍摄的方法和拍摄者通过看着照相机镜头来拍摄其自己的照片的用于拍摄的另一方法(以下，自动肖像模式)。在自动肖像模式下，拍摄者无法通过使用取景器或显示单元来识别正在拍摄的图像。在这种情况下，拍摄者无法确定是否按照预期构图拍摄了对象(即，人类对象是否正确地位于屏幕中)。因此，在自动肖像模式下可能按照非预期构图(即，错误状态)拍摄对象。根据本公开的实施例的照相机装置识别将要在自动肖像模式下拍摄的人，并且通过分析识别的人来确定错误的产生。如果产生了错误，则照相机装置产生错误警告(例如，语音引导)并且将反馈提供给拍摄者。如果未产生错误，则照相机装置输出消息：拍摄(例如，自动拍摄)可接受。图2是示出根据本公开的实施例的在照相机装置或者具有照相机的便携式终端中拍摄对象的过程的示图。

参照图2，在开始块210中，如果拍摄者通过输入单元140请求操作照相机，则在操作211，控制单元100通过进入拍摄模式来启动照相机120。此时，控制单元100前进至输入和准备块230，并且控制显示单元130显示拍摄引导(即，帮助引导)。用于拍摄者的拍摄引导可包括自动肖像模式。在启动照相机120之后，如果照相机装置被翻转，则控制单元100可识别出照相机120的镜头指向拍摄者。因此，如果用户选择自动肖像模式或者检测到翻转操作，则控制单元100在操作231设置自动肖像模式并且在操作235关闭显示单元130。在设置自动肖像模式之后，控制单元100前进至检测和对焦块250，并且执行在识别区域中检测人并且对焦人的操作。控制单元100在操作251检测通过照相机120识别的人的数量，在操作253和255确定检测到的人的数量是一个还是超过一个，并且利用语音引导通过音频处理单元150输出该结果。如果检测到超过一个人，则控制单元100可在操作257从检测到的人搜索最高的人。在实施例中，可跳过操作257。在检测识别区域中的人的数量之后，控制单元100在操作259控制照相机120对焦人。这里，可对人的脸(例如，眼睛、脸颊等)执行对焦，或者如果执行了操作257，则对最高的人执行对焦。另外，如果在操作251中在识别区域中检测到超过一个人，则控制单元100可在操作259通过比较识别的脸区域(即，矩形区域)来决定对焦具有较大脸区域的人。随后，控制单元100前进至检查用户姿势块270，并且可通过分析检测到的人的状态来产生错误警告或者引导拍摄过程。控制单元100在操作271在识别区域中检测人并且在操作281通过使用判断值来确定识别区域中的人是否处于正常姿势状态。随后，如果在操作273检测到错误，则控制单元100输出与在操作273检测到的错误对应的错误警告(例如，语音引导)，并且如果人根据错误警告移动，则控制单元100在操作281执行错误校正，并且在操作273将反馈提供给拍摄者。错误类型的示例被列出在图4A和4B中，并且可利用语音引导在操作271和273检测到的错误类型或者错误校正的结果。这里，错误类型可包括：脸的上、下、左或右部分被切掉的情况，脸位于识别区域之外的情况，人类对象或照相机装置移动的情况，人类对象闭着眼睛的情况，照相机装置倾斜(即，未沿水平方向平坦放置)的情况或者人的脸或识别区域中的人的数量改变的情况。如果人的大小基于对焦的人改变超过大约50%，或者如果由于人经过而导致识别区域中的人的数量改变，则可做出存在人的改变的决定。如果根据错误警告(即，错误校正)解决了错误情况，或者如果未检测到错误，则控制单元100在操作275通知不存在错误，引导拍摄操作277，前进至拍摄块290，并且在操作291在结束引导操作之后执行自动肖像拍摄(即，自动拍摄)。如果在操作275或277产生了错误情况，则控制单元100在操作283检测到该错误情况并且通过返回到操作271来执行错误警告过程。另外，在基于识别区域中的人的姿势的分析反馈错误(即，在操作271至277)的状态下，如果拍摄者按压输入单元140的快门按钮或者轻敲显示单元130的屏幕，则控制单元100通过前进至操作291来执行拍摄操作，而不管错误产生(即，手动拍摄)。如果在未检测到识别的人的终端的移动时过去阈值时间(即，在N秒之后)，则控制单元100可执行自动拍摄操作。这里，可基于图像分析技术执行关于人的移动的决定，并且如果通过传感器160(例如，加速度传感器、陀螺仪传感器等)未检测到移动，则终端被识别为处于稳定状态。图3是示出在自动肖像拍摄中的照相机装置和拍摄者的状态的示图。在启动照相机120之后，如果如310所示拍摄者在拍摄模式下设置自动肖像模式或者翻转终端，则控制单元100检测到该情况并且如320所示关闭显示单元130(即，黑屏)。随后，控制单元100检测并且分析由照相机120获得的图像中的人，并且发送反馈，以使脸保持在识别区域中。在发送反馈的状态下，控制单元100如330所示关闭显示单元130的屏幕。在330的状态下，控制单元100分析识别区域中的错误，并且归类为错误的范围可以是：脸位于识别区域之外的情况，人的眼睛闭着的情况，未识别出人的脸(例如，脸朝着侧面或朝下等)的情况，脸未被正确地对焦和/或脸的数量或人的数量已改变的情况。如果在如图4A和图4B中所示反馈错误警告的状态下校正了错误，则如340所示，控制单元100控制照相机120将对焦状态保持阈值时间，利用语音反馈自动拍摄状态，并且拍摄识别出的人370的照片。可选择地，如果在显示错误警告的状态下检测到拍摄者对拍摄的请求(即，按压快门按钮、轻敲屏幕等)，则控制单元100如340中所示执行拍摄模式。

图5是示出根据本公开的实施例的在照相机装置中执行拍摄模式(即，自动拍摄模式)的过程的流程图。

图6A至图6B是示出根据本公开的实施例的通过在照相机装置的拍摄模式下检测错误来输出错误警告的过程的示图。图6C和图6D是示出根据本公开的实施例的存储由照相机装置拍摄的图像的过程的示图。

参照图5以及图6A至图6D，拍摄者可根据本公开的实施例启动照相机120并且在设置模式下设置肖像拍摄模式(自动肖像模式：打开)。可选择地，拍摄者可根据本公开的实施例在设置模式下设置肖像拍摄模式(自动肖像模式：打开)并且驱动照相机120。这里，可由拨动开关设置肖像拍摄模式，并且由此，如果设置一次，则保持根据本公开的实施例的肖像拍摄模式(即，自动肖像模式)。如果用户通过输入单元140请求驱动照相机120，则控制单元100检测到该请求并且启动照相机120，并且在操作511确定肖像拍摄模式(即，自动肖像模式)是否被打开。如果人拍摄模式被关闭，则控制单元100在操作521执行对应功能。

这里，肖像拍摄模式可以是自动肖像模式，并且当如图6A中所示用户630通过在不看着取景器或显示单元130的情况下进行拍摄来拍摄其自己以及两个其他人620和640时，可使用自动肖像模式。例如，在拍摄者拍摄图像而不看着取景器或显示单元130(即，自拍、自肖像或者当拍摄者看着人类对象而拍摄照片时)的情况下，可使用根据本公开的实施例的肖像拍摄模式(即，自动肖像模式)。

如果在操作511识别出拍摄模式被打开，则控制单元100在操作513分析正在由照相机120拍摄的图像的识别区域中的对象。这里，对象可以是人，并且控制单元100从识别出的对象检测人的脸。对于脸识别方法，可使用相关技术的算法。通常，可通过从整个图像提取辨认脸的脸区域的过程和确定辨认的脸是谁的脸的过程来执行脸识别。为了区分脸与周围环境，脸区域的提取可使用诸如亮度、移动、颜色和眼睛位置的估计的信息。为了脸区域的正确提取，控制单元100可通过组合超过一种信息来提取脸区域。可选择地，脸识别的过程可使用通过使用脸的主要部分(诸如，眼睛、鼻子和嘴)的形状及其之间的距离来识别脸的方法。脸识别方法可被用于识别人类对象。也就是说，如果在具有多个脸图像的状态下获得新的脸图像，则照相机装置能够通过将获得的脸图像的像素值与保留的图像的像素值进行比较来识别拍摄的人。存在各种用于识别脸的方法，并且主成分分析(PCA)被最频繁地使用，PCA是数学方法中的主成分分析。

如果在操作513从拍摄的图像检测到人类对象，则分析检测到的人的数量和对象识别区域中的人的位置并且在操作515输出对应反馈信息。也就是说，在分析由照相机120获得的图像之后，控制单元100控制通过输出音频、视频或音频/视频来指示从图像检测到的人的数量并且确定拍摄的图像中的人是否正常地位于识别区域中。因为在图6A中示出的状态下执行拍摄，所以拍摄者630无法识别正在由照相机120拍摄的图像。因此，如图6B的650所示，如果人根据非预期构图位于对象识别区域653中，则控制单元100通过分析在拍摄模式下拍摄的图像来识别错误。

这里，如图6B的653所示设置的对象识别区域表示这样的区域：在该区域中，控制单元100在拍摄模式下识别对象并且确定识别出的对象是否是人类。对象识别区域可以是系统预设的区域(即，默认设置的区域)或由用户在设置模式下设置的区域。另外，对象识别区域可以是如图6B的653所示的简单的基本图形(例如，矩形)或指示人、风景、物体等的复杂图形。在分析对象时，如果脸和/或身体的一部分被从对象识别区域切掉，如果对象识别区域中的人使其脸朝向侧面或朝下(即，如果未识别出眼睛、鼻子或嘴)，如果对焦除脸之外的任何其它位置和/或如果对象识别区域中的人闭着其眼睛，则可能产生错误。

如果在对象识别区域中检测到错误，则控制单元100显示从存储单元110检索的与错误情况对应的错误警告。如上所述，错误情况可以是脸和/或身体的一部分位于对象识别区域之外的情况、未识别出脸的情况、未对焦人的情况或者人闭着其眼睛的情况。如果在操作515检测到错误情况，则控制单元100访问存储单元110以检索与检测到的错误对应的错误警告，并且通过显示单元140和/或音频处理单元150输出错误警告。这里，显示单元140可使用位于与照相机120相同的方向的显示装置(例如，闪烁的灯等)或者振动指示器。这里，可如图4A和图4B中所示设置与错误类型对应的错误警告。图4A和图4B主要显示推荐照相机操作或人类对象的移动的错误警告。

如果拍摄者根据错误警告移动照相机装置或者人类对象移动，则控制单元100识别出由照相机120获得的图像的对象识别区域中的人按照预期或可接受的构图定位，如图6B的660所示。如果对象识别区域中的人被识别为正常地定位，则控制单元100利用语音引导拍摄者。拍摄者可随后触摸屏幕或者按压输入单元140的快门按钮，控制单元100在操作517检测到这一点，并且在操作519如图6B的670所示将图像存储在存储单元110中。可选择地，如果如图6B的660所示对象识别区域中的人被识别为正常地定位，则控制单元100可在操作517检测到这一点，并且自动地执行操作519(自动记录)。

这里，可在自动拍摄模式或手动拍摄模式下执行拍摄。如果在正常状态(即，无错误状态)下过去阈值时间(即，N秒)，则自动拍摄模式将拍摄的图像存储在存储单元110中。也就是说，如果如图6C的680所示，在操作515，对象识别区域中的所有人正常地定位，则控制单元100指示不存在错误(即，无错误状态的语音引导)，如果过去阈值时间，则控制单元100在操作517识别正常拍摄状态，并且如图6C的685所示，控制单元100在操作519存储图像。如果如图6C的680所示打开自动拍摄模式并且识别出无错误的图像，则控制单元100可利用这样的语音进行引导：将会在N秒之后拍摄照片。如果在引导具有正常构图的无错误状态时用户在到达N秒之前通过输入单元140产生拍摄命令，则控制单元100在操作517检测到这一点并且在操作519存储图像。

如果如图6D的690所示识别出错误图像，则控制单元100在操作515输出与识别出的错误类型对应的错误警告。这里，错误警告可包括语音引导信息，并且在图6D的690的情况下，控制单元100可如图4A和4B图中所示在操作515产生用于引导使照相机装置向下倾斜的错误警告。然而，如果用户在错误状态下通过输入单元140产生拍摄命令，则控制单元100在操作517检测到这一点并且在操作519将图像存储在存储单元110中，如图6D的695所示。这是为了即使在图像中产生了错误也允许用户存储图像。通过输入单元140产生的拍摄命令可以是快门按钮的输入(即，通过轻敲快门按钮)，并且如果输入单元140是触摸面板，则可通过在显示单元130的屏幕中触摸(轻敲)任何位置来产生拍摄命令。

图7是示出根据本公开的实施例的在照相机装置中拍摄肖像的过程的流程图。

也就是说，图7是示出在操作513和515拍摄肖像的过程的流程图。图8是示出通过分析在图7中拍摄的图像中的人来输出错误类型和与错误类型对应的错误警告的过程的流程图。图9A和图9B是示出由照相机装置拍摄的图像的显示示例的示图。另外，可参照图6A至图6D解释图7和图8。可按照音频、视频、振动或音频/视频的形式输出照相机装置的显示(诸如，错误警告)，并且将基于音频(即，语音引导)输出进行下面的描述。

参照图6C、图6D、图9A和图9B描述根据本公开的实施例的图7和图8的用于拍摄肖像的方法。首先，控制单元100在操作711确定在拍摄的图像中是否存在人。这里，可通过使用检测脸区域的方法来执行人的确定。如果在图像中未提取出或识别出脸区域，则控制单元100在操作711检测到这一点并且在操作731指示在图像中不存在人。例如，如果未识别出脸，则控制单元100可显示“未检测到脸”或“没人在这里”。在这种情况下，控制单元100在操作733提供风景拍摄模式，并且如果在图像中检测到人，则控制单元100执行肖像拍摄模式。在本公开的实施例中，假设：如果在图像中不包括人，则控制单元100前进至操作733并且执行一般拍摄模式。

如果在由照相机120输出的图像中识别出脸，则控制单元100在操作711检测到这一点并且在操作713显示识别出的人的数量。这里，可利用语音指示识别出的人的数量。例如，当识别脸时，控制单元100可显示“检测到N个人”或“N个人在这里”。如果识别出在图像中包括人，则控制单元100通过在操作715分析图像中所包括的人来识别是否产生了错误。这里，如果照相机装置过度倾斜(即，如果未位于水平程度)，则控制单元100可通过分析传感器160的输出来决定产生了错误。如果产生了错误，则控制单元100在操作717检测到这一点并且在操作719显示与产生的错误的类型对应的错误警告。错误类型可包括人类对象必须移动的情况和拍摄者必须移动照相机装置的情况，并且为了校正错误状态而输出的错误警告可以是语音。只要产生了错误，就继续执行以上操作。如果在产生了错误的状态下未检测到用户对拍摄的请求，则控制单元100在操作721返回到操作715并且重复以上操作。也就是说，只要用户未通过输入单元140请求拍摄(例如，通过轻敲快门按钮或者通过轻敲屏幕的任何地方来实现的手动捕捉请求)，如果从图像中所包括的人检测到错误，则控制单元100就利用语音指示错误警告。

在执行操作719之后，如果在操作717解决了问题或者未产生另一错误，则控制单元100在操作721检测到这一点，指示图像中的人按照预期或可接受的拍摄构图定位(例如，N个脸(或人)是完整的)的信息，并且在操作723将对应图像存储在存储单元110中。在操作723显示的信息可以是语音，并且可根据拍摄者对手动拍摄的请求执行操作721的拍摄。

将参照图8更详细地描述根据本公开的实施例的输出与在人拍摄中检测到的错误类型对应的错误警告的过程。图8示出图7的操作715至719的过程。

参照图8，控制单元100在操作811在拍摄的图像的对象识别区域中分析人(即，提取脸区域)。肖像拍摄中的错误可包括人位于对象识别区域之外的情况、未检测到人的脸区域的情况、人未被正确地对焦的情况和人闭着其眼睛的情况。

如果人(或脸区域)位于对象识别区域之外，则控制单元100在操作813检测到这一点，并且在操作815产生错误警告，以使得照相机的位置移动或者人移动。例如，如果人之间的距离较大，则控制单元100在操作813检测到这一点，并且在操作815产生错误警告，以使得减小人之间的距离。可利用语音警告(例如，“移动得更近”)来执行产生错误警告的方法，以使得所有人移动。另外，如果特定人之间的距离较大，则可产生语音警告以引导所述特定人移动。控制单元100可安装有脸识别引擎，并且在这种情况下，可通过将识别的脸信息与预存储的人的信息进行比较来识别当前正在拍摄的人的信息。另外，如果通过分析由传感器160输出的照相机装置的倾角，照相机装置倾斜超过阈值(即，水平程度位于范围之外)，则控制单元100产生错误警告，以使得照相机装置向左倾斜或向右倾斜。在这种情况下，可产生引导人移动的语音警告(以姓名+方向的形式)(例如，“Jane，朝着James移动”)。如果对象中的人的图像被切掉(诸如，在脸图像的上部被切掉的情况下，在脸图像的下部被切掉的情况下，在脸图像的左侧部分被切掉的情况下，在脸图像的右侧部分被切掉的情况下，以及在照相机装置在右方向或左方向上倾斜的情况下)，则控制单元100在操作813检测错误类型，并且在操作815输出错误警告(例如，“向上倾斜。”、“向下倾斜。”、“向左移动。”、“向右移动。”、“向左倾斜。”或“向右倾斜。”)并且相应地决定错误类型。

如果对象识别区域中的脸区域未被正确地识别，则控制单元100在操作817检测到这一点，并且在操作819输出错误警告以引导人移动脸。这里，在检测脸区域时的错误可包括这样的情况：因为人低下其脸，所以在人的脸区域中未识别出眼睛、鼻子和/或嘴。在这种情况下，可故意拍摄人(脸)的侧面。然而，在识别出嘴、鼻子和眼睛的情况下，可按照正常构图执行拍摄。如果未像以上情况一样正确地识别出脸区域，则控制单元100利用错误警告(例如，“未检测到脸”)引导人移动并且继续拍摄脸区域。

另外，如果当拍摄肖像时人未被对焦(例如，如果除人之外的任何其它物体被对焦)，则控制单元100在操作821检测到这一点，并且在操作823通过输出错误警告来进行引导，以使得通过朝着人移动照相机装置来正确地对焦人。如果对象识别区域中的人闭着其眼睛，则控制单元100在操作825检测到这一点，并且在操作827输出错误警告，以使得人睁开其眼睛(例如，“眼睛闭着”)。类似地，如果多个人存在于对象识别区域中并且特定人闭着其眼睛，则控制单元100识别人的脸，并且在操作827输出错误警告，以使得所述特定人睁开眼睛(例如，“Jane闭着眼睛”或“Jane，睁开眼睛”)。

如果对象识别区域中的人的数量已改变，则控制单元100在操作831检测到这一点，并且在操作833输出指示人的数量已改变的错误警告。如果产生了除以上错误之外的错误，则控制单元100检测该错误，并且在操作835根据产生的错误的类型产生错误警告。

图9A和图9B是示出在操作831处理错误和错误警告的示例的示图。也就是说，除了以上错误之外，可发生这样的情况：即使终端的位置改变或者人移动，也无法校正错误状态。例如，当在风景模式下拍摄特写肖像时，可如图9A的910所示获得人的部分切掉的图像。在这种情况下，可能希望通过如图9A的920所示改变照相机装置的显示模式(即，通过将照相机120的图像传感器的方向从水平方向改变为垂直方向)来拍摄肖像。另外，如果在肖像模式下拍摄多个人，则如图9B的930所示，最右侧或最左侧的人可被从拍摄的图像切掉，除非显示模式不改变。在这种情况下，可能希望通过如图9B的940所示将照相机装置的显示模式从肖像模式改变为风景模式(即，通过将照相机120的图像传感器的方向从垂直方向改变为水平方向)来进行拍摄。

如上所述，根据本公开的实施例的用于在照相机装置中拍摄肖像的方法在对象识别区域中识别并且提取人的脸区域，并且分析提取的(即，识别的)人的错误。如果产生了错误，则控制单元利用音频(即，语音或声音)和/或视频(颜色、图片、字符等)信息指示错误状态。这里，音频和/或视频错误警告可以是作为反馈向拍摄者解释错误情况的信息(包括用于校正错误情况的方向信息)。如上所述，错误情况可以是拍摄者基于照相机装置位于与对象相同的方向的情况或者拍摄者基于对象位于与对象相同的方向的情况。例如，当基于照相机装置产生错误警告时，如果照相机装置向右倾斜，则控制单元100可产生错误警告“使照相机向左倾斜”，并且如果对象识别区域中的脸的大小太大，则控制单元100可产生错误警告“向后退”。当基于对象产生错误警告时，如果对象识别区域中的脸的大小太小，则控制单元100可产生错误警告“更靠近照相机”，并且如果对象人的脸向右倾斜，则控制单元100可产生错误警告“使脸向左倾斜”。如上所述，错误警告可包括用于移动照相机装置的错误警告和用于移动对象的错误警告。控制单元100根据通过使用传感器信息检测的照相机装置的状态和从对象识别区域检测的人的脸区域的识别结果决定错误类型，并且根据决定的错误类型产生用于控制对象或照相机装置的错误警告。

另外，可通过振动器提供错误警告的反馈，诸如照相机装置和/或对象的方向反馈以及错误情况。

根据本公开的实施例的照相机装置在设置自动肖像模式之后启动照相机120的情况下或者在启动照相机120之后设置自动肖像模式的情况下在预览状态下执行错误算法，并且在预览模式下未检测到错误的情况下通过自动拍摄或者通过根据用户的输入拍摄来存储图像。然而，如果通过错误算法从拍摄的图像检测到错误，则控制单元100根据错误的类型将错误警告反馈给拍摄者，并且同时执行重新拍摄模式。因此，如果自动肖像模式被打开，则照相机装置根据本公开的实施例通过使用错误算法来识别在照相机装置中显示的图像，在检测到错误的情况下根据识别出的错误类型产生错误警告，将错误警告反馈给拍摄者，并且执行重新拍摄过程。然而，如果未检测到错误或者根据错误警告解决了错误，则控制单元100可存储无错误的图像或者通过传统过程拍摄的图像。

图10是示出根据本公开的实施例的在照相机装置中设置用于肖像的拍摄模式并且拍摄肖像的过程的流程图。图11是示出根据本公开的实施例的设置菜单中的菜单的示图。

参照图10，用户可在照相机的启动之前或之后根据本公开的实施例设置自动肖像模式。图11是示出在启动照相机的状态下执行设置模式的示例的示图。

如果如图11的1110所示用户在启动照相机的状态下选择设置模式(即，设置)，则控制单元100在操作1011控制显示如图11的1123所示的设置菜单。如图11的1120所示，设置菜单1123包括拍摄模式(即，摄影模式)1125的菜单，并且如果从设置菜单1123选择拍摄模式(即，摄影模式)1125，则控制单元100控制显示单元130显示包括自动肖像模式的子菜单1131。这里，如果在操作1013确定未请求设置操作，则控制单元100在操作1021执行对应功能。另一方面，如果选择自动肖像模式，则控制单元100在操作1013识别出请求了自动肖像模式的设置，并且在操作1015执行自动肖像模式的设置操作。可按照切换方法设置或禁止自动肖像模式，并且可在自动肖像模式下打开或关闭(即，开启/停止)错误警告。如果错误警告功能被打开，则可设置仅利用语音输出错误警告的模式或利用语音和视频输出错误警告的模式。另外，可在设置自动肖像模式的同时设置人识别区域和对象识别区域。可从预定义的区域选择对象识别区域，或者可由用户通过输入单元140设置对象识别区域。在本公开的实施例中，假设使用默认的预定对象识别区域。可按照表1中列出的方法执行自动肖像模式的设置。

表1

如果在设置自动肖像模式的状态下未驱动照相机，则控制单元100在操作1031根据本公开的实施例确定进入智能拍摄模式。如果未选择智能拍摄模式，则控制单元100在操作1051执行对应功能。另一方面，如果选择智能拍摄模式，则控制单元100在对象识别区域中检测人，并且在操作1033和1035显示人的数量或者在操作1037提供反馈。随后，控制单元100在操作1039确定是否发生关于对象识别区域中的人的错误，并且在操作1041根据错误类型产生错误警告。如果在预览图像中解决了错误或者未检测到另一错误，则控制单元100在操作1039检测到这一点，在操作1043指示对象识别区域中的人正常地定位，并且在操作1045和1047将由照相机120拍摄的图像存储在存储单元110中。这里，如果在阈值时间期间未检测到错误，则可自动存储图像，或者可根据用户的请求手工地存储图像。

图12是示出根据本公开的实施例的执行拍摄操作的便携式终端的结构的框图。这里，便携式终端可以是包括智能电话的移动电话、MP3终端、平板PC或具有照相机的任何数字装备。

参照图12，通信单元170执行与基站或互联网服务器的通信功能。通信单元170可被构造为具有：发射器，用于对发射信号的频率进行上转换并且用于放大功率；接收器，用于对接收信号进行低噪声放大并且对接收信号的频率进行下转换。另外，通信单元170可包括调制器和解调器。调制器通过调制发射信号来将发射信号发送给发射器，并且解调器解调通过接收器接收的信号。这里，调制器和解调器可使用各种通信标准中的任何标准，诸如LTE、WCDMA、GSM、WIFI、WIBRO、NFC或蓝牙。在本公开的实施例中，假设利用LTE、WIFI和蓝牙装置构造通信单元170。

第一照相机120是位于便携式终端的后侧的照相机，并且可拍摄高分辨率图像。第二照相机125是位于便携式终端的前侧的照相机，并且与第一照相机相比，可拍摄较低分辨率图像。在本公开的实施例中，当通过使用第一照相机120来拍摄自肖像时或者当在不看着显示单元130的情况下拍摄对象时，可设置自动肖像模式。

根据本公开的实施例，控制单元100控制便携式终端的一般操作，并且在拍摄时在自动肖像模式下控制第一照相机120和/或第二照相机125。也就是说，控制单元100在由第一照相机120或第二照相机125在自动肖像模式下拍摄的图像的对象识别区域中检测人，通过分析检测到的人来识别错误产生，并且在产生了错误的情况下输出与错误类型对应的错误警告。如果消除了错误情况并且可正常地拍摄肖像，则控制单元100控制自动地或手动地存储对应图像。

存储单元110可包括：程序存储器，被构造为存储便携式终端的操作程序和根据本公开的实施例的程序；数据存储器，被构造为存储用于便携式终端的操作的表和在执行程序时产生的数据。在本公开的实施例中，控制单元100如上所述存储与错误类型对应的错误警告，并且错误警告可被存储为音频和/或视频数据。

显示单元130在控制单元100的控制下显示正在执行的应用的信息。可利用LCD、OLED等构造显示单元130。输入单元140可被提供为电容型或电阻型，并且将用户的触摸(即，手指触摸)的位置信息输出到控制单元100。另外，输入单元140可包括电磁谐振(EMR)传感器垫，并且检测笔触摸输入以发送给控制单元100。这里，显示单元130和输入单元140可被集成为一个单元。

音频处理单元150利用语音和/或声音的音频信号输出与检测到的错误类型对应错误警告。传感器160包括用于检测便携式终端的移动的各种传感器，并且控制单元100通过分析传感器160的输出来确定终端和用户之间的距离。这里，可利用加速度传感器、地磁传感器、位置检测传感器等构造该传感器。传感器160在自动肖像模式下检测便携式终端的倾角并且输出到控制单元100。如果拍摄的图像的水平程度位于阈值之外，则控制单元100控制通过分析检测到的倾角来输出错误警告。

根据本公开的实施例的具有图12的结构的便携式终端被构造为具有用于拍摄图像的后照相机120和前照相机125。用户可通过使用前照相机125或后照相机120来拍摄自肖像。当通过使用前照相机125来拍摄图像时，可通过显示单元130识别正在拍摄的图像。然而，当通过使用后照相机120来拍摄图像时，无法识别正在拍摄的图像。因此，当通过使用后照相机120来拍摄自肖像时，如果用户如图11中所示在设置模式下设置自动肖像模式并且驱动后照相机120，则控制单元100如图2、图5和图8中所示分析正在拍摄的图像中的人并且识别是否产生了错误。如果产生了错误，则控制单元100输出与错误类型对应的错误警告(即，用于消除错误情况的信息)以引导终端和/或人类对象的移动。如果错误情况被消除，则控制单元100检测到这一点并且将由照相机120拍摄的图像存储在存储单元110中。

当通过使用后照相机120来拍摄自肖像以在具有照相机的便携式终端中获得高分辨率图像时，拍摄者可在不看着正在由照相机120拍摄的显示图像的情况下通过音频错误警告识别拍摄构图，并且由此可按照预期拍摄构图获得肖像。另外，当在不看着显示单元130的情况下拍摄对象时，拍摄者可使用其作为利用侧面可达性帮助拍摄的可达性专用照相机应用。特别地，当拍摄自肖像时，引导被提供给用户，并且由此用户可根据引导拍摄照片。因此，即使对象位于引导之外，也可通过校正错误来获得预期照片。

尽管已参照本发明的某些示例性实施例显示并描述了本发明，但本领域技术人员将会理解，在不脱离如所附权利要求及其等同物所定义的本发明的精神和范围的情况下，可以对其做出各种形式和细节上的修改。

Claims (20)

1.一种用于在具有照相机的设备中拍摄肖像的方法，所述方法包括：

响应于识别出照相机的镜头朝向拍摄者，将所述设备设置为自肖像拍摄模式；

在由照相机在自肖像拍摄模式下获得的图像中检测人；

通过识别检测到的人是否位于对象识别区域中来确定错误的发生；

如果基于错误的发生的确定，人的至少一部分位于对象识别区域之外，则产生包括方向信息的错误警告，以使得人移动到对象识别区域中；以及

如果基于错误的发生的确定，人位于对象识别区域中，则存储由照相机输出的图像，

其中，确定错误的发生的步骤包括确定对象识别区域中的人的数量改变。

2.如权利要求1所述的方法，其中，所述自肖像拍摄模式包括肖像拍摄模式，肖像拍摄模式在设置模式下输出语音作为根据错误类型设置的错误警告，并且在照相机的驱动之前或之后设置肖像拍摄模式。

3.如权利要求2所述的方法，其中，所述错误警告的产生的步骤包括：

分析关于对象识别区域中的人的错误类型；以及

通过利用与错误类型对应的语音引导错误警告来产生错误警告。

4.如权利要求3所述的方法，其中，所述错误类型包括人沿向上、向下、向左或向右的方向位于对象识别区域之外的错误类型，并且所述错误警告的产生的步骤包括：产生用于照相机装置的包括方向信息的语音错误警告以使得人位于与错误类型对应的对象识别区域中。

5.如权利要求3所述的方法，其中，所述错误类型包括人与对象识别区域相隔太远的错误类型，并且所述错误警告的产生的步骤包括：产生包括方向信息的语音错误警告以使得人减小相对于对象识别区域的距离。

6.如权利要求3所述的方法，其中，所述错误的发生的确定的步骤还包括通过传感器确定所述设备的水平程度，并且所述错误警告的产生的步骤包括：产生包括方向信息的语音错误警告以使得如果所述设备的水平程度倾斜，则照相机装置保持在水平状态。

7.如权利要求3所述的方法，其中，所述错误类型包括未在对象识别区域中检测到人的脸区域的错误类型，并且所述错误警告的产生的步骤包括：根据错误类型产生指示未检测到脸区域的语音错误警告。

8.如权利要求3所述的方法，其中，所述错误类型包括对象识别区域中的人闭着其眼睛的错误类型，并且所述错误警告的产生的步骤包括：根据错误类型产生指示人闭着其眼睛的语音错误警告。

9.如权利要求3所述的方法，其中，所述图像中的人的检测的步骤还包括：将人的数量指示为语音。

10.一种具有照相机的设备，所述设备包括：

显示单元，被构造为位于照相机的相对侧，并且显示由照相机拍摄的图像；

存储单元，被构造为存储与错误类型对应的错误警告并且存储拍摄的图像；和

控制单元，被构造为响应于识别出照相机的镜头朝向拍摄者，将所述设备设置为自肖像拍摄模式，确定人是否位于由照相机在自肖像拍摄模式下输出的图像的对象识别区域中，如果人的至少一部分不在对象识别区域中，则控制单元产生包括方向信息的错误警告，以使得人移动到对象识别区域中，并且如果人位于对象识别区域中，则控制单元存储由照相机输出的图像，

其中，控制单元还被构造为在对象识别区域中的人的数量改变的情况下确定产生错误警告。

11.如权利要求10所述的设备，其中，所述存储单元被构造为存储语音错误警告，并且控制单元被构造为在设置模式下设置从错误警告产生语音错误警告的肖像拍摄模式。

12.如权利要求11所述的设备，其中，所述控制单元被构造为确定由照相机输出的图像的对象识别区域中的人的错误类型，并且将与错误类型对应的存储在存储单元中的语音错误警告输出为语音。

13.如权利要求12所述的设备，其中，所述控制单元被构造为通过识别人沿向上、向下、向左或向右中的哪个方向位于对象识别区域之外来识别错误类型，并且产生包括方向信息的语音错误警告以使得人移动到与检测到的错误类型对应的对象识别区域中。

14.如权利要求13所述的设备，还包括：

传感器，被构造为检测所述设备的水平程度，

其中，所述控制单元被构造为通过分析传感器的输出来产生包括方向信息的语音错误警告，以使得如果所述设备的水平程度倾斜，则所述设备保持在水平状态。

15.如权利要求14所述的设备，其中，所述设备包括便携式终端，并且在自动肖像模式下设置肖像拍摄模式。

16.一种用于拍摄肖像的设备，所述设备包括：

照相机，位于所述设备的第一侧并且被构造为在拍摄模式下操作并且捕捉图像；

显示单元，位于所述设备的与第一侧相对的第二侧，并且被构造为显示由照相机拍摄的图像；

存储单元，被构造为存储与错误类型对应的错误警告并且存储由照相机捕捉的图像；和

控制单元，被构造为响应于识别出照相机的镜头朝向拍摄者，将所述设备设置为自肖像拍摄模式，当照相机在自肖像拍摄模式下操作时确定人是否位于对象识别区域中，当人不在对象识别区域中时产生错误警告，并且如果人位于对象识别区域中，则控制单元自动控制存储由照相机捕捉的图像的存储，

其中，控制单元还被构造为在对象识别区域中的人的数量改变的情况下确定产生错误警告。

17.如权利要求16所述的设备，其中，所述存储单元被构造为存储语音错误警告。

18.如权利要求17所述的设备，其中，所述控制单元被构造为确定关于对象识别区域中的人的错误类型，并且控制将与错误类型对应的存储在存储单元中的语音错误警告输出为语音。

19.如权利要求18所述的设备，其中，所述控制单元被构造为通过识别人沿向上、向下、向左或向右中的哪个方向位于对象识别区域之外来识别错误类型，并且产生包括方向信息的语音错误警告以使得人移动到与检测到的错误类型对应的对象识别区域中。

20.如权利要求19所述的设备，还包括：

传感器，被构造为检测所述设备的水平程度，

其中，所述控制单元被构造为通过分析传感器的输出来产生包括方向信息的语音错误警告，以使得所述设备保持在水平状态。