CN105611275B - 执行电子装置的多照相机捕捉控制的方法及其设备 - Google Patents

Abstract

本发明提供一种执行电子装置的多照相机捕捉控制的方法及其设备。执行电子装置的多照相机捕捉控制的方法包括：获取多个预览图像，其中，所述多个预览图像是通过使用所述电子装置的至少一个透镜模块来产生的；根据所述多个预览图像的特性，产生至少一个与距离相关的索引；以及根据所述至少一个与距离相关的索引，选择性地控制是否允许多照相机捕捉或控制是否输出警告信息。本发明提供的执行电子装置的多照相机捕捉控制的方法及其设备，可以增强电子装置的整体性能，而不会产生任何副作用。

Description

执行电子装置的多照相机捕捉控制的方法及其设备

【技术领域】

本发明是关于立体捕捉(stereo capturing)技术，特别是关于执行电子装置的多照相机捕捉控制的方法及其设备。

【背景技术】

现有的便携式电子装置，例如：现有的多功能的移动电话可用于执行立体捕捉，且因此可称作立体照相机或三维照相机。更特别地，现有的便携式电子装置可以捕捉两个图像(或两个视频剪辑(video clip))来模拟某人(例如，现有的便携式电子装置的用户)两只眼睛的立体视觉，接着，根据两个图像(或两个视频剪辑)执行现有的立体处理方法的某些操作，例如：图像重新对焦操作。然而，可能会出现某些问题，例如：副作用(side effect)。例如，关于现有的立体处理的现有应用(或现有的设计)需要捕捉对象与现有的便携式电子装置之间的工作距离符合一个特定的范围，但是却没有能力去确定何时满足此特定范围，其中，此特定范围可位于六十厘米以及两米之间。如果工作距离是在特定范围之外，则现有的立体处理的处理结果的正确性不能得到保证。

为了解决工作距离的问题，相关技术中提供了一种现有的方法。根据此现有的方法，于用户使用现有的应用之前，首先会显示消息(例如：文本串“请将捕捉对象置于六十厘米以及两米之间”)。例如，当现有的便携式电子装置运行现有的应用并显示此消息来“准备好”给客户使用，接着用户可以使用现有的便携式电子装置来捕捉图像(或视频剪辑)。之后，通常现有的便携式电子装置运行现有的应用，以根据其刚刚捕捉到的图像开始现有的立体处理，而不论工作距离是否位于现有的应用的特定范围内。其结果是，现有的立体处理的处理结果可能不正确。因此，需要一种新颖的方法来提高基础设计架构并增强用户体验。

【发明内容】

为了解决上述问题，本发明提出了一种执行电子装置的多照相机捕捉控制的方法及其设备。

根据本发明的第一方面，提供一种执行电子装置的多照相机捕捉控制的方法，所述方法包括以下步骤：获取多个预览图像，其中，所述多个预览图像是通过使用所述电子装置的至少一个透镜模块来产生的；根据所述多个预览图像的特性，产生至少一个与距离相关的索引；以及根据所述至少一个与距离相关的索引，选择性地控制是否允许多照相机捕捉或控制是否输出警告信息。

根据本发明的第二方面，提供一种执行电子装置的多照相机捕捉控制的设备，所述设备包括所述电子装置的至少一个部分，所述设备包括：控制电路，用于控制所述电子装置的操作，其中，于所述控制电路的控制下，所述电子装置获取多个预览图像，其中，所述多个预览图像是通过使用所述电子装置的至少一个透镜模块来产生；以及计算模块，用于根据所述多个预览图像的特性产生至少一个与距离相关的索引；其中，所述控制电路根据所述至少一个与距离相关的索引选择性地控制是否允许多照相机捕捉或控制是否输出警告信息。

根据本发明的第三方面，提供一种执行电子装置的多照相机捕捉控制的方法，所述方法包括以下步骤：获取特定预览图像，其中，所述特定预览图像通过使用所述电子装置的透镜模块来产生；根据所述特定预览图像的特性产生至少一个与距离相关的索引；以及根据所述至少一个与距离相关的索引，选择性地控制是否允许多照相机捕捉或控制是否输出警告信息。

本发明提供的执行电子装置的多照相机捕捉控制的方法及其设备，可以增强电子装置的整体性能，而不会产生任何副作用。

【附图说明】

图1为根据本发明实施例的执行电子装置的多照相机捕捉控制的设备的示意图。

图2为根据本发明实施例的与图1所示的设备有关的多功能的移动电话的示意图。

图3为根据本发明实施例的如图2所示的多功能的移动电话的某些透镜模块的示意图。

图4为根据本发明实施例的用于执行电子装置的多照相机捕捉控制的方法的流程图。

图5为根据本发明实施例的与图4所示的方法有关的控制方案的示意图。

图6为根据本发明另一实施例的与图4所示的方法有关的控制方案的示意图。

图7为根据本发明实施例的的与图4所示的方法有关的工作流程的示意图。

图8为根据本发明另一实施例的的与图4所示的方法有关的工作流程的示意图。

【具体实施方式】

下面的描述是实施本发明的较佳预期模式。这种描述是为了说明本发明的一般原理的目的，而不应被理解成具有限制性的意义。但是应当理解，实施例可以利用软件、硬件、固件、或其任何组合来实现。

于接下来的描述和权利要求中，遍及使用了某些术语，这些术语表示特定的组件。因为本领域的技术人员将会理解，电子设备制造商可以用不同的名字来表示一个组件。本文不是想要根据名称的不同来区分组件，而是根据功能来区分组件。于接下来的描述和权利要求中，术语“包括”是开放式的，且因此应当被解释为“包括，但不限于...”。而且，术语“耦接”是表示间接或直接的电连接。因此，如果一个装置耦接到另一装置，则该连接可以是通过直接电连接，或经由其它装置以及连接的非直接电连接。

图1为根据本发明实施例的执行电子装置的多照相机捕捉控制的设备100的示意图，其中，设备100可包括电子装置的至少一个部分(例如：一部分或全部)。例如，设备100可包括电子装置的一部分，且更特别地，可以是至少一个硬件电路，例如：电子装置中的至少一个集成电路(IC)。于另一示例中，设备100可以是整个电子装置。于又一示例中，设备100可包括一系统，此系统包括该电子装置，例如：包括该电子装置的音频/视频系统。电子装置的示例可包含，但不限于：移动电话(例如：多功能的移动电话)、平板电脑、以及个人计算机(例如：膝上计算机)。

如图1所示，设备100可包括：透镜模块50、缓冲器70、控制电路110、以及计算模块120。需要注意的是，在一些实施例中，设备100还可包括图像处理电路130。为了更好的理解，图像处理电路130如图1所示，其中，图像处理电路130的框由虚线来显示，以表示设备100中图像处理电路130的实现是可选的。控制电路110被用于控制电子装置的操作。于控制电路110的控制下，电子装置可以获得多个预览图像(preview image)，且可将多个预览图像的预览图像数据70D临时储存到缓冲器70中，其中，可以使用电子装置中的至少一个透镜模块(例如：一个或多个透镜模块)来产生多个预览图像。此外，计算模块120被用于产生一个或多个对应于多个预览图像的索引。其结果是，控制电路110可以根据前述一个或多个索引选择性地控制电子装置的某些操作。例如，控制电路110可以根据前述一个或多个索引选择性地控制是否允许多照相机捕捉。于另一示例中，控制电路110可根据前述一个或多个索引选择性地控制是否输出一通知(例如：包括警告信息)。此外，图像处理电路130可用于执行图像处理(例如：多视图图像处理，例如：立体图像处理)。

于实践中，电子装置可包括至少一个处理器(例如一个或多个处理器)及相关的硬件资源，且前述至少一个处理器可以执行(或运行)某些程序代码(例如程序指令)，且如图1所示的架构的部分元件可由前述电子装置的至少一个处理器实现。前述至少一个处理器的示例可包含，但不限于，中央处理单元(central processing unit，CPU)以及图形处理单元(graphics processing unit，GPU)。更特别地，电子装置还可包括存储模块(例如：硬盘驱动，非易失性存储器，例如：闪速存储器或动态随机存取存储器)，存储模块用于储存电子装置的信息、数据和/或程序代码，且前述至少一个处理器可根据从其内部存储或存储模块加载(或恢复)的程序代码(例如程序指令)来控制电子装置的操作。

例如，在电子装置包括CPU的情况下，控制电路110可以代表CPU运行操作系统以及某些驱动器，且计算模块120可代表CPU运行能产生一些索引的软件模块，以用于多照相机捕捉控制。以上仅为说明性的目的，并不用于限定本发明。于另一示例中，在电子装置包括CPU以及GPU的情况下，控制电路110可以代表CPU运行操作系统以及某些驱动器，且计算模块120可以代表GPU运行能产生一些索引的软件模块，以用于多照相机捕捉控制。

图2为根据本发明实施例的与图1所示的设备100有关的多功能的移动电话200的示意图，其中，多功能的移动电话200可作为上述提到的电子装置的示例。如图2所示，多功能的移动电话200可包括：显示模块210以及透镜模块220，例如：前侧照相机。显示模块210可为触敏显示模块。在一些实施例中，显示模块210可包括：液晶显示器(liquid crystaldisplay，LCD)模块(其可被简称为LCM)以及触摸面板，其中，LCD模块可用于显示多功能的移动电话200的信息，且触摸面板可用于检测用户输入(例如：用户手势输入)。以上仅为说明性的目的，并不用于限定本发明。

图3为根据本发明实施例的如图2所示的多功能的移动电话200的某些透镜模块230-1以及透镜模块230-2的示意图，其中，这些透镜模块230-1以及透镜模块230-2可以被用于执行多照相机捕捉，例如：立体捕捉。在本实施例中，用于多照相机捕捉的透镜模块的数量(例如：透镜模块230-1以及透镜模块230-2)可以等于两个。以上仅为说明性的目的，并不用于限定本发明。在一些实施例中，用于执行多照相机捕捉的透镜模块的数量是可以变化的。例如，用于执行多照相机捕捉的透镜模块的数量可以多于两个。在一些示例中，在控制电路110的控制下，设备100可以仅使用多功能的移动电话200的一个透镜模块(例如：透镜模块230-1以及透镜模块230-2中的任何一个)分别于不同的时间点来捕捉对应于不同方向(或不同位置)的图像，来仿真通过镜模块230-1以及透镜模块230-2进行的捕捉图像的操作。

图4为根据本发明实施例的用于执行电子装置的多照相机捕捉控制的方法300的流程图。图4所示的方法300可以应用于图1所示的设备100(更特别地，图2所示的多功能的移动电话200实施例)上，且可以应用于设备100的控制电路110(更特别地，前述执行程序代码的至少一个处理器)上。例如，程序代码可由具有程序指令(例如以上所提到的)的计算机程序产品来提供，以指示前述至少一个处理器来执行图3所示的方法300，其中，计算机程序产品可由储存程序指令或等效版本(例如：待安装的软件包)的非暂时性计算机可读介质(例如：软盘或CD-ROM)来实现。以上仅为说明性的目的，并不用于限定本发明。方法300将于以下做详细描述。

于步骤310中，控制电路110控制电子装置以获得多个预览图像(例如：图1所示的实施例中所提到的多个预览图像，例如：那些由预览图像数据70D表示的预览图像)，其中，多个预览图像可使用电子装置的至少一个透镜模块(例如一个或多个透镜模块)来产生，例如：图3所示的实施例中的透镜模块230-1以及透镜模块230-2。以上仅为说明性的目的，并不用于限定本发明。在一些实施例中，用于获得多个预览图像的透镜模块的数量是可变化的。例如，在控制电路110的控制下，设备100可使用多于两个透镜模块来获得多个预览图像。在一些示例中，于控制电路110的控制下，设备100可以仅使用一个透镜模块(例如：透镜模块230-1以及透镜模块230-2中的任何一个)来获得多个预览图像。

于步骤320，计算模块120根据于步骤310中所提到的多个预览图像的特性产生至少一个与距离相关的索引(distance-related index)(例如，一个或多个与距离相关的索引)。于实践中，前述至少一个与距离相关的索引可包括：距离索引、视差索引(disparityindex)、以及深度索引中的至少一个或其组合(例如：距离索引、视差索引、和/或深度索引)。例如：前述至少一个与距离相关的索引可以是距离索引、视差索引、以及深度索引中的一个。于另一示例中，前述至少一个与距离相关的索引可以是距离索引、视差索引、以及深度索引的组合，例如：距离索引、视差索引、以及深度索引中的两个或更多索引的组合。

于步骤330，根据前述至少一个与距离相关的索引，控制电路110选择性地控制是否允许多照相机捕捉，或控制是否输出如前所提到的警告信息。例如，控制电路110可以根据前述至少一个与距离相关的索引选择性地控制是否允许多照相机捕捉。于另一示例中，控制电路110可以根据前述至少一个与距离相关的索引选择性地控制是否输出警告信息。在用于获取步骤310所提到的多个预览图像的透镜模块等于两个的情况下，于步骤330所提到的多照相机捕捉可以是立体捕捉。以上仅为说明性的目的，并不用于限定本发明。

例如，电子装置中前述至少一个透镜模块可包括多个透镜模块，例如：图3所示的实施例中的透镜模块230-1以及透镜模块230-2。更特别地，电子装置可的立体照相机包括电子装置的多个透镜模块，其中，设备100可包括此立体照相机。以上仅为说明性的目的，并不用于限定本发明。根据本发明的某些实施例，前述至少一个透镜模块可包括电子装置的单个透镜模块且多个预览图像中的任何两个预览图像可以由单个透镜模块于不同的时间点分别来产生。

根据本发明的某些实施例，前述至少一个与距离相关的索引可对应于多个预览图像中的至少一个预览图像的特定区域。例如，前述至少一个预览图像的特定区域可包括前述至少一个预览图像的整个区域，且更特别地，包括前述至少一个预览图像中的每个预览图像的整个图像。以上仅为说明性的目的，并不用于限定本发明。在一些示例中，前述至少一个预览图像的特定区域可包括前述至少一个预览图像中的关注区域(region ofinterest，ROI)。ROI的示例可包含，但不限于，左侧图像以及右侧图像的一个或两个中心(例如：一组立体图像的左侧图像以及右侧图像的任何中心)、高纹理区域、显著性区域(saliency region)、人脸区域、以及用户触摸对焦区域。

根据本发明的某些实施例，当预览对象为人(例如：多个预览图像可包含人脸)时，控制电路110可对多个预览图像中的一个执行面部检测操作。例如，控制电路110可以使用面部的大小来确定前述至少一个与距离相关的索引。于另一示例中，控制电路110可以使用面部的大小以及面部的年龄(例如：该面部的人的年龄，例如：通过面部分类确定的年龄估计)来确定前述至少一个与距离相关的索引。于另一示例中，控制电路110可计算用于人脸区域(或包括人脸区域的附近区域)的前述至少一个与距离相关的索引，其中，人脸区域是从一个或多个其它输入图像中发现的，以确定前述至少一个与距离相关的索引。以上仅为说明性的目的，并不用于限定本发明。

根据本发明的某些实施例，当预览对象为人(例如：多个预览图像可包含人脸)时，控制电路110可对两个或者更多的多个预览图像执行面部检测操作。例如，控制电路110可以单独检测两个或者更多的多个预览图像中的每个预览图像。于另一示例中，控制电路110可以从多个预览图像的其它图像中发现的面部来预测面部大小和/或面部位置，以便利用面部大小(或其衍生物)和/或面部位置(或其衍生物)来作为前述至少一个与距离相关的索引，其中，前述至少一个与距离相关的索引可以被关于先前电子装置与面部之间的实际距离定义或校正。于另一示例中，控制电路110可以检测及使用两个或者更多多个预览图像中的每个预览图像的一个或多个面部，且更具体地，可以检测及使用一个或多个面部中具有最大尺寸的面部。在一些示例中，控制电路110可以使用两个或者更多个预览图像中的两个(或者更多)不同图像的两个(或者更多)的面部的面部位置和/或面部大小，来确定前述至少一个与距离相关的索引。在一些示例中，控制电路110可根据ROI(例如：人脸区域(或包含人脸区域的附近区域))计算前述至少一个与距离相关的索引以确定前述至少一个与距离相关的索引，其中，人脸区域是从两个或者更多的多个预览图像中发现的。

根据本发明的某些实施例，控制电路110可以获得特定的预览图像，其中，特定预览图像是使用电子装置的透镜模块(例如：透镜模块230-1以及透镜模块230-2的任何一个)产生的。此外，于这些实施例中，计算模块120可根据特定预览图像的特性来产生前述至少一个与距离相关的索引，而不是根据于步骤310所述的多个预览图像的特性来产生前述至少一个与距离相关的索引。此外，于这些实施例中，根据由特定预览图像的特性来产生前述至少一个与距离相关的索引，控制电路110选择性地控制是否允许多照相机捕捉或控制是否输出警告信息。例如，于这些实施例中，控制电路110可以执行特定预览图像的面部检测以确定特定预览图像中的特定面部图像，并根据至少一个特定面部图像的面部参数以及根据一组关于面部的预定参考数据，来确定至少一个与距离相关的索引中确定的与距离相关的索引，其中，确定的与距离相关的索引可对应于特定预览图像。于实践中，前述特定面部图像的至少一个面部参数可包括特定面部图像的面部大小和/或特定面部图像的面部位置。

根据本发明的某些实施例，控制电路110可以获得预览图像(例如：特定预览图像)，其中，预览图像是使用电子装置的透镜模块(例如：透镜模块230-1以及透镜模块230-2的任何一个)产生的。此外，于这些实施例中，计算模块120可以根据基于红外(infrared，IR)的距离推导来产生前述至少一个与距离相关的索引，且优选地，还根据此预览图像的特性，而不是根据步骤310所提到的多个预览图像的特性来产生前述至少一个与距离相关的索引。例如，设备100可包括至少一个用于执行IR检测的IR检测器(例如：一个或多个IR检测器)来产生多个IR检测结果，且计算模块120可以根据个IR检测结果来计算基于IR的距离推导。此外，根据于这些实施例中基于IR的距离推导产生的前述至少一个与距离相关的索引，控制电路110选择性地控制是否允许多照相机捕捉或控制是否输出警告信息。例如，控制电路110可根据此面部图像的至少一个面部参数以及根据一组关于面部的预定参考数据，对此预览图像执行面部检测，以确定此预览图像的面部图像，且确定这些实施例中至少一个与距离相关的索引的与距离相关的索引，其中，至少一个与距离相关的索引中的此与距离相关的索引可对应于此预览图像。于实践中，此面部图像的前述至少一个面部参数可包括此面部图像的面部大小和/或此面部图像的面部位置。以上仅为说明性的目的，并不用于限定本发明。根据本发明的某些实施例，计算模块120可以根据根据相位检测结果来产生前述至少一个与距离相关的索引。例如，设备100可包括至少一个用来执行相位检测的相位检测自动对焦(phase-detection autofocus，PDAF)传感器(例如：一个或多个PDAF传感器)以产生多个相位检测结果，且计算模块120可以根据多个相位检测结果产生前述至少一个与距离相关的索引。于这些实施例中的一个或多个中，前述至少一个PDAF传感器可以被集成到透镜模块50的图像传感器中。即，透镜模块50包括图像像素以及PDAF像素。

根据本发明的某些实施例，于前述至少一个与距离相关的索引包括距离索引、视差索引、以及深度索引中的至少一个或其组合(例如：距离索引、视差索引、和/或深度索引)的情况下，前述至少一个与距离相关的索引可对应于多个预览图像中的前述至少一个预览图像的特定区域。例如，根据这些实施例的一部分，于步骤320中，计算模块120可用于获取对应于视差图的特定区域的多个视差值，选择多个视差值的代表视差值，并使用代表视差值来作为视差索引。在一个实施例中，代表视差值可以是多个视差值中的最大视差值(或第n大的大视差值，其中，符号n表示一个正整数)。可选地，代表视差值可以是多个视差值的统计值。在一个实施例中，为了防止以下操作被噪声影响，计算模块120可以确定特定区域内初步合格的像素(preliminary qualified pixel)的数量是否大于一给定的阈值，其中，初步合格的像素是指具有视差值大于初步视差阈值(preliminary disparity threshold)的像素。如果特定区域内初步合格的像素的数量大于给定的阈值，计算模块120将根据对应于特定区域的所有视差值确定代表视差值。于另一示例中，于移除特定区域内所有视差值中的极端数据后，计算模块120将根据剩余的视差值确定代表视差值。

关于视差索引的至少一个比较操作的结果是，于步骤330中，控制电路110可以确定设备100是否需要允许多照相机捕捉或需要输出警告信息(例如：将警告信息显示于电子装置的屏幕上，例如：多功能的移动电话200的显示模块210，且优选的，阻止电子装置的多照相机捕捉功能被触发)。例如，当视差索引小于(或小于或等于)预定视差阈值DPTH_1时，为了防止多功能的移动电话200太过靠近于一对象，控制电路110可以控制设备100允许多照相机捕捉；否则，控制电路110可以控制设备100来输出警告信息。于另一示例中，当视差索引大于(或大于或等于)预定视差阈值DPTH_2时，为了防止多功能的移动电话200离此对象太远，控制电路110可控制设备100以允许多照相机捕捉；否则，控制电路110可以控制设备100输出警告信息。于另一示例中，当视差索引小于(或小于或等于)预定视差阈值DPTH_1且大于(或大于或等于)预定视差阈值DPTH_2(在此示例中，预定视差阈值DPTH_2可小于预定视差阈值DPTH_1)时，控制电路110可以控制设备100以允许多照相机捕捉；否则，控制电路110可以控制设备100以输出警告信息。

根据这些实施例的另一部分，于步骤320中，计算模块120可用于从深度图(depthmap)中获得对应于特定区域的多个深度值，选择多个深度值的代表深度值，且使用代表深度值作为深度索引。在一个实施例中，代表深度值可以是多个深度值中的最小深度值(或第m小的深度值，其中，符号m可表示正整数)。可选地，代表深度值可以是多个深度值中的统计值。在一个实施例中，为了防止以下操作被噪声影响，计算模块120可以确定特定区域内初步合格的像素的数量是否大于一给定的阈值，其中，初步合格的像素是指具有深度值小于初步深度阈值的像素。如果特定区域内初步合格的像素的数量大于给定的阈值，计算模块120将根据对应于特定区域内的所有深度值确定代表深度值。于另一示例中，于移除特定区域内所有深度值中的极端数据后，计算模块120将根据剩余深度值确定代表深度值。

关于深度索引的至少一个比较操作的结果是，于步骤330，控制电路110可以确定设备100是否需要允许多照相机捕捉或需要输出警告信息(例如：将警告信息显示于电子装置的屏幕上，例如：多功能的移动电话200的显示模块210，且优选的，阻止电子装置的多照相机捕捉功能被触发)。例如，为了防止多功能的移动电话200离对象太远，当深度索引小于(或小于或等于)预定深度阈值DETH_1时，控制电路110可以控制设备100允许多照相机捕捉；否则，控制电路110可以控制设备100输出警告信息。于另一示例中，为了防止多功能的移动电话200太过靠近于此对象，当深度索引大于(或大于或等于)预定深度阈值DETH_2时，控制电路110可以控制设备100允许多照相机捕捉；否则，控制电路110可以控制设备100输出警告信息。于另一示例中，当深度索引小于(或小于或等于)预定深度阈值DETH_1且大于(或大于或等于)预定深度阈值DETH_2(在此示例中，预定深度阈值DETH_2可小于预定深度阈值DETH_1)时，控制电路110可以控制设备100允许多照相机捕捉；否则，控制电路110可控制设备100输出警告信息。

根据本发明的某些实施例，于步骤320，计算模块120可对多个预览图像执行面部检测以产生前述至少一个与距离相关的索引。例如，于步骤320中，计算模块120可对多个预览图像中的特定预览图像执行面部检测以确定此特定预览图像的特定面部图像，且还可根据特定面部图像的至少一个面部参数确定前述至少一个与距离相关的索引中的特定的与距离相关的索引，其中，特定的与距离相关的索引可对应于此特定预览图像，且特定面部图像的前述至少一个面部参数可包括特定面部图像的面部大小和/或特定面部图像的面部位置。

根据本发明的某些实施例，于步骤330中，当其检测的前述至少一个与距离相关的索引中的特定的与距离相关的索引位于一预定范围内时，控制电路110可以输出一个通知(例如，语音通知或视觉通知)，其指示电子装置的多照相机捕捉功能允许被触发，其中，多照相机捕捉功能可用于通过电子装置的多个照相机捕捉多个图像，例如：通过图3所示的实施例中的透镜模块230-1以及透镜模块230-2捕捉多个图像。以上仅为说明性的目的，并不用于限定本发明。根据本发明的某些实施例，于步骤330中，当检测到的前述至少一个与距离相关的索引中的特定的与距离相关的索引位于预定范围内时，控制电路110可以允许触发电子装置的多照相机捕捉功能，且可以执行多照相机捕捉功能以响应用户输入来捕捉多个图像。更特别地，于执行多照相机捕捉功能以响应用户输入来捕捉多个图像后，控制电路110还可根据多个图像来执行多视图图像处理。

于多视图图像处理过程中，例如，图像处理电路130可执行一个或多个重新对焦操作，以便模拟捕捉图像的一个或多个更好的对焦结果。以上仅为说明性的目的，并不用于限定本发明。于另一示例中，于多视图图像处理过程中，图像处理电路130可执行一个或多个基于立体的分割操作(stereo-based segmentation operation)，以分别为前景(foreground)及背景提供不同的颜色(或不同的特殊效果)。于另一示例中，于多视图图像处理中，图像处理电路130可以执行一个或多个基于立体的分割操作，以保持前景对象并替换背景。于另一示例中，于多视图图像处理过程中，图像处理电路130可执行一个或多个基于立体的分割操作，以便保持前景对象并为背景提供至少一个特殊效果(例如一个或多个特殊效果)，其中，前述至少一个特殊效果的示例可包含但不限于，转换一个或多个灰阶图像(gray level image)，模糊(blurring)，转换一个或多个油画图像。于另一示例中，于多视图图像处理过程中，图像处理电路130可执行一个或多个基于立体的分割操作，通过改变关于背景的前景对象的相应位置来产生分别对应不同视图方向的一系列伪3D图像。其结果是，图像处理电路130允许用户逐个观看分别对应于不同视图方向的一系列伪3D图像，就仿佛他/她于现实空间中看到的前景对象。

根据本发明的某些实施例，于步骤330中，当检测到前述至少一个与距离相关的索引中的特定的与距离相关的索引位于预定范围内，控制电路110可以允许触发电子装置的多照相机捕捉功能；否则，控制电路110可以禁止电子装置的多照相机捕捉功能被触发。以上仅为说明性的目的，并不用于限定本发明。根据本发明的某些实施例，于步骤330，当检测到前述至少一个与距离相关的索引中的每一个都不在预定范围内，控制电路110可锁定(lock)用于触发电子装置的多照相机捕捉功能的至少一个用户接口(user interface，UI)。更特别地，前述至少一个UI可包括电子装置的至少一个物理按钮和/或电子装置的触敏显示模块上的至少一个虚拟按钮(例如：图2所示的实施例中提到的触敏显示模块)。根据本发明的某些实施例，于步骤330中，当检测到前述至少一个与距离相关的索引中的每一个都不在预定范围内，控制电路110可输出警告信息。根据本发明的某些实施例，于步骤330，当检测到前述至少一个与距离相关的索引中的特定的与距离相关的索引位于预定范围内，控制电路110可以自动地执行多照相机捕捉功能以捕捉多个图像。

图5为根据本发明实施例的与图4所示的方法300有关的控制方案的示意图。例如，于场景500S中，多功能的移动电话200的用户前面，有一个人正在办公室努力工作。根据本实施例，于步骤330，当检测到前述至少一个与距离相关的索引中的特定的与距离相关的索引位于预定范围内，控制电路110可以允许触发电子装置的多照相机捕捉功能；否则，控制电路110可以禁止电子装置的多照相机捕捉功能被触发。

于控制电路110的控制下，设备100可检测前述至少一个与距离相关的索引(例如：距离索引、视差索引、和/或深度索引)，并当前述至少一个与距离相关的索引指示多功能的移动电话200以及场景500S中人之间的距离不在合适范围时，显示通知514，例如：文本串“太远了！请靠近目标”，其中，通知514可以作为步骤330中提到的警告信息的示例。此外，因为前述至少一个与距离相关的索引指示多功能的移动电话200以及场景500S中人之间的距离不在合适范围时，控制电路110可以禁用本实施例中的UI的捕捉按钮，例如：图5所示的显示模块210的虚拟按钮512(更特别地，电子装置的触敏显示模块)。于实践中，于控制电路110的控制下，设备100可用预定的颜色来系显示虚拟按钮512，以指示虚拟按钮512被禁用。为了简要，本实施例中类似的描述的细节不会在此处重复。

图6为根据本发明另一实施例的与图4所示的方法300有关的控制方案的示意图。例如，于场景500S中，多功能的移动电话200的用户前面，与图5所示的实施例中相同的人仍然在办公室努力工作，其中，用户可能移动得更靠近场景500S中的人。根据本实施例，于步骤330，当检测到前述至少一个与距离相关的索引中的特定的与距离相关的索引位于预定范围内，控制电路110可以允许触发电子装置的多照相机捕捉功能；否则，控制电路110可以禁止电子装置的多照相机捕捉功能被触发。

于控制电路110的控制下，设备100可以检测前述至少一个与距离相关的索引(例如：距离索引、视差索引、和/或深度索引)，且当前述至少一个与距离相关的索引指示多功能的移动电话200以及场景500S中人之间的距离在一个合适的范围内时，移除通知514，例如：图5中所示的文本串“太远了！请靠近目标”。以上仅为说明性的目的，并不用于限定本发明。根据本发明的某些实施例，当前述至少一个与距离相关的索引指示多功能的移动电话200以及场景500S中人之间的距离在合适的范围时，控制电路110可以使用确认信息(例如：文本串“没问题”(未示出)等)来代替步骤330中提到的警告信息(例如：图5所示的通知514)。

此外，因为前述至少一个与距离相关的索引指示多功能的移动电话200以及场景500S中人之间的距离在一个合适的范围，控制电路110可以启用前述图5所示的实施例中的UI的捕捉按钮，例如：图6所示的显示模块210上的虚拟按钮612(更特别地，电子装置的触敏显示模块)，且可以用另一预定颜色来显示虚拟按钮612，以指示虚拟按钮612是可用的。为了简要，本实施例中类似的描述的细节不会在此处重复。

图7为根据本发明实施例的与图4所示的方法300有关的工作流程700的示意图。

于步骤710中，控制电路110控制电子装置捕捉多个预览图像，例如：步骤310所提到的多个预览图像。例如，多个预览图像可以是由图4所示的实施例中提到的立体照相机获得的立体图像。以上仅为说明性的目的，并不用于限定本发明。根据本发明的某些实施例，多个预览图像可以是由多个相机获得的多个图像，多个相机可以作为图4所示的实施例中提到的多个透镜模块的示例，其中，前述立体照相机的元件不一定是要用多个透镜模块。根据本发明的某些实施例，多个预览图像可以是由单个照相机(其可被作为前述单个透镜模块的示例)在不同时间点获得的两个或者更多图像。于实践中，两个或者更多图像可分别对应于此单个照相机的不同的照相机位置，其中，用户需要移动照相机来捕捉两个或者更多图像。此外，两个或者更多图像可分别对应于不同的照相机设置，例如：不同的3A(例如：自动白平衡、自动对焦、自动曝光)设置。更特别地，设备100可以通过使用此单个照相机的不同对焦控制参数控制此单个照相机来分别捕捉两个或者更多图像。根据本发明的某些实施例，因为设备100可以于自动对焦过程中控制此单个照相机以捕捉多个图像，控制电路110可以确定这些图像的哪一个对应于最佳对焦结果(例如：确定这些图像中最清晰的图像)，且因此能够确定对应于此图像的对焦控制参数(例如：用于捕捉最清晰的图像的对焦控制参数)。其结果是，控制电路110可以根据一个公式和/或查找表确定对象的估计距离(即，对象与此单个照相机之间的估计距离)，其中，此公式和/或此查找表指示对焦控制参数以及对象的估计距离之间的预定关系。

于步骤720中，控制电路110使用计算模块120来确定与距离相关的索引，例如：前述于步骤320中所提到的至少一个与距离相关的索引中的特定的与距离相关的索引，其中，此与距离相关的索引可对应于刚从步骤710中获得的多个预览图像的预览对象的距离。例如，计算模块120可根据刚从步骤710中获得的多个预览图像的特性产生此与距离相关的索引。

于步骤730中，控制电路110检查与距离相关的索引(更特别地，刚于步骤720中所确定的与距离相关的索引)是否在一个预定的范围内，例如，图4所示的实施例以及图5所示的实施例之间所描述的一些实施例中提到的。当检测到与距离相关的索引在预定范围内，则进入步骤750；否则，进入步骤740。

于步骤740，控制电路110控制电子装置显示一个通知。例如，步骤740中所提到的通知可以相同于图5所示的实施例中的通知514。于实践中，当进入步骤740或重新进入步骤740时，控制电路110可以禁用(或保持禁用)捕捉按钮。于步骤740的操作被执行后，重新进入步骤710。

需要注意的是，在本实施例中，步骤740中所提到的通知可以相同于图5所示的实施例中的通知514。以上仅为说明性的目的，并不用于限定本发明。根据本发明的某些实施例，步骤740所提到的通知的实现可能会不同。此通知的示例可包含但不限于：文本串、图形、图标、音频提示。

于步骤750，控制电路110检查用户是否触发了电子装置的捕捉按钮，例如：图6所示的显示模块210的虚拟按钮612(更特别地，电子装置的触敏显示模块)。于实践中，当进入或重新进入步骤750时，控制电路110可以启用(或保持启用)捕捉按钮。当检测到用户触发捕捉按钮时，进入步骤760；否则，重新进入步骤710。

于步骤760，根据用户的触发，控制电路110控制电子装置来捕捉多个输入图像，其不同于本实施例的步骤710所提到的多个预览图像。例如，用户可以通过触摸(或按下)捕捉按钮来触发前述多照相机捕捉功能。其结果是，控制电路110可以控制电子装置立即捕捉多个输入图像。

于步骤770，图像处理电路130根据通过使用上述多照相机捕捉功能捕捉的多个图像(例如，于步骤760中捕捉的多个输入图像)执行图像处理(例如：图4所示的实施例以及图5所示的实施例之间所描述的一些实施例中提到的多视图图像处理)。以上仅为说明性的目的，并不用于限定本发明。根据本发明的某些实施例，步骤760的操作可被跳过(或省略)。更特别地，于这些实施例中，于步骤770提到的图像处理过程中，在控制电路110的控制下，设备100可以使用步骤710中捕捉的多个预览图像。

于步骤770提到的图像处理过程中，图像处理电路130可根据于步骤760中捕捉的多个输入图像来计算视差值或深度值，且根据所计算的视差值或所计算的深度值来执行各种应用。例如，图像处理电路130可以执行图像重新对焦操作。于另一示例中，图像处理电路130可以根据所计算的视差值或所计算的深度值执行3D建模操作(3D shapingoperation)，以便构建3D模型。

需要注意的是，在图7示出的实施例中，当进入或重新进入步骤750时，控制电路110可以启用(或保持启用)捕捉按钮，且因此可以允许用户通过触摸(或按下)捕捉按钮来触发前述多照相机捕捉功能。以上仅为说明性的目的，并不用于限定本发明。根据本发明的某些实施例(例如：图8所示的实施例)，多照相机捕捉功能的触发实现可能会变化。例如，检查用户是否触发捕捉按钮的操作可能会由自动操作来替代。

图8为根据本发明另一实施例的与图4所示的方法300有关的工作流程800的示意图。需要注意的是，在本实施例中，图7所示的工作流程700的步骤750可以被跳过(或省略)。更特别地，于图8所示的工作流程800中，于步骤730，当检测到与距离相关的索引在预定范围内，则进入步骤760；否则，进入步骤740。其结果是，于控制电路110的控制下，步骤760的操作可以自动地执行，而不需要通过用户输入被触发。为了简要，本实施例中类似的描述的细节不会在此处重复。

关于上述距离索引、视差索引、以及深度索引的一些实现细节将于接下来做进一步的描述。根据本发明的某些实施例，于控制电路110的控制下，设备100可以检测真实空间的场景(例如：场景500S)中的对象以及电子装置之间的距离DIST，并使用距离DIST作为距离索引。以上仅为说明性的目的，并不用于限定本发明。根据本发明的某些实施例，于控制电路110的控制下，设备100可以使用距离DIST的衍生(derivative)作为距离索引。

根据本发明的某些实施例，于控制电路110的控制下，设备100可以使用深度Z作为深度索引，其中，深度Z可以从深度图像(其可以作为上述深度图的示例)中获取，例如：深度图像是表示帧中所有像素的深度的图像。于实践中，例如，像素的深度可被量化为8比特，且量化结果可以储存于用于所有像素的深度图像中。以上仅为说明性的目的，并不用于限定本发明。根据本发明的某些实施例，每个量化结果的比特数量是可以变化的。根据本发明的某些实施例，于控制电路110的控制下，设备100可以使用深度Z的衍生作为深度索引。

根据本发明的某些实施例，于控制电路110的控制下，设备100可以使用视差DISP作为视差索引，其中，视差DISP可以从视差图像(其可以作为上述视差图的示例)中获取，例如，视差图像可以为储存帧中所有像素的视差值的图像。以上仅为说明性的目的，并不用于限定本发明。根据本发明的某些实施例，于控制电路110的控制下，设备100可使用视差DISP的衍生作为视差索引。

关于视差DISP以及深度Z，计算模块120可以根据视差DISP以及深度Z之间的预定关系来执行转换操作，以从其它的视差DISP以及深度Z中获得一个视差DISP以及深度Z。例如，计算模块120可以根据以下的等式：

DISP＝((B*f)/Z)

从深度Z获得视差DISP；其中，符号f表示分别位于基准线的两个端点O以及O’的两个相机中的每个的焦距，且符号B表示两个相机之间的距离。例如，在电子装置的两个透镜模块具有相同焦距的情况下，两个相机可以是这两个透镜模块。此外，焦距f可以是已知的固定值，且距离B也可以是已知的。

根据某些实施例，在预览过程中，设备100可以执行距离检测，且更特别地，可以检测多功能的移动电话200与目标之间的距离，且可以实时地通知用户检查结果，以允许用户调整目标以及多功能的移动电话200之间的距离，以获取更好的捕捉结果。

本发明虽以较佳实施例揭露如上，然其并非用以限定本发明的范围，任何本领域技术人员，在不脱离本发明的精神和范围内，当可做些许的更动与润饰，因此本发明的保护范围当视权利要求所界定者为准。

Claims (18)

1.一种执行电子装置的多照相机捕捉控制的方法，其特征在于，所述方法包括以下步骤：

获取多个预览图像，其中，所述多个预览图像是通过使用所述电子装置的至少一个透镜模块来产生的；

利用一个相位检测自动对焦传感器对所述多个预览图像执行相位检测，并产生多个相位预测结果；

根据所述多个相位预测结果，产生至少一个与距离相关的索引；以及

根据所述至少一个与距离相关的索引，选择性地控制是否触发多照相机捕捉功能，其中，当所述至少一个与距离相关的索引中的特定的与距离相关的索引在预定范围内时，允许触发所述电子装置的多照相机捕捉功能；否则，禁止触发所述电子装置的所述多照相机捕捉功能。

2.如权利要求1所述的执行电子装置的多照相机捕捉控制的方法，其特征在于，所述至少一个透镜模块包括：所述电子装置的多个透镜模块。

3.如权利要求2所述的执行电子装置的多照相机捕捉控制的方法，其特征在于，所述电子装置的立体照相机包括：所述电子装置的所述多个透镜模块。

4.如权利要求1所述的执行电子装置的多照相机捕捉控制的方法，其特征在于，所述至少一个透镜模块包括：所述电子装置的单个透镜模块；以及所述多个预览图像中的任何两个预览图像是通过在不同时间点分别使用所述单个透镜模块来产生。

5.如权利要求1所述的执行电子装置的多照相机捕捉控制的方法，其特征在于，所述至少一个与距离相关的索引对应于所述多个预览图像中至少一个预览图像的特定区域。

6.如权利要求5所述的执行电子装置的多照相机捕捉控制的方法，其特征在于，所述至少一个预览图像的所述特定区域包括：所述至少一个预览图像的整个区域。

7.如权利要求1所述的执行电子装置的多照相机捕捉控制的方法，其特征在于，所述至少一个与距离相关的索引包括：距离索引、视差索引、以及深度索引中的至少一个，或距离索引、视差索引、以及深度索引中任意两个的组合，或距离索引、视差索引、以及深度索引的组合。

8.如权利要求1所述的执行电子装置的多照相机捕捉控制的方法，其特征在于，所述方法还包括对所述多个预览图像中的特定预览图像执行面部检测，以确定所述特定预览图像的特定面部图像；以及

利用所述相位检测自动对焦传感器对所述特定面部图像执行相位检测。

9.如权利要求1所述的执行电子装置的多照相机捕捉控制的方法，其特征在于，所述选择性地控制是否允许多照相机捕捉的步骤还包括：

当检测到所述至少一个与距离相关的索引中的特定的与距离相关的索引在预定范围内时，输出一通知，其中，所述通知指示允许所述电子装置的多照相机捕捉功能被触发。

10.如权利要求1所述的执行电子装置的多照相机捕捉控制的方法，其特征在于，所述选择性地控制是否允许多照相机捕捉的步骤还包括：

当检测到所述至少一个与距离相关的索引中的特定的与距离相关的索引在预定范围内时，允许触发所述电子装置的多照相机捕捉功能，且执行所述多照相机捕捉功能以捕捉多个图像来响应用户输入。

11.如权利要求10所述的执行电子装置的多照相机捕捉控制的方法，其特征在于，还包括：

于执行所述多照相机捕捉功能以捕捉所述多个图像来响应于所述用户输入之后，根据所述多个图像执行多视图图像处理。

12.如权利要求1所述的执行电子装置的多照相机捕捉控制的方法，其特征在于，所述选择性地控制是否允许多照相机捕捉的步骤还包括：

当检测到所述至少一个与距离相关的索引中的每一个都不在预定范围内时，锁定用于触发所述电子装置的多照相机捕捉功能的至少一个用户接口，其中，所述至少一个用户接口包括：所述电子装置的至少一个物理按钮、所述电子装置的触敏显示模块的至少一个虚拟按钮、或所述电子装置的至少一个物理按钮以及所述电子装置的触敏显示模块的至少一个虚拟按钮。

13.如权利要求1所述的执行电子装置的多照相机捕捉控制的方法，其特征在于，所述选择性地控制是否允许多照相机捕捉的步骤还包括：

当检测到所述至少一个与距离相关的索引中的每一个都不在预定范围内时，输出警告信息。

14.如权利要求1所述的执行电子装置的多照相机捕捉控制的方法，其特征在于，所述选择性地控制是否允许多照相机捕捉的步骤还包括：

当检测到所述至少一个与距离相关的索引中的特定的与距离相关的索引在预定范围内时，自动地执行多照相机捕捉功能以捕捉多个图像。

15.一种执行电子装置的多照相机捕捉控制的设备，所述设备包括所述电子装置的至少一个部分，其特征在于，所述设备包括：

控制电路，用于控制所述电子装置的操作，其中，于所述控制电路的控制下，所述电子装置获取多个预览图像，其中，所述多个预览图像是通过使用所述电子装置的至少一个透镜模块来产生；

相位检测自动对焦传感器，对所述预览图像执行相位检测，并产生多个相位预测结果；以及

计算模块，用于根据所述多个相位预测结果产生至少一个与距离相关的索引；

其中，所述控制电路根据所述至少一个与距离相关的索引选择性地控制是否触发多照相机捕捉功能，其中，当所述至少一个与距离相关的索引中的特定的与距离相关的索引在预定范围内时，允许触发所述电子装置的多照相机捕捉功能；否则，禁止触发所述电子装置的所述多照相机捕捉功能。

16.如权利要求15所述执行电子装置的多照相机捕捉控制的设备，其特征在于，所述至少一个与距离相关的索引包括：距离索引、视差索引、以及深度索引中的至少一个，或距离索引、视差索引、以及深度索引中任意两个的组合，或距离索引、视差索引、以及深度索引的组合。

17.一种执行电子装置的多照相机捕捉控制的方法，其特征在于，所述方法包括以下步骤：

获取特定预览图像，其中，所述特定预览图像通过使用所述电子装置的透镜模块来产生；

利用一个相位检测自动对焦传感器对所述特定预览图像执行相位检测，并产生多个相位预测结果；

根据所述多个相位预测结果产生至少一个与距离相关的索引；以及

根据所述至少一个与距离相关的索引，选择性地控制是否触发多照相机捕捉功能，其中，当所述至少一个与距离相关的索引中的特定的与距离相关的索引在预定范围内时，允许触发所述电子装置的多照相机捕捉功能；否则，禁止触发所述电子装置的所述多照相机捕捉功能。

18.如权利要求17所述的执行电子装置的多照相机捕捉控制的方法，其特征在于，所述方法还包括：

对所述特定预览图像执行面部检测以确定所述特定预览图像中的特定面部图像；以及

利用所述相位检测自动对焦传感器对所述特定面部图像执行相位检测。