CN106941588B - 一种数据处理方法及电子设备 - Google Patents

Abstract

本申请公开一种数据处理方法及电子设备，所述电子设备包括具有深度摄像头及非深度摄像头的相机模组，所述方法包括：获得电子设备当前的环境光线信息；判断所述环境光线信息表示的环境光强度是否满足预定条件，得到第一判断结果；基于所述第一判断结果，控制相机模组进行图像采集；若所述第一判断结果表示满足所述预定条件，则以所述深度摄像头获得的深度图像为准进行图像处理。本申请方案，由于在电子设备的环境光线信息满足预定条件时，具体以深度摄像头获得的深度图像为准进行图像处理，从而不再需要使用非深度摄像头进行图像采集，相应地可以关闭或禁止开启非深度摄像头，而非深度摄像头的关闭或禁止开启会带来节省电子设备功耗的效果。

Description

一种数据处理方法及电子设备

技术领域

本发明属于机器视觉领域，尤其涉及一种数据处理方法及电子设备。

背景技术

目前，AR(Augmented Reality，增强现实)智能眼镜最基本的应用就是通过机器视觉(CV，computer vision)和相关CV算法将虚假物体叠加到现实视觉之中，鉴于此，相机设备已成为AR智能眼镜上必需且经常使用的外设之一。随着AR智能眼镜技术的不断提高，许多新的技术也不断融入其中，例如在AR智能眼镜中加入深度摄像头和鱼眼摄像头以配合传统的RGB(Red-Green-Blue，红绿蓝)摄像头进行使用等，这为AR智能眼镜扩展了诸如手势交互，SLAM(并发建图与定位，simultaneous localization and mapping)等新的应用场景，丰富了AR智能眼镜的应用。

然而，随着AR智能眼镜上相机设备的不断增加和频繁使用，AR智能眼镜的功耗开销相应增大，因此，如何更加合理有效的使用AR智能眼镜的相机设备以节省功耗，成为对AR智能眼镜很有意义的问题。

发明内容

有鉴于此，本发明的目的在于提供一种数据处理方法及电子设备，旨在更加合理有效的使用AR智能眼镜的相机设备，以降低AR智能眼镜的功耗。

为此，本发明公开如下技术方案：

一种数据处理方法，应用于电子设备，所述电子设备至少包括相机模组，所述相机模组包括深度摄像头及非深度摄像头；所述方法包括：

获得所述电子设备当前的环境光线信息；

判断所述环境光线信息表示的环境光强度是否满足预定条件，得到第一判断结果；

基于所述第一判断结果，控制所述相机模组进行图像采集；

若所述第一判断结果表示满足所述预定条件，则以所述深度摄像头获得的深度图像为准进行图像处理。

上述方法，优选的，所述判断所述环境光线信息表示的环境光强度是否满足预定条件，得到第一判断结果，包括：

判断所述环境光线信息表示的环境光强度是否达到第一阈值且未达到第二阈值，得到第一判断结果；所述第一阈值小于所述第二阈值。

上述方法，优选的，所述基于所述第一判断结果，控制所述相机模组进行图像采集，包括：

若所述第一判断结果表示所述环境光强度达到所述第一阈值且未达到所述第二阈值，则开启或不关闭所述相机模组中的深度摄像头，控制所述深度摄像头进行深度图像采集，并禁止开启或关闭所述非深度摄像头。

上述方法，优选的，所述基于所述第一判断结果，控制所述相机模组进行图像采集，包括：

若所述第一判断结果表示所述环境光强度达到所述第二阈值，则开启或不关闭所述相机模组中的深度摄像头及非深度摄像头，并控制所述深度摄像头进行深度图像采集，控制所述非深度摄像头进行非深度图像采集。

上述方法，优选的，还包括：

在开启并使用所述相机模组的过程中，基于所述相机模组所采集图像的特征点个数，调整所述第一阈值或所述第二阈值。

一种电子设备，包括：

相机模组，所述相机模组包括深度摄像头及非深度摄像头；

处理器，用于获得所述电子设备当前的环境光线信息；判断所述环境光线信息表示的环境光强度是否满足预定条件，得到第一判断结果；基于所述第一判断结果，控制所述相机模组进行图像采集；并在所述第一判断结果表示满足所述预定条件时，以所述深度摄像头获得的深度图像为准进行图像处理。

上述电子设备，优选的，所述处理器判断所述环境光线信息表示的环境光强度是否满足预定条件，得到第一判断结果，进一步包括：

所述处理器判断所述环境光线信息表示的环境光强度是否达到第一阈值且未达到第二阈值，得到第一判断结果；所述第一阈值小于所述第二阈值。

上述电子设备，优选的，所述处理器基于所述第一判断结果，控制所述相机模组进行图像采集，进一步包括：

若所述第一判断结果表示所述环境光强度达到所述第一阈值且未达到所述第二阈值，则所述处理器控制开启或不关闭所述相机模组中的深度摄像头，控制所述深度摄像头进行深度图像采集，并控制禁止开启或关闭所述非深度摄像头。

上述电子设备，优选的，所述述处理器基于所述第一判断结果，控制所述相机模组进行图像采集，进一步包括：

若所述第一判断结果表示所述环境光强度达到所述第二阈值，则所述处理器控制开启或不关闭所述相机模组中的深度摄像头及非深度摄像头，并控制所述深度摄像头进行深度图像采集，控制所述非深度摄像头进行非深度图像采集。

上述电子设备，优选的，所述处理器，还用于：

在开启并使用所述相机模组的过程中，基于所述相机模组所采集图像的特征点个数，调整所述第一阈值或所述第二阈值。

由以上方案可知，本申请提供的一种数据处理方法，可应用于包括相机模组的电子设备，所述相机模组包括深度摄像头及非深度摄像头，所述方法包括：获得电子设备当前的环境光线信息；判断所述环境光线信息表示的环境光强度是否满足预定条件，得到第一判断结果；基于所述第一判断结果，控制相机模组进行图像采集；若所述第一判断结果表示满足所述预定条件，则以所述深度摄像头获得的深度图像为准进行图像处理。本申请方案，由于在电子设备的环境光线信息满足预定条件时，具体以深度摄像头获得的深度图像为准进行图像处理，从而不再需要使用非深度摄像头进行图像采集，相应地可以关闭或禁止开启非深度摄像头，而非深度摄像头的关闭或禁止开启会带来节省电子设备功耗的效果。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1是本发明实施例一提供的数据处理方法的流程示意图；

图2是本发明实施例二提供的数据处理方法的流程示意图；

图3是本发明实施例三提供的数据处理方法的流程示意图；

图4是本发明实施例四提供的数据处理方法的流程示意图；

图5是本发明实施例五提供的数据处理方法的流程示意图；

图6是本发明实施例六提供的数据处理方法的流程示意图；

图7-图8是本发明实施例七提供的电子设备的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

实施例一

本申请实施例一提供一种数据处理方法，所述方法可应用于至少包括一相机模组的电子设备，所述相机模组包括深度摄像头及非深度摄像头。所述电子设备可以是但不局限于AR智能眼镜、AR智能头盔等设备，所述非深度摄像头可以包括但不局限于RGB摄像头、鱼眼摄像头等非深度相机设备。本申请的数据处理方法旨在更加合理、有效地使用所述电子设备的相机模组，以降低所述电子设备使用所述相机模组时的功耗。

参考图1示出的一种数据处理方法的流程图，所述方法可以包括以下步骤：

步骤101、获得所述电子设备当前的环境光线信息。

其中，电子设备当前的环境光线信息具体可利用光线传感器采集获得，也可通过对所述相机模组中包括的RGB摄像头所捕获的图像进行亮度信息计算得到。

实际应用中，可仅采用光线传感器方式，采集获得电子设备的环境光线信息；也可以依据所述相机模组的实际工作情况，结合使用所述光线传感器及所述RGB摄像头进行环境光线信息的获取，例如，当相机模组中的所述RGB摄像头处于工作状态时，通过对所述RGB摄像头所采集的图像进行相应的亮度信息计算，得到电子设备的环境光线信息，而当所述RGB摄像头处于非工作状态时，则启用所述光线传感器采集所述电子设备的环境光线信息。

且实际应用中，优选的，可将所述光线传感器设置于所述相机模组在所述电子设备的安装位置附近的一预定区域，以尽量保证所述光线传感器采集的环境光线信息，与所述相机模组所采集的图像对应的亮度信息相一致。

步骤102、判断所述环境光线信息表示的环境光强度是否满足预定条件，得到第一判断结果。

所述预定条件可以是表示所述环境光强度为暗光的相应条件，即表示所述电子设备处于暗光环境的相应条件。

步骤103、基于所述第一判断结果，控制所述相机模组进行图像采集。

本步骤具体依据所述电子设备当前所处环境的环境光强度，来控制相机模组中的相应摄像头进行图像采集，例如，在相应光强度条件下，仅控制相机模组中的某一个摄像头进行图像采集，而其他摄像头则关闭或禁止开启等，这与现有技术中一旦相机模组开启后，其包括的各个摄像头均处于工作状态存在区别。

步骤104、若所述第一判断结果表示满足所述预定条件，则以所述深度摄像头获得的深度图像为准进行图像处理。

由于深度摄像头相比于非深度摄像头如所述RGB摄像头而言，其对环境光线的依赖性较弱，也就是说，在RGB摄像头无法进行正常的RGB图像采集的暗光条件下，深度摄像头仍然可能能够进行正常的非深度图像采集。

基于此，本步骤中，当所述第一判断结果表示电子设备处于暗光环境中时，由于所述非深度摄像头如所述RGB摄像头，无法进行正常的非深度图像采集，从而可仅以所述深度摄像头获得的深度图像为准进行图像处理，而所述非深度摄像头由于并未使用，从而可将其关闭或禁止开启。

由以上方案可知，本申请提供的一种数据处理方法，可应用于包括相机模组的电子设备，所述相机模组包括深度摄像头及非深度摄像头，所述方法包括：获得电子设备当前的环境光线信息；判断所述环境光线信息表示的环境光强度是否满足预定条件，得到第一判断结果；基于所述第一判断结果，控制相机模组进行图像采集；若所述第一判断结果表示满足所述预定条件，则以所述深度摄像头获得的深度图像为准进行图像处理。本申请方案，由于在电子设备的环境光线信息满足预定条件时，具体以深度摄像头获得的深度图像为准进行图像处理，从而不再需要使用非深度摄像头进行图像采集，相应地可以关闭或禁止开启非深度摄像头，而非深度摄像头的关闭或禁止开启会带来节省电子设备功耗的效果。

实施例二

本实施例二中，参考图2示出的数据处理方法流程图，所述步骤102具体可以通过以下处理过程实现：

步骤1021、判断所述环境光线信息表示的环境光强度是否达到第一阈值且未达到第二阈值，得到第一判断结果；所述第一阈值小于所述第二阈值。

其中，所述第一阈值及所述第二阈值，用于界定电子设备所处环境对应的光强度类型，进而确定电子设备所处的光照环境，本实施例中，所述电子设备所处环境对应的光强度类型包括极暗光、暗光及非暗光三种类型，相对应地，电子设备所处的光照环境包括极暗光环境、暗光环境及非暗光环境。

具体地，当所述电子设备的环境光线信息表示的环境光强度介于所述第一阈值与所述第二阈值之间，即达到所述第一阈值且未达到所述第二阈值时，则表示所述电子设备当前所处环境为暗光环境，此种情况下，电子设备相机模组中的深度摄像头由于对环境光线依赖较弱，从而其在暗光环境中仍然可以进行正常的深度图像采集，可得到有效、可用的深度图像，而RGB等非深度摄像头由于对环境光线依赖较强，则不能进行正常的非深度图像采集，无法得到有效、可用的非深度图像。

当电子设备的环境光线信息表示的环境光强度达到所述第二阈值时，则表示电子设备当前所处环境为非暗光环境，相对应地，其相机模组中的各摄像头均可进行正常的图像采集。

而当电子设备的环境光线信息表示的环境光强度未达到所述第一阈值时，则表示电子设备当前所处环境为极暗光环境。由于实际应用中，深度摄像头对环境光线仍有一定程度的依赖，从而其在极暗光环境下不能进行正常的深度图像采集，进而此种情况下，相机模组中的深度摄像头及非深度摄像头均不能进行正常工作，无法得到有效、可用的深度及非深度采集图像。

在应用本申请时，可基于所述深度摄像头及所述非深度摄像头对环境光线的实际依赖情况，并结合深度图像及非深度图像的亮度特征需求，来确定所述第一阈值及所述第二阈值的具体数值。

实施例三

在以上实施例二的基础上，参考图3示出的数据处理方法流程图，所述步骤103可以通过以下处理过程实现：

步骤1031、若所述第一判断结果表示所述环境光强度达到所述第一阈值且未达到所述第二阈值，则开启或不关闭所述相机模组中的深度摄像头，控制所述深度摄像头进行深度图像采集，并禁止开启或关闭所述非深度摄像头。

其中，如果所述第一判断结果表示所述环境光强度达到所述第一阈值且未达到所述第二阈值，则表示电子设备当前处于暗光环境，此种情况下，相机模组中的深度摄像头可进行正常的深度图像采集，而非深度摄像头如RGB摄像头由于环境光线强度不足，而不能进行正常的非深度图像采集，基于此，可开启或不关闭所述相机模组中的深度摄像头，并控制所述深度摄像头工作以进行深度图像采集，相应地，控制所述非深度摄像头不工作，如关闭或禁止开启所述非深度摄像头等，以达到节省电子设备功耗的目的，后续，可以采集的深度图像为准进行图像处理。

具体地，以AR智能眼镜的相机模组为例，当用户使用AR智能眼镜提供的需调用其相机模组的某一应用时，如果相机模组还未开启，且利用本申请方案检测出AR智能眼镜的环境光强度达到所述第一阈值且未达到所述第二阈值，则可直接禁止所述相机模组中非深度摄像头如RGB摄像头的开启，而仅开启相机模组中的深度摄像头进行深度图像采集。如果相机模组已开启并使用，例如，如果其中的深度摄像头及非深度摄像头均已开启，则在利用本申请方案检测出AR智能眼镜的环境光强度达到所述第一阈值且未达到所述第二阈值时，由于AR智能眼镜的环境光线不足，处于暗光环境，从而可关闭其中的RGB摄像头等非深度摄像头，而仅保留深度摄像头进行深度图像采集；如果仅开启并使用了其中的深度摄像头，则在该暗光环境中可继续维持当前深度摄像头的深度图像采集，而不再开启其中的非深度摄像头。

后续可以深度摄像头采集的深度图像为准进行图像处理。

仍以AR智能眼镜为例，在现有的虚拟现实应用中，一种可能的应用场景是，AR智能眼镜将通过RGB摄像头采集的RGB图像与其自身提供的虚拟场景进行融合处理，得到虚拟现实场景，并对深度摄像头采集的手势深度图像进行手势识别，在此基础上，依据手势识别结果，对呈现给用户的所述虚拟现实场景进行控制(其中，具体是对虚拟现实场景中的虚拟对象进行控制)。

而应用本申请方案，当在暗光环境中时，由于RGB摄像头无法采集到有效、可用的RGB图像，从而可直接关闭或禁止开启AR智能眼镜相机模组中的RGB摄像头，仅利用其中的深度摄像头进行深度图像采集，并以采集的深度图像为准进行图像处理，如采集用户手势的深度图像，并对采集的深度图像进行手势识别等，在此基础上，由于RGB摄像头未工作，从而，AR智能眼镜呈现给用户的具体是其自身提供的虚拟场景部分，即不再有相结合的现实场景部分，基于此，在识别出用户手势的基础上，可依据识别结果对AR智能眼镜自身提供的虚拟场景进行控制，如对其中的虚拟对象进行所需操作等。

本实施例在暗光环境下，通过关闭或禁止开启电子设备相机模组中的非深度摄像头，有效降低了电子设备使用其相机模组时的功耗。

实施例四

在以上实施例二的基础上，参考图4示出的数据处理方法流程图，所述步骤103还可以通过以下处理过程实现：

步骤1032、若所述第一判断结果表示所述环境光强度达到所述第二阈值，则开启或不关闭所述相机模组中的深度摄像头及非深度摄像头，并控制所述深度摄像头进行深度图像采集，控制所述非深度摄像头进行非深度图像采集。

其中，如果所述第一判断结果表示所述环境光强度达到所述第二阈值，则表示电子设备当前处于非暗光环境，此种情况下，相机模组中的深度摄像头及非深度摄像头均可进行正常的图像采集，可分别采集得到有效、可用的深度图像及非深度图像，从而，可开启或不关闭所述相机模组中的深度摄像头及非深度摄像头，并控制所述深度摄像头进行深度图像采集，控制所述非深度摄像头进行非深度图像采集。

以AR智能眼镜的相机模组为例，当用户使用AR智能眼镜提供的需调用其相机模组的某一应用时，如果相机模组还未开启，且利用本申请方案检测出AR智能眼镜的环境光强度达到所述第二阈值，则可直接开启相机模组中的深度摄像头及非深度摄像头，分别进行深度及非深度图像采集，而如果已开启了其中一种，如已开启了深度摄像头，则在检测出环境光强度达到所述第二阈值时，可继续开启另一种摄像头，如继续开启RGB摄像头等，以实现非暗光环境中深度及非深度图像的同时采集。

后续可基于采集的深度及非深度图像进行图像处理，如在AR智能眼镜的虚拟现实应用中，通过对深度摄像头采集的深度手势图像进行处理实现手势识别，通过对RGB摄像头采集的RGB图像与AR智能眼镜提供的虚拟场景进行融合处理，得到虚拟现实场景等，后续可依据手势识别结果来控制所述虚拟现实场景中的虚拟对象。

本实施例由于仅在电子设备处于非暗光环境中时，才同时利用其相机模组中的深度摄像头及非深度摄像头分别进行深度及非深度图像采集，与现有技术在任何光线环境下均采用深度摄像头及非深度摄像头进行图像采集相比，可有效降低电子设备的功耗。

实施例五

在以上实施例二的基础上，参考图5示出的数据处理方法流程图，所述步骤103还可以通过以下处理过程实现：

步骤1033、若所述第一判断结果表示所述环境光强度未达到所述第一阈值，则关闭或所禁止开启述相机模组中的深度摄像头及非深度摄像头。

其中，如果所述第一判断结果表示所述环境光强度未达到所述第一阈值，则表示电子设备当前处于极暗光环境，此种情况下，相机模组中的深度摄像头及非深度摄像头均不能进行正常的图像采集，无法得到有效、可用的深度及非深度图像，基于此，可禁止开启或关闭所述相机模组中的深度摄像头及非深度摄像头，以节约电子设备的功耗。

以AR智能眼镜的相机模组为例，当用户使用AR智能眼镜提供的需调用其相机模组的某一应用时，如果相机模组还未开启，且利用本申请方案检测出AR智能眼镜的环境光强度未达到所述第一阈值，考虑到即使开启相机模组也无法得到有效可用的图像，进而无法保证用户应用的正常使用，从而可直接禁止开启相机模组中的深度摄像头及非深度摄像头，以节约设备功耗。如果相机模组已开启并使用，若检测出AR智能眼镜的环境光强度未达到所述第一阈值，则可控制相机模组关闭。

本实施例在电子设备处于极暗光环境中时，禁止开启或关闭所述相机模组中的深度摄像头及非深度摄像头，与现有技术在任何光线环境下均采用深度摄像头及非深度摄像头进行图像采集相比，可有效降低电子设备的功耗。

这里，需要说明的是，在以上各实施例中，为使得用户及时获知电子设备相机模组的工作状况，当关闭/禁止开启相机模组，或关闭/禁止开启相机模组中的某一摄像头时，可生成并显示一提示信息，以提示用户因环境光线不足，从而关闭/禁止开启相机模组或相机模组中的某一摄像头。

还需要说明的是，本申请以上各实施例中所述的采集图像有效、可用，具体是指所采集的图像具有足够的亮度信息，相应地可使得所采集的图像具有足够的特征点，进而能够满足电子设备相应应用的机器视觉算法处理要求。

实施例六

本实施例中，参考图6示出的数据处理方法流程图，本申请的数据处理方案还可以包括以下步骤：

步骤105、在开启并使用所述相机模组的过程中，基于所述相机模组所采集图像的特征点个数，调整所述第一阈值或所述第二阈值。

实际应用中，可由技术人员依据历史经验，来设定所述第一阈值及所述第二阈值的具体数值；或者，也可以预先通过在实验室环境下进行不同光强度(光照度)条件下的相机模组图像采集实验，来获得不同光强度条件与所采集图像(深度图像、非深度图像)的特征点个数的对应情况，以此标定出合适的门限值，如具体标定出用于区隔暗光与极暗光的所述第一阈值，以及标定出用于区隔暗光与非暗光的所述第二阈值等。

然而，无论是依据经验人为设定，亦或是通过实验进行标定，所述第一阈值及所述第二阈值的数值，在实际使用环境中仍可能出现存在偏差的情况，例如，若在所述电子设备所处环境的环境光强度达到所述第二阈值时，相机模组中RGB摄像头仍不能采集到满足特征点个数需求的RGB图像，此种情况，则表示所述第二阈值的设定数值偏小。

针对所述第一阈值、所述第二阈值的数值可能存在偏差的情况，本实施例提出，在开启并使用所述相机模组的过程中，基于所述相机模组所采集图像的特征点个数，动态调整所述第一阈值或所述第二阈值。

具体地，以动态调整所述第二阈值为例，在一种可能的实现方式中，可通过以下的第一处理过程实现对所述第二阈值进行调整：当电子设备的环境光强度为所述第二阈值，且对非深度摄像头采集的非深度图像进行处理后得到的图像特征点个数未达到设定的特征点个数最低阈值时，增大所述第二阈值；当电子设备的环境光强度为所述第二阈值，且对非深度摄像头采集的非深度图像进行处理后得到的图像特征点个数达到并超出所述特征点个数最低阈值时，减小所述第二阈值。

在另一种可能的实现方式中，可通过以下的第二处理过程实现对所述第二阈值进行调整：当电子设备的环境光强度处于预设的光强度范围内，且对非深度摄像头采集的非深度图像进行处理后得到的图像特征点个数低于预设的特征点个数范围对应的最低边界值时，增大所述第二阈值；其中，所述光强度范围为以所述第二阈值为最小值为一预定范围；当电子设备的环境光强度处于所述光强度范围内，且对非深度摄像头采集的非深度图像进行处理后得到的图像特征点个数超出所述特征点个数范围对应的最高边界值时，减小所述第二阈值。

调整所述第一阈值的实现方式，与调整所述第二阈值的实现方式类似，本实施例不再详细阐述。

本实施例通过对用于区隔环境光强度类型的门限值进行动态调整，可使得所述门限值，如所述第一阈值、第二阈值的具体数值更加合理，更加贴合电子设备在各种环境光强度条件下对相机模组的使用需求。

实施例七

本实施例公开一种电子设备，所述电子设备可以是但不局限于AR智能眼镜、AR智能头盔等设备，参考图7示出的电子设备结构示意图，所述电子设备包括：相机模组1及处理器2。

相机模组1，包括深度摄像头101及非深度摄像头102。

所述非深度摄像头可以包括但不局限于RGB摄像头、鱼眼摄像头等非深度相机设备。

处理器2，用于获得所述电子设备当前的环境光线信息；判断所述环境光线信息表示的环境光强度是否满足预定条件，得到第一判断结果；基于所述第一判断结果，控制所述相机模组进行图像采集；并在所述第一判断结果表示满足所述预定条件时，以所述深度摄像头获得的深度图像为准进行图像处理。

其中，电子设备当前的环境光线信息具体可利用光线传感器采集获得，也可通过对所述相机模组中包括的RGB摄像头所捕获的图像进行亮度信息计算得到。基于此，如图8所示，所述电子设备还可以包括光线传感器3。

实际应用中，可仅采用光线传感器方式，采集获得电子设备的环境光线信息供处理器2使用；也可以依据所述相机模组的实际工作情况，结合使用所述光线传感器及所述RGB摄像头进行环境光线信息的获取，以供所述处理器2使用，例如，当相机模组中的所述RGB摄像头处于工作状态时，通过对所述RGB摄像头所采集的图像进行相应的亮度信息计算，得到电子设备的环境光线信息，而当所述RGB摄像头处于非工作状态时，则启用所述光线传感器采集所述电子设备的环境光线信息。

且实际应用中，优选的，可将所述光线传感器设置于所述相机模组在所述电子设备的安装位置附近的一预定区域，以尽量保证所述光线传感器采集的环境光线信息，与所述相机模组所采集的图像对应的亮度信息相一致。

所述预定条件可以是表示所述环境光强度为暗光的相应条件，即表示所述电子设备处于暗光环境的相应条件。

处理器2具体依据所述电子设备当前所处环境的环境光强度，来控制相机模组中的相应摄像头进行图像采集，例如，在相应光强度条件下，仅控制相机模组中的某一个摄像头进行图像采集，而其他摄像头则关闭或禁止开启等，这与现有技术中一旦相机模组开启后，其包括的各个摄像头均处于工作状态存在区别。

由于深度摄像头相比于非深度摄像头如所述RGB摄像头而言，其对环境光线的依赖性较弱，也就是说，在RGB摄像头无法进行正常的RGB图像采集的暗光条件下，深度摄像头仍然可能能够进行正常的非深度图像采集。

基于此，当所述第一判断结果表示电子设备处于暗光环境中时，由于所述非深度摄像头如所述RGB摄像头，无法进行正常的非深度图像采集，从而处理器2可仅以所述深度摄像头获得的深度图像为准进行图像处理，而所述非深度摄像头由于并未使用，从而可将其关闭或禁止开启。

由以上方案可知，本申请提供的电子设备，由于在环境光线信息满足预定条件时，具体以深度摄像头获得的深度图像为准进行图像处理，从而不再需要使用非深度摄像头进行图像采集，相应地可以关闭或禁止开启非深度摄像头，而非深度摄像头的关闭或禁止开启会带来节省电子设备功耗的效果。

实施例八

本实施例中，所述处理器判断所述环境光线信息表示的环境光强度是否满足预定条件，得到第一判断结果，进一步包括：

所述处理器判断所述环境光线信息表示的环境光强度是否达到第一阈值且未达到第二阈值，得到第一判断结果；所述第一阈值小于所述第二阈值。

其中，所述第一阈值及所述第二阈值，用于界定电子设备所处环境对应的光强度类型，进而确定电子设备所处的光照环境，本实施例中，所述电子设备所处环境对应的光强度类型包括极暗光、暗光及非暗光三种类型，相对应地，电子设备所处的光照环境包括极暗光环境、暗光环境及非暗光环境。

具体地，当所述电子设备的环境光线信息表示的环境光强度介于所述第一阈值与所述第二阈值之间，即达到所述第一阈值且未达到所述第二阈值时，则表示所述电子设备当前所处环境为暗光环境，此种情况下，电子设备相机模组中的深度摄像头由于对环境光线依赖较弱，从而其在暗光环境中仍然可以进行正常的深度图像采集，可得到有效、可用的深度图像，而RGB等非深度摄像头由于对环境光线依赖较强，则不能进行正常的非深度图像采集，无法得到有效、可用的非深度图像。

当电子设备的环境光线信息表示的环境光强度达到所述第二阈值时，则表示电子设备当前所处环境为非暗光环境，相对应地，其相机模组中的各摄像头均可进行正常的图像采集。

而当电子设备的环境光线信息表示的环境光强度未达到所述第一阈值时，则表示电子设备当前所处环境为极暗光环境。由于实际应用中，深度摄像头对环境光线仍有一定程度的依赖，从而其在极暗光环境下不能进行正常的深度图像采集，进而此种情况下，相机模组中的深度摄像头及非深度摄像头均不能进行正常工作，无法得到有效、可用的深度及非深度采集图像。

在应用本申请时，可基于所述深度摄像头及所述非深度摄像头对环境光线的实际依赖情况，并结合深度图像及非深度图像的亮度特征需求，来确定所述第一阈值及所述第二阈值的具体数值。

实施例九

在以上实施例八的基础上，所述处理器基于所述第一判断结果，控制所述相机模组进行图像采集，进一步包括：

若所述第一判断结果表示所述环境光强度达到所述第一阈值且未达到所述第二阈值，则所述处理器控制开启或不关闭所述相机模组中的深度摄像头，控制所述深度摄像头进行深度图像采集，并控制禁止开启或关闭所述非深度摄像头。

其中，如果所述第一判断结果表示所述环境光强度达到所述第一阈值且未达到所述第二阈值，则表示电子设备当前处于暗光环境，此种情况下，相机模组中的深度摄像头可进行正常的深度图像采集，而非深度摄像头如RGB摄像头由于环境光线强度不足，而不能进行正常的非深度图像采集，基于此，处理器可控制开启或不关闭所述相机模组中的深度摄像头，并控制所述深度摄像头工作以进行深度图像采集，相应地，处理器控制所述非深度摄像头不工作，如关闭或禁止开启所述非深度摄像头等，以达到节省电子设备功耗的目的，后续，可以采集的深度图像为准进行图像处理。

具体地，以AR智能眼镜的相机模组为例，当用户使用AR智能眼镜提供的需调用其相机模组的某一应用时，如果相机模组还未开启，且利用本申请方案检测出AR智能眼镜的环境光强度达到所述第一阈值且未达到所述第二阈值，则可利用处理器控制禁止开启所述相机模组中非深度摄像头如RGB摄像头，而仅控制开启相机模组中的深度摄像头进行深度图像采集。如果相机模组已开启并使用，例如，如果其中的深度摄像头及非深度摄像头均已开启，则在利用本申请方案检测出AR智能眼镜的环境光强度达到所述第一阈值且未达到所述第二阈值时，由于AR智能眼镜的环境光线不足，处于暗光环境，从而可利用处理器控制关闭其中的RGB摄像头等非深度摄像头，而仅保留深度摄像头进行深度图像采集；如果仅开启并使用了其中的深度摄像头，则可继续维持当前深度摄像头的深度图像采集，而不再控制开启其中的非深度摄像头。

后续可以深度摄像头采集的深度图像为准进行图像处理。

仍以AR智能眼镜为例，在现有的虚拟现实应用中，一种可能的应用场景是，AR智能眼镜将通过RGB摄像头采集的RGB图像与其自身提供的虚拟场景进行融合处理，得到虚拟现实场景，并对深度摄像头采集的手势深度图像进行手势识别，在此基础上，依据手势识别结果，对呈现给用户的所述虚拟现实场景进行控制(其中，具体是对虚拟现实场景中的虚拟对象进行控制)。

而应用本申请方案，当在暗光环境中时，由于RGB摄像头无法采集到有效、可用的RGB图像，从而可直接关闭或禁止开启AR智能眼镜相机模组中的RGB摄像头，仅利用其中的深度摄像头进行深度图像采集，并以采集的深度图像为准进行图像处理，如采集用户手势的深度图像，并对采集的深度图像进行手势识别等，在此基础上，由于RGB摄像头未工作，从而，AR智能眼镜呈现给用户的具体是其自身提供的虚拟场景部分，即不再有相结合的现实场景部分，基于此，在识别出用户手势的基础上，可依据识别结果对AR智能眼镜自身提供的虚拟场景进行控制，如对其中的虚拟对象进行所需操作等。

本实施例在暗光环境下，通过关闭或禁止开启电子设备相机模组中的非深度摄像头，有效降低了电子设备使用其相机模组时的功耗。

实施例十

在以上实施例八的基础上，所述述处理器基于所述第一判断结果，控制所述相机模组进行图像采集，进一步包括：

若所述第一判断结果表示所述环境光强度达到所述第二阈值，则所述处理器控制开启或不关闭所述相机模组中的深度摄像头及非深度摄像头，并控制所述深度摄像头进行深度图像采集，控制所述非深度摄像头进行非深度图像采集。

其中，如果所述第一判断结果表示所述环境光强度达到所述第二阈值，则表示电子设备当前处于非暗光环境，此种情况下，相机模组中的深度摄像头及非深度摄像头均可进行正常的图像采集，可分别采集得到有效、可用的深度图像及非深度图像，从而，可利用所述处理器控制开启或不关闭所述相机模组中的深度摄像头及非深度摄像头，并控制所述深度摄像头进行深度图像采集，控制所述非深度摄像头进行非深度图像采集。

以AR智能眼镜的相机模组为例，当用户使用AR智能眼镜提供的需调用其相机模组的某一应用时，如果相机模组还未开启，且利用本申请方案检测出AR智能眼镜的环境光强度达到所述第二阈值，则可利用所述处理器直接控制开启相机模组中的深度摄像头及非深度摄像头，分别进行深度及非深度图像采集，而如果已开启了其中一种，如已开启了深度摄像头，则在检测出环境光强度达到所述第二阈值时，可继续控制开启另一种摄像头，如继续控制开启RGB摄像头等，以实现非暗光环境中深度及非深度图像的同时采集。

后续可基于采集的深度及非深度图像进行图像处理，如在AR智能眼镜的虚拟现实应用中，通过对深度摄像头采集的深度手势图像进行处理实现手势识别，通过对RGB摄像头采集的RGB图像与AR智能眼镜提供的虚拟场景进行融合处理，得到虚拟现实场景等，后续可依据手势识别结果来控制所述虚拟现实场景中的虚拟对象。

本实施例由于仅在电子设备处于非暗光环境中时，才同时利用其相机模组中的深度摄像头及非深度摄像头分别进行深度及非深度图像采集，与现有技术在任何光线环境下均采用深度摄像头及非深度摄像头进行图像采集相比，可有效降低电子设备的功耗。

实施例十一

在以上实施例八的基础上，所述处理器基于所述第一判断结果，控制所述相机模组进行图像采集，进一步包括：

若所述第一判断结果表示所述环境光强度未达到所述第一阈值，则关闭或禁止开启所述相机模组中的深度摄像头及非深度摄像头。

其中，如果所述第一判断结果表示所述环境光强度未达到所述第一阈值，则表示电子设备当前处于极暗光环境，此种情况下，相机模组中的深度摄像头及非深度摄像头均不能进行正常的图像采集，无法得到有效可用的深度及非深度图像，基于此，可利用所述处理器控制电子设备禁止开启或关闭所述相机模组中的深度摄像头及非深度摄像头，以节约电子设备的功耗。

以AR智能眼镜的相机模组为例，当用户使用AR智能眼镜提供的需调用其相机模组的某一应用时，如果相机模组还未开启，且利用本申请方案检测出AR智能眼镜的环境光强度未达到所述第一阈值，考虑到即使开启相机模组也无法得到有效可用的图像，进而无法保证用户应用的正常使用，从而可利用所述处理器控制电子设备禁止开启相机模组中的深度摄像头及非深度摄像头，以节约设备功耗。如果相机模组已开启并使用，若检测出AR智能眼镜的环境光强度未达到所述第一阈值，则可控制相机模组关闭。

本实施例在电子设备处于极暗光环境中时，禁止开启或关闭所述相机模组中的深度摄像头及非深度摄像头，与现有技术在任何光线环境下均采用深度摄像头及非深度摄像头进行图像采集相比，可有效降低电子设备的功耗。

这里，需要说明的是，在以上各实施例中，为使得用户及时获知电子设备相机模组的工作状况，当关闭/禁止开启相机模组，或关闭/禁止开启相机模组中的某一摄像头时，可生成并显示一提示信息，以提示用户因环境光线不足，从而关闭/禁止开启相机模组或相机模组中的某一摄像头。

还需要说明的是，本申请以上各实施例中所述的采集图像有效、可用，具体是指所采集的图像具有足够的亮度信息，相应地可使得所采集的图像具有足够的特征点，进而能够满足电子设备相应应用的机器视觉算法处理要求。

实施例十二

本实施例中，所述处理器，还用于：在开启并使用所述相机模组的过程中，基于所述相机模组所采集图像的特征点个数，调整所述第一阈值或所述第二阈值。

实际应用中，可由技术人员依据历史经验，来设定所述第一阈值及所述第二阈值的具体数值；或者，也可以预先通过在实验室环境下进行不同光强度(光照度)条件下的相机模组图像采集实验，来获得不同光强度条件与所采集图像(深度图像、非深度图像)的特征点个数的对应情况，以此标定出合适的门限值，如具体标定出用于区隔暗光与极暗光的所述第一阈值，以及标定出用于区隔暗光与非暗光的所述第二阈值等。

然而，无论是依据经验人为设定，亦或是通过实验进行标定，所述第一阈值及所述第二阈值的数值，在实际使用环境中仍可能出现存在偏差的情况，例如，若在所述电子设备所处环境的环境光强度达到所述第二阈值时，相机模组中RGB摄像头却仍不能采集到满足特征点个数需求的RGB图像，此种情况，则表示所述第二阈值的设定数值偏小。

针对所述第一阈值、所述第二阈值的数值可能存在偏差的情况，本实施例提出，在开启并使用所述相机模组的过程中，由所述处理器基于所述相机模组所采集图像的特征点个数，动态调整所述第一阈值或所述第二阈值。

具体地，以动态调整所述第二阈值为例，在一种可能的实现方式中，所述处理器可通过以下的第一处理过程实现对所述第二阈值进行调整：当电子设备的环境光强度为所述第二阈值，且对非深度摄像头采集的非深度图像进行处理后得到的图像特征点个数未达到设定的特征点个数最低阈值时，增大所述第二阈值；当电子设备的环境光强度为所述第二阈值，且对非深度摄像头采集的非深度图像进行处理后得到的图像特征点个数达到并超出所述特征点个数最低阈值时，减小所述第二阈值。

在另一种可能的实现方式中，所述处理器可通过以下的第二处理过程实现对所述第二阈值进行调整：当电子设备的环境光强度处于预设的光强度范围内，且对非深度摄像头采集的非深度图像进行处理后得到的图像特征点个数低于预设的特征点个数范围对应的最低边界值时，增大所述第二阈值；其中，所述光强度范围为以所述第二阈值为最小值为一预定范围；当电子设备的环境光强度处于所述光强度范围内，且对非深度摄像头采集的非深度图像进行处理后得到的图像特征点个数超出所述特征点个数范围对应的最高边界值时，减小所述第二阈值。

调整所述第一阈值的实现方式，与调整所述第二阈值的实现方式类似，本实施例不再详细阐述。

本实施例通过对用于区隔环境光强度类型的门限值进行动态调整，可使得所述门限值，如所述第一阈值、第二阈值的具体数值更加合理，更加贴合电子设备在各种环境光强度条件下对相机模组的使用需求。

需要说明的是，本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。

为了描述的方便，描述以上系统或装置时以功能分为各种模块或单元分别描述。当然，在实施本申请时可以把各单元的功能在同一个或多个软件和/或硬件中实现。

通过以上的实施方式的描述可知，本领域的技术人员可以清楚地了解到本申请可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例或者实施例的某些部分所述的方法。

最后，还需要说明的是，在本文中，诸如第一、第二、第三和第四等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种数据处理方法，其特征在于，应用于电子设备对操作对象进行操作控制的场景中，所述电子设备至少包括相机模组，所述相机模组包括深度摄像头及非深度摄像头；所述方法包括：

获得所述电子设备当前的环境光线信息；

判断所述环境光线信息表示的环境光强度是否满足预定条件，得到第一判断结果；

基于所述第一判断结果，控制所述相机模组进行图像采集；其中，若所述第一判断结果表明所述电子设备处于符合第一条件的暗光环境，则控制所述深度摄像头采集用于实现控制信息识别的图像，并控制所述非深度摄像头处于关闭状态；若所述第一判断结果表明所述电子设备处于符合第二条件的非暗光环境，则控制所述深度摄像头采集用于实现控制信息识别的图像，并控制所述非深度摄像头采集用于生成所述控制信息对应的控制场景的图像；

若所述第一判断结果表示满足所述预定条件，则以所述深度摄像头获得的深度图像为准进行图像处理。

2.根据权利要求1所述的方法，其特征在于，所述判断所述环境光线信息表示的环境光强度是否满足预定条件，得到第一判断结果，包括：

判断所述环境光线信息表示的环境光强度是否达到第一阈值且未达到第二阈值，得到第一判断结果；所述第一阈值小于所述第二阈值。

3.根据权利要求2所述的方法，其特征在于，所述基于所述第一判断结果，控制所述相机模组进行图像采集，包括：

若所述第一判断结果表示所述环境光强度达到所述第一阈值且未达到所述第二阈值，表明所述电子设备处于符合第一条件的暗光环境，则开启或不关闭所述相机模组中的深度摄像头，控制所述深度摄像头进行用于实现控制信息识别的深度图像采集，并禁止开启或关闭所述非深度摄像头。

4.根据权利要求2所述的方法，其特征在于，所述基于所述第一判断结果，控制所述相机模组进行图像采集，包括：

若所述第一判断结果表示所述环境光强度达到所述第二阈值，表明所述电子设备处于符合第二条件的非暗光环境，则开启或不关闭所述相机模组中的深度摄像头及非深度摄像头，并控制所述深度摄像头进行用于实现控制信息识别的深度图像采集，控制所述非深度摄像头进行用于生成所述控制信息对应的控制场景的非深度图像采集。

5.根据权利要求2-4任一项所述的方法，其特征在于，还包括：

在开启并使用所述相机模组的过程中，基于所述相机模组所采集图像的特征点个数，调整所述第一阈值或所述第二阈值。

6.一种电子设备，其特征在于，应用于对操作对象的操作控制场景中，所述电子设备包括：

相机模组，所述相机模组包括深度摄像头及非深度摄像头；

处理器，用于获得所述电子设备当前的环境光线信息；判断所述环境光线信息表示的环境光强度是否满足预定条件，得到第一判断结果；基于所述第一判断结果，控制所述相机模组进行图像采集，其中，若所述第一判断结果表明所述电子设备处于符合第一条件的暗光环境，则控制所述深度摄像头采集用于实现控制信息识别的图像，并控制所述非深度摄像头处于关闭状态；若所述第一判断结果表明所述电子设备处于符合第二条件的非暗光环境，则控制所述深度摄像头采集用于实现控制信息识别的图像，并控制所述非深度摄像头采集用于生成所述控制信息对应的控制场景的图像；并在所述第一判断结果表示满足所述预定条件时，以所述深度摄像头获得的深度图像为准进行图像处理。

7.根据权利要求6所述的电子设备，其特征在于，所述处理器判断所述环境光线信息表示的环境光强度是否满足预定条件，得到第一判断结果，进一步包括：

所述处理器判断所述环境光线信息表示的环境光强度是否达到第一阈值且未达到第二阈值，得到第一判断结果；所述第一阈值小于所述第二阈值。

8.根据权利要求7所述的电子设备，其特征在于，所述处理器基于所述第一判断结果，控制所述相机模组进行图像采集，进一步包括：

若所述第一判断结果表示所述环境光强度达到所述第一阈值且未达到所述第二阈值，表明所述电子设备处于符合第一条件的暗光环境，则所述处理器控制开启或不关闭所述相机模组中的深度摄像头，控制所述深度摄像头进行用于实现控制信息识别的深度图像采集，并控制禁止开启或关闭所述非深度摄像头。

9.根据权利要求7所述的电子设备，其特征在于，所述处理器基于所述第一判断结果，控制所述相机模组进行图像采集，进一步包括：

若所述第一判断结果表示所述环境光强度达到所述第二阈值，表明所述电子设备处于符合第二条件的非暗光环境，则所述处理器控制开启或不关闭所述相机模组中的深度摄像头及非深度摄像头，并控制所述深度摄像头进行用于实现控制信息识别的深度图像采集，控制所述非深度摄像头进行用于生成所述控制信息对应的控制场景的非深度图像采集。

10.根据权利要求7-9任一项所述的电子设备，其特征在于，所述处理器，还用于：

在开启并使用所述相机模组的过程中，基于所述相机模组所采集图像的特征点个数，调整所述第一阈值或所述第二阈值。

Images