CN108769518A - 摄像头交互方法、装置、电子设备及计算机可读存储介质 - Google Patents

Abstract

本发明实施例提供一种摄像头交互方法、装置、电子设备及计算机可读存储介质，涉及互联网技术领域。所述方法应用于具有Android操作系统的电子设备，所述电子设备包括摄像头，所述方法包括：接收用于控制摄像头的控制指令；将所述控制指令分别发送至所述Android操作系统中的Kernel层和Hal层；控制所述Kernel层和Hal层并行执行所述控制指令。使用该摄像头交互方法、装置、电子设备及计算机可读存储介质，实现了对摄像头控制指令的快速响应。

Description

摄像头交互方法、装置、电子设备及计算机可读存储介质

技术领域

本发明涉及互联网技术领域，具体而言，涉及一种摄像头交互方法、装置、电子设备及计算机可读存储介质。

背景技术

目前大部分具有Android操作系统的厂商，对摄像头部分的交互方案基本遵循了Google最传统的架构。经研究发现，响应摄像头控制指令所执行的交互逻辑较为繁琐，响应效率有待提高。

发明内容

有鉴于此，本发明实施例的目的在于提供一种摄像头交互方法、装置、电子设备及计算机可读存储介质，以提高对摄像头控制指令的响应速度。

第一方面，本发明实施例提供了一种摄像头交互方法，应用于具有Android操作系统的电子设备，所述电子设备包括摄像头，所述方法包括：

接收用于控制摄像头的控制指令；

将所述控制指令分别发送至所述Android操作系统中的Kernel层和Hal层；

控制所述Kernel层和Hal层并行执行所述控制指令。

可选地，所述电子设备包括至少两个摄像头，所述电子设备还包括外置ISP，所述摄像头控制指令包括摄像头切换指令，所述接收用于控制摄像头的控制指令的步骤，包括：

将所述Kernel层和Hal层之间，关闭所述第一摄像头的逻辑和开启所述第二摄像头的逻辑抽象为切换摄像头的逻辑，将所述Kernel层和Hal层之间，关闭所述第二摄像头的逻辑和开启所述第一摄像头的逻辑抽象为切换摄像头的逻辑，得到所述摄像头切换指令。

可选地，将所述控制指令分别发送至所述Android操作系统中的Kernel层和Hal层的步骤，包括：

将所述控制指令异步发送至所述Android操作系统中的Kernel层和Hal层。

可选地，控制所述Kernel层和Hal层并行执行所述控制指令的步骤包括：

控制所述Kernel层对与之存在交互顺序的应用层进行欺骗，控制所述Hal层对与之存在交互顺序的应用层进行欺骗，从而使得所述Kernel层和Hal层并行执行所述控制指令。

第二方面，本发明实施例提供了一种摄像头交互装置，应用于具有Android操作系统的电子设备，所述电子设备包括摄像头，所述摄像头交互装置包括：

接收模块，用于接收用于控制摄像头的控制指令；

发送模块，用于将所述控制指令分别发送至所述Android操作系统中的Kernel层和Hal层；

控制模块，用于控制所述Kernel层和Hal层并行执行所述控制指令。

可选地，所述电子设备包括至少两个摄像头，所述电子设备还包括外置ISP；

所述接收模块还用于，将所述Kernel层和Hal层之间，关闭所述第一摄像头的逻辑和开启所述第二摄像头的逻辑抽象为切换摄像头的逻辑，将所述Kernel层和Hal层之间，关闭所述第二摄像头的逻辑和开启所述第一摄像头的逻辑抽象为切换摄像头的逻辑，得到所述摄像头切换指令。

可选地，所述发送模块用于，将所述控制指令异步发送至所述Android操作系统中的Kernel层和Hal层。

可选地，所述控制模块用于，控制所述Kernel层对与之存在交互顺序的应用层进行欺骗，控制所述Hal层对与之存在交互顺序的应用层进行欺骗，从而使得所述Kernel层和Hal层并行执行所述控制指令。

第三方面，本发明实施例提供了一种电子设备，包括：

存储器；

处理器；以及

上述的摄像头交互装置。

第四方面，本发明实施例提供了一种计算机可读存储介质，所述计算机可读存储介质包括计算机程序，所述计算机程序运行时控制所述计算机可读存储介质所在电子设备执行上述的摄像头交互方法。

本发明实施例提供的摄像头交互方法、装置、电子设备及计算机可读存储介质，将控制指令分别发送至Kernel层和Hal层，控制Kernel层和Hal层并行执行控制指令，通过并行执行实现了对摄像头控制指令的快速响应，进而提高了摄像头的使用体验。

为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1为本发明实施例提供的一种电子设备的方框示意图。

图2为本发明实施例提供的一种摄像头交互方法的流程图。

图3为本发明实施例提供的现有技术中切换摄像头的示意性逻辑流程。

图4为本发明实施例提供的本发明实施例中切换摄像头的示意性逻辑流程。

图5为本发明实施例提供的一种摄像头交互装置的方框示意图。

图标：10-电子设备；11-存储器；12-处理器；13-网络模块；20-摄像头交互装置；21-接收模块；22-发送模块；23-控制模块。

具体实施方式

下面将结合本发明实施例中附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。

应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。

如图1所示，是本发明实施例提供的电子设备10的一种方框示意图。本发明实施例中的电子设备10可以为相机、手机、iPAD、平板电脑等包括摄像头的设备，该电子设备10具有Android操作系统。如图1所示，电子设备10包括：存储器11、处理器12、网络模块13及摄像头交互装置20。

所述存储器11、处理器12以及网络模块13相互之间直接或间接地电性连接，以实现数据的传输或交互。例如，这些元件相互之间可通过一条或多条通讯总线或信号线实现电性连接。存储器11中存储有摄像头交互装置20，所述摄像头交互装置20包括至少一个可以软件或固件(firmware)的形式存储于所述存储器11中的软件功能模块，所述处理器12通过运行存储在存储器11内的软件程序以及模块，如本发明实施例中的摄像头交互装置20，从而执行各种功能应用以及数据处理，即实现本发明实施例中的摄像头交互方法。

其中，所述存储器11可以是，但不限于，随机存取存储器(Random Access Memory，RAM)，只读存储器(Read Only Memory，ROM)，可编程只读存储器(Programmable Read-OnlyMemory，PROM)，可擦除只读存储器(Erasable Programmable Read-Only Memory，EPROM)，电可擦除只读存储器(Electric Erasable Programmable Read-Only Memory，EEPROM)等。其中，存储器11用于存储程序，所述处理器12在接收到执行指令后，执行所述程序。

所述处理器12可能是一种集成电路芯片，具有数据的处理能力。上述的处理器12可以是通用处理器，包括中央处理器(Central Processing Unit，CPU)、网络处理器(Network Processor，NP)等。可以实现或者执行本发明实施例中公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

网络模块13用于通过网络建立电子设备10与外部通信终端之间的通信连接，实现网络信号及数据的收发操作。上述网络信号可包括无线信号或者有线信号。

可以理解，图1所示的结构仅为示意，电子设备10还可包括比图1中所示更多或者更少的组件，或者具有与图1所示不同的配置。图1中所示的各组件可以采用硬件、软件或其组合实现。

本发明实施例还提供一种计算机可读存储介质，包括计算机程序。所述计算机程序运行时控制所述计算机可读存储介质所在电子设备10执行下面的摄像头交互方法。

请结合参阅图2，电子设备10通过以下步骤实现摄像头交互。

步骤S11，接收用于控制摄像头的控制指令。

控制指令有多种，用于在各项功能场景中实现对摄像头的控制。例如，在电子设备包括至少两个摄像头如第一摄像头和第二摄像头的情况下，控制指令包括摄像头切换指令。

鉴于目前大部分具有Android操作系统的电子设备生产厂商，对摄像头部分的交互方案基本遵循了Google最传统的架构，会在电子设备的摄像头模块中加入外置ISP(Image Signal Processing，图像信号处理器)，加入外置ISP后，Kernel层(操作系统内核层)和Sensor层之间便增加了一层ISP的硬件逻辑。可选地，本实施例中，电子设备还包括外置ISP，该外置ISP可以由Kernel层调用。基于外置ISP实现交互流程，可实现最大化的优化，外挂ISP与整个MTK Camera模块耦合度较低，可独立于MTK Camera进行许多操作，更容易实现并行。

在控制指令包括摄像头切换指令的情况下，电子设备通过以下步骤接收用于控制摄像头的控制指令：将所述Kernel层和Hal层(硬件抽象层)之间，关闭所述第一摄像头的逻辑和开启所述第二摄像头的逻辑抽象为切换摄像头的逻辑，将所述Kernel层和Hal层之间，关闭所述第二摄像头的逻辑和开启所述第一摄像头的逻辑抽象为切换摄像头的逻辑，得到所述摄像头切换指令。

通过将关闭所述第一摄像头的逻辑和开启所述第二摄像头的逻辑，以及关闭所述第二摄像头的逻辑和开启所述第一摄像头的逻辑抽象为切换摄像头的逻辑，可以省却重复的上电、下电、开启设备、关闭设备、初始化等诸多耗时的步骤，从而提高对控制指令的响应速度。

其中，第一摄像头和第二摄像头可以灵活选择，例如，第一摄像头可以为前置摄像头，第二摄像头可以后置摄像头。

步骤S12，将所述控制指令分别发送至所述Android操作系统中的Kernel层和Hal层。

可选地，本实施例中电子设备将所述控制指令异步发送至所述Android操作系统中的Kernel层和Hal层。采用异步发送命令机制，省去了Hal层和Kernel层采用串行命令交互时的等待时间，提高对控制指令的响应速度。

步骤S13，控制所述Kernel层和Hal层并行执行所述控制指令。

本实施例中，控制Kernel层和Hal层并行执行控制指令，相较于Kernel层和Hal层采用串行命令交互，减少了等待时间，从而提高控制指令响应效率。可选地，可以通过以下方式实现Kernel层和Hal层并行执行控制指令：控制所述Kernel层对与之存在交互顺序的应用层进行欺骗，控制所述Hal层对与之存在交互顺序的应用层进行欺骗，从而使得所述Kernel层和Hal层并行执行所述控制指令。

本公开中，Kernel层和Hal层对与之存在交互顺序的应用层进行欺骗可以理解为：应用层的逻辑控制本应与Hal层、Kernel层、ISP的状态完全对应，但在本公开中，应用层的状态与其他层级的状态没有对应的关系，称为“欺骗”。例如：应用层调用关闭相机的函数，当函数返回时，无法确保ISP对camera的控制一定是处于关闭状态，ISP可能已经在启动camera的预览功能了。

为了更为清楚地阐述本发明实施例中的实现方案，现以图3和图4的实现流程为例，对比阐述本发明实施例的实现流程。

遵循Google最传统的架构的情况下，当在电子设备的摄像头模块(用于实现摄像头功能的模组)中加入外置ISP后，Kernel层和Sensor层之间便增加了一层ISP的硬件逻辑，这使得原先繁琐的交互逻辑更进一步，在切换前置摄像头与后置摄像头的情境下，采用串行命令的调用顺序如图3所示。

如图3所示，在需要将后置摄像头切换为前置摄像头的情景下，在电子设备为相机的情况下，采用串行命令调用时，所需执行业务逻辑包括：下发关闭第一摄像头命令、软件逻辑：停止预览、ISP：停止预览、Sensor：停止预览、软件逻辑：关闭相机、ISP：下电、Sensor：下电、下发开启第二摄像头命令、软件逻辑：开启相机、ISP上电、Sensor：上电、软件逻辑：开启预览、ISP：开启预览以及Sensor：开启预览。由图3可以看出，在进行摄像头切换过程中，需要多次执行上电、下电、停止预览、启动预览等操作，采用串行命令调用的方式进行摄像头控制，交互逻辑十分繁琐，相应地，响应控制命令所需耗时较长，从而严重影响用户体验。

如图4所示，采用本发明实施例中的方案，在电子设备为相机、需要将后置摄像头切换为前置摄像头的情景下，根据ISP的特性，在Hal层和Kernel层之间，增加一层抽象：将“关闭后置相机”和“开启前置相机”两步抽象为一步“切换摄像头”。如此一来，省去了重复的上电、下电、停止预览、启动预览等诸多耗时步骤。本公开中，ISP的特性包括在切换摄像头时无需重新上下电。

采用异步发送命令机制，将控制指令异步发送至Kernel层和Hal层，从而省去Hal层和Kernel层采用串行命令交互时所需的等待时间。

颠覆Android操作系统传统的摄像头控制流程，在切换摄像头时使Kernel层和Hal层逻辑完全并行进行，在每个交互的地方让Kernel层对Hal层进行欺骗，不明真相的Hal层又对上层进行欺骗，例如，在APP层还在关闭后置相机时Kernel层已经准备进入前置预览。

由图4可以看出，采用本发明实施例中的实现流程，在需要将后置摄像头切换为前置摄像头的情景下，所需执行业务逻辑包括：异步并行下发切换摄像头命令，分两条线程并行执行以下业务逻辑。第一线程执行的业务逻辑包括，软件逻辑：停止预览、软件逻辑：关闭相机、软件逻辑：开启相机以及软件逻辑：启动预览。第二线程执行的业务逻辑包括，ISP：停止预览、Sensor：停止预览、Sensor：下电、ISP：启动预览、Sensor：上电以及Sensor：启动预览。

将图3的实现流程与图4的实现流程进行比对可以明显得出，使用本发明实施例中的方案后，实现了交互逻辑的优化。经验证，应用层和Hal层的很多逻辑在几乎不耗时或者耗时很少的情况下执行完，将时间瓶颈留在Kernel层，最终使摄像头控制指令的响应所耗时间近乎等于ISP、Sensor硬件所耗时间，从而减少命令响应耗时，进而显著提升相机的使用体验。

在上述基础上，如图5所示，本发明实施例提供了一种摄像头交互装置20，应用于具有Android操作系统的电子设备10，所述电子设备10包括摄像头，所述摄像头交互装置20包括：接收模块21、发送模块22和控制模块23。

其中，接收模块21用于接收用于控制摄像头的控制指令。

由于接收模块21和图2中步骤S11的实现原理类似，因而在此不作更多说明。

发送模块22用于将所述控制指令分别发送至所述Android操作系统中的Kernel层和Hal层。

由于发送模块22和图2中步骤S12的实现原理类似，因而在此不作更多说明。

控制模块23用于控制所述Kernel层和Hal层并行执行所述控制指令。

由于控制模块23和图2中步骤S13的实现原理类似，因而在此不作更多说明。

可选地，所述电子设备10包括至少两个摄像头，所述电子设备10还包括外置ISP，所述接收模块21还用于，将所述Kernel层和Hal层之间，关闭所述第一摄像头的逻辑和开启所述第二摄像头的逻辑抽象为切换摄像头的逻辑，将所述Kernel层和Hal层之间，关闭所述第二摄像头的逻辑和开启所述第一摄像头的逻辑抽象为切换摄像头的逻辑，得到所述摄像头切换指令。

可选地，将所述控制指令异步发送至所述Android操作系统中的Kernel层和Hal层。

可选地，所述控制模块23用于，控制所述Kernel层对与之存在交互顺序的应用层进行欺骗，控制所述Hal层对与之存在交互顺序的应用层进行欺骗，从而使得所述Kernel层和Hal层并行执行所述控制指令。

本发明实施例中的摄像头交互方法、装置、电子设备及计算机可读存储介质，将控制指令分别发送至Kernel层和Hal层，控制Kernel层和Hal层并行执行控制指令，通过并行执行实现了对摄像头控制指令的快速响应，进而提高了摄像头的使用体验。

在本发明实施例所提供的几个实施例中，应该理解到，所揭露的装置和方法，也可以通过其它的方式实现。以上所描述的装置和方法实施例仅仅是示意性的，例如，附图中的流程图和框图显示了根据本发明的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现方式中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

另外，在本发明各个实施例中的各功能模块可以集成在一起形成一个独立的部分，也可以是各个模块单独存在，也可以两个或两个以上模块集成形成一个独立的部分。

所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，电子设备，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

以上所述仅为本发明的可选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种摄像头交互方法，应用于具有Android操作系统的电子设备，所述电子设备包括摄像头，其特征在于，所述方法包括：

接收用于控制摄像头的控制指令；

将所述控制指令分别发送至所述Android操作系统中的Kernel层和Hal层；

控制所述Kernel层和Hal层并行执行所述控制指令。

2.根据权利要求1所述的摄像头交互方法，其特征在于，所述电子设备包括至少两个摄像头，所述电子设备还包括外置ISP，所述摄像头控制指令包括摄像头切换指令，所述接收用于控制摄像头的控制指令的步骤，包括：

将所述Kernel层和Hal层之间，关闭所述第一摄像头的逻辑和开启所述第二摄像头的逻辑抽象为切换摄像头的逻辑，将所述Kernel层和Hal层之间，关闭所述第二摄像头的逻辑和开启所述第一摄像头的逻辑抽象为切换摄像头的逻辑，得到所述摄像头切换指令。

3.根据权利要求1所述的摄像头交互方法，其特征在于，将所述控制指令分别发送至所述Android操作系统中的Kernel层和Hal层的步骤，包括：

将所述控制指令异步发送至所述Android操作系统中的Kernel层和Hal层。

4.根据权利要求1所述的摄像头交互方法，其特征在于，控制所述Kernel层和Hal层并行执行所述控制指令的步骤包括：

控制所述Kernel层对与之存在交互顺序的应用层进行欺骗，控制所述Hal层对与之存在交互顺序的应用层进行欺骗，从而使得所述Kernel层和Hal层并行执行所述控制指令。

5.一种摄像头交互装置，应用于具有Android操作系统的电子设备，所述电子设备包括摄像头，其特征在于，所述摄像头交互装置包括：

接收模块，用于接收用于控制摄像头的控制指令；

发送模块，用于将所述控制指令分别发送至所述Android操作系统中的Kernel层和Hal层；

控制模块，用于控制所述Kernel层和Hal层并行执行所述控制指令。

6.根据权利要求5所述的摄像头交互装置，其特征在于，所述电子设备包括至少两个摄像头，所述电子设备还包括外置ISP；

所述接收模块还用于，将所述Kernel层和Hal层之间，关闭所述第一摄像头的逻辑和开启所述第二摄像头的逻辑抽象为切换摄像头的逻辑，将所述Kernel层和Hal层之间，关闭所述第二摄像头的逻辑和开启所述第一摄像头的逻辑抽象为切换摄像头的逻辑，得到所述摄像头切换指令。

7.根据权利要求5所述的摄像头交互装置，其特征在于，所述发送模块用于，将所述控制指令异步发送至所述Android操作系统中的Kernel层和Hal层。

8.根据权利要求5所述的摄像头交互装置，其特征在于，所述控制模块用于，控制所述Kernel层对与之存在交互顺序的应用层进行欺骗，控制所述Hal层对与之存在交互顺序的应用层进行欺骗，从而使得所述Kernel层和Hal层并行执行所述控制指令。

9.一种电子设备，其特征在于，包括：

存储器；

处理器；以及

权利要求5～8任一项所述的摄像头交互装置。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质包括计算机程序，所述计算机程序运行时控制所述计算机可读存储介质所在电子设备执行权利要求1～4任一项所述的摄像头交互方法。