CN112312017B - 拍摄控制方法和电子设备 - Google Patents

Abstract

本申请公开了一种拍摄控制方法及电子设备，属于电子技术领域，以解决对于动态主体的拍摄会出现主体失焦的现象的问题。其中，所述方法：在镜头采集图像的情况下，获取动态视觉传感器模组基于触发事件中生成的第一数据；其中，触发事件为采集图像中的拍摄主体在移动状态下产生的触发事件；根据获取的第一数据，获得拍摄主体在预设时间的第一移动信息；根据陀螺仪采集的第二数据，获取拍摄控制装置在预设时间的第二移动信息；根据第一移动信息和第二移动信息，获得镜头的目标移动信息；根据目标移动信息，控制镜头移动；其中，动态视觉传感器模组的视场角覆盖镜头的视场角。本申请中的拍摄控制方法应用于电子设备中。

Description

拍摄控制方法和电子设备

技术领域

本申请属于电子技术领域，具体涉及一种拍摄控制方法和电子设备。

背景技术

用户在使用拍摄控制装置拍摄时，通常对拍摄控制装置的对焦技术要求较高。

常见的拍摄控制装置中，对于静态主体的拍摄，还可以达到较好的对焦效果。而对于动态主体的拍摄，由于物体实时移动，就会出现主体失焦，使得画面出现拖影模糊的现象。

因此，在实现本申请过程中，发明人发现现有技术中至少存在如下问题：对于动态主体的拍摄会出现主体失焦的现象。

发明内容

本申请实施例的目的是提供一种拍摄控制方法，能够解决对于动态主体的拍摄会出现主体失焦的现象的问题。

为了解决上述技术问题，本申请是这样实现的：

第一方面，本申请实施例提供了一种拍摄控制方法，应用于拍摄控制装置，所述拍摄控制装置包括镜头和陀螺仪，所述拍摄控制装置还包括动态视觉传感器模组，所述动态视觉传感器模组的视场角覆盖所述镜头的视场角；所述方法包括：在所述镜头采集图像的情况下，获取所述动态视觉传感器模组基于触发事件中生成的第一数据；其中，所述触发事件为采集图像中的拍摄主体在移动状态下产生的触发事件；根据获取的所述第一数据，获得所述拍摄主体在预设时间的第一移动信息；根据所述陀螺仪采集的第二数据，获取所述拍摄控制装置在所述预设时间的第二移动信息；根据所述第一移动信息和所述第二移动信息，获得所述镜头的目标移动信息；根据所述目标移动信息，控制所述镜头移动。

第二方面，本申请实施例提供了一种拍摄控制装置，所述拍摄控制装置包括镜头和陀螺仪，所述拍摄控制装置还包括：动态视觉传感器模组，所述动态视觉传感器模组的视场角覆盖所述镜头的视场角；第一数据获取模块，用于在所述镜头采集图像的情况下，获取所述动态视觉传感器模组基于触发事件中生成的第一数据；其中，所述触发事件为采集图像中的拍摄主体在移动状态下产生的触发事件；第一信息获取模块，用于根据获取的所述第一数据，获得所述拍摄主体在预设时间的第一移动信息；第二信息获取模块，用于根据所述陀螺仪采集的第二数据，获取所述拍摄控制装置在所述预设时间的第二移动信息；目标信息获取模块，用于根据所述第一移动信息和所述第二移动信息，获得所述镜头的目标移动信息；控制模块，用于根据所述目标移动信息，控制所述镜头移动。

第三方面，本申请实施例提供了一种电子设备，该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。

第四方面，本申请实施例提供了一种可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。

第五方面，本申请实施例提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现如第一方面所述的方法。

在本申请的实施例中，基于现有的常规摄像头模组，增加了动态视觉传感器模组，且动态视觉传感器模组的视场角覆盖常规摄像头模组中的镜头视场角。这样，在常规摄像头模组中的镜头采集图像进行预览和对焦的情况下，动态视觉传感器模组同步开始工作。基于动态视觉传感器模组的工作原理，当预览中的拍摄主体移动时，动态视觉传感器模组不停地触发事件，生成对应的第一数据，从而可根据第一数据，获取拍摄主体在任意时间的第一移动信息；于此同时，用户为了达到拍摄效果，会跟随拍摄主体一起移动，从而根据陀螺仪在同一时间采集的第二数据，获取拍摄控制装置的第二移动信息。进一步地，镜头为了对焦，也需要移动，因此可根据第一移动信息和第二移动信息，计算出目标移动信息，从而按照目标移动信息，控制镜头移动，以使得镜头可实时跟踪拍摄主体进行对焦，避免因拍摄主体移动出现画面失焦模糊的情况。

附图说明

图1是本申请实施例的拍摄控制方法的流程图；

图2是本申请实施例的动态视觉传感器模组的电路图；

图3是本申请实施例的动态视觉传感器模组的信号输出图；

图4是本申请实施例的动态视觉传感器模组的框图；

图5是本申请实施例的拍摄控制装置的平面示意图；

图6是本申请实施例的拍摄控制装置的局部结构示意图；

图7是本申请实施例的拍摄控制方法的示意图之一；

图8是本申请实施例的拍摄控制方法的示意图之二；

图9是本申请实施例的拍摄控制装置的硬件结构示意图之一；

图10是本申请实施例的OIS摄像头模组的硬件结构示意图之一；

图11是本申请实施例的OIS摄像头模组的硬件结构示意图之二；

图12是本申请实施例的拍摄控制装置的硬件结构示意图之二；

图13是本申请实施例的拍摄控制装置的框图；

图14是本申请实施例的电子设备的硬件结构示意图之一。

图15是本申请实施例的电子设备的硬件结构示意图之二。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施，且“第一”、“第二”等所区分的对象通常为一类，并不限定对象的个数，例如第一对象可以是一个，也可以是多个。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。

下面结合附图，通过具体的实施例及其应用场景对本申请实施例提供的拍摄控制方法进行详细地说明。

图1示出了本申请一个实施例的拍摄控制方法的流程图，应用于拍摄控制装置，拍摄控制装置包括镜头、陀螺仪和动态视觉传感器(Dynamic Vision Sensors，简称DVS)模组。拍摄控制方法包括：

步骤S1：在镜头采集图像的情况下，获取动态视觉传感器模组基于触发事件中生成的第一数据。

本实施例应用于的拍摄控制装置，在包括常规摄像头模组的同时，加入了动态视觉传感器模组，以在启动摄像头模组采集图像进行预览的同时，启动动态视觉传感器模组进行工作。因采集的图像中，若拍摄主体为移动状态，则动态视觉传感器模组不停地触发事件，生成对应的数据流，即本实施例中的第一数据。因此，可根据生成的数据流，对拍摄主体的移动状态进行判断、分析等。

可见，本实施例在常规摄像头模组拍摄情况下，提供一种由动态视觉传感器模组实现的辅助拍摄方案。

其中，摄像头模组至少包括本实施例中的镜头。

需要说明的是，DVS是以事件驱动型(event-driven)的光电传感器，DVS中的每个像素独立感受光强变化，将光强变化超过阈值的像素认为是激活像素，然后及时将激活像素的行列位置、极性信息、时间戳等信息打包并编码输出。

DVS的工作原理如下：

参见图2，在DVS的系统框图中，包括对数转换单元1、变化检测单元2和比较器单元3。其中，对数转换单元1用于把光电电子对数转换为电压；变化检测单元2用于对输出电压进行负反馈放大；比较器单元3用于对输出变化值进行阈值判断。参见图3，在DVS信号输出图中，当光强变大超过阈值时输出“ON”信号，反之输出“OFF”信号。

参见图4，在DVS工作模块图中，在像素阵列中，生成事件的像素4向列编码输出模块5发出请求(CR)，列编码输出模块5接受请求发出确认信号(ACK)，并将相应像素4的极性信息输入行编码输出模块6，行编码输出模块6可以生成行地址信息，以及时间戳生成器7生成时间戳；行编码输出模块控制生成复位(reset)信号；输出缓冲器8针对地址信息、极性信息、时间戳生成完整事件信息。

基于上述工作原理，在现实生活中拍摄，动态视觉传感器模组中响应的像素数量只为常规摄像头的5％左右，因此可以做到：等效帧率可达到10000每秒帧数(frame persecond，fps)，甚至更高，可以记录细微的运动姿态；事件冗余度低，用于运算处理的数据量小，对处理需求的算力小。

因此，本实施例利用DVS的工作原理，将动态视觉传感器模组加入拍摄控制装置中，以在镜头采集图像时，若图像中的拍摄主体移动，可在动态视觉传感器模组中产生触发事件，从而得知拍摄主体移动这一现象，再进一步做处理。

对应地，该步骤中的触发事件为：采集图像中的拍摄主体在移动状态下产生的触发事件。

其中，动态视觉传感器模组的视场角覆盖镜头的视场角。

参见图5，在本实施例中，采用了双摄设计，包含了一个常规的摄像头模组9，以及采用DVS芯片的动态视觉传感器模组11。参见图6，为了保证拍摄主体可被动态视觉传感器模组11准确记录，动态视觉传感器模组11的视场角α2(field ofview，FOV)应覆盖用于摄像头模组9的视场角α1，且两个模组的距离应越近越好。

应用场景如：打开摄像头镜头后，摄像头镜头采集图像，拍摄控制装置显示预览画面，用户在预览画面中，对拍摄主体进行预览并对焦，动态视觉传感器模组也同时开始工作。当拍摄主体在预览过程中进行移动时，动态视觉传感器模组会不停地触发事件，生成对应的数据流。

步骤S2：根据获取的第一数据，获得拍摄主体在预设时间的第一移动信息。

在该步骤中，基于拍摄主体的移动，动态视觉传感器模组会不停地触发事件，生成对应的数据流，因此，生成的数据流可体现出拍摄主体的移动状态，从而在该步骤中，根据获取的数据流，获得拍摄主体的第一移动信息。

第一移动信息包括瞬时移动速度、预设时长内的平均移动速度、预设时长内的位移中的至少一项，且瞬时移动速度、预设时长内的平均移动速度、预设时长内的位移均包括移动方向。

其中，预设时间包括任一时刻和任一时长中的至少一种。

步骤S3：根据陀螺仪采集的第二数据，获取拍摄控制装置在预设时间的第二移动信息。

当拍摄主体移动时，用户为了追踪拍摄主体，同时开始移动拍摄控制装置，例如用户水平移动拍摄控制装置，从而在该步骤中，获取拍摄控制装置的第二移动信息，即获取用户的移动信息。

第二移动信息包括瞬时移动速度、预设时长内的平均移动速度、预设时长内的位移中的至少一项，且瞬时移动速度、预设时长内的平均移动速度、预设时长内的位移均包括移动方向。

可选地，第二移动信息与第一移动信息在时间上相对应，即若第一移动信息是某一时刻的瞬时移动速度，则第二移动信息为对应时刻的瞬时移动速度；若第一移动信息是某一时长内的平均移动速度，则第二移动信息为对应时长内的平均移动速度。

可选地，第二移动信息与第一移动信息在类型上相对应，即若第一移动信息包括移动速度，则第二移动信息包括移动速度；若第一移动信息包括位移，则第二移动信息包括位移。这样，便于根据第二移动信息和第一移动信息，通过计算间接得到其它移动数据，且确保计算的准确性。

其中，预设时间包括任一时刻和任一时长中的至少一种。且该步骤中的预设时长与上一步骤中的预设时间一致。

步骤S4：根据第一移动信息和第二移动信息，获得镜头的目标移动信息。

在该步骤中，在拍摄主体和拍摄控制装置都处于移动状态的情况下，为了确保镜头可实时根据移动的拍摄主体，以实现实时跟踪对焦，需控制镜头也进入移动状态，以补偿拍摄主体和拍摄控制装置之间的位移差。

因此，在该步骤中，根据第一移动信息和第二移动信息，获得镜头的目标移动信息。

目标移动信息包括瞬时移动速度、预设时长内的平均移动速度、预设时长内的位移中的至少一项，且瞬时移动速度、预设时长内的平均移动速度、预设时长内的位移均包括移动方向。

可选地，在第一移动信息和第二移动信息包括移动速度的情况下，得到的目标移动信息可以包括移动速度。进一步地，随着第一移动信息和第二移动信息中的移动速度不断变化，目标移动信息中的移动速度也实时变化。

可选地，因在拍摄过程中，移动速度都是基于很短暂的时长、或者瞬时得到的，可以理解为镜头相对于拍摄主体偏移了一小段位移，因此，在第一移动信息和第二移动信息包括移动速度的情况下，得到的目标移动信息可以包括位移。

可选地，在第一移动信息和第二移动信息包括位移的情况下，得到的目标移动信息可以包括位移。这里的位移都可以看作是很短暂时长发生的位移。

步骤S5：根据目标移动信息，控制镜头移动。

在该步骤后，基于上一步骤得到的目标移动信息，控制镜头以目标移动信息移动。镜头移动的同时，对拍摄主体进行对焦，从而对移动的拍摄主体实现了跟踪对焦。

需要说明的是，在本申请的实施例中，因第一移动信息和第二移动信息，是在很微小的时长内获取的，甚至微小至瞬时，因此在获取第一移动信息和第二移动信息之后，再根据得到的目标移动信息去控制镜头移动，几乎可以看作是拍摄主体移动时，同步调整镜头，从而实现实时跟踪对焦。

在本申请的实施例中，基于现有的常规摄像头模组，增加了动态视觉传感器模组，且动态视觉传感器模组的视场角覆盖常规摄像头模组中的镜头视场角。这样，在常规摄像头模组中的镜头采集图像进行预览和对焦的情况下，动态视觉传感器模组同步开始工作。基于动态视觉传感器模组的工作原理，当预览中的拍摄主体移动时，动态视觉传感器模组不停地触发事件，生成对应的第一数据，从而可根据第一数据，获取拍摄主体在任意时间的第一移动信息；于此同时，用户为了达到拍摄效果，会跟随拍摄主体一起移动，从而根据陀螺仪在同一时间采集的第二数据，获取拍摄控制装置的第二移动信息。进一步地，镜头为了对焦，也需要移动，因此可根据第一移动信息和第二移动信息，计算出目标移动信息，从而按照目标移动信息，控制镜头移动，以使得镜头可实时跟踪拍摄主体进行对焦，避免因拍摄主体移动出现画面失焦模糊的情况。

在本申请另一个实施例的拍摄控制方法中，第一数据至少包括时刻和坐标，步骤S1包括：

步骤S11：在镜头采集图像的情况下，获取动态视觉传感器模组在第一时刻基于触发事件中生成的第一坐标。

步骤S12：在镜头采集图像的情况下，获取动态视觉传感器模组在第二时刻基于触发事件中生成的第二坐标。

第一移动信息包括第一移动速度；步骤S2包括：

步骤S21：根据公式一：

获得拍摄主体的第一移动速度；其中，v1为第一移动速度，d为动态视觉传感器模组的像素尺寸，t1为第一时刻，x1为第一时刻事件触发时所在像素的横坐标值，y1为第一时刻事件触发时所在像素的纵坐标值，t2为第二时刻，x2为第二时刻事件触发时所在像素的横坐标值，y2为第二时刻事件触发时所在像素的纵坐标值；

其中，第一坐标包括x1和y1；第二坐标包括x2和y2；第一时刻早于第二时刻。

参见图7，基于拍摄主体的移动，触发动态视觉传感器模组分别在t1时刻和t2时刻产生了两组第一数据，分别是(x1，y1，p1，t1)和(x2，y2，p2，t2)。其中，对第一数据(x，y，p，t)说明如下：

x：事件触发时所在像素的横坐标值；

y：事件触发时所在像素的纵坐标值；

p：事件触发时亮度的变化值(变亮为1，变暗为0)；

t：事件触发的时间戳；

因此，在t1～t2的时长内，拍摄主体的平均移动速度为：

其中，基于上述公式可得到第一移动速度值，可结合实际移动的方向，得到移动方向。

在本实施例中，可获取任意两个时刻，动态视觉传感器模组中的两组数据，从而根据这两组数据，得到这两个时刻对应的时长内，拍摄主体的移动速度，作为第一移动信息。

在本申请另一个实施例的拍摄控制方法中，第二数据至少包括角速度；第二移动信息包括第二移动速度；步骤S3包括：

步骤S31：获取陀螺仪在第一时刻采集到的第二角速度。

步骤S32：获取陀螺仪在第二时刻采集到的第二角速度。

步骤S33：根据第一角速度和第二角速度，获得述拍摄控制装置在第一时刻和第二时刻之间的时长内的第二移动速度。

参见图5，拍摄控制装置还包括陀螺仪12。在该步骤中，可分别获取t1时刻和t2时刻的陀螺仪数据，以计算得到装置整体的移动速度，即第二移动速度，此速度也即当前摄像头镜头整体移动的速度。

可选地，可由应用处理器(ApplicationProcessor，AP)获取陀螺仪数据。

参见图8，应用场景如，当拍摄主体在t1～t2时刻之间发生移动时，用户为了拍摄效果，跟随拍摄主体进行移动，而由于人为移动的原因，导致镜头跟随用户移动发生的位置变化，与拍摄主体的实际位置变化，有差异，因此，根据二者的位置变化，找到存在的差异，以控制镜头去移动，从而弥补该差异，使得镜头可继续对焦拍摄主体。

在本实施例中，在获取任意两个时刻动态视觉传感器模组中的两组数据，再得到这两个时刻对应的时长内，拍摄主体的移动速度的基础上，获取对应时长内，装置的整体移动速度，作为第二移动信息。

在本申请另一个实施例的拍摄控制方法中，目标移动信息包括目标移动速度；步骤S4包括：

步骤S41：根据第一移动速度和第二移动速度，获得目标移动速度。

在该步骤中，第一移动速度给传输至应用处理器，同时应用处理器可以通过陀螺仪提供的数据，得到第二移动速度，通过第一移动速度和第二移动速度，应用处理器可以计算镜头的目标移动速度，其中包括目标移动速度值和目标移动方向。

另外，在该步骤中，第一移动速度给传输至应用处理器，同时应用处理器可以通过陀螺仪提供的数据，得到第二移动速度，通过第一移动速度和第二移动速度，应用处理器可以计算镜头在该时间段内需要移动的距离，以及移动的方向。

因动态视觉传感器模组中，两次事件之间间隔时长单位在ns～us级别的，间隔时长极短，而在此期间，拍摄主体和拍摄控制装置的移动距离是很小的，因此本实施例将这个很小的距离以速度的形式体现出来，而在控制镜头移动时，又可将得到的速度相差，通过移动距离体现出来。

可见，在更多的实施例中，为了得到精确的已发生的移动信息，可以速度的形式来体现，而具体到控制移动时，又以距离的形式体现出来，更容易实现。

第一移动信息和第二移动信息用于体现出已发生的位置变化，目标移动信息用于体现出即将发生的位置变化，而具体包括的信息类型可依据不同的算法，选择适用的类型，如速度、位移等。在本实施例中，优选以平均速度的形式去体现位置变化，使得体现出来实际位置变化更加贴切，同时依据计算得来的目标速度去调整镜头，并根据实际发生的速度变化去实时变化目标速度，使得调整镜头的精准度更高，从而实现精准对焦。

可选地，第一时刻与第二时刻为相邻的两个时刻。

动态视觉传感器模组中，两次相邻的触发事件之间的间隔时长大于10ns。

第一时刻与第二时刻的时间间隔越小，镜头捕获拍摄主体的精度就越高。

在本申请另一个实施例的拍摄控制方法中，拍摄控制装置还包括光学防抖(Optical image stabilization，OIS)马达；步骤S5包括：

步骤S51：根据目标移动信息，确定镜头的移动方向和移动速度。

步骤S52：根据移动方向和移动速度，控制光学防抖马达推动镜头移动。

参见图9，可选地，拍摄控制装置包括OIS摄像头模组13、应用处理器14、陀螺仪15，OIS摄像头模组13包括镜头131、OIS马达132、OIS driver芯片(Integrated Circuit，IC)133、CMOS图像传感器(CMOS Image sensor，CIS)134。其工作过程如下：

CMOS图像传感器134将像素点(pdpixel data)采集到的数据传送给应用处理器14，应用处理器14计算出相位差，并通过集成电路总线(Inter-Integrated Circuit，IIC)将OIS马达132需要移动的距离下给OIS driver IC 133；OIS driver IC 133收到应用处理器14指令后推动镜头131垂直方向移动实现对焦；同步于CMOS图像传感器134将pd像素点采集到的数据传送给应用处理器14，陀螺仪15的数据持续发给OIS driver IC 133；OISdriver IC 133收到陀螺仪15数据后，计算需要移动的水平距离并推动OIS马达132水平移动，进而实现针对水平抖动的补偿。

参见图10，在OIS摄像头模组中，镜头131的四周设有线圈135，线圈135对应的空间设有磁铁136，镜头131与马达悬丝137连接。线圈135和磁铁136相互搭配实现镜头131的垂直方向的对焦；OIS driver IC 133提供电流给马达悬丝137，马达悬丝137受热发生形变，带动镜头131一起运动，实现水平方向内的抖动补偿。另外，在拍摄控制装置中，柔性电路板(Flexible Printed Circuit，FPC)16实现板对板连接器(boardto board connector，BTB)17到OIS摄像头模组头部元器件的电气连接；BTB实现OIS摄像头模组到装置主板的电气连接。

参见图11所示的箭头，假设用户手持装置发生水平向右的抖动，则OIS马达132会推动镜头131向左移动，以此补偿抖动。其中，较粗的箭头用于指示电流流动路径，较细的箭头用于指示推动镜头131的方向。

参见图12，而在本实施例中，利用OIS摄像头模组的工作原理，在应用处理器14获取陀螺仪15的数据，得到第二移动速度，以及获取动态视觉传感器模组18的数据，得到第一移动速度之后，根据这两个数据计算出需要驱动OIS马达132移动的速度，然后下指令给到OIS driver IC 133来推动OIS马达132和镜头131进行水平方向的移动，通过这种方式让镜头131可以持续跟踪拍摄主体，实现对拍摄主体的实时对焦。

本实施例适用于任意OIS马达的硬件设备。

综上，在现有技术中，摄像头模组一般采用反差对焦(ContrastAutofocus，CAF)或者相位检测对焦(Phase DetectionAutofocus，PDAF)的对焦技术。

CAF技术实现原理是系统给音圈马达(Voice Coil motor，VCM)下指令，推动镜头按照一定的步长从远焦到近焦进行移动，记录每一步对应的图像对比度，然后找到对比度最大的图片对应的位置，这个位置即是我们需要的对焦清晰的点。

PDAF技术实现原理跟CAF略有不同，需要结合图像传感器来实现对焦。通常情况下，图像传感器上分布有专门用于PDAF的pd像素，这些像素分左像素点和右像素点，用于模拟人的左眼和右眼。PDAF实现过程如下：首先图像传感器通过左像素点和右像素点接收目标物的图像并分别形成左像素点图像和右像素点图像，然后经过AP的处理拟合成相位曲线。通过计算左右图像的相位差，转换成需要推动VCM运动的距离，以此实现镜头的对焦。

不论是CAF还是PDAF，只能实现镜头的纵向移动对焦。实际拍照过程中，用户会因手抖等原因而带动镜头也一起发生水平或者其他方向的抖动，这个抖动会使拍出来图片出现拖影模糊等问题。为了解决这个问题，目前摄像头一般会使用OIS马达来替代普通的VCM。OIS马达除了结合CAF或者PDAF功能实现垂直方向对焦外，还可以借助设备中的陀螺仪获取拍照时摄像头的抖动数据，对抖动进行补偿，以此来改善抖动引起的画面模糊的问题。

不论是CAF还是PDAF，都只有当拍摄主体处于静态时才有较好的对焦效果；即使加入OIS，也只是对拍摄者拍照时的轻微抖动进行补偿。当拍摄主体(如人物)进行移动时，上述对焦方式并不能对被摄对象进行实时跟踪对焦，会出现主体失焦，画面出现拖影模糊的现象。

而在本申请中，使用上述动态视觉传感器模组与常规的摄像头模组融合，因为DVS摄像头的等效帧率极高，可以精确计算出曝光开始前一瞬间被摄物体的移动速度，从而在拍摄快速移动的主体时，可以结合OIS实现对移动主体物体的实时跟踪对焦，避免因拍摄主体移动出现画面失焦模糊的情况。另外，DVS芯片不需要在像素表面覆盖用于截取部分波段的滤波片阵列，可以拓宽吸收频谱，即使在暗光下依然可以准确记录物体运动状态，进而提高暗光下快速运动物体的对焦效果。

需要说明的是，本申请实施例提供的拍摄控制方法，执行主体可以为拍摄控制装置，或者该拍摄控制装置中的用于执行拍摄控制方法的控制模块。本申请实施例中以拍摄控制装置执行拍摄控制方法为例，说明本申请实施例提供的拍摄控制方法的装置。

图13示出了本申请另一个实施例的拍摄控制装置的框图，拍摄控制装置包括镜头10和陀螺仪20；

动态视觉传感器模组30，动态视觉传感器模组30的视场角覆盖镜头1010的视场角；

第一数据获取模块40，用于在镜头10采集图像的情况下，获取动态视觉传感器模组30基于触发事件中生成的第一数据；其中，触发事件为采集图像中的拍摄主体在移动状态下产生的触发事件；

第一信息获取模块50，用于根据获取的第一数据，获得拍摄主体在预设时间的第一移动信息；

第二信息获取模块60，用于根据陀螺仪20采集的第二数据，获取拍摄控制装置在预设时间的第二移动信息；

目标信息获取模块70，用于根据第一移动信息和第二移动信息，获得镜头10的目标移动信息；

控制模块80，用于根据目标移动信息，控制镜头10移动。

在本申请的实施例中，基于现有的常规摄像头模组，增加了动态视觉传感器模组30，且动态视觉传感器模组30的视场角覆盖常规摄像头模组中的镜头10视场角。这样，在常规摄像头模组中的镜头10采集图像进行预览和对焦的情况下，动态视觉传感器模组30同步开始工作。基于动态视觉传感器模组30的工作原理，当预览中的拍摄主体移动时，动态视觉传感器模组30不停地触发事件，生成对应的第一数据，从而可根据第一数据，获取拍摄主体在任意时间的第一移动信息；于此同时，用户为了达到拍摄效果，会跟随拍摄主体一起移动，从而根据陀螺仪20在同一时间采集的第二数据，获取拍摄控制装置的第二移动信息。进一步地，镜头10为了对焦，也需要移动，因此可根据第一移动信息和第二移动信息，计算出目标移动信息，从而按照目标移动信息，控制镜头10移动，以使得镜头10可实时跟踪拍摄主体进行对焦，避免因拍摄主体移动出现画面失焦模糊的情况。

可选地，第一数据至少包括时刻和坐标；第一数据获取模块40，包括：

第一坐标获取单元，用于获取动态视觉传感器模组30在第一时刻基于触发事件中生成的第一坐标；

第二坐标获取单元，用于获取动态视觉传感器模组30在第二时刻基于触发事件中生成的第二坐标；

第一移动信息包括第一移动速度；第一信息获取模块50，包括：

第一速度获取单元，用于根据公式一：

获得拍摄主体的第一移动速度；其中，v1为第一移动速度，d为动态视觉传感器模组30的像素尺寸，t1为第一时刻，x1为第一时刻事件触发时所在像素的横坐标值，y1为第一时刻事件触发时所在像素的纵坐标值，t2为第二时刻，x2为第二时刻事件触发时所在像素的横坐标值，y2为第二时刻事件触发时所在像素的纵坐标值；

其中，第一坐标包括x1和y1；第二坐标包括x2和y2；第一时刻早于第二时刻。

可选地，第二数据至少包括角速度；第二移动信息包括第二移动速度；第二信息获取模块60，包括：

第一角速度获取单元，用于获取陀螺仪20在第一时刻采集到的第一角速度；

第二坐标信息获取单元，用于获取陀螺仪20在第二时刻采集到的第二角速度；

第二速度获取单元，用于根据第一角速度和第二角速度，获得拍摄控制装置在第一时刻和第二时刻之间的时长内的第二移动速度。

可选地，目标移动信息包括目标移动速度；目标信息获取模块70，包括：

目标速度获取单元，用于根据第一移动速度和第二移动速度，获得目标移动速度。

可选地，第一时刻与所述第二时刻为相邻的两个时刻。

可选地，拍摄控制装置还包括光学防抖马达；

控制模块80，包括：

确定单元，用于根据目标移动信息，确定镜头10的移动方向和移动速度；

移动单元，用于根据移动方向和移动速度，控制光学防抖马达推动镜头10移动。

本申请实施例中的拍摄控制装置可以是装置，也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备，也可以为非移动电子设备。示例性的，移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer，UMPC)、上网本或者个人数字助理(personaldigital assistant，PDA)等，非移动电子设备可以为服务器、网络附属存储器(NetworkAttached Storage，NAS)、个人计算机(personal computer，PC)、电视机(television，TV)、柜员机或者自助机等，本申请实施例不作具体限定。

本申请实施例中的拍摄控制装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统，可以为ios操作系统，还可以为其他可能的操作系统，本申请实施例不作具体限定。

本申请实施例提供的拍摄控制装置能够实现图1至图12的方法实施例实现的各个过程，为避免重复，这里不再赘述。

可选的，如图14所示，本申请实施例还提供一种电子设备100，包括处理器101，存储器102，存储在存储器102上并可在所述处理器101上运行的程序或指令，该程序或指令被处理器101执行时实现上述拍摄控制方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

需要说明的是，本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。

图15为实现本申请实施例的一种电子设备的硬件结构示意图。

该电子设备1000包括但不限于：射频单元1001、网络模块1002、音频输出单元1003、输入单元1004、传感器1005、显示单元1006、用户输入单元1007、接口单元1008、存储器1009、以及处理器1010等部件。

本领域技术人员可以理解，电子设备1000还可以包括给各个部件供电的电源(比如电池)，电源可以通过电源管理系统与处理器1010逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图15中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置，在此不再赘述。

其中，电子设备1000还包括镜头1011、动态视觉传感器模组1012和陀螺仪1013，动态视觉传感器模组1012的视场角覆盖镜头1011的视场角；

处理器1010，用于在镜头1011采集图像的情况下，获取动态视觉传感器模组1012基于触发事件中生成的第一数据；其中，触发事件为采集图像中的拍摄主体在移动状态下产生的触发事件；根据获取的第一数据，获得拍摄主体在预设时间的第一移动信息；根据陀螺仪1013采集的第二数据，获取电子设备1000在预设时间的第二移动信息；根据第一移动信息和第二移动信息，获得镜头1011的目标移动信息；根据目标移动信息，控制镜头1011移动。

在本申请的实施例中，基于现有的常规摄像头模组，增加了动态视觉传感器模组1012，且动态视觉传感器模组1012的视场角覆盖常规摄像头模组中的镜头1011视场角。这样，在常规摄像头模组中的镜头1011采集图像进行预览和对焦的情况下，动态视觉传感器模组1012同步开始工作。基于动态视觉传感器模组1012的工作原理，当预览中的拍摄主体移动时，动态视觉传感器模组1012不停地触发事件，生成对应的第一数据，从而可根据第一数据，获取拍摄主体在任意时间的第一移动信息；于此同时，用户为了达到拍摄效果，会跟随拍摄主体一起移动，从而根据陀螺仪1013在同一时间采集的第二数据，获取拍摄控制装置的第二移动信息。进一步地，镜头1011为了对焦，也需要移动，因此可根据第一移动信息和第二移动信息，计算出目标移动信息，从而按照目标移动信息，控制镜头1011移动，以使得镜头1011可实时跟踪拍摄主体进行对焦，避免因拍摄主体移动出现画面失焦模糊的情况。

可选地，所述第一数据至少包括时刻和坐标；第一移动信息包括第一移动速度；处理器1010，还用于获取动态视觉传感器模组1012在第一时刻基于触发事件中生成的第一坐标；获取动态视觉传感器模组1012在第二时刻基于触发事件中生成的第二坐标；根据公式一：，获得拍摄主体的第一移动速度；其中，v1为第一移动速度，d为动态视觉传感器模组1012的像素尺寸，t1为第一时刻，x1为第一时刻事件触发时所在像素的横坐标值，y1为第一时刻事件触发时所在像素的纵坐标值，t2为第二时刻，x2为第二时刻事件触发时所在像素的横坐标值，y2为第二时刻事件触发时所在像素的纵坐标值；其中，第一坐标包括x1和y1；第二坐标包括x2和y2；第一时刻早于第二时刻。

可选地，所述第二数据至少包括角速度；所述第二移动信息包括第二移动速度；处理器1010，还用于获取陀螺仪1013在所述第一时刻采集到的第一角速度；获取陀螺仪1013在所述第二时刻采集到的第二角速度；根据所述第一角速度和所述第二角速度，获得所述拍摄控制装置在所述第一时刻和所述第二时刻之间的时长内的第二移动速度。

可选地，目标移动信息包括目标移动速度；处理器1010，还用于根据第一移动速度和第二移动速度，获得目标移动速度。

可选地，第一时刻与第二时刻为相邻的两个时刻。

可选地，电子设备1000还包括光学防抖马达；处理器1010，还用于根据所述目标移动信息，确定所述镜头的移动方向和移动速度；根据所述移动方向和所述移动速度，控制所述光学防抖马达推动所述镜头移动。

本申请中，使用上述动态视觉传感器模组1012与常规的摄像头模组融合，因为DVS摄像头的等效帧率极高，可以精确计算出曝光开始前一瞬间被摄物体的移动速度，从而在拍摄快速移动的主体时，可以结合OIS实现对移动主体物体的实时跟踪对焦，避免因拍摄主体移动出现画面失焦模糊的情况。另外，DVS芯片不需要在像素表面覆盖用于截取部分波段的滤波片阵列，可以拓宽吸收频谱，即使在暗光下依然可以准确记录物体运动状态，进而提高暗光下快速运动物体的对焦效果。

应理解的是，本申请实施例中，输入单元1004可以包括图形处理器(GraphicsProcessing Unit，GPU)10041和麦克风10042，图形处理器10041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元1006可包括显示面板10061，可以采用液晶显示器、有机发光二极管等形式来配置显示面板10061。用户输入单元1007包括触控面板10071以及其他输入设备10072。触控面板10071，也称为触摸屏。触控面板10071可包括触摸检测装置和触摸控制器两个部分。其他输入设备10072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。存储器1009可用于存储软件程序以及各种数据，包括但不限于应用程序和操作系统。处理器1010可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器1010中。

本申请实施例还提供一种可读存储介质，所述可读存储介质上存储有程序或指令，该程序或指令被处理器执行时实现上述拍摄控制方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

其中，所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质，包括计算机可读存储介质，如计算机只读存储器(Read-Only Memory，ROM)、随机存取存储器(RandomAccess Memory，RAM)、磁碟或者光盘等。

本申请实施例另提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现上述拍摄控制方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

应理解，本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外，需要指出的是，本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能，还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能，例如，可以按不同于所描述的次序来执行所描述的方法，并且还可以添加、省去、或组合各种步骤。另外，参照某些示例所描述的特征可在其他示例中被组合。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本申请各个实施例所述的方法。

上面结合附图对本申请的实施例进行了描述，但是本申请并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本申请的启示下，在不脱离本申请宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本申请的保护之内。

Claims (14)

1.一种拍摄控制方法，应用于拍摄控制装置，所述拍摄控制装置包括镜头和陀螺仪，其特征在于，所述拍摄控制装置还包括动态视觉传感器模组，所述动态视觉传感器模组的视场角覆盖所述镜头的视场角；所述方法包括：

在所述镜头采集图像的情况下，获取所述动态视觉传感器模组基于触发事件中生成的第一数据；其中，所述触发事件为采集图像中的拍摄主体在移动状态下产生的触发事件；

根据获取的所述第一数据，获得所述拍摄主体在预设时间的第一移动信息；

根据所述陀螺仪采集的第二数据，获取所述拍摄控制装置在所述预设时间的第二移动信息；

根据所述第一移动信息和所述第二移动信息，获得所述镜头的目标移动信息；

根据所述目标移动信息，控制所述镜头移动。

2.根据权利要求1所述的方法，其特征在于，所述第一数据至少包括时刻和坐标；所述获取所述动态视觉传感器模组基于触发事件中生成的第一数据，包括：

获取所述动态视觉传感器模组在第一时刻基于触发事件中生成的第一坐标；

获取所述动态视觉传感器模组在第二时刻基于触发事件中生成的第二坐标；

所述第一移动信息包括第一移动速度；所述根据获取的所述第一数据，获得所述拍摄主体在预设时间的第一移动信息，包括：

根据公式一：

获得所述拍摄主体的第一移动速度；其中，v1为所述第一移动速度，d为所述动态视觉传感器模组的像素尺寸，t1为所述第一时刻，x1为所述第一时刻事件触发时所在像素的横坐标值，y1为所述第一时刻事件触发时所在像素的纵坐标值，t2为所述第二时刻，x2为所述第二时刻事件触发时所在像素的横坐标值，y2为所述第二时刻事件触发时所在像素的纵坐标值；

其中，所述第一坐标包括x1和y1；所述第二坐标包括x2和y2；所述第一时刻早于所述第二时刻。

3.根据权利要求2所述的方法，其特征在于，所述第二数据至少包括角速度；所述第二移动信息包括第二移动速度；所述根据所述陀螺仪采集的第二数据，获取所述拍摄控制装置在所述预设时间的第二移动信息，包括：

获取所述陀螺仪在所述第一时刻采集到的第一角速度；

获取所述陀螺仪在所述第二时刻采集到的第二角速度；

根据所述第一角速度和所述第二角速度，获得所述拍摄控制装置在所述第一时刻和所述第二时刻之间的时长内的第二移动速度。

4.根据权利要求3所述的方法，其特征在于，所述目标移动信息包括目标移动速度；

所述根据所述第一移动信息和所述第二移动信息，获得所述镜头的目标移动信息，包括：

根据所述第一移动速度和所述第二移动速度，获得目标移动速度。

5.根据权利要求2所述的方法，其特征在于，所述第一时刻与所述第二时刻为相邻的两个时刻。

6.根据权利要求1所述的方法，其特征在于，所述拍摄控制装置还包括光学防抖马达；

所述根据所述目标移动信息，控制所述镜头移动，包括：

根据所述目标移动信息，确定所述镜头的移动方向和移动速度；

根据所述移动方向和所述移动速度，控制所述光学防抖马达推动所述镜头移动。

7.一种拍摄控制装置，所述拍摄控制装置包括镜头和陀螺仪，其特征在于，所述拍摄控制装置还包括：

动态视觉传感器模组，所述动态视觉传感器模组的视场角覆盖所述镜头的视场角；

第一数据获取模块，用于在所述镜头采集图像的情况下，获取所述动态视觉传感器模组基于触发事件中生成的第一数据；其中，所述触发事件为采集图像中的拍摄主体在移动状态下产生的触发事件；

第一信息获取模块，用于根据获取的所述第一数据，获得所述拍摄主体在预设时间的第一移动信息；

第二信息获取模块，用于根据所述陀螺仪采集的第二数据，获取所述拍摄控制装置在所述预设时间的第二移动信息；

目标信息获取模块，用于根据所述第一移动信息和所述第二移动信息，获得所述镜头的目标移动信息；

控制模块，用于根据所述目标移动信息，控制所述镜头移动。

8.根据权利要求7所述的装置，其特征在于，所述第一数据至少包括时刻和坐标；所述第一数据获取模块，包括：

第一坐标获取单元，用于获取所述动态视觉传感器模组在第一时刻基于触发事件中生成的第一坐标；

第二坐标获取单元，用于获取所述动态视觉传感器模组在第二时刻基于触发事件中生成的第二坐标；

所述第一移动信息包括第一移动速度；所述第一信息获取模块，包括：

第一速度获取单元，用于根据公式一：

获得所述拍摄主体的第一移动速度；其中，v1为所述第一移动速度，d为所述动态视觉传感器模组的像素尺寸，t1为所述第一时刻，x1为所述第一时刻事件触发时所在像素的横坐标值，y1为所述第一时刻事件触发时所在像素的纵坐标值，t2为所述第二时刻，x2为所述第二时刻事件触发时所在像素的横坐标值，y2为所述第二时刻事件触发时所在像素的纵坐标值；

其中，所述第一坐标包括x1和y1；所述第二坐标包括x2和y2；所述第一时刻早于所述第二时刻。

9.根据权利要求8所述的装置，其特征在于，所述第二数据至少包括角速度；所述第二移动信息包括第二移动速度；所述第二信息获取模块，包括：

第一角速度获取单元，用于获取所述陀螺仪在所述第一时刻采集到的第一角速度；

第二坐标信息获取单元，用于获取所述陀螺仪在所述第二时刻采集到的第二角速度；

第二速度获取单元，用于根据所述第一角速度和所述第二角速度，获得所述拍摄控制装置在所述第一时刻和所述第二时刻之间的时长内的第二移动速度。

10.根据权利要求9所述的装置，其特征在于，所述目标移动信息包括目标移动速度；所述目标信息获取模块，包括：

目标速度获取单元，用于根据所述第一移动速度和所述第二移动速度，获得目标移动速度。

11.根据权利要求8所述的装置，其特征在于，所述第一时刻与所述第二时刻为相邻的两个时刻。

12.根据权利要求7所述的装置，其特征在于，所述拍摄控制装置还包括光学防抖马达；

所述控制模块，包括：

确定单元，用于根据所述目标移动信息，确定所述镜头的移动方向和移动速度；

移动单元，用于根据所述移动方向和所述移动速度，控制所述光学防抖马达推动所述镜头移动。

13.一种电子设备，其特征在于，包括处理器，存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如权利要求1-6任一项所述的拍摄控制方法的步骤。

14.一种可读存储介质，其特征在于，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如权利要求1-6任一项所述的拍摄控制方法的步骤。

Images