CN114697465B - 多图像传感器同步、协作方法及装置、存储介质、终端 - Google Patents

Abstract

一种多图像传感器同步、协作方法及装置、存储介质、终端，所述多图像传感器同步方法包括：接收主图像传感器发送的同步脉冲，所述同步脉冲指示当前帧的起始位置；响应于接收到所述同步脉冲，执行像素行的读取操作和曝光操作；根据所述当前帧的起始位置以及当前帧率输出所述当前帧；如果输出所述当前帧完成后未接收到所述主图像传感器发送的下一同步脉冲，则输出无效像素行，直至接收到所述下一同步脉冲。本发明技术方案能够保证图像的读出质量。

Description

多图像传感器同步、协作方法及装置、存储介质、终端

技术领域

本发明涉及图像显示技术领域，尤其涉及一种多图像传感器同步、协作方法及装置、存储介质、终端。

背景技术

目前在手机应用领域，多摄技术的应用十分普遍。多摄的应用首先要保证多设备输出的图像同步和像素级对齐，通俗的说就是要保证多个图像传感器在同一时刻获得同一幅场景。但是在实际应用中，图像传感器的工作状态会不断发生变化，即帧率会使用实际场景发生改变。一般进入暗场景时，为了获得更长的曝光时间，图像传感器会通过降低帧率来实现。另外多摄应用中各个图像传感器的型号也各有不同，例如高像素的实景摄像头搭配低像素的景深摄像头。如何使不同型号的摄像头在不断变化的工作状态中实现输出图像的实时同步是研究的重点。

目前图像传感器内部实现同步的方式是在从设备(slaver)收到主设备(master)的同步信号之后通过强制修改内部工作状态，立即做出相位调整来保证同步输出。但是，现有技术中虽然同步迅速不容易失准，但是需要保证master和slaver之间的固有差异极小，否则slaver的曝光会出现问题，导致输出图像异常。

发明内容

本发明解决的技术问题是如何保证图像的读出质量。

为解决上述技术问题，本发明实施例提供一种多图像传感器同步方法，多图像传感器同步方法包括：接收主图像传感器发送的同步脉冲，所述同步脉冲指示当前帧的起始位置；响应于接收到所述同步脉冲，执行像素行的读取操作和曝光操作；根据所述当前帧的起始位置以及当前帧率输出所述当前帧；如果输出所述当前帧完成后未接收到所述主图像传感器发送的下一同步脉冲，则输出无效像素行，直至接收到所述下一同步脉冲。

可选的，所述输出无效像素行包括：对所述无效像素行进行读取；继续执行所述曝光操作。

可选的，所述执行像素行的读取操作和曝光操作之前还包括：如果所述同步脉冲为所述主图像传感器发送的首次同步脉冲，则从第一行像素开始执行所述读取操作。

可选的，所述多图像传感器同步方法还包括：响应于接收到所述下一同步脉冲，继续执行所述读取操作和所述曝光操作；确定所述当前帧的下一帧的下一帧率；按照所述下一帧率输出所述当前帧的下一帧。

可选的，所述多图像传感器同步方法还包括：如果在输出所述当前帧的过程中接收到所述主图像传感器发送的下一同步脉冲，则继续输出所述当前帧。

可选的，所述多图像传感器同步方法还包括：确定所述当前帧的下一帧的下一帧率，并在所述当前帧输出完成后继续按照所述下一帧率输出所述当前帧的下一帧。

可选的，在两个同步脉冲之间所读出的图像帧中各个像素行的曝光时间是相同的。

为解决上述技术问题，本发明实施例还提供一种多图像传感器协作方法，用于从图像传感器，所述多图像传感器协作方法包括：接收主图像传感器发送的同步脉冲，所述同步脉冲指示当前帧的起始位置；响应于接收到所述同步脉冲，执行像素行的读取操作和曝光操作；根据所述当前帧的起始位置以及当前帧率输出所述当前帧；如果输出所述当前帧完成后未接收到所述主图像传感器发送的下一同步脉冲，则输出无效像素行，直至接收到所述下一同步脉冲；响应于接收到所述下一同步脉冲，确定输出的所述无效像素行的行数，并在继续执行下一帧的读取操作和曝光操作时，根据所述当前帧率和所述无效像素行的行数确定下一帧的读取操作的最终起始位置。

可选的，所述根据所述当前帧率和所述无效像素行的行数确定所述读取操作的起始位置包括：根据所述当前帧的起始位置以及所述当前帧率确定下一帧的读取操作的原始起始位置；将所述原始起始位置前移所述无效像素行的行数，以作为所述最终起始位置。

可选的，所述多图像传感器协作方法还包括：在继续执行下一帧的读取操作时，将所述最终起始位置作为读计数器的起点，所述读计数器用于对所述读取操作所读取的像素行数进行计数。

为解决上述技术问题，本发明实施例还提供一种多图像传感器同步装置，包括：同步脉冲接收模块，用于接收主图像传感器发送的同步脉冲，所述同步脉冲指示当前帧的起始位置；执行模块，用于响应于接收到所述同步脉冲，执行像素行的读取操作和曝光操作；当前帧输出模块，用于根据所述当前帧的起始位置以及当前帧率输出所述当前帧；缓停模块，用于如果输出所述当前帧后未接收到所述主图像传感器发送的下一同步脉冲，则输出无效像素行，直至接收到所述下一同步脉冲。

本发明实施例还提供一种多图像传感器协作装置，包括：同步脉冲接收模块，用于接收主图像传感器发送的同步脉冲，所述同步脉冲指示当前帧的起始位置；执行模块，用于响应于接收到所述同步脉冲，执行像素行的读取操作和曝光操作；当前帧输出模块，用于根据所述当前帧的起始位置以及当前帧率输出所述当前帧；缓停模块，用于如果在输出所述当前帧后未接收到所述主图像传感器发送的下一同步脉冲，则输出无效像素行，直至接收到所述下一同步脉冲；读取起始位置调整模块，用于响应于接收到所述下一同步脉冲，确定输出的所述无效像素行的行数，并在继续执行下一帧的读取操作和曝光操作时，根据所述当前帧率和所述无效像素行的行数确定下一帧的读取操作的最终起始位置。

本发明实施例还提供一种存储介质，其上存储有计算机程序，所述计算机程序被处理器运行时执行所述多图像传感器同步方法的步骤，或者所述多图像传感器协作方法的步骤。

本发明实施例还提供一种终端，包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的计算机程序，所述处理器运行所述计算机程序时执行所述多图像传感器同步方法的步骤，或者所述多图像传感器协作方法的步骤。

与现有技术相比，本发明实施例的技术方案具有以下有益效果：

本发明技术方案中接收主图像传感器发送的同步脉冲，所述同步脉冲指示当前帧的起始位置；响应于接收到所述同步脉冲，执行像素行的读取操作和曝光操作；根据所述当前帧的起始位置以及当前帧率输出所述当前帧；如果输出所述当前帧完成后未接收到所述主图像传感器发送的下一同步脉冲，则输出无效像素行，直至接收到所述下一同步脉冲。本发明技术方案通过主图像传感器发送的同步脉冲触发从图像传感器开始像素的曝光和读取，而在当前帧输出完成至下一同步脉冲到来之间，从图像传感器输出无效像素行，在保证主图像传感器和从图像传感器输出图像同步的基础上，通过曝光和读取的独立进行避免影响有效像素的正常显示，对主图像传感器和从图像传感器之间的差异无要求；同时，由于在输出每一帧的过程中曝光操作是正常进行的，因此每一帧图像中各个像素行的曝光行数是一致的，避免了图像传感器的曝光异常现象，保证图像质量。

进一步地，如果在输出所述当前帧的过程中接收到所述主图像传感器发送的下一同步脉冲，则继续输出所述当前帧，并在所述当前帧输出完成后继续按照所述下一帧率输出所述当前帧的下一帧。由于主图像传感器和从图像传感器的帧率均会发生变化，会出现从图像传感器的当前帧还未输出完成时，下一同步脉冲就已经到来，为了避免输出过多的无效像素行，本发明技术方案中可以忽略下一同步脉冲，并在当前帧输出完成后继续输出下一帧，在保证帧与帧之间的同步关系的基础上，进一步保证了输出的图像质量。

附图说明

图1是本发明实施例一种多图像传感器同步方法的流程图；

图2-图5是本发明实施例多个具体应用场景的示意图；

图6是本发明实施例一种多图像传感器协作方法的流程图；

图7是本发明实施例一种多图像传感器同步装置的结构示意图；

图8是本发明实施例一种多图像传感器协作装置的结构示意图。

具体实施方式

如背景技术中所述，现有技术中虽然同步迅速不容易失准，但是需要保证master和slaver之间的固有差异极小，否则slaver的曝光会出现问题，导致输出图像异常。

本发明技术方案通过主图像传感器发送的同步脉冲触发从图像传感器开始像素的曝光和读取，而在当前帧输出完成至下一同步脉冲到来之间，从图像传感器输出无效像素行，在保证主图像传感器和从图像传感器输出图像同步的基础上，通过曝光和读取的独立进行避免影响有效像素的正常显示；同时，由于在输出每一帧的过程中曝光操作是正常进行的，因此每一帧图像中各个像素行的曝光行数是一致的，避免了图像传感器的曝光异常现象，保证图像质量。

为使本发明的上述目的、特征和优点能够更为明显易懂，下面结合附图对本发明的具体实施例做详细的说明。

图1是本发明实施例一种多图像传感器同步方法的流程图。

本发明实施例的多图像传感器同步方法可以用于配置有多摄技术的终端设备，该终端设备可以配置有多个图像传感器，如主传感器和从传感器。具体地，所述多图像传感器同步方法的各个步骤可以由从图像传感器执行。

具体地，所述方法可以包括以下步骤：

步骤S101：接收主图像传感器发送的同步脉冲，所述同步脉冲指示当前帧的起始位置；

步骤S102：响应于接收到所述同步脉冲，执行像素行的读取操作和曝光操作；

步骤S103：根据所述当前帧的起始位置以及当前帧率输出所述当前帧；

步骤S104：如果输出所述当前帧完成后未接收到所述主图像传感器发送的下一同步脉冲，则输出无效像素行，直至接收到所述下一同步脉冲。

需要指出的是，本实施例中各个步骤的序号并不代表对各个步骤的执行顺序的限定。

在步骤S101的具体实施中，主图像传感器(master)可以发出同步脉冲，同步脉冲能够指示一帧图像的起始位置。从图像传感器(slaver)可以接收来自主图像传感器的同步脉冲。

在步骤S102的具体实施中，同步脉冲可以触发从图像传感器执行像素行的读取操作和曝光操作。

本领域技术人员应当理解的是，关于读取操作和曝光操作的具体实施方式可以参照现有技术的记载，本发明实施例对此不作限制

在步骤S103的具体实施中，从图像传感器从当前帧的起始位置开始输出当前帧，并根据当前帧率确定当前帧的结束位置。在帧率不变的情况下，当前帧的起始位置确定后，后续图像帧的起始位置也是固定的。

在步骤S104的具体实施中，在当前帧输出完成后，下一同步脉冲到来之前的这段时间，从图像传感器输出无效像素行。无效像素行不会在显示设备，如显示屏上进行显示，也即不影响有效像素的正常显示。也就是说，当前输出完成会触发从图像传感器输出无效像素行，接收到同步脉冲则是输出无效像素行结束的标识。

换言之，从图像传感器在当前帧输出完成至下一同步脉冲到来之间输出无效像素行的状态可以称为缓停状态。当前输出完成后，从图像传感器进入缓停状态，接收到下一同步脉冲后，从图像传感器退出缓停状态。

相对于现有技术中对master和slaver之间的固有差异存在一定的要求，本发明实施例对主图像传感器和从图像传感器之间的差异无要求，也即允许主图像传感器和从图像传感器之间存在较大差异的情况下，实现主图像传感器和从图像传感器的有效同步。

在本发明一个非限制性的实施例中，图1所示步骤S104可以包括以下步骤：对所述无效像素行进行读取；继续执行所述曝光操作。

本实施例中，从图像传感器进入缓停状态后，所执行的操作是对所述无效像素行进行读取；继续执行所述曝光操作。也就是说，相对于从传感器正常的输出动作(也即未进入缓停状态时的读取操作)而言，在缓停状态所执行的读取动作是针对无效像素行的；曝光操作与未进入缓停状态之前是一致的。

具体实施中，通过曝光计数器对曝光操作所读取的像素行数进行计数。在缓停状态继续执行曝光操作是指，曝光计数器的计数不受缓停状态的影响。

本发明实施例中，由于在输出每一帧的过程中曝光操作是正常进行的，因此每一帧图像中各个像素行的曝光行数是一致的，避免了图像传感器的曝光异常现象，保证图像质量。

需要说明的是，从图像传感器在未进入缓停状态时可以是对有效像素行进行读取(也即能够在显示设备上正常显示的像素)，也可以是对无效像素行进行读取，这是根据实际的应用需求来确定的。

具体可参照图2，图2中M表示主图像传感器输出的图像帧，S表示从图像传感器输出的图像帧。同步脉冲所指示的位置为每一图像帧开始的位置，如图2中所示的第N帧、第N+1帧、第N+2帧、第N+3帧…的开始位置。

下面结合图2说明多图像传感器同步方法的流程。具体地，主图像传感器发送同步脉冲至从图像传感器，主图像传感器和从图像传感器开始输出第N帧。在T1时刻，从图像传感器输出完成第N帧，但此时主图像传感器还未发送下一同步脉冲，由此，从图像传感器从T1时刻开始输出无效像素行，直至在T2时刻接收到下一同步脉冲。第N+1帧、第N+2帧、第N+3帧以此类推，此处不再赘述。

在一个非限制性的实施例中，在两个同步脉冲之间所读出的图像帧中各个像素行的曝光时间是相同的。

一并参照图3，T1时刻表示当前帧曝光操作起始位置，T3时刻表示当前帧读取操作起始位置，T2时刻和T5时刻表示接收到同步脉冲的位置。P表示从图像传感器进入缓停状态的时长，也即两个像素行(每行像素的时间也是确定的)。在从时刻T2至时刻T5的这一帧中，各行像素的曝光时间为4行像素。由于从图像传感器在缓停状态P对两行无效像素行读取操作，而此时曝光操作是正常进行的，因此在时刻T5开始的下一帧中，各行像素的曝光时间为6行像素。

本发明实施例中，由于每一帧的各行像素的曝光时间是相同的，因此每一帧在显示时其亮度是均衡的，保证了图像显示的质量。

在本发明一个非限制性的实施例中，图1所示步骤S102之前可以包括以下步骤：如果所述同步脉冲为所述主图像传感器发送的首次同步脉冲，则从第一行像素开始执行所述读取操作。

本实施例中，在从图像传感器首次收到主图像传感器发出的同步脉冲时，二者输出的图像偏差是未知的，从图像传感器内部通过强制对齐操作来保证起始的同步状态，也即无论从图像传感器当前正在读取哪一行像素，从图像传感器将强制地从第一行像素开始读取。

在本发明一个非限制性的实施例中，图1所示方法还可以包括以下步骤：确定所述当前帧的下一帧的下一帧率；按照所述下一帧率输出所述当前帧的下一帧。

本实施例中，由于主图像传感器和/或从图像传感器的帧率可能会发生变化，因此在开始输出下一帧时，需要先确定下一帧的帧率。

一并参照图4，主图像传感器和从图像传感器在第N+1帧相对于第N帧的帧率均提高，帧的长度均变短。但是主图像传感器和从图像传感器所输出的帧的变化的长度不同，导致在第N+1帧，从图像传感器输出无效像素行的行数变多，也即图4所示的在第N+1帧阴影部分的长度长于第N帧阴影部分的长度。

可以理解的是，在实际的应用场景中，主图像传感器和从图像传感器的帧率也可以同时降低，或者一个帧率提高，另一个帧率下降，这些都会导致从图像传感器处于缓停状态的时长(也即输出无效像素行的时长)发生变化，本发明实施例对此不作限制。

在本发明一个非限制性的实施例中，图1所示方法还可以包括以下步骤：如果在输出所述当前帧的过程中接收到所述主图像传感器发送的下一同步脉冲，则继续输出所述当前帧。

如前所述，接收到同步脉冲时从图像传感器结束输出无效像素行。而在本实施例中，从图像传感器接收到同步脉冲时还未结束输出当前帧，这种情况下，从图像传感器可以无视同步脉冲，继续输出当前帧。

具体地，上述情况可能是由于主图像传感器和从图像传感器的帧率变化不同导致的，也即帧率变化后主图像传感器输出的帧的长度比从图像传感器输出的帧的长度要短，从而导致从图像传感器在输出当前帧的过程中就接收到主图像传感器发送的同步脉冲。

进一步地，确定所述当前帧的下一帧的下一帧率，并在所述当前帧输出完成后继续按照所述下一帧率输出所述当前帧的下一帧。

为了避免后一帧中输出的无效像素行数过多影响图像显示质量，本发明实施例在当前帧输出完成后立即开始输出下一帧。这个过程中从图像传感器将不再输出无效像素行。

一并参照图5，在T1时刻开始的第N+1帧，主图像传感器M的帧率提高，其输出的帧的长度变短；而从图像传感器S的帧率没有变化。在这种情况下，从图像传感器S输出的帧的长度长于主图像传感器M输出的帧的长度，导致在T2时刻的同步脉冲到来时，从图像传感器S还未将第N+1帧输出完成。此时从图像传感器S继续输出第N+1帧，并在第N+1帧输出完成后立即输出第N+2帧。

从图像传感器S在输出第N+2帧时，第N+2帧的帧率提高，也即从图像传感器S输出的第N+2帧的长度比第N+1帧要短。第N+2帧输出完成时，T3时刻的同步脉冲还未到来，则从图像传感器S输出无效像素行，直至接收到T3时刻的同步脉冲，并继续输出第N+3帧。以此类推，此处不再赘述。

本发明实施例还公开了一种多图像传感器协作方法，用于从图像传感器，也即由从图像传感器执行所述多图像传感器协作方法的各个步骤。请参照图6，多图像传感器协作方法可以包括以下步骤：

步骤S601：接收主图像传感器发送的同步脉冲，所述同步脉冲指示当前帧的起始位置；

步骤S602：响应于接收到所述同步脉冲，执行像素行的读取操作和曝光操作；

步骤S603：根据所述当前帧的起始位置以及当前帧率输出所述当前帧；

步骤S604：如果输出所述当前帧完成后未接收到所述主图像传感器发送的下一同步脉冲，则输出无效像素行，直至接收到所述下一同步脉冲；

步骤S605：响应于接收到所述下一同步脉冲，确定输出的所述无效像素行的行数，并在继续执行下一帧的读取操作和曝光操作时，根据所述当前帧率和所述无效像素行的行数确定下一帧的读取操作的最终起始位置。

关于步骤S601至步骤S604的具体实施方式可参照图1所示步骤S101至步骤S104、以及图2-图5实施例部分的描述，此处不再赘述。

从图像传感器在步骤S604中输出无效像素行时，由于曝光操作是继续进行的，因此会导致下一帧中各个像素的曝光时间变长。本发明实施例在此基础上进行了进一步的改进，以保证下一帧中各个像素的曝光时间与当前帧中各个像素的曝光时间一致。

具体在步骤S605的具体实施中，在接收到所述下一同步脉冲时，确定输出的所述无效像素行的行数。根据当前帧的帧率(也即当前帧率)可以确定在下一帧进行读取操作的起始位置，为了保证下一帧中各个像素的曝光时间与当前帧中各个像素的曝光时间一致，需要调整上述起始位置，也即根据无效像素行的行数调整上述起始位置。

在一个具体实施例中，图6所示步骤S605可以包括以下步骤：根据所述当前帧的起始位置以及所述当前帧率确定下一帧的读取操作的原始起始位置；将所述原始起始位置前移所述无效像素行的行数，以作为所述最终起始位置。

由于从图像传感器在当前帧中输出无效像素行导致下一帧中各个像素的曝光时间变长，因此本发明实施例可以根据无效像素行的行数将原始起始位置进行前移，从图像传感器将从前移后形成的最终起始位置开始执行读取操作，输出下一帧。

在一个非限制性的实施例中，所述多图像传感器协作方法还可以包括以下步骤：在继续执行下一帧的读取操作时，将所述最终起始位置作为读计数器的起点，所述读计数器用于对所述读取操作所读取的像素行数进行计数。

一并参照图3，T1时刻表示当前帧曝光操作起始位置，也即曝光计数器的起点，曝光计数器用于对曝光操作所读取的像素行数进行计数；T3时刻表示当前帧读取操作起始位置，也即读计数器的起点。T4时刻表示下一帧曝光计数器的起点，T6时刻表示按照帧率确定的读计数器的起点。

从图3中可以看出，在当前帧内各个像素的曝光时间为4个像素行；以T6时刻作为下一帧读计数器的起点的话，下一帧内各个像素的曝光时间为6个像素行。为了使下一帧中各个像素的曝光时间与当前帧中各个像素的曝光时间一致(也即4个像素行)，需要将下一帧读计数器的起点前移两个像素行，也即从图像传感器在当前帧输出的无效像素行的行数，如图3中P所示。由此，下一帧读计数器的起点为时刻T7。

由上，本发明实施例在实现主图像传感器和从图像传感器同步的基础上，通过进一步的优化实现了各帧像素的曝光时间一致，进一步保证了输出图像的质量。

请参照图7，本发明实施例还公开了一种多图像传感器同步装置70。多图像传感器同步装置70可以包括：

同步脉冲接收模块701，用于接收主图像传感器发送的同步脉冲，所述同步脉冲指示当前帧的起始位置；

执行模块702，用于响应于接收到所述同步脉冲，执行像素行的读取操作和曝光操作；

当前帧输出模块703，用于根据所述当前帧的起始位置以及当前帧率输出所述当前帧；

缓停模块704，用于如果在输出所述当前帧后未接收到所述主图像传感器发送的下一同步脉冲，则输出无效像素行，直至接收到所述下一同步脉冲。

本发明实施例通过主图像传感器发送的同步脉冲触发从图像传感器开始像素的曝光和读取，而在当前帧输出完成至下一同步脉冲到来之间，从图像传感器输出无效像素行，在保证主图像传感器和从图像传感器输出图像同步的基础上，通过曝光和读取的独立进行避免影响有效像素的正常显示；同时，由于在输出每一帧的过程中曝光操作是正常进行的，因此每一帧图像中各个像素行的曝光行数是一致的，避免了图像传感器的曝光异常现象，保证图像质量。

关于所述多图像传感器同步装置70的工作原理、工作方式的更多内容，可以参照图1至图5中的相关描述，这里不再赘述。

请参照图8，本发明实施例还公开了一种多图像传感器协作装置80。多图像传感器协作装置80可以包括：

同步脉冲接收模块801，用于接收主图像传感器发送的同步脉冲，所述同步脉冲指示当前帧的起始位置；

执行模块802，用于响应于接收到所述同步脉冲，执行像素行的读取操作和曝光操作；

当前帧输出模块803，用于根据所述当前帧的起始位置以及当前帧率输出所述当前帧；

缓停模块804，用于如果在输出所述当前帧后未接收到所述主图像传感器发送的下一同步脉冲，则输出无效像素行，直至接收到所述下一同步脉冲；

读取起始位置调整模块805，用于响应于接收到所述下一同步脉冲，确定输出的所述无效像素行的行数，并在继续执行下一帧的读取操作和曝光操作时，根据所述当前帧率和所述无效像素行的行数确定下一帧的读取操作的最终起始位置。

关于所述多图像传感器协作装置80的工作原理、工作方式的更多内容，可以参照图1至图6中的相关描述，这里不再赘述。

本发明实施例还公开了一种存储介质，所述存储介质为计算机可读存储介质，其上存储有计算机程序，所述计算机程序运行时可以执行图1或图6中所示制方法的步骤。所述存储介质可以包括ROM、RAM、磁盘或光盘等。所述存储介质还可以包括非挥发性存储器(non-volatile)或者非瞬态(non-transitory)存储器等。

本发明实施例还公开了一种终端，所述终端可以包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的计算机程序。所述处理器运行所述计算机程序时可以执行图1或图6中所示方法的步骤。所述终端包括但不限于手机、计算机、平板电脑等终端设备。

应理解，上述的处理器可以是通用处理器、数字信号处理器(digital signalprocessor，DSP)、专用集成电路(application specific integrated circuit，ASIC)、现成可编程门阵列(field programmable gate array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件，还可以是系统芯片(system on chip，SoC)，还可以是中央处理器(central processor unit，CPU)，还可以是网络处理器(networkprocessor，NP)，还可以是数字信号处理电路(digital signal processor，DSP)，还可以是微控制器(micro controller unit，MCU)，还可以是可编程控制器(programmable logicdevice，PLD)或其他集成芯片。可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器，处理器读取存储器中的信息，结合其硬件完成上述方法的步骤。

还应理解，本发明实施例中提及的存储器可以是易失性存储器或非易失性存储器，或可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(read-only memory，ROM)、可编程只读存储器(programmable ROM，PROM)、可擦除可编程只读存储器(erasable PROM，EPROM)、电可擦除可编程只读存储器(electrically EPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(random access memory，RAM)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(static RAM，SRAM)、动态随机存取存储器(dynamic RAM，DRAM)、同步动态随机存取存储器(synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(double datarate SDRAM，DDR SDRAM)、增强型同步动态随机存取存储器(enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(synchlink DRAM，SLDRAM)和直接内存总线随机存取存储器(direct rambus RAM，DR RAM)。应注意，本文描述的系统和方法的存储器旨在包括但不限于这些和任意其它适合类型的存储器。

需要说明的是，当处理器为通用处理器、DSP、ASIC、FPGA或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件时，存储器(存储模块)集成在处理器中。应注意，本文描述的存储器旨在包括但不限于这些和任意其它适合类型的存储器。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(read-only memory，ROM)、随机存取存储器(random access memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

虽然本发明披露如上，但本发明并非限定于此。任何本领域技术人员，在不脱离本发明的精神和范围内，均可作各种更动与修改，因此本发明的保护范围应当以权利要求所限定的范围为准。

Claims (14)

1.一种多图像传感器同步方法，其特征在于，用于从图像传感器，所述多图像传感器同步方法包括：

接收主图像传感器发送的同步脉冲，所述同步脉冲指示当前帧的起始位置；

响应于接收到所述同步脉冲，执行像素行的读取操作和曝光操作；

根据所述当前帧的起始位置以及当前帧率输出所述当前帧；

如果输出所述当前帧完成后未接收到所述主图像传感器发送的下一同步脉冲，则输出无效像素行，直至接收到所述下一同步脉冲。

2.根据权利要求1所述的多图像传感器同步方法，其特征在于，所述输出无效像素行包括：

对所述无效像素行进行读取；

继续执行所述曝光操作。

3.根据权利要求1所述的多图像传感器同步方法，其特征在于，所述执行像素行的读取操作和曝光操作之前还包括：

如果所述同步脉冲为所述主图像传感器发送的首次同步脉冲，则从第一行像素开始执行所述读取操作。

4.根据权利要求1所述的多图像传感器同步方法，其特征在于，还包括：

响应于接收到所述下一同步脉冲，继续执行所述读取操作和所述曝光操作；

确定所述当前帧的下一帧的下一帧率；

按照所述下一帧率输出所述当前帧的下一帧。

5.根据权利要求1所述的多图像传感器同步方法，其特征在于，还包括：

如果在输出所述当前帧的过程中接收到所述主图像传感器发送的下一同步脉冲，则继续输出所述当前帧。

6.根据权利要求5所述的多图像传感器同步方法，其特征在于，还包括：

确定所述当前帧的下一帧的下一帧率，并在所述当前帧输出完成后继续按照所述下一帧率输出所述当前帧的下一帧。

7.根据权利要求1所述的多图像传感器同步方法，其特征在于，在两个同步脉冲之间所读出的图像帧中各个像素行的曝光时间是相同的。

8.一种多图像传感器协作方法，其特征在于，用于从图像传感器，所述多图像传感器协作方法包括：

接收主图像传感器发送的同步脉冲，所述同步脉冲指示当前帧的起始位置；

响应于接收到所述同步脉冲，执行像素行的读取操作和曝光操作；

根据所述当前帧的起始位置以及当前帧率输出所述当前帧；

如果输出所述当前帧完成后未接收到所述主图像传感器发送的下一同步脉冲，则输出无效像素行，直至接收到所述下一同步脉冲；

响应于接收到所述下一同步脉冲，确定输出的所述无效像素行的行数，并在继续执行下一帧的读取操作和曝光操作时，根据所述当前帧率和所述无效像素行的行数确定下一帧的读取操作的最终起始位置。

9.根据权利要求8所述的多图像传感器协作方法，其特征在于，所述根据所述当前帧率和所述无效像素行的行数确定所述读取操作的起始位置包括：根据所述当前帧的起始位置以及所述当前帧率确定下一帧的读取操作的原始起始位置；

将所述原始起始位置前移所述无效像素行的行数，以作为所述最终起始位置。

10.根据权利要求8所述的多图像传感器协作方法，其特征在于，还包括：

在继续执行下一帧的读取操作时，将所述最终起始位置作为读计数器的起点，所述读计数器用于对所述读取操作所读取的像素行数进行计数。

11.一种多图像传感器同步装置，其特征在于，包括：

同步脉冲接收模块，用于接收主图像传感器发送的同步脉冲，所述同步脉冲指示当前帧的起始位置；

执行模块，用于响应于接收到所述同步脉冲，执行像素行的读取操作和曝光操作；

当前帧输出模块，用于根据所述当前帧的起始位置以及当前帧率输出所述当前帧；

缓停模块，用于如果输出所述当前帧后未接收到所述主图像传感器发送的下一同步脉冲，则输出无效像素行，直至接收到所述下一同步脉冲。

12.一种多图像传感器协作装置，其特征在于，包括：

同步脉冲接收模块，用于接收主图像传感器发送的同步脉冲，所述同步脉冲指示当前帧的起始位置；

执行模块，用于响应于接收到所述同步脉冲，执行像素行的读取操作和曝光操作；

当前帧输出模块，用于根据所述当前帧的起始位置以及当前帧率输出所述当前帧；

缓停模块，用于如果在输出所述当前帧后未接收到所述主图像传感器发送的下一同步脉冲，则输出无效像素行，直至接收到所述下一同步脉冲；

读取起始位置调整模块，用于响应于接收到所述下一同步脉冲，确定输出的所述无效像素行的行数，并在继续执行下一帧的读取操作和曝光操作时，根据所述当前帧率和所述无效像素行的行数确定下一帧的读取操作的最终起始位置。

13.一种存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器运行时执行权利要求1至7中任一项所述多图像传感器同步方法的步骤，或者权利要求8至10任一项所述多图像传感器协作方法的步骤。

14.一种终端，包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的计算机程序，其特征在于，所述处理器运行所述计算机程序时执行权利要求1至7中任一项所述多图像传感器同步方法的步骤，或者权利要求8至10任一项所述多图像传感器协作方法的步骤。

Images