CN113347324A - 一种图像处理方法、装置、电子设备及存储介质 - Google Patents

Abstract

本申请提供了一种图像处理方法，包括：在图像传感器输出图像数据的情况下，若接收到曝光信号，则确定图像传感器接收所述曝光信号的位置是否在第一窗口内；若图像传感器接收曝光信号的位置不在第一窗口内，则对曝光信号进行延迟处理，以使曝光信号位于第二窗口内；基于第二窗口的位置和第一行距，确定图像中曝光信号对应的亮度异常行的位置；校正亮度异常行的平均亮度值；其中，第一窗口位于图像传感器输出的行同步信号对应的图像行上；亮度异常行的平均亮度值与图像中其他行的平均亮度值之差大于或等于第一亮度阈值；本申请还提供一种图像处理装置、电子设备和存储介质。通过本申请可以实现校正图像中亮度异常行的平均亮度值。

Description

一种图像处理方法、装置、电子设备及存储介质

技术领域

本申请涉及图像处理技术领域，尤其涉及一种图像处理方法、装置、电子设备及存储介质。

背景技术

从图像传感器中读取图像数据的过程中，若图像传感器进行新的一次曝光，那么该次曝光就会导致正在读取的图像数据出现异常，表现为图像中出现亮度异常行；因此，如何校正由于读取图像的过程中，图像传感器曝光而导致图像中存在的亮度异常行，是需要解决的技术问题。

发明内容

本申请提供一种图像处理方法、装置、电子设备及存储介质，以至少解决现有技术中存在的以上技术问题。

本申请第一方面提供一种图像处理方法，包括：

在图像传感器输出图像数据的情况下，若接收到曝光信号，则确定所述图像传感器接收所述曝光信号的位置是否在第一窗口内；

若所述图像传感器接收曝光信号的位置不在所述第一窗口内，则对所述曝光信号进行延迟处理，以使所述曝光信号位于第二窗口内；

基于所述第二窗口的位置和第一行距，确定图像中所述曝光信号对应的亮度异常行的位置；

校正所述亮度异常行的平均亮度值；

其中，所述第一窗口位于所述图像传感器输出的行同步信号对应的图像行上；所述亮度异常行的平均亮度值与所述图像中其他行的平均亮度值之差大于或等于第一亮度阈值。

上述方案中，若所述图像传感器接收曝光信号的位置在所述第一窗口内，则基于所述曝光信号在所述第一窗口中的位置和所述第一行距确定图像中所述曝光信号对应的亮度异常行的位置。

上述方案中，所述确定所述图像传感器接收所述曝光信号的位置是否在第一窗口内之前，所述方法还包括：

确定所述第一窗口在图像的每一行中的位置和大小。

上述方案中，所述确定所述第一窗口在图像的每一行中的位置包括：

确定大小为第一单位的第三窗口；

将所述第三窗口从所述图像的任意一行的起始位置依次向所述任意一行的预设位置移动第一距离；

依次确定所述第三窗口在每个位置对应的亮度异常行的第一亮度值；

确定所述第一亮度值与所述任意一行的相邻行的第二亮度值之差最小时，所述第三窗口在所述任意一行的至少一个位置；

确认所述第三窗口在所述至少一个位置组成的窗口为所述第一窗口，所述至少一个位置的长度为所述第一窗口的大小；

其中，所述预设位置在所述任意一行的结束位置之前；曝光开始位置位于所述任意一行的起始位置至预设位置内时，曝光开始位置与亮度异常行之间的距离为第一行距。

上述方案中，所述确定所述图像传感器接收所述曝光信号的位置是否在第一窗口内之前，所述方法还包括：

第一曝光信号的位置在第四窗口内的情况下，确定所述第一曝光信号对应的亮度异常行的位置；

基于所述第四窗口所在图像行的位置和所述第一曝光信号对应的亮度异常行的位置，确定所述第一行距。

上述方案中，所述校正所述亮度异常行的平均亮度值之前，所述方法还包括：

确定所述图像的不同增益值对应的亮度校正值；

基于所述图像的不同增益值和所述不同增益值对应的亮度校正值，确定亮度偏差对照表；

其中，所述亮度校正值用于校正所述亮度异常行的平均亮度值，以使所述亮度异常行的平均亮度值与所述图像中其他行的平均亮度值之差小于所述第一亮度阈值。

上述方案中，所述确定所述图像的不同增益值对应的亮度校正值，包括：

设置第一图像的增益值为第一增益值；

在所述第一图像的增益值为所述第一增益值的情况下，确定所述第一图像的亮度异常行的平均亮度值与所述第一图像中除亮度异常行以外的其他行的平均亮度值之间的差值，将所述差值作为所述第一增益值对应的第一亮度校正值。

上述方案中，所述校正所述亮度异常行的平均亮度值包括：

基于所述图像的增益值确定所述图像的增益值对应的亮度校正值；

基于所述亮度校正值，校正所述亮度异常行的平均亮度值。

上述方案中，所述基于所述图像的增益值确定所述图像的增益值对应的亮度校正值，包括：

若亮度偏差对照表中存在所述增益值对应的第二亮度校正值，则基于所述第二亮度校正值校正所述亮度异常行的位置对应的图像帧；

或者，若所述亮度偏差对照表中不存在所述增益值对应的第二亮度校正值，则确定与所述图像的增益值之间的差值最小的第二增益值和第三增益值；基于所述第二增益值对应的亮度校正值，以及所述第三增益值对应的亮度校正值之间的线性关系，确定所述图像的增益值对应的第二亮度校正值；基于所述第二亮度校正值校正所述亮度异常行的平均亮度值。

本申请第二方面提供一种图像处理装置，所述装置包括：判断模块，用于在图像传感器输出图像数据的情况下，若接收到曝光信号，则确定所述图像传感器接收所述曝光信号的位置是否在第一窗口内；

处理模块，用于若所述图像传感器接收曝光信号的位置不在所述第一窗口内，则对所述曝光信号进行延迟处理，以使所述曝光信号位于第二窗口内；

确定模块，用于基于所述第二窗口的位置和第一行距确定图像中所述曝光信号对应的亮度异常行的位置；

校正模块，用于校正所述亮度异常行的平均亮度值；

其中，所述亮度异常行的平均亮度值与所述图像中其他行的平均亮度值之差大于或等于第一亮度阈值。

本申请第三方面提供一种电子设备，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；存储器，用于存放计算机程序；处理器，用于执行存储器上所存放的程序时，实现上述图像处理方法所述的方法步骤。

本申请第四方面提供一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述图像处理方法所述的方法步骤。

通过本申请提供的图像处理方法，在图像传感器输出图像数据的情况下，若接收到曝光信号，则确定所述图像传感器接收所述曝光信号的位置是否在第一窗口内；若所述图像传感器接收曝光信号的位置不在所述第一窗口内，则对所述曝光信号进行延迟处理，以使所述曝光信号位于第二窗口内；基于所述第二窗口的位置和第一行距，确定图像中所述曝光信号对应的亮度异常行的位置；校正所述亮度异常行的平均亮度值；其中，所述第一窗口位于所述图像传感器输出的行同步信号对应的图像行上；所述亮度异常行的平均亮度值与所述图像中其他行的平均亮度值之差大于或等于第一亮度阈值。可以通过曝光信号相对第一窗口的位置，确定实际曝光信号的位置，进而确定亮度异常行的位置；进一步基于图像的增益值校正亮度异常行的平均亮度值，实现校正图像中亮度异常行的平均亮度值。

附图说明

图1示出了存在亮度异常行的图像示意图；

图2示出了本申请实施例提供的图像处理方法的一种可选流程示意图；

图3示出了本申请实施例提供的图像处理方法的另一种可选流程示意图；

图4示出了本申请实施例提供的图像处理装置的一种可选结构示意图；

图5示出了本申请实施例提供的第一种曝光开始位置控制示意图；

图6示出了本申请实施例提供的第二种曝光开始位置控制示意图；

图7示出了本申请实施例提供的第三种曝光开始位置控制示意图；

图8示出了本申请实施例提供的确认亮度异常行位置的可选示意图；

图9示出了本申请实施例提供的图像处理设备的结构示意图。

具体实施方式

为使本申请的目的、特征、优点能够更加的明显和易懂，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而非全部实施例。基于本申请中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

图1示出了存在亮度异常行的图像示意图。

如图1所示，在一些全局曝光的图像传感器中，当正在从图像传感器中读取图像数据的情况下，接收到曝光信号，控制图像传感器进行新的一次曝光，图像传感器接收曝光信号并响应曝光信号的位置会导致正在读取的图像数据出现异常，表现为亮度异常行（亮行或者暗行）。如果曝光开始时没有进行图像数据读出，则不会出现该问题。

因此，如何校正由于读取图像的过程中，图像传感器曝光而导致图像中存在的亮度异常行，是需要解决的技术问题。

因此，针对手机衬片的检测方法中存在的缺陷，本申请提供一种检测方法，能够克服现有技术的部分或全部缺点。

图2示出了本申请实施例提供的图像处理方法的一种可选流程示意图，将根据各个步骤进行说明。

步骤S101，在图像传感器输出图像数据的情况下，若接收到曝光信号，则确定图像传感器接收曝光信号的位置是否在第一窗口内。

在一些实施例中，在图像传感器输出图像数据的情况下，若图像处理装置（以下简称装置）接收到曝光信号，则确定图像传感器接收曝光信号的位置是否在第一窗口内。其中，所述图像传感器接收曝光信号的位置包括所述图像传感器接收所述曝光信号时，对应的输出图像数据的场同步信号对应的帧位置和行同步信号对应的行位置。

在一些可选实施例中，所述第一窗口在图像中的具体位置可以基于所述图像传感器输出的行同步信号和场同步信号确定。可选的，所述装置基于图像传感器发送的场同步信号确定输出图像数据的位置位于所述图像的第c帧；所述装置基于图像传感器发送的行同步信号确定输出图像数据的位置位于所述图像的第d行；则所述第一窗口可以是位于所述图像的第c帧、第d行上的窗口（允许曝光窗口）；基于所述图像传感器接收曝光信号的位置，确定所述曝光信号的位置位于所述图像上第c帧、第d行上的第一窗口的位置；可选的，所述图像传感器接收曝光信号的位置可以在所述第一窗口内，也可以不在所述第一窗口内。其中，所述图像传感器接收曝光信号的位置不在所述第一窗口内可以包括：所述图像传感器接收曝光信号的位置在所述第一窗口之前，或者所述图像传感器接收曝光信号的位置可以在所述第一窗口之后。

在一些可选实施例中，所述第一窗口在所述图像每一行中的大小和位置均相同，所述装置接收曝光信号之前，还可以确定所述第一窗口在图像的每一行中的位置和大小。

具体实施时，所述装置确定大小为第一单位的第三窗口；将所述第三窗口从所述图像的任意一行的起始位置依次向所述任意一行的预设位置移动第一距离；依次确定所述第三窗口在每个位置对应的亮度异常行的第一亮度值；确定所述第一亮度值与所述任意一行的相邻行的第二亮度值之差最小时，所述第三窗口在所述任意一行的至少一个位置；确认所述第三窗口在所述至少一个位置组成的窗口为所述第一窗口，所述至少一个位置的长度为所述第一窗口的大小；其中，所述预设位置在所述任意一行的结束位置之前；曝光开始位置位于所述任意一行的起始位置至预设位置内时，曝光开始位置与亮度异常行之间的距离为第一行距。

例如，图像中任意一行中包括n列，最小列单元为第一单位；将所述第三窗口从所述图像的任意一行的起始位置（第0列）依次向所述预设位置（第k列）移动第一距离（也可以是第一单位），确定第三窗口分别在k个位置对应的k个亮度异常行的k个第一亮度值；确定所述k个第一亮度值与所述任意一行的相邻行的第二亮度值之差最小时，所述第三窗口在所述任意一行的至少一个位置；例如所述第三窗口在所述任意一行的第m列至第m+i列时，第一亮度值与所述任意一行的相邻行的第二亮度值之差最小，则确定所述第一窗口的位置为每一行的第m列至第m+i列，所述第一窗口的大小为i。

步骤S102，若图像传感器接收曝光信号的位置不在第一窗口内，则对曝光信号进行延迟处理，以使曝光信号位于第二窗口内。

在一些实施例中，若所述图像传感器接收曝光信号的位置不在所述第一窗口内，则对所述曝光信号进行延迟处理，以使所述曝光信号位于第二窗口内。所述第一窗口和所述第二窗口可以是同一个窗口，还可以是不同的窗口。

具体实施时，若所述曝光信号在所述第一窗口之前，则对曝光信号进行延迟处理，以使曝光信号位于第二窗口内。此时，第一窗口和第二窗口为同一个窗口。

或者，具体实施时，若所述曝光信号在所述第一窗口之后，则对曝光信号进行延迟处理，以使曝光信号位于第二窗口内。此时，第一窗口和第二窗口为不同的窗口。第二窗口为所述第一窗口所在的下一行对应的窗口，或者，所述第二窗口也可以为所述第一窗口之后的、与所述第一窗口之间行距为2的图像行对应的窗口。

步骤S103，基于第二窗口的位置和第一行距，确定图像中曝光信号对应的亮度异常行的位置。

在一些实施例中，所述装置基于所述第二窗口的位置和第一行距，确定图像中由于曝光信号导致的亮度异常行的位置。其中，亮度异常行的位置与所述曝光信号在所述第二窗口中的位置之间的距离为第一行距；所述第二窗口的位置包括所述第二窗口所在图像行的位置。

在一些可选实施例中，在步骤S101之前，所述装置还可以在第一曝光信号在第四窗口内的情况下，确定所述第一曝光信号对应的亮度异常行的位置；基于所述第四窗口所在行的位置和所述第一曝光信号对应的亮度异常行的位置，确定所述第一行距。

具体实施时，在步骤S101中确定的第一窗口在每一行中的位置和大小的基础上，调整曝光值和图像所处的环境的亮度，使得第一曝光信号的曝光开始位置在图像中第e帧第f行中的第四窗口内的情况下，亮度异常行的位置在图像的中间位置；确定所述第四窗口所在的行与所述亮度异常行所在的行之间的行距为所述第一行距。

步骤S104，校正亮度异常行的平均亮度值。

在一些实施例中，所述装置基于所述图像的增益值确定所述图像的增益值对应的亮度校正值；基于所述亮度校正值，校正所述亮度异常行的平均亮度值。

在一些可选实施例中，在步骤S104之前，所述装置还可以确定所述图像的不同增益值对应的亮度校正值；基于所述图像的不同增益值和所述不同增益值对应的亮度校正值，确定亮度偏差对照表；其中，所述亮度校正值用于校正所述亮度异常行的平均亮度值，以使所述亮度异常行的平均亮度值与所述图像中其他行的平均亮度值之差小于所述第一亮度阈值。所述第一亮度值可以根据实际需求设置。

具体实施时，所述装置可以设置第一图像的增益值为第一增益值；在所述第一图像的增益值为所述第一增益值的情况下，确定所述第一图像的亮度异常行的平均亮度值与所述第一图像中除亮度异常行以外的其他行的平均亮度值之间的差值，将所述差值作为所述第一增益值对应的第一亮度校正值。

在一些实施例中，若亮度偏差对照表中存在所述增益值对应的第二亮度校正值，则基于所述第二亮度校正值校正所述亮度异常行的位置对应的图像帧；或者，若所述亮度偏差对照表中不存在所述增益值对应的第二亮度校正值，则确定与所述图像的增益值之间的差值最小的第二增益值和第三增益值；基于所述第二增益值对应的亮度校正值，以及所述第三增益值对应的亮度校正值之间的线性关系，确定所述图像的增益值对应的第二亮度校正值；基于所述第二亮度校正值校正所述亮度异常行的平均亮度值。

其中，所述亮度异常行的平均亮度值与所述图像中其他行的平均亮度值之差大于或等于第一亮度阈值。

如此，通过本申请实施例提供的图像处理方法，首先通过曝光信号和第一窗口的位置关系，确定实际曝光开始位置（曝光信号在第二窗口内的位置）；然后基于实际曝光开始位置和第一行距确定亮度异常线的位置，实现亮度异常线的精准定位；然后基于亮度偏差对照表和图像的增益值，确定亮度校正值，对亮度异常线的亮度值进行校正，实现校正图像中亮度异常行的平均亮度值。

图3示出了本申请实施例提供的图像处理方法的另一种可选流程示意图。

在一些实施例中，本申请提供的图像处理方法执行前，需要进行前期校准步骤（包括步骤S201至步骤S203），包括第一窗口的位置、像素大小确定、确定亮度偏差对照表以及确定第一行距；可选的，本申请实施例存储前期校准步骤得到的第一窗口的位置、第一窗口的像素大小、第一行距以及亮度偏差对照表中的数据。前期校准步骤执行后，执行图像处理步骤（步骤S204至步骤S209）。

步骤S201，确定第一窗口在每一行中的位置和像素大小。

在一些实施例中，所述装置确定大小为第一单位的第三窗口；将所述第三窗口从所述图像的任意一行的起始位置依次向所述任意一行的预设位置移动第一距离；依次确定所述第三窗口在每个位置对应的亮度异常行的第一亮度值；确定所述第一亮度值与所述任意一行的相邻行的第二亮度值之差最小时，所述第三窗口在所述任意一行的至少一个位置；确认所述第三窗口在所述至少一个位置组成的窗口为所述第一窗口，所述至少一个位置的长度为所述第一窗口的大小；其中，所述预设位置在所述任意一行的结束位置之前；曝光开始位置位于所述任意一行的起始位置至预设位置内时，曝光开始位置与亮度异常行之间的距离为第一行距；曝光开始位置所述任意一行的预设位置至结束位置时，曝光开始位置与亮度异常行之间的距离为第二行距。

例如，图像中任意一行中包括n列，最小列单元为第一单位；将所述第三窗口从所述图像的任意一行的起始位置（第0列）依次向所述预设位置（第k列）移动第一距离（也可以是第一单位），确定第三窗口分别在k个位置对应的k个亮度异常行的k个第一亮度值；确定所述k个第一亮度值与所述任意一行的相邻行的第二亮度值之差最小时，所述第三窗口在所述任意一行的至少一个位置；例如所述第三窗口在所述任意一行的第m列至第m+i列时，第一亮度值与所述任意一行的相邻行的第二亮度值之差最小，则确定所述第一窗口的位置为每一行的第m列至第m+i列，所述第一窗口的大小为i。

可选的，所述装置调整曝光值和环境亮度，使亮度异常行位于图像的中间位置，便于确定亮度异常行的位置。

或者，具体实施时，调整图像的曝光值和环境亮度，使亮度异常行位于图像的中间位置，便于确定亮度异常行的位置；窗口的起始位置和结束位置为相同的行值，然后设置窗口的起始位置和结束位置之间的距离依次设置为从0到最大列长，每次改变第三窗口所在图像列的位置统计亮度异常行的第一亮度值与图像中其他行的平均亮度值之差。确认所述第三窗口在所述至少一个位置组成的窗口为所述第一窗口，所述至少一个位置的长度为所述第一窗口的大小；其中，所述预设位置在所述任意一行的结束位置之前；曝光开始位置位于所述任意一行的起始位置至预设位置内时，曝光开始位置与亮度异常行之间的距离为第一行距。

步骤S202，确定第一行距。

在一些实施例中，第一曝光信号的曝光开始位置在第四窗口内的情况下，所述装置确定所述第一曝光信号对应的亮度异常行的位置；基于所述第四窗口所在行的位置和所述第一曝光信号对应的亮度异常行的位置，确定所述第一行距。

具体实施时，在步骤S201中确定的第一窗口在每一行中的位置和大小的基础上，调整曝光值和环境的亮度，使得第一曝光信号的曝光开始位置在图像中第e帧第f行中的第四窗口内的情况下，亮度异常行的位置在图像的中间位置；确定所述第四窗口所在的行与所述亮度异常行所在的行之间的行距为所述第一行距。

步骤S203，确定亮度偏差对照表。

在一些实施例中，所述装置确定所述图像的不同增益值对应的亮度校正值；基于所述图像的不同增益值和所述不同增益值对应的亮度校正值，确定亮度偏差对照表；其中，所述亮度校正值用于校正所述亮度异常行的平均亮度值，以使所述亮度异常行的平均亮度值与所述图像中其他行的平均亮度值之差小于所述第一亮度阈值。

具体实施时，所述装置可以基于步骤S201确定的第一窗口的位置和像素大小，调整曝光值，使得亮度异常行位于图像的中间位置。

所述装置可以设置第一图像的增益值为第一增益值；调节环境亮度值，使得图像传感器输出的图像亮度值为第一亮度值；在所述第一图像的增益值为所述第一增益值的情况下，确定所述第一图像的亮度异常行的平均亮度值与所述第一图像中除亮度异常行以外的其他行的平均亮度值（第一亮度值）之间的差值，将所述差值作为所述第一增益值对应的第一亮度校正值。如此，确定不同增益值对应的亮度校正值，确定亮度偏差对照表。

步骤S204，判断图像传感器是否输出图像数据。

在一些实施例中，所述判断图像传感器是否输出图像数据；若所述图像传感器输出图像数据，且接收到曝光信号，则执行步骤S205；或者，若所述图像传感器输出图像数据，且未收到曝光信号，则结束流程；或者，若所述图像传感器未输出图像数据，则结束流程。

步骤S205，确定图像传感器接收曝光信号的位置是否在第一窗口内。

在一些实施例中，在图像传感器输出图像数据的情况下，若接收到曝光信号，则确定图像传感器接收曝光信号的位置是否在第一窗口内。其中，所述图像传感器接收曝光信号的位置包括所述图像传感器接收所述曝光信号时，对应的输出图像数据的场位置和行位置。

在一些可选实施例中，所述第一窗口在图像中的具体位置可以基于所述图像传感器输出的行同步信号和场同步信号确定。可选的，所述装置基于图像传感器发送的场同步信号确定输出图像数据的位置位于所述图像的第c帧；所述装置基于图像传感器发送的行同步信号确定输出图像数据的位置位于所述图像的第d行；则所述第一窗口可以是位于所述图像的第c帧、第d行上的窗口（允许曝光窗口）；基于所述图像传感器接收曝光信号的位置，确定所述曝光信号的位置位于所述图像上第c帧、第d行上的第一窗口的位置；可选的，所述图像传感器接收曝光信号的位置可以在所述第一窗口内，也可以不在所述第一窗口内。其中，所述图像传感器接收曝光信号的位置不在所述第一窗口内可以包括：所述图像传感器接收曝光信号的位置在所述第一窗口之前，或者所述图像传感器接收曝光信号的位置可以在所述第一窗口之后。

在一些实施例中，若曝光开始位置在第一窗口内，则执行步骤S206；若曝光开始位置不在第一窗口内，则执行步骤S207。

步骤S206，基于第一窗口的位置和第一行距确定图像中曝光信号对应的亮度异常行的位置。

在一些实施例中，所述装置基于所述第一窗口的所在的图像行的位置，和第一行距，确定图像中由于曝光信号导致的亮度异常行的位置。其中，亮度异常行的位置与所述第一窗口的位置之间的距离为第一行距。

在一些实施例中，所述装置执行步骤S206之后，执行步骤S209。

步骤S207，对曝光信号进行延迟处理，以使曝光信号位于第二窗口内。

在一些实施例中，若所述曝光信号不在所述第一窗口内，则对所述曝光信号进行延迟处理，以使所述曝光信号位于第二窗口内。所述第一窗口和所述第二窗口可以是同一个窗口，还可以是不同的窗口。

具体实施时，若所述曝光信号在所述第一窗口之前，则对曝光信号进行延迟处理，以使曝光信号位于第二窗口内。此时，第一窗口和第二窗口为同一个窗口。

或者，具体实施时，若所述曝光信号在所述第一窗口之后，则对曝光信号进行延迟处理，以使曝光信号位于第二窗口内。此时，第一窗口和第二窗口为不同的窗口。第二窗口为所述第一窗口所在的下一行对应的窗口，或者，所述第二窗口也可以为所述第一窗口之后的，与所述第一窗口之间行距为2的图像行对应的窗口。

步骤S208，基于第二窗口的位置和第一行距，确定图像中曝光信号对应的亮度异常行的位置。

在一些实施例中，所述装置基于所述第二窗口的位置，和第一行距，确定图像中由于曝光信号导致的亮度异常行的位置。其中，亮度异常行的位置与所述曝光信号在所述第二窗口中的位置之间的距离为第一行距；所述第二窗口的位置包括所述第二窗口所在图像行的位置。

步骤S209，基于图像的增益值校正亮度异常行的平均亮度值。

在一些实施例中，所述装置基于所述图像的增益值确定所述图像的增益值对应的亮度校正值；基于所述亮度校正值，校正所述亮度异常行的平均亮度值。

在一些实施例中，若亮度偏差对照表中存在所述增益值对应的第二亮度校正值，则基于所述第二亮度校正值校正所述亮度异常行的位置对应的图像帧；或者，若所述亮度偏差对照表中不存在所述增益值对应的第二亮度校正值，则确定与所述图像的增益值之间的差值最小的第二增益值和第三增益值；基于所述第二增益值对应的亮度校正值，以及所述第三增益值对应的亮度校正值之间的线性关系，确定所述图像的增益值对应的第二亮度校正值；基于所述第二亮度校正值校正所述亮度异常行的平均亮度值。

在所述亮度偏差对照表中不存在所述增益值对应的第二亮度校正值的情况下，可以用式（1）确定亮度偏差值：

（1）

其中，gain为图像的增益值；G0为第二增益值；G1为第三增益值；lut（）为亮度偏差对照表对应的函数，相应的lut（G0）为第二增益值对应的亮度校正值；lut（G1）为第三增益值对应的亮度校正值。gain的值介于第二增益值和第三增益值之间。diff为增益值为gain时对应的亮度偏差值。

进一步，可以通过式（2）确定亮度异常行的亮度校正值。

（2）

其中，pixel _in 为图像传感器输出的亮度异常行的平均亮度值；pixel _out 为校正后的亮度异常行的平均亮度值。

其中，所述亮度异常行的平均亮度值与所述图像中其他行的平均亮度值之差大于或等于第一亮度阈值。

如此，通过本申请实施例提供的图像处理方法，首先通过曝光信号和第一窗口的位置关系，确定实际曝光开始位置（曝光信号在第二窗口内的位置）；然后基于实际曝光开始位置和第一行距确定亮度异常线的位置，实现亮度异常线的精准定位；然后基于亮度偏差对照表和图像的增益值，确定亮度校正值，对亮度异常线的亮度值进行校正，实现校正图像中亮度异常行的平均亮度值。

图4示出了本申请实施例提供的图像处理装置的一种可选结构示意图。

图4中，默认已经基于步骤S201至步骤S203确认第一窗口的位置、第一窗口的像素大小、第一行距以及亮度偏差对照表。

如图4所述，图像处理装置300包括曝光开始窗口控制模块301和亮度异常行校正模块302。图像传感器303可以为所述图像处理装置300内部的模块，也可以是图像处理装置300外部的模块。所述图像传感器303可以是图像传感器。

所述图像传感器300用于输出图像数据；基于曝光开始窗口控制模块301输出的曝光控制信号进行曝光；基于图像处理装置300外部的增益值调整图像数据；向曝光开始窗口控制模块301传输场同步信号和行同步信号。

所述曝光开始控制模块301，用于限定曝光信号开始位置和亮度异常行的位置关系（间隔第一行距）；用于在图像传感器303输出图像数据时，向图像传感器303发送经过确认的曝光信号。这样可以精准的定位到由曝光信号开始引起的亮度异常行(亮度异常行)的位置。

图5示出了本申请实施例提供的第一种曝光开始位置控制示意图；图6示出了本申请实施例提供的第二种曝光开始位置控制示意图；图7示出了本申请实施例提供的第三种曝光开始位置控制示意图。

以图像传感器303送出的场同步信号和行同步信号为参考，在每行上限定一个窗口（第一窗口也可以称为允许曝光窗口），只有在该窗口内才可以进行曝光开始的操作。

如图5所示，曝光信号对应的曝光开始位置没有落入限定的窗口（第一窗口）内，则对输入的曝光信号进行延迟，延迟到下一个的允许曝光开始窗口（第二窗口）内。（步骤S101至步骤S102、步骤S205、步骤S207）

如图6所示，曝光信号对应的曝光开始位置落入限定的窗口（第一窗口）内，则不需要对曝光信号进行延迟。（步骤S205至步骤S206）

如图7所示，图像传感器303根据曝光信号开始曝光时未进行图像数据读出，则不需要对曝光信号进行延迟。

亮度异常行校正模块302，用于基于曝光控制信号确定亮度异常行的位置；基于图像的增益值确定校正亮度值；输出校正后的图像数据。

图8示出了本申请实施例提供的确认亮度异常行位置的可选示意图，

亮度异常行校正模块302，具体用于根据曝光信号开始的位置计算出亮度异常行出现的位置，如图8所示，由于已经对输出给图像传感器曝光控制信号的曝光开始位置做了限定（在第一窗口内），所以可以通过实际测试确定出亮度异常行出现的位置（确定第一行距）。图8中，曝光开始位置延迟第一行距之后得到的位置，为亮度异常行的位置。

亮度异常行校正模块302，还用于基于所述图像的增益值确定所述图像的增益值对应的亮度校正值；基于所述亮度校正值，校正所述亮度异常行的平均亮度值。

在一些实施例中，若亮度偏差对照表中存在所述增益值对应的第二亮度校正值，则基于所述第二亮度校正值校正所述亮度异常行的位置对应的图像帧；

或者，若所述亮度偏差对照表中不存在所述增益值对应的第二亮度校正值，则确定与所述图像的增益值之间的差值最小的第二增益值和第三增益值；基于所述第二增益值对应的亮度校正值，以及所述第三增益值对应的亮度校正值之间的线性关系，确定所述图像的增益值对应的第二亮度校正值；基于所述第二亮度校正值校正所述亮度异常行的平均亮度值。

图9是本申请实施例提供的图像处理设备的结构示意图，图9所示的图像处理设备400包括：至少一个处理器460、存储器450和至少一个网络接口420；可选的，所述图像处理设备400还可以包括用户接口430。图像处理设备400中的各个组件通过总线系统440耦合在一起。可理解，总线系统440用于实现这些组件之间的连接通信。总线系统440除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图9中将各种总线都标为总线系统440。

处理器460可以是一种集成电路芯片，具有信号的处理能力，例如通用处理器、数字信号处理器（Digital Signal Processor，DSP），或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等，其中，通用处理器可以是微处理器或者任何常规的处理器等。

用户接口430包括使得能够呈现媒体内容的一个或多个输出装置431，包括一个或多个扬声器和/或一个或多个视觉显示屏。用户接口430还包括一个或多个输入装置432，包括有助于用户输入的用户接口部件，比如键盘、鼠标、麦克风、触屏显示屏、摄像头、其他输入按钮和控件。

存储器450可以是可移除的，不可移除的或其组合。示例性的硬件设备包括固态存储器，硬盘驱动器，光盘驱动器等。存储器450可选地包括在物理位置上远离处理器460的一个或多个存储设备。

存储器450包括易失性存储器或非易失性存储器，也可包括易失性和非易失性存储器两者。非易失性存储器可以是只读存储器（Read Only Memory，ROM），易失性存储器可以是随机存取存储器（Random Access Memory，RAM）。本申请实施例描述的存储器450旨在包括任意适合类型的存储器。

在一些实施例中，存储器450能够存储数据以支持各种操作，这些数据的示例包括程序、模块和数据结构或者其子集或超集，下面示例性说明。

操作系统451，包括用于处理各种基本系统服务和执行硬件相关任务的系统程序，例如框架层、核心库层、驱动层等，用于实现各种基础业务以及处理基于硬件的任务；

网络通信模块452，用于经由一个或多个（有线或无线）网络接口420到达其他计算设备，示例性的网络接口420包括：蓝牙、无线相容性认证（WiFi）、和通用串行总线（Universal Serial Bus，USB）等；

呈现模块453，用于经由一个或多个与用户接口430相关联的输出装置431（例如，显示屏、扬声器等）使得能够呈现信息（例如，用于操作外围设备和显示内容和信息的用户接口）；

输入处理模块454，用于对一个或多个来自一个或多个输入装置432之一的一个或多个用户输入或互动进行检测以及翻译所检测的输入或互动。

在一些实施例中，本申请实施例提供的图像处理装置可以采用软件方式实现，图9示出了存储在存储器450中的图像处理装置455，其可以是程序和插件等形式的软件，包括以下软件模块：判断模块4551、处理模块4552、确定模块4553和校正模块4554，这些模块是逻辑上的，因此根据所实现的功能可以进行任意的组合或进一步拆分。将在下文中说明各个模块的功能。

在另一些实施例中，本申请实施例提供的图像处理装置可以采用软硬件结合的方式实现，作为示例，本申请实施例提供的图像处理装置可以是采用硬件译码处理器形式的处理器，其被编程以执行本申请实施例提供的物流容器搬运方法，例如，硬件译码处理器形式的处理器可以采用一个或多个应用专用集成电路（Application Specific IntegratedCircuit，ASIC）、DSP、可编程逻辑器件（Programmable Logic Device，PLD）、复杂可编程逻辑器件（Complex Programmable Logic Device，CPLD）、现场可编程门阵列（Field-Programmable Gate Array，FPGA）或其他电子元件。

下面继续说明本申请实施例提供的图像处理装置455实施为软件模块的示例性结构，在一些实施例中，如图9所示，存储在存储器450的图像处理装置455中的软件模块可以包括：判断模块4551，用于在图像传感器输出图像数据的情况下，若接收到曝光信号，则确定所述图像传感器接收所述曝光信号的位置是否在第一窗口内；处理模块4552，用于若所述图像传感器接收曝光信号的位置不在所述第一窗口内，则对所述曝光信号进行延迟处理，以使所述曝光信号位于第二窗口内；确定模块4553，用于基于所述第二窗口的位置和第一行距确定图像中所述曝光信号对应的亮度异常行的位置；校正模块4554，用于校正所述亮度异常行的平均亮度值；其中，所述第一窗口位于所述图像传感器输出的行同步信号对应的图像行上；所述亮度异常行的平均亮度值与所述图像中其他行的平均亮度值之差大于或等于第一亮度阈值。

所述处理模块4552，还用于若所述图像传感器接收曝光信号的位置在所述第一窗口内，则基于所述曝光信号在所述第一窗口中的位置和所述第一行距确定图像中所述曝光信号对应的亮度异常行的位置。

所述确定所述图像传感器接收所述曝光信号的位置是否在第一窗口内之前，所述确定模块4553还用于确定所述第一窗口在图像的每一行中的位置和大小。

所述确定模块4553，具体用于确定大小为第一单位的第三窗口；将所述第三窗口从所述图像的任意一行的起始位置依次向所述任意一行的预设位置移动第一距离；依次确定所述第三窗口在每个位置对应的亮度异常行的第一亮度值；确定所述第一亮度值与所述任意一行的相邻行的第二亮度值之差最小时，所述第三窗口在所述任意一行的至少一个位置；确认所述第三窗口在所述至少一个位置组成的窗口为所述第一窗口，所述至少一个位置的长度为所述第一窗口的大小；其中，所述预设位置在所述任意一行的结束位置之前；曝光开始位置位于所述任意一行的起始位置至预设位置内时，曝光开始位置与亮度异常行之间的距离为第一行距。

所述确定所述图像传感器接收所述曝光信号的位置是否在第一窗口内之前，所述确定模块4553还用于第一曝光信号的位置在第四窗口内的情况下，确定所述第一曝光信号对应的亮度异常行的位置；基于所述第四窗口所在图像行的位置和所述第一曝光信号对应的亮度异常行的位置，确定所述第一行距。

所述基于所述图像的增益值校正所述亮度异常行的平均亮度值之前，所述确定模块4553还用于确定所述图像的不同增益值对应的亮度校正值；基于所述图像的不同增益值和所述不同增益值对应的亮度校正值，确定亮度偏差对照表；其中，所述亮度校正值用于校正所述亮度异常行的平均亮度值，以使所述亮度异常行的平均亮度值与所述图像中其他行的平均亮度值之差小于所述第一亮度阈值。

所述确定模块4553，具体用于设置第一图像的增益值为第一增益值；在所述第一图像的增益值为所述第一增益值的情况下，确定所述第一图像的亮度异常行的平均亮度值与所述第一图像中除亮度异常行以外的其他行的平均亮度值之间的差值，将所述差值作为所述第一增益值对应的第一亮度校正值。

所述校正模块4553，用于基于所述图像的增益值确定所述图像的增益值对应的亮度校正值；基于所述亮度校正值，校正所述亮度异常行的平均亮度值。

所述校正模块4553，具体用于若亮度偏差对照表中存在所述增益值对应的第二亮度校正值，则基于所述第二亮度校正值校正所述亮度异常行的位置对应的图像帧；

或者，若所述亮度偏差对照表中不存在所述增益值对应的第二亮度校正值，则确定与所述图像的增益值之间的差值最小的第二增益值和第三增益值；基于所述第二增益值对应的亮度校正值，以及所述第三增益值对应的亮度校正值之间的线性关系，确定所述图像的增益值对应的第二亮度校正值；基于所述第二亮度校正值校正所述亮度异常行的平均亮度值。

本申请实施例还提供一种电子设备，所述电子设备包括：

存储器，用于存储可执行指令；

处理器，用于执行所述存储器中存储的可执行指令时，实现本申请实施例提供的图像处理方法。

本申请实施例还提供一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行本申请实施例提供的物流容器搬运方法。

本申请实施例还提供一种计算机可读存储介质，存储有可执行指令，所述可执行指令被处理器执行时，实现本申请实施例提供的物流容器搬运方法。

在一些实施例中，计算机可读存储介质可以是FRAM、ROM、PROM、EPROM、EEPROM、闪存、磁表面存储器、光盘、或CD-ROM等存储器；也可以是包括上述存储器之一或任意组合的各种设备。

在一些实施例中，可执行指令可以采用程序、软件、软件模块、脚本或代码的形式，按任意形式的编程语言（包括编译或解释语言，或者声明性或过程性语言）来编写，并且其可按任意形式部署，包括被部署为独立的程序或者被部署为模块、组件、子例程或者适合在计算环境中使用的其它单元。

作为示例，可执行指令可以但不一定对应于文件系统中的文件，可以可被存储在保存其它程序或数据的文件的一部分，例如，存储在超文本标记语言（Hyper Text MarkupLanguage，HTML）文档中的一个或多个脚本中，存储在专用于所讨论的程序的单个文件中，或者，存储在多个协同文件（例如，存储一个或多个模块、子程序或代码部分的文件）中。

作为示例，可执行指令可被部署为在一个计算设备上执行，或者在位于一个地点的多个计算设备上执行，又或者，在分布在多个地点且通过通信网络互连的多个计算设备上执行。

以上所述，仅为本申请的实施例而已，并非用于限定本申请的保护范围。凡在本申请的精神和范围之内所作的任何修改、等同替换和改进等，均包含在本申请的保护范围之内。

Claims (12)

1.一种图像处理方法，其特征在于，所述方法包括：

在图像传感器输出图像数据的情况下，若接收到曝光信号，则确定所述图像传感器接收所述曝光信号的位置是否在第一窗口内；

若所述图像传感器接收曝光信号的位置不在所述第一窗口内，则对所述曝光信号进行延迟处理，以使所述曝光信号位于第二窗口内；

基于所述第二窗口的位置和第一行距，确定图像中所述曝光信号对应的亮度异常行的位置；

校正所述亮度异常行的平均亮度值；

其中，所述第一窗口位于所述图像传感器输出的行同步信号对应的图像行上；所述亮度异常行的平均亮度值与所述图像中其他行的平均亮度值之差大于或等于第一亮度阈值。

2.根据权利要求1所述的方法，其特征在于，

若所述图像传感器接收曝光信号的位置在所述第一窗口内，则基于所述第一窗口的位置和所述第一行距确定图像中所述曝光信号对应的亮度异常行的位置。

3.根据权利要求1所述的方法，其特征在于，所述确定所述图像传感器接收所述曝光信号的位置是否在第一窗口内之前，所述方法还包括：

确定所述第一窗口在图像的每一行中的位置和大小。

4.根据权利要求3所述的方法，其特征在于，所述确定所述第一窗口在图像的每一行中的位置和大小包括：

确定大小为第一单位的第三窗口；

将所述第三窗口从所述图像的任意一行的起始位置依次向所述任意一行的预设位置移动第一距离；

依次确定所述第三窗口在每个位置对应的亮度异常行的第一亮度值；

确定所述第一亮度值与所述任意一行的相邻行的第二亮度值之差最小时，所述第三窗口在所述任意一行的至少一个位置；

确认所述第三窗口在所述至少一个位置组成的窗口为所述第一窗口，所述至少一个位置的长度为所述第一窗口的大小；

其中，所述预设位置在所述任意一行的结束位置之前；曝光开始位置位于所述任意一行的起始位置至预设位置内时，曝光开始位置与亮度异常行之间的距离为第一行距。

5.根据权利要求4所述的方法，其特征在于，所述确定所述图像传感器接收所述曝光信号的位置是否在第一窗口内之前，所述方法还包括：

第一曝光信号的位置在第四窗口内的情况下，确定所述第一曝光信号对应的亮度异常行的位置；

基于所述第四窗口所在图像行的位置和所述第一曝光信号对应的亮度异常行的位置，确定所述第一行距。

6.根据权利要求1所述的方法，其特征在于，所述校正所述亮度异常行的平均亮度值之前，所述方法还包括：

确定所述图像的不同增益值对应的亮度校正值；

基于所述图像的不同增益值和所述不同增益值对应的亮度校正值，确定亮度偏差对照表；

其中，所述亮度校正值用于校正所述亮度异常行的平均亮度值，以使所述亮度异常行的平均亮度值与所述图像中其他行的平均亮度值之差小于所述第一亮度阈值。

7.根据权利要求6所述的方法，其特征在于，所述确定所述图像的不同增益值对应的亮度校正值，包括：

设置第一图像的增益值为第一增益值；

在所述第一图像的增益值为所述第一增益值的情况下，确定所述第一图像的亮度异常行的平均亮度值与所述第一图像中除亮度异常行以外的其他行的平均亮度值之间的差值，将所述差值作为所述第一增益值对应的第一亮度校正值。

8.根据权利要求1或6所述的方法，其特征在于，所述校正所述亮度异常行的平均亮度值包括：

基于所述图像的增益值确定所述图像的增益值对应的亮度校正值；

基于所述亮度校正值，校正所述亮度异常行的平均亮度值。

9.根据权利要求8所述的方法，其特征在于，所述基于所述图像的增益值确定所述图像的增益值对应的亮度校正值，包括：

若亮度偏差对照表中存在所述增益值对应的第二亮度校正值，则基于所述第二亮度校正值校正所述亮度异常行的位置对应的图像帧；

或者，若所述亮度偏差对照表中不存在所述增益值对应的第二亮度校正值，则确定与所述图像的增益值之间的差值最小的第二增益值和第三增益值；基于所述第二增益值对应的亮度校正值，以及所述第三增益值对应的亮度校正值之间的线性关系，确定所述图像的增益值对应的第二亮度校正值；基于所述第二亮度校正值校正所述亮度异常行的平均亮度值。

10.一种图像处理装置，其特征在于，所述装置包括：

判断模块，用于在图像传感器输出图像数据的情况下，若接收到曝光信号，则确定所述图像传感器接收所述曝光信号的位置是否在第一窗口内；

处理模块，用于若所述图像传感器接收曝光信号的位置不在所述第一窗口内，则对所述曝光信号进行延迟处理，以使所述曝光信号位于第二窗口内；

确定模块，用于基于所述第二窗口的位置和第一行距确定图像中所述曝光信号对应的亮度异常行的位置；

校正模块，用于校正所述亮度异常行的平均亮度值；

其中，所述第一窗口位于所述图像传感器输出的行同步信号对应的图像行上；所述亮度异常行的平均亮度值与所述图像中其他行的平均亮度值之差大于或等于第一亮度阈值。

11.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；存储器，用于存放计算机程序；处理器，用于执行存储器上所存放的程序时，实现权利要求1-9任一项所述的方法步骤。

12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1-9任一项所述的方法步骤。

Images