CN114245010B - 图像的调整方法、装置、存储介质及电子装置 - Google Patents

Abstract

本发明实施例提供了一种图像的调整方法、装置、存储介质及电子装置，其中，该方法包括：确定获取到的目标图像中包括的每个子图像的特征值以及特征值的类型；针对特征值中包括的每种类型的子特征值均执行以下操作，以将特征值发送至目标处理器，以指示目标处理器调整每种类型的子特征值，得到调整后的图像：在第一类型的子特征值中包括的起始子特征值中添加用于指示开始传输第一类型的子特征值的开始标识，以及在第一类型的子特征值中包括的末尾子特征值中添加用于指示结束传输第一类型的子特征值的结束标识；按照每个子图像的排列顺序依次将第一类型的子特征值发送给目标处理器；其中，第一类型为特征值中包括的多种类型中的任一种类型。

Description

图像的调整方法、装置、存储介质及电子装置

技术领域

本发明实施例涉及通信领域，具体而言，涉及一种图像的调整方法、装置、存储介质及电子装置。

背景技术

在数字图像处理领域，自动曝光、自动白平衡是目前智能摄像系统常用的Sensor控制和图像处理技术，称之为2A算法。2A算法的实现依赖于Sensor图像自身统计信息的获取。统计信息，即特征值可以包括多种类型，CPU根据获取的统计信息对Sensor曝光和图像调节参数做出控制。在传输统计信息时，FPGA对采集到的Sensor数据进行分块统计，并将统计到的数据和原始RAW或YUV图像数据一起通过硬件链路发送到CPU，CPU采集到统计信息后对Sensor曝光参数和图像调节参数进行及时调整，达到自动控制的目的。FPGA和CPU之间用于传输统计值的硬件链路可以是LVDS、MIPI或者其他电气特性的传输接口。

在相关技术中，基于FPGA实现视频处理模块的摄像机产品使用硬件数据链路将2A统计值发送给CPU实现自动曝光控制。将统计值叠加在视频信号每一帧的扩展有效区，在扩展有效区的每一行发送固定个数的统计值。然而，受图像分辨率和统计值分块大小的影响，不同分辨率产品的统计值总量是不一样的，对于每一行固定个数传输的方案，CPU接收到统计值之后要根据图像分辨率和当前设置的分块大小裁剪出有效的统计值。这种方案下，在分辨率一定，当分块区域大小很小时，统计值总量会变多，对应的叠加行数就会变多，CPU裁剪的个数就会实时变化。对分辨率不同的产品，其裁剪个数更是不能做到统一，这对后端图像的控制和不同产品的方案兼容带来很大麻烦。其中，相关技术中特征值叠加示意图可参见附图1，处理器调整图像的流程图可参见附图2。

由此可知，相关技术中存在的处理器在调整图像时裁剪复杂、传输行数多变、产品无法兼容的问题。

针对相关技术中存在的上述问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种图像的调整方法、装置、存储介质及电子装置，以至少解决相关技术中存在的处理器在调整图像时裁剪复杂、传输行数多变、产品无法兼容的问题。

根据本发明的一个实施例，提供了一种图像的调整方法，包括：确定获取到的目标图像中包括的每个子图像的特征值以及所述特征值的类型；针对所述特征值中包括的每种类型的子特征值均执行以下操作，以将所述特征值发送至目标处理器，以指示所述目标处理器调整每种类型的所述子特征值，得到调整后的图像：在第一类型的子特征值中包括的起始子特征值中添加用于指示开始传输所述第一类型的子特征值的开始标识，以及在第一类型的子特征值中包括的末尾子特征值中添加用于指示结束传输所述第一类型的子特征值的结束标识；按照每个所述子图像的排列顺序依次将所述第一类型的子特征值发送给目标处理器；其中，所述第一类型为所述特征值中包括的多种类型中的任一种类型。

根据本发明的一个实施例，提供了一种图像的调整方法，包括：解析接收到的特征值中包括的标识信息，其中，所述特征值中包括目标图像中包括的每个子图像的多种类型的子特征值，每种类型的所述子特征值中包括的起始子特征值中包括用于指示开始传输所述类型的子特征值的开始标识，每种类型的所述子特征值中包括的末尾子特征值中包括指示结束传输所述类型的子特征值的结束标识；基于所述标识信息确定所述特征值中包括的每种类型的子特征值；调整每种类型的所述子特征值，以得到调整后的图像。

根据本发明的另一个实施例，提供了一种图像的调整装置，包括：第一确定模块，用于确定获取到的目标图像中包括的每个子图像的特征值以及所述特征值的类型；发送模块，用于针对所述特征值中包括的每种类型的子特征值均执行以下操作，以将所述特征值发送至目标处理器：在第一类型的子特征值中包括的起始子特征值中添加用于指示开始传输所述第一类型的子特征值的开始标识，以及在第一类型的子特征值中包括的末尾子特征值中添加用于指示结束传输所述第一类型的子特征值的结束标识；按照每个所述子图像的排列顺序依次将所述第一类型的子特征值发送给目标处理器；其中，所述第一类型为所述特征值中包括的多种类型中的任一种类型。

根据本发明的另一个实施例，提供了一种图像的调整装置，包括：解析模块，用于解析接收到的特征值中包括的标识信息，其中，所述特征值中包括目标图像中包括的每个子图像的多种类型的子特征值，每种类型的所述子特征值中包括的起始子特征值中包括用于指示开始传输所述类型的子特征值的开始标识，每种类型的所述子特征值中包括的末尾子特征值中包括指示结束传输所述类型的子特征值的结束标识；第二确定模块，用于基于所述标识信息确定所述特征值中包括的每种类型的子特征值；调整模块，用于调整每种类型的所述子特征值，以得到调整后的图像。

根据本发明的又一个实施例，还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，其中，所述计算机程序被处理器执行时实现上述任一项中所述的方法的步骤。

根据本发明的又一个实施例，还提供了一种电子装置，包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。

通过本发明，确定获取到的目标图像中包括的每个子图像的特征值以及特征值的类型，针对特征值中包括的每种类型的子特征值均执行以下操作，以将特征值发送至目标处理器，以指示目标处理器调整每种类型的子特征值，得到调整后的图像：在第一类型的子特征值中包括的起始特征值中添加用于指示开始传输第一类型的子特征值的开始标识以及在第一类型的子特征值中包括的末尾子特征值中添加用于指示结束传输第一类型的子特征值的结束标识，按照每个子图像的排列顺序依次将第一类型的子特征值发送给目标处理器，目标处理器在接收到特征值后，可以调整每种类型的子特征值，得到调整后的图像。在传输特征值时，可以在每种类型的子特征值中包括的起始子特征值中添加开始标识，在每种子特征值中包括的末尾子特征值中添加结束标识，目标处理器在接收时即可根据添加的标识信息确定每种类型的特征值，进而对特征值进行调整，得到调整后的图像，由于在发送的子特征值中添加了标识信息，目标处理器只需解析标识信息即可确定特征值，不需要额外判断分辨率和分块的大小，因此，可以解决相关技术中存在的特征值传输行数多变、处理器在调整图像时，裁剪复杂、产品无法兼容的问题，实现了自适应传输特征值，提高了传输效率，并实现了兼容不同分辨率的产品。

附图说明

图1是相关技术中特征值叠加示意图；

图2是相关技术中处理器调整图像的流程图；

图3是本发明实施例的一种图像的调整方法的移动终端的硬件结构框图；

图4是根据本发明实施例的图像的调整方法的流程图一；

图5是根据本发明示例性实施例的传感器采集到的RAW数据示意图；

图6是根据本发明示例性实施例的特征值传输示意图；

图7是根据本发明示例性实施例的目标图像示意图；

图8是根据本发明示例性实施例的视频流传输时序图；

图9根据本发明示例性实施例的目标图像分块示意图；

图10是根据本发明实施例的图像的调整方法的流程图二；

图11是根据本发明具体实施例的图像的调整方法流程图；

图12是根据本发明实施例的图像的调整装置的结构框图一；

图13是根据本发明实施例的图像的调整装置的结构框图二。

具体实施方式

下文中将参考附图并结合实施例来详细说明本发明的实施例。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。

本申请实施例中所提供的方法实施例可以在移动终端、计算机终端或者类似的运算装置中执行。以运行在移动终端上为例，图3是本发明实施例的一种图像的调整方法的移动终端的硬件结构框图。如图3所示，移动终端可以包括一个或多个(图3中仅示出一个)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)和用于存储数据的存储器104，其中，上述移动终端还可以包括用于通信功能的传输设备106以及输入输出设备108。本领域普通技术人员可以理解，图3所示的结构仅为示意，其并不对上述移动终端的结构造成限定。例如，移动终端还可包括比图3中所示更多或者更少的组件，或者具有与图3所示不同的配置。

存储器104可用于存储计算机程序，例如，应用软件的软件程序以及模块，如本发明实施例中的图像的调整方法对应的计算机程序，处理器102通过运行存储在存储器104内的计算机程序，从而执行各种功能应用以及数据处理，即实现上述的方法。存储器104可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器104可进一步包括相对于处理器102远程设置的存储器，这些远程存储器可以通过网络连接至移动终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

传输设备106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括移动终端的通信供应商提供的无线网络。在一个实例中，传输设备106包括一个网络适配器(Network Interface Controller，简称为NIC)，其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中，传输设备106可以为射频(Radio Frequency，简称为RF)模块，其用于通过无线方式与互联网进行通讯。

在本实施例中提供了一种图像的调整方法，图4是根据本发明实施例的图像的调整方法的流程图一，如图4所示，该流程包括如下步骤：

步骤S402，确定获取到的目标图像中包括的每个子图像的特征值以及所述特征值的类型；

步骤S404，针对所述特征值中包括的每种类型的子特征值均执行以下操作，以将所述特征值发送至目标处理器，以指示所述目标处理器调整每种类型的所述子特征值，得到调整后的图像：在第一类型的子特征值中包括的起始子特征值中添加用于指示开始传输所述第一类型的子特征值的开始标识，以及在第一类型的子特征值中包括的末尾子特征值中添加用于指示结束传输所述第一类型的子特征值的结束标识；按照每个所述子图像的排列顺序依次将所述第一类型的子特征值发送给目标处理器；其中，所述第一类型为所述特征值中包括的多种类型中的任一种类型。

在上述实施例中，目标图像可以是摄像设备的传感器采集到的图像，可以将目标图像进行划分，得到多个子图像。每个子图像可以包括多种类型的特征值。其中，特征值的类型可以包括R(红)、G(绿)、B(蓝)、Y(亮度)等。当然，特征值的类型还可以包括R、G、B，图像的Y值可以根据R、G、B以及转换公式计算得到。其中，传感器采集到的RAW数据示意图可参见附图5。在RAW域的特征值类型包括R G B和亮度值Y。特征值可以采用均值法计算出对应块的R、G、B、Y值。

在上述实施例中，在得到每个子图像的每个类型的特征值后，即可将每个子图像的每种类型的特征值传输给目标处理器，在传输的过程中，可以依次传输每种类型的特征值。如，当包括四种类型的特征值时，可以先传输第一种类型的特征值，在第一种类型的特征值传输完毕后，再传到第二种类型的特征值、第三种类型的特征值，最后传输第四种类型的特征值。

在上述实施例中，在传输每种类型的特征值时，如传输第一类型的特征值，可以在第一类型的子特征值中包括的起始子特征值中添加用于指示开始传输第一类型的子特征值的开始标识，在传输到第一类型的末尾子特征值时，在末尾子特征值中添加结束传输的结束标识。其中，结束标识表示传输第一类型的子特征值结束。

在上述实施例中，发送特征值的执行主体，如FPGA和目标处理器之间可以预先建立协议，FPGA可以在发送特征值之前在特征值中添加标识信息，发送给目标处理器后，目标处理器可以根据协议解析出标识信息，进而确定每种类型的特征值，通过私有协议的方式将FPGA得到的图像统计数据上传给CPU，通过特殊字符的叠加，有效利用了传输带宽，提高传输效率。

可选地，上述步骤的执行主体可以是FPGA、后台处理器，或者其他的具备类似处理能力的设备，还可以是至少集成有图像获取设备以及数据处理设备的机器，其中，图像获取设备可以包括摄像头等图形采集模块，数据处理设备可以包括计算机、手机等终端，但不限于此。

通过本发明，确定获取到的目标图像中包括的每个子图像的特征值以及特征值的类型，针对特征值中包括的每种类型的子特征值均执行以下操作，以将特征值发送至目标处理器，以指示目标处理器调整每种类型的子特征值，得到调整后的图像：在第一类型的子特征值中包括的起始特征值中添加用于指示开始传输第一类型的子特征值的开始标识以及在第一类型的子特征值中包括的末尾子特征值中添加用于指示结束传输第一类型的子特征值的结束标识，按照每个子图像的排列顺序依次将第一类型的子特征值发送给目标处理器，目标处理器在接收到特征值后，可以调整每种类型的子特征值，得到调整后的图像。在传输特征值时，可以在每种类型的子特征值中包括的起始子特征值中添加开始标识，在每种子特征值中包括的末尾子特征值中添加结束标识，目标处理器在接收时即可根据添加的标识信息确定每种类型的特征值，进而对特征值进行调整，得到调整后的图像，由于在发送的子特征值中添加了标识信息，目标处理器只需解析标识信息即可确定特征值，不需要额外判断分辨率和分块的大小，因此，可以解决相关技术中存在的特征值传输行数多变、处理器在调整图像时，裁剪复杂、产品无法兼容的问题，实现了自适应传输特征值，提高了传输效率，并实现了兼容不同分辨率的产品。

在一个示例性实施例中，在第一类型的子特征值中包括的起始子特征值中添加用于指示开始传输所述第一类型的子特征值的开始标识包括：确定所述起始子特征值对应的起始标识；确定所述第一类型的所述子特征值的目标数量；确定所述第一类型对应的类型标识；将所述起始标识、所述目标数量以及所述类型标识确定为所述开始标识；在所述起始子特征值中添加所述开始标识。在本实施例中，在每种类统计值传输的开始，首先叠加两个字节的起始标识，如起始字符，记为SOT(Start Of Transfer，传输开始)。当后端CPU解析到SOT字符时，开始接收特征值。SOT为区别于像素值的特殊字符，要和其他的特殊标记码有所区分，SOT可以分为两种，一种标识第一次传输开始，第二种表示第二次到最后一次的开始。即，传输每个子图像的特征值时第一个传输的起始子特征值对应的第一起始标识与其他类型的起始子特征值对应的第二起始标识不同。例如，每个子图像的特征值包括四个类型的特征值，分别为第一类型、第二类型、第三类型和第四类型，传输顺序为第一类型、第二类型、第三类型和第四类型。则第一类型的起始子特征值对应的起始标识与第二类型、第三类型以及第四类型的起始子特征对应的起始标识不同，其中，第二类型、第三类型以及第四类型的起始子特征对应的起始标识可以相同，也可以不同。其中，起始标识可参见表1。

表1

SOT(十六进制)	含义
		0x5555	第一次统计值传输开始
0xaaaa	第二次到最后一次传输开始

在上述实施例中，在SOT起始字符之后，可以叠加2个字节的统计值个数NUM，即第一类型的子特征值的目标数量，当后端CPU解析到NUM字符后，会得到即将要传输的数据量，数据量可用于传输个数的校验。其中，目标数量可以表示为

式中img_w为图像有效宽度，img_h为图像有效高度，stat_w为分块宽度，stat_h为分块高度。

在上述实施例中，为了保证每一帧帧内数据一致性，可以采用每一帧计算一次目标数量的方式，且帧内不进行更新，只在帧同步信号vsync脉冲到来时，同步进行参数计算。帧内如果有新的参数变化，不进行计算更新。这样可以避免在一帧未完成时前半帧参数和后半帧参数不一致的情况。通过内部实时参数获取和计算，可做到自适应传输，避免了CPU裁剪个数和实际传输个数不一致导致的传输错误。

在上述实施例中，在NUM字符后，叠加1个字节的表征统计值类型的字符TYPE，即第一类型对应的类型标识，可以根据二进制编码方式，一个字节可以表示256种类型，也可以根据十进制编码方式表示。其中，类型标识可参见表2。

表2

TYPE值(十进制)	统计值类型(特征值类型)
		0	统计值类型1
1	统计值类型2
		2	统计值类型3
3	统计值类型4

在上述实施例中，起始标识、目标数量以及类型标识可以添加在起始子特征值之前，起始标识可以添加在首位，目标数量和类型标识顺序可以自定义设置。即开始标识可以是起始标识+目标数量+类型标识，还可以是起始标识+类型标识+目标数量。开始标识可以添加在起始子特征值之前，也可以添加在起始子特征值之后，也可以添加值起始子特征值中，本发明对此不作限定。

在一个示例性实施例中，在第一类型的子特征值中包括的末尾子特征值中添加用于指示结束传输所述第一类型的子特征值的结束标识包括：确定发送至目标处理器的所述第一类型的所述子特征值的发送数量；在所述发送数量等于所述第一类型的所有所述子特征值的目标数量的情况下，在所述末尾子特征值中添加所述结束标识。在本实施例中，在第一类型的特征值中包括的末尾子特征值中添加结束标识时，可以确定发送至目标处理器的第一类型的子特征值的发送数量，当发送数量等于第一类型的所有子特征值的目标数量时，在末尾子特征值中添加结束标识。需要说明的是，在发送的最后一个类型的末尾子特征值中添加的结束标识可以与其他类型的末尾子特征值中添加的结束标识不同。

在上述实施例中，在每种类型的特征值时，可以依次读取FPGA内部已经缓存好的每种特征值，特征值可以在行有效信号有效时一直叠加，不再以固定个数叠加。同时启动计数器工作，每叠加一个特征值，计数器值加1，实时比对计数值(即发送数量)和统计总数(即目标数量)，如果二者相等则表示当前类型的统计值传输结束。结束当前类型的传输，可以在末尾子特征值中叠加结束标识EOT(End Of Transfer，传输结束)。结束标识可以分为两种：一种是当前类型的统计值传输结束，一种是所有统计值的传输结束。其中，结束标识可参见表3。

表3

EOT(十六进制)	含义
		0x5a5a	当前传输类统计值结束
0xa5a5	所有统计值传输结束

在上述实施例中，当所有类型的统计值均发送完毕后，结束当前帧的特征值传输，开始下一帧图像的特征值传输。其中，特征值传输示意图可参加附图6。

在上述实施例中，通过FPGA内部实时计算分块参数获取当前统计值总数，能够实时自适应的把统计值传输给CPU，同时通过叠加不同字符的协议信息，CPU可实现准确获取，避免对接收的数据进行多次判断和裁剪，同时避免了因实际传输个数和裁剪个数不一致带来的错误。对不同的产品可以实现方案灵活兼容，避免了因Sensor分辨率不同带来重复开发和维护工作。

在一个示例性实施例中，在将所述特征值发送至目标处理器之前，所述方法还包括：将每种类型的所述特征值添加到所述目标图像的消隐区，得到扩展有效区；将所述特征值发送至目标处理器包括：在所述目标图像的消隐区添加了所述特征值的情况下，确定所述扩展有效区的传输状态，在所述传输状态指示开始传输所述扩展有效区的情况下，将每个类型的所述子特征值依次发送给目标处理器。在本实施例中，目标图像可以包括有效区和消隐区。在传输目标图像时，可以一行一行地进行图像传输，即首先传输有效区的图像。其中，有效区即为包括真实图像数据的区域。每个子图像即为对有效区图像进行划分所得到的图像。因此，在有效区图像传输完毕后，即可完成所有子图像的特征值的统计。可以将每种类型的特征值添加到目标图像的消隐区，即每种类型的特征值是叠加在视频流扩展有效区(即叠加了特征值的消隐区)内进行传输的。扩展有效区是将原始图像的消隐区扩展为有效区，同时特征值在扩展有效区到达时也刚好完成当前帧的统计，因此，在传输特征值时，可以判断视频流是否到扩展有效区，在达到扩展有效区后，开始准备读取统计数据进行叠加。在达到扩展有效区时，即扩展有效区的传输状态为开始传输时，每种类型的特征值在行有效时依次满行传输，其中，目标图像示意图可参见附图7。

在上述实施例中，在FPGA内部，视频流传输时序图可参见附图8，如图8所示，vsync表示一帧开始，hsync表示一行开始，h_valid表示一行内有效像素，v_valid表示帧有效信号，v_valid_exp表示扩展后的帧有效信号。可以看出扩展后的帧有效信号和原始帧有效相比，扩展了原来的消隐行用来叠加统计值，扩展出的这几行本文称为扩展有效区。判断是否到达扩展有效区的判断依据是：v_valid信号的下降沿，下降沿到来，说明下一行就是扩展有效区。

在上述实施例中，在确定出每个子图像的特征值后，可以将特征值缓存在FPGA中，当达到扩展有效区时，由于后端CPU只接收有效数据，只有v_valid_exp和h_valid同时有效时，数据才会被CPU接收，其他消隐区的数据会被丢弃，因此特征值可以在行有效信号有效时一直叠加。

在上述实施例中，特征值可以在扩展有效区内行有效信号有效时满行传输，相比固定个数的传输能有效减少传输行数，提高了传输带宽利用率。

在一个示例性实施例中，将所述特征值发送至目标处理器包括：确定传输当前类型的所述子特征值的第一数量；确定所述当前类型的所述子特征值中包括的所有所述子特征值的第二数量；在所述第一数量等于所述第二数量的情况下，发送下一个类型的所述子特征值。在本实施例中，在将特征值发送值目标处理器时，可以确定传输当前类型的子特征值的第一数量以及当前类型的子特征值的总数量，即第二数量。当第一数量等于第二数量时，确定当前类型的子特征值发送完毕，则可以在当前类型的末尾子特征值后添加结束标识，并在下一个类型的起始子特征值前添加开始标识，并将下一个类型确定为当前类型，依次传输该类型下的子特征值。

在一个示例性实施例中，在确定获取到的目标图像中包括的多个子图像的特征值之前，所述方法还包括：确定所述目标图像的分块参数；确定所述目标图像的有效尺寸参数；基于有效尺寸参数以及所述分块参数划分所述目标图像，以得到多个所述子图像。在本实施例中，可以根据目标图像的分辨率和分块参数，计算当前帧需要传输的每种类型的特征值的总数，统计个数每一帧更新一次。其中，可以根据目标图像的分辨率确定有效尺寸参数。FPGA在采集到Sensor数据后，内部统计模块会根据当前的分块大小参数进行特征值计算，特征值可以分为四类：统计值类型1、统计值类型2、统计值类型3、统计值类型4，四类统计值的个数都是一样的，统计值类型1为例，统计值个数计算为：

式中n为统计值类型1个数(其他3类同理)，img_w为图像有效宽度，img_h为图像有效高度，stat_w为分块宽度，stat_h为分块高度。统计值的准确性和分块大小强相关，因此，分块参数会根据图像效果需求进行调整，对应的需要传输的每一类统计值数量就会随之变化。其中，分块参数包括分块宽度以及分块高度，有效尺寸参数包括图像有效宽度和图像有效高度。目标图像分块示意图可参见附图9。

在本实施例中还提供了一种图像的调整方法，图10是根据本发明实施例的图像的调整方法的流程图二，如图10所示，该流程包括如下步骤：

步骤S1002，解析接收到的特征值中包括的标识信息，其中，所述特征值中包括目标图像中包括的每个子图像的多种类型的子特征值，每种类型的所述子特征值中包括的起始子特征值中包括用于指示开始传输所述类型的子特征值的开始标识，每种类型的所述子特征值中包括的末尾子特征值中包括指示结束传输所述类型的子特征值的结束标识；

步骤S1004，基于所述标识信息确定所述特征值中包括的每种类型的子特征值；

步骤S1006，调整每种类型的所述子特征值，以得到调整后的图像。

在上述实施例中，目标图像可以是摄像设备的传感器采集到的图像，可以将目标图像进行划分，得到多个子图像。每个子图像可以包括多种类型的特征值。其中，特征值的类型可以包括R(红)、G(绿)、B(蓝)、Y(亮度)等。当然，特征值的类型还可以包括R、G、B，图像的Y值可以根据R、G、B以及转换公式计算得到。其中，传感器采集到的RAW数据示意图可参见附图4。在RAW域的特征值类型包括R G B和亮度值Y。特征值可以采用均值法计算出对应块的R、G、B、Y值。

在上述实施例中，在得到每个子图像的每个类型的特征值后，即可将每个子图像的每种类型的特征值传输给目标处理器，在传输的过程中，可以依次传输每种类型的特征值。如，当包括四种类型的特征值时，可以先传输第一种类型的特征值，在第一种类型的特征值传输完毕后，再传到第二种类型的特征值、第三种类型的特征值，最后传输第四种类型的特征值。

在上述实施例中，在传输每种类型的特征值时，如传输第一类型的特征值，可以在第一类型的子特征值中包括的起始子特征值中添加用于指示开始传输第一类型的子特征值的开始标识，在传输到第一类型的末尾子特征值时，在末尾子特征值中添加结束传输的结束标识。其中，结束标识表示传输第一类型的子特征值结束。

在上述实施例中，目标处理器在接收到特征值后，可以解析接收到的特征值中包括的标识信息，根据标识信息确定特征值中包括的每种类型的子特征值，调整子特征值，得到调整后的图像。

通过本发明，目标处理器在接收到特征值后，可以调整每种类型的子特征值，得到调整后的图像。在传输特征值时，可以在每种类型的子特征值中包括的起始子特征值中添加开始标识，在每种子特征值中包括的末尾子特征值中添加结束标识，目标处理器在接收时即可根据添加的标识信息确定每种类型的特征值，进而对特征值进行调整，得到调整后的图像，由于在发送的子特征值中添加了标识信息，目标处理器只需解析标识信息即可确定特征值，不需要额外判断分辨率和分块的大小，因此，可以解决相关技术中存在的特征值传输行数多变、处理器在调整图像时，裁剪复杂、产品无法兼容的问题，实现了自适应传输特征值，提高了传输效率，并实现了兼容不同分辨率的产品。

可选地，上述步骤的执行主体可以是目标处理器。

在一个示例性实施例中，基于所述标识信息确定所述特征值中包括的每种类型的子特征值包括：在所述标识信息中包括起始标识的情况下，统计接收到的所述子特征值的第三数量，以及确定所述标识信息中包括的类型标识以及目标数量；在接收到的所述标识信息中包括结束标识的情况下，确定所述第三数量与所述目标数量的数量关系；在所述数量关系指示所述第三数量等于所述目标数量的情况下，将包括所述起始标识的子特征值到包括所述结束标识的子特征值之间的所述子特征值确定为所述类型标识对应的类型的子特征值。在本实施例中，在确定每种类型的子特征值时，解析标识信息，当标识信息中包括起始标识的情况下，统计接收到的子特征值的第三数量，并确定标识信息中包括的类型标识和目标数量。在解析出标识信息中包括结束标识的情况下，确定目标数量与第三数量的数量关系，当二者相等的情况下，将包括起始标识的子特征值到包括结束标识的子特征值之间的所有子特征值确定为类型标识对应的类型的子特征值。

下面结合具体实施方式对图像的调整方法进行说明：

图11是根据本发明具体实施例的图像的调整方法流程图，如图11所示，该流程包括：

步骤S1102，根据图像分辨率和分块大小，计算当前帧需要传输的统计值(对应于上述特征值)总个数，统计个数每一帧更新一次。

步骤S1104，判断是否到达扩展有效区，在判断结果为否的情况下，执行步骤S1106，在判断结果为是的情况下，执行步骤S1108。

步骤S1106，正常图像数据传输，在视频流帧有效区，当前帧图像数据直接传输给后端CPU。

步骤S1108，叠加统计值传输起始字符。

步骤S1110，叠加统计值传输总数和当前要传输的统计值类型字符。

步骤S1112，在行有效的像素位置叠加统计值，并利用计数器计数统计值传输个数。

步骤S1114，判断传输个数是否等于统计总数。在判断结果为是的情况下，执行步骤S1116，在判断结果为否的情况下，执行步骤S1112。

步骤S1116，在每一种统计值最后一个数据之后，叠加结束字符。

步骤S1118，判断所有统计值是否传输完成，在判断结果为是得到情况下，执行步骤S1120，在判断结果为否的情况下，执行步骤S1110。

步骤S1120，当前帧传输结束，返回步骤S1102等待下次传输。

在前述实施例中，通过附加协议信息的方式，标识出传输起始字符、当前传输类型字符和传输结束字符。对于FPGA发送端，统计信息可以灵活的叠加在扩展有效区的每一行，通过附加信息告知后端CPU当前传输的统计信息以及是否结束传输。对于CPU接收端，根据协议信息去分类当前收到的统计值，不需要额外判断分辨率和分块的大小。对于不同分辨率的产品和不同的分块区域，可以做到自适应传输和兼容。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。

在本实施例中还提供了一种图像的调整装置，该装置用于实现上述实施例及优选实施方式，已经进行过说明的不再赘述。如以下所使用的，术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。

图12是根据本发明实施例的图像的调整装置的结构框图一，如图12所示，该装置包括：

第一确定模块1202，用于确定获取到的目标图像中包括的每个子图像的特征值以及所述特征值的类型；

发送模块1204，用于针对所述特征值中包括的每种类型的子特征值均执行以下操作，以将所述特征值发送至目标处理器：在第一类型的子特征值中包括的起始子特征值中添加用于指示开始传输所述第一类型的子特征值的开始标识，以及在第一类型的子特征值中包括的末尾子特征值中添加用于指示结束传输所述第一类型的子特征值的结束标识；按照每个所述子图像的排列顺序依次将所述第一类型的子特征值发送给目标处理器；其中，所述第一类型为所述特征值中包括的多种类型中的任一种类型。

在一个示例性实施例中，发送模块1204可以通过如下方式实现在第一类型的子特征值中包括的起始子特征值中添加用于指示开始传输所述第一类型的子特征值的开始标识：确定所述起始子特征值对应的起始标识；确定所述第一类型的所述子特征值的目标数量；确定所述第一类型对应的类型标识；将所述起始标识、所述目标数量以及所述类型标识确定为所述开始标识；在所述起始子特征值中添加所述开始标识。

在一个示例性实施例中，发送模块1204可以通过如下方式实现在第一类型的子特征值中包括的末尾子特征值中添加用于指示结束传输所述第一类型的子特征值的结束标识：确定发送至目标处理器的所述第一类型的所述子特征值的发送数量；在所述发送数量等于所述第一类型的所有所述子特征值的目标数量的情况下，在所述末尾子特征值中添加所述结束标识。

在一个示例性实施例中，所述装置可以用于在将所述特征值发送至目标处理器之前：将每种类型的所述特征值添加到所述目标图像的消隐区，得到扩展有效区；发送模块1204可以通过如下方式实现将所述特征值发送至目标处理器：在所述目标图像的消隐区添加了所述特征值的情况下，确定所述扩展有效区的传输状态，在所述传输状态指示开始传输所述扩展有效区的情况下，将每个类型的所述子特征值依次发送给目标处理器。

在一个示例性实施例中，发送模块1204可以通过如下方式实现将所述特征值发送至目标处理器：确定传输当前类型的所述子特征值的第一数量；确定所述当前类型的所述子特征值中包括的所有所述子特征值的第二数量；在所述第一数量等于所述第二数量的情况下，发送下一个类型的所述子特征值。

在一个示例性实施例中，所述装置可以用于在确定获取到的目标图像中包括的多个子图像的特征值之前：确定所述目标图像的分块参数；确定所述目标图像的有效尺寸参数；基于有效尺寸参数以及所述分块参数划分所述目标图像，以得到多个所述子图像。

图13是根据本发明实施例的图像的调整装置的结构框图二，如图13所示，该装置包括：

解析模块1302，用于解析接收到的特征值中包括的标识信息，其中，所述特征值中包括目标图像中包括的每个子图像的多种类型的子特征值，每种类型的所述子特征值中包括的起始子特征值中包括用于指示开始传输所述类型的子特征值的开始标识，每种类型的所述子特征值中包括的末尾子特征值中包括指示结束传输所述类型的子特征值的结束标识；

第二确定模块1304，用于基于所述标识信息确定所述特征值中包括的每种类型的子特征值；

调整模块1306，用于调整每种类型的所述子特征值，以得到调整后的图像。

在一个示例性实施例中，第二确定模块1304可以通过如下方式实现基于所述标识信息确定所述特征值中包括的每种类型的子特征值：在所述标识信息中包括起始标识的情况下，统计接收到的所述子特征值的第三数量，以及确定所述标识信息中包括的类型标识以及目标数量；在接收到的所述标识信息中包括结束标识的情况下，确定所述第三数量与所述目标数量的数量关系；在所述数量关系指示所述第三数量等于所述目标数量的情况下，将包括所述起始标识的子特征值到包括所述结束标识的子特征值之间的所述子特征值确定为所述类型标识对应的类型的子特征值。

需要说明的是，上述各个模块是可以通过软件或硬件来实现的，对于后者，可以通过以下方式实现，但不限于此：上述模块均位于同一处理器中；或者，上述各个模块以任意组合的形式分别位于不同的处理器中。

本发明的实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，其中，所述计算机程序被处理器执行时实现上述任一项中所述的方法的步骤。

在一个示例性实施例中，上述计算机可读存储介质可以包括但不限于：U盘、只读存储器(Read-Only Memory，简称为ROM)、随机存取存储器(Random Access Memory，简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储计算机程序的介质。

本发明的实施例还提供了一种电子装置，包括存储器和处理器，该存储器中存储有计算机程序，该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。

在一个示例性实施例中，上述电子装置还可以包括传输设备以及输入输出设备，其中，该传输设备和上述处理器连接，该输入输出设备和上述处理器连接。

本实施例中的具体示例可以参考上述实施例及示例性实施方式中所描述的示例，本实施例在此不再赘述。

显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种图像的调整方法，其特征在于，包括：

确定获取到的目标图像中包括的每个子图像的特征值以及所述特征值的类型；

针对所述特征值中包括的每种类型的子特征值均执行以下操作，以将所述特征值发送至目标处理器，以指示所述目标处理器调整每种类型的所述子特征值，得到调整后的图像：

在第一类型的子特征值中包括的起始子特征值中添加用于指示开始传输所述第一类型的子特征值的开始标识，以及在第一类型的子特征值中包括的末尾子特征值中添加用于指示结束传输所述第一类型的子特征值的结束标识；

按照每个所述子图像的排列顺序依次将所述第一类型的子特征值发送给目标处理器；

其中，所述第一类型为所述特征值中包括的多种类型中的任一种类型；

其中，在确定获取到的目标图像中包括的多个子图像的特征值之前，所述方法还包括：确定所述目标图像的分块参数；确定所述目标图像的有效尺寸参数；基于有效尺寸参数以及所述分块参数划分所述目标图像，以得到多个所述子图像；

其中，所述特征值的类型包括：红色、绿色、蓝色、亮度；

其中，在将所述特征值发送至目标处理器之前，所述方法还包括：将每种类型的所述特征值添加到所述目标图像的消隐区，得到扩展有效区；将所述特征值发送至目标处理器包括：在所述目标图像的消隐区添加了所述特征值的情况下，确定所述扩展有效区的传输状态，在所述传输状态指示开始传输所述扩展有效区的情况下，将每个类型的所述子特征值依次发送给目标处理器。

2.根据权利要求1所述的方法，其特征在于，在第一类型的子特征值中包括的起始子特征值中添加用于指示开始传输所述第一类型的子特征值的开始标识包括：

确定所述起始子特征值对应的起始标识；

确定所述第一类型的所述子特征值的目标数量；

确定所述第一类型对应的类型标识；

将所述起始标识、所述目标数量以及所述类型标识确定为所述开始标识；

在所述起始子特征值中添加所述开始标识。

3.根据权利要求1所述的方法，其特征在于，在第一类型的子特征值中包括的末尾子特征值中添加用于指示结束传输所述第一类型的子特征值的结束标识包括：

确定发送至目标处理器的所述第一类型的所述子特征值的发送数量；

在所述发送数量等于所述第一类型的所有所述子特征值的目标数量的情况下，在所述末尾子特征值中添加所述结束标识。

4.根据权利要求1所述的方法，其特征在于，将所述特征值发送至目标处理器包括：

确定传输当前类型的所述子特征值的第一数量；

确定所述当前类型的所述子特征值中包括的所有所述子特征值的第二数量；

在所述第一数量等于所述第二数量的情况下，发送下一个类型的所述子特征值。

5.一种图像的调整方法，其特征在于，包括：

解析接收到的特征值中包括的标识信息，其中，所述特征值中包括目标图像中包括的每个子图像的多种类型的子特征值，每种类型的所述子特征值中包括的起始子特征值中包括用于指示开始传输所述类型的子特征值的开始标识，每种类型的所述子特征值中包括的末尾子特征值中包括指示结束传输所述类型的子特征值的结束标识；

基于所述标识信息确定所述特征值中包括的每种类型的子特征值；

调整每种类型的所述子特征值，以得到调整后的图像；

其中，接收方解析接收到的特征值中包括的标识信息之前，发送方通过以下方式确定目标图像中包括的多个子图像：确定所述目标图像的分块参数；确定所述目标图像的有效尺寸参数；基于有效尺寸参数以及所述分块参数划分所述目标图像，以得到多个所述子图像；

其中，所述特征值的类型包括：红色、绿色、蓝色、亮度；

其中，所述接收方在接收所述发送方发送的所述特征值之前，所述发送方将每种类型的所述特征值添加到所述目标图像的消隐区，得到扩展有效区；所述发送方通过以下方式将所述特征值发送至所述接收方：在所述目标图像的消隐区添加了所述特征值的情况下，确定所述扩展有效区的传输状态，在所述传输状态指示开始传输所述扩展有效区的情况下，将每个类型的所述子特征值依次发送给所述接收方。

6.根据权利要求5所述的方法，其特征在于，基于所述标识信息确定所述特征值中包括的每种类型的子特征值包括：

在所述标识信息中包括起始标识的情况下，统计接收到的所述子特征值的第三数量，以及确定所述标识信息中包括的类型标识以及目标数量；

在接收到的所述标识信息中包括结束标识的情况下，确定所述第三数量与所述目标数量的数量关系；

在所述数量关系指示所述第三数量等于所述目标数量的情况下，将包括所述起始标识的子特征值到包括所述结束标识的子特征值之间的所述子特征值确定为所述类型标识对应的类型的子特征值。

7.一种图像的调整装置，其特征在于，包括：

第一确定模块，用于确定获取到的目标图像中包括的每个子图像的特征值以及所述特征值的类型；

发送模块，用于针对所述特征值中包括的每种类型的子特征值均执行以下操作，以将所述特征值发送至目标处理器：在第一类型的子特征值中包括的起始子特征值中添加用于指示开始传输所述第一类型的子特征值的开始标识，以及在第一类型的子特征值中包括的末尾子特征值中添加用于指示结束传输所述第一类型的子特征值的结束标识；按照每个所述子图像的排列顺序依次将所述第一类型的子特征值发送给目标处理器；其中，所述第一类型为所述特征值中包括的多种类型中的任一种类型；

其中，所述装置还用于在确定获取到的目标图像中包括的多个子图像的特征值之前，确定所述目标图像的分块参数；确定所述目标图像的有效尺寸参数；基于有效尺寸参数以及所述分块参数划分所述目标图像，以得到多个所述子图像；

其中，所述特征值的类型包括：红色、绿色、蓝色、亮度；

其中，所述装置还用于在将所述特征值发送至目标处理器之前，将每种类型的所述特征值添加到所述目标图像的消隐区，得到扩展有效区；所述发送模块可以通过如下方式实现将所述特征值发送至目标处理器：在所述目标图像的消隐区添加了所述特征值的情况下，确定所述扩展有效区的传输状态，在所述传输状态指示开始传输所述扩展有效区的情况下，将每个类型的所述子特征值依次发送给目标处理器。

8.一种特征值的调整装置，其特征在于，包括：

解析模块，用于解析接收到的特征值中包括的标识信息，其中，所述特征值中包括目标图像中包括的每个子图像的多种类型的子特征值，每种类型的所述子特征值中包括的起始子特征值中包括用于指示开始传输所述类型的子特征值的开始标识，每种类型的所述子特征值中包括的末尾子特征值中包括指示结束传输所述类型的子特征值的结束标识；

第二确定模块，用于基于所述标识信息确定所述特征值中包括的每种类型的子特征值；

调整模块，用于调整每种类型的所述子特征值，以得到调整后的图像；

其中，所述目标图像中包括的多个子图像为发送方通过以下方式确定的图像：确定所述目标图像的分块参数；确定所述目标图像的有效尺寸参数；基于有效尺寸参数以及所述分块参数划分所述目标图像，以得到多个所述子图像；

其中，所述特征值的类型包括：红色、绿色、蓝色、亮度；

其中，所述装置，还用于通过以下方式接收所述发送方发送的所述特征值：依次接收所述发送方在确定所述目标图像的消隐区添加了所述特征值、且扩展有效区的传输状态指示开始传输所述扩展有效区的情况下，所发送的每个类型的所述子特征值；

其中，所述扩展有效区是所述发送方发送所述特征值之前，所述发送方将每种类型的所述特征值添加到所述目标图像的消隐区后得到的。

9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机程序，其中，所述计算机程序被处理器执行时实现所述权利要求1至4任一项中所述的方法的步骤，或者实现权利要求5至6任一项中所述的方法的步骤。

10.一种电子装置，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行所述权利要求1至4任一项中所述的方法，或者执行权利要求5至6任一项中所述的方法。

Images