CN117278693A - 图像数据处理电路、方法、电子设备及介质 - Google Patents

Abstract

本申请公开了一种图像数据处理电路、方法、电子设备及介质，属于图像处理领域。所述图像数据处理电路包括主控芯片和图像处理芯片，所述主控芯片与所述图像处理芯片连接；所述主控芯片用于基于第一图像数据和元数据获得第二YUV格式的第二图像数据；所述主控芯片还用于将所述第二图像数据传输至所述图像处理芯片；所述图像处理芯片用于对所述第二图像数据进行处理；其中，所述第一图像数据和所述元数据中的至少一项为非第二YUV格式的数据。

Description

图像数据处理电路、方法、电子设备及介质

技术领域

本申请属于通信技术领域，具体涉及一种图像数据处理电路、方法、电子设备及介质。

背景技术

现有的终端，手机功能和特性在同一处理器芯片供应生态下，同质化严重，手机影像作为智能手机核心卖点之一，是近年来各大厂商作为技术创新以及提升用户体验的核心赛道之一。外挂芯片实现强定制化成了各家厂商的新竞争方向。各家厂商通过在处理器芯片之外，通过外接一颗额外的芯片进行影像方面的个性算法处理，以取得差异化竞争优势。

外挂图像信号处理(Image signal processing，ISP)芯片多用于影像部分，所以一般采用移动产业处理器接口(Mobile Industry Processor Interface，MIPI)传输数据。如果外挂ISP芯片作为显示芯片，连接在平台ISP处理之后，这样只能通过MIPI显示器串行接口(Display Serial Interface，DSI)传输图像数据给集成电路(Integrated Circuit，IC)，该情况下传输的数据类型是RGBA8888图像格式，该图像格式会造成MIPI传输数据量过大，从而带来MIPI带宽的增大以及功耗增大。

发明内容

本申请实施例的目的是提供一种图像数据处理电路、方法、电子设备及介质，用以解决现有的数据传输格式导致功耗增大的问题。

第一方面，本申请实施例提供了一种图像数据处理电路，包括主控芯片和图像处理芯片，所述主控芯片与所述图像处理芯片连接；

所述主控芯片用于基于第一图像数据和元数据获得第二YUV格式的第二图像数据；

所述主控芯片还用于将所述第二图像数据传输至所述图像处理芯片；

所述图像处理芯片用于对所述第二图像数据进行处理；

其中，所述第一图像数据和所述元数据中的至少一项为非第二YUV格式的数据。

第二方面，本申请实施例提供了一种图像数据处理方法，包括：

基于第一图像数据和元数据获得第二YUV格式的第二图像数据；

将所述第二图像数据传输至图像处理芯片；

其中，所述第一图像数据和所述元数据中的至少一项为非第二YUV格式的数据。

第三方面，本申请实施例提供了一种电子设备，该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如第二方面所述的方法的步骤。

第四方面，本申请实施例提供了一种可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如第二方面所述的方法的步骤。

第五方面，本申请实施例还提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现如第二方面所述的方法。

本申请的实施例，主控芯片基于第一图像数据和元数据获得第二YUV格式的第二图像数据；将所述第二图像数据传输给图像处理芯片，则图像处理芯片可以接收并处理第二YUV格式的第二图像数据。本申请实施例中，主控芯片支持输出第二YUV格式的图像数据，且外挂IC作为图像处理芯片也支持处理第二YUV格式的图像数据，使得在数据处理和传输过程中保持较小的数据量，避免MIPI带宽的增大以及功耗增大，实现以较小的MIPI速率传输较大的分辨率。此外，由于传输数据量显著减小，能够降低设备功耗。

附图说明

图1是本申请实施例的SOC与外挂芯片之间的结构示意图之一；

图2是本申请实施例的图像数据和元数据的合并示意图；

图3是本申请实施例的YUV420的一种格式示意图；

图4表示本申请实施例的SOC与外挂芯片之间的结构示意图之二；

图5表示本申请实施例的将元数据记录为NV12格式的示意图；

图6是本申请实施例的图像数据处理方法的流程示意图；

图7表示本申请实施例的图像数据处理装置的结构示意图；

图8表示本申请实施例的电子设备的结构示意图之一；

图9表示本申请实施例的电子设备的结构示意图之二。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请的说明书和权利要求书中的术语“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中，除非另有说明，“多个”的含义是两个或两个以上。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。

本申请实施例提供一种图像数据处理电路，包括主控芯片和图像处理芯片，所述主控芯片与所述图像处理芯片连接；

所述主控芯片用于基于第一图像数据和元数据获得第二YUV格式的第二图像数据；所述主控芯片还用于将所述第二图像数据传输至所述图像处理芯片；

所述图像处理芯片用于对所述第二图像数据进行处理；

其中，所述第一图像数据和所述元数据中的至少一项为非第二YUV格式的数据。

该实施例中，所述主控芯片可以是电子设备的系统芯片(System on chip，SOC)，所述图像处理芯片可以是电子设备的外挂芯片。所述电子设备包括该图像数据处理电路，该图像数据处理电路中的主控芯片与图像处理芯片连接。

传感器输出的图像数据经过处理后获得第一图像数据，主控芯片基于所述第一图像数据和元数据可以获得第二YUV格式的第二图像数据。所述元数据可以包括描述数据属性的信息，例如：曝光信息、场景检测信息等，所述元数据还可以用于指示存储位置、历史数据、资源查找、文件记录等。

其中，所述第一图像数据和所述元数据中的至少一项为非第二YUV格式的数据。所述主控芯片可以对其中非第二YUV格式的数据进行处理，最终获得第二YUV格式的第二图像数据。

所述主控芯片将所述第二YUV格式的第二图像数据发送给图像处理芯片，所述图像处理芯片可以对第二YUV格式的第二图像数据进行处理。

本申请的实施例，主控芯片基于第一图像数据和元数据获得第二YUV格式的第二图像数据；将所述第二图像数据传输给图像处理芯片，则图像处理芯片可以接收并处理第二YUV格式的第二图像数据。本申请实施例中，主控芯片支持输出第二YUV格式的图像数据，且图像处理芯片也支持处理第二YUV格式的图像数据，使得在数据处理和传输过程中保持较小的数据量，避免MIPI带宽的增大以及功耗增大，实现以较小的MIPI速率传输较大的分辨率。此外，由于传输数据量显著减小，能够降低设备功耗。

可选的，所述第一图像数据或所述元数据为第一YUV格式的数据；或者，

所述第一图像数据和所述元数据均为所述第一YUV格式的数据。

该实施例中，所述第一图像数据和所述元数据的数据格式与所述第二图像数据的数据格式可能相同也可能不同。例如：所述第一图像数据和所述元数据其中之一是第一YUV格式的数据，所述主控芯片可以对该第一YUV格式的数据进行处理获得第二YUV格式的数据；或者，所述第一图像数据和所述元数据均为第一YUV格式的数据，所述主控芯片可以对第一YUV格式的第一图像数据和第一YUV格式的元数据进行处理，获得第二YUV格式的第二图像数据。

所述第一YUV格式与所述第二YUV格式是不同的YUV格式。所述YUV格式可以是指任意的YUV格式，例如：YUV420格式、YUV422格式或者YUV的其他格式。

可选的，所述主控芯片包括显示处理单元(Display Processing Unit，DPU)和图像信号处理模块ISP；

所述DPU用于接收所述ISP输出的所述第一图像数据，并读取存储模块存储的所述元数据。

该实施例中，所述主控芯片包括DPU和ISP，ISP与DPU连接。可选的，所述ISP与所述传感器连接。所述传感器输出的图像数据经过ISP处理之后输出所述第一图像数据。所述ISP处理之后输出的第一图像数据可以是第一YUV格式也可以是其他格式。所述传感器和所述ISP产生所述元数据，并可以将所述元数据存储在存储模块。所述元数据可以用于描述数据属性的信息。

ISP输出的所述第一图像数据可以经过显示接口传输至所述DPU。所述DPU可以通过显示接口读取存储在存储模块的元数据。

作为一个可选实施例，所述DPU还用于：

对所述第一图像数据进行格式转换，得到所述第二YUV格式的所述第一图像数据，或，用于对所述元数据进行格式转换，得到所述第二YUV格式的所述元数据；以及，

将所述第二YUV格式的所述第一图像数据和所述第二YUV格式的所述元数据合并处理，得到所述第二YUV格式的所述第二图像数据。

该实施例中，DPU接收到所述第一图像数据或者所述元数据后，可以确定所述第一图像数据或者所述元数据的数据格式，若所述DPU接收的第一图像数据或者所述元数据不是第二YUV格式，则可以将其转换为第二YUV格式，使得所述第一图像数据和所述元数据均为所述第二YUV格式。

所述DPU获得第二YUV格式的所述第一图像数据和第二YUV格式的所述元数据后，将所述第一图像数据和所述元数据进行合并，获得大尺寸的第二图像数据。该合并后的第二图像数据也为第二YUV格式，即SOC的DPU支持输出第二YUV格式的图像数据。DPU将输出的第二图像数据发送给图像处理芯片，所述图像处理芯片支持第二YUV格式的图像传输和处理。

作为一个可选实施例，所述DPU还用于：将所述第一YUV格式的所述第一图像数据和所述第一YUV格式的所述元数据合并处理，得到所述第一YUV格式的所述第二图像数据；以及，将所述第二图像数据进行格式转换，得到所述第二YUV格式的所述第二图像数据。

该实施例中，所述DPU接收到的第一图像数据和元数据可以都为第一YUV格式，由于两部分数据的格式相同，所述DPU可以首先将第一图像数据和元数据合并，获得第一YUV格式的第二图像数据；再对所述第一YUV格式的第二图像数据进行转换，获得第二YUV格式的第二图像数据。在该情况下，SOC的DPU既支持对第一YUV格式图像处理，又支持输出第二YUV格式的图像数据。DPU将输出的第二图像数据发送给图像处理芯片，所述图像处理芯片支持第二YUV格式的图像传输和处理。

该实施例中，SOC的DPU支持输出第二YUV格式的图像数据，且图像处理芯片支持处理第二YUV格式的图像数据，使得在数据处理和传输过程中保持较小的数据量，避免MIPI带宽的增大以及功耗增大，实现以较小的MIPI速率传输较大的分辨率。此外，由于传输数据量显著减小，能够优化功耗问题。例如在4K录像场景，对带宽的优化较为明显，可以实现优化50％以上的带宽，且功耗显著减小。

作为一个可选实施例，所述主控芯片还包括：移动产业处理器接口显示器串行接口MIPIDSI；

所述主控芯片的DPU还用于：将所述第二YUV格式的所述第二图像数据通过所述MIPIDSI传输至所述图像处理芯片。

该实施例中，DPU对第一图像数据和元数据合并处理后获得的第二图像数据的格式是第二YUV格式，则DPU向图像处理芯片输出第二YUV格式的图像数据，无需对元数据进行编码补0操作，实现以较小的MIPI速率就可以传输较大的分辨率。

MIPI是MIPI联盟(Alliance)制订的接口标准。DPU在向图像处理芯片传输所述第二图像数据时，通过MIPIDSI接口向所述图像处理芯片传输所述第二图像数据，所述图像处理芯片接收并处理第二YUV格式的第二图像数据。

可选的，所述YUV格式包括：交错(interleaved)的YUV格式。

该实施例中，所述YUV格式可以是交错的YUV格式，例如：YUV420 8bitinterleaved格式、YUV422 8bit interleaved格式，也可以是其他YUV格式。

下面举例说明所述图像数据处理的实现过程。

作为一个可选实施例，以4K录像场景为例，所述主控芯片是电子设备的SOC，所述图像处理芯片是电子设备新增的图像处理芯片。所述SOC与图像处理芯片之间的结构如图1所示。所述方法包括：

步骤11、传感器输出来的图像，经过ISP处理之后，输出3840*2160的NV12格式图像，经过显示接口，将该图像数据输入DPU。

步骤12、元数据(metadata)部分直接按照YUV420 8bit interleaved格式存储，此处不再需要按字节进行编码补0操作，可以减少功耗损失。元数据经过显示接口传给DPU。

步骤13、DPU收到显示接口传输过来的图像数据后，将图像数据从NV12格式转换成YUV420 8bit interleaved格式。

步骤14、DPU收到显示接口传输过来的元数据之后，将元数据与步骤13转换好的图像数据按照接口传输过来的参数，合并成一张大图像。

在数据合并中，例如：将元数据的3840*100放在大图像最前面，转换后的图像数据放在大图像后面，这样大图像的尺寸是转换后的图像数据和元数据之和：3840*2260，具体如图2所示。

步骤15、DPU合成图像之后，输出3840*2260的大图像为YUV420 8bit interleaved格式，DSI按照MIPI协议传输该YUV420 8bit interleaved的图像给外挂IC。MIPI协议规定的YUV420 8bit interleaved其中一种格式如图3所示。

步骤16、外挂IC接收并处理YUV420 8bit interleaved格式的图像和元数据。

该实施例能够最大限度的降低MIPI传输的带宽和功耗，降低了IC应用的硬件门槛，给折叠屏项目以及大分辨率的场景带来更好的体验。

作为另一个可选实施例，由于YUV420 8bit interleaved格式目前仅是MIPI定义的，SOC上由于没有YUV420 8bit interleaved格式的使用场景，所以SOC不一定支持此格式，所以该实施方式采用了一个更加通用的方式，采用NV12存储元数据再传输给DPU。所述SOC与外挂芯片之间的结构如图4所示，所述方法包括：

步骤41、传感器输出来的图像，经过ISP处理之后，输出3840*2160的NV12格式图像，经过显示接口，将该图像数据输入DPU。

步骤42、元数据部分存储为3840*100的NV12格式。

步骤43、DPU收到显示接口传输过来的图像数据和元数据后，将NV12格式的图像数据和NV12格式的元数据合并获得3840*2260的NV12格式图像，将合并后图像转换为3840*2260的YUV420 8bit interleaved格式。

步骤44、DPU将3840*2260的YUV420 8bit interleaved格式的图像通过MIPIDSI接口传输给图像处理芯片。

步骤45、图像处理芯片接收并处理YUV420 8bit interleaved格式的图像。

该实施例采用更为通用的数据存储和传输方式，跨平台性更容易实现。

该实施例中，在步骤42中将元数据记录为NV12格式时，如图5所示，假如原始的元数据以及转换成YUV420 8bit interleaved还原后的原数据的第一行的比特(Byte)中，Byte0至Byte11对应的数据分别是0，1，2……11，第二行的Byte0-Byte11中，每个Byte的数据分别是100-111。

如果需要把这样的元数据记录到NV12缓存器(buffer)中，需要获取到NV12格式的Y，U，V三个分量的指针。对于奇数行比如第一行：先在U的当前指针位置写一个Byte，再在Y指针位置写入两个Byte，写完之后U和Y的指针位置进行更新。偶数行比如第二行：先在V指针位置写入一个Byte，再在Y指针位置写入两个Byte，写完之后V和Y的指针位置进行更新。

写完之后的元数据NV12格式中Y平面(plane)第一行的前几个字节为1、2、4、5、7、8、10、11，第二行101、102、104、105、107、108、110、111，UV plane的第一行前几个字节为0、100、3、103、6、106、9、109……。

将NV12格式的元数据和图像数据都通过显示接口传输给DPU；DPU将元数据和图像数据先合并成一张NV12格式的大图像，然后将该合并后的图像转换为YUV420 8bitinterleaved格式，这样元数据重新转换回了原始的元数据定义的顺序位置。DPU通过MIPIDSI接口将合并以及转换后的图像传输给图像处理芯片。

本申请的实施例，主控芯片基于第一图像数据和元数据获得第二YUV格式的第二图像数据。将所述第二图像数据传输给图像处理芯片，则图像处理芯片可以接收并处理第二YUV格式的第二图像数据。本申请实施例中，主控芯片支持输出第二YUV格式的图像数据，且外挂IC作为图像处理芯片也支持处理第二YUV格式的图像数据，使得在数据处理和传输过程中保持较小的数据量，避免MIPI带宽的增大以及功耗增大，实现以较小的MIPI速率传输较大的分辨率。此外，由于传输数据量显著减小，能够降低设备功耗。

如图6所示，本申请实施例提供一种图像数据处理方法，应用于主控芯片，所述方法包括：

步骤601、基于第一图像数据和元数据获得第二YUV格式的第二图像数据；

步骤602、将所述第二图像数据传输至图像处理芯片；

其中，所述第一图像数据和所述元数据中的至少一项为非第二YUV格式的数据。。

该实施例中，所述主控芯片可以是电子设备的系统芯片SOC，所述图像处理芯片可以是电子设备的外挂芯片，所述主控芯片与图像处理芯片连接。

传感器输出的图像数据经过处理后获得第一图像数据，主控芯片基于所述第一图像数据和元数据可以获得第二YUV格式的第二图像数据。所述元数据可以包括描述数据属性的信息，例如：曝光信息、场景检测信息等，所述元数据还可以用于指示存储位置、历史数据、资源查找、文件记录等。

其中，所述第一图像数据和所述元数据中的至少一项为非第二YUV格式的数据。所述主控芯片可以对其中非第二YUV格式的数据进行处理，最终获得第二YUV格式的第二图像数据。

所述主控芯片将所述第二YUV格式的第二图像数据发送给图像处理芯片，所述图像处理芯片可以对第二YUV格式的第二图像数据进行处理。

本申请的实施例，主控芯片支持输出第二YUV格式的图像数据，且图像处理芯片也支持处理第二YUV格式的图像数据，使得在数据处理和传输过程中保持较小的数据量，避免MIPI带宽的增大以及功耗增大，实现以较小的MIPI速率传输较大的分辨率。此外，由于传输数据量显著减小，能够降低设备功耗。

可选的，所述第一图像数据或所述元数据为第一YUV格式的数据；或者，

所述第一图像数据和所述元数据均为所述第一YUV格式的数据。

该实施例中，所述第一图像数据和所述元数据的数据格式与所述第二图像数据的数据格式可能相同也可能不同。例如：所述第一图像数据和所述元数据其中之一是第一YUV格式的数据，所述主控芯片可以对该第一YUV格式的数据进行处理获得第二YUV格式的数据；或者，所述第一图像数据和所述元数据均为第一YUV格式的数据，所述主控芯片可以对第一YUV格式的第一图像数据和第一YUV格式的元数据进行处理，获得第二YUV格式的第二图像数据。

所述第一YUV格式与所述第二YUV格式是不同的YUV格式。所述YUV格式可以是指任意的YUV格式，例如：YUV420格式、YUV422格式或者YUV的其他格式。

可选的，所述主控芯片包括显示处理单元DPU和图像信号处理模块ISP；所述方法还包括：

所述主控芯片的DPU接收所述ISP输出的所述第一图像数据，并读取存储模块存储的所述元数据。

该实施例中，传感器输出的图像数据经过ISP处理之后输出所述第一图像数据。所述ISP处理之后输出的第一图像数据可以是第一YUV格式也可以是其他格式。所述传感器和所述ISP产生所述元数据，并可以将所述元数据存储在存储模块。

作为一个可选实施例，所述方法还包括：

所述主控芯片的DPU对所述第一图像数据进行格式转换，得到所述第二YUV格式的所述第一图像数据，或，对所述元数据进行格式转换，得到所述第二YUV格式的所述元数据；以及，

将所述第二YUV格式的所述第一图像数据和所述第二YUV格式的所述元数据合并处理，得到所述第二YUV格式的所述第二图像数据。

该实施例中，所述主控芯片的DPU接收到所述第一图像数据或者所述元数据后，可以确定所述第一图像数据或者所述元数据的数据格式，若所述DPU接收的第一图像数据或者所述元数据不是第二YUV格式，则可以将其转换为第二YUV格式，使得所述第一图像数据和所述元数据均为所述第二YUV格式。所述DPU将所述第一图像数据和所述元数据进行合并，获得大尺寸的第二图像数据。该合并后的第二图像数据也为第二YUV格式，所述DPU将输出的第二图像数据发送给图像处理芯片，所述图像处理芯片支持第二YUV格式的图像传输和处理。

作为一个可选实施例，所述方法还包括：将所述第一YUV格式的所述第一图像数据和所述第一YUV格式的所述元数据合并处理，得到所述第一YUV格式的所述第二图像数据；以及，

将所述第二图像数据进行格式转换，得到所述第二YUV格式的所述第二图像数据。

该实施例中，所述主控芯片的DPU接收到的第一图像数据和元数据可以都为第一YUV格式，由于两部分数据的格式相同，所述DPU可以首先将第一图像数据和元数据合并，获得第一YUV格式的第二图像数据；再对所述第一YUV格式的第二图像数据进行转换，获得第二YUV格式的第二图像数据。在该情况下，SOC的DPU既支持对第一YUV格式图像处理，又支持输出第二YUV格式的图像数据。DPU将输出的第二图像数据发送给图像处理芯片，所述图像处理芯片支持第二YUV格式的图像传输和处理。

可选的，所述主控芯片还包括：MIPIDSI接口；所述方法还包括：

所述主控芯片的DPU将所述第二YUV格式的所述第二图像数据通过所述MIPIDSI传输至所述图像处理芯片。

该实施例中，DPU对第一图像数据和元数据合并处理后获得的第二图像数据的格式是第二YUV格式，则DPU向图像处理芯片输出第二YUV格式的图像数据，无需对元数据进行编码补0操作，实现以较小的MIPI速率就可以传输较大的分辨率。

DPU在向图像处理芯片传输所述第二图像数据时，通过MIPIDSI接口向所述图像处理芯片传输所述第二图像数据，所述图像处理芯片接收并处理第二YUV格式的第二图像数据。

可选的，所述第二YUV格式包括：交错的YUV格式。

该实施例中，所述YUV格式可以是交错的YUV格式，例如：YUV420 8bitinterleaved格式、YUV422 8bit interleaved格式，也可以是其他YUV格式。

本申请的实施例，主控芯片支持输出第二YUV格式的图像数据，且图像处理芯片也支持处理第二YUV格式的图像数据，使得在数据处理和传输过程中保持较小的数据量，避免MIPI带宽的增大以及功耗增大，实现以较小的MIPI速率传输较大的分辨率。此外，由于传输数据量显著减小，能够降低设备功耗。

需要说明的是，该图像数据处理方法可以实现上述图像数据处理电路中的主控芯片实现的所有步骤，且能达到相同的技术效果，在此不做赘述，

如图7所示，本申请实施例还提供一种图像数据处理装置700，包括：

获取模块710，用于基于第一图像数据和元数据获得第二YUV格式的第二图像数据；

传输模块720，用于将所述第二图像数据传输至图像处理芯片；

其中，所述第一图像数据和所述元数据中的至少一项为非第二YUV格式的数据。

可选的，所述第一图像数据或所述元数据为第一YUV格式的数据；或者，

所述第一图像数据和所述元数据均为所述第一YUV格式的数据。

可选的，所述装置还包括：

第一接收模块，用于接收所述ISP输出的所述第一图像数据，并读取存储模块存储的所述元数据。

可选的，所述装置还包括：

第一转换模块，用于对所述第一图像数据进行格式转换，得到所述第二YUV格式的所述第一图像数据，或，对所述元数据进行格式转换，得到所述第二YUV格式的所述元数据；

第一合并模块，用于将所述第二YUV格式的所述第一图像数据和所述第二YUV格式的所述元数据合并处理，得到所述第二YUV格式的所述第二图像数据。

可选的，所述装置还包括：

第二合并模块，用于将所述第一YUV格式的所述第一图像数据和所述第一YUV格式的所述元数据合并处理，得到所述第一YUV格式的所述第二图像数据；以及，

第二转换模块，用于：将所述第二图像数据进行格式转换，得到所述第二YUV格式的所述第二图像数据。

可选的，所述装置还包括：

第一发送模块，用于将所述第二YUV格式的所述第二图像数据通过所述MIPIDSI传输至所述图像处理芯片。

可选的，所述第二YUV格式包括：交错的YUV格式。

本申请实施例中的图像数据处理装置可以是电子设备，也可以是电子设备中的部件，例如集成电路或芯片。该电子设备可以是终端，也可以为除终端之外的其他设备。示例性的，电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、移动上网装置(Mobile Internet Device，MID)、增强现实(augmented reality，AR)/虚拟现实(virtual reality，VR)设备、机器人、可穿戴设备、超级移动个人计算机(ultra-mobilepersonal computer，UMPC)、上网本或者个人数字助理(personal digital assistant，PDA)等，还可以为服务器、网络附属存储器(Network Attached Storage，NAS)、个人计算机(personal computer，PC)、电视机(television，TV)、柜员机或者自助机等，本申请实施例不作具体限定。

本申请实施例中的图像数据处理装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统，可以为ios操作系统，还可以为其他可能的操作系统，本申请实施例不作具体限定。

本申请实施例提供的图像数据处理装置能够实现图6的方法实施例实现的各个过程，为避免重复，这里不再赘述。

可选的，如图8所示，本申请实施例还提供一种电子设备800，包括处理器801，存储器802，存储在存储器802上并可在所述处理器801上运行的程序或指令，该程序或指令被处理器801执行时实现上述图像数据处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

需要注意的是，本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。

图9为实现本申请实施例的一种电子设备的硬件结构示意图。

该电子设备900包括但不限于：射频单元901、网络模块902、音频输出单元903、输入单元904、传感器905、显示单元906、用户输入单元907、接口单元908、存储器909、以及处理器910等部件。

本领域技术人员可以理解，电子设备900还可以包括给各个部件供电的电源(比如电池)，电源可以通过电源管理系统与处理器910逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图9中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置，在此不再赘述。

其中，处理器910，用于基于第一图像数据和元数据获得第二YUV格式的第二图像数据；

接口单元908用于：将所述第二图像数据传输至图像处理芯片；

其中，所述第一图像数据和所述元数据中的至少一项为非第二YUV格式的数据。

可选的，所述第一图像数据或所述元数据为第一YUV格式的数据；或者，

所述第一图像数据和所述元数据均为所述第一YUV格式的数据。

可选的，所述接口单元908还用于：接收所述ISP输出的所述第一图像数据，并读取存储模块存储的所述元数据。

可选的，所述处理器910还用于：

对所述第一图像数据进行格式转换，得到所述第二YUV格式的所述第一图像数据，或，对所述元数据进行格式转换，得到所述第二YUV格式的所述元数据；以及，

将所述第二YUV格式的所述第一图像数据和所述第二YUV格式的所述元数据合并处理，得到所述第二YUV格式的所述第二图像数据。

可选的，所述处理器910还用于：

将所述第一YUV格式的所述第一图像数据和所述第一YUV格式的所述元数据合并处理，得到所述第一YUV格式的所述第二图像数据；以及，

将所述第二图像数据进行格式转换，得到所述第二YUV格式的所述第二图像数据。

可选的，所述处理器910还用于：将所述第二YUV格式的所述第二图像数据通过MIPIDSI传输至所述图像处理芯片。

可选的，所述第二YUV格式包括：交错的YUV格式。

应理解的是，本申请实施例中，输入单元904可以包括图形处理器(GraphicsProcessing Unit，GPU)9041和麦克风9042，图形处理器9041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元906可包括显示面板9061，可以采用液晶显示器、有机发光二极管等形式来配置显示面板9061。用户输入单元907包括触控面板9071以及其他输入设备9072中的至少一种。触控面板9071，也称为触摸屏。触控面板9071可包括触摸检测装置和触摸控制器两个部分。其他输入设备9072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。

存储器909可用于存储软件程序以及各种数据。存储器909可主要包括存储程序或指令的第一存储区和存储数据的第二存储区，其中，第一存储区可存储操作系统、至少一个功能所需的应用程序或指令(比如声音播放功能、图像播放功能等)等。此外，存储器909可以包括易失性存储器或非易失性存储器，或者，存储器909可以包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(Read-Only Memory，ROM)、可编程只读存储器(Programmable ROM，PROM)、可擦除可编程只读存储器(Erasable PROM，EPROM)、电可擦除可编程只读存储器(Electrically EPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory，RAM)，静态随机存取存储器(Static RAM，SRAM)、动态随机存取存储器(Dynamic RAM，DRAM)、同步动态随机存取存储器(Synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data Rate SDRAM，DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(Synch link DRAM，SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM，DRRAM)。本申请实施例中的存储器909包括但不限于这些和任意其它适合类型的存储器。

处理器910可包括一个或多个处理单元；可选的，处理器910集成应用处理器和调制解调处理器，其中，应用处理器主要处理涉及操作系统、用户界面和应用程序等的操作，调制解调处理器主要处理无线通信信号，如基带处理器。可以理解的是，上述调制解调处理器也可以不集成到处理器910中。

本申请实施例还提供一种可读存储介质，所述可读存储介质上存储有程序或指令，该程序或指令被处理器执行时实现上述图像数据处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

其中，所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质，包括计算机可读存储介质，如计算机只读存储器ROM、随机存取存储器RAM、磁碟或者光盘等

本申请实施例另提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现上述图像数据处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

应理解，本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。

本申请实施例提供一种计算机程序产品，该程序产品被存储在存储介质中，该程序产品被至少一个处理器执行以实现如上述图像数据处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外，需要指出的是，本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能，还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能，例如，可以按不同于所描述的次序来执行所描述的方法，并且还可以添加、省去、或组合各种步骤。另外，参照某些示例所描述的特征可在其他示例中被组合。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，或者网络设备等)执行本申请各个实施例所述的方法。

Claims (10)

1.一种图像数据处理电路，其特征在于，包括主控芯片和图像处理芯片，所述主控芯片与所述图像处理芯片连接；

所述主控芯片用于基于第一图像数据和元数据获得第二YUV格式的第二图像数据；

所述主控芯片还用于将所述第二图像数据传输至所述图像处理芯片；

所述图像处理芯片用于对所述第二图像数据进行处理；

其中，所述第一图像数据和所述元数据中的至少一项为非第二YUV格式的数据。

2.根据权利要求1所述的图像数据处理电路，其特征在于，所述第一图像数据或所述元数据为第一YUV格式的数据；或者，

所述第一图像数据和所述元数据均为所述第一YUV格式的数据。

3.根据权利要求2所述的图像数据处理电路，其特征在于，所述主控芯片包括显示处理单元DPU和图像信号处理模块ISP；

所述DPU用于接收所述ISP输出的所述第一图像数据，并读取存储模块存储的所述元数据。

4.根据权利要求3所述的图像数据处理电路，其特征在于，所述DPU还用于：

对所述第一图像数据进行格式转换，得到所述第二YUV格式的所述第一图像数据，或，用于对所述元数据进行格式转换，得到所述第二YUV格式的所述元数据；以及，

将所述第二YUV格式的所述第一图像数据和所述第二YUV格式的所述元数据合并处理，得到所述第二YUV格式的所述第二图像数据。

5.根据权利要求3所述的图像数据处理电路，其特征在于，所述DPU还用于：将所述第一YUV格式的所述第一图像数据和所述第一YUV格式的所述元数据合并处理，得到所述第一YUV格式的所述第二图像数据；以及，

将所述第二图像数据进行格式转换，得到所述第二YUV格式的所述第二图像数据。

6.根据权利要求1-5中任一项所述的图像数据处理电路，其特征在于，所述主控芯片还包括：移动产业处理器接口显示器串行接口MIPIDSI；

所述主控芯片的DPU还用于：将所述第二YUV格式的所述第二图像数据通过所述MIPIDSI传输至所述图像处理芯片。

7.根据权利要求1-5中任一项所述的图像数据处理电路，其特征在于，所述第二YUV格式包括：交错的YUV格式。

8.一种图像数据处理方法，其特征在于，应用于主控芯片，所述方法包括：

基于第一图像数据和元数据获得第二YUV格式的第二图像数据；

将所述第二图像数据传输至图像处理芯片；

其中，所述第一图像数据和所述元数据中的至少一项为非第二YUV格式的数据。

9.一种电子设备，其特征在于，包括处理器和存储器，所述存储器存储可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如权利要求8所述的图像数据处理方法的步骤。

10.一种可读存储介质，其特征在于，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如权利要求8所述的图像数据处理方法的步骤。