CN111713097A - 图像数据处理方法、传输方法、传输装置及数据接口转换装置 - Google Patents

图像数据处理方法、传输方法、传输装置及数据接口转换装置 Download PDF

Info

Publication number
CN111713097A
CN111713097A CN201980012305.5A CN201980012305A CN111713097A CN 111713097 A CN111713097 A CN 111713097A CN 201980012305 A CN201980012305 A CN 201980012305A CN 111713097 A CN111713097 A CN 111713097A
Authority
CN
China
Prior art keywords
data packet
data
input signal
type
packet
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201980012305.5A
Other languages
English (en)
Inventor
吴泽亮
黄帅凯
谢骞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SZ DJI Technology Co Ltd
Original Assignee
SZ DJI Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SZ DJI Technology Co Ltd filed Critical SZ DJI Technology Co Ltd
Publication of CN111713097A publication Critical patent/CN111713097A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Television Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

一种图像数据处理方法、传输方法、传输装置及效据接口转换装置，首先获取图像数据包(S101)，判断是否获取到数据包处理信号(S102)，若获取到数据包处理信号，根据数据包处理信号改变图像数据包的原始数据格式到目标数据格式(S103)，从而实现根据需要而改变图像数据包的格式，再根据调整后的格式选择处理、解析和传输方式。

Description

图像数据处理方法、传输方法、传输装置及数据接口转换装置
技术领域
本申请涉及数据处理、传输和转换技术领域，尤其涉及一种图像数据处理方法、一种数据接口转换装置、以及一种图像数据传输方法和图像数据传输装置。
背景技术
随着半导体技术的发展，图像传感器技术发展速度日新月异，使得图像传感器所含像素数量的提升达到5M、8M乃至更大尺寸以提高图像质量。
与此同时，各种图像数据处理和传输技术也得到了快速的发展，比如，摄像机串行接口(Camera Serial Interface,CSI)是由移动行业处理器接口(Mobile IndustryProcessor Interface,MIPI)联盟下Camera工作组指定的接口标准，面向图像传感器应用领域。MIPI协议CSI-2图像传感器(下文中统一简称为MIPI图像传感器)传出来的数据，可通过图像信号处理器(Image Signal Processing，ISP)进行处理，可以实现自动对焦、高动态范围、保存原始数据等功能。
举例而言，比较典型的应用场景，图像数据从MIPI图像传感器传出来后，会依次经过DPHY(MIPI协议中的一项，表示源同步、高速、低功耗、适用于移动应用领域的物理层),CSI控制器，接口转换电路后再进入ISP中。
其中，所述的接口转换电路可以用于解决CSI控制器的输出接口与ISP的输入接口不匹配的问题，需要有电路承担接口转换的角色。
但是，在实际传输数据过程中，由于MIPI协议CSI-2接口图像传感器对接时，高速接口电路无法针对不同的应用场景将基于CSI-2协议的数据包以不同的方式解析、传输给后级，对数据的处理及解析方式不够灵活，进而影响了后级的数据处理和分析，而给用户及系统总体性能带来非常大的不便。
综上所述，不难理解，现有的图像数据处理和传输过程中，由于图像数据包的格式决定了其传输、解析和处理方式，而造成在后级对图像数据进行处理和解析时的不便，影响了工作性能且不利于数据的传输和纠错等过程。
发明内容
基于此，本申请提供了一种图像数据处理方法、传输方法、传输装置及数据接口转换装置，旨在解决现有的图像数据处理和传输过程中，由于图像数据包的格式决定了其传输、解析和处理方式，而造成在后级对图像数据进行处理和解析时的不便，影响了工作性能且不利于数据的传输和纠错等技术问题。
第一方面，本申请提供了一种图像数据处理方法，包括：
获取图像数据包；
判断是否获取到数据包处理信号；
若获取到数据包处理信号，根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式，以将所述图像数据包按所述目标数据格式所属的传输通道进行传输。
第二方面，本申请提供了一种数据接口转换装置，所述数据接口转换装置包括存储器和处理器；
所述存储器用于存储计算机程序；
所述处理器，用于执行所述计算机程序并在执行所述计算机程序时，实现如下步骤：
获取图像数据包；
判断是否获取到数据包处理信号；
若获取到数据包处理信号，根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式，以将所述图像数据包按所述目标数据格式所属的传输通道进行传输。
第三方面，本申请提供了一种图像数据传输方法，包括：
CSI控制器发送图像数据包；
数据接口转换装置从所述CSI控制器获取图像数据包；
数据接口转换装置判断是否获取到数据包处理信号；
若获取到数据包处理信号，数据接口转换装置根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式；
数据接口转换装置将所述图像数据包按所述目标数据格式所属的传输通道传输给图像数据处理装置。
第四方面，本申请还提供了一种图像数据传输装置，包括CSI控制器、数据接口转换装置和图像数据处理装置；
所述CSI控制器发送图像数据包；
所述数据接口转换装置包括存储器和处理器；
所述存储器用于存储计算机程序；
所述处理器，用于执行所述计算机程序并在执行所述计算机程序时，实现如下步骤：
从所述CSI控制器获取图像数据包；
判断是否获取到数据包处理信号；
若获取到数据包处理信号，根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式；
将所述图像数据包按所述目标数据格式所属的传输通道传输给所述图像数据处理装置。
本申请实施例提供了一种，图像数据处理方法、传输方法、传输装置及数据接口转换装置，首先获取图像数据包，判断是否获取到数据包处理信号，若获取到数据包处理信号，根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式，以将所述图像数据包按所述目标数据格式所属的传输通道进行传输，通过上述方式，本申请能够根据需要而改变图像数据包的格式，再根据调整后的格式选择处理、解析和传输方式，而不再受限于图像数据包的原格式，方便后级的解析和处理工作，提高工作效率、降低系统能耗，也方便对数据进行可调整的传输和纠错等。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本申请。
附图说明
为了更清楚地说明本申请实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请一实施例提供的一种图像数据处理方法的流程示意图；
图2是本申请一实施例提供的多路选择器的工作流程示意图；
图3是本申请一实施例提供的CSI-2协议的长包结构示意图；
图4是本申请一实施例提供的图像数据传输的系统框图；
图5是本申请一实施例提供的ISP输入接口的关键信号示意图；
图6是本申请一实施例提供的传输有效像素数据包时，ISP输入接口上data呈现的形式示意图；
图7是本申请一实施例提供的传输边带数据包时，ISP输入接口上data呈现的形式示意图；
图8是图2中确认选择目标输出信号的一具体实施例方法流程示意图；
图9是图2中确认选择目标输出信号的另一具体实施例方法流程示意图；
图10是图2中确认选择目标输出信号的又一具体实施例方法流程示意图；
图11是本申请一实施例提供的一种数据接口转换装置的功能模块框图；
图12是本申请一实施例提供的一种图像数据传输方法的流程示意图；
图13是本申请一实施例提供的多路选择器的工作流程示意图；
图14是图13中数据接口转换装置确认选择目标输出信号的一具体实施例方法流程示意图；
图15是图13中数据接口转换装置确认选择目标输出信号的另一具体实施例方法流程示意图；
图16是图13中数据接口转换装置确认选择目标输出信号的又一具体实施例方法流程示意图；
图17是本申请一实施例提供的一种图像数据传输装置的功能模块框图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
附图中所示的流程图仅是示例说明，不是必须包括所有的内容和操作/步骤，也不是必须按所描述的顺序执行。例如，有的操作/步骤还可以分解、组合或部分合并，因此实际执行的顺序有可能根据实际情况改变。
下面结合附图，对本申请的一些实施方式作详细说明。在不冲突的情况下，下述的实施例及实施例中的特征可以相互组合。
请参阅图1，图1是本申请一实施例提供的一种图像数据处理方法的流程示意图，所述图像数据处理方法可以应用在终端设备中，用于图像处理和传输等过程。其中终端设备包括手机、平板、笔记本电脑和无人机等。进一步而言，无人机可以为旋翼型无人机，例如四旋翼无人机、六旋翼无人机、八旋翼无人机，也可以是固定翼无人机，且该无人机上带有摄像设备。
如图1所示，本实施例图像数据处理方法可以包括但不限于步骤S101至步骤S103和S103’。
S101，获取图像数据包。
需要说明的是，本实施例的图像数据包对应的图片，可以为通过终端设备拍摄的原始图片，或用户在终端设备的图形库选择的一张或多张图片。
S102，判断是否获取到数据包处理信号。
其中，本申请可以根据实际情况而判断是否需要产生数据包处理信号，该数据包处理信号可以为硬件电路信号、也可以为软件控制信号。
S103，若获取到数据包处理信号，根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式，以将所述图像数据包按所述目标数据格式所属的传输通道进行传输。
对应地，S103’，若未获取到数据包处理信号，则可以不改变当前获取到的图像数据包的格式，并继续等待是否获取到数据包处理信号。
值得详细说明的是，本申请的其中一实施例中，所述步骤S103中根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式，可以包括至少两种情况：
情况一，根据所述数据包处理信号将所述图像数据包从有效像素数据包的原数据格式改变到边带数据包的目标数据格式；
和/或情况二，根据所述数据包处理信号将所述图像数据包从边带数据包的原数据格式改变到有效像素数据包的目标数据格式。
需要举例说明的是，本申请图像数据包可以采用CSI-2协议传输，其图像数据包可以分长包(long packet)和短包(short packet)两种，本申请主要针对长包(long packet)解析和处理。比如，本申请所述CSI-2协议可以用1个长包来传输1行的数据，这1行的数据可以是图像1行的有效像素数据，也可以是1行边带数据(非像素数据)，边带数据可以是VOPB(Vertical Optical Black)数据和EMBED数据等。
值得一提的是，为了使本申请更容易被理解，本实施例仍以CSI-2协议传输图像数据包为例进行详细说明。
在本申请中，CSI-2协议典型的长包结构如图3所示，由包头(PACKET HEADER)、包尾(PACKET FOOTER)和数据(PACKET DATA)这3部分构成。
其中，PACKET HEADER内存储重要的信息Data Type，Data Type表征该行数据的数据类型。即，传输不同颜色格式的有效像素数据、以及传输不同类型的边带数据(sideband)时，Data Type的值是不同的，以此来区分不同行的内容。
其中，本申请PACKET DATA是由一个个字节(即B1,B2…Bn-1,Bn)依次排列组成。在传输不同Data Type的长包时，PACKET DATA内的组包方式有所区别，例如传输RAW8格式的有效像素数据和传输RAW10格式的有效像素数据时，每个像素数据与B1,B2…Bn-1,Bn的映射关系是有区别的。
为便于理解，本实施例以传输RAW8格式为例进行阐述，但所描述的解析方式对RGB(每个像素的红/绿/蓝强度,以记录图像)、YUV(亮度-色度模型)以及其他RAW格式等其他颜色同样适用。其中，当传输RAW8格式时，长包PACKET DATA内每个字节依次代表一个像素(pixel)数据，即B1代表第1个像素P1，B2代表第1个像素P2…Bn代表第n个像素Pn。
此外，对应地，本申请ISP应对不同Data Type的长包时的处理方式、ISP输入接口的格式、以及图像传感器输出的VOPB这种Data Type数据的数据特征这3部分内容工作原理说明如下。
第一部分，本申请ISP应对不同Data Type的长包时处理方式，ISP可以将长包分为以下2大类：有效像素数据包和边带数据包，而边带数据包包括VOPB数据包、EMBED数据包等。对这2大类的长包，ISP内部可以采用不同的处理方式，并采用不同的数据处理通路。
第二部分，对这2大类的长包，在ISP输入接口的格式也可以不同。比如，识别、解析MIPI图像传感器传输过来的长包属于哪一类长包、并且以对应的格式输出给ISP输入接口，可以采用图4所示中的接口转换电路实现。具体而言，本申请在ISP输入接口上，如图5所示，可以有4个关键的信号:dvld,type,data,dvpc。
具体而言，如图5所示，dvld信号的作用包括：在dvld为高电平的周期，表示此时ISP输入接口上的数据是有效的，ISP会通过type,data,dvpc这三个信号去获取数据。
type信号的作用包括：将PACKET HEADER内的Data Type这个信息传输给ISP。在传输2大类的长包时，dvld和type这2个信号所发挥的作用并无区别。
但，与dvld和type信号不同，dvpc和data在传输2大类的长包时，所发挥的作用是存在区别的。
其中，对于dvpc，当传输有效像素数据包时，dvpc表征当前data内包含的像素个数；而当传输边带数据包时，dvpc表征当前data内包含的字节个数。
对于data(以64bit为例),当传输有效像素数据包时，以传输RAW8数据为例，data呈现的形式如图6所示，RAW8(m),RAW8(m+1),RAW8(m+2),RAW8(m+3)…分别是长包内的第m个像素值，第m+1个像素值，第m+2个像素值，第m+3个像素值……。而当传输边带数据包时，data呈现的形式如图7所示，Bm[7:0],Bm+1[7:0],Bm+2[7:0]…分别是长包内的第m个字节，第m+1个字节，第m+2个字节……。其中，Bm[7:0],Bm+1[7:0],Bm+2[7:0]…在原始、未经解析的长包内的排布顺序见图3。
第三部分，MIPI图像传感器输出的VOPB数据包这种Data Type数据的数据特征时，MIPI图像传感器上可以预留一些完全没有曝光的像素，通过读取这些像素值的大小，可以实时得到optical black level的值，ISP可以利用这些值对图像数据进行校正。其中，本实施例完全没有曝光的像素值即为所述VOPB数据包。
需要说明的是，VOPB数据包属于边带数据包的一种，而VOPB数据包的Data Type与有效像素数据是不同的，但由于都是像素值，两者的PACKET DATA的组包方式又可以是相同的。
如前所述，本实施例2大类的长包在ISP输入接口的格式是不同的，ISP内部对2大类的长包也会采用不同的处理方式，并采用不同的数据处理通路。VOPB数据包虽然属于边带数据包的一种，但由于VOPB数据包PACKET DATA的组包方式与有效像素数据包又是相同的，所以如果经过图4模式的接口转换电路后，VOPB数据包能够以与有效像素数据相同的格式呈现在ISP输入接口上，会方便后续ISP处理。
同理，本申请在传输有效像素数据的长包时，当ISP发现接收到的有效像素数据包的数据有误时，为了定位错误发生的环节，但由于可能发生在数据流中的任意一个环节，所以图1模式的接口转换电路需要将长包内的原始字节数据以与边带数据包相同的格式呈现在ISP输入接口上，在ISP内部走边带数据包的处理通路，将数据写到DDR(Double DataRate)后进行分析和问题定位。
需要重点说明的是，本实施例针对需要将VOPB数据包以与有效像素数据相同的格式呈现在ISP输入接口上而方便后续ISP处理、以及需要将长包内的原始字节数据以与边带数据包相同的格式呈现在ISP输入接口上而进行数据错误的分析定位这两种特殊情况，所述步骤S103中根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式，具体可以包括：采用多路选择器获取所述图像数据包的数据类型信息、并获取所述数据包处理信号，以根据所述数据类型信息和所述数据包处理信号改变或维持所述图像数据包的原数据格式。
进一步而言，如图2所示，本实施例所述采用多路选择器获取所述图像数据包的数据类型信息、并获取所述数据包处理信号，可以包括步骤S201至步骤S203。
S201，采用多路选择器获取所述图像数据包的数据类型信息作为第一输入信号。
S202，采用多路选择器获取所述数据包处理信号中的目标类型信息作为第二输入信号，并采用多路选择器获取所述数据包处理信号中的使能选择信息作为第三输入信号。
S203，根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号。
相对应地，针对上述具体应用例CSI-2协议传输的特殊情况，如图8所示，本申请所述S203根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号，包括步骤S2031和S2032：
S2031，若所述图像数据包为VOPB数据包，所述数据类型信息对应的第一输入信号为边带数据包类型，所述目标类型信息对应的第二输入信号为有效像素数据包类型，所述使能选择信息对应的第三输入信号为高电平信号或低电平信号；
S2032，根据所述第三输入信号的高电平信号或低电平信号，将所述VOPB数据包选择为第一输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为边带数据包类型，或，将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型。
需要对应说明的是，所述将所述VOPB数据包选择为第一输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为边带数据包类型，或，将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型，之后包括两种情况如下：
情况一，将边带数据包类型的所述VOPB数据包采用边带数据处理模块进行处理，以将所述VOPB数据包按照边带数据包进行传输，其中，所述VOPB数据包中的dvpc信号表征为所述VOPB数据包中data信号所包含的字节个数；
或情况二，将有效像素数据包类型的所述VOPB数据包采用有效像素数据处理模块进行处理，以将所述VOPB数据包按照有效像素数据包进行传输。
需要对应说明的是，所述S2032中将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型，还包括：将所述第二输入信号对应的目标类型信息替换所述第一输入信号对应的数据类型信息；将替换后的数据类型信息配置到所述VOPB数据包中原来所述第一输入信号对应的帧位置，并将所述替换后的数据类型信息配置成有效像素数据包的格式。
进一步而言，所述将替换后的数据类型信息配置到所述VOPB数据包中原来所述第一输入信号对应的帧位置，并将所述替换后的数据类型信息配置成有效像素数据包的格式，之后包括：将替换更新后的VOPB数据包中的dvpc信号更新表征为所述更新后的VOPB数据包中data信号所具有的像素个数。
如上所述，需要重点说明的是，本实施例针对需要将长包内的原始字节数据以与边带数据包相同的格式呈现在ISP输入接口上而进行数据错误的分析定位的特殊情况，如图9所示，所述步骤S203根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号，对应包括步骤S2031’和S2032’。
S2031’，若所述图像数据包为有效像素数据包，所述数据类型信息对应的第一输入信号为有效像素数据包类型，所述目标类型信息对应的第二输入信号为边带数据包类型，所述使能选择信息对应的第三输入信号为高电平信号或低电平信号。
S2032’，根据所述第三输入信号的高电平信号或低电平信号，将所述有效像素数据包选择为第一输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为有效像素数据包类型，或，将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型。
相应地，本实施例所述S2032’中将所述有效像素数据包选择为第一输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为有效像素数据包类型，或，将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型，之后包括下述两种情况：
情况一，将有效像素数据包类型的所述有效像素数据包采用有效像素数据处理模块进行处理，以将所述有效像素数据包按照有效像素数据包进行传输，其中，所述有效像素数据包中的dvpc信号表征为所述有效像素数据包中data信号所包含的像素个数；
或情况二，将边带数据包类型的所述有效像素数据包采用边带数据处理模块进行处理，以将所述有效像素数据包按照边带数据包进行传输。
进一步而言，所述S2032’中将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型，还包括：将所述第二输入信号对应的目标类型信息配置到所述有效像素数据包中，并配置成边带数据包的格式。
同理，相对应于CSI协议传输的情况，所述将所述第二输入信号对应的目标类型信息配置到所述有效像素数据包中，并配置成边带数据包的格式，之后包括相应的处理方式：将配置更新后的有效像素数据包中的dvpc信号更新表征为所述更新后的有效像素数据包中data信号所具有的字节个数。
作为本申请的一个优选实施例，如图10所示，本申请所述S203中根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号，还可以包括步骤S2031”至步骤S2033”：
S2031”，判断所述目标输出信号对应的数据包类型，其中，所述第一输入信号和第二输入信号所指示的数据包类型互不相同。
S2032”，若所述目标输出信号对应的数据包类型为有效像素数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过有效像素数据包的传输通道进行传输。
具体而言，本实施例所述若所述目标输出信号对应的数据包类型为有效像素数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过有效像素数据包的传输通道进行传输，包括：将有效像素数据包类型或边带数据包类型的图像数据包发送给有效像素数据处理模块进行处理，再通过有效像素数据包的传输通道进行传输。
S2033”，若所述目标输出信号对应的数据包类型为边带数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过边带数据包的传输通道进行传输。
具体而言，本实施例所述若所述目标输出信号对应的数据包类型为边带数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过边带数据包的传输通道进行传输，包括：将有效像素数据包类型或边带数据包类型的图像数据包发送给边带数据处理模块进行处理，再通过边带数据包的传输通道进行传输。
需要特别说明的是，本申请所述采用多路选择器获取所述数据包处理信号中的目标类型信息作为第二输入信号，并采用多路选择器获取所述数据包处理信号中的使能选择信息作为第三输入信号，具体可以包括：通过寄存器组产生所述第二输入信号和所述第三输入信号。
通过上述方式，本申请实施例能够根据需要而改变图像数据包的格式，再根据调整后的格式选择处理、解析和传输方式，而不再受限于图像数据包的原格式，方便后级的解析和处理工作，提高工作效率、降低系统能耗，也方便对数据进行可调整的传输和纠错等。
请结合上述实施例参阅图11，本申请提供一种数据接口转换装置，所述数据接口转换装置可以包括存储器11和处理器12。
在本实施例中，所述存储器11用于存储计算机程序，所述处理器12，用于执行所述计算机程序并在执行所述计算机程序时，实现如下步骤：获取图像数据包；判断是否获取到数据包处理信号；若获取到数据包处理信号，根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式，以将所述图像数据包按所述目标数据格式所属的传输通道进行传输。
进一步而言，本实施例所述处理器12在实现根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式时，用于实现：
根据所述数据包处理信号将所述图像数据包从有效像素数据包的原数据格式改变到边带数据包的目标数据格式；
和/或，根据所述数据包处理信号将所述图像数据包从边带数据包的原数据格式改变到有效像素数据包的目标数据格式。
需要举例说明的是，本申请图像数据包可以采用CSI-2协议传输，其图像数据包可以分长包和短包两种，本申请主要针对长包解析和处理。比如，本申请所述CSI-2协议可以用1个长包来传输1行的数据，这1行的数据可以是图像1行的有效像素数据，也可以是1行边带数据，边带数据可以是VOPB数据和EMBED数据等。
值得一提的是，为了使本申请更容易被理解，本实施例仍以CSI-2协议传输图像数据包为例进行详细说明。
在本申请中，CSI-2协议典型的长包结构如图3所示，由包头(PACKET HEADER)、包尾(PACKET FOOTER)和数据(PACKET DATA)这3部分构成。
其中，PACKET HEADER内存储重要的信息Data Type，Data Type表征该行数据的数据类型。即，传输不同颜色格式的有效像素数据、以及传输不同类型的边带数据时，DataType的值是不同的，以此来区分不同行的内容。
其中，本申请PACKET DATA是由一个个字节(即B1,B2…Bn-1,Bn)依次排列组成。在传输不同Data Type的长包时，PACKET DATA内的组包方式有所区别，例如传输RAW8格式的有效像素数据和传输RAW10格式的有效像素数据时，每个像素数据与B1,B2…Bn-1,Bn的映射关系是有区别的。
为便于理解，本实施例以传输RAW8格式为例进行阐述，但所描述的解析方式对RGB、YUV以及其他RAW格式等其他颜色同样适用。其中，当传输RAW8格式时，长包PACKETDATA内每个字节依次代表一个像素(pixel)数据，即B1代表第1个像素P1，B2代表第1个像素P2…Bn代表第n个像素Pn。
此外，对应地，本申请ISP应对不同Data Type的长包时的处理方式、ISP输入接口的格式、以及图像传感器输出的VOPB这种Data Type数据的数据特征这3部分内容工作原理说明如下。
第一部分，本申请ISP应对不同Data Type的长包时处理方式，ISP可以将长包分为以下2大类：有效像素数据包和边带数据包，而边带数据包包括VOPB数据包、EMBED数据包等。对这2大类的长包，ISP内部可以采用不同的处理方式，并采用不同的数据处理通路。
第二部分，对这2大类的长包，在ISP输入接口的格式也可以不同。比如，识别、解析MIPI图像传感器传输过来的长包属于哪一类长包、并且以对应的格式输出给ISP输入接口，可以采用图4所示中的接口转换电路实现。具体而言，本申请在ISP输入接口上，如图5所示，可以有4个关键的信号:dvld,type,data,dvpc。
具体而言，如图5所示，dvld信号的作用包括：在dvld为高电平的周期，表示此时ISP输入接口上的数据是有效的，ISP会通过type,data,dvpc这三个信号去获取数据。
type信号的作用包括：将PACKET HEADER内的Data Type这个信息传输给ISP。在传输2大类的长包时，dvld和type这2个信号所发挥的作用并无区别。
但，与dvld和type信号不同，dvpc和data在传输2大类的长包时，所发挥的作用是存在区别的。
其中，对于dvpc，当传输有效像素数据包时，dvpc表征当前data内包含的像素个数；而当传输边带数据包时，dvpc表征当前data内包含的字节个数。
对于data(以64bit为例),当传输有效像素数据包时，以传输RAW8数据为例，data呈现的形式如图6所示，RAW8(m),RAW8(m+1),RAW8(m+2),RAW8(m+3)…分别是长包内的第m个像素值，第m+1个像素值，第m+2个像素值，第m+3个像素值……。而当传输边带数据包时，data呈现的形式如图7所示，Bm[7:0],Bm+1[7:0],Bm+2[7:0]…分别是长包内的第m个字节，第m+1个字节，第m+2个字节……。其中，Bm[7:0],Bm+1[7:0],Bm+2[7:0]…在原始、未经解析的长包内的排布顺序见图3。
第三部分，MIPI图像传感器输出的VOPB数据包这种Data Type数据的数据特征时，MIPI图像传感器上可以预留一些完全没有曝光的像素，通过读取这些像素值的大小，可以实时得到optical black level的值，ISP可以利用这些值对图像数据进行校正。其中，本实施例完全没有曝光的像素值即为所述VOPB数据包。
需要说明的是，VOPB数据包属于边带数据包的一种，而VOPB数据包的Data Type与有效像素数据是不同的，但由于都是像素值，两者的PACKET DATA的组包方式又可以是相同的。
如前所述，本实施例2大类的长包在ISP输入接口的格式是不同的，ISP内部对2大类的长包也会采用不同的处理方式，并采用不同的数据处理通路。VOPB数据包虽然属于边带数据包的一种，但由于VOPB数据包PACKET DATA的组包方式与有效像素数据包又是相同的，所以如果经过图4模式的接口转换电路后，VOPB数据包能够以与有效像素数据相同的格式呈现在ISP输入接口上，会方便后续ISP处理。
同理，本申请在传输有效像素数据的长包时，当ISP发现接收到的有效像素数据包的数据有误时，为了定位错误发生的环节，但由于可能发生在数据流中的任意一个环节，所以图1模式的接口转换电路需要将长包内的原始字节数据以与边带数据包相同的格式呈现在ISP输入接口上，在ISP内部走边带数据包的处理通路，将数据写到DDR后进行分析和问题定位。
需要重点说明的是，本实施例针对需要将VOPB数据包以与有效像素数据相同的格式呈现在ISP输入接口上而方便后续ISP处理、以及需要将长包内的原始字节数据以与边带数据包相同的格式呈现在ISP输入接口上而进行数据错误的分析定位这两种特殊情况，本实施例所述处理器12在实现根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式时，用于实现：采用多路选择器获取所述图像数据包的数据类型信息、并获取所述数据包处理信号，以根据所述数据类型信息和所述数据包处理信号改变或维持所述图像数据包的原数据格式。
进一步而言，本实施例所述处理器12在实现采用多路选择器获取所述图像数据包的数据类型信息、并获取所述数据包处理信号时，用于实现：采用多路选择器获取所述图像数据包的数据类型信息作为第一输入信号；采用多路选择器获取所述数据包处理信号中的目标类型信息作为第二输入信号，并采用多路选择器获取所述数据包处理信号中的使能选择信息作为第三输入信号；根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号。
举例而言，本实施例所述处理器12在实现根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号时，用于实现：若所述图像数据包为VOPB数据包，所述数据类型信息对应的第一输入信号为边带数据包类型，所述目标类型信息对应的第二输入信号为有效像素数据包类型，所述使能选择信息对应的第三输入信号为高电平信号或低电平信号；根据所述第三输入信号的高电平信号或低电平信号，将所述VOPB数据包选择为第一输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为边带数据包类型，或，将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型。
进一步而言，本实施例所述处理器12在实现将所述VOPB数据包选择为第一输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为边带数据包类型，或，将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型，之后用于实现：将边带数据包类型的所述VOPB数据包采用边带数据处理模块进行处理，以将所述VOPB数据包按照边带数据包进行传输，其中，所述VOPB数据包中的dvpc信号表征为所述VOPB数据包中data信号所包含的字节个数；或，将有效像素数据包类型的所述VOPB数据包采用有效像素数据处理模块进行处理，以将所述VOPB数据包按照有效像素数据包进行传输。
进一步的处理过程中，本实施例所述处理器12在实现将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型时，用于实现：将所述第二输入信号对应的目标类型信息替换所述第一输入信号对应的数据类型信息；将替换后的数据类型信息配置到所述VOPB数据包中原来所述第一输入信号对应的帧位置，并将所述替换后的数据类型信息配置成有效像素数据包的格式。
需要说明的是，本实施例所述处理器12在实现将替换后的数据类型信息配置到所述VOPB数据包中原来所述第一输入信号对应的帧位置，并将所述替换后的数据类型信息配置成有效像素数据包的格式，之后用于实现：将替换更新后的VOPB数据包中的dvpc信号更新表征为所述更新后的VOPB数据包中data信号所具有的像素个数。
在另一个优选实施例中，本申请所述处理器12在实现根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号时，用于实现：若所述图像数据包为有效像素数据包，所述数据类型信息对应的第一输入信号为有效像素数据包类型，所述目标类型信息对应的第二输入信号为边带数据包类型，所述使能选择信息对应的第三输入信号为高电平信号或低电平信号；根据所述第三输入信号的高电平信号或低电平信号，将所述有效像素数据包选择为第一输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为有效像素数据包类型，或，将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型。
其中，所述处理器12在实现将所述有效像素数据包选择为第一输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为有效像素数据包类型，或，将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型，之后用于实现：将有效像素数据包类型的所述有效像素数据包采用有效像素数据处理模块进行处理，以将所述有效像素数据包按照有效像素数据包进行传输，其中，所述有效像素数据包中的dvpc信号表征为所述有效像素数据包中data信号所包含的像素个数；或，将边带数据包类型的所述有效像素数据包采用边带数据处理模块进行处理，以将所述有效像素数据包按照边带数据包进行传输。
进一步而言，所述处理器12在实现将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型时，用于实现：将所述第二输入信号对应的目标类型信息配置到所述有效像素数据包中，并配置成边带数据包的格式。
需要说明的是，本实施例所述处理器12在实现将所述第二输入信号对应的目标类型信息配置到所述有效像素数据包中，并配置成边带数据包的格式，之后用于实现：将配置更新后的有效像素数据包中的dvpc信号更新表征为所述更新后的有效像素数据包中data信号所具有的字节个数。
作为本申请的另一个优选实施例，所述处理器12在实现根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号时，用于实现：判断所述目标输出信号对应的数据包类型，其中，所述第一输入信号和第二输入信号所指示的数据包类型互不相同；若所述目标输出信号对应的数据包类型为有效像素数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过有效像素数据包的传输通道进行传输；若所述目标输出信号对应的数据包类型为边带数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过边带数据包的传输通道进行传输。
值得一提的是，本实施例所述处理器12在实现若所述目标输出信号对应的数据包类型为有效像素数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过有效像素数据包的传输通道进行传输时，用于实现：将有效像素数据包类型或边带数据包类型的图像数据包发送给有效像素数据处理模块进行处理，再通过有效像素数据包的传输通道进行传输。
如前所述，本实施例所述处理器12在实现若所述目标输出信号对应的数据包类型为边带数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过边带数据包的传输通道进行传输时，用于实现：将有效像素数据包类型或边带数据包类型的图像数据包发送给边带数据处理模块进行处理，再通过边带数据包的传输通道进行传输。
需要说明的是，本实施例所述处理器12在实现采用多路选择器获取所述数据包处理信号中的目标类型信息作为第二输入信号，并采用多路选择器获取所述数据包处理信号中的使能选择信息作为第三输入信号时，用于实现：通过寄存器组产生所述第二输入信号和所述第三输入信号。
通过上述方式，本申请实施例能够根据需要而改变图像数据包的格式，再根据调整后的格式选择处理、解析和传输方式，而不再受限于图像数据包的原格式，方便后级的解析和处理工作，提高工作效率、降低系统能耗，也方便对数据进行可调整的传输和纠错等。
请结合上述实施例参阅图12，本申请提供一种图像数据传输方法，其具体可以包括步骤S121至步骤S125。
S121，CSI控制器发送图像数据包。
在本实施例中，CSI控制器可以允许从MIPI CSI-2摄像机传感器采集原始图像，其接收器和发送器可在FPGA中实现，无需外部DPHY桥接器，而且可以允许快速选择顶层参数，还可为大多数较低层次的参数化实现自动化等。
S122，数据接口转换装置从所述CSI控制器获取图像数据包。
本实施例图像数据包可以是对真实世界的图像上每一点光的强弱和频谱颜色的表示，且可以把图像信息转换成数据信息，将图像分解为很多小区域像素，并用一个数值来表示它的灰度，对于彩色图像则可以用红、绿、蓝三原色分量表示。
S123，数据接口转换装置判断是否获取到数据包处理信号。
值得一提的是，本实施例的数据包处理信号可以自行触发，比如在发现数据异常或者需要特殊处理时，当然，也可以根据设置而周期或随机地产生所述数据包处理信号。
S124，若获取到数据包处理信号，数据接口转换装置根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式。
需要特别说明的是，本实施例的“改变”，可以是维持原格式或修改原格式两种方式，等效地，所述原数据格式和所述目标数据格式可以相同或者不同。
此外，若未获取到数据包处理信号，则可以不改变当前获取到的图像数据包的格式，并继续等待是否获取到数据包处理信号。
S125，数据接口转换装置将所述图像数据包按所述目标数据格式所属的传输通道传输给图像数据处理装置。
举例而言，本实施例所述S124中数据接口转换装置根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式，可以包括如下两种处理方式：
处理方式一，数据接口转换装置根据所述数据包处理信号将所述图像数据包从有效像素数据包的原数据格式改变到边带数据包的目标数据格式；
和/或处理方式二，数据接口转换装置根据所述数据包处理信号将所述图像数据包从边带数据包的原数据格式改变到有效像素数据包的目标数据格式。
具体而言，本实施例所述S124中数据接口转换装置根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式，可以包括：数据接口转换装置采用多路选择器获取所述图像数据包的数据类型信息、并获取所述数据包处理信号，以根据所述数据类型信息和所述数据包处理信号改变或维持所述图像数据包的原数据格式。
需要举例说明的是，本申请图像数据包可以采用CSI-2协议传输，其图像数据包可以分长包和短包两种，本申请主要针对长包解析和处理。比如，本申请所述CSI-2协议可以用1个长包来传输1行的数据，这1行的数据可以是图像1行的有效像素数据，也可以是1行边带数据，边带数据可以是VOPB数据和EMBED数据等。
值得一提的是，为了使本申请更容易被理解，本实施例仍以CSI-2协议传输图像数据包为例进行详细说明。
在本申请中，CSI-2协议典型的长包结构如图3所示，由包头(PACKET HEADER)、包尾(PACKET FOOTER)和数据(PACKET DATA)这3部分构成。
其中，PACKET HEADER内存储重要的信息Data Type，Data Type表征该行数据的数据类型。即，传输不同颜色格式的有效像素数据、以及传输不同类型的边带数据时，DataType的值是不同的，以此来区分不同行的内容。
其中，本申请PACKET DATA是由一个个字节(即B1,B2…Bn-1,Bn)依次排列组成。在传输不同Data Type的长包时，PACKET DATA内的组包方式有所区别，例如传输RAW8格式的有效像素数据和传输RAW10格式的有效像素数据时，每个像素数据与B1,B2…Bn-1,Bn的映射关系是有区别的。
为便于理解，本实施例以传输RAW8格式为例进行阐述，但所描述的解析方式对RGB、YUV以及其他RAW格式等其他颜色同样适用。其中，当传输RAW8格式时，长包PACKETDATA内每个字节依次代表一个像素(pixel)数据，即B1代表第1个像素P1，B2代表第1个像素P2…Bn代表第n个像素Pn。
此外，对应地，本申请ISP应对不同Data Type的长包时的处理方式、ISP输入接口的格式、以及图像传感器输出的VOPB这种Data Type数据的数据特征这3部分内容工作原理说明如下。
第一部分，本申请ISP应对不同Data Type的长包时处理方式，ISP可以将长包分为以下2大类：有效像素数据包和边带数据包，而边带数据包包括VOPB数据包、EMBED数据包等。对这2大类的长包，ISP内部可以采用不同的处理方式，并采用不同的数据处理通路。
第二部分，对这2大类的长包，在ISP输入接口的格式也可以不同。比如，识别、解析MIPI图像传感器传输过来的长包属于哪一类长包、并且以对应的格式输出给ISP输入接口，可以采用图4所示中的接口转换电路实现。具体而言，本申请在ISP输入接口上，如图5所示，可以有4个关键的信号:dvld,type,data,dvpc。
具体而言，如图5所示，dvld信号的作用包括：在dvld为高电平的周期，表示此时ISP输入接口上的数据是有效的，ISP会通过type,data,dvpc这三个信号去获取数据。
type信号的作用包括：将PACKET HEADER内的Data Type这个信息传输给ISP。在传输2大类的长包时，dvld和type这2个信号所发挥的作用并无区别。
但，与dvld和type信号不同，dvpc和data在传输2大类的长包时，所发挥的作用是存在区别的。
其中，对于dvpc，当传输有效像素数据包时，dvpc表征当前data内包含的像素个数；而当传输边带数据包时，dvpc表征当前data内包含的字节个数。
对于data(以64bit为例),当传输有效像素数据包时，以传输RAW8数据为例，data呈现的形式如图6所示，RAW8(m),RAW8(m+1),RAW8(m+2),RAW8(m+3)…分别是长包内的第m个像素值，第m+1个像素值，第m+2个像素值，第m+3个像素值……。而当传输边带数据包时，data呈现的形式如图7所示，Bm[7:0],Bm+1[7:0],Bm+2[7:0]…分别是长包内的第m个字节，第m+1个字节，第m+2个字节……。其中，Bm[7:0],Bm+1[7:0],Bm+2[7:0]…在原始、未经解析的长包内的排布顺序见图3。
第三部分，MIPI图像传感器输出的VOPB数据包这种Data Type数据的数据特征时，MIPI图像传感器上可以预留一些完全没有曝光的像素，通过读取这些像素值的大小，可以实时得到optical black level的值，ISP可以利用这些值对图像数据进行校正。其中，本实施例完全没有曝光的像素值即为所述VOPB数据包。
需要说明的是，VOPB数据包属于边带数据包的一种，而VOPB数据包的Data Type与有效像素数据是不同的，但由于都是像素值，两者的PACKET DATA的组包方式又可以是相同的。
如前所述，本实施例2大类的长包在ISP输入接口的格式是不同的，ISP内部对2大类的长包也会采用不同的处理方式，并采用不同的数据处理通路。VOPB数据包虽然属于边带数据包的一种，但由于VOPB数据包PACKET DATA的组包方式与有效像素数据包又是相同的，所以如果经过图4模式的接口转换电路后，VOPB数据包能够以与有效像素数据相同的格式呈现在ISP输入接口上，会方便后续ISP处理。
同理，本申请在传输有效像素数据的长包时，当ISP发现接收到的有效像素数据包的数据有误时，为了定位错误发生的环节，但由于可能发生在数据流中的任意一个环节，所以图1模式的接口转换电路需要将长包内的原始字节数据以与边带数据包相同的格式呈现在ISP输入接口上，在ISP内部走边带数据包的处理通路，将数据写到DDR后进行分析和问题定位。
需要重点说明的是，本实施例针对需要将VOPB数据包以与有效像素数据相同的格式呈现在ISP输入接口上而方便后续ISP处理、以及需要将长包内的原始字节数据以与边带数据包相同的格式呈现在ISP输入接口上而进行数据错误的分析定位这两种特殊情况，请参阅图13，本实施例所述数据接口转换装置采用多路选择器获取所述图像数据包的数据类型信息、并获取所述数据包处理信号，具体可以包括步骤S131至步骤S133。
S131，数据接口转换装置采用多路选择器获取所述图像数据包的数据类型信息作为第一输入信号。
S132，数据接口转换装置采用多路选择器获取所述数据包处理信号中的目标类型信息作为第二输入信号，并采用多路选择器获取所述数据包处理信号中的使能选择信息作为第三输入信号。
S133，数据接口转换装置根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号。
值得一提的是，请参阅图14，本实施例所述S133中数据接口转换装置根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号，可以包括步骤S1331和S1332。
S1331，若所述图像数据包为VOPB数据包，所述数据类型信息对应的第一输入信号为边带数据包类型，所述目标类型信息对应的第二输入信号为有效像素数据包类型，所述使能选择信息对应的第三输入信号为高电平信号或低电平信号。
S1332，数据接口转换装置根据所述第三输入信号的高电平信号或低电平信号，将所述VOPB数据包选择为第一输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为边带数据包类型，或，将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型。
其中，本申请所述将所述VOPB数据包选择为第一输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为边带数据包类型，或，将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型，之后包括两种处理方式：
处理方式一，数据接口转换装置将边带数据包类型的所述VOPB数据包采用边带数据处理模块进行处理，以将所述VOPB数据包按照边带数据包进行传输，其中，所述VOPB数据包中的dvpc信号表征为所述VOPB数据包中data信号所包含的字节个数；
或处理方式二，数据接口转换装置将有效像素数据包类型的所述VOPB数据包采用有效像素数据处理模块进行处理，以将所述VOPB数据包按照有效像素数据包进行传输。
进一步而言，本实施例所述将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型，包括：数据接口转换装置将所述第二输入信号对应的目标类型信息替换所述第一输入信号对应的数据类型信息；数据接口转换装置将替换后的数据类型信息配置到所述VOPB数据包中原来所述第一输入信号对应的帧位置，并将所述替换后的数据类型信息配置成有效像素数据包的格式。
接着，本申请所述将替换后的数据类型信息配置到所述VOPB数据包中原来所述第一输入信号对应的帧位置，并将所述替换后的数据类型信息配置成有效像素数据包的格式，之后包括：数据接口转换装置将替换更新后的VOPB数据包中的dvpc信号更新表征为所述更新后的VOPB数据包中data信号所具有的像素个数。
请参阅图15，本申请所述S133根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号，还可以包括步骤S1331’和S1332’。
S1331’，若所述图像数据包为有效像素数据包，所述数据类型信息对应的第一输入信号为有效像素数据包类型，所述目标类型信息对应的第二输入信号为边带数据包类型，所述使能选择信息对应的第三输入信号为高电平信号或低电平信号。
S1332’，数据接口转换装置根据所述第三输入信号的高电平信号或低电平信号，将所述有效像素数据包选择为第一输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为有效像素数据包类型，或，将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型。
需要说明的是，本实施例所述S1332’将所述有效像素数据包选择为第一输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为有效像素数据包类型，或，将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型，之后包括两种处理方式：
处理方式一，数据接口转换装置将有效像素数据包类型的所述有效像素数据包采用有效像素数据处理模块进行处理，以将所述有效像素数据包按照有效像素数据包进行传输，其中，所述有效像素数据包中的dvpc信号表征为所述有效像素数据包中data信号所包含的像素个数；
或处理方式二，数据接口转换装置将边带数据包类型的所述有效像素数据包采用边带数据处理模块进行处理，以将所述有效像素数据包按照边带数据包进行传输。
进一步而言，本实施例所述将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型，包括：数据接口转换装置将所述第二输入信号对应的目标类型信息配置到所述有效像素数据包中，并配置成边带数据包的格式。
相应地，本实施例所述将所述第二输入信号对应的目标类型信息配置到所述有效像素数据包中，并配置成边带数据包的格式，之后包括：数据接口转换装置将配置更新后的有效像素数据包中的dvpc信号更新表征为所述更新后的有效像素数据包中data信号所具有的字节个数。
请参阅图16，作为另一种优选实施例，所述S133中根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号，还可以包括步骤S1331”至步骤S1333”。
S1331”，数据接口转换装置判断所述目标输出信号对应的数据包类型，其中，所述第一输入信号和第二输入信号所指示的数据包类型互不相同；
S1332”，若所述目标输出信号对应的数据包类型为有效像素数据包类型，数据接口转换装置将有效像素数据包类型或边带数据包类型的图像数据包通过有效像素数据包的传输通道进行传输；
S1333”，若所述目标输出信号对应的数据包类型为边带数据包类型，数据接口转换装置将有效像素数据包类型或边带数据包类型的图像数据包通过边带数据包的传输通道进行传输。
值得一提的是，本实施例所述S1332”若所述目标输出信号对应的数据包类型为有效像素数据包类型，数据接口转换装置将有效像素数据包类型或边带数据包类型的图像数据包通过有效像素数据包的传输通道进行传输，包括：数据接口转换装置将有效像素数据包类型或边带数据包类型的图像数据包发送给有效像素数据处理模块进行处理，再通过有效像素数据包的传输通道进行传输。
对应地，本实施例所述S1333”若所述目标输出信号对应的数据包类型为边带数据包类型，数据接口转换装置将有效像素数据包类型或边带数据包类型的图像数据包通过边带数据包的传输通道进行传输，包括：数据接口转换装置将有效像素数据包类型或边带数据包类型的图像数据包发送给边带数据处理模块进行处理，再通过边带数据包的传输通道进行传输。
在本实施例中，所述采用多路选择器获取所述数据包处理信号中的目标类型信息作为第二输入信号，并采用多路选择器获取所述数据包处理信号中的使能选择信息作为第三输入信号，包括：数据接口转换装置通过寄存器组产生所述第二输入信号和所述第三输入信号。
通过上述方式，本申请实施例能够根据需要而改变图像数据包的格式，再根据调整后的格式选择处理、解析和传输方式，而不再受限于图像数据包的原格式，方便后级的解析和处理工作，提高工作效率、降低系统能耗，也方便对数据进行可调整的传输和纠错等。
请结合上述实施例参阅图17，本申请提供一种图像数据传输装置，其可以包括CSI控制器171、数据接口转换装置172和图像数据处理装置173。
需要首先说明的是，本实施例所述CSI控制器171发送图像数据包；
所述数据接口转换装置172包括存储器(图未示)和处理器1724；
所述存储器用于存储计算机程序；
所述处理器1724，用于执行所述计算机程序并在执行所述计算机程序时，实现如下步骤：
从所述CSI控制器171获取图像数据包；
判断是否获取到数据包处理信号；
若获取到数据包处理信号，根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式；
将所述图像数据包按所述目标数据格式所属的传输通道传输给所述图像数据处理装置173。
具体而言，本实施例所述处理器1724在实现根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式时，用于实现两种情况：
情况一，根据所述数据包处理信号将所述图像数据包从有效像素数据包的原数据格式改变到边带数据包的目标数据格式；
和/或情况二，根据所述数据包处理信号将所述图像数据包从边带数据包的原数据格式改变到有效像素数据包的目标数据格式。
进一步而言，本实施例所述处理器1724在实现根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式时，用于实现：采用多路选择器1721获取所述图像数据包的数据类型信息、并获取所述数据包处理信号，以根据所述数据类型信息和所述数据包处理信号改变或维持所述图像数据包的原数据格式。
其中，所述处理器1724在实现采用多路选择器1721获取所述图像数据包的数据类型信息、并获取所述数据包处理信号时，用于实现：采用多路选择器1721获取所述图像数据包的数据类型信息作为第一输入信号Data Type；采用多路选择器1721获取所述数据包处理信号中的目标类型信息作为第二输入信号Map-Type，并采用多路选择器1721获取所述数据包处理信号中的使能选择信息作为第三输入信号map-en；根据所述第三输入信号map-en确认选择所述第一输入信号Data Type或所述第二输入信号Map-Type作为目标输出信号Final-Type。
需要举例说明的是，本申请图像数据包可以采用CSI-2协议传输，其图像数据包可以分长包和短包两种，本申请主要针对长包解析和处理。比如，本申请所述CSI-2协议可以用1个长包来传输1行的数据，这1行的数据可以是图像1行的有效像素数据，也可以是1行边带数据，边带数据可以是VOPB数据和EMBED数据等。
值得一提的是，为了使本申请更容易被理解，本实施例仍以CSI-2协议传输图像数据包为例进行详细说明。
在本申请中，CSI-2协议典型的长包结构如图3所示，由包头(PACKET HEADER)、包尾(PACKET FOOTER)和数据(PACKET DATA)这3部分构成。
其中，PACKET HEADER内存储重要的信息Data Type，Data Type表征该行数据的数据类型。即，传输不同颜色格式的有效像素数据、以及传输不同类型的边带数据时，DataType的值是不同的，以此来区分不同行的内容。
其中，本申请PACKET DATA是由一个个字节(即B1,B2…Bn-1,Bn)依次排列组成。在传输不同Data Type的长包时，PACKET DATA内的组包方式有所区别，例如传输RAW8格式的有效像素数据和传输RAW10格式的有效像素数据时，每个像素数据与B1,B2…Bn-1,Bn的映射关系是有区别的。
为便于理解，本实施例以传输RAW8格式为例进行阐述，但所描述的解析方式对RGB、YUV以及其他RAW格式等其他颜色同样适用。其中，当传输RAW8格式时，长包PACKETDATA内每个字节依次代表一个像素(pixel)数据，即B1代表第1个像素P1，B2代表第1个像素P2…Bn代表第n个像素Pn。
此外，对应地，本申请ISP应对不同Data Type的长包时的处理方式、ISP输入接口的格式、以及图像传感器输出的VOPB这种Data Type数据的数据特征这3部分内容工作原理说明如下。
第一部分，本申请ISP应对不同Data Type的长包时处理方式，ISP可以将长包分为以下2大类：有效像素数据包和边带数据包，而边带数据包包括VOPB数据包、EMBED数据包等。对这2大类的长包，ISP内部可以采用不同的处理方式，并采用不同的数据处理通路。
第二部分，对这2大类的长包，在ISP输入接口的格式也可以不同。比如，识别、解析MIPI图像传感器传输过来的长包属于哪一类长包、并且以对应的格式输出给ISP输入接口，可以采用图4所示中的接口转换电路实现。具体而言，本申请在ISP输入接口上，如图5所示，可以有4个关键的信号:dvld,type,data,dvpc。
具体而言，如图5所示，dvld信号的作用包括：在dvld为高电平的周期，表示此时ISP输入接口上的数据是有效的，ISP会通过type,data,dvpc这三个信号去获取数据。
type信号的作用包括：将PACKET HEADER内的Data Type这个信息传输给ISP。在传输2大类的长包时，dvld和type这2个信号所发挥的作用并无区别。
但，与dvld和type信号不同，dvpc和data在传输2大类的长包时，所发挥的作用是存在区别的。
其中，对于dvpc，当传输有效像素数据包时，dvpc表征当前data内包含的像素个数；而当传输边带数据包时，dvpc表征当前data内包含的字节个数。
对于data(以64bit为例),当传输有效像素数据包时，以传输RAW8数据为例，data呈现的形式如图6所示，RAW8(m),RAW8(m+1),RAW8(m+2),RAW8(m+3)…分别是长包内的第m个像素值，第m+1个像素值，第m+2个像素值，第m+3个像素值……。而当传输边带数据包时，data呈现的形式如图7所示，Bm[7:0],Bm+1[7:0],Bm+2[7:0]…分别是长包内的第m个字节，第m+1个字节，第m+2个字节……。其中，Bm[7:0],Bm+1[7:0],Bm+2[7:0]…在原始、未经解析的长包内的排布顺序见图3。
第三部分，MIPI图像传感器输出的VOPB数据包这种Data Type数据的数据特征时，MIPI图像传感器上可以预留一些完全没有曝光的像素，通过读取这些像素值的大小，可以实时得到optical black level的值，ISP可以利用这些值对图像数据进行校正。其中，本实施例完全没有曝光的像素值即为所述VOPB数据包。
需要说明的是，VOPB数据包属于边带数据包的一种，而VOPB数据包的Data Type与有效像素数据是不同的，但由于都是像素值，两者的PACKET DATA的组包方式又可以是相同的。
如前所述，本实施例2大类的长包在ISP输入接口的格式是不同的，ISP内部对2大类的长包也会采用不同的处理方式，并采用不同的数据处理通路。VOPB数据包虽然属于边带数据包的一种，但由于VOPB数据包PACKET DATA的组包方式与有效像素数据包又是相同的，所以如果经过图4模式的接口转换电路后，VOPB数据包能够以与有效像素数据相同的格式呈现在ISP输入接口上，会方便后续ISP处理。
同理，本申请在传输有效像素数据的长包时，当ISP发现接收到的有效像素数据包的数据有误时，为了定位错误发生的环节，但由于可能发生在数据流中的任意一个环节，所以图1模式的接口转换电路需要将长包内的原始字节数据以与边带数据包相同的格式呈现在ISP输入接口上，在ISP内部走边带数据包的处理通路，将数据写到DDR后进行分析和问题定位。
需要重点说明的是，本实施例针对需要将VOPB数据包以与有效像素数据相同的格式呈现在ISP输入接口上而方便后续ISP处理、以及需要将长包内的原始字节数据以与边带数据包相同的格式呈现在ISP输入接口上而进行数据错误的分析定位这两种特殊情况，本实施例所述处理器1724在实现根据所述第三输入信号map-en确认选择所述第一输入信号Data Type或所述第二输入信号Map-Type作为目标输出信号Final-Type时，用于实现：若所述图像数据包为VOPB数据包，所述数据类型信息对应的第一输入信号Data Type为边带数据包类型，所述目标类型信息对应的第二输入信号Map-Type为有效像素数据包类型，所述使能选择信息对应的第三输入信号map-en为高电平信号或低电平信号；根据所述第三输入信号map-en的高电平信号或低电平信号，将所述VOPB数据包选择为第一输入信号DataType作为目标输出信号Final-Type，使得所述VOPB数据包的数据类型信息为边带数据包类型，或，将所述VOPB数据包选择为第二输入信号Map-Type作为目标输出信号Final-Type，使得所述VOPB数据包的数据类型信息为有效像素数据包类型。
在本实施例中，所述处理器1724在实现将所述VOPB数据包选择为第一输入信号Data Type作为目标输出信号Final-Type，使得所述VOPB数据包的数据类型信息为边带数据包类型，或，将所述VOPB数据包选择为第二输入信号Map-Type作为目标输出信号Final-Type，使得所述VOPB数据包的数据类型信息为有效像素数据包类型，之后用于实现：将边带数据包类型的所述VOPB数据包采用边带数据处理模块1722进行处理，以将所述VOPB数据包按照边带数据包进行传输，其中，所述VOPB数据包中的dvpc信号表征为所述VOPB数据包中data信号所包含的字节个数；或，将有效像素数据包类型的所述VOPB数据包采用有效像素数据处理模块1723进行处理，以将所述VOPB数据包按照有效像素数据包进行传输。
相应地，本实施例所述处理器1724在实现将所述VOPB数据包选择为第二输入信号Map-Type作为目标输出信号Final-Type，使得所述VOPB数据包的数据类型信息为有效像素数据包类型时，用于实现：将所述第二输入信号Map-Type对应的目标类型信息替换所述第一输入信号Data Type对应的数据类型信息；将替换后的数据类型信息配置到所述VOPB数据包中原来所述第一输入信号Data Type对应的帧位置，并将所述替换后的数据类型信息配置成有效像素数据包的格式。
在本实施例中，所述处理器1724在实现将替换后的数据类型信息配置到所述VOPB数据包中原来所述第一输入信号Data Type对应的帧位置，并将所述替换后的数据类型信息配置成有效像素数据包的格式，之后用于实现：将替换更新后的VOPB数据包中的dvpc信号更新表征为所述更新后的VOPB数据包中data信号所具有的像素个数。
需要说明的是，本实施例所述处理器1724在实现根据所述第三输入信号map-en确认选择所述第一输入信号Data Type或所述第二输入信号Map-Type作为目标输出信号Final-Type时，用于实现：若所述图像数据包为有效像素数据包，所述数据类型信息对应的第一输入信号Data Type为有效像素数据包类型，所述目标类型信息对应的第二输入信号Map-Type为边带数据包类型，所述使能选择信息对应的第三输入信号map-en为高电平信号或低电平信号；根据所述第三输入信号map-en的高电平信号或低电平信号，将所述有效像素数据包选择为第一输入信号Data Type作为目标输出信号Final-Type，使得所述有效像素数据包的数据类型信息为有效像素数据包类型，或，将所述有效像素数据包选择为第二输入信号Map-Type作为目标输出信号Final-Type，使得所述有效像素数据包的数据类型信息为边带数据包类型。
针对上述情况，本实施例所述处理器1724在实现将所述有效像素数据包选择为第一输入信号Data Type作为目标输出信号Final-Type，使得所述有效像素数据包的数据类型信息为有效像素数据包类型，或，将所述有效像素数据包选择为第二输入信号Map-Type作为目标输出信号Final-Type，使得所述有效像素数据包的数据类型信息为边带数据包类型，之后用于实现：将有效像素数据包类型的所述有效像素数据包采用有效像素数据处理模块1723进行处理，以将所述有效像素数据包按照有效像素数据包进行传输，其中，所述有效像素数据包中的dvpc信号表征为所述有效像素数据包中data信号所包含的像素个数；或，将边带数据包类型的所述有效像素数据包采用边带数据处理模块1722进行处理，以将所述有效像素数据包按照边带数据包进行传输。
进一步而言，所述处理器1724在实现将所述有效像素数据包选择为第二输入信号Map-Type作为目标输出信号Final-Type，使得所述有效像素数据包的数据类型信息为边带数据包类型时，用于实现：将所述第二输入信号Map-Type对应的目标类型信息配置到所述有效像素数据包中，并配置成边带数据包的格式。
具体而言，本实施例所述处理器1724在实现将所述第二输入信号Map-Type对应的目标类型信息配置到所述有效像素数据包中，并配置成边带数据包的格式，之后用于实现：将配置更新后的有效像素数据包中的dvpc信号更新表征为所述更新后的有效像素数据包中data信号所具有的字节个数。
作为本申请的一个优选实施例，所述处理器1724在实现根据所述第三输入信号map-en确认选择所述第一输入信号Data Type或所述第二输入信号Map-Type作为目标输出信号Final-Type时，用于实现：判断所述目标输出信号Final-Type对应的数据包类型，其中，所述第一输入信号Data Type和第二输入信号Map-Type所指示的数据包类型互不相同；若所述目标输出信号Final-Type对应的数据包类型为有效像素数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过有效像素数据包的传输通道进行传输；若所述目标输出信号Final-Type对应的数据包类型为边带数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过边带数据包的传输通道进行传输。
需要说明的是，本实施例所述处理器1724在实现若所述目标输出信号Final-Type对应的数据包类型为有效像素数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过有效像素数据包的传输通道进行传输时，用于实现：将有效像素数据包类型或边带数据包类型的图像数据包发送给有效像素数据处理模块1723进行处理，再通过有效像素数据包的传输通道进行传输。
值得一提的是，所述处理器1724在实现若所述目标输出信号Final-Type对应的数据包类型为边带数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过边带数据包的传输通道进行传输时，用于实现：将有效像素数据包类型或边带数据包类型的图像数据包发送给边带数据处理模块1722进行处理，再通过边带数据包的传输通道进行传输。
如图17所示，所述处理器1724在实现采用多路选择器1721获取所述数据包处理信号中的目标类型信息作为第二输入信号Map-Type，并采用多路选择器1721获取所述数据包处理信号中的使能选择信息作为第三输入信号map-en时，用于实现：通过寄存器组174产生所述第二输入信号Map-Type和所述第三输入信号map-en。
在本实施例中，所述图像数据处理装置173可以为ISP模块或其他处理模块，所述边带数据包包括VOPB数据包和EMBED数据包，所述有效像素数据包的颜色格式包括RAW8格式、RAW10格式或其他格式。
在其中一个应用例中，所述处理器1724将所述有效像素数据包通过边带数据包的传输通道传输给所述图像数据处理装置173后，所述图像数据处理装置173获取所述有效像素数据包的原始字节数据，以在所述有效像素数据包发生错误时，对错误的有效像素数据进行定位。
在其他实施例中图像数据传输装置还可以包括图4所示的MIPI图像传感器、DPHY等。进一步而言，所述DPHY可以替换成CPHY等其他类型的PHY，此外，有效像素数据包和边带数据包在数据接口转换装置172的输出接口上呈现的具体格式可以采用其他格式，同理，所述图像数据处理装置173输入接口的关键信号可以采用其他方式。容易理解的是，边带数据包的类型不仅限于VOPB数据、EMBED数据，还可以为所有其他的边带数据类型。
值得一提的是，本申请的实施例中还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序中包括程序指令，所述处理器1724执行所述程序指令，实现上述实施例提供的图像数据处理方法、图像数据传输方法的步骤。
其中，所述计算机可读存储介质可以是前述任一实施例所述的内部的存储器，例如硬盘或内存。所述计算机可读存储介质也可以是外部的存储设备，例如配备的插接式硬盘，智能存储卡(Smart Media Card，SMC)，安全数字(Secure Digital，SD)卡，闪存卡(Flash Card)等。
为便于理解，下面将结合其中一实施例进行详细说明。
继续参阅图17所示，对于数据接口转换装置172来说，有2个主要的输入信号来源：CSI控制器171和寄存器组174。
其中，来自CSI控制器171的有2个主要的信号：Data Type和Packet Data。DataType表示当前CSI控制器171传输过来的包(packet)的数据类型，Packet Data是当前CSI控制器171传输过来的包(packet)的具体数据内容。
其中，来自寄存器组174的有2个主要的信号：Map-Type和map_en。Map-Type和map_en均作用于数据接口转换装置172内部的多路选择器1721。多路选择器1721的输入信号还有Data Type。
多路选择器1721的工作模式包括：当配置map_en为0时，Final-Type为Data Type；当配置map_en为1时，Final-Type为Map-Type。Final-Type会输入到处理器1724中，处理器1724会判断Final-Type的类型。如果Final-Type属于边带数据类型，则将CSI控制器171传输过来的Packet Data分配给边带数据处理模块1722，此时data按照图7的格式输出，dvpc表征当前data内包含的字节个数。如果Final-Type属于有效像素数据类型，则将CSI控制器171传输过来的Packet Data分配给有效像素数据处理模块1723，此时data按照图6的格式输出，dvpc表征当前data内包含的像素个数。
需要说明的是，VOPB数据包是边带数据包的一种，利用上述工作模式，可以实现对VOPB数据包的灵活解析，具体可以包括以下2种情形。
情形一，如果想要以与有效像素数据相同的格式将VOPB数据呈现在ISP输入接口，则在图17中，将map_en配置为1，将Mape Type配置为与该VOPB数据属于同一帧的有效像素的颜色格式，以RAW8为例，此时Final-Type为RAW8。Final-Type会输入到处理器1724中，处理器1724判断RAW8属于有效像素数据类型,因此将CSI控制器171传输过来的Packet Data分配给有效像素数据处理模块1723，此时data按照图6的格式输出，dvpc表征当前data内包含的像素个数。
情形二，如果想要以边带数据的格式将VOPB数据呈现在ISP输入接口，则在图17中，将map_en配置为0，此时Final-Type为VOPB。Final-Type会输入到处理器1724中，处理器1724判断VOPB属于边带数据类型,因此将CSI控制器171传输过来的Packet Data分配给边带数据处理模块1722，此时data按照图7的格式输出，dvpc表征当前data内包含的字节个数。
同理，利用上述方案，也可以实现对有效像素数据包(此处以RAW8为例)的灵活解析，具体分以下2种方式。
方式一，如果想要以有效像素数据的格式将有效像素数据呈现在ISP(即图像数据处理装置173)输入接口，则在图17中，将map_en配置为0，此时Final-Type为RAW8。Final-Type会输入到处理器1724中，处理器1724判断RAW8属于有效像素数据类型,因此将CSI控制器171传输过来的Packet Data分配给有效像素数据处理模块1723，此时data按照图6的格式输出，dvpc表征当前data内包含的像素个数。
方式二，如果想要以边带数据的格式将有效像素数据呈现在ISP输入接口，则在图17中，将map_en配置为1，将Mape Type配置为某一种边带数据包的Data Type。Final-Type会输入到处理器1724中，处理器1724判断Final-Type属于边带数据类型,因此将CSI控制器171传输过来的Packet Data分配给边带数据处理模块1722，此时data按照图7的格式输出，dvpc表征当前data内包含的字节个数。
本申请能够对有效像素数据包和边带数据包进行灵活解析处理，且在进行灵活解析后能够以最适当的格式将长包数据传送给后级ISP，可以让ISP花费更小的计算代价来处理长包数据，同时，能够将有效像素数据包以与边带数据包相同的格式将数据传送给后级ISP，使得ISP能够获取长包内的原始字节数据，能够在发生错误时更方便地对问题进行定位。
通过上述方式，本申请实施例能够根据需要而改变图像数据包的格式，再根据调整后的格式选择处理、解析和传输方式，而不再受限于图像数据包的原格式，方便后级的解析和处理工作，提高工作效率、降低系统能耗，也方便对数据进行可调整的传输和纠错等。
以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以权利要求的保护范围为准。

Claims (68)

1.一种图像数据处理方法，其特征在于，包括：
获取图像数据包；
判断是否获取到数据包处理信号；
若获取到数据包处理信号，根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式，以将所述图像数据包按所述目标数据格式所属的传输通道进行传输。
2.根据权利要求1所述的方法，其特征在于，所述根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式，包括：
根据所述数据包处理信号将所述图像数据包从有效像素数据包的原数据格式改变到边带数据包的目标数据格式；
和/或，根据所述数据包处理信号将所述图像数据包从边带数据包的原数据格式改变到有效像素数据包的目标数据格式。
3.根据权利要求1所述的方法，其特征在于，所述根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式，包括：
采用多路选择器获取所述图像数据包的数据类型信息、并获取所述数据包处理信号，以根据所述数据类型信息和所述数据包处理信号改变或维持所述图像数据包的原数据格式。
4.根据权利要求3所述的方法，其特征在于，所述采用多路选择器获取所述图像数据包的数据类型信息、并获取所述数据包处理信号，包括：
采用多路选择器获取所述图像数据包的数据类型信息作为第一输入信号；
采用多路选择器获取所述数据包处理信号中的目标类型信息作为第二输入信号，并采用多路选择器获取所述数据包处理信号中的使能选择信息作为第三输入信号；
根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号。
5.根据权利要求4所述的方法，其特征在于，所述根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号，包括：
若所述图像数据包为VOPB数据包，所述数据类型信息对应的第一输入信号为边带数据包类型，所述目标类型信息对应的第二输入信号为有效像素数据包类型，所述使能选择信息对应的第三输入信号为高电平信号或低电平信号；
根据所述第三输入信号的高电平信号或低电平信号，将所述VOPB数据包选择为第一输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为边带数据包类型，或，将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型。
6.根据权利要求5所述的方法，其特征在于，所述将所述VOPB数据包选择为第一输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为边带数据包类型，或，将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型，之后包括：
将边带数据包类型的所述VOPB数据包采用边带数据处理模块进行处理，以将所述VOPB数据包按照边带数据包进行传输，其中，所述VOPB数据包中的dvpc信号表征为所述VOPB数据包中data信号所包含的字节个数；
或，将有效像素数据包类型的所述VOPB数据包采用有效像素数据处理模块进行处理，以将所述VOPB数据包按照有效像素数据包进行传输。
7.根据权利要求5所述的方法，其特征在于，所述将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型，包括：
将所述第二输入信号对应的目标类型信息替换所述第一输入信号对应的数据类型信息；
将替换后的数据类型信息配置到所述VOPB数据包中原来所述第一输入信号对应的帧位置，并将所述替换后的数据类型信息配置成有效像素数据包的格式。
8.根据权利要求7所述的方法，其特征在于，所述将替换后的数据类型信息配置到所述VOPB数据包中原来所述第一输入信号对应的帧位置，并将所述替换后的数据类型信息配置成有效像素数据包的格式，之后包括：
将替换更新后的VOPB数据包中的dvpc信号更新表征为所述更新后的VOPB数据包中data信号所具有的像素个数。
9.根据权利要求4所述的方法，其特征在于，所述根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号，包括：
若所述图像数据包为有效像素数据包，所述数据类型信息对应的第一输入信号为有效像素数据包类型，所述目标类型信息对应的第二输入信号为边带数据包类型，所述使能选择信息对应的第三输入信号为高电平信号或低电平信号；
根据所述第三输入信号的高电平信号或低电平信号，将所述有效像素数据包选择为第一输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为有效像素数据包类型，或，将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型。
10.根据权利要求9所述的方法，其特征在于，所述将所述有效像素数据包选择为第一输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为有效像素数据包类型，或，将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型，之后包括：
将有效像素数据包类型的所述有效像素数据包采用有效像素数据处理模块进行处理，以将所述有效像素数据包按照有效像素数据包进行传输，其中，所述有效像素数据包中的dvpc信号表征为所述有效像素数据包中data信号所包含的像素个数；
或，将边带数据包类型的所述有效像素数据包采用边带数据处理模块进行处理，以将所述有效像素数据包按照边带数据包进行传输。
11.根据权利要求10所述的方法，其特征在于，所述将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型，包括：
将所述第二输入信号对应的目标类型信息配置到所述有效像素数据包中，并配置成边带数据包的格式。
12.根据权利要求11所述的方法，其特征在于，所述将所述第二输入信号对应的目标类型信息配置到所述有效像素数据包中，并配置成边带数据包的格式，之后包括：
将配置更新后的有效像素数据包中的dvpc信号更新表征为所述更新后的有效像素数据包中data信号所具有的字节个数。
13.根据权利要求4所述的方法，其特征在于，所述根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号，包括：
判断所述目标输出信号对应的数据包类型，其中，所述第一输入信号和第二输入信号所指示的数据包类型互不相同；
若所述目标输出信号对应的数据包类型为有效像素数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过有效像素数据包的传输通道进行传输；
若所述目标输出信号对应的数据包类型为边带数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过边带数据包的传输通道进行传输。
14.根据权利要求13所述的方法，其特征在于，所述若所述目标输出信号对应的数据包类型为有效像素数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过有效像素数据包的传输通道进行传输，包括：
将有效像素数据包类型或边带数据包类型的图像数据包发送给有效像素数据处理模块进行处理，再通过有效像素数据包的传输通道进行传输。
15.根据权利要求13所述的方法，其特征在于，所述若所述目标输出信号对应的数据包类型为边带数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过边带数据包的传输通道进行传输，包括：
将有效像素数据包类型或边带数据包类型的图像数据包发送给边带数据处理模块进行处理，再通过边带数据包的传输通道进行传输。
16.根据权利要求4、13、14或15任一项所述的方法，其特征在于，所述采用多路选择器获取所述数据包处理信号中的目标类型信息作为第二输入信号，并采用多路选择器获取所述数据包处理信号中的使能选择信息作为第三输入信号，包括：
通过寄存器组产生所述第二输入信号和所述第三输入信号。
17.一种数据接口转换装置，其特征在于，所述数据接口转换装置包括存储器和处理器；
所述存储器用于存储计算机程序；
所述处理器，用于执行所述计算机程序并在执行所述计算机程序时，实现如下步骤：
获取图像数据包；
判断是否获取到数据包处理信号；
若获取到数据包处理信号，根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式，以将所述图像数据包按所述目标数据格式所属的传输通道进行传输。
18.根据权利要求17所述的装置，其特征在于，所述处理器在实现根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式时，用于实现：
根据所述数据包处理信号将所述图像数据包从有效像素数据包的原数据格式改变到边带数据包的目标数据格式；
和/或，根据所述数据包处理信号将所述图像数据包从边带数据包的原数据格式改变到有效像素数据包的目标数据格式。
19.根据权利要求18所述的装置，其特征在于，所述处理器在实现根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式时，用于实现：
采用多路选择器获取所述图像数据包的数据类型信息、并获取所述数据包处理信号，以根据所述数据类型信息和所述数据包处理信号改变或维持所述图像数据包的原数据格式。
20.根据权利要求19所述的装置，其特征在于，所述处理器在实现采用多路选择器获取所述图像数据包的数据类型信息、并获取所述数据包处理信号时，用于实现：
采用多路选择器获取所述图像数据包的数据类型信息作为第一输入信号；
采用多路选择器获取所述数据包处理信号中的目标类型信息作为第二输入信号，并采用多路选择器获取所述数据包处理信号中的使能选择信息作为第三输入信号；
根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号。
21.根据权利要求20所述的装置，其特征在于，所述处理器在实现根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号时，用于实现：
若所述图像数据包为VOPB数据包，所述数据类型信息对应的第一输入信号为边带数据包类型，所述目标类型信息对应的第二输入信号为有效像素数据包类型，所述使能选择信息对应的第三输入信号为高电平信号或低电平信号；
根据所述第三输入信号的高电平信号或低电平信号，将所述VOPB数据包选择为第一输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为边带数据包类型，或，将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型。
22.根据权利要求21所述的装置，其特征在于，所述处理器在实现将所述VOPB数据包选择为第一输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为边带数据包类型，或，将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型，之后用于实现：
将边带数据包类型的所述VOPB数据包采用边带数据处理模块进行处理，以将所述VOPB数据包按照边带数据包进行传输，其中，所述VOPB数据包中的dvpc信号表征为所述VOPB数据包中data信号所包含的字节个数；
或，将有效像素数据包类型的所述VOPB数据包采用有效像素数据处理模块进行处理，以将所述VOPB数据包按照有效像素数据包进行传输。
23.根据权利要求22所述的装置，其特征在于，所述处理器在实现将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型时，用于实现：
将所述第二输入信号对应的目标类型信息替换所述第一输入信号对应的数据类型信息；
将替换后的数据类型信息配置到所述VOPB数据包中原来所述第一输入信号对应的帧位置，并将所述替换后的数据类型信息配置成有效像素数据包的格式。
24.根据权利要求23所述的装置，其特征在于，所述处理器在实现将替换后的数据类型信息配置到所述VOPB数据包中原来所述第一输入信号对应的帧位置，并将所述替换后的数据类型信息配置成有效像素数据包的格式，之后用于实现：
将替换更新后的VOPB数据包中的dvpc信号更新表征为所述更新后的VOPB数据包中data信号所具有的像素个数。
25.根据权利要求20所述的装置，其特征在于，所述处理器在实现根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号时，用于实现：
若所述图像数据包为有效像素数据包，所述数据类型信息对应的第一输入信号为有效像素数据包类型，所述目标类型信息对应的第二输入信号为边带数据包类型，所述使能选择信息对应的第三输入信号为高电平信号或低电平信号；
根据所述第三输入信号的高电平信号或低电平信号，将所述有效像素数据包选择为第一输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为有效像素数据包类型，或，将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型。
26.根据权利要求25所述的装置，其特征在于，所述处理器在实现将所述有效像素数据包选择为第一输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为有效像素数据包类型，或，将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型，之后用于实现：
将有效像素数据包类型的所述有效像素数据包采用有效像素数据处理模块进行处理，以将所述有效像素数据包按照有效像素数据包进行传输，其中，所述有效像素数据包中的dvpc信号表征为所述有效像素数据包中data信号所包含的像素个数；
或，将边带数据包类型的所述有效像素数据包采用边带数据处理模块进行处理，以将所述有效像素数据包按照边带数据包进行传输。
27.根据权利要求26所述的装置，其特征在于，所述处理器在实现将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型时，用于实现：
将所述第二输入信号对应的目标类型信息配置到所述有效像素数据包中，并配置成边带数据包的格式。
28.根据权利要求27所述的装置，其特征在于，所述处理器在实现将所述第二输入信号对应的目标类型信息配置到所述有效像素数据包中，并配置成边带数据包的格式，之后用于实现：
将配置更新后的有效像素数据包中的dvpc信号更新表征为所述更新后的有效像素数据包中data信号所具有的字节个数。
29.根据权利要求20所述的装置，其特征在于，所述处理器在实现根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号时，用于实现：
判断所述目标输出信号对应的数据包类型，其中，所述第一输入信号和第二输入信号所指示的数据包类型互不相同；
若所述目标输出信号对应的数据包类型为有效像素数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过有效像素数据包的传输通道进行传输；
若所述目标输出信号对应的数据包类型为边带数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过边带数据包的传输通道进行传输。
30.根据权利要求29所述的装置，其特征在于，所述处理器在实现若所述目标输出信号对应的数据包类型为有效像素数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过有效像素数据包的传输通道进行传输时，用于实现：
将有效像素数据包类型或边带数据包类型的图像数据包发送给有效像素数据处理模块进行处理，再通过有效像素数据包的传输通道进行传输。
31.根据权利要求29所述的装置，其特征在于，所述处理器在实现若所述目标输出信号对应的数据包类型为边带数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过边带数据包的传输通道进行传输时，用于实现：
将有效像素数据包类型或边带数据包类型的图像数据包发送给边带数据处理模块进行处理，再通过边带数据包的传输通道进行传输。
32.根据权利要求20、29、30或31任一项所述的装置，其特征在于，所述处理器在实现采用多路选择器获取所述数据包处理信号中的目标类型信息作为第二输入信号，并采用多路选择器获取所述数据包处理信号中的使能选择信息作为第三输入信号时，用于实现：
通过寄存器组产生所述第二输入信号和所述第三输入信号。
33.一种图像数据传输方法，其特征在于，包括：
CSI控制器发送图像数据包；
数据接口转换装置从所述CSI控制器获取图像数据包；
数据接口转换装置判断是否获取到数据包处理信号；
若获取到数据包处理信号，数据接口转换装置根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式；
数据接口转换装置将所述图像数据包按所述目标数据格式所属的传输通道传输给图像数据处理装置。
34.根据权利要求33所述的方法，其特征在于，所述数据接口转换装置根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式，包括：
数据接口转换装置根据所述数据包处理信号将所述图像数据包从有效像素数据包的原数据格式改变到边带数据包的目标数据格式；
和/或，数据接口转换装置根据所述数据包处理信号将所述图像数据包从边带数据包的原数据格式改变到有效像素数据包的目标数据格式。
35.根据权利要求34所述的方法，其特征在于，所述数据接口转换装置根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式，包括：
数据接口转换装置采用多路选择器获取所述图像数据包的数据类型信息、并获取所述数据包处理信号，以根据所述数据类型信息和所述数据包处理信号改变或维持所述图像数据包的原数据格式。
36.根据权利要求35所述的方法，其特征在于，所述数据接口转换装置采用多路选择器获取所述图像数据包的数据类型信息、并获取所述数据包处理信号，包括：
数据接口转换装置采用多路选择器获取所述图像数据包的数据类型信息作为第一输入信号；
数据接口转换装置采用多路选择器获取所述数据包处理信号中的目标类型信息作为第二输入信号，并采用多路选择器获取所述数据包处理信号中的使能选择信息作为第三输入信号；
数据接口转换装置根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号。
37.根据权利要求36所述的方法，其特征在于，所述数据接口转换装置根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号，包括：
若所述图像数据包为VOPB数据包，所述数据类型信息对应的第一输入信号为边带数据包类型，所述目标类型信息对应的第二输入信号为有效像素数据包类型，所述使能选择信息对应的第三输入信号为高电平信号或低电平信号；
数据接口转换装置根据所述第三输入信号的高电平信号或低电平信号，将所述VOPB数据包选择为第一输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为边带数据包类型，或，将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型。
38.根据权利要求37所述的方法，其特征在于，所述将所述VOPB数据包选择为第一输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为边带数据包类型，或，将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型，之后包括：
数据接口转换装置将边带数据包类型的所述VOPB数据包采用边带数据处理模块进行处理，以将所述VOPB数据包按照边带数据包进行传输，其中，所述VOPB数据包中的dvpc信号表征为所述VOPB数据包中data信号所包含的字节个数；
或，数据接口转换装置将有效像素数据包类型的所述VOPB数据包采用有效像素数据处理模块进行处理，以将所述VOPB数据包按照有效像素数据包进行传输。
39.根据权利要求38所述的方法，其特征在于，所述将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型，包括：
数据接口转换装置将所述第二输入信号对应的目标类型信息替换所述第一输入信号对应的数据类型信息；
数据接口转换装置将替换后的数据类型信息配置到所述VOPB数据包中原来所述第一输入信号对应的帧位置，并将所述替换后的数据类型信息配置成有效像素数据包的格式。
40.根据权利要求39所述的方法，其特征在于，所述将替换后的数据类型信息配置到所述VOPB数据包中原来所述第一输入信号对应的帧位置，并将所述替换后的数据类型信息配置成有效像素数据包的格式，之后包括：
数据接口转换装置将替换更新后的VOPB数据包中的dvpc信号更新表征为所述更新后的VOPB数据包中data信号所具有的像素个数。
41.根据权利要求36所述的方法，其特征在于，所述根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号，包括：
若所述图像数据包为有效像素数据包，所述数据类型信息对应的第一输入信号为有效像素数据包类型，所述目标类型信息对应的第二输入信号为边带数据包类型，所述使能选择信息对应的第三输入信号为高电平信号或低电平信号；
数据接口转换装置根据所述第三输入信号的高电平信号或低电平信号，将所述有效像素数据包选择为第一输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为有效像素数据包类型，或，将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型。
42.根据权利要求41所述的方法，其特征在于，所述将所述有效像素数据包选择为第一输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为有效像素数据包类型，或，将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型，之后包括：
数据接口转换装置将有效像素数据包类型的所述有效像素数据包采用有效像素数据处理模块进行处理，以将所述有效像素数据包按照有效像素数据包进行传输，其中，所述有效像素数据包中的dvpc信号表征为所述有效像素数据包中data信号所包含的像素个数；
或，数据接口转换装置将边带数据包类型的所述有效像素数据包采用边带数据处理模块进行处理，以将所述有效像素数据包按照边带数据包进行传输。
43.根据权利要求42所述的方法，其特征在于，所述将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型，包括：
数据接口转换装置将所述第二输入信号对应的目标类型信息配置到所述有效像素数据包中，并配置成边带数据包的格式。
44.根据权利要求43所述的方法，其特征在于，所述将所述第二输入信号对应的目标类型信息配置到所述有效像素数据包中，并配置成边带数据包的格式，之后包括：
数据接口转换装置将配置更新后的有效像素数据包中的dvpc信号更新表征为所述更新后的有效像素数据包中data信号所具有的字节个数。
45.根据权利要求36所述的方法，其特征在于，所述根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号，包括：
数据接口转换装置判断所述目标输出信号对应的数据包类型，其中，所述第一输入信号和第二输入信号所指示的数据包类型互不相同；
若所述目标输出信号对应的数据包类型为有效像素数据包类型，数据接口转换装置将有效像素数据包类型或边带数据包类型的图像数据包通过有效像素数据包的传输通道进行传输；
若所述目标输出信号对应的数据包类型为边带数据包类型，数据接口转换装置将有效像素数据包类型或边带数据包类型的图像数据包通过边带数据包的传输通道进行传输。
46.根据权利要求45所述的方法，其特征在于，所述若所述目标输出信号对应的数据包类型为有效像素数据包类型，数据接口转换装置将有效像素数据包类型或边带数据包类型的图像数据包通过有效像素数据包的传输通道进行传输，包括：
数据接口转换装置将有效像素数据包类型或边带数据包类型的图像数据包发送给有效像素数据处理模块进行处理，再通过有效像素数据包的传输通道进行传输。
47.根据权利要求45所述的方法，其特征在于，所述若所述目标输出信号对应的数据包类型为边带数据包类型，数据接口转换装置将有效像素数据包类型或边带数据包类型的图像数据包通过边带数据包的传输通道进行传输，包括：
数据接口转换装置将有效像素数据包类型或边带数据包类型的图像数据包发送给边带数据处理模块进行处理，再通过边带数据包的传输通道进行传输。
48.根据权利要求36、45、46或47任一项所述的方法，其特征在于，所述采用多路选择器获取所述数据包处理信号中的目标类型信息作为第二输入信号，并采用多路选择器获取所述数据包处理信号中的使能选择信息作为第三输入信号，包括：
数据接口转换装置通过寄存器组产生所述第二输入信号和所述第三输入信号。
49.一种图像数据传输装置，其特征在于，包括CSI控制器、数据接口转换装置和图像数据处理装置；
所述CSI控制器发送图像数据包；
所述数据接口转换装置包括存储器和处理器；
所述存储器用于存储计算机程序；
所述处理器，用于执行所述计算机程序并在执行所述计算机程序时，实现如下步骤：
从所述CSI控制器获取图像数据包；
判断是否获取到数据包处理信号；
若获取到数据包处理信号，根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式；
将所述图像数据包按所述目标数据格式所属的传输通道传输给所述图像数据处理装置。
50.根据权利要求49所述的装置，其特征在于，所述处理器在实现根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式时，用于实现：
根据所述数据包处理信号将所述图像数据包从有效像素数据包的原数据格式改变到边带数据包的目标数据格式；
和/或，根据所述数据包处理信号将所述图像数据包从边带数据包的原数据格式改变到有效像素数据包的目标数据格式。
51.根据权利要求50所述的装置，其特征在于，所述处理器在实现根据所述数据包处理信号改变所述图像数据包的原数据格式到目标数据格式时，用于实现：
采用多路选择器获取所述图像数据包的数据类型信息、并获取所述数据包处理信号，以根据所述数据类型信息和所述数据包处理信号改变或维持所述图像数据包的原数据格式。
52.根据权利要求51所述的装置，其特征在于，所述处理器在实现采用多路选择器获取所述图像数据包的数据类型信息、并获取所述数据包处理信号时，用于实现：
采用多路选择器获取所述图像数据包的数据类型信息作为第一输入信号；
采用多路选择器获取所述数据包处理信号中的目标类型信息作为第二输入信号，并采用多路选择器获取所述数据包处理信号中的使能选择信息作为第三输入信号；
根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号。
53.根据权利要求52所述的装置，其特征在于，所述处理器在实现根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号时，用于实现：
若所述图像数据包为VOPB数据包，所述数据类型信息对应的第一输入信号为边带数据包类型，所述目标类型信息对应的第二输入信号为有效像素数据包类型，所述使能选择信息对应的第三输入信号为高电平信号或低电平信号；
根据所述第三输入信号的高电平信号或低电平信号，将所述VOPB数据包选择为第一输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为边带数据包类型，或，将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型。
54.根据权利要求53所述的装置，其特征在于，所述处理器在实现将所述VOPB数据包选择为第一输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为边带数据包类型，或，将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型，之后用于实现：
将边带数据包类型的所述VOPB数据包采用边带数据处理模块进行处理，以将所述VOPB数据包按照边带数据包进行传输，其中，所述VOPB数据包中的dvpc信号表征为所述VOPB数据包中data信号所包含的字节个数；
或，将有效像素数据包类型的所述VOPB数据包采用有效像素数据处理模块进行处理，以将所述VOPB数据包按照有效像素数据包进行传输。
55.根据权利要求54所述的装置，其特征在于，所述处理器在实现将所述VOPB数据包选择为第二输入信号作为目标输出信号，使得所述VOPB数据包的数据类型信息为有效像素数据包类型时，用于实现：
将所述第二输入信号对应的目标类型信息替换所述第一输入信号对应的数据类型信息；
将替换后的数据类型信息配置到所述VOPB数据包中原来所述第一输入信号对应的帧位置，并将所述替换后的数据类型信息配置成有效像素数据包的格式。
56.根据权利要求55所述的装置，其特征在于，所述处理器在实现将替换后的数据类型信息配置到所述VOPB数据包中原来所述第一输入信号对应的帧位置，并将所述替换后的数据类型信息配置成有效像素数据包的格式，之后用于实现：
将替换更新后的VOPB数据包中的dvpc信号更新表征为所述更新后的VOPB数据包中data信号所具有的像素个数。
57.根据权利要求52所述的装置，其特征在于，所述处理器在实现根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号时，用于实现：
若所述图像数据包为有效像素数据包，所述数据类型信息对应的第一输入信号为有效像素数据包类型，所述目标类型信息对应的第二输入信号为边带数据包类型，所述使能选择信息对应的第三输入信号为高电平信号或低电平信号；
根据所述第三输入信号的高电平信号或低电平信号，将所述有效像素数据包选择为第一输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为有效像素数据包类型，或，将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型。
58.根据权利要求57所述的装置，其特征在于，所述处理器在实现将所述有效像素数据包选择为第一输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为有效像素数据包类型，或，将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型，之后用于实现：
将有效像素数据包类型的所述有效像素数据包采用有效像素数据处理模块进行处理，以将所述有效像素数据包按照有效像素数据包进行传输，其中，所述有效像素数据包中的dvpc信号表征为所述有效像素数据包中data信号所包含的像素个数；
或，将边带数据包类型的所述有效像素数据包采用边带数据处理模块进行处理，以将所述有效像素数据包按照边带数据包进行传输。
59.根据权利要求58所述的装置，其特征在于，所述处理器在实现将所述有效像素数据包选择为第二输入信号作为目标输出信号，使得所述有效像素数据包的数据类型信息为边带数据包类型时，用于实现：
将所述第二输入信号对应的目标类型信息配置到所述有效像素数据包中，并配置成边带数据包的格式。
60.根据权利要求59所述的装置，其特征在于，所述处理器在实现将所述第二输入信号对应的目标类型信息配置到所述有效像素数据包中，并配置成边带数据包的格式，之后用于实现：
将配置更新后的有效像素数据包中的dvpc信号更新表征为所述更新后的有效像素数据包中data信号所具有的字节个数。
61.根据权利要求52所述的装置，其特征在于，所述处理器在实现根据所述第三输入信号确认选择所述第一输入信号或所述第二输入信号作为目标输出信号时，用于实现：
判断所述目标输出信号对应的数据包类型，其中，所述第一输入信号和第二输入信号所指示的数据包类型互不相同；
若所述目标输出信号对应的数据包类型为有效像素数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过有效像素数据包的传输通道进行传输；
若所述目标输出信号对应的数据包类型为边带数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过边带数据包的传输通道进行传输。
62.根据权利要求61所述的装置，其特征在于，所述处理器在实现若所述目标输出信号对应的数据包类型为有效像素数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过有效像素数据包的传输通道进行传输时，用于实现：
将有效像素数据包类型或边带数据包类型的图像数据包发送给有效像素数据处理模块进行处理，再通过有效像素数据包的传输通道进行传输。
63.根据权利要求61所述的装置，其特征在于，所述处理器在实现若所述目标输出信号对应的数据包类型为边带数据包类型，将有效像素数据包类型或边带数据包类型的图像数据包通过边带数据包的传输通道进行传输时，用于实现：
将有效像素数据包类型或边带数据包类型的图像数据包发送给边带数据处理模块进行处理，再通过边带数据包的传输通道进行传输。
64.根据权利要求52、61、62或63任一项所述的装置，其特征在于，所述处理器在实现采用多路选择器获取所述数据包处理信号中的目标类型信息作为第二输入信号，并采用多路选择器获取所述数据包处理信号中的使能选择信息作为第三输入信号时，用于实现：
通过寄存器组产生所述第二输入信号和所述第三输入信号。
65.根据权利要求49所述的装置，其特征在于，所述图像数据处理装置为ISP模块。
66.根据权利要求50所述的装置，其特征在于，所述边带数据包包括VOPB数据包和EMBED数据包。
67.根据权利要求50所述的装置，其特征在于，所述有效像素数据包的颜色格式包括RAW8格式和RAW10格式。
68.根据权利要求60或63所述的装置，其特征在于，所述处理器将所述有效像素数据包通过边带数据包的传输通道传输给所述图像数据处理装置后，所述图像数据处理装置获取所述有效像素数据包的原始字节数据，以在所述有效像素数据包发生错误时，对错误的有效像素数据进行定位。
CN201980012305.5A 2019-04-22 2019-04-22 图像数据处理方法、传输方法、传输装置及数据接口转换装置 Pending CN111713097A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2019/083701 WO2020215182A1 (zh) 2019-04-22 2019-04-22 图像数据处理方法、传输方法、传输装置及数据接口转换装置

Publications (1)

Publication Number Publication Date
CN111713097A true CN111713097A (zh) 2020-09-25

Family

ID=72536813

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980012305.5A Pending CN111713097A (zh) 2019-04-22 2019-04-22 图像数据处理方法、传输方法、传输装置及数据接口转换装置

Country Status (2)

Country Link
CN (1) CN111713097A (zh)
WO (1) WO2020215182A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114415951A (zh) * 2022-01-04 2022-04-29 平头哥(杭州)半导体有限公司 图像数据访存单元、方法、加速单元及电子设备
CN114791840A (zh) * 2021-01-26 2022-07-26 武汉斗鱼网络科技有限公司 数据组装方法、装置、电子设备及介质
WO2022193914A1 (zh) * 2021-03-17 2022-09-22 上海哔哩哔哩科技有限公司 用于样点自适应补偿的方法及装置、设备和介质
CN115474061A (zh) * 2021-06-10 2022-12-13 广州视源电子科技股份有限公司 图像数据的传输方法、装置、终端设备和存储介质

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114245030A (zh) * 2021-12-20 2022-03-25 北京镁伽科技有限公司 上位机显示测试图像的方法、装置及图像信号发生器

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101242408A (zh) * 2008-01-18 2008-08-13 南京邮电大学 一种开放式多源数据包捕获器构造方法
US20080231732A1 (en) * 2007-03-20 2008-09-25 Sony Corporation Streaking correction signal generating circuit, streaking correction signal generating method, program, streaking correcting circuit, and imaging device
CN102404195A (zh) * 2011-09-02 2012-04-04 华为技术有限公司 数据传输方法、网关和网络系统
CN103237208A (zh) * 2013-03-29 2013-08-07 苏州皓泰视频技术有限公司 一种基于fpga的高清视频输出方法
CN105306380A (zh) * 2014-07-17 2016-02-03 炬力集成电路设计有限公司 数据传输方法及其装置和应用
CN105450965A (zh) * 2015-12-09 2016-03-30 北京小鸟看看科技有限公司 一种视频转换方法、装置和系统
CN107077304A (zh) * 2016-09-18 2017-08-18 深圳市大疆创新科技有限公司 数据转换设备、芯片、方法、装置及影像系统
CN108259802A (zh) * 2017-12-28 2018-07-06 曾仲林 一种接口转换电路、显示方法及电子设备
CN207968461U (zh) * 2017-12-12 2018-10-12 成都元景科技有限公司 温度传感器输出数据格式转换电路
CN109214196A (zh) * 2018-08-13 2019-01-15 阿里巴巴集团控股有限公司 一种数据交互方法、装置及设备

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005080049A (ja) * 2003-09-02 2005-03-24 Nikon Gijutsu Kobo:Kk デジタルカメラ
JP2006005491A (ja) * 2004-06-15 2006-01-05 Canon Inc 通信装置及び制御方法
JP2009272695A (ja) * 2008-04-30 2009-11-19 Nippon Telegr & Teleph Corp <Ntt> コンテンツ情報送信装置
JP2012253274A (ja) * 2011-06-06 2012-12-20 Hitachi High-Technologies Corp 検査装置のデータ分配方法及び検査装置
CN206162501U (zh) * 2016-09-18 2017-05-10 深圳市大疆创新科技有限公司 数据转换设备、芯片、及影像系统
US10846258B2 (en) * 2016-09-30 2020-11-24 Intel Corporation Voltage modulated control lane
CN108462727A (zh) * 2017-02-17 2018-08-28 北京视联动力国际信息技术有限公司 一种数据传输方法和装置
CN107509033B (zh) * 2017-09-20 2020-12-01 中国科学院长春光学精密机械与物理研究所 一种遥感相机图像实时采集处理系统
CN108781218A (zh) * 2017-11-07 2018-11-09 深圳市大疆创新科技有限公司 数据处理方法、数据发送端、接收端和通信系统

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080231732A1 (en) * 2007-03-20 2008-09-25 Sony Corporation Streaking correction signal generating circuit, streaking correction signal generating method, program, streaking correcting circuit, and imaging device
CN101242408A (zh) * 2008-01-18 2008-08-13 南京邮电大学 一种开放式多源数据包捕获器构造方法
CN102404195A (zh) * 2011-09-02 2012-04-04 华为技术有限公司 数据传输方法、网关和网络系统
CN103237208A (zh) * 2013-03-29 2013-08-07 苏州皓泰视频技术有限公司 一种基于fpga的高清视频输出方法
CN105306380A (zh) * 2014-07-17 2016-02-03 炬力集成电路设计有限公司 数据传输方法及其装置和应用
CN105450965A (zh) * 2015-12-09 2016-03-30 北京小鸟看看科技有限公司 一种视频转换方法、装置和系统
CN107077304A (zh) * 2016-09-18 2017-08-18 深圳市大疆创新科技有限公司 数据转换设备、芯片、方法、装置及影像系统
CN207968461U (zh) * 2017-12-12 2018-10-12 成都元景科技有限公司 温度传感器输出数据格式转换电路
CN108259802A (zh) * 2017-12-28 2018-07-06 曾仲林 一种接口转换电路、显示方法及电子设备
CN109214196A (zh) * 2018-08-13 2019-01-15 阿里巴巴集团控股有限公司 一种数据交互方法、装置及设备

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114791840A (zh) * 2021-01-26 2022-07-26 武汉斗鱼网络科技有限公司 数据组装方法、装置、电子设备及介质
CN114791840B (zh) * 2021-01-26 2023-09-22 武汉斗鱼网络科技有限公司 数据组装方法、装置、电子设备及介质
WO2022193914A1 (zh) * 2021-03-17 2022-09-22 上海哔哩哔哩科技有限公司 用于样点自适应补偿的方法及装置、设备和介质
CN115474061A (zh) * 2021-06-10 2022-12-13 广州视源电子科技股份有限公司 图像数据的传输方法、装置、终端设备和存储介质
CN114415951A (zh) * 2022-01-04 2022-04-29 平头哥(杭州)半导体有限公司 图像数据访存单元、方法、加速单元及电子设备
CN114415951B (zh) * 2022-01-04 2024-04-05 杭州中天微系统有限公司 图像数据访存单元、方法、加速单元及电子设备

Also Published As

Publication number Publication date
WO2020215182A1 (zh) 2020-10-29

Similar Documents

Publication Publication Date Title
CN111713097A (zh) 图像数据处理方法、传输方法、传输装置及数据接口转换装置
CN103003870B (zh) 图像显示系统、图像处理设备及其控制方法
KR100918532B1 (ko) 알파 채널 인식 환경에서 비알파 채널 영상 데이터를 이용하는 코프로세싱 장치 및 컴퓨팅 장치
CN109451006A (zh) 一种数据传输方法、装置、服务器及计算机存储介质
CN110913262B (zh) 图像叠加方法和装置
US11647150B2 (en) Image capturing apparatus, control method, and computer-readable storage medium
EP2661720A2 (en) Logo recognition
CN112004077B (zh) 屏下摄像头的校准方法、装置、存储介质与电子设备
CN110166765A (zh) 一种花屏检测方法、电子设备及可读存储介质
EP4084423A1 (en) Pcie-based data transmission method and apparatus
CN110581988B (zh) 一种信号质量检测方法、装置、电子设备及存储介质
US20210306591A1 (en) Image capturing apparatus, device, control method, and computer-readable storage medium
CN109324967A (zh) 应用程序弹窗控件测试的方法、装置及终端设备
WO2022062148A1 (zh) 一种以二维码设定led显示屏连线的方法、装置和系统
CN114915801A (zh) 多通道视频信号同步输出方法及系统
US11477359B2 (en) Image capturing apparatus, control method, and computer-readable storage medium
CN112270639B (zh) 一种图像处理方法、图像处理装置以及存储介质
US11348213B2 (en) Multistage process model training
KR102328151B1 (ko) 제로 레이턴시를 위한 데이터 전송 장치 및 방법
CN117499559A (zh) 虚拟拍摄系统、设备配置方法、装置、设备及存储介质
US11647272B2 (en) Image capturing apparatus, control method, and computer-readable storage medium
CN113988649B (zh) 显示屏的显示功能测试方法及相关装置
JP5223762B2 (ja) 画像処理装置及び画像処理方法
CN110830760B (zh) 一种安全网络数据交互系统及方法
KR20050035856A (ko) 위성 기상영상 데이터 비교 및 분석 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
AD01 Patent right deemed abandoned

Effective date of abandoning: 20220311

AD01 Patent right deemed abandoned