CN112699145B - 一种数据处理系统 - Google Patents
一种数据处理系统 Download PDFInfo
- Publication number
- CN112699145B CN112699145B CN201911014220.9A CN201911014220A CN112699145B CN 112699145 B CN112699145 B CN 112699145B CN 201911014220 A CN201911014220 A CN 201911014220A CN 112699145 B CN112699145 B CN 112699145B
- Authority
- CN
- China
- Prior art keywords
- module
- mode
- data
- data processing
- control module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims abstract description 142
- 230000011664 signaling Effects 0.000 claims abstract description 84
- 230000000977 initiatory effect Effects 0.000 claims abstract description 6
- 230000003993 interaction Effects 0.000 claims description 31
- 238000000034 method Methods 0.000 claims description 27
- 230000008569 process Effects 0.000 claims description 25
- 238000010586 diagram Methods 0.000 claims description 15
- 230000002093 peripheral effect Effects 0.000 claims description 11
- 238000012790 confirmation Methods 0.000 claims description 7
- 230000005540 biological transmission Effects 0.000 abstract description 17
- 238000009825 accumulation Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000006854 communication Effects 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 238000007781 pre-processing Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 230000009191 jumping Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 101000741965 Homo sapiens Inactive tyrosine-protein kinase PRAG1 Proteins 0.000 description 1
- 102100038659 Inactive tyrosine-protein kinase PRAG1 Human genes 0.000 description 1
- YTAHJIFKAKIKAV-XNMGPUDCSA-N [(1R)-3-morpholin-4-yl-1-phenylpropyl] N-[(3S)-2-oxo-5-phenyl-1,3-dihydro-1,4-benzodiazepin-3-yl]carbamate Chemical compound O=C1[C@H](N=C(C2=C(N1)C=CC=C2)C1=CC=CC=C1)NC(O[C@H](CCN1CCOCC1)C1=CC=CC=C1)=O YTAHJIFKAKIKAV-XNMGPUDCSA-N 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000008713 feedback mechanism Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000003999 initiator Substances 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24568—Data stream processing; Continuous queries
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Communication Control (AREA)
Abstract
本发明公开了一种数据处理系统,包括:第一控制模块、第二控制模块和倾斜处理模块,所述第二控制模块分别与所述第一控制模块和所述倾斜处理模块连接;所述第一控制模块用于发起倾斜数据处理请求;所述第二控制模块用于根据所述倾斜数据处理请求生成数据处理信令,并将所述数据处理信令按照预设消息结构发送至所述倾斜处理模块,其中,所述预设消息结构包括通道数指示字段、倾斜方式指示字段和填充类型指示字段;所述倾斜处理模块用于根据所述数据处理信令重构数据流,并针对所述数据处理信令生成第一反馈信息。上述技术方案通过重构均衡的数据流提高数据处理的效率,保证数据流传输的稳定性。
Description
技术领域
本发明实施例涉及数据通信技术领域,尤其涉及一种数据处理系统。
背景技术
视频或图像处理系统在设备检验/检测、安全监控、工业视觉以及人工智能等众多的领域中得到日益广泛的应用。随着视频或图像处理系统分辨率的不断提升,视频显示的终端设备上使用的通道(Lane)数增多,每个Lane上的链路速率(Link Rate,LR)也在不断提高,这对视频或图像处理系统的硬件平台的实时性、协调性等的要求越来越高。
在数据处理量大增的场景下,一些Lane上的数据过于集中,不同Lane之间的数据流传输不均衡,严重影响数据并行处理的效率,降低系统的稳定性。
发明内容
本发明提供了一种数据处理系统,通过重构均衡的数据流提高数据处理的效率,保证数据流传输的稳定性。
本发明实施例提供了一种数据处理系统,包括:第一控制模块、第二控制模块和倾斜处理模块,所述第二控制模块分别与所述第一控制模块和所述倾斜处理模块连接;所述第一控制模块用于发起倾斜数据处理请求;所述第二控制模块用于根据所述倾斜数据处理请求生成数据处理信令,并将所述数据处理信令按照预设消息结构发送至所述倾斜处理模块,其中,所述预设消息结构包括通道数指示字段、倾斜方式指示字段和填充类型指示字段;所述倾斜处理模块用于根据所述数据处理信令重构数据流,并针对所述数据处理信令生成第一反馈信息。
进一步的,所述第二控制模块,包括:
分流子模块,用于确定所述通道数指示字段并根据所述通道数指示字段所指示的最大通道数确定数据流的数量;
指示子模块,用于确定数据流的倾斜方式和填充类型,并确定所述倾斜方式指示字段和填充类型指示字段。
进一步的,所述倾斜方式包括第一方式和第二方式,其中,所述第一方式为按照设定时延分别处理每个数据流,所述第二方式为同步处理每个数据流;
所述填充类型包括零数据填充、伪造数据填充和预设数据填充。
进一步的,所述指示子模块包括:倾斜方式指示单元;
所述倾斜方式指示单元用于:
若最大通道数小于预设数量,则确定数据流的倾斜方式为第一方式,否则,确定数据流的倾斜方式为第二方式;或者,
若链路速率大于预设速率,则确定数据流的倾斜方式为第一方式,否则,确定数据流的倾斜方式为第二方式。
进一步的,所述预设消息结构还包括:链路状态指示字段,所述链路状态指示字段用于指示误码率和眼图性能;
所述指示子模块包括:填充类型指示单元,用于若误码率低于预设值且眼图性能符合预设条件,则确定数据流的填充类型为零数据填充;否则,确定数据流的填充类型为伪造数据填充或预设数据填充。
进一步的,所述预设消息结构,还包括:主从模块定义字段和反馈字段;
所述主从模块定义字段用于定义所述倾斜处理模块中的主模块和从模块;
所述反馈字段用于定义数据处理信令交互完成后的模块状态,所述模块状态包括确认状态和非确认状态。
进一步的,所述预设消息结构,还包括:调整方式指示字段;
所述调整方式指示字段用于定义倾斜方式和填充类型的调整方式,所述调整方式包括:指令调整和根据优先规则自动调整,所述优先规则包括第一优先规则和第二优先规则;
若所述调整方式指示字段定义的调整方式为指令调整,则所述倾斜方式指示字段和填充类型指示字段根据接收到的调整指令确定。
进一步的,所述倾斜方式指示单元还用于:
根据第一优先规则调整数据流的倾斜方式,所述第一优先规则包括:所述第二方式的优先级高于所述第一方式的优先级。
进一步的,所述填充类型指示单元,还用于:
根据第二优先规则调整数据流的填充类型,所述第二优先规则包括:所述零数据填充的优先级高于所述伪造数据填充的优先级,且所述伪造数据填充的优先级高于所述预设数据填充的优先级。
进一步的,所述预设消息结构还包括:校验字段;
所述校验字段用于按照预设规范校验所述数据处理信令,并在校验失败时指示数据处理信令交互失败。
本发明实施例提供了一种数据处理系统,包括:第一控制模块、第二控制模块和倾斜处理模块,所述第二控制模块分别与所述第一控制模块和所述倾斜处理模块连接;所述第一控制模块用于发起倾斜数据处理请求;所述第二控制模块用于根据所述倾斜数据处理请求生成数据处理信令,并将所述数据处理信令按照预设消息结构发送至所述倾斜处理模块,其中,所述预设消息结构包括通道数指示字段、倾斜方式指示字段和填充类型指示字段;所述倾斜处理模块用于根据所述数据处理信令重构数据流,并针对所述数据处理信令生成第一反馈信息。上述技术方案通过重构均衡的数据流提高数据处理的效率,保证数据流传输的稳定性。
附图说明
图1为本发明实施例一提供的一种数据处理系统的结构示意图;
图2为本发明实施例二提供的一种数据处理系统的结构示意图;
图3为本发明实施例二提供的数据处理系统的信令交互的示意图;
图4为本发明实施例二提供的一种用于实现数据处理的视频处理系统的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种数据处理系统的结构示意图。本实施例适用于视频或图像处理系统中,在出现知识产权(Intellectual Property,IP)核参数改变、视频流位宽度、显示模式、控制寄存器特征位等变更的情况下,对于不同的数据流重新构建倾斜(Skew)处理的情况。
具体的,如图1所示,所述系统包括:第一控制模块10、第二控制模块20和倾斜处理模块30,第二控制模块20分别与第一控制模块10和倾斜处理模块30相连;第一控制模块10用于发起倾斜数据处理请求;第二控制模块20用于根据倾斜数据处理请求生成数据处理信令并按照预设消息结构发送至倾斜处理模块30;倾斜处理模块30用于根据数据处理信令重构数据流,并针对数据处理信令生成第一反馈信息,其中,预设消息结构包括通道数指示字段、倾斜方式指示字段和填充类型指示字段。
通道数指示字段用于指示数据流重构后需要支持的Lane数,例如,N Lanes,其中,N为正整数,代表物理层所能支持的Lane数为N。在数据处理过程中根据所支持的最大Lane数进行重构,这种情况下,能够兼容小于所支持的最大Lane数的所有Lane,使硬件平台能够适应Lane数。在通道数指示字段指示的Lane数的基础上,可进一步指示每个Lane上数据流的倾斜方式和填充类型,其中,倾斜方式可以包括时延累积和倾斜重用,时延累积是指对于不同的数据流采用定长时延的方法,或者采用加权累积的方式进行处理;倾斜重用是指对于不同的数据流,在充分考虑不同Lane之间数据均衡及干扰的情况下,将不同的数据流重用相同的倾斜方式。填充类型可以包括:零数据填充、伪造(Dummy)数据填充、其他数据(Fill Data)填充等,通过根据不同的Lane数和实际物理链路情况填充不同类型的数据,通过填充空闲数据位置构建完整的Skew数据流,有效减小不同Lane之间数据的干扰,降低数据传输链路上的数据不均衡。
倾斜处理模块30根据第二控制模块20的预设消息结构的数据处理信令的指示,可以对数据流执行分流、填充等操作,实现重构数据流,避免由于个别Lane上数据过于集中引起的Lane之间数据传输的不均衡,降低数据流之间的干扰,增强不同的数据流传输的稳定性和健壮性(Robustness)。
进一步的,倾斜处理模块30包括以下中的至少一种:外部存储模块、快速存储模块、外设模块以及视频接口物理层实现模块。其中,外部存储模块用于存储所述系统中需要显示的视频或图像的原始数据流。示例性的,外部存储模块可采用Flash存储器(如NandFlash,Nand闪存)、固态驱动器(Solid State Drive,SSD)等存储介质。快速存储模块是在第二控制模块20内部需要进行大量数据处理、低往返时延(latency)的信令执行的情况下,为了进一步减小时延而用于暂时存储数据的模块,可采用快速、低时延的物理器件,例如,双倍速率同步动态随机存储器((Double Data Rate SDRAM,DDR)等。外设模块可以为通用型输入输出(General-purpose input/output,GPIO)、通用异步收发传输器(UniversalAsynchronous Receiver/Transmitter,UART)、通用串行总线(Universal Serial Bus,USB)、网口等。视频接口物理层实现模块用于驱动显示模块的物理层实现,例如,显示接口(Display Port,DP)的收发传输器(Transmitter/Receiver,TX/RX)的端口物理层(Physical Layer,PHY),移动产业处理器接口(Mobile Industry Processor Interface,MIPI)的串行显示接口的端口物理层(Display Serial Interface Physical Layer,D-PHY)等。
进一步的,第一控制模块10为嵌入式控制模块或FPGA模块;对应的,第二控制模块20为FPGA模块或嵌入式控制模块。
具体的,嵌入式控制模块可以采用任意嵌入式芯片与系统,用于倾斜数据处理请求,还可以用于请求读/写寄存器数据、请求启用/关闭视频显示单元或模块、请求外设控制或请求修改视频显示模块的参数设置等。FPGA模块用于实现存储控制、外设控制、视频接口IP核实现等需要大量数据处理、低往返时延(latency)的操作的实施或执行。
本实施例的数据处理系统,通过第一控制模块发起倾斜数据处理请求,通过第二控制模块生成数据处理信令并按照预设消息结构指示给倾斜处理模块,倾斜处理模块根据第二控制模块的预设消息结构的数据处理信令,可以执行分流、填充等操作,实现重构数据流,避免由于个别Lane上数据过于集中引起的Lane之间数据传输的不均衡,降低数据流之间的干扰,增强不同的数据流传输的稳定性和健壮性(Robustness)。
实施例二
本实施例在上述实施例的基础上进行优化,对第二控制模块20与倾斜处理模块30的交互过程进行具体描述。本实施例适用于基于现场可编程门阵列(Field ProgrammableGate Array,FPGA)和嵌入式系统的视频图像处理系统,尤其涉及带有视频电子标准协会(Video Electronics Standards Association,VESA)的数字式视频接口标准(DisplayPort,DP)、移动产业处理器接口标准(Mobile Industry Processor Interface,MIPI)、高清多媒体接口标准(High Definition Multimedia Interface,HDMI)的视频图像处理系统。未在本实施例中详尽描述的技术细节可参见上述任意实施例。
图2为本发明实施例二提供的一种数据处理系统的结构示意图。如图2所示,第二控制模块20,包括:分流子模块21,用于确定通道数指示字段并根据通道数指示字段所指示的最大通道数确定数据流的数量;指示子模块22,用于确定数据流的倾斜方式和填充类型,并确定倾斜方式指示字段和填充类型指示字段。
进一步的,倾斜方式包括第一方式和第二方式,其中,所述第一方式为按照设定时延分别处理每个数据流,所述第二方式为同步处理每个数据流;填充类型包括零数据填充、伪造数据填充和预设数据填充。
进一步的,指示子模块22包括:倾斜方式指示单元221;倾斜方式指示单元221用于:若最大通道数小于预设数量,则确定数据流的倾斜方式为第一方式,否则,确定数据流的倾斜方式为第二方式;或者,若链路速率大于预设速率,则确定数据流的倾斜方式为第一方式,否则,确定数据流的倾斜方式为第二方式。
进一步的,预设消息结构还包括:链路状态指示字段,所述链路状态指示字段用于指示误码率(Bit Error Rate,BER)和眼图性能;指示子模块22包括:填充类型指示单元222,用于若误码率低于预设值且眼图性能符合预设条件,则确定数据流的填充类型为零数据填充;否则,确定数据流的填充类型为伪造数据填充或预设数据填充。
具体的,在误码率低于预设值、实际测量的眼图性能符合预设条件,表明系统中的链路状态较好的情况向下,优先选择零数据填充的方式,降低填充复杂度;反之,在链路状态较差的情况下,选择伪造数据填充或其他数据填充的方式,虽然增加了填充复杂度,但能够进一步降低系统中数据传输的不均衡性,进而降低干扰,有效提高链路性能。
进一步的,预设消息结构,还包括:调整方式指示字段;调整方式指示字段用于定义倾斜方式和填充类型的调整方式,调整方式包括:指令调整和根据优先规则自动调整,优先规则包括第一优先规则和第二优先规则;若所述调整方式指示字段定义的调整方式为指令调整,则倾斜方式指示字段和填充类型指示字段根据接收到的调整指令确定。
具体的,第二控制模块20生成的数据处理信令向倾斜处理模块30指示了倾斜方式和填充类型,在确定倾斜方式和填充类型的过程中,可以根据实际使用的Lane数、链路速率、误码率和/或实际测量的眼图性能等参数自动调整,或者根据接收到的调整指令进行人工调整,在指令调整的情况下,倾斜方式指示字段和填充类型指示字段不起作用。
进一步的,倾斜方式指示单元221还用于:根据第一优先规则调整数据流的倾斜方式,第一优先规则包括:第二方式的优先级高于第一方式的优先级。
具体的,对于根据优先规则自动调整的情况,倾斜方式按照优先倾斜重用方式、其次是时延累积的顺序进行调整,以有效降低系统复杂度。
进一步的,填充类型指示单元222还用于:根据第二优先规则调整数据流的填充类型,第二优先规则包括:零数据填充的优先级高于伪造数据填充的优先级,且伪造数据填充的优先级高于预设数据填充的优先级。
具体的,对于根据优先规则自动调整的情况,填充类型按照优先零数据填充、其次伪造数据填充、再次为其他数据填充的顺序进行调整,以降低复杂度。
进一步的,预设消息结构,还包括:主从模块定义字段和反馈字段;主从模块定义字段用于定义所述倾斜处理模块中的主模块和从模块;反馈字段用于定义数据处理信令交互完成后的模块状态,模块状态包括确认状态和非确认状态。
具体的,主从模块定义字段用于定义倾斜处理模块30中的主模块和从模块。主模块与从模块是根据命令的发起方与接收方而定义的,不同的信令交互过程对应的各模块间主从关系可能不同。例如,嵌入式模块可以作为主模块发起数据处理信令,FPGA模块作为从模块来接收信令并执行;FPGA模块也可以作为主模块,向嵌入式模块发起数据处理信令,而嵌入式模块此时则为从模块。又如,第二控制模块20的数据处理信令由倾斜处理模块30中的主模块转发至从模块,由从模块完成数据流重构并向主模块反馈、主模块再向第二控制模块20反馈。上述示例中,数据处理信令以及第一反馈信息按照主从结构传输,而不会跃级传输,每一组具有主从关系的模块在各自的链路中进行信令的分层转发和交互,从而将系统的组织结构标准化,提高交互的可靠性和效率。反馈字段用于定义数据处理信令交互完成后的模块状态,所述模块状态包括ACK状态和NACK状态,完成信令交互的确认操作。
进一步的,预设消息结构还包括校验字段;校验字段用于按照预设规范校验所述数据处理信令,并在校验失败时指示数据处理信令交互失败,从而在信令传输信道质量无法保证的情况下对交互的信令及消息结构进行校验,保证所传输的信令及消息结构的质量。通过上述预设消息结构在各模块之间的交互建立了通信规范,只有在交互的信令符合预设规范的情况下,才能实现数据流重构。
进一步的,主模块用于接收第二控制模块按照预设消息结构发送的数据处理信令,其中,数据处理信令通过主模块转发至从模块;从模块用于根据数据处理信令重构数据流,针对数据处理信令生成第一反馈信息并将第一反馈信息发送至主模块。
在上述实施例的基础上,第二控制模块20还用于在接收到倾斜数据处理请求之前,将初始化信令发送至所述第一控制模块10和倾斜处理模块30中的主模块,以使主模块将初始化信令转发至从模块,使各模块初始化;第二控制模块20还用于接收倾斜处理模块30的主模块的第二反馈信息,第二反馈信息由主模块通过从模块获取,第二反馈信息用于指示从模块初始化完毕。主模块和从模块根据初始化信令中的主从模块定义字段确定。所述初始化信令按照主从关系逐层传递。所有从模块初始化完毕后会向主模块反馈第一反馈信息,直至第二控制模块20接收到第二反馈信息。
图3为本发明实施例二提供的一种数据处理系统的信令交互的示意图。如图3所示,信令交互过程具体为:
S1、FPGA模块将初始化信令发送至嵌入式控制模块。
具体的,FPGA模块根据视频或图像处理的硬件情况确定主从模块定义字段该字段能够兼容所有的模块并且能够对各模块进行唯一的标识;根据数据流重构的物理过程确定通道数指示字段、倾斜方式指示字段、填充类型指示字段、链路状态指示字段、调整方式指示字段、主从模块定义字段。可选的,还包括确定信令校验机制,并确定校验字段,当主/从模块在信令发送/接收时,首先根据信令校验机制确定要交互的信令是否符合要求,如果符合,则表明信令传输正确;否则,表明信令传输失败,将启动预先定义的重传或信令反馈机制。
S2、FPGA模块将初始化信令发送至倾斜处理模块30中的主模块。
需要说明的是,FPGA模块即为第二控制模块20,嵌入式控制模块即为第一控制模块10,S1与S2优选为同步进行。
S3、主模块将初始化信令转发至从模块。
S4、从模块准备完毕并向主模块反馈第二反馈信息。
S5、主模块向FPGA模块反馈第二反馈信息。
具体的,第二反馈信息用于表示从模块已按照初始化信令准备完毕,在之后的通信过程中可以识别对应的主模块发送来的预设消息结构的信令。
S6、嵌入式控制模块向FPGA模块发起倾斜数据处理请求。
S7、FPGA模块将基于倾斜数据处理请求生成的数据处理信令发送至主模块,
S8、主模块将数据处理信令转发至从模块。
S9、从模块重构数据流并向主模块反馈第一反馈信息。
S10、主模块向第二控制模块20反馈第一反馈信息。
具体的,主模块接收并确认信令反馈字段,并根据信令反馈字段的信息执行例如,重传、重置或者其他系统预先设定的操作,并向第二控制模块20反馈第一反馈信息,用于表示数据流重构的实施情况。
进一步的,主模块通过第一反馈信息将数据流重构实施情况反馈到FPGA模块,FPGA模块在接收到第一反馈信息之后,可以实施系统预先设定的过程,例如,重传、重试、等待等,以尽可能在本次交互过程中完成嵌入式控制模块发起的请求,以提高每次信令交互过程的实施效率。
S11、FPGA模块向嵌入式控制模块反馈数据流重构结果。
具体的,第一控制模块10每发起一次请求,第二控制模块20都会进行响应,多次尝试完成信令交互,直至成功为止。尝试过程中采取预先设置的策略,包括重传、重试、等待等。如果预先设置的策略全部失败,则向第一控制模块10反馈交互失败的信息。
上述信令交互过程中,第一控制模块10为嵌入式控制模块,第二控制模块20为FPGA模块,倾斜处理模块30包括外部存储模块、快速存储模块、外设模块以及视频接口物理层实现模块,FPGA内部还包括多个模块,这些模块之间,以及与外部相关模块之间都可能存在主从关系。
示例性的,重构数据流的过程如下:
a、第二控制模块根据系统的物理平台模块情况确定主/从模块定义字段,该字段能够兼容所有的模块并且能够对各模块进行唯一的识别;
b、第二控制模块确定Lane数指示字段并初始化;
c、第二控制模块确定链路状态指示字段并初始化;
d、第二控制模块确定调整方式指示字段并初始化;
e、第二控制模块确定倾斜方式指示字段并初始化;
f、第二控制模块确定填充类型指示字段并初始化;
g、第二控制模块按照预设消息结构向倾斜处理模块的从模块发送数据处理信令;
h、从模块读取Lane数指示字段并确定Lane数;
i、从模块读取调整方式指示字段,如果为指令调整方式,跳转到步骤j,否则,跳转到l;
j、从模块通过系统支持的方式输入并确定倾斜方式指示字段;
k、从模块通过系统支持的方式输入并确定填充类型指示字段;
l、从模块读取确定链路状态指示字段,并读取实际的链路状态信息;
m、第二控制模块根据链路状态信息及第一优先规则确定倾斜方式选择字段;
n、第二控制模块根据链路状态信息及第二优先规则确定填充类型指示字段;
o、从模块根据倾斜方式指示字段及填充类型指示字段重构数据流;
p、从模块向第二控制模块反馈信令反馈字段;
q、第二控制模块接收并确认信令反馈字段,确认完成数据流的数据倾斜Skew操作过程。
上述过程中,第二空控制模块与倾斜处理模块之间的信令交互按照主从模块的结构分级进行。
图4为本发明实施例二提供的一种用于数据流重构的视频处理系统的结构示意图。如图4所示,第一控制模块10可以为嵌入式控制模块,第二控制模块20可以为FPGA模块,物理层倾斜处理模块30可以包括外部存储模块、快速存储模块、外设模块、视频接口物理层实现模块等。其中,FPGA模块包括以下至少一种:总线交互模块、微控制单元(Microcontroller Unit,MCU)视频流预处理单元、视频数据流传输控制模块、时钟控制模块、嵌入式软核控制模块、总线控制器模块、视频图样处理模块、内部存储控制器模块、外设控制模块、显示时钟发生器模块、视频时序控制器模块、视频接口IP核模块。
示例性的,总线交互模块用于对所有与之相连的模块进行选择或决策等;MCU视频流预处理单元用于将从外部存储模块输入的视频数据流按照系统设定的格式与参数类型进行预处理和转换,以便于后续的处理;视频数据流传输控制模块用于控制经过数据流预处理和转换之后的数据流的时序与参数;时钟控制模块负责视频或图像处理过程中全局时钟的产生与控制;嵌入式软核控制模块是FPGA模块的控制核心,用于实现FPGA模块内部所有模块的时序控制、参数配置、物理过程实现等核心功能,可采用Xilinx的软和处理器(MicroBlaze)等;总线控制器模块用于对所有与总线交互模块相连的模块的控制;视频图样处理模块负责适应视频接口IP核模块对应的视频图像数据流的模式转换与时序控制;内部存储控制器模块用于实现对快速存储模块的控制,包括数据流的写入/读取、帧控制等;外设控制模块用于控制所有的外设模块,包括外设的启用/关闭、工作模式控制等;显示时钟发生器模块用于对所有与视频接口IP核模块、视频接口物理层实现模块的时序控制;视频时序控制器模块负责从视频图样处理模块输入的数据传输到视频接口IP核模块过程中的数据转换与时序控制等的处理。
需要说明的是,第二控制模块20为FPGA模块时,其内部还可包含具有主从关系的多个模块,此时,嵌入式软核控制模块为控制中心,其他模块受其控制,都是嵌入式软核控制模块的从模块,且其他模块之间还存在进一步的主从关系。
本发明实施例二的一种数据处理系统,在上述实施例的基础上进行优化,通过定义预设的消息结构建立起完善的信令交互机制,每一组具有主从关系的模块在各自的链路中进行信令的转发和交互,明确了各模块的交互结构和规范,实现主/从模块之间有组织的、精准的信令交互,在保证硬件系统与平台无缝、平滑无死机等情况下完成数据流重构,同时确保系统以事件驱动的前提下具有最小的有效系统时延,提高交互的可靠性和效率。倾斜处理模块根据数据处理信令的指示,在Lane数自适应及可扩展的应用场景下,对于不同的数据流进行重构,并对不同Lane上的数据进行重排,通过填充空闲数据位置的方式来构建完整的Skew数据流,减小不同Lane之间数据的干扰,从而增强不同的数据流传输的稳定性和健壮性。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。
Claims (10)
1.一种数据处理系统,其特征在于,包括:第一控制模块、第二控制模块和倾斜处理模块,所述第二控制模块分别与所述第一控制模块和所述倾斜处理模块连接;
所述第一控制模块用于发起倾斜数据处理请求;
所述第二控制模块用于根据所述倾斜数据处理请求生成数据处理信令,并将所述数据处理信令按照预设消息结构发送至所述倾斜处理模块,其中,所述预设消息结构包括通道数指示字段、倾斜方式指示字段和填充类型指示字段;
所述倾斜处理模块用于根据所述数据处理信令重构数据流,并针对所述数据处理信令生成第一反馈信息;
所述第二控制模块,包括:
分流子模块,用于确定所述通道数指示字段并根据所述通道数指示字段所指示的最大通道数确定数据流的数量;
指示子模块,用于确定数据流的倾斜方式和填充类型,并确定所述倾斜方式指示字段和填充类型指示字段;
所述倾斜方式包括第一方式和第二方式,其中,所述第一方式为按照设定时延分别处理每个数据流,所述第二方式为同步处理每个数据流;
所述填充类型包括零数据填充、伪造数据填充和预设数据填充;
所述通道数指示字段用于指示数据流重构后需要支持的通道数。
2.根据权利要求1所述的系统,其特征在于,所述指示子模块包括:倾斜方式指示单元;
所述倾斜方式指示单元用于:
若最大通道数小于预设数量,则确定数据流的倾斜方式为第一方式,否则,确定数据流的倾斜方式为第二方式;或者,
若链路速率大于预设速率,则确定数据流的倾斜方式为第一方式,否则,确定数据流的倾斜方式为第二方式。
3.根据权利要求1所述的系统,其特征在于,所述预设消息结构还包括:链路状态指示字段,所述链路状态指示字段用于指示误码率和眼图性能;
所述指示子模块包括:填充类型指示单元,用于若误码率低于预设值且眼图性能符合预设条件,则确定数据流的填充类型为零数据填充;否则,确定数据流的填充类型为伪造数据填充或预设数据填充。
4.根据权利要求1至3任一项所述的系统,其特征在于,所述预设消息结构,还包括:主从模块定义字段和反馈字段;
所述主从模块定义字段用于定义所述倾斜处理模块中的主模块和从模块;
所述反馈字段用于定义数据处理信令交互完成后的模块状态,所述模块状态包括确认状态和非确认状态。
5.根据权利要求1所述的系统,其特征在于,所述预设消息结构,还包括:调整方式指示字段;
所述调整方式指示字段用于定义倾斜方式和填充类型的调整方式,所述调整方式包括:指令调整和根据优先规则自动调整,所述优先规则包括第一优先规则和第二优先规则;
若所述调整方式指示字段定义的调整方式为指令调整,则所述倾斜方式指示字段和填充类型指示字段根据接收到的调整指令确定。
6.根据权利要求5所述的系统,其特征在于,所述倾斜方式指示单元还用于:
根据第一优先规则调整数据流的倾斜方式,所述第一优先规则包括:所述第二方式的优先级高于所述第一方式的优先级。
7.根据权利要求5所述的系统,其特征在于,所述填充类型指示单元,还用于:
根据第二优先规则调整数据流的填充类型,所述第二优先规则包括:所述零数据填充的优先级高于所述伪造数据填充的优先级,且所述伪造数据填充的优先级高于所述预设数据填充的优先级。
8.根据权利要求4所述的系统,其特征在于,所述预设消息结构还包括:校验字段;
所述校验字段用于按照预设规范校验所述数据处理信令,并在校验失败时指示数据处理信令交互失败。
9.根据权利要求1所述的系统,其特征在于,所述倾斜处理模块包括:外部存储模块、快速存储模块、外设模块以及视频接口物理层实现模块中的至少一种。
10.根据权利要求9所述的系统,其特征在于,所述外设模块包括通用型输入输出、通用异步收发传输器、通用串行总线和网口中的至少一种。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911014220.9A CN112699145B (zh) | 2019-10-23 | 2019-10-23 | 一种数据处理系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911014220.9A CN112699145B (zh) | 2019-10-23 | 2019-10-23 | 一种数据处理系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112699145A CN112699145A (zh) | 2021-04-23 |
CN112699145B true CN112699145B (zh) | 2024-05-03 |
Family
ID=75505266
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911014220.9A Active CN112699145B (zh) | 2019-10-23 | 2019-10-23 | 一种数据处理系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112699145B (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1859580A (zh) * | 2005-10-17 | 2006-11-08 | 华为技术有限公司 | 支持错误弹性的多媒体数据网络实时传送方法 |
CN106797355A (zh) * | 2014-10-31 | 2017-05-31 | 康普技术有限责任公司 | 基站与中继器之间的多通道i/q接口 |
CN107077445A (zh) * | 2014-09-15 | 2017-08-18 | 赛灵思公司 | 发送器的通道到通道的偏斜校正 |
US9996981B1 (en) * | 2016-03-07 | 2018-06-12 | Bao Tran | Augmented reality system |
CN109426684A (zh) * | 2017-08-28 | 2019-03-05 | 维谛技术有限公司 | 一种封闭冷通道数据中心的3d模型绘制方法及装置 |
CN109640013A (zh) * | 2018-12-20 | 2019-04-16 | 苏州华兴源创科技股份有限公司 | 一种时序校准方法及芯片测试机 |
CN110336650A (zh) * | 2019-07-02 | 2019-10-15 | 苏州华兴源创科技股份有限公司 | 一种信令交互系统及方法 |
-
2019
- 2019-10-23 CN CN201911014220.9A patent/CN112699145B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1859580A (zh) * | 2005-10-17 | 2006-11-08 | 华为技术有限公司 | 支持错误弹性的多媒体数据网络实时传送方法 |
CN107077445A (zh) * | 2014-09-15 | 2017-08-18 | 赛灵思公司 | 发送器的通道到通道的偏斜校正 |
CN106797355A (zh) * | 2014-10-31 | 2017-05-31 | 康普技术有限责任公司 | 基站与中继器之间的多通道i/q接口 |
US9996981B1 (en) * | 2016-03-07 | 2018-06-12 | Bao Tran | Augmented reality system |
CN109426684A (zh) * | 2017-08-28 | 2019-03-05 | 维谛技术有限公司 | 一种封闭冷通道数据中心的3d模型绘制方法及装置 |
CN109640013A (zh) * | 2018-12-20 | 2019-04-16 | 苏州华兴源创科技股份有限公司 | 一种时序校准方法及芯片测试机 |
CN110336650A (zh) * | 2019-07-02 | 2019-10-15 | 苏州华兴源创科技股份有限公司 | 一种信令交互系统及方法 |
Non-Patent Citations (1)
Title |
---|
视觉水位监测系统研究;张曦明;李向阳;周普辉;;科技资讯(第34期);第59-60页 * |
Also Published As
Publication number | Publication date |
---|---|
CN112699145A (zh) | 2021-04-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103902486B (zh) | 一种远端直接内存访问实现方法、装置及系统 | |
US4556974A (en) | Method for passing a token in a local-area network | |
KR102675841B1 (ko) | 바이너리 벡터 기반의 테스트 장치 | |
KR102032862B1 (ko) | 멀티미디어 고화질 링크(mhl 3) 디바이스 내의 중재 시그널링 | |
CN110087140B (zh) | 一种传输流媒体数据的方法、装置、介质及设备 | |
CN106598889A (zh) | 一种基于fpga夹层板的sata主控器 | |
US11665313B2 (en) | Adaptive method and system for data flow control based on variable frame structure in video image processing system | |
US11593033B2 (en) | Electronic device for communicating with host and operating method of the electronic device | |
CN110336650B (zh) | 一种信令交互系统及方法 | |
EP2846470B1 (en) | A method of mobile terminal internal communications | |
WO2014092551A1 (en) | System and method for optimal memory management between cpu and fpga unit | |
CN103368703B (zh) | 数据包重传方法、数据包接收方法及装置 | |
US10033916B2 (en) | Transmission of image data and camera management commands | |
CN112699145B (zh) | 一种数据处理系统 | |
CN112702377B (zh) | 一种数据流转换系统 | |
CN103428496A (zh) | 一种空间tdiccd相机图像实时传输、压缩及存储装置 | |
CN115964333A (zh) | 一种基于fpga主控的多芯片神经网络算法的通信方法 | |
JPWO2020166378A1 (ja) | 通信装置および通信方法、並びにプログラム | |
KR101710011B1 (ko) | 영상 데이터 전송 및 수신 방법 및 장치 | |
CN101212379B (zh) | 无线传输方法、装置及系统 | |
KR20200143881A (ko) | 제어기 통신 장치 및 그 방법 | |
CN112422771B (zh) | 一种资源重置系统 | |
CN111327393A (zh) | 一种基于串行通讯接口的图像探测器参数传输方法 | |
CN104298630A (zh) | 基于串行外设接口的通信方法、装置和设备 | |
CN111026579B (zh) | 一种数据检错能力的校验方法、装置、终端设备及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |