CN112312184A - 一种视频组帧方法及系统 - Google Patents

一种视频组帧方法及系统 Download PDF

Info

Publication number
CN112312184A
CN112312184A CN201910697099.8A CN201910697099A CN112312184A CN 112312184 A CN112312184 A CN 112312184A CN 201910697099 A CN201910697099 A CN 201910697099A CN 112312184 A CN112312184 A CN 112312184A
Authority
CN
China
Prior art keywords
module
framing
signaling
video
interaction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910697099.8A
Other languages
English (en)
Other versions
CN112312184B (zh
Inventor
魏巍
殷建东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou HYC Technology Co Ltd
Original Assignee
Suzhou HYC Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou HYC Technology Co Ltd filed Critical Suzhou HYC Technology Co Ltd
Priority to CN201910697099.8A priority Critical patent/CN112312184B/zh
Publication of CN112312184A publication Critical patent/CN112312184A/zh
Application granted granted Critical
Publication of CN112312184B publication Critical patent/CN112312184B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开了一种视频组帧方法。该方法包括：接收第一控制模块发起的视频组帧请求；根据所述视频组帧请求生成组帧交互信令，并将所述组帧交互信令按照预设消息结构发送至相关外部模块，以使所述相关外部模块根据所述组帧交互信令完成视频组帧并生成第一反馈信息，其中，所述预设消息结构包括用于指示通道数适配方法的通道数适配方法选择字段；基于所述相关外部模块对所述组帧交互信令的第一反馈信息生成视频组帧结果。通过上述技术方案，规范交互信令，提高信令交互效率，从而提高组帧效率。

Description

一种视频组帧方法及系统
技术领域
本发明实施例涉及视频处理技术领域，尤其涉及一种视频组帧方法及系统。
背景技术
在视频或图像传输过程中，发送方依据一定的规则将比特组合成帧，以帧为传输单位，便于接收方能正确地接受并检查所传输的帧数据，提高传输效率。随着视频图像处理系统中分辨率的不断提升，视频显示的终端设备上使用的通道(Lane)数，以及每个通道上的链路速率(Link Rate，LR)也越来越高，这要求视频或图像处理系统能够更加快速、便捷地支持不同Lane数的视频组帧。
现有的视频组帧方法缺乏明确高效的消息结构来定义信令交互的具体过程，尤其是对于不同Lane数或高数据处理量的情况，系统各模块间缺少合理的组织结构与交互的规范，使得各个环节的时延较高，组帧效率偏低。
发明内容
本发明提供了一种视频组帧方法及系统，以规范交互信令，提高信令交互效率，从而提高组帧效率。
本发明实施例提供了一种视频组帧方法，包括：
接收第一控制模块发起的视频组帧请求；
根据所述视频组帧请求生成组帧交互信令，并将所述组帧交互信令按照预设消息结构发送至相关外部模块，以使所述相关外部模块根据所述组帧交互信令完成视频组帧并生成第一反馈信息，其中，所述预设消息结构包括用于指示通道数适配方法的通道数适配方法选择字段；
基于所述相关外部模块对所述组帧交互信令的第一反馈信息生成视频组帧结果。
进一步的，所述通道数适配方法，包括：
基于最大通道数确定适配值的第一适配方法、基于最小公倍数确定适配值的第二适配方法以及组合方法，其中，所述组合方法包括：对于偶数通道基于第一适配方法确定适配值，对于奇数通道基于第二适配方法确定适配值。
进一步的，所述相关外部模块，用于：
根据所述组帧交互信令对通道数小于所述适配值的视频帧执行第一操作和第二操作中的至少一种以完成视频组帧并生成第一反馈信息，其中，第一操作包括插入填充数据，第二操作包括循环插入有效视频帧数据。
进一步的，在所述接收第一控制模块发起的视频组帧请求之前，还包括：
按照预设消息结构生成初始化信令；
将所述初始化信令分别发送至所述第一控制模块和所述相关外部模块，并接收所述相关外部模块对所述初始化信令的第二反馈信息。
进一步的，所述预设消息结构，还包括：主从模块定义字段、视频组帧类型控制字段、视频组帧数据控制字段和反馈字段；
所述主从模块定义字段用于定义所述相关外部模块中的主模块和从模块；
所述视频组帧类型控制字段用于指示视频组帧的控制方式，所述控制方式包括外部控制和默认控制；
所述视频组帧数据控制字段用于定义视频组帧数据；
所述反馈字段用于定义信令交互完成后的模块状态，所述模块状态包括确认状态和非确认状态。
进一步的，所述预设消息结构还包括：校验字段；
所述校验字段用于按照预设规范校验所述组帧交互信令，并在校验失败时指示信令交互失败。
进一步的，所述将所述组帧交互信令按照预设消息结构发送至相关外部模块，包括：
将所述组帧交互信令按照所述预设消息结构发送至所述相关外部模块中的主模块，其中，所述组帧交互信令通过所述主模块转发至所述从模块；
在所述将所述组帧交互信令按照预设消息结构发送至相关外部模块之后，还包括：接收来自所述主模块的第一反馈信息，所述第一反馈信息由从模块生成后发送至主模块。
进一步的，所述将所述初始化信令分别发送至所述第一控制模块和所述相关外部模块，包括：
将所述初始化信令分别发送至所述第一控制模块和所述相关外部模块中的主模块，其中，所述初始化信令通过所述主模块转发至所述从模块；
接收所述相关外部模块的主模块的第二反馈信息，所述第二反馈信息由所述主模块从所述从模块获取。
进一步的，所述第一控制模块为嵌入式控制模块或现场可编程门阵列(FieldProgrammable Gate Array，FPGA)模块。
进一步的，在所述基于所述相关外部模块对所述组帧交互信令的第一反馈信息生成视频组帧结果之后，还包括：
向所述第一控制模块反馈所述视频组帧结果。
本发明实施例提供了一种视频组帧方法。该方法包括：接收第一控制模块发起的视频组帧请求；根据所述视频组帧请求生成组帧交互信令，并将所述组帧交互信令按照预设消息结构发送至相关外部模块，以使所述相关外部模块根据所述组帧交互信令完成视频组帧并生成第一反馈信息，其中，所述预设消息结构包括用于指示通道数适配方法的通道数适配方法选择字段；基于所述相关外部模块对所述组帧交互信令的第一反馈信息生成视频组帧结果。通过上述技术方案，规范交互信令，提高信令交互效率，从而提高组帧效率。
附图说明
图1为本发明实施例一提供的一种视频组帧方法的流程图；
图2为本发明实施例二提供的一种视频组帧方法的流程图；
图3为本发明实施例二提供的一种视频组帧方法的实现示意图；
图4为本发明实施例二提供的一种视频组帧系统的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种视频组帧方法的流程图，本实施例可适用于基于视频或图像处理系统中使用的通道(Lane)数统计的视频填充的可扩展、后向兼容的视频组帧的情况。本实施例的视频组帧方法可由视频组帧系统中的第二控制模块执行，第二控制模块可以为FPGA模块，可用于实现存储控制、外设控制、视频接口IP核实现等需要大量数据处理、低往返时延的操作的实施或执行。如图1所示，该方法具体包括如下步骤：
S110、接收第一控制模块发起的视频组帧请求。
具体的，第一控制模块可以为嵌入式控制模块，可以采用任意嵌入式芯片与系统，用于发起视频组帧请求。嵌入式是指一个控制程序存储在ROM中的嵌入式处理器控制板，即把一个控制板嵌入到视频组帧系统中作为第一控制模块。
S120、根据所述视频组帧请求生成组帧交互信令，并将所述组帧交互信令按照预设消息结构发送至相关外部模块，以使所述相关外部模块根据所述组帧交互信令完成视频组帧并生成第一反馈信息。
具体的，根据视频组帧请求生成组帧交互信令，并按照预设消息结构发送至相关外部模块，使相关外部模块执行对应的视频组帧操作，从而完成视频组帧并生成第一反馈信息。其中，所述预设消息结构包括用于指示通道数适配方法的通道数适配方法选择字段。基于所述预设消息可明确高效地定义组帧信令交互的具体过程，尤其是对于不同Lane数或高数据处理量的情况，可明确指示通道数适配方法，使得在视频组帧过程中，相关外部模块根据通道数适配方法选择字段所指示的通道数适配方法进行通道数适配。由于各模块间具有合理明确的组织结构与交互的规范，降低各个环节的时延较高，提高组帧效率。
S130、基于所述相关外部模块对所述组帧交互信令的第一反馈信息生成视频组帧结果。
具体的，第一反馈信息由相关外部模块生成并发送至第二控制模块，第二控制模块据此生成视频组帧结果。可选的，第二控制模块将视频组帧结果反馈至第一控制模块。
进一步的，所述通道数适配方法，包括：基于最大通道数确定适配值的第一适配方法、基于最小公倍数确定适配值的第二适配方法以及组合方法，其中，所述组合方法包括：对于偶数通道基于第一适配方法确定适配值，对于奇数通道基于第二适配方法确定适配值。
示例性的，在视频组帧系统中所支持的Lane类型包括1、2、4Lane的情况下，Lane数之间存在有效的倍数关系，可以选择基于最大Lane数确定适配值的第一适配方法，采用第一适配方法，可实现在尽可能少选择、最少的有效行计数下，快速有效的完成组帧。在视频组帧系统所支持的Lane类型包括1、2、4、6、8Lane等数量较多的Lane数的情况下，可以选择基于最小公倍数确定适配值的第二适配方法，采用第二适配方法，可在统一的适配方法下，有效的完成组帧，但第二适配方法相比于第一适配方法需要更多的有效行计数完成组帧。在视频组帧系统所支持的Lane类型包括1、2、3、4、5、7Lane等大量的奇数Lane时，对于所有偶数Lane，可以采用第一适配方法，以在最少的有效行计数内完成组帧，而对于所有奇数Lane，可以采用第二适配方法，以统一的适配方法来有效的完成组帧。上述仅为示例性的说明，在实际应用，可根据实际情况选择确定适配值的方法，通道数适配方法通过预设消息结构中的通道数适配方法选择字段指示。
进一步的，所述相关外部模块，用于：根据所述组帧交互信令对通道数小于所述适配值的视频帧执行第一操作和第二操作中的至少一种以完成视频组帧并生成第一反馈信息，其中，第一操作包括插入填充数据，第二操作包括循环插入有效视频帧数据。
具体的，对于视频图像处理系统中同时支持多种Lane数的情况，例如支持1、2、4Lane，在Lane数较小的1、2Lane完成组帧时，Lane数较大的4Lane还未完成组帧，在这种情况下，相关外部模块需要按照上述的适配方法，对Lane数较小的部分进行第一操作和/或第二操作以补足缺失的数据，以确保所有支持的Lane数在视频帧结束时，同时完成有效的组帧。
表1为基于第一适配方法和第一操作的视频组帧结果。表1以视频组帧系统支持1、3、5、7Lane的情况为例进行说明，基于最大Lane数确定的适配值为7，也就是从第8个有效行开始执行第一操作，采用插入填充数据(0111-1101)的方式进行组帧，得到表1的视频组帧结果，其中，D0～D6为有效视频组帧数据，p为填充组帧数据。
表1基于第一适配方法和第一操作的视频组帧结果
Figure BDA0002149679880000071
表2为基于第一适配方法和第二操作的视频组帧结果。表2以视频组帧系统支持1、3、5、7Lane为例的情况为例进行说明，基于最大Lane数确定的适配值为7，也就是从第8个有效行开始执行第二操作，采用循环插入有效视频数据(0111-1101)的方式进行组帧，得到表2的视频组帧结果，其中，D0～D6为有效视频组帧数据，p为填充组帧数据。
表2基于第一适配方法和第二操作的视频组帧结果
Figure BDA0002149679880000081
同理，基于第二适配方法，例如，视频组帧系统支持1、2、4、6Lane为例，基于最小公倍数确定的适配值为12，也就是从第13个有效行开始执行第一操作和/或第二操作，可以得到视频组帧结果。
本实施例通过在预设消息结构中设置通道数适配方法选择字段，用于指示适配方法，对视频组帧系统所支持的所有Lane数取最大值或者最小公倍数的方法，将组帧交互信令按照预设消息结构发送至相关外部模块，以使相关外部模块在视频帧的每行中采用插入填充数据和/或循环插入有效视频帧数据的方式来支持所有的Lane数时使用相同的视频组帧方式，在保证同时支持所有Lane数的情况下，确保在视频组帧系统中Lane数切换时，视频组帧能够无缝、平滑的过渡以支持新的Lane数情况下的有效帧的形成。
本发明实施例一提供的一种视频组帧方法，通过将所述组帧交互信令按照预设消息结构发送至相关外部模块，在视频组帧过程中，相关外部模块根据通道数适配方法选择字段所指示的通道数适配方法进行通道数适配。由于各模块间具有合理明确的组织结构与交互的规范，降低各个环节的时延较高，提高组帧效率，提高了各模块之间的信令交互效率，从而提高了视频组帧效率。
实施例二
图2为本发明实施例二提供的一种视频组帧方法的流程图。本实施例是在上述实施例的基础上进行优化，增加了初始化的步骤，并对组帧交互信令的交互过程进行具体描述。本实施例的视频组帧方法可适用于在视频组帧系统中支持的Lane数增加/减少、以及Lane数切换的情况下，兼容所有Lane数的视频组帧，以针对组帧的不同需求形成有效视频帧。需要说明的是，未在本实施例中详尽描述的技术细节可参见上述任意实施例。
具体的，如图2所示，该方法具体包括如下步骤：
S210、按照预设消息结构生成初始化信令。
S220、将所述初始化信令分别发送至所述第一控制模块和所述相关外部模块，并接收所述相关外部模块对所述初始化信令的第二反馈信息。
具体的，第二控制模块按照预设消息结构生成初始化信令，并通知第一控制模块和相关外部模块。所述预设消息结构可用于定义交互的具体命令，还用于定义整个系统的通信架构或交互层次，使整个系统有组织地交互。在第二控制模块接收到相关外部模块的第二反馈信息后，说明相关外部模块已按照初始化信令准备完毕，在之后的交互过程中相关外部模块可以识别预设消息结构的信令。
进一步的，所述预设消息结构，还包括：主从模块定义字段、视频组帧类型控制字段、视频组帧数据控制字段和反馈字段；所述主从模块定义字段用于定义所述相关外部模块中的主模块和从模块；所述视频组帧类型控制字段用于指示视频组帧的控制方式，所述控制方式包括外部控制和默认控制；所述视频组帧数据控制字段用于定义视频组帧数据；所述反馈字段用于定义信令交互完成后的模块状态，所述模块状态包括确认状态和非确认状态。
具体的，主/从模块定义字段用于定义相关外部模块中的主模块和从模块，也可以理解为相关寄存器的定义字段。主模块与从模块是根据组帧交互信令的发起方与接收方而定义的，例如，嵌入式模块可以作为主模块发起视频组帧请求，FPGA模块作为从模块来接收命令并执行；FPGA模块也可以作为主模块，向嵌入式模块发起视频组帧请求，而嵌入式模块此时则为从模块。又如，在请求外设控制的过程中，第二控制模块通知相关外部模块中的外设模块向快速存储模块发起读取数据的命令，则第二控制模块与外设模块为一组主模块与从模块，外设模块与快速存储模块也为一组主模块与从模块。上述示例中，请求外设控制的信令由第二控制模块发送至外设模块，外设模块再转发至对应的从模块，而不会跃级传输，每一组具有主从关系的模块在各自的链路中进行信令的分层转发和交互，从而使系统的组织结构标准化，提高交互的可靠性和效率。
所述视频组帧类型控制字段用于指示视频组帧的控制方式，所述控制方式包括外部控制和默认控制，即，用于指示是否需要外部控制视频组帧方法。如果不需要外部控制(即默认控制)视频组帧方法时，则相关外部模块按照系统内置的默认的视频组帧方法完成视频组帧。这种情况下，视频组帧数据控制字段、通道数适配方法选择字段无效。外部控制的方式适用于支持的Lane数类型较少的情况，可以减少组帧信令交互，在更少的往返时延的情况下完成有效的视频组帧。如果需要外部控制，相关外部模块将根据视频组帧数据控制字段、通道数适配方法选择字段来确定具体的视频组帧方法，其中，视频组帧数据控制字段，用于定义视频组帧数据，例如，包括循环填充有效视频帧数据和插入默认的填充数据。视频组帧类型控制字段、视频组帧数据控制字段以及通道数适配方法选择字段提供了一种灵活的组帧机制，以适应更多的Lane数类型，在组帧信令交互的往返时延、Lane数适配方法选择及组帧方法选择的效率之间的有效折中。
反馈字段用于定义组帧信令交互后各模块之间的状态，包括确认(Acknowledgement，ACK)和非确认(Negative Acknowledgement，NACK)状态，也可以为其他自定义的状态，用于反映各模块是否完成组帧信令交互。反馈字段还可用于反映各模块是否为等待状态。各模块的状态可根据实际的应用场景灵活设置。
可选的，所述预设消息结构还包括：校验字段；所述校验字段用于按照预设规范校验所述组帧交互信令，并在校验失败时指示组帧信令交互失败。
具体的，校验字段用于在信令传输信道质量无法保证的情况下对组帧交互信令及消息结构进行校验。通过预设消息结构在各模块之间的交互建立了通信规范，只有在组帧交互信令符合预设规范的情况下，才能实现信令交互，否则会导致从模块无法识别和反馈，则会指示组帧交互信令交互失败。
进一步的，所述将所述初始化信令分别发送至所述第一控制模块和所述相关外部模块，并接收所述相关外部模块对所述初始化信令的第二反馈信息，包括：将所述初始化信令分别发送至所述第一控制模块和所述相关外部模块中的主模块，其中，所述初始化信令通过所述主模块转发至所述从模块；接收所述相关外部模块的主模块的第二反馈信息，所述第二反馈信息由所述主模块从所述从模块获取。
S230、接收第一控制模块发起的视频组帧请求。
S240、根据所述视频组帧请求生成组帧交互信令。
S250、将所述组帧交互信令按照所述预设消息结构发送至所述相关外部模块中的主模块，其中，所述组帧交互信令通过所述主模块转发至所述从模块。
需要说明的是，生成的组帧交互信令按照预设消息结构，根据主/从模块定义字段先发送至相关外部模块中的主模块，由主模块再转发至从模块，第一反馈信息也按此从模块反馈到主模块、再反馈到第二控制模块。其中，从模块根据组帧交互信令，按照视频组帧类型控制字段、视频组帧数据控制字段以及通道数适配方法选择字段执行对应的视频组帧操作，视频组帧完成后生成第一反馈信息。
S260、接收来自所述主模块的第一反馈信息，所述第一反馈信息由从模块生成后发送至主模块。
S270、基于所述相关外部模块对所述组帧交互信令的第一反馈信息生成视频组帧结果。
S280、向所述第一控制模块反馈所述视频组帧结果。
进一步的，第一控制模块为嵌入式控制模块或FPGA模块；对应的，第二控制模块为FPGA模块或嵌入式控制模块。对应的，所述第二控制模块为FPGA模块或嵌入式控制模块。
具体的，嵌入式控制模块可以采用任意嵌入式芯片与系统，用于发起信令交互请求，例如，请求读/写寄存器数据、请求启用/关闭视频显示单元或模块、请求外设控制或请求修改视频显示模块的参数设置等。FPGA模块用于实现存储控制、外设控制、视频接口IP核实现等需要大量数据处理、低往返时延(latency)的操作的实施或执行。需要说明的是，主模块可以是外部嵌入式控制模块，则对应的从模块为FPGA模块，或者，主模块为FPGA模块，对应的从模块为外部存储模块、外设模块等。此外，FPGA模块内部的不同功能模块之间也可以存在主从关系，只要是组帧信令交互过程中发起控制与被控制方的模块之间都属于主从关系。
图3为本发明实施例二提供的一种视频组帧方法的实现示意图。图3中以嵌入式控制模块作为第一控制模块，以FPGA模块作为第二控制模块为例进行说明。S1-S5为初始化的过程，在S1中，FPGA模块根据视频或图像处理的硬件情况确定主/从模块定义字段(或相关寄存器定义字段)，该字段能够兼容所有的模块并且能够对各模块进行唯一的标识；FPGA模块还可根据具体实施的物理过程预先确定视频组帧类型控制字段、视频组帧数据控制字段以及通道数适配方法选择字段；FPGA模块还可用于根据预先定义的反馈机制确定信令反馈字段，以在交互过程中反映各模块的状态。可选的，FPGA模块还可用于确定信令校验机制，并确定校验字段，当主/从模块在信令发送/接收时，首先根据信令校验机制确定组帧交互信令是否符合要求，如果符合，则表明信令传输正确；否则，表明信令传输失败，将启动预先定义的重传或信令反馈机制。需要说明的是，FPGA模块即为第二控制模块，嵌入式控制模块即为第一控制模块，S1与S2优选为同步进行。FPGA模块在接收到第二反馈信息后，初始化过程完毕，其中，第二反馈信息用于表示从模块已按照初始化信令准备完毕，在之后的交互过程中可以识别对应的主模块发送来的预设消息结构的组帧交互信令。
S6-S11为组帧信令交互的过程，FPGA模块接收到第一反馈信息后即可生成视频组帧结果。在S9中，主模块接收第一反馈信息并确认信令反馈字段，并根据信令反馈字段的信息执行诸如，重传、重置或者其他系统预先设定的操作，并向FPGA模块反馈第二反馈信息，用于表示视频组帧的实施情况。在S10中，FPGA模块在接收到第二反馈信息之后，可以实施系统预先设定的过程，诸如，重传、重试、等待等，以尽可能在本次交互过程中完成嵌入式控制模块发起的视频组帧请求，以提高每次信令交互过程的实施效率。
可选的，在S11中FPGA模块将视频组帧结果反馈至嵌入式控制模块。具体的，嵌入式控制模块每发起一次视频组帧请求，FPGA模块都会进行响应，多次尝试完成信令交互，直至成功为止。尝试过程中采取预先设置的策略，包括重传、重试、等待等。如果预先设置的策略全部失败，则向嵌入式控制模块反馈交互失败的信息。
需要说明的是，本实施例中的视频组帧方法可以通过软件和/或硬件的方式实现，并集成在视频组帧系统中。
图4为本发明实施例二提供的一种视频组帧系统的结构示意图。本实施例的视频组帧方法可通过如图4所示的视频组帧系统实现。视频组帧系统包括：第一控制模块10、第二控制模块20和相关外部模块30，第一控制模块10用于发起关于视频组帧请求；第二控制模块20用于根据所述视频组帧请求生成组帧交互信令，并将所述组帧交互信令按照预设消息结构发送至相关外部模块30，以使所述相关外部模块30根据所述组帧交互信令完成视频组帧并生成第一反馈信息，基于所述相关外部模块30对所述组帧交互信令的第一反馈信息生成视频组帧结果；第二控制模块20还用于在接收到信令交互请求之前，按照预设消息结构生成初始化信令，将初始化信令分别发送至第一控制模块10和相关外部模块30，以及接收相关外部模块30对初始化信令的第二反馈信息。在视频或图像处理的过程中，出现知识产权(Intellectual Property，IP)核参数改变、视频流位宽度、显示模式、控制寄存器特征位等变更的情况下，易造成各模块之间交互的协调性差、往返时延过长或无效、不同处理模块之间交互时造成死机等问题，本实施例中的视频组帧系统可对视频流进行无阻塞、低时延的快速处理及切换。
需要说明的是，第二控制模块20的内部还可以包含具有主从关系的多个模块，此时，嵌入式软核控制模块为控制中心，其他模块受其控制，都是嵌入式软核控制模块的从模块，且其他模块之间还存在进一步的主从关系。相关外部模块30也可以包含具有主从关系的多个模块。通过预设消息结构可在各模块间建立起完善的信令交互机制，实现主/从模块之间有组织的、精准的信令交互，降低往返时延，在保证硬件系统与平台无缝、平滑无死机等情况下完成视频或图像的处理，同时确保系统以事件驱动的前提下具有最小的有效系统时延。
本发明实施例二提供的一种视频组帧方法，在上述实施例的基础上进行优化，通过按照预设消息结构传输初始化信令，使系统中各模块初始化，便于在组帧的信令交互过程中正确识别组帧交互信令并执行视频组帧操作；通过按照预设消息结构发送组帧交互信令和接收反馈信息，建立起完善的信令交互机制，实现主/从模块之间有组织的、精准的信令交互，降低往返时延，提高了各模块之间的信令交互效率，从而提高了视频组帧效率。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种视频组帧方法，其特征在于，包括：
接收第一控制模块发起的视频组帧请求；
根据所述视频组帧请求生成组帧交互信令，并将所述组帧交互信令按照预设消息结构发送至相关外部模块，以使所述相关外部模块根据所述组帧交互信令完成视频组帧并生成第一反馈信息，其中，所述预设消息结构包括用于指示通道数适配方法的通道数适配方法选择字段；
基于所述相关外部模块对所述组帧交互信令的第一反馈信息生成视频组帧结果。
2.根据权利要求1所述的方法，其特征在于，所述通道数适配方法，包括：
基于最大通道数确定适配值的第一适配方法、基于最小公倍数确定适配值的第二适配方法以及组合方法，其中，所述组合方法包括：对于偶数通道基于第一适配方法确定适配值，对于奇数通道基于第二适配方法确定适配值。
3.根据权利要求2所述的方法，其特征在于，所述相关外部模块，用于：
根据所述组帧交互信令对通道数小于所述适配值的视频帧执行第一操作和第二操作中的至少一种以完成视频组帧并生成第一反馈信息，其中，第一操作包括插入填充数据，第二操作包括循环插入有效视频帧数据。
4.根据权利要求1所述的方法，其特征在于，在所述接收第一控制模块发起的视频组帧请求之前，还包括：
按照预设消息结构生成初始化信令；
将所述初始化信令分别发送至所述第一控制模块和所述相关外部模块，并接收所述相关外部模块对所述初始化信令的第二反馈信息。
5.根据权利要求4所述的方法，其特征在于，所述预设消息结构，还包括：主从模块定义字段、视频组帧类型控制字段、视频组帧数据控制字段和反馈字段；
所述主从模块定义字段用于定义所述相关外部模块中的主模块和从模块；
所述视频组帧类型控制字段用于指示视频组帧的控制方式，所述控制方式包括外部控制和默认控制；
所述视频组帧数据控制字段用于定义视频组帧数据；
所述反馈字段用于定义信令交互完成后的模块状态，所述模块状态包括确认状态和非确认状态。
6.根据权利要求5所述的方法，其特征在于，所述预设消息结构还包括：校验字段；
所述校验字段用于按照预设规范校验所述组帧交互信令，并在校验失败时指示信令交互失败。
7.根据权利要求5所述的方法，其特征在于，所述将所述组帧交互信令按照预设消息结构发送至相关外部模块，包括：
将所述组帧交互信令按照所述预设消息结构发送至所述相关外部模块中的主模块，其中，所述组帧交互信令通过所述主模块转发至所述从模块；
在所述将所述组帧交互信令按照预设消息结构发送至相关外部模块之后，还包括：接收来自所述主模块的第一反馈信息，所述第一反馈信息由从模块生成后发送至主模块。
8.根据权利要求5所述的方法，其特征在于，所述将所述初始化信令分别发送至所述第一控制模块和所述相关外部模块，并接收所述相关外部模块对所述初始化信令的第二反馈信息，包括：
将所述初始化信令分别发送至所述第一控制模块和所述相关外部模块中的主模块，其中，所述初始化信令通过所述主模块转发至所述从模块；
接收所述相关外部模块的主模块的第二反馈信息，所述第二反馈信息由所述主模块从所述从模块获取。
9.根据权利要求1-8任一项所述的方法，其特征在于，所述第一控制模块为嵌入式控制模块或现场可编程门阵列FPGA模块。
10.根据权利要求1-8任一项所述的方法，其特征在于，在所述基于所述相关外部模块对所述组帧交互信令的第一反馈信息生成视频组帧结果之后，还包括：
向所述第一控制模块反馈所述视频组帧结果。
CN201910697099.8A 2019-07-30 2019-07-30 一种视频组帧方法 Active CN112312184B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910697099.8A CN112312184B (zh) 2019-07-30 2019-07-30 一种视频组帧方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910697099.8A CN112312184B (zh) 2019-07-30 2019-07-30 一种视频组帧方法

Publications (2)

Publication Number Publication Date
CN112312184A true CN112312184A (zh) 2021-02-02
CN112312184B CN112312184B (zh) 2023-01-13

Family

ID=74486121

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910697099.8A Active CN112312184B (zh) 2019-07-30 2019-07-30 一种视频组帧方法

Country Status (1)

Country Link
CN (1) CN112312184B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101854220A (zh) * 2009-04-01 2010-10-06 华为技术有限公司 一种业务数据发送、接收的方法和装置
CN102055727A (zh) * 2009-10-30 2011-05-11 华为技术有限公司 多业务传送网中的数据封装方法、封装设备和支路单元
US20110123196A1 (en) * 2008-07-30 2011-05-26 Min Ye Method, device and system for sending and receiving client signals
CN108462642A (zh) * 2018-03-16 2018-08-28 西安电子科技大学 基于fpga的udp/ip硬件协议栈及实现方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110123196A1 (en) * 2008-07-30 2011-05-26 Min Ye Method, device and system for sending and receiving client signals
CN101854220A (zh) * 2009-04-01 2010-10-06 华为技术有限公司 一种业务数据发送、接收的方法和装置
CN102055727A (zh) * 2009-10-30 2011-05-11 华为技术有限公司 多业务传送网中的数据封装方法、封装设备和支路单元
CN108462642A (zh) * 2018-03-16 2018-08-28 西安电子科技大学 基于fpga的udp/ip硬件协议栈及实现方法

Also Published As

Publication number Publication date
CN112312184B (zh) 2023-01-13

Similar Documents

Publication Publication Date Title
US10986670B2 (en) Random access feedback method, random access processing method, base station and terminal
JP2925678B2 (ja) データ通信方法及びデータ通信システム
JP2503086B2 (ja) デ―タ・リンク制御方法
US10541833B2 (en) System and method for automatically selecting baud rate in a CAN network
US20140108878A1 (en) Method, Apparatus, and System for Retransmitting Data Packet in Quick Path Interconnect System
WO2020140964A1 (zh) 非周期信道状态信息csi的传输方法、装置、基站及终端
US20130003751A1 (en) Method and system for exponential back-off on retransmission
CN112261142B (zh) 一种rdma网络的数据重传方法、装置及fpga
CN105141603A (zh) 通信数据传输方法及系统
US7760655B2 (en) Method and device for transfer of data over a data connection from a sender to a receiver by means of packets
CN110336650B (zh) 一种信令交互系统及方法
US11736567B2 (en) Data transmission and network interface controller
WO2018028682A1 (zh) 一种数据传输方法、装置和系统
CN107317731A (zh) 一种客户端与服务器连接状态的检测方法
US20060133376A1 (en) Multicast transmission protocol for fabric services
CN112312184B (zh) 一种视频组帧方法
CN113992740B (zh) 一种基于自主可控的中间件及数据传输方法
CN115865830A (zh) 基于连接管理的减少rdma网络开销的方法、装置
EP4207637A1 (en) Time synchronization method and apparatus, device, and storage medium
CN112702377B (zh) 一种数据流转换系统
CN112699145B (zh) 一种数据处理系统
CN101989896A (zh) 一种arq连接的反馈方法及装置
WO2007096987A1 (ja) エラー制御装置
CN112422771B (zh) 一种资源重置系统
JP2005346175A (ja) コマンド通信装置およびコマンド通信方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant