CN113271476A - 一种提升视频数据流帧的同步方法、设备、装置及系统 - Google Patents
一种提升视频数据流帧的同步方法、设备、装置及系统 Download PDFInfo
- Publication number
- CN113271476A CN113271476A CN202110519622.5A CN202110519622A CN113271476A CN 113271476 A CN113271476 A CN 113271476A CN 202110519622 A CN202110519622 A CN 202110519622A CN 113271476 A CN113271476 A CN 113271476A
- Authority
- CN
- China
- Prior art keywords
- frame
- video
- synchronization
- frame data
- processing result
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 23
- 230000005540 biological transmission Effects 0.000 claims abstract description 71
- 102100024061 Integrator complex subunit 1 Human genes 0.000 claims abstract description 40
- 101710092857 Integrator complex subunit 1 Proteins 0.000 claims abstract description 40
- 230000011218 segmentation Effects 0.000 claims abstract description 19
- 102100028043 Fibroblast growth factor 3 Human genes 0.000 claims abstract description 15
- 108050002021 Integrator complex subunit 2 Proteins 0.000 claims abstract description 15
- 101100446506 Mus musculus Fgf3 gene Proteins 0.000 claims abstract description 14
- 238000004364 calculation method Methods 0.000 claims description 31
- 230000002708 enhancing effect Effects 0.000 claims description 16
- 238000001514 detection method Methods 0.000 claims description 13
- 238000007405 data analysis Methods 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 8
- 230000001737 promoting effect Effects 0.000 description 6
- 238000012986 modification Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 238000004806 packaging method and process Methods 0.000 description 3
- 230000018109 developmental process Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Television Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了一种提升视频数据流帧的同步方法、设备、装置及系统，根据视频帧画面的大小自适应申请缓存空间；当前帧数据传输结束时，产生第一结束中断信号INT1；根据第一结束中断信号INT1中的当前帧数据传输来结束中断，从对应的缓存区域获取当前帧数据，通过对当前帧数据进行图像算法处理后，将处理结果传输到缓存区域，待处理结果传输完成，产生当前帧结果，传输完成第二结束中断信号INT2；根据处理结果传输完成中断，计算出第一结束中断信号INT1和INT2之间的时间差Tp，根据时间差Tp大小不同，进行线性分段处理。本发明可自适应提高视频数据帧，提高帧同步输出精度。
Description
技术领域
本发明涉及视频图像处理领域，尤其公开了一种提升视频数据流帧的同步方法、设备、装置及系统。
背景技术
随着现代信息技术的发展，视频图像处理技术发展非常迅速，提高视频图像的帧率可以获取或者显示更多、更细图像信息。特别在工业、军用领域，对视频、图像处理的实时性要求非常高，为满足这一特性，常采用高帧率机器视觉设备来获取快速运动物体的运动特征和轨迹。虽然获取丰富运动细节，但增加了高帧率视频数据帧同步处理的难度和复杂度。一般情况下，高帧率视频数据的传输吞吐量问题，可通过增加数据流端口数或者带宽更高的协议端口来解决帧同步。虽然在底层可以保证同步输出，但上层对视频数据的处理时，由于帧与帧之间的算法处理时间出现偏差，从而导致算法处理后的控制信息不能视频数据流的帧周期保持线性同步问题；处理器在运行过程中，因为计算复杂度不同，帧画面大小不同、处理器工作温度等等不同，运算结果输出时机呈现出非线性、周期不确定，从而影响对物体运动轨迹的观察、判断以及跟踪等。
因此，现有视频图像处理时存在的高帧率视频数据因帧算法不同，处理时间呈现出非线性、周期不确定而导致帧同步输出精度不高，是一件亟待解决的技术问题。
发明内容
本发明提供了一种提升视频数据流帧的同步方法、设备、装置及系统，旨在解决现有视频图像处理时存在的高帧率视频数据因帧算法不同，处理时间呈现出非线性、周期不确定而导致帧同步输出精度不高，是一件亟待解决的技术问题
本发明的一方面涉及一种提升视频数据流帧的同步方法，包括以下步骤：
对视频帧数据进行解析，解析出帧数据和帧同步信号，采用一基准时钟对帧同步信号进行检测，检测出视频帧周期T、以及视频分辨率信息，同时在基准时钟的基础上，产生一个新场同步信号；
解析完帧数据，根据视频流数据类型，按双字节对齐方式组包传输到指定缓存区域，缓存区域的大小，根据视频帧画面的大小自适应申请缓存空间；当前帧数据传输结束时，产生第一结束中断信号INT1；
根据第一结束中断信号INT1中的当前帧数据传输来结束中断，从对应的缓存区域获取当前帧数据，通过对当前帧数据进行图像算法处理后，将处理结果传输到缓存区域，待处理结果传输完成，产生当前帧结果，传输完成第二结束中断信号INT2；
根据处理结果传输完成中断，计算出第一结束中断信号INT1和INT2之间的时间差Tp，根据时间差Tp大小不同，进行线性分段处理。
进一步地，根据处理结果传输完成中断，计算出第一结束中断信号INT1和INT2之间的时间差Tp，根据时间差Tp大小不同，进行线性分段处理的步骤包括：
预先设定时间增益常数N，当Tp小于T/N时，计算处理结果输出使能在T/N时刻打开，下一个场同步来临时关闭使能；
当Tp大于等于T/N且Tp小于T*2/N时，计算处理结果输出使能在T*2/N时刻打开，在下一个场同步来临时关闭使能；
当Tp大于等于T*(N-1)/N且Tp小于T时，计算处理结果输出使能在T时刻打开，在下一个场同步来临时关闭使能；
当Tp大于等于T时，计算处理结果输出使能在Tp时刻打开。
本发明的另一方面涉及一种提升视频数据流帧的同步设备，包括：
帧数据解析模块，用于对视频帧数据进行解析，解析出帧数据和帧同步信号；
帧同步检测模块，用于采用一基准时钟对帧同步信号进行检测，检测出视频帧周期T、以及视频分辨率信息，同时在基准时钟的基础上，产生一个新场同步信号；
帧数据分包传输模块，用于解析完帧数据，根据视频流数据类型，按双字节对齐方式组包传输到指定缓存区域，缓存区域的大小，根据视频帧画面的大小自适应申请缓存空间；
帧传输结束检测模块，用于当前帧数据传输结束时，产生第一结束中断信号INT1；
帧数据处理模块，用于根据第一结束中断信号INT1中的当前帧数据传输来结束中断，从对应的缓存区域获取当前帧数据，通过对当前帧数据进行图像算法处理后，将处理结果传输到缓存区域；
帧处理结束检测模块，用于待处理结果传输完成，产生当前帧结果，传输完成第二结束中断信号INT2；
处理结果输出模块，用于根据处理结果传输完成中断，计算出第一结束中断信号INT1和INT2之间的时间差Tp；
帧同步对齐控制模块，用于根据时间差Tp大小不同，进行线性分段处理。
进一步地，帧同步对齐控制模块包括：
第一帧同步对齐控制单元，用于预先设定时间增益常数N，当Tp小于T/N时，计算处理结果输出使能在T/N时刻打开，下一个场同步来临时关闭使能；
第二帧同步对齐控制单元，用于当Tp大于等于T/N且Tp小于T*2/N时，计算处理结果输出使能在T*2/N时刻打开，在下一个场同步来临时关闭使能；
第三帧同步对齐控制单元，用于当Tp大于等于T*(N-1)/N且Tp小于T时，计算处理结果输出使能在T时刻打开，在下一个场同步来临时关闭使能；
第四帧同步对齐控制单元，用于当Tp大于等于T时，计算处理结果输出使能在Tp时刻打开。
本发明的另一方面涉及一种提升视频数据流帧的同步装置，包括上述的同步设备及与同步设备相连接的视频帧输入设备，视频帧输入设备设于同步设备的前端用于输入视频帧数据。
本发明的另一方面涉及一种提升视频数据流帧的同步系统，包括上述的同步设备、第一视频采集设备、第二视频采集设备和显示设备，同步设备分别与第一视频采集设备、第二视频采集设备和显示设备电连接。
进一步地，第一视频采集设备为第一相机。
进一步地，第二视频采集设备为第二相机。
进一步地，显示设备为显示器。
进一步地，显示器为LED显示器或LCD显示器。
本发明所取得的有益效果为：
本发明公开一种提升视频数据流帧的同步方法、设备、装置及系统，通过对视频帧数据进行解析，解析出帧数据和帧同步信号，采用一基准时钟对帧同步信号进行检测，检测出视频帧周期T、以及视频分辨率信息，同时在基准时钟的基础上，产生一个新场同步信号；解析完帧数据，根据视频流数据类型，按双字节对齐方式组包传输到指定缓存区域，缓存区域的大小，根据视频帧画面的大小自适应申请缓存空间；当前帧数据传输结束时，产生第一结束中断信号INT1；根据第一结束中断信号INT1中的当前帧数据传输来结束中断，从对应的缓存区域获取当前帧数据，通过对当前帧数据进行图像算法处理后，将处理结果传输到缓存区域，待处理结果传输完成，产生当前帧结果，传输完成第二结束中断信号INT2；根据处理结果传输完成中断，计算出第一结束中断信号INT1和INT2之间的时间差Tp，根据时间差Tp大小不同，进行线性分段处理。本发明公开的提升视频数据流帧的同步方法、设备、装置及系统，主要是解决高帧率视频数据因帧算法不同，处理时间呈现出非线性、周期不确定而导致帧同步输出精度不高的问题，通过此方法可自适应提高视频数据帧，提高帧同步输出精度。
附图说明
图1为本发明提供的提升视频数据流帧的同步方法一实施例的流程示意图；
图2为图1中所示的根据处理结果传输完成中断，计算出第一结束中断信号INT1和INT2之间的时间差Tp，根据时间差Tp大小不同，进行线性分段处理的步骤的细化流程示意图；
图3为本发明提供的提升视频数据流帧的同步设备一实施例的功能框图；
图4为图3中所示的帧同步对齐控制模块一实施例的功能模块示意图；
图5为本发明提供的提升视频数据流帧的同步装置一实施例的连接示意图；
图6为本发明提供的提升视频数据流帧的同步系统一实施例的功能框图。
附图标号说明：
10、帧数据解析模块；20、帧同步检测模块；30、帧数据分包传输模块；40、帧传输结束检测模块；50、帧数据处理模块；60、帧处理结束检测模块；70、处理结果输出模块；80、帧同步对齐控制模块；81、第一帧同步对齐控制单元；82、第二帧同步对齐控制单元；83、第三帧同步对齐控制单元；84、第四帧同步对齐控制单元；100、同步设备；200、视频帧输入设备；300、第一视频采集设备；400、第二视频采集设备；500、显示设备。
具体实施方式
为了更好的理解上述技术方案，下面将结合说明书附图以及具体的实施方式对上述技术方案做详细的说明。
如图1所示，本发明第一实施例提出一种提升视频数据流帧的同步方法，包括以下步骤：
步骤S100、对视频帧数据进行解析，解析出帧数据和帧同步信号，采用一基准时钟对帧同步信号进行检测，检测出视频帧周期T、以及视频分辨率信息，同时在基准时钟的基础上，产生一个新场同步信号。
接收视频帧输入设备传送过来的视频帧数据，对视频帧数据进行解析，解析出帧数据、帧同步信号，采用一基准时钟对帧同步信号进行检测，由此检测出视频帧周期T，以及视频分辨率信息，同时在基准时钟基础上，产生一个新场同步信号。
步骤S200、解析完帧数据，根据视频流数据类型，按双字节对齐方式组包传输到指定缓存区域，缓存区域的大小，根据视频帧画面的大小自适应申请缓存空间；当前帧数据传输结束时，产生第一结束中断信号INT1。
解析完帧数据，根据视频流数据类型，按双字节对齐方式组包传输到指定缓存区域，缓存区域的大小，根据视频帧画面的大小自适应申请缓存空间；当前帧传输结束时，产生结束中断信号INT1通知处理单元。
步骤S300、根据第一结束中断信号INT1中的当前帧数据传输来结束中断，从对应的缓存区域获取当前帧数据，通过对当前帧数据进行图像算法处理后，将处理结果传输到缓存区域，待处理结果传输完成，产生当前帧结果，传输完成第二结束中断信号INT2。
处理单元根据当前帧数据传输结束中断，从对应的缓存区域获取当前帧数据，通过对当前帧数据进行图像算法处理后，将处理结果传输到缓存区域，待处理结果传输完成，产生当前帧结果传输完成中断INT2。
步骤S400、根据处理结果传输完成中断，计算出第一结束中断信号INT1和INT2之间的时间差Tp，根据时间差Tp大小不同，进行线性分段处理。
根据处理结果传输完成中断，计算出INT1和INT2之间的时间差Tp，Tp可随在运行过程中，因为计算复杂度不同，帧画面大小不同、处理器工作温度等等不同，运算结果输出时机呈现出非线性，周期不确定。因此，根据时间差Tp大小不同，进行线性分段处理方式以提高帧数据处理后的同步精度。
请见图2，图2为图1中所示的步骤S400的细化流程示意图，在本实施例中，步骤S400包括：
步骤S410、预先设定时间增益常数N，当Tp小于T/N时，计算处理结果输出使能在T/N时刻打开，下一个场同步来临时关闭使能。
根据时间差Tp大小不同，进行线性分段处理方式以提高帧数据处理后的同步精度，预先设定时间增益常数N：
当时间差Tp小于T/N时，计算处理结果输出使能在T/N时刻打开，下一个场同步来临时关闭使能。
步骤S420、当Tp大于等于T/N且Tp小于T*2/N时，计算处理结果输出使能在T*2/N时刻打开，在下一个场同步来临时关闭使能。
当时间差Tp大于等于T/N且Tp小于T*2/N时，计算处理结果输出使能在T*2/N时刻打开，在下一个场同步来临时关闭使能。
步骤S430、当Tp大于等于T*(N-1)/N且Tp小于T时，计算处理结果输出使能在T时刻打开，在下一个场同步来临时关闭使能。
根据步骤S420依次类推，当时间差Tp大于等于T*(N-1)/N且Tp小于T时，计算处理结果输出使能在T时刻打开，在下一个场同步来临时关闭使能。
步骤S440、当Tp大于等于T时，计算处理结果输出使能在Tp时刻打开。
当时间差Tp大于等于T时，计算处理结果输出使能在Tp时刻打开，由于输入视频帧率较计算处理速度快，计算设备已无法实时处理，因此，通过自适应输出帧同步控制信号控制外部设备的视频数据的帧率。
参见图3，图3为本发明提供的提升视频数据流帧的同步设备一实施例的功能框图，在本实施例中，该提升视频数据流帧的同步设备，包括帧数据解析模块10、帧同步检测模块20、帧数据分包传输模块30、帧传输结束检测模块40、帧数据处理模块50、帧处理结束检测模块60、处理结果输出模块70和帧同步对齐控制模块80，其中，帧数据解析模块10，用于对视频帧数据进行解析，解析出帧数据和帧同步信号。帧同步检测模块20，用于采用一基准时钟对帧同步信号进行检测，检测出视频帧周期T、以及视频分辨率信息，同时在基准时钟的基础上，产生一个新场同步信号。帧数据分包传输模块30，用于解析完帧数据，根据视频流数据类型，按双字节对齐方式组包传输到指定缓存区域，缓存区域的大小，根据视频帧画面的大小自适应申请缓存空间。帧传输结束检测模块40，用于当前帧数据传输结束时，产生第一结束中断信号INT1。帧数据处理模块50，用于根据第一结束中断信号INT1中的当前帧数据传输来结束中断，从对应的缓存区域获取当前帧数据，通过对当前帧数据进行图像算法处理后，将处理结果传输到缓存区域。帧处理结束检测模块60，用于待处理结果传输完成，产生当前帧结果，传输完成第二结束中断信号INT2。处理结果输出模块70，用于根据处理结果传输完成中断，计算出第一结束中断信号INT1和INT2之间的时间差Tp。帧同步对齐控制模块80，用于根据时间差Tp大小不同，进行线性分段处理。
帧数据解析模块10接收视频帧输入设备传送过来的视频帧数据，对视频帧数据进行解析，解析出帧数据、帧同步信号。帧同步检测模块20采用一基准时钟对帧同步信号进行检测，由此检测出视频帧周期T，以及视频分辨率信息，同时在基准时钟基础上，产生一个新场同步信号。
帧数据分包传输模块30解析完帧数据，根据视频流数据类型，按双字节对齐方式组包传输到指定缓存区域，缓存区域的大小，根据视频帧画面的大小自适应申请缓存空间。帧传输结束检测模块40用于当前帧传输结束时，产生结束中断信号INT1通知处理单元。
帧数据处理模块50根据当前帧数据传输结束中断，从对应的缓存区域获取当前帧数据，通过对当前帧数据进行图像算法处理后，将处理结果传输到缓存区域。帧处理结束检测模块60用于待处理结果传输完成，产生当前帧结果传输完成中断INT2。
处理结果输出模块70根据处理结果传输完成中断，计算出INT1和INT2之间的时间差Tp，Tp可随在运行过程中，因为计算复杂度不同，帧画面大小不同、处理器工作温度等等不同，运算结果输出时机呈现出非线性，周期不确定。因此，帧同步对齐控制模块80根据时间差Tp大小不同，进行线性分段处理方式以提高帧数据处理后的同步精度。
进一步地，如图4所示，图4为图3中所示的帧同步对齐控制模块一实施例的功能模块示意图，在本实施例中，帧同步对齐控制模块80包括第一帧同步对齐控制单元81、第二帧同步对齐控制单元82、第三帧同步对齐控制单元83和第四帧同步对齐控制单元84，其中，第一帧同步对齐控制单元81，用于预先设定时间增益常数N，当Tp小于T/N时，计算处理结果输出使能在T/N时刻打开，下一个场同步来临时关闭使能。第二帧同步对齐控制单元82，用于当Tp大于等于T/N且Tp小于T*2/N时，计算处理结果输出使能在T*2/N时刻打开，在下一个场同步来临时关闭使能。第三帧同步对齐控制单元83，用于当Tp大于等于T*(N-1)/N且Tp小于T时，计算处理结果输出使能在T时刻打开，在下一个场同步来临时关闭使能。第四帧同步对齐控制单元84，用于当Tp大于等于T时，计算处理结果输出使能在Tp时刻打开。
第一帧同步对齐控制单元81用于根据时间差Tp大小不同，进行线性分段处理方式以提高帧数据处理后的同步精度，预先设定时间增益常数N：当时间差Tp小于T/N时，计算处理结果输出使能在T/N时刻打开，下一个场同步来临时关闭使能。
第二帧同步对齐控制单元82用于当时间差Tp大于等于T/N且Tp小于T*2/N时，计算处理结果输出使能在T*2/N时刻打开，在下一个场同步来临时关闭使能。
第三帧同步对齐控制单元83用于依次类推，当时间差Tp大于等于T*(N-1)/N且Tp小于T时，计算处理结果输出使能在T时刻打开，在下一个场同步来临时关闭使能。
第四帧同步对齐控制单元84用于当时间差Tp大于等于T时，计算处理结果输出使能在Tp时刻打开，由于输入视频帧率较计算处理速度快，计算设备已无法实时处理，因此，通过自适应输出帧同步控制信号控制外部设备的视频数据的帧率。
请见图5，图5为本发明提供的提升视频数据流帧的同步装置一实施例的连接示意图，在本实施例中，该提升视频数据流帧的同步装置，包括上述的同步设备100及与同步设备100相连接的视频帧输入设备200，其中，视频帧输入设备200设于同步设备100的前端用于输入视频帧数据。同步设备100用于接收接收视频帧输入设备200传送过来的视频帧数据，对视频帧数据进行解析，解析出帧数据、帧同步信号，采用一基准时钟对帧同步信号进行检测，由此检测出视频帧周期T，以及视频分辨率信息，同时在基准时钟基础上，产生一个新场同步信号；解析完帧数据，根据视频流数据类型，按双字节对齐方式组包传输到指定缓存区域，缓存区域的大小，根据视频帧画面的大小自适应申请缓存空间；当前帧数据传输结束时，产生第一结束中断信号INT1；根据第一结束中断信号INT1中的当前帧数据传输来结束中断，从对应的缓存区域获取当前帧数据，通过对当前帧数据进行图像算法处理后，将处理结果传输到缓存区域，待处理结果传输完成，产生当前帧结果，传输完成第二结束中断信号INT2；根据处理结果传输完成中断，计算出第一结束中断信号INT1和INT2之间的时间差Tp，根据时间差Tp大小不同，进行线性分段处理。
参见图6，图6为本发明提供的提升视频数据流帧的同步系统一实施例的功能框图，在本实施例中，该提升视频数据流帧的同步系统包括上述的同步设备100、第一视频采集设备300、第二视频采集设备400和显示设备500，同步设备100分别与第一视频采集设备300、第二视频采集设备400和显示设备500电连接。其中，第一视频采集设备300采用第一相机。第二视频采集设备400采用第二相机。显示设备500采用显示器。显示器可以为LED显示器，也可以为LCD显示器。其中，第一视频采集设备300用于采集第一视频讯息。第二视频采集设备400用于采集第二视频讯息。同步设备100用于分别接收第一视频采集设备300采集的第一视频讯息和第二视频采集设备400采集的第二视频讯息，对第一视频讯息和第二视频讯息进行解析，解析出帧数据、帧同步信号，采用一基准时钟对帧同步信号进行检测，由此检测出视频帧周期T，以及视频分辨率信息，同时在基准时钟基础上，产生一个新场同步信号；解析完第一视频讯息和第二视频讯息，根据视频流数据类型，按双字节对齐方式组包传输到指定缓存区域，缓存区域的大小，根据视频帧画面的大小自适应申请缓存空间；当前帧数据传输结束时，产生第一结束中断信号INT1；根据第一结束中断信号INT1中的当前帧数据传输来结束中断，从对应的缓存区域获取当前帧数据，通过对当前帧数据进行图像算法处理后，将处理结果传输到缓存区域，待处理结果传输完成，产生当前帧结果，传输完成第二结束中断信号INT2；根据处理结果传输完成中断，计算出第一结束中断信号INT1和INT2之间的时间差Tp，根据时间差Tp大小不同，进行线性分段处理。并通过显示设备500对线性分段处理的数据进行显示。
本实施例公开的提升视频数据流帧的同步方法、设备、装置及系统，同现有技术相比，通过对视频帧数据进行解析，解析出帧数据和帧同步信号，采用一基准时钟对帧同步信号进行检测，检测出视频帧周期T、以及视频分辨率信息，同时在基准时钟的基础上，产生一个新场同步信号；解析完帧数据，根据视频流数据类型，按双字节对齐方式组包传输到指定缓存区域，缓存区域的大小，根据视频帧画面的大小自适应申请缓存空间；当前帧数据传输结束时，产生第一结束中断信号INT1；根据第一结束中断信号INT1中的当前帧数据传输来结束中断，从对应的缓存区域获取当前帧数据，通过对当前帧数据进行图像算法处理后，将处理结果传输到缓存区域，待处理结果传输完成，产生当前帧结果，传输完成第二结束中断信号INT2；根据处理结果传输完成中断，计算出第一结束中断信号INT1和INT2之间的时间差Tp，根据时间差Tp大小不同，进行线性分段处理。本发明公开的提升视频数据流帧的同步方法、设备、装置及系统，主要是解决高帧率视频数据因帧算法不同，处理时间呈现出非线性、周期不确定而导致帧同步输出精度不高的问题，通过此方法可自适应提高视频数据帧，提高帧同步输出精度。
尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
Claims (10)
1.一种提升视频数据流帧的同步方法，其特征在于，包括以下步骤：
对视频帧数据进行解析，解析出帧数据和帧同步信号，采用一基准时钟对帧同步信号进行检测，检测出视频帧周期T、以及视频分辨率信息，同时在基准时钟的基础上，产生一个新场同步信号；
解析完帧数据，根据视频流数据类型，按双字节对齐方式组包传输到指定缓存区域，缓存区域的大小，根据视频帧画面的大小自适应申请缓存空间；当前帧数据传输结束时，产生第一结束中断信号INT1；
根据第一结束中断信号INT1中的当前帧数据传输来结束中断，从对应的缓存区域获取当前帧数据，通过对当前帧数据进行图像算法处理后，将处理结果传输到缓存区域，待处理结果传输完成，产生当前帧结果，传输完成第二结束中断信号INT2；
根据处理结果传输完成中断，计算出第一结束中断信号INT1和INT2之间的时间差Tp，根据时间差Tp大小不同，进行线性分段处理。
2.如权利要求1所述的提升视频数据流帧的同步方法，其特征在于，所述根据处理结果传输完成中断，计算出第一结束中断信号INT1和INT2之间的时间差Tp，根据时间差Tp大小不同，进行线性分段处理的步骤包括：
预先设定时间增益常数N，当Tp小于T/N时，计算处理结果输出使能在T/N时刻打开，下一个场同步来临时关闭使能；
当Tp大于等于T/N且Tp小于T*2/N时，计算处理结果输出使能在T*2/N时刻打开，在下一个场同步来临时关闭使能；
当Tp大于等于T*(N-1)/N且Tp小于T时，计算处理结果输出使能在T时刻打开，在下一个场同步来临时关闭使能；
当Tp大于等于T时，计算处理结果输出使能在Tp时刻打开。
3.一种提升视频数据流帧的同步设备，其特征在于，包括：
帧数据解析模块(10)，用于对视频帧数据进行解析，解析出帧数据和帧同步信号；
帧同步检测模块(20)，用于采用一基准时钟对帧同步信号进行检测，检测出视频帧周期T、以及视频分辨率信息，同时在基准时钟的基础上，产生一个新场同步信号；
帧数据分包传输模块(30)，用于解析完帧数据，根据视频流数据类型，按双字节对齐方式组包传输到指定缓存区域，缓存区域的大小，根据视频帧画面的大小自适应申请缓存空间；
帧传输结束检测模块(40)，用于当前帧数据传输结束时，产生第一结束中断信号INT1；
帧数据处理模块(50)，用于根据第一结束中断信号INT1中的当前帧数据传输来结束中断，从对应的缓存区域获取当前帧数据，通过对当前帧数据进行图像算法处理后，将处理结果传输到缓存区域；
帧处理结束检测模块(60)，用于待处理结果传输完成，产生当前帧结果，传输完成第二结束中断信号INT2；
处理结果输出模块(70)，用于根据处理结果传输完成中断，计算出第一结束中断信号INT1和INT2之间的时间差Tp；
帧同步对齐控制模块(80)，用于根据时间差Tp大小不同，进行线性分段处理。
4.如权利要求3所述的提升视频数据流帧的同步设备，其特征在于，所述帧同步对齐控制模块(80)包括：
第一帧同步对齐控制单元(81)，用于预先设定时间增益常数N，当Tp小于T/N时，计算处理结果输出使能在T/N时刻打开，下一个场同步来临时关闭使能；
第二帧同步对齐控制单元(82)，用于当Tp大于等于T/N且Tp小于T*2/N时，计算处理结果输出使能在T*2/N时刻打开，在下一个场同步来临时关闭使能；
第三帧同步对齐控制单元(83)，用于当Tp大于等于T*(N-1)/N且Tp小于T时，计算处理结果输出使能在T时刻打开，在下一个场同步来临时关闭使能；
第四帧同步对齐控制单元(84)，用于当Tp大于等于T时，计算处理结果输出使能在Tp时刻打开。
5.一种提升视频数据流帧的同步装置，包括如权利要求3或4所述的同步设备(100)及与所述同步设备(100)相连接的视频帧输入设备(200)，所述视频帧输入设备(200)设于所述同步设备(100)的前端用于输入视频帧数据。
6.一种提升视频数据流帧的同步系统，包括如权利要求3或4所述的同步设备(100)、第一视频采集设备(300)、第二视频采集设备(400)和显示设备(500)，所述同步设备(100)分别与所述第一视频采集设备(300)、所述第二视频采集设备(400)和所述显示设备(500)电连接。
7.如权利要求6所述的提升视频数据流帧的同步系统，所述第一视频采集设备(300)为第一相机。
8.如权利要求6所述的提升视频数据流帧的同步系统，所述第二视频采集设备(400)为第二相机。
9.如权利要求6所述的提升视频数据流帧的同步系统，所述显示设备(500)为显示器。
10.如权利要求9所述的提升视频数据流帧的同步系统，所述显示器为LED显示器或LCD显示器。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110519622.5A CN113271476B (zh) | 2021-05-12 | 2021-05-12 | 一种提升视频数据流帧的同步方法、设备、装置及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110519622.5A CN113271476B (zh) | 2021-05-12 | 2021-05-12 | 一种提升视频数据流帧的同步方法、设备、装置及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113271476A true CN113271476A (zh) | 2021-08-17 |
| CN113271476B CN113271476B (zh) | 2022-07-12 |
Family
ID=77230820
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110519622.5A Active CN113271476B (zh) | 2021-05-12 | 2021-05-12 | 一种提升视频数据流帧的同步方法、设备、装置及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113271476B (zh) |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101697554A (zh) * | 2009-09-27 | 2010-04-21 | 华中科技大学 | 一种p2p流媒体视频数据传输调度方法 |
| US20130063659A1 (en) * | 2011-09-09 | 2013-03-14 | Sony Corporation | Transmitting device, receiving device, communication system, transmission method, reception method, and program |
| CN103026719A (zh) * | 2010-07-30 | 2013-04-03 | 德国电信股份有限公司 | 用于在视频比特流和输出视频序列之间的时间同步的方法和装置 |
| CN105681816A (zh) * | 2015-12-31 | 2016-06-15 | 深圳市瑞彩电子技术有限公司 | 一种视频数据传输装置和方法 |
| CN109379625A (zh) * | 2018-11-27 | 2019-02-22 | Oppo广东移动通信有限公司 | 视频处理方法、装置、电子设备和计算机可读介质 |
| CN109644290A (zh) * | 2018-11-02 | 2019-04-16 | 上海极清慧视科技有限公司 | 数据转接装置、数据采集装置及系统、方法 |
| CN111327789A (zh) * | 2020-03-05 | 2020-06-23 | 珠海亿智电子科技有限公司 | 一种显示信号同步方法和转换装置 |
| US20210043821A1 (en) * | 2019-03-29 | 2021-02-11 | Cree, Inc. | Active control of light emitting diodes and light emitting diode displays |
-
2021
- 2021-05-12 CN CN202110519622.5A patent/CN113271476B/zh active Active
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101697554A (zh) * | 2009-09-27 | 2010-04-21 | 华中科技大学 | 一种p2p流媒体视频数据传输调度方法 |
| CN103026719A (zh) * | 2010-07-30 | 2013-04-03 | 德国电信股份有限公司 | 用于在视频比特流和输出视频序列之间的时间同步的方法和装置 |
| US20130063659A1 (en) * | 2011-09-09 | 2013-03-14 | Sony Corporation | Transmitting device, receiving device, communication system, transmission method, reception method, and program |
| CN105681816A (zh) * | 2015-12-31 | 2016-06-15 | 深圳市瑞彩电子技术有限公司 | 一种视频数据传输装置和方法 |
| CN109644290A (zh) * | 2018-11-02 | 2019-04-16 | 上海极清慧视科技有限公司 | 数据转接装置、数据采集装置及系统、方法 |
| CN109379625A (zh) * | 2018-11-27 | 2019-02-22 | Oppo广东移动通信有限公司 | 视频处理方法、装置、电子设备和计算机可读介质 |
| US20210043821A1 (en) * | 2019-03-29 | 2021-02-11 | Cree, Inc. | Active control of light emitting diodes and light emitting diode displays |
| CN111327789A (zh) * | 2020-03-05 | 2020-06-23 | 珠海亿智电子科技有限公司 | 一种显示信号同步方法和转换装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113271476B (zh) | 2022-07-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2020244032A1 (zh) | 用于检测人脸图像的方法和装置 | |
| US20070011711A1 (en) | Method and apparatus for real-time distributed video analysis | |
| US8879789B1 (en) | Object analysis using motion history | |
| CN111629264B (zh) | 一种基于web的分离式前端图像渲染方法 | |
| US11599974B2 (en) | Joint rolling shutter correction and image deblurring | |
| CN106412474B (zh) | 一种高速无损超高清工业视觉检测方法及系统 | |
| CN110798682B (zh) | 一种延时测试系统 | |
| CN113992860B (zh) | 基于云边协同的行为识别方法、装置、电子设备和介质 | |
| CN114820758A (zh) | 植物生长高度测量方法、装置、电子设备及介质 | |
| CN113271476B (zh) | 一种提升视频数据流帧的同步方法、设备、装置及系统 | |
| CN114173171A (zh) | 一种多通道的大数据信息同步存储及回放方法 | |
| CN107071267B (zh) | 一种用于视线跟踪系统的双路同步亮暗瞳图像采集方法 | |
| CN111696143B (zh) | 一种事件数据的配准方法与系统 | |
| CN117274100A (zh) | 一种视频图像的去雾方法和医用内窥镜摄像系统 | |
| JPWO2020039897A1 (ja) | 駅監視システム及び駅監視方法 | |
| CN113947721B (zh) | 娱乐系统测试的图像校验方法及系统 | |
| JPH05258047A (ja) | 画像解析装置 | |
| CN117896611A (zh) | 一种cameralink高速相机信号的相位同步处理方法及装置 | |
| WO2023223704A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
| US11758286B1 (en) | Method and electronic device of correcting frame for optical camera communication | |
| KR20150034953A (ko) | 고속 카메라 이미지 처리 장치 | |
| KR101938270B1 (ko) | 이동 객체 모니터링을 위한 이미지 처리 장치 | |
| JP2513759B2 (ja) | ビデオレ―ト画像処理方式 | |
| WO2021117233A1 (ja) | 動画分離装置、プログラム及び動画分離方法 | |
| CN115842911A (zh) | 一种实时视频延时计算方法以及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |