CN116456144B - 一种无帧缓存视频流处置输出装置和方法 - Google Patents
一种无帧缓存视频流处置输出装置和方法 Download PDFInfo
- Publication number
- CN116456144B CN116456144B CN202310699778.5A CN202310699778A CN116456144B CN 116456144 B CN116456144 B CN 116456144B CN 202310699778 A CN202310699778 A CN 202310699778A CN 116456144 B CN116456144 B CN 116456144B
- Authority
- CN
- China
- Prior art keywords
- data
- signal
- video
- video data
- output
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims abstract description 69
- 238000000034 method Methods 0.000 title claims abstract description 19
- 239000000872 buffer Substances 0.000 claims abstract description 30
- 230000003321 amplification Effects 0.000 claims abstract description 13
- 238000003199 nucleic acid amplification method Methods 0.000 claims abstract description 13
- 230000009467 reduction Effects 0.000 claims abstract description 10
- 230000004069 differentiation Effects 0.000 claims abstract description 9
- 238000013461 design Methods 0.000 claims description 6
- 238000004364 calculation method Methods 0.000 claims description 3
- 238000003860 storage Methods 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
- H04N21/4331—Caching operations, e.g. of an advertisement for later insertion during playback
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0105—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level using a storage device with different write and read speed
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Controls And Circuits For Display Device (AREA)
- Television Systems (AREA)
Abstract
本发明公开了一种无帧缓存视频流处置输出装置，包括：处置模式判断模块，用于获取视频数据处置请求，根据处置请求判断视频数据的处置类型；视频数据处置模块，用于对接收到的视频数据进行差异化处置并得到处置后的视频数据；输出控制模块，用于将处置后的视频数据进行输出。通过调整输出时序支持视频的缩小与放大以及任意大小的行缓存，可根据需求来灵活配置行缓存；无需缓存一整帧或半帧，仅需缓存若干行，降低了芯片对缓存大小的需求。相较于采用帧缓存的方案节省了的存储面积，从而降低了内部缓存资源消耗。
Description
技术领域
本发明涉及视频处理技术领域，尤其涉及一种无帧缓存视频流处置输出装置和方法。
背景技术
视频流传输中需要有行同步信号，帧同步信号和数据使能信号。对于显示设备来说，不同的显示设备对于帧同步信号，行同步信号以及数据使能信号的时序要求各有不同。为了适配各种不同规格尺寸的显示设备，通常视频流传输电路如果需要进行缩放，都先将缩放后的视频流存入一个帧缓存或者半帧缓存，再从缓存中读取数据，重新产生不同的时序来匹配不同的屏幕显示设备。帧缓存或者半帧缓存会占据芯片内部非常大的资源，典型情况下会消耗50%以上的芯片内部资源。大容量的缓存会导致芯片面积增大，增加芯片的制造成本，同时系统的运行整体功耗增大，对供电电源的要求也会更高。
发明内容
为解决背景技术中存在的技术问题，本发明提出一种无帧缓存视频流处置输出装置和方法。
本发明提出的一种无帧缓存视频流处置输出装置，包括：
处置模式判断模块，用于获取视频数据处置请求，根据处置请求判断视频数据的处置类型；
视频数据处置模块，用于对接收到的视频数据进行差异化处置并得到处置后的视频数据；
所述视频数据处置模块包括：视频缩小模块、视频放大模块、行缓存写入控制模块、行缓存模块、行缓存读出控制模块；所述差异化处置具体包括：
当处置类型为视频缩小时，所述视频缩小模块用于接收并缩小视频数据，所述行缓存写入控制模块用于将缩小后的视频数据进行行缓存，所述行缓存模块用于视频数据的行缓存；
所述行缓存读出控制模块用于逐行从行缓存中读出缩小后的视频数据，并将缩小后的视频数据进行传输；
当处置类型为视频放大时，所述行缓存写入控制模块直接接收输入的视频数据，将视频数据进行行缓存，所述行缓存模块用于视频数据的行缓存；
所述行缓存读出控制模块用于从行缓存中读取输入的视频数据，所述视频放大模块用于将视频数据放大后，再将放大后的视频数据进行传输；
输出控制模块，用于将处置后的视频数据进行输出；接收来自行缓存读出控制模块与视频放大模块的数据以及其有效信号（lb_data_out /up_data_out和lb_data_vld /up_data_vld），并输出视频数据output_data及其有效信号output_vld；当模式选择为视频放大模式时，视频放大模块的数据up_data_out及其有效信号up_data_vld送至输出控制模块；同时视频放大模块的忙信号up_data_busy直接驱动output_busy信号给到行缓存读出控制模块。当模式选择为视频缩小模式时，output_data和output_vld直接来自于行缓存读出控制模块的lb_data_out及其有效信号lb_data_vld，并将送至行缓存读出控制模块的忙信号output_busy置为0，即行缓存读出控制模块可以一直输出数据。
优选地，还包括：输入时序处理模块、输出时序控制模块；
所述输入时序处理模块用于接收原始的时序信号，并根据时序信号生成输入控制信号；
所述输出时序控制模块用于获取寄存器配置表，根据寄存器配置表生成视频数据的处置控制信号，所述处置控制信号包括：起始信号、第二帧复位信号、第二行同步信号。
优选地，所述原始的时序信号包括：帧同步信号，“接收原始的时序信号，并根据时序信号生成输入控制信号”具体为：根据帧同步信号，将帧同步信号转变成脉冲信号后，再进行移位生成帧同步复位信号以及起始标志信号。
优选地，还包括时序差计算模块，所述时序差计算模块用于计算输入输出的时序差额，根据16个配置寄存器以及行缓存行数，计算当前配置输出时序是否满足当前电路的设计，如满足则产生配置成功的中断信号。
本发明提出的一种无帧缓存视频流处置输出方法，包括以下步骤：
获取视频数据处置请求；
根据处置请求判断视频数据的处置类型；
对接收到的视频数据进行差异化处置并得到处置后的视频数据；
所述差异化处置具体包括：
当处置类型为视频缩小时，接收并缩小视频数据，将缩小后的视频数据进行行缓存；
逐行从行缓存中读出缩小后的视频数据，并将缩小后的视频数据进行传输；
当处置类型为视频放大时，直接接收输入的视频数据，将视频数据进行行缓存；
从行缓存中读取输入的视频数据，将视频数据放大后，再将放大后的视频数据进行传输。
将处置后的视频数据根据对应的控制信号进行输出；接收来自行缓存读出控制与视频放大的数据以及其有效信号（lb_data_out /up_data_out和lb_data_vld /up_data_vld），并输出视频数据output_data及其有效信号output_vld；当模式选择为视频放大模式时，根据视频放大的数据up_data_out及其有效信号up_data_vld输出控制；同时视频放大的忙信号up_data_busy直接驱动output_busy信号进行行缓存读出控制；当模式选择为视频缩小模式时，output_data和output_vld直接来自于行缓存读出控制的lb_data_out及其有效信号lb_data_vld，并将送至行缓存读出控制的忙信号output_busy置为0，即行缓存读出控制模块可以一直输出数据。
优选地，还包括：接收原始的时序信号，并根据时序信号生成输入控制信号。
优选地，所述原始的时序信号包括：帧同步信号，“接收原始的时序信号，并根据时序信号生成输入控制信号”具体为：根据帧同步信号，将帧同步信号转变成脉冲信号后，再进行移位生成帧同步复位信号以及起始标志信号。
优选地，获取寄存器配置表，根据寄存器配置表生成视频数据的处置控制信号，所述处置控制信号包括：起始信号、第二帧复位信号、第二行同步信号。
本发明中，所提出的无帧缓存视频流处置输出装置和方法，通过调整输出时序支持视频的缩小与放大以及任意大小的行缓存，可根据需求来灵活配置行缓存；无需缓存一整帧或半帧，仅需缓存若干行，降低了芯片对缓存大小的需求。相较于采用帧缓存的方案节省了的存储面积，从而降低了内部缓存资源消耗。
附图说明
图1为本发明提出的一种无帧缓存视频流处置输出装置硬件电路结构示意图；
图2为本发明提出的一种无帧缓存视频流处置输出装置视频缩小硬件电路结构示意图；
图3为本发明提出的一种无帧缓存视频流处置输出装置视频放大硬件电路结构示意图；
图4为本发明提出的一种无帧缓存视频流处置输出装置的输入时序处理模块的部分时序调整电路结构示意图；
图5为本发明提出的一种无帧缓存视频流处置输出装置行缓存读写控制的的结构示意图；
图6为本发明提出的一种无帧缓存视频流处置输出装置的时序差计算模块电路的结构示意图；
图7为本发明提出的一种无帧缓存视频流处置输出方法的工作流程结构示意图。
具体实施方式
参照图1-3，本发明提出的一种无帧缓存视频流处置输出装置，包括：
处置模式判断模块，用于获取视频数据处置请求，根据处置请求判断视频数据的处置类型；
视频数据处置模块，用于对接收到的视频数据进行差异化处置并得到处置后的视频数据；
输出控制模块，用于将处置后的视频数据进行输出。
需要进一步说明的是，输出控制模块用以控制最终的输出，模块接收来自行缓存读出控制与视频放大模块的数据以及其有效信号（lb_data_out /up_data_out和lb_data_vld /up_data_vld），并输出视频数据output_data及其有效信号output_vld。当模式选择为视频放大模式时，视频放大模块的数据up_data_out及其有效信号up_data_vld送至输出控制模块。同时视频放大模块的忙信号up_data_busy直接驱动output_busy信号给到行缓存读出控制模块。当模式选择为视频缩小模式时，output_data和output_vld直接来自于行缓存读出控制模块的lb_data_out及其有效信号lb_data_vld，并将送至行缓存读出控制模块的忙信号output_busy置为0，即行缓存读出控制模块可以一直输出数据。
需要进一步说明的是，原始的时序信号包括帧同步信号VSYNC_IN，全局复位信号reset。
具体的，如图1、图2、图5所示，视频数据处置模块包括：视频缩小模块、视频放大模块、行缓存写入控制模块、行缓存模块、行缓存读出控制模块；差异化处置具体包括：
当处置类型为视频缩小时，视频缩小模块用于接收并缩小视频数据，行缓存写入控制模块用于将缩小后的视频数据进行行缓存，行缓存模块用于视频数据的行缓存；
行缓存读出控制模块用于逐行从行缓存中读出缩小后的视频数据，并将缩小后的视频数据进行传输；
当处置类型为视频放大时，行缓存写入控制模块直接接收输入的视频数据，将视频数据进行行缓存，行缓存模块用于视频数据的行缓存；
行缓存读出控制模块用于从行缓存中读取输入的视频数据，视频放大模块用于将视频数据放大后，再将放大后的视频数据进行传输。
行缓存写入控制模块在第一行同步信号HSYNC_IN的控制下，用于处理与行缓存模块之间的握手通讯。
行缓存写入控制模块接收视频数据，将输入的位宽数据转换为行缓存位宽大小的数据后写入到行缓存模块，例如输入位宽为24bit，行缓存位宽为32bit，行缓存写入控制模块会按照32 bit重新排布输入数据后，再依次写入行缓存模块。行缓存写入控制模块不存在握手流控，只要有数据就会不断往行缓存模块写入。当为缩小模式时，行缓存写入控制模块接收来自视频缩小模块的数据（dn_data_out/dn_data_vld）并将其写入行缓存中。
行缓存写入控制模块不断将数据写入行缓存的每一个buffer中，当写完一行之后，行缓存的写指针（write pointer）会增自加1， 当写指针指向最后一块缓存后，再自增1会重新回到0，同时写指针循环标志（write wrap flag）会取反。行缓存的读指针（readpointer）会增自加1， 当写指针指向最后一块缓存后，再自增1会重新回到0，同时写指针循环标志（read wrap flag）会取反。行缓存模块中的数据占用空间的大小的计算方式为：
行缓存读出控制模块用于读出行缓存中的数据。当处置类型为视频缩小时，行缓存读出模块只需要根据输出时序逐行将数据从行缓存模块中读出即可。当收到起始信号之后，行缓存读出控制模块进入工作状态，当收到第二行同步信号之后，开始从缓存中取数据输出，直到输出完一行数据之后再进入到等待第二行同步信号状态，等收到下一个第二行同步信号之后，继续读取一行数据输出直到将整帧图像输出完毕后进入空闲状态。
行缓存模块主要用于存储行数据，分三个功能：
（1）行缓存模块接收来自于行缓存写入控制模块的数据，将数据依次写入到内部的行缓存之中；
（2）行缓存模块接收来自于行缓存读出控制模块的请求，将数据返回给行缓存读出控制模块；
（3）行缓存内部由循环缓存组成，需要根据寄存器配置表中的hsize_i与读写请求的数量对读写指针做相应的控制，并将读写端口指向正确的行缓存。
行缓存模块处理来自行缓存写入控制模块与行缓存读出控制模块的读请求信号lb_rreq和写请求信号lb_wreq，并将接收到来自于行缓存写入控制模块的数据lb_wdata写入到缓存中。以及将行缓存读出控制模块所需的数据lb_rdata返回给行缓存读出模块，行缓存模块包含有N行的行缓存，N的具体数值可以根据实际的场景与需求来决定。
需要进一步说明的是，行缓存读出控制模块接收来自输出时序控制模块的控制信号：起始标志信号tx_start和帧复位信号tx_freset，当接收到帧复位信号tx_freset时，模块进入复位状态以保证每一帧起始时状态一定在初始状态。当收到起始标志信号tx_start信号时，模块进入工作状态，随后每收到行同步信号之后将会持续对行缓存模块进行请求读出一行数据并输出。
当模式选择为视频缩小模式时，行缓存写入控制模块接收来自视频缩小模块的数据dn_data_out和dn_data_vld，将其逐行写入到行缓存模块之中。
当模式选择为视频放大模式时，行缓存写入控制模块直接接收来自外部输入的视频数据，并将其逐行写入到行缓存模块。
特别地，视频放大模块主要功能是将输入来的低分辨率视频流放大为高分辨率的视频流，视频流放大模块需要负责行缓存数据的请求以及需要保证输出视频时序，输出视频时序需要严格按照输出时序控制模块的控制来输出视频数据以及处置控制信号。视频流放大模块的工作模式如下：
步骤1：接收到输出时序控制模块的复位信号后，复位自身所有状态。
步骤2：接收到输出时序控制模块的起始信号后，进入准备状态。
步骤3：接收到输出时序控制模块的第一个有效数据起始信号后，开始请求缓存读出数据，接收到足够的输入数据并经过计算之后，开始按行输出一行图像数据。
步骤4：按行输出一行图像数据后，如果流水线需要预先读入某些数据填满流水线，则需要开始先读取数据取填充流水线。当流水线填满可以输出下一行数据时，拉高对行缓存请求的繁忙信号，等待接收下一个输出时序控制模块的有效数据起始信号再开始输出下一行数据与读取后续所需要的数据。
具体的，如图1-3所示，还包括：输入时序处理模块、输出时序控制模块；
输入时序处理模块用于接收原始的时序信号，并根据时序信号生成输入控制信号；
输出时序控制模块用于获取寄存器配置表，根据寄存器配置表生成视频数据的处置控制信号，处置控制信号包括：起始信号、第二帧复位信号、第二行同步信号。
具体的，如图1和图4所示，原始的时序信号包括：帧同步信号，“接收原始的时序信号，并根据时序信号生成输入控制信号”具体为：根据帧同步信号，将帧同步信号转变成脉冲信号后，再进行移位生成帧同步复位信号以及起始标志信号。
需要进一步说明的是，输入时序处理模块用于接收原始的时序信号，包括帧同步信号VSYNC_IN，全局复位信号reset。输入时序处理模块根据接收到的帧同步信号VSYNC_IN，产生一个帧同步复位信号rx_freset，延时一定时间后再产生一个起始标志信号rx_start给到后续的视频流缩小模块与行缓存写入控制模块。用于每一帧的复位与起始，以此来保证每一帧的独立处理，以免某一帧发生错误时影响到后续帧的处理。
特别地，如图4所示，当输入时序处理模块接收到帧同步信号VSYNC_IN后，首先会将帧同步信号VSYNC_IN转变为脉冲信号，然后会将放入深度为8，初始值复位值为0的帧同步移位寄存电路中。电路中的帧同步移位寄存器会依次将帧同步脉冲信号从移位寄存器0移动到移位寄存器7直到移出。当移位寄存器0到移位寄存器4存在帧同步脉冲信号时，输入时序控制模块会产生一个帧同步复位信号rx_freset给到后续输入数据处理的相关模块，用于在每帧起始时复位各个模块的自身状态。当移位寄存器7存在帧同步脉冲信号时，输入时序控制模块将会产生起始标志信号rx_start给到后续的相关模块之中，用于启动后续模块开始工作。该设计主要是为了增强电路运行的稳定性，以免当某一帧发生一些意外错误时会导致帧后续的继续错误。
需要进一步说明的是，输出时序控制模块用于产生视频数据的处置控制信号，处置控制信号包括起始信号tx_start、第二帧同步信号VSYNC_OUT、帧复位信号tx_freset、第二行同步信号HSYNC_OUT。第二行同步信号HSYNC_OUT送往行缓存读出控制模块，用于控制其访问缓存模块，第二帧同步信号VSYNC_OUT与第二行同步信号HSYNC_OUT还需要输出到外部以供外部使用。
具体的，如图1和图6所示，还包括时序差计算模块，时序差计算模块用于计算输入输出的时序差额，根据16个配置寄存器以及行缓存行数，计算当前配置输出时序是否满足当前电路的设计，如满足则产生配置成功的中断信号。
需要进一步说明的是，时序差计算模块在配置完成之后开始计算当前时序配置是否能够满足要求，时序差计算模块共需要配置的16个寄存器，有输入帧同步行数（vsync_i），输入垂直方向后端无效行数（vbp_i），输入行数（vsize_i），输入垂直方向前端端无效行数（vfp_i），输入行同步时钟数（hsync_i），输入水平方向后端无效数据数（vbp_i），输入水平方向有效数据数（hsize_i），输入水平方向前端无效数据数（hfp_i），输出帧同步行数（vsync_o），输出垂直方向后端无效行数（vbp_o），输出行数（vsize_o），输出垂直方向前端无效行数（vfp_o），输出行同步时钟数（hsync_o），输出水平方向后端无效数据数（vbp_o），输出水平方向有效数据数（hsize_o），输出水平方向前端无效数据数（hfp_o）。其中这些配置必须满足以下的三个条件，才能够让输入与输出的时序匹配，从而不会使得行缓存溢出，电路结构图见图4，公式如下：
hline_i = hsync_i + hbp_i + hsize_i + hfp_i
hline_o = hsync_o + hbp_o + hsize_o + hfp_o
vline_i = vsync_i + vbp_i + vsize_i + vfp_i
vline_o = vsync_o + vbp_o + vsize_o + vfp_o, line_buffer_num = 电路中行缓存的行数。
条件一：(vsync_i + vbp_i) × hline_i === (vsync_o + vbp_o) × hline_o
条件二：vline_i × hline_i === vline_o × hline_o
条件三：abs((vsize_i × hline_i) - (vsize_o × hline_o))<（line_buffer_ num × min(hline_i, hline_o))
条件一表明输入的帧率（fps）与输出的帧率必须一致；
条件二表明输入图像的垂直扫描后场无效时间与输出图像的垂直扫描后场无效时间必须一致，即输入图像数据第一次写入行缓存的时间与输出图像第一次从行缓存中读出的时间需要一致；
条件三表明输入图像有效行的时间与输出图像有效行的时间差需要小于行缓存数乘以输入输出中最小的一行时间。
如图7所示，一种无帧缓存视频流处置输出方法，包括以下步骤：
获取视频数据处置请求；
根据处置请求判断视频数据的处置类型；
对接收到的视频数据进行差异化处置并得到处置后的视频数据；
差异化处置具体包括：
当处置类型为视频缩小时，接收并缩小视频数据，将缩小后的视频数据进行行缓存；
逐行从行缓存中读出缩小后的视频数据，并将缩小后的视频数据进行传输；
当处置类型为视频放大时，直接接收输入的视频数据，将视频数据进行行缓存；
从行缓存中读取输入的视频数据，将视频数据放大后，再将放大后的视频数据进行传输。
将处置后的视频数据根据对应的控制信号进行输出；接收来自行缓存读出控制与视频放大的数据以及其有效信号（lb_data_out /up_data_out和lb_data_vld /up_data_vld），并输出视频数据output_data及其有效信号output_vld；当模式选择为视频放大模式时，根据视频放大的数据up_data_out及其有效信号up_data_vld输出控制；同时视频放大的忙信号up_data_busy直接驱动output_busy信号进行行缓存读出控制；当模式选择为视频缩小模式时，output_data和output_vld直接来自于行缓存读出控制的lb_data_out及其有效信号lb_data_vld，并将送至行缓存读出控制的忙信号output_busy置为0，即行缓存读出控制模块可以一直输出数据。
具体的，还包括：接收原始的时序信号，并根据时序信号生成输入控制信号。
具体的，原始的时序信号包括：帧同步信号，“接收原始的时序信号，并根据时序信号生成输入控制信号”具体为：根据帧同步信号，将帧同步信号转变成脉冲信号后，再进行移位生成帧同步复位信号以及起始标志信号。
具体的，获取寄存器配置表，根据寄存器配置表生成视频数据的处置控制信号，处置控制信号包括：起始信号、第二帧复位信号、第二行同步信号。
以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。
Claims (8)
1.一种无帧缓存视频流处置输出装置，其特征在于，包括：
处置模式判断模块，用于获取视频数据处置请求，根据处置请求判断视频数据的处置类型；
视频数据处置模块，用于对接收到的视频数据进行差异化处置并得到处置后的视频数据；
所述视频数据处置模块包括：视频缩小模块、视频放大模块、行缓存写入控制模块、行缓存模块、行缓存读出控制模块；所述差异化处置具体包括：
当处置类型为视频缩小时，所述视频缩小模块用于接收并缩小视频数据，所述行缓存写入控制模块用于将缩小后的视频数据进行行缓存，所述行缓存模块用于视频数据的行缓存；
所述行缓存读出控制模块用于逐行从行缓存中读出缩小后的视频数据，并将缩小后的视频数据进行传输；
当处置类型为视频放大时，所述行缓存写入控制模块直接接收输入的视频数据，将视频数据进行行缓存，所述行缓存模块用于视频数据的行缓存；
所述行缓存读出控制模块用于从行缓存中读取输入的视频数据，所述视频放大模块用于将视频数据放大后，再将放大后的视频数据进行传输；
输出控制模块，用于将处置后的视频数据进行输出；接收来自行缓存读出控制模块与视频放大模块的数据以及其有效信号（lb_data_out /up_data_out和lb_data_vld /up_data_vld），并输出视频数据output_data及其有效信号output_vld；当模式选择为视频放大模式时，视频放大模块的数据up_data_out及其有效信号up_data_vld送至输出控制模块；同时视频放大模块的忙信号up_data_busy直接驱动output_busy信号给到行缓存读出控制模块；当模式选择为视频缩小模式时，output_data和output_vld直接来自于行缓存读出控制模块的lb_data_out及其有效信号lb_data_vld，并将送至行缓存读出控制模块的忙信号output_busy置为0，即行缓存读出控制模块可以一直输出数据。
2.根据权利要求1所述的无帧缓存视频流处置输出装置，其特征在于，还包括：输入时序处理模块、输出时序控制模块；
所述输入时序处理模块用于接收原始的时序信号，并根据时序信号生成输入控制信号；
所述输出时序控制模块用于获取寄存器配置表，根据寄存器配置表生成视频数据的处置控制信号，所述处置控制信号包括：起始信号、第二帧复位信号、第二行同步信号。
3.根据权利要求2所述的无帧缓存视频流处置输出装置，其特征在于，所述原始的时序信号包括：帧同步信号，接收原始的时序信号，并根据时序信号生成输入控制信号具体为：根据帧同步信号，将帧同步信号转变成脉冲信号后，再进行移位生成帧同步复位信号以及起始标志信号。
4.根据权利要求1所述的无帧缓存视频流处置输出装置，其特征在于，还包括时序差计算模块，所述时序差计算模块用于计算输入输出的时序差额，根据16个配置寄存器以及行缓存行数，计算当前配置输出时序是否满足当前电路的设计，如满足则产生配置成功的中断信号。
5.一种无帧缓存视频流处置输出方法，其特征在于，包括以下步骤：
获取视频数据处置请求；
根据处置请求判断视频数据的处置类型；
对接收到的视频数据进行差异化处置并得到处置后的视频数据；
所述差异化处置具体包括：
当处置类型为视频缩小时，接收并缩小视频数据，将缩小后的视频数据进行行缓存；
逐行从行缓存中读出缩小后的视频数据，并将缩小后的视频数据进行传输；
当处置类型为视频放大时，直接接收输入的视频数据，将视频数据进行行缓存；
从行缓存中读取输入的视频数据，将视频数据放大后，再将放大后的视频数据进行传输；
将处置后的视频数据根据对应的控制信号进行输出；接收来自行缓存读出控制与视频放大的数据以及其有效信号（lb_data_out /up_data_out和lb_data_vld /up_data_vld），并输出视频数据output_data及其有效信号output_vld；当模式选择为视频放大模式时，根据视频放大的数据up_data_out及其有效信号up_data_vld输出控制；同时视频放大的忙信号up_data_busy直接驱动output_busy信号进行行缓存读出控制；当模式选择为视频缩小模式时，output_data和output_vld直接来自于行缓存读出控制的lb_data_out及其有效信号lb_data_vld，并将送至行缓存读出控制的忙信号output_busy置为0，即行缓存读出控制模块可以一直输出数据。
6.根据权利要求5所述的无帧缓存视频流处置输出方法，其特征在于，还包括：接收原始的时序信号，并根据时序信号生成输入控制信号。
7.根据权利要求6所述的无帧缓存视频流处置输出方法，其特征在于，所述原始的时序信号包括：帧同步信号，接收原始的时序信号，并根据时序信号生成输入控制信号具体为：根据帧同步信号，将帧同步信号转变成脉冲信号后，再进行移位生成帧同步复位信号以及起始标志信号。
8.根据权利要求5所述的无帧缓存视频流处置输出方法，其特征在于，获取寄存器配置表，根据寄存器配置表生成视频数据的处置控制信号，所述处置控制信号包括：起始信号、第二帧复位信号、第二行同步信号。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310699778.5A CN116456144B (zh) | 2023-06-14 | 2023-06-14 | 一种无帧缓存视频流处置输出装置和方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310699778.5A CN116456144B (zh) | 2023-06-14 | 2023-06-14 | 一种无帧缓存视频流处置输出装置和方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN116456144A CN116456144A (zh) | 2023-07-18 |
| CN116456144B true CN116456144B (zh) | 2023-09-26 |
Family
ID=87130507
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202310699778.5A Active CN116456144B (zh) | 2023-06-14 | 2023-06-14 | 一种无帧缓存视频流处置输出装置和方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN116456144B (zh) |
Citations (26)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH04322385A (ja) * | 1991-04-22 | 1992-11-12 | Fujitsu Ltd | ラインメモリ制御回路 |
| US5469223A (en) * | 1993-10-13 | 1995-11-21 | Auravision Corporation | Shared line buffer architecture for a video processing circuit |
| US6188381B1 (en) * | 1997-09-08 | 2001-02-13 | Sarnoff Corporation | Modular parallel-pipelined vision system for real-time video processing |
| KR20020004169A (ko) * | 2000-07-03 | 2002-01-16 | 윤종용 | 업/다운 스케일링 기능을 갖는 줌 버퍼 제어 회로 |
| JP2003204502A (ja) * | 2002-01-09 | 2003-07-18 | Sharp Corp | 映像信号処理装置 |
| JP2003219155A (ja) * | 2002-01-17 | 2003-07-31 | Panasonic Communications Co Ltd | 画像処理装置 |
| KR20040010959A (ko) * | 2002-07-25 | 2004-02-05 | 엘지전자 주식회사 | 영상 수신 장치 |
| CN1860778A (zh) * | 2004-10-14 | 2006-11-08 | 松下电器产业株式会社 | 视频信号处理装置 |
| CN1933540A (zh) * | 2005-09-15 | 2007-03-21 | 富士通株式会社 | 匹配于数据提供速度调整图像大小的图像处理装置和方法 |
| CN101025912A (zh) * | 2007-03-14 | 2007-08-29 | 华为技术有限公司 | 对视频信号进行垂直分辨率调整的装置和方法 |
| JP2008268701A (ja) * | 2007-04-24 | 2008-11-06 | Mitsubishi Electric Corp | 画像表示装置 |
| CN101527134A (zh) * | 2009-04-03 | 2009-09-09 | 华为技术有限公司 | 一种显示方法、显示控制器及显示终端 |
| CN103369338A (zh) * | 2013-06-25 | 2013-10-23 | 四川虹视显示技术有限公司 | 基于fpga的近眼双目成像系统的图像处理系统及方法 |
| CN103430532A (zh) * | 2011-03-16 | 2013-12-04 | 高通股份有限公司 | 产生经缩放图像 |
| CN103686314A (zh) * | 2012-09-04 | 2014-03-26 | 深圳中兴力维技术有限公司 | 采用高清视频通道传输多路标清视频的解复用装置及方法 |
| CN104601935A (zh) * | 2013-10-31 | 2015-05-06 | 深圳市朗驰欣创科技有限公司 | 一种画面拼接方法及装置 |
| CN104782118A (zh) * | 2012-12-28 | 2015-07-15 | 深圳艾科创新微电子有限公司 | 视频缩放装置和方法 |
| CN204859381U (zh) * | 2015-08-30 | 2015-12-09 | 深圳市特力科信息技术有限公司 | 基于fpga视频处理多分辨率转换模块及视频处理系统 |
| CN110958460A (zh) * | 2019-11-22 | 2020-04-03 | 北京软通智城科技有限公司 | 一种视频存储方法、装置、电子设备及存储介质 |
| CN111770342A (zh) * | 2020-06-19 | 2020-10-13 | 艾索信息股份有限公司 | 一种视频无级缩放方法 |
| CN112653861A (zh) * | 2020-11-20 | 2021-04-13 | 中国船舶重工集团公司第七0九研究所 | 一种基于gt接口的多通道视频数据传输方法及装置 |
| CN113132650A (zh) * | 2019-12-31 | 2021-07-16 | 深圳开阳电子股份有限公司 | 一种视频图像显示处理控制装置、方法及显示终端 |
| CN114387162A (zh) * | 2020-10-22 | 2022-04-22 | 西安诺瓦星云科技股份有限公司 | 图像缩放装置和方法及计算机可读存储介质 |
| WO2022116353A1 (zh) * | 2020-12-03 | 2022-06-09 | 威创集团股份有限公司 | 一种低延时视频传输方法及其系统、储存介质 |
| CN114625891A (zh) * | 2020-12-11 | 2022-06-14 | 西安诺瓦星云科技股份有限公司 | 多媒体数据处理方法、装置和系统 |
| CN115103208A (zh) * | 2022-08-26 | 2022-09-23 | 广州市保伦电子有限公司 | 一种视频数据的行缓存方法、行读取方法及处理系统 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20120066305A (ko) * | 2010-12-14 | 2012-06-22 | 한국전자통신연구원 | 비디오 움직임 예측 및 보상용 캐싱 장치 및 방법 |
-
2023
- 2023-06-14 CN CN202310699778.5A patent/CN116456144B/zh active Active
Patent Citations (26)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH04322385A (ja) * | 1991-04-22 | 1992-11-12 | Fujitsu Ltd | ラインメモリ制御回路 |
| US5469223A (en) * | 1993-10-13 | 1995-11-21 | Auravision Corporation | Shared line buffer architecture for a video processing circuit |
| US6188381B1 (en) * | 1997-09-08 | 2001-02-13 | Sarnoff Corporation | Modular parallel-pipelined vision system for real-time video processing |
| KR20020004169A (ko) * | 2000-07-03 | 2002-01-16 | 윤종용 | 업/다운 스케일링 기능을 갖는 줌 버퍼 제어 회로 |
| JP2003204502A (ja) * | 2002-01-09 | 2003-07-18 | Sharp Corp | 映像信号処理装置 |
| JP2003219155A (ja) * | 2002-01-17 | 2003-07-31 | Panasonic Communications Co Ltd | 画像処理装置 |
| KR20040010959A (ko) * | 2002-07-25 | 2004-02-05 | 엘지전자 주식회사 | 영상 수신 장치 |
| CN1860778A (zh) * | 2004-10-14 | 2006-11-08 | 松下电器产业株式会社 | 视频信号处理装置 |
| CN1933540A (zh) * | 2005-09-15 | 2007-03-21 | 富士通株式会社 | 匹配于数据提供速度调整图像大小的图像处理装置和方法 |
| CN101025912A (zh) * | 2007-03-14 | 2007-08-29 | 华为技术有限公司 | 对视频信号进行垂直分辨率调整的装置和方法 |
| JP2008268701A (ja) * | 2007-04-24 | 2008-11-06 | Mitsubishi Electric Corp | 画像表示装置 |
| CN101527134A (zh) * | 2009-04-03 | 2009-09-09 | 华为技术有限公司 | 一种显示方法、显示控制器及显示终端 |
| CN103430532A (zh) * | 2011-03-16 | 2013-12-04 | 高通股份有限公司 | 产生经缩放图像 |
| CN103686314A (zh) * | 2012-09-04 | 2014-03-26 | 深圳中兴力维技术有限公司 | 采用高清视频通道传输多路标清视频的解复用装置及方法 |
| CN104782118A (zh) * | 2012-12-28 | 2015-07-15 | 深圳艾科创新微电子有限公司 | 视频缩放装置和方法 |
| CN103369338A (zh) * | 2013-06-25 | 2013-10-23 | 四川虹视显示技术有限公司 | 基于fpga的近眼双目成像系统的图像处理系统及方法 |
| CN104601935A (zh) * | 2013-10-31 | 2015-05-06 | 深圳市朗驰欣创科技有限公司 | 一种画面拼接方法及装置 |
| CN204859381U (zh) * | 2015-08-30 | 2015-12-09 | 深圳市特力科信息技术有限公司 | 基于fpga视频处理多分辨率转换模块及视频处理系统 |
| CN110958460A (zh) * | 2019-11-22 | 2020-04-03 | 北京软通智城科技有限公司 | 一种视频存储方法、装置、电子设备及存储介质 |
| CN113132650A (zh) * | 2019-12-31 | 2021-07-16 | 深圳开阳电子股份有限公司 | 一种视频图像显示处理控制装置、方法及显示终端 |
| CN111770342A (zh) * | 2020-06-19 | 2020-10-13 | 艾索信息股份有限公司 | 一种视频无级缩放方法 |
| CN114387162A (zh) * | 2020-10-22 | 2022-04-22 | 西安诺瓦星云科技股份有限公司 | 图像缩放装置和方法及计算机可读存储介质 |
| CN112653861A (zh) * | 2020-11-20 | 2021-04-13 | 中国船舶重工集团公司第七0九研究所 | 一种基于gt接口的多通道视频数据传输方法及装置 |
| WO2022116353A1 (zh) * | 2020-12-03 | 2022-06-09 | 威创集团股份有限公司 | 一种低延时视频传输方法及其系统、储存介质 |
| CN114625891A (zh) * | 2020-12-11 | 2022-06-14 | 西安诺瓦星云科技股份有限公司 | 多媒体数据处理方法、装置和系统 |
| CN115103208A (zh) * | 2022-08-26 | 2022-09-23 | 广州市保伦电子有限公司 | 一种视频数据的行缓存方法、行读取方法及处理系统 |
Non-Patent Citations (1)
| Title |
|---|
| 间歇式高速电视CCD视频图像实时存储系统;田雁, 曹剑中, 杨小军;光子学报(第12期);全文 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN116456144A (zh) | 2023-07-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100482493B1 (ko) | 화상 출력 장치 및 화상 출력 제어 방법 | |
| US8194090B2 (en) | Method of controlling frame memory, memory control circuit, and image processing apparatus including the memory control circuit | |
| US8451280B2 (en) | Display control device having a frame buffer for temporarily storing image data to be displayed on either one of a first display device or a second display device | |
| US20060133695A1 (en) | Display controller, electronic instrument, and image data supply method | |
| US7489316B2 (en) | Method for frame rate conversion | |
| US7996603B2 (en) | DRAM controller that forces a refresh after a failed refresh request | |
| CN115103208A (zh) | 一种视频数据的行缓存方法、行读取方法及处理系统 | |
| CN116456144B (zh) | 一种无帧缓存视频流处置输出装置和方法 | |
| US5438376A (en) | Image processing apparatus and image reception apparatus using the same | |
| US6717989B1 (en) | Video decoding apparatus and method for a shared display memory system | |
| CN111554334B (zh) | 一种实现多tap访问DDR的方法及系统 | |
| US20090309880A1 (en) | Drawing control method, drawing control apparatus, and drawing control system for embedded system | |
| US20120144150A1 (en) | Data processing apparatus | |
| CN117676064B (zh) | 一种基于spi通讯的视频信号传输方法、设备和存储介质 | |
| JP2002229933A (ja) | 映像データ変換装置、映像処理システムおよび映像データ変換方法 | |
| JPH10333659A (ja) | メモリ制御方法及び装置 | |
| WO2023184242A1 (zh) | 显示控制方法及装置、图像处理装置、显示设备 | |
| JP5224492B2 (ja) | 画像データ転送制御装置及び画像データ転送方法並びに該画像データ転送装置を有するカメラ | |
| KR100875839B1 (ko) | 영상 찢김의 방지가 가능한 영상 출력 장치 및 방법 | |
| JP5394562B2 (ja) | メモリインターフェースおよび画像処理装置 | |
| US6154202A (en) | Image output apparatus and image decoder | |
| CN117061681A (zh) | 图像处理系统及其控制装置、控制方法、图像处理方法 | |
| JP2005020521A (ja) | 撮像装置及びこの撮像装置を備える携帯型電話機 | |
| CN116957910A (zh) | 一种数据读写电路、方法和芯片 | |
| JP2021090124A (ja) | 画像処理装置および画像処理装置の処理方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |