CN111385600B - 视频处理方法、装置及系统、视频处理器以及存储介质 - Google Patents

视频处理方法、装置及系统、视频处理器以及存储介质 Download PDF

Info

Publication number
CN111385600B
CN111385600B CN201811632958.7A CN201811632958A CN111385600B CN 111385600 B CN111385600 B CN 111385600B CN 201811632958 A CN201811632958 A CN 201811632958A CN 111385600 B CN111385600 B CN 111385600B
Authority
CN
China
Prior art keywords
image processing
image
processing parameter
processed
parameter group
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811632958.7A
Other languages
English (en)
Other versions
CN111385600A (zh
Inventor
宗靖国
周晶晶
吴郎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xian Novastar Electronic Technology Co Ltd
Original Assignee
Xian Novastar Electronic Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xian Novastar Electronic Technology Co Ltd filed Critical Xian Novastar Electronic Technology Co Ltd
Priority to CN201811632958.7A priority Critical patent/CN111385600B/zh
Publication of CN111385600A publication Critical patent/CN111385600A/zh
Application granted granted Critical
Publication of CN111385600B publication Critical patent/CN111385600B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)

Abstract

本发明实施例涉及视频处理方法、装置及系统、视频处理器以及存储介质。所述视频处理方法例如包括：接收图像处理参数组，根据所述图像处理参数组对图像帧进行第一图像处理以得到处理后图像帧，并将所述处理后图像帧与所述图像处理参数组进行绑定存储；以及读取绑定存储的所述处理后图像帧和所述图像处理参数组，并根据读取的所述图像处理参数组对读取的所述处理后图像帧进行第二图像处理。本发明实施例解决了视频图像处理参数切换时的花屏甚至黑屏的问题。

Description

视频处理方法、装置及系统、视频处理器以及存储介质
技术领域
本发明涉及视频处理技术领域，尤其涉及一种视频处理方法、一种视频处理装置、一种视频处理系统、一种视频处理器以及一种存储介质。
背景技术
视频处理过程中对图像的处理一般以帧为处理单位进行操作，而一帧图像的数据量通常比较大，视频处理芯片需要借助外部存储器进行缓存。由于视频图像数据到存储器上的写入和读取同时进行，为保持帧的完整性和流水处理的过程，需要在存储器中缓存多帧图像数据。而根据对图像处理的方式目标等不同，部分处理需要在图像帧数据写入存储器之前进行，部分处理需要在图像帧数据从存储器读出之后进行，因此需要由视频处理芯片的不同处理模块来分别完成写入和读取工作。
在使用过程中，用户会根据实际情况或者自身喜好调整输出画面，因而会向视频处理芯片输入不同的视频处理参数，在新参数应用的时刻，存储器中还缓存有未被读取的图像帧数据，而这些图像帧已经被视频处理芯片使用旧的参数处理后写入了存储器，若直接在视频处理芯片中应用新的参数处理输出，则这些被旧参数处理后的图像帧数据应用新参数进行处理输出，会导致输出图像显示错位而产生花屏甚至黑屏现象，严重影响了用户体验。
发明内容
本发明的实施例提供一种视频处理方法、一种视频处理装置、一种视频处理系统、一种视频处理器以及一种存储介质，以解决视频图像处理参数切换时输出图像显示错位而产生花屏甚至黑屏的问题。
一方面，本发明实施例提出的一种视频处理方法，包括：接收图像处理参数组，根据所述图像处理参数组对图像帧进行第一图像处理以得到处理后图像帧，并将所述处理后图像帧与所述图像处理参数组进行绑定存储；以及读取绑定存储的所述处理后图像帧和所述图像处理参数组，并根据读取的所述图像处理参数组对读取的所述处理后图像帧进行第二图像处理。
在本发明的一个实施例中，所述接收图像处理参数组，根据所述图像处理参数组对图像帧进行第一图像处理以得到处理后图像帧，并将所述处理后图像帧与所述图像处理参数组进行绑定存储，具体包括：应用所述图像处理参数组中的第一图像处理参数对所述图像帧进行所述第一图像处理以得到所述处理后图像帧，以及将所述处理后图像帧与所述图像处理参数组中的第二图像处理参数进行绑定存储。所述读取绑定存储的所述处理后图像帧和所述图像处理参数组，以及根据读取的所述图像处理参数组对读取的所述处理后图像帧进行第二图像处理，具体包括：读取绑定存储的所述处理后图像帧和所述第二图像处理参数，以及应用所述第二图像处理参数对读取的所述处理后图像帧进行所述第二图像处理。
在本发明的一个实施例中，所述视频处理方法还包括：完成对读取的所述处理后图像帧的所述第二图像处理后，清除读取的所述图像处理参数组。
另一方面，本发明实施例提出的一种视频处理装置，包括：第一图像处理模块，用于接收图像处理参数组，根据所述图像处理参数组对图像帧进行第一图像处理以得到处理后图像帧，并将所述处理后图像帧与所述图像处理参数组绑定存储至所述存储装置；以及第二图像处理模块，用于读取绑定存储的所述处理后图像帧和所述图像处理参数组，并根据读取的所述图像处理参数组对读取的所述处理后图像帧进行第二图像处理。
在本发明的一个实施例中，所述第一图像处理模块具体用于：应用所述图像处理参数组中的第一图像处理参数对所述图像帧进行所述第一图像处理以得到所述处理后图像帧，以及将所述处理后图像帧与所述图像处理参数组中第二图像处理参数进行绑定存储。所述第二图像处理模块具体用于：绑定存储的所述处理后图像帧和所述第二图像处理参数，以及应用所述第二图像处理参数对读取的所述处理后图像帧进行所述第二图像处理。
再一方面，本发明实施例提出的一种视频处理系统，包括：处理器和连接所述处理器的存储器；其中所述存储器存储有所述处理器执行的指令，且所述指令使得所述处理器执行操作以进行前述任意一种视频处理方法。
又一方面，本发明实施例提出的一种存储介质，其为非易失性存储器且存储有计算机可读程序，所述计算机可读程序用于供处理设备执行前述任意一种视频处理方法。
再又一方面，本发明实施例提出的一种视频处理器，包括：基于可编程逻辑器件的图像处理器；以及微控制器，连接所述图像处理器，用于向所述图像处理器发送图像处理参数组；其中，所述图像处理器用于根据所述图像处理参数组对图像帧进行第一图像处理以得到处理后图像帧，将所述处理后图像帧与所述图像处理参数组进行绑定存储，读取绑定存储的所述处理后图像帧和所述图像处理参数组，以及根据读取的所述图像处理参数组对读取的所述处理后图像帧进行第二图像处理。
在本发明的一个实施例中，所述图像处理器包括可编程逻辑器件和外接于所述可编程逻辑器件的易失性存储器；其中，所述处理后图像帧与所述图像处理参数组绑定存储至所述非易失性存储器中。
在本发明的一个实施例中，所述图像处理器包括可编程逻辑器件和外接于所述可编程逻辑器件的易失性存储器；其中，所述绑定存储的处理后图像帧与所述图像处理参数组分别存储至所述易失性存储器和所述可编程逻辑器件的内部缓存。
在本发明的一个实施例中，所述图像处理器具体用于：根据所述图像处理参数组中的第一图像处理参数对所述图像帧进行所述第一图像处理以得到所述处理后图像帧，将所述处理后图像帧与所述图像处理参数组中第二图像处理参数进行绑定存储，读取绑定存储的所述处理后图像帧和所述第二图像处理参数，以及根据所述第二图像处理参数对读取的所述处理后图像帧进行所述第二图像处理。
上述技术方案可以具有如下优点或有益效果：通过由第一图像处理模块接收图像处理参数组完成图像处理，且将处理后图像帧数据与图像处理参数组绑定缓存至存储装置中；再由第二图像处理模块读取存储装置中绑定存储的处理后图像帧数据与图像处理参数组，且根据读取的图像处理参数组对读取的处理后图像帧数据进行图像处理。如此一来，当需要调整输出图像时，由第一图像处理模块根据新图像处理参数组对图像帧数据进行图像处理、且将处理后图像帧数据与新图像处理参数组绑定存储至存储装置中，其使得第二图像处理模块能够将新图像处理参数组和处理后图像帧数据一一对应起来，以根据新图像处理参数进行图像处理，实现了图像调整过程中画面的平稳过渡，避免了图像显示错位而产生花屏甚至黑屏的问题。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明第一实施例中视频处理方法的流程示意图。
图2为本发明第二实施例中视频处理方法的流程示意图。
图3为本发明第三实施例中视频处理器的结构示意图。
图4为本发明第四实施例中视频处理器的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
【第一实施例】
如图1所示，本发明第一实施例中提供的一种视频处理方法，包括步骤：
S11：接收图像处理参数组，根据所述图像处理参数组对图像帧进行第一图像处理以得到处理后图像帧，将所述处理后图像帧与所述图像处理参数组进行绑定存储；以及
S13：第二图像处理模块读取绑定存储的所述处理后图像帧和所述图像处理参数组，以及根据读取的所述图像处理参数组对读取的所述处理后图像帧进行第二图像处理。
为便于更清楚地理解本实施例，下面特举具体例子对本实施例的步骤S11和步骤S13进行详细描述。
本实施例提供的视频处理方法应用于视频处理器的工作过程，在图像参数变更之前，由视频处理芯片的第一图像处理模块对输入图像数据以帧为单位进行图像处理，例如第一图像处理模块对输入的第一帧图像数据根据接收的图像处理参数组进行第一图像处理后生成第一处理后图像帧，再将第一处理后图像帧和与其对应的图像处理参数组缓存至存储装置，然后按照时间轴的顺序依次生成第二处理后图像帧、第三处理后图像帧、...、第n处理后图像帧并分别与对应的图像处理参数组绑定缓存至存储装置中；经过第一图像处理的处理后图像帧在存储装置中被第二图像处理模块依次读取出来，并根据与其分别绑定存储的图像处理参数组进行第二图像处理，类似于流水线操作一样按照从第1处理后图像帧到第n处理后图像帧的顺序进行第二图像处理。需要指出的是，第一图像处理和第二图像处理可以用于实现视频处理芯片对图像数据的分步处理，例如，输入的视频源信号为1920×600格式，要输出800×1080格式的视频信号，则需要第一图像处理模块先对视频源信号进行第一图像处理例如缩放处理，将1920×600格式的视频源信号转化为800×600格式的处理后图像帧数据缓存至存储装置，而第二图像处理模块对从存储装置中读取800×600格式的处理后图像帧数据进行第二图像处理例如二次缩放处理，最终将800×600格式的处理后图像帧数据转换为800×1080格式的视频信号输出。
在步骤S11中，当用户需要调整输出画面效果时，由微控制器发送图像处理参数组，以供第一图像处理模块接收，再由第一图像处理模块根据接收的图像处理参数组进行相应的图像处理。具体而言，第一图像处理模块在接收到图像处理参数组后，立即根据该图像处理参数组对输入图像数据逐帧进行图像处理例如缩放处理，得到处理后图像帧数据，并将处理后图像帧数据和该图像处理参数组进行绑定缓存至存储装置。例如在图像处理参数变更之前，第一图像处理模块已经按照原有的图像处理参数处理了(m-1)帧图像数据，生成了(m-1)个处理后图像帧，并将每一个处理后图像帧和与其对应的图像处理参数组绑定缓存至存储装置中；当需要调整输出画面时，微控制器发出新图像处理参数组给第一图像处理模块，而第一图像处理模块将根据新图像处理参数对第m帧图像数据进行图像处理，得到第m处理后图像帧后与新图像处理参数组绑定缓存至存储装置中。
在步骤S13中，第二图像处理模块在对从存储装置中读取的例如第k(k<m-1)处理后图像帧进行图像处理时，根据与第k处理后图像帧绑定存储的图像处理参数组进行图像处理；当第二图像处理模块从存储装置中读取到第m处理后图像帧时，立即根据与该第m处理后图像帧绑定存储的新图像处理参数组对第m处理后图像帧进行图像处理。
由上可知，本实施例提供的视频处理方法通过第一图像处理模块接收图像处理参数组完成图像处理，且将处理后图像帧数据与图像处理参数组绑定缓存至存储装置中，再通过第二图像处理模块读取存储装置中绑定存储的处理后图像帧数据与图像处理参数组，且根据读取的图像处理参数组对读取的处理后图像帧数据进行图像处理；如此一来，当需要调整输出图像时，由第一图像处理模块按照新图像处理参数组对输入图像帧数据进行图像处理以得到处理后图像帧、且将处理后图像帧数据与新图像处理参数组绑定缓存至存储装置中，从而使得第二图像处理模块能够将新图像处理参数组和图像帧数据一一对应起来，并根据新图像处理参数组对相对应的处理后图像帧进行图像处理，其实现了图像调整过程中画面的平稳过渡，避免了图像显示错位产生花屏甚至黑屏的问题。
【第二实施例】
如图2所示，本发明第二实施例中提供的视频处理方法，包括步骤：
S21：接收包含第一图像处理参数和第二图像处理参数的图像处理参数组，应用所述第一图像处理参数对图像帧进行第一图像处理以得到处理后图像帧，以及将所述处理后图像帧与所述图像处理参数组进行绑定存储；
S23：读取绑定存储的所述处理后图像帧和所述图像处理参数组，应用读取的所述图像处理参数组中的所述第二图像处理参数对读取的所述处理后图像帧进行第二图像处理；以及
S25：完成对读取的所述处理后图像帧的所述第二图像处理后，清除读取的所述图像处理参数组。
具体来说，由于本实施例中的图像处理参数组包含第一图像处理参数和第二图像处理参数，分别用于第一图像处理和第二图像处理；当微控制器将图像处理参数组发给第一图像处理模块后，第一图像处理模块应用其中的第一图像处理参数进行图像处理以得到处理后图像帧，同时将处理后图像帧数据和该图像处理参数组绑定缓存至存储装置中；当需要调整输出画面时，微控制器发出新图像处理参数组给第一图像处理模块，而第一图像处理模块根据其中的新第一图像处理参数对例如第m帧图像数据进行图像处理，以得到第m处理后图像帧并与新图像处理参数组绑定缓存至存储装置中。
当第二图像处理模块在读取存储装置中的处理后图像帧时，同步读取与该处理后图像帧绑定存储的图像处理参数组，从读取的图像处理参数组中获取第二图像处理参数后对读取的处理后图像帧进行二次图像处理；当读取到根据新图像处理参数组处理的第m处理后图像帧时，立即应用与其绑定的新图像处理参数组中的第二图像处理参数(也即完成图像处理参数的切换)对第m处理后图像帧进行图像处理。
此外，在第二图像处理模块根据图像处理参数组对与其绑定存储的处理后图像帧进行完图像处理后，第二图像处理模块将清除该图像处理参数组，以节约系统资源。
【第三实施例】
如图3所示，本发明第三实施例中提供的一种视频处理器300，适于执行前述第一和第二实施例中的视频处理方法。具体地，视频处理器300包括：存储器310、微控制器320、第一图像处理模块331和第二图像处理模块332。其中，微控制器320连接第一图像处理模块331；第一图像处理模块331和第二图像处理模块332分别连接存储器310。微控制器320用于发送图像处理参数组给第一图像处理模块331。存储器310用于绑定存储处理后图像帧数据和与其对应的图像处理参数组，因而作为形成一一对应绑定关系的图像处理参数组和处理后图像帧的存储装置。
具体地，第一图像处理模块331用于接收来自微控制器320的图像处理参数组，根据接收的图像处理参数组对输入图像帧进行图像处理例如缩放处理以得到处理后图像帧(例如图3中的帧1至帧n)，以及将处理后图像帧和与其相对应的图像处理参数组绑定缓存至同一个存储器310中。第二图像处理模块332用于读取存储器310中绑定存储的处理后图像帧和图像处理参数组，以及根据当前读取的图像处理参数组对当前读取的处理后图像帧进行图像处理例如缩放处理以供输出。
需要说明的是，本实施例中的视频处理器300例如包括可编程逻辑器件330，该可编程逻辑器件330例如为FPGA(Field Programmable Gate Array，现场可编程门阵列)；其中第一图像处理模块331和第二图像处理模块332都整合在可编程逻辑器件330中，微控制器例如为基于ARM的嵌入式处理器，但本发明实施例并不以此为限。
承上述，微控制器320发出的图像处理参数组例如包括第一图像处理参数和第二图像处理参数，分别用于供第一图像处理模块331和第二图像处理模块332进行图像处理之用。当微控制器320将图像处理参数组发给第一图像处理模块331后，第一图像处理模块331应用其中的第一图像处理参数进行图像处理以得到处理后图像帧例，并将处理后图像帧数据和该图像处理参数组绑定缓存至同一个存储装器310中；当需要调整输出画面时，微控制器320发出新图像处理参数组给第一图像处理模块331，而第一图像处理模块331将应用新图像处理参数中的新第一图像处理参数对例如第m帧图像数据进行图像处理，以得到第m处理后图像帧并与新图像处理参数组一起绑定缓存至存储器310中。
当第二图像处理模块332读取存储器310中缓存的处理后图像帧时会同时读取到与当前读取的处理后图像帧绑定存储的图像处理参数组，应用读取的图像处理参数组中的第二图像处理参数对读取的处理后图像帧进行二次图像处理；当读取到应用新图像处理参数组中的新第一图像处理参数处理的第m处理后图像帧时，立即应用与其绑定的新图像处理参数组中的新第二图像处理参数(也即完成图像处理参数的切换)对第m处理后图像帧进行图像处理以供输出。
第四实施例
如图4所示，本发明第四实施例中提供的一种视频处理器400，适于执行前述第一和第二实施例中的视频处理方法。该视频处理器400包括：存储器411、图像处理参数缓存412、微控制器420、第一图像处理模块431和第二图像处理模块432。本实施例中的微控制器420、第一图像处理模块431和第二图像处理模块432的具体功能和结构可参考第三实施例，在此不再赘述。
承上述，本实施例中的视频处理器400例如包括可编程逻辑器件430，该可编程逻辑器件430例如为FPGA(Field Programmable Gate Array，现场可编程门阵列)；其中，第一图像处理模块431和第二图像处理模块432都整合在可编程逻辑器件430上，微控制器420例如为基于ARM的嵌入式处理器，但本发明实施例并不以此为限。
本实施例中的存储器411分别连接第一图像处理模块431和第二图像处理模块432，用于处理后图像帧数据的写入和读取；图像处理参数缓存412与第一图像处理模块431和第二图像处理模块432一起整合在可编程逻辑器件430中，其作为可编程逻辑器件430的内部缓存，用于与处理后图像帧数据绑定的图像处理参数组的写入和读取。因此，本实施例的存储器411和图像处理参数缓存412共同作为形成一一对应绑定关系的图像处理参数组和处理后图像帧的存储装置。
在本实施例中，第一图像处理模块431在接收到来自微控制器420的图像处理参数组后，应用接收到的图像处理参数组中的第一图像处理参数对输入图像帧数据进行一次图像处理例如缩放处理等以生成处理后图像帧，将处理后图像帧和图像处理参数组绑定存储至存储器411和图像处理参数缓存412(例如将绑定的处理后图像帧和图像处理参数组给予相同的编号)。第二图像处理模块432分别从存储器411和图像处理参数缓存412中同步读取处理后图像帧及与该处理后图像帧绑定存储的图像处理参数组，应用读取的图像处理参数组中的第二图像处理参数对读取的处理后图像帧进行二次图像处理，以供输出。其中，处理后图像帧和图像处理参数组虽然从第一图像处理模块431到第二图像处理模块432传输的路径不同，但是二者的绑定关系是不变。当需要切换图像处理参数时，第二图像处理模块432仍然能够根据新图像处理参数组对绑定存储的处理后图像帧进行处理。
此外，本实施例仅叙述了视频处理器400采用两个图像处理模块通过两步图像处理完成整个处理过程，但是视频处理器400还可以包括多个图像处理模块完成整个处理过程，例如视频处理器总共包括Q个图像处理模块，由第1个图像处理模块完成第一次图像处理并将得到的处理后图像帧数据缓存至存储装置，而第2个图像处理模块读取存储装置中的处理后图像帧数据进行第二次图像处理后放入另一个存储装置，最终由第Q个图像处理模块读取经过第(Q-1)次图像处理得到的处理后图像帧数据后，再进行第N次图像处理后输出。
另外值得一提的是，在本发明其他实施例中，视频处理器例如包括基于可编程逻辑器件的图像处理器和微控制器。其中，微控制器用于向所述图像处理器发送图像处理参数组；所述图像处理器用于根据所述图像处理参数组对目标图像帧进行第一图像处理得到第一处理后图像帧、并将所述第一处理后图像帧与所述图像处理参数组绑定存储，以及用于读取绑定存储的所述第一处理后图像帧与所述图像处理参数组、根据读取的所述图像处理参数组对读取的所述第一处理后图像帧进行第二图像处理以得到第二处理后图像帧。更具体地，本实施例基于可编程逻辑器件的图像处理器例如包括可编程逻辑器件(像FPGA)和外接于可编程逻辑器件的存储器例如易失性存储器(比如DDR)；微控制器例如是MCU(单片机)或ARM处理器等。再者，本实施例基于可编程逻辑器件的图像处理器中的可编程逻辑器件例如包含前述实施例提及的第一图像处理模块和第二图像处理模块，分别用于进行第一图像处理和第二图像处理。
第五实施例
本发明的第五实施例涉及一种存储介质，其为非易失性存储介质且用于存储计算机可读程序，所述计算机可读程序用于供处理设备例如计算机执行前述部分或全部的视频处理方法实施例。
即，本领域技术人员可以理解，实现前述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序存储在一个存储介质中，包括若干指令用以使得一个设备(可以是单片机，芯片等)或处理器(processor)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
此外，本发明其他实施例还提供一种包括视频处理系统，包括：处理器和存储器；其中，存储器存储由处理器执行的指令，且所述指令例如使得处理器执行操作以进行前述部分或全部的视频处理方法实施例。
另外，可以理解的是，前述各个实施例仅为本发明的示例性说明，在技术特征不冲突、结构不矛盾、不违背本发明的发明目的前提下，各个实施例的技术方案可以任意组合、搭配使用。
最后值得说明的是，与处理后图像帧绑定存储的图像处理参数组可以是第一图像处理模块接收的图像处理参数组的全部内容(例如包含第一图像处理参数和第二图像处理参数)，也可以是第一图像处理模块接收的图像处理参数组的部分内容(例如包含第二图像处理参数但不包含第一图像处理参数)。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和/或方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多路单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多路网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (12)

1.一种视频处理方法，其特征在于，包括：
接收图像处理参数组，根据所述图像处理参数组对图像帧进行第一图像处理以得到处理后图像帧，并将所述处理后图像帧与所述图像处理参数组进行绑定存储；以及
读取绑定存储的所述处理后图像帧和所述图像处理参数组，并根据读取的所述图像处理参数组对读取的所述处理后图像帧进行第二图像处理；
其中，所述接收图像处理参数组，根据所述图像处理参数组对图像帧进行第一图像处理以得到处理后图像帧，并将所述处理后图像帧与所述图像处理参数组进行绑定存储，具体包括：
应用所述图像处理参数组中的第一图像处理参数对所述图像帧进行所述第一图像处理以得到所述处理后图像帧，以及
将所述处理后图像帧与所述图像处理参数组中的第二图像处理参数进行绑定存储。
2.根据权利要求1所述的视频处理方法，其特征在于，
所述读取绑定存储的所述处理后图像帧和所述图像处理参数组，以及根据读取的所述图像处理参数组对读取的所述处理后图像帧进行第二图像处理，具体包括：
读取绑定存储的所述处理后图像帧和所述第二图像处理参数，以及
应用所述第二图像处理参数对读取的所述处理后图像帧进行所述第二图像处理。
3.根据权利要求1或2所述的视频处理方法，其特征在于，还包括：完成对读取的所述处理后图像帧的所述第二图像处理后，清除读取的所述图像处理参数组。
4.一种视频处理装置，其特征在于，包括：
第一图像处理模块，用于接收图像处理参数组，根据所述图像处理参数组对图像帧进行第一图像处理以得到处理后图像帧，并将所述处理后图像帧与所述图像处理参数组绑定存储至存储装置；以及
第二图像处理模块，用于读取绑定存储的所述处理后图像帧和所述图像处理参数组，并根据读取的所述图像处理参数组对读取的所述处理后图像帧进行第二图像处理；
其中，所述第一图像处理模块具体用于：应用所述图像处理参数组中的第一图像处理参数对所述图像帧进行所述第一图像处理以得到所述处理后图像帧，以及将所述处理后图像帧与所述图像处理参数组中第二图像处理参数进行绑定存储。
5.根据权利要求4所述的视频处理装置，其特征在于，
所述第二图像处理模块具体用于：绑定存储的所述处理后图像帧和所述第二图像处理参数，以及应用所述第二图像处理参数对读取的所述处理后图像帧进行所述第二图像处理。
6.根据权利要求4或5所述的视频处理装置，其特征在于，所述第二图像处理模块还用于：完成对读取的所述处理后图像帧的所述第二图像处理后，清除读取的所述图像处理参数组。
7.一种视频处理系统，其特征在于，包括：处理器和连接所述处理器的存储器；其中所述存储器存储有所述处理器执行的指令，且所述指令使得所述处理器执行操作以进行如权利要求1至3任意一项所述的视频处理方法。
8.一种存储介质，其特征在于，所述存储介质存储有计算机可读程序，所述计算机可读程序用于供处理设备执行如权利要求1至3中任一项所述的视频处理方法。
9.一种视频处理器，其特征在于，包括：
基于可编程逻辑器件的图像处理器；以及
微控制器，连接所述图像处理器，用于向所述图像处理器发送图像处理参数组；
其中，所述图像处理器用于根据所述图像处理参数组对图像帧进行第一图像处理以得到处理后图像帧，将所述处理后图像帧与所述图像处理参数组进行绑定存储，读取绑定存储的所述处理后图像帧和所述图像处理参数组，以及根据读取的所述图像处理参数组对读取的所述处理后图像帧进行第二图像处理；
其中，所述图像处理器具体用于：根据所述图像处理参数组中的第一图像处理参数对所述图像帧进行所述第一图像处理以得到所述处理后图像帧，将所述处理后图像帧与所述图像处理参数组中第二图像处理参数进行绑定存储。
10.根据权利要求9所述的视频处理器，其特征在于，所述图像处理器包括可编程逻辑器件和外接于所述可编程逻辑器件的易失性存储器；其中，所述处理后图像帧与所述图像处理参数组绑定存储至所述易失性存储器中。
11.根据权利要求9所述的视频处理器，其特征在于，所述图像处理器包括可编程逻辑器件和外接于所述可编程逻辑器件的易失性存储器；其中，所述绑定存储的处理后图像帧与所述图像处理参数组分别存储至所述易失性存储器和所述可编程逻辑器件的内部缓存。
12.根据权利要求9至11任意一项所述的视频处理器，其特征在于，所述图像处理器还用于：读取绑定存储的所述处理后图像帧和所述第二图像处理参数，以及根据所述第二图像处理参数对读取的所述处理后图像帧进行所述第二图像处理。
CN201811632958.7A 2018-12-29 2018-12-29 视频处理方法、装置及系统、视频处理器以及存储介质 Active CN111385600B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811632958.7A CN111385600B (zh) 2018-12-29 2018-12-29 视频处理方法、装置及系统、视频处理器以及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811632958.7A CN111385600B (zh) 2018-12-29 2018-12-29 视频处理方法、装置及系统、视频处理器以及存储介质

Publications (2)

Publication Number Publication Date
CN111385600A CN111385600A (zh) 2020-07-07
CN111385600B true CN111385600B (zh) 2022-06-17

Family

ID=71222986

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811632958.7A Active CN111385600B (zh) 2018-12-29 2018-12-29 视频处理方法、装置及系统、视频处理器以及存储介质

Country Status (1)

Country Link
CN (1) CN111385600B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114327322B (zh) * 2020-10-10 2024-05-10 西安诺瓦星云科技股份有限公司 图层显示方法及其装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020004169A (ko) * 2000-07-03 2002-01-16 윤종용 업/다운 스케일링 기능을 갖는 줌 버퍼 제어 회로
CN101582254A (zh) * 2008-05-13 2009-11-18 深圳华为通信技术有限公司 一种图像呈现方法及装置
CN104933689A (zh) * 2014-03-19 2015-09-23 炬芯（珠海）科技有限公司 一种图像信号处理方法及装置
CN106797439A (zh) * 2014-09-12 2017-05-31 索尼半导体解决方案公司 图像处理装置，图像处理方法，以及程序
CN106941617A (zh) * 2017-04-26 2017-07-11 西安诺瓦电子科技有限公司 视频处理装置和多窗口画面显示方法
CN107657587A (zh) * 2017-10-23 2018-02-02 北京嗨动视觉科技有限公司 图像处理方法、装置及系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017097226A (ja) * 2015-11-26 2017-06-01 キヤノン株式会社 画像処理装置、その制御方法、およびプログラム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020004169A (ko) * 2000-07-03 2002-01-16 윤종용 업/다운 스케일링 기능을 갖는 줌 버퍼 제어 회로
CN101582254A (zh) * 2008-05-13 2009-11-18 深圳华为通信技术有限公司 一种图像呈现方法及装置
CN104933689A (zh) * 2014-03-19 2015-09-23 炬芯（珠海）科技有限公司 一种图像信号处理方法及装置
CN106797439A (zh) * 2014-09-12 2017-05-31 索尼半导体解决方案公司 图像处理装置，图像处理方法，以及程序
CN106941617A (zh) * 2017-04-26 2017-07-11 西安诺瓦电子科技有限公司 视频处理装置和多窗口画面显示方法
CN107657587A (zh) * 2017-10-23 2018-02-02 北京嗨动视觉科技有限公司 图像处理方法、装置及系统

Also Published As

Publication number Publication date
CN111385600A (zh) 2020-07-07

Similar Documents

Publication Publication Date Title
CN104902193A (zh) 一种基于fpga对图像数据进行分割处理和显示的方法
CN108093292A (zh) 用于管理缓存的方法、装置及系统
US20110317763A1 (en) Information processing apparatus and information processing method
CN105187845B (zh) 视频数据解码装置及解码方法
CN110708609A (zh) 一种视频播放方法及装置
CN105376512A (zh) 一种基于可编程逻辑器件的信号转换装置
US20200068097A1 (en) Frame Synchronization Method For Image Data, Image Signal Processing Apparatus, And Terminal
WO2014079303A1 (zh) 一种视频多画面合成方法、装置和系统
CN115665342B (zh) 图像处理方法、图像处理电路、电子设备和可读存储介质
CN111385600B (zh) 视频处理方法、装置及系统、视频处理器以及存储介质
CN114710702A (zh) 一种视频的播放方法和装置
CN105843576B (zh) 一种拼接墙窗口切换方法及装置
CN104980798B (zh) 一种远端视频显示方法及装置
CN111277858B (zh) 视频处理方法及装置、视频处理器和存储介质
US11195248B2 (en) Method and apparatus for processing pixel data of a video frame
CN114584782A (zh) 一种图像发送方法、装置及电子设备
CN112292848B (zh) 视频源扩展方法、装置、系统及视频源扩展器
WO2022089083A1 (zh) Led 电视墙的显示方法、电视和计算机可读存储介质
CN114625891A (zh) 多媒体数据处理方法、装置和系统
CN113012657A (zh) 图层处理方法及装置、视频处理设备和计算机可读存储介质
CN112825563B (zh) 视频处理方法及装置、视频处理设备
CN111835957B (zh) 视频处理方法、视频处理装置和视频处理设备
CN114495855B (zh) 视频数据转换电路、方法及显示设备
CN112346681B (zh) 图像显示控制方法、装置及系统和计算机可读介质
CN112804577B (zh) 视频切换显示方法及装置、视频处理设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant