CN114501139A - 一种视频处理方法、装置、计算机设备和存储介质 - Google Patents
一种视频处理方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN114501139A CN114501139A CN202210328281.8A CN202210328281A CN114501139A CN 114501139 A CN114501139 A CN 114501139A CN 202210328281 A CN202210328281 A CN 202210328281A CN 114501139 A CN114501139 A CN 114501139A
- Authority
- CN
- China
- Prior art keywords
- frame
- image quality
- processed
- video frame
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003860 storage Methods 0.000 title claims abstract description 17
- 238000003672 processing method Methods 0.000 title abstract description 15
- 238000012545 processing Methods 0.000 claims abstract description 114
- 238000000034 method Methods 0.000 claims abstract description 48
- 238000005457 optimization Methods 0.000 claims description 268
- 238000004590 computer program Methods 0.000 claims description 16
- 238000006243 chemical reaction Methods 0.000 description 66
- 230000008569 process Effects 0.000 description 20
- 230000009467 reduction Effects 0.000 description 15
- 238000010586 diagram Methods 0.000 description 13
- 238000004891 communication Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 238000003780 insertion Methods 0.000 description 3
- 230000037431 insertion Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 230000008439 repair process Effects 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 229910021389 graphene Inorganic materials 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 230000003014 reinforcing effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本申请涉及一种视频处理方法、装置、计算机设备和存储介质。方法包括：获取待处理视频，待处理视频包括至少两帧待处理视频帧；对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧；将第t帧解码后视频帧输入至目标画质调整模块，得到第t帧已处理视频帧，并同步执行下述步骤：获取第t帧待处理视频帧的第t+1帧待处理视频帧，并将第t+1帧待处理视频帧作为第t帧待处理视频帧，并返回对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧的步骤，直至得到待处理视频帧对应的已处理视频帧；对已处理视频帧进行组合，得到已处理视频帧序列；将已处理视频帧序列进行编码，得到已处理视频。采用本方法能够提高视频处理的效率。
Description
技术领域
本申请涉及计算机技术领域，特别是涉及一种视频处理方法、装置、计算机设备和存储介质。
背景技术
随着高清视频技术的发展，出现了画质增强技术，可以把清晰度低的视频通过画质增强技术提高视频的清晰度，使得人们可以观看清晰度更高的视频，提升观看感受，增强幸福感。
传统技术中，需要使用上变换技术和设备将视频变换至清晰度更高进行播出，但是视频的采集和制作设备成本高昂，而且短时间内无法生产足够的高清晰视频进行播放，造成资源利用率不足，运行效率低。
发明内容
基于此，有必要针对上述技术问题，提供一种能够提升画质的视频处理方法、装置、计算机设备和计算机可读存储介质。
第一方面，本申请提供了一种视频处理方法。所述方法包括：获取待处理视频；所述待处理视频包括至少两帧待处理视频帧；对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧；将所述第t帧解码后视频帧输入至目标画质调整模块，得到第t帧已处理视频帧，并同步执行下述步骤：将所述第t+1帧待处理视频帧作为所述第t帧待处理视频帧，并返回所述对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧的步骤，直至得到所述待处理视频帧对应的已处理视频帧；对所述已处理视频帧进行组合，得到已处理视频帧序列；将所述已处理视频帧序列进行编码，得到已处理视频。
在其中一个实施例中，所述方法还包括：响应于所述待处理视频的画质优化指令，确定针对所述待处理视频的画质优化需求；根据所述画质优化需求，从候选画质优化子模块中确定出至少一个目标画质优化子模块；根据所述至少一个目标画质优化子模块，得到所述目标画质调整模块。
在其中一个实施例中，若所述目标画质优化子模块为一个，所述根据所述至少一个目标画质优化子模块，得到所述目标画质调整模块，包括：将所述目标画质优化子模块作为所述目标画质调整模块；若所述目标画质优化子模块为多个，所述根据所述至少一个目标画质优化子模块进行组合，得到所述目标画质调整模块，包括：根据所述画质优化需求，确定针对多个所述目标画质优化子模块的组合顺序，并按照所述组合顺序对多个所述目标画质优化子模块进行组合，得到所述目标画质调整模块；或者，对多个所述目标画质优化子模块进行任意组合，得到所述目标画质调整模块。
在其中一个实施例中，所述对多个所述目标画质优化子模块进行组合，得到所述目标画质调整模块，包括：对多个所述目标画质优化子模块进行分组，得到分组后的画质优化子模块集合；对所述分组后的画质优化子模块集合中的所述目标画质优化子模块进行任意组合，得到多个目标画质优化子模块组合；将多个所述目标画质优化子模块组合进行组合，得到所述目标画质调整模块。
在其中一个实施例中，所述将所述第t帧解码后视频帧输入至目标画质调整模块，得到第t帧已处理视频帧，包括：将所述第t帧解码后视频帧输入至所述目标画质调整模块中的其中一个画质优化子模块，得到第t帧预处理视频帧；将所述第t帧预处理视频帧输入所述目标画质调整模块中的另外一个画质优化子模块，得到所述第t帧已处理视频帧，并同步执行下述步骤：获取第t+1帧解码后视频帧，将所述第t+1帧解码后视频帧输入至所述其中一个画质优化子模块，得到第t+1帧预处理视频帧；将所述第t+1帧预处理视频帧输入所述另外一个画质优化子模块，得到第t+1帧已处理视频帧。
在其中一个实施例中，所述将所述第t帧解码后视频帧输入至所述目标画质调整模块中的其中一个画质优化子模块，得到第t帧预处理视频帧，包括：获取运行有所述其中一个画质优化子模块的图形处理器对应的处理负荷；若所述处理负荷大于所述图形处理器对应的处理能力，则将所述其中一个画质优化子模块调度至除所述图形处理器之外的其它图形处理器上运行；将所述第t帧解码后视频帧输入至所述其它图形处理器，所述其它图形处理器用于将所述第t帧解码后视频帧输入至所述其中一个画质优化子模块，得到所述第t帧预处理视频帧。
第二方面，本申请还提供了一种视频处理装置。所述装置包括：待处理视频获取模块，用于获取待处理视频；所述待处理视频包括至少两帧待处理视频帧；解码后视频帧得到模块，用于对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧；已处理视频帧得到模块，用于将所述第t帧解码后视频帧输入至目标画质调整模块，得到第t帧已处理视频帧，并同步执行下述步骤：将所述第t+1帧待处理视频帧作为所述第t帧待处理视频帧，并返回所述对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧的步骤，直至得到所述待处理视频帧对应的已处理视频帧；已处理视频帧序列得到模块，用于对所述已处理视频帧进行组合，得到已处理视频帧序列；已处理视频得到模块，用于将所述已处理视频帧序列进行编码，得到已处理视频。
在其中一个实施例中，目标画质调整模块得到模块，用于响应于所述待处理视频的画质优化指令，确定针对所述待处理视频的画质优化需求；根据所述画质优化需求，从候选画质优化子模块中确定出至少一个目标画质优化子模块；根据所述至少一个目标画质优化子模块，得到所述目标画质调整模块。
在其中一个实施例中，目标画质调整模块得到模块，用于将所述目标画质优化子模块作为所述目标画质调整模块；根据所述画质优化需求，确定针对多个所述目标画质优化子模块的组合顺序，并按照所述组合顺序对多个所述目标画质优化子模块进行组合，得到所述目标画质调整模块；或者，对多个所述目标画质优化子模块进行任意组合，得到所述目标画质调整模块。
在其中一个实施例中，目标画质调整模块得到模块，用于对多个所述目标画质优化子模块进行分组，得到分组后的画质优化子模块集合；对所述分组后的画质优化子模块集合中的所述目标画质优化子模块进行任意组合，得到多个目标画质优化子模块组合；将多个所述目标画质优化子模块组合进行组合，得到所述目标画质调整模块。
在其中一个实施例中，已处理视频帧得到模块，用于将所述第t帧解码后视频帧输入至所述目标画质调整模块中的其中一个画质优化子模块，得到第t帧预处理视频帧；将所述第t帧预处理视频帧输入所述目标画质调整模块中的另外一个画质优化子模块，得到所述第t帧已处理视频帧，并同步执行下述步骤：获取第t+1帧解码后视频帧，将所述第t+1帧解码后视频帧输入至所述其中一个画质优化子模块，得到第t+1帧预处理视频帧；将所述第t+1帧预处理视频帧输入所述另外一个画质优化子模块，得到第t+1帧已处理视频帧。
在其中一个实施例中，已处理视频帧得到模块，用于获取运行有所述其中一个画质优化子模块的图形处理器对应的处理负荷；若所述处理负荷大于所述图形处理器对应的处理能力，则将所述其中一个画质优化子模块调度至除所述图形处理器之外的其它图形处理器上运行；将所述第t帧解码后视频帧输入至所述其它图形处理器，所述其它图形处理器用于将所述第t帧解码后视频帧输入至所述其中一个画质优化子模块，得到所述第t帧预处理视频帧。
第三方面，本申请还提供了一种计算机设备。所述计算机设备包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现以下步骤：获取待处理视频；所述待处理视频包括至少两帧待处理视频帧；对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧；将所述第t帧解码后视频帧输入至目标画质调整模块，得到第t帧已处理视频帧，并同步执行下述步骤：将所述第t+1帧待处理视频帧作为所述第t帧待处理视频帧，并返回所述对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧的步骤，直至得到所述待处理视频帧对应的已处理视频帧；对所述已处理视频帧进行组合，得到已处理视频帧序列；将所述已处理视频帧序列进行编码，得到已处理视频。
第四方面，本申请还提供了一种计算机可读存储介质。所述计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现以下步骤：获取待处理视频；所述待处理视频包括至少两帧待处理视频帧；对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧；将所述第t帧解码后视频帧输入至目标画质调整模块，得到第t帧已处理视频帧，并同步执行下述步骤：将所述第t+1帧待处理视频帧作为所述第t帧待处理视频帧，并返回所述对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧的步骤，直至得到所述待处理视频帧对应的已处理视频帧；对所述已处理视频帧进行组合，得到已处理视频帧序列；将所述已处理视频帧序列进行编码，得到已处理视频。
上述视频处理方法、装置、计算机设备和存储介质，通过获取待处理视频，待处理视频包括至少两帧待处理视频帧；对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧；将第t帧解码后视频帧输入至目标画质调整模块，得到第t帧已处理视频帧，并同步执行下述步骤：获取第t帧待处理视频帧的第t+1帧待处理视频帧，并将第t+1帧待处理视频帧作为第t帧待处理视频帧，并返回对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧的步骤，直至得到待处理视频帧对应的已处理视频帧；对已处理视频帧进行组合，得到已处理视频帧序列；将已处理视频帧序列进行编码，得到已处理视频。
通过获取包括至少两帧待处理视频帧的待处理视频，然后对里面的第t帧待处理视频帧进行解码，解码后可以得到第t帧解码后视频帧，解码后的视频帧可以得到里面的更多的参数，同时方便对里面的参数进行调整，解码后的第t帧视频帧将输入目标画质调整模块中进行画质修复增强，得到了第t帧的已处理视频帧，执行第t帧画质修复增强的同时执行第t+1帧的解码，两个步骤同时执行，相互不影响，能够提高处理的效率，当t+1帧解码完毕后将输入至目标画质调整模块中执行画质修复增强，如此循环运行，直到所有的待处理视频帧处理成已处理视频帧，然后将所有已处理视频帧进行组合，得到已处理视频帧序列，将该序列进行编码，得到已处理视频。
通过使用计算机的并行处理，能够使得解码和画质修复增强同时进行，使得大大地减少了视频处理的时间，同时能够保证每一帧都经过相同的处理过程，解码、目标画质调整模块以及编码三个处理模块的分开，可以同时调用计算机的资源，使得计算机的资源能够充分地应用，有助于提高资源的利用率以及视频处理的效率。
附图说明
图1为一个实施例中视频处理方法的应用环境图；
图2为一个实施例中视频处理方法的流程示意图；
图3为一个实施例中视频处理步骤的流程示意图；
图4为另一个实施例中视频处理步骤的流程示意图；
图5为又一个实施例中视频处理步骤的流程示意图；
图6为再一个实施例中视频处理步骤的流程示意图；
图7为多一个实施例中视频处理步骤的流程示意图；
图8为一个实施例中画质修复增强的系统的流程以及计算架构的示意图；
图9为一个实施例中视频处理装置的结构框图；
图10为一个实施例中计算机设备的内部结构图；
图11为另一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
本申请实施例提供的视频处理方法，可以应用于如图1所示的应用环境中。其中，电子设备102通过获取待处理视频；待处理视频包括至少两帧待处理视频帧；对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧；将第t帧解码后视频帧输入至目标画质调整模块，得到第t帧已处理视频帧，并同步执行下述步骤：获取第t帧待处理视频帧的第t+1帧待处理视频帧，并将第t+1帧待处理视频帧作为第t帧待处理视频帧，并返回对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧的步骤，直至得到待处理视频帧对应的已处理视频帧；对已处理视频帧进行组合，得到已处理视频帧序列；将已处理视频帧序列进行编码，得到已处理视频。其中，电子设备102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑、物联网设备和便携式可穿戴设备，物联网设备可为智能音箱、智能电视、智能空调、智能车载设备等。便携式可穿戴设备可为智能手表、智能手环、头戴设备等。
在一个实施例中，如图2所示，提供了一种视频处理方法，以该方法应用于图1中的电子设备为例进行说明，包括以下步骤：
步骤202，获取待处理视频。
其中，待处理视频可以是准备被改变清晰度的视频，可以把该视频的画质经过处理后获得更好的画质，同时也可以根据需求，把该视频从目前的画质降低到所需要的画质，以适应更多的场景。
具体地，电子设备获取到需要被处理的视频，获取到该视频后电子设备会把待处理视频存储在数据库中，当需要处理某一段视频时，电子设备将会把该段视频从数据库调取到随机存取存储器中，以方便处理模块读取待处理视频帧进行处理，待处理视频帧可以是待处理视频里面的视频帧，该视频帧可以通过视频调整改变当前的画质，以满足需求。对于每一段待处理视频，包括有至少两帧的待处理视频帧，每一帧待处理视频帧都会有相应的标识与之相对应。
举例来说，待处理视频可以是需要将清晰度由1920 x 1080分辨率调整为3840 x2160分辨率，以及需要将动态范围由标准动态范围调整为高动态范围的视频。
步骤204，对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧。
其中，解码可以是通过分离器、解码器以及画面渲染调用中央处理器（centralprocessing unit，简称CPU）来达到表现出视频画面的过程，具有安全、快捷、方便、易操作以及易控制等多种优点。
其中，解码后视频帧可以是通过解码的操作后而获得的视频帧，该视频帧因为通过解码，可以获得里面的信息，有助于提升画质。
具体地，将第t帧待处理视频帧从待处理视频中调取出来，然后通过分离器、解码器以及画面渲染调用中央处理器来进行解码，得到第t帧所对应的解码后视频帧。
举例来说，待处理视频A中含有多帧待处理视频帧1、2以及3，将带待处理视频帧调取出来解码，得到了待处理视频帧1、2以及3对应的解码后视频帧1、2以及3。
步骤206，将第t帧解码后视频帧输入至目标画质调整模块，得到第t帧已处理视频帧，并同步执行下述步骤：获取第t帧待处理视频帧的第t+1帧待处理视频帧，并将第t+1帧待处理视频帧作为第t帧待处理视频帧，并返回对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧的步骤，直至得到待处理视频帧对应的已处理视频帧。
其中，目标画质调整模块可以是由多个画质优化子模块根据业务的需求进行组合，当中的画质优化子模块可以包括反交错模块、色域转换模块、动态范围转变模块、去噪模块、超分辨率模块以及插帧模块等。
其中，已处理视频帧可以是通过目标画质调整模块里面对应的画质优化子模块进行了相应处理而得到的视频帧，使得该视频帧达到了业务的需求。
其中，同步执行可以是同时执行两个或者多个步骤，相互之间并不影响，而且前一个步骤处理的结果可以为后一个步骤处理提供条件。
具体地，将第t帧解码后视频帧输入到目标画质调整模块进行处理，该目标画质调整模块中的画质修复增强模块无论从数量上还是顺序上都可以根据业务的需求随意组合，例如可以反交错模块、色域转换模块以及动态范围转变模块这三个组合，也可以动态范围转变模块、去噪模块、超分辨率模块以及插帧模块这四个组合，组合的顺序也可以灵活变动，得到了第t帧已处理视频帧。
执行上面的步骤的同时，执行步骤204，上面的步骤和步骤204可以使用同一个处理器或者使用不同的处理器。获取第t帧待处理视频帧后面的第t+1帧待处理视频帧，使用第t+1帧待处理视频帧作为上述步骤204的第t帧待处理视频帧，然后将第t+1帧待处理视频帧进行解码，得到第t+1帧待处理视频帧对应的第t+1帧的解码后视频帧，接着第t+1帧的解码后视频帧输入至目标画质调整模块进行画质修复的同时，第t+2帧待处理视频帧将输入到中央处理器中执行步骤204，直到所有的待处理视频帧都完成了上述步骤，得到待处理视频帧对应的已处理视频帧。
举例来说，待处理视频A中有视频帧1、2以及3，将视频帧1输入至中央处理器进行解码，得到视频帧1对应的解码后视频帧；将视频帧1对应的解码后视频帧输入至目标画质调整模块中，经过画质修复增强后得到了视频帧1对应的已处理视频帧，在对视频帧1对应的解码后视频帧进行画质修复增强的同时，视频帧2将被输入至中央处理器进行解码，得到视频帧2对应的解码后视频帧，将视频帧2对应的解码后视频帧输入至目标画质调整模块中，经过画质修复增强后得到了视频帧2对应的已处理视频帧；当视频帧2对应的解码后视频帧输入至目标画质调整模块中进行修复增强的同时，视频帧3将输入至中央处理器进行解码，如此循环处理，直到所有待处理视频帧全部修复增强得到已处理视频帧。
步骤208，对已处理视频帧进行组合，得到已处理视频帧序列。
其中，组合可以是对所有已处理视频帧按照一定的顺序进行组合，一定的顺序可以是时间顺序等。
其中，已处理视频帧序列可以是对所有已处理视频帧按照一定的顺序组合而得到的序列，该序列至少包括两帧的已处理视频帧。
具体地，调取所有已处理视频帧中可以用作排序的标识，通过标识对已处理视频帧进行组合，通过组合后得到了已处理视频帧所对应的已处理视频帧序列。
举例来说，调取所有已处理视频帧中的时间标识，然后按照时间标识的先后顺序对已处理视频帧进行组合，组合得到了按照时间轴组合的已处理视频帧序列。
步骤210，将已处理视频帧序列进行编码，得到已处理视频。
其中，编码可以是编码是信息从一种形式或格式转换为另一种形式的过程，该过程需要调用中央处理器进行处理。
其中，已处理视频可以是已经按照业务需求进行画质提升或者画质降低等操作的视频。
具体地，将已经按照一定的顺序组合好的已处理视频帧序列使用中央处理器进行编码，编码后得到了已处理视频，该视频帧数与待处理视频的帧数经过处理后可以是相等或者不相等。
举例来说，已处理视频帧序列中有已处理视频帧1、2以及3，通过中央处理器进行编码，得到了包括已处理视频帧序列的已处理视频。
上述视频处理方法中，通过获取待处理视频，待处理视频包括至少两帧待处理视频帧；对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧；将第t帧解码后视频帧输入至目标画质调整模块，得到第t帧已处理视频帧，并同步执行下述步骤：获取第t帧待处理视频帧的第t+1帧待处理视频帧，并将第t+1帧待处理视频帧作为第t帧待处理视频帧，并返回对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧的步骤，直至得到待处理视频帧对应的已处理视频帧；对已处理视频帧进行组合，得到已处理视频帧序列；将已处理视频帧序列进行编码，得到已处理视频。
通过获取包括至少两帧待处理视频帧的待处理视频，然后对里面的第t帧待处理视频帧进行解码，解码后可以得到第t帧解码后视频帧，解码后的视频帧可以得到里面的更多的参数，同时方便对里面的参数进行调整，解码后的第t帧视频帧将输入目标画质调整模块中进行画质修复增强，得到了第t帧的已处理视频帧，执行第t帧画质修复增强的同时执行第t+1帧的解码，两个步骤同时执行，相互不影响，能够提高处理的效率，当t+1帧解码完毕后将输入至目标画质调整模块中执行画质修复增强，如此循环运行，直到所有的待处理视频帧处理成已处理视频帧，然后将所有已处理视频帧进行组合，得到已处理视频帧序列，将该序列进行编码，得到已处理视频。
通过使用计算机的并行处理，能够使得解码和画质修复增强同时进行，使得大大地减少了视频处理的时间，同时能够保证每一帧都经过相同的处理过程，解码、目标画质调整模块以及编码三个处理模块的分开，可以同时调用计算机的资源，使得计算机的资源能够充分地应用，有助于提高资源的利用率以及视频处理的效率。
在一个实施例中，如图3所示，方法还包括：
步骤302，响应于待处理视频的画质优化指令，确定针对待处理视频的画质优化需求。
其中，画质优化指令可以是计算机响应对待处理视频中的每一帧待处理视频帧进行优化的指令，并按照该指令进行运行。
其中，画质优化需求可以是对待处理视频的画质进行优化后的目标画质，目标画质可以是比待处理视频中的画质好或者比待处理视频中的画质要差，具体情况需要根据需求来决定。
具体地，对计算机发出待处理视频画质优化的指令，计算机响应该指令询问待处理视频画质优化的方向，然后根据画质优化的方向确定优化的总体路线，其次根据总体路线提供画质优化所需要的操作，并提供选择。
举例来说，对计算机发出对待处理视频A进行画质清晰度降低的优化指令，计算机响应该指令询问待处理视频A的画质清晰度降低是朝哪一个方向进行优化，人工对选择从高动态范围优化成标准动态范围后，计算机将根据选择自动确定优化的总体路线，并且对该优化所需要使用的操作进行显示，提供给用户选择。
步骤304，根据画质优化需求，从候选画质优化子模块中确定出至少一个目标画质优化子模块。
其中，画质优化子模块可以是组成目标画质调整模块的子模块，画质优化子模块有多种，分别为：包括反交错模块、色域转换模块、动态范围转变模块、去噪模块、超分辨率模块以及插帧模块等。
其中，目标画质优化子模块可以是被选择出来，并且用来进行画质优化的画质优化子模块。
具体地，根据待处理视频的需求，选择合理的画质优化子模块，选择该子模块的时候需要选择出至少一个，也可以同时选择多个或者全部，如果被选择的画质优化子模块中没有满足待处理视频的需求，可以通过需求添加画质优化子模块，并存储到服务器中，选择出来的画质优化子模块将是目标画质优化子模块，被用作处理待处理视频。
举例来说，待处理视频A的画质优化需求为降低画质清晰度，因此根据需求从画质优化子模块中选择合适的子模块，例如反交错模块、色域转换模块，如果不能满足要求，可以根据待处理视频A中的需求，添加合适的画质优化之模块，例如标准动态范围转变模块。
步骤306，根据至少一个目标画质优化子模块，得到目标画质调整模块。
具体地，根据需求选出来的目标画质优化子模块需要用作处理待处理视频，计算机将把所有的目标画质优化子模块看成一个整体，该整体为目标画质调整模块，运行这些目标画质优化子模块的时候也是按照目标画质调整模块这个整体来进行运行。
举例来说，待处理视频A确定使用反交错模块、色域转换模块以及标准动态范围转变模块进行画质清晰度降低的优化，计算机把上述所说的反交错模块、色域转换模块以及标准动态范围转变模块看作一个目标画质调整模块，运行的时候也是以目标画质调整模块为单位进行处理。
本实施例中，通过根据画质优化的需求，合理地选择需要的画质优化子模块进行视频的画质优化，能够达到避免无效的画质优化子模块的的参与导致计算机消耗资源，提高处理效率。
在一个实施例中，如图4所示，若目标画质优化子模块为一个，根据至少一个目标画质优化子模块，得到目标画质调整模块，包括：
步骤402，将目标画质优化子模块作为目标画质调整模块。
具体地，如果处理该待处理视频的时候只需要选择一个画质优化子模块作为目标画质优化子模块，则所确定的目标画质优化子模块就生成目标画质调整模块，也就是说该目标画质调整模块中只包含一个画质优化子模块，处理待处理视频时也只启用该子模块。
举例来说，待处理视频A需要做降低画质这个画质优化处理，根据需求选定了标准动态范围转变模块，而且只是选择了一个子模块，因此标准动态范围转变模块就生成了目标画质调整模块。
若目标画质优化子模块为多个，根据至少一个目标画质优化子模块进行组合，得到目标画质调整模块，包括：
步骤404，根据画质优化需求，确定针对多个目标画质优化子模块的组合顺序，并按照组合顺序对多个目标画质优化子模块进行组合，得到目标画质调整模块。
其中，组合顺序可以是为了实现某种画质优化的需求而对目标画质优化子模块进行常规的组合的顺序。
具体地，如果处理该待处理视频的时候只需要选择多个画质优化子模块作为目标画质优化子模块，则所确定的多个目标画质优化子模块就按照画质优化的需求，以常规的组合顺序对目标画质优化子模块进行组合，生成目标画质调整模块，也就是说这个顺序是根据处理的流程顺序，人工或者计算机进行排序。
举例来说，待处理视频A中需要满足画质清晰度降低的画质优化的需求，已经选定了反交错模块、色域转换模块以及标准动态范围转变模块进行画质清晰度降低的优化，根据常规的组合顺序，第一为反交错模块，第二为色域转换模块，第三为标准动态范围转变模块，因此就根据该组合顺序把上述三个目标画质优化子模块进行组合，得到目标画质调整模块。
步骤406，对多个目标画质优化子模块进行任意组合，得到目标画质调整模块。
其中，任意组合可以是为了实现某种画质优化的需求而对目标画质优化子模块进行任意的组合。
具体地，如果处理该待处理视频的时候只需要选择多个画质优化子模块作为目标画质优化子模块，则所确定的多个目标画质优化子模块就按照画质优化的需求，以任意的组合顺序对目标画质优化子模块进行组合，生成目标画质调整模块，也就是说这个顺序是不需要根据处理的流程顺序，只需要选定需要的目标画质优化子模块即可，计算机会根据选定的子模块智能分析需要调用哪一个子模块。
举例来说，待处理视频A中需要满足画质清晰度降低的画质优化的需求，已经选定了反交错模块、色域转换模块以及标准动态范围转变模块进行画质清晰度降低的优化，根据任意的组合顺序，把上述三个目标画质优化子模块进行任意组合，例如其中一个顺序为反交错模块、标准动态范围转变模块以及色域转换模块，得到目标画质调整模块，运行对待处理视频A的画质优化的时候计算机只能选取需要调用的目标画质优化子模块。
本实施例中，通过对多个目标画质优化子模块使用合理的顺序进行组合，能够达到采用最合理的顺序处理待处理视频，减少计算机的资源消耗，同时能够减少处理的时间。
在一个实施例中，如图5所示，对多个目标画质优化子模块进行组合，得到目标画质调整模块，包括：
步骤502，对多个目标画质优化子模块进行分组，得到分组后的画质优化子模块集合。
其中，分组可以是对多个目标画质优化子模块按照需要人工或者计算机自动分成不同的集合，对于分组的要求可以是平衡计算机各部分的处理任务，也可以是对同一类型的目标画质优化子模块放在一起等，分组后包含至少一个由目标画质优化子模块组成的集合。
其中，分组后的画质优化子模块集合可以是经过分组后由目标画质优化子模块组成的集合，这些集合里面包含至少一个目标画质优化子模块。
具体地，计算机按照需求对多个目标画质优化子模块进行分组，该需求可以是预设的，也可以是计算机根据处理需求自己决定的，分组后得到分组后的画质优化子模块集合，计算机会把分组后的集合调取到对应的图形处理器进行组合处理。
举例来说，待处理视频B中需要用到多个画质优化子模块，分别为反交错模块、色域转换模块、动态范围转变模块、去噪模块、超分辨率模块以及插帧模块，然后根据计算机的处理需求，把反交错模块、色域转换模块以及动态范围转变模块分成一组，把去噪模块、超分辨率模块以及插帧模块分成一组，得到两个分组后的画质优化子模块集合。
步骤504，对分组后的画质优化子模块集合中的目标画质优化子模块进行任意组合，得到多个目标画质优化子模块组合。
其中，任意组合可以是按照预设的组合顺序进行组合，也可以按照随意的顺序进行组合，具体情况要根据当时优化的需求以及人工的干预而决定。
其中，目标画质优化子模块组合可以是分组后的画质优化子模块集合里面的目标画质优化子模块按照顺序进行组合后而得到的。
具体地，根据业务的需求，对计算机输入预设的组合顺序或者由计算机智能决定组合的顺序，然后根据这个顺序对分组后的画质优化子模块集合里面的目标画质优化子模块进行组合，得到了目标画质优化子模块组合，不同的目标画质优化子模块组合可以分配到不同的图形处理器上对视频帧进行处理，也可以同一个图形处理器对视频帧进行处理。
举例来说，根据业务的需求，对分组后的画质优化子模块集合中的反交错模块、色域转换模块以及动态范围转变模块进行排序，排序后得到的顺序为色域转换模块、动态范围转变模块以及反交错模块，得到了由该顺序组成的目标画质优化子模块组合。
步骤506，将多个目标画质优化子模块组合进行组合，得到目标画质调整模块。
具体地，将已经排序好的目标画质优化子模块组合进行组合，该组合是可以按照任意的顺序，也可以计算机根据具体情况进行排序，组合得到目标画质调整模块。
举例来说，分组后进行排序得到了3个目标画质优化子模块组合，分别为目标画质优化子模块组合1、2以及3，然后对这三个目标画质优化子模块组合按照预设的顺序进行组合，得到了排序为目标画质优化子模块组合3、1、以及2的目标画质调整模块。
本实施例中，通过对目标画质优化子模块进行分组后组合，然后把不同的组合分配到不同的图形处理器进行处理，能够达到充分地利用计算机的处理能力，降低部分图形处理器的峰值负载，提高计算机的处理效率，降低计算机崩溃的危险。
在一个实施例中，如图6所示，目标画质调整模块包括至少两个画质优化子模块，不同的画质优化子模块运行于不同的图形处理器，将第t帧解码后视频帧输入至目标画质调整模块，得到第t帧已处理视频帧，包括：
步骤602，将第t帧解码后视频帧输入至目标画质调整模块中的其中一个画质优化子模块，得到第t帧预处理视频帧。
其中，目标画质调整模块中的其中一个画质优化子模块可以是用来组成目标画质调整模块的那些目标画质优化子模块的其中一个。
其中，第t帧预处理视频帧可以是第t帧解码后视频帧经过部分处理，但是还没经过全部处理而得到的视频帧。
具体地，将第t帧解码后视频帧输入至目标画质调整模块中的其中一个画质优化子模块，该模块可以为目标画质调整模块中的目标画质优化子模块的任意一个，只需要能满足画质优化即可，不必为第一个或者规定的第n个，但是输入该目标画质优化子模块之前必须完成上一个目标画质优化子模块的优化，得到第t帧预处理视频帧。
举例来说，待处理视频A中需要满足画质清晰度降低的画质优化的需求，已经选定了反交错模块、色域转换模块以及标准动态范围转变模块进行画质清晰度降低的优化，将里面的第m帧输入到色域转换模块进行处理，可以得到经过色域转换的第m帧预处理视频帧，但是把第m帧输入到色域转换模块之前必须完成反交错模块的处理。
步骤604，将第t帧预处理视频帧输入目标画质调整模块中的另外一个画质优化子模块，得到第t帧已处理视频帧，并同步执行下述步骤：获取第t+1帧解码后视频帧，将第t+1帧解码后视频帧输入至其中一个画质优化子模块，得到第t+1帧预处理视频帧。
其中，目标画质调整模块中的另外一个画质优化子模块可以是对目标画质调整模块中的其中一个画质优化子模块的一个区别，而且另外一个画质优化子模块的处理是位于其中一个画质优化子模块后面的处理步骤。
其中，同步执行下述步骤可以是执行上一系列步骤的时候同时间执行下一系列的步骤，这两个系列的步骤是并行运行的；第t+1帧预处理视频帧可以是第t+1帧解码后视频帧经过部分处理，但是还没经过全部处理而得到的视频帧。
其中，第t+1帧解码后视频帧可以是位于第t帧解码后视频帧后面的那一帧解码后视频帧，这里的t可以取任意非零的正整数。
具体地，将第t帧解码后视频帧输入至目标画质调整模块中的另外一个画质优化子模块，该模块可以为目标画质调整模块中的目标画质优化子模块的任意一个，只需要能满足画质优化即可，不必为第一个或者规定的第n个，但是输入该目标画质优化子模块之前必须完成上其中一个画质优化子模块的优化，得到第t帧已处理视频帧。
执行上述步骤的同时也执行下面的步骤，获取第t+1帧解码后视频帧，将第t+1帧解码后视频帧输入至目标画质调整模块中的其中一个画质优化子模块，该模块可以为目标画质调整模块中的目标画质优化子模块的任意一个，只需要能满足画质优化即可，不必为第一个或者规定的第n个，但是输入该目标画质优化子模块之前必须完成上一个目标画质优化子模块的优化，得到第t+1帧预处理视频帧。
举例来说，待处理视频A中需要满足画质清晰度降低的画质优化的需求，已经选定了反交错模块、色域转换模块以及标准动态范围转变模块按顺序进行画质清晰度降低的优化，将里面的第m帧输入到标准动态范围转变模块进行处理，可以得到经过标准动态范围处理的第m帧已处理视频帧，但是把第t帧输入到标准动态范围转变模块之前必须完成色域转换模块的处理。
执行上述步骤的同时执行下面的步骤，待处理视频A中需要满足画质清晰度降低的画质优化的需求，已经选定了反交错模块、色域转换模块以及标准动态范围转变模块进行画质清晰度降低的优化，获取第m+1帧待处理视频帧，将里面的第m+1帧输入到色域转换模块进行处理，可以得到经过色域转换的第m+1帧预处理视频帧，但是把第m+1帧输入到色域转换模块之前必须完成反交错模块的处理。
步骤606，将第t+1帧预处理视频帧输入另外一个画质优化子模块，得到第t+1帧已处理视频帧。
其中，第t+1帧预处理视频帧可以是通过目标画质调整模块里面对应的画质修复增强模块进行了相应处理而得到的第t+1帧视频帧。
具体地，将第t+1帧解码后视频帧输入至目标画质调整模块中的另外一个画质优化子模块，该模块可以为目标画质调整模块中的目标画质优化子模块的任意一个，只需要能满足画质优化即可，不必为第一个或者规定的第n个，但是输入该目标画质优化子模块之前必须完成上其中一个画质优化子模块的优化，得到第t+1帧已处理视频帧。
举例来说，待处理视频A中需要满足画质清晰度降低的画质优化的需求，已经选定了反交错模块、色域转换模块以及标准动态范围转变模块按顺序进行画质清晰度降低的优化，将里面的第m+1帧输入到标准动态范围转变模块进行处理，之前已经经过反交错模块以及色域转换模块的处理，可以得到经过标准动态范围处理的第m+1帧已处理视频帧，但是把第m+1帧输入到标准动态范围转变模块之前必须完成色域转换模块的处理。
本实施例中，通过第t帧使用完其中一个画质优化子模块后立即输入第t+1帧，同时把处理后的第t帧输入另外一个画质优化子模块进行下一步处理，并行执行任务，能够达到同时处理多个视频帧，比起串行处理大大地提高了处理效率。
在一个实施例中，如图7所示，将第t帧解码后视频帧输入至目标画质调整模块中的其中一个画质优化子模块，得到第t帧预处理视频帧，包括：
步骤702，获取运行有其中一个画质优化子模块的图形处理器对应的处理负荷。
其中，图形处理器，graphics processing unit，缩写：GPU，可以是一种专门在个人电脑、工作站、服务器、游戏机以及一些移动设备（如平板电脑、智能手机等）上做图像和图形相关运算工作的微处理器；处理负荷可以是图形处理器中处理图像所占用的资源，可以为低负荷，合理负荷以及高负荷。
具体地，计算机获取运行有其中一个画质优化子模块的图形处理器的实时处理状况，该图形处理器可以运行一个画质优化子模块，也可以同时运行多个画质优化子模块，不同的画质优化子模块的运行彼此是独立且并行的，运行的同时接受计算机对其负荷的监控。
举例来说，对待处理视频A进行画质清晰度降低的画质优化，同时位于图形处理器1中运行反交错模块、色域转换模块以及标准动态范围转变模块，计算机实时获取图形处理器1中的运行情况，掌握动态的处理负荷。
步骤704，若处理负荷大于图形处理器对应的处理能力，则将其中一个画质优化子模块调度至除图形处理器之外的其它图形处理器上运行。
其中，处理能力可以是一个图形处理器对任务的最大处理量，超出图形处理器的处理能力时，图形处理器将会按照时间优先处理较早提交的任务。
其中，调度可以是不同图形处理器之间进行沟通后对负载较重的图形处理器的任务分配到任务较轻的图形处理器上进行处理。
其中，其它图形处理器可以是除了执行当前处理步骤之外的图形处理器，图形处理器可以为多个，而且不同图形处理器之间可以并行运行，减少处理时间，不同图形处理器之间的信息实时通过计算机进行互通，能够准确获得相互之间的处理情况。
具体地，计算机实时监测中如果任意一个图形处理器发现处理负荷大于该图形处理器的处理能力，例如超出了显存或者算力，则根据需要把其中一个或者多个的画质优化子模块的任务调度到能够处理更多任务的图形处理器上，以达到不同的图形处理器之间的处理任务相对平衡，这个过程全程由计算机自己监测和调度，也可以人工干预。
举例来说，图形处理器1处理反交错模块、色域转换模块、动态范围转变模块以及去噪模块的任务，而图形处理器2处理超分辨率模块以及插帧模块的任务，然而图形处理器1所处理的任务过多，超出了图形处理器1的处理能力，则计算机就会把去噪模块的任务调度值图形处理器2，达到两个图形处理器处理负荷相对平衡。
步骤706，将第t帧解码后视频帧输入至其它图形处理器，得到第t帧预处理视频帧。
具体地，将第t帧解码后视频通过调度的方式输入至其它没有超过图处理能力的图形处理器，其它图形处理器用于将第t帧解码后视频帧输入至其中一个画质优化子模块，达到不同处理器之间形成一个动态平衡，最后得到第t帧预处理视频帧。
举例来说，第t帧解码后视频帧目前正在去噪模块中进行去噪处理，而图形处理器1处理反交错模块、色域转换模块、动态范围转变模块以及去噪模块的任务，而图形处理器2处理超分辨率模块以及插帧模块的任务，图形处理器1需要处理4个模块的任务，已经超过了它的处理能力，计算机则对去噪模块调度至图形处理器2进行运行，得到第t帧预处理视频帧。
本实施例中，通过平衡图通图形处理器的处理负荷，并且把超负荷的图形处理器的处理任务分配到其它图形处理器上，能够达到让计算机处于一个平衡状态，避免空闲资源的浪费，同时提高处理的效率。
在一个实施例中，本方案总体实施的技术是将多个画质优化子模块（超分模块、去噪模块、反交错模块、动态范围转变模块、色域转换模块、插帧模块）以最佳方式组合，实现将高清1080p SDR BT.709视频上变换到4K HDR BT.2020视频的功能。通过异步机制，本方案总体实施的系统可以充分发挥CPU+双GPU架构资源，实现1:1（1小时视频可1小时完成处理）高效的上变换功能。其中，SDR，英文全称：Standard Dynamic Range，中文全称：标准动态范围；HDR，英文全称：High Dynamic Range，中文全称：高动态范围；BT709指“ITU-RBT.709-6建议书”定义的颜色空间BT2020指“ITU-R BT.2020-2建议书”定义的颜色空间；1080指1920 x 1080分辨率；4K指3840 x 2160分辨率。
对于本实施例“基于画质修复增强的1080p SDR BT709转4K HDR BT2020系统的流程”如下：1、解码模块：将输入的1080 SDR BT709高清视频通过解码器解码成为帧序列。2、反交错模块：可支持打开或者关闭该模块。将有交错格式的视频帧修复成为无交错格式的视频帧。3、色域转换模块：将BT709颜色空间格式表示的视频帧转换成为BT2020颜色空间格式表示的视频帧。4、动态范围转变模块：将标准动态范围亮度层次的视频帧提升至高动态范围亮度层次的视频帧。5、去噪模块：可支持关闭以及低、中、高三种去噪模式。使用智能算法降低或者去除原始视频帧中的噪声。6、超分辨率模块：使用智能算法将1920 x 1080分辨率的视频帧超分至3840 x 2160分辨率的视频帧。7、插帧模块：可支持打开或者关闭。使用智能算法，将两帧中间的一帧绘制出来，实现帧率翻倍的效果。8、编码：将经过修复增强的帧序列按照需求编码成为完整视频。
对于本实施例“基于画质修复增强的1080p SDR BT709转4K HDR BT2020系统的计算架构”如下：1、通过瀑布结构，并行使用CPU（CPU）+ GPU（GPU1）+ GPU（GPU2）的资源。2、解码/编码模块算法在CPU上运行；目标画质优化子模块组合1（反交错模块、色域转换模块、动态范围转变模块）在GPU1上运行，目标画质优化子模块组合2（去噪模块、超分辨率模块、插帧模块）在GPU2上运行。GPU1和GPU2上运行的画质优化子模块可以根据模块实际耗时灵活调整，已实现GPU1和GPU2上负载平衡。3、CPU上运行第t+3帧的解码，GPU1上运行第t+2帧的目标画质优化子模块组合1，GPU2上运行第t+1帧的目标画质优化子模块组合2，CPU上并行运行第t帧的编码。4、硬件配置：多核CPU、双NVidia Turing架构显卡。具体的流程图以及计算机架构图如图8所示。
通过本实施例，基于画质修复增强流程，实现1080 SDR BT709视频上变换到4KHDR BT2020视频，可修复交错、噪声、清晰度不足的问题，达到4K画质要求；同时实现视频修复增强灵活配置，可适应不同场景的需求；也大幅提高硬件资源利用率，实现高效率1080SDR BT709视频上变换到4K HDR BT2020视频。
应该理解的是，虽然如上的各实施例所涉及的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，如上的各实施例所涉及的流程图中的至少一部分步骤可以包括多个步骤或者多个阶段，这些步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
基于同样的发明构思，本申请实施例还提供了一种用于实现上述所涉及的视频处理方法的视频处理装置。该装置所提供的解决问题的实现方案与上述方法中所记载的实现方案相似，故下面所提供的一个或多个视频处理装置实施例中的具体限定可以参见上文中对于视频处理方法的限定，在此不再赘述。
在一个实施例中，如图9所示，提供了一种视频处理装置，包括：待处理视频获取模块、解码后视频帧得到模块、已处理视频帧得到模块、已处理视频帧序列得到模块和已处理视频得到模块，其中：
待处理视频获取模块902，用于获取待处理视频；待处理视频包括至少两帧待处理视频帧；
解码后视频帧得到模块904，用于对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧；
已处理视频帧得到模块906，用于将第t帧解码后视频帧输入至目标画质调整模块，得到第t帧已处理视频帧，并同步执行下述步骤：获取第t帧待处理视频帧的第t+1帧待处理视频帧，并将第t+1帧待处理视频帧作为第t帧待处理视频帧，并返回对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧的步骤，直至得到待处理视频帧对应的已处理视频帧；
已处理视频帧序列得到模块908，用于对已处理视频帧进行组合，得到已处理视频帧序列；
已处理视频得到模块910，用于将已处理视频帧序列进行编码，得到已处理视频。
在其中一个实施例中，目标画质调整模块得到模块，用于响应于待处理视频的画质优化指令，确定针对待处理视频的画质优化需求；根据画质优化需求，从候选画质优化子模块中确定出至少一个目标画质优化子模块；根据至少一个目标画质优化子模块，得到目标画质调整模块。
在其中一个实施例中，目标画质调整模块得到模块，用于将目标画质优化子模块作为目标画质调整模块；根据画质优化需求，确定针对多个目标画质优化子模块的组合顺序，并按照组合顺序对多个目标画质优化子模块进行组合，得到目标画质调整模块；或者，对多个目标画质优化子模块进行任意组合，得到目标画质调整模块。
在其中一个实施例中，目标画质调整模块得到模块，用于对多个目标画质优化子模块进行分组，得到分组后的画质优化子模块集合；对分组后的画质优化子模块集合中的目标画质优化子模块进行任意组合，得到多个目标画质优化子模块组合；将多个目标画质优化子模块组合进行组合，得到目标画质调整模块。
在其中一个实施例中，已处理视频帧得到模块，用于将第t帧解码后视频帧输入至目标画质调整模块中的其中一个画质优化子模块，得到第t帧预处理视频帧；将第t帧预处理视频帧输入目标画质调整模块中的另外一个画质优化子模块，得到第t帧已处理视频帧，并同步执行下述步骤：获取第t+1帧解码后视频帧，将第t+1帧解码后视频帧输入至其中一个画质优化子模块，得到第t+1帧预处理视频帧；将第t+1帧预处理视频帧输入另外一个画质优化子模块，得到第t+1帧已处理视频帧。
在其中一个实施例中，已处理视频帧得到模块，用于获取运行有其中一个画质优化子模块的图形处理器对应的处理负荷；若处理负荷大于图形处理器对应的处理能力，则将其中一个画质优化子模块调度至除图形处理器之外的其它图形处理器上运行；将第t帧解码后视频帧输入至其它图形处理器，其它图形处理器用于将第t帧解码后视频帧输入至其中一个画质优化子模块，得到第t帧预处理视频帧。
上述视频处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中，提供了一种计算机设备，该计算机设备可以是服务器，其内部结构图可以如图10所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质和内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储服务器数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种视频处理方法。
本领域技术人员可以理解，图10中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
在一个实施例中，提供了一种计算机设备，该计算机设备可以是终端，其内部结构图可以如图11所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信，无线方式可通过WIFI、移动蜂窝网络、NFC（近场通信）或其他技术实现。该计算机程序被处理器执行时以实现一种视频处理方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏，该计算机设备的输入装置可以是显示屏上覆盖的触摸层，也可以是计算机设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解，图11中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
在一个实施例中，还提供了一种计算机设备，包括存储器和处理器，存储器中存储有计算机程序，该处理器执行计算机程序时实现上述各方法实施例中的步骤。
在一个实施例中，提供了一种计算机可读存储介质，存储有计算机程序，该计算机程序被处理器执行时实现上述各方法实施例中的步骤。
需要说明的是，本申请所涉及的用户信息（包括但不限于用户设备信息、用户个人信息等）和数据（包括但不限于用于分析的数据、存储的数据、展示的数据等），均为经用户授权或者经过各方充分授权的信息和数据。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、数据库或其它介质的任何引用，均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器（Read-OnlyMemory，ROM）、磁带、软盘、闪存、光存储器、高密度嵌入式非易失性存储器、阻变存储器（ReRAM）、磁变存储器（Magnetoresistive Random Access Memory，MRAM）、铁电存储器（Ferroelectric Random Access Memory，FRAM）、相变存储器（Phase Change Memory，PCM）、石墨烯存储器等。易失性存储器可包括随机存取存储器（Random Access Memory，RAM）或外部高速缓冲存储器等。作为说明而非局限，RAM可以是多种形式，比如静态随机存取存储器（Static Random Access Memory，SRAM）或动态随机存取存储器（Dynamic RandomAccess Memory，DRAM）等。本申请所提供的各实施例中所涉及的数据库可包括关系型数据库和非关系型数据库中至少一种。非关系型数据库可包括基于区块链的分布式数据库等，不限于此。本申请所提供的各实施例中所涉及的处理器可为通用处理器、中央处理器、图形处理器、数字信号处理器、可编程逻辑器、基于量子计算的数据处理逻辑器等，不限于此。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请的保护范围应以所附权利要求为准。
Claims (9)
1.一种视频处理方法，其特征在于，所述方法包括：
获取待处理视频，所述待处理视频包括至少两帧待处理视频帧；
对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧；
将所述第t帧解码后视频帧输入至目标画质调整模块，得到第t帧已处理视频帧，并同步执行下述步骤：将第t+1帧所述待处理视频帧作为所述第t帧待处理视频帧，并返回对所述第t帧待处理视频帧进行解码，得到第t帧解码后视频帧的步骤，直至得到所述待处理视频帧对应的已处理视频帧；
对所述已处理视频帧进行组合，得到已处理视频帧序列；
将所述已处理视频帧序列进行编码，得到已处理视频。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
响应于所述待处理视频的画质优化指令，确定针对所述待处理视频的画质优化需求；
根据所述画质优化需求，从候选画质优化子模块中确定出至少一个目标画质优化子模块；
根据所述至少一个目标画质优化子模块，得到所述目标画质调整模块。
3.根据权利要求2所述的方法，其特征在于，若所述目标画质优化子模块为一个，所述根据所述至少一个目标画质优化子模块，得到所述目标画质调整模块，包括：
将所述目标画质优化子模块作为所述目标画质调整模块；
若所述目标画质优化子模块为多个，所述根据所述至少一个目标画质优化子模块进行组合，得到所述目标画质调整模块，包括：
根据所述画质优化需求，确定针对多个所述目标画质优化子模块的组合顺序，并按照所述组合顺序对多个所述目标画质优化子模块进行组合，得到所述目标画质调整模块；
或者，
对多个所述目标画质优化子模块进行任意组合，得到所述目标画质调整模块。
4.根据权利要求3所述的方法，其特征在于，所述对多个所述目标画质优化子模块进行组合，得到所述目标画质调整模块，包括：
对多个所述目标画质优化子模块进行分组，得到分组后的画质优化子模块集合；
对所述分组后的画质优化子模块集合中的所述目标画质优化子模块进行任意组合，得到多个目标画质优化子模块组合；
将多个所述目标画质优化子模块组合进行组合，得到所述目标画质调整模块。
5.根据权利要求1所述的方法，其特征在于，所述目标画质调整模块包括至少两个画质优化子模块，不同的所述画质优化子模块运行于不同的图形处理器，所述将所述第t帧解码后视频帧输入至目标画质调整模块，得到第t帧已处理视频帧，包括：
将所述第t帧解码后视频帧输入至所述目标画质调整模块中的其中一个画质优化子模块，得到第t帧预处理视频帧；
将所述第t帧预处理视频帧输入所述目标画质调整模块中的另外一个画质优化子模块，得到所述第t帧已处理视频帧，并同步执行下述步骤：获取第t+1帧解码后视频帧，将所述第t+1帧解码后视频帧输入至所述其中一个画质优化子模块，得到第t+1帧预处理视频帧；
将所述第t+1帧预处理视频帧输入所述另外一个画质优化子模块，得到第t+1帧已处理视频帧。
6.根据权利要求5所述的方法，其特征在于，所述将所述第t帧解码后视频帧输入至所述目标画质调整模块中的其中一个画质优化子模块，得到第t帧预处理视频帧，包括：
获取运行有所述其中一个画质优化子模块的图形处理器对应的处理负荷；
若所述处理负荷大于所述图形处理器对应的处理能力，则将所述其中一个画质优化子模块调度至除所述图形处理器之外的其它图形处理器上运行；
将所述第t帧解码后视频帧输入至所述其它图形处理器，所述其它图形处理器用于将所述第t帧解码后视频帧输入至所述其中一个画质优化子模块，得到所述第t帧预处理视频帧。
7.一种视频处理装置，其特征在于，所述装置包括：
待处理视频获取模块，用于获取待处理视频；所述待处理视频包括至少两帧待处理视频帧；
解码后视频帧得到模块，用于对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧；
已处理视频帧得到模块，用于将所述第t帧解码后视频帧输入至目标画质调整模块，得到第t帧已处理视频帧，并同步执行下述步骤：将所述第t+1帧待处理视频帧作为所述第t帧待处理视频帧，并返回所述对第t帧待处理视频帧进行解码，得到第t帧解码后视频帧的步骤，直至得到所述待处理视频帧对应的已处理视频帧；
已处理视频帧序列得到模块，用于对所述已处理视频帧进行组合，得到已处理视频帧序列；
已处理视频得到模块，用于将所述已处理视频帧序列进行编码，得到已处理视频。
8.一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至6中任一项所述的方法的步骤。
9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210328281.8A CN114501139A (zh) | 2022-03-31 | 2022-03-31 | 一种视频处理方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210328281.8A CN114501139A (zh) | 2022-03-31 | 2022-03-31 | 一种视频处理方法、装置、计算机设备和存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114501139A true CN114501139A (zh) | 2022-05-13 |
Family
ID=81487278
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210328281.8A Pending CN114501139A (zh) | 2022-03-31 | 2022-03-31 | 一种视频处理方法、装置、计算机设备和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114501139A (zh) |
Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102572224A (zh) * | 2010-12-29 | 2012-07-11 | 索尼公司 | 图像处理装置、图像处理方法和程序 |
| US20150358547A1 (en) * | 2013-02-14 | 2015-12-10 | Hitachi Kokusai Electric Inc. | Image processing apparatus |
| CN206807643U (zh) * | 2016-12-07 | 2017-12-26 | 广州偕作信息科技有限公司 | 基于arm架构的4k图像拼接显示装置及显示系统 |
| CN108734628A (zh) * | 2017-04-17 | 2018-11-02 | 英特尔公司 | 基于功率和基于目标的图形质量调整 |
| CN109640167A (zh) * | 2018-11-27 | 2019-04-16 | Oppo广东移动通信有限公司 | 视频处理方法、装置、电子设备及存储介质 |
| CN110378860A (zh) * | 2019-07-30 | 2019-10-25 | 腾讯科技（深圳）有限公司 | 修复视频的方法、装置、计算机设备和存储介质 |
| CN112181657A (zh) * | 2020-09-30 | 2021-01-05 | 京东方科技集团股份有限公司 | 视频处理方法、装置、电子设备及存储介质 |
| WO2021041125A1 (en) * | 2019-08-23 | 2021-03-04 | Subtle Medical, Inc. | Systems and methods for accurate and rapid positron emission tomography using deep learning |
| CN113393367A (zh) * | 2021-07-08 | 2021-09-14 | 北京百度网讯科技有限公司 | 图像处理方法、装置、设备和介质 |
| CN113450275A (zh) * | 2021-06-28 | 2021-09-28 | 上海人工智能研究院有限公司 | 基于元学习的画质增强系统及方法、存储介质 |
| CN113538211A (zh) * | 2020-04-22 | 2021-10-22 | 华为技术有限公司 | 一种画质增强装置及相关方法 |
-
2022
- 2022-03-31 CN CN202210328281.8A patent/CN114501139A/zh active Pending
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102572224A (zh) * | 2010-12-29 | 2012-07-11 | 索尼公司 | 图像处理装置、图像处理方法和程序 |
| US20150358547A1 (en) * | 2013-02-14 | 2015-12-10 | Hitachi Kokusai Electric Inc. | Image processing apparatus |
| CN206807643U (zh) * | 2016-12-07 | 2017-12-26 | 广州偕作信息科技有限公司 | 基于arm架构的4k图像拼接显示装置及显示系统 |
| CN108734628A (zh) * | 2017-04-17 | 2018-11-02 | 英特尔公司 | 基于功率和基于目标的图形质量调整 |
| CN109640167A (zh) * | 2018-11-27 | 2019-04-16 | Oppo广东移动通信有限公司 | 视频处理方法、装置、电子设备及存储介质 |
| CN110378860A (zh) * | 2019-07-30 | 2019-10-25 | 腾讯科技（深圳）有限公司 | 修复视频的方法、装置、计算机设备和存储介质 |
| WO2021041125A1 (en) * | 2019-08-23 | 2021-03-04 | Subtle Medical, Inc. | Systems and methods for accurate and rapid positron emission tomography using deep learning |
| CN113538211A (zh) * | 2020-04-22 | 2021-10-22 | 华为技术有限公司 | 一种画质增强装置及相关方法 |
| CN112181657A (zh) * | 2020-09-30 | 2021-01-05 | 京东方科技集团股份有限公司 | 视频处理方法、装置、电子设备及存储介质 |
| CN113450275A (zh) * | 2021-06-28 | 2021-09-28 | 上海人工智能研究院有限公司 | 基于元学习的画质增强系统及方法、存储介质 |
| CN113393367A (zh) * | 2021-07-08 | 2021-09-14 | 北京百度网讯科技有限公司 | 图像处理方法、装置、设备和介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111314741B (zh) | 视频超分处理方法、装置、电子设备及存储介质 | |
| US9652300B2 (en) | Systems, methods, and computer program products for preemption of threads at a synchronization barrier | |
| CN111681167A (zh) | 画质调整方法和装置、存储介质及电子设备 | |
| US10621691B2 (en) | Subset based compression and decompression of graphics data | |
| CN112181657B (zh) | 视频处理方法、装置、电子设备及存储介质 | |
| WO2016192079A1 (en) | Adaptive batch encoding for slow motion video recording | |
| US9774874B2 (en) | Transcoding management techniques | |
| CN111492656B (zh) | 用于图像的两阶段解码的方法、设备和介质 | |
| GB2525766B (en) | Distributed graphics processing | |
| CN114040246A (zh) | 图形处理器的图像格式转换方法、装置、设备及存储介质 | |
| CN110858388B (zh) | 一种增强视频画质的方法和装置 | |
| EP3910941A1 (en) | Parallel video encoding of coding units from neighboring largest coding units | |
| CN114913063A (zh) | 一种图像处理方法和装置 | |
| CN112991143A (zh) | 一种图元装配的方法、装置及计算机存储介质 | |
| US12008954B2 (en) | Method and system for compressing Demura compensation value | |
| CN112991170A (zh) | 图像超分辨率重建的方法、装置、终端及存储介质 | |
| JP2006086965A (ja) | 画像処理装置、画像伝送装置、表示装置、画像処理方法及び画像伝送方法 | |
| CN114501139A (zh) | 一种视频处理方法、装置、计算机设备和存储介质 | |
| US10846142B2 (en) | Graphics processor workload acceleration using a command template for batch usage scenarios | |
| US9615104B2 (en) | Spatial variant dependency pattern method for GPU based intra prediction in HEVC | |
| JP3432039B2 (ja) | 画像符号化方法及びその装置 | |
| CN110858389B (zh) | 一种增强视频画质的方法、装置、终端及转码设备 | |
| de Cea-Dominguez et al. | Real-time 16K video coding on a GPU with complexity scalable BPC-PaCo | |
| US20150116311A1 (en) | Accelerated video post processing systems and methods | |
| JP5621025B1 (ja) | 画像処理システム、画像処理方法、及び画像処理プログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 40067417 Country of ref document: HK |
|
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20220513 |
|
| RJ01 | Rejection of invention patent application after publication |