CN114245209B - 视频分辨率确定、模型训练、视频编码方法及装置 - Google Patents

视频分辨率确定、模型训练、视频编码方法及装置 Download PDF

Info

Publication number
CN114245209B
CN114245209B CN202111581338.7A CN202111581338A CN114245209B CN 114245209 B CN114245209 B CN 114245209B CN 202111581338 A CN202111581338 A CN 202111581338A CN 114245209 B CN114245209 B CN 114245209B
Authority
CN
China
Prior art keywords
video
resolution
candidate
code rate
quality evaluation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111581338.7A
Other languages
English (en)
Other versions
CN114245209A (zh
Inventor
巩浩
赵明菲
陈宇聪
白瑞
闻兴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Dajia Internet Information Technology Co Ltd
Original Assignee
Beijing Dajia Internet Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Dajia Internet Information Technology Co Ltd filed Critical Beijing Dajia Internet Information Technology Co Ltd
Priority to CN202111581338.7A priority Critical patent/CN114245209B/zh
Publication of CN114245209A publication Critical patent/CN114245209A/zh
Application granted granted Critical
Publication of CN114245209B publication Critical patent/CN114245209B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Molecular Biology (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Evolutionary Biology (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本公开关于一种视频分辨率确定方法及装置、视频分辨率决策模型的训练方法及装置、视频编码方法及装置。该视频分辨率确定方法包括:获取至少一个候选分辨率;根据基于所述至少一个候选分辨率对所述视频进行编码的码率,确定所述视频的视频质量评价指标集合和码率集合,其中,所述视频包括至少一个视频;基于所述视频的码率集合确定所述视频的目标码率;基于所述视频的视频质量评价指标集合、码率集合以及所述目标码率,从所述至少一个候选分辨率中确定与所述视频对应的分辨率。根据本公开的视频分辨率确定方法及装置,可实现在同码率下选择更优的分辨率,从而提高视频质量,并且降低带宽成本。

Description

视频分辨率确定、模型训练、视频编码方法及装置
技术领域
本公开涉及视频技术领域。更具体地,本公开涉及一种视频分辨率确定方法及装置、视频分辨率决策模型的训练方法及装置、视频编码方法及装置。
背景技术
近年来,随着互联网技术不断发展,网络带宽不断增加,高分辨率显示设备逐渐普及,人们对高清视频的需求不断增长。高分辨率视频播放通常需要较高的带宽,低带宽下高分辨率视频质量较差。为了拥有更好的视频播放体验,通常在网速较差的情况下以较低的分辨率对视频进行编码,解码后再由播放设备上采样并播放。高分辨率视频和低分辨率视频之间存在一个带宽临界点,当前带宽高于临界点时,使用高分辨率编码视频质量较好,带宽低于临界点时,使用低分辨率编码视频质量较好。由于各视频内容不同,更优分辨率的带宽临界点也不同,难以判断某个带宽点每个视频的最佳分辨率。更准确的分辨率决策有利于提高视频质量,节省带宽成本。
发明内容
本公开的示例性实施例在于提供一种视频分辨率确定方法及装置、视频分辨率决策模型的训练方法及装置,以至少解决相关技术中的视频分辨率确定的问题,也可不解决任何上述问题。
根据本公开的示例性实施例,提供一种视频分辨率确定方法,包括:获取多个视频、多个候选分辨率;根据基于所述至少一个候选分辨率对所述视频进行编码的码率,确定所述视频的视频质量评价指标集合和码率集合,其中,所述视频包括至少一个视频;基于所述视频的码率集合确定所述视频的目标码率;基于所述视频的视频质量评价指标集合、码率集合以及所述目标码率,从所述至少一个候选分辨率中确定与所述视频对应的分辨率。
可选地,根据基于所述至少一个候选分辨率对所述视频进行编码的码率,确定所述视频的视频质量评价指标集合和码率集合,可包括:根据基于所述至少一个候选分辨率对所述视频进行编码的码率,确定分辨率与预定编码参数的对应关系;基于分辨率与预定编码参数的对应关系确定所述视频的视频质量评价指标集合和码率集合。
可选地,根据基于所述至少一个候选分辨率对所述视频进行编码的码率,确定分辨率与预定编码参数的对应关系,可包括:确定以所述至少一个候选分辨率中的第一候选分辨率和预设的第一预定编码参数对所述视频进行编码的平均码率;基于所述平均码率分别确定与所述至少一个候选分辨率中的第一候选分辨率之外的候选分辨率对应的预定编码参数,得到分辨率与预定编码参数的对应关系。
可选地,基于所述平均码率分别确定与所述至少一个候选分辨率中的第一候选分辨率之外的候选分辨率对应的预定编码参数,可包括:调整与所述至少一个候选分辨率中的第一候选分辨率之外的候选分辨率对应的预定编码参数,使得以所述至少一个候选分辨率中的第一候选分辨率之外的候选分辨率和对应的预定编码参数对所述视频进行编码的码率平均值与所述平均码率的差处于预设范围内。
可选地,基于分辨率与预定编码参数的对应关系确定所述视频的视频质量评价指标集合和码率集合,可包括:基于分辨率与预定编码参数的对应关系分别以所述至少一个候选分辨率中的每个候选分辨率和对应的预定编码参数对所述视频进行编码,得到所述视频的视频质量评价指标集合和码率集合。
可选地,基于所述视频的码率集合确定所述视频的目标码率,可包括:确定所有码率集合中的所有码率的平均值,将所述平均值作为所述目标码率。
可选地,基于所述视频的视频质量评价指标集合、码率集合以及所述目标码率,从所述至少一个候选分辨率中确定与所述视频对应的分辨率,可包括:将所述视频的视频质量评价指标集合、码率集合以及所述目标码率输入到动态规划算法中;将动态规划算法的输出作为从所述至少一个候选分辨率中确定的与所述视频对应的分辨率。
可选地,预定编码参数可包括恒定码率因子和编码量化参数中的至少一个。
可选地,视频质量评价指标集合可以是由所述视频的在所述至少一个候选分辨率中的每个候选分辨率下视频质量评价指标组成的集合,视频质量评价指标可包括客观质量评价指标和/或主观质量分数,客观质量评价指标可包括视频多方法评估融合结果、峰值信噪比图像质量评估结果、结构相似性图像质量评估结果、多尺度结构相似性图像质量评估结果中的至少一个。
根据本公开的示例性实施例,提供一种视频分辨率决策模型的训练方法,包括:通过视频分辨率决策模型预测训练视频的分辨率,得到训练视频的预测分辨率;确定训练视频的预测分辨率和训练视频的目标分辨率的差,其中,目标分辨率是预先通过本公开中的视频分辨率确定方法确定的;将所述差作为训练损失对所述视频分辨率决策模型的参数进行调整。
根据本公开的示例性实施例,提供一种视频编码方法,包括:将视频输入到视频分辨率决策模型,其中,视频分辨率决策模型是通过本公开中的视频分辨率决策模型的训练方法训练得到的;基于所述视频分辨率决策模型输出的分辨率,对所述视频进行编码。
根据本公开的示例性实施例,提供一种视频分辨率确定装置,包括:数据获取单元,被配置为获取多个视频、多个候选分辨率;参数确定单元,被配置为根据基于所述至少一个候选分辨率对所述视频进行编码的码率,确定所述视频的视频质量评价指标集合和码率集合,其中,所述视频包括至少一个视频;目标确定单元,被配置为基于所述视频的码率集合确定所述视频的目标码率;和分辨率确定单元,被配置为基于所述视频的视频质量评价指标集合、码率集合以及所述目标码率,从所述至少一个候选分辨率中确定与所述视频对应的分辨率。
可选地,参数确定单元可被配置为:根据基于所述至少一个候选分辨率对所述视频进行编码的码率,确定所述多个视频的分辨率与预定编码参数的对应关系;基于分辨率与预定编码参数的对应关系确定所述视频的视频质量评价指标集合和码率集合。
可选地,参数确定单元可被配置为:确定以所述至少一个候选分辨率中的第一候选分辨率和预设的第一预定编码参数对所述视频进行编码的平均码率;基于所述平均码率分别确定与所述至少一个候选分辨率中的第一候选分辨率之外的候选分辨率对应的预定编码参数,得到分辨率与预定编码参数的对应关系。
可选地,参数确定单元可被配置为:调整与所述至少一个候选分辨率中的第一候选分辨率之外的候选分辨率对应的预定编码参数,使得以所述至少一个候选分辨率中的第一候选分辨率之外的候选分辨率和对应的预定编码参数对所述视频进行编码的码率平均值与所述平均码率的差处于预设范围内。
可选地,参数确定单元可被配置为:基于分辨率与预定编码参数的对应关系分别以所述至少一个候选分辨率中的每个候选分辨率和对应的预定编码参数对所述视频进行编码,得到所述视频的视频质量评价指标集合和码率集合。
可选地,目标确定单元可被配置为:确定所有码率集合中的所有码率的平均值,将所述平均值作为所述目标码率。
可选地,分辨率确定单元可被配置为:将所述视频的视频质量评价指标集合、码率集合以及所述目标码率输入到动态规划算法中;将动态规划算法的输出作为从所述至少一个候选分辨率中确定的与所述视频对应的分辨率。
可选地,预定编码参数可包括恒定码率因子和编码量化参数中的至少一个。
可选地,视频质量评价指标集合可以是由所述视频的在所述至少一个候选分辨率中的每个候选分辨率下视频质量评价指标组成的集合,视频质量评价指标可包括客观质量评价指标和/或主观质量分数,客观质量评价指标可包括视频多方法评估融合结果、峰值信噪比图像质量评估结果、结构相似性图像质量评估结果、多尺度结构相似性图像质量评估结果中的至少一个。
根据本公开的示例性实施例,提供一种视频分辨率决策模型的训练装置,包括:分辨率预测单元,被配置为通过视频分辨率决策模型预测训练视频的分辨率,得到训练视频的预测分辨率;损失确定单元,被配置为确定训练视频的预测分辨率和训练视频的目标分辨率的差,其中,目标分辨率是预先通过本公开中的视频分辨率确定方法确定的;和参数调整单元,被配置为将所述差作为训练损失对所述视频分辨率决策模型的参数进行调整。
根据本公开的示例性实施例,提供一种视频编码装置,包括:视频输入单元,被配置为将视频输入到视频分辨率决策模型,其中,视频分辨率决策模型是通过本公开中的视频分辨率决策模型的训练方法训练得到的;和视频编码单元,被配置为基于所述视频分辨率决策模型输出的分辨率,对所述视频进行编码。
根据本公开的示例性实施例,提供一种电子设备,包括:处理器;用于存储所述处理器可执行指令的存储器;其中,所述处理器被配置为执行所述指令,以实现根据本公开的示例性实施例的视频分辨率确定方法、视频分辨率决策模型的训练方法。
根据本公开的示例性实施例,提供一种计算机可读存储介质,其上存储有计算机程序,当所述计算机程序被电子设备的处理器执行时,使得电子设备执行根据本公开的示例性实施例的视频分辨率确定方法、视频分辨率决策模型的训练方法。
根据本公开的示例性实施例,提供一种计算机程序产品,包括计算机程序/指令,当所述计算机程序/指令被处理器执行时,实现根据本公开的示例性实施例的视频分辨率确定方法、视频分辨率决策模型的训练方法。
本公开的实施例提供的技术方案至少带来以下有益效果:
实现在同码率下选择更优的分辨率,从而提高视频质量,并且降低带宽成本;
基于动态规划算法进行求解,获取在给定码率条件下平均客观质量最高的分辨率决策方案;
通过建立分类模型对最佳分辨率进行预测,避免了多次编码带来的高计算复杂度,从而增加了实用性。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理,并不构成对本公开的不当限定。
图1示出本公开的示例性实施例可以应用于其中的示例性系统架构。
图2示出根据本公开的示例性实施例的视频分辨率确定方法的流程图。
图3示出根据本公开的示例性实施例的视频分辨率决策模型的训练方法的流程图。
图4示出根据本公开的另一示例性实施例的视频编码方法的流程图。
图5示出根据本公开的示例性实施例的视频分辨率确定装置的框图。
图6示出根据本公开的示例性实施例的视频分辨率决策模型的训练装置的框图。
图7示出根据本公开的另一示例性实施例的视频编码装置的框图。
图8是根据本公开的示例性实施例的电子设备800的框图。
具体实施方式
为了使本领域普通人员更好地理解本公开的技术方案,下面将结合附图,对本公开实施例中的技术方案进行清楚、完整地描述。
需要说明的是,本公开的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本公开的实施例能够以除了在这里图示或描述的那些以外的顺序实施。以下实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
在此需要说明的是,在本公开中出现的“若干项之中的至少一项”均表示包含“该若干项中的任意一项”、“该若干项中的任意多项的组合”、“该若干项的全体”这三类并列的情况。例如“包括A和B之中的至少一个”即包括如下三种并列的情况:(1)包括A;(2)包括B;(3)包括A和B。又例如“执行步骤一和步骤二之中的至少一个”,即表示如下三种并列的情况:(1)执行步骤一;(2)执行步骤二;(3)执行步骤一和步骤二。
在相关技术中,首选选取不同复杂度的热门视频作为数据集,对数据集中的视频以不同分辨率、不同码率进行编码,并计算数据集中视频的平均码率、平均质量。绘制不同分辨率的质量-码率曲线。通常高分辨率视频质量在高码率段显著优于低分辨率视频,在低分辨率段劣于低分辨率视频,因此两条质量-码率曲线存在一个交点。可以计算交点处的码率,作为分辨率切换阈值。每两个分辨率之间计算一个切换阈值,当前带宽高于此阈值时使用高分辨率编码,低于此阈值时使用低分辨率编码。
然而,由于未考虑某带宽下最佳分辨率与视频内容间的关系,因此,用于切换分辨率的带宽阈值根据数据集平均值进行计算,对于某个带宽点,仅可使用某种固定分辨率,难以根据每个视频内容进行自适应调整。
下面,将参照图1至图8具体描述根据本公开的示例性实施例的视频分辨率确定方法及装置、视频分辨率决策模型的训练方法及装置、视频编码方法及装置。
图1示出本公开的示例性实施例可以应用于其中的示例性系统架构100。
如图1所示,系统架构100可以包括终端设备101、102、103,网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。用户可以使用终端设备101、102、103通过网络104与服务器105交互,以接收或发送消息(例如,视频分辨率确定请求、视频编码请求、视频分辨率决策模型的训练请求)等。终端设备101、102、103上可以安装有各种视频应用。终端设备101、102、103可以是硬件,也可以是软件。当终端设备101、102、103为硬件时,可以是具有显示屏并且能够进行音视频播放、录制、编辑等的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。当终端设备101、102、103为软件时,可以安装在上述所列举的电子设备中,其可以实现成多个软件或软件模块(例如,用来提供分布式服务),也可以实现成单个软件或软件模块。在此不做具体限定。
终端设备101、102、103可以安装有图像采集装置(例如,摄像头),以采集视频数据。实践中,组成视频的最小视觉单位是帧(Frame)。每一帧是一幅静态的图像。将时间上连续的帧序列合成到一起便形成动态视频。此外,终端设备101、102、103也可以安装有用于将电信号转换为声音的组件(例如,扬声器)以播放声音,并且还可以安装有用于将模拟音频信号转换为数字音频信号的装置(例如,麦克风)以采集声音。
服务器105可以是提供各种服务的服务器,例如对终端设备101、102、103上所安装的多媒体应用提供支持的后台服务器。后台服务器可以对所接收到的视频分辨率确定请求、视频编码请求、视频分辨率决策模型的训练请求等数据进行解析、存储等处理。
需要说明的是,服务器可以是硬件,也可以是软件。当服务器为硬件时,可以实现成多个服务器组成的分布式服务器集群,也可以实现成单个服务器。当服务器为软件时,可以实现成多个软件或软件模块(例如,用来提供分布式服务),也可以实现成单个软件或软件模块。在此不做具体限定。
需要说明的是,本公开实施例所提供的视频分辨率确定方法、视频分辨率决策模型的训练方法通常由终端设备执行,但是也可由服务器执行,或者也可以由终端设备和服务器协作执行。相应地,视频分辨率确定装置、视频分辨率决策模型的训练装置可设置在终端设备中、服务器中或者设置在终端设备和服务器两者中。
应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器,本公开对此并无限制。
图2示出根据本公开的示例性实施例的视频分辨率确定方法的流程图。
参照图2,在步骤S201,获取至少一个候选分辨率。这里,还获取多个需要确定用于视频编码的分辨率的视频,所述多个视频可组成视频集。例如,可选取多个热门视频,本公开不限于此。例如,可确定M种分辨率作为候选分辨率。可将候选分辨率的集合表示为R=[r1,r2,…,rM],ri表示第i种候选分辨率,i的最小值为1,最大值为M。作为示例,候选分辨率可以是720p和576p等。
在步骤S202,根据基于所述至少一个候选分辨率对所述视频进行编码的码率,确定所述视频的视频质量评价指标集合和码率集合。这里,所述视频可包括至少一个视频。
在本公开的示例性实施例中,在根据基于所述至少一个候选分辨率对所述视频进行编码的码率,确定所述视频的视频质量评价指标集合和码率集合时,可首先根据基于所述至少一个候选分辨率对所述视频进行编码的码率,确定分辨率与预定编码参数的对应关系,然后基于分辨率与预定编码参数的对应关系确定所述视频的视频质量评价指标集合和码率集合。
在本公开的示例性实施例中,在根据基于所述至少一个候选分辨率对所述视频进行编码的码率,确定所述多个视频的分辨率与预定编码参数的对应关系时,可首先确定以所述至少一个候选分辨率中的第一候选分辨率和预设的第一预定编码参数对所述多个视频进行编码的平均码率,然后基于所述平均码率分别确定与所述至少一个候选分辨率中的第一候选分辨率之外的候选分辨率对应的预定编码参数,得到分辨率与预定编码参数的对应关系。这里,平均码率是基于一种分辨率对所有视频编码的平均值。
在本公开的示例性实施例中,在基于所述平均码率分别确定与所述至少一个候选分辨率中的第一候选分辨率之外的候选分辨率对应的预定编码参数时,可调整与所述至少一个候选分辨率中的第一候选分辨率之外的候选分辨率对应的预定编码参数,使得以所述至少一个候选分辨率中的第一候选分辨率之外的候选分辨率和对应的预定编码参数对所述视频进行编码的码率平均值与所述平均码率的差处于预设范围内。
在本公开的示例性实施例中,在基于分辨率与预定编码参数的对应关系确定所述视频的视频质量评价指标集合和码率集合时,可基于分辨率与预定编码参数的对应关系分别以所述至少一个候选分辨率中的每个候选分辨率和对应的预定编码参数对所述视频进行编码,得到所述视频的视频质量评价指标集合和码率集合。
在本公开的示例性实施例中,视频质量评价指标集合可以是由所述视频的在所述至少一个候选分辨率中的每个候选分辨率下视频质量评价指标组成的集合。视频质量评价指标可包括客观质量评价指标和/或主观质量分数。客观质量评价指标可包括视频多方法评估融合结果、峰值信噪比图像质量评估结果、结构相似性图像质量评估结果、多尺度结构相似性图像质量评估结果中的至少一个。
在本公开的示例性实施例中,预定编码参数可包括恒定码率因子和编码量化参数中的至少一个。
例如,当选择恒定码率因子作为预定编码参数、选择视频多方法评估融合结果(VMAF)作为视频质量评价指标时,可首先选取候选分辨率r1对应的恒定码率因子(CRF值)为c1(例如,候选分辨率720p和576p对应的c1分别被设置为29和26),对所述多个视频(即视频集中的所有视频)以候选分辨率为r1、CRF为c1进行编码,计算所述多个视频(即视频集中的所有视频)的平均码率。然后,调整第i种候选分辨率的CRF值为ci,使得对所述多个视频(即视频集中的所有视频)以候选分辨率为ri、CRF为ci进行编码的平均码率与以候选分辨率r1、CRF c1进行编码的平均码率相近,最终得到每个候选分辨率对应的CRF集合表示为C=[c1,c2,…,cM]。ci的数值通过多次编码得出。之后,整理每种候选分辨率使用对应CRF编码得到的VMAF和码率,对于每个视频可以得到VMAF集合V=[v1,v2,…,vM]和码率集合B=[b1,b2,…,bM]。这里,vi表示第i种参数组合的VMAF,bi表示第i种参数组合的码率,i的最小值为1,最大值为M。
在步骤S203,基于所述视频的码率集合确定所述视频的目标码率。
在本公开的示例性实施例中,在基于所述视频的码率集合确定所述视频的目标码率时,可确定所有码率集合中的所有码率的平均值,将所述平均值作为所述目标码率。
在步骤S204,基于所述视频的视频质量评价指标集合、码率集合以及所述目标码率,从所述至少一个候选分辨率中确定与所述视频对应的分辨率。
在本公开的示例性实施例中,在基于所述视频的视频质量评价指标集合、码率集合以及所述目标码率,从所述至少一个候选分辨率中确定与所述视频对应的分辨率时,可首先将所述视频的视频质量评价指标集合、码率集合以及所述目标码率输入到动态规划算法中,然后将动态规划算法的输出作为从所述至少一个候选分辨率中确定的与所述视频对应的分辨率。
考虑到实际编码中通过多次编码确定最佳分辨率的成本问题,在本申请中考虑将确定最佳分辨率的问题转化为分类任务,建立预测模型对最佳分辨率进行预测。
图3示出根据本公开的示例性实施例的视频分辨率决策模型的训练方法的流程图。
参照图3,在步骤S301,通过视频分辨率决策模型预测训练视频的分辨率,得到训练视频的预测分辨率。这里,视频分辨率决策模型可以是例如,但不限于,全连接神经网络。作为示例,在通过视频分辨率决策模型预测训练视频的分辨率时,视频分辨率决策模型的输入可以是训练视频、训练视频的复杂度等特征,视频分辨率决策模型的输出可以是多个候选分辨率的分类结果,即,分类出最佳分辨率。
在步骤S302,确定训练视频的预测分辨率和训练视频的目标分辨率的差。这里,目标分辨率是预先通过本公开中的视频分辨率确定方法(例如,图2中的视频分辨率确定方法)确定的。
在步骤S303,将所述差作为训练损失对所述视频分辨率决策模型的参数进行调整。
图4示出根据本公开的另一示例性实施例的视频编码方法的流程图。
参照图4,在步骤S401,将视频输入到通过本公开中的视频分辨率决策模型的训练方法训练得到的视频分辨率决策模型中。
在步骤S402,基于所述视频分辨率决策模型输出的分辨率,对所述视频进行编码。
以上已经结合图1至图4对根据本公开的示例性实施例的视频分辨率确定方法、视频分辨率决策模型的训练方法、视频编码方法进行了描述。在下文中,将参照图5至图7对根据本公开的示例性实施例的视频分辨率确定装置及其单元、视频分辨率决策模型的训练装置及其单元、视频编码装置及其单元进行描述。
图5示出根据本公开的示例性实施例的视频分辨率确定装置的框图。
参照图5,视频分辨率确定装置包括数据获取单元51、参数确定单元52、目标确定单元53和分辨率确定单元54。
数据获取单元51被配置为获取至少一个候选分辨率。
参数确定单元52被配置为根据基于所述至少一个候选分辨率对所述视频进行编码的码率,确定所述视频的视频质量评价指标集合和码率集合。这里,所述视频包括至少一个视频。
在本公开的示例性实施例中,视频质量评价指标集合可以是由所述视频的在所述至少一个候选分辨率中的每个候选分辨率下视频质量评价指标组成的集合,视频质量评价指标可包括客观质量评价指标和/或主观质量分数,客观质量评价指标可包括视频多方法评估融合结果、峰值信噪比图像质量评估结果、结构相似性图像质量评估结果、多尺度结构相似性图像质量评估结果中的至少一个。
在本公开的示例性实施例中,参数确定单元52可被配置为:根据基于所述至少一个候选分辨率对所述视频进行编码的码率,确定分辨率与预定编码参数的对应关系;基于分辨率与预定编码参数的对应关系确定所述视频的视频质量评价指标集合和码率集合。
在本公开的示例性实施例中,预定编码参数可包括恒定码率因子和编码量化参数中的至少一个。
在本公开的示例性实施例中,参数确定单元52可被配置为:确定以所述至少一个候选分辨率中的第一候选分辨率和预设的第一预定编码参数对所述视频进行编码的平均码率;基于所述平均码率分别确定与所述至少一个候选分辨率中的第一候选分辨率之外的候选分辨率对应的预定编码参数,得到分辨率与预定编码参数的对应关系。
在本公开的示例性实施例中,参数确定单元52可被配置为:调整与所述至少一个候选分辨率中的第一候选分辨率之外的候选分辨率对应的预定编码参数,使得以所述至少一个候选分辨率中的第一候选分辨率之外的候选分辨率和与所述至少一个候选分辨率中的第一候选分辨率之外的候选分辨率对应的预定编码参数对所述视频进行编码的码率平均值与所述平均码率的差处于预设范围内。
在本公开的示例性实施例中,参数确定单元52可被配置为:基于分辨率与预定编码参数的对应关系分别以所述至少一个候选分辨率中的每个候选分辨率和对应的预定编码参数对所述视频进行编码,得到所述视频的视频质量评价指标集合和码率集合。
目标确定单元53被配置为基于所述视频的码率集合确定所述视频的目标码率。
在本公开的示例性实施例中,目标确定单元53可被配置为:确定所有码率集合中的所有码率的平均值,将所述平均值作为所述目标码率。
分辨率确定单元54被配置为基于所述视频的视频质量评价指标集合、码率集合以及所述目标码率,从所述至少一个候选分辨率中确定与所述视频对应的分辨率。
在本公开的示例性实施例中,分辨率确定单元54可被配置为:将所述视频的视频质量评价指标集合、码率集合以及所述目标码率输入到动态规划算法中;将动态规划算法的输出作为从所述至少一个候选分辨率中确定的与所述视频对应的分辨率。
图6示出根据本公开的示例性实施例的视频分辨率决策模型的训练装置的框图。
参照图6,视频分辨率决策模型的训练装置包括分辨率预测单元61、损失确定单元62和参数调整单元63。
分辨率预测单元61被配置为通过视频分辨率决策模型预测训练视频的分辨率,得到训练视频的预测分辨率。
损失确定单元62被配置为确定训练视频的预测分辨率和训练视频的目标分辨率的差。这里,目标分辨率是预先通过本公开中的视频分辨率确定方法确定的。
参数调整单元63被配置为将所述差作为训练损失对所述视频分辨率决策模型的参数进行调整。
图7示出根据本公开的另一示例性实施例的视频编码装置的框图。
参照图7,视频编码装置包括视频输入单元71和视频编码单元72。
视频输入单元71被配置为将视频输入到视频分辨率决策模型,其中,视频分辨率决策模型是通过本公开中的视频分辨率决策模型的训练方法训练得到的。
视频编码单元72被配置为基于所述视频分辨率决策模型输出的分辨率,对所述视频进行编码。
关于上述实施例中的装置,其中各个单元执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
以上已经结合图5至图7对根据本公开的示例性实施例的视频分辨率确定装置、视频分辨率决策模型的训练装置、视频编码装置进行了描述。接下来,结合图8对根据本公开的示例性实施例的电子设备进行描述。
图8是根据本公开的示例性实施例的电子设备800的框图。
参照图8,电子设备800包括至少一个存储器801和至少一个处理器802,所述至少一个存储器801中存储有计算机可执行指令集合,当计算机可执行指令集合被至少一个处理器802执行时,执行根据本公开的示例性实施例的视频分辨率确定的方法、视频分辨率决策模型的训练方法。
在本公开的示例性实施例中,电子设备800可以是PC计算机、平板装置、个人数字助理、智能手机、或其他能够执行上述指令集合的装置。这里,电子设备800并非必须是单个的电子设备,还可以是任何能够单独或联合执行上述指令(或指令集)的装置或电路的集合体。电子设备800还可以是集成控制系统或系统管理器的一部分,或者可被配置为与本地或远程(例如,经由无线传输)以接口互联的便携式电子设备。
在电子设备800中,处理器802可包括中央处理器(CPU)、图形处理器(GPU)、可编程逻辑装置、专用处理器系统、微控制器或微处理器。作为示例而非限制,处理器还可包括模拟处理器、数字处理器、微处理器、多核处理器、处理器阵列、网络处理器等。
处理器802可运行存储在存储器801中的指令或代码,其中,存储器801还可以存储数据。指令和数据还可经由网络接口装置而通过网络被发送和接收,其中,网络接口装置可采用任何已知的传输协议。
存储器801可与处理器802集成为一体,例如,将RAM或闪存布置在集成电路微处理器等之内。此外,存储器801可包括独立的装置,诸如,外部盘驱动、存储阵列或任何数据库系统可使用的其他存储装置。存储器801和处理器802可在操作上进行耦合,或者可例如通过I/O端口、网络连接等互相通信,使得处理器802能够读取存储在存储器中的文件。
此外,电子设备800还可包括视频显示器(诸如,液晶显示器)和用户交互接口(诸如,键盘、鼠标、触摸输入装置等)。电子设备800的所有组件可经由总线和/或网络而彼此连接。
根据本公开的示例性实施例,还提供一种包括指令的计算机可读存储介质,例如包括指令的存储器801,上述指令可由装置800的处理器802执行以完成上述方法。可选地,计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
根据本公开的示例性实施例,还可提供一种计算机程序产品,该计算机程序产品包括计算机程序/指令,当所述计算机程序/指令被处理器执行时,实现根据本公开的示例性实施例的视频分辨率确定的方法。
以上已参照图1至图8描述了根据本公开的示例性实施例的视频分辨率确定方法及装置。然而,应该理解的是:图5至图7中所示的视频分辨率确定装置及其单元可分别被配置为执行特定功能的软件、硬件、固件或上述项的任意组合,图8中所示的电子设备并不限于包括以上示出的组件,而是可根据需要增加或删除一些组件,并且以上组件也可被组合。
根据本公开的视频分辨率确定方法及装置,通过获取至少一个候选分辨率,根据基于所述至少一个候选分辨率对所述视频进行编码的码率,确定所述视频的视频质量评价指标集合和码率集合,基于所述视频的码率集合确定所述视频的目标码率,基于所述视频的视频质量评价指标集合、码率集合以及所述目标码率,从所述至少一个候选分辨率中确定与所述视频对应的分辨率,从而可实现在同码率下选择更优的分辨率,进而提高视频质量,并且降低带宽成本。
此外,根据本公开的视频分辨率确定方法及装置,可基于动态规划算法进行求解,获取在给定码率条件下平均客观质量最高的分辨率决策方案。
此外,根据本公开的视频编码方法及装置,可通过建立分类模型对最佳分辨率进行预测,避免了多次编码带来的高计算复杂度,从而增加了实用性。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (14)

1.一种视频分辨率确定方法,其特征在于,所述分辨率确定方法包括:
获取至少一个候选分辨率;
确定以所述至少一个候选分辨率中的第一候选分辨率和预设的第一预定编码参数对至少一个视频中的每个视频分别进行编码的平均码率,其中,所述平均码率是所述至少一个视频中的每个视频的码率的平均值,所述至少一个视频是需要确定用于视频编码的分辨率的视频;
调整与所述至少一个候选分辨率中的第一候选分辨率之外的候选分辨率对应的预定编码参数,使得以所述至少一个候选分辨率中第一候选分辨率之外的候选分辨率和对应的预定编码参数对所述至少一个视频中的每个视频分别进行编码的码率平均值与所述平均码率的差处于预设范围内,得到分辨率与预定编码参数的对应关系;
基于分辨率与预定编码参数的对应关系,分别以所述至少一个候选分辨率中的每个候选分辨率和对应的预定编码参数对所述至少一个视频中的每个视频分别进行编码,得到所述至少一个视频的视频质量评价指标集合和码率集合,其中,所述视频质量评价指标集合包括所述至少一个视频中的每个视频在每个候选分辨率下的各种视频质量评价指标,所述码率集合包括所述至少一个视频中的每个视频在每个候选分辨率下的码率;
基于所述码率集合确定所述至少一个视频的目标码率;
将所述视频质量评价指标集合、所述码率集合以及所述目标码率输入到动态规划算法中,将动态规划算法的输出作为从所述至少一个候选分辨率中确定的与所述至少一个视频中的每个视频分别对应的分辨率。
2.根据权利要求1所述的视频分辨率确定方法,其特征在于,基于所述码率集合确定所述至少一个视频的目标码率,包括:
确定所述码率集合中的所有码率的平均值,将所述平均值作为所述目标码率。
3.根据权利要求1所述的视频分辨率确定方法,其特征在于,预定编码参数包括恒定码率因子和编码量化参数中的至少一个。
4.根据权利要求1所述的视频分辨率确定方法,其特征在于,视频质量评价指标集合是由所述视频的在所述至少一个候选分辨率中的每个候选分辨率下视频质量评价指标组成的集合,视频质量评价指标包括客观质量评价指标和/或主观质量分数,客观质量评价指标包括视频多方法评估融合结果、峰值信噪比图像质量评估结果、结构相似性图像质量评估结果、多尺度结构相似性图像质量评估结果中的至少一个。
5.一种视频分辨率决策模型的训练方法,其特征在于,所述训练方法包括:
通过视频分辨率决策模型预测训练视频的分辨率,得到训练视频的预测分辨率;
确定训练视频的预测分辨率和训练视频的目标分辨率的差,其中,目标分辨率是预先通过权利要求1-4中任一项所述的视频分辨率确定方法确定的;
将所述差作为训练损失对所述视频分辨率决策模型的参数进行调整。
6.一种视频编码方法,其特征在于,所述分辨率确定方法包括:
将视频输入到视频分辨率决策模型,其中,视频分辨率决策模型是通过权利要求5所述的视频分辨率决策模型的训练方法训练得到的;
基于所述视频分辨率决策模型输出的分辨率,对所述视频进行编码。
7.一种视频分辨率确定装置,其特征在于,所述分辨率确定装置包括:
数据获取单元,被配置为获取至少一个候选分辨率;
参数确定单元,被配置为确定以所述至少一个候选分辨率中的第一候选分辨率和预设的第一预定编码参数对至少一个视频中的每个视频分别进行编码的平均码率,其中,所述平均码率是所述至少一个视频中的每个视频的码率的平均值,所述至少一个视频是需要确定用于视频编码的分辨率的视频,调整与所述至少一个候选分辨率中的第一候选分辨率之外的候选分辨率对应的预定编码参数,使得以所述至少一个候选分辨率中第一候选分辨率之外的候选分辨率和对应的预定编码参数对所述至少一个视频中的每个视频分别进行编码的码率平均值与所述平均码率的差处于预设范围内,得到分辨率与预定编码参数的对应关系,基于分辨率与预定编码参数的对应关系,分别以所述至少一个候选分辨率中的每个候选分辨率和对应的预定编码参数对所述至少一个视频中的每个视频分别进行编码,得到所述至少一个视频的视频质量评价指标集合和码率集合,其中,所述视频质量评价指标集合包括所述至少一个视频中的每个视频在每个候选分辨率下的各种视频质量评价指标,所述码率集合包括所述至少一个视频中的每个视频在每个候选分辨率下的码率;
目标确定单元,被配置为基于所述码率集合确定所述至少一个视频的目标码率;和
分辨率确定单元,被配置为将所述视频质量评价指标集合、所述码率集合以及所述目标码率输入到动态规划算法中,将动态规划算法的输出作为从所述至少一个候选分辨率中确定的与所述至少一个视频中的每个视频分别对应的分辨率。
8.根据权利要求7所述的视频分辨率确定装置,其特征在于,目标确定单元被配置为:
确定所述码率集合中的所有码率的平均值,将所述平均值作为所述目标码率。
9.根据权利要求7所述的视频分辨率确定装置,预定编码参数包括恒定码率因子和编码量化参数中的至少一个。
10.根据权利要求7所述的视频分辨率确定装置,其特征在于,视频质量评价指标集合是由所述视频的在所述至少一个候选分辨率中的每个候选分辨率下视频质量评价指标组成的集合,视频质量评价指标包括客观质量评价指标和/或主观质量分数,客观质量评价指标包括视频多方法评估融合结果、峰值信噪比图像质量评估结果、结构相似性图像质量评估结果、多尺度结构相似性图像质量评估结果中的至少一个。
11.一种视频分辨率决策模型的训练装置,其特征在于,所述训练装置包括:
分辨率预测单元,被配置为通过视频分辨率决策模型预测训练视频的分辨率,得到训练视频的预测分辨率;
损失确定单元,被配置为确定训练视频的预测分辨率和训练视频的目标分辨率的差,其中,目标分辨率是预先通过权利要求1-4中任一项所述的视频分辨率确定方法确定的;和
参数调整单元,被配置为将所述差作为训练损失对所述视频分辨率决策模型的参数进行调整。
12.一种视频编码装置,其特征在于,所述分辨率确定装置包括:
视频输入单元,被配置为将视频输入到视频分辨率决策模型,其中,视频分辨率决策模型是通过权利要求5所述的视频分辨率决策模型的训练方法训练得到的;和
视频编码单元,被配置为基于所述视频分辨率决策模型输出的分辨率,对所述视频进行编码。
13.一种电子设备,其特征在于,包括:
处理器;
用于存储所述处理器可执行指令的存储器;
其中,所述处理器被配置为执行所述指令,以实现如权利要求1至6中任一项所述的方法。
14.一种计算机可读存储介质,存储有计算机程序,其特征在于,当所述计算机程序被电子设备的处理器执行时,使得电子设备执行如权利要求1至6中任一项所述的方法。
CN202111581338.7A 2021-12-22 2021-12-22 视频分辨率确定、模型训练、视频编码方法及装置 Active CN114245209B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111581338.7A CN114245209B (zh) 2021-12-22 2021-12-22 视频分辨率确定、模型训练、视频编码方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111581338.7A CN114245209B (zh) 2021-12-22 2021-12-22 视频分辨率确定、模型训练、视频编码方法及装置

Publications (2)

Publication Number Publication Date
CN114245209A CN114245209A (zh) 2022-03-25
CN114245209B true CN114245209B (zh) 2024-03-19

Family

ID=80761357

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111581338.7A Active CN114245209B (zh) 2021-12-22 2021-12-22 视频分辨率确定、模型训练、视频编码方法及装置

Country Status (1)

Country Link
CN (1) CN114245209B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114866840A (zh) * 2022-03-31 2022-08-05 广州方硅信息技术有限公司 Vmaf画质评价方法、终端、主机、系统及存储介质
CN115065846B (zh) * 2022-05-13 2024-04-26 北京字节跳动网络技术有限公司 一种视频下发方法、装置、服务器和介质
CN115022629B (zh) * 2022-08-08 2022-11-18 海马云(天津)信息技术有限公司 云游戏视频的最优编码模式确定方法与装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103974060A (zh) * 2013-01-31 2014-08-06 华为技术有限公司 视频质量调整方法和装置
CN107371028A (zh) * 2017-08-22 2017-11-21 南京惟初信息科技有限公司 一种适应带宽的高质量视频编码方法
CN110225340A (zh) * 2019-05-31 2019-09-10 北京猿力未来科技有限公司 一种视频编码的控制方法及装置、计算设备和存储介质
CN111246209A (zh) * 2020-01-20 2020-06-05 北京字节跳动网络技术有限公司 自适应编码方法、装置、电子设备及计算机存储介质
CN113452996A (zh) * 2021-06-08 2021-09-28 杭州朗和科技有限公司 一种视频编码、解码方法及装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11064194B2 (en) * 2019-10-31 2021-07-13 Western Digital Technologies, Inc. Encoding digital videos using controllers of data storage devices

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103974060A (zh) * 2013-01-31 2014-08-06 华为技术有限公司 视频质量调整方法和装置
CN107371028A (zh) * 2017-08-22 2017-11-21 南京惟初信息科技有限公司 一种适应带宽的高质量视频编码方法
CN110225340A (zh) * 2019-05-31 2019-09-10 北京猿力未来科技有限公司 一种视频编码的控制方法及装置、计算设备和存储介质
CN111246209A (zh) * 2020-01-20 2020-06-05 北京字节跳动网络技术有限公司 自适应编码方法、装置、电子设备及计算机存储介质
CN113452996A (zh) * 2021-06-08 2021-09-28 杭州朗和科技有限公司 一种视频编码、解码方法及装置

Also Published As

Publication number Publication date
CN114245209A (zh) 2022-03-25

Similar Documents

Publication Publication Date Title
JP6928041B2 (ja) 動画を処理するための方法および装置
CN114245209B (zh) 视频分辨率确定、模型训练、视频编码方法及装置
CN113015021B (zh) 云游戏的实现方法、装置、介质及电子设备
WO2021068598A1 (zh) 共享屏幕的编码方法、装置、存储介质及电子设备
CN114554211A (zh) 内容自适应视频编码方法、装置、设备和存储介质
CN113452944B (zh) 一种云手机的画面显示方法
US20230319292A1 (en) Reinforcement learning based rate control
CN114900692A (zh) 视频流帧率调整方法及其装置、设备、介质、产品
WO2024152893A1 (zh) 视频显示控制方法及其装置、设备、介质、产品
CN114268792A (zh) 视频转码方案的确定方法及装置和视频转码方法及装置
Li et al. Perceptual quality assessment of face video compression: A benchmark and an effective method
WO2024017106A1 (zh) 一种码表更新方法、装置、设备及存储介质
CN113452996A (zh) 一种视频编码、解码方法及装置
CN117478886A (zh) 多媒体数据编码方法、装置、电子设备及存储介质
US10764578B2 (en) Bit rate optimization system and method
CN110891195A (zh) 花屏图像的生成方法、装置、设备和存储介质
WO2024109138A1 (zh) 视频编码方法、装置及存储介质
CN113066068B (zh) 图像评估方法及装置
US11190774B1 (en) Screen content encoding mode evaluation including intra-block evaluation of multiple potential encoding modes
CN111818338B (zh) 一种异常显示检测方法、装置、设备及介质
KR20230143377A (ko) 장면 단위 예측 기반의 동영상 인코딩 최적화 방법 및 시스템
KR20230140276A (ko) 슬라이딩 윈도우 단위 예측 기반의 동영상 인코딩 최적화 방법 및 시스템
CN114202495A (zh) 应用于视频的图像质量损失确定方法、装置、设备及介质
CN114222126A (zh) 视频传输方法、装置、电子设备及存储介质
KR20230140266A (ko) 단일 인코딩 구조에서 더블 버퍼링을 이용한 동영상 인코딩 최적화 방법 및 시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant