CN113038165B - 确定编码参数组的方法、设备及存储介质 - Google Patents

确定编码参数组的方法、设备及存储介质 Download PDF

Info

Publication number
CN113038165B
CN113038165B CN202110328517.3A CN202110328517A CN113038165B CN 113038165 B CN113038165 B CN 113038165B CN 202110328517 A CN202110328517 A CN 202110328517A CN 113038165 B CN113038165 B CN 113038165B
Authority
CN
China
Prior art keywords
video
parameter set
definition
terminal
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110328517.3A
Other languages
English (en)
Other versions
CN113038165A (zh
Inventor
李蔼莉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Music Entertainment Technology Shenzhen Co Ltd
Original Assignee
Tencent Music Entertainment Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Music Entertainment Technology Shenzhen Co Ltd filed Critical Tencent Music Entertainment Technology Shenzhen Co Ltd
Priority to CN202110328517.3A priority Critical patent/CN113038165B/zh
Publication of CN113038165A publication Critical patent/CN113038165A/zh
Application granted granted Critical
Publication of CN113038165B publication Critical patent/CN113038165B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display

Abstract

本申请公开了一种确定编码参数组的方法、设备及存储介质,属于互联网技术领域。所述方法包括:获取多个第一编码视频,以及每个第一编码视频对应的帧率,其中,所述多个第一编码视频是目标性能级别的终端分别基于不同的编码参数组对测试视频进行编码得到的;将所述每个第一编码视频分别与所述测试视频一起输入清晰度打分模型,得到所述每个第一编码视频的清晰度分值;基于所述每个第一编码视频的帧率以及清晰度分值,确定所述目标性能级别的终端对应的目标编码参数组。采用本申请能够针对不同性能级别的终端确定对应的编码参数组,可以确保不同性能级别的终端以对应的编码参数组进行编码后的视频的流畅度和清晰度。

Description

确定编码参数组的方法、设备及存储介质
技术领域
本申请涉及互联网技术领域,特别涉及一种确定编码参数组的方法、设备及存储介质。
背景技术
随着互联网技术的发展,视频电话、网络直播等视频实时传输功能越来越常见。
在相关技术中,在视频实时传输功能中可包括视频发送端和视频接收端,例如,在网络直播中主播进行直播的终端为视频发送端,用户用于观看主播直播视频的终端为视频接收端。在视频发送端发送视频数据时,可以按照预先设定的编码参数对待发送的视频数据进行编码,然后将编码之后的视频数据发送至服务器,服务器可以将接收到的视频数据发送至视频接收端,从而实现视频实时传输功能,其中,编码参数可以包括帧率、分辨率、码率等。
在实现本申请的过程中,发明人发现相关技术至少存在以下问题:
在视频实时传输功能的实现过程中,所有的视频发送端都是相同的编码参数对待发送的视频数据进行编码。这样对于一些硬件性能较差的视频发送端,即使按照较高的编码参数对视频进行编码,也不会对视频的清晰度有较为明显的提升,还会增加对视频进行编码处理时所占用的计算资源,导致丢帧。
发明内容
本申请实施例提供了一种确定编码参数组的方法、设备及存储介质,能够确保编码后的视频的流畅度和清晰度。所述技术方案如下:
第一方面,提供了一种确定编码参数组的方法,所述方法包括:
获取多个第一编码视频,以及每个第一编码视频对应的帧率,其中,所述多个第一编码视频是目标性能级别的终端分别基于不同的编码参数组对测试视频进行编码得到的;
将所述每个第一编码视频分别与所述测试视频一起输入清晰度打分模型,得到所述每个第一编码视频的清晰度分值;
基于所述每个第一编码视频的帧率以及清晰度分值,确定所述目标性能级别的终端对应的目标编码参数组。
可选的,所述基于不同的编码参数组对测试视频进行编码,包括:
对于所述测试视频中的每个视频帧,获取所述视频帧对应的视频帧信息,将所述视频帧信息以图像的形式添加到所述视频帧中,得到处理后的视频帧;
基于多个处理后的视频帧,得到处理后的测试视频;
基于所述不同的编码参数组分别对所述处理后的测试视频进行编码,得到所述不同的编码参数组分别对应的第一编码视频;
所述将所述每个第一编码视频分别与所述测试视频一起输入清晰度打分模型,得到所述每个第一编码视频的清晰度分值,包括:
对于每个第一编码视频,确定所述处理后的测试视频与所述第一编码视频中显示有相同视频帧信息的多个视频帧对;分别将所述多个视频帧对输入清晰度打分模型,得到所述多个视频帧对的清晰度分值;确定所述多个视频帧对的清晰度分值的均值,将所述均值确定为所述第一编码视频的清晰度分值。
可选的,所述视频帧对应的视频帧信息为所述视频帧的采集时间点,所述将所述视频帧信息以图像的形式添加到所述视频帧中,得到处理后的视频帧,包括:
将所述视频帧的采集时间点转换为二进制字符串,确定所述二进制字符串对应的图形码,将所述图形码添加到所述视频帧的预设位置处中,得到所述处理后的视频帧;
所述分别将所述多个视频帧对输入清晰度打分模型,包括:
对所述多个视频帧对中的每个视频帧的预设位置进行裁剪,得到多个裁剪后的视频帧对,分别将所述多个裁剪后的视频帧对输入清晰度打分模型。
可选的,所述编码参数组中包括帧率、分辨率和码率,所述基于所述每个第一编码视频的帧率以及清晰度分值,确定所述目标性能级别的终端对应的目标编码参数组,包括:
基于所述每个编码参数组中包括的帧率以及对应的第一编码视频的帧率,确定所述每个第一编码视频的掉帧率;
在多个编码参数组中,确定对应帧率、分辨率最高且对应的第一编码视频的掉帧率小于预设掉帧率阈值的至少一个编码参数组;
将所述至少一个编码参数组按照对应的码率的大小进行升序排列,得到排序后的至少一个编码参数组;
对于所述排序后的至少一个编码参数组,分别确定每个编码参数组对应的第一编码视频的清晰度分值与下一个编码参数组对应的第一编码视频的清晰度分值的差值,如果存在对应的差值在预设的差值范围内的编码参数组,则将所述编码参数组确定为所述目标编码参数组,如果不存在对应的差值在所述差值范围内的编码参数组,则将所述排序后的至少一个编码参数组中的最后一个编码参数组确定为所述目标编码参数组。
可选的,所述方法还包括:
获取所述目标性能级别的终端基于所述目标编码参数组进行编码后的第二编码视频;
获取所述第二编码视频对应的第一对照视频,将所述第二编码视频与所述第一对照视频分别输入到预先训练的无参清晰度打分模型中,得到所述第一对照视频对应的第一清晰度分值以及所述第二编码视频对应的第二清晰度分值,其中,所述第一对照视频与所述第二编码视频对应的编码参数组中的分辨率相同;
如果所述第二清晰度分值大于所述第一清晰度分值,则确定所述目标编码参数组为所述目标性能级别的终端待使用的编码参数组。
可选的,所述方法还包括:
将所述第二编码视频与所述第一对照视频发送至打分终端,接收所述打分终端发送的所述第一对照视频对应的第三清晰度分值以及所述第二编码视频对应的第四清晰度分值;
所述如果所述第二清晰度分值大于所述第一清晰度分值,则确定所述目标编码参数组为所述目标性能级别的终端对应的编码参数组,包括:
如果所述第二清晰度分值大于所述第一清晰度分值,且所述第四清晰度分值大于所述第三清晰度分值,则确定所述目标编码参数组为所述目标性能级别的终端待使用的编码参数组。
可选的,所述编码参数组中包括码率,所述方法还包括:
如果所述第二清晰度分值小于或等于所述第一清晰度分值,或,所述第四清晰度分值小于或等于所述第三清晰度分值,则将所述目标编码参数组中的码率增加预设数值,得到调整后的目标编码参数组;
获取由所述目标性能级别的终端基于调整后的目标编码参数组进行编码得到的第三编码视频,基于所述第三编码视频确定所述目标性能级别的终端待使用的目标编码参数组。
可选的,所述基于所述第三编码视频确定所述目标性能级别的终端待使用的目标编码参数组,包括:
获取所述第三编码视频对应的第二对照视频,其中,所述第二对照视频与所述第三编码视频对应的编码参数组中的分辨率相同;
将所述第三编码视频与所述第二对照视频分别输入到所述预先训练的无参清晰度打分模型中,得到所述第三编码视频对应的第五清晰度分值以及所述第二对照视频对应的第六清晰度分值;
将所述第三编码视频与所述第二对照视频发送至打分终端,接收所述打分终端发送的所述第三编码视频对应的第七清晰度分值以及所述第二对照视频对应的第八清晰度分值;
如果所述第五清晰度分值大于所述第六清晰度分值,且所述第七清晰度分值大于所述第八清晰度分值,则确定所述调整后的目标编码参数组为所述目标性能级别的终端待使用的编码参数组。
可选的,所述获取由所述目标性能级别的终端基于调整后的目标编码参数组进行编码得到的第三编码视频,基于所述第三编码视频确定所述目标性能级别的终端待使用的目标编码参数组,包括:
获取所述目标性能级别的终端基于所述目标编码参数组对所述测试视频进行编码得到的第四编码视频,以及所述目标性能级别的终端基于所述调整后的目标编码参数组对所述测试视频进行编码得到的第三编码视频;
将所述第四编码视频中每个位置的视频帧与所述第三编码视频中对应位置的视频帧拼接为一个视频帧,得到多个拼接后的视频帧;
分别将所述拼接后的视频帧发送至所述打分终端,接收所述打分终端发送的所述多个拼接后的视频帧的清晰度判定结果;
如果为第三编码视频更清晰的清晰度判定结果在所述打分终端发送的多个清晰度判定结果中的占比超过预设比例,则确定所述调整后的目标编码参数组为所述目标性能级别的终端待使用的编码参数组。
第二方面,提供了一种确定编码参数组的装置,所述装置包括:
获取模块,用于获取多个第一编码视频,以及每个第一编码视频对应的帧率,其中,所述多个第一编码视频是目标性能级别的终端分别基于不同的编码参数组对测试视频进行编码得到的;
输入模块,用于将所述每个第一编码视频分别与所述测试视频一起输入清晰度打分模型,得到所述每个第一编码视频的清晰度分值;
确定模块,用于基于所述每个第一编码视频的帧率以及清晰度分值,确定所述目标性能级别的终端对应的目标编码参数组。
可选的,所述获取模块,用于:
对于所述测试视频中的每个视频帧,获取所述视频帧对应的视频帧信息,将所述视频帧信息以图像的形式添加到所述视频帧中,得到处理后的视频帧;
基于多个处理后的视频帧,得到处理后的测试视频;
基于所述不同的编码参数组分别对所述处理后的测试视频进行编码,得到所述不同的编码参数组分别对应的第一编码视频;
所述输入模块,用于:
对于每个第一编码视频,确定所述处理后的测试视频与所述第一编码视频中显示有相同视频帧信息的多个视频帧对;分别将所述多个视频帧对输入清晰度打分模型,得到所述多个视频帧对的清晰度分值;确定所述多个视频帧对的清晰度分值的均值,将所述均值确定为所述第一编码视频的清晰度分值。
可选的,所述获取模块,用于:将所述视频帧的采集时间点转换为二进制字符串,确定所述二进制字符串对应的图形码,将所述图形码添加到所述视频帧的预设位置处中,得到所述处理后的视频帧;
所述分别将所述多个视频帧对输入清晰度打分模型,包括:
对所述多个视频帧对中的每个视频帧的预设位置进行裁剪,得到多个裁剪后的视频帧对,分别将所述多个裁剪后的视频帧对输入清晰度打分模型。
可选的,所述编码参数组中包括帧率、分辨率和码率,所述确定模块,用于:
基于所述每个编码参数组中包括的帧率以及对应的第一编码视频的帧率,确定所述每个第一编码视频的掉帧率;
在多个编码参数组中,确定对应帧率、分辨率最高且对应的第一编码视频的掉帧率小于预设掉帧率阈值的至少一个编码参数组;
将所述至少一个编码参数组按照对应的码率的大小进行升序排列,得到排序后的至少一个编码参数组;
对于所述排序后的至少一个编码参数组,分别确定每个编码参数组对应的第一编码视频的清晰度分值与下一个编码参数组对应的第一编码视频的清晰度分值的差值,如果存在对应的差值在预设的差值范围内的编码参数组,则将所述编码参数组确定为所述目标编码参数组,如果不存在对应的差值在所述差值范围内的编码参数组,则将所述排序后的至少一个编码参数组中的最后一个编码参数组确定为所述目标编码参数组。
可选的,所述获取模块,还用于:
获取所述目标性能级别的终端基于所述目标编码参数组进行编码后的第二编码视频;
获取所述第二编码视频对应的第一对照视频,将所述第二编码视频与所述第一对照视频分别输入到预先训练的无参清晰度打分模型中,得到所述第一对照视频对应的第一清晰度分值以及所述第二编码视频对应的第二清晰度分值,其中,所述第一对照视频与所述第二编码视频对应的编码参数组中的分辨率相同;
所述确定模块,还用于:
如果所述第二清晰度分值大于所述第一清晰度分值,则确定所述目标编码参数组为所述目标性能级别的终端待使用的编码参数组。
可选的,所述装置还包括发送模块,用于:
将所述第二编码视频与所述第一对照视频发送至打分终端,接收所述打分终端发送的所述第一对照视频对应的第三清晰度分值以及所述第二编码视频对应的第四清晰度分值;
所述确定模块,还用于:
如果所述第二清晰度分值大于所述第一清晰度分值,且所述第四清晰度分值大于所述第三清晰度分值,则确定所述目标编码参数组为所述目标性能级别的终端待使用的编码参数组。
可选的,所述编码参数组中包括码率,所述确定模块,还用于:
如果所述第二清晰度分值小于或等于所述第一清晰度分值,或,所述第四清晰度分值小于或等于所述第三清晰度分值,则将所述目标编码参数组中的码率增加预设数值,得到调整后的目标编码参数组;
获取由所述目标性能级别的终端基于调整后的目标编码参数组进行编码得到的第三编码视频,基于所述第三编码视频确定所述目标性能级别的终端待使用的目标编码参数组。
可选的,所述确定模块,用于:
获取所述第三编码视频对应的第二对照视频,其中,所述第二对照视频与所述第三编码视频对应的编码参数组中的分辨率相同;
将所述第三编码视频与所述第二对照视频分别输入到所述预先训练的无参清晰度打分模型中,得到所述第三编码视频对应的第五清晰度分值以及所述第二对照视频对应的第六清晰度分值;
将所述第三编码视频与所述第二对照视频发送至打分终端,接收所述打分终端发送的所述第三编码视频对应的第七清晰度分值以及所述第二对照视频对应的第八清晰度分值;
如果所述第五清晰度分值大于所述第六清晰度分值,且所述第七清晰度分值大于所述第八清晰度分值,则确定所述调整后的目标编码参数组为所述目标性能级别的终端待使用的编码参数组。
可选的,所述确定模块,用于:
获取所述目标性能级别的终端基于所述目标编码参数组对所述测试视频进行编码得到的第四编码视频,以及所述目标性能级别的终端基于所述调整后的目标编码参数组对所述测试视频进行编码得到的第三编码视频;
将所述第四编码视频中每个位置的视频帧与所述第三编码视频中对应位置的视频帧拼接为一个视频帧,得到多个拼接后的视频帧;
分别将所述拼接后的视频帧发送至所述打分终端,接收所述打分终端发送的所述多个拼接后的视频帧的清晰度判定结果;
如果为第三编码视频更清晰的清晰度判定结果在所述打分终端发送的多个清晰度判定结果中的占比超过预设比例,则确定所述调整后的目标编码参数组为所述目标性能级别的终端待使用的编码参数组。
第三方面,提供了一种计算机设备,所述计算机设备包括处理器和存储器,所述存储器中存储有至少一条指令,所述至少一条指令由所述处理器加载并执行以实现如上所述的确定编码参数组的方法所执行的操作。
第四方面,提供了一种计算机可读存储介质,其特征在于,所述存储介质中存储有至少一条指令,所述至少一条指令由处理器加载并执行以实现如上所述的确定编码参数组的方法所执行的操作。
本申请实施例提供的技术方案带来的有益效果是:
通过获取目标性能级别的终端以不同的编码参数组对测试视频进行编码得到的编码视频,根据不同的编码参数组对应的编码视频的帧率以及清晰度确定目标性能级别的终端对应的目标编码参数组。同样可以按照相同的方式对每个性能级别的终端确定对应的目标编码参数组。可见,采用本申请能够针对不同性能级别的终端确定对应的编码参数组,可以确保不同性能级别的终端以合适的编码参数组进行编码,以提高编码后的视频的流畅度和清晰度。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种确定编码参数组的方法流程图;
图2是本申请实施例提供的一种确定编码参数组的方法示意图;
图3是本申请实施例提供的一种确定编码参数组的方法示意图;
图4是本申请实施例提供的一种确定编码参数组的方法示意图;
图5是本申请实施例提供的一种确定编码参数组的方法流程图;
图6是本申请实施例提供的一种确定编码参数组的方法示意图;
图7是本申请实施例提供的一种确定编码参数组的方法流程图;
图8是本申请实施例提供的一种确定编码参数组的方法示意图;
图9是本申请实施例提供的一种确定编码参数组的装置结构示意图;
图10是本申请实施例提供的一种终端结构示意图;
图11是本申请实施例提供的一种服务器结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
本申请提供的编码参数组的方法可以由终端和服务器实现。终端可以运行有用于视频传输的应用程序,如视频直播应用程序、视频通话应用程序、视频会议应用程序等,终端可以具备摄像头、麦克风、耳机等部件,终端具有通信功能,可以接入互联网。服务器可以是上述应用程序的后台服务器,服务器可以与终端建立通信。该服务器可以是一个单独的服务器也可以是一个服务器组,如果是单独的服务器,该服务器可以负责下述方案中的所有处理,如果是服务器组,服务器组中的不同服务器分别可以负责下述方案中的不同处理,具体的处理分配情况可以由技术人员根据实际需求任意设置,此处不再赘述。
在本申请实施例中,终端可以是手机、平板电脑、智能穿戴设备、台式计算机、笔记本电脑等。技术人员可以根据终端的处理器型号、闪存型号等,对当前市面上的终端的性能级别进行划分。性能级别的个数可以由技术人员设置,例如可以将终端的性能级别划分为3个等级、5个等级等。以终端是手机为例,技术人员还可以获取手机性能排行榜,将手机性能级别划分为3个等级,分别对应高端机型、中端机型和低端机型。本申请实施例提供的确定编码参数组的方法,可以对每个性能级别的终端确定合适的编码参数,从而使不同的性能级别的终端在实现视频实时传输功能时,能够以合适编码参数组对视频进行编码,保证编码后的视频流程性的同时,提高视频的清晰度。
图1是本申请实施例提供的一种确定编码参数组的方法流程图。参见图1,该实施例包括:
步骤101、获取多个第一编码视频,以及每个第一编码视频对应的帧率。
其中,多个第一编码视频是目标性能级别的终端分别基于不同的编码参数组对测试视频进行编码得到的。每个第一编码视频对应的帧率为每个第一编码视频对应的实际帧率。目标性能级别为技术人员预先根据对终端进行划分的多个性能级别中的任意一个级别。编码参数组中可以包括分辨率、帧率以及码率。第一编码视频为目标性能级别分别根据不同的编码参数组进行编码之后的多个视频。在本申请实施例中,以目标性能级别为例,对确定目标性能级别的终端对应的编码参数组进行详细说明,其他性能级别的终端对应的编码参数组与之相同,在本申请实施例中不再赘述。
在实施中,技术人员可以预先设置多组编组参数组,然后根据不同的编码参数组对每个性能级别的终端进行编码测试。即对于任一性能级别的终端可启动摄像功能,然后分别以不同的编码参数组,对拍摄的视频数据进行编码,得到以不同的编码参数组进行编码后的视频。其中,不同的编组参数组可以如下
表1所示。
帧率 分辨率 码率
编码参数组0 15F 720P 1000
编码参数组1 15F 720P 1500
编码参数组2 20F 720P 1000
编码参数组3 20F 720P 1500
编码参数组4 20F 1080P 1000
编码参数组5 20F 1080P 1500
编码参数组6 20F 1080P 2000
表1
其中,需要说明的是,上述表1仅作为对编组参数组的举例说明,在实际应用中技术人员可设置更多的编组参数组,对不同性能级别的终端分别进行编码测试。
在获取到目标性能级别的终端分别以不同的编码参数组进行编码之后的多个第一编码视频后,可以分别对每个第一编码视频进行帧率检测,确定每个第一编码视频对应的实际帧率。例如,编码参数组中对视频进行的编码帧率为15帧,而由于处理器等硬件问题,导致在编码过程中存在丢帧的情况,导致实际根据第一编码视频中帧的个数和第一编码视频对应的时长计算出来的实际帧率要低于15帧。
步骤102、将每个第一编码视频分别与测试视频一起输入清晰度打分模型,得到每个第一编码视频的清晰度分值。
其中,清晰度打分模型可以是任意可以对视频的清晰度打分的模型,在本申请中,可以以清晰度打分模型是有参清晰度打分模型为例,对方案进行说明。其中有参清晰度打分模型,即有参照的清晰度打分模型,其对应的输入为测试视频和对测试视频再次编码之后的第一编码视频。
在实施中,在得到目标性能级别的终端分别以不同的编码参数组对测试视频进行编码之后的多个第一编码视频后,可以分别将第一编码视频中的视频帧与对应的测试视频中的视频帧输入到有参清晰度打分模型中,有参清晰度打分模型可以将第一编码视频中的视频帧与对应的测试视频中的视频帧进行对比,输出第一编码视频中的视频帧的清晰度分值,然后可以确定第一编码视频中每一帧的清晰度分值对应的均值,将对应的均值确定为第一编码视频的清晰度分值。其中,有参清晰度打分模型可以为VMAF(video multimethodassessment fusion,视频多方法评估融合)。
在一种可能的情况中,由于不同的编码参数组中对应的帧率不同,所以目标性能级别的终端在对测试视频以不同的编码参数组进行编码之后,得到的第一编码视频的帧率也会不同,且与测试视频的帧率不同。也就是说,第一编码视频中视频帧的个数与测试视频中视频帧的个数也能不同,在目标性能级别的终端在以不同的帧率对测试视频进行编码时,会根据对应的帧率丢弃一些视频帧。如图2所示,如果直接按照视频帧分别在第一编码视频和测试视频中的顺序,输入到有参清晰度打分模型中的第一编码视频中的视频帧与对应的测试视频中的视频帧可能并不属于同一视频画面,从而导致有参清晰度打分模型得到的第一编码视频的清晰度存在较大的误差。在图2中,输入到有参清晰度打分模型中的视频对分别对,视频帧0-视频帧0、视频帧1-视频帧2、视频帧2-视频帧4、视频帧3-视频帧6。所以在将第一编码视频中的视频帧与对应的测试视频中的视频帧输入到有参清晰度打分模型时,需要对确定第一编码视频中的视频帧与测试视频中的视频帧对应为同一视频画面。其中,相应的处理可以如下:
对于测试视频中的每个视频帧,获取视频帧对应的视频帧信息,将视频帧信息以图像的形式添加到视频帧中,得到处理后的视频帧;基于多个处理后的视频帧,得到处理后的测试视频;基于不同的编码参数组分别对处理后的测试视频进行编码,得到不同的编码参数组分别对应的第一编码视频。
其中,视频帧信息可以是视频帧在拍摄时对应的采集时间点(拍摄时间点)或者,视频帧信息可以是视频帧在测试视频中的位置,即视频帧在测试视频对应的视频帧序列中的位置。
在实施中,可以预先对测试视频中的每个视频帧进行处理,获取测试视频中的每个视频帧的视频帧信息,然后将视频帧信息以图像的形式添加到对应的视频帧中,得到处理后的测试视频。这样在处理后的测试视频的每个视频帧中都会显示有对应的视频帧信息。目标性能级别的终端可以分别以不同的编码参数组对处理后的测试视频进行编码,得到多个第一编码视频。这样在第一编码视频中的每个视频帧中也会显示有对应的视频帧信息。如此将第一编码视频中的视频帧与对应的测试视频中的视频帧输入到有参清晰度打分模型之前,可以通过检测第一编码视频中的视频帧与对应的测试视频中的视频帧中显示的视频信息是否相同,输入到的有参清晰度打分模型中的第一编码视频中的视频帧与测试视频中的视频帧对应为同一视频画面,从而能够使有参清晰度打分模型输出对第一编码视频中的视频帧准确的清晰度分值。
相应的,将每个第一编码视频分别与测试视频一起输入有参清晰度打分模型,得到每个第一编码视频的清晰度分值的处理可以如下:
对于每个第一编码视频,确定处理后的测试视频与第一编码视频中显示有相同视频帧信息的多个视频帧对;分别将多个视频帧对输入清晰度打分模型,得到多个视频帧对的清晰度分值;确定多个视频帧对的清晰度分值的均值,将均值确定为第一编码视频的清晰度分值。
在实施中,对于每个第一编码视频,可以对第一编码视频中添加的视频帧帧信息进行识别,得到的每个视频帧对应的视频帧信息。然后可以对处理后的测试视频中每个视频帧进行识别,得到测试视频中每个视频帧对应的视频帧信息。然后根据第一编码视频中每个视频帧对应的视频帧信息,以及测试视频中每个视频帧对应的视频帧信息,确定多个视频帧信息相同的视频帧对。其中,在任一个视频帧对中,包括一个第一编码视频中的视频帧以及一个测试视频中的视频帧。在得到多个视频帧对后,可以分别将多个视频帧对输入有参清晰度打分模型,由有参清晰度打分模型输出每个视频帧对的清晰度分值。然后可以计算多个视频帧对的清晰度分值的均值,将计算得到的均值确定为第一编码视频的清晰度分值。
可选的,视频帧对应的视频帧信息为视频帧的采集时间点,相应的,将视频帧信息以图像的形式添加到视频帧中得到处理后的视频帧,的处理如下:
将视频帧的采集时间点转换为二进制字符串,确定二进制字符串对应的图形码,将图形码添加到视频帧的预设位置处中,得到处理后的视频帧。
在实施中,测试视频可以是通过目标性能级别的终端进行拍摄的视频,在对目标性能级别的终端进行视频拍摄时,可以获取拍摄的测试视频中每一帧对应的采集时间点,然后可以每一视频帧对应的采集时间点转换为二进制的字符串,然后确定二进制的字符串对应的图像码,例如条形码、二维码等。例如可以根据预先设置的二进制字符串中“0”、“1”分别对应的颜色,确定二进制字符串对应的条形码,如图3所示,其中,二进制字符串可以为64位,其中,“0”可以对应黑色,“1”可以对应白色。
相应的,在将多个视频帧对输入清晰度打分模型之前,可以对对多个视频帧对中的每个视频帧的预设位置进行裁剪,得到多个裁剪后的视频帧对,然后分别将多个裁剪后的视频帧对输入有参清晰度打分模型。
在实施中,分别将多个视频帧对输入有参清晰度打分模型之前,可以裁去多个视频帧对中的每个视频帧的预设位置的图像,也就是将视频帧中的图像码进行裁剪,避免视频帧中图像码存在的图像码对有参清晰度打分模型对视频帧进行清晰度打分时的影响。在得到多个裁剪后的视频帧对后,可以分别将多个裁剪后的视频帧对输入有参清晰度打分模型。
步骤103、基于每个第一编码视频的帧率以及清晰度分值,确定目标性能级别的终端对应的目标编码参数组。
在实施中,在得到不同的编码参数组对应的第一编码视频的清晰度分值之后,可以根据第一编码视频的帧率以及对应编码参数组中的帧率确定对应的掉帧率。然后可以根据第一编码视频的清晰度分值以及掉帧率确定目标性能级别的终端对应的目标编码参数组。例如可以将掉帧率低于预先设定的掉帧率阈值的且对应清晰度分值最高的编码参数组确定为目标性能级别的终端对应的目标编码参数组。
可选的,确定目标性能级别的终端对应的目标编码参数组的处理可以如下:
步骤1031、基于每个编码参数组中包括的帧率以及对应的第一编码视频的帧率,确定每个第一编码视频的掉帧率。
在实施中,可以根据每个编码参数组中包括的帧率以及对应的第一编码视频的帧率,计算第一编码视频的掉帧率。例如,编码参数组中包括的帧率器20帧,对应的第一编码视频的帧率为18帧,则对应的掉帧率为10%。
步骤1032、在多个编码参数组中,确定对应帧率、分辨率最高且对应的第一编码视频的掉帧率小于预设掉帧率阈值的至少一个编码参数组。
在实施中,在得到每个编码参数组对应的第一编码视频的掉帧率后,可以确定对应的掉帧率小于预设掉帧率阈值的多个编码参数组。然后在多个编码参数组中确定对应的帧率、分辨率最高的至少一个编码参数组。如表2所示,表2为目标性能级别终端对应的多个编码参数组以及每组编码参数对应的第一编码视频的掉帧率。若掉帧率阈值为15%,则可以确定至少一个编码参数组可包括编码参数组2、编码参数组3、编码参数组4。
帧率 分辨率 码率 掉帧率
编码参数组0 15F 720P 1000 0%
编码参数组1 15F 720P 1500 0%
编码参数组2 20F 720P 1000 8%
编码参数组3 20F 720P 1500 10%
编码参数组4 20F 720P 1800 13%
编码参数组5 20F 1080P 1500 30%
编码参数组6 20F 1080P 2000 50%
表2
步骤1033、将至少一个编码参数组按照对应的码率的大小进行升序排列,得到排序后的至少一个编码参数组。
在实施中,在得到通过掉帧率、帧率和分辨率进行筛选之后的至少一个编码参数组之后,可以根据至少一个编码参数组中包括的码率的大小,对至少一个编码参数组进行升序排列,得到排序后的至少一个编码参数组。对应上述步骤1032中的例子,至少一个编码参数组按照码率的大小进行排序后的顺序为对编码参数组2、编码参数组3、编码参数组4。
步骤1034、对于排序后的至少一个编码参数组,分别确定每个编码参数组对应的第一编码视频的清晰度分值与下一个编码参数组对应的第一编码视频的清晰度分值的差值,如果存在对应的差值在预设的差值范围内的编码参数组,则将编码参数组确定为目标编码参数组,如果不存在对应的差值在差值范围内的编码参数组,则将排序后的至少一个编码参数组中的最后一个编码参数组确定为目标编码参数组。
如图4所示,图4为分辨率在720P、帧率在15F的情况下,清晰度与码率的对应关系图。可见在分辨率和帧率确定的情况下码率越大,对应的编码后的视频的清晰度也就越高,但是随着码率提高的一定程度,对应的编码后的视频的清晰度的提升也就不再明显,反而会由于码率的提高导致编码时占用处理器的处理资源更多。
在实施中,对于排序后的至少一个编码参数组,分别确定每个编码参数组对应的第一编码视频的清晰度分值与下一个编码参数组对应的第一编码视频的清晰度分值的差值,如果存在差值在预设的差值范围内的编码参数组,则将编码参数组确定为目标编码参数组,如果不存在差值在差值范围内的编码参数组,则将排序后的至少一个编码参数组中的最后一个编码参数组确定为目标编码参数组。例如,编码参数组2、编码参数组3、编码参数组4分别对应清晰度阈值为70、80、82,则编码参数组2对应的差值为10、编码参数组3对应的差值为2,如果预设的差值范围0-5,则可以确定编码参数组3为目标参数组。
同样按照上述步骤101-103的处理,可以得到各个性能级别的终端对应的目标编码参数组。在得到各个性能级别的终端对应的目标编码参数组后,可以将对应的每个性能级别的终端对应的目标编码参数组存储在服务器中。在终端需要进行视频实时传输时,可以向服务器发送的目标编码参数组获取请求,在获取请求中可以携带有终端的标识信息。服务器可以根据终端的标识信息确定对应的终端的性能级别,然后将对应的目标编码参数组发送至终端。终端可以根据接收到的目标编码参数对拍摄的视频数据进行编码,然后将编码之后的视频发送至服务器,再由服务器发送至其他终端。
本申请实施例,通过获取目标性能级别的终端以不同的编码参数组对测试视频进行编码得到的编码视频,根据不同的编码参数组对应的编码视频的帧率以及清晰度确定目标性能级别的终端对应的目标编码参数组。同样可以按照相同的方式对每个性能级别的终端确定对应的目标编码参数组。可见,采用本申请能够针对不同性能级别的终端确定对应的编码参数组,可以确保不同性能级别的终端以合适的编码参数组进行编码,以提高编码后的视频的流畅度和清晰度。
图5是本申请实施例提供的一种确定编码参数组的方法流程图。在本方法流程中,根据目标性能级别的终端以上述步骤101-103的方法流程确定的目标编码参数组进行编码,实现视频实时传输功能。服务器可以获取目标性能级别的终端以目标编码参数组进行编码得到的编码视频,然后根据编码视频对目标编码参数组中的参数进行调整。相应的处理如下:
步骤501、获取目标性能级别的终端基于目标编码参数组进行编码后的第二编码视频。
在本方法流程中,目标性能级别的终端可以通过直播应用程序实现视频实时传输功能,即实现视频直播功能。目标性能级别的终端在通过直播应用程序进行视频直播之前,可以向对应的服务器发送视频直播请求,其中,在视频直播请求中可以携带有目标性能级别的终端对应的终端标识信息,服务器可以通过目标性能级别的终端对应的终端标识信息,确定目标性能级别的终端对应的目标编码参数组。目标性能级别的终端在接收到服务器发送的目标编码参数组后,可以以目标编码参数组对拍摄的视频数据进行编码,然后将编码后的视频(即第二编码视频)发送至服务器,由服务器发送至其他观看直播的终端。
由于不同终端的图像处理元件的性能不同,进行直播时设置的滤镜、美颜等,都可能在一定程度上影响视频的清晰度。也就是说,即使视频的分辨率相同,对应的视频画面的清晰度也会受到图像处理元件、光线、滤镜以及美颜等因素的影响。所以在本方法申请实施例中,还引入了与第二编码视频的分辨率相同的第一对照视频,该对照视频可以是获取的其他直播应用程序对应的直播视频,也可以是由技术人员预先设置的一段较为清晰的对照视频。然后通过将第二编码视频与第一对照视频的清晰度进行对比,从而确定的以目标参数组进行编码的直播视频是否具有较高的清晰度。
步骤502、获取第二编码视频对应的第一对照视频,将第二编码视频与第一对照视频分别输入到预先训练的无参清晰度打分模型中,得到第一对照视频对应的第一清晰度分值以及第二编码视频对应的第二清晰度分值。
在本申请中还提供了一种无参清晰度打分模型,与有参清晰度打分模型不同,其对应的输入数据只需要包括待打分的视频数据。
其中,第一对照视频与第二编码视频对应的编码参数组中的分辨率相同。第一对照视频可以是服务器获取的其他直播应用程序对应的直播视频,且该直播视频的分辨率与第二编码视频的分辨率相同。由于第二编码视频和第一对照视频都是服务器获取的直播视频,因此无法直接获取到第二编码视频和第一对照视频对应的编码之前的视频。所以第二编码视频和第一对照视频无法通过有参清晰度打分模型确定对应的清晰度分值。因此在本方法流程中,还提供了一种无参清晰度打分模型为预先训练的无参考清晰度打分模型,与有参清晰度打分模型不同,无参清晰度打分模型的输入可以只是待打分的图像,将待打分的图像输入到无参清晰度打分模型后,无参清晰度打分模型可以直接输出对该待打分的图像的清晰度分值。无参清晰度打分模型的训练可以通过inceptionv3(一种卷积神经网络)作为预训练模型,保留inceptionv3神经网络的卷积层,增加池化层和全连接层,最后采用softmax(一种分类器)作为分类器。然后通过预先标定的训练样本进行训练。
在实施中,服务器在获取到第一对照视频之后,可以将第二编码视频输入到无参清晰度打分模型中得到第二编码视频对应的第二清晰度分值,并将第一对照视频输入到无参清晰度打分模型中得到第一对照视频对应的第一清晰度分值。
步骤503、如果第二清晰度分值大于第一清晰度分值,则确定目标编码参数组为目标性能级别的终端待使用的编码参数组。
在实施中,如果确定第二编码视频对应的第二清晰度分值大于第一对照视频对应的第一清晰度分值,则说明第二编码视频在清晰度要大于第一对照视频清晰度。即说明目标性能级别的终端使用当前的目标编码参数组进行编码,具有较高的清晰度,因此可以确定目标编码参数组为目标性能级别的终端对应的编码参数组。
可选的,无参清晰度打分模型仅是从数据角度确定第二编码视频和第一对照视频的清晰度,在本方法流程中还引入了从视觉感官角度确定第二编码视频和第一对照视频的清晰度的方法,从而分别从数据和视觉感官两个角度对第一对照视频和第二编码视频进的清晰进行对比,相应的处理如下:
将第二编码视频与第一对照视频发送至打分终端,接收打分终端发送的第一对照视频对应的第三清晰度分值以及第二编码视频对应的第四清晰度分值;如果第二清晰度分值大于第一清晰度分值,且第四清晰度分值大于第三清晰度分值,则确定目标编码参数组为目标性能级别的终端待使用的编码参数组。
在本方法流程中,提供了一种主观评测系统,该主观评测系统的管理后端可运行在服务器中,用户通过第一终端访问该主观评测系统对应的前端网页。其中,第一终端可以是目标性能级别的终端,也可以是其他可以访问主观评测系统对应的前端网页的终端。服务器可以将第二编码视频与第一对照视频发送至访问前端网页的打分终端,如图6所示,在打分网页中可以显示服务器发送的第二编码视频以及第一对照视频,用户可以在对应二编码视频以及第一对照视频的下方输入分别对二编码视频以及第一对照视频的清晰度分值。然后由打分终端将第二编码视频对应的第四清晰度分值以及第一对照视频对应的第三清晰度分值发送至服务器,如果第二清晰度分值大于第一清晰度分值,且第四清晰度分值大于第三清晰度分值,则确定目标编码参数组为目标性能级别的终端待使用的编码参数组。
其中,主观评测系统对应的前端网页还可以向用户显示各种样本图像,用户可以对样本图像清晰度进行打分,终端可以将样本图像对应清晰度发送至服务器。服务器可以将接收到的样本图像的清晰度分值以及样本图像作为训练样本,对上述步骤502中的无参清晰度打分模型进行训练。在根据样本图像对无参清晰度打分模型进行训练之前,还可以对样本图像进行增强处理。例如可以使用ImageDataGenerator(图像数据发生器)库对样本数据进行随机翻转、缩放处理来扩大训练样本的数据,对于小样本数据(例如出现马赛克、面部锯齿的视屏帧)进行重采样来平衡训练数据。最终将经过数据增强后的训练样本送入设计好的神经卷积网络进行训练,得到神经网络最终weights(权重),也即得到无参清晰度打分模型。
另外,主观评测系统对应的前端网页还用于显示各个性能级别终端以对应目标编码参数组进行编码的直播视频,用户可以观测各个直播视频的直播画面,如果直播画面存在不清晰的问题,用户可以在对应的直播视频画面下选择清晰度差的原因,或者,直接输入直播视频画面不清晰的原因,以为技术人员提供对视频清晰度进行优化的方向,除了调整编码参数组中的编码参数,还可以调整滤镜、美颜算法等。
可选的,如果第一清晰度分值小于或等于第二清晰度分值,或,第三清晰度分值小于或等于第四清晰度分值,则说明第二编码视频无论是可能从数据角度或者视觉感官角度上,清晰度都是要低于第一对照视频。所以可以对目标编码参数组中的编码在此进行调整,以提高第二编码视频的清晰度。相应的处理可如图7所示的对目标编码参数组进行调整的方法流程图,该方法包括:
步骤701、将目标编码参数组中的码率增加预设数值,得到调整后的目标编码参数组。
由于目标编码参数组中包括的分辨率和帧率是基于目标性能级别的终端的性能确定的,且分辨率或帧率的增加,会大大提高视频编码所占用的计算资源。并且由图4所示,编码视频的清晰度与码率为呈正比,因此可以通过调整目标编码参数组中的码率,以提高调整后的目标编码参数组对应的编码视频的清晰度。
在实施中,可以将目标编码参数组中的码率增加预设数值,得到调整后的目标编码参数组。其中,预设数值可以由技术人员进行设置,其具体数据不进行限定。
步骤702、获取由目标性能级别的终端基于调整后的目标编码参数组进行编码得到的第三编码视频,基于第三编码视频确定目标性能级别的终端待使用的目标编码参数组。
在实施中,在得到调整之后的目标编码参数组后,可以控制目标性能级别的终端进行编码,得到第三编码视频,然后根据第三编码视频确定目标性能级别的终端待使用的目标编码参数组。例如,如果调整之后的目标编码参数组对应的第三编码视频的清晰度相对于目标编码参数组对应的第二编码视频的清晰度有所提升,则可以确定调整之后的目标编码参数为目标性能级别的终端待使用的目标编码参数组。
可选的,基于第三编码视频确定目标性能级别的终端待使用的目标编码参数组的处理,可以有以下两种可能的实现方式。
在一种实现方式中,可以获取第三编码视频对应的第二对照视频,将第三编码视频与第二对照视频分别输入到预先训练的无参清晰度打分模型中,得到第三编码视频对应的第五清晰度分值以及第二对照视频对应的第六清晰度分值;将第三编码视频与第二对照视频发送至打分终端,接收打分终端发送的第三编码视频对应的第七清晰度分值以及第二对照视频对应的第八清晰度分值;如果第五清晰度分值大于第六清晰度分值,且第七清晰度分值大于第八清晰度分值,则确定调整后的目标编码参数组为目标性能级别的终端待使用的编码参数组。
其中,第二对照视频与第三编码视频对应的编码参数组中的分辨率相同。由于调整后的目标编码参数组只是调整了码率,分辨率并没有改变,因此第三编码视频的分辨率和第二编码视频的分辨率一致,也就是说,第一对照视频和第二对照视频的分辨率一致,所以第二对照视频也可以是第一对照视频。
在实施中,在得到调整后的目标编码参数组后,可以控制终端以调整后的目标编码参数组对直播视频进行编码,得到第三编码视频。服务器可以获取第三编码视频以及与第三编码视频对应的第二对照视频。将第三编码视频与第二对照视频分别输入到预先训练的无参清晰度打分模型中,得到第三编码视频对应的第五清晰度分值以及第二对照视频对应的第六清晰度分值。同时还可以将第三编码视频与第二对照视频发送至打分终端,接收打分终端发送的第三编码视频对应的第七清晰度分值以及第二对照视频对应的第八清晰度分值。如果第五清晰度分值大于第六清晰度分值,且第七清晰度分值大于第八清晰度分值,则说明以调整后的目标编码参数组进行编码得到的编码视频,无论是从数据角度还是视觉感官角度进行评判,对应的清晰度都要优于对照视频。因此可以将调整后的目标编码参数组确定为目标性能终端待使用的编码参数组。
在另一种实现方式中,获取目标性能级别的终端基于目标编码参数组对测试视频进行编码得到的第四编码视频,以及目标性能级别的终端基于调整后的目标编码参数组对测试视频进行编码得到的第三编码视频;将第四编码视频中每个位置的视频帧与第三编码视频中对应位置的视频帧拼接为一个视频帧,得到多个拼接后的视频帧;分别将拼接后的视频帧发送至打分终端,接收打分终端发送的多个拼接后的视频帧的清晰度判定结果;如果为第三编码视频更清晰的清晰度判定结果在打分终端发送的多个清晰度判定结果中的占比超过预设比例,则确定调整后的目标编码参数组为目标性能级别的终端待使用的编码参数组。
其中,第三编码视频可以是目标性能级别的终端基于调整后的目标编码参数组对测试视频进行编码得到的。
在实施中,可以控制目标性能级别的终端根据目标编码参数组对测试视频进行编码得到的第四编码视频,然后根据调整后的目标编码参数组对测试视频进行编码得到的第三编码视频。服务器在获取到第三编码视频和第四编码视频后,如图8所示,可以将第四编码视频中每个位置的视频帧与第三编码视频中对应位置的视频帧拼接为一个视频帧,得到多个拼接后的视频帧。即可以按照第四编码视频和第三编码视频中,各个视频帧在对应视频中对应有顺序的视频帧进行拼接。然后将拼接后的视频帧发送至打分终端。这样用户在打分终端的网页中,可以同时看到目标参数组对应的视频帧和调整之后的目标参数组对应的视频帧,便于用户进行对比观看。用户可以在打分终端的打分网页中,选择较为清晰的视频帧,然后将清晰度判定结果发送至服务器。服务器可以接收打分终端发送的多个拼接后的视频帧的清晰度判定结果。如果早接收的多个清晰度判定结果中为第三编码视频更清晰的清晰度判定结果在打分终端发送的多个清晰度判定结果中的占比超过预设比例,则可以说明以调整后的目标编码参数进行编码的视频的清晰度要优于目标编码参数进行编码的视频,所以可以将调整后的目标编码参数组为目标性能级别的终端待使用的编码参数组。
本申请实施例,通过获取目标性能级别的终端以不同的编码参数组对测试视频进行编码得到的编码视频,根据不同的编码参数组对应的编码视频的帧率以及清晰度确定目标性能级别的终端对应的目标编码参数组。同样可以按照相同的方式对每个性能级别的终端确定对应的目标编码参数组。可见,采用本申请能够针对不同性能级别的终端确定对应的编码参数组,可以确保不同性能级别的终端以合适的编码参数组进行编码,以提高编码后的视频的流畅度和清晰度。
上述所有可选技术方案,可以采用任意结合形成本公开的可选实施例,在此不再一一赘述。
图9是本申请实施例提供的一种确定编码参数组的装置结构示意图,该装置可以是上述实施例中的服务器,如图9所示,该装置包括:
获取模块910,用于获取目标性能级别的终端分别基于不同的编码参数组对测试视频进行编码得到的第一编码视频,并确定每个第一编码视频的帧率;
输入模块920,用于将所述每个第一编码视频分别与所述测试视频一起输入有参清晰度打分模型,得到所述每个第一编码视频的清晰度分值;
确定模块930,用于基于所述每个第一编码视频的帧率以及清晰度分值,确定所述目标性能级别的终端对应的目标编码参数组。
可选的,所述获取模块910,用于:
对于所述测试视频中的每个视频帧,获取所述视频帧对应的视频帧信息,将所述视频帧信息以图像的形式添加到所述视频帧中,得到处理后的视频帧;
基于多个处理后的视频帧,得到处理后的测试视频;
基于所述不同的编码参数组分别对所述处理后的测试视频进行编码,得到所述不同的编码参数组分别对应的第一编码视频;
所述输入模块920,用于:
对于每个第一编码视频,确定所述处理后的测试视频与所述第一编码视频中显示有相同视频帧信息的多个视频帧对;分别将所述多个视频帧对输入有参清晰度打分模型,得到所述多个视频帧对的清晰度分值;确定所述多个视频帧对的清晰度分值的均值,将所述均值确定为所述第一编码视频的清晰度分值。
可选的,所述获取模块910,用于:将所述视频帧的采集时间点转换为二进制字符串,确定所述二进制字符串对应的图形码,将所述图形码添加到所述视频帧的预设位置处中,得到所述处理后的视频帧;
所述分别将所述多个视频帧对输入有参清晰度打分模型,包括:
对所述多个视频帧对中的每个视频帧的预设位置进行裁剪,得到多个裁剪后的视频帧对,分别将所述多个裁剪后的视频帧对输入有参清晰度打分模型。
可选的,所述编码参数组中包括帧率、分辨率和码率,所述确定模块930,用于:
基于所述每个编码参数组中包括的帧率以及对应的第一编码视频的帧率,确定所述每个第一编码视频的掉帧率;
在多个编码参数组中,确定对应帧率、分辨率最高且对应的第一编码视频的掉帧率小于预设掉帧率阈值的至少一个编码参数组;
将所述至少一个编码参数组按照对应的码率的大小进行升序排列,得到排序后的至少一个编码参数组;
对于所述排序后的至少一个编码参数组,分别确定每个编码参数组对应的第一编码视频的清晰度分值与下一个编码参数组对应的第一编码视频的清晰度分值的差值,如果存在对应的差值在预设的差值范围内的编码参数组,则将所述编码参数组确定为所述目标编码参数组,如果不存在对应的差值在所述差值范围内的编码参数组,则将所述排序后的至少一个编码参数组中的最后一个编码参数组确定为所述目标编码参数组。
可选的,所述获取模块910,还用于:
获取所述目标性能级别的终端基于所述目标编码参数组进行编码后的第二编码视频;
获取所述第二编码视频对应的第一对照视频,将所述第二编码视频与所述第一对照视频分别输入到预先训练的无参清晰度打分模型中,得到所述第一对照视频对应的第一清晰度分值以及所述第二编码视频对应的第二清晰度分值,其中,所述第一对照视频与所述第二编码视频对应的编码参数组中的分辨率相同;
所述确定模块930,还用于:
如果所述第二清晰度分值大于所述第一清晰度分值,则确定所述目标编码参数组为所述目标性能级别的终端待使用的编码参数组。
可选的,所述装置还包括发送模块,用于:
将所述第二编码视频与所述第一对照视频发送至打分终端,接收所述打分终端发送的所述第一对照视频对应的第三清晰度分值以及所述第二编码视频对应的第四清晰度分值;
所述确定模块930,还用于:
如果所述第二清晰度分值大于所述第一清晰度分值,且所述第四清晰度分值大于所述第三清晰度分值,则确定所述目标编码参数组为所述目标性能级别的终端待使用的编码参数组。
可选的,所述编码参数组中包括码率,所述确定模块930,还用于:
如果所述第二清晰度分值小于或等于所述第一清晰度分值,或,所述第四清晰度分值小于或等于所述第三清晰度分值,则将所述目标编码参数组中的码率增加预设数值,得到调整后的目标编码参数组;
获取由所述目标性能级别的终端基于调整后的目标编码参数组进行编码得到的第三编码视频,基于所述第三编码视频确定所述目标性能级别的终端待使用的目标编码参数组。
可选的,所述确定模块930,用于:
获取所述第三编码视频对应的第二对照视频,其中,所述第二对照视频与所述第三编码视频对应的编码参数组中的分辨率相同;
将所述第三编码视频与所述第二对照视频分别输入到所述预先训练的无参清晰度打分模型中,得到所述第三编码视频对应的第五清晰度分值以及所述第二对照视频对应的第六清晰度分值;
将所述第三编码视频与所述第二对照视频发送至打分终端,接收所述打分终端发送的所述第三编码视频对应的第七清晰度分值以及所述第二对照视频对应的第八清晰度分值;
如果所述第五清晰度分值大于所述第六清晰度分值,且所述第七清晰度分值大于所述第八清晰度分值,则确定所述调整后的目标编码参数组为所述目标性能级别的终端待使用的编码参数组。
可选的,所述确定模块930,用于:
获取所述目标性能级别的终端基于所述目标编码参数组对所述测试视频进行编码得到的第四编码视频,以及所述目标性能级别的终端基于所述调整后的目标编码参数组对所述测试视频进行编码得到的第三编码视频;
将所述第四编码视频中每个位置的视频帧与所述第三编码视频中对应位置的视频帧拼接为一个视频帧,得到多个拼接后的视频帧;
分别将所述拼接后的视频帧发送至所述打分终端,接收所述打分终端发送的所述多个拼接后的视频帧的清晰度判定结果;
如果为第三编码视频更清晰的清晰度判定结果在所述打分终端发送的多个清晰度判定结果中的占比超过预设比例,则确定所述调整后的目标编码参数组为所述目标性能级别的终端待使用的编码参数组。
需要说明的是:上述实施例提供的编码参数组的装置在编码参数组时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的编码参数组的装置与编码参数组的方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
图10示出了本申请一个示例性实施例提供的电子设备1000的结构框图。该电子设备1000可以是便携式移动终端,比如:智能手机、平板电脑、MP3播放器(Moving PictureExperts Group Audio Layer III,动态影像专家压缩标准音频层面3)、MP4(MovingPicture Experts Group Audio Layer IV,动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。电子设备1000还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。
通常,电子设备1000包括有:处理器1001和存储器1002。
处理器1001可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器1001可以采用DSP(Digital Signal Processing,数字信号处理)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器1001也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(Central ProcessingUnit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器1001可以集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器1001还可以包括AI(Artificial Intelligence,人工智能)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器1002可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器1002还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器1002中的非暂态的计算机可读存储介质用于存储至少一个指令,该至少一个指令用于被处理器1001所执行以实现本申请中方法实施例提供的确定编码参数组的方法。
在一些实施例中,电子设备1000还可选包括有:外围设备接口1003和至少一个外围设备。处理器1001、存储器1002和外围设备接口1003之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口1003相连。具体地,外围设备包括:射频电路1004、显示屏1005、摄像头组件1006、音频电路1007、定位组件1008和电源1009中的至少一种。
外围设备接口1003可被用于将I/O(Input/Output,输入/输出)相关的至少一个外围设备连接到处理器1001和存储器1002。在一些实施例中,处理器1001、存储器1002和外围设备接口1003被集成在同一芯片或电路板上;在一些其他实施例中,处理器1001、存储器1002和外围设备接口1003中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。
射频电路1004用于接收和发射RF(Radio Frequency,射频)信号,也称电磁信号。射频电路1004通过电磁信号与通信网络以及其他通信设备进行通信。射频电路1004将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路1004包括:天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路1004可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:万维网、城域网、内联网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity,无线保真)网络。在一些实施例中,射频电路1004还可以包括NFC(Near Field Communication,近距离无线通信)有关的电路,本申请对此不加以限定。
显示屏1005用于显示UI(User Interface,用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏1005是触摸显示屏时,显示屏1005还具有采集在显示屏1005的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器1001进行处理。此时,显示屏1005还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏1005可以为一个,设置在电子设备1000的前面板;在另一些实施例中,显示屏1005可以为至少两个,分别设置在电子设备1000的不同表面或呈折叠设计;在另一些实施例中,显示屏1005可以是柔性显示屏,设置在电子设备1000的弯曲表面上或折叠面上。甚至,显示屏1005还可以设置成非矩形的不规则图形,也即异形屏。显示屏1005可以采用LCD(Liquid Crystal Display,液晶显示屏)、OLED(Organic Light-Emitting Diode,有机发光二极管)等材质制备。
摄像头组件1006用于采集图像或视频。可选地,摄像头组件1006包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头组件1006还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。
音频电路1007可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器1001进行处理,或者输入至射频电路1004以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在电子设备1000的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器1001或射频电路1004的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频电路1007还可以包括耳机插孔。
定位组件1008用于定位电子设备1000的当前地理位置,以实现导航或LBS(Location Based Service,基于位置的服务)。定位组件1008可以是基于美国的GPS(Global Positioning System,全球定位系统)、中国的北斗系统或俄罗斯的伽利略系统的定位组件。
电源1009用于为电子设备1000中的各个组件进行供电。电源1009可以是交流电、直流电、一次性电池或可充电电池。当电源1009包括可充电电池时,该可充电电池可以是有线充电电池或无线充电电池。有线充电电池是通过有线线路充电的电池,无线充电电池是通过无线线圈充电的电池。该可充电电池还可以用于支持快充技术。
在一些实施例中,电子设备1000还包括有一个或多个传感器1010。该一个或多个传感器1010包括但不限于:加速度传感器1011、陀螺仪传感器1012、压力传感器1013、指纹传感器1014、光学传感器1015以及接近传感器1016。
加速度传感器1011可以检测以电子设备1000建立的坐标系的三个坐标轴上的加速度大小。比如,加速度传感器1011可以用于检测重力加速度在三个坐标轴上的分量。处理器1001可以根据加速度传感器1011采集的重力加速度信号,控制显示屏1005以横向视图或纵向视图进行用户界面的显示。加速度传感器1011还可以用于游戏或者用户的运动数据的采集。
陀螺仪传感器1012可以检测电子设备1000的机体方向及转动角度,陀螺仪传感器1012可以与加速度传感器1011协同采集用户对电子设备1000的3D动作。处理器1001根据陀螺仪传感器1012采集的数据,可以实现如下功能:动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。
压力传感器1013可以设置在电子设备1000的侧边框和/或显示屏1005的下层。当压力传感器1013设置在电子设备1000的侧边框时,可以检测用户对电子设备1000的握持信号,由处理器1001根据压力传感器1013采集的握持信号进行左右手识别或快捷操作。当压力传感器1013设置在显示屏1005的下层时,由处理器1001根据用户对显示屏1005的压力操作,实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。
指纹传感器1014用于采集用户的指纹,由处理器1001根据指纹传感器1014采集到的指纹识别用户的身份,或者,由指纹传感器1014根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时,由处理器1001授权该用户执行相关的敏感操作,该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器1014可以被设置在电子设备1000的正面、背面或侧面。当电子设备1000上设置有物理按键或厂商Logo时,指纹传感器1014可以与物理按键或厂商Logo集成在一起。
光学传感器1015用于采集环境光强度。在一个实施例中,处理器1001可以根据光学传感器1015采集的环境光强度,控制显示屏1005的显示亮度。具体地,当环境光强度较高时,调高显示屏1005的显示亮度;当环境光强度较低时,调低显示屏1005的显示亮度。在另一个实施例中,处理器1001还可以根据光学传感器1015采集的环境光强度,动态调整摄像头组件1006的拍摄参数。
接近传感器1016,也称距离传感器,通常设置在电子设备1000的前面板。接近传感器1016用于采集用户与电子设备1000的正面之间的距离。在一个实施例中,当接近传感器1016检测到用户与电子设备1000的正面之间的距离逐渐变小时,由处理器1001控制显示屏1005从亮屏状态切换为息屏状态;当接近传感器1016检测到用户与电子设备1000的正面之间的距离逐渐变大时,由处理器1001控制显示屏1005从息屏状态切换为亮屏状态。
本领域技术人员可以理解,图10中示出的结构并不构成对电子设备1000的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
图11是本申请实施例提供的一种服务器的结构示意图,该服务器1100可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上处理器(central processingunits,CPU)1101和一个或一个以上的存储器1102,其中,所述存储器1102中存储有至少一条指令,所述至少一条指令由所述处理器1101加载并执行以实现上述各个方法实施例提供的方法。当然,该服务器还可以具有有线或无线网络接口、键盘以及输入输出接口等部件,以便进行输入输出,该服务器还可以包括其他用于实现设备功能的部件,在此不做赘述。
在示例性实施例中,还提供了一种计算机可读存储介质,例如包括指令的存储器,上述指令可由终端中的处理器执行以完成上述实施例中确定编码参数组的方法。该计算机可读存储介质可以是非暂态的。例如,所述计算机可读存储介质可以是ROM(Read-OnlyMemory,只读存储器)、RAM(Random Access Memory,随机存取存储器)、CD-ROM、磁带、软盘和光数据存储设备等。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本申请的较佳实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (10)

1.一种确定编码参数组的方法,其特征在于,所述方法包括:
获取多个第一编码视频,以及每个第一编码视频对应的帧率,其中,所述多个第一编码视频是目标性能级别的终端分别基于不同的编码参数组分别对处理后的测试视频进行编码得到的,所述处理后的测试视频是对所述测试视频中的每个视频帧获取对应的采集时间点,将所述视频帧的采集时间点转换为二进制字符串,确定所述二进制字符串对应的图形码,将所述图形码添加到所述视频帧的预设位置处得到的;
对于每个第一编码视频,确定所述处理后的测试视频与所述第一编码视频中显示有相同图形码的多个视频帧对;分别将所述多个视频帧对输入清晰度打分模型,得到所述多个视频帧对的清晰度分值;确定所述多个视频帧对的清晰度分值的均值,将所述均值确定为所述第一编码视频的清晰度分值;
基于所述每个第一编码视频的帧率以及清晰度分值,确定所述目标性能级别的终端对应的目标编码参数组。
2.根据权利要求1所述的方法,其特征在于,所述分别将所述多个视频帧对输入清晰度打分模型,包括:
对所述多个视频帧对中的每个视频帧的预设位置进行裁剪,得到多个裁剪后的视频帧对,分别将所述多个裁剪后的视频帧对输入清晰度打分模型。
3.根据权利要求1所述的方法,其特征在于,所述编码参数组中包括帧率、分辨率和码率,所述基于所述每个第一编码视频的帧率以及清晰度分值,确定所述目标性能级别的终端对应的目标编码参数组,包括:
基于每个编码参数组中包括的帧率以及对应的第一编码视频的帧率,确定所述每个第一编码视频的掉帧率;
在多个编码参数组中,确定对应帧率、分辨率最高且对应的第一编码视频的掉帧率小于预设掉帧率阈值的至少一个编码参数组;
将所述至少一个编码参数组按照对应的码率的大小进行升序排列,得到排序后的至少一个编码参数组;
对于所述排序后的至少一个编码参数组,分别确定每个编码参数组对应的第一编码视频的清晰度分值与下一个编码参数组对应的第一编码视频的清晰度分值的差值,如果存在对应的差值在预设的差值范围内的编码参数组,则将所述编码参数组确定为所述目标编码参数组,如果不存在对应的差值在所述差值范围内的编码参数组,则将所述排序后的至少一个编码参数组中的最后一个编码参数组确定为所述目标编码参数组。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取所述目标性能级别的终端基于所述目标编码参数组进行编码后的第二编码视频;
获取所述第二编码视频对应的第一对照视频,将所述第二编码视频与所述第一对照视频分别输入到预先训练的无参清晰度打分模型中,得到所述第一对照视频对应的第一清晰度分值以及所述第二编码视频对应的第二清晰度分值,其中,所述第一对照视频与所述第二编码视频对应的编码参数组中的分辨率相同;
如果所述第二清晰度分值大于所述第一清晰度分值,则确定所述目标编码参数组为所述目标性能级别的终端待使用的编码参数组。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
将所述第二编码视频与所述第一对照视频发送至打分终端,接收所述打分终端发送的所述第一对照视频对应的第三清晰度分值以及所述第二编码视频对应的第四清晰度分值;
所述如果所述第二清晰度分值大于所述第一清晰度分值,则确定所述目标编码参数组为所述目标性能级别的终端对应的编码参数组,包括:
如果所述第二清晰度分值大于所述第一清晰度分值,且所述第四清晰度分值大于所述第三清晰度分值,则确定所述目标编码参数组为所述目标性能级别的终端待使用的编码参数组。
6.根据权利要求5所述的方法,其特征在于,所述编码参数组中包括码率,所述方法还包括:
如果所述第二清晰度分值小于或等于所述第一清晰度分值,或,所述第四清晰度分值小于或等于所述第三清晰度分值,则将所述目标编码参数组中的码率增加预设数值,得到调整后的目标编码参数组;
获取由所述目标性能级别的终端基于调整后的目标编码参数组进行编码得到的第三编码视频,基于所述第三编码视频确定所述目标性能级别的终端待使用的目标编码参数组。
7.根据权利要求6所述的方法,其特征在于,所述基于所述第三编码视频确定所述目标性能级别的终端待使用的目标编码参数组,包括:
获取所述第三编码视频对应的第二对照视频,其中,所述第二对照视频与所述第三编码视频对应的编码参数组中的分辨率相同;
将所述第三编码视频与所述第二对照视频分别输入到所述预先训练的无参清晰度打分模型中,得到所述第三编码视频对应的第五清晰度分值以及所述第二对照视频对应的第六清晰度分值;
将所述第三编码视频与所述第二对照视频发送至打分终端,接收所述打分终端发送的所述第三编码视频对应的第七清晰度分值以及所述第二对照视频对应的第八清晰度分值;
如果所述第五清晰度分值大于所述第六清晰度分值,且所述第七清晰度分值大于所述第八清晰度分值,则确定所述调整后的目标编码参数组为所述目标性能级别的终端待使用的编码参数组。
8.根据权利要求6所述的方法,其特征在于,所述获取由所述目标性能级别的终端基于调整后的目标编码参数组进行编码得到的第三编码视频,基于所述第三编码视频确定所述目标性能级别的终端待使用的目标编码参数组,包括:
获取所述目标性能级别的终端基于所述目标编码参数组对所述测试视频进行编码得到的第四编码视频,以及所述目标性能级别的终端基于所述调整后的目标编码参数组对所述测试视频进行编码得到的第三编码视频;
将所述第四编码视频中每个位置的视频帧与所述第三编码视频中对应位置的视频帧拼接为一个视频帧,得到多个拼接后的视频帧;
分别将所述拼接后的视频帧发送至所述打分终端,接收所述打分终端发送的所述多个拼接后的视频帧的清晰度判定结果;
如果为第三编码视频更清晰的清晰度判定结果在所述打分终端发送的多个清晰度判定结果中的占比超过预设比例,则确定所述调整后的目标编码参数组为所述目标性能级别的终端待使用的编码参数组。
9.一种计算机设备,其特征在于,所述计算机设备包括处理器和存储器,所述存储器中存储有至少一条指令,所述至少一条指令由所述处理器加载并执行以实现如权利要求1至权利要求8任一项所述的确定编码参数组的方法所执行的操作。
10.一种计算机可读存储介质,其特征在于,所述存储介质中存储有至少一条指令,所述至少一条指令由处理器加载并执行以实现如权利要求1至权利要求8任一项所述的确定编码参数组的方法所执行的操作。
CN202110328517.3A 2021-03-26 2021-03-26 确定编码参数组的方法、设备及存储介质 Active CN113038165B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110328517.3A CN113038165B (zh) 2021-03-26 2021-03-26 确定编码参数组的方法、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110328517.3A CN113038165B (zh) 2021-03-26 2021-03-26 确定编码参数组的方法、设备及存储介质

Publications (2)

Publication Number Publication Date
CN113038165A CN113038165A (zh) 2021-06-25
CN113038165B true CN113038165B (zh) 2023-07-25

Family

ID=76472686

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110328517.3A Active CN113038165B (zh) 2021-03-26 2021-03-26 确定编码参数组的方法、设备及存储介质

Country Status (1)

Country Link
CN (1) CN113038165B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113724225B (zh) * 2021-08-31 2024-04-09 北京达佳互联信息技术有限公司 应用程序传输质量的确定方法及装置
CN114095722A (zh) * 2021-10-08 2022-02-25 钉钉(中国)信息技术有限公司 清晰度的确定方法、装置及设备
CN114866840A (zh) * 2022-03-31 2022-08-05 广州方硅信息技术有限公司 Vmaf画质评价方法、终端、主机、系统及存储介质

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107948660A (zh) * 2017-11-16 2018-04-20 北京小米移动软件有限公司 视频编码适配的方法及装置
CN111163338B (zh) * 2019-12-27 2022-08-12 广州市百果园网络科技有限公司 视频清晰度评估模型训练方法、视频推荐方法及相关装置
CN111641804A (zh) * 2020-06-16 2020-09-08 广州迈聆信息科技有限公司 视频数据处理方法和装置、终端、摄像头及视频会议系统
CN111836073B (zh) * 2020-07-10 2022-02-22 腾讯科技(深圳)有限公司 视频清晰度的确定方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN113038165A (zh) 2021-06-25

Similar Documents

Publication Publication Date Title
CN110502954B (zh) 视频分析的方法和装置
WO2021008456A1 (zh) 图像处理方法、装置、电子设备及存储介质
CN113038165B (zh) 确定编码参数组的方法、设备及存储介质
CN110650379B (zh) 视频摘要生成方法、装置、电子设备及存储介质
CN110533585B (zh) 一种图像换脸的方法、装置、系统、设备和存储介质
CN111027490B (zh) 人脸属性识别方法及装置、存储介质
CN109634688B (zh) 会话界面的显示方法、装置、终端及存储介质
CN112084811A (zh) 身份信息的确定方法、装置及存储介质
CN112907725A (zh) 图像生成、图像处理模型的训练、图像处理方法和装置
CN111586444B (zh) 视频处理方法、装置、电子设备及存储介质
CN112581358A (zh) 图像处理模型的训练方法、图像处理方法及装置
CN111432245B (zh) 多媒体信息的播放控制方法、装置、设备及存储介质
CN111586413B (zh) 视频调整方法、装置、计算机设备及存储介质
CN110807769B (zh) 图像显示控制方法及装置
CN111586279B (zh) 确定拍摄状态的方法、装置、设备及存储介质
CN111083554A (zh) 直播礼物显示的方法和装置
CN110675473A (zh) 生成gif动态图的方法、装置、电子设备及介质
CN111353946A (zh) 图像修复方法、装置、设备及存储介质
CN109345636B (zh) 获取虚拟人脸图的方法和装置
CN111988664B (zh) 视频处理方法、装置、计算机设备及计算机可读存储介质
CN113709353B (zh) 图像采集方法和设备
CN111367492B (zh) 网页页面展示方法及装置、存储介质
CN112560903A (zh) 图像美学信息的确定方法、装置、设备及存储介质
CN112489006A (zh) 图像处理方法、装置、存储介质及终端
CN110365903B (zh) 基于视频的对象处理方法、装置、设备及可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant