CN108174191B - 视频流畅度测试方法、计算机存储介质及终端 - Google Patents

视频流畅度测试方法、计算机存储介质及终端 Download PDF

Info

Publication number
CN108174191B
CN108174191B CN201711479300.2A CN201711479300A CN108174191B CN 108174191 B CN108174191 B CN 108174191B CN 201711479300 A CN201711479300 A CN 201711479300A CN 108174191 B CN108174191 B CN 108174191B
Authority
CN
China
Prior art keywords
video
frame
main broadcaster
totalframes
source video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711479300.2A
Other languages
English (en)
Other versions
CN108174191A (zh
Inventor
周云鹏
陈欣欣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Huya Information Technology Co Ltd
Original Assignee
Guangzhou Huya Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Huya Information Technology Co Ltd filed Critical Guangzhou Huya Information Technology Co Ltd
Priority to CN201711479300.2A priority Critical patent/CN108174191B/zh
Publication of CN108174191A publication Critical patent/CN108174191A/zh
Application granted granted Critical
Publication of CN108174191B publication Critical patent/CN108174191B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N17/004Diagnosis, testing or measuring for television systems or their details for digital television systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N2017/006Diagnosis, testing or measuring for television systems or their details for television sound
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N2017/008Diagnosis, testing or measuring for television systems or their details for television teletext

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本发明涉及直播视频测试领域,具体涉及一种视频流畅度测试方法、计算机存储介质及终端,所述方法包括:响应于测试任务及配置指令,通知主播端及观众端,以使主播端使用源视频开播,以使观众端进入主播端开播的直播间并录制直播视频后生成录制视频;获取主播端发送的去除重复帧后的源视频的总帧数;获取观众端发送的去除重复帧后的录制视频的总帧数;获取观众端通过结构相似度计算录制视频中的重复帧并去除重复帧后的录制视频的总帧数;根据所述去除重复帧后的源视频的总帧数及录制视频的总帧数确定视频流畅度。本发明解决了对于采集源视频进行直播,尤其是游戏直播时涉及到主播端的采集和观众端的渲染,使用FPS不能很好地说明视频流畅性的问题。

Description

视频流畅度测试方法、计算机存储介质及终端
技术领域
本发明涉及直播视频测试领域,具体涉及一种视频流畅度测试方法、计算机存储介质及终端。
背景技术
随着互联网及多媒体技术的发展,视频直播已经成为大众生活、娱乐的一种方式,尤其是游戏直播是视频直播的主要类别之一,游戏直播涉及主播端采集游戏画面,而游戏的画面有自身FPS(Frames Per Second),即每秒游戏画面刷新的帧数,同时游戏直播还涉及观众端的观看视频直播,因此如何测试视频的流畅度包括主播端采集游戏画面的流畅度和观众端观看视频直播的流畅度是目前游戏直播中需要面临的问题,而现有技术中,对于视频流畅度只是简单地用FPS来评价,FPS越高则视频越流畅,这种方法对于视频观看领域的视频测试作用较大,而对于直播领域尤其是游戏直播,涉及到主播端的采集和观众端的渲染,如果主播端采集重复或者观众端渲染重复,简单的使用FPS并不能说明视频的流畅性,并且,若FPS过低导致视频不流畅,单纯地使用FPS测试视频流畅度不能有效地追踪到问题产生的根源,无法提供改进各端的数据基础。同时,目前的测试方法,对于测试不同码率、不同编码方式的视频等情况时需要不断的重复开播、录制大量视频,需要消耗过多的时间和人力成本。
发明内容
为克服以上技术问题,特别是现有技术单纯使用FPS不能有效地说明视频直播时视频流畅性的问题,特提出以下技术方案:
第一方面,本发明提供一种视频流畅度测试方法,包括:
响应于测试任务及配置指令,通知主播端及观众端,以使主播端使用源视频开播,以使观众端进入主播端开播的直播间并录制直播视频后生成录制视频;
获取主播端发送的去除重复帧后的源视频的总帧数;获取观众端发送的去除重复帧后的录制视频的总帧数;
根据所述去除重复帧后的源视频的总帧数及录制视频的总帧数确定视频流畅度。
进一步的,所述获取观众端发送的去除重复帧后的录制视频的总帧数之后,还包括:
获取观众端发送的录制视频中每组重复帧的数量,确定录制视频的帧密度;
获取主播端的采集帧率与观众端的录制帧率,根据主播端的采集帧率与观众端的录制帧率确定基准帧密度;
当录制视频的帧密度与基准帧密度相同时,判定观众端在进入直播间观看直播视频期间渲染直播视频的时间均匀。
进一步的,所述响应于测试任务及配置指令,通知主播端及观众端,以使主播端使用源视频开播,以使观众端进入主播端开播的直播间并录制直播视频后生成录制视频之后,还包括:
获取录制视频中的第一测试帧,在源视频中查找相应的第一匹配帧;
获取录制视频中的第二测试帧,在源视频中查找相应的第二匹配帧;
根据第一匹配帧和第二匹配帧的时间确定主播端采集源视频的帧间隔;
获取源视频的播放帧率与主播端的采集帧率,根据源视频的播放帧率与主播端的采集帧率确定基准帧间隔;
当主播端采集源视频的帧间隔与基准帧间隔相同时,判定主播端在采集源视频期间采集时间均匀。
进一步的,所述根据所述去除重复帧后的源视频的总帧数及录制视频的总帧数确定视频流畅度,包括:
根据去除重复帧后的源视频的总帧数及源视频时长确定去除重复帧后的源视频的每秒帧数;
根据去除重复帧后的录制视频的总帧数及录制视频时长确定去除重复帧后的录制视频的每秒帧数;
去除重复帧后的录制视频的每秒帧数/去除重复帧后的源视频的每秒帧数为视频流畅度。
具体的,所述响应于测试任务及配置指令之前,还包括:
新建测试任务,所述测试任务包括不同场景下的组合测试任务,所述场景包括不同码率、不同编码方式下的场景;
将所述测试任务存储到数据库中。
进一步的,所述根据所述去除重复帧后的源视频的总帧数及录制视频的总帧数确定视频流畅度之后,还包括:
将所述视频流畅度的数据结果以可视化的图表展示;
向主播端发送停止直播指令以使主播端停止使用源视频开播;
向观众端发送停止录制指令以使观众端退出所述直播间。
从多端的角度,本发明还提供一种视频流畅度测试方法,包括:
测试端根据用户配置的测试任务及配置指令,测试端通知主播端及观众端;
观众端通过测试端的数据库查询测试任务后向主播端发送开播通知;
主播端在接收到所述开播通知后使用源视频开播,并向观众端发送开播完成通知;
观众端收到所述开播完成通知后,进入主播端开播的直播间观看直播视频,并启动录制工具录制时长为源视频时长整数倍的录制视频;
主播端通过结构相似度计算源视频中的重复帧并将去除重复帧后的源视频的总帧数发送给测试端;
观众端通过结构相似度计算录制视频中的重复帧并将去除重复帧后的录制视频的总帧数发送给测试端;
测试端根据所述去除重复帧后的源视频的总帧数及录制视频的总帧数确定视频流畅度。
较佳的,所述主播端通过结构相似度计算源视频中的重复帧并将去除重复帧后的源视频的总帧数发送给测试端,包括:
主播端计算源视频中前后帧的结构相似度,当结构相似度大于预设值时,确定该前后帧为一组重复帧;保留源视频每组重复帧中的任一帧,将每组重复帧的其它帧从源视频中去除;将去除重复帧后的源视频的总帧数发送给测试端;
所述观众端通过结构相似度计算录制视频中的重复帧并将去除重复帧后的录制视频的总帧数发送给测试端,包括:
观众端计算录制视频中前后帧的结构相似度,当结构相似度大于预设值时,确定该前后帧为一组重复帧;保留录制视频每组重复帧中的任一帧,将每组重复帧的其它帧从录制视频中去除;将去除重复帧后的录制视频的总帧数发送给测试端。
第二方面,本发明提供一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,该程序被处理器执行时实现第一方面任一项所述的视频流畅度测试方法。
第三方面,本发明提供一种终端,包括:
一个或多个处理器;
存储器;
一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个应用程序配置用于执行实现第一方面任一项所述的视频流畅度测试方法。
与现有技术相比,本发明具备如下优点:
本发明通过测试任务及配置指令,通知主播端和观众端执行视频流畅度测试,然后获取去除重复帧后的源视频的总帧数及去除重复帧后的录制视频的总帧数,再于此确定视频流畅度,解决了对于采集源视频进行直播,尤其是游戏直播时涉及到主播端的采集和观众端的渲染,简单的使用FPS不能很好地说明视频流畅性的问题。
并且,本发明针对直播场景,尤其是针对游戏直播场景,将视频的流畅性通过帧间隔、帧密度、视频流畅度三个维度全面衡量,从主播端、观众端、源视频(相当于游戏画面)多个维度进行评价,从而可根据帧间隔、帧密度、视频流畅度的数据结果而确定在主播端、观众端、源视频是否出现问题,为后续改进主播端、观众端提供数据追踪基础。
再者,本发明实现自动化的测试方案,测试人员通过可视化的建立测试任务,包括多种不同场景下的测试任务,然后自动让主播端、观众端执行测试过程,从而计算出视频流畅度、帧间隔、帧密度等数据结果,并将测试结果以可视化的图表直观展示,避免现有测试过程在测试不同码率、不同编码方式的视频等情况时需要不断的重复开播、录制大量视频消耗的时间和人力成本的问题。
显然,上述有关本发明优点的描述是概括性的,更多的优点描述将体现在后续的实施例揭示中,以及,本领域技术人员也可以本发明所揭示的内容合理地发现本发明的其他诸多优点。
本发明附加的方面和优点将在下面的描述中部分给出,这些将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1为本发明新视频流畅度测试方法的一实施例流程示意图;
图2为视频中包含的帧的一实施例示意图;
图3为本发明测试系统的一实施例结构示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能解释为对本发明的限制。
本技术领域技术人员可以理解,除非特意声明,这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是,本发明的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作。
本技术领域技术人员可以理解,除非另外定义,这里使用的所有术语(包括技术术语和科学术语),具有与本发明所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是,诸如通用字典中定义的那些术语,应该被理解为具有与现有技术的上下文中的意义一致的意义,并且除非像这里一样被特定定义,否则不会用理想化或过于正式的含义来解释。
在一种实施例中,本发明提供一种视频流畅度测试方法,由测试系统端为执行主体执行所述视频流畅度测试方法,如图1所示,包括:
S100:响应于测试任务及配置指令,通知主播端及观众端,以使主播端使用源视频开播,以使观众端进入主播端开播的直播间并录制直播视频后生成录制视频。
视频流畅度通常只用FPS(Frames Per Second)来衡量,一般来说FPS越高视频越流畅,但对于直播来说,涉及到主播端的采集和观众端的渲染,如果主播端采集重复或者观众端渲染重复,简单的使用FPS并不能说明视频的流畅性,于此,本实施例提出了一种新的视频流畅度的测试方法,在确定了测试任务和配置指令后,测试端通知主播端使用源视频开播,主播端接收到该通知后,创建直播间并采集源视频为直播画面开始直播,同时测试端还通知观众端进入主播端开播的直播间录制直播间的直播视频画面生成录制视频,本实施例将由观众端在主播端开播的直播间录制的视频定义为录制视频。
S200:获取主播端发送的去除重复帧后的源视频的总帧数;获取观众端发送的去除重复帧后的录制视频的总帧数。
视频都是由一幅幅静止的图像组成的,该些静止的图像被称为帧,每一帧相当于一幅图像,每个视频都有特定的帧率规定视频每秒显示多少帧图像,结构相似度(SSIM,Structural similarity index)是衡量两幅图像相似度的指标,基于结构相似度便可计算视频中的任意两帧图像是否为重复帧,当两帧图像的结构相似度大于预设值时,判定该两帧图像为重复帧。本实施例中,主播端通过结构相似度计算源视频中的重复帧,然后将去除重复帧后的源视频的总帧数发送给测试端;同样的,观众端通过结构相似度计算录制视频中的重复帧,然后将去除重复帧后的录制视频的总帧数发送给测试端,测试端响应地获取到去除重复帧后的源视频的总帧数及去除重复帧后的录制视频的总帧数。
具体的,通过结构相似度计算视频中的重复帧示例如下,如图2所示,视频包括帧1,2,3,4,5,6,7,8总共8帧,计算帧1和帧2的结构相似度是否大于预设值,若是,则判定帧1和帧2为重复帧,且帧1和帧2即构成一组重复帧,然后继续依次计算其它两帧的结构相似度是否大于预设值,优选的依次计算前后两帧的结构相似度是否大于预设值,从而找出所有的重复帧。去除视频中的重复帧示例如下,在找出视频中的重复帧后,将视频中的重复帧去除,可以是保留每组重复帧中的第一帧,然后将每组重复帧的其它帧去除,例如图2中,帧1与帧2、帧3为一组重复帧,在去除重复帧时,保留帧1然后将帧2和帧3去除,此时视频只存在帧1,4,5,6,7,8总共6帧。
S300:根据所述去除重复帧后的源视频的总帧数及录制视频的总帧数确定视频流畅度。
测试系统在获取到去除重复帧后的源视频的总帧数及录制视频的总帧数后,根据去除重复帧后的源视频的总帧数及录制视频的总帧数确定视频流畅度,当视频流畅度的值越大时,表示主播端采集源视频进行直播及观众端观看直播视频的视频流畅性更好。
具体的,在一种实施方式中,所述视频流畅度为去除重复帧后的录制视频的总帧数/去除重复帧后的源视频的总帧数;在另一种实施方式中,所述视频流畅度计算如下:根据去除重复帧后的源视频的总帧数及源视频时长确定去除重复帧后的源视频的每秒帧数;根据去除重复帧后的录制视频的总帧数及录制视频时长确定去除重复帧后的录制视频的每秒帧数;去除重复帧后的录制视频的每秒帧数/去除重复帧后的源视频的每秒帧数为视频流畅度。
进一步的,本发明的一种实施例,所述获取观众端发送的去除重复帧后的录制视频的总帧数之后,还包括:
获取观众端发送的录制视频中每组重复帧的数量,确定录制视频的帧密度;
获取主播端的采集帧率与观众端的录制帧率,根据主播端的采集帧率与观众端的录制帧率确定基准帧密度;
当录制视频的帧密度与基准帧密度相同时,判定观众端在进入直播间观看直播视频期间渲染直播视频的时间均匀。
本实施例中,观众端在计算出录制视频的重复帧后,将每组重复帧的数量发送给测试端,测试端获取每组重复帧的数量并将录制视频中每组重复帧的数量定义为录制视频的帧密度;然后接着根据主播端的采集帧率与观众端的录制帧率确定基准帧密度,一般的,主播端的采集帧率与观众端的录制帧率在测试任务或配置指令中已经设定,所述基准帧密度为观众端的录制帧率/主播端的采集帧率,例如观众端的录制帧率为60fps,主播端的采集帧率为30fps,则此时的基准帧密度为2,然后将录制视频的帧密度与基准帧密度作比较,当两者相同时,表明观众端在渲染直播视频时的每帧的渲染时间均匀,没有出现重复渲染视频帧的情况,如果录制视频的帧密度出现1,2,3变化,则说明此时观众端在渲染直播视频时的时间不均匀。通过帧密度的比较可以快速测试出观众端的渲染时间是否均匀,为后续判断、改进观众端的程序提供数据基础。
本发明的另一种实施例,所述响应于测试任务及配置指令,通知主播端及观众端,以使主播端使用源视频开播,以使观众端进入主播端开播的直播间并录制直播视频后生成录制视频之后,还包括:
获取录制视频中的第一测试帧,在源视频中查找相应的第一匹配帧;
获取录制视频中的第二测试帧,在源视频中查找相应的第二匹配帧;
根据第一匹配帧和第二匹配帧的时间确定主播端采集源视频的帧间隔;
获取源视频的播放帧率与主播端的采集帧率,根据源视频的播放帧率与主播端的采集帧率确定基准帧间隔;
当主播端采集源视频的帧间隔与基准帧间隔相同时,判定主播端在采集源视频期间采集时间均匀。
本实施例中,观众端从所述录制视频中取第一测试帧发送给测试端,测试端将第一测试帧发送给主播端,主播端在源视频中查找相应的第一匹配帧后发送给测试端;同样的方式获得第二匹配帧;然后根据第一匹配帧和第二匹配帧的时间确定主播端采集源视频的帧间隔,帧间隔的评价指标为基准帧间隔,测试端根据源视频的帧率与主播端的采集帧率确定基准帧间隔,当主播端采集源视频的帧间隔与基准帧间隔相同时,判定主播端在采集源视频期间采集时间均匀。例如源视频帧率为60fps,主播端的采集帧率为30fps,则基准帧间隔为33/34ms,当主播端采集源视频的帧间隔为33/34ms,说明主播端采集源视频流时的采集时间均匀,如果主播端采集源视频的帧间隔出现16/17ms、33/34ms、66/67ms不断变化,说明主播端采集源视频流时的采集时间不均匀,如主播端采集源视频的帧间隔大于66/67ms,则说明主播端采集源视频时出现采集跳帧现象,出现采集跳帧会降低视频的流畅度,另外,当视频流畅度低时,可以通过帧间隔确认是连续性丢帧还是间歇性丢帧,一般来说连续性丢帧对用户体验影响较大。
优选的,本发明的实施例中,所述响应于测试任务及配置指令之前,还包括:
新建测试任务,所述测试任务包括不同场景下的组合测试任务,所述场景包括不同码率、不同编码方式下的场景;
将所述测试任务存储到数据库中。
本实施例中,在测试端,测试人员可以在测试端的页面上同时新建多个测试任务,所述测试任务包括不同场景下的组合测试任务,所述场景包括不同码率、编码方式下的场景,不同码率输出的视频画质不相同,不同编码方式输出的视频画质亦不相同,然后将所述测试任务存储到测试端的数据库中,通过可视化的建立测试任务,测试人员可以快速建立多种不同场景下的测试任务,后续测试端根据配置指令便可执行上述实施例的步骤,从而获取视频流畅度的数据结果,避免测试不同码率、不同编码方式的视频等情况时需要不断的重复开播、录制大量视频消耗的时间和人力成本的问题。
进一步的,本发明的一种实施例,所述根据所述去除重复帧后的源视频的总帧数及录制视频的总帧数确定视频流畅度之后,还包括:
将所述视频流畅度的数据结果以可视化的图表展示;
向主播端发送停止直播指令以使主播端停止使用源视频开播;
向观众端发送停止录制指令以使观众端退出所述直播间。
本实施例中测试端实时得到测试的视频流畅度的数据结果后,以可视化的图表展示上述数据结果,优选的,以折线图展示所述视频流畅度的数据结果,当折线图波动较大时,说明视频流畅度不理想,当折线图稳定为某一固定值时,说明视频流畅度情况理想。进一步的,测试端还将所述录制视频的帧密度及主播端采集源视频的帧间隔同样以可视化的图表展示,给予测试人员更直观的数据结果,方便测试人员根据所述数据结果作后续处理。
更进一步的,测试端在将视频流畅度的数据结果以可视化的图表输出、展示后,向主播端发送停止直播指令以使主播端停止使用源视频开播,同时向观众端发送停止录制指令以使观众端退出所述直播间,结束一次的测试任务。
进一步的,在另一种实施例中,从多端角度提供一种视频流畅度测试方法,包括:
测试端根据用户配置的测试任务及配置指令,测试端通知主播端及观众端;
观众端通过测试端的数据库查询测试任务后向主播端发送开播通知;
主播端在接收到所述开播通知后使用源视频开播,并向观众端发送开播完成通知;
观众端收到所述开播完成通知后,进入主播端开播的直播间观看直播视频,并启动录制工具录制时长为源视频时长整数倍的录制视频;
主播端通过结构相似度计算源视频中的重复帧并将去除重复帧后的源视频的总帧数发送给测试端;
观众端通过结构相似度计算录制视频中的重复帧并将去除重复帧后的录制视频的总帧数发送给测试端;
测试端根据所述去除重复帧后的源视频的总帧数及录制视频的总帧数确定视频流畅度。
测试人员在测试端上配置的测试任务及触发配置指令,测试端根据用户配置的测试任务及配置指令,通知主播端及观众端,其中,观众端通过测试端的数据库查询测试任务后向主播端发送开播通知,具体的,观众端通过socket向主播端发送开播通知;主播端在接收到所述开播通知后创建直播间,并采集源视频为直播画面开始直播,并向观众端发送开播完成通知,同样的,主播端通过socket通知观众端开播完成;观众端收到所述开播完成通知后,进入主播端开播的直播间观看直播视频,并启动录制工具录制时长为源视频时长整数倍的录制视频。由此开始统计相关测试数据,具体的,主播端通过结构相似度计算源视频中的重复帧并将去除重复帧后的源视频的总帧数发送给测试端,观众端通过结构相似度计算录制视频中的重复帧并将去除重复帧后的录制视频的总帧数发送给测试端,然后测试端根据所述去除重复帧后的源视频的总帧数及录制视频的总帧数确定视频流畅度,然后将数据结果与测试任务关联写入数据库中。
具体的,所述实施例中,所述主播端通过结构相似度计算源视频中的重复帧并将去除重复帧后的源视频的总帧数发送给测试端,包括:
主播端计算源视频中前后帧的结构相似度,当结构相似度大于预设值时,确定该前后帧为一组重复帧;保留源视频每组重复帧中的任一帧,将每组重复帧的其它帧从源视频中去除;将去除重复帧后的源视频的总帧数发送给测试端;
主播端通过计算源视频中前后帧的结构相似度筛选出源视频中的重复帧,例如源视频中包含帧1,2,3,4,5,6,7,8总共8帧,计算帧1和帧2的结构相似度是否大于预设值,本实施例中,预设值设为0.999,若是,则判定帧1和帧2为1组重复帧,然后依次计算相邻两帧的结构相似度,以此找出所有的重复帧,在找出源视频中的每组重复帧后,保留源视频的每组重复帧中的任一帧,将每组重复帧的其它帧从源视频中去除,例如源视频中帧1与帧2为重复帧、帧2与帧3为重复帧,此时相当于帧1与帧2、帧3为一组重复帧,此时保留该组重复帧中的任一帧,优选的,保留该组重复帧的第一帧(即帧1),然后将其它帧(即帧2、帧3)从源视频中去除,此时源视频只存在帧1,4,5,6,7,8总共6帧,然后将去除重复帧后的源视频的总帧数发送给测试端,测试端获取到去除重复帧后的源视频的总帧数为6帧。
所述观众端通过结构相似度计算录制视频中的重复帧并将去除重复帧后的录制视频的总帧数发送给测试端,包括:
观众端计算录制视频中前后帧的结构相似度,当结构相似度大于预设值时,确定该前后帧为一组重复帧;保留录制视频每组重复帧中的任一帧,将每组重复帧的其它帧从录制视频中去除;将去除重复帧后的录制视频的总帧数发送给测试端。
观众端观看并录制视频,录制过程存在重复渲染的情况,因而观众端计算录制视频中前后帧的结构相似度以筛选出重复渲染的帧,例如录制视频中包含帧1,2,3,4,5,6,7,8总共8帧,计算帧1和帧2的结构相似度是否大于预设值,本实施例中,预设值设为0.999,若是,则判定帧1和帧2为一组重复帧,然后依次计算相邻两帧的结构相似度,以此找出所有的重复帧,在找出录制视频中的重复帧后,保留录制视频的每组重复帧中的任一帧,将每组重复帧的其它帧从录制视频中去除,例如录制视频中帧1与帧2为重复帧、帧2与帧3为重复帧,此时相当于帧1与帧2、帧3为一组重复帧,此时保留该组重复帧中的任一帧,优选的,保留该组重复帧的第一帧(即帧1),然后将其它帧(即帧2、帧3)从录制视频中去除,此时录制视频只存在帧1,4,5,6,7,8总共6帧,然后将去除重复帧后的录制视频的总帧数发送给测试端,测试端则获取到去除重复帧后的录制视频的总帧数为6帧。
在另一种实施例中,本发明提供了一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该程序被处理器执行时实现上述实施例所述的视频流畅度测试方法。其中,所述计算机可读存储介质包括但不限于任何类型的盘(包括软盘、硬盘、光盘、CD-ROM、和磁光盘)、ROM(Read-Only Memory,只读存储器)、RAM(Random AcceSS Memory,随即存储器)、EPROM(EraSable Programmable Read-Only Memory,可擦写可编程只读存储器)、EEPROM(Electrically EraSable Programmable Read-Only Memory,电可擦可编程只读存储器)、闪存、磁性卡片或光线卡片。也就是,存储设备包括由设备(例如,计算机、手机)以能够读的形式存储或传输信息的任何介质,可以是只读存储器,磁盘或光盘等。
本发明实施例提供的一种计算机可读存储介质,可实现响应于测试任务及配置指令,通知主播端及观众端,以使主播端使用源视频开播,以使观众端进入主播端开播的直播间并录制直播视频后生成录制视频;获取主播端发送的去除重复帧后的源视频的总帧数;获取观众端发送的去除重复帧后的录制视频的总帧数;根据所述去除重复帧后的源视频的总帧数及录制视频的总帧数确定视频流畅度。通过测试任务及配置指令,通知主播端和观众端执行视频流畅度测试,然后获取去除重复帧后的源视频的总帧数及去除重复帧后的录制视频的总帧数,再于此确定视频流畅度,解决了对于采集源视频进行直播,尤其是游戏直播时涉及到主播端的采集和观众端的渲染,简单的使用FPS不能很好地说明视频流畅性的问题;此外,本发明提供的计算机可读存储介质还可实现针对直播场景,尤其是针对游戏直播场景,将视频的流畅性通过帧间隔、帧密度、视频流畅度三个维度全面衡量,从主播端、观众端、源视频(相当于游戏画面)多个维度进行评价,从而可根据帧间隔、帧密度、视频流畅度的数据结果而确定在主播端、观众端、源视频是否出现问题,为后续改进主播端、观众端提供数据追踪基础;另外,本发明提供的计算机可读存储介质实现自动化的测试方案,测试人员通过可视化的建立测试任务,包括多种不同场景下的测试任务,然后自动让主播端、观众端执行测试过程,从而计算出视频流畅度、帧间隔、帧密度等数据结果,并将测试结果以可视化的图表直观展示,避免现有测试过程在测试不同码率、不同编码方式的视频等情况时需要不断的重复开播、录制大量视频消耗的时间和人力成本的问题。
本发明实施例提供的计算机可读存储介质可以实现上述提供的方法实施例,具体功能实现请参见方法实施例中的说明,在此不再赘述。
此外,在又一种实施例中,本发明还提供一种终端,如图3所示,所述终端可以包括一个或者一个以上的处理器301,还包括存储器302、WiFi(wireless fidelity,无线保真)电路303、RF(Radio Frequency,射频)电路304、音频电路305、传感器306、输出设备307、输入设备304、电源309,处理器301是终端的控制中心,利用各种接口和线路连接以上各部分。本领域技术人员可以理解,图3中示出的终端结构并不构成对终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
WiFi电路303可为用户提供无线局域网或互联网访问;其可包括天线、WiFi模块等。RF电路304可收发信息,或在通话过程中信号的接收和发送;其可包括天线、至少一个放大器、调谐器、一个或多个振荡器、耦合器、双工器等。音频电路305可将接收到的音频数据转换成电信号,传输到扬声器,也可将传声器收集的声音信号转换为音频数据,发给处理器301处理;其可设置扬声器、传声器、耳机接口等。传感器306可用于感应外界信号,并发给处理器301处理;其可包括运动传感器、光传感器等。输出设备307可用于显示各种信号;其可为采用LCD(Liquid Crystal Display,液晶显示器)、OLED(Organic Light-EmittingDiode,有机发光二极管)等形式来配置显示面板。输入设备304可用于输入数字和字符等信息;其可为物理按键、触控面板等。电源309可为终端各部分供电,通过电源管理系统与处理器309逻辑连接;其可包括一个或一个以上的直流或交流电源、充电系统、电源状态指示器等组件。存储器302可用于存储软件程序以及模块;其可为计算机可读存储介质,具体的为硬盘、闪存等。处理器是终端的控制中心,通过运行或执行存储在存储器302内的软件程序和/或模块,以及调用存储在存储器302的数据,执行终端各种功能、处理终端数据。
作为一个实施例,终端包括:一个或多个处理器301,存储器302,一个或多个应用程序,其中所述一个或多个应用程序被存储在存储器302中并被配置为由所述一个或多个处理器301执行,所述一个或多个程序配置用于执行以上实施例所述的视频流畅度测试方法。
本发明实施例提供的一种终端,可实现通过测试任务及配置指令,通知主播端和观众端执行视频流畅度测试,然后获取去除重复帧后的源视频的总帧数及去除重复帧后的录制视频的总帧数,再于此确定视频流畅度,解决了对于采集源视频进行直播,尤其是游戏直播时涉及到主播端的采集和观众端的渲染,简单的使用FPS不能很好地说明视频流畅性的问题;此外,本发明提供的终端针对直播场景,尤其是针对游戏直播场景,将视频的流畅性通过帧间隔、帧密度、视频流畅度三个维度全面衡量,从主播端、观众端、源视频(相当于游戏画面)多个维度进行评价,从而可根据帧间隔、帧密度、视频流畅度的数据结果而确定在主播端、观众端、源视频是否出现问题,为后续改进主播端、观众端提供数据追踪基础;另外,本发明提供的终端实现自动化的测试方案,测试人员通过可视化的建立测试任务,包括多种不同场景下的测试任务,然后自动让主播端、观众端执行测试过程,从而计算出视频流畅度、帧间隔、帧密度等数据结果,并将测试结果以可视化的图表直观展示,避免现有测试过程在测试不同码率、不同编码方式的视频等情况时需要不断的重复开播、录制大量视频消耗的时间和人力成本的问题。
本发明实施例提供的终端可以实现上述提供的方法实施例,具体功能实现请参见方法实施例中的说明,在此不再赘述。
以上所述仅是本发明的部分实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种视频流畅度测试方法,其特征在于,包括:
响应于测试任务及配置指令,通知主播端及观众端,以使主播端使用源视频开播,以使观众端进入主播端开播的直播间并录制直播视频后生成录制视频;
获取主播端发送的去除重复帧后的源视频的总帧数;获取观众端发送的去除重复帧后的录制视频的总帧数;
根据所述去除重复帧后的源视频的总帧数及所述去除重复帧后的录制视频的总帧数确定视频流畅度。
2.根据权利要求1所述的方法,其特征在于,所述获取观众端发送的去除重复帧后的录制视频的总帧数之后,还包括:
获取观众端发送的录制视频中每组重复帧的数量,将所述录制视频中每组重复帧的数量确定为录制视频的帧密度;
获取主播端的采集帧率与观众端的录制帧率,根据主播端的采集帧率与观众端的录制帧率确定基准帧密度;
当录制视频的帧密度与基准帧密度相同时,判定观众端在进入直播间观看直播视频期间渲染直播视频的时间均匀。
3.根据权利要求1所述的方法,其特征在于,所述响应于测试任务及配置指令,通知主播端及观众端,以使主播端使用源视频开播,以使观众端进入主播端开播的直播间并录制直播视频后生成录制视频之后,还包括:
获取录制视频中的第一测试帧,在源视频中查找相应的第一匹配帧;
获取录制视频中的第二测试帧,在源视频中查找相应的第二匹配帧;
根据第一匹配帧和第二匹配帧的时间确定主播端采集源视频的帧间隔;
获取源视频的播放帧率与主播端的采集帧率,根据源视频的播放帧率与主播端的采集帧率确定基准帧间隔;
当主播端采集源视频的帧间隔与基准帧间隔相同时,判定主播端在采集源视频期间采集时间均匀。
4.根据权利要求1所述的方法,其特征在于,所述根据所述去除重复帧后的源视频的总帧数及录制视频的总帧数确定视频流畅度,包括:
根据去除重复帧后的源视频的总帧数及源视频时长确定去除重复帧后的源视频的每秒帧数;
根据去除重复帧后的录制视频的总帧数及录制视频时长确定去除重复帧后的录制视频的每秒帧数;
去除重复帧后的录制视频的每秒帧数/去除重复帧后的源视频的每秒帧数为视频流畅度。
5.根据权利要求1所述的方法,其特征在于,所述响应于测试任务及配置指令之前,还包括:
新建测试任务,所述测试任务包括不同场景下的组合测试任务,所述场景包括不同码率、不同编码方式下的场景;
将所述测试任务存储到数据库中。
6.根据权利要求1所述的方法,其特征在于,所述根据所述去除重复帧后的源视频的总帧数及录制视频的总帧数确定视频流畅度之后,还包括:
将所述视频流畅度的数据结果以可视化的图表展示;
向主播端发送停止直播指令以使主播端停止使用源视频开播;
向观众端发送停止录制指令以使观众端退出所述直播间。
7.一种视频流畅度测试方法,其特征在于,包括:
测试端根据用户配置的测试任务及配置指令,测试端通知主播端及观众端;
观众端通过测试端的数据库查询测试任务后向主播端发送开播通知;
主播端在接收到所述开播通知后使用源视频开播,并向观众端发送开播完成通知;
观众端收到所述开播完成通知后,进入主播端开播的直播间观看直播视频,并启动录制工具录制时长为源视频时长整数倍的录制视频;
主播端通过结构相似度计算源视频中的重复帧并将去除重复帧后的源视频的总帧数发送给测试端;
观众端通过结构相似度计算录制视频中的重复帧并将去除重复帧后的录制视频的总帧数发送给测试端;
测试端根据所述去除重复帧后的源视频的总帧数及所述去除重复帧后的录制视频的总帧数确定视频流畅度。
8.根据权利要求7所述的方法,其特征在于,所述主播端通过结构相似度计算源视频中的重复帧并将去除重复帧后的源视频的总帧数发送给测试端,包括:
主播端计算源视频中前后帧的结构相似度,当结构相似度大于预设值时,确定该前后帧为一组重复帧;保留源视频每组重复帧中的任一帧,将每组重复帧的其它帧从源视频中去除;将去除重复帧后的源视频的总帧数发送给测试端;
所述观众端通过结构相似度计算录制视频中的重复帧并将去除重复帧后的录制视频的总帧数发送给测试端,包括:
观众端计算录制视频中前后帧的结构相似度,当结构相似度大于预设值时,确定该前后帧为一组重复帧;保留录制视频每组重复帧中的任一帧,将每组重复帧的其它帧从录制视频中去除;将去除重复帧后的录制视频的总帧数发送给测试端。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,该程序被处理器执行时实现权利要求1至6任一项所述的视频流畅度测试方法。
10.一种终端,其特征在于,包括:一个或多个处理器;存储器;一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个应用程序配置用于执行根据权利要求1~6任一项所述的视频流畅度测试方法。
CN201711479300.2A 2017-12-29 2017-12-29 视频流畅度测试方法、计算机存储介质及终端 Active CN108174191B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711479300.2A CN108174191B (zh) 2017-12-29 2017-12-29 视频流畅度测试方法、计算机存储介质及终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711479300.2A CN108174191B (zh) 2017-12-29 2017-12-29 视频流畅度测试方法、计算机存储介质及终端

Publications (2)

Publication Number Publication Date
CN108174191A CN108174191A (zh) 2018-06-15
CN108174191B true CN108174191B (zh) 2019-10-11

Family

ID=62516409

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711479300.2A Active CN108174191B (zh) 2017-12-29 2017-12-29 视频流畅度测试方法、计算机存储介质及终端

Country Status (1)

Country Link
CN (1) CN108174191B (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109063694B (zh) * 2018-09-12 2021-07-02 北京科技大学 一种视频目标检测识别方法
CN110971916B (zh) * 2018-09-28 2022-02-08 武汉斗鱼网络科技有限公司 一种直播流畅度监控方法及系统
CN111526377B (zh) * 2019-02-01 2022-07-05 广州虎牙信息科技有限公司 拉流方法及装置
CN110475156B (zh) * 2019-09-10 2022-05-03 广州虎牙科技有限公司 一种视频延迟值的计算方法及装置
CN111147884B (zh) * 2020-01-02 2021-12-17 广州虎牙科技有限公司 数据处理方法、装置、系统、用户端及存储介质
CN111726608A (zh) * 2020-06-28 2020-09-29 北京百度网讯科技有限公司 一种视频的卡顿测试方法、装置、电子设备及存储介质
CN111813689B (zh) * 2020-07-22 2021-08-31 腾讯科技(深圳)有限公司 游戏测试方法、设备和介质
CN112015644A (zh) * 2020-08-25 2020-12-01 百度在线网络技术(北京)有限公司 一种屏幕流畅度确定方法、装置、设备和介质
CN112073713B (zh) * 2020-09-07 2023-04-25 三六零科技集团有限公司 视频漏录测试方法、装置、设备及存储介质
CN112672146B (zh) * 2021-03-16 2021-07-16 统信软件技术有限公司 一种视频播放器播放视频时的帧率测试方法及计算设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1859584A (zh) * 2005-11-14 2006-11-08 华为技术有限公司 一种媒体播放终端设备的视频播放质量测试方法
CN102740111A (zh) * 2012-06-15 2012-10-17 福建升腾资讯有限公司 远程桌面下基于帧号水印的视频流畅度测试方法和装置
CN104079950A (zh) * 2014-07-04 2014-10-01 福建天晴数码有限公司 视频输出处理、视频接收处理的方法、装置和系统
CN105763919A (zh) * 2016-04-14 2016-07-13 福州瑞芯微电子股份有限公司 显示与视频同步的方法及装置
CN106060663A (zh) * 2016-06-24 2016-10-26 武汉斗鱼网络科技有限公司 在视频直播过程中监控视频流畅度的方法及系统
CN106686371A (zh) * 2015-11-11 2017-05-17 广州市动景计算机科技有限公司 一种帧率测试方法、装置、设备及系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200709031A (en) * 2005-08-19 2007-03-01 Lite On It Corp Playing method for digital videos, a method for reading data and a method for smoothly playing pictures

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1859584A (zh) * 2005-11-14 2006-11-08 华为技术有限公司 一种媒体播放终端设备的视频播放质量测试方法
CN102740111A (zh) * 2012-06-15 2012-10-17 福建升腾资讯有限公司 远程桌面下基于帧号水印的视频流畅度测试方法和装置
CN104079950A (zh) * 2014-07-04 2014-10-01 福建天晴数码有限公司 视频输出处理、视频接收处理的方法、装置和系统
CN106686371A (zh) * 2015-11-11 2017-05-17 广州市动景计算机科技有限公司 一种帧率测试方法、装置、设备及系统
CN105763919A (zh) * 2016-04-14 2016-07-13 福州瑞芯微电子股份有限公司 显示与视频同步的方法及装置
CN106060663A (zh) * 2016-06-24 2016-10-26 武汉斗鱼网络科技有限公司 在视频直播过程中监控视频流畅度的方法及系统

Also Published As

Publication number Publication date
CN108174191A (zh) 2018-06-15

Similar Documents

Publication Publication Date Title
CN108174191B (zh) 视频流畅度测试方法、计算机存储介质及终端
CN105704504B (zh) 视频直播中插入推送信息的方法、装置、设备及存储介质
CN108111909A (zh) 视频图像处理方法及计算机存储介质、终端
CN104639951B (zh) 视频码流的抽帧处理方法及装置
CN108471513A (zh) 视频融合方法、装置及服务器
CN107920274A (zh) 一种视频处理方法、客户端及服务器
CN105657558B (zh) 一种信息提供方法、展示方法、装置及智能电视
WO2016065972A1 (zh) 产生视频帧集合的方法、设备及服务器
CN107770624A (zh) 一种直播过程中多媒体文件的播放方法、装置及存储介质
CN104918136A (zh) 视频定位方法和装置
CN103731737B (zh) 一种视频信息更新方法及电子设备
CN108632666A (zh) 一种视频检测方法及视频检测设备
CN105872802A (zh) 视频播放方法和装置
CN106791903B (zh) 直播处理系统、设备、装置及方法
CN110582016A (zh) 视频信息展示方法、装置、服务器及存储介质
CN108174246A (zh) 一种投放视频广告的方法及装置
CN106375853A (zh) 电子节目菜单的检测方法及装置
CN106060609B (zh) 获取图片的方法及装置
CN104410874A (zh) 视频粘度信息的检测方法、装置和系统
CN113949894B (zh) 直播相关时长记录方法及装置
CN111147884B (zh) 数据处理方法、装置、系统、用户端及存储介质
CN108810615A (zh) 确定音视频中插播时段的方法和装置
CN114071127A (zh) 直播视频延迟的测试方法、装置、存储介质及电子设备
CN115495303A (zh) 帧率处理方法、装置、存储介质以及终端
CN110035056A (zh) 一种播放设备检测方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant