CN108513149A - 一种直播延迟测试方法及其装置 - Google Patents

一种直播延迟测试方法及其装置 Download PDF

Info

Publication number
CN108513149A
CN108513149A CN201710114279.XA CN201710114279A CN108513149A CN 108513149 A CN108513149 A CN 108513149A CN 201710114279 A CN201710114279 A CN 201710114279A CN 108513149 A CN108513149 A CN 108513149A
Authority
CN
China
Prior art keywords
time
sectional drawing
delay
live streaming
current
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710114279.XA
Other languages
English (en)
Other versions
CN108513149B (zh
Inventor
熊泽法
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xintang Sichuang Educational Technology Co Ltd
Original Assignee
Beijing Xintang Sichuang Educational Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xintang Sichuang Educational Technology Co Ltd filed Critical Beijing Xintang Sichuang Educational Technology Co Ltd
Priority to CN201710114279.XA priority Critical patent/CN108513149B/zh
Publication of CN108513149A publication Critical patent/CN108513149A/zh
Application granted granted Critical
Publication of CN108513149B publication Critical patent/CN108513149B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44204—Monitoring of content usage, e.g. the number of times a movie has been viewed, copied or the amount which has been watched
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/2625—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for delaying content or additional data distribution, e.g. because of an extended sport event
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4667—Processing of monitored end-user data, e.g. trend analysis based on the log file of viewer selections

Abstract

本申请实施例提供一种直播延迟测试方法及其装置，所述方法，包括：对获得延迟测试指令的直播拉流端所展示的当前直播界面进行截图；接收直播推流端根据所述直播拉流端的反馈信息所发送的当前日志数据；根据所述日志数据的分析结果以及对所述当前直播界面的截图识别结果，获得视频区域的延迟时间。本申请实施例无需第三方公司SDK提供相应的接口，即可准确评估各直播方案的延迟。

Description

一种直播延迟测试方法及其装置
技术领域
本申请属于电子教学技术领域，具体涉及一种直播延迟测试方法及其装置。
背景技术
随着计算机和互联网技术的发展，基础网络和各项关键技术的成熟，直播在近年在各垂直领域得到飞速的发展。市面上也出现了许多以专门提供直播技术的第三方公司，例如声网，Zego，腾讯云视频等。而在使用此类的第三方技术方案时，如何去评估各直播方案的延迟变得非常重要。
目前行业内部针对此类第三方直播技术的评估普遍采用以下方案：
方案一、依赖各第三方公司SDK提供的接口的返回信息来评估直播方案的延迟，此方案需要第三方SDK必须提供相应的接口。但很多第三方公司SDK基本不提供相应的接口，且即使第三方公司SDK提供相应的接口也无法验证其所提供接口的准确性
方案二、手动秒表，即采用人工的方式来评估直播方案的延迟。在直播推流端放置秒表，在直播拉流端手动截屏来对比差异。此方案虽然不依赖第三方SDK特性，但由于需要大量人工的参与，依然无法满足评估各直播方案延迟的准确性需要。
因此，如何准确评估各直播方案的延迟，成为现有技术中亟需解决的技术问题。
发明内容
本申请实施例解决的技术问题之一在于提供一种直播延迟测试方法及其装置，其无需第三方公司SDK提供相应的接口，即可准确评估各直播方案的延迟。
本申请实施例提供一种直播延迟测试方法，包括：
对获得延迟测试指令的直播拉流端所展示的当前直播界面进行截图；
接收直播推流端根据所述直播拉流端的反馈信息所发送的当前日志数据；
根据所述日志数据的分析结果以及对所述当前直播界面的截图识别结果，获得视频区域的延迟时间。
在本申请实施例中，所述方法还包括：
接收并更新所述视频区域的各延迟时间。
在本申请实施例中，所述方法还包括：
图形化展示所述各延迟时间的延迟情况。
在本申请实施例中，所述对获得延迟测试指令的直播拉流端所展示的当前直播界面进行截图还包括：
记录截图所用时间以及截图上传所用时间。
在本申请实施例中，所述反馈信息为延迟测试完成的反馈信息。
在本申请实施例中，所述当前日志数据包括当前的系统时间。
在本申请实施例中，所述分析所述日志数据以及对所述当前直播界面的截图进行识别，获得视频区域的延迟时间包括：
对所述当前直播界面的截图进行识别，分析出视频区域的时间数据；
根据所述截图所用时间以及截图上传所用时间、所述时间数据、所述当前的系统时间计算获得所述视频区域的延迟时间。
在本申请实施例中，所述图形化展示所述各延迟时间的延迟情况具体为：
分设备或者分网络类型图形化展示所述各延迟时间的延迟情况。
对应上述方法，本申请还提供一种直播延迟测试装置，包括：
截图模块，用于对获得延迟测试指令的直播拉流端所展示的当前直播界面进行截图；
报告模块，用于接收直播推流端根据所述直播拉流端的反馈信息所发送的当前日志数据；
分析模块，用于根据所述日志数据的分析结果以及对所述当前直播界面的截图识别结果，获得视频区域的延迟时间。
在本申请实施例中，所述报告模块还用于接收并更新所述视频区域的各延迟时间。
在本申请实施例中，所述装置还包括：
显示模块，用于图形化展示所述各延迟时间的延迟情况。
在本申请实施例中，所述截图模块还用于记录截图所用时间以及截图上传所用时间。
在本申请实施例中，所述反馈信息为延迟测试完成的反馈信息。
在本申请实施例中，所述当前日志数据包括当前的系统时间。
在本申请实施例中，所述分析模块包括：
识别单元，用于对所述当前直播界面的截图进行识别，分析出视频区域的时间数据；
计算单元，用于根据所述截图所用时间以及截图上传所用时间、所述时间数据、所述当前的系统时间计算获得所述视频区域的延迟时间。
在本申请实施例中，所述显示模块具体用于分设备或者分网络类型图形化展示所述各延迟时间的延迟情况。
本申请实施例对获得延迟测试指令的直播拉流端所展示的当前直播界面进行截图，并接收直播推流端根据所述直播拉流端的反馈信息所发送的当前日志数据。从而，根据所述日志数据的分析结果以及对所述当前直播界面的截图识别结果，获得视频区域的延迟时间。因此，本申请利用直播推流端和直播拉流端之间的通信，无需第三方公司SDK提供相应的接口，即可准确评估各直播方案的延迟。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请中记载的一些实施例，对于本领域普通技术人员来讲，还可以根据这些附图获得其他的附图。
图1是本申请提供的一种直播延迟测试方法一实施例流程图；
图2a是本申请提供的一种直播延迟测试方法中当前客户端的系统时间示意图；
图2b是本申请提供的一种直播延迟测试方法中秒表界面示意图；
图3是本申请提供的一种直播延迟测试方法中步骤S3一实施例流程图；
图4是本申请提供的一种直播延迟测试方法另一实施例流程图；
图5是本申请提供的一种直播延迟测试方法再一实施例流程图；
图6是本申请提供的一种直播延迟测试装置一实施例结构图；
图7是本申请提供的一种直播延迟测试装置另一实施例结构图；
图8是本申请提供的一种直播延迟测试装置再一实施例结构图；
图9是本申请提供的直播延迟测试方法的电子设备的硬件结构示意图；
图10是本申请提供的一种直播延迟测试方法一应用场景结构示意图。
具体实施方式
本申请实施例对获得延迟测试指令的直播拉流端所展示的当前直播界面进行截图，并接收直播推流端根据所述直播拉流端的反馈信息所发送的当前日志数据。从而，根据所述日志数据的分析结果以及对所述当前直播界面的截图识别结果，获得视频区域的延迟时间。因此，本申请利用直播推流端和直播拉流端之间的通信，无需第三方公司SDK提供相应的接口，即可准确评估各直播方案的延迟。
尽管本申请能够具有许多不同形式的实施例，但在附图中显示并且将在本文详细描述的特定实施例，应该理解，这种实施例的公开应该被视为原理的示例，而非意图把本申请限制于显示和描述的特定实施例。在以下的描述中，相同的标号用于描述附图的几个示图中的相同、相似或对应的部分。
如本文所使用，术语“一个”或“一种”被定义为一个(种)或超过一个(种)。如本文所使用，术语“多个”被定义为两个或超过两个。如本文所使用，术语“其他”被定义为至少再一个或更多个。如本文所使用，术语“包含”和/或“具有”被定义为包括(即，开放式语言)。如本文所使用，术语“耦合”被定义为连接，但未必是直接连接，并且未必是以机械方式连接。如本文所使用，术语“程序”或“计算机程序”或类似术语被定义为设计用于在计算机系统上执行的指令序列。“程序”或“计算机程序”可包括子程序、函数、过程、对象方法、对象实现、可执行应用、小应用程序、小服务程序、源代码、目标代码、共享库/动态加载库和/或设计用于在计算机系统上执行的其它指令序列。
在整个本文件中对“一个实施例”、“某些实施例”、“实施例”或类似术语的提及表示结合实施例描述的特定特征、结构或特性被包括在本发明的至少一个实施例中。因此，在整个本说明书的各种地方的这种词语的出现不必全部表示相同的实施例。另外，所述特定特征、结构或特性可非限制性地在一个或多个实施例中以任何合适的方式组合。
如本文所使用，术语“或者”应该被解释为是包括性的或者表示任何一种或任何组合。因此，“A、B或者C”表示“下面的任何一种：A；B；C；A和B；A和C；B和C；A，B和C”。仅当元件、功能、步骤或动作的组合以某种方式固有地相互排斥时，将会发生这种定义的例外。
为了使本领域的人员更好地理解本申请中的技术方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员所获得的所有其他实施例，都应当属于本申请保护的范围。
下面结合本申请附图进一步说明本申请具体实现。
参见图1，本申请一实施例提供一种直播延迟测试方法，包括：
S1、对获得延迟测试指令的直播拉流端所展示的当前直播界面进行截图。
在本申请的具体实现中，所述直播推流端打开并展示秒表界面，推流所述秒表界面，界面中间展示当前客户端的系统时间，参见图2a。根据摄像头采集频率及移动端重绘频率以及历史经验，时间精度通常设置为100ms。所述直播拉流端的视频区域应该展现图2b所示秒表界面。
具体地，所述直播推流端每隔固定间隔N秒，将秒表展示的时间ST传递通过延迟测试信令广播给所有的直播拉流端。
所述直播拉流端在接收到延迟测试指令后，对所展示的当前直播界面进行截图。
所述步骤S1还包括：
记录截图所用时间SS_T以及截图上传所用时间SS_UPLOAD_T。
本申请将所述当前直播界面截图、记录的截图所用时间SS_T以及截图上传所用时间SS_UPLOAD_T，上传至截图服务器(SnapShotServer)。
所述直播拉流端在上传完成所述当前直播界面截图、记录的截图所用时间SS_T以及截图上传所用时间SS_UPLOAD_T后，向直播推流端发送反馈信息。
S2、接收直播推流端根据所述直播拉流端的反馈信息所发送的当前日志数据。
具体地，所述反馈信息为延迟测试完成的反馈信息。即，所述直播拉流端在上传完成所述当前直播界面截图、记录的截图所用时间SS_T以及截图上传所用时间SS_UPLOAD_T后，向直播推流端发送延迟测试完成的反馈信息。
所述直播推流端在收到所述延迟测试完成的反馈信息后，再次从课件中获取包括系统时间ET的当前日志数据。
所述直播推流端将包括系统时间ET的当前日志数据上传至报告服务器(ReportServer)。
所述报告服务器(ReportServer)接收所述直播推流端传递过来的所述包括系统时间ET的当前日志数据，并入库保存。所述报告服务器(ReportServer)将所述包括系统时间ET的当前日志数据转发至分析服务器(AnalyzeServer)。
S3、根据所述日志数据的分析结果以及对所述当前直播界面的截图识别结果，获得视频区域的延迟时间。
所述分析服务器(AnalyzeServer)分析自所述报告服务器(ReportServer)导入的日志数据。
所述分析服务器(AnalyzeServer)从所述截图服务器(SnapShotServer)中下载对应的当前直播界面截图获得视频区域的延迟时间。
具体地，参见图3，所述步骤S3包括：
S31、对所述当前直播界面的截图进行识别，分析出视频区域的时间数据。
所述分析服务器(AnalyzeServer)从所述截图服务器(SnapShotServer)获得所述当前直播界面截图、记录的截图所用时间SS_T以及截图上传所用时间SS_UPLOAD_T，上传至截图服务器(SnapShotServer)。
所述分析服务器(AnalyzeServer)从所述报告服务器(ReportServer)获得所述包括系统时间ET的当前日志数据。
所述分析服务器(AnalyzeServer)利用OCR技术，识别出当前直播界面的截图中的秒表显示的时间，从而分析出视频区域的时间数据STREAM_T。
具体地，所述OCR技术可采用Googletesseract。
S32、根据所述截图所用时间以及截图上传所用时间、所述时间数据、所述当前的系统时间计算获得所述视频区域的延迟时间。
具体地，根据公式(1)计算获得所述视频区域的延迟时间LATENCY_TIME。
LATENCY_TIME＝(ST-STREAM_T)–(ET-ST-SS_T-SS_UPLOAD_T)/2 (1)
其中，(ET-ST-SS_T-SS_UPLOAD_T)/2为信道的单向延迟。
在本申请另一具体实现中，参见图4，所述方法还包括：
S4、接收并更新所述视频区域的各延迟时间。
具体地，所述分析服务器(AnalyzeServer)会将分析后的所述视频区域的延迟时间LATENCY_TIME，通过API通知给所述报告服务器(ReportServer)进行更新。
在本申请再一具体实现中，参见图5，所述方法还包括：
S5、图形化展示所述各延迟时间的延迟情况。
显示服务器(DisplayServer)针对所述报告服务器(ReportServer)中的延迟时间LATENCY_TIME数据，图形化展现出直播的延迟情况。
所述图形化展示所述各延迟时间的延迟情况具体为：
分设备或者分网络类型图形化展示所述各延迟时间的延迟情况。
本申请能更直观的展示直播的延迟情况，比如单个人的延迟情况，不同网络条件下的延迟情况等，比如均值，方差的延迟情况等。
所述截图服务器、报告服务器、分析服务器以及显示服务器可以为独立的分布式服务器或者集中服务器，本申请并未进行限定。
对应上述方法，参见图6，本申请一实施例提供一种直播延迟测试装置，包括：
截图模块61，用于对获得延迟测试指令的直播拉流端所展示的当前直播界面进行截图。
报告模块62，用于接收直播推流端根据所述直播拉流端的反馈信息所发送的当前日志数据。
分析模块63，用于根据所述日志数据的分析结果以及对所述当前直播界面的截图识别结果，获得视频区域的延迟时间。
在本申请的具体实现中，所述直播推流端打开并展示秒表界面，推流所述秒表界面，界面中间展示当前客户端的系统时间，参见图2a。根据摄像头采集频率及移动端重绘频率以及历史经验，时间精度通常设置为100ms。所述直播拉流端的视频区域应该展现图2b所示秒表界面。
具体地，所述直播推流端每隔固定间隔N秒，将秒表展示的时间ST传递通过延迟测试信令广播给所有的直播拉流端。
所述直播拉流端在接收到延迟测试指令后，对所展示的当前直播界面进行截图。
在本申请的具体实现中，所述截图模块61可以为截图服务器(SnapShotServer)，所述报告模块62可以为报告服务器(ReportServer)，所述分析模块63可以为分析服务器(AnalyzeServer)。
所述截图模块61还包括：
记录截图所用时间SS_T以及截图上传所用时间SS_UPLOAD_T。
本申请将所述当前直播界面截图、记录的截图所用时间SS_T以及截图上传所用时间SS_UPLOAD_T，上传至截图服务器(SnapShotServer)。
所述直播拉流端在上传完成所述当前直播界面截图、记录的截图所用时间SS_T以及截图上传所用时间SS_UPLOAD_T后，向直播推流端发送反馈信息。
具体地，所述反馈信息为延迟测试完成的反馈信息。即，所述直播拉流端在上传完成所述当前直播界面截图、记录的截图所用时间SS_T以及截图上传所用时间SS_UPLOAD_T后，向直播推流端发送延迟测试完成的反馈信息。
所述直播推流端在收到所述延迟测试完成的反馈信息后，再次从课件中获取包括系统时间ET的当前日志数据。
所述直播推流端将包括系统时间ET的当前日志数据上传至报告服务器(ReportServer)。
所述报告服务器(ReportServer)接收所述直播推流端传递过来的所述包括系统时间ET的当前日志数据，并入库保存。所述报告服务器(ReportServer)将所述包括系统时间ET的当前日志数据转发至分析服务器(AnalyzeServer)。
所述分析服务器(AnalyzeServer)分析自所述报告服务器(ReportServer)导入的日志数据。
所述分析服务器(AnalyzeServer)从所述截图服务器(SnapShotServer)中下载对应的当前直播界面截图获得视频区域的延迟时间。
具体地，参见图7，所述分析模块63包括：
识别单元631，用于对所述当前直播界面的截图进行识别，分析出视频区域的时间数据。
计算单元632，用于根据所述截图所用时间以及截图上传所用时间、所述时间数据、所述当前的系统时间计算获得所述视频区域的延迟时间。所述分析服务器(AnalyzeServer)从所述截图服务器(SnapShotServer)获得所述当前直播界面截图、记录的截图所用时间SS_T以及截图上传所用时间SS_UPLOAD_T，上传至截图服务器(SnapShotServer)。
所述分析服务器(AnalyzeServer)从所述报告服务器(ReportServer)获得所述包括系统时间ET的当前日志数据。
所述分析服务器(AnalyzeServer)利用OCR技术，识别出当前直播界面的截图中的秒表显示的时间，从而分析出视频区域的时间数据STREAM_T。
具体地，所述OCR技术可采用Googletesseract。
具体地，根据公式(1)计算获得所述视频区域的延迟时间LATENCY_TIME。
LATENCY_TIME＝(ST-STREAM_T)–(ET-ST-SS_T-SS_UPLOAD_T)/2 (1)
其中，(ET-ST-SS_T-SS_UPLOAD_T)/2为信道的单向延迟。
在本申请另一具体实现中，所述报告模块62还用于接收并更新所述视频区域的各延迟时间。
具体地，所述分析服务器(AnalyzeServer)会将分析后的所述视频区域的延迟时间LATENCY_TIME，通过API通知给所述报告服务器(ReportServer)进行更新。
在本申请再一具体实现中，参见图8，所述装置还包括：
显示模块64，用于图形化展示所述各延迟时间的延迟情况。
在本申请的具体实现中，所述显示模块64可以为显示服务器(DisplayServer)。
所述显示服务器(DisplayServer)针对所述报告服务器(ReportServer)中的延迟时间LATENCY_TIME数据，图形化展现出直播的延迟情况。
所述显示模块64具体用于分设备或者分网络类型图形化展示所述各延迟时间的延迟情况。
本申请能更直观的展示直播的延迟情况，比如单个人的延迟情况，不同网络条件下的延迟情况等，比如均值，方差的延迟情况等。
图9是本申请直播延迟测试方法的电子设备的硬件结构示意图。根据图9所示，该设备包括：
一个或多个处理器910以及存储器920，图9中以一个处理器910为例。
直播延迟测试方法的设备还可以包括：输入装置930和输出装置940。
处理器910、存储器920、输入装置930和输出装置940可以通过总线或者其他方式连接，图9中以通过总线连接为例。
存储器920作为一种非易失性计算机可读存储介质，可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块，如本申请实施例中的直播延迟测试方法对应的程序指令/模块(例如，附图6所示的截图模块61、报告模块62、分析模块63)。处理器910通过运行存储在存储器920中的非易失性软件程序、指令以及模块，从而执行服务器的各种功能应用以及数据处理，即实现上述方法实施例直播延迟测试方法。
存储器920可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储根据直播延迟测试装置的使用所创建的数据等。此外，存储器920可以包括高速随机存取存储器920，还可以包括非易失性存储器920，例如至少一个磁盘存储器920件、闪存器件、或其他非易失性固态存储器920件。在一些实施例中，存储器920可选包括相对于处理器910远程设置的存储器920，这些远程存储器920可以通过网络连接至音效模式选择装置。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置930可接收输入的数字或字符信息，以及产生与直播延迟测试装置的用户设置以及功能控制有关的键信号输入。输出装置940可包括扬声器等设备。
所述一个或者多个模块存储在所述存储器920中，当被所述一个或者多个处理器910执行时，执行上述任意方法实施例中的直播延迟测试方法。
上述产品可执行本申请实施例所提供的方法，具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节，可参见本申请实施例所提供的方法。
本申请实施例的电子设备以多种形式存在，包括但不限于:
(1)移动通信设备:这类设备的特点是具备移动通信功能，并且以提供话音、数据通信为主要目标。这类终端包括:智能手机(例如iPhone)、多媒体手机、功能性手机，以及低端手机等。
(2)超移动个人计算机设备:这类设备属于个人计算机的范畴，有计算和处理功能，一般也具备移动上网特性。这类终端包括:PDA、MID和UMPC设备等，例如iPad。
(3)便携式娱乐设备:这类设备可以显示和播放多媒体内容。该类设备包括:音频、视频播放器(例如iPod)，掌上游戏机，电子书，以及智能玩具和便携式车载导航设备。
(4)服务器:提供计算服务的设备，服务器的构成包括处理器910、硬盘、内存、系统总线等，服务器和通用的计算机架构类似，但是由于需要提供高可靠的服务，因此在处理能力、稳定性、可靠性、安全性、可扩展性、可管理性等方面要求较高。
(9)其他具有数据交互功能的电子装置。
下面通过一具体应用场景进一步说明本申请实现。
参见图10，本申请直播延迟测试方法，应用于截图服务器(SnapShotServer)、报告服务器(ReportServer)、分析服务器(AnalyzeServer)以及显示服务器(DisplayServer)。
所述直播推流端打开并展示秒表界面，推流所述秒表界面，界面中间展示当前客户端的系统时间，参见图2a。根据摄像头采集频率及移动端重绘频率以及历史经验，时间精度通常设置为100ms。所述直播拉流端的视频区域应该展现图2b所示秒表界面。
具体地，所述直播推流端每隔固定间隔N秒，将秒表展示的时间ST传递通过延迟测试信令广播给所有的直播拉流端。
所述直播拉流端在接收到延迟测试指令后，对所展示的当前直播界面进行截图。
本申请将所述当前直播界面截图、记录的截图所用时间SS_T以及截图上传所用时间SS_UPLOAD_T，上传至截图服务器(SnapShotServer)。
所述直播拉流端在上传完成所述当前直播界面截图、记录的截图所用时间SS_T以及截图上传所用时间SS_UPLOAD_T后，向直播推流端发送反馈信息。
所述反馈信息为延迟测试完成的反馈信息。即，所述直播拉流端在上传完成所述当前直播界面截图、记录的截图所用时间SS_T以及截图上传所用时间SS_UPLOAD_T后，向直播推流端发送延迟测试完成的反馈信息。
所述直播推流端在收到所述延迟测试完成的反馈信息后，再次从课件中获取包括系统时间ET的当前日志数据。
所述直播推流端将包括系统时间ET的当前日志数据上传至报告服务器(ReportServer)。
所述报告服务器(ReportServer)接收所述直播推流端传递过来的所述包括系统时间ET的当前日志数据，并入库保存。所述报告服务器(ReportServer)将所述包括系统时间ET的当前日志数据转发至分析服务器(AnalyzeServer)。
所述分析服务器(AnalyzeServer)分析自所述报告服务器(ReportServer)导入的日志数据。
所述分析服务器(AnalyzeServer)从所述截图服务器(SnapShotServer)中下载对应的当前直播界面截图获得视频区域的延迟时间。
所述分析服务器(AnalyzeServer)从所述截图服务器(SnapShotServer)获得所述当前直播界面截图、记录的截图所用时间SS_T以及截图上传所用时间SS_UPLOAD_T，上传至截图服务器(SnapShotServer)。
所述分析服务器(AnalyzeServer)从所述报告服务器(ReportServer)获得所述包括系统时间ET的当前日志数据。
所述分析服务器(AnalyzeServer)利用OCR技术，识别出当前直播界面的截图中的秒表显示的时间，从而分析出视频区域的时间数据STREAM_T。
具体地，所述OCR技术可采用Googletesseract。
具体地，根据公式(1)计算获得所述视频区域的延迟时间LATENCY_TIME。
LATENCY_TIME＝(ST-STREAM_T)–(ET-ST-SS_T-SS_UPLOAD_T)/2 (1)
其中，(ET-ST-SS_T-SS_UPLOAD_T)/2为信道的单向延迟。
所述分析服务器(AnalyzeServer)会将分析后的所述视频区域的延迟时间LATENCY_TIME，通过API通知给所述报告服务器(ReportServer)进行更新。
所述显示服务器(DisplayServer)针对所述报告服务器(ReportServer)中的延迟时间LATENCY_TIME数据，图形化展现出直播的延迟情况。
所述图形化展示所述各延迟时间的延迟情况具体为：
分设备或者分网络类型图形化展示所述各延迟时间的延迟情况。
本申请能更直观的展示直播的延迟情况，比如单个人的延迟情况，不同网络条件下的延迟情况等，比如均值，方差的延迟情况等。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的模块可以是或者也可以不是物理上分开的，作为模块显示的部件可以是或者也可以不是物理模块，即可以位于一个地方，或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
本领域的技术人员应明白，本申请的实施例可提供为方法、装置(设备)、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照实施例的方法、装置(设备)和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本申请的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (16)

1.一种直播延迟测试方法，其特征在于，包括：
对获得延迟测试指令的直播拉流端所展示的当前直播界面进行截图；
接收直播推流端根据所述直播拉流端的反馈信息所发送的当前日志数据；
根据所述日志数据的分析结果以及对所述当前直播界面的截图识别结果，获得视频区域的延迟时间。
2.如权利要求1所述的方法，其特征在于，所述方法还包括：
接收并更新所述视频区域的各延迟时间。
3.如权利要求2所述的方法，其特征在于，所述方法还包括：
图形化展示所述各延迟时间的延迟情况。
4.如权利要求3所述的方法，其特征在于，所述对获得延迟测试指令的直播拉流端所展示的当前直播界面进行截图还包括：
记录截图所用时间以及截图上传所用时间。
5.如权利要求4所述方法，其特征在于，所述反馈信息为延迟测试完成的反馈信息。
6.如权利要求5所述方法，其特征在于，所述当前日志数据包括当前的系统时间。
7.如权利要求1-6中任一项所述方法，其特征在于，所述分析所述日志数据以及对所述当前直播界面的截图进行识别，获得视频区域的延迟时间包括：
对所述当前直播界面的截图进行识别，分析出视频区域的时间数据；
根据所述截图所用时间以及截图上传所用时间、所述时间数据、所述当前的系统时间计算获得所述视频区域的延迟时间。
8.如权利要求3所述方法，其特征在于，所述图形化展示所述各延迟时间的延迟情况具体为：
分设备或者分网络类型图形化展示所述各延迟时间的延迟情况。
9.一种直播延迟测试装置，其特征在于，包括：
截图模块，用于对获得延迟测试指令的直播拉流端所展示的当前直播界面进行截图；
报告模块，用于接收直播推流端根据所述直播拉流端的反馈信息所发送的当前日志数据；
分析模块，用于根据所述日志数据的分析结果以及对所述当前直播界面的截图识别结果，获得视频区域的延迟时间。
10.如权利要求9所述的装置，其特征在于，所述报告模块还用于接收并更新所述视频区域的各延迟时间。
11.如权利要求10所述的装置，其特征在于，所述装置还包括：
显示模块，用于图形化展示所述各延迟时间的延迟情况。
12.如权利要求11所述的装置，其特征在于，所述截图模块还用于记录截图所用时间以及截图上传所用时间。
13.如权利要求12所述装置，其特征在于，所述反馈信息为延迟测试完成的反馈信息。
14.如权利要求13所述装置，其特征在于，所述当前日志数据包括当前的系统时间。
15.如权利要求9至14中任一项所述装置，其特征在于，所述分析模块包括：
识别单元，用于对所述当前直播界面的截图进行识别，分析出视频区域的时间数据；
计算单元，用于根据所述截图所用时间以及截图上传所用时间、所述时间数据、所述当前的系统时间计算获得所述视频区域的延迟时间。
16.如权利要求11所述装置，其特征在于，所述显示模块具体用于分设备或者分网络类型图形化展示所述各延迟时间的延迟情况。
CN201710114279.XA 2017-02-28 2017-02-28 一种直播延迟测试方法及其装置 Active CN108513149B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710114279.XA CN108513149B (zh) 2017-02-28 2017-02-28 一种直播延迟测试方法及其装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710114279.XA CN108513149B (zh) 2017-02-28 2017-02-28 一种直播延迟测试方法及其装置

Publications (2)

Publication Number Publication Date
CN108513149A true CN108513149A (zh) 2018-09-07
CN108513149B CN108513149B (zh) 2021-04-09

Family

ID=63373535

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710114279.XA Active CN108513149B (zh) 2017-02-28 2017-02-28 一种直播延迟测试方法及其装置

Country Status (1)

Country Link
CN (1) CN108513149B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111010316A (zh) * 2019-12-17 2020-04-14 广州唯品会信息科技有限公司 一种流量回放方法、装置及系统
CN111246277A (zh) * 2020-01-15 2020-06-05 湖南映客互娱网络信息有限公司 一种直播审核分区的方法与系统
CN111787309A (zh) * 2020-07-01 2020-10-16 北京字节跳动网络技术有限公司 一种视频延时的测试方法、装置、系统、设备及存储介质
CN113286139A (zh) * 2020-02-19 2021-08-20 福建天泉教育科技有限公司 一种视屏或实时屏幕共享互动能力的测试方法及其系统
CN114025243A (zh) * 2021-10-27 2022-02-08 广州繁星互娱信息科技有限公司 直播截图获取方法和装置、存储介质及电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140010517A1 (en) * 2012-07-09 2014-01-09 Sensr.Net, Inc. Reduced Latency Video Streaming
CN105491414A (zh) * 2015-11-19 2016-04-13 深圳市时尚德源文化传播有限公司 一种图像同步显示方法及装置
CN105915967A (zh) * 2016-05-09 2016-08-31 乐视控股（北京）有限公司 一种纠正视频延时的方法和系统
CN106302477A (zh) * 2016-08-18 2017-01-04 合网络技术（北京）有限公司 一种视频直播测试方法及系统
CN106385594A (zh) * 2016-09-18 2017-02-08 深圳市青柠互动科技开发有限公司 一种优化视频直播服务的方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140010517A1 (en) * 2012-07-09 2014-01-09 Sensr.Net, Inc. Reduced Latency Video Streaming
CN105491414A (zh) * 2015-11-19 2016-04-13 深圳市时尚德源文化传播有限公司 一种图像同步显示方法及装置
CN105915967A (zh) * 2016-05-09 2016-08-31 乐视控股（北京）有限公司 一种纠正视频延时的方法和系统
CN106302477A (zh) * 2016-08-18 2017-01-04 合网络技术（北京）有限公司 一种视频直播测试方法及系统
CN106385594A (zh) * 2016-09-18 2017-02-08 深圳市青柠互动科技开发有限公司 一种优化视频直播服务的方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
过儿9973: "七牛rtmp延迟测试方案", 《CSDN论坛》 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111010316A (zh) * 2019-12-17 2020-04-14 广州唯品会信息科技有限公司 一种流量回放方法、装置及系统
CN111010316B (zh) * 2019-12-17 2021-08-06 广州唯品会信息科技有限公司 一种流量回放方法、装置及系统
CN111246277A (zh) * 2020-01-15 2020-06-05 湖南映客互娱网络信息有限公司 一种直播审核分区的方法与系统
CN111246277B (zh) * 2020-01-15 2022-02-22 湖南映客互娱网络信息有限公司 一种直播审核分区的方法与系统
CN113286139A (zh) * 2020-02-19 2021-08-20 福建天泉教育科技有限公司 一种视屏或实时屏幕共享互动能力的测试方法及其系统
CN111787309A (zh) * 2020-07-01 2020-10-16 北京字节跳动网络技术有限公司 一种视频延时的测试方法、装置、系统、设备及存储介质
CN114025243A (zh) * 2021-10-27 2022-02-08 广州繁星互娱信息科技有限公司 直播截图获取方法和装置、存储介质及电子设备

Also Published As

Publication number Publication date
CN108513149B (zh) 2021-04-09

Similar Documents

Publication Publication Date Title
CN108513149A (zh) 一种直播延迟测试方法及其装置
CN107451109B (zh) 报表生成方法及系统
US9918174B2 (en) Wireless exchange of data between devices in live events
CN104683386B (zh) 可定制响应的桩服务实现方法及装置
CN110347596A (zh) 一种测试方法、装置、系统、电子设备及介质
CN106126168B (zh) 一种音效处理方法及装置
CN104871528A (zh) 在视频会议系统中使用化身
CN109634605A (zh) 用于web前端的模拟数据生成方法及系统
US10187516B2 (en) Systems, non-transitory computer-readable media and methods for voice quality enhancement
CN104038473A (zh) 用于插播音频广告的方法、装置、设备和系统
CN109658935B (zh) 多通道带噪语音的生成方法及系统
US20210272467A1 (en) Interactive environments using visual computing and immersive reality
WO2019128829A1 (zh) 动作执行方法、装置、存储介质及电子装置
CN109101216A (zh) 音效调整方法、装置、电子设备以及存储介质
CN105468513B (zh) 一种基于移动终端的测试方法、装置及系统
CN104965778A (zh) 游戏测试方法及装置
CN107357728A (zh) 测试软件的方法和电子设备
CN110503982A (zh) 一种语音质量检测的方法以及相关装置
CN103605610A (zh) 一种基于Hadoop 的软件测试系统与方法
CN108491499B (zh) 数据采集方法、数据采集平台、客户端及业务服务器
CN109710535A (zh) 用于语音对话平台的服务校验方法及系统
CN104881228A (zh) 学习时间检测方法、装置和系统
CN110188879B (zh) 运算方法、装置及相关产品
CN108391233A (zh) 一种地理位置分享方法、装置及系统
CN110730109A (zh) 用于生成信息的方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant