CN115225893A - 一种直播流的测试方法、系统及电子设备 - Google Patents
一种直播流的测试方法、系统及电子设备 Download PDFInfo
- Publication number
- CN115225893A CN115225893A CN202210856536.8A CN202210856536A CN115225893A CN 115225893 A CN115225893 A CN 115225893A CN 202210856536 A CN202210856536 A CN 202210856536A CN 115225893 A CN115225893 A CN 115225893A
- Authority
- CN
- China
- Prior art keywords
- network environment
- index value
- video quality
- parameter
- under
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000010998 test method Methods 0.000 title description 5
- 238000012360 testing method Methods 0.000 claims abstract description 55
- 238000000034 method Methods 0.000 claims abstract description 42
- 238000012545 processing Methods 0.000 claims description 22
- 238000004364 calculation method Methods 0.000 claims description 18
- 238000004590 computer program Methods 0.000 claims description 15
- 238000013461 design Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000011161 development Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000013442 quality metrics Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/004—Diagnosis, testing or measuring for television systems or their details for digital television systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
- H04N21/4334—Recording operations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
本申请提供了一种直播流的测试方法、系统及电子设备，在该方法中为系统配置了各种网络环境参数，然后在不同网络环境参数下对直播流进行拉流时，录制一段录制视频流，并且按照采集周期采集直播流中的视频质量参数，然后通过录制视频流以及采集到视频质量参数分别计算出第一视频质量指标值集合以及第二视频指标值集合，最终输出第一视频质量指标值集合以及第二视频质量指标值集合中的各个指标值。因此通过上述的方法可以自动化的完成对直播流的测试，并对测试结果进行分析输出对应的指标值，这样不仅可以提升了直播流在各个网络环境下的测试效率，并且还可以提高测试结果的准确性。
Description
技术领域
本发明涉及直播流测试技术领域，尤其涉及一种直播流的测试方法、系统及电子设备。
背景技术
随着互联网技术的迅猛发展，直播行业也得到了迅速发展。将直播的内容推送到客户端需要经历推流、拉流两个过程，推流是指把采集阶段封包好的内容传输到服务器的过程，即：把直播内容上传服务器；拉流是指服务器已有的直播内容，用指定地址进行拉取的过程，即：服务器反馈到客户端的过程。客户端网络情况不尽相同，不同网络情况影响直播画面的清晰度，直播画面清晰度直接影响着观众的观看体验，直播画面清晰度与直播流质量有关，直播流质量是反映终端用户体验的重要指标，为保证直播流质量，测试人员需要验证在不同网络带宽场景下拉流的延时、码率、分辨率及直播流清晰度等指标是否满足要求。
目前验证在不同网络带宽场景下拉流的延时、码率、分辨率及直播流清晰度等指标是否满足要求主要使用人工测试方法来完成，通过人工估算拉流延时以及视频流清晰度等，此方案在所述指标测试的过程中，需要大量人员参与，测量的结果存在一定的随机性，另外，由于每个人观察事物的差异性存在，通过人工方式测试会导致测试的结果存在一定的偏差，这些偏差会影响所述指标的验证，当网络带宽发生改变并进行重复验证时，测试人员需要进行重复繁琐的操作，既增加了成本，又不便于快速验证在不同网络带宽场景下的所述指标是否满足要求。并且通过人工估算的方式，测量的结果不易于对比分析。
发明内容
本发明申请提供了一种直播流的测试方法及系统，用于检测以及输出不同网络带宽下拉直播流的各项指标值。具体技术方案如下：
第一方面，本申请提供了一种直播流的测试方法，包括：
在各个网络环境参数下对直播流进行拉流时，录制所述直播流在各个网络环境参数下的录制视频流，并按照预设采集周期采集各个网络环境参数下的所述直播流的视频质量参数，得到各个网络环境参数对应视频质量参数集合，其中，所述视频质量参数集合至少包括直播流的分辨率、帧率以及码率；
基于所述直播流以及各个录制视频流，分别得到各个网络环境参数下各自对应的第一视频质量指标值集合；
根据所述各个网络环境参数各自对应的视频质量参数集合，分别计算出各个网络环境参数各自对应的第二视频质量指标值集合，其中，所述第二视频质量指标值集合至少包含直播流的分辨率指标值、帧率指标值以及码率指标值；
输出各个网络环境参数各自对应的第一视频质量指标值集合以及第二视频质量指标值集合中的各个指标值。
基于上述的方法，可以对各个网络环境下的直播流的视频质量参数进行周期性的采集以及录制视频流，基于视频质量参数以及录制视频流得到各个网络环境参数对应的视频质量指标值，从而实现对直播流的自动化测试，进而避免了由于人工测试导致的测试效率低以及测试准确性也较低的问题，提升了直播流的测试效率以及测试结果的准确性。
在一种可能的设计中，在各个网络环境参数下对直播流进行拉流时，所述方法还包括：
获取所述直播流中的时间戳；
确定所述直播流的时间戳以及各个网络环境参数下接收所述直播流的当前时间，根据所述时间戳以及所述当前时间，得到各个网络环境参数下所述直播流的时延指标值；
输出各个网络环境参数下所述直播流的时延指标值。
通过上述的方式可以准确的获取在不同网络环境参数下直播流的时延指标值。
在一种可能的设计中，录制所述直播流在各个网络环境参数下的录制视频流，具体为：
在各个网络环境参数下播放直播流时，按照预设循环次数，对各个网络环境参数下播放的直播流进行循环录制，得到各个网络环境参数各自对应的n个录制视频流，其中，n为大于等于2的整数；
所述基于所述直播流以及各个录制视频流，分别得到各个网络环境参数下各自对应的第一视频质量指标值集合，包括：
将各个所述录制视频流与源直播流进行视频质量对比计算，得到各个网络环境参数各自对应的n个峰值信噪比PSNR指标值以及n个结构相似性SSIM指标值；
将所述n个PSNR指标值进行均值计算，得到最终的PSNR指标值；
将所述n个SSIM指标值进行均值计算，得到最终的SSIM指标值；
将最终的PSNR指标值以及最终的SSIM指标值组成所述第一视频质量指标值集合。
通过上述方式，按照循环次数对PSNR指标值以及SSIM指标值进行多次计算并取最终的平均值作为第一视频质量指标值集合，从而提升了最终得到指标值更加的准确。
在一种可能的设计中，根据所述各个网络环境参数各自对应的视频质量参数集合，分别计算出各个网络环境参数各自对应的第二视频质量指标值集合，包括：
按照设置的循环次数对各个网络环境参数下的所述直播流视频质量参数进行重复采集，获取各个网络环境参数在所述循环次数下采集到各个参数类型分别对应的多个视频质量参数值；
将各个网络环境参数下采集到的各个参数类型分别对应多个视频质量参数值进行计算，得到各个网络环境下与所述各个参数类型分别对应的多个视频质量指标值；
计算各个网络环境下所述各个参数类型分别对应的多个视频质量指标值的均值，根据各个网络环境下所述各个参数类型分别对应的多个视频质量指标值的均值，得到各个网络环境下所述各个参数类型分别对应的指标值终值，其中，所述指标值终值至少包括分辨率终值、帧率终值以及码率终值；
将各个网络环境下所述各个参数类型分别对应的指标值终值组成所述第二视频质量指标值集合。
通过上述方式，按照循环次数对视频质量参数进行多次采集计算并取最终的平均值作为第二视频质量指标值集合，从而提升了最终得到指标值更加的准确。
第二方面，本申请提供了一种直播流的测试系统，包括：
采集模块，用于在各个网络环境参数下对直播流进行拉流时，录制所述直播流在各个网络环境参数下的录制视频流，并按照预设采集周期采集各个网络环境参数下的所述直播流的视频质量参数，得到各个网络环境参数对应视频质量参数集合，其中，所述视频质量参数集合至少包括直播流的分辨率、帧率以及码率；
处理模块，用于基于所述直播流以及各个录制视频流，分别得到各个网络环境参数下各自对应的第一视频质量指标值集合；
根据所述各个网络环境参数各自对应的视频质量参数集合，分别计算出各个网络环境参数各自对应的第二视频质量指标值集合，其中，所述第二视频质量指标值集合至少包含直播流的分辨率指标值、帧率指标值以及码率指标值；
输出模块，用于输出各个网络环境参数各自对应的第一视频质量指标值集合以及第二视频质量指标值集合中的各个指标值。
在一种可能的设计中，所述处理模块，还用于获取所述直播流中的时间戳；
确定所述直播流的时间戳以及各个网络环境参数下接收所述直播流的当前时间，根据所述时间戳以及所述当前时间，得到各个网络环境参数下所述直播流的时延指标值；
所述输出模块，还用于输出各个网络环境参数下所述直播流的时延指标值。
在一种可能的设计中，所述采集模块，具体用于在各个网络环境参数下播放直播流时，按照预设循环次数，对各个网络环境参数下播放的直播流进行循环录制，得到各个网络环境参数各自对应的n个录制视频流，其中，n为大于等于2的整数；
所述处理模块，具体用于将各个所述录制视频流与源直播流进行视频质量对比计算，得到各个网络环境参数各自对应的n个峰值信噪比PSNR指标值以及n个结构相似性SSIM指标值；
将所述n个PSNR指标值进行均值计算，得到最终的PSNR指标值；
将所述n个SSIM指标值进行均值计算，得到最终的SSIM指标值；
将最终的PSNR指标值以及最终的SSIM指标值组成所述第一视频质量指标值集合。
在一种可能的设计中，所述处理模块，具体用于按照设置的循环次数对各个网络环境参数下的所述直播流视频质量参数进行重复采集，获取各个网络环境参数在所述循环次数下采集到各个参数类型分别对应的多个视频质量参数值；
将各个网络环境参数下采集到的各个参数类型分别对应多个视频质量参数值进行计算，得到各个网络环境下与所述各个参数类型分别对应的多个视频质量指标值；
计算各个网络环境下所述各个参数类型分别对应的多个视频质量指标值的均值，根据各个网络环境下所述各个参数类型分别对应的多个视频质量指标值的均值，得到各个网络环境下所述各个参数类型分别对应的指标值终值，其中，所述指标值终值至少包括分辨率终值、帧率终值以及码率终值；
将各个网络环境下所述各个参数类型分别对应的指标值终值组成所述第二视频质量指标值集合。
第三方面，本申请提供了一种电子设备，包括：
存储器，用于存放计算机程序；
处理器，用于执行所述存储器上所存放的计算机程序时，实现上述的直播流的测试方法步骤。
第四方面，本申请提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述的直播流的测试方法步骤。
上述第二方面至第四方面中的各个方面以及各个方面可能达到的技术效果请参照上述针对第一方面或第一方面中的各种可能方案可以达到的技术效果说明，这里不再重复赘述。
附图说明
图1为本申请提供的一种直播流的测试方法流程图；
图2为本申请提供的直播系统架构示意图；
图3为本申请提供的一种直播流的测试系统结构示意图；
图4为本申请提供的一种电子设备的结构示意图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请作进一步地详细描述。方法实施例中的具体操作方法也可以应用于装置实施例或系统实施例中。需要说明的是，在本申请的描述中“多个”理解为“至少两个”。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。A与B连接，可以表示：A与B直接连接和A与B通过C连接这两种情况。另外，在本申请的描述中，“第一”、“第二”等词汇，仅用于区分描述的目的，而不能理解为指示或暗示相对重要性，也不能理解为指示或暗示顺序。
下面结合附图，对本申请实施例进行详细描述。
随着网络的技术发展，视频直播已经逐渐的普及应用，但是目前验证在不同网络带宽场景下拉流的延时、码率、分辨率及直播流清晰度等指标是否满足要求主要使用人工测试方法来完成，通过人工估算拉流延时以及视频流清晰度等，此方案在所述指标测试的过程中，需要大量人员参与，测量的结果存在一定的随机性，这样导致测量效率较低，并且测量结果的准确性也较差。
因此，本申请提供了一种直播流的测试方法，在该方法中为系统配置了各种网络环境参数，然后在不同网络环境参数下对直播流进行拉流时，录制一段录制视频流，并且按照采集周期采集直播流中的视频质量参数，然后通过录制视频流以及采集到视频质量参数分别计算出第一视频质量指标值集合以及第二视频指标值集合，最终输出第一视频质量指标值集合以及第二视频质量指标值集合中的各个指标值。因此通过上述的方法可以自动化的完成对直播流的测试，并对测试结果进行分析输出对应的指标值，这样不仅可以提升了直播流在各个网络环境下的测试效率，并且还可以提高测试结果的准确性。
参照图1所示为本申请实施例提供的一种直播流的测试方法流程图，该方法包括：
S1，在各个网络环境参数下对直播流进行拉流时，录制直播流在各个网络环境参数下的录制视频流，并按照预设采集周期采集各个网络环境参数下的直播流的视频质量参数，得到各个网络环境参数对应视频质量参数集合；
首先来讲，本申请所提供的方法可以应用于图2所示的系统架构中，在该架构中包括推流端、源站、边缘节点以及拉流端。
在推流时，推流端将视频发送到源站，源站将推流端的视频进行保存。
在拉流时，拉流端发起拉流请求，该拉流端对应的边缘节点向源站发起拉流请求，并接收源站返回的视频数据，边缘节点将该视频数据发送至对应的拉流端。
为了对拉流过程中的视频数据质量进行检测，因此需要在拉流时，对直播流对应的视频数据进行数据采集。
在本申请实施例中，为了对各个网络环境参数下的直播流进行检测，因此需要拉流端在不同网络环境参数下进行直播流的数据采集。比如说，在100M的带宽环境下进行数据采集，在200M的带宽环境下进行数据采集，以及在1000M的带宽环境下进行数据采集。
因此，在不同网络环境参数下进行直播流数据采集，得到各个不同网络环境参数下对应的直播流视频质量参数。
在本申请实施例中，在各个不同网络环境参数下直接播放直播流，并且在播放直播流的过程中周期性的对直播流进行视频质量参数采集，该视频质量参数包括但不限于分辨率、帧率以及码率。将每个采集周期采集到的视频质量参数组成视频质量参数集合。此处需要说明是，可以通过ffmpeg软件对直播流中的视频质量参数进行采集。视频质量参数集合的采集结果可以如表1所示：
| 采集周期 | 分辨率 | 码率 | 帧率 |
| 5s | (Aa*bb)ppi | (X1)kbit/s | XFPS |
| 10s | (Cc*Dd)ppi | (X2)kbit/s | XFPS |
| 15s | (Ff*Ee)ppi | (X3)kbit/s | XFPS |
表1
通过上述的方式，可以在一次直播流的播放过程中完成多次视频质量参数的采集。
进一步，在本申请实施例中，为了保证采集到视频质量参数更加的准确，因此在本申请实施例中，还可以循环执行视频质量参数的采集，也就是说，在系统中配置了循环次数，可以按照该循环次数对直播流进行多次多周期的视频质量参数采集。
具体来讲，按照设置的循环次数对各个网络环境参数下的直播流视频质量参数进行重复采集，获取各个网络环境参数在所述循环次数下采集到各个参数类型分别对应的多个视频质量参数，将每个循环次数下进行周期采集的各个视频质量参数组成视频质量参数集合；比如，循环次数为2，两次循环下视频质量参数集合的采集结果可以用如表2所示：
表2
因此，如表2，按照设置的循环次数对视频质量参数进行循环采集，可以采集到不同网络环境下各个参数类型分别对应的多个视频质量参数值集合，从而得到不同网络环境下更为准确值的视频质量参数集合。
另外，在播放直播流的过程中，还将对直播流进行录制，从而得到一段录制视频流，在本申请实施例中，可以通过ffmpeg软件录制一段flv格式的视频流。还需要说明是，该段录制视频流可以是设定时间段的视频流，比如1分钟视频、2分钟视频等，在本申请实施例中不具体限定录制时长，可以根据实际测试场景对录制时长进行调整。
在一次循环次数下，得到一段录制视频流，进一步，在本申请实施例中，为了保证录制的视频流质量更准确，还可以通过在系统中配置循环次数，录制多段在不同网络环境下的直播流，得到多段录制视频流。
S2、基于所述直播流以及各个录制视频流，分别得到各个网络环境参数下各自对应的第一视频质量指标值集合；
根据各个网络环境参数下对应的录制视频流以及直播流进行对比计算，分别得到各个网络环境参数下各自对应的视频流质量指标值集合；
通过对比计算得到的视频流质量指标值集合结果可以如表3所示：
表3
通过上述的方式能够基于录制的录制视频流与原始的直播流进行计算，得到该网络环境参数下对应的PSNR指标值以及SSIM指标值，从而得到包含PSNR指标值以及SSIM指标值的第一视频指标值集合。
进一步，为避免由于网络波动或者是录制条件的影响到录制视频流不准确，或者是导致最终的PSNR以及SSIM不准确，因此在本申请实施例中，按照设置的循环次数对各个网络环境下的直播流进行重复录制，得到各个循环次数在各个网络环境参数下对应录制视频流，将得到的在各个循环次数各个网络环境参数下对应录制视频流以及直播流对比计算，得到各个网络环境参数各自对应的n个峰值信噪比PSNR指标值以及n个结构相似性SSIM指标。
如果循环次数n为4，得到各个循环次数在各个网络环境参数下各自对应的视频质量指标值集合如表4所示：
表4
如表4所示，将得到的各个循环次数在各个网络环境参数下各自对应的视频质量指标值集合，分别计算n个PSNR指标值、SSIM指标值的均值，分别得到PSNR指标值终值、SSIM指标值终值；
将在各个网络环境下分别计算得到的PSNR指标值终值、SSIM指标值终值，按照对应的各个网络环境，分别输出PSNR、SSIM指标值终值；
输出的PSNR、SSIM指标值终值集合是第一视频质量指标值集合，第一视频质量指标值集合的结果如表5所示。
表5
因此，如表5，将各个循环次数在各个网络环境参数下各自对应的视频质量指标值集合，分别计算n个PSNR、SSIM指标值均值，得到PSNR、SSIM指标值终值，得到输出的PSNR、SSIM指标值更准确。
S3、根据各个网络环境参数各自对应的视频质量参数集合，分别计算出各个网络环境参数各自对应的第二视频质量指标值集合；
在本申请实施例中，如表2所示，根据得到的各个网络环境下与各个参数类型分别对应的n个视频质量指标值，对各个网络环境下与各个参数类型分别对应的n个视频质量指标值进行均值计算，得到了各个网络环境下与各个参数类型分别对应的各个视频质量指标均值，进而得到各个网络环境下各个参数类型分别对应的指标值终值。
将在各个网络环境下分别计算得到的指标值终值，按照对应的各个网络环境，输出分辨率、帧率以及码率指标值终值集合，其中，输出的分辨率、帧率以及码率指标值终值集合是第二视频质量指标值集合，得到的各个网络环境参数对应的第二视频质量指标值集合如表6所示。
表6
因此，如表6所示，根据得到的各个网络环境下与各个参数类型分别对应的n个视频质量指标值，对各个网络环境下与各个参数类型分别对应的n个视频质量指标值进行均值计算，得到输出的第二视频质量指标值集合更准确。
S4、输出各个网络环境参数各自对应的第一视频质量指标值集合以及第二视频质量指标值集合中的各个指标值。
在本申请实施例中，为了便于测试人员按照所需的视频质量指标以及所处的网络带宽环境获取测试结果，在测试人员输入测试任务ID、视频质量度量指标名以及网络带宽等参数后，输出各个网络环境参数各自对应的第一视频质量指标值集合以及第二视频质量指标值集合中的各个指标值，其中，测试任务ID是测试人员配置好参数，然后调用测试接口成功时返回的任务ID，测试结束后，可根据测试任务ID查看测试结果的指标值集合；视频质量度量指标名至少包括直播流分辨率、帧率、码率、峰值信噪比(PSNR)以及结构相似性(SSIM)指标，输出的各个网络环境参数各自对应的第一视频质量指标值集合以及第二视频质量指标值集合是将表5和表6结合过后的值，结果如表7所示。
表7
从上述的技术方案来讲，本申请所提供的方法能够对各个网络环境下的直播流的视频质量参数进行周期性的采集以及录制视频流，基于视频质量参数以及录制视频流得到各个网络环境参数对应的视频质量指标值，从而实现对直播流的自动化测试，进而避免了由于人工测试导致的测试效率低以及测试准确性也较低的问题，提升了直播流的测试效率以及测试结果的准确性。
进一步，为了测试各个网络环境参数下拉流端自发起拉流请求起，到接收到直播流的时间，因此需要在不同网络环境参数下计算直播流时延的大小。
进一步，在本申请实施例中，除了输出各个网络环境参数各自对应的第一视频质量指标值集合以及第二视频质量指标值集合中的各个指标值之外，还可以输出直播流的时延指标值，该时延指标值的具体确定方法如下：
在各个网络环境参数下推流时，推流端将视频发送到源站的开始时间节点，推流端在视频流上打上时间戳，源站接收推流端的带有时间戳的视频并进行保存；
在各个网络环境参数下拉流时，拉流端发起拉流请求，该拉流端对应的边缘节点向源站发起拉流请求，并接收源站在各个网络环境参数下返回的视频数据，边缘节点在各个网络环境参数下将带有时间戳的视频数据发送至对应的拉流端，在各个网络环境参数下的拉流端接视频数据时，截取在各个网络环境参数下对应的视频流数据的首帧，得到在各个网络环境参数下接收直播流的当前时间；
将拉流端接收到在各个网络环境参数下对应的视频流的当前时间与视频流上的时间戳作差，得到在各个网络环境参数下对应的时延指标值。该时延指标值作为一个单独的指标值进行输出，也就是说，当然测试人员对某一个网络环境参数对应的直播流进行测试时，系统将输出包含延时指标值的各个指标值。
基于上述的实施例中所提供的方法，本申请实施例中还提供了一种直播流的测试系统，如图3所示为本申请实施例中一种直播流的测试系统的结构示意图，该系统包括：
采集模块301，用于在各个网络环境参数下对直播流进行拉流时，录制所述直播流在各个网络环境参数下的录制视频流，并按照预设采集周期采集各个网络环境参数下的所述直播流的视频质量参数，得到各个网络环境参数对应视频质量参数集合，其中，所述视频质量参数集合至少包括直播流的分辨率、帧率以及码率；
处理模块302，用于基于所述直播流以及各个录制视频流，分别得到各个网络环境参数下各自对应的第一视频质量指标值集合；
根据所述各个网络环境参数各自对应的视频质量参数集合，分别计算出各个网络环境参数各自对应的第二视频质量指标值集合，其中，所述第二视频质量指标值集合至少包含直播流的分辨率指标值、帧率指标值以及码率指标值；
输出模块303，用于输出各个网络环境参数各自对应的第一视频质量指标值集合以及第二视频质量指标值集合中的各个指标值。
在一种可能的设计中，所述处理模块302，还用于获取所述直播流中的时间戳；
确定所述直播流的时间戳以及各个网络环境参数下接收所述直播流的当前时间，根据所述时间戳以及所述当前时间，得到各个网络环境参数下所述直播流的时延指标值；
所述输出模块303，还用于输出各个网络环境参数下所述直播流的时延指标值。
在一种可能的设计中，所述采集模块301，具体用于在各个网络环境参数下播放直播流时，按照预设循环次数，对各个网络环境参数下播放的直播流进行循环录制，得到各个网络环境参数各自对应的n个录制视频流，其中，n为大于等于2的整数；
所述处理模块302，具体用于将各个所述录制视频流与源直播流进行视频质量对比计算，得到各个网络环境参数各自对应的n个峰值信噪比PSNR指标值以及n个结构相似性SSIM指标值；
将所述n个PSNR指标值进行均值计算，得到最终的PSNR指标值；
将所述n个SSIM指标值进行均值计算，得到最终的SSIM指标值；
将最终的PSNR指标值以及最终的SSIM指标值组成所述第一视频质量指标值集合。
在一种可能的设计中，所述处理模块302，具体用于按照设置的循环次数对各个网络环境参数下的所述直播流视频质量参数进行重复采集，获取各个网络环境参数在所述循环次数下采集到各个参数类型分别对应的多个视频质量参数值；
将各个网络环境参数下采集到的各个参数类型分别对应多个视频质量参数值进行计算，得到各个网络环境下与所述各个参数类型分别对应的多个视频质量指标值；
计算各个网络环境下所述各个参数类型分别对应的多个视频质量指标值的均值，根据各个网络环境下所述各个参数类型分别对应的多个视频质量指标值的均值，得到各个网络环境下所述各个参数类型分别对应的指标值终值，其中，所述指标值终值至少包括分辨率终值、帧率终值以及码率终值；
将各个网络环境下所述各个参数类型分别对应的指标值终值组成所述第二视频质量指标值集合。
基于同一发明构思，本申请实施例中还提供了一种电子设备，所述电子设备可以实现前述直播流的测试系统的功能，参考图4，所述电子设备包括：
至少一个处理器401，以及与至少一个处理器401连接的存储器402，本申请实施例中不限定处理器401与存储器402之间的具体连接介质，图4中是以处理器401和存储器402之间通过总线400连接为例。总线400在图4中以粗线表示，其它部件之间的连接方式，仅是进行示意性说明，并不引以为限。总线400可以分为地址总线、数据总线、控制总线等，为便于表示，图4中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。或者，处理器401也可以称为控制器，对于名称不做限制。
在本申请实施例中，存储器402存储有可被至少一个处理器401执行的指令，至少一个处理器401通过执行存储器402存储的指令，可以执行前文论述的直播流的测试方法。处理器401可以实现图3所示的系统中各个模块的功能。
其中，处理器401是该装置的控制中心，可以利用各种接口和线路连接整个该控制设备的各个部分，通过运行或执行存储在存储器402内的指令以及调用存储在存储器402内的数据，该装置的各种功能和处理数据，从而对该装置进行整体监控。
在一种可能的设计中，处理器401可包括一个或多个处理单元，处理器401可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器401中。在一些实施例中，处理器401和存储器402可以在同一芯片上实现，在一些实施例中，它们也可以在独立的芯片上分别实现。
处理器401可以是通用处理器，例如中央处理器(CPU)、数字信号处理器、专用集成电路、现场可编程门阵列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件，可以实现或者执行本申请实施例中公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者任何常规的处理器等。结合本申请实施例所公开的直播流的测试方法的步骤可以直接体现为硬件处理器执行完成，或者用处理器中的硬件及软件模块组合执行完成。
存储器402作为一种非易失性计算机可读存储介质，可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块。存储器402可以包括至少一种类型的存储介质，例如可以包括闪存、硬盘、多媒体卡、卡型存储器、随机访问存储器(Random AccessMemory，RAM)、静态随机访问存储器(Static Random Access Memory，SRAM)、可编程只读存储器(Programmable Read Only Memory，PROM)、只读存储器(Read Only Memory，ROM)、带电可擦除可编程只读存储器(Electrically Erasable Programmable Read-Only Memory，EEPROM)、磁性存储器、磁盘、光盘等。存储器402是能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。本申请实施例中的存储器402还可以是电路或者其它任意能够实现存储功能的装置，用于存储程序指令和/或数据。
通过对处理器401进行设计编程，可以将前述实施例中介绍的直播流的测试方法所对应的代码固化到芯片内，从而使芯片在运行时能够执行图1所示的实施例的直播流的测试方法的步骤。如何对处理器401进行设计编程为本领域技术人员所公知的技术，这里不再赘述。
基于同一发明构思，本申请实施例还提供一种存储介质，该存储介质存储有计算机指令，当该计算机指令在计算机上运行时，使得计算机执行前文论述的直播流的测试方法。
在一些可能的实施方式中，本申请提供的直播流的测试方法的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当程序产品在装置上运行时，程序代码用于使该控制设备执行本说明书上述描述的根据本申请各种示例性实施方式的直播流的测试方法中的步骤。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。
Claims (10)
1.一种直播流的测试方法，其特征在于，包括：
在各个网络环境参数下对直播流进行拉流时，录制所述直播流在各个网络环境参数下的录制视频流，并按照预设采集周期采集各个网络环境参数下的所述直播流的视频质量参数，得到各个网络环境参数对应视频质量参数集合，其中，所述视频质量参数集合至少包括直播流的分辨率、帧率以及码率；
基于所述直播流以及各个录制视频流，分别得到各个网络环境参数下各自对应的第一视频质量指标值集合；
根据所述各个网络环境参数各自对应的视频质量参数集合，分别计算出各个网络环境参数各自对应的第二视频质量指标值集合，其中，所述第二视频质量指标值集合至少包含直播流的分辨率指标值、帧率指标值以及码率指标值；
输出各个网络环境参数各自对应的第一视频质量指标值集合以及第二视频质量指标值集合中的各个指标值。
2.如权利要求1所述方法，其特征在于，在各个网络环境参数下对直播流进行拉流时，所述方法还包括：
获取所述直播流中的时间戳；
确定所述直播流的时间戳以及各个网络环境参数下接收所述直播流的当前时间，根据所述时间戳以及所述当前时间，得到各个网络环境参数下所述直播流的时延指标值；
输出各个网络环境参数下所述直播流的时延指标值。
3.如权利要求1所述的方法，其特征在于，录制所述直播流在各个网络环境参数下的录制视频流，具体为：
在各个网络环境参数下播放直播流时，按照预设循环次数，对各个网络环境参数下播放的直播流进行循环录制，得到各个网络环境参数各自对应的n个录制视频流，其中，n为大于等于2的整数；
所述基于所述直播流以及各个录制视频流，分别得到各个网络环境参数下各自对应的第一视频质量指标值集合，包括：
将各个所述录制视频流与源直播流进行视频质量对比计算，得到各个网络环境参数各自对应的n个峰值信噪比PSNR指标值以及n个结构相似性SSIM指标值；
将所述n个PSNR指标值进行均值计算，得到最终的PSNR指标值；
将所述n个SSIM指标值进行均值计算，得到最终的SSIM指标值；
将最终的PSNR指标值以及最终的SSIM指标值组成所述第一视频质量指标值集合。
4.如权利要求1所述的方法，其特征在于，根据所述各个网络环境参数各自对应的视频质量参数集合，分别计算出各个网络环境参数各自对应的第二视频质量指标值集合，包括：
按照设置的循环次数对各个网络环境参数下的所述直播流视频质量参数进行重复采集，获取各个网络环境参数在所述循环次数下采集到各个参数类型分别对应的多个视频质量参数值；
将各个网络环境参数下采集到的各个参数类型分别对应多个视频质量参数值进行计算，得到各个网络环境下与所述各个参数类型分别对应的多个视频质量指标值；
计算各个网络环境下所述各个参数类型分别对应的多个视频质量指标值的均值，根据各个网络环境下所述各个参数类型分别对应的多个视频质量指标值的均值，得到各个网络环境下所述各个参数类型分别对应的指标值终值，其中，所述指标值终值至少包括分辨率终值、帧率终值以及码率终值；
将各个网络环境下所述各个参数类型分别对应的指标值终值组成所述第二视频质量指标值集合。
5.一种直播流的测试系统，其特征在于，包括：
采集模块，用于在各个网络环境参数下对直播流进行拉流时，录制所述直播流在各个网络环境参数下的录制视频流，并按照预设采集周期采集各个网络环境参数下的所述直播流的视频质量参数，得到各个网络环境参数对应视频质量参数集合，其中，所述视频质量参数集合至少包括直播流的分辨率、帧率以及码率；
处理模块，用于基于所述直播流以及各个录制视频流，分别得到各个网络环境参数下各自对应的第一视频质量指标值集合；
根据所述各个网络环境参数各自对应的视频质量参数集合，分别计算出各个网络环境参数各自对应的第二视频质量指标值集合，其中，所述第二视频质量指标值集合至少包含直播流的分辨率指标值、帧率指标值以及码率指标值；
输出模块，用于输出各个网络环境参数各自对应的第一视频质量指标值集合以及第二视频质量指标值集合中的各个指标值。
6.如权利要求5所述的系统，其特征在于，所述处理模块，还用于获取所述直播流中的时间戳；
确定所述直播流的时间戳以及各个网络环境参数下接收所述直播流的当前时间，根据所述时间戳以及所述当前时间，得到各个网络环境参数下所述直播流的时延指标值；
所述输出模块，还用于输出各个网络环境参数下所述直播流的时延指标值。
7.如权利要求5所述的系统，其特征在于，所述采集模块，具体用于在各个网络环境参数下播放直播流时，按照预设循环次数，对各个网络环境参数下播放的直播流进行循环录制，得到各个网络环境参数各自对应的n个录制视频流，其中，n为大于等于2的整数；
所述处理模块，具体用于将各个所述录制视频流与源直播流进行视频质量对比计算，得到各个网络环境参数各自对应的n个峰值信噪比PSNR指标值以及n个结构相似性SSIM指标值；
将所述n个PSNR指标值进行均值计算，得到最终的PSNR指标值；
将所述n个SSIM指标值进行均值计算，得到最终的SSIM指标值；
将最终的PSNR指标值以及最终的SSIM指标值组成所述第一视频质量指标值集合。
8.如权利要求5所述的系统，其特征在于，所述处理模块，具体用于按照设置的循环次数对各个网络环境参数下的所述直播流视频质量参数进行重复采集，获取各个网络环境参数在所述循环次数下采集到各个参数类型分别对应的多个视频质量参数值；
将各个网络环境参数下采集到的各个参数类型分别对应多个视频质量参数值进行计算，得到各个网络环境下与所述各个参数类型分别对应的多个视频质量指标值；
计算各个网络环境下所述各个参数类型分别对应的多个视频质量指标值的均值，根据各个网络环境下所述各个参数类型分别对应的多个视频质量指标值的均值，得到各个网络环境下所述各个参数类型分别对应的指标值终值，其中，所述指标值终值至少包括分辨率终值、帧率终值以及码率终值；
将各个网络环境下所述各个参数类型分别对应的指标值终值组成所述第二视频质量指标值集合。
9.一种电子设备，其特征在于，包括：
存储器，用于存放计算机程序；
处理器，用于执行所述存储器上所存放的计算机程序时，实现权利要求1-4中任一项所述的方法步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1-4任一项所述的方法步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210856536.8A CN115225893A (zh) | 2022-07-20 | 2022-07-20 | 一种直播流的测试方法、系统及电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210856536.8A CN115225893A (zh) | 2022-07-20 | 2022-07-20 | 一种直播流的测试方法、系统及电子设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115225893A true CN115225893A (zh) | 2022-10-21 |
Family
ID=83613645
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210856536.8A Pending CN115225893A (zh) | 2022-07-20 | 2022-07-20 | 一种直播流的测试方法、系统及电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115225893A (zh) |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102223260A (zh) * | 2010-04-19 | 2011-10-19 | 中国移动通信集团重庆有限公司 | 测试iptv视频数据流传输质量的方法、系统及装置 |
| CN109299013A (zh) * | 2018-09-26 | 2019-02-01 | 视联动力信息技术股份有限公司 | 一种自动测试方法和装置 |
| CN111432248A (zh) * | 2020-03-30 | 2020-07-17 | 北京百度网讯科技有限公司 | 直播视频流的质量监控方法和装置 |
| CN113923441A (zh) * | 2020-07-08 | 2022-01-11 | 钉钉控股（开曼）有限公司 | 视频质量的评估方法、装置及电子设备 |
| CN114071232A (zh) * | 2021-11-04 | 2022-02-18 | 广州华多网络科技有限公司 | 音视频质量可视化方法及其装置、设备、介质、产品 |
| CN114630139A (zh) * | 2022-03-15 | 2022-06-14 | 广州虎牙科技有限公司 | 直播视频的质量评估方法及其相关设备 |
-
2022
- 2022-07-20 CN CN202210856536.8A patent/CN115225893A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102223260A (zh) * | 2010-04-19 | 2011-10-19 | 中国移动通信集团重庆有限公司 | 测试iptv视频数据流传输质量的方法、系统及装置 |
| CN109299013A (zh) * | 2018-09-26 | 2019-02-01 | 视联动力信息技术股份有限公司 | 一种自动测试方法和装置 |
| CN111432248A (zh) * | 2020-03-30 | 2020-07-17 | 北京百度网讯科技有限公司 | 直播视频流的质量监控方法和装置 |
| CN113923441A (zh) * | 2020-07-08 | 2022-01-11 | 钉钉控股（开曼）有限公司 | 视频质量的评估方法、装置及电子设备 |
| CN114071232A (zh) * | 2021-11-04 | 2022-02-18 | 广州华多网络科技有限公司 | 音视频质量可视化方法及其装置、设备、介质、产品 |
| CN114630139A (zh) * | 2022-03-15 | 2022-06-14 | 广州虎牙科技有限公司 | 直播视频的质量评估方法及其相关设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11665378B2 (en) | Establishment and use of time mapping based on interpolation using low-rate fingerprinting, to help facilitate frame-accurate content revision | |
| CN104202220B (zh) | 压力测试方法和装置 | |
| KR102260946B1 (ko) | 미디어 재생 에러들을 검출하기 위한 기술들 | |
| CA2187247A1 (en) | Method and apparatus for pcr jitter measurement in an mpeg-2 transport stream | |
| CN106911927B (zh) | 评估网络视频用户体验质量的方法、装置和dpi设备 | |
| CN108322737B (zh) | 摄像帧率测量方法和装置 | |
| CN107454387A (zh) | 用于图像编解码传输系统的质量参数获取方法和装置 | |
| CN110377521B (zh) | 一种目标对象验证方法及装置 | |
| CN111209160A (zh) | 功耗异常分析方法、装置、终端设备及可读存储介质 | |
| CN111488271B (zh) | 消息中间件的调优方法、系统、电子设备及存储介质 | |
| CN112837640A (zh) | 屏幕动态画面测试方法、系统、电子设备及存储介质 | |
| CN115203004A (zh) | 代码覆盖率测试方法、装置、存储介质及电子设备 | |
| US10171326B2 (en) | Method and apparatus for estimating a maximum time interval error in a data transmission network | |
| CN115225893A (zh) | 一种直播流的测试方法、系统及电子设备 | |
| CN111405603B (zh) | 一种时延获取方法、测试装置以及计算机存储介质 | |
| CN114071132B (zh) | 一种信息延时的检测方法、装置、设备及可读存储介质 | |
| CN113225218A (zh) | 一种话单质量的核查方法和装置 | |
| CN103338131A (zh) | 检测日志传输丢失率的方法和设备 | |
| CN111984519A (zh) | 一种用于业务系统的测试方法及其装置 | |
| CN115643192A (zh) | 一种无遗漏抓包指标的检测系统、方法、设备、介质 | |
| CN109905768B (zh) | 一种互联网电视机顶盒输出视频卡顿判断方法和装置 | |
| CN104469495A (zh) | 用于视频播放的点击行为监测方法和装置 | |
| CN109347691B (zh) | 一种用于Web服务的数据采样方法、装置及设备 | |
| CN110825632A (zh) | 云计算资源计量数据测试方法、系统、装置及电子设备 | |
| CN109120472B (zh) | 一种接口速率获得方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |