CN116193189A - 丢帧率测试方法、装置、系统、电子设备及存储介质 - Google Patents

丢帧率测试方法、装置、系统、电子设备及存储介质 Download PDF

Info

Publication number
CN116193189A
CN116193189A CN202211313120.8A CN202211313120A CN116193189A CN 116193189 A CN116193189 A CN 116193189A CN 202211313120 A CN202211313120 A CN 202211313120A CN 116193189 A CN116193189 A CN 116193189A
Authority
CN
China
Prior art keywords
video
screen
throwing
frame loss
loss rate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211313120.8A
Other languages
English (en)
Inventor
谭丹
姚瑞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Spreadtrum Semiconductor Chengdu Co Ltd
Original Assignee
Spreadtrum Semiconductor Chengdu Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Spreadtrum Semiconductor Chengdu Co Ltd filed Critical Spreadtrum Semiconductor Chengdu Co Ltd
Priority to CN202211313120.8A priority Critical patent/CN116193189A/zh
Publication of CN116193189A publication Critical patent/CN116193189A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/004—Diagnosis, testing or measuring for television systems or their details for digital television systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234381—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the temporal resolution, e.g. decreasing the frame rate by frame skipping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本发明公开了一种投屏视频的丢帧率测试方法、装置、系统、电子设备及存储介质，其中，丢帧率测试方法包括：获取录制视频，投屏视频为将投屏发送端发送的原视频在投屏接收端投屏播放的视频；解析录制视频，得到对应录制视频的第一图片集，第一图片集包括多帧第一图片；解析原视频，得到对应原视频的第二图片集，第二图片集包括多帧第二图片；比较第一图片集和第二图片集，并根据比较结果确定录制视频的丢帧率。本发明通过第三方设备得到录制视频，录制视频可等同于投屏视频，比较与录制视频对应的第一图片集和与原视频对应的第二图片集，确定录制视频的丢帧率，从而高效、准确地检测到投屏视频的丢帧率，进而精确地评价投屏视频的画质。

Description

丢帧率测试方法、装置、系统、电子设备及存储介质
技术领域
本发明涉及投屏技术领域，尤其涉及一种投屏视频的丢帧率测试方法、装置、系统、电子设备及存储介质。
背景技术
无线投屏，是指智能移动设备客户端将本机的屏幕图像和声音通过Wi-Fi(无线通信技术)的方式显示在另一台显示设备上，从而实现同屏显示的技术。在上述无线技术的支撑下，如何测试和评价不同场景和不同连接方式下投屏后视频画面的质量，从而保障用户的投屏使用体验，是现在投屏技术领域待解决的问题。
发明内容
本发明要解决的技术问题是为了克服现有技术中存在无法高效、准确测试投屏后视频画质的缺陷，提供一种投屏视频的丢帧率测试方法、装置、系统、电子设备及存储介质。
本发明是通过下述技术方案来解决上述技术问题：
第一方面，本发明提供一种投屏视频的丢帧率测试方法，所述投屏视频的丢帧率测试方法包括：
获取对所述投屏视频录制得到的录制视频，所述投屏视频为将投屏发送端发送的原视频在投屏接收端投屏播放的视频；
解析所述录制视频，得到对应所述录制视频的第一图片集，第一图片集包括多帧第一图片；
解析原视频，得到对应所述原视频的第二图片集，第二图片集包括多帧第二图片；
比较所述第一图片集和所述第二图片集，并根据比较结果确定所述录制视频的丢帧率。
优选地，所述录制视频的录制帧率和原视频的播放帧率成比例关系。
优选地，所述比较所述第一图片集和所述第二图片集，并根据比较结果确定所述录制视频的丢帧率的步骤包括：
对于所述第一图片集中的各帧第一图片，比较所述第一图片与邻近第二图片的相似度；所述邻近第二图片为所述第二图片集中播放时刻与所述第一图片的投屏播放时刻的时间差小于差值阈值的图片；
当所述相似度大于或者等于预设相似度时，确定所述录制视频未丢帧；
当所述相似度小于所述预设相似度时，确定所述录制视频丢帧；
统计丢帧次数和未丢帧次数；
根据所述丢帧次数和总次数的比值，确定所述录制视频的丢帧率；所述总次数为所述丢帧次数和所述未丢帧次数的总和。
优选地，所述根据比较结果确定所述录制视频的丢帧率的步骤后包括：
根据所述丢帧率生成统计报告；
将所述统计报告发送至外部设备。
优选地，所述根据比较结果确定所述录制视频的丢帧率之后，还包括：
发送投屏方式切换指令至所述投屏发送端和投屏接收端，以触发所述投屏发送端和投屏接收端按照所述投屏方式切换指令携带的无线投屏方式重新建立连接；其中，所述无线投屏方式包括AirPlay、DLNA和Miracast中的至少一种；
当确定所述投屏发送端和投屏接收端重新建立连接之后，返回获取所述录制视频的步骤。
优选地，所述根据比较结果确定所述录制视频的丢帧率之后，还包括：
发送视频切换指令至所述投屏发送端，以触发所述投屏发送端依次切换不同视频格式类型的原视频进行播放并将切换后的原视频发送给所述投屏接收端；
当确定所述投屏发送端将切换后的原视频发送给所述投屏接收端之后，返回获取所述录制视频的步骤。
第二方面，本发明提供一种投屏视频的丢帧率测试装置，所述投屏视频的丢帧率测试装置包括：
获取模块，用于获取对所述投屏视频录制得到的录制视频，所述投屏视频为将投屏发送端发送的原视频在投屏接收端投屏播放的视频；
解析模块，用于解析所述录制视频，得到对应所述录制视频的第一图片集，第一图片集包括多帧第一图片；还用于解析原视频，得到对应所述原视频的第二图片集，第二图片集包括多帧第二图片；
比较模块，用于比较所述第一图片集和所述第二图片集，并根据比较结果确定所述录制视频的丢帧率。
第三方面，本发明提供一种投屏视频的丢帧率测试系统，所述投屏视频的丢帧率测试系统包括摄像机和服务器，所述服务器执行上述的投屏视频的丢帧率测试方法；所述摄像机用于对投屏视频进行录制，以得到录制视频，并将所述录制视频发送至所述服务器。
第四方面，本发明提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述的投屏视频的丢帧率测试方法。
第五方面，本发明提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述的投屏视频的丢帧率测试方法。
本发明的积极进步效果在于：
本发明通过第三方设备得到录制视频，录制视频可等同于投屏视频，比较与录制视频对应的第一图片集和与原视频对应的第二图片集，确定录制视频的丢帧率，从而高效、准确地检测到投屏视频的丢帧率，进而精确地评价投屏视频的画质。
附图说明
图1为本发明实施例1提供的一种投屏视频的丢帧率测试方法的流程图；
图2为图1中比较相似度确定丢帧率的一种实现方式的流程图；
图3为本发明实施例1的投屏视频的丢帧率测试方法的生成并发送统计报告的一种实现方式的流程图；
图4为本发明实施例1的投屏视频的丢帧率测试方法的不同无线投屏方式的一种实现方式的流程图；
图5为本发明实施例1的投屏视频的丢帧率测试方法的不同视频格式的一种实现方式的流程图；
图6为本发明实施例1的投屏视频的丢帧率测试方法的具体示例的交互图；
图7为本发明实施例2提供的一种投屏视频的丢帧率测试装置的结构图；
图8为本发明实施例2的另一种投屏视频的丢帧率测试装置的结构图；
图9为本发明实施例3提供的一种投屏视频的丢帧率测试系统的结构图；
图10为本发明实施例3的投屏视频的丢帧率测试系统的具体示例的内部结构图；
图11为本发明实施例4提供的一种电子设备的结构示意图。
具体实施方式
下面通过实施例的方式进一步说明本发明，但并不因此将本发明限制在的实施例范围之中。
实施例1
实践中手机、平板电脑等移动终端可以通过无线投屏的方式连接到便携式个人电脑、电视等大屏设备上，投屏后的视频可能存在跳帧等问题，影响用户的观感。因此，测试、评价不同场景和不同连接方式下投屏视频的画面质量，有利于统计投屏技术的问题，对问题进行针对性地解决，为产品开发的方向指出明确的道路。
目前对于投屏视频只能采用人工比对的工作方式，不仅测试效率低，而且测试结果的误差率较高，本实施例提供一种投屏视频的丢帧率测试方法，不仅高效、准确地测试投屏视频地丢帧率，而且可以应用于不同设备类型，不同无线投屏方法，可以普遍适用于丢帧率测试过程。
参见图1，投屏视频的丢帧率测试方法包括：
S1、获取对投屏视频录制得到的录制视频。
其中，投屏视频为将投屏发送端发送的原视频在投屏接收端投屏播放的视频，投屏发送设备包括投屏发送端，投屏发送设备包括手机、平板电脑等移动终端设备。
在一个可选的实施方式中，投屏视频根据无线投屏方式获得，无线投屏方式包括AirPlay投屏方式、DLNA投屏方式和Miracast投屏方式中的至少一种。
投屏发送设备通过无线投屏方式(例如AirPlay、DLNA、Miracast等无线投屏方式)将原视频发送至投屏接收设备的投屏接收端。投屏接收设备包括笔记本电脑、电视机、显示器和电视盒子等。
录制视频是由除投屏发送设备和投屏接收设备之外的第三方录制设备进行录制。例如：若将手机(投屏发送设备)上的原视频通过无线投屏方式投屏至电视机(投屏接收设备)上，可以通过高速摄像机(第三方录制设备)录制电视机显示屏上播放的投屏视频，高速摄像机拍摄到的视频就是录制视频。
S2、解析录制视频，得到对应录制视频的第一图片集。
第一图片集包括多帧第一图片。
S3、解析原视频，得到对应原视频的第二图片集。
第二图片集包括多帧第二图片。
其中，原视频为投屏发送端发送的视频。
视频是由若干个静态图像组成的，一个静态图像为一帧，解析录制视频和原视频的各帧，可以得到若干个静态图像，这些静态图像组成了第一图片集和第二图片集。
S4、比较第一图片集和第二图片集，并根据比较结果确定录制视频的丢帧率。
在本实施例中，通过第三方设备得到录制视频，录制视频可等同于投屏视频，比较与录制视频对应的第一图片集和与原视频对应的第二图片集，确定录制视频的丢帧率，从而高效、准确地检测到投屏视频的丢帧率，进而精确地评价投屏视频的画质。
在一个可选的实施方式中，录制视频的帧率和原视频的帧率成比例关系。
视频帧率表征每秒的视频显示帧数，视频帧率的单位是fps。因为人类眼睛具有视觉停留的生理现象，所以一秒钟内能够更新视频显示帧数越高，就可以得到更流畅、更逼真的动画。一般来说视频帧率大于或者等于30fps，就会得到一个流畅的视频画面，若视频帧率大于或者等于60fps，视频的交互感和逼真感就会得到明显的提升，但是若视频帧率超过75fps，视频的流畅度就不会明显得到提升。
为了便于比较录制视频和原视频的各帧图片，将录制视频的帧率和原视频的帧率设置为有比例关系的。
例如：若录制视频的帧率和原视频的帧率都为60fps，则在一秒内需要比较第一图片集内60张静态图片和第二图片集内60张静态图片，即在原视频播放时刻和录制视频的投屏播放时刻需要比较的静态图片数量相等，原视频播放时刻和录制视频的投屏播放时刻的时间差小于差值阈值。
又例如：若录制视频的帧率为30fps，原视频的帧率为60fps，则在一秒内需要比较第一图片集内30张静态图片和第二图片集内60张静态图片，即在原视频播放时刻和录制视频的投屏播放时刻，比较对应录制视频的静态图片数量和对应原视频的静态图片数量的比例关系为一比二，原视频播放时刻和录制视频的投屏播放时刻的时间差小于差值阈值。
再例如：若录制视频的帧率为60fps，原视频的帧率为30fps，则在一秒内需要比较第一图片集内60张静态图片和第二图片集内30张静态图片，即在原视频播放时刻和录制视频的投屏播放时刻，比较对应录制视频的静态图片数量和对应原视频的静态图片数量的比例关系为二比一，原视频播放时刻和录制视频的投屏播放时刻的时间差小于差值阈值。
在本实施方式中，录制视频的帧率和原视频的帧率成比例关系，便于量化录制视频和原视频对应静态图片的图片数量，从而提高检测投屏视频的丢帧率的效率。
在一个可选的实施方式中，参见图2，步骤S4包括：
S41、对于第一图片集中的各帧第一图片，比较第一图片与邻近第二图片的相似度。
其中，邻近第二图片为第二图片集中播放时刻与第一图片的投屏播放时刻的时间差小于差值阈值的图片。差值阈值根据实际需求自行确定。
例如：若差值阈值为1秒，需要比较的第一图片为录制视频的投屏播放时刻中3分10秒的静态图片，则在原视频的播放时刻中3分9秒至3分10秒内获取对应的邻近第二图片，比较该第一图片和该邻近第二图片的相似度。
S42、判断相似度和预设相似度的大小。
当相似度大于或者等于预设相似度时，执行步骤S43，当相似度小于预设相似度时，执行步骤S44。
可以通过结构相似性度量方法、余弦相似度计算方法、直方图归一化方法、哈希算法等计算方法计算若干张静态图片的相似度。预设相似度根据需求自行设置。
S43、确定录制视频未丢帧。
例如：若预设相似度为95％，当相似度大于或者等于95％时，说明对比的图片显示相似度极高，可以将这两张图片确定为一致，也就是投屏接收设备播放投屏视频的过程中，投屏视频未丢帧。
S44、确定录制视频丢帧。
例如：若预设相似度为95％，当相似度小于95％时，说明对比的图片显示相似度不高，可以将这两张图片确定为不一致，也就是投屏接收设备播放投屏视频的过程中，投屏视频存在丢帧情况。
S45、统计丢帧次数和未丢帧次数。
S46、根据丢帧次数和总次数的比值，确定录制视频的丢帧率。
其中，总次数为丢帧次数和未丢帧次数的总和。
在本实施方式中，通过原视频播放时刻和录制视频投屏播放时刻的第一图片和第二图片的相似度，确定录制视频是否丢帧，根据丢帧次数和总次数的比值确定录制视频的丢帧率，从而评估录制视频的画质和流畅度，为进一步产品研发指明方向。
在一个可选的实施方式中，参见图3，步骤S4后包括：
S5、根据丢帧率生成统计报告。
S6、将统计报告发送至外部设备。
外部设备可以为投屏发送设备、投屏接收设备、云端等。
在本实施方式中，外部设备接收到统计报告后，将统计报告发送给测试人员，从而测试人员可以快速得到投屏视频丢失率的检测数据，提高测试效率，减少人工比对视频的误差。
在一个可选的实施方式中，投屏视频的丢帧率测试方法可测试不同格式的投屏视频。
可测试的投屏视频格式包括不同的视频分辨率，例如480P、720P、1080P、蓝光、2K、4K等视频分辨率。
在本实施方式中，投屏视频的丢帧率测试方法可应用于一种或多种投屏视频格式，有普遍适用意义。
在一个可选的实施方式中，参见图4，步骤S4后还包括：
S7、发送投屏方式切换指令至投屏发送端和投屏接收端，以触发投屏发送端和投屏接收端按照投屏方式切换指令携带的无线投屏方式重新建立连接。
其中，无线投屏方式包括AirPlay、DLNA和Miracast中的至少一种。
当确定投屏发送端和投屏接收端重新建立连接之后，返回步骤S1。
在本实施方式中，投屏视频的丢帧率测试方法可检测通过不同的无线投屏方式得到的投屏视频，应用场景类型具有多样性。
在一个可选的实施方式中，参见图5，步骤S4后还包括：
S8、发送视频切换指令至投屏发送端，以触发投屏发送端依次切换不同视频格式类型的原视频进行播放并将切换后的原视频发送给投屏接收端。
不同视频格式类型包括不同的视频分辨率，包括480P、720P、1080P、蓝光、2K、4K等视频分辨率。
当确定投屏发送端将切换后的原视频发送给投屏接收端之后，返回步骤S1。
在本实施方式中，投屏视频的丢帧率测试方法可检测根据不同视频格式的原视频投屏后的投屏视频，同时可以切换投屏视频的视频格式，被检测的投屏视频不局限于单一的视频格式，适用场景广泛。
下面介绍一种帧率测试方法具体描述本实施例的投屏视频的丢帧率测试方法。
参见图6的帧率测试交互图，具体步骤为：
步骤一、根据需求设置测试环境，调试无线访问接入点(AP)、待测设备(即投屏发送设备，在本具体实例中为DUT)和画面接收器(即投屏接收设备)等测试设备。
例如：测试人员通过PC端读取云端测试用例和无线访问接入点设置的要求(即运行测试并读取云端的测试要求)，配置无线访问接入点的无线模式、信道带宽以及加密方式和密码；初始化待测设备，同时安装播放视频所需要的应用程序，并将不同帧率、不同格式的视频加载进待测设备；画面接收器通过无线遥控器进行开关控制，保持开启状态；自动化实现DUT(待测设备)和无线访问接入点(AP)WiFi信号(无线通信信号)连接，有线连接无线访问接入点(AP)和画面接收器；以AirPlay、DLNA、Miracast中任意一种无线投屏方式，实现DUT(待测设备)和画面接收器的投屏连接。
在无线网络中，无线访问接入点就相当于有线网络的集线器，它能够把各个无线客户端连接起来，在本具体实例中，无线访问接入点将待测设备和画面接收器连接起来。
测试人员通过PC(个人计算机)接收画面接收器、高速摄像机、待测设备等传输的信号，并对信号进行处理，从而控制帧率测试过程。通过网线将PC、画面接收器和无线访问接入点连接起来；用USB(通用串行总线)线的方式将待测设备、高速摄像机和PC连接起来。
步骤二、测试人员在云端给PC端下发测试任务，PC端通过自动化脚本同时控制无线访问接入点(AP)、高速摄像机、待测设备和画面接收器进行测试任务。
步骤三、在DUT(待测设备)端播放视频或者画面浏览，这时画面接收器显示接收到的播放视频或者画面浏览，同时PC端控制高速摄像机对画面接收器进行录制操作，直到视频播放完成或画面浏览完成。
步骤四、将高速摄像录制的视频(即录制视频)上传到自动化统计系统(在PC端，即高速摄像机将录制的视频数据传输给PC端)。并采用解析模块将录制好的视频画面和原视频画面自动化解析成帧图片(即第一图片集和第二图片集)。
步骤五、采用比对模块将录制视频的帧图片与原视频的帧图片进行相似度比对，统计全部帧丢失率的情况。
步骤六、根据最后的统计结果形成测试结果(即统计报告)，并将测试结果存放在云端(外部设备)。当所有测试完成后，由云端统计所有测试内容和测试结果，并将测试结果发送给测试人员。
实施例2
本实施例提供一种投屏视频的丢帧率测试装置，参见图7，投屏视频的丢帧率测试装置包括：
获取模块1，用于获取对投屏视频录制得到的录制视频。
其中，投屏视频为将投屏发送端发送的原视频在投屏接收端投屏播放的视频，投屏发送设备包括投屏发送端，投屏发送设备包括手机、平板电脑等移动终端设备。
在一个可选的实施方式中，投屏视频根据无线投屏方式获得，无线投屏方式包括AirPlay投屏方式、DLNA投屏方式和Miracast投屏方式中的至少一种。
投屏发送设备通过无线投屏方式(例如AirPlay、DLNA、Miracast等无线投屏方式)将原视频发送至投屏接收设备的投屏接收端。投屏接收设备包括笔记本电脑、电视机、显示器和电视盒子等。
录制视频是由除投屏发送设备和投屏接收设备之外的第三方录制设备进行录制。例如：若将手机(投屏发送设备)上的原视频通过无线投屏方式投屏至电视机(投屏接收设备)上，可以通过高速摄像机(第三方录制设备)录制电视机显示屏上播放的投屏视频，高速摄像机拍摄到的视频就是录制视频。
解析模块2，用于解析录制视频，得到对应录制视频的第一图片集；还用于解析原视频，得到对应原视频的第二图片集。
其中，第一图片集包括多帧第一图片，第二图片集包括多帧第二图片，原视频为投屏发送端发送的视频。
视频是由若干个静态图像组成的，一个静态图像为一帧，解析录制视频和原视频的各帧，可以得到若干个静态图像，这些静态图像组成了第一图片集和第二图片集。
比较模块3，用于比较第一图片集和第二图片集，并根据比较结果确定录制视频的丢帧率。
在本实施例中，投屏视频的丢帧率测试系统通过第三方设备得到录制视频，录制视频可等同于投屏视频，比较与录制视频对应的第一图片集和与原视频对应的第二图片集，确定录制视频的丢帧率，从而高效、准确地检测到投屏视频的丢帧率，进而精确地评价投屏视频的画质。
在一个可选的实施方式中，参见图8，投屏视频的丢帧率测试系统还包括设置模块4，用于设置录制视频的帧率和原视频的帧率，录制视频的帧率和原视频的帧率成比例关系。
在本实施方式中，投屏视频的丢帧率测试系统中的录制视频的帧率和原视频的帧率成比例关系，便于量化录制视频和原视频对应静态图片的图片数量，从而提高检测投屏视频的丢帧率的效率。
在一个可选的实施方式中，比较模块3，还用于对于第一图片集中的各帧第一图片，比较第一图片与邻近第二图片的相似度。
其中，邻近第二图片为第二图片集中播放时刻与第一图片的投屏播放时刻的时间差小于差值阈值的图片。差值阈值根据实际需求自行确定。
参见图8，投屏视频的丢帧率测试系统还包括：
判断模块5，用于判断相似度和预设相似度的大小。
可以通过结构相似性度量方法、余弦相似度计算方法、直方图归一化方法、哈希算法等计算方法计算若干张静态图片的相似度。预设相似度根据需求自行设置。
确定模块6，用于当相似度大于或者等于预设相似度时，确定录制视频未丢帧；还用于当相似度小于预设相似度时，确定录制视频丢帧。
统计模块7，用于统计丢帧次数和未丢帧次数。
确定模块6，还用于根据丢帧次数和总次数的比值，确定录制视频的丢帧率。
其中，总次数为丢帧次数和未丢帧次数的总和。
在本实施方式中，投屏视频的丢帧率测试系统通过原视频播放时刻和录制视频投屏播放时刻的第一图片和第二图片的相似度，确定录制视频是否丢帧，根据丢帧次数和总次数的比值确定录制视频的丢帧率，从而评估录制视频的画质和流畅度，为进一步产品研发指明方向。
在一个可选的实施方式中，参见图8，投屏视频的丢帧率测试系统还包括：
生成模块8，用于根据丢帧率生成统计报告。
发送模块9，用于将统计报告发送至外部设备。
外部设备可以为投屏发送设备、投屏接收设备、云端等。
在本实施方式中，外部设备接收到统计报告后，将统计报告发送给测试人员，从而测试人员可以快速得到投屏视频丢失率的检测数据，提高测试效率，减少人工比对视频的误差。
在一个可选的实施方式中，投屏视频的丢帧率测试系统可应用于测试不同格式的投屏视频。
可测试的投屏视频格式包括不同的视频分辨率，例如480P、720P、1080P、蓝光、2K、4K等视频分辨率。
在本实施方式中，投屏视频的丢帧率测试系统可应用于一种或多种投屏视频格式，有普遍适用意义。
在一个可选的实施方式中，发送模块9，还用于发送投屏方式切换指令至投屏发送端和投屏接收端，以触发投屏发送端和投屏接收端按照投屏方式切换指令携带的无线投屏方式重新建立连接。
其中，无线投屏方式包括AirPlay、DLNA和Miracast中的至少一种。
当确定投屏发送端和投屏接收端重新建立连接之后，返回获取模块1以获取对投屏视频录制得到的录制视频。
在本实施方式中，投屏视频的丢帧率测试系统可检测通过不同的无线投屏方式得到的投屏视频，应用场景类型具有多样性。
在一个可选的实施方式中，发送模块9，还用于发送视频切换指令至投屏发送端，以触发投屏发送端依次切换不同视频格式类型的原视频进行播放并将切换后的原视频发送给投屏接收端。
不同视频格式类型包括不同的视频分辨率，包括480P、720P、1080P、蓝光、2K、4K等视频分辨率。
当确定投屏发送端将切换后的原视频发送给投屏接收端之后，返回获取模块1以获取对投屏视频录制得到的录制视频。
在本实施方式中，投屏视频的丢帧率测试系统可检测根据不同视频格式的原视频投屏后的投屏视频，同时可以切换投屏视频的视频格式，被检测的投屏视频不局限于单一的视频格式，适用场景广泛。
实施例3
本实施例提供一种投屏视频的丢帧率测试系统，参见图9，投屏视频的丢帧率测试系统包括摄像机91和服务器92，服务器92执行实施例1的投屏视频的丢帧率测试方法；摄像机91用于对投屏视频进行录制，以得到录制视频，并将录制视频发送至服务器92。
图10为一种具体的投屏视频的丢帧率测试系统的内部设备结构示意图，其中，画面接收器、待测设备、无线AP(无线访问接入点)、云端和PC(个人计算机)为服务器92的硬件设备，画面接收器为投屏接收设备，待测设备为投屏发送设备，摄像机91为第三方录制设备，无线AP即无线访问接入点，它能够把各个无线客户端连接起来，在本具体实例中，无线AP将待测设备和画面接收器通过WiFi信号(即无线通信信号)连接起来。测试人员通过PC接收画面接收器、摄像机91、待测设备等传输的信号，并对信号进行处理，从而控制帧率测试过程。PC将最后的测试结果传输至云端，测试人员通过云端发送测试任务，接收测试结果。
实施例4
本实施例提供了一种电子设备，图11为该电子设备的模块示意图。电子设备包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行程序时实现实施例1的投屏视频的丢帧率测试方法。图11显示的电子设备30仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。
如图11所示，电子设备30可以以通用计算设备的形式表现，例如其可以为服务器设备。电子设备30的组件可以包括但不限于：上述至少一个处理器31、上述至少一个存储器32、连接不同系统组件(包括存储器32和处理器31)的总线33。
总线33包括数据总线、地址总线和控制总线。
存储器32可以包括易失性存储器，例如随机存取存储器(RAM)321和/或高速缓存存储器322，还可以进一步包括只读存储器(ROM)323。
存储器32还可以包括具有一组(至少一个)程序模块324的程序/实用工具325，这样的程序模块324包括但不限于：操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。
处理器31通过运行存储在存储器32中的计算机程序，从而执行各种功能应用以及数据处理，例如本发明实施例1的投屏视频的丢帧率测试方法。
电子设备30也可以与一个或多个外部设备34(例如键盘、指向设备等)通信。这种通信可以通过输入/输出(I/O)接口35进行。并且，模型生成的设备30还可以通过网络适配器36与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图11所示，网络适配器36通过总线33与模型生成的设备30的其它模块通信。应当明白，尽管图中未示出，可以结合模型生成的设备30使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理器、外部磁盘驱动阵列、RAID(磁盘阵列)系统、磁带驱动器以及数据备份存储系统等。
应当注意，尽管在上文详细描述中提及了电子设备的若干单元/模块或子单元/模块，但是这种划分仅仅是示例性的并非强制性的。实际上，根据本发明的实施方式，上文描述的两个或更多单元/模块的特征和功能可以在一个单元/模块中具体化。反之，上文描述的一个单元/模块的特征和功能可以进一步划分为由多个单元/模块来具体化。
实施例5
本实施例提供了一种计算机可读存储介质，其上存储有计算机程序，程序被处理器执行时实现实施例1的投屏视频的丢帧率测试方法。
其中，可读存储介质可以采用的更具体可以包括但不限于：便携式盘、硬盘、随机存取存储器、只读存储器、可擦拭可编程只读存储器、光存储器件、磁存储器件或上述的任意合适的组合。
在可能的实施方式中，本发明还可以实现为一种程序产品的形式，其包括程序代码，当程序产品在终端设备上运行时，程序代码用于使终端设备执行实现实施例1的投屏视频的丢帧率测试方法。
其中，可以以一种或多种程序设计语言的任意组合来编写用于执行本发明的程序代码，程序代码可以完全地在用户设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户设备上部分在远程设备上执行或完全在远程设备上执行。
虽然以上描述了本发明的具体实施方式，但是本领域的技术人员应当理解，这仅是举例说明，本发明的保护范围是由所附权利要求书限定的。本领域的技术人员在不背离本发明的原理和实质的前提下，可以对这些实施方式做出多种变更或修改，但这些变更和修改均落入本发明的保护范围。

Claims (10)

1.一种投屏视频的丢帧率测试方法，其特征在于，所述投屏视频的丢帧率测试方法包括：
获取对所述投屏视频录制得到的录制视频，所述投屏视频为将投屏发送端发送的原视频在投屏接收端投屏播放的视频；
解析所述录制视频，得到对应所述录制视频的第一图片集，第一图片集包括多帧第一图片；
解析原视频，得到对应所述原视频的第二图片集，第二图片集包括多帧第二图片；
比较所述第一图片集和所述第二图片集，并根据比较结果确定所述录制视频的丢帧率。
2.如权利要求1所述的投屏视频的丢帧率测试方法，其特征在于，所述录制视频的录制帧率和原视频的播放帧率成比例关系。
3.如权利要求1所述的投屏视频的丢帧率测试方法，其特征在于，所述比较所述第一图片集和所述第二图片集，并根据比较结果确定所述录制视频的丢帧率的步骤包括：
对于所述第一图片集中的各帧第一图片，比较所述第一图片与邻近第二图片的相似度；所述邻近第二图片为所述第二图片集中播放时刻与所述第一图片的投屏播放时刻的时间差小于差值阈值的图片；
当所述相似度大于或者等于预设相似度时，确定所述录制视频未丢帧；
当所述相似度小于所述预设相似度时，确定所述录制视频丢帧；
统计丢帧次数和未丢帧次数；
根据所述丢帧次数和总次数的比值，确定所述录制视频的丢帧率；所述总次数为所述丢帧次数和所述未丢帧次数的总和。
4.如权利要求1-3任一项所述的投屏视频的丢帧率测试方法，其特征在于，所述根据比较结果确定所述录制视频的丢帧率的步骤后包括：
根据所述丢帧率生成统计报告；
将所述统计报告发送至外部设备。
5.如权利要求1-3中任一项所述的投屏视频的丢帧率测试方法，其特征在于，所述根据比较结果确定所述录制视频的丢帧率之后，还包括：
发送投屏方式切换指令至所述投屏发送端和投屏接收端，以触发所述投屏发送端和投屏接收端按照所述投屏方式切换指令携带的无线投屏方式重新建立连接；其中，所述无线投屏方式包括AirPlay、DLNA和Miracast中的至少一种；
当确定所述投屏发送端和投屏接收端重新建立连接之后，返回获取所述录制视频的步骤。
6.如权利要求1-3中任一项所述的投屏视频的丢帧率测试方法，其特征在于，所述根据比较结果确定所述录制视频的丢帧率之后，还包括：
发送视频切换指令至所述投屏发送端，以触发所述投屏发送端依次切换不同视频格式类型的原视频进行播放并将切换后的原视频发送给所述投屏接收端；
当确定所述投屏发送端将切换后的原视频发送给所述投屏接收端之后，返回获取所述录制视频的步骤。
7.一种投屏视频的丢帧率测试装置，其特征在于，所述投屏视频的丢帧率测试装置包括：
获取模块，用于获取对所述投屏视频录制得到的录制视频，所述投屏视频为将投屏发送端发送的原视频在投屏接收端投屏播放的视频；
解析模块，用于解析所述录制视频，得到对应所述录制视频的第一图片集，第一图片集包括多帧第一图片；还用于解析原视频，得到对应所述原视频的第二图片集，第二图片集包括多帧第二图片；
比较模块，用于比较所述第一图片集和所述第二图片集，并根据比较结果确定所述录制视频的丢帧率。
8.一种投屏视频的丢帧率测试系统，其特征在于，所述投屏视频的丢帧率测试系统包括摄像机和服务器，所述服务器执行权利要求1-6中任一项所述的投屏视频的丢帧率测试方法；所述摄像机用于对投屏视频进行录制，以得到录制视频，并将所述录制视频发送至所述服务器。
9.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1-6中任一项所述的投屏视频的丢帧率测试方法。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1-6中任一项所述的投屏视频的丢帧率测试方法。
CN202211313120.8A 2022-10-25 2022-10-25 丢帧率测试方法、装置、系统、电子设备及存储介质 Pending CN116193189A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211313120.8A CN116193189A (zh) 2022-10-25 2022-10-25 丢帧率测试方法、装置、系统、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211313120.8A CN116193189A (zh) 2022-10-25 2022-10-25 丢帧率测试方法、装置、系统、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN116193189A true CN116193189A (zh) 2023-05-30

Family

ID=86444841

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211313120.8A Pending CN116193189A (zh) 2022-10-25 2022-10-25 丢帧率测试方法、装置、系统、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN116193189A (zh)

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101345892A (zh) * 2008-08-19 2009-01-14 北京中星微电子有限公司 一种视频显示方法及其系统
CN104704827A (zh) * 2012-11-13 2015-06-10 英特尔公司 用于下一代视频的内容自适应变换译码
CN104717535A (zh) * 2015-03-11 2015-06-17 大连理工大学 一种地铁列车媒体播放模式的转换方法
CN106203534A (zh) * 2016-07-26 2016-12-07 南京航空航天大学 一种基于Boosting的代价敏感软件缺陷预测方法
CN107493471A (zh) * 2017-09-21 2017-12-19 北京奇艺世纪科技有限公司 一种视频传输质量的计算方法和装置
US20200097841A1 (en) * 2018-09-21 2020-03-26 Renovo Motors, Inc. Systems and methods for processing vehicle data
CN111866586A (zh) * 2020-07-28 2020-10-30 精英数智科技股份有限公司 井下视频数据处理方法、装置、电子设备及存储介质
CN111862063A (zh) * 2020-07-27 2020-10-30 中国平安人寿保险股份有限公司 一种视频质量评估方法、装置、计算机设备和存储介质
CN112394896A (zh) * 2020-11-18 2021-02-23 努比亚技术有限公司 一种反向投屏帧率控制方法、设备及计算机可读存储介质
CN113452965A (zh) * 2021-06-25 2021-09-28 深圳市吉祥腾达科技有限公司 测试交换机与网络摄像机兼容性的自动化测试方法及系统
CN113905249A (zh) * 2021-09-30 2022-01-07 上海哔哩哔哩科技有限公司 推流异常检测方法及装置
CN113938674A (zh) * 2021-10-25 2022-01-14 重庆紫光华山智安科技有限公司 视频质量检测方法、装置、电子设备及可读存储介质
CN114390337A (zh) * 2020-10-21 2022-04-22 华为技术有限公司 投屏方法、系统及电子设备
CN115115968A (zh) * 2022-05-13 2022-09-27 腾讯科技（深圳）有限公司 视频质量评价方法、装置及计算机可读存储介质

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101345892A (zh) * 2008-08-19 2009-01-14 北京中星微电子有限公司 一种视频显示方法及其系统
CN104704827A (zh) * 2012-11-13 2015-06-10 英特尔公司 用于下一代视频的内容自适应变换译码
CN104717535A (zh) * 2015-03-11 2015-06-17 大连理工大学 一种地铁列车媒体播放模式的转换方法
CN106203534A (zh) * 2016-07-26 2016-12-07 南京航空航天大学 一种基于Boosting的代价敏感软件缺陷预测方法
CN107493471A (zh) * 2017-09-21 2017-12-19 北京奇艺世纪科技有限公司 一种视频传输质量的计算方法和装置
US20200097841A1 (en) * 2018-09-21 2020-03-26 Renovo Motors, Inc. Systems and methods for processing vehicle data
CN111862063A (zh) * 2020-07-27 2020-10-30 中国平安人寿保险股份有限公司 一种视频质量评估方法、装置、计算机设备和存储介质
CN111866586A (zh) * 2020-07-28 2020-10-30 精英数智科技股份有限公司 井下视频数据处理方法、装置、电子设备及存储介质
CN114390337A (zh) * 2020-10-21 2022-04-22 华为技术有限公司 投屏方法、系统及电子设备
CN112394896A (zh) * 2020-11-18 2021-02-23 努比亚技术有限公司 一种反向投屏帧率控制方法、设备及计算机可读存储介质
CN113452965A (zh) * 2021-06-25 2021-09-28 深圳市吉祥腾达科技有限公司 测试交换机与网络摄像机兼容性的自动化测试方法及系统
CN113905249A (zh) * 2021-09-30 2022-01-07 上海哔哩哔哩科技有限公司 推流异常检测方法及装置
CN113938674A (zh) * 2021-10-25 2022-01-14 重庆紫光华山智安科技有限公司 视频质量检测方法、装置、电子设备及可读存储介质
CN115115968A (zh) * 2022-05-13 2022-09-27 腾讯科技（深圳）有限公司 视频质量评价方法、装置及计算机可读存储介质

Similar Documents

Publication Publication Date Title
US20220368995A1 (en) Training an encrypted video stream network scoring system with non-reference video scores
US9615112B2 (en) Method, system, player and mobile terminal for online video playback
US10453493B2 (en) Method and apparatus for recording and replaying video of terminal
WO2021244224A1 (zh) 卡顿检测方法、装置、设备及可读存储介质
JP2010537463A (ja) 映像表示デバイスの電力消費量の自動低減
US10334242B1 (en) Test system and test method for audio-video device
CN113923441A (zh) 视频质量的评估方法、装置及电子设备
CN108401190B (zh) 一种用于对视频帧进行实时标注的方法与设备
WO2020052062A1 (zh) 检测方法和装置
US20160373816A1 (en) Automation testing apparatus
CN116193189A (zh) 丢帧率测试方法、装置、系统、电子设备及存储介质
US10764578B2 (en) Bit rate optimization system and method
CN107332914B (zh) 一种终端展示方法及装置
CN109739607B (zh) 动态图像加载方法、装置、设备及存储介质
CN111782876A (zh) 一种数据处理方法、装置、系统及存储介质
US7469347B2 (en) Methods to test multimedia devices on computer systems
CN115878379A (zh) 一种数据备份方法、主服务器、备份服务器及存储介质
CN111818338B (zh) 一种异常显示检测方法、装置、设备及介质
US20210194610A1 (en) Monitoring video broadcasts
CN110502416A (zh) 应用卡顿检测方法、装置、计算机设备及可读介质
WO2021217467A1 (zh) 一种智能摄像头的测试方法及装置
US10165313B1 (en) Testing set top appliance boxes
JP2003061080A (ja) ネットワーク対応監視システム
CN116708389B (zh) 在线考试的多端监控方法、终端设备及可读存储介质
CN112866669B (zh) 一种数据切换时间确定方法及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination