CN113259654B - 视频帧率的检测方法、装置、电子设备以及存储介质 - Google Patents

视频帧率的检测方法、装置、电子设备以及存储介质 Download PDF

Info

Publication number
CN113259654B
CN113259654B CN202010085349.5A CN202010085349A CN113259654B CN 113259654 B CN113259654 B CN 113259654B CN 202010085349 A CN202010085349 A CN 202010085349A CN 113259654 B CN113259654 B CN 113259654B
Authority
CN
China
Prior art keywords
video
frame rate
preset
original
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010085349.5A
Other languages
English (en)
Other versions
CN113259654A (zh
Inventor
罗必达
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Dajia Internet Information Technology Co Ltd
Original Assignee
Beijing Dajia Internet Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Dajia Internet Information Technology Co Ltd filed Critical Beijing Dajia Internet Information Technology Co Ltd
Priority to CN202010085349.5A priority Critical patent/CN113259654B/zh
Publication of CN113259654A publication Critical patent/CN113259654A/zh
Application granted granted Critical
Publication of CN113259654B publication Critical patent/CN113259654B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details
    • H04N17/004Diagnosis, testing or measuring for television systems or their details for digital television systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64746Control signals issued by the network directed to the server or the client
    • H04N21/64761Control signals issued by the network directed to the server or the client directed to the server
    • H04N21/64769Control signals issued by the network directed to the server or the client directed to the server for rate control

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本公开关于一种视频帧率的检测方法、装置、电子设备以及存储介质,属于视频处理技术领域。所述方法包括:在播放原始视频的过程中,按照预设抓取频率抓取原始视频的视频原始数据;在抓取的各视频原始数据中,确定预设显示区域中的图像数据与前一帧不相同的视频原始数据的数目;基于数目,确定当前显示的视频的帧率。采用本公开可以解决最终得到的视频的帧率不准确的问题。

Description

视频帧率的检测方法、装置、电子设备以及存储介质
技术领域
本公开涉及视频处理技术领域,尤其涉及一种视频帧率的检测方法、装置、电子设备以及存储介质。
背景技术
视频帧率是视频流畅度的重要指标,技术人员可以检测竞品的视频帧率,判断出自己开发的视频播放应用的视频播放流畅度是否达到竞品的水平。
现有技术中,一般通过抓取屏幕上正在播放的视频的图像,然后基于该抓取的图像的变化来确定视频的帧率。
在实现本申请的过程中,技术人员发现现有技术中至少存在以下问题:
在抓取到的屏幕上正在播放的视频时,抓取到的视频不仅仅是原始视频还会有一些除原始视频以外的显示元素,如显示在原始视频上层的评论信息,这些视频中的显示元素也会发生变化,因此,会导致最终得到的视频的帧率不准确。
发明内容
本公开提供一种视频帧率的检测方法、装置、电子设备以及存储介质,以至少解决相关技术中得到的视频的帧率不准确的问题。本公开的技术方案如下:
根据本公开实施例的第一方面,提供一种视频帧率的检测方法,包括:
在播放原始视频的过程中,按照预设抓取频率抓取所述原始视频的视频原始数据,其中,所述视频原始数据为未经编码的视频数据;
在抓取的各视频原始数据中,确定预设显示区域中的图像数据与前一帧不相同的视频原始数据的数目,其中,所述预设显示区域在所述视频原始数据的视频显示区域中除上层显示元素的显示区域之外的显示区域内,所述上层显示元素为除所述原始视频以外的显示元素;
基于所述数目,确定当前显示的视频的帧率。
可选的,所述上层显示元素包括显示有动态信息的操作控件、信息显示窗和系统窗口中的至少一种。
可选的,所述基于所述数目,确定当前显示的视频的帧率,包括:
确定所述数目与1的和值,将所述和值与预设时长的比值,确定为所述视频显示区域中视频的帧率,其中,所说预设时长是抓取所述各视频原始数据所使用的总时长。
可选的,所述按照预设抓取频率抓取所述原始视频的视频原始数据,包括:
按照预设抓取频率,通过系统程序的屏幕内容抓取接口,抓取所述原始视频的视频原始数据。
可选的,所述预设显示区域的数目大于1,所述在抓取的各视频原始数据中,确定预设显示区域中的图像数据与前一帧不相同的视频原始数据的数目,包括:
在抓取的各视频原始数据中,确定任一预设显示区域的图像数据与前一帧不相同的视频原始数据的数目。
可选的,所述预设抓取频率大于或等于显示部件的刷新率。
可选的,所述基于所述数目和所述预设时长,确定当前显示的视频的帧率之后,还包括:
获取相邻的多个预设时长分别对应的帧率;
在获取的各帧率中,确定低于预设阈值的帧率的数目;
确定所述数目与获取的帧率的总数目的比值,得到卡顿率。
第二方面,提供一种视频帧率的检测装置,包括:
抓取模块,用于在播放原始视频的过程中,按照预设抓取频率抓取所述原始视频的视频原始数据,其中,所述视频原始数据为未经编码的视频数据;
计数模块,用于在抓取的各视频原始数据中,确定预设显示区域中的图像数据与前一帧不相同的视频原始数据的数目,其中,所述预设显示区域在所述视频原始数据的视频显示区域中除上层显示元素的显示区域之外的显示区域内,所述上层显示元素为除所述原始视频以外的显示元素;
确定模块,用于基于所述数目,确定当前显示的视频的帧率。
可选的,所述上层显示元素包括显示有动态信息的操作控件、信息显示窗和系统窗口中的至少一种。
可选的,所述确定模块,用于:
确定所述数目与1的和值,将所述和值与预设时长的比值,确定为所述视频显示区域中视频的帧率,其中,所说预设时长是抓取所述各视频原始数据所使用的总时长。
可选的,所述抓取模块,用于:
按照预设抓取频率,通过系统程序的屏幕内容抓取接口,抓取所述原始视频的视频原始数据。
可选的,所述预设显示区域的数目大于1,所述计数模块,用于:
在抓取的各视频原始数据中,确定任一预设显示区域的图像数据与前一帧不相同的视频原始数据的数目。
可选的,所述预设抓取频率大于或等于显示部件的刷新率。
可选的,所述确定模块还用于:
获取相邻的多个预设时长分别对应的帧率;
在获取的各帧率中,确定低于预设阈值的帧率的数目;
确定所述数目与获取的帧率的总数目的比值,得到卡顿率。
第三方面,提供一种电子设备,包括:
所述电子设备包括处理器和存储器,所述存储器中存储有至少一条指令,所述指令由处理器加载并执行以实现如上所述的视频帧率的检测方法所执行的操作。
第四方面,提供一种存储介质,包括:
所述存储介质中存储有至少一条指令,所述指令由处理器加载并执行以实现如上所述的视频帧率的检测方法所执行的操作。
第五方面,提供了一种计算机程序产品,包括:
所述计算机程序产品存储有至少一条指令,所述指令由处理器加载并执行以实现如上所述的视频帧率的检测方法所执行的操作。
本公开的实施例提供的技术方案至少带来以下有益效果:
本公开实施例通过按照预设抓取频率抓取原始视频的视频原始数据,然后基于抓取的各视频原始数据中,确定预设显示区域中的图像数据与前一帧不相同的视频原始数据的数目,然后基于该数目确定当前显示的视频的帧率,从而,可以获取到更准确的视频的帧率。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理,并不构成对本公开的不当限定。
图1是根据一示例性实施例示出的实施环境示意图;
图2是根据一示例性实施例示出的一种视频帧率的检测方法的流程图;
图3是根据一示例性实施例示出的一种视频帧率的检测方法的界面示意图;
图4是根据一示例性实施例示出的一种视频帧率的检测方法的界面示意图;
图5是根据一示例性实施例示出的一种视频帧率的检测方法的界面示意图;
图6是根据一示例性实施例示出的一种视频帧率的检测方法的获取卡顿率的流程图;
图7是根据一示例性实施例示出的一种视频帧率的检测装置的示意图;
图8是根据一示例性实施例示出的一种视频帧率的检测终端结构示意图。
具体实施方式
为了使本领域普通人员更好地理解本公开的技术方案,下面将结合附图,对本公开实施例中的技术方案进行清楚、完整地描述。
本公开提供视频帧率的检测方法可以由终端实现。终端可以是手机、平板电脑、台式电脑、笔记本电脑等,终端可以具备屏幕、扬声器等部件。终端可以运行有安卓系统,可以设置安卓系统的参数,终端可以运行有检测视频的帧率的应用程序,如视频帧率检测应用程序。终端还可以运行有播放视频的应用程序,如短视频播放应用程序、直播应用程序、视频播放器等,该终端具有播放视频的功能,可以对视频数据进行解码。
图1是根据一示例性实施例示出的一种实施环境的示意图,如图1所示,本公开实施例中提供的视频帧率的检测方法,可以使用短视频播放应用程序播放视频,用户可以先进入该应用程序,在进入该应用程序后用户可以根据自己的喜好选择关注、发现、同城界面,并在上述界面中选择一个视频的跳转链接,则界面跳转至视频播放界面,在进入视频播放界面后视频会自动在该界面播放,同时用户可以在该界面内可以进行评论、点赞、分享等操作。本公开实施例中以短视频播放应用程序和视频帧率检测应用程序为例进行方案的详细说明,其它情况与之类似,不再赘述。
在技术人员使用短视频播放应用程序时,技术人员点播视频,视频数据经封装以及编码后被传输至终端,终端接收该视频数据,调用私有协议以及中央处理器对该经封装以及编码后的视频数据进行解封装,然后获取屏幕设置的播放帧率,根据播放帧率将视频数据处理为待解码的原始视频的视频原始数据,例如,该经封装以及编码后的视频数据的帧率为30Hz,屏幕设置的播放帧率是60Hz,则中央处理器为了使两个帧率相同,即为了能使屏幕播放该视频,会将上述每一个视频数据的视频帧复制两份,从而得到待解码的原始视频的视频原始数据。然后将该视频原始数据发送给图像处理器,图像处理器对其进行解码得到原始视频的视频原始数据,在得到该视频原始数据后,将其发送给显示部件,显示部件会显示该原始视频。
图2是根据一示例性实施例示出的一种视频帧率的检测方法的流程图。参照图2,该流程包括:
步骤201、在播放原始视频的过程中,按照预设抓取频率抓取原始视频的视频原始数据。
其中,视频原始数据为未经编码的视频数据。
在实施中,在检测视频的帧率之前,技术人员可以打开视频帧率检测应用程序,如图3所示,技术人员可以在界面上的“检测帧率”后的输入框中输入数字,对抓取周期进行设置,该检测帧率的单位可以是Hz,即预设时长默认为一秒,例如将检测帧率设置为60Hz,则代表将抓取周期设置为六十分之一秒,即设置视频帧率检测应用程序每秒对视频抓取六十次。
在抓取周期设置完成后,技术人员可以点击“选择检测区域”控件,截取至少一个预设显示区域,该至少一个预设区域可以是技术人员根据要检测的视频人为截取的,在截取每个预设显示区域时,要截取视频原始数据的视频显示区域中除上层显示元素的显示区域之外的显示区域,例如,不能截取到动态信息的操作控件、信息显示窗和系统窗口中的至少一种,保证在该视频播放的过程中所截取的每个预设显示区域内一直都只有视频内容,同时每个截取的预设显示区域的大小要大于100个像素。
在上述设置完成后,技术人员可以将视频帧率检测应用程序置于后台运行,然后点击相应控件进入短视频应用程序的短视频播放界面,如图4所示,在进入该界面后,屏幕的左下角会显示一个“点击开始”的控件,技术人员可以点击该控件开始对视频的帧率进行检测,在检测时检测完成的上一秒的视频帧率会在原“点击开始”控件处显示。在检测时,技术人员还可以再次点击该控件,停止对视频帧率的检测,在停止检测后,技术人员可以进入后台运行的视频帧率检测应用程序,在该应用程序的实时帧率列表中会显示在整个检测过程中所有得到的帧率。
在抓取图像处理器当前向显示部件输出的视频原始数据时,处理方式可以如下:
其中,视频帧率检测应用程序可以抓取图像处理器的显存中的视频原始数据,也可以抓取显示器的显存中的视频原始数据。
在进行视频播放时,图像处理器会对接收到的视频原始数据进行解码,该图像处理器可以是GPU(Graphics Processing Unit,图形处理器),在解码完成后图像处理器会向显示器传输视频原始数据,在传输时视频原始数据会先被存储在显存中,然后再继续传输或者进行显示,在下一视频原始数据被传输之前,显存中会一直存储该视频原始数据,使得视频帧率检测应用程序无论何时都可以抓取到视频原始数据,例如,检测帧率设置为50Hz,视频原始数据的帧率是20Hz,即视频帧率检测应用程序每五十分之一秒抓取一次视频原始数据,视频原始数据是每二十分之一秒传输一次,在进行第一次视频原始数据传输时,该视频原始数据会被存储在显存中再进行传输。在抓取第一次传输的视频原始数据时,图像处理器与显示器之间是没有数据传输的,视频帧率检测应用程序通过访问显存中,得到存储在显存中的第一次传输的视频原始数据。
该视频帧率检测应用程序抓取第一视频原始数据以及第二视频原始数据的方式可以如下:
其中,第一视频原始数据以及第二视频原始数据分别代表在进行传输是相邻的前后两次传输的视频原始数据。
首先调用安卓系统的屏幕录制函数,录制每个预设显示区域内的视频,然后调用抓取函数抓取第一视频原始数据以及第二视频原始数据,以此类推,如果没有接收到停止指令,持续进行上述抓取操作。
例如,视频帧率检测应用程序调用系统函数MediaProjection(媒体投影函数)进行屏幕录制,抓取到的屏幕内容,即显示帧会被保存在一个SurfaceTexture(表面结构)中,然后按照检测帧率通过在opengl(Open Graphics Library,开放图形语言)函数中设定抓取的频率,来抓取SurfaceTexture中保存的相应视频原始数据,经第一次抓取得到第一视频原始数据,经第二次抓取得到第二视频原始数据,以此类推,如果没有接收到结束抓取指令,持续进行上述抓取操作。
步骤202、在抓取的各视频原始数据中,确定预设显示区域中的图像数据与前一帧不相同的视频原始数据的数目。
其中,每个预设显示区域在视频原始数据的视频显示区域中除上层显示元素的显示区域之外的显示区域内,上层显示元素为除原始视频以外的显示元素。
在实施中,在抓取第一次传输的视频原始数据之后,每抓取到一次传输的视频原始数据,将当前抓取的每个预设显示区域中的视频原始数据与前一个视频原始数据进行比较,如果有任何一个预设显示区域中的视频原始数据与前一个视频原始数据不同,则记录数目加1,其具体实施方式可以如下:
其中,初始的数目为0。
在抓取到第一视频原始数据和第二视频原始数据后,视频帧率检测应用程序对第一视频原始数据和第二视频原始数据进行对比。如果抓取到的第一视频原始数据与第二视频原始数据的内容相同,则表示原始视频的视频原始数据并没有变化,即第一视频原始数据和第二视频原始数据是同一视频原始数据,数目保持不变;如果抓取到的第一视频原始数据与第二视频原始数据不同,则表示视频的视频帧发生了变化,即第一视频原始数据和第二视频原始数据是两个不同的视频原始数据,数目加一。
步骤203、基于数目,确定当前显示的视频的帧率。
在实施中,重复上述步骤202的操作,直至时间达到预设时长,如1秒,将数目与1之和,确定为视频显示区域中视频的帧率,处理方式可以如下:
在时间达到检测帧率的预设时长时,将记录的数目与1求和,得到视频显示区域中视频的帧率,如果视频帧率检测应用程序并未接收到停止指令,则将数目重新设置为0,继续检测下一秒的视频的帧率,上一秒的视频的帧率会显示在屏幕的左下角。
例如,检测帧率的预设时长是一秒,当时间达到一秒时,记录的数目是n,然后用n+1除以预设时长得到的视频显示区域中视频的帧率,例如,预设时长是1秒,则视频显示区域中视频的帧率为n+1。在上述预设时长进行完之后,即达到1秒之后,视频帧率检测应用程序并未接收到停止指令,则视频帧率检测应用程序将数目重新设置为0,继续进行步骤202中的操作,直至再次达到一秒,进行上述操作得到这一秒的视频显示区域中视频的帧率,以此类推,每次得到的帧率都会显示在屏幕的左下角,并持续显示一秒,直至下一个帧率被计算出来。
如果视频帧率检测应用程序接收到停止指令,则停止对视频的帧率的检测,技术人员可以将界面切换至后台运行的视频帧率检测应用程序,视频帧率检测应用程序会将检测到的视频的帧率显示在界面上,如图5所示。
基于上述步骤检测的帧率,还可以通过本方法获得视频的卡顿率,如图6所示,其实现方式可以如下:
步骤601、获取相邻的多个预设时长分别对应的帧率。
在实施中,可以获取多个连续的一秒的帧率,也可以获取多个连续的预设时长是一分钟的帧率。
步骤602、在获取的各帧率中,确定低于预设阈值的帧率的数目。
其中,预设阈值是不出现卡顿的最低帧率的数值,预设阈值的帧率的数目的初始值为0。
在实施中,技术人员可以设置预设阈值,在预设阈值设置完成后,视频帧率检测应用程序可以根据预设阈值记录低于预设阈值的帧率的数目,如果检测出的帧率低于该预设阈值则低于预设阈值的帧率的数目加一,如果不低于该预设阈值,则记录的低于预设阈值的帧率的数目不变,视频帧率检测应用程序重复上述操作,将获取的各帧率逐个与预设阈值进行对比,得到最终的卡顿的数目。
步骤603、确定该数目与获取的帧率的总数目的比值,得到卡顿率。
在实施中,视频帧率检测应用程序将低于预设阈值的帧率的数目与帧率的总数目进行除法运算,得到一个比值,该比值即为卡顿率。
本公开实施例通过按照预设抓取频率抓取原始视频的视频原始数据,然后基于抓取的各视频原始数据中,确定预设显示区域中的图像数据与前一帧不相同的视频原始数据的数目,然后基于该数目确定当前显示的视频的帧率,从而,可以获取到更准确的视频的帧率。
图7是根据一示例性实施例示出的一种视频帧率检测装置的示意图。参照图7,该装置包括:
抓取模块710,用于在播放原始视频的过程中,按照预设抓取频率抓取所述原始视频的视频原始数据,其中,所述视频原始数据为未经编码的视频数据;
计数模块720,用于在抓取的各视频原始数据中,确定预设显示区域中的图像数据与前一帧不相同的视频原始数据的数目,其中,所述预设显示区域在所述视频原始数据的视频显示区域中除上层显示元素的显示区域之外的显示区域内,所述上层显示元素为除所述原始视频以外的显示元素;
确定模块730,用于基于所述数目,确定当前显示的视频的帧率。
可选的,所述上层显示元素包括显示有动态信息的操作控件、信息显示窗和系统窗口中的至少一种。
可选的,所述确定模块730,用于:
确定所述数目与1的和值,将所述和值与预设时长的比值,确定为所述视频显示区域中视频的帧率,其中,所说预设时长是抓取所述各视频原始数据所使用的总时长。
可选的,所述抓取模块710,用于:
按照预设抓取频率,通过系统程序的屏幕内容抓取接口,抓取所述原始视频的视频原始数据。
可选的,所述预设显示区域的数目大于1,所述计数模块720,用于:
在抓取的各视频原始数据中,确定任一预设显示区域的图像数据与前一帧不相同的视频原始数据的数目。
可选的,所述预设抓取频率大于或等于显示部件的刷新率。
可选的,所述确定模块730还用于:
获取相邻的多个预设时长分别对应的帧率;
在获取的各帧率中,确定低于预设阈值的帧率的数目;
确定所述数目与获取的帧率的总数目的比值,得到卡顿率。
本公开实施例通过按照预设抓取频率抓取原始视频的视频原始数据,然后基于抓取的各视频原始数据中,确定预设显示区域中的图像数据与前一帧不相同的视频原始数据的数目,然后基于该数目确定当前显示的视频的帧率,从而,可以获取到更准确的视频的帧率。
操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图8是根据一示例性实施例示出的一种视频帧率检测装置800的框图。该终端800可以是:智能手机、平板电脑、MP3播放器(Moving Picture Experts Group Audio LayerIII,动态影像专家压缩标准音频层面3)、MP4(Moving Picture Experts Group AudioLayer IV,动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。终端800还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。
通常,终端800包括有:处理器801和存储器802。
处理器801可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器801可以采用DSP(Digital Signal Processing,数字信号处理)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器801也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(Central ProcessingUnit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器801可以在集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器801还可以包括AI(Artificial Intelligence,人工智能)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器802可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器802还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器802中的非暂态的计算机可读存储介质用于存储至少一个指令,该至少一个指令用于被处理器801所执行以实现本申请中方法实施例提供的视频帧率的检测方法。
在一些实施例中,终端800还可选包括有:外围设备接口803和至少一个外围设备。处理器801、存储器802和外围设备接口803之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口803相连。具体地,外围设备包括:射频电路804、触摸显示屏805、摄像头806、音频电路807、定位组件808和电源809中的至少一种。
外围设备接口803可被用于将I/O(Input/Output,输入/输出)相关的至少一个外围设备连接到处理器801和存储器802。在一些实施例中,处理器801、存储器802和外围设备接口803被集成在同一芯片或电路板上;在一些其他实施例中,处理器801、存储器802和外围设备接口803中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。
射频电路804用于接收和发射RF(Radio Frequency,射频)信号,也称电磁信号。射频电路804通过电磁信号与通信网络以及其他通信设备进行通信。射频电路804将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路804包括:天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路804可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:城域网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity,无线保真)网络。在一些实施例中,射频电路804还可以包括NFC(Near Field Communication,近距离无线通信)有关的电路,本申请对此不加以限定。
显示屏805用于显示UI(User Interface,用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏805是触摸显示屏时,显示屏805还具有采集在显示屏805的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器801进行处理。此时,显示屏805还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏805可以为一个,设置终端800的前面板;在另一些实施例中,显示屏805可以为至少两个,分别设置在终端800的不同表面或呈折叠设计;在再一些实施例中,显示屏805可以是柔性显示屏,设置在终端800的弯曲表面上或折叠面上。甚至,显示屏805还可以设置成非矩形的不规则图形,也即异形屏。显示屏805可以采用LCD(LiquidCrystal Display,液晶显示屏)、OLED(Organic Light-Emitting Diode,有机发光二极管)等材质制备。
摄像头组件806用于采集图像或视频。可选地,摄像头组件806包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头组件806还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。
音频电路807可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器801进行处理,或者输入至射频电路804以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在终端800的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器801或射频电路804的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频电路807还可以包括耳机插孔。
定位组件808用于定位终端800的当前地理位置,以实现导航或LBS(LocationBased Service,基于位置的服务)。定位组件808可以是基于美国的GPS(GlobalPositioning System,全球定位系统)、中国的北斗系统、俄罗斯的格雷纳斯系统或欧盟的伽利略系统的定位组件。
电源809用于为终端800中的各个组件进行供电。电源809可以是交流电、直流电、一次性电池或可充电电池。当电源809包括可充电电池时,该可充电电池可以支持有线充电或无线充电。该可充电电池还可以用于支持快充技术。
在一些实施例中,终端800还包括有一个或多个传感器810。该一个或多个传感器810包括但不限于:加速度传感器811、陀螺仪传感器812、压力传感器813、指纹传感器814、光学传感器815以及接近传感器816。
加速度传感器811可以检测以终端800建立的坐标系的三个坐标轴上的加速度大小。比如,加速度传感器811可以用于检测重力加速度在三个坐标轴上的分量。处理器801可以根据加速度传感器811采集的重力加速度信号,控制触摸显示屏805以横向视图或纵向视图进行用户界面的显示。加速度传感器811还可以用于游戏或者用户的运动数据的采集。
陀螺仪传感器812可以检测终端800的机体方向及转动角度,陀螺仪传感器812可以与加速度传感器811协同采集用户对终端800的3D动作。处理器801根据陀螺仪传感器812采集的数据,可以实现如下功能:动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。
压力传感器813可以设置在终端800的侧边框和/或触摸显示屏805的下层。当压力传感器813设置在终端800的侧边框时,可以检测用户对终端800的握持信号,由处理器801根据压力传感器813采集的握持信号进行左右手识别或快捷操作。当压力传感器813设置在触摸显示屏805的下层时,由处理器801根据用户对触摸显示屏805的压力操作,实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。
指纹传感器814用于采集用户的指纹,由处理器801根据指纹传感器814采集到的指纹识别用户的身份,或者,由指纹传感器814根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时,由处理器801授权该用户执行相关的敏感操作,该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器814可以被设置终端800的正面、背面或侧面。当终端800上设置有物理按键或厂商Logo时,指纹传感器814可以与物理按键或厂商Logo集成在一起。
光学传感器815用于采集环境光强度。在一个实施例中,处理器801可以根据光学传感器815采集的环境光强度,控制触摸显示屏805的显示亮度。具体地,当环境光强度较高时,调高触摸显示屏805的显示亮度;当环境光强度较低时,调低触摸显示屏805的显示亮度。在另一个实施例中,处理器801还可以根据光学传感器815采集的环境光强度,动态调整摄像头组件806的拍摄参数。
接近传感器816,也称距离传感器,通常设置在终端800的前面板。接近传感器816用于采集用户与终端800的正面之间的距离。在一个实施例中,当接近传感器816检测到用户与终端800的正面之间的距离逐渐变小时,由处理器801控制触摸显示屏805从亮屏状态切换为息屏状态;当接近传感器816检测到用户与终端800的正面之间的距离逐渐变大时,由处理器801控制触摸显示屏805从息屏状态切换为亮屏状态。
本领域技术人员可以理解,图8中示出的结构并不构成对终端800的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
在示例性实施例中,还提供了一种包括指令的存储介质,例如包括指令的存储器804,上述指令可由装置800的处理器820执行以完成上述方法。可选地,存储介质可以是非临时性计算机可读存储介质,例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (16)

1.一种视频帧率的检测方法,其特征在于,所述方法包括:
在播放原始视频的过程中,按照预设抓取频率抓取所述原始视频的视频原始数据,其中,所述视频原始数据为未经编码的视频数据;
在抓取预设时长内的各视频原始数据中,确定预设显示区域中的图像数据与前一帧不相同的视频原始数据的数目,其中,所述预设显示区域在所述视频原始数据的视频显示区域中除上层显示元素的显示区域之外的显示区域内,所述上层显示元素为除所述原始视频以外的显示元素,其中,所述预设时长是抓取所述各视频原始数据所使用的总时长;
基于所述数目和所述预设时长,确定当前显示的视频的帧率,所述帧率显示在屏幕的左下角;
在未接收到停止指令的情况下,继续检测下一个所述预设时长内所述原始视频的帧率,所述停止指令用于停止检测所述原始视频的帧率;
基于下一个所述预设时长内所述原始视频的帧率,更新所述屏幕的左下角处所显示的帧率;
在停止检测所述原始视频的帧率的情况下,响应于界面切换操作,在视频帧率检测应用程序的界面中,显示至少一个所述预设时长对应的帧率,所述视频帧率检测应用程序用于对视频的帧率进行检测。
2.根据权利要求1所述的方法,其特征在于,所述上层显示元素包括显示有动态信息的操作控件、信息显示窗和系统窗口中的至少一种。
3.根据权利要求1所述的方法,其特征在于,所述基于所述数目和所述预设时长,确定当前显示的视频的帧率,包括:
确定所述数目与1的和值,将所述和值与所述预设时长的比值,确定为所述视频显示区域中视频的帧率。
4.根据权利要求1所述的方法,其特征在于,所述按照预设抓取频率抓取所述原始视频的视频原始数据,包括:
按照预设抓取频率,通过系统程序的屏幕内容抓取接口,抓取所述原始视频的视频原始数据。
5.根据权利要求1所述的方法,其特征在于,所述预设显示区域的数目大于1,所述在抓取预设时长内的各视频原始数据中,确定预设显示区域中的图像数据与前一帧不相同的视频原始数据的数目,包括:
在抓取所述预设时长内的各视频原始数据中,确定任一预设显示区域的图像数据与前一帧不相同的视频原始数据的数目。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述预设抓取频率大于或等于显示部件的刷新率。
7.根据权利要求1-5任一项所述的方法,其特征在于,所述基于所述数目和所述预设时长,确定当前显示的视频的帧率之后,还包括:
获取相邻的多个预设时长分别对应的帧率;
在获取的各帧率中,确定低于预设阈值的帧率的数目;
确定所述数目与获取的帧率的总数目的比值,得到卡顿率。
8.一种视频帧率的检测装置,其特征在于,所述装置包括:
抓取模块,用于在播放原始视频的过程中,按照预设抓取频率抓取所述原始视频的视频原始数据,其中,所述视频原始数据为未经编码的视频数据;
计数模块,用于在抓取预设时长内的各视频原始数据中,确定预设显示区域中的图像数据与前一帧不相同的视频原始数据的数目,其中,所述预设显示区域在所述视频原始数据的视频显示区域中除上层显示元素的显示区域之外的显示区域内,所述上层显示元素为除所述原始视频以外的显示元素,其中,所述预设时长是抓取所述各视频原始数据所使用的总时长;
确定模块,用于基于所述数目和所述预设时长,确定当前显示的视频的帧率,所述帧率显示在屏幕的左下角;
在未接收到停止指令的情况下,继续检测下一个所述预设时长内所述原始视频的帧率,所述停止指令用于停止检测所述原始视频的帧率;
基于下一个所述预设时长内所述原始视频的帧率,更新所述屏幕的左下角处所显示的帧率;
在停止检测所述原始视频的帧率的情况下,响应于界面切换操作,在视频帧率检测应用程序的界面中,显示至少一个所述预设时长对应的帧率,所述视频帧率检测应用程序用于对视频的帧率进行检测。
9.根据权利要求8所述的装置,其特征在于,所述上层显示元素包括显示有动态信息的操作控件、信息显示窗和系统窗口中的至少一种。
10.根据权利要求8所述的装置,其特征在于,所述确定模块,用于:
确定所述数目与1的和值,将所述和值与所述预设时长的比值,确定为所述视频显示区域中视频的帧率。
11.根据权利要求8所述的装置,其特征在于,所述抓取模块,用于:
按照预设抓取频率,通过系统程序的屏幕内容抓取接口,抓取所述原始视频的视频原始数据。
12.根据权利要求8所述的装置,其特征在于,所述预设显示区域的数目大于1,所述计数模块,用于:
在抓取所述预设时长内的各视频原始数据中,确定任一预设显示区域的图像数据与前一帧不相同的视频原始数据的数目。
13.根据权利要求8-12任一项所述的装置,其特征在于,所述预设抓取频率大于或等于显示部件的刷新率。
14.根据权利要求8-12任一项所述的装置,其特征在于,所述确定模块还用于:
获取相邻的多个预设时长分别对应的帧率;
在获取的各帧率中,确定低于预设阈值的帧率的数目;
确定所述数目与获取的帧率的总数目的比值,得到卡顿率。
15.一种电子设备,其特征在于,包括:
处理器;
用于存储所述处理器可执行指令的存储器;
其中,所述处理器被配置为执行所述指令,以实现如权利要求1至7中任一项所述的视频帧率的检测方法。
16.一种存储介质,当所述存储介质中的指令由电子设备的处理器执行时,使得电子设备能够执行如权利要求1至7中任一项所述的视频帧率的检测方法。
CN202010085349.5A 2020-02-10 2020-02-10 视频帧率的检测方法、装置、电子设备以及存储介质 Active CN113259654B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010085349.5A CN113259654B (zh) 2020-02-10 2020-02-10 视频帧率的检测方法、装置、电子设备以及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010085349.5A CN113259654B (zh) 2020-02-10 2020-02-10 视频帧率的检测方法、装置、电子设备以及存储介质

Publications (2)

Publication Number Publication Date
CN113259654A CN113259654A (zh) 2021-08-13
CN113259654B true CN113259654B (zh) 2023-01-20

Family

ID=77219531

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010085349.5A Active CN113259654B (zh) 2020-02-10 2020-02-10 视频帧率的检测方法、装置、电子设备以及存储介质

Country Status (1)

Country Link
CN (1) CN113259654B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102376088A (zh) * 2010-08-24 2012-03-14 康博公司 用于在计算上量化图像间相似性的系统
CN104166614A (zh) * 2013-05-17 2014-11-26 腾讯科技(深圳)有限公司 一种移动设备的帧率探测方法和相关装置
CN104811695A (zh) * 2015-04-17 2015-07-29 北京奇艺世纪科技有限公司 一种机顶盒设备的测试方法和装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006115470A (ja) * 2004-09-16 2006-04-27 Ntt Docomo Inc 映像評価装置、フレームレート決定装置、映像処理装置、映像評価方法、および映像評価プログラム
US9204086B2 (en) * 2008-07-17 2015-12-01 Broadcom Corporation Method and apparatus for transmitting and using picture descriptive information in a frame rate conversion processor

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102376088A (zh) * 2010-08-24 2012-03-14 康博公司 用于在计算上量化图像间相似性的系统
CN104166614A (zh) * 2013-05-17 2014-11-26 腾讯科技(深圳)有限公司 一种移动设备的帧率探测方法和相关装置
CN104811695A (zh) * 2015-04-17 2015-07-29 北京奇艺世纪科技有限公司 一种机顶盒设备的测试方法和装置

Also Published As

Publication number Publication date
CN113259654A (zh) 2021-08-13

Similar Documents

Publication Publication Date Title
CN109246466B (zh) 视频播放方法、装置及电子设备
CN110971930B (zh) 虚拟形象直播的方法、装置、终端及存储介质
CN108401124B (zh) 视频录制的方法和装置
CN110868626B (zh) 一种内容数据预加载的方法及装置
CN109348247B (zh) 确定音视频播放时间戳的方法、装置及存储介质
CN111107389B (zh) 确定观看直播时长的方法、装置和系统
CN110533585B (zh) 一种图像换脸的方法、装置、系统、设备和存储介质
CN111586431B (zh) 进行直播处理的方法、装置、设备及存储介质
CN108427630B (zh) 性能信息获取方法、装置、终端及计算机可读存储介质
CN109144346B (zh) 歌曲分享方法、装置及存储介质
CN110933468A (zh) 播放方法、装置、电子设备及介质
CN109635133B (zh) 可视化音频播放方法、装置、电子设备及存储介质
CN111083526B (zh) 视频转场方法、装置、计算机设备及存储介质
CN113409427A (zh) 动画播放方法、装置、电子设备及计算机可读存储介质
CN112269559A (zh) 音量调整方法、装置、电子设备及存储介质
CN109831817B (zh) 终端控制方法、装置、终端及存储介质
CN109660876B (zh) 显示列表的方法和装置
CN109089137B (zh) 卡顿检测方法及装置
CN108845777B (zh) 播放帧动画的方法和装置
CN108401194B (zh) 时间戳确定方法、装置和计算机可读存储介质
CN107888975B (zh) 视频播放方法、装置及存储介质
CN110933454B (zh) 处理直播萌脸礼物的方法、装置、设备及存储介质
CN112118353A (zh) 信息显示方法、装置、终端及计算机可读存储介质
CN109005359B (zh) 视频录制方法、装置存储介质
CN110543403A (zh) 一种功耗评估的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant