CN109089137B - 卡顿检测方法及装置 - Google Patents

卡顿检测方法及装置 Download PDF

Info

Publication number
CN109089137B
CN109089137B CN201811129797.XA CN201811129797A CN109089137B CN 109089137 B CN109089137 B CN 109089137B CN 201811129797 A CN201811129797 A CN 201811129797A CN 109089137 B CN109089137 B CN 109089137B
Authority
CN
China
Prior art keywords
stuck
value
threshold
threshold value
click
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811129797.XA
Other languages
English (en)
Other versions
CN109089137A (zh
Inventor
谢导
曹伟鹏
洪锐堉
唐日升
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Kugou Computer Technology Co Ltd
Original Assignee
Guangzhou Kugou Computer Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Kugou Computer Technology Co Ltd filed Critical Guangzhou Kugou Computer Technology Co Ltd
Priority to CN201811129797.XA priority Critical patent/CN109089137B/zh
Publication of CN109089137A publication Critical patent/CN109089137A/zh
Application granted granted Critical
Publication of CN109089137B publication Critical patent/CN109089137B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44222Analytics of user selections, e.g. selection of programs or purchase activity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities

Abstract

本发明公开了一种卡顿检测方法及装置,属于多媒体技术领域。所述方法包括:在播放视频的过程中,当检测到发生卡顿事件时,获取当前的卡顿值;当所述卡顿值大于卡顿阈值时,显示卡顿反馈信息;根据对所述卡顿反馈信息的点击情况,更新所述卡顿阈值。本发明根据用户对卡顿的反馈来获知用户感知卡顿的情况,并更新卡顿阈值,使得卡顿阈值更逼近用户真实感知卡顿的情况,从而提高卡顿检测的准确率。

Description

卡顿检测方法及装置
技术领域
本发明涉及多媒体技术领域,尤其涉及一种卡顿检测方法及装置。
背景技术
随着网络技术的发展,在线观看视频的用户越来越多,用户对视频的观看体验要求也越来越高,而视频卡顿是影响用户体验的重要因素,因此,卡顿的检测尤为重要。
目前,相关技术一般是设定一个固定的卡顿阈值,在用户观看视频的过程中,终端可以检测视频的卡顿情况,计算当前的卡顿值,通过将该卡顿值与卡顿阈值进行比较,来衡量用户感知卡顿的情况,例如,如果该卡顿值大于卡顿阈值,则表示用户当前感知到卡顿。
上述技术使用固定的卡顿阈值,来衡量用户感知卡顿的情况,针对所有用户采用相同的衡量标准,但不同用户对卡顿的感知不一致,这种卡顿阈值的设定难以精准的获知不同用户感知卡顿的情况,卡顿检测的准确率低。
发明内容
本发明实施例提供了一种卡顿检测方法及装置,可以解决相关技术卡顿检测的准确率低的问题。所述技术方案如下:
第一方面,提供一种卡顿检测方法,包括:
在播放视频的过程中,当检测到发生卡顿事件时,获取当前的卡顿值;
当所述卡顿值大于卡顿阈值时,显示卡顿反馈信息;
根据对所述卡顿反馈信息的点击情况,更新所述卡顿阈值,所述点击情况用于表示用户是否感知到卡顿。
在一种可能实现方式中,所述根据对所述卡顿反馈信息的点击情况,更新所述卡顿阈值,包括:
当在预设时长内检测到所述卡顿反馈信息被点击时,将所述卡顿阈值更新为第一卡顿阈值,所述第一卡顿阈值小于所述卡顿阈值。
在一种可能实现方式中,所述将所述卡顿阈值更新为第一卡顿阈值之后,所述方法还包括:
向服务器发送卡顿数据,所述卡顿数据包括所述卡顿值和所述第一卡顿阈值。
在一种可能实现方式中,所述根据对所述卡顿反馈信息的点击情况,更新所述卡顿阈值,包括:
当在预设时长内未检测到所述卡顿反馈信息被点击时,将所述卡顿阈值更新为第二卡顿阈值,所述第二卡顿阈值大于所述卡顿阈值。
在一种可能实现方式中,所述当检测到发生卡顿事件时,获取当前的卡顿值,包括:
当检测到相邻两个音频帧的时间间隔大于第一时间阈值时,根据所述相邻两个音频帧的时间间隔和第一换算关系,将所述相邻两个音频帧的时间间隔换算为对应的卡顿值。
在一种可能实现方式中,所述当检测到发生卡顿事件时,获取当前的卡顿值,包括:
当检测到相邻两个视频帧的时间间隔大于第二时间阈值时,根据所述相邻两个视频帧的时间间隔和第二换算关系,将所述相邻两个视频帧的时间间隔换算为对应的卡顿值。
第二方面,提供一种卡顿检测装置,包括:
获取模块,用于在播放视频的过程中,当检测到发生卡顿事件时,获取当前的卡顿值;
显示模块,用于当所述卡顿值大于卡顿阈值时,显示卡顿反馈信息;
更新模块,用于根据对所述卡顿反馈信息的点击情况,更新所述卡顿阈值,所述点击情况用于表示用户是否感知到卡顿。
在一种可能实现方式中,所述更新模块用于当在预设时长内检测到所述卡顿反馈信息被点击时,将所述卡顿阈值更新为第一卡顿阈值,所述第一卡顿阈值小于所述卡顿阈值。
在一种可能实现方式中,所述装置还包括:
发送模块,用于向服务器发送卡顿数据,所述卡顿数据包括所述卡顿值和所述第一卡顿阈值。
在一种可能实现方式中,所述更新模块用于当在预设时长内未检测到所述卡顿反馈信息被点击时,将所述卡顿阈值更新为第二卡顿阈值,所述第二卡顿阈值大于所述卡顿阈值。
在一种可能实现方式中,所述获取模块用于当检测到相邻两个音频帧的时间间隔大于第一时间阈值时,根据所述相邻两个音频帧的时间间隔和第一换算关系,将所述相邻两个音频帧的时间间隔换算为对应的卡顿值。
在一种可能实现方式中,所述获取模块用于当检测到相邻两个视频帧的时间间隔大于第二时间阈值时,根据所述相邻两个视频帧的时间间隔和第二换算关系,将所述相邻两个视频帧的时间间隔换算为对应的卡顿值。
第三方面,提供了一种终端,包括处理器和存储器;所述存储器,用于存放计算机程序;所述处理器,用于执行所述存储器上所存放的计算机程序,实现第一方面任一种实现方式所述的方法步骤。
第四方面,提供了一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现第一方面任一种实现方式所述的方法步骤。
本发明实施例提供的技术方案带来的有益效果至少包括:
通过在当前的卡顿值大于卡顿阈值时,显示卡顿反馈信息,根据用户对卡顿反馈信息的点击情况,更新卡顿阈值。由于用户的点击情况可以表示用户是否感知到卡顿,因而根据用户对卡顿的反馈来获知用户感知卡顿的情况,并更新卡顿阈值,使得卡顿阈值更逼近用户真实感知卡顿的情况,从而提高卡顿检测的准确率。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种卡顿检测方法的流程图;
图2是本发明实施例提供的一种卡顿检测方法的流程图
图3是本发明实施例提供的一种卡顿检测过程的示意图;
图4是本发明实施例提供的一种卡顿检测装置的结构示意图;
图5是本发明实施例提供的一种卡顿检测装置的结构示意图;
图6是本发明实施例提供的一种终端600的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。
图1是本发明实施例提供的一种卡顿检测方法的流程图。参见图1,该方法包括:
101、在播放视频的过程中,当检测到发生卡顿事件时,获取当前的卡顿值。
102、当该卡顿值大于卡顿阈值时,显示卡顿反馈信息。
103、根据对该卡顿反馈信息的点击情况,更新该卡顿阈值,该点击情况用于表示用户是否感知到卡顿。
本发明实施例提供的方法,通过在当前的卡顿值大于卡顿阈值时,显示卡顿反馈信息,根据用户对卡顿反馈信息的点击情况,更新卡顿阈值。由于用户的点击情况可以表示用户是否感知到卡顿,因而根据用户对卡顿的反馈来获知用户感知卡顿的情况,并更新卡顿阈值,使得卡顿阈值更逼近用户真实感知卡顿的情况,从而提高卡顿检测的准确率。
在一种可能实现方式中,该根据对该卡顿反馈信息的点击情况,更新该卡顿阈值,包括:
当在预设时长内检测到该卡顿反馈信息被点击时,将该卡顿阈值更新为第一卡顿阈值,该第一卡顿阈值小于该卡顿阈值。
在一种可能实现方式中,该将该卡顿阈值更新为第一卡顿阈值之后,该方法还包括:
向服务器发送卡顿数据,该卡顿数据包括该卡顿值和该第一卡顿阈值。
在一种可能实现方式中,该根据对该卡顿反馈信息的点击情况,更新该卡顿阈值,包括:
当在预设时长内未检测到该卡顿反馈信息被点击时,将该卡顿阈值更新为第二卡顿阈值,该第二卡顿阈值大于该卡顿阈值。
在一种可能实现方式中,该当检测到发生卡顿事件时,获取当前的卡顿值,包括:
当检测到相邻两个音频帧的时间间隔大于第一时间阈值时,根据该相邻两个音频帧的时间间隔和第一换算关系,将该相邻两个音频帧的时间间隔换算为对应的卡顿值。
在一种可能实现方式中,该当检测到发生卡顿事件时,获取当前的卡顿值,包括:
当检测到相邻两个视频帧的时间间隔大于第二时间阈值时,根据该相邻两个视频帧的时间间隔和第二换算关系,将该相邻两个视频帧的时间间隔换算为对应的卡顿值。
上述所有可选技术方案,可以采用任意结合形成本发明的可选实施例,在此不再一一赘述。
图2是本发明实施例提供的一种卡顿检测方法的流程图。该方法由终端执行,参见图2,该方法包括:
201、在播放视频的过程中,当检测到发生卡顿事件时,获取当前的卡顿值。
本发明实施例中,终端可以播放视频,如直播视频,供用户观看,在观看过程中,终端可能会检测到发生卡顿事件,也即是,视频发生卡顿的事件。而为了便于衡量具体的卡顿情况,终端可以获取当前的卡顿值。
在一种可能实现方式中,当检测到发生卡顿事件时,获取当前的卡顿值至少包括以下两种方式:
第一种方式、当检测到相邻两个音频帧的时间间隔大于第一时间阈值时,根据该相邻两个音频帧的时间间隔和第一换算关系,将该相邻两个音频帧的时间间隔换算为对应的卡顿值。
其中,相邻两个音频帧可以为视频播放过程中的任意两个相邻的音频帧,相邻两个音频帧的时间间隔越大,发生卡顿事件的可能性越大,用户也越容易感知到卡顿。因此,终端可以针对音频帧设置一个第一时间阈值,用来衡量是否发生卡顿事件,该第一时间阈值可以是针对相邻两个音频帧,用户能够感知到卡顿的最小时间间隔,例如,该第一时间阈值可以为150ms(毫秒)。当相邻两个音频帧的时间间隔大于第一时间阈值时,终端可以确定发生卡顿事件。
为了便于衡量具体的卡顿情况,终端可以预先设置有第一换算关系,该第一换算关系用于将相邻两个音频帧的时间间隔换算为对应的卡顿值。例如,第一换算关系可以是一个比例关系,如相邻两个音频帧的时间间隔与卡顿值的比例系数为50,这样,当相邻两个音频帧的时间间隔为150ms时,换算成卡顿值为3。
通过根据相邻两个音频帧的时间间隔来检测卡顿事件,进而对相邻两个音频帧的时间间隔进行换算,得到当前的卡顿值,不仅可以有效地检测卡顿事件,还使得当前的卡顿情况得到了准确的量化。
当然,除了根据相邻两个音频帧的时间间隔来检测卡顿事件以外,还可以根据相邻两个视频帧的时间间隔来检测卡顿事件,具体参见第二种方式。
第二种方式、当检测到相邻两个视频帧的时间间隔大于第二时间阈值时,根据该相邻两个视频帧的时间间隔和第二换算关系,将该相邻两个视频帧的时间间隔换算为对应的卡顿值。
其中,相邻两个视频帧可以为视频播放过程中的任意两个相邻的视频帧,相邻两个视频帧的时间间隔越大,发生卡顿事件的可能性越大,用户也越容易感知到卡顿。因此,终端可以针对视频帧设置一个第二时间阈值,用来衡量是否发生卡顿事件,该第二时间阈值可以是针对相邻两个视频帧,用户能够感知到卡顿的最小时间间隔,例如,该第二时间阈值可以为300ms。当相邻两个视频帧的时间间隔大于第二时间阈值时,终端可以确定发生卡顿事件。
为了便于衡量具体的卡顿情况,终端可以预先设置有第二换算关系,该第二换算关系用于将相邻两个视频帧的时间间隔换算为对应的卡顿值。例如,第二换算关系可以是一个比例关系,如相邻两个视频帧的时间间隔与卡顿值的比例系数为300,这样,当相邻两个音频帧的时间间隔为300ms时,换算成卡顿值为1。
通过根据相邻两个视频帧的时间间隔来检测卡顿事件,进而对相邻两个视频帧的时间间隔进行换算,得到当前的卡顿值,不仅可以有效地检测卡顿事件,还使得当前的卡顿情况得到了准确的量化。
202、当该卡顿值大于卡顿阈值时,显示卡顿反馈信息。
其中,该卡顿阈值是用户能够感知卡顿的最小卡顿值,该卡顿阈值可以是服务器最初下发给终端的卡顿阈值,如2,也可以是终端某一次更新后的卡顿阈值。
本发明实施例中,终端计算出当前的卡顿值后,可以将当前的卡顿值与卡顿阈值进行对比,如果当前的卡顿值大于卡顿阈值,终端可以认为用户能够感知到卡顿。但由于卡顿阈值并不一定准确,当卡顿值大于卡顿阈值时,终端认为用户应该能够感知到卡顿,但实际上用户并不一定能够感知到卡顿,因此,终端可以显示一条卡顿反馈信息,提示用户进行卡顿反馈,根据用户的反馈来获知用户感知卡顿的情况。以直播场景为例,终端可以在公聊区弹出一条卡顿反馈信息,该卡顿反馈信息用于提示用户进行卡顿确认和反馈。例如,该卡顿信息可以为“视频卡了?我要反馈上报”。
终端在显示卡顿反馈信息后,用户可以点击该卡顿反馈信息,也可以不点击该卡顿反馈信息。当用户点击该卡顿反馈信息时,终端执行步骤203,当用户未点击该卡顿反馈信息时,终端执行步骤205。
203、当在预设时长内检测到该卡顿反馈信息被点击时,将该卡顿阈值更新为第一卡顿阈值,该第一卡顿阈值小于该卡顿阈值。
本发明实施例中,用户在看到终端显示的卡顿反馈信息后,如果用户确实感知到了视频卡顿,则在终端显示该卡顿反馈信息的预设时长(如10s)内,用户可以点击该卡顿反馈信息,触发终端对当前的卡顿阈值进行更新,并将更新后的卡顿阈值存储到本地,作为下一次衡量卡顿值的标准。
具体地,由于终端检测到用户的点击操作,终端可以认为当前的卡顿阈值设置的可能偏高,因此终端可以尝试减小当前的卡顿阈值,例如,终端可以将当前的卡顿阈值减1后,得到第一卡顿阈值。例如,当前卡顿阈值为S,则终端可以将卡顿阈值从S更新为S-1。当然,终端也可以采用其他更新方式,只要更新后的卡顿阈值比当前的卡顿阈值小即可。
需要说明的是,该步骤203是根据对该卡顿反馈信息的点击情况,更新该卡顿阈值的一种可能实现方式,该点击情况用于表示用户是否感知到卡顿。当用户点击该卡顿反馈信息时,表示用户感知到了卡顿。通过用户对卡顿反馈信息的点击,终端可以准确地得知用户感知卡顿的情况,进而进行卡顿阈值的更新。这种根据用户对卡顿的反馈来更新卡顿阈值的方式,使得卡顿阈值更逼近用户真实感知卡顿的情况,而更新后的卡顿阈值可以用于下一次衡量用户感知卡顿的情况,相比于固定的卡顿阈值,提高了卡顿检测的准确率。
204、向服务器发送卡顿数据,该卡顿数据包括该卡顿值和该第一卡顿阈值,结束。
本发明实施例中,终端在更新卡顿阈值后,可以将当前的卡顿值以及更新后的卡顿阈值上报给服务器,使得服务器可以根据上报数据,处理用户反馈的卡顿问题。例如,服务器接收到卡顿数据后,可以切换向终端提供的视频的码率,不同码率对应不同的清晰度。以直播视频为例,服务器可以根据卡顿数据中卡顿值与卡顿阈值的差值,选择合适码率的直播视频发送给终端。通过向服务器上报卡顿数据,使得服务器可以获知终端当前播放视频的卡顿情况,因而采取相应措施来解决卡顿问题。
需要说明的是,该步骤204为可选步骤,在实际应用中,终端无需每次更新卡顿阈值后,均向服务器进行上报,例如,终端可以在卡顿阈值的更新次数达到预设次数后,再向服务器上报,当然,终端也可以不进行上报,本发明实施例对此不做限定。
205、当在该预设时长内未检测到该卡顿反馈信息被点击时,将该卡顿阈值更新为第二卡顿阈值,该第二卡顿阈值大于该卡顿阈值。
本发明实施例中,用户在看到终端显示的卡顿反馈信息后,如果用户未感知到视频卡顿,或者用户虽然感知到了视频卡顿,但觉得不影响自己的观看体验,则在终端显示该卡顿反馈信息的预设时长内,用户可以不点击该卡顿反馈信息。由于终端在该预设时长内,未检测到用户的点击操作,终端可以认为当前的卡顿阈值设置的偏低,因此终端可以对当前的卡顿阈值进行更新,并将更新后的卡顿阈值存储到本地,作为下一次衡量卡顿值的标准。
具体地,终端可以尝试增大当前的卡顿阈值,例如,终端可以将当前的卡顿阈值加1后,得到第二卡顿阈值。例如,当前卡顿阈值为S,则终端可以将卡顿阈值从S更新为S+1。当然,终端也可以采用其他更新方式,只要更新后的卡顿阈值比当前的卡顿阈值大即可。
需要说明的是,该步骤205是根据对该卡顿反馈信息的点击情况,更新该卡顿阈值的一种可能实现方式。当用户未点击该卡顿反馈信息时,表示用户未感知到卡顿,或者,即使用户感知到了卡顿,但觉得这种卡顿情况对其并没有产生影响,因而选择忽略本次卡顿反馈。这种根据用户对卡顿的反馈来更新卡顿阈值的方式,使得卡顿阈值更逼近用户真实感知卡顿的情况,而更新后的卡顿阈值可以用于下一次衡量用户感知卡顿的情况,相比于固定的卡顿阈值,可以提高卡顿检测的准确率。
通过以上步骤多次循环,不断根据用户对卡顿的反馈来更新卡顿阈值,使得卡顿阈值逼近用户内心真实的感受。一段时间后,用户通过终端向系统反馈的卡顿阈值保持稳定,并且系统能够根据不同用户当时反馈的卡顿值,精准的得知不同用户当时感知卡顿的情况。
为了便于更直观的理解上述技术方案,下面以直播场景为例,介绍卡顿检测过程的一个示例。参见图3,图3是本发明实施例提供的一种卡顿检测过程的示意图,如图3所示,以直播场景为例,用户在终端上观看直播的过程中,如果终端检测到发生视频卡顿事件,如相邻音频帧的时间间隔大于150ms,或相邻视频帧的时间间隔大于300ms,则终端可以计算当前的卡顿值X,并判断X是否大于当前的卡顿阈值S,如果否,则继续检测卡顿事件,如果是,则在公聊区弹出卡顿反馈信息。然后判断用户是否点击,如果否,则使用S+1更新当前的卡顿阈值,如果是,则使用S-1更新当前的卡顿阈值,且上报卡顿值X和卡顿阈值S-1到系统。上述技术方案能够精准的得知用户感知卡顿的情况,基于精准的上报数据解决用户反馈的卡顿问题。
本发明实施例提供的方法,通过在当前的卡顿值大于卡顿阈值时,显示卡顿反馈信息,根据用户对卡顿反馈信息的点击情况,更新卡顿阈值。由于用户的点击情况可以表示用户是否感知到卡顿,因而根据用户对卡顿的反馈来获知用户感知卡顿的情况,并更新卡顿阈值,使得卡顿阈值更逼近用户真实感知卡顿的情况,从而提高卡顿检测的准确率。
图4是本发明实施例提供的一种卡顿检测装置的结构示意图。参照图4,该装置包括:
获取模块401,用于在播放视频的过程中,当检测到发生卡顿事件时,获取当前的卡顿值;
显示模块402,用于当该卡顿值大于卡顿阈值时,显示卡顿反馈信息;
更新模块403,用于根据对该卡顿反馈信息的点击情况,更新该卡顿阈值,该点击情况用于表示用户是否感知到卡顿。
在一种可能实现方式中,该更新模块403用于当在预设时长内检测到该卡顿反馈信息被点击时,将该卡顿阈值更新为第一卡顿阈值,该第一卡顿阈值小于该卡顿阈值。
在一种可能实现方式中,参见图5,该装置还包括:
发送模块404,用于向服务器发送卡顿数据,该卡顿数据包括该卡顿值和该第一卡顿阈值。
在一种可能实现方式中,该更新模块403用于当在预设时长内未检测到该卡顿反馈信息被点击时,将该卡顿阈值更新为第二卡顿阈值,该第二卡顿阈值大于该卡顿阈值。
在一种可能实现方式中,该获取模块401用于当检测到相邻两个音频帧的时间间隔大于第一时间阈值时,根据该相邻两个音频帧的时间间隔和第一换算关系,将该相邻两个音频帧的时间间隔换算为对应的卡顿值。
在一种可能实现方式中,该获取模块401用于当检测到相邻两个视频帧的时间间隔大于第二时间阈值时,根据该相邻两个视频帧的时间间隔和第二换算关系,将该相邻两个视频帧的时间间隔换算为对应的卡顿值。
本发明实施例中,通过在当前的卡顿值大于卡顿阈值时,显示卡顿反馈信息,根据用户对卡顿反馈信息的点击情况,更新卡顿阈值。由于用户的点击情况可以表示用户是否感知到卡顿,因而根据用户对卡顿的反馈来获知用户感知卡顿的情况,并更新卡顿阈值,使得卡顿阈值更逼近用户真实感知卡顿的情况,从而提高卡顿检测的准确率。
需要说明的是:上述实施例提供的卡顿检测装置在卡顿检测时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的卡顿检测装置与卡顿检测方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
图6是本发明实施例提供的一种终端600的结构示意图。该终端600可以是:智能手机、平板电脑、MP3播放器(Moving Picture Experts Group Audio Layer III,动态影像专家压缩标准音频层面3)、MP4(Moving Picture Experts Group Audio Layer IV,动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。终端600还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。
通常,终端600包括有:处理器601和存储器602。
处理器601可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器601可以采用DSP(Digital Signal Processing,数字信号处理)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器601也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(Central ProcessingUnit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器601可以在集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器601还可以包括AI(Artificial Intelligence,人工智能)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器602可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器602还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器602中的非暂态的计算机可读存储介质用于存储至少一个指令,该至少一个指令用于被处理器601所执行以实现本申请中方法实施例提供的卡顿检测方法。
在一些实施例中,终端600还可选包括有:外围设备接口603和至少一个外围设备。处理器601、存储器602和外围设备接口603之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口603相连。具体地,外围设备包括:射频电路604、显示屏605、摄像头606、音频电路607、定位组件608和电源609中的至少一种。
外围设备接口603可被用于将I/O(Input/Output,输入/输出)相关的至少一个外围设备连接到处理器601和存储器602。在一些实施例中,处理器601、存储器602和外围设备接口603被集成在同一芯片或电路板上;在一些其他实施例中,处理器601、存储器602和外围设备接口603中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。
射频电路604用于接收和发射RF(Radio Frequency,射频)信号,也称电磁信号。射频电路604通过电磁信号与通信网络以及其他通信设备进行通信。射频电路604将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路604包括:天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路604可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:城域网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity,无线保真)网络。在一些实施例中,射频电路604还可以包括NFC(Near Field Communication,近距离无线通信)有关的电路,本申请对此不加以限定。
显示屏605用于显示UI(UserInterface,用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏605是触摸显示屏时,显示屏605还具有采集在显示屏605的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器601进行处理。此时,显示屏605还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏605可以为一个,设置终端600的前面板;在另一些实施例中,显示屏605可以为至少两个,分别设置在终端600的不同表面或呈折叠设计;在再一些实施例中,显示屏605可以是柔性显示屏,设置在终端600的弯曲表面上或折叠面上。甚至,显示屏605还可以设置成非矩形的不规则图形,也即异形屏。显示屏605可以采用LCD(LiquidCrystal Display,液晶显示屏)、OLED(Organic Light-Emitting Diode,有机发光二极管)等材质制备。
摄像头组件606用于采集图像或视频。可选地,摄像头组件606包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头组件606还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。
音频电路607可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器601进行处理,或者输入至射频电路604以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在终端600的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器601或射频电路604的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频电路607还可以包括耳机插孔。
定位组件608用于定位终端600的当前地理位置,以实现导航或LBS(LocationBased Service,基于位置的服务)。定位组件608可以是基于美国的GPS(GlobalPositioning System,全球定位系统)、中国的北斗系统、俄罗斯的格雷纳斯系统或欧盟的伽利略系统的定位组件。
电源609用于为终端600中的各个组件进行供电。电源609可以是交流电、直流电、一次性电池或可充电电池。当电源609包括可充电电池时,该可充电电池可以支持有线充电或无线充电。该可充电电池还可以用于支持快充技术。
在一些实施例中,终端600还包括有一个或多个传感器610。该一个或多个传感器610包括但不限于:加速度传感器611、陀螺仪传感器612、压力传感器613、指纹传感器614、光学传感器615以及接近传感器616。
加速度传感器611可以检测以终端600建立的坐标系的三个坐标轴上的加速度大小。比如,加速度传感器611可以用于检测重力加速度在三个坐标轴上的分量。处理器601可以根据加速度传感器611采集的重力加速度信号,控制触摸显示屏605以横向视图或纵向视图进行用户界面的显示。加速度传感器611还可以用于游戏或者用户的运动数据的采集。
陀螺仪传感器612可以检测终端600的机体方向及转动角度,陀螺仪传感器612可以与加速度传感器611协同采集用户对终端600的3D动作。处理器601根据陀螺仪传感器612采集的数据,可以实现如下功能:动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。
压力传感器613可以设置在终端600的侧边框和/或触摸显示屏605的下层。当压力传感器613设置在终端600的侧边框时,可以检测用户对终端600的握持信号,由处理器601根据压力传感器613采集的握持信号进行左右手识别或快捷操作。当压力传感器613设置在触摸显示屏605的下层时,由处理器601根据用户对触摸显示屏605的压力操作,实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。
指纹传感器614用于采集用户的指纹,由处理器601根据指纹传感器614采集到的指纹识别用户的身份,或者,由指纹传感器614根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时,由处理器601授权该用户执行相关的敏感操作,该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器614可以被设置终端600的正面、背面或侧面。当终端600上设置有物理按键或厂商Logo时,指纹传感器614可以与物理按键或厂商Logo集成在一起。
光学传感器615用于采集环境光强度。在一个实施例中,处理器601可以根据光学传感器615采集的环境光强度,控制触摸显示屏605的显示亮度。具体地,当环境光强度较高时,调高触摸显示屏605的显示亮度;当环境光强度较低时,调低触摸显示屏605的显示亮度。在另一个实施例中,处理器601还可以根据光学传感器615采集的环境光强度,动态调整摄像头组件606的拍摄参数。
接近传感器616,也称距离传感器,通常设置在终端600的前面板。接近传感器616用于采集用户与终端600的正面之间的距离。在一个实施例中,当接近传感器616检测到用户与终端600的正面之间的距离逐渐变小时,由处理器601控制触摸显示屏605从亮屏状态切换为息屏状态;当接近传感器616检测到用户与终端600的正面之间的距离逐渐变大时,由处理器601控制触摸显示屏605从息屏状态切换为亮屏状态。
本领域技术人员可以理解,图6中示出的结构并不构成对终端600的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
在示例性实施例中,还提供了一种存储有计算机程序的计算机可读存储介质,例如存储有计算机程序的存储器,上述计算机程序被处理器执行时实现上述实施例中的卡顿检测方法。例如,所述计算机可读存储介质可以是只读内存(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、只读光盘(Compact Disc Read-Only Memory,CD-ROM)、磁带、软盘和光数据存储设备等。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种卡顿检测方法,其特征在于,所述方法包括:
在播放视频的过程中,当检测到发生卡顿事件时,获取当前的卡顿值;
当所述卡顿值大于卡顿阈值时,显示卡顿反馈信息;
根据对所述卡顿反馈信息的点击情况,更新所述卡顿阈值,所述点击情况用于表示用户是否感知到卡顿;
所述根据对所述卡顿反馈信息的点击情况,更新所述卡顿阈值,包括:
当在预设时长内检测到所述卡顿反馈信息被点击时,将所述卡顿阈值更新为第一卡顿阈值,所述第一卡顿阈值小于所述卡顿阈值,将所述第一卡顿阈值存储到本地,作为下一次用于衡量卡顿值的卡顿阈值;
所述方法还包括:向服务器发送卡顿数据,所述卡顿数据包括所述卡顿值和更新后的卡顿阈值,所述服务器用于根据所述卡顿数据中的卡顿值与卡顿阈值的差值,发送与所述差值对应的码率的视频。
2.根据权利要求1所述的方法,其特征在于,所述根据对所述卡顿反馈信息的点击情况,更新所述卡顿阈值,包括:
当在所述预设时长内未检测到所述卡顿反馈信息被点击时,将所述卡顿阈值更新为第二卡顿阈值,所述第二卡顿阈值大于所述卡顿阈值,将所述第二卡顿阈值存储到本地,作为下一次用于衡量卡顿值的卡顿阈值。
3.根据权利要求1所述的方法,其特征在于,所述当检测到发生卡顿事件时,获取当前的卡顿值,包括:
当检测到相邻两个音频帧的时间间隔大于第一时间阈值时,根据所述相邻两个音频帧的时间间隔和第一换算关系,将所述相邻两个音频帧的时间间隔换算为对应的卡顿值。
4.根据权利要求1所述的方法,其特征在于,所述当检测到发生卡顿事件时,获取当前的卡顿值,包括:
当检测到相邻两个视频帧的时间间隔大于第二时间阈值时,根据所述相邻两个视频帧的时间间隔和第二换算关系,将所述相邻两个视频帧的时间间隔换算为对应的卡顿值。
5.一种卡顿检测装置,其特征在于,所述装置包括:
获取模块,用于在播放视频的过程中,当检测到发生卡顿事件时,获取当前的卡顿值;
显示模块,用于当所述卡顿值大于卡顿阈值时,显示卡顿反馈信息;
更新模块,用于根据对所述卡顿反馈信息的点击情况,更新所述卡顿阈值,所述点击情况用于表示用户是否感知到卡顿;
所述更新模块用于当在预设时长内检测到所述卡顿反馈信息被点击时,将所述卡顿阈值更新为第一卡顿阈值,所述第一卡顿阈值小于所述卡顿阈值,将所述第一卡顿阈值存储到本地,作为下一次用于衡量卡顿值的卡顿阈值;
所述装置还包括:
发送模块,用于向服务器发送卡顿数据,所述卡顿数据包括所述卡顿值和更新后的卡顿阈值,所述服务器用于根据所述卡顿数据中的卡顿值与卡顿阈值的差值,发送与所述差值对应的码率的视频。
6.根据权利要求5所述的装置,其特征在于,所述更新模块用于当在所述预设时长内未检测到所述卡顿反馈信息被点击时,将所述卡顿阈值更新为第二卡顿阈值,所述第二卡顿阈值大于所述卡顿阈值,将所述第二卡顿阈值存储到本地,作为下一次用于衡量卡顿值的卡顿阈值。
7.根据权利要求5所述的装置,其特征在于,所述获取模块用于当检测到相邻两个音频帧的时间间隔大于第一时间阈值时,根据所述相邻两个音频帧的时间间隔和第一换算关系,将所述相邻两个音频帧的时间间隔换算为对应的卡顿值。
8.根据权利要求5所述的装置,其特征在于,所述获取模块用于当检测到相邻两个视频帧的时间间隔大于第二时间阈值时,根据所述相邻两个视频帧的时间间隔和第二换算关系,将所述相邻两个视频帧的时间间隔换算为对应的卡顿值。
9.一种卡顿检测的终端,其特征在于,包括处理器和存储器;所述存储器,用于存放计算机程序;所述处理器,用于执行所述存储器上所存放的计算机程序,实现权利要求1-4任一项所述的方法步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现权利要求1-4任一项所述的方法步骤。
CN201811129797.XA 2018-09-27 2018-09-27 卡顿检测方法及装置 Active CN109089137B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811129797.XA CN109089137B (zh) 2018-09-27 2018-09-27 卡顿检测方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811129797.XA CN109089137B (zh) 2018-09-27 2018-09-27 卡顿检测方法及装置

Publications (2)

Publication Number Publication Date
CN109089137A CN109089137A (zh) 2018-12-25
CN109089137B true CN109089137B (zh) 2021-01-01

Family

ID=64842717

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811129797.XA Active CN109089137B (zh) 2018-09-27 2018-09-27 卡顿检测方法及装置

Country Status (1)

Country Link
CN (1) CN109089137B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110430425B (zh) * 2019-07-31 2021-02-05 北京奇艺世纪科技有限公司 一种视频流畅度确定方法、装置、电子设备及介质
CN111277846A (zh) * 2020-01-15 2020-06-12 广州虎牙科技有限公司 一种直播的异常定位方法、装置、计算机设备和存储介质
CN114598924B (zh) * 2022-03-10 2024-03-22 恒安嘉新(北京)科技股份公司 客户端综合视频播放状态的检测方法、装置、设备及介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107529064A (zh) * 2017-09-04 2017-12-29 北京理工大学 一种基于vr终端反馈的自适应编码方法
CN107864402A (zh) * 2017-10-11 2018-03-30 湖南机友科技有限公司 直播视频播放方法及装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11252213B2 (en) * 2013-08-15 2022-02-15 Comcast Cable Communications, Llc Multiple flinging devices in a media fling system
CN103475951A (zh) * 2013-08-20 2013-12-25 南京邮电大学 一种基于用户体验的实时视频传输速率自适应方法
CN106921870A (zh) * 2015-12-24 2017-07-04 北京奇虎科技有限公司 一种视频播放方法和装置
CN107770633B (zh) * 2017-09-14 2020-09-29 华为技术有限公司 码率自适应算法优化系统、方法及终端
CN108024126A (zh) * 2017-11-28 2018-05-11 北京潘达互娱科技有限公司 网络直播视频调整方法、装置、电子设备和存储介质

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107529064A (zh) * 2017-09-04 2017-12-29 北京理工大学 一种基于vr终端反馈的自适应编码方法
CN107864402A (zh) * 2017-10-11 2018-03-30 湖南机友科技有限公司 直播视频播放方法及装置

Also Published As

Publication number Publication date
CN109089137A (zh) 2018-12-25

Similar Documents

Publication Publication Date Title
CN109246466B (zh) 视频播放方法、装置及电子设备
CN109348247B (zh) 确定音视频播放时间戳的方法、装置及存储介质
CN111079012A (zh) 直播间推荐方法、装置、存储介质及终端
CN110278464B (zh) 显示榜单的方法和装置
CN111107389B (zh) 确定观看直播时长的方法、装置和系统
CN110764730A (zh) 播放音频数据的方法和装置
CN110868626A (zh) 一种内容数据预加载的方法及装置
CN110248236B (zh) 视频播放方法、装置、终端及存储介质
CN110418152B (zh) 进行直播提示的方法及装置
CN111083516A (zh) 直播处理的方法和装置
CN110196673B (zh) 图片交互方法、装置、终端及存储介质
CN109089137B (zh) 卡顿检测方法及装置
CN111092991B (zh) 歌词显示方法及装置、计算机存储介质
CN111818358A (zh) 音频文件的播放方法、装置、终端及存储介质
CN110769120A (zh) 进行消息提醒的方法、装置、设备及存储介质
CN108401194B (zh) 时间戳确定方法、装置和计算机可读存储介质
CN112770177B (zh) 多媒体文件生成方法、多媒体文件发布方法及装置
CN112256181B (zh) 交互处理方法、装置、计算机设备及存储介质
CN110933454B (zh) 处理直播萌脸礼物的方法、装置、设备及存储介质
CN112118482A (zh) 音频文件的播放方法、装置、终端及存储介质
CN108966026B (zh) 制作视频文件的方法和装置
CN111064657B (zh) 关注账户分组的方法、装置、系统
CN110996115B (zh) 直播视频播放方法、装置、设备、存储介质和程序产品
CN111464829B (zh) 切换媒体数据的方法、装置、设备及存储介质
CN111369434B (zh) 拼接视频封面生成的方法、装置、设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant