CN107396193B - 视频播放的方法和装置 - Google Patents
视频播放的方法和装置 Download PDFInfo
- Publication number
- CN107396193B CN107396193B CN201710761677.0A CN201710761677A CN107396193B CN 107396193 B CN107396193 B CN 107396193B CN 201710761677 A CN201710761677 A CN 201710761677A CN 107396193 B CN107396193 B CN 107396193B
- Authority
- CN
- China
- Prior art keywords
- video frame
- gray level
- video
- background image
- level image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 40
- 230000005540 biological transmission Effects 0.000 claims abstract description 17
- 238000000605 extraction Methods 0.000 claims description 17
- 239000000284 extract Substances 0.000 claims description 10
- 238000005516 engineering process Methods 0.000 abstract description 7
- 230000006870 function Effects 0.000 description 15
- 238000010586 diagram Methods 0.000 description 10
- 238000012545 processing Methods 0.000 description 10
- 230000006854 communication Effects 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 238000007726 management method Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000005484 gravity Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 238000005314 correlation function Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/47202—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
本发明公开了一种视频播放的方法,属于计算机技术领域。所述方法包括:在播放目标视频的过程中,当所述目标视频的第一视频帧的播放时长达到预设帧间隔时长,未接收到服务器发送的第二视频帧时,获取背景图像,其中,所述第二视频帧是所述第一视频帧的下一个视频帧,所述背景图像是所述目标视频中已接收到的视频帧的背景图像,播放所述背景图像,当接收到所述第二视频帧时,播放所述第二视频帧。采用本发明,可以提高视频播放的流畅性。
Description
技术领域
本发明涉及计算机技术领域,特别涉及一种视频播放的方法和装置。
背景技术
随着终端技术的发展,终端的应用越来越广泛,功能也越来越强大,用户可以通过终端观看视频。其中,在线视频是用户经常观看的视频之一。
当用户想要观看在线视频时,可以通过终端向服务器发送视频获取请求。服务器接收到该视频获取请求后,可以向终端发送该在线视频的视频流,该视频流中包括该在线视频的各视频帧。终端则可以实时接收视频帧,并对接收到的视频帧进行显示,以使用户可以观看该在线视频。
在实现本发明的过程中,发明人发现现有技术至少存在以下问题:
终端的网络环境通常不太稳定,当终端的网络环境较差时,终端接收视频帧会出现延迟,这样,在未接收到当前播放的视频帧的下一视频帧的情况下,会持续播放当前播放的视频帧,该视频帧的播放时间被拖长,从而产生卡顿的现象,导致视频播放的流畅性较差。
发明内容
为了解决现有技术的问题,本发明实施例提供了一种视频播放的方法和装置。所述技术方案如下:
第一方面,提供了一种视频播放的方法,所述方法包括:
在播放目标视频的过程中,当所述目标视频的第一视频帧的播放时长达到预设帧间隔时长,且未接收到服务器发送的第二视频帧时,获取背景图像,其中,所述第二视频帧是所述第一视频帧的下一个视频帧,所述背景图像是所述目标视频中已接收到的视频帧的背景图像;
播放所述背景图像;
当接收到所述第二视频帧时,播放所述第二视频帧。
第二方面,提供了一种视频播放的装置,所述装置包括:
获取模块,用于在播放目标视频的过程中,当所述目标视频的第一视频帧的播放时长达到预设帧间隔时长,且未接收到服务器发送的第二视频帧时,获取背景图像,其中,所述第二视频帧是所述第一视频帧的下一个视频帧,所述背景图像是所述目标视频中已接收到的视频帧的背景图像;
播放模块,用于播放所述背景图像;
所述播放模块,还用于当接收到所述第二视频帧时,播放所述第二视频帧。
第三方面,提供了一种视频播放的装置,所述装置包括处理器和存储器,所述存储器中存储有至少一条指令,所述指令由所述处理器加载并执行以实现第一方面所述的视频播放的方法。
第四方面,提供了一种计算机可读存储介质,所述存储介质中存储有至少一条指令,所述指令由处理器加载并执行以实现第一方面所述的视频播放的方法。
本发明实施例中,终端在播放目标视频的过程中,当目标视频的第一视频帧的播放时长达到预设帧间隔时长,且还未接收到服务器发送的第二视频帧时,终端可以获取背景图像,背景图像是目标视频中已接收到的视频帧的背景图像,然后播放背景图像,当接收到第二视频帧时,播放第一视频帧。这样,即使接收第二视频帧数据出现延迟,终端也可以先获取背景图像,进行播放,而不会一直播放第一视频帧,即第一视频帧的播放时间不会被拖长,从而,在网络延迟不是很严重的情况下可以在一定程度上缓解视频播放卡顿的情况,提高了视频播放的流畅性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1a是本发明实施例提供的一种视频播放的场景示意图;
图1b是本发明实施例提供的一种视频播放的方法流程图;
图2是本发明实施例提供的一种提取背景图像的方法流程图;
图3是本发明实施例提供的一种子图像的示意图;
图4是本发明实施例提供的一种视频播放的装置结构示意图;
图5是本发明实施例提供的一种视频播放的装置结构示意图;
图6是本发明实施例提供的一种视频播放的装置结构示意图;
图7是本发明实施例提供的一种视频播放的装置结构示意图;
图8是本发明实施例提供的一种终端的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。
相关技术中,当用户想要观看在线视频时,可以通过终端向服务器发送视频获取请求。服务器接收到该视频获取请求后,可以向终端发送该在线视频的视频流,该视频流中包括该在线视频的各视频帧。终端则可以实时接收各视频帧,并对接收到的视频帧进行显示,以使用户可以观看该在线视频。终端的网络环境通常不太稳定,当终端的网络环境较差时,终端接收视频帧会出现延迟,这样,在未接收到当前播放的视频帧的下一视频帧的情况下,会持续播放当前播放的视频帧,该视频帧的播放时间被拖长,从而产生卡顿的现象,导致视频播放的流畅性较差。
本发明实施例提供的方案中,终端在播放目标视频的过程中,当目标视频的第一视频帧的播放时长达到预设帧间隔时长,且还未接收到服务器发送的第二视频帧时,终端可以获取背景图像,背景图像是目标视频中已接收到的视频帧的背景图像,然后播放背景图像,当接收到第二视频帧时,播放第一视频帧。这样,即使接收第二视频帧数据出现延迟,终端也可以先获取背景图像,进行播放,而不会一直播放第一视频帧,即第一视频帧的播放时间不会被拖长,从而,在网络延迟不是很严重的情况下可以在一定程度上缓解视频播放卡顿的情况,提高了视频播放的流畅性。
本发明实施例提供了一种视频播放的方法,该方法的执行主体为终端。其中,终端可以是手机、平板、电脑等,终端中安装有视频播放应用程序,用于播放视频数据。终端中可以设置有处理器、接发器和存储器,处理器可以用于处理视频播放过程中的相关处理,接发器可以用于接收以及发送消息,存储器可以用于存储视频播放过程中需要的数据以及产生的数据。终端中还可以设置有屏幕、麦克风等输入输出设备,屏幕可以是触摸屏,可以用于显示播放的视频画面,麦克风可以用于播放音频数据。本发明实施例以终端为手机进行详细说明。
在进行实施前,如图1a所示,首先介绍一下本发明实施例的应用场景,用户想要使用终端观看视频,可以在终端中安装视频播放应用程序,然后操作开启视频播放应用程序,终端则会显示视频播放应用程序的主界面,主界面中显示有搜索框、以及推荐的视频选项。用户可以点击对应某个视频选项的播放按键,终端则会检测到播放按键的点击指令,向服务器发送视频获取请求,并在其中携带用户选择的视频的标识(目标视频的标识)。服务器接收到视频获取请求后,可以解析视频获取请求,从中获取目标视频的标识,然后使用目标视频的标识,查找目标视频的标识对应的视频数据,然后将视频数据发送至终端,终端接收到视频数据后,可以进行播放。
需要说明的是,本发明实施例中涉及到的目标视频一般是在整个视频播放过程中,背景图像变化比较小的视频,如游戏视频等。
如图1b所示,该方法的处理流程可以如下:
步骤101,在播放目标视频的过程中,当目标视频的第一视频帧的播放时长达到预设帧间隔时长,且未接收到服务器发送的第二视频帧时,获取背景图像。
其中,预设帧间隔时长可以由技术人员设置,用于表示每一视频帧的播放时长,并且存储至终端中。第一视频帧是目标视频中除最后一个视频帧之外的任一视频帧,第二视频帧是目标视频帧中除第一个视频帧之外的任一视频帧,第二视频帧是第一视频帧的下一个视频帧,背景图像是目标视频中终端已接收到的视频帧的背景图像,如第一视频帧的背景图像,第一视频帧的前一个视频帧的背景图像等。
在实施中,终端在播放目标视频的过程中,终端可以检测每一视频帧的播放时长是否达到预设帧间隔时长,当检测到第一视频帧的播放时长达到预设帧间隔时长时,终端可以查看是否接收到第一视频帧的下一个视频帧,即第二视频帧,如果确定未接收到第二视频帧,终端可以获取目标视频中已接收到的视频帧的背景图像。例如,预设帧间隔时长为0.2秒,终端检测第一视频帧的播放时长已经达到0.2秒,终端确定未接收到第二视频帧,可以获取目标视频中已接收到的视频帧的背景图像。
可选的,终端在获取背景图像时,获取的背景图像可以是从当前播放的视频帧的上一个视频帧中提取的背景图像,也可以是从当前时间点所属周期的上一个周期提取的背景图像,步骤101的处理可以分别如下:
方式一:当第一视频帧开始播放,且未接收到服务器发送的第二视频帧时,从第一视频帧中提取背景图像,当目标视频的第一视频帧的播放时长达到预设帧间隔时长,且未接收到服务器发送的第二视频帧时,获取从第一视频帧中提取的背景图像。
在实施中,终端检测到第一视频帧开始播放时,可以查看是否接收到第一视频帧的下一个视频帧,即第二视频帧,如果未接收到第二视频帧,终端可以从第一视频帧中提取第一视频帧的背景图像(提取背景图像的方法在后面详细描述)。
当检测到第一视频帧的播放时长达到预设帧间隔时长时,终端可以查看是否接收到第一视频帧的下一个视频帧,即第二视频帧,如果确定未接收到第二视频帧,终端可以获取从第一视频帧中提取的背景图像。
方式二,在播放目标视频的过程中,每经过预设的周期,提取当前周期内的任一视频帧的背景图像,当目标视频的第一视频帧的播放时长达到预设帧间隔时长,且未接收到服务器发送的第二视频帧时,获取当前时间点所属周期的前一个周期提取的背景图像。
其中,预设的周期可以由技术人员预设,并且存储至终端中,如1分钟等。
在实施中,在播放目标视频的过程中,终端接收到服务器发送的目标视频的视频帧时,可以将接收到的视频帧进行存储。终端每经过预设的周期,获取当前周期内的任一视频帧,然后从该视频帧中提取背景图像,并进行存储,可以以队列的方式进行存储,周期越早,在队列中越靠前,每次从一个周期中的任一视频帧中提取出背景图像,可以存储在队列的最后边。例如,预设的周期为1分钟,当前时间点为10分钟,当前周期为9分钟至10分钟这个周期,终端可以从9分钟至10分钟这个周期内获取任一视频帧,然后从该视频帧提取背景图像,并存储在队列的最后边。
当检测到第一视频帧的播放时长达到预设帧间隔时长时,终端可以查看是否接收到第一视频帧的下一个视频帧,即第二视频帧,如果确定未接收到第二视频帧,终端可以确定当前时间点,进而确定出当前时间点所属周期,然后确定该周期的前一个周期,获取该前一个周期的背景图像。
需要说明的是,提取背景图像的方法与后面图2所示的从第一视频帧中提取背景图像的方法相同,此处不再赘述。
步骤102,播放背景图像。
在实施中,终端获取到背景图像后,可以对背景图像进行播放。这样,在网络延迟不是很严重的情况下,当未接收到当前应该播放的视频帧时,可以获取背景图像进行播放,而不会一直播放当前应该播放的视频帧的上一视频帧,进而可以在一定程度上缓解视频播放卡顿的情况,提高了视频播放的流畅性。
步骤103,当接收到第二视频帧时,播放第二视频帧。
在实施中,终端在播放背景图像的过程中,当接收到第二视频帧时,可以直接播放第二视频帧。这样,在接收到第二视频帧时,就直接播放第二视频帧,可以及时的使视频播放恢复正常,提高了视频播放的流畅性。
可选的,如图2所示,从第一视频帧中提取背景图像的方法步骤可以如下:
步骤201,将第一视频帧划分为包含预设数目个像素点的多个子图像。
其中,预设数目可以由技术人员预设,并且存储至终端中,如64,即得到的子图像的大小为8*8,包含64个像素点。
在实施中,终端确定要对第一视频帧提取背景图像时,可以获取预先存储的预设数目,然后将第一视频帧划分为包含预设数目个像素点的多个子图像。例如,如图3所示,第一视频帧包含1024*960个像素点,预设数目为64,对第一视频帧进行划分,将得到15360个子图像。
步骤202,将每个子图像转换为灰度图像。
在实施中,终端对第一视频帧进行划分得到子图像后,可以按照公式(灰度值=0.299*R+0.587*G+0.114*B),确定出每个子图像的像素点对应的灰度值,R为第一视频帧中某个像素点的红色像素值,G为该像素点的绿色像素值,B为该像素点的蓝色像素值,这样,就将每个子图像转换为灰度图像。
步骤203,确定每个灰度图像的灰度平均值。
在实施中,对于每个灰度图像,终端可以计算每个像素点的灰度值之和,然后除以灰度图像中包含的像素点数目(此处为上述提到的预设数目),得到每个灰度图像的灰度平均值。
步骤204,对于每个灰度图像,将灰度图像中像素点的灰度值大于或等于灰度图像的灰度平均值的像素点的序列值记为第一数值,并将灰度图像中像素点的灰度值小于灰度图像的灰度平均值的像素点的序列值记为第二数值。
其中,第一数值与第二数值可以由技术人员预设,并且存储至终端中,如第一数值为1、第二数值为0,或者第一数值为0、第二数值为1。
在实施中,对于每个灰度图像,终端可以比较每个像素点的灰度值与该灰度图像的灰度平均值,如果灰度图像中像素点的灰度值大于或等于灰度图像的灰度平均值,则将该像素点的序列值记为第一数值,如果灰度图像中像素点的灰度值小于灰度图像的灰度平均值,则将该像素点的序列值记为第二数值。
步骤205,将每个灰度图像中的像素点的序列值按照预设的像素点排列顺序进行组合,得到每个灰度图像对应的整数序列。
其中,预设的像素点排列顺序可以由技术人员预设,并且存储至终端中,可以是每排的第一个像素点开始至该排的最后一个像素点,且第一排至最后一排,也可以是奇数排的第一个像素点开始至该排的最后一个像素点,偶数排的最后一个像素点至该排的第一个像素点,且第一排至最后一排。
在实施中,终端得到每个像素点序列值后,可以将每个灰度图像中的像素点的序列值按照预设的像素点排列顺序进行组合,得到每个灰度图像对应的整数序列。例如,预设数目为64,预设的像素点排列顺序为:奇数排的第一个像素点开始至该排的最后一个像素点,偶数排的最后一个像素点至该排的第一个像素点,且第一排至最后一排。某个灰度图像得到的整数序列0101101010101010110101001011010101010101101010010110101010101011。
步骤206,对于每个灰度图像对应的整数序列进行哈希运算,得到每个灰度图像对应的哈希值。
在实施中,终端得到每个灰度图像的整数序列后,可以对每个图像对应的整数序列,使用预设的哈希算法,进行哈希运算,得到每个灰度图像对应的哈希值。例如,可以对整数序列的每一位乘以预设的数值,然后进行相加得到哈希值。
步骤207,根据第一视频帧中每个灰度图像对应的哈希值,提取第一视频帧中的背景图像。
在实施中,终端计算得到每个灰度图像的哈希值之后,可以基于得到的哈希值提取背景图像。
可选的,基于哈希值,提取背景图像的方法可以如下:
确定第一视频帧中各灰度图像对应的哈希值的哈希平均值,在第一视频帧中,确定哈希值与哈希平均值的差值大于第一预设数值的灰度图像,根据确定出的灰度图像对应的子图像,确定背景图像。
其中,第一预设数值可以由技术人员设置,并且存储至终端中,如15等。
在实施中,终端得到每个灰度图像对应的哈希值后,可以计算各灰度图像对应的哈希值之和,然后将计算的结果除以灰度图像的数目,得到哈希平均值。然后终端可以计算每个灰度图像的哈希值与哈希平均值的差值,得到差值大于第一预设数值的灰度图像。然后终端可以确定差值大于第一预设数值的灰度图像对应的子图像,将确定出的各子图像拼接到一起,得到背景图像,如果得到的背景图像中有空白位置,可以将空白位置的像素点值设置为黑色像素点的像素值,或者可以将空白位置的像素点值设置为白色像素点的像素值。
另外,基于哈希值,提取背景图像的方法还可以如下:
确定第一视频帧中各灰度图像对应的哈希值的最大哈希值,在第一视频帧中,确定哈希值与最大哈希值的差值大于第二预设数值的灰度图像,根据确定出的灰度图像对应的子图像,确定背景图像。
其中,第二预设数值可以由技术人员设置,并且存储至终端中。
在实施中,终端得到每个灰度图像对应的哈希值后,可以确定各灰度图像对应的最大哈希值。然后终端可以计算每个灰度图像的哈希值与最大哈希值的差值,得到差值大于第二预设数值的灰度图像。然后终端可以确定差值大于第二预设数值的灰度图像对应的子图像,将确定出的各子图像拼接到一起,得到背景图像,如果得到的背景图像中有空白位置,可以将空白位置的像素点设置值黑色像素点的像素值,或者可以将空白位置的像素点设置值白色像素点的像素值。
本发明实施例中,终端在播放目标视频的过程中,当目标视频的第一视频帧的播放时长达到预设帧间隔时长,且还未接收到服务器发送的第二视频帧时,终端可以获取背景图像,背景图像是目标视频中已接收到的视频帧的背景图像,然后播放背景图像,当接收到第二视频帧时,播放第一视频帧。这样,即使接收第二视频帧数据出现延迟,终端也可以先获取背景图像,进行播放,而不会一直播放第一视频帧,即第一视频帧的播放时间不会被拖长,从而,在网络延迟不是很严重的情况下可以在一定程度上缓解视频播放卡顿的情况,提高了视频播放的流畅性。
基于相同的技术构思,本发明实施例还提供了一种视频播放的装置,如图4所示,该装置包括:
获取模块410,用于在播放目标视频的过程中,当所述目标视频的第一视频帧的播放时长达到预设帧间隔时长,且未接收到服务器发送的第二视频帧时,获取背景图像,其中,所述第二视频帧是所述第一视频帧的下一个视频帧,所述背景图像是所述目标视频中已接收到的视频帧的背景图像;
播放模块420,用于播放所述背景图像;
所述播放模块420,还用于当接收到所述第二视频帧时,播放所述第二视频帧。
可选的,如图5所示,所述装置还包括:
第一提取模块430,用于当所述第一视频帧开始播放,且未接收到所述服务器发送的所述第二视频帧时,从所述第一视频帧中提取背景图像;
所述获取模块410,用于:
获取从所述第一视频帧中提取的背景图像。
可选的,如图6所示,所述第一提取模块430,包括:
划分子模块431,用于将所述第一视频帧划分为包含预设数目个像素点的多个子图像;
转换子模块432,用于将每个子图像转换为灰度图像;
确定子模块433,用于确定每个灰度图像的灰度平均值;
记录子模块434,用于对于每个灰度图像,将所述灰度图像中像素点的灰度值大于或等于所述灰度图像的灰度平均值的像素点的序列值记为第一数值,并将所述灰度图像中像素点的灰度值小于所述灰度图像的灰度平均值的像素点的序列值记为第二数值;
组合子模块435,用于将每个灰度图像中的像素点的序列值按照预设的像素点排列顺序进行组合,得到每个灰度图像对应的整数序列;
运算子模块436,用于对于每个灰度图像对应的整数序列进行哈希运算,得到每个灰度图像对应的哈希值;
提取子模块437,用于根据所述第一视频帧中每个灰度图像对应的哈希值,提取所述第一视频帧中的背景图像。
可选的,所述提取子模块437,用于:
确定所述第一视频帧中各灰度图像对应的哈希值的哈希平均值;
在所述第一视频帧中,确定哈希值与所述哈希平均值的差值大于第一预设数值的灰度图像;
根据确定出的灰度图像对应的子图像,确定背景图像。
所述提取子模块437,用于:
确定所述第一视频帧中各灰度图像对应的哈希值的最大哈希值;
在所述第一视频帧中,确定哈希值与所述最大哈希值的差值大于第二预设数值的灰度图像;
根据确定出的灰度图像对应的子图像,确定背景图像。
可选的,如图7所示,所述装置还包括:
第二提取模块440,用于在播放所述目标视频的过程中,每经过预设的周期,提取当前周期内的任一视频帧的背景图像;
所述获取模块410,用于:
获取当前时间点所属周期的前一个周期提取的背景图像。
本发明实施例中,终端在播放目标视频的过程中,当目标视频的第一视频帧的播放时长达到预设帧间隔时长,且还未接收到服务器发送的第二视频帧时,终端可以获取背景图像,背景图像是目标视频中已接收到的视频帧的背景图像,然后播放背景图像,当接收到第二视频帧时,播放第一视频帧。这样,即使接收第二视频帧数据出现延迟,终端也可以先获取背景图像,进行播放,而不会一直播放第一视频帧,即第一视频帧的播放时间不会被拖长,从而,在网络延迟不是很严重的情况下可以在一定程度上缓解视频播放卡顿的情况,提高了视频播放的流畅性。
需要说明的是:上述实施例提供的视频播放的装置在进行视频播放时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的视频播放的装置与视频播放的方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
请参考图8,其示出了本发明实施例所涉及的具有触敏表面的终端结构示意图,该终端可以用于实施上述实施例中提供的进行视频播放的方法。具体来讲:
终端800可以包括RF(Radio Frequency,射频)电路110、包括有一个或一个以上计算机可读存储介质的存储器120、输入单元130、显示单元140、传感器150、音频电路160、WiFi(wireless fidelity,无线保真)模块170、包括有一个或者一个以上处理核心的处理器180、以及电源190等部件。本领域技术人员可以理解,图8中示出的终端结构并不构成对终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:
RF电路110可用于收发信息或通话过程中,信号的接收和发送,特别地,将基站的下行信息接收后,交由一个或者一个以上处理器180处理;另外,将涉及上行的数据发送给基站。通常,RF电路110包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块(SIM)卡、收发信机、耦合器、LNA(Low Noise Amplifier,低噪声放大器)、双工器等。此外,RF电路110还可以通过无线通信与网络和其他设备通信。所述无线通信可以使用任一通信标准或协议,包括但不限于GSM(Global System of Mobile communication,全球移动通讯系统)、GPRS(General Packet Radio Service,通用分组无线服务)、CDMA(CodeDivision Multiple Access,码分多址)、WCDMA(Wideband Code Division MultipleAccess,宽带码分多址)、LTE(Long Term Evolution,长期演进)、电子邮件、SMS(ShortMessaging Service,短消息服务)等。
存储器120可用于存储软件程序以及模块,处理器180通过运行存储在存储器120的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器120可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据终端800的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器120可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器120还可以包括存储器控制器,以提供处理器180和输入单元130对存储器120的访问。
输入单元130可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地,输入单元130可包括触敏表面131以及其他输入设备132。触敏表面131,也称为触摸显示屏或者触控板,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触敏表面131上或在触敏表面131附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触敏表面131可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器180,并能接收处理器180发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触敏表面131。除了触敏表面131,输入单元130还可以包括其他输入设备132。具体地,其他输入设备132可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示单元140可用于显示由用户输入的信息或提供给用户的信息以及终端800的各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元140可包括显示面板141,可选的,可以采用LCD(Liquid Crystal Display,液晶显示器)、OLED(Organic Light-Emitting Diode,有机发光二极管)等形式来配置显示面板141。进一步的,触敏表面131可覆盖显示面板141,当触敏表面131检测到在其上或附近的触摸操作后,传送给处理器180以确定触摸事件的类型,随后处理器180根据触摸事件的类型在显示面板141上提供相应的视觉输出。虽然在图8中,触敏表面131与显示面板141是作为两个独立的部件来实现输入和输入功能,但是在某些实施例中,可以将触敏表面131与显示面板141集成而实现输入和输出功能。
终端800还可包括至少一种传感器150,比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板141的亮度,接近传感器可在终端800移动到耳边时,关闭显示面板141和/或背光。作为运动传感器的一种,重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于终端800还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
音频电路160、扬声器161,传声器162可提供用户与终端800之间的音频接口。音频电路160可将接收到的音频数据转换后的电信号,传输到扬声器161,由扬声器161转换为声音信号输出;另一方面,传声器162将收集的声音信号转换为电信号,由音频电路160接收后转换为音频数据,再将音频数据输出处理器180处理后,经RF电路110以发送给比如另一终端,或者将音频数据输出至存储器120以便进一步处理。音频电路160还可能包括耳塞插孔,以提供外设耳机与终端800的通信。
WiFi属于短距离无线传输技术,终端800通过WiFi模块170可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图8示出了WiFi模块170,但是可以理解的是,其并不属于终端800的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
处理器180是终端800的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器120内的软件程序和/或模块,以及调用存储在存储器120内的数据,执行终端800的各种功能和处理数据,从而对手机进行整体监控。可选的,处理器180可包括一个或多个处理核心;优选的,处理器180可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器180中。
终端800还包括给各个部件供电的电源190(比如电池),优选的,电源可以通过电源管理系统与处理器180逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源190还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
尽管未示出,终端800还可以包括摄像头、蓝牙模块等,在此不再赘述。具体在本实施例中,终端800的显示单元是触摸屏显示器,终端800还包括有存储器,以及一个或者一个以上的程序,其中一个或者一个以上程序存储于存储器中,且经配置以由一个或者一个以上处理器执行述一个或者一个以上程序包含终端执行视频播放的方法的指令。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器,上述指令可由终端的处理器执行以完成上述传输网页图片的方法。例如,所述非临时性计算机可读存储介质可以是ROM、RAM、CD-ROM、磁带、软盘和光数据存储设备等。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (14)
1.一种视频播放的方法,其特征在于,所述方法包括:
在播放目标视频的过程中,当所述目标视频的第一视频帧的播放时长达到预设帧间隔时长,且未接收到服务器发送的第二视频帧时,获取背景图像,其中,所述第二视频帧是所述第一视频帧的下一个视频帧,所述背景图像是所述第一视频帧的背景图像,或者,所述背景图像是当前时间点所属周期的前一个周期内的任一视频帧的背景图像;
播放所述背景图像;
当接收到所述第二视频帧时,播放所述第二视频帧。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当所述第一视频帧开始播放,且未接收到所述服务器发送的所述第二视频帧时,从所述第一视频帧中提取背景图像;
所述获取背景图像,包括:
获取从所述第一视频帧中提取的背景图像。
3.根据权利要求2所述的方法,其特征在于,所述从所述第一视频帧中提取背景图像,包括:
将所述第一视频帧划分为包含预设数目个像素点的多个子图像;
将每个子图像转换为灰度图像;
确定每个灰度图像的灰度平均值;
对于每个灰度图像,将所述灰度图像中像素点的灰度值大于或等于所述灰度图像的灰度平均值的像素点的序列值记为第一数值,并将所述灰度图像中像素点的灰度值小于所述灰度图像的灰度平均值的像素点的序列值记为第二数值;
将每个灰度图像中的像素点的序列值按照预设的像素点排列顺序进行组合,得到每个灰度图像对应的整数序列;
对于每个灰度图像对应的整数序列进行哈希运算,得到每个灰度图像对应的哈希值;
根据所述第一视频帧中每个灰度图像对应的哈希值,提取所述第一视频帧中的背景图像。
4.根据权利要求3所述的方法,其特征在于,所述根据所述第一视频帧中每个灰度图像对应的哈希值,提取所述第一视频帧中的背景图像,包括:
确定所述第一视频帧中各灰度图像对应的哈希值的哈希平均值;
在所述第一视频帧中,确定哈希值与所述哈希平均值的差值大于第一预设数值的灰度图像;
根据确定出的灰度图像对应的子图像,确定背景图像。
5.根据权利要求3所述的方法,其特征在于,所述根据所述第一视频帧中每个灰度图像对应的哈希值,提取所述第一视频帧中的背景图像,包括:
确定所述第一视频帧中各灰度图像对应的哈希值的最大哈希值;
在所述第一视频帧中,确定哈希值与所述最大哈希值的差值大于第二预设数值的灰度图像;
根据确定出的灰度图像对应的子图像,确定背景图像。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在播放所述目标视频的过程中,每经过预设的周期,提取当前周期内的任一视频帧的背景图像;
所述获取背景图像,包括:
获取当前时间点所属周期的前一个周期提取的背景图像。
7.一种视频播放的装置,其特征在于,所述装置包括:
获取模块,用于在播放目标视频的过程中,当所述目标视频的第一视频帧的播放时长达到预设帧间隔时长,且未接收到服务器发送的第二视频帧时,获取背景图像,其中,所述第二视频帧是所述第一视频帧的下一个视频帧,所述背景图像是所述第一视频帧的背景图像,或者,所述背景图像是当前时间点所属周期的前一个周期内的任一视频帧的背景图像;
播放模块,用于播放所述背景图像;
所述播放模块,还用于当接收到所述第二视频帧时,播放所述第二视频帧。
8.根据权利要求7所述的装置,其特征在于,所述装置还包括:
第一提取模块,用于当所述第一视频帧开始播放,且未接收到所述服务器发送的所述第二视频帧时,从所述第一视频帧中提取背景图像;
所述获取模块,用于:
获取从所述第一视频帧中提取的背景图像。
9.根据权利要求8所述的装置,其特征在于,所述第一提取模块,包括:
划分子模块,用于将所述第一视频帧划分为包含预设数目个像素点的多个子图像;
转换子模块,用于将每个子图像转换为灰度图像;
确定子模块,用于确定每个灰度图像的灰度平均值;
记录子模块,用于对于每个灰度图像,将所述灰度图像中像素点的灰度值大于或等于所述灰度图像的灰度平均值的像素点的序列值记为第一数值,并将所述灰度图像中像素点的灰度值小于所述灰度图像的灰度平均值的像素点的序列值记为第二数值;
组合子模块,用于将每个灰度图像中的像素点的序列值按照预设的像素点排列顺序进行组合,得到每个灰度图像对应的整数序列;
运算子模块,用于对于每个灰度图像对应的整数序列进行哈希运算,得到每个灰度图像对应的哈希值;
提取子模块,用于根据所述第一视频帧中每个灰度图像对应的哈希值,提取所述第一视频帧中的背景图像。
10.根据权利要求9所述的装置,其特征在于,所述提取子模块,用于:
确定所述第一视频帧中各灰度图像对应的哈希值的哈希平均值;
在所述第一视频帧中,确定哈希值与所述哈希平均值的差值大于第一预设数值的灰度图像;
根据确定出的灰度图像对应的子图像,确定背景图像。
11.根据权利要求9所述的装置,其特征在于,所述提取子模块,用于:
确定所述第一视频帧中各灰度图像对应的哈希值的最大哈希值;
在所述第一视频帧中,确定哈希值与所述最大哈希值的差值大于第二预设数值的灰度图像;
根据确定出的灰度图像对应的子图像,确定背景图像。
12.根据权利要求7所述的装置,其特征在于,所述装置还包括:
第二提取模块,用于在播放所述目标视频的过程中,每经过预设的周期,提取当前周期内的任一视频帧的背景图像;
所述获取模块,用于:
获取当前时间点所属周期的前一个周期提取的背景图像。
13.一种视频播放的装置,其特征在于,所述装置包括处理器和存储器,所述存储器中存储有至少一条指令,所述指令由所述处理器加载并执行以实现如权利要求1至6任一所述的视频播放的方法。
14.一种计算机可读存储介质,其特征在于,所述存储介质中存储有至少一条指令,所述指令由处理器加载并执行以实现如权利要求1至6任一所述的视频播放的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710761677.0A CN107396193B (zh) | 2017-08-30 | 2017-08-30 | 视频播放的方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710761677.0A CN107396193B (zh) | 2017-08-30 | 2017-08-30 | 视频播放的方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107396193A CN107396193A (zh) | 2017-11-24 |
CN107396193B true CN107396193B (zh) | 2018-09-04 |
Family
ID=60348022
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710761677.0A Active CN107396193B (zh) | 2017-08-30 | 2017-08-30 | 视频播放的方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107396193B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110246001B (zh) * | 2019-04-24 | 2023-04-07 | 维沃移动通信有限公司 | 一种图像显示方法及终端设备 |
CN111182302B (zh) * | 2019-12-31 | 2022-04-22 | 歌尔光学科技有限公司 | 视频的图像编码方法、终端设备以及存储介质 |
CN111565332A (zh) * | 2020-04-27 | 2020-08-21 | 北京字节跳动网络技术有限公司 | 视频传输方法、电子设备和计算机可读介质 |
CN111601077A (zh) * | 2020-05-08 | 2020-08-28 | 杭州海康威视数字技术股份有限公司 | 数据帧渲染方法及装置 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101198022A (zh) * | 2007-12-26 | 2008-06-11 | 青岛海信移动通信技术股份有限公司 | 在流媒体播放或者缓冲过程中插播视频信息的方法 |
JP2010056729A (ja) * | 2008-08-27 | 2010-03-11 | Mitsubishi Electric Corp | フレーム補間装置及び方法並びに画像表示装置 |
CN102098585A (zh) * | 2010-11-30 | 2011-06-15 | 深圳Tcl新技术有限公司 | 一种网络电视的智能播放方法 |
CN102905188A (zh) * | 2012-11-01 | 2013-01-30 | 北京奇艺世纪科技有限公司 | 一种视频码流切换方法及装置 |
CN104679649A (zh) * | 2013-11-29 | 2015-06-03 | 腾讯科技(深圳)有限公司 | 一种软件流畅度测试方法和测试装置 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7174085B2 (en) * | 2001-08-20 | 2007-02-06 | Broadcom Corporation | Apparatus and method of seamless switching between a live DTV decoding and a PVR playback |
CN1980377A (zh) * | 2005-12-01 | 2007-06-13 | 北京北大方正电子有限公司 | 一种智能插播素材的方法 |
CN105025344A (zh) * | 2015-07-22 | 2015-11-04 | 无锡天脉聚源传媒科技有限公司 | 一种插播方法及装置 |
CN104967903A (zh) * | 2015-07-28 | 2015-10-07 | 无锡天脉聚源传媒科技有限公司 | 一种视频播放的检测方法及装置 |
CN106101823A (zh) * | 2016-07-08 | 2016-11-09 | 深圳天珑无线科技有限公司 | 一种视频显示数据的处理方法及显示装置 |
CN106303692A (zh) * | 2016-08-22 | 2017-01-04 | 乐视控股(北京)有限公司 | 视频加载方法及装置 |
-
2017
- 2017-08-30 CN CN201710761677.0A patent/CN107396193B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101198022A (zh) * | 2007-12-26 | 2008-06-11 | 青岛海信移动通信技术股份有限公司 | 在流媒体播放或者缓冲过程中插播视频信息的方法 |
JP2010056729A (ja) * | 2008-08-27 | 2010-03-11 | Mitsubishi Electric Corp | フレーム補間装置及び方法並びに画像表示装置 |
CN102098585A (zh) * | 2010-11-30 | 2011-06-15 | 深圳Tcl新技术有限公司 | 一种网络电视的智能播放方法 |
CN102905188A (zh) * | 2012-11-01 | 2013-01-30 | 北京奇艺世纪科技有限公司 | 一种视频码流切换方法及装置 |
CN104679649A (zh) * | 2013-11-29 | 2015-06-03 | 腾讯科技(深圳)有限公司 | 一种软件流畅度测试方法和测试装置 |
Also Published As
Publication number | Publication date |
---|---|
CN107396193A (zh) | 2017-11-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106454404B (zh) | 一种播放直播视频的方法、装置和系统 | |
CN106101736B (zh) | 一种虚拟礼物的展示方法和系统 | |
CN105554550B (zh) | 视频播放方法及装置 | |
CN106210755B (zh) | 一种播放直播视频的方法、装置和系统 | |
CN104618217B (zh) | 分享资源的方法、终端、服务器及系统 | |
CN106331826B (zh) | 一种设置直播模板和视频模式的方法、装置和系统 | |
CN105788612B (zh) | 一种检测音质的方法和装置 | |
CN106488296B (zh) | 一种显示视频弹幕的方法和装置 | |
CN105183296B (zh) | 交互界面显示方法及装置 | |
CN106933525B (zh) | 一种显示图像的方法和装置 | |
CN104519404B (zh) | 图像互换格式文件的播放方法及装置 | |
CN105808060B (zh) | 一种播放动画的方法和装置 | |
US20170147187A1 (en) | To-be-shared interface processing method, and terminal | |
CN106791892A (zh) | 一种轮麦直播的方法、装置和系统 | |
CN104159140B (zh) | 一种视频处理的方法、装置和系统 | |
CN107438200A (zh) | 直播间礼物展示的方法和装置 | |
CN104036536B (zh) | 一种定格动画的生成方法和装置 | |
CN106231433B (zh) | 一种播放网络视频的方法、装置和系统 | |
CN107396193B (zh) | 视频播放的方法和装置 | |
CN106791955B (zh) | 一种确定直播时长的方法和系统 | |
CN106504303B (zh) | 一种播放帧动画的方法和装置 | |
CN103886198B (zh) | 一种数据处理的方法、终端、服务器及系统 | |
CN104516624B (zh) | 一种输入账户信息的方法及装置 | |
CN106101764A (zh) | 一种显示视频数据的方法、装置和系统 | |
CN107943417A (zh) | 图像处理方法、终端、计算机存储介质及计算机程序 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |