CN104768082B - 一种音视频播放信息处理方法及服务器 - Google Patents

一种音视频播放信息处理方法及服务器 Download PDF

Info

Publication number
CN104768082B
CN104768082B CN201510151868.6A CN201510151868A CN104768082B CN 104768082 B CN104768082 B CN 104768082B CN 201510151868 A CN201510151868 A CN 201510151868A CN 104768082 B CN104768082 B CN 104768082B
Authority
CN
China
Prior art keywords
audio
video
time point
point
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510151868.6A
Other languages
English (en)
Other versions
CN104768082A (zh
Inventor
刘国栋
袁平广
廉磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Sogou Technology Development Co Ltd
Original Assignee
Beijing Sogou Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Sogou Technology Development Co Ltd filed Critical Beijing Sogou Technology Development Co Ltd
Priority to CN201510151868.6A priority Critical patent/CN104768082B/zh
Publication of CN104768082A publication Critical patent/CN104768082A/zh
Application granted granted Critical
Publication of CN104768082B publication Critical patent/CN104768082B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks

Abstract

本发明公开了一种音视频播放信息处理方法及服务器,该方法包括:获取N个音视频终端在播放同一音视频的过程中跳过的M个时间段,其中N为大于等于2的正数、M为大于等于设定阈值的正整数;根据所述M个时间段获得至少一个时间点,所述时间点为:所述音视频片头的开始时间点、结束时间点或热点片段的开始时间点;根据所述至少一个时间点辅助所述音视频的播放。在上述技术方案中,通过被跳过的M个时间段来获得音视频片头的开始时间点、结束时间点或热点片段的开始时间点更为准确,根据更为准确的时间点辅助播放该音视频,解决了现有技术中播放音视频时跳过片头或定位热点片段的准确性差的技术问题。

Description

一种音视频播放信息处理方法及服务器
技术领域
本发明涉及多媒体技术领域,特别涉及一种音视频播放信息处理方法及服务器。
背景技术
随着多媒体技术的不断发展,通过网络在线观看视频或者点播音频越来越方便,不仅可以在线观看连续剧、电影,还可以观看一些精彩视频片段、点播自己喜欢的音乐等。
现如今,对于视频不论是连续剧、电影还是精彩视频片段即热点片段,在播放的前一部分时间里会有片头等观众不太愿意看到的片段。现有技术中,采用如下方案跳过片头:首先,通过用户设置某个系列剧集的片头时间点并发送给服务器;在通过服务器记录该用户设置的时间点;接着在该用户观看该系列剧集的其他集数时,视频从用户设置的时间点开始下载播放。
然而,本申请发明人在实现本申请技术方案的过程中,发现很多系列剧集中各个剧集的片头时长并不完全相同,全部采用同一个时间点来跳过片头的准确性差,会出现跳过正片或者未完全跳过片头的情况,用户体验较差。对于音频的片头及音视频的热点片段,用户则只能通过手动跳过音频的片头或音视频的热点片段,如该音频节目的简介、音视频的精彩片段,容易出现进度条拖动过多或过少的情况,导致音频中需要被正常播出的片段被跳过或者未跳过片头。
可见,现有技术中存在播放音视频时跳过片头或定位热点片段的准确性差的技术问题。
发明内容
本发明实施例提供一种音视频播放信息处理方法及服务器,用于解决现有技术中播放音视频时跳过片头或定位热点片段的准确性差的技术问题,提高跳过片头或定位热点片段的准确性。
本申请实施例提供一种音视频播放信息处理方法,包括:
获取N个音视频终端在播放同一音视频的过程中跳过的M个时间段,其中N为大于等于2的整数、M为大于等于设定阈值的正整数;
根据所述M个时间段获得至少一个时间点,所述时间点为:所述音视频片头的开始时间点、结束时间点或热点片段的开始时间点;
根据所述至少一个时间点辅助所述音视频的播放。
可选的,所述根据所述M个时间段获得至少一个时间点,具体包括:
获得所述M个时间段的各个开始时间点对应的第一基准点,及M个时间段的各个结束时间点对应的第二基准点;
将M个所述第一基准点和M个所述第二基准点分别带入下述公式获得两个密度函数:
其中,xi为每个第一基准点或第二基准点,x为变量,K为核函数,h为归一化的预设宽度,n为数据量M;
将至少一个所述密度函数在预设时间区间内的波峰对应的至少一个x确定为所述至少一个时间点,其中,所述预设时间区间包含第一时间区间和/或第二时间区间,所述第一时间区间以零点开始且与所述第二时间区间无交集。
可选的,所述获得所述M个时间段的各个开始时间点对应的第一基准点,及M个时间段的各个结束时间点对应的第二基准点,具体包括:
获得各个所述开始时间点与所述音视频的总时长的第一比值,获得所述总时长包含的分段时间区间的总数与所述第一比值的第一乘积,将所述第一乘积对应的第一分段时间区间的中间时间点作为所述第一基准点;
获得各个所述结束时间点与所述音视频的总时长的第二比值,获得所述分段时间区间的总数与所述第二比值的第二乘积,将所述第二乘积对应的第二分段时间区间的中间时间点作为所述第二基准点。
可选的,根据所述至少一个时间点辅助所述音视频的播放,具体包括:
从所述至少一个时间点中获取所述音视频片头的开始时间点和结束时间点;
生成第一辅助指令,所述第一辅助指令为:跳过音视频片头的内容、快速播放所述音视频片头的内容或者在所述音视频片头的结束时间点处显示提示信息;
将所述第一辅助指令发送至播放所述音视频的音视频终端,使得所述音视频终端执行所述第一辅助指令以辅助所述音视频的播放。
可选的,从所述至少一个时间点中获取所述音视频片头的开始时间点和结束时间点,具体包括:
将通过第一密度函数在所述第一时间区间内获得的时间点作为所述音视频片头的开始时间点,其中,所述第一密度函数由M个所述第一基准点获得;
将通过第二密度函数在所述第一时间区间内获得的时间点作为所述音视频片头的结束时间点,其中,所述第二密度函数由M个所述第二基准点获得。
可选的,根据所述至少一个时间点辅助所述音视频的播放,具体包括:
将通过第二密度函数在所述第二时间区间内获得的时间点作为所述热点片段的开始时间点,所述第二密度函数由M个所述第二基准点获得;
生成第二辅助指令,所述第二辅助指令为:跳过所述热点片段的开始时间点之前的音视频内容、快速播放所述热点片段的开始时间点之前的内容或者在所述热点片段的开始时间点处显示所述热点片段提示信息;
将所述第二辅助指令发送至播放所述音视频的音视频终端,使得所述音视频终端执行所述第二辅助指令以辅助所述音视频的播放。
本申请实施例还提供一种服务器,包括:
获取单元,用于获取N个音视频终端在播放同一音视频的过程中跳过的M个时间段,其中N为大于等于2的整数、M为大于等于设定阈值的正整数;
计算单元,用于根据所述M个时间段获得至少一个时间点,所述时间点为:所述音视频片头的开始时间点、结束时间点或热点片段的开始时间点;
辅助单元,用于根据所述至少一个时间点辅助所述音视频的播放。
可选的,所述计算单元,用于:
获得所述M个时间段的各个开始时间点对应的第一基准点,及M个时间段的各个结束时间点对应的第二基准点;
将M个所述第一基准点和M个所述第二基准点分别带入下述公式获得两个密度函数:
其中,xi为每个第一基准点或第二基准点,x为变量,K为核函数,h为归一化的预设宽度,n为数据量M;
将至少一个所述密度函数在预设时间区间内的波峰对应的至少一个x确定为所述至少一个时间点,其中,所述预设时间区间包含第一时间区间和/或第二时间区间,所述第一时间区间以零点开始且与所述第二时间区间无交集。
可选的,所述计算单元用于:
获得各个所述开始时间点与所述音视频的总时长的第一比值,获得所述总时长包含的分段时间区间的总数与所述第一比值的第一乘积,将所述第一乘积对应的第一分段时间区间的中间时间点作为所述第一基准点;
获得各个所述结束时间点与所述音视频的总时长的第二比值,获得所述分段时间区间的总数与所述第二比值的第二乘积,将所述第二乘积对应的第二分段时间区间的中间时间点作为所述第二基准点。
可选的,所述辅助单元用于:
从所述至少一个时间点中获取所述音视频片头的开始时间点和结束时间点;
生成第一辅助指令,所述第一辅助指令为:跳过音视频片头的内容、快速播放所述音视频片头的内容或者在所述音视频片头的结束时间点处显示提示信息;
将所述第一辅助指令发送至播放所述音视频的音视频终端,使得所述音视频终端执行所述第一辅助指令以辅助所述音视频的播放。
可选的,所述辅助单元还用于:
将通过第一密度函数在所述第一时间区间内获得的时间点作为所述音视频片头的开始时间点,其中,所述第一密度函数由M个所述第一基准点获得;
将通过第二密度函数在所述第一时间区间内获得的时间点作为所述音视频片头的结束时间点,其中,所述第二密度函数由M个所述第二基准点获得。
可选的,所述辅助单元还用于:
将通过第二密度函数在所述第二时间区间内获得的时间点作为所述热点片段的开始时间点,所述第二密度函数由M个所述第二基准点获得;
生成第二辅助指令,所述第二辅助指令为:跳过所述热点片段的开始时间点之前的音视频内容、快速播放所述热点片段的开始时间点之前的内容或者在所述热点片段的开始时间点处显示所述热点片段提示信息;
将所述第二辅助指令发送至播放所述音视频的音视频终端,使得所述音视频终端执行所述第二辅助指令以辅助所述音视频的播放。
本申请实施例中的上述一个或多个技术方案,至少具有如下一种或多种技术效果:
通过获取N个音视频终端在播放同一音视频的过程中跳过的M个时间段,从M个时间段中获得至少一个时间点,该时间点为:音视频片头的开始时间点、结束时间点或热点片段的开始时间点,并根据获得的至少一个时间点辅助该音视频的播放。通过获得同一音视频的多次播放过程的多次跳过时间段,从中获得该音视频片头的开始时间点、结束时间点及热点片段的开始时间点中的至少一个时间点,这样获得的片头开始时间点、结束时间点或热点片段开始时间点更为准确,根据更为准确的时间点辅助播放该音视频,解决了现有技术中播放音视频时跳过片头或定位热点片段的准确性差的技术问题,进而提高了跳过片头或定位热点片段的准确性。
附图说明
图1为本申请实施例一提供的一种音视频播放信息处理方法的流程示意图;
图2为本申请实施例二提供的一种服务器的示意图。
具体实施方式
在本申请实施例提供的技术方案中,通过获得同一音视频的多次播放过程的多次跳过时间段,从中获得音视频片头的开始时间点、结束时间点或音视频的热点片段开始时间点更为准确,根据更为准确的时间点辅助该音视频播放时跳过片头或热点片段也更为准确,从而解决了现有技术中播放音视频时跳过片头或定位热点片段的准确性差的技术问题,进而提高了跳过片头或定位热点片段的准确性。
下面结合附图对本申请实施例技术方案的主要实现原理、具体实施方式及其对应能够达到的有益效果进行详细的阐述。
实施例一
请参考图1,本申请实施例提供一种音视频播放信息处理方法,包括:
S101:获取N个音视频终端在播放同一音视频的过程中跳过的M个时间段,其中N为大于等于2的整数、M为大于等于设定阈值的正整数;
S102:根据所述M个时间段获得至少一个时间点,所述时间点为:所述音视频片头的开始时间点、结束时间点或热点片段的开始时间点;
S103:根据所述至少一个时间点辅助所述音视频的播放。
需要说明的是,本申请实施例中提及的“播放”是指放送音视频文件的全过程,包括部分放送和全部放送;而“跳过”是指音视频文件在播放时未按照正常时间顺序播放,包括快进播放、从某一时间点跳到距离该时间点一段时长如5分钟后的另一时间点。
在具体实施过程中,本申请实施例提供的音视频播放信息处理方法应用于多媒体服务器。服务器与播放音视频的音视频终端通过网络相连,音视频终端可以通过服务器获得音视频资源然后再进行播放,其中该音视频包括音频、视频,视频可以是连续剧、电影、娱乐节目等,音频可以是音乐文件、音频节目等。音视频终端在播放某一音视频的过程中,可以采集用户在播放音视频的过程中拖动播放进度条、点击播放时间点等跳过某一播放时间段的操作。用户跳过的某一播放时间段可能是该音视频的片头或者该音视频中人们不感兴趣的音视频片段,所以本申请实施例提供的音视频终端将其播放的音视频被跳过的时间段上报给服务器,其中上报内容还可以包括音视频的网址、名称。当然,服务器也可以通过监测音视频的播放过程来获得被跳过的时间段。
服务器执行S101包括:获取N个音视频终端在播放同一音视频的过程中跳过的时间段,记录该时间段对应的音视频的名称、网址,与此同时还记录该音视频被跳过的时间段的个数,并判断该音视频被跳过的时间段的个数是否大于等于设定阈值,若判断结果为否,则继续接收音视频终端发送的该音视频被跳过的时间段;反之,若判断结果为是,即接收到该音视频在播放过程中被跳过的M个时间段,其中M为大于等于设定阈值的正整数,那么进一步执行S102。在具体实施过程中,设定阈值可以根据精准度的要求进行适应性设置,精准度要求越高设定阈值越大,反之设定阈值则越小。例如,设定阈值可以设置为10、100、500、1000、2000等。在实际应用过程中,为了进一步提高片头跳过和热点片段定位的准确性,设定阈值具体可以设置为大于等于1000的正整数,如1000、2000、3000等。
服务器执行S102根据M个时间段获得至少一个时间点。因为,用户在不知道播放内容的情况下,点击或拖动播放进度条跳过片头或非热点片段时,每个用户点击或拖动进度条所到的时间点都不尽相同,同时也不是很准确,所以本申请实施例提供一种时间点估计算法,对M个时间段的开始时间点和结束时间点分别进行核密度估计以获得至少一个时间点,其中,该至少一个时间点为核密度估计得到的密度分布最大的时间点,表征用户真正想跳过的内容的开始时间点和结束时间点,即该音视频片头的开始时间点、结束时间点或热点片段的开始时间点。
该时间点估计算法,需要对音视频的播放进度条上的数据即音视频总时长进行均匀分桶,即将音视频总时长平均分成多个时间区间,例如,桶的个数可以设置为1000,其中,桶越多精度越高,需要越多的时间数据支撑。这样,每个桶对应一段短时间区间,假设总时长为0~1那么第1个桶对应的时间区间为0/1000到1/1000,第2个桶对应的时间区间为1/1000到2/1000,如此类推。然后对获得的每一个时间点数据,判断它属于哪个桶,并用桶的中间位置近似认为是该时间点数据对应的用户实际想达到的位置,即基准点。
在具体实施过程中,服务器可以根据M个时间段的各个开始时间点获得对应的第一基准点,具体包括:获得各个开始时间点与音视频的总时长的第一比值,然后获得所述总时长包含的分段时间区间的总数(即桶数)与所述第一比值的第一乘积,最后将所述第一乘积对应的第一分段时间区间的中间时间点作为所述第一基准点。例如:假设某一视频的总时长为1、分桶数为1000、获得开始时间点为0.05,那么获得第一比值为0.05,进一步获得第一乘积为50,那么确定第一乘积50对应的第一分段时间区间为第50个分桶,第一分段时间区间的中间时间点为0.0495,因此获得0.0495为开始时间点0.05的第一基准点。
同样的,服务器可以根据M个时间段的各个结束时间点获得对应的第二基准点,具体包括:获得各个所述结束时间点与所述音视频的总时长的第二比值,获得所述分段时间区间的总数与所述第二比值的第二乘积,将所述第二乘积对应的第二分段时间区间的中间时间点作为所述第二基准点。
在获得第一基准点和第二基准点后,本申请实施例利用核函数,如标准正态分布函数、高斯分布函数等,分别对M个开始时间点和M个结束时间点进行核密度估计,从而得到两个密度函数:一个是估计开始时间点可能性分布的密度函数,一个是估计结束时间点可能性分布的密度函数。具体的,可以将M个第一基准点和M个第二基准点分别带入下述公式获得上述两个密度函数:
其中,xi为第一基准点或第二基准点,x为变量,K为核函数,h为归一化的预设宽度,n为数据量M。其中,h与数据量M的取值相关,数据量M越大,h可以选取越小的值,密度估计就越精准,反之则越不精准。
具体的,h可以取理论最优取值其中为开始时间点或结束时间点分布的标准差估计,n为数据量M。为了更好地根据数据实际情况设置h,h的取值还可以根据公式获得,其中k通过机器学习的方式得到。具体学习方式为,用人工对音视频进行分割点的标注,得到该音视频对应的点击数据点,以及分割位置。当然,这里标注的音视频会有很多。然后,选择一个最优的k值,使得平均来说,模型对每个音视频计算得到的分割点与人工分割点偏差最小。
在获得上述密度函数后,将至少一个所述密度函数在预设时间区间内的波峰对应的至少一个x确定为所述至少一个时间点。其中,预设时间区间包含第一时间区间和/或第二时间区间,第一时间区间以零点开始且与第二时间区间无交集。预设时间区间可以针对不同的音视频及实际需求进行不同的设置。
由于音视频在播放的过程中,被多次跳过的时间段通常为该音视频的片头或者该音视频中人们不感兴趣的音视频片段,其中,音视频的片头是指:放在音视频前的一段音视频内容,通过一定的叙述或剪接精彩片段,穿插自身特色所在的手法,以吸引观众。所以在实际情况只需要获取音视频片头时间时,预设时间区间可以设置为以零点开始、时间区间宽度为预设时长的第一时间区间;在实际情况需要获取音视频片头和热点片段的时间时,预设时间区间可以设置为:第一时间区间和第二时间区间,第二时间区间的开始时间点距离音视频开始时间点的时长大于预设时长。
服务器在获得预设时间区间内的至少一个时间点后,接着执行S103根据获得的至少一个时间点辅助该音视频的播放,例如:可以在播放该音视频时直接跳过时间点之前的内容,也可以在时间点处显示提示信息,提示用户热点音视频从该时间点开始,还可以快进播放时间点之前的音视频内容。
在具体实施过程中,服务器在执行S103时具体包括:从所述至少一个时间点中获取所述音视频片头的开始时间点和结束时间点;生成第一辅助指令,所述第一辅助指令为:跳过音视频片头的内容、快速播放所述音视频片头的内容或者在所述音视频片头的结束时间点处显示提示信息;将所述第一辅助指令发送至播放所述音视频的音视频终端,使得所述音视频终端执行所述第一辅助指令以辅助所述音视频的播放。
具体的,可以将通过第一密度函数在第一时间区间内获得的时间点作为音视频片头的开始时间点,其中,第一密度函数由M个第一基准点获得;将通过第二密度函数在第一时间区间内获得的时间点作为音视频片头的结束时间点,其中,第二密度函数由M个所述第二基准点获得。第一时间区间以零点开始,时间区间的宽度为预设时长。预设时长具体为片头结束时间点与音视频开始时间点之间的时长,较佳的,预设时长可以为1~10min,如1、2、2.5、5、6、10min等,相应的第一时间区间则可以属于[0,10]。需要说明的是,因为现有视频中新增了前情回顾,在前情回顾之后是片头,在片头之后才是正片,所以预设时长可以设置得比片头时长稍长一些,例如片头为1min,那么预设时长可以设置为2min。
进一步的,服务器根据获得的音视频片头的开始时间点和结束时间点,生成跳过该音视频片头的第一辅助指令,并将该第一辅助指令发送至播放所述音视频的音视频终端,辅助所述音视频终端在播放所述音视频时跳过该音视频的片头内容。
在具体实施过程中,音视频中经常被跳过的内容除了片头,还有一些人们不太感兴趣的片段,即人们有可能跳过不太感兴趣的片段直接播放热点片段,该热点片段可以为精彩片段,也可以为用户关注度比较高的片段。而这些热点片段通常出现在一个音视频的中后部分,所以服务器在执行S103时,还可以将通过第二密度函数在所述第二时间区间内获得的时间点作为所述热点片段的开始时间点,所述第二密度函数由M个所述第二基准点获得;生成第二辅助指令,所述第二辅助指令为:跳过所述热点片段的开始时间点之前的音视频内容、快速播放所述热点片段的开始时间点之前的内容或者在所述热点片段的开始时间点处显示所述热点片段提示信息;将所述第二辅助指令发送至播放所述音视频的音视频终端,使得所述音视频终端执行所述第二辅助指令以辅助所述音视频的播放。
下面结合实例对本申请提供的上述辅助音视频播放的方法进行进一步说明。
例1:步骤1、用户在一音视频网站播放音视频V1,并拖动音视频V1的进度条跳过第一时间段继续播放该音视频,此时音视频终端将该音视频V1的网址和用户拖动进度条跳过的第一时间段记录下来。
步骤2、音视频终端将该音视频V1的网址和用户拖动进度条跳过的第一时间段上传到服务器。
步骤3、服务器记录接收到的同一音视频在播放过程中被跳过的时间段的数量,接收到了不同用户在观看音视频V1时跳过的M次时间段后,服务器通过时间点估计算法获得密度函数,然后建立坐标轴,音视频的开始时间点为坐标零点,时间点为横坐标,密度函数的值为纵坐标,绘制密度函数的曲线图。
步骤4、针对由被跳过的时间段的开始时间点获得的第一密度函数,取第一时间区间内纵坐标轴上的最高点对应的时间点,将其作为音视频的开始时间点;针对由被跳过的时间段的结束时间点获得的第二密度函数,取第一时间区间内纵坐标轴上的最高点对应的时间点,将其作为该音视频片头的结束时间点,并生成第一辅助指令。
步骤5、下一个用户观看音视频V1时,如果检测到音视频的网址为音视频V1,服务器则执行第一辅助指令将音视频片头的开始时间点和结束时间点返回给新用户的音视频终端,辅助音视频终端帮助用户跳过该音视频片头直接从该音视频片头的结束时间点开始播放该音视频。
例2:假设用户A打开搜狐视频,观看《纸牌屋》第一季第一集,用户A看完视频开始的前情回顾,到了3分27秒时开始出现片头内容,用户A通过点击或拖动进度条时间点,终于定位到5分5秒,开始观看正片。
步骤1:用户A使用的视频终端记录《纸牌屋》第一季第一集被跳过的第一时间段(3分27秒~5分5秒),并将第一时间段和视频信息:《纸牌屋》第一季第一集上报给服务器。
步骤2:服务器接收视频终端上报的第一时间段和视频信息:《纸牌屋》第一季第一集。
步骤3:假设设定阈值为1000,当服务器接收到1000次上报关于《纸牌屋》第一季第一集被跳过的1000个时间段的上报信息后,对《纸牌屋》第一季第一集的1000个被跳过的时间段进行核密度分析,在第一时间区间[0,6]内获得的时间点为3分27秒和5分5秒,那么确认该视频的片头为3分27秒~5分5秒,生成第一辅助指令。
若步骤3中核密度分析时,由被跳过时间段的结束时间点获得的时间点还包括在第二时间区间(6,45]内的20分15秒,那么确认该视频中20分15秒的内容为该视频的热点片段的开始时间,生成第二辅助指令。
步骤4:新用户B观看《纸牌屋》第一季第一集时,服务器执行第一辅助指令和第二辅助指令将该视频片头的开始/结束时间点和热点片段的开始时间点发送给视频终端,并辅助该视频的播放,具体方法可以有:
1、当用户观看到3分27秒时,直接跳到5分5秒;或者,当用户观看到3分27秒时,视频自动以快进的方式播放到5分5秒后正常播放。
2、当用户观看该视频时,始终在进度条的20分15秒这个位置给用户一个提示元素,比如小箭头或文字等,用户点击后视频跳到20分15秒处观看热点片段。
例3:步骤1:用户A使用的手机记录《逻辑思维》第一集被跳过的时间段“欢迎收听逻辑思维……”(0分0秒~0分25秒),并将该时间段和音频信息:《逻辑思维》第一集上报给服务器。
步骤2:服务器接收音频终端手机上报的时间段和音频信息:“0分0秒~0分25秒”、《逻辑思维》第一集。
步骤3:假设设定阈值为500,当服务器接收到500次上报关于《逻辑思维》第一集被跳过的500个时间段的上报信息后,对《逻辑思维》第一集的被跳过时间段进行分析,在第一时间区间[0,5]内获得的时间点为0分0秒和0分25秒,那么确认该音频的片头为0分0秒至0分25秒,并生产第一辅助指令。
若在步骤3中进行分析时,发现由被跳过时间段的结束时间点获得的时间点还包括在第二时间区间(5,36]内的26分15秒,那么确认该音频中26分15秒的内容为该音频的热点片段的开始时间点,并生成第二辅助指令。
步骤4:新用户B观看《逻辑思维》第一集时,服务器执行第一辅助指令和第二辅助指令:将该音频片头的开始/结束时间点和热点片段的开始时间点发送给音频终端,并辅助该音频的播放:跳过该音频片头的音频内容并在热点片段的开始时间点处显示热点片段此处开始的提示信息。
实施例二
请参考图2,本申请实施提供一种服务器,包括:
获取单元201,用于获取N个音视频终端在播放同一音视频的过程中跳过的M个时间段,其中N为大于等于2的整数、M为大于等于设定阈值的正整数;
计算单元202,用于根据所述M个时间段获得至少一个时间点,所述时间点为:所述音视频片头的开始时间点、结束时间点或热点片段的开始时间点;
辅助单元203,用于根据所述至少一个时间点辅助所述音视频的播放。
在具体实施过程中,服务器中的计算单元202,用于:获得所述M个时间段的各个开始时间点对应的第一基准点,及M个时间段的各个结束时间点对应的第二基准点;将M个所述第一基准点和M个所述第二基准点分别带入下述公式获得两个密度函数:
其中,xi为每个第一基准点或第二基准点,x为变量,K为核函数,h为归一化的预设宽度,n为数据量M;然后,将至少一个所述密度函数在预设时间区间内的波峰对应的至少一个x确定为所述至少一个时间点,其中,所述预设时间区间包含第一时间区间和/或第二时间区间,所述第一时间区间以零点开始且与所述第二时间区间无交集。
在具体实施过程中,所述计算单元202用于:获得各个所述开始时间点与所述音视频的总时长的第一比值,获得所述总时长包含的分段时间区间的总数与所述第一比值的第一乘积,将所述第一乘积对应的第一分段时间区间的中间时间点作为所述第一基准点;获得各个所述结束时间点与所述音视频的总时长的第二比值,获得所述分段时间区间的总数与所述第二比值的第二乘积,将所述第二乘积对应的第二分段时间区间的中间时间点作为所述第二基准点。
在具体实施过程中,所述辅助单元203用于:从所述至少一个时间点中获取所述音视频片头的开始时间点和结束时间点;生成第一辅助指令,所述第一辅助指令为:跳过音视频片头的内容、快速播放所述音视频片头的内容或者在所述音视频片头的结束时间点处显示提示信息;将所述第一辅助指令发送至播放所述音视频的音视频终端,使得所述音视频终端执行所述第一辅助指令以辅助所述音视频的播放。
在具体实施过程中,所述辅助单元203还用于:将通过第一密度函数在所述第一时间区间内获得的时间点作为所述音视频片头的开始时间点,其中,所述第一密度函数由M个所述第一基准点获得;将通过第二密度函数在所述第一时间区间内获得的时间点作为所述音视频片头的结束时间点,其中,所述第二密度函数由M个所述第二基准点获得。
在具体实施过程中,所述辅助单元203还用于:将通过第二密度函数在所述第二时间区间内获得的时间点作为所述热点片段的开始时间点,所述第二密度函数由M个所述第二基准点获得;生成第二辅助指令,所述第二辅助指令为:跳过所述热点片段的开始时间点之前的音视频内容、快速播放所述热点片段的开始时间点之前的内容或者在所述热点片段的开始时间点处显示所述热点片段提示信息;将所述第二辅助指令发送至播放所述音视频的音视频终端,使得所述音视频终端执行所述第二辅助指令以辅助所述音视频的播放。
本申请实施例提供服务器为上述实施例提供的音视频播放信息处理方法对应的装置。通过上述实施例对音视频播放信息处理方法的详细描述,本领域普通技术人员能够清楚的指导该实施例服务器的具体实施过程,为了说明书的简洁,在此不再重复描述。
通过本申请实施例中的一个或多个技术方案,可以实现如下一个或多个技术效果:
1、通过获取N个音视频终端在播放同一音视频的过程中跳过的M个时间段,从M个时间段中获得至少一个时间点,该时间点为:音视频片头的开始时间点、结束时间点或热点片段的开始时间点,并根据获得的至少一个时间点辅助该音视频的播放。通过获得同一音视频的多次播放过程的多次跳过时间段,从中获得该音视频片头的开始时间点、结束时间点及热点片段的开始时间点中的至少一个时间点,这样获得的片头开始时间点、结束时间点或热点片段开始时间点更为准确,根据更为准确的时间点辅助播放该音视频,解决了现有技术中播放音视频时跳过片头或定位热点片段的准确性差的技术问题,进而提高了跳过片头或定位热点片段的准确性。
2、通过被跳过时间段的记录和分析,而非仅仅对时间点的记录和分析,针对片头不在音视频开始位置出现的音视频也能够准确的找到片头位置,而不会将音视频的前情回复误判为片头,具有更佳的用户体验。
3、通过对音视频中被跳过的时间段的结束时间点的分析,判断其与音视频起始时间点之间的间距是否小于设定时长,若不是则确定该时间段为该音视频的热点片段的开始时间点,并在下一次播放时提示用户该热点片段的起始时间点,方便用户直接观看,进一步提升了用户体验。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (12)

1.一种音视频播放信息处理方法,其特征在于,包括:
获取N个音视频终端在播放同一音视频的过程中跳过的M个时间段,其中N为大于等于2的整数、M为大于等于设定阈值的正整数;
根据所述M个时间段获得至少一个时间点:对M个时间段的开始时间点和结束时间点分别进行核密度估计以获得至少一个时间点,所述至少一个时间点为核密度估计得到的密度分布最大的时间点,所述至少一个时间点为:所述音视频片头的开始时间点、结束时间点或热点片段的开始时间点;
根据所述至少一个时间点辅助所述音视频的播放。
2.如权利要求1所述的方法,其特征在于,所述根据所述M个时间段获得至少一个时间点,具体包括:
获得所述M个时间段的各个开始时间点对应的第一基准点,及M个时间段的各个结束时间点对应的第二基准点;
将M个所述第一基准点和M个所述第二基准点分别带入下述公式获得两个密度函数:
其中,xi为第一基准点或第二基准点,x为变量,K为核函数,h为归一化的预设宽度,n为数据量M;
将至少一个所述密度函数在预设时间区间内的波峰对应的至少一个x确定为所述至少一个时间点,其中,所述预设时间区间包含第一时间区间和/或第二时间区间,所述第一时间区间以零点开始且与所述第二时间区间无交集。
3.如权利要求2所述的方法,其特征在于,所述获得所述M个时间段的各个开始时间点对应的第一基准点,及M个时间段的各个结束时间点对应的第二基准点,具体包括:
获得各个所述开始时间点与所述音视频的总时长的第一比值,获得所述总时长包含的分段时间区间的总数与所述第一比值的第一乘积,将所述第一乘积对应的第一分段时间区间的中间时间点作为所述第一基准点;
获得各个所述结束时间点与所述音视频的总时长的第二比值,获得所述总时长包含的分段时间区间的总数与所述第二比值的第二乘积,将所述第二乘积对应的第二分段时间区间的中间时间点作为所述第二基准点。
4.如权利要求2或3所述的方法,其特征在于,根据所述至少一个时间点辅助所述音视频的播放,具体包括:
从所述至少一个时间点中获取所述音视频片头的开始时间点和结束时间点;
生成第一辅助指令,所述第一辅助指令为:跳过音视频片头的内容、快速播放所述音视频片头的内容或者在所述音视频片头的结束时间点处显示提示信息;
将所述第一辅助指令发送至播放所述音视频的音视频终端,使得所述音视频终端执行所述第一辅助指令以辅助所述音视频的播放。
5.如权利要求4所述的方法,其特征在于,从所述至少一个时间点中获取所述音视频片头的开始时间点和结束时间点,具体包括:
将通过第一密度函数在所述第一时间区间内获得的时间点作为所述音视频片头的开始时间点,其中,所述第一密度函数由M个所述第一基准点获得;
将通过第二密度函数在所述第一时间区间内获得的时间点作为所述音视频片头的结束时间点,其中,所述第二密度函数由M个所述第二基准点获得。
6.如权利要求2或3所述的方法,其特征在于,根据所述至少一个时间点辅助所述音视频的播放,具体包括:
将通过第二密度函数在所述第二时间区间内获得的时间点作为所述热点片段的开始时间点,所述第二密度函数由M个所述第二基准点获得;
生成第二辅助指令,所述第二辅助指令为:跳过所述热点片段的开始时间点之前的音视频内容、快速播放所述热点片段的开始时间点之前的内容或者在所述热点片段的开始时间点处显示所述热点片段提示信息;
将所述第二辅助指令发送至播放所述音视频的音视频终端,使得所述音视频终端执行所述第二辅助指令以辅助所述音视频的播放。
7.一种服务器,其特征在于,所述服务器包括:
获取单元,用于获取N个音视频终端在播放同一音视频的过程中跳过的M个时间段,其中N为大于等于2的整数、M为大于等于设定阈值的正整数;
计算单元,用于根据所述M个时间段获得至少一个时间点:对M个时间段的开始时间点和结束时间点分别进行核密度估计以获得至少一个时间点,所述至少一个时间点为核密度估计得到的密度分布最大的时间点,所述至少一个时间点为:所述音视频片头的开始时间点、结束时间点或热点片段的开始时间点;
辅助单元,用于根据所述至少一个时间点辅助所述音视频的播放。
8.如权利要求7所述的服务器,其特征在于,所述计算单元,用于:
获得所述M个时间段的各个开始时间点对应的第一基准点,及M个时间段的各个结束时间点对应的第二基准点;
将M个所述第一基准点和M个所述第二基准点分别带入下述公式获得两个密度函数:
其中,xi为每个第一基准点或第二基准点,x为变量,K为核函数,h为归一化的预设宽度,n为数据量M;
将至少一个所述密度函数在预设时间区间内的波峰对应的至少一个x确定为所述至少一个时间点,其中,所述预设时间区间包含第一时间区间和/或第二时间区间,所述第一时间区间以零点开始且与所述第二时间区间无交集。
9.如权利要求8所述的服务器,其特征在于,所述计算单元用于:
获得各个所述开始时间点与所述音视频的总时长的第一比值,获得所述总时长包含的分段时间区间的总数与所述第一比值的第一乘积,将所述第一乘积对应的第一分段时间区间的中间时间点作为所述第一基准点;
获得各个所述结束时间点与所述音视频的总时长的第二比值,获得所述总时长包含的分段时间区间的总数与所述第二比值的第二乘积,将所述第二乘积对应的第二分段时间区间的中间时间点作为所述第二基准点。
10.如权利要求8或9所述的服务器,其特征在于,所述辅助单元用于:
从所述至少一个时间点中获取所述音视频片头的开始时间点和结束时间点;
生成第一辅助指令,所述第一辅助指令为:跳过音视频片头的内容、快速播放所述音视频片头的内容或者在所述音视频片头的结束时间点处显示提示信息;
将所述第一辅助指令发送至播放所述音视频的音视频终端,使得所述音视频终端执行所述第一辅助指令以辅助所述音视频的播放。
11.如权利要求10所述的服务器,其特征在于,所述辅助单元还用于:
将通过第一密度函数在所述第一时间区间内获得的时间点作为所述音视频片头的开始时间点,其中,所述第一密度函数由M个所述第一基准点获得;
将通过第二密度函数在所述第一时间区间内获得的时间点作为所述音视频片头的结束时间点,其中,所述第二密度函数由M个所述第二基准点获得。
12.如权利要求8或9所述的服务器,其特征在于,所述辅助单元还用于:
将通过第二密度函数在所述第二时间区间内获得的时间点作为所述热点片段的开始时间点,所述第二密度函数由M个所述第二基准点获得;
生成第二辅助指令,所述第二辅助指令为:跳过所述热点片段的开始时间点之前的音视频内容、快速播放所述热点片段的开始时间点之前的内容或者在所述热点片段的开始时间点处显示所述热点片段提示信息;
将所述第二辅助指令发送至播放所述音视频的音视频终端,使得所述音视频终端执行所述第二辅助指令以辅助所述音视频的播放。
CN201510151868.6A 2015-04-01 2015-04-01 一种音视频播放信息处理方法及服务器 Active CN104768082B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510151868.6A CN104768082B (zh) 2015-04-01 2015-04-01 一种音视频播放信息处理方法及服务器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510151868.6A CN104768082B (zh) 2015-04-01 2015-04-01 一种音视频播放信息处理方法及服务器

Publications (2)

Publication Number Publication Date
CN104768082A CN104768082A (zh) 2015-07-08
CN104768082B true CN104768082B (zh) 2019-01-29

Family

ID=53649625

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510151868.6A Active CN104768082B (zh) 2015-04-01 2015-04-01 一种音视频播放信息处理方法及服务器

Country Status (1)

Country Link
CN (1) CN104768082B (zh)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106658227B (zh) * 2015-10-29 2020-01-21 阿里巴巴集团控股有限公司 视频播放长度的压缩方法及装置
CN105611412A (zh) * 2015-12-22 2016-05-25 小米科技有限责任公司 视频文件播放方法、确定视频片段的方法及装置
CN105578262B (zh) * 2015-12-24 2019-06-11 Tcl集团股份有限公司 一种在线视频定位播放的方法及系统
CN107147953B (zh) * 2017-06-07 2020-04-24 深圳Tcl新技术有限公司 视频播放控制方法、播放终端及其存储介质
CN107333182A (zh) * 2017-06-19 2017-11-07 北京小米移动软件有限公司 多媒体文件的播放方法及装置
CN107948718B (zh) * 2017-12-05 2020-01-24 深圳创维-Rgb电子有限公司 一种节目信息的处理方法、装置及系统
CN108174243A (zh) * 2017-12-28 2018-06-15 广东欧珀移动通信有限公司 一种视频播放速率的调节方法、装置、存储介质及终端
CN108683938A (zh) * 2018-05-11 2018-10-19 Oppo(重庆)智能科技有限公司 视频播放显示方法、装置、存储介质及终端设备
CN110519655B (zh) * 2018-05-21 2022-06-10 阿里巴巴(中国)有限公司 视频剪辑方法、装置及存储介质
CN108900877B (zh) * 2018-07-16 2021-05-25 广州辉群智能科技有限公司 控制音视频播放设备播放音视频文件的方法及服务设备
CN108989882B (zh) * 2018-08-03 2021-05-28 百度在线网络技术(北京)有限公司 用于输出视频中的音乐片段的方法和装置
CN109862441A (zh) * 2019-03-29 2019-06-07 联想(北京)有限公司 一种信息处理方法和电子设备
CN110958487B (zh) * 2019-11-15 2022-03-11 维沃移动通信有限公司 一种视频播放进度定位方法及电子设备
CN112463996A (zh) * 2020-11-19 2021-03-09 长城计算机软件与系统有限公司 一种音视频文件播放方法、装置、终端和存储介质
CN113032082B (zh) * 2021-04-19 2023-08-11 北京新三优秀科技有限公司 一种控件显示方法、电子设备和计算机可读存储介质
CN114584840B (zh) * 2022-02-28 2024-02-23 北京梧桐车联科技有限责任公司 音视频播放方法、装置及存储介质
CN114821436B (zh) * 2022-05-07 2022-12-06 中广电广播电影电视设计研究院 沉浸式视频终端评价检测方法及系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101345853A (zh) * 2008-08-07 2009-01-14 深圳市迅雷网络技术有限公司 一种获取视频资源截取时间点的方法及系统
CN102348089A (zh) * 2010-08-06 2012-02-08 康佳集团股份有限公司 视频播放方法及系统
CN104410920A (zh) * 2014-12-31 2015-03-11 合一网络技术(北京)有限公司 基于视频分段播放量进行精彩片段标注的方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101345853A (zh) * 2008-08-07 2009-01-14 深圳市迅雷网络技术有限公司 一种获取视频资源截取时间点的方法及系统
CN102348089A (zh) * 2010-08-06 2012-02-08 康佳集团股份有限公司 视频播放方法及系统
CN104410920A (zh) * 2014-12-31 2015-03-11 合一网络技术(北京)有限公司 基于视频分段播放量进行精彩片段标注的方法

Also Published As

Publication number Publication date
CN104768082A (zh) 2015-07-08

Similar Documents

Publication Publication Date Title
CN104768082B (zh) 一种音视频播放信息处理方法及服务器
US10650861B2 (en) Video summarization and collaboration systems and methods
CA2951852C (en) Detection of demarcating segments in video
Bettadapura et al. Leveraging contextual cues for generating basketball highlights
TWI672044B (zh) 字幕資料的處理方法及系統
CN104486649B (zh) 视频内容评级方法及装置
CN103718166A (zh) 信息处理设备、信息处理方法和计算机程序产品
CN111512635B (zh) 用于选择性跳过媒体内容的方法和系统
US20130232516A1 (en) Method And Apparatus for Collection and Analysis of Real-Time Audience Feedback
US9164979B1 (en) Implicit ratings
CN112753227A (zh) 用于在体育事件电视节目中检测人群噪声的发生的音频处理
KR20140063590A (ko) 미디어 내의 오브젝트와 관련된 감정 정보
WO2017161744A1 (zh) 一种视频推荐方法及装置
CN105788610A (zh) 音频处理方法及装置
WO2016023366A1 (zh) 一种评估媒体文件的方法及装置
US11922968B2 (en) Audio processing for detecting occurrences of loud sound characterized by brief audio bursts
CN109218765A (zh) 一种视频直播房间推荐方法及装置
CN106488325B (zh) 网络媒体文件播放方法、装置及设备
CN103442270B (zh) 一种采集用户的收视数据的方法及装置
CN106713985A (zh) 一种推荐网络视频的方法和装置
CN108769831B (zh) 视频预告的生成方法及装置
CN104883619B (zh) 音视频内容推荐系统、方法及装置
CN104581226A (zh) 一种针对当前直播流进行节目推荐的方法和装置
US8306992B2 (en) System for determining content topicality, and method and program thereof
KR20180103125A (ko) 비디오 콘텐츠에서의 윈드 노이즈들의 필터링

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant