CN107040728B - 一种视频时间轴生成方法及装置、用户设备 - Google Patents
一种视频时间轴生成方法及装置、用户设备 Download PDFInfo
- Publication number
- CN107040728B CN107040728B CN201710231465.1A CN201710231465A CN107040728B CN 107040728 B CN107040728 B CN 107040728B CN 201710231465 A CN201710231465 A CN 201710231465A CN 107040728 B CN107040728 B CN 107040728B
- Authority
- CN
- China
- Prior art keywords
- video
- audio
- node
- key frame
- study
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明实施例公开了一种视频时间轴生成方法及装置、用户设备,该方法包括:导入预先拍摄的学习视频;从所述学习视频中确定视频关键帧所在的位置;获取所述视频关键帧对应的时间节点;根据所述视频关键帧所在的位置以及所述视频关键帧对应的时间节点,生成视频时间轴。本发明实施例可以提高视频时间轴制作的效率。
Description
技术领域
本发明涉及智能设备技术领域,尤其涉及一种视频时间轴生成方法及装置、用户设备。
背景技术
随着学习手机、学习电脑等用户设备的广泛普及,学生利用学习手机、学习电脑等用户设备进行学习已经是一种很常见的学习方式。
目前,这些用户设备可以拍摄学校老师上课的视频,在制作成与书本同步的学习视频后,将该学习视频导入这些用户设备上,提供视频资源供学生学习使用。通常,在视频拍摄后,在后期进行视频处理时,需加上视频时间轴。现有划分时间轴的制作方法是,人工一边观看视频,一边确认时间轴节点,之后通过软件或程序生成带有时间轴的视频。然而,这种制作方法比较耗费人力,耗费时间,效率较低。
发明内容
本发明实施例公开了一种视频时间轴生成方法及装置、用户设备,可以提高视频时间轴制作的效率。
本发明实施例第一方面公开一种视频时间轴生成方法,包括:
导入预先拍摄的学习视频;
从所述学习视频中确定视频关键帧所在的位置;
获取所述视频关键帧对应的时间节点;
根据所述视频关键帧所在的位置以及所述视频关键帧对应的时间节点,生成视频时间轴。
作为一种可选的实施方式,在本发明实施例第一方面中,在所述学习视频不存在原始文本课件的情况下,所述从所述学习视频中确定视频关键帧所在的位置包括:
解析所述学习视频中的音频信息,并根据所述音频信息中人物讲话的时间间隔,将所述学习视频切割成多个小音频;
将所述多个小音频中的任意两个小音频的文本内容进行对比,获得携带有相似度的对比结果;
将所述对比结果中相似度大于或等于预设相似度阈值的文本内容所对应的小音频划分为同一节点的视频,以及将所述对比结果中相似度小于所述预设相似度阈值的文本内容所对应的小音频划分为不同节点的视频;
在划分结束后,将不同节点所在的位置确定为视频关键帧所在的位置。
作为一种可选的实施方式,在本发明实施例第一方面中,在所述学习视频存在原始文本课件的情况下,所述从所述学习视频中确定视频关键帧所在的位置包括:
解析所述学习视频中的音频,获得所述音频的文本内容;
根据所述原始课件的文本内容的分节标记,为所述音频的文本内容进行划分,以确定所述音频的多个不同节点;
将不同节点所对应的音频的位置确定为视频关键帧所在的位置。
作为一种可选的实施方式,在本发明实施例第一方面中,所述方法还包括:
接收针对所述视频时间轴上多个时间节点中的任一时间节点的操作指令;
响应所述操作指令,从所述任一时间节点对应的位置开始进行播放;
统计预设时间段内所述任一时间节点被操作的频率以及所述任一时间节点对应的视频的播放时长;
若所述频率超过预设频率以及所述播放时长超过预设时长,则对所述任一时间节点进行标记。
作为一种可选的实施方式,在本发明实施例第一方面中,所述方法还包括:
若所述频率超过预设频率以及所述播放时长超过预设时长,确定所述任一时间节点对应的视频的知识点类型;
将所述任一时间节点对应的视频添加到与所述知识点类型匹配的重要视频库中。
本发明实施例第二方面公开一种视频时间轴生成装置,包括:
导入单元,用于导入预先拍摄的学习视频;
确定单元,用于从所述学习视频中确定视频关键帧所在的位置;
获取单元,用于获取所述视频关键帧对应的时间节点;
生成单元,用于根据所述视频关键帧所在的位置以及所述视频关键帧对应的时间节点,生成视频时间轴。
作为一种可选的实施方式,在本发明实施例第二方面中,在所述学习视频不存在原始文本课件的情况下,所述确定单元包括:
第一解析子单元,用于解析所述学习视频中的音频信息,并根据所述音频信息中人物讲话的时间间隔,将所述学习视频切割成多个小音频;
第一对比子单元,用于将所述多个小音频中的任意两个小音频的文本内容进行对比,获得携带有相似度的对比结果;
第一划分子单元,用于将所述对比结果中相似度大于或等于预设相似度阈值的文本内容所对应的小音频划分为同一节点的视频,以及将所述对比结果中相似度小于所述预设相似度阈值的文本内容所对应的小音频划分为不同节点的视频;
第一确定子单元,用于在划分结束后,将不同节点所在的位置确定为视频关键帧所在的位置。
作为一种可选的实施方式,在本发明实施例第二方面中,在所述学习视频存在原始文本课件的情况下,所述确定单元包括:
第二解析子单元,用于解析所述学习视频中的音频,获得所述音频的文本内容;
第二划分子单元,用于根据所述原始课件的文本内容的分节标记,为所述音频的文本内容进行划分,以确定所述音频的多个不同节点;
第二确定子单元,用于将不同节点所对应的音频的位置确定为视频关键帧所在的位置。
作为一种可选的实施方式,在本发明实施例第二方面中,所述视频时间轴生成装置还包括:
接收单元,用于接收针对所述视频时间轴上多个时间节点中的任一时间节点的操作指令;
播放单元,用于响应所述操作指令,从所述任一时间节点对应的位置开始进行播放;
统计单元,用于统计预设时间段内所述任一时间节点被操作的频率以及所述任一时间节点对应的视频的播放时长;
标记单元,用于若所述频率超过预设频率以及所述播放时长超过预设时长,则对所述任一时间节点进行标记。
作为一种可选的实施方式,在本发明实施例第二方面中,所述确定单元,还用于若所述频率超过预设频率以及所述播放时长超过预设时长,确定所述任一时间节点对应的视频的知识点类型;
所述视频时间轴生成装置还包括:
添加单元,用于将所述任一时间节点对应的视频添加到与所述知识点类型匹配的重要视频库中。
本发明实施例第三方面公开一种用户设备,包括本发明实施例第二方面公开的所述视频时间轴生成装置。
与现有技术相比,本发明实施例具备以下有益效果:
本发明实施例中,用户设备在导入预先拍摄的学习视频之后,从学习视频中确定视频关键帧所在的位置,进一步地,用户设备获取视频关键帧对应的时间节点,并根据视频关键帧所在的位置以及视频关键帧对应的时间节点,生成视频时间轴。可见,实施本发明实施例,用户设备可以自动根据视频关键帧所在的位置以及视频关键帧对应的时间节点,生成视频时间轴,而不需要靠人工来制作,从而节省了人力节省了时间,提高了视频时间轴制作的效率。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例公开的一种视频时间轴生成方法的流程示意图;
图2是本发明实施例公开的另一种视频时间轴生成方法的流程示意图;
图3是本发明实施例公开的另一种视频时间轴生成方法的流程示意图;
图4是本发明实施例公开的一种视频时间轴生成装置的结构示意图;
图5是本发明实施例公开的另一种视频时间轴生成装置的结构示意图;
图6是本发明实施例公开的另一种视频时间轴生成装置的结构示意图;
图7是本发明实施例公开的另一种视频时间轴生成装置的结构示意图;
图8是本发明实施例公开的一种用户设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”和“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例公开了一种视频时间轴生成方法及装置、用户设备,可以提高视频时间轴制作的效率。以下进行结合附图进行详细描述。
实施例一
请参阅图1,图1是本发明实施例公开的一种视频时间轴生成方法的流程示意图。如图1所示,该视频时间轴生成方法可以包括以下步骤:
101、用户设备导入预先拍摄的学习视频。
本发明实施例中,用户可以预先对老师授课的现场(如教室,演播室)拍摄,获得学习视频,其中,该学习视频如幼儿园阶段的学习视频、小学阶段的学习视频、中学阶段的学习视频以及大学的学习视频等,具体内容包括但不限于各科目的内容,如语文、数学、英语、物理、化学等科目的内容。
102、用户设备从学习视频中确定视频关键帧所在的位置。
本发明实施例中,该视频关键帧所在的位置可以理解为学习视频中关键内容所在时间节点的位置。比如:该学习视频中讲述了3道数学题,则视频关键帧所在的位置可以为第1道题的开始时间节点所在的位置、第2道题的开始时间节点所在的位置以及第3道题的开始时间节点所在的位置,也即视频关键帧所在的位置为每道题的开始时间所在的位置。
作为一种可选的实施方式,在学习视频不存在原始文本课件的情况下,从学习视频中确定视频关键帧所在的位置包括:
解析学习视频中的音频信息,并根据音频信息中人物讲话的时间间隔,将学习视频切割成多个小音频;
将多个小音频中的任意两个小音频的文本内容进行对比,获得携带有相似度的对比结果;
将对比结果中相似度大于或等于预设相似度阈值的文本内容所对应的小音频划分为同一节点的视频,以及将对比结果中相似度小于预设相似度阈值的文本内容所对应的小音频划分为不同节点的视频;
在划分结束后,将不同节点所在的位置确定为视频关键帧所在的位置。
在该实施例中,学习视频中包括音频信息以及视频信息,用户设备可以解析学习视频,以获得音频信息,并根据音频信息中人物讲话的时间间隔(比如10min),对学习视频进行初步切割定位,即可以将学习视频切割成多个小音频,这些多个小音频的文本内容可能互相有关联,也可能互相没有关联。进一步地,由于预先拍摄的学习视频中不存在原始文本课件,为了确定多个小音频中的任意两个小音频的文本内容之间的关联性,还需要将多个小音频中的任意两个小音频的文本内容进行对比,获得携带有相似度的对比结果;如果对比结果中,某两个小音频的文本内容的相似度大于或等于预设相似度阈值(如80%),则可以确定这两个小音频为存在关联性的音频,进一步可以确定这两个小音频为同一节点的视频,反之,如果对比结果中,某两个小音频的文本内容的相似度小于预设相似度阈值(如80%),则可以确定这两个小音频为不存在关联性的音频,进一步可以确定这两个小音频为不同节点的视频。以此类推,直至将所有小音频划分为相同节点的视频或不同节点的视频。在划分结束后,用户设备就可以将不同节点所在的位置确定为视频关键帧所在的位置。
作为另一种可选的实施方式,在学习视频存在原始文本课件的情况下,从学习视频中确定视频关键帧所在的位置包括:
解析所述学习视频中的音频,获得所述音频的文本内容;
根据所述原始课件的文本内容的分节标记,为所述音频的文本内容进行划分,以确定所述音频的多个不同节点;
将不同节点所对应的音频的位置确定为视频关键帧所在的位置。
在该实施例中,预先拍摄的学习视频中存在原始文本课件,而且,该原始文本课件的文本内容存在分节标记,比如:该原始文本课件有3道题,则第1道题与第2道题的交界处是一个分节标记,第2道题与第3道题的交界处也是一个分节标记。用户设备在导入预先拍摄的学习视频之后,可以先解析述学习视频中的音频,获得音频的文本内容,进一步地,根据原始课件的文本内容的分节标记,为音频的文本内容进行划分,以确定音频的多个不同节点。通常,原始课件的文本内容与音频的文本内容基本相同,故原始课件的文本内容的分节标记也就是音频的文本内容的不同节点,从而,用户设备可以将不同节点所对应的音频的位置确定为视频关键帧所在的位置。
103、用户设备获取视频关键帧对应的时间节点。
本发明实施例中,学习视频有相应的播放时长,每个视频关键帧也有相应的播放时间节点。比如:学习视频总的播放时长为5min,则视频关键帧对应的时间节点为3min20s。
104、用户设备根据视频关键帧所在的位置以及视频关键帧对应的时间节点,生成视频时间轴。
本发明实施例中,用户设备在确定视频关键帧所在的位置以及视频关键帧对应的时间节点之后,就可以将二者进行绑定,生成视频时间轴了。后续,用户只需要点击视频时间轴上的时间节点,就可以对该时间节点对应的视频进行播放了。
在图1所描述的方法,用户设备在导入预先拍摄的学习视频之后,从学习视频中确定视频关键帧所在的位置,进一步地,用户设备获取视频关键帧对应的时间节点,并根据视频关键帧所在的位置以及视频关键帧对应的时间节点,生成视频时间轴。可见,实施本发明实施例,用户设备可以自动根据视频关键帧所在的位置以及视频关键帧对应的时间节点,生成视频时间轴,而不需要靠人工来制作,从而节省了人力节省了时间,提高了视频时间轴制作的效率。
实施例二
请参阅图2,图2是本发明实施例公开的另一种视频时间轴生成方法的流程示意图。如图2所示,该视频时间轴生成方法可以包括以下步骤:
201、用户设备导入预先拍摄的学习视频。
202、在学习视频不存在原始文本课件的情况下,用户设备解析学习视频中的音频信息,并根据音频信息中人物讲话的时间间隔,将学习视频切割成多个小音频。
本发明实施例中,学习视频中包括音频信息以及视频信息,用户设备可以解析学习视频,以获得音频信息,并根据音频信息中人物讲话的时间间隔(比如10min),对学习视频进行初步切割定位,即可以将学习视频切割成多个小音频,这些多个小音频的文本内容可能互相有关联,也可能互相没有关联。举例来说,把属于同一道题的多个小音频看成是有关联的,而把属于不同的题目的多个小音频看成是没有关联的。
203、用户设备将多个小音频中的任意两个小音频的文本内容进行对比,获得携带有相似度的对比结果。
本发明实施例中,由于预先拍摄的学习视频中不存在原始文本课件,为了确定多个小音频中的任意两个小音频的文本内容之间的关联性,还需要将多个小音频中的任意两个小音频的文本内容进行对比,获得携带有相似度的对比结果。其中,该相似度可以用于描述任意两个小音频之间的关联性,也即用于表征任意两个小音频是否属于同一道题目。
204、用户设备将对比结果中相似度大于或等于预设相似度阈值的文本内容所对应的小音频划分为同一节点的视频,以及将对比结果中相似度小于预设相似度阈值的文本内容所对应的小音频划分为不同节点的视频。
本发明实施例中,如果对比结果中,某两个小音频的文本内容的相似度大于或等于预设相似度阈值(如80%),则可以确定这两个小音频为存在关联性的音频,进一步可以确定这两个小音频为同一节点的视频,反之,如果对比结果中,某两个小音频的文本内容的相似度小于预设相似度阈值(如80%),则可以确定这两个小音频为不存在关联性的音频,进一步可以确定这两个小音频为不同节点的视频。以此类推,直至将所有小音频划分为相同节点的视频或不同节点的视频。
205、用户设备在划分结束后,将不同节点所在的位置确定为视频关键帧所在的位置。
206、用户设备获取视频关键帧对应的时间节点。
207、用户设备根据视频关键帧所在的位置以及视频关键帧对应的时间节点,生成视频时间轴。
208、用户设备接收针对视频时间轴上多个时间节点中的任一时间节点的操作指令。
本发明实施例中,当用户需要播放某个时间节点对应的学习视频时,用户可以通过点击(单击、双击、触摸)的方式来触发生成针对视频时间轴上多个时间节点中的任一时间节点的操作指令。
209、用户设备响应操作指令,从任一时间节点对应的位置开始进行播放。
本发明实施例中,在用户设备接收到针对视频时间轴上多个时间节点中的任一时间节点的操作指令之后,用户设备就可以响应操作指令,从任一时间节点对应的位置开始进行播放。可选的,当该任一时间节点对应的视频播放结束后,用户设备可以停止继续播放下一时间节点的视频;或者,可选的,当该任一时间节点对应的视频播放结束后,用户设备可以继续播放下一时间节点的视频,直至接收到用户输入的停止播放指令为止。
210、用户设备统计预设时间段内任一时间节点被操作的频率以及任一时间节点对应的视频的播放时长。
本发明实施例中,用户在学习过程中,可能对某些时间节点的学习视频比较重视,需要经常播放该时间节点的学习视频,故用户对该时间节点的学习视频的操作频率比较高,同时,对该时间节点的学习视频的播放时长也会长些。为了确定用户对哪些时间节点的学习视频比较重视,用户设备可以统计预设时间段内(如一周内)任一时间节点被操作的频率以及任一时间节点对应的视频的播放时长。
211、若频率超过预设频率以及播放时长超过预设时长,用户设备对任一时间节点进行标记。
本发明实施例中,若频率超过预设频率以及播放时长超过预设时长,表明用户经常观看该任一时间节点的视频,为了方便用户日后快速便捷地找到该任一时间节点的视频,用户设备可以对任一时间节点进行标记。比如:用不同的颜色对该任一时间节点进行标记,又比如:用不同的图形对该任一时间节点进行标记等等。
其中,实施图2所描述的方法中,用户设备在导入预先拍摄的学习视频之后,在学习视频不存在原始文本课件的情况下,用户设备对学习视频中的音频进行分割,并将多个小音频中的任意两个小音频的文本内容进行对比,根据对比结果来确定视频关键帧所在的位置,进一步地,根据视频关键帧所在的位置以及视频关键帧对应的时间节点,生成视频时间轴,而不需要靠人工来制作,从而节省了人力节省了时间,提高了视频时间轴制作的效率。此外,用户设备还可以根据预设时间段内任一时间节点被操作的频率以及任一时间节点对应的视频的播放时长,对任一时间节点进行标记,这有利于用户日后快速便捷地找到该任一时间节点的视频,提高用户体验。
实施例三
请参阅图3,图3是本发明实施例公开的另一种视频时间轴生成方法的流程示意图。如图3所示,该视频时间轴生成方法可以包括以下步骤:
301、用户设备导入预先拍摄的学习视频。
302、在学习视频存在原始文本课件的情况下,用户设备解析学习视频中的音频,获得音频的文本内容。
303、用户设备根据原始课件的文本内容的分节标记,为音频的文本内容进行划分,以确定所述音频的多个不同节点。
本发明实施例中,预先拍摄的学习视频中存在原始文本课件,而且,该原始文本课件的文本内容存在分节标记,比如:该原始文本课件有3道题,则第1道题与第2道题的交界处是一个分节标记,第2道题与第3道题的交界处也是一个分节标记。用户设备在导入预先拍摄的学习视频之后,可以先解析述学习视频中的音频,获得音频的文本内容,进一步地,根据原始课件的文本内容的分节标记,为音频的文本内容进行划分,以确定音频的多个不同节点。通常,原始课件的文本内容与音频的文本内容基本相同,故原始课件的文本内容的分节标记也就是音频的文本内容的不同节点,从而,用户设备可以将不同节点所对应的音频的位置确定为视频关键帧所在的位置。
304、用户设备将不同节点所对应的音频的位置确定为视频关键帧所在的位置。
305、用户设备获取视频关键帧对应的时间节点。
306、用户设备根据视频关键帧所在的位置以及视频关键帧对应的时间节点,生成视频时间轴。
307、用户设备接收针对视频时间轴上多个时间节点中的任一时间节点的操作指令。
308、用户设备响应操作指令,从任一时间节点对应的位置开始进行播放。
309、用户设备统计预设时间段内任一时间节点被操作的频率以及任一时间节点对应的视频的播放时长。
310、若频率超过预设频率以及播放时长超过预设时长,用户设备确定任一时间节点对应的视频的知识点类型。
本发明实施例中,若频率超过预设频率以及播放时长超过预设时长,表明用户经常观看该任一时间节点的视频。由于用户经常观看的视频比较多,视频对应的知识点类型(如速算类型、应用类型、几何类型等)也比较多,为了方便用户日后快速便捷地查找,用户设备可以确定任一时间节点对应的视频的知识点类型,然后将任一时间节点对应的视频添加到与知识点类型匹配的重要视频库中。这样,用户日后可以在短时间内快速查询重要视频库中的每一个知识点类型,进行针对性地学习,从而可以提高学习效率。
311、用户设备将任一时间节点对应的视频添加到与知识点类型匹配的重要视频库中。
其中,实施图3所描述的方法中,用户设备在导入预先拍摄的学习视频之后,用户设备可以解析所述学习视频中的音频,获得音频的文本内容,在学习视频存在原始文本课件的情况下,用户设备可以根据原始课件的文本内容的分节标记,为音频的文本内容进行划分,以确定音频的多个不同节点,进一步地,用户设备可以将不同节点所对应的音频的位置确定为视频关键帧所在的位置。进一步地,根据视频关键帧所在的位置以及视频关键帧对应的时间节点,生成视频时间轴,而不需要靠人工来制作,从而节省了人力节省了时间,提高了视频时间轴制作的效率。此外,用户设备还可以根据预设时间段内任一时间节点被操作的频率以及任一时间节点对应的视频的播放时长,确定所述任一时间节点对应的视频的知识点类型,并将所述任一时间节点对应的视频添加到与所述知识点类型匹配的重要视频库中。这样,用户日后可以在短时间内快速查询重要视频库中的每一个知识点类型,进行针对性地学习,从而可以提高学习效率。
实施例四
请参阅图4,图4是本发明实施例公开的一种视频时间轴生成装置的结构示意图。其中,图4所描述的视频时间轴生成装置可以用于执行图1所描述的视频时间轴生成方法的部分或全部步骤,具体可以参见图1中的相关描述,在此不再赘述。如图4所示,该视频时间轴生成装置可以包括:
导入单元401,用于导入预先拍摄的学习视频;
确定单元402,用于从所述学习视频中确定视频关键帧所在的位置;
获取单元403,用于获取所述视频关键帧对应的时间节点;
生成单元404,用于根据所述视频关键帧所在的位置以及所述视频关键帧对应的时间节点,生成视频时间轴。
其中,实施图4所描述的视频时间轴生成装置,可以自动根据视频关键帧所在的位置以及视频关键帧对应的时间节点,生成视频时间轴,而不需要靠人工来制作,从而节省了人力节省了时间,提高了视频时间轴制作的效率。
实施例五
请参阅图5,图5是本发明实施例公开的另一种视频时间轴生成装置的结构示意图。其中,图5所描述的视频时间轴生成装置可以用于执行图2所描述的视频时间轴生成方法的部分或全部步骤,具体可以参见图2中的相关描述,在此不再赘述。其中,图5所示的视频时间轴生成装置是由于图4所示的视频时间轴生成装置进行优化得到的。与图4所示的视频时间轴生成装置相比,图5中,在所述学习视频不存在原始文本课件的情况下,确定单元402可以包括:
第一解析子单元4021,用于解析所述学习视频中的音频信息,并根据所述音频信息中人物讲话的时间间隔,将所述学习视频切割成多个小音频;
第一对比子单元4022,用于将所述多个小音频中的任意两个小音频的文本内容进行对比,获得携带有相似度的对比结果;
第一划分子单元4023,用于将所述对比结果中相似度大于或等于预设相似度阈值的文本内容所对应的小音频划分为同一节点的视频,以及将所述对比结果中相似度小于所述预设相似度阈值的文本内容所对应的小音频划分为不同节点的视频;
第一确定子单元4024,用于在划分结束后,将不同节点所在的位置确定为视频关键帧所在的位置。
其中,实施图5所描述的视频时间轴生成装置,可以根据视频关键帧所在的位置以及视频关键帧对应的时间节点,生成视频时间轴,而不需要靠人工来制作,从而节省了人力节省了时间,提高了视频时间轴制作的效率。此外,还可以根据预设时间段内任一时间节点被操作的频率以及任一时间节点对应的视频的播放时长,对任一时间节点进行标记,这有利于用户日后快速便捷地找到该任一时间节点的视频,提高用户体验。
实施例六
请参阅图6,图6是本发明实施例公开的另一种视频时间轴生成装置的结构示意图。其中,图6所描述的视频时间轴生成装置可以用于执行图3所描述的视频时间轴生成方法的部分或全部步骤,具体可以参见图3中的相关描述,在此不再赘述。其中,图6所示的视频时间轴生成装置是由于图4所示的视频时间轴生成装置进行优化得到的。与图4所示的视频时间轴生成装置相比,图6中在所述学习视频存在原始文本课件的情况下,确定单元402可以包括:
第二解析子单元4025,用于解析所述学习视频中的音频,获得所述音频的文本内容;
第二划分子单元4026,用于根据所述原始课件的文本内容的分节标记,为所述音频的文本内容进行划分,以确定所述音频的多个不同节点;
第二确定子单元4027,用于将不同节点所对应的音频的位置确定为视频关键帧所在的位置。
其中,实施图6所描述的视频时间轴生成装置,可以根据视频关键帧所在的位置以及视频关键帧对应的时间节点,生成视频时间轴,而不需要靠人工来制作,从而节省了人力节省了时间,提高了视频时间轴制作的效率。此外,还可以根据预设时间段内任一时间节点被操作的频率以及任一时间节点对应的视频的播放时长,确定所述任一时间节点对应的视频的知识点类型,并将所述任一时间节点对应的视频添加到与所述知识点类型匹配的重要视频库中。这样,用户日后可以在短时间内快速查询重要视频库中的每一个知识点类型,进行针对性地学习,从而可以提高学习效率。
实施例七
请参阅图7,图7是本发明实施例公开的另一种视频时间轴生成装置的结构示意图。其中,图7所示的视频时间轴生成装置是由于图4所示的视频时间轴生成装置进行优化得到的。与图4所示的视频时间轴生成装置相比,图7所示的视频时间轴生成装置还可以包括:
接收单元405,用于接收针对所述视频时间轴上多个时间节点中的任一时间节点的操作指令;
播放单元406,用于响应所述操作指令,从所述任一时间节点对应的位置开始进行播放;
统计单元407,用于统计预设时间段内所述任一时间节点被操作的频率以及所述任一时间节点对应的视频的播放时长;
标记单元408,用于若所述频率超过预设频率以及所述播放时长超过预设时长,则对所述任一时间节点进行标记。
可选的,所述确定单元402,还用于若所述频率超过预设频率以及所述播放时长超过预设时长,确定所述任一时间节点对应的视频的知识点类型;
图7所示的视频时间轴生成装置还可以包括:
添加单元409,用于将所述任一时间节点对应的视频添加到与所述知识点类型匹配的重要视频库中。
其中,实施图7所描述的视频时间轴生成装置,可以提高视频时间轴制作的效率。
请参阅图8,图8是本发明实施例公开的一种用户设备的结构示意图。其中,图8所示的用户设备包括图4~图7任意一种视频时间轴生成装置。实施图8所示的用户设备,可以提高视频时间轴制作的效率。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储器中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储器包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储器中,存储器可以包括:闪存盘、只读存储器(英文:Read-Only Memory,简称:ROM)、随机存取器(英文:Random Access Memory,简称:RAM)、磁盘或光盘等。
以上对本发明实施例公开的一种视频时间轴生成方法及装置、用户设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (9)
1.一种视频时间轴生成方法,其特征在于,包括:
导入预先拍摄的学习视频;
从所述学习视频中确定视频关键帧所在的位置;
获取所述视频关键帧对应的时间节点;
根据所述视频关键帧所在的位置以及所述视频关键帧对应的时间节点,生成视频时间轴;
在所述学习视频不存在原始文本课件的情况下,所述从所述学习视频中确定视频关键帧所在的位置包括:
解析所述学习视频中的音频信息,并根据所述音频信息中人物讲话的时间间隔,将所述学习视频切割成多个小音频;
将所述多个小音频中的任意两个小音频的文本内容进行对比,获得携带有相似度的对比结果;
将所述对比结果中相似度大于或等于预设相似度阈值的文本内容所对应的小音频划分为同一节点的视频,以及将所述对比结果中相似度小于所述预设相似度阈值的文本内容所对应的小音频划分为不同节点的视频;
在划分结束后,将不同节点所在的位置确定为视频关键帧所在的位置。
2.根据权利要求1所述的方法,其特征在于,在所述学习视频存在原始文本课件的情况下,所述从所述学习视频中确定视频关键帧所在的位置包括:
解析所述学习视频中的音频,获得所述音频的文本内容;
根据所述原始文本课件的文本内容的分节标记,为所述音频的文本内容进行划分,以确定所述音频的多个不同节点;
将不同节点所对应的音频的位置确定为视频关键帧所在的位置。
3.根据权利要求1~2任一项所述的方法,其特征在于,所述方法还包括:
接收针对所述视频时间轴上多个时间节点中的任一时间节点的操作指令;
响应所述操作指令,从所述任一时间节点对应的位置开始进行播放;
统计预设时间段内所述任一时间节点被操作的频率以及所述任一时间节点对应的视频的播放时长;
若所述频率超过预设频率以及所述播放时长超过预设时长,则对所述任一时间节点进行标记。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
若所述频率超过预设频率以及所述播放时长超过预设时长,确定所述任一时间节点对应的视频的知识点类型;
将所述任一时间节点对应的视频添加到与所述知识点类型匹配的重要视频库中。
5.一种视频时间轴生成装置,其特征在于,包括:
导入单元,用于导入预先拍摄的学习视频;
确定单元,用于从所述学习视频中确定视频关键帧所在的位置;
获取单元,用于获取所述视频关键帧对应的时间节点;
生成单元,用于根据所述视频关键帧所在的位置以及所述视频关键帧对应的时间节点,生成视频时间轴;
在所述学习视频不存在原始文本课件的情况下,所述确定单元包括:
第一解析子单元,用于解析所述学习视频中的音频信息,并根据所述音频信息中人物讲话的时间间隔,将所述学习视频切割成多个小音频;
第一对比子单元,用于将所述多个小音频中的任意两个小音频的文本内容进行对比,获得携带有相似度的对比结果;
第一划分子单元,用于将所述对比结果中相似度大于或等于预设相似度阈值的文本内容所对应的小音频划分为同一节点的视频,以及将所述对比结果中相似度小于所述预设相似度阈值的文本内容所对应的小音频划分为不同节点的视频;
第一确定子单元,用于在划分结束后,将不同节点所在的位置确定为视频关键帧所在的位置。
6.根据权利要求5所述的视频时间轴生成装置,其特征在于,在所述学习视频存在原始文本课件的情况下,所述确定单元包括:
第二解析子单元,用于解析所述学习视频中的音频,获得所述音频的文本内容;
第二划分子单元,用于根据所述原始文本课件的文本内容的分节标记,为所述音频的文本内容进行划分,以确定所述音频的多个不同节点;
第二确定子单元,用于将不同节点所对应的音频的位置确定为视频关键帧所在的位置。
7.根据权利要求5~6任一项所述的视频时间轴生成装置,其特征在于,所述视频时间轴生成装置还包括:
接收单元,用于接收针对所述视频时间轴上多个时间节点中的任一时间节点的操作指令;
播放单元,用于响应所述操作指令,从所述任一时间节点对应的位置开始进行播放;
统计单元,用于统计预设时间段内所述任一时间节点被操作的频率以及所述任一时间节点对应的视频的播放时长;
标记单元,用于若所述频率超过预设频率以及所述播放时长超过预设时长,则对所述任一时间节点进行标记。
8.根据权利要求7所述的视频时间轴生成装置,其特征在于,
所述确定单元,还用于若所述频率超过预设频率以及所述播放时长超过预设时长,确定所述任一时间节点对应的视频的知识点类型;
所述视频时间轴生成装置还包括:
添加单元,用于将所述任一时间节点对应的视频添加到与所述知识点类型匹配的重要视频库中。
9.一种用户设备,其特征在于,包括权利要求5~权利要求8任意一项所述的视频时间轴生成装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710231465.1A CN107040728B (zh) | 2017-04-11 | 2017-04-11 | 一种视频时间轴生成方法及装置、用户设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710231465.1A CN107040728B (zh) | 2017-04-11 | 2017-04-11 | 一种视频时间轴生成方法及装置、用户设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107040728A CN107040728A (zh) | 2017-08-11 |
CN107040728B true CN107040728B (zh) | 2019-09-13 |
Family
ID=59535917
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710231465.1A Active CN107040728B (zh) | 2017-04-11 | 2017-04-11 | 一种视频时间轴生成方法及装置、用户设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107040728B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107968959B (zh) * | 2017-11-15 | 2021-02-19 | 广东广凌信息科技股份有限公司 | 一种教学视频的知识点分割方法 |
CN108667891B (zh) * | 2018-03-05 | 2020-11-06 | 集思谱(北京)科技有限公司 | 独立单元组合式多媒体信息传播方法及系统 |
CN110009954A (zh) * | 2019-05-15 | 2019-07-12 | 梅州市瓦良格教育科技有限公司 | 一种按思维流程定义一课多件备授课的教学方法及系统 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101382937A (zh) * | 2008-07-01 | 2009-03-11 | 深圳先进技术研究院 | 基于语音识别的多媒体资源处理方法及其在线教学系统 |
CN104185088A (zh) * | 2014-03-03 | 2014-12-03 | 无锡天脉聚源传媒科技有限公司 | 一种视频处理方法及装置 |
CN105302906A (zh) * | 2015-10-29 | 2016-02-03 | 小米科技有限责任公司 | 信息标注方法及装置 |
CN105895085A (zh) * | 2016-03-30 | 2016-08-24 | 科大讯飞股份有限公司 | 一种多媒体转写方法和系统 |
CN105939494A (zh) * | 2016-05-25 | 2016-09-14 | 乐视控股(北京)有限公司 | 音视频片段提供方法及装置 |
-
2017
- 2017-04-11 CN CN201710231465.1A patent/CN107040728B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101382937A (zh) * | 2008-07-01 | 2009-03-11 | 深圳先进技术研究院 | 基于语音识别的多媒体资源处理方法及其在线教学系统 |
CN104185088A (zh) * | 2014-03-03 | 2014-12-03 | 无锡天脉聚源传媒科技有限公司 | 一种视频处理方法及装置 |
CN105302906A (zh) * | 2015-10-29 | 2016-02-03 | 小米科技有限责任公司 | 信息标注方法及装置 |
CN105895085A (zh) * | 2016-03-30 | 2016-08-24 | 科大讯飞股份有限公司 | 一种多媒体转写方法和系统 |
CN105939494A (zh) * | 2016-05-25 | 2016-09-14 | 乐视控股(北京)有限公司 | 音视频片段提供方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN107040728A (zh) | 2017-08-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Schechner | Performance studies: The broad spectrum approach | |
CN106534548B (zh) | 语音纠错方法和装置 | |
CN107040728B (zh) | 一种视频时间轴生成方法及装置、用户设备 | |
CN108648520B (zh) | 一种钢琴演奏学习方法及装置 | |
CN108259971A (zh) | 字幕添加方法、装置、服务器及存储介质 | |
CN109389870B (zh) | 一种应用于电子教学中的数据自适应调整方法及其装置 | |
CN106098063A (zh) | 一种语音控制方法、终端设备和服务器 | |
CN106020449B (zh) | 一种虚拟现实的交互方法及装置 | |
CN106021273A (zh) | 面向问答机器人的信息处理方法及系统 | |
CN105718543B (zh) | 语句的展示方法和装置 | |
CN108460122B (zh) | 基于深度学习的视频搜索方法、存储介质、设备及系统 | |
CN109326162A (zh) | 一种口语练习自动评测方法及装置 | |
CN109471955B (zh) | 视频片段的定位方法、计算设备及存储介质 | |
CN110008326A (zh) | 会话系统中的知识摘要生成方法及系统 | |
CN107066191A (zh) | 电子课堂的编辑方法、系统、可读存储介质及计算机设备 | |
CN111553138B (zh) | 用于规范内容结构文档的辅助写作方法及装置 | |
CN110349569A (zh) | 定制化产品语言模型的训练和识别方法及装置 | |
CN108614872A (zh) | 课程内容展示方法及装置 | |
CN113259763B (zh) | 教学视频处理方法、装置和电子设备 | |
CN110675668A (zh) | 基于智能识别+虚拟真实环境的母语级英语学习系统 | |
Chi et al. | A design of mobile application for English learning | |
CN108241847B (zh) | 一种文本识别中的拉泰赫格式公式处理方法及其装置 | |
CN113038259B (zh) | 互联网教育的上课质量反馈方法及系统 | |
CN103700047A (zh) | 基于出勤概率的点名系统和方法 | |
CN110516043B (zh) | 用于问答系统的答案生成方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |