CN108769731B - 一种检测视频中目标视频片段的方法、装置及电子设备 - Google Patents

一种检测视频中目标视频片段的方法、装置及电子设备 Download PDF

Info

Publication number
CN108769731B
CN108769731B CN201810545955.3A CN201810545955A CN108769731B CN 108769731 B CN108769731 B CN 108769731B CN 201810545955 A CN201810545955 A CN 201810545955A CN 108769731 B CN108769731 B CN 108769731B
Authority
CN
China
Prior art keywords
sampling interval
frame
video
lens
range
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810545955.3A
Other languages
English (en)
Other versions
CN108769731A (zh
Inventor
李冠楠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing QIYI Century Science and Technology Co Ltd
Original Assignee
Beijing QIYI Century Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing QIYI Century Science and Technology Co Ltd filed Critical Beijing QIYI Century Science and Technology Co Ltd
Priority to CN201810545955.3A priority Critical patent/CN108769731B/zh
Publication of CN108769731A publication Critical patent/CN108769731A/zh
Application granted granted Critical
Publication of CN108769731B publication Critical patent/CN108769731B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明实施例提供了一种检测视频中目标视频片段的方法，所述方法包括：由人工选择一部电视剧中的某一集，标识该集电视剧中片头和/或片尾内容的点位信息，将人工标识的该集电视剧中片头和/或片尾内容作为目标视频片段，利用视频镜头检测、视频镜头分析与图像特征提取的方法，获取目标视频片断中各个镜头的各个关键帧的图像特征，将获取到的图像特征，存储在数据库中作为匹配模板，针对电视剧中的其它各集，采用模板匹配的方式，实现一部电视剧中重复性目标视频片段的自动检测，该发明将标识目标视频片段的工作量从一部电视剧每集均需人工标注降低为一部电视剧只需人工标注一集。应用本发明实施例，可以显著减少人工工作量。

Description

一种检测视频中目标视频片段的方法、装置及电子设备
技术领域
本发明涉及检测技术领域，特别是涉及一种检测视频中目标视频片段的方法、装置及电子设备。
背景技术
随着文件产业的发展，影视剧的数量呈海量增长之势，用户可以通过手机、电视、电脑等设备观看影视剧，这里所说的影视剧为具有多集、且所有各集都有片头和/或片尾的影视剧。用户在观看影视剧中某一集时，有时需要跳过片头和/或片尾，为了满足用户的这一需求的前提是：需要检测出影视剧中的每一集的片头和/或片段。片头检测的原理与片尾检测的原理相同，且不管是片头，还是片尾都是剧集中的视频片段，对片头或片尾检测，就是对目标视频片段的检测，其中，目标视频片段为片头或片尾。
目前，目标视频片段的检测大多是采用人工的方法进行检测的，即通过人工观看影视剧检测出影视剧中每一集的目标视频片段，具体的，通过观看确定每一集的目标视频片段对应的视频帧范围。示例性的，通过观看确定某一集中帧号为1-300的视频帧为目标视频片段的内容，则将帧号1-300的视频帧作为该集的目标视频片段。
然而，发明人在实现本发明的过程中发现，现有技术至少存在如下问题：通过人工观看影视剧检测目标视频片段的方式，需要消耗大量的人工成本，使用现有自动检测技术，对视频内容的一致性要求较高，对于不同集数中视频内容存在的剪裁/形变等情况或视频内容部分删剪的情况难以进行处理。
发明内容
本发明实施例的目的在于提供一种检测视频中目标视频片段的方法、装置及电子设备，利用对目标视频片段中各关键帧进行图像特征提取，并将提取到图像特征与数据库中模板中的图像特征进行匹配的方法，实现视频中目标视频片段的自动检测，可以实现减少人工成本的消耗，同时由于本发明实施例中提供的方法、装置及电子设备，是对待检测镜头中的各关键帧的图像特征进行图像特征的提取和图像特征匹配，且对匹配结果进行了后处理，用于纠正匹配结果，获得帧级精度的目标视频片段的检测结果，因而，相较于现有的自动检测技术，对视频内容的一致性要求较低，对于不同集数的视频内容中可能存在的删减/剪裁/形变情况具有较好的鲁棒性。具体技术方案如下：
为了达到上述目的，第一方面，本发明实施例提供了检测视频中目标视频片段的方法，包括：
获取待检测视频；
从所述待检测视频中提取各个镜头的关键帧；
获取每个镜头的每个关键帧的图像特征；
确定所述待检测视频所属的剧集；
从预设数据库中获取所确定的剧集的匹配模板，所述匹配模板中包含预先存储的所述剧集中指定一集视频的片头和/或片尾的关键帧的模板图像特征；所述待检测视频为所述剧集中除所述指定一集外的其他集视频；
将每个镜头的每个关键帧的图像特征与所述匹配模板中的各个关键帧的模板图像特征进行匹配；
将匹配成功的关键帧数超过预设匹配帧阈值的镜头，确定为所述待检测视频中目标视频片段的镜头；所述目标视频片段为：视频的片头和/或片尾。
可选的，所述从所述待检测视频中提取各个镜头的关键帧的步骤，包括：
根据各个镜头中属于所述目标视频片段内容的视频帧范围和预设的关键帧数量的比值确定各个镜头的候选采样间隔；
针对每一镜头，判断该镜头的候选采样间隔是否大于预设的采样间隔的第一采样间隔阈值；
若该镜头的候选采样间隔大于预设的采样间隔的第一采样间隔阈值，则将第一预设值作为所述镜头的目标采样间隔；
或者，若该镜头的候选采样间隔不大于预设的采样间隔的第一采样间隔阈值，则判断所述镜头的候选采样间隔是否大于预设的采样间隔的第三采样间隔阈值；
若所述镜头的候选采样间隔大于预设的采样间隔的第三采样间隔阈值，则将第三采样间隔阈值作为所述镜头的目标采样间隔；
或者，若所述镜头的候选采样间隔不大于预设的采样间隔的第三采样间隔阈值，则将所述镜头的候选采样间隔，作为所述镜头的目标采样间隔；
根据获取的各个镜头的目标采样间隔，在各个镜头的所述视频帧范围内进行采样，获取各个镜头的关键帧。
可选的，所述获取每个镜头的每个关键帧的图像特征，包括：
对所述关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获得4个感知哈希特征；
将获得的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述关键帧的图像特征。
可选的，所述确定所述待检测视频所属的剧集的步骤，包括：
从所述待检测视频的属性信息中获取所述待检测视频所属的剧集标识；
所述从预设数据库中获取所确定的剧集的匹配模板的步骤，包括：
从所述预设数据库中获取与所述剧集标识相同的剧集的匹配模板。
可选的，所述预先存储所述剧集中指定一集视频的片头和/或片尾的关键帧的模板图像特征，包括：
对剧集中指定一集视频，获取被标识为所述指定一集的片头的第一起始帧和第一结束帧，和/或被标识为所述指定一集的片尾的第二起始帧和第二结束帧；
根据被标识为所述指定一集的片头的第一起始帧和第一结束帧，确定所述指定一集中包含片头内容的片头视频帧范围；和/或根据被标识为所述指定一集的片尾的第二起始帧和第二结束帧，确定所述指定一集中包含片尾内容的片尾视频帧范围；
从所述片头视频帧范围中提取片头关键帧；
获取每个片头关键帧的图像特征，作为片头关键帧的模板图像特征；
和/或，从所述片尾视频帧范围中提取片尾关键帧；
获取每个片尾关键帧的图像特征，作为片尾关键帧的模板图像特征；
将所述剧集标识与片头的各个关键帧的模板图像特征和/或片尾的各个关键帧的模板图像特征对应存储至所述数据库中。
可选的，所述获取被标识为该集的片头的第一起始帧和第一结束帧，和/或被标识为该集的片尾的第二起始帧和第二结束帧的步骤，包括：
根据该集的视频帧率，将被标识为该集的片头的起始时间点和结束时间点转换为该集的片头的第一起始帧和第一结束帧，和/或被标识为该集的片尾的起始时间点和结束时间点转换为该集片尾的第二起始帧和第二结束帧。
可选的，所述根据被标识为所述指定一集的片头的第一起始帧和第一结束帧，确定所述指定一集中包含片头内容的片头视频帧范围的步骤，包括：
根据各个镜头起始帧号和结束帧号与所述指定一集的片头的第一起始帧和第一结束帧，在时间轴上的相对关系，确定各个镜头中属于片头内容的视频帧范围；
若待处理镜头的帧号范围完全落入所述片头的帧号范围，将所述待处理镜头的帧号范围作为所述片头内容的视频帧范围；
若所述片头的帧号范围完全落入所述待处理镜头的帧号范围，将所述目标视频片段帧号范围作为所述片头内容的视频帧范围；
若所述待处理镜头的帧号范围与所述片头的帧号范围只有部分重叠，则判断该所重叠的帧号的数量是否大于等于第三预设阈值，如果大于等于，将所重叠的帧号对应的视频帧范围作为所述片头内容的视频帧范围；
和/或，所述根据被标识为所述指定一集的片尾的第二起始帧和第二结束帧，确定所述指定一集中包含片尾内容的片尾视频帧范围的步骤，包括：
根据各个镜头起始帧号和结束帧号与所述指定一集的片尾的第二起始帧和第二结束帧，在时间轴上的相对关系，确定各个镜头中属于片尾内容的视频帧范围；
若待处理镜头的帧号范围完全落入所述片尾的帧号范围，将所述待处理镜头的帧号范围作为所述片尾内容的视频帧范围；
若所述片尾的帧号范围完全落入所述待处理镜头的帧号范围，将所述目标视频片段帧号范围作为所述片尾内容的视频帧范围；
若所述待处理镜头的帧号范围与所述片尾的帧号范围只有部分重叠，则判断所重叠的帧号的数量是否大于等于第三预设阈值，如果大于等于，将所重叠的帧号对应的视频帧范围作为所述片尾内容的视频帧范围。
可选的，所述从所述片头视频帧范围中提取片头关键帧的步骤，包括：
根据各个镜头中属于所述片头视频内容的视频帧范围和预设的关键帧数量的比值确定各个镜头的候选采样间隔；
针对每一镜头，判断该镜头的候选采样间隔是否大于预设的采样间隔的第一采样间隔阈值；
若该镜头的候选采样间隔大于预设的采样间隔的第一采样间隔阈值，则将第一预设值作为所述镜头的目标采样间隔；
或者，若该镜头的候选采样间隔不大于预设的采样间隔的第一采样间隔阈值，则判断所述镜头的候选采样间隔是否大于预设的采样间隔的第二采样间隔阈值；
若所述镜头的候选采样间隔大于预设的采样间隔的第二采样间隔阈值，则将第二采样间隔阈值作为所述镜头的目标采样间隔；
或者，若所述镜头的候选采样间隔不大于预设的采样间隔的第二采样间隔阈值，则将所述镜头的候选采样间隔，作为所述镜头的目标采样间隔；
根据获取的各个镜头的目标采样间隔，在各个镜头的所述片头内容的视频帧范围内进行采样，获取片头关键帧；
所述从所述片尾视频帧范围中提取片尾关键帧的步骤，包括：
根据各个镜头中属于所述片尾视频内容的视频帧范围和预设的关键帧数量的比值确定各个镜头的候选采样间隔；
针对每一镜头，判断该镜头的候选采样间隔是否大于预设的采样间隔的第一采样间隔阈值；
若该镜头的候选采样间隔大于预设的采样间隔的第一采样间隔阈值，则将第一预设值作为所述镜头的目标采样间隔；
或者，若该镜头的候选采样间隔不大于预设的采样间隔的第一采样间隔阈值，则判断所述镜头的候选采样间隔是否大于预设的采样间隔的第二采样间隔阈值；
若所述镜头的候选采样间隔大于预设的采样间隔的第二采样间隔阈值，则将第二采样间隔阈值作为所述镜头的目标采样间隔；
或者，若所述镜头的候选采样间隔不大于预设的采样间隔的第二采样间隔阈值，则将所述镜头的候选采样间隔，作为所述镜头的目标采样间隔；
根据获取的各个镜头的目标采样间隔，在各个镜头的所述片尾内容的视频帧范围内进行采样，获取片头关键帧。
可选的，所述获取每个片头关键帧的图像特征，作为片头关键帧的模板图像特征的步骤，包括：
对所述片头关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获取4个感知哈希特征；
将获取的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述片头关键帧的图像特征；
和/或，获取每个片尾关键帧的图像特征，作为片尾关键帧的模板图像特征的步骤，包括：
对所述片尾关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获取4个感知哈希特征；
将获取的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述片尾关键帧的图像特征。
可选的，所述获取每个镜头的每个关键帧的图像特征的步骤，包括：
对获取的待处理镜头的待处理关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获取4个感知哈希特征；
将获取的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述关键帧的图像特征；
所述将每个镜头的每个关键帧的图像特征与所述匹配模板中的各个关键帧的模板图像特征进行匹配的步骤，包括：
根据所述剧集标识和待处理镜头是属于片头内容或片尾内容设置检索范围，根据所述检索范围，在所述预设数据库中查找是否有与待检测的图像特征相似的图像特征。
可选的，所述方法还包括：对各个镜头匹配后获取匹配结果进行滤波处理，获取目标视频片段的帧级精度的时间点位信息。
可选的，所述对各个镜头匹配后获取的匹配结果进行滤波处理，获取目标视频片段的帧级精度的时间点位信息的步骤，包括：
采用窗口长度为第三预设值，对各个镜头的判断结果进行滤波处理，得到各个镜头的滤波结果；
根据各个镜头的滤波结果，确定所述待检测视频的目标视频片段的镜头，其中，所述滤波结果为所述镜头是所述目标片段的镜头或所述镜头不是所述目标视频片段的镜头。
第二方面，本发明实施例提供了一种检测视频中目标视频片段的装置，包括：
视频获取模块，用于获取待检测视频；
关键帧获取模块，用于从所述待检测视频中提取各个镜头的关键帧；
图像特征获取模块，用于获取每个镜头的每个关键帧的图像特征；
剧集判断模块，用于确定所述待检测视频所属的剧集；
匹配模板获取模块，用于从预设数据库中获取所确定的剧集的匹配模板；
图像特征匹配模块，用于将每个镜头的每个关键帧的图像特征与所述匹配模板中的各个关键帧的模板图像特征进行匹配；
判断模块，用于判断镜头中匹配成功的关键帧数是否超过预设匹配帧阈值。
可选的，所述关键帧获取模块，具体用于：根据各个镜头中属于所述目标视频片段内容的视频帧范围和预设的关键帧数量的比值确定各个镜头的候选采样间隔；
针对每一镜头，判断该镜头的候选采样间隔是否大于预设的采样间隔的第一采样间隔阈值；
若该镜头的候选采样间隔大于预设的采样间隔的第一采样间隔阈值，则将第一预设值作为所述镜头的目标采样间隔；
或者，若该镜头的候选采样间隔不大于预设的采样间隔的第一采样间隔阈值，则判断所述镜头的候选采样间隔是否大于预设的采样间隔的第三采样间隔阈值；
若所述镜头的候选采样间隔大于预设的采样间隔的第三采样间隔阈值，则将第三采样间隔阈值作为所述镜头的目标采样间隔；
或者，若所述镜头的候选采样间隔不大于预设的采样间隔的第三采样间隔阈值，则将所述镜头的候选采样间隔，作为所述镜头的目标采样间隔；
根据获取的各个镜头的目标采样间隔，在各个镜头的所述视频帧范围内进行采样，获取各个镜头的关键帧
可选的，所述图像特征获取模块，具体用于：对所述关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获得4个感知哈希特征；
将获得的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述关键帧的图像特征。
可选的，所述剧集判断模块，具体用于：
从所述待检测视频的属性信息中获取所述待检测视频所属的剧集标识；
所述匹配模板获取模块，具体用于：
从所述预设数据库中获取与所述剧集标识相同的剧集的匹配模板。
可选的，所述装置还包括：模板图像特征预存模块；
所述模板图像特征预存模块，包括：
标识帧获取子模块，用于对剧集中指定一集视频，获取被标识为所述指定一集的片头的第一起始帧和第一结束帧，和/或被标识为所述指定一集的片尾的第二起始帧和第二结束帧；
片头/片尾视频帧范围确定子模块，用于根据被标识为所述指定一集的片头的第一起始帧和第一结束帧，确定所述指定一集中包含片头内容的片头视频帧范围；和/或根据被标识为所述指定一集的片尾的第二起始帧和第二结束帧，确定所述指定一集中包含片尾内容的片尾视频帧范围；
模板图像特征获取子模块，用于从所述片头视频帧范围中提取片头关键帧；获取每个片头关键帧的图像特征，作为片头关键帧的模板图像特征；
和/或，从所述片尾视频帧范围中提取片尾关键帧；
获取每个片尾关键帧的图像特征，作为片尾关键帧的模板图像特征；
存储子模块，用于将所述剧集标识与片头的各个关键帧的模板图像特征和/或片尾的各个关键帧的模板图像特征对应存储至所述数据库中。
可选的，所述标识帧获取子模块，具体用于：根据该集的视频帧率，将被标识为该集的片头的起始时间点和结束时间点转换为该集的片头的第一起始帧和第一结束帧，和/或被标识为该集的片尾的起始时间点和结束时间点转换为该集片尾的第二起始帧和第二结束帧。
可选的，所述片头/片尾视频帧范围确定子模块，具体用于：
根据各个镜头起始帧号和结束帧号与所述指定一集的片头的第一起始帧和第一结束帧，在时间轴上的相对关系，确定各个镜头中属于片头内容的视频帧范围；
若待处理镜头的帧号范围完全落入所述片头的帧号范围，将所述待处理镜头的帧号范围作为所述片头内容的视频帧范围；
若所述片头的帧号范围完全落入所述待处理镜头的帧号范围，将所述目标视频片段帧号范围作为所述片头内容的视频帧范围；
若所述待处理镜头的帧号范围与所述片头的帧号范围只有部分重叠，则判断该所重叠的帧号的数量是否大于等于第三预设阈值，如果大于等于，将所重叠的帧号对应的视频帧范围作为所述片头内容的视频帧范围；
和/或，所述根据被标识为所述指定一集的片尾的第二起始帧和第二结束帧，确定所述指定一集中包含片尾内容的片尾视频帧范围的步骤，包括：
根据各个镜头起始帧号和结束帧号与所述指定一集的片尾的第二起始帧和第二结束帧，在时间轴上的相对关系，确定各个镜头中属于片尾内容的视频帧范围；
若待处理镜头的帧号范围完全落入所述片尾的帧号范围，将所述待处理镜头的帧号范围作为所述片尾内容的视频帧范围；
若所述片尾的帧号范围完全落入所述待处理镜头的帧号范围，将所述目标视频片段帧号范围作为所述片尾内容的视频帧范围；
若所述待处理镜头的帧号范围与所述片尾的帧号范围只有部分重叠，则判断所重叠的帧号的数量是否大于等于第三预设阈值，如果大于等于，将所重叠的帧号对应的视频帧范围作为所述片尾内容的视频帧范围。
可选的，所述模板图像特征获取子模块，从所述片头视频帧范围中提取片头关键帧，包括：
根据各个镜头中属于所述片头视频内容的视频帧范围和预设的关键帧数量的比值确定各个镜头的候选采样间隔；
针对每一镜头，判断该镜头的候选采样间隔是否大于预设的采样间隔的第一采样间隔阈值；
若该镜头的候选采样间隔大于预设的采样间隔的第一采样间隔阈值，则将第一预设值作为所述镜头的目标采样间隔；
或者，若该镜头的候选采样间隔不大于预设的采样间隔的第一采样间隔阈值，则判断所述镜头的候选采样间隔是否大于预设的采样间隔的第二采样间隔阈值；
若所述镜头的候选采样间隔大于预设的采样间隔的第二采样间隔阈值，则将第二采样间隔阈值作为所述镜头的目标采样间隔；
或者，若所述镜头的候选采样间隔不大于预设的采样间隔的第二采样间隔阈值，则将所述镜头的候选采样间隔，作为所述镜头的目标采样间隔；
根据获取的各个镜头的目标采样间隔，在各个镜头的所述片头内容的视频帧范围内进行采样，获取片头关键帧；
所述模板图像特征获取子模块，从所述片头视频帧范围中提取片尾关键帧，包括：
根据各个镜头中属于所述片尾视频内容的视频帧范围和预设的关键帧数量的比值确定各个镜头的候选采样间隔；
针对每一镜头，判断该镜头的候选采样间隔是否大于预设的采样间隔的第一采样间隔阈值；
若该镜头的候选采样间隔大于预设的采样间隔的第一采样间隔阈值，则将第一预设值作为所述镜头的目标采样间隔；
或者，若该镜头的候选采样间隔不大于预设的采样间隔的第一采样间隔阈值，则判断所述镜头的候选采样间隔是否大于预设的采样间隔的第二采样间隔阈值；
若所述镜头的候选采样间隔大于预设的采样间隔的第二采样间隔阈值，则将第二采样间隔阈值作为所述镜头的目标采样间隔；
或者，若所述镜头的候选采样间隔不大于预设的采样间隔的第二采样间隔阈值，则将所述镜头的候选采样间隔，作为所述镜头的目标采样间隔；
根据获取的各个镜头的目标采样间隔，在各个镜头的所述片尾内容的视频帧范围内进行采样，获取片尾关键帧。
可选的，所述模板图像特征获取子模块，获取每个片头关键帧的图像特征，作为片头关键帧的模板图像特征，包括：
对所述片头关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获取4个感知哈希特征；
将获取的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述片头关键帧的图像特征；
所述模板图像特征获取子模块，获取每个片尾关键帧的图像特征，作为片尾关键帧的模板图像特征的步骤，包括：
对所述片尾关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获取4个感知哈希特征；
将获取的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述片尾关键帧的图像特征。
可选的，图像特征获取模块，具体用于：
对获取的待处理镜头的待处理关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获取4个感知哈希特征；
将获取的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述关键帧的图像特征；
所述将每个镜头的每个关键帧的图像特征与所述匹配模板中的各个关键帧的模板图像特征进行匹配的步骤，包括：
根据所述剧集标识和待处理镜头是属于片头内容或片尾内容设置检索范围，根据所述检索范围，在所述预设数据库中查找是否有与待检测的图像特征相似的图像特征。
可选的，所述装置，还包括：
后处理模块：用于对各个镜头匹配后获取的匹配结果进行处理。
可选的，所述后处理模块，包括：
滤波处理子模块，用于对各个镜头匹配后获取的匹配结果进行滤波处理；
时间点获取子模块，用于获取目标视频片段的帧级精度的时间点位信息。
第三方面，本发明实施例提供了一种电子设备，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现以下方法步骤：
获取待检测视频；
从所述待检测视频中提取各个镜头的关键帧；
获取每个镜头的每个关键帧的图像特征；
确定所述待检测视频所属的剧集；
从预设数据库中获取所确定的剧集的匹配模板，所述匹配模板中包含预先存储的所述剧集中指定一集视频的片头和/或片尾的关键帧的模板图像特征；所述待检测视频为所述剧集中除所述指定一集外的其他集视频；
将每个镜头的每个关键帧的图像特征与所述匹配模板中的各个关键帧的模板图像特征进行匹配；
将匹配成功的关键帧数超过预设匹配帧阈值的镜头，确定为所述待检测视频中目标视频片段的镜头；所述目标视频片段为：视频的片头和/或片尾。
在本发明实施的又一方面，还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述任一所述的目标视频片段检测方法。
在本发明实施的又一方面，本发明实施例还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述任一所述的目标视频片段检测方法。
本发明实施例提供的一种目标视频片段检测方法、装置及电子设备，可以通过获取待检测视频，确定所述待检测视频所属的剧集，从预设数据库中获取所确定的剧集的匹配模板，其中，所述匹配模板中包含预先存储的所述剧集中指定一集视频的片头和/或片尾的关键帧的模板图像特征，再从所述待检测视频中提取各个镜头的关键帧，获取每个镜头的每个关键帧的图像特征，将获取到的每个镜头的每个关键帧的图像特征与所述匹配模板中的各个关键帧的模板图像特征进行匹配，将匹配成功的关键帧数超过预设匹配帧阈值的镜头，确定为所述待检测视频中目标视频片段的镜头，相较于现有技术，可以自动地检测目标视频片段，减少人工成本的消耗，同时由于本发明实施例中提供的方法、装置及电子设备，是对待检测镜头中的各关键帧的图像特征进行图像特征的提取和图像特征匹配，且对匹配结果进行了后处理，用于纠正匹配结果，获得帧级精度的目标视频片段的检测结果，因而，相较于现有的自动检测技术，对视频内容的一致性要求较低，对于不同集数的视频内容中可能存在的删减/剪裁/形变情况具有较好的鲁棒性。。当然，实施本发明的任一产品或方法并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
图1为本发明实施例提供的一种检测视频中目标视频片段的方法的流程示意图；
图2为本发明实施例提供的一种检测视频中目标视频片段的方法的原理示意图；
图3为本发明实施例提供的一种检测视频中目标视频片段的方法的采样视频帧图像结构示意图；
图4为本发明实施例提供的一种检测视频中目标视频片段的装置示意图；
图5为本发明实施例提供的一种检测视频中目标视频片段的装置中模板图像特征预存模块示意图；
图6为本发明实施例提供的一种检测视频片段的装置中后处理模块示意图；
图7为本发明实施例提供的一种电子设备示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行描述。
为解决现有技术通过人工观看影视剧来检测目标视频片段的方式，需要消耗大量的人工成本的问题，本发明实施例提供了一种检测视频中目标视频片段的方法，图1为本发明实施例提供的一种检测视频中目标视频片段的方法的流程示意图，如图1所示，该方法包括：
S101：获取待检测视频；
本发明实施例主要针对视频剧集进行检测，本步骤中就是获取一个待检测视频，例如：一个电视剧中未确定片头或片尾的某一集。
S102：从所述待检测视频中提取各个镜头的关键帧；
具体的，可以通过如下的步骤来从所述待检测视频中提取各个镜头的关键帧：
根据各个镜头中属于所述目标视频片段内容的视频帧范围和预设的关键帧数量的比值确定各个镜头的候选采样间隔；
针对每一镜头，判断该镜头的候选采样间隔是否大于预设的采样间隔的第一采样间隔阈值；
若该镜头的候选采样间隔大于预设的采样间隔的第一采样间隔阈值，则将第一预设值作为所述镜头的目标采样间隔；
或者，若该镜头的候选采样间隔不大于预设的采样间隔的第一采样间隔阈值，则判断所述镜头的候选采样间隔是否大于预设的采样间隔的第三采样间隔阈值；
若所述镜头的候选采样间隔大于预设的采样间隔的第三采样间隔阈值，则将第三采样间隔阈值作为所述镜头的目标采样间隔；
或者，若所述镜头的候选采样间隔不大于预设的采样间隔的第三采样间隔阈值，则将所述镜头的候选采样间隔，作为所述镜头的目标采样间隔；
根据获取的各个镜头的目标采样间隔，在各个镜头的所述视频帧范围内进行采样，获取各个镜头的关键帧。
举例来说，从待检测视频中提取各个镜头的关键帧，具体的，可以包括如下步骤：
先确定所述待检测视频中的各个镜头，具体可以采用基于视频帧的镜头检测方法获得待检测视频中的各个镜头。
再针对每个镜头来提取关键帧。
提取关键帧可以用采样的方法进行提取。
具体的，先确定目标采样间隔：
示例性的，确定目标采样间隔的方法为：首先，根据一个待处理镜头中的视频帧范围R和预设的关键帧数量K1的比值，确定该待处理镜头的候选采样间隔IntervalK，即
Figure BDA0001673603180000161
其中K1的典型取值为10。
其次，将获取的候选采样间隔与预设的采样间隔的第一采样间隔阈值IL进行比较；
若该待处理镜头的候选采样间隔IntervalK大于预设的采样间隔的第一采样间隔阈值IL，即IntervalK＞IL，则当前镜头属于超长镜头，需要进行密集采样，则将第一预设值ID作为该待处理镜头的目标采样间隔，即令IntervalK＝ID，其中IL的典型取值为50，ID的典型取值为2；
若某一待处理镜头的候选采样间隔IntervalK小于或等于预设的采样间隔的第一采样间隔阈值IL，则判断该待处理镜头的候选采样间隔是否大于预设的采样间隔的第三采样间隔阈值IN；
当IntervalK≤IL且IntervalK＞IN，则当前镜头采样间隔过大，将第三采样间隔阈值IN作为该待处理镜头的目标采样间隔，即令IntervalK＝IN，其中IN的典型取值为12；
当IntervalK≤IL且IntervalK≤IN，则将该待处理镜头的候选采样间隔IntervalK，作为该待处理镜头的目标采样间隔。
根据获取的各个镜头的目标采样间隔，在各个镜头对应的视频帧范围R内进行采样，获取各个镜头的关键帧，其中，获取的关键帧的数量为
Figure BDA0001673603180000162
其中length(R)表示视频帧范围R的长度。
其中，视频帧范围R的获取方式为：
以镜头为单位，每次仅对当前检测到的新镜头进行时间点位分析，将当前新镜头的起始帧和结束帧，分别记为shotsta和shotend，并将已处理的上一镜头的结束帧记为lastend，将镜头帧级信息[shotsta,shotend]记为R；
可选的，在一种具体实施方式中，可以将第三采样间隔阈值IN的典型取值和在选取目标视频片段的特征匹配模板时的第二采样间隔阈值IM的典型取值
S103：获取每个镜头的每个关键帧的图像特征；
所述获取每个镜头的每个关键帧的图像特征，具体包括：
对所述关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获得4个感知哈希特征；
将获得的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述关键帧的图像特征。
示例性的，获取各关键帧的图像特征的方法为：将获取的某一关键帧的图像，缩放至指定尺寸WxH，便于特征计算和后期特征比较，其中，W的典型取值为640，H的典型取值为480。
如图3所示，将缩放至指定尺寸的图像整体I的中央区域划分为均等的三个子区域A、B和C；分别计算图像整体I，以及图像整体I中央三个子区域A、B和C的感知哈希特征，获取I、A、B和C的感知哈希特征，将获取的4个感知哈希特征，接续连接为一个特征向量，然后将该特征向量作为该关键帧的图像特征，按照上述方法获取各关键帧的图像特征。
其中，感知哈希算法的作用是对每张图片生成一个”指纹”字符串即唯一的字符串，然后比较不同图片的指纹，结果越接近，就说明图片越相似。
示例性的，对于图像整体I，感知哈希算法的计算方法为：
第一步，缩小尺寸；将图片缩小至640x480的尺寸，该尺寸总共有640x480个像素，这一步的作用是去除图片的细节，只保留结构、明暗等基本信息，摒弃不同尺寸和比例带来的图片差异；
第二步，简化色彩；将缩小后的图像整体I，转为640x480级灰度；
第三步，计算平均值；计算所有640x480个像素的灰度平均值；
第四步，比较像素的灰度；将每个像素的灰度，与所有640x480个像素的灰度平均值进行比较，大于或等于平均值，记为1；小于平均值，记为0；
第五步，计算图像整体I感知哈希值；将第四步的比较结果，组合在一起，就构成了一个640x480位的整数，该数值即为图像整体I感知哈希值；
按照同样的方法计算图像整体I以及中央三个子区域A、B和C的感知哈希值，将获取到的I、A、B和C的感知哈希值，接续连接为一个特征向量，将该特征向量作为图像整体I的图像特征。
S104：确定所述待检测视频所属的剧集；
具体的，确定所述待检测视频所属的剧集的方法为：
从所述待检测视频的属性信息中获取所述待检测视频所属的剧集标识；
示例性的，如果要确定待检测视频属于哪一个剧集，则从所述待检测视频的属性信息中获取该待检测视频具体属于哪个剧集。
S105：从预设数据库中获取所确定的剧集的匹配模板。
具体的，从预设数据库中获取所确定的剧集的匹配模板的方法为：
首先，从所述待检测视频的属性信息中获取所述待检测视频所属的剧集标识；
其次，从所述预设数据库中获取与所述剧集标识相同的剧集的匹配模板。
示例性的，如果从待检测视频的属性信息中获取到所述待检测视频所属的剧集标识为《琅琊榜》，则从预设数据库中获取《琅琊榜》的匹配模板，而非其他剧集的匹配模板。
S106：将每个镜头的每个关键帧的图像特征与所述匹配模板中的各个关键帧的模板图像特征进行匹配；
具体的，将每个镜头的每个关键帧的图像特征与所述匹配模板中的各个关键帧的模板图像特征进行匹配的方法为：
针对某一镜头关键帧的图像特征，在数据库中查询是否有与该图像特征相似的特征向量，若数据库中有与该图像特征相似的特征向量，则匹配成功，那么认为该帧图像属于目标视频片段中的内容，将该图像的匹配结果设为1；若数据库中没有与该图像特征相似的特征向量，则匹配失败，那么认为该帧图像不是目标视频片段中的内容，将该图像的匹配结果设为0，这样，针对提取的各镜头关键帧的图像特征的匹配结果，会得到由0、1组成的一组数据。
其中，相似定义为：针对待检测图像整体I、以及图像中央三个子区域A、B和C共4个区域中，至少有2个区域的感知哈希特征，能够在数据库中查找到编辑距离小于第二预设阈值T的特征向量，其中，T＝0.2×特征向量维度。
S107：将匹配成功的关键帧数超过预设匹配帧阈值的镜头，确定为所述待检测视频中目标视频片段的镜头；
具体的，确定待检测视频中目标视频片段的镜头的方法为：判断镜头中匹配成功的关键帧的数量是否超过预设匹配帧阈值。
示例性的，若某一个待处理镜头的匹配成功的关键帧数超过预设匹配帧阈值M，即至少有M帧均被判断为是目标视频片段内容，则认为该待检测镜头属于目标视频片段内容，否则，认为该待检测镜头不属于目标视频片段内容，其中，M的典型取值为2。
由图1所示的实施例可见，本发明实施例提供的一种目标视频片段检测方法，可以实现一部剧集中重复性目标视频片段的自动检测，本发明将标识目标视频片段的工作量从一部剧集每集均需人工标注降低为一部剧集只需人工标注一集，针对人工标注的一集，用视频镜头检测、视频镜头分析与图像特征提取的方法，获取目标视频片断中各个镜头的各个关键帧的图像特征，将获取到的图像特征，存储在数据库中作为匹配模板，针对剧集中的其它各集，采用模板匹配的方式，实现一部剧集中重复性目标视频片段的自动检测，减少人工成本的消耗，同时，相较于现有的自动检测技术，对视频内容的一致性要求较低，对于不同集数的视频内容中可能存在的删减/剪裁/形变情况具有较好的鲁棒性。
本发明实施例中，为实现一部剧集中重复性目标视频片段的自动检测，预先存储所述剧集中指定一集视频的片头和/或片尾的关键帧的模板图像特征。
具体的，预先存储所述剧集中指定一集视频的片头和/或片尾的关键帧的模板图像特征，可以包括：
对剧集中指定一集视频，获取被标识为所述指定一集的片头的第一起始帧和第一结束帧，和/或被标识为所述指定一集的片尾的第二起始帧和第二结束帧；
根据被标识为所述指定一集的片头的第一起始帧和第一结束帧，确定所述指定一集中包含片头内容的片头视频帧范围；和/或根据被标识为所述指定一集的片尾的第二起始帧和第二结束帧，确定所述指定一集中包含片尾内容的片尾视频帧范围；
从所述片头视频帧范围中提取片头关键帧；
获取每个片头关键帧的图像特征，作为片头关键帧的模板图像特征；
和/或，从所述片尾视频帧范围中提取片尾关键帧；
获取每个片尾关键帧的图像特征，作为片尾关键帧的模板图像特征；
将所述剧集标识与片头的各个关键帧的模板图像特征和/或片尾的各个关键帧的模板图像特征对应存储至所述数据库中。
示例性的，对剧集中指定一集视频，获取被标识为所述指定一集的片头的第一起始帧
Figure BDA0001673603180000201
和第一结束帧
Figure BDA0001673603180000202
和/或被标识为所述指定一集的片尾的第二起始帧
Figure BDA0001673603180000203
和第二结束帧
Figure BDA0001673603180000204
分别根据被标识为所述指定一集的片头的第一起始帧
Figure BDA0001673603180000205
和第一结束帧
Figure BDA0001673603180000206
和/或根据被标识为所述指定一集的片尾的第二起始帧
Figure BDA0001673603180000207
和第二结束帧
Figure BDA0001673603180000208
确定目标视频片段的视频帧范围；
以镜头为单位，每次仅对当前检测到的新镜头进行时间点位分析，将当前新镜头的起始帧和结束帧，分别记为shotsta和shotend，并将已处理的上一镜头的结束帧记为lastend，根据镜头帧级信息[shotsta,shotend]与标识目标视频片段的帧级信息，在时间轴上的相对关系，判断当前镜头中属于片头的视频帧范围R；
若
Figure BDA0001673603180000209
则当前镜头内无目标视频片段内容；
若
Figure BDA00016736031800002010
则根据shotsta与
Figure BDA00016736031800002011
的间隔进行判断，若
Figure BDA00016736031800002012
则认为
Figure BDA00016736031800002013
点位信息存在误差，当前镜头中无目标视频片段内容，若
Figure BDA0001673603180000211
则记
Figure BDA0001673603180000212
属于目标视频片段中的内容；
若
Figure BDA0001673603180000213
则记R[shotsta，shotend]属于目标视频片段中的内容；
若
Figure BDA0001673603180000214
则记
Figure BDA0001673603180000215
属于目标视频片段中的内容；
若
Figure BDA0001673603180000216
则根据
Figure BDA0001673603180000217
与shotend的间隔进行判断，若
Figure BDA0001673603180000218
则认为
Figure BDA0001673603180000219
点位信息存在误差，当前镜头中无目标视频片段内容，若
Figure BDA00016736031800002110
则记
Figure BDA00016736031800002111
属于目标视频片段中的内容；
若
Figure BDA00016736031800002112
则根据
Figure BDA00016736031800002113
与shotend的间隔进行判断，若
Figure BDA00016736031800002114
则当前镜头内无目标视频片段内容，其中，Fth的典型取值为视频帧率。
以镜头为单位，每次仅对当前检测到的新镜头进行时间点位分析，将当前新镜头的起始帧和结束帧，分别记为shotsta和shotend，并将已处理的上一镜头的结束帧记为lastend，根据镜头帧级信息[shotsta,shotend]与标识目标视频片段的帧级信息，在时间轴上的相对关系，判断当前镜头中属于片尾的视频帧范围R；
若
Figure BDA00016736031800002115
则当前镜头内无目标视频片段内容；
若
Figure BDA00016736031800002116
则根据shotsta与
Figure BDA00016736031800002117
的间隔进行判断，若
Figure BDA00016736031800002118
则认为
Figure BDA00016736031800002119
点位信息存在误差，当前镜头中无目标视频片段内容，若
Figure BDA00016736031800002120
则记
Figure BDA00016736031800002121
属于目标视频片段中的内容；
若
Figure BDA00016736031800002122
则记R[shotsta,shotend]属于目标视频片段中的内容；
若
Figure BDA00016736031800002123
则记
Figure BDA00016736031800002124
属于目标视频片段中的内容；
若
Figure BDA00016736031800002125
则根据
Figure BDA00016736031800002126
与shotend的间隔进行判断，若
Figure BDA0001673603180000221
则认为
Figure BDA0001673603180000222
点位信息存在误差，当前镜头中无目标视频片段内容，若
Figure BDA0001673603180000223
则记
Figure BDA0001673603180000224
属于目标视频片段中的内容；
若
Figure BDA0001673603180000225
则根据
Figure BDA0001673603180000226
与shotend的间隔进行判断，若
Figure BDA0001673603180000227
则当前镜头内无目标视频片段内容，其中，Fth的典型取值为视频帧率。
根据获取的目标视频片段的视频帧范围，从所述目标视频片段的视频帧范围中提取片头关键帧，具体的方法，包括：
若待检测镜头是属于目标视频片段内容中的片头视频内容，则根据各个镜头中属于所述片头视频内容的视频帧范围和预设的关键帧数量的比值确定各个镜头的候选采样间隔；
针对每一镜头，判断该镜头的候选采样间隔是否大于预设的采样间隔的第一采样间隔阈值；
若该镜头的候选采样间隔大于预设的采样间隔的第一采样间隔阈值，则将第一预设值作为所述镜头的目标采样间隔；
或者，若该镜头的候选采样间隔不大于预设的采样间隔的第一采样间隔阈值，则判断所述镜头的候选采样间隔是否大于预设的采样间隔的第二采样间隔阈值；
若所述镜头的候选采样间隔大于预设的采样间隔的第二采样间隔阈值，则将第二采样间隔阈值作为所述镜头的目标采样间隔；
或者，若所述镜头的候选采样间隔不大于预设的采样间隔的第二采样间隔阈值，则将所述镜头的候选采样间隔，作为所述镜头的目标采样间隔；
根据获取的各个镜头的目标采样间隔，在各个镜头的所述片头内容的视频帧范围内进行采样，获取片头关键帧；
若待检测镜头是属于目标视频片段内容中的片尾视频内容，则根据各个镜头中属于所述片尾视频帧范围中提取片尾关键帧的步骤，可以包括：
根据各个镜头中属于所述片尾视频内容的视频帧范围和预设的关键帧数量的比值确定各个镜头的候选采样间隔；
针对每一镜头，判断该镜头的候选采样间隔是否大于预设的采样间隔的第一采样间隔阈值；
若该镜头的候选采样间隔大于预设的采样间隔的第一采样间隔阈值，则将第一预设值作为所述镜头的目标采样间隔；
或者，若该镜头的候选采样间隔不大于预设的采样间隔的第一采样间隔阈值，则判断所述镜头的候选采样间隔是否大于预设的采样间隔的第二采样间隔阈值；
若所述镜头的候选采样间隔大于预设的采样间隔的第二采样间隔阈值，则将第二采样间隔阈值作为所述镜头的目标采样间隔；
或者，若所述镜头的候选采样间隔不大于预设的采样间隔的第二采样间隔阈值，则将所述镜头的候选采样间隔，作为所述镜头的目标采样间隔；
根据获取的各个镜头的目标采样间隔，在各个镜头的所述片尾内容的视频帧范围内进行采样，获取片尾关键帧。
具体为，根据一个待处理镜头中的视频帧范围R和预设的关键帧数量K1的比值，确定该待处理镜头的候选采样间隔IntervalK，即
Figure BDA0001673603180000231
其中K1的典型取值为10。
其次，将获取的候选采样间隔与预设的采样间隔的第一采样间隔阈值IL进行比较；
若该待处理镜头的候选采样间隔IntervalK大于预设的采样间隔的第一采样间隔阈值IL，即IntervalK＞IL，则当前镜头属于超长镜头，需要进行密集采样，则将第一预设值ID作为该待处理镜头的目标采样间隔，即令IntervalK＝ID，其中IL的典型取值为50，ID的典型取值为2；
若某一待处理镜头的候选采样间隔IntervalK小于或等于预设的采样间隔的第一采样间隔阈值IL，则判断该待处理镜头的候选采样间隔是否大于预设的采样间隔的第二采样间隔阈值IM；
当IntervalK≤IL且IntervalK＞IM，则当前镜头采样间隔过大，将第二采样间隔阈值IM作为该待处理镜头的目标采样间隔，即令IntervalK＝IM，其中IM的典型取值为6；
当IntervalK≤IL且IntervalK≤IM，则将该待处理镜头的候选采样间隔IntervalK，作为该待处理镜头的目标采样间隔。
根据获取的各个镜头的目标采样间隔，在各个镜头对应的视频帧范围R内进行采样，获取各个镜头的关键帧，其中，获取的关键帧的数量为
Figure BDA0001673603180000241
其中length(R)表示视频帧范围R的长度。
针对上述获取到的关键帧，分别获取每个片头关键帧的图像特征，作为片头关键帧的模板图像特征，和/或，获取每个片尾关键帧的图像特征，作为片尾关键帧的模板图像特征，包括：
对所述片头关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获取4个感知哈希特征；
将获取的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述片头关键帧的图像特征；
和/或，获取每个片尾关键帧的图像特征，作为片尾关键帧的模板图像特征的步骤，包括：
对所述片尾关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获取4个感知哈希特征；
将获取的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述片尾关键帧的图像特征。
具体的，根据获得片头和/或片尾的关键帧，获取每个片头和/或片尾关键帧的图像特征，作为片头和/或片尾关键帧的模板图像特征的方法，可以参见S103中所述的方法，此处不在做过多描述。
将所述剧集标识与片头的各个关键帧的模板图像特征和/或片尾的各个关键帧的模板图像特征对应存储至所述数据库中，作为匹配模板，为下一步的重复性目标视频片段的自动检测做准备。
在进行重复性目标视频片段的自动检测时，首先要按照上述S101-S103所述的方法，获得待检测视频的每个镜头的每个关键帧的图像特征，其次按照S104所述的方法，确定所述待检测视频所属的剧集，再按照S105所述的方法，从预设数据库中获取所确定的剧集的匹配模板，再按照S106所述的方法，将每个镜头的每个关键帧的图像特征与所述匹配模板中的各个关键帧的模板图像特征进行匹配；
所述将每个镜头的每个关键帧的图像特征与所述匹配模板中的各个关键帧的模板图像特征进行匹配的步骤，包括：
根据所述剧集标识和待处理镜头是属于片头内容或片尾内容设置检索范围，根据所述检索范围，在所述预设数据库中查找是否有与待检测的图像特征相似的图像特征。
示例性的，如果剧集标识为《琅琊榜》，而待处理镜头是属于片头内容的，就将检索范围设置为，在《琅琊榜》的片头模板中查找，是否有与待检测的图像特征相似的图像特征，这样的设计可以缩小检索范围，从而提高检索速度。
本发明实施例中，在完成针对待检测视频的各个镜头与模板特征的匹配后，可以再对获取的匹配结果进行滤波处理，从而，获取目标视频片段的帧级精度的时间点位信息，同时也可以纠正匹配结果中丢失的片段。
具体的，所述对各个镜头匹配后获取的匹配结果进行滤波处理，获取目标视频片段的帧级精度的时间点位信息的步骤，可以包括：
采用窗口长度为第三预设值，对各个镜头的判断结果进行滤波处理，得到各个镜头的滤波结果；
根据各个镜头的滤波结果，确定所述待检测视频的目标视频片段的镜头，其中，所述滤波结果为所述镜头是所述目标片段的镜头或所述镜头不是所述目标视频片段的镜头。
示例性的，对各镜头的匹配结果，即由0、1组成的一组数据，进行滤波处理，即中值滤波，根据镜头级匹配结果，采用窗口长度为K的中值滤波，纠正匹配结果，例如，若镜头中有一帧图像的匹配结果为0，但该帧前一帧的匹配结果为1，后一帧的匹配结果也为1，则将该帧的匹配结果设为1，即认为该帧是属于目标视频片段的，其中，K的典型取值为3。
图2为本发明实施例提供的一种检测视频中目标视频片段的方法的原理示意图，如图2所示，该方法包括：
由人工选择一部电视剧中的指定的某一集作为标识集，标识该集电视剧中目标视频片段的秒级精度的起始时间点和结束时间点的点位信息，根据视频帧率F，将人工标识的秒级时间点位信息转为帧级信息,其中，F的典型取值为25。
示例性的，上述，将目标视频片段的起始时间点和结束时间点转换为帧级信息的方法，包括：
针对目标视频片段内容中的片头，则分别将所述人工标注的片头的起始时间
Figure BDA0001673603180000261
和结束时间
Figure BDA0001673603180000262
与所述视频帧率F的乘积对应的整数分别得到目标视频片段内容中片头的起始帧号
Figure BDA0001673603180000263
和结束帧号
Figure BDA0001673603180000264
针对目标视频片段内容中的片头，则分别将人工标注的片头的起始时间
Figure BDA0001673603180000265
和结束时间
Figure BDA0001673603180000266
与所述视频帧率F的乘积对应的整数分别得到目标视频片段内容中片尾的起始帧号
Figure BDA0001673603180000267
和结束帧号
Figure BDA0001673603180000268
分别针对目标视频片段内容中的片头和片尾，分别获取手工标识的片头帧级信息
Figure BDA0001673603180000269
和片尾的帧级信息
Figure BDA00016736031800002610
对该集内容进行镜头检测，并结合手工标识的信息确定目标视频片段的镜头范围，并对各个镜头进行采样，获取各个镜头的关键帧，对于获取到的关键帧进行图像特征提取，获取各关键帧的图像特征，将获取的各关键帧的图像特征存储至数据库，作为该部电视剧的目标视频片段的匹配模板。
将获取到的各关键帧的图像特征存储至数据库，作为待检测电视剧的目标视频片段匹配模板。
对于待检测电视剧中的其它各集，逐集进行目标视频片段检测，对待检测电视剧中的某一集的各镜头分别进行采样，获取各镜头的关键帧。
提取各镜头中各个关键帧的图像特征，针对提取到的某一镜头关键帧的图像特征，根据电视剧名称以及本次检测是属于片头检测还是片尾检测，设置检索范围。
根据设置的检索范围，在数据库中查询是否有与该图像特征相似的特征向量，若数据库中有与该图像特征相似的特征向量，则匹配成功，那么认为该帧图像属于目标视频片段中的内容，将该图像的匹配结果设为1；若数据库中没有与该图像特征相似的特征向量，则匹配失败，那么认为该帧图像不属于目标视频片段中的内容，将该图像的匹配结果设为0，这样，针对提取的各镜头关键帧的图像特征的匹配结果，会得到由0、1组成的一组数据。
其中，相似定义为：针对待检测图像整体I、以及图像中央三个子区域A、B和C共4个区域中，至少有2个区域的感知哈希特征，能够在数据库中查找到编辑距离小于第二预设阈值T的特征向量，其中，T＝0.2×特征向量维度。
若某一个镜头中至少有M帧均被判断为是属于目标视频片段中的内容，则认为该镜头属于目标视频片段中的内容，M的典型取值为2；否则，认为该镜头不属于目标视频片段中的内容。
对各镜头的匹配结果，即由0、1组成的一组数据，进行后处理，根据镜头级匹配结果，采用窗口长度为K的中值滤波器，纠正匹配结果中的短暂丢失的片断，其中，K的典型取值为3。
示例性的，采用窗口长度为3的中值滤波器进行后处理，当前镜头的匹配结果为0，但前一镜头的匹配结果为1，后一镜头的匹配结果也为1，则将该镜头的匹配结果设为1，即认为该镜头是属于目标视频片段的。
后处理结束后，若只得到一个连续的候选镜头的匹配序列，记该序列的第一帧为
Figure BDA0001673603180000271
最后一帧为
Figure BDA0001673603180000272
则
Figure BDA0001673603180000273
即为帧级精度的目标视频片段的检测结果；若得到多个连续的候选镜头的匹配序列，选择持续时间，即
Figure BDA0001673603180000274
最长的一个匹配结果作为帧级精度的目标视频片段检测结果。
可选的，在一种具体实现方式中，可以选择对待检测电视剧中某一集的前后多少分钟的内容进行检测是可以人为设定的，当然也可以选择对待检测电视剧中某一集的全部内容进行检测。
本发明实施例提供的一种目标视频片段检测方法，可以实现一部剧集中重复性目标视频片段的自动检测，本发明将标识目标视频片段的工作量从一部剧集每集均需人工标注降低为一部剧集只需人工标注一集，针对人工标注的一集，用视频镜头检测、视频镜头分析与图像特征提取的方法，获取目标视频片断中各个镜头的各个关键帧的图像特征，将获取到的图像特征，存储在数据库中作为匹配模板，针对剧集中的其它各集，采用模板匹配的方式，实现一部剧集中重复性目标视频片段的自动检测，减少人工成本的消耗，同时，相较于现有的自动检测技术，对视频内容的一致性要求较低，对于不同集数的视频内容中可能存在的删减/剪裁/形变情况具有较好的鲁棒性。
与图1所示实施例相对应，本发明实施例还提供了一种检测视频中目标视频片段的装置。如图4所示，该装置包括：视频获取模块101、关键帧获取模块102、图像特征获取模块103、剧集判断模块105、匹配模板获取模块106、图像特征匹配模块107及判断模块108，其中，
视频获取模块101，用于获取待检测视频；
关键帧获取模块102，用于从所述待检测视频中提取各个镜头的关键帧；
图像特征获取模块103，用于获取每个镜头的每个关键帧的图像特征；
剧集判断模块105，用于确定所述待检测视频所属的剧集；
匹配模板获取模块106，用于从预设数据库中获取所确定的剧集的匹配模板；其中，所述匹配模板中包含预先存储的所述剧集中指定一集视频的目标视频片段的关键帧的模板图像特征；所述待检测视频为所述剧集中除所述指定一集外的其他集视频；
图像特征匹配模块107，用于将每个镜头的每个关键帧的图像特征与所述匹配模板中的各个关键帧的模板图像特征进行匹配；
判断模块108，用于判断镜头中匹配成功的关键帧数是否超过预设匹配帧阈值，其中，将匹配成功的关键帧数超过预设匹配帧阈值的镜头，确定为所述待检测视频中目标视频片段的镜头。
可选的，所述关键帧获取模块102，具体用于：根据各个镜头中属于所述目标视频片段内容的视频帧范围和预设的关键帧数量的比值确定各个镜头的候选采样间隔；
针对每一镜头，判断该镜头的候选采样间隔是否大于预设的采样间隔的第一采样间隔阈值；
若该镜头的候选采样间隔大于预设的采样间隔的第一采样间隔阈值，则将第一预设值作为所述镜头的目标采样间隔；
或者，若该镜头的候选采样间隔不大于预设的采样间隔的第一采样间隔阈值，则判断所述镜头的候选采样间隔是否大于预设的采样间隔的第三采样间隔阈值；
若所述镜头的候选采样间隔大于预设的采样间隔的第三采样间隔阈值，则将第三采样间隔阈值作为所述镜头的目标采样间隔；
或者，若所述镜头的候选采样间隔不大于预设的采样间隔的第三采样间隔阈值，则将所述镜头的候选采样间隔，作为所述镜头的目标采样间隔；
根据获取的各个镜头的目标采样间隔，在各个镜头的所述视频帧范围内进行采样，获取各个镜头的关键帧
可选的，所述图像特征获取模块103，具体用于：对所述关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获得4个感知哈希特征；
将获得的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述关键帧的图像特征。
可选的，所述剧集判断模块105，具体用于：
从所述待检测视频的属性信息中获取所述待检测视频所属的剧集标识；
所述匹配模板获取模块，具体用于：
从所述预设数据库中获取与所述剧集标识相同的剧集的匹配模板。
如图5所示，可选的，所述装置，还包括：模板图像特征预存模块104；
所述模板图像特征预存模块104，包括：
标识帧获取子模块1041，用于对剧集中指定一集视频，获取被标识为所述指定一集的片头的第一起始帧和第一结束帧，和/或被标识为所述指定一集的片尾的第二起始帧和第二结束帧；
片头/片尾视频帧范围确定子模块1042，用于根据被标识为所述指定一集的片头的第一起始帧和第一结束帧，确定所述指定一集中包含片头内容的片头视频帧范围；和/或根据被标识为所述指定一集的片尾的第二起始帧和第二结束帧，确定所述指定一集中包含片尾内容的片尾视频帧范围；
模板图像特征获取子模块1043，用于从所述片头视频帧范围中提取片头关键帧；获取每个片头关键帧的图像特征，作为片头关键帧的模板图像特征；
和/或，从所述片尾视频帧范围中提取片尾关键帧；
获取每个片尾关键帧的图像特征，作为片尾关键帧的模板图像特征；
存储子模块1044，用于将所述剧集标识与片头的各个关键帧的模板图像特征和/或片尾的各个关键帧的模板图像特征对应存储至所述数据库中。
可选的，所述标识帧获取子模块1041，具体用于：根据该集的视频帧率，将被标识为该集的片头的起始时间点和结束时间点转换为该集的片头的第一起始帧和第一结束帧，和/或被标识为该集的片尾的起始时间点和结束时间点转换为该集片尾的第二起始帧和第二结束帧。
可选的，所述片头/片尾视频帧范围确定子模块1042，具体用于：
根据各个镜头起始帧号和结束帧号与所述指定一集的片头的第一起始帧和第一结束帧，在时间轴上的相对关系，确定各个镜头中属于片头内容的视频帧范围；
若待处理镜头的帧号范围完全落入所述片头的帧号范围，将所述待处理镜头的帧号范围作为所述片头内容的视频帧范围；
若所述片头的帧号范围完全落入所述待处理镜头的帧号范围，将所述目标视频片段帧号范围作为所述片头内容的视频帧范围；
若所述待处理镜头的帧号范围与所述片头的帧号范围只有部分重叠，则判断该所重叠的帧号的数量是否大于等于第三预设阈值，如果大于等于，将所重叠的帧号对应的视频帧范围作为所述片头内容的视频帧范围；
和/或，所述根据被标识为所述指定一集的片尾的第二起始帧和第二结束帧，确定所述指定一集中包含片尾内容的片尾视频帧范围的步骤，包括：
根据各个镜头起始帧号和结束帧号与所述指定一集的片尾的第二起始帧和第二结束帧，在时间轴上的相对关系，确定各个镜头中属于片尾内容的视频帧范围；
若待处理镜头的帧号范围完全落入所述片尾的帧号范围，将所述待处理镜头的帧号范围作为所述片尾内容的视频帧范围；
若所述片尾的帧号范围完全落入所述待处理镜头的帧号范围，将所述目标视频片段帧号范围作为所述片尾内容的视频帧范围；
若所述待处理镜头的帧号范围与所述片尾的帧号范围只有部分重叠，则判断所重叠的帧号的数量是否大于等于第三预设阈值，如果大于等于，将所重叠的帧号对应的视频帧范围作为所述片尾内容的视频帧范围。
可选的，所述模板图像特征获取子模块1043，从所述片头视频帧范围中提取片头关键帧，包括：
根据各个镜头中属于所述片头视频内容的视频帧范围和预设的关键帧数量的比值确定各个镜头的候选采样间隔；
针对每一镜头，判断该镜头的候选采样间隔是否大于预设的采样间隔的第一采样间隔阈值；
若该镜头的候选采样间隔大于预设的采样间隔的第一采样间隔阈值，则将第一预设值作为所述镜头的目标采样间隔；
或者，若该镜头的候选采样间隔不大于预设的采样间隔的第一采样间隔阈值，则判断所述镜头的候选采样间隔是否大于预设的采样间隔的第二采样间隔阈值；
若所述镜头的候选采样间隔大于预设的采样间隔的第二采样间隔阈值，则将第二采样间隔阈值作为所述镜头的目标采样间隔；
或者，若所述镜头的候选采样间隔不大于预设的采样间隔的第二采样间隔阈值，则将所述镜头的候选采样间隔，作为所述镜头的目标采样间隔；
根据获取的各个镜头的目标采样间隔，在各个镜头的所述片头内容的视频帧范围内进行采样，获取片头关键帧；
所述模板图像特征获取子模块1043，从所述片头视频帧范围中提取片尾关键帧，包括：
根据各个镜头中属于所述片尾视频内容的视频帧范围和预设的关键帧数量的比值确定各个镜头的候选采样间隔；
针对每一镜头，判断该镜头的候选采样间隔是否大于预设的采样间隔的第一采样间隔阈值；
若该镜头的候选采样间隔大于预设的采样间隔的第一采样间隔阈值，则将第一预设值作为所述镜头的目标采样间隔；
或者，若该镜头的候选采样间隔不大于预设的采样间隔的第一采样间隔阈值，则判断所述镜头的候选采样间隔是否大于预设的采样间隔的第二采样间隔阈值；
若所述镜头的候选采样间隔大于预设的采样间隔的第二采样间隔阈值，则将第二采样间隔阈值作为所述镜头的目标采样间隔；
或者，若所述镜头的候选采样间隔不大于预设的采样间隔的第二采样间隔阈值，则将所述镜头的候选采样间隔，作为所述镜头的目标采样间隔；
根据获取的各个镜头的目标采样间隔，在各个镜头的所述片尾内容的视频帧范围内进行采样，获取片尾关键帧。
所述模板图像特征获取子模块1043，获取每个片头关键帧的图像特征，作为片头关键帧的模板图像特征，包括：
对所述片头关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获取4个感知哈希特征；
将获取的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述片头关键帧的图像特征；
所述模板图像特征获取子模块1043，获取每个片尾关键帧的图像特征，作为片尾关键帧的模板图像特征的步骤，包括：
对所述片尾关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获取4个感知哈希特征；
将获取的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述片尾关键帧的图像特征。
可选的，图像特征获取模块103，具体用于：
对获取的待处理镜头的待处理关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获取4个感知哈希特征；
将获取的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述关键帧的图像特征；
所述将每个镜头的每个关键帧的图像特征与所述匹配模板中的各个关键帧的模板图像特征进行匹配的步骤，包括：
根据所述剧集标识和待处理镜头是属于片头内容或片尾内容设置检索范围，根据所述检索范围，在所述预设数据库中查找是否有与待检测的图像特征相似的图像特征。
如图6所示，可选的，所述装置，还包括：
后处理模块109：用于对各个镜头匹配后获取的匹配结果进行处理。
可选的，所述后处理模块109，包括：
滤波处理子模块1091，用于对各个镜头匹配后获取的匹配结果进行滤波处理；
时间点获取子模块1092，用于获取目标视频片段的帧级精度的时间点位信息。
本发明实施例提供的一种目标视频片段检测装置，可以实现一部剧集中重复性目标视频片段的自动检测，与现有技术标识目标视频片段需要人工重复性的标注剧集中的每一集相比，实施本发明可以实现一部剧集中重复性目标视频片段的自动检测，减少人工成本的消耗，与现有的自动检测技术相比，对视频内容的一致性要求较低，对于不同集数的视频内容中可能存在的删减/剪裁/形变情况具有较好的鲁棒性。
与图1所示实施例相对应，本发明实施例还提供了一种电子设备，如图7所示，该电子设备包括：处理器701、通信接口702、存储器703和通信总线704，其中，处理器701，通信接口702，存储器703通过通信总线704完成相互间的通信；
存储器703，用于存放计算机程序；
处理器701，用于执行存储器上所存放的程序时，实现以下方法步骤：
获取待检测视频；
从所述待检测视频中提取各个镜头的关键帧；
获取每个镜头的每个关键帧的图像特征；
确定所述待检测视频所属的剧集；
从预设数据库中获取所确定的剧集的匹配模板，所述匹配模板中包含预先存储的所述剧集中指定一集视频的片头和/或片尾的关键帧的模板图像特征；所述待检测视频为所述剧集中除所述指定一集外的其他集视频；
将每个镜头的每个关键帧的图像特征与所述匹配模板中的各个关键帧的模板图像特征进行匹配；
将匹配成功的关键帧数超过预设匹配帧阈值的镜头，确定为所述待检测视频中目标视频片段的镜头；所述目标视频片段为：视频的片头和/或片尾。
本发明实施例提供的一种目标视频片段检测装置，可以实现一部剧集中重复性目标视频片段的自动检测，与现有技术标识目标视频片段需要人工重复性的标注剧集中的每一集相比，实施本发明可以实现一部剧集中重复性目标视频片段的自动检测，减少人工成本的消耗，与现有的自动检测技术相比，对视频内容的一致性要求较低，对于不同集数的视频内容中可能存在的删减/剪裁/形变情况具有较好的鲁棒性。
在本发明提供的又一实施例中，还提供了一种计算机可读存储介质，该计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述实施例中任一所述的目标视频片段检测方法。
在本发明提供的又一实施例中，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述实施例中任一所述的目标视频片段检测方法。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (21)

1.一种检测视频中目标视频片段的方法，其特征在于，所述方法包括：
获取待检测视频；
从所述待检测视频中提取各个镜头的关键帧；
获取每个镜头的每个关键帧的图像特征；
确定所述待检测视频所属的剧集；
从预设数据库中获取所确定的剧集的匹配模板，所述匹配模板中包含预先存储的所述剧集中指定一集视频的片头和/或片尾的关键帧的模板图像特征；所述待检测视频为所述剧集中除所述指定一集外的其他集视频；
将每个镜头的每个关键帧的图像特征与所述匹配模板中的各个关键帧的模板图像特征进行匹配；
将匹配成功的关键帧数超过预设匹配帧阈值的镜头，确定为所述待检测视频中目标视频片段的镜头；所述目标视频片段为：视频的片头和/或片尾；
所述预先存储所述剧集中指定一集视频的片头和/或片尾的关键帧的模板图像特征，包括：
对剧集中指定一集视频，获取被标识为所述指定一集的片头的第一起始帧和第一结束帧，和/或被标识为所述指定一集的片尾的第二起始帧和第二结束帧；
根据被标识为所述指定一集的片头的第一起始帧和第一结束帧，确定所述指定一集中包含片头内容的片头视频帧范围；和/或根据被标识为所述指定一集的片尾的第二起始帧和第二结束帧，确定所述指定一集中包含片尾内容的片尾视频帧范围；
从所述片头视频帧范围中提取片头关键帧；
获取每个片头关键帧的图像特征，作为片头关键帧的模板图像特征；
和/或，从所述片尾视频帧范围中提取片尾关键帧；
获取每个片尾关键帧的图像特征，作为片尾关键帧的模板图像特征；
将所述剧集标识与片头的各个关键帧的模板图像特征和/或片尾的各个关键帧的模板图像特征对应存储至所述数据库中；
所述根据被标识为所述指定一集的片头的第一起始帧和第一结束帧，确定所述指定一集中包含片头内容的片头视频帧范围的步骤，包括：
根据所述指定一集的各个镜头起始帧号和结束帧号与所述指定一集的片头的第一起始帧和第一结束帧，在时间轴上的相对关系，确定所述指定一集的各个镜头中属于片头内容的视频帧范围；
若所述指定一集的待处理镜头的帧号范围完全落入所述指定一集的片头的帧号范围，将所述待处理镜头的帧号范围作为所述片头内容的视频帧范围；
若所述指定一集的片头的帧号范围完全落入所述指定一集的待处理镜头的帧号范围，将所述指定一集的片头的帧号范围作为所述片头内容的视频帧范围；
若所述待处理镜头的帧号范围与所述指定一集的片头的帧号范围只有部分重叠，则判断该所重叠的帧号的数量是否大于等于第三预设阈值，如果大于等于，将所重叠的帧号对应的视频帧范围作为所述片头内容的视频帧范围；
和/或，所述根据被标识为所述指定一集的片尾的第二起始帧和第二结束帧，确定所述指定一集中包含片尾内容的片尾视频帧范围的步骤，包括：
根据所述指定一集的各个镜头起始帧号和结束帧号与所述指定一集的片尾的第二起始帧和第二结束帧，在时间轴上的相对关系，确定所述指定一集的各个镜头中属于片尾内容的视频帧范围；
若所述指定一集的待处理镜头的帧号范围完全落入所述指定一集的片尾的帧号范围，将所述待处理镜头的帧号范围作为所述片尾内容的视频帧范围；
若所述指定一集的片尾的帧号范围完全落入所述指定一集的待处理镜头的帧号范围，将所述指定一集的片头的帧号范围作为所述片尾内容的视频帧范围；
若所述待处理镜头的帧号范围与所述指定一集的片尾的帧号范围只有部分重叠，则判断所重叠的帧号的数量是否大于等于第三预设阈值，如果大于等于，将所重叠的帧号对应的视频帧范围作为所述片尾内容的视频帧范围。
2.根据权利要求1所述的方法，其特征在于：
所述从所述待检测视频中提取各个镜头的关键帧的步骤，包括：
根据各个镜头中属于所述目标视频片段内容的视频帧范围和预设的关键帧数量的比值确定各个镜头的候选采样间隔；
针对每一镜头，判断该镜头的候选采样间隔是否大于预设的采样间隔的第一采样间隔阈值；
若该镜头的候选采样间隔大于预设的采样间隔的第一采样间隔阈值，则将第一预设值作为所述镜头的目标采样间隔；
或者，若该镜头的候选采样间隔不大于预设的采样间隔的第一采样间隔阈值，则判断所述镜头的候选采样间隔是否大于预设的采样间隔的第三采样间隔阈值；
若所述镜头的候选采样间隔大于预设的采样间隔的第三采样间隔阈值，则将第三采样间隔阈值作为所述镜头的目标采样间隔；
或者，若所述镜头的候选采样间隔不大于预设的采样间隔的第三采样间隔阈值，则将所述镜头的候选采样间隔，作为所述镜头的目标采样间隔；
根据获取的各个镜头的目标采样间隔，在各个镜头的所述视频帧范围内进行采样，获取各个镜头的关键帧。
3.根据权利要求1所述的方法，其特征在于：所述获取每个镜头的每个关键帧的图像特征，包括：
对所述关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获得4个感知哈希特征；
将获得的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述关键帧的图像特征。
4.根据权利要求1所述的方法，其特征在于：
所述确定所述待检测视频所属的剧集的步骤，包括：
从所述待检测视频的属性信息中获取所述待检测视频所属的剧集标识；
所述从预设数据库中获取所确定的剧集的匹配模板的步骤，包括：
从所述预设数据库中获取与所述剧集标识相同的剧集的匹配模板。
5.根据权利要求1所述的方法，其特征在于：
所述获取被标识为该集的片头的第一起始帧和第一结束帧，和/或被标识为该集的片尾的第二起始帧和第二结束帧的步骤，包括：
根据该集的视频帧率，将被标识为该集的片头的起始时间点和结束时间点转换为该集的片头的第一起始帧和第一结束帧，和/或被标识为该集的片尾的起始时间点和结束时间点转换为该集片尾的第二起始帧和第二结束帧。
6.根据权利要求1所述的方法，其特征在于：
所述从所述片头视频帧范围中提取片头关键帧的步骤，包括：
根据各个镜头中属于所述片头视频内容的视频帧范围和预设的关键帧数量的比值确定各个镜头的候选采样间隔；
针对每一镜头，判断该镜头的候选采样间隔是否大于预设的采样间隔的第一采样间隔阈值；
若该镜头的候选采样间隔大于预设的采样间隔的第一采样间隔阈值，则将第一预设值作为所述镜头的目标采样间隔；
或者，若该镜头的候选采样间隔不大于预设的采样间隔的第一采样间隔阈值，则判断所述镜头的候选采样间隔是否大于预设的采样间隔的第二采样间隔阈值；
若所述镜头的候选采样间隔大于预设的采样间隔的第二采样间隔阈值，则将第二采样间隔阈值作为所述镜头的目标采样间隔；
或者，若所述镜头的候选采样间隔不大于预设的采样间隔的第二采样间隔阈值，则将所述镜头的候选采样间隔，作为所述镜头的目标采样间隔；
根据获取的各个镜头的目标采样间隔，在各个镜头的所述片头内容的视频帧范围内进行采样，获取片头关键帧；
所述从所述片尾视频帧范围中提取片尾关键帧的步骤，包括：
根据各个镜头中属于所述片尾视频内容的视频帧范围和预设的关键帧数量的比值确定各个镜头的候选采样间隔；
针对每一镜头，判断该镜头的候选采样间隔是否大于预设的采样间隔的第一采样间隔阈值；
若该镜头的候选采样间隔大于预设的采样间隔的第一采样间隔阈值，则将第一预设值作为所述镜头的目标采样间隔；
或者，若该镜头的候选采样间隔不大于预设的采样间隔的第一采样间隔阈值，则判断所述镜头的候选采样间隔是否大于预设的采样间隔的第二采样间隔阈值；
若所述镜头的候选采样间隔大于预设的采样间隔的第二采样间隔阈值，则将第二采样间隔阈值作为所述镜头的目标采样间隔；
或者，若所述镜头的候选采样间隔不大于预设的采样间隔的第二采样间隔阈值，则将所述镜头的候选采样间隔，作为所述镜头的目标采样间隔；
根据获取的各个镜头的目标采样间隔，在各个镜头的所述片尾内容的视频帧范围内进行采样，获取片尾关键帧。
7.根据权利要求1所述的方法，其特征在于：
所述获取每个片头关键帧的图像特征，作为片头关键帧的模板图像特征的步骤，包括：
对所述片头关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获取4个感知哈希特征；
将获取的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述片头关键帧的图像特征；
和/或，获取每个片尾关键帧的图像特征，作为片尾关键帧的模板图像特征的步骤，包括：
对所述片尾关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获取4个感知哈希特征；
将获取的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述片尾关键帧的图像特征。
8.根据权利要求7所述的方法，其特征在于：
所述获取每个镜头的每个关键帧的图像特征的步骤，包括：
对获取的待处理镜头的待处理关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获取4个感知哈希特征；
将获取的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述关键帧的图像特征；
所述将每个镜头的每个关键帧的图像特征与所述匹配模板中的各个关键帧的模板图像特征进行匹配的步骤，包括：
根据所述剧集标识和待处理镜头是属于片头内容或片尾内容设置检索范围，根据所述检索范围，在所述预设数据库中查找是否有与待检测的图像特征相似的图像特征。
9.根据权利要求1～8任一项所述的方法，其特征在于：
所述方法还包括：对各个镜头匹配后获取的匹配结果进行滤波处理，获取目标视频片段的帧级精度的时间点位信息。
10.根据权利要求9所述的方法，其特征在于：
所述对各个镜头匹配后获取的匹配结果进行滤波处理，获取目标视频片段的帧级精度的时间点位信息的步骤，包括：
采用窗口长度为第三预设值，对各个镜头的判断结果进行滤波处理，得到各个镜头的滤波结果；
根据各个镜头的滤波结果，确定所述待检测视频的目标视频片段的镜头，其中，所述滤波结果为所述镜头是所述目标片段的镜头或所述镜头不是所述目标视频片段的镜头。
11.一种检测视频中目标视频片段的装置，其特征在于，所述装置包括：
视频获取模块，用于获取待检测视频,以及获取所述待检测视频的属性信息；
关键帧获取模块，用于从所述待检测视频中提取各个镜头的关键帧；
图像特征获取模块，用于获取每个镜头的每个关键帧的图像特征；
剧集判断模块，用于确定所述待检测视频所属的剧集；
匹配模板获取模块，用于从预设数据库中获取所确定的剧集的匹配模板；
图像特征匹配模块，用于将每个镜头的每个关键帧的图像特征与所述匹配模板中的各个关键帧的模板图像特征进行匹配；
判断模块，用于判断镜头中匹配成功的关键帧数是否超过预设匹配帧阈值；
所述模板图像特征预存模块，包括：
标识帧获取子模块，用于对剧集中指定一集视频，获取被标识为所述指定一集的片头的第一起始帧和第一结束帧，和/或被标识为所述指定一集的片尾的第二起始帧和第二结束帧；
片头/片尾视频帧范围确定子模块，用于根据被标识为所述指定一集的片头的第一起始帧和第一结束帧，确定所述指定一集中包含片头内容的片头视频帧范围；和/或根据被标识为所述指定一集的片尾的第二起始帧和第二结束帧，确定所述指定一集中包含片尾内容的片尾视频帧范围；
模板图像特征获取子模块，用于从所述片头视频帧范围中提取片头关键帧；获取每个片头关键帧的图像特征，作为片头关键帧的模板图像特征；
和/或，从所述片尾视频帧范围中提取片尾关键帧；获取每个片尾关键帧的图像特征，作为片尾关键帧的模板图像特征；
存储子模块，用于将所述剧集标识与片头的各个关键帧的模板图像特征和/或片尾的各个关键帧的模板图像特征对应存储至所述数据库中；
所述片头/片尾视频帧范围确定子模块，具体用于：
根据所述指定一集的各个镜头起始帧号和结束帧号与所述指定一集的片头的第一起始帧和第一结束帧，在时间轴上的相对关系，确定所述指定一集的各个镜头中属于片头内容的视频帧范围；
若所述指定一集的待处理镜头的帧号范围完全落入所述指定一集的片头的帧号范围，将所述待处理镜头的帧号范围作为所述片头内容的视频帧范围；
若所述指定一集的片头的帧号范围完全落入所述指定一集的待处理镜头的帧号范围，将所述指定一集的片头的帧号范围作为所述片头内容的视频帧范围；
若所述待处理镜头的帧号范围与所述指定一集的片头的帧号范围只有部分重叠，则判断该所重叠的帧号的数量是否大于等于第三预设阈值，如果大于等于，将所重叠的帧号对应的视频帧范围作为所述片头内容的视频帧范围；
和/或，所述根据被标识为所述指定一集的片尾的第二起始帧和第二结束帧，确定所述指定一集中包含片尾内容的片尾视频帧范围的步骤，包括：
根据所述指定一集的各个镜头起始帧号和结束帧号与所述指定一集的片尾的第二起始帧和第二结束帧，在时间轴上的相对关系，确定所述指定一集的各个镜头中属于片尾内容的视频帧范围；
若所述指定一集的待处理镜头的帧号范围完全落入所述指定一集的片尾的帧号范围，将所述待处理镜头的帧号范围作为所述片尾内容的视频帧范围；
若所述指定一集的片尾的帧号范围完全落入所述指定一集的待处理镜头的帧号范围，将所述指定一集的片头的帧号范围作为所述片尾内容的视频帧范围；
若所述待处理镜头的帧号范围与所述指定一集的片尾的帧号范围只有部分重叠，则判断所重叠的帧号的数量是否大于等于第三预设阈值，如果大于等于，将所重叠的帧号对应的视频帧范围作为所述片尾内容的视频帧范围。
12.根据权利要求11所述的装置，其特征在于：所述关键帧获取模块，具体用于：根据各个镜头中属于所述目标视频片段内容的视频帧范围和预设的关键帧数量的比值确定各个镜头的候选采样间隔；
针对每一镜头，判断该镜头的候选采样间隔是否大于预设的采样间隔的第一采样间隔阈值；
若该镜头的候选采样间隔大于预设的采样间隔的第一采样间隔阈值，则将第一预设值作为所述镜头的目标采样间隔；
或者，若该镜头的候选采样间隔不大于预设的采样间隔的第一采样间隔阈值，则判断所述镜头的候选采样间隔是否大于预设的采样间隔的第三采样间隔阈值；
若所述镜头的候选采样间隔大于预设的采样间隔的第三采样间隔阈值，则将第三采样间隔阈值作为所述镜头的目标采样间隔；
或者，若所述镜头的候选采样间隔不大于预设的采样间隔的第三采样间隔阈值，则将所述镜头的候选采样间隔，作为所述镜头的目标采样间隔；
根据获取的各个镜头的目标采样间隔，在各个镜头的所述视频帧范围内进行采样，获取各个镜头的关键帧。
13.根据权利要求11所述的装置，其特征在于：所述图像特征获取模块，具体用于：对所述关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获得4个感知哈希特征；
将获得的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述关键帧的图像特征。
14.根据权利要求11所述的装置，其特征在于：所述剧集判断模块，具体用于：
从所述待检测视频的属性信息中获取所述待检测视频所属的剧集标识；
所述匹配模板获取模块，具体用于：
从所述预设数据库中获取与所述剧集标识相同的剧集的匹配模板。
15.根据权利要求11所述的装置，其特征在于：
所述标识帧获取子模块，具体用于：根据该集的视频帧率，将被标识为该集的片头的起始时间点和结束时间点转换为该集的片头的第一起始帧和第一结束帧，和/或被标识为该集的片尾的起始时间点和结束时间点转换为该集片尾的第二起始帧和第二结束帧。
16.根据权利要求11所述的装置，其特征在于：
所述模板图像特征获取子模块，从所述片头视频帧范围中提取片头关键帧，包括：
根据各个镜头中属于所述片头视频内容的视频帧范围和预设的关键帧数量的比值确定各个镜头的候选采样间隔；
针对每一镜头，判断该镜头的候选采样间隔是否大于预设的采样间隔的第一采样间隔阈值；
若该镜头的候选采样间隔大于预设的采样间隔的第一采样间隔阈值，则将第一预设值作为所述镜头的目标采样间隔；
或者，若该镜头的候选采样间隔不大于预设的采样间隔的第一采样间隔阈值，则判断所述镜头的候选采样间隔是否大于预设的采样间隔的第二采样间隔阈值；
若所述镜头的候选采样间隔大于预设的采样间隔的第二采样间隔阈值，则将第二采样间隔阈值作为所述镜头的目标采样间隔；
或者，若所述镜头的候选采样间隔不大于预设的采样间隔的第二采样间隔阈值，则将所述镜头的候选采样间隔，作为所述镜头的目标采样间隔；
根据获取的各个镜头的目标采样间隔，在各个镜头的所述片头内容的视频帧范围内进行采样，获取片头关键帧；
所述模板图像特征获取子模块，从所述片头视频帧范围中提取片尾关键帧，包括：
根据各个镜头中属于所述片尾视频内容的视频帧范围和预设的关键帧数量的比值确定各个镜头的候选采样间隔；
针对每一镜头，判断该镜头的候选采样间隔是否大于预设的采样间隔的第一采样间隔阈值；
若该镜头的候选采样间隔大于预设的采样间隔的第一采样间隔阈值，则将第一预设值作为所述镜头的目标采样间隔；
或者，若该镜头的候选采样间隔不大于预设的采样间隔的第一采样间隔阈值，则判断所述镜头的候选采样间隔是否大于预设的采样间隔的第二采样间隔阈值；
若所述镜头的候选采样间隔大于预设的采样间隔的第二采样间隔阈值，则将第二采样间隔阈值作为所述镜头的目标采样间隔；
或者，若所述镜头的候选采样间隔不大于预设的采样间隔的第二采样间隔阈值，则将所述镜头的候选采样间隔，作为所述镜头的目标采样间隔；
根据获取的各个镜头的目标采样间隔，在各个镜头的所述片尾内容的视频帧范围内进行采样，获取片尾关键帧。
17.根据权利要求11所述的装置，其特征在于：
所述模板图像特征获取子模块，获取每个片头关键帧的图像特征，作为片头关键帧的模板图像特征，包括：
对所述片头关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获取4个感知哈希特征；
将获取的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述片头关键帧的图像特征；
所述模板图像特征获取子模块，获取每个片尾关键帧的图像特征，作为片尾关键帧的模板图像特征的步骤，包括：
对所述片尾关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获取4个感知哈希特征；
将获取的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述片尾关键帧的图像特征。
18.根据权利要求17所述的装置，其特征在于：
图像特征获取模块，具体用于：
对获取的待处理镜头的待处理关键帧的图像进行缩放，将所述图像的中央区域划分为均等的三个子区域，分别计算图像整体及划分的所述三个子区域的感知哈希特征，获取4个感知哈希特征；
将获取的4个感知哈希特征，接续连接为1个向量，将所述向量作为所述关键帧的图像特征；
所述将每个镜头的每个关键帧的图像特征与所述匹配模板中的各个关键帧的模板图像特征进行匹配的步骤，包括：
根据所述剧集标识和待处理镜头是属于片头内容或片尾内容设置检索范围，根据所述检索范围，在所述预设数据库中查找是否有与待检测的图像特征相似的图像特征。
19.根据权利要求11所述的装置，其特征在于：所述装置，还包括：
后处理模块：用于对各个镜头匹配后获取的匹配结果进行处理。
20.根据权利要求19所述的装置，其特征在于：所述后处理模块，包括：
滤波处理子模块，用于对各个镜头匹配后获取的匹配结果进行滤波处理；
时间点获取子模块，用于获取目标视频片段的帧级精度的时间点位信息。
21.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现权利要求1-10任一所述的方法步骤。
CN201810545955.3A 2018-05-25 2018-05-25 一种检测视频中目标视频片段的方法、装置及电子设备 Active CN108769731B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810545955.3A CN108769731B (zh) 2018-05-25 2018-05-25 一种检测视频中目标视频片段的方法、装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810545955.3A CN108769731B (zh) 2018-05-25 2018-05-25 一种检测视频中目标视频片段的方法、装置及电子设备

Publications (2)

Publication Number Publication Date
CN108769731A CN108769731A (zh) 2018-11-06
CN108769731B true CN108769731B (zh) 2021-09-24

Family

ID=64001059

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810545955.3A Active CN108769731B (zh) 2018-05-25 2018-05-25 一种检测视频中目标视频片段的方法、装置及电子设备

Country Status (1)

Country Link
CN (1) CN108769731B (zh)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109977819B (zh) * 2019-03-14 2020-04-24 长沙理工大学 一种应用模板匹配方法的弱监督单个动作定位方法
CN110290420A (zh) * 2019-07-05 2019-09-27 山东云缦智能科技有限公司 一种基于帧特征实现电视剧片头/片尾自动识别的方法
CN110430443B (zh) * 2019-07-11 2022-01-25 平安科技（深圳）有限公司 视频镜头剪切的方法、装置、计算机设备及存储介质
CN110855904B (zh) * 2019-11-26 2021-10-01 Oppo广东移动通信有限公司 视频处理方法、电子装置和存储介质
CN110958489A (zh) * 2019-12-11 2020-04-03 腾讯科技（深圳）有限公司 视频处理方法、装置、电子设备和计算机可读存储介质
CN111356015B (zh) * 2020-02-25 2022-05-10 北京奇艺世纪科技有限公司 重复视频检测方法、装置、计算机设备和存储介质
CN113382283B (zh) * 2020-03-09 2023-07-04 上海哔哩哔哩科技有限公司 视频片头识别方法及系统
CN111479130B (zh) * 2020-04-02 2023-09-26 腾讯科技（深圳）有限公司 一种视频定位方法、装置、电子设备和存储介质
CN111491205B (zh) * 2020-04-17 2023-04-25 维沃移动通信有限公司 视频处理方法、装置及电子设备
CN112149575B (zh) * 2020-09-24 2024-05-24 新华智云科技有限公司 从视频中自动筛选具有汽车部位片段的方法
CN112291589B (zh) * 2020-10-29 2023-09-22 腾讯科技（深圳）有限公司 视频文件的结构检测方法、装置
CN112507875A (zh) * 2020-12-10 2021-03-16 上海连尚网络科技有限公司 一种用于检测视频重复度的方法与设备
CN112770176B (zh) * 2020-12-23 2022-10-25 北京爱奇艺科技有限公司 一种视频帧确定方法、装置、电子设备和计算机可读介质
CN113852853B (zh) * 2021-09-18 2024-05-28 青岛海信宽带多媒体技术有限公司 一种机顶盒及连续播放节目方法
CN114782879B (zh) * 2022-06-20 2022-08-23 腾讯科技（深圳）有限公司 视频识别方法、装置、计算机设备和存储介质
CN116939197A (zh) * 2023-09-15 2023-10-24 海看网络科技(山东)股份有限公司 基于音视频的直播节目首播和重播内容一致性监测方法
CN117201845B (zh) * 2023-09-15 2024-09-20 海看网络科技(山东)股份有限公司 基于帧比对的直播节目首播和重播内容一致性监测方法

Citations (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101080028A (zh) * 2006-05-25 2007-11-28 北大方正集团有限公司 一种广告视频检测的方法
CN101162470A (zh) * 2007-11-16 2008-04-16 北京交通大学 一种基于分层匹配的视频广告识别方法
CN101241552A (zh) * 2008-01-24 2008-08-13 北京六维世纪网络技术有限公司 一种图像特征的识别方法和装置
WO2009026433A1 (en) * 2007-08-21 2009-02-26 Cortica, Ltd. Signature generation for multimedia deep-content-classification by a large-scale matching system and method thereof
CN101840435A (zh) * 2010-05-14 2010-09-22 中兴通讯股份有限公司 一种实现视频预览和检索的方法及移动终端
CN102547139A (zh) * 2010-12-30 2012-07-04 北京新岸线网络技术有限公司 一种新闻视频节目切分方法、新闻视频编目方法及系统
CN102890778A (zh) * 2011-07-21 2013-01-23 北京新岸线网络技术有限公司 基于内容的视频检测方法及装置
CN103152632A (zh) * 2013-03-05 2013-06-12 天脉聚源(北京)传媒科技有限公司 一种多媒体节目的定位方法及装置
CN103593464A (zh) * 2013-11-25 2014-02-19 华中科技大学 基于视觉特征的视频指纹检测及视频序列匹配方法及系统
CN103596016A (zh) * 2013-11-20 2014-02-19 韩巍 一种多媒体视频数据处理方法和装置
CN103605666A (zh) * 2013-10-28 2014-02-26 复旦大学 一种进行广告检测的视频拷贝检测方法
CN103617233A (zh) * 2013-11-26 2014-03-05 烟台中科网络技术研究所 一种基于语义内容多层表示的重复视频检测方法与装置
CN104166685A (zh) * 2014-07-24 2014-11-26 北京捷成世纪科技股份有限公司 一种检测视频片段的方法和装置
CN104202683A (zh) * 2014-03-11 2014-12-10 无锡天脉聚源传媒科技有限公司 一种在点播流中获取节目的方法及装置
CN106127680A (zh) * 2016-06-29 2016-11-16 深圳市优象计算技术有限公司 一种720度全景视频快速浏览方法
CN107534796A (zh) * 2015-03-17 2018-01-02 奈飞公司 检测视频节目的片段
CN107864411A (zh) * 2017-10-31 2018-03-30 广东小天才科技有限公司 一种视频输出方法及终端设备
CN107977645A (zh) * 2017-12-19 2018-05-01 北京奇艺世纪科技有限公司 一种视频新闻海报图的生成方法及装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103475935A (zh) * 2013-09-06 2013-12-25 北京锐安科技有限公司 一种视频片段的检索方法及装置
CN107169004B (zh) * 2017-03-31 2021-07-30 北京奇艺世纪科技有限公司 一种特征数据库更新方法及装置

Patent Citations (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101080028A (zh) * 2006-05-25 2007-11-28 北大方正集团有限公司 一种广告视频检测的方法
WO2009026433A1 (en) * 2007-08-21 2009-02-26 Cortica, Ltd. Signature generation for multimedia deep-content-classification by a large-scale matching system and method thereof
CN101162470A (zh) * 2007-11-16 2008-04-16 北京交通大学 一种基于分层匹配的视频广告识别方法
CN101241552A (zh) * 2008-01-24 2008-08-13 北京六维世纪网络技术有限公司 一种图像特征的识别方法和装置
CN101840435A (zh) * 2010-05-14 2010-09-22 中兴通讯股份有限公司 一种实现视频预览和检索的方法及移动终端
CN102547139A (zh) * 2010-12-30 2012-07-04 北京新岸线网络技术有限公司 一种新闻视频节目切分方法、新闻视频编目方法及系统
CN102890778A (zh) * 2011-07-21 2013-01-23 北京新岸线网络技术有限公司 基于内容的视频检测方法及装置
CN103152632A (zh) * 2013-03-05 2013-06-12 天脉聚源(北京)传媒科技有限公司 一种多媒体节目的定位方法及装置
CN103605666A (zh) * 2013-10-28 2014-02-26 复旦大学 一种进行广告检测的视频拷贝检测方法
CN103596016A (zh) * 2013-11-20 2014-02-19 韩巍 一种多媒体视频数据处理方法和装置
CN103593464A (zh) * 2013-11-25 2014-02-19 华中科技大学 基于视觉特征的视频指纹检测及视频序列匹配方法及系统
CN103617233A (zh) * 2013-11-26 2014-03-05 烟台中科网络技术研究所 一种基于语义内容多层表示的重复视频检测方法与装置
CN104202683A (zh) * 2014-03-11 2014-12-10 无锡天脉聚源传媒科技有限公司 一种在点播流中获取节目的方法及装置
CN104166685A (zh) * 2014-07-24 2014-11-26 北京捷成世纪科技股份有限公司 一种检测视频片段的方法和装置
CN107534796A (zh) * 2015-03-17 2018-01-02 奈飞公司 检测视频节目的片段
CN106127680A (zh) * 2016-06-29 2016-11-16 深圳市优象计算技术有限公司 一种720度全景视频快速浏览方法
CN107864411A (zh) * 2017-10-31 2018-03-30 广东小天才科技有限公司 一种视频输出方法及终端设备
CN107977645A (zh) * 2017-12-19 2018-05-01 北京奇艺世纪科技有限公司 一种视频新闻海报图的生成方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
《新闻视频的场景分段索引及摘要生成》;姜帆、章毓晋;《计算机学报》;20030731;第26卷(第7期);第861页 *

Also Published As

Publication number Publication date
CN108769731A (zh) 2018-11-06

Similar Documents

Publication Publication Date Title
CN108769731B (zh) 一种检测视频中目标视频片段的方法、装置及电子设备
CN108924586B (zh) 一种视频帧的检测方法、装置及电子设备
KR100636910B1 (ko) 동영상검색시스템
JP5005154B2 (ja) 記憶媒体上に記憶された情報信号を再生する装置
JP4559935B2 (ja) 画像記憶装置及び方法
US20050228849A1 (en) Intelligent key-frame extraction from a video
WO2017114211A1 (zh) 用于对视频场景切换进行检测的方法和装置
JP4428424B2 (ja) 情報処理装置、情報処理方法、プログラムおよび記録媒体
US8068678B2 (en) Electronic apparatus and image processing method
JP2005513663A (ja) コマーシャル及び他のビデオ内容の検出用のファミリーヒストグラムに基づく技術
KR20030026529A (ko) 키프레임 기반 비디오 요약 시스템
US8718404B2 (en) Method for two-step temporal video registration
CN103152632B (zh) 一种多媒体节目的定位方法及装置
CN111753673A (zh) 一种视频数据的检测方法和装置
CN107169004B (zh) 一种特征数据库更新方法及装置
US20070061727A1 (en) Adaptive key frame extraction from video data
JP4333808B2 (ja) 映像の検索方法および装置
CN115665476B (zh) 一种录像分析方法、装置、电子设备及存储介质
CN116055816A (zh) 视频片头、片尾检测方法和设备
CN116028669A (zh) 一种基于短视频的视频搜索方法、装置、系统和存储介质
CN115080792A (zh) 一种视频关联方法、装置、电子设备及存储介质
JP2003224791A (ja) 映像の検索方法および装置
JP6091552B2 (ja) 動画処理装置及び動画処理システム
CN114385859A (zh) 一种面向视频内容的多模态检索方法
JP4853564B2 (ja) 情報処理装置、情報処理方法、プログラムおよび記録媒体

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant