CN112328973A - 一种通过人脸识别技术的影视版权监测比对方法 - Google Patents

Abstract

本发明公开了一种通过人脸识别技术的影视版权监测比对方法。它通过人脸识别技术，将作为样本的影视作品进行识别采样处理，再注册入库后，之后将通过网络监测途径或其他途径获取的取证视频片段，进一步进行识别处理比对，以确认取证视频和样本存在相似或者一致的情况，以此来维护影视作品版权的监测比对方法。本发明的有益效果是：采用关联文本信息及人脸识别等技术，在初期就可以对海量的比对数据进行排筛，之后再进一步精确比对，最后再提交结果经由人工审核复查，大大提高了比对效率和也同时提高了比对的精确度。

Description

一种通过人脸识别技术的影视版权监测比对方法

技术领域

本发明涉及视频处理相关技术领域，尤其是指一种通过人脸识别技术的影视版权监测比对方法。

背景技术

随着时代的发展，通过网络在视频网站观看视频内容已经成为了人们生活中的一部分。不少优秀的影视作品也通过网络平台的播放和传播，进一步推广影视作品的影响力。通常来说，影视作品在传统领域内的传播，主要有影院放映、电视台播放和音像制品出版三大途径，这些途径也有成熟的管理体系去维护和管理影视作品的版权。然而在新兴的网络环境下，影视作品的传播途径不断创新，著作权法规定的“信息网络传播权”难以将其完全覆盖。网络在为影视作品提供新的传播途径的同时，也在一定程度上导致影视作品网络侵权盗版的泛滥。

从侵权形式上看，除了少部分是直接以网络内容提供者身份提供侵权影视作品的直接侵权外，其余大量都是以网站视频分享、P2P软件上传下载、FTP局域网分享等形式存在。影视作品只有通过传播才能实现其价值，但前提是在合法正规的传播方式方法上。因此，建立网络环境下影视作品著作权相关法制体系，通过影视作品著作权保护制度以促进影视作品的传播和著作权的许可转让更显得必要和迫切。同时，有效的遏制并打击网络侵权盗版现象，监测并举证网络侵权盗版的行为，也是目前对影视作品维护自身权利最有利的方式之一。影视作品作为具有广泛影响力的文化产品，在网络环境下，应当得到合法、有序的传播，让影视作品的价值能够得到更好的体现。

发明内容

本发明是为了克服现有技术中存在上述的不足，提供了一种提高比对效率以及比对精准度的通过人脸识别技术的影视版权监测比对方法。

为了实现上述目的，本发明采用以下技术方案：

一种通过人脸识别技术的影视版权监测比对方法，具体包括如下步骤：

(1)在监测任务正式运行之前，需要先将作为监测比对样本的原始影视作品在系统中进行注册，将该影视作品样本的特征信息，以及通过录入系统时附带的影视作品文本信息，与后台数据库中的相关演员的样本进行比对关联，完成该影视作品样本的注册操作；

(2)在监测系统运行过程中，对视频网站播放的视频进行采样，通过人脸识别技术对采样视频内容提取特征信息，与之前影视作品注册的数据库中的特征信息进行比对，并按匹配度进行排序；

(3)通过人脸识别技术对出现频率最高的人物样本作为该监测样本的特征信息，和已注册样本中的特征信息比对，以确认取证视频和样本存在相似或者一致的情况，根据比对结果相似度排序，返回评估信息给人工审核处理。

本发明是通过人脸识别技术，将作为样本的影视作品进行识别采样处理，再注册入库后，之后将通过网络监测途径或其他途径获取的取证视频片段，进一步进行识别处理比对，以确认取证视频和样本存在相似或者一致的情况，以此来维护影视作品版权的监测比对方法。本方法在监测过程中，采用关联文本信息及人脸识别等技术，在初期就可以对海量的比对数据进行排筛，之后再进一步精确比对，最后再提交结果经由人工审核复查，大大提高了比对效率和也同时提高了比对的精确度。

作为优选，在步骤(1)中，具体操作方法如下：

(11)通过人脸识别技术对影视作品样本中出现人物进行识别并采样，并通过算法统计该作品中每个人物的出现频率；

(12)将该影视作品样本中出现频率最高的一定数量的人物识别信息，作为该影视作品样本的主要参与人员进行关联，并作为该影视作品样本的特征信息；

(13)通过录入系统时附带的影视作品文本信息，结合其中影视作品的主演人物信息，将这些人物样本与后台数据库中的相关演员的样本进行二次比对，并将结果比对最终的结果，作为该影视作品样本的最终特征信息，完成该影视作品样本的注册操作。

作为优选，所述的影视作品文本信息包含节目名称、节目名称的缩写、演员清单、节目内容介绍、节目的制作年份；影视作品的主演人物信息包含演员的姓名、照片、昵称、不同年份参演节目的清单。

作为优选，在步骤(2)中，具体操作方法如下：

(21)监测系统通过对添加到监测视频网站列表中的视频网站进行监测，并对这些视频网站播放的视频进行采样，获取后续用来识别比对的取证视频片段；

(22)通过结合该播放页面上的文本信息，以及通过人脸识别技术对采样视频内容进一步处理提取特征信息；

(23)将这些获取的文本信息、特征信息与之前影视作品注册的数据库中的特征信息进行初步的比对；

(24)从采样视频中采集到人物特征信息，以及页面抓取的文本信息，在注册数据库中进行初步筛选，通过算法返回待校验的影视作品清单，并按匹配度进行排序。

作为优选，在步骤(3)中，具体操作方法如下：

(31)通过人脸识别技术对取证视频片段样本中，按每个人物的出现频率进行统计，将该样本中出现频率最高的一定数量的人物样本作为该监测样本的特征信息；

(32)根据该特征信息和已注册样本中的特征信息进一步比对，以确认取证视频和样本存在相似或者一致的情况；

(33)根据该取证视频和对应的已注册视频样本的比对结果相似度按百分比估值并排序，返回评估信息给人工审核处理。

本发明的有益效果是：采用关联文本信息及人脸识别等技术，在初期就可以对海量的比对数据进行排筛，之后再进一步精确比对，最后再提交结果经由人工审核复查，大大提高了比对效率和也同时提高了比对的精确度。

附图说明

图1是本发明的方法流程图；

图2是注册流程图；

图3是监测流程图。

具体实施方式

下面结合附图和具体实施方式对本发明做进一步的描述。

如图1所述的实施例中，一种通过人脸识别技术的影视版权监测比对方法，具体包括如下步骤：

(1)在监测任务正式运行之前，需要先将作为监测比对样本的原始影视作品在系统中进行注册，将该影视作品样本的特征信息，以及通过录入系统时附带的影视作品文本信息，与后台数据库中的相关演员的样本进行比对关联，完成该影视作品样本的注册操作；如图2所示，具体操作方法如下：

(11)通过人脸识别技术对影视作品样本中出现人物进行识别并采样，并通过算法统计该作品中每个人物的出现频率；

(12)将该影视作品样本中出现频率最高的一定数量的人物识别信息，作为该影视作品样本的主要参与人员进行关联，并作为该影视作品样本的特征信息；

(13)通过录入系统时附带的影视作品文本信息，结合其中影视作品的主演人物信息，将这些人物样本与后台数据库中的相关演员的样本进行二次比对，并将结果比对最终的结果，作为该影视作品样本的最终特征信息，完成该影视作品样本的注册操作。影视作品文本信息包含节目名称、节目名称的缩写、演员清单、节目内容介绍、节目的制作年份等；影视作品的主演人物信息包含演员的姓名、照片、昵称、不同年份参演节目的清单等。

具体为：将需要注册的视频文件导入到系统中，系统按照间隔1秒的时间获取画面，并对画面内容进行识别是否存在人脸，不存在人脸的截取画面，该时间点标记人脸数为0，存在人脸截取画面，根据人脸的数量进行标记，也是就是识别到1个人脸，该时间点标记人脸数为1，识别到2个人脸，该时间点标记人脸数为2，以此类推，同时对识别出来的人脸进行分类统计，将识别结果相同的人脸，进行计数，统计最终各个人脸出现的频次，并通过人脸识别和系统中导入的演员库的信息进一步做校验对比。根据该视频中出现频率最高的10个人物，按照同时检测到2-3个人脸的场景及持续的时间，作为视频的特征信息片段，并且，将这些视频片段截取固定长度的一段，提取特征信息，作为后续比对的依据。

(2)在监测系统运行过程中，对视频网站播放的视频进行采样，通过人脸识别技术对采样视频内容提取特征信息，与之前影视作品注册的数据库中的特征信息进行比对，并按匹配度进行排序；如图3所示，具体操作方法如下：

(21)监测系统通过对添加到监测视频网站列表中的视频网站进行监测，并对这些视频网站播放的视频进行采样，获取后续用来识别比对的取证视频片段；

(22)通过结合该播放页面上的文本信息，以及通过人脸识别技术对采样视频内容进一步处理提取特征信息；

(23)将这些获取的文本信息、特征信息与之前影视作品注册的数据库中的特征信息进行初步的比对；

(24)从采样视频中采集到人物特征信息，以及页面抓取的文本信息，在注册数据库中进行初步筛选，通过算法返回待校验的影视作品清单，并按匹配度进行排序。

具体为：通过前端从视频网站中抓取的取证视频，导入系统中，和注册流程类似，按照间隔1秒的时间获取画面，并对画面内容进行识别是否存在人脸，不存在人脸的截取画面，该时间点标记人脸数为0，存在人脸截取画面，根据人脸的数量进行标记，也是就是识别到1个人脸，该时间点标记人脸数为1，识别到2个人脸，该时间点标记人脸数为2，以此类推，同时对识别出来的人脸进行分类统计，将识别结果相同的人脸，进行计数，统计最终各个人脸出现的频次，并通过人脸识别和系统中导入的演员库的信息进一步做校验对比。根据识别的结果，取证视频会输出一个参演人员清单，根据人脸出现的频次，获取最高的5人，并将这个参演人员组合和已注册的视频素材参演演员进行对比，如果取证视频的参演人员清单，是其中一些注册的视频素材参演演员清单的子集，那么该取证视频和已注册的视频素材相关性就比较明显，可以后续进一步精细比对。通过参演人员相似度的初步筛选，可以大大缩小视频比对的校验比对数量。

(3)通过人脸识别技术对出现频率最高的人物样本作为该监测样本的特征信息，和已注册样本中的特征信息比对，以确认取证视频和样本存在相似或者一致的情况，根据比对结果相似度排序，返回评估信息给人工审核处理；具体操作方法如下：

(31)通过人脸识别技术对取证视频片段样本中，按每个人物的出现频率进行统计，将该样本中出现频率最高的一定数量的人物样本作为该监测样本的特征信息；

(32)根据该特征信息和已注册样本中的特征信息进一步比对，以确认取证视频和样本存在相似或者一致的情况；

(33)根据该取证视频和对应的已注册视频样本的比对结果相似度按百分比估值并排序，返回评估信息给人工审核处理。

具体为：精细校验过程中，按照同时检测到2-3个人脸的场景及持续的时间，作为视频的特征信息，并且，将这些视频片段截取固定长度的一段，提取特性信息，将这些特征信息和前一步中比对相似度较高的已注册视频的特征库中的特征信息，进行二次比对，在出现雷同的特征情况下，再根据视频播放的顺序，将之后特征按时序进一步一对一比对，正常来说，之后3-5个特征库比对匹配，就可以认为取证视频和已注册视频是相同的。

从技术上来说，比对识别系统的识别能力的强弱依赖于所使用的比对识别技术，本系统中主要涉及2部分的识别比对能力，1是使用人脸识别技术，从注册视频样本文件以及取证视频文件中识别出人脸，并和实际的演员，也就是自然人进行比对。2是特征样本的获取和识别，在本系统中，使用方案是将多个关键人物同时存在的场景，作为关键场景，并截取固定长度，通过算法获取该片段的特征信息，比通过这些特征信息，作为已注册样本和取证样本比对的基础。后续仍可以采用其他识别更高效的方案，进一步增强本系统的识别能力，使其更好的返回应有的作用。

基于人脸比对识别，规避了视频重新转码后，导致画面分辨率，清晰度等改变对视频的识别直接的影响，该方案通过视频的内容，也就是人物及其组合，以及人物出现的频次的方式，作为特征信息，并且通过人物识别技术，对比对池进行初步筛选再精细比对，大大提高了比对的效率和精确度。

由于使用人脸识别技术，所有该发明目前只能针对自然人所参与的影视作品的版权监测，也就是由自然人参与的电影，电视剧，综艺，歌剧，戏剧等影视作品，对于动画，卡通等非自然人的影视作品无法进行识别的，无法使用该方法进行版权的维护。由于本方法基于文本信息，以及人脸识别等技术，在初期就可以对海量的比对数据进行排筛，大大提高了比对效率和提高了精确度。

本发明是通过人脸识别技术，将作为样本的影视作品进行识别采样处理，再注册入库后，之后将通过网络监测途径或其他途径获取的取证视频片段，进一步进行识别处理比对，以确认取证视频和样本存在相似或者一致的情况，以此来维护影视作品版权的监测比对方法。本方法在监测过程中，采用关联文本信息及人脸识别等技术，在初期就可以对海量的比对数据进行排筛，之后再进一步精确比对，最后再提交结果经由人工审核复查，大大提高了比对效率和也同时提高了比对的精确度。

Claims (5)

1.一种通过人脸识别技术的影视版权监测比对方法，其特征是，具体包括如下步骤：

(1)在监测任务正式运行之前，需要先将作为监测比对样本的原始影视作品在系统中进行注册，将该影视作品样本的特征信息，以及通过录入系统时附带的影视作品文本信息，与后台数据库中的相关演员的样本进行比对关联，完成该影视作品样本的注册操作；

(2)在监测系统运行过程中，对视频网站播放的视频进行采样，通过人脸识别技术对采样视频内容提取特征信息，与之前影视作品注册的数据库中的特征信息进行比对，并按匹配度进行排序；

(3)通过人脸识别技术对出现频率最高的人物样本作为该监测样本的特征信息，和已注册样本中的特征信息比对，以确认取证视频和样本存在相似或者一致的情况，根据比对结果相似度排序，返回评估信息给人工审核处理。

2.根据权利要求1所述的一种通过人脸识别技术的影视版权监测比对方法，其特征是，在步骤(1)中，具体操作方法如下：

(11)通过人脸识别技术对影视作品样本中出现人物进行识别并采样，并通过算法统计该作品中每个人物的出现频率；

(12)将该影视作品样本中出现频率最高的一定数量的人物识别信息，作为该影视作品样本的主要参与人员进行关联，并作为该影视作品样本的特征信息；

(13)通过录入系统时附带的影视作品文本信息，结合其中影视作品的主演人物信息，将这些人物样本与后台数据库中的相关演员的样本进行二次比对，并将结果比对最终的结果，作为该影视作品样本的最终特征信息，完成该影视作品样本的注册操作。

3.根据权利要求2所述的一种通过人脸识别技术的影视版权监测比对方法，其特征是，所述的影视作品文本信息包含节目名称、节目名称的缩写、演员清单、节目内容介绍、节目的制作年份；影视作品的主演人物信息包含演员的姓名、照片、昵称、不同年份参演节目的清单。

4.根据权利要求2或3所述的一种通过人脸识别技术的影视版权监测比对方法，其特征是，在步骤(2)中，具体操作方法如下：

(21)监测系统通过对添加到监测视频网站列表中的视频网站进行监测，并对这些视频网站播放的视频进行采样，获取后续用来识别比对的取证视频片段；

(22)通过结合该播放页面上的文本信息，以及通过人脸识别技术对采样视频内容进一步处理提取特征信息；

(23)将这些获取的文本信息、特征信息与之前影视作品注册的数据库中的特征信息进行初步的比对；

(24)从采样视频中采集到人物特征信息，以及页面抓取的文本信息，在注册数据库中进行初步筛选，通过算法返回待校验的影视作品清单，并按匹配度进行排序。

5.根据权利要求4所述的一种通过人脸识别技术的影视版权监测比对方法，其特征是，在步骤(3)中，具体操作方法如下：

(31)通过人脸识别技术对取证视频片段样本中，按每个人物的出现频率进行统计，将该样本中出现频率最高的一定数量的人物样本作为该监测样本的特征信息；

(32)根据该特征信息和已注册样本中的特征信息进一步比对，以确认取证视频和样本存在相似或者一致的情况；

(33)根据该取证视频和对应的已注册视频样本的比对结果相似度按百分比估值并排序，返回评估信息给人工审核处理。

Images