CN106127106A - 视频中目标人物查找方法和装置 - Google Patents

视频中目标人物查找方法和装置 Download PDF

Info

Publication number
CN106127106A
CN106127106A CN201610420075.4A CN201610420075A CN106127106A CN 106127106 A CN106127106 A CN 106127106A CN 201610420075 A CN201610420075 A CN 201610420075A CN 106127106 A CN106127106 A CN 106127106A
Authority
CN
China
Prior art keywords
target person
template
field picture
video
name
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610420075.4A
Other languages
English (en)
Inventor
麦涛
张腾
张旭
王磊
朱志华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Neusoft Corp
Original Assignee
Neusoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Neusoft Corp filed Critical Neusoft Corp
Priority to CN201610420075.4A priority Critical patent/CN106127106A/zh
Publication of CN106127106A publication Critical patent/CN106127106A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/41Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/46Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames

Abstract

本发明公开了一种视频中目标人物查找方法和装置,其中,视频中目标人物查找方法包括:接收目标人物信息和待检查视频,目标人物信息包括目标人物的姓名和/或照片;根据目标人物信息确定目标人物对应的模板;将待检查视频切分为多个关键帧图像;基于人脸识别算法从多个关键帧图像中筛选出多个包含人脸的帧图像;根据模板确定多个包含人脸的帧图像中包含目标人物的帧图像,并获取包含目标人物的帧图像在待检查视频中的时间信息。本发明实施例的视频中目标人物查找方法和装置,能够快速、方便地查找出视频中敏感人物,提高了识别效率。

Description

视频中目标人物查找方法和装置
技术领域
本发明涉及计算机技术领域,尤其涉及一种视频中目标人物查找方法和装置。
背景技术
电视台在制作节目时,通常会利用到一些历史素材。对于政治类的视频节目,在播出前需要进行节目审核。如果审核出视频中出现了敏感人物,该视频时不允许被播放的。目前,主要通过专门的节目审核人员对视频进行人工审核,费时费力,工作效率低。且视频素材数据量大,可能只有一个镜头出现了敏感任务,在人工审核时很容易漏掉该镜头。虽然可以利用图像识别技术对敏感人物进行识别,但是只能识别正面的人脸,并且识别速度慢,效率低。
发明内容
本发明旨在至少在一定程度上解决相关技术中的技术问题之一。为此,本发明的一个目的在于提出一种视频中目标人物查找方法,能够快速、方便地查找出视频中敏感人物,提高识别效率。
本发明的第二个目的在于提出一种视频中目标人物查找装置。
为了实现上述目的,本发明第一方面实施例提出了一种视频中目标人物查找方法,包括:接收目标人物信息和待检查视频,所述目标人物信息包括目标人物的姓名和/或照片;根据所述目标人物信息确定所述目标人物对应的模板;将所述待检查视频切分为多个关键帧图像;基于人脸识别算法从所述多个关键帧图像中筛选出多个包含人脸的帧图像;根据所述模板确定所述多个包含人脸的帧图像中包含目标人物的帧图像,并获取所述包含目标人物的帧图像在所述待检查视频中的时间信息。
本发明实施例的视频中目标人物查找方法,通过接收的目标人物信息确定目标人物对应的模板,再将待检查视频切分为多个关键帧图像,并基于人脸识别算法从多个关键帧图像中筛选出多个包含人脸的帧图像,以及根据模板确定多个包含人脸的帧图像中包含目标人物的帧图像,并获取包含目标人物的帧图像在待检查视频中的时间信息,能够快速、方便地查找出视频中敏感人物,提高了识别效率。
本发明第二方面实施例提出了一种视频中目标人物查找装置,包括:接收模块,用于接收目标人物信息和待检查视频,所述目标人物信息包括目标人物的姓名和/或照片;确定模块,用于根据所述目标人物信息确定所述目标人物对应的模板;切分模块,用于将所述待检查视频切分为多个关键帧图像;筛选模块,用于基于人脸识别算法从所述多个关键帧图像中筛选出多个包含人脸的帧图像;获取模块,用于根据所述模板确定所述多个包含人脸的帧图像中包含目标人物的帧图像,并获取所述包含目标人物的帧图像在所述待检查视频中的时间信息。
本发明实施例的视频中目标人物查找装置,通过接收的目标人物信息确定目标人物对应的模板,再将待检查视频切分为多个关键帧图像,并基于人脸识别算法从多个关键帧图像中筛选出多个包含人脸的帧图像,以及根据模板确定多个包含人脸的帧图像中包含目标人物的帧图像,并获取包含目标人物的帧图像在待检查视频中的时间信息,能够快速、方便地查找出视频中敏感人物,提高了识别效率。
附图说明
图1是根据本发明一个实施例的视频中目标人物查找方法的流程图;
图2是根据本发明另一个实施例的视频中目标人物查找方法的流程图;
图3是根据本发明又一个实施例的视频中目标人物查找方法的流程图;
图4是根据本发明一个实施例的视频中目标人物查找装置的结构示意图一;
图5是根据本发明一个实施例的视频中目标人物查找装置的结构示意图二;
图6是根据本发明另一个实施例的视频中目标人物查找装置的结构示意图;
图7是根据本发明又一个实施例的视频中目标人物查找装置的结构示意图。
具体实施方式
下面详细描述本发明的实施例,实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本发明,而不能理解为对本发明的限制。
下面参考附图描述本发明实施例的视频中目标人物查找方法和装置。
图1是根据本发明一个实施例的视频中目标人物查找方法的流程图。
如图1所示,视频中目标人物查找方法可包括:
S1,接收目标人物信息和待检查视频。
其中,目标人物信息可以是目标人物的姓名,也可以是目标人物的照片。当然,也可以是两者的组合。待检查视频的文件格式可包括mp4、avi、rm、rmvb、flv等视频格式。
举例来说,审核人员想检查某一mp4视频中是否含有敏感人物张xx和王xx,可直接输入张xx和王xx的姓名作为检索条件。如果审核人员不知道敏感人物的名字,则可输入敏感人物张xx和王xx对应的照片作为检索条件。
S2,根据目标人物信息确定目标人物对应的模板。
具体地,当目标人物信息为姓名时,可从预先建立的模板库中获取与姓名对应的模板,然后展示与姓名对应的模板。审核人员在查看到展示的模板后,可选择目标人物对应的模板。举例来说,审核人员在输入目标人物的姓名张xx后,可能有很多人物的姓名都是张xx。此时,可从模板库中检索出所有姓名为张xx的模板,将这些模板提供给审核人员。该模板包含有人物多个角度的样本图片,由审核人员选择确认目标人物张xx对应的模板,因此可避免重名的问题。
另外,当目标人物信息为照片时,可计算照片与模板库中模板的第一相似度,然后可根据第一相似度获取与目标人物对应的模板。举例来说,审核人员输入了一张目标人物的照片,可将该照片与模板库中的模板进行匹配。由于模板中包含有人物多个角度的样本图片,因此可依次计算该照片与样本图片的相似度。获取相似度得分最高的样本图片对应的模板,即与照片最相似的样本图片对应的模板作为目标人物的模板。
其中,模板库为预先建立的。具体地,可获取人物多个角度的样本图片,基于多个角度的样本图片建立模板库。例如:对于敏感人物张xx,可获取张xx正面、左右侧面45度、左右侧面30度、仰视、俯视等多个角度的样本图片,基于这些样本图片对敏感人物张xx进行多角度建模,从而生成张xx对应的模板,保存至模板库中。
S3,将待检查视频切分为多个关键帧图像。
具体地,可将待检查视频切分为多个关键帧图像。在本发明的一个实施例中,可以根据视频的长度来切分关键帧图像,例如视频长度为60秒,可以以1秒或2秒截取关键帧图像。
S4,基于人脸识别算法从多个关键帧图像中筛选出多个包含人脸的帧图像。
在切分得到多个关键帧图像之后,可采用基于OpenGL人脸识别库的算法从多个关键帧图像中筛选出多个包含人脸的帧图像,从而过滤掉不包含人脸的帧图像,提高识别效率。其中,OpenGL是一个开源的图像识别库,可以用于进行人脸识别。
S5,根据模板确定多个包含人脸的帧图像中包含目标人物的帧图像,并获取包含目标人物的帧图像在待检查视频中的时间信息。
具体地,可提取包含人脸的帧图像的第一图像特征和目标人物对应的模板的第二图像特征,然后可计算第一图像特征和第二图像特征的第二相似度。当第二相似度大于预设阈值时,则可确定包含人脸的帧图像为包含目标人物的帧图像。在此之后,可获取包含目标人物的帧图像在待检查视频中的时间信息。例如:某一视频长度为15分钟,以每2秒为一帧切分出多个关键帧图像。由此,可知每个关键帧图像对应的时间信息。假设第一张关键帧图像在2秒处,则第二张关键帧图像在4秒处,以此类推。其中,有些关键帧图像是包含人脸的,通过上述方法检测出包含目标人物张xx的帧图像。然后可确定该帧图像在视频的10分20秒处。
本发明实施例的视频中目标人物查找方法,通过接收的目标人物信息确定目标人物对应的模板,再将待检查视频切分为多个关键帧图像,并基于人脸识别算法从多个关键帧图像中筛选出多个包含人脸的帧图像,以及根据模板确定多个包含人脸的帧图像中包含目标人物的帧图像,并获取包含目标人物的帧图像在待检查视频中的时间信息,能够快速、方便地查找出视频中敏感人物,提高了识别效率。
图2是根据本发明另一个实施例的视频中目标人物查找方法的流程图。
如图2所示,视频中目标人物查找方法可包括:
S1,接收目标人物信息和待检查视频。
S2,根据目标人物信息确定目标人物对应的模板。
S3,将待检查视频切分为多个关键帧图像。
S4,基于人脸识别算法从多个关键帧图像中筛选出多个包含人脸的帧图像。
S5,根据模板确定多个包含人脸的帧图像中包含目标人物的帧图像,并获取包含目标人物的帧图像在待检查视频中的时间信息。
应当理解的是,步骤S1至S5与上一实施例中的步骤S1至S5描述一致,故本实施例中不再赘述。
S6,屏蔽包含目标人物的帧图像中的人脸部分。
在获取包含目标人物的帧图像及其在待检查视频中的时间信息之后,可对该帧图像进行处理,即屏蔽掉该帧图像中目标人物的人脸部分,例如在人脸部分加入马赛克,从而遮挡住目标人物的人脸,避免在播放视频时,出现该目标人物。
本发明实施例的视频中目标人物查找方法,通过在获取包含目标人物的帧图像及其在待检查视频中的时间信息之后,屏蔽掉该帧图像中目标人物的人脸部分,从而避免在播放视频时,显示出敏感人物的情况。
图3是根据本发明又一个实施例的视频中目标人物查找方法的流程图。
如图3所示,视频中目标人物查找方法可包括:
S1,接收目标人物信息和待检查视频。
S2,根据目标人物信息确定目标人物对应的模板。
S3,将待检查视频切分为多个关键帧图像。
S4,基于人脸识别算法从多个关键帧图像中筛选出多个包含人脸的帧图像。
S5,根据模板确定多个包含人脸的帧图像中包含目标人物的帧图像,并获取包含目标人物的帧图像在待检查视频中的时间信息。
S6,屏蔽包含目标人物的帧图像中的人脸部分。
应当理解的是,步骤S1至S6与上一实施例中的步骤S1至S6描述一致,故本实施例中不再赘述。
S7,基于OCR技术识别出包含目标人物的帧图像中的文字信息。
在屏蔽掉包含目标人物的帧图像中的人脸部分之后,还可基于OCR(OpticalCharacter Recognition,光学字符识别)技术识别出包含目标人物的帧图像中的文字信息。这样做的目的在于:虽然敏感人物的人脸部分被屏蔽掉了,但是仍有可能出现该敏感人物的姓名的情况。例如:该敏感人物在参加会议,座位上摆放该敏感人物的姓名牌。因此,只屏蔽掉敏感人物的人脸部分是不够的,还需要对姓名部分进行进一步的处理。S8,利用NLP自然语言处理技术,并根据预设的姓名库判断文字信息是否为目标人物的姓名。
S8,利用NLP自然语言处理技术,并根据预设的姓名库判断文字信息是否为目标人物的姓名。
具体地,可利用NLP(Natural Language Processing,自然语言处理技术)对识别出的文字信息进行处理,然后可根据预设的姓名库判断识别出的文字信息是否为目标人物的姓名。例如,预设的姓名库可以是敏感人物的姓名集合。
S9,如果文字信息是目标人物的姓名,则屏蔽文字信息。
例如:帧图像中敏感人物张xx的人脸部分被马赛克遮挡,与其对应的姓名牌的部分也应一起被遮挡,从而避免敏感信息被播放。
本发明实施例的视频中目标人物查找方法,通过屏蔽包含目标人物的帧图像中与目标人物对应的姓名,可进一步避免敏感信息被播放的问题。
为实现上述目的,本发明还提出一种视频中目标人物查找装置。
图4是根据本发明一个实施例的视频中目标人物查找装置的结构示意图一。
如图4所示,视频中目标人物查找装置可包括:接收模块110、确定模块120、切分模块130、筛选模块140和获取模块150。
接收模块110用于接收目标人物信息和待检查视频。
其中,目标人物信息可以是目标人物的姓名,也可以是目标人物的照片。当然,也可以是两者的组合。待检查视频的文件格式可包括mp4、avi、rm、rmvb、flv等视频格式。
举例来说,审核人员想检查某一mp4视频中是否含有敏感人物张xx和王xx,可直接输入张xx和王xx的姓名作为检索条件。如果审核人员不知道敏感人物的名字,则可输入敏感人物张xx和王xx对应的照片作为检索条件。
确定模块120用于根据目标人物信息确定目标人物对应的模板。具体地,当目标人物信息为姓名时,可从预先建立的模板库中获取与姓名对应的模板,然后展示与姓名对应的模板。审核人员在查看到展示的模板后,可选择目标人物对应的模板。举例来说,审核人员在输入目标人物的姓名张xx后,可能有很多人物的姓名都是张xx。此时,可从模板库中检索出所有姓名为张xx的模板,将这些模板提供给审核人员。该模板包含有人物多个角度的样本图片,由审核人员选择确认目标人物张xx对应的模板,因此可避免重名的问题。
另外,当目标人物信息为照片时,可计算照片与模板库中模板的第一相似度,然后可根据第一相似度获取与目标人物对应的模板。举例来说,审核人员输入了一张目标人物的照片,可将该照片与模板库中的模板进行匹配。由于模板中包含有人物多个角度的样本图片,因此可依次计算该照片与样本图片的相似度。获取相似度得分最高的样本图片对应的模板,即与照片最相似的样本图片对应的模板作为目标人物的模板。
切分模块130用于将待检查视频切分为多个关键帧图像。具体地,可将待检查视频切分为多个关键帧图像。在本发明的一个实施例中,可以根据视频的长度来切分关键帧图像,例如视频长度为60秒,可以以1秒或2秒截取关键帧图像。
筛选模块140用于基于人脸识别算法从多个关键帧图像中筛选出多个包含人脸的帧图像。在切分得到多个关键帧图像之后,可采用基于OpenGL人脸识别库的算法从多个关键帧图像中筛选出多个包含人脸的帧图像,从而过滤掉不包含人脸的帧图像,提高识别效率。其中,OpenGL是一个开源的图像识别库,可以用于进行人脸识别。
获取模块150用于根据模板确定多个包含人脸的帧图像中包含目标人物的帧图像,并获取包含目标人物的帧图像在待检查视频中的时间信息。
具体地,可提取包含人脸的帧图像的第一图像特征和目标人物对应的模板的第二图像特征,然后可计算第一图像特征和第二图像特征的第二相似度。当第二相似度大于预设阈值时,则可确定包含人脸的帧图像为包含目标人物的帧图像。在此之后,可获取包含目标人物的帧图像在待检查视频中的时间信息。例如:某一视频长度为15分钟,以每2秒为一帧切分出多个关键帧图像。由此,可知每个关键帧图像对应的时间信息。假设第一张关键帧图像在2秒处,则第二张关键帧图像在4秒处,以此类推。其中,有些关键帧图像是包含人脸的,通过上述方法检测出包含目标人物张xx的帧图像。然后可确定该帧图像在视频的10分20秒处。
此外,如图5所示,视频中目标人物查找装置还可包括建立模块160。
建立模块160用于获取人物多个角度的样本图片,基于多个角度的样本图片建立模板库。例如:对于敏感人物张xx,可获取张xx正面、左右侧面45度、左右侧面30度、仰视、俯视等多个角度的样本图片,基于这些样本图片对敏感人物张xx进行多角度建模,从而生成张xx对应的模板,保存至模板库中。
本发明实施例的视频中目标人物查找装置,通过接收的目标人物信息确定目标人物对应的模板,再将待检查视频切分为多个关键帧图像,并基于人脸识别算法从多个关键帧图像中筛选出多个包含人脸的帧图像,以及根据模板确定多个包含人脸的帧图像中包含目标人物的帧图像,并获取包含目标人物的帧图像在待检查视频中的时间信息,能够快速、方便地查找出视频中敏感人物,提高了识别效率。
图6是根据本发明另一个实施例的视频中目标人物查找装置的结构示意图。
如图6所示,视频中目标人物查找装置可包括:接收模块110、确定模块120、切分模块130、筛选模块140、获取模块150、建立模块160和屏蔽模块170。
其中,接收模块110、确定模块120、切分模块130、筛选模块140、获取模块150、建立模块160与上一实施例的描述一致,此处不赘述。
屏蔽模块170用于屏蔽包含目标人物的帧图像中的人脸部分。在获取包含目标人物的帧图像及其在待检查视频中的时间信息之后,可对该帧图像进行处理,即屏蔽掉该帧图像中目标人物的人脸部分,例如在人脸部分加入马赛克,从而遮挡住目标人物的人脸,避免在播放视频时,出现该目标人物。
本发明实施例的视频中目标人物查找装置,通过在获取包含目标人物的帧图像及其在待检查视频中的时间信息之后,屏蔽掉该帧图像中目标人物的人脸部分,从而避免在播放视频时,显示出敏感人物的情况。
图7是根据本发明又一个实施例的视频中目标人物查找装置的结构示意图。
如图7所示,视频中目标人物查找装置可包括:接收模块110、确定模块120、切分模块130、筛选模块140、获取模块150、建立模块160、屏蔽模块170、识别模块180和判断模块190。
其中,接收模块110、确定模块120、切分模块130、筛选模块140、获取模块150、建立模块160与上一实施例的描述一致,此处不赘述。
识别模块180用于基于OCR技术识别出包含目标人物的帧图像中的文字信息。在屏蔽掉包含目标人物的帧图像中的人脸部分之后,可基于OCR(Optical CharacterRecognition,光学字符识别)技术识别出包含目标人物的帧图像中的文字信息。这样做的目的在于:虽然敏感人物的人脸部分被屏蔽掉了,但是仍有可能出现该敏感人物的姓名的情况。例如:该敏感人物在参加会议,座位上摆放该敏感人物的姓名牌。因此,只屏蔽掉敏感人物的人脸部分是不够的,还需要对姓名部分进行进一步的处理。
判断模块190用于利用NLP自然语言处理技术,并根据预设的姓名库判断文字信息是否为目标人物的姓名。具体地,可利用NLP(Natural Language Processing,自然语言处理技术)对识别出的文字信息进行处理,然后可根据预设的姓名库判断识别出的文字信息是否为目标人物的姓名。例如,预设的姓名库可以是敏感人物的姓名集合。
屏蔽模块170用于当文字信息确认是目标人物的姓名时,屏蔽文字信息。例如:帧图像中敏感人物张xx的人脸部分被马赛克遮挡,与其对应的姓名牌的部分也应一起被遮挡,从而避免敏感信息被播放。
本发明实施例的视频中目标人物查找装置,通过屏蔽包含目标人物的帧图像中与目标人物对应的姓名文字信息,可进一步避免敏感信息被播放的问题。
在本发明的描述中,需要理解的是,术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”、“顺时针”、“逆时针”、“轴向”、“径向”、“周向”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
在本发明中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或成一体;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通或两个元件的相互作用关系,除非另有明确的限定。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明中的具体含义。
在本发明中,除非另有明确的规定和限定,第一特征在第二特征“上”或“下”可以是第一和第二特征直接接触,或第一和第二特征通过中间媒介间接接触。而且,第一特征在第二特征“之上”、“上方”和“上面”可是第一特征在第二特征正上方或斜上方,或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”可以是第一特征在第二特征正下方或斜下方,或仅仅表示第一特征水平高度小于第二特征。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
尽管上面已经示出和描述了本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (14)

1.一种视频中目标人物查找方法,其特征在于,包括以下步骤:
接收目标人物信息和待检查视频,所述目标人物信息包括目标人物的姓名和/或照片;
根据所述目标人物信息确定所述目标人物对应的模板;
将所述待检查视频切分为多个关键帧图像;
基于人脸识别算法从所述多个关键帧图像中筛选出多个包含人脸的帧图像;
根据所述模板确定所述多个包含人脸的帧图像中包含目标人物的帧图像,并获取所述包含目标人物的帧图像在所述待检查视频中的时间信息。
2.如权利要求1所述的方法,其特征在于,根据所述目标人物信息确定目标人物对应的模板,包括:
当所述目标人物信息为姓名时,从预先建立的模板库中获取与所述姓名对应的模板;
展示与所述姓名对应的模板;
接收用户的选择操作,确定与所述目标人物对应的模板。
3.如权利要求1所述的方法,其特征在于,根据所述目标人物信息确定目标人物对应的模板,还包括:
当所述目标人物信息为照片时,计算所述照片与所述模板库中模板的第一相似度;
根据所述第一相似度获取与所述目标人物对应的模板。
4.如权利要求2所述的方法,其特征在于,建立所述模板库,包括:
获取人物多个角度的样本图片,基于所述多个角度的样本图片建立所述模板库。
5.如权利要求1所述的方法,其特征在于,还包括:
屏蔽所述包含目标人物的帧图像中的人脸部分。
6.如权利要求5所述的方法,其特征在于,还包括:
基于OCR技术识别出所述包含目标人物的帧图像中的文字信息;
利用NLP自然语言处理技术,并根据预设的姓名库判断所述文字信息是否为所述目标人物的姓名;
如果所述文字信息是所述目标人物的姓名,则屏蔽所述文字信息。
7.如权利要求1所述的方法,其特征在于,根据所述模板确定所述多个包含人脸的帧图像中包含目标人物的帧图像,包括:
提取包含人脸的帧图像的第一图像特征和所述目标人物对应的模板的第二图像特征;
计算所述第一图像特征和所述第二图像特征的第二相似度;
当所述第二相似度大于预设阈值时,确定所述包含人脸的帧图像为包含目标人物的帧图像。
8.一种视频中目标人物查找装置,其特征在于,包括:
接收模块,用于接收目标人物信息和待检查视频,所述目标人物信息包括目标人物的姓名和/或照片;
确定模块,用于根据所述目标人物信息确定所述目标人物对应的模板;
切分模块,用于将所述待检查视频切分为多个关键帧图像;
筛选模块,用于基于人脸识别算法从所述多个关键帧图像中筛选出多个包含人脸的帧图像;
获取模块,用于根据所述模板确定所述多个包含人脸的帧图像中包含目标人物的帧图像,并获取所述包含目标人物的帧图像在所述待检查视频中的时间信息。
9.如权利要求8所述的装置,其特征在于,所述确定模块,用于:
当所述目标人物信息为姓名时,从预先建立的模板库中获取与所述姓名对应的模板;
展示与所述姓名对应的模板;
接收用户的选择操作,确定与所述目标人物对应的模板。
10.如权利要求8所述的装置,其特征在于,所述确定模块,还用于:
当所述目标人物信息为照片时,计算所述照片与所述模板库中模板的第一相似度;
根据所述第一相似度获取与所述目标人物对应的模板。
11.如权利要求9所述的装置,其特征在于,还包括:
建立模块,用于获取人物多个角度的样本图片,基于所述多个角度的样本图片建立所述模板库。
12.如权利要求8所述的装置,其特征在于,还包括:
屏蔽模块,用于屏蔽所述包含目标人物的帧图像中的人脸部分。
13.如权利要求12所述的装置,其特征在于,还包括:
识别模块,用于基于OCR技术识别出所述包含目标人物的帧图像中的文字信息;
判断模块,用于利用NLP自然语言处理技术,并根据预设的姓名库判断所述文字信息是否为所述目标人物的姓名;
所述屏蔽模块,还用于当所述文字信息是目标人物的姓名时,屏蔽所述文字信息。
14.如权利要求8所述的装置,其特征在于,所述获取模块,用于:
提取包含人脸的帧图像的第一图像特征和所述目标人物对应的模板的第二图像特征;
计算所述第一图像特征和所述第二图像特征的第二相似度;
当所述第二相似度大于预设阈值时,确定所述包含人脸的帧图像为包含目标人物的帧图像。
CN201610420075.4A 2016-06-13 2016-06-13 视频中目标人物查找方法和装置 Pending CN106127106A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610420075.4A CN106127106A (zh) 2016-06-13 2016-06-13 视频中目标人物查找方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610420075.4A CN106127106A (zh) 2016-06-13 2016-06-13 视频中目标人物查找方法和装置

Publications (1)

Publication Number Publication Date
CN106127106A true CN106127106A (zh) 2016-11-16

Family

ID=57270027

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610420075.4A Pending CN106127106A (zh) 2016-06-13 2016-06-13 视频中目标人物查找方法和装置

Country Status (1)

Country Link
CN (1) CN106127106A (zh)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106778645A (zh) * 2016-12-24 2017-05-31 深圳云天励飞技术有限公司 一种图像处理方法及装置
CN107341443A (zh) * 2017-05-23 2017-11-10 深圳云天励飞技术有限公司 视频处理方法、装置及存储介质
CN107358146A (zh) * 2017-05-22 2017-11-17 深圳云天励飞技术有限公司 视频处理方法、装置及存储介质
CN107609104A (zh) * 2017-09-12 2018-01-19 中广热点云科技有限公司 根据视频图像素材查找相关视频的方法和系统
CN108271069A (zh) * 2017-12-11 2018-07-10 北京奇艺世纪科技有限公司 一种视频节目的片段过滤方法和装置
CN108471543A (zh) * 2018-03-12 2018-08-31 北京搜狐新媒体信息技术有限公司 一种宣传信息添加方法及装置
WO2018210039A1 (zh) * 2017-05-18 2018-11-22 深圳云天励飞技术有限公司 数据处理方法、数据处理装置及存储介质
CN108924491A (zh) * 2018-07-04 2018-11-30 深圳市商汤科技有限公司 视频流处理方法及装置、电子设备和存储介质
CN108932254A (zh) * 2017-05-25 2018-12-04 中兴通讯股份有限公司 一种相似视频的检测方法、设备、系统及存储介质
CN109190454A (zh) * 2018-07-17 2019-01-11 北京新唐思创教育科技有限公司 用于识别视频中的目标人物的方法、装置、设备及介质
CN109241345A (zh) * 2018-10-10 2019-01-18 百度在线网络技术(北京)有限公司 基于人脸识别的视频定位方法和装置
CN109615660A (zh) * 2018-11-21 2019-04-12 吉利汽车研究院(宁波)有限公司 对车辆全景画面进行标定的方法及装置
WO2019076187A1 (zh) * 2017-10-16 2019-04-25 杭州海康威视数字技术股份有限公司 视频遮蔽区域选取方法、装置、电子设备及系统
CN110163043A (zh) * 2018-05-18 2019-08-23 腾讯科技(深圳)有限公司 面部检测方法、装置、存储介质及电子装置
CN110876092A (zh) * 2018-09-04 2020-03-10 杭州海康威视数字技术股份有限公司 视频摘要生成方法、装置、电子设备及可读存储介质
CN111625687A (zh) * 2020-07-30 2020-09-04 南京讯思雅信息科技有限公司 一种在媒资视频库中通过人脸快速搜索人物的方法及系统
CN111783507A (zh) * 2019-07-24 2020-10-16 北京京东尚科信息技术有限公司 目标搜索方法、装置及计算机可读存储介质
CN112801004A (zh) * 2021-02-05 2021-05-14 网易(杭州)网络有限公司 视频片段的筛选方法、装置、设备及存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1492379A (zh) * 2002-10-22 2004-04-28 中国科学院计算技术研究所 利用快速人脸检测对新闻被采访者进行脸部遮挡的方法
CN101021857A (zh) * 2006-10-20 2007-08-22 鲍东山 基于内容分析的视频搜索系统
CN101035280A (zh) * 2007-04-19 2007-09-12 鲍东山 分级内容审核终端系统
CN102592141A (zh) * 2012-01-04 2012-07-18 南京理工大学常熟研究院有限公司 一种对动态图像中人脸遮挡的方法
CN103020198A (zh) * 2012-11-30 2013-04-03 杭州易尊数字科技有限公司 一种在视频中搜索目标的方法
CN104091176A (zh) * 2014-07-18 2014-10-08 吴建忠 人像比对在视频中的应用技术
CN104504397A (zh) * 2014-12-31 2015-04-08 云智视像科技(上海)有限公司 一种基于人脸识别的监控视频摘要方法及系统
CN104918066A (zh) * 2014-03-11 2015-09-16 上海数字电视国家工程研究中心有限公司 视频内容审核方法及系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1492379A (zh) * 2002-10-22 2004-04-28 中国科学院计算技术研究所 利用快速人脸检测对新闻被采访者进行脸部遮挡的方法
CN101021857A (zh) * 2006-10-20 2007-08-22 鲍东山 基于内容分析的视频搜索系统
CN101035280A (zh) * 2007-04-19 2007-09-12 鲍东山 分级内容审核终端系统
CN102592141A (zh) * 2012-01-04 2012-07-18 南京理工大学常熟研究院有限公司 一种对动态图像中人脸遮挡的方法
CN103020198A (zh) * 2012-11-30 2013-04-03 杭州易尊数字科技有限公司 一种在视频中搜索目标的方法
CN104918066A (zh) * 2014-03-11 2015-09-16 上海数字电视国家工程研究中心有限公司 视频内容审核方法及系统
CN104091176A (zh) * 2014-07-18 2014-10-08 吴建忠 人像比对在视频中的应用技术
CN104504397A (zh) * 2014-12-31 2015-04-08 云智视像科技(上海)有限公司 一种基于人脸识别的监控视频摘要方法及系统

Cited By (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106778645B (zh) * 2016-12-24 2018-05-18 深圳云天励飞技术有限公司 一种图像处理方法及装置
CN106778645A (zh) * 2016-12-24 2017-05-31 深圳云天励飞技术有限公司 一种图像处理方法及装置
WO2018210039A1 (zh) * 2017-05-18 2018-11-22 深圳云天励飞技术有限公司 数据处理方法、数据处理装置及存储介质
CN107358146A (zh) * 2017-05-22 2017-11-17 深圳云天励飞技术有限公司 视频处理方法、装置及存储介质
CN107358146B (zh) * 2017-05-22 2018-05-22 深圳云天励飞技术有限公司 视频处理方法、装置及存储介质
CN107341443A (zh) * 2017-05-23 2017-11-10 深圳云天励飞技术有限公司 视频处理方法、装置及存储介质
CN107341443B (zh) * 2017-05-23 2018-06-22 深圳云天励飞技术有限公司 视频处理方法、装置及存储介质
CN108932254A (zh) * 2017-05-25 2018-12-04 中兴通讯股份有限公司 一种相似视频的检测方法、设备、系统及存储介质
CN107609104A (zh) * 2017-09-12 2018-01-19 中广热点云科技有限公司 根据视频图像素材查找相关视频的方法和系统
CN107609104B (zh) * 2017-09-12 2020-09-08 中广热点云科技有限公司 根据视频图像素材查找相关视频的方法和系统
US11321945B2 (en) 2017-10-16 2022-05-03 Hangzhou Hikvision Digital Technology Co., Ltd. Video blocking region selection method and apparatus, electronic device, and system
WO2019076187A1 (zh) * 2017-10-16 2019-04-25 杭州海康威视数字技术股份有限公司 视频遮蔽区域选取方法、装置、电子设备及系统
CN108271069A (zh) * 2017-12-11 2018-07-10 北京奇艺世纪科技有限公司 一种视频节目的片段过滤方法和装置
CN108471543A (zh) * 2018-03-12 2018-08-31 北京搜狐新媒体信息技术有限公司 一种宣传信息添加方法及装置
CN110163043B (zh) * 2018-05-18 2023-09-26 腾讯科技(深圳)有限公司 面部检测方法、装置、存储介质及电子装置
CN110163043A (zh) * 2018-05-18 2019-08-23 腾讯科技(深圳)有限公司 面部检测方法、装置、存储介质及电子装置
CN108924491B (zh) * 2018-07-04 2020-08-25 深圳市商汤科技有限公司 视频流处理方法及装置、电子设备和存储介质
CN108924491A (zh) * 2018-07-04 2018-11-30 深圳市商汤科技有限公司 视频流处理方法及装置、电子设备和存储介质
CN109190454A (zh) * 2018-07-17 2019-01-11 北京新唐思创教育科技有限公司 用于识别视频中的目标人物的方法、装置、设备及介质
CN110876092A (zh) * 2018-09-04 2020-03-10 杭州海康威视数字技术股份有限公司 视频摘要生成方法、装置、电子设备及可读存储介质
CN110876092B (zh) * 2018-09-04 2021-08-24 杭州海康威视数字技术股份有限公司 视频摘要生成方法、装置、电子设备及可读存储介质
CN109241345A (zh) * 2018-10-10 2019-01-18 百度在线网络技术(北京)有限公司 基于人脸识别的视频定位方法和装置
CN109615660A (zh) * 2018-11-21 2019-04-12 吉利汽车研究院(宁波)有限公司 对车辆全景画面进行标定的方法及装置
CN111783507A (zh) * 2019-07-24 2020-10-16 北京京东尚科信息技术有限公司 目标搜索方法、装置及计算机可读存储介质
CN111625687A (zh) * 2020-07-30 2020-09-04 南京讯思雅信息科技有限公司 一种在媒资视频库中通过人脸快速搜索人物的方法及系统
CN112801004A (zh) * 2021-02-05 2021-05-14 网易(杭州)网络有限公司 视频片段的筛选方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
CN106127106A (zh) 视频中目标人物查找方法和装置
US9141184B2 (en) Person detection system
CN101425133B (zh) 人物图像检索装置
KR100996066B1 (ko) 얼굴화상 등록 장치, 얼굴화상 등록 방법, 및 기록 매체
US11244488B2 (en) Video processing device, video processing system, and video processing method
CN108229323A (zh) 布控方法和装置、电子设备、计算机存储介质
JP2008131330A (ja) 画像表示装置および画像表示方法
JP2007094990A (ja) 画像分類装置および方法並びにプログラム
CN105740379A (zh) 一种照片分类管理方法和装置
US8593557B2 (en) Shooting assist method, program product, recording medium, shooting device, and shooting system
JP2008146191A (ja) 画像出力装置および画像出力方法
CN110557671A (zh) 一种视频不健康内容自动处理方法及系统
CN106331524A (zh) 一种识别镜头切换的方法及装置
CN109408672A (zh) 一种文章生成方法、装置、服务器及存储介质
JP2010081453A (ja) 付帯情報付加装置及び方法
US20150215585A1 (en) System and method for providing live imagery associated with map locations
CN106713700A (zh) 图像处理方法、装置和终端
KR101059480B1 (ko) 영상 색인 장치 및 방법
KR101841641B1 (ko) 히스토리별 사진군 포토앨범 자동 분류시스템
JP2003330941A (ja) 類似画像分類装置
JP2012221211A (ja) 情報処理装置、情報処理プログラム、情報処理方法および情報処理システム
KR20170075032A (ko) 타로점 인터넷 방송 시스템 및 이를 이용한 타로점 인터넷 방송 방법
CN105898269A (zh) 一种视频播放方法及装置
CN106462770A (zh) 车牌号转换装置、转换方法及利用其的车牌号读取系统
CN106402717B (zh) 一种ar播放控制方法及智能台灯

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20161116