CN109756746B - 视频审核方法、装置、服务器及存储介质 - Google Patents

视频审核方法、装置、服务器及存储介质 Download PDF

Info

Publication number
CN109756746B
CN109756746B CN201811652864.6A CN201811652864A CN109756746B CN 109756746 B CN109756746 B CN 109756746B CN 201811652864 A CN201811652864 A CN 201811652864A CN 109756746 B CN109756746 B CN 109756746B
Authority
CN
China
Prior art keywords
frame image
video frame
video
similarity
auditing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811652864.6A
Other languages
English (en)
Other versions
CN109756746A (zh
Inventor
李锦春
林协
邱泽潮
陈海峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Huaduo Network Technology Co Ltd
Original Assignee
Guangzhou Huaduo Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Huaduo Network Technology Co Ltd filed Critical Guangzhou Huaduo Network Technology Co Ltd
Priority to CN201811652864.6A priority Critical patent/CN109756746B/zh
Publication of CN109756746A publication Critical patent/CN109756746A/zh
Application granted granted Critical
Publication of CN109756746B publication Critical patent/CN109756746B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本申请实施例公开了一种视频审核方法、装置、服务器及存储介质,该视频审核方法包括:获取第一视频帧图像以及第二视频帧图像,所述第二视频帧图像为待审核视频中所述第一视频帧图像的前一抽样帧图像;获取所述第一视频帧图像与所述第二视频帧图像的相似度;判断所述相似度是否高于预设阈值;如果所述相似度高于所述预设阈值,基于所述第二视频帧图像的审核结果,确定对所述第一视频帧图像的审核结果。该视频审核方法能够减少视频图像的审核量,提高审核效率。

Description

视频审核方法、装置、服务器及存储介质
技术领域
本申请涉及信息技术领域,更具体地,涉及一种视频审核方法、装置、服务器及存储介质。
背景技术
随着互联网技术的发展,网络上的视频(如直播视频、用户上传的视频等)越来越多,视频内容也越来越丰富。为了能够将非安全视频过滤,需要对视频的内容进行审核(简称视频审核)。传统方法通常是依靠人工来审核视频中的内容是否包含违规内容,即通过人工方式对视频进行逐帧审阅处理。但由于互联网视频资源量越来越大,视频的审核量也随之变大,给审核人员带来了巨大的负担。
发明内容
本申请实施例提出了一种视频审核方法、装置、服务器及存储介质,能够减少视频图像的审核量,提高审核效率。
第一方面,本申请实施例提供了一种视频审核方法,应用于服务器,该方法包括:获取第一视频帧图像以及第二视频帧图像,第二视频帧图像为待审核视频中第一视频帧图像的前一抽样帧图像;获取第一视频帧图像与第二视频帧图像的相似度;判断相似度是否高于预设阈值;如果相似度高于预设阈值,基于第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果。
第二方面,本申请实施例提供了一种视频审核装置,应用于服务器,该装置包括:图像获取模块、相似度获取模块、相似度判断模块以及结果获取模块。其中,图像获取模块用于获取第一视频帧图像以及第二视频帧图像,第二视频帧图像为待审核视频中第一视频帧图像的前一抽样帧图像;相似度获取模块用于获取第一视频帧图像与第二视频帧图像的相似度;相似度判断模块用于判断相似度是否高于预设阈值;结果获取模块用于如果相似度高于预设阈值,基于第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果。
第三方面,本申请实施例提供了一种服务器,包括:一个或多个处理器;存储器;一个或多个应用程序,其中一个或多个应用程序被存储在存储器中并被配置为由一个或多个处理器执行,一个或多个程序配置用于执行上述第一方面提供的视频审核方法。
第四方面,本申请实施例提供了一种计算机可读取存储介质,计算机可读取存储介质中存储有程序代码,程序代码可被处理器调用执行上述第一方面提供的视频审核方法。
本申请提供的方案,在获取到第一视频帧图像以及第二视频帧图像之后,获取第一视频帧图像与第二视频帧图像的相似度,然后判断该相似度是否高于预设阈值,如果该相似度高于预设阈值,则基于第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果,其中,第二视频帧图像为待审核视频中第一视频帧图像的前一抽样帧图像。从而,能够根据第一视频帧图像的前一抽样帧图像的审核结果,确定对第一视频帧图像的审核结果,而无需对待审核视频进行逐帧审核,避免对相似性较高的图像进行重复审核,减少视频图像的审核量,提高了审核效率。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了一种适用于本申请实施例的应用场景的示意图。
图2示出了根据本申请一个实施例的视频审核方法流程图。
图3示出了根据本申请实施例的视频审核方法的一种效果示意图。
图4示出了根据本申请另一个实施例的视频审核方法流程图。
图5示出了根据本申请实施例的视频审核方法的一种效果示意图。
图6示出了根据本申请实施例的视频审核方法的另一种效果示意图。
图7示出了根据本申请实施例的视频审核方法的又一种效果示意图。
图8示出了根据本申请实施例的视频审核方法的再一种效果示意图。
图9示出了根据本申请实施例的视频审核方法的还一种效果示意图。
图10示出了本申请实施例提供的视频审核装置的模块框图。
图11示出了本申请实施例提供的服务器的结构框图。
图12示出了本申请实施例的用于保存或者携带实现根据本申请实施例的视频审核方法的程序代码的存储单元。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。
随着互联网技术的发展,视频直播平台(虎牙直播、斗鱼直播等)以及视频分享平台(抖音视频、B站等)的出现,网络上的视频也在逐渐增多,视频的内容也越来越丰富。然而,目前存在一些主播为了提高人气,在视频直播平台上传播淫秽色情内容,或者存在一些恶意用户利用视频分享平台传播涉黄涉暴力内容,严重影响了用户的观看体验。因此,视频直播平台以及视频分享平台都会引入大量的审核人员,对视频的内容进行审核。审核人员对视频内容进行审核,通常是对视频进行逐帧审核,但这种审核方式的审核效率较低,在视频图像的数量较大的情况下,给审核人员会带来巨大的负担。
基于上述问题,发明人在对现有的视频审核方法进行了一系列研究后发现,部分直播视频中,大部分图像没有变化,如果审核人员对该直播视频进行逐帧审核,则会处理大量的相似重复图像,影响了审核效率。因此,发明人提出了本申请实施例中的视频审核方法、装置、服务器及存储介质,对于相似性较高的视频图像,可以基于相似性较高的视频图像中的其中一张视频图像的审核结果,确定相似性较高的图像中其他视频图像的审核结果,无需对相似性较高的视频图像进行重复审核,以降低视频图像的审核量,提高审核效率。下面对本申请实施例提供的视频审核方法的应用场景进行介绍。
请参见图1,示出了本申请实施例提供的视频审核方法的应用场景的示意图,该应用场景包括本申请实施例提供的一种交互系统10。该交互系统10包括:电子设备100以及服务器200。其中,电子设备100和服务器200位于无线网络或有线网络中,电子设备100和服务器200可以进行数据交互。
在本申请实施例中,电子设备100可以是笔记本电脑、台式电脑、平板电脑、智能手机、可穿戴电子设备等,具体的电子设备类型在本申请实施例中可以不作为限定。服务器200可以是单独的服务器,也可以是服务器集群,可以是本地服务器,也可以是云端服务器,具体的服务器类型在本申请实施例中可以不作为限定。
在一些实施例中,电子设备100可以是用户终端,可以安装有即时通讯应用或社交网络应用的客户端,该客户端可以是应用程序客户端(如手机APP中的视频播放应用程序),也可以是网页客户端(例如网络直播平台),在此不作限定。用户在客户端进行帐号登录后,可以进行视频直播,也可以上传视频,其中,该帐号对应的所有信息可以存储在服务器200的存储空间内。
在一些实施例中,电子设备100可以是审核人员终端,上述客户端可以是多媒体直播审核系统(审核直播视频),也可以是多媒体视频审核系统(审核用户上传的视频)。审核人员在客户端登录审核帐号,不同的审核人员对应不同的审核帐号。审核人员通过客户端对用户的直播视频或者用户上传的视频进行审核,并根据审核得到的审核结果提交处罚结果至服务器200,处罚结果存储于服务器200的存储空间内。
在一些实施方式中,客户端可以对直播视频或者用户上传的视频进行截图,并将得到的截图图像传输至服务器200。服务器200将截图图像存储于审核队列中,审核队列中的截图图像用于进行审核,其中,对图像进行审核的方式可以为人工审核,当然,审核的方式也可以为机器审核。
在一些实施方式中,服务器200可以根据审核队列将截图图像分别分发至多个审核人员对应的审核帐号下,审核人员可以通过在多媒体直播审核系统或者多媒体视频审核系统中登录审核帐号,获取该审核帐号对应的截图图像进行审核。
上述人工审核可以至少包括第一次人工审核(人工一审)以及第二次人工审核(人工二审)中的一种。其中,待审核图像至少包括不确定、疑似违规以及疑似违规程度高三种待审核图像的一种。具体的,作为一种方式,可以将不确定的待审核图像分发入人工一审,将疑似违规的待审核图像分发入人工二审,以提升违规内容判断的准确性。
需要说明的是,在人工审核阶段,可以根据审核规则从海量截图图像中发现违规或者疑似违规的截图图像。作为一种方式,审核人员可以根据审核规则,确定截图图像的违规类型,例如色情、暴力等。
进一步的,可以将经人工审核判断为违规的违规直播所对应主播帐号进行处罚,或者将经人工审核判断为违规的违规视频所对应的用户账号进行处罚,处罚可以包括但不限于封号、罚款等,处罚结果存储于服务器200的存储空间内。
基于上述交互系统,本申请实施例提供了一种视频审核方法,应用于上述交互系统的服务器,通过获取第一视频帧图像以及第二视频帧图像,其中,第二视频帧图像为待审核视频中第一视频帧图像的前一抽样帧图像,以及获取第一视频帧图像与第二视频帧图像的相似度,然后判断该相似度是否高于预设阈值,如果该相似度高于预设阈值,则基于第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果,从而实现了根据第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果,无需对相似度较高的视频图像进行重复审核,减少视频图像的审核量,提高了审核效率。下面对具体的视频审核方法进行介绍。
请参阅图2,本申请实施例提供了一种视频审核方法,可应用于上述服务器,该视频审核方法可以包括:
步骤S110:获取第一视频帧图像以及第二视频帧图像,第二视频帧图像为待审核视频中第一视频帧图像的前一抽样帧图像。
由于传统的视频审核方式主要是审核人员对待审核视频进行逐帧审核,导致视频审核效率不高,审核及时性低。因此,可以对待审核视频中相似性较高的图像,基于相似性较高的图像中的其中一张图像的审核结果,确定相似性较高的图像中其他图像的审核结果,以降低视频图像的审核量,提高视频审核效率。在本申请实施例中,在对待审核视频的图像进行审核时,可以检测待审核视频中的重复相似图像。
具体地,服务器检测待审核视频中的重复相似图像时,可以获取待审核视频中的第一视频帧图像以及第二视频帧图像。其中,第二视频帧图像为待审核视频中第一视频帧图像的前一抽样帧图像,第一视频帧图像为待审核视频中除第一抽样帧图像以外的其他抽样帧图像中的任一抽样帧图像。其中,抽样帧图像指待审核视频中抽样出的用于进行审核的帧图像,上述第二视频帧图像为从待审核视频中抽样出的所有帧图像构成的序列中,第一视频帧图像的前一帧图像,即第二视频帧图像从待审核视频中抽样出的时间与第一视频帧图像从待审核视频中抽样出的时间相邻,即第一视频帧图像与第二视频帧图像为从待审核视频中连续抽样出的两帧图像。
在本申请实施例中,上述待审核视频可以是存在于互联网中的任意类型的视频,如传统的电影、电视、综艺视频等,也可以是在上述客户端上用户上传的视频或用户之间相互传播的视频,例如直播视频、小视频、短视频等。理论上,任意数字形式的视频,都可以被设定为待审核的视频,都可以利用本申请实施例的技术方案对其进行内容审核。
在本申请实施例中,获取上述抽样帧图像,可以是按照逐个抽样的规则对待审核视频中的每一帧图像都进行抽取,从而得到抽样帧图像,也可以是按照抽样时间间隔,从待审核视频中进行抽取,从而得到具有一定帧间隔的抽样帧图像。
在一些实施方式中,上述第一视频帧图像以及第二视频帧图像,可以是上述待审核视频的截图图像。作为一种实施方式,上述获取第一视频帧图像以及第二视频帧图像,可以是客户端根据截图时间间隔对待审核视频进行截图操作后,将截取到的多张截图图像传输至服务器,从而服务器可以从接收到的多张截图图像中,获取第一视频帧图像以及第二视频帧图像,其中,第一视频帧图像的前一抽样帧图像为第一视频帧图像的前一次截图所截取的截图图像,即第二视频帧图像为第一视频帧图像的前一次截图所截取的截图图像。
例如,对直播视频进行审核时,网络直播平台每间隔10S就对直播视频进行一次截图操作,并将得到多张截图图像传输至服务器,服务器可以从得到的多张截图图像中获取第一视频帧图像以及第二视频帧图像,若服务器获取到的第一视频帧图像为当前截图图像,则第二视频帧图像为当前截图图像的上一张截图图像,也就是10S前的截图图像,请参见图3,图3为网络直播平台传输至服务器的多张截图图像示意图,服务器可以获取到第一视频帧图像102(1分40秒)以及第二视频帧图像101(1分30秒),可以看出,第二视频帧图像101(1分30秒)为第一视频帧图像102(1分40秒)的上一张截图图像。
作为另一种实施方式,上述获取第一视频帧图像以及第二视频帧图像,也可以是服务器根据截图时间间隔对待审核视频进行截图,并存储所截取到的多张截图图像,然后服务器从存储的多张截图图像中获取第一视频帧图像以及第二视频帧图像。
由于视频都是由很多帧的图像按照时间先后顺序进行排列组成的,每一帧图像都有自己的帧序号。因此,作为又一种实施方式,上述获取第一视频帧图像以及第二视频帧图像,可以是服务器根据待审核视频的帧序号对待审核视频进行截图,并存储所截取到的多张截图图像,然后服务器从存储的多张截图图像中,获取第一视频帧图像以及第二视频帧图像,其中,第二视频帧图像为第一视频帧图像的前一次截图所截取的帧图像。
例如,对用户上传的视频进行审核时,服务器可以根据帧序号截取待审核视频的第1帧、第100帧、第200帧图像,若服务器获取到的第一视频帧图像为第200帧图像,则第二视频帧图像为第100帧图像。
可以理解的是,上述第一视频帧图像以及第二视频帧图像的获取方式仅为举例,并不代表对本申请实施例中的第一视频帧图像以及第二视频帧图像的获取的限定。
进一步的,可以按照预设截图尺寸对待审核视频进行截图操作,以得到同样标准大小的截图图像,便于审核。其中,预设截图尺寸预设存储于客户端,可根据待审核视频的具体情况进行具体设置。
步骤S120:获取第一视频帧图像与第二视频帧图像的相似度。
在服务器得到第一视频帧图像以及第二视频帧图像之后,可以获取第一视频帧图像与第二视频帧图像的相似度,以判断第一视频帧图像与第二视频帧图像是否为重复相似图像。
在一些实施方式中,上述获取第一视频帧图像与第二视频帧图像的相似度,可以是根据感知哈希算法(Perceptual hash algorithm,PHA)来计算第一视频帧图像与第二视频帧图像的相似度。具体地,服务器可以通过感知哈希算法计算出第一视频帧图像的Phash值以及第二视频帧图像的Phash值,然后再根据第一视频帧图像的Phash值与第二视频帧图像的Phash值的匹配度,得到第一视频帧图像与第二视频帧图像的相似度,其中,上述Phash值为由0或1构成的64位整数。在一些实施方式中,上述第一视频帧图像的Phash值与第二视频帧图像的Phash值的匹配度,可以是第一视频帧图像的Phash值与第二视频帧图像的Phash值按数据位进行一一比对时,数值相同的数据位的位数。例如,第一视频帧图像的Phash值与第二视频帧图像的Phash值中的64位整数,存在63位都相同时,第一视频帧图像的Phash值与第二视频帧图像的Phash值的匹配度为63。
作为一种实施方式,可以将上述匹配度作为第一视频帧图像与第二视频帧图像的相似度。例如,第一视频帧图像的Phash值与第二视频帧图像的Phash值的匹配度为63时,服务器可以获取到第一视频帧图像与第二视频帧图像的相似度为63。
作为另一种实施方式,可以将上述匹配度与Phash值的数据位数(即64)的百分比值,作为第一视频帧图像与第二视频帧图像的相似度。例如,第一视频帧图像的Phash值与第二视频帧图像的Phash值的匹配度为62,与Phash值的数据位数(即64)的百分比值为96.9%时,服务器可以获取到第一视频帧图像与第二视频帧图像的相似度为96.9%。
在另一些实施方式中,上述获取第一视频帧图像与第二视频帧图像的相似度,可以是将第一视频帧图像中的每个像素点的像素值与第二视频帧图像中的对应位置上的像素点的像素值进行匹配(例如,两个像素值之差不超过预设范围,即可认为两个像素值匹配),若匹配则为相似,若不匹配则不相似,从而得到第一视频帧图像中的所有像素点的匹配结果,进而得到第一视频帧图像与第二视频帧图像的相似度。
可以理解的是,上述相似度的求取仅为举例,并不代表对本申请实施例中的相似度的求取的限定。也可以利用其他图像匹配算法计算第一视频帧图像与第二视频帧图像之间的相似度,例如差异哈希算法等。
步骤S130:判断相似度是否高于预设阈值。
服务器在得到第一视频帧图像与第二视频帧图像的相似度之后,可以判断该相似度是否高于预设阈值,以判断出第一视频帧图像与第二视频帧图像是否为重复相似图像。
其中,上述预设阈值为服务器对第一视频帧图像进行审核处理时,相似度需要达到的最小值。其中,该预设阈值可以预先存储于服务器,可根据相似度的设具体设定进行相应的设置。例如,相似度为上述匹配度时,预设阈值可以设置为63;相似度为上述匹配度与Phash值的数据位数(即64)的百分比值时,预设阈值可以设置为95%。当然,以上预设阈值仅为举例,并不代表对本申请实施例中的预设阈值的限定。可以理解的是,预设阈值越大,对待审核视频的审核结果越精确。
可以理解的是,相似度高于预设阈值,表面第一视频帧图像与第二视频帧图像的相似度高,即第一视频帧图像与第二视频帧图像非常相似。当相似度低于预设阈值,表明第一视频帧图像与第二视频帧图像的相似度不高,即第一视频帧图像与第二视频帧图像不相似。
例如,若预设阈值为95%,当得到的第一视频帧图像与第二视频帧图像的相似度为96.9%时,服务器可以得到该相似度高于预设阈值的判断结果,也就是说,第一视频帧图像与第二视频帧图像非常相似;当得到的第一视频帧图像与第二视频帧图像的相似度为93.8%时,服务器可以得到该相似度不高于预设阈值的判断结果,也就是说,第一视频帧图像与第二视频帧图像不相似。
步骤S140:如果相似度高于预设阈值,基于第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果。
在本申请实施例中,如果服务器得到相似度高于预设阈值的判断结果,则可以基于第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果。这样,能够基于相似性较高的视频图像中的其中一张视频图像的审核结果,确定相似性较高的图像中其他视频图像的审核结果,从而无需对待审核视频进行逐帧审核,避免了对相似性较高的图像的重复审核。例如,预设阈值为96%时,请参见图3,第一视频帧图像102与第二视频帧图像101相同,相似度100%,高于预设阈值,服务器可以基于第二视频帧图像101的不违规的审核结果,确定对第一视频帧图像102的审核结果为不违规。
其中,第一视频帧图像与第二视频帧图像的相似度高于预设阈值,可以理解为,第一视频帧图像与第二视频帧图像非常相似,对应的,第一视频帧图像与第二视频帧图像的审核结果也相似。因此,可根据第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果。
在本申请实施例中,上述审核结果可以是违规、不违规,也可以是通过、不通过,还可以是合格、不合格,具体的审核结果在此不做限定。
本申请实施例提供的视频审核方法,在获取第一视频帧图像以及第二视频帧图像之后,获取第一视频帧图像与第二视频帧图像的相似度,然后判断该相似度是否高于预设阈值,如果该相似度高于预设阈值,则基于第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果,从而实现了根据第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果,从而不需要对待审核视频进行逐帧审核,避免了对相似性较高的图像的重复审核,减少了视频图像的审核量,提高了审核效率。
请参阅图4,本申请另一实施例提供了一种视频审核方法,可应用于上述服务器,该视频审核方法可以包括:
步骤S210:获取第一视频帧图像以及第二视频帧图像,第二视频帧图像为待审核视频中第一视频帧图像的前一抽样帧图像。
在一些实施方式中,对待审核视频进行审核,可以是选取待审核视频中的部分图像进行审核。因此,在上述获取第一视频帧图像以及第二视频帧图像之前,该视频审核方法还包括:根据设定选取规则,从待审核视频中选取部分待审核的视频帧图像。
在一些实施方式中,上述设定选取规则可以是按照固定的时间间隔进行选取,也可以是按照非固定的时间间隔进行选取。例如,如果1分钟内截取了直播视频的6张截图,可以是按照固定的时间间隔10S,对直播视频进行截图,也可以是按照非固定的时间间隔,对直播视频进行截图,如前三张截图为5S一次截图,后三张截图为15S一次截图。
可以理解的是,服务器根据上述设定选取规则,从待审核视频中选取出部分待审核的视频帧图像后,需要对选取的部分待审核的视频帧图像中的重复相似图像的进行审核。因此,上述获取第一视频帧图像以及第二视频帧图像,包括:
根据部分待审核的视频帧图像中每帧视频帧图像于待审核视频中的时间,按照时间先后顺序对部分待审核的视频帧图像进行排序,得到视频图像序列;从部分待审核的视频帧图像中,获取第一视频帧图像,以及在视频图像序列中第一视频帧图像的前一帧图像,将前一帧图像作为前一抽样帧图像,得到第二视频帧图像。
可以理解的是,服务器选取的部分待审核的视频帧图像可以是相邻帧序号的视频帧图像,也可以是距离一定间隔帧的视频帧图像,因此,作为一种实施方式,可以根据部分待审核的视频帧图像中每帧视频帧图像于待审核视频中的时间,按照时间的先后顺序对部分待审核的视频帧图像重新进行排序,以得到视频图像序列。
例如,对直播视频进行审核时,如果在直播开始时(即0时刻)、15秒、40秒、1分05秒、3分20秒时对直播视频进行截图,服务器可以根据每张截取的视频帧图像在直播视频中的时间,按照时间的先后顺序重新对该视频帧图像进行排序,得到视频图像序列为:第一帧(0时刻)图像、第二帧(15秒)图像、第三帧(40秒)图像、第四帧(1分05秒)图像、第五帧(3分20秒)图像。
作为另一种实施方式,也可以根据部分待审核的视频帧图像中每帧视频帧图像的帧序号,按照帧序号的大小顺序对部分待审核的视频帧图像重新进行排序,以得到视频图像序列。
例如,对用户上传的视频进行审核时,服务器可以从用户上传的视频中选取出部分待审核的视频帧图像,如第3帧、第7帧、第49帧、第134帧图像,服务器可以按照帧序号的大小顺序重新对该部分待审核的视频帧图像进行排列,得到的视频图像序列为:第一帧(第3帧)图像、第二帧(第7帧)图像、第三帧(第49帧)图像、第四帧(第134帧)图像。
在一些实施方式中,服务器从待审核视频中选取出部分待审核视频帧图像后,可以从选取的部分待审核视频帧图像中,获取第一视频帧图像,以及在视频图像序列中第一视频帧图像的前一帧图像,并将该前一帧图像作为前一抽样帧图像,得到第二视频帧图像。也就是说,上述第二视频帧图像为上述视频图像序列中第一视频帧图像的前一帧图像,例如,服务器获取到的第一视频帧图像为上述第三帧(40秒)图像时,则获取到的第二视频帧图像为上述视频图像序列中的第二帧(15秒)图像,又例如,服务器获取到的第一视频帧图像为上述第四帧(第134帧)图像时,则获取到的第二视频帧图像为上述第三帧(第49帧)图像。
可以理解的是,上述第一视频帧图像为部分待审核视频帧图像中除第一抽样帧图像以外的任一抽样帧图像,其中,该第一抽样帧图像为上述视频图像序列的第一帧图像,例如,视频图像序列的第一帧图像为上述第一帧(第3帧)图像时,服务器获取的第一视频帧图像,可以为除上述第一帧(第3帧)图像外的任一帧图像,如第三帧(第49帧)图像。
步骤S220:获取第一视频帧图像与第二视频帧图像的相似度。
在一些实施方式中,可以根据设定算法,获取到第一视频帧图像与第二视频帧图像的相似度。因此,上述获取第一视频帧图像与第二视频帧图像的相似度,可以包括:
利用设定算法,计算第一视频帧图像与第二视频帧图像的相似度,其中,设定算法包括感知哈希算法、差异哈希算法、平均哈希算法、或者尺度不变特征变换算法。
其中,设定算法是一种可以得到第一视频帧图像与第二视频帧图像的相似度的算法,可以包括感知哈希算法、差异哈希算法、平均哈希算法、或者尺度不变特征变换算法,但不限于此。
作为一种方式,上述设定算法为感知哈希算法时,第一视频帧图像与第二视频帧图像的相似度的获取,可以参照上述申请实施例,在此不再赘述。需要说明的是,以感知哈希算法求取相似度时,求取速度比较快,精确度高,且其结果受图像大小非等比缩放、图像旋转的影响较小,能够快速得到准确的结果。
作为另一种方式,上述设定算法为差异哈希算法时,服务器获取第一视频帧图像与第二视频帧图像的相似度,可以是先获取第一视频帧图像的Dhash值与第二视频帧图像的Dhash值,然后根据第一视频帧图像的Dhash值与第二视频帧图像的Dhash值的匹配度,得到第一视频帧图像与第二视频帧图像的相似度。需要说明的是,以差异哈希算法求取相似度时,求取速度快,准确度高,能够快速得到结果。
作为又一种方式,上述设定算法为平均哈希算法时,服务器获取第一视频帧图像与第二视频帧图像的相似度,可以是获取第一视频帧图像的Ahash值与第二视频帧图像的Ahash值,然后根据第一视频帧图像的Ahash值与第二视频帧图像的Ahash值的匹配度,得到第一视频帧图像与第二视频帧图像的相似度。需要说明的是,以平均哈希算法的方式求取相似度时,求取速度比较快,且其结果不受图像大小等比缩放的影响,能够快速得到结果。因此,适用于求取缩略图、放大图的相似度。
作为再一种方式,上述设定算法为尺度不变特征变换算法时,服务器获取第一视频帧图像与第二视频帧图像的相似度,可以是获取,需要说明的是,以尺度不变特征变换算法求取相似度时,鲁棒性强,能够得到准确的结果。
通过上述方式,计算出第一视频帧图像与第二视频帧图像的相似度,使服务器可以根据该相似度,判断第一视频帧图像与第二视频帧图像是否为重复相似图像。
可以理解的是,综合考虑对直播视频进行审核的及时性、准确性需求,可以采用上述感知哈希算法获取第一视频帧图像与第二视频帧图像的相似度。
进一步的,可以通过设定触发条件,来进行待审核视频中的重复相似图像的审核阶段。其中,触发条件为服务器在进行视频帧图像之间的相似度判断,以及根据相似度进行待审核视频中的重复相似图像的审核之前,待审核视频需要满足的条件。
需要说明的是,上述进行待审核视频中的重复相似图像的审核阶段,包括上述获取第一视频帧图像与第二视频帧图像的相似度,然后根据相似度判断是否可以基于第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果等步骤。
因此,在上述获取第一视频帧图像与第二视频帧图像的相似度之前,该视频审核方法还包括:
检测待审核视频中第一视频帧图像的前N帧图像的审核结果是否相同,N为正整数;如果相同,执行获取第一视频帧图像与第二视频帧图像的相似度的步骤。
其中,N的值可以预先存储于服务器,可以根据待审核视频的具体情况进行具体设置。例如,N为3,N为5,N为7等。
在一些实施方式中,上述待审核视频中的重复相似图像的审核阶段的触发条件可以为,检测待审核视频中第一视频帧图像的前N帧图像的审核结果相同。也就是说,只有在检测到待审核视频中第一视频帧图像的前N帧图像的审核结果都相同时,服务器才执行获取第一视频帧图像与第二视频帧图像的相似度的步骤,其中,N为正整数。可以理解的是,当检测到待审核视频中第一视频帧图像的前N帧图像的审核结果不相同时,服务器不执行获取第一视频帧图像与第二视频帧图像的相似度的步骤。
在一些实施方式中,当检测到待审核视频中第一视频帧图像的前N帧图像的审核结果不相同时,服务器可以将第一视频帧图像存放入审核队列。其中,审核队列中的图像用于服务器进行机器审核,或者传输至审核人员的电子设备,由审核人员进行审核。
作为一种实施方式,上述检测到待审核视频中第一视频帧图像的前N帧图像的审核结果相同,可以是检测到待审核视频中第一视频帧图像的前N帧图像的审核结果都为不违规,也就是说,在获取到第一视频帧图像时,电子设备检测到前N帧图像都为安全,则电子设备可以对第一视频帧图像之后的视频帧图像,进行重复相似图像的审核阶段。
例如,请参见图5,服务器在检测到直播视频的前3次截图图像(101、102、103)的审核结果都为不违规时,从当前截图图像104开始,可以进入重复相似图像的审核阶段,也就是说,可以通过判断当前截图图像104与前一截图图像103的是否相似,来得到当前截图图像104的审核结果,即判断当前截图图像104与前一截图图像103的相似度是否高于预设阈值,如果高于预设阈值,则可以确定当前截图图像104的审核结果为不违规。
在一些实施方式中,如果服务器处于重复相似图像的审核阶段时,获取到的第一视频帧图像与第二视频帧图像的相似度不高于预设阈值,即第一视频帧图像与第二视频帧图像不相似,则服务器会退出重复相似图像的审核阶段,即不进行第一视频帧图像与第二视频帧图像的相似度比对,服务器会将第一视频帧图像存放入审核队列以进行人员审核。
例如,请参见图6,N取3,预设阈值为96%时,服务器在检测到直播视频的前3次截图图像(101、102、103)的审核结果都为不违规时,从当前截图图像104开始,可以进入重复相似图像的审核阶段。如果服务器获取到的第一视频帧图像106与第二视频帧图像105的相似度为60%,低于预设阈值96%,则退出重复相似图像的审核阶段,将第一视频帧图像106存放入审核队列以进行人员审核。
可以理解的是,服务器在退出重复相似图像的审核阶段后,再一次检测到待审核视频中第一视频帧图像的前N帧图像的审核结果相同时,可以重新进入重复相似图像的审核阶段。例如,请参见图7,N取3,服务器获取到的第一视频帧图像106与第二视频帧图像105的相似度为60%时,退出重复相似图像的审核阶段,将第一视频帧图像106存放入审核队列以进行人员审核,如果人工再一次审核出3张截图图像(106、107、108)的审核结果为不违规时,从图像109开始,服务器可以再次进入重复相似图像的审核阶段。
在一些实施方式中,在进行视频审核时,需要对待审核视频中的违规图像进行图像处理,图像处理包括图像删除、图像打码、图像屏蔽等。因此,上述检测到待审核视频中第一视频帧图像的前N帧图像的审核结果相同,可以是检测到待审核视频中第一视频帧图像的前N帧图像的审核结果都为违规,也就是说,在获取到第一视频帧图像时,服务器检测到前N帧图像都不安全,则服务器可以对第一视频帧图像之后的视频帧图像,进行重复相似图像的审核阶段,即可以获取第一视频帧图像图像与第二视频帧图像的相似度,然后根据相似度判断是否可以基于第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果,从而找出待审核视频中的违规图像,进而将审核结果为违规的图像都进行图像处理。
在一些实施方式中,在进行视频审核时,如果待审核视频中存在任一视频帧图像经人工审核判断为违规的,则可以不再对其他视频帧图像进行审核,直接确定出该待审核视频的审核结果为违规视频,并删除该待审核视频。因此,可以理解的是,上述获取第一视频帧图像与第二视频帧图像的相似度的步骤,可以是在第二视频帧的审核结果为不违规时执行。
这样,通过设定上述检测待审核视频中第一视频帧图像的前N帧图像的审核结果相同的触发条件,来进行待审核视频中的重复相似图像的审核,提高了视频审核结果的准确率。
步骤S230:判断相似度是否高于预设阈值。
步骤S240:如果相似度高于预设阈值,基于第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果。
在一些实施方式中,步骤S230以及步骤S240的内容可以参阅上述实施例的内容,在此不再赘述。
进一步的,上述如果相似度高于预设阈值,基于第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果,包括:
如果相似度高于预设阈值,获取对第二视频帧图像的审核结果;将审核结果作为对第一视频帧图像的审核结果。
在本申请实施例中,服务器在得到相似度高于预设阈值的判断结果后,可以获取对第二视频帧图像的审核结果,以便根据第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果。
在一些实施方式中,第二视频帧图像的审核结果可以是存储在服务器中,其中,该服务器可以是上述图1中的服务器,也可以是存储在电子设备中。因此,获取对第二视频帧图像的审核结果,可以是服务器从电子设备中获取,也可以是服务器从自身的存储器中获取。
由于第一视频帧图像与第二视频帧图像相似度高,因此服务器在获取到第二视频帧图像的审核结果后,可以将第二视频帧图像的审核结果作为对第一视频帧图像的审核结果。从而无需对待审核视频进行逐帧审核,避免了对相似性较高的图像进行重复审核,提高了审核效率。
例如,预设阈值设定为98%,若服务器获取到的第一视频帧图像与第二视频帧图像的相似度为99%,高于预设阈值98%,则服务器可以获取第二视频帧的审核结果,若获取到的第二视频帧图像的审核结果为不违规,则服务器可以确定第一视频帧图像的审核结果也为不违规。
另外,在一些实施方式中,如果相似度不高于预设阈值,则将第一视频帧图像存放到审核队列,审核队列用于存放待审核的视频帧图像。
其中,上述审核队列用于存放待审核的视频帧图像,可以是审查人员选取审核队列中的视频帧图像进行审核,也可以是机器自动选取审核队列中的视频帧图像进行审核。可以理解的是,相似度不高于预设阈值,可以说明第一视频帧图像与第二视频帧图像不相似,服务器无法对第一视频帧图像进行审核处理,因此,需要将该第一视频帧图像存放到审核队列,以便审核人员进行审核,或者机器审核。
步骤S250:当预设时间段内的每帧视频帧图像与每帧视频帧图像的前一抽样帧图像的相似度均大于预设阈值时,基于每帧视频帧图像的前一抽样帧图像的审核结果,确定对每帧视频帧图像的审核结果。
在一些实施方式中,服务器在进行视频帧图像之间的相似度判断,然后根据相似度进行视频图像审核时,可以具有时间限制,也就是说,服务器只能进行预设时间段的重复相似图像的审核。可以理解的是,预设时间段内,如果当前视频帧图像与当前视频帧图像的前一抽样帧图像的相似度不高于预设阈值,即当前视频帧图像与当前视频帧图像的前一抽样帧图像不相似,则服务器会退出重复相似图像的审核。也就是说,服务器如果需要进行预设时间段的重复相似图像的审核,则预设时间段内的每帧视频帧图像与每帧视频帧图像的前一抽样帧图像的相似度均需要大于预设阈值。
其中,上述预设时间段为允许服务器进行重复相似图像的审核处理的最大时长,也就是说,服务器进行重复相似图像的审核的时长超过该预设时间段,服务器就不能进行重复相似图像的审核。预设时间段可以预先存储于服务器,可根据待审核视频的具体情况进行,例如,预设时间段为5分钟。
可以理解的是,如果预设时间段内的每帧视频帧图像与每帧视频帧图像的前一抽样帧图像的相似度均大于预设阈值,则服务器可以基于每帧视频帧图像的前一抽样帧图像的审核结果,确定对每帧视频帧图像的审核结果。
例如,请参见图8,预设时间段为5分钟,如果6分钟内的每帧视频帧图像与每帧视频帧图像的前一抽样帧图像的相似度均大于预设阈值,即6分钟内所截取的直播截图都相似,服务器只可以对该5分钟内的视频帧图像进行审核,也就是说,服务器可以基于5分钟内的每帧视频帧图像的前一抽样帧图像的审核结果,确定对5分钟内的每帧视频帧图像的审核结果。
在另一些实施方式中,服务器进行重复相似图像的审核,具有审核次数限制,也就是说,服务器只能进行预设次数的重复相似图像的审核。其中,预设次数为允许服务器进行重复相似图像的审核的最大次数,也就是说,服务器进行重复相似图像的审核的次数超过该预设次数,服务器就不能进行重复相似图像的审核。预设次数可以预先存储于服务器,可根据待审核视频的具体情况进行,例如,预设次数为6,如果存在7个视频帧图像之间的相似度均大于预设阈值,即7张所截取的直播截图都相似,服务器只可以进行6次的重复相似图像的审核,即对6个视频帧图像进行审核,也就是说,服务器可以基于6个视频帧图像中的每帧视频帧图像的前一抽样帧图像的审核结果,确定对6个视频帧图像的审核结果。
步骤S260:将预设时间段后的视频帧图像存放到审核队列。
由于服务器进行重复相似图像的审核的时长超出上述预设时间段,服务器就不能进行重复相似图像的审核,因此,在一些实施方式中,服务器可以将预设时间段后的视频帧图像存放到审核队列,以便审查人员进行审核。例如,请参见图9,预设时间段为5分钟,服务器在进行了5分钟的重复相似图像的审核阶段后,将5分钟后的视频帧图像(106、107、108)存放到审核队列。
在一些实施方式中,服务器在将预设时间段后的视频帧图像存放到审核队列后,如果再次检测到待审核视频中第一视频帧图像的前N帧图像的审核结果相同时,可以重新进入预设时间段的重复相似图像的审核阶段。例如,请参见图9,N取3,预设时间段为5分钟,服务器在进行了5分钟的重复相似图像的审核阶段后,将5分钟后的视频帧图像(106、107、108)存放到审核队列,如果人工再一次审核出3张截图图像(106、107、108)的审核结果为不违规时,从图像109开始,服务器可以再次进入5分钟的重复相似图像的审核阶段。
本申请实施例提供的视频审核方法,通过设定服务器进行重复相似图像审核的触发条件、重复相似图像审核的预设时间段以及重复相似图像审核的设定算法等限制条件,来获取第一视频帧图像与第二视频帧图像的相似度,然后判断该相似度是否高于预设阈值,如果该相似度高于预设阈值,则基于第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果,从而使服务器只有在满足限制条件的情况,才能根据第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果,在相似度不高于预设阈值,才将第二视频帧图像存放至审核队列用以机器审核,或者传输至审核人员的电子设备进行人工审核,从而无需对相似度较高的视频图像进行重复审核,实现了对于相似性较高的视频图像,服务器可以基于相似性较高的视频图像中的其中一张视频图像的审核结果,确定相似性较高的图像中其他视频图像的审核结果,提高了审核结果的准确度的同时,也提高了审核效率。
请参阅图10,其示出了本申请实施例提供的一种视频审核装置400的结构框图,该视频审核装置400应用于服务器。该视频审核装置400包括:图像获取模块410、相似度获取模块420、相似度判断模块430以及结果获取模块440。其中,图像获取模块410用于获取第一视频帧图像以及第二视频帧图像,第二视频帧图像为待审核视频中第一视频帧图像的前一帧图像;相似度获取模块420用于获取第一视频帧图像与第二视频帧图像的相似度;相似度判断模块430用于判断相似度是否高于预设阈值;结果获取模块440用于如果相似度高于预设阈值,基于第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果。
在本申请实施例中,结果获取模块440可以具体用于:如果相似度高于预设阈值,获取对第二视频帧图像的审核结果;将审核结果作为对第一视频帧图像的审核结果。
在本申请实施例中,该视频审核装置400还可以包括:审核检测模块。该审核检测模块用于检测待审核视频中第一视频帧图像的前N帧图像的审核结果是否相同,N为正整数;如果相同,执行上述获取第一视频帧图像与第二视频帧图像的相似度的步骤。
在本申请实施例中,该视频审核装置400还可以包括:图像选取模块。其中,图像选取模块用于根据设定选取规则,从待审核视频中选取部分待审核的视频帧图像。图像获取模块可以包括图像排序单元以及图像确定单元。其中,图像排序单元用于根据部分待审核的视频帧图像中每帧视频帧图像于待审核视频中的时间,按照时间先后顺序对部分待审核的视频帧图像进行排序,得到视频图像序列;图像确定单元用于从部分待审核的视频帧图像中,获取第一视频帧图像,以及在视频图像序列中第一视频帧图像的前一帧图像,将前一帧图像作为前一抽样帧图像,得到第二视频帧图像。
在本申请实施例中,该视频审核装置400还可以包括:第一审核模块。该第一审核模块用于如果相似度不高于预设阈值,则将第一视频帧图像存放到审核队列,审核队列用于存放待审核的视频帧图像。
在本申请实施例中,该视频审核装置400还可以包括:第二审核模块。该第二审核模块用于当预设时间段内的每帧视频帧图像与每帧视频帧图像的前一抽样帧图像的相似度均大于预设阈值时,基于每帧视频帧图像的前一抽样帧图像的审核结果,确定对每帧视频帧图像的审核结果;将预设时间段后的视频帧图像存放到审核队列。
在本申请实施例中,相似度获取模块420可以具体用于:利用设定算法,计算第一视频帧图像与第二视频帧图像的相似度,其中,设定算法包括感知哈希算法运算、差异哈希算法运算、平均哈希算法运算、或者尺度不变特征变换算法。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述装置和模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,模块相互之间的耦合可以是电性,机械或其它形式的耦合。
另外,在本申请各个实施例中的各功能模块可以集成在一个处理模块中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。
综上,本申请实施例提供的视频审核方法、装置,在获取第一视频帧图像以及第二视频帧图像之后,获取第一视频帧图像与第二视频帧图像的相似度,然后判断该相似度是否高于预设阈值,如果该相似度高于预设阈值,则基于第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果,从而实现了根据第二视频帧图像的审核结果,确定对第一视频帧图像的审核结果,从而不需要对待审核视频进行逐帧审核,避免了对相似性较高的图像的重复审核,减少了视频图像的审核量,提高了审核效率。
请参考图11,其示出了本申请实施例提供的一种服务器的结构框图。该服务器200可以是数据服务器、网络服务器等能够运行应用程序的服务器。本申请中的服务器200可以包括一个或多个如下部件:处理器210、存储器220以及一个或多个应用程序,其中一个或多个应用程序可以被存储在存储器220中并被配置为由一个或多个处理器210执行,一个或多个程序配置用于执行如前述方法实施例所描述的方法。
处理器210可以包括一个或者多个处理核。处理器210利用各种接口和线路连接整个服务器200内的各个部分,通过运行或执行存储在存储器220内的指令、程序、代码集或指令集,以及调用存储在存储器220内的数据,执行服务器200的各种功能和处理数据。可选地,处理器210可以采用数字信号处理(Digital Signal Processing,DSP)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、可编程逻辑阵列(Programmable LogicArray,PLA)中的至少一种硬件形式来实现。处理器210可集成中央处理器(CentralProcessing Unit,CPU)、图像处理器(Graphics Processing Unit,GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责显示内容的渲染和绘制;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器210中,单独通过一块通信芯片进行实现。
存储器220可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory)。存储器220可用于存储指令、程序、代码、代码集或指令集。存储器220可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等。存储数据区还可以存储服务器200在使用中所创建的数据等。
请参阅图12,其示出了本申请实施例提供的一种计算机可读取存储介质的结构框图。该计算机可读取存储介质800中存储有程序代码,程序代码可被处理器调用执行上述方法实施例中所描述的方法。
计算机可读取存储介质800可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。可选地,计算机可读取存储介质800包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。计算机可读取存储介质800具有执行上述方法中的任何方法步骤的程序代码810的存储空间。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。程序代码810可以例如以适当形式进行压缩。
最后应说明的是:以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (9)

1.一种视频审核方法,其特征在于,应用于服务器,所述方法包括:
获取第一视频帧图像以及第二视频帧图像,所述第二视频帧图像为待审核视频中所述第一视频帧图像的前一抽样帧图像;
若所述第二视频帧的审核结果为不违规,将所述第一视频帧图像中的每个像素点的像素值,与所述第二视频帧图像中的对应位置上的像素点的像素值的匹配结果作为所述第一视频帧图像与所述第二视频帧图像的相似度,其中,若所述第一视频帧图像中的像素点的像素值与所述第二视频帧图像中的对应位置上的像素点的像素值的差值不超过预设范围,判定所述第一视频帧图像中的像素点的像素值与第二视频帧图像中的对应位置上的像素点的像素值匹配,所述匹配表征相似;
判断所述相似度是否高于预设阈值;
如果所述相似度高于所述预设阈值,基于所述第二视频帧图像的审核结果,确定对所述第一视频帧图像的审核结果。
2.根据权利要求1所述的方法,其特征在于,所述如果所述相似度高于所述预设阈值,基于所述第二视频帧图像的审核结果,确定对所述第一视频帧图像的审核结果,包括:
如果所述相似度高于所述预设阈值,获取对所述第二视频帧图像的审核结果;
将所述审核结果作为对所述第一视频帧图像的审核结果。
3.根据权利要求1所述的方法,其特征在于,在所述获取所述第一视频帧图像与所述第二视频帧图像的相似度之前,所述方法还包括:
检测所述待审核视频中所述第一视频帧图像的前N帧图像的审核结果是否相同,N为正整数;
如果相同,执行所述获取所述第一视频帧图像与所述第二视频帧图像的相似度的步骤。
4.根据权利要求1所述的方法,其特征在于,在所述获取第一视频帧图像以及第二视频帧图像之前,所述方法还包括:
根据设定选取规则,从待审核视频中选取部分待审核的视频帧图像;
所述获取第一视频帧图像以及第二视频帧图像,包括:
根据所述部分待审核的视频帧图像中每帧视频帧图像于所述待审核视频中的时间,按照时间先后顺序对所述部分待审核的视频帧图像进行排序,得到视频图像序列;
从所述部分待审核的视频帧图像中,获取第一视频帧图像,以及在所述视频图像序列中所述第一视频帧图像的前一帧图像,将所述前一帧图像作为前一抽样帧图像,得到第二视频帧图像。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述方法还包括:
如果所述相似度不高于所述预设阈值,则将所述第一视频帧图像存放到审核队列,所述审核队列用于存放待审核的视频帧图像。
6.根据权利要求5所述的方法,其特征在于,在所述如果所述相似度高于所述预设阈值,基于所述第二视频帧图像的审核结果,确定对所述第一视频帧图像的审核结果之后,所述方法还包括:
当预设时间段内的每帧视频帧图像与所述每帧视频帧图像的前一抽样帧图像的相似度均大于所述预设阈值时,基于所述每帧视频帧图像的前一抽样帧图像的审核结果,确定对所述每帧视频帧图像的审核结果;
将所述预设时间段后的视频帧图像存放到所述审核队列。
7.一种视频审核装置,其特征在于,应用于服务器,所述装置包括:
图像获取模块,用于获取第一视频帧图像以及第二视频帧图像,所述第二视频帧图像为待审核视频中所述第一视频帧图像的前一抽样帧图像;
相似度获取模块,用于若所述第二视频帧的审核结果为不违规,将所述第一视频帧图像中的每个像素点的像素值,与所述第二视频帧图像中的对应位置上的像素点的像素值的匹配结果作为所述第一视频帧图像与所述第二视频帧图像的相似度,其中,若所述第一视频帧图像中的像素点的像素值与所述第二视频帧图像中的对应位置上的像素点的像素值的差值不超过预设范围,判定所述第一视频帧图像中的像素点的像素值与第二视频帧图像中的对应位置上的像素点的像素值匹配,所述匹配表征相似;
相似度判断模块,用于判断所述相似度是否高于预设阈值;
结果获取模块,用于如果所述相似度高于所述预设阈值,基于所述第二视频帧图像的审核结果,确定对所述第一视频帧图像的审核结果。
8.一种服务器,其特征在于,包括:
一个或多个处理器;
存储器;
一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于执行如权利要求1-6任一项所述的方法。
9.一种计算机可读取存储介质,其特征在于,所述计算机可读取存储介质中存储有程序代码,所述程序代码可被处理器调用执行如权利要求1-6任一项所述的方法。
CN201811652864.6A 2018-12-28 2018-12-28 视频审核方法、装置、服务器及存储介质 Active CN109756746B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811652864.6A CN109756746B (zh) 2018-12-28 2018-12-28 视频审核方法、装置、服务器及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811652864.6A CN109756746B (zh) 2018-12-28 2018-12-28 视频审核方法、装置、服务器及存储介质

Publications (2)

Publication Number Publication Date
CN109756746A CN109756746A (zh) 2019-05-14
CN109756746B true CN109756746B (zh) 2021-03-19

Family

ID=66405094

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811652864.6A Active CN109756746B (zh) 2018-12-28 2018-12-28 视频审核方法、装置、服务器及存储介质

Country Status (1)

Country Link
CN (1) CN109756746B (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110321447A (zh) * 2019-07-08 2019-10-11 北京字节跳动网络技术有限公司 重复图像的确定方法、装置、电子设备及存储介质
CN110738236B (zh) * 2019-09-16 2022-07-22 深圳市国信合成科技有限公司 图像匹配方法、装置、计算机设备及存储介质
CN110599486A (zh) * 2019-09-20 2019-12-20 福州大学 一种视频抄袭的检测方法及系统
CN113542725B (zh) * 2020-04-22 2023-09-05 百度在线网络技术(北京)有限公司 视频审核方法、视频审核装置和电子设备
CN112115295A (zh) * 2020-08-27 2020-12-22 广州华多网络科技有限公司 视频图像检测方法、装置、及电子设备
CN112085097A (zh) * 2020-09-09 2020-12-15 北京市商汤科技开发有限公司 图像处理方法及装置、电子设备和存储介质
CN112381408B (zh) * 2020-11-16 2022-10-14 支付宝(杭州)信息技术有限公司 质检方法、装置和电子设备
CN112672184A (zh) * 2020-12-15 2021-04-16 创盛视联数码科技(北京)有限公司 一种视频审核及发布方法
CN112597339A (zh) * 2020-12-25 2021-04-02 合安科技技术有限公司 一种内容安全的审核方法、装置及相关设备
CN112860943A (zh) * 2021-01-04 2021-05-28 浙江诺诺网络科技有限公司 一种教学视频审核方法、装置、设备及介质
CN113051236B (zh) * 2021-03-09 2022-06-07 北京沃东天骏信息技术有限公司 审核视频的方法、装置及计算机可读存储介质
CN113627534A (zh) * 2021-08-11 2021-11-09 百度在线网络技术(北京)有限公司 识别动态图像的类型的方法、装置及电子设备
CN113873278B (zh) * 2021-09-26 2024-01-23 北京奇艺世纪科技有限公司 播放内容审核方法、装置及电子设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101076115A (zh) * 2006-12-26 2007-11-21 腾讯科技(深圳)有限公司 一种视频内容审核系统和方法
CN101360184A (zh) * 2008-09-22 2009-02-04 腾讯科技(深圳)有限公司 提取视频关键帧的系统及方法
WO2017066874A1 (en) * 2015-10-19 2017-04-27 Fatehali Dharssi Methods and systems for processing digital video files for image insertion involving computerized detection of similar backgrounds

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101076115A (zh) * 2006-12-26 2007-11-21 腾讯科技(深圳)有限公司 一种视频内容审核系统和方法
CN101360184A (zh) * 2008-09-22 2009-02-04 腾讯科技(深圳)有限公司 提取视频关键帧的系统及方法
WO2017066874A1 (en) * 2015-10-19 2017-04-27 Fatehali Dharssi Methods and systems for processing digital video files for image insertion involving computerized detection of similar backgrounds

Also Published As

Publication number Publication date
CN109756746A (zh) 2019-05-14

Similar Documents

Publication Publication Date Title
CN109756746B (zh) 视频审核方法、装置、服务器及存储介质
CN109803152B (zh) 违规审核方法、装置、电子设备以及存储介质
CN108965950B (zh) 一种广告监测方法和装置
CN106021421B (zh) 一种加速网页渲染的方法及装置
CN109669795B (zh) 崩溃信息处理方法及装置
CN110263680B (zh) 图像处理方法、装置和系统及存储介质
CN107295352B (zh) 一种视频压缩方法、装置、设备及存储介质
CN108154031B (zh) 伪装应用程序的识别方法、装置、存储介质和电子装置
CN109788306B (zh) 信息处理方法、装置、服务器及存储介质
CN111182332A (zh) 视频处理方法、装置、服务器及存储介质
CN112487223A (zh) 图像处理方法、装置以及电子设备
CN108171053B (zh) 一种规则发现的方法以及系统
CN107995167B (zh) 一种设备识别方法及服务器
US10631050B2 (en) Determining and correlating visual context on a user device with user behavior using digital content on the user device
WO2020233324A1 (zh) 终端设备性能测试的方法及装置
CN105491400B (zh) 一种视频流下载方法及其设备
CN113553469B (zh) 数据处理方法、装置、电子设备及计算机存储介质
CN111432271B (zh) 一种多屏交互方法及其系统
CN109783689B (zh) 信息处理方法、装置及电子设备
CN112182520B (zh) 非法账号的识别方法、装置、可读介质及电子设备
CN112084444B (zh) 页面加载时间检测方法、装置和计算机可读存储介质
CN111953993A (zh) 水印提取和添加方法、装置、电子设备及存储介质
CN115102728B (zh) 一种用于信息安全的扫描器识别方法、装置、设备及介质
KR20150048277A (ko) 클라우드 컴퓨팅에서의 효율적 자원관리를 위한 시각 데이터 가공장치 및 그 방법
CN112559111B (zh) 一种共享桌面时的截屏方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
EE01 Entry into force of recordation of patent licensing contract
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20190514

Assignee: GUANGZHOU CUBESILI INFORMATION TECHNOLOGY Co.,Ltd.

Assignor: GUANGZHOU HUADUO NETWORK TECHNOLOGY Co.,Ltd.

Contract record no.: X2021440000031

Denomination of invention: Video audit method, device, server and storage medium

License type: Common License

Record date: 20210125

GR01 Patent grant
GR01 Patent grant