CN105915953A - 直播视频鉴别的方法、装置和系统 - Google Patents

直播视频鉴别的方法、装置和系统 Download PDF

Info

Publication number
CN105915953A
CN105915953A CN201610414734.3A CN201610414734A CN105915953A CN 105915953 A CN105915953 A CN 105915953A CN 201610414734 A CN201610414734 A CN 201610414734A CN 105915953 A CN105915953 A CN 105915953A
Authority
CN
China
Prior art keywords
picture
server
live video
identification result
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610414734.3A
Other languages
English (en)
Other versions
CN105915953B (zh
Inventor
范志兴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201610414734.3A priority Critical patent/CN105915953B/zh
Publication of CN105915953A publication Critical patent/CN105915953A/zh
Application granted granted Critical
Publication of CN105915953B publication Critical patent/CN105915953B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/254—Management at additional data server, e.g. shopping server, rights management server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明涉及一种直播视频鉴别的方法、装置和系统，包括：接收接口服务器从直播视频流中随直播播放进度变化提取并发送的视频帧对应的数据包；根据所述数据包解码生成所述视频帧对应的图片；将所述图片发送至处理服务器，以使所述处理服务器鉴别所述图片得到图片鉴别结果，所述图片鉴别结果用于得到直播视频的鉴别结果，能快速高效地得到实时变化的动态视频的鉴别结果。

Description

直播视频鉴别的方法、装置和系统
技术领域
本发明涉及计算机技术领域，特别是涉及一种直播视频鉴别的方法、装置和系统。
背景技术
随着计算机技术的发展，网络承载的数据量巨增，视频直播作为一种重要的网络应用方式，其直播形式和直播内容日益丰富，用户群的数目也越来越多。视频直播的过程中往往存在一些不良直播内容，如涉及非法色情服务等，严重影响社会风气。
现有的对非法直播视频的鉴别方法往往采用人工审核的方式，需要大量人力资源，同时人工审核需要一直在视频播放的过程中查看各个视频帧，复杂度高，效率低。
发明内容
基于此，有必要针对上述技术问题，提供一种直播视频鉴别的方法、装置和系统，降低对直播视频鉴别的复杂度，提高鉴别效率。
一种直播视频鉴别的方法，所述方法包括：
接收接口服务器从直播视频流中随直播播放进度变化提取并发送的视频帧对应的数据包；
根据所述数据包解码生成所述视频帧对应的图片；
将所述图片发送至处理服务器，以使所述处理服务器鉴别所述图片得到图片鉴别结果，所述图片鉴别结果用于得到直播视频的鉴别结果。
一种直播视频鉴别的装置，所述装置包括：
接收模块，用于接收接口服务器从直播视频流中随直播播放进度变化提取并发送的视频帧对应的数据包；
图片生成模块，用于根据所述数据包解码生成所述视频帧对应的图片；
发送模块，用于将所述图片发送至处理服务器，以使所述处理服务器鉴别所述图片得到图片鉴别结果，所述图片鉴别结果用于得到直播视频的鉴别结果。
上述直播视频鉴别的方法和装置，通过接收接口服务器从直播视频流中随直播播放进度变化提取发送的视频帧对应的数据包，根据数据包解码生成视频帧对应的图片，将图片发送至处理服务器，以使处理服务器鉴别图片得到图片鉴别结果，图片鉴别结果用于得到直播视频的鉴别结果，由于图片是从直播视频流中随直播播放进度变化提取的，代表了实时的直播视频内容，且对静态图片进行鉴别复杂度低，效率高，从而实现通过静态图片的鉴别结果快速高效地得到实时变化的动态视频的鉴别结果。
一种直播视频鉴别的系统，所述系统包括：
接口服务器，用于接收直播视频流，从所述直播视频流中随直播播放进度变化提取视频帧对应的数据包，将所述数据包发送至鉴别服务器；
鉴别服务器，用于根据所述数据包解码生成所述视频帧对应的图片，将所述图片发送至处理服务器，以使所述处理服务器鉴别所述图片得到图片鉴别结果，所述图片鉴别结果用于得到直播视频的鉴别结果。
上述直播视频鉴别的系统，通过接口服务器和鉴别服务器的配合，接口服务器接收直播视频流，从直播视频流中随直播播放进度变化提取视频帧对应的数据包，将数据包发送至鉴别服务器，鉴别服务器根据数据包解码生成视频帧对应的图片，将图片发送至处理服务器，以使处理服务器鉴别图片得到图片鉴别结果，图片鉴别结果用于得到直播视频的鉴别结果。由于图片是从直播视频流中随直播播放进度变化提取的，代表了实时的直播视频内容，且对静态图片进行鉴别复杂度低，效率高，从而实现通过静态图片的鉴别结果快速高效地得到实时变化的动态视频的鉴别结果。
附图说明
图1为一个实施例中直播视频鉴别的方法的应用环境图；
图2为一个实施例中图1中鉴别服务器的内部结构图；
图3为一个实施例中直播视频鉴别的方法的流程图；
图4为一个实施例中鉴别组件服务器得到图片鉴别结果的流程图；
图5为一个具体的实施例中直播视频鉴别的方法的流程示意图；
图6为一个实施例中直播视频鉴别的系统的结构框图；
图7为另一个实施例中直播视频鉴别的系统的结构框图；
图8为一个实施例中直播视频鉴别的装置的结构框图；
图9为一个实施例中发送模块的结构框图。
具体实施方式
图1为一个实施例中直播视频鉴别的方法运行的应用环境图，如图1所示，该应用环境包括终端110、直播后台服务器120、接口服务器130、流控服务器140、鉴别服务器150、处理服务器160、第三方平台服务器170，各个服务器和终端之间都可以通过网络进行通信。
终端110可为智能手机、平板电脑、笔记本电脑、台式计算机等，但并不局限于此。终端110可通过网络向直播后台服务器120发送申请直播房间请求，直播后台服务器120可根据终端110的信息，如终端110所在的地区和运营商为其分配接口服务器130，终端110向接口服务器130发送申请直播房间请求至接口服务器130，接口服务器130转发申请直播房间请求至流控服务器140，流控服务器140申请合适的鉴别服务器150，鉴别服务器150的分配可根据负载均衡原则，接口服务器130从直播视频流中随直播播放进度变化提取视频帧对应的数据包发送至鉴别服务器150，鉴别服务器150解码生成图片，并将图片发送至处理服务器160，处理服务器160鉴别图片得到图片鉴别结果，图片鉴别结果用于得到直播视频的鉴别结果。处理服务器160可以由云存储服务器161和鉴别组件服务器162组成，云存储服务器161用于存储图片并为图片分配图片标识，鉴别组件服务器162用于从云存储服务器161下载图片并进行鉴别。第三方平台服务器170可以从处理服务器160得到直播视频的鉴别结果和对应的图片，从而高效的识别非法直播视频，发送视频直播调整指令。
在一个实施例中，图1中的鉴别服务器150的内部结构如图2所示，该鉴别服务器150包括通过系统总线连接的处理器、存储介质、内存和网络接口。其中，该鉴别服务器150的存储介质存储有操作系统、数据库和一种直播视频鉴别的装置，数据库用于存储数据，如存储数据包等，该装置用于实现一种适用于鉴别服务器150的直播视频鉴别的方法。该鉴别服务器150的处理器用于提供计算和控制能力，支撑整个鉴别服务器150的运行。该鉴别服务器150的内存为存储介质中的直播视频鉴别的装置的运行提供环境。该鉴别服务器150的网络接口用于与接口服务器130或处理服务器160通过网络连接通信，比如接口服务器130发送的数据包，向处理服务器160发送数据等。
在一个实施例中，如图3所示，提供了一种直播视频鉴别的方法，以应用于上述应用环境中的鉴别服务器来举例说明，包括以下步骤：
步骤S210，接收接口服务器从直播视频流中随直播播放进度变化提取并发送的视频帧对应的数据包。
具体的，接口服务器用于上行和下行音视频数据，终端将直播视频流上传到接口服务器以便其它终端下载观看，直播视频流可以包括视频数据和音频数据。接口服务器随直播播放进度变化提取直播视频流中的视频帧对应的数据包，提取的具体算法可根据需要自定义，如根据直播视频流的编码模式提取，如果是IPPP模式的编码，则可只提取I帧，也可提取I帧和I帧后面连续的P帧，I帧后面连续的P帧的个数可根据需要自定义，如预设数量的P帧。如果是带有B帧模式的编码，则可根据B帧的预测模式相应的提取用于解码B帧的P帧。还可以设置提取的周期，如与前一帧提取时间的间隔大于预设时间才进行提取，以灵活的控制相邻视频帧的提取间隔。由于接口服务器是随直播播放进度变化提取的视频帧对应的数据包，随着时间变化一旦检测到I帧，在满足其它提取条件的情况下，则可提取包括I帧的一个或多个视频帧，由于一个GOP(Group ofPictures，画面组)包含一个I帧，一个GOP的长度有限，从而保证了视频帧提取的频率，可保证在直播视频不断变化的直播过程中，实时的对直播视频进行不间断的检测。
步骤S220，根据数据包解码生成视频帧对应的图片。
具体的，根据数据包的编码模式采取相应的解码方法对数据包进行解码生成视频帧对应的图片，可将图片进行转码成预设格式进行存储，如JPG(JPEG，Joint Photographic Experts Group)图片、bmp(Bitmap，位图文件)图片、png(Portable Network Graphic Format，图像文件存储格式)图片、gif(GraphicsInterchange Format，图像互换格式)图片等，可根据需要选择格式。
步骤S230，将图片发送至处理服务器，以使处理服务器鉴别图片得到图片鉴别结果，图片鉴别结果用于得到直播视频的鉴别结果。
具体的，处理服务器可由一个或多个服务器组成，处理服务器用于存储图片和对图片进行鉴别得到图片的鉴别结果。具体的鉴别方法可根据需要自定义，如采用训练学习的方法建立图像鉴别模型，输入待鉴别的图片得到鉴别结果，鉴别结果可分为不同的等级，鉴别的类型分为多种，如色情类别、犯罪类别等。图片的鉴别结果可直接作为直播视频的鉴别结果，由于图片的数目可能为一个或多个，如果是多个图片时，可对多个图片的鉴别结果进行加权得到直播视频的鉴别结果。存储在处理服务器的图片作为直播视频的快照画面，随着直播播放进度变化，存储的图片变化，直播视频的快照画面不断更新。图片的鉴别结果与图片对应，可提供接口供第三方平台使用，第三方平台为提供视频直播服务的平台，使得第三方平台不需要开发鉴别功能模块，就能直接得到直播视频的鉴别结果，如第三方平台服务器根据拉取条件从处理服务器拉取图片和图片的鉴别结果。也可先拉取图片的鉴别结果，判断图片的鉴别结果是否符合预设范围，如果是，则鉴定为可正常直播视频，如果不是，则拉取对应的图片，可将图片发送至人工审核，得到直播视频的最终鉴别结果。可以理解的是，由于图片和图片的鉴别结果随直播播放进度变化，可能在第一时间范围内，直播视频的鉴别结果为正常，在第二时间范围内，直播视频的内容发生改变，鉴别为非法直播视频，实现通过静态图片快速高效地得到实时变化的动态视频的鉴别结果。
本实施例中，通过接收接口服务器从直播视频流中随直播播放进度变化提取发送的视频帧对应的数据包，根据数据包解码生成视频帧对应的图片，将图片发送至处理服务器，以使处理服务器鉴别图片得到图片鉴别结果，图片鉴别结果用于得到直播视频的鉴别结果，由于图片是从直播视频流中随直播播放进度变化提取的，代表了实时的直播视频内容，且对静态图片进行鉴别复杂度低，效率高，从而实现通过静态图片的鉴别结果快速高效地得到实时变化的动态视频的鉴别结果。
在一个实施例中，处理服务器包括云存储服务器和鉴别组件服务器，如图4所示，步骤S230包括：
步骤S231，将图片发送至云存储服务器存储，并接收云存储服务器返回的图片的图片标识信息。
具体的，将图片发送至云存储服务器存储，无需用户提前购买硬件，即可迅速创建或释放任意多台云存储服务器，保证了直播视频直播时间长时对应的大数量的图片的存储空间，也方便其它终端或服务器对云存储服务器上的图片的下载。且将图片存储与图片鉴别分为不同的服务器进行处理，进一步提高了处理效率。图片标识信息用于唯一标识一张图片，可采用URL(Uniform ResourceLocator，统一资源定位符)地址、图片编号等。
步骤S232，将图片标识信息发送至鉴别组件服务器，以使鉴别组件服务器根据图片标识信息下载图片并鉴别得到图片鉴别结果，图片鉴别结果用于得到直播视频的鉴别结果。
具体的，将图片标识信息发送至鉴别组件服务器，则鉴别组件服务器可根据需求自行根据图片标识信息下载图片，提高了图片传递的灵活性。可根据图片在直播视频对应的时间段，将图片标识信息发送至不同的鉴别组件服务器，可根据图片的重要程度采取不同的鉴别策略，提高图片鉴别速度与质量间的平衡度。
在一个实施例中，数据包为直播视频的关键帧对应的数据包。
具体的，关键帧是指能独立解码的视频帧，一般指I帧。接口服务器提取的数据包是关键帧对应的数据包，则只需要提取关键帧本身的数据，不需要依赖于其它视频帧的数据，进一步减少了图片的数据量，减少了计算的运算量，提高了图片的生成速度，进而提高了直播视频的鉴别效率。
在一个实施例中，云存储服务器存储的图片与鉴别组件服务器存储的图片鉴别结果对应，用于供第三方平台服务器识别非法直播视频和发送视频直播调整指令。
具体的，可建立云存储服务器存储的图片与鉴别组件服务器存储的图片鉴别结果的对应关系，如通过图片标识信息将图片与图片鉴别结果联系起来，可提供接口与权限供第三方平台服务器拉取需要的数据。云服务器存储图片都有对应的图片标识信息，云存储服务器接收到第三方平台服务器发送的携带图片标识信息的图片拉取请求后，获取图片标识信息对应的图片，并返回至第三方平台服务器。鉴别组件服务器根据图片标识信息下载图片的得到对应的图片鉴别结果，鉴别组件服务器接收到第三方平台服务器发送的携带图片标识信息的图片鉴别结果拉取请求后，获取图片标识信息对应的图片鉴别结果，并返回至第三方平台服务器。从而第三方平台服务器可根据图片鉴别结果和图片识别非法直播视频，如当图片鉴别结果的级别数高于预设等级，则直播视频鉴定为非法直播视频。第三方平台服务器也可以根据图片鉴别结果确定是否拉取图片鉴别结果对应图片，如当图片鉴别结果的级别数高于预设等级才进行拉取图片，拉取的图片可发送至人工审核或其它更精准的图像鉴别模块进行鉴别，进一步保证直播视频鉴别的正确率。第三方平台服务器可根据识别结果发送视频直播调整指令，如对于视频直播的用户帐号进行封号处理或中断直播视频等。第三方平台服务器可方便地通过接口与云存储服务器和鉴别组件服务器互动拉取需要的数据，提高了直播视频鉴别的通用性。
在一个具体的实施例中，结合图5，直播视频鉴别的方法的过程如下：
1.终端向接口服务器发起视频直播房间开启请求；
2.接口服务器将视频直播房间开启请求转发至流控服务器；
3.流控服务器判断当前是否支持直播视频鉴别，如果是，则向负载均衡服务器申请鉴别服务器，并将申请的鉴别服务器的标识信息填充在用户信息并同步至接口服务器；
4.接口服务器接收到终端发送的直播视频流，从直播视频流中提取I帧对应的数据包，将数据包发送至标识信息对应的鉴别服务器；
5.鉴别服务器解码数据包并转码生成jpg格式的图片；
6.鉴别服务器将图片发送至云存储服务器存储，接收云存储服务器返回的图片的图片URL；
7.鉴别服务器将图片URL发送鉴别组件服务器，鉴别组件服务器根据图片URL下载所述图片并鉴别得到图片鉴别结果；
8.第三方平台服务器从云存储服务器拉取图片，从鉴别组件服务器拉取图片鉴别结果，根据图片鉴别结果和图片识别非法直播视频，并发送视频直播调整指令。
在一个实施例中，如图6所示，提供了一种直播视频鉴别的系统，包括：
接口服务器410，用于接收直播视频流，从直播视频流中随直播播放进度变化提取视频帧对应的数据包，将数据包发送至鉴别服务器。
具体的，接口服务器用于上行和下行音视频数据，终端将直播视频流上传到接口服务器以便其它终端下载观看，直播视频流可以包括视频数据和音频数据。接口服务器随直播播放进度变化提取直播视频流中的视频帧对应的数据包，提取的具体算法可根据需要自定义，如根据直播视频流的编码模式提取，如果是IPPP模式的编码，则可只提取I帧，也可提取I帧和I帧后面连续的P帧，I帧后面连续的P帧的个数可根据需要自定义，如预设数量的P帧。如果是带有B帧模式的编码，则可根据B帧的预测模式相应的提取用于解码B帧的P帧。还可以设置提取的周期，如与前一帧提取时间的间隔大于预设时间才进行提取，以灵活的控制相邻视频帧的提取间隔。由于接口服务器是随直播播放进度变化提取的视频帧对应的数据包，一旦检测到I帧，在满足其它提取条件的情况下，则可提取包括I帧的一个或多个视频帧，由于一个GOP(Group of Pictures，画面组)包含一个I帧，一个GOP的长度有限，从而保证了视频帧提取的频率，可保证在直播视频不断变化的直播过程中，实时的对直播视频进行不间断的检测。
鉴别服务器420，用于根据数据包解码生成视频帧对应的图片，将图片发送至处理服务器，以使处理服务器鉴别图片得到图片鉴别结果，图片鉴别结果用于得到直播视频的鉴别结果。
具体的，鉴别服务器根据数据包的编码模式采取相应的解码方法对数据包进行解码生成视频帧对应的图片，可将图片进行转码成预设格式进行存储，如JPG图片、bmp图片、png图片、gif图片等，可根据需要选择格式。
处理服务器可由一个或多个服务器组成，处理服务器用于存储图片和对图片进行鉴别得到图片的鉴别结果。具体的鉴别方法可根据需要自定义，如采用训练学习的方法建立图像鉴别模型，输入待鉴别的图片得到鉴别结果，鉴别结果可分为不同的等级，鉴别的类型分为多种，如色情类别、犯罪类别等。图片的鉴别结果可直接作为直播视频的鉴别结果，由于图片的数目可能为一个或多个，如果是多个图片时，可对多个图片的鉴别结果进行加权得到直播视频的鉴别结果。存储在处理服务器的图片作为直播视频的快照画面，随着直播播放进度变化，存储的图片变化，直播视频的快照画面不断更新。图片的鉴别结果与图片对应，可提供接口供第三方平台使用，第三方平台为提供视频直播服务的平台，使得第三方平台不需要开发鉴别功能模块，就能直接得到直播视频的鉴别结果，如第三方平台服务器根据拉取条件从处理服务器拉取图片和图片的鉴别结果。也可先拉取图片的鉴别结果，判断图片的鉴别结果是否符合预设范围，如果是，则鉴定为可正常直播视频，如果不是，则拉取对应的图片，可将图片发送至人工审核，得到直播视频的最终鉴别结果。可以理解的是，由于图片和图片的鉴别结果随直播播放进度变化，可能在第一时间范围内，直播视频的鉴别结果为正常，在第二时间范围内，直播视频的内容发生改变，鉴别为非法直播视频，实现通过静态图片快速高效地得到实时变化的动态视频的鉴别结果。
本实施例中，通过接口服务器和鉴别服务器的配合，接口服务器接收直播视频流，从直播视频流中随直播播放进度变化提取视频帧对应的数据包，将数据包发送至鉴别服务器，鉴别服务器根据数据包解码生成视频帧对应的图片，将图片发送至处理服务器，以使处理服务器鉴别图片得到图片鉴别结果，图片鉴别结果用于得到直播视频的鉴别结果。由于图片是从直播视频流中随直播播放进度变化提取的，代表了实时的直播视频内容，且对静态图片进行鉴别复杂度低，效率高，从而实现通过静态图片的鉴别结果快速高效地得到实时变化的动态视频的鉴别结果。
在一个实施例中，处理服务器包括云存储服务器和鉴别组件服务器，接口服务器410还用于将图片发送至云存储服务器存储，并接收云存储服务器返回的图片的图片标识信息，接口服务器410还用于将图片标识信息发送至鉴别组件服务器，以使鉴别组件服务器根据图片标识信息下载图片并鉴别得到图片鉴别结果，图片鉴别结果用于得到直播视频的鉴别结果。
具体的，接口服务器410将图片发送至云存储服务器存储，无需用户提前购买硬件，即可迅速创建或释放任意多台云存储服务器，保证了直播视频直播时间长时对应的大数量的图片的存储空间，也方便其它终端或服务器对云存储服务器上的图片的下载。且将图片存储与图片鉴别分为不同的服务器进行处理，进一步提高了处理效率。图片标识信息用于唯一标识一张图片，可采用URL地址、图片编号等。
接口服务器410将图片标识信息发送至鉴别组件服务器，则鉴别组件服务器可根据需求自行根据图片标识信息下载图片，提高了图片传递的灵活性。可根据图片在直播视频对应的时间段，将图片标识信息发送至不同的鉴别组件服务器，可根据图片的重要程度采取不同的鉴别策略，提高图片鉴别速度与质量间的平衡度。
在一个具体的实施例中，鉴别组件服务器的环境参数为操作系统tlinux/CenterOS cpu:Intel(R)Xeon(R)CPU X3330@2.66GHz，对960*576的直播视频流进行鉴别，从接口服务器接收到直播视频流，提取I帧对应的数据包，将数据包发送至鉴别服务器，到鉴别服务器根据数据包解码生成视频帧对应的图片，将图片发送至云存储服务器，以使云存储服务器返回图片标识信息，到鉴别组件服务器接收到图片标识信息，鉴别组件服务器根据图片标识信息下载图片，并对图片进行鉴别得到图片的鉴别结果，只需要3秒的时间，可见系统可以快速对直播视频流进行鉴别，基本达到实时鉴别的目的。鉴别的结果还可包括当前鉴别结果的可信度，可信度的大小与图片的画面采光，画质，分辨率相关，一般画面的采光，画质，分辨率低时，可信度低。鉴别结果还可包括性感指数、正常指数和色情指数，可通过打分的形式得到鉴别结果。用户可自定义各个指数达到预设条件时，将图片识别为非法图片，如设定色情指数大于50时，图片为非法图片。
在一个实施例中，接口服务器还用于随直播播放进度变化提取直播视频的关键帧对应的目标数据包，将目标数据包发送至鉴别服务器。
具体的，关键帧是指能独立解码的视频帧，一般指I帧。接口服务器提取的数据包是关键帧对应的数据包，则只需要提取关键帧本身的数据，不需要依赖于其它视频帧的数据，进一步减少了图片的数据量，减少了计算的运算量，提高了图片的生成速度，进而提高了直播视频的鉴别效率。
在一个实施例中，如图7所示，系统还包括：流控服务器430，接口服务器还用于接收终端发送的视频直播请求，转发视频直播请求至流控服务器，流控服务器430用于根据视频直播请求申请目标鉴别服务器，将目标鉴别服务器对应的目标标识信息发送至接口服务器410，接口服务器410还用于根据目标标识信息确定目标鉴别服务器，将数据包发送至目标鉴别服务器。
具体的，流控服务器用于对视频直播的流程进行控制，如可用于维护房间信息，房间成员列表信息，进行音视频参数调整，视频直播请求用于申请一个直播房间，接口服务器将终端发送的视频直播请求转发至流控服务器，流控服务器根据视频直播请求申请目标鉴别服务器，申请时可向负载均衡服务器申请，负载均衡服务器根据负载均衡算法分配合适的鉴别服务器作为目标鉴别服务器。将目标鉴别服务器对应的目标标识信息发送至接口服务器410，目标标识信息用于唯一标识一个鉴别服务器，可为IP地址信息等，可将目标标识信息填充在用户信息中发送至接口服务器410。接口服务器410还用于根据目标标识信息确定目标鉴别服务器，将数据包发送至目标鉴别服务器。通过流控服务器选择合适的目标鉴别服务器，使得各个目标鉴别服务器之间分配合理，从而保证了直播视频鉴别的服务器的资源占用平衡度，使得在有多个直播视频需要鉴别时能并行有序的协作工作。
在一个实施例中，云存储服务器存储的图片与鉴别组件服务器存储的图片鉴别结果对应，用于供第三方平台服务器识别非法直播视频和发送视频直播调整指令。
具体的，可建立云存储服务器存储的图片与鉴别组件服务器存储的图片鉴别结果的对应关系，如通过图片标识信息将图片与图片鉴别结果联系起来，可提供接口与权限供第三方平台服务器拉取需要的数据。云服务器存储图片都有对应的图片标识信息，云存储服务器接收到第三方平台服务器发送的携带图片标识信息的图片拉取请求后，获取图片标识信息对应的图片，并返回至第三方平台服务器。鉴别组件服务器根据图片标识信息下载图片的得到对应的图片鉴别结果，鉴别组件服务器接收到第三方平台服务器发送的携带图片标识信息的图片鉴别结果拉取请求后，获取图片标识信息对应的图片鉴别结果，并返回至第三方平台服务器。从而第三方平台服务器可根据图片鉴别结果和图片识别非法直播视频，如当图片鉴别结果的级别数高于预设等级，则直播视频鉴定为非法直播视频。第三方平台服务器也可以根据图片鉴别结果确定是否拉取图片鉴别结果对应图片，如当图片鉴别结果的级别数高于预设等级才进行拉取图片，拉取的图片可发送至人工审核或其它更精准的图像鉴别模块进行鉴别，进一步保证直播视频鉴别的正确率。第三方平台服务器可根据识别结果发送视频直播调整指令，如对于视频直播的用户帐号进行封号处理或中断直播视频等。第三方平台服务器可方便地通过接口与云存储服务器和鉴别组件服务器互动拉取需要的数据，提高了直播视频鉴别的通用性。
在一个实施例中，如图8所示，提供了一种直播视频鉴别的装置，包括：
接收模块510，用于接收接口服务器从直播视频流中随直播播放进度变化提取并发送的视频帧对应的数据包。
图片生成模块520，用于根据数据包解码生成视频帧对应的图片。
发送模块530，用于将图片发送至处理服务器，以使处理服务器鉴别图片得到图片鉴别结果，图片鉴别结果用于得到直播视频的鉴别结果。
在一个实施例中，处理服务器包括云存储服务器和鉴别组件服务器，如图9所示，发送模块530包括：
第一发送单元531，用于将图片发送至云存储服务器存储，并接收云存储服务器返回的图片的图片标识信息。
第二发送单元532，用于将图片标识信息发送至鉴别组件服务器，以使鉴别组件服务器根据图片标识信息下载图片并鉴别得到图片鉴别结果，图片鉴别结果用于得到直播视频的鉴别结果。
在一个实施例中，数据包为直播视频的关键帧对应的数据包。
在一个实施例中，云存储服务器存储的图片与鉴别组件服务器存储的图片鉴别结果对应，用于供第三方平台服务器识别非法直播视频和发送视频直播调整指令。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述程序可存储于一计算机可读取存储介质中，如本发明实施例中，该程序可存储于计算机系统的存储介质中，并被该计算机系统中的至少一个处理器执行，以实现包括如上述各方法的实施例的流程。其中，所述存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)或随机存储记忆体(Random Access Memory，RAM)等。
以上所述实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。

Claims (13)

1.一种直播视频鉴别的方法，所述方法包括：
接收接口服务器从直播视频流中随直播播放进度变化提取并发送的视频帧对应的数据包；
根据所述数据包解码生成所述视频帧对应的图片；
将所述图片发送至处理服务器，以使所述处理服务器鉴别所述图片得到图片鉴别结果，所述图片鉴别结果用于得到直播视频的鉴别结果。
2.根据权利要求1所述的方法，其特征在于，所述处理服务器包括云存储服务器和鉴别组件服务器，所述将所述图片发送至处理服务器，以使所述处理服务器鉴别所述图片得到图片鉴别结果，所述图片鉴别结果用于得到直播视频的鉴别结果的步骤包括：
将所述图片发送至所述云存储服务器存储，并接收所述云存储服务器返回的所述图片的图片标识信息；
将所述图片标识信息发送至所述鉴别组件服务器，以使所述鉴别组件服务器根据所述图片标识信息下载所述图片并鉴别得到图片鉴别结果，所述图片鉴别结果用于得到直播视频的鉴别结果。
3.根据权利要求1所述的方法，其特征在于，所述数据包为所述直播视频的关键帧对应的数据包。
4.根据权利要求2所述的方法，其特征在于，所述云存储服务器存储的图片与所述鉴别组件服务器存储的图片鉴别结果对应，用于供第三方平台服务器识别非法直播视频和发送视频直播调整指令。
5.一种直播视频鉴别的系统，其特征在于，所述系统包括：
接口服务器，用于接收直播视频流，从所述直播视频流中随直播播放进度变化提取视频帧对应的数据包，将所述数据包发送至鉴别服务器；
鉴别服务器，用于根据所述数据包解码生成所述视频帧对应的图片，将所述图片发送至处理服务器，以使所述处理服务器鉴别所述图片得到图片鉴别结果，所述图片鉴别结果用于得到直播视频的鉴别结果。
6.根据权利要求5所述的系统，其特征在于，所述处理服务器包括云存储服务器和鉴别组件服务器；
所述接口服务器还用于将所述图片发送至所述云存储服务器存储，并接收所述云存储服务器返回的所述图片的图片标识信息；
所述接口服务器还用于将所述图片标识信息发送至所述鉴别组件服务器，以使所述鉴别组件服务器根据所述图片标识信息下载所述图片并鉴别得到图片鉴别结果，所述图片鉴别结果用于得到直播视频的鉴别结果。
7.根据权利要求5所述的系统，其特征在于，所述接口服务器还用于随直播播放进度变化提取所述直播视频的关键帧对应的目标数据包，将所述目标数据包发送至所述鉴别服务器。
8.根据权利要求5所述的系统，其特征在于，所述系统还包括：流控服务器；
所述接口服务器还用于接收终端发送的视频直播请求，转发所述视频直播请求至所述流控服务器；
所述流控服务器用于根据所述视频直播请求申请目标鉴别服务器，将目标鉴别服务器对应的目标标识信息发送至所述接口服务器；
所述接口服务器还用于根据所述目标标识信息确定所述目标鉴别服务器，将所述数据包发送至所述目标鉴别服务器。
9.根据权利要求6所述的系统，其特征在于，所述云存储服务器存储的图片与所述鉴别组件服务器存储的图片鉴别结果对应，用于供第三方平台服务器识别非法直播视频和发送视频直播调整指令。
10.一种直播视频鉴别的装置，其特征在于，所述装置包括：
接收模块，用于接收接口服务器从直播视频流中随直播播放进度变化提取并发送的视频帧对应的数据包；
图片生成模块，用于根据所述数据包解码生成所述视频帧对应的图片；
发送模块，用于将所述图片发送至处理服务器，以使所述处理服务器鉴别所述图片得到图片鉴别结果，所述图片鉴别结果用于得到直播视频的鉴别结果。
11.根据权利要求10所述的装置，其特征在于，所述处理服务器包括云存储服务器和鉴别组件服务器，所述发送模块包括：
第一发送单元，用于将所述图片发送至所述云存储服务器存储，并接收所述云存储服务器返回的所述图片的图片标识信息；
第二发送单元，用于将所述图片标识信息发送至所述鉴别组件服务器，以使所述鉴别组件服务器根据所述图片标识信息下载所述图片并鉴别得到图片鉴别结果，所述图片鉴别结果用于得到直播视频的鉴别结果。
12.根据权利要求10所述的装置，其特征在于，所述数据包为所述直播视频的关键帧对应的数据包。
13.根据权利要求11所述的装置，其特征在于，所述云存储服务器存储的图片与所述鉴别组件服务器存储的图片鉴别结果对应，用于供第三方平台服务器识别非法直播视频和发送视频直播调整指令。
CN201610414734.3A 2016-06-12 2016-06-12 直播视频鉴别的方法、装置、系统、服务器和存储介质 Active CN105915953B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610414734.3A CN105915953B (zh) 2016-06-12 2016-06-12 直播视频鉴别的方法、装置、系统、服务器和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610414734.3A CN105915953B (zh) 2016-06-12 2016-06-12 直播视频鉴别的方法、装置、系统、服务器和存储介质

Publications (2)

Publication Number Publication Date
CN105915953A true CN105915953A (zh) 2016-08-31
CN105915953B CN105915953B (zh) 2020-05-29

Family

ID=56751131

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610414734.3A Active CN105915953B (zh) 2016-06-12 2016-06-12 直播视频鉴别的方法、装置、系统、服务器和存储介质

Country Status (1)

Country Link
CN (1) CN105915953B (zh)

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106412632A (zh) * 2016-10-21 2017-02-15 安徽协创物联网技术有限公司 一种视频直播的监控方法
CN106454492A (zh) * 2016-10-12 2017-02-22 武汉斗鱼网络科技有限公司 一种基于延时传送的直播色情内容审核系统及方法
CN106604133A (zh) * 2016-12-20 2017-04-26 天脉聚源（北京）教育科技有限公司 直播监控方法及装置
CN106658048A (zh) * 2016-12-20 2017-05-10 天脉聚源（北京）教育科技有限公司 直播监控时的预览图更新方法及装置
CN106686395A (zh) * 2016-12-29 2017-05-17 北京奇艺世纪科技有限公司 一种直播非法视频的检测方法及系统
CN106791517A (zh) * 2016-11-21 2017-05-31 广州爱九游信息技术有限公司 直播视频检测方法、装置及服务端
CN107197370A (zh) * 2017-06-22 2017-09-22 北京密境和风科技有限公司 一种直播视频的场景检测方法和装置
CN107241644A (zh) * 2017-05-31 2017-10-10 腾讯科技（深圳）有限公司 一种视频直播过程中的图像处理方法和装置
CN107590443A (zh) * 2017-08-23 2018-01-16 上海交通大学 基于深度残差学习的限制级直播视频自动检测方法与系统
CN107968951A (zh) * 2017-12-06 2018-04-27 任明和 对直播视频进行自动侦测和屏蔽的方法
CN108521576A (zh) * 2018-03-16 2018-09-11 腾讯科技(成都)有限公司 媒体资源的显示方法、装置、存储介质和电子装置
CN109254851A (zh) * 2018-09-30 2019-01-22 武汉斗鱼网络科技有限公司 一种调度gpu的方法及相关装置
CN109302477A (zh) * 2018-09-30 2019-02-01 武汉斗鱼网络科技有限公司 一种任务的调度方法及相关装置
CN109491970A (zh) * 2018-10-11 2019-03-19 平安科技（深圳）有限公司 面向云存储的不良图片检测方法、装置及存储介质
CN109842618A (zh) * 2019-01-03 2019-06-04 深圳壹账通智能科技有限公司 业务数据传输方法、装置、计算机设备和存储介质
CN109862435A (zh) * 2018-11-16 2019-06-07 京信通信系统（中国）有限公司 直播视频的监控方法、装置、计算机存储介质及设备
CN110572693A (zh) * 2019-08-23 2019-12-13 贵州省广播电视信息网络股份有限公司 一种基于人工智能的媒资转码方法
CN110971939A (zh) * 2018-09-30 2020-04-07 武汉斗鱼网络科技有限公司 一种违规图片的识别方法及相关装置
CN112055230A (zh) * 2020-09-03 2020-12-08 北京中润互联信息技术有限公司 一种直播监控方法、装置、计算机设备及可读存储介质
CN112822562A (zh) * 2020-11-11 2021-05-18 国家广播电视总局广播电视科学研究院 一种视频传输方法、装置、终端及可读存储介质
CN114760484A (zh) * 2021-01-08 2022-07-15 腾讯科技（深圳）有限公司 直播视频识别方法、装置、计算机设备和存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102073676A (zh) * 2010-11-30 2011-05-25 中国科学院计算技术研究所 一种网络色情视频实时检测方法和系统
CN102547794A (zh) * 2012-01-12 2012-07-04 郑州金惠计算机系统工程有限公司 Wap手机传媒色情图像、视频及不良内容的识别监管平台
CN103544498A (zh) * 2013-09-25 2014-01-29 华中科技大学 基于自适应抽样的视频内容检测方法与系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102073676A (zh) * 2010-11-30 2011-05-25 中国科学院计算技术研究所 一种网络色情视频实时检测方法和系统
CN102547794A (zh) * 2012-01-12 2012-07-04 郑州金惠计算机系统工程有限公司 Wap手机传媒色情图像、视频及不良内容的识别监管平台
CN103544498A (zh) * 2013-09-25 2014-01-29 华中科技大学 基于自适应抽样的视频内容检测方法与系统

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106454492A (zh) * 2016-10-12 2017-02-22 武汉斗鱼网络科技有限公司 一种基于延时传送的直播色情内容审核系统及方法
CN106412632A (zh) * 2016-10-21 2017-02-15 安徽协创物联网技术有限公司 一种视频直播的监控方法
CN106791517A (zh) * 2016-11-21 2017-05-31 广州爱九游信息技术有限公司 直播视频检测方法、装置及服务端
CN106604133A (zh) * 2016-12-20 2017-04-26 天脉聚源（北京）教育科技有限公司 直播监控方法及装置
CN106658048A (zh) * 2016-12-20 2017-05-10 天脉聚源（北京）教育科技有限公司 直播监控时的预览图更新方法及装置
CN106658048B (zh) * 2016-12-20 2019-12-31 天脉聚源（北京）教育科技有限公司 直播监控时的预览图更新方法及装置
CN106686395A (zh) * 2016-12-29 2017-05-17 北京奇艺世纪科技有限公司 一种直播非法视频的检测方法及系统
CN106686395B (zh) * 2016-12-29 2019-12-13 北京奇艺世纪科技有限公司 一种直播非法视频的检测方法及系统
CN107241644A (zh) * 2017-05-31 2017-10-10 腾讯科技（深圳）有限公司 一种视频直播过程中的图像处理方法和装置
CN107241644B (zh) * 2017-05-31 2018-09-07 腾讯科技（深圳）有限公司 一种视频直播过程中的图像处理方法和装置
CN107197370A (zh) * 2017-06-22 2017-09-22 北京密境和风科技有限公司 一种直播视频的场景检测方法和装置
CN107590443A (zh) * 2017-08-23 2018-01-16 上海交通大学 基于深度残差学习的限制级直播视频自动检测方法与系统
CN107968951A (zh) * 2017-12-06 2018-04-27 任明和 对直播视频进行自动侦测和屏蔽的方法
CN108521576A (zh) * 2018-03-16 2018-09-11 腾讯科技(成都)有限公司 媒体资源的显示方法、装置、存储介质和电子装置
CN109254851A (zh) * 2018-09-30 2019-01-22 武汉斗鱼网络科技有限公司 一种调度gpu的方法及相关装置
CN109302477A (zh) * 2018-09-30 2019-02-01 武汉斗鱼网络科技有限公司 一种任务的调度方法及相关装置
CN110971939B (zh) * 2018-09-30 2022-02-08 武汉斗鱼网络科技有限公司 一种违规图片的识别方法及相关装置
CN110971939A (zh) * 2018-09-30 2020-04-07 武汉斗鱼网络科技有限公司 一种违规图片的识别方法及相关装置
CN109491970A (zh) * 2018-10-11 2019-03-19 平安科技（深圳）有限公司 面向云存储的不良图片检测方法、装置及存储介质
CN109491970B (zh) * 2018-10-11 2024-05-10 平安科技（深圳）有限公司 面向云存储的不良图片检测方法、装置及存储介质
CN109862435A (zh) * 2018-11-16 2019-06-07 京信通信系统（中国）有限公司 直播视频的监控方法、装置、计算机存储介质及设备
CN109842618A (zh) * 2019-01-03 2019-06-04 深圳壹账通智能科技有限公司 业务数据传输方法、装置、计算机设备和存储介质
CN110572693A (zh) * 2019-08-23 2019-12-13 贵州省广播电视信息网络股份有限公司 一种基于人工智能的媒资转码方法
CN112055230A (zh) * 2020-09-03 2020-12-08 北京中润互联信息技术有限公司 一种直播监控方法、装置、计算机设备及可读存储介质
CN112822562A (zh) * 2020-11-11 2021-05-18 国家广播电视总局广播电视科学研究院 一种视频传输方法、装置、终端及可读存储介质
CN112822562B (zh) * 2020-11-11 2022-11-04 国家广播电视总局广播电视科学研究院 一种视频传输方法、装置、终端及可读存储介质
CN114760484A (zh) * 2021-01-08 2022-07-15 腾讯科技（深圳）有限公司 直播视频识别方法、装置、计算机设备和存储介质
CN114760484B (zh) * 2021-01-08 2023-11-07 腾讯科技（深圳）有限公司 直播视频识别方法、装置、计算机设备和存储介质

Also Published As

Publication number Publication date
CN105915953B (zh) 2020-05-29

Similar Documents

Publication Publication Date Title
CN105915953A (zh) 直播视频鉴别的方法、装置和系统
CN107171932B (zh) 一种图片风格转换方法、装置及系统
CN109690538A (zh) 用于识别匹配内容的系统和方法
CN109643320A (zh) 用于识别匹配内容的系统和方法
CN105721620B (zh) 视频信息推送方法和装置及视频信息展示方法和装置
CN108156522A (zh) 主页内容推送方法、装置及计算机可读存储介质
CN109660823A (zh) 视频发布方法、装置、电子设备及存储介质
WO2021082589A1 (zh) 内容审核模型的训练方法和装置、视频内容的审核方法和装置、计算机设备以及存储介质
CN109618565A (zh) 流式视频用户体验质量的自动测量方法和系统
US20210037287A1 (en) Digital media system
CN108335138A (zh) 信息推送方法和装置
CN106851343A (zh) 用于视频直播的方法和装置
CN108156459A (zh) 可伸缩视频传输方法及系统
WO2016134564A1 (zh) 一种用户感知评估方法及装置
CN109299326A (zh) 视频推荐方法及装置、系统、电子设备以及存储介质
CN107103070B (zh) 一种封面设置方法、装置及系统
CN105516018B (zh) 网络数据传输方法和装置
CN109522503A (zh) 基于ar与lbs技术的旅游景点虚拟留言板系统
CN108924606A (zh) 流媒体处理方法、装置、存储介质和电子装置
CN110418148A (zh) 视频生成方法、视频生成设备及可读存储介质
CN112822539B (zh) 信息显示方法、装置、服务器及存储介质
US11797896B2 (en) Autonomous aerial vehicle assisted viewing location selection for event venue
KR102232921B1 (ko) Ａｐｌ 광고 제공 시스템
JP6205700B2 (ja) 情報提供システム、提供情報を受信する装置、提供情報を送信する装置、プログラム、及び情報提供方法
Trpkovski et al. Automatic hotel photo quality assessment based on visual features

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant