CN114245205A - 基于数字资产管理的视频数据加工方法和系统 - Google Patents

基于数字资产管理的视频数据加工方法和系统 Download PDF

Info

Publication number
CN114245205A
CN114245205A CN202210164308.4A CN202210164308A CN114245205A CN 114245205 A CN114245205 A CN 114245205A CN 202210164308 A CN202210164308 A CN 202210164308A CN 114245205 A CN114245205 A CN 114245205A
Authority
CN
China
Prior art keywords
video
video stream
information
data
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210164308.4A
Other languages
English (en)
Other versions
CN114245205B (zh
Inventor
张艳朋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dawei Information Technology Shenzhen Co ltd
Original Assignee
Dawei Information Technology Shenzhen Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dawei Information Technology Shenzhen Co ltd filed Critical Dawei Information Technology Shenzhen Co ltd
Priority to CN202210164308.4A priority Critical patent/CN114245205B/zh
Publication of CN114245205A publication Critical patent/CN114245205A/zh
Application granted granted Critical
Publication of CN114245205B publication Critical patent/CN114245205B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • H04N21/4394Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明提供了基于数字资产管理的视频数据加工方法和系统,其通过采集视频播放平台待播放的视频流数据,并将其分块为若干视频流子数据包;再对每个视频流子数据包中的声音信息和视频影像信息分别进行语音识别处理和图像帧识别处理,以此得到相应的语义文字信息和图像帧画面信息;最后,确定预设关键词和预设图形在视频流数据各自的出现时间状态,这样能够在视频流数据中对预设关键词和预设图形进行准确的时间定位,以便于后续在视频播放平台播放视频流数据过程中进行声音屏蔽和/或影像画面屏蔽处理,这样能够在短时间内对视频流数据进行自动化的加工处理,从而提高对视频影像进行声音/画面处理的效率和可靠性。

Description

基于数字资产管理的视频数据加工方法和系统
技术领域
本发明涉及数字资产加工的技术领域,特别涉及基于数字资产管理的视频数据加工方法和系统。
背景技术
公共场所通常设置有视频播放屏幕这样的视频播放平台,通过该视频播放平台能够向观众实时播放相应的视频影像。但是该视频播放平台播放的视频影像中可能存在一些不适宜进行公共传播的声音和/或画面,为此需要对播放的视频影像预先进行人工筛查和剪接,从而提出其中不适宜传播的声音和/或画面,但是上述人工处理视频影像的方式不仅需要花费大量人力和时间去处理视频影像,同时也无法保证能够对视频影像的声音和画面进行全面的排查,这无疑降低对视频影像进行声音/画面处理的效率和可靠性。
发明内容
针对现有技术存在的缺陷,本发明提供基于数字资产管理的视频数据加工方法和系统,其通过采集视频播放平台待播放的视频流数据,并将其分块为若干视频流子数据包;再对每个视频流子数据包中的声音信息和视频影像信息分别进行语音识别处理和图像帧识别处理,以此得到相应的语义文字信息和图像帧画面信息;最后,确定预设关键词和预设图形在视频流数据各自的出现时间状态,这样能够在视频流数据中对预设关键词和预设图形进行准确的时间定位,以便于后续在视频播放平台播放视频流数据过程中进行声音屏蔽和/或影像画面屏蔽处理,其通过对视频流数据进行细分以确保全面排查其中存在的预设关键词和预设图形,这样能够在短时间内对视频流数据进行自动化的加工处理,从而提高对视频影像进行声音/画面处理的效率和可靠性。
本发明提供基于数字资产管理的视频数据加工方法,其特征在于,其包括如下步骤:
步骤S1,构建数字资产管理终端与视频播放平台之间的通信连接后,通过数字资产管理终端采集视频播放平台待播放的视频流数据;并对所述视频流数据进行数据分块处理,从而得到若干视频流子数据包;
步骤S2,从每个视频流子数据包中提取得到相应的声音信息和视频影像信息;对所述声音信息进行语音识别处理,从而得到所述声音信息对应的语义文字信息;对所述视频影像信息进行图像帧识别处理,从而得到所述视频影像信息对应的图像帧画面信息;
步骤S3,对所述语义文字信息进行关键词识别处理,以此确定预设关键词在视频流数据中的第一出现状态;对所述图像帧画面信息进行图形识别处理,以此确定预设图形在视频流数据中的第二出现状态;根据所述第一出现状态和/或所述第二出现状态,在视频播放平台播放视频流数据过程中进行声音屏蔽和/或影像画面屏蔽处理;
进一步,在所述步骤S1中,构建数字资产管理终端与视频播放平台之间的通信连接后,通过数字资产管理终端采集视频播放平台待播放的视频流数据;并对所述视频流数据进行数据分块处理,从而得到若干视频流子数据包具体包括:
步骤S101,通过数字资产管理终端向视频播放平台发送控制连接邀约指令;当所述视频播放平台处于开启状态时,向所述数字资产管理终端返回邀约答应消息;其中,所述邀约答应消息包括所述视频播放平台的平台身份信息;
步骤S102,当所述数字资产管理终端根据所述邀约答应消息对所述视频播放平台成功进行身份识别验证后,建立所述数字资产管理终端与所述视频播放平台之间的通信连接;并通过所述数字资产管理终端在所述视频播放平台的后台上采集其待播放的视频流数据;
步骤S103,获取所述视频流数据的总视频播放时间和视频总数据量;并根据所述总视频播放时间和所述视频总数据量,对所述视频流数据进行数据分块处理,从而得到若干视频流子数据包;
进一步,在所述步骤S103中,根据所述总视频播放时间和所述视频总数据量,对所述视频流数据进行数据分块处理,从而得到若干视频流子数据包具体包括:
步骤S1031,利用下面公式(1),根据所述视频流数据的总视频播放时间和所述视频流子数据包允许的最长视频播放时间,对所述视频流数据按照时间进行初步分块,
Figure 848321DEST_PATH_IMAGE001
(1)
在上述公式(1)中,
Figure 614152DEST_PATH_IMAGE002
表示所述视频流数据按照时间进行初步分块后得到的分块视 频个数;
Figure 362665DEST_PATH_IMAGE003
表示所述视频流数据的总视频播放时间;
Figure 631972DEST_PATH_IMAGE004
表示所述视频流数据播放一帧视频 影像画面所需要的时间;
Figure 73318DEST_PATH_IMAGE005
表示所述视频流子数据包允许的最长视频播放时间;
Figure 529707DEST_PATH_IMAGE006
表示向 下取整运算;
Figure 675386DEST_PATH_IMAGE007
表示向上取整运算;
Figure 533621DEST_PATH_IMAGE008
表示所述视频流数据按照时间进行初步分块后得到 的第i个分块视频的实际播放时间长度;
Figure 519769DEST_PATH_IMAGE009
表示所述视频流子数据包允许的最长视频播 放时间内可连续播放的影像画面的总帧数;
Figure 384826DEST_PATH_IMAGE010
表示所述视频流子数据包允许的最 长视频播放时间内可连续播放的影像画面对应的总时间长度;
通过上述步骤S1031得到的实际播放时间长度
Figure 943983DEST_PATH_IMAGE008
,对所述视频流数据进行初步分 块,从而得到n个分块视频;
步骤S1032,通过上述步骤S1031得到的n个分块视频对应的视频数据包的其中一部分会存在视频数据量过大的情况,此时利用下面公式(2),根据所述视频流子数据包允许的最大视频数据量对所述分块视频对应的视频数据包进行二次分块,
Figure 656724DEST_PATH_IMAGE011
(2)
在上述公式(2),
Figure 377556DEST_PATH_IMAGE013
表示初步分块得到的第i个分块视频的视频数据包进行二次分 块后对应的分割时间间隔,
Figure 402012DEST_PATH_IMAGE014
表示所述视频流数据按照时间进行初步分块后得到的第i个 分块视频对应的视频数据包的视频数据量;
Figure 764861DEST_PATH_IMAGE015
表示所述视频流子数据包允许的最大视频数 据量;
Figure 394425DEST_PATH_IMAGE016
表示按照所述视频流子数据包允许的最大视频数据量能够将初步分块后的第i个 分块视频的视频数据包进行二次分块对应的个数;
按照上述公式(2),对初步分块后的第i个分块视频的视频数据按照的时间间隔
Figure 551737DEST_PATH_IMAGE013
进行二次分块,当在二次分块过程中最后一个分块视频的时间间隔小于
Figure 470014DEST_PATH_IMAGE013
,则不继续进行 分块,并且最后一个分块的剩余视频数据作为第i个视频流子数据包;
步骤S1033,将i的值从1取到n并代入到上述公式(2),从而完成对所有初步分块后的分块视频进行二次分块,以及将二次分块得到的所有视频流子数据包作为最终的视频流子数据包;将每个最终的视频流子数据包按照视频播放先后的时间轴顺序进行重新编号并记做a、即第a个最终视频流子数据包,并且将所有最终视频流子数据包的个数记做m;
步骤S1034,利用下面公式(3),根据每一个最终视频流子数据包以及所述视频总数据量,对每一个最终视频流子数据包进行校验,以此确定每一个最终视频流子数据包是否存在数据丢失;
Figure 636554DEST_PATH_IMAGE017
(3)
在上述公式(3)中,
Figure 58308DEST_PATH_IMAGE018
表示对每一个最终视频流子数据包进行校验的校验值;
Figure 386521DEST_PATH_IMAGE019
表示 所述视频总数据量;
Figure 526515DEST_PATH_IMAGE020
表示第a个最终视频流子数据包的视频数据量;
Figure 355800DEST_PATH_IMAGE021
,表示每一个最终视频流子数据包不存在数据丢失;
Figure 163219DEST_PATH_IMAGE022
,表示其中一个最终视频流子数据包存在数据丢失,此时重新执行上述步 骤S1031至S1034,直到为止
Figure 193492DEST_PATH_IMAGE021
进一步,在所述步骤S2中,从每个视频流子数据包中提取得到相应的声音信息和视频影像信息;对所述声音信息进行语音识别处理,从而得到所述声音信息对应的语义文字信息;对所述视频影像信息进行图像帧识别处理,从而得到所述视频影像信息对应的图像帧画面信息具体包括:
步骤S201,通过所述数字资产管理终端对每个视频流子数据包进行声音与视频影像分离提取处理,从而得到相应的声音信息和视频影像信息;
步骤S202,按照所述声音信息的播放时间先后顺序,对所述声音信息进行语音识别处理,从而得到与所述声音信息的播放时间轴一致对应的语义文字信息;
步骤S203,按照所述视频影像信息的播放时间先后顺序,对所述视频影像信息进行图像帧识别处理,从而得到与所述视频影像信息的播放时间轴一致对应的图像帧画面信息;其中,所述图像帧画面信息包括若干按照所述视频影像信息的播放时间轴依次排列的图像帧;
进一步,在所述步骤S3中,对所述语义文字信息进行关键词识别处理,以此确定预设关键词在视频流数据中的第一出现状态;对所述图像帧画面信息进行图形识别处理,以此确定预设图形在视频流数据中的第二出现状态;根据所述第一出现状态和/或所述第二出现状态,在视频播放平台播放视频流数据过程中进行声音屏蔽和/或影像画面屏蔽处理具体包括:
步骤S301,将所述语义文字信息与预设关键词进行比对,以此确定预设关键词在所述语义文字信息中的出现位置;再根据所述出现位置和所述声音信息的播放时间轴,确定预设关键词在所述声音信息中的播放时间点,以此作为所述第一出现状态;
步骤S302,将所述图像帧画面信息中的每个图像帧进行图形识别处理,以此确定每个图像帧是否存在预设图形;当图像帧存在预设图形,则结合所述视频影像信息的播放时间轴确定对应的图像帧在所述视频影像信息中的播放时间点,以此作为所述第二出现状态;
步骤S303,根据所述第一出现状态和/或所述第二出现状态,在所述视频播放平台播放视频流数据过程中标定出预设关键词在所述声音信息中的播放时间点和/或预设图像图形在所述视频影像信息中的播放时间点,从而在相应的播放时间点上对包含预设关键词的声音信息进行声音屏蔽处理和/或对包含预设图像的视频影像信息进行影像画面模糊化屏蔽处理。
本发明还提供基于数字资产管理的视频数据加工系统,其特征在于,其包括通信连接关系构建模块、视频流数据采集与分块模块、视频流声像处理模块和视频流声像屏蔽处理模块;其中,
所述通信连接关系构建模块用于构建数字资产管理终端与视频播放平台之间的通信连接;
所述视频流数据采集与分块模块用于采集视频播放平台待播放的视频流数据;并对所述视频流数据进行数据分块处理,从而得到若干视频流子数据包;
所述视频流声像处理模块用于从每个视频流子数据包中提取得到相应的声音信息和视频影像信息;对所述声音信息进行语音识别处理,从而得到所述声音信息对应的语义文字信息;对所述视频影像信息进行图像帧识别处理,从而得到所述视频影像信息对应的图像帧画面信息;
所述视频流声像屏蔽处理模块用于对所述语义文字信息进行关键词识别处理,以此确定预设关键词在视频流数据中的第一出现状态;对所述图像帧画面信息进行图形识别处理,以此确定预设图形在视频流数据中的第二出现状态;根据所述第一出现状态和/或所述第二出现状态,在视频播放平台播放视频流数据过程中进行声音屏蔽和/或影像画面屏蔽处理;
进一步,所述通信连接关系构建模块用于构建数字资产管理终端与视频播放平台之间的通信连接具体包括:
通过数字资产管理终端向视频播放平台发送控制连接邀约指令;当所述视频播放平台处于开启状态时,向所述数字资产管理终端返回邀约答应消息;其中,所述邀约答应消息包括所述视频播放平台的平台身份信息;
当所述数字资产管理终端根据所述邀约答应消息对所述视频播放平台成功进行身份识别验证后,建立所述数字资产管理终端与所述视频播放平台之间的通信连接;
以及,
所述视频流数据采集与分块模块用于采集视频播放平台待播放的视频流数据;并对所述视频流数据进行数据分块处理,从而得到若干视频流子数据包具体包括:
在所述视频播放平台的后台上采集其待播放的视频流数据;
获取所述视频流数据的总视频播放时间和视频总数据量;并根据所述总视频播放时间和所述视频总数据量,对所述视频流数据进行数据分块处理,从而得到若干视频流子数据包;
进一步,所述视频流声像处理模块用于从每个视频流子数据包中提取得到相应的声音信息和视频影像信息;对所述声音信息进行语音识别处理,从而得到所述声音信息对应的语义文字信息;对所述视频影像信息进行图像帧识别处理,从而得到所述视频影像信息对应的图像帧画面信息具体包括:
通过所述数字资产管理终端对每个视频流子数据包进行声音与视频影像分离提取处理,从而得到相应的声音信息和视频影像信息;
按照所述声音信息的播放时间先后顺序,对所述声音信息进行语音识别处理,从而得到与所述声音信息的播放时间轴一致对应的语义文字信息;
按照所述视频影像信息的播放时间先后顺序,对所述视频影像信息进行图像帧识别处理,从而得到与所述视频影像信息的播放时间轴一致对应的图像帧画面信息;其中,所述图像帧画面信息包括若干按照所述视频影像信息的播放时间轴依次排列的图像帧;
进一步,所述视频流声像屏蔽处理模块用于对所述语义文字信息进行关键词识别处理,以此确定预设关键词在视频流数据中的第一出现状态;对所述图像帧画面信息进行图形识别处理,以此确定预设图形在视频流数据中的第二出现状态;根据所述第一出现状态和/或所述第二出现状态,在视频播放平台播放视频流数据过程中进行声音屏蔽和/或影像画面屏蔽处理具体包括:
将所述语义文字信息与预设关键词进行比对,以此确定预设关键词在所述语义文字信息中的出现位置;再根据所述出现位置和所述声音信息的播放时间轴,确定预设关键词在所述声音信息中的播放时间点,以此作为所述第一出现状态;
将所述图像帧画面信息中的每个图像帧进行图形识别处理,以此确定每个图像帧是否存在预设图形;当图像帧存在预设图形,则结合所述视频影像信息的播放时间轴确定对应的图像帧在所述视频影像信息中的播放时间点,以此作为所述第二出现状态;
根据所述第一出现状态和/或所述第二出现状态,在所述视频播放平台播放视频流数据过程中标定出预设关键词在所述声音信息中的播放时间点和/或预设图像图形在所述视频影像信息中的播放时间点,从而在相应的播放时间点上对包含预设关键词的声音信息进行声音屏蔽处理和/或对包含预设图像的视频影像信息进行影像画面模糊化屏蔽处理。
相比于现有技术,该基于数字资产管理的视频数据加工方法和系统通过采集视频播放平台待播放的视频流数据,并将其分块为若干视频流子数据包;再对每个视频流子数据包中的声音信息和视频影像信息分别进行语音识别处理和图像帧识别处理,以此得到相应的语义文字信息和图像帧画面信息;最后,确定预设关键词和预设图形在视频流数据各自的出现时间状态,这样能够在视频流数据中对预设关键词和预设图形进行准确的时间定位,以便于后续在视频播放平台播放视频流数据过程中进行声音屏蔽和/或影像画面屏蔽处理,其通过对视频流数据进行细分以确保全面排查其中存在的预设关键词和预设图形,这样能够在短时间内对视频流数据进行自动化的加工处理,从而提高对视频影像进行声音/画面处理的效率和可靠性。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明提供的基于数字资产管理的视频数据加工方法的流程示意图。
图2为本发明提供的基于数字资产管理的视频数据加工系统的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参阅图1,为本发明实施例提供的基于数字资产管理的视频数据加工方法的流程示意图。该基于数字资产管理的视频数据加工方法包括如下步骤:
步骤S1,构建数字资产管理终端与视频播放平台之间的通信连接后,通过数字资产管理终端采集视频播放平台待播放的视频流数据;并对该视频流数据进行数据分块处理,从而得到若干视频流子数据包;
步骤S2,从每个视频流子数据包中提取得到相应的声音信息和视频影像信息;对该声音信息进行语音识别处理,从而得到该声音信息对应的语义文字信息;对该视频影像信息进行图像帧识别处理,从而得到该视频影像信息对应的图像帧画面信息;
步骤S3,对该语义文字信息进行关键词识别处理,以此确定预设关键词在视频流数据中的第一出现状态;对该图像帧画面信息进行图形识别处理,以此确定预设图形在视频流数据中的第二出现状态;根据该第一出现状态和/或该第二出现状态,在视频播放平台播放视频流数据过程中进行声音屏蔽和/或影像画面屏蔽处理。
上述技术方案的有益效果为:该基于数字资产管理的视频数据加工方法通过采集视频播放平台待播放的视频流数据,并将其分块为若干视频流子数据包;再对每个视频流子数据包中的声音信息和视频影像信息分别进行语音识别处理和图像帧识别处理,以此得到相应的语义文字信息和图像帧画面信息;最后,确定预设关键词和预设图形在视频流数据各自的出现时间状态,这样能够在视频流数据中对预设关键词和预设图形进行准确的时间定位,以便于后续在视频播放平台播放视频流数据过程中进行声音屏蔽和/或影像画面屏蔽处理,其通过对视频流数据进行细分以确保全面排查其中存在的预设关键词和预设图形,这样能够在短时间内对视频流数据进行自动化的加工处理,从而提高对视频影像进行声音/画面处理的效率和可靠性。
优选地,在该步骤S1中,构建数字资产管理终端与视频播放平台之间的通信连接后,通过数字资产管理终端采集视频播放平台待播放的视频流数据;并对该视频流数据进行数据分块处理,从而得到若干视频流子数据包具体包括:
步骤S101,通过数字资产管理终端向视频播放平台发送控制连接邀约指令;当该视频播放平台处于开启状态时,向该数字资产管理终端返回邀约答应消息;其中,该邀约答应消息包括该视频播放平台的平台身份信息;
步骤S102,当该数字资产管理终端根据该邀约答应消息对该视频播放平台成功进行身份识别验证后,建立该数字资产管理终端与该视频播放平台之间的通信连接;并通过该数字资产管理终端在该视频播放平台的后台上采集其待播放的视频流数据;
步骤S103,获取该视频流数据的总视频播放时间和视频总数据量;并根据该总视频播放时间和该视频总数据量,对该视频流数据进行数据分块处理,从而得到若干视频流子数据包。
上述技术方案的有益效果为:该数字资产管理终端可为数字资产管理人员所使用的智能手机等移动终端;该视频播放平台可包括视频播放控制服务器和视频播放器。该移动终端能够与该视频播放控制服务器进行通信连接,并且还能够对该视频播放控制服务器内存储的视频流数据进行加工处理,最后将加工处理后的视频流数据通过该视频播放器的播放屏幕进行播放。
该视频播放平台可与不同数字资产管理人员所使用的移动终端进行通信连接。在通信连接之前,该数字资产管理终端可向该视频播放平台进行连接邀约,当该视频播放平台处于开启状态并且当前并未与其他数字资产管理平台连接时,该视频播放平台会通过其对应的视频播放控制服务器返回相应的邀约答应消息;接着该视频播放控制服务器会对该邀约答应消息中的平台身份信息进行身份识别验证,即将该平台身份信息与预设身份信息白名单进行比对,若该平台身份信息存在于预设身份信息白名单中,则表明身份识别验证成功,随后即可建立该数字资产管理终端与该视频播放平台之间的无线通信连接。该数字资产管理终端能够在该视频播放控制服务器的视频数据库中采集该视频播放平台即将播放的视频流数据。最后,根据该视频流数据的总视频播放时间和视频总数据量(即视频总数据比特量),对其进行数据分块处理,这样能够得到若干视频流子数据包,通过将容量较大的视频流数据分切为若干容量适中的若干视频流子数据包,这样能够避免对该视频流数据整体进行分析而导致分析遗漏的情况发生,同时还能够对多个视频流子数据包进行并行处理以此提高视频数据加工的效率。
优选地,在该步骤S103中,根据该总视频播放时间和该视频总数据量,对该视频流数据进行数据分块处理,从而得到若干视频流子数据包具体包括:
步骤S1031,利用下面公式(1),根据该视频流数据的总视频播放时间和该视频流子数据包允许的最长视频播放时间,对该视频流数据按照时间进行初步分块,
Figure 617520DEST_PATH_IMAGE001
(1)
在上述公式(1)中,
Figure 860282DEST_PATH_IMAGE002
表示该视频流数据按照时间进行初步分块后得到的分块视频 个数;
Figure 256628DEST_PATH_IMAGE003
表示该视频流数据的总视频播放时间;
Figure 661065DEST_PATH_IMAGE004
表示该视频流数据播放一帧视频影像画 面所需要的时间;
Figure 41231DEST_PATH_IMAGE005
表示该视频流子数据包允许的最长视频播放时间;
Figure 822105DEST_PATH_IMAGE006
表示向下取整运 算;
Figure 932012DEST_PATH_IMAGE007
表示向上取整运算;
Figure 772929DEST_PATH_IMAGE008
表示该视频流数据按照时间进行初步分块后得到的第i个分块 视频的实际播放时间长度;
Figure 640391DEST_PATH_IMAGE009
表示该视频流子数据包允许的最长视频播放时间内可连续 播放的影像画面的总帧数;
Figure 224956DEST_PATH_IMAGE010
表示该视频流子数据包允许的最长视频播放时间内 可连续播放的影像画面对应的总时间长度;
通过上述步骤S1031得到的实际播放时间长度
Figure 884911DEST_PATH_IMAGE008
,对该视频流数据进行初步分块, 从而得到n个分块视频;
步骤S1032,通过上述步骤S1031得到的n个分块视频对应的视频数据包的其中一部分会存在视频数据量过大的情况,此时利用下面公式(2),根据该视频流子数据包允许的最大视频数据量对该分块视频对应的视频数据包进行二次分块,
Figure 818101DEST_PATH_IMAGE011
(2)
在上述公式(2),
Figure 235176DEST_PATH_IMAGE013
表示初步分块得到的第i个分块视频的视频数据包进行二次分 块后对应的分割时间间隔,
Figure 810383DEST_PATH_IMAGE014
表示该视频流数据按照时间进行初步分块后得到的第i个分 块视频对应的视频数据包的视频数据量;
Figure 566986DEST_PATH_IMAGE015
表示该视频流子数据包允许的最大视频数据 量;
Figure 15285DEST_PATH_IMAGE016
表示按照该视频流子数据包允许的最大视频数据量能够将初步分块后的第i个分块 视频的视频数据包进行二次分块对应的个数;
按照上述公式(2),对初步分块后的第i个分块视频的视频数据按照的时间间隔
Figure 122918DEST_PATH_IMAGE013
进行二次分块,当在二次分块过程中最后一个分块视频的时间间隔小于
Figure 908341DEST_PATH_IMAGE013
,则不继续进行 分块,并且最后一个分块的剩余视频数据作为第i个视频流子数据包;
步骤S1033,将i的值从1取到n并代入到上述公式(2),从而完成对所有初步分块后的分块视频进行二次分块,以及将二次分块得到的所有视频流子数据包作为最终的视频流子数据包;将每个最终的视频流子数据包按照视频播放先后的时间轴顺序进行重新编号并记做a、即第a个最终视频流子数据包,并且将所有最终视频流子数据包的个数记做m;
步骤S1034,利用下面公式(3),根据每一个最终视频流子数据包以及该视频总数据量,对每一个最终视频流子数据包进行校验,以此确定每一个最终视频流子数据包是否存在数据丢失;
Figure 253871DEST_PATH_IMAGE017
(3)
在上述公式(3)中,
Figure 873072DEST_PATH_IMAGE018
表示对每一个最终视频流子数据包进行校验的校验值;
Figure 671263DEST_PATH_IMAGE019
表示 该视频总数据量;
Figure 401322DEST_PATH_IMAGE020
表示第a个最终视频流子数据包的视频数据量;
Figure 421931DEST_PATH_IMAGE021
,表示每一个最终视频流子数据包不存在数据丢失;
Figure 805508DEST_PATH_IMAGE022
,表示其中一个最终视频流子数据包存在数据丢失,此时重新执行上述步 骤S1031至S1034,直到为止
Figure 622154DEST_PATH_IMAGE021
上述技术方案的有益效果为:上述过程对视频流数据进行数据分块处理是为了简化视频流数据的长度和数据量,从而对视频流数据进行快速处理;为了保证进行数据分块处理后得到的每一个视频流子数据包对应的视频播放时间和视频数据量都限定在特定的数值范围内,需要对视频流数据进行限制性分块。其中,利用上述公式(1)根据视频流数据的总视频播放时间和单个最终视频流子数据包可以储存的视频最长播放时间对视频流数据按照时间进行初步分块,进而可以保证所述视频流数据在进行分块处理的过程中以及分块后不会破坏每一帧视频影像画面的播放连续性,从而最大限度的保证在进行分块处理前后数据的完整性以及分块的可靠性;利用上述公式(2)根据单个最终视频流子数据包可以储存的最大视频数据量对初步分块后的视频流子数据包进行二次分块,进而完成对视频流数据的分块处理,并且得到的每个最终视频流子数据包可以满足播放时长以及数据大小的限制要求,进而方便后续对视频流子数据包的进一步处理;利用上述公式(3)根据每一个最终视频流子数据包以及所述视频总数据量对此次分块过程进行校验,以保证数据分块处理的准确性以及可靠性。
优选地,在该步骤S2中,从每个视频流子数据包中提取得到相应的声音信息和视频影像信息;对该声音信息进行语音识别处理,从而得到该声音信息对应的语义文字信息;对该视频影像信息进行图像帧识别处理,从而得到该视频影像信息对应的图像帧画面信息具体包括:
步骤S201,通过该数字资产管理终端对每个视频流子数据包进行声音与视频影像分离提取处理,从而得到相应的声音信息和视频影像信息;
步骤S202,按照该声音信息的播放时间先后顺序,对该声音信息进行语音识别处理,从而得到与该声音信息的播放时间轴一致对应的语义文字信息;
步骤S203,按照该视频影像信息的播放时间先后顺序,对该视频影像信息进行图像帧识别处理,从而得到与该视频影像信息的播放时间轴一致对应的图像帧画面信息;其中,该图像帧画面信息包括若干按照该视频影像信息的播放时间轴依次排列的图像帧。
上述技术方案的有益效果为:每个视频流子数据包均包括声音信息成分和视频影像成分,通过对视频流子数据包进行声音信息成分和视频影像成分的分离提取处理,可得到相应的声音信息和视频影像信息;其中该分离提取处理可为但不限于是现有技术常用的视频声画分离处理方式,这里不做详细的累述。
当提取得到该声音信息后,按照该声音信息对应的播放时间先后顺序,对该声音信息进行语音识别处理,这样可保证得到的语义文字信息的排布顺序与该声音信息的播放时间轴是相一致的,从而便于后续对任意语义文字进行准确的时间标定。
当提取得到该视频影像信息后,按照该视频影像信息对应的播放时间先后顺序,对该视频影像信息进行图像帧识别处理,这样可保证得到的图像帧画面信息的排布顺序与该视频影像信息的播放时间轴是相一致,从而便于后续对任意图像帧画面进行准确的时间标定。
优选地,在该步骤S3中,对该语义文字信息进行关键词识别处理,以此确定预设关键词在视频流数据中的第一出现状态;对该图像帧画面信息进行图形识别处理,以此确定预设图形在视频流数据中的第二出现状态;根据该第一出现状态和/或该第二出现状态,在视频播放平台播放视频流数据过程中进行声音屏蔽和/或影像画面屏蔽处理具体包括:
步骤S301,将该语义文字信息与预设关键词进行比对,以此确定预设关键词在该语义文字信息中的出现位置;再根据该出现位置和该声音信息的播放时间轴,确定预设关键词在该声音信息中的播放时间点,以此作为该第一出现状态;
步骤S302,将该图像帧画面信息中的每个图像帧进行图形识别处理,以此确定每个图像帧是否存在预设图形;当图像帧存在预设图形,则结合该视频影像信息的播放时间轴确定对应的图像帧在该视频影像信息中的播放时间点,以此作为该第二出现状态;
步骤S303,根据该第一出现状态和/或该第二出现状态,在该视频播放平台播放视频流数据过程中标定出预设关键词在该声音信息中的播放时间点和/或预设图像图形在该视频影像信息中的播放时间点,从而在相应的播放时间点上对包含预设关键词的声音信息进行声音屏蔽处理和/或对包含预设图像的视频影像信息进行影像画面模糊化屏蔽处理。
上述技术方案的有益效果为:将该语义文字信息与预设关键词进行比对,即可确定该语义文字信息中是否出现预设关键词,其中该预设关键词可为但不限于是不文明用语关键词等,随后结合预设关键词在该语义文字信息中的出现位置和该声音信息的播放时间轴,即可确定预设关键词出现时对应的播放时间点。而将该图像帧画面信息进行图像识别处理,即可确定该图像帧画面信息的每个图像帧是否出现预设图形,其中该预设图形可为但不限于是特定形状的图形,随后结合出现预设图形的图像帧的出现位置和该视频影像信息的播放时间轴,即可确定出现预设图形的图像帧出现时对应的播放时间点。
最后,以上述两种播放时间点作为基准,从视频流数据标定出预设关键词在该声音信息中的播放时间点和/或预设图像图形在该视频影像信息中的播放时间点,并且在相应的播放时间点上对包含预设关键词的声音信息进行声音屏蔽处理和/或对包含预设图像的视频影像信息进行影像画面模糊化屏蔽处理,这样能够逐一地和全面地对该视频流数据进行排查加工,从而提高视频影像进行声音/画面处理的效率和可靠性。
参阅图2,为本发明实施例提供的基于数字资产管理的视频数据加工系统的结构示意图。该基于数字资产管理的视频数据加工系统包括通信连接关系构建模块、视频流数据采集与分块模块、视频流声像处理模块和视频流声像屏蔽处理模块;其中,
该通信连接关系构建模块用于构建数字资产管理终端与视频播放平台之间的通信连接;
该视频流数据采集与分块模块用于采集视频播放平台待播放的视频流数据;并对该视频流数据进行数据分块处理,从而得到若干视频流子数据包;
该视频流声像处理模块用于从每个视频流子数据包中提取得到相应的声音信息和视频影像信息;对该声音信息进行语音识别处理,从而得到该声音信息对应的语义文字信息;对该视频影像信息进行图像帧识别处理,从而得到该视频影像信息对应的图像帧画面信息;
该视频流声像屏蔽处理模块用于对该语义文字信息进行关键词识别处理,以此确定预设关键词在视频流数据中的第一出现状态;对该图像帧画面信息进行图形识别处理,以此确定预设图形在视频流数据中的第二出现状态;根据该第一出现状态和/或该第二出现状态,在视频播放平台播放视频流数据过程中进行声音屏蔽和/或影像画面屏蔽处理。
上述技术方案的有益效果为:该基于数字资产管理的视频数据加工系统通过采集视频播放平台待播放的视频流数据,并将其分块为若干视频流子数据包;再对每个视频流子数据包中的声音信息和视频影像信息分别进行语音识别处理和图像帧识别处理,以此得到相应的语义文字信息和图像帧画面信息;最后,确定预设关键词和预设图形在视频流数据各自的出现时间状态,这样能够在视频流数据中对预设关键词和预设图形进行准确的时间定位,以便于后续在视频播放平台播放视频流数据过程中进行声音屏蔽和/或影像画面屏蔽处理,其通过对视频流数据进行细分以确保全面排查其中存在的预设关键词和预设图形,这样能够在短时间内对视频流数据进行自动化的加工处理,从而提高对视频影像进行声音/画面处理的效率和可靠性。
优选地,该通信连接关系构建模块用于构建数字资产管理终端与视频播放平台之间的通信连接具体包括:
通过数字资产管理终端向视频播放平台发送控制连接邀约指令;当该视频播放平台处于开启状态时,向该数字资产管理终端返回邀约答应消息;其中,该邀约答应消息包括该视频播放平台的平台身份信息;
当该数字资产管理终端根据该邀约答应消息对该视频播放平台成功进行身份识别验证后,建立该数字资产管理终端与该视频播放平台之间的通信连接;
以及,该视频流数据采集与分块模块用于采集视频播放平台待播放的视频流数据;并对该视频流数据进行数据分块处理,从而得到若干视频流子数据包具体包括:
在该视频播放平台的后台上采集其待播放的视频流数据;
获取该视频流数据的总视频播放时间和视频总数据量;并根据该总视频播放时间和该视频总数据量,对该视频流数据进行数据分块处理,从而得到若干视频流子数据包。
上述技术方案的有益效果为:该数字资产管理终端可为数字资产管理人员所使用的智能手机等移动终端;该视频播放平台可包括视频播放控制服务器和视频播放器。该移动终端能够与该视频播放控制服务器进行通信连接,并且还能够对该视频播放控制服务器内存储的视频流数据进行加工处理,最后将加工处理后的视频流数据通过该视频播放器的播放屏幕进行播放。
该视频播放平台可与不同数字资产管理人员所使用的移动终端进行通信连接。在通信连接之前,该数字资产管理终端可向该视频播放平台进行连接邀约,当该视频播放平台处于开启状态并且当前并未与其他数字资产管理平台连接时,该视频播放平台会通过其对应的视频播放控制服务器返回相应的邀约答应消息;接着该视频播放控制服务器会对该邀约答应消息中的平台身份信息进行身份识别验证,即将该平台身份信息与预设身份信息白名单进行比对,若该平台身份信息存在于预设身份信息白名单中,则表明身份识别验证成功,随后即可建立该数字资产管理终端与该视频播放平台之间的无线通信连接。该数字资产管理终端能够在该视频播放控制服务器的视频数据库中采集该视频播放平台即将播放的视频流数据。最后,根据该视频流数据的总视频播放时间和视频总数据量(即视频总数据比特量),对其进行数据分块处理,这样能够得到若干视频流子数据包,通过将容量较大的视频流数据分切为若干容量适中的若干视频流子数据包,这样能够避免对该视频流数据整体进行分析而导致分析遗漏的情况发生,同时还能够对多个视频流子数据包进行并行处理以此提高视频数据加工的效率。
优选地,该视频流声像处理模块用于从每个视频流子数据包中提取得到相应的声音信息和视频影像信息;对该声音信息进行语音识别处理,从而得到该声音信息对应的语义文字信息;对该视频影像信息进行图像帧识别处理,从而得到该视频影像信息对应的图像帧画面信息具体包括:
通过该数字资产管理终端对每个视频流子数据包进行声音与视频影像分离提取处理,从而得到相应的声音信息和视频影像信息;
按照该声音信息的播放时间先后顺序,对该声音信息进行语音识别处理,从而得到与该声音信息的播放时间轴一致对应的语义文字信息;
按照该视频影像信息的播放时间先后顺序,对该视频影像信息进行图像帧识别处理,从而得到与该视频影像信息的播放时间轴一致对应的图像帧画面信息;其中,该图像帧画面信息包括若干按照该视频影像信息的播放时间轴依次排列的图像帧。
上述技术方案的有益效果为:每个视频流子数据包均包括声音信息成分和视频影像成分,通过对视频流子数据包进行声音信息成分和视频影像成分的分离提取处理,可得到相应的声音信息和视频影像信息;其中该分离提取处理可为但不限于是现有技术常用的视频声画分离处理方式,这里不做详细的累述。
当提取得到该声音信息后,按照该声音信息对应的播放时间先后顺序,对该声音信息进行语音识别处理,这样可保证得到的语义文字信息的排布顺序与该声音信息的播放时间轴是相一致的,从而便于后续对任意语义文字进行准确的时间标定。
当提取得到该视频影像信息后,按照该视频影像信息对应的播放时间先后顺序,对该视频影像信息进行图像帧识别处理,这样可保证得到的图像帧画面信息的排布顺序与该视频影像信息的播放时间轴是相一致,从而便于后续对任意图像帧画面进行准确的时间标定。
优选地,该视频流声像屏蔽处理模块用于对该语义文字信息进行关键词识别处理,以此确定预设关键词在视频流数据中的第一出现状态;对该图像帧画面信息进行图形识别处理,以此确定预设图形在视频流数据中的第二出现状态;根据该第一出现状态和/或该第二出现状态,在视频播放平台播放视频流数据过程中进行声音屏蔽和/或影像画面屏蔽处理具体包括:
将该语义文字信息与预设关键词进行比对,以此确定预设关键词在该语义文字信息中的出现位置;再根据该出现位置和该声音信息的播放时间轴,确定预设关键词在该声音信息中的播放时间点,以此作为该第一出现状态;
将该图像帧画面信息中的每个图像帧进行图形识别处理,以此确定每个图像帧是否存在预设图形;当图像帧存在预设图形,则结合该视频影像信息的播放时间轴确定对应的图像帧在该视频影像信息中的播放时间点,以此作为该第二出现状态;
根据该第一出现状态和/或该第二出现状态,在该视频播放平台播放视频流数据过程中标定出预设关键词在该声音信息中的播放时间点和/或预设图像图形在该视频影像信息中的播放时间点,从而在相应的播放时间点上对包含预设关键词的声音信息进行声音屏蔽处理和/或对包含预设图像的视频影像信息进行影像画面模糊化屏蔽处理。
上述技术方案的有益效果为:将该语义文字信息与预设关键词进行比对,即可确定该语义文字信息中是否出现预设关键词,其中该预设关键词可为但不限于是不文明用语关键词等,随后结合预设关键词在该语义文字信息中的出现位置和该声音信息的播放时间轴,即可确定预设关键词出现时对应的播放时间点。而将该图像帧画面信息进行图像识别处理,即可确定该图像帧画面信息的每个图像帧是否出现预设图形,其中该预设图形可为但不限于是特定形状的图形,随后结合出现预设图形的图像帧的出现位置和该视频影像信息的播放时间轴,即可确定出现预设图形的图像帧出现时对应的播放时间点。
最后,以上述两种播放时间点作为基准,从视频流数据标定出预设关键词在该声音信息中的播放时间点和/或预设图像图形在该视频影像信息中的播放时间点,并且在相应的播放时间点上对包含预设关键词的声音信息进行声音屏蔽处理和/或对包含预设图像的视频影像信息进行影像画面模糊化屏蔽处理,这样能够逐一地和全面地对该视频流数据进行排查加工,从而提高视频影像进行声音/画面处理的效率和可靠性。
从上述实施例的内容可知,该基于数字资产管理的视频数据加工方法和系统通过采集视频播放平台待播放的视频流数据,并将其分块为若干视频流子数据包;再对每个视频流子数据包中的声音信息和视频影像信息分别进行语音识别处理和图像帧识别处理,以此得到相应的语义文字信息和图像帧画面信息;最后,确定预设关键词和预设图形在视频流数据各自的出现时间状态,这样能够在视频流数据中对预设关键词和预设图形进行准确的时间定位,以便于后续在视频播放平台播放视频流数据过程中进行声音屏蔽和/或影像画面屏蔽处理,其通过对视频流数据进行细分以确保全面排查其中存在的预设关键词和预设图形,这样能够在短时间内对视频流数据进行自动化的加工处理,从而提高对视频影像进行声音/画面处理的效率和可靠性。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (9)

1.基于数字资产管理的视频数据加工方法,其特征在于,其包括如下步骤:
步骤S1,构建数字资产管理终端与视频播放平台之间的通信连接后,通过数字资产管理终端采集视频播放平台待播放的视频流数据;并对所述视频流数据进行数据分块处理,从而得到若干视频流子数据包;
步骤S2,从每个视频流子数据包中提取得到相应的声音信息和视频影像信息;对所述声音信息进行语音识别处理,从而得到所述声音信息对应的语义文字信息;对所述视频影像信息进行图像帧识别处理,从而得到所述视频影像信息对应的图像帧画面信息;
步骤S3,对所述语义文字信息进行关键词识别处理,以此确定预设关键词在视频流数据中的第一出现状态;对所述图像帧画面信息进行图形识别处理,以此确定预设图形在视频流数据中的第二出现状态;根据所述第一出现状态和/或所述第二出现状态,在视频播放平台播放视频流数据过程中进行声音屏蔽和/或影像画面屏蔽处理。
2.如权利要求1所述的基于数字资产管理的视频数据加工方法,其特征在于:
在所述步骤S1中,构建数字资产管理终端与视频播放平台之间的通信连接后,通过数字资产管理终端采集视频播放平台待播放的视频流数据;并对所述视频流数据进行数据分块处理,从而得到若干视频流子数据包具体包括:
步骤S101,通过数字资产管理终端向视频播放平台发送控制连接邀约指令;当所述视频播放平台处于开启状态时,向所述数字资产管理终端返回邀约答应消息;其中,所述包括所述视频播放平台的平台身份信息;
步骤S102,当所述数字资产管理终端根据所述邀约答应消息对所述视频播放平台成功进行身份识别验证后,建立所述数字资产管理终端与所述视频播放平台之间的通信连接;并通过所述数字资产管理终端在所述视频播放平台的后台上采集其待播放的视频流数据;
步骤S103,获取所述视频流数据的总视频播放时间和视频总数据量;并根据所述总视频播放时间和所述视频总数据量,对所述视频流数据进行数据分块处理,从而得到若干视频流子数据包。
3.如权利要求2所述的基于数字资产管理的视频数据加工方法,其特征在于:
在所述步骤S103中,根据所述总视频播放时间和所述视频总数据量,对所述视频流数据进行数据分块处理,从而得到若干视频流子数据包具体包括:
步骤S1031,利用下面公式(1),根据所述视频流数据的总视频播放时间和所述视频流子数据包允许的最长视频播放时间,对所述视频流数据按照时间进行初步分块,
Figure 51251DEST_PATH_IMAGE001
(1)
在上述公式(1)中,
Figure 640495DEST_PATH_IMAGE002
表示所述视频流数据按照时间进行初步分块后得到的分块视频个 数;
Figure 357915DEST_PATH_IMAGE003
表示所述视频流数据的总视频播放时间;
Figure 690808DEST_PATH_IMAGE004
表示所述视频流数据播放一帧视频影像 画面所需要的时间;
Figure 442863DEST_PATH_IMAGE005
表示所述视频流子数据包允许的最长视频播放时间;
Figure 203009DEST_PATH_IMAGE006
表示向下取 整运算;
Figure 876566DEST_PATH_IMAGE007
表示向上取整运算;
Figure 13150DEST_PATH_IMAGE008
表示所述视频流数据按照时间进行初步分块后得到的第i 个分块视频的实际播放时间长度;
Figure 619712DEST_PATH_IMAGE009
表示所述视频流子数据包允许的最长视频播放时间 内可连续播放的影像画面的总帧数;
Figure 550758DEST_PATH_IMAGE010
表示所述视频流子数据包允许的最长视频 播放时间内可连续播放的影像画面对应的总时间长度;
通过上述步骤S1031得到的实际播放时间长度
Figure 242771DEST_PATH_IMAGE008
,对所述视频流数据进行初步分块,从 而得到n个分块视频;
步骤S1032,通过上述步骤S1031得到的n个分块视频对应的视频数据包的其中一部分会存在视频数据量过大的情况,此时利用下面公式(2),根据所述视频流子数据包允许的最大视频数据量对所述分块视频对应的视频数据包进行二次分块,
Figure 651887DEST_PATH_IMAGE011
(2)
在上述公式(2),
Figure 112955DEST_PATH_IMAGE013
表示初步分块得到的第i个分块视频的视频数据包进行二次分块后 对应的分割时间间隔,
Figure 480482DEST_PATH_IMAGE014
表示所述视频流数据按照时间进行初步分块后得到的第i个分块 视频对应的视频数据包的视频数据量;
Figure 659791DEST_PATH_IMAGE015
表示所述视频流子数据包允许的最大视频数据 量;
Figure 872598DEST_PATH_IMAGE016
表示按照所述视频流子数据包允许的最大视频数据量能够将初步分块后的第i个分 块视频的视频数据包进行二次分块对应的个数;
按照上述公式(2),对初步分块后的第i个分块视频的视频数据按照的时间间隔
Figure 453752DEST_PATH_IMAGE013
进行 二次分块,当在二次分块过程中最后一个分块视频的时间间隔小于
Figure 726601DEST_PATH_IMAGE013
,则不继续进行分块, 并且最后一个分块的剩余视频数据作为第i个视频流子数据包;
步骤S1033,将i的值从1取到n并代入到上述公式(2),从而完成对所有初步分块后的分块视频进行二次分块,以及将二次分块得到的所有视频流子数据包作为最终的视频流子数据包;将每个最终的视频流子数据包按照视频播放先后的时间轴顺序进行重新编号并记做a、即第a个最终视频流子数据包,并且将所有最终视频流子数据包的个数记做m;
步骤S1034,利用下面公式(3),根据每一个最终视频流子数据包以及所述视频总数据量,对每一个最终视频流子数据包进行校验,以此确定每一个最终视频流子数据包是否存在数据丢失;
Figure 393206DEST_PATH_IMAGE017
(3)
在上述公式(3)中,
Figure 144124DEST_PATH_IMAGE018
表示对每一个最终视频流子数据包进行校验的校验值;
Figure 579785DEST_PATH_IMAGE019
表示所述 视频总数据量;
Figure 289115DEST_PATH_IMAGE020
表示第a个最终视频流子数据包的视频数据量;
Figure 115120DEST_PATH_IMAGE021
,表示每一个最终视频流子数据包不存在数据丢失;
Figure 669729DEST_PATH_IMAGE022
,表示其中一个最终视频流子数据包存在数据丢失,此时重新执行上述步骤 S1031至S1034,直到为止
Figure 225475DEST_PATH_IMAGE021
4.如权利要求1所述的基于数字资产管理的视频数据加工方法,其特征在于:
在所述步骤S2中,从每个视频流子数据包中提取得到相应的声音信息和视频影像信息;对所述声音信息进行语音识别处理,从而得到所述声音信息对应的语义文字信息;对所述视频影像信息进行图像帧识别处理,从而得到所述视频影像信息对应的图像帧画面信息具体包括:
步骤S201,通过所述数字资产管理终端对每个视频流子数据包进行声音与视频影像分离提取处理,从而得到相应的声音信息和视频影像信息;
步骤S202,按照所述声音信息的播放时间先后顺序,对所述声音信息进行语音识别处理,从而得到与所述声音信息的播放时间轴一致对应的语义文字信息;
步骤S203,按照所述视频影像信息的播放时间先后顺序,对所述视频影像信息进行图像帧识别处理,从而得到与所述视频影像信息的播放时间轴一致对应的图像帧画面信息;其中,所述图像帧画面信息包括若干按照所述视频影像信息的播放时间轴依次排列的图像帧。
5.如权利要求2所述的基于数字资产管理的视频数据加工方法,其特征在于:
在所述步骤S3中,对所述语义文字信息进行关键词识别处理,以此确定预设关键词在视频流数据中的第一出现状态;对所述图像帧画面信息进行图形识别处理,以此确定预设图形在视频流数据中的第二出现状态;根据所述第一出现状态和/或所述第二出现状态,在视频播放平台播放视频流数据过程中进行声音屏蔽和/或影像画面屏蔽处理具体包括:
步骤S301,将所述语义文字信息与预设关键词进行比对,以此确定预设关键词在所述语义文字信息中的出现位置;再根据所述出现位置和所述声音信息的播放时间轴,确定预设关键词在所述声音信息中的播放时间点,以此作为所述第一出现状态;
步骤S302,将所述图像帧画面信息中的每个图像帧进行图形识别处理,以此确定每个图像帧是否存在预设图形;当图像帧存在预设图形,则结合所述视频影像信息的播放时间轴确定对应的图像帧在所述视频影像信息中的播放时间点,以此作为所述第二出现状态;
步骤S303,根据所述第一出现状态和/或所述第二出现状态,在所述视频播放平台播放视频流数据过程中标定出预设关键词在所述声音信息中的播放时间点和/或预设图像图形在所述视频影像信息中的播放时间点,从而在相应的播放时间点上对包含预设关键词的声音信息进行声音屏蔽处理和/或对包含预设图像的视频影像信息进行影像画面模糊化屏蔽处理。
6.基于数字资产管理的视频数据加工系统,其特征在于,其包括通信连接关系构建模块、视频流数据采集与分块模块、视频流声像处理模块和视频流声像屏蔽处理模块;其中,
所述通信连接关系构建模块用于构建数字资产管理终端与视频播放平台之间的通信连接;
所述视频流数据采集与分块模块用于采集视频播放平台待播放的视频流数据;并对所述视频流数据进行数据分块处理,从而得到若干视频流子数据包;
所述视频流声像处理模块用于从每个视频流子数据包中提取得到相应的声音信息和视频影像信息;对所述声音信息进行语音识别处理,从而得到所述声音信息对应的语义文字信息;对所述视频影像信息进行图像帧识别处理,从而得到所述视频影像信息对应的图像帧画面信息;
所述视频流声像屏蔽处理模块用于对所述语义文字信息进行关键词识别处理,以此确定预设关键词在视频流数据中的第一出现状态;对所述图像帧画面信息进行图形识别处理,以此确定预设图形在视频流数据中的第二出现状态;根据所述第一出现状态和/或所述第二出现状态,在视频播放平台播放视频流数据过程中进行声音屏蔽和/或影像画面屏蔽处理。
7.如权利要求6所述的基于数字资产管理的视频数据加工系统,其特征在于:
所述通信连接关系构建模块用于构建数字资产管理终端与视频播放平台之间的通信连接具体包括:
通过数字资产管理终端向视频播放平台发送控制连接邀约指令;当所述视频播放平台处于开启状态时,向所述数字资产管理终端返回邀约答应消息;其中,所述邀约答应消息包括所述视频播放平台的平台身份信息;
当所述数字资产管理终端根据所述邀约答应消息对所述视频播放平台成功进行身份识别验证后,建立所述数字资产管理终端与所述视频播放平台之间的通信连接;
以及,
所述视频流数据采集与分块模块用于采集视频播放平台待播放的视频流数据;并对所述视频流数据进行数据分块处理,从而得到若干视频流子数据包具体包括:
在所述视频播放平台的后台上采集其待播放的视频流数据;
获取所述视频流数据的总视频播放时间和视频总数据量;并根据所述总视频播放时间和所述视频总数据量,对所述视频流数据进行数据分块处理,从而得到若干视频流子数据包。
8.如权利要求6所述的基于数字资产管理的视频数据加工系统,其特征在于:
所述视频流声像处理模块用于从每个视频流子数据包中提取得到相应的声音信息和视频影像信息;对所述声音信息进行语音识别处理,从而得到所述声音信息对应的语义文字信息;对所述视频影像信息进行图像帧识别处理,从而得到所述视频影像信息对应的图像帧画面信息具体包括:
通过所述数字资产管理终端对每个视频流子数据包进行声音与视频影像分离提取处理,从而得到相应的声音信息和视频影像信息;
按照所述声音信息的播放时间先后顺序,对所述声音信息进行语音识别处理,从而得到与所述声音信息的播放时间轴一致对应的语义文字信息;
按照所述视频影像信息的播放时间先后顺序,对所述视频影像信息进行图像帧识别处理,从而得到与所述视频影像信息的播放时间轴一致对应的图像帧画面信息;其中,所述图像帧画面信息包括若干按照所述视频影像信息的播放时间轴依次排列的图像帧。
9.如权利要求8所述的基于数字资产管理的视频数据加工系统,其特征在于:
所述视频流声像屏蔽处理模块用于对所述语义文字信息进行关键词识别处理,以此确定预设关键词在视频流数据中的第一出现状态;对所述图像帧画面信息进行图形识别处理,以此确定预设图形在视频流数据中的第二出现状态;根据所述第一出现状态和/或所述第二出现状态,在视频播放平台播放视频流数据过程中进行声音屏蔽和/或影像画面屏蔽处理具体包括:
将所述语义文字信息与预设关键词进行比对,以此确定预设关键词在所述语义文字信息中的出现位置;再根据所述出现位置和所述声音信息的播放时间轴,确定预设关键词在所述声音信息中的播放时间点,以此作为所述第一出现状态;
将所述图像帧画面信息中的每个图像帧进行图形识别处理,以此确定每个图像帧是否存在预设图形;当图像帧存在预设图形,则结合所述视频影像信息的播放时间轴确定对应的图像帧在所述视频影像信息中的播放时间点,以此作为所述第二出现状态;
根据所述第一出现状态和/或所述第二出现状态,在所述视频播放平台播放视频流数据过程中标定出预设关键词在所述声音信息中的播放时间点和/或预设图像图形在所述视频影像信息中的播放时间点,从而在相应的播放时间点上对包含预设关键词的声音信息进行声音屏蔽处理和/或对包含预设图像的视频影像信息进行影像画面模糊化屏蔽处理。
CN202210164308.4A 2022-02-23 2022-02-23 基于数字资产管理的视频数据加工方法和系统 Active CN114245205B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210164308.4A CN114245205B (zh) 2022-02-23 2022-02-23 基于数字资产管理的视频数据加工方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210164308.4A CN114245205B (zh) 2022-02-23 2022-02-23 基于数字资产管理的视频数据加工方法和系统

Publications (2)

Publication Number Publication Date
CN114245205A true CN114245205A (zh) 2022-03-25
CN114245205B CN114245205B (zh) 2022-05-24

Family

ID=80747761

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210164308.4A Active CN114245205B (zh) 2022-02-23 2022-02-23 基于数字资产管理的视频数据加工方法和系统

Country Status (1)

Country Link
CN (1) CN114245205B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114786038A (zh) * 2022-03-29 2022-07-22 慧之安信息技术股份有限公司 基于深度学习的低俗直播行为监测方法
CN115996322A (zh) * 2023-03-21 2023-04-21 深圳市安科讯实业有限公司 数字视频摄影用影像数据管理方法
CN116722951A (zh) * 2023-05-31 2023-09-08 北京航天润普科技发展有限公司 一种干扰信号编码方法

Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106507168A (zh) * 2016-10-09 2017-03-15 乐视控股(北京)有限公司 一种视频播放方法及装置
CN106973305A (zh) * 2017-03-20 2017-07-21 广东小天才科技有限公司 一种视频中不良内容的检测方法及装置
CN107529068A (zh) * 2016-06-21 2017-12-29 北京新岸线网络技术有限公司 视频内容鉴别方法及系统
CN107592569A (zh) * 2017-08-23 2018-01-16 深圳市优品壹电子有限公司 基于敏感内容的身份验证设备和相关产品
CN108763366A (zh) * 2018-05-17 2018-11-06 惠州学院 视频影像重点画面抓取方法、装置、存储介质及电子设备
CN108833972A (zh) * 2018-07-25 2018-11-16 浙江威步机器人技术有限公司 视频画面抓取方法、装置、存储介质及电子设备
CN109040782A (zh) * 2018-08-29 2018-12-18 百度在线网络技术(北京)有限公司 视频播放处理方法、装置及电子设备
CN109508402A (zh) * 2018-11-15 2019-03-22 上海指旺信息科技有限公司 违规用语检测方法及装置
CN110085213A (zh) * 2019-04-30 2019-08-02 广州虎牙信息科技有限公司 音频的异常监控方法、装置、设备和存储介质
CN110557671A (zh) * 2019-09-10 2019-12-10 湖南快乐阳光互动娱乐传媒有限公司 一种视频不健康内容自动处理方法及系统
CN111432274A (zh) * 2019-01-10 2020-07-17 百度在线网络技术(北京)有限公司 视频的处理方法和装置
CN111683285A (zh) * 2020-08-11 2020-09-18 腾讯科技(深圳)有限公司 文件内容识别方法、装置、计算机设备及存储介质
CN111835739A (zh) * 2020-06-30 2020-10-27 北京小米松果电子有限公司 视频播放方法、装置及计算机可读存储介质
CN111986656A (zh) * 2020-08-31 2020-11-24 上海松鼠课堂人工智能科技有限公司 教学视频自动字幕处理方法与系统
CN112995696A (zh) * 2021-04-20 2021-06-18 共道网络科技有限公司 一种直播间违规检测方法及装置
CN113114986A (zh) * 2021-03-30 2021-07-13 深圳市冠标科技发展有限公司 基于画面和声音同步的预警方法及相关设备
CN113163153A (zh) * 2021-04-06 2021-07-23 游密科技(深圳)有限公司 视频会议中违规信息的处理方法、装置、介质及电子设备

Patent Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107529068A (zh) * 2016-06-21 2017-12-29 北京新岸线网络技术有限公司 视频内容鉴别方法及系统
CN106507168A (zh) * 2016-10-09 2017-03-15 乐视控股(北京)有限公司 一种视频播放方法及装置
CN106973305A (zh) * 2017-03-20 2017-07-21 广东小天才科技有限公司 一种视频中不良内容的检测方法及装置
CN107592569A (zh) * 2017-08-23 2018-01-16 深圳市优品壹电子有限公司 基于敏感内容的身份验证设备和相关产品
CN108763366A (zh) * 2018-05-17 2018-11-06 惠州学院 视频影像重点画面抓取方法、装置、存储介质及电子设备
CN108833972A (zh) * 2018-07-25 2018-11-16 浙江威步机器人技术有限公司 视频画面抓取方法、装置、存储介质及电子设备
CN109040782A (zh) * 2018-08-29 2018-12-18 百度在线网络技术(北京)有限公司 视频播放处理方法、装置及电子设备
CN109508402A (zh) * 2018-11-15 2019-03-22 上海指旺信息科技有限公司 违规用语检测方法及装置
CN111432274A (zh) * 2019-01-10 2020-07-17 百度在线网络技术(北京)有限公司 视频的处理方法和装置
CN110085213A (zh) * 2019-04-30 2019-08-02 广州虎牙信息科技有限公司 音频的异常监控方法、装置、设备和存储介质
CN110557671A (zh) * 2019-09-10 2019-12-10 湖南快乐阳光互动娱乐传媒有限公司 一种视频不健康内容自动处理方法及系统
CN111835739A (zh) * 2020-06-30 2020-10-27 北京小米松果电子有限公司 视频播放方法、装置及计算机可读存储介质
CN111683285A (zh) * 2020-08-11 2020-09-18 腾讯科技(深圳)有限公司 文件内容识别方法、装置、计算机设备及存储介质
CN111986656A (zh) * 2020-08-31 2020-11-24 上海松鼠课堂人工智能科技有限公司 教学视频自动字幕处理方法与系统
CN113114986A (zh) * 2021-03-30 2021-07-13 深圳市冠标科技发展有限公司 基于画面和声音同步的预警方法及相关设备
CN113163153A (zh) * 2021-04-06 2021-07-23 游密科技(深圳)有限公司 视频会议中违规信息的处理方法、装置、介质及电子设备
CN112995696A (zh) * 2021-04-20 2021-06-18 共道网络科技有限公司 一种直播间违规检测方法及装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114786038A (zh) * 2022-03-29 2022-07-22 慧之安信息技术股份有限公司 基于深度学习的低俗直播行为监测方法
CN115996322A (zh) * 2023-03-21 2023-04-21 深圳市安科讯实业有限公司 数字视频摄影用影像数据管理方法
CN115996322B (zh) * 2023-03-21 2023-05-30 深圳市安科讯实业有限公司 数字视频摄影用影像数据管理方法
CN116722951A (zh) * 2023-05-31 2023-09-08 北京航天润普科技发展有限公司 一种干扰信号编码方法

Also Published As

Publication number Publication date
CN114245205B (zh) 2022-05-24

Similar Documents

Publication Publication Date Title
CN114245205B (zh) 基于数字资产管理的视频数据加工方法和系统
CN111741356B (zh) 双录视频的质检方法、装置、设备及可读存储介质
CN111683285B (zh) 文件内容识别方法、装置、计算机设备及存储介质
CN114465737B (zh) 一种数据处理方法、装置、计算机设备及存储介质
CN110347866B (zh) 信息处理方法、装置、存储介质及电子设备
CN110944123A (zh) 一种体育赛事智能导播方法
CN112153397B (zh) 视频处理方法、装置、服务器及存储介质
CN112132030B (zh) 视频处理方法及装置、存储介质及电子设备
CN111327913B (zh) 消息处理方法、装置及电子设备
CN114466210A (zh) 直播质量检测处理方法及其装置、设备、介质、产品
CN109729429A (zh) 视频播放方法、装置、设备和介质
CN110072140A (zh) 一种视频信息提示方法、装置、设备及存储介质
CN110210299A (zh) 语音训练数据生成方法、装置、设备及可读存储介质
CN116189079A (zh) 一种用于监控设备的异常检测方法及设备
CN111914649A (zh) 人脸识别的方法及装置、电子设备、存储介质
CN114786038A (zh) 基于深度学习的低俗直播行为监测方法
CN111767838A (zh) 视频审核方法和系统、计算机系统和计算机可读存储介质
CN111698529A (zh) 直播监控方法、装置、设备以及计算机可读存储介质
CN116017088A (zh) 视频字幕处理方法、装置、电子设备和存储介质
CN111741333B (zh) 直播数据获取方法、装置、计算机设备及存储介质
CN113971402A (zh) 内容识别方法、装置、介质及电子设备
CN114189754A (zh) 一种视频情节分段方法及系统
RU2807642C1 (ru) Способ и устройство, сервер и носитель данных для модерации прямой трансляции
CN115206342A (zh) 一种数据处理方法、装置、计算机设备及可读存储介质
CN112788356A (zh) 一种直播审核的方法、装置、服务器和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant