CN115150661B - 视频关键片段的包装方法及相关装置 - Google Patents

视频关键片段的包装方法及相关装置 Download PDF

Info

Publication number
CN115150661B
CN115150661B CN202210726290.2A CN202210726290A CN115150661B CN 115150661 B CN115150661 B CN 115150661B CN 202210726290 A CN202210726290 A CN 202210726290A CN 115150661 B CN115150661 B CN 115150661B
Authority
CN
China
Prior art keywords
packaging
key
video
matching
content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210726290.2A
Other languages
English (en)
Other versions
CN115150661A (zh
Inventor
李小龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Flash Scissor Intelligent Technology Co ltd
Original Assignee
Shenzhen Flash Scissor Intelligent Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Flash Scissor Intelligent Technology Co ltd filed Critical Shenzhen Flash Scissor Intelligent Technology Co ltd
Priority to CN202210726290.2A priority Critical patent/CN115150661B/zh
Publication of CN115150661A publication Critical patent/CN115150661A/zh
Application granted granted Critical
Publication of CN115150661B publication Critical patent/CN115150661B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明涉及视频包装领域，公开了一种视频关键片段的包装方法及相关装置，包括：通过获取待分析的视频资源，对所述待分析的视频资源进行分帧以获得预处理帧数集；在所述预处理帧数集中根据预设关键内容进行遍历以在所述待分析的视频资源中提取关键片段；获取所述关键片段中的标签信息，根据所述标签信息匹配包装类型；根据所述包装类型对所述关键片段进行包装，通过分析视频画面，提取画面中的关键特征及时间戳，基于特征信息和标签，从而通过智能匹配规则和包装规则，对关键内容点进行自动包装，实现了根据视频内容自动对视频进行包装的技术效果。

Description

视频关键片段的包装方法及相关装置
技术领域
本发明涉及视频包装领域，尤其涉及一种视频关键片段的包装方法及相关装置。
背景技术
用户在对拍摄的原视频进行剪辑，都会经历粗剪到精剪过程。其中精简过程中，需要对整个视频片段进行不断地播放，从而寻找视频中得有趣的内容点，并对该内容点进行添加花字、贴纸、特效、音效等，用户在整个过程中需要不断的重复寻找关键内容点，又要面临寻找和设计符合的包装效果，对用户来说耗时且费力。
因此，如何根据视频内容自动对视频进行包装成为了一个亟待解决的技术问题。
上述内容仅用于辅助理解本发明的技术方案，并不代表承认上述内容是现有技术。
发明内容
本发明的主要目的在于提供一种视频关键片段的包装方法及相关装置，旨在解决如何根据视频内容自动对视频进行包装技术问题。
为实现上述目的，本发明提供一种视频关键片段的包装方法，所述方法包括以下步骤：
获取待分析的视频资源，对所述待分析的视频资源进行分帧以获得预处理帧数集；
在所述预处理帧数集中根据预设关键内容进行遍历以在所述待分析的视频资源中提取关键片段；
获取所述关键片段中的标签信息，根据所述标签信息匹配包装类型；
根据所述包装类型对所述关键片段进行包装。
可选地，所述在所述预处理帧数集中根据预设关键内容进行遍历以在所述待分析的视频资源中提取关键片段包括：
在所述预处理帧数集中根据预设关键内容进行遍历，获取包含所述预设关键内容的图像帧；
获取所述图像帧对应的内容权重，并根据所述内容权重判断是否满足关键片段提取条件；
若是，则获取满足所述提取条件的图像帧对应的时间戳；
根据所述时间戳在所述待分析的视频资源中确定关键片段。
可选地，所述在所述预处理帧数集中根据预设关键内容进行遍历，获取包含所述预设关键内容的图像帧，包括：
在所述预处理帧数集中对所有图片帧进行综合识别，所述综合识别的类型包括：动作识别，表情识别以及物体识别；
在获取到包含所述综合识别的类型对应的预设关键内容的图像帧时，在所述预处理帧数集中对所述图像帧进行提取。
可选地，所述获取所述图像帧对应的内容权重，并根据所述内容权重判断是否满足关键片段提取条件包括：
根据所述图像帧中的所述关键内容结合预设权重规则进行计算，并获得权重计算结果；
根据所述权重计算结果判断是否满足关键片段提取条件，所述关键片段提取条件为在所述权重计算结果为正数时，可对所述图像帧进行提取。
可选地，所述获取所述关键片段中的标签信息，根据所述标签信息匹配包装类型之后，还包括：
判断在所述标签信息匹配包装类型的匹配结果中，所述匹配结果数量是否大于1；
若否，则在所述匹配结果中判断是否存在多个效果的包装类型；
在所述匹配结果中存在多个效果的包装类型时，选取包含所述标签信息最多的包装类型；
在所述匹配结果中不存在多个效果的包装类型时，选取所述匹配结果中的所有的包装类型。
可选地，所述在所述匹配结果中存在多个效果的包装类型时，选取包含所述标签信息最多的包装类型之后，还包括：
在所述匹配结果中所有包装类型对应的标签数量一致时，在所述匹配结果中随机选取任一包装类型。
可选地，所述获取待分析的视频资源，对所述待分析的视频资源进行分帧以获得预处理帧数集之后，还包括：
在所述预处理帧数集中获取整体内容场景属性；
根据所述整体内容场景属性匹配对应的包装字幕和背景音乐；
将所述包装字幕为所述预处理帧数集中的所有文字进行包装；
在所述待分析的视频资源中加载所述背景音乐。
此外，为实现上述目的，本发明还提出一种视频关键片段的包装装置，所述视频关键片段的包装装置包括：
视频分帧模块，用于获取待分析的视频资源，对所述待分析的视频资源进行分帧以获得预处理帧数集；
片段提取模块，用于在所述预处理帧数集中根据预设关键内容进行遍历以在所述待分析的视频资源中提取关键片段；
包装匹配模块，用于获取所述关键片段中的标签信息，根据所述标签信息匹配包装类型；
片段包装模块，用于根据所述包装类型对所述关键片段进行包装。
此外，为实现上述目的，本发明还提出一种视频关键片段的包装，所述视频关键片段的包装包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的视频关键片段的包装生成程序，所述视频关键片段的包装程序配置为实现如上文所述的视频关键片段的包装方法的步骤。
此外，为实现上述目的，本发明还提出一种存储介质，所述存储介质上存储有视频关键片段的包装程序，所述视频关键片段的包装程序被处理器执行时实现如上文所述的视频关键片段的包装生成方法的步骤。
本发明通过获取待分析的视频资源，对所述待分析的视频资源进行分帧以获得预处理帧数集；在所述预处理帧数集中根据预设关键内容进行遍历以在所述待分析的视频资源中提取关键片段；获取所述关键片段中的标签信息，根据所述标签信息匹配包装类型；根据所述包装类型对所述关键片段进行包装，通过分析视频画面，提取画面中的关键特征及时间戳，基于特征信息和标签，从而通过智能匹配规则和包装规则，对关键内容点进行自动包装，实现了根据视频内容自动对视频进行包装的技术效果。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的视频关键片段的包装的结构示意图；
图2为本发明视频关键片段的包装方法第一实施例的流程示意图；
图3为本发明视频关键片段的包装方法第一实施例的关键特征获取图：
图4为本发明视频关键片段的包装方法第一实施例的标签获取；
图5为本发明视频关键片段的包装方法第一实施例的包装效果；
图6为本发明视频关键片段的包装装置第一实施例的结构框图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅用以解释本发明，并不用于限定本发明。
参照图1，图1为本发明实施例方案涉及的硬件运行环境的视频关键片段的包装结构示意图。
如图1所示，该视频关键片段的包装可以包括：处理器1001，例如中央处理器(Central Processing Unit，CPU)，通信总线1002、用户接口1003，网络接口1004，存储器1005。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真(WIreless-FIdelity，WI-FI)接口)。存储器1005可以是高速的随机存取存储器(RandomAccess Memory，RAM)存储器，也可以是稳定的非易失性存储器(Non-Volatile Memory，NVM)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解，图1中示出的结构并不构成对视频关键片段的包装的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
如图1所示，作为一种存储介质的存储器1005中可以包括操作系统、数据存储模块、网络通信模块、用户接口模块以及视频关键片段的包装程序。
在图1所示的视频关键片段的包装中，网络接口1004主要用于与网络服务器进行数据通信；用户接口1003主要用于与用户进行数据交互；本发明视频关键片段的包装中的处理器1001、存储器1005可以设置在视频关键片段的包装中，所述视频关键片段的包装设备通过处理器1001调用存储器1005中存储的视频关键片段的包装程序，并执行本发明实施例提供的视频关键片段的包装方法。
本发明实施例提供了一种视频关键片段的包装方法，参照图2，图2为本发明视频关键片段的包装方法第一实施例的流程示意图。
本实施例中，所述视频关键片段的包装方法包括以下步骤：
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
步骤S10：获取待分析的视频资源，对所述待分析的视频资源进行分帧以获得预处理帧数集。
需要说明的是，本实施例的执行主体可以是具有视频关键片段识别以及自动对关键片段进行包装的设备或者系统，在本实施例中以视频关键片段包装设备为例进行说明，本实施例在此不做限制。
可以理解的是，在本实施例中如图3所示，本实施例通过对整个视频的理解，基于场景内的画面分析规则，输出关键特征；通过对内容的视频理解，提取视频风格/属性，便于后续优先匹配的关键内容及包装效果；获取关键内容，将关键内容进行标记处理，并返回对应时间戳和特征属性。
步骤S20：在所述预处理帧数集中根据预设关键内容进行遍历以在所述待分析的视频资源中提取关键片段。
需要理解的是，在本实施例中，预设关键内容包括：提取视频中的每帧画面，结合画面分析规则；动作识别：识别图片的人体动作行为，包括：举手、吃喝、吸烟、打电话、玩手机、趴桌睡觉、跌倒等动作；表情识别：识别图像中的人物的表情。包括中性，高兴，惊讶，伤心，生气，厌恶，害怕等多种表情；物体识别：检测图像中的物体。例如：人体、椅子、篮球、摩托车、旗帜、斑马、明星、素人、游戏画面等各种元素；如果画面匹配到多个关键特征，则取权重最高特征。
进一步地，为了在视频包装过程之前能够精确获取关键片段，所述在所述预处理帧数集中根据预设关键内容进行遍历以在所述待分析的视频资源中提取关键片段包括：在所述预处理帧数集中根据预设关键内容进行遍历，获取包含所述预设关键内容的图像帧；获取所述图像帧对应的内容权重，并根据所述内容权重判断是否满足关键片段提取条件；若是，则获取满足所述提取条件的图像帧对应的时间戳；根据所述时间戳在所述待分析的视频资源中确定关键片段。
在具体实施中，所述在所述预处理帧数集中根据预设关键内容进行遍历，获取包含所述预设关键内容的图像帧，包括：在所述预处理帧数集中对所有图片帧进行综合识别，所述综合识别的类型包括：动作识别，表情识别以及物体识别；在获取到包含所述综合识别的类型对应的预设关键内容的图像帧时，在所述预处理帧数集中对所述图像帧进行提取。
在具体实施中，所述获取所述图像帧对应的内容权重，并根据所述内容权重判断是否满足关键片段提取条件包括：根据所述图像帧中的所述关键内容结合预设权重规则进行计算，并获得权重计算结果；根据所述权重计算结果判断是否满足关键片段提取条件，所述关键片段提取条件为在所述权重计算结果为正数时，可对所述图像帧进行提取。
需要说明的是，本实施例的关键点在于实时处理和分析视频，基于画面理解提取视频中关键信息点，然后通过包装规则对视频关键点和整体内容进行智能包装，最终生成不同风格的视频。本实施例的提出基于画面包装视频的方法，节省了人力物力和设备限制，帮助用户在理解视频内容、寻找关键内容、寻找包装效果等视频包装操作，通过实现对视频分析到智能包装效果，快速提高用户的剪辑效率，实现快速出片。
步骤S30：获取所述关键片段中的标签信息，根据所述标签信息匹配包装类型。
在具体实施中，如图4所示，基于标签匹配包装类型如果匹配到类型数目为1，则直接应用该效果；如果匹配到类型数目为多个包含不同类型效果，应用的类型数目取随机{1,2,n}类型，n代表匹配的最大类型数；同一个类型多个效果，仅会应用1个效果包含匹配的标签数目多的，优先应用效果包含匹配的标签数目相同，随机应用1个。
进一步地，为了在视频包装过程中能够自动根据视频内容确定包装类型，所述获取所述关键片段中的标签信息，根据所述标签信息匹配包装类型之后，还包括：判断在所述标签信息匹配包装类型的匹配结果中，所述匹配结果数量是否大于1；若否，则在所述匹配结果中判断是否存在多个效果的包装类型；在所述匹配结果中存在多个效果的包装类型时，选取包含所述标签信息最多的包装类型；在所述匹配结果中不存在多个效果的包装类型时，选取所述匹配结果中的所有的包装类型。
在具体实施中，所述在所述匹配结果中存在多个效果的包装类型时，选取包含所述标签信息最多的包装类型之后，还包括：在所述匹配结果中所有包装类型对应的标签数量一致时，在所述匹配结果中随机选取任一包装类型。
步骤S40：根据所述包装类型对所述关键片段进行包装。
可以理解的是，如图5所示，通过场景值匹配包装规则，用于指定不同包装效果的参数信息(位置、大小、时长等)如果场景包含多个包装规则，则取权重值最大的1个；获取需要包装的关键特征时间戳以及对应的包装效果；按照包装规则，进行智能包装。
进一步地，为了完善自动对视频包装的效果，所述获取待分析的视频资源，对所述待分析的视频资源进行分帧以获得预处理帧数集之后，还包括：在所述预处理帧数集中获取整体内容场景属性；根据所述整体内容场景属性匹配对应的包装字幕和背景音乐；将所述包装字幕为所述预处理帧数集中的所有文字进行包装；在所述待分析的视频资源中加载所述背景音乐。
本实例通过获取待分析的视频资源，对所述待分析的视频资源进行分帧以获得预处理帧数集；在所述预处理帧数集中根据预设关键内容进行遍历以在所述待分析的视频资源中提取关键片段；获取所述关键片段中的标签信息，根据所述标签信息匹配包装类型；根据所述包装类型对所述关键片段进行包装，通过分析视频画面，提取画面中的关键特征及时间戳，基于特征信息和标签，从而通过智能匹配规则和包装规则，对关键内容点进行自动包装，实现了根据视频内容自动对视频进行包装的技术效果。
参照图6，图6为本发明视频关键片段的包装装置第一实施例的结构框图。
如图6所示，本发明实施例提出的视频关键片段的包装装置包括：
视频分帧模块10，用于获取待分析的视频资源，对所述待分析的视频资源进行分帧以获得预处理帧数集；
片段提取模块20，用于在所述预处理帧数集中根据预设关键内容进行遍历以在所述待分析的视频资源中提取关键片段；
包装匹配模块30，用于获取所述关键片段中的标签信息，根据所述标签信息匹配包装类型；
片段包装模块40，用于根据所述包装类型对所述关键片段进行包装。
本实例通过获取待分析的视频资源，对所述待分析的视频资源进行分帧以获得预处理帧数集；在所述预处理帧数集中根据预设关键内容进行遍历以在所述待分析的视频资源中提取关键片段；获取所述关键片段中的标签信息，根据所述标签信息匹配包装类型；根据所述包装类型对所述关键片段进行包装，通过分析视频画面，提取画面中的关键特征及时间戳，基于特征信息和标签，从而通过智能匹配规则和包装规则，对关键内容点进行自动包装，实现了根据视频内容自动对视频进行包装的技术效果。
在一实施例中，片段提取模块20，还用于在所述预处理帧数集中根据预设关键内容进行遍历，获取包含所述预设关键内容的图像帧；获取所述图像帧对应的内容权重，并根据所述内容权重判断是否满足关键片段提取条件；若是，则获取满足所述提取条件的图像帧对应的时间戳；根据所述时间戳在所述待分析的视频资源中确定关键片段。
在一实施例中，片段提取模块20，还用于在所述预处理帧数集中对所有图片帧进行综合识别，所述综合识别的类型包括：动作识别，表情识别以及物体识别；在获取到包含所述综合识别的类型对应的预设关键内容的图像帧时，在所述预处理帧数集中对所述图像帧进行提取。
在一实施例中，片段提取模块20，还用于根据所述图像帧中的所述关键内容结合预设权重规则进行计算，并获得权重计算结果；根据所述权重计算结果判断是否满足关键片段提取条件，所述关键片段提取条件为在所述权重计算结果为正数时，可对所述图像帧进行提取。
在一实施例中，包装匹配模块30，还用于判断在所述标签信息匹配包装类型的匹配结果中，所述匹配结果数量是否大于1；若否，则在所述匹配结果中判断是否存在多个效果的包装类型；在所述匹配结果中存在多个效果的包装类型时，选取包含所述标签信息最多的包装类型；在所述匹配结果中不存在多个效果的包装类型时，选取所述匹配结果中的所有的包装类型。
在一实施例中，包装匹配模块30，还用于在所述匹配结果中所有包装类型对应的标签数量一致时，在所述匹配结果中随机选取任一包装类型。
在一实施例中，片段包装模块40，还用于在所述预处理帧数集中获取整体内容场景属性；根据所述整体内容场景属性匹配对应的包装字幕和背景音乐；将所述包装字幕为所述预处理帧数集中的所有文字进行包装；在所述待分析的视频资源中加载所述背景音乐
应当理解的是，以上仅为举例说明，对本发明的技术方案并不构成任何限定，在具体应用中，本领域的技术人员可以根据需要进行设置，本发明对此不做限制。
需要说明的是，以上所描述的工作流程仅仅是示意性的，并不对本发明的保护范围构成限定，在实际应用中，本领域的技术人员可以根据实际的需要选择其中的部分或者全部来实现本实施例方案的目的，此处不做限制。
另外，未在本实施例中详尽描述的技术细节，可参见本发明任意实施例所提供的视频关键片段的包装方法，此处不再赘述。
此外，需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如只读存储器(ReadOnlyMemory，ROM)/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围。

Claims (5)

1.一种视频关键片段的包装方法，其特征在于，所述视频关键片段的包装方法包括：
获取待分析的视频资源，对所述待分析的视频资源进行分帧以获得预处理帧数集；
在所述预处理帧数集中根据预设关键内容进行遍历以在所述待分析的视频资源中提取关键片段；
获取所述关键片段中的标签信息，根据所述标签信息匹配包装类型；
根据所述包装类型对所述关键片段进行包装；
所述在所述预处理帧数集中根据预设关键内容进行遍历以在所述待分析的视频资源中提取关键片段包括：在所述预处理帧数集中根据预设关键内容进行遍历，获取包含所述预设关键内容的图像帧；获取所述图像帧对应的内容权重，并根据所述内容权重判断是否满足关键片段提取条件；若是，则获取满足所述提取条件的图像帧对应的时间戳；根据所述时间戳在所述待分析的视频资源中确定关键片段；
所述在所述预处理帧数集中根据预设关键内容进行遍历，获取包含所述预设关键内容的图像帧，包括：在所述预处理帧数集中对所有图片帧进行综合识别，所述综合识别的类型包括：动作识别，表情识别以及物体识别；在获取到包含所述综合识别的类型对应的预设关键内容的图像帧时，在所述预处理帧数集中对所述图像帧进行提取；
所述获取所述图像帧对应的内容权重，并根据所述内容权重判断是否满足关键片段提取条件包括：根据所述图像帧中的所述关键内容结合预设权重规则进行计算，并获得权重计算结果；根据所述权重计算结果判断是否满足关键片段提取条件，所述关键片段提取条件为在所述权重计算结果为正数时，可对所述图像帧进行提取；
所述获取所述关键片段中的标签信息，根据所述标签信息匹配包装类型之后，还包括：判断在所述标签信息匹配包装类型的匹配结果中，所述匹配结果数量是否大于1；若否，则在所述匹配结果中判断是否存在多个效果的包装类型；在所述匹配结果中存在多个效果的包装类型时，选取包含所述标签信息最多的包装类型；在所述匹配结果中不存在多个效果的包装类型时，选取所述匹配结果中的所有的包装类型；
所述在所述匹配结果中存在多个效果的包装类型时，选取包含所述标签信息最多的包装类型之后，还包括：在所述匹配结果中所有包装类型对应的标签数量一致时，在所述匹配结果中随机选取任一包装类型；
所述根据所述包装类型对所述关键片段进行包装包括：通过场景值匹配包装规则，用于指定不同包装效果的参数信息，所述参数信息包括位置、大小和时长，如果场景值包含多个包装规则，则取权重值最大的1个；获取需要包装的关键特征时间戳以及对应的包装效果；按照所述包装规则，进行智能包装。
2.根据权利要求1所述的视频关键片段的包装方法，其特征在于，所述获取待分析的视频资源，对所述待分析的视频资源进行分帧以获得预处理帧数集之后，还包括：
在所述预处理帧数集中获取整体内容场景属性；
根据所述整体内容场景属性匹配对应的包装字幕和背景音乐；
将所述包装字幕为所述预处理帧数集中的所有文字进行包装；
在所述待分析的视频资源中加载所述背景音乐。
3.一种视频关键片段的包装装置，其特征在于，所述视频关键片段的包装装置包括：
视频分帧模块，用于获取待分析的视频资源，对所述待分析的视频资源进行分帧以获得预处理帧数集；
片段提取模块，用于在所述预处理帧数集中根据预设关键内容进行遍历以在所述待分析的视频资源中提取关键片段；
包装匹配模块，用于获取所述关键片段中的标签信息，根据所述标签信息匹配包装类型；
片段包装模块，用于根据所述包装类型对所述关键片段进行包装；
所述片段提取模块，还用于在所述预处理帧数集中根据预设关键内容进行遍历，获取包含所述预设关键内容的图像帧；获取所述图像帧对应的内容权重，并根据所述内容权重判断是否满足关键片段提取条件；若是，则获取满足所述提取条件的图像帧对应的时间戳；根据所述时间戳在所述待分析的视频资源中确定关键片段；
所述片段提取模块，还用于在所述预处理帧数集中对所有图片帧进行综合识别，所述综合识别的类型包括：动作识别，表情识别以及物体识别；在获取到包含所述综合识别的类型对应的预设关键内容的图像帧时，在所述预处理帧数集中对所述图像帧进行提取；
所述片段提取模块，还用于根据所述图像帧中的所述关键内容结合预设权重规则进行计算，并获得权重计算结果；根据所述权重计算结果判断是否满足关键片段提取条件，所述关键片段提取条件为在所述权重计算结果为正数时，可对所述图像帧进行提取；
所述包装匹配模块，还用于判断在所述标签信息匹配包装类型的匹配结果中，所述匹配结果数量是否大于1；若否，则在所述匹配结果中判断是否存在多个效果的包装类型；在所述匹配结果中存在多个效果的包装类型时，选取包含所述标签信息最多的包装类型；在所述匹配结果中不存在多个效果的包装类型时，选取所述匹配结果中的所有的包装类型；
所述包装匹配模块，还用于在所述匹配结果中所有包装类型对应的标签数量一致时，在所述匹配结果中随机选取任一包装类型；
所述片段包装模块，还用于通过场景值匹配包装规则，用于指定不同包装效果的参数信息，所述参数信息包括位置、大小和时长，如果场景值包含多个包装规则，则取权重值最大的1个；获取需要包装的关键特征时间戳以及对应的包装效果；按照所述包装规则，进行智能包装。
4.一种视频关键片段的包装设备，其特征在于，所述视频关键片段的包装设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的视频关键片段的包装程序，所述视频关键片段的包装程序配置为实现根据权利要求1和2中任一项所述的视频关键片段的包装方法的步骤。
5.一种存储介质，其特征在于，所述存储介质上存储有视频关键片段的包装程序，所述视频关键片段的包装程序被处理器执行时实现根据权利要求1和2中任一项所述的视频关键片段的包装生成方法的步骤。
CN202210726290.2A 2022-06-23 2022-06-23 视频关键片段的包装方法及相关装置 Active CN115150661B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210726290.2A CN115150661B (zh) 2022-06-23 2022-06-23 视频关键片段的包装方法及相关装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210726290.2A CN115150661B (zh) 2022-06-23 2022-06-23 视频关键片段的包装方法及相关装置

Publications (2)

Publication Number Publication Date
CN115150661A CN115150661A (zh) 2022-10-04
CN115150661B true CN115150661B (zh) 2024-04-09

Family

ID=83408598

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210726290.2A Active CN115150661B (zh) 2022-06-23 2022-06-23 视频关键片段的包装方法及相关装置

Country Status (1)

Country Link
CN (1) CN115150661B (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101827203A (zh) * 2010-03-29 2010-09-08 天津大学 一种视频标注方法
JP2014022955A (ja) * 2012-07-18 2014-02-03 Sharp Corp レーベル画像管理装置、録画装置、レーベル画像管理方法、画像管理サーバ、画像管理システム、プログラム、及び記録媒体
CN111309957A (zh) * 2020-03-17 2020-06-19 杭州趣维科技有限公司 一种自动生成旅行相册mv的方法
CN111506599A (zh) * 2020-04-20 2020-08-07 广州大学 基于规则匹配和深度学习的工控设备识别方法及系统
CN111541936A (zh) * 2020-04-02 2020-08-14 腾讯科技（深圳）有限公司 视频及图像处理方法、装置、电子设备、存储介质
CN111866585A (zh) * 2020-06-22 2020-10-30 北京美摄网络科技有限公司 一种视频处理方法及装置
CN113329261A (zh) * 2021-08-02 2021-08-31 北京达佳互联信息技术有限公司 视频处理方法及装置
CN113709385A (zh) * 2021-03-05 2021-11-26 腾讯科技（深圳）有限公司 一种视频处理方法及装置、计算机设备和存储介质
CN114173067A (zh) * 2021-12-21 2022-03-11 科大讯飞股份有限公司 一种视频生成方法、装置、设备及存储介质
CN114297439A (zh) * 2021-12-20 2022-04-08 天翼爱音乐文化科技有限公司 一种短视频标签确定方法、系统、装置及存储介质

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2021231754A1 (en) * 2020-03-02 2022-09-15 Visual Supply Company Systems and methods for automating video editing

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101827203A (zh) * 2010-03-29 2010-09-08 天津大学 一种视频标注方法
JP2014022955A (ja) * 2012-07-18 2014-02-03 Sharp Corp レーベル画像管理装置、録画装置、レーベル画像管理方法、画像管理サーバ、画像管理システム、プログラム、及び記録媒体
CN111309957A (zh) * 2020-03-17 2020-06-19 杭州趣维科技有限公司 一种自动生成旅行相册mv的方法
CN111541936A (zh) * 2020-04-02 2020-08-14 腾讯科技（深圳）有限公司 视频及图像处理方法、装置、电子设备、存储介质
WO2021196890A1 (zh) * 2020-04-02 2021-10-07 腾讯科技（深圳）有限公司 多媒体处理方法、装置、电子设备、存储介质
CN111506599A (zh) * 2020-04-20 2020-08-07 广州大学 基于规则匹配和深度学习的工控设备识别方法及系统
CN111866585A (zh) * 2020-06-22 2020-10-30 北京美摄网络科技有限公司 一种视频处理方法及装置
CN113709385A (zh) * 2021-03-05 2021-11-26 腾讯科技（深圳）有限公司 一种视频处理方法及装置、计算机设备和存储介质
CN113329261A (zh) * 2021-08-02 2021-08-31 北京达佳互联信息技术有限公司 视频处理方法及装置
CN114297439A (zh) * 2021-12-20 2022-04-08 天翼爱音乐文化科技有限公司 一种短视频标签确定方法、系统、装置及存储介质
CN114173067A (zh) * 2021-12-21 2022-03-11 科大讯飞股份有限公司 一种视频生成方法、装置、设备及存储介质

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Research on a Multimedia Video Image Coding Method Based on Machine Learning;X. Liu;《2021 IEEE International Conference on Industrial Application of Artificial Intelligence (IAAI)》;20220204;全文 *
基于供应链视角的包装可视化研究;陈琳轶;《万方数据知识服务平台》;20180611;全文 *
基于姿态估计的人体异常行为识别算法;李建更;《北京工业大学学报》;20220519;全文 *

Also Published As

Publication number Publication date
CN115150661A (zh) 2022-10-04

Similar Documents

Publication Publication Date Title
CN111586466B (zh) 一种视频数据处理方法、装置及存储介质
CN113641859B (zh) 脚本生成方法、系统、计算机存储介质及计算机程序产品
CN113392236A (zh) 一种数据分类方法、计算机设备及可读存储介质
CN110502664A (zh) 视频标签索引库创建方法、视频标签生成方法及装置
CN113536172B (zh) 一种百科信息展示的方法、装置及计算机存储介质
CN110708593A (zh) 视频内容中嵌入广告的方法、装置及存储介质
CN111488186A (zh) 数据处理方法、装置、电子设备及计算机存储介质
CN115422334A (zh) 信息处理方法、装置、电子设备及存储介质
CN115150661B (zh) 视频关键片段的包装方法及相关装置
CN113660526B (zh) 脚本生成方法、系统、计算机存储介质及计算机程序产品
CN111488813A (zh) 视频的情感标注方法、装置、电子设备及存储介质
CN109120994A (zh) 一种视频文件自动剪辑方法、装置及计算机可读介质
CN108764232B (zh) 标签位置获取方法及装置
CN107862016A (zh) 一种专题页面的配置方法
CN115830599B (zh) 工业字符识别方法、模型训练方法、装置、设备和介质
CN110297932B (zh) 确定矢量图中封闭图形的最大内接圆的方法、装置及电子设备
CN108804652B (zh) 封面图片的生成方法、装置、存储介质和电子装置
CN110764994A (zh) 页面元素封装方法、装置、电子设备及存储介质
CN113836305B (zh) 基于文本的行业类别识别方法及装置
CN102982056B (zh) 短篇动态图像作品的自动制作方法及计算机信息处理系统
CN114390369A (zh) 动态封面生成方法、装置、设备及存储介质
CN112312205A (zh) 一种视频处理方法、装置、电子设备和计算机存储介质
CN112667831A (zh) 素材存储方法、装置及电子设备
CN113722010B (zh) 骨架屏生成方法、装置、设备及存储介质
CN109254712A (zh) 信息处理方法及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 518000 Building 1901, 1902, 1903, Qianhai Kexing Science Park, Labor Community, Xixiang Street, Bao'an District, Shenzhen, Guangdong Province

Applicant after: Shenzhen Flash Scissor Intelligent Technology Co.,Ltd.

Address before: 518000 unit 9abcde, building 2, phase II, Haihong Industrial plant, west of Xixiang Avenue, Laodong community, Xixiang street, Bao'an District, Shenzhen City, Guangdong Province

Applicant before: Shenzhen big brother Technology Co.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant