CN113840099B - 视频处理方法、装置、设备及计算机可读存储介质 - Google Patents

视频处理方法、装置、设备及计算机可读存储介质 Download PDF

Info

Publication number
CN113840099B
CN113840099B CN202010582609.XA CN202010582609A CN113840099B CN 113840099 B CN113840099 B CN 113840099B CN 202010582609 A CN202010582609 A CN 202010582609A CN 113840099 B CN113840099 B CN 113840099B
Authority
CN
China
Prior art keywords
target
image
editing
processed
mode
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010582609.XA
Other languages
English (en)
Other versions
CN113840099A (zh
Inventor
王妍
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing ByteDance Network Technology Co Ltd
Original Assignee
Beijing ByteDance Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd filed Critical Beijing ByteDance Network Technology Co Ltd
Priority to CN202010582609.XA priority Critical patent/CN113840099B/zh
Priority to JP2022579697A priority patent/JP7566937B2/ja
Priority to EP21829941.0A priority patent/EP4161080A4/en
Priority to PCT/CN2021/101896 priority patent/WO2021259333A1/zh
Priority to KR1020227045712A priority patent/KR20230016055A/ko
Publication of CN113840099A publication Critical patent/CN113840099A/zh
Priority to US18/087,722 priority patent/US11967344B2/en
Application granted granted Critical
Publication of CN113840099B publication Critical patent/CN113840099B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621—Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27—Server based end-user applications
    • H04N21/274—Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743—Video hosting of uploaded data from client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Studio Devices (AREA)

Abstract

本公开提供一种视频处理方法、装置、设备及计算机可读存储介质，方法包括：获取终端设备发送的待处理影像；对各待处理影像进行分类操作，并根据类别信息为各待处理影像设置类别标签；对各待处理影像对应的类别标签进行聚合操作，获得聚合后的素材信息；对素材信息以及预设的多个剪辑方式对应的类别标签进行匹配操作，获得素材信息对应的目标剪辑方式；将目标剪辑方式以及素材信息发送至终端设备。故而终端设备在接收到该目标剪辑方式之后，可以直接采用该目标剪辑方式对素材信息进行剪辑操作，无需用户手动进行剪辑，简化视频处理的操作步骤。通过该目标剪辑方式对素材信息进行剪辑操作生成的目标视频，视频质量较高，降低对用户的专业要求。

Description

视频处理方法、装置、设备及计算机可读存储介质
技术领域
本公开涉及人工智能领域，尤其涉及一种视频处理方法、装置、设备及计算机可读存储介质。
背景技术
随着科技的发展，越来越多的应用软件走进了用户的生活，逐渐丰富了用户的业余生活，例如短视频APP等。用户可以采用视频等方式记录生活，并上传至短视频APP上。
现有的短视频制作方法一般需要用户自行在相册中寻找合适的视频或者照片，并在海量的剪辑方式中选择合适的剪辑方式。按照该剪辑方式，手动对视频或者照片进行剪辑操作。
但是，上述短视频制作方法往往对用户专业水平要求较高，普通用户难以制作出专业水平的短视频。此外，上述短视频制作方法操作较为繁琐，导致用户体验较差。
发明内容
本公开提供一种视频处理方法、装置、设备及计算机可读存储介质，用于解决现有的视频处理方法处理难度较高，且操作繁琐的技术问题。
本公开的第一个方面是提供一种视频处理方法，包括：
获取待处理影像；
根据所述待处理影像，确定目标影像以及目标剪辑方式，其中，所述目标剪辑方式中包括作用在目标影像对应的音频上的特效、作用在相邻影像之间剪辑点上的特效、作用在单个影像内的特效、作用在整个剪辑影像上的特效中的任意一项或多项；
根据所述目标剪辑方式对所述目标影像进行剪辑操作，获得目标视频。
本公开的第二个方面是提供一种视频处理装置，包括：
获取模块，用于获取待处理影像；
确定模块，用于根据所述待处理影像，确定目标影像以及目标剪辑方式，其中，所述目标剪辑方式中包括作用在目标影像对应的音频上的特效、作用在相邻影像之间剪辑点上的特效、作用在单个影像内的特效、作用在整个剪辑影像上的特效中的任意一项或多项；
剪辑模块，用于根据所述目标剪辑方式对所述目标影像进行剪辑操作，获得目标视频。
本公开的第三个方面是提供一种服务器，包括：存储器，处理器；
存储器；用于存储所述处理器可执行指令的存储器；
其中，所述处理器被配置为由所述处理器执行如第一方面所述的视频处理方法。
本公开的第四个方面是提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机执行指令，所述计算机执行指令被处理器执行时用于实现行如第一方面所述的视频处理方法。
本公开提供的视频处理方法、装置、设备及计算机可读存储介质，通过获取待处理影像，根据该待处理影像，确定目标影像以及目标剪辑方式。从而可以自动根据该目标剪辑方式对目标影像进行剪辑操作，获得目标视频。其中，目标剪辑方式中包括作用在目标影像对应的音频上的特效、作用在相邻影像之间剪辑点上的特效、作用在单个影像内的特效、作用在整个剪辑影像上的特效中的任意一项或多项。无需用户手动进行剪辑，简化视频处理的操作步骤，提高用户体验。此外，通过该目标剪辑方式对目标影像进行剪辑操作生成的目标视频，视频质量较高，降低对用户的专业要求。
附图说明
为了更清楚地说明本公开实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本公开的一些实施例，对于本领域普通技术人员来讲，还可以根据这些附图获得其他的附图。
图1为本公开实施例一提供的视频处理方法的流程示意图；
图2为视频处理装置耦合在服务器中时本公开所基于的系统架构图；
图3为本公开一实施例提供的显示界面示意图；
图4为本公开又一实施例提供的显示界面示意图；
图5为本公开实施例二提供的视频处理方法的流程示意图；
图6为本公开实施例提供的目标剪辑方式匹配示意图；
图7为本公开实施例三提供的视频处理方法的流程示意图；
图8为本公开实施例四提供的视频处理装置的结构示意图；
图9为本公开实施例五提供的视频处理装置的结构示意图；
图10为本公开实施例六提供的视频处理装置的结构示意图；
图11为本公开实施例七提供的服务器的结构示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚，下面将结合本公开实施例中的附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本公开一部分实施例，而不是全部的实施例。基于本公开中的实施例所获得的所有其他实施例，都属于本公开保护的范围。
针对上述提及的现有的视频处理方法处理难度较高，且操作繁琐的技术问题，本公开提供了一种视频处理方法、装置、设备及计算机可读存储介质。
需要说明的是，本申请提供视频处理方法、装置、设备及计算机可读存储介质可运用在任意一种视频剪辑的场景中。
现有的短视频应用，当用户想要进行视频发布时，首先需要在相册中选择合适的视频或照片，并手动进行剪辑操作，添加转场、特效、滤镜等内容，往往操作较为繁琐。而且，上述方法对用户的视频剪辑的专业性要求较高，不会视频剪辑的人，无法制作效果较好的视频。
在解决上述技术问题的过程中，发明人通过研究发现，为了提高视频剪辑的效率以及效果，减少用户手动操作，可以自动获取待处理影像，自动根据待处理影像确定目标影像以及目标剪辑方式，并实现视频的自动剪辑。
发明人进一步地研究发现，通过获取待处理影像，根据该待处理影像，确定目标影像以及目标剪辑方式。从而可以自动根据该目标剪辑方式对目标影像进行剪辑操作，获得目标视频。其中，目标剪辑方式中包括作用在目标影像对应的音频上的特效、作用在相邻影像之间剪辑点上的特效、作用在单个影像内的特效、作用在整个剪辑影像上的特效中的任意一项或多项。无需用户手动进行剪辑，简化视频处理的操作步骤，提高用户体验。此外，通过该目标剪辑方式对目标影像进行剪辑操作生成的目标视频，视频质量较高，降低对用户的专业要求。
图1为本公开实施例一提供的视频处理方法的流程示意图，如图2所示，所述方法包括：
步骤101、获取待处理影像。
本实施例的执行主体可以为视频处理装置，该视频处理装置可耦合在服务器或者终端设备中。
图2为视频处理装置耦合在服务器中时本公开所基于的系统架构图，如图2所示，本公开基于的系统架构至少包括：终端设备1以及服务器2，服务器2中设置有视频处理装置。其中，视频处理装置采用C/C++、Java、Shell或Python等语言编写；终端设备1则可例如台式电脑、平板电脑等。终端设备1与服务器2通信连接，从而能够与服务器2进行信息交互。
在本实施方式中，为了提高视频处理的效率以及质量，减少用户的手动操作，视频处理装置可以获取待处理影像，其中，该待处理影像中具体可以包括视频以及图片。当视频处理装置耦合在服务器中时，该待处理影像可以为视频处理装置从终端设备中获取的。当视频处理装置耦合在终端设备中时，该待处理影像可以为视频处理装置从预设的存储路径中获取的。
其中，该待处理影像是自动扫描终端设备相册中存储的影像数据后，根据影像数据的内容类别信息，对该影像数据进行聚合操作后获得的。具体地，为了能够获取到用户终端设备中的影像信息，可以按照预设的时间间隔，自动扫描相册中存储的影像数据，获得待处理影像。该预设的时间间隔可以为系统设置的默认时间间隔，也可以为用户根据实际需求进行设置的，例如，可以为三天、一周等。
步骤102、根据所述待处理影像，确定目标影像以及目标剪辑方式，其中，所述目标剪辑方式中包括作用在目标影像对应的音频上的特效、作用在相邻影像之间剪辑点上的特效、作用在单个影像内的特效、作用在整个剪辑影像上的特效中的任意一项或多项。
在本实施方式中，视频处理装置在获取到待处理影像之后，可以根据该待处理影像确定目标影像以及目标剪辑方式，该目标剪辑方式具体用于对目标影像进行剪辑操作。其中，该剪辑方式中可以包括剪辑模板。
其中，该目标剪辑方式中包括作用在目标影像对应的音频上的特效、作用在相邻影像之间剪辑点上的特效、作用在单个影像内的特效、作用在整个剪辑影像上的特效中的任意一项或多项。
由于该目标剪辑方式中包括上述一种或多种特效，因此，根据该目标剪辑方式剪辑获得的目标视频的效果较好。
步骤103、根据所述目标剪辑方式对所述目标影像进行剪辑操作，获得目标视频。
在本实施方式中，在获得目标影像以及目标剪辑方式之后，视频处理装置可以自动根据该目标剪辑方式对目标影像进行剪辑操作，获得目标视频。无需用户手动操作，即能够自动生成效果较好的目标视频，提高用户体验。
可选地，当视频处理装置耦合在服务器中时，视频处理装置可以将该目标影像以及目标剪辑方式一同发送至终端设备。从而终端设备在获得该目标剪辑方式以及素材信息之后，可以自动根据该目标剪辑方式对素材信息进行剪辑操作，生成目标视频。
可选地，当视频处理装置耦合在服务器中时，视频处理装置自动根据该目标剪辑方式对目标影像进行剪辑操作，获得目标视频。将该目标视频发送至终端设备中进行显示。
实际应用中，目标视频对应有不同的视频类别，例如可以为风景类别、人物类别等。因此，在终端设备上显示该目标视频时，
为了提高用户对目标视频的查看效率，可以分别确定各目标视频对应的视频类别。并按照视频类别对目标视频进行分类显示。
图3为本公开一实施例提供的显示界面示意图，如图3所示，该视频类别可以包括卡点类型、旅行类型、电影感类型等。此外，还可以筛选出预设时间阈值内，质量较高的目标视频，作为推荐类别，在首页优先展示。
在显示界面上显示各目标视频之后，用户可以选择合适的目标视频进行编辑或者发布。具体地，可以响应于用户对目标视频的触发操作，根据该触发操作在显示界面上显示该目标视频对应的编辑界面。
具体地，用户可以在该编辑界面通过触发预设的图标实现编辑指令的输入。进而终端设备可以根据该编辑指令，对目标视频进行编辑操作，获得编辑后的目标视频。该编辑后的目标视频能够更加贴合用户的个性化需求。
相应地，在对目标视频进行编辑操作，获得编辑后的目标视频之后，可以将该编辑后的目标视频发布至平台中。此外，在视频发布的过程中，用户可以根据实际需求，为该编辑后的目标视频设置不同的查看权限，例如，该查看权限包括：全部可见、指定用户可见、仅自己可见、指定用户不可见等。
作为一种可以实施的方式，获得编辑后的目标视频之后，可以不对该编辑后的目标视频进行发布，而是将该编辑后的目标视频保存至预设的存储路径，或者，还可以将该编辑后的目标视频分享给其他用户进行查看等，本公开对此不做限制。
图4为本公开又一实施例提供的显示界面示意图，如图4所示，编辑界面上设置有选配乐、调整的图标，用户可以通过触发该图标，实现编辑指令的生成。在获得该编辑指令之后，可以由编辑界面跳转至编辑详情页面，在该编辑详情页面，用户可以根据显示界面上的指示进行相应的编辑操作。
需要说明的是，由于对应的目标剪辑方式有所不同，因此，针对不同的目标视频，具有不同的编辑类型。其中，编辑类型包括：可编辑、部分可编辑、不可编辑中的任意一种。举例来说，若目标视频为可以为用户生日当天制作的卡点视频，其中的背景音乐可以为“生日快乐”、“happy birthday”等语音，相应地，其剪辑方式中文字信息可以为生日相关的文字。此时，由于背景音乐与文字信息高度匹配，则该目标视频中背景音乐与文字信息均不可以进行自主编辑，但是，用户可以自行调整目标视频中视频段落或者图片的顺序。
本实施例提供的视频处理方法，通过获取待处理影像，根据该待处理影像，确定目标影像以及目标剪辑方式。从而可以自动根据该目标剪辑方式对目标影像进行剪辑操作，获得目标视频。其中，目标剪辑方式中包括作用在目标影像对应的音频上的特效、作用在相邻影像之间剪辑点上的特效、作用在单个影像内的特效、作用在整个剪辑影像上的特效中的任意一项或多项。无需用户手动进行剪辑，简化视频处理的操作步骤，提高用户体验。此外，通过该目标剪辑方式对目标影像进行剪辑操作生成的目标视频，视频质量较高，降低对用户的专业要求。
图5为本公开实施例二提供的视频处理方法的流程示意图，在实施例一的基础上，如图5所示，步骤102具体包括：
步骤201、分别确定所述待处理影像以及预设的多个剪辑方式对应的内容类别标签；
步骤202、根据所述待处理影像以及预设的多个剪辑方式对应的内容类别标签，确定所述目标影像以及目标剪辑方式。
在本实施例中，待处理影像以及预设的多个剪辑方式分别对应有内容类别标签，该内容类别标签包括但不限于风景、人物、美食、旅游、宠物等。针对不同内容类别的待处理影像，分别采用相关内容类别的剪辑方式进行视频剪辑，得到的目标视频效果更优。
因此，在获取到待处理影像之后，可以分别确定待处理影像以及预设的多个剪辑方式对应的内容类别标签。根据该内容类别标签确定所述目标影像以及目标剪辑方式。
由于该目标剪辑方式是根据待处理影像的内容类别标签进行匹配操作后获得的，从而该目标剪辑方式与待处理影像之间的匹配度较高。通过该目标剪辑方式剪辑后生成的视频效果也较好。此外，由于该目标剪辑方式中包括作用在目标影像对应的音频上的特效、作用在相邻影像之间剪辑点上的特效、作用在单个影像内的特效、作用在整个剪辑影像上的特效中的任意一项或多项，从而无需用户手动去依次选择上述信息，提高视频生成的效率，提高用户体验，对用户的专业度要求不高。
具体地，在实施例一的基础上，步骤202具体包括：
采用预设的标签匹配算法，在预设的多个剪辑方式对应的内容类别标签中匹配与所述待处理影像的内容类别标签之间的匹配度超过预设的阈值的目标剪辑方式；
根据所述目标剪辑方式对所述待处理影像进行筛选操作，获得所述目标剪辑方式对应的目标影像。
在本实施例中，为了提高制作的目标视频的质量，在根据待处理影像匹配获得目标剪辑方式之后，还可以继续根据该目标剪辑方式对待处理影像进行筛选优化操作，进一步地提高待处理影像与目标剪辑方式之间的匹配度。
具体地，可以采用预设的标签匹配算法，在预设的多个剪辑方式对应的内容类别标签中匹配与待处理影像匹配度超过预设的阈值的目标剪辑方式。例如，可以通过预设的标签匹配算法分别计算各剪辑方式对应的内容类别标签与待处理影像对应的内容类别标签之间的相似度，将相似度超过预设的剪辑方式作为该目标剪辑方式。
由于待处理影像的数量较多，在获得目标剪辑方式之后，还可以进一步地根据该目标剪辑方式对待处理影像进行筛选操作，获得目标剪辑方式对应的目标影像。
图6为本公开实施例提供的目标剪辑方式匹配示意图，如图6所示，待处理影像的数量可以为4个，采用预设的标签匹配算法，为待处理影像匹配对应的目标剪辑方式。再根据目标剪辑方式反向筛选待处理影像，最终得到目标剪辑方式对应的两个目标影像。进一步地提高目标影像与目标剪辑方式之间的匹配度，提高制作的目标视频的质量。
本实施例提供的视频处理方法，通过在根据待处理影像匹配获得目标剪辑方式之后，还可以继续根据该目标剪辑方式对待处理影像进行筛选优化操作。从而能够进一步地提高目标影像与目标剪辑方式之间的匹配度，提高制作的目标视频的质量。
为了实现对目标剪辑方式以及目标影像的确定操作，一方面可以采用上述实施例所述的串行的匹配方法，另一方面，还可以采用并行的匹配方法。
具体地，在实施例一的基础上，步骤202具体包括：
采用预设的标签匹配算法，根据所述预设的多个剪辑方式对应的内容类别标签，确定与所述待处理影像对应的内容类别标签之间的匹配度超过预设的阈值的剪辑方式群组，获得第一匹配组合，所述第一匹配组合中包括所述待处理影像以及剪辑方式群组；
以及，根据所述待处理影像对应的内容类别标签，确定与所述预设的多个剪辑方式对应的内容类别标签之间的匹配度超过预设的阈值的待处理影像群组，获得第二匹配群组，所述第二匹配群组中包括所述待处理影像群组以及所述预设的多个剪辑方式；
根据所述第一匹配群组以及所述第二匹配群组确定目标影像以及目标剪辑方式。
在本实施例中，可以采用预设的标签匹配算法，在预设的多个剪辑方式对应的内容类别标签中匹配与待处理影像匹配度超过预设的阈值的目标剪辑方式获得第一匹配组合，所述第一匹配组合中包括待处理影像以及剪辑方式群组。例如，可以通过预设的标签匹配算法分别计算各剪辑方式对应的内容类别标签与待处理影像对应的内容类别标签之间的相似度，将相似度超过预设的剪辑方式作为该目标剪辑方式。
与此同时，可以采用预设的标签匹配算法，在多个待处理影像中匹配与预设的多个剪辑方式匹配度超过预设的阈值的待处理影像群组，获得第二匹配群组，第二匹配群组中包括待处理影像群组以及预设的多个剪辑方式。需要说明的是，预设的多个剪辑方式中剪辑方式数量大于剪辑方式群组中剪辑方式的数量。
在获得第一匹配群组以及第二匹配群组之后，即可以根据第一匹配群组以及第二匹配群组确定目标素材信息以及目标影像。
进一步地，在上述任一实施例的基础上，所述根据所述第一匹配群组以及所述第二匹配群组确定目标影像以及目标剪辑方式，包括：
计算所述第一匹配群组以及所述第二匹配群组之间的交集群组，将所述交集群组中的待处理影像以及剪辑方式作为所述目标影像以及目标剪辑方式。
在本实施例中，可以对第一匹配群组以及第二匹配群组取交集。该交集中的素材信息群组以及剪辑方式群组的匹配度较高，从而可以将交集群组中的素材信息以及剪辑方式作为目标素材信息以及目标剪辑方式。
进一步地，在上述任一实施例的基础上，所述计算所述第一匹配群组以及所述第二匹配群组之间的交集群组之后，还包括：
若所述交集群组中待处理影像的数量少于预设的待处理影像数量阈值，则在预设的多个剪辑方式中确定与所述待处理影像对应的内容类别标签之间的匹配度超过预设的阈值的剪辑方式群组之后，根据所述剪辑方式群组对所述待处理影像进行筛选操作，获得所述剪辑方式群组对应的目标影像，并将所述剪辑方式群组作为所述目标剪辑方式。
在本实施例中，当第一匹配群组以及所述第二匹配群组之间的交集群组中待处理影像的数量较少时，根据该交集群组制作出的视频质量也相应较差。因此，此时可以采用串行匹配的方式进行剪辑方式与待处理影像的确定。具体地，可以在预设的多个剪辑方式对应的类别标签中匹配与预设的第一素材信息群组匹配度超过预设的阈值的剪辑方式群组之后，根据剪辑方式群组对素材信息进行筛选操作，获得剪辑方式群组对应的目标素材信息。
相应地，视频处理装置可以将该第一剪辑方式以及目标素材信息一同发送至终端设备，以使终端设备根据该目标剪辑方式对目标素材信息进行剪辑操作。
本实施例提供的视频处理方法，通过采用并行的匹配方式确定剪辑方式群组以及其对应的目标影像。从而能够进一步地提高待处理影像与剪辑方式群组之间的匹配度，提高制作的目标视频的质量。
图7为本公开实施例三提供的视频处理方法的流程示意图，在上述任一实施例的基础上，如图7所示，步骤102具体包括：
步骤301、获取目标剪辑方式，所述目标剪辑方式是根据用户触发的模板选择操作确定的；
步骤302、采用预设的标签匹配算法，在所述待处理影像内匹配与所述目标剪辑方式对应的目标影像。
在本实施例中，视频处理装置还可以根据用户的个性化需求进行目标剪辑方式的确定。具体地，可以获取目标剪辑方式，其中，该目标剪辑方式是用户根据实际需求自行触发模板选择操作确定的。
获取到该目标剪辑方式之后，即可以采用预设的标签匹配算法，在终端设备对应的待处理影像内匹配与目标剪辑方式对应的目标影像。
在获得目标影像以及目标剪辑方式之后，视频处理装置可以自动根据该目标剪辑方式对目标影像进行剪辑操作，获得目标视频。无需用户手动操作，即能够自动生成效果较好的目标视频，提高用户体验。
本实施例提供的视频处理方法，通过根据用户选择的目标剪辑方式自动匹配其对应的目标影像，从而终端设备可以自动根据该目标影像生成对应的目标视频，无需用户过多的手动操作，提高目标视频的生成效率以及生成的目标视频的质量，提高用户体验。
图8为本公开实施例四提供的视频处理装置的结构示意图，如图8所示，所述视频处理装置包括：获取模块41、确定模块42以及剪辑模块43，其中，获取模块41，用于获取待处理影像；确定模块42，用于根据所述待处理影像，确定目标影像以及目标剪辑方式，其中，所述目标剪辑方式中包括作用在目标影像对应的音频上的特效、作用在相邻影像之间剪辑点上的特效、作用在单个影像内的特效、作用在整个剪辑影像上的特效中的任意一项或多项；剪辑模块43，用于根据所述目标剪辑方式对所述目标影像进行剪辑操作，获得目标视频。
本实施例提供的视频处理装置，通过获取待处理影像，根据该待处理影像，确定目标影像以及目标剪辑方式。从而可以自动根据该目标剪辑方式对目标影像进行剪辑操作，获得目标视频。其中，目标剪辑方式中包括作用在目标影像对应的音频上的特效、作用在相邻影像之间剪辑点上的特效、作用在单个影像内的特效、作用在整个剪辑影像上的特效中的任意一项或多项。无需用户手动进行剪辑，简化视频处理的操作步骤，提高用户体验。此外，通过该目标剪辑方式对目标影像进行剪辑操作生成的目标视频，视频质量较高，降低对用户的专业要求。
图9为本公开实施例五提供的视频处理装置的结构示意图，在实施例四的基础上，确定模块具体包括：标签确定单元51以及匹配单元52。其中，标签确定单元51，用于分别确定所述待处理影像以及预设的多个剪辑方式对应的内容类别标签；匹配单元52，用于根据所述待处理影像以及预设的多个剪辑方式对应的内容类别标签，确定所述目标影像以及目标剪辑方式。
进一步地，在上述任一实施例的基础上，所述匹配单元用于：
采用预设的标签匹配算法，在预设的多个剪辑方式对应的内容类别标签中匹配与所述待处理影像的内容类别标签之间的匹配度超过预设的阈值的目标剪辑方式；
根据所述目标剪辑方式对所述待处理影像进行筛选操作，获得所述目标剪辑方式对应的目标影像。
进一步地，在上述任一实施例的基础上，所述匹配单元用于：
采用预设的标签匹配算法，根据所述预设的多个剪辑方式对应的内容类别标签，确定与所述待处理影像对应的内容类别标签之间的匹配度超过预设的阈值的剪辑方式群组，获得第一匹配组合，所述第一匹配组合中包括所述待处理影像以及剪辑方式群组；
以及，根据所述待处理影像对应的内容类别标签，确定与所述预设的多个剪辑方式对应的内容类别标签之间的匹配度超过预设的阈值的待处理影像群组，获得第二匹配群组，所述第二匹配群组中包括所述待处理影像群组以及所述预设的多个剪辑方式；
根据所述第一匹配群组以及所述第二匹配群组确定目标影像以及目标剪辑方式。
进一步地，在上述任一实施例的基础上，所述匹配单元用于：
计算所述第一匹配群组以及所述第二匹配群组之间的交集群组，将所述交集群组中的待处理影像以及剪辑方式作为所述目标影像以及目标剪辑方式。
进一步地，在上述任一实施例的基础上，所述匹配单元用于：
若所述交集群组中待处理影像的数量少于预设的待处理影像数量阈值，则在预设的多个剪辑方式中确定与所述待处理影像对应的内容类别标签之间的匹配度超过预设的阈值的剪辑方式群组之后，根据所述剪辑方式群组对所述待处理影像进行筛选操作，获得所述剪辑方式群组对应的目标影像，并将所述剪辑方式群组作为所述目标剪辑方式。
图10为本公开实施例六提供的视频处理装置的结构示意图，在上述任一实施例的基础上，如图11所示，所述确定模块包括：剪辑方式获取单元61以及确定单元62。其中，剪辑方式获取单元61，用于获取目标剪辑方式，所述目标剪辑方式是根据用户触发的模板选择操作确定的；确定单元62，用于，用于采用预设的标签匹配算法，在所述待处理影像内匹配与所述目标剪辑方式对应的目标影像。
图11为本公开实施例七提供的服务器的结构示意图，如图11所示，所述服务器包括：存储器71，处理器72；
存储器71；用于存储所述处理器72可执行指令的存储器71；
其中，所述处理器72被配置为由所述处理器72执行如上述任一实施例所述的视频处理方法。
存储器71，用于存放程序。具体地，程序可以包括程序代码，所述程序代码包括计算机操作指令。存储器71可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。
其中，处理器72可能是一个中央处理器(Central Processing Unit，简称为CPU)，或者是特定集成电路(Application Specific Integrated Circuit，简称为ASIC)，或者是被配置成实施本公开实施例的一个或多个集成电路。
可选的，在具体实现上，如果存储器71和处理器72独立实现，则存储器71和处理器72可以通过总线相互连接并完成相互间的通信。所述总线可以是工业标准体系结构(Industry Standard Architecture，简称为ISA)总线、外部设备互连(PeripheralComponent，简称为PCI)总线或扩展工业标准体系结构(Extended Industry StandardArchitecture，简称为EISA)总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示，图11中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
可选的，在具体实现上，如果存储器71和处理器72集成在一块芯片上实现，则存储器71和处理器72可以通过内部接口完成相同间的通信。
本公开又一实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机执行指令，所述计算机执行指令被处理器执行时用于实现如上述任一实施例所述的视频处理方法。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
本领域普通技术人员可以理解：实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时，执行包括上述各方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上各实施例仅用以说明本公开的技术方案，而非对其限制；尽管参照前述各实施例对本公开进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本公开各实施例技术方案的范围。

Claims (7)

1.一种视频处理方法，其特征在于，包括：
获取待处理影像；
根据所述待处理影像，确定目标影像以及目标剪辑方式，其中，所述目标剪辑方式中包括作用在目标影像对应的音频上的特效、作用在相邻影像之间剪辑点上的特效、作用在单个影像内的特效、作用在整个剪辑影像上的特效中的任意一项或多项，所述目标剪辑方式用于对所述目标影像进行剪辑操作且所述目标剪辑方式包括目标剪辑模板；
根据所述目标剪辑方式对所述目标影像进行剪辑操作，获得目标视频；
所述根据所述待处理影像，确定目标影像以及目标剪辑方式，包括：
分别确定所述待处理影像以及预设的多个剪辑方式对应的内容类别标签；
根据所述待处理影像以及预设的多个剪辑方式对应的内容类别标签，确定所述目标影像以及目标剪辑方式；
所述根据所述待处理影像以及预设的多个剪辑方式对应的内容类别标签，确定所述目标影像以及目标剪辑方式，包括：
采用预设的标签匹配算法，根据所述预设的多个剪辑方式对应的内容类别标签，确定与所述待处理影像对应的内容类别标签之间的匹配度超过预设的阈值的剪辑方式群组，获得第一匹配群组，所述第一匹配群组中包括所述待处理影像以及剪辑方式群组；
以及，根据所述待处理影像对应的内容类别标签，确定与所述预设的多个剪辑方式对应的内容类别标签之间的匹配度超过预设的阈值的待处理影像群组，获得第二匹配群组，所述第二匹配群组中包括所述待处理影像群组以及所述预设的多个剪辑方式；
根据所述第一匹配群组以及所述第二匹配群组确定目标影像以及目标剪辑方式。
2.根据权利要求1所述的方法，其特征在于，所述根据所述第一匹配群组以及所述第二匹配群组确定目标影像以及目标剪辑方式，包括：
计算所述第一匹配群组以及所述第二匹配群组之间的交集群组，将所述交集群组中的待处理影像以及剪辑方式作为所述目标影像以及目标剪辑方式。
3.根据权利要求2所述的方法，其特征在于，所述计算所述第一匹配群组以及所述第二匹配群组之间的交集群组之后，还包括：
若所述交集群组中待处理影像的数量少于预设的待处理影像数量阈值，则在预设的多个剪辑方式中确定与所述待处理影像对应的内容类别标签之间的匹配度超过预设的阈值的剪辑方式群组之后，根据所述剪辑方式群组对所述待处理影像进行筛选操作，获得所述剪辑方式群组对应的目标影像，并将所述剪辑方式群组作为所述目标剪辑方式。
4.根据权利要求1或2所述的方法，其特征在于，所述确定目标影像以及目标剪辑方式，包括：
获取目标剪辑方式，所述目标剪辑方式是根据用户触发的模板选择操作确定的；
采用预设的标签匹配算法，在所述待处理影像内匹配与所述目标剪辑方式对应的目标影像。
5.一种视频处理装置，其特征在于，包括：
获取模块，用于获取待处理影像；
确定模块，用于根据所述待处理影像，确定目标影像以及目标剪辑方式，其中，所述目标剪辑方式中包括作用在目标影像对应的音频上的特效、作用在相邻影像之间剪辑点上的特效、作用在单个影像内的特效、作用在整个剪辑影像上的特效中的任意一项或多项，所述目标剪辑方式用于对所述目标影像进行剪辑操作且所述目标剪辑方式包括目标剪辑模板；
剪辑模块，用于根据所述目标剪辑方式对所述目标影像进行剪辑操作，获得目标视频；
标签确定单元，用于分别确定所述待处理影像以及预设的多个剪辑方式对应的内容类别标签；
匹配单元，用于根据所述待处理影像以及预设的多个剪辑方式对应的内容类别标签，确定所述目标影像以及目标剪辑方式；
所述匹配单元用于：
采用预设的标签匹配算法，根据所述预设的多个剪辑方式对应的内容类别标签，确定与所述待处理影像对应的内容类别标签之间的匹配度超过预设的阈值的剪辑方式群组，获得第一匹配群组，所述第一匹配群组中包括所述待处理影像以及剪辑方式群组；
以及，根据所述待处理影像对应的内容类别标签，确定与所述预设的多个剪辑方式对应的内容类别标签之间的匹配度超过预设的阈值的待处理影像群组，获得第二匹配群组，所述第二匹配群组中包括所述待处理影像群组以及所述预设的多个剪辑方式；
根据所述第一匹配群组以及所述第二匹配群组确定目标影像以及目标剪辑方式。
6.一种服务器，其特征在于，包括：存储器，处理器；
存储器；用于存储所述处理器可执行指令的存储器；
其中，所述处理器被配置为由所述处理器执行如权利要求1-4任一项所述的视频处理方法。
7.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机执行指令，所述计算机执行指令被处理器执行时用于实现行如权利要求1-4任一项所述的视频处理方法。
CN202010582609.XA 2020-06-23 2020-06-23 视频处理方法、装置、设备及计算机可读存储介质 Active CN113840099B (zh)

Priority Applications (6)

Application Number Priority Date Filing Date Title
CN202010582609.XA CN113840099B (zh) 2020-06-23 2020-06-23 视频处理方法、装置、设备及计算机可读存储介质
JP2022579697A JP7566937B2 (ja) 2020-06-23 2021-06-23 ビデオ処理方法、装置、機器及びコンピュータ可読記憶媒体
EP21829941.0A EP4161080A4 (en) 2020-06-23 2021-06-23 VIDEO PROCESSING METHOD, APPARATUS AND DEVICE, AND COMPUTER READABLE STORAGE MEDIUM
PCT/CN2021/101896 WO2021259333A1 (zh) 2020-06-23 2021-06-23 视频处理方法、装置、设备及计算机可读存储介质
KR1020227045712A KR20230016055A (ko) 2020-06-23 2021-06-23 비디오 처리 방법, 장치, 기기 및 컴퓨터 판독 가능 저장매체
US18/087,722 US11967344B2 (en) 2020-06-23 2022-12-22 Video processing method and apparatus, device and computer readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010582609.XA CN113840099B (zh) 2020-06-23 2020-06-23 视频处理方法、装置、设备及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN113840099A CN113840099A (zh) 2021-12-24
CN113840099B true CN113840099B (zh) 2023-07-07

Family

ID=78964248

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010582609.XA Active CN113840099B (zh) 2020-06-23 2020-06-23 视频处理方法、装置、设备及计算机可读存储介质

Country Status (6)

Country Link
US (1) US11967344B2 (zh)
EP (1) EP4161080A4 (zh)
JP (1) JP7566937B2 (zh)
KR (1) KR20230016055A (zh)
CN (1) CN113840099B (zh)
WO (1) WO2021259333A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115269889B (zh) * 2021-04-30 2024-07-02 北京字跳网络技术有限公司 剪辑模板搜索方法及装置

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100912984B1 (ko) 2002-04-12 2009-08-20 미쓰비시덴키 가부시키가이샤 메타데이터 편집 장치, 메타데이터 재생 장치, 메타데이터 배신 장치, 메타데이터 검색 장치, 메타데이터 재생성 조건 설정 장치, 콘텐츠 배신 장치, 메타데이터 배신 방법, 메타데이터 재생성 장치, 메타데이터 재생성 방법
JP4649266B2 (ja) * 2005-05-20 2011-03-09 日本放送協会 コンテンツメタデータ編集装置およびコンテンツメタデータ編集プログラム
US20100245610A1 (en) * 2009-03-31 2010-09-30 Electronics And Telecommunications Research Institute Method and apparatus for processing digital image
JP2011170690A (ja) * 2010-02-19 2011-09-01 Sony Corp 情報処理装置、情報処理方法、およびプログラム。
US20120291078A1 (en) * 2011-05-12 2012-11-15 At&T Intellectual Property I, Lp System and method for modified reruns
WO2014110122A1 (en) * 2013-01-08 2014-07-17 Tremor Video, Inc. Methods and apparatus for providing effectiveness score of advertisements
US9043425B2 (en) * 2013-07-29 2015-05-26 Google Inc. Resource locator remarketing
CN109688463B (zh) * 2018-12-27 2020-02-18 北京字节跳动网络技术有限公司 一种剪辑视频生成方法、装置、终端设备及存储介质
CN109819179B (zh) * 2019-03-21 2022-02-01 腾讯科技（深圳）有限公司 一种视频剪辑方法和装置
CN110139159B (zh) * 2019-06-21 2021-04-06 上海摩象网络科技有限公司 视频素材的处理方法、装置及存储介质
CN110602546A (zh) * 2019-09-06 2019-12-20 Oppo广东移动通信有限公司 视频生成方法、终端及计算机可读存储介质

Also Published As

Publication number Publication date
CN113840099A (zh) 2021-12-24
KR20230016055A (ko) 2023-01-31
JP7566937B2 (ja) 2024-10-15
US20230127373A1 (en) 2023-04-27
JP2023531693A (ja) 2023-07-25
EP4161080A1 (en) 2023-04-05
EP4161080A4 (en) 2023-11-08
WO2021259333A1 (zh) 2021-12-30
US11967344B2 (en) 2024-04-23

Similar Documents

Publication Publication Date Title
CN111866585B (zh) 一种视频处理方法及装置
US10810454B2 (en) Apparatus, method and program for image search
CN109688463B (zh) 一种剪辑视频生成方法、装置、终端设备及存储介质
US20210056132A1 (en) Media file processing method and device, and media file sharing method and device in social media application
US8856656B2 (en) Systems and methods for customizing photo presentations
US8935322B1 (en) Methods and systems for improved uploading of media files for use in media-rich projects
CN112004138A (zh) 一种智能视频素材搜索匹配的方法及装置
CN110580508A (zh) 视频分类方法、装置、存储介质和移动终端
CN113836334A (zh) 图像处理装置、图像处理方法及记录介质
CN111246289A (zh) 视频生成方法及装置、电子设备、存储介质
CN104333699A (zh) 自定义拍照区域合成方法及装置
CN113840099B (zh) 视频处理方法、装置、设备及计算机可读存储介质
US20110304644A1 (en) Electronic apparatus and image display method
CN114359159A (zh) 视频生成方法、系统、电子设备和存储介质
CN117786154A (zh) 图像生成方法、系统、装置及存储介质
CN111614912B (zh) 视频生成方法、装置、设备及存储介质
US20220292748A1 (en) Imagery keepsake generation
CN110009646B (zh) 一种电子相册的生成方法、装置、电子设备及存储介质
CN113794846A (zh) 一种视频云剪辑方法、装置及云剪辑服务器
CN112449249A (zh) 视频流处理方法及装置、电子设备及存储介质
JP2008020944A (ja) 画像処理方法、プログラムおよび装置
US20240355024A1 (en) Method, apparatus, device and storage medium for video generation
US20240298065A1 (en) Template updating method and apparatus, device, and storage medium
CN110662104B (zh) 视频拖动条生成方法、装置、电子设备及存储介质
CN118838528A (zh) 视频剪辑方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant