CN112135191A - 视频编辑方法、装置、终端及存储介质 - Google Patents

视频编辑方法、装置、终端及存储介质 Download PDF

Info

Publication number
CN112135191A
CN112135191A CN202011043748.1A CN202011043748A CN112135191A CN 112135191 A CN112135191 A CN 112135191A CN 202011043748 A CN202011043748 A CN 202011043748A CN 112135191 A CN112135191 A CN 112135191A
Authority
CN
China
Prior art keywords
template
image
area
region
frame image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011043748.1A
Other languages
English (en)
Inventor
刘春宇
尹浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Kugou Computer Technology Co Ltd
Original Assignee
Guangzhou Kugou Computer Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Kugou Computer Technology Co Ltd filed Critical Guangzhou Kugou Computer Technology Co Ltd
Priority to CN202011043748.1A priority Critical patent/CN112135191A/zh
Publication of CN112135191A publication Critical patent/CN112135191A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请关于一种视频编辑方法、装置、终端及存储介质,涉及视频编辑技术领域。所述方法包括:展示待编辑视频中的目标帧图像;响应于接收到基于目标帧图像的区域选择操作,确定目标帧图像中的模板区域;响应于接收到对应于模板区域的模板选择操作,确定模板区域对应的模板图像;基于模板区域的图像特征,在待编辑视频的各个帧图像中进行区域匹配,确定各个帧图像中与模板区域匹配的目标区域;将各个帧图像中的目标区域的图像更改为模板图像;根据更改后的各个帧图像,生成编辑后的视频。通过上述方法,使得在视频编辑的过程中,无需进行前后端交互,从而降低了视频编辑的复杂程度,提高了视频编辑的效率。

Description

视频编辑方法、装置、终端及存储介质
技术领域
本申请涉及视频编辑技术领域,特别涉及视频编辑方法、装置、终端及存储介质。
背景技术
在视频编辑过程中,为实现不同的展示效果,往往需要对视频内容进行相关处理,比如卡通化,线条化等等。
在相关技术中,为实现对视频内容的处理,需要将视频内容中需要处理的部分送到后端通过AI(Artificial Intelligence,人工智能)处理后获得预期效果,比如实现人物图像卡通化,之后再将处理后的图像返回到前端进行融合后,合成所需要的视频效果。
然而,在上述方法中,由于处理过程中需要后端AI的支持,且需要前端后端之间进行图像数据的传输,增加了视频编辑的复杂程度,同时,前后端交互也会造成时间的浪费,从而使得视频编辑的效率较低。
发明内容
本申请实施例提供了一种视频编辑方法、装置、终端及存储介质,可以降低视频编辑的复杂程度,有效提高视频编辑的效率,该技术方案如下:
一方面,提供了一种视频编辑方法,所述方法由终端执行,所述方法包括:
展示待编辑视频中的目标帧图像;
响应于接收到基于所述目标帧图像的区域选择操作,确定所述目标帧图像中的模板区域;
响应于接收到对应于所述模板区域的模板选择操作,确定所述模板区域对应的模板图像;
基于所述模板区域的图像特征,在所述待编辑视频的各个帧图像中进行区域匹配,确定所述各个帧图像中与所述模板区域相匹配的目标区域;
将所述各个帧图像中的所述目标区域的图像更改为所述模板图像;
根据更改后的所述各个帧图像,生成编辑后的视频。
在一种可能的实现方式中,所述基于所述模板区域的图像特征,在所述待编辑视频的各个帧图像中进行区域匹配,确定所述各个帧图像中与所述模板区域相匹配的目标区域,包括:
获取所述目标帧图像中的所述模板区域的位置坐标;
基于所述模板区域的位置坐标,在所述各个帧图像中构建模板区域搜索范围;
基于所述模板区域的图像特征,在所述待编辑视频的所述各个帧图像的所述模板区域搜索范围内,获取所述各个帧图像中与所述模板区域相匹配的所述目标区域。
在一种可能的实现方式中,所述基于所述模板区域的图像特征,在所述待编辑视频的所述各个帧图像的所述模板区域搜索范围内,获取所述各个帧图像中与所述模板区域相匹配的所述目标区域,包括:
在第一帧图像的所述模板区域搜索范围内以预设步长构建至少一个候选模板区域;所述候选模板区域的面积与所述模板区域的面积相等;所述第一帧图像是所述待编辑视频的所述各个帧图像中的任意一个;
基于所述模板区域的所述图像特征,从至少一个所述候选模型区域内获取所述第一帧图像中与所述模板区域相匹配的所述目标区域。
在一种可能的实现方式中,所述基于所述模板区域的所述图像特征,从至少一个所述候选模型区域内获取所述第一帧图像中与所述模板区域相匹配的所述目标区域,包括:
依次获取所述候选模板区域的图像特征,直到获取到的所述图像特征满足预设条件,所述预设条件是指所述候选模板区域内的所述图像特征与所述模板区域的所述图像特征之间的差值处于预设差值阈值内;
将满足所述预设条件的图像特征对应的所述候选模板区域获取为所述第一帧图像中与所述模板区域相匹配的所述目标区域。
在一种可能的实现方式中,所述基于所述模板区域的所述图像特征,从至少一个所述候选模型区域内获取所述第一帧图像中与所述模板区域相匹配的所述目标区域,包括:
分别获取至少一个所述候选模板区域的所述图像特征;
将与所述模板区域的所述图像特征之间的差值最小的一个,获取为所述第一帧图像中与所述模板区域相匹配的所述目标区域。
在一种可能的实现方式中,响应于所述模板图像为卡通类型的模板,在将所述各个帧图像中的所述目标区域的图像更改为所述模板图像之前,所述方法还包括:
采用高斯模糊算法、图像颜色调整算法、边缘检测算法对所述待编辑视频的所述各个帧图像进行预处理。
在一种可能的实现方式中,所述将所述各个帧图像中的所述目标区域的图像更改为所述模板图像,包括:
将所述各个帧图像中的所述目标区域的图像替换为所述模板图像;
或者,
将所述各个帧图像中的所述目标区域的图像用所述模板图像覆盖。
另一方面,提供了一种视频编辑方法,所述方法由终端执行,所述方法包括:
显示视频编辑界面,所述视频编辑界面包括视频编辑区域和视频显示区域,所述视频显示区域中显示有待编辑视频中的目标帧图像,所述视频编辑区域包含模板选择控件;
响应于接收到基于所述目标帧图像的区域选择操作,在所述目标帧图像上显示模板区域;
响应于接收到基于所述模板选择控件的模板选择操作,确定所述模板区域对应的模板图像;
将所述待编辑视频的各个帧图像中与所述模板区域相匹配的目标区域的图像更改为所述模板图像;
根据更改后的所述各个帧图像,在所述视频显示区域中显示编辑后的视频。
另一方面,提供了一种视频编辑装置,所述装置应用于终端中,所述装置包括:
展示模块,用于展示待编辑视频中的目标帧图像;
模板区域确定模块,用于响应于接收到基于所述目标帧图像的区域选择操作,确定所述目标帧图像中的模板区域;
模板图像确定模块,用于响应于接收到对应于所述模板区域的模板选择操作,确定所述模板区域对应的模板图像;
目标区域确定模块,用于基于所述模板区域的图像特征,在所述待编辑视频的各个帧图像中进行区域匹配,确定所述各个帧图像中与所述模板区域相匹配的目标区域;
更改模块,用于将所述各个帧图像中的所述目标区域的图像更改为所述模板图像;
视频生成模块,用于根据更改后的所述各个帧图像,生成编辑后的视频。
在一种可能的实现方式中,所述目标区域确定模块,包括:
位置坐标获取子模块,用于获取所述目标帧图像中的所述模板区域的位置坐标;
构建子模块,用于基于所述模板区域的位置坐标,在所述各个帧图像中构建模板区域搜索范围;
目标区域获取子模块,用于基于所述模板区域的图像特征,在所述待编辑视频的所述各个帧图像的所述模板区域搜索范围内,获取所述各个帧图像中与所述模板区域相匹配的所述目标区域。
在一种可能的实现方式中,所述目标区域获取子模块,包括:
构建单元,用于在第一帧图像的所述模板区域搜索范围内以预设步长构建至少一个候选模板区域;所述候选模板区域的面积与所述模板区域的面积相等;所述第一帧图像是所述待编辑视频的所述各个帧图像中的任意一个;
获取单元,用于基于所述模板区域的所述图像特征,从至少一个所述候选模型区域内获取所述第一帧图像中与所述模板区域相匹配的所述目标区域。
在一种可能的实现方式中,所述获取单元,包括:
第一获取子单元,用于依次获取所述候选模板区域的图像特征,直到获取到的所述图像特征满足预设条件,所述预设条件是指所述候选模板区域内的所述图像特征与所述模板区域的所述图像特征之间的差值处于预设差值阈值内;
第二获取子单元,用于将满足所述预设条件的图像特征对应的所述候选模板区域获取为所述第一帧图像中与所述模板区域相匹配的所述目标区域。
在一种可能的实现方式中,所述获取单元,包括:
第三获取子单元,用于分别获取至少一个所述候选模板区域的所述图像特征;
第四获取子单元,用于将与所述模板区域的所述图像特征之间的差值最小的一个,获取为所述第一帧图像中与所述模板区域相匹配的所述目标区域。
在一种可能的实现方式中,所述装置还包括:
预处理模块,用于响应于所述模板图像为卡通类型的模板,在将所述各个帧图像中的所述目标区域的图像更改为所述模板图像之前,采用高斯模糊算法、图像颜色调整算法、边缘检测算法对所述待编辑视频的所述各个帧图像进行预处理。
在一种可能的实现方式中,所述更改模块,用于,
将所述各个帧图像中的所述目标区域的图像替换为所述模板图像;
或者,
将所述各个帧图像中的所述目标区域的图像用所述模板图像覆盖。
另一方面,提供了一种视频编辑装置,所述装置应用于终端中,所述装置包括:
第一显示模块,用于显示视频编辑界面,所述视频编辑界面包括视频编辑区域和视频显示区域,所述视频显示区域中显示有待编辑视频中的目标帧图像,所述视频编辑区域包含模板选择控件;
第二显示模块,用于响应于接收到基于所述目标帧图像的区域选择操作,在所述目标帧图像上显示模板区域;
确定模块,用于响应于接收到基于所述模板选择控件的模板选择操作,确定所述模板区域对应的模板图像;
第三显示模块,用于将所述待编辑视频的各个帧图像中与所述模板区域相匹配的目标区域的图像显示为所述模板图像;
第四显示模块,用于根据更改后的所述各个帧图像,在所述视频显示区域中显示编辑后的视频。
另一方面,提供了一种终端,所述终端包括处理器和存储器,所述存储器中存储由至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现上述视频编辑方法。
另一方面,提供了一种计算机可读存储介质,所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现上述视频编辑方法。
另一方面,提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述各种可选实现方式中提供的视频编辑方法。
本申请提供的技术方案可以包括以下有益效果:
终端通过基于在待编辑视频中的目标帧图像中确定模板区域和模板图像,将待编辑视频中各个帧图像中对应于该模板区域的目标区域中的图像更改为模板图像,从而实现对视频内容的编辑,使得在视频编辑的过程中,无需进行前后端交互,从而降低了视频编辑的复杂程度,提高了视频编辑的效率。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。
图1示出了本申请一个示例性的实施例提供的终端的结构示意图;
图2示出了本申请一示例性实施例示出的视频编辑方法的流程图;
图3示出了本申请一示例性实施例示出的基于用户的绘制操作生成模板区域的示意图;
图4示出了本申请一示例性实施例示出的视频编辑方法的流程图;
图5示出了本申请一示例性实施例示出的模板区域搜索范围的示意图;
图6示出了本申请一示例性实施例示出的获取目标区域的示意图;
图7示出了本申请一示例性实施例示出的对帧图像进行卡通化处理的示意图;
图8示出了本申请一示例性实施例示出的视频编辑方法的流程图;
图9示出了本申请一示例性实施例示出的视频编辑接界面的示意图;
图10示出了本申请一示例性实时例示出的匹配区域的示意图;
图11示出了本申请一示例性实施例示出的视频卡通化的示意图;
图12示出了本申请一示例性实施例示出的视频编辑装置的方框图;
图13是根据一示例性实施例示出的计算机设备的结构框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
应当理解的是,在本文中提及的“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
在视频编辑过程中,在对视频内容进行特殊化处理,比如卡通化,像素化处理时,需要后端AI的支持加以实现。本申请实施例提供一种视频编辑方法,可以在实现视频编辑的同时,减少前后端的数据交互,进而降低视频编辑的复杂程度,提高视频编辑的效率,本申请提供的视频编辑方法由终端执行,其中:
在本申请实施例中,终端可以是具有显示屏的计算设备。比如,该终端可以是智能手机、平板电脑、电子书阅读器等移动终端,或者,该终端也可以是智能手表等智能可穿戴设备,或者,该终端也可以是一体式电脑等固定终端。
比如,图1示出了本申请一个示例性的实施例提供的终端的结构示意图。如图1所示,该终端包括主板110、外部输出/输入设备120、存储器130、外部接口140、触控系统150以及电源160。
其中,主板110中集成有处理器和控制器等处理元件。
外部输出/输入设备120可以包括显示组件(比如显示屏)、声音播放组件(比如扬声器)、声音采集组件(比如麦克风)以及各类按键等。
存储器130中存储有程序代码和数据。
外部接口140可以包括耳机接口、充电接口以及数据接口等。
触控系统150可以集成在外部输出/输入设备120的显示组件或者按键中,触控系统150用于检测用户在显示组件或者按键上执行的触控操作。
电源160用于对终端中的其它各个部件进行供电。
在本申请实施例中,主板110中的处理器可以通过执行或者调用存储器中存储的程序代码和数据来生成界面内容,将生成的界面内容通过外部输出/输入设备120进行展示。在展示界面内容的过程中,可以通过触控系统150检测用户与界面进行交互时执行的触控操作,也可以通过外部输出/输入设备120检测用户与界面进行交互时执行的按键或者其它操作,比如手势操作、语音操作等等。
图2示出了本申请一示例性实施例示出的视频编辑方法的流程图,该视频编辑方法可以由终端执行,该终端可以是如图1所示的终端,如图2所示,该方法包括以下步骤:
步骤210,展示待编辑视频中的目标帧图像。
在一种可能的实现方式中,终端通过视频编辑器对待编辑视频进行编辑。视频编辑器对待编辑视频进行解码,获取组成该待编辑视频的视频帧,生成对应的帧图像;该目标帧图像是组成待编辑视频的帧图像中的任意一帧。
在一种可能的实现方式中,该待编辑视频是用户拍摄、上传到视频编辑器的视频,或者,该待编辑视频是用户在终端中播放的视频导入到视频编辑器中的视频。
步骤220,响应于接收到基于目标帧图像的区域选择操作,确定目标帧图像中的模板区域。
在一种可能的实现方式中,终端接收到的基于目标帧图像的区域选择操作是指,用户基于终端的UI(User Interface,用户界面)交互功能在目标帧图像上的绘制操作,或者该区域选择操作是指,用户对视频编辑器中提供的区域选择工具的调节操作。
在一种可能的实现方式中,响应于该区域选择操作是指用户在目标帧图像上的绘制操作,确定目标帧图像中的模板区域可以实现为:终端根据用户的绘制操作对应的不规则的绘制路径,构建指定形状的模板区域,图3示出了本申请一示例性实施例示出的基于用户的绘制操作生成模板区域的示意图,以该指定形状为矩形为例,如图3所示,图3中的A部分示出了用户的绘制操作对应的不规则绘制路径的示意图,图3中的B部分示出了根据绘制路径生成的模板区域的示意图,终端可以在用户绘制操作对应的不规则绘制路径310的外部,生成与绘制路径的外边缘点相切的矩形区域320,作为模板区域,或者,终端可以在用户绘制操作对应的不规则绘制路径310的内部,生成顶点与绘制路径的内边缘点相接的矩形区域330,作为模板区域。上述模板区域的生成方式可以由开发人员进行设定,或者,也可以由用户进行设定,或者,也可以同时显示在目标帧图像上,基于用户的选择操作获取其中一种为模板区域。
在一种可能的实现方式中,该区域选择操作是指用户对视频编辑器中提供的区域选择工具的调节操作,该调节操作包括对区域选择工具位置的移动,大小的调节,方向的旋转中的至少一种。
在一种可能的实现方式中,目标帧图像中可以确定至少一个模板区域,也就是说,用户根据自己的实际需求确定模板区域的位置和数量。
步骤230,响应于接收到对应于模板区域的模板选择操作,确定模板区域对应的模板图像。
在一种可能的实现方式中,该模板图像是由开发人员设置好的,也就是视频编辑器中提供的模板图像;或者,在一种可能的实现方式中,该模板图像是用户基于终端的UI交互功能进行自定义绘制的模板图像,本申请对此不做限制。
步骤240,基于模板区域的图像特征,在待编辑视频的各个帧图像中进行区域匹配,确定各个帧图像中与模板区域匹配的目标区域。
在一种可能的实现方式中,模板区域的图像特征是指该模板区域内的灰度直方图(Histogram)特征和平均像素值中的至少一种;
其中,该模板区域的灰度直方图特征是指在该模板区域内具有每种灰度的像素的个数,反映该模板区域内每种灰度出现的概率。
平均像素值是在该模板区域内的各个像素点的像素的平均值。
以模板区域的图像特征为匹配标准,确定各个帧图像中与该模板区域匹配的目标区域,在一种可能的实现方式中,目标帧图像中确定的模板区域的数量与各个帧图像中确定的目标区域的数量不一致。
在视频录制中,由于拍摄角度的改变,拍摄场景的转换,拍摄对象的移动等导致视频画面中像素点的差异,从而无法确定出目标区域,从而导致目标帧图像中确定的模板区域的数量与各个帧图像中确定的目标区域的数量不一致。
步骤250,将各个帧图像中的目标区域的图像更改为模板图像。
在一种可能的实现方式中,上述待编辑视频的各个帧图像中包含目标帧图像,即基于对目标帧图像的区域选择操作以及模板选择操作确定好模板区域以及图像区域后,对待编辑视频的所有帧图像统一进行目标区域的确定和模板图像的更改。
或者,在另一种可能的实现方式中,上述待编辑视频的各个帧图像中不包含目标帧图像,即在基于对目标帧图像的区域选择操作以及模板选择操作确定好模板区域以及图像区域后,将目标帧图像的模板区域的图像更改为模板图像;之后,基于对目标帧图像的区域选择操作以及模板选择操作确定好的模板区域以及图像区域,对待编辑视频的其他各个帧图像进行目标区域的确定和模板图像的更改。
步骤260,根据更改后的各个帧图像,生成编辑后的视频。
在一种可能的实现方式中,视频编辑器基于更改后的各个帧图像,对视频进行重新编码,生产编辑后的视频。
综上所述,本申请实施例提供的视频编辑方法,应用在终端中,通过基于在待编辑视频中的目标帧图像中确定模板区域和模板图像,将待编辑视频中各个帧图像中对应于该模板区域的目标区域中的图像更改为模板图像,从而实现对视频内容的编辑,使得在视频编辑的过程中,无需进行前后端交互,从而降低了视频编辑的复杂程度,提高了视频编辑的效率。
图4示出了本申请一示例性实施例示出的视频编辑方法的流程图,该视频编辑方法可以由终端执行,该终端可以是如图1所示的终端,如图4所示,该方法包括以下步骤:
步骤410,展示待编辑视频中的目标帧图像。
步骤420,响应于接收到基于目标帧图像的区域选择操作,确定目标帧图像中的模板区域。
在一种可能的实现方式中,该目标帧图像中的模板区域的形状是矩形、圆形、椭圆形、正方形等形状中的任意一种或几种,模板区域的形状可以由开发人员进行设定,或者也可以由用户根据实际需求进行设定,本申请对此不做限制。
本申请以模板区域的形状为矩形为例对本申请提供的视频编辑方法进行说明。
步骤430,响应于接收到对应于模板区域的模板选择操作,确定模板区域对应的模板图像。
在一种可能的实现方式中,该模板选择操作是基于视频编辑器中的模板选择控件获取的,响应于接收到用户基于模板选择控件的触控操作,确定选择该模板选择控件对应的模板图像为对应模板区域的模板图像。
在一种可能的实现方式中,不同模板区域对应的模板图像相同;
或者,不同模板区域对应的模板图像不同。
步骤440,获取目标帧图像中的模板区域的位置坐标。
在一种可能的实现方式中,模板区域对应有其位置属性,比如,某一模板区域的位置属性为(10,10,100,100),表示该模板区域的到最左边的距离为10,到最上边的距离为10,宽度为100,高度为100。
或者,在另一种可能的实现方式中,通过构建坐标系的方式,获取模板区域四个顶点的坐标,从而确定模板区域的位置,比如,以各个帧图像的左上角为原点构建直角坐标系,获取矩形模板区域的位置坐标。
步骤450,基于模板区域的位置坐标,在各个帧图像中构建模板区域搜索范围。
步骤460,基于模板区域的图像特征,在待编辑视频的各个帧图像的模板区域搜索范围内,获取各个帧图像中与模板区域相匹配的目标区域。
在一种可能的实现方式中,终端通过视频编辑器基于在目标帧图像中确定的模板区域和模板对象对各个帧图像进行同步处理,在上述情况下,在各个帧图像中构建模板区域搜索范围可以实现为:
将各个帧图像的整个区域作为各个帧图像的模板区域搜索范围。
在一种可能的实现方式中,终端通过视频编辑器按照帧图像的时间顺序对各个帧图像进行异步处理,也就是上一帧图像处理完成后,视频编辑器才对下一帧图像进行处理,在上述情况下,视频编辑器基于某一帧图像中相邻帧图像中的模板区域的位置坐标,在该帧图像中构建模板区域搜索范围。由于视频是由连续的帧图像构成的,相邻的帧图像中的像素分布情况相近,因此,在各个帧图像中进行构建模板区域搜索范围时,为避免构建的模板区域搜索范围过大或者偏移,可以基于相邻帧图像中确定的目标区域的位置坐标进行模板区域搜索范围的构建。图5示出了本申请一示例性实施例示出的模板区域搜索范围的示意图,如图5所示,当前帧图像的模板区域搜索范围510是基于与其相邻帧图像(上一帧图像)中确定的目标区域520的位置坐标构建的搜索范围。该搜索范围的面积大于目标区域的面积。
需要说明的是,该搜索区范围的大小可以由开发人员按照实际需求进行设定。
在一种可能的实现方式中,以各个帧图像的其中一帧为例,获取各个帧图像中与模板区域相匹配的目标区域实现为:
在第一帧图像的模板区域搜索范围内以预设步长构建至少一个候选模板区域;侯选模板区域的面积与模板区域的面积相等;该第一帧图像是待编辑视频的各个帧图像中的任意一个;
基于模板区域的图像特征,从至少一个候选模型区域内获取第一帧图像中与模板区域相匹配的目标区域。
在一种可能的实现方式中,从至少一个候选模型区域内获取目标区域可以实现为:
依次获取候选模板区域的图像特征,直到获取到的图像特征满足预设条件,该预设条件是指候选模板区域内的图像特征与模板区域的图像特征之间的差值处于预设差值阈值内;
将满足预设条件的图像特征对应的候选模板区域获取为第一帧图像中与模板区域相匹配的目标区域。
在一种可能的实现方式中,在进行候选模板区域的构建时,可以在模板区域搜索范围内以从左往右,从上到下的顺序,按照预设步长构建至少一个候选模板区域。
其中,该至少一个候选模板区域是同时构建的,或者,该至少一个候选模板区域是异步构建的,即当上一个候选模板区域经过图像特征获取,以及与模板区域的图像特征进行差值比较过后,确定不是该帧图像的目标区域后,开始构建下一个候选模板区域。
依次获取候选模板区域的图像特征,直到获取到的图像特征满足预设条件,使得在获取目标区域时,无需对所有候选模板区域的图像特征都进行计算,在获取到与模板区域的图像特征之间的差值处于预设差值阈值内的图像特征时,即可将该图像特征对应的候选模板区域获取为第一帧图像的目标区域,并暂定对其他候选模板区域的图像特征的获取,从而减少在获取目标区域过程中的计算量。图6示出了本申请一示例性实施例示出的获取目标区域的示意图,如图6所示,以该候选模板区域是异步构建的为例,视频编辑器在模板区域搜索范围600中,先获取候选模板区域610中的图像特征,将候选模板区域610中的图像特征与模板区域的图像特征进行比较,确定候选模板区域610为非目标区域后,构建候选模板区域620,并获取候选模板区域620中的图像特征,将候选模板区域620中的图像特征与模板区域的图像特征进行比较,重复上述过程,直到获取到候选模板区域n(如图6中的候选模板区域630)的图像特征与模板区域的图像特征之间的差值处于预设差值阈值内,将候选模板区域n获取为该模板区域搜索范围内的目标区域;或者,直到该模板区域搜索范围内的候选模板区域均进行过图像特征获取和比较后,仍未获取到目标区域,则确定该模板区域搜索范围内不存在对应的目标区域。
以图像特征为平均像素值为例,假设模板区域内的平均像素值为A,候选模板区域内的平均像素值为B,若候选模板区域内的平均像素值B处于(A-X,A+X)范围内,其中X为预设差值阈值,则确定该候选模板区域符合预设条件,该候选模板区域为目标区域。
或者,在另一种可能的实现方式中,从至少一个候选模型区域内获取目标区域可以实现为:
分别获取至少一个候选模板区域的图像特征;
将与模板区域的图像特征之间的差值最小的一个,获取为第一帧图像中与模板区域相匹配的目标区域。
在上述过程中,可以获取第一帧图像中的模板区域搜索范围内的所有候选模板区域的图像特征,并分别与模板区域的图像特征进行比较,获取各个候选模板区域对应的比较结果,获取其中与模板区域的图像特征之间的差值最小的一个为第一帧图像中的目标区域。从而使得获取到的目标区域更加接近于模板区域,提高了获取目标区域的准确度。
步骤470,将各个帧图像中的目标区域的图像更改为模板图像。
在一种可能的实现方式中,初始的模板图像是具有固定尺寸的图像,在确定好目标区域,并将目标区域的图像更改为模板图像时,该模板图像的大小会随着目标区域的大小进行调整,以使得该模板图像能够与目标区域相适应。
在一种可能的实现方式中,将各个帧图像中的目标区域的图像更改为模板图像可以实现为:
将各个帧图像中的目标区域的图像替换为模板图像;
或者,
将各个帧图像中的目标区域的图像用模板图像覆盖。
在一种可能的实现方式中,响应于模板图像为卡通类型的模板,在将各个帧图像中的目标区域的图像更改为模板图像之前,为了保证图像效果的一致性,对各个帧图像进行卡通化预处理:
采用高斯模糊算法、图像颜色调整算法、边缘检测算法对待编辑视频的各个帧图像进行预处理,在预处理后的各个帧图像上进行模板图像的替换或者覆盖。
其中,高斯模糊(Gaussian Blur)算法是指用一个模板(或者称为卷积、掩模)扫描图像中的每一个像素,用模板确定的领域内像素的加权平均灰度值去替代模板中心像素点的值,以使得图像产生模糊的效果;
图像颜色调整算法可以是指调色滤镜算法,也称颜色滤镜算法,通过调节图像像素值的亮度、对比度、饱和度、色相等方法,使得经过调色滤镜算法处理后的图像的颜色效果不同于原图像的颜色效果,比如,该颜色滤镜算法可以是LUT(Look Up Table,颜色查找表)滤镜算法;
边缘检测算法,是指基于图像中不同像素之间的不同灰度形成的边缘进行图像分割,从而确定图像中的各个区域。
在一种可能的实现方式中,可以先对待编辑视频中的各个帧图像进行边缘检测和高斯模糊,之后可以根据边缘检测所确定的图像的各个区域,通过图像颜色调整算法进行处理,其中,同一图像中不同区域所使用的图像颜色调整算法可以相同,也可以不同,本申请对此不进行限制。
需要说明的是,上述对各个帧图像进行预处理时所采用的高斯模糊算法、图像颜色调整算法以及边缘检测算法是预处理步骤的核心算法,可以根据实际需求增加或者减少预处理步骤中使用的对图像进行处理的算法,且各个算法的执行顺序也可以根据实际需求进行设定,本申请对此不做限制。图7示出了本申请一示例性实施例示出的对帧图像进行卡通化处理的示意图,图7中的A部分示出了卡通化预处理后的帧图像的示意图,图7中的B部分示出了经过模板图像更改后的帧图像的示意图,如图7所示,将图7中A部分中示出的帧图像,是经过高斯模糊算法、图像颜色调整算法以及边缘检测算法等步骤处理后的帧图像,在处理后的帧图像的基础上,对该帧图像中的人物的五官以及眼镜通过卡通类型的图像模板进行了更改,图7中的B部分中的帧图像为更改后的卡通类型的帧图像,比如,将区域710中的图像更改为区域720中的模板图像。
步骤480,根据更改后的各个帧图像,生成编辑后的视频。
综上所述,本申请实施例提供的视频编辑方法,应用在终端中,通过基于在待编辑视频中的目标帧图像中确定模板区域和模板图像,将待编辑视频中各个帧图像中对应于该模板区域的目标区域中的图像更改为模板图像,从而实现对视频内容的编辑,使得在视频编辑的过程中,无需进行前后端交互,从而降低了视频编辑的复杂程度,提高了视频编辑的效率。
图8示出了本申请一示例性实施例示出的视频编辑方法的流程图,该视频编辑方法可以由终端执行,该终端可以是如图1所示的终端,如图8所示,该方法包括以下步骤:
步骤810,显示视频编辑界面,该视频编辑界面包括视频编辑区域和视频显示区域,该视频显示区域中显示有待编辑视频中的目标帧图像,该视频编辑区域包含模板选择控件。
图9示出了本申请一示例性实施例示出的视频编辑接界面的示意图,如图9所示,该视频编辑界面中包含视频编辑区域910和视频显示区域920,在视频显示区域中显示有目标帧图像,该目标帧图像可以是组成待编辑视频的帧图像中的任意一帧;其中,该视频编辑区域中包含至少一个模板选择控件930,在一种可能的实现方式中,该模板选择控件可以按照模板选择控件对应的模板对应的对象类型进行分类,比如可以分为动物、人像、环境等类别,在对象类别下,可以进行进一步分类,比如对于人像类别而言,可以进一步分为眼、耳、口、鼻、眉毛等子类别,每个子类别下对应有至少一个模板选择控件930。
需要说明的是,上述对模板选择控件的分类方式为示意性的,本申请不对模板选择控件的分类方式进行限制。
在一种可能的实现方式中,模板选择控件中,还可以包括模板自定义控件,该模板自定义控件可以支持用户对模板图像的自定义和使用,同时,也可以将用户自定义的模板图像加入到模板选择控件中。
步骤820,响应于接收到基于目标帧图像的区域选择操作,在目标帧图像上显示模板区域。
步骤830,响应于接收到基于模板选择控件的模板选择操作,确定模板区域对应的模板图像。
在一种可能的实现方式中,将确定好的模板图像显示在对应模板区域中;
或者,在另一种可能的实现方式中,视频编辑区域中设置有匹配区域,该匹配区域用以显示模板区域与模板图像之间的对应关系,图10示出了本申请一示例性实时例示出的匹配区域的示意图,如图10所示,在该匹配区域1010中对应显示有各个模板区域的编号以及其对应的模板图像,比如图10中的模板区域1与模板图像1相对应,模板区域2与模板图像2,用户可以通过基于匹配区域中显示的已选择的模板图像的触控操作,实现对模板图像的替换。
步骤840,将待编辑视频的各个帧图像中与模板区域相匹配的目标区域的图像更改为模板图像。
步骤850,根据更改后的各个帧图像,在视频显示区域中显示编辑后的视频。
综上所述,本申请实施例提供的视频编辑方法,应用在终端中,通过基于在待编辑视频中的目标帧图像中确定模板区域和模板图像,将待编辑视频中各个帧图像中对应于该模板区域的目标区域中的图像更改为模板图像,从而实现对视频内容的编辑,使得在视频编辑的过程中,无需进行前后端交互,从而降低了视频编辑的复杂程度,提高了视频编辑的效率。
以视频卡通化为例,请参考图11,其示出了本申请一示例性实施例示出的视频卡通化的示意图,如图11所示,用户将待编辑视频导入到视频编辑器中,视频编辑器对该待编辑视频进行解码,将其解码为连续的帧图像,基于用户的选择操作获取其中一个帧图像为目标帧图像,并在视频显示区域1110进行显示;基于用户在目标帧图像的区域选择操作,在目标帧图像中确定至少一个模板区域(图11中以两个模板区域为例);基于用户在视频操作区域1120中显示的模板选择控件的模板选择操作,确定各个模板区域对应的模板图像(需要说明的是,可以在确定一个模板区域之后就进行模板图像的确认,或者,也可以在确定好所有的模板区域之后,依次进行模板图像的确认);视频播放器对各个帧图像进行卡通化预处理后,即进行高斯模糊算法、图像颜色调整算法、边缘检测算法处理后(图中未示出),基于用户在目标帧图上确认好的模板区域以及对应的模板图像,对待编辑视频的各个帧图像进行处理,将各个帧图像中与目标帧图像的模板区域的图像特征相同或相近的目标区域处的图像更改为模板区域对应的模板图像;视频编辑器基于更改后的各个帧图像,对待编辑视频进行重新编码,获得编辑后的视频,从而实现视频卡通化。
图12示出了本申请一示例性实施例示出的视频编辑装置的方框图,该装置应用于终端中,该终端可以是如图1所示的终端,如图11所示,该装置包括:
展示模块1210,用于展示待编辑视频中的目标帧图像;
模板区域确定模块1220,用于响应于接收到基于目标帧图像的区域选择操作,确定目标帧图像中的模板区域;
模板图像确定模块1230,用于响应于接收到对应于模板区域的模板选择操作,确定模板区域对应的模板图像;
目标区域确定模块1240,用于基于模板区域的图像特征,在待编辑视频的各个帧图像中进行区域匹配,确定各个帧图像中与模板区域相匹配的目标区域;
更改模块1250,用于将各个帧图像中的目标区域的图像更改为模板图像;
视频生成模块1260,用于根据更改后的各个帧图像,生成编辑后的视频。
在一种可能的实现方式中,该目标区域确定模块1240,包括:
位置坐标获取子模块,用于获取目标帧图像中的模板区域的位置坐标;
构建子模块,用于基于模板区域的位置坐标,在各个帧图像中构建模板区域搜索范围;
目标区域获取子模块,用于基于模板区域的图像特征,在待编辑视频的各个帧图像的模板区域搜索范围内,获取各个帧图像中与模板区域相匹配的目标区域。
在一种可能的实现方式中,该目标区域获取子模块,包括:
构建单元,用于在第一帧图像的模板区域搜索范围内以预设步长构建至少一个候选模板区域;该候选模板区域的面积与模板区域的面积相等;该第一帧图像是待编辑视频的各个帧图像中的任意一个;
获取单元,用于基于模板区域的图像特征,从至少一个候选模型区域内获取第一帧图像中与模板区域相匹配的目标区域。
在一种可能的实现方式中,该获取单元,包括:
第一获取子单元,用于依次获取候选模板区域的图像特征,直到获取到的图像特征满足预设条件,该预设条件是指候选模板区域内的图像特征与模板区域的图像特征之间的差值处于预设差值阈值内;
第二获取子单元,用于将满足预设条件的图像特征对应的候选模板区域获取为第一帧图像中与模板区域相匹配的目标区域。
在一种可能的实现方式中,该获取单元,包括:
第三获取子单元,用于分别获取至少一个候选模板区域的图像特征;
第四获取子单元,用于将与模板区域的图像特征之间的差值最小的一个,获取为第一帧图像中与模板区域相匹配的目标区域。
在一种可能的实现方式中,该装置还包括:
预处理模块,用于响应于模板图像为卡通类型的模板,在将各个帧图像中的目标区域的图像更改为模板图像之前,采用高斯模糊算法、图像颜色调整算法、边缘检测算法对待编辑视频的各个帧图像进行预处理。
在一种可能的实现方式中,该更改模块1250,用于,
将各个帧图像中的目标区域的图像替换为模板图像;
或者,
将各个帧图像中的目标区域的图像用模板图像覆盖。
综上所述,本申请实施例提供的视频编辑装置,应用于终端中,通过基于在待编辑视频中的目标帧图像中确定模板区域和模板图像,将待编辑视频中各个帧图像中对应于该模板区域的目标区域中的图像更改为模板图像,从而实现对视频内容的编辑,使得在视频编辑的过程中,无需进行前后端交互,从而降低了视频编辑的复杂程度,提高了视频编辑的效率。
图13是根据一示例性实施例示出的计算机设备1300的结构框图。该计算机设备1300可以是图1所示的终端,比如智能手机、平板电脑或台式电脑。计算机设备1300还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。
通常,计算机设备1300包括有:处理器1301和存储器1302。
处理器1301可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器1301可以采用DSP(Digital Signal Processing,数字信号处理)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器1301也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(Central ProcessingUnit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器1301可以在集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器1301还可以包括AI(Artificial Intelligence,人工智能)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器1302可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器1302还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器1302中的非暂态的计算机可读存储介质用于存储至少一个指令,该至少一个指令用于被处理器1301所执行以实现本申请中方法实施例提供的方法。
在一些实施例中,计算机设备1300还可选包括有:外围设备接口1303和至少一个外围设备。处理器1301、存储器1302和外围设备接口1303之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口1303相连。具体地,外围设备包括:射频电路1304、显示屏1305、摄像头组件1306、音频电路1307、定位组件1308和电源1309中的至少一种。
外围设备接口1303可被用于将I/O(Input/Output,输入/输出)相关的至少一个外围设备连接到处理器1301和存储器1302。在一些实施例中,处理器1301、存储器1302和外围设备接口1303被集成在同一芯片或电路板上;在一些其他实施例中,处理器1301、存储器1302和外围设备接口1303中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。
射频电路1304用于接收和发射RF(Radio Frequency,射频)信号,也称电磁信号。射频电路1304通过电磁信号与通信网络以及其他通信设备进行通信。射频电路1304将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路1304包括:天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路1304可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:万维网、城域网、内联网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity,无线保真)网络。在一些实施例中,射频电路1304还可以包括NFC(Near Field Communication,近距离无线通信)有关的电路,本申请对此不加以限定。
显示屏1305用于显示UI(UserInterface,用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏1305是触摸显示屏时,显示屏1305还具有采集在显示屏1305的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器1301进行处理。此时,显示屏1305还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏1305可以为一个,设置计算机设备1300的前面板;在另一些实施例中,显示屏1305可以为至少两个,分别设置在计算机设备1300的不同表面或呈折叠设计;在再一些实施例中,显示屏1305可以是柔性显示屏,设置在计算机设备1300的弯曲表面上或折叠面上。甚至,显示屏1305还可以设置成非矩形的不规则图形,也即异形屏。显示屏1305可以采用LCD(Liquid Crystal Display,液晶显示屏)、OLED(OrganicLight-Emitting Diode,有机发光二极管)等材质制备。
摄像头组件1306用于采集图像或视频。可选地,摄像头组件1306包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头组件1306还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。
音频电路1307可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器1301进行处理,或者输入至射频电路1304以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在计算机设备1300的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器1301或射频电路1304的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频电路1307还可以包括耳机插孔。
定位组件1308用于定位计算机设备1300的当前地理位置,以实现导航或LBS(Location Based Service,基于位置的服务)。定位组件1308可以是基于美国的GPS(Global Positioning System,全球定位系统)、中国的北斗系统或俄罗斯的伽利略系统的定位组件。
电源1309用于为计算机设备1300中的各个组件进行供电。电源1309可以是交流电、直流电、一次性电池或可充电电池。当电源1309包括可充电电池时,该可充电电池可以是有线充电电池或无线充电电池。有线充电电池是通过有线线路充电的电池,无线充电电池是通过无线线圈充电的电池。该可充电电池还可以用于支持快充技术。
在一些实施例中,计算机设备1300还包括有一个或多个传感器1310。该一个或多个传感器1310包括但不限于:加速度传感器1311、陀螺仪传感器1312、压力传感器1313、指纹传感器1314、光学传感器1315以及接近传感器1316。
加速度传感器1311可以检测以计算机设备1300建立的坐标系的三个坐标轴上的加速度大小。比如,加速度传感器1311可以用于检测重力加速度在三个坐标轴上的分量。处理器1301可以根据加速度传感器1311采集的重力加速度信号,控制显示屏1305以横向视图或纵向视图进行用户界面的显示。加速度传感器1311还可以用于游戏或者用户的运动数据的采集。
陀螺仪传感器1312可以检测计算机设备1300的机体方向及转动角度,陀螺仪传感器1312可以与加速度传感器1311协同采集用户对计算机设备1300的3D动作。处理器1301根据陀螺仪传感器1312采集的数据,可以实现如下功能:动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。
压力传感器1313可以设置在计算机设备1300的侧边框和/或显示屏1305的下层。当压力传感器1313设置在计算机设备1300的侧边框时,可以检测用户对计算机设备1300的握持信号,由处理器1301根据压力传感器1313采集的握持信号进行左右手识别或快捷操作。当压力传感器1313设置在显示屏1305的下层时,由处理器1301根据用户对显示屏1305的压力操作,实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。
指纹传感器1314用于采集用户的指纹,由处理器1301根据指纹传感器1314采集到的指纹识别用户的身份,或者,由指纹传感器1314根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时,由处理器1301授权该用户执行相关的敏感操作,该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器1314可以被设置计算机设备1300的正面、背面或侧面。当计算机设备1300上设置有物理按键或厂商Logo时,指纹传感器1314可以与物理按键或厂商Logo集成在一起。
光学传感器1315用于采集环境光强度。在一个实施例中,处理器1301可以根据光学传感器1315采集的环境光强度,控制显示屏1305的显示亮度。具体地,当环境光强度较高时,调高显示屏1305的显示亮度;当环境光强度较低时,调低显示屏1305的显示亮度。在另一个实施例中,处理器1301还可以根据光学传感器1315采集的环境光强度,动态调整摄像头组件1306的拍摄参数。
接近传感器1316,也称距离传感器,通常设置在计算机设备1300的前面板。接近传感器1316用于采集用户与计算机设备1300的正面之间的距离。在一个实施例中,当接近传感器1316检测到用户与计算机设备1300的正面之间的距离逐渐变小时,由处理器1301控制显示屏1305从亮屏状态切换为息屏状态;当接近传感器1316检测到用户与计算机设备1300的正面之间的距离逐渐变大时,由处理器1301控制显示屏1305从息屏状态切换为亮屏状态。
本领域技术人员可以理解,图13中示出的结构并不构成对计算机设备1300的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
本领域技术人员可以理解,在上述一个或多个示例中,本申请实施例所描述的功能可以用硬件、软件、固件或它们的任意组合来实现。当使用软件实现时,可以将这些功能存储在计算机可读介质中或者作为计算机可读介质上的一个或多个指令或代码进行传输。计算机可读介质包括计算机存储介质和通信介质,其中通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。存储介质可以是通用或专用计算机能够存取的任何可用介质。
在一示例性实施例中,还提供了一种计算机可读存储介质,用于存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现上述视频编辑方法中的全部或部分步骤。例如,该计算机可读存储介质可以是只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、只读光盘(Compact Disc Read-Only Memory,CD-ROM)、磁带、软盘和光数据存储设备等。
在一示例性实施例中,还提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述图2、图4或图8任一实施例所示方法的全部或部分步骤。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本申请的真正范围和精神由下面的权利要求指出。
应当理解的是,本申请并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求来限制。

Claims (11)

1.一种视频编辑方法,其特征在于,所述方法由终端执行,所述方法包括:
展示待编辑视频中的目标帧图像;
响应于接收到基于所述目标帧图像的区域选择操作,确定所述目标帧图像中的模板区域;
响应于接收到对应于所述模板区域的模板选择操作,确定所述模板区域对应的模板图像;
基于所述模板区域的图像特征,在所述待编辑视频的各个帧图像中进行区域匹配,确定所述各个帧图像中与所述模板区域相匹配的目标区域;
将所述各个帧图像中的所述目标区域的图像更改为所述模板图像;
根据更改后的所述各个帧图像,生成编辑后的视频。
2.根据权利要求1所述的方法,其特征在于,所述基于所述模板区域的图像特征,在所述待编辑视频的各个帧图像中进行区域匹配,确定所述各个帧图像中与所述模板区域相匹配的目标区域,包括:
获取所述目标帧图像中的所述模板区域的位置坐标;
基于所述模板区域的位置坐标,在所述各个帧图像中构建模板区域搜索范围;
基于所述模板区域的图像特征,在所述待编辑视频的所述各个帧图像的所述模板区域搜索范围内,获取所述各个帧图像中与所述模板区域相匹配的所述目标区域。
3.根据权利要求2所述的方法,其特征在于,所述基于所述模板区域的图像特征,在所述待编辑视频的所述各个帧图像的所述模板区域搜索范围内,获取所述各个帧图像中与所述模板区域相匹配的所述目标区域,包括:
在第一帧图像的所述模板区域搜索范围内以预设步长构建至少一个候选模板区域;所述候选模板区域的面积与所述模板区域的面积相等;所述第一帧图像是所述待编辑视频的所述各个帧图像中的任意一个;
基于所述模板区域的所述图像特征,从至少一个所述候选模型区域内获取所述第一帧图像中与所述模板区域相匹配的所述目标区域。
4.根据权利要求3所述的方法,其特征在于,所述基于所述模板区域的所述图像特征,从至少一个所述候选模型区域内获取所述第一帧图像中与所述模板区域相匹配的所述目标区域,包括:
依次获取所述候选模板区域的图像特征,直到获取到的所述图像特征满足预设条件,所述预设条件是指所述候选模板区域内的所述图像特征与所述模板区域的所述图像特征之间的差值处于预设差值阈值内;
将满足所述预设条件的图像特征对应的所述候选模板区域获取为所述第一帧图像中与所述模板区域相匹配的所述目标区域。
5.根据权利要求3所述的方法,其特征在于,所述基于所述模板区域的所述图像特征,从至少一个所述候选模型区域内获取所述第一帧图像中与所述模板区域相匹配的所述目标区域,包括:
分别获取至少一个所述候选模板区域的所述图像特征;
将与所述模板区域的所述图像特征之间的差值最小的一个,获取为所述第一帧图像中与所述模板区域相匹配的所述目标区域。
6.根据权利要求1所述的方法,其特征在于,响应于所述模板图像为卡通类型的模板,在将所述各个帧图像中的所述目标区域的图像更改为所述模板图像之前,所述方法还包括:
采用高斯模糊算法、图像颜色调整算法、边缘检测算法对所述待编辑视频的所述各个帧图像进行预处理。
7.根据权利要求1所述的方法,其特征在于,所述将所述各个帧图像中的所述目标区域的图像更改为所述模板图像,包括:
将所述各个帧图像中的所述目标区域的图像替换为所述模板图像;
或者,
将所述各个帧图像中的所述目标区域的图像用所述模板图像覆盖。
8.一种视频编辑方法,其特征在于,所述方法由终端执行,所述方法包括:
显示视频编辑界面,所述视频编辑界面包括视频编辑区域和视频显示区域,所述视频显示区域中显示有待编辑视频中的目标帧图像,所述视频编辑区域包含模板选择控件;
响应于接收到基于所述目标帧图像的区域选择操作,在所述目标帧图像上显示模板区域;
响应于接收到基于所述模板选择控件的模板选择操作,确定所述模板区域对应的模板图像;
将所述待编辑视频的各个帧图像中与所述模板区域相匹配的目标区域的图像显示为所述模板图像;
根据更改后的所述各个帧图像,在所述视频显示区域中显示编辑后的视频。
9.一种视频编辑装置,其特征在于,所述装置应用于终端中,所述装置包括:
展示模块,用于展示待编辑视频中的目标帧图像;
模板区域确定模块,用于响应于接收到基于所述目标帧图像的区域选择操作,确定所述目标帧图像中的模板区域;
模板图像确定模块,用于响应于接收到对应于所述模板区域的模板选择操作,确定所述模板区域对应的模板图像;
目标区域确定模块,用于基于所述模板区域的图像特征,在所述待编辑视频的各个帧图像中进行区域匹配,确定所述各个帧图像中与所述模板区域相匹配的目标区域;
更改模块,用于将所述各个帧图像中的所述目标区域的图像更改为所述模板图像;
视频生成模块,用于根据更改后的所述各个帧图像,生成编辑后的视频。
10.一种终端,其特征在于,所述终端包括处理器和存储器,所述存储器存储有至少一条指令、至少一条程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如权利要求1至8任一所述的视频编辑方法。
11.一种计算机可读存储介质,其特征在于,所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现如权利要求1至8任一所述的视频编辑方法。
CN202011043748.1A 2020-09-28 2020-09-28 视频编辑方法、装置、终端及存储介质 Pending CN112135191A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011043748.1A CN112135191A (zh) 2020-09-28 2020-09-28 视频编辑方法、装置、终端及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011043748.1A CN112135191A (zh) 2020-09-28 2020-09-28 视频编辑方法、装置、终端及存储介质

Publications (1)

Publication Number Publication Date
CN112135191A true CN112135191A (zh) 2020-12-25

Family

ID=73844454

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011043748.1A Pending CN112135191A (zh) 2020-09-28 2020-09-28 视频编辑方法、装置、终端及存储介质

Country Status (1)

Country Link
CN (1) CN112135191A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113411636A (zh) * 2021-06-17 2021-09-17 广州繁星互娱信息科技有限公司 连麦直播方法、装置、电子设备及计算机可读存储介质
CN114697763A (zh) * 2022-04-07 2022-07-01 脸萌有限公司 一种视频处理方法、装置、电子设备及介质
CN114860134A (zh) * 2021-02-05 2022-08-05 阿里巴巴集团控股有限公司 视频编辑方法及装置、介质、终端、设备
CN114979374A (zh) * 2022-04-15 2022-08-30 咪咕音乐有限公司 视频彩铃实时修改方法、系统、设备及存储介质
WO2024120395A1 (zh) * 2022-12-06 2024-06-13 北京字跳网络技术有限公司 一种图像处理方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101373477A (zh) * 2007-08-24 2009-02-25 株式会社尼康 被摄物体跟踪方法、被摄物体跟踪装置及计算机程序产品
CN103873741A (zh) * 2014-04-02 2014-06-18 北京奇艺世纪科技有限公司 一种用于替换视频中感兴趣区域的方法及装置
US20150365627A1 (en) * 2014-06-13 2015-12-17 Arcsoft Inc. Enhancing video chatting
US20160127681A1 (en) * 2014-10-31 2016-05-05 Microsoft Technology Licensing, Llc Modifying Video Call Data
CN109348277A (zh) * 2018-11-29 2019-02-15 北京字节跳动网络技术有限公司 运动像素视频特效添加方法、装置、终端设备及存储介质
CN111028144A (zh) * 2019-12-09 2020-04-17 腾讯音乐娱乐科技(深圳)有限公司 视频换脸方法及装置、存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101373477A (zh) * 2007-08-24 2009-02-25 株式会社尼康 被摄物体跟踪方法、被摄物体跟踪装置及计算机程序产品
CN103873741A (zh) * 2014-04-02 2014-06-18 北京奇艺世纪科技有限公司 一种用于替换视频中感兴趣区域的方法及装置
US20150365627A1 (en) * 2014-06-13 2015-12-17 Arcsoft Inc. Enhancing video chatting
US20160127681A1 (en) * 2014-10-31 2016-05-05 Microsoft Technology Licensing, Llc Modifying Video Call Data
CN109348277A (zh) * 2018-11-29 2019-02-15 北京字节跳动网络技术有限公司 运动像素视频特效添加方法、装置、终端设备及存储介质
CN111028144A (zh) * 2019-12-09 2020-04-17 腾讯音乐娱乐科技(深圳)有限公司 视频换脸方法及装置、存储介质

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114860134A (zh) * 2021-02-05 2022-08-05 阿里巴巴集团控股有限公司 视频编辑方法及装置、介质、终端、设备
CN113411636A (zh) * 2021-06-17 2021-09-17 广州繁星互娱信息科技有限公司 连麦直播方法、装置、电子设备及计算机可读存储介质
CN114697763A (zh) * 2022-04-07 2022-07-01 脸萌有限公司 一种视频处理方法、装置、电子设备及介质
CN114979374A (zh) * 2022-04-15 2022-08-30 咪咕音乐有限公司 视频彩铃实时修改方法、系统、设备及存储介质
WO2024120395A1 (zh) * 2022-12-06 2024-06-13 北京字跳网络技术有限公司 一种图像处理方法及装置

Similar Documents

Publication Publication Date Title
CN110321126B (zh) 生成页面代码的方法和装置
CN110059685A (zh) 文字区域检测方法、装置及存储介质
CN112135191A (zh) 视频编辑方法、装置、终端及存储介质
CN112907725B (zh) 图像生成、图像处理模型的训练、图像处理方法和装置
CN111028144B (zh) 视频换脸方法及装置、存储介质
CN109302632B (zh) 获取直播视频画面的方法、装置、终端及存储介质
CN110335224B (zh) 图像处理方法、装置、计算机设备及存储介质
CN111723803A (zh) 图像处理方法、装置、设备及存储介质
CN111754386A (zh) 图像区域屏蔽方法、装置、设备及存储介质
CN110853124B (zh) 生成gif动态图的方法、装置、电子设备及介质
CN113706678A (zh) 获取虚拟形象的方法、装置、设备及计算机可读存储介质
CN109978996B (zh) 生成表情三维模型的方法、装置、终端及存储介质
CN113033341A (zh) 图像处理方法、装置、电子设备及存储介质
CN114494073A (zh) 图像处理方法、装置、设备及存储介质
CN112396076A (zh) 车牌图像生成方法、装置及计算机存储介质
CN110992268B (zh) 背景设置方法、装置、终端及存储介质
CN112907702A (zh) 图像处理方法、装置、计算机设备及存储介质
CN110675473B (zh) 生成gif动态图的方法、装置、电子设备及介质
CN112565806A (zh) 虚拟礼物赠送方法、装置、计算机设备及介质
CN112967261B (zh) 图像融合方法、装置、设备及存储介质
CN112308103A (zh) 生成训练样本的方法和装置
CN114741559A (zh) 确定视频封面的方法、设备及存储介质
CN112235650A (zh) 视频处理方法、装置、终端及存储介质
CN113763531A (zh) 三维人脸重建方法、装置、电子设备及存储介质
CN110889391A (zh) 人脸图像处理的方法、装置、计算设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20201225