CN113873319A - 视频处理方法、装置、电子设备及存储介质 - Google Patents

视频处理方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN113873319A
CN113873319A CN202111134141.9A CN202111134141A CN113873319A CN 113873319 A CN113873319 A CN 113873319A CN 202111134141 A CN202111134141 A CN 202111134141A CN 113873319 A CN113873319 A CN 113873319A
Authority
CN
China
Prior art keywords
frame sequence
video
video frame
target
foreground
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111134141.9A
Other languages
English (en)
Inventor
杨蕾
李兵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN202111134141.9A priority Critical patent/CN113873319A/zh
Publication of CN113873319A publication Critical patent/CN113873319A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334Recording operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72439User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for image or video messaging
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44016Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display

Abstract

本申请提供了一种视频处理方法、装置、电子设备和存储介质。该方法包括:在视频的录制过程中,对摄像头采集的视频帧序列进行图像分割处理,得到前景视频帧序列和背景视频帧序列;对前景视频帧序列和背景视频帧序列进行编辑处理,得到目标视频。

Description

视频处理方法、装置、电子设备及存储介质
技术领域
本申请属于视频处理技术领域,具体涉及视频处理方法、装置、电子设备及存储介质。
背景技术
目前,随着电子设备的普及,越来越多的用户使用电子设备拍摄制作视频。
对于一些特效视频,例如穿梭类特效视频,即视频中人物周围的背景在快速地变化。在制作这些穿梭类特效视频时,需要在特定场景拍摄人物视频,例如在绿幕前拍摄人物视频,然后使用剪辑工具在视频中的绿幕显示区域加入背景,再对视频中的人物和背景进行编辑,以此得到特效视频。
然而,制作这类特效视频要求用户具备视频剪辑基础,采用剪辑工具对视频进行相应的处理,整个过程操作非常繁琐,耗时长。
发明内容
本申请实施例的目的是一种视频处理方法、装置、电子设备及存储介质,能够解决现有的制作特效视频时操作繁琐的问题。
第一方面,本申请实施例提供了一种视频处理方法,该方法包括:
在视频的录制过程中,对摄像头采集的视频帧序列进行图像分割处理,得到前景视频帧序列和背景视频帧序列;
对所述前景视频帧序列和所述背景视频帧序列进行编辑处理,得到目标视频。
第二方面,本申请实施例提供了一种视频处理装置,该装置包括:
分割模块,用于在视频的录制过程中,对摄像头采集的视频帧序列进行图像分割处理,得到前景视频帧序列和背景视频帧序列;
编辑模块,用于对所述前景视频帧序列和所述背景视频帧序列进行编辑处理,得到目标视频。
第三方面,本申请实施例提供了一种电子设备,该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。
第四方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的方法。
本申请实施例中,在视频的录制过程中,对摄像头采集的视频帧序列进行图像分割处理,得到前景视频帧序列和背景视频帧序列;对前景视频帧序列和背景视频帧序列进行编辑处理,得到目标视频。上述对视频录制得到目标视频的过程中,无需使用专门的剪辑工具进行繁琐的剪辑即可制作得到特效视频,降低了制作特效视频的复杂度,使得特效视频的制作更为便捷。本申请实施例还可以增加用户进行视频创作的趣味性,且操作简单,制作成本低。
附图说明
图1是本申请实施例提供的视频处理方法的流程图;
图2a是本申请实施例提供的视频处理方法的应用场景图之一;
图2b是本申请实施例提供的视频处理方法的应用场景图之二;
图2c是本申请实施例提供的视频处理方法的应用场景图之三;
图3是本申请实施例提供的视频处理方法的应用场景图之四;
图4是本申请实施例提供的视频处理方法的应用场景图之五;
图5是本申请实施例提供的视频处理方法的应用流程图;
图6是本申请实施例提供的视频处理装置的结构图;
图7是本申请实施例提供的电子设备的结构图;
图8是本申请实施例提供的电子设备的硬件结构图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
本申请实施例提供的视频处理方法可以应用在电子设备或其他移动终端上,为便于对技术方案的说明,以该视频处理方法应用在电子设备为例进行阐述。下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的视频处理方法进行详细地说明。
请参阅图1,图1是本申请实施例提供的视频处理方法的流程图。以下,以本申请实施例提供的视频处理方法应用在电子设备上为例进行阐述,本申请实施例提供的视频处理方法包括以下步骤:
S101,在视频的录制过程中,对摄像头采集的视频帧序列进行图像分割处理,得到前景视频帧序列和背景视频帧序列。
本实施例中,在视频录制之前,用户打开电子设备的相机,可以在相机页面的“更多”选项中选择“创意视频”,显示创意视频页面后,例如可以选择“时空穿梭”,进入时空穿梭特效视频的拍摄和制作页面,以此录制视频。
在视频录制的过程中,对摄像头采集的视频帧序列进行图像分割处理,得到前景视频帧序列和背景视频帧序列,其中,上述前景视频帧序列包括至少一帧前景视频帧,上述背景视频帧序列包括至少一帧背景视频帧。
其中,可以使用预先设置的人像分割算法,例如SHM算法,对视频帧序列进行图像分割处理,得到前景视频帧序列和背景视频帧序列
例如,录制的视频为一个人物站在十字路口的一个固定区域,这种情况下,前景视频帧序列对应的视频内容只包括录制的视频中的人物;背景视频帧序列对应的视频内容包括录制的视频中除人物之外的其他背景。
S102,对所述前景视频帧序列和所述背景视频帧序列进行编辑处理,得到目标视频。
本步骤中,在得到前景视频帧序列和背景视频帧序列后,根据用户的输入,对前景视频帧序列和所述背景视频帧序列进行编辑处理,得到目标视频。上述编辑处理包括播放速度、添加滤镜效果等编辑方式,具体的实现方式,请参阅后续实施例。
本申请实施例中,在视频的录制过程中,对摄像头采集的视频帧序列进行图像分割处理,得到前景视频帧序列和背景视频帧序列;对前景视频帧序列和背景视频帧序列进行编辑处理,得到目标视频。上述对视频录制得到目标视频的过程中,无需使用专门的剪辑工具进行繁琐的剪辑即可制作得到特效视频,降低了制作特效视频的复杂度,使得特效视频的制作更为便捷。本申请实施例还可以增加用户进行视频创作的趣味性,且操作简单,制作成本低。
可选地,所述对摄像头采集的视频帧序列进行图像分割处理之前,还包括:
在拍摄预览界面中显示拍摄预览图像;
获取所述拍摄预览图像中的目标对象对应的目标区域;
所述对摄像头采集的视频帧序列进行图像分割处理,包括:
基于所述目标区域,对摄像头采集的视频帧序列进行图像分割处理。
在视频录制的过程中,在拍摄预览界面中显示拍摄预览图像,将拍摄预览图像中的目标对象对应的目标区域进行图像分割处理,其中,上述目标对象可以是使用图像识别算法识别到的人脸或人体,也可以是其他对象,例如小猫、小狗等。
进一步地,基于目标区域对预览图像进行图像分割,得到前景视频帧序列和背景视频帧序列。上述前景视频帧序列包括目标区域对应的图像,即前景视频帧序列中的每一个视频帧均包括目标区域的图像。
本实施例中,确定拍摄预览图像中的目标对象,以此将摄像头采集的视频帧序列分割为背景视频帧序列和包括目标对象的前景视频帧序列。
在其他实施例中,在视频录制的过程中,拍摄预览界面的预设区域可以显示一个人形虚线框,用户在录制视频时,需要控制视频中的人物处于该人形虚线框内。这样,可以将人形虚线框对应区域的图像从摄像头采集的视频图像中分割出来,作为前景视频帧序列。便于之后AI进行识别和分割,这样可以指引用户在拍摄时,保证人物主体清晰,位于画面前端。
应理解,在录制视频的同时,电子设备就对拍摄到的预览图像进行AI智能分割的计算,逐帧将人物主体和背景精准分离开,得到前景视频帧和背景视频帧,并保存到缓存区。这样在录制的同时完成图像的分割,无需使用专门的剪辑工具进行繁琐的剪辑,以此节约用户时间。
在其他实施例中,用户也可以对预览图像执行相应的输入,例如触控输入或滑动输入,确定预览图像的目标区域,以此基于该目标区域,对预览图像进行图像分割,得到前景视频帧序列和背景视频帧序列。可选地,电子设备可以对处于目标区域内的人物主体进行追焦,保证录制到清晰度较高的人物主体。
可选地,所述对所述前景视频帧序列和所述背景视频帧序列进行编辑处理之前,还包括:
显示第一窗口和第二窗口。
为便于理解,请参阅图2a和图2b,如图2a所示,录制的视频内容为用户站在教室内,在拍摄预览界面显示预览图像。
如图2b所示,在对录制的视频进行图像分割后,显示第一窗口和第二窗口,其中,第一窗口包括前景视频帧序列,所述第二窗口包括背景视频帧序列。
本实施例中,设置第一窗口显示前景视频帧序列,设置第二窗口显示背景视频帧序列,用户可以对第一窗口或第二窗口执行触控操作,以编辑相应的视频帧序列,提高了用户操作的便捷性。
可选地,所述显示第一窗口和第二窗口之后,还包括:
接收用户对目标窗口的第一输入;
响应于所述第一输入,显示视频编辑控件。
本实施例中,上述目标窗口为第一窗口或第二窗口,接收用户对目标窗口的第一输入,在拍摄预览界面的预设位置显示视频编辑控件。视频编辑控件用于编辑前景视频帧序列或背景视频帧序列的视频参数信息,上述视频参数信息包括视频帧序列对应的播放帧率、滤镜、字幕等。
其中,第一输入可以为:用户对目标窗口的点击输入,或者为用户输入的语音指令,或者为用户输入的特定手势,具体的可以根据实际使用需求确定,本申请实施例对此不作限定。
本申请实施例中的特定手势可以为单击手势、滑动手势、拖动手势、压力识别手势、长按手势、面积变化手势、双按手势、双击手势中的任意一种;本申请实施例中的点击输入可以为单击输入、双击输入或任意次数的点击输入等,还可以为长按输入或短按输入。
请参阅图2c,如图2c所示,在接收到第一输入后,显示视频编辑界面,视频编辑界面显示有“风格滤镜”和“裁剪”这两个视频编辑控件。
本实施例中,基于用户的第一输入,显示视频编辑控件,进一步地,用户可以通过视频编辑控件对视频帧序列进行编辑,以此提高了用户操作的便捷。
可选地,所述对所述前景视频帧序列和所述背景视频帧序列进行编辑处理包括:调节所述背景视频帧序列的播放帧率。
本实施例中,调节播放帧率可以得到穿梭类特效视频,穿梭类特效视频的特点为视频中背景部分的播放帧率大于人物部分的播放帧率,例如,人物站在马路中央,背景为经过人物的车辆,通过控制背景的播放帧率大于人物的播放帧率,形成车辆在人物身后穿梭的效果。
本实施例中,可以调整背景视频帧序列对应的第一播放帧率和/或前景视频帧序列对应的第二播放帧率,使得第一播放帧率小于第二播放帧率,这样,目标视频中背景部分的播放帧率大于人物部分的播放帧率,实现穿梭类特效视频的显示效果。
一种可选地实施方式为,降低背景视频帧序列对应的第一播放帧率,不调整前景视频帧序列对应的第二播放帧率,以此控制第一播放帧率小于第二播放帧率。
另一种可选地实施方式为,不调整背景视频帧序列对应的第一播放帧率,提高前景视频帧序列对应的第二播放帧率,以此控制第一播放帧率小于第二播放帧率。
另一种可选地实施方式为,降低背景视频帧序列对应的第一播放帧率,并提高前景视频帧序列对应的第二播放帧率,以此控制第一播放帧率小于第二播放帧率。
在其他实施例中,在对背景视频帧序列和前景视频帧序列进行编辑的过程中,可以对背景视频帧序列和/或前景视频帧序列增加滤镜,上述滤镜可以是黑白滤镜、怀旧滤镜或其他类型的滤镜,以此提高目标视频的显示效果。
例如用户可以对背景视频帧序列和前景视频帧序列选择滤镜添加,例如电影怀旧滤镜、黑白滤镜等,变换整个视频的风格。现有的视频编辑软件,只能够对整个视频添加滤镜,而本实施例中,可以分别对背景视频帧序列和前景视频帧序列添加滤镜,得到前景和背景风格不一致的视频,丰富了目标视频的显示效果,无需采用专业的视频编辑处理软件,提高了用户操作的便捷性。
在其他实施例中,在对背景视频帧序列和前景视频帧序列进行编辑的过程中,可以对背景视频帧序列和/或前景视频帧序列增加特效,以此丰富目标视频的视频内容。
例如,上述特性可以是旋转特效,旋转前景视频帧序列中的人物主体;上述特性也可以是缩放特效,对前景视频帧序列中的人物主体进行放大或缩小。
在其他实施例中,在对背景视频帧序列和前景视频帧序列进行编辑的过程中,可以对背景视频帧序列和/或前景视频帧序列增加字幕,并可以自定义设置字幕内容和字幕位置,以此丰富目标视频的视频内容。
为便于理解,请参阅图3,图3本申请实施例提供的视频处理方法的应用场景图之四,图3所示的场景为对背景视频帧序列进行编辑。如图3所示,在背景视频帧序列显示区域的上方显示有“倍速调整”、“滤镜”和“字幕”这三个视频编辑控件,用户可以点击“倍速调整”控件,调整背景视频帧序列对应的第二播放帧率;用户可以点击“滤镜”控件增加滤镜效果;用户可以点击“字幕”控件在背景视频帧序列中自定义设置字幕。
本实施例中,通过调整背景视频帧序列对应的第一播放帧率和前景视频帧序列对应的第二播放帧率,使得第一播放帧率小于第二播放帧率,得到具备穿梭类特效的目标视频。
应理解,在编辑前景视频帧序列时,除了前景视频帧序列中的人物部分,其他部分都属于透明图层,因此可以将前景视频帧序列中的人物部分叠加至背景视频帧序列,而不会造成背景视频帧序列中图层的遮挡。
可选地,所述对所述前景视频帧序列和所述背景视频帧序列进行编辑处理,得到目标视频,包括:
对所述前景视频帧序列和所述背景视频帧序列进行编辑处理,得到第一前景视频帧序列和第一背景视频帧序列;
对所述第一前景视频帧序列和所述第一背景视频帧序列进行时间对齐处理,得到第一目标前景视频帧序列和第一目标背景视频帧序列;
对所述第一目标前景视频帧序列和所述第一目标背景视频帧序列进行视频合成,得到所述目标视频。
本实施例中,在对前景视频帧序列进行编辑处理后,得到第一前景视频帧序列;对背景视频帧序列进行编辑处理后,得到第一背景视频帧序列。若目标视频为穿梭类特效视频,则第一前景视频帧序列对应的第一时长大于第一背景视频帧序列对应的第二时长。
这种情况下,对第一前景视频帧序列和第一背景视频帧序列进行时间对齐处理,得到第一目标前景视频帧序列和第一目标背景视频帧序列,使得第一目标前景视频帧序列对应的时长和第一目标背景视频帧序列对应的时长相同。
例如,第一前景视频帧序列对应的第一时长为60秒,第一背景视频帧序列对应的第二时长对应的第二时长为30秒。这种情况下,可以将部分第一前景视频帧序列确定为第一目标视频帧序列,第一目标视频帧序列对应的时长为30秒。将第一目标视频帧序列与第一背景视频帧序列进行视频合成,得到目标视频,且目标视频对应的时长为30秒。
本实施例中,对第一前景视频帧序列和第一背景视频帧序列进行时间对齐处理,得到时长相同的第一目标前景视频帧序列和第一目标背景视频帧序列,进一步地,对第一目标前景视频帧序列和第一目标背景视频帧序列进行视频合成,得到具备穿梭类特性的目标视频。
请参阅图4,图4是本申请实施例提供的视频处理方法的应用场景图之五。如图4所示,将第一目标前景视频帧序列和第一目标背景视频帧序列合成后得到目标视频对应的时长为30秒,且目标视频显示有人物和场景。
本实施例中,将包含人物主体的前景视频帧序列的每个图层,与包含背景的背景视频帧序列的每个图层在时间戳相同的位置上进行重叠,由于前景视频帧序列中除人物主体之外的其他图层为透明的,因此将前景视频帧序列的每个图层与背景视频帧序列的每个图层按照原像素尺寸重叠之后,可以得到一个显示有人物和场景的目标视频。经过预览播放确认后,可对目标视频进行保存和导出。
在其他实施例中,得到目标视频后,在目标视频的编辑界面显示有分享弹窗,分享弹窗显示有电子设备已安装应用的应用图标,用户可以通过点击分享弹窗中目标应用对应的应用图标,将目标视频快速地分享至目标应用。
在其他实施例中,用户在预览视频之后,可以通过触控“保存”控件和“导出新视频”控件,将目标视频导出。同样的,用户也可以再次对前景视频帧序列和背景视频帧序列进行编辑,然后再保存和导出目标视频。
本实施例将复杂的电影特效场景制作简化为可以“一键式”编辑的方式,只需要用户提供相应的视频内容,就可以指导用户在电子设备上完成“时空穿梭”式的电影大片制作特效,大大降低了特效视频的制作门槛,提高了视频处理的趣味性,同时在编辑中可以提供电影风格的滤镜,提高了视频的显示效果。
为便于理解整体的技术方案,请参阅图5。如图5所示,用户使用电子设备拍摄得到录制视频,进入编辑界面对录制视频进行前后景分割,也就是图像分割,得到前景视频帧序列和背景视频帧序列;进入前景视频帧序列对应的编辑界面,对前景视频帧序列进行编辑,得到第一前景视频帧序列;进入背景视频帧序列对应的编辑界面,对背景视频帧序列进行编辑,得到第一背景视频帧序列;分别调整第一前景视频帧序列和第一背景视频帧序列的时间线,得到第一目标前景视频帧序列和第一目标背景视频帧序列;对第一目标前景视频帧序列和第一目标背景视频帧序列进行视频合成,得到目标视频;保存目标视频,并分享目标视频至目标应用。
可选地,所述方法,还包括:
显示至少一个操作指引标识;
接收用户对所述至少一个操作指引标识中的目标操作指引标识的第二输入;
响应于所述第二输入,执行所述目标操作指引标识指示的视频编辑步骤。
本实施例中,还可以在编辑界面显示操作指引标识,该操作指引标识的数量至少为一个,且每个操作指引标识用于指示一个视频编辑步骤。
本实施例中,在接收到用户对目标操作指引标识的第二输入的情况下,执行该目标操作指引标识指示的视频编辑步骤。其中,第二输入可以为:用户对目标操作指引标识的点击输入,或者为用户输入的语音指令,或者为用户输入的特定手势,具体的可以根据实际使用需求确定,本申请实施例对此不作限定。
本实施例中,在编辑界面显示有操作指引标识,在接收到用户对该操作指引标识的第二输入的情况下,执行该操作指引标识指示的视频编辑步骤,操作指引标识可以指引不熟悉操作的用户进行视频编辑。
该操作指令标识可以以悬浮窗的方式显示,悬浮窗包括箭头和文字,通过箭头指引用户点击相应的控件,通过文字表征该控件的作用。
例如,操作指令标识可以指引用户点击“智能前后景分割”控件,实现对录制视频的图像分割,得到前景视频帧序列和背景视频帧序列。同时,在图像分割过程中,通过悬浮窗显示进度条,该进度条表征图像分割进度,在图像分割完成后,在悬浮窗显示提醒信息“已分割完成”。如上所述,在对视频进行录制的过程中,电子设备已经在后台同步进行图像分割,因此上述图像分割的耗时较短。
需要说明的是,本申请实施例提供的视频处理方法,执行主体可以为视频处理装置,或者该视频处理装置中的用于执行视频处理方法的控制模块。本申请实施例中以视频处理装置执行视频处理方法为例,说明本申请实施例提供的视频处理装置。
如图6所示,视频处理装置200包括:
分割模块201,用于在视频的录制过程中,对摄像头采集的视频帧序列进行图像分割处理,得到前景视频帧序列和背景视频帧序列;
编辑模块202,用于对所述前景视频帧序列和所述背景视频帧序列进行编辑处理,得到目标视频。
本实施例中,在视频的录制过程中,对摄像头采集的视频帧序列进行图像分割处理,得到前景视频帧序列和背景视频帧序列;对前景视频帧序列和背景视频帧序列进行编辑处理,得到目标视频。上述对视频录制得到目标视频的过程中,无需使用专门的剪辑工具进行繁琐的剪辑即可制作得到特效视频,降低了制作特效视频的复杂度,使得特效视频的制作更为便捷。本申请实施例还可以增加用户进行视频创作的趣味性,且操作简单,制作成本低。
可选地,所述视频处理装置200,还包括:
第一显示模块,用于在拍摄预览界面中显示拍摄预览图像;
获取模块,用于获取所述拍摄预览图像中的目标对象对应的目标区域;
所述分割模块201,具体用于:
基于所述目标区域,对摄像头采集的视频帧序列进行图像分割处理。
本实施例中,确定拍摄预览图像中的目标对象,以此将摄像头采集的视频帧序列分割为背景视频帧序列和包括目标对象的前景视频帧序列。
可选地,所述视频处理装置200,还包括:
第二显示模块,用于显示第一窗口和第二窗口。
本实施例中,设置第一窗口显示前景视频帧序列,设置第二窗口显示背景视频帧序列,用户可以对第一窗口或第二窗口执行触控操作,以编辑相应的视频帧序列,提高了用户操作的便捷性。
可选地,所述视频处理装置200,还包括:
第一接收模块,用于接收用户对目标窗口的第一输入;
第三显示模块,用于响应于所述第一输入,显示视频编辑控件。
本实施例中,基于用户的第一输入,显示视频编辑控件,进一步地,用户可以通过视频编辑控件对视频帧序列进行编辑,以此提高了用户操作的便捷。
可选地,所述编辑模块202,具体用于:
调节所述背景视频帧序列的播放帧率。
本实施例中,可以调整背景视频帧序列对应的第一播放帧率和/或前景视频帧序列对应的第二播放帧率,使得第一播放帧率小于第二播放帧率,这样,目标视频中背景部分的播放帧率大于人物部分的播放帧率,实现穿梭类特效视频的显示效果。
可选地,所述编辑模块202,还具体用于:
对所述前景视频帧序列和所述背景视频帧序列进行编辑处理,得到第一前景视频帧序列和第一背景视频帧序列;
对所述第一前景视频帧序列和所述第一背景视频帧序列进行时间对齐处理,得到第一目标前景视频帧序列和第一目标背景视频帧序列;
对所述第一目标前景视频帧序列和所述第一目标背景视频帧序列进行视频合成,得到所述目标视频。
本实施例中,对第一前景视频帧序列和第一背景视频帧序列进行时间对齐处理,得到时长相同的第一目标前景视频帧序列和第一目标背景视频帧序列,进一步地,对第一目标前景视频帧序列和第一目标背景视频帧序列进行视频合成,得到具备穿梭类特性的目标视频。
可选地,所述视频处理装置200,还包括:
第四显示模块,用于显示至少一个操作指引标识;
第二接收模块,用于接收用户对所述至少一个操作指引标识中的目标操作指引标识的第二输入;
处理模块,用于响应于所述第二输入,执行所述目标操作指引标识指示的视频编辑步骤。
本实施例中,在编辑界面显示有操作指引标识,在接收到用户对该操作指引标识的第二输入的情况下,执行该操作指引标识指示的视频编辑步骤,操作指引标识可以指引不熟悉操作的用户进行视频编辑。
本申请实施例中的视频处理装置可以是装置,也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备,也可以为非移动电子设备。示例性的,移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personaldigital assistant,PDA)等,非移动电子设备可以为服务器、网络附属存储器(NetworkAttached Storage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的视频处理装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的视频处理装置能够实现图1方法实施例实现的各个过程,为避免重复,这里不再赘述。
可选地,如图7所示,本申请实施例还提供一种电子设备300,包括处理器301,存储器302,存储在存储器302上并可在所述处理器301上运行的程序或指令,该程序或指令被处理器301执行时实现上述视频处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图8为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备1000包括但不限于:射频单元1001、网络模块1002、音频输出单元1003、输入单元1004、传感器1005、显示单元1006、用户输入单元1007、接口单元1008、存储器1009、以及处理器1010等部件。
本领域技术人员可以理解,电子设备1000还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器1010逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图8中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,处理器1010,用于在视频的录制过程中,对摄像头采集的视频帧序列进行图像分割处理,得到前景视频帧序列和背景视频帧序列;
对所述前景视频帧序列和所述背景视频帧序列进行编辑处理,得到目标视频。
本实施例中,在视频的录制过程中,对摄像头采集的视频帧序列进行图像分割处理,得到前景视频帧序列和背景视频帧序列;对前景视频帧序列和背景视频帧序列进行编辑处理,得到目标视频。上述对视频录制得到目标视频的过程中,无需使用专门的剪辑工具进行繁琐的剪辑即可制作得到特效视频,降低了制作特效视频的复杂度,使得特效视频的制作更为便捷。本申请实施例还可以增加用户进行视频创作的趣味性,且操作简单,制作成本低。
其中,显示单元1006,用于在拍摄预览界面中显示拍摄预览图像;
所述处理器1010,还用于获取所述拍摄预览图像中的目标对象对应的目标区域;
基于所述目标区域,对摄像头采集的视频帧序列进行图像分割处理。
本实施例中,确定拍摄预览图像中的目标对象,以此将摄像头采集的视频帧序列分割为背景视频帧序列和包括目标对象的前景视频帧序列。
其中,所述显示单元1006,还用于显示第一窗口和第二窗口。
本实施例中,第一窗口用于显示前景视频帧序列,第二窗口用于显示背景视频帧序列,用户可以对第一窗口或第二窗口执行触控操作,以编辑相应的视频帧序列,提高了用户操作的便捷性。
其中,所述用户输入单元1007,还用于接收用户对目标窗口的第一输入;
所述显示单元1006,还用于响应于所述第一输入,显示视频编辑控件;
本实施例中,基于用户的第一输入,显示视频编辑控件,进一步地,用户可以通过视频编辑控件对视频帧序列进行编辑,以此提高了用户操作的便捷性。
其中,所述处理器1010,还用于调节所述背景视频帧序列的播放帧率。
本实施例中,可以调整背景视频帧序列对应的第一播放帧率和/或前景视频帧序列对应的第二播放帧率,使得第一播放帧率小于第二播放帧率,这样,目标视频中背景部分的播放帧率大于人物部分的播放帧率,实现穿梭类特效视频的显示效果。
其中,所述处理器1010,还用于对所述前景视频帧序列和所述背景视频帧序列进行编辑处理,得到第一前景视频帧序列和第一背景视频帧序列;
对所述第一前景视频帧序列和所述第一背景视频帧序列进行时间对齐处理,得到第一目标前景视频帧序列和第一目标背景视频帧序列;
对所述第一目标前景视频帧序列和所述第一目标背景视频帧序列进行视频合成,得到所述目标视频。
本实施例中,对第一前景视频帧序列和第一背景视频帧序列进行时间对齐处理,得到时长相同的第一目标前景视频帧序列和第一目标背景视频帧序列,进一步地,对第一目标前景视频帧序列和第一目标背景视频帧序列进行视频合成,得到具备穿梭类特性的目标视频。
其中,所述显示单元1006,还用于显示至少一个操作指引标识;
所述用户输入单元1007,还用于接收用户对所述至少一个操作指引标识中的目标操作指引标识的第二输入;
所述处理器1010,还用于响应于所述第二输入,执行所述目标操作指引标识指示的视频编辑步骤。
本实施例中,在编辑界面显示有操作指引标识,在接收到用户对该操作指引标识的第二输入的情况下,执行该操作指引标识指示的视频编辑步骤,操作指引标识可以指引不熟悉操作的用户进行视频编辑。
应理解的是,本申请实施例中,输入单元1004可以包括图形处理器(GraphicsProcessing Unit,GPU)10041和麦克风10042,图形处理器10041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元1006可包括显示面板10061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板10071。用户输入单元1007包括触控面板10071以及其他输入设备10072。触控面板10071,也称为触摸屏。触控面板10071可包括触摸检测装置和触摸控制器两个部分。其他输入设备10072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器1009可用于存储软件程序以及各种数据,包括但不限于应用程序和操作系统。处理器1010可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器1010中。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述视频处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述视频处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。

Claims (10)

1.一种视频处理方法,其特征在于,包括:
在视频的录制过程中,对摄像头采集的视频帧序列进行图像分割处理,得到前景视频帧序列和背景视频帧序列;
对所述前景视频帧序列和所述背景视频帧序列进行编辑处理,得到目标视频。
2.根据权利要求1所述的方法,其特征在于,所述对摄像头采集的视频帧序列进行图像分割处理之前,还包括:
在拍摄预览界面中显示拍摄预览图像;
获取所述拍摄预览图像中的目标对象对应的目标区域;
所述对摄像头采集的视频帧序列进行图像分割处理,包括:
基于所述目标区域,对摄像头采集的视频帧序列进行图像分割处理;
其中,所述前景视频帧序列中的每一个视频帧均包括所述目标区域的图像。
3.根据权利要求1所述的方法,其特征在于,所述对所述前景视频帧序列和所述背景视频帧序列进行编辑处理之前,还包括:
显示第一窗口和第二窗口,所述第一窗口包括所述前景视频帧序列,所述第二窗口包括所述背景视频帧序列。
4.根据权利要求3所述的方法,其特征在于,所述显示第一窗口和第二窗口之后,还包括:
接收用户对目标窗口的第一输入,所述目标窗口为所述第一窗口或所述第二窗口;
响应于所述第一输入,显示视频编辑控件;
其中,所述视频编辑控件用于编辑所述目标视频帧序列的视频参数信息,所述目标视频帧序列为所述前景视频帧序列或所述背景视频帧序列。
5.根据权利要求4所述的方法,其特征在于,在所述第一输入为用户对第二窗口的第一输入,且所述视频参数信息包括播放帧率信息的情况下,所述对所述前景视频帧序列和所述背景视频帧序列进行编辑处理包括:
调节所述背景视频帧序列的播放帧率,使得所述目标视频中所述背景视频帧序列的播放帧率与所述前景视频帧序列的播放帧率不同。
6.根据权利要求1所述的方法,其特征在于,所述对所述前景视频帧序列和所述背景视频帧序列进行编辑处理,得到目标视频,包括:
对所述前景视频帧序列和所述背景视频帧序列进行编辑处理,得到第一前景视频帧序列和第一背景视频帧序列;
对所述第一前景视频帧序列和所述第一背景视频帧序列进行时间对齐处理,得到第一目标前景视频帧序列和第一目标背景视频帧序列;
对所述第一目标前景视频帧序列和所述第一目标背景视频帧序列进行视频合成,得到所述目标视频。
7.根据权利要求1所述的方法,其特征在于,还包括:
显示至少一个操作指引标识,每一个操作指引标识用于指示一个视频编辑步骤;
接收用户对所述至少一个操作指引标识中的目标操作指引标识的第二输入;
响应于所述第二输入,执行所述目标操作指引标识指示的视频编辑步骤。
8.一种视频处理装置,其特征在于,包括:
分割模块,用于在视频的录制过程中,对摄像头采集的视频帧序列进行图像分割处理,得到前景视频帧序列和背景视频帧序列;
编辑模块,用于对所述前景视频帧序列和所述背景视频帧序列进行编辑处理,得到目标视频。
9.一种电子设备,其特征在于,包括处理器,存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求1-7中任一项所述的视频处理方法的步骤。
10.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求1-7中任一项所述的视频处理方法的步骤。
CN202111134141.9A 2021-09-27 2021-09-27 视频处理方法、装置、电子设备及存储介质 Pending CN113873319A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111134141.9A CN113873319A (zh) 2021-09-27 2021-09-27 视频处理方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111134141.9A CN113873319A (zh) 2021-09-27 2021-09-27 视频处理方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN113873319A true CN113873319A (zh) 2021-12-31

Family

ID=78991030

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111134141.9A Pending CN113873319A (zh) 2021-09-27 2021-09-27 视频处理方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN113873319A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114466232A (zh) * 2022-01-29 2022-05-10 维沃移动通信有限公司 视频处理方法、装置、电子设备和介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107592488A (zh) * 2017-09-30 2018-01-16 联想(北京)有限公司 一种视频数据处理方法及电子设备
CN108900771A (zh) * 2018-07-19 2018-11-27 北京微播视界科技有限公司 一种视频处理方法、装置、终端设备及存储介质
US10388322B1 (en) * 2018-10-29 2019-08-20 Henry M. Pena Real time video special effects system and method
CN110290425A (zh) * 2019-07-29 2019-09-27 腾讯科技(深圳)有限公司 一种视频处理方法、装置及存储介质
CN112653920A (zh) * 2020-12-18 2021-04-13 北京字跳网络技术有限公司 视频处理方法、装置、设备、存储介质及计算机程序产品
CN112887583A (zh) * 2019-11-30 2021-06-01 华为技术有限公司 一种拍摄方法及电子设备
CN113157181A (zh) * 2021-03-30 2021-07-23 北京达佳互联信息技术有限公司 操作引导方法及装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107592488A (zh) * 2017-09-30 2018-01-16 联想(北京)有限公司 一种视频数据处理方法及电子设备
CN108900771A (zh) * 2018-07-19 2018-11-27 北京微播视界科技有限公司 一种视频处理方法、装置、终端设备及存储介质
US10388322B1 (en) * 2018-10-29 2019-08-20 Henry M. Pena Real time video special effects system and method
CN110290425A (zh) * 2019-07-29 2019-09-27 腾讯科技(深圳)有限公司 一种视频处理方法、装置及存储介质
CN112887583A (zh) * 2019-11-30 2021-06-01 华为技术有限公司 一种拍摄方法及电子设备
CN112653920A (zh) * 2020-12-18 2021-04-13 北京字跳网络技术有限公司 视频处理方法、装置、设备、存储介质及计算机程序产品
CN113157181A (zh) * 2021-03-30 2021-07-23 北京达佳互联信息技术有限公司 操作引导方法及装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114466232A (zh) * 2022-01-29 2022-05-10 维沃移动通信有限公司 视频处理方法、装置、电子设备和介质

Similar Documents

Publication Publication Date Title
US20130300750A1 (en) Method, apparatus and computer program product for generating animated images
CN112714253B (zh) 视频录制方法、装置、电子设备和可读存储介质
CN112565868B (zh) 视频播放方法、装置及电子设备
WO2023151611A1 (zh) 视频录制方法、装置和电子设备
CN112672061B (zh) 视频拍摄方法、装置、电子设备及介质
WO2023134583A1 (zh) 视频录制方法、装置及电子设备
CN112887794B (zh) 视频剪辑方法及装置
CN112906553B (zh) 图像处理方法、装置、设备及介质
CN113794923A (zh) 视频处理方法、装置、电子设备及可读存储介质
CN114466232A (zh) 视频处理方法、装置、电子设备和介质
CN112822394B (zh) 显示控制方法、装置、电子设备及可读存储介质
CN112711368B (zh) 操作指导方法、装置及电子设备
CN113873319A (zh) 视频处理方法、装置、电子设备及存储介质
CN112181252A (zh) 截屏方法、装置及电子设备
CN113852757B (zh) 视频处理方法、装置、设备和存储介质
CN111757177B (zh) 视频裁剪方法及装置
CN114025237A (zh) 视频生成方法、装置和电子设备
CN114237800A (zh) 文件处理方法、文件处理装置、电子设备及介质
CN113923392A (zh) 视频录制方法、视频录制装置和电子设备
US20180074688A1 (en) Device, method and computer program product for creating viewable content on an interactive display
CN114125297A (zh) 视频拍摄方法、装置、电子设备及存储介质
CN113852756A (zh) 图像获取方法、装置、设备和存储介质
CN113014799A (zh) 图像显示方法、装置和电子设备
CN110662104B (zh) 视频拖动条生成方法、装置、电子设备及存储介质
CN117714774B (zh) 视频特效封面的制作方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination