CN114466145A - 视频处理方法、装置、设备和存储介质 - Google Patents
视频处理方法、装置、设备和存储介质 Download PDFInfo
- Publication number
- CN114466145A CN114466145A CN202210114002.8A CN202210114002A CN114466145A CN 114466145 A CN114466145 A CN 114466145A CN 202210114002 A CN202210114002 A CN 202210114002A CN 114466145 A CN114466145 A CN 114466145A
- Authority
- CN
- China
- Prior art keywords
- segment
- video
- synthesis
- parameter
- special effect
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 20
- 230000015572 biosynthetic process Effects 0.000 claims abstract description 351
- 238000003786 synthesis reaction Methods 0.000 claims abstract description 351
- 230000000694 effects Effects 0.000 claims abstract description 276
- 239000012634 fragment Substances 0.000 claims abstract description 108
- 238000000034 method Methods 0.000 claims abstract description 46
- 238000012545 processing Methods 0.000 claims description 142
- 239000002131 composite material Substances 0.000 claims description 27
- 238000004590 computer program Methods 0.000 claims description 10
- 238000013507 mapping Methods 0.000 claims description 8
- 239000000284 extract Substances 0.000 claims description 5
- 230000008569 process Effects 0.000 abstract description 26
- 230000003044 adaptive effect Effects 0.000 abstract description 9
- 238000010586 diagram Methods 0.000 description 13
- 239000000203 mixture Substances 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 230000002194 synthesizing effect Effects 0.000 description 9
- 230000002093 peripheral effect Effects 0.000 description 8
- 230000006854 communication Effects 0.000 description 7
- 230000003068 static effect Effects 0.000 description 7
- 238000006243 chemical reaction Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000004519 manufacturing process Methods 0.000 description 3
- 239000013307 optical fiber Substances 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000047 product Substances 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/265—Mixing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Studio Circuits (AREA)
- Image Processing (AREA)
Abstract
本公开涉及一种视频处理方法、装置、设备和存储介质。其中,该方法包括:获取适配视频采集设备处于第一方向时的设备屏幕的待处理视频和待处理视频对应的至少一个片段生成参数;基于片段生成参数,从初始片段合成参数中确定出目标片段合成参数,并从待处理视频中提取目标片段合成参数对应的原始视频片段;基于原始视频片段和目标片段合成参数,生成适配视频播放设备处于第二方向时的设备屏幕的目标合成视频;其中,第一方向和第二方向呈预设角度。根据本公开实施例,能够在变换视频播放方向的视频合成过程中,额外传输片段生成参数来动态调整片段合成参数,获得无背景内容的目标合成视频,提高合成视频的内容连贯性和视频播放效果。
Description
技术领域
本公开涉及视频技术领域,尤其涉及一种视频处理方法、装置、设备和存储介质。
背景技术
随着互联网技术的发展和移动终端的普及,视频在人们的生活中逐渐占据主要地位。
在人们录制视频和播放视频的过程中,存在视频方向变换的需求。例如,录制视频时,使移动终端处于竖屏状态,得到竖屏状态下的视频;而观看视频时,想要在移动终端处于横屏状态时播放视频。为了更好的视频播放效果,有必要对视频内容进行方向变换。
发明内容
为了解决上述技术问题,本公开提供了一种视频处理方法、装置、设备和存储介质。
第一方面,本公开提供了一种视频处理方法,该方法包括:
获取待处理视频和所述待处理视频对应的至少一个片段生成参数;其中,所述待处理视频为适配视频采集设备处于第一方向时的设备屏幕的视频;
基于所述片段生成参数,从初始片段合成参数中确定出至少一个目标片段合成参数,并从所述待处理视频中提取所述目标片段合成参数对应的原始视频片段;
基于所述原始视频片段和所述目标片段合成参数,生成目标合成视频;其中,所述目标合成视频为适配视频播放设备处于第二方向时的设备屏幕的视频;所述第一方向和所述第二方向呈预设角度。
第二方面,本公开提供了一种视频处理装置,该装置包括:
片段生成参数获取模块,用于获取待处理视频和所述待处理视频对应的至少一个片段生成参数;其中,所述待处理视频为适配视频采集设备处于第一方向时的设备屏幕的视频;
目标片段合成参数确定模块,用于基于所述片段生成参数,从初始片段合成参数中确定出目标片段合成参数,并从所述待处理视频中提取各所述目标片段合成参数对应的原始视频片段;
目标合成视频生成模块,用于基于所述原始视频片段和所述目标片段合成参数,生成目标合成视频;其中,所述目标合成视频为适配视频播放设备处于第二方向时的设备屏幕的视频;所述第一方向和所述第二方向呈预设角度。
第三方面,本公开提供了一种视频处理设备,该视频处理设备包括:
处理器;
存储器,用于存储可执行指令;
其中,处理器用于从存储器中读取可执行指令,并执行可执行指令以实现本公开任意实施例所说明的视频处理方法。
第四方面,本公开提供了一种计算机可读存储介质,该存储介质存储有计算机程序,当计算机程序被处理器执行时,使得处理器实现本公开任意实施例所说明的视频处理方法。
本公开实施例的视频处理方法、装置、设备和存储介质,在变换视频方向的视频合成过程中,除了获取适配视频采集设备处于第一方向时的设备屏幕的待处理视频外,还获取待处理视频对应的至少一个片段生成参数,并利用该片段生成参数对各初始片段合成参数进行筛选,确定出目标片段合成参数,且从待处理视频中提取目标片段合成参数对应的原始视频片段,继而基于获得的各原始视频片段和各目标片段合成参数,生成与适配视频播放设备处于第二方向时的设备屏幕的目标合成视频,能够利用待处理视频中的实际的原始视频片段来合成目标合成视频,确保将设备在第一方向状态下获得的待处理视频转换为设备在第二方向状态下播放的目标合成视频,避免目标合成视频的周边区域中因无视频内容而展示背景内容的问题,且避免目标合成视频的视频区域中因缺失视频内容而展示背景内容的问题,提高目标合成视频的内容连贯性和视频播放效果。
附图说明
结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,原件和元素不一定按照比例绘制。
图1为本公开实施例提供的一种视频处理方法的流程示意图;
图2为本公开实施例提供的一种片段生成参数和片段合成参数匹配的原理示意图;
图3为本公开实施例提供的一种拍照姿势特效拍摄界面的显示示意图;
图4为本公开实施例提供的另一种拍照姿势特效拍摄界面的显示示意图;
图5为本公开实施例提供的一种拍照姿势特效拍摄场景下第二特效叠加显示片段的显示示意图;
图6为本公开实施例提供的一种对待处理图层进行视频图层拆分的效果示意图;
图7为本公开实施例提供的一种视频处理装置的结构示意图;
图8为本公开实施例提供的一种视频处理设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例,相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。
应当理解,本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行,和/或并行执行。此外,方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
本文使用的术语“包括”及其变形是开放性包括,即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”;术语“另一实施例”表示“至少一个另外的实施例”;术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。
目前,在视频的实际应用过程中,存在变换视频内容的展示方向的需求。因为录制视频时移动终端所处的方向(即第一方向)和播放视频时移动终端所处的方向(即第二方向)不同,而移动终端在第一方向和第二方向上的长度有所不同,就会使得播放视频的过程中,缩小视频区域,而在视频的周边区域中因无视频内容而展示背景内容(如黑屏),这就会造成视频播放效果不佳的问题。
为了解决上述问题,可以根据录制视频的录制参数设置而预先设置适配第二方向的视频合成模板,该视频合成模板中为视频的周边区域预置了与视频内容有关联的替代内容。当获得录制视频后,便将该录制视频与视频合成模板进行合成处理,生成适配第二方向的合成视频。但是,该方案只是简单地将录制视频填充至视频合成模板中的视频位置,如果录制视频未按照录制参数录制,例如录制时长未达到录制参数中的录制时长,那么生成的合成视频中将会缺失部分视频内容,从而在视频区域呈现背景内容,同样会影响视频播放效果。
为了进一步解决上述问题,本公开实施例提供一种视频处理方案,以实现在获得适配电子设备处于第二方向时的设备屏幕的合成视频的过程中,除了获取电子设备处于第一方向时所得的待处理视频之外,额外获取该待处理视频的录制参数,并根据该录制参数来动态调整视频合成模板中的相关参数,进而获得无背景内容的合成视频,提高视频播放效果。
本公开实施例提供的视频处理方案,可应用于需要转换视频展示方向的场景中。例如,可以应用于转换移动终端的长边/短边所在的方向来播放视频的过程中,也可以应用于对视频进行特效处理的过程中。在本公开实施例中,该视频处理方法可以由视频处理装置来执行,该装置可以由软件和/或硬件的方式实现,该装置可以集成在具有一定的数据处理能力的视频处理设备中。该视频处理设备可以包括但不限于笔记本电脑、台式电脑、服务器或服务器集群等。
图1示出了本公开实施例提供的一种视频处理方法的流程示意图。如图1所示,该视频处理方法可以包括如下步骤:
S110、获取待处理视频和待处理视频对应的至少一个片段生成参数。
其中,待处理视频为适配视频采集设备处于第一方向时的设备屏幕的视频。该视频采集设备是指采集视频内容的移动终端。该第一方向是指移动终端的长边所在的方向,例如可以是移动终端的长边处于竖直状态时的方向,即移动终端处于竖屏状态时的方向;又如可以是是移动终端的长边处于水平状态时的方向,即移动终端处于横屏状态时的方向。片段生成参数是指获得待处理视频中的视频片段的参数,例如可以是录制片段时长、录制片段开始条件、录制片段结束条件、录制片段间隔时长等中的至少一个。
具体地,为了解决上述利用静态视频合成模板来转换视频方向时可能出现的背景内容的问题,本公开实施例中在移动终端和视频处理的服务端所在的设备(即视频处理设备)之间的通信过程中增加了片段生成参数的传输功能。基于此,移动终端生成待处理视频后,若检测到播放该待处理视频时移动终端所处的方向(即第二方向)与获得该待处理视频时移动终端所处的方向(即第一方向)不一致,那么移动终端将该待处理视频以及生成该待处理视频的至少一个片段生成参数一起发送至视频处理设备。视频处理设备便可获得待处理视频及其对应的至少一个片段生成参数。
在一些实施例中,上述发送至视频处理设备的片段生成参数可以是待处理视频中包含的各原始视频片段对应的片段生成参数,以确保传输信息完整性。
在另一些实施例中,上述发送至视频处理设备的片段生成参数可以是各片段生成参数中的至少一部分,以使视频处理设备基于该至少部分的片段生成参数来获得完整的片段生成参数,减少信息传输的数据量。
在一示例中,当待处理视频对应有连续三个及以上的片段生成参数时,可以每间隔一个片段生成参数,传输一个片段生成参数。例如,待处理视频对应有3个片段生成参数时,移动终端可将第1个和第3个片段生成参数传输至视频处理设备。
在一示例中,当移动终端确定待处理视频中存在缺失的原始视频片段时,可将该缺失的原始视频片段对应的片段生成参数传输至视频处理设备。
在一些实施例中,上述生成待处理视频的过程可以是移动终端处于第一方向的状态下,直接利用摄像头、按照预先确定的拍摄模板录制得到待处理视频,此时的移动终端便为视频采集设备。
在另一些实施例中,上述生成待处理视频的过程也可以是移动终端按照预设确定的视频制作模板,利用已经录制好的、在视频采集设备处于第一方向的状态下所得的至少一个原始视频片段合成得到待处理视频。
在一些实施例中,上述待处理视频可以是不包含特效的原始视频。
在另一些实施例中,上述待处理视频可以是包含特效效果的特效视频。在该实施例的情况下,上述录制得到待处理视频的实施例中,用户选定的拍摄模板中包含特效内容;而上述合成得到待处理视频的实施例中,用户选定的视频制作模板中包含特效内容。
S120、基于片段生成参数,从初始片段合成参数中确定出目标片段合成参数,并从待处理视频中提取目标片段合成参数对应的原始视频片段。
其中,初始片段合成参数是指预先设置的、用于合成视频时所依据的参数,其是视频合成模板中初始设定的参数,例如可以是合成片段时长、合成片段开始条件、合成片段结束条件、合成片段间隔时长等中的至少一个。目标片段合成参数是最终用于视频合成的参数,其是各初始片段合成参数的其中一个。原始视频片段是指待处理视频中用户通过移动终端输入的一段视频内容,其不包含特效内容。根据上述待处理视频的生成方式的说明,原始视频片段可以是通过摄像头拍摄所得,也可以是从存储介质中读取得到,还可以是从网络端拉取得到。
具体地,根据上述说明,视频处理设备中预先设置了视频合成模板,该视频合成模板中包含的各初始片段合成参数与上述拍摄模板或视频制作模板中包含的初始的各片段生成参数一致。在待处理视频不是严格按照拍摄模板或视频制作模板而获得的情况下,视频处理设备不能直接按照各初始片段合成参数对待处理视频进行视频长宽比转换的视频合成处理。此时,视频处理设备可以根据S110中获得的片段生成参数来获得待处理视频对应的完整的各片段生成参数,然后再利用完整的各片段生成参数对各初始片段合成参数进行筛选,确定出对应有视频内容的各目标片段合成参数。然后,根据各目标片段合成参数对待处理视频进行视频内容的提取,获得各原始视频片段。
上述根据S110中获得的片段生成参数来获得待处理视频对应的完整的各片段生成参数可实现为:视频处理设备根据其获取的片段生成参数及其所属的参数类型(如缺失视频片段对应的缺失参数类型、连续视频片段对应的连续参数类型等)确定待处理视频对应的各片段生成参数。
在一示例中,若获取的片段生成参数的参数类型为连续参数类型,视频处理设备可确定待处理视频对应的各片段生成参数是连续三个及以上的。此时,视频处理设备根据获取的片段生成参数的片段起始条件和片段结束条件来补全未传输的片段生成参数。例如,获取到第1个片段生成参数和第3个片段生成参数,那么可根据这两个片段生成参数的片段起始条件和片段结束条件推测出第2个片段生成参数。
在另一示例中,若获取的片段生成参数的参数类型为缺失参数类型,那么视频处理设备可将初始的各片段生成参数中除了上述获取到的片段生成参数之外的各剩余的片段生成参数确定为待处理视频对应的完整的各片段生成参数。
在又一示例中,若获取的片段生成参数未对应有参数类型,可认为获取到的片段生成参数便为待处理视频对应的完整的各片段生成参数。
需要说明的是,如果待处理视频为使用特效道具所得的视频,且待处理视频中包含多个特效叠加的展示结果的第一特效叠加显示片段,那么,各片段生成参数中会包含该第一特效叠加显示片段对应的片段生成参数,筛选所得的目标片段合成参数中也包含该第一特效叠加显示片段对应的片段合成参数。相应地,提取所得的各原始视频片段中包含第一特效叠加显示片段所需的原始视频片段。
在一些实施例中,上述基于片段生成参数,从初始片段合成参数中确定出目标片段合成参数包括:将初始片段合成参数与片段生成参数进行匹配,并将匹配成功的初始片段合成参数确定为目标片段合成参数。
具体地,对于任一个初始片段合成参数,视频处理设备将该初始片段合成参数与上述确定的每个片段生成参数进行匹配。如判断初始片段合成参数中的合成片段开始条件与片段生成参数中的录制片段开始条件是否一致,且判断初始片段合成参数中的合成片段结束条件与片段生成参数中的录制片段结束条件是否一致。如果均判断一致,则认为匹配一致;如果两者中有一个或两个判断不一致,则认为匹配不一致。根据上述说明,如果存在一个片段生成参数与该初始片段合成参数匹配一致,那么就将该初始片段合成参数确定为目标片段合成参数。
按照上述过程,可从视频处理设备确定出的各初始片段合成参数中确定出至少一个目标片段合成参数,作为后续适配视频播放设备处于第二方向时的设备屏幕的目标合成视频的合成依据。这样便可实现根据待处理视频的各片段生成参数动态调整片段合成参数,避免没有对应视频内容的初始片段合成参数参与后续视频合成过程,从而引入背景内容的问题,为后续视频合成提供更加灵活、准确的数据基础,从而提高后续所得的目标合成视频在播放过程中的视频内容的连贯性,提高视频播放效果。
以片段生成参数中至少包含片段生成开始时间和片段生成结束时间,且片段合成参数中至少包含片段合成开始时间和片段合成结束时间为例,对上述确定目标片段合成参数的过程进行说明。
如图2所示,拍摄模板或视频制作模板中包含的初始的各片段生成参数分别是片段生成参数a 211、片段生成参数b 212、片段生成参数c 213、片段生成参数d 214、片段生成参数e 215和片段生成参数f216;各初始片段合成参数分别是初始片段合成参数a 221、初始片段合成参数b 222、初始片段合成参数c 223、初始片段合成参数d 224、初始片段合成参数e 225和初始片段合成参数f 226。在视频处理设备确定出的待处理视频对应的各片段生成参数相对于初始的各片段生成参数缺失片段生成参数e 215和片段生成参数f 216(图2中以灰色填充示例)的情况下,视频处理设备经过上述匹配过程,可将各初始片段合成参数动态调整为不包含初始片段合成参数c 223和初始片段合成参数f 226(图2中以灰色填充示例)的各目标片段合成参数。
在一些实施例中,各初始片段合成参数通过如下方式确定:基于待处理视频对应的目标拍摄模板标识和预设映射关系,确定目标合成模板标识;基于目标合成模板标识确定各初始片段合成参数。
其中,预设映射关系用于记录拍摄模板标识和合成模板标识之间的对应关系。
具体地,本实施例中,视频处理设备中预先维护有拍摄模板标识和合成模板标识之间的映射关系,并且每个拍摄模板标识对应有一个拍摄模板以及该拍摄模板对应的初始的各片段生成参数,每个合成模板标识对应于一个拍摄模板标识、一个合成模板以及该合成模板对应的各初始片段合成参数。在此基础上,当用户选择一个拍摄模板时,移动终端可获得该拍摄模板的拍摄模板标识(即目标拍摄模板标识)。然后,移动终端在向视频处理设备发送待处理视频及其对应的片段生成参数的同时,将该目标拍摄模板标识一起发送至视频处理设备。或者,视频处理设备在确定目标片段合成参数之前,查询移动终端,以获得该目标拍摄模板标识。之后,视频处理设备便可以根据该目标拍摄模板标识查询上述预设映射关系,获得目标合成模板标识,进而根据该目标合成模板标识来获得各初始片段合成参数。这样可以根据拍摄模板来调整各初始片段合成参数,一定程度上提高各初始片段合成参数的调整的灵活性。
在另一些实施例中,各初始片段合成参数通过如下方式确定:基于输入的片段拍摄参数,确定各初始片段合成参数。
具体地,本实施例中,用户可以在拍摄之前预先自行设置各片段的拍摄参数(即片段拍摄参数),移动终端便可获得各片段拍摄参数,即获得用户输入的初始的各片段生成参数。然后,移动终端将用户输入的各片段拍摄参数发送至视频处理设备,或者视频处理设备查询移动终端来获得用户输入的各片段拍摄参数。之后,视频处理设备依据用户输入的各片段拍摄参数来确定对应的各初始片段合成参数。这样可以使得用户自行设置拍摄参数,从而更加灵活地确定各初始片段合成参数。
例如,用户输入的各片段拍摄参数可以为各拍摄间隔时长,那么视频处理设备可基于各拍摄间隔时长来推算生成各初始片段合成参数中的每个片段的片段合成开始时间和片段合成结束时间。
再如,用户输入的各片段拍摄参数可以是各片段的拍摄时刻,那么视频处理设备可基于片段的拍摄时刻来确定各初始片段合成参数中的每个片段的片段合成开始时间和片段合成结束时间。
又如,用户输入的各片段拍摄参数可以是拍摄总时长和拍摄片段数量,那么视频处理设备可基于拍摄总时长和拍摄片段数量来计算得到各初始片段合成参数中的每个片段的片段合成开始时间和片段合成结束时间。
S130、基于原始视频片段和目标片段合成参数,生成目标合成视频。
其中,目标合成视频为适配视频播放设备处于第二方向时的设备屏幕的视频。该视频播放设备为播放目标合成视频的移动终端,其可以与视频采集设备为同一设备,也可以与视频采集设备为不同的设备。第二方向是指移动终端的长边所在的方向,且该第二方向和上述第一方向之间呈预设角度。该预设角度可以是预先设置的一个角度值。当第一方向和第二方向之间的夹角大于或等于预设角度时,待处理视频的视频长宽比就要改变,以适配视频播放设备的屏幕。示例性地,预设角度为90°,即第二方向与第一方向垂直。例如,当第一方向为视频采集设备的长边处于竖直状态的方向时,第二方向为视频播放设备的长边处于水平状态时的方向;反之,当第一方向为视频采集设备的长边处于水平状态的方向时,第二方向为视频播放设备的长边处于竖直状态时的方向。
具体地,按照上述所得的各目标片段合成参数的时间顺序,按序将各原始视频片段与视频合成模板进行合成,便可得到目标合成视频。
当待处理视频为使用特效道具所得的视频时,视频合成模板中包含上述使用的特效道具的部分,并且预先将该特效道具处理成为适配视频播放设备处于第二方向时的设备屏幕的特效道具。这样,目标合成视频便是包含同样的特效道具的合成视频。之后,视频处理设备将该目标合成视频发送至视频播放设备进行播放。
本公开提供的上述视频处理方法,在变换视频方向的视频合成过程中,除了获取适配视频采集设备处于第一方向时的设备屏幕的待处理视频外,还获取待处理视频对应的至少一个片段生成参数,并利用该片段生成参数对各初始片段合成参数进行筛选,确定出目标片段合成参数,且从待处理视频中提取目标片段合成参数对应的原始视频片段,继而基于获得的各原始视频片段和各目标片段合成参数,生成与适配视频播放设备处于第二方向时的设备屏幕的目标合成视频,能够利用待处理视频中的实际的原始视频片段来合成目标合成视频,确保将设备在第一方向状态下获得的待处理视频转换为设备在第二方向状态下播放的目标合成视频,避免目标合成视频的周边区域中因无视频内容而展示背景内容的问题,且避免目标合成视频的视频区域中因缺失视频内容而展示背景内容的问题,提高目标合成视频的内容连贯性和视频播放效果。
在本公开实施例中,待处理视频可以为使用特效道具所得的视频,并且待处理视频中包含第一特效叠加显示片段。该第一特效叠加显示片段是指对某一使用特效道具的视频片段进行特效叠加而生成的一个特效集合的片段。
以拍照姿势特效拍摄为例,参见图3,在某一片段的拍摄过程中,视频采集设备所呈现的内容主要包含视频输入区域310中的用户输入的视频内容(人物视频)、视频输入区域310中随着计时器动态切换的不同的人物拍照姿势图案311、视频输入区域310的周边区域320中的动态特效模板内容。该动态特效模板内容包括“拍照达人就是你”的动态文字321、随着系统时间而动态计时的计时器322以及其他动态图案(图3中以竖条纹填充示例)。针对该片段拍摄所得的视频可称为特效生成片段。该特效生成片段对应的视频合成的处理结果称为特效合成片段。
在特效生成片段拍摄结束时,视频采集设备所呈现的内容如图4所示。参见图4,在视频输入区域410中同样呈现用户输入的视频内容(人物视频),但是在视频输入区域410的周边区域420中所呈现的内容,除了上述动态特效模板内容之外,还包含用户根据切换到的人物拍照姿势图案411而做出的拍照姿势的人物截图421。因上述片段拍摄结束时产生的上述拍摄内容的片段中除了包含拍摄过程中的各种特效道具之外,还叠加了人物截图,故可称其为第一特效叠加显示片段。对第一特效叠加显示片段进行视频合成处理后所得的视频片段可称为第二特效叠加显示片段。
上述第一特效叠加显示片段可以在一个特效生成片段完成后即时生成,也可以是在所有的特效生成片段完成后再生成。无论第一特效叠加显示片段何时生成,其均需要从对应的特效生成片段的结尾部分提取一定时长的原始视频片段,作为特效叠加的输入数据。
在上述情况下,S130可以实现为如下步骤A~步骤C:
步骤A、针对携带特效处理标识的每个初始片段合成参数,基于该初始片段合成参数对应的原始视频片段和/或候选特效图像,生成第二特效叠加显示片段。
其中,特效处理标识是预先设置的、表征某一片段为特效叠加显示片段的标识。候选特效图像是指预先设置的特效图像,其作为合成视频中备选的特效图像,例如可以是图3和图4中所示的人物拍照姿势图案。
具体地,根据上述说明,第一特效叠加显示片段和不包含特效叠加效果的特效生成片段所包含的内容是不同的,那么在视频合成过程中,对上述两种片段的合成处理也不同。所以,视频处理设备在各初始片段合成参数中,为第一特效叠加显示片段对应的初始片段合成参数设置了特效处理标识。另外,如果待处理视频中缺失了某一片段,那么各目标片段合成参数中便不包含该片段对应的初始片段合成参数。但是,因包含特效道具的拍摄模板的设置,第一特效叠加显示片段不能因原始视频片段的缺失而缺失。例如,包含特效道具的拍摄模板中总共包含3个原始视频片段及其对应的3个第一特效叠加显示片段,而用户上传的待处理视频中只包含了2个原始视频片段。在该情况下,视频处理设备只需合成输出2个特效合成片段,但仍需合成输出3个第二特效叠加显示片段。所以,在已经确定了各目标片段生成参数的情况下,视频处理设备在进行视频合成处理的过程中,仍然需要遍历各初始片段合成参数。
具体实施时,在对待处理视频进行合成处理的过程中,针对每个初始片段合成参数,视频处理设备首先要判断该初始片段合成参数是否携带了特效处理标识。如果判断结果是该初始片段合成参数携带了特效处理标识,那么视频处理设备再判断该初始片段合成参数是否被确定为目标片段合成参数,即判断初始片段合成参数是否对应有原始视频片段。如果判断结果是有对应的原始视频片段,那么视频处理设备根据该原始视频片段、以及包含相应的特效道具的视频合成模板中该初始片段合成参数对应的动态特效模板内容(即特效模板片段)来生成第二特效叠加显示片段。如果判断结果是该初始片段合成参数没有对应的原始视频片段,那么视频处理设备根据该初始片段合成参数对应的候选特效图像和特效模板片段来生成第二特效叠加显示片段。
例如,对于图4所示的竖屏拍摄的待处理视频,其总共包含3个原始视频片段及其对应的3个第一特效叠加显示片段,而视频采集设备仅拍摄了其中的2个原始视频片段和2个第一特效叠加显示片段。那么,参见图5,视频处理设备输出的3个第二特效叠加显示片段中,除了包含原始视频片段510、显示在原始视频片段510所在区域中的人物拍照姿势图案511和适配设备处于第二方向时的设备屏幕的特效模板片段520(如“拍照达人就是你”的动态文字521以及其他动态图案(图5中以竖条纹填充示例))之外,前两个第二特效叠加显示片段分别包含了2个原始视频片段对应的拍照姿势的人物截图5522,而第3个第二特效叠加显示片段因缺失原始视频片段而包含了候选特效图像,即人物拍照姿势图案523。
步骤B、针对未携带特效处理标识的每个目标片段合成参数,基于目标片段合成参数对应的原始视频片段和特效模板片段,生成特效合成片段。
具体地,在对待处理视频进行合成处理的过程中,针对每个初始片段合成参数,如果视频处理设备判断该初始片段合成参数未携带特效处理标识,说明该初始片段合成参数不是用于合成第二特效叠加显示片段的,而是用于合成不含特效叠加显示效果的特效合成片段的,那么视频处理设备进一步判断该初始片段合成参数是否被确定为目标片段合成参数。如果判断结果为是,说明该初始片段合成参数对应有原始视频片段。此时,视频处理设备利用该原始视频片段和该初始片段合成参数对应的特效模板片段来生成特效合成片段。如果判断结果为否,说明该初始片段合成参数没有对应的原始视频片段。此时,视频处理设备删除该初始片段合成参数,并继续进行下一个初始片段合成参数的处理。
步骤C、基于各特效合成片段和各第二特效叠加显示片段,生成目标合成视频。
具体地,视频处理设备按照各特效合成片段和各第二特效叠加显示片段的时间信息,按序合并各特效合成片段和各第二特效叠加显示片段,生成目标合成视频。
在一些实施例中,步骤A可实现为:
步骤A1、针对携带特效处理标识的每个初始合成片段参数,在确定初始合成片段参数为目标合成片段参数的情况下,在初始合成片段参数对应的目标视频图层中,基于目标合成片段参数对应的原始视频片段中的拍摄帧和特效模板图像,生成第二特效叠加显示片段。
其中,目标视频图层是指视频合成处理时携带特效处理标识的初始合成片段参数对应的视频图层。特效模板图像是指特效模板片段中,在生成特效叠加显示结果的时刻所对应的一帧图像。
示例性地,对于图3~图5中在第一/第二特效叠加显示片段中增加用户原始视频片段的静态图像(如原始视频片段的截图、候选特效图像等)的情况,特效模板图像中预置了三个用于显示静态图像的控件,在没有获得静态图像的情况下,该三个控件处于隐藏状态,在获得至少一张静态图像的情况下,显示获得的静态图像对应的控件,并在该控件中填充显示该静态图像。即特效模板图像是随着特效叠加显示片段的推进而变化的。例如,对于第一个第一特效叠加显示片段之前,特效模板图像中截图对应的位置处不显示添加截图的相关显示控件,其显示效果如图3中的周边区域320所示。对于第二个第一特效叠加显示片段之前,因已经生成了包含一张截图的第一个第一特效叠加显示片段,该特效模板图像中会增加显示第一张截图的控件,并在该控件中显示第一张截图。对于第三个第一特效叠加显示片段之前,该特效模板图像中会显示两张截图。
具体地,视频处理设备在对待处理视频进行基于设备方向转换而产生的视频长宽比转换与合成的过程中,会先将待处理视频拆分为各原始视频片段,每个原始视频片段对应于一个视频图层。对于第一特效叠加显示片段的处理,便是在其对应的目标图层中,判断其对应的初始片段合成参数是否存在对应的原始视频片段,并在存在原始视频片段时,获取该原始视频片段对应的拍摄帧,且将该拍摄帧与该初始片段合成参数对应的特效模板图像合并,按照特效模板片段的动态效果生成第二特效叠加显示片段。
步骤A2、针对携带特效处理标识的每个初始合成片段参数,在确定初始合成片段参数不为目标合成片段参数的情况下,在初始合成片段参数对应的目标视频图层中,基于初始合成片段参数对应的候选特效图像和特效模板图像,生成第二特效叠加显示片段。
具体地,对于未对应有原始视频片段的携带特效处理标识的初始合成片段参数,在目标视频图层中合并该初始合成片段参数对应的候选特效图像和特效模板图像,按照特效模板片段的动态效果生成第二特效叠加显示片段。
通过上述实施例,可以在目标视频图层中进行第二特效叠加显示片段的生成,而不额外增加视频图层,避免同一时间重叠的视频图层过多而造成冲突的问题,在确保视频长宽比变换的合成视频的视频内容连贯性和视频播放效果的基础上,降低视频合成出错率,一定程度上提高视频合成效率。
在另一些实施例中,步骤A可实现为:
步骤A0、针对携带特效处理标识的每个初始片段合成参数,基于初始合成片段参数对应的候选特效图像和特效模板片段,生成初始合成片段参数对应的候选视频图层。
具体地,本实施例中会预先为每个携带特效处理标识的初始片段合成参数创建目标视频图层和额外的视频图层(即候选视频图层)。该候选视频图层中预先根据初始合成片段参数对应的候选特效图像和特效模板片段生成候选的特效叠加显示片段。
步骤A1′、针对携带特效处理标识的每个初始片段合成参数,在确定初始合成片段参数为目标合成片段参数的情况下,在初始合成片段参数对应的目标视频图层中,基于目标合成片段参数对应的原始视频片段中的拍摄帧和特效模板图像,生成第二特效叠加显示片段,并隐藏初始合成片段参数对应的候选视频图层。
具体地,对于每个携带特效处理标识的初始片段合成参数,如果该初始片段合成参数对应有原始视频片段,那么视频处理设备在其对应的目标视频图层中合并该原始视频片段对应的拍摄帧和对应的特效模板图像,按照特效模板片段的动态效果生成第二特效叠加显示片段。此时,该初始片段合成参数对应的处于前景的候选视频图层便无用,则隐藏该候选视频图层。
步骤A2′、针对携带特效处理标识的每个初始片段合成参数,在确定初始合成片段参数不为目标合成片段参数的情况下,基于初始合成片段参数对应的候选视频图层,生成第二特效叠加显示片段。
具体地,对于每个携带特效处理标识的初始片段合成参数,如果该初始片段合成参数未对应有原始视频片段,那么视频处理设备可直接将候选视频图层中的候选的特效叠加显示片段作为该初始片段合成参数的第二特效叠加显示片段。此时,该初始片段合成参数对应的目标视频图层便无用,则隐藏该目标视频图层。
通过上述实施例,可以为每个特效叠加显示片段预置处于前景位置的候选视频图层,并根据是否有原始视频片段来隐藏或显示候选视频图像中的候选的特效叠加显示片段,能够一定程度上节省无原始视频片段情况下的视频处理流程,从而在确保视频长宽比变换的合成视频的视频内容连贯性和视频播放效果的基础上,一定程度上提高视频合成效率。
在又一些实施例中,步骤A可实现为:
步骤A0′、针对携带特效处理标识的每个初始片段合成参数,基于初始合成片段参数对应的候选特效图像,生成初始合成片段参数对应的候选图像图层。
具体地,本实施例中会预先为每个携带特效处理标识的初始片段合成参数创建目标视频图层和额外的图像图层(即候选图像图层)。该候选图像图层中预先根据初始合成片段参数对应的候选特效图像生成候选的拍摄帧。
步骤A1″、针对携带特效处理标识的每个初始片段合成参数,在确定初始合成片段参数为目标合成片段参数的情况下,在初始合成片段参数对应的目标视频图层中,基于目标合成片段参数对应的原始视频片段中的拍摄帧和特效模板图像,生成第二特效叠加显示片段,并隐藏初始合成片段参数对应的候选图像图层。
具体地,对于每个携带特效处理标识的初始片段合成参数,如果该初始片段合成参数对应有原始视频片段,那么视频处理设备在其对应的目标视频图层中合并该原始视频片段对应的拍摄帧和对应的特效模板图像,按照特效模板片段的动态效果生成第二特效叠加显示片段。此时,该初始片段合成参数对应的处于前景的候选图像图层便无用,则隐藏该候选图像图层。
步骤A2″、针对携带特效处理标识的每个初始片段合成参数,在确定初始合成片段参数不为目标合成片段参数的情况下,基于初始合成片段参数对应的候选视频图层中的候选特效图像和特效模板图像,生成第二特效叠加显示片段。
具体地,对于每个携带特效处理标识的初始片段合成参数,如果该初始片段合成参数未对应有原始视频片段,那么视频处理设备可直接利用候选图像图层中的候选的拍摄帧替代原始视频片段中的拍摄帧,将其与对应的特效模板图像合并,按照特效模板片段的动态效果生成第二特效叠加显示片段。
通过上述实施例,可以为每个特效叠加显示片段预置处于前景位置的候选图像图层,并根据是否有原始视频片段来隐藏或显示候选图像中的候选的拍摄帧,能够一定程度上节省无原始视频片段情况下的视频处理流程,从而在确保视频长宽比变换的合成视频的视频内容连贯性和视频播放效果的基础上,一定程度上提高视频合成效率。
在一些实施例中,为了减少同一时间重叠的图层数量,视频处理设备可以在获得待处理视频后,仅将待处理视频中特效生成片段对应的原始视频拆分为各原始视频片段,而不拆分其中第一特效叠加显示片段对应的原始视频。
如图6所示,对于待处理视频600,视频处理设备将待处理视频600中的特效生成片段对应的原始视频601拆分为三个原始视频片段602,而保留第一特效叠加显示片段603对应的原始视频604。在缺失某一个原始视频片段602(以斜线填充示例)的情况下,直接按照各原始视频片段602和第一特效叠加显示片段对应的原始视频604的对应关系,截取第一特效叠加显示片段对应的原始视频604中的相应视频部分(以斜线填充示例)并删除即可。
图7示出了本公开实施例提供的一种视频处理装置的结构示意图。如图7所示,该视频处理装置700可以包括:
片段生成参数获取模块710,用于获取待处理视频和待处理视频对应的至少一个片段生成参数;其中,待处理视频为适配视频采集设备处于第一方向时的设备屏幕的视频;
目标片段合成参数确定模块720,用于基于片段生成参数,从初始片段合成参数中确定出至少一个目标片段合成参数,并从待处理视频中提取各目标片段合成参数对应的原始视频片段;
目标合成视频生成模块730,用于基于原始视频片段和目标片段合成参数,生成目标合成视频;其中,目标合成视频为适配视频播放设备处于第二方向时的设备屏幕的视频;第一方向和第二方向呈预设角度。
本公开实施例提供的上述视频处理装置,在变换视频方向的视频合成过程中,除了获取适配视频采集设备处于第一方向时的设备屏幕的待处理视频外,还获取待处理视频对应的至少一个片段生成参数,并利用该片段生成参数对各初始片段合成参数进行筛选,确定出目标片段合成参数,且从待处理视频中提取目标片段合成参数对应的原始视频片段,继而基于获得的各原始视频片段和各目标片段合成参数,生成与适配视频播放设备处于第二方向时的设备屏幕的目标合成视频,能够利用待处理视频中的实际的原始视频片段来合成目标合成视频,确保将设备在第一方向状态下获得的待处理视频转换为设备在第二方向状态下播放的目标合成视频,避免目标合成视频的周边区域中因无视频内容而展示背景内容的问题,且避免目标合成视频的视频区域中因缺失视频内容而展示背景内容的问题,提高目标合成视频的内容连贯性和视频播放效果。
在一些实施例中,目标片段合成参数确定模块720具体用于:
将初始片段合成参数与片段生成参数进行匹配,并将匹配成功的初始片段合成参数确定为目标片段合成参数。
在一些实施例中,目标合成视频生成模块730包括:
第二特效叠加显示片段生成子模块,用于在待处理视频为使用特效道具所得的视频、且待处理视频中包含第一特效叠加显示片段的情况下,针对携带特效处理标识的每个初始片段合成参数,基于初始片段合成参数对应的原始视频片段和/或候选特效图像,生成第二特效叠加显示片段;
特效合成片段生成子模块,用于针对未携带特效处理标识的每个目标片段合成参数,基于目标片段合成参数对应的原始视频片段和特效模板片段,生成特效合成片段;
目标合成视频生成子模块,用于基于各特效合成片段和各第二特效叠加显示片段,生成目标合成视频。
在一些实施例中,第二特效叠加显示片段生成子模块具体用于:
针对携带特效处理标识的每个初始合成片段参数,在确定初始合成片段参数为目标合成片段参数的情况下,在初始合成片段参数对应的目标视频图层中,基于目标合成片段参数对应的原始视频片段中的拍摄帧和特效模板图像,生成第二特效叠加显示片段;
针对携带特效处理标识的每个初始合成片段参数,在确定初始合成片段参数不为目标合成片段参数的情况下,在初始合成片段参数对应的目标视频图层中,基于初始合成片段参数对应的候选特效图像和特效模板图像,生成第二特效叠加显示片段。
在另一些实施例中,第二特效叠加显示片段生成子模块具体用于:
针对携带特效处理标识的每个初始片段合成参数,基于初始合成片段参数对应的候选特效图像和特效模板片段,生成初始合成片段参数对应的候选视频图层;
针对携带特效处理标识的每个初始片段合成参数,在确定初始合成片段参数为目标合成片段参数的情况下,在初始合成片段参数对应的目标视频图层中,基于目标合成片段参数对应的原始视频片段中的拍摄帧和特效模板图像,生成第二特效叠加显示片段,并隐藏初始合成片段参数对应的候选视频图层;
针对携带特效处理标识的每个初始片段合成参数,在确定初始合成片段参数不为目标合成片段参数的情况下,基于初始合成片段参数对应的候选视频图层,生成第二特效叠加显示片段。
在又一些实施例中,第二特效叠加显示片段生成子模块具体用于:
针对携带特效处理标识的每个初始片段合成参数,基于初始合成片段参数对应的候选特效图像,生成初始合成片段参数对应的候选图像图层;
针对携带特效处理标识的每个初始片段合成参数,在确定初始合成片段参数为目标合成片段参数的情况下,在初始合成片段参数对应的目标视频图层中,基于目标合成片段参数对应的原始视频片段中的拍摄帧和特效模板图像,生成第二特效叠加显示片段,并隐藏初始合成片段参数对应的候选图像图层;
针对携带特效处理标识的每个初始片段合成参数,在确定初始合成片段参数不为目标合成片段参数的情况下,基于初始合成片段参数对应的候选视频图层中的候选特效图像和特效模板图像,生成第二特效叠加显示片段。
在一些实施例中,该视频处理装置700还包括初始片段合成参数确定模块,用于:
在基于片段生成参数,从初始片段合成参数中确定出目标片段合成参数,并从待处理视频中提取目标片段合成参数对应的原始视频片段之前,基于待处理视频对应的目标拍摄模板标识和预设映射关系,确定目标合成模板标识;其中,预设映射关系用于记录拍摄模板标识和合成模板标识之间的对应关系;
基于目标合成模板标识确定各初始片段合成参数。
在另一些实施例中,初始片段合成参数确定模块用于:
在基于片段生成参数,从初始片段合成参数中确定出目标片段合成参数,并从待处理视频中提取目标片段合成参数对应的原始视频片段之前,基于输入的片段拍摄参数,确定各初始片段合成参数。
需要说明的是,图7所示的视频处理装置700可以执行图1至图6所示的方法实施例中的各个步骤,并且实现图1至图6所示的方法实施例中的各个过程和效果,在此不做赘述。
本公开实施例还提供了一种视频处理设备,该视频处理设备可以包括处理器和存储器,存储器可以用于存储可执行指令。其中,处理器可以用于从存储器中读取可执行指令,并执行可执行指令以实现上述任意实施例中的视频处理方法。
图8示出了本公开实施例提供的一种视频处理设备的结构示意图。如图8所示,该视频处理设备800可以包括处理装置(例如中央处理器、图形处理器等)801,其可以根据存储在只读存储器(ROM)802中的程序或者从存储装置808加载到随机访问存储器(RAM)803中的程序而执行各种适当的动作和处理。在RAM 803中,还存储有信息处理设备800操作所需的各种程序和数据。处理装置801、ROM 802以及RAM 803通过总线804彼此相连。输入/输出接口(I/O接口)805也连接至总线804。
通常,以下装置可以连接至I/O接口805:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置806;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置807;包括例如磁带、硬盘等的存储装置808;以及通信装置809。通信装置809可以允许视频处理设备800与其他设备进行无线或有线通信以交换数据。
虽然图8示出了具有各种装置的视频处理设备800,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。即图8示出的视频处理设备800仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
本公开实施例还提供了一种计算机可读存储介质,该存储介质存储有计算机程序,当计算机程序被处理器执行时,使得处理器实现本公开任意实施例中的视频处理方法。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在非暂态计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置809从网络上被下载和安装,或者从存储装置808被安装,或者从ROM 802被安装。在该计算机程序被处理装置801执行时,执行本公开任意实施例的视频处理方法中限定的上述功能。
需要说明的是,本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
在一些实施方式中,客户端、服务器可以利用诸如HTTP之类的任何当前已知或未来研发的网络协议进行通信,并且可以与任意形式或介质的数字数据通信(例如,通信网络)互连。通信网络的示例包括局域网(“LAN”),广域网(“WAN”),网际网(例如,互联网)以及端对端网络(例如,ad hoc端对端网络),以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述视频处理设备中所包含的;也可以是单独存在,而未装配入该视频处理设备中。
上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该视频处理设备执行时,使得该视频处理设备执行本公开任意实施例所说明的视频处理方法的步骤。
在本公开实施例中,可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括但不限于面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的设备、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,单元的名称在某种情况下并不构成对该单元本身的限定。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如,非限制性地,可以使用的示范类型的硬件逻辑部件包括:现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。
在本公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开中所涉及的公开范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述公开构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
此外,虽然采用特定次序描绘了各操作,但是这不应当理解为要求这些操作以所示出的特定次序或以顺序次序执行来执行。在一定环境下,多任务和并行处理可能是有利的。同样地,虽然在上面论述中包含了若干具体实现细节,但是这些不应当被解释为对本公开的范围的限制。在单独的实施例的上下文中描述的某些特征还可以组合地实现在单个实施例中。相反地,在单个实施例的上下文中描述的各种特征也可以单独地或以任何合适的子组合的方式实现在多个实施例中。尽管已经采用特定于结构特征和/或方法逻辑动作的语言描述了本主题,但是应当理解所附权利要求书中所限定的主题未必局限于上面描述的特定特征或动作。相反,上面所描述的特定特征和动作仅仅是实现权利要求书的示例形式。
Claims (11)
1.一种视频处理方法,其特征在于,包括:
获取待处理视频和所述待处理视频对应的至少一个片段生成参数;其中,所述待处理视频为适配视频采集设备处于第一方向时的设备屏幕的视频;
基于所述片段生成参数,从初始片段合成参数中确定出目标片段合成参数,并从所述待处理视频中提取所述目标片段合成参数对应的原始视频片段;
基于所述原始视频片段和所述目标片段合成参数,生成目标合成视频;其中,所述目标合成视频为适配视频播放设备处于第二方向时的设备屏幕的视频;所述第一方向和所述第二方向呈预设角度。
2.根据权利要求1所述的方法,其特征在于,所述基于所述片段生成参数,从初始片段合成参数中确定出目标片段合成参数包括:
将所述初始片段合成参数与所述片段生成参数进行匹配,并将匹配成功的所述初始片段合成参数确定为所述目标片段合成参数。
3.根据权利要求1所述的方法,其特征在于,在所述待处理视频为使用特效道具所得的视频、且所述待处理视频中包含第一特效叠加显示片段的情况下,所述基于所述原始视频片段和所述目标片段合成参数,生成目标合成视频包括:
针对携带特效处理标识的每个所述初始片段合成参数,基于所述初始片段合成参数对应的所述原始视频片段和/或候选特效图像,生成第二特效叠加显示片段;
针对未携带所述特效处理标识的每个所述目标片段合成参数,基于所述目标片段合成参数对应的所述原始视频片段和特效模板片段,生成特效合成片段;
基于各所述特效合成片段和各所述第二特效叠加显示片段,生成所述目标合成视频。
4.根据权利要求3所述的方法,其特征在于,所述针对携带特效处理标识的每个所述初始片段合成参数,基于所述初始片段合成参数对应的所述原始视频片段和/或候选特效图像,生成第二特效叠加显示片段包括:
针对携带所述特效处理标识的每个所述初始合成片段参数,在确定所述初始合成片段参数为所述目标合成片段参数的情况下,在所述初始合成片段参数对应的目标视频图层中,基于所述目标合成片段参数对应的所述原始视频片段中的拍摄帧和特效模板图像,生成所述第二特效叠加显示片段;
针对携带所述特效处理标识的每个所述初始合成片段参数,在确定所述初始合成片段参数不为所述目标合成片段参数的情况下,在所述初始合成片段参数对应的目标视频图层中,基于所述初始合成片段参数对应的所述候选特效图像和所述特效模板图像,生成所述第二特效叠加显示片段。
5.根据权利要求3所述的方法,其特征在于,所述针对携带特效处理标识的每个所述初始片段合成参数,基于所述初始片段合成参数对应的所述原始视频片段和/或候选特效图像,生成第二特效叠加显示片段包括:
针对携带所述特效处理标识的每个所述初始片段合成参数,基于所述初始合成片段参数对应的所述候选特效图像和所述特效模板片段,生成所述初始合成片段参数对应的候选视频图层;
针对携带所述特效处理标识的每个所述初始片段合成参数,在确定所述初始合成片段参数为所述目标合成片段参数的情况下,在所述初始合成片段参数对应的目标视频图层中,基于所述目标合成片段参数对应的所述原始视频片段中的拍摄帧和特效模板图像,生成所述第二特效叠加显示片段,并隐藏所述初始合成片段参数对应的所述候选视频图层;
针对携带所述特效处理标识的每个所述初始片段合成参数,在确定所述初始合成片段参数不为所述目标合成片段参数的情况下,基于所述初始合成片段参数对应的所述候选视频图层,生成所述第二特效叠加显示片段。
6.根据权利要求3所述的方法,其特征在于,所述针对携带特效处理标识的每个所述初始片段合成参数,基于所述初始片段合成参数对应的所述原始视频片段和/或候选特效图像,生成第二特效叠加显示片段包括:
针对携带所述特效处理标识的每个所述初始片段合成参数,基于所述初始合成片段参数对应的所述候选特效图像,生成所述初始合成片段参数对应的候选图像图层;
针对携带所述特效处理标识的每个所述初始片段合成参数,在确定所述初始合成片段参数为所述目标合成片段参数的情况下,在所述初始合成片段参数对应的目标视频图层中,基于所述目标合成片段参数对应的所述原始视频片段中的拍摄帧和特效模板图像,生成所述第二特效叠加显示片段,并隐藏所述初始合成片段参数对应的所述候选图像图层;
针对携带所述特效处理标识的每个所述初始片段合成参数,在确定所述初始合成片段参数不为所述目标合成片段参数的情况下,基于所述初始合成片段参数对应的所述候选视频图层中的所述候选特效图像和所述特效模板图像,生成所述第二特效叠加显示片段。
7.根据权利要求1所述的方法,其特征在于,在所述基于所述片段生成参数,从初始片段合成参数中确定出目标片段合成参数,并从所述待处理视频中提取所述目标片段合成参数对应的原始视频片段之前,所述方法还包括:
基于所述待处理视频对应的目标拍摄模板标识和预设映射关系,确定目标合成模板标识;其中,所述预设映射关系用于记录拍摄模板标识和合成模板标识之间的对应关系;
基于所述目标合成模板标识确定各所述初始片段合成参数。
8.根据权利要求1所述的方法,其特征在于,在所述基于所述片段生成参数,从初始片段合成参数中确定出目标片段合成参数,并从所述待处理视频中提取所述目标片段合成参数对应的原始视频片段之前,所述方法还包括:
基于输入的片段拍摄参数,确定各所述初始片段合成参数。
9.一种视频处理装置,其特征在于,包括:
片段生成参数获取模块,用于获取待处理视频和所述待处理视频对应的至少一个片段生成参数;其中,所述待处理视频为适配视频采集设备处于第一方向时的设备屏幕的视频;
目标片段合成参数确定模块,用于基于所述片段生成参数,从初始片段合成参数中确定出至少一个目标片段合成参数,并从所述待处理视频中提取各所述目标片段合成参数对应的原始视频片段;
目标合成视频生成模块,用于基于所述原始视频片段和所述目标片段合成参数,生成目标合成视频;其中,所述目标合成视频为适配视频播放设备处于第二方向时的设备屏幕的视频;所述第一方向和所述第二方向呈预设角度。
10.一种视频处理设备,其特征在于,包括:
处理器;
存储器,用于存储可执行指令;
其中,所述处理器用于从所述存储器中读取所述可执行指令,并执行所述可执行指令以实现上述权利要求1-8中任一项所述的视频处理方法。
11.一种计算机可读存储介质,其特征在于,所述存储介质存储有计算机程序,当所述计算机程序被处理器执行时,使得处理器实现上述权利要求1-8中任一项所述的视频处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210114002.8A CN114466145B (zh) | 2022-01-30 | 2022-01-30 | 视频处理方法、装置、设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210114002.8A CN114466145B (zh) | 2022-01-30 | 2022-01-30 | 视频处理方法、装置、设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114466145A true CN114466145A (zh) | 2022-05-10 |
CN114466145B CN114466145B (zh) | 2024-04-12 |
Family
ID=81412487
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210114002.8A Active CN114466145B (zh) | 2022-01-30 | 2022-01-30 | 视频处理方法、装置、设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114466145B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117201955A (zh) * | 2022-05-30 | 2023-12-08 | 荣耀终端有限公司 | 视频拍摄方法、装置、设备和存储介质 |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1701602A (zh) * | 2003-07-22 | 2005-11-23 | 索尼株式会社 | 图像处理器和图像处理方法以及计算机程序 |
CN104813361A (zh) * | 2012-12-17 | 2015-07-29 | 英特尔公司 | 感知内容的视频尺寸调整 |
CN105306963A (zh) * | 2015-10-20 | 2016-02-03 | 努比亚技术有限公司 | 自适应移动终端分辨率的视频处理系统、装置和方法 |
US20180098684A1 (en) * | 2016-10-06 | 2018-04-12 | Sony Olympus Medical Solutions Inc. | Image processing device for endoscope, endoscope device, image processing method of image processing device for endoscope, and image processing program |
CN109120997A (zh) * | 2018-09-30 | 2019-01-01 | 北京微播视界科技有限公司 | 视频处理方法、装置、终端和介质 |
CN109791600A (zh) * | 2016-12-05 | 2019-05-21 | 谷歌有限责任公司 | 将横屏视频转换为竖屏移动布局的方法 |
CN111754254A (zh) * | 2019-03-26 | 2020-10-09 | 维布络有限公司 | 在多媒体中动态创建和插入沉浸式推广内容的系统和方法 |
CN113206993A (zh) * | 2021-04-13 | 2021-08-03 | 聚好看科技股份有限公司 | 一种调整显示屏幕的方法及显示设备 |
CN113225489A (zh) * | 2021-04-30 | 2021-08-06 | 北京达佳互联信息技术有限公司 | 图像特效展示方法、装置、电子设备和存储介质 |
CN113395558A (zh) * | 2020-03-13 | 2021-09-14 | 海信视像科技股份有限公司 | 一种显示设备及显示画面旋转适配方法 |
CN113473182A (zh) * | 2021-09-06 | 2021-10-01 | 腾讯科技(深圳)有限公司 | 一种视频生成的方法及装置、计算机设备和存储介质 |
CN113613043A (zh) * | 2021-07-30 | 2021-11-05 | 北京百度网讯科技有限公司 | 屏幕显示和图像处理方法以及嵌入式设备和云服务器 |
WO2021259322A1 (zh) * | 2020-06-23 | 2021-12-30 | 广州筷子信息科技有限公司 | 一种生成视频的系统和方法 |
-
2022
- 2022-01-30 CN CN202210114002.8A patent/CN114466145B/zh active Active
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1701602A (zh) * | 2003-07-22 | 2005-11-23 | 索尼株式会社 | 图像处理器和图像处理方法以及计算机程序 |
CN104813361A (zh) * | 2012-12-17 | 2015-07-29 | 英特尔公司 | 感知内容的视频尺寸调整 |
CN105306963A (zh) * | 2015-10-20 | 2016-02-03 | 努比亚技术有限公司 | 自适应移动终端分辨率的视频处理系统、装置和方法 |
US20180098684A1 (en) * | 2016-10-06 | 2018-04-12 | Sony Olympus Medical Solutions Inc. | Image processing device for endoscope, endoscope device, image processing method of image processing device for endoscope, and image processing program |
CN109791600A (zh) * | 2016-12-05 | 2019-05-21 | 谷歌有限责任公司 | 将横屏视频转换为竖屏移动布局的方法 |
CN109120997A (zh) * | 2018-09-30 | 2019-01-01 | 北京微播视界科技有限公司 | 视频处理方法、装置、终端和介质 |
CN111754254A (zh) * | 2019-03-26 | 2020-10-09 | 维布络有限公司 | 在多媒体中动态创建和插入沉浸式推广内容的系统和方法 |
CN113395558A (zh) * | 2020-03-13 | 2021-09-14 | 海信视像科技股份有限公司 | 一种显示设备及显示画面旋转适配方法 |
WO2021259322A1 (zh) * | 2020-06-23 | 2021-12-30 | 广州筷子信息科技有限公司 | 一种生成视频的系统和方法 |
CN113206993A (zh) * | 2021-04-13 | 2021-08-03 | 聚好看科技股份有限公司 | 一种调整显示屏幕的方法及显示设备 |
CN113225489A (zh) * | 2021-04-30 | 2021-08-06 | 北京达佳互联信息技术有限公司 | 图像特效展示方法、装置、电子设备和存储介质 |
CN113613043A (zh) * | 2021-07-30 | 2021-11-05 | 北京百度网讯科技有限公司 | 屏幕显示和图像处理方法以及嵌入式设备和云服务器 |
CN113473182A (zh) * | 2021-09-06 | 2021-10-01 | 腾讯科技(深圳)有限公司 | 一种视频生成的方法及装置、计算机设备和存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117201955A (zh) * | 2022-05-30 | 2023-12-08 | 荣耀终端有限公司 | 视频拍摄方法、装置、设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN114466145B (zh) | 2024-04-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2017181777A1 (zh) | 全景视频直播方法、装置和系统以及视频源控制设备 | |
CN105991962B (zh) | 连接方法、信息展示方法、装置及系统 | |
US11729465B2 (en) | System and method providing object-oriented zoom in multimedia messaging | |
EP3562163A1 (en) | Audio-video synthesis method and system | |
CN111641828B (zh) | 视频处理方法及装置、存储介质和电子设备 | |
CN113411642B (zh) | 投屏方法、装置、电子设备和存储介质 | |
CN104012106A (zh) | 使表示不同视点的视频对准 | |
US20200186887A1 (en) | Real-time broadcast editing system and method | |
JP2022536182A (ja) | データストリームを同期させるシステム及び方法 | |
CN107592452B (zh) | 一种全景音视频采集设备及方法 | |
US20190335162A1 (en) | System that generates virtual viewpoint image, method and storage medium | |
CN114331820A (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN111225288A (zh) | 展示字幕信息的方法、装置以及电子设备 | |
US11893770B2 (en) | Method for converting a picture into a video, device, and storage medium | |
CN113012082A (zh) | 图像显示方法、装置、设备及介质 | |
CN111967397A (zh) | 人脸影像处理方法和装置、存储介质和电子设备 | |
CN114466145B (zh) | 视频处理方法、装置、设备和存储介质 | |
US20180268819A1 (en) | Communication terminal, communication method, and computer program product | |
CN109862385B (zh) | 直播的方法、装置、计算机可读存储介质及终端设备 | |
KR102029604B1 (ko) | 실시간 방송 편집 시스템 및 편집 방법 | |
CN108713313B (zh) | 多媒体数据处理方法、装置和设备/终端/服务器 | |
CN113542909A (zh) | 视频处理方法、装置、电子设备及计算机存储介质 | |
CN110990088A (zh) | 数据处理方法及相关设备 | |
CN112887796B (zh) | 视频生成方法、装置、设备及介质 | |
CN116847147A (zh) | 特效视频确定方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |