CN113225450B - 视频处理方法、视频处理装置及电子设备 - Google Patents

视频处理方法、视频处理装置及电子设备 Download PDF

Info

Publication number
CN113225450B
CN113225450B CN202010081337.5A CN202010081337A CN113225450B CN 113225450 B CN113225450 B CN 113225450B CN 202010081337 A CN202010081337 A CN 202010081337A CN 113225450 B CN113225450 B CN 113225450B
Authority
CN
China
Prior art keywords
video
effect
special effect
specific
specific object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010081337.5A
Other languages
English (en)
Other versions
CN113225450A (zh
Inventor
陈旭
张�杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba Group Holding Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN202010081337.5A priority Critical patent/CN113225450B/zh
Publication of CN113225450A publication Critical patent/CN113225450A/zh
Application granted granted Critical
Publication of CN113225450B publication Critical patent/CN113225450B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7837Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/7867Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, title and artist information, manually generated time, location and usage information, user ratings

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

公开了一种视频处理方法、视频处理装置和电子设备。该视频处理方法包括:获取源视频;确定所述源视频内用于植入特效视频的视频片段;确定所述视频片段内的特定对象;以及,基于所述特定对象生成包含所述与所述特定对象在内容和位置上相关联的特定效果的特效视频。这样,能够增强特效视频对用户的吸引度,同时又不会影响用户的观看体验。

Description

视频处理方法、视频处理装置及电子设备
技术领域
本申请涉及视频处理技术领域,且更为具体地,涉及一种视频处理方法、视频处理装置和电子设备。
背景技术
目前,常见的视频广告形式有两种。第一种是播放的视频四周,例如,视频左右侧的贴片广告,这种视频广告形式单调枯燥,且缺乏对用户的吸引力。另一种是在视频的前、中、后部插入的硬广告,这种视频广告形式会暂停原视频播放,对用户观影打扰大、体验不佳。
因此,相比插入视频的硬广告,贴片广告不会打扰用户观影,让广告也能给用户较好的体验。但是,贴片广告通常出现在视频的主体内容之外,例如如上所述的视频四周,使得用户在观看视频的主体内容时,不太容易注意到贴片广告。或者,用户虽然能够注意到贴片广告,但是并不会关注广告到底是什么内容。
所以,贴片广告虽然降低了对用户观看视频的打扰,但是其本身不太容易受到用户关注,从而降低了对用户的吸引度。
因此,期望提供改进的视频处理方案。
发明内容
为了解决上述技术问题,提出了本申请。本申请的实施例提供了一种视频处理方法、视频处理装置和电子设备,其能够从源视频确定用于植入特效视频的视频片段内的特定对象,并基于所述特定对象生成在内容和位置上相关联的特效视频,从而增强了特效视频对用户的吸引度,同时又不会影响用户的观看体验。
根据本申请的一方面,提供了一种视频处理方法,包括:获取源视频;确定所述源视频内用于植入特效视频的视频片段;确定所述视频片段内的特定对象;以及,基于所述特定对象生成包含所述与所述特定对象在内容和位置上相关联的特定效果的特效视频。
在上述视频处理方法中,确定所述源视频内用于植入特效视频的视频片段包括:基于用户指定确定所述源视频内用于植入特效视频的视频片段;和/或,通过对所述源视频的视频解析确定所述源视频内适于植入特效视频的视频片段。
在上述视频处理方法中,确定所述视频片段内的特定对象包括:通过图像分割从所述视频片段内分割出所述特定对象。
在上述视频处理方法中,基于所述特定对象生成包含所述与所述特定对象在内容和位置上相关联的特定效果的特效视频包括:基于所述特定对象的分割结果生成图像掩码;基于所述特定对象生成与所述特定对象在内容上相关联的特定效果;以及,基于所述图像掩码和所述特定效果生成所述特效视频。
在上述视频处理方法中,所述特定效果为环绕所述特定对象的三维环绕效果。
在上述视频处理方法中,基于所述图像掩码和所述特定效果生成所述特效视频包括:在所述特定效果之后叠加附加视频;以及,基于所述图像掩码和叠加有所述附加视频的所述特定效果生成所述特效视频。
在上述视频处理方法中,在基于所述特定对象生成包含所述与所述特定对象在内容和位置上相关联的特定效果的特效视频之后进一步包括:将所述特效视频与所述源视频同步播放。
根据本申请的另一方面,提供了一种视频处理装置,包括:视频获取单元,用于获取源视频;片段确定单元,用于确定所述视频获取单元所获取的所述源视频内用于植入特效视频的视频片段;对象确定单元,用于确定所述片段确定单元所确定的所述视频片段内的特定对象;以及,特效生成单元,用于基于所述对象确定单元所确定的所述特定对象生成包含所述与所述特定对象在内容和位置上相关联的特定效果的特效视频。
在上述视频处理装置中,所述片段确定单元用于:基于用户指定确定所述源视频内用于植入特效视频的视频片段;和/或,通过对所述源视频的视频解析确定所述源视频内适于植入特效视频的视频片段。
在上述视频处理装置中,所述对象确定单元用于:通过图像分割从所述视频片段内分割出所述特定对象。
在上述视频处理装置中,所述特效生成单元包括:掩码生成子单元,用于基于所述对象确定单元对于所述特定对象的分割结果生成图像掩码;效果生成子单元,用于基于所述对象确定单元所确定的所述特定对象生成与所述特定对象在内容上相关联的特定效果;以及,视频生成子单元,用于基于所述掩码生成子单元所生成的所述图像掩码和所述效果生成子单元所生成的所述特定效果生成所述特效视频。
在上述视频处理装置中,所述特定效果为环绕所述特定对象的三维环绕效果。
在上述视频处理装置中,所述视频生成子单元用于:在所述特定效果之后叠加附加视频;以及,基于所述图像掩码和叠加有所述附加视频的所述特定效果生成所述特效视频。
在上述视频处理装置中,进一步包括:播放单元,用于在基于所述特定对象生成包含所述与所述特定对象在内容和位置上相关联的特定效果的特效视频之后,将所述特效视频与所述源视频同步播放。
根据本申请的再一方面,提供了一种电子设备,包括:处理器;以及,存储器,在所述存储器中存储有计算机程序指令,所述计算机程序指令在被所述处理器运行时使得所述处理器执行如上所述的视频处理方法。
根据本申请的又一方面,提供了一种计算机可读介质,其上存储有计算机程序指令,所述计算机程序指令在被处理器运行时使得所述处理器执行如上所述的视频处理方法。
本申请提供的视频处理方法、视频处理装置和电子设备,能够从源视频确定用于植入特效视频的视频片段内的特定对象,并基于所述特定对象生成在内容和位置上相关联的特效视频,从而增强了特效视频对用户的吸引度,同时又不会影响用户的观看体验。
附图说明
通过结合附图对本申请实施例进行更详细的描述,本申请的上述以及其他目的、特征和优势将变得更加明显。附图用来提供对本申请实施例的进一步理解,并且构成说明书的一部分,与本申请实施例一起用于解释本申请,并不构成对本申请的限制。在附图中,相同的参考标号通常代表相同部件或步骤。
图1图示了根据本申请实施例的视频处理方法的流程图。
图2图示了根据本申请实施例的视频处理方法中生成特效视频的示例的流程图。
图3图示了根据本申请实施例的视频处理方法的应用实例的流程图。
图4图示了根据本申请实施例的视频处理装置的框图。
图5图示了根据本申请实施例的视频处理装置的特效生成单元的示例的框图。
图6图示了根据本申请实施例的电子设备的框图。
具体实施方式
下面,将参考附图详细地描述根据本申请的示例实施例。显然,所描述的实施例仅仅是本申请的一部分实施例,而不是本申请的全部实施例,应理解,本申请不受这里描述的示例实施例的限制。
申请概述
如上所述,目前的贴片广告通常在视频的非主体区域显示,较难引起用户的注意力,而视频前、中、后的硬插入广告会暂停原视频播放,影响用户观影体验。
即使采用动态贴片广告,利用动态图的方式虽然可以一定程度上提高广告可感度,但由于用户的注意力仍然在画面的主体部分而不在贴片广告的位置,仍然容易忽视贴片广告。
并且,动态贴片广告缺乏与剧情画面的有效联动,很难唤起用户认同感,降低了广告投放的价值。
针对上述技术问题,本申请的基本构思是从源视频确定用于植入特效视频的视频片段内的特定对象,并基于所述特定对象生成在内容和位置上相关联的特效视频。
具体地,本申请提供的视频处理方法,视频处理装置和电子设备首先获取源视频,然后确定所述源视频内用于植入特效视频的视频片段,再确定所述视频片段内的特定对象,最后基于所述特定对象生成包含所述与所述特定对象在内容和位置上相关联的特定效果的特效视频。
因此,本申请提供的视频处理方法,视频处理装置和电子设备能够生成与源视频内的特定对象在位置上相关联的特定效果,从而在所述源视频的主体画面上叠加所述动态效果,从而大幅度增强了所述动态效果对用户的感官冲击和易记忆度。
并且,本申请提供的视频处理方法,视频处理装置和电子设备所生成的特定效果在内容上与所述源视频内的特定对象相关联,从而可以根据所述源视频的剧情引出所述特定效果,例如,可以在剧情的高潮处引出所述特定效果,而且可以使得所述特定效果与所述源视频的场景相结合,这种联动效应可以极大地提高用户对所述特定效果的认可度。
此外,本申请提供的视频处理方法,视频处理装置和电子设备在播放所述特效视频时,不需要暂停所述源视频的播放,而是通过叠加与所述源视频的特定对象在内容和位置上相关联的特效视频来在视频主体关注区域展现高可感、低打扰的动态特效视频。
值得注意的是,在本申请提供的视频处理方法、视频处理装置和电子设备中,所述特定效果可以包括用于广告目的植入所述源视频的任意广告内容,并且也可以是希望植入所述源视频内以希望用户注意到的其它内容,例如,可以是希望用户注意到的特定标识等。
此外,所述特定效果也可以包括辅助用户观看所述源视频的内容,例如为了烘托所述源视频的剧情增加的特定效果,或者帮助用户理解所述源视频的剧情的辅助显示效果等。
在介绍了本申请的基本原理之后,下面将参考附图来具体介绍本申请的各种非限制性实施例。
示例性方法
图1图示了根据本申请实施例的视频处理方法的流程图。
如图1所示,根据本申请实施例的视频处理方法包括以下步骤。
步骤S110,获取源视频。所述源视频可以是用户观看的任意视频,比如电影、电视剧、视频片段等。
步骤S120,确定所述源视频内用于植入特效视频的视频片段。具体地,在本申请实施例中,可以通过人工指定的方式确定用于植入特效视频的视频片段,例如,用于提供视频植入服务的服务提供商通过浏览源视频,确定所述源视频中适于植入视频的片段。
或者,也可以通过视频解析的方式,获取所述源视频内适于植入视频的视频片段。例如,通过视频解析的方式,确实所述源视频内的某个片段中有某个对象的集中展示,则可以确定其为适于植入视频的视频片段。
因此,在根据本申请实施例的视频处理方法中,确定所述源视频内用于植入特效视频的视频片段包括:基于用户指定确定所述源视频内用于植入特效视频的视频片段;和/或,通过对所述源视频的视频解析确定所述源视频内适于植入特效视频的视频片段。
步骤S130,确定所述视频片段内的特定对象。也就是,在本申请实施例中,所述视频片段内除了背景等之外,还包括易于引起观看者注意的特定对象。所述特定对象可以是所述视频片段内的人物,也可以是所述视频片段内的物体,例如行驶的汽车等。另外,所述特定对象也可以是所述视频片段内的其它显示对象,例如,路边的建筑等。
具体地,可以通过多种方式来确定所述视频片段内的特定对象。例如,可以通过图像分割的方式,确定所述视频片段内的特定对象。也可以通过对象识别的方式,例如物体识别、品牌识别、场景识别、动作识别、字符识别和人物识别等,来确定所述视频片段内的特定对象。
因此,在根据本申请实施例的视频处理方法中,确定所述视频片段内的特定对象包括:通过图像分割从所述视频片段内分割出所述特定对象。
步骤S140,基于所述特定对象生成包含所述与所述特定对象在内容和位置上相关联的特定效果的特效视频。也就是,为了使得植入的特效视频能够引起观看者的注意,并且与剧情画面构成有效联动,唤起用户的认同感,使得所述特效视频所包含的特定效果与所述特定对象在内容和位置上相关联。
例如,当所述视频片段内包含处于喜悦心情的人物时,基于所述处于喜悦心情的人物,可以生成用于烘托喜悦气氛的特定效果,例如飞花、闪光效果等。并且,用于烘托喜悦气氛的特定效果可以在所述处于喜悦心情的人物周围呈现,以便与所述人物构成整体,从而与剧情画面构成有效联动。例如,在处于喜悦心情的人物周围,可以重现从下到上以螺旋形环绕着该人物飞舞的花瓣,以进一步烘托此时的喜悦气氛。或者,处于喜悦心情的人物可以发出特定颜色的光,这样通过闪光可以吸引观看视频的用户进一步注意到人物的喜悦,并产生感同身受的效果。
又例如,对于视频片段内包含的特定对象,可以确定所述特定对象在所述视频片段的图像帧中的位置,比如所述特定对象在图像帧的中部。此时,在生成特效视频时,所述特定效果可以位于所述特定对象在所述图像帧中的位置附近,例如也在图像帧的中部,从而在位置上与所述特定对象相关联。这样,用户在观看视频片段时,如果注意力集中在所述特定对象上,则自然也能够注意到特定效果。比如如上所述的,当生成飞花效果时,花瓣可以围绕着处于喜悦心情的人物飞舞,或者当生成闪光效果时,可以是处于喜悦心情的人物在闪光。
这样,当所述特效视频进一步呈现希望用户注意到的其它内容,例如广告内容时,不同于在视频内的不易引起观看者注意的位置显示的贴片广告,所述特效视频所包含的广告内容无论是从显示位置还是与画面的主体的关联显示方面,均能够保证很容易地引起观看者的注意,从而改善了广告的投放效果。
图2图示了根据本申请实施例的视频处理方法中生成特效视频的示例的流程图。
如图2所示,在如图1所示的实施例的基础上,步骤S140进一步包括以下步骤。
步骤S1401,基于所述特定对象的分割结果生成图像掩码。如上所述,可以通过图像分割的方式确定所述视频片段内的所述特定对象。通过图像分割,可以确定所述特定对象在所述视频片段的多个连续帧内的图像掩码。也就是,所述图像掩码可以用于指示所述特定对象在视频片段的多个连续帧内的呈现位置,从而使得所生成的特定效果可以与所述特定对象在位置上相关联。
这里,所述图像掩码通常用于图像分割,例如,其针对所述多个连续帧中的每一帧图像,以1表示所述特定对象,而以0表示图像的其它部分,从而在每一帧图像中,将所述特定对象与图像的其它部分相区分,使得可以从图像中分割出所述特定对象。
步骤S1402,基于所述特定对象生成与所述特定对象在内容上相关联的特定效果。如上所述,为了与所述源视频在剧情上产生联动效应,以加深观看者的印象,在本申请实施例中,所述特定效果与所述源视频中的特定对象在内容上具有关联。也就是,可以基于所述源视频的内容,选择不同类型的特定效果,以便观看者对于所述特效视频产生关联记忆,以加深观看者的印象。
步骤S1403,基于所述图像掩码和所述特定效果生成所述特效视频。这样,基于所述图像掩码,可以生成在与所述特定对象相关联的位置上,即,视频的主体区域上显示的特效视频,从而使得用户高度可感。并且,由于所述特效视频包含了与所述特定对象在内容上相关联的特定效果,可以在剧情高潮处显示特定效果,并结合场景选择适当的特定效果,因此,这种联动效应可以极大地提高用户对特效视频的认可度。
在一个示例中,在根据本申请实施例的视频处理方法中,所述特定效果为环绕所述特定对象的三维环绕效果。例如,所述特定效果可以是环绕剧情中占主体位置的人或物的三维环绕的飞花、闪光等效果。具体地,可以利用特效制作算法制作环绕特效的3D分层素材,再基于3D分层,结合环绕主体的图像掩码叠加特定效果,从而达到3D环绕的视觉感。例如,如上所述,飞花效果可以是环绕着人或者物以从下到上的螺旋形飞舞的花瓣,闪光效果可以是在人或者物的周围以环绕形式发光的效果。
如上所述,在根据本申请实施例的视频处理方法中,可以通过所述特效视频的方式植入广告,从而提供高可靠度、低打扰度的视频广告。具体地,基于如上所述的环绕所述特定对象的三维环绕效果,可以从该环绕特效引出广告视觉内容,也就是,将所述广告视频作为附加在所述特定效果之后的附加视频,并基于所述三维环绕效果和所述广告视频生成特效视频。
也就是,在根据本申请实施例的视频处理方法中,基于所述图像掩码和所述特定效果生成所述特效视频包括:在所述特定效果之后叠加附加视频;以及,基于所述图像掩码和叠加有所述附加视频的所述特定效果生成所述特效视频。
值得注意的是,在根据本申请实施例的视频处理方法中,也可以不将广告视频作为三维环绕效果的附加视频,而是直接在三维环绕效果中进行显示。例如,可以将三维环绕效果显示为以表示广告内容的三维环绕字符串,或者在三维环绕效果中嵌入呈现广告内容的图像,例如,广告的品牌标识或者其它广告的品牌视觉元素的图像。
比如,当显示某牛奶品牌的广告时,可以在视频中的角色正在喝牛奶的视频片段中,以飞花等环绕正在喝牛奶的人物的三维效果来吸引用户注意,然后显示该牛奶品牌的广告。或者,如上所述,也可以直接以三维环绕效果来显示广告,比如,将该广告显示为环绕正在喝牛奶的人物以螺旋形由下而上旋转的“XX牛奶”的三维字符串,或者显示为环绕正在喝牛奶的人物以螺旋形由下而上旋转的该牛奶品牌的三维卡通奶牛形象。
在生成所述特效视频之后,通过将所述特效视频与所述源视频同步播放,就可以使得用户观看到植入了所述特效视频的源视频。
因此,在根据本申请实施例的视频处理方法中,在基于所述特定对象生成包含所述与所述特定对象在内容和位置上相关联的特定效果的特效视频之后进一步包括:将所述特效视频与所述源视频同步播放。
这里,在本申请实施例中,所述特效视频与所述源视频可以基于不同分层按照具体时间同步叠加播放。此外,所述特效视频也可以基于所述特效视频的呈现时间被直接压流叠加在所述源视频中,从而播放叠加有所述特效视频的源视频。
应用实例
图3图示了根据本申请实施例的视频处理方法的应用实例的流程图。
如图3所示,在根据本申请实施例的视频处理方法应用于三维环绕视频广告的情况下,包括以下步骤。步骤S201,获取源视频。步骤S202,用户指定植入视频广告的位置。或者步骤S203,通过智能点位算法,确定所述源视频中植入视频广告的位置。
步骤S204,通过图像分割算法分割出所述源视频中的环绕主体。步骤S205,基于图像分割算法的分割结果获得环绕主体掩码。步骤S206,基于所述源视频内要植入广告的场景的内容生成环绕特效的3D分层素材。步骤S207,基于环绕主体掩码叠加环绕特效的3D分层素材。步骤S208,通过所述环绕特效的3D分层素材引出广告内容。
步骤S209,基于环绕特效的3D分层素材和引出的广告内容生成特效广告文件。步骤S210,同步叠加播放所述特效广告。
这样,通过在环绕主体对应的视频的主体区域叠加动态特效广告,使得广告对用户高度可感。并且,所述动态特效广告因为与视频的剧情联动,增强广告对用户的关联记忆。而且,所述动态特效广告的呈现不需要暂停原视频的播放,不打扰用户正常观看视频。
示例性装置
图4图示了根据本申请实施例的视频处理装置的框图。
如图4所示,根据本申请实施例的视频处理装置300包括:视频获取单元310,用于获取源视频;片段确定单元320,用于确定所述视频获取单元310所获取的所述源视频内用于植入特效视频的视频片段;对象确定单元330,用于确定所述片段确定单元320所确定的所述视频片段内的特定对象;以及,特效生成单元340,用于基于所述对象确定单元330所确定的所述特定对象生成包含所述与所述特定对象在内容和位置上相关联的特定效果的特效视频。
在一个示例中,在上述视频处理装置300中,所述片段确定单元320用于:基于用户指定确定所述源视频内用于植入特效视频的视频片段;和/或,通过对所述源视频的视频解析确定所述源视频内适于植入特效视频的视频片段。
在一个示例中,在上述视频处理装置300中,所述对象确定单元330用于:通过图像分割从所述视频片段内分割出所述特定对象。
图5图示了根据本申请实施例的视频处理装置的特效生成单元的示例的框图。
如图5所示,在如图4所示的实施例的基础上,所述特效生成单元340包括:掩码生成子单元3401,用于基于所述对象确定单元330对于所述特定对象的分割结果生成图像掩码;效果生成子单元3402,用于基于所述对象确定单元330所确定的所述特定对象生成与所述特定对象在内容上相关联的特定效果;以及,视频生成子单元3403,用于基于所述掩码生成子单元3401所生成的所述图像掩码和所述效果生成子单元3402所生成的所述特定效果生成所述特效视频。
在一个示例中,在上述视频处理装置300中,所述特定效果为环绕所述特定对象的三维环绕效果。
在一个示例中,在上述视频处理装置300中,所述视频生成子单元3403用于:在所述特定效果之后叠加附加视频;以及,基于所述图像掩码和叠加有所述附加视频的所述特定效果生成所述特效视频。
在一个示例中,在上述视频处理装置300中,进一步包括:播放单元,用于在基于所述特定对象生成包含所述与所述特定对象在内容和位置上相关联的特定效果的特效视频之后,将所述特效视频与所述源视频同步播放。
这里,本领域技术人员可以理解,上述视频处理装置300中的各个单元和模块的具体功能和操作已经在上面参考图1和图2的视频处理方法的描述中得到了详细介绍,并因此,将省略其重复描述。
如上所述,根据本申请实施例的视频处理装置300可以实现在各种终端设备中,例如用于广告植入的制作系统等。在一个示例中,根据本申请实施例的视频处理装置300可以作为一个软件模块和/或硬件模块而集成到终端设备中。例如,该视频处理装置300可以是该终端设备的操作系统中的一个软件模块,或者可以是针对于该终端设备所开发的一个应用程序;当然,该视频处理装置300同样可以是该终端设备的众多硬件模块之一。
替换地,在另一示例中,该视频处理装置300与该终端设备也可以是分立的设备,并且该视频处理装置300可以通过有线和/或无线网络连接到该终端设备,并且按照约定的数据格式来传输交互信息。
示例性电子设备
下面,参考图6来描述根据本申请实施例的电子设备。
图6图示了根据本申请实施例的电子设备的框图。
如图6所示,电子设备10包括一个或多个处理器11和存储器12。
处理器11可以是中央处理单元(CPU)或者具有数据处理能力和/或指令执行能力的其他形式的处理单元,并且可以控制电子设备10中的其他组件以执行期望的功能。
存储器12可以包括一个或多个计算机程序产品,所述计算机程序产品可以包括各种形式的计算机可读存储介质,例如易失性存储器和/或非易失性存储器。所述易失性存储器例如可以包括随机存取存储器(RAM)和/或高速缓冲存储器(cache)等。所述非易失性存储器例如可以包括只读存储器(ROM)、硬盘、闪存等。在所述计算机可读存储介质上可以存储一个或多个计算机程序指令,处理器11可以运行所述程序指令,以实现上文所述的本申请的各个实施例的视频处理方法以及/或者其他期望的功能。在所述计算机可读存储介质中还可以存储诸如视频片段信息、特定对象信息、特效视频等各种内容。
在一个示例中,电子设备10还可以包括:输入装置13和输出装置14,这些组件通过总线系统和/或其他形式的连接机构(未示出)互连。
该输入装置13可以包括例如键盘、鼠标等等。
该输出装置14可以向外部输出各种信息,包括生成的特效视频等。该输出装置14可以包括例如显示器、扬声器、打印机、以及通信网络及其所连接的远程输出设备等等。
当然,为了简化,图6中仅示出了该电子设备10中与本申请有关的组件中的一些,省略了诸如总线、输入/输出接口等等的组件。除此之外,根据具体应用情况,电子设备10还可以包括任何其他适当的组件。
示例性计算机程序产品和计算机可读存储介质
除了上述方法和设备以外,本申请的实施例还可以是计算机程序产品,其包括计算机程序指令,所述计算机程序指令在被处理器运行时使得所述处理器执行本说明书上述“示例性方法”部分中描述的根据本申请各种实施例的视频处理方法中的步骤。
所述计算机程序产品可以以一种或多种程序设计语言的任意组合来编写用于执行本申请实施例操作的程序代码,所述程序设计语言包括面向对象的程序设计语言,诸如Java、C++等,还包括常规的过程式程序设计语言,诸如“C”语言或类似的程序设计语言。程序代码可以完全地在第一用户计算设备上执行、部分地在第一用户设备上执行、作为一个独立的软件包执行、部分在第一用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。
此外,本申请的实施例还可以是计算机可读存储介质,其上存储有计算机程序指令,所述计算机程序指令在被处理器运行时使得所述处理器执行本说明书上述“示例性方法”部分中描述的根据本申请各种实施例的视频处理方法中的步骤。
所述计算机可读存储介质可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以包括但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
以上结合具体实施例描述了本申请的基本原理,但是,需要指出的是,在本申请中提及的优点、优势、效果等仅是示例而非限制,不能认为这些优点、优势、效果等是本申请的各个实施例必须具备的。另外,上述公开的具体细节仅是为了示例的作用和便于理解的作用,而非限制,上述细节并不限制本申请为必须采用上述具体的细节来实现。
本申请中涉及的器件、装置、设备、系统的方框图仅作为例示性的例子并且不意图要求或暗示必须按照方框图示出的方式进行连接、布置、配置。如本领域技术人员将认识到的,可以按任意方式连接、布置、配置这些器件、装置、设备、系统。诸如“包括”、“包含”、“具有”等等的词语是开放性词汇,指“包括但不限于”,且可与其互换使用。这里所使用的词汇“或”和“和”指词汇“和/或”,且可与其互换使用,除非上下文明确指示不是如此。这里所使用的词汇“诸如”指词组“诸如但不限于”,且可与其互换使用。
还需要指出的是,在本申请的装置、设备和方法中,各部件或各步骤是可以分解和/或重新组合的。这些分解和/或重新组合应视为本申请的等效方案。
提供所公开的方面的以上描述以使本领域的任何技术人员能够做出或者使用本申请。对这些方面的各种修改对于本领域技术人员而言是非常显而易见的,并且在此定义的一般原理可以应用于其他方面而不脱离本申请的范围。因此,本申请不意图被限制到在此示出的方面,而是按照与在此公开的原理和新颖的特征一致的最宽范围。
为了例示和描述的目的已经给出了以上描述。此外,此描述不意图将本申请的实施例限制到在此公开的形式。尽管以上已经讨论了多个示例方面和实施例,但是本领域技术人员将认识到其某些变型、修改、改变、添加和子组合。

Claims (7)

1.一种视频处理方法,其特征在于,包括:
获取源视频;
确定所述源视频内用于植入特效视频的视频片段;
确定所述视频片段内的特定对象;以及
基于所述特定对象生成包含与所述特定对象在内容和位置上相关联的特定效果的特效视频;
确定所述视频片段内的特定对象,基于所述特定对象生成包含所述与所述特定对象在内容和位置上相关联的特定效果的特效视频包括:
通过图像分割从所述视频片段内分割出所述特定对象;
基于所述特定对象的分割结果生成图像掩码;
基于所述特定对象生成与所述特定对象在内容上相关联的特定效果;以及
基于所述图像掩码和所述特定效果生成所述特效视频。
2.根据权利要求1所述的视频处理方法,其特征在于,确定所述源视频内用于植入特效视频的视频片段包括:
基于用户指定确定所述源视频内用于植入特效视频的视频片段;和/或
通过对所述源视频的视频解析确定所述源视频内适于植入特效视频的视频片段。
3.根据权利要求1所述的视频处理方法,其特征在于,所述特定效果为环绕所述特定对象的三维环绕效果。
4.根据权利要求1所述的视频处理方法,其特征在于,在基于所述图像掩码和所述特定效果生成所述特效视频包括:
在所述特定效果之后叠加附加视频;以及
基于所述图像掩码和叠加有所述附加视频的所述特定效果生成所述特效视频。
5.根据权利要求1所述的视频处理方法,其特征在于,在基于所述特定对象生成包含所述与所述特定对象在内容和位置上相关联的特定效果的特效视频之后进一步包括:
将所述特效视频与所述源视频同步播放。
6.一种视频处理装置,其特征在于,包括:
视频获取单元,用于获取源视频;
片段确定单元,用于确定所述视频获取单元所获取的所述源视频内用于植入特效视频的视频片段;
对象确定单元,用于确定所述片段确定单元所确定的所述视频片段内的特定对象;以及
特效生成单元,用于基于所述对象确定单元所确定的所述特定对象生成包含与所述特定对象在内容和位置上相关联的特定效果的特效视频;
对象确定单元,具体用于通过图像分割从所述视频片段内分割出所述特定对象;
所述特效生成单元包括:
掩码生成子单元,用于基于所述对象确定单元对于所述特定对象的分割结果生成图像掩码;
效果生成子单元,用于基于所述对象确定单元所确定的所述特定对象生成与所述特定对象在内容上相关联的特定效果;以及
视频生成子单元,用于基于所述掩码生成子单元所生成的所述图像掩码和所述效果生成子单元所生成的所述特定效果生成所述特效视频。
7.一种电子设备,包括:
处理器;以及
存储器,在所述存储器中存储有计算机程序指令,所述计算机程序指令在被所述处理器运行时使得所述处理器执行如权利要求1-5中任意一项所述的视频处理方法。
CN202010081337.5A 2020-02-06 2020-02-06 视频处理方法、视频处理装置及电子设备 Active CN113225450B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010081337.5A CN113225450B (zh) 2020-02-06 2020-02-06 视频处理方法、视频处理装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010081337.5A CN113225450B (zh) 2020-02-06 2020-02-06 视频处理方法、视频处理装置及电子设备

Publications (2)

Publication Number Publication Date
CN113225450A CN113225450A (zh) 2021-08-06
CN113225450B true CN113225450B (zh) 2023-04-11

Family

ID=77085483

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010081337.5A Active CN113225450B (zh) 2020-02-06 2020-02-06 视频处理方法、视频处理装置及电子设备

Country Status (1)

Country Link
CN (1) CN113225450B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114187169B (zh) * 2021-12-10 2024-06-28 北京字节跳动网络技术有限公司 视频特效包的生成方法、装置、设备及存储介质
CN114567805B (zh) * 2022-02-24 2024-06-14 北京字跳网络技术有限公司 确定特效视频的方法、装置、电子设备及存储介质
CN117812459A (zh) * 2022-09-23 2024-04-02 北京字跳网络技术有限公司 视频处理方法、装置、设备及介质

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109691110B (zh) * 2016-09-08 2023-07-25 佳稳集团有限公司 利用空间布局信息的同步多视点影像的编码/解码方法以及其装置
CN107948721B (zh) * 2017-11-23 2020-07-10 百度在线网络技术(北京)有限公司 推送信息的方法和装置
CN109173263B (zh) * 2018-08-31 2021-08-24 腾讯科技(深圳)有限公司 一种图像数据处理方法和装置
CN109495695A (zh) * 2018-11-29 2019-03-19 北京字节跳动网络技术有限公司 运动物体视频特效添加方法、装置、终端设备及存储介质

Also Published As

Publication number Publication date
CN113225450A (zh) 2021-08-06

Similar Documents

Publication Publication Date Title
CN113225450B (zh) 视频处理方法、视频处理装置及电子设备
US10609308B2 (en) Overly non-video content on a mobile device
US9674584B2 (en) Interactive product placement system and method therefor
US8745657B2 (en) Inserting interactive objects into video content
JP5465620B2 (ja) 映像コンテンツに重畳する付加情報の領域を決定する映像出力装置、プログラム及び方法
US9881584B2 (en) System and method for presenting content within virtual reality environment
EP1928148A1 (en) Apparatus and method for linking basic device and extended devices
KR102319423B1 (ko) 컨텍스트 기반 증강 광고
US20080291218A1 (en) System And Method For Generating Interactive Video Images
JP2000165829A (ja) タンデム方式で表示するための方法およびコンピュ―タ・プログラム・デバイス
CN113225587B (zh) 视频处理方法、视频处理装置及电子设备
TW201036437A (en) Systems and methods for providing closed captioning in three-dimensional imagery
Kim Authoring multisensorial content
KR20130127423A (ko) 멀티미디어 애플리케이션을 위한 pip 방법
JP2004304791A (ja) デジタルシネマフレームコンテンツを修正する方法及び装置
Hughes et al. Disruptive approaches for subtitling in immersive environments
JP2005527158A (ja) プレゼンテーションシンセサイザ
CN106507175A (zh) 视频图像处理方法及装置
CN113301425A (zh) 视频播放方法、视频播放装置及电子设备
US20090219168A1 (en) Living posters
CN114501127B (zh) 在多画面视频中插入数字内容
CN113222995A (zh) 视频处理方法、视频处理装置及电子设备
CN113298926A (zh) 视频处理方法、视频处理装置及电子设备
KR102460671B1 (ko) 실감 효과 적응 방법 및 이를 수행하는 적응 엔진 및 실감 장치
EP4415368A1 (en) Information processing apparatus, management apparatus, information processing method, control method for management apparatus, and program

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant