CN108024071B - 视频内容生成方法、视频内容生成装置及存储介质 - Google Patents

视频内容生成方法、视频内容生成装置及存储介质 Download PDF

Info

Publication number
CN108024071B
CN108024071B CN201711190271.8A CN201711190271A CN108024071B CN 108024071 B CN108024071 B CN 108024071B CN 201711190271 A CN201711190271 A CN 201711190271A CN 108024071 B CN108024071 B CN 108024071B
Authority
CN
China
Prior art keywords
video
default
switching
paragraph
background
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711190271.8A
Other languages
English (en)
Other versions
CN108024071A (zh
Inventor
汪倩怡
王志斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Cyber Tianjin Co Ltd
Original Assignee
Tencent Cyber Tianjin Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Cyber Tianjin Co Ltd filed Critical Tencent Cyber Tianjin Co Ltd
Priority to CN201711190271.8A priority Critical patent/CN108024071B/zh
Publication of CN108024071A publication Critical patent/CN108024071A/zh
Application granted granted Critical
Publication of CN108024071B publication Critical patent/CN108024071B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/268Signal distribution or switching

Abstract

本发明提供一种视频内容生成方法,其包括根据视频录制开始指令,获取默认背景视频、默认前景视频以及拍摄人物视频;根据默认背景视频、默认前景视频以及拍摄人物视频,合成对应的视频段落;识别拍摄人物视频中的人物动作;当人物动作包括视频段落切换动作时,根据视频段落切换动作获取切换背景视频;将切换背景视频设定为默认背景视频,并转到视频段落合成的步骤,直至接收到视频录制结束指令;以及根据视频录制结束指令,将所有的视频段落进行合成,以生成对应的视频内容。本发明还提供一种视频内容生成装置及计算机可读存储介质。本发明通过对拍摄人物视频中人物动作的识别,实现了多个视频段落的自动生成以及自动切换。

Description

视频内容生成方法、视频内容生成装置及存储介质
技术领域
本发明涉及视频处理领域,特别是涉及一种视频内容生成方法、视频内容生成装置及存储介质。
背景技术
随着互联网产业的发展,用户对互联网内容的要求也越来越高,如希望制作具有自己个性化的图片或视频等。
当用户想自己拍摄一段视频内容时(如MV歌曲视频等),由于拍摄环境的限制,拍摄的视频往往无法很难达到用户的拍摄要求,如拍摄背景要求、拍摄道具要求以及拍摄画面效果要求等。
这样用户一般会后期对拍摄视频进行再次编辑,如对拍摄背景进行切换、对拍摄画面增加字幕或动态效果等。但是上述视频编辑需要通过较为专业的视频编辑软件进行,且如果原视频的背景画面,与切换的背景画面或增加的动态效果不兼容,可能会导致拍摄的人物与背景画面无法融合。因此现有的视频内容生成方法中视频制作过程的专业化程度要求较高且视频制作的稳定性较差。
发明内容
本发明实施例提供一种可自动完成视频内容制作过程,且视频制作的稳定性较好的视频内容生成方法、视频内容生成装置及存储介质;以解决现有的视频内容生成方法中视频制作过程的专业化程度要求较高且视频制作的稳定性较差的技术问题。
本发明实施例提供一种视频内容生成方法,其包括:
根据视频录制开始指令,获取默认背景视频、默认前景视频以及拍摄人物视频;
根据所述默认背景视频、所述默认前景视频以及所述拍摄人物视频,合成对应的视频段落;
识别所述拍摄人物视频中的人物动作;当所述人物动作包括视频段落切换动作时,根据所述视频段落切换动作获取切换背景视频;
将所述切换背景视频设定为所述默认背景视频,并转到视频段落合成的步骤,直至接收到视频录制结束指令;以及
根据所述视频录制结束指令,将所有的视频段落进行合成,以生成对应的视频内容。
本发明实施例还提供一种视频内容生成装置,其包括:
视频内容获取模块,用于根据视频录制开始指令,获取默认背景视频、默认前景视频以及拍摄人物视频;
视频段落合成模块,用于根据所述默认背景视频、所述默认前景视频以及所述拍摄人物视频,合成对应的视频段落;
视频段落切换模块,用于识别所述拍摄人物视频中的人物动作;当所述人物动作包括视频段落切换动作时,根据所述视频段落切换动作获取切换背景视频;
视频参数设定模块,用于将所述切换背景视频设定为所述默认背景视频,并转到视频段落合成的步骤,直至接收到视频录制结束指令;以及
视频内容生成模块,用于根据所述视频录制结束指令,将所有的视频段落进行合成,以生成对应的视频内容。
本发明实施例所述的视频内容生成装置中,所述默认背景视频的视频画面长度大于所述拍摄人物视频的视频画面长度,所述默认背景视频的视频画面宽度大于所述拍摄人物视频的视频画面宽度;
所述视频段落合成模块包括:
拍摄角度获取单元,用于获取对应视频拍摄装置的拍摄角度;以及
背景视频展示位置确定单元,用于根据所述视频拍摄装置的拍摄角度,确定所述默认背景视频在视频内容画面中的展示位置。
本发明实施例所述的视频内容生成装置中,所述视频段落合成模块还包括:
背景视频设置单元,用于当所述默认背景视频的视频画面在视频内容画面中存在无内容区域,则将所述默认背景视频设置为循环默认背景视频,以消除所述无内容区域。
本发明实施例还提供一种存储介质,其内存储有处理器可执行指令,该处理器通过执行上述指令提供上述的视频内容生成方法。
相较于现有技术,本发明的视频内容生成方法、视频内容生成装置及存储介质通过对拍摄人物视频中人物动作的识别,实现了多个视频段落的自动生成以及自动切换;从而实现了视频内容制作过程的自动完成,且视频内容制作的稳定性较好;解决了现有的视频内容生成方法中视频制作过程的专业化程度要求较高且视频制作的稳定性较差的技术问题。
附图说明
图1为本发明的视频内容生成方法的一实施例的流程图;
图2为本发明的视频内容生成方法的另一实施例的流程图;
图3为本发明的视频内容生成方法的另一实施例的步骤S201的流程图;
图4为本发明的视频内容生成方法的另一实施例的步骤S202的流程图;
图5为本发明的视频内容生成装置的一实施例的结构示意图;
图6为本发明的视频内容生成装置的另一实施例的结构示意图;
图7为本发明的视频内容生成装置的另一实施例的视频内容获取模块的结构示意图;
图8为本发明的视频内容生成装置的另一实施例的视频段落合成模块的结构示意图;
图9为本发明的视频内容生成方法及视频内容生成装置的具体实施例的流程示意图。
图10A至图10D为本发明的视频内容生成方法及视频内容生成装置的具体实施例的视频内容画面帧示意图;
图11A、图11B为本发明的视频内容生成方法及视频内容生成装置的具体实施例的全景背景视频的视频内容画面帧示意图;
图12为本发明的视频内容生成装置所在的电子设备的工作环境结构示意图。
具体实施方式
请参照图式,其中相同的组件符号代表相同的组件,本发明的原理是以实施在一适当的运算环境中来举例说明。以下的说明是基于所例示的本发明具体实施例,其不应被视为限制本发明未在此详述的其它具体实施例。
在以下的说明中,本发明的具体实施例将参考由一部或多部计算机所执行之作业的步骤及符号来说明,除非另有述明。因此,其将可了解到这些步骤及操作,其中有数次提到为由计算机执行,包括了由代表了以一结构化型式中的数据之电子信号的计算机处理单元所操纵。此操纵转换该数据或将其维持在该计算机之内存系统中的位置处,其可重新配置或另外以本领域技术人员所熟知的方式来改变该计算机之运作。该数据所维持的数据结构为该内存之实体位置,其具有由该数据格式所定义的特定特性。但是,本发明原理以上述文字来说明,其并不代表为一种限制,本领域技术人员将可了解到以下所述的多种步骤及操作亦可实施在硬件当中。
本发明的视频内容生成方法及视频内容生成装置可设置在任何的电子设备中,用于接收视频录制开始指令以及视频录制结束指令,以完成如MV歌曲视频等视频内容的DIY制作。电子设备包括但不限于可穿戴设备、头戴设备、医疗健康平台、个人计算机、服务器计算机、手持式或膝上型设备、移动设备(比如移动电话、个人数字助理(PDA)、媒体播放器等等)、多处理器系统、消费型电子设备、小型计算机、大型计算机、包括上述任意系统或设备的分布式计算环境,等等。该电子设备优选为移动电子终端或固定电子终端。本发明的视频内容生成方法及视频内容生成装置通过对拍摄人物视频中人物动作的识别,实现了多个视频段落的自动生成以及自动切换;从而实现了视频内容制作过程的自动完成,且视频内容制作的稳定性较好;可有效的解决现有的视频内容生成方法中视频制作过程的专业化程度要求较高且视频制作的稳定性较差的技术问题。
请参照图1,图1为本发明的视频内容生成方法的一实施例的流程图。本实施例的视频内容生成方法可使用上述的电子设备进行实施,本实施例的视频内容生成方法包括:
步骤S101,根据视频录制开始指令,获取默认背景视频、默认前景视频以及拍摄人物视频;
步骤S102,根据默认背景视频、默认前景视频以及拍摄人物视频,合成对应的视频段落;
步骤S103,识别拍摄人物视频中的人物动作;当人物动作包括视频段落切换动作时,根据视频段落切换动作获取切换背景视频;
步骤S104,将切换背景视频设定为默认背景视频,并转到视频段落合成的步骤,直至接收到视频录制结束指令;
步骤S105,根据视频录制结束指令,将所有的视频段落进行合成,以生成对应的视频内容。
下面详细说明本实施例的视频内容生成方法的视频内容生成过程。
在步骤S101中,视频内容生成装置(如设置在移动电子终端中)接收视频录制开始指令。该视频录制开始指令是指用户开始录制视频内容的指令。
该视频内容包括背景视频、前景视频以及人物视频。
其中背景视频是指预先设定处于人物视频后方,作为视频内容背景的视频,如星空的视频,花丛的视频等远景视频。前景视频是指预先设定处于人物视频前方,作为视频内容前景的视频,如延伸至人物前的树枝以及花朵等近景视频。人物视频是指视频内容的主体,为该视频内容的主要展示对象。
随后视频内容生成装置根据接收到的视频录制开始指令,获取默认背景视频、默认前景视频以及拍摄人物视频。由于刚开始拍摄,背景视频以及前景视频均为预先设置好的默认背景视频以及默认前景视频。
在步骤S102中,视频内容生成装置根据步骤S101获取的默认背景视频、默认前景视频以及拍摄人物视频,合成对应的视频段落。即将默认背景视频、拍摄人物视频以及默认前景视频进行叠加合成,以形成视频段落。
在步骤S103中,由于用户希望视频内容可以对背景视频进行替换,因此在本步骤中,视频内容生成装置会识别步骤S102中的拍摄人物视频中的人物动作,并根据人物动作完成对背景视频的切换,即对视频段落进行切换。
具体的,当视频内容生成装置识别到拍摄人物视频中的人物动作包括视频段落切换动作时,则根据该视频段落切换动作获取切换背景视频。这里的视频段落切换动作为预先设置的进行视频内容的背景视频切换的人物动作。如人物的挥手动作、人物的点头动作或人物的转身动作等。
这里的切换背景视频可为预先设置的背景视频或随机设置的其他背景视频,也可以是与人物动作对应的背景视频。如当人物动作为右手挥手动作时,对应的切换背景视频为星空;当人物动作为转身动作时,对应的切换背景视频为草地等。这里可以设置多个视频段落切换动作,不同的视频段落切换动作可以对应相同或不同的切换背景视频,或仅仅作为背景视频的切换指令。
在步骤S104中,视频内容生成装置将步骤S103获取的切换背景视频设定为默认背景视频,并转到步骤S102,以合成对应的视频段落。这样即完成了不同的视频段落之间的切换。如接收到视频录制结束指令,则转到步骤S105。这里的视频录制结束指令是指用户结束录制视频内容的指令。
在步骤S105中,视频内容生成装置根据步骤S104接收的视频录制结束指令,将步骤S102生成的所有视频段落进行合成,从而生成对应的视频内容。由于视频段落之间的切换位置清晰,因此可自动根据多个视频段落准确的生成视频内容。
这样即完成了本优选实施例的视频内容生成方法的视频内容生成过程。
本实施例的视频内容生成方法通过对拍摄人物视频中人物动作的识别,实现了多个视频段落的自动生成以及自动切换;从而实现了视频内容制作过程的自动完成,且视频内容制作的稳定性较好。
请参照图2,图2为本发明的视频内容生成方法的另一实施例的流程图。本实施例的视频内容生成方法可使用上述的电子设备进行实施,本实施例的视频内容生成方法包括:
步骤S201,根据视频录制开始指令,获取默认背景视频、默认前景视频以及拍摄人物视频;
步骤S202,根据默认背景视频、默认前景视频以及拍摄人物视频,合成对应的视频段落;
步骤S203,识别拍摄人物视频中的人物动作;当人物动作包括视频段落切换动作时,根据视频段落切换动作获取切换背景视频和切换前景视频;
步骤S204,将切换背景视频设定为默认背景视频,将切换前景视频设定为默认前景视频,并转到视频段落合成的步骤,直至接收到视频录制结束指令;
步骤S205,当由一视频段落转到另一视频段落时,根据切换前后的视频段落,设置用于进行视频段落过渡的过渡动画;
步骤S206,根据视频录制结束指令,将所有的视频段落进行合成,以生成对应的视频内容。
下面详细说明本实施例的视频内容生成方法的视频内容生成过程。
在步骤S201中,视频内容生成装置根据视频录制开始指令,获取默认背景视频、默认前景视频以及拍摄人物视频。由于刚开始拍摄,背景视频以及前景视频均为预先设置好的默认背景视频以及默认前景视频。
请参照图3,图3为本发明的视频内容生成方法的另一实施例的步骤S201的流程图;该步骤S201中获取拍摄人物视频的步骤包括:
步骤S301,视频内容生成装置根据视频录制开始指令,获取拍摄视频。这里的拍摄视频是指包括用户当前拍摄背景的视频。
步骤S302,视频内容生成装置通过抠图软件,对拍摄视频中的人物进行自动识别,返回包含人物的轮廓区域。随后视频内容生成装置根据人物的轮廓区域将拍摄视频的背景视频扣除,获取对应的拍摄人物视频。此时还可对拍摄人物视频叠加描边、添加羽化效果、背景虚化效果以及光斑效果等。
步骤S303,视频内容生成装置基于获取的默认背景视频以及默认前景视频,对拍摄人物视频进行视频画面特效处理。
如对拍摄人物视频的人像部分进行肤色美白处理,人脸区域绘制动态贴纸等。这里还可对拍摄人物视频的整体画面色调进行调整,使得拍摄人物视频的画面色调更加符合默认背景视频以及默认前景视频的画面色调。
在步骤S202中,视频内容生成装置根据步骤S201获取的默认背景视频、默认前景视频以及拍摄人物视频,合成对应的视频段落。即将默认背景视频、拍摄人物视频以及默认前景视频进行叠加合成,以形成视频段落。
请参照图4,图4为本发明的视频内容生成方法的另一实施例的步骤S202的流程图;该步骤S202中合成视频段落的步骤包括:
步骤S401,视频内容生成装置基于视频录制时间点,获取对应的默认背景视频的默认背景视频帧、默认前景视频的默认前景视频帧以及拍摄人物视频的拍摄人物视频帧。
步骤S402,视频内容生成装置对步骤S401获取的默认背景视频帧以及默认前景视频帧进行解码操作,以便后续进行渲染以及汇总合成操作。
这里的解码操作可以设置各种解码规避预案,如提前预解码(当视频帧过大时)、异步解码(当视频帧大小差异较大时)或重置解码(当需要跳帧处理时)等。
步骤S403,视频内容生成装置对解码操作后的默认前景视频帧进行画面渲染操作、对解码操作后的默认前景视频帧进行画面渲染操作以及对拍摄人物视频帧进行画面渲染操作。这里还可对拍摄人物视频帧增加画面特效,如对拍摄人物视频帧中的拍摄人物进行缩放以及旋转等效果,还可设置四格镜像以及万花筒等多格效果。
步骤S404,视频内容生成装置使用OpenGL提供的绘图接口将上述画面渲染操作后的默认背景视频帧、画面渲染操作的默认前景视频帧以及画面渲染操作后的拍摄人物视频帧进行汇总合成,以形成视频段落的视频帧,进而后续合成视频段落。
具体的,这里还可将默认背景视频设置为全景背景视频,即默认背景视频的视频画面长度大于拍摄人物视频的视频画面长度,默认背景视频的视频画面宽度大于拍摄任务视频的视频画面宽度。
合成视频段落时,视频内容生成装置首先获取对应视频拍摄装置的拍摄角度。
随后视频内容生成装置根据视频拍摄装置的拍摄角度,确定默认背景视频在视频内容画面中的展示位置。即实现了默认背景视频随着视频拍摄装置的拍摄角度变化而变化,提升了生成的视频内容的全景感观。
同时在合成视频段落时,由于默认背景视频随着视频拍摄装置的拍摄角度变化而变化,可能会导致默认背景视频的视频画面在视频内容画面中存在无内容区域;即当视频拍摄装置的拍摄角度变化较大时,这时由于默认背景视频的视频画面尺寸的关系,默认背景视频的边缘可能会存在无内容区域。
为了避免无内容区域的存在,当检测到默认背景视频中的无内容区域时,视频内容生成装置将默认背景视频设置为循环默认背景视频,即在原默认背景视频的无内容区域的一侧继续设置一相同的默认背景视频,以消除该无内容区域。或者在默认在无内容区域设置特定图案,如蓝天图案或大海图案等。
在步骤S203中,视频内容生成装置会识别步骤S202中的拍摄人物视频中的人物动作,并根据人物动作完成对背景视频和前景视频的切换,即对视频段落进行切换。
具体的,当视频内容生成装置识别到拍摄人物视频中的人物动作包括视频段落切换动作时,则根据该视频段落切换动作获取切换背景视频和切换前景视频。这里的视频段落切换动作为预先设置的进行视频内容的背景视频切换的人物动作。如人物的挥手动作、人物的点头动作或人物的转身动作等。
这里的切换背景视频可为预先设置的背景视频或随机设置的其他背景视频,也可以是与人物动作对应的背景视频。如当人物动作为右手挥手动作时,对应的切换背景视频为星空;当人物动作为转身动作时,对应的切换背景视频为草地等。这里可以设置多个视频段落切换动作,不同的视频段落切换动作可以对应相同或不同的切换背景视频,或仅仅作为背景视频的切换指令。
这里的切换前景视频可为预先设置的前景视频或随机设置的其他前景视频,也可以是与人物动作和/或切换背景视频对应的前景视频。如当人物动作为右手挥手动作时,对应的切换背景视频为星空,对应的切换前景视频为人物身前的星星;当人物动作为转身动作时,对应的切换背景视频为草地,对应的切换前景视频为人物身前的鲜花等。不同的视频段落切换动作可以对应相同或不同的切换前景视频,或仅仅作为前景视频的切换指令。
在步骤S204中,视频内容生成装置将步骤S203获取的切换背景视频设定为默认背景视频,将切换前景视频设定为默认前景视频,并转到步骤S202,以合成对应的视频段落。这样即完成了不同的视频段落之间的切换。如接收到视频录制结束指令,则转到步骤S206。这里的视频录制结束指令是指用户结束录制视频内容的指令。
在步骤S205中,当由一视频段落转到另一视频段落时,根据切换前后的视频段落,设置用于进行视频段落过渡的过渡动画。
由于不同视频段落之间的背景视频发生了变化,因此如直接从一视频段落转到另一视频段落,则可能会造成视频内容的卡顿或不连贯。因此在本步骤中在视频段落之间设置用于视频段落过渡的过渡动画,如运动模糊的切换动画以及各种遮罩(mask)形状视频,如一个圆圈从小到大再从大到小出现等。
这里过渡动画的随机选择,也可以根据切换前后的视频段落进行选择,如切换前后的视频段落均为黑白色系的画面,则可同样选择黑白色系的过渡动画,以保证视频内容整体画面色调的一致。
在步骤S206中,视频内容生成装置根据步骤S204接收的视频录制结束指令,将步骤S202生成的所有视频段落以及步骤S205设置的过渡动画进行合成,从而生成对应的视频内容。由于视频段落之间的切换位置清晰,因此可自动根据多个视频段落准确的生成视频内容。
这样即完成了本优选实施例的视频内容生成方法的视频内容生成过程。
本实施例的视频内容生成方法通过对拍摄人物视频中人物动作的识别,实现了多个视频段落的自动生成以及自动切换;从而实现了视频内容制作过程的自动完成,且视频内容制作的稳定性较好。
同时本实施例的视频内容生成方法通过抠图软件扣除拍摄视频的背景视频,从而保证了拍摄人物视频和默认背景视频的合成稳定性。本实施例的视频内容生成方法可在默认前景视频、拍摄人物视频以及默认背景视频中增加多种画面特效以及色调调整,以增加视频内容的多样性以及色调一致性。
此外本实施例的视频内容生成方法中的默认背景视频设置为全景背景视频以及过渡动画的设置可进一步增加视频内容的多样性以及画面连续性。
本发明还提供一种视频内容生成装置,请参照图5,图5为本发明的视频内容生成装置的一实施例的结构示意图。本实施例的视频内容生成装置可使用上述的电子设备进行实施,本实施例的视频内容生成装置50包括视频内容获取模块51、视频段落合成模块52、视频段落切换模块53、视频参数设定模块54以及视频内容生成模块55。
视频内容获取模块51用于根据视频录制开始指令,获取默认背景视频、默认前景视频以及拍摄人物视频;视频段落合成模块52用于根据默认背景视频、默认前景视频以及拍摄人物视频,合成对应的视频段落;视频段落切换模块53用于识别拍摄人物视频中的人物动作;当人物动作包括视频段落切换动作时,根据视频段落切换动作获取切换背景视频;视频参数设定模块54用于将切换背景视频设定为默认背景视频,并转到视频段落合成的步骤,直至接收到视频录制结束指令;视频内容生成模块55用于根据视频录制结束指令,将所有的视频段落进行合成,以生成对应的视频内容。
本实施例的视频内容生成装置50使用时,首先视频内容获取模块51接收视频录制开始指令。该视频录制开始指令是指用户开始录制视频内容的指令。
该视频内容包括背景视频、前景视频以及人物视频。
其中背景视频是指预先设定处于人物视频后方,作为视频内容背景的视频,如星空的视频,花丛的视频等远景视频。前景视频是指预先设定处于人物视频前方,作为视频内容前景的视频,如延伸至人物前的树枝以及花朵等近景视频。人物视频是指视频内容的主体,为该视频内容的主要展示对象。
随后视频内容获取模块51根据接收到的视频录制开始指令,获取默认背景视频、默认前景视频以及拍摄人物视频。由于刚开始拍摄,背景视频以及前景视频均为预先设置好的默认背景视频以及默认前景视频。
然后视频段落合成模块52根据视频内容获取模块51获取的默认背景视频、默认前景视频以及拍摄人物视频,合成对应的视频段落。即将默认背景视频、拍摄人物视频以及默认前景视频进行叠加合成,以形成视频段落。
由于用户希望视频内容可以对背景视频进行替换,因此随后视频段落切换模块53会识别拍摄人物视频中的人物动作,并根据人物动作完成对背景视频的切换,即对视频段落进行切换。
具体的,当视频段落切换模块53识别到拍摄人物视频中的人物动作包括视频段落切换动作时,则根据该视频段落切换动作获取切换背景视频。这里的视频段落切换动作为预先设置的进行视频内容的背景视频切换的人物动作。如人物的挥手动作、人物的点头动作或人物的转身动作等。
这里的切换背景视频可为预先设置的背景视频或随机设置的其他背景视频,也可以是与人物动作对应的背景视频。如当人物动作为右手挥手动作时,对应的切换背景视频为星空;当人物动作为转身动作时,对应的切换背景视频为草地等。这里可以设置多个视频段落切换动作,不同的视频段落切换动作可以对应相同或不同的切换背景视频,或仅仅作为背景视频的切换指令。
随后视频参数设定模块54将视频段落切换模块53获取的切换背景视频设定为默认背景视频,并转到视频段落合成模块52,以合成对应的视频段落。这样即完成了不同的视频段落之间的切换。如接收到视频录制结束指令,则转到视频内容生成模块55。这里的视频录制结束指令是指用户结束录制视频内容的指令。
最后视频内容生成模块55根据视频参数设定模块54接收的视频录制结束指令,将视频段落合成模块52生成的所有视频段落进行合成,从而生成对应的视频内容。由于视频段落之间的切换位置清晰,因此可自动根据多个视频段落准确的生成视频内容。
这样即完成了本优选实施例的视频内容生成装置50的视频内容生成过程。
本实施例的视频内容生成装置通过对拍摄人物视频中人物动作的识别,实现了多个视频段落的自动生成以及自动切换;从而实现了视频内容制作过程的自动完成,且视频内容制作的稳定性较好。
请参照图6,图6为本发明的视频内容生成装置的另一实施例的结构示意图。本实施例的视频内容生成装置可使用上述的电子设备进行实施,本实施例的视频内容生成装置60包括视频内容获取模块61、视频段落合成模块62、视频段落切换模块63、视频参数设定模块64、过渡动画设置模块65以及视频内容生成模块66。
视频内容获取模块61用于根据视频录制开始指令,获取默认背景视频、默认前景视频以及拍摄人物视频。视频段落合成模块62用于根据默认背景视频、默认前景视频以及拍摄人物视频,合成对应的视频段落。视频段落切换模块63用于识别拍摄人物视频中的人物动作;当人物动作包括视频段落切换动作时,根据视频段落切换动作获取切换背景视频和切换前景视频。视频参数设定模块64用于将切换背景视频设定为默认背景视频,将切换前景视频设定为默认前景视频,并转到视频段落合成的步骤,直至收到视频录制结束指令。过渡动画设置模块65用于当由一视频段落转到另一视频段落时,根据切换前后的视频段落,设置用于进行视频段落过渡的过渡动画。视频内容生成模块66用于根据视频录制结束指令,将所有的视频段落进行合成,以生成对应的视频内容。
请参照图7,图7为本发明的视频内容生成装置的另一实施例的视频内容获取模块的结构示意图。该视频内容获取模块61包括拍摄视频获取单元71、拍摄人物视频获取单元72以及视频画面特效处理单元73。
拍摄视频获取单元71用于根据视频录制开始指令,获取拍摄视频;拍摄人物视频获取单元72用于通过抠图软件,获取拍摄视频中的拍摄人物视频;视频画面特效处理单元73用于基于默认背景视频以及默认前景视频,对所述拍摄人物视频进行视频画面特效处理。
请参照图8,图8为本发明的视频内容生成装置的另一实施例的视频段落合成模块的结构示意图。该视频段落合成模块62包括视频帧获取单元81、解码单元82、画面渲染单元83、视频段落合成单元84、拍摄角度获取单元85、背景视频展示位置确定单元86以及背景视频设置单元87。
视频帧获取单元81用于基于视频录制时间点,获取对应的默认背景视频的默认背景视频帧、默认前景视频的默认前景视频帧以及拍摄人物视频的拍摄人物视频帧。解码单元82用于对默认背景视频帧以及默认前景视频帧进行解码操作。画面渲染单元83用于对解码操作后的默认前景视频帧进行画面渲染操作、对解码操作后的默认前景视频帧进行画面渲染操作以及对拍摄人物视频帧进行画面渲染操作。视频段落合成单元84用于使用绘图接口将画面渲染操作后的默认背景视频帧、画面渲染操作的默认前景视频帧以及画面渲染操作后的拍摄人物视频帧进行汇总合成,以形成所述视频段落的视频帧,进而合成所述视频段落。拍摄角度获取单元85用于获取对应视频拍摄装置的拍摄角度。背景视频展示位置确定单元86用于根据视频拍摄装置的拍摄角度,确定默认背景视频在视频内容画面中的展示位置。背景视频设置单元87用于当默认背景视频的视频画面在视频内容画面中存在无内容区域,则将默认背景视频设置为循环默认背景视频,以消除无内容区域。
本实施例的视频内容生成装置60使用时,首先视频内容获取模块61根据视频录制开始指令,获取默认背景视频、默认前景视频以及拍摄人物视频。由于刚开始拍摄,背景视频以及前景视频均为预先设置好的默认背景视频以及默认前景视频。
具体的,视频内容获取模块61获取拍摄人物视频的步骤包括:
视频内容获取模块61的拍摄视频获取单元71根据视频录制开始指令,获取拍摄视频。这里的拍摄视频是指包括用户当前拍摄背景的视频。
视频内容获取模块61的拍摄人物视频获取单元72通过抠图软件,对拍摄视频中的人物进行自动识别,返回包含人物的轮廓区域。随后拍摄人物视频获取单元72根据人物的轮廓区域将拍摄视频的背景视频扣除,获取对应的拍摄人物视频。此时还可对拍摄人物视频叠加描边、添加羽化效果、背景虚化效果以及光斑效果等。
视频内容获取模块61的视频画面特效处理单元73基于获取的默认背景视频以及默认前景视频,对拍摄人物视频进行视频画面特效处理。
如对拍摄人物视频的人像部分进行肤色美白处理,人脸区域绘制动态贴纸等。这里还可对拍摄人物视频的整体画面色调进行调整,使得拍摄人物视频的画面色调更加符合默认背景视频以及默认前景视频的画面色调。
随后视频段落合成模块62根据视频内容获取模块61获取的默认背景视频、默认前景视频以及拍摄人物视频,合成对应的视频段落。即将默认背景视频、拍摄人物视频以及默认前景视频进行叠加合成,以形成视频段落。
具体的,视频段落合成模块62合成视频段落的步骤包括:
视频段落合成模块62的视频帧获取单元81基于视频录制时间点,获取对应的默认背景视频的默认背景视频帧、默认前景视频的默认前景视频帧以及拍摄人物视频的拍摄人物视频帧。
视频段落合成模块62的解码单元82对视频帧获取单元81获取的默认背景视频帧以及默认前景视频帧进行解码操作,以便后续进行渲染以及汇总合成操作。
这里的解码操作可以设置各种解码规避预案,如提前预解码(当视频帧过大时)、异步解码(当视频帧大小差异较大时)或重置解码(当需要跳帧处理时)等。
视频段落合成模块62的画面渲染单元83对解码操作后的默认前景视频帧进行画面渲染操作、对解码操作后的默认前景视频帧进行画面渲染操作以及对拍摄人物视频帧进行画面渲染操作。这里还可对拍摄人物视频帧增加画面特效,如对拍摄人物视频帧中的拍摄人物进行缩放以及旋转等效果,还可设置四格镜像以及万花筒等多格效果。
视频段落合成模块62的视频段落合成单元84使用OpenGL提供的绘图接口将上述画面渲染操作后的默认背景视频帧、画面渲染操作的默认前景视频帧以及画面渲染操作后的拍摄人物视频帧进行汇总合成,以形成视频段落的视频帧,进而后续合成视频段落。
具体的,这里还可将默认背景视频设置为全景背景视频,即默认背景视频的视频画面长度大于拍摄人物视频的视频画面长度,默认背景视频的视频画面宽度大于拍摄任务视频的视频画面宽度。
合成视频段落时,视频段落合成模块62的拍摄角度获取单元85首先获取对应视频拍摄装置的拍摄角度。
随后视频段落合成模块62的背景视频展示位置确定单元86根据视频拍摄装置的拍摄角度,确定默认背景视频在视频内容画面中的展示位置。即实现了默认背景视频随着视频拍摄装置的拍摄角度变化而变化,提升了生成的视频内容的全景感观。
同时在合成视频段落时,由于默认背景视频随着视频拍摄装置的拍摄角度变化而变化,可能会导致默认背景视频的视频画面在视频内容画面中存在无内容区域;即当视频拍摄装置的拍摄角度变化较大时,这时由于默认背景视频的视频画面尺寸的关系,默认背景视频的边缘可能会存在无内容区域。
为了避免无内容区域的存在,当检测到默认背景视频中的无内容区域时,视频段落合成模块62的背景视频设置单元87将默认背景视频设置为循环默认背景视频,即在原默认背景视频的无内容区域的一侧继续设置一相同的默认背景视频,以消除该无内容区域。或者在默认在无内容区域设置特定图案,如蓝天图案或大海图案等。
然后视频段落切换模块63会识别拍摄人物视频中的人物动作,并根据人物动作完成对背景视频和前景视频的切换,即对视频段落进行切换。
具体的,当视频段落切换模块63识别到拍摄人物视频中的人物动作包括视频段落切换动作时,则根据该视频段落切换动作获取切换背景视频和切换前景视频。这里的视频段落切换动作为预先设置的进行视频内容的背景视频切换的人物动作。如人物的挥手动作、人物的点头动作或人物的转身动作等。
这里的切换背景视频可为预先设置的背景视频或随机设置的其他背景视频,也可以是与人物动作对应的背景视频。如当人物动作为右手挥手动作时,对应的切换背景视频为星空;当人物动作为转身动作时,对应的切换背景视频为草地等。这里可以设置多个视频段落切换动作,不同的视频段落切换动作可以对应相同或不同的切换背景视频,或仅仅作为背景视频的切换指令。
这里的切换前景视频可为预先设置的前景视频或随机设置的其他前景视频,也可以是与人物动作和/或切换背景视频对应的前景视频。如当人物动作为右手挥手动作时,对应的切换背景视频为星空,对应的切换前景视频为人物身前的星星;当人物动作为转身动作时,对应的切换背景视频为草地,对应的切换前景视频为人物身前的鲜花等。不同的视频段落切换动作可以对应相同或不同的切换前景视频,或仅仅作为前景视频的切换指令。
随后视频参数设定模块64将视频段落切换模块63获取的切换背景视频设定为默认背景视频,将切换前景视频设定为默认前景视频,并转到视频段落合成模块62,以合成对应的视频段落。这样即完成了不同的视频段落之间的切换。如接收到视频录制结束指令,则转到视频内容生成模块66。这里的视频录制结束指令是指用户结束录制视频内容的指令。
此外,当由一视频段落转到另一视频段落时,过渡动画设置模块65根据切换前后的视频段落,设置用于进行视频段落过渡的过渡动画。
由于不同视频段落之间的背景视频发生了变化,因此如直接从一视频段落转到另一视频段落,则可能会造成视频内容的卡顿或不连贯。因此过渡动画设置模块65在视频段落之间设置用于视频段落过渡的过渡动画,如运动模糊的切换动画以及各种遮罩(mask)形状视频,如一个圆圈从小到大再从大到小出现等。
这里过渡动画的随机选择,也可以根据切换前后的视频段落进行选择,如切换前后的视频段落均为黑白色系的画面,则可同样选择黑白色系的过渡动画,以保证视频内容整体画面色调的一致。
最后视频内容生成模块66根据接收的视频录制结束指令,将视频段落合成模块生成的所有视频段落以及过渡动画设置模块设置的过渡动画进行合成,从而生成对应的视频内容。由于视频段落之间的切换位置清晰,因此可自动根据多个视频段落准确的生成视频内容。
这样即完成了本优选实施例的视频内容生成装置60的视频内容生成过程。
本实施例的视频内容生成装置通过对拍摄人物视频中人物动作的识别,实现了多个视频段落的自动生成以及自动切换;从而实现了视频内容制作过程的自动完成,且视频内容制作的稳定性较好。
同时本实施例的视频内容生成装置通过抠图软件扣除拍摄视频的背景视频,从而保证了拍摄人物视频和默认背景视频的合成稳定性。本实施例的视频内容生成装置可在默认前景视频、拍摄人物视频以及默认背景视频中增加多种画面特效以及色调调整,以增加视频内容的多样性以及色调一致性。
此外本实施例的视频内容生成装置中的默认背景视频设置为全景背景视频以及过渡动画的设置可进一步增加视频内容的多样性以及画面连续性。
下面通过一具体实施例说明本发明的视频内容生成方法及视频内容生成装置的工作原理。图9为本发明的视频内容生成方法及视频内容生成装置的具体实施例的流程示意图。在本具体实施例中,视频内容生成装置设置在移动终端中,用户通过使用该移动终端来拍摄MV歌曲视频的视频内容。
本具体实施例的视频内容生成装置生成视频内容的步骤包括:
一、移动终端接收视频录制开始指令,即MV歌曲视频的录制开始指令。
二、移动终端获取默认背景视频a1、默认前景视频b1以及拍摄人物视频c,以合成视频段落A1。
具体的,这里可通过移动终端的摄像头获取拍摄视频,随后基于人工智能和大数据的抠图软件,对拍摄视频中的人物图像进行自动识别,从而获取拍摄视频中的拍摄人物视频c。同时可对拍摄人物视频c进行人物图像边缘羽化或半透明化处理,以消除拍摄人物视频c与对应默认背景视频之间的断层感。
然后移动终端可使用肤色识别、双边滤波以及美白滤镜等图像处理算法对拍摄人物视频c进行美化处理。
随后移动终端可调节拍摄人物视频的色调曲线、色阶、饱和度以及亮度,以使得拍摄人物视频的整体色调符合视频内容的整体色调。
同时移动终端还可在拍摄人物视频的人脸区域绘制动态贴纸,如图10A中的和人脸同步移动的猫耳朵贴纸等,以增加视频段落的趣味性;从而形成拍摄人物视频。
最后移动终端对拍摄人物视频c的视频帧、默认背景视频a1以及默认前景视频b1进行画面渲染以及汇总合成,形成视频段落A1的视频帧。具体如图10A所示。其中默认背景视频a1为人物背后的星空,默认前景视频b1为人物前面的星光。
三、当移动终端识别到拍摄人物视频c中的人物转身动作时,移动终端判断需要对视频段落进行切换操作。
四、触发过渡动画,如图10B所示,以形成较好的视频段落过渡。
五、移动终端获取默认背景视频a2、默认前景视频b2以及拍摄人物视频c,以合成视频段落A2。拍摄人物视频c中的动态贴纸也可按要求进行变化(如将透明猫耳朵变成卡通化的猫耳朵)。合成后的视频段落A2的视频帧如图10C所示。其中默认背景视频a2为人物背后的卡通画,默认前景视频b2为人物前面的卡通糖果以及卡通面包。
六、当移动终端识别到拍摄人物视频c中的人物跳跃动作时,移动终端判断需要对视频段落进行切换操作。
七、触发过渡动画,此处过渡动画可与图10B相同,也可与图10B不同。
八、移动终端获取默认背景视频a3、默认前景视频b3以及拍摄人物视频c,以合成视频段落A3。拍摄人物视频c中的动态贴纸也可按要求进行变化(如变成人物佩戴的眼镜)。合成后的视频段落的视频帧A3如图10D所示。其中默认背景视频a3为人物背后的摇滚元素,默认前景视频b3为人物前面的金项链。
九、最后移动终端接收到视频录制结束指令,并根据视频录制结束指令,将上述视频段落A1、视频段落A2、视频段落A3以及对应的过渡动画进行合成,从而形成对应的视频内容。
这样即完成了本具体实施例的视频内容生成方法及视频内容生成装置的视频内容生成过程。
该视频内容通过过渡动画对视频段落进行准确的过渡切换,因此整个视频内容制作过程可由移动终端自行完成视频段落的切换,且最终制作的视频内容的连贯性较好。
此外,本具体实施例的移动终端采用的默认背景视频的视频画面长度大于移动终端的画面展示长度,默认背景视频的视频画面宽度大于移动终端的画面展示宽度。这样移动终端在合成视频段落的视频帧时,默认背景视频可随着移动终端的移动而移动,从而实现了移动终端的默认背景视频的全景展示。具体请参照图11A和图11B,其中默认背景视频随移动终端的拍摄角度不同发生了一定的位置偏移。如默认背景视频的展示位置偏移到了默认背景视频的视频画面边缘,则可循环使用该默认背景视频或使用用户的其他设定视频对边缘处的无内容区域进行填充。
本发明的视频内容生成方法、视频内容生成装置及存储介质通过对拍摄人物视频中人物动作的识别,实现了多个视频段落的自动生成以及自动切换;从而实现了视频内容制作过程的自动完成,且视频内容制作的稳定性较好;解决了现有的视频内容生成方法中视频制作过程的专业化程度要求较高且视频制作的稳定性较差的技术问题。
如本申请所使用的术语“组件”、“模块”、“系统”、“接口”、“进程”等等一般地旨在指计算机相关实体:硬件、硬件和软件的组合、软件或执行中的软件。例如,组件可以是但不限于是运行在处理器上的进程、处理器、对象、可执行应用、执行的线程、程序和/或计算机。通过图示,运行在控制器上的应用和该控制器二者都可以是组件。一个或多个组件可以有在于执行的进程和/或线程内,并且组件可以位于一个计算机上和/或分布在两个或更多计算机之间。
图12和随后的讨论提供了对实现本发明所述的视频内容生成装置所在的电子设备的工作环境的简短、概括的描述。图12的工作环境仅仅是适当的工作环境的一个实例并且不旨在建议关于工作环境的用途或功能的范围的任何限制。实例电子设备1212包括但不限于可穿戴设备、头戴设备、医疗健康平台、个人计算机、服务器计算机、手持式或膝上型设备、移动设备(比如移动电话、个人数字助理(PDA)、媒体播放器等等)、多处理器系统、消费型电子设备、小型计算机、大型计算机、包括上述任意系统或设备的分布式计算环境,等等。
尽管没有要求,但是在“计算机可读指令”被一个或多个电子设备执行的通用背景下描述实施例。计算机可读指令可以经由计算机可读介质来分布(下文讨论)。计算机可读指令可以实现为程序模块,比如执行特定任务或实现特定抽象数据类型的功能、对象、应用编程接口(API)、数据结构等等。典型地,该计算机可读指令的功能可以在各种环境中随意组合或分布。
图12图示了包括本发明的视频内容生成装置中的一个或多个实施例的电子设备1212的实例。在一种配置中,电子设备1212包括至少一个处理单元1216和存储器1218。根据电子设备的确切配置和类型,存储器1218可以是易失性的(比如RAM)、非易失性的(比如ROM、闪存等)或二者的某种组合。该配置在图12中由虚线1214图示。
在其他实施例中,电子设备1212可以包括附加特征和/或功能。例如,设备1212还可以包括附加的存储装置(例如可移除和/或不可移除的),其包括但不限于磁存储装置、光存储装置等等。这种附加存储装置在图12中由存储装置1220图示。在一个实施例中,用于实现本文所提供的一个或多个实施例的计算机可读指令可以在存储装置1220中。存储装置1220还可以存储用于实现操作系统、应用程序等的其他计算机可读指令。计算机可读指令可以载入存储器1218中由例如处理单元1216执行。
本文所使用的术语“计算机可读介质”包括计算机存储介质。计算机存储介质包括以用于存储诸如计算机可读指令或其他数据之类的信息的任何方法或技术实现的易失性和非易失性、可移除和不可移除介质。存储器1218和存储装置1220是计算机存储介质的实例。计算机存储介质包括但不限于RAM、ROM、EEPROM、闪存或其他存储器技术、CD-ROM、数字通用盘(DVD)或其他光存储装置、盒式磁带、磁带、磁盘存储装置或其他磁存储设备、或可以用于存储期望信息并可以被电子设备1212访问的任何其他介质。任意这样的计算机存储介质可以是电子设备1212的一部分。
电子设备1212还可以包括允许电子设备1212与其他设备通信的通信连接1226。通信连接1226可以包括但不限于调制解调器、网络接口卡(NIC)、集成网络接口、射频发射器/接收器、红外端口、USB连接或用于将电子设备1212连接到其他电子设备的其他接口。通信连接1226可以包括有线连接或无线连接。通信连接1226可以发射和/或接收通信媒体。
术语“计算机可读介质”可以包括通信介质。通信介质典型地包含计算机可读指令或诸如载波或其他传输机构之类的“己调制数据信号”中的其他数据,并且包括任何信息递送介质。术语“己调制数据信号”可以包括这样的信号:该信号特性中的一个或多个按照将信息编码到信号中的方式来设置或改变。
电子设备1212可以包括输入设备1224,比如键盘、鼠标、笔、语音输入设备、触摸输入设备、红外相机、视频输入设备和/或任何其他输入设备。设备1212中也可以包括输出设备1222,比如一个或多个显示器、扬声器、打印机和/或任意其他输出设备。输入设备1224和输出设备1222可以经由有线连接、无线连接或其任意组合连接到电子设备1212。在一个实施例中,来自另一个电子设备的输入设备或输出设备可以被用作电子设备1212的输入设备1224或输出设备1222。
电子设备1212的组件可以通过各种互连(比如总线)连接。这样的互连可以包括外围组件互连(PCI)(比如快速PCI)、通用串行总线(USB)、火线(IEEE1394)、光学总线结构等等。在另一个实施例中,电子设备1212的组件可以通过网络互连。例如,存储器1218可以由位于不同物理位置中的、通过网络互连的多个物理存储器单元构成。
本领域技术人员将认识到,用于存储计算机可读指令的存储设备可以跨越网络分布。例如,可经由网络1228访问的电子设备1230可以存储用于实现本发明所提供的一个或多个实施例的计算机可读指令。电子设备1212可以访问电子设备1230并且下载计算机可读指令的一部分或所有以供执行。可替代地,电子设备1212可以按需要下载多条计算机可读指令,或者一些指令可以在电子设备1212处执行并且一些指令可以在电子设备1230处执行。
本文提供了实施例的各种操作。在一个实施例中,所述的一个或多个操作可以构成一个或多个计算机可读介质上存储的计算机可读指令,其在被电子设备执行时将使得计算设备执行所述操作。描述一些或所有操作的顺序不应当被解释为暗示这些操作必需是顺序相关的。本领域技术人员将理解具有本说明书的益处的可替代的排序。而且,应当理解,不是所有操作必需在本文所提供的每个实施例中存在。
而且,尽管已经相对于一个或多个实现方式示出并描述了本公开,但是本领域技术人员基于对本说明书和附图的阅读和理解将会想到等价变型和修改。本公开包括所有这样的修改和变型,并且仅由所附权利要求的范围限制。特别地关于由上述组件(例如元件、资源等)执行的各种功能,用于描述这样的组件的术语旨在对应于执行所述组件的指定功能(例如其在功能上是等价的)的任意组件(除非另外指示),即使在结构上与执行本文所示的本公开的示范性实现方式中的功能的公开结构不等同。此外,尽管本公开的特定特征已经相对于若干实现方式中的仅一个被公开,但是这种特征可以与如可以对给定或特定应用而言是期望和有利的其他实现方式的一个或多个其他特征组合。而且,就术语“包括”、“具有”、“含有”或其变形被用在具体实施方式或权利要求中而言,这样的术语旨在以与术语“包含”相似的方式包括。
本发明实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。上述提到的存储介质可以是只读存储器,磁盘或光盘等。上述的各装置或系统,可以执行相应方法实施例中的方法。
综上所述,虽然本发明已以实施例揭露如上,实施例前的序号仅为描述方便而使用,对本发明各实施例的顺序不造成限制。并且,上述实施例并非用以限制本发明,本领域的普通技术人员,在不脱离本发明的精神和范围内,均可作各种更动与润饰,因此本发明的保护范围以权利要求界定的范围为准。

Claims (14)

1.一种视频内容生成方法,其特征在于,包括:
根据视频录制开始指令,获取默认背景视频、默认前景视频以及拍摄人物视频;
根据所述默认背景视频、所述默认前景视频以及所述拍摄人物视频,合成对应的视频段落;
识别所述拍摄人物视频中的人物动作;当所述人物动作包括视频段落切换动作时,根据所述视频段落切换动作获取切换背景视频;
将所述切换背景视频设定为所述默认背景视频,并转到视频段落合成的步骤,直至接收到视频录制结束指令;以及
根据所述视频录制结束指令,将所有的视频段落进行合成,以生成对应的视频内容;
其中所述默认背景视频的视频画面长度大于所述拍摄人物视频的视频画面长度,所述默认背景视频的视频画面宽度大于所述拍摄人物视频的视频画面宽度;
所述根据所述默认背景视频、所述默认前景视频以及所述拍摄人物视频,合成对应的视频段落的步骤包括:
获取对应视频拍摄装置的拍摄角度;以及
根据所述视频拍摄装置的拍摄角度,确定所述默认背景视频在视频内容画面中的展示位置。
2.根据权利要求1所述的视频内容生成方法,其特征在于,
所述当所述人物动作包括视频段落切换动作时,根据所述视频段落切换动作获取切换背景视频的步骤具体为:
当所述人物动作包括视频段落切换动作时,根据所述视频段落切换动作获取切换背景视频和切换前景视频;
所述将所述切换背景视频设定为所述默认背景视频,并转到视频段落合成的步骤,直至收到视频录制结束指令的步骤具体为:
将所述切换背景视频设定为所述默认背景视频,将所述切换前景视频设定为所述默认前景视频,并转到视频段落合成的步骤,直至接收到视频录制结束指令。
3.根据权利要求1所述的视频内容生成方法,其特征在于,所述视频内容生成方法还包括:
当由一视频段落转到另一视频段落时,设置用于进行所述视频段落过渡的过渡动画。
4.根据权利要求3所述的视频内容生成方法,其特征在于,所述设置用于进行所述视频段落过渡的过渡动画的步骤具体包括:
根据切换前后的视频段落,设置用于进行所述视频段落过渡的过渡动画。
5.根据权利要求1所述的视频内容生成方法,其特征在于,所述根据视频录制开始指令,获取拍摄人物视频的步骤包括:
根据所述视频录制开始指令,获取拍摄视频;
获取所述拍摄视频中的拍摄人物视频;以及
基于所述默认背景视频以及所述默认前景视频,对所述拍摄人物视频进行视频画面特效处理。
6.根据权利要求1所述的视频内容生成方法,其特征在于,所述根据默认背景视频、所述默认前景视频以及所述拍摄人物视频,合成对应的视频段落的步骤包括:
基于视频录制时间点,获取对应的默认背景视频的默认背景视频帧、默认前景视频的默认前景视频帧以及拍摄人物视频的拍摄人物视频帧;
对所述默认背景视频帧以及所述默认前景视频帧进行解码操作;
对解码操作后的默认背景视频帧进行画面渲染操作、对解码操作后的默认前景视频帧进行画面渲染操作以及对拍摄人物视频帧进行画面渲染操作;以及
使用绘图接口将画面渲染操作后的默认背景视频帧、画面渲染操作的默认前景视频帧以及画面渲染操作后的拍摄人物视频帧进行汇总合成,以形成所述视频段落的视频帧,进而合成所述视频段落。
7.根据权利要求1所述的视频内容生成方法,其特征在于,所述视频内容生成方法还包括步骤:
当所述默认背景视频的视频画面在视频内容画面中存在无内容区域,则将所述默认背景视频设置为循环默认背景视频,以消除所述无内容区域。
8.一种视频内容生成装置,其特征在于,包括:
视频内容获取模块,用于根据视频录制开始指令,获取默认背景视频、默认前景视频以及拍摄人物视频;
视频段落合成模块,用于获取对应视频拍摄装置的拍摄角度;根据所述视频拍摄装置的拍摄角度,确定所述默认背景视频在视频内容画面中的展示位置;其中所述默认背景视频的视频画面长度大于所述拍摄人物视频的视频画面长度,所述默认背景视频的视频画面宽度大于所述拍摄人物视频的视频画面宽度;
视频段落切换模块,用于识别所述拍摄人物视频中的人物动作;当所述人物动作包括视频段落切换动作时,根据所述视频段落切换动作获取切换背景视频;
视频参数设定模块,用于将所述切换背景视频设定为所述默认背景视频,并转到视频段落合成的步骤,直至接收到视频录制结束指令;以及
视频内容生成模块,用于根据所述视频录制结束指令,将所有的视频段落进行合成,以生成对应的视频内容。
9.根据权利要求8所述的视频内容生成装置,其特征在于,
所述视频段落切换模块用于识别所述拍摄人物视频中的人物动作;当所述人物动作包括视频段落切换动作时,根据所述视频段落切换动作获取切换背景视频和切换前景视频;
所述视频参数设定模块用于将所述切换背景视频设定为所述默认背景视频,将所述切换前景视频设定为所述默认前景视频,并转到视频段落合成的步骤,直至收到视频录制结束指令。
10.根据权利要求8所述的视频内容生成装置,其特征在于,所述视频内容生成装置还包括:
过渡动画设置模块,用于当由一视频段落转到另一视频段落时,设置用于进行所述视频段落过渡的过渡动画。
11.根据权利要求10所述的视频内容生成装置,其特征在于,所述过渡动画设置模块用于当由一视频段落转到另一视频段落时,根据切换前后的视频段落,设置用于进行所述视频段落过渡的过渡动画。
12.根据权利要求8所述的视频内容生成装置,其特征在于,所述视频内容获取模块包括:
拍摄视频获取单元,用于根据所述视频录制开始指令,获取拍摄视频;
拍摄人物视频获取单元,用于获取所述拍摄视频中的拍摄人物视频;以及
视频画面特效处理单元,用于基于所述默认背景视频以及所述默认前景视频,对所述拍摄人物视频进行视频画面特效处理。
13.根据权利要求8所述的视频内容生成装置,其特征在于,所述视频段落合成模块包括:
视频帧获取单元,用于基于视频录制时间点,获取对应的默认背景视频的默认背景视频帧、默认前景视频的默认前景视频帧以及拍摄人物视频的拍摄人物视频帧;
解码单元,用于对所述默认背景视频帧以及所述默认前景视频帧进行解码操作;
画面渲染单元,用于对解码操作后的默认背景视频帧进行画面渲染操作、对解码操作后的默认前景视频帧进行画面渲染操作以及对拍摄人物视频帧进行画面渲染操作;以及
视频段落合成单元,用于使用绘图接口将画面渲染操作后的默认背景视频帧、画面渲染操作的默认前景视频帧以及画面渲染操作后的拍摄人物视频帧进行汇总合成,以形成所述视频段落的视频帧,进而合成所述视频段落。
14.一种计算机可读存储介质,其内存储有处理器可执行指令,所述指令由一个或一个以上处理器加载,以执行如权利要求1-7中任一的视频内容生成方法。
CN201711190271.8A 2017-11-24 2017-11-24 视频内容生成方法、视频内容生成装置及存储介质 Active CN108024071B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711190271.8A CN108024071B (zh) 2017-11-24 2017-11-24 视频内容生成方法、视频内容生成装置及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711190271.8A CN108024071B (zh) 2017-11-24 2017-11-24 视频内容生成方法、视频内容生成装置及存储介质

Publications (2)

Publication Number Publication Date
CN108024071A CN108024071A (zh) 2018-05-11
CN108024071B true CN108024071B (zh) 2022-03-08

Family

ID=62080124

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711190271.8A Active CN108024071B (zh) 2017-11-24 2017-11-24 视频内容生成方法、视频内容生成装置及存储介质

Country Status (1)

Country Link
CN (1) CN108024071B (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110786002B (zh) * 2018-07-24 2022-02-25 深圳市大疆创新科技有限公司 视频处理方法、设备、计算机可读存储介质
CN109688324A (zh) * 2018-12-04 2019-04-26 深圳市子瑜杰恩科技有限公司 短视频道具切换方法及相关产品
CN109873945A (zh) * 2018-12-29 2019-06-11 上海与德通讯技术有限公司 一种照片拍摄方法、照片处理方法、电子设备和存储介质
CN109920518B (zh) * 2019-03-08 2021-11-16 腾讯科技(深圳)有限公司 医学影像分析方法、装置、计算机设备和存储介质
CN110062176B (zh) * 2019-04-12 2020-10-30 北京字节跳动网络技术有限公司 生成视频的方法、装置、电子设备和计算机可读存储介质
CN110062163B (zh) * 2019-04-22 2020-10-20 珠海格力电器股份有限公司 多媒体数据的处理方法以及装置
CN111145308A (zh) * 2019-12-06 2020-05-12 北京达佳互联信息技术有限公司 一种贴纸获取方法和装置
CN111464761A (zh) * 2020-04-07 2020-07-28 北京字节跳动网络技术有限公司 视频的处理方法、装置、电子设备及计算机可读存储介质
CN112433696A (zh) * 2020-11-30 2021-03-02 上海米哈游天命科技有限公司 一种壁纸显示方法、装置、设备和介质

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101783889A (zh) * 2010-02-05 2010-07-21 北京水晶石数字科技有限公司 一种实时抠像及视频监视和采集方法
CN102307309A (zh) * 2011-07-29 2012-01-04 杭州电子科技大学 一种基于自由视点的体感交互导播系统及方法
CN102739984A (zh) * 2011-08-29 2012-10-17 新奥特(北京)视频技术有限公司 一种高清虚拟布景的实现方法及系统
CN103533254A (zh) * 2013-10-17 2014-01-22 上海基美文化传媒股份有限公司 采用增强现实技术的显示屏及其控制方法
CN104184960A (zh) * 2014-08-19 2014-12-03 厦门美图之家科技有限公司 一种对视频文件进行特效处理的方法
CN105791692A (zh) * 2016-03-14 2016-07-20 腾讯科技(深圳)有限公司 一种信息处理方法及终端
CN106331880A (zh) * 2016-09-09 2017-01-11 腾讯科技(深圳)有限公司 一种信息处理方法及系统
CN106385591A (zh) * 2016-10-17 2017-02-08 腾讯科技(上海)有限公司 视频处理方法及视频处理装置
CN106791893A (zh) * 2016-11-14 2017-05-31 北京小米移动软件有限公司 视频直播方法及装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107003600A (zh) * 2014-09-15 2017-08-01 德米特里·戈里洛夫斯基 包括观察大场景的多个数字照相机的系统

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101783889A (zh) * 2010-02-05 2010-07-21 北京水晶石数字科技有限公司 一种实时抠像及视频监视和采集方法
CN102307309A (zh) * 2011-07-29 2012-01-04 杭州电子科技大学 一种基于自由视点的体感交互导播系统及方法
CN102739984A (zh) * 2011-08-29 2012-10-17 新奥特(北京)视频技术有限公司 一种高清虚拟布景的实现方法及系统
CN103533254A (zh) * 2013-10-17 2014-01-22 上海基美文化传媒股份有限公司 采用增强现实技术的显示屏及其控制方法
CN104184960A (zh) * 2014-08-19 2014-12-03 厦门美图之家科技有限公司 一种对视频文件进行特效处理的方法
CN105791692A (zh) * 2016-03-14 2016-07-20 腾讯科技(深圳)有限公司 一种信息处理方法及终端
CN106331880A (zh) * 2016-09-09 2017-01-11 腾讯科技(深圳)有限公司 一种信息处理方法及系统
CN106385591A (zh) * 2016-10-17 2017-02-08 腾讯科技(上海)有限公司 视频处理方法及视频处理装置
CN106791893A (zh) * 2016-11-14 2017-05-31 北京小米移动软件有限公司 视频直播方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
《针对手持设备拍摄视频的背景替换》;杨松;《万方数据》;20151012;1-52 *

Also Published As

Publication number Publication date
CN108024071A (zh) 2018-05-11

Similar Documents

Publication Publication Date Title
CN108024071B (zh) 视频内容生成方法、视频内容生成装置及存储介质
US11632576B2 (en) Live video broadcast method, live broadcast device and storage medium
US9536352B2 (en) Imitating physical subjects in photos and videos with augmented reality virtual objects
CN113287118A (zh) 用于面部再现的系统和方法
US10242710B2 (en) Automatic cinemagraph
US20220092803A1 (en) Picture rendering method and apparatus, terminal and corresponding storage medium
KR20220051376A (ko) 메시징 시스템에서의 3d 데이터 생성
KR102127351B1 (ko) 사용자 단말 장치 및 그 제어 방법
CN111147749A (zh) 拍摄方法、拍摄装置、终端及存储介质
CN110636365B (zh) 视频字符添加方法、装置、电子设备及存储介质
KR20160108158A (ko) 3차원 배경 콘텐트를 합성하는 방법 및 디바이스
CN109448050B (zh) 一种目标点的位置的确定方法及终端
CN111066026A (zh) 用于向图像数据提供虚拟光调节的技术
CN112868224A (zh) 捕获和编辑动态深度图像的技术
JP2022172061A (ja) 推奨を配信する方法、デバイス、及びシステム
JP2024506639A (ja) 画像表示方法、装置、機器及び媒体
CN107592457B (zh) 一种美颜方法和移动终端
CN111866372A (zh) 自拍方法、装置、存储介质以及终端
CN110166700B (zh) 用于创建选择性虚拟长曝光图像的方法和系统
US10867368B1 (en) Foveated image capture for power efficient video see-through
WO2021180046A1 (zh) 图像留色方法及设备
CN110084306B (zh) 用于生成动态图像的方法和装置
CN108898650B (zh) 人形素材创建方法及相关装置
CN115908120B (zh) 图像处理方法和电子设备
CN114697530B (zh) 一种智能取景推荐的拍照方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant