CN110266971A - 一种短视频制作方法和系统 - Google Patents

一种短视频制作方法和系统 Download PDF

Info

Publication number
CN110266971A
CN110266971A CN201910468674.7A CN201910468674A CN110266971A CN 110266971 A CN110266971 A CN 110266971A CN 201910468674 A CN201910468674 A CN 201910468674A CN 110266971 A CN110266971 A CN 110266971A
Authority
CN
China
Prior art keywords
user
short
template
video
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910468674.7A
Other languages
English (en)
Other versions
CN110266971B (zh
Inventor
何亮
焦华龙
毛铮
王连杰
郭玉峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Mengyu Network Technology Co Ltd
Original Assignee
Shanghai Mengyu Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Mengyu Network Technology Co Ltd filed Critical Shanghai Mengyu Network Technology Co Ltd
Priority to CN201910468674.7A priority Critical patent/CN110266971B/zh
Publication of CN110266971A publication Critical patent/CN110266971A/zh
Application granted granted Critical
Publication of CN110266971B publication Critical patent/CN110266971B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Signal Processing For Recording (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明涉及一种短视频制作方法和系统,用户端的方法包括:响应于用户选择的短视频模板,向用户提供所述模板的模板信息;获取用户输入的用户素材及其属性信息;基于所述模板与所述用户素材属性信息形成用户设计图;将所述用户设计图和所述用户素材发送到服务器端;以及从服务器端接收基于所述用户设计图和所述用户素材生成的短视频。服务器端的方法包括:接收用户端发送的用户设计图和用户素材;基于所述用户设计图和用户素材生成短视频;以及将生成的短视频发送给用户端。本发明提供的编辑界面简洁、明了、清晰,制作步骤简单,为用户节约了大量的时间和精力,用户设计图层次分明,易于服务器读取和识别,短视频生成速度快、质量高。

Description

一种短视频制作方法和系统
技术领域
本发明涉及一种视频制作技术领域,特别地涉及一种短视频制作方法和系统。
背景技术
随着手机、平板电脑等移动终端的普及、生活质量的提高和生活方式的改变,通过拍照、录像来记录和分享生活在普通消费者中越来越流行。相比于静态的图片和数据量较大的视频,信息量多而数据量小的短视频普遍受到人们的欢迎。越来越多的人喜欢用短视频来分享生活。然而,现有的短视频制作系统过于专业,系统庞杂,处理过程繁琐,对于普通用户而言,需要具有较高水平的视频处理知识,花费大量的时间和精力才能获得较高质量的短视频。对于提供各种应用的业务方来说,短视频制作系统的前端涉及较多的集成开发工作,安装包大,不易接入到现有应用系统前端中,在很大程度上影响了产品化的进程。
发明内容
针对现有技术中存在的技术问题,本发明提出了一种短视频制作方法和系统,用以高效地生成高质量的短视频,减少用户制作短视频的成本。
为解决上述技术问题,本发明提供了一种短视频制作方法,其应用于用户端,所述方法包括:
响应于用户选择的短视频模板,向用户提供所述模板的模板信息;
获取用户输入的用户素材及其属性信息;
基于所述模板与所述用户素材属性信息形成用户设计图;
将所述用户设计图和所述用户素材发送到服务器端;以及
从服务器端接收基于所述用户设计图和所述用户素材生成的短视频。
本发明还提供了一种短视频制作用户端,包括:
模板提供模块,经配置用于展示一个或多个短视频模板,以及响应用户选择的短视频模板,向用户提供相应模板的模板信息;
素材编辑模块,经配置用于获取用户根据所述模板信息输入的用户素材及其属性信息;
用户设计用户设计图生成模块,经配置用于基于所述模板与所述用户素材属性信息分层组织生成用户设计图;以及
第一通信模块,用于将所述用户设计图和用户素材发送给服务器端,并接收服务器端返回的短视频。
本发明还提供了一种短视频制作方法,其应用于服务器端,所述方法包括:
接收用户端发送的用户设计图和用户素材;
基于所述用户设计图和用户素材生成短视频;以及
将生成的短视频发送给用户端。
本发明提供的模板由专业设计师设计生成,视频质量高、形式多样,可以满足普通用户的各种需求;用户端提供的编辑界面简洁、明了、清晰,制作步骤简单,操作性强。对于普通用户而言,普通用户仅需要根据模板提供素材,操作简单,因而为用户节约了大量的时间和精力。用户端生成的设计图层次分明、界限清晰、素材和特效的描述区分明显,易于服务器读取和识别,因而视频生成速度快、质量高。另一方面,本发明将具有很多集成开发工作的视频编辑和特效生成的工作放在云端,因而减轻了前端的集成度,减小了安装包,实现了前端的轻量化,并且为业务方提供了简单快速的接入方式,使得本发明的用户端能够在APP和小程序端快速上线,节约了相应的开发类似功能的时间和资源,加快了产品化的进程。
附图说明
下面,将结合附图对本发明的优选实施方式进行进一步详细的说明,其中:
图1是根据本发明的一个实施例的短视频制作系统的简要原理框图;
图2是根据本发明的一个实施例的短视频制作系统的用户端的简要原理框图;
图3是根据本发明的一个实施例的短视频模板主界面示意图;
图4是根据本发明的一个实施例的具体模板的详情示意图;
图5-图8是根据本发明的一个实施例的模板编辑界面示意图;
图9是根据本发明的一个实施例的用户端的简要原理框图;
图10是根据本发明的一个实施例的对比播放示意图;
图11是根据本发明的一个实施例的预览播放示意图;
图12是根据本发明的一个实施例的用户端的简要原理框图;
图13是根据本发明的另一个实施例的用户端的简要原理框图;
图14是根据本发明的一个实施例的用户端短视频制作方法的流程图;以及
图15是根据本发明一个实施例的服务器端短视频制作方法的流程图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在以下的详细描述中,可以参看作为本申请一部分用来说明本申请的特定实施例的各个说明书附图。在附图中,相似的附图标记在不同图字时式中描述大体上类似的组件。本申请的各个特定实施例在以下进行了足够详细的描述,使得具备本领域相关知识和技术的普通技术人员能够实施本申请的技术方案。应当理解,还可以利用其它实施例或者对本申请的实施例进行结构、逻辑或者电性的改变。
如图1所示,为根据本发明的一个实施例的短视频制作系统的简要原理框图。所述短视频制作系统包括用户端1和服务器端2。用户端1位于用户的移动终端、PC端等。用户端1根据用户提供的素材生成用户设计图,并将其发送给服务器端2。服务器端2位于云端的服务器,接收用户设计图,根据所述用户设计图制作短视频,并将其发送给用户端1。
如图2所示,为短视频制作系统的用户端1的简要原理框图,所述用户端1包括:模板提供模块11、素材编辑模块12、用户设计图生成模块13和第一通信模块14。其中,所述模板提供模块11可以向用户提供一个以上的短视频模板,如图3所示,在模板主界面中,包括有多个模板分类A1及某个分类中的多个模板A2。在用户选择了某个具体模板A2时,向用户提供相应模板信息,如图4所示。在该模板详情界面中,包括了模板名称A21、可替换素材的类型和数量A22、所述模板提供的短视频播放总时长A23等。其中,可替换素材的类型包括图片、视频和文字。
素材编辑模块12,经配置用于获取用户按照模板输入的用户素材及其属性信息。其中,在用户点击了图4中的“一键制作”按键后,进入模板编辑界面B,如图5-图8所示,用户可以通过输入接口输入用户素材。具体地,素材编辑模块12包括编辑界面提供单元121、素材替换单元122和附加属性编辑单元123,其中,编辑界面提供单元121用于向用户提供素材替换接口B1、显示区域B3(如图5所示)以及附加属性编辑接口B2(如图7所示的滤镜选择接口)。素材替换单元122根据用户通过素材替换接口B1提供的用户素材替换模板中对应的模板素材。例如用户通过素材替换接口B1访问某个存储区,如手机相册,从中选中一个素材,如图片或视频。素材替换单元122将模板中的对应素材换成用户选择的用户素材,并显示到显示区域B3。附加属性编辑单元123可根据用户通过所述附加属性编辑接口B2编辑的属性信息,得到对应用户素材的附加属性信息。其中,所述附加属性例如为滤镜,或其他一些可单独设置的信息,如各种搞怪图像或饰品图像等。在本实施例中,附加属性编辑单元123提供多个滤镜单元,用于提供多种滤镜,根据用户的选择,确定与用户素材对应的滤镜信息。
另外,为了方便用户对选定的用户素材进行编辑,在一个实施例中,还包括素材裁切单元,用于裁切所述用户素材。例如,如图6所示,当用户素材为图片时,所述素材裁切单元中设置有选择框C1和图片比例器C2,用户可以设置选择框C1,根据选择框C1的位置,可以获取图片的有效区域;用户通过拖动图片比例器C2的指针来设置缩放比例,通过获取图片比例器C2指针位置可以获得对所述图片有效区域进行放大或缩小的倍数。
如果用户素材为视频,如图8所示,所述素材裁切单元包括时间片段选择器D1和倍速设置器D2。当用户通过时间片段选择器D1从原始视频中选择了一个时间片段时,根据时间片段选择器D1的选择范围,可以获取视频片段的起止时刻和播放时长;然后根据所述视频片段的播放时长和模板设定的播放时长确定所述视频片段的播放倍速。或者,用户可以选择视频片段的起始播放时刻t1并通过倍速设置器D2设置倍速;然后根据视频片段的起始播放时刻t1、用户设置的播放倍速及模板设定的播放时长,可以确定所述视频片段的播放终止时刻t2。在素材编辑模块12获得了用户编辑完成的用户素材时,将其信息发送给用户设计图生成模块13。
用户设计图生成模块13接收到用户素材的相关信息后,读取模板设计图,根据用户素材及其属性信息,修改模板设计图中的用户素材层数据,从而生成用户设计图。其中,所述的模板设计图包括分层组织的视频输出描述层,如短视频的分辨率,帧率,播放时长等;系统资源配置层,例如滤镜的配置路径、转场配置路径等;素材描述层,例如:模板素材名称或ID、素材类型、素材来源、素材值、文字属性、图片属性、视频属性等;用户素材描述层,该层中描述的素材信息与素材描述层中的信息一一对应,并且,该数据层中的素材为供用户替换的素材,当用户使用模板制作短视频时,将该数据层中的信息修改为用户素材信息;特效描述层,其描述了该模板在素材播出时使用的特效,例如不同视频段的过渡转场效果、图片的淡入淡出效果等;资源描述层,如模板素材和用户素材的url。当确定了用户素材时,采用用户素材的信息修改用户素材描述层中的信息,并将资源描述层中的用户素材url修改为当前用户选定的用户素材url,这些信息分层组织在一起构成用户设计图。
第一通信模块14将所述用户设计图发送给服务器端,如果用户素材没有存储在服务器可读取的地址中,第一通信模块14将用户素材同用户设计图一起发送给服务器端。第一通信模块14接收服务器端返回的短视频。
为了使用户可以看到其制作的短视频效果,如图9所示,所述短视频制作用户端还进一步包括播放模块15,用于对比播放生成的短视频与对应的模板视频。在一实施例中,当通信模块14接收到服务器端返回的短视频时,播放模块15从接到的视频数据中解析出模板标识和视频段标识,如模板名称、视频段对应的素材名称等,根据所述模板标识和视频段标识,获取对应模板的对应视频段,与从服务器收到的视频段对比播放,便于用户观察制作效果及与模板的差别。第一通信模块14还接收短视频生成进度信息,在对比播放的同时,显示短视频生成进度信息。如图10所示,显示区中的左面播放的为模板视频E1,右面播放的是用户制作的视频E2,下面显示视频生成进度信息E3。在收到完整的短视频时,停止对比播放,播放所述完整的短视频。如图11所示,为生成的短视频的预览播放。
为了提供对制作完成的短视频的操作处理,在一个实施例中,还包括后处理模块16,如图12所示,用于根据用户对接收到的短视频的操作指令,保存所述短视频,或提供短视频模板,供用户重新选择短视频模板,重新制作。如图11所示,在所述界面,用户通过点击“保存到相册”将当前的短视频保存到终端的相册中。或者点击“模板预览”回到图3所示的界面,用户可以重新选择模板来制作短视频。
为了保存用户的操作历史,如图13所示,本发明的一个实施例还提供了历史记录模块17,用于存储用户制作短视频的历史信息。当用户端接收到服务器返回的短视频后,历史记录模块17记录当前短视频的信息,如使用的模板信息、用户素材数据信息等。或者在用户设计图生成后,在将用户设计图发送给服务器时,也存储在历史记录信息中。当用户查看历史记录时,可以获取到全部用于生成视频的数据,在用户希望重新获得该短视频时,不再需要重新编辑,而是直接将记录信息中的设计图发送给服务器端,便可以重新获得所述短视频。
本发明用户端提供的编辑界面简洁、明了、清晰,制作步骤简单,操作性强,对于普通用户而言,普通用户仅需要根据模板提供素材,因而为用户节约了大量的时间和精力。另一方面,本发明将具有很多集成开发工作的视频编辑和特效生成放在云端,因而减轻了前端的集成度,减小了安装包,实现了前端的轻量化,并且为业务方提供了简单快速的接入方式,使得本发明的用户端能够在APP和小程序端快速上线,节约了相应的开发类似功能的时间和资源,提高了产品化的进程。
如图14所示,为本发明所述用户端的短视频制作方法的流程图,所述方法包括:
步骤S101,响应于用户选择的短视频模板择,向用户提供相应的模板详情信息;在本发明中,用户端提供了多种短视频模板,并提供人机交互接口供用户操作。当用户选择了某个短视频模板之后,本发明提供对应模板详情信息,例如模板名称、可替换素材的类型、数量及总的播放时长。
步骤S102,获取用户按照模板输入的用户素材及其属性信息。当用户确定了要使用所述模板后,发出制作指令。响应于用户的制作指令,用户端提供模板编辑界面,方便用户按其需求进行编辑。当用户进入模板编辑界面后,可选择用户自己的素材来替换模板中的模板素材。例如,从用户指定的存储区域读取用户指定的用户素材,用户素材可以为图片,也可以是视频。当视频过大,或图片不够理想时,用户可裁切所述用户素材。当用户素材为图片时,所述裁切所述用户素材的步骤具体包括:根据选择框的位置,获取图片的有效区域;根据图片比例器设置的比例,获取对所述图片有效区域进行放大或缩小的倍数。当用户素材为视频时,根据时间片段选择器的选择范围,获取视频片段的起止时刻和播放时长T2;由于模板中的每一个素材具有设定的播放时长T1,当选取的视频片段的播放时长T2大于设定的播放时长T1时,根据所述视频片段的播放时长T2和模板设定的播放时长T1确定所述视频片段的播放倍速N;或者用户可以选择视频片段的起始播放时刻t1,并选定播放倍速N,根据所述播放倍速N和模板设定的播放时长T1确定所述视频片段的播放终止时刻t2,从而确定了所述视频片段。在用户选择完素材后,还可以设定一些附加属性,在一个实施例中,所述的附加属性为滤镜。用户选定一种滤镜后,得到所述滤镜信息。
步骤S103,基于所述模板和所述用户素材属性信息生成用户设计图。当用户选择完用户素材及其属性后,在编辑界面输入完成指令,用户端响应于用户编辑完成的指令,读取模板设计图,根据用户素材及其属性信息,修改模板设计图中的用户素材信息层数据,从而生成用户设计图。在一个实施例中,所述用户设计图包括以下几个层次的数据:
1.blueprintDesc:模板描述层,例如作者、版本号、模板名称等一般性描述;
2.outputDes:视频输出描述层,包括分辨率、帧率、视频时长等信息;
3.hypnosConfig:系统资源配置描述层,例如滤镜的配置路径、转场配置路径等;
4.elements:素材描述层,例如素材名称或ID;素材类型,如图片、视频、音频等;素材来源,如来自于用户或来自于设计师;素材值,如素材内容,链接等;滤镜信息;文字属性,如字体、字号、颜色等;图片属性;视频属性等;
5.actions:特效描述层,actions里面每一个action需要引用素材描述层里面的一个或多个素材,用来专门描述素材的特效;actions里面还可以包含多个子特效,用于提供更为复杂的特效处理;特效在素材画面中的开始位置和结束位置;
6.resource:资源描述层,用于说明elements和userElements里面的使用素材的url;
7.userElements:用户素材描述层,其为用户可替换素材。在模板中,该数据层中的素材与elements中的素材来源为用户的素材一一对应;在用户设计图中,其中的素材为用户选择的素材。
其中,项目1-5为模板中的数据,项目7中描述的是用户素材及其属性,模板设计图中的项目7userElements中的素材内容为项目4elements中素材来源为“user”的素材内容。素材来源为“user”的素材为出现在用户端编辑界面中、用户可替换的素材。当用户编辑完用户素材及其属性后,使用用户素材的属性信息,如类型、素材值及滤镜信息(如果用户已设置滤镜的话)等替换掉项目7userElements中的对应素材的相应信息。如果项目7中的用户素材存储在服务器可以读取的位置,将用户素材的url存储到项目6中。
步骤S104,将所述用户设计图发送给服务器端。如果用户素材没有存储在服务器可读取的位置,需要将用户素材也发送给服务器端。
步骤S105,接收服务器端返回的短视频,并记录本次制作过程中的视频数据。
接收到服务器端返回的短视频后,在一个实施例中,还包括以下步骤:
步骤S106,对比播放从服务器端接收的短视频与对应模板提供的短视频。并显示短视频的生成进度信息。
步骤S107,判断短视频的生成进度是否为100%,如果短视频的生成进度为100%,用户制作的短视频全部生成,用户端接收到完整的短视频,此时,在步骤S108,不再对比播放,而是仅播放所述短视频。
步骤S109,判断收到的用户指令是保存指令还是返回模板指令,如果是保存指令,则在步骤S110将所述短视频保存到终端相册中,并在步骤S111中保存制作记录。如果是返回模板指令,则在步骤S112返回模板主界面。
如图15所示,为服务器端短视频制作方法的流程图。具体包括:
步骤S201,接收用户端发送的用户设计图及用户素材。如果接收到的是用户素材地址时,根据资源描述信息中的用户素材地址读取对应的用户素材。其中,用户设计图中包括了分层组织的数据层,分别为,模板描述层、视频输出描述层、系统资源配置层、素材描述层、用户素材描述层、特效描述层和资源描述层。
步骤S202,响应于接收到的用户制作指令,利用所述用户设计图和用户素材生成短视频。在生成的过程中,同时计算短视频生成进度信息。生成短视频的过程具体包括:
根据所述系统资源配置信息配置系统参数。所述的系统参数包括读取参数。例如,资源描述信息层中记录的模板素材和用户素材的url,将url配置给素材读取参数,用于读取模板素材和用户素材。根据系统资源配置信息层中记录的滤镜配置路径、转场配置路径,将其分别配置给相应的读取参数,从而读取滤镜信息、转场信息等。
根据资源描述信息和素材描述信息读取模板素材和用户素材及各自的属性信息。根据素材读取参数读取素材,例如,素材可以为图片、视频或/和文字。其中,如果素材是文字,还需要将所述文字处理成具有alpha透明度通道的文字图片,然后读取所述文字图片。
根据用户素材描述信息获取用户素材的属性信息。属性信息包括某一类型素材的自身属性信息,例如,素材为文字时的一些文字属性,如字体、字号、颜色;素材为图片时对应的图片属性,如,指定裁切的矩形区域;素材为视频时对应的视频属性,如视频音乐是否为背景音乐、旋转角度等。属性信息还包括附加属性信息,如滤镜信息、视觉信息(如透明或面具)等。
按照上述系统参数得到的信息、素材属性信息及特效描述信息,依据模板素材和用户素材生成多帧画面。
例如,对读取的画面做裁切、滤镜、旋转、缩放、快慢速等各种处理。在一个实施例中,在需要进行旋转、缩放、透视等操作时,根据预先计算好的参数,调用OpenCV(OpenSource Computer Vision Library,计算机视觉库)中的相应工具得到相应变化效果。
另外,对于模板中配置的一些图片/视频等素材的2D/3D特效,可以通过图形处理器(Graphic Processing Unit,简称GPU)利用OpenGL(Open GraphicsLibrary,开放图形库)来处理生成。对于没有GPU配置的服务器,也可以直接使用软件模拟OpenGL。或者是对于某些特效,比如“水波纹”效果、“火焰”效果,可以通过本发明提供的三角形剖分和三角形纹理填充来实现,既可以达到使用OpenGL实现的特效,也更加方便对视频特效的扩展,并且不再需要GPU和OpenGL的支持,对不同服务器的部署更加友好。
以“水波纹”效果为例,根据特效信息中对应的素材及其起止时间,读取所述时间段内的素材,对所述素材进行三角形剖分和三角形纹理填充。具体包括:对该段素材的每一帧原始素材画面进行三角形剖分,获取多个三角形的原始位置点,根据水波函数计算出所述原始位置点在每一帧画面上的位置,在每一帧画面上,以原画面像素填充以新的位置点构成的三角形区域,当素材以设置的帧率生成视频时,该时间段内的素材则获得了“水波纹”效果。
如果有转场属性,在一个实施例中,根据转场配置路径,读取与转场类型对应的灰度视频。根据转场类型的不同,其中,不同的灰度视频可以使每一帧画面变化不同。从而得到不同的转场效果。
对于转场,在一个实施例中,将前一个特效的最后一帧画面和后一个特效的第一帧画面融合起来时,根据这个灰度视频的一帧画面的像素点的灰度值计算融合合的画面的像素值。以灰度视频的某个像素点的灰度值为100时为例,合成之后的画面对应点的像素值为:前景像素值x100/255+背景像素值x(255-100)/255。其中,所述前景是指前一个特效的最后一帧画面,所述的背景是指后一个特效的第一帧画面。由于每个像素值基本都包括RGBA四个分量,即Red(红色)、Green(绿色)、Blue(蓝色)和Alpha(透明度),每一个分量分别按上述公式计算,则得到一个像素的全部分量值。
如果融合后的画面仅是原始画面的局部画面,则采用融合后的画面替换原始画面中的融合前的画面,并合成在一起得到最终画面。
其中合成的位置,为根据设计图中特效中设置的开始位置和结束位置,按照线性插值算出的位置。
如果用户素材为视频,则对其每一帧画面进行前述步骤的处理,从而生成多帧画面,然后按照模板数据中的视频输出描述信息中参数,如帧率,生成视频。
如果用户素材为图片,在生成多帧画面之前包括:利用AI技术识别并提取出图片的焦点人物/物品,从而生成焦点图像,采用所述焦点图像代替用户图片。因而,无论用户提供的图片背景是否杂乱,生成的短视频中只显示图片中的焦点图像,如焦点人物或物品。
如果用户素材为文字,在生成多帧画面之前包括:将所述文字处理成为具有alpha透明度通道的文字图片,然后由图文字替换文字。
步骤S203,将生成的短视频、当前短视频的生成进度信息发送给用户端。在一个具体实施例中,当所述用户素材为多个时,在基于一个用户素材生成对应的视频后,将其发送给用户端,以便于用户端将其与模板中的对应视频段对比播放。
另外,在生成所述短视频后,还可以向短视频增加版权信息。即:从模板描述层中读取所述版权信息,如模板名称、作者等,将所述版权信息制成透明的图片,并根据设置算法计算得到插入所述图片的视频画面帧数Fn,将所述版权图片叠加在短视频第Fn帧的画面上,从而在生成的短视频上携带了版权信息。
本发明提供的设计图层次分明、界限清晰、素材和特效的描述区分明显,易于服务器读取和识别。提供给用户使用的模板是由专业设计师设计生成,因而视频质量高、形式多样,可以满足普通用户的各种需求;服务器按照设计好的设计图来生成短视频,因而视频生成速度快、质量高。
上述实施例仅供说明本发明之用,而并非是对本发明的限制,有关技术领域的普通技术人员,在不脱离本发明范围的情况下,还可以做出各种变化和变型,因此,所有等同的技术方案也应属于本发明公开的范畴。

Claims (23)

1.一种短视频制作方法,其中包括:
响应于用户选择的短视频模板,向用户提供所述模板的模板信息;
获取用户输入的用户素材及其属性信息;
基于所述模板与所述用户素材属性信息形成用户设计图;
将所述用户设计图和所述用户素材发送到服务器端;以及
从服务器端接收基于所述用户设计图和所述用户素材生成的短视频。
2.根据权利要求1所述的短视频制作方法,其中,所述模板的模板信息至少包括可替换素材的类型和数量。
3.根据权利要求2所述的短视频制作方法,其中,所述可替换素材的类型为图片、视频或文字。
4.根据权利要求2或所述的短视频制作方法,其中还进一步包括:响应于用户的制作指令,提供编辑界面,通过所述编辑界面获取用户输入的用户素材及其属性信息。
5.根据权利要求4所述的短视频制作方法,其中,所述用户素材属性信息包括用户素材自身属性信息和附加属性信息。
6.根据权利要求4所述的短视频制作方法,其中,在获取用户素材时,还进一步包括:
从用户指定的存储区域读取指定的用户素材;以及
裁切所述用户素材。
7.根据权利要求6所述的短视频制作方法,其中,当用户素材为图片时,所述裁切所述用户素材的步骤具体包括:
根据选择框的位置,获取图片的有效区域;以及
根据图片比例器设置的比例,获取对所述图片有效区域进行放大或缩小的倍数。
8.根据权利要求6所述的短视频制作方法,其中,当用户素材为视频时,所述裁切所述用户素材的步骤具体包括:
根据时间片段选择器的选择范围,获取视频片段的起止时刻和播放时长;以及
根据所述视频片段的播放时长和模板设定的播放时长确定所述视频片段的播放倍速。
9.根据权利要求6所述的短视频制作方法,其中,当用户素材为视频时,所述裁切所述用户素材的步骤具体包括:
根据视频片段选择器的选择范围,确定视频片段的起始播放时刻;以及
获取用户设置的播放倍速信息,根据所述播放倍速和模板设定的播放时长确定所述视频片段的播放终止时刻。
10.根据权利要求1所述的短视频制作方法,其中,进一步包括:在接收服务器端返回的短视频过程中,对比播放从服务器端接收的短视频与对应模板提供的短视频。
11.根据权利要求10所述的短视频制作方法,其中,在对比播放从服务器端接收的短视频与对应模板提供的短视频的同时,显示短视频的生成进度信息。
12.一种短视频制作用户端,其中包括:
模板提供模块,经配置用于展示一个或多个短视频模板,以及响应用户选择的短视频模板,向用户提供相应模板的模板信息;
素材编辑模块,经配置用于获取用户根据所述模板信息输入的用户素材及其属性信息;
用户设计图生成模块,经配置用于基于所述模板与所述用户素材属性信息分层组织生成用户设计图;以及
第一通信模块,用于将所述用户设计图和用户素材发送给服务器端,并接收服务器端返回的短视频。
13.根据权利要求12所述的短视频制作用户端,其中,所述素材编辑模块经进一步配置,还包括:
编辑界面提供单元,用于向用户提供素材替换接口和显示区域;以及
素材替换单元,用于根据用户通过素材替换接口提供的用户素材获取用户素材及自身属性信息。
14.根据权利要求13所述的短视频制作用户端,其中,编辑界面提供单元经进一步配置还包括附加属性编辑接口;
所述素材编辑模块经进一步配置还对应包括:
附加属性编辑单元,用于根据用户通过所述附加属性编辑接口编辑的属性信息获取所述用户素材的附加属性信息。
15.根据权利要求12所述的短视频制作用户端,其中,还进一步包括:
播放模块,经配置用于在接收服务器端返回的短视频过程中,对比播放返回的短视频与对应的模板提供的短视频。
16.一种短视频制作方法,其中,包括:
接收用户端发送的用户设计图和用户素材;
基于所述用户设计图和用户素材生成短视频;以及
将生成的短视频发送给用户端。
17.根据权利要求16所述的方法,其中进一步包括:在所述用户素材包括多个时,在基于一个用户素材生成视频段后,将所述视频段发送给用户端。
18.根据权利要求17所述的方法,其中进一步还包括:在生成短视频的过程中,计算短视频生成进度,并将当前生成进度信息发送给用户端。
19.根据权利要求16所述的方法,其中,生成短视频的步骤包括:
基于用户设计图获取视频输出描述信息、系统资源配置信息、素材描述信息、特效描述信息和资源描述信息;
根据所述系统资源配置信息配置系统参数;
根据资源描述信息和素材描述信息读取模板素材、用户素材及各自的属性信息;
按照系统参数、素材属性信息及特效描述信息,依据模板素材和用户素材生成多帧画面;以及
按照视频输出描述信息中的视屏参数,基于所述多帧画面生成短视频。
20.根据权利要求19所述的方法,其中,在用户素材为图片时,在生成多帧画面之前包括:识别并提取出图片的焦点图像;采用所述焦点图像代替对应的图片。
21.根据权利要求19所述的方法,其中,在素材为文字时,在生成多帧画面之前包括:将所述文字处理成为具有alpha透明度通道的文字图片。
22.根据权利要求19所述的方法,其中,在生成视频之前,根据特定的特效描述信息,进一步包括:
根据特效描述信息中的起止时间,获取该时间段内的素材;
对所述时间段内的素材的每一帧画面进行三角形剖分,获取每一三角形顶点的原始位置点;
根据第一变化函数计算出每一帧画面的原始位置点的新位置点;以及
采用像素填充由新位置点构成的三角形区域。
23.根据权利要求22所述的短视频制作方法,其中,进一步包括:对原画面的像素按照第二变化函数计算得到新像素,并由新像素填充对应的、由新位置点构成的三角形区域。
CN201910468674.7A 2019-05-31 2019-05-31 一种短视频制作方法和系统 Active CN110266971B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910468674.7A CN110266971B (zh) 2019-05-31 2019-05-31 一种短视频制作方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910468674.7A CN110266971B (zh) 2019-05-31 2019-05-31 一种短视频制作方法和系统

Publications (2)

Publication Number Publication Date
CN110266971A true CN110266971A (zh) 2019-09-20
CN110266971B CN110266971B (zh) 2021-10-08

Family

ID=67916249

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910468674.7A Active CN110266971B (zh) 2019-05-31 2019-05-31 一种短视频制作方法和系统

Country Status (1)

Country Link
CN (1) CN110266971B (zh)

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111193876A (zh) * 2020-01-08 2020-05-22 腾讯科技(深圳)有限公司 视频中添加特效的方法及装置
CN111432290A (zh) * 2020-04-10 2020-07-17 深圳市年代丰华智能科技有限公司 基于音频调节的视频生成方法
CN111432289A (zh) * 2020-04-10 2020-07-17 深圳市年代丰华智能科技有限公司 基于视频调节的视频生成方法
CN111899155A (zh) * 2020-06-29 2020-11-06 腾讯科技(深圳)有限公司 视频处理方法、装置、计算机设备及存储介质
CN112087652A (zh) * 2020-08-03 2020-12-15 北京达佳互联信息技术有限公司 视频的制作方法、共享方法、装置、电子设备及存储介质
CN112132931A (zh) * 2020-09-29 2020-12-25 新华智云科技有限公司 一种模板化视频合成的处理方法、装置及系统
CN112437342A (zh) * 2020-05-14 2021-03-02 上海哔哩哔哩科技有限公司 一种视频编辑的方法及设备
CN112653849A (zh) * 2021-01-14 2021-04-13 上海翰莓科技有限公司 一种短视频设计服务系统
CN112866798A (zh) * 2020-12-31 2021-05-28 北京字跳网络技术有限公司 视频生成方法、装置、设备及存储介质
CN112911388A (zh) * 2021-02-02 2021-06-04 厦门美图之家科技有限公司 高效可编辑视频特效输出方法、装置及电子设备
CN112929699A (zh) * 2021-01-27 2021-06-08 广州虎牙科技有限公司 视频处理方法、装置、电子设备和可读存储介质
CN112995536A (zh) * 2021-02-04 2021-06-18 上海哔哩哔哩科技有限公司 视频合成方法及系统
CN113411633A (zh) * 2021-04-30 2021-09-17 成都东方盛行电子有限责任公司 一种基于非编工程的模板编辑方法及其应用
CN113556576A (zh) * 2021-07-21 2021-10-26 北京达佳互联信息技术有限公司 视频生成方法及设备
CN114268749A (zh) * 2022-03-01 2022-04-01 北京热云科技有限公司 一种视频视觉效果模板化的方法及系统
CN114339407A (zh) * 2022-03-11 2022-04-12 网娱互动科技(北京)股份有限公司 一种短视频自动生成方法和系统
WO2022088783A1 (zh) * 2020-10-28 2022-05-05 北京达佳互联信息技术有限公司 视频制作方法及装置
JP2022524563A (ja) * 2020-02-27 2022-05-09 ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド ショートビデオの生成方法、プラットフォーム、電子機器、記憶媒体及びプログラム
CN114615541A (zh) * 2022-02-18 2022-06-10 杭州猿马信息科技有限公司 一种视频制作方法和制作系统
CN114866851A (zh) * 2022-05-31 2022-08-05 深圳康佳电子科技有限公司 基于ai图像的短视频创作方法、智能电视及存储介质
WO2022166595A1 (zh) * 2021-02-04 2022-08-11 上海哔哩哔哩科技有限公司 基于图片的视频生成方法、装置
CN114928753A (zh) * 2022-04-12 2022-08-19 广州阿凡提电子科技有限公司 一种视频拆分处理方法、系统及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090031344A1 (en) * 2007-07-26 2009-01-29 The Directv Group, Inc. Method for arranging virtual channels and linear channels for a content processing system
CN104615738A (zh) * 2015-02-11 2015-05-13 成都品果科技有限公司 一种基于远程同步的移动终端照片分享方法
CN104780439A (zh) * 2014-01-15 2015-07-15 腾讯科技(深圳)有限公司 视频的处理方法及装置
WO2017051793A1 (ja) * 2015-09-25 2017-03-30 株式会社グロウ・ムービージャパン 映像コンテンツ自動生成システム
CN108769560A (zh) * 2018-05-31 2018-11-06 广州富勤信息科技有限公司 一种高速环境下模式化数字影像的制作方法
CN109168028A (zh) * 2018-11-06 2019-01-08 北京达佳互联信息技术有限公司 视频生成方法、装置、服务器及存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090031344A1 (en) * 2007-07-26 2009-01-29 The Directv Group, Inc. Method for arranging virtual channels and linear channels for a content processing system
CN104780439A (zh) * 2014-01-15 2015-07-15 腾讯科技(深圳)有限公司 视频的处理方法及装置
CN104615738A (zh) * 2015-02-11 2015-05-13 成都品果科技有限公司 一种基于远程同步的移动终端照片分享方法
WO2017051793A1 (ja) * 2015-09-25 2017-03-30 株式会社グロウ・ムービージャパン 映像コンテンツ自動生成システム
CN108769560A (zh) * 2018-05-31 2018-11-06 广州富勤信息科技有限公司 一种高速环境下模式化数字影像的制作方法
CN109168028A (zh) * 2018-11-06 2019-01-08 北京达佳互联信息技术有限公司 视频生成方法、装置、服务器及存储介质

Cited By (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111193876B (zh) * 2020-01-08 2021-09-07 腾讯科技(深圳)有限公司 视频中添加特效的方法及装置
CN111193876A (zh) * 2020-01-08 2020-05-22 腾讯科技(深圳)有限公司 视频中添加特效的方法及装置
JP2022524563A (ja) * 2020-02-27 2022-05-09 ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド ショートビデオの生成方法、プラットフォーム、電子機器、記憶媒体及びプログラム
JP7225406B2 (ja) 2020-02-27 2023-02-20 ベイジン バイドゥ ネットコム サイエンス テクノロジー カンパニー リミテッド ショートビデオの生成方法、プラットフォーム、電子機器、記憶媒体及びプログラム
CN111432290A (zh) * 2020-04-10 2020-07-17 深圳市年代丰华智能科技有限公司 基于音频调节的视频生成方法
CN111432289A (zh) * 2020-04-10 2020-07-17 深圳市年代丰华智能科技有限公司 基于视频调节的视频生成方法
CN111432290B (zh) * 2020-04-10 2022-04-19 深圳市乔安科技有限公司 基于音频调节的视频生成方法
CN112437342A (zh) * 2020-05-14 2021-03-02 上海哔哩哔哩科技有限公司 一种视频编辑的方法及设备
CN111899155A (zh) * 2020-06-29 2020-11-06 腾讯科技(深圳)有限公司 视频处理方法、装置、计算机设备及存储介质
CN111899155B (zh) * 2020-06-29 2024-04-26 腾讯科技(深圳)有限公司 视频处理方法、装置、计算机设备及存储介质
CN112087652A (zh) * 2020-08-03 2020-12-15 北京达佳互联信息技术有限公司 视频的制作方法、共享方法、装置、电子设备及存储介质
CN112132931B (zh) * 2020-09-29 2023-12-19 新华智云科技有限公司 一种模板化视频合成的处理方法、装置及系统
CN112132931A (zh) * 2020-09-29 2020-12-25 新华智云科技有限公司 一种模板化视频合成的处理方法、装置及系统
WO2022088783A1 (zh) * 2020-10-28 2022-05-05 北京达佳互联信息技术有限公司 视频制作方法及装置
CN112866798B (zh) * 2020-12-31 2023-05-05 北京字跳网络技术有限公司 视频生成方法、装置、设备及存储介质
WO2022143253A1 (zh) * 2020-12-31 2022-07-07 北京字跳网络技术有限公司 视频生成方法、装置、设备及存储介质
CN112866798A (zh) * 2020-12-31 2021-05-28 北京字跳网络技术有限公司 视频生成方法、装置、设备及存储介质
CN112653849A (zh) * 2021-01-14 2021-04-13 上海翰莓科技有限公司 一种短视频设计服务系统
CN112929699A (zh) * 2021-01-27 2021-06-08 广州虎牙科技有限公司 视频处理方法、装置、电子设备和可读存储介质
CN112911388B (zh) * 2021-02-02 2024-02-06 厦门美图之家科技有限公司 高效可编辑视频特效输出方法、装置及电子设备
CN112911388A (zh) * 2021-02-02 2021-06-04 厦门美图之家科技有限公司 高效可编辑视频特效输出方法、装置及电子设备
CN112995536A (zh) * 2021-02-04 2021-06-18 上海哔哩哔哩科技有限公司 视频合成方法及系统
WO2022166595A1 (zh) * 2021-02-04 2022-08-11 上海哔哩哔哩科技有限公司 基于图片的视频生成方法、装置
CN113411633A (zh) * 2021-04-30 2021-09-17 成都东方盛行电子有限责任公司 一种基于非编工程的模板编辑方法及其应用
CN113556576B (zh) * 2021-07-21 2024-03-19 北京达佳互联信息技术有限公司 视频生成方法及设备
CN113556576A (zh) * 2021-07-21 2021-10-26 北京达佳互联信息技术有限公司 视频生成方法及设备
CN114615541A (zh) * 2022-02-18 2022-06-10 杭州猿马信息科技有限公司 一种视频制作方法和制作系统
CN114268749B (zh) * 2022-03-01 2022-08-05 北京热云科技有限公司 一种视频视觉效果模板化的方法及系统
CN114268749A (zh) * 2022-03-01 2022-04-01 北京热云科技有限公司 一种视频视觉效果模板化的方法及系统
CN114339407B (zh) * 2022-03-11 2022-06-03 网娱互动科技(北京)股份有限公司 一种短视频自动生成方法和系统
CN114339407A (zh) * 2022-03-11 2022-04-12 网娱互动科技(北京)股份有限公司 一种短视频自动生成方法和系统
CN114928753A (zh) * 2022-04-12 2022-08-19 广州阿凡提电子科技有限公司 一种视频拆分处理方法、系统及装置
CN114866851A (zh) * 2022-05-31 2022-08-05 深圳康佳电子科技有限公司 基于ai图像的短视频创作方法、智能电视及存储介质
CN114866851B (zh) * 2022-05-31 2024-04-02 深圳康佳电子科技有限公司 基于ai图像的短视频创作方法、智能电视及存储介质

Also Published As

Publication number Publication date
CN110266971B (zh) 2021-10-08

Similar Documents

Publication Publication Date Title
CN110266971A (zh) 一种短视频制作方法和系统
CN110276057A (zh) 一种用于短视频制作的用户设计图生成方法和装置
CN110287368A (zh) 短视频模板设计图生成装置及短视频模板的生成方法
TWI413017B (zh) 用於混合式物件屬性關鍵製格模組之方法與電腦系統
CN111935504B (zh) 视频制作方法、装置、设备及存储介质
CN112291484B (zh) 视频合成方法、装置、电子设备及存储介质
CN101315702A (zh) 电子相册制作方法及其装置
CN104540028B (zh) 一种基于移动平台的视频美化交互体验系统
US7873909B2 (en) Manipulation and merging of graphic images
CN110851626B (zh) 一种基于图层布局的时空数据可视化分析方法与系统
CN105376651B (zh) 一种生成视频幻灯片的方法及装置
WO2020107850A1 (zh) 大屏场景的编辑方法、装置及计算机可读存储介质
CN103839562A (zh) 一种视频创作系统
CN108269295B (zh) 一种幻灯片主题色彩智能引用的方法及装置
CN105262959A (zh) 一种基于“互联网+”模式的微视频生成的系统和方法
JP2021121125A (ja) 表示制御方法及びプログラム
CN110266970A (zh) 一种短视频制作方法和系统
CN109961493A (zh) 展示页面上的横幅广告图片生成方法及装置
JPH06243023A (ja) シナリオ編集装置
CN110198420A (zh) 基于非线性视频编辑的视频生成方法及装置
CN201054157Y (zh) 动感相册制作装置
CN105206179A (zh) 一种电子相框
CN104991950A (zh) 一种图片生成方法、显示方法及相应装置
CN103186312A (zh) 终端、漫画形象处理系统和漫画形象处理方法
US8587601B1 (en) Sharing of three dimensional objects

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant