CN111161392B - 一种视频的生成方法、装置及计算机系统 - Google Patents

一种视频的生成方法、装置及计算机系统 Download PDF

Info

Publication number
CN111161392B
CN111161392B CN201911330586.7A CN201911330586A CN111161392B CN 111161392 B CN111161392 B CN 111161392B CN 201911330586 A CN201911330586 A CN 201911330586A CN 111161392 B CN111161392 B CN 111161392B
Authority
CN
China
Prior art keywords
key frame
rendering
picture
frame
dimensional image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911330586.7A
Other languages
English (en)
Other versions
CN111161392A (zh
Inventor
殷俊
赵筠
李勇
任宇
于思远
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu Biying Technology Co ltd
Jiangsu Suning Cloud Computing Co ltd
Original Assignee
Suning Cloud Computing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suning Cloud Computing Co Ltd filed Critical Suning Cloud Computing Co Ltd
Priority to CN201911330586.7A priority Critical patent/CN111161392B/zh
Publication of CN111161392A publication Critical patent/CN111161392A/zh
Priority to PCT/CN2020/111945 priority patent/WO2021120685A1/zh
Priority to CA3164771A priority patent/CA3164771A1/en
Application granted granted Critical
Publication of CN111161392B publication Critical patent/CN111161392B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/10Geometric effects
    • G06T15/20Perspective computation
    • G06T15/205Image-based rendering

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Geometry (AREA)
  • Computer Graphics (AREA)
  • General Physics & Mathematics (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本申请公开了一种视频的生成方法、装置及计算机系统,其中所述方法包括:获取原始图片;按照预设的渲染方法对所述原始图片进行渲染,获得关键帧;按照所述预设的渲染方法对所述关键帧进行渲染,获得所述关键帧对应的中间帧;生成所述关键帧对应的视频,所述视频由所述关键帧及所述关键帧对应的中间帧组成,实现了对视频生成过程中的低成本、高效率、规模化与内容的个性化问题的兼顾。

Description

一种视频的生成方法、装置及计算机系统
技术领域
本发明涉及计算机技术领域,尤其涉及一种视频的生成方法、装置及计算机系统。
背景技术
在在线销售平台上,往往上架了大量的商品。为了更好地展现商品的特性,帮助用户进行商品甄别及决策,可以为用户提供商品的展示视频。
当前业内对于商品的展示视频的生产制作有以下三种方法:一种是直接通过对商品实物进行拍摄的方式获得展示视频,另一种是使用Adobe After Effects 为代表的图形视频处理软件,以人工方式,对已有的商品图像或者视频素材进行添加特效等加工处理,获得展示视频;还有一种是基于FFmpeg的视频图像处理能力,直接将商品图作为视频的关键帧,通过使用一些提供的滤镜、转场生成视频的中间帧,从而实现展示视频的自动生成。
上述三种方法存在以下的问题:采用视频拍摄方式获取展示视频,需要消耗极高的人力成本及时间成本,且难以应用于短周期大批量的展示视频生产场景,特别是当视频数量需求到达一个很高的量级之后,即使增加大量的人工,也无法满足实际的生产需求。通过Adobe After Effects等图形视频处理软件进行视频生产的方式也存在着相似的问题,人力成本难以降低、生产效率难以提升、生产规模十分有限。以上两种方式都无法满足当今快节奏的电商环境对商品展示视频生产的成本、效率以及规模上的需求。第三种基于FFmpeg的视频图像处理能力进行视频的生产,虽然能实现大批量的商品视频的批量生成,满足商品视频生产规模上的需求,然而由于其直接将商品图作为了视频的关键帧,且提供的功能仅有添加滤镜及转场,无法满足在视频内容的丰富度、多样性方面的个性化需求。
发明内容
为了解决现有技术的不足,本发明的主要目的在于提供一种视频的生成方法,以解决现有技术中无法兼顾视频生成的低成本、高效率、规模化与内容的个性化的问题。
为了达到上述目的,第一方面本发明提供了一种视频的生成方法,所述方法包括:
获取原始图片;
按照预设的渲染方法对所述原始图片进行渲染,获得关键帧;
按照所述预设的渲染方法对所述关键帧进行渲染,获得所述关键帧对应的中间帧;
生成所述关键帧对应的视频,所述视频由所述关键帧及所述关键帧对应的中间帧组成。
在一些实施例中,所述预设的渲染方法包括:
使用预设的三维图像处理技术,将待处理图片转换为三维立体图像,所述三维立体图像由顶点及所述顶点的连接关系组成,所述待处理图片为所述原始图片或所述关键帧;
读取所述待处理图片对应的渲染参数;
根据所述待处理图片对应的渲染参数,对所述顶点、所述顶点的连接关系进行修改,获得调整后的所述三维立体图像;
将所述调整后的所述三维立体图像投影为二维图像;
根据所述二维图像,获得所述待处理图片对应的目标帧,所述原始图片对应的目标帧为所述关键帧,所述关键帧对应的目标帧为所述关键帧对应的中间帧。
在一些实施例中,所述根据所述二维图像,获得所述待处理图片对应的目标帧包括:
根据所述待处理图片对应的渲染参数,获得所述待处理图片对应的特效对象;
根据所述二维图像及所述对应的特效对象进行渲染,获得所述待处理图片对应的目标帧。
在一些实施例中,所述根据所述待处理图片对应的渲染参数,对所述顶点、所述顶点的连接关系进行修改,获得调整后的所述三维立体图像还包括:
根据所述待处理图片对应的渲染参数,对所述顶点、所述顶点的连接关系进行修改,获得修改后的所述三维立体图像;
删除修改后的所述三维立体图像不在预设的相机视角的可见范围内的部分,获得调整后的所述三维立体图像。
在一些实施例中,所述方法还包括:
读取预设的参数配置文件,获得原始图片处理参数及关键帧处理参数;
所述按照预设的渲染方法对所述原始图片进行渲染,获得关键帧包括:
根据所述原始图片处理参数,按照预设的渲染方法对所述原始图片进行渲染,获得关键帧;
所述按照所述预设的渲染方法对所述关键帧进行渲染,获得所述关键帧对应的中间帧包括:
根据所述关键帧处理参数,按照所述预设的渲染方法对所述关键帧进行渲染,获得所述关键帧对应的中间帧。
在一些实施例中,获得的所述关键帧至少有两帧,所述方法还包括:
将所有所述关键帧对应的视频进行按照预设顺序进行拼接,获得目标视频。
在一些实施例中,所述将每一所述关键帧对应的视频进行按照预设顺序进行拼接,获得目标视频包括:
按照预设的图像处理方法,生成每一所述关键帧对应的过渡视频;
将所述关键帧对应的视频、所述关键帧对应的过渡视频按照预设的关键帧顺序进行排序并拼接,获得完整视频。
第二方面,本申请提供了一种视频的生成装置,所述装置包括:
获取模块,用于获取原始图片;
渲染模块,用于按照预设的渲染方法对所述原始图片进行渲染,获得关键帧;
及按照所述预设的渲染方法对所述关键帧进行渲染,获得所述关键帧对应的中间帧;
生成模块,用于生成所述关键帧对应的视频,所述视频由所述关键帧及所述关键帧对应的中间帧组成。
在一些实施例中,获得的所述关键帧至少有两帧,所述装置还包括拼接模块,用于将所有所述关键帧对应的视频进行按照预设顺序进行拼接,获得目标视频。
第三方面,本申请提供了一种计算机系统,所述系统包括:
一个或多个处理器;
以及与所述一个或多个处理器关联的存储器,所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时,执行如下操作:
获取原始图片;
按照预设的渲染方法对所述原始图片进行渲染,获得关键帧;
按照所述预设的渲染方法对所述关键帧进行渲染,获得所述关键帧对应的中间帧;
生成所述关键帧对应的视频,所述视频由所述关键帧及所述关键帧对应的中间帧组成。
本发明实现的有益效果为:
本申请提出了通过获取原始图片;按照预设的渲染方法对原始图片进行渲染,获得关键帧;按照所述预设的渲染方法对所述关键帧进行渲染,获得所述关键帧对应的中间帧;生成所述关键帧对应的视频,所述视频由所述关键帧及所述关键帧对应的中间帧组成,实现了视频的自动化生成,同时原始图片可进行渲染获得关键帧,降低了对原始图片的质量的限制;
本申请还公开了一种渲染的具体方法,通过使用预设的三维图像处理技术,将待处理图片转换为三维立体图像,所述三维立体图像的边缘由顶点及所述顶点的连接关系组成,所述待处理图片为所述原始图片或所述关键帧;读取所述待处理图片对应的渲染参数;根据所述待处理图片对应的渲染参数,对所述顶点、所述顶点的连接关系进行修改,获得调整后的所述三维立体图像;将所述调整后的所述三维立体图像投影为二维图像;根据所述二维图像,获得所述待处理图片对应的目标帧,所述原始图片对应的目标帧为所述关键帧,所述关键帧对应的目标帧为所述关键帧对应的中间帧,可通过对渲染参数的修改实现对原始图片进行层叠、平移、旋转等全方位的调整,满足了在视频内容的丰富度、多样性方面的个性化需求;
本申请还提出了将每一所述关键帧对应的视频进行按照预设顺序进行拼接,获得目标视频,满足了对不同时长的视频的需求。
本发明所有产品并不需要具备上述所有效果。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的视频生成界面图;
图2是本申请实施例提供的产品外观图;
图3是本申请实施例提供的产品外观图;
图4是本申请实施例提供的图像渲染流程图;
图5是本申请实施例提供的三维网格模型图;
图6是本申请实施例提供的关键帧生成图;
图7是本申请实施例提供的关键帧生成图;
图8是本申请实施例提供的混合效果示例图;
图9是本申请实施例提供的视频帧示例图;
图10是本申请实施例提供的方法流程图;
图11是本申请实施例提供的装置结构图;
图12是本申请实施例提供的系统结构图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
一个视频通常了包含视频轨、音频轨、字幕轨等组成部分,对这些组成部分进行多轨同步播放,就构成了传统意义上的视频。视频内容的表达主要通过视频轨完成,视频轨实质上就是一组视频帧的集合。由于视觉暂留效应,当视频以1 秒播放25张连续渐进的视频帧的速度进行播放时,人眼所看到的就成为了一段连续的视频影像。
视频帧分为关键帧与中间帧。关键帧确定了一段视频画面表达的内容,中间帧则为两个关键帧之间提供了过渡,它可以是前一个关键帧画面内容的延续,或者是下一个关键帧的衔接。关键帧以及中间帧的集合就构成了一段视频。
因此,本发明提出了通过根据原始图片制作关键帧、根据关键帧制作中间帧的方式来生成视频。具体的,以对商品生成展示视频为例,可通过如下步骤实现:
步骤一、用户输入待处理图片,选择目标输出尺寸、关键路径及背景音乐;
如图1所示,用户可直接输入待处理商品的商品编码,自动获取对应的待处理图片。
本申请预先配置了多种渲染关键路径供用户选择,每个渲染关键路径对应一种视频视频的表现方法,例如平移、裁剪、滤镜、特效等,预先配置了对应各个表现方法的待处理图片的处理参数、关键帧的处理参数及所需的关键帧数量及要求。
根据用户选择的关键路径的不同,所需的关键帧的数量也不相同,可以为一帧或者超过一帧。当所需的关键帧数量超过一帧时,可以对生成的每一关键帧对应的序列帧动画进行拼接,获得完整视频。
关键路径是通过对视频渲染过程中涉及到的影响矩阵的几何变换的运算结果的参数及涉及的时间变量参数进行抽象,提取出视频帧生成过程的通用部分逻辑进行封装,得到一组可以进行自由优化组合的视频生成逻辑组件。
步骤二、根据用户选择的关键路径,对待处理图片进行处理,获得关键帧;
当判断用户输入的待处理图片的数量及内容已经满足了用户选择的关键路径对关键帧预设的要求时,可直接对待处理图片进行预处理,将经过预处理的待处理图片直接作为关键帧使用。
如图2、图3所示,用户输入的待处理图片无法直接作为视频的关键帧,需要先对待处理图片进行预处理,然后使用选择的关键路径对应的待处理图片处理参数进行处理,生成关键帧,根据选择的关键路径对应的关键帧处理参数对关键帧进行处理,获得中间帧。
待处理图片的处理参数及关键帧的处理参数中包含了对对应的图片的处理方法,包含对顶点坐标、方向矢量、颜色等变量的转换方法及转换参数。
所述预处理过程包含了将待处理图片抠图、获得商品主体的图像等图像预处理操作。
在完成对待处理图片的预处理过程后,可使用OpenGL完成将待处理图片转换为关键帧的过程。
OpenGL是一种用于渲染2D、3D矢量图形的跨语言、跨平台的应用程序编程接口,由近350个不同的函数调用组成,可用于绘制从简单的图形到复杂的三维景象的各种图形。
图4示出了图片处理的具体流程,分为几何阶段和光栅化阶段,具体的过程包括:
A、使用OpenGL构建一个渲染场景,包含固定位置的待处理图片、视角相机、视角相机对应的视锥体和光源;
B、将待处理图片转换为三维的三角形网格模型,如图5所示,所述三角形网格模型由连接的顶点组成;
C、根据选择的关键路径对应的待处理图片处理参数,对所述网格模型进行几何变换;
例如,当用户选择的关键路径为偏移、层叠、裁剪操作时,获得的关键帧结果可以是图6、图7所示的关键帧,其中的几何变换过程包括:
使用线性变换的方法,根据预设的计算参数,计算待处理图片包含的顶点的坐标;
根据预设的时间变量参数,对待处理图片包含的顶点的坐标进行调整,获得调整后的待处理图片。
线性变换指矢量加和标量乘的变换,以缩放、旋转、错切、镜像、正交投影等为代表。此外还可以结合平移变换,通过平移变换与线性变换又可以获取仿射变换。通过这些变换组合得到各种图像处理效果。
例如,实现图像平移效果时,可以使用平移矩阵
Figure BDA0002329451790000081
Figure BDA0002329451790000082
计算三维网格模型中的每个点平移后的坐标,所述矩阵表示将顶点 (x,y,z,1)沿X轴平移tx个单位,沿Y轴平移ty个单位,沿Z轴平移tz个单位。
在实现图像缩放效果时,可以使用缩放矩阵
Figure BDA0002329451790000083
计算每个点缩放后的坐标,所述矩阵表示将坐标(x,y,z,1)沿X轴扩大Kx个单位,沿Y轴扩大Ky个单位,沿Z轴扩大Kz个单位。
根据待处理图片处理参数中预设的平移量、缩放量等,即可使用对应的矩阵对待处理图片进行线性变换。
由于视频中的每一帧的画面存在一个随着时间连续渐进的过程,因此为了实现动画效果,需要将时间添加到对定点的计算中,以便在时间变化时每一帧的画面也可以随之变化,因此预先定义了如表1所示的时间变量。
Figure BDA0002329451790000091
表1
根据预设的时间变量参数对顶点坐标进行再次计算,即可实现每一帧随着时间变化的效果,获得调整后的待处理图片。
D、根据预设的视角相机、视角相机对应的视锥体和光源,将调整后的待处理图片不在视角相机视野内的部分删除,获得可见部分传入步骤E;
E、将可见部分包含的顶点的坐标转换二维坐标并进行光栅化渲染;
待处理图片处理参数中预设了关键帧的目标渲染效果,根据预设的目标渲染效果计算可见部分的像素覆盖情况,并检查每个预设的像素是否被覆盖,根据转换为二维坐标的可见部分包含的三角网格进行对预设的像素进行插值。
根据插值的结果,使用OpenGL提供的材质与着色器完成关键帧的输出。
步骤三、根据关键帧处理参数,对关键帧进行处理,获得中间帧;
对关键帧的处理方法与上述步骤二中对待处理图片的处理方法相同,根据对应的关键帧处理参数包含的预设时间变量参数、预设的平移量、缩放量、预设的像素等预设参数,将关键帧作为待处理图片进行处理,制作每个关键帧对应的中间帧。
步骤四、根据每一关键帧及对应的中间帧,合成序列帧动画;
步骤五、将每一关键帧对应得序列帧动画进行拼接,获得商品展示视频;
步骤四获得的序列帧动画是一个个独立的视频片段,但一个完整的视频需要由若干个关键帧生成的序列帧动画进行组合拼接而成。
将上一步获取的多组序列帧动画通过视频编码进行编码压缩,获得对应的序列帧动画文件,然后需要通过对其进行图像混合处理,生成对应的过渡视频文件以实现视频片段之间的中间过渡效果视频,从而进行多个序列帧动画文件之间的拼接。
中间过渡效果的生成实际上可以看作是对两个图像的混合操作,再进一步的抽象,图像的混合从微观的角度实质上就是像素颜色的混合,那么混合就和两个操作数有关:前一段视频最后一帧的颜色和后一段视频第一帧的颜色。
使用s指代前一段视频最后一帧的颜色即源颜色、用d指代后一段视频第一帧的颜色即目标颜色、用o表示对他们进行混合后得到的输出颜色。对于每一种颜色,都包含了RGBA四个通道的值。
混合是一个逐片元的操作,可以根据运算获得混合因子来影响混合效果。预先建立了混合等式Orgb=SrcFactor*Srgb+DstFactor*Drgb、Oa= SrcFactorA*Sa+DstFactorA*Da,当进行混合时,需要使用上述的混合等式,前者用于混合s与d的RGB通道,后者用于混合s与d的A通道。A通道用于控制图像的透明度,RGB通道用于控制图像的颜色。在关键路中,预设了上述的混合等式中和因子,上述混合等式中SrcFactor以及DstFactor可用的因子如下表2所示。
Figure BDA0002329451790000101
Figure BDA0002329451790000111
表2
在上述的混合等式中,把s和d与对应的混合因子相乘后,可以使用颜色相加、颜色相减、逐分量取小、逐分量取大等逻辑操作。通过上述的操作,实现比如透明度混合、柔和相加、正片叠底、两倍相乘、变暗、变亮、滤色、等同于、线性减淡等效果,如图8所示。
使用如图2所示的图片处理方法,将其适用范围从单张图像拓展到两张图像,通过深度测试及深度写入,把两张图像按照设定的距离视角相机的远近进行排序,按照从后往前的顺序渲染,通过深度缓冲中的像素排序值,渲染出一个重叠图像。通过加上线性变换等效果,由此生成的一系列序列帧动画就是可用于将两段视频拼接在一起的中间过渡效果视频。
将步骤五获得的序列帧动画顺序排列,并将对应的中间过渡效果视频插入其中,对获得的视频队列进行拼接,组装成一段有多个视频片段组成的完整视频,并可对其进行压缩,根据预设的尺寸等对视频大小进行调整,生成符合用户需求的视频。
实施例二
对应上述实施例,本申请提供了一种视频的生成方法,如图9所示,所述方法包括:
1010、获取原始图片;
1020、按照预设的渲染方法对所述原始图片进行渲染,获得关键帧;
优选的,所述预设的渲染方法包括:
1021、使用预设的三维图像处理技术,将待处理图片转换为三维立体图像,所述三维立体图像由顶点及所述顶点的连接关系组成,所述待处理图片为所述原始图片或所述关键帧;
读取所述待处理图片对应的渲染参数;
根据所述待处理图片对应的渲染参数,对所述顶点、所述顶点的连接关系进行修改,获得调整后的所述三维立体图像;
将所述调整后的所述三维立体图像投影为二维图像;
根据所述二维图像,获得所述待处理图片对应的目标帧,所述原始图片对应的目标帧为所述关键帧,所述关键帧对应的目标帧为所述关键帧对应的中间帧。
优选的,所述根据所述二维图像,获得关键帧包括:
1022、根据所述待处理图片对应的渲染参数,获得所述待处理图片对应的特效对象;
根据所述二维图像及所述对应的特效对象进行渲染,获得所述待处理图片对应的目标帧。
优选的,所述根据所述待处理图片对应的渲染参数,对所述顶点、所述顶点的连接关系进行修改,获得调整后的所述三维立体图像还包括:
根据所述待处理图片对应的渲染参数,对所述顶点、所述顶点的连接关系进行修改,获得修改后的所述三维立体图像;
删除修改后的所述三维立体图像不在预设的相机视角的可见范围内的部分,获得调整后的所述三维立体图像。
1030、按照所述预设的渲染方法对所述关键帧进行渲染,获得所述关键帧对应的中间帧;
优选的,所述方法还包括:
1031、读取预设的参数配置文件,获得原始图片处理参数及关键帧处理参数;
所述按照预设的渲染方法对所述原始图片进行渲染,获得关键帧包括:
1032、根据所述原始图片处理参数,按照预设的渲染方法对所述原始图片进行渲染,获得关键帧;
所述按照所述预设的渲染方法对所述关键帧进行渲染,获得所述关键帧对应的中间帧包括:
1033、根据所述关键帧处理参数,按照所述预设的渲染方法对所述关键帧进行渲染,获得所述关键帧对应的中间帧。
1040、生成所述关键帧对应的视频,所述视频由所述关键帧及所述关键帧对应的中间帧组成。
优选的,获得的所述关键帧至少有两帧,所述方法还包括:
1041、将所有所述关键帧对应的视频进行按照预设顺序进行拼接,获得目标视频。
优选的,所述将每一所述关键帧对应的视频进行按照预设顺序进行拼接,获得目标视频包括:
1042、按照预设的图像处理方法,生成每一所述关键帧对应的过渡视频;
将所述关键帧对应的视频、所述关键帧对应的过渡视频按照预设的关键帧顺序进行排序并拼接,获得完整视频。
实施例三
对应上述方法实施例,如图11所示,本申请提供了一种视频的生成装置,所述装置包括:
获取模块1110,用于获取原始图片;
渲染模块1120,用于按照预设的渲染方法对所述原始图片进行渲染,获得关键帧;
及按照所述预设的渲染方法对所述关键帧进行渲染,获得所述关键帧对应的中间帧;
生成模块1130,用于生成所述关键帧对应的视频,所述视频由所述关键帧及所述关键帧对应的中间帧组成。
优选的,获得的所述关键帧至少有两帧,所述装置还包括拼接模块1140,用于将每一所述关键帧对应的视频进行按照预设顺序进行拼接,获得目标视频。
优选的,所述渲染模块1120还可用于使用预设的三维图像处理技术,将待处理图片转换为三维立体图像,所述三维立体图像由顶点及所述顶点的连接关系组成,所述待处理图片为所述原始图片或所述关键帧;
读取所述待处理图片对应的渲染参数;
根据所述待处理图片对应的渲染参数,对所述顶点、所述顶点的连接关系进行修改,获得调整后的所述三维立体图像;
将所述调整后的所述三维立体图像投影为二维图像;
根据所述二维图像,获得所述待处理图片对应的目标帧,所述原始图片对应的目标帧为所述关键帧,所述关键帧对应的目标帧为所述关键帧对应的中间帧。
优选的,所述渲染模块1120还可用于:
根据所述待处理图片对应的渲染参数,获得所述待处理图片对应的特效对象;
根据所述二维图像及所述对应的特效对象进行渲染,获得所述待处理图片对应的目标帧。
优选的,所述渲染模块1120还可用于:
根据所述待处理图片对应的渲染参数,对所述顶点、所述顶点的连接关系进行修改,获得修改后的所述三维立体图像;
删除修改后的所述三维立体图像不在预设的相机视角的可见范围内的部分,获得调整后的所述三维立体图像。
优选的,所述获取模块1120还可用于:
读取预设的参数配置文件,获得原始图片处理参数及关键帧处理参数;
所述渲染模块1120还可用于:
根据所述原始图片处理参数,按照预设的渲染方法对所述原始图片进行渲染,获得关键帧;及:
根据所述关键帧处理参数,按照所述预设的渲染方法对所述关键帧进行渲染,获得所述关键帧对应的中间帧。
优选的,所述拼接模块1140还可用于:
按照预设的图像处理方法,生成每一所述关键帧对应的过渡视频;
将所述关键帧对应的视频、所述关键帧对应的过渡视频按照预设的关键帧顺序进行排序并拼接,获得完整视频。
实施例四
对应上述方法、设备及系统,本申请实施例四提供一种计算机系统,包括:一个或多个处理器;以及与所述一个或多个处理器关联的存储器,所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时,执行如下操作:
获取原始图片;
按照预设的渲染方法对所述原始图片进行渲染,获得关键帧;
按照所述预设的渲染方法对所述关键帧进行渲染,获得所述关键帧对应的中间帧;
生成所述关键帧对应的视频,所述视频由所述关键帧及所述关键帧对应的中间帧组成。
其中,图12示例性的展示出了计算机系统的架构,具体可以包括处理器 1510,视频显示适配器1511,磁盘驱动器1512,输入/输出接口1513,网络接口 1514,以及存储器1520。上述处理器1510、视频显示适配器1511、磁盘驱动器 1512、输入/输出接口1513、网络接口1514,与存储器1520之间可以通过通信总线1530进行通信连接。
其中,处理器1510可以采用通用的CPU(Central Processing Unit,中央处理器)、微处理器、应用专用集成电路(Application Specific Integrated Circuit, ASIC)、或者一个或多个集成电路等方式实现,用于执行相关程序,以实现本申请所提供的技术方案。
存储器1520可以采用ROM(Read Only Memory,只读存储器)、RAM (Random AccessMemory,随机存取存储器)、静态存储设备,动态存储设备等形式实现。存储器1520可以存储用于控制计算机系统1500运行的操作系统1521,用于控制计算机系统1500的低级别操作的基本输入输出系统(BIOS)。另外,还可以存储网页浏览器1523,数据存储管理系统1524,以及图标字体处理系统1525 等等。上述图标字体处理系统1525就可以是本申请实施例中具体实现前述各步骤操作的应用程序。总之,在通过软件或者固件来实现本申请所提供的技术方案时,相关的程序代码保存在存储器1520中,并由处理器1510来调用执行。
输入/输出接口1513用于连接输入/输出模块,以实现信息输入及输出。输入输出/模块可以作为组件配置在设备中(图中未示出),也可以外接于设备以提供相应功能。其中输入设备可以包括键盘、鼠标、触摸屏、麦克风、各类传感器等,输出设备可以包括显示器、扬声器、振动器、指示灯等。
网络接口1514用于连接通信模块(图中未示出),以实现本设备与其他设备的通信交互。其中通信模块可以通过有线方式(例如USB、网线等)实现通信,也可以通过无线方式(例如移动网络、WIFI、蓝牙等)实现通信。
总线1530包括一通路,在设备的各个组件(例如处理器1510、视频显示适配器1511、磁盘驱动器1512、输入/输出接口1513、网络接口1514,与存储器 1520)之间传输信息。
另外,该计算机系统1500还可以从虚拟资源对象领取条件信息数据库1541 中获得具体领取条件的信息,以用于进行条件判断,等等。
需要说明的是,尽管上述设备仅示出了处理器1510、视频显示适配器1511、磁盘驱动器1512、输入/输出接口1513、网络接口1514,存储器1520,总线1530 等,但是在具体实施过程中,该设备还可以包括实现正常运行所必需的其他组件。此外,本领域的技术人员可以理解的是,上述设备中也可以仅包含实现本申请方案所必需的组件,而不必包含图中所示的全部组件。
通过以上的实施方式的描述可知,本领域的技术人员可以清楚地了解到本申请可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,云服务器,或者网络设备等)执行本申请各个实施例或者实施例的某些部分所述的方法。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统或系统实施例而言,由于其基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。以上所描述的系统及系统实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (9)

1.一种视频的生成方法,其特征在于,所述方法包括:
获取原始图片;
按照预设的渲染方法对所述原始图片进行渲染,获得关键帧;
按照所述预设的渲染方法对所述关键帧进行渲染,获得所述关键帧对应的中间帧;
生成所述关键帧对应的视频,所述视频由所述关键帧及所述关键帧对应的中间帧组成;
其中,所述预设的渲染方法包括:
使用预设的三维图像处理技术,将待处理图片转换为三维立体图像,所述三维立体图像由顶点及所述顶点的连接关系组成,所述待处理图片为所述原始图片或所述关键帧;
读取所述待处理图片对应的渲染参数;
根据所述待处理图片对应的渲染参数,对所述顶点、所述顶点的连接关系进行修改,获得调整后的所述三维立体图像;
将所述调整后的所述三维立体图像投影为二维图像;
根据所述二维图像,获得所述待处理图片对应的目标帧,所述原始图片对应的目标帧为所述关键帧,所述关键帧对应的目标帧为所述关键帧对应的中间帧。
2.根据权利要求1所述的方法,其特征在于,所述根据所述二维图像,获得所述待处理图片对应的目标帧包括:
根据所述待处理图片对应的渲染参数,获得所述待处理图片对应的特效对象;
根据所述二维图像及所述对应的特效对象进行渲染,获得所述待处理图片对应的目标帧。
3.根据权利要求1所述的方法,其特征在于,所述根据所述待处理图片对应的渲染参数,对所述顶点、所述顶点的连接关系进行修改,获得调整后的所述三维立体图像还包括:
根据所述待处理图片对应的渲染参数,对所述顶点、所述顶点的连接关系进行修改,获得修改后的所述三维立体图像;
删除修改后的所述三维立体图像不在预设的相机视角的可见范围内的部分,获得调整后的所述三维立体图像。
4.根据权利要求1-3任一所述的方法,其特征在于,所述方法还包括:
读取预设的参数配置文件,获得原始图片处理参数及关键帧处理参数;
所述按照预设的渲染方法对所述原始图片进行渲染,获得关键帧包括:
根据所述原始图片处理参数,按照预设的渲染方法对所述原始图片进行渲染,获得关键帧;
所述按照所述预设的渲染方法对所述关键帧进行渲染,获得所述关键帧对应的中间帧包括:
根据所述关键帧处理参数,按照所述预设的渲染方法对所述关键帧进行渲染,获得所述关键帧对应的中间帧。
5.根据权利要求1-3任一所述的方法,其特征在于,获得的所述关键帧至少有两帧,所述方法还包括:
将所有所述关键帧对应的视频进行按照预设顺序进行拼接,获得目标视频。
6.根据权利要求5所述的方法,其特征在于,所述将所有所述关键帧对应的视频进行按照预设顺序进行拼接,获得目标视频包括:
按照预设的图像处理方法,生成每一所述关键帧对应的过渡视频;
将所述关键帧对应的视频、所述关键帧对应的过渡视频按照预设的关键帧顺序进行排序并拼接,获得完整视频。
7.一种视频的生成装置,其特征在于,所述装置包括:
获取模块,用于获取原始图片;
渲染模块,用于按照预设的渲染方法对所述原始图片进行渲染,获得关键帧;
及按照所述预设的渲染方法对所述关键帧进行渲染,获得所述关键帧对应的中间帧;
生成模块,用于生成所述关键帧对应的视频,所述视频由所述关键帧及所述关键帧对应的中间帧组成;
其中渲染模块用于使用预设的三维图像处理技术,将待处理图片转换为三维立体图像,所述三维立体图像由顶点及所述顶点的连接关系组成,所述待处理图片为所述原始图片或所述关键帧;
读取所述待处理图片对应的渲染参数;
根据所述待处理图片对应的渲染参数,对所述顶点、所述顶点的连接关系进行修改,获得调整后的所述三维立体图像;
将所述调整后的所述三维立体图像投影为二维图像;
根据所述二维图像,获得所述待处理图片对应的目标帧,所述原始图片对应的目标帧为所述关键帧,所述关键帧对应的目标帧为所述关键帧对应的中间帧。
8.根据权利要求7所述的生成装置,其特征在于,获得的所述关键帧至少有两帧,所述装置还包括拼接模块,用于将所有所述关键帧对应的视频进行按照预设顺序进行拼接,获得目标视频。
9.一种计算机系统,其特征在于,所述系统包括:
一个或多个处理器;
以及与所述一个或多个处理器关联的存储器,所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时,执行如下操作:
获取原始图片;
按照预设的渲染方法对所述原始图片进行渲染,获得关键帧;
按照所述预设的渲染方法对所述关键帧进行渲染,获得所述关键帧对应的中间帧;
生成所述关键帧对应的视频,所述视频由所述关键帧及所述关键帧对应的中间帧组成;
其中,所述预设的渲染方法包括:
使用预设的三维图像处理技术,将待处理图片转换为三维立体图像,所述三维立体图像由顶点及所述顶点的连接关系组成,所述待处理图片为所述原始图片或所述关键帧;
读取所述待处理图片对应的渲染参数;
根据所述待处理图片对应的渲染参数,对所述顶点、所述顶点的连接关系进行修改,获得调整后的所述三维立体图像;
将所述调整后的所述三维立体图像投影为二维图像;
根据所述二维图像,获得所述待处理图片对应的目标帧,所述原始图片对应的目标帧为所述关键帧,所述关键帧对应的目标帧为所述关键帧对应的中间帧。
CN201911330586.7A 2019-12-20 2019-12-20 一种视频的生成方法、装置及计算机系统 Active CN111161392B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201911330586.7A CN111161392B (zh) 2019-12-20 2019-12-20 一种视频的生成方法、装置及计算机系统
PCT/CN2020/111945 WO2021120685A1 (zh) 2019-12-20 2020-08-28 一种视频的生成方法、装置及计算机系统
CA3164771A CA3164771A1 (en) 2019-12-20 2020-08-28 Video generating method, device and computer system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911330586.7A CN111161392B (zh) 2019-12-20 2019-12-20 一种视频的生成方法、装置及计算机系统

Publications (2)

Publication Number Publication Date
CN111161392A CN111161392A (zh) 2020-05-15
CN111161392B true CN111161392B (zh) 2022-12-16

Family

ID=70557685

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911330586.7A Active CN111161392B (zh) 2019-12-20 2019-12-20 一种视频的生成方法、装置及计算机系统

Country Status (3)

Country Link
CN (1) CN111161392B (zh)
CA (1) CA3164771A1 (zh)
WO (1) WO2021120685A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111182367A (zh) * 2019-12-30 2020-05-19 苏宁云计算有限公司 一种视频的生成方法、装置及计算机系统
CN111935528B (zh) * 2020-06-22 2022-12-16 北京百度网讯科技有限公司 视频生成方法和装置
CN114286197A (zh) * 2022-01-04 2022-04-05 土巴兔集团股份有限公司 基于3d场景快速生成短视频的方法及相关装置
CN114827714B (zh) * 2022-04-11 2023-11-21 咪咕文化科技有限公司 基于视频指纹的视频还原方法、终端设备及存储介质
CN115034233A (zh) * 2022-06-16 2022-09-09 安徽听见科技有限公司 翻译方法、装置、电子设备及存储介质
CN115348478B (zh) * 2022-07-25 2023-09-19 深圳市九洲电器有限公司 设备交互显示方法、装置、电子设备及可读存储介质
CN116567353B (zh) * 2023-07-10 2023-09-12 湖南快乐阳光互动娱乐传媒有限公司 一种视频投放方法及装置、存储介质及电子设备
CN117315099A (zh) * 2023-10-30 2023-12-29 深圳市黑屋文化创意有限公司 一种用于三维动画的画面数据处理系统及方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108924464A (zh) * 2018-07-10 2018-11-30 腾讯科技(深圳)有限公司 视频文件的生成方法、装置及存储介质

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103634605B (zh) * 2013-12-04 2017-02-15 百度在线网络技术(北京)有限公司 视频画面的处理方法及装置
CN110392281B (zh) * 2018-04-20 2022-03-18 腾讯科技(深圳)有限公司 视频合成方法、装置、计算机设备及存储介质
CN109922373B (zh) * 2019-03-14 2021-09-28 上海极链网络科技有限公司 视频处理方法、装置及存储介质
CN110263217A (zh) * 2019-06-28 2019-09-20 北京奇艺世纪科技有限公司 一种视频片段标签识别方法及装置
CN111182367A (zh) * 2019-12-30 2020-05-19 苏宁云计算有限公司 一种视频的生成方法、装置及计算机系统

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108924464A (zh) * 2018-07-10 2018-11-30 腾讯科技(深圳)有限公司 视频文件的生成方法、装置及存储介质

Also Published As

Publication number Publication date
CN111161392A (zh) 2020-05-15
CA3164771A1 (en) 2021-06-24
WO2021120685A1 (zh) 2021-06-24

Similar Documents

Publication Publication Date Title
CN111161392B (zh) 一种视频的生成方法、装置及计算机系统
WO2021135320A1 (zh) 一种视频的生成方法、装置及计算机系统
CN109448089B (zh) 一种渲染方法及装置
CN106611435B (zh) 动画处理方法和装置
Schütz et al. Real-time continuous level of detail rendering of point clouds
US9799134B2 (en) Method and system for high-performance real-time adjustment of one or more elements in a playing video, interactive 360° content or image
KR101145260B1 (ko) 3d 객체 모델에 텍스쳐를 매핑하는 방법 및 장치
US20100060652A1 (en) Graphics rendering system
US20130278600A1 (en) Rendering interactive photorealistic 3d model representations
WO2018208698A1 (en) Processing 3d video content
US10089782B2 (en) Generating polygon vertices using surface relief information
US10733793B2 (en) Indexed value blending for use in image rendering
RU2680355C1 (ru) Способ и система удаления невидимых поверхностей трёхмерной сцены
US8669996B2 (en) Image processing device and image processing method
CN115170709A (zh) 动态图像的编辑方法、装置和电子设备
JP4987124B2 (ja) グラフィックデータ提供方法及びグラフィックデータ表示方法
CN115311395A (zh) 三维场景渲染方法、装置及设备
JP2006517705A (ja) コンピュータグラフィックスシステム及びコンピュータグラフィクイメージのレンダリング方法
CN116712727A (zh) 同屏画面渲染方法、装置及电子设备
WO2020174488A1 (en) Programmatic hairstyle opacity compositing for 3d rendering
JP2003168130A (ja) リアルタイムで合成シーンのフォトリアルなレンダリングをプレビューするための方法
CN113093903B (zh) 一种图像显示方法及显示设备
KR102666871B1 (ko) Ar 디바이스용 대용량 3차원 모델 출력 방법 및 장치
CN108805964B (zh) 基于OpenGL ES的VR机顶盒启动动画制作方法及系统
奥屋武志 Real-Time Rendering Method for Reproducing the Features of Cel Animations

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: No.1-1 Suning Avenue, Xuzhuang Software Park, Xuanwu District, Nanjing, Jiangsu Province, 210000

Patentee after: Jiangsu Suning cloud computing Co.,Ltd.

Country or region after: China

Address before: No.1-1 Suning Avenue, Xuzhuang Software Park, Xuanwu District, Nanjing, Jiangsu Province, 210000

Patentee before: Suning Cloud Computing Co.,Ltd.

Country or region before: China

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20240613

Address after: Room 3104, Building A5, No. 3 Gutan Avenue, Economic Development Zone, Gaochun District, Nanjing City, Jiangsu Province, 210000

Patentee after: Jiangsu Biying Technology Co.,Ltd.

Country or region after: China

Address before: No.1-1 Suning Avenue, Xuzhuang Software Park, Xuanwu District, Nanjing, Jiangsu Province, 210000

Patentee before: Jiangsu Suning cloud computing Co.,Ltd.

Country or region before: China