CN107564084B - 一种动图合成方法、装置及存储设备 - Google Patents

一种动图合成方法、装置及存储设备 Download PDF

Info

Publication number
CN107564084B
CN107564084B CN201710733177.6A CN201710733177A CN107564084B CN 107564084 B CN107564084 B CN 107564084B CN 201710733177 A CN201710733177 A CN 201710733177A CN 107564084 B CN107564084 B CN 107564084B
Authority
CN
China
Prior art keywords
picture
transfer
pictures
template
transferred
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710733177.6A
Other languages
English (en)
Other versions
CN107564084A (zh
Inventor
马芳
华有为
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201710733177.6A priority Critical patent/CN107564084B/zh
Publication of CN107564084A publication Critical patent/CN107564084A/zh
Application granted granted Critical
Publication of CN107564084B publication Critical patent/CN107564084B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明实施例公开了动图合成方法、装置及存储设备,应用于信息处理技术领域。在本实施例的方法中,动图的合成装置在合动图时,需要变换多个待处理图片中的转移图片的像素点的位置,使得转移图片与模板图片中基于某一背景的像素点对齐,然后再根据变换后的转移图片及模板图片合成动图。这样,在根据多个待处理图片合成动图的过程中,考虑到了多个待处理图片在拍摄过程中的拍摄位置和角度等变化因素,会使得最终合成的动图中的背景出现抖动,而在针对待处理图片中的转移图片进行变换后再合成动图,可以减少合成的动图中背景的抖动感。

Description

一种动图合成方法、装置及存储设备
技术领域
本发明涉及信息处理技术领域,特别涉及一种动图合成方法、装置及存储设备。
背景技术
可交换的图像文件(Graphic Interchange Format,GIF)动图有较丰富趣味的表达寓意,在即时通信客户端之间的通信过程中有较大的发送量。现有些客户端(比如QQ空间)具有GIF动图合成能力,具体可以将输入到这些客户端的图片合成GIF动图,受到了广大用户的好评。
现有的GIF动图合成的一种方法具体包括:扫描本地储存的用户拍摄照片之后,根据拍摄时间将照片分组,并在“趣味动图”的页面显示各组照片。这样用户可以点击该页面上显示的任一组照片,进入GIF动图的编辑页面,在编辑页面对该组照片进行编辑后合成GIF动图。由于用户没有专业的拍摄防抖设备,其自行连拍的照片通常会因为手抖等因素,拍摄位置和角度有些许变化,导致同一场景拍摄的照片合成为GIF动图后背景存在明显的抖动感,影响观看体验。
发明内容
本发明实施例提供一种动图合成方法、装置及存储设备,实现了在将待处理图片中的转移图片的像素点的位置进行变换后,根据变换后的转移图片与模板图片合成动图。
本发明实施例第一方面提供一种动图合成方法,包括:
确定多个待处理图片,所述多个待处理图片是针对某一背景的图片;
选定所述多个待处理图片中的某一个图片作为模板图片,所述多个待处理图片中除所述模板图片之外的其它图片为转移图片;
变换转移图片中像素点的位置,使得所述转移图片与所述模板图片中基于所述某一背景的像素点对齐;
根据所述变换后的转移图片及所述模板图片合成动图。
本发明实施例第二方面提供一种动图合成装置,包括:
待处理确定单元,用于确定多个待处理图片,所述多个待处理图片是针对某一背景的图片;
选定单元,用于选定所述多个待处理图片中的某一个图片作为模板图片,所述多个待处理图片中除所述模板图片之外的其它图片为转移图片;
变换单元,用于变换转移图片中像素点的位置,使得所述转移图片与所述模板图片中基于所述某一背景的像素点对齐;
合成单元,用于根据所述变换后的转移图片及所述模板图片合成动图。
本发明实施例第三方面提供一种存储设备,所述存储设备储存多条指令,所述指令适于由处理器加载并执行如本发明实施例第一方面所述的动图合成方法。
本发明实施例第四方面提供一种终端设备,包括处理器和存储设备,所述处理器,用于实现各个指令;
所述存储设备用于储存多条指令,所述指令用于由处理器加载并执行如本发明实施例第一方面所述的动图合成方法。
可见,在本实施例的方法中,动图的合成装置在合动图时,需要变换多个待处理图片中的转移图片的像素点的位置,使得转移图片与模板图片中基于某一背景的像素点对齐,然后再根据变换后的转移图片及模板图片合成动图。这样,在根据多个待处理图片合成动图的过程中,考虑到了多个待处理图片在拍摄过程中的拍摄位置和角度等变化因素,会使得最终合成的动图中的背景出现抖动,而在针对待处理图片中的转移图片进行变换后再合成动图,可以减少合成的动图中背景的抖动感。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明一个实施例提供的一种动图合成的方法流程图;
图2是本发明一个实施例中变换转移图片的示意图;
图3是本发明一个实施例中变换后的转移图片的黑边的示意图;
图4a是本发明应用实施例中显示各组图片的示意图;
图4b是本发明应用实施例中GIF合成编辑界面的示意图;
图5是本发明应用实施例中用户空间客户端对一个转移图片进行变换的方法流程图;
图6是本发明实施例提供的一种动图合成装置的结构示意图;
图7是本发明实施例提供的一种终端设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排它的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例提供一种动图合成方法,主要是将多个运动模型相关的图片合成动图(比如GIF动图)的方法,一般情况下,如果多个图片是在预置的一段时间内(比如2秒内)针对同一背景连续拍摄的图片,则认为这多个图片属于运动模型相关的图片,运行模型相关的多个图片之间的相似度大于预置相似度。在本发明实施例中,动图合成装置在进行动图合成时:
确定多个待处理图片,多个待处理图片是针对某一背景的图片;选定多个待处理图片中的某一个图片作为模板图片,则多个待处理图片中除模板图片之外的其它图片为转移图片;变换转移图片中像素点的位置,使得转移图片与模板图片中基于上述某一背景的像素点对齐;根据变换后的转移图片及模板图片合成动图。
这样,在根据多个待处理图片合成动图的过程中,考虑到了多个待处理图片在拍摄过程中的拍摄位置和角度等变化因素,会使得最终合成的动图中的背景出现抖动,而在针对待处理图片中的转移图片进行变换后再合成动图,可以减少合成的动图中背景的抖动感。
本发明的一个实施例提供一种动图合成方法,主要是由动图合成装置将多个运动模型相关的图片合成动图的方法,流程图如图1所示,包括:
步骤101,确定多个待处理图片,这多个待处理图片是针对某一背景的图片。
一般情况下,用户可以将针对某一背景的多个图片输入到动图合成装置中,以发起本实施例中的流程。这样动图合成装置会接收输入的多个图片,并确定这多个图片是否满足如下条件,如果满足,则确定多个图片为多个待处理图片:多个图片的数量大于预置数值;多个图片的大小一致,即多个图片的高和宽都一致;多个图片的拍摄时间在预置范围内且多个图片之间的相似度大于预置相似度等。
在其它情况下,动图合成装置可以根据用户对该动图合成装置的操作信息,扫描本地储存的多个图片,如果扫描的多个图片是针对某一背景的运动模型相关的图片,则动图合成装置会发起本实施例的流程。
步骤102,选定多个待处理图片中的某一个图片作为模板图片,则多个待处理图片中除模板图片之外的其它图片为转移图片。具体地,可以选定多个待处理图片中拍摄时间最早的一个图片作为模板图片,或者随机选定任一待处理图片作为模板图片,而转移图片可以为一个或多个。
其中,模板图片是对转移图片进行变换的基准图片,不需要对模板图片进行任何变换。
例如,如果上述多个待处理图片是对同一背景连续拍摄得到的多个连拍照片,则可以将拍摄时间最早的一个照片作为模板图片,而多个连拍照片中除模板图片之外的其它照片则为转移图片。
步骤103,变换转移图片中像素点的位置,使得转移图片与模板图片中基于上述某一背景的像素点对齐,这里转移图片是多个待处理图片中除模板图片之外的其它图片。
具体地,参考图2所示,在对任一转移图片中像素点的位置进行变换时,可以通过如下任一方法进行实现:
平移变换(Translation),比如图2中,图像(1)可以通过平移获得图像(2);欧式变换(Euclidean),比如图2中,图像(1)可以通过平移与旋转获得图像(3),在变换过程中,图像大小不变,平行线保持平行,且变换后的直角保持不变;仿射变换(Affine),比如图2中,图像(1)可以通过平移、选择、缩放以及切变获得图像(4),欧式变换与平移变换其实都是仿射变换的特例;单应矩阵变换(Homography),比如图2中,图像(1)通过部分3D变换后得到图像(5)。
这里某一转移图片与模板图片中基于某一背景的像素点对齐,是指当该转移图片中像素点的位置变换后,该转移图片中某一背景的像素点的位置,与模板图片中该背景的像素点的位置一致,比如坐标信息一致等。
比如,某一背景的像素点包括像素点1,2和3,则在针对转移图片进行变换后,转移图片中该背景的像素点1与模板图片中该背景的像素点1的位置一致,转移图片中该背景的像素点2与模板图片中该背景的像素点2的位置一致,转移图片中该背景的像素点3与模板图片中该背景的像素点3的位置一致。
具体地,比如,转移图片中该背景的像素点3的位置为(x1,y1),则模板图片中该背景的像素点3的位置也需要为(x1,y1)。
步骤104,根据变换后的转移图片及模板图片合成动图。
具体地,动图合成装置可以直接将变换后的转移图片及模板图片合成GIF动图,也可以先对变换后的转移图片进行一定处理,比如黑边切除等处理后,再将一定处理后的转移图片及模板图片合成动图。
其中,由于转移图片在向模板图片对齐的过程中,转移图片经过平移和旋转等变换之后必然会有一部分图像超出原图区域,而另一部分图像在原图区域的内部,这样在边界位置会形成没有内容的黑边部分,因此,需要对变换后的转移图片进行黑边切除处理,即去除变换后的转移图片中无像素点的部分图像,然后再将黑边切除处理后的转移图片及模板图片合成动图。其中,进行黑边切除处理后的转移图片的大小小于原转移图片的大小。
例如图3所示,一个实线框显示的为转移图片的原图区域,当该转移图片进行平移变换后得到变换后的转移图片,如图3中另一实线框所示,而在变换后的转移图片的边界位置的区域内会出现黑边,即图3中虚线框所示的区域,就需要动图合成装置去除该区域的图像。
可见,在本实施例的方法中,动图的合成装置在合动图时,需要变换多个待处理图片中的转移图片的像素点的位置,使得转移图片与模板图片中基于某一背景的像素点对齐,然后再根据变换后的转移图片及模板图片合成动图。这样,在根据多个待处理图片合成动图的过程中,考虑到了多个待处理图片在拍摄过程中的拍摄位置和角度等变化因素,会使得最终合成的动图中的背景出现抖动,而在针对待处理图片中的转移图片进行变换后再合成动图,可以减少合成的动图中背景的抖动感。
在一个具体的实施例中,动图合成装置在执行上述步骤102时,可以通过如下几种方式来实现:
(1)对转移图片与模板图片进行整幅图片对齐:计算转移图片与模板图片之间的第一转移信息(具体可以是转移矩阵);根据转移图片对应的第一转移信息,对转移图片进行变换。其中,该第一转移信息用于描述转移图片的各个像素点与模板图片的相应像素点之间的位置转移,可以是转移图片与模板图片之间的整体转移矩阵。
在一种情况下,如果某一转移图片与模板图片之间针对上述某一背景是欧式变换的,则可以将该转移图片进行整体欧式变换,从而达到该转移图片与模板图片中基于某一背景的像素点对齐的效果。
这样,在具体应用过程中,动图合成装置可以先计算得到某一转移图片与模板图片之间的整体转移矩阵,并将计算的整体转移矩阵储存成一个2x3的变换矩阵(warp_matrix)参数的值;然后动图合成装置会调用仿射变换(warpAffine)函数,这样warpAffine函数会根据该变换矩阵参数的值将对应的转移图片进行整体的欧式变换。
其中,在计算转移矩阵时,动图合成装置可以调用从应用增强的相关系数查找转移信息(findTransformECC)函数,该函数利用增强相关系数最大化的参数图像对准算法,可以在已知两幅图片与其运动模型类型(即欧式变换)的前提下,求解出该运动模型的具体参数值即整体转移矩阵。
而warpAffine函数在进行欧式变换时,可以直接将整体转移矩阵(即变换矩阵参数的值)分别与包括转移图片中各个像素点的坐标信息的矩阵相乘,得到变换后的转移图片中对应像素点的坐标信息。这里包括转移图片中某一像素点的坐标信息的矩阵是指该矩阵中除了可以包括该像素点的坐标信息,还可以包括其它元素,而是否包括其它元素,需要根据转移矩阵的大小来决定,比如,转移矩阵为2x3的矩阵,则包括转移图片中某一像素点的坐标信息的矩阵为3x1的矩阵,这样两个矩阵才能相乘,因此,包括转移图片中某一像素点的坐标信息的矩阵中除了包括该像素点的坐标信息之外,还可以包括另一个元素,比如1。
例如,上述某一转移图片中某一像素点的坐标为(x,y),变换后的转移图片中该像素点的坐标为(x',y'),变换矩阵参数的值为
Figure BDA0001387551730000071
Figure BDA0001387551730000072
进一步地,为了简化动图合成装置的计算量,在另一个具体的实施例中,动图合成装置在计算某一转移图片与模板图片之间的第一转移信息时,可以先分别压缩该转移图片和模板图片,并确定压缩比;然后计算压缩后的转移图片与压缩后的模板图片之间的压缩后转移信息;最后根据压缩后转移信息及压缩比确定该转移图片与模板图片之间的第一转移信息。
具体地,假设动图合成装置计算的压缩后转移信息M0为转移矩阵
Figure BDA0001387551730000073
转移图片中某一像素点的坐标(x,y)在压缩之后的坐标为(x/be,y/be),按照转移图片进行变换后的图片中对应像素点的坐标为(x',y'),按照压缩后的转移图片进行变换后的图片中对应像素点的坐标为(x'/be,y'/be),则根据如下公式(1)从而得到公式(2),进而得到公式(3)中某一转移图片中某一背景的像素点与模板图片中对应像素点之间的转移信息M。
Figure BDA0001387551730000081
Figure BDA0001387551730000082
Figure BDA0001387551730000083
(2)自动对转移图片与模板图片进行局部对齐:计算转移图片中上述某一背景的图像与模板图片中对应图像之间的第二转移信息(比如转移矩阵);根据转移图片对应的第二转移信息,对转移图片进行变换。其中,该第二转移信息用于描述转移图片中某一背景的各个像素点与模板图片的相应像素点之间的位置转移,可以是转移图片与模板图片之间的部分图像转移矩阵。
这种情况下,动图合成装置只是计算转移图片与模板图片之间基于某一背景的图像的转移信息即第二转移信息,然后再根据第二转移信息对转移图片进行整体变换。
(3)通过对转移图片进行编辑以实现变换效果:显示转移图片的编辑界面,编辑界面用于对转移图片进行编辑使得所述转移图片与模板图片中基于上述某一背景的像素点对齐;当接收到从编辑界面发送的编辑后的转移图片,将编辑后的转移图片作为变换后的转移图片。其中,在对某一转移图片进行编辑时,主要是为了变换该转移图片中各个像素点的位置,比如平移或旋转转移图片等。
需要说明的是,在这种情况下,由于实际对转移图片编辑的误差,使得在对转移图片中像素点的位置进行变换后,转移图片中背景的像素点与模板图片中对应像素点的位置一致可以指:转移图片中背景的像素点的位置坐标与模板图片中对应像素点的位置坐标相同,或近似相同。
可以理解,在一种情况下,当动图合成装置在执行上述步骤102后,可以直接显示一个转移图片的一个编辑界面,这样用户可以在该编辑界面编辑一个转移图片,比如平移或旋转转移图片等,并点击储存编辑后的转移图片。然后动图合成装置会针对其它每一个转移图片,都执行上述显示编辑界面,用户通过编辑界面编辑转移图片及储存编辑后的转移图片的步骤,从而完成对各个转移图片中像素点的位置的变换。
在另一种情况下,当动图合成装置在执行上述步骤102后,可以直接显示所有转移图片的总体编辑界面,该总体编辑界面上包括各个转移图片进行编辑的入口。当用户点击对某一转移图片进行编辑的入口,则动图合成装置会显示某一转移图片的编辑界面,这样动图合成装置会针对该转移图片执行上述用户通过编辑界面编辑转移图片及储存编辑后的转移图片的步骤。且当动图合成装置储存了某一编辑后的转移图片后,可以返回显示上述总体编辑界面,且会在对应转移图片的入口处显示已编辑的标记,这样可以直观地显示哪些转移图片已经过编辑。
其中,在一个转移图片的编辑界面上还会包括模板图片,这样用户在编辑转移图片时,才能将转移图片和模板图片进行对比,使得转移图片与模板图片中基于上述某一背景的像素点对齐。
以下以一个具体的应用实例来说明本发明的动图合成方法,在本实施例中,动图合成装置具体可以为用户空间客户端,比如QQ空间,且合成的动图为GIF动图。本实施例的动图合成方法主要包括如下几个部分:
(1)变换前处理
用户通过操作用户空间客户端,使得用户空间客户端扫描本地储存的图片,并将本地储存的图片按照拍摄时间进行分组,在用户界面显示各分组的图片,每个分组的图片在对应的区域轮流显示。
如图4a所示,在“分组图片”的界面上包括9个区域,每个区域轮流显示对应分组的各个图片,比如在区域1中按照时间间隔T1轮流显示对应分组的多个图片。
当用户点击某个分组图片的显示区域时,用户空间客户端会显示GIF动图编辑界面,用户可以通过该GIF动图编辑界面设置GIF动图的速度,还可以添加文字、涂鸦及表情等信息。
本实施例中,当用户点击某个分组图片的显示区域时,用户空间客户端可以先判断该分组中的多个图片是否满足如下3个条件:多个图片的数量大于预置数值,多个图片的大小一致(即宽和高相同),多个图片的拍摄时间在预置范围内且多个图片之间的相似度大于预置相似度。如果都满足,则认为该分组的多个图片是针对同一背景的图片,是运行模型相关的图片,这样用户空间客户端还会在GIF动图编辑界面显示优化处理的接口;如果不满足,用户空间客户端不会在GIF动图编辑界面显示优化处理的接口。
用户通过该优化处理的接口触发用户空间客户端执行如下(2)中的变换处理及(3)中的变换后处理;然后用户可以点击该GIF动图编辑界面上的确认合成按钮,则用户客户端会将变换后处理得到的多个图片合成GIF动图。
如图4b所示,当用户空间客户端在判断对应分组的多个图片都满足上述3个条件,则在GIF动图编辑界面上包括编辑按钮,包括添加文字和表情等信息的按钮,还包括“确认合成”按钮,还包括优化处理的接口即“自动优化”按钮,这样当用户点击“自动优化”按钮,则用户空间的客户端会执行如下(2)中的变换处理及(3)中的变换后处理。
(2)变换处理
针对一个分组的多个图片(比如为N个图片),用户空间客户端选定多个图片中的第一个图片作为模板图片,其它图片则为转移图片,则转移图片有N-1个。针对每一个转移图片,用户空间客户端可以按照如下步骤来实现变换处理,流程图如图5所示,包括:
步骤201,用户空间客户端计算一个转移图片与模板图片之间的相似度,记为sim0,如果该相似度sim0大于或等于预置的相似度值,则执行步骤202,如果该相似度sim0小于预置的相似度值,则用户空间客户端不会对该转移图片进行变换处理,直接输出原转移图片。
具体地,在计算相似度时,用户空间客户端可以先采用哈希算法分别计算转移图片和模板图片对应的哈希值,然后再将转移图片的哈希值与模板图片的哈希值之间的汉明距离作为相似度值。
其中,在计算一个图片(转移图片或模板图片)的哈希值时,用户空间客户端可以先缩小图片至32x32分辨率大小,然后将缩小后图片转换至灰度图,并将该灰度图的灰度值进行哈希计算得到该图片对应的哈希值。
步骤202,用户空间客户端按照同样的比例压缩模板图片和该转移图片,压缩比为be。
步骤203,用户空间客户端调用findTransformECC函数,通过该findTransformECC函数计算压缩后的转移图片与压缩后的模板图片之间的压缩后转移矩阵M0。然后用户空间客户端根据压缩比be和压缩后转移矩阵M0得到该转移图片与模板图片之间的转移矩阵M。
步骤204,用户空间客户端调用warpAffine函数,通过该warpAffine函数对该转移图片进行整体变换。
步骤205,用户空间客户端计算变换后的转移图片与模板图片之间的相似度sim1,如果该相似度sim1大于或等于上述预置的相似度值,则输出变换后的转移图片;如果该相似度sim1小于预置的相似度值,则用户空间客户端输出原转移图片。
(3)变换后处理
通过上述(2)的变换处理得到N-1个变换后的转移图片,及一个模板图片,为了保证最终合成的GIF动图,用户空间客户端可以对N-1个变换后的转移图片进行黑边切除处理,然后再将黑边切除处理后的转移图片及模板图片合成GIF动图。
本发明实施例还提供一种动图合成装置,比如上述的用户空间客户端,其结构示意图如图6所示,具体可以包括:
待处理确定单元10,用于确定多个待处理图片,所述多个待处理图片是针对某一背景的图片;
选定单元11,用于选定所述待处理确定单元10确定的多个待处理图片中的某一个图片作为模板图片,所述多个待处理图片中除所述模板图片之外的其它图片为转移图片;
变换单元12,用于变换转移图片中像素点的位置,使得所述转移图片与所述选定单元11选定的模板图片中基于所述某一背景的像素点对齐;
合成单元13,用于根据所述变换单元12变换后的转移图片及所述模板图片合成动图。
在具体的实施例中,所述待处理确定单元10,具体用于接收输入的多个图片,确定所述多个图片是否满足如下条件,如果满足,则确定所述多个图片为多个待处理图片:所述多个图片的数量大于预置数值;所述多个图片的大小一致;所述多个图片的拍摄时间在预置范围内且多个图片之间的相似度大于预置相似度。
所述变换单元11,具体用于计算所述转移图片与所述模板图片之间的第一转移信息;根据所述转移图片对应的第一转移信息,对转移图片进行变换;或,
所述变换单元11,具体用于计算所述转移图片中所述某一背景的图像与所述模板图片中对应图像之间的第二转移信息;根据所述转移图片对应的第二转移信息,对转移图片进行变换;或,
所述变换单元11,具体用于显示所述转移图片的编辑界面,所述编辑界面用于对所述转移图片进行编辑使得所述转移图片与所述模板图片中基于所述某一背景的像素点对齐;当接收到从所述编辑界面发送的编辑后的转移图片,将所述编辑后的转移图片作为所述变换后的转移图片。
其中,所述变换单元11在计算转移图片与所述模板图片之间的第一转移信息时,具体用于分别压缩转移图片和模板图片,确定压缩比;计算所述压缩后的转移图片与所述压缩后的模板图片之间的压缩后转移信息;根据所述压缩后转移信息及压缩比确定所述转移图片与所述模板图片之间的第一转移信息。
所述合成单元13,具体用于对所述变换后的转移图片进行黑边切除处理,将所述黑边切除处理后的转移图片及模板图片合成动图;所述黑边切换处理包括:去除所述变换后的转移图片中无像素点的部分图像。
可见,在本实施例的装置在合动图时,需要变换单元12先变换多个待处理图片中的转移图片的像素点的位置,使得转移图片与模板图片中基于某一背景的像素点对齐,然后合成单元13再根据变换后的转移图片及模板图片合成动图。这样,在根据多个待处理图片合成动图的过程中,考虑到了多个待处理图片在拍摄过程中的拍摄位置和角度等变化因素,会使得最终合成的动图中的背景出现抖动,而在针对待处理图片中的转移图片进行变换后再合成动图,可以减少合成的动图中背景的抖动感。
本发明实施例还提供一种终端设备,其结构示意图如图7所示,该终端设备可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上中央处理器(centralprocessing units,CPU)20(例如,一个或一个以上处理器)和存储器21,一个或一个以上存储应用程序221或数据222的存储介质22(例如一个或一个以上海量存储设备)。其中,存储器21和存储介质22可以是短暂存储或持久存储。存储在存储介质22的程序可以包括一个或一个以上模块(图示没标出),每个模块可以包括对终端设备中的一系列指令操作。更进一步地,中央处理器20可以设置为与存储介质22通信,在终端设备上执行存储介质22中的一系列指令操作。
具体地,在存储介质22中储存的应用程序221包括动图合成的应用程序,且该程序可以包括上述动图合成装置中的待处理确定单元10,选定单元11,变换单元12和合成单元13,在此不进行赘述。更进一步地,中央处理器20可以设置为与存储介质22通信,在终端设备上执行存储介质22中储存的动图合成的应用程序对应的一系列操作。
终端设备还可以包括一个或一个以上电源23,一个或一个以上有线或无线网络接口24,一个或一个以上输入输出接口25,和/或,一个或一个以上操作系统223,例如WindowsServerTM,Mac OS XTM,UnixTM,LinuxTM,FreeBSDTM等等。
上述方法实施例中所述的由动图合成装置所执行的步骤可以基于该图7所示的终端设备的结构。
本发明实施例提供一种存储设备,所述存储设备储存多条指令,所述指令适于由处理器加载并执行如上述动图合成装置所执行的动图合成方法。
本发明实施例还提供一种终端设备,包括处理器和存储设备,所述处理器,用于实现各个指令;
所述存储设备用于储存多条指令,所述指令用于由处理器加载并执行如上述动图合成装置所执行的动图合成方法。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:只读存储器(ROM)、随机存取存储器RAM)、磁盘或光盘等。
以上对本发明实施例所提供的动图合成方法、装置及存储设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (11)

1.一种动图合成方法,其特征在于,包括:
确定多个待处理图片,所述多个待处理图片是针对某一背景的图片;
选定所述多个待处理图片中的某一个图片作为模板图片,所述多个待处理图片中除所述模板图片之外的其它图片为转移图片;
变换所述转移图片中像素点的位置,使得所述转移图片与所述模板图片中基于所述某一背景的像素点对齐;
根据所述变换后的转移图片及所述模板图片合成动图;
所述变换所述转移图片中像素点的位置,使得所述转移图片与所述模板图片中基于所述某一背景的像素点对齐,具体包括:
分别压缩所述转移图片和模板图片,确定压缩比;计算所述压缩后的转移图片与所述压缩后的模板图片之间的压缩后转移信息;根据所述压缩后转移信息及压缩比确定所述转移图片与所述模板图片之间的第一转移信息;根据所述转移图片对应的第一转移信息对转移图片进行整体变换;
其中,若所述压缩后转移信息为
Figure FDA0003568504890000011
所述转移图片中任一像素点的坐标(x,y)在压缩之后的坐标为(x/be,y/be),则所述第一转移信息为
Figure FDA0003568504890000012
2.如权利要求1所述的方法,其特征在于,所述确定多个待处理图片,所述多个待处理图片是针对某一背景的图片,具体包括:
接收输入的多个图片,确定所述多个图片是否满足如下条件,如果满足,则确定所述多个图片为多个待处理图片:所述多个图片的数量大于预置数值;所述多个图片的大小一致;所述多个图片的拍摄时间在预置范围内且多个图片之间的相似度大于预置相似度。
3.如权利要求1所述的方法,其特征在于,所述变换所述转移图片中像素点的位置,使得所述转移图片与所述模板图片中基于所述某一背景的像素点对齐,具体包括:
计算所述转移图片中所述某一背景的图像与所述模板图片中对应图像之间的第二转移信息;根据所述转移图片对应的第二转移信息对转移图片进行变换。
4.如权利要求1所述的方法,其特征在于,所述变换所述转移图片中像素点的位置,使得所述转移图片与所述模板图片中基于所述某一背景的像素点对齐,具体包括:
显示所述转移图片的编辑界面,所述编辑界面用于对所述转移图片进行编辑使得所述转移图片与所述模板图片中基于所述某一背景的像素点对齐;当接收到从所述编辑界面发送的编辑后的转移图片,将所述编辑后的转移图片作为所述变换后的转移图片。
5.如权利要求1至4任一项所述的方法,其特征在于,所述根据所述变换后的转移图片及所述模板图片合成动图,具体包括:
对所述变换后的转移图片进行黑边切除处理,将所述黑边切除处理后的转移图片及模板图片合成动图;
所述黑边切换处理包括:去除所述变换后的转移图片中无像素点的部分图像。
6.一种动图合成装置,其特征在于,包括:
待处理确定单元,用于确定多个待处理图片,所述多个待处理图片是针对某一背景的图片;
选定单元,用于选定所述多个待处理图片中的某一个图片作为模板图片,所述多个待处理图片中除所述模板图片之外的其它图片为转移图片;
变换单元,用于变换转移图片中像素点的位置,使得所述转移图片与所述模板图片中基于所述某一背景的像素点对齐;
合成单元,用于根据所述变换后的转移图片及所述模板图片合成动图;
所述变换单元,具体用于计算所述转移图片与所述模板图片之间的第一转移信息;根据所述转移图片对应的第一转移信息对转移图片进行整体变换,所述变换单元在计算所述转移图片与所述模板图片之间的第一转移信息时,具体用于分别压缩所述转移图片和模板图片,确定压缩比;计算所述压缩后的转移图片与所述压缩后的模板图片之间的压缩后转移信息;根据所述压缩后转移信息及压缩比确定所述转移图片与所述模板图片之间的第一转移信息;
其中,若所述压缩后转移信息为
Figure FDA0003568504890000031
所述转移图片中任一像素点的坐标(x,y)在压缩之后的坐标为(x/be,y/be),则所述第一转移信息为
Figure FDA0003568504890000032
7.如权利要求6所述的装置,其特征在于,
所述待处理确定单元,具体用于接收输入的多个图片,确定所述多个图片是否满足如下条件,如果满足,则确定所述多个图片为多个待处理图片:所述多个图片的数量大于预置数值;所述多个图片的大小一致;所述多个图片的拍摄时间在预置范围内且多个图片之间的相似度大于预置相似度。
8.如权利要求6所述的装置,其特征在于,
所述变换单元,具体用于计算所述转移图片中所述某一背景的图像与所述模板图片中对应图像之间的第二转移信息;根据所述转移图片对应的第二转移信息,对转移图片进行变换;或,
所述变换单元,具体用于显示所述转移图片的编辑界面,所述编辑界面用于对所述转移图片进行编辑使得所述转移图片与所述模板图片中基于所述某一背景的像素点对齐;当接收到从所述编辑界面发送的编辑后的转移图片,将所述编辑后的转移图片作为所述变换后的转移图片。
9.如权利要求6至8任一项所述的装置,其特征在于,
所述合成单元,具体用于对所述变换后的转移图片进行黑边切除处理,将所述黑边切除处理后的转移图片及模板图片合成动图;所述黑边切换处理包括:去除所述变换后的转移图片中无像素点的部分图像。
10.一种存储设备,其特征在于,所述存储设备储存多条指令,所述指令适于由处理器加载并执行如权利要求1至5任一项所述的动图合成方法。
11.一种终端设备,其特征在于,包括处理器和存储设备,所述处理器,用于实现各个指令;
所述存储设备用于储存多条指令,所述指令用于由处理器加载并执行如权利要求1至5任一项所述的动图合成方法。
CN201710733177.6A 2017-08-24 2017-08-24 一种动图合成方法、装置及存储设备 Active CN107564084B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710733177.6A CN107564084B (zh) 2017-08-24 2017-08-24 一种动图合成方法、装置及存储设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710733177.6A CN107564084B (zh) 2017-08-24 2017-08-24 一种动图合成方法、装置及存储设备

Publications (2)

Publication Number Publication Date
CN107564084A CN107564084A (zh) 2018-01-09
CN107564084B true CN107564084B (zh) 2022-07-01

Family

ID=60976486

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710733177.6A Active CN107564084B (zh) 2017-08-24 2017-08-24 一种动图合成方法、装置及存储设备

Country Status (1)

Country Link
CN (1) CN107564084B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108875780A (zh) * 2018-05-07 2018-11-23 广东省电信规划设计院有限公司 基于图像数据的图像间差异对象的获取方法以及装置
CN108805864A (zh) * 2018-05-07 2018-11-13 广东省电信规划设计院有限公司 基于图像数据的违章建筑物的获取方法以及装置
CN109272446B (zh) * 2018-08-02 2023-03-10 苏州佳世达光电有限公司 多图片自动拼贴方法、装置及系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101511024A (zh) * 2009-04-01 2009-08-19 北京航空航天大学 实时电子稳像中基于运动状态识别的运动补偿方法
CN104104856A (zh) * 2013-04-09 2014-10-15 腾讯科技(深圳)有限公司 图像采集方法、装置及电子设备
CN105430263A (zh) * 2015-11-24 2016-03-23 努比亚技术有限公司 长曝光全景图像拍摄装置和方法
CN105872370A (zh) * 2016-03-31 2016-08-17 深圳中兴力维技术有限公司 视频去抖动方法和装置
CN106156730A (zh) * 2016-06-30 2016-11-23 腾讯科技(深圳)有限公司 一种人脸图像的合成方法和装置
CN106303225A (zh) * 2016-07-29 2017-01-04 努比亚技术有限公司 一种图像处理方法及电子设备
CN106612397A (zh) * 2016-11-25 2017-05-03 努比亚技术有限公司 一种图像处理方法及终端
CN107087114A (zh) * 2017-06-29 2017-08-22 深圳天珑无线科技有限公司 一种拍摄的方法及装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6450644B1 (en) * 2000-01-12 2002-09-17 Maxivision Cinema Technology System and method for registering motion picture film
TW201245850A (en) * 2011-02-28 2012-11-16 Hoya Corp Position controller for image-stabilizing insertable/removable optical element
CN103226831B (zh) * 2013-05-02 2014-09-24 天津大学 利用分块布尔运算的图像匹配方法
CN105046649A (zh) * 2015-06-30 2015-11-11 硅革科技(北京)有限公司 一种去除运动视频中运动物体的全景图拼接方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101511024A (zh) * 2009-04-01 2009-08-19 北京航空航天大学 实时电子稳像中基于运动状态识别的运动补偿方法
CN104104856A (zh) * 2013-04-09 2014-10-15 腾讯科技(深圳)有限公司 图像采集方法、装置及电子设备
CN105430263A (zh) * 2015-11-24 2016-03-23 努比亚技术有限公司 长曝光全景图像拍摄装置和方法
CN105872370A (zh) * 2016-03-31 2016-08-17 深圳中兴力维技术有限公司 视频去抖动方法和装置
CN106156730A (zh) * 2016-06-30 2016-11-23 腾讯科技(深圳)有限公司 一种人脸图像的合成方法和装置
CN106303225A (zh) * 2016-07-29 2017-01-04 努比亚技术有限公司 一种图像处理方法及电子设备
CN106612397A (zh) * 2016-11-25 2017-05-03 努比亚技术有限公司 一种图像处理方法及终端
CN107087114A (zh) * 2017-06-29 2017-08-22 深圳天珑无线科技有限公司 一种拍摄的方法及装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
A Block-Based Adaptive Three Stages Motion Estimation Using Early Termination for Anti-shaking;Sangwoo Ahn .etal;《IEEE》;20110718;336-340页 *
图像配准技术研究及应用;余道明;《中国优秀硕士学位论文全文数据库 (信息科技辑)》;20140915(第9期);I138-954页 *

Also Published As

Publication number Publication date
CN107564084A (zh) 2018-01-09

Similar Documents

Publication Publication Date Title
WO2021175055A1 (zh) 视频处理方法及相关装置
CN111935504B (zh) 视频制作方法、装置、设备及存储介质
EP3681144B1 (en) Video processing method and apparatus based on augmented reality, and electronic device
CN112804459A (zh) 基于虚拟摄像头的图像展示方法、装置、存储介质及电子设备
CN107564084B (zh) 一种动图合成方法、装置及存储设备
JP5616223B2 (ja) デジタル画像をキャプチャするためのシステム及び方法
JP2011119974A (ja) パノラマ画像合成装置、パノラマ画像合成方法、及びプログラム
CN113115095B (zh) 视频处理方法、装置、电子设备以及存储介质
CN112598580A (zh) 提升人像照片清晰度的方法及装置
CN111353965B (zh) 图像修复方法、装置、终端及存储介质
CN112995533A (zh) 视频制作方法及装置
KR100934211B1 (ko) 휴대용 단말기의 파노라마 이미지 생성 방법
CN115294055A (zh) 图像处理方法、装置、电子设备和可读存储介质
CN110913118B (zh) 视频处理方法、装置及存储介质
CN114913067A (zh) 动态分辨率的渲染方法、装置、电子设备及可读存储介质
US7522189B2 (en) Automatic stabilization control apparatus, automatic stabilization control method, and computer readable recording medium having automatic stabilization control program recorded thereon
JP2004178036A (ja) 遠隔者の映像を伴う仮想空間の提示装置
CN114693894A (zh) 一种虚拟世界中图片转换为积木块的方法、系统及装置
CN113126942A (zh) 一种封面图片的显示方法、装置、电子设备及存储介质
CN112818635A (zh) 一种文档多人同步共享浏览方法及处理终端
JP3991061B1 (ja) 画像処理システム
JP2020126393A (ja) 画像処理装置、画像処理方法、及びプログラム
US20170171473A1 (en) Method for realizing photographing effect of a distorting mirror and electronic device
CN114222069B (zh) 拍摄方法、拍摄装置及电子设备
JP2002095012A (ja) ステレオ画像生成装置およびその方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant