CN103984944A - 对一组图像中目标物体进行提取并连续播放的方法和装置 - Google Patents

对一组图像中目标物体进行提取并连续播放的方法和装置 Download PDF

Info

Publication number
CN103984944A
CN103984944A CN201410081593.9A CN201410081593A CN103984944A CN 103984944 A CN103984944 A CN 103984944A CN 201410081593 A CN201410081593 A CN 201410081593A CN 103984944 A CN103984944 A CN 103984944A
Authority
CN
China
Prior art keywords
target object
image
digital picture
pixel
obj
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410081593.9A
Other languages
English (en)
Other versions
CN103984944B (zh
Inventor
高亚捷
陈明远
田华伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cultural Medium Co Ltd Is Broadcast In Beijing
Original Assignee
Cultural Medium Co Ltd Is Broadcast In Beijing
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cultural Medium Co Ltd Is Broadcast In Beijing filed Critical Cultural Medium Co Ltd Is Broadcast In Beijing
Priority to CN201410081593.9A priority Critical patent/CN103984944B/zh
Publication of CN103984944A publication Critical patent/CN103984944A/zh
Application granted granted Critical
Publication of CN103984944B publication Critical patent/CN103984944B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Analysis (AREA)

Abstract

本发明提供了一种对一组图像中目标物体进行提取并连续播放的方法和装置。该方法主要包括:从不同角度针对一个目标物体拍摄出一组数字图像,计算出一组数字图像中的每幅数字图像的显著性图像,利用每幅数字图像的显著性图像提取出数字图像中的目标物体图像;对一组数字图像中的每幅数字图像中的目标物体图像进行位置对齐处理,将每幅数字图像中的目标物体图像与背景图像进行融合,得到每幅数字图像对应的融合图像,根据融合图像生成可连续播放的动画。本发明实施例不仅实现一组数字图像的连续播放,还能智能地自动分割并提取出数字图像中的目标物体图像,并且可以将提取出的目标物体图像与用户选取的任意背景图像有机融合。

Description

对一组图像中目标物体进行提取并连续播放的方法和装置
技术领域
本发明涉及图像处理技术领域,尤其涉及一种对一组图像中目标物体进行提取并连续播放的方法和装置。 
背景技术
目前,智能手机、平板电脑、数码相机等智能电子设备在人们的生活中已经应用得越来越广泛,智能电子设备已经改变了我们的生活、工作、娱乐方式。对智能电子设备技术的研究也在同步高速发展,智能电子设备的软件产业也蓬勃发展。 
上述智能电子设备都具有数字图像的拍摄功能,数字图像,又称数码图像或数位图像,是二维图像用有限数字数值像素的表示。数字图像是由模拟图像数字化得到的、以像素为基本元素的、可以用数字计算机或数字电路存储和处理的图像。数字图像由数组或矩阵表示,其光照位置和强度都是离散的。目前,数字图像处理领域也引起了用户和软件公司的广泛兴趣。 
现有技术中的一种数字图像的播放处理方法为:在智能手机等智能电子设备中安装一个图像处理软件,该图像处理软件将智能电子设备拍摄的一组图像串联起来,连续播放给用户浏览。 
上述现有技术中的数字图像的播放处理方法的缺点为:该方法仅仅实现了一组原始数字图像的连续播放,并没有实现对数字图像中的目标物体进行分割与提取,也没有实现将数字图像与背景图像进行融合。 
发明内容
本发明的实施例提供了一种对一组图像中目标物体进行提取并连续播放的方法和装置,以实现基于目标物体对一组数字图像进行连续播放。 
本发明提供了如下方案: 
一种对一组图像中目标物体进行提取并连续播放的方法,包括: 
从不同角度针对一个目标物体拍摄出一组数字图像,计算出所述一组数字图像中的每幅数字图像的显著性图像,利用每幅数字图像的显著性图像提取出所述数字图像中的目标物体图像; 
对一组数字图像中的每幅数字图像中的目标物体图像进行位置对齐处理,并将每幅数字图像中的目标物体图像与背景图像进行融合,得到每幅数字图像对应的融合图像; 
利用所述一组数字图像中的多幅数字图像对应的多个融合图像,生成可连续播放的动画。 
所述的从不同角度针对一个目标物体拍摄出一组数字图像,包括: 
设定需要拍摄的目标物体的数字图像的数量,根据所述数量值和所述目标物体中需要突出显示的显著特征确定所述目标物体的多个拍摄角度; 
选取所述目标物体的某个拍摄角度,固定所述目标物体,根据电子设备的重力值在各个方向的分量获取所述电子设备的当前的空间位置和倾斜角度,根据所述电子设备的当前的空间位置、倾斜角度和所述目标物体的某个拍摄角度,在所述电子设备上产生引导线,根据所述引导线调整所述电子设备的当前位置,使所述电子设备到达所述某个拍摄角度对应的拍摄空间位置和拍摄倾斜角度,所述电子设备拍摄出所述某个拍摄角度对应的数字图像; 
依次选取所述目标物体的每一个拍摄角度,执行上述处理过程,所述电 子设备依次拍摄出每个拍摄角度对应的数字图像。 
计算出所述一组数字图像中的每幅数字图像的显著性图像,包括: 
针对所述一组数字图像中的每副数字图像,用简单线性迭代聚类的方法将数字图像分割成若干不规则碎片,计算每个碎片颜色特征的独特性和分散性,通过每个碎片颜色特征的独特性和分散性计算得到每个碎片的显著性,将数字图像的所有碎片的显著性进行综合,便得到整幅数字图像的显著性图像; 
通过计算每个碎片的显著性的加权平均,为每个碎片中的每个像素点分配显著性值,从而为数字图像的每个像素点分配显著性值。 
所述的利用每幅数字图像的显著性图像提取出所述数字图像中的目标物体图像,包括: 
数字图像I为多个像素点组成的矩阵,该矩阵中的元素的值为每个像素点的像素值,将数字图像I的显著性图像S中的所有像素点的显著性值S(x,y)进行求和,再除以显著性图像S中的像素点的总数量N,得到数字图像I的平均显著性sm; 
s m = Σs ( x , y ) N
设定数字图像I的目标分割阈值T: 
T=a×sm
所述a为设定的权重值; 
根据所述数字图像I的目标分割阈值T对显著性图像S进行分割,得到掩膜图像M,在掩膜图像M中,显著性值S(x,y)大于T的像素点的像素值为1,显著性值S(x,y)小于或等于T的像素点的像素值为0, 
M ( x , y ) = 1 , S ( x , y ) > T 0 , S ( x , y ) ≤ T
设数字图像I中的目标物体图像为Obj, 
Obj=I×M。 
所述的方法还包括: 
使用图像滤波操作对所述目标物体图像Obj的边缘的像素点进行羽化处理,并通过对所述目标物体图像Obj的边缘曲线进行高斯滤波,来实现所述目标物体图像Obj的边缘的平滑处理。 
所述的对一组数字图像中的每幅数字图像中的目标物体图像进行位置对齐处理,包括: 
针对所述一组数字图像中的每副数字图像,设数字图像I中的目标物体图像Obj的中心点为(x0,y0),定义数字图像I的2维的p+q阶原点矩为: 
M pq = Σ ( x , y ) ∈ Ω x p y q Obj ( x , y ) , p , q = 0,1,2 , · · · ,
Obj(x,y)表示目标物体图像Obj中的像素点(x,y)的像素值,目标物体图像Obj的中心点(x0,y0)通过计算零阶矩M00以及一阶矩M10和M01得到,其计算公式为: 
x 0 = M 00 M 01 , y 0 = M 00 M 10
将目标物体图像Obj的中心点设置在数字图像I的中心位置上。 
所述的将每幅数字图像中的目标物体图像与背景图像进行融合,得到每幅数字图像对应的融合图像,包括: 
将已经进行目标物体图像Obj位置对齐的每幅数字图像I与背景图像B进行融合得到融合图像R,: 
R ( x , y ) = Obj ( x , y ) , M ( x , y ) = 1 B ( x , y ) , M ( x , y ) = 0
所述R(x,y)表示融合图像R中的像素点(x,y)的像素值。 
一种对一组图像中目标物体进行提取并连续播放的装置,包括: 
数字图像拍摄模块,用于从不同角度针对一个目标物体拍摄出一组数字图像; 
目标物体图像提取模块,用于计算出所述一组数字图像中的每幅数字图像的显著性图像,利用每幅数字图像的显著性图像提取出所述数字图像中的目标物体图像; 
融合图像获取模块,用于对一组数字图像中的每幅数字图像中的目标物体图像进行位置对齐处理,并将每幅数字图像中的目标物体图像与背景图像进行融合,得到每幅数字图像对应的融合图像; 
动画生成模块,用于利用所述一组数字图像中的多幅数字图像对应的多个融合图像,生成可连续播放的动画。 
所述的数字图像拍摄模块,具体用于设定需要拍摄的目标物体的数字图像的数量,根据所述数量值和所述目标物体中需要突出显示的显著特征确定所述目标物体的多个拍摄角度; 
选取所述目标物体的某个拍摄角度,固定所述目标物体,根据电子设备的重力值在各个方向的分量获取所述电子设备的当前的空间位置和倾斜角度,根据所述电子设备的当前的空间位置、倾斜角度和所述目标物体的某个拍摄角度,在所述电子设备上产生引导线,根据所述引导线调整所述电子设备的当前位置,使所述电子设备到达所述某个拍摄角度对应的拍摄空间位置和拍摄倾斜角度,所述电子设备拍摄出所述某个拍摄角度对应的数字图像; 
依次选取所述目标物体的每一个拍摄角度,执行上述处理过程,所述电子设备依次拍摄出每个拍摄角度对应的数字图像。 
所述的目标物体图像提取模块,包括: 
显著性图像计算模块,用于针对所述一组数字图像中的每副数字图像,用简单线性迭代聚类的方法将数字图像分割成若干不规则碎片,计算每个碎片颜色特征的独特性和分散性,通过每个碎片颜色特征的独特性和分散性计 算得到每个碎片的显著性,将数字图像的所有碎片的显著性进行综合,便得到整幅数字图像的显著性图像;通过计算每个碎片的显著性的加权平均,为每个碎片中的每个像素点分配显著性值,从而为数字图像的每个像素点分配显著性值; 
目标物体图像计算模块,用于设数字图像I为多个像素点组成的矩阵,该矩阵中的元素的值为每个像素点的像素值,将数字图像I的显著性图像S中的所有像素点的显著性值S(x,y)进行求和,再除以显著性图像S中的像素点的总数量N,得到数字图像I的平均显著性sm; 
s m = Σs ( x , y ) N
设定数字图像I的目标分割阈值T: 
T=a×sm
所述a为设定的权重值; 
根据所述数字图像I的目标分割阈值T对显著性图像S进行分割,得到掩膜图像M,在掩膜图像M中,显著性值S(x,y)大于T的像素点的像素值为1,显著性值S(x,y)小于或等于T的像素点的像素值为0, 
M ( x , y ) = 1 , S ( x , y ) > T 0 , S ( x , y ) ≤ T
设数字图像I中的目标物体图像为Obj, 
Obj=I×M。 
所述的目标物体图像提取模块还包括: 
目标图像视觉优化处理,用于使用图像滤波操作对所述目标物体图像Obj的边缘的像素点进行羽化处理,并通过对所述目标物体图像Obj的边缘曲线进行高斯滤波,来实现所述目标物体图像Obj的边缘的平滑处理。 
所述的融合图像获取模块,包括: 
目标物体图像对齐模块,用于针对所述一组数字图像中的每副数字图像,设数字图像I中的目标物体图像Obj的中心点为(x0,y0),定义数字图像I的2维的p+q阶原点矩为: 
M pq = Σ ( x , y ) ∈ Ω x p y q Obj ( x , y ) , p , q = 0,1,2 , · · · ,
Obj(x,y)表示目标物体图像Obj中的像素点(x,y)的像素值,目标物体图像Obj的中心点(x0,y0)通过计算零阶矩M00以及一阶矩M10和M01得到,其计算公式为: 
x 0 = M 00 M 01 , y 0 = M 00 M 10
将目标物体图像Obj的中心点设置在数字图像I的中心位置上; 
背景融合处理模块,用于将已经进行目标物体图像Obj位置对齐的每幅数字图像I与背景图像B进行融合得到融合图像R,: 
R ( x , y ) = Obj ( x , y ) , M ( x , y ) = 1 B ( x , y ) , M ( x , y ) = 0
所述R(x,y)表示融合图像R中的像素点(x,y)的像素值。 
由上述本发明的实施例提供的技术方案可以看出,本发明实施例不仅实现一组数字图像的连续播放,还能智能地自动分割并提取出数字图像中的目标物体图像,并且可以将提取出的目标物体图像与用户选取的任意背景图像有机融合,实现了基于目标物体对一组数字图像进行连续播放,达到目标物体在动而背景不动的动画效果。 
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发 明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。 
图1为本发明实施例一提供的一种对一组数字图像中的目标物体进行提取并连续播放处理的方法的处理流程图; 
图2为本发明实施例二提供了一种对一组数字图像中的目标物体进行提取并连续播放处理的装置的具体结构示意图,图中,数字图像拍摄模块21,目标物体图像提取模块22,融合图像获取模块23,动画生成模块24,显著性图像计算模块221,目标物体图像计算模块222,目标图像视觉优化处理223,目标物体图像对齐模块231,背景融合处理模块232。 
具体实施方式
为便于对本发明实施例的理解,下面将结合附图以几个具体实施例为例做进一步的解释说明,且各个实施例并不构成对本发明实施例的限定。 
实施例一 
本发明实施例可以智能地自动分割并提取出一组图像中的目标物体,并且可以将提取出的目标物体与用户选取的任意背景图像有机融合。 
该实施例提供了一种对一组数字图像中的目标物体进行提取并连续播放处理的方法的处理流程如图1所示,包括如下的处理步骤: 
步骤S110、从不同角度针对一个目标物体拍摄出一组数字图像。 
本发明实施例首先需要针对一个目标物体用智能电子设备拍摄出一组数字图像,该一组数字图像可以分别对应目标物体的不同角度,以得到目标物体的比较好的动画播放功能。该目标物体是数字图像中需要突出显示的物体,示例性的,可以为一个需要展示给用户看的产品,比如,茶杯。 
设定需要拍摄的目标物体的数字图像的数量,根据所述数量值和所述目标物体中需要突出显示的显著特征确定所述目标物体的多个拍摄角度。 
选取所述目标物体的某个拍摄角度,固定所述目标物体,根据电子设备的重力值在各个方向的分量获取所述电子设备的当前的空间位置和倾斜角度,根据所述电子设备的当前的空间位置、倾斜角度和所述目标物体的某个拍摄角度,在所述电子设备上产生引导线,根据所述引导线调整所述电子设备的当前位置,使所述电子设备到达所述某个拍摄角度对应的拍摄空间位置和拍摄倾斜角度,所述电子设备拍摄出所述某个拍摄角度对应的数字图像; 
依次选取所述目标物体的每一个拍摄角度,执行上述处理过程,所述电子设备依次拍摄出每个拍摄角度对应的数字图像,将拍摄出的所有数字图像组成一组数字图像。 
在实际应用中,还可以智能电子设备固定不动,目标物体按照引导线的指引转动,也可以拍摄出一组数字图像。 
上述智能电子设备在拍摄时可以提取目标物体的特征点,并自动联网将目标物体的特征点上传到数据库,作系统备份,当其他使用者在拍摄相同目标物体时,可以自动调用数据库的相关数据,对部分使用者受当时拍摄条件或时间无法拍摄完整的部分自动进行匹配填充。 
上述智能电子设备在拍摄时,可以自动扫瞄出目标物体的基本信息,特征点等。从数据库(后台服务上)进行线上的数据传输,线上数据库提供给拍摄者,被拍摄目标物体的历史材质等详细的资料,方便用户进行查找,类似品,和各种购买渠道。 
步骤S120、计算出数字图像的显著性图像,利用所述显著性图像对数字图像中的目标物体图像进行自动分割和提取。 
本发明实施例首先需要计算出数字图像的显著性图像和数字图像中的每个像素点的显著性值,这部分计算过程已经有比较成熟的现有算法,在已经公开的现有技术文献中有记载,主要处理过程包括: 
针对一组数字图像中的每副数字图像I,可以看成是多个像素点组成的矩阵,该矩阵的行数和列数根据智能电子设备的拍摄精度而确定,该矩阵中的元素的值为每个像素点的像素值。用简单线性迭代聚类的方法将数字图像I分割成若干不规则碎片,计算每个碎片颜色特征的独特性和分散性。通过每个碎片颜色特征的独特性和分散性计算得到每个碎片的显著性。然后,将数字图像的所有碎片的显著性进行综合,便得到整幅数字图像的显著性图像S。 
之后,通过计算每个碎片的显著性的加权平均,为每个碎片中的每个像素点分配显著性值,从而为数字图像的每个像素点分配显著性值S(x,y)。一个像素点的显著性值S(x,y)越高,代表该像素点相对于其它像素点的显著性越高。 
本领域技术人员应能理解上述显著性图像S和像素点的显著性值的计算过程仅为举例,其他现有的或今后可能出现的显著性图像S和像素点的显著性值的计算过程如可适用于本发明实施例,也应包含在本发明保护范围以内,并在此以引用方式包含于此。 
将显著性图像S中的所有像素点的显著性值S(x,y)进行求和,再除以显著性图像S中的像素点的总数量N,即得到数字图像I的平均显著性sm。 
s m = Σs ( x , y ) N             公式1 
设定数字图像I的目标分割阈值T: 
T=a×sm                公式2 
上述a为设定的权重值,示例性的,a=1.5。 
根据上述数字图像I的目标分割阈值T对显著性图像S进行分割,得到掩膜图像M。在掩膜图像M中,显著性值S(x,y)大于T的像素点的像素值为1,显著性值S(x,y)小于或等于T的像素点的像素值为0。 
M ( x , y ) = 1 , S ( x , y ) > T 0 , S ( x , y ) ≤ T            公式3 
上述显著性图像S、掩膜图像M也是多个像素点组成的矩阵,并且显著性图像S、掩膜图像M的矩阵的行数、列数与数字图像I的矩阵的行数、列数相等。 
设数字图像I中的目标物体图像为Obj,本发明实施例根据如下公式提取出数字图像I中的目标物体图像Obj: 
Obj=I×M                  公式4 
公式4表示将数字图像I、掩膜图像M分别对应的矩阵进行相乘,上述目标物体图像Obj也是多个像素点组成的矩阵,并且目标物体图像Obj的矩阵的行数、列数与数字图像I的矩阵的行数、列数相等。 
本领域技术人员应能理解上述根据显著性图像S来分割出目标物体图像Obj的方法仅为举例,其他现有的或今后可能出现的根据显著性图像S来分割目标物体图像Obj的方法如可适用于本发明实施例,也应包含在本发明保护范围以内,并在此以引用方式包含于此。 
步骤S130、对目标物体图像的边缘进行视觉优化处理。 
上述提取出的目标物体图像的边缘区域会出现视觉上的瑕疵,本步骤的目的是对目标物体图像的边缘区域进行视觉的优化,具体来讲包括如下两个主要的子步骤: 
目标物体图像的边缘的羽化处理。为了消除目标物体图像的边缘的锯齿现象,需要对目标物体图像的边缘的像素点进行羽化处理。本发明实施例使用图像滤波操作实现目标物体图像的边缘的像素点的羽化处理,从而达到优化视觉效果的目的。上述图像滤波操作包括高斯滤波、均值滤波以及中值滤波等操作的部分或全部。 
目标物体图像的边缘的平滑处理。为了消除目标物体图像的边缘的锯齿现象,需要对目标物体图像的边缘进行平滑处理,使得目标物体图像的边缘看起来比较平滑,具有较好的视觉效果。本发明实施例通过对目标物体图像的边缘曲线进行高斯滤波,来实现目标物体图像的边缘的平滑处理。 
步骤S140、对每幅数字图像中的目标物体进行位置对齐处理。 
从一组数字图像的每幅数字图像中提取的目标物体图像在数字图像中的位置是不一致的。因此,需要对目标物体在每幅数字图像中的位置进行对齐。 
首先,针对每幅数字图像,检测出数字图像中的目标物体图像Obj的中心点(x0,y0)。 
数字图像I的2维的p+q阶原点矩定义为: 
M pq = Σ ( x , y ) ∈ Ω x p y q Obj ( x , y ) , p , q = 0,1,2 , · · · ,      公式5 
式中,Obj(x,y)表示目标物体图像Obj中的像素点(x,y)的像素值,目标物体图像Obj的中心点(x0,y0)通过计算零阶矩M00以及一阶矩M10和M01得到,其计算公式为: 
x 0 = M 00 M 01 , y 0 = M 00 M 10              公式6 
将计算出的目标物体图像Obj的中心点设置在数字图像的中心位置上。 
针对每幅数字图像,都进行上述操作,这样就实现了目标物体在每幅数字图像中的位置对齐。 
步骤S150、将数字图像中的目标物体图像与背景图像进行融合,得到融合图像。 
通过下述公式6,将已经进行目标物体图像Obj位置对齐的每幅数字图像I与背景图像B进行融合得到融合图像R: 
R ( x , y ) = Obj ( x , y ) , M ( x , y ) = 1 B ( x , y ) , M ( x , y ) = 0        公式7 
所述R(x,y)表示融合图像R中的像素点(x,y)的像素值 
即将数字图像I中显著性值大于T的像素点在融合图像R中保留原始显示,即还是正常显示目标物体图像;将数字图像I中显著性值不大于T的像素点在融合图像R中用背景图像来代替。 
步骤S160、将每幅数字图像对应的融合图像形成可连续播放的动画。 
针对上述一组数字图像的每幅数字图像都有上述步骤S110-步骤S140的操作,可以得到每幅数字图像对应的融合了目标物体图像和背景图像的融合图像R,用这一组R图像生成一个GIF动画图像文件。 
利用所述一组数字图像中的多幅数字图像对应的多个融合图像,采用动画生成软件生成可连续播放的动画,在该动画中可以达到目标物体在动而背景不动的效果。 
后续可以在发展一定阶段后,加入对目标物体的3d模型数据进行收集、交换,根据上述融合图像和3d模型数据构造3d数据模型库,以及3d打印的模型库。 
实施例二 
该实施例提供了一种对一组数字图像中的目标物体进行提取并连续播放处理的装置,其具体结构示意图如图2所示,包括如下的模块: 
数字图像拍摄模块21,用于从不同角度针对一个目标物体拍摄出一组数字图像; 
目标物体图像提取模块22,用于计算出所述一组数字图像中的每幅数字图像的显著性图像,利用每幅数字图像的显著性图像提取出所述数字图像中的目标物体图像; 
融合图像获取模块23,用于对一组数字图像中的每幅数字图像中的目标 物体图像进行位置对齐处理,并将每幅数字图像中的目标物体图像与背景图像进行融合,得到每幅数字图像对应的融合图像; 
动画生成模块24,用于利用所述一组数字图像中的多幅数字图像对应的多个融合图像,生成可连续播放的动画。 
进一步地,所述的数字图像拍摄模块21,具体用于设定需要拍摄的目标物体的数字图像的数量,根据所述数量值和所述目标物体中需要突出显示的显著特征确定所述目标物体的多个拍摄角度; 
选取所述目标物体的某个拍摄角度,固定所述目标物体,根据电子设备的重力值在各个方向的分量获取所述电子设备的当前的空间位置和倾斜角度,根据所述电子设备的当前的空间位置、倾斜角度和所述目标物体的某个拍摄角度,在所述电子设备上产生引导线,根据所述引导线调整所述电子设备的当前位置,使所述电子设备到达所述某个拍摄角度对应的拍摄空间位置和拍摄倾斜角度,所述电子设备拍摄出所述某个拍摄角度对应的数字图像; 
依次选取所述目标物体的每一个拍摄角度,执行上述处理过程,所述电子设备依次拍摄出每个拍摄角度对应的数字图像。 
进一步地,所述的目标物体图像提取模块22,包括: 
显著性图像计算模块221,用于针对所述一组数字图像中的每副数字图像,用简单线性迭代聚类的方法将数字图像分割成若干不规则碎片,计算每个碎片颜色特征的独特性和分散性,通过每个碎片颜色特征的独特性和分散性计算得到每个碎片的显著性,将数字图像的所有碎片的显著性进行综合,便得到整幅数字图像的显著性图像;通过计算每个碎片的显著性的加权平均,为每个碎片中的每个像素点分配显著性值,从而为数字图像的每个像素点分配显著性值; 
目标物体图像计算模块222,用于设数字图像I为多个像素点组成的矩阵,该矩阵中的元素的值为每个像素点的像素值,将数字图像I的显著性图像 S中的所有像素点的显著性值S(x,y)进行求和,再除以显著性图像S中的像素点的总数量N,得到数字图像I的平均显著性sm; 
s m = Σs ( x , y ) N
设定数字图像I的目标分割阈值T: 
T=a×sm
所述a为设定的权重值; 
根据所述数字图像I的目标分割阈值T对显著性图像S进行分割,得到掩膜图像M,在掩膜图像M中,显著性值S(x,y)大于T的像素点的像素值为1,显著性值S(x,y)小于或等于T的像素点的像素值为0, 
M ( x , y ) = 1 , S ( x , y ) > T 0 , S ( x , y ) ≤ T
设数字图像I中的目标物体图像为Obj, 
Obj=I×M。 
目标图像视觉优化处理223,用于使用图像滤波操作对所述目标物体图像Obj的边缘的像素点进行羽化处理,并通过对所述目标物体图像Obj的边缘曲线进行高斯滤波,来实现所述目标物体图像Obj的边缘的平滑处理。 
进一步地,所述的融合图像获取模块23,具体包括: 
目标物体图像对齐模块231,用于针对所述一组数字图像中的每副数字图像,设数字图像I中的目标物体图像Obj的中心点为(x0,y0),定义数字图像I的2维的p+q阶原点矩为: 
M pq = Σ ( x , y ) ∈ Ω x p y q Obj ( x , y ) , p , q = 0,1,2 , · · · ,
Obj(x,y)表示目标物体图像Obj中的像素点(x,y)的像素值,目标物体图像Obj的中心点(x0,y0)通过计算零阶矩M00以及一阶矩M10和M01得到,其计算公式为: 
x 0 = M 00 M 01 , y 0 = M 00 M 10
将目标物体图像Obj的中心点设置在数字图像I的中心位置上; 
背景融合处理模块232,用于将已经进行目标物体图像Obj位置对齐的每幅数字图像I与背景图像B进行融合得到融合图像R,: 
R ( x , y ) = Obj ( x , y ) , M ( x , y ) = 1 B ( x , y ) , M ( x , y ) = 0
所述R(x,y)表示融合图像R中的像素点(x,y)的像素值。 
用本发明实施例的装置进行对一组数字图像进行连续播放处理的具体过程与前述方法实施例类似,此处不再赘述。 
综上所述,本发明实施例不仅实现一组数字图像的连续播放,还能智能地自动分割并提取出数字图像中的目标物体图像,并且可以将提取出的目标物体图像与用户选取的任意背景图像有机融合,实现了基于目标物体对一组数字图像进行连续播放,达到目标物体在动而背景不动的动画效果。 
本发明实施例可以应用在商业、展会和工业用,为奢侈品,国宝,古玩,艺术品展示等进行商业拍摄组建数据服务,也为大型商业的传播和个人接受进行拉近距离。通过展示物体的特征点与数据库进行匹配,从而引导到商家和厂家端口,有针对性的进行商品推送,或者展示更加详尽的商品资料提示。 
本发明实施例可以应用在数字图像的再造方面,在新的视觉方面,从平面到动态的转换,变的轻松顺畅,多平台共享式发展,例如,显示是单张静态图片,鼠标或者,手指点击后,变为立体展示的图片,方便于视频格式,在图片上可以扩大缩小,随意旋转观察,随着硬件技术的不断跟进,配合裸眼3D屏幕的使用可以模糊平面、视频、动画中影像的界限,从而再造出一种全新的影像表现方式,进而可以多平台推广与投放,尤其在新媒体端(移 动,户外,全息电脑平板数字眼镜数字电视等各种媒体)会有更好的应用前景。 
本领域普通技术人员可以理解:附图只是一个实施例的示意图,附图中的模块或流程并不一定是实施本发明所必须的。 
通过以上的实施方式的描述可知,本领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。 
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置或系统实施例而言,由于其基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。以上所描述的装置及系统实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。 
以上所述,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易 想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求的保护范围为准。 

Claims (12)

1.一种对一组图像中目标物体进行提取并连续播放的方法,其特征在于,包括:
从不同角度针对一个目标物体拍摄出一组数字图像,计算出所述一组数字图像中的每幅数字图像的显著性图像,利用每幅数字图像的显著性图像提取出所述数字图像中的目标物体图像;
对一组数字图像中的每幅数字图像中的目标物体图像进行位置对齐处理,并将每幅数字图像中的目标物体图像与背景图像进行融合,得到每幅数字图像对应的融合图像;
利用所述一组数字图像中的多幅数字图像对应的多个融合图像,生成可连续播放的动画。
2.根据权利要求1所述的对一组图像中目标物体进行提取并连续播放的方法,其特征在于,所述的从不同角度针对一个目标物体拍摄出一组数字图像,包括:
设定需要拍摄的目标物体的数字图像的数量,根据所述数量值和所述目标物体中需要突出显示的显著特征确定所述目标物体的多个拍摄角度;
选取所述目标物体的某个拍摄角度,固定所述目标物体,根据电子设备的重力值在各个方向的分量获取所述电子设备的当前的空间位置和倾斜角度,根据所述电子设备的当前的空间位置、倾斜角度和所述目标物体的某个拍摄角度,在所述电子设备上产生引导线,根据所述引导线调整所述电子设备的当前位置,使所述电子设备到达所述某个拍摄角度对应的拍摄空间位置和拍摄倾斜角度,所述电子设备拍摄出所述某个拍摄角度对应的数字图像;
依次选取所述目标物体的每一个拍摄角度,执行上述处理过程,所述电子设备依次拍摄出每个拍摄角度对应的数字图像。
3.根据权利要求1所述的对一组图像中目标物体进行提取并连续播放的方法,其特征在于,计算出所述一组数字图像中的每幅数字图像的显著性图像,包括:
针对所述一组数字图像中的每副数字图像,用简单线性迭代聚类的方法将数字图像分割成若干不规则碎片,计算每个碎片颜色特征的独特性和分散性,通过每个碎片颜色特征的独特性和分散性计算得到每个碎片的显著性,将数字图像的所有碎片的显著性进行综合,便得到整幅数字图像的显著性图像;
通过计算每个碎片的显著性的加权平均,为每个碎片中的每个像素点分配显著性值,从而为数字图像的每个像素点分配显著性值。
4.根据权利要求3所述的对一组图像中目标物体进行提取并连续播放的方法,其特征在于,所述的利用每幅数字图像的显著性图像提取出所述数字图像中的目标物体图像,包括:
数字图像I为多个像素点组成的矩阵,该矩阵中的元素的值为每个像素点的像素值,将数字图像I的显著性图像S中的所有像素点的显著性值S(x,y)进行求和,再除以显著性图像S中的像素点的总数量N,得到数字图像I的平均显著性sm
s m = Σs ( x , y ) N
设定数字图像I的目标分割阈值T:
T=a×sm
所述a为设定的权重值;
根据所述数字图像I的目标分割阈值T对显著性图像S进行分割,得到掩膜图像M,在掩膜图像M中,显著性值S(x,y)大于T的像素点的像素值为1,显著性值S(x,y)小于或等于T的像素点的像素值为0,
M ( x , y ) = 1 , S ( x , y ) > T 0 , S ( x , y ) ≤ T
设数字图像I中的目标物体图像为Obj,
Obj=I×M。
5.根据权利要求4所述的对一组图像中目标物体进行提取并连续播放的方法,其特征在于,所述的方法还包括:
使用图像滤波操作对所述目标物体图像Obj的边缘的像素点进行羽化处理,并通过对所述目标物体图像Obj的边缘曲线进行高斯滤波,来实现所述目标物体图像Obj的边缘的平滑处理。
6.根据权利要求4或5所述的对一组图像中目标物体进行提取并连续播放的方法,其特征在于,所述的对一组数字图像中的每幅数字图像中的目标物体图像进行位置对齐处理,包括:
针对所述一组数字图像中的每副数字图像,设数字图像I中的目标物体图像Obj的中心点为(x0,y0),定义数字图像I的2维的p+q阶原点矩为:
M pq = Σ ( x , y ) ∈ Ω x p y q Obj ( x , y ) , p , q = 0,1,2 , . . . ,
Obj(x,y)表示目标物体图像Obj中的像素点(x,y)的像素值,目标物体图像Obj的中心点(x0,y0)通过计算零阶矩M00以及一阶矩M10和M01得到,其计算公式为:
x 0 = M 00 M 01 , y 0 = M 00 M 10
将目标物体图像Obj的中心点设置在数字图像I的中心位置上。
7.根据权利要求6所述的对一组图像中目标物体进行提取并连续播放的方法,其特征在于,所述的将每幅数字图像中的目标物体图像与背景图像进行融合,得到每幅数字图像对应的融合图像,包括:
将已经进行目标物体图像Obj位置对齐的每幅数字图像I与背景图像B进行融合得到融合图像R,:
R ( x , y ) = Obj ( x , y ) , M ( x , y ) = 1 B ( x , y ) , M ( x , y ) = 0
所述R(x,y)表示融合图像R中的像素点(x,y)的像素值。
8.一种对一组图像中目标物体进行提取并连续播放的装置,其特征在于,包括:
数字图像拍摄模块,用于从不同角度针对一个目标物体拍摄出一组数字图像;
目标物体图像提取模块,用于计算出所述一组数字图像中的每幅数字图像的显著性图像,利用每幅数字图像的显著性图像提取出所述数字图像中的目标物体图像;
融合图像获取模块,用于对一组数字图像中的每幅数字图像中的目标物体图像进行位置对齐处理,并将每幅数字图像中的目标物体图像与背景图像进行融合,得到每幅数字图像对应的融合图像;
动画生成模块,用于利用所述一组数字图像中的多幅数字图像对应的多个融合图像,生成可连续播放的动画。
9.根据权利要求8所述的对一组图像中目标物体进行提取并连续播放的装置,其特征在于:
所述的数字图像拍摄模块,具体用于设定需要拍摄的目标物体的数字图像的数量,根据所述数量值和所述目标物体中需要突出显示的显著特征确定所述目标物体的多个拍摄角度;
选取所述目标物体的某个拍摄角度,固定所述目标物体,根据电子设备的重力值在各个方向的分量获取所述电子设备的当前的空间位置和倾斜角度,根据所述电子设备的当前的空间位置、倾斜角度和所述目标物体的某个拍摄角度,在所述电子设备上产生引导线,根据所述引导线调整所述电子设备的当前位置,使所述电子设备到达所述某个拍摄角度对应的拍摄空间位置和拍摄倾斜角度,所述电子设备拍摄出所述某个拍摄角度对应的数字图像;
依次选取所述目标物体的每一个拍摄角度,执行上述处理过程,所述电子设备依次拍摄出每个拍摄角度对应的数字图像。
10.根据权利要求9所述的对一组图像中目标物体进行提取并连续播放的装置,其特征在于,所述的目标物体图像提取模块,包括:
显著性图像计算模块,用于针对所述一组数字图像中的每副数字图像,用简单线性迭代聚类的方法将数字图像分割成若干不规则碎片,计算每个碎片颜色特征的独特性和分散性,通过每个碎片颜色特征的独特性和分散性计算得到每个碎片的显著性,将数字图像的所有碎片的显著性进行综合,便得到整幅数字图像的显著性图像;通过计算每个碎片的显著性的加权平均,为每个碎片中的每个像素点分配显著性值,从而为数字图像的每个像素点分配显著性值;
目标物体图像计算模块,用于设数字图像I为多个像素点组成的矩阵,该矩阵中的元素的值为每个像素点的像素值,将数字图像I的显著性图像S中的所有像素点的显著性值S(x,y)进行求和,再除以显著性图像S中的像素点的总数量N,得到数字图像I的平均显著性sm
s m = Σs ( x , y ) N
设定数字图像I的目标分割阈值T:
T=a×sm
所述a为设定的权重值;
根据所述数字图像I的目标分割阈值T对显著性图像S进行分割,得到掩膜图像M,在掩膜图像M中,显著性值S(x,y)大于T的像素点的像素值为1,显著性值S(x,y)小于或等于T的像素点的像素值为0,
M ( x , y ) = 1 , S ( x , y ) > T 0 , S ( x , y ) ≤ T
设数字图像I中的目标物体图像为Obj,
Obj=I×M。
11.根据权利要求10所述的对一组图像中目标物体进行提取并连续播放的装置,其特征在于,所述的目标物体图像提取模块还包括:
目标图像视觉优化处理,用于使用图像滤波操作对所述目标物体图像Obj的边缘的像素点进行羽化处理,并通过对所述目标物体图像Obj的边缘曲线进行高斯滤波,来实现所述目标物体图像Obj的边缘的平滑处理。
12.根据权利要求10或11所述的对一组图像中目标物体进行提取并连续播放的装置,其特征在于,所述的融合图像获取模块,包括:
目标物体图像对齐模块,用于针对所述一组数字图像中的每副数字图像,设数字图像I中的目标物体图像Obj的中心点为(x0,y0),定义数字图像I的2维的p+q阶原点矩为:
M pq = Σ ( x , y ) ∈ Ω x p y q Obj ( x , y ) , p , q = 0,1,2 , . . . ,
Obj(x,y)表示目标物体图像Obj中的像素点(x,y)的像素值,目标物体图像Obj的中心点(x0,y0)通过计算零阶矩M00以及一阶矩M10和M01得到,其计算公式为:
x 0 = M 00 M 01 , y 0 = M 00 M 10
将目标物体图像Obj的中心点设置在数字图像I的中心位置上;
背景融合处理模块,用于将已经进行目标物体图像Obj位置对齐的每幅数字图像I与背景图像B进行融合得到融合图像R:
R ( x , y ) = Obj ( x , y ) , M ( x , y ) = 1 B ( x , y ) , M ( x , y ) = 0
所述R(x,y)表示融合图像R中的像素点(x,y)的像素值。
CN201410081593.9A 2014-03-06 2014-03-06 对一组图像中目标物体进行提取并连续播放的方法和装置 Active CN103984944B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410081593.9A CN103984944B (zh) 2014-03-06 2014-03-06 对一组图像中目标物体进行提取并连续播放的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410081593.9A CN103984944B (zh) 2014-03-06 2014-03-06 对一组图像中目标物体进行提取并连续播放的方法和装置

Publications (2)

Publication Number Publication Date
CN103984944A true CN103984944A (zh) 2014-08-13
CN103984944B CN103984944B (zh) 2017-08-22

Family

ID=51276906

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410081593.9A Active CN103984944B (zh) 2014-03-06 2014-03-06 对一组图像中目标物体进行提取并连续播放的方法和装置

Country Status (1)

Country Link
CN (1) CN103984944B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105049747A (zh) * 2015-08-06 2015-11-11 广州市博源数码科技有限公司 一种识别静态图像并转换为动态显示的系统
CN105657256A (zh) * 2015-12-30 2016-06-08 联想(北京)有限公司 一种图片处理方法和电子设备
CN106327493A (zh) * 2016-08-23 2017-01-11 电子科技大学 一种基于视觉显著性的多视角图像目标检测方法
CN105825494B (zh) * 2015-08-31 2019-01-29 维沃移动通信有限公司 一种图像处理方法及移动终端
CN111145192A (zh) * 2019-12-30 2020-05-12 维沃移动通信有限公司 图像处理方法及电子设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005109157A1 (ja) * 2004-05-10 2005-11-17 Sony Computer Entertainment Inc. マルチメディア再生装置およびメニュー画面表示方法
CN101324963A (zh) * 2008-07-24 2008-12-17 上海交通大学 基于静止图像的流体视频合成方法
CN101409825A (zh) * 2007-10-10 2009-04-15 中国科学院自动化研究所 基于信息融合的夜间视觉监控方法
CN101520894A (zh) * 2009-02-18 2009-09-02 上海大学 基于区域显著性的显著对象提取方法
CN101783889A (zh) * 2010-02-05 2010-07-21 北京水晶石数字科技有限公司 一种实时抠像及视频监视和采集方法
CN101859371A (zh) * 2009-04-10 2010-10-13 鸿富锦精密工业(深圳)有限公司 摄像装置及其物体识别方法
US20110033102A1 (en) * 2009-05-05 2011-02-10 Siemens Corporation System and Method for Coronary Digital Subtraction Angiography

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005109157A1 (ja) * 2004-05-10 2005-11-17 Sony Computer Entertainment Inc. マルチメディア再生装置およびメニュー画面表示方法
CN101409825A (zh) * 2007-10-10 2009-04-15 中国科学院自动化研究所 基于信息融合的夜间视觉监控方法
CN101324963A (zh) * 2008-07-24 2008-12-17 上海交通大学 基于静止图像的流体视频合成方法
CN101520894A (zh) * 2009-02-18 2009-09-02 上海大学 基于区域显著性的显著对象提取方法
CN101859371A (zh) * 2009-04-10 2010-10-13 鸿富锦精密工业(深圳)有限公司 摄像装置及其物体识别方法
US20110033102A1 (en) * 2009-05-05 2011-02-10 Siemens Corporation System and Method for Coronary Digital Subtraction Angiography
CN101783889A (zh) * 2010-02-05 2010-07-21 北京水晶石数字科技有限公司 一种实时抠像及视频监视和采集方法

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105049747A (zh) * 2015-08-06 2015-11-11 广州市博源数码科技有限公司 一种识别静态图像并转换为动态显示的系统
CN105049747B (zh) * 2015-08-06 2018-04-20 广州市博源数码科技有限公司 一种识别静态图像并转换为动态显示的系统
CN105825494B (zh) * 2015-08-31 2019-01-29 维沃移动通信有限公司 一种图像处理方法及移动终端
CN105657256A (zh) * 2015-12-30 2016-06-08 联想(北京)有限公司 一种图片处理方法和电子设备
CN106327493A (zh) * 2016-08-23 2017-01-11 电子科技大学 一种基于视觉显著性的多视角图像目标检测方法
CN106327493B (zh) * 2016-08-23 2018-12-18 电子科技大学 一种基于视觉显著性的多视角图像目标检测方法
CN111145192A (zh) * 2019-12-30 2020-05-12 维沃移动通信有限公司 图像处理方法及电子设备

Also Published As

Publication number Publication date
CN103984944B (zh) 2017-08-22

Similar Documents

Publication Publication Date Title
Kim et al. Deep fluids: A generative network for parameterized fluid simulations
JP5035432B2 (ja) 画像領域の高凝縮要約画像を生成する方法
CN100481132C (zh) 用于显示器的合成速率降低
Battiato et al. Digital mosaic frameworks‐An overview
CN104394422A (zh) 一种视频分割点获取方法及装置
CN103984944A (zh) 对一组图像中目标物体进行提取并连续播放的方法和装置
Raveendran et al. Blending liquids
JP7026222B2 (ja) 画像生成ネットワークの訓練および画像処理方法、装置、電子機器、ならびに媒体
Mendi et al. Sports video summarization based on motion analysis
CN109803180A (zh) 视频预览图生成方法、装置、计算机设备及存储介质
WO2012033768A2 (en) Efficient information presentation for augmented reality
CN104159120B (zh) 一种视频稳像方法、装置及系统
CN102937848A (zh) 对手写笔迹进行编辑处理的方法及电子设备
CN104461439A (zh) 一种信息处理方法及电子设备
CN100520830C (zh) 时空产生运动模糊
KR101656167B1 (ko) 애니메이션 재생 방법, 장치, 기기, 프로그램 및 기록매체
CN104272377A (zh) 运动图片项目管理系统
Niu et al. Image retargeting quality assessment based on registration confidence measure and noticeability-based pooling
CN103838861A (zh) 一种基于三维gis动态显示信息的方法和显示系统
Xu et al. Artistic color virtual reality implementation based on similarity image restoration
KR102468718B1 (ko) 심층신경망을 이용하여 3차원 디지털 트윈 공간을 제공하기 위한 장치 및 방법
Zhang et al. An interactive personalized video summarization based on sketches
Burkhard et al. 4D-UX: User Experience Design Principles for Coupling Multidimensional Visual Representations in Presentations
Seo et al. A Painterly Rendering Based on Stroke Profile and Database.
Qiu et al. Novel fluid detail enhancement based on multi‐layer depth regression analysis and FLIP fluid simulation

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant