CN103810504A - 一种图像处理方法和装置 - Google Patents

一种图像处理方法和装置 Download PDF

Info

Publication number
CN103810504A
CN103810504A CN201410016489.1A CN201410016489A CN103810504A CN 103810504 A CN103810504 A CN 103810504A CN 201410016489 A CN201410016489 A CN 201410016489A CN 103810504 A CN103810504 A CN 103810504A
Authority
CN
China
Prior art keywords
image
scene
processed
small images
color
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410016489.1A
Other languages
English (en)
Other versions
CN103810504B (zh
Inventor
常江龙
朱春波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics China R&D Center, Samsung Electronics Co Ltd filed Critical Samsung Electronics China R&D Center
Priority to CN201410016489.1A priority Critical patent/CN103810504B/zh
Publication of CN103810504A publication Critical patent/CN103810504A/zh
Application granted granted Critical
Publication of CN103810504B publication Critical patent/CN103810504B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Analysis (AREA)

Abstract

本发明公开了一种图像处理方法,该方法包括:对样本图像的颜色特征和纹理特征的提取,训练多个场景分类器;提取需要处理的图像的颜色特征和纹理特征,并分别输入训练完成的各场景分类器,获得所有场景分类器投票的场景类型;将各场景分类器投票次数最多的场景类型对应的场景信息确定为该需要处理的图像的场景信息;根据该图像的场景信息获取对应的切变特效;并根据获取的切变特效处理该需要处理的图像。基于同样的发明构思,本发明还提出一种装置,能够为不同场景下的图像实现与场景信息有关的切变特效,以增强图像浏览时的趣味性和视觉效果。

Description

一种图像处理方法和装置
技术领域
本发明涉及图像处理技术领域,特别涉及一种图像处理方法和装置。
背景技术
在播放图像时,往往采用特殊的切变效果来达到增强视觉效果的目的,称之为幻灯片效应(slideshow effect).
传统的图像切变特效,其效果都是事先设定好或者是由用户指定的。随着图像分析技术的进步,越来越多的图像切变效果加入了智能化的因素。通过分析图像序列的相关性,或者分析图像当中的显著性物体,一般为人脸或人体,能够实现一些根据图像内容的切变效果。
这些切变效果形式更为多变,且与图像的内容相关,与传统的切变特效方法相比,更为生动,能够提供更好的用户体验。
现有的智能化图像切变特效方法存在以下不足:
首先,主要针对有图像中特定的前景物体进行基于内容的分析,特别是人脸或人体图像,而对于图像场景缺少分析。对于图像场景的分析,可以更好的了解图像的本质信息,在此基础上能够设计更为多变的图像整体切变效果,而不是受限于特定的前景对象。
其次,真实照片中前景物体的类型较为多变,目前也缺少一种针对不同物体的自动图像分割方法,这也使得前景物体的获取和识别较为不易;事实上缺乏显著性前景物体的图像也非常多见。
最后,缺少与图像内容语义相关的智能化特效。不少特效是根据不同图像间像素块的相似程度来实现的,但仅限于几何的变化。还有少数与人脸相关的方法,可以根据人脸当前的表情等状态,通过表情合成技术来生成特效,但这些方法仅限于人脸图像,不适用于其他普通图像。
发明内容
有鉴于此,本发明提供一种图像处理方法和装置,能够为不同场景下的图像实现与场景信息有关的切变特效,以增强图像浏览时的趣味性和视觉效果。
为解决上述技术问题,本发明的技术方案是这样实现的:
一种图像处理方法,预先配置场景信息与切变特效的对应关系,所述方法包括:
获取样本图像,并根据样本图像的场景类型将各样本图像分类;
对每个场景类型下的每个样本图像,提取该图像的颜色特征和纹理特征;
将提取的该图像的颜色特征和纹理特征构成特征向量,并将各场景类型下的所有样本图像的特征向量组成该场景类型下的特征样本库;
在特征样本库中进行N次特征向量随机选取,且选取的特征向量的个数相同,构成N个训练集,在所述N个训练集上进行训练获取N个场景分类器;其中,N为大于2的整数;
获取需要处理的图像时,提取该图像的颜色特征和纹理特征构成该图像的特征向量,并分别输入所述N个场景分类器内,获得各场景分类器输出的场景类型;
将N个场景分类器输出次数最多的场景类型对应的场景信息确定为该需要处理的图像的场景信息;
根据该图像的场景信息获取对应的切变特效;并根据获取的切变特效处理该需要处理的图像。
一种装置,该装置包括:配置单元、提取单元、训练单元和处理单元;
所述配置单元,用于预先配置场景信息与切变特效的对应关系;
所述提取单元,用于获取样本图像,并根据样本图像的场景类型将各样本图像分类;对每个场景类型下的每个样本图像,提取该图像的颜色特征和纹理特征;并将提取的该图像的颜色特征和纹理特征构成特征向量,将各场景类型下的所有样本图像的特征向量组成该场景类型下的特征样本库;获取需要处理的图像,并提取该图像的颜色特征和纹理特征构成该图像的特征向量;
所述训练单元,用于在所述提取单元中的特征样本库中进行N次特征向量随机选取,且选取的特征向量的个数相同,构成N个训练集,在所述N个训练集上进行训练获取N个场景分类器;将所述提取单元提取的需要处理的图像的特征向量分别输入所述N个场景分类器内,获得各场景分类器输出的场景类型;其中,N为大于2的整数;
所述处理单元,用于将所述训练单元中N个场景分类器输出次数最多的场景类型对应的场景信息确定为该需要处理的图像的场景信息;根据该图像的场景信息在所述配置单元中获取对应的切变特效;并根据获取的切变特效处理该需要处理的图像。
综上所述,本发明通过对样本图像的颜色特征和纹理特征的提取,训练多个场景分类器;提取需要处理的图像的颜色特征和纹理特征,并分别输入训练完成的各场景分类器,获得所有场景分类器投票的场景类型;将各场景分类器投票次数最多的场景类型对应的场景信息确定为该需要处理的图像的场景信息;根据该图像的场景信息获取对应的切变特效;并根据获取的切变特效处理该需要处理的图像。能够为不同场景下的图像实现与场景信息有关的切变特效,以增强图像浏览时的趣味性和视觉效果。
附图说明
图1为本发明具体实施例中图像处理方法流程示意图;
图2为本发明具体实施例中应用上述技术的装置的结构示意图。
具体实施方式
为使本发明的目的、技术方案及优点更加清楚明白,以下参照附图并举实施例,对本发明所述方案作进一步地详细说明。
本发明实施例中提出一种图像处理方法,设备通过对样本图像的颜色特征和纹理特征的提取,训练多个场景分类器;提取需要处理的图像的颜色特征和纹理特征,并分别输入训练完成的各场景分类器,获得所有场景分类器投票的场景类型;将各场景分类器投票次数最多的场景类型对应的场景信息确定为该需要处理的图像的场景信息;根据该图像的场景信息获取对应的切变特效;并根据获取的切变特效处理该需要处理的图像。能够为不同场景下的图像实现与场景信息有关的切变特效,以增强图像浏览时的趣味性和视觉效果。
将样本图像根据场景类型进行划分,在样本图像数量允许的情况下,即数量足够多时,可以根据周围场地、天气、主题甚至光照等因素进行划分。其中,周围场地可分成:草地,树林,城市,海洋,室内等;天气可分为晴天,非晴天等;主题可分为人物,建筑,车辆,其他等;光照可按照亮暗进行分类。
这样组合各种可能的因素,可以获得不同的场景类型分类,如:
草地,晴天,人物;
城市,建筑,夜晚;
海洋,非晴天,暗等。
以上只是一种场景类型分类,根据样本图像库的实际情况进行划分,在样本数不足,或者样本特征不够明显时,无需对于每种因素进行划分。
用于进行图像处理的设备会收集和整理大量自然样本图像,这些自然样本图像的前景和背景较为多变,不限于特定的前景图像。
设备收集的大量样本图像如果大小不一致,可以通过缩放将所有样本图像统一成相同大小。
设备获取样本图像,并根据样本图像的场景类型将各样本图像分类。对每个场景类型下的每个样本图像,提取该图像的颜色特征和纹理特征,将提取的该图像的颜色特征和纹理特征构成特征向量,将每个场景类型下的所有样本图像的特征向量组成该场景类型下的特征样本库;在特征样本库中进行N次特征向量随机选取,且选取的特征向量的个数相同,构成N个训练集,在所述N个训练集上进行训练获取N个场景分类器。
N为大于2的整数,在实际应用中,可以适当多训练场景分类器的数目,已增加确定图像的场景类型的准确度。
下面详细描述颜色特征和纹理特征的提取,以及场景分类器的训练。
设备对样本图像库中的每个图像进行分块操作,根据该图像的实际大小,将该图像分为像素p×p的小块图像,对于该图像不够p×p的小块图像部分丢弃。
其中,p为预设像素值,大于0的整数,如可以配置为32。
通常如从图像的左上角开始取32×32的像素作为一个小图像块,当取到右上角和右下角,且存在不够32×32的像素块时,则将这部分丢弃,不进行任何处理,且在取各小块图像时,各小块图像之间无重叠。
第一步,设备在图像的色调饱和度亮度(HSV)颜色空间下,分别计算每个小块图像的色调、饱和度和亮度三个分量的均值、方差和偏度,构成该小块图像的颜色矩特征。
各图像分为多个小块图像之后,在图像的HSV颜色空间下,分别计算每个小块图像的色调(Hue)、饱和度(Saturation)和亮度(Value)三个分量的均值、方差和偏度,将所有小块图像的三个分量的均值、方差和偏度构成该图像的颜色特征。
每个小块图像的三个分量的均值、方差和偏度,即该小块图像的一阶、二阶和三阶HSV空间颜色矩阵特征。三种矩阵特征的计算公式如下:
μ i = 1 n Σ j = 1 n h ij
σ i = ( 1 n Σ j = 1 n ( h ij - μ i ) 2 ) 1 2
s i = ( 1 n Σ j = 1 n ( h ij - μ i ) 3 ) 1 3
其中hij为第i个颜色分量中第j个像素点的值,n一个小块图像中像素点的个数。
对于一个小块图像的颜色矩为[μ1,μ2,μ3,σ1,σ2,σ3,s1,s2,s3]。
第二步,该设备对这三个分量进行非等量量化,获得量化后的直方图维数。
对HSV颜色空间的色调(H),饱和度(S)和亮度(V)三个分量值进行非等量量化。现有实现中有多种量化方法,本发明具体实施例给出一种量化实现形式,其中,H量化到8个值,S、V量化到两个值,这样量化后的直方图维数为:
Hist=HQsQv+SQv+V
其中Qs、Qv分别为S和V分量的量化级数,即都为2,H、S、V分别为H、S、V三个分量量化后的值。
第三步,该设备在量化后的直方图维数的基础上计算量化后的颜色直方图的一阶、二阶和三阶矩特征,获得颜色直方图矩特征。
μ = 1 n Σ j = 1 n h i
σ = ( 1 n Σ i = 1 n ( h i - μ ) 2 ) 1 2
s = ( 1 n Σ i = 1 n ( h i - μ ) 3 ) 1 3
其中,hi为第i个像素点的直方图维数值,n为一个小块图像中像素点的个数。
对于一个小块图像的直方图矩为[μ,σ,s]。
第四步,该设备将该图像的所有小块图像的颜色矩特征和颜色直方图矩特征构成该图像的颜色特征。
设备提取图像的纹理特征,具体步骤如下:
第一步,对于每个小块图像,设备获得该小块图像的灰度图,并将灰度值量化为第一预设值级。
第一预设值可以根据实际应用配置,如8等。
第二步,设备根据配置的预设窗口范围计算该小块图像的四个方向的灰度共生矩阵。
以计算每个小块图像的4个方向(0°,45°,90°,135°)的灰度共生矩阵为例。计算公式具体如下:
m(d,θ)(i,j)=card{[(x1,y1),(x2,y2)]∈S|f(x1,y1)=i&f(x2,y2)=j}
其中m(d,θ)(i,j)表示像素点i到像素点j在θ方向上的距离d;f(x,y)表示预设窗口范围内图像,S为具有特定空间联系的像素对的集合,即在同一预设窗口范围内的像素对,d表示两个像素点的距离,θ表示方向角度,即上面的0°,45°,90°,135°,card(S)表示集合S中对m(d,θ)(i,j)有贡献的元素个数,f(x1,y1)=i,表示像素点i的坐标为x1和y1
第三步,设备分别计算四个灰度共生矩阵的7个统计量特征,获取计算的各统计量特征的平均值,并进行归一化计算。
7个统计量为相关性、对比度、熵、逆差矩、能量、和平均、和熵。
第四步,设备将进行归一化计算后的各统计量特征取四个方向的均值,获得基于灰度共生矩阵的纹理特征。
该图像的各个小块图像的基于灰度共生矩阵的纹理特征构成该图像的纹理特征。
将该图像的颜色特征和纹理特征即构成了该图像的特征向量。
设备在特征样本库中进行N次特征向量随机选取,且选取的特征向量的个数相同,构成N个训练集,在所述N个训练集上进行训练获取N个场景分类器。具体训练过程如下:
由于随机选取样本图像的特征向量,对最终的分类结果具有一定的随机性和不稳定性,因此使用N个,即多个场景分类器进行训练,这样可以使得分类结果更加稳定、可靠。
在随机选取样本图像的特征向量时,每次选取的特征向量的总个数要相同,即选取的样本图像的总个数是相同的,并且从每种场景类型下选取的样本图像的个数也应该相同。
如,现在设备上配置三种场景类型,每种场景类型中下存在100张样本图像,且对应100个特征向量。
如N是3,并且每次选取100个特征向量。假设第1次选取的100个特征向量,为在第一种场景类型下选取50个特征向量,在第二种场景类型下选取20个特征向量,在第三种场景类型下选取30个特征向量。在各场景类型下选取特征向量个数确定后,进行随机选取,在哪个场景类型下选取多少个特征向量,进行预先配置。
在第2次选取时,也选取100个特征向量,在第一场景类型下也选取50个特征向量,在选取这50个特征向量时,随机选举,可以与上一次选取的有重复,也可以没有重复;在第二场景类型下与第1次选取一样,也随机选取20个特征向量,在第三场景类型下也同样随机选取30个特征向量。
在第3次选取时,选取方式与上述类似,这里不再详细描述。
在进行场景分类器训练时,可以使用基于径向基核函数的支持向量机分类器进行训练,得到N个场景分类器。
下面结合附图,详细描述本发明具体实施例中如何实现图像旋转角度检测的。
参见图1,图1为本发明具体实施例中图像处理方法流程示意图。具体步骤为:
步骤101,设备获取需要处理的图像时,提取该图像的颜色特征和纹理特征构成该图像的特征向量,并分别输入训练的N个场景分类器内,获得各场景分类器输出的场景类型。
本步骤中需要检测旋转角度的图像需先确定同组成样本图库中的图像的大小是否一样,如果是,直接采用上文的分块方法进行分块,否则,先将该图像缩放到与样本图像库中的图像一样大小,在进行分块处理。
在提取该图像的颜色特征和纹理特征时,提取方法也同对样本图像库中图像的颜色特征和纹理特征,这里不再详细描述。
每个场景分类器都会输出一个场景类型,即为该场景类型投一次票。
步骤102,该设备将N个场景分类器输出次数最多的场景类型对应的场景信息确定为该需要处理的图像的场景信息。
步骤103,该设备根据该图像的场景信息获取对应的切变特效;并根据获取的切变特效处理该需要处理的图像。
设备预先配置各场景类型对应的场景信息与切变特效的对应关系。
如配置场景类型对应的场景信息为“草地、晴天、人物”,配置该场景信息对应的切变特效为“增加乌云、羊群动画,天色亮暗”。
如果当前确定的场景信息对应的切变特效只有一种,如只有增加乌云,则进行增加乌云这一切变特效给图像。
当该场景信息对应的切变特效包括两种以上时,在根据确定的切变特效处理该需要处理的图像时,使用其中一种或任意组合的切变特效处理该需要处理的图像。
如可以对该图像使用增加乌云,也可以是增加羊群动画,还可以是天色变暗;也可以将其中的一种或两种组合同时进行切变特效,如增加乌云并羊群动画。
当该需要处理的图像尺寸较大,且确定的场景信息对应的切变特效有两种以上时,选择其中速度最快的切变特效对该需要处理的图像进行处理。
假设增加乌云速度比较快,则选择增加乌云这一切变特效进行图像处理。
根据以上选择的图像切变特效,可以利用图像处理方法和动画贴图方法予以实现,根据实现的技术方法不同,可以分为三类:
第一类:图像整体调整类。
此类特效并不针对图像中的局部对象,而是通过一些图像变换方式来实现对图像整体的调整,以实现特殊效果。这些图像变换包括图像场景的亮暗处理和图像色彩的调整。
比如对于户内和户外两种不同场合,就需要设计两种不同亮暗处理方法。户内的光照效果可以通过光照模型来模拟和控制,户外的光照效果可以通过调整图像整体亮度来近似。
整个特效实现的过程,即为图像整体效果逐步调整的过程。
第二类:动画嵌入类。
此类特效是根据场景,将预先做好的语义相近的动画嵌入到图像特效的过程中。
比如草地的场景,可以将羊群路过吃草的动画嵌入;
比如有前景人物的场景,可以将花环、光环等动画嵌入到人体或人脸的四周达到特殊效果。
第三类:图像嵌入类。
此类特效是根据场景,将已有的真实图像嵌入到图像中,为了达到生动的效果,可以在特效过程中嵌入不同的图像。
比如晴天的场景,可以嵌入一些乌云。
第三类特效与第二类特效的区别是,第二类特效嵌入的只是动画内容,嵌入的方式采用的是简单贴图的方式;但第三类特效嵌入的是真实图像,为了达到较为真实的视觉效果,需要采用图像融合和in-painting技术来增强嵌入后图像的真实感。
在此三类效果的基础上,往往需要对其进行组合,以生成更为复杂的特效。
比如,将晴天的图像嵌入乌云后,需要调整图像整体的亮度,也可以加入雨滴的动画效果。
基于同样的发明构思,本发明具体实施例中还提出一种装置。参见图2,图2为本发明具体实施例中应用上述技术的装置的结构示意图。
一种装置,其特征在于,该装置包括:配置单元201、提取单元202、训练单元203和处理单元204。
配置单元201,用于预先配置场景信息与切变特效的对应关系;
提取单元202,用于获取样本图像,并根据样本图像的场景类型将各样本图像分类;对每个场景类型下的每个样本图像,提取该图像的颜色特征和纹理特征;并将提取的该图像的颜色特征和纹理特征构成特征向量,将各场景类型下的所有样本图像的特征向量组成该场景类型下的特征样本库;获取需要处理的图像,并提取该图像的颜色特征和纹理特征构成该图像的特征向量;
训练单元203,用于在提取单元202中的特征样本库中进行N次特征向量随机选取,且选取的特征向量的个数相同,构成N个训练集,在所述N个训练集上进行训练获取N个场景分类器;将提取单元202提取的需要处理的图像的特征向量分别输入所述N个场景分类器内,获得各场景分类器输出的场景类型;其中,N为大于2的整数;
处理单元204,用于将训练单元203中N个场景分类器输出次数最多的场景类型对应的场景信息确定为该需要处理的图像的场景信息;根据该图像的场景信息在配置单元201中获取对应的切变特效;并根据获取的切变特效处理该需要处理的图像。
较佳地,
提取单元202,具体用于提取该图像的颜色特征时,根据该图像的实际大小,将该图像分为p×p的小块图像,对于该图像不够p×p的小块图像部分丢弃;在图像的HSV颜色空间下,分别计算每个小块图像的色调、饱和度和亮度三个分量的均值、方差和偏度,构成该小块图像的颜色矩特征;对这三个分量进行非等量量化,获得量化后的直方图维数;在量化后的直方图维数的基础上计算量化后的颜色直方图的一阶、二阶和三阶矩特征,获得颜色直方图矩特征;将该图像的所有小块图像的颜色矩特征和颜色直方图矩特征构成该图像的颜色特征;其中,p为大于0的整数。
较佳地,
提取单元202,具体用于提取该图像的纹理特征时,对于每个小块图像,计算获得该小块图像的灰度图,并将灰度值量化为第一预设值级;根据配置的预设窗口范围计算该小块图像的四个方向的灰度共生矩阵;分别计算四个灰度共生矩阵的7个统计量特征,获取计算的各统计量特征的平均值,并进行归一化计算;将进行归一化计算后的各统计量特征取四个方向的均值,获得基于灰度共生矩阵的纹理特征;该图像的各个小块图像的基于灰度共生矩阵的纹理特征构成该图像的纹理特征。
较佳地,
处理单元204,进一步用于当确定的场景信息对应的切变特效包括两种以上时,在根据确定的切变特效处理该需要处理的图像时,使用其中一种或任意组合的切变特效处理该需要处理的图像。
较佳地,
处理单元204,进一步用于当该需要处理的图像尺寸较大,且确定的场景信息对应的切变特效有两种以上时,选择其中速度最快的切变特效对该需要处理的图像进行处理。
上述实施例的单元可以集成于一体,也可以分离部署;可以合并为一个单元,也可以进一步拆分成多个子单元。
综上所述,本发明通过对样本图像的颜色特征和纹理特征的提取,训练多个场景分类器;提取需要处理的图像的颜色特征和纹理特征,并分别输入训练完成的各场景分类器,获得所有场景分类器投票的场景类型;将各场景分类器投票次数最多的场景类型对应的场景信息确定为该需要处理的图像的场景信息;根据该图像的场景信息获取对应的切变特效;并根据获取的切变特效处理该需要处理的图像。能够为不同场景下的图像实现与场景信息有关的切变特效,以增强图像浏览时的趣味性和视觉效果。
以上所述,仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种图像处理方法,其特征在于,预先配置场景信息与切变特效的对应关系,所述方法包括:
获取样本图像,并根据样本图像的场景类型将各样本图像分类;
对每个场景类型下的每个样本图像,提取该图像的颜色特征和纹理特征;
将提取的该图像的颜色特征和纹理特征构成特征向量,并将各场景类型下的所有样本图像的特征向量组成该场景类型下的特征样本库;
在特征样本库中进行N次特征向量随机选取,且选取的特征向量的个数相同,构成N个训练集,在所述N个训练集上进行训练获取N个场景分类器;其中,N为大于2的整数;
获取需要处理的图像时,提取该图像的颜色特征和纹理特征构成该图像的特征向量,并分别输入所述N个场景分类器内,获得各场景分类器输出的场景类型;
将N个场景分类器输出次数最多的场景类型对应的场景信息确定为该需要处理的图像的场景信息;
根据该图像的场景信息获取对应的切变特效;并根据获取的切变特效处理该需要处理的图像。
2.根据权利要求1所述的方法,其特征在于,所述提取该图像的颜色特征,包括:
根据该图像的实际大小,将该图像分为像素p×p的小块图像,对于该图像不够p×p的小块图像部分丢弃;其中,P为大于0的整数;
在图像的色调饱和度亮度HSV颜色空间下,分别计算每个小块图像的色调、饱和度和亮度三个分量的均值、方差和偏度,构成该小块图像的颜色矩特征;
对这三个分量进行非等量量化,获得量化后的直方图维数;
在量化后的直方图维数的基础上计算量化后的颜色直方图的一阶、二阶和三阶矩特征,获得颜色直方图矩特征;
将该图像的所有小块图像的颜色矩特征和颜色直方图矩特征构成该图像的颜色特征。
3.根据权利要求2所述的方法,其特征在于,所述提取该图像的纹理特征,包括:
对于每个小块图像,计算获得该小块图像的灰度图,并将灰度值量化为第一预设值级;
根据配置的预设窗口范围计算该小块图像的四个方向的灰度共生矩阵;
分别计算四个灰度共生矩阵的7个统计量特征,获取计算的各统计量特征的平均值,并进行归一化计算;
将进行归一化计算后的各统计量特征取四个方向的均值,获得基于灰度共生矩阵的纹理特征;
该图像的各个小块图像的基于灰度共生矩阵的纹理特征构成该图像的纹理特征。
4.根据权利要求1-3任意一项所述的方法,其特征在于,
当确定的场景信息对应的切变特效包括两种以上时,在根据确定的切变特效处理该需要处理的图像时,使用其中一种或任意组合的切变特效处理该需要处理的图像。
5.根据权利要求1-3任意一项所述的方法,其特征在于,当该需要处理的图像尺寸较大,且确定的场景信息对应的切变特效有两种以上时,选择其中速度最快的切变特效对该需要处理的图像进行处理。
6.一种装置,其特征在于,该装置包括:配置单元、提取单元、训练单元和处理单元;
所述配置单元,用于预先配置场景信息与切变特效的对应关系;
所述提取单元,用于获取样本图像,并根据样本图像的场景类型将各样本图像分类;对每个场景类型下的每个样本图像,提取该图像的颜色特征和纹理特征;并将提取的该图像的颜色特征和纹理特征构成特征向量,将各场景类型下的所有样本图像的特征向量组成该场景类型下的特征样本库;获取需要处理的图像,并提取该图像的颜色特征和纹理特征构成该图像的特征向量;
所述训练单元,用于在所述提取单元中的特征样本库中进行N次特征向量随机选取,且选取的特征向量的个数相同,构成N个训练集,在所述N个训练集上进行训练获取N个场景分类器;将所述提取单元提取的需要处理的图像的特征向量分别输入所述N个场景分类器内,获得各场景分类器输出的场景类型;其中,N为大于2的整数;
所述处理单元,用于将所述训练单元中N个场景分类器输出次数最多的场景类型对应的场景信息确定为该需要处理的图像的场景信息;根据该图像的场景信息在所述配置单元中获取对应的切变特效;并根据获取的切变特效处理该需要处理的图像。
7.根据权利要求6所述的装置,其特征在于,
所述提取单元,具体用于提取该图像的颜色特征时,根据该图像的实际大小,将该图像分为像素p×p的小块图像,对于该图像不够p×p的小块图像部分丢弃;在图像的色调饱和度亮度HSV颜色空间下,分别计算每个小块图像的色调、饱和度和亮度三个分量的均值、方差和偏度,构成该小块图像的颜色矩特征;对这三个分量进行非等量量化,获得量化后的直方图维数;在量化后的直方图维数的基础上计算量化后的颜色直方图的一阶、二阶和三阶矩特征,获得颜色直方图矩特征;将该图像的所有小块图像的颜色矩特征和颜色直方图矩特征构成该图像的颜色特征;其中,p为大于0的整数。
8.根据权利要求7所述的装置,其特征在于,
所述提取单元,具体用于提取该图像的纹理特征时,对于每个小块图像,计算获得该小块图像的灰度图,并将灰度值量化为第一预设值级;根据配置的预设窗口范围计算该小块图像的四个方向的灰度共生矩阵;分别计算四个灰度共生矩阵的7个统计量特征,获取计算的各统计量特征的平均值,并进行归一化计算;将进行归一化计算后的各统计量特征取四个方向的均值,获得基于灰度共生矩阵的纹理特征;该图像的各个小块图像的基于灰度共生矩阵的纹理特征构成该图像的纹理特征。
9.根据权利要求6-8任意一项所述的装置,其特征在于,
所述处理单元,进一步用于当确定的场景信息对应的切变特效包括两种以上时,在根据确定的切变特效处理该需要处理的图像时,使用其中一种或任意组合的切变特效处理该需要处理的图像。
10.根据权利要求6-8任意一项所述的装置,其特征在于,
所述处理单元,进一步用于当该需要处理的图像尺寸较大,且确定的场景信息对应的切变特效有两种以上时,选择其中速度最快的切变特效对该需要处理的图像进行处理。
CN201410016489.1A 2014-01-14 2014-01-14 一种图像处理方法和装置 Active CN103810504B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410016489.1A CN103810504B (zh) 2014-01-14 2014-01-14 一种图像处理方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410016489.1A CN103810504B (zh) 2014-01-14 2014-01-14 一种图像处理方法和装置

Publications (2)

Publication Number Publication Date
CN103810504A true CN103810504A (zh) 2014-05-21
CN103810504B CN103810504B (zh) 2017-03-22

Family

ID=50707245

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410016489.1A Active CN103810504B (zh) 2014-01-14 2014-01-14 一种图像处理方法和装置

Country Status (1)

Country Link
CN (1) CN103810504B (zh)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104484867A (zh) * 2014-12-30 2015-04-01 小米科技有限责任公司 图片处理方法及装置
CN105354801A (zh) * 2015-10-13 2016-02-24 苏州汉基视测控设备有限公司 一种基于hsv色彩空间的图像增强方法
CN105740889A (zh) * 2016-01-26 2016-07-06 深圳市金立通信设备有限公司 一种图像分类方法、装置及系统
CN106485223A (zh) * 2016-10-12 2017-03-08 南京大学 一种砂岩显微薄片中岩石颗粒的自动识别方法
CN107045730A (zh) * 2017-03-06 2017-08-15 青岛鹏海软件有限公司 一种数字文化场景或图像的多维展现系统和方法
CN107993191A (zh) * 2017-11-30 2018-05-04 腾讯科技(深圳)有限公司 一种图像处理方法和装置
CN108242260A (zh) * 2016-12-26 2018-07-03 中国移动通信有限公司研究院 一种健身监测方法及装置
CN108319898A (zh) * 2018-01-02 2018-07-24 中国神华能源股份有限公司 采煤机工况异常的报警方法、介质和电子设备
CN108846351A (zh) * 2018-06-08 2018-11-20 Oppo广东移动通信有限公司 图像处理方法、装置、电子设备和计算机可读存储介质
CN108921040A (zh) * 2018-06-08 2018-11-30 Oppo广东移动通信有限公司 图像处理方法和装置、存储介质、电子设备
CN109151318A (zh) * 2018-09-28 2019-01-04 成都西纬科技有限公司 一种图像处理方法、装置及计算机存储介质
WO2019120017A1 (zh) * 2017-12-22 2019-06-27 Oppo广东移动通信有限公司 照片的调整方法、装置、存储介质及电子设备
CN110019898A (zh) * 2017-08-08 2019-07-16 航天信息股份有限公司 一种动漫图像处理系统
CN110435672A (zh) * 2019-08-11 2019-11-12 西藏宁算科技集团有限公司 一种基于场景预判安全驾驶辅助方法及其系统
WO2019233341A1 (zh) * 2018-06-08 2019-12-12 Oppo广东移动通信有限公司 图像处理方法、装置、计算机可读存储介质和计算机设备
CN110580428A (zh) * 2018-06-08 2019-12-17 Oppo广东移动通信有限公司 图像处理方法、装置、计算机可读存储介质和电子设备
CN110674702A (zh) * 2019-09-04 2020-01-10 精英数智科技股份有限公司 一种矿井图像场景分类方法、装置及设备、系统
CN111526290A (zh) * 2017-11-08 2020-08-11 Oppo广东移动通信有限公司 图像处理方法、装置、终端及存储介质
CN112565882A (zh) * 2019-09-26 2021-03-26 北京字节跳动网络技术有限公司 视频生成方法、装置、电子设备和计算机可读介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050281463A1 (en) * 2004-04-22 2005-12-22 Samsung Electronics Co., Ltd. Method and apparatus for processing binary image
CN101315663A (zh) * 2008-06-25 2008-12-03 中国人民解放军国防科学技术大学 一种基于区域潜在语义特征的自然场景图像分类方法
CN102663448A (zh) * 2012-03-07 2012-09-12 北京理工大学 一种基于网络的增强现实物体识别分析方法
CN102693432A (zh) * 2010-12-08 2012-09-26 通用汽车环球科技运作有限责任公司 使用可靠局部模型更新来调节畅通路径检测
CN102789573A (zh) * 2011-05-16 2012-11-21 索尼公司 目标检测设备和方法及分类器训练设备和方法
CN102821194A (zh) * 2012-07-17 2012-12-12 西安电子科技大学 基于多种传感器的手机室内定位装置及方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050281463A1 (en) * 2004-04-22 2005-12-22 Samsung Electronics Co., Ltd. Method and apparatus for processing binary image
CN101315663A (zh) * 2008-06-25 2008-12-03 中国人民解放军国防科学技术大学 一种基于区域潜在语义特征的自然场景图像分类方法
CN102693432A (zh) * 2010-12-08 2012-09-26 通用汽车环球科技运作有限责任公司 使用可靠局部模型更新来调节畅通路径检测
CN102789573A (zh) * 2011-05-16 2012-11-21 索尼公司 目标检测设备和方法及分类器训练设备和方法
CN102663448A (zh) * 2012-03-07 2012-09-12 北京理工大学 一种基于网络的增强现实物体识别分析方法
CN102821194A (zh) * 2012-07-17 2012-12-12 西安电子科技大学 基于多种传感器的手机室内定位装置及方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
HONG LU等: "An Efficient Graph Theoretic Approach to Video Scene Clustering", 《ICICS-PCM 2003》 *
郭红玲: "多分类器选择关键技术的研究", 《中国优秀硕士学位论文全文数据库信息科技辑》 *

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104484867A (zh) * 2014-12-30 2015-04-01 小米科技有限责任公司 图片处理方法及装置
CN105354801A (zh) * 2015-10-13 2016-02-24 苏州汉基视测控设备有限公司 一种基于hsv色彩空间的图像增强方法
CN105354801B (zh) * 2015-10-13 2019-11-08 苏州汉基视测控设备有限公司 一种基于hsv色彩空间的图像增强方法
CN105740889A (zh) * 2016-01-26 2016-07-06 深圳市金立通信设备有限公司 一种图像分类方法、装置及系统
CN106485223B (zh) * 2016-10-12 2019-07-12 南京大学 一种砂岩显微薄片中岩石颗粒的自动识别方法
CN106485223A (zh) * 2016-10-12 2017-03-08 南京大学 一种砂岩显微薄片中岩石颗粒的自动识别方法
CN108242260A (zh) * 2016-12-26 2018-07-03 中国移动通信有限公司研究院 一种健身监测方法及装置
CN108242260B (zh) * 2016-12-26 2020-12-08 中国移动通信有限公司研究院 一种健身监测方法及装置
CN107045730A (zh) * 2017-03-06 2017-08-15 青岛鹏海软件有限公司 一种数字文化场景或图像的多维展现系统和方法
CN107045730B (zh) * 2017-03-06 2023-10-24 青岛鹏海软件有限公司 一种数字文化场景或图像的多维展现系统和方法
CN110019898A (zh) * 2017-08-08 2019-07-16 航天信息股份有限公司 一种动漫图像处理系统
CN111526290A (zh) * 2017-11-08 2020-08-11 Oppo广东移动通信有限公司 图像处理方法、装置、终端及存储介质
CN111526290B (zh) * 2017-11-08 2021-09-28 Oppo广东移动通信有限公司 图像处理方法、装置、终端及存储介质
CN107993191A (zh) * 2017-11-30 2018-05-04 腾讯科技(深圳)有限公司 一种图像处理方法和装置
CN107993191B (zh) * 2017-11-30 2023-03-21 腾讯科技(深圳)有限公司 一种图像处理方法和装置
CN109960973A (zh) * 2017-12-22 2019-07-02 广东欧珀移动通信有限公司 照片的调整方法、装置、存储介质及电子设备
WO2019120017A1 (zh) * 2017-12-22 2019-06-27 Oppo广东移动通信有限公司 照片的调整方法、装置、存储介质及电子设备
CN108319898A (zh) * 2018-01-02 2018-07-24 中国神华能源股份有限公司 采煤机工况异常的报警方法、介质和电子设备
CN108846351A (zh) * 2018-06-08 2018-11-20 Oppo广东移动通信有限公司 图像处理方法、装置、电子设备和计算机可读存储介质
CN110580428A (zh) * 2018-06-08 2019-12-17 Oppo广东移动通信有限公司 图像处理方法、装置、计算机可读存储介质和电子设备
WO2019233341A1 (zh) * 2018-06-08 2019-12-12 Oppo广东移动通信有限公司 图像处理方法、装置、计算机可读存储介质和计算机设备
CN108921040A (zh) * 2018-06-08 2018-11-30 Oppo广东移动通信有限公司 图像处理方法和装置、存储介质、电子设备
CN109151318A (zh) * 2018-09-28 2019-01-04 成都西纬科技有限公司 一种图像处理方法、装置及计算机存储介质
CN110435672A (zh) * 2019-08-11 2019-11-12 西藏宁算科技集团有限公司 一种基于场景预判安全驾驶辅助方法及其系统
CN110674702A (zh) * 2019-09-04 2020-01-10 精英数智科技股份有限公司 一种矿井图像场景分类方法、装置及设备、系统
CN112565882A (zh) * 2019-09-26 2021-03-26 北京字节跳动网络技术有限公司 视频生成方法、装置、电子设备和计算机可读介质
EP4024880A4 (en) * 2019-09-26 2022-10-19 Beijing Bytedance Network Technology Co., Ltd. VIDEO GENERATING METHOD AND APPARATUS, ELECTRONIC DEVICE AND COMPUTER READABLE MEDIA
US11710510B2 (en) 2019-09-26 2023-07-25 Beijing Bytedance Network Technology Co., Ltd. Video generation method and apparatus, electronic device, and computer readable medium

Also Published As

Publication number Publication date
CN103810504B (zh) 2017-03-22

Similar Documents

Publication Publication Date Title
CN103810504A (zh) 一种图像处理方法和装置
Ros et al. The synthia dataset: A large collection of synthetic images for semantic segmentation of urban scenes
Hagerhall et al. Fractal dimension of landscape silhouette outlines as a predictor of landscape preference
CN102567731B (zh) 一种感兴趣区域提取方法
CN108765279A (zh) 一种面向监控场景的行人人脸超分辨率重建方法
CN106096542B (zh) 基于距离预测信息的图像视频场景识别方法
CN103853724B (zh) 多媒体数据分类方法及装置
CN103020985B (zh) 一种基于场量分析的视频图像显著性检测方法
CN107316035A (zh) 基于深度学习神经网络的对象识别方法及装置
CN106960176B (zh) 一种基于超限学习机和颜色特征融合的行人性别识别方法
CN108629368A (zh) 一种基于联合深度融合的多模态地基云分类方法
CN109657715B (zh) 一种语义分割方法、装置、设备及介质
CN111832568A (zh) 车牌识别方法、车牌识别模型的训练方法和装置
CN106233716A (zh) 视频显示装置、视频投影装置、动态错觉呈现装置、视频生成装置、它们的方法、数据结构、程序
CN111143615B (zh) 一种短视频情感类别的识别装置
CN109800817A (zh) 基于融合语义神经网络的图像分类方法
CN107016371A (zh) 基于改进的深度置信网络的无人机着陆地貌分类方法
Paulin et al. Review and analysis of synthetic dataset generation methods and techniques for application in computer vision
CN111028244B (zh) 基于超像素的已知样本不均衡情况下的遥感图像语义分割的方法
Hu et al. Gabor-CNN for object detection based on small samples
Laupheimer et al. Neural networks for the classification of building use from street-view imagery
Zhang et al. Atmospheric perspective effect enhancement of landscape photographs through depth-aware contrast manipulation
CN104112131A (zh) 一种用于人脸检测的训练样本的生成方法及装置
CN108388901A (zh) 基于空间-语义通道的协同显著目标检测方法
He Application of local color simulation method of landscape painting based on deep learning generative adversarial networks

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant