CN110097506B - 图像处理方法及装置、图像设备及存储介质 - Google Patents

图像处理方法及装置、图像设备及存储介质 Download PDF

Info

Publication number
CN110097506B
CN110097506B CN201910377128.2A CN201910377128A CN110097506B CN 110097506 B CN110097506 B CN 110097506B CN 201910377128 A CN201910377128 A CN 201910377128A CN 110097506 B CN110097506 B CN 110097506B
Authority
CN
China
Prior art keywords
image
deformation
deformation parameter
obtaining
deformed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910377128.2A
Other languages
English (en)
Other versions
CN110097506A (zh
Inventor
李通
刘文韬
钱晨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Sensetime Technology Development Co Ltd
Original Assignee
Beijing Sensetime Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Sensetime Technology Development Co Ltd filed Critical Beijing Sensetime Technology Development Co Ltd
Priority to CN201910377128.2A priority Critical patent/CN110097506B/zh
Publication of CN110097506A publication Critical patent/CN110097506A/zh
Application granted granted Critical
Publication of CN110097506B publication Critical patent/CN110097506B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformation in the plane of the image
    • G06T3/60Rotation of a whole image or part thereof
    • G06T3/602Block rotation, e.g. by recursive reversing or rotating

Abstract

本发明实施例提供一种图像处理方法及装置、图像设备及存储介质。所述图像处理方法,包括:若第一图像中目标的预定局部的第一方向与基准方向不一致,旋转所述第一图像;基于旋转后的所述第一图像获得第二图像,其中,第二图像中所述预定局部的第一方向与所述基准方向一致;基于所述第二图像,获得所述预定局部的第一变形参数;基于所述第一变形参数,获得所述预定局部变形后的第三图像。

Description

图像处理方法及装置、图像设备及存储介质
技术领域
本发明涉及图像处理方法及装置,尤其涉及一种图像处理方法及装置、图像设备及存储介质。
背景技术
在图像采集模组采集图像之后,可能会对图像中的成像进行图像变形处理;但是在一些情况下,直接对图像中的目标或目标所包含的局部变形,会出现变形难度大或者变形效果差的现象;从而导致变形后的图像效果很不理想。
发明内容
有鉴于此,本发明实施例期望提供一种图像处理方法及装置、图像设备及存储介质。
本发明的技术方案是这样实现的:
一种图像处理方法,包括:
若第一图像中目标的预定局部的第一方向与基准方向不一致,旋转所述第一图像;
基于旋转后的所述第一图像获得第二图像,其中,第二图像中所述预定局部的第一方向与所述基准方向一致;
基于所述第二图像,获得所述预定局部的第一变形参数;
基于所述第一变形参数,获得所述预定局部变形后的第三图像。
基于上述方案,所述方法包括:
至少从所述第一图像中提取所述预定局部的关键点;
基于所述关键点获得所述预定局部的第一方向。
基于上述方案,所述方法还包括:
确定所述第一方向与所述基准方向之间的第一角度;
所述若第一图像中目标的预定局部的第一方向与基准方向不一致,旋转所述第一图像,包括:
若所述第一方向与所述基准方向不一致,将所述第一图像旋转所述第一角度。
基于上述方案,所述基准方向为进行所述预定局部变形的变形网格的经线方向或纬线方向。
基于上述方案,所述基于旋转后的所述第一图像获得第二图像,包括:
获得所述旋转后的所述第一图像的外接框,其中,旋转后的所述第一图像位于所述外接框内的第一区域;
在所述外接框的所述第一区域以外的第二区域填充预定颜色的像素以获得所述第二图像。
基于上述方案,所述基于所述第二图像,获得所述预定局部的第一变形参数,包括:
在所述第二图像上叠加变形网格;
获取所述变形网格位于所述第一区域内的第一类像素的所述第一变形参数。
基于上述方案,所述方法还包括:
启动所述变形网格位于第二区域内的第二类像素的保护机制;
基于所述保护机制,屏蔽所述第二类像素的变形操作。
基于上述方案,所述方法还包括:
基于所述第一变形参数,获得第二变形参数;
所述基于所述第一变形参数,获得所述预定局部变形后的第三图像,包括:
基于所述第二变形参数,对所述第一图像中的所述预定局部进行变形并获得变形后的所述第三图像。
基于上述方案,所述基于所述第一变形参数,获得第二变形参数,包括:
根据所述第二图像相对于所述第一图像旋转的第二角度,进行所述第一变形参数的变换得到所述第二变形参数。
基于上述方案,所述根据所述第二图像相对于所述第一图像旋转的第二角度,进行所述第一变形参数的变换得到所述第二变形参数,包括:
基于所述第二变形参数,对所述第一图像的像素进行调整得到所述第三图像。
基于上述方案,所述基于所述第一变形参数,获得所述预定局部变形后的第三图像,包括:基于所述第一变形参数对所述第二图像的所述预定局部进行变形,得到变形后的所述第二图像;将变形后的所述第二图像按照所述第一图像的逆方向旋转得到所述第三图像。
一种图像处理装置,包括:
旋转模块,用于若第一图像中目标的预定局部的第一方向与基准方向不一致,旋转所述第一图像;
第一获得模块,用于基于旋转后的所述第一图像获得第二图像,其中,第二图像中所述预定局部的第一方向与所述基准方向一致;
第二获得模块,用于基于所述第二图像,获得所述预定局部的第一变形参数;
第三获得模块,用于基于所述第一变形参数,获得所述预定局部变形后的第三图像。
基于上述方案,所述装置包括:
提取模块,用于至少从所述第一图像中提取所述预定局部的关键点;
第四获得模块,用于基于所述关键点获得所述预定局部的第一方向。
基于上述方案,所述装置还包括:
确定模块,用于确定所述第一方向与所述基准方向之间的第一角度;
所述旋转模块,用于若所述第一方向与所述基准方向不一致,将所述第一图像旋转所述第一角度。
基于上述方案,所述基准方向为进行所述预定局部变形的变形网格的经线方向或纬线方向。
基于上述方案,所述第二获得模块,用于获得所述旋转后的所述第一图像的外接框,其中,旋转后的所述第一图像位于所述外接框内的第一区域;在所述外接框的所述第一区域以外的第二区域填充预定颜色的像素以获得所述第二图像。
基于上述方案,所述第二获得模块,具体用于在所述第二图像上叠加变形网格;获取所述变形网格位于所述第一区域内的第一类像素的所述第一变形参数。
基于上述方案,所述装置还包括:
启动模块,用于启动所述变形网格位于第二区域内的第二类像素的保护机制;
屏蔽模块,用于基于所述保护机制,屏蔽所述第二类像素的变形操作。
基于上述方案,所述装置还包括:
第五获得模块,用于基于所述第一变形参数,获得第二变形参数;
所述第三获得模块,用于基于所述第二变形参数,对所述第一图像中的所述预定局部进行变形并获得变形后的所述第三图像。
基于上述方案,所述第二获得模块,用于根据所述第二图像相对于所述第一图像旋转的第二角度,进行所述第一变形参数的变换得到所述第二变形参数。
基于上述方案,所述根据所述第二图像相对于所述第一图像旋转的第二角度,进行所述第一变形参数的变换得到所述第二变形参数,包括:
基于所述第二变形参数,对所述第一图像的像素进行调整得到所述第三图像。
基于上述方案,所述第三获得模块,具体用于基于所述第一变形参数对所述第二图像的所述预定局部进行变形,得到变形后的所述第二图像;将变形后的所述第二图像按照所述第一图像的逆方向旋转得到所述第三图像。
一种图像设备,包括:
存储器;
处理器,与所述存储器连接,用于通过执行位于所述存储器上的计算机可执行指令,能够前述任意技术方案提供的图像处理方法。
一种计算机存储介质,所述计算机存储介质存储计算机可执行指令;所述计算机可执行指令被处理器执行后,能够实现前述任意技术方案提供的图像处理方法。
本发明实施例提供的图像处理方法,在进行图像中目标变形时,会先预定局部的第一方向是否和基准方向一致,如果不一致会先旋转第一图像得到第二图像,然后基于第二图像得到第一变形参数得到预定局部的变形;如此,可以减少预定局部的第一方向与基准方向不一致导致的变形效果差的现象,提升了图像的变形效果和变形后的图像质量。
附图说明
图1为本发明实施例提供的第一种图像处理方法的流程示意图;
图2为本发明实施例提供的第二种图像处理方法的流程示意图;
图3A至图3E为本发明实施例提供的图像处理方法的效果示意图;
图4为本发明实施例提供的一种图像处理装置的结构示意图;
图5为本发明实施例提供的一种图像设备的结构示意图。
具体实施方式
以下结合说明书附图及具体实施例对本发明的技术方案做进一步的详细阐述。
如图1所示,本实施例提供一种图像处理方法,包括:
步骤S110:若第一图像中目标的预定局部的第一方向与基准方向不一致,旋转所述第一图像;
步骤S120:基于旋转后的所述第一图像获得第二图像,其中,第二图像中所述预定局部的第一方向与所述基准方向一致;
步骤S130:基于所述第二图像,获得所述预定局部的第一变形参数;
步骤S140:基于所述第一变形参数,获得所述预定局部变形后的第三图像。
本实施例提供的图像处理方法,可以应用于图像处理设备中。
该第一图像可为图像设备的图像采集模组(例如,摄像头)采集的图像。
在本实施例中,所述目标可包括多个局部,所述预定局部可为所述目标所包含的一个或多个局部。
例如,所述目标可为人的成像、动物或景物的成像。
以所述目标为人为例进行说明,所述预定局部可为人体的肩部、人体的胸部、人体的脸部等。
所述第一方向包括:预定局部的特定关键点的连线;例如,人体的左肩关键点和右肩关键点的连线方向;再例如,人体的左胸中心点和右胸中心点的连线方向。
在本实施例中,所述基准方向可为预先设定的方向,例如,水平方向或者竖直方向等。
在步骤S110中若预定局部的第一方向与基准方向不一致,可包括:第一方向和基准方向不重叠或不平行,例如,若基准方向为水平方向,则预定方向不是水平方向,会旋转所述第一图像,得到所述第二图像。在步骤S120中获得第二图像中,目标的预定局部的第一方向就会是水平方向。
得到第二图像之后,基于第二图像获得预定局部的第一变形参数;得到第一变形参数之后对所述预定局部进行变形,得到变形后的第三图像。
在本实施例中,所述预定局部可以有多个,多个不同的预定局部的第一方向决定于目标在图像中的呈现。多个所述预定局部对应的基准方向相同;但是预定局部的第一方向决定于预定局部自身在图像中的呈现可以根据图像中预定局部的不同呈现相应的处理,确保每一个预定局部的变形效果。
在一些实施例中,所述步骤S140可包括但不限于:利用所述第一变形参数对所述第二图像的预定局部进行变形,得到变形后的第二图像;将变形后的第二图像按照第一图像的旋转的逆方向旋转,得到所述第三图像。
如此,通过第一图像的旋转,可以使得由于预定局部的第一方向未与基准方向保持一致导致的图像变形困难大及变形效果差的问题得到解决,从而一方面降低了变形难度,另一方面提升了变形效果,从而获得图像质量更好的所述第三图像。
在本发明实施例中对所述预定局部的变形包括但不限于:
对所述预定局部进行尺寸缩小处理;
对所述预定局部进行尺寸放大处理;
对所述预定局部进行形状调整;
对预定局部进行缺陷消除处理。
例如,以所述预定局部为人体的肩部为例,对所述预定局部的变形包括但不限于瘦肩和/或调整肩部形状。所述肩部形状的调整包括但不限于:溜肩调整成平肩等。
再例如,以所述预定局部为人体的胸部为例,对胸部的变形包括但不限于:丰胸处理、缩胸处理和/或胸部形状调整处理。
在本实施例中可以利用变形网格中网格点的变形配合插值算法进行所述预定局部的变形。
在一些实施例中,所述方法包括:至少从所述第一图像中提取所述预定局部的关键点;基于所述关键点获得所述预定局部的第一方向。
在一些实施例中,将所述第一图像输入到深度学习模型中,深度学习模型自然就可以提取出所述图像中目标的关键点,该关键点可为目标的轮廓关键点和/或支架关键点。
所述轮廓关键点可为目标可视的外轮廓或内轮廓上的关键点。以人为例,所述轮廓关键点可为包括整体身形的外轮廓上的关键点,也包括身体内轮廓的关键点;例如,鼻尖关键点就属于身体内轮廓上的关键点。
若所述目标为人,所述支架关键点为骨架关键点。以人为例,骨架关键点可为骨架上各个关节点对应的关键点。
总之,在本实施例中,首先利用深度学习模型或者机器学习模型等各种具有关键点提取的工具,从所述第一图像中至少提取出目标的预定局部的关键点,从而可以得到所述第一方向,以判断第一方向是否与基准方向是一致的。
例如,以人体肩部为例,将左肩的轮廓关键点和右键的轮廓关键点进行连线,可以得到一种所述第一方向。然后将该第一方向与所述基准方向比较,就知道当前第一图像的肩部的第一方向是否与基准方向一致。
在一些实施例中,确定所述第一方向的方法还可以是其他方式,不局限于基于关键点确定所述第一方向。例如,基于所述预定局部的呈现姿态,确定出所述第一方向。
在一些实施例中,所述方法还包括:确定所述第一方向与所述基准方向之间的第一角度;
所述步骤S110可包括:若所述第一方向与所述基准方向不一致,将所述第一图像旋转所述第一角度。
在本实施例中,所述第一方向和所述基准方向之间的第一角度包括但不限于所述第一方向和所述基准方向所形成的两个角度中较小的夹角。
在步骤S110中,将所述第一图像旋转所述第一角度,若第一角度为第一方向和基准方向之间较小的夹角,则第一图像的旋转角度就更小。图像旋转过程中由于像素的重组,可能会有出现图像质量的损失,若旋转的角度小,则图像质量损失可能就更小或者出现图像损失的概率就更小,以获得图像质量更好的旋转后的第一图像。
在一些实施例中,所述基准方向为进行所述预定局部变形的变形网格的经线方向或纬线方向。在本实施例中,所述变形网格为包括多个矩形框的网格;所述经线方向和所述纬线方向相互垂直。
在本实施例中,所述预定局部的变形可使用变形网格进行。所述变形网格包括经线和纬线,经线和纬线是相互垂直的两种线。
在本实施例中,所述基准方向可为所述经线所在的方向(即经线方向)或者,所述基准方向可为纬线所在的方向(即纬线方向)。
如此,将第一图像旋转之后再进行形变,如此,预定局部的第一方向至少与变形网格的经线方向或纬线方向是一致的,减少预定局部的第一方向既不与经线方向一致,也不与纬线方向一致导致的变形效果差的现象,提升了所述预定局部的变形效果。
在一些实施例中,所述第二图像可以直接为旋转后的所述第一图像。
在另一些实施例中,所述步骤S120可包括:
获得所述旋转后的所述第一图像的外接框,其中,旋转后的所述第一图像位于所述外接框内的第一区域;
在所述外接框的所述第一区域以外的第二区域填充预定颜色的像素以获得所述第二图像。
在一些实施例中,所述第一图像被旋转之后就可能不再是横平竖直的图像了。而一些局域变形处理的深度学习模型和/或机器学习模型等,可能仅能够对横平竖直的图像进行处理,故在本实施例中为了实现兼容,会进一步获取旋转后的第一图像的外接框,若旋转后所述第一图像位于所述外接框内的第一区域内;但是该外接框中可能还有一部分空白区域,这一部分空白区域统称为第二区域。
在本实施例中,图像设备会在第二区域内填充预定颜色的像素,该预定颜色可以为任意颜色,例如,白色、黑色、任意的灰色等。
如此,生成的第二图像的图像尺寸是大于原始的第一图像的图像尺寸,具体地如,所述第二图像包含的像素个数是比原始的第一图像的像素个数多的。
在一些实施例中,所述步骤S130可包括:
在所述第二图像上叠加变形网格;
获取所述变形网格位于所述第一区域内的第一类像素的所述第一变形参数。
在本实施例中,所述预定局部的变形是基于变形网格进行的。
故在获得第二图像之后,会在第二图像上设置变形网格。在本实施例中设置的所述变形网格可为包括经线和纬线的变形网格。
在设置所述变形网格之后,基于用户输入的变形指令或者电子设备内的内置变形指令,确定出对所述第一区域内的第一类像素进行变形的第一变形参数。
在获得第一类像素的第一变形参数之后,可以基于各种插值算法(例如,样条插值算法)等对相邻两个第一类像素之间的像素进行坐标变迁和/或像素的像素值的确定。
在一些实施例中,如图2所示,所述方法还包括:
步骤S131:启动所述变形网格位于第二区域内的第二类像素的保护机制;
步骤S132:基于所述保护机制,屏蔽所述第二类像素的变形操作。
在本实施例中,为了减少对第二区域的第二类像素误操作导致的第二区域的像素进入到第一区域内,使得第一区域产生不必要的形变。
在本实施例中,会启动对第二区域内第二类像素的保护机制,第二类像素的保护机制被启动之后,第二类像素是禁止变形的。
如此,保护机制启动之后,任意对第二类像素的变形操作都是被屏蔽的,如此减少了对第二类像素的误操作导致的图像被破坏的现象。
在一些实施例中,可以直接对第二图像基于所述第一变形参数进行第一类像素的变形,然后得到预定局部变形之后的图像,再将变形之后的图像旋转回原来的角度得到所述第三图像,但是考虑到图像旋转过程中的失真,在本实施例中,所述方法还包括:
步骤S133:基于所述第一变形参数,获得第二变形参数;
所述步骤S140可包括:基于所述第二变形参数,对所述第一图像中的所述预定局部进行变形并获得变形后的所述第三图像。
在本实施例中,基于第一变形参数计算得到一个第二变形参数,这个第二变形参数是直接对原始的第一图像进行变形处理的第一变形参数;故实现了在没有引入旋转失真的原始第一图像上的变形处理;如此可以获得图像质量更好的第三图像。
在一些实施例中,所述基于所述第一变形参数,获得第二变形参数,包括:
根据所述第二图像相对于所述第一图像旋转的第二角度,进行所述第一变形参数的变换得到所述第二变形参数。
例如,将第一图像旋转后得到所述第二图像,若第一图像相对于第二图像旋转了第一角度,第二图像相对于第一图像旋转的第二角度与所述第一角度的角度值相等,但是旋转方向正好相反。
例如,第一图像旋转得到第二图像为逆时针旋转N度,则第二角度为顺时针旋转N度。
在完成变形后的所述第二图像的旋转之后,裁切掉第二图像的所述第二类像素,从而得到与第一图像同尺寸的所述第三图像。
在本实施例中,所述第一变形参数包括但不限于变形向量,在本实施例中可以对第一变形参数进行所述第二角度的旋转,从而得到变换后的第二变形参数。
直接利用变化后第二变形参数对原始的第一图像进行像素位置的变形和/或像素值的变更,从而能够得到所述第三图像。
在本实施例中,利用与第一变形参数对应的第二变形参数直接对第一图像的像素进行处理,如此实现了在原始图像的处理,减少了原始图像旋转引入的图像模糊等图像效果差的现象,提升了图像质量。
图3A为一种第一图像;图3B为一种旋转后的第一图像并补齐有预定颜色的第二区域的第二图像;图3C中展示有第一图像中目标的关键点的示意图。图3D为本发明实施例提供的一种在第二图像中设置有变形网格的示意图。图3E为本发明实施例提供的一种变形效果的示意图。在图3E中人体虚线为瘦身变形之前的效果,人体实线为瘦身变形之后的效果。
如图4所示,本实施例提供一种图像处理装置,包括:
旋转模块110,用于若第一图像中目标的预定局部的第一方向与基准方向不一致,旋转所述第一图像;
第一获得模块120,用于基于旋转后的所述第一图像获得第二图像,其中,第二图像中所述预定局部的第一方向与所述基准方向一致;
第二获得模块130,用于基于所述第二图像,获得所述预定局部的第一变形参数;
第三获得模块140,用于基于所述第一变形参数,获得所述预定局部变形后的第三图像。
在一些实施例中,所述旋转模块110、第一获得模块120、第二获得模块130及第三获得模块140可为程序模块,该程序模块被处理后能够前述第一图像的旋转、第二图像的获得、第一变形参数的确定及第三图像的生成。
在另一些实施例中,所述旋转模块110、第一获得模块120、第二获得模块130及第三获得模块140可为软硬结合模块,所述软硬结合模块可为各种可编程阵列;所述可编程阵列包括但不限于复杂可编程阵列或现场可编程阵列。
在还有一些实施例中,所述旋转模块110、第一获得模块120、第二获得模块130及第三获得模块140可为纯硬件模块;所述纯硬件模块包括但不限于专用集成电路。
在一些实施例中,所述装置包括:
提取模块,用于至少从所述第一图像中提取所述预定局部的关键点;
第四获得模块,用于基于所述关键点获得所述预定局部的第一方向。
在一些实施例中,所述装置还包括:
确定模块,用于确定所述第一方向与所述基准方向之间的第一角度;
所述旋转模块110,用于若所述第一方向与所述基准方向不一致,将所述第一图像旋转所述第一角度。
在一些实施例中,所述基准方向为进行所述预定局部变形的变形网格的经线方向或纬线方向。
在一些实施例中,所述第二获得模块130,用于获得所述旋转后的所述第一图像的外接框,其中,旋转后的所述第一图像位于所述外接框内的第一区域;在所述外接框的所述第一区域以外的第二区域填充预定颜色的像素以获得所述第二图像。
在一些实施例中,所述第二获得模块130,具体用于在所述第二图像上叠加变形网格;获取所述变形网格位于所述第一区域内的第一类像素的所述第一变形参数。
在一些实施例中,所述装置还包括:
启动模块,用于启动所述变形网格位于第二区域内的第二类像素的保护机制;
屏蔽模块,用于基于所述保护机制,屏蔽所述第二类像素的变形操作。
在一些实施例中,所述装置还包括:
第五获得模块,用于基于所述第一变形参数,获得第二变形参数;
所述第三获得模块140,用于基于所述第二变形参数,对所述第一图像中的所述预定局部进行变形并获得变形后的所述第三图像。
在一些实施例中,所述第二获得模块130,用于根据所述第二图像相对于所述第一图像旋转的第二角度,进行所述第一变形参数的变换得到所述第二变形参数。
在一些实施例中,所述根据所述第二图像相对于所述第一图像旋转的第二角度,进行所述第一变形参数的变换得到所述第二变形参数,包括:
基于所述第二变形参数,对所述第一图像的像素进行调整得到所述第三图像。
在一些实施例中,所述第三获得模块,具体用于基于所述第一变形参数,对所述第二图像的所述预定局部进行变形得到变形后的所述第二图像;将变形后的所述第二图像按照所述第一图像的逆方向旋转得到所述第三图像。
以下结合上述任意实施例提供一个具体示例:
参考图3A至图3E所示,本示例提供一种图像处理方法,包括,将图像中斜着的目标摆正之后在进行瘦身等变形处理,减少在变形过程中由于目标未摆正导致的变形效果差的显现。例如,以人为例,需要先把图像中的人体成像转正,人体成像摆正之后的下过是:保持肩部水平;该摆正方法可针对半身像,进一步地例如,自拍场景的半身像。转正后,相应的人体轮廓点或者外边框都会相应地转过来。
转过来后,再做一个变形网格效果,比如瘦肩就针对转正后的肩部进行瘦肩。在变形的过程中必须要保证只能修改图像内部的点,不能把图像外部的点进行挪动,否则边缘会出现扭曲的现象;得到在摆正后的图像的第一变形参数,然后将得到的第一变形参数映射会未旋转原始图像中的像素的第一变形参数得到第二变形参数,然后利用第二变形参数直接对原始图像进行处理,如此就会得到变形效果更佳的图像。
如图5所示,本发明实施例提供一种图像设备,包括:
存储器;
处理器,与所述存储器连接,用于通过执行位于所述存储器上的计算机可执行指令,能够实现前述任意实施例提供的图像处理方法。
该存储器可为各种类型的存储器,可为随机存储器、只读存储器、闪存等。所述存储器可用于信息存储,例如,存储计算机可执行指令等。所述计算机可执行指令可为各种程序指令,例如,目标程序指令和/或源程序指令等。
所述处理器可为各种类型的处理器,例如,中央处理器、微处理器、数字信号处理器、可编程阵列、数字信号处理器、专用集成电路或图像处理器等。
所述处理器可以通过总线与所述存储器连接。所述总线可为集成电路总线等。
在一些实施例中,所述电子设备还可包括:通信接口,该通信接口可包括:网络接口、例如,局域网接口、收发天线等。所述通信接口同样与所述处理器连接,能够用于信息收发。
在一些实施例中,所述电子设备还包括人机交互接口,例如,所述人机交互接口可包括各种输入输出设备,例如,键盘、触摸屏等。
本发明实施例提供一种计算机存储介质,所述计算机存储介质存储计算机可执行指令;所述计算机可执行指令被处理器执行后,能够实现前述任意实施例提供的图像处理方法。
所述计算机存储介质可为包括具有记录功能的各种记录介质,例如,CD、软盘、硬盘、磁带、光盘、U盘或变形硬盘等各种存储介质。可选的所述计算机存储介质可为非瞬间存储介质,该计算机存储介质可被处理器读取,从而使得存储在计算机存储机制上的计算机可执行指令被处理器获取并执行后,能够实现前述任意一个技术方案提供的图像处理方法,例如,执行应用于终端设备中的图像处理方法或应用服务器中的图像处理方法。
在本申请所提供的几个实施例中,应该理解到,所揭露的设备和方法,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的,作为单元显示的部件可以是、或也可以不是物理单元,即可以位于一个地方,也可以分布到多个网络单元上;可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本发明各实施例中的各功能单元可以全部集成在一个处理模块中,也可以是各单元分别单独作为一个单元,也可以两个或两个以上单元集成在一个单元中;上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:变形存储设备、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。

Claims (18)

1.一种图像处理方法,其特征在于,包括:
若第一图像中目标的预定局部的第一方向与基准方向不一致,旋转所述第一图像;
获得旋转后的所述第一图像的外接框,其中,旋转后的所述第一图像位于所述外接框内的第一区域;
在所述外接框的所述第一区域以外的第二区域填充预定颜色的像素以获得第二图像;其中,所述第二图像中所述预定局部的第一方向与所述基准方向一致;
在所述第二图像上叠加变形网格;
获取所述变形网格位于所述第一区域内的第一类像素的第一变形参数;
启动所述变形网格位于所述第二区域内的第二类像素的保护机制;
基于所述保护机制,屏蔽所述第二类像素的变形操作;
基于所述第一变形参数,获得所述预定局部变形后的第三图像。
2.根据权利要求1所述的方法,其特征在于,所述方法包括:
至少从所述第一图像中提取所述预定局部的关键点;
基于所述关键点获得所述预定局部的第一方向。
3.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:
确定所述第一方向与所述基准方向之间的第一角度;
所述若第一图像中目标的预定局部的第一方向与基准方向不一致,旋转所述第一图像,包括:
若所述第一方向与所述基准方向不一致,将所述第一图像旋转所述第一角度。
4.根据权利要求1至3任一项所述的方法,其特征在于,
所述基准方向为进行所述预定局部变形的变形网格的经线方向或纬线方向。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
基于所述第一变形参数,获得第二变形参数;
所述基于所述第一变形参数,获得所述预定局部变形后的第三图像,包括:
基于所述第二变形参数,对所述第一图像中的所述预定局部进行变形并获得变形后的所述第三图像。
6.根据权利要求5所述的方法,其特征在于,所述基于所述第一变形参数,获得第二变形参数,包括:
根据所述第二图像相对于所述第一图像旋转的第二角度,进行所述第一变形参数的变换得到所述第二变形参数。
7.根据权利要求6所述的方法,其特征在于,所述根据所述第二图像相对于所述第一图像旋转的第二角度,进行所述第一变形参数的变换得到所述第二变形参数,包括:
基于所述第二变形参数,对所述第一图像的像素进行调整得到所述第三图像。
8.根据权利要求1至4任一项所述的方法,其特征在于,所述基于所述第一变形参数,获得所述预定局部变形后的第三图像,包括:
基于所述第一变形参数对所述第二图像的所述预定局部进行变形,得到变形后的所述第二图像;
将变形后的所述第二图像按照所述第一图像的逆方向旋转得到所述第三图像。
9.一种图像处理装置,其特征在于,包括:
旋转模块,用于若第一图像中目标的预定局部的第一方向与基准方向不一致,旋转所述第一图像;
第一获得模块,用于获得旋转后的所述第一图像的外接框,其中,旋转后的所述第一图像位于所述外接框内的第一区域;在所述外接框的所述第一区域以外的第二区域填充预定颜色的像素以获得第二图像;其中,所述第二图像中所述预定局部的第一方向与所述基准方向一致;
第二获得模块,用于在所述第二图像上叠加变形网格;获取所述变形网格位于所述第一区域内的第一类像素的第一变形参数;
启动模块,用于启动所述变形网格位于所述第二区域内的第二类像素的保护机制;
屏蔽模块,用于基于所述保护机制,屏蔽所述第二类像素的变形操作;
第三获得模块,用于基于所述第一变形参数,获得所述预定局部变形后的第三图像。
10.根据权利要求9所述的装置,其特征在于,所述装置包括:
提取模块,用于至少从所述第一图像中提取所述预定局部的关键点;
第四获得模块,用于基于所述关键点获得所述预定局部的第一方向。
11.根据权利要求9或10所述的装置,其特征在于,所述装置还包括:
确定模块,用于确定所述第一方向与所述基准方向之间的第一角度;
所述旋转模块,用于若所述第一方向与所述基准方向不一致,将所述第一图像旋转所述第一角度。
12.根据权利要求9至11任一项所述的装置,其特征在于,
所述基准方向为进行所述预定局部变形的变形网格的经线方向或纬线方向。
13.根据权利要求9所述的装置,其特征在于,所述装置还包括:
第五获得模块,用于基于所述第一变形参数,获得第二变形参数;
所述第三获得模块,用于基于所述第二变形参数,对所述第一图像中的所述预定局部进行变形并获得变形后的所述第三图像。
14.根据权利要求13所述的装置,其特征在于,所述第二获得模块,用于根据所述第二图像相对于所述第一图像旋转的第二角度,进行所述第一变形参数的变换得到所述第二变形参数。
15.根据权利要求14所述的装置,其特征在于,所述根据所述第二图像相对于所述第一图像旋转的第二角度,进行所述第一变形参数的变换得到所述第二变形参数,包括:
基于所述第二变形参数,对所述第一图像的像素进行调整得到所述第三图像。
16.根据权利要求9至12任一项所述的装置,其特征在于,所述第三获得模块,具体用于基于所述第一变形参数对所述第二图像的所述预定局部进行变形,得到变形后的所述第二图像;将变形后的所述第二图像按照所述第一图像的逆方向旋转得到所述第三图像。
17.一种图像设备,包括:
存储器;
处理器,与所述存储器连接,用于通过执行位于所述存储器上的计算机可执行指令,能够实现权利要求1至8任一项提供的方法。
18.一种计算机存储介质,所述计算机存储介质存储计算机可执行指令;所述计算机可执行指令被处理器执行后,能够实现权利要求1至8任一项提供的方法。
CN201910377128.2A 2019-05-07 2019-05-07 图像处理方法及装置、图像设备及存储介质 Active CN110097506B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910377128.2A CN110097506B (zh) 2019-05-07 2019-05-07 图像处理方法及装置、图像设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910377128.2A CN110097506B (zh) 2019-05-07 2019-05-07 图像处理方法及装置、图像设备及存储介质

Publications (2)

Publication Number Publication Date
CN110097506A CN110097506A (zh) 2019-08-06
CN110097506B true CN110097506B (zh) 2023-06-16

Family

ID=67447184

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910377128.2A Active CN110097506B (zh) 2019-05-07 2019-05-07 图像处理方法及装置、图像设备及存储介质

Country Status (1)

Country Link
CN (1) CN110097506B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111105348A (zh) * 2019-12-25 2020-05-05 北京市商汤科技开发有限公司 图像处理方法及装置、图像处理设备及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107705248A (zh) * 2017-10-31 2018-02-16 广东欧珀移动通信有限公司 图像处理方法、装置、电子设备和计算机可读存储介质
CN108257084A (zh) * 2018-02-12 2018-07-06 北京中视广信科技有限公司 一种基于移动端的轻量级人脸自动化妆方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5239625B2 (ja) * 2008-08-22 2013-07-17 セイコーエプソン株式会社 画像処理装置、画像処理方法および画像処理プログラム
CN109697688B (zh) * 2017-10-20 2023-08-04 虹软科技股份有限公司 一种用于图像处理的方法和装置
CN109359618B (zh) * 2018-10-30 2022-02-22 北京市商汤科技开发有限公司 一种图像处理方法及其装置、设备和存储介质

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107705248A (zh) * 2017-10-31 2018-02-16 广东欧珀移动通信有限公司 图像处理方法、装置、电子设备和计算机可读存储介质
CN108257084A (zh) * 2018-02-12 2018-07-06 北京中视广信科技有限公司 一种基于移动端的轻量级人脸自动化妆方法

Also Published As

Publication number Publication date
CN110097506A (zh) 2019-08-06

Similar Documents

Publication Publication Date Title
US11106938B2 (en) Image processing apparatus, image processing method, and storage medium for lighting processing on image using model data
CN107818305B (zh) 图像处理方法、装置、电子设备和计算机可读存储介质
US10298864B2 (en) Mismatched foreign light detection and mitigation in the image fusion of a two-camera system
CN111741281B (zh) 图像处理方法、终端及存储介质
WO2018214365A1 (zh) 图像校正方法、装置、设备、系统及摄像设备和显示设备
US10306141B2 (en) Image processing apparatus and method therefor
CN106899781B (zh) 一种图像处理方法及电子设备
EP3644599B1 (en) Video processing method and apparatus, electronic device, and storage medium
CN108230245B (zh) 图像拼接方法、图像拼接装置及电子设备
US20080232692A1 (en) Image processing apparatus and image processing method
CN106981078B (zh) 视线校正方法、装置、智能会议终端及存储介质
CN105120172A (zh) 一种移动终端前后置摄像头拍照方法及移动终端
CN111127303A (zh) 背景虚化方法、装置、终端设备及计算机可读存储介质
CN110097506B (zh) 图像处理方法及装置、图像设备及存储介质
CN112215906A (zh) 图像处理方法、装置和电子设备
US10657624B2 (en) Image synthesis method for synthesizing images taken by cameras on opposite sides and smart device using the same
TWI622018B (zh) 影片編輯方法、裝置及系統
CN111260574B (zh) 一种印章照片矫正的方法、终端及计算机可读存储介质
CN116403226A (zh) 无约束褶皱文档图像矫正方法、系统、设备及存储介质
JP3983623B2 (ja) 画像合成装置、画像合成方法、画像合成プログラム、および画像合成プログラムを記録した記録媒体
CN116342445A (zh) 一种可见光图像与红外图像融合的方法及系统
CN115908120A (zh) 图像处理方法和电子设备
CN110089103B (zh) 一种去马赛克方法及装置
CN116264612A (zh) 投影校正方法、装置、电子设备及存储介质
CN107633498B (zh) 图像暗态增强方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant