CN113205452A - 一种图像处理方法、装置、电子设备及存储介质 - Google Patents
一种图像处理方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN113205452A CN113205452A CN202110348474.5A CN202110348474A CN113205452A CN 113205452 A CN113205452 A CN 113205452A CN 202110348474 A CN202110348474 A CN 202110348474A CN 113205452 A CN113205452 A CN 113205452A
- Authority
- CN
- China
- Prior art keywords
- image
- processed
- resolution
- images
- image processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 29
- 238000012545 processing Methods 0.000 claims abstract description 114
- 239000012634 fragment Substances 0.000 claims abstract description 47
- 238000000034 method Methods 0.000 claims abstract description 26
- 230000006835 compression Effects 0.000 abstract description 4
- 238000007906 compression Methods 0.000 abstract description 4
- 230000015556 catabolic process Effects 0.000 abstract description 2
- 238000006731 degradation reaction Methods 0.000 abstract description 2
- 230000006870 function Effects 0.000 description 13
- 238000001514 detection method Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 9
- 238000004891 communication Methods 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000004590 computer program Methods 0.000 description 4
- 230000003796 beauty Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 238000013467 fragmentation Methods 0.000 description 1
- 238000006062 fragmentation reaction Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4053—Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Processing (AREA)
Abstract
本公开关于一种图像处理方法、装置、电子设备及存储介质，该方法包括：获取待处理图像；确定待处理图像的分辨率；在待处理图像的分辨率超过预设分辨率时，对待处理图像进行分片处理得到多个分片图像；该多个分片图像中每个分片图像的分辨率小于预设分辨率；对各分片图像进行图像处理；对处理后的多个分片图像进行拼接，得到目标图像。本公开避免了在图像处理过程中因压缩原始图像分辨率导致的处理后图像的分辨率和画质显著下降的问题。
Description
技术领域
本公开涉及图像处理技术领域，尤其涉及一种图像处理方法、装置、电子设备及存储介质。
背景技术
随着图像处理技术的发展，越来越多的移动端应用程序提供了拍照和修图等图像处理功能，用户基于应用程序的该图像处理功能可以对图像的显示效果进行美化。
然而受限于移动端设备的运算能力和内存，相关技术中对于分辨率较大的原始图像如大于4K分辨率的原始图像需要先压缩到4K分辨率以下后才能进行图像处理，从而导致处理后图像的分辨率和画质显著下降。
发明内容
本公开提供一种图像处理方法、装置、电子设备及存储介质，以至少解决相关技术在图像处理过程中因压缩原始图像分辨率导致处理后图像的分辨率和画质显著下降的问题。本公开的技术方案如下：
根据本公开实施例的第一方面，提供一种图像处理方法，包括：
获取待处理图像；
确定所述待处理图像的分辨率；
在所述待处理图像的分辨率超过预设分辨率时，对所述待处理图像进行分片处理得到多个分片图像；所述多个分片图像中每个分片图像的分辨率小于所述预设分辨率；
对各所述分片图像进行图像处理；
对处理后的所述多个分片图像进行拼接，得到目标图像。
在一个示例性的实施方式中，所述方法还包括：
在对所述待处理图像进行分片处理时，记录每个所述分片图像在所述待处理图像中的位置信息；
所述对处理后的所述多个分片图像进行拼接包括：
根据每个所述分片图像在所述待处理图像中的位置信息，对处理后的所述多个分片图像进行拼接。
在一个示例性的实施方式中，所述对所述待处理图像进行分片处理得到多个分片图像包括：
根据参考分辨率对所述待处理图像进行分片处理，得到多个分片图像；所述参考分辨率小于所述预设分辨率。
在一个示例性的实施方式中，所述多个分片图像中的相邻两个分片图像之间存在宽度为预设像素值的重叠区域；
所述对处理后的所述多个分片图像进行拼接，得到目标图像包括：
对每个所述处理后的分片图像中的所述重叠区域进行裁剪，得到裁剪分片图像；所述裁剪分片图像为从所述处理后的分片图像中裁剪掉所述重叠区域后剩下的图像；
对多个所述裁剪分片图像进行拼接，得到目标图像。
在一个示例性的实施方式中，所述对各所述分片图像进行图像处理包括：
获取待处理图像中的关键点信息，所述关键点信息包括关键点以及所述关键点的原始坐标，所述原始坐标表征所述关键点在所述待处理图像中的位置；
将所述关键点的原始坐标转换为分片坐标；所述分片坐标表征所述关键点在各所述分片图像中的位置；
根据所述关键点和所述关键点的分片坐标，对各所述分片图像进行图像处理。
在一个示例性的实施方式中，所述待处理图像包括人脸图像，所述关键点包括人脸关键点。
在一个示例性的实施方式中，所述图像处理包括所述对所述分片图像的图像内容进行调整。
在一个示例性的实施方式中，所述方法还包括：
确定获取所述待处理图像的电子设备的运行内存信息；
根据所述运行内存信息，确定所述预设分辨率。
根据本公开实施例的第二方面，提供一种图像处理装置，包括：
图像获取单元，被配置为执行获取待处理图像；
分辨率确定单元，被配置为执行确定所述待处理图像的分辨率；
分片单元，被配置为执行在所述待处理图像的分辨率超过预设分辨率时，对所述待处理图像进行分片处理得到多个分片图像；所述多个分片图像中每个分片图像的分辨率小于所述预设分辨率；
处理单元，被配置为执行对各所述分片图像进行图像处理；
拼接单元，被配置为执行对处理后的所述多个分片图像进行拼接，得到目标图像。
在一个示例性的实施方式中，所述装置还包括：
记录单元，被配置为执行在对所述待处理图像进行分片处理时，记录每个所述分片图像在所述待处理图像中的位置信息；
所述拼接单元，具体被配置为执行根据每个所述分片图像在所述待处理图像中的位置信息，对处理后的所述多个分片图像进行拼接。
在一个示例性的实施方式中，所述分片单元包括：
分片子单元，被配置为执行根据参考分辨率对所述待处理图像进行分片处理，得到多个分片图像；所述参考分辨率小于所述预设分辨率。
在一个示例性的实施方式中，所述多个分片图像中的相邻两个分片图像之间存在宽度为预设像素值的重叠区域；
所述拼接单元包括：
裁剪单元，被配置为执行对每个所述处理后的分片图像中的所述重叠区域进行裁剪，得到裁剪分片图像；所述裁剪分片图像为从所述处理后的分片图像中裁剪掉所述重叠区域后剩下的图像；
拼接子单元，被配置为执行对多个所述裁剪分片图像进行拼接，得到目标图像。
在一个示例性的实施方式中，所述处理单元包括：
关键点信息获取单元，被配置为执行获取待处理图像中的关键点信息，所述关键点信息包括关键点以及所述关键点的原始坐标，所述原始坐标表征所述关键点在所述待处理图像中的位置；
坐标转换单元，被配置为执行将所述关键点的原始坐标转换为分片坐标；所述分片坐标表征所述关键点在各所述分片图像中的位置；
处理子单元，被配置为执行根据所述关键点和所述关键点的分片坐标，对各所述分片图像进行图像处理。
在一个示例性的实施方式中，所述待处理图像包括人脸图像，所述关键点包括人脸关键点。
在一个示例性的实施方式中，所述图像处理包括对所述分片图像的图像内容进行调整。
在一个示例性的实施方式中，所述装置还包括：
内存信息确定单元，被配置为执行确定获取所述待处理图像的电子设备的运行内存信息；
预设分辨率确定单元，被配置为执行根据所述运行内存信息，确定所述预设分辨率。
根据本公开实施例的第三方面，提供一种电子设备，包括：
处理器；
用于存储所述处理器可执行指令的存储器；
其中，所述处理器被配置为执行所述指令，以实现上述第一方面的图像处理方法。
根据本公开实施例的第四方面，提供一种计算机可读存储介质，当所述计算机可读存储介质中的指令由电子设备的处理器执行时，使得电子设备能够执行上述第一方面的图像处理方法。
根据本公开实施例的第五方面，提供一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现上述第一方面的图像处理方法。
本公开的实施例提供的技术方案至少带来以下有益效果：
通过将分辨率超过预设分辨率的待处理图像进行分片处理，得到分辨率小于预设分辨率的多个分片图像，进而对各分片图像进行图像处理，并将处理后的多个分片图像进行拼接得到目标图像，从而在实现对较大分辨率(如大于4K分辨率)图像处理的同时确保了处理后图像具有与原始图像相当的分辨率和画质，避免了在图像处理过程中因压缩原始图像分辨率导致处理后图像的分辨率和画质显著下降的问题。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理，并不构成对本公开的不当限定。
图1是根据一示例性实施例示出的一种图像处理方法的应用环境示意图；
图2是根据一示例性实施例示出的一种图像处理方法的流程图；
图3是根据一示例性实施例示出的另一种图像处理方法的流程图；
图4是根据一示例性实施例示出的另一种图像处理方法的流程图；
图5是根据一示例性实施例示出的对各分片图像进行图像处理的流程图；
图6是根据一示例性实施例示出的分片坐标系的一个示例；
图7是根据一示例性实施例示出的一种图像处理装置的框图；
图8是根据一示例性实施例示出的一种电子设备的框图。
具体实施方式
为了使本领域普通人员更好地理解本公开的技术方案，下面将结合附图，对本公开实施例中的技术方案进行清楚、完整地描述。
需要说明的是，本公开的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本公开的实施例能够以除了在这里图示或描述的那些以外的顺序实施。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
请参阅图1，其所示为根据一示例性实施例示出的一种图像处理方法的应用环境示意图，该应用环境可以包括终端110和服务器120，该终端110和服务器120之间可以通过有线网络或者无线网络连接。
终端110可以是智能手机、平板电脑、笔记本电脑、台式计算机等，但并不局限于此。终端110中可以安装有提供图像处理功能的客户端软件如应用程序(Application，简称为App)，该应用程序可以是专门提供图像处理的应用程序如修图应用程序，也可以是具有图像处理功能的其他应用程序，例如具有图像处理功能的直播应用程序等等。终端110的用户可以通过预先注册的用户信息登录应用程序，该用户信息可以包括账号和密码。
服务器120可以是为终端110中的应用程序提供后台服务的服务器，也可以是与应用程序的后台服务器连接通信的其它服务器，可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器。
本公开实施例的图像处理方法可以由电子设备来执行，该电子设备可以是终端或者服务器，可以由终端或者服务器单独执行，也可以是终端和服务器相互配合执行。
图2是根据一示例性实施例示出的一种图像处理方法的流程图，如图2所示，以图像处理方法应用于图1的终端为例，包括以下步骤。
在步骤S201中，获取待处理图像。
具体的，待处理图像可以是终端用户从本地图像库中选取的图像，也可以是终端用户从本地视频库中选取的视频中的一帧图像。可以理解的，待处理图像还可以是终端摄像装置实时采集的图像，该实时采集的图像可以是录制视频中的一帧图像，也可以是直接拍摄的图像。
在步骤S203中，确定所述待处理图像的分辨率。
在步骤S205中，判断所述待处理图像的分辨率是否超过预设分辨率。
其中，预设分辨率不超过当前终端能够处理的图像分辨率的上限，实际应用中，该预设分辨率可以是与终端配置相对应的一个固定的分辨率，例如，配置较高的终端，该预设分辨率可以是4K分辨率，而对于配置较低的终端，该预设分辨率可以是2K分辨率。
4K分辨率是指水平方向每行像素值达到或者接近4096个，不考虑画幅比。而根据使用范围的不同，4096*3112、3656*2664以及标准的3840*2160等，都属于4K分辨率的范畴。2K分辨率是指屏幕或者内容的水平分辨率达到约2048像素。
基于此，在一个示例性的实施方式中，如图3提供的另一种图像处理方法的流程图，在步骤S205之前，该方法还可以包括：
在步骤S301中，确定获取所述待处理图像的电子设备的运行内存信息。
在步骤S303中，根据所述运行内存信息，确定所述预设分辨率。
具体的，可以根据运行内存信息与预设分辨率的对应关系，确定当前电子设备的运行内存信息所对应的预设分辨率，从而可以提高预设分辨率与电子设备的匹配性，有利于提高图像处理效果。示例性的，对于较高的运行内存信息可以对应4K分辨率，对于较低的运行内存信息可以对应2K分辨率。
本公开实施例在确定待处理图像的分辨率后，判断该分辨率是否超过预设分辨率，若待处理图像的分辨率超过了预设分辨率即大于或者等于预设分辨率，则可以执行步骤S207；反之，若待处理图像的分辨率小于预设分辨率，则表明当前终端可以在不压缩该待处理图像的基础上对该待处理图像进行处理，且处理后图像的分辨率和画质不受影响，因此，此时可以按照现有技术中的图像处理方式对该待处理图像进行处理。
在步骤S207中，对所述待处理图像进行分片处理得到多个分片图像；所述多个分片图像中每个分片图像的分辨率小于所述预设分辨率。
具体的，多个分片图像中各分片图像的分辨率可以相同，也可以不相同，只要确保各分片图像的分辨率小于预设分辨率即可。为了提高图像处理的效率，本公开实施例优选的多个分片图像中各分片图像的分辨率相同。
基于此，在对待处理图像进行分片处理时，可以根据小于预设分辨率的参考分辨率对待处理图像进行分片处理得到多个分片图像，该多个分片图像的分辨率相同即均为参考分辨率。其中，参考分辨率可以根据实际经验来设定，例如参考分辨率可以设定1024*1024像素，如此，对待处理图像分片处理后可以得到多个分辨率均为1024*1024的分片图像。
在步骤S209中，对各所述分片图像进行图像处理。
具体的，分别对多个分片图像中的每个分片图像进行图像处理。
在一个示例性的实施方式中，对分片图像进行的图像处理可以是对分片图像的图像内容进行调整。实际应用中，终端可以检测对待处理图像的图像处理指令，在检测到图像处理指令时，可以确定该图像处理指令对应的待调整图像内容以及该待调整图像内容的调整参数，进而针对多个分片图像中的每个分片图像，可以根据调整参数对该分片图像中的待调整内容进行调整。示例性的，待调整图像内容可以包括颜色、平滑度、亮度等等。
在步骤S211中，对处理后的所述多个分片图像进行拼接，得到目标图像。
在一个示例性的实施方式中，为了提高拼接效率和拼接的准确性，在对待处理图像进行分片处理时，还可以记录每个所述分片图像在所述待处理图像中的位置信息，进而在对处理后的多个分片图像进行拼接时，可以根据每个所述分片图像在所述待处理图像中的位置信息，对处理后的所述多个分片图像进行拼接。其中，每个分片图像在待处理图像中的位置信息可以包括该分片图像的左上角在待处理图像中的坐标信息以及所述分片图像的宽度和高度。多个处理后的分片图像与多个分片图像一一对应，也即多个分片图像在待处理图像中的位置信息可以作为多个处理后的分片图像的位置信息，那么基于该位置信息可以确定各处理后的分片图像之间的邻接关系，进而可以基于该邻接关系进行拼接后即可以还原为原始大小的目标图像，且该目标图像中的图像内容已按照图像处理指令进行了调整。
本公开实施例通过将分辨率超过预设分辨率的待处理图像进行分片处理，得到分辨率小于预设分辨率的多个分片图像，进而对各分片图像中进行图像处理，并将处理后的多个分片图像进行拼接得到目标图像，从而在实现对较大分辨率(如大于4K分辨率)图像处理的同时确保了处理后图像具有与原始图像相当的分辨率和画质，避免了在图像处理过程中因压缩原始图像分辨率导致处理后图像的分辨率和画质显著下降的问题。
实际应用中，为了避免在拼接的目标图像中出现明显的分片边界即黑边，在一个示例性的实施方式中，如图4提供的另一种图像处理方法的流程图，上述步骤S207在对待处理图像进行分片处理得到多个分片图像时，可以如步骤S401中，对待处理图像进行分片处理得到多个分片图像，该多个分片图像中的相邻两个分片图像之间存在宽度为预设像素值的重叠区域，且该多个分片图像中每个分片图像的分辨率小于预设分辨率。
具体的，重叠区域的宽度对应的预设像素值可以根据实际应用中出现黑边的经验来设定，以使得在重叠区域的宽度为预设像素值时，多个分片图像拼接后不会出现黑边。示例性的，该预设像素值可以是24像素。
基于此，继续参阅图4，上述步骤S211在对处理后的所述多个分片图像进行拼接时，可以包括：
在步骤S403中，对每个所述处理后的分片图像中的所述重叠区域进行裁剪，得到裁剪分片图像。
其中，所述裁剪分片图像为从所述处理后的分片图像中裁剪掉所述重叠区域后剩下的图像。
在步骤S405中，对多个所述裁剪分片图像进行拼接，得到目标图像。
具体的，可以根据分片处理时记录的所述多个分片图像在所述待处理图像中的位置信息，对多个所述裁剪分片图像进行拼接。
本公开实施例在对待处理图像进行分片处理时通过将相邻两个分片图像之间保持预设像素值的重叠区域并在对处理后的分片图像进行拼接时将该重叠区域裁剪掉，从而可以避免了在拼接的目标图像中出现明显的分片边界，确保了目标图像的画质。
在一个示例性的实施方式中，在对各所述分片图像进行图像处理时可以采用图5所示的方法，包括以下步骤：
在步骤S501中，获取待处理图像中的关键点信息，所述关键点信息包括关键点以及所述关键点的原始坐标。
其中，所述原始坐标表征所述关键点在所述待处理图像中的位置。关键点为待处理图像中的主要特征点。
在一个示例性的实施方式中，本公开实施例的图像处理方法可以用于对人脸图像的美颜处理，则该场景下的待处理图像即为人脸图像，而待处理图像中的关键点为人脸关键点，该人脸关键点可以是表征人脸的特征点，通过人脸关键点基本可以确定人脸轮廓的形状、位置，人脸五官及毛发的形状、位置等等。
具体的，可以利用预先训练好的关键点检测模型对待处理图像进行关键点检测以得到输出的关键点以及各关键点在待处理图像中的坐标。其中，关键点检测模型可以但不限于包括深度残差神经网络ResNet模型。
实际应用中，为了匹配关键点检测模型的输入需求，可以先对待处理图像进行下采样处理，然后将下采样后的待处理图图像输入到关键点检测模型中进行关键点检测。示例性的，关键点检测模型的输入图像的分辨率可以为540PPI。
在步骤S503中，将所述关键点的原始坐标转换为分片坐标。
其中，所述分片坐标表征所述关键点在各所述分片图像中的位置，也即将关键点的原始坐标转换到各分片图像的分片坐标系下，从而可以得到关键点在各分片图像中的位置信息即分片坐标。
实际应用中，可以先以待处理图像左上角为原点(0,0)建立原始坐标系，然后根据各分片图像在待处理图像中的位置确定每个分片图像左上角在上述原始坐标系中的坐标(Xleft,Yleft)，进而针对每个分片图像，以该分片图像左上角的坐标(Xleft,Yleft)为原点建立该分片图像对应的分片坐标系。之后针对每个分片坐标系，可以计算每个关键点的原始坐标与该分片坐标系的原点坐标的差值，该差值即为该关键点在该分片坐标系对应的分片图像中的分片坐标。比如，关键点的原始坐标为(X0,Y0)，分片坐标系的原点坐标为(Xleft,Yleft)，则该关键点在该分片坐标系下的分片坐标为(X0-Xleft,Y0-Yleft)。
举例而言，如图6所示是分辨率为300*300的待处理图像，其中示例性的分片图像1、分片图像2和分片图像3是按照100*100的分辨率对该待处理图像进行分片处理得到的，则分片图像1对应的分片坐标系1的原点坐标为(0,0)，分片图像2对应的分片坐标系2的原点坐标为(100,0)，分片图像3对应的分片坐标系3的原点坐标为(200,0)。假设待处理图像的中心点为一个关键点，该关键点的原始坐标为(150,150)，则该原始坐标转换到分片坐标系1后为(150,150)，该原始坐标转换到分片坐标系2后为(50,150)，该原始坐标转换到分片坐标系3后为(-50,150)。以此类推，可以将待处理图像中的所有关键点的原始坐标转换到各分片坐标系下，从而得到关键点在各分片坐标系下的分片坐标。
在步骤S505中，根据所述关键点和所述关键点的分片坐标，对各所述分片图像进行图像处理。
示例性的，在针对人脸图像的美颜处理场景下，可以在检测到针对人脸的美颜指令时，确定该美颜指令对应的目标图像内容，例如脸部肤色、脸部平滑度等等，然后根据人脸关键点和人脸关键点的分片坐标，按照检测到的调整参数对各分片图像中的目标图像内容进行调整，其中，调整参数用于指示对目标图像内容调整的幅度。
为了提高图像处理的效率，在一个示例性的实施方式中，可以由终端和服务器配合来实施本公开实施例的图像处理方法，具体的：
终端获取待处理图像，确定待处理图像的分辨率；在待处理图像的分辨率超过预设分辨率时，对待处理图像进行分片处理得到多个分片图像，并记录所述多个分片图像在所述待处理图像中的位置信息；将待处理图像和多个分片图像在所述待处理图像中的位置信息发送给服务器；
服务器接收待处理图像和多个分片图像在所述待处理图像中的位置信息；确定待处理图像中的关键点以及关键点的原始坐标；将关键点的原始坐标转换为分片坐标，然后将关键点以及关键点的分片坐标发送给终端。
终端检测针对待处理图像的图像处理指令，在检测到图像处理指令时，根据上述关键点以及关键点的分片坐标对各分片图像分别进行相应的图像处理，并对处理后的多个分片图像进行拼接得到目标图像，从而输出该目标图像。
本公开实施例通过将分辨率超过预设分辨率的人脸图像分片处理成多个分片图像，然后对各分片图像分别进行图像处理，并对处理后的分片图像进行拼接，在实现图像处理的同时又不会造成分辨率和画质的损失，解决了移动端图像处理如修图类应用程序不能处理大于4K分辨率的图片或者处理大于4K分辨率的图片时会造成画质降低的问题。另外，本公开实施例由于是对各分片图像分别进行图像处理，从而还能显著降低图像处理时对内存的占用和显存峰值。
图7是根据一示例性实施例示出的一种图像处理装置的框图。参照图7，该图像处理装置700包括图像获取单元710、分辨率确定单元720、分片单元730、处理单元740和拼接单元750，其中：
图像获取单元710，被配置为执行获取待处理图像；
分辨率确定单元720，被配置为执行确定所述待处理图像的分辨率；
分片单元730，被配置为执行在所述待处理图像的分辨率超过预设分辨率时，对所述待处理图像进行分片处理得到多个分片图像；所述多个分片图像中每个分片图像的分辨率小于所述预设分辨率；
处理单元740，被配置为执行对各所述分片图像进行图像处理；
拼接单元750，被配置为执行对处理后的所述多个分片图像进行拼接，得到目标图像。
在一个示例性的实施方式中，
在一个示例性的实施方式中，所述装置700还包括：
记录单元，被配置为执行在对所述待处理图像进行分片处理时，记录每个所述分片图像在所述待处理图像中的位置信息；
所述拼接单元，具体被配置为执行根据每个所述分片图像在所述待处理图像中的位置信息，对处理后的所述多个分片图像进行拼接。
在一个示例性的实施方式中，所述分片单元730包括：
分片子单元，被配置为执行根据参考分辨率对所述待处理图像进行分片处理，得到多个分片图像；所述参考分辨率小于所述预设分辨率。
在一个示例性的实施方式中，所述多个分片图像中的相邻两个分片图像之间存在宽度为预设像素值的重叠区域；
所述拼接单元750包括：
裁剪单元，被配置为执行对每个所述处理后的分片图像中的所述重叠区域进行裁剪，得到裁剪分片图像；所述裁剪分片图像为从所述处理后的分片图像中裁剪掉所述重叠区域后剩下的图像；
拼接子单元，被配置为执行对多个所述裁剪分片图像进行拼接，得到目标图像。
在一个示例性的实施方式中，所述处理单元740包括：
关键点信息获取单元，被配置为执行获取待处理图像中的关键点信息，所述关键点信息包括关键点以及所述关键点的原始坐标，所述原始坐标表征所述关键点在所述待处理图像中的位置；
坐标转换单元，被配置为执行将所述关键点的原始坐标转换为分片坐标；所述分片坐标表征所述关键点在各所述分片图像中的位置；
处理子单元，被配置为执行根据所述关键点和所述关键点的分片坐标，对各所述分片图像进行图像处理。
在一个示例性的实施方式中，所述待处理图像包括人脸图像，所述关键点包括人脸关键点。
在一个示例性的实施方式中，所述图像处理包括对所述分片图像的图像内容进行调整。
在一个示例性的实施方式中，所述装置700还包括：
内存信息确定单元，被配置为执行确定获取所述待处理图像的电子设备的运行内存信息；
预设分辨率确定单元，被配置为执行根据所述运行内存信息，确定所述预设分辨率。
关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
本公开实施例的图像处理装置通过将分辨率超过预设分辨率的待处理图像进行分片处理，得到分辨率小于预设分辨率的多个分片图像，进而对各分片图像进行图像处理，并将处理后的多个分片图像进行拼接得到目标图像，从而在实现对较大分辨率(如大于4K分辨率)图像处理的同时确保了处理后图像具有与原始图像相当的分辨率和画质，避免了在图像处理过程中因压缩原始图像分辨率导致处理后图像的分辨率和画质显著下降的问题。
在一个示例性的实施方式中，还提供了一种电子设备，包括处理器；用于存储处理器可执行指令的存储器；其中，处理器被配置为执行存储器上所存放的指令时，实现本公开实施例提供的任意一种图像处理方法。
该电子设备可以是终端、服务器或者类似的运算装置，以该电子设备是终端为例，图8是根据一示例性实施例示出的一种用于图像处理的电子设备的框图，具体来讲：
所述终端可以包括RF(Radio Frequency，射频)电路810、包括有一个或一个以上计算机可读存储介质的存储器820、输入单元830、显示单元840、传感器850、音频电路860、WiFi(wireless fidelity，无线保真)模块870、包括有一个或者一个以上处理核心的处理器880、以及电源890等部件。本领域技术人员可以理解，图8中示出的终端结构并不构成对终端的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。其中：
RF电路810可用于收发信息或通话过程中，信号的接收和发送，特别地，将基站的下行信息接收后，交由一个或者一个以上处理器880处理；另外，将涉及上行的数据发送给基站。通常，RF电路810包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块(SIM)卡、收发信机、耦合器、LNA(Low Noise Amplifier，低噪声放大器)、双工器等。此外，RF电路810还可以通过无线通信与网络和其他终端通信。所述无线通信可以使用任一通信标准或协议，包括但不限于GSM(Global System of Mobile communication，全球移动通讯系统)、GPRS(General Packet Radio Service，通用分组无线服务)、CDMA(CodeDivision Multiple Access，码分多址)、WCDMA(Wideband Code Division MultipleAccess,宽带码分多址)、LTE(Long Term Evolution,长期演进)、电子邮件、SMS(ShortMessaging Service，短消息服务)等。
存储器820可用于存储软件程序以及模块，处理器880通过运行存储在存储器820的软件程序以及模块，从而执行各种功能应用以及数据处理。存储器820可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、功能所需的应用程序等；存储数据区可存储根据所述终端的使用所创建的数据等。此外，存储器820可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器820还可以包括存储器控制器，以提供处理器880和输入单元830对存储器820的访问。
输入单元830可用于接收输入的数字或字符信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地，输入单元830可包括触敏表面831以及其他输入设备832。触敏表面831，也称为触摸显示屏或者触控板，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触敏表面831上或在触敏表面831附近的操作)，并根据预先设定的程式驱动相应的连接装置。可选的，触敏表面831可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器880，并能接收处理器880发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触敏表面831。除了触敏表面831，输入单元830还可以包括其他输入设备832。具体地，其他输入设备832可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示单元840可用于显示由用户输入的信息或提供给用户的信息以及所述终端的各种图形用户接口，这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元840可包括显示面板841，可选的，可以采用LCD(Liquid Crystal Display，液晶显示器)、OLED(Organic Light-Emitting Diode,有机发光二极管)等形式来配置显示面板841。进一步的，触敏表面831可覆盖显示面板841，当触敏表面831检测到在其上或附近的触摸操作后，传送给处理器880以确定触摸事件的类型，随后处理器880根据触摸事件的类型在显示面板841上提供相应的视觉输出。其中，触敏表面831与显示面板841可以两个独立的部件来实现输入和输入功能，但是在某些实施例中，也可以将触敏表面831与显示面板841集成而实现输入和输出功能。
所述终端还可包括至少一种传感器850，比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板841的亮度，接近传感器可在所述终端移动到耳边时，关闭显示面板841和/或背光。作为运动传感器的一种，重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别终端姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；至于所述终端还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。
音频电路860、扬声器861，传声器862可提供用户与所述终端之间的音频接口。音频电路860可将接收到的音频数据转换后的电信号，传输到扬声器861，由扬声器861转换为声音信号输出；另一方面，传声器862将收集的声音信号转换为电信号，由音频电路860接收后转换为音频数据，再将音频数据输出处理器880处理后，经RF电路810以发送给比如另一终端，或者将音频数据输出至存储器820以便进一步处理。音频电路860还可能包括耳塞插孔，以提供外设耳机与所述终端的通信。
WiFi属于短距离无线传输技术，所述终端通过WiFi模块870可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图8示出了WiFi模块870，但是可以理解的是，其并不属于所述终端的必须构成，完全可以根据需要在不改变发明的本质的范围内而省略。
处理器880是所述终端的控制中心，利用各种接口和线路连接整个终端的各个部分，通过运行或执行存储在存储器820内的软件程序和/或模块，以及调用存储在存储器820内的数据，执行所述终端的各种功能和处理数据，从而对终端进行整体监控。可选的，处理器880可包括一个或多个处理核心；优选的，处理器880可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器880中。
所述终端还包括给各个部件供电的电源890(比如电池)，优选的，电源可以通过电源管理系统与处理器880逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源890还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
尽管未示出，所述终端还可以包括摄像头、蓝牙模块等，在此不再赘述。具体在本实施例中，终端还包括有存储器，以及一个或者一个以上的程序，其中一个或者一个以上程序存储于存储器中，且经配置以由一个或者一个以上处理器执行。上述一个或者一个以上程序包含用于执行上述方法实施例提供的任意一种图像处理方法的指令。
在一个示例性的实施方式中，还提供了一种包括指令的计算机可读存储介质，例如包括指令的存储器820，上述指令可由装置800的处理器880执行以完成上述方法。可选地，计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
在一个示例性的实施方式中，还提供了一种计算机程序产品，包括计算机程序，所述计算机程序被处理器执行时实现本公开实施例提供的任意一种图像处理方法。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。
应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。
Claims (10)
1.一种图像处理方法，其特征在于，包括：
获取待处理图像；
确定所述待处理图像的分辨率；
在所述待处理图像的分辨率超过预设分辨率时，对所述待处理图像进行分片处理得到多个分片图像；所述多个分片图像中每个分片图像的分辨率小于所述预设分辨率；
对各所述分片图像进行图像处理；
对处理后的所述多个分片图像进行拼接，得到目标图像。
2.根据权利要求1所述的图像处理方法，其特征在于，所述方法还包括：
在对所述待处理图像进行分片处理时，记录每个所述分片图像在所述待处理图像中的位置信息；
所述对处理后的所述多个分片图像进行拼接包括：
根据每个所述分片图像在所述待处理图像中的位置信息，对处理后的所述多个分片图像进行拼接。
3.根据权利要求1或2所述的图像处理方法，其特征在于，所述对所述待处理图像进行分片处理得到多个分片图像包括：
根据参考分辨率对所述待处理图像进行分片处理，得到多个分片图像；所述参考分辨率小于所述预设分辨率。
4.根据权利要求1或2所述的图像处理方法，其特征在于，所述多个分片图像中的相邻两个分片图像之间存在宽度为预设像素值的重叠区域；
所述对处理后的所述多个分片图像进行拼接，得到目标图像包括：
对每个所述处理后的分片图像中的所述重叠区域进行裁剪，得到裁剪分片图像；所述裁剪分片图像为从所述处理后的分片图像中裁剪掉所述重叠区域后剩下的图像；
对多个所述裁剪分片图像进行拼接，得到目标图像。
5.根据权利要求1所述的图像处理方法，其特征在于，所述对各所述分片图像进行图像处理包括：
获取待处理图像中的关键点信息，所述关键点信息包括关键点以及所述关键点的原始坐标，所述原始坐标表征所述关键点在所述待处理图像中的位置；
将所述关键点的原始坐标转换为分片坐标；所述分片坐标表征所述关键点在各所述分片图像中的位置；
根据所述关键点和所述关键点的分片坐标，对各所述分片图像进行图像处理。
6.根据权利要求5所述的图像处理方法，其特征在于，所述待处理图像包括人脸图像，所述关键点包括人脸关键点。
7.根据权利要求1所述的图像处理方法，其特征在于，所述方法还包括：
确定获取所述待处理图像的电子设备的运行内存信息；
根据所述运行内存信息，确定所述预设分辨率。
8.一种图像处理装置，其特征在于，包括：
图像获取单元，被配置为执行获取待处理图像；
分辨率确定单元，被配置为执行确定所述待处理图像的分辨率；
分片单元，被配置为执行在所述待处理图像的分辨率超过预设分辨率时，对所述待处理图像进行分片处理得到多个分片图像；所述多个分片图像中每个分片图像的分辨率小于所述预设分辨率；
处理单元，被配置为执行对各所述分片图像进行图像处理；
拼接单元，被配置为执行对处理后的所述多个分片图像进行拼接，得到目标图像。
9.一种电子设备，其特征在于，包括：
处理器；
用于存储所述处理器可执行指令的存储器；
其中，所述处理器被配置为执行所述指令，以实现如权利要求1至7中任一项所述的图像处理方法。
10.一种计算机可读存储介质，当所述计算机可读存储介质中的指令由电子设备的处理器执行时，使得电子设备能够执行如权利要求1至7中任一项所述的图像处理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110348474.5A CN113205452A (zh) | 2021-03-31 | 2021-03-31 | 一种图像处理方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110348474.5A CN113205452A (zh) | 2021-03-31 | 2021-03-31 | 一种图像处理方法、装置、电子设备及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113205452A true CN113205452A (zh) | 2021-08-03 |
Family
ID=77025879
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110348474.5A Pending CN113205452A (zh) | 2021-03-31 | 2021-03-31 | 一种图像处理方法、装置、电子设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113205452A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115100049A (zh) * | 2022-06-14 | 2022-09-23 | 广东源兴诡谷子光学智能科技有限公司 | 一种用于拼接图像畸变校正的图像校正方法和装置 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104077103A (zh) * | 2014-07-09 | 2014-10-01 | 上海天奕达电子科技有限公司 | 一种低分辨率平台支持高分辨率显示装置的方法和装置 |
| CN104410857A (zh) * | 2014-12-26 | 2015-03-11 | 广东威创视讯科技股份有限公司 | 一种图像显示控制方法及相关设备 |
| CN108055578A (zh) * | 2017-12-08 | 2018-05-18 | 北京淳中科技股份有限公司 | 一种图像处理方法、装置及视频信号拼接处理器 |
| CN112073647A (zh) * | 2019-06-10 | 2020-12-11 | 杭州海康威视数字技术股份有限公司 | 图像缩放显示方法、图像处理设备及显示系统 |
-
2021
- 2021-03-31 CN CN202110348474.5A patent/CN113205452A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104077103A (zh) * | 2014-07-09 | 2014-10-01 | 上海天奕达电子科技有限公司 | 一种低分辨率平台支持高分辨率显示装置的方法和装置 |
| CN104410857A (zh) * | 2014-12-26 | 2015-03-11 | 广东威创视讯科技股份有限公司 | 一种图像显示控制方法及相关设备 |
| CN108055578A (zh) * | 2017-12-08 | 2018-05-18 | 北京淳中科技股份有限公司 | 一种图像处理方法、装置及视频信号拼接处理器 |
| CN112073647A (zh) * | 2019-06-10 | 2020-12-11 | 杭州海康威视数字技术股份有限公司 | 图像缩放显示方法、图像处理设备及显示系统 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115100049A (zh) * | 2022-06-14 | 2022-09-23 | 广东源兴诡谷子光学智能科技有限公司 | 一种用于拼接图像畸变校正的图像校正方法和装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107038681B (zh) | 图像虚化方法、装置、计算机可读存储介质和计算机设备 | |
| EP3525417A1 (en) | Data processing method, device, storage medium, electronic device and server | |
| CN109461117B (zh) | 一种图像处理方法及移动终端 | |
| CN105989572B (zh) | 图片处理方法及装置 | |
| CN107886321B (zh) | 一种支付方法及移动终端 | |
| CN108418969B (zh) | 天线馈点的切换方法、装置、存储介质和电子设备 | |
| WO2015100913A1 (zh) | 图像缩略图的生成方法、装置和终端 | |
| CN108495349B (zh) | 一种运营商网络的切换方法及移动终端 | |
| EP4131067A1 (en) | Detection result output method, electronic device, and medium | |
| CN111966254B (zh) | 一种图像拍摄方法、装置、存储介质及终端 | |
| CN111949239B (zh) | 一种屏幕共享方法、装置、存储介质及终端 | |
| CN106101764A (zh) | 一种显示视频数据的方法、装置和系统 | |
| CN105898561B (zh) | 一种视频图像处理方法和装置 | |
| CN109495769B (zh) | 视频通信方法、终端、智能电视、服务器及存储介质 | |
| CN106302603A (zh) | 远程删除信息的方法和装置 | |
| CN108762641B (zh) | 一种文本编辑方法及终端设备 | |
| CN113205452A (zh) | 一种图像处理方法、装置、电子设备及存储介质 | |
| CN113469923B (zh) | 一种图像处理方法、装置、电子设备及存储介质 | |
| CN105991510A (zh) | 一种多终端间会话同步方法、装置和系统 | |
| CN111343335B (zh) | 图像显示处理方法、系统、存储介质及移动终端 | |
| CN111986207B (zh) | 一种图片裁切方法及终端 | |
| CN114140655A (zh) | 图像分类方法、装置、存储介质及电子设备 | |
| CN107832031B (zh) | 一种显示方法和装置 | |
| CN113852751A (zh) | 图像处理方法、装置、终端和存储介质 | |
| CN111046215A (zh) | 一种图像处理方法、装置、存储介质及移动终端 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |