CN106897979A - 图像处理方法及系统、电子设备 - Google Patents
图像处理方法及系统、电子设备 Download PDFInfo
- Publication number
- CN106897979A CN106897979A CN201710212044.4A CN201710212044A CN106897979A CN 106897979 A CN106897979 A CN 106897979A CN 201710212044 A CN201710212044 A CN 201710212044A CN 106897979 A CN106897979 A CN 106897979A
- Authority
- CN
- China
- Prior art keywords
- image
- resolution ratio
- regression coefficient
- original
- mentioned
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 13
- 238000000034 method Methods 0.000 claims abstract description 63
- 230000008439 repair process Effects 0.000 claims abstract description 38
- 230000006835 compression Effects 0.000 claims abstract description 20
- 238000007906 compression Methods 0.000 claims abstract description 20
- 230000008569 process Effects 0.000 claims description 25
- 238000006243 chemical reaction Methods 0.000 claims description 14
- 230000009466 transformation Effects 0.000 claims description 6
- 238000011084 recovery Methods 0.000 description 20
- 238000007781 pre-processing Methods 0.000 description 15
- 238000004590 computer program Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 11
- 238000005516 engineering process Methods 0.000 description 8
- 230000005540 biological transmission Effects 0.000 description 7
- 238000001914 filtration Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 230000000694 effects Effects 0.000 description 4
- 230000005291 magnetic effect Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000007596 consolidation process Methods 0.000 description 2
- 230000006837 decompression Effects 0.000 description 2
- 230000005611 electricity Effects 0.000 description 2
- 238000005538 encapsulation Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000009897 systematic effect Effects 0.000 description 2
- 241000208340 Araliaceae Species 0.000 description 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 1
- 235000003140 Panax quinquefolius Nutrition 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 235000008434 ginseng Nutrition 0.000 description 1
- 238000010422 painting Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/77—Retouching; Inpainting; Scratch removal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4092—Image resolution transcoding, e.g. by using client-server architectures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
Abstract
本公开提供了一种图像处理方法,该方法包括:获取第一图像,其中,第一图像为服务器对第二图像按照预定要求进行图片处理后得到的,第二图像是由分辨率为M的原始图像处理得到的分辨率为N的压缩图像,且N小于M;获取回归系数,其中,回归系数用于对图像进行修复;以及利用回归系数并基于第一图像进行图像修复处理,以得到与原始图像对应的且满足预定要求的第三图像。本公开还提供了一种电子设备和一种图像处理系统。
Description
技术领域
本公开涉及一种图像处理方法及系统、电子设备。
背景技术
目前,手机拍照涌现出诸如对比增强、去雾、朦胧感、水下、调色、抽象画等滤镜效果。随着照片像素越来越高,网速越来越快,很多滤镜处理放在云端可以更快捷,但这需要尽量降低网络传输的数据量,以节省流量,缩短延时。
发明内容
本公开发明实施例提供了一种图像处理方法及系统、电子设备,以至少解决相关技术中使用终端和服务器联合处理图像时,由于图像分辨率较高导致网络数据流量大的技术问题。
本公开的一个方面提供了一种图像处理方法,包括:获取第一图像,其中,上述第一图像为服务器对第二图像按照预定要求进行图片处理后得到的,上述第二图像是由分辨率为M的原始图像处理得到的分辨率为N的压缩图像,且N小于M;获取回归系数,其中,上述回归系数用于对图像进行修复;以及利用上述回归系数并基于上述第一图像进行图像修复处理,以得到与上述原始图像对应的且满足上述预定要求的第三图像。
可选地,利用上述回归系数并基于上述第一图像进行图像修复处理,以得到与上述原始图像对应的且满足上述预定要求的第三图像包括:将上述第一图像转换为分辨率为M的第四图像,其中,上述第一图像的分辨率为N;以及利用上述回归系数对上述第四图像进行失真修复,以得到上述第三图像。
可选地,将上述第一图像转换为分辨率为M的第四图像包括:按照第一预设频率对上述第一图像进行插样以得到分辨率为M的上述第四图像。
可选地,在获取第一图像之前,上述方法还包括:获取分辨率为M的上述原始图像;将上述原始图像转换为分辨率为N的第五图像;压缩上述第五图像以得到上述第二图像;以及将上述第二图像发送给上述服务器以使上述服务器对上述第二图像按照上述预定要求进行图片处理。
可选地,上述回归系数包括第一回归系数和第二回归系数,在获取分辨率为M的上述原始图像之后,上述方法还包括:对上述原始图像进行色彩空间变换,得到对应的变换后的图像;预测上述变换后的图像与上述第二图像之间的关系以计算第一回归系数;以及/或者,对上述原始图像进行滤波,得到对应的滤波后的图像;预测上述滤波后的图像与上述第二图像之间的关系以计算至少一个第二回归系数。
可选地,利用上述回归系数对上述第四图像进行失真修复,以得到上述第三图像包括:利用上述第一回归系数对上述第四图像进行失真修复,得到第一失真修复图像;利用上述至少一个第二回归系数对上述第四图像进行失真修复,得到至少一个第二失真修复图像;以及将上述第一失真修复图像和上述至少一个第二失真修复图像进行叠加以得到上述第三图像。
可选地,将上述原始图像转换为分辨率为N的第五图像包括:按照第二预设频率对上述原始图像进行采样以得到分辨率为N的上述第五图像。
本公开的另一个方面提供了一种电子设备,能够进行图像处理,包括:接收装置,用于获取第一图像,其中,上述第一图像为服务器对第二图像按照预定要求进行图片处理后得到的,上述第二图像是由分辨率为M的原始图像处理得到的分辨率为N的压缩图像,且N小于M;处理器,用于获取回归系数,其中,上述回归系数用于对图像进行修复,以及利用上述回归系数并基于上述第一图像进行图像修复处理,以得到与上述原始图像对应的且满足上述预定要求的第三图像。
可选地,上述处理器利用上述回归系数并基于上述第一图像进行图像修复处理,以得到与上述原始图像对应的且满足上述预定要求的第三图像包括:将上述第一图像转换为分辨率为M的第四图像,其中,上述第一图像的分辨率为N;以及利用上述回归系数对上述第四图像进行失真修复,以得到上述第三图像。
可选地,上述电子设备还包括:摄像头,用于在获取第一图像之前,获取分辨率为M的上述原始图像;上述处理器,还用于将上述原始图像转换为分辨率为N的第五图像,并压缩上述第五图像以得到上述第二图像,以及将上述第二图像发送给上述服务器以使上述服务器对上述第二图像按照上述预定要求进行图片处理。
本公开的另一个方面提供了一种图像处理系统,包括:第一获取模块,用于获取第一图像,其中,上述第一图像为服务器对第二图像按照预定要求进行图片处理后得到的,上述第二图像是由分辨率为M的原始图像处理得到的分辨率为N的压缩图像,且N小于M;第二获取模块,用于获取回归系数,其中,上述回归系数用于对图像进行修复;以及修复模块,用于利用上述回归系数并基于上述第一图像进行图像修复处理,以得到与上述原始图像对应的且满足上述预定要求的第三图像。
可选地,上述修复模块包括:转换单元,用于将上述第一图像转换为分辨率为M的第四图像,其中,上述第一图像的分辨率为N;以及修复单元,用于利用上述回归系数对上述第四图像进行失真修复,以得到上述第三图像。
可选地,上述转换单元还用于按照第一预设频率对上述第一图像进行插样以得到分辨率为M的上述第四图像。
本公开的另一方面提供了一种非易失性存储介质,存储有计算机可执行指令,上述指令在被执行时用于实现如上上述的方法。
本公开的另一方面提供了一种处理器,上述处理器用于执行计算机可执行指令,上述指令在被执行时用于实现如上上述的方法。
附图说明
为了更完整地理解本公开及其优势,现在将参考结合附图的以下描述,其中:
图1示意性示出了根据本公开的实施例的图像处理方法及系统的应用场景;
图2示意性示出了根据本公开的实施例的图像处理方法的流程图;
图3示意性示出了根据本公开的实施例的图像处理过程的示意图;
图4示意性示出了根据本公开的实施例的图像处理系统的框图;
图5示意性示出了根据本公开的实施例的电子设备的框图;以及
图6示意性示出了根据本公开的另一实施例的图像处理系统的框图。
具体实施方式
以下,将参照附图来描述本公开的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本公开的范围。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本公开。这里使用的词语“一”、“一个(种)”和“该”等也应包括“多个”、“多种”的意思,除非上下文另外明确指出。此外,在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
附图中示出了一些方框图和/或流程图。应理解,方框图和/或流程图中的一些方框或其组合可以由计算机程序指令来实现。这些计算机程序指令可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,从而这些指令在由该处理器执行时可以创建用于实现这些方框图和/或流程图中所说明的功能/操作的装置。
因此,本公开的技术可以硬件和/或软件(包括固件、微代码等)的形式来实现。另外,本公开的技术可以采取存储有指令的计算机可读介质上的计算机程序产品的形式,该计算机程序产品可供指令执行系统使用或者结合指令执行系统使用。在本公开的上下文中,计算机可读介质可以是能够包含、存储、传送、传播或传输指令的任意介质。例如,计算机可读介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。计算机可读介质的具体示例包括:磁存储装置,如磁带或硬盘(HDD);光存储装置,如光盘(CD-ROM);存储器,如随机存取存储器(RAM)或闪存;和/或有线/无线通信链路。
本公开的实施例提供了一种图像处理方法。该方法包括:图像预处理过程、图像处理过程和图像恢复过程。其中,图像预处理过程和图像恢复过程在终端侧执行,图像处理过程在服务器侧执行。
在图像预处理过程中,终端获取并将高分辨率的原始图像转换为低分辨率的原始小图,再将原始小图压缩后(即第二图像)发送给服务器。同时,在该过程中,终端还会对原始图像进行色彩空间变换以及滤波处理,并将处理结果与原始小图对比,得到对应的回归系数。
在图像处理过程中,服务器先对压缩后的原始小图进行解压得到对应的小图,再按照预定要求对上述小图进行图像处理(如对小图进行滤镜处理等)以得到处理后的图像(即第一图像),并将该处理后的图像返回终端。
在图像恢复过程中,终端利用前述回归系数并基于第一图像进行图像修复处理,最终可以得到与原始图像对应的且满足预定要求的图像(即第三图像)。
图1示意性示出了根据本公开的实施例的图像处理方法及系统的应用场景。如图1所示,在该应用场景中,包括:终端101和服务器102,其中,终端101可以包括但不限于智能手机、平板电脑等。具体地,图像预处理过程和图像恢复过程在终端101上完成,图像处理过程在服务器102上完成。
例如,用户使用手机拍摄了一张高分辨率的照片A,为了实现滤镜目的,会先使用手机将照片转换成低分辨率的照片B,再压缩低分辨率的照片B得到照片C,最后将压缩后的照片C发送给服务器,同时在此阶段还会使用手机计算回归系数;服务器接收到照片C后,会按照用户要求(即预定要求)对照片C进行滤镜处理以得到照片D,并将照片D发至用户的手机上;之后,再由手机利用回归系数基于照片D进行图像恢复处理,最终得到与照片A对应的且满足用户要求的滤镜图像。
图2示意性示出了根据本公开的实施例的图像处理方法的流程图。如图2所示,该方法包括操作S201~S203,其中:
在操作S201中,获取第一图像,其中,第一图像为服务器对第二图像按照预定要求进行图片处理后得到的,第二图像是由分辨率为M的原始图像处理得到的分辨率为N的压缩图像,且N小于M。
在操作S202中,获取回归系数,其中,回归系数用于对图像进行修复。
在操作S203中,利用回归系数并基于第一图像进行图像修复处理,以得到与原始图像对应的且满足预定要求的第三图像。
在本公开实施例中,上述操作S201~S203是在图像恢复过程中在终端侧(即电子设备)执行的。其中,在图像恢复之前,会先由终端执行图像预处理过程的相关操作,再由服务器执行图像处理过程的相关操作。
如前文所述,在图像预处理过程中,终端将分辨率为M的原始图像进行分辨率转换和压缩处理,得到分辨率为N第二图像。同时,在该过程中,终端还会对原始图像进行色彩空间变换和滤波处理,进而将处理后的图像与第二图像比对,以计算回归系数。
如前文所述,在图像处理过程中,服务器会解压第二图像并按照预设要求对解压后的图像进行处理以得到第一图像,进而将第一图像发送给终端。
这样,在图像恢复过程中,终端执行上述操作S201~S203就可以得到与原始图像对应的且满足预定要求的第三图像。
在相关技术中,一般会直接压缩手机拍摄的原始图像,并将压缩后的图像上传给服务器,服务器处理完毕后,再将处理后的图像压缩并传回手机。发明人发现,这种方案由于图像分辨率较高,网络需要传输的数据量仍然较大。
与相关技术相比,在本公开实施例中,一方面,通过终端和服务器联合对图像进行处理,可以更便捷。另一方面,在图像预处理过程中,会先将高分辨率的原始图像处理成低分辨率的图像再上传给服务器,因而可以降低网络传输的数据量,实现节约流量、缩短延时的目的。
作为一种可选的实施例,利用回归系数并基于第一图像进行图像修复处理,以得到与原始图像对应的且满足预定要求的第三图像可以包括:将第一图像转换为分辨率为M的第四图像,其中,第一图像的分辨率为N;以及利用回归系数对第四图像进行失真修复,以得到第三图像。
一般地,在服务器侧不会进行与分辨率相关的图像处理。由于终端会将图像预处理过程得到的分辨率为N的图像上传给服务器,因而服务器传回的图像也是分辨率为N的图像。而由于原始图像是高分辨率(分辨率为M)的图像,因此为了得到与原始图像在分辨率上一致的图像,在图像恢复过程中,终端侧会再次进行分辨率转换,使得最终得到的图像与原始图像具有相同的分辨率。
另外,回归系数可以包括一种或者多种,在此不做限定。不同的回归系数用于从不同角度对第四图像进行失真恢复。
作为一种可选的实施例,将第一图像转换为分辨率为M的第四图像可以包括:按照第一预设频率对第一图像进行插样以得到分辨率为M的第四图像。
在本公开实施例中,第一预设频率可以根据实际需要选取,在此不做限定。对应的,在图像预处理过程中,将分辨率为M的原始图像转换为分辨率为N的图像时,则可以按照第一预设频率对原始图像进行采样。
作为一种可选的实施例,在获取第一图像之前,上述方法还可以包括:获取分辨率为M的原始图像;将原始图像转换为分辨率为N的第五图像;压缩第五图像以得到第二图像;以及将第二图像发送给服务器以使服务器对第二图像按照预定要求进行图片处理。
如前文所述,在图像预处理过程中,终端将分辨率为M的原始图像进行分辨率转换和压缩处理,得到分辨率为N第二图像。与相关技术相比,在图像预处理过程中,先将高分辨率的原始图像处理成低分辨率的图像再上传给服务器,因而可以降低网络传输的数据量,实现节约流量、缩短延时的目的。
作为一种可选的实施例,回归系数可以包括第一回归系数和第二回归系数,在获取分辨率为M的原始图像之后,上述方法还可以包括:对原始图像进行色彩空间变换,得到对应的变换后的图像;预测变换后的图像与第二图像之间的关系以计算第一回归系数;以及/或者,对原始图像进行滤波,得到对应的滤波后的图像;预测滤波后的图像与第二图像之间的关系以计算至少一个第二回归系数。
需要说明的是,第一回归系数用于对图像的色彩失真进行恢复,第二回归系数用于对图像的频率失真进行恢复。在计算回归系数时,至少可以采用如下3种方案:方案1,只计算第一回归系数,这种情况只能对图像进行颜色失真恢复;方案2,只计算第二回归系数,这种情况只能对图像进行频率失真恢复;方案3,同时计算第一回归系数和第二回归系数,这种情况既能对图像进行颜色失真恢复,又能对图像进行频率失真恢复。
另外,上述对原始图像进行滤波包括但不限于:对原始图像进行高频、中频、低频滤波等。
作为一种可选的实施例,利用回归系数对第四图像进行失真修复,以得到第三图像可以包括:利用第一回归系数对第四图像进行失真修复,得到第一失真修复图像;利用至少一个第二回归系数对第四图像进行失真修复,得到至少一个第二失真修复图像;以及将第一失真修复图像和至少一个第二失真修复图像进行叠加以得到第三图像。
下面参考图3和图1,结合具体实施例对图2所示的方法做进一步说明。
图3示意性示出了根据本公开的实施例的图像处理过程的示意图。
如图3所示,在图像预处理过程中,终端执行如下操作:
(1-1),将原始图像a0进行分辨率转换、进行压缩,得到第二图像a1-1。
(1-2),将原始图像进行色彩空间转换,得到图像b1-1,同时对比第二图像a1-1与图像b1-1,计算得到一个第一回归系数m1。
(1-3),将原始图像进行低频滤波,得到图像c1-1,同时对比第二图像a1-1与图像c1-1,计算得到一个第二回归系数m2。
(1-4),将原始图像进行中频滤波,得到图像c1-2,同时对比第二图像a1-1与图像c1-2,计算得到一个第二回归系数m3。
(1-5),将原始图像进行高频滤波,得到图像c1-3,同时对比第二图像a1-1与图像c1-3,计算得到一个第二回归系数m4。
如图3所示,在图像处理过程中,服务器将终端上传的第二图像处理成第一图像a2-1,并将第一图像回传给终端。
如图3所示,在图像恢复过程中,终端执行如下操作:
(2-1),将第一图像a2-1进行解压,并将解压后的第一图像进行分辨率转换,得到第四图像(图中未示出)。
(2-2),利用第一回归系数m1对第四图像进行色彩失真恢复,得到图像b2-1。
(2-3),利用一个第二回归系数m2对第四图像进行低频失真恢复,得到图像c2-1。
(2-4),利用另一个第二回归系数m3对第四图像进行中频失真恢复,得到图像c2-2。
(2-5),利用另一个第二回归系数m4对第四图像进行中频失真恢复,得到图像c2-3。
(2-6),由图像b2-1、图像c2-1~图像c2-3合成最终的结果图a3(即第三图像)。
作为一种可选的实施例,将原始图像转换为分辨率为N的第五图像包括:按照第二预设频率对原始图像进行采样以得到分辨率为N的第五图像。
需要说明的是,在本公开实施例中,采样时按照第二预设频率将分辨率为M的原始图像变换为分辨率为N的第五图像;而插样时按照第一预设频率将分辨率为N的第一图像变换为分辨率为M的第四图像,可见,第一预设频率与第二预设频率相等。在本公开实施例中,第二预设频率可以根据实际需要选取,在此不做限定。
图4示意性示出了根据本公开的实施例的图像处理系统的框图。如图4所示,该图像处理系统包括:第一获取模块410,用于获取第一图像,其中,第一图像为服务器对第二图像按照预定要求进行图片处理后得到的,第二图像是由分辨率为M的原始图像处理得到的分辨率为N的压缩图像,且N小于M;第二获取模块420,用于获取回归系数,其中,回归系数用于对图像进行修复;以及修复模块430,用于利用回归系数并基于第一图像进行图像修复处理,以得到与原始图像对应的且满足预定要求的第三图像。
该图像处理系统可以执行上面参考图2~图3所描述的方法以及这些方法对应的其他实施方式。与相关技术相比,在本公开实施例中,一方面,通过终端和服务器联合对图像进行处理,可以更便捷。另一方面,在图像预处理过程中,会先将高分辨率的原始图像处理成低分辨率的图像再上传给服务器,因而可以降低网络传输的数据量,实现节约流量、缩短延时的目的。
作为一种可选的实施例,上述修复模块可以包括:转换单元,用于将第一图像转换为分辨率为M的第四图像,其中,第一图像的分辨率为N;以及修复单元,用于利用回归系数对第四图像进行失真修复,以得到第三图像。
作为一种可选的实施例,上述转换单元还可以用于按照第一预设频率对第一图像进行插样以得到分辨率为M的第四图像。
需要说明的是,装置部分实施例中各实施方式与方法部分实施例中各实施方式对应相同或类似,装置部分实施例中各实施方式中的模块/单元与方法部分实施例中各实施方式对应的操作/步骤用于实现相同或类似功能,从而可以达到相同或类似的技术效果,以及解决相同或类似的技术问题,在此不再赘述。具体可以参见上面参考图2~图3的描述,这里不再重复。
可以理解的是,第一获取模块401、第二获取模块402和修复模块403可以合并在一个模块中实现,或者其中的任意一个模块可以被拆分成多个模块。或者,这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合,并在一个模块中实现。根据本公开的实施例,第一获取模块401、第二获取模块402和修复模块403中的至少一个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以以对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现,或以软件、硬件以及固件三种实现方式的适当组合来实现。或者,第一获取模块401、第二获取模块402和修复模块403中的至少一个可以至少被部分地实现为计算机程序模块,当该程序被计算机运行时,可以执行相应模块的功能。
图5示意性示出了根据本公开的实施例的电子设备的框图。
如图5所示,该电子设备510能够进行图像处理,包括:接收装置511,用于获取第一图像,其中,上述第一图像为服务器520对第二图像按照预定要求进行图片处理后得到的,上述第二图像是由分辨率为M的原始图像处理得到的分辨率为N的压缩图像,且N小于M;处理器512,用于获取回归系数,其中,上述回归系数用于对图像进行修复,以及利用上述回归系数并基于上述第一图像进行图像修复处理,以得到与上述原始图像对应的且满足上述预定要求的第三图像。
在本公开实施例中,电子设备510在图像恢复之前,会先执行图像预处理过程的相关操作,再由服务器520执行图像处理过程的相关操作。
如前文所述,在图像预处理过程中,电子设备510的处理器512将分辨率为M的原始图像进行分辨率转换和压缩处理,得到分辨率为N第二图像。同时,在该过程中,电子设备510还会对原始图像进行色彩空间变换和滤波处理,进而将处理后的图像与第二图像比对,以计算回归系数。
如前文所述,在图像处理过程中,服务器520会解压第二图像并按照预设要求对解压后的图像进行处理以得到第一图像,进而将第一图像发送给电子设备510。
这样,在图像恢复过程中,电子设备510通过执行相关操作就可以得到与原始图像对应的且满足预定要求的第三图像。
在相关技术中,一般会直接压缩手机拍摄的原始图像,并将压缩后的图像上传给服务器,服务器处理完毕后,再将处理后的图像压缩并传回手机。发明人发现,这种方案由于图像分辨率较高,网络需要传输的数据量仍然较大。
与相关技术相比,在本公开实施例中,一方面,通过电子设备510和服务器520联合对图像进行处理,可以更便捷。另一方面,在图像预处理过程中,会先将高分辨率的原始图像处理成低分辨率的图像再上传给服务器520,因而可以降低网络传输的数据量,实现节约流量、缩短延时的目的。
作为一种可选的实施例,上述处理器利用上述回归系数并基于上述第一图像进行图像修复处理,以得到与上述原始图像对应的且满足上述预定要求的第三图像包括:将上述第一图像转换为分辨率为M的第四图像,其中,上述第一图像的分辨率为N;以及利用上述回归系数对上述第四图像进行失真修复,以得到上述第三图像。
作为一种可选的实施例,如图5所示,上述电子设备还包括:摄像头513,用于在获取第一图像之前,获取分辨率为M的上述原始图像;上述处理器512,还用于将上述原始图像转换为分辨率为N的第五图像,并压缩上述第五图像以得到上述第二图像,以及将上述第二图像发送给上述服务器520以使上述服务器520对上述第二图像按照上述预定要求进行图片处理。
需要说明的是,在本公开实施例中,电子设备中各部件所实现的功能、达到的技术效果和解决的技术问题分别与本公开上述实施例中图像处理方法中对应的操作/步骤所实现的功能、达到的技术效果和解决的技术问题相同或类似,在此不再赘述。
本公开的另一方面提供了一种非易失性存储介质,存储有计算机可执行指令,上述指令在被执行时用于实现如上上述的方法。
本公开的另一方面提供了一种处理器,上述处理器用于执行计算机可执行指令,上述指令在被执行时用于实现如上上述的方法。
图6示意性示出了根据本公开的另一实施例的图像处理系统的框图。如图6所示,图像处理系统包括处理器610、计算机可读存储介质620。该图像处理系统可以执行上面参考图2~图3描述的方法,以实现图像处理的目的。
具体地,处理器610例如可以包括通用微处理器、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC)),等等。处理器610还可以包括用于缓存用途的板载存储器。处理器610可以是用于执行参考图2~图3描述的根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
计算机可读存储介质620,例如可以是能够包含、存储、传送、传播或传输指令的任意介质。例如,可读存储介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。可读存储介质的具体示例包括:磁存储装置,如磁带或硬盘(HDD);光存储装置,如光盘(CD-ROM);存储器,如随机存取存储器(RAM)或闪存;和/或有线/无线通信链路。
计算机可读存储介质620可以包括计算机程序621,该计算机程序621可以包括代码/计算机可执行指令,其在由处理器610执行时使得处理器610执行例如上面结合图2~图3所描述的方法流程及其任何变形。
计算机程序621可被配置为具有例如包括计算机程序模块的计算机程序代码。例如,在示例实施例中,计算机程序621中的代码可以包括一个或多个程序模块,例如包括621A、模块621B、……。应当注意,模块的划分方式和个数并不是固定的,本领域技术人员可以根据实际情况使用合适的程序模块或程序模块组合,当这些程序模块组合被处理器610执行时,使得处理器610可以执行例如上面结合图2~图3所描述的方法流程及其任何变形。
根据本公开的实施例,第一获取模块401、第二获取模块402和修复模块403中的至少一个可以实现为参考图6描述的计算机程序模块,其在被处理器610执行时,可以实现上面描述的相应操作。
尽管已经参照本公开的特定示例性实施例示出并描述了本公开,但是本领域技术人员应该理解,在不背离所附权利要求及其等同物限定的本公开的精神和范围的情况下,可以对本公开进行形式和细节上的多种改变。因此,本公开的范围不应该限于上述实施例,而是应该不仅由所附权利要求来进行确定,还由所附权利要求的等同物来进行限定。
Claims (11)
1.一种图像处理方法,包括:
获取第一图像,其中,所述第一图像为服务器对第二图像按照预定要求进行图片处理后得到的,所述第二图像是由分辨率为M的原始图像处理得到的分辨率为N的压缩图像,且N小于M;
获取回归系数,其中,所述回归系数用于对图像进行修复;以及
利用所述回归系数并基于所述第一图像进行图像修复处理,以得到与所述原始图像对应的且满足所述预定要求的第三图像。
2.根据权利要求1所述的方法,其中,利用所述回归系数并基于所述第一图像进行图像修复处理,以得到与所述原始图像对应的且满足所述预定要求的第三图像包括:
将所述第一图像转换为分辨率为M的第四图像,其中,所述第一图像的分辨率为N;以及
利用所述回归系数对所述第四图像进行失真修复,以得到所述第三图像。
3.根据权利要求2所述的方法,其中,将所述第一图像转换为分辨率为M的第四图像包括:
按照第一预设频率对所述第一图像进行插样以得到分辨率为M的所述第四图像。
4.根据权利要求1或2所述的方法,其中,在获取第一图像之前,所述方法还包括:
获取分辨率为M的所述原始图像;
将所述原始图像转换为分辨率为N的第五图像;
压缩所述第五图像以得到所述第二图像;以及
将所述第二图像发送给所述服务器以使所述服务器对所述第二图像按照所述预定要求进行图片处理。
5.根据权利要求4所述的方法,其中,所述回归系数包括第一回归系数和第二回归系数,在获取分辨率为M的所述原始图像之后,所述方法还包括:
对所述原始图像进行色彩空间变换,得到对应的变换后的图像;
预测所述变换后的图像与所述第二图像之间的关系以计算第一回归系数;
以及/或者,
对所述原始图像进行滤波,得到对应的滤波后的图像;
预测所述滤波后的图像与所述第二图像之间的关系以计算至少一个第二回归系数。
6.根据权利要求5所述的方法,其中,利用所述回归系数对所述第四图像进行失真修复,以得到所述第三图像包括:
利用所述第一回归系数对所述第四图像进行失真修复,得到第一失真修复图像;
利用所述至少一个第二回归系数对所述第四图像进行失真修复,得到至少一个第二失真修复图像;以及
将所述第一失真修复图像和所述至少一个第二失真修复图像进行叠加以得到所述第三图像。
7.根据权利要求4所述的方法,其中,将所述原始图像转换为分辨率为N的第五图像包括:
按照第二预设频率对所述原始图像进行采样以得到分辨率为N的所述第五图像。
8.一种电子设备,能够进行图像处理,包括:
接收装置,用于获取第一图像,其中,所述第一图像为服务器对第二图像按照预定要求进行图片处理后得到的,所述第二图像是由分辨率为M的原始图像处理得到的分辨率为N的压缩图像,且N小于M;
处理器,用于获取回归系数,其中,所述回归系数用于对图像进行修复,以及利用所述回归系数并基于所述第一图像进行图像修复处理,以得到与所述原始图像对应的且满足所述预定要求的第三图像。
9.根据权利要求8所述的电子设备,其中,所述处理器利用所述回归系数并基于所述第一图像进行图像修复处理,以得到与所述原始图像对应的且满足所述预定要求的第三图像包括:
将所述第一图像转换为分辨率为M的第四图像,其中,所述第一图像的分辨率为N;以及
利用所述回归系数对所述第四图像进行失真修复,以得到所述第三图像。
10.根据权利要求8或9所述的电子设备,其中:
所述电子设备还包括:摄像头,用于在获取第一图像之前,获取分辨率为M的所述原始图像;
所述处理器,还用于将所述原始图像转换为分辨率为N的第五图像,并压缩所述第五图像以得到所述第二图像,以及将所述第二图像发送给所述服务器以使所述服务器对所述第二图像按照所述预定要求进行图片处理。
11.一种图像处理系统,包括:
第一获取模块,用于获取第一图像,其中,所述第一图像为服务器对第二图像按照预定要求进行图片处理后得到的,所述第二图像是由分辨率为M的原始图像处理得到的分辨率为N的压缩图像,且N小于M;
第二获取模块,用于获取回归系数,其中,所述回归系数用于对图像进行修复;以及
修复模块,用于利用所述回归系数并基于所述第一图像进行图像修复处理,以得到与所述原始图像对应的且满足所述预定要求的第三图像。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710212044.4A CN106897979B (zh) | 2017-03-31 | 2017-03-31 | 图像处理方法及系统、电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710212044.4A CN106897979B (zh) | 2017-03-31 | 2017-03-31 | 图像处理方法及系统、电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106897979A true CN106897979A (zh) | 2017-06-27 |
CN106897979B CN106897979B (zh) | 2020-08-25 |
Family
ID=59194363
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710212044.4A Active CN106897979B (zh) | 2017-03-31 | 2017-03-31 | 图像处理方法及系统、电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106897979B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108320263A (zh) * | 2017-12-29 | 2018-07-24 | 维沃移动通信有限公司 | 一种图像处理的方法、装置及移动终端 |
WO2019148818A1 (zh) * | 2018-01-30 | 2019-08-08 | 深圳创维-Rgb电子有限公司 | 图像处理方法、装置、系统及计算机可读存储介质 |
CN110930333A (zh) * | 2019-11-22 | 2020-03-27 | 北京金山云网络技术有限公司 | 图像修复方法、装置、电子设备及计算机可读存储介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101668196A (zh) * | 2009-09-25 | 2010-03-10 | 西安电子科技大学 | 基于下采样和插值的低码率图像压缩方法 |
CN103065601A (zh) * | 2013-01-28 | 2013-04-24 | 深圳市华星光电技术有限公司 | 一种图像处理装置、方法及液晶显示器 |
US20130188065A1 (en) * | 2012-01-25 | 2013-07-25 | Samplify Systems, Inc. | Raw format image data processing |
CN103636228A (zh) * | 2011-04-28 | 2014-03-12 | 三星电子株式会社 | 用于调整无线通信系统中的数据发送速率的方法和设备 |
CN103796013A (zh) * | 2014-01-17 | 2014-05-14 | 五八同城信息技术有限公司 | 一种移动端即时通讯中的图片压缩方法 |
CN104463790A (zh) * | 2013-09-17 | 2015-03-25 | 联想(北京)有限公司 | 一种图像处理的方法、装置和系统 |
CN104935802A (zh) * | 2014-03-17 | 2015-09-23 | 联想(北京)有限公司 | 图像处理方法、电子设备和系统 |
CN106060382A (zh) * | 2016-05-27 | 2016-10-26 | 北京金山安全软件有限公司 | 一种图像处理方法、装置及电子设备 |
-
2017
- 2017-03-31 CN CN201710212044.4A patent/CN106897979B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101668196A (zh) * | 2009-09-25 | 2010-03-10 | 西安电子科技大学 | 基于下采样和插值的低码率图像压缩方法 |
CN103636228A (zh) * | 2011-04-28 | 2014-03-12 | 三星电子株式会社 | 用于调整无线通信系统中的数据发送速率的方法和设备 |
US20130188065A1 (en) * | 2012-01-25 | 2013-07-25 | Samplify Systems, Inc. | Raw format image data processing |
CN103065601A (zh) * | 2013-01-28 | 2013-04-24 | 深圳市华星光电技术有限公司 | 一种图像处理装置、方法及液晶显示器 |
CN104463790A (zh) * | 2013-09-17 | 2015-03-25 | 联想(北京)有限公司 | 一种图像处理的方法、装置和系统 |
CN103796013A (zh) * | 2014-01-17 | 2014-05-14 | 五八同城信息技术有限公司 | 一种移动端即时通讯中的图片压缩方法 |
CN104935802A (zh) * | 2014-03-17 | 2015-09-23 | 联想(北京)有限公司 | 图像处理方法、电子设备和系统 |
CN106060382A (zh) * | 2016-05-27 | 2016-10-26 | 北京金山安全软件有限公司 | 一种图像处理方法、装置及电子设备 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108320263A (zh) * | 2017-12-29 | 2018-07-24 | 维沃移动通信有限公司 | 一种图像处理的方法、装置及移动终端 |
WO2019148818A1 (zh) * | 2018-01-30 | 2019-08-08 | 深圳创维-Rgb电子有限公司 | 图像处理方法、装置、系统及计算机可读存储介质 |
US11176639B2 (en) | 2018-01-30 | 2021-11-16 | Shenzhen Skyworth-Rgb Electronic Co., Ltd. | Image processing method, device and system, and computer readable storage medium |
CN110930333A (zh) * | 2019-11-22 | 2020-03-27 | 北京金山云网络技术有限公司 | 图像修复方法、装置、电子设备及计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN106897979B (zh) | 2020-08-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105611303B (zh) | 图像压缩系统、解压缩系统、训练方法和装置、显示装置 | |
CN109087269A (zh) | 弱光图像增强方法及装置 | |
CN112862877B (zh) | 用于训练图像处理网络和图像处理的方法和装置 | |
CN106897979A (zh) | 图像处理方法及系统、电子设备 | |
CN106664467A (zh) | 实时视频摘要 | |
CN112419151A (zh) | 图像退化处理方法、装置、存储介质及电子设备 | |
CN104394308A (zh) | 双摄像头以不同视角拍照的方法和终端 | |
CN113949808B (zh) | 视频生成方法、装置、可读介质及电子设备 | |
US12056843B2 (en) | Methods and systems for image processing | |
CN107547773A (zh) | 一种图像处理方法、装置及设备 | |
CN112330788A (zh) | 图像处理方法、装置、可读介质及电子设备 | |
CN205408063U (zh) | 图像压缩系统、解压缩系统、显示装置 | |
CN104361559B (zh) | 一种基于小图像内存的图像放大处理方法及系统 | |
CN104637030A (zh) | 一种图像增强处理方法及装置 | |
CN104683818A (zh) | 基于双正交不变集多小波的图像压缩方法 | |
CN109934342B (zh) | 神经网络模型训练方法、深度图像修复方法及系统 | |
CN111083479A (zh) | 一种视频帧预测方法、装置及终端设备 | |
US20170221447A1 (en) | Data transmission method, data transmission system and portable display device | |
CN115760607A (zh) | 图像修复方法、装置、可读介质以及电子设备 | |
CN105159663B (zh) | 图像的调整方法及装置 | |
CN104463790A (zh) | 一种图像处理的方法、装置和系统 | |
CN113225586B (zh) | 视频处理方法、装置、电子设备及存储介质 | |
CN114998149A (zh) | 图像修复模型的训练方法及图像修复方法、装置及设备 | |
CN113706385A (zh) | 一种视频超分辨率方法、装置、电子设备及存储介质 | |
CN105991938A (zh) | 一种虚拟曝光方法、装置及交通摄像机 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |