CN112150357B - 一种图像处理方法及移动终端 - Google Patents
一种图像处理方法及移动终端 Download PDFInfo
- Publication number
- CN112150357B CN112150357B CN201910577269.9A CN201910577269A CN112150357B CN 112150357 B CN112150357 B CN 112150357B CN 201910577269 A CN201910577269 A CN 201910577269A CN 112150357 B CN112150357 B CN 112150357B
- Authority
- CN
- China
- Prior art keywords
- image
- format
- mobile terminal
- generate
- pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 20
- 238000000034 method Methods 0.000 claims abstract description 29
- 230000010354 integration Effects 0.000 claims abstract description 22
- 238000012545 processing Methods 0.000 claims description 23
- 230000009466 transformation Effects 0.000 claims description 16
- 238000004590 computer program Methods 0.000 claims description 9
- 238000005070 sampling Methods 0.000 claims description 9
- 238000012937 correction Methods 0.000 claims description 5
- 238000003705 background correction Methods 0.000 claims description 4
- 238000012549 training Methods 0.000 claims description 3
- 238000003384 imaging method Methods 0.000 abstract description 9
- 230000006870 function Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 6
- 239000003086 colorant Substances 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 241000699670 Mus sp. Species 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 238000009529 body temperature measurement Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 238000009432 framing Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4053—Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution
- G06T3/4076—Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution using the original low-resolution images to iteratively correct the high-resolution images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
Abstract
本发明提供了一种图像处理方法及移动终端,所述方法包括:获取四像素合一格式的第一图像;将第一图像进行调整,生成拜耳格式的第二图像;将第一图像和第二图像输入残差网络,生成第一补偿信息;根据第一补偿信息,对第二图像进行补偿,得到目标图像,能够实现将输入的四像素合一格式的图像,确定调整后的四像素合一格式的图像的第一补偿信息,将调整后四像素合一格式的图像对应的第一补偿信息补偿至调整后的四像素合一格式的图像,生成更高分辨率的图像,对现有技术中的四像素合一图像的纹理错乱和细节丢失进行补偿,大大提高了成像的质量,提升用户的使用体验。
Description
技术领域
本发明涉及移动终端技术领域,特别是涉及一种图像处理方法及移动终端。
背景技术
随着科技发展,人们对于高清图像需求越来越高。伴随着越来越多的高分辨率相机出现,相机传感器出现了一种四像素合一技术,四像素合一技术能够得到更高分辨率的图像。
但是,采用四像素合一的技术在进行图像信号处理时要变成拜耳阵列的形式,现有技术一般是插值的方式实现,然而现有的插值方法会出现纹理错乱,细节丢失等问题,大大降低了成像的效果,降低用户的使用体验。
发明内容
本发明实施例提供一种图像处理方法及移动终端,以解决现有技术中的图像处理方法造成纹理错乱和细节丢失的问题。
为了解决上述技术问题,本发明是这样实现的:
第一方面,本发明实施例提供了一种图像处理方法,所述方法包括:获取四像素合一格式的第一图像;将所述第一图像进行调整,生成拜耳格式的第二图像;将所述第一图像和所述第二图像输入残差网络,生成第一补偿信息;根据所述第一补偿信息,对所述第二图像进行补偿,得到目标图像。
第二方面,本发明实施例还提供了一种移动终端,所述移动终端包括:获取模块,用于获取四像素合一格式的第一图像;第一生成模块,用于将所述第一图像进行调整,生成拜耳格式的第二图像;第二生成模块,用于将所述第一图像和所述第二图像输入残差网络,生成第一补偿信息;补偿模块,用于根据所述第一补偿信息,对所述第二图像进行补偿,得到目标图像。
第三方面,本发明实施例还提供了一种移动终端,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现所述的图像处理方法的步骤。
第四方面,本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现所述的图像处理方法的步骤。
在本发明实施例中,通过获取四像素合一格式的第一图像;将第一图像进行调整,生成拜耳格式的第二图像;将第一图像和第二图像输入残差网络,生成第一补偿信息;根据第一补偿信息,对第二图像进行补偿,得到目标图像,能够实现将输入的四像素合一格式的图像,确定调整后的四像素合一格式的图像的第一补偿信息,将调整后四像素合一格式的图像对应的第一补偿信息补偿至调整后的四像素合一格式的图像,生成更高分辨率的图像,对现有技术中的四像素合一图像的纹理错乱和细节丢失进行补偿,大大提高了成像的质量,提升用户的使用体验。
附图说明
图1是本发明实施例一的一种图像处理方法的步骤流程图;
图2是本发明实施例二的一种图像处理方法的步骤流程图;
图3是本发明实施例二中四像素合一格式的图像转换为拜耳格式图像过程示意图;
图4是本发明实施例三的一种移动终端的结构框图;
图5是本发明实施例四的一种移动终端的结构框图;
图6是本发明实施例五的一种移动终端的硬件结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例一
参照图1,示出了本发明实施例一的一种图像处理方法的步骤流程图。
本发明实施例提供的图像处理方法包括以下步骤:
步骤101:获取四像素合一格式的第一图像。
例如,可以通过移动终端本身的四像素合一传感器来直接获取四像素合一格式的第一图像;也可以是其他终端将四像素合一格式的第一图像传递给该移动终端,本发明实施例对此不作具体限定。
四像素合一技术,其实也是类似地使用RGB拜耳的排列,但是在具体像素上却做了调整。它使用四个同色像素排列在一起,形成一个大的像素。在需要高分辨率的时候可以输出4倍于之前像素数量的照片,在需要高信噪比的时候将四像素合一,输出一张像素较低但是信噪比较高的图像。
步骤102:将第一图像进行调整,生成拜耳格式的第二图像。
将第一图像进行转换调整,将四像素合一格式的第一图像转换为拜耳格式的第二图像。
如图3,为四像素合一图像的转换过程示意图,将四像素合一格式图像进行转换为拜耳格式,拜耳格式被广泛运用数字图像。拜耳格式图像在一块滤镜上设置的不同的颜色,通过分析人眼对颜色的感知发现,人眼对绿色比较敏感,所以一般拜耳格式的图像绿色像素是红色和蓝色像素的和。
步骤103:将第一图像和第二图像输入残差网络,生成第一补偿信息。
其中,可选的,第一补偿信息包括并不限于以下任意之一:颜色补偿、位移补偿以及曝光补偿等。
步骤104:根据第一补偿信息,对第二图像进行补偿,得到目标图像。
将第一补偿信息对第二图像进行补偿,以矫正四像素合一格式图像出现的纹理错乱、细节丢失等问题。
在本发明实施例中,通过获取四像素合一格式的第一图像;将第一图像进行调整,生成拜耳格式的第二图像;将第一图像和第二图像输入残差网络,生成第一补偿信息;根据第一补偿信息,对第二图像进行补偿,得到目标图像,能够实现将输入的四像素合一格式的图像,确定调整后的四像素合一格式的图像的第一补偿信息,将调整后四像素合一格式的图像对应的第一补偿信息补偿至调整后的四像素合一格式的图像,生成更高分辨率的图像,对现有技术中的四像素合一图像的纹理错乱和细节丢失进行补偿,大大提高了成像的质量,提升用户的使用体验。
实施例二
参照图2,示出了本发明实施例二的一种图像处理方法的步骤流程图。
本发明实施例提供的图像处理方法包括以下步骤:
步骤201:获取四像素合一格式的第一图像。
步骤202:将第一图像进行调整,生成拜耳格式的第二图像。
将四像素合一格式的图像进行调整,调整为拜耳格式,如图3,为四像素合一格式的图像的转换为拜耳格式图像过程示意图,将四像素合一格式的图像进行转换为拜耳格式,拜耳格式被广泛运用数字图像。拜耳格式图像在一块滤镜上设置的不同的颜色,通过分析人眼对颜色的感知发现,人眼对绿色比较敏感,所以一般拜耳格式的图像绿色格式的像素是红色和绿色像素的和。
步骤203:将RGB图像进行反图像信号处理,生成第一目标图像。
其中,反图像信号处理为以下操作的任意一种:显示参数反变换操作、自动白平衡反变换操作、镜头阴影矫正反变换操作、黑电平矫正反变换操作以及马赛克操作
步骤204:对第一目标图像进行拜耳采样,生成拜耳格式的第一输入图像。
拜耳采样方法可以:采集一拜耳区域图像,对拜耳区域图像的每一像素点进行插值处理,插值出缺失的另外两通道像素值,对插值处理后的拜耳区域图像进行下采样处理,得到下采样处理后的拜耳区域图像。
步骤205:对第一目标图像进行四像素合一采样,生成四像素合一格式的第二输入图像。
步骤206:将第一输入图像作为输入图像,将第二输入图像作为真实图像,对第一输入图像和第二输入图像进行迭代训练,得到残差网络。
步骤207:将第一图像和第二图像输入残差网络,生成第一补偿信息。
通过残差网络,可以得到四像素合一格式的图像和拜耳格式图像存在的差异,即为第一补偿信息。
其中,补偿信息可以为颜色补偿、位移补偿以及曝光补偿等。
步骤208:根据第一补偿信息,对第二图像进行补偿,得到目标图像。
例如,可以将第一补偿信息和第二图像相加,生成目标图像。
可选的,在步骤208之后,还可以包括:
步骤209:通过图像处理器对目标图像进行处理,得到目标显示图像。
例如,可以通过图像处理器检测光、色温测量、对焦、对焦辅助、取景、色彩控制、边缘矫正等功能,生成目标显示图像。
当然,步骤209同样可以应用在第一实施例中,本发明实施例对此不作具体限定。
图像处理器,也就是我们一般常说的ISP处理器,ISP是Image Signal Processor的缩写,全称是影像处理器。在相机成像的整个环节中,它负责接收感光元件(Sensor)的原始信号数据,可以理解为整个相机拍照、录像的第一步处理流程,对图像质量起着非常重要的作用。通过ISP处理器对拜耳格式的数据进行数据处理,才可以得到我们想要的可显示的图像。
在本发明实施例中,通过获取四像素合一格式的第一图像;将第一图像进行调整,生成拜耳格式的第二图像;将第一图像和第二图像输入残差网络,生成第一补偿信息;根据第一补偿信息,对第二图像进行补偿,得到目标图像,能够实现将输入的四像素合一格式的图像,确定调整后的四像素合一格式的图像的补偿信息,将调整后四像素合一格式的图像对应的补偿信息补偿至调整后的四像素合一格式的图像,生成更高分辨率的图像,对现有技术中的四像素合一图像的纹理错乱和细节丢失进行补偿,大大提高了成像的质量,提升用户的使用体验。
实施例三
参照图4,示出了本发明实施例三的一种移动终端的结构框图。
本发明实施例提供的移动终端包括:
获取模块301,用于获取四像素合一格式的第一图像;
第一生成模块302,用于将所述第一图像进行调整,生成拜耳格式的第二图像;
第二生成模块303,用于将所述第一图像和所述第二图像输入残差网络,生成第一补偿信息;
补偿模块304,用于根据所述第一补偿信息,对所述第二图像进行补偿,得到目标图像。
在本发明实施例中,通过获取四像素合一格式的第一图像;将第一图像进行调整,生成拜耳格式的第二图像;将第一图像和第二图像输入残差网络,生成第一补偿信息;根据第一补偿信息,对第二图像进行补偿,得到目标图像,能够实现将输入的四像素合一格式的图像,确定调整后的四像素合一格式的图像的补偿信息,将调整后四像素合一格式的图像对应的补偿信息补偿至调整后的四像素合一格式的图像,生成更高分辨率的图像,对现有技术中的四像素合一图像的纹理错乱和细节丢失进行补偿,大大提高了成像的质量,提升用户的使用体验。
实施例四
参照图5,示出了本发明实施例四的一种移动终端的结构框图,
本发明实施例提供的移动终端包括:
获取模块401,用于获取四像素合一格式的第一图像;
第一生成模块402,用于将所述第一图像进行调整,生成拜耳格式的第二图像;
第二生成模块403,用于将所述第一图像和所述第二图像输入残差网络,生成第一补偿信息;
补偿模块404,用于根据所述第一补偿信息,对所述第二图像进行补偿,得到目标图像。
优选地,所述移动终端还包括:
第三生成模块405,用于将RGB图像进行反图像信号处理,生成第一目标图像;
第四生成模块406,用于对所述第一目标图像进行拜耳采样,生成拜耳格式的第一输入图像;
第五生成模块407,用于对所述第一目标图像进行四像素合一采样,生成四像素合一格式的第二输入图像;
第二确定模块408,用于将所述第一输入图像作为输入图像,将所述第二输入图像作为真实图像,对所述第一输入图像和所述第二输入图像进行迭代训练,得到所述残差网络。
优选地,所述反图像信号处理为以下操作的任意一种:显示参数反变换操作、自动白平衡反变换操作、镜头阴影矫正反变换操作、黑电平矫正反变换操作以及马赛克操作。
优选地,所述移动终端还包括:
处理模块409,用于通过图像处理器对所述目标图像进行处理,得到目标显示图像。
本发明实施例提供的移动终端能够实现图1至图2的方法实施例中移动终端实现的各个过程,为避免重复,这里不再赘述。
在本发明实施例中,通过获取四像素合一格式的第一图像;将第一图像进行调整,生成拜耳格式的第二图像;将第一图像和第二图像输入残差网络,生成第一补偿信息;根据第一补偿信息,对第二图像进行补偿,得到目标图像,能够实现将输入的四像素合一格式的图像,确定调整后的四像素合一格式的图像的补偿信息,将调整后四像素合一格式的图像对应的补偿信息补偿至调整后的四像素合一格式的图像,生成更高分辨率的图像,对现有技术中的四像素合一图像的纹理错乱和细节丢失进行补偿,大大提高了成像的质量,提升用户的使用体验。
实施例五
参照图6,为实现本发明各个实施例的一种移动终端的硬件结构示意图。
该移动终端500包括但不限于:射频单元501、网络模块502、音频输出单元503、输入单元504、传感器505、显示单元506、用户输入单元507、接口单元508、存储器509、处理器510、以及电源511等部件。本领域技术人员可以理解,图6中示出的移动终端结构并不构成对移动终端的限定,移动终端可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,移动终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
射频单元501或者传感器505,用于获取四像素合一格式的第一图像;
处理器510,用于将所述第一图像进行调整,生成拜耳格式的第二图像;将所述第一图像和所述第二图像输入残差网络,生成第一补偿信息;根据所述第一补偿信息,对所述第二图像进行补偿,得到目标图像。
在本发明实施例中,通过获取四像素合一格式的第一图像;将第一图像进行调整,生成拜耳格式的第二图像;将第一图像和第二图像输入残差网络,生成第一补偿信息;根据第一补偿信息,对第二图像进行补偿,得到目标图像,能够实现将输入的四像素合一格式的图像,确定调整后的四像素合一格式的图像的补偿信息,将调整后四像素合一格式的图像对应的补偿信息补偿至调整后的四像素合一格式的图像,生成更高分辨率的图像,对现有技术中的四像素合一图像的纹理错乱和细节丢失进行补偿,大大提高了成像的质量,提升用户的使用体验。
应理解的是,本发明实施例中,射频单元501可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器510处理;另外,将上行的数据发送给基站。通常,射频单元501包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元501还可以通过无线通信系统与网络和其他设备通信。
移动终端通过网络模块502为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元503可以将射频单元501或网络模块502接收的或者在存储器509中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元503还可以提供与移动终端500执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元503包括扬声器、蜂鸣器以及受话器等。
输入单元504用于接收音频或视频信号。输入单元504可以包括图形处理器(Graphics Processing Unit,GPU)5041和麦克风5042,图形处理器5041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元506上。经图形处理器5041处理后的图像帧可以存储在存储器509(或其它存储介质)中或者经由射频单元501或网络模块502进行发送。麦克风5042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元501发送到移动通信基站的格式输出。
移动终端500还包括至少一种传感器505,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板5061的亮度,接近传感器可在移动终端500移动到耳边时,关闭显示面板5061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别移动终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器505还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元506用于显示由用户输入的信息或提供给用户的信息。显示单元506可包括显示面板5061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板5061。
用户输入单元507可用于接收输入的数字或字符信息,以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元507包括触控面板5071以及其他输入设备5072。触控面板5071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板5071上或在触控面板5071附近的操作)。触控面板5071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器510,接收处理器510发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板5071。除了触控面板5071,用户输入单元507还可以包括其他输入设备5072。具体地,其他输入设备5072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板5071可覆盖在显示面板5061上,当触控面板5071检测到在其上或附近的触摸操作后,传送给处理器510以确定触摸事件的类型,随后处理器510根据触摸事件的类型在显示面板5061上提供相应的视觉输出。虽然在图6中,触控面板5071与显示面板5061是作为两个独立的部件来实现移动终端的输入和输出功能,但是在某些实施例中,可以将触控面板5071与显示面板5061集成而实现移动终端的输入和输出功能,具体此处不做限定。
接口单元508为外部装置与移动终端500连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元508可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到移动终端500内的一个或多个元件或者可以用于在移动终端500和外部装置之间传输数据。
存储器509可用于存储软件程序以及各种数据。存储器509可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器509可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器510是移动终端的控制中心,利用各种接口和线路连接整个移动终端的各个部分,通过运行或执行存储在存储器509内的软件程序和/或模块,以及调用存储在存储器509内的数据,执行移动终端的各种功能和处理数据,从而对移动终端进行整体监控。处理器510可包括一个或多个处理单元;优选的,处理器510可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器510中。
移动终端500还可以包括给各个部件供电的电源511(比如电池),优选的,电源511可以通过电源管理系统与处理器510逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,移动终端500包括一些未示出的功能模块,在此不再赘述。
优选的,本发明实施例还提供一种移动终端,包括处理器510,存储器509,存储在存储器509上并可在所述处理器510上运行的计算机程序,该计算机程序被处理器510执行时实现上述图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。
Claims (8)
1.一种图像处理方法,应用于移动终端,其特征在于,所述方法包括:
获取四像素合一格式的第一图像;
将所述第一图像进行调整,生成拜耳格式的第二图像;
将所述第一图像和所述第二图像输入残差网络,生成第一补偿信息;
根据所述第一补偿信息,对所述第二图像进行补偿,得到目标图像;
其中,所述将所述第一图像和所述第二图像输入残差网络之前,所述方法还包括:
将RGB图像进行反图像信号处理,生成第一目标图像;
对所述第一目标图像进行拜耳采样,生成拜耳格式的第一输入图像;
对所述第一目标图像进行四像素合一采样,生成四像素合一格式的第二输入图像;
将所述第一输入图像作为输入图像,将所述第二输入图像作为真实图像,对所述第一输入图像和所述第二输入图像进行迭代训练,得到所述残差网络。
2.根据权利要求1所述的方法,其特征在于,所述反图像信号处理为以下操作的任意一种:显示参数反变换操作、自动白平衡反变换操作、镜头阴影矫正反变换操作、黑电平矫正反变换操作以及马赛克操作。
3.根据权利要求1所述的方法,其特征在于,所述根据所述第一补偿信息,对所述第二图像进行补偿,得到目标图像之后,所述方法还包括:
通过图像处理器对所述目标图像进行处理,得到目标显示图像。
4.一种移动终端,其特征在于,所述移动终端包括:
获取模块,用于获取四像素合一格式的第一图像;
第一生成模块,用于将所述第一图像进行调整,生成拜耳格式的第二图像;
第二生成模块,用于将所述第一图像和所述第二图像输入残差网络,生成第一补偿信息;
补偿模块,用于根据所述第一补偿信息,对所述第二图像进行补偿,得到目标图像;
其中,所述移动终端还包括:
第三生成模块,用于将RGB图像进行反图像信号处理,生成第一目标图像;
第四生成模块,用于对所述第一目标图像进行拜耳采样,生成拜耳格式的第一输入图像;
第五生成模块,用于对所述第一目标图像进行四像素合一采样,生成四像素合一格式的第二输入图像;
第二确定模块,用于将所述第一输入图像作为输入图像,将所述第二输入图像作为真实图像,对所述第一输入图像和所述第二输入图像进行迭代训练,得到所述残差网络。
5.根据权利要求4所述的移动终端,其特征在于,所述反图像信号处理为以下操作的任意一种:显示参数反变换操作、自动白平衡反变换操作、镜头阴影矫正反变换操作、黑电平矫正反变换操作以及马赛克操作。
6.根据权利要求4所述的移动终端,其特征在于,所述移动终端还包括:
处理模块,用于通过图像处理器对所述目标图像进行处理,得到目标显示图像。
7.一种移动终端,其特征在于,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至3中任一项所述的图像处理方法的步骤。
8.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如权利要求1至3中任一项所述的图像处理方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910577269.9A CN112150357B (zh) | 2019-06-28 | 2019-06-28 | 一种图像处理方法及移动终端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910577269.9A CN112150357B (zh) | 2019-06-28 | 2019-06-28 | 一种图像处理方法及移动终端 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112150357A CN112150357A (zh) | 2020-12-29 |
CN112150357B true CN112150357B (zh) | 2024-01-26 |
Family
ID=73869587
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910577269.9A Active CN112150357B (zh) | 2019-06-28 | 2019-06-28 | 一种图像处理方法及移动终端 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112150357B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113132562B (zh) * | 2021-04-21 | 2023-09-29 | 维沃移动通信有限公司 | 镜头阴影校正方法、装置及电子设备 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5333449B2 (ja) * | 2008-07-25 | 2013-11-06 | ソニー株式会社 | 画像処理装置および方法、プログラム、並びに、記録媒体 |
US8462221B2 (en) * | 2010-11-03 | 2013-06-11 | Eastman Kodak Company | Method for producing high dynamic range images |
US8872946B2 (en) * | 2012-05-31 | 2014-10-28 | Apple Inc. | Systems and methods for raw image processing |
WO2015119574A1 (en) * | 2014-02-05 | 2015-08-13 | Nanyang Technological University | Methods and systems for demosaicing an image |
-
2019
- 2019-06-28 CN CN201910577269.9A patent/CN112150357B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN112150357A (zh) | 2020-12-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108513070B (zh) | 一种图像处理方法、移动终端及计算机可读存储介质 | |
CN109688322B (zh) | 一种生成高动态范围图像的方法、装置及移动终端 | |
CN108833753B (zh) | 一种图像获取及应用方法、终端及计算机可读存储介质 | |
CN108900750B (zh) | 一种图像传感器及移动终端 | |
CN108307109B (zh) | 一种高动态范围图像预览方法及终端设备 | |
US20210014413A1 (en) | Photographing method and mobile terminal | |
WO2019091426A1 (zh) | 摄像头组件、图像获取方法及移动终端 | |
CN110602401A (zh) | 一种拍照方法及终端 | |
CN109361867B (zh) | 一种滤镜处理方法及移动终端 | |
CN110769151B (zh) | 图像处理方法、装置、电子设备和介质 | |
CN107846583B (zh) | 一种图像阴影补偿方法及移动终端 | |
CN107948505B (zh) | 一种全景拍摄方法及移动终端 | |
CN108040240B (zh) | 一种白平衡调整的方法、装置以及移动终端 | |
CN111064895B (zh) | 一种虚化拍摄方法和电子设备 | |
CN111145192A (zh) | 图像处理方法及电子设备 | |
CN111459233B (zh) | 显示方法、电子设备及存储介质 | |
CN111028192B (zh) | 一种图像合成方法及电子设备 | |
CN109639981B (zh) | 一种图像拍摄方法及移动终端 | |
CN109167917B (zh) | 一种图像处理方法及终端设备 | |
CN110503618A (zh) | 图像处理方法及电子设备 | |
CN108234978B (zh) | 一种图像处理方法及移动终端 | |
CN107798662B (zh) | 一种图像处理方法及移动终端 | |
CN110930372B (zh) | 一种图像处理方法、电子设备及计算机可读存储介质 | |
CN111246053B (zh) | 图像处理方法及电子设备 | |
CN112150357B (zh) | 一种图像处理方法及移动终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |