CN104639923B - 一种对图像数据进行处理的方法、装置和终端 - Google Patents
一种对图像数据进行处理的方法、装置和终端 Download PDFInfo
- Publication number
- CN104639923B CN104639923B CN201510058425.2A CN201510058425A CN104639923B CN 104639923 B CN104639923 B CN 104639923B CN 201510058425 A CN201510058425 A CN 201510058425A CN 104639923 B CN104639923 B CN 104639923B
- Authority
- CN
- China
- Prior art keywords
- rgb
- pixels
- view data
- image data
- rgb image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Color Image Communication Systems (AREA)
- Color Television Image Signal Generators (AREA)
- Processing Of Color Television Signals (AREA)
Abstract
本发明公开了一种对图像数据进行处理的方法、装置和终端,属于图像处理技术领域。方法包括:获取红绿蓝红外RGB‑IR图像数据和RGB‑IR映射表,所述RGB‑IR映射表用于存储基本色像素与红外IR像素的对应关系,所述基本色包括红R、绿G或蓝B;根据所述RGB‑IR图像数据和所述RGB‑IR映射表,获取所述RGB‑IR图像数据中包括的IR像素;将所述RGB‑IR图像数据中包括的IR像素去除,得到RGB图像数据。装置包括:第一获取模块,第二获取模块和去除模块。终端包括:处理器。本发明能够将RGB‑IR图像数据中包括的IR像素去除,从而还原出RGB图像本来的颜色。
Description
技术领域
本发明涉及图像处理技术领域,特别涉及一种对图像数据进行处理的方法、装置和终端。
背景技术
随着人们安全意识的增强,视频监控系统的使用越来越广泛。视频监控系统一个最重要的要求就是24小时不间断地拍摄。白天,由于光线充足,视频监控系统能够拍摄得到清晰的图像,但是到了夜晚,由于光线不足,拍摄得到的图像很不理想。
为了解决夜晚成像不理想的问题,红外摄像机应运而生,红外摄像机是指包含红外光源的摄像机,并在红外摄像机中加入IR-Cut(光学滤光片);其中,IR-Cut里面有两个滤光片,一个是红外截止滤光片,另一个是全透滤光片。在白天拍摄时,IR-Cut控制红外摄像机使用红外截止滤光片,避免红外光线干扰;在夜晚拍摄时,IR-Cut控制红外摄像机使用全透滤光片,并开启红外光源,红外光源发射红外光线,该红外光线会弥补自然光线的不足,从而拍摄得到清晰的图像。然而IR-CUT是机械装置,遇到振动、低温,容易出现故障,且其本身有一定的厚度,因此,红外摄像机无法做的轻薄,从而导致红外摄像机的可视视范围也受到限制。
随着RGB-IR传感器的成熟,将RGB-IR(红绿蓝红外)传感器应用到红外摄像机中,由于不需要IR-Cut机械装置,可以更好地满足视频监控系统的应用。使用嵌入RGB-IR传感器的红外摄像机拍摄图像时,RGB-IR传感器会采集红外光线,使红外光线也参与成像,拍摄出来的图像数据即为RGB-IR图像数据。但是,由于RGB-IR图像数据中包含IR(红外)像素,拍摄得到的图像会发生颜色失真,因此,需要对RGB-IR图像数据进行处理,从而还原图像本来的颜色。
发明内容
为了解决现有技术的问题,本发明提供了一种对图像数据进行处理的方法、装置和终端。技术方案如下:
第一方面,本发明提供了一种对图像数据进行处理的方法,所述方法包括:
获取红绿蓝红外RGB-IR图像数据和RGB-IR映射表,所述RGB-IR映射表用于存储基本色像素与红外IR像素的对应关系,所述基本色包括红R、绿G或蓝B;
根据所述RGB-IR图像数据和所述RGB-IR映射表,获取所述RGB-IR图像数据中包括的IR像素;
将所述RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据。
结合第一方面,在第一方面的第一种可能的实现方式中,所述根据所述RGB-IR图像数据和所述RGB-IR映射表,获取所述RGB-IR图像数据中包括的IR像素,包括:
获取所述RGB-IR图像数据中包括的基本色像素;
根据所述基本色像素,从所述RGB-IR映射表中获取所述基本色像素对应的IR像素。
结合第一方面的第一种可能的实现方式,在第一方面的第二种可能的实现方式中,所述将所述RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据,包括:
将所述RGB-IR图像数据中所述基本色像素对应的IR像素去除,得到原始的RGB图像数据;
在所述原始的RGB图像数据中插入G像素,得到过采样的RGB图像数据;
对所述过采样的RGB图像数据进行下采样,得到RGB图像数据。
结合第一方面,在第一方面的第三种可能的实现方式中,所述获取RGB-IR映射表之前,还包括:
获取色卡图像,所述色卡图像中包括多个色块;
根据所述多个色块中的每个色块包括的基本色像素和IR像素,生成RGB-IR映射表。
结合第一方面,在第一方面的第四种可能的实现方式中,所述将所述RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据之后,还包括:
根据所述IR像素,获取所述RGB图像数据的亮度信息;
将所述RGB图像数据的亮度信息对所述RGB图像数据进行处理。
结合第一方面,在第一方面的第五种可能的实现方式中,所述将所述RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据之后,还包括:
根据所述RGB图像数据中包括的基本色像素和所述IR像素,获取拍摄所述RGB-IR图像数据的终端的曝光时间、白平衡比例和对焦参数;
根据所述曝光时间、白平衡比例和对焦参数,对所述终端进行设置。
第二方面,本发明提供了一种对图像数据进行处理的装置,所述装置包括:
第一获取模块,用于获取红绿蓝红外RGB-IR图像数据和RGB-IR映射表,所述RGB-IR映射表用于存储基本色像素与红外IR像素的对应关系,所述基本色包括红R、绿G或蓝B;
第二获取模块,用于根据所述RGB-IR图像数据和所述RGB-IR映射表,获取所述RGB-IR图像数据中包括的IR像素;
去除模块,用于将所述RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据。
结合第二方面,在第二方面的第一种可能的实现方式中,所述第一获取模块,包括:
第一获取单元,用于获取所述RGB-IR图像数据中包括的基本色像素;
第二获取单元,用于根据所述基本色像素,从所述RGB-IR映射表中获取所述基本色像素对应的IR像素。
结合第二方面的第一种可能的实现方式,在第二方面的第二种可能的实现方式中,所述去除模块,包括:
去除单元,用于将所述RGB-IR图像数据中所述基本色像素对应的IR像素去除,得到原始的RGB图像数据;
插入单元,用于在所述原始的RGB图像数据中插入G像素,得到过采样的RGB图像数据;
采样单元,用于对所述过采样的RGB图像数据进行下采样,得到RGB图像数据。
结合第二方面,在第二方面的第三种可能的实现方式中,所述装置还包括:
第三获取模块,用于获取色卡图像,所述色卡图像中包括多个色块;
生成模块,用于根据所述多个色块中的每个色块包括的基本色像素和IR像素,生成RGB-IR映射表。
结合第二方面,在第二方面的第四种可能的实现方式中,所述装置还包括:
第四获取模块,用于根据所述RGB图像数据中包括的基本色像素和所述IR像素,获取所述RGB图像数据的亮度信息;
处理模块,用于将所述RGB图像数据的亮度信息对所述RGB图像数据进行处理。
结合第二方面,在第二方面的第五种可能的实现方式中,所述装置还包括:
第五获取模块,用于根据所述IR像素,获取拍摄所述RGB-IR图像数据的终端的曝光时间、白平衡比例和对焦参数;
设置模块,用于根据所述曝光时间、白平衡比例和对焦参数,对所述终端进行设置。
第三方面,本发明提供了一种终端,所述终端包括:处理器;
所述处理器,用于获取红绿蓝红外RGB-IR图像数据和RGB-IR映射表,所述RGB-IR映射表用于存储基本色像素与红外IR像素的对应关系,所述基本色包括红R、绿G或蓝B;根据所述RGB-IR图像数据和所述RGB-IR映射表,获取所述RGB-IR图像数据中包括的IR像素;将所述RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据。
结合第三方面,在第三方面的第一种可能的实现方式中,所述处理器,还用于获取所述RGB-IR图像数据中包括的基本色像素;根据所述基本色像素,从所述RGB-IR映射表中获取所述基本色像素对应的IR像素。
结合第三方面的第一种可能的实现方式,在第三方面的第二种可能的实现方式中,所述处理器,还用于将所述RGB-IR图像数据中所述基本色像素对应的IR像素去除,得到原始的RGB图像数据;在所述原始的RGB图像数据中插入G像素,得到过采样的RGB图像数据;对所述过采样的RGB图像数据进行下采样,得到RGB图像数据。
结合第三方面,在第三方面的第三种可能的实现方式中,所述处理器,还用于获取色卡图像,所述色卡图像中包括多个色块;根据所述多个色块中的每个色块包括的基本色像素和IR像素,生成RGB-IR映射表。
结合第三方面,在第三方面的第四种可能的实现方式中,所述处理器,还用于根据所述RGB图像数据中包括的基本色像素和所述IR像素,获取所述RGB图像数据的亮度信息;将所述RGB图像数据的亮度信息对所述RGB图像数据进行处理。
结合第三方面,在第三方面的第五种可能的实现方式中,所述处理器,还用于根据所述IR像素,获取拍摄所述RGB-IR图像数据的终端的曝光时间、白平衡比例和对焦参数;根据所述曝光时间、白平衡比例和对焦参数,对所述终端进行设置。
在本发明实施例中,获取红绿蓝红外RGB-IR图像数据和RGB-IR映射表,RGB-IR映射表用于存储基本色像素与红外IR像素的对应关系,基本色包括红R、绿G或蓝B;根据RGB-IR图像数据和RGB-IR映射表,获取RGB-IR图像数据中包括的IR像素;将RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据。本发明能够将RGB-IR图像数据中包括的IR像素去除,从而还原出RGB图像本来的颜色。
附图说明
图1是本发明实施例1提供的一种图像数据进行处理的方法流程图;
图2-1是本发明实施例2提供的一种图像数据进行处理的方法流程图;
图2-2是本发明实施例2提供的另一种图像数据进行处理的方法流程图;
图2-3是本发明实施例2提供的另一种图像数据进行处理的方法流程图;
图2-4是本发明实施例2提供的另一种图像数据进行处理的方法流程图;
图3是本发明实施例3提供的一种图像数据进行处理的装置结构示意图;
图4是本发明实施例3提供的一种终端的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。
实施例1
本发明实施例提供了一种对图像数据进行处理的方法,该方法的执行主体可以为终端,参见图1,其中,该方法包括:
步骤101:获取红绿蓝红外RGB-IR图像数据和RGB-IR映射表,RGB-IR映射表用于存储基本色像素与红外IR像素的对应关系,基本色包括红R、绿G或蓝B;
步骤102:根据RGB-IR图像数据和RGB-IR映射表,获取RGB-IR图像数据中包括的IR像素;
步骤103:将RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据。
在本发明实施例中,获取红绿蓝红外RGB-IR图像数据和RGB-IR映射表,RGB-IR映射表用于存储基本色像素与红外IR像素的对应关系,基本色包括红R、绿G或蓝B;根据RGB-IR图像数据和RGB-IR映射表,获取RGB-IR图像数据中包括的IR像素;将RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据。本发明能够将RGB-IR图像数据中包括的IR像素去除,从而还原出RGB图像本来的颜色。
实施例2
本发明实施例提供了一种对图像数据进行处理的方法,该方法的执行主体可以为终端,参见图2-1,其中,该方法包括:
步骤201:获取RGB-IR图像数据;
终端中的RGB-IR传感器采集红外光线,使红外光线参与成像,拍摄出来的图像数据就是RGB-IR图像数据,该RGB-IR图像数据中包括基本色像素和IR像素,基本色包括R、G或B。
其中,终端为任一具有RGB-IR传感器的终端,例如,具有RGB-IR传感器的手机、平板电脑、摄像机或者照相机等,在本发明实施例中对终端不作具体限定。
步骤202:获取RGB-IR映射表;
其中,终端生成RGB-IR映射表,并存储该RGB-IR映射表,在本步骤中,直接获取已存储的RGB-IR映射表。
其中,该RGB-IR映射表包括基本色像素与IR像素的对应关系,基本色包括R、G或B,也即该RGB-IR映射表包括R像素与IR像素的对应关系、G像素与IR像素的对应关系以及B像素和IR像素的对应关系。
其中,终端生成RGB-IR映射表可以通过以下步骤(1)至(2)实现,包括:
(1):获取色卡图像,该色卡图像中包括多个色块;
其中,该色卡图像中包括多个色块,且色块图像包括的色块的数量可以根据需要进行设置并更改,在本发明实施例中对色块的数量不作具体限定,例如,色块数量为24,也即该色块图像中包括24个色块。
(2):根据多个色块中的每个色块包括的基本色像素和IR像素,生成RGB-IR映射表。
其中,多个色块中的每个色块都包括基本色像素和IR像素,根据每个色块包括的基本色像素和IR像素可以通过以下步骤(2-1)至(2-5)生成RGB-IR映射表,包括:
(2-1):设定基本色像素和IR像素的函数关系;
其中,可以设定基本色像素和IR像素为线性关系,即IR=aR+bG+cB;也可以设定基本色像素和IR像素是更复杂的函数关系,在本发明中对基本色像素和IR像素的函数关系不作具体限定。
为了便于计算,在本发明实施例中以基本色像素和IR像素的函数关系为IR=aR+bG+cB为例进行说明。
(2-2):根据多个色块中的每个色块包括的基本色像素和IR像素,计算多个色块中的IR像素偏差总合最小的a、b和c;
其中,根据多个色块中的每个色块包括的基本色像素和IR像素,计算得到多组a、b和c的值,对于每组a、b和c的值,计算每个色块中的理论IR像素,根据每个色块中的理论IR像素和实际IR像素,计算每个色块中的IR像素偏差,然后计算多个色块中的IR像素偏差总和;从多组a、b和c的值中选择多个色块中的IR像素偏差总和最小的一组a、b和c。
其中,三个色块可以计算一组a、b和c的值,在本发明实施例中以24个色块为例进行说明,则可以计算出A24 3组a、b和c的值。
(2-3):根据a、b和c,计算每个色块的理论IR像素;
具体地,根据a、b和c,以及IR=aR+bG+cB,计算每个色块的理论IR像素,也即可以得到每个色块的基本色像素和IR像素的关系,表示为【R,IR】、【G,IR】和【B,IR】。
(2-4):根据每个色块的基本色像素与IR像素,绘制出基本色像素与IR像素的二维关系表,采用最小二乘法多项式拟合出基本色像素与IR像素的关系曲线;
具体地,将每个色块的【R,IR】绘制成二维关系表,采用最小二乘法多项式拟合出R与IR的关系曲线;将每个色块的【G,IR】绘制成二维关系表,采用最小二乘法多项式拟合出G与IR的关系曲线;将每个色块的【B,IR】绘制成二维关系表,采用最小二乘法多项式拟合出B与IR的关系曲线。
(2-5):根据基本色像素与IR像素的关系曲线,得到RGB-IR映射表。
具体地,根据R像素与IR像素的关系曲线,得到R像素和IR像素的对应关系;根据G像素与IR像素的关系曲线,得到G像素和IR像素的对应关系;根据B像素与IR像素的关系曲线,得到B像素和IR像素的对应关系,R像素和IR像素的对应关系、G像素与IR像素的对应关系以及B像素与IR像素的对应关系组成RGB-IR映射表。
进一步地,在本发明中还可以在多种光源下采集色卡图像,根据以上步骤(2-1)至(2-5)得到多种光源中的每种光源对应的RGB-IR映射表,存储光源的标识和光源对应的RGB-IR映射表的对应关系,相应的,步骤202可以为获取当前光源的标识,根据当前光源的标识,从光源的标识和光源对应的RGB-IR映射表的对应关系中获取当前光源对应的RGB-IR映射表。
其中,获取当前光源的标识的步骤可以为:
根据IR像素值和基本色像素值,计算IR像素和基本色像素的比值,根据该比例值确定该比例值所在的比例范围,根据该比例范围,从比例范围和光源的标识的对应关系中获取当前光源的标识。
其中,基本色包括R、G和B,在本步骤中,可以将R、G和B中的任一一个像素值作为基本色像素值,也可以从R、G和B中选择一个最大值作或者最小值为基本色像素值,也可以将R、G和B的平均值作为基本色像素值。
例如,从R、G和B中选择一个最大值作为基本色像素值,计算IR像素值与该最大值的比值。如果该比值较大,则说明光源中的红外成份越多,则当前光源可能是自然光源,如:阳光等;如果该比值较小,则可能是人造光源,如:荧光灯。
其中,光源的标识可以为光源的名称等,在本发明实施例中对光源的标识不作具体限定。
步骤203:根据RGB-IR图像数据和RGB-IR映射表,获取RGB-IR图像数据中包括的IR像素;
其中,步骤203可以通过以下步骤(1)和(2)实现,包括:
(1):获取RGB-IR图像数据中包括的基本色像素;
获取RGB-IR图像数据中包括的基本色像素,也即RGB-IR图像数据中包括的R像素、G像素或B像素。
(2):根据该基本色像素,从RGB-IR映射表中获取基本色像素对应的IR像素。
其中RGB-IR映射表中包括R像素与IR像素的对应关系,G像素与IR像素的对应关系和B像素与IR像素的对应关系。在本步骤中,根据RGB-IR图像数据中包括的R像素,从R像素和IR像素的对应关系中获取R像素中包括的IR像素;根据RGB-IR图像中包括的G像素,从G像素和IR像素的对应关系中获取G像素中包括的IR像素;根据RGB-IR图像数据中包括的B像素,从B像素和IR像素的对应关系中获取B像素中包括的IR像素。
进一步地,获取到RGB-IR图像数据中包括的IR像素时,获取上采样的采样频率,根据上采样的采样频率,对IR像素进行上采样,然后执行步骤204。
步骤204:将RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据;
其中,步骤204可以通过以下步骤(1)至(3)实现,包括:
(1):将RGB-IR图像数据中基本色像素对应的IR像素去除,得到原始的RGB图像数据;
具体地,将RGB-IR图像数据中的R像素中包括的IR像素去除,将RGB-IR图像数据中的G像素中包括的IR像素去除,将RGB-IR图像数据中的B像素中包括的IR像素去除,得到的图像数据就是原始的RGB图像数据。
其中,RGB-IR图像数据中的R像素值减去R像素中包括的IR像素值得到原始的RGB图像数据中的R像素;同样,RGB-IR图像数据中的G像素值减去G像素中包括的IR像素值得到原始的RGB图像数据中的G像素;RGB-IR图像数据中的B像素值减去B像素中包括的IR像素值得到原始的RGB图像数据中的B像素。
(2):在原始的RGB图像数据中插入G像素,得到过采样的RGB图像数据;
由于RGB图像数据中包括的像素为RGGB,则得到原始的RGB图像数据之后,获取G像素,采用现有的插值方法,在原始的RGB图像数据中插入获取的G像素,得到过采样的RGB图像数据。
其中,插值方法可以为bilinear插值、bi-cubic插值或者带edge-detection插值等。且在原始的RGB图像数据中插入G像素的过程为现有技术,在此不再详细说明。
(3):对过采样的RGB图像数据进行下采样,得到RGB图像数据。
具体地,获取下采样的采样频率,根据下采样的采样频率对过采样的RGB图像数据进行下采样,得到RGB图像数据。
在本发明实施例中可以采用任一一种通用的下采样方式。也有一些特殊的方法可以采用,例如,采用1/2的下采样,则在本发明实施例中可以不在原始的RGB图像数据中插入G像素,直接将原始的RGB图像数据中的R像素、G像素和B像素进行组合。
例如,原始的RGB图像数据如下表1所示:
表1
R | R | ||
G | B | G | B |
R | R | ||
G | B | G | B |
采用1/2的下采样,将原始的RGB图像数据中的R像素、G像素和B像素进行组合,得到的RGB图像数据如下表2所示:
表2
{R,G,B} | {R,G,B} |
{R,G,B} | {R,G,B} |
其中,如果该原始的RGB图像为低照度图像,则可以采用像素合并的方式,以提高原始的RGB图像的照度。
例如,在原始的RGB图像数据中插入G像素,得到过采样的RGB图像数据如下表3所示:
表3
R1 | G1 、 | R2 | G2 、 |
G1 | B1 | G2 | B2 |
R3 | G3 、 | R4 | G4 、 |
G3 | B3 | G4 | B4 |
对该过采样的RGB图像数据进行RGB进行像素合并,得到RGB图像数据如下表4所示:
表4
R | G、 |
G | B |
其中,R=R1+R2+R3+R4,G、=G1 、+G2 、+G3 、+G4 、,G=G1+G2+G3+G4,B=B1+B2+B3+B4。
在对图像数据进行处理的整个处理流程中,对过采样的RGB图像数据进行下采样处理并不是必需的步骤。本发明实施例中,对过采样的RGB图像数据进行下采样处理,可以提高RGB图像的清晰度。
其中,终端中包括的RGB-IR传感器获取RGB-IR图像数据,通过红外截止滤光片采集色卡图像,根据色卡图像进行离线标定,得到RGB-IR映射表;根据RGB-IR映射表对RGB-IR图像数据进行去除IR像素处理以及下采样处理,得到RGB图像数据和IR像素;根据IR像素对RGB图像数据进行亮度处理;以及根据RGB图像数据中包括的基本色像素和该IR像素获取拍摄RGB-IR图像数据的终端的曝光时间、白平衡比例和对焦参数,根据曝光时间、白平衡比例和对焦参数,对终端进行设置。
需要说明的是,下采样包括水平下采样和垂直下采样,在步骤204中可以同时进行水平下采样和垂直下采样,参见图2-2;也可以只进行水平下采样,当执行完步骤208时,才对RGB图像数据进行垂直下采样;参见图2-3。也可以只执行步骤204的(1)和(2),不执行步骤(3),当执行完步骤208时才执行步骤204的(3)对过采样的RGB图像数据进行下采样,得到RGB图像数据,参见图2-4。
进一步地,得到RGB图像数据之后,还可以通过以下步骤205和206对RGB图像的亮度进行处理;通过以下步骤207和208对拍摄RGB-IR图像数据的终端进行设置。
步骤205:根据IR像素,获取RGB图像数据的亮度信息;
其中,亮度信息可以为亮度加权值。
在本发明实施例中,终端中存储有IR像素与亮度加权值的对应关系,相应的,步骤205可以为:根据IR像素,从IR像素和亮度加权值的对应关系中获取RGB图像数据的亮度加权值,执行步骤206。
步骤206:根据该RGB图像数据的亮度信息对RGB图像数据进行处理;
其中,将RGB图像数据转换为YCbCr图像数据,YCbCr图像数据中的Y为图像的亮度参数,将Y增加该亮度加权值,得到处理后的YCbCr图像数据,将处理后的YCbCR图像数据转换为处理后的RGB图像数据,从而实现提高该RGB图像数据的亮度。其中,根据该RGB图像数据的亮度信息对RGB图像数据进行处理的过程可以简化为一个矩阵运算。
其中,将RGB图像转换为YcbCr图像数据以及将YcbCr图像数据转换为RGB图像数据的过程均为现有技术,在此不再详细说明。
其中,步骤206是描述了在RGB域对图像的亮度进行处理,然而如果在YCbCr域对图像的亮度进行处理,则不需要执行将RGB图像数据转换为YCbCr图像数据以及将YCbCr图像数据转换为RGB图像数据的步骤,只需要将YCbCr图像数据中的Y增加该亮度加权值,得到处理后的YCbCr图像数据。并且,该过程也可以简化为一个矩阵运算。
步骤207:根据基本色像素和IR像素,获取拍摄RGB-IR图像数据的终端的曝光时间、白平衡比例和对焦参数;
其中,步骤207可以通过以下步骤(1)至(4)实现,包括:
(1):分别对基本色像素和IR像素进行直方图统计和对焦值统计,得到基本色像素直方图统计数据和IR像素直方图统计数据,以及IR像素的对焦值信息和基本色像素的对焦值信息;
(2):根据基本色像素直方图统计数据,确定拍摄RGB-IR图像数据的终端的曝光时间;
具体地,根据基本色像素直方图统计数据,获取基本色像素值最多的基本色像素值范围,根据基本色像素范围,从基本色像素范围和曝光时间的对应关系中获取拍摄RGB-IR图像数据的终端的曝光时间。
(3):根据IR像素直方图统计数据,确定当前的红外强度,根据当前的红外强度,获取终端的白平衡比例;
具体地,根据IR像素直方图统计数据,获取IR像素值最多的IR像素范围,根据IR像素范围,从像素范围和红外强度的对应关系中获取当前的红外强度;根据当前的红外强度,确定当前拍摄图像的光源,根据当前拍摄图像的光源,从光源标识和白平衡比例的对应关系中,获取终端的白平衡比例。
其中,白平衡比例是指基本色像素之间的比例,也即蓝、绿和红色光的比例。
(4):根据IR像素的对焦值信息和基本色像素的对焦值信息,确定对焦参数。
其中,对焦参数包括对焦方向和步长;IR像素的对焦值信息用于标识IR像素的对焦效果,基本色像素的对焦值信息用于标识基本色像素的对焦效果。
在本步骤中,实时调整终端的对焦参数,并获取IR像素的对焦值信息和基本色像素的对焦值信息,直到IR像素的对焦值信息和基本色像素的对焦值信息都满足条件为止。
在本发明实施例中,根据IR像素的对焦值信息和基本色像素的对焦值信息,确定对焦参数,相较于现有技术中的仅根据基本色像素对焦值确定对焦参数相比,本发明确定的对焦参数更准确,且速度更快。
步骤208:根据该曝光时间、白平衡比例和对焦参数,对终端进行设置。
将终端的曝光时间、白平衡比例和对焦参数设置为该获取的曝光时间、白平衡比例和对焦参数,从而实现对终端的自动曝光、自动白平衡和自动对焦的控制。
在本发明实施例中,获取红绿蓝红外RGB-IR图像数据和RGB-IR映射表,RGB-IR映射表用于存储基本色像素与红外IR像素的对应关系,基本色包括红R、绿G或蓝B;根据RGB-IR图像数据和RGB-IR映射表,获取RGB-IR图像数据中包括的IR像素;将RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据。本发明能够将RGB-IR图像数据中包括的IR像素去除,从而还原出RGB图像本来的颜色。
实施例3
本发明实施例提供了一种对图像数据进行处理的装置,参见图3,其中,该装置包括:
第一获取模块301,用于获取红绿蓝红外RGB-IR图像数据和RGB-IR映射表,RGB-IR映射表用于存储基本色像素与红外IR像素的对应关系,基本色包括红R、绿G或蓝B;
第二获取模块302,用于根据RGB-IR图像数据和RGB-IR映射表,获取RGB-IR图像数据中包括的IR像素;
去除模块303,用于将RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据。
进一步地,第一获取模块301,包括:
第一获取单元,用于获取RGB-IR图像数据中包括的基本色像素;
第二获取单元,用于根据基本色像素,从RGB-IR映射表中获取基本色像素对应的IR像素。
进一步地,去除模块303,包括:
去除单元,用于将RGB-IR图像数据中基本色像素对应的IR像素去除,得到原始的RGB图像数据;
插入单元,用于在原始的RGB图像数据中插入G像素,得到过采样的RGB图像数据;
采样单元,用于对过采样的RGB图像数据进行下采样,得到RGB图像数据。
进一步地,装置还包括:
第三获取模块,用于获取色卡图像,色卡图像中包括多个色块;
生成模块,用于根据多个色块中的每个色块包括的基本色像素和IR像素,生成RGB-IR映射表。
进一步地,装置还包括:
第四获取模块,用于根据IR像素,获取RGB图像数据的亮度信息;
处理模块,用于将RGB图像数据的亮度信息对RGB图像数据进行处理。
进一步地,装置还包括:
第五获取模块,用于根据RGB图像数据中包括的基本色像素和IR像素,获取拍摄RGB-IR图像数据的终端的曝光时间、白平衡比例和对焦参数;
设置模块,用于根据曝光时间、白平衡比例和对焦参数,对终端进行设置。
在本发明实施例中,获取红绿蓝红外RGB-IR图像数据和RGB-IR映射表,RGB-IR映射表用于存储基本色像素与红外IR像素的对应关系,基本色包括红R、绿G或蓝B;根据RGB-IR图像数据和RGB-IR映射表,获取RGB-IR图像数据中包括的IR像素;将RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据。本发明能够将RGB-IR图像数据中包括的IR像素去除,从而还原出RGB图像本来的颜色。
实施例4
本发明实施例提供了一种终端,参见图4,该终端包括:处理器401;
所述处理器401,用于获取红绿蓝红外RGB-IR图像数据和RGB-IR映射表,所述RGB-IR映射表用于存储基本色像素与红外IR像素的对应关系,所述基本色包括红R、绿G或蓝B;根据所述RGB-IR图像数据和所述RGB-IR映射表,获取所述RGB-IR图像数据中包括的IR像素;将所述RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据。
进一步地,所述处理器401,还用于获取所述RGB-IR图像数据中包括的基本色像素;根据所述基本色像素,从所述RGB-IR映射表中获取所述基本色像素对应的IR像素。
进一步地,所述处理器401,还用于将所述RGB-IR图像数据中所述基本色像素对应的IR像素去除,得到原始的RGB图像数据;在所述原始的RGB图像数据中插入G像素,得到过采样的RGB图像数据;对所述过采样的RGB图像数据进行下采样,得到RGB图像数据。
进一步地,所述处理器401,还用于获取色卡图像,所述色卡图像中包括多个色块;根据所述多个色块中的每个色块包括的基本色像素和IR像素,生成RGB-IR映射表。
进一步地,所述处理器401,还用于根据所述IR像素,获取所述RGB图像数据的亮度信息;将所述RGB图像数据的亮度信息对所述RGB图像数据进行处理。
进一步地,所述处理器401,还用于根据所述RGB图像数据中包括的基本色像素和所述IR像素,获取拍摄所述RGB-IR图像数据的终端的曝光时间、白平衡比例和对焦参数;根据所述曝光时间、白平衡比例和对焦参数,对所述终端进行设置。
在本发明实施例中,获取红绿蓝红外RGB-IR图像数据和RGB-IR映射表,RGB-IR映射表用于存储基本色像素与红外IR像素的对应关系,基本色包括红R、绿G或蓝B;根据RGB-IR图像数据和RGB-IR映射表,获取RGB-IR图像数据中包括的IR像素;将RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据。本发明能够将RGB-IR图像数据中包括的IR像素去除,从而还原出RGB图像本来的颜色。
需要说明的是:上述实施例提供的图像数据进行处理的装置在图像数据进行处理时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的图像数据进行处理的装置与图像数据进行处理的方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (15)
1.一种对图像数据进行处理的方法,其特征在于,所述方法包括:
获取红绿蓝红外RGB-IR图像数据和RGB-IR映射表,所述RGB-IR映射表用于存储基本色像素与红外IR像素的对应关系,所述基本色包括红R、绿G或蓝B;
根据所述RGB-IR图像数据和所述RGB-IR映射表,获取所述RGB-IR图像数据中包括的IR像素;
将所述RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据;
根据所述RGB-IR图像数据中包括的基本色像素和所述IR像素,获取拍摄所述RGB-IR图像数据的终端的曝光时间、白平衡比例和对焦参数;
根据所述曝光时间、白平衡比例和对焦参数,对所述终端进行设置;
其中,所述获取RGB-IR映射表,包括:
获取当前光源的标识,根据所述当前光源的标识,从光源的标识和光源对应的RGB-IR映射表的对应关系中获取所述当前光源对应的RGB-IR映射表。
2.如权利要求1所述的方法,其特征在于,所述根据所述RGB-IR图像数据和所述RGB-IR映射表,获取所述RGB-IR图像数据中包括的IR像素,包括:
获取所述RGB-IR图像数据中包括的基本色像素;
根据所述基本色像素,从所述RGB-IR映射表中获取所述基本色像素对应的IR像素。
3.如权利要求2所述的方法,其特征在于,所述将所述RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据,包括:
将所述RGB-IR图像数据中所述基本色像素对应的IR像素去除,得到原始的RGB图像数据;
在所述原始的RGB图像数据中插入G像素,得到过采样的RGB图像数据;
对所述过采样的RGB图像数据进行下采样,得到RGB图像数据。
4.如权利要求1所述的方法,其特征在于,所述获取RGB-IR映射表之前,还包括:
获取色卡图像,所述色卡图像中包括多个色块;
根据所述多个色块中的每个色块包括的基本色像素和IR像素,生成RGB-IR映射表。
5.如权利要求1所述的方法,其特征在于,所述将所述RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据之后,还包括:
根据所述IR像素,获取所述RGB图像数据的亮度信息;
将所述RGB图像数据的亮度信息对所述RGB图像数据进行处理。
6.一种对图像数据进行处理的装置,其特征在于,所述装置包括:
第一获取模块,用于获取红绿蓝红外RGB-IR图像数据和RGB-IR映射表,所述RGB-IR映射表用于存储基本色像素与红外IR像素的对应关系,所述基本色包括红R、绿G或蓝B;
第二获取模块,用于根据所述RGB-IR图像数据和所述RGB-IR映射表,获取所述RGB-IR图像数据中包括的IR像素;
去除模块,用于将所述RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据;
第五获取模块,用于根据所述RGB-IR图像数据中包括的基本色像素和所述IR像素,获取拍摄所述RGB-IR图像数据的终端的曝光时间、白平衡比例和对焦参数;
设置模块,用于根据所述曝光时间、白平衡比例和对焦参数,对所述终端进行设置;
所述第一获取模块,还用于获取当前光源的标识,根据所述当前光源的标识,从光源的标识和光源对应的RGB-IR映射表的对应关系中获取所述当前光源对应的RGB-IR映射表。
7.如权利要求6所述的装置,其特征在于,所述第一获取模块,包括:
第一获取单元,用于获取所述RGB-IR图像数据中包括的基本色像素;
第二获取单元,用于根据所述基本色像素,从所述RGB-IR映射表中获取所述基本色像素对应的IR像素。
8.如权利要求7所述的装置,其特征在于,所述去除模块,包括:
去除单元,用于将所述RGB-IR图像数据中所述基本色像素对应的IR像素去除,得到原始的RGB图像数据;
插入单元,用于在所述原始的RGB图像数据中插入G像素,得到过采样的RGB图像数据;
采样单元,用于对所述过采样的RGB图像数据进行下采样,得到RGB图像数据。
9.如权利要求6所述的装置,其特征在于,所述装置还包括:
第三获取模块,用于获取色卡图像,所述色卡图像中包括多个色块;
生成模块,用于根据所述多个色块中的每个色块包括的基本色像素和IR像素,生成RGB-IR映射表。
10.如权利要求6所述的装置,其特征在于,所述装置还包括:
第四获取模块,用于根据所述RGB图像数据中包括的基本色像素和所述IR像素,获取所述RGB图像数据的亮度信息;
处理模块,用于将所述RGB图像数据的亮度信息对所述RGB图像数据进行处理。
11.一种终端,其特征在于,所述终端包括:处理器;
所述处理器,用于获取红绿蓝红外RGB-IR图像数据和RGB-IR映射表,所述RGB-IR映射表用于存储基本色像素与红外IR像素的对应关系,所述基本色包括红R、绿G或蓝B;根据所述RGB-IR图像数据和所述RGB-IR映射表,获取所述RGB-IR图像数据中包括的IR像素;将所述RGB-IR图像数据中包括的IR像素去除,得到RGB图像数据;根据所述RGB-IR图像数据中包括的基本色像素和所述IR像素,获取拍摄所述RGB-IR图像数据的终端的曝光时间、白平衡比例和对焦参数;根据所述曝光时间、白平衡比例和对焦参数,对所述终端进行设置;
所述处理器,还用于获取当前光源的标识,根据所述当前光源的标识,从光源的标识和光源对应的RGB-IR映射表的对应关系中获取所述当前光源对应的RGB-IR映射表。
12.如权利要求11所述的终端,其特征在于,
所述处理器,还用于获取所述RGB-IR图像数据中包括的基本色像素;根据所述基本色像素,从所述RGB-IR映射表中获取所述基本色像素对应的IR像素。
13.如权利要求12所述的终端,其特征在于,
所述处理器,还用于将所述RGB-IR图像数据中所述基本色像素对应的IR像素去除,得到原始的RGB图像数据;在所述原始的RGB图像数据中插入G像素,得到过采样的RGB图像数据;对所述过采样的RGB图像数据进行下采样,得到RGB图像数据。
14.如权利要求11所述的终端,其特征在于,
所述处理器,还用于获取色卡图像,所述色卡图像中包括多个色块;根据所述多个色块中的每个色块包括的基本色像素和IR像素,生成RGB-IR映射表。
15.如权利要求11所述的终端,其特征在于,
所述处理器,还用于根据所述RGB图像数据中包括的基本色像素和所述IR像素,获取所述RGB图像数据的亮度信息;将所述RGB图像数据的亮度信息对所述RGB图像数据进行处理。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510058425.2A CN104639923B (zh) | 2015-02-04 | 2015-02-04 | 一种对图像数据进行处理的方法、装置和终端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510058425.2A CN104639923B (zh) | 2015-02-04 | 2015-02-04 | 一种对图像数据进行处理的方法、装置和终端 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104639923A CN104639923A (zh) | 2015-05-20 |
CN104639923B true CN104639923B (zh) | 2017-08-04 |
Family
ID=53218169
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510058425.2A Active CN104639923B (zh) | 2015-02-04 | 2015-02-04 | 一种对图像数据进行处理的方法、装置和终端 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104639923B (zh) |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106412531B (zh) * | 2015-08-12 | 2019-04-12 | 杭州海康威视数字技术股份有限公司 | 像素阵列构件、图像处理装置及摄像机 |
TWI568263B (zh) * | 2015-08-24 | 2017-01-21 | 鈺立微電子股份有限公司 | 應用於紅綠藍紅外光感測器的影像處理方法及其相關裝置 |
CN105686936B (zh) * | 2016-01-12 | 2017-12-29 | 浙江大学 | 一种基于rgb‐ir相机的声音编码交互系统 |
CN105701811B (zh) * | 2016-01-12 | 2018-05-22 | 浙江大学 | 一种基于rgb‐ir相机的声音编码交互方法 |
CN106296608B (zh) * | 2016-08-08 | 2020-08-18 | 深圳市Tcl高新技术开发有限公司 | 一种基于映射表的鱼眼图像处理方法及系统 |
CN106375740B (zh) * | 2016-09-28 | 2018-02-06 | 华为技术有限公司 | 生成rgb图像的方法、装置和系统 |
CN106488209A (zh) * | 2016-09-29 | 2017-03-08 | 杭州雄迈集成电路技术有限公司 | 一种基于红外环境的rgb‑ir图像传感器的颜色校正方法 |
CN108965654B (zh) * | 2018-02-11 | 2020-12-25 | 浙江宇视科技有限公司 | 基于单传感器的双光谱摄像机系统和图像处理方法 |
CN108377340B (zh) * | 2018-05-10 | 2024-07-05 | 浙江芯劢微电子股份有限公司 | 一种基于rgb-ir传感器日夜模式自动切换方法及装置 |
CN110533709B (zh) * | 2018-05-23 | 2023-02-07 | 杭州海康威视数字技术股份有限公司 | 深度图像获取方法、装置及系统、图像采集设备 |
CN109040720B (zh) * | 2018-07-24 | 2019-11-19 | 浙江大华技术股份有限公司 | 一种生成rgb图像的方法及装置 |
CN111050097B (zh) * | 2018-10-15 | 2022-03-15 | 瑞昱半导体股份有限公司 | 红外线串扰补偿方法及其装置 |
CN111510636B (zh) * | 2019-01-30 | 2021-07-09 | 华为技术有限公司 | 光亮度评价值的获取方法、装置及计算机存储介质 |
CN110290370B (zh) * | 2019-07-05 | 2020-09-18 | 上海富瀚微电子股份有限公司 | 图像处理方法及装置 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7821552B2 (en) * | 2005-12-27 | 2010-10-26 | Sanyo Electric Co., Ltd. | Imaging apparatus provided with imaging device having sensitivity in visible and infrared regions |
KR101767093B1 (ko) * | 2012-12-14 | 2017-08-17 | 한화테크윈 주식회사 | 색감 복원 방법 및 장치 |
CN104113743B (zh) * | 2013-04-18 | 2017-09-15 | 深圳中兴力维技术有限公司 | 低照度下彩色摄像机自动白平衡处理方法及装置 |
-
2015
- 2015-02-04 CN CN201510058425.2A patent/CN104639923B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN104639923A (zh) | 2015-05-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104639923B (zh) | 一种对图像数据进行处理的方法、装置和终端 | |
CN107534735B (zh) | 终端的图像处理方法、装置和终端 | |
CN108712608B (zh) | 终端设备拍摄方法和装置 | |
CN108055452A (zh) | 图像处理方法、装置及设备 | |
CN110033418A (zh) | 图像处理方法、装置、存储介质及电子设备 | |
CN110022469A (zh) | 图像处理方法、装置、存储介质及电子设备 | |
CN108024054A (zh) | 图像处理方法、装置及设备 | |
CN110505411A (zh) | 图像拍摄方法、装置、存储介质及电子设备 | |
CN103716547A (zh) | 一种智能模式的拍照方法 | |
CN102065224B (zh) | 摄像装置和摄像方法 | |
CN105120247A (zh) | 一种白平衡调整方法及电子设备 | |
CN107534727A (zh) | 图像处理装置、摄像装置、图像处理方法及图像处理程序 | |
CN105432068B (zh) | 摄像装置、摄像方法及图像处理装置 | |
CN105432076B (zh) | 摄像装置 | |
CN102457669B (zh) | 图像处理方法 | |
CN106570850B (zh) | 一种图像融合方法 | |
CN110213502A (zh) | 图像处理方法、装置、存储介质及电子设备 | |
CN107534733A (zh) | 摄像装置、该摄像装置的图像处理方法及程序 | |
CN103546730A (zh) | 基于多摄像头的图像感光度增强方法 | |
CN107194900A (zh) | 图像处理方法、装置、计算机可读存储介质和移动终端 | |
CN108141531A (zh) | 摄像装置、图像处理装置及显示装置 | |
CN111598789B (zh) | 一种基于深度学习的稀疏颜色传感器图像重建方法 | |
CN108520493A (zh) | 图像替换的处理方法、装置、存储介质及电子设备 | |
TW201813371A (zh) | 鬼偽影去除系統和方法 | |
CN106550227B (zh) | 一种图像饱和度调整方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |