CN108881740B - 图像方法和装置、电子设备、计算机可读存储介质 - Google Patents
图像方法和装置、电子设备、计算机可读存储介质 Download PDFInfo
- Publication number
- CN108881740B CN108881740B CN201810685638.1A CN201810685638A CN108881740B CN 108881740 B CN108881740 B CN 108881740B CN 201810685638 A CN201810685638 A CN 201810685638A CN 108881740 B CN108881740 B CN 108881740B
- Authority
- CN
- China
- Prior art keywords
- image
- scene
- target
- processing
- label
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/76—Circuitry for compensating brightness variation in the scene by influencing the image signals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/147—Scene change detection
Abstract
本申请涉及一种图像处理方法和装置、电子设备、计算机可读存储介质。所述方法包括:对图像进行检测,当图像曝光过度时,对图像进行曝光减弱处理,对处理后的图像进行目标检测。由于在图像曝光过度时进行曝光减弱处理,再对图像进行目标检测,可以提高目标检测的准确性。
Description
技术领域
本申请涉及计算机技术领域,特别是涉及一种图像处理方法和装置、电子设备、计算机可读存储介质。
背景技术
随着计算机技术的快速发展,使用移动设备拍摄照片的现象越来越频繁。在拍照的过程中或在拍照之后,可以通过神经网络等图像识别技术对图像进行场景检测和目标检测,从而根据检测结果对图像进行优化处理。然而,传统技术中存在目标检测准确性低的问题。
发明内容
本申请实施例提供一种图像处理方法和装置、电子设备、计算机可读存储介质,可以提高目标检测的准确性。
一种图像处理方法,包括:
对图像进行检测;
当所述图像曝光过度时,对所述图像进行曝光减弱处理;
对处理后的图像进行目标检测。
一种图像处理装置,包括:
图像检测模块,用于对图像进行检测;
图像处理模块,用于当所述图像曝光过度时,对所述图像进行曝光减弱处理;
目标检测模块,用于对处理后的图像进行目标检测。
一种电子设备,包括存储器及处理器,所述存储器中储存有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行如下步骤:
对图像进行检测;
当所述图像曝光过度时,对所述图像进行曝光减弱处理;
对处理后的图像进行目标检测。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如下步骤:
对图像进行检测;
当所述图像曝光过度时,对所述图像进行曝光减弱处理;
对处理后的图像进行目标检测。
上述图像处理方法和装置、电子设备、计算机可读存储介质,通过对图像进行检测,当图像曝光过度时,对图像进行曝光减弱处理,对处理后的图像进行目标检测。由于在图像曝光过度时进行曝光减弱处理,再对图像进行目标检测,可以提高目标检测的准确性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为一个实施例中电子设备的内部结构图;
图2为一个实施例中图像处理方法的流程图;
图3为另一个实施例中图像处理方法的流程图;
图4为一个实施例对图像进行场景检测的流程图;
图5为一个实施例中图像处理方法的流程图;
图6为一个实施例中对图像进行目标检测的流程图;
图7为一个实施例中对图像进行处理的流程图;
图8为一个实施例中图像处理装置的结构框图;
图9为一个实施例中图像处理电路的示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
图1为一个实施例中电子设备的内部结构示意图。如图1所示,该电子设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该处理器用于提供计算和控制能力,支撑整个电子设备的运行。存储器用于存储数据、程序等,存储器上存储至少一个计算机程序,该计算机程序可被处理器执行,以实现本申请实施例中提供的适用于电子设备的图像处理方法。存储器可包括非易失性存储介质及内存储器。非易失性存储介质存储有操作系统和计算机程序。该计算机程序可被处理器所执行,以用于实现以下各个实施例所提供的一种图像处理方法。内存储器为非易失性存储介质中的操作系统计算机程序提供高速缓存的运行环境。网络接口可以是以太网卡或无线网卡等,用于与外部的电子设备进行通信。该电子设备可以是手机、平板电脑或者个人数字助理或穿戴式设备等。
图2为一个实施例中图像处理方法的流程图。本实施例中的图像处理方法,以运行于图1中的电子设备上为例进行描述。如图2所示,图像处理方法包括步骤202至步骤206。
步骤202,对图像进行检测。
图像是指电子设备通过摄像头采集的图像。在一个实施例中,图像也可以是存储在电子设备本地的图像,还可以是电子设备从网络下载的图像等。
电子设备对图像进行检测,可以对图像的亮度、对比度、饱和度中的至少一种进行检测,也可以对图像中的场景进行检测。电子设备可以根据图像的检测结果确定图像是否曝光过度。
步骤204,当图像曝光过度时,对图像进行曝光减弱处理。
曝光过度是指因图像采集时光圈过大、底片感光度过高、曝光时间较长或拍摄环境光线太强时所造成的图像失常的现象,具体地可以表现为图像发白。电子设备对图像进行曝光减弱处理,可以消除图像亮度失常的现象,使图像接近真实拍摄的场景。具体地,电子设备可以通过增加图像的亮度和对比度等方式对图像进行曝光减弱处理,减少图像中发白的区域。
在一个实施例中,提供的图像处理方法包括:当图像为预览图像时,曝光减弱处理包括对感光度、光圈和快门速度中的至少一种进行处理。预览图像是指电子设备通过成像设备实时捕捉当前场景的画面生成的。预览图像可以实时展示在电子设备的显示屏上。ISO(Photosensibility,感光度)是指成像设备对光线的明暗程度,感光度越高,对光线的敏感度越高,感光度越低,对光线的敏感度越低。光圈是指成像设备中圆形环孔,光圈越大,进光量越大,曝光量也越大。快门速度是指快门从开启到关闭的时间,快门速度越大,则图像的进光量越大,快门速度越小,则进光量越小。当检测到预览图像曝光过度时,电子设备可以通过降低ISO、缩小光圈、减少快门速度中的至少一种对预览图像进行处理,可以使减弱预览图像中曝光过度的情况,使预览图像正常曝光。
步骤206,对处理后的图像进行目标检测。
目标检测是指根据图像信息反映的特征辨识图像中物体的类别并标定图像中物体的位置的方法。电子设备在对图像进行目标检测时,可将图像的图像特征信息与已存储的目标标签对应的特征信息进行匹配,获取匹配成功的目标标签作为图像的目标标签。电子设备中预存的目标标签可包括:人像、婴儿、猫、狗、美食、文本、蓝天、绿草、沙滩、烟火等。电子设备在对图像进行目标检测时,若图像中仅存在一个目标标签,则将上述目标标签作为图像的目标标签;若电子设备在对图像进行目标检测时,若上述图像中存在多个目标标签,则电子设备可从多个目标标签中选取一个或多个作为目标标签。其中,电子设备可从多个目标标签中选取对应的目标区域面积较大的目标标签作为图像的目标标签;电子设备也可从多个目标标签中选取对应的目标区域清晰度较高的目标标签作为图像的目标标签等。
本申请提供的实施例中,通过对图像进行检测,当图像曝光过度时,对图像进行曝光减弱处理,对处理后的图像进行目标检测。由于在图像曝光过度时进行曝光减弱处理,再对图像进行目标检测,可以提高目标检测的准确性。
如图3所示,在一个实施例中,提供的图像处理方法包括步骤302至步骤308。其中:
步骤302,对图像进行场景检测,得到图像的场景标签。
电子设备可以根据VGG(Visual Geometry Group)、CNN(Convolutional NeuralNetwork)、SSD(single shot multibox detector)、决策树等深度学习算法训练场景识别模型,根据场景识别模型对图像进行场景检测。场景识别模型一般包括输入层、隐层和输出层;输入层用于接收图像的输入;隐层用于对接收到的图像进行处理;输出层用于输出对图像处理的最终结果即输出图像的场景识别结果。
电子设备可以训练用于检测曝光过度场景的神经网络。具体地,在神经网络的训练过程中,可以将曝光过度的图像输入到神经网络中,神经网络对图像进行检测得到第一预测置信度,根据第一预测置信度和第一真实置信度得到第一损失函数,根据第一损失函数对神经网络的参数进行调整,使得训练的神经网络后续可实现对曝光过度的图像进行检测。置信度是被测量参数的测量值的可信程度。该第一真实置信度表示在该训练图像中曝光过度的置信度。在一个实施例中,电子设备可以采用SqueezeNet神经网络训练可用于检测曝光过度场景的神经网络模型。
图像的场景可以是风景、海滩、蓝天、绿草、雪景、烟火、聚光灯、文本、人像、婴儿、猫、狗、美食等,在本申请中,图像的场景还可以是曝光过度场景。图像的场景标签是指图像的场景分类标记。具体地,电子设备可以根据图像的场景识别结果确定图像的场景标签。例如,当图像的场景识别结果为蓝天时,则图像的分类标签为蓝天。电子设备可以根据场景识别模型对电子设备的图像进行场景识别,并根据场景识别结果确定图像的场景标签。
步骤304,当图像的场景标签包含曝光过度标签时,则表示图像曝光过度。
图像的场景标签可以是一个或多个。电子设备在图像的场景标签中包含曝光过度标签时,则可以判断图像曝光过度。
步骤306,当图像曝光过度时,对图像进行曝光减弱处理。
步骤308,对处理后的图像进行目标检测。
本申请实施例中,通过对图像进行场景检测,得到图像的场景标签,当图像的场景标签中包含曝光过度标签时,则表示图像曝光过度,对图像进行曝光减弱处理,对处理后的图像进行目标检测,可以提高图像目标检测的准确性。
如图4所示,在一个实施例中,提供的图像处理方法中对图像进行场景检测,得到图像的场景标签的过程包括步骤402至步骤406。其中:
步骤402,对图像进行场景检测,得到场景检测的初始结果。
电子设备可以根据VGG、SSD、决策树等深度学习算法训练场景识别模型,根据场景识别模型对图像进行场景检测,得到场景识别的初始结果。场景识别的初始结果可以包括场景检测的初始类别及初始类别对应的置信度。例如,图像的场景识别初始结果可以为绿草:置信度为70%、蓝天:置信度为80%、曝光过度:置信度为75%。
步骤404,获取图像的拍摄时间。
拍摄时间是指电子设备通过摄像头采集图像的时间。一般情况下,电子设备在采集图像时会对采集时间进行记录。电子设备可以在获取图像时可以直接获取图像的拍摄时间。
步骤406,根据拍摄时间对场景检测的初始结果进行校正,根据校正结果得到图像的场景标签。
根据拍摄时间可以得到图像中出现某些场景的概率,再结合场景检测的初始结果进行矫正。电子设备可以预存不同的拍摄时间对应的场景类别及场景类别对应的权值。具体地,可以是根据对大量的图像素材进行统计学分析后得出的结果,根据结果相应地为不同的拍摄时间区间匹配对应的场景类别及场景类别对应的权值。例如:拍摄时间为20时至21时之间,“夜景”的权值为9、“蓝天”权值为-5、“逆光”的权值为5,拍摄时间为12时至13时之间,“夜景”的权值为-8、“蓝天”的权值为7、“曝光过度”的权值为8、“海滩”的权值为4,权值的取值范围为[-10,10]。权值越大说明在该图像中出现该场景的概率就越大,权值越小说明在该图像中出现该场景的概率就越小。权值从0开始每增加1,则对应场景的置信度增加1%,同样的,权值从0开始每减少1,则对应的场景的置信度减少1%。则在上述例子,若图像的拍摄时间为12时30分,图像的场景识别初始结果可以为蓝天:置信度为70%、海滩:置信度为80%、曝光过度:置信度为75%,对图像中的场景标签进行调整后可以得到图像的场景标签对应的置信度分别为蓝天:70%*(1+7%)=74.9%、海滩:80*(1+4%)=83.2%、曝光过度:75*(1+8%)=81%。电子设备可以配置置信度阈值,将置信度大于置信度阈值的场景标签作为图像的场景标签,也可以获取置信度从高到低的预设数量个场景标签作为图像的场景标签等,不限于此。
电子设备可以根据不同拍摄时间对应的场景类别及场景类别对应的权值对图像场景识别的初始结果进行校正,调整初始结果中初始类别及对应的置信度并获取各个场景标签对应的最终置信度,从而根据各个场景标签及对应的置信度确定图像的场景标签,可以提高场景检测的准确度。
如图5所示,在一个实施例中,提供的图像处理方法包括步骤502至步骤508。其中:
步骤502,根据图像建立图像的灰度图。
灰度图是指用灰度表示的图像。具体地,电子设备可以获取图像各个像素点的RGB(Red、Green、Blue,红、绿、蓝)三个通道的颜色值,将各个像素点的颜色值转化为灰度值,获取由各个像素点的灰度值组成的灰度图。灰度值的范围可以从0到255,白色为255,黑色为0。颜色值转灰度值的方式可以有多种,例如可以是加权转换法或平均值法等不限于此。
步骤504,根据灰度图检测图像是否曝光过度。
当图像曝光过度时,图像会出现大面积较白的区域,因此,电子设备可以通过检测图像的灰度均值确定图像是否曝光过度。具体地,电子设备可以获取图像的灰度图上各个像素点的灰度值,检测该图像的灰度均值,当图像的灰度均值超过预设值时,则判定图像曝光过度。预设值可以根据实际需求进行设定。在一个实施例中,电子设备还可以检测图像的灰度值方差,根据图像的灰度值方差和灰度均值判定图像是否曝光过度。
步骤506,当图像曝光过度时,对图像进行曝光减弱处理。
步骤508,对处理后的图像进行目标检测。
通过建立图像的灰度图,根据灰度图检测图像是否曝光过度,当图像曝光过度时,对图像进行曝光减弱处理,对处理后的图像进行目标检测,可以提高图像目标检测的准确性。
如图6所示,在一个实施例中,提供的图像处理方法包括步骤602至步骤604。其中:
步骤602,对图像进行目标检测,得到图像的多个目标标签及对应的置信度。
电子设备可以对图像进行目标检测,识别并定位图像中目标主体。电子设备在对图像进行目标检测时,可将图像的图像特征信息与已存储的目标标签对应的特征信息进行匹配,得到图像的多个目标标签及对应的置信度。电子设备中已存储的目标标签可包括:人像、婴儿、猫、狗、美食、文本、蓝天、绿草、沙滩、烟火等。
步骤604,将按照置信度从高到低选取预设数量的目标标签作为图像的目标标签。
预设数量可以根据实际需求进行设定,例如可以是1个、2个、3个等不限于此。电子设备可以将目标标签按照置信度从高到低进行排序,获取预设数量的目标标签作为图像的目标标签。例如,当预设数量为2个时,若电子设备输出图像对应的多个目标标签为:“蓝天”置信度90%,“美食”置信度85%,“海滩”置信度80%,则按照置信度从高到低选取的2个目标标签为蓝天和美食,则将蓝天和美食作为该图像的目标标签。
如图7所示,在一个实施例中,提供的图像处理方法包括步骤702至步骤706。其中:
步骤702,获取图像进行目标检测后得到的目标标签。
电子设备对图像进行目标检测后可以输出图像的目标标签及目标标签对应的标签区域。图像的目标标签可以是1个或多个,则对应的标签区域也可以是1个或多个。
步骤704,根据目标标签获取对应的标签处理参数。
电子设备可以预存不同目标标签对应的标签处理参数。标签处理参数可以包括色彩处理参数、饱和度处理参数、亮度处理参数、对比度处理参数等不限于此。例如,当目标标签为“美食”时,对应的标签处理参数为提高饱和度的参数;当目标标签为“文本”时,对应的标签处理参数可以为增加对比度的参数;当目标标签为“人像”时,对应的标签处理参数可以为减小对比度、增加亮度、增加饱和度的参数等。目标标签对应的标签处理参数可以有多个。在一个实施例中,以图像的原参数为0,图像的标签处理参数的范围为[-100,+100]。例如,当目标标签为“人像”时,对应的标签处理参数可以为对比度:-20、亮度:+10、饱和度:+5等不限于此。
步骤706,根据标签处理参数对图像进行处理。
具体地,电子设备根据标签处理参数对图像中的各个像素点进行处理,电子设备还可以根据标签处理参数对标签区域的各个像素点进行处理。电子设备可以根据不同目标标签对应的标签处理参数对不同标签区域进行处理。从而,可以对图像进行局部处理,提高图像处理的效果。
在一个实施例中,提供了一种图像处理方法,实现该方法的具体步骤如下所述:
首先,电子设备对图像进行检测。电子设备对图像进行检测,可以对图像的亮度、对比度、饱和度中的至少一种进行检测,也可以对图像中的场景进行检测。电子设备可以根据图像的检测结果确定图像是否曝光过度。
可选地,电子设备根据图像建立图像的灰度图,根据灰度图检测图像是否曝光过度。当图像曝光过度时,图像会出现大面积较白的区域,因此,电子设备可以通过检测图像的灰度均值确定图像是否曝光过度。具体地,电子设备可以获取图像的灰度图上各个像素点的灰度值,检测该图像的灰度均值,当图像的灰度均值超过预设值时,则判定图像曝光过度。
可选地,电子设备对图像进行场景检测,得到图像的场景标签,当图像的场景标签包含曝光过度标签时,则表示图像曝光过度。电子设备可以训练用于检测曝光过度场景的神经网络。图像的场景可以是风景、海滩、蓝天、绿草、雪景、烟火、聚光灯、文本、人像、婴儿、猫、狗、美食、曝光过度场景等。电子设备可以根据图像的场景识别结果确定图像的场景标签。电子设备可以采用SqueezeNet神经网络训练可用于检测曝光过度场景的神经网络模型。
可选地,电子设备对图像进行场景检测,得到场景检测的初始结果,获取图像的拍摄时间,根据拍摄时间对场景检测的初始结果进行校正,根据校正结果得到图像的场景标签。电子设备可以预存不同的拍摄时间对应的场景类别及场景类别对应的权值,权值从0开始每增加1,则对应场景的置信度增加1%,同样的,权值从0开始每减少1,则对应的场景的置信度减少1%。电子设备根据不同拍摄时间对图像场景检测的初始结果进行校正,获取各个场景标签对应的最终置信度,从而根据各个场景标签及对应的置信度确定图像的场景标签,可以提高场景检测的准确度。
接着,当图像曝光过度时,电子设备对图像进行曝光减弱处理。电子设备对图像进行曝光减弱处理,可以消除图像亮度失常的现象,使图像接近真实拍摄的场景。具体地,电子设备可以通过增加图像的亮度和对比度等方式对图像进行曝光减弱处理,减少图像中发白的区域。
可选地,当图像为预览图像时,曝光减弱处理包括对感光度、光圈和快门速度中的至少一种进行处理。预览图像是指电子设备通过成像设备实时捕捉当前场景的画面生成的。当检测到预览图像曝光过度时,电子设备可以通过降低ISO、缩小光圈、减少快门速度中的至少一种对预览图像进行处理,可以使减弱预览图像中曝光过度的情况,使预览图像正常曝光。
接着,电子设备对处理后的图像进行目标检测。电子设备在对图像进行目标检测时,可将图像的图像特征信息与已存储的目标标签对应的特征信息进行匹配,获取匹配成功的目标标签作为图像的目标标签。电子设备中预存的目标标签可包括:人像、婴儿、猫、狗、美食、文本、蓝天、绿草、沙滩、烟火等。
可选地,电子设备对图像进行目标检测,得到图像的多个目标标签及对应的置信度,将按照置信度从高到低选取预设数量的目标标签作为图像的目标标签。电子设备在对图像进行目标检测时,可将图像的图像特征信息与已存储的目标标签对应的特征信息进行匹配,得到图像的多个目标标签及对应的置信度。电子设备可以将目标标签按照置信度从高到低进行排序,获取预设数量的目标标签作为图像的目标标签。
可选地,电子设备获取图像进行目标检测后得到的目标标签,根据目标标签获取对应的标签处理参数,根据标签处理参数对图像进行处理。电子设备对图像进行目标检测后可以输出图像的目标标签及目标标签对应的标签区域。电子设备可以预存不同目标标签对应的标签处理参数。标签处理参数可以包括色彩处理参数、饱和度处理参数、亮度处理参数、对比度处理参数等不限于此。电子设备根据标签处理参数对图像中的各个像素点进行处理,电子设备还可以根据标签处理参数对标签区域的各个像素点进行处理。
应该理解的是,虽然图2-7的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-7中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
图8为一个实施例的图像处理装置的结构框图。如图8所示,一种图像处理装置包括:图像检测模块820、图像处理模块840和目标检测模块860。其中:
图像检测模块820,用于对图像进行检测。
图像处理模块840,用于当图像曝光过度时,对图像进行曝光减弱处理。
目标检测模块860,用于对处理后的图像进行目标检测。
在一个实施例中,图像检测模块820还可以用于对图像进行场景检测,得到图像的场景标签,当图像的场景标签包含曝光过度标签时,则表示图像曝光过度。
在一个实施例中,图像检测模块820还可以用于对图像进行场景检测,得到场景检测的初始结果,获取图像的拍摄时间,根据拍摄时间对场景检测的初始结果进行校正,根据校正结果得到图像的场景标签。
在一个实施例中,图像检测模块820还可以用于根据图像建立图像的灰度图,根据灰度图检测图像是否曝光过度。
在一个实施例中,图像处理模块840还可以用于当图像为预览图像时,曝光减弱处理包括对感光度、光圈和快门速度中的至少一种进行处理。
在一个实施例中,目标检测模块860还可以用于对图像进行目标检测,得到图像的多个目标标签及对应的置信度,将按照置信度从高到低选取预设数量的目标标签作为图像的目标标签。
在一个实施例中,目标检测模块860还可以用于获取图像进行目标检测后得到的目标标签,根据目标标签获取对应的标签处理参数,根据标签处理参数对图像进行处理。
本申请实施例所提供的图像处理装置,可以对图像进行检测,当图像曝光过度时,对图像进行曝光减弱处理,对处理后的图像进行目标检测。由于在图像曝光过度时进行曝光减弱处理,再对图像进行目标检测,可以提高目标检测的准确性。
上述图像处理装置中各个模块的划分仅用于举例说明,在其他实施例中,可将图像处理装置按照需要划分为不同的模块,以完成上述图像处理装置的全部或部分功能。
关于图像处理装置的具体限定可以参见上文中对于图像处理方法的限定,在此不再赘述。上述图像处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
本申请实施例中提供的图像处理装置中的各个模块的实现可为计算机程序的形式。该计算机程序可在终端或服务器上运行。该计算机程序构成的程序模块可存储在终端或服务器的存储器上。该计算机程序被处理器执行时,实现本申请实施例中所描述方法的步骤。
本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质,当所述计算机可执行指令被一个或多个处理器执行时,使得所述处理器执行图像处理方法的步骤。
一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行图像处理方法。
本申请实施例还提供一种电子设备。上述电子设备中包括图像处理电路,图像处理电路可以利用硬件和/或软件组件实现,可包括定义ISP(Image SignalProcessing,图像信号处理)管线的各种处理单元。图9为一个实施例中图像处理电路的示意图。如图9所示,为便于说明,仅示出与本申请实施例相关的图像处理技术的各个方面。
如图9所示,图像处理电路包括ISP处理器940和控制逻辑器950。成像设备910捕捉的图像数据首先由ISP处理器940处理,ISP处理器940对图像数据进行分析以捕捉可用于确定和/或成像设备910的一个或多个控制参数的图像统计信息。成像设备910可包括具有一个或多个透镜912和图像传感器914的照相机。图像传感器914可包括色彩滤镜阵列(如Bayer滤镜),图像传感器914可获取用图像传感器914的每个成像像素捕捉的光强度和波长信息,并提供可由ISP处理器940处理的一组原始图像数据。传感器920(如陀螺仪)可基于传感器920接口类型把采集的图像处理的参数(如防抖参数)提供给ISP处理器940。传感器920接口可以利用SMIA(Standard Mobile Imaging Architecture,标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。
此外,图像传感器914也可将原始图像数据发送给传感器920,传感器920可基于传感器920接口类型把原始图像数据提供给ISP处理器940,或者传感器920将原始图像数据存储到图像存储器930中。
ISP处理器940按多种格式逐个像素地处理原始图像数据。例如,每个图像像素可具有8、10、12或14比特的位深度,ISP处理器940可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中,图像处理操作可按相同或不同的位深度精度进行。
ISP处理器940还可从图像存储器930接收图像数据。例如,传感器920接口将原始图像数据发送给图像存储器930,图像存储器930中的原始图像数据再提供给ISP处理器940以供处理。图像存储器930可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器,并可包括DMA(Direct Memory Access,直接直接存储器存取)特征。
当接收到来自图像传感器914接口或来自传感器920接口或来自图像存储器930的原始图像数据时,ISP处理器940可进行一个或多个图像处理操作,如时域滤波。处理后的图像数据可发送给图像存储器930,以便在被显示之前进行另外的处理。ISP处理器940从图像存储器930接收处理数据,并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。ISP处理器940处理后的图像数据可输出给显示器970,以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit,图形处理器)进一步处理。此外,ISP处理器940的输出还可发送给图像存储器930,且显示器970可从图像存储器930读取图像数据。在一个实施例中,图像存储器930可被配置为实现一个或多个帧缓冲器。此外,ISP处理器940的输出可发送给编码器/解码器960,以便编码/解码图像数据。编码的图像数据可被保存,并在显示于显示器970设备上之前解压缩。编码器/解码器960可由CPU或GPU或协处理器实现。
ISP处理器940确定的统计数据可发送给控制逻辑器950单元。例如,统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜912阴影校正等图像传感器914统计信息。控制逻辑器950可包括执行一个或多个例程(如固件)的处理器和/或微控制器,一个或多个例程可根据接收的统计数据,确定成像设备910的控制参数及ISP处理器940的控制参数。例如,成像设备910的控制参数可包括传感器920控制参数(例如增益、曝光控制的积分时间、防抖参数等)、照相机闪光控制参数、透镜912控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如,在RGB处理期间)的增益水平和色彩校正矩阵,以及透镜912阴影校正参数。
电子设备根据上述图像处理技术可以实现本申请实施例中所描述的图像处理方法。
本申请所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。合适的非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM),它用作外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本申请专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (12)
1.一种图像处理方法,其特征在于,包括:
对图像进行场景检测,得到场景检测的初始结果;
获取所述图像的拍摄时间,根据预存的不同拍摄时间对应的场景类别以及场景类别对应的权值对所述场景检测的初始结果进行校正,调整所述初始结果中初始类别以及初始类别对应的置信度获取到各个场景类别对应的最终置信度,根据各个场景类别以及对应的最终置信度得到所述图像的场景标签;当所述图像的场景标签包含曝光过度标签时,则表示所述图像曝光过度;
当所述图像曝光过度时,对所述图像进行曝光减弱处理;
对处理后的图像进行目标检测。
2.根据权利要求1所述的方法,其特征在于,所述对图像进行检测,包括:
根据图像建立所述图像的灰度图;
根据所述灰度图检测所述图像是否曝光过度。
3.根据权利要求1至2中任一项所述的方法,其特征在于,所述方法还包括:
当所述图像为预览图像时,所述曝光减弱处理包括对感光度、光圈和快门速度中的至少一种进行处理。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
对所述图像进行目标检测,得到所述图像的多个目标标签及对应的置信度;
将按照置信度从高到低选取预设数量的目标标签作为所述图像的目标标签。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取所述图像进行目标检测后得到的目标标签;
根据所述目标标签获取对应的标签处理参数;
根据所述标签处理参数对所述图像进行处理。
6.一种图像处理装置,其特征在于,包括:
图像检测模块,用于对图像进行场景检测,得到场景检测的初始结果;获取所述图像的拍摄时间,根据预存的不同拍摄时间对应的场景类别以及场景类别对应的权值对所述场景检测的初始结果进行校正,调整所述初始结果中初始类别以及初始类别对应的置信度获取到各个场景类别对应的最终置信度,根据各个场景类别以及对应的最终置信度得到所述图像的场景标签;当所述图像的场景标签包含曝光过度标签时,则表示所述图像曝光过度;
图像处理模块,用于当所述图像曝光过度时,对所述图像进行曝光减弱处理;
目标检测模块,用于对处理后的图像进行目标检测。
7.根据权利要求6所述的装置,其特征在于,
所述图像检测模块,还用于根据图像建立所述图像的灰度图;根据所述灰度图检测所述图像是否曝光过度。
8.根据权利要求6至7中任一项所述的装置,其特征在于,
所述图像处理模块,还用于当所述图像为预览图像时,所述曝光减弱处理包括对感光度、光圈和快门速度中的至少一种进行处理。
9.根据权利要求6所述的装置,其特征在于,
所述目标检测模块,还用于对所述图像进行目标检测,得到所述图像的多个目标标签及对应的置信度;
将按照置信度从高到低选取预设数量的目标标签作为所述图像的目标标签。
10.根据权利要求6所述的装置,其特征在于,
所述目标检测模块,还用于获取所述图像进行目标检测后得到的目标标签;根据所述目标标签获取对应的标签处理参数;根据所述标签处理参数对所述图像进行处理。
11.一种电子设备,包括存储器及处理器,所述存储器中储存有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行如权利要求1至5中任一项所述的图像处理方法的步骤。
12.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至5中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810685638.1A CN108881740B (zh) | 2018-06-28 | 2018-06-28 | 图像方法和装置、电子设备、计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810685638.1A CN108881740B (zh) | 2018-06-28 | 2018-06-28 | 图像方法和装置、电子设备、计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108881740A CN108881740A (zh) | 2018-11-23 |
CN108881740B true CN108881740B (zh) | 2021-03-02 |
Family
ID=64295551
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810685638.1A Active CN108881740B (zh) | 2018-06-28 | 2018-06-28 | 图像方法和装置、电子设备、计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108881740B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111291778B (zh) * | 2018-12-07 | 2021-07-06 | 马上消费金融股份有限公司 | 深度分类模型的训练方法、曝光异常检测方法以及装置 |
CN111212243B (zh) * | 2020-02-19 | 2022-05-20 | 深圳英飞拓智能技术有限公司 | 一种用于混行检测的自动曝光调节系统 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6337927B1 (en) * | 1999-06-04 | 2002-01-08 | Hewlett-Packard Company | Approximated invariant method for pattern detection |
CN101137012A (zh) * | 2006-07-25 | 2008-03-05 | 富士胶片株式会社 | 拍摄装置、方法及程序 |
CN102959551A (zh) * | 2011-04-25 | 2013-03-06 | 松下电器产业株式会社 | 图像处理装置 |
CN103533244A (zh) * | 2013-10-21 | 2014-01-22 | 深圳市中兴移动通信有限公司 | 拍摄装置及其自动视效处理拍摄方法 |
CN106101547A (zh) * | 2016-07-06 | 2016-11-09 | 北京奇虎科技有限公司 | 一种图像数据的处理方法、装置和移动终端 |
CN106357983A (zh) * | 2016-11-15 | 2017-01-25 | 上海传英信息技术有限公司 | 拍摄参数调整方法及用户终端 |
JP2017068703A (ja) * | 2015-09-30 | 2017-04-06 | 富士フイルム株式会社 | 画像処理装置、画像処理方法、プログラムおよび記録媒体 |
CN107622281A (zh) * | 2017-09-20 | 2018-01-23 | 广东欧珀移动通信有限公司 | 图像分类方法、装置、存储介质及移动终端 |
CN107742274A (zh) * | 2017-10-31 | 2018-02-27 | 广东欧珀移动通信有限公司 | 图像处理方法、装置、计算机可读存储介质和电子设备 |
CN108090497A (zh) * | 2017-12-28 | 2018-05-29 | 广东欧珀移动通信有限公司 | 视频分类方法、装置、存储介质及电子设备 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103970830B (zh) * | 2014-03-31 | 2017-06-16 | 小米科技有限责任公司 | 信息推荐方法和装置 |
CN104104911B (zh) * | 2014-07-04 | 2017-09-29 | 华中师范大学 | 全景图像生成过程中的时间戳消除和重置方法及系统 |
CN105872351A (zh) * | 2015-12-08 | 2016-08-17 | 乐视移动智能信息技术(北京)有限公司 | 逆光场景的照片拍摄方法和装置 |
CN106845383B (zh) * | 2017-01-16 | 2023-06-06 | 腾讯科技(上海)有限公司 | 人头检测方法和装置 |
-
2018
- 2018-06-28 CN CN201810685638.1A patent/CN108881740B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6337927B1 (en) * | 1999-06-04 | 2002-01-08 | Hewlett-Packard Company | Approximated invariant method for pattern detection |
CN101137012A (zh) * | 2006-07-25 | 2008-03-05 | 富士胶片株式会社 | 拍摄装置、方法及程序 |
CN102959551A (zh) * | 2011-04-25 | 2013-03-06 | 松下电器产业株式会社 | 图像处理装置 |
CN103533244A (zh) * | 2013-10-21 | 2014-01-22 | 深圳市中兴移动通信有限公司 | 拍摄装置及其自动视效处理拍摄方法 |
JP2017068703A (ja) * | 2015-09-30 | 2017-04-06 | 富士フイルム株式会社 | 画像処理装置、画像処理方法、プログラムおよび記録媒体 |
CN106101547A (zh) * | 2016-07-06 | 2016-11-09 | 北京奇虎科技有限公司 | 一种图像数据的处理方法、装置和移动终端 |
CN106357983A (zh) * | 2016-11-15 | 2017-01-25 | 上海传英信息技术有限公司 | 拍摄参数调整方法及用户终端 |
CN107622281A (zh) * | 2017-09-20 | 2018-01-23 | 广东欧珀移动通信有限公司 | 图像分类方法、装置、存储介质及移动终端 |
CN107742274A (zh) * | 2017-10-31 | 2018-02-27 | 广东欧珀移动通信有限公司 | 图像处理方法、装置、计算机可读存储介质和电子设备 |
CN108090497A (zh) * | 2017-12-28 | 2018-05-29 | 广东欧珀移动通信有限公司 | 视频分类方法、装置、存储介质及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN108881740A (zh) | 2018-11-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108805103B (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN108764208B (zh) | 图像处理方法和装置、存储介质、电子设备 | |
CN108777815B (zh) | 视频处理方法和装置、电子设备、计算机可读存储介质 | |
CN110149482B (zh) | 对焦方法、装置、电子设备和计算机可读存储介质 | |
CN109767467B (zh) | 图像处理方法、装置、电子设备和计算机可读存储介质 | |
CN108764370B (zh) | 图像处理方法、装置、计算机可读存储介质和计算机设备 | |
CN108810413B (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN108810418B (zh) | 图像处理方法、装置、移动终端及计算机可读存储介质 | |
WO2019233393A1 (zh) | 图像处理方法和装置、存储介质、电子设备 | |
CN110276767B (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
US10896323B2 (en) | Method and device for image processing, computer readable storage medium, and electronic device | |
CN110572573B (zh) | 对焦方法和装置、电子设备、计算机可读存储介质 | |
CN108875619B (zh) | 视频处理方法和装置、电子设备、计算机可读存储介质 | |
CN110473185B (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN108805198B (zh) | 图像处理方法、装置、计算机可读存储介质和电子设备 | |
CN110536068B (zh) | 对焦方法和装置、电子设备、计算机可读存储介质 | |
CN108897786B (zh) | 应用程序的推荐方法、装置、存储介质及移动终端 | |
CN108804658B (zh) | 图像处理方法和装置、存储介质、电子设备 | |
CN108198152B (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN108961302B (zh) | 图像处理方法、装置、移动终端及计算机可读存储介质 | |
CN110290323B (zh) | 图像处理方法、装置、电子设备和计算机可读存储介质 | |
CN108765033B (zh) | 广告信息推送方法和装置、存储介质、电子设备 | |
CN108805265B (zh) | 神经网络模型处理方法和装置、图像处理方法、移动终端 | |
CN108848306B (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN109712177B (zh) | 图像处理方法、装置、电子设备和计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |