CN108848306A - 图像处理方法和装置、电子设备、计算机可读存储介质 - Google Patents
图像处理方法和装置、电子设备、计算机可读存储介质 Download PDFInfo
- Publication number
- CN108848306A CN108848306A CN201810662694.3A CN201810662694A CN108848306A CN 108848306 A CN108848306 A CN 108848306A CN 201810662694 A CN201810662694 A CN 201810662694A CN 108848306 A CN108848306 A CN 108848306A
- Authority
- CN
- China
- Prior art keywords
- image
- captured
- shooting
- target
- detection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
Abstract
本申请涉及一种图像处理方法和装置、电子设备、计算机可读存储介质。所述方法包括:对待拍摄图像进行分类检测,得到待拍摄图像的分类标签,根据分类标签对待拍摄图像进行处理,对处理后的待拍摄图像进行拍摄得到拍摄图像,对拍摄图像进行目标检测。由于可以根据图像的分类检测结果对图像进行处理后再拍摄,对拍摄的图像进行目标检测,可以提高图像检测的准确性。
Description
技术领域
本申请涉及计算机技术,特别是涉及一种图像处理方法和装置、电子设备、计算机可读存储介质。
背景技术
随着计算机技术的快速发展,使用移动设备拍摄图像的现象越来越频繁。人们可以在拍摄过程中对待拍摄的图像进行检测,根据图像检测结果对图像进行处理,从而拍摄到处理效果更好的图像。
然而,传统技术中存在图像检测准确率低问题。
发明内容
本申请实施例提供一种图像处理方法、装置、电子设备、计算机可读存储介质,可以提高图像检测的准确性。
一种图像处理方法,包括:
对待拍摄图像进行分类检测,得到所述待拍摄图像的分类标签;
根据所述分类标签对所述待拍摄图像进行处理;
对处理后的待拍摄图像进行拍摄得到拍摄图像;
对所述拍摄图像进行目标检测。
一种图像处理装置,包括:
分类检测模块,用于对待拍摄图像进行分类检测,得到所述待拍摄图像的分类标签;
处理模块,用于根据所述分类标签对所述待拍摄图像进行处理;
图像拍摄模块,用于对处理后的待拍摄图像进行拍摄得到拍摄图像;
目标检测模块,对所述拍摄图像进行目标检测。
一种电子设备,包括存储器及处理器,所述存储器中储存有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行如下步骤:
对待拍摄图像进行分类检测,得到所述待拍摄图像的分类标签;
根据所述分类标签对所述待拍摄图像进行处理;
对处理后的待拍摄图像进行拍摄得到拍摄图像;
对所述拍摄图像进行目标检测。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如下步骤:
对待拍摄图像进行分类检测,得到所述待拍摄图像的分类标签;
根据所述分类标签对所述待拍摄图像进行处理;
对处理后的待拍摄图像进行拍摄得到拍摄图像;
对所述拍摄图像进行目标检测。
上述图像处理方法和装置、电子设备、计算机可读存储介质,通过对待拍摄图像进行分类检测,得到待拍摄图像的分类标签,根据分类标签对待拍摄图像进行处理,对处理后的待拍摄图像进行拍摄得到拍摄图像,对拍摄图像进行目标检测。由于可以根据图像的分类检测结果对图像进行处理后再拍摄,对拍摄的图像进行目标检测,可以提高图像检测的准确性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为一个实施例中电子设备的内部结构示意图;
图2为一个实施例中图像处理方法的流程图;
图3为一个实施例中对图像进行处理的流程图;
图4为另一个实施例中对图像进行处理的流程图;
图5为一个实施例中对图像进行分类检测的流程图;
图6为一个实施例中调整图像分类检测结果的流程图;
图7为一个实施例中图像处理装置的结构框图;
图8为一个实施例中图像处理电路的示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
图1为一个实施例中电子设备的内部结构示意图。如图1所示,该电子设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该处理器用于提供计算和控制能力,支撑整个电子设备的运行。存储器用于存储数据、程序等,存储器上存储至少一个计算机程序,该计算机程序可被处理器执行,以实现本申请实施例中提供的适用于电子设备的图像处理方法。存储器可包括非易失性存储介质及内存储器。非易失性存储介质存储有操作系统和计算机程序。该计算机程序可被处理器所执行,以用于实现以下各个实施例所提供的一种图像处理方法。内存储器为非易失性存储介质中的操作系统计算机程序提供高速缓存的运行环境。网络接口可以是以太网卡或无线网卡等,用于与外部的电子设备进行通信。该电子设备可以是手机、平板电脑或者个人数字助理或穿戴式设备等。
图2为一个实施例中图像处理方法的流程图。本实施例中的图像处理方法,以运行于图1中的电子设备上为例进行描述。如图2所示,图像处理方法包括步骤202至步骤208。
步骤202,对待拍摄图像进行分类检测,得到待拍摄图像的分类标签。
待拍摄图像是指电子设备通过成像设备实时捕捉当前场景的画面生成的。待拍摄图像可以实时展示在电子设备的显示屏上。电子设备对待拍摄图像进行场景识别,可以根据VGG(Visual Geometry Group)、CNN(Convolutional Neural Network)、SSD(singleshot multibox detector)、决策树(Decision Tree)等深度学习算法训练场景识别模型,根据场景识别模型对待拍摄图像进行分类检测。场景识别模型一般包括输入层、隐层和输出层;输入层用于接收图像的输入;隐层用于对接收到的图像进行处理;输出层用于输出对图像处理的最终结果即输出图像的场景识别结果。
图像的分类场景可以是风景、海滩、蓝天、绿草、雪景、烟火、聚光灯、文本、人像、婴儿、猫、狗、美食等。待拍摄图像的分类标签是指对待拍摄图像的分类场景标记。具体地,电子设备可以根据待拍摄图像的分类检测结果确定待拍摄图像的分类标签。例如,当待拍摄图像的场景识别结果为蓝天时,则图像的分类标签为蓝天。
电子设备可以在获取成像设备捕捉的待拍摄图像后,根据场景识别模型对待拍摄图像进行分类检测,并根据场景识别结果确定待拍摄图像的分类标签。
步骤204,根据分类标签对待拍摄图像进行处理。
电子设备根据待拍摄图像的分类标签可以对待拍摄图像进行全局处理。具体地,电子设备对待拍摄图像进行的全局处理可以是色彩优化处理。电子设备可以预存不同分类标签对应的优化参数。优化参数可以包括色彩处理参数、饱和度处理参数、亮度处理参数、对比度处理参数等不限于此。例如,当分类标签为“蓝天”时,对应的优化参数可以是提高饱和度的参数;当分类标签为“文本”时,对应的优化参数可以是提高对比度的参数等。电子设备可以根据待拍摄图像的分类标签获取对应的优化参数,根据优化参数对待拍摄图像进行优化处理。
步骤206,对处理后的待拍摄图像进行拍摄得到拍摄图像。
拍摄图像是指电子设备通过摄像头采集待拍摄图像所形成的图像。拍摄图像可以存储在电子设备中,也可以上传并分享到网络中。电子设备可以接收用户触发的拍摄指令,根据拍摄指令对处理后的待拍摄图像进行拍摄。拍摄指令可以是用户通过点击显示屏上的按钮生成的,也可以是用户通过按压电子设备的控件生成的,电子设备获取对待拍摄图像的拍摄指令。在一个实施例中,电子设备也可以采用声控、表情控制、对焦拍摄等方式对待拍摄图像进行拍摄,对应地,在电子设备接收预设声音、检测到预设表情或对焦成功时可以生成拍摄指令,对待拍摄图像进行拍摄。
步骤208,对拍摄图像进行目标检测。
目标检测是指根据图像信息反映的特征辨识图像中物体的类别并标定图像中物体的位置的方法。电子设备在对拍摄图像进行目标检测时,可将拍摄图像的图像特征信息与已存储的目标标签对应的特征信息进行匹配,获取匹配成功的目标标签作为图像的目标标签。电子设备中预存的目标标签可包括:人像、婴儿、猫、狗、美食、文本、蓝天、绿草、沙滩、烟火等。电子设备在对拍摄图像进行目标检测时,若拍摄图像中仅存在一个目标标签,则将上述目标标签作为拍摄图像的目标标签;若电子设备在对拍摄图像进行目标检测时,若上述拍摄图像中存在多个目标标签,则电子设备可从多个目标标签中选取一个或多个作为目标标签。其中,电子设备可从多个目标标签中选取对应的目标区域面积较大的目标标签作为拍摄图像的目标标签;电子设备也可从多个目标标签中选取对应的目标区域清晰度较高的目标标签作为拍摄图像的目标标签等。
本申请提供的实施例中,通过对待拍摄图像进行分类检测,得到待拍摄图像的分类标签,根据分类标签对待拍摄图像进行处理,对处理后的待拍摄图像进行拍摄得到拍摄图像,对拍摄图像进行目标检测。由于在拍摄过程中只对图像进行分类检测,可以提高图像检测的效率,减少拍摄过程中图像检测的时间1,根据图像的分类检测结果对图像进行处理后再拍摄,对拍摄的图像进行目标检测,可以提高图像检测的时效性和准确性。
如图3所示,在一个实施例中,提供的图像处理方法还包括步骤302至步骤304。其中:
步骤302,获取对拍摄图像进行目标检测得到的目标检测结果。
目标检测结果可以包括拍摄图像的目标标签及对应的标签区域。电子设备对拍摄图像进行目标检测后可以输出拍摄图像的目标标签及目标标签对应的标签位置。拍摄图像的目标标签可以是1个或多个,则对应的标签区域也可以是1个或多个。
步骤304,根据目标检测结果对拍摄图像进行处理。
电子设备可以根据目标检测结果中的目标标签获取对应的目标处理参数,根据目标处理参数对与目标标签对应的标签区域进行局部处理。
在一个实施例中,如图4所示,根据目标检测结果对拍摄图像进行处理的过程包括步骤402至步骤406。其中:
步骤402,获取对拍摄图像进行目标检测后得到的目标标签及对应的标签区域。
步骤404,根据目标标签获取对应的目标处理参数。
电子设备可以预存不同目标标签对应的目标处理参数。目标处理参数可以包括色彩处理参数、饱和度处理参数、亮度处理参数、对比度处理参数等不限于此。目标处理参数还可以包括虚化处理、白平衡处理、色温处理等对应的参数。例如,当目标标签为“美食”时,对应的目标处理参数为提高饱和度的参数;当目标标签为“人像”时,对应的目标处理参数可以为减小对比度、增加亮度的参数,也可以为对背景区域进行虚化处理的参数等。目标标签对应的目标处理参数可以有多个。
步骤406,根据目标处理参数对标签区域进行处理。
具体地,电子设备根据目标处理参数对标签区域的各个像素点进行处理。在一个实施例中,电子设备也可以根据目标处理参数对标签区域外的各个像素点进行处理。电子设备可以根据不同目标标签对应的目标处理参数对不同标签区域进行处理。电子设备还可以设置面积阈值,当拍摄图像中标签区域的面积小于面积阈值时,可以不对该标签区域进行处理,只获取面积大于面积阈值的标签区域,并获取该标签区域对应的目标处理参数,对该标签区域进行处理。
电子设备根据对拍摄图像的目标检测结果,获取目标标签对应的目标处理参数对标签区域进行局部处理,可以提高图像处理的效果。
如图5所示,在一个实施例中,提供的图像处理方法还包括步骤502至步骤504。其中:
步骤502,根据分类检测模型对待拍摄图像进行分类检测,得到各分类标签对应的置信度。
置信度是被测量参数的测量值的可信程度。电子设备对待拍摄图像进行分类检测,获取该待拍摄图像的分类标签及分类标签对应的置信度。电子设备可采用图像分类技术对上述待拍摄图像进行分类检测。图像分类是指根据图像信息反映的特征,将图像或图像区域划分为若干类别中某一类的方法。电子设备在根据图像分类技术对待拍摄图像进行场景识别包括:电子设备中可预存有多个分类标签对应的图像特征信息,在获取到待拍摄图像后,电子设备可将该待拍摄图像的图像特征信息与已存储的图像特征信息分别进行匹配,获取与待拍摄图像的特征信息匹配的分类标签及分类标签对应的置信度。
可选地,电子设备中预存的分类标签可包括:风景、海滩、蓝天、绿草、雪景、夜景、黑暗、逆光、日落、烟火、聚光灯、室内、微距、文本、人像、婴儿、猫、狗、美食等。进一步地,可将上述场景标签分为背景标签和前景标签,上述背景标签可包括:风景、海滩、蓝天、绿草、雪景、夜景、黑暗、逆光、日落、烟火、聚光灯、室内;上述前景标签可包括:微距、文本、人像、婴儿、猫、狗、美食等。
步骤504,将置信度最高的分类标签作为待拍摄图像的分类标签。
电子设备在将待拍摄像的图像特征信息与已存储的图像特征信息分别进行匹配时,若仅有一个匹配成功的分类标签,则将上述匹配成功的分类标签作为该待拍摄图像的分类标签;若有多个匹配成功的分类标签,则电子设备可以根据各个分类标签对应的置信度,选择置信度最高的分类标签作为待拍摄图像的分类标签。
如图6所示,在一个实施例中,提供的图像处理方法还包括步骤602至步骤606。其中:
步骤602,获取拍摄待拍摄图像的地址信息。
一般情况下,电子设备会对每次拍照的地点进行记录,一般采用GPS(GlobalPositioning System,全球定位系统)来进行记录地址信息。电子设备可以获取待拍摄图像所记录的地址信息。
步骤604,根据地址信息获取对应的位置信息,根据位置信息调整待拍摄图像的各分类标签对应的置信度。
电子设备根据地址信息可以得到电子设备采集待拍摄图像时的位置信息。例如当GPS检测到拍摄的地址信息为北纬109.408984,东经18.294898时,电子设备可以根据地址信息获取对应的位置信息为海南三亚湾海滩。电子设备可以预存不同位置信息对应的分类标签及分类标签对应的权重,根据分类标签的权重调整待拍摄图像中场景标签对应的置信度。具体地,场景标签对应的权重可以是根据对大量的图像素材进行统计学分析后得出的结果,根据结果相应地为不同的位置信息匹配对应的场景标签及场景标签对应的权值。例如,根据对大量的图像素材进行统计学分析后得出,当位置信息为“海滩”时,则与地址为“海滩”对应的场景为“沙滩”的权值为9,“蓝天”的权值为8,“风景”的权值为7,“雪景”的权值为-8,“绿草”的权值为-7,权值的取值范围为[-10,10]。权值越大说明在该图像中出现该场景的概率就越大,权值越小说明在该图像中出现该场景的概率就越小。权值从0开始每增加1,则对应场景的置信度增加1%,同样的,权值从0开始每减少1,则对应的场景的置信度减少1%。
步骤606,将置信度最高的分类标签作为待拍摄图像的分类标签。
通过根据待拍摄图像的地址信信息得到位置信息,获取该位置信息下各分类标签对应的权值,对图像的分类标签的置信度进行调整,将置信度最高的分类标签作为待拍摄图像的分类,可以使图像的场景标签的置信度更加准确,从而提高图像分类标签的准确性。
在一个实施例中,提供的图像处理方法还包括:对拍摄图像进行目标检测,得到拍摄图像的多个目标标签及对应的置信度;将按照置信度从高到低选取的预设数量的目标标签作为拍摄图像的目标标签。
预设数量可以根据实际需求进行设定,例如可以是1个、2个、3个等不限于此。电子设备可以对拍摄图像进行目标检测,识别并定位图像中目标主体。电子设备在对图像进行目标检测时,可将拍摄图像的图像特征信息与已存储的目标标签对应的特征信息进行匹配,得到拍摄图像的多个目标标签及对应的置信度,电子设备可以将目标标签按照置信度从高到低进行排序,获取预设数量的目标标签作为拍摄图像的目标标签。电子设备中已存储的目标标签可包括:人像、婴儿、猫、狗、美食、文本、蓝天、绿草、沙滩、烟火等。例如,当预设数量为2个时,若电子设备输出拍摄图像对应的多个目标标签为:“蓝天”置信度90%,“美食”置信度85%,“海滩”置信度80%,则按照置信度从高到低选取的2个目标标签为蓝天和美食,则将蓝天和美食作为该拍摄图像的目标标签。
在一个实施例中,提供的图像处理方法还包括:根据拍摄图像的分类标签调整所述拍摄图像的多个目标标签对应的置信度;将置信度最高的目标标签作为拍摄图像的目标标签。
电子设备可以预先为不同分类标签匹配对应的目标标签及目标标签对应的权值。例如,根据对大量的图像素材进行统计学分析后得出,当分类标签为“逆光”时,则“海滩”的权值为7,“草地”的权值为4,“蓝天”的权值为6,“美食”的权值为-8,权值的取值范围为[-10,10]。权值从0开始每增加1,则对应场景的置信度增加1%,同样的,权值从0开始每减少1,则对应的场景的置信度减少1%。则在上述例子中,对拍摄图像中的目标标签进行调整后可以得到拍摄图像的目标标签对应的置信度分别为蓝天:90%*(1+6%)=95.4%、美食:85%*(1-8%)=78.5%、海滩:80%*(1+7%)=85.6%,则电子设备可以将置信度最高的蓝天作为拍摄图像的目标标签,也可以将置信度最高的2个目标标签即蓝天和海滩作为拍摄图像的目标标签。
电子设备可以根据拍摄图像的分类标签调整拍摄图像的多个目标标签对应的置信度,将置信度较高的目标标签作为该拍摄图像的目标标签,也可以将按照置信度从高到低选取的预设数量的目标标签作为该拍摄图像的目标标签,可以提高图像目标检测的准确性。
在一个实施例中,提供了一种图像处理方法,实现该方法的具体步骤如下所述:
首先,电子设备对待拍摄图像进行分类检测,得到待拍摄图像的分类标签。电子设备对待拍摄图像进行场景识别,可以根据VGG、CNN、SSD、决策树等深度学习算法训练场景识别模型,根据场景识别模型对待拍摄图像进行分类检测。图像的分类场景可以是风景、海滩、蓝天、绿草、雪景、烟火、聚光灯、文本、人像、婴儿、猫、狗、美食等。电子设备可以根据待拍摄图像的分类检测结果确定待拍摄图像的分类标签。
可选地,电子设备根据分类检测模型对待拍摄图像进行分类检测,得到各分类标签对应的置信度,将置信度最高的分类标签作为待拍摄图像的分类标签。电子设备中可预存有多个分类标签对应的图像特征信息,在获取到待拍摄图像后,电子设备可将该待拍摄图像的图像特征信息与已存储的图像特征信息分别进行匹配,获取与待拍摄图像的特征信息匹配的分类标签及分类标签对应的置信度,将置信度最高的分类标签作为待拍摄图像的分类标签。
可选地,电子设备获取拍摄待拍摄图像的地址信息,根据地址信息获取对应的位置信息,根据位置信息调整待拍摄图像的各分类标签对应的置信度,将置信度最高的分类标签作为待拍摄图像的分类标签。电子设备可以预存不同位置信息对应的分类标签及分类标签对应的权重,根据分类标签的权重调整待拍摄图像中场景标签对应的置信度。
接着,电子设备根据分类标签对待拍摄图像进行处理。电子设备根据待拍摄图像的分类标签可以对待拍摄图像进行全局处理。具体地,电子设备对待拍摄图像进行的全局处理可以是色彩优化处理。电子设备可以预存不同分类标签对应的优化参数。优化参数可以包括色彩处理参数、饱和度处理参数、亮度处理参数、对比度处理参数等不限于此。电子设备可以根据待拍摄图像的分类标签获取对应的优化参数,根据优化参数对待拍摄图像进行优化处理。
接着,电子设备对处理后的待拍摄图像进行拍摄得到拍摄图像。电子设备可以接收用户触发的拍摄指令,根据拍摄指令对处理后的待拍摄图像进行拍摄。
接着,电子设备对拍摄图像进行目标检测。电子设备在对拍摄图像进行目标检测时,可将拍摄图像的图像特征信息与已存储的目标标签对应的特征信息进行匹配,获取匹配成功的目标标签作为拍摄图像的目标标签。电子设备中预存的目标标签可包括:人像、婴儿、猫、狗、美食、文本、蓝天、绿草、沙滩、烟火等。
可选地,电子设备对拍摄图像进行目标检测,得到拍摄图像的多个目标标签及对应的置信度;将按照置信度从高到低选取的预设数量的目标标签作为拍摄图像的目标标签。电子设备在对图像进行目标检测时,可将拍摄图像的图像特征信息与已存储的目标标签对应的特征信息进行匹配,得到拍摄图像的多个目标标签及对应的置信度,电子设备可以将目标标签按照置信度从高到低进行排序,获取预设数量的目标标签作为拍摄图像的目标标签。
可选地,电子设备根据拍摄图像的分类标签调整所述拍摄图像的多个目标标签对应的置信度;将置信度最高的目标标签作为拍摄图像的目标标签。电子设备可以根据拍摄图像的分类标签调整拍摄图像的多个目标标签对应的置信度,将置信度较高的目标标签作为该拍摄图像的目标标签,也可以将按照置信度从高到低选取的预设数量的目标标签作为该拍摄图像的目标标签,可以提高图像目标检测的准确性。
可选地,电子设备获取对拍摄图像进行目标检测得到的目标检测结果,根据目标检测结果对拍摄图像进行处理。目标检测结果可以包括拍摄图像的目标标签及对应的标签区域。电子设备可以根据目标检测结果中的目标标签获取对应的目标处理参数,根据目标处理参数对与目标标签对应的标签区域进行局部处理。
可选地,电子设备获取对拍摄图像进行目标检测后得到的目标标签及对应的标签区域,根据目标标签获取对应的目标处理参数,根据目标处理参数对标签区域进行处理。目标处理参数可以包括色彩处理参数、饱和度处理参数、亮度处理参数、对比度处理参数等不限于此。目标处理参数还可以包括虚化处理、白平衡处理、色温处理等对应的参数。电子设备根据对拍摄图像的目标检测结果,获取目标标签对应的目标处理参数对标签区域进行局部处理,可以提高图像处理的效果。
应该理解的是,虽然图2-6的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-6中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
图7为一个实施例的图像处理装置的结构框图。如图7所示,一种图像处理装置,包括:分类检测模块702、处理模块704、图像拍摄模块706和目标检测模块708。其中:
分类检测模块702,用于对待拍摄图像进行分类检测,得到待拍摄图像的分类标签。
处理模块704,用于根据分类标签对待拍摄图像进行处理。
图像拍摄模块706,用于对处理后的待拍摄图像进行拍摄得到拍摄图像。
目标检测模块708,用于对拍摄图像进行目标检测。
在一个实施例中,处理模块704还可以用于获取对拍摄图像进行目标检测得到的目标检测结果,根据目标检测结果对拍摄图像进行处理。
在一个实施例中,处理模块704还可以用于获取对拍摄图像进行目标检测后得到的目标标签及对应的标签区域,根据目标标签获取对应的目标处理参数,根据目标处理参数对标签区域进行处理。
在一个实施例中,分类检测模块702还可以用于根据分类检测模型对待拍摄图像进行分类检测,得到各分类标签对应的置信度,将置信度最高的分类标签作为待拍摄图像的分类标签。
在一个实施例中,分类检测模块702还可以用于获取拍摄待拍摄图像的地址信息,根据地址信息获取对应的位置信息,根据位置信息调整待拍摄图像的各分类标签对应的置信度,将置信度最高的分类标签作为待拍摄图像的分类标签。
在一个实施例中,目标检测模块708还可以用于对拍摄图像进行目标检测,得到拍摄图像的多个目标标签及对应的置信度,将按照置信度高从高到低选取的预设数量的目标标签作为拍摄图像的目标标签。
在一个实施例中,目标检测模块708还可以用于根据待拍摄图像的分类标签调整拍摄图像的多个目标标签对应的置信度,将置信度最高的目标标签作为拍摄图像的目标标签。
上述图像处理装置,可以对待拍摄图像进行分类检测,得到待拍摄图像的分类标签,根据分类标签对待拍摄图像进行处理,对处理后的待拍摄图像进行拍摄得到拍摄图像,对拍摄图像进行目标检测,可以提高图像检测的准确性。
上述图像处理装置中各个模块的划分仅用于举例说明,在其他实施例中,可将图像处理装置按照需要划分为不同的模块,以完成上述图像处理装置的全部或部分功能。
关于图像处理装置的具体限定可以参见上文中对于图像处理方法的限定,在此不再赘述。上述图像处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
本申请实施例中提供的图像处理装置中的各个模块的实现可为计算机程序的形式。该计算机程序可在终端或服务器上运行。该计算机程序构成的程序模块可存储在终端或服务器的存储器上。该计算机程序被处理器执行时,实现本申请实施例中所描述方法的步骤。
本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质,当所述计算机可执行指令被一个或多个处理器执行时,使得所述处理器执行图像处理方法的步骤。
一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行图像处理方法。
本申请实施例还提供一种电子设备。上述电子设备中包括图像处理电路,图像处理电路可以利用硬件和/或软件组件实现,可包括定义ISP(Image Signal Processing,图像信号处理)管线的各种处理单元。图8为一个实施例中图像处理电路的示意图。如图8所示,为便于说明,仅示出与本申请实施例相关的图像处理技术的各个方面。
如图8所示,图像处理电路包括ISP处理器840和控制逻辑器850。成像设备810捕捉的图像数据首先由ISP处理器840处理,ISP处理器840对图像数据进行分析以捕捉可用于确定和/或成像设备810的一个或多个控制参数的图像统计信息。成像设备810可包括具有一个或多个透镜812和图像传感器814的照相机。图像传感器814可包括色彩滤镜阵列(如Bayer滤镜),图像传感器814可获取用图像传感器814的每个成像像素捕捉的光强度和波长信息,并提供可由ISP处理器840处理的一组原始图像数据。传感器820(如陀螺仪)可基于传感器820接口类型把采集的图像处理的参数(如防抖参数)提供给ISP处理器840。传感器820接口可以利用SMIA(Standard Mobile Imaging Architecture,标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。
此外,图像传感器814也可将原始图像数据发送给传感器820,传感器820可基于传感器820接口类型把原始图像数据提供给ISP处理器840,或者传感器820将原始图像数据存储到图像存储器830中。
ISP处理器840按多种格式逐个像素地处理原始图像数据。例如,每个图像像素可具有8、10、12或14比特的位深度,ISP处理器840可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中,图像处理操作可按相同或不同的位深度精度进行。
ISP处理器840还可从图像存储器830接收图像数据。例如,传感器820接口将原始图像数据发送给图像存储器830,图像存储器830中的原始图像数据再提供给ISP处理器840以供处理。图像存储器830可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器,并可包括DMA(Direct Memory Access,直接直接存储器存取)特征。
当接收到来自图像传感器814接口或来自传感器820接口或来自图像存储器830的原始图像数据时,ISP处理器840可进行一个或多个图像处理操作,如时域滤波。处理后的图像数据可发送给图像存储器830,以便在被显示之前进行另外的处理。ISP处理器840从图像存储器830接收处理数据,并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。ISP处理器840处理后的图像数据可输出给显示器870,以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit,图形处理器)进一步处理。此外,ISP处理器840的输出还可发送给图像存储器830,且显示器870可从图像存储器830读取图像数据。在一个实施例中,图像存储器830可被配置为实现一个或多个帧缓冲器。此外,ISP处理器840的输出可发送给编码器/解码器860,以便编码/解码图像数据。编码的图像数据可被保存,并在显示于显示器870设备上之前解压缩。编码器/解码器860可由CPU或GPU或协处理器实现。
ISP处理器840确定的统计数据可发送给控制逻辑器850单元。例如,统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜812阴影校正等图像传感器814统计信息。控制逻辑器850可包括执行一个或多个例程(如固件)的处理器和/或微控制器,一个或多个例程可根据接收的统计数据,确定成像设备810的控制参数及ISP处理器840的控制参数。例如,成像设备810的控制参数可包括传感器820控制参数(例如增益、曝光控制的积分时间、防抖参数等)、照相机闪光控制参数、透镜812控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如,在RGB处理期间)的增益水平和色彩校正矩阵,以及透镜812阴影校正参数。
电子设备根据上述图像处理技术可以实现本申请实施例中所描述的图像处理方法。
本申请所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。合适的非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM),它用作外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本申请专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种图像处理方法,其特征在于,包括:
对待拍摄图像进行分类检测,得到所述待拍摄图像的分类标签;
根据所述分类标签对所述待拍摄图像进行处理;
对处理后的待拍摄图像进行拍摄得到拍摄图像;
对所述拍摄图像进行目标检测。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取对所述拍摄图像进行目标检测得到的目标检测结果;
根据目标检测结果对所述拍摄图像进行处理。
3.根据权利要求1所述的方法,其特征在于,所述根据目标检测结果对所述拍摄图像进行处理,包括:
获取对所述拍摄图像进行目标检测后得到的目标标签及对应的标签区域;
根据所述目标标签获取对应的目标处理参数;
根据所述目标处理参数对所述标签区域进行处理。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据分类检测模型对所述待拍摄图像进行分类检测,得到各分类标签对应的置信度;
将置信度最高的分类标签作为所述待拍摄图像的分类标签。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
获取拍摄所述待拍摄图像的地址信息;
根据所述地址信息获取对应的位置信息,根据所述位置信息调整所述待拍摄图像的各分类标签对应的置信度;
将置信度最高的分类标签作为所述待拍摄图像的分类标签。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
对所述拍摄图像进行目标检测,得到所述拍摄图像的多个目标标签及对应的置信度;
将按照置信度高从高到低选取的预设数量的目标标签作为所述拍摄图像的目标标签。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
根据所述待拍摄图像的分类标签调整所述拍摄图像的多个目标标签对应的置信度;
将置信度最高的目标标签作为所述拍摄图像的目标标签。
8.一种图像处理装置,其特征在于,包括:
分类检测模块,用于对待拍摄图像进行分类检测,得到所述待拍摄图像的分类标签;
处理模块,用于根据所述分类标签对所述待拍摄图像进行处理;
图像拍摄模块,用于对处理后的待拍摄图像进行拍摄得到拍摄图像;
目标检测模块,对所述拍摄图像进行目标检测。
9.一种电子设备,包括存储器及处理器,所述存储器中储存有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行如权利要求1至7中任一项所述的图像处理方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810662694.3A CN108848306B (zh) | 2018-06-25 | 2018-06-25 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810662694.3A CN108848306B (zh) | 2018-06-25 | 2018-06-25 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108848306A true CN108848306A (zh) | 2018-11-20 |
CN108848306B CN108848306B (zh) | 2021-03-02 |
Family
ID=64202603
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810662694.3A Active CN108848306B (zh) | 2018-06-25 | 2018-06-25 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108848306B (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111062313A (zh) * | 2019-12-13 | 2020-04-24 | 歌尔股份有限公司 | 一种图像识别方法、装置、监控系统及存储介质 |
CN111127476A (zh) * | 2019-12-06 | 2020-05-08 | Oppo广东移动通信有限公司 | 一种图像处理方法、装置、设备及存储介质 |
CN112102192A (zh) * | 2020-09-15 | 2020-12-18 | 遵义师范学院 | 一种图像白平衡方法 |
CN112672045A (zh) * | 2020-12-17 | 2021-04-16 | 西安闻泰电子科技有限公司 | 拍摄模式的设置方法和装置、电子设备 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102457665A (zh) * | 2010-11-04 | 2012-05-16 | 佳能株式会社 | 摄像设备、摄像系统和摄像设备的控制方法 |
CN102959944A (zh) * | 2010-07-26 | 2013-03-06 | 柯达公司 | 自动的数码相机摄影模式选择 |
CN102959551A (zh) * | 2011-04-25 | 2013-03-06 | 松下电器产业株式会社 | 图像处理装置 |
CN103533244A (zh) * | 2013-10-21 | 2014-01-22 | 深圳市中兴移动通信有限公司 | 拍摄装置及其自动视效处理拍摄方法 |
WO2016160794A1 (en) * | 2015-03-31 | 2016-10-06 | Thermal Imaging Radar, LLC | Setting different background model sensitivities by user defined regions and background filters |
CN106210517A (zh) * | 2016-07-06 | 2016-12-07 | 北京奇虎科技有限公司 | 一种图像数据的处理方法、装置和移动终端 |
CN106446950A (zh) * | 2016-09-27 | 2017-02-22 | 腾讯科技(深圳)有限公司 | 一种图像处理方法及装置 |
CN107578372A (zh) * | 2017-10-31 | 2018-01-12 | 广东欧珀移动通信有限公司 | 图像处理方法、装置、计算机可读存储介质和电子设备 |
CN107704884A (zh) * | 2017-10-16 | 2018-02-16 | 广东欧珀移动通信有限公司 | 图像标签处理方法、图像标签处理装置及电子终端 |
CN107808134A (zh) * | 2017-10-26 | 2018-03-16 | 广东欧珀移动通信有限公司 | 图像处理方法、图像处理装置及电子终端 |
-
2018
- 2018-06-25 CN CN201810662694.3A patent/CN108848306B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102959944A (zh) * | 2010-07-26 | 2013-03-06 | 柯达公司 | 自动的数码相机摄影模式选择 |
CN102457665A (zh) * | 2010-11-04 | 2012-05-16 | 佳能株式会社 | 摄像设备、摄像系统和摄像设备的控制方法 |
CN102959551A (zh) * | 2011-04-25 | 2013-03-06 | 松下电器产业株式会社 | 图像处理装置 |
CN103533244A (zh) * | 2013-10-21 | 2014-01-22 | 深圳市中兴移动通信有限公司 | 拍摄装置及其自动视效处理拍摄方法 |
WO2016160794A1 (en) * | 2015-03-31 | 2016-10-06 | Thermal Imaging Radar, LLC | Setting different background model sensitivities by user defined regions and background filters |
CN106210517A (zh) * | 2016-07-06 | 2016-12-07 | 北京奇虎科技有限公司 | 一种图像数据的处理方法、装置和移动终端 |
CN106446950A (zh) * | 2016-09-27 | 2017-02-22 | 腾讯科技(深圳)有限公司 | 一种图像处理方法及装置 |
CN107704884A (zh) * | 2017-10-16 | 2018-02-16 | 广东欧珀移动通信有限公司 | 图像标签处理方法、图像标签处理装置及电子终端 |
CN107808134A (zh) * | 2017-10-26 | 2018-03-16 | 广东欧珀移动通信有限公司 | 图像处理方法、图像处理装置及电子终端 |
CN107578372A (zh) * | 2017-10-31 | 2018-01-12 | 广东欧珀移动通信有限公司 | 图像处理方法、装置、计算机可读存储介质和电子设备 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111127476A (zh) * | 2019-12-06 | 2020-05-08 | Oppo广东移动通信有限公司 | 一种图像处理方法、装置、设备及存储介质 |
CN111127476B (zh) * | 2019-12-06 | 2024-01-26 | Oppo广东移动通信有限公司 | 一种图像处理方法、装置、设备及存储介质 |
CN111062313A (zh) * | 2019-12-13 | 2020-04-24 | 歌尔股份有限公司 | 一种图像识别方法、装置、监控系统及存储介质 |
CN112102192A (zh) * | 2020-09-15 | 2020-12-18 | 遵义师范学院 | 一种图像白平衡方法 |
CN112672045A (zh) * | 2020-12-17 | 2021-04-16 | 西安闻泰电子科技有限公司 | 拍摄模式的设置方法和装置、电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN108848306B (zh) | 2021-03-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108764208B (zh) | 图像处理方法和装置、存储介质、电子设备 | |
CN108777815B (zh) | 视频处理方法和装置、电子设备、计算机可读存储介质 | |
CN108805103A (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN108921040A (zh) | 图像处理方法和装置、存储介质、电子设备 | |
CN108764370A (zh) | 图像处理方法、装置、计算机可读存储介质和计算机设备 | |
CN108810413A (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN110149482A (zh) | 对焦方法、装置、电子设备和计算机可读存储介质 | |
CN108961302B (zh) | 图像处理方法、装置、移动终端及计算机可读存储介质 | |
WO2019233392A1 (zh) | 图像处理方法、装置、电子设备和计算机可读存储介质 | |
CN110334635A (zh) | 主体追踪方法、装置、电子设备和计算机可读存储介质 | |
CN108848306A (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN109712177A (zh) | 图像处理方法、装置、电子设备和计算机可读存储介质 | |
CN108875820A (zh) | 信息处理方法和装置、电子设备、计算机可读存储介质 | |
CN108734676A (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN110298862A (zh) | 视频处理方法、装置、计算机可读存储介质和计算机设备 | |
CN108717530A (zh) | 图像处理方法、装置、计算机可读存储介质和电子设备 | |
CN109191403A (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN108897786A (zh) | 应用程序的推荐方法、装置、存储介质及移动终端 | |
CN108765033A (zh) | 广告信息推送方法和装置、存储介质、电子设备 | |
CN108804658A (zh) | 图像处理方法和装置、存储介质、电子设备 | |
CN108805198A (zh) | 图像处理方法、装置、计算机可读存储介质和电子设备 | |
CN108959462A (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN109360254A (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN110121031A (zh) | 图像采集方法和装置、电子设备、计算机可读存储介质 | |
CN109327626A (zh) | 图像采集方法、装置、电子设备和计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |