CN108986097B - 一种镜头起雾状态检测方法、计算机装置及可读存储介质 - Google Patents

一种镜头起雾状态检测方法、计算机装置及可读存储介质 Download PDF

Info

Publication number
CN108986097B
CN108986097B CN201810964415.9A CN201810964415A CN108986097B CN 108986097 B CN108986097 B CN 108986097B CN 201810964415 A CN201810964415 A CN 201810964415A CN 108986097 B CN108986097 B CN 108986097B
Authority
CN
China
Prior art keywords
image
fogging
area
detected
sample image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810964415.9A
Other languages
English (en)
Other versions
CN108986097A (zh
Inventor
王森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Mengju Information Technology Co ltd
Original Assignee
Shanghai Xiaomeng Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Xiaomeng Technology Co ltd filed Critical Shanghai Xiaomeng Technology Co ltd
Priority to CN201810964415.9A priority Critical patent/CN108986097B/zh
Publication of CN108986097A publication Critical patent/CN108986097A/zh
Application granted granted Critical
Publication of CN108986097B publication Critical patent/CN108986097B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/136Segmentation; Edge detection involving thresholding
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image

Abstract

本发明适用于摄像技术领域,提供了一种镜头起雾状态检测方法、计算机装置及可读存储介质,该方法包括:获取样本图像;提取样本图像中的有效图像区域;将有效图像区域按预设规则划分出多个待检测区域;基于预定的起雾检测模型,确定待检测区域是否存在起雾状态;当确定存在至少一个待检测区域存在起雾状态时,则判定样本图像为起雾图像,并上报给主控器;根据主控器的指令进行重新拍摄,获得重拍的样本图像,并重复上述检测步骤,直至判定样本图像为非起雾图像。实施本发明,可以实时、准确地监控拍摄镜头是否处于起雾状态,提高了镜头起雾状态检测的精准度,大大地降低了因镜头起雾而导致出现错误识别被拍摄物的种类和数量的现象。

Description

一种镜头起雾状态检测方法、计算机装置及可读存储介质
技术领域
本发明属于摄像技术领域,尤其涉及一种镜头起雾状态检测方法、计算机装置及可读存储介质。
背景技术
随着科技的发展,物联网技术和移动支付的普及,以及消费者的消费需求,“无人零售”模式已经成为当下不可阻挡的发展趋势。在“无人零售”中,智能零售柜(如冰柜等)则应运而生。智能零售柜中一般会设有摄像头,用于实时监控拍摄柜体内部的商品种类和数量,以作为商品售卖结算的依据。
然而,当天气较热或者湿度较大时,打开智能冰柜的柜门后,由于外界与冰柜内部的温差较大,冰柜内部的摄像头则容易起雾,从而引起拍摄的图片模糊不清,容易导致错误识别商品的种类和数量,进而导致购买结算的错误,难以达到真正的商业使用。而现有的图像模糊检测方法主要应用于运动目标拍摄和镜头对焦不准确场景的图像检测,对于镜头起雾状态的检测的精准度不高。
由此可见,现有的图像模糊检测方法对于镜头起雾现象的检测存在精准度不高,难以解决由于镜头起雾而引起错误识别商品的种类和数量的问题。
发明内容
本发明实施例提供一种镜头起雾状态检测方法,旨在解决现有的图像模糊检测方法对于镜头起雾现象的检测存在精准度不高,难以解决由于镜头起雾而引起错误识别商品的种类和数量的问题。
本发明实施例是这样实现的,一种镜头起雾状态检测方法,包括如下步骤:
获取样本图像;
提取所述样本图像中的有效图像区域;
将所述有效图像区域按预设规则划分出多个待检测区域;
基于预定的起雾检测模型,确定所述待检测区域是否存在起雾状态;
当确定存在至少一个所述待检测区域存在起雾状态时,则判定所述样本图像为起雾图像,并上报给主控器;
根据所述主控器的指令进行重新拍摄,获得重拍的样本图像,并重复上述检测步骤,直至判定所述样本图像为非起雾图像。
本发明实施例还提供一种计算机装置,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述方法的各步骤。
本发明实施例还提供一种计算机可读存储介质,存储有计算机程序,所述计算机程序被处理器执行时实现上述的方法的各步骤。
本发明实施例提供的镜头起雾状态检测方法,根据预设的规则将从样本图像中提取出来的有效图像区域划分出多个待检测区域,并基于预定的起雾检测模型,确定这些待检测区域是否存在起雾状态,当判定这些待检测区域中有至少一个区域为起雾图像,则立即上报给主控器,然后,再根据主控器的控制指令进行实时重拍,获得重拍的样本图像,并重复上述起雾状态检测步骤,直至判定拍摄到的样本图像为非起雾图像为止。因而,可以实时、准确地监控拍摄镜头是否处于起雾状态,提高了镜头起雾状态检测的精准度,大大地降低了因镜头起雾而拍摄到模糊不清的图像(如冰柜中陈列的商品等),进而导致出现错误识别被拍摄物的种类和数量的现象,即很好地解决了现有的图像模糊检测方法对于镜头起雾现象的检测存在精准度不高,难以解决由于镜头起雾而引起错误识别商品的种类和数量的问题,同时,提高了“无人零售”的商业使用质量。
附图说明
图1是本发明实施例一提供的镜头起雾状态检测方法的实现流程图;
图2是本发明实施例提供的全起雾的样本图像示意图;
图3是本发明实施例提供的散雾时边缘起雾的样本图像示意图;
图4a是本发明实施例提供的一种参考图片示意图;
图4b是本发明实施例提供的一种未经处理的样本图像示意图;
图4c是本发明实施例提供的剔除干扰黑色边缘后的有效图像区域示意图;
图5是本发明实施例提供的一种有效图像区域划分方式示意图;
图6是本发明实施例二提供的镜头起雾状态检测方法的局部流程图;
图7是本发明实施例三提供的镜头起雾状态检测装置的结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
在本发明实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本发明。在本发明实施例和所附权利要求书中所使用的单数形式的“一种”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和 / 或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
可以理解,本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种元件,但除非特别说明,这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。
为了进一步阐述本发明为实现预定发明目的所采取的技术手段及功效,以下结合附图及较佳实施例,对依据本发明的具体实施方式及其功效,详细说明如下。
本发明实施例提供的镜头起雾状态检测方法,根据预设的规则将从样本图像中提取出来的有效图像区域划分出多个待检测区域,并基于预定的起雾检测模型,确定这些待检测区域是否存在起雾状态,当判定这些待检测区域中有至少一个区域为起雾图像,则立即上报给主控器,然后,再根据主控器的控制指令进行实时重拍,获得重拍的样本图像,并重复上述起雾状态检测步骤,直至判定拍摄到的样本图像为非起雾图像为止。因而,可以实时、准确地监控拍摄镜头是否处于起雾状态,提高了镜头起雾状态检测的精准度,大大地降低了因镜头起雾而拍摄到模糊不清的图像(如冰柜中陈列的商品等),进而导致出现错误识别被拍摄物的种类和数量的现象,提高了“无人零售”的商业使用质量。
图1示出了本发明实施例一提供的镜头起雾状态检测方法的实现流程,详述如下:
在步骤S101中,获取样本图像。
在一个实施例中,样本图像可指含有目标物体的照片或图像。
例如,处于食品冰柜中的摄像头拍摄到陈列在冰柜的货架上的商品的照片或者图像,该图片或照片中包含有商品的种类和数量等信息。
在步骤S102中,提取样本图像中的有效图像区域。
结合上述实施例,有效图像区域,可指步骤S101中获取到的样本图像中商品集中或者分布的区域以及图像中光线较亮的部分区域。
在步骤S103中,将有效图像区域按预设规则划分出多个待检测区域。
在本发明实施例中,预设规则可指将上述有效图像区域切割成多个形状不同或相同的部分,例如,有效图像区域为一圆形区域,则可将该圆形区域平均分为四个扇形区域;当然也可以以该圆形区域的中心为圆心,按一定的比例半径比例将其划分为多个圆形和圆环形区域。
在步骤S104中,基于预定的起雾检测模型,确定待检测区域是否存在起雾状态。
对于起雾的图像,可以用如下公式表达:
Figure 100002_DEST_PATH_IMAGE001
其中,
Figure DEST_PATH_IMAGE003
表示拍摄到起雾图像,J表示未起雾的实际图像,t是场景的透射率,A表示场景中全局的大气光照,x表示像素坐标。
由于雾气的存在(大气中或者附着在镜头表面),镜头起雾后拍摄出来的图像一般具有如下几个特征:
①图像画面整体偏白。由于A一般来说较J更大,所以镜头起雾后拍摄出来的图像整体会有一些“白茫茫”,如图2所示。
②图像的清晰度显著下降。由于雾的散光,镜头起雾后拍摄出来的图像,其中的边缘部分会有明显的模糊现象,如图3所示。
③图像的色彩饱和度下降。所谓的饱和度,指的其实是色彩的纯度,纯度越高,表现越鲜明,纯度较低,表现则较黯淡。
在本发明的一个实施例中,可通过分别获取各待检测区域的t、x值,并代入上述公式求出其A和J值,比较A和J的大小,若A大于J,那么可判定该待检测区域图像I为起雾图像,即该待检测区域存在起雾状态。
在步骤S105中,当确定存在至少一个待检测区域存在起雾状态时,则判定样本图像为起雾图像,并上报给主控器。
在一个实施例中,当确定存在一个或多个待检测区域存在起雾状态,那么可判定该样本图像为起雾图像,并上报给主控器。
在一个实施例中,只要确定有一个或多个待检测区域为起雾图像,则表明当前获取的样本图像存在部分或者全部模糊的现象,并及时将判断结果“当前的样本图像为起雾图像”上报给主控器,提高了图像起雾状态的判断效率和准确性。
在步骤S106中,根据主控器的指令进行重新拍摄,获得重拍的样本图像,并重复上述检测步骤,直至判定样本图像为非起雾图像。
在一个实施例中,当主控器接收到“当前样本图像为起雾图像”的信息时,向摄像装置发送重拍指令,摄像装置接收到该指令后进行重新拍摄,并对获取到的重拍图像进行上述的起雾状态检测,直至判定拍摄到的图像为非起雾图像为止。
本发明实施例提供的镜头起雾状态检测方法,根据预设的规则将从样本图像中提取出来的有效图像区域划分出多个待检测区域,并基于预定的起雾检测模型,确定这些待检测区域是否存在起雾状态,当判定这些待检测区域中有至少一个区域为起雾图像,则立即上报给主控器,然后,再根据主控器的控制指令进行实时重拍,获得重拍的样本图像,并重复上述起雾状态检测步骤,直至判定拍摄到的样本图像为非起雾图像为止。因而,可以实时、准确地监控拍摄镜头是否处于起雾状态,提高了镜头起雾状态检测的精准度,大大地降低了因镜头起雾而拍摄到模糊不清的图像(如冰柜中陈列的商品等),进而导致出现错误识别被拍摄物的种类和数量的现象,提高了“无人零售”的商业使用质量。
在本发明实施例中,上述步骤S102包括如下步骤:根据参考图像去除样本图像中对起雾状态判断有干扰的黑色边缘,仅保留样本图像中的有效图像区域。
在本发明实施例中,上述样本图像为采用鱼眼镜头拍摄得到的鱼眼图像。
在一个实施例中,根据参考图片(如图4a所示)去除样本图像中对起雾状态判断有干扰影响的黑色边缘,提取出样本图像(如图4b所示)中含有被拍摄物体信息(包括物体的形状、数量、种类等)的有效图像区域(如图4c所示)。
可以理解的,参考图片的形状还可以是方形、椭圆形等,具体可以根据被拍摄物的分布状况确定。例如,镜头拍摄获取到的样本图像中目标物体集中排布在成方形阵列,那么可以根据该方形阵列的尺寸大小确定参考图片的尺寸大小,以便于选取到样本图像中含有目标物的有效图像区域。
在本发明实施例中,上述步骤S103包括如下步骤:将有效图像区域以其图像的中心为中心点,划分出多个有效圆形和环形待检测区域。
在一个实施例中,根据镜头起雾和散雾的特点,散雾时镜头中心圆形区域的雾气先散去,慢慢以中心为原点往四周呈现圆形区域形状扩散,可按照预设的规则—以有效图像区域的中心为中心点,划分出3个环形和1个圆形待检测区域(如图5所示)。
在一个优选实施例中,将有效图像区域按预设规则划分为3~5个有效圆形和环形待检测区域,可提高起雾状态的识别效果和效率。
图6示出了本发明实施例二提供的镜头起雾状态检测方法的局部流程,详述如下:
在本发明实施例中,上述步骤S104包括步骤S201和步骤S202。
在步骤S201中,基于预定的起雾检测模型,获得所述待检测区域的暗通道直方图中最低直方所占的比例、所述待检测区域的边缘信息的方差以及所述待检测区域的局部最大饱和度的平均值。
在一个实施例中,基于上述起雾图像的特征,预定的起雾检测模型可根据待检测区域的暗通道直方图、边缘信息以及局部最大饱和度进行构建,具体的:
对于待检测区域I,其暗通道图像可用下述表达式进行定义:
Figure 446966DEST_PATH_IMAGE004
其中,
Figure DEST_PATH_IMAGE005
表示待检测区域I的颜色通道,
Figure 983120DEST_PATH_IMAGE006
表示各颜色通道的大气光照值,
Figure DEST_PATH_IMAGE007
表示以像素x为中心的待检测区域的局部图像。
作为本发明的一个实施例,对于冰柜中的非箱体区域,摄像头拍摄到的样本图像的暗通道图像中的像素值绝大部分十分接近0;而对于起雾图像,其暗通道图像中的像素值会更接近于
Figure 204017DEST_PATH_IMAGE008
对待检测区域的暗通道图像进行直方图统计,并根据下述公式计算出其最低直方所占的比例:
Figure DEST_PATH_IMAGE009
,其中,N表示直方图统计中总的bin的数量,
Figure 433004DEST_PATH_IMAGE010
表示暗通道图像中落在第i个bin中像素的数量。
对于待检测区域的边缘信息,可以按照下述公式计算出其方差:
Figure DEST_PATH_IMAGE011
,其中,I表示图像像素值,x和y表示像素的笛卡尔坐标。
Figure 838053DEST_PATH_IMAGE012
,其中,
Figure DEST_PATH_IMAGE013
表示计算出的拉普拉斯图像,
Figure 443478DEST_PATH_IMAGE014
表示拉普拉斯图像对应的方差。一般的,对于起雾图像,
Figure 315619DEST_PATH_IMAGE014
会显著的低于非起雾图像。
对于待检测区域的局部最大饱和度,可用下述公式表示:
Figure DEST_PATH_IMAGE015
,其中,x表示各像素位置,y表示像素x对应领域的像素位置,
Figure 715508DEST_PATH_IMAGE016
表示在位置y各颜色通道的像素值。
根据公式:
Figure DEST_PATH_IMAGE017
计算其平均值,其中,
Figure 610782DEST_PATH_IMAGE018
表示计算的局部最大饱和度,
Figure DEST_PATH_IMAGE019
表示局部最大饱和度的平均值。
在步骤S202中,根据所述待检测区域的暗通道直方图中最低直方所占的比例、边缘信息的方差以及局部最大饱和度的平均值分别与其各自对应的起雾状态判断阈值的对比结果,确定所述待检测区域是否存在起雾状态。
在本发明实施例中,通过对比判断根据上述步骤S201获取的待检测区域的暗通道直方图中最低直方所占比例值、边缘信息的方差值以及局部最大饱和度的平均值是否符合其各自对应的预设判断阈值来确定各待检测区域是否存在起雾状态。
在本发明实施例中,当上述对比检测的结果为某(些)待检测区域的暗通道直方图的最低直方所占比例、边缘信息的方差以及局部最大饱和度的平均值有一项或多项符合预设的起雾判断阈值,则可确定该待检测区域存在起雾状态。
具体的,例如根据上述步骤S201获取到待检测区域A的暗通道直方图中最低直方所占的比例值为80%,边缘信息的方差值为0.2,局部最大饱和度的平均值为50%。而预设的判断阈值为暗通道直方图中最低直方所占的比例大于40%的存在起雾状态,边缘信息的方差大于0.5时存在起雾状态,局部最大饱和度的平均值小于20%时存在起雾状态,那么将该待检测区域A的上述各项指标与其对应的预设判断阈值的对比结果如下表1所示:
表1
对比项目 待检测区域的各指标检测结果 预设的起雾判断阈值 对比结果
暗通道直方图中最低直方所占的比例 80% >40% 起雾状态
边缘信息的方差值 0.2 >0.5 非起雾状态
局部最大饱和度的平均值 50% <20% 非起雾状态
从上表1的对比结果中可以看出,待检测区域A的上述暗通道直方图中最低直方所占的比例符合预设的起雾判断阈值,则可判定该待检测区域A存在起雾状态。
在本发明实施例中,当检测出一个或多个待检测区域的上述各项指标中有一项或多项指标符合预设的起雾判断阈值,则确定该待检测区域存在起雾状态,可降低漏检和错检率,提高镜头起雾状态的检测准确度。
在本发明实施例中,上述步骤S202包括以下步骤:
根据摄像头的成像特点,获得待检测区域自适应调整后的第一起雾状态判断阈值;
根据待检测区域的暗通道直方图中最低直方所占的比例、边缘信息的方差以及局部最大饱和度的平均值分别与其各自对应的第一起雾状态判断阈值的对比结果,确定待检测区域是否存在起雾状态。
在本发明实施例中,以冰柜内的鱼眼摄像头为例进行说明,根据冰柜内摄像头成像的特点,越靠近鱼眼图像的圆心区域,含有商品的概率越大,其重要性越高;远离鱼眼图像的圆心的区域,为柜体的几率越高,其重要性越低。
在一个实施例中,可根据下述缩放系数s(r)自适应地调整各待检测区域的起雾判断阈值:
Figure 751389DEST_PATH_IMAGE020
其中,radius为鱼眼图像的圆形的半径或者环形的外径,objectness为上一次检测中区域里货品所占比
Figure DEST_PATH_IMAGE021
在本发明实施例中,可根据鱼眼图像的各个待检测区域的重要性高低,按照上述缩放系数进行缩放调整得到各待检测区域的第一起雾判断阈值。
在另一个实施例中,可根据上述每个待检测区域距离鱼眼图像的圆心区域的远近来为各待检测区域赋予不同的加权值,例如,以鱼眼图像(半径为R)的圆心为中心点,划分出一个半径为r的圆形区域a,和依次远离该圆形区域a的环形区域b、c、d,圆形区域a环形区域b、c、d的加权值可分别设置为0.5、0.25、0.2、0.05。圆形区域a环形区域b、c、d各对应的起雾判断阈值分别为E、F、G、H,那么,结合上述缩放系数和加权值对各待检测区域的起雾判断阈值相应调整为下列第一起雾判断阈值:0.5E、0.25F、0.2G、0.05H。
在本发明的实施例中,根据待检测区域a、b、c、d的暗通道直方图中最低直方所占的比例、边缘信息的方差以及局部最大饱和度的平均值分别与其对应的第一起雾判断阈值进行对比,得到各待测区域的比对结果,并根据该比对结果确定样本图像是否存在起雾状态,即是否为起雾图像。
在本发明实施例中,通过考虑不同镜头的成像特点,自适应地调整其各待检测区域的起雾判断阈值,可以提高起雾检测的准确性,降低出现漏检或错检的几率。
在本发明实施例中,上述步骤S106包括步骤:根据所述主控器的指令按预定的时间间隔进行重新拍摄,获得重拍的样本图像。
在一个实施例中,主控器的指令可以是每镉2秒、5秒等重拍一次。
图7示出了本发明实施例三提供的镜头起雾状态检测装置,包括:
获取单元701,用于获取样本图像。
在一个实施例中,样本图像可指含有目标物体的照片或图像。
例如,处于食品冰柜中的摄像头拍摄到陈列在冰柜的货架上的商品的照片或者图像,该图片或照片中包含有商品的种类和数量等信息。
提取单元702,用于提取样本图像中的有效图像区域。
结合上述实施例,有效图像区域,可指获取单元701获取到的样本图像中商品集中或者分布的区域以及图像中光线较亮的部分区域。
划分单元703,用于将有效图像区域按预设规则划分出多个待检测区域。
在本发明实施例中,预设规则可指将上述有效图像区域切割成多个形状不同或相同的部分,例如,有效图像区域为一圆形区域,则划分单元703可将该圆形区域平均分为四个扇形区域;当然也可以以该圆形区域的中心为圆心,按一定的比例半径比例将其划分为多个圆形和圆环形区域。
起雾状态确定单元704,用于基于预定的起雾检测模型,确定待检测区域是否存在起雾状态。
对于起雾的图像,可以用如下公式表达:
Figure 681299DEST_PATH_IMAGE001
其中,
Figure 314406DEST_PATH_IMAGE003
表示拍摄到起雾图像,J表示未起雾的实际图像,t是场景的透射率,A表示场景中全局的大气光照,x表示像素坐标。
由于雾气的存在(大气中或者附着在镜头表面),镜头起雾后拍摄出来的图像一般具有如下几个特征:
①图像画面整体偏白。由于A一般来说较J更大,所以镜头起雾后拍摄出来的图像整体会有一些“白茫茫”,如图4所示。
②图像的清晰度显著下降。由于雾的散光,镜头起雾后拍摄出来的图像,其中的边缘部分会有明显的模糊现象,如图5所示。
③图像的色彩饱和度下降。所谓的饱和度,指的其实是色彩的纯度,纯度越高,表现越鲜明,纯度较低,表现则较黯淡。
在本发明的一个实施例中,起雾状态确定单元704可通过分别获取各待检测区域的t、x值,并代入上述公式求出其A和J值,比较A和J的大小,若A大于J,那么可判定该待检测区域图像I为起雾图像,即该待检测区域存在起雾状态。
上报单元705,用于当确定存在至少一个待检测区域存在起雾状态时,则判定样本图像为起雾图像,并上报给主控器。
在一个实施例中,当上报单元705确定存在一个或多个待检测区域存在起雾状态,那么可判定该样本图像为起雾图像,并上报给主控器。
在一个实施例中,只要上报单元705确定有一个或多个待检测区域为起雾图像,则表明当前获取的样本图像存在部分或者全部模糊的现象,并及时将判断结果“当前的样本图像为起雾图像”上报给主控器,提高了图像起雾状态的判断效率和准确性。
重拍单元706,用于根据主控器的指令进行重新拍摄,获得重拍的样本图像,并重复上述检测步骤,直至判定样本图像为非起雾图像。
在一个实施例中,当主控器接收到“当前样本图像为起雾图像”的信息时,向摄像装置发送重拍指令,摄像装置中的重拍单元706接收到该指令后进行重新拍摄,并对获取到的重拍图像进行上述的起雾状态检测,直至判定拍摄到的图像为非起雾图像为止。
本发明实施例提供的镜头起雾状态检测装置,根据预设的规则将从样本图像中提取出来的有效图像区域划分出多个待检测区域,并基于预定的起雾检测模型,确定这些待检测区域是否存在起雾状态,当判定这些待检测区域中有至少一个区域为起雾图像,则立即上报给主控器,然后,再根据主控器的控制指令进行实时重拍,获得重拍的样本图像,并重复上述起雾状态检测步骤,直至判定拍摄到的样本图像为非起雾图像为止。因而,可以实时、准确地监控拍摄镜头是否处于起雾状态,提高了镜头起雾状态检测的精准度,大大地降低了因镜头起雾而拍摄到模糊不清的图像(如冰柜中陈列的商品等),进而导致出现错误识别被拍摄物的种类和数量的现象,提高了“无人零售”的商业使用质量。
本发明实施例还提供了一种计算机装置,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述镜头起雾状态检测方法的各步骤。
本发明实施例还提供了一种计算机可读存储介质,存储有计算机程序,所述计算机程序被处理器执行时实现上述的镜头起雾状态检测方法的各步骤。
示例性的,计算机程序可以被分割成一个或多个模块,一个或者多个模块被存储在存储器中,并由处理器执行,以完成本发明。一个或多个模块可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述计算机程序在计算机装置中的执行过程。例如,所述计算机程序可以被分割成上述各个方法实施例提供的镜头起雾状态检测的步骤。
本领域技术人员可以理解,上述计算机装置的描述仅仅是示例,并不构成对计算机装置的限定,可以包括比上述描述更多或更少的部件,或者组合某些部件,或者不同的部件,例如可以包括输入输出设备、网络接入设备、总线等。
所称处理器可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器 (Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列 (Field-Programmable Gate Array,FPGA) 或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等,所述处理器是所述计算机装置的控制中心,利用各种接口和线路连接整个用户终端的各个部分。
所述存储器可用于存储所述计算机程序和/或模块,所述处理器通过运行或执行存储在所述存储器内的计算机程序和/或模块,以及调用存储在存储器内的数据,实现所述计算机装置的各种功能。所述存储器可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器可以包括高速随机存取存储器,还可以包括非易失性存储器,例如硬盘、内存、插接式硬盘,智能存储卡(Smart Media Card, SMC),安全数字(Secure Digital, SD)卡,闪存卡(Flash Card)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
所述计算机装置集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (7)

1.一种镜头起雾状态检测方法,其特征在于,包括如下步骤:
获取样本图像;
提取所述样本图像中的有效图像区域;
将所述有效图像区域按预设规则划分出多个待检测区域;
基于预定的起雾检测模型,确定所述待检测区域是否存在起雾状态,所述基于预定的起雾检测模型,确定所述待检测区域是否存在起雾状态,包括:
获得所述待检测区域的暗通道直方图中最低直方所占的比例、所述待检测区域的边缘信息的方差以及所述待检测区域的局部最大饱和度的平均值;
根据所述待检测区域的暗通道直方图中最低直方所占的比例、边缘信息的方差以及局部最大饱和度的平均值分别与其各自对应的起雾状态判断阈值的对比结果,确定所述待检测区域是否存在起雾状态;所述最低直方所占的比例的计算公式为:
Figure DEST_PATH_IMAGE001
,其中,N表示直方图统计中总的bin的数量,
Figure 13195DEST_PATH_IMAGE002
,表示暗通道图像中落在第i个bin中像素的数量;
当确定存在至少一个所述待检测区域存在起雾状态时,则判定所述样本图像为起雾图像,并上报给主控器;
根据所述主控器的指令进行重新拍摄,获得重拍的样本图像,并重复上述检测步骤,直至判定所述样本图像为非起雾图像。
2.如权利要求1所述的镜头起雾状态检测方法,其特征在于,所述提取所述样本图像中的有效图像区域,包括:
根据参考图像去除所述样本图像中对起雾状态判断有干扰的黑色边缘,仅保留所述样本图像中的有效图像区域。
3.如权利要求1所述的镜头起雾状态检测方法,其特征在于,所述将所述有效图像区域按预设规则划分出多个待检测区域,包括:
将所述有效图像区域以其图像的中心为中心点,划分出多个有效圆形和环形待检测区域。
4.如权利要求1所述的镜头起雾状态检测方法,其特征在于,所述根据所述待检测区域的暗通道直方图中最低直方所占的比例、边缘信息的方差以及所述待检测区域的局部最大饱和度的平均值分别与其各自对应的起雾状态判断阈值的对比结果,确定所述待检测区域是否存在起雾状态,包括:
根据摄像头的成像特点,获得所述待检测区域自适应调整后的第一起雾状态判断阈值;
根据所述待检测区域的暗通道直方图中最低直方所占的比例、边缘信息的方差以及局部最大饱和度的平均值分别与其各自对应的第一起雾状态判断阈值的对比结果,确定所述待检测区域是否存在起雾状态。
5.如权利要求1所述的镜头起雾状态检测方法,其特征在于,所述样本图像为鱼眼图像。
6.如权利要求1所述的镜头起雾状态检测方法,其特征在于,所述根据所述主控器的指令进行重新拍摄,获得重拍的样本图像,包括:
根据所述主控器的指令按预定的时间间隔进行重新拍摄,获得重拍的样本图像。
7.一种计算机装置,其特征在于,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现如权利要求1~6任一项所述方法的步骤。
CN201810964415.9A 2018-08-23 2018-08-23 一种镜头起雾状态检测方法、计算机装置及可读存储介质 Active CN108986097B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810964415.9A CN108986097B (zh) 2018-08-23 2018-08-23 一种镜头起雾状态检测方法、计算机装置及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810964415.9A CN108986097B (zh) 2018-08-23 2018-08-23 一种镜头起雾状态检测方法、计算机装置及可读存储介质

Publications (2)

Publication Number Publication Date
CN108986097A CN108986097A (zh) 2018-12-11
CN108986097B true CN108986097B (zh) 2022-03-11

Family

ID=64547558

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810964415.9A Active CN108986097B (zh) 2018-08-23 2018-08-23 一种镜头起雾状态检测方法、计算机装置及可读存储介质

Country Status (1)

Country Link
CN (1) CN108986097B (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109905678B (zh) * 2019-03-21 2021-04-23 重庆工程职业技术学院 一种煤矿监控图像去雾处理系统
CN110248060A (zh) * 2019-06-13 2019-09-17 惠州市德赛西威汽车电子股份有限公司 一种防止摄像头镜头起雾的方法和摄像头模组
CN110675373B (zh) * 2019-09-12 2023-04-07 珠海格力智能装备有限公司 一种组件安装检测方法、装置和系统
CN111524125B (zh) * 2020-04-28 2023-09-01 京东科技信息技术有限公司 一种设备清洁方法、装置、系统、电子设备及存储介质
CN112348784A (zh) * 2020-10-28 2021-02-09 北京市商汤科技开发有限公司 相机镜头的状态检测方法、装置、设备及存储介质
CN114697473B (zh) * 2020-12-25 2024-02-27 浙江宇视科技有限公司 一种摄像机除雾方法、装置、电子设备和存储介质
CN113055570B (zh) * 2021-03-09 2022-10-18 广东便捷神科技股份有限公司 一种用于提升商品信息视觉识别方法
CN113448082B (zh) * 2021-06-28 2022-08-26 东集技术股份有限公司 镜片的除雾方法、装置及系统
CN115905913B (zh) * 2022-10-14 2024-03-12 支付宝(杭州)信息技术有限公司 数字藏品的检测方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102842198A (zh) * 2012-08-30 2012-12-26 广州中国科学院工业技术研究院 火灾识别方法和系统
CN103700079A (zh) * 2013-12-17 2014-04-02 中国科学院深圳先进技术研究院 图像去雾方法及装置
CN103870818A (zh) * 2014-03-31 2014-06-18 中安消技术有限公司 一种烟雾检测方法和装置
CN104599266A (zh) * 2014-12-31 2015-05-06 小米科技有限责任公司 图像中雾气区域的检测方法、装置及终端
CN106934770A (zh) * 2017-02-08 2017-07-07 中国矿业大学 一种评价雾霾图像去雾效果的方法和装置
CN108270947A (zh) * 2016-12-30 2018-07-10 深圳市赛菲姆科技有限公司 一种通过图像识别算法控制摄像机除雾的方法和装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103442209B (zh) * 2013-08-20 2017-02-22 北京工业大学 一种输电线路的视频监控方法
CN108319964B (zh) * 2018-02-07 2021-10-22 嘉兴学院 一种基于混合特征和流形学习的火灾图像识别方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102842198A (zh) * 2012-08-30 2012-12-26 广州中国科学院工业技术研究院 火灾识别方法和系统
CN103700079A (zh) * 2013-12-17 2014-04-02 中国科学院深圳先进技术研究院 图像去雾方法及装置
CN103870818A (zh) * 2014-03-31 2014-06-18 中安消技术有限公司 一种烟雾检测方法和装置
CN104599266A (zh) * 2014-12-31 2015-05-06 小米科技有限责任公司 图像中雾气区域的检测方法、装置及终端
CN108270947A (zh) * 2016-12-30 2018-07-10 深圳市赛菲姆科技有限公司 一种通过图像识别算法控制摄像机除雾的方法和装置
CN106934770A (zh) * 2017-02-08 2017-07-07 中国矿业大学 一种评价雾霾图像去雾效果的方法和装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
"结合直方图均衡化和暗通道先验的去雾算法";张宝山 等;《传感器与微系统》;20180227;第37卷(第3期);第148-152页 *

Also Published As

Publication number Publication date
CN108986097A (zh) 2018-12-11

Similar Documents

Publication Publication Date Title
CN108986097B (zh) 一种镜头起雾状态检测方法、计算机装置及可读存储介质
CN110378945B (zh) 深度图处理方法、装置和电子设备
EP3712841A1 (en) Image processing method, image processing apparatus, and computer-readable recording medium
CN111062974B (zh) 一种使用去除鬼影对前景目标提取的方法及系统
US11108970B2 (en) Flicker mitigation via image signal processing
CN112598713A (zh) 一种基于深度学习的近岸海底鱼类检测、跟踪统计方法
US20190043403A1 (en) Foreground and background detection method
CN111062293B (zh) 一种基于深度学习的无人机森林火焰识别方法
CN111027546B (zh) 一种字符分割方法、装置以及计算机可读存储介质
CN109478329B (zh) 图像处理方法和装置
CN109903265B (zh) 一种图像变化区域侦测阀值设定方法、系统及其电子装置
CA2989188A1 (en) Method for ir or thermal image enchancement based on scene information for video analysis
CN115546705B (zh) 目标识别方法、终端设备及存储介质
CN111654643B (zh) 曝光参数确定方法、装置、无人机和计算机可读存储介质
CN107273815A (zh) 一种个体行为识别方法及系统
CN114511820A (zh) 货架商品检测方法、装置、计算机设备及存储介质
CN112529896A (zh) 基于暗通道先验的红外小目标检测方法及系统
CN110472561B (zh) 足球进球类型识别方法、装置、系统及存储介质
CN113468914A (zh) 一种商品纯净度的确定方法、装置及设备
CN112149476A (zh) 目标检测方法、装置、设备和存储介质
CN111753775B (zh) 鱼的生长评估方法、装置、设备及存储介质
Herrmann et al. Online multi-player tracking in monocular soccer videos
CN111179182B (zh) 图像的处理方法及装置、存储介质及处理器
CN115619775B (zh) 基于图像识别的物料计数方法及装置
CN113822818B (zh) 散斑提取方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20230202

Address after: Room b1-8008, building 3, 258 Changjiang Road, Baoshan District, Shanghai 200441

Patentee after: Shanghai Weimeng Enterprise Development Co.,Ltd.

Address before: Room b1-4002, building 3, No. 258, Changjiang Road, Baoshan District, Shanghai 201900

Patentee before: SHANGHAI XIAOMENG TECHNOLOGY Co.,Ltd.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20231109

Address after: 200441 Room B1-7001, Building 3, No. 258 Changjiang Road, Baoshan District, Shanghai

Patentee after: Shanghai Mengju Information Technology Co.,Ltd.

Address before: Room b1-8008, building 3, 258 Changjiang Road, Baoshan District, Shanghai 200441

Patentee before: Shanghai Weimeng Enterprise Development Co.,Ltd.