CN105373813A - 设备状态的图像监测方法及装置 - Google Patents

设备状态的图像监测方法及装置 Download PDF

Info

Publication number
CN105373813A
CN105373813A CN201510990305.6A CN201510990305A CN105373813A CN 105373813 A CN105373813 A CN 105373813A CN 201510990305 A CN201510990305 A CN 201510990305A CN 105373813 A CN105373813 A CN 105373813A
Authority
CN
China
Prior art keywords
image
equipment
state
matching
current state
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510990305.6A
Other languages
English (en)
Inventor
唐慧明
潘以瑶
鲍庆洁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sichuan Whayer Information Industry Co Ltd
Original Assignee
Sichuan Whayer Information Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sichuan Whayer Information Industry Co Ltd filed Critical Sichuan Whayer Information Industry Co Ltd
Priority to CN201510990305.6A priority Critical patent/CN105373813A/zh
Publication of CN105373813A publication Critical patent/CN105373813A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Abstract

本发明提供了一种设备状态的图像监测方法及装置,用于设备监测领域。所述方法包括:获取设备的当前图像,将所述当前图像分别与多个图像库中的图像样本进行匹配,计算匹配度,所述多个图像库中的每个图像库分别对应于所述设备的不同状态;根据所述匹配度获得与所述当前图像匹配度最高的图像样本作为所述当前图像的匹配图像;判断所述当前图像与所述匹配图像的匹配度是否超过预设的匹配度阈值,若是,则判定所述设备的当前状态为与所述匹配图像对应的状态,若否,则生成提示信息,提醒用户指定所述设备的当前状态。该设备监测方法通过设备当前图像与图像库中的图像样本进行比较匹配,从而确定设备的当前状态,监测精确,实用性高。

Description

设备状态的图像监测方法及装置
技术领域
本发明涉及设备监测领域,具体而言,涉及一种设备状态的图像监测方法及装置。
背景技术
目前的设备状态监测方法主要通过采集设备的电压,电流等信号,分析这些信号,得到判断结果反馈给监控中心;有的设备无法直接采集反映其状态的信号,需要人工监测。
特别是现有的电力系统的设备监测方法,有时采集的电信号由于采集和传输等原因,容易出现差错,且通过电网调度系统对电力设备状态进行监测,缺少独立的第三方验证,难以确保万无一失。因此,电力设备的运行状态常需要巡检或人工复核。很多设备地处偏远地区,人工实地复核监测成本高,时效性差,耗费大量人力物力。可信的方法是通过第三方监测,如视频监控系统采集视频或者图像数据,使得监控人员可以远程监视设备,提高了监测的时效性。但是,这种在线监测方式依旧待于改进。一方面设备状态需要二十四小时无间断监测,而一位操作人员同时监测的设备数目和时间有限,需要耗费较多人力物力,另一方面长时间监测设备会由于操作人员疲劳而产生工作失误,带来安全隐患。
在设备监控领域,已有采用图像匹配和识别技术对设备进行监测。然而,一般的图像匹配和识别技术,容易受到设备形状不同,拍摄角度、采集样本图片时环境光照等外在条件的变化的影响,只能针对特定的设备和场合设计算法,当这些外在条件发生改变时,不能有效获得的设备状态。
发明内容
有鉴于此,本发明实施例提供了一种设备状态的图像监测方法及装置,实现算法的动态更新,且可以在必要时,选用当前图像更新图像库,以此适应改变的外在条件,以对设备运行状态进行自动识别和监测,改善现有技术中需要针对特定场景调整算法的问题。
为了实现上述目的,本发明采用的技术方案如下:
一种设备状态的图像监测方法,包括:获取设备的当前图像,将所述当前图像分别与多个图像库中的图像样本进行匹配,计算匹配度,所述多个图像库中的每个图像库分别对应于所述设备的不同状态;根据所述匹配度获得与所述当前图像匹配度最高的图像样本作为所述当前图像的匹配图像;判断所述当前图像与所述匹配图像的匹配度是否超过预设的匹配度阈值,若是,则判定所述设备的当前状态为与所述匹配图像对应的状态,若否,则生成提示信息,提醒用户指定所述设备的当前状态。
一种设备状态的图像监测装置,包括:匹配度计算模块,用于获取设备的当前图像,将所述当前图像分别与多个图像库中的图像样本进行匹配,计算匹配度,所述多个图像库中的每个图像库分别对应于所述设备的不同状态;匹配图像获取模块,用于根据所述匹配度获得与所述当前图像匹配度最高的图像样本作为所述当前图像的匹配图像;判断模块,用于判断所述当前图像与所述匹配图像的匹配度是否超过预设的匹配度阈值,状态判定模块,当所述状态判定模块判断所述当前图像与所述匹配图像的匹配度是超过预设的匹配度阈值,用于判定所述设备的当前状态为与所述匹配图像对应的状态,提示模块,当所述状态判定模块判断所述当前图像与所述匹配图像的匹配度是未超过预设的匹配度阈值,则生成提示信息,提醒用户指定所述设备的当前状态。
本发明实施例提供的设备状态的图像监测方法及装置,不需要因为设备形状、拍摄角度、采集样本图片时环境光照等外在因素的变化而针对特定场景调整算法,通过预先采集设备不同状态下的图像样本,设置不同状态的图像库。在需要监测时,获取设备的当前图像,计算当前图像与图像库中所有图像样本的匹配度,获得匹配度最高的匹配图像,根据与匹配图像的匹配度是否超过预设的匹配度阈值,来决定当前图像所对应的设备的当前状态。
为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1示出了本发明实施例1所提供的设备状态的图像监测方法的流程图;
图2示出了本发明实施例1所提供初始化图像库的流程图;
图3示出了本发明实施例2所提供的算法的整体流程图;
图4示出了本发明实施例提供的设备状态的图像监测装置的结构框图;
图5示出了本发明实施例提供的设备状态的图像监测装置的另一种结构框图;
图6示出了本发明实施例提供的设备状态的图像监测装置可储存的计算机的结构框图。
具体实施方式
下面将结合本发明实施例中附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施例。基于本发明的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例1
如图1所示,针对设备监测的特点,本发明实施例一种设备状态的图像监测方法:
步骤S100:获取设备的当前图像,将所述当前图像分别与多个图像库中的图像样本进行匹配,计算匹配度,所述多个图像库中的每个图像库分别对应于所述设备的不同状态;
设备的不同状态,可以通过不同的图像来表示。在本实施例中,监测设备的图像之前,先建立不同的图像库,每个图像库对应一种设备的状态,图像库对应的状态包括了设备的所有可能存在的状态。预先采集设备的一个或多个图像样本,所采集的图像样本可以是包括了设备的所有可能存在的状态以及每种状态下所有可能存在的图像表现形式,也可以是设备的部分状态的图像样本,该部分状态是设备易于表现的状态,例如采集电网设备的状态,其闸刀一直处于闭合状态,于是可以采集到闸刀闭合着的该电网设备的状态,但该闸刀断开的状态不易采集,可以先不采集,只建立对应该状态的图像库。将所采集的图像样本存入该图像样本所在状态对应的图像库中。设备的当前图像对应了设备当前所处的状态,故设备的当前状态,可以根据设备的当前图像来确定。
当然,本发明实施例提供的设备状态的图像监测方法,既可以用于监测一个监控视野,即一幅图像中只包括一个需要状态监测的设备的情况,也可以用于一个监控视野中包括多个需要状态监测的设备的情况。当监控视野中包括多个需要状态监测的设备,需要对每个受监测设备分别设置图像库,图像库中存放的是对应各设备的子图数据或其特征数据,并且与图像库中的图像样本进行匹配的为获取的当前图像中相应待监测设备对应的子图像。
建立图像库的具体步骤可以是如图2所示:
步骤S101:设置所述多个图像库;
步骤S102:采集所述设备的一个或多个图像样本,将采集的图像样本分别存入对应状态的图像库中。
在已经建立图像库的情况下,便可以通过采集设备的当前图像对设备进行监测。
具体的,当接受到设备监测指令后,利用采集设备图像的摄像机或其他拍摄装置获取所要监测的设备的当前图像,将所采集的当前图像与图像库中的图像样本进行分别匹配,计算当前图像与每一个图像库中的所有图像样本的匹配度。
在本实施例中,获取用于进行监测的图像后,对图像进行匹配,匹配的方法包括多种,如归一化相关系数(NCC)匹配、误差平方和(SSD)、误差绝对值和(SAD)或者特征匹配等。但具体使用的方式并不作为本发明实施例的限制。
另外,鉴于图像处理的特点,当前图像与图像样本进行的匹配可以直接基于图像数据的图像匹配,也可以基于从图像数据提取的特征数据进行匹配。在本实施例中,基于从图像数据提取的特征数据进行匹配的方法可以包括Gabor特征、HoG、角点特征、纹理特征等,本发明所述的图像库中存放的图像或图像样本包括图像数据本身或基于图像提取的各种特征数据。因此,图像匹配包括图像直接匹配和基于特征的匹配,可采用目前图像处理领域各种匹配算法。进一步的,在本实施例的图像获取过程中,由于采集的图像越稳定,不必要的监测次数也越少。为了减少因为图像的不稳定而频繁对用户进行提示,可以在计算匹配度之前,对获取的图像进行预判。
具体的,每次采集设备的当前图像时可以采集连续多帧图像,具体帧数预先设定。再对这些连续多帧图像比较,若连续多帧图像几乎无差别,即对应位置的像素值相差甚小,则选取其中一帧,如第一帧或最后一帧图像,进入后续监测环节;若监测到连续多帧图像前后有差异,即对应位置的像素值有一定量的差异,则认为目前设备状态图像不稳定,例如设备开关正在旋转导致状态持续变化、存在飞过的飞鸟等干扰物体或其它突发干扰,不利用本次获取的设备的状态在发生变化的图像或者有干扰的图像进行监测,直到图像不再剧烈变化,采集稳定的图像进行监测,或再次等待预设时间或者监测指令到来重新进行设备的当前图像获取。我们称这些不稳定、有干扰和噪声过大而设备状态不清晰的图像为无效图像,称稳定、清晰、没有突发干扰、设备状态明确的图像为有效图像。
预判图像是否为有效图像可以减少不必要的操作以及提示,但是会增加图像获取的操作,所以是否需要预判图像由实际需求选择。进一步的,在对当前图像与图像样本进行匹配之前,还可以先对当前对象进行一种或多种处理,其中处理的方式包括:光照校正,如同态滤波,用于消除光照不匀的影响,采用阴影消除技术消除光照阴影;几何校正,如平移、旋转和透视失真校正,用于消除摄像机的云台转动后机械因素引起的图像平移和旋转,以及镜头变焦引起的图像变化的影响;采用摄像机自标定技术消除镜头及各种失真的影响;图像增强,包括去噪、边缘增强等算法。以减少其他外在因素对拍摄的图像的影响,从而增强匹配效果。
另外,本实施例中,为了减少夜晚及阴雨天气的影响,可以采用带照明设备的摄像仪器或者带红外拍摄功能的摄像仪器。对所采集到的图像的整体亮度进行监测,若是低于某一设定亮度值,可以开启照明设备或者采用红外摄像模式。
步骤S110:根据所述匹配度获得与所述当前图像匹配度最高的图像样本作为所述当前图像的匹配图像;
当对所有图像样本进行匹配度的计算后,将匹配度最高的图像样本作为所采集到的当前图像的匹配图像。
步骤S120:判断所述当前图像与所述匹配图像的匹配度是否超过预设的匹配度阈值,若是,则执行步骤S130,若否,则执行步骤S140。
步骤S130:判定所述设备的当前状态为与所述匹配图像对应的状态,
进一步的,在本实施例中,在判定所述设备的当前状态为与所述匹配图像对应的状态后,还可以包括:
判断所述匹配图像对应的状态与所述设备的前一状态是否相同;若否,则生成提示信息,提醒用户重新指定所述设备的当前状态,当用户重新指定的当前状态与所述匹配图像对应的状态不同,更新与用户指定的当前状态对应的图像库。
具体的,在本实施例中,每次设备状态监测时,记录设备确定的当前状态作为设备下一次监测的前一状态,因此,此处的前一状态为前一次监测中设备确定的当前状态。
在判定所述设备的当前状态为与所述匹配图像对应的状态之后,进一步判断所述匹配图像对应的状态即判定的设备的当前状态与设备的前一状态是否相同如果相同,则本次监测结束,直接返回所述获取设备的当前图像的步骤。如果匹配图像对应的状态与所述前一状态不同,提示用户目前判定的设备当前状态与设备的前一状态有所改变,提醒判断用户该判定是否正确,即提醒用户根据当前图像判定设备的当前状态。步骤S140:生成提示信息,提醒用户指定所述设备的当前状态。
在对设备进行监测之前,设置一个匹配度阈值,阈值的具体大小根据并不作为本实施例的限制,可以根据需要自行设置。
获得匹配图像以后,进一步判断所述当前图像与所述匹配图像的匹配度是否超过预设的匹配度阈值,若当前图像与匹配图像的匹配度超过匹配度阈值,判定设备的当前状态为与匹配图像对应的状态。
若当前图像与匹配图像的匹配度没有超过匹配度阈值,则生成警示信号等提示信息,提醒用户根据设备的当前图像指定设备的当前状态。接受到用户指定设备的当前状态后,更新图像库,即更新与所述用户指定的当前状态对应的图像库。
进一步的,所述更新与所述用户指定的当前状态对应的图像库包括,如果该状态对应的图像库存放的图像数量没有达到图像库的上限,则直接存入,否则先剔除其中早期的图像再存入。所述剔除其中早期的图像可以是找到存入需要更新的图像库中时间最远的一幅图像,将其剔除。或者是在需要更新的图像库里找到与当前图像最相似,即匹配度最高的K幅图像,在该K幅图像中找到存入该图像库时间最远的一幅图像,将其剔除。其中K为预先设定的一个值,并不作为本实施例的限制。
进一步的,在更新图像库时,同时记录图像库中每幅图像的匹配次数以及最后一次匹配时间,丢弃匹配次数较少的及最后一次匹配时间较远的图像。另外,为了避免匹配次数无限增加,可以在其中最大匹配次数或总匹配次数达到一定数量时,将图像库中所有图像的匹配次数按设定比例进行缩小。
进一步的,在步骤S140之后,还可以包括:
提醒用户判定当前图像是否是有效图像还是无效图像;接收用户判定的结果,若所述判定结果为当前图像是有效图像,在接收到用户指定的当前状态后,根据用户指定的当前状态,更新所述用户指定的当前状态对应的图像库,返回所述获取设备的当前图像的步骤;若所述判定结果为当前图像是无效图像,在接收到用户指定的当前状态后,直接返回所述获取设备的当前图像的步骤。
具体的,当向用户发送提示信息时,同时提醒用户判断当前图像是有效图像还是无效图像。
在本实施例中,接收用户指定的设备的当前状态时,同时接受用户对当前图像是否是有效图像的判断。
如果用户判断该当前图像是有效图像,根据用户指定的当前状态,更新所述用户指定的当前状态对应的图像库,并记录设备当前状态,等待下一轮监测。
如果用户判断当前图像是无效图像,在接收到用户指定的当前状态后记录设备当前状态,等待下一轮监测。
在本实施例中,考虑到设备状态发生变化的时间间隔较长,因此,可以在等待一段预设的时间或者再次接收到监测指令后,再返回所述获取设备的当前图像的步骤,进行下一轮监测。
在本发明本实施例中,预先建立对应设备不同状态的图像库,在需要监测设备的当前状态时,直接采集设备的当前图像与图像库中的图像进行匹配,看是否超过匹配度阈值,如果超过,接更新设备的当前状态为与匹配图像对应的状态,如果未超过,通过人机交互,提醒用户判断设备的当前状态,再根据用户判定的状态对设备的当前状态进行确认。不需要根据设备形状等特定的应用场景调整算法,且监测正确度高,实用性强。
实施例2
与实施例1相比,本实施例设置有两个计数器,分别为记录匹配图像对应的状态与前一状态不同的次数的第一计数器NC和记录匹配图像的匹配度未超过预设的匹配度阈值的次数的第二计数器MC,并且对第一计数器、第二计数器设定预设值,分别对应第一计数器、第二计数器可以达到的最大值。
具体的,如图3所示,在本实施例中,包括:
步骤S200:初始化图像库。
具体的,在本实施例中,初始化图像库设置分别对应设备不同状态的多个图像库,采集设备的一个或多个图像样本,分别存入对应状态的图像库中,暂不能采集到图像的状态对应的图像库先空着。
步骤S201:获取设备的当前图像,将所述当前图像分别与多个图像库中的图像样本进行匹配,计算匹配度,所述多个图像库中的每个图像库分别对应于所述设备的不同状态。
步骤S202:根据所述匹配度获得与所述当前图像匹配度最高的图像样本作为所述当前图像的匹配图像。
步骤S203:判断所述当前图像与所述匹配图像的匹配度是否超过预设的匹配度阈值;若是,则执行步骤S204,若否,则执行步骤S211。
步骤S204:判定所述设备的当前状态为与所述匹配图像对应的状态,将第二计数器MC置零。
步骤S205:判断所述匹配图像对应的状态与所述前一状态是否相同,若是,则执行步骤S206,若否,则执行步骤S207。
步骤S206:将第一计数器置零,执行步骤S216。
步骤S207:对第一计数器进行加1。
步骤S208:判断第一计数器NC的值是否达到预设值N,若否,则执行步骤S216,若是,则执行步骤S209。
步骤S209:生成提示信息,提醒用户重新指定所述设备的当前状态,并且将所述第一计数器NC置零,
步骤S210:判断用户重新指定所述设备的当前状态与所述匹配图像对应的状态是否相同,若是,则执行步骤S216,若否,则执行步骤S215。
步骤S211:对第二计数器MC进行加1。
步骤S212:判断所述第二计数器MC是否达到预设阈值M,若否,则执行步骤S216,若是,则执行步骤S213。
步骤S213:生成提示信息,提醒用户指定设备的当前状态,并且将所述第二计数器置零;
步骤S214:判断当前图像是否是无效图像,若是,则执行步骤S216,若否,则执行步骤S215。
步骤S215:更新图像库,用当前图像更新指定状态对应的图像库。
步骤S216:记录设备确定的当前状态,在等待预设时间或者接收到监测指令后返回步骤S201;
在本实施例中,在步骤S216中,记录设备确定的当前状态作为设备下一次监测的前一状态,因此,此处的前一状态为前一次监测中设备确定的当前状态。
图3示出的是本实施例的整体的算法流程图。请参见图3,在本实施例中,当当前图像与匹配图像的匹配度超过预设的匹配度阈值达到一定的次数时,才对用户进行提示,如果没有达到一定次数,继续等待下一次的监测指令,设备的当前状态仍然保持与上一次记录的设备的状态相同。
并且,在本实施例中,在当前图像与匹配图像的匹配度超过预设的匹配度阈值,将设备的当前状态判定为设备的匹配图像对应的状态后,判断匹配图像对应的状态与所述前一状态是否相同。当连续不同的次数未达到预设值时,不更新图像库。当连续不同的次数达到预设值时,提醒用户判断设备的当前状态。
进一步的,在一些特定场景中,图像匹配的方法很难用来监测设备状态的变化,在获取设备的当前图像之后,可以直接将当前图像与前一次监测中获取的设备状态图像比较,判断当前图像与前一次设备状态图像是否有明显变化,若发生明显变化,则提醒用户查看当前设备状态图像并确认设备当前状态是否发生变化。具体的判断当前图像与前一次设备状态图像是否有明显变化的方法不限,根据实际场景和限制条件来确定。
实施例3
本发明实施例提供了一种设备状态的图像监测装置,如图4所示,包括:
图像获取模块300,用于获取设备的当前图像;
匹配度计算模块301,将所述当前图像分别与多个图像库中的图像样本进行匹配,计算匹配度,所述多个图像库中的每个图像库分别对应于所述设备的不同状态;
匹配图像确认模块309,用于根据所述匹配度获得与所述当前图像匹配度最高的图像样本作为所述当前图像的匹配图像;判断模块302,用于判断所述当前图像与所述匹配图像的匹配度是否超过预设的匹配度阈值;状态判定模块303,当所述判断模块302判断所述当前图像与所述匹配图像的匹配度超过预设的匹配度阈值,用于判定所述设备的当前状态为与所述匹配图像对应的状态;提示模块304,当所述状态判定模块303判断所述当前图像与所述匹配图像的匹配度未超过预设的匹配度阈值,则生成提示信息,提醒用户指定所述设备的当前状态。
如图5所示,还包括初始化模块305,用于:设置所述多个图像库;采集所述设备的一个或多个图像样本,将采集的图像样本分别存入对应状态的图像库中。
请参见图5,还包括图像库更新模块306,用于更新判定的设备的当前状态对应的图像库。
记录模块310,用于记录所述设备的前一状态;
所述判断模块302还用于:判断所述匹配图像对应的状态与所述设备的前一状态是否相同;当所述判断模块302判断所述匹配图像对应的状态与所述前一状态相同,所述图像库更新模块306还用于更新所述匹配图像对应的状态对应的图像库;当所述判断模块302判断所述匹配图像对应的状态与所述前一状态不同,所述提示模块304用于生成提示信息,提醒用户重新指定所述设备的当前状态,当用户重新指定的当前状态与所述匹配图像对应的状态不同,更新与用户指定的当前状态对应的图像库。
如图5所示,本实施例还包括计数模块307,所述计数模块307用于当所述判断模块302判断所述匹配图像对应的状态与所述前一状态不同时,对第一计数器进行加1,当所述判定模块判定所述匹配图像对应的状态与所述前一状态相同时,用于将第一计数器置零,当所述计数模块307中的第一计数器的值达到预设值时,所述计数模块307还用于将所述第一计数器置零,所述提示模块304还用于生成提示信息,提醒用户重新指定所述设备的当前状态,
所述图像库更新模块306还用于,当用户重新指定的当前状态与所述匹配图像对应的状态不同时,更新与用户指定的当前状态对应的图像库,当所述判定模块判定所述匹配图像对应的状态与所述前一状态相同时,更新与所述匹配图像对应的状态的图像库。
所述计数模块307还用于,当所述判断模块302判断所述当前图像与所述匹配图像的匹配度未超过预设的匹配度阈值时,对第二计数器进行加1;
在所述第二计数器达到预设值时,所述提示模块304还用于,生成提示信息,提醒用户指定设备的当前状态,所述计数模块307还用于将所述第二计数器置零,所述图像库更新模块306还用于接收到用户指定的当前状态后,更新与所述用户指定的当前状态对应的图像库。
所述提示模块304还用于,当所述计数器达到预设值时,提醒用户判定当前图像是否有是有效图像;
请参见图5,还包括信息接收模块308,用于接收用户判定的结果;
所述图像库更新模块306还用于,当所述接收模块接收到的所述判定结果为当前图像为有效图像时,在接收到用户指定的当前状态后,根据用户指定的当前状态,更新所述用户指定的当前状态对应的图像库。
在本实施例中,用于提示用户的提示信息可以发送到相应的移动客户端或者电脑客户端,并且生成相应的提示界面,该提示界面用于显示设备的当前图像,提供设备可能存在的状态选择以及对此次状态指定的备注事宜等。
参阅图6,本发明实施例提供的另一种计算机600,包括:处理器500,存储器501,总线502和通信接口503,所述处理器500、通信接口503和存储器501通过总线502连接;处理器500用于执行存储器501中存储的可执行模块,例如计算机程序。所述设备状态的图像监测装置储存于所述存储器501。
其中,存储器501可能包含高速随机存取存储器(RAM:RandomAccessMemory),也可能还包括非不稳定的存储器(non-volatilememory),例如至少一个磁盘存储器。通过至少一个通信接口503(可以是有线或者无线)实现该系统网元与至少一个其他网元之间的通信连接,可以使用互联网,广域网,本地网,城域网等。
总线502可以是ISA总线、PCI总线或EISA总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示,图6中仅用一个双向箭头表示,但并不表示仅有一根总线或一种类型的总线。
其中,存储器501用于存储程序,所述处理器500在接收到执行指令后,执行所述程序,前述本发明实施例任一实施例揭示的流程定义的装置所执行的方法可以应用于处理器500中,或者由处理器500实现。
处理器500可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器500中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器500可以是通用处理器,包括中央处理器(CentralProcessingUnit,简称数据请求端)、网络处理器(NetworkProcessor,简称NP)等;还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器501,处理器500读取存储器501中的信息,结合其硬件完成上述方法的步骤。
本发明实施例所提供的装置,其实现原理及产生的技术效果和前述方法实施例相同,为简要描述,装置实施例部分未提及之处,可参考前述方法实施例中相应内容。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的服务器和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,附图中的流程图和框图显示了根据本发明的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,RandomAccessMemory)、磁碟或者光盘等各种可以存储程序代码的介质。需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种设备状态的图像监测方法,其特征在于,包括:
获取设备的当前图像,将所述当前图像分别与多个图像库中的图像样本进行匹配,计算匹配度,所述多个图像库中的每个图像库分别对应于所述设备的不同状态;
根据所述匹配度获得与所述当前图像匹配度最高的图像样本作为所述当前图像的匹配图像;
判断所述当前图像与所述匹配图像的匹配度是否超过预设的匹配度阈值,若是,则判定所述设备的当前状态为与所述匹配图像对应的状态,若否,则生成提示信息,提醒用户指定所述设备的当前状态。
2.根据权利要求1所述的方法,其特征在于,在所述获取设备的当前图像之前,还包括初始化:
设置所述多个图像库;
采集所述设备在不同状态下的一个或多个图像样本,将采集的图像样本分别存入对应状态的图像库中。
3.根据权利要求1所述的方法,其特征在于,所述生成提示信息,提醒用户指定所述设备的当前状态的步骤之后,还包括:根据用户指定的当前状态,更新与所述用户指定的当前状态对应的图像库。
4.根据权利要求1所述的方法,其特征在于,在所述获取设备的当前图像之前,还包括:
记录所述设备的前一状态;
在所述判定所述设备的当前状态为与所述匹配图像对应的状态之后,包括:
判断所述匹配图像对应的状态与所述设备的前一状态是否相同;若否,则生成提示信息,提醒用户重新指定所述设备的当前状态,当用户重新指定的当前状态与所述匹配图像对应的状态不同,更新与用户指定的当前状态对应的图像库。
5.根据权利要求1所述的方法,其特征在于,在所述获取设备的当前图像之前,还包括记录所述设备的前一状态,
所述判定所述设备的当前状态为与所述匹配图像对应的状态之后,包括:
判断所述匹配图像对应的状态与所述前一状态是否相同;
若是,将第一计数器置零,置零后返回所述获取设备的当前图像的步骤;
若否,对第一计数器进行加1,
当所述第一计数器的值达到预设值时,生成提示信息,提醒用户重新指定所述设备的当前状态,并且将所述第一计数器置零,当用户重新指定的当前状态与所述匹配图像对应的状态相同,直接返回所述获取设备的当前图像的步骤,当用户重新指定的当前状态与所述匹配图像对应的状态不同,更新与用户指定的当前状态对应的图像库,返回所述获取设备的当前图像的步骤,
当所述计数器的值未达到预设值时,返回所述获取设备的当前图像的步骤。
6.根据权利要求1所述的方法,其特征在于,所述判断所述当前图像与所述匹配图像的匹配度是否超过预设的匹配度阈值,
若是的步骤还包括:
将第二计数器置零;
若否的步骤包括:
当所述当前图像与所述匹配图像的匹配度未超过预设的匹配度阈值时,对第二计数器进行加1;
在所述第二计数器达到预设值时,生成提示信息,提醒用户指定设备的当前状态,接收到用户指定的当前状态后,将所述第二计数器置零,更新与所述用户指定的当前状态对应的图像库。
7.根据权利要求6所述的方法,其特征在于,所述在所述第二计数器达到预设值时,生成提示信息还包括:
提醒用户判定当前图像是是有效图像还是无效图像,
所述接收到用户指定的当前状态后,更新与所述用户指定的当前状态对应的图像库包括:
接收用户判定的结果,若所述判定结果为当前图像是有效图像,在接收到用户指定的当前状态后,根据用户指定的当前状态,更新所述用户指定的当前状态对应的图像库,返回所述获取设备的当前图像的步骤;
若所述判定结果为当前图像是无效图像,在接收到用户指定的当前状态后,直接返回所述获取设备的当前图像的步骤。
8.一种设备状态的图像监测装置,其特征在于,包括:
图像获取模块,用于获取设备的当前图像;
匹配度计算模块,将所述当前图像分别与多个图像库中的图像样本进行匹配,计算匹配度,所述多个图像库中的每个图像库分别对应于所述设备的不同状态;
匹配图像确认模块,用于根据所述匹配度获得与所述当前图像匹配度最高的图像样本作为所述当前图像的匹配图像;
判断模块,用于判断所述当前图像与所述匹配图像的匹配度是否超过预设的匹配度阈值,
状态判定模块,当所述状态判定模块判断所述当前图像与所述匹配图像的匹配度是超过预设的匹配度阈值,用于判定所述设备的当前状态为与所述匹配图像对应的状态,
提示模块,当所述状态判定模块判断所述当前图像与所述匹配图像的匹配度未超过预设的匹配度阈值,或所述匹配图像的匹配度过预设的匹配度阈值但其所对应的状态与前一状态不同,则生成提示信息,提醒用户指定所述设备的当前状态。
9.根据权利要求8所述的装置,其特征在于,还包括初始化模块,用于:
设置所述多个图像库;
采集所述设备的一个或多个图像样本,将采集的图像样本分别存入对应状态的图像库中。
10.根据权利要求8所述的装置,其特征在于,还包括图像库更新模块,用于更新判定的设备的当前状态对应的图像库。
CN201510990305.6A 2015-12-24 2015-12-24 设备状态的图像监测方法及装置 Pending CN105373813A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510990305.6A CN105373813A (zh) 2015-12-24 2015-12-24 设备状态的图像监测方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510990305.6A CN105373813A (zh) 2015-12-24 2015-12-24 设备状态的图像监测方法及装置

Publications (1)

Publication Number Publication Date
CN105373813A true CN105373813A (zh) 2016-03-02

Family

ID=55375994

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510990305.6A Pending CN105373813A (zh) 2015-12-24 2015-12-24 设备状态的图像监测方法及装置

Country Status (1)

Country Link
CN (1) CN105373813A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106506953A (zh) * 2016-10-28 2017-03-15 山东鲁能智能技术有限公司 基于指定区域聚焦和曝光伺服的变电站设备图像采集方法
CN107301733A (zh) * 2017-06-15 2017-10-27 北京伊电园网络科技有限公司 一种共享充电宝锁定方法及共享充电宝锁定装置
CN108198612A (zh) * 2017-12-20 2018-06-22 北京惠泽智信科技有限公司 大型医疗设备状态识别方法及装置
CN108829762A (zh) * 2018-05-28 2018-11-16 思百达物联网科技(北京)有限公司 基于视觉的小目标识别方法和装置
CN109596317A (zh) * 2018-12-25 2019-04-09 新华三技术有限公司 一种面板灯的检测方法及装置
CN109941198A (zh) * 2019-02-26 2019-06-28 珠海格力电器股份有限公司 一种物品状态监控方法、装置及存储介质
CN110335377A (zh) * 2019-05-24 2019-10-15 深圳绿米联创科技有限公司 指纹验证方法、装置、电子设备及存储介质
CN112150435A (zh) * 2020-09-23 2020-12-29 徐州联城住宅工业科技发展有限公司 一种预制构件的施工管理方法及装置
CN113837406A (zh) * 2021-09-22 2021-12-24 焕新汽车科技(南通)有限公司 一种消费类电子设备的回收系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110285837A1 (en) * 2010-05-19 2011-11-24 General Electric Company Methods and systems for identifying well wall boundaries of microplates
CN102289676A (zh) * 2011-07-30 2011-12-21 山东鲁能智能技术有限公司 基于红外检测的变电站刀闸模式识别方法
CN102663358A (zh) * 2012-03-29 2012-09-12 山西省电力公司晋中供电分公司 变电站二次保护设备运行状态的视频图像识别方法
CN103150904A (zh) * 2013-02-05 2013-06-12 中山大学 一种基于图像特征的卡口车辆图像识别方法
CN103324943A (zh) * 2013-06-18 2013-09-25 中国人民解放军第二炮兵工程大学 一种复杂设备面板图像多子区状态识别方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110285837A1 (en) * 2010-05-19 2011-11-24 General Electric Company Methods and systems for identifying well wall boundaries of microplates
CN102289676A (zh) * 2011-07-30 2011-12-21 山东鲁能智能技术有限公司 基于红外检测的变电站刀闸模式识别方法
CN102663358A (zh) * 2012-03-29 2012-09-12 山西省电力公司晋中供电分公司 变电站二次保护设备运行状态的视频图像识别方法
CN103150904A (zh) * 2013-02-05 2013-06-12 中山大学 一种基于图像特征的卡口车辆图像识别方法
CN103324943A (zh) * 2013-06-18 2013-09-25 中国人民解放军第二炮兵工程大学 一种复杂设备面板图像多子区状态识别方法

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106506953A (zh) * 2016-10-28 2017-03-15 山东鲁能智能技术有限公司 基于指定区域聚焦和曝光伺服的变电站设备图像采集方法
CN107301733A (zh) * 2017-06-15 2017-10-27 北京伊电园网络科技有限公司 一种共享充电宝锁定方法及共享充电宝锁定装置
CN108198612A (zh) * 2017-12-20 2018-06-22 北京惠泽智信科技有限公司 大型医疗设备状态识别方法及装置
CN108829762A (zh) * 2018-05-28 2018-11-16 思百达物联网科技(北京)有限公司 基于视觉的小目标识别方法和装置
CN108829762B (zh) * 2018-05-28 2020-09-04 思百达物联网科技(北京)有限公司 基于视觉的小目标识别方法和装置
CN109596317A (zh) * 2018-12-25 2019-04-09 新华三技术有限公司 一种面板灯的检测方法及装置
CN109941198A (zh) * 2019-02-26 2019-06-28 珠海格力电器股份有限公司 一种物品状态监控方法、装置及存储介质
CN110335377A (zh) * 2019-05-24 2019-10-15 深圳绿米联创科技有限公司 指纹验证方法、装置、电子设备及存储介质
CN110335377B (zh) * 2019-05-24 2022-05-13 深圳绿米联创科技有限公司 指纹验证方法、装置、电子设备及存储介质
CN112150435A (zh) * 2020-09-23 2020-12-29 徐州联城住宅工业科技发展有限公司 一种预制构件的施工管理方法及装置
CN113837406A (zh) * 2021-09-22 2021-12-24 焕新汽车科技(南通)有限公司 一种消费类电子设备的回收系统
CN113837406B (zh) * 2021-09-22 2023-09-08 焕新汽车科技(南通)有限公司 一种消费类电子设备的回收系统

Similar Documents

Publication Publication Date Title
CN105373813A (zh) 设备状态的图像监测方法及装置
CN108734162B (zh) 商品图像中目标识别方法、系统、设备及存储介质
CN110705583B (zh) 细胞检测模型训练方法、装置、计算机设备及存储介质
CN110705405B (zh) 目标标注的方法及装置
CN109299703B (zh) 对鼠情进行统计的方法、装置以及图像采集设备
CN107886048A (zh) 目标跟踪方法及系统、存储介质及电子终端
US10489674B2 (en) Information extraction using image data
CN111046956A (zh) 遮挡图像检测方法、装置、电子设备及存储介质
CN109829397B (zh) 一种基于图像聚类的视频标注方法、系统以及电子设备
CN111144337B (zh) 火灾检测方法、装置及终端设备
CN114169381A (zh) 图像标注方法、装置、终端设备及存储介质
EP3890312B1 (en) Distributed image analysis method and system, and storage medium
CN114511820A (zh) 货架商品检测方法、装置、计算机设备及存储介质
CN111080665A (zh) 图像边框识别方法、装置、设备和计算机存储介质
CN112966687B (zh) 图像分割模型训练方法、装置及通信设备
CN110505438B (zh) 一种排队数据的获取方法和摄像机
KR102230559B1 (ko) 데이터 프로그래밍에 기반한 레이블링 모델 생성 방법 및 장치
CN111091056B (zh) 图像中的墨镜识别方法及装置、电子设备、存储介质
CN115083008A (zh) 运动目标检测方法、装置、设备及存储介质
CN110210401B (zh) 一种弱光下的目标智能检测方法
CN112132218B (zh) 图像处理方法、装置、电子设备及存储介质
JP2017162179A (ja) 情報処理装置、情報処理方法、及びプログラム
US20220148193A1 (en) Adaptive object recognition apparatus and method in fixed closed circuit television edge terminal using network
KR20210031444A (ko) 데이터 프로그래밍에 기반한 레이블링 모델 생성 방법 및 장치
CN114025089A (zh) 一种视频图像采集抖动处理方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Two Lu Tian Hua high tech Zone of Chengdu City, Sichuan province 610000 No. 219 Tianfu Software Park C District 10 Building 16 layer

Applicant after: Huayan Intelligent Technology (Group) Co., Ltd

Address before: Two Lu Tian Hua high tech Zone of Chengdu City, Sichuan province 610000 No. 219 Tianfu Software Park C District 10 Building 16 layer

Applicant before: Sichuan Whayer Information Industry Co., Ltd.

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20160302