CN110689527B - 飞机线缆支架的安装状态检测方法、装置及设备 - Google Patents

飞机线缆支架的安装状态检测方法、装置及设备 Download PDF

Info

Publication number
CN110689527B
CN110689527B CN201910880892.1A CN201910880892A CN110689527B CN 110689527 B CN110689527 B CN 110689527B CN 201910880892 A CN201910880892 A CN 201910880892A CN 110689527 B CN110689527 B CN 110689527B
Authority
CN
China
Prior art keywords
cable
picture
detected
target
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910880892.1A
Other languages
English (en)
Other versions
CN110689527A (zh
Inventor
肖文磊
胡靖宇
李汝鹏
赵罡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Aircraft Manufacturing Co Ltd
Beihang University
Original Assignee
Shanghai Aircraft Manufacturing Co Ltd
Beihang University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Aircraft Manufacturing Co Ltd, Beihang University filed Critical Shanghai Aircraft Manufacturing Co Ltd
Priority to CN201910880892.1A priority Critical patent/CN110689527B/zh
Publication of CN110689527A publication Critical patent/CN110689527A/zh
Application granted granted Critical
Publication of CN110689527B publication Critical patent/CN110689527B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/13Edge detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G06V10/443Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by matching or filtering

Abstract

本发明提供一种飞机线缆支架的安装状态检测方法、装置及设备。该方法包括根据用户指令确定待检测部段,并在预存的图片库中确定该待检测部段对应的部段图片,该部段图片中的线缆支架均为安装正确;获取待检测图片,该待检测图片中包括M个线缆支架,M为正整数;该待检测图片所检测的位置属于该待检测部段;将该待检测图片中的目标线缆支架与该部段图片中与该目标线缆支架对应的第一线缆支架进行匹配,确定该目标线缆支架的检测结果;其中,该目标线缆支架为该M个线缆支架中的任一个,该检测结果包括安装正确或安装错误。该方法可以快速检测待检测图片中目标线缆支架的安装状态,提高了检测效率。

Description

飞机线缆支架的安装状态检测方法、装置及设备
技术领域
本发明涉及图像处理技术,尤其涉及一种飞机线缆支架的安装状态检测方法、装置及设备。
背景技术
飞机作为一种交通工具,为人们的出行带来了极大的便利。同时,飞机飞行的安全性也变得尤为重要。通常每架飞机上大约设置有2万至3万个线缆支架,线缆支架是否安装正确会影响到飞机的飞行安全,因此,保证线缆支架安装正确就变得尤为重要。
现有技术中,为了保证线缆支架安装正确,通常会在线缆支架安装完成后,通过人工检测的方式对每一个线缆支架的安装状态(是否安装正确)进行检测,并对未安装正确的线缆支架进行维护,以保证全部线缆支架均安装正确。
然而,由于线缆支架数量巨大,采用人工检测的方式检测线缆支架的安装状态时,检测效率较低。
发明内容
本发明提供一种飞机线缆支架的安装状态检测方法、装置及设备,在检测线缆支架的安装状态时,提高了检测效率。
本发明提供一种飞机线缆支架的安装状态检测方法,包括:
根据用户指令确定待检测部段,并在预存的图片库中确定该待检测部段对应的部段图片,该部段图片中的线缆支架均安装正确;
获取待检测图片,该待检测图片中包括M个线缆支架,M为正整数;该待检测图片所检测的位置属于该待检测部段;
将该待检测图片中的目标线缆支架与该部段图片中与该目标线缆支架对应的第一线缆支架进行匹配,确定该目标线缆支架的检测结果;
其中,该目标线缆支架为该M个线缆支架中的任一个,该检测结果包括安装正确或安装错误。
可选的,该在预存的图片库中确定该待检测部段对应的部段图片,包括:
确定该待检测部段的检测工位;
根据该图片库中的部段图片与检测工位之间的对应关系,确定与该待检测部段对应的部段图片。
可选的,该将该待检测图片中的目标线缆支架与该部段图片中与该目标线缆支架对应的第一线缆支架进行匹配,确定该目标线缆支架的检测结果,包括:
对该待检测图片进行实例分割,分别获得该M个线缆支架各自对应的包围框和掩膜;
采用图像配准算法确定该待检测图片对应的标准图片及标准图片中每个线缆支架的掩膜和包围框;该标准图片为该部段图片的一部分,该标准图片中包括该待检测图片对应的飞机位置上的所有线缆支架;
根据该目标线缆支架的包围框与该标准图片中每个线缆支架的包围框,确定该标准图片中与该目标线缆支架对应的第一线缆支架;
根据该目标线缆支架的掩膜和该第一线缆支架的掩膜,确定该目标线缆支架与该第一线缆支架的匹配程度,根据匹配程度确定该目标线缆支架的检测结果。
可选的,该根据该目标线缆支架的包围框与该标准图片中每个线缆支架的包围框,确定该标准图片中与该目标线缆支架对应的第一线缆支架,包括:
根据该目标线缆支架的包围框与该标准图片中每个线缆支架的包围框,计算该目标线缆支架与该标准图片中每个线缆支架的距离;
将该标准图片中与该目标线缆支架的距离最近且距离小于第一阈值的线缆支架确定为该标准图片中与该目标线缆支架对应的第一线缆支架。
可选的,该方法还包括:
若该标准图片中的第二线缆支架与该待检测图片中的每个线缆支架的距离都大于或等于该第一阈值,则确定该第二线缆支架在该待检测图片中漏装。
可选的,该根据该目标线缆支架的掩膜和该第一线缆支架的掩膜,确定该目标线缆支架与该第一线缆支架的匹配程度,根据匹配程度确定该目标线缆支架的检测结果,包括:
根据该目标线缆支架的掩膜和该第一线缆支架的掩膜,分别提取该目标线缆支架的轮廓和该第一线缆支架的轮廓;
将该目标线缆支架的轮廓与该第一线缆支架的轮廓进行轮廓匹配获得匹配结果,该匹配结果指示该目标线缆支架的轮廓与该第一线缆支架的轮廓的差异;
若该匹配结果小于第二阈值,则确定该目标线缆支架安装正确;
若该匹配结果大于或等于第二阈值,则确定该目标线缆支架安装错误。
可选的,该根据该目标线缆支架的掩膜和该第一线缆支架的掩膜,确定该目标线缆支架与该第一线缆支架的匹配程度,根据匹配程度确定该目标线缆支架的检测结果,包括:
将该目标线缆支架的掩膜和该第一线缆支架的掩膜进行像素匹配获得匹配结果,该匹配结果指示该目标线缆支架与该第一线缆支架的掩膜的像素相似度;
若该匹配结果大于第三阈值,则确定该目标线缆支架安装正确;
若该匹配结果小于或等于第三阈值,则确定该目标线缆支架安装错误。
可选的,该确定该目标线缆支架的检测结果之后,该方法还包括:
将该目标线缆支架的检测结果标注在该待检测图片上,并显示标注后的待检测图片。
本发明提供一种飞机线缆支架的安装状态检测装置,包括:
第一确定模块,用于根据用户指令确定待检测部段,并在预存的标准图片库中确定该待检测部段对应的部段图片,该部段图片中的线缆支架均为安装正确;
获取模块,用于获取待检测图片,该待检测图片中包括M个线缆支架,M为正整数;该待检测图片所检测的位置属于该待检测部段;
第二确定模块,用于将该待检测图片中的目标线缆支架与该部段图片中与该目标线缆支架对应的第一线缆支架进行匹配,确定该目标线缆支架的检测结果;
其中,该目标线缆支架为该M个线缆支架中的任一个,该检测结果包括安装正确或安装错误。
可选的,该第一确定模块具体用于:
确定该待检测部段的检测工位;
根据该图片库中的部段图片与检测工位之间的对应关系,确定与该待检测部段对应的部段图片。
可选的,该第二确定模块具体用于:
对该待检测图片进行实例分割,分别获得该M个线缆支架各自对应的包围框和掩膜;
采用图像配准算法确定该待检测图片对应的标准图片及标准图片中每个线缆支架的掩膜和包围框;该标准图片为该部段图片的一部分,该标准图片中包括该待检测图片对应的飞机位置上的所有线缆支架;
根据该目标线缆支架的包围框与该标准图片中每个线缆支架的包围框,确定该标准图片中与该目标线缆支架对应的第一线缆支架;
根据该目标线缆支架的掩膜和该第一线缆支架的掩膜,确定该目标线缆支架与该第一线缆支架的匹配程度,根据匹配程度确定该目标线缆支架的检测结果。
可选的,该二确定模块具体用于:
根据该目标线缆支架的包围框与该标准图片中每个线缆支架的包围框,计算该目标线缆支架与该标准图片中每个线缆支架的距离;
将该标准图片中与该目标线缆支架的距离最近且距离小于第一阈值的线缆支架确定为该标准图片中与该目标线缆支架对应的第一线缆支架。
可选的,该二确定模块还具体用于:
若该标准图片中的第二线缆支架与该待检测图片中的每个线缆支架的距离都大于或等于该第一阈值,则确定该第二线缆支架在该待检测图片中漏装。
可选的,该二确定模块还具体用于:
根据该目标线缆支架的掩膜和该第一线缆支架的掩膜,分别提取该目标线缆支架的轮廓和该第一线缆支架的轮廓;
将该目标线缆支架的轮廓与该第一线缆支架的轮廓进行轮廓匹配获得匹配结果,该匹配结果指示该目标线缆支架的轮廓与该第一线缆支架的轮廓的差异;
若该匹配结果小于第二阈值,则确定该目标线缆支架安装正确;
若该匹配结果大于或等于第二阈值,则确定该目标线缆支架安装错误。
可选的,该二确定模块还具体用于:
将该目标线缆支架的掩膜和该第一线缆支架的掩膜进行像素匹配获得匹配结果,该匹配结果指示该目标线缆支架与该第一线缆支架的掩膜的像素相似度;
若该匹配结果大于第三阈值,则确定该目标线缆支架安装正确;
若该匹配结果小于或等于第三阈值,则确定该目标线缆支架安装错误。
可选的,该装置还包括显示模块,该显示模块用于:
将该目标线缆支架的检测结果标注在该待检测图片上,并显示标注后的待检测图片。
本发明提供一种飞机线缆支架的安装状态检测设备,包括:存储器和处理器;该存储器与该处理器连接;
该存储器,用于存储计算机程序;
该处理器,用于在计算机程序被执行时,实现如上述任一项的飞机线缆支架的安装状态检测方法。
本发明提供一种存储介质,其上存储有计算机程序,该计算机程序被处理器执行时,实现如上述任一项的飞机线缆支架的安装状态检测方法。
本发明提供一种飞机线缆支架的安装状态检测方法、装置及设备,其中,该方法包括根据用户指令确定待检测部段,并在预存的图片库中确定该待检测部段对应的部段图片,该部段图片中的线缆支架均为安装正确;获取待检测图片,该待检测图片中包括M个线缆支架,M为正整数;该待检测图片所检测的位置属于该待检测部段;将该待检测图片中的目标线缆支架与该部段图片中与该目标线缆支架对应的第一线缆支架进行匹配,确定该目标线缆支架的检测结果;其中,该目标线缆支架为该M个线缆支架中的任一个,该检测结果包括安装正确或安装错误。该方法可以快速检测待检测图片中目标线缆支架的安装状态,提高了检测效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图做一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明提供的一种飞机线缆支架的安装状态检测方法的流程示意图一;
图2为本发明提供的一种飞机线缆支架的安装状态检测方法的流程示意图二;
图3为本发明提供的一种飞机线缆支架的安装状态检测装置的结构示意图;
图4为本发明提供的一种飞机线缆支架的安装状态检测设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1为本发明提供的一种飞机线缆支架的安装状态检测方法的流程示意图一。该方法的执行主体为飞机线缆支架的安装状态检测装置,该装置可以由软件和/或硬件的方式实现。如图1所示,本实施例的方法可以包括:
S101、根据用户指令确定待检测部段,并在预存的图片库中确定该待检测部段对应的部段图片,该部段图片中的线缆支架均为安装正确。
飞机的各个位置分为不同的部段,例如前机身部段、后机身部段等,每个部段上都包括大量的线缆支架,在进行线缆支架检测时,通常是分部段逐步检测。因此在对线缆支架进行检测时,首先确定待检测部段,具体可以由检测人员根据需要确定,例如检测人员可以在检测装置所提供的人机交互界面上手动输入本次所要检测的待检测部段,进而确定在预测的图片库中确定该待检测部段对应的部段图片。
可选的,还可以通过如下方法确定待检测图片对应的部段图片:确定该待检测部段的检测工位;根据该图片库中的部段图片与检测工位之间的对应关系,确定该待检测部段对应的部段图片。
具体的,图片库中预存的每张部段图片可以具有与其相对应的检测工位即检测位置,确定当前的检测工位,从而可以通过检测工位进行索引,在图片库中查找与待检测部段对应的部段图片。示例的,在实际应用中,检测人员可以通过扫描二维码等方式确定当前的检测工位并发送给检测装置,检测装置即可根据该检测工位确定待检测部段以及待检测部段对应的部段图片。
图片库中的部段图片为预存的飞机线缆支架正确安装时的图片,例如,部段图片可以存储在预先构建的线缆支架安装状态检索数据库中,该数据库中可以包括多张部段图片,每张部段图片分别为飞机的不同部段的线缆支架正确安装时的图片。线缆支架安装状态检索数据库可以为飞机线缆支架的安装状态检测装置具有的数据库,也可以为飞机线缆支架的安装状态检测装置可以访问的其他设备上的数据库或者网络上的数据库等。在确定待检测部段后,即可在该数据库,即图片库中查找待检测部段对应的部段图片。
S102、获取待检测图片。
其中,该待检测图片中包括M个线缆支架,M为正整数;该待检测图片所检测的位置属于该待检测部段。
在获取检测图片时,该待检测图片可以由拍摄设备,如手机、相机等,进行拍摄之后发送给飞机线缆支架的安装状态检测装置,或者,待检测图片也可以由具备拍摄功能的飞机线缆支架的安装状态检测装置进行拍摄,本发明对此不作具体限定。其中,待检测图片中可以包括M个待检测的线缆支架,具体数量可以根据实际的检测需求进行确定,在此,对于M的个数,本申请实施例不做具体限制。该待检测图片所检测的位置属于该待检测部段,也就是,S101中所确定的部段图片中所拍摄到的飞机部段中包括待检测图片中所拍摄到的位置,即,该部段图片中包括了待检测图片对应的拍摄位置中所应该正确安装的全部线缆支架,该部段图片中还可以包括除了待检测图片中的位置之外的其他位置的线缆支架。
需要说明的是,在检测飞机线缆支架的安装状态时,由于拍摄的某一张待检测图片可能无法覆盖该待检测部段上所有线缆支架,因此,可以通过多次从不同的角度拍摄飞机的线缆支架,以确保可以通过多张图片获取到该待检测部段上所有线缆支架的当前状态,这样可以通过重复获取待检测图片,完成对该待检测部段上所有线缆支架的检测,并可以通过重复执行本实施例提供的飞机线缆支架的安装状态检测方法对所有待检测部段进行检测,以确保通过多个待检测部段对飞机上所有线缆支架的安装状态进行检测,从而完成对飞机上的所有线缆支架的检测。
S103、将该待检测图片中的目标线缆支架与该部段图片中与该目标线缆支架对应的第一线缆支架进行匹配,确定该目标线缆支架的检测结果。
其中,该目标线缆支架为该M个线缆支架中的任一个,该检测结果包括安装正确或安装错误。
上述S101中获得的待检测部段对应的部段图片中包括了待检测图片对应的拍摄位置中所应该安装正确的全部线缆支架,对于待检测图片中的M个线缆支架中的任一个线缆支架,即目标线缆支架,将其与部段图片中对应的第一线缆支架进行匹配,也就是将待检测图片中的目标线缆支架与对应的安装正确的线缆支架进行匹配,若待检测图片中的目标线缆支架与安装正确的第一线缆支架匹配度较高,如匹配度大于或等于预设值,则确认目标线缆支架安装正确,若匹配度较低,如匹配度小于预设值,则确认目标线缆支架安装错误。此外,若在该部段图片中没有与该目标线缆支架对应的第一线缆支架,则确认该目标线缆支架安装错误,更具体的,是该目标线缆支架为多余的线缆支架。
本实施例提供的飞机线缆支架的安装状态检测方法通过根据用户指令确定待检测部段,并在预存的图片库中确定该待检测部段对应的部段图片,该部段图片中的线缆支架均安装正确;获取待检测图片,该待检测图片中包括M个线缆支架,M为正整数;该待检测图片所检测的位置属于该待检测部段;进一步将该待检测图片中的目标线缆支架与该部段图片中与该目标线缆支架对应的第一线缆支架进行匹配,确定该目标线缆支架的检测结果。该方法可以实现快速确定待检测图片中目标线缆支架的安装状态,提高了检测效率。
可选的,上述实施例中的线缆支架安装状态检索数据库,即图片库中还可以包括部段图片中每个线缆支架的掩膜和包围框,每个包围框中包括一个线缆支架。图片库中部段图片以及掩膜和包围框的来源可以有两种:一,利用相机拍摄部段图片,且人工标记部段图片中每个线缆支架的掩膜和包围框;二,利用仿真技术,利用3D模型渲染出逼真场景,得到仿真图作为部段图片及对应的各线缆支架的掩膜和包围框。在此基础上,本发明还可提供一种飞机线缆支架的安装状态检测方法。图2为本发明提供的一种飞机线缆支架的安装状态检测方法的流程示意图二。如图2所示,S103中将该待检测图片中的目标线缆支架与该部段图片中与该目标线缆支架对应的第一线缆支架进行匹配,确定该目标线缆支架的检测结果,可以包括:
S201、对待检测图片进行实例分割,分别获得M个线缆支架各自对应的包围框和掩膜。
本实施例中对实例分割算法不作具体限定,例如可以采用Mask R-CNN对待检测图片进行实例分割,分别获得待检测图片中每个线缆支架各自对应的包围框和掩膜。
S202、采用图像配准算法确定该待检测图片对应的标准图片及标准图片中每个线缆支架的掩膜和包围框;该标准图片为该部段图片的一部分,该标准图片中包括待检测图片对应的飞机位置上的所有线缆支架。
由于部段图片对应的拍摄范围大于待检测图片对应的拍摄范围,因此还需要在部段图片中准确找到待检测图片所对应的拍摄范围,也就是待检测图片对应的标准图片,显然,该标准图片为该部段图片的一部分。采用图像配准算法对待检测图片和部段图片进行配准,图像配准算法可以采用现有技术中已有的算法,即,提取待检测图片与部段图片的特征点,通过计算描述特征点的特征向量间的欧式距离得到待检测图片与部段图片间的匹配点对,根据匹配点对计算待检测图片与部段图片间的单应性矩阵。利用此单应性矩阵,对部段图片及部段图片中每个线缆支架的掩膜和包围框进行单应性变换,得到标准图片及标准图片中每个线缆支架的掩膜和包围框。
此外,还可以通过多尺度、多角度的模板匹配算法,对待检测图片的掩膜图和部段图片的掩膜图进行模板匹配,得到待检测图片与部段图片间的相对位置关系,从而计算得到二者间的单应性矩阵,利用此单应性矩阵,对部段图片及部段图片中每个线缆支架的掩膜和包围框进行单应性变换,得到标准图片及标准图片中每个线缆支架的掩膜和包围框。本发明对图像配准算法不作具体限定。
S203、根据该目标线缆支架的包围框与该标准图片中每个线缆支架的包围框,确定该标准图片中与该目标线缆支架对应的第一线缆支架。
在确定了待检测图片对应的标准图片之后,还需要确定标准图片中与待检测图片中目标线缆支架相对应的第一线缆支架。
可选的,根据该目标线缆支架的包围框与该标准图片中每个线缆支架的包围框,计算该目标线缆支架与该标准图片中每个线缆支架的距离;将该标准图片中与该目标线缆支架的距离最近且距离小于第一阈值的线缆支架确定为该标准图片中与该目标线缆支架对应的第一线缆支架。
具体的,计算目标线缆支架的包围框与标准图片中每个线缆支架的包围框的距离,即线缆支架的距离,标准图片中与目标线缆支架距离最近的线缆支架即为目标线缆支架对应的第一线缆支架。此外,第一线缆支架与目标线缆支架之间的距离还要满足小于第一阈值,以保证标准图片中与目标线缆支架对应的第一线缆支架的正确性,第一阈值根据实际需要进行设置。
若在标准图片中不存在任一线缆支架与目标线缆支架的距离小于第一阈值,则表示标准图片中没有与目标线缆支架对应的线缆支架,从而可以确定目标线缆支架安装错误,更具体的,是该目标线缆支架为应该去除掉的多装的线缆支架。
可选的,若该标准图片中的第二线缆支架与该待检测图片中的每个线缆支架的距离都大于或等于该第一阈值,则确定该第二线缆支架在该待检测图片中漏装。即,在待检测图片中没有与标准图片中的第二线缆支架对应的线缆支架,则说明待检测图片中漏装了该第二线缆支架。
S204、根据该目标线缆支架的掩膜和该第一线缆支架的掩膜,确定该目标线缆支架与该第一线缆支架的匹配程度,根据匹配程度确定该目标线缆支架的检测结果。
目标线缆支架与该第一线缆支架的匹配程度可以采用以下两种可能的实现方式确定。
在一种可能的实现方式中,根据该目标线缆支架的掩膜和该第一线缆支架的掩膜,分别提取该目标线缆支架的轮廓和该第一线缆支架的轮廓;将该目标线缆支架的轮廓与该第一线缆支架的轮廓进行轮廓匹配获得匹配结果,该匹配结果指示该目标线缆支架的轮廓与该第一线缆支架的轮廓的差异;若该匹配结果小于第二阈值,则确定该目标线缆支架安装正确;若该匹配结果大于或等于第二阈值,则确定该目标线缆支架安装错误。
上述方式中,采用轮廓匹配的方法对目标线缆支架的轮廓和该第一线缆支架的轮廓进行匹配,轮廓匹配的结果指示这两个轮廓的差异性,轮廓匹配结果的值越大则说明这两个轮廓的差异越大,则这两个轮廓越不匹配,具体可以通过预先设定的第二阈值对该差异进行判断,第二阈值可以根据实际需要进行设定。
在另一种可能的实现方式中,将该目标线缆支架的掩膜和该第一线缆支架的掩膜进行像素匹配获得匹配结果,该匹配结果指示该目标线缆支架与该第一线缆支架的掩膜的像素相似度;若该匹配结果大于第三阈值,则确定该目标线缆支架安装正确;若该匹配结果小于或等于第三阈值,则确定该目标线缆支架安装错误。
上述方式中,像素匹配的结果指示目标线缆支架与该第一线缆支架的掩膜的相似度,像素匹配的结果的值越大则说明这两个掩膜的相似度越高,则这目标线缆支架与该第一线缆支架的匹配度越高,具体可以通过预先设定的第三阈值对该相似度进行判断,第三阈值可以根据实际需要进行设定。
本实施例提供的飞机线缆支架的安装状态检测方法,根据待检测图片以及标准图片中线缆支架的包围框和掩膜,确定目标线缆支架与对应的第一线缆支架的匹配程度,从而确定目标线缆支架的检测结果,提高了线缆支架的安装状态检测效率。
在上述任一实施例的基础上,在确定该目标线缆支架的检测结果之后,该方法还可包括:将该目标线缆支架的检测结果标注在该待检测图片上,并显示标注后的待检测图片。
具体的,飞机线缆支架的安装状态检测装置中可以包括一个显示设备,如显示屏,或者该装置可以外接一个显示设备,该待检测图片可以通过该显示设备进行显示,飞机线缆支架安装状态检测装置将目标线缆支架的检测结果发送给该显示设备,并通过不同的颜色标注不同的检测结果,例如红色表示某位置有线缆支架漏装,绿色表示安装正确,黄色表示安装错误,多装的线缆支架不作颜色标记等,本发明对此不作具体限定。通过该方法可以实现对飞机线缆支架安装状态检测结果的可视化展示,提高了检测效率。
图3为本发明提供的一种飞机线缆支架的安装状态检测装置的结构示意图。如图3所示,飞机线缆支架的安装状态检测装置30包括:
第一确定模块301,用于根据用户指令确定待检测部段,并在预存的标准图片库中确定该待检测部段对应的部段图片,该部段图片中的线缆支架均为安装正确。
获取模块302,用于获取待检测图片,该待检测图片中包括M个线缆支架,M为正整数;该待检测图片所检测的位置属于该待检测部段。
第二确定模块303,用于将该待检测图片中的目标线缆支架与该部段图片中与该目标线缆支架对应的第一线缆支架进行匹配,确定该目标线缆支架的检测结果。
其中,该目标线缆支架为该M个线缆支架中的任一个,该检测结果包括安装正确或安装错误。
可选的,该第一确定模块301具体用于:
确定该待检测部段的检测工位;根据该图片库中的部段图片与检测工位之间的对应关系,确定该待检测部段对应的部段图片。
可选的,该第二确定模块303具体用于:
对该待检测图片进行实例分割,分别获得该M个线缆支架各自对应的包围框和掩膜;
采用图像配准算法确定该待检测图片对应的标准图片及标准图片中每个线缆支架的掩膜和包围框;该标准图片为该部段图片的一部分,该标准图片中包括待检测图片对应的飞机位置上的所有线缆支架;
根据该目标线缆支架的包围框与该标准图片中每个线缆支架的包围框,确定该标准图片中与该目标线缆支架对应的第一线缆支架;
根据该目标线缆支架的掩膜和该第一线缆支架的掩膜,确定该目标线缆支架与该第一线缆支架的匹配程度,根据匹配程度确定该目标线缆支架的检测结果。
可选的,该二确定模块303具体用于:
根据该目标线缆支架的包围框与该标准图片中每个线缆支架的包围框,计算该目标线缆支架与该标准图片中每个线缆支架的距离;
将该标准图片中与该目标线缆支架的距离最近且距离小于第一阈值的线缆支架确定为该标准图片中与该目标线缆支架对应的第一线缆支架。
可选的,该二确定模块303还具体用于:
若该标准图片中的第二线缆支架与该待检测图片中的每个线缆支架的距离都大于或等于该第一阈值,则确定该第二线缆支架在该待检测图片中漏装。
可选的,该二确定模块303还具体用于:
根据该目标线缆支架的掩膜和该第一线缆支架的掩膜,分别提取该目标线缆支架的轮廓和该第一线缆支架的轮廓;
将该目标线缆支架的轮廓与该第一线缆支架的轮廓进行轮廓匹配获得匹配结果,该匹配结果指示该目标线缆支架的轮廓与该第一线缆支架的轮廓的差异;
若该匹配结果小于第二阈值,则确定该目标线缆支架安装正确;
若该匹配结果大于或等于第二阈值,则确定该目标线缆支架安装错误。
可选的,该二确定模块303还具体用于:
将该目标线缆支架的掩膜和该第一线缆支架的掩膜进行像素匹配获得匹配结果,该匹配结果指示该目标线缆支架与该第一线缆支架的掩膜的像素相似度;
若该匹配结果大于第三阈值,则确定该目标线缆支架安装正确;
若该匹配结果小于或等于第三阈值,则确定该目标线缆支架安装错误。
可选的,该装置还包括显示模块304,该显示模块304用于:
将该目标线缆支架的检测结果标注在该待检测图片上,并显示标注后的待检测图片。
上述实施例中的飞机线缆支架的安装状态检测装置,可用于执行图1或图2所示实施例中的方法,其实现原理与技术效果类似,此处不再赘述。
图4为本发明提供的一种飞机线缆支架的安装状态检测设备的结构示意图。如图4所示,飞机线缆支架的安装状态检测设备40包括:存储器401和处理器402;存储器401与处理器402连接;
存储器401,用于存储计算机程序;
处理器402,用于在计算机程序被执行时,实现如上述任一项的飞机线缆支架的安装状态检测方法。
本发明提供一种存储介质,其上存储有计算机程序,该计算机程序被处理器执行时,实现如上述任一项的飞机线缆支架的安装状态检测方法。
本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (9)

1.一种飞机线缆支架的安装状态检测方法,其特征在于,包括:
根据用户指令确定待检测部段,并在预存的图片库中确定所述待检测部段对应的部段图片,所述部段图片中的线缆支架均安装正确;
获取待检测图片,所述待检测图片中包括M个线缆支架,M为正整数;所述待检测图片所检测的位置属于所述待检测部段;
对所述待检测图片进行实例分割,分别获得所述M个线缆支架各自对应的包围框和掩膜;
采用图像配准算法确定所述待检测图片对应的标准图片及标准图片中每个线缆支架的掩膜和包围框;所述标准图片为所述部段图片的一部分,所述标准图片中包括所述待检测图片对应的飞机位置上的所有线缆支架;
根据目标线缆支架的包围框与所述标准图片中每个线缆支架的包围框,确定所述标准图片中与所述目标线缆支架对应的第一线缆支架;
根据所述目标线缆支架的掩膜和所述第一线缆支架的掩膜,确定所述目标线缆支架与所述第一线缆支架的匹配程度,根据匹配程度确定所述目标线缆支架的检测结果;
其中,所述目标线缆支架为所述M个线缆支架中的任一个,所述检测结果包括安装正确或安装错误。
2.根据权利要求1所述的方法,其特征在于,所述在预存的图片库中确定所述待检测部段对应的部段图片,包括:
确定所述待检测部段的检测工位;
根据所述图片库中的部段图片与检测工位之间的对应关系,确定所述待检测部段对应的部段图片。
3.根据权利要求1所述的方法,其特征在于,所述根据所述目标线缆支架的包围框与所述标准图片中每个线缆支架的包围框,确定所述标准图片中与所述目标线缆支架对应的第一线缆支架,包括:
根据所述目标线缆支架的包围框与所述标准图片中每个线缆支架的包围框,计算所述目标线缆支架与所述标准图片中每个线缆支架的距离;
将所述标准图片中与所述目标线缆支架的距离最近且距离小于第一阈值的线缆支架确定为所述标准图片中与所述目标线缆支架对应的第一线缆支架。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
若所述标准图片中的第二线缆支架与所述待检测图片中的每个线缆支架的距离都大于或等于所述第一阈值,则确定所述第二线缆支架在所述待检测图片中漏装。
5.根据权利要求1所述的方法,其特征在于,所述根据所述目标线缆支架的掩膜和所述第一线缆支架的掩膜,确定所述目标线缆支架与所述第一线缆支架的匹配程度,根据匹配程度确定所述目标线缆支架的检测结果,包括:
根据所述目标线缆支架的掩膜和所述第一线缆支架的掩膜,分别提取所述目标线缆支架的轮廓和所述第一线缆支架的轮廓;
将所述目标线缆支架的轮廓与所述第一线缆支架的轮廓进行轮廓匹配获得匹配结果,所述匹配结果指示所述目标线缆支架的轮廓与所述第一线缆支架的轮廓的差异;
若所述匹配结果小于第二阈值,则确定所述目标线缆支架安装正确;
若所述匹配结果大于或等于第二阈值,则确定所述目标线缆支架安装错误。
6.根据权利要求1所述的方法,其特征在于,所述根据所述目标线缆支架的掩膜和所述第一线缆支架的掩膜,确定所述目标线缆支架与所述第一线缆支架的匹配程度,根据匹配程度确定所述目标线缆支架的检测结果,包括:
将所述目标线缆支架的掩膜和所述第一线缆支架的掩膜进行像素匹配获得匹配结果,所述匹配结果指示所述目标线缆支架与所述第一线缆支架的掩膜的像素相似度;
若所述匹配结果大于第三阈值,则确定所述目标线缆支架安装正确;
若所述匹配结果小于或等于第三阈值,则确定所述目标线缆支架安装错误。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述确定所述目标线缆支架的检测结果之后,所述方法还包括:
将所述目标线缆支架的检测结果标注在所述待检测图片上,并显示标注后的待检测图片。
8.一种飞机线缆支架的安装状态检测设备,其特征在于,包括:存储器和处理器;所述存储器与所述处理器连接;
所述存储器,用于存储计算机程序;
所述处理器,用于在计算机程序被执行时,实现如上述权利要求1-7中任一项所述的飞机线缆支架的安装状态检测方法。
9.一种存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时,实现如上述权利要求1-7中任一项所述的飞机线缆支架的安装状态检测方法。
CN201910880892.1A 2019-09-18 2019-09-18 飞机线缆支架的安装状态检测方法、装置及设备 Active CN110689527B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910880892.1A CN110689527B (zh) 2019-09-18 2019-09-18 飞机线缆支架的安装状态检测方法、装置及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910880892.1A CN110689527B (zh) 2019-09-18 2019-09-18 飞机线缆支架的安装状态检测方法、装置及设备

Publications (2)

Publication Number Publication Date
CN110689527A CN110689527A (zh) 2020-01-14
CN110689527B true CN110689527B (zh) 2021-08-24

Family

ID=69109257

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910880892.1A Active CN110689527B (zh) 2019-09-18 2019-09-18 飞机线缆支架的安装状态检测方法、装置及设备

Country Status (1)

Country Link
CN (1) CN110689527B (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5852672A (en) * 1995-07-10 1998-12-22 The Regents Of The University Of California Image system for three dimensional, 360 DEGREE, time sequence surface mapping of moving objects
KR101580654B1 (ko) * 2015-08-07 2015-12-28 (주)리얼허브 관심대상의 비정상 상황 판별 방법
CN107633507A (zh) * 2017-09-02 2018-01-26 南京理工大学 基于轮廓检测和特征匹配的lcd缺陷检测方法
CN108898610A (zh) * 2018-07-20 2018-11-27 电子科技大学 一种基于mask-RCNN的物体轮廓提取方法
CN109584282A (zh) * 2018-11-24 2019-04-05 天津大学 一种基于sift特征与光流模型的非刚性图像配准方法
CN109800735A (zh) * 2019-01-31 2019-05-24 中国人民解放军国防科技大学 一种船目标精确检测与分割方法
CN109960742A (zh) * 2019-02-18 2019-07-02 苏州科达科技股份有限公司 局部信息的搜索方法及装置
CN110207951A (zh) * 2019-05-23 2019-09-06 北京航空航天大学 一种基于视觉的飞机线缆支架装配状态检测方法
CN110232676A (zh) * 2019-04-28 2019-09-13 北京航空航天大学 飞机线缆支架的安装状态检测方法、装置、设备及系统

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4909691B2 (ja) * 2006-09-20 2012-04-04 株式会社東芝 電子部品の実装状態検査方法、電子部品の実装状態検査装置及び電子機器の製造方法
US10186038B1 (en) * 2017-07-18 2019-01-22 Siemens Healthcare Gmbh Segmentation and representation network for pose discrimination
CN109429473A (zh) * 2017-08-28 2019-03-05 株洲中车时代电气股份有限公司 电路板中带极性电子元器件的自动检查方法及装置

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5852672A (en) * 1995-07-10 1998-12-22 The Regents Of The University Of California Image system for three dimensional, 360 DEGREE, time sequence surface mapping of moving objects
KR101580654B1 (ko) * 2015-08-07 2015-12-28 (주)리얼허브 관심대상의 비정상 상황 판별 방법
CN107633507A (zh) * 2017-09-02 2018-01-26 南京理工大学 基于轮廓检测和特征匹配的lcd缺陷检测方法
CN108898610A (zh) * 2018-07-20 2018-11-27 电子科技大学 一种基于mask-RCNN的物体轮廓提取方法
CN109584282A (zh) * 2018-11-24 2019-04-05 天津大学 一种基于sift特征与光流模型的非刚性图像配准方法
CN109800735A (zh) * 2019-01-31 2019-05-24 中国人民解放军国防科技大学 一种船目标精确检测与分割方法
CN109960742A (zh) * 2019-02-18 2019-07-02 苏州科达科技股份有限公司 局部信息的搜索方法及装置
CN110232676A (zh) * 2019-04-28 2019-09-13 北京航空航天大学 飞机线缆支架的安装状态检测方法、装置、设备及系统
CN110207951A (zh) * 2019-05-23 2019-09-06 北京航空航天大学 一种基于视觉的飞机线缆支架装配状态检测方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Automated segmentation of a motion mask to preserve sliding motion in deformable registration of thoracic CT;Vandemeulebroucke J et al.;《Medical Physics》;20121231;第39卷(第2期);第1006-1015页 *
知识辅助的可见光遥感图像靠岸舰船目标检测方法研究;任笑圆;《中国优秀硕士学位论文全文数据库 工程科技Ⅱ辑》;20190115;C028-171 *
航天产品装配作业增强现实引导训练系统及应用;尹旭悦 等;《航空制造技术》;20181231;第61卷(第1/2期);第48-53页 *

Also Published As

Publication number Publication date
CN110689527A (zh) 2020-01-14

Similar Documents

Publication Publication Date Title
US20190228529A1 (en) Image Segmentation Method, Apparatus, and Fully Convolutional Network System
KR102075088B1 (ko) 객체 추출 장치 및 방법
CN108463823B (zh) 一种用户头发模型的重建方法、装置及终端
US11145080B2 (en) Method and apparatus for three-dimensional object pose estimation, device and storage medium
JP2020519989A (ja) ターゲット識別方法、装置、記憶媒体および電子機器
CN109658433B (zh) 图像背景建模和前景提取方法、装置和电子设备
CN111612104B (zh) 车辆定损图像获取方法、装置、介质和电子设备
WO2013180530A1 (ko) 특징점 기술자에 의한 객체 추적장치 및 방법, 에러 특징점 제거장치 및 방법, 그리고 이동 단말에 구현되는 장치
US10909724B2 (en) Method, apparatus, and computer readable medium for adjusting color annotation of an image
CN112802081A (zh) 一种深度检测方法、装置、电子设备及存储介质
CN111225299A (zh) 一种onu故障识别、修复方法和装置
CN111325773A (zh) 运动目标的检测方法、装置、设备及可读存储介质
CN113449639A (zh) 一种物联网网关对仪表的无接触数据采集方法
CN110232676B (zh) 飞机线缆支架的安装状态检测方法、装置、设备及系统
CN116168351A (zh) 电力设备巡检方法及装置
CN105302715B (zh) 应用程序用户界面的获取方法和装置
CN110689527B (zh) 飞机线缆支架的安装状态检测方法、装置及设备
CN114494929A (zh) 视频处理方法及装置
JP2014197342A (ja) 物体位置検出装置、物体位置検出方法、及びプログラム
CN109816709B (zh) 基于单目摄像头的深度估计方法、装置及设备
CN111062233A (zh) 标识物表示的获取方法、标识物表示的获取装置和电子设备
US20210295478A1 (en) Method and apparatus for recognizing landmark in panoramic image and non-transitory computer-readable medium
CN114998686A (zh) 烟雾检测模型构建方法、装置、设备、介质及检测方法
CN114241046A (zh) 数据标注方法、装置、计算机设备及存储介质
CN112529928A (zh) 零件组装检测方法、计算机设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant