CN115457040B - 一种光伏接线盒生产线智能控制方法、装置、设备及介质 - Google Patents

一种光伏接线盒生产线智能控制方法、装置、设备及介质 Download PDF

Info

Publication number
CN115457040B
CN115457040B CN202211417253.XA CN202211417253A CN115457040B CN 115457040 B CN115457040 B CN 115457040B CN 202211417253 A CN202211417253 A CN 202211417253A CN 115457040 B CN115457040 B CN 115457040B
Authority
CN
China
Prior art keywords
cable
image
box
visual
key frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202211417253.XA
Other languages
English (en)
Other versions
CN115457040A (zh
Inventor
冯宝楠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
QINGDAO HAITIANCHENG PHOTOVOLTAIC NEW ENERGY CO LTD
Original Assignee
QINGDAO HAITIANCHENG PHOTOVOLTAIC NEW ENERGY CO LTD
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by QINGDAO HAITIANCHENG PHOTOVOLTAIC NEW ENERGY CO LTD filed Critical QINGDAO HAITIANCHENG PHOTOVOLTAIC NEW ENERGY CO LTD
Priority to CN202211417253.XA priority Critical patent/CN115457040B/zh
Publication of CN115457040A publication Critical patent/CN115457040A/zh
Application granted granted Critical
Publication of CN115457040B publication Critical patent/CN115457040B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/761Proximity, similarity or dissimilarity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Abstract

本申请涉及智能控制的技术领域,尤其涉及一种光伏接线盒生产线智能控制方法、装置、设备及介质。该方法包括:实时获取光伏接线盒生产线视频,并对光伏接线盒生产线视频进行抽帧,得到多个实时视觉帧;对多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像;根据第一视觉关键帧图像与预先建立的坐标系确定第一位姿;根据第二视觉关键帧图像与预先建立的坐标系确定第二位姿;根据第一位姿与第二位姿判断线缆是否出现偏差;若线缆出现偏差,则生成线缆调节指令,并根据第一位姿与第二位姿进行偏差计算,得到偏差大小;将线缆调节指令与偏差大小发送至线缆调节单元进行调节。本申请的效果:能够在压底盒节点准确调节线缆摆放姿势。

Description

一种光伏接线盒生产线智能控制方法、装置、设备及介质
技术领域
本申请涉及智能控制的技术领域,尤其是涉及一种光伏接线盒生产线智能控制方法、装置、设备及介质。
背景技术
随着光伏发电技术的发展和应用,光伏接线盒作为光伏组件的关键部件也获得了规模化的发展和推广。
光伏接线盒包括线缆、顶盒、底盒,在光伏接线盒生产线中,一般包括线缆去皮节点、线缆接入顶盒节点、镀锡节点、热熔节点、压底盒节点,其中,在压底盒节点,一般是利用液压泵将底盒压平,但是线缆在传送带上的摆放姿势容易发生变化,在液压泵压完底盒后,会由于线缆反弹造成压后的底盒崩坏的情况。
为了解决上述技术问题,相关技术在光伏接线盒生产过程中,会利用夹取装置夹取线缆,以减少线缆姿势摆放变化的情况发生,但是,由于夹取装置在夹取过程中,可能会出现线缆滑动,进而造成线缆姿势变化。
因此,如何在压底盒节点准确调节线缆摆放姿势,是本领域技术人员亟待解决的技术问题。
发明内容
为了在压底盒节点准确调节线缆摆放姿势,本申请提供了一种光伏接线盒生产线智能控制方法、装置、设备及介质。
第一方面,本申请提供一种光伏接线盒生产线智能控制方法,采用如下的技术方案:
一种光伏接线盒生产线智能控制方法,包括:
实时获取光伏接线盒生产线视频,并对所述光伏接线盒生产线视频进行抽帧,得到多个实时视觉帧;
对所述多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像,其中,所述第一视觉关键帧图像为线缆第一次与传送带接触时的视觉帧图像,第二视觉关键帧图像为线缆到达压底盒节点时的视觉帧图像;
根据所述第一视觉关键帧图像与预先建立的坐标系确定线缆的第一位姿;
根据所述第二视觉关键帧图像与预先建立的坐标系确定线缆的第二位姿;
根据所述第一位姿与所述第二位姿判断所述线缆是否出现偏差;
若线缆出现偏差,则生成线缆调节指令,并根据所述第一位姿与所述第二位姿进行偏差计算,得到偏差大小;
将所述线缆调节指令与所述偏差大小发送至线缆调节单元,以使所述线缆调节单元根据所述线缆调节指令与所述偏差大小对所述线缆进行调节。
通过采用上述技术方案,通过对实时获取的光伏接线盒生产线视频进行抽帧,得到多个实时视觉帧,并对多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像,根据第一视觉关键帧图像与预先建立的坐标系确定第一位姿,根据第二关键帧图像与预先建立的坐标系确定第二位姿,判断第一位姿与第二位姿是否出现偏差,若出现,则生成调节指令,并根据第一位姿与第二位姿进行偏差计算,得到偏差大小,将偏差大小与调节指令发送至调节单元,调节单元根据调节指令与偏差大小对线缆进行调节,通过根据线缆的第一位姿与第二位姿进行偏差判断,若线缆出现偏差,则根据计算的偏差大小进行线缆摆放姿势调节,能够在压底盒节点准确调节线缆摆放姿势。
本申请在一较佳示例中可以进一步配置为:所述对所述多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像包括:
获取线缆位移信息;
基于所述线缆位移信息,确定所述线缆是否产生预设第一位移距离,若所述线缆产生预设第一位移距离,则将所述实时视觉帧与所述实时视觉帧的前一帧进行比对分析,生成第一视觉关键帧图像;
基于所述线缆位移信息,确定所述线缆是否产生预设第二位移距离,若所述线缆产生预设第二位移距离,则将所述实时视觉帧与所述实时视觉帧的前一帧进行比对分析,生成第二视觉关键帧图像。
通过采用上述技术方案,通过判断获取的线缆位移信息是否达到预设第一距离,若达到,则将实时视觉帧与实时视觉帧的前一帧进行比对分析,生成第一视觉关键帧图像,判断获取的线缆位移信息是否达到预设第二距离,若达到,则将实时视觉帧与实时视觉帧的前一帧进行比对分析,生成第二视觉关键帧图像,通过根据获取的线缆位移信息进行判断,并根据实时视觉帧的前一帧进行比对分析,避免了对获取的多个实时视觉帧进行特征提取需要的时间较长的情况,提高了确定第一视觉关键帧图像与第二视觉关键帧图像的效率。
本申请在一较佳示例中可以进一步配置为:所述获取线缆位移信息包括:
获取线缆初始坐标信息,所述初始坐标信息为所述光伏接线盒生产线检测到线缆时的坐标信息;
实时获取线缆的当前坐标信息;
根据所述当前坐标信息与所述初始坐标信息确定线缆位移信息。
通过采用上述技术方案,通过获取的线缆初始坐标信息与实时获取线缆的当前坐标信息确定线缆位移信息,提高了线缆位移信息计算的准确率。
本申请在一较佳示例中可以进一步配置为:在所述将所述线缆调节指令与所述偏差大小发送至线缆调节单元之后,还包括:
获取压底盒后的图像信息;
对所述压底盒后的图像信息进行特征提取,得到图像特征;
对所述图像特征与预设合格图像特征进行相似度计算,得到相似度值;
判断所述相似度值是否大于预设相似度阈值;
若所述相似度值不大于预设相似度阈值,则确定所述压底盒后的图像信息对应的光伏接线盒不合格,根据所述压底盒后的图像信息生成报警信息,并发送至报警单元,以使报警单元根据所述报警信息进行报警。
通过采用上述技术方案,通过对获取的压底盒后的图像信息进行特征提取,得到图像特征,将得到的图像特征与预设合格图像特征进行相似度计算,若相似度值不大于预设相似度阈值,则确定压底盒后的图像信息对应的光伏接线盒不合格,并进行报警,能够在确定光伏接线盒不合格时,根据不合格的光伏接线盒进行报警,提高了光伏接线盒出厂的合格率。
本申请在一较佳示例中可以进一步配置为:在所述获取压底盒后的图像信息之前,还包括:
获取底盒图像与顶盒图像;
根据所述底盒图像确定底盒中心点坐标;
根据所述顶盒图像确定顶盒中心点坐标;
判断所述底盒中心点坐标的横坐标与所述顶盒中心点坐标的横坐标是否相同;
若不相同,则根据所述底盒中心点坐标的横坐标与所述顶盒中心点坐标的横坐标进行差值计算,得到距离差值;
根据所述距离差值对所述底盒进行调整。
通过采用上述技术方案,通过根据获取的底盒图像与顶盒图像得到底盒中心点坐标与顶盒中心点坐标,判断底盒中心点坐标的横坐标与顶盒中心点坐标的横坐标是否相同,若不相同,则根据底盒中心点坐标的横坐标与顶盒中心点坐标的横坐标计算距离差值,并根据距离差值对底盒位置进行调整,通过判断底盒图像的中心点坐标的横坐标与顶盒图像的中心点坐标的横坐标是否相同,若不相同,则计算距离差值,并根据距离差值对底盒位置进行调整,避免了由于光伏接线盒底盒摆放问题造成的光伏接线盒不合格的情况,提高了光伏接线盒生产的合格率。
本申请在一较佳示例中可以进一步配置为:所述根据所述底盒图像确定底盒中心点坐标包括:
对所述底盒图像进行特征提取,得到底盒图像的四个顶点特征;
根据所述底盒图像的四个顶点特征与预先建立的坐标系确定底盒图像的四个顶点坐标;
根据所述底盒图像的四个顶点坐标确定底盒中心点坐标;
相应的,所述根据所述顶盒图像确定顶盒中心点坐标包括:
对所述顶盒图像进行特征提取,得到顶盒图像的四个顶点特征;
根据所述顶盒图像的四个顶点特征与预先建立的坐标系确定顶盒图像的四个顶点坐标;
根据所述顶盒图像的四个顶点坐标确定顶盒中心点坐标。
通过采用上述技术方案,通过对底盒图像进行特征提取,得到底盒图像的四个顶点特征,并根据预先建立的坐标系确定底盒图像的四个顶点坐标,根据底盒图像的四个顶点坐标确定底盒图像的中心点坐标,同理,根据顶盒图像的四个顶点坐标确定顶盒图像的中心点坐标,通过确定底盒图像与顶盒图像的四个顶点坐标,并根据底盒图像的四个顶点坐标确定底盒图像的中心点坐标,通过顶盒图像的四个顶点坐标确定顶盒图像的中心点坐标,提高了确定底盒图像的中心点以及顶盒图像的中心点坐标的准确率。
本申请在一较佳示例中可以进一步配置为:在所述根据所述距离差值对所述底盒进行调整之后,还包括:
根据所述底盒图像的四个顶点坐标与所述顶盒图像的四个顶点坐标确定第一距离信息,其中,所述第一距离信息为液压泵将底盒压入顶盒所需的距离信息;
将所述第一距离信息发送至液压泵控制单元,所述液压泵控制单元根据所述第一距离信息控制液压泵对所述底盒进行压盒。
通过采用上述技术方案,在本申请实施例中,通过利用底盒图像的四个顶点坐标与顶盒图像的四个顶点坐标确定第一距离信息,并将第一距离信息发送至液压泵控制单元,避免了由于底盒摆放问题造成距离计算不准确的情况,提高了计算底盒压入顶盒所需距离的准确率。
第二方面,本申请提供一种光伏接线盒生产线智能控制装置,采用如下的技术方案:
一种光伏接线盒生产线智能控制装置,包括,
获取模块:用于实时获取光伏接线盒生产线视频,并对所述光伏接线盒生产线视频进行抽帧,得到多个实时视觉帧;
筛选模块:用于对所述多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像,其中,所述第一视觉关键帧图像为线缆第一次与传送带接触时的视觉帧图像,第二视觉关键帧图像为线缆到达压底盒节点时的视觉帧图像;
第一确定模块:用于根据所述第一视觉关键帧图像与预先建立的坐标系确定线缆的第一位姿;
第二确定模块:用于根据所述第二视觉关键帧图像与预先建立的坐标系确定线缆的第二位姿;
判断模块:用于根据所述第一位姿与所述第二位姿判断所述线缆是否出现偏差;
计算模块:用于若线缆出现偏差,则生成线缆调节指令,并根据所述第一位姿与所述第二位姿进行偏差计算,得到偏差大小;
调节模块:用于将所述线缆调节指令与所述偏差大小发送至线缆调节单元,以使所述线缆调节单元根据所述线缆调节指令与所述偏差大小对所述线缆进行调节。
通过对实时获取的光伏接线盒生产线视频进行抽帧,得到多个实时视觉帧,并对多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像,根据第一视觉关键帧图像与预先建立的坐标系确定第一位姿,根据第二关键帧图像与预先建立的坐标系确定第二位姿,判断第一位姿与第二位姿是否出现偏差,若出现,则生成调节指令,并根据第一位姿与第二位姿进行偏差计算,得到偏差大小,将偏差大小与调节指令发送至调节单元,调节单元根据调节指令与偏差大小对线缆进行调节,通过根据线缆的第一位姿与第二位姿进行偏差判断,若线缆出现偏差,则根据计算的偏差大小进行线缆摆放姿势调节,能够在压底盒节点准确调节线缆摆放姿势。
第三方面,本申请提供一种电子设备,采用如下的技术方案:
至少一个处理器;
存储器;
至少一个应用程序,其中至少一个应用程序被存储在存储器中并被配置为由至少一个处理器执行,所述至少一个应用程序配置用于:执行上述的光伏接线盒生产线智能控制方法。
第四方面,本申请提供一种计算机可读存储介质,采用如下的技术方案:
一种计算机可读存储介质,其上存储有计算机程序,当所述计算机程序在计算机中执行时,令所述计算机执行上所述的光伏接线盒生产线智能控制方法。
综上所述,本申请包括以下至少一种有益技术效果:
通过对实时获取的光伏接线盒生产线视频进行抽帧,得到多个实时视觉帧,并对多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像,根据第一视觉关键帧图像与预先建立的坐标系确定第一位姿,根据第二关键帧图像与预先建立的坐标系确定第二位姿,判断第一位姿与第二位姿是否出现偏差,若出现,则生成调节指令,并根据第一位姿与第二位姿进行偏差计算,得到偏差大小,将偏差大小与调节指令发送至调节单元,调节单元根据调节指令与偏差大小对线缆进行调节,通过根据线缆的第一位姿与第二位姿进行偏差判断,若线缆出现偏差,则根据计算的偏差大小进行线缆摆放姿势调节,能够在压底盒节点准确调节线缆摆放姿势。
附图说明
图1为本申请实施例提供的一种光伏接线盒生产线结构示意图;
图2为本申请实施例提供的一种光伏接线盒的结构示意图;
图3为本申请实施例提供的一种光伏接线盒生产线智能控制方法的流程示意图;
图4为本申请实施例提供的一种光伏接线盒生产线智能控制装置200的结构示意图;
图5为本申请实施例提供的一种电子设备300的结构示意图;
附图标记:
110-线缆去皮节点,120-线缆接入顶盒节点,130-镀锡节点,140-热熔节点,150-压底盒节点,160-传送带;
210-底盒,220-顶盒,230-线缆;
200-光伏接线盒生产线智能控制装置,201-获取模块,202-筛选模块,203-第一确定模块,204-第二确定模块,205-判断模块,206-计算模块,207-调节模块;
300-电子设备,301-处理器,302-总线,303-存储器,304-收发器。
具体实施方式
以下结合附图1至附图5对本申请作进一步详细说明。
本具体实施例仅仅是对本申请的解释,其并不是对本申请的限制,本领域技术人员在阅读完本说明书后可以根据需要对本实施例做出没有创造性贡献的修改,但只要在本申请的权利要求范围内都受到专利法的保护。
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
另外,本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,如无特殊说明,一般表示前后关联对象是一种“或”的关系。
下面结合说明书附图对本申请实施例作进一步详细描述。
相关技术在光伏接线盒生产过程中,会利用夹取装置夹取线缆,以减少线缆姿势摆放变化的情况发生,但是,由于夹取装置在夹取过程中,可能会出现线缆滑动,进而造成线缆姿势变化,从而引起线缆反弹,造成压后的底盒崩坏的情况。
为了解决上述技术问题,本申请提供了一种光伏接线盒生产线智能控制方法、装置、设备及介质,通过对实时获取的光伏接线盒生产线视频进行抽帧,得到多个实时视觉帧,并对多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像,根据第一视觉关键帧图像与预先建立的坐标系确定第一位姿,根据第二关键帧图像与预先建立的坐标系确定第二位姿,判断第一位姿与第二位姿是否出现偏差,若出现,则生成调节指令,并根据第一位姿与第二位姿进行偏差计算,得到偏差大小,将偏差大小与调节指令发送至调节单元,调节单元根据调节指令与偏差大小对线缆进行调节,通过根据线缆的第一位姿与第二位姿进行偏差判断,若线缆出现偏差,则根据计算的偏差大小进行线缆摆放姿势调节,能够在压底盒节点准确调节线缆摆放姿势。
结合图1,图1为本申请实施例提供的一种光伏接线盒生产线的结构示意图。光伏接线盒生产线一般包括传送带160、线缆去皮节点110、线缆接入顶盒节点120、镀锡节点130、热熔节点140、压底盒节点150,其中,线缆去皮节点110是将线缆的部分外壳剥去,在线缆接入顶盒节点120将剥离外壳部分的线缆与顶盒连接,镀锡节点130是为了提高剥去外壳部分的线缆的强度,避免铜氧化及腐蚀,热熔节点140是通过热熔提高焊接性和抗蚀性,压底盒节点150是将底盒压入顶盒部分,组成完成的光伏接线盒。
压底盒时可以利用液压泵进行,通过液压泵控制单元控制液压泵的压入距离以及出压力,一般来说,出压力是固定的,管理员可以根据实际情况自定义设置的。
图2为本申请实施例提供的一种光伏接线盒的结构示意图,其中包括:底盒210、顶盒220、线缆230。
本申请实施例提供了一种光伏接线盒生产线智能控制方法,由电子设备执行,该电子设备可以为服务器也可以为终端设备,其中,该服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云计算服务的云服务器。终端设备可以是智能手机、平板电脑、笔记本电脑、台式计算机等,但并不局限于此,该终端设备以及服务器可以通过有线或无线通信方式进行直接或间接地连接,本申请实施例在此不做限制。
结合图3,图3为本申请实施例提供的一种光伏接线盒生产线智能控制方法的流程示意图,如图3所示,该方法包括步骤S101、步骤S102、步骤S103、步骤S104、步骤S105、步骤S106以及步骤S107,其中:
步骤S101:实时获取光伏接线盒生产线视频,并对光伏接线盒生产线视频进行抽帧,得到多个实时视觉帧。
电子设备包括摄像单元,摄像单元用于实时拍摄整个光伏接线盒生产线的视频。
其中,抽帧是在光伏接线盒生产线视频中间隔一定帧抽取若干实时视觉帧的方式,视觉帧是通过抽帧得到的图像。在电子设备实时获取光伏接线盒生产线视频后,利用抽帧的方式,对光伏接线盒生产线视频进行抽帧,得到多个实时视觉帧。
步骤S102:对多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像,其中,第一视觉关键帧图像为线缆第一次与传送带接触时的视觉帧图像,第二视觉关键帧图像为线缆到达压底盒节点时的视觉帧图像。
其中,本申请实施例不对筛选的方法进行限定,可以对多个实时视觉帧进行特征提取,得到每一实时视觉帧的特征,将每一实时视觉帧的特征与预设第一视觉关键帧图像对应的特征进行相似度计算,得到多个第一相似度值,将多个第一相似度值等于预设第一相似度阈值对应的实时视觉帧作为第一视觉关键帧,将每一实时视觉帧的特征与预设第二视觉关键帧图像对应的特征进行相似度计算,得到多个第二相似度值,将第二相似度值等于预设第二相似度阈值对应的实时视觉帧作为第二视觉关键帧。其中,电子设备中预先保存有预设第一视觉关键帧图像对应的特征与预设第二关键帧图像对应的特征,预设第一视觉关键帧图像对应的特征是通过对预设第一视觉关键帧图像进行特征提取得到的,预设第二视觉关键帧图像对应的特征是通过对预设第二视觉关键帧图像进行特征提取得到的。本申请实施例不对预设第一相似度阈值以及预设第二相似度阈值进行限定,用户可以根据实际情况自定义设置。
另一种对多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像的方法为,预先设定起始点坐标,获取线缆位移距离,当线缆位移距离达到第一预设位移,则将线缆位移距离达到第一预设位移对应的图像作为第一关键帧图像,当线缆位移距离达到第二预设位移,则将线缆位移距离达到第二预设位移对应的图像作为第二关键帧图像。其中,本申请实施例不对第一预设位移与第二预设位移进行限定,但可以确定的是,第二预设位移一定大于第一预设位移。
步骤S103:根据第一视觉关键帧图像与预先建立的坐标系确定线缆的第一位姿。
其中,第一位姿是线缆在第一关键帧图像中的第一姿态,即,线缆刚刚接触传送带时的位姿。其中,第一姿态可以利用欧拉角的三个独立角进行描述,也可以利用第一姿态矩阵进行描述。其中,欧拉角是用来唯一地确定定点转动刚体位置的三个一组独立角参量,即,章动角、旋进角、自转角。
在本申请实施例中,预先建立的坐标系为以光伏接线盒任意一点作为原点建立的坐标系,在光伏接线盒移动过程中,预先建立的坐标系的原点也跟随光伏接线盒进行移动。
步骤S104:根据第二视觉关键帧图像与预先建立的坐标系确定线缆的第二位姿。
其中,第二位姿是线缆在第二关键帧图像中的第二姿态,即,线缆运动到压底盒节点时的位姿。其中,第二姿态可以利用欧拉角的三个独立角进行描述,也可以利用第二姿态矩阵进行描述。
步骤S105:根据第一位姿与第二位姿判断线缆是否出现偏差。
由于线缆在传送带上进行传送时,受到传送带摩擦力和传送速度的影响,线缆的摆放姿势可能会发生变化,所以可以将第一位姿作为标准,判断线缆的第一位姿与第二位姿是否发生偏差。
当第一位姿与第二位姿是利用欧拉角进行描述时,可以判断第一位姿与第二位姿的三个对应的角度是否完全相同,当欧拉角的三个角度完全相同时,确定线缆未出现偏差,当欧拉角的三个角度存在不相同时,确定线缆出现误差;当第一位姿与第二位姿是利用姿态矩阵进行描述时,可以判断第一姿态矩阵的值与第二姿态矩阵的值是否相同,当第一姿态矩阵与第二姿态矩阵的值相同,则确定线缆未发生偏差,当第一姿态矩阵与第二姿态矩阵的值不相同时,则确定线缆发生偏差。
步骤S106:若线缆出现偏差,则生成线缆调节指令,并根据第一位姿与第二位姿进行偏差计算,得到偏差大小。
线缆调节指令是用来发送至线缆调节单元用于对线缆进行调节的指令,当确定第一位姿与第二位姿出现偏差时,会自动生成调节指令。
其中,当第一位姿与第二位姿是用欧拉角进行描述时,对第一位姿与第二位姿进行偏差计算,得到偏差大小的方法可以利用欧拉角做差的方法进行计算;当第一位姿与第二位姿是用姿态矩阵进行描述时,可以利用旋转矩阵做差的方法进行偏差大小的计算,当然还可以利用几何控制的方法进行偏差大小的计算,本申请实施例不对此进行限定,用户可以自定义选择。
步骤S107:将线缆调节指令与偏差大小发送至线缆调节单元,以使线缆调节单元根据线缆调节指令与偏差大小对线缆进行调节。
线缆调节单元是用来对线缆位姿进行调节的单元,当电子设备将调节指令与偏差大小发送至线缆调节单元时,线缆调节单元根据获取的调节指令与偏差大小对线缆的摆放姿势进行调节。
在本申请实施例中,通过对实时获取的光伏接线盒生产线视频进行抽帧,得到多个实时视觉帧,并对多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像,根据第一视觉关键帧图像与预先建立的坐标系确定第一位姿,根据第二关键帧图像与预先建立的坐标系确定第二位姿,判断第一位姿与第二位姿是否出现偏差,若出现,则生成调节指令,并根据第一位姿与第二位姿进行偏差计算,得到偏差大小,将偏差大小与调节指令发送至调节单元,调节单元根据调节指令与偏差大小对线缆进行调节,通过根据线缆的第一位姿与第二位姿进行偏差判断,若线缆出现偏差,则根据计算的偏差大小进行线缆摆放姿势调节,能够在压底盒节点准确调节线缆摆放姿势。
为了提高确定第一视觉关键帧图像与第二视觉关键帧图像的效率,本申请实施例的一种可能的实现方式,对多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像包括:
获取线缆位移信息;
基于线缆位移信息,确定线缆是否产生预设第一位移距离,若线缆产生预设第一位移距离,则将实时视觉帧与实时视觉帧的前一帧进行比对分析,生成第一视觉关键帧图像;
基于线缆位移信息,确定线缆是否产生预设第二位移距离,若线缆产生预设第二位移距离,则将实时视觉帧与实时视觉帧的前一帧进行比对分析,生成第二视觉关键帧图像。
由于实时视觉帧图像较多,并且利用特征进行相似度计算所需要的计算量较大,提取多个实时视觉帧特征所需要的时间较长,所以本申请实施例提出了另一种确定第一视觉关键帧图像与第二视觉关键帧图像的方法。
其中,线缆位置信息为线缆在光伏接线盒生产线上的位移距离,可以根据获取的光伏接线盒视频建立坐标系,并设置初始坐标,根据线缆的当前坐标与初始坐标计算得到线缆位移距离。
电子设备中预先保存有预设第一位移距离,当确定线缆的位移距离达到预设第一位移距离,且达到预设第一位移距离的视觉帧的前一帧未达到预设第一位移距离,则确定当前视觉帧对应图像为第一视觉关键帧图像。同理,确定线缆的位移距离达到预设第二位移距离,且,达到预设第二位移距离的视觉帧的前一帧未达到预设第二位移距离,则确定视觉帧对应的图像为第二视觉关键帧图像。
在本申请实施例中,通过判断获取的线缆位移信息是否达到预设第一距离,若达到,则将实时视觉帧与实时视觉帧的前一帧进行比对分析,生成第一视觉关键帧图像,判断获取的线缆位移信息是否达到预设第二距离,若达到,则将实时视觉帧与实时视觉帧的前一帧进行比对分析,生成第二视觉关键帧图像,通过获取的线缆位移信息进行判断,并根据实时视觉帧的前一帧进行比对分析,避免了对获取的多个实时视觉帧进行特征提取需要的时间较长的情况,提高了确定第一视觉关键帧图像与第二视觉关键帧图像的效率。
为了提高线缆位移信息计算的准确率,本申请实施例的一种可能的实现方式,获取线缆位移信息包括:
获取线缆初始坐标信息,初始坐标信息为光伏接线盒生产线检测到线缆时的坐标信息;
实时获取线缆的当前坐标信息;
根据当前坐标信息与初始坐标信息确定线缆位移信息。
本申请实施例提供了一种确定线缆位置信息的方法,其中,由于本申请实施例没有对摄像单元的摆放角度进行限定,只是限定了能够拍摄整个光伏接线盒生产线的视频,所以,对于预设坐标系的建立没有限定。并且,由于线缆在传送带上移动时,线缆的纵坐标是不发生变化的,所以可以根据线缆的横坐标变化确定线缆的位置信息,电子设备中预先保存有线缆初始坐标信息,并且根据获取的实时视觉帧确定每一帧线缆的坐标,并根据坐标计算线缆的位移信息。
在本申请实施例中,通过获取的线缆初始坐标信息与实时获取线缆的当前坐标信息确定线缆位移信息,提高了线缆位移信息计算的准确率。
为了提高光伏接线盒出厂的合格率,本申请实施例的一种可能的实现方式,在将线缆调节指令与偏差大小发送至线缆调节单元之后,还包括:
获取压底盒后的图像信息;
对压底盒后的图像信息进行特征提取,得到图像特征;
对图像特征与预设合格图像特征进行相似度计算,得到相似度值;
判断相似度值是否大于预设相似度阈值;
若相似度值不大于预设相似度阈值,则确定压底盒后的图像信息对应的光伏接线盒不合格,根据压底盒后的图像信息生成报警信息,并发送至报警单元,以使报警单元根据报警信息进行报警。
其中,特征提取是对压底盒后的图像信息进行变换,以突出压底盒后的图像信息特征的一种方法,在本申请实施例中,不对特征提取的方法进行限定,可以为SIFT(Scale-invariant feature transform,尺度不变特征变换)算法、surf(Speeded Up RobustFeatures,加速稳健特征)算法、ORB(Oriented FAST and Rotated BRIEF,定向快速旋转)算法中的任意一种。
电子设备中预先保存有预设合格图像特征,当提取到压底盒后的图像信息的图像特征后,根据图像特征与预设合格图像特征进行相似度计算,若相似度度值大于预设相似度阈值,则确定图像特征对应的压底盒后的图像信息合格,若不大于,则确定不合格。其中,本申请实施例不对相似度计算方法进行限定,可以为杰卡德相似系数算法、余弦相似度算法、皮尔逊相关系数算法中的任意一种。
在本申请实施例中,通过对获取的压底盒后的图像信息进行特征提取,得到图像特征,将得到的图像特征与预设合格图像特征进行相似度计算,若相似度值不大于预设相似度阈值,则确定压底盒后的图像信息对应的光伏接线盒不合格,并进行报警,能够在确定光伏接线盒不合格时,根据不合格的光伏接线盒进行报警,提高了光伏接线盒出厂的合格率。
为了提高光伏接线盒生产的合格率,本申请实施例的一种可能的实现方式,在获取压底盒后的图像信息之前,还包括:
获取底盒图像与顶盒图像;
根据底盒图像确定底盒中心点坐标;
根据顶盒图像确定顶盒中心点坐标;
判断底盒中心点坐标的横坐标与顶盒中心点坐标的横坐标是否相同;
若不相同,则根据底盒中心点坐标的横坐标与顶盒中心点坐标的横坐标进行差值计算,得到距离差值;
根据距离差值对底盒进行调整。
其中,本申请实施例不对根据底盒图像确定底盒中心点坐标以及根据顶盒图像确定顶盒中心点坐标的方法进行限定,可以为利用热力图的方式确定,也可以根据特征点提取,得到底盒的四个顶点坐标以及顶盒的四个顶点坐标,根据底盒的四个顶点坐标确定底盒中心点坐标,根据顶盒的四个中心点坐标确定顶盒的中心点坐标。
其中,底盒图像与顶盒图像的中心点坐标的纵坐标是必然不相同的,所以可以判断底盒图像的中心点坐标的横坐标与顶盒图像的中心点坐标的横坐标是否相同。当底盒的中心点坐标的横坐标与顶盒的中心点坐标的横坐标相同时,不需要对底盒位置进行调整。当底盒的中心点坐标的横坐标与顶盒的中心点坐标的横坐标不相同时,则确定底盒与顶盒必然存在位置偏差,所以在确定底盒的中心点坐标与顶盒的中心点坐标不相同时,计算底盒中心点坐标与顶盒中心点坐标的差值,得到距离差值,并根据距离差值对底盒的位置进行调整。
在本申请实施例中,通过采用上述技术方案,通过根据获取的底盒图像与顶盒图像得到底盒中心点坐标与顶盒中心点坐标,判断底盒中心点坐标的横坐标与顶盒中心点坐标的横坐标是否相同,若不相同,则根据底盒中心点坐标的横坐标与顶盒中心点坐标的横坐标计算距离差值,并根据距离差值对底盒位置进行调整,通过判断底盒图像的中心点坐标的横坐标与顶盒图像的中心点坐标的横坐标是否相同,若不相同,则计算距离差值,并根据距离差值对底盒位置进行调整,避免了由于光伏接线盒底盒摆放问题造成的光伏接线盒不合格的情况,提高了光伏接线盒生产的合格率。
为了提高确定底盒图像的中心点以及顶盒图像的中心点坐标的准确率,本申请实施例的一种可能的实现方式,根据底盒图像确定底盒中心点坐标包括:
对底盒图像进行特征提取,得到底盒图像的四个顶点特征;
根据底盒图像的四个顶点特征与预先建立的坐标系确定底盒图像的四个顶点坐标;
根据底盒图像的四个顶点坐标确定底盒中心点坐标;
相应的,根据顶盒图像确定顶盒中心点坐标包括:
对顶盒图像进行特征提取,得到顶盒图像的四个顶点特征;
根据顶盒图像的四个顶点特征与预先建立的坐标系确定顶盒图像的四个顶点坐标;
根据顶盒图像的四个顶点坐标确定顶盒中心点坐标。
其中,由于底盒图像在获取时会由于拍摄的问题造成底盒图像不清晰,如果对不清晰的底盒图像利用热力图确定底盒图像中心点坐标以及顶盒图像中心点坐标会造成确定的底盒中心点坐标不准确。
其中,在确定底盒图像的四个中心点坐标后,可以利用均值处理法确定底盒中心点坐标,即对底盒图像的四个顶点坐标的横坐标及纵坐标进行均值计算,得到的横坐标均值以及纵坐标均值,即底盒图像的中心点坐标。同理,可以利用均值处理法通过顶盒图像的四个顶点坐标确定顶盒图像中心点坐标。
在本申请实施例中,通过对底盒图像进行特征提取,得到底盒图像的四个顶点特征,并根据预先建立的坐标系确定底盒图像的四个顶点坐标,根据底盒图像的四个顶点坐标确定底盒图像的中心点坐标,同理,根据顶盒图像的四个顶点坐标确定顶盒图像的中心点坐标,通过确定底盒图像与顶盒图像的四个顶点坐标,并根据底盒图像的四个顶点坐标确定底盒图像的中心点坐标,通过顶盒图像的四个顶点坐标确定顶盒图像的中心点坐标,提高了确定底盒图像的中心点以及顶盒图像的中心点坐标的准确率。
为了提高计算底盒压入顶盒所需距离的准确率,本申请实施例的一种可能的实现方式,在根据距离差值对底盒进行调整之后,还包括:
根据底盒图像的四个顶点坐标与顶盒图像的四个顶点坐标确定第一距离信息,其中,第一距离信息为液压泵将底盒压入顶盒所需的距离信息;
将第一距离信息发送至液压泵控制单元,液压泵控制单元根据第一距离信息控制液压泵对底盒进行压盒。
其中,由于底盒属于塑料制品,如果液压泵压力太大的话,容易造成光伏接线盒损坏,所以可以在压底盒之前先计算将底盒压入顶盒所需的距离。
一般情况下,对于计算底盒压入顶盒所需距离的方法是直接确定底盒的一个特征点与顶盒的一个特征点,直接进行计算的,但是当底盒的摆放出现问题时,会造成距离计算不准确的情况。
其中,本申请实施例不对根据底盒图像的四个顶点坐标与顶盒图像的四个顶点坐标确定第一距离信息的方法进行限定,可以为:根据底盒图像的四个顶点坐标确定底盒图像中心点,根据顶盒图像的四个顶点坐标确定顶盒图像中心点,根据顶盒图像的中心点与底盒图像的中心点计算第一距离信息,也可以为:根据底盒图像的四个顶点坐标确定底盒图像纵坐标平均值,根据顶盒图像的四个顶点坐标确定顶盒图像的纵坐标平均值,根据底盒图像的纵坐标平均值与顶盒图像的纵坐标平均值计算得到第一距离信息。
在本申请实施例中,通过利用底盒图像的四个顶点坐标与顶盒图像的四个顶点坐标确定第一距离信息,并将第一距离信息发送至液压泵控制单元,避免了由于底盒摆放问题造成距离计算不准确的情况,提高了计算底盒压入顶盒所需距离的准确率。
上述实施例从方法流程的角度介绍一种光伏接线盒生产线智能控制方法,下述实施例从虚拟模块或者虚拟单元的角度介绍了一种光伏接线盒生产线智能控制装置,具体详见下述实施例。
本申请实施例提供一种光伏接线盒生产线智能控制装置200,如图4所示,图4为本申请实施例提供的一种光伏接线盒生产线智能控制装置的结构示意图。该装置200具体可以包括:
获取模块201:用于实时获取光伏接线盒生产线视频,并对光伏接线盒生产线视频进行抽帧,得到多个实时视觉帧;
筛选模块202:用于对多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像,其中,第一视觉关键帧图像为线缆第一次与传送带接触时的视觉帧图像,第二视觉关键帧图像为线缆到达压底盒节点时的视觉帧图像;
第一确定模块203:用于根据第一视觉关键帧图像与预先建立的坐标系确定线缆的第一位姿;
第二确定模块204:用于根据第二视觉关键帧图像与预先建立的坐标系确定线缆的第二位姿;
判断模块205:用于根据第一位姿与第二位姿判断线缆是否出现偏差,当线缆出现偏差时,生成线缆调节指令,并触发计算模块(206);
计算模块206:根据第一位姿与第二位姿进行偏差计算,得到偏差大小;
调节模块207:用于将线缆调节指令与偏差大小发送至线缆调节单元,以使线缆调节单元根据线缆调节指令与偏差大小对线缆进行调节。
对于本申请实施例,通过对实时获取的光伏接线盒生产线视频进行抽帧,得到多个实时视觉帧,并对多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像,根据第一视觉关键帧图像与预先建立的坐标系确定第一位姿,根据第二关键帧图像与预先建立的坐标系确定第二位姿,判断第一位姿与第二位姿是否出现偏差,若出现,则生成调节指令,并根据第一位姿与第二位姿进行偏差计算,得到偏差大小,将偏差大小与调节指令发送至调节单元,调节单元根据调节指令与偏差大小对线缆进行调节,通过根据线缆的第一位姿与第二位姿进行偏差判断,若线缆出现偏差,则根据计算的偏差大小进行线缆摆放姿势调节,能够在压底盒节点准确调节线缆摆放姿势。
本申请实施例的一种可能的实现方式,筛选模块202在执行对多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像时,具体用于:
获取线缆位移信息;
基于线缆位移信息,确定线缆是否产生预设第一位移距离,若线缆产生预设第一位移距离,则将实时视觉帧与实时视觉帧的前一帧进行比对分析,生成第一视觉关键帧图像;
基于线缆位移信息,确定线缆是否产生预设第二位移距离,若线缆产生预设第二位移距离,则将实时视觉帧与实时视觉帧的前一帧进行比对分析,生成第二视觉关键帧图像。
本申请实施例的一种可能的实现方式,筛选模块202在执行获取线缆位移信息时,具体用于:
获取线缆初始坐标信息,初始坐标信息为光伏接线盒生产线检测到线缆时的坐标信息;
实时获取线缆的当前坐标信息;
根据当前坐标信息与初始坐标信息确定线缆位移信息。
本申请实施例的一种可能的实现方式,光伏接线盒生产线智能控制装置200还包括:
图像处理模块:用于获取压底盒后的图像信息;
对压底盒后的图像信息进行特征提取,得到图像特征;
对图像特征与预设合格图像特征进行相似度计算,得到相似度值;
判断相似度值是否大于预设相似度阈值;
若相似度值不大于预设相似度阈值,则确定压底盒后的图像信息对应的光伏接线盒不合格,根据压底盒后的图像信息生成报警信息,并发送至报警单元,以使报警单元根据报警信息进行报警。
本申请实施例的一种可能的实现方式,光伏接线盒生产线智能控制装置200还包括:
底盒调节模块:用于获取底盒图像与顶盒图像;
根据底盒图像确定底盒中心点坐标;
根据顶盒图像确定顶盒中心点坐标;
判断底盒中心点坐标的横坐标与顶盒中心点坐标的横坐标是否相同;
若不相同,则根据底盒中心点坐标的横坐标与顶盒中心点坐标的横坐标进行差值计算,得到距离差值;
根据距离差值对底盒进行调整。
本申请实施例的一种可能的实现方式,图像处理模块在执行根据底盒图像确定底盒中心点坐标时,具体用于:
对底盒图像进行特征提取,得到底盒图像的四个顶点特征;
根据底盒图像的四个顶点特征与预先建立的坐标系确定底盒图像的四个顶点坐标;
根据底盒图像的四个顶点坐标确定底盒中心点坐标;
相应的,图像处理模块在执行根据顶盒图像确定顶盒中心点坐标时,具体用于:
对顶盒图像进行特征提取,得到顶盒图像的四个顶点特征;
根据顶盒图像的四个顶点特征与预先建立的坐标系确定顶盒图像的四个顶点坐标;
根据顶盒图像的四个顶点坐标确定顶盒中心点坐标。
本申请实施例的一种可能的实现方式,光伏接线盒生产线智能控制装置200还包括:
压盒控制模块:用于根据底盒图像的四个顶点坐标与顶盒图像的四个顶点坐标确定第一距离信息,其中,第一距离信息为液压泵将底盒压入顶盒所需的距离信息;
将第一距离信息发送至液压泵控制单元,液压泵控制单元根据第一距离信息控制液压泵对底盒进行压盒。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的一种光伏接线盒生产线智能控制装置200的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
本申请实施例中提供了一种电子设备,如图5所示,图5为本申请实施例提供的一种电子设备的结构示意图。图5所示的电子设备300包括:处理器301和存储器303。其中,处理器301和存储器303相连,如通过总线302相连。可选地,电子设备300还可以包括收发器304。需要说明的是,实际应用中收发器304不限于一个,该电子设备300的结构并不构成对本申请实施例的限定。
处理器301可以是CPU(Central Processing Unit,中央处理器),通用处理器,DSP(Digital Signal Processor,数据信号处理器),ASIC(Application SpecificIntegrated Circuit,专用集成电路),FPGA(Field Programmable Gate Array,现场可编程门阵列)或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框,模块和电路。处理器301也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,DSP和微处理器的组合等。
总线302可包括一通路,在上述组件之间传送信息。总线302可以是PCI(Peripheral Component Interconnect,外设部件互连标准)总线或EISA(ExtendedIndustry Standard Architecture,扩展工业标准结构)总线等。总线302可以分为地址总线、数据总线、控制总线等。为便于表示,图5中仅用一条粗线表示,但并不表示仅有一根总线或一型的总线。
存储器303可以是ROM(Read Only Memory,只读存储器)或可存储静态信息和指令的其他类型的静态存储设备,RAM(Random Access Memory,随机存取存储器)或者可存储信息和指令的其他类型的动态存储设备,也可以是EEPROM(Electrically ErasableProgrammable Read Only Memory,电可擦可编程只读存储器)、CD-ROM(Compact DiscRead Only Memory,只读光盘)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质,但不限于此。
存储器303用于存储执行本申请方案的应用程序代码,并由处理器301来控制执行。处理器301用于执行存储器303中存储的应用程序代码,以实现前述方法实施例所示的内容。
其中,电子设备包括但不限于:移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。还可以为服务器等。图5示出的电子设备仅仅是一个示例,不应对本申请实施例的功能和使用范围带来任何限制。
本申请实施例提供了一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,当其在计算机上运行时,使得计算机可以执行前述方法实施例中相应内容。与相关技术相比,本申请实施例通过对实时获取的光伏接线盒生产线视频进行抽帧,得到多个实时视觉帧,并对多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像,根据第一视觉关键帧图像与预先建立的坐标系确定第一位姿,根据第二关键帧图像与预先建立的坐标系确定第二位姿,判断第一位姿与第二位姿是否出现偏差,若出现,则生成调节指令,并根据第一位姿与第二位姿进行偏差计算,得到偏差大小,将偏差大小与调节指令发送至调节单元,调节单元根据调节指令与偏差大小对线缆进行调节,通过根据线缆的第一位姿与第二位姿进行偏差判断,若线缆出现偏差,则根据计算的偏差大小进行线缆摆放姿势调节,能够在压底盒节点准确调节线缆摆放姿势。
应该理解的是,虽然附图的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,其可以以其他的顺序执行。而且,附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,其执行顺序也不必然是依次进行,而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
以上仅是本申请的部分实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本申请的保护范围。

Claims (9)

1.一种光伏接线盒生产线智能控制方法,其特征在于,包括:
实时获取光伏接线盒生产线视频,并对所述光伏接线盒生产线视频进行抽帧,得到多个实时视觉帧;
对所述多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像,其中,所述第一视觉关键帧图像为线缆第一次与传送带接触时的视觉帧图像,第二视觉关键帧图像为线缆到达压底盒节点时的视觉帧图像;
根据所述第一视觉关键帧图像与预先建立的坐标系确定线缆的第一位姿;
根据所述第二视觉关键帧图像与预先建立的坐标系确定线缆的第二位姿;
根据所述第一位姿与所述第二位姿判断所述线缆是否出现偏差;
若线缆出现偏差,则生成线缆调节指令,并根据所述第一位姿与所述第二位姿进行偏差计算,得到偏差大小;
将所述线缆调节指令与所述偏差大小发送至线缆调节单元,以使所述线缆调节单元根据所述线缆调节指令与所述偏差大小对所述线缆进行调节;
其中,对所述多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像的方法,包括:
获取线缆位移信息;
基于所述线缆位移信息,确定所述线缆是否产生预设第一位移距离,若所述线缆产生预设第一位移距离,则将所述实时视觉帧与所述实时视觉帧的前一帧进行比对分析,生成第一视觉关键帧图像;
基于所述线缆位移信息,确定所述线缆是否产生预设第二位移距离,若所述线缆产生预设第二位移距离,则将所述实时视觉帧与所述实时视觉帧的前一帧进行比对分析,生成第二视觉关键帧图像。
2.根据权利要求1所述的光伏接线盒生产线智能控制方法,其特征在于,所述获取线缆位移信息包括:
获取线缆初始坐标信息,所述初始坐标信息为所述光伏接线盒生产线检测到线缆时的坐标信息;
实时获取线缆的当前坐标信息;
根据所述当前坐标信息与所述初始坐标信息确定线缆位移信息。
3.根据权利要求1所述的光伏接线盒生产线智能控制方法,其特征在于,在所述将所述线缆调节指令与所述偏差大小发送至线缆调节单元之后,还包括:
获取压底盒后的图像信息;
对所述压底盒后的图像信息进行特征提取,得到图像特征;
对所述图像特征与预设合格图像特征进行相似度计算,得到相似度值;
判断所述相似度值是否大于预设相似度阈值;
若所述相似度值不大于预设相似度阈值,则确定所述压底盒后的图像信息对应的光伏接线盒不合格,根据所述压底盒后的图像信息生成报警信息,并发送至报警单元,以使报警单元根据所述报警信息进行报警。
4.根据权利要求3所述的光伏接线盒生产线智能控制方法,其特征在于,在所述获取压底盒后的图像信息之前,还包括:
获取底盒图像与顶盒图像;
根据所述底盒图像确定底盒中心点坐标;
根据所述顶盒图像确定顶盒中心点坐标;
判断所述底盒中心点坐标的横坐标与所述顶盒中心点坐标的横坐标是否相同;
若不相同,则根据所述底盒中心点坐标的横坐标与所述顶盒中心点坐标的横坐标进行差值计算,得到距离差值;
根据所述距离差值对所述底盒进行调整。
5.根据权利要求4所述的光伏接线盒生产线智能控制方法,其特征在于,所述根据所述底盒图像确定底盒中心点坐标包括:
对所述底盒图像进行特征提取,得到底盒图像的四个顶点特征;
根据所述底盒图像的四个顶点特征与预先建立的坐标系确定底盒图像的四个顶点坐标;
根据所述底盒图像的四个顶点坐标确定底盒中心点坐标;
相应的,所述根据所述顶盒图像确定顶盒中心点坐标包括:
对所述顶盒图像进行特征提取,得到顶盒图像的四个顶点特征;
根据所述顶盒图像的四个顶点特征与预先建立的坐标系确定顶盒图像的四个顶点坐标;
根据所述顶盒图像的四个顶点坐标确定顶盒中心点坐标。
6.根据权利要求5所述的光伏接线盒生产线智能控制方法,其特征在于,在所述根据所述距离差值对所述底盒进行调整之后,还包括:
根据所述底盒图像的四个顶点坐标与所述顶盒图像的四个顶点坐标确定第一距离信息,其中,所述第一距离信息为液压泵将底盒压入顶盒所需的距离信息;
将所述第一距离信息发送至液压泵控制单元,所述液压泵控制单元根据所述第一距离信息控制液压泵对所述底盒进行压盒。
7.一种光伏接线盒生产线智能控制装置,其特征在于,包括:
获取模块(201):用于实时获取光伏接线盒生产线视频,并对所述光伏接线盒生产线视频进行抽帧,得到多个实时视觉帧;
筛选模块(202):用于对所述多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像,其中,所述第一视觉关键帧图像为线缆第一次与传送带接触时的视觉帧图像,第二视觉关键帧图像为线缆到达压底盒节点时的视觉帧图像;
第一确定模块(203):用于根据所述第一视觉关键帧图像与预先建立的坐标系确定线缆的第一位姿;
第二确定模块(204):用于根据所述第二视觉关键帧图像与预先建立的坐标系确定线缆的第二位姿;
判断模块(205):用于根据所述第一位姿与所述第二位姿判断所述线缆是否出现偏差,当线缆出现偏差时,生成线缆调节指令,并触发计算模块(206);
计算模块(206):用于根据所述第一位姿与所述第二位姿进行偏差计算,得到偏差大小;
调节模块(207):用于将所述线缆调节指令与所述偏差大小发送至线缆调节单元,以使所述线缆调节单元根据所述线缆调节指令与所述偏差大小对所述线缆进行调节;
其中,筛选模块(202)在执行对所述多个实时视觉帧进行筛选,得到第一视觉关键帧图像与第二视觉关键帧图像时,具体用于:
获取线缆位移信息;
基于所述线缆位移信息,确定所述线缆是否产生预设第一位移距离,若所述线缆产生预设第一位移距离,则将所述实时视觉帧与所述实时视觉帧的前一帧进行比对分析,生成第一视觉关键帧图像;
基于所述线缆位移信息,确定所述线缆是否产生预设第二位移距离,若所述线缆产生预设第二位移距离,则将所述实时视觉帧与所述实时视觉帧的前一帧进行比对分析,生成第二视觉关键帧图像。
8.一种电子设备,其特征在于,其包括:
一个或者多个处理器;
存储器;
一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于:执行根据权利要求1~6任一项所述的光伏接线盒生产线智能控制方法。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1~6任一项所述的光伏接线盒生产线智能控制方法。
CN202211417253.XA 2022-11-14 2022-11-14 一种光伏接线盒生产线智能控制方法、装置、设备及介质 Active CN115457040B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211417253.XA CN115457040B (zh) 2022-11-14 2022-11-14 一种光伏接线盒生产线智能控制方法、装置、设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211417253.XA CN115457040B (zh) 2022-11-14 2022-11-14 一种光伏接线盒生产线智能控制方法、装置、设备及介质

Publications (2)

Publication Number Publication Date
CN115457040A CN115457040A (zh) 2022-12-09
CN115457040B true CN115457040B (zh) 2023-04-07

Family

ID=84295760

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211417253.XA Active CN115457040B (zh) 2022-11-14 2022-11-14 一种光伏接线盒生产线智能控制方法、装置、设备及介质

Country Status (1)

Country Link
CN (1) CN115457040B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117455914B (zh) * 2023-12-25 2024-03-15 青岛海天成光伏新能源有限公司 一种光伏接线盒的生产线智能控制方法及系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113409391A (zh) * 2021-06-25 2021-09-17 浙江商汤科技开发有限公司 视觉定位方法及相关装置、设备和存储介质
CN114895634A (zh) * 2022-04-18 2022-08-12 池州职业技术学院 一种基于机器视觉的产品生产线自动控制系统

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102134634B (zh) * 2011-03-02 2013-08-21 北京北方车辆集团有限公司 燃气式生产线炉体闭环控制方法
FR3060241B1 (fr) * 2016-12-09 2021-04-02 Commissariat Energie Atomique Module photovoltaique et panneau de modules photovoltaiques interconnectes
CN110930453B (zh) * 2019-10-30 2023-09-08 北京迈格威科技有限公司 目标物体定位方法、装置及可读存储介质

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113409391A (zh) * 2021-06-25 2021-09-17 浙江商汤科技开发有限公司 视觉定位方法及相关装置、设备和存储介质
CN114895634A (zh) * 2022-04-18 2022-08-12 池州职业技术学院 一种基于机器视觉的产品生产线自动控制系统

Also Published As

Publication number Publication date
CN115457040A (zh) 2022-12-09

Similar Documents

Publication Publication Date Title
US20150138382A1 (en) Image capturing method, apparatus, and electronic device
CN115457040B (zh) 一种光伏接线盒生产线智能控制方法、装置、设备及介质
CN108205680B (zh) 图像特征提取集成电路、方法、终端
CN109074497B (zh) 使用深度信息识别视频图像序列中的活动
WO2017054442A1 (zh) 一种图像信息识别处理方法及装置、计算机存储介质
CN113496208B (zh) 视频的场景分类方法及装置、存储介质、终端
CN110866497A (zh) 基于点线特征融合的机器人定位与建图方法和装置
CN107277359A (zh) 3d扫描中自适应变焦的方法、装置、移动终端及存储介质
CN108875506B (zh) 人脸形状点跟踪方法、装置和系统及存储介质
CN113421242A (zh) 基于深度学习的焊点外观质量检测方法、装置及终端
CN115457466A (zh) 一种基于巡检视频的隐患检测方法、系统及电子设备
CN109816628B (zh) 人脸评价方法及相关产品
CN108109167B (zh) 门锁安装辅助方法及装置
US20160073089A1 (en) Method for generating 3d image and electronic apparatus using the same
CN111192312B (zh) 基于深度学习的深度图像获取方法、装置、设备及介质
EP3461138B1 (en) Processing method and terminal
CN111046831A (zh) 家禽识别方法、装置及服务器
CN113077524B (zh) 一种双目鱼眼相机自动标定方法、装置、设备及存储介质
US9898486B2 (en) Method, a system, an apparatus and a computer program product for image-based retrieval
CN114648556A (zh) 视觉跟踪方法、装置和电子设备
CN110245643B (zh) 目标跟踪拍摄方法、装置、电子设备
CN108286364B (zh) 门锁安装辅助方法及装置
CN112862676A (zh) 一种图像拼接方法、设备、存储介质
CN113095176A (zh) 一种对视频数据进行背景还原的方法和装置
CN112991175A (zh) 一种基于单ptz摄像头的全景图片生成方法及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant