CN111312023B - 一种中学物理电路实验电路图自动绘制的装置及方法 - Google Patents
一种中学物理电路实验电路图自动绘制的装置及方法 Download PDFInfo
- Publication number
- CN111312023B CN111312023B CN202010203775.4A CN202010203775A CN111312023B CN 111312023 B CN111312023 B CN 111312023B CN 202010203775 A CN202010203775 A CN 202010203775A CN 111312023 B CN111312023 B CN 111312023B
- Authority
- CN
- China
- Prior art keywords
- components
- image
- circuit
- frame
- component
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B19/00—Teaching not covered by other main groups of this subclass
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Entrepreneurship & Innovation (AREA)
- Physics & Mathematics (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种中学物理电路实验电路图自动绘制的装置及方法,属于实验技术领域,包括实验桌以及显示屏,实验桌的三侧边沿上连接挡板,显示屏放置在实验桌上,并被挡板围住;所述实验桌位于显示屏的前端划为电路连接操作区,并在显示屏两侧的实验桌上分别设置元器件放置机构和导线放置机构;将每根导线相连的出现最多次数的两个元器件视为最终的相连的元器件,将最终的连接关系用一个邻接矩阵来表示,并根据此邻接矩阵,在元器件库中挑选所需的元器件,并依据邻接矩阵将元器件以待测电阻为起点,一一连接起来,并动态的展示出来,并根据所有电路元器件的连接关系确定最终的完整电路搭建方式,并根据完整的电路搭建方式自动绘制出电路图。
Description
技术领域
本发明涉及实验技术领域,特别涉及一种中学物理电路实验电路图自动绘制的装置及方法。
背景技术
实验是检验学生对理论知识的掌握水平的一种重要的教学手段。目前的中学实验技能评分方法都是按照一定的实验操作要求的评分要点,由评分老师进行主观评分,评分过程中的实验操作涉及到精细操作、操作顺序与实验结论的判断,这个需要对中学试验操作经验丰富的专业实验学科老师才能够完成对操作的评价。
例如在物理电学实验中的电路装置搭建操作,在电路实验的搭建过程中,必须等到该操作的评分要点时,现场评分老师逐一进行确认才能进行下一步评分。而在中学物理电路中的实验操作及评分过程中,判断电路连接的串并联关系是电路实验的重难点,也是对电路实验操作正确与否的进一步判断的依据。传统的现场评分需要现场监考人员逐一厘清每一组考生在实验操作过程中的电路连接关系才能得出结论,这也导致现场的人工评分工作量巨大,而且对于同一操作不同的评分老师的评分尺度不同,得到的评分结果也就无法做到一定的客观性。
近年来,随着大数据以及人工智能技术在机器视觉、图像处理技术上的快速应用,基于学生实验过程中采集的大量数据,结合最新的人工智能算法、深度学习算法,并根据中学物理电路实验的评分的需要,设计一种基于中学物理电路实验并自动绘制实验操作电路图的方法,利用实验操作过程中的电路元器件的连接拓扑关系,自动绘制学生操作过程中所连接的电路图,并将得到的自动绘制的电路图展示出来以及进行下一步评分操作,这样就能够对电路搭建过程中存在的评分人员素质要求高、评分工作量极大以及评分标准难以统一等一系列问题进行很好的改进,在减轻评分人员工作量的同时也能很大程度上促进中学实验操作的可视化,更好地激发学生实验课的趣味性与积极性。
发明内容
本发明的目的在于提供一种中学物理电路实验电路图自动绘制的装置及方法,可以解决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:一种中学物理电路实验电路图自动绘制的装置,包括实验桌以及显示屏,实验桌的三侧边沿上连接挡板,显示屏放置在实验桌上,并被挡板围住;
所述实验桌位于显示屏的前端划为电路连接操作区,并在显示屏两侧的实验桌上分别设置元器件放置机构和导线放置机构;
所述显示屏的背面上通过螺栓安装旋转架,旋转架的顶端连接顶视摄像头,其顶视摄像头的摄像口朝向实验桌,并输出数据至显示屏;
所述元器件放置机构包括顶部开口的盒体、隔板、压板和转轴,隔板分隔盒体内部空间,隔成多个相互独立的放置槽,放置槽内对应放置不同的元器件,转轴的一端插入盒体的顶部边沿上,压板的侧壁固定在转轴上,压板与转轴同步旋转卡在放置槽的上方,压板用于卡住元器件;
所述导线放置机构包括底架、第一侧板和第二侧板,底架的两端分别与第一侧板和第二侧板相接,第一侧板和第二侧板的顶端上加工多个线槽,第一侧板和第二侧板的线槽分别夹持在导线的两端。
进一步地,导线包括第一线头、第二线头和线体,线体的两端分别与第一线头和第二线头相接,第一线头和第二线头的侧壁上加工槽孔,每组第一线头和第二线头的颜色一致,不同组别的导线颜色不同。
进一步地,顶视摄像头内置红外采集模块,显示屏内置图像捕捉模块和指令模块,红外采集模块采集电路连接操作区内导线和元器件的连接图像,图像数据上传至图像捕捉模块,图像捕捉模块分割及图像处理算法对分割出来的图像块进行进一步的状态分类,判别在该帧图像中该元器件的状态,指令模块得到的图像数据帧中每一根导线相连的元器件生成最终的电路连接邻接表。
本发明提出的另一种技术,包括一种中学物理电路实验电路图自动绘制的方法,包括以下步骤:
S1:搭建实验过程视频数据采集的硬件环境,采集学生在进行电路实验过程连接元器件的视频数据,由于需要将学生在实验桌上操作的电路连接过程都能够拍摄完整,该电路实验采集过程所采用的摄像头为一个顶视摄像头,拍摄角度为从上到下,拍摄范围为整张实验桌;
S2:由S1得到的学生实验操作过程的红外采集模块采集视频,首先将采集到的顶视视频切分成一帧帧的按照时间拍列的原始视频图像,然后再利用深度学习目标检测算法及图像处理算法识别采集到的视频中每一帧图像的目标物体及其状态并记录在列表中,得到采集视频中所有图像的所有目标物体的目标框位置与元器件状态标志数据列表;
S3:由S2得到的顶视视频中的每一帧图像的所有目标的目标框位置信息及元器件状态标志信息的数据列表,筛选原始视频图像帧,将满足一定条件的图像帧挑选为绘制电路图的图像数据;
S4:由S3得到的经过挑选的满足一定条件的图像帧数据集,统计所获得的图像帧中的导线与各目标元器件框的位置关系,逐一确定各个电路元器件之间的电学连接关系,最后根据图像帧数据集将所有元器件的连接关系整理生成为邻接矩阵表示的电路连接关系图;
S5:由S4得到的各元器件连接关系邻接矩阵,以及由邻接矩阵表示的所有检测到的元器件的连接关系、元器件的种类及其状态标志,依据由邻接矩阵表示的电路连接关系将所有涉及的元器件传了起来,即为最终的电路图。
进一步地,针对S2包括以下步骤:
S21:电路实验需要检测的目标主要分为两类,一类是电路实验操作过程使用到的元器件,一类是某些元器件的状态如开关是否闭合、灯泡是否点亮及电表是否有读数等;
S22:将S1采集到顶视视频分解成一帧帧的图像数据,将每一帧的图像通过目标识别算法将电路元器件识别并框出目标在图像中的位置;
S23:将S22得到的元器件的矩形框位置的图像区域分割出来,通过图像分割及图像处理算法对分割出来的图像块进行进一步的状态分类,判别在该帧图像中该元器件的状态。
进一步地,针对S3包括以下步骤:
S31:由S2得到的所有采集视频图像的元器件检测结果及元器件状态信息,并且将每一帧图像数据与检测结果的元器件状态信息进行一一对应;
S32:由S31得到对应好每一帧图像的元器件检测结果及状态信息的数据,而这其中绘制电路图使用到的仅为电路图连接确定后的图像帧,电路连接确定的图像帧也即为电路通电过程中的图像数据;
S33:当满足开关状态为闭合、电流表或电压表读数状态为正及画面中检测到本次实验所有的元器件以上三个条件时,即可挑选出来作为后续绘制电路图的图像数据帧。
进一步地,针对S4包括以下步骤:
S41:对于检测试验操作中不同元器件的连接关系,必须要将通过导线直接相连的元器件进行分组,这里需要对电路元器件上的导线插头位置及导线外绝缘层进行改造,元器件上的插头位置要不在同一侧,所有导线的外层颜色要不同区分;
S42:通过S3得到的具有固定电路连接关系的图像数据帧及每一帧对应的元器件目标框及状态信息,再利用图像分割算法将图像数据帧中不同颜色的导线分割出来,并将每一根分割出来的导线与元器件的矩形框区域位置进行判断,当两个不同的元器件上的插头位置出现同一颜色的导线时,则认为这两个不同的元器件属于电学上的连接关系;
S43:根据S42所得到的所有组具有连接关系的元器件,并分析所有S得到的图像数据帧的元器件连接关系,将在所有S1得到的图像数据帧中每一根导线相连的元器件出现次数最多的一组作为电路上最大概率相连的一组元器件,并将所有最大概率相连的元器件记录下来,生成最终的电路连接邻接表。
进一步地,针对S4包括以下步骤:
S51:根据S2得到的图像中检测到的目标元器件及状态标志信息,在已经保存的电路元器件库中挑选相应的元器件作为初始状态,其中,电路元器件库包含了所有的电路实验中使用到的所有状态标志下的元器件符号;
S52:根据S4得到的邻接表,将在邻接表中相连的的元器件在初始状态下进行连接,连接线即表示导线,同时按照一定的连接顺序进行排列,使得最终生成的电路图中的导线不能够交叉,且尽量与源图像保持一致。
与现有技术相比,本发明的有益效果是:本发明提出的一种中学物理电路实验电路图自动绘制的装置及方法,首先对采集到的视频图像进行目标检测,计算同一根导线的同一颜色的插头的bounding box的位置与元器件的bounding box的位置的距离,遍历所有的导线端口插头与各元器件的位置状态,当同一根导线上的同一颜色的不同插头与不同的两个元器件满足上述条件,则可以认为这两个元器件是相连的;将每根导线相连的出现最多次数的两个元器件视为最终的相连的元器件,将最终的连接关系用一个邻接矩阵来表示,并根据此邻接矩阵,在元器件库中挑选所需的元器件,并依据邻接矩阵将元器件以待测电阻为起点,一一连接起来,并动态的展示出来,并根据所有电路元器件的连接关系确定最终的完整电路搭建方式,并根据完整的电路搭建方式自动绘制出电路图。
附图说明
图1为本发明的实验平台的总体示意图;
图2为本发明的实验桌及摄像头部署方案前视效果图;
图3为本发明的实验桌及摄像头部署方案俯视效果图;
图4为本发明的导线放置机构结构图;
图5为本发明的元器件放置机构结构图;
图6为本发明的各电路元器件与导线插头的连接示意图;
图7为本发明的改造后的所需的各导线示意图;
图8为本发明的电路实验整体物理连接示意图;
图9为本发明的模块连接图。
图中:1、实验桌;11、挡板;2、显示屏;21、旋转架;22、图像捕捉模块;23、指令模块;3、顶视摄像头;31、红外采集模块;4、电路连接操作区;5、元器件放置机构;51、盒体;52、隔板;53、压板;54、转轴;6、导线放置机构;61、底架;62、第一侧板;63、第二侧板;7、放置槽;71、元器件;8、线槽;9、导线;91、第一线头;92、第二线头;93、线体;10、槽孔。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参阅图1-3,一种中学物理电路实验电路图自动绘制的装置,包括实验桌1以及显示屏2,实验桌1的三侧边沿上连接挡板11,挡板11将实验桌1的三端围起来,剩余的一面正对操作者,显示屏2放置在实验桌1上,并被挡板11围住,实验桌1位于显示屏2的前端划为电路连接操作区4,并在显示屏2两侧的实验桌1上分别设置元器件放置机构5和导线放置机构6,元器件放置机构5和导线放置机构6对称设置,在两边拿导线9和元器件71时,可以准确对两者归类;显示屏2的背面上通过螺栓安装旋转架21,旋转架21的顶端连接顶视摄像头3,顶视摄像头3可以绕旋转架21旋转,其顶视摄像头3的摄像口朝向实验桌1,并输出数据至显示屏2,调节顶视摄像头3准确的采集画面上传显示屏2内,使用相对于物理实验台上方的俯视视角拍摄,并将所拍摄的视频通过局域网传输至显示屏2的后端视频数据库中。
参阅图4,元器件放置机构5包括顶部开口的盒体51、隔板52和压板53和转轴54,隔板52分隔盒体51内部空间,隔成多个相互独立的放置槽7,放置槽7内对应放置不同的元器件71,元器件71包括电流表、电压表、开关、电池盒、待测电阻以及滑动变阻器,转轴54的一端插入盒体51的顶部边沿上,压板53的侧壁固定在转轴54上,压板53与转轴54同步旋转卡在放置槽7的上方,压板53用于卡住元器件71,放置槽7的结构与每个元器件71的结构都是相同的,对应放置,并通过旋转压板53,卡住元器件71。
参阅图5,导线放置机构6包括底架61、第一侧板62和第二侧板63,底架61的两端分别与第一侧板62和第二侧板63相接,第一侧板62和第二侧板63的顶端上加工多个线槽8,第一侧板62和第二侧板63的线槽8分别夹持在导线9的两端,多个导线9的两端插入线槽8进行固定。
参阅图6-8,导线9包括第一线头91、第二线头92和线体93,线体93的两端分别与第一线头91和第二线头92相接,第一线头91和第二线头92的侧壁上加工槽孔10,为了方便判断电路各仪器之间的连接关系,槽孔10在上述仪器的设置为侧方水平插入,且两孔的距离足够远,每组第一线头91和第二线头92的颜色一致,不同组别的导线9颜色不同。
当学生在实验桌1上连接电路元器件71形成完整电路时,通过电表及开关的状态判断整个电路已经连接完成,并对搭建完成的图像帧进行标记;对图像中的通过导线9相连的两个元器件71,通过判断与该两个相连的元器件71是否与同一种颜色的导线9端口插头来确定元器件的连接关系;在得到完整电路的各元器件71状态及其相互的连接关系后,在元器件71库中挑选对应的元器件71,并根据电路图绘制规范动态的连接并展示出来。
参阅图9,顶视摄像头3内置红外采集模块31,显示屏2内置图像捕捉模块22和指令模块23,红外采集模块31采集电路连接操作区4内导线9和元器件71的连接图像,图像数据上传至图像捕捉模块22,图像捕捉模块22分割及图像处理算法对分割出来的图像块进行进一步的状态分类,判别在该帧图像中该元器件71的状态,指令模块23得到的图像数据帧中每一根导线9相连的元器件71生成最终的电路连接邻接表。
首先对采集到的视频图像进行目标检测,并从图像中提取所有电路元器件71的bounding box,并将电流表、电压表及开关的bounding box在图像中的图像块分割下来;
使用图像处理算法对分割下来的图像块进行分析,根据电表上指针的转动的角度及变化确定电路是否正常导通,并对导通的图像帧进行标记;
在标记的图像帧中,计算同一根导线9的同一颜色的插头的bounding box的位置与元器件71的bounding box的位置的距离,当距离足够近且两个bounding box的ROI大于一定的阈值,则此时的导线9插头可视为插在该元器件71的插孔上;
遍历所有的导线9端口插头与各元器件71的位置状态,当同一根导线9上的同一颜色的不同插头与不同的两个元器件71满足上述条件,则可以认为这两个元器件71是相连的;
统计所有标记的图像帧的所有元器件71的连接关系,将每根导线9相连的出现最多次数的两个元器件71视为最终的相连的元器件71,并最终确定整个电路图的连接关系;
将最终的连接关系用一个邻接矩阵来表示,并根据此邻接矩阵,在元器件71库中挑选所需的元器件71,并依据邻接矩阵将元器件71以待测电阻为起点,一一连接起来,并动态的展示出来。
为了更好的展现电路实验电路图自动绘制的流程,本实施例现提出一种中学物理电路实验电路图自动绘制的方法,包括以下步骤;
步骤一:搭建实验过程视频数据采集的硬件环境,采集学生在进行电路实验过程连接元器件71的视频数据,由于需要将学生在实验桌1上操作的电路连接过程都能够拍摄完整,该电路实验采集过程所采用的摄像头为一个顶视摄像头3,拍摄角度为从上到下,拍摄范围为整张实验桌1;
步骤二:由S1得到的学生实验操作过程的红外采集模块31采集视频,首先将采集到的顶视视频切分成一帧帧的按照时间拍列的原始视频图像,然后再利用深度学习目标检测算法及图像处理算法识别采集到的视频中每一帧图像的目标物体及其状态并记录在列表中,得到采集视频中所有图像的所有目标物体的目标框位置与元器件71状态标志数据列表;
第一节:电路实验需要检测的目标主要分为两类,一类是电路实验操作过程使用到的元器件71,一类是某些元器件71的状态如开关是否闭合、灯泡是否点亮及电表是否有读数等;
第二节:将S1采集到顶视视频分解成一帧帧的图像数据,将每一帧的图像通过目标识别算法将电路元器件71识别并框出目标在图像中的位置;
第三节:将S22得到的元器件71的矩形框位置的图像区域分割出来,通过图像分割及图像处理算法对分割出来的图像块进行进一步的状态分类,判别在该帧图像中该元器件71的状态。
步骤三:由S2得到的顶视视频中的每一帧图像的所有目标的目标框位置信息及元器件71状态标志信息的数据列表,筛选原始视频图像帧,将满足一定条件的图像帧挑选为绘制电路图的图像数据;
第一节:由S2得到的所有采集视频图像的元器件71检测结果及元器件71状态信息,并且将每一帧图像数据与检测结果的元器件71状态信息进行一一对应;
第二节:由S31得到对应好每一帧图像的元器件71检测结果及状态信息的数据,而这其中绘制电路图使用到的仅为电路图连接确定后的图像帧,电路连接确定的图像帧也即为电路通电过程中的图像数据;
第三节:当满足开关状态为闭合、电流表或电压表读数状态为正及画面中检测到本次实验所有的元器件71以上三个条件时,即可挑选出来作为后续绘制电路图的图像数据帧。
步骤四:由S3得到的经过挑选的满足一定条件的图像帧数据集,统计所获得的图像帧中的导线9与各目标元器件71框的位置关系,逐一确定各个电路元器件71之间的电学连接关系,最后根据图像帧数据集将所有元器件71的连接关系整理生成为邻接矩阵表示的电路连接关系图;
第一节:对于检测试验操作中不同元器件71的连接关系,必须要将通过导线9直接相连的元器件71进行分组,这里需要对电路元器件71上的导线9插头位置及导线9外绝缘层进行改造,元器件71上的插头位置要不在同一侧,所有导线9的外层颜色要不同区分;
第二节:通过S3得到的具有固定电路连接关系的图像数据帧及每一帧对应的元器件71目标框及状态信息,再利用图像分割算法将图像数据帧中不同颜色的导线9分割出来,并将每一根分割出来的导线9与元器件71的矩形框区域位置进行判断,当两个不同的元器件71上的插头位置出现同一颜色的导线9时,则认为这两个不同的元器件71属于电学上的连接关系;
第三节:根据S42所得到的所有组具有连接关系的元器件71,并分析所有S3得到的图像数据帧的元器件71连接关系,将在所有S3得到的图像数据帧中每一根导线9相连的元器件71出现次数最多的一组作为电路上最大概率相连的一组元器件71,并将所有最大概率相连的元器件71记录下来,生成最终的电路连接邻接表。
步骤五:由S4得到的各元器件71连接关系邻接矩阵,以及由邻接矩阵表示的所有检测到的元器件71的连接关系、元器件71的种类及其状态标志,依据由邻接矩阵表示的电路连接关系将所有涉及的元器件71传了起来,即为最终的电路图;
第一节:根据S2得到的图像中检测到的目标元器件71及状态标志信息,在已经保存的电路元器件71库中挑选相应的元器件71作为初始状态,其中,电路元器件71库包含了所有的电路实验中使用到的所有状态标志下的元器件71符号;
第二节:根据S4得到的邻接表,将在邻接表中相连的的元器件71在初始状态下进行连接,连接线即表示导线9,同时按照一定的连接顺序进行排列,使得最终生成的电路图中的导线9不能够交叉,且尽量与源图像保持一致。
综上所述:本中学物理电路实验电路图自动绘制的装置及方法,首先对采集到的视频图像进行目标检测,计算同一根导线9的同一颜色的插头的bounding box的位置与元器件71的bounding box的位置的距离,遍历所有的导线9端口插头与各元器件71的位置状态,当同一根导线9上的同一颜色的不同插头与不同的两个元器件71满足上述条件,则可以认为这两个元器件71是相连的;将每根导线9相连的出现最多次数的两个元器件71视为最终的相连的元器件71,将最终的连接关系用一个邻接矩阵来表示,并根据此邻接矩阵,在元器件71库中挑选所需的元器件71,并依据邻接矩阵将元器件71以待测电阻为起点,一一连接起来,并动态的展示出来,并根据所有电路元器件的连接关系确定最终的完整电路搭建方式,并根据完整的电路搭建方式自动绘制出电路图。
以上所述,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明披露的技术范围内,根据本发明的技术方案及其发明构思加以等同替换或改变,都应涵盖在本发明的保护范围之内。
Claims (3)
1.一种中学物理电路实验电路图自动绘制的方法,实验装置包括实验桌(1)以及显示屏(2),实验桌(1)的三侧边沿上连接挡板(11),显示屏(2)放置在实验桌(1)上,并被挡板(11)围住;
所述实验桌(1)位于显示屏(2)的前端划为电路连接操作区(4),并在显示屏(2)两侧的实验桌(1)上分别设置元器件放置机构(5)和导线放置机构(6);
所述显示屏(2)的背面上通过螺栓安装旋转架(21),旋转架(21)的顶端连接顶视摄像头(3),其顶视摄像头(3)的摄像口朝向实验桌(1),并输出数据至显示屏(2);
所述元器件放置机构(5)包括顶部开口的盒体(51)、隔板(52)、压板(53)和转轴(54),隔板(52)分隔盒体(51)内部空间,隔成多个相互独立的放置槽(7),放置槽(7)内对应放置不同的元器件(71),转轴(54)的一端插入盒体(51)的顶部边沿上,压板(53)的侧壁固定在转轴(54)上,压板(53)与转轴(54)同步旋转卡在放置槽(7)的上方,压板(53)用于卡住元器件(71);
所述导线放置机构(6)包括底架(61)、第一侧板(62)和第二侧板(63),底架(61)的两端分别与第一侧板(62)和第二侧板(63)相接,第一侧板(62)和第二侧板(63)的顶端上加工多个线槽(8),第一侧板(62)和第二侧板(63)的线槽(8)分别夹持在导线(9)的两端,导线(9)包括第一线头(91)、第二线头(92)和线体(93),线体(93)的两端分别与第一线头(91)和第二线头(92)相接,第一线头(91)和第二线头(92)的侧壁上加工槽孔(10),每组第一线头(91)和第二线头(92)的颜色一致,不同组别的导线(9)颜色不同,顶视摄像头(3)内置红外采集模块(31),显示屏(2)内置图像捕捉模块(22)和指令模块(23),红外采集模块(31)采集电路连接操作区(4)内导线(9)和元器件(71)的连接图像,图像数据上传至图像捕捉模块(22),图像捕捉模块(22)分割及图像处理算法对分割出来的图像块进行进一步的状态分类,判别连接图像中该元器件(71)的状态,指令模块(23)将得到的图像数据帧中每一根导线(9)相连的元器件(71)生成最终的电路连接邻接表,其特征在于,包括以下步骤:
S1:搭建实验过程视频数据采集的硬件环境,采集学生在进行电路实验过程连接元器件(71)的视频数据,由于需要将学生在实验桌(1)上操作的电路连接过程都能够拍摄完整,该电路实验采集过程所采用的摄像头为一个顶视摄像头(3),拍摄角度为从上到下,拍摄范围为整张实验桌(1);
S2:由S1得到的学生实验操作过程的红外采集模块(31)采集视频,首先将采集到的顶视视频切分成一帧帧的按照时间拍列的原始视频图像,然后再利用深度学习目标检测算法及图像处理算法识别采集到的视频中每一帧图像的目标物体及其状态并记录在列表中,得到采集视频中所有图像的所有目标物体的目标框位置与元器件(71)状态标志数据列表;
S3:由S2得到的顶视视频中的每一帧图像的所有目标的目标框位置信息及元器件(71)状态标志信息的数据列表,筛选原始视频图像帧,将满足一定条件的图像帧挑选为绘制电路图的图像数据;
S4:由S3得到的经过挑选的满足一定条件的图像帧数据集,统计所获得的图像帧中的导线(9)与各目标元器件(71)框的位置关系,逐一确定各个电路元器件(71)之间的电学连接关系,最后根据图像帧数据集将所有元器件(71)的连接关系整理生成为邻接矩阵表示的电路连接关系图;
S5:由S4得到的各元器件(71)连接关系邻接矩阵,以及由邻接矩阵表示的所有检测到的元器件(71)的连接关系、元器件(71)的种类及其状态标志,依据由邻接矩阵表示的电路连接关系将所有涉及的元器件(71)串联起来,即为最终的电路图;
针对上述S3包括以下步骤:
S31:由S2得到的所有采集视频图像的元器件(71)检测结果及元器件(71)状态信息,并且将每一帧图像数据与检测结果的元器件(71)状态信息进行一一对应;
S32:由S31得到对应好每一帧图像的元器件(71)检测结果及状态信息的数据,而这其中绘制电路图使用到的仅为电路图连接确定后的图像帧,电路连接确定的图像帧也即为电路通电过程中的图像数据;
S33:当满足开关状态为闭合、电流表或电压表读数状态为正及画面中检测到本次实验所有的元器件(71)以上三个条件时,即可挑选出来作为后续绘制电路图的图像数据帧;
针对上述S4包括以下步骤:S41:对于检测试验操作中不同元器件(71)的连接关系,必须要将通过导线(9)直接相连的元器件(71)进行分组,这里需要对电路元器件(71)上的导线(9)插头位置及导线(9)外绝缘层进行改造,元器件(71)上的插头位置要不在同一侧,所有导线(9)的外层颜色要不同区分;
S42:通过S3得到的具有固定电路连接关系的图像数据帧及每一帧对应的元器件(71)目标框及状态信息,再利用图像分割算法将图像数据帧中不同颜色的导线(9)分割出来,并将每一根分割出来的导线(9)与元器件(71)的矩形框区域位置进行判断,当两个不同的元器件(71)上的插头位置出现同一颜色的导线(9)时,则认为这两个不同的元器件(71)属于电学上的连接关系;
S43:根据S42所得到的所有组具有连接关系的元器件(71),并分析所有S3得到的图像数据帧的元器件(71)连接关系,将在所有S3得到的图像数据帧中每一根导线(9)相连的元器件(71)出现次数最多的一组作为电路上最大概率相连的一组元器件(71),并将所有最大概率相连的元器件(71)记录下来,生成最终的电路连接邻接表。
2.如权利要求1所述的一种中学物理电路实验电路图自动绘制的方法,其特征在于,针对S2包括以下步骤:
S21:电路实验需要检测的目标分为两类,一类是电路实验操作过程使用到的元器件(71),一类是其他元器件的状态;
S22:将S1采集到顶视视频分解成一帧帧的图像数据,将每一帧的图像通过目标识别算法将电路元器件(71)识别并框出目标在图像中的位置;
S23:将S22得到的元器件(71)的矩形框位置的图像区域分割出来,通过图像分割及图像处理算法对分割出来的图像块进行进一步的状态分类,判别在该帧图像中该元器件(71)的状态。
3.如权利要求1所述的一种中学物理电路实验电路图自动绘制的方法,其特征在于,针对S5包括以下步骤:
S51:根据S2得到的图像中检测到的目标元器件及状态标志信息,在已经保存的电路元器件库中挑选相应的元器件(71)作为初始状态,其中,电路元器件(71)库包含了所有的电路实验中使用到的所有状态标志下的元器件(71)符号;
S52:根据S4得到的邻接表,将在邻接表中相连的的元器件(71)在初始状态下进行连接,连接线即表示导线(9),同时按照一定的连接顺序进行排列,使得最终生成的电路图中的导线(9)不能够交叉,且尽量与源图像保持一致。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010203775.4A CN111312023B (zh) | 2020-03-20 | 2020-03-20 | 一种中学物理电路实验电路图自动绘制的装置及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010203775.4A CN111312023B (zh) | 2020-03-20 | 2020-03-20 | 一种中学物理电路实验电路图自动绘制的装置及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111312023A CN111312023A (zh) | 2020-06-19 |
CN111312023B true CN111312023B (zh) | 2022-02-08 |
Family
ID=71147263
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010203775.4A Active CN111312023B (zh) | 2020-03-20 | 2020-03-20 | 一种中学物理电路实验电路图自动绘制的装置及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111312023B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114677586B (zh) * | 2022-03-15 | 2024-04-05 | 南京邮电大学 | 一种物理电路实验自动识别方法 |
CN114708486A (zh) * | 2022-04-07 | 2022-07-05 | 太原智林信息技术股份有限公司 | 物理电学实验操作电路连接自动评判方法 |
CN114882520B (zh) * | 2022-07-08 | 2022-11-11 | 成都西交智汇大数据科技有限公司 | 一种检测电路图的方法、系统、设备及可读存储介质 |
CN117409261B (zh) * | 2023-12-14 | 2024-02-20 | 成都数之联科技股份有限公司 | 一种基于分类模型的元件角度分类方法及系统 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN2410755Y (zh) * | 2000-03-14 | 2000-12-13 | 苏锡晓 | 电路布线器 |
CN2859701Y (zh) * | 2005-12-15 | 2007-01-17 | 蒋玉强 | 便携式多功能课堂教学用实验箱 |
JP2018045271A (ja) * | 2016-09-12 | 2018-03-22 | 株式会社日立ビルシステム | 保守作業用携帯端末及び保守作業用携帯端末の表示制御方法 |
CN107241572B (zh) * | 2017-05-27 | 2024-01-12 | 国家电网公司 | 学员实训视频追踪评价系统 |
CN107689184A (zh) * | 2017-10-20 | 2018-02-13 | 张肇基 | 一种多功能电学实验台及其使用方法 |
CN107992694A (zh) * | 2017-12-08 | 2018-05-04 | 魏延福 | 一种pcb电路板数据化处理方法及其数据呈现系统 |
AU2019333833B2 (en) * | 2019-02-25 | 2021-05-27 | Huawei Technologies Co., Ltd. | Topology processing method, apparatus, and system |
CN110119680B (zh) * | 2019-04-03 | 2023-08-01 | 上海工程技术大学 | 一种基于图像识别的电气柜接线自动查错系统 |
-
2020
- 2020-03-20 CN CN202010203775.4A patent/CN111312023B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN111312023A (zh) | 2020-06-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111312023B (zh) | 一种中学物理电路实验电路图自动绘制的装置及方法 | |
CN107240047B (zh) | 一种教学视频的学分评估方法和装置 | |
CN104596929B (zh) | 确定空气质量的方法及设备 | |
WO2017092427A1 (zh) | 一种电子元件定位方法及装置 | |
AU2023201724A1 (en) | System for counting number of game tokens | |
CN110378232B (zh) | 改进的ssd双网络的考场考生位置快速检测方法 | |
JP2014178328A (ja) | 鋼管内部腐食解析装置及び鋼管内部腐食解析方法 | |
CN108648169A (zh) | 高压输电塔绝缘子缺陷自动识别的方法及装置 | |
CN112084994A (zh) | 一种在线监考远程视频作弊研判系统及方法 | |
CN113255590A (zh) | 一种缺陷检测模型训练方法、缺陷检测方法、装置及系统 | |
CN108765405A (zh) | 一种影像鉴真方法和系统 | |
CN112861959A (zh) | 一种目标检测图像的自动标注方法 | |
CN109557396A (zh) | 一种电磁场辐射抗扰度视频自动检测系统及检测方法 | |
CN114581760B (zh) | 一种机房巡检的设备故障检测方法及系统 | |
CN116188433A (zh) | 一种绝缘子缺陷检测方法、装置和设备 | |
CN113822907B (zh) | 图像处理方法及装置 | |
CN116309564B (zh) | 基于人工智能图像识别的电芯外观缺陷检测方法及系统 | |
CN116721083A (zh) | 一种检测电力设备瑕疵的背夹及其检测方法 | |
CN112184710A (zh) | 一种基于视觉感知的线扫激光气泡检测方法及系统 | |
CN109462067B (zh) | 嵌入式设备的辅助装置和实训系统 | |
CN114708543B (zh) | 一种考场监控视频图像中考生定位方法 | |
CN116109849A (zh) | 基于surf特征匹配的高压隔离开关定位与状态识别方法 | |
CN113538411A (zh) | 一种绝缘子缺陷检测方法及装置 | |
CN113538412A (zh) | 一种航拍图像的绝缘子缺陷检测方法及装置 | |
CN111310536A (zh) | 神经网络物体分类的机器持续学习方法及其监控摄像设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |