CN110334729B - 检验仪器自动报警通知系统 - Google Patents

检验仪器自动报警通知系统 Download PDF

Info

Publication number
CN110334729B
CN110334729B CN201910384610.9A CN201910384610A CN110334729B CN 110334729 B CN110334729 B CN 110334729B CN 201910384610 A CN201910384610 A CN 201910384610A CN 110334729 B CN110334729 B CN 110334729B
Authority
CN
China
Prior art keywords
screen
information
image
alarm
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910384610.9A
Other languages
English (en)
Other versions
CN110334729A (zh
Inventor
武永康
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Xintong Netease Medical Science And Technology Development Co ltd
West China Hospital of Sichuan University
Original Assignee
Chengdu Xintong Netease Medical Science And Technology Development Co ltd
West China Hospital of Sichuan University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Xintong Netease Medical Science And Technology Development Co ltd, West China Hospital of Sichuan University filed Critical Chengdu Xintong Netease Medical Science And Technology Development Co ltd
Priority to CN201910384610.9A priority Critical patent/CN110334729B/zh
Publication of CN110334729A publication Critical patent/CN110334729A/zh
Application granted granted Critical
Publication of CN110334729B publication Critical patent/CN110334729B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G06V10/757Matching configurations of points or features
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Public Health (AREA)
  • General Business, Economics & Management (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • Databases & Information Systems (AREA)
  • Evolutionary Computation (AREA)
  • Software Systems (AREA)
  • Emergency Management (AREA)
  • Multimedia (AREA)
  • Alarm Systems (AREA)
  • Image Processing (AREA)

Abstract

本发明提出一种检验仪器自动报警通知系统,属于医疗仪器自动报警领域。本发明解决了目前通过电脑控制的检验仪器在需要人为干预才能处理报警信息时,均需由相关工作人员值守,工作效率较低的问题,其技术方案要点为:包括报警信息采集单元、信息比对处理单元及信息传递单元,报警信息采集单元将截取的报警信息图片作为目标图像,将截取的计算机整体画面图片作为屏幕图像传输至信息比对处理单元;信息比对处理单元将各个检验仪器的屏幕图像与报警信息知识库中相应的目标图像进行比对,当屏幕图像中包含的子图与相应的目标图像一致时,则通过信息传递单元通知指定人员所绑定的智能终端。本发明能够节约临床检验时间,避免试剂损耗。

Description

检验仪器自动报警通知系统
技术领域
本发明涉及医疗仪器报警通知技术,特别涉及检验仪器自动报警通知系统的技术。
背景技术
准确的检验结果是临床医生疾病诊治的重要依据。检验医学涉及微生物学、免疫学、生物化学、分子学、血液学、细胞学等多方面的检验内容,目前大中型医院检验项目可达近千个,大部分检验项目均采用半自动或全自动检验仪器进行检测。对于中型医院,即二级或三级医院而言,检测项目至少包括生化、血常规、肝炎标志物、肿瘤标志物及自身抗体等约100多项检测指标,由于不同检测仪器所能检测项目有限,因此,中型医院通常使用10台左右检测仪器进行临床检验,而几乎所有的检验仪器均通过电脑进行控制,当仪器出现需要人为干预时电脑显示器会弹出提示或警报,这时提示操作人员进行及时处理,否则将实验将无法继续,但前提是每台正在运行的仪器都需要有相关工作人员值守,才能及时处理仪器出现的问题,得以工作继续进行下去,这种工作效率较低。若操作人员没在仪器现场,就不能及时发现这一现象,可能导致实验延时、结果不准确,甚至必须重新检测,不仅浪费时间,还要浪费检测试剂成本,最终将延迟患者检验报告发放时间,可能延误患者就诊,存在潜在的医患纠纷,从而导致较为严重的后果。
实际应用中,由于临床实验室检验操作经历了手工操作、半自动分析和自动分析过程。目前,全自动检验仪器以高新技术为基础,以高准确性、精密度、灵活性和高效率为特点,检验仪器在现代临床实验室中,特别是大、中型实验室承担大部分的常规检验工作,但是检验仪器在运行过程中会出现一些提示信息或者报警,需要工作人员及时进行处理方可继续进行实验,所以无法做到无人值守。
发明内容
本发明的目的是提供一种检验仪器自动报警通知系统,解决目前通过电脑控制的检验仪器在需要人为干预才能处理报警信息时,均需由相关工作人员值守,工作效率较低的问题。
本发明解决其技术问题,采用的技术方案是:检验仪器自动报警通知系统,包括报警信息采集单元、信息比对处理单元及信息传递单元,所述报警信息采集单元通过信息比对处理单元连接信息传递单元;
所述报警信息采集单元用于定时对检测仪器的前端计算机屏幕中报警信息所在区域进行截屏,同时对检测仪器的前端计算机屏幕整体画面进行截屏,并将截取的报警信息图片作为目标图像并传输至信息比对处理单元,将截取的计算机整体画面图片作为屏幕图像并传输至信息比对处理单元;
所述信息比对处理单元用于接收各个检验仪器的目标图像并进行注释,并将经注释的各个检测仪器的目标图像作为报警信息知识库,所述各个检验仪器中每台检验仪器分别对应唯一的标识信息;还用于接收各个检验仪器的屏幕图像,并将其与报警信息知识库中相应的目标图像进行比对,当屏幕图像中包含的子图与相应的目标图像一致时,则向信息传递单元发送控制信号;
所述信息传递单元用于当接收到所述控制信号时,则触发相应的信息通知程序,并通过相应的信息通知程序将报警注释信息发送至指定人员所绑定的智能终端,所述报警注释信息至少包括相应检验仪器对应的标识信息,所述智能终端至少包括手机、PDA等,智能终端应用包括微信、短信或其他及时通讯程序。
进一步的是,所述报警信息采集单元根据前端计算机所运行的不同操作系统,编写适用于不同操作系统的屏幕截图程序,通过屏幕截图程序定时对检测仪器的前端计算机屏幕中报警信息所在区域进行截屏,以及对检测仪器的前端计算机屏幕整体画面进行截屏。
具体的是,所述报警信息采集单元采用VGA分频器定时获取检测仪器的前端计算机的显示信息一,所述显示信息一包括对报警信息所在区域进行的截屏以及对检测仪器的前端计算机屏幕整体画面进行的截屏。
再进一步的是,所述报警信息采集单元采用摄像头定时对检测仪器的前端计算机的显示信息二进行截屏或录屏,所述显示信息二包括对报警信息所在区域进行的截屏,以及检测仪器运行过程中相应前端计算机屏幕整体画面的截屏或录屏。
更具体的是,所述报警信息采集单元通过有线网络或wifi或蓝牙的信息传输方式将屏幕图像和目标图像传输至信息比对处理单元。
再进一步的是,所述相应的信息通知程序为短信通知程序或微信通知程序。
更具体的是,将屏幕图像与报警信息知识库中相应的目标图像进行比对时,包括如下步骤:
步骤1、在目标图像中,按照固定行列间隔将相应的像素选为特征点,并根据梯度阈值做筛选,将梯度任一分量超过规定值的像素也选为特征点;
步骤2、对所有特征点进行列表并进行随机排列;
步骤3、在屏幕图像中,按照目标图像的尺寸,切分出与目标图像的尺寸相同的子图;
步骤4、遍历所有子图,并将其与目标图像中所有的特征点进行比对,在比对过程中,若发现特征点与相应子图中的对应像素不匹配时,则终止并淘汰当前子图,并进行与下一子图的比对过程,所述被终止并淘汰的子图在下一次遍历时不进行比对。
再进一步的是,步骤1中,按照固定行列间隔选取特征点时,设所述图像Img包括M行N列个像素Img(i,j)的集合,其中,i为像素所在行,j像素为所在列,i取值范围[0,...,M-1],j=[0,...,N-1],在目标图像Img中取特征点时,设定选取的行列间隔为T,那么行列坐标均为T的整数倍的像素被选为特征点,这样得到的特征点集合E1={Img(m,n)|m%T=0and n%T=0};
按照梯度阈值选取特征点时,设梯度阈值为D,根据梯度阈值筛选的特征点集合为E2={Img(m,n)|abs(Img(m,n)-Img(m,n-1))>D and abs(Img(m,n)-Img(m-1,n))>D}特征点集合就是E1={E1 U E2},其中,符号abs表示取括号内的绝对值,U表示左右两个集合的并集。
更具体的是,步骤3中,所述子图的区域选择在屏幕图像中是以一个像素为步长进行水平和垂直移动的,每次移动一个像素距离。
再进一步的是,步骤4中,将子图与目标图像中所有的特征点进行比对过程中,对两幅图像的逐个特征点的灰度值进行比较,对彩色图像,就是3个灰度分量的比较,对同一个坐标的像素灰度,若目标图像中特征点的三个灰度分量与子图中对应特征点的三个灰度分量均相同,则说明此特征点相同,如果所有特征点都满足,就说明这两幅图像匹配,如果有一个像素不满足,就终止比对,确认两幅图像不匹配。
本发明的有益效果是,通过上述的检验仪器自动报警通知系统,当检验仪器出现需要人为干预的报警信息时,操作人员能及时知晓并处理,节约了临床检验时间,避免了试剂损耗。
附图说明
图1为本发明将屏幕图像与报警信息知识库中相应的目标图像进行比对时的步骤流程图。
具体实施方式
下面结合实施例及附图,详细描述本发明的技术方案。
本发明所述检验仪器自动报警通知系统,包括报警信息采集单元、信息比对处理单元及信息传递单元,所述报警信息采集单元通过信息比对处理单元连接信息传递单元;所述报警信息采集单元用于定时对检测仪器的前端计算机屏幕中报警信息所在区域进行截屏,同时对检测仪器的前端计算机屏幕整体画面进行截屏,并将截取的报警信息图片作为目标图像并传输至信息比对处理单元,将截取的计算机整体画面图片作为屏幕图像并传输至信息比对处理单元;所述信息比对处理单元用于接收各个检验仪器的目标图像并进行注释,并将经注释的各个检测仪器的目标图像作为报警信息知识库,所述各个检验仪器中每台检验仪器分别对应唯一的标识信息;还用于接收各个检验仪器的屏幕图像,并将其与报警信息知识库中相应的目标图像进行比对,当屏幕图像中包含的子图与相应的目标图像一致时,则向信息传递单元发送控制信号;所述信息传递单元用于当接收到所述控制信号时,则触发相应的信息通知程序,并通过相应的信息通知程序将报警注释信息发送至指定人员所绑定的智能终端,所述报警注释信息至少包括相应检验仪器对应的标识信息。
上述系统中,报警信息采集单元根据前端计算机所运行的不同操作系统,编写适用于不同操作系统的屏幕截图程序,可以通过屏幕截图程序定时对检测仪器的前端计算机屏幕中报警信息所在区域进行截屏,以及对检测仪器的前端计算机屏幕整体画面进行截屏。报警信息采集单元还可以采用VGA分频器定时获取检测仪器的前端计算机的显示信息一,所述显示信息一包括对报警信息所在区域进行的截屏以及对检测仪器的前端计算机屏幕整体画面进行的截屏。报警信息采集单元还可以采用摄像头定时对检测仪器的前端计算机的显示信息二进行截屏或录屏,所述显示信息二包括对报警信息所在区域进行的截屏,以及检测仪器运行过程中相应前端计算机屏幕整体画面的截屏或录屏。
为了使数据传输更高效,报警信息采集单元优选通过有线网络或wifi或蓝牙的信息传输方式将屏幕图像和目标图像传输至信息比对处理单元。为了能与智能终端实现更方便的通讯,相应的信息通知程序优选为短信通知程序或微信通知程序。
一般情况下,给定2个图像,从1张图像中判断是否存在一个区域,这个区域的图像内容是否和另1张图像匹配。第1个图像,可能来自计算机完整截屏,称为屏幕图像,第2个图像,来自预先准备的目标图像,分辨率小于前面第1个图像,要求判断屏幕图像中是否存在子图,和目标图像内容是否匹配。
现实情况有几个特点:
1、图像内容匹配是包括了色彩在内的,也就是要考虑彩色图像的匹配。
2、屏幕图像分辨率一般为1920*1080,3个通道,总共600多万像素。
3、匹配任务在时间上密集,短时间内要求完成尽量多的匹配。
鉴于以上特点,要求计算速度要尽可能快速,并且算法计算时间增长率不能高于图像像素的增长率。
因此,在实际用用中,本申请在将屏幕图像与报警信息知识库中相应的目标图像进行比对时,其流程图参见图1,其可包括如下步骤:
步骤1、在目标图像中,按照固定行列间隔将相应的像素选为特征点,并根据梯度阈值做筛选,将梯度任一分量超过规定值的像素也选为特征点;
步骤2、对所有特征点进行列表并进行随机排列;
步骤3、在屏幕图像中,按照目标图像的尺寸,切分出与目标图像的尺寸相同的子图;
步骤4、遍历所有子图,并将其与目标图像中所有的特征点进行比对,在比对过程中,若发现特征点与相应子图中的对应像素不匹配时,则终止并淘汰当前子图,并进行与下一子图的比对过程,所述被终止并淘汰的子图在下一次遍历时不进行比对。
上述方法的步骤1中,按照固定行列间隔选取特征点时,设所述图像Img包括M行N列个像素Img(i,j)的集合,其中,i为像素所在行,j像素为所在列,i取值范围[0,...,M-1],j=[0,...,N-1],在目标图像Img中取特征点时,设定选取的行列间隔为T,那么行列坐标均为T的整数倍的像素被选为特征点,这样得到的特征点集合E1={Img(m,n)|m%T=0andn%T=0};
按照梯度阈值选取特征点时,设梯度阈值为D,根据梯度阈值筛选的特征点集合为E2={Img(m,n)|abs(Img(m,n)-Img(m,n-1))>D and abs(Img(m,n)-Img(m-1,n))>D}特征点集合就是E1={E1 U E2},其中,符号abs表示取括号内的绝对值,U表示左右两个集合的并集。
这里,按照固定行列间隔选为特征点,这样是为了减少特征点数量,同时使得选到的特征点在空间上覆盖均匀。根据梯度阈值做筛选,梯度任一分量超过300的像素也选为特征点,这可以减少渐变色区域的特征点数量。由于目标图像基本固定,筛选特征点的过程只需执行一次,缓存后可被后续不断变化的屏幕图像重复使用,不必每次比对都执行。其中,由于梯度的物理意义是指当前位置像素和相邻像素之间的差异,对应于图像中非平坦区域,凸显出来的像素,这些像素的汇总刻画一个图像的轮廓、边线及显著点,因此梯度任一分量超过300的像素也选为特征点。
并且,对于目标图像,并非所有像素都需要比对,纯色区域的像素点不构成图像的特征,要忽略。使用梯度阈值过滤的方式筛选出特征点时:需要遍历目标图像中的像素,和水平相邻像素和垂直相邻像素计算灰度差,3个通道的差值加起来,构成水平像素差值和垂直像素差,得到2个方向的梯度向量[uGradH,uGradV]。
梯度的水平分量uGradH=(R-R')+(G-G')+(B-B')
其中,RGB为当前像素的3通道灰度,R'G'B'为水平相邻像素的3通道灰度。
用类似方法得到梯度的垂直分量uGradV。
这里,图像中一个像素的梯度是指它的灰度与相邻像素灰度的差异。阈值是指具体的梯度数值,用于限定一个界限,梯度超过界限(阈值)的像素被特别处理,比如选做特征点。梯度的水平分量是指和相邻左右像素的差异,相应地,梯度的垂直分量是指和相邻上下像素的差异。
上述方法的步骤2中,由于特征点的筛选顺序是基于空间顺序,前后有很强的空间相关性,在匹配时,希望对不相同的2个图像尽早的发现特征点不匹配,就不能按照相邻顺序进行比对,而是打乱顺序,尽快从整体上发现不匹配的点。因此对前面选出的特征点列表进行随机排列。具体地,在取特征点时,是以逐行逐列方式遍历一幅图像并按顺序存入一个列表的,这造成空间相邻的特征点,在列表中顺序相邻。以后做图像比对时,也造成比对过程是按照区域逐步展开,从局部蔓延到整体。如果两幅图像恰好在开始的区域内容完全相同,就会把计算量耗费在这个区域而不能尽早发现这两幅图像实际并不同。如果比对顺序是随机的,就会大概率上提前发现两幅图像的不同,而及早终止计算,节约计算量。随机排列的方法只要是打乱原有空间顺序即可,没有特定要求。
上述方法的步骤3中,所述子图的区域选择在屏幕图像中是以一个像素为步长进行水平和垂直移动的,每次移动一个像素距离。
在屏幕图像中,按照目标图像的尺寸,切分出子图,子图在屏幕图像中是平滑(水平、垂直)移动得到的,“平滑”是指每次只移动1个像素的距离。这里并没有直接复制得到子图,而是通过寻址的方式,定位每个子图的起始地址。访问子图内容时,通过起始地址+偏移量的方式,就可以遍历任一子图内的所有像素了。
理论上是对每个子图和目标图像的所有特征点进行比对,如果发现不匹配的像素,就终止当前子图,对下一个子图进行相同处理。为了缩短计算量,我们需要换一个比对维度:对每一个特征点,遍历所有子图,执行定点比对。由于特征点在筛选时已经记录的相对偏移地址,因此定点比对就是对子图的起始地址+偏移地址,就可以立即访问像素。
其中,子图是屏幕图像中的一个区域,子图所对应的区域本质上也是一个图像。用子图和目标图像比对,就要求他们的尺寸一致。所谓切分出子图,就是选定这个子图对应的像素集合,也就是图像。子图的区域选择在屏幕图像中是以一个像素为步长进行水平和垂直移动的,每次移动一个像素距离。所有子图完整覆盖了整个屏幕图像,而子图之间又有重合。如果在屏幕图像中的确存在目标图像的内容,这些大量密集的子图就会有一个比对成功。
上述方法的步骤4中,将子图与目标图像中所有的特征点进行比对过程中,对两幅图像的逐个特征点的灰度值进行比较,对彩色图像,就是3个灰度分量的比较,对同一个坐标的像素灰度,若目标图像中特征点的三个灰度分量与子图中对应特征点的三个灰度分量均相同,则说明此特征点相同,如果所有特征点都满足,就说明这两幅图像匹配,如果有一个像素不满足,就终止比对,确认两幅图像不匹配。
而比对就是对两幅图像的逐个特征点的灰度值进行比较,对彩色图像,就是3个灰度分量的比较。对同一个坐标的像素灰度,图像1为r1,g1,b1,图像2为r2,g2,b2。如果同时满足r1=r2,g1=g2,b1=b2,就说明此像素相同。如果所有特征点都满足,就说明这两幅图像匹配。如果有一个像素不满足,就终止比对,确认两幅图像不匹配。
使用上述方法步骤1-4,对1920*1080屏幕图像测试匹配目标图像(尺寸约为屏幕图像的1/10),经测试,在Intel i5处理器单核上的计算时间在100毫秒以内。实际应用中,可利用多核,以多线程并发处理屏幕图像的不同区域,进一步缩短计算时间。
实施例:
本发明实施例中,当检验仪器操作电脑或面板出现报警信息,如液体不足,通过截屏或VGA分屏器或摄相头获取上述报警图片,该图片作为报警图片母板保存于中心端服务器处理中心,并对其进行注释信息,所述注释信息包括报警信息内容、仪器地点、厂家工程师及联系方式等;此时,该仪器操作电脑或面板的屏幕被实时录屏或定时截图,录屏或定时截图信息实时传送到中心端处理中心,并实时与报警图片母板进行比对,当两者一致时,将触发注释信息,这里的注释信息可以包括报警图片,一并发送至指定操作人员,操作人员得到通知后立即到仪器旁进行处理。
本实施例中用到的检测仪器包括一台addcare ELISA 500酶标仪,三台euroblot免疫印迹仪,一台欧蒙sprinter XL荧光检测仪,一台欧蒙EUROimmun Analyzer I酶免分析仪,六台仪器均由电脑操作。通过上述检测仪器,再加上本申请提出的检验仪器自动报警通知系统,对于7天监控分析数据比较,具体如下:
1、仪器报警提醒信息分类及发生概率
表1.仪器报警提醒信息分类及发生概率表
Figure BDA0002054428860000081
表2.仪器报警提醒信息分类及发生概率表
Figure BDA0002054428860000082
Figure BDA0002054428860000091
其中:电脑开机时报警系统自动启动,仪器控制电脑关机时提示离线状态。
2、提高工作效率统计分析(6台仪器分布在3个房间,需要4名工作人员值守)
表1中的报警信息是必须人为处理后方可继续进行实验,报警信息为吸样错误、样本量不足、缺少标本时,需要相关工作人员处理后方可继续进行实验,本科室未启用人工智能检验仪器自动报警通知系统时,若无人值守平均每次仪器报警耽搁时间为10分钟,则监控7天共可节约200分钟;报警信息为装针失败、缺少枪头、未放质控、试剂量不足时,以“非立即补加须进行复查”的原则,若无人值守及时处理报警则本批次实验需要复查,7天共需要复查14批次标本。
表2中的报警信息是不需要马上进行处理或者是不需要处理的报警。如果需要进行多批次试验,则收到“检测完成”的报警信息后可以立即准备进行下一批次实验,减少中间的等待时间,提高了工作效率。
比如,本科室某次使用欧蒙酶免分析仪进行抗中性粒细胞胞浆抗体(ANCA)-ELISA检测时,工作人员午饭后回来发现仪器报警(缺少枪头),根据进度条显示报警时间为15分钟前,因此本批次实验失败需要重新检测,检验结果推迟150分钟,既推迟了患者取报告的时间以及延长了工作人员的工作时间又浪费了检测试剂。
3.技术操作人员满意度调查
表3.技术操作人员满意度调查表
Figure BDA0002054428860000092
其中,操作人员体验评分方法为:通过9位实验操作人员对报警信息通知系统体验进行评分,总分为10分,分数越高,表示工作效率越高、工作时间越短。
通过表1的数据显示,使用人工智能检验仪器自动报警通知系统后,相关工作人员每天可以节省约30分钟,而且只需要2名工作人员值守即可完成实验。因此通过这种手段可以减少人工工作量,实现中央监控,实现尽量少的工作人员高效监控多台仪器,可以在不同程度上提高工作效率和缩短工作时间,同时减少试剂成本。
表2的数据显示使用人工智能检验仪器自动报警通知系统亦可以监测仪器是否处于运行状态,以及检测完成后可以及时进行下一个批次的实验,尽可能减少等待时间。
同时,对该系统在使用过程中对工作效率的影响做了调查,共有9位实验室相关操作人员参与,表3结果显示,实验操作人员能切实感受到使用该系统后工作得到效率提高、工作时间缩短。
综上所述,该系统对故障率低的仪器有一定的意义,故障率高的仪器意义更大。通过该系统的应用可以节约大量的时间及人力成本、减少因复查而造成的试剂浪费。并且,该系统并不影响日常工作流程,操作人员满意度显著提高。总之,该系统可以应用到任何自动化检验仪器上,能够对于提高整体检验效率及监控评价仪器故障率提供数据支撑。

Claims (9)

1.检验仪器自动报警通知系统,其特征在于,包括报警信息采集单元、信息比对处理单元及信息传递单元,所述报警信息采集单元通过信息比对处理单元连接信息传递单元;
所述报警信息采集单元用于定时对检测仪器的前端计算机屏幕中报警信息所在区域进行截屏,同时对检测仪器的前端计算机屏幕整体画面进行截屏,并将截取的报警信息图片作为目标图像并传输至信息比对处理单元,将截取的计算机整体画面图片作为屏幕图像并传输至信息比对处理单元;
所述信息比对处理单元用于接收各个检验仪器的目标图像并进行注释,并将经注释的各个检测仪器的目标图像作为报警信息知识库,所述各个检验仪器中每台检验仪器分别对应唯一的标识信息;还用于接收各个检验仪器的屏幕图像,并将其与报警信息知识库中相应的目标图像进行比对,当屏幕图像中包含的子图与相应的目标图像一致时,则向信息传递单元发送控制信号;将屏幕图像与报警信息知识库中相应的目标图像进行比对时,包括如下步骤:
步骤1、在目标图像中,按照固定行列间隔将相应的像素选为特征点,并根据梯度阈值做筛选,将梯度任一分量超过规定值的像素也选为特征点;
步骤2、对所有特征点进行列表并进行随机排列;
步骤3、在屏幕图像中,按照目标图像的尺寸,切分出与目标图像的尺寸相同的子图;
步骤4、遍历所有子图,并将其与目标图像中所有的特征点进行比对,在比对过程中,若发现特征点与相应子图中的对应像素不匹配时,则终止并淘汰当前子图,并进行与下一子图的比对过程,被终止并淘汰的子图在下一次遍历时不进行比对;
所述信息传递单元用于当接收到所述控制信号时,则触发相应的信息通知程序,并通过相应的信息通知程序将报警注释信息发送至指定人员所绑定的智能终端,所述报警注释信息至少包括相应检验仪器对应的标识信息。
2.根据权利要求1所述的检验仪器自动报警通知系统,其特征在于,所述报警信息采集单元根据前端计算机所运行的不同操作系统,编写适用于不同操作系统的屏幕截图程序,通过屏幕截图程序定时对检测仪器的前端计算机屏幕中报警信息所在区域进行截屏,以及对检测仪器的前端计算机屏幕整体画面进行截屏。
3.根据权利要求1所述的检验仪器自动报警通知系统,其特征在于,所述报警信息采集单元采用VGA分频器定时获取检测仪器的前端计算机的显示信息一,所述显示信息一包括对报警信息所在区域进行的截屏以及对检测仪器的前端计算机屏幕整体画面进行的截屏。
4.根据权利要求1所述的检验仪器自动报警通知系统,其特征在于,所述报警信息采集单元采用摄像头定时对检测仪器的前端计算机的显示信息二进行截屏或录屏,所述显示信息二包括对报警信息所在区域进行的截屏,以及检测仪器运行过程中相应前端计算机屏幕整体画面的截屏或录屏。
5.根据权利要求1-4任意一项所述的检验仪器自动报警通知系统,其特征在于,所述报警信息采集单元通过有线网络或wifi或蓝牙的信息传输方式将屏幕图像和目标图像传输至信息比对处理单元。
6.根据权利要求1-4任意一项所述的检验仪器自动报警通知系统,其特征在于,所述相应的信息通知程序为短信通知程序或微信通知程序。
7.根据权利要求1所述的检验仪器自动报警通知系统,其特征在于,步骤1中,按照固定行列间隔选取特征点时,设所述图像Img包括M行N列个像素Img(i,j)的集合,其中,i为像素所在行,j像素为所在列,i取值范围[0,...,M-1],j=[0,...,N-1],在目标图像Img中取特征点时,设定选取的行列间隔为T,那么行列坐标均为T的整数倍的像素被选为特征点,这样得到的特征点集合E1={Img(m,n)|m%T=0and n%T=0};
按照梯度阈值选取特征点时,设梯度阈值为D,根据梯度阈值筛选的特征点集合为E2={Img(m,n)|abs(Img(m,n)-Img(m,n-1))>D and abs(Img(m,n)-Img(m-1,n))>D}特征点集合就是E1={E1 U E2},其中,符号abs表示取括号内的绝对值,U表示左右两个集合的并集。
8.根据权利要求1所述的检验仪器自动报警通知系统,其特征在于,步骤3中,所述子图的区域选择在屏幕图像中是以一个像素为步长进行水平和垂直移动的,每次移动一个像素距离。
9.根据权利要求1所述的检验仪器自动报警通知系统,其特征在于,步骤4中,将子图与目标图像中所有的特征点进行比对过程中,对两幅图像的逐个特征点的灰度值进行比较,对彩色图像,就是3个灰度分量的比较,对同一个坐标的像素灰度,若目标图像中特征点的三个灰度分量与子图中对应特征点的三个灰度分量均相同,则说明此特征点相同,如果所有特征点都满足,就说明这两幅图像匹配,如果有一个像素不满足,就终止比对,确认两幅图像不匹配。
CN201910384610.9A 2019-05-09 2019-05-09 检验仪器自动报警通知系统 Active CN110334729B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910384610.9A CN110334729B (zh) 2019-05-09 2019-05-09 检验仪器自动报警通知系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910384610.9A CN110334729B (zh) 2019-05-09 2019-05-09 检验仪器自动报警通知系统

Publications (2)

Publication Number Publication Date
CN110334729A CN110334729A (zh) 2019-10-15
CN110334729B true CN110334729B (zh) 2023-03-24

Family

ID=68139419

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910384610.9A Active CN110334729B (zh) 2019-05-09 2019-05-09 检验仪器自动报警通知系统

Country Status (1)

Country Link
CN (1) CN110334729B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111403006B (zh) * 2020-06-03 2020-09-25 成都逸视通生物科技有限责任公司 一种微生物检测系统及装置
CN111915601B (zh) * 2020-08-12 2024-07-02 中国工商银行股份有限公司 智能终端的异常测试方法、装置以及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104793068A (zh) * 2014-01-22 2015-07-22 佛山市顺德区顺达电脑厂有限公司 基于图像采集的自动测试方法
CN106230704A (zh) * 2016-08-31 2016-12-14 赵健伟 一种远程实验交互方法及系统
JP2017192072A (ja) * 2016-04-14 2017-10-19 Line株式会社 情報処理方法、プログラム、及び端末
CN107784649A (zh) * 2017-10-20 2018-03-09 长飞光纤光缆股份有限公司 基于图像识别的芯棒测试远程报警系统及方法
CN108921212A (zh) * 2018-06-27 2018-11-30 努比亚技术有限公司 一种图像匹配方法、移动终端及计算机可读存储介质

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8495560B2 (en) * 2009-10-12 2013-07-23 International Business Machines Corporation Converting an activity diagram into code

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104793068A (zh) * 2014-01-22 2015-07-22 佛山市顺德区顺达电脑厂有限公司 基于图像采集的自动测试方法
JP2017192072A (ja) * 2016-04-14 2017-10-19 Line株式会社 情報処理方法、プログラム、及び端末
CN106230704A (zh) * 2016-08-31 2016-12-14 赵健伟 一种远程实验交互方法及系统
CN107784649A (zh) * 2017-10-20 2018-03-09 长飞光纤光缆股份有限公司 基于图像识别的芯棒测试远程报警系统及方法
CN108921212A (zh) * 2018-06-27 2018-11-30 努比亚技术有限公司 一种图像匹配方法、移动终端及计算机可读存储介质

Also Published As

Publication number Publication date
CN110334729A (zh) 2019-10-15

Similar Documents

Publication Publication Date Title
US5655029A (en) Device and method for facilitating inspection of a specimen
JPH06503415A (ja) ディスプレイに表示された像に対し検査の監査を行いながら検査する装置及び方法
US10657036B2 (en) Determining visual testing coverages
US20110245623A1 (en) Medical Diagnosis Using Community Information
JP2016511845A (ja) 生体試料の分割画面表示及びその記録を取り込むためのシステム及び方法
CN110334729B (zh) 检验仪器自动报警通知系统
CN107209111A (zh) 自动化整体载片分析的质量控制
CN107615336A (zh) 视觉系统中托盘槽类型和试管类型的基于位置的检测
JP3300560B2 (ja) データ管理装置
CN103544401A (zh) 一种远程试剂检测信息的获取方法、装置及系统
JP6355082B2 (ja) 病理診断支援装置及び病理診断支援方法
CN102789405A (zh) 主板自动化测试方法及系统
CN114817021A (zh) 一种基于眼动控制的智能座舱hmi评测方法
CN114174836A (zh) 自动分析系统以及警报处置方法
JP4668059B2 (ja) 目視検査支援装置、目視検査支援プログラムおよびそのプログラムを記録した記録媒体
JP2024502516A (ja) データ注釈方法、装置、システム、デバイスおよび記憶媒体
JP2007178129A5 (zh)
CN116735582A (zh) 精度管理信息的生成方法、精度管理信息的生成装置以及程序
US10043414B2 (en) Microscope-based learning
CN114827550A (zh) 结合rpa和ai的监控设备的巡检方法、装置及电子设备
EP0772840A1 (en) Inspection device and method
CN106970869A (zh) 压力测试的方法、装置及系统
CN112926406A (zh) 一种自动化免疫荧光检测方法、装置、设备及系统
EP4242623A1 (en) Method and apparatus for generating quality control information for a blood smear test
CN118069896B (zh) 功耗数据处理方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant