CN109074479B - 基于视线遮挡监测医学协议的依从性 - Google Patents

基于视线遮挡监测医学协议的依从性 Download PDF

Info

Publication number
CN109074479B
CN109074479B CN201780021490.5A CN201780021490A CN109074479B CN 109074479 B CN109074479 B CN 109074479B CN 201780021490 A CN201780021490 A CN 201780021490A CN 109074479 B CN109074479 B CN 109074479B
Authority
CN
China
Prior art keywords
medical
room
time
person
identifying
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780021490.5A
Other languages
English (en)
Other versions
CN109074479A (zh
Inventor
H·格赖纳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of CN109074479A publication Critical patent/CN109074479A/zh
Application granted granted Critical
Publication of CN109074479B publication Critical patent/CN109074479B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18—Status alarms
    • G08B21/24—Reminder alarms, e.g. anti-loss alarms
    • G08B21/245—Reminder of hygiene compliance policies, e.g. of washing hands
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/117—Identification of persons
    • A61B5/1171—Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • A61B5/1176—Recognition of faces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/10544—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum
    • G06K7/10712—Fixed beam scanning
    • G06K7/10722—Photodetector array or CCD scanning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • G06K7/1404—Methods for optical code recognition
    • G06K7/1408—Methods for optical code recognition the method being specifically adapted for the type of code
    • G06K7/1413—1D bar codes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • G06K7/1404—Methods for optical code recognition
    • G06K7/1408—Methods for optical code recognition the method being specifically adapted for the type of code
    • G06K7/1417—2D bar codes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18—Status alarms
    • G08B21/182—Level alarms, e.g. alarms responsive to variables exceeding a threshold
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/20—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the management or administration of healthcare resources or facilities, e.g. managing hospital staff or surgery rooms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/03—Recognition of patterns in medical or anatomical images
    • G06V2201/034—Recognition of patterns in medical or anatomical images of medical instruments

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Electromagnetism (AREA)
  • Public Health (AREA)
  • Human Computer Interaction (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Toxicology (AREA)
  • Emergency Management (AREA)
  • Epidemiology (AREA)
  • General Business, Economics & Management (AREA)
  • Biomedical Technology (AREA)
  • Medical Informatics (AREA)
  • Social Psychology (AREA)
  • Psychiatry (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Veterinary Medicine (AREA)
  • Primary Health Care (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Alarm Systems (AREA)
  • Accommodation For Nursing Or Treatment Tables (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Abstract

在各种实施例中，图像监测设备(100)可以采集(200)捕获医学室的视频数据。可以对采集的图像数据执行图像处理以执行以下任务：识别(202)医学室中的至少一个医学装置(402)；识别(204)医学室中的医学人员；检测(206)医学人员已经遮挡图像监测设备与至少一个医学装置之间的视线；并且确定(206)医学人员遮挡视线的时间量。在各种实施例中，可以将时间量与由第一医学协议所设置的一个或多个阈值进行比较。可以响应于对时间量不满足一个或多个阈值中的第一阈值的确定而触发(208)警报。

Description

基于视线遮挡监测医学协议的依从性
背景技术
在诸如医院、疗养院和诊所的医疗保健机构中提供医学服务。尽管医学人员竭尽全力防止感染扩散，但患者在医疗保健机构中入院时可能会经常被感染。这些感染中的一些，诸如艰难梭菌(C.Diff)，可能危及生命并且难以处置。感染的传播通常可归因于医疗保健提供者未能依从协议。因此，医疗保健提供者依从协议对于确保患者的健康至关重要。
在许多医学机构中，已经安装了各种类型的成像系统用于监测目的。它们可以增强安全性并提供更具响应性的护理，并且可以在对医学机构环境的干扰很小的情况下使用。在一个应用中，图像处理技术用于跟踪医疗保健提供者在室内的移动。一种方法是通过确定摄像机视场中遮挡的发生。
美国专利US 8289392公开了一种采集感兴趣对象的近景视图的方法。系统通过检测感兴趣对象对静态对象的遮挡来跟踪感兴趣移动对象。美国专利US 7731239公开了一种定位和识别彼此经历持久遮挡的多个移动对象的系统。
发明内容
本公开涉及一种方法，包括：使用图像监测设备采集捕获医学室的视频数据；对采集的视频数据进行图像处理，以确定是否依从第一医学协议，其中，图像处理包括：识别医学室中的至少一个医学装置；确定医学室的医学人员；检测医学人员已遮挡图像监测设备与至少一个医学装置之间的视线；确定医学人员遮挡视线的时间量，将该时间量与第一医学协议设置的一个或多个阈值进行比较；并且响应于确定所述时间量不满足所述一个或多个阈值中的第一阈值而触发警报。
本公开还涉及一种系统，包括：医学室协议数据库，其存储医学室协议；用于采集捕获医学室的视频数据的图像监测设备；以及警报系统。图像监测设备可以对采集的视频数据执行图像处理以：识别医学室中的至少一个医学装置(402)；识别医学室中的医学人员；检测医学人员已经遮挡图像监测设备与至少一个医学装置之间的视线；并确定医学人员遮挡视线的时间量。当医学人员在不满足存储在医学室协议数据库中的至少一个医学室协议的时间量内遮挡图像监测设备与至少一个医学装置之间的视线时，警报系统可以触发警报。
附图说明
附图被包括以提供对本公开的进一步理解，附图并入本文以说明本公开的实施例。除了描述之外，它们还用于解释本公开的原理。在图中：
图1图示了根据本公开的范例实施例的用于增强医学室协议的系统的框图。
图2图示了根据本公开的范例实施例的流程图。
图3图示了本公开的系统的范例实施例。
图4图示了根据本公开的实施例的流程图。
图5图示了根据本公开另一实施例的流程图，其中，检测到的健康护理提供者必须依从多个医学室协议。
图6图示了根据本公开的又一实施例的流程图，其中，检测到的健康护理提供者必须以特定顺序依从多个医学室协议。
具体实施方式
以下是在本公开的各种实施例中使用的术语的定义。
本文使用的术语“室”是指由墙壁、地板和天花板围绕的空间，其可以被一个或多个人或对象占据或填充。本文使用的术语“医学室”是指医学机构(例如医院)中的室。医学室通常将包括一个或多个医院装备、设备和设施，以及患者、医学人员和/或访客。本文使用的术语“医学室协议”用于统指医疗保健提供者在医学室内必须执行的规则、流程、动作、事件或任务。
本文使用的术语“医学装置”是指便于医疗保健提供者依从医学室协议的任何装备或设施。医学装置的范例包括但不限于水槽、清洗站、操作台、手术装备(例如，夹具、支架、手术刀等)、X光机、听诊器、温度测量装置、透析机、可调节医院病床、超声装备、磁共振成像(“MRI”)装备、物理治疗装备、计算机断层扫描(“CT”)装备、输液泵、除颤器、导管、注射笔等。
本文使用的“图像数据”是指表示由诸如相机的电子设备采集的一个或多个图像的有损数据(例如，JPEG)或无损数据(例如，位图)。“图像数据”可以指单幅图像和/或图像序列(例如，视频)。本文使用的“视频数据”可以指有损或无损的图像序列或“帧”。本文使用的术语“视线的遮挡”是指移动对象对图像监测设备到静态对象的视场的妨碍。
本文使用的术语“数据库”指的是以允许存储、检索、更新和操纵数据和信息并允许它们呈现为一种或多种格式(例如以表格形式)或分组为文本、数字、图像和音频数据的方式组织的数据和信息的集合。本文使用的术语“数据库”还可以指较大数据库的一部分，在这种情况下，该数据库在数据库中形成一种类型的数据库。本文使用的“数据库”还指可以驻留在本地或可以从远程位置(例如，远程网络服务器)访问的常规数据库。数据库通常驻留在包括各种类型的易失性和非易失性计算机存储器的计算机存储器中。存储数据库的存储器可以包括高速随机存取存储器或非易失性存储器，例如磁盘存储设备、光学存储设备和闪存。存储数据库的存储器还可以存储一个或多个软件，以用于处理和组织由数据库接收并存储到数据库中的数据。
图1示意性地图示了根据各种实施例的用于增强医学室协议的范例系统。如图所示，图像监测设备可以包括图像传感器102、逻辑104、通信模块106、存储器108、电源109和/或时钟110。备选地，图像监测设备可以不包括图像传感器，而是具有图像输入，该图像输入被设置为接收由包括图像传感器的外部相机(图像)设备提供的图像传感器数据(或视频数据)。而且，图像监测设备100可以连接到计算设备112、警报系统116、对象数据库130和/或人员数据库132(例如，与其进行网络通信)。
本文使用的术语“图像监测设备”是指能够捕获，记录，处理或存储对象或场景的图像、视频和其他形式的数字或电子表示的任何设备。在各种实施例中，图像传感器102可以具有各种形式。这些类型是公知的并且可以商购获得。常用的图像传感器是半导体电荷耦合器件(“CCD”)或互补金属氧化物半导体(“CMOS”)中的有源像素传感器。图像监测设备100的范例可以包括数码相机、摄像机、CCTV、网络摄像头、智能相机、智能手机、平板电脑等。
根据本公开的各个方面，逻辑104意在包括一个或多个数据处理器、图像处理器、中央处理单元或任何种类的多核处理设备。一些处理器可以执行存储在存储器108中的指令以执行本文描述的各种技术。逻辑104可以额外地或备选地包括一个或多个专用集成电路(“ASIC”)和/或一个或多个现场可编程门阵列(“FPGA”)。
通信模块106可以是促进通信的独立设备或另一设备的部件，通信例如为发送和接收命令、触发信号、通知、提示、确认、信息、消息、表格和诸如图像监测设备100、计算设备112和/或警报系统116之间的视频、文本和音频的各种类型的数据。根据各种实施例，通信模块106可以包括用于Wi-Fi、蓝牙、红外、NFC、射频、蜂窝通信、可见光通信、Li-Fi、WiMax、ZigBee、光纤和其他形式的无线通信设备的任何发射器或接收器。备选地，通信模块106可以是物理信道，例如USB线缆、以太网线缆或其他有线形式的通信。根据本公开的各种实施例，存储器108可以包括高速随机存取存储器或非易失性存储器，诸如磁盘存储设备、光学存储设备或闪存。存储器108还可以存储用于促进本文描述的系统的过程、特征和应用的软件指令。
在一些实施例中，图像监测设备100可以是独立设备，诸如“智能”摄像机，其在单个壳体中包括图1中描绘的大部分或全部部件。在其他实施例中，图像监测设备100的部件可以跨多个壳体分布。例如，在一些实施例中，摄像机(即，图像传感器102)可以安装在壁上，并且可以无线地(例如，使用蓝牙或Wi-Fi)或经由一条或多条线路连接到容纳逻辑104和图1中描绘的其他部件的另一设备(例如，一个小型计算设备)。容纳逻辑104的小型计算设备可以执行本文描述的一种或多种技术。在又一实施例中，由图像传感器102采集的图像/视频数据可以“原始”(例如，使用通信模块106)发送到计算设备112。然后，计算设备112可以使用所采集的图像/视频数据执行本文描述的各种技术。
计算设备112可以具有各种形状因子，诸如智能电话、台式机、膝上型电脑、平板电脑、机顶盒或包括各种标准计算部件的任何其他设备(大多数未在图1中描绘)，例如一个或多个处理器、一种或多种类型的存储器、至少一个计算机程序或操作系统以及电源。此外，计算设备112可以包括医学室协议数据库114。在各种实施例中，医学室协议数据库114可以存储在计算设备112的本地存储器中。备选地，医学室协议数据库114可以采取以下形式：通过云或网络(未描绘)连接到计算设备112的独立设备。
医学室协议数据库114可以存储与用于执行医学流程的一个或多个协议和/或规则相对应的数据和预先存储的参数。例如，医学室协议数据库114可以存储应该执行特定动作的适当时间量(例如，医生应该在执行一些评估之前擦洗他或她的手x分钟)、各种医学流程的预期操作顺序、医学装备的预期操作参数等。在一些实施例中，医学室协议数据库114还可以存储由那些预先存储的数据和参数与检测到的、监测的或测量的一个或多个数据和参数进行比较而得到的相应决策和动作。
在各种实施例中，警报系统116可以包括一个或多个计算设备，每个计算设备具有标准计算部件(未描绘，例如，处理器、存储器、通信模块、电源等)。形成警报系统116的计算设备可以被配置为生成和/或发送警报给各种其他计算设备，例如图像监测设备100、计算设备112或甚至由个体医学人员操作的计算设备118。由诸如医生或护士的医学人员操作的计算设备118可具有各种形状因子，例如智能手机、台式机、笔记本电脑、平板电脑、可穿戴计算设备(例如，手表、眼镜、手臂带等)、机顶盒或包括各种标准计算部件的任何其他设备(图1中未示出)。
在各种实施例中，由医学人员操作的计算设备118可以包括一个或多个输出设备，医学人员可以通过该输出设备消费由警报系统116引发的各种警报。例如，在1中，由医学人员操作的计算设备118包括扬声器120、显示器122(在一些情况下可以是触摸屏)，以及触觉反馈机构124(例如，以使计算设备118振动)。在其他实施例中，由警报系统116触发的警报可以导致来自其他设备(例如对讲系统126、在医学室的门附近固定的一个或多个灯128、计算设备112、图像监测设备100等等)的输出。
在各种实施例中，对象数据库130可以存储描绘医学设备、装备、医学用品、非医学设备、医学服装和/或在医学设置或患者室中找到的其他对象的图像数据。人员数据库132可以存储医学人员和患者信息，包括他们的照片、记录的语音数据和/或视频数据。
根据本公开的各个方面，可以由图像传感器102使用以下来检测和识别各种医学装置和人：例如，模式识别、图像识别、图像配准、对象识别、面部识别、特征提取、颜色识别、光学字符识别、运动分析(覆盖诸如自运动、跟踪和光流的任务)、姿势估计、机器视觉、机器学习、基于内容的图像检索、形状识别、人工智能、神经网络和其他图像处理方法以及其他类型的计算机视觉。
图2图示了本公开的范例方法。在框200处，安装在医学室中的图像监测设备100可以采集视频数据。备选地，图像监测设备可以被布置为从安装在医学室中的外部图像设备接收采集视频数据。这种外部图像设备可以是例如监督相机。在框202处，可以基于对所采集的视频数据的分析来识别至少一个医学装置(例如，使用基于对象数据库130中的记录的对象识别)。在框204处，在采集视频数据期间，系统可以连续循环以确定人是否已进入医学室。一旦检测到人，图像监测设备100就可以识别检测到的人(例如，使用基于人员数据库132中的记录的面部识别)。然后，在框206处，图像监测设备可以确定检测到的人是否在预定的时间段内遮挡监测设备到至少一个确定的医学装置的视线。这样的遮挡可以向图像监测设备100指示要由检测到的人执行或正在由其执行医学室协议。在框208处，如果在至少预定时间量内没有检测到监测设备100到至少一个医学装置的视线的遮挡，则可以触发警报。
图3示出了根据本公开另一实施例的流程图。图像监测设备100经由通信模块106访问计算设备112。在框300，图像监测设备100可以从医学室协议数据库114采集医学室协议数据。在一些实施例中，医学室协议数据可以包括：协议、用于协议的医学装置，以及与医疗保健提供者完成协议所需的最小时间相对应的时间段。医学室协议数据还可以包括医疗保健提供者依从该协议的可允许时间段。在一些实施例中，医学室协议数据还可以包括用于执行医学协议的时间表，例如，在排程的手术之前安排医疗保健提供者必须对医学器械消毒的清洁协议。
在框300处采集医学室协议数据之后，在框302处，图像监测设备100可以采集视频数据。视频数据可以以数字或模拟格式电子地馈送到逻辑104。逻辑104可以被配置为执行各种类型的图像处理，以便基于视频数据来检测和识别人或对象。通过在框304处对视频数据执行图像处理，在医学室协议数据中指定的医学装置可以位于医学室中。例如，在一些实施例中，图像处理可以包括对象识别以基于对象数据库130中的记录来识别医学装置。作为另一范例，在一些实施例中，图像处理可以包括识别诸如贴在医学器械表面的条形码或快速响应码的视觉标记。在备选实施例中，医学装置及其位置可预先存储在图像监测设备100的存储器108中。在另一备选实施例中，代替确定和定位医学装置，图像监测设备100可检测在其视场内的其中安排执行医学协议的预定义的区或区域。
在框306处(其可以或可以不与框302的操作同时发生)，图像监测设备100可以经由图像处理连续地检测人是否已经进入医学室。可以使用由图像传感器102采集的视频数据来识别进入医学室的人。在一些实施例中，诸如条形码、快速响应码等的识别标记物或标记可以被附加到由医疗保健提供者穿戴的服装上并且可由图像传感器102检测。例如，条形码可以提供医疗保健提供者的完整名称、部门和/或职位的信息。在其他实施例中，可以例如使用光学字符识别来检测附在医学提供者所穿戴的服饰上的文本标记(例如，名称和/或标题)。
在框308处，图像监测设备100可以确定在框306处检测到的人是否遮挡监测设备到所确定的医学装置的视线。为了避免对执行协议的检测到的人的错误检测，对监测设备到所确定的至少一个医学装置的视线的遮挡必须持续医学协议数据中定义的时间段。因此，对检测到的人在预设时间段内遮挡监测设备到所确定的医学装置的视线的检测指示检测到的人已经依从了医学室协议。
如果在框308处，检测到的人在预定时间段内遮挡监测设备到所确定的医学装置的视线，则该过程可以结束。否则，在框310处，系统可以确定检测到的人是否仍然在用于依从协议的最大时间阈值内，如医学协议数据中定义的。如果是，则该过程可以循环回到框308，在框308处，确定检测到的人是否在预定时间段内遮挡监测设备到所确定的医学装置的视线。另一方面，如果框310处的答案为否(例如，检测到的人超过用于依从协议的可允许时间段)，则在框312处，可以例如经由警报系统116触发警报。在各种实施例中，警报系统116可以向室内的医疗保健提供者提供听觉和视觉警报。额外地或备选地，警报系统116可以向设施工作人员发送关于医疗保健提供者不依从所安排的医学室协议的通知。
图4图示了本公开的系统的范例实施例。医院具有要求外科医师在进入操作室之前擦洗他们的手和手臂的协议，所需的擦洗通常至少进行至少三分钟。假设图4中所示的摄像机400被编程为在从外科医师进入室起的某个预定时间间隔(例如，20分钟)内检测外科医师对上述擦洗协议的依从性。可以通过检测摄像机400到水槽402的视线的遮挡来执行外科医师对擦洗协议的依从性的检测。摄像机400可以被配置为忽略持续少于三分钟的任何遮挡。
如图4所示，摄像机400策略性地定位在手术准备室内，其中，水槽402位于其视线内。外科医师404进入手术准备室以准备对患者的排程操作。摄像机400检测并识别外科医师404。以下段落将讨论本公开的不同可能实施例，其图示在检测到医生进入室后系统如何工作。
在第一范例中，外科医师404依从擦洗协议。在这种情况下，外科医师404在擦洗时阻挡摄像机400到水槽402的查看。摄像机400检测其到水槽402的视线的遮挡。其还检测到遮挡持续了三分钟。结果，摄像机400确定外科医师404已依从擦洗协议并终止程序。
第二个场景是外科医师404不依从擦洗协议的情况。假设外科医师404没有使用水槽402并且因此没有遮挡摄像机400到水槽402的视线。一旦外科医师404进入手术准备室并且被摄像机400检测到，可能只允许外科医师404 20分钟依从协议。在这种情况下，在外科医师404进入后20分钟，摄像机400没有检测到其到水槽402的视线的遮挡。因此，然后可以触发各种警报，例如声音警报，以警告外科医师404不依从该协议。
第三个场景是外科医师404不依从擦洗协议但是导致遮挡摄像机400到水槽402的视线的场景。假设外科医师404擦洗小于所需的擦洗时段。在这些情况下，摄像机400检测到遮挡。但由于外科医师未能依从擦洗时段，外科医师很早就离开了视线，并且因此遮挡持续时间少于所需的三分钟。在一些实施例中，摄像机400可以忽略这样的遮挡并且继续确定外科医师404是否依从洗涤协议直到允许的二十分钟时间段以供依从。
图5图示了根据本公开另一实施例的流程图。医疗保健提供者可能必须依从多个协议，所述协议中的每个涉及不同的医学装置。例如，在排程的操作之间，护士必须准备和消毒操作台和用于操作的装备。在这种情况下，跟随图5中所示的过程。
在框500处，图像监测设备100可以经由通信模块106从医学室协议数据库114采集医学室协议数据。在框502，图像监测设备100可以采集视频数据。在框504处，可以确定医学室协议数据中定义的所有医学装置并将其定位在医学室中，例如，通过对在框502处采集的视频数据执行图像处理。在框506处(并且在一些实施例中，与在框502处采集视频数据同时，图像监测设备100可以连续循环以确定是否有人已经进入医学室。一旦系统在框506处检测并识别进入医学室的人，该方法可以进行到框508。
在框508处，系统可以确定检测到的人是否在相应时间段内遮挡监测设备到所确定的医学装置之一的视线，如医学协议数据中定义的。如果框508处的答案为是，则在框510处，系统可以确定检测到的人是否已依从所有协议。例如，系统可以确定图像监测设备100到确定的医学装置中的每个的相应视线是否已经在预定时间段内被遮挡。如果框510处的答案为是，则该过程结束。如果框510处的答案为否，则系统可以循环回到框508，可以检查与额外的医学装置有关的医学协议。
回到框508，如果检测到的人没有在对应的预定时间段内遮挡监测设备到所确定的医学装置之一的视线，则该方法可以进行到框512。在框512处，系统可以确定是否检测到的人员在依从协议的可允许时段内，如医学协议数据中定义的。如果框512处的答案为是，则该方法可以循环回到步骤508。如果检测到的人超过了依从协议的可允许时间段，则在框514处，可以例如经由警报系统116触发警报。
图6示出了根据本公开的又一实施例的流程图。在该范例中，医疗保健提供者需要依从一个或多个协议。在多个协议的情况下，可以以特定顺序执行协议，其中，序列中的每个协议利用医学装置。例如，假设外科医师必须在操作前进行擦洗。随后紧接着，外科医师必须穿戴合适的装备，例如手术衣、手术帽、手术口罩和手套。在这种情况下，可以跟随图6中所示的过程包括。
在框600处，图像监测设备100可以经由通信模块106从医学室协议数据库114采集医学室协议数据。在框602处，图像监测设备100可以采集视频数据。在框604处(并且在一些情况下，与在框602处采集视频数据同时)，图像监测设备100可以连续循环以确定人是否已进入医学室。
一旦系统在框604处检测并识别进入医学室的人，则在框606处，可以识别医学室协议数据中定义的第一协议中使用的医学装置并将其定位在医学室中，例如通过对在框602处采集的视频数据执行图像处理。在框608处，系统可以确定由检测到的人引起的对监测设备到所确定的医学装置的视线的遮挡是否持续了预定时间段。如果答案为是，则在框610处，系统然后可以确定检测到的人是否已依从序列中的所有协议。如果框610处的答案为是，则该过程可以结束。如果框610处的答案为否，则系统然后可以在框612处前进到序列中的下一个协议，并且可以循环回到框606以确定和定位在序列中的下一个协议中利用的医学装置。
回到框608，如果检测到的人在预定时间段内没有遮挡监测设备到所确定的医学装置的视线，则在框614处，系统可以确定检测到的人是否仍然具有用于依从协议的允许的时间间隔内的时间，如医学协议数据中定义的。如果框614处的答案为是，则系统可以循环回到框608。如果框614处的答案为否(例如，检测到的人不能在允许的时间间隔内依从协议)，则在框616处，可以通过警报系统116触发警报。
尽管本文已经描述和图示了若干发明实施例，但是本领域普通技术人员将容易想到用于执行功能和/或获得结果和/或所描述的一个或多个优点的各种其他装置和/或结构，并且这些变化和/或修改中的每一个被认为是在本文描述的发明实施例的范围内。更一般地，本领域技术人员将容易意识到，本文描述的所有参数、尺寸、材料和配置旨在是示范性的，并且实际参数、尺寸、材料和/或配置将取决于使用了本发明的教导的一个或多个具体应用。本领域技术人员将认识到或者能够使用不超过常规的实验确定本文所述的具体发明实施例的许多等同物。因此，应该理解，前述实施例仅作为范例呈现，并且在权利要求及其等同物的范围内，本发明的实施例可以不同于具体描述和要求保护的方式实施。本公开的发明实施例涉及本文描述的每个单独的特征、系统、物品、材料、套件和/或方法。此外，如果这些特征、系统、物品、材料、套件和/或方法不相互矛盾，则两个或更多个这样的特征、系统、物品、材料、套件和/或方法的任何组合被包括在本发明的发明范围。
如本文定义和使用的所有定义应理解为优先于字典定义、通过引用并入的文献中的定义和/或定义的术语的普通含义。
除非明确相反指示，否则本说明书和权利要求书中使用的词语“一”和“一个”应理解为表示“至少一个”。
本说明书和权利要求书中使用的短语“和/或”应理解为表示如此结合的元素中的“一个或两个”，即在某些情况下结合存在并且在其他情况下分离存在的元素。用“和/或”列出的多个元素应以相同的方式解释，即，如此结合的“一个或多个”元素。除了由“和/或”子句具体识别的元素之外，可以任选地存在其他元素，无论是与具体识别的那些元素相关还是不相关。因此，作为非限制性范例，当与诸如“包括”的开放式语言结合使用时，对“A和/或B”的引用可以在一个实施例中仅指代A(任选地包括除了B以外的元素)；在另一个实施例中，仅指代B(任选地包括除A之外的元素)；在又一个实施例中，指代A和B两者(任选地包括其他元素)；等等。
如本说明书和权利要求书中所用的，“或”应理解为具有与如上所定义的“和/或”相同的含义。例如，当分隔列表中的项目时，“或”或“和/或”应被解释为包含性的，即，包含至少一个，但也包括多于一个元素的数量或列表，以及任选地额外的未列出项目。仅明确做相反指示，否则术语(例如“仅一个”或“恰好一个”，或者，当在权利要求中使用时，“由...组成”)将指的是恰好包含一个元素的数量或列表元素。一般而言，此处使用的术语“或”仅应被解释为表示排他性条款之后的唯一替代协议(即“一个或另一个但不是两个”)，例如“任一”，“其中一个”，“其中仅一个”或“恰好其中一个”。当在权利要求中使用时，“基本上由......组成”应具有其在专利法领域中使用的普通含义。
如本说明书和权利要求书中所使用的，参考一个或多个元素的列表，短语“至少一个”应理解为表示选自元素列表中的元素中的任何一个或多个中的至少一个元素，但不一定包括元素列表中具体列出的每一个元素中的至少一个元素，并且不排除元素列表中元素的任何组合。该定义还允许除了在短语“至少一个”所指的元素列表内具体识别的元素之外，任选地存在元素，无论是与具体识别的那些元素相关还是不相关。因此，作为非限制性实例，“A和B中的至少一个”(或等同地，“A或B中的至少一个”，或等同地“A和/或B中的至少一个”)可以在一个实施例中是指至少一个A，任选地包括多于一个A，不存在B(并且任选地包括除B之外的元素)；在另一个实施例中，是指至少一个B，任选地包括多于一个B，不存在A(并且任选地包括除A之外的元素)；在又一个实施例中，是指至少一个A，任选地包括多于一个A，以及至少一个B，任选地包括多于一个B(并且任选地包括其他元素)；等等。
还应该理解，除非明确相反地指示，否则在本文要求保护的包括一个以上步骤或动作的任何方法中，该方法的步骤或动作的顺序不一定限于叙述了该方法的步骤或动作的顺序。
本公开不旨在限于上述本公开的若干范例性实施例。本领域技术人员可以想到的其他变型旨在落入本公开内容中。

Claims (14)

1.一种计算机实施的方法，包括：
使用单个图像传感器(100)来采集(200)视频数据，所述视频数据捕获医学室；
对所采集的视频数据执行图像处理，以确定医学人员是否能够已经依从第一医学协议，其中，所述图像处理包括：
识别(202)所述医学室中的至少一个医学装置(402)；
识别(204)所述医学室中的医学人员；
检测(206)所述医学人员已经遮挡所述单个图像传感器与所述至少一个医学装置之间的视线；并且
确定(206)所述医学人员遮挡所述视线的时间量，
将所述时间量与预定义时间段进行比较，所述预定义时间段对应于医学人员完成所述第一医学协议所需的最小时间；并且
响应于对所述时间量小于所述预定义时间段的确定而触发(208)警报。
2.根据权利要求1所述的计算机实施的方法，还包括对所采集的视频数据执行图像处理，以确定(310、512、614)所述医学人员已经在所述室中的时间量。
3.根据权利要求2所述的计算机实施的方法，其中，触发所述警报的步骤还包括仅响应于对所述医学人员已经在所述室中的所述时间量超过所述医学人员在进入所述医学室中的情况下依从所述第一医学协议的可允许时间段的确定而触发(312、514、616)所述警报。
4.根据权利要求1所述的计算机实施的方法，其中，识别所述医学室中的所述至少一个医学装置包括对所采集的视频数据执行对象识别。
5.根据权利要求1所述的计算机实施的方法，其中，识别所述医学室中的所述至少一个医学装置包括检测被固定到所述至少一个医学装置的表面的视觉标记。
6.根据权利要求1所述的计算机实施的方法，其中，识别所述室中的所述医学人员包括检测由所述医学人员穿戴的视觉标记，其中，所述视觉标记包括条形码或快速响应码。
7.根据权利要求1所述的计算机实施的方法，其中，识别所述室中的所述医学人员包括执行光学字符识别以读取由所述医学人员穿戴的文本。
8.根据权利要求1所述的计算机实施的方法，其中，识别所述室中的所述医学人员包括执行面部识别以识别所述医学人员。
9.一种用于加强医学室协议的系统，包括：
医学室协议数据库(114)，其存储医学室协议；
图像监测设备(100)，其被布置为接收由单个图像传感器采集(200)的捕获医学室的视频数据，并且对所采集的视频数据执行图像处理以：
识别(202)所述医学室中的至少一个医学装置(402)；
识别(204)所述医学室中的医学人员；
检测(206)所述医学人员已经遮挡所述图像监测设备与所述至少一个医学装置之间的视线；并且
确定(206)所述医学人员遮挡所述视线的时间量，以及
警报系统(116)，其用于当医学人员在小于预定义时间段的时间量内遮挡所述图像监测设备与所述至少一个医学装置之间的视线时触发警报，所述预定义时间段对应于医学人员完成第一医学协议所需的最小时间。
10.根据权利要求9所述的系统，其中，所述图像监测设备还被配置为对接收到的视频数据执行成像处理，以确定所述医学人员已经在所述室中的时间量。
11.根据权利要求10所述的系统，其中，所述警报系统还响应于对所述医学人员已经在所述室中的所述时间量超过所述医学人员在进入所述医学室中的情况下依从所述第一医学协议的可允许时间段的确定而触发所述警报。
12.根据权利要求10所述的系统，其中，识别所述医学室中的所述至少一个医学装置包括对所采集的视频数据执行对象识别。
13.根据权利要求10所述的系统，其中，识别所述医学室中的所述至少一个医学装置包括检测被固定到所述至少一个医学装置的表面的视觉标记。
14.根据权利要求10所述的系统，其中，识别所述室中的所述医学人员包括检测由所述医学人员穿戴的视觉标记，其中，所述视觉标记包括条形码或快速响应码。
CN201780021490.5A 2016-04-01 2017-03-28 基于视线遮挡监测医学协议的依从性 Active CN109074479B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP16163547.9 2016-04-01
EP16163547 2016-04-01
PCT/EP2017/057242 WO2017167708A1 (en) 2016-04-01 2017-03-28 Monitoring compliance with medical protocols based on occlusion of line of sight

Publications (2)

Publication Number Publication Date
CN109074479A CN109074479A (zh) 2018-12-21
CN109074479B true CN109074479B (zh) 2023-09-08

Family

ID=55699446

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780021490.5A Active CN109074479B (zh) 2016-04-01 2017-03-28 基于视线遮挡监测医学协议的依从性

Country Status (5)

Country Link
US (1) US10943124B2 (zh)
EP (1) EP3437014B1 (zh)
JP (1) JP7018400B2 (zh)
CN (1) CN109074479B (zh)
WO (1) WO2017167708A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019112844A1 (en) * 2017-12-05 2019-06-13 Zoll Medical Corporation Medical equipment management
WO2019177097A1 (ja) * 2018-03-15 2019-09-19 テルモ株式会社 医療システム
WO2021007588A1 (en) 2019-07-08 2021-01-14 Zoll Medical Corporation Management of medical equipment and responders
JP6889228B2 (ja) * 2019-11-14 2021-06-18 株式会社 日立産業制御ソリューションズ 手指衛生管理装置、手指衛生管理方法及び手指衛生管理プログラム
CN111772990A (zh) * 2020-06-01 2020-10-16 王艳苓 基于人员辨别的负压加氧操控平台及方法
US11769330B2 (en) 2020-12-17 2023-09-26 Motorola Solutions, Inc. System and method for video analytics for thermography procedure compliance

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102037468A (zh) * 2008-05-21 2011-04-27 皇家飞利浦电子股份有限公司 具有过程工作流程记录的医学工作流程系统及方法
WO2014062755A1 (en) * 2012-10-16 2014-04-24 Johnson Raymond C Hand washing monitoring system for public restrooms
WO2014074585A1 (en) * 2012-11-06 2014-05-15 Johnson Raymond C Virtual hand-washing coach
EP2892006A2 (en) * 2014-01-03 2015-07-08 Fluke Corporation A method and system for monitoring hand washing

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7796154B2 (en) 2005-03-07 2010-09-14 International Business Machines Corporation Automatic multiscale image acquisition from a steerable camera
US7893842B2 (en) * 2007-10-05 2011-02-22 Richard Deutsch Systems and methods for monitoring health care workers and patients
US20100328443A1 (en) * 2009-06-26 2010-12-30 Lynam Donald S System for monitoring patient safety suited for determining compliance with hand hygiene guidelines
US8731239B2 (en) 2009-12-09 2014-05-20 Disney Enterprises, Inc. Systems and methods for tracking objects under occlusion
US20130300572A1 (en) * 2012-05-14 2013-11-14 Carl Nee-Kofi MOULD-MILLMAN System and method for hand cleansing

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102037468A (zh) * 2008-05-21 2011-04-27 皇家飞利浦电子股份有限公司 具有过程工作流程记录的医学工作流程系统及方法
WO2014062755A1 (en) * 2012-10-16 2014-04-24 Johnson Raymond C Hand washing monitoring system for public restrooms
WO2014074585A1 (en) * 2012-11-06 2014-05-15 Johnson Raymond C Virtual hand-washing coach
EP2892006A2 (en) * 2014-01-03 2015-07-08 Fluke Corporation A method and system for monitoring hand washing

Also Published As

Publication number Publication date
EP3437014B1 (en) 2021-05-12
CN109074479A (zh) 2018-12-21
US10943124B2 (en) 2021-03-09
JP2019516173A (ja) 2019-06-13
EP3437014A1 (en) 2019-02-06
US20200311432A1 (en) 2020-10-01
JP7018400B2 (ja) 2022-02-10
WO2017167708A1 (en) 2017-10-05

Similar Documents

Publication Publication Date Title
CN109074479B (zh) 基于视线遮挡监测医学协议的依从性
US11544953B2 (en) Methods and systems for identifying the crossing of a virtual barrier
JP6839205B2 (ja) 自動化された手順決定および判断生成
US9934358B2 (en) System and method for protocol adherence
US11355232B2 (en) Automated personnel identification and location, and automated procedure monitoring
US20200176125A1 (en) Predicting, preventing, and controlling infection transmission within a healthcare facility using a real-time locating system and next generation sequencing
JP6398460B2 (ja) 制御方法、制御装置および制御プログラム
US11270602B2 (en) Methods and systems for improving hand hygiene
Wang et al. Electronic monitoring systems for hand hygiene: systematic review of technology
WO2012166812A2 (en) System and method for monitoring hospital workflow compliance with a hand hygiene network
US20160180694A1 (en) Infectious disease warning system with security and accountability features
JPWO2019216045A1 (ja) システム、およびシステムの制御方法
JP6827734B2 (ja) 検知システム、検知方法及びプログラム
US20140146154A1 (en) Patient monitoring system with image capture functionality
O'Brien et al. Design and implementation of an embedded system for monitoring at-home solitary Alzheimer's patients
WO2020003955A1 (ja) コンピューターで実行されるプログラム、情報処理装置、および、コンピューターで実行される方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant