WO2023003230A1 - 보호 장비 착용에 대한 피드백 정보를 제공하는 방법, 이를 적용한 장치 및 기록 매체 - Google Patents

보호 장비 착용에 대한 피드백 정보를 제공하는 방법, 이를 적용한 장치 및 기록 매체 Download PDF

Info

Publication number
WO2023003230A1
WO2023003230A1 PCT/KR2022/009787 KR2022009787W WO2023003230A1 WO 2023003230 A1 WO2023003230 A1 WO 2023003230A1 KR 2022009787 W KR2022009787 W KR 2022009787W WO 2023003230 A1 WO2023003230 A1 WO 2023003230A1
Authority
WO
WIPO (PCT)
Prior art keywords
subject
feedback information
protective equipment
area
wear
Prior art date
Application number
PCT/KR2022/009787
Other languages
English (en)
French (fr)
Inventor
양승호
이정은
Original Assignee
가톨릭대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 가톨릭대학교 산학협력단 filed Critical 가톨릭대학교 산학협력단
Publication of WO2023003230A1 publication Critical patent/WO2023003230A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/20—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the management or administration of healthcare resources or facilities, e.g. managing hospital staff or surgery rooms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B3/00—Audible signalling systems; Audible personal calling systems
    • G08B3/10—Audible signalling systems; Audible personal calling systems using electric transmission; using electromagnetic transmission
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/40—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the management of medical equipment or devices, e.g. scheduling maintenance or upgrades
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/80—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for detecting, monitoring or modelling epidemics or pandemics, e.g. flu
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H70/00—ICT specially adapted for the handling or processing of medical references
    • G16H70/20—ICT specially adapted for the handling or processing of medical references relating to practices or guidelines
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H80/00—ICT specially adapted for facilitating communication between medical practitioners or patients, e.g. for collaborative diagnosis, therapy or health monitoring
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Definitions

  • the present invention relates to a method for providing feedback information for encouraging medical staff to wear a plurality of protective equipment appropriately to a standard in a hospital, and an apparatus and recording medium using the same.
  • COVID-19 a viral infection
  • Wearing protective equipment by medical staff in preparation for viral infections occurring in hospitals is recognized as a minimal countermeasure to promote the stability of the medical system and reduce economic damage to hospitals.
  • Protective equipment worn by medical staff may include masks, goggles, gloves, protective clothing, and the like.
  • Epidemiological investigators can monitor the wearing of protective equipment by medical staff, specifically, by using CCTVs installed throughout the hospital, they also check whether a plurality of protective equipment is worn according to the standard. If epidemiological investigators do not properly wear multiple protective equipment, they may decide that the medical staff is unclassified or subject to active monitoring, or in the worst case, order self-isolation. Even if the medical staff undergoes self-isolation measures for only a few days, difficulties in operating the hospital medical system are bound to follow.
  • One problem to be solved by the present invention for solving the problems as described above is to provide a method for performing active monitoring by the hospital itself to see if medical staff are properly wearing protective equipment.
  • Another object of the present invention is to provide indirect or direct feedback information that guides a medical staff who wears protective equipment unsuitably to a predetermined standard or does not wear protective equipment at all to properly wear protective equipment.
  • Method for providing feedback information on the wearing of a plurality of protective equipment for solving the above problems is to use one or more imaging devices for photographing the inside of a hospital to target subjects who are obliged to wear a plurality of protective equipment. Obtaining a photographed image; determining whether the target person wears the plurality of protective equipment appropriately to a predetermined standard in the captured image based on a pre-learned analysis engine; It may include generating feedback information for guiding the subject to appropriately wear the plurality of protective equipment, and providing the generated feedback information to a wired or wirelessly connected speaker or electronic device.
  • the analysis engine specifies a person in a photographed image, a first network for specifying an upper neck region and a lower neck region of the specified person, and the plurality of protections for the upper neck region specified through the first network.
  • a second network for determining whether masks, goggles, and head protection caps are suitable for wearing among equipment, and whether protective clothing and protective gloves are suitable for wearing among the plurality of protective equipment for the lower neck area specified through the first network. It may include a third network that determines and a fourth network that determines whether the target person wears the plurality of protective devices appropriately for a predetermined criterion based on information output from the second network and the third network.
  • Acquiring the image of the subject includes giving priority to an emergency room area or an area at risk of outbreak of an infectious disease, and obtaining an image of the subject in real time in the prioritized area, or capturing the subject in real time. Acquiring captured images in the prioritized area at a more frequent interval than non-prioritized areas.
  • the infectious disease outbreak risk area may include at least one of an area included in the traffic route of patients with an infectious disease, an area where patients who have not been tested for an infectious disease are located, and an area with a large floating population.
  • the method of providing feedback information may further include tracking and photographing the moving subject by using one or more imaging devices.
  • the method for providing feedback information may further include providing direct feedback information encouraging wearing of the plurality of protective equipment in conformity with the criteria.
  • the method for providing feedback information may include, even after the indirect feedback information is provided, if the moving target does not properly wear at least some of the plurality of protective equipment, the step of identifying and recognizing the target, and the specifically recognized target.
  • the method may further include providing direct feedback information encouraging the electronic device to be worn in accordance with the criteria.
  • the method for providing feedback information further includes moving a mobile robot outputting a warning notification to an area where the subject is located when the moving subject does not properly wear the plurality of protective equipment even after the direct feedback information is provided.
  • An apparatus for providing feedback information on the wearing of a plurality of protective equipment according to the present invention for solving the above problems is a communication unit, using one or more imaging devices for photographing the inside of a hospital, which requires mandatory wearing of a plurality of protective equipment.
  • a subject-captured image acquisition unit acquiring an image captured by the subject, a memory for storing a pre-learned analysis engine, and the analysis engine, the subject is protected from the plurality of protections in the captured image acquired through the subject-captured image acquisition unit. It may include at least one processor that determines whether the equipment is properly worn to a predetermined criterion.
  • the processor When the processor is determined to be inappropriately worn, the processor generates feedback information for guiding the target person to appropriately wear the plurality of protective equipment, and provides the generated feedback information to a wired/wireless connected speaker or electronic device through the communication unit.
  • the processor can be configured to
  • the analysis engine specifies a person in a photographed image, a first network for specifying an upper neck region and a lower neck region of the specified person, and the plurality of protections for the upper neck region specified through the first network.
  • a second network for determining whether masks, goggles, and head protection caps are suitable for wearing among equipment, and whether protective clothing and protective gloves are suitable for wearing among the plurality of protective equipment for the lower neck area specified through the first network.
  • the processor prioritizes an emergency room area or an infectious disease risk area, acquires an image of the subject in real time in the area to which the priority is assigned, or obtains an image of the subject in real time in the priority area. It may be configured to control the subject-captured image acquisition unit to obtain images in the prioritized areas at a more frequent interval than non-assigned areas.
  • the infectious disease outbreak risk area may include at least one of an area included in the traffic route of patients with an infectious disease, an area where patients who have not been tested for an infectious disease are located, and an area with a large floating population.
  • the processor may be configured to provide indirect feedback information encouraging the subject to appropriately wear a plurality of protective equipment through at least some speakers disposed in the hospital or one or more speakers located within a predetermined range of the subject. .
  • the processor may be configured to control the subject-captured image acquisition unit to track and capture the moving subject using one or more imaging devices in a hospital connected by wire or wirelessly.
  • the processor based on the tracked image, through a speaker adjacent to the moving subject, It may be configured to provide direct feedback information encouraging wearing of the plurality of protective equipment in conformity with the criteria.
  • the processor identifies and recognizes the target, and an electronic device owned by the specific and recognized target.
  • the communication unit may be controlled to provide direct feedback information that encourages wearing of protective equipment in accordance with the criteria.
  • the processor may control the communication unit so that a mobile robot outputting a warning notification moves to an area where the subject is located. .
  • a computer readable recording medium recording a program for execution on a computer according to an embodiment of the present invention may be provided.
  • the processor When the program is executed by the processor, the processor obtains an image of a subject who is obliged to wear a plurality of protective equipment using one or more image capturing devices that capture the interior of the hospital, the pre-learned Based on the analysis engine, an operation of determining whether the subject wears the plurality of protective equipment suitably according to a predetermined criterion in the captured image, and if it is determined that the subject wears the plurality of protective equipment suitably, the subject wears the plurality of protective equipment suitably It may include an executable command for performing an operation of generating feedback information guiding to do so and an operation of providing the generated feedback information to a speaker or electronic device connected wired or wirelessly.
  • FIG. 1 is a diagram for briefly and conceptually explaining an environment to which an apparatus for providing feedback information according to an embodiment of the present invention is applied.
  • 2(a) and 2(b) are diagrams for explaining an apparatus for providing feedback information for determining whether or not a target person who is obligated to wear a plurality of protective equipments is properly worn according to an embodiment of the present invention.
  • FIG. 3 is a block diagram showing the configuration of an apparatus for providing feedback information according to an embodiment of the present invention.
  • FIG. 4 is a diagram illustrating an analysis engine for determining whether a subject who is obligated to wear a plurality of protective equipment appropriately wears a plurality of protective equipment according to an embodiment of the present invention.
  • 5 to 7 are diagrams for explaining an example in which the device for providing feedback information according to an embodiment of the present invention determines that a plurality of protective equipment is not properly worn according to a predetermined criterion.
  • FIG. 8 is a sequence diagram illustrating a method of providing feedback information on wearing a plurality of protective equipment according to an embodiment of the present invention.
  • FIG. 1 is a diagram for briefly and conceptually explaining an environment to which an apparatus 100 for providing feedback information according to an embodiment of the present invention is applied.
  • One or more video recording devices may be disposed inside the hospital, and may be implemented as a Closed Circuit Television (CCTV), but the embodiment is not limited thereto.
  • one or more video recording devices may include an image sensor or a vision recognition module.
  • the feedback information providing apparatus 100 may be implemented as a server, a cloud system, or a device, but the embodiment is not limited thereto.
  • the feedback information providing device 100 may be disposed within the hospital, but may also be disposed outside the hospital.
  • the device for providing feedback information 100 may obtain a photographed image of the inside or outside of a hospital from one or more video recording devices (CCTV 1 to CCTV N) (CC). Among them, a plurality of protective equipment is obligatory. An image of a subject to be photographed may be acquired.
  • CCTV 1 to CCTV N video recording devices
  • the feedback information providing device 100 may include a module capable of recognizing and specifying a person, a module capable of recognizing a plurality of protection equipment, and the like, and may include various algorithms based on image processing. .
  • the plurality of protective equipment may include masks, goggles, head protection caps, protective clothing, protective gloves, and protective foot covers, but embodiments are not limited thereto.
  • the feedback information providing device 100 may determine whether or not to wear protective equipment according to standards for wearing protective equipment compulsory or recommended by the government, local governments, disease control agencies, medical organizations, and the like.
  • the wearing standard may be different for each institution/organization, and the application range may be different depending on the time/place.
  • the feedback information providing device 100 may generate feedback information for encouraging a subject who does not meet the wearing standard to properly wear a plurality of protective equipment, and provide the generated feedback information in an indirect or direct manner.
  • FIGS. 2(a) and 2(b) show the feedback information providing device 100 for determining whether a target person (Doct 1) who is obligated to wear a plurality of protective equipment according to an embodiment of the present invention is appropriately worn.
  • Doct 1 a target person who is obligated to wear a plurality of protective equipment according to an embodiment of the present invention is appropriately worn.
  • the feedback information providing device 100 uses one or more video recording devices (CCTV 1 to CCTV N) (CC) to record the inside of the hospital, and images of a subject (Doct 1) who is obliged to wear a plurality of protective equipment can be obtained.
  • CCTV 1 to CCTV N CCTV N
  • the feedback information providing device 100 may specify the subject (Doct 1) and recognize a plurality of protective equipment worn by the subject (Doct 1).
  • the plurality of protective equipment may include a head protection cap 10, a mask 20, goggles 30a and 30b, protective clothing 40, protective gloves 50, and the like.
  • the feedback information providing device 100 determines whether the head protection cap 10 covers all of the hair, whether the mask 20 has a predetermined grade (eg, KF 94) or higher, and whether the mask 20 covers both the nose and mouth. whether the type 1 goggles 30a properly protect the eyes, whether the type 2 goggles 30b properly protect the eyes and face, whether the protective clothing 40 protects the upper torso and lower torso of the subject (Doct 1) It can be determined whether some (or all) are properly protected, whether the protective glove 50 is properly worn, whether the skin between the protective glove 50 and the protective clothing 40 is not exposed, and the like.
  • a predetermined grade eg, KF 94
  • the feedback information providing device 100 may determine whether the feet of the subject (Doct 1) are properly protected by the foot protection wrap or whether the skin is exposed under the protective clothing 40 .
  • the feedback information providing device 100 only uses four kinds of protective equipment including the mask 20, goggles 30a and 30b, protective clothing 40 and protective gloves 50 according to a predetermined standard. You can decide if you are wearing it properly.
  • FIG. 3 is a block diagram showing the configuration of an apparatus 100 for providing feedback information according to an embodiment of the present invention.
  • the feedback information providing apparatus 100 may include a communication unit 110 , a display 120 , a subject captured image obtaining unit 130 , a memory 140 and one or more processors 190 .
  • the communication unit 110 may include a wired or wireless module, and communicate with one or more image capturing devices (CC) for capturing the inside of the hospital to receive images captured within the hospital.
  • the communication unit 110 may additionally include a module for input.
  • the communication unit 110 may communicate with an external electronic device.
  • a wired/wireless communication module, a mobile communication module, a short-distance communication module, and the like may be included.
  • the display 120 may display various data on the screen under the control of the processor 190, and may be implemented as a backlight-based display or a display equipped with a self-light emitting device.
  • the subject photographed image acquisition unit 130 through the communication unit 110 or by itself, from the images captured in the hospital collected using one or more imaging devices (CC) for photographing the inside of the hospital, a plurality of protective equipment is mandatory.
  • An image of a subject to be worn may be obtained.
  • the subject photographed image acquisition unit 130 may use a module or algorithm for recognizing a specific person under the control of the processor 190 .
  • the subject who is obliged to wear a plurality of protective equipment may be a medical staff of a medical institution, but may include patients and patient guardians staying in an emergency room area or an infectious disease risk area even if they are not medical staff, but the embodiment is not limited thereto. not.
  • the memory 140 is a module that collectively refers to various types of storage, and the memory 140 may store information required to perform calculations using artificial intelligence, machine learning, and artificial neural networks.
  • the memory 140 may store various learning models.
  • the learning models may be used to infer result values for new input data other than learning data, and the inferred values may be used as a basis for decision to perform a certain operation. can be used
  • the learning models may be trained based on label information, and various backpropagation algorithms may be applied to obtain a target value for a loss function to increase learning accuracy.
  • the memory 140 may store a pre-learned analysis engine (AE).
  • the analysis engine AE may be a learning model for determining whether a subject who is obligated to wear a plurality of protective equipment in an input image properly wears a plurality of protective equipment according to a predetermined criterion.
  • the processor 190 is a module that controls the components of the feedback information providing device 100, and the processor 190 is hardware, having a physically structured circuit to perform functions expressed by codes or instructions included in a program. It may refer to a built-in data processing device. As an example of such a data processing device built into hardware, a microprocessor, a central processing unit (CPU), a processor core, a multiprocessor, an application-specific integrated (ASIC) circuit), field programmable gate array (FPGA), etc., but the scope of the present invention is not limited thereto.
  • the processor 190 may separately include a running processor for performing artificial intelligence calculations or may include a running processor itself.
  • AE analysis engine
  • the processor 190 may determine whether the subject wears a plurality of protective equipment in conformity with a predetermined criterion based on the pre-learned analysis engine AE from the captured image obtained through the subject-captured image acquisition unit 130 .
  • the processor 190 may generate feedback information for guiding the subject to appropriately wear a plurality of protective equipment, and transmit the generated feedback information to a wired or wirelessly connected speaker or It can be provided electronically.
  • the speaker may include one or more speakers disposed in the hospital
  • the electronic device may be a terminal owned by the subject or an electronic device used by family members or acquaintances associated with the subject.
  • the electronic device may be a smartphone, but the embodiment is not limited thereto.
  • the analysis engine AE may receive a photographed image of a subject, output information on whether a plurality of protective equipment is worn in conformity with a predetermined criterion, and may include a plurality of networks 1N to 4N.
  • the first network 1N may specify a person in the photographed image, and may specify an upper neck area and a lower neck area of the specified person. That is, the first network 1N may be specified by dividing the upper region and the lower region around the subject's neck.
  • the second network 2N may determine whether wearing of a mask, goggles, and a head protection cap among the plurality of protective equipment is suitable for the upper neck area specified through the first network 1N.
  • the third network 3N may determine whether to wear protective clothing and protective gloves among a plurality of protective equipment for the lower neck area specified through the first network 1N.
  • the fourth network 4N may determine whether or not the subject wears the plurality of protective devices appropriately to a predetermined standard, based on information output from the second network and the third network.
  • All of the first to fourth networks 1N to 4N may be implemented with a neural network-based algorithm, and only some (the second network and the third network) may be implemented with a neural network-based algorithm.
  • the first to third networks 1N to 3N may be implemented based on a Convolution Neural Network (CNN) or a Deep Neural Network (DNN), and the fourth network 4N is a fully connected network. Including, based on soft max, information on whether or not the subject's protective equipment is properly worn can be output.
  • a plurality of networks (1N to 4N) uses a label containing only cases in which a plurality of protective equipment is appropriately worn, a label including only cases in which a plurality of protective equipment is improperly worn, etc. Accuracy may be increased, and for this purpose, a backpropagation algorithm may be used, and learning may be repeated until the value of the loss function reaches a predetermined target value.
  • learning may be performed with a plurality of routes.
  • the first route sequentially performs the first network 1N, the second network 2N, and the fourth network 4N, Based on the label information, it is a route for determining whether to properly wear a plurality of protective equipment located on the upper region of the subject's neck, and the second route is a first network (1N), a third network (3N), and a fourth network (4N). ) may be sequentially performed, and based on the label information, it may be a route for determining whether to properly wear a plurality of protective equipment located in the lower neck region of the subject.
  • the first route learning and the second route learning may be alternately and repeatedly learned until the value of the loss function reaches a predetermined target value.
  • the processor 190 may obtain an image of a person who is obliged to wear a plurality of protective equipment using one or more imaging devices (CC) that take a picture of the inside of the hospital. You can give priority.
  • CC imaging devices
  • the processor 190 may give priority to an emergency room area or an infectious disease risk area.
  • the processor 190 may acquire an image of the subject in real time in the region to which the priority is assigned.
  • the processor 190 may control the subject-captured image acquisition unit 130 to acquire images of the target person in areas to which priorities are assigned more frequently than areas to which no priorities are assigned.
  • the infectious disease outbreak risk area may include at least one of an area included in the movement of patients with an infectious disease, an area where patients who have not been tested for an infectious disease are located, and an area with a large floating population, but the embodiment is not limited thereto.
  • the processor 190 may provide indirect feedback information encouraging the subject to appropriately wear a plurality of protective equipment through at least some speakers disposed in the hospital or one or more speakers located within a predetermined range of the subject.
  • the indirect feedback may be a message such as “Let's wear protective equipment” to part or all of the hospital without direct feedback to subjects who do not properly wear protective equipment, but the embodiment is not limited thereto.
  • direct feedback information that is more powerful than indirect feedback may be provided, which will be described below.
  • the processor 190 may control the subject-photographed image acquisition unit 130 to track and capture a moving subject using one or more image capture devices (CCs) in a hospital connected by wire or wirelessly.
  • CCs image capture devices
  • the processor 190 conforms to the criterion through a speaker adjacent to the moving subject based on the tracked image. It can provide direct feedback information that encourages to wear multiple protective equipment appropriately.
  • the direct feedback information may include information capable of specifying a subject who does not properly wear at least some of the plurality of protective equipment.
  • an example of direct feedback information may be "Doctor entering the emergency room, please wear goggles", but the embodiment is not limited thereto.
  • the processor 190 may identify and recognize the target when the moving target does not properly wear at least some of a plurality of protective equipment.
  • the processor 190 may specify a target person based on medical staff information, gender information, appearance information, etc. that may move to the corresponding place at the corresponding time in order to specify the target person, and a separate neural network-based model can be applied.
  • the processor 190 may control the communication unit to provide direct feedback information that encourages the specially recognized subject to wear protective equipment suitable for the above criteria to an electronic device possessed by the subject.
  • the processor 190 even after the direct feedback information is provided, if the moving subject does not properly wear a plurality of protective equipment, the processor 190, the communication unit 110, so that the mobile robot outputting a warning notification moves to the area where the subject is located. You can control it.
  • the mobile robot may approach the subject and provide a warning notification saying “You must wear protective equipment”, but the embodiment is not limited thereto.
  • 5 to 7 are diagrams for explaining a case where the feedback information providing apparatus 100 according to an embodiment of the present invention determines that a plurality of protective equipment is not properly worn according to a predetermined criterion.
  • the processor 190 recognizes an area 510 and an area 520 where the medical staff inappropriately wears protective gloves and protective clothing and an area 520 in which the medical staff inappropriately wears protective clothing in the captured image CCD 1, It can be determined that it is worn inappropriately according to a predetermined criterion.
  • the processor 190 recognizes an area 610 where the medical staff improperly wears the head protection cap 610 and an area 620 where the goggles are not worn, in the captured image CCD 2 , and determines It can be determined that it was worn inappropriately to the standard.
  • the processor 190 may also recognize a head protection cap included in the protective clothing.
  • the processor 190 may recognize an area 710 where the medical staff does not wear protective gloves in the photographed image CCD 3 and determine that the protective gloves are not properly worn according to a predetermined standard.
  • FIG. 8 is a sequence diagram illustrating a method of providing feedback information on wearing a plurality of protective equipment according to an embodiment of the present invention.
  • the apparatus 100 for providing feedback information obtains an image of a subject who is obligated to wear a plurality of protective equipment using one or more imaging devices that take pictures of the interior of the hospital (S710).
  • the feedback information providing device 100 determines whether the subject wears a plurality of protective equipment appropriately to a predetermined criterion in the photographed image (S720).
  • the analysis engine AE has been described above, so a description thereof will be omitted.
  • the device for providing feedback information 100 When it is determined that the device for providing feedback information 100 is inappropriately worn, it generates feedback information for guiding the subject to appropriately wear a plurality of protective equipment (S730).
  • the feedback information providing device 100 provides the generated feedback information to a wired or wirelessly connected speaker or electronic device (S740).
  • Acquiring an image of the subject is the step of giving priority to an emergency room area or an area at risk of outbreak of an infectious disease, and obtaining an image of the subject in real time in the prioritized area or photographing the subject Acquiring one image in a prioritized area at a more frequent period than non-prioritized areas may include acquiring an image.
  • the infectious disease outbreak risk area may include at least one of an area included in the movement of patients with an infectious disease, an area where patients who have not been tested for an infectious disease are located, and an area with a large floating population.
  • indirect feedback information encouraging the subject to appropriately wear a plurality of protective equipment is provided through at least some speakers placed in the hospital or one or more speakers located within a predetermined range of the subject. It may include providing steps.
  • the method of providing feedback information may further include tracking and photographing the moving subject by using one or more imaging devices.
  • the method for providing feedback information even after indirect feedback information is provided, when the moving subject does not properly wear at least some of the plurality of protective equipment, through a speaker adjacent to the moving subject based on the captured image. , providing direct feedback information encouraging wearing a plurality of protective equipment in conformity with the standard.
  • the method for providing feedback information includes, even after the indirect feedback information is provided, when the moving target does not properly wear at least some of a plurality of protective equipment, the step of identifying and recognizing the target and the electronic device possessed by the specifically recognized target.
  • the method may further include providing direct feedback information encouraging the wearer to wear protective equipment appropriately to the standard.
  • the method for providing feedback information may further include moving a mobile robot outputting a warning notification to an area where the subject is located when the moving subject does not properly wear a plurality of protective equipment even after the direct feedback information is provided. .
  • the method according to an embodiment of the present invention described above may be implemented as a program (or application) to be executed in combination with a computer, which is hardware, and stored in a medium.
  • the computer may be the feedback information providing device 100 described above.
  • the above-described program is C, C++, Python, JAVA, C, C++, Python, JAVA, which can be read by a processor (CPU) of the computer through a device interface of the computer so that the computer reads the program and executes the methods implemented as a program.
  • It may include a code coded in a computer language such as machine language.
  • These codes may include functional codes related to functions defining necessary functions for executing the methods, and include control codes related to execution procedures necessary for the processor of the computer to execute the functions according to a predetermined procedure. can do.
  • these codes may further include memory reference related codes for which location (address address) of the computer's internal or external memory should be referenced for additional information or media required for the computer's processor to execute the functions. there is.
  • the code uses the computer's communication module to determine how to communicate with any other remote computer or server. It may further include communication-related codes for whether to communicate, what kind of information or media to transmit/receive during communication, and the like.
  • Steps of a method or algorithm described in connection with an embodiment of the present invention may be implemented directly in hardware, implemented in a software module executed by hardware, or implemented by a combination thereof.
  • a software module may include random access memory (RAM), read only memory (ROM), erasable programmable ROM (EPROM), electrically erasable programmable ROM (EEPROM), flash memory, hard disk, removable disk, CD-ROM, or It may reside in any form of computer readable recording medium well known in the art to which the present invention pertains.

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Biomedical Technology (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Evolutionary Computation (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Artificial Intelligence (AREA)
  • Databases & Information Systems (AREA)
  • Pathology (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Computational Linguistics (AREA)
  • Signal Processing (AREA)
  • Bioethics (AREA)
  • Mathematical Physics (AREA)
  • General Engineering & Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Strategic Management (AREA)
  • Human Computer Interaction (AREA)
  • Electromagnetism (AREA)
  • Marketing (AREA)
  • Human Resources & Organizations (AREA)
  • Economics (AREA)
  • Alarm Systems (AREA)

Abstract

복수의 보호 장비 착용에 대한 피드백 정보를 제공하는 장치는 통신부, 병원 내부를 촬영하는 하나 이상의 영상 촬영 기기를 이용하여 복수의 보호 장비를 의무적으로 착용해야 하는 대상자를 촬영한 영상을 획득하는 대상자 촬영 영상 획득부, 미리 학습된 분석 엔진을 저장하는 메모리 및 분석 엔진에 기초하여, 대상자 촬영 영상 획득부를 통해 획득된 촬영 영상에서 대상자가 복수의 보호 장비를 소정 기준에 적합하게 착용하였는지 결정하는 적어도 하나의 프로세서를 포함할 수 있다. 이에 따라, 의료 공백이 사전에 차단될 수 있다.

Description

보호 장비 착용에 대한 피드백 정보를 제공하는 방법, 이를 적용한 장치 및 기록 매체
본 발명은 병원 내에서 의료진이 복수의 보호 장비를 기준에 적합하게 착용하도록 독려하는 피드백 정보 제공 방법, 이를 이용한 장치 및 기록 매체에 관한 것이다.
이하에서 기술되는 내용은 본 발명의 실시예와 관련되는 배경 정보를 제공할 목적으로 기재된 것일 뿐이고, 기술되는 내용들이 당연하게 종래기술을 구성하는 것은 아니다.
최근 세계적으로 COVID-19라 불리는 바이러스성 감염으로 막대한 고통을 받고 있다. 바이러스성 감염이 발생되면, 병원 또는 국가가 지정한 장소에 격리되어 치료를 받아야 한다. 이에, 바이러스성 감염을 최전방에서 싸우는 병원 내에서 바이러스성 감염에 대한 대비책이 필요하다.
병원 내에서 발생하는 바이러스성 감염에 대비하여 시행하고 있는 의료진들의 보호 장비 착용은 의료 체계의 안정성을 도모하고 병원의 경제적 피해를 줄이기 위한 최소한의 대처 방안으로 인정되고 있다.
다만, 병원을 내원한 환자 또는 방문객이 추후에 바이러스에 감염되는 사례가 발생되고 있으므로, 의료진의 보호 장비 착용에 대한 모니터링은 아주 중요하다. 의료진이 착용하는 보호 장비는 마스크, 고글, 장갑, 보호복 등을 포함할 수 있다.
역학 조사관은 의료진의 보호 장비 착용을 모니터링할 수 있는데, 구체적으로, 병원 곳곳에 설치된 CCTV 를 이용하여, 복수의 보호 장비를 기준에 맞게 착용하였는지 살펴보기도 한다. 역학조사관은 복수의 보호 장비를 제대로 착용하지 않는 경우, 해당 의료진에 대해, 미분류 또는 능동 감시 대상자로 결정하거나, 최악의 경우, 자가 격리 조치를 명할 때도 있다. 의료진이 자가 격리 조치를 수일 동안만 받더라도, 병원 의료 체계 운영에 어려움이 따를 수 밖에 없다.
이에, 병원 자체적으로 의료진의 보호 장비 적합 착용 여부를 모니터링하여, 의료진이 복수의 보호 장비를 기준에 맞게 착용하도록 독려하는 방법이 필요하다.
한편, 전술한 선행기술은 발명자가 본 발명의 도출을 위해 보유하고 있었거나, 본 발명의 도출 과정에서 습득한 기술 정보로서, 반드시 본 발명의 출원 전에 일반 공중에게 공개된 공지기술이라 할 수는 없다.
상술한 바와 같은 문제점을 해결하기 위한 본 발명이 해결하고자 하는 일 과제는 의료진들이 보호 장비 착용을 적합하게 착용하는지 병원 자체적으로 능동적 모니터링을 수행하는 방법을 제공하는 데에 있다.
본 발명의 또 다른 과제는, 소정 기준에 적합하지 않게 보호 장비를 착용하거나 보호 장비를 아예 착용하지 않은 의료진에, 보호 장비를 적합하게 착용하도록 가이드하는 간접적 또는 직접적인 피드백 정보를 제공하는 데에 있다.
본 발명이 해결하고자 하는 과제들은 이상에서 언급된 과제로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
상술한 과제를 해결하기 위한 본 발명에 따른 복수의 보호 장비 착용에 대한 피드백 정보를 제공하는 방법은 병원 내부를 촬영하는 하나 이상의 영상 촬영 기기를 이용하여 복수의 보호 장비를 의무적으로 착용해야 하는 대상자를 촬영한 영상을 획득하는 단계, 미리 학습된 분석 엔진에 기초하여, 상기 촬영된 영상에서 상기 대상자가 상기 복수의 보호 장비를 소정 기준에 적합하게 착용하였는지 결정하는 단계, 부적합 착용으로 결정되는 경우, 상기 대상자가 상기 복수의 보호 장비를 적합하게 착용하도록 가이드하는 피드백 정보를 생성하는 단계 및 생성된 피드백 정보를 유무선으로 연결된 스피커 또는 전자 기기로 제공하는 단계를 포함할 수 있다.
상기 분석 엔진은, 촬영 영상에서 사람을 특정하고, 특정된 사람의 목 상부 영역 및 상기 목 하부 영역을 특정하는 제1 네트워크, 상기 제1 네트워크를 통해 특정된 목 상부 영역에 대해, 상기 복수의 보호 장비 중 마스크, 고글 및 머리 보호 캡의 착용이 적합한지를 결정하는 제2 네트워크, 상기 제1 네트워크를 통해 특정된 목 하부 영역에 대해, 상기 복수의 보호 장비 중 보호복 및 보호 장갑의 착용이 적합한지를 결정하는 제3 네트워크 및 상기 제2 네트워크 및 제3 네트워크로부터 출력된 정보에 기초하여, 상기 대상자가 상기 복수의 보호 장비를 소정 기준에 적합하게 착용하였는지 결정하는 제4 네트워크를 포함할 수 있다.
상기 대상자를 촬영한 영상을 획득하는 단계는 응급실 영역 또는 감염병 발생 위험 영역에 우선 순위를 부여하는 단계 및 상기 대상자를 촬영한 영상을, 상기 우선 순위가 부여된 영역에서 실시간으로 획득하거나, 상기 대상자를 촬영한 영상을, 상기 우선 순위가 부여되지 않은 영역보다 더 빈번한 주기로 상기 우선 순위가 부여된 영역에서 획득하는 단계를 포함할 수 있다.
상기 감염병 발생 위험 영역은 감염병 환자의 동선에 포함된 영역, 감염병 검사를 받지 않은 환자가 위치한 영역 및 유동 인구가 많은 영역 중 적어도 하나를 포함할 수 있다.
상기 스피커 또는 전자 기기로 제공하는 단계는 상기 병원 내 배치된 적어도 일부의 스피커 또는 상기 대상자와 소정 범위 내에 위치한 하나 이상의 스피커를 통해, 상기 대상자가 상기 복수의 보호 장비를 적합하게 착용하도록 독려하는 간접적 피드백 정보를 제공하는 단계를 포함할 수 있다.
상기 피드백 정보 제공 방법은 하나 이상의 상기 영상 촬영 기기를 이용하여, 이동하는 상기 대상자를 추적 촬영하는 단계를 더 포함할 수 있다.
상기 피드백 정보 제공 방법은 상기 간접적 피드백 정보가 제공된 이후에도, 상기 이동하는 대상자가 상기 복수의 보호 장비 중 적어도 일부를 제대로 착용하지 않는 경우, 상기 추적 촬영된 영상에 기초하여, 상기 이동하는 대상자에 인접한 스피커를 통해, 상기 기준에 적합하게 상기 복수의 보호 장비를 착용하도록 독려하는 직접적 피드백 정보를 제공하는 단계를 더 포함할 수 있다.
상기 피드백 정보 제공 방법은 상기 간접적 피드백 정보가 제공된 이후에도, 상기 이동하는 대상자가 상기 복수의 보호 장비 중 적어도 일부를 제대로 착용하지 않는 경우, 상기 대상자를 특정하여 인식하는 단계 및 상기 특정하여 인식된 대상자가 소지한 전자 기기로 상기 기준에 적합하게 보호 장비를 착용하도록 독려하는 직접적 피드백 정보를 제공하는 단계를 더 포함할 수 있다.
상기 피드백 정보 제공 방법은 상기 직접적 피드백 정보가 제공된 이후에도, 상기 이동하는 대상자가 상기 복수의 보호 장비를 제대로 착용하지 않는 경우, 경고 알림을 출력하는 이동 로봇을 상기 대상자가 위치한 영역으로 이동시키는 단계를 더 포함할 수 있다.
상술한 과제를 해결하기 위한 본 발명에 따른 복수의 보호 장비 착용에 대한 피드백 정보를 제공하는 장치는 통신부, 병원 내부를 촬영하는 하나 이상의 영상 촬영 기기를 이용하여 복수의 보호 장비를 의무적으로 착용해야 하는 대상자를 촬영한 영상을 획득하는 대상자 촬영 영상 획득부, 미리 학습된 분석 엔진을 저장하는 메모리 및 상기 분석 엔진에 기초하여, 상기 대상자 촬영 영상 획득부를 통해 획득된 촬영 영상에서 상기 대상자가 상기 복수의 보호 장비를 소정 기준에 적합하게 착용하였는지 결정하는 적어도 하나의 프로세서를 포함할 수 있다.
상기 프로세서는 부적합 착용으로 결정되는 경우, 상기 대상자가 상기 복수의 보호 장비를 적합하게 착용하도록 가이드하는 피드백 정보를 생성하고, 상기 통신부를 통해, 생성된 피드백 정보를 유무선으로 연결된 스피커 또는 전자 기기로 제공하도록 구성될 수 있다.
상기 분석 엔진은, 촬영 영상에서 사람을 특정하고, 특정된 사람의 목 상부 영역 및 상기 목 하부 영역을 특정하는 제1 네트워크, 상기 제1 네트워크를 통해 특정된 목 상부 영역에 대해, 상기 복수의 보호 장비 중 마스크, 고글 및 머리 보호 캡의 착용이 적합한지를 결정하는 제2 네트워크, 상기 제1 네트워크를 통해 특정된 목 하부 영역에 대해, 상기 복수의 보호 장비 중 보호복 및 보호 장갑의 착용이 적합한지를 결정하는 제3 네트워크 및 상기 제2 네트워크 및 제3 네트워크로부터 출력된 정보에 기초하여, 상기 대상자가 상기 복수의 보호 장비를 소정 기준에 적합하게 착용하였는지 결정하기 위한 정보를 제공하는 제4 네트워크를 포함할 수 있다.
상기 프로세서는 응급실 영역 또는 감염병 발생 위험 영역에 우선 순위를 부여하고, 상기 대상자를 촬영한 영상을, 상기 우선 순위가 부여된 영역에서 실시간으로 획득하거나, 상기 대상자를 촬영한 영상을, 상기 우선 순위가 부여되지 않은 영역보다 더 빈번한 주기로 상기 우선 순위가 부여된 영역에서 획득하도록 상기 대상자 촬영 영상 획득부를 제어하도록 구성될 수 있다.
상기 감염병 발생 위험 영역은 감염병 환자의 동선에 포함된 영역, 감염병 검사를 받지 않은 환자가 위치한 영역 및 유동 인구가 많은 영역 중 적어도 하나를 포함할 수 있다.
상기 프로세서는 상기 병원 내 배치된 적어도 일부의 스피커 또는 상기 대상자와 소정 범위 내에 위치한 하나 이상의 스피커를 통해, 상기 대상자가 복수의 보호 장비를 적합하게 착용하도록 독려하는 간접적 피드백 정보를 제공하도록 구성될 수 있다.
상기 프로세서는 유무선으로 연결된 병원 내 하나 이상의 상기 영상 촬영 기기를 이용하여, 이동하는 상기 대상자를 추적 촬영하도록, 상기 대상자 촬영 영상 획득부를 제어하도록 구성될 수 있다.
상기 프로세서는 상기 간접적 피드백 정보가 제공된 이후에도, 상기 이동하는 대상자가 상기 복수의 보호 장비 중 적어도 일부를 제대로 착용하지 않는 경우, 상기 추적 촬영된 영상에 기초하여, 상기 이동하는 대상자에 인접한 스피커를 통해, 상기 기준에 적합하게 상기 복수의 보호 장비를 착용하도록 독려하는 직접적 피드백 정보를 제공하도록 구성될 수 있다.
상기 프로세서는 상기 간접적 피드백 정보가 제공된 이후에도, 상기 이동하는 대상자가 상기 복수의 보호 장비 중 적어도 일부를 제대로 착용하지 않는 경우, 상기 대상자를 특정하여 인식하고, 상기 특정하여 인식된 대상자가 소지한 전자 기기로 상기 기준에 적합하게 보호 장비를 착용하도록 독려하는 직접적 피드백 정보를 제공하도록 상기 통신부를 제어할 수 있다.
상기 프로세서는 상기 직접적 피드백 정보가 제공된 이후에도, 상기 이동하는 대상자가 상기 복수의 보호 장비를 제대로 착용하지 않는 경우, 경고 알림를 출력하는 이동 로봇이 상기 대상자가 위치한 영역으로 이동하도록 상기 통신부를 제어할 수 있다.
상술한 과제를 해결하기 위해, 본 발명의 일 실시 예에 따른 컴퓨터상에서 수행하기 위한 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체가 제공될 수 있다.
상기 프로그램은, 프로세서에 의한 실행 시, 상기 프로세서가, 병원 내부를 촬영하는 하나 이상의 영상 촬영 기기를 이용하여 복수의 보호 장비를 의무적으로 착용해야 하는 대상자를 촬영한 영상을 획득하는 동작, 기 학습된 분석 엔진에 기초하여, 상기 촬영된 영상에서 상기 대상자가 상기 복수의 보호 장비를 소정 기준에 적합하게 착용하였는지 결정하는 동작, 부적합 착용으로 결정되는 경우, 상기 대상자가 상기 복수의 보호 장비를 적합하게 착용하도록 가이드하는 피드백 정보를 생성하는 동작 및 생성된 피드백 정보를 유무선으로 연결된 스피커 또는 전자 기기로 제공하는 동작을 수행하도록 하는 실행 가능한 명령을 포함할 수 있다.
이 외에도, 본 발명을 구현하기 위한 다른 방법, 다른 장치, 다른 시스템 및 상기 방법을 실행하기 위한 컴퓨터 프로그램을 기록하는 컴퓨터 판독 가능한 기록 매체가 더 제공될 수 있다.
상기와 같은 본 발명에 따른 복수의 보호 장비 착용을 독려하는 피드백 정보 제공 장치가 제공됨으로써, 병원 자체적으로, 복수의 보호 장비 착용에 대한 능동적 모니터링이 수행되어, 의료 공백이 사전에 차단될 수 있다.
본 발명의 효과들은 이상에서 언급된 효과로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
도 1은 본 발명의 일 실시 예에 따른 피드백 정보 제공 장치가 적용되는 환경을 간략하게 개념적으로 설명하기 위한 도면이다.
도 2(a) 및 도 2(b)는 본 발명의 일 실시 예에 따른 복수의 보호 장비를 의무적으로 착용해야 하는 대상자의 적합 착용 여부를 결정하는 피드백 정보 제공 장치를 설명하기 위한 도면들이다.
도 3은 본 발명의 일 실시 예에 따른 피드백 정보 제공 장치의 구성을 나타내는 블록도이다.
도 4는 본 발명의 일 실시 예에 따른 복수의 보호 장비를 의무적으로 착용해야 하는 대상자가 복수의 보호 장비를 적합하게 착용하였는지 결정하기 위한 분석 엔진을 나타내는 도면이다.
도 5 내지 도 7은 본 발명의 일 실시 예에 따른 피드백 정보 제공 장치가 소정 기준에 부적합하게 복수의 보호 장비를 착용한 것으로 결정하는 예를 설명하기 위한 도면들이다.
도 8은 본 발명의 일 실시 예에 따른 복수의 보호 장비 착용에 대한 피드백 정보를 제공하는 방법을 나타내는 시퀀스도이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나, 본 발명은 이하에서 개시되는 실시예들에 제한되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술 분야의 통상의 기술자에게 본 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.
본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소 외에 하나 이상의 다른 구성요소의 존재 또는 추가를 배제하지 않는다. 명세서 전체에 걸쳐 동일한 도면 부호는 동일한 구성 요소를 지칭하며, "및/또는"은 언급된 구성요소들의 각각 및 하나 이상의 모든 조합을 포함한다. 비록 "제1", "제2" 등이 다양한 구성요소들을 서술하기 위해서 사용되나, 이들 구성요소들은 이들 용어에 의해 제한되지 않음은 물론이다. 이들 용어들은 단지 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용하는 것이다. 따라서, 이하에서 언급되는 제1 구성요소는 본 발명의 기술적 사상 내에서 제2 구성요소일 수도 있음은 물론이다.
다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 발명이 속하는 기술분야의 통상의 기술자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또한, 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.
이하, 첨부된 도면을 참조하여 본 발명의 실시예를 상세하게 설명한다.
설명에 앞서 본 명세서에서 사용하는 용어의 의미를 간략히 설명한다. 그렇지만 용어의 설명은 본 명세서의 이해를 돕기 위한 것이므로, 명시적으로 본 발명을 한정하는 사항으로 기재하지 않은 경우에 본 발명의 기술적 사상을 한정하는 의미로 사용하는 것이 아님을 주의해야 한다.
도 1은 본 발명의 일 실시 예에 따른 피드백 정보 제공 장치(100)가 적용되는 환경을 간략하게 개념적으로 설명하기 위한 도면이다.
하나 이상의 영상 촬영 기기(CCTV 1~CCTV N)(CC)는 병원 내부에 배치될 수 있으며, CCTV(Closed Circuit Television)로 구현될 수 있으나, 실시 예가 이에 한정되는 것은 아니다. 선택적 실시 예로, 하나 이상의 영상 촬영 기기(CCTV 1~CCTV N)(CC)는 이미지 센서나 비전 인식 모듈을 구비할 수 있다.
피드백 정보 제공 장치(100)는 서버, 클라우드 시스템 및 디바이스 등으로 구현될 수 있으나, 실시 예가 이에 한정되는 것은 아니다. 또한, 피드백 정보 제공 장치(100)는 병원 내에 배치될 수 있으나, 병원 외부에 배치될 수도 있다.
피드백 정보 제공 장치(100)는 하나 이상의 영상 촬영 기기(CCTV 1~CCTV N)(CC)로부터 병원 내부 또는 외부를 촬영한 촬영 영상을 획득할 수 있는데, 그 중에서, 복수의 보호 장비를 의무적으로 착용해야 하는 대상자를 촬영한 영상을 획득할 수 있다.
선택적 실시 예로, 피드백 정보 제공 장치(100)는 사람을 인식하고 특정할 수 있는 모듈, 복수의 보호 장비를 인식할 수 있는 모듈 등을 구비할 수 있으며, 영상 처리 기반의 다양한 알고리즘을 구비할 수 있다.
복수의 보호 장비는 마스크, 고글, 머리 보호 캡, 보호복, 보호 장갑 및 보호 발싸개 등을 포함할 수 있으나, 실시 예가 이에 한정되는 것은 아니다. 피드백 정보 제공 장치(100)는 정부, 지역 자치 단체, 질병 관리청 및 의료 단체 등에서 강제 또는 권고하는 보호 장비 착용 기준에 따라, 보호 장비 착용의 적합 여부를 결정할 수 있다. 여기서, 착용 기준은 기관/단체마다 다를 수 있으며, 시대/장소에 따라 적용 범위가 다를 수 있다.
피드백 정보 제공 장치(100)는 착용 기준에 부적합한 대상자에게 복수의 보호 장비를 제대로 착용하도록 독려하는 피드백 정보를 생성하여, 간접적인 방식 또는 직접적인 방식으로 생성된 피드백 정보를 제공할 수 있다.
도 2(a) 및 도 2(b)는 본 발명의 일 실시 예에 따른 복수의 보호 장비를 의무적으로 착용해야 하는 대상자(Doct 1)의 적합 착용 여부를 결정하는 피드백 정보 제공 장치(100)를 설명하기 위한 도면들이다.
피드백 정보 제공 장치(100)는 병원 내부를 촬영하는 하나 이상의 영상 촬영 기기(CCTV 1~CCTV N)(CC)를 이용하여 복수의 보호 장비를 의무적으로 착용해야 하는 대상자(Doct 1)를 촬영한 영상을 획득할 수 있다.
피드백 정보 제공 장치(100)는 대상자(Doct 1)를 특정할 수 있으며, 대상자(Doct 1)가 착용한 복수의 보호 장비를 인식할 수 있다. 복수의 보호 장비는 머리 보호 캡(10), 마스크(20), 고글(30a, 30b), 보호복(40), 보호 장갑(50) 등을 포함할 수 있다.
피드백 정보 제공 장치(100)는 머리 보호 캡(10)이 머리 카락을 모두 덮었는지, 마스크(20)가 소정 등급(가령, KF 94) 이상인지, 마스크(20)가 코와 입을 모두 감싸도록 착용되었는지, 제1 형 고글(30a)이 눈을 제대로 보호하는지, 제2 형 고글(30b)이 눈 및 안면을 제대로 보호하는지, 보호복(40)이 대상자(Doct 1)의 상부 몸통 및 하부 몸통의 일부(또는 전부)를 제대로 보호하는지, 보호 장갑(50)이 제대로 착용되었는지, 보호 장갑(50)과 보호복(40) 사이의 피부가 노출되지 않는지 등을 결정할 수 있다.
도시되지는 않았으나, 피드백 정보 제공 장치(100)는 발 보호 싸개가 대상자(Doct 1)의 발을 제대로 보호되는지, 보호복(40)의 하부에 피부가 노출되었는지 등을 결정할 수 있다.
선택적 실시 예로, 피드백 정보 제공 장치(100)는 마스크(20), 고글(30a, 30b), 보호복(40) 및 보호 장갑(50) 등을 포함하는 4 종의 보호 장비만 소정의 기준에 따라 적합 착용하였는지 결정할 수 있다.
도 3은 본 발명의 일 실시 예에 따른 피드백 정보 제공 장치(100)의 구성을 나타내는 블록도이다.
피드백 정보 제공 장치(100)는 통신부(110), 디스플레이(120), 대상자 촬영 영상 획득부(130), 메모리(140) 및 하나 이상의 프로세서(190)를 포함할 수 있다.
통신부(110)는 유선 또는 무선 모듈을 구비하여, 병원 내부를 촬영하는 하나 이상의 영상 촬영 기기(CC)와 통신하여, 병원 내 촬영 영상을 수신할 수 있다. 선택적 실시 예로, 통신부(110)는 입력을 위한 모듈을 추가적으로 포함할 수 있다. 통신부(110)는 외부 전자 기기와 통신할 수 있다. 이를 위해, 유무선 통신 모듈, 이동 통신 모듈, 근거리 통신 모듈 등을 포함할 수 있다.
디스플레이(120)는 프로세서(190)의 제어에 따라 다양한 데이터를 화면 상에 표시할 수 있으며, 백라이트 기반의 디스플레이 또는 자발광 소자를 탑재한 디스플레이로 구현될 수 있다.
대상자 촬영 영상 획득부(130)는, 통신부(110)를 통해 또는 자체적으로, 병원 내부를 촬영하는 하나 이상의 영상 촬영 기기(CC)를 이용하여 수집된 병원 내 촬영 영상에서, 복수의 보호 장비를 의무적으로 착용해야 하는 대상자를 촬영한 영상을 획득할 수 있다. 선택적 실시 예로, 대상자 촬영 영상 획득부(130)는 사람을 특정하여 인식하기 위한 모듈 또는 알고리즘을 프로세서(190)의 제어에 따라 이용할 수 있다.
여기서, 복수의 보호 장비를 의무적으로 착용해야 하는 대상자는 의료 기관의 의료진일 수 있으나, 의료진이 아니더라도 응급실 영역 또는 감염병 발생 위험 영역에 머무르는 환자 및 환자 보호자를 포함할 수 있으나, 실시 예가 이에 한정되는 것은 아니다.
메모리(140)는 다양한 형태의 저장소를 통칭하는 모듈이며, 메모리(140)는 인공 지능, 머신 러닝, 인공 신경망을 이용하여 연산을 수행하는데 필요한 정보를 저장할 수 있다. 메모리(140)는 다양한 학습 모델을 저장할 수 있는데, 상기 학습 모델들은 학습 데이터가 아닌 새로운 입력 데이터에 대하여 결과 값을 추론해 내는데 사용될 수 있고, 추론된 값은 어떠한 동작을 수행하기 위한 판단의 기초로 이용될 수 있다.
상기 학습 모델들은 레이블(Label) 정보에 기초하여, 학습이 수행될 수 있으며, 학습 정확도를 높이기 위해, 손실 함수가 목표의 값을 갖기 위한 다양한 역전파(Backpropagation) 알고리즘 등이 적용될 수 있다.
메모리(140)는 미리 학습된 분석 엔진(AE)을 저장할 수 있다. 분석 엔진(AE)은 입력되는 영상에서 복수의 보호 장비를 의무적으로 착용해야 하는 대상자가 복수의 보호 장비를 소정 기준에 적합하게 착용하였는지 결정하기 위한 학습 모델일 수 있다.
프로세서(190)는 하나 이상으로 구현될 수 있으며, 단수로 표현하더라도 복수로 간주될 수 있다. 프로세서(190)는 피드백 정보 제공 장치(100)의 구성들을 컨트롤하는 모듈이며, 프로세서(190)는 프로그램 내에 포함된 코드 또는 명령으로 표현된 기능을 수행하기 위해 물리적으로 구조화된 회로를 갖는, 하드웨어에 내장된 데이터 처리 장치를 의미할 수 있다. 이와 같이 하드웨어에 내장된 데이터 처리 장치의 일 예로써, 마이크로프로세서(microprocessor), 중앙처리장치(central processing unit: CPU), 프로세서 코어(processor core), 멀티프로세서(multiprocessor), ASIC(application-specific integrated circuit), FPGA(field programmable gate array) 등의 처리 장치를 망라할 수 있으나, 본 발명의 범위가 이에 한정되는 것은 아니다. 프로세서(190)는 인공 지능 연산을 수행하기 위한 러닝 프로세서를 별도로 구비하거나, 자체적으로 러닝 프로세서를 구비할 수 있다.
이하에서는, 도 4를 참고하여, 본 발명의 일 실시 예에 따른 피드백 정보 제공 장치(100)의 분석 엔진(AE)을 설명한다.
도 4는 본 발명의 일 실시 예에 따른 복수의 보호 장비를 의무적으로 착용해야 하는 대상자가 복수의 보호 장비를 적합하게 착용하였는지 결정하기 위한 분석 엔진(AE)을 나타낸다.
프로세서(190)는 미리 학습된 분석 엔진(AE)에 기초하여, 대상자 촬영 영상 획득부(130)를 통해 획득된 촬영 영상에서 대상자가 복수의 보호 장비를 소정 기준에 적합하게 착용하였는지 결정할 수 있다.
프로세서(190)는 부적합 착용으로 결정되는 경우, 대상자가 복수의 보호 장비를 적합하게 착용하도록 가이드하는 피드백 정보를 생성할 수 있으며, 통신부(110)를 통해, 생성된 피드백 정보를 유무선으로 연결된 스피커 또는 전자 기기로 제공할 수 있다.
여기서, 스피커는 병원 내에 배치된 하나 이상의 스피커를 포함할 수 있으며, 전자 기기는 해당 대상자가 소지한 단말 또는 해당 대상자와 연관된 가족, 지인 등이 이용하는 전자 기기일 수 있다. 전자 기기는 스마트폰일 수 있으나, 실시 예가 이에 국한되는 것은 아니다.
분석 엔진(AE)은 대상자의 촬영 영상을 입력받아, 소정 기준에 적합하게 복수의 보호 장비를 착용하였는지에 대한 정보를 출력할 수 있으며, 복수의 네트워크(1N~4N)를 포함할 수 있다.
제1 네트워크(1N)는 촬영 영상에서 사람을 특정하고, 특정된 사람의 목 상부 영역 및 상기 목 하부 영역을 특정할 수 있다. 즉, 제1 네트워크(1N)는 대상자의 목을 중심으로 상부 영역 및 하부 영역을 구분하여 특정할 수 있다.
제2 네트워크(2N)는 제1 네트워크(1N)를 통해 특정된 목 상부 영역에 대해, 상기 복수의 보호 장비 중 마스크, 고글 및 머리 보호 캡의 착용이 적합한지를 결정할 수 있다.
제3 네트워크(3N)는 제1 네트워크(1N)를 통해 특정된 목 하부 영역에 대해, 복수의 보호 장비 중 보호복 및 보호 장갑의 착용이 적합한지를 결정할 수 있다.
제4 네트워크(4N)는 상기 제2 네트워크 및 제3 네트워크로부터 출력된 정보에 기초하여, 상기 대상자가 상기 복수의 보호 장비를 소정 기준에 적합하게 착용하였는지 결정할 수 있다.
상기 제1 네트워크 내지 제4 네트워크(1N~4N)는 모두 신경망 기반의 알고리즘으로 구현될 수 있으며, 일부(제2 네트워크 및 제3 네트워크)만 신경망 기반의 알고리즘으로 구현될 수 있다. 가령, 제1 내지 제3 네트워크(1N~3N)는 CNN(Convolution Neural Network) 또는 DNN(Deep Neural Network)기반으로 구현될 수 있으며, 제4 네트워크(4N)는 풀리 커넥티드(Fully Connected) 네트워크를 포함하여, 소프트 맥스 기반으로, 대상자의 보호 장비 적합 착용 여부에 대한 정보를 출력할 수 있다.
복수의 네트워크(1N~4N)는 복수의 보호 장비를 적합하게 착용한 케이스만을 포함한 레이블(Label), 복수의 보호 장비를 부적합하게 착용한 케이스만을 포함한 레이블(Label) 등을 이용하여, 각 네트워크의 정확도를 높일 수 있으며, 이를 위해, 역전파(Backpropagation) 알고리즘이 사용될 수 있으며, 손실 함수의 값이 소정 목표치에 이르기까지 학습을 반복할 수 있다.
선택적 실시 예로, 학습시에, 복수의 루트로 학습이 수행될 수 있는데, 제1 루트는 제1 네트워크(1N), 제2 네트워크(2N) 및 제4 네트워크(4N)를 순차적으로 수행한 후, 레이블 정보에 기초하여, 대상자의 목 상부 영역에 위치한 복수의 보호 장비의 적합 착용 여부를 결정하는 루트이며, 제2 루트는 제1 네트워크(1N), 제3 네트워크(3N) 및 제4 네트워크(4N)를 순차적으로 수행한 후, 레이블 정보에 기초하여, 대상자의 목 하부 영역에 위치한 복수의 보호 장비의 적합 착용 여부를 결정하는 루트일 수 있다. 제1 루트 학습 및 제2 루트 학습은 손실 함수의 값이 소정 목표치에 이르기까지 교번적으로 반복 학습될 수 있다.
다시 도 3으로 돌아가서, 프로세서(190)는 병원 내부를 촬영하는 하나 이상의 영상 촬영 기기(CC)를 이용하여 복수의 보호 장비를 의무적으로 착용해야 하는 대상자를 촬영한 영상을 획득할 수 있는데, 영역에 우선 순위를 부여할 수 있다.
구체적으로, 프로세서(190)는 응급실 영역 또는 감염병 발생 위험 영역에 우선 순위를 부여할 수 있다. 프로세서(190)는 대상자를 촬영한 영상을, 상기 우선 순위가 부여된 영역에서 실시간으로 획득할 수 있다. 또는, 프로세서(190)는 대상자를 촬영한 영상을, 우선 순위가 부여되지 않은 영역보다 더 빈번한 주기로 우선 순위가 부여된 영역에서 획득하도록 대상자 촬영 영상 획득부(130)를 제어할 수 있다.
여기서, 상기 감염병 발생 위험 영역은 감염병 환자의 동선에 포함된 영역, 감염병 검사를 받지 않은 환자가 위치한 영역 및 유동 인구가 많은 영역 중 적어도 하나를 포함할 수 있으나, 실시 예가 이에 한정되는 것은 아니다.
프로세서(190)는 병원 내 배치된 적어도 일부의 스피커 또는 상기 대상자와 소정 범위 내에 위치한 하나 이상의 스피커를 통해, 대상자가 복수의 보호 장비를 적합하게 착용하도록 독려하는 간접적 피드백 정보를 제공할 수 있다.
여기서, 간접적 피드백은 보호 장비를 적합하게 착용하지 않은 대상자에 직접적으로 피드백을 하지 않고, 병원 일부 또는 전체에 “보호 장비를 착용합시다”와 같은 메시지일 수 있으나, 실시 예가 이에 한정되는 것은 아니다.
또한, 간접적 피드백 보다 더 강력한 직접적 피드백 정보가 제공될 수도 있는데, 이하에서 설명하기로 한다.
프로세서(190)는 유무선으로 연결된 병원 내 하나 이상의 영상 촬영 기기(CC)를 이용하여, 이동하는 대상자를 추적 촬영하도록, 대상자 촬영 영상 획득부(130)를 제어할 수 있다.
프로세서(190)는 간접적 피드백 정보가 제공된 이후에도, 이동하는 대상자가 복수의 보호 장비 중 적어도 일부를 제대로 착용하지 않는 경우, 추적 촬영된 영상에 기초하여, 이동하는 대상자에 인접한 스피커를 통해, 기준에 적합하게 복수의 보호 장비를 착용하도록 독려하는 직접적 피드백 정보를 제공할 수 있다.
여기서, 직접적 피드백 정보는 복수의 보호 장비 중 적어도 일부를 제대로 착용하지 않은 대상자를 특정할 수 있는 정보를 포함할 수 있다. 가령, 직접적 피드백 정보의 일 예는 “응급실에 진입하는 의사 선생님, 고글을 착용하여 주시기 바랍니다” 일 수 있으나, 실시 예가 이에 한정되는 것은 아니다.
또한, 프로세서(190)는 간접적 피드백 정보가 제공된 이후에도, 이동하는 대상자가 복수의 보호 장비 중 적어도 일부를 제대로 착용하지 않는 경우, 대상자를 특정하여 인식할 수 있다.
구체적으로, 프로세서(190)는 대상자를 특정하기 위해, 해당 시간에 해당 장소로 이동할만한 의료진 정보, 성별 정보 및 외모 정보 등에 기초하여, 대상자를 특정할 수 있으며, 대상자 특정을 위한 별도의 신경망 기반의 모델이 적용될 수 있다.
프로세서(190)는 특정하여 인식된 대상자가 소지한 전자 기기로 상기 기준에 적합하게 보호 장비를 착용하도록 독려하는 직접적 피드백 정보를 제공하도록 상기 통신부를 제어할 수 있다.
선택적 실시 예로, 프로세서(190)는 직접적 피드백 정보가 제공된 이후에도, 이동하는 대상자가 복수의 보호 장비를 제대로 착용하지 않는 경우, 경고 알림를 출력하는 이동 로봇이 대상자가 위치한 영역으로 이동하도록 통신부(110)를 제어할 수 있다.
여기서, 이동 로봇은 대상자에게 접근하여, “보호 장비를 착용하셔야 합니다” 라는 경고 알림을 제공할 수 있으나, 실시 예가 이에 국한되는 것은 아니다.
도 5 내지 도 7은 본 발명의 일 실시 예에 따른 피드백 정보 제공 장치(100)가 소정 기준에 부적합하게 복수의 보호 장비를 착용한 것으로 결정하는 경우를 설명하기 위한 도면들이다.
도 5를 참고하면, 프로세서(190)는 촬영 영상(CCD 1)에서 의료진이 보호 장갑 및 보호복을 부적합하게 착용한 영역(510) 및 보호복을 부적합하게 착용한 영역(520)을 인식하여, 소정 기준에 부적합하게 착용하였음을 결정할 수 있다.
도 6을 참고하면, 프로세서(190)는 촬영 영상(CCD 2)에서 의료진이 머리 보호 캡(610)을 부적합하게 착용한 영역(610) 및 고글을 착용하지 않은 영역(620)을 인식하여, 소정 기준에 부적합하게 착용하였음을 결정할 수 있다. 프로세서(190)는 머리 보호 캡이 보호복에 포함된 경우에도 이를 인식할 수 있다.
도 7을 참고하면, 프로세서(190)는 촬영 영상(CCD 3)에서 의료진이 보호 장갑을 착용하지 않은 영역(710)을 인식하여, 소정 기준에 부적합하게 착용하였음을 결정할 수 있다.
도 8은 본 발명의 일 실시 예에 따른 복수의 보호 장비 착용에 대한 피드백 정보를 제공하는 방법을 나타내는 시퀀스도이다.
피드백 정보 제공 장치(100)는 병원 내부를 촬영하는 하나 이상의 영상 촬영 기기를 이용하여 복수의 보호 장비를 의무적으로 착용해야 하는 대상자를 촬영한 영상을 획득한다(S710).
피드백 정보 제공 장치(100)는 기 학습된 분석 엔진에 기초하여, 촬영된 영상에서 대상자가 복수의 보호 장비를 소정 기준에 적합하게 착용하였는지 결정한다(S720). 여기서, 분석 엔진(AE)은 상술한 바 설명은 생략하기로 한다.
피드백 정보 제공 장치(100)는 부적합 착용으로 결정되는 경우, 대상자가 복수의 보호 장비를 적합하게 착용하도록 가이드하는 피드백 정보를 생성한다(S730).
피드백 정보 제공 장치(100)는 생성된 피드백 정보를 유무선으로 연결된 스피커 또는 전자 기기로 제공한다(S740).
대상자를 촬영한 영상을 획득하는 단계(S710)는 응급실 영역 또는 감염병 발생 위험 영역에 우선 순위를 부여하는 단계 및 대상자를 촬영한 영상을, 우선 순위가 부여된 영역에서 실시간으로 획득하거나, 대상자를 촬영한 영상을, 우선 순위가 부여되지 않은 영역보다 더 빈번한 주기로 우선 순위가 부여된 영역에서 획득하는 단계를 포함할 수 있다.
여기서, 감염병 발생 위험 영역은 감염병 환자의 동선에 포함된 영역, 감염병 검사를 받지 않은 환자가 위치한 영역 및 유동 인구가 많은 영역 중 적어도 하나를 포함할 수 있다.
스피커 또는 전자 기기로 제공하는 단계(S740)는 병원 내 배치된 적어도 일부의 스피커 또는 대상자와 소정 범위 내에 위치한 하나 이상의 스피커를 통해, 대상자가 복수의 보호 장비를 적합하게 착용하도록 독려하는 간접적 피드백 정보를 제공하는 단계를 포함할 수 있다.
상기 피드백 정보 제공 방법은 하나 이상의 상기 영상 촬영 기기를 이용하여, 이동하는 상기 대상자를 추적 촬영하는 단계를 더 포함할 수 있다.
이후에, 피드백 정보 제공 방법은, 간접적 피드백 정보가 제공된 이후에도, 이동하는 대상자가 복수의 보호 장비 중 적어도 일부를 제대로 착용하지 않는 경우, 추적 촬영된 영상에 기초하여, 이동하는 대상자에 인접한 스피커를 통해, 기준에 적합하게 복수의 보호 장비를 착용하도록 독려하는 직접적 피드백 정보를 제공하는 단계를 더 포함할 수 있다.
또한, 피드백 정보 제공 방법은 간접적 피드백 정보가 제공된 이후에도, 이동하는 대상자가 복수의 보호 장비 중 적어도 일부를 제대로 착용하지 않는 경우, 대상자를 특정하여 인식하는 단계 및 특정하여 인식된 대상자가 소지한 전자 기기로 기준에 적합하게 보호 장비를 착용하도록 독려하는 직접적 피드백 정보를 제공하는 단계를 더 포함할 수 있다.
또한, 피드백 정보 제공 방법은 직접적 피드백 정보가 제공된 이후에도, 이동하는 대상자가 복수의 보호 장비를 제대로 착용하지 않는 경우, 경고 알림를 출력하는 이동 로봇을 대상자가 위치한 영역으로 이동시키는 단계를 더 포함할 수 있다.
이상에서 전술한 본 발명의 일 실시예에 따른 방법은, 하드웨어인 컴퓨터와 결합되어 실행되기 위해 프로그램(또는 어플리케이션)으로 구현되어 매체에 저장될 수 있다. 여기서, 컴퓨터는 앞에서 설명한 피드백 정보 제공 장치(100)일 수 있다.
상기 전술한 프로그램은, 상기 컴퓨터가 프로그램을 읽어 들여 프로그램으로 구현된 상기 방법들을 실행시키기 위하여, 상기 컴퓨터의 프로세서(CPU)가 상기 컴퓨터의 장치 인터페이스를 통해 읽힐 수 있는 C, C++, Python, JAVA, 기계어 등의 컴퓨터 언어로 코드화된 코드(Code)를 포함할 수 있다. 이러한 코드는 상기 방법들을 실행하는 필요한 기능들을 정의한 함수 등과 관련된 기능적인 코드(Functional Code)를 포함할 수 있고, 상기 기능들을 상기 컴퓨터의 프로세서가 소정의 절차대로 실행시키는데 필요한 실행 절차 관련 제어 코드를 포함할 수 있다. 또한, 이러한 코드는 상기 기능들을 상기 컴퓨터의 프로세서가 실행시키는데 필요한 추가 정보나 미디어가 상기 컴퓨터의 내부 또는 외부 메모리의 어느 위치(주소 번지)에서 참조되어야 하는지에 대한 메모리 참조관련 코드를 더 포함할 수 있다. 또한, 상기 컴퓨터의 프로세서가 상기 기능들을 실행시키기 위하여 원격(Remote)에 있는 어떠한 다른 컴퓨터나 서버 등과 통신이 필요한 경우, 코드는 상기 컴퓨터의 통신 모듈을 이용하여 원격에 있는 어떠한 다른 컴퓨터나 서버 등과 어떻게 통신해야 하는지, 통신 시 어떠한 정보나 미디어를 송수신해야 하는지 등에 대한 통신 관련 코드를 더 포함할 수 있다.
본 발명의 실시예와 관련하여 설명된 방법 또는 알고리즘의 단계들은 하드웨어로 직접 구현되거나, 하드웨어에 의해 실행되는 소프트웨어 모듈로 구현되거나, 또는 이들의 결합에 의해 구현될 수 있다. 소프트웨어 모듈은 RAM(Random Access Memory), ROM(Read Only Memory), EPROM(Erasable Programmable ROM), EEPROM(Electrically Erasable Programmable ROM), 플래시 메모리(Flash Memory), 하드 디스크, 착탈형 디스크, CD-ROM, 또는 본 발명이 속하는 기술 분야에서 잘 알려진 임의의 형태의 컴퓨터 판독가능 기록매체에 상주할 수도 있다.
이상, 첨부된 도면을 참조로 하여 본 발명의 실시예를 설명하였지만, 본 발명이 속하는 기술분야의 통상의 기술자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로, 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며, 제한적이 아닌 것으로 이해해야만 한다.

Claims (15)

  1. 장치에 의해 수행되는, 복수의 보호 장비 착용에 대한 피드백 정보를 제공하는 방법으로서,
    병원 내부를 촬영하는 하나 이상의 영상 촬영 기기를 이용하여 복수의 보호 장비를 의무적으로 착용해야 하는 대상자를 촬영한 영상을 획득하는 단계;
    미리 학습된 분석 엔진에 기초하여, 상기 촬영된 영상에서 상기 대상자가 상기 복수의 보호 장비를 소정 기준에 적합하게 착용하였는지 결정하는 단계;
    부적합 착용으로 결정되는 경우, 상기 대상자가 상기 복수의 보호 장비를 적합하게 착용하도록 가이드하는 피드백 정보를 생성하는 단계; 및
    생성된 피드백 정보를 유무선으로 연결된 스피커 또는 전자 기기로 제공하는 단계를 포함하는, 피드백 정보 제공 방법.
  2. 제1항에 있어서,
    상기 분석 엔진은,
    촬영 영상에서 사람을 특정하고, 특정된 사람의 목 상부 영역 및 상기 목 하부 영역을 특정하는 제1 네트워크;
    상기 제1 네트워크를 통해 특정된 목 상부 영역에 대해, 상기 복수의 보호 장비 중 마스크, 고글 및 머리 보호 캡의 착용이 적합한지를 결정하는 제2 네트워크;
    상기 제1 네트워크를 통해 특정된 목 하부 영역에 대해, 상기 복수의 보호 장비 중 보호복 및 보호 장갑의 착용이 적합한지를 결정하는 제3 네트워크; 및
    상기 제2 네트워크 및 제3 네트워크로부터 출력된 정보에 기초하여, 상기 대상자가 상기 복수의 보호 장비를 소정 기준에 적합하게 착용하였는지 결정하는 제4 네트워크를 포함하는, 피드백 정보 제공 방법.
  3. 제1항에 있어서,
    상기 대상자를 촬영한 영상을 획득하는 단계는,
    응급실 영역 또는 감염병 발생 위험 영역에 우선 순위를 부여하는 단계; 및
    상기 대상자를 촬영한 영상을 상기 우선 순위가 부여된 영역에서 실시간으로 획득하거나, 상기 대상자를 촬영한 영상을 상기 우선 순위가 부여되지 않은 영역보다 더 빈번한 주기로 상기 우선 순위가 부여된 영역에서 획득하는 단계를 포함하고,
    상기 감염병 발생 위험 영역은, 감염병 환자의 동선에 포함된 영역, 감염병 검사를 받지 않은 환자가 위치한 영역 및 유동 인구가 많은 영역 중 적어도 하나를 포함하는, 피드백 정보 제공 방법.
  4. 제1항에 있어서,
    상기 스피커 또는 전자 기기로 제공하는 단계는,
    상기 병원 내 배치된 적어도 일부의 스피커 또는 상기 대상자와 소정 범위 내에 위치한 하나 이상의 스피커를 통해, 상기 대상자가 상기 복수의 보호 장비를 적합하게 착용하도록 독려하는 간접적 피드백 정보를 제공하는 단계를 포함하는, 피드백 정보 제공 방법.
  5. 제4항에 있어서,
    하나 이상의 상기 영상 촬영 기기를 이용하여, 이동하는 상기 대상자를 추적 촬영하는 단계를 더 포함하는, 피드백 정보 제공 방법.
  6. 제5항에 있어서,
    상기 간접적 피드백 정보가 제공된 이후에도, 상기 이동하는 대상자가 상기 복수의 보호 장비 중 적어도 일부를 제대로 착용하지 않는 경우, 상기 추적 촬영된 영상에 기초하여 상기 이동하는 대상자에 인접한 스피커를 통해 상기 기준에 적합하게 상기 복수의 보호 장비를 착용하도록 독려하는 직접적 피드백 정보를 제공하는 단계를 더 포함하는, 피드백 정보 제공 방법.
  7. 제5항에 있어서,
    상기 간접적 피드백 정보가 제공된 이후에도, 상기 이동하는 대상자가 상기 복수의 보호 장비 중 적어도 일부를 제대로 착용하지 않는 경우, 상기 대상자를 특정하여 인식하는 단계;
    상기 특정하여 인식된 대상자가 소지한 전자 기기로 상기 기준에 적합하게 보호 장비를 착용하도록 독려하는 직접적 피드백 정보를 제공하는 단계; 및
    상기 직접적 피드백 정보가 제공된 이후에도, 상기 이동하는 대상자가 상기 복수의 보호 장비를 제대로 착용하지 않는 경우, 경고 알림을 출력하는 이동 로봇을 상기 대상자가 위치한 영역으로 이동시키는 단계를 더 포함하는, 피드백 정보 제공 방법.
  8. 하드웨어인 컴퓨터와 결합되어, 제1항의 방법을 실행시키기 위하여 컴퓨터 판독가능 기록매체에 저장된 컴퓨터 프로그램.
  9. 복수의 보호 장비 착용에 대한 피드백 정보를 제공하는 장치로서,
    통신부;
    병원 내부를 촬영하는 하나 이상의 영상 촬영 기기를 이용하여 복수의 보호 장비를 의무적으로 착용해야 하는 대상자를 촬영한 영상을 획득하는 대상자 촬영 영상 획득부;
    미리 학습된 분석 엔진을 저장하는 메모리; 및
    상기 분석 엔진에 기초하여, 상기 대상자 촬영 영상 획득부를 통해 획득된 촬영 영상에서 상기 대상자가 상기 복수의 보호 장비를 소정 기준에 적합하게 착용하였는지 결정하는 적어도 하나의 프로세서를 포함하며,
    상기 프로세서는,
    부적합 착용으로 결정되는 경우, 상기 대상자가 상기 복수의 보호 장비를 적합하게 착용하도록 가이드하는 피드백 정보를 생성하고, 상기 통신부를 통해, 생성된 피드백 정보를 유무선으로 연결된 스피커 또는 전자 기기로 제공하도록 구성되는, 피드백 정보 제공 장치.
  10. 제9항에 있어서,
    상기 분석 엔진은,
    촬영 영상에서 사람을 특정하고, 특정된 사람의 목 상부 영역 및 상기 목 하부 영역을 특정하는 제1 네트워크;
    상기 제1 네트워크를 통해 특정된 목 상부 영역에 대해, 상기 복수의 보호 장비 중 마스크, 고글 및 머리 보호 캡의 착용이 적합한지를 결정하는 제2 네트워크;
    상기 제1 네트워크를 통해 특정된 목 하부 영역에 대해, 상기 복수의 보호 장비 중 보호복 및 보호 장갑의 착용이 적합한지를 결정하는 제3 네트워크; 및
    상기 제2 네트워크 및 제3 네트워크로부터 출력된 정보에 기초하여, 상기 대상자가 상기 복수의 보호 장비를 소정 기준에 적합하게 착용하였는지 결정하기 위한 정보를 제공하는 제4 네트워크를 포함하는, 피드백 정보 제공 장치.
  11. 제9항에 있어서,
    상기 프로세서는,
    응급실 영역 또는 감염병 발생 위험 영역에 우선 순위를 부여하고, 상기 대상자를 촬영한 영상을 상기 우선 순위가 부여된 영역에서 실시간으로 획득하거나, 상기 대상자를 촬영한 영상을 상기 우선 순위가 부여되지 않은 영역보다 더 빈번한 주기로 상기 우선 순위가 부여된 영역에서 획득하도록 상기 대상자 촬영 영상 획득부를 제어하도록 구성되고,
    상기 감염병 발생 위험 영역은 감염병 환자의 동선에 포함된 영역, 감염병 검사를 받지 않은 환자가 위치한 영역 및 유동 인구가 많은 영역 중 적어도 하나를 포함하는, 피드백 정보 제공 장치.
  12. 제9항에 있어서,
    상기 프로세서는,
    상기 병원 내 배치된 적어도 일부의 스피커 또는 상기 대상자와 소정 범위 내에 위치한 하나 이상의 스피커를 통해, 상기 대상자가 복수의 보호 장비를 적합하게 착용하도록 독려하는 간접적 피드백 정보를 제공하도록 구성되는, 피드백 정보 제공 장치.
  13. 제12항에 있어서,
    상기 프로세서는,
    유무선으로 연결된 병원 내 하나 이상의 상기 영상 촬영 기기를 이용하여, 이동하는 상기 대상자를 추적 촬영하도록, 상기 대상자 촬영 영상 획득부를 제어하도록 구성되는, 피드백 정보 제공 장치.
  14. 제13항에 있어서,
    상기 프로세서는,
    상기 간접적 피드백 정보가 제공된 이후에도, 상기 이동하는 대상자가 상기 복수의 보호 장비 중 적어도 일부를 제대로 착용하지 않는 경우, 상기 추적 촬영된 영상에 기초하여, 상기 이동하는 대상자에 인접한 스피커를 통해, 상기 기준에 적합하게 상기 복수의 보호 장비를 착용하도록 독려하는 직접적 피드백 정보를 제공하도록 구성되는, 피드백 정보 제공 장치.
  15. 제13항에 있어서,
    상기 프로세서는,
    상기 간접적 피드백 정보가 제공된 이후에도, 상기 이동하는 대상자가 상기 복수의 보호 장비 중 적어도 일부를 제대로 착용하지 않는 경우, 상기 대상자를 특정하여 인식하고, 상기 특정하여 인식된 대상자가 소지한 전자 기기로 상기 기준에 적합하게 보호 장비를 착용하도록 독려하는 직접적 피드백 정보를 제공하도록 상기 통신부를 제어하고,
    상기 직접적 피드백 정보가 제공된 이후에도, 상기 이동하는 대상자가 상기 복수의 보호 장비를 제대로 착용하지 않는 경우, 경고 알림를 출력하는 이동 로봇이 상기 대상자가 위치한 영역으로 이동하도록 상기 통신부를 제어하는, 피드백 정보 제공 장치.
PCT/KR2022/009787 2021-07-19 2022-07-06 보호 장비 착용에 대한 피드백 정보를 제공하는 방법, 이를 적용한 장치 및 기록 매체 WO2023003230A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020210093969A KR102530094B1 (ko) 2021-07-19 2021-07-19 보호 장비 착용에 대한 피드백 정보를 제공하는 방법, 이를 적용한 장치 및 기록 매체
KR10-2021-0093969 2021-07-19

Publications (1)

Publication Number Publication Date
WO2023003230A1 true WO2023003230A1 (ko) 2023-01-26

Family

ID=84980274

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2022/009787 WO2023003230A1 (ko) 2021-07-19 2022-07-06 보호 장비 착용에 대한 피드백 정보를 제공하는 방법, 이를 적용한 장치 및 기록 매체

Country Status (2)

Country Link
KR (2) KR102530094B1 (ko)
WO (1) WO2023003230A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014154129A (ja) * 2013-02-14 2014-08-25 Fujita Corp 装備認識システム
KR20170027060A (ko) * 2015-09-01 2017-03-09 주식회사 에스원 영상 분석을 이용한 병원 내의 의료용 안전 보호구 착용상태 모니터링 시스템 및 방법
KR20190070935A (ko) * 2016-10-14 2019-06-21 쓰리엠 이노베이티브 프로퍼티즈 캄파니 개인 보호 장비를 위한 컨텍스트 기반 프로그램가능 안전 규칙
KR20200036531A (ko) * 2018-09-28 2020-04-07 진현미 룰 설정에 기반한 건설현장 안전시스템 및 그 제공방법
KR102136070B1 (ko) * 2020-02-05 2020-07-21 안광호 인공지능형 영상분석을 이용한 건설현장의 재난 및 사고 예방장치

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101073815B1 (ko) * 2008-11-20 2011-10-17 주식회사 코아로직 영상 감시용 휴대 단말기, 및 이를 이용한 영상 감시 방법
KR101033349B1 (ko) * 2009-03-24 2011-05-09 아주대학교산학협력단 안전모 착용 비전 감시 시스템 및 방법
JP5662856B2 (ja) * 2011-03-25 2015-02-04 株式会社日立国際電気 警報システム
KR101872314B1 (ko) 2016-10-28 2018-06-28 주식회사 서안에스앤씨 건설현장 작업자 안전장구 착용 유무 감시 시스템

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014154129A (ja) * 2013-02-14 2014-08-25 Fujita Corp 装備認識システム
KR20170027060A (ko) * 2015-09-01 2017-03-09 주식회사 에스원 영상 분석을 이용한 병원 내의 의료용 안전 보호구 착용상태 모니터링 시스템 및 방법
KR20190070935A (ko) * 2016-10-14 2019-06-21 쓰리엠 이노베이티브 프로퍼티즈 캄파니 개인 보호 장비를 위한 컨텍스트 기반 프로그램가능 안전 규칙
KR20200036531A (ko) * 2018-09-28 2020-04-07 진현미 룰 설정에 기반한 건설현장 안전시스템 및 그 제공방법
KR102136070B1 (ko) * 2020-02-05 2020-07-21 안광호 인공지능형 영상분석을 이용한 건설현장의 재난 및 사고 예방장치

Also Published As

Publication number Publication date
KR102600191B1 (ko) 2023-11-07
KR20230069064A (ko) 2023-05-18
KR20230013337A (ko) 2023-01-26
KR102530094B1 (ko) 2023-05-04

Similar Documents

Publication Publication Date Title
WO2019132168A1 (ko) 수술영상데이터 학습시스템
WO2020130309A1 (ko) 영상 마스킹 장치 및 영상 마스킹 방법
WO2015008936A1 (ko) 습관을 이용한 진단 장치 및 진단 관리 장치와 그를 이용한 진단 방법
WO2015194808A1 (ko) 어지럼증 진단 및 치료 장치
WO2020235939A2 (ko) 이동통신 단말기에서의 안면 인식을 이용한 관련 질환 모니터링 방법 및 시스템
WO2021235833A1 (ko) 출입자의 마스크 탐지 및 체온 보정을 이용한 인공지능 기반 스마트패스 시스템
WO2020111754A9 (ko) 세미 슈퍼바이즈드 학습을 이용한 진단 시스템 제공방법 및 이를 이용하는 진단 시스템
WO2021153858A1 (ko) 비정형 피부질환 영상데이터를 활용한 판독보조장치
WO2019182368A1 (ko) 건강관리 데이터 제공 방법, 서버 및 프로그램
WO2022086147A1 (en) Method for training and testing user learning network to be used for recognizing obfuscated data created by obfuscating original data to protect personal information and user learning device and testing device using the same
WO2023003230A1 (ko) 보호 장비 착용에 대한 피드백 정보를 제공하는 방법, 이를 적용한 장치 및 기록 매체
WO2020085745A1 (ko) 의료 데이터 관리 시스템 및 그 방법
WO2021201582A1 (ko) 피부 병변의 원인 분석 방법 및 장치
WO2022050668A1 (ko) 깊이 영상을 이용한 착용형 증강현실 장치의 손동작 검출 방법 및 깊이 영상을 이용한 손동작 검출이 가능한 착용형 증강현실 장치
WO2023136695A1 (ko) 환자의 가상 폐 모델을 생성하는 장치 및 방법
WO2023038172A1 (ko) 멀티 모달 센서를 이용한 심박수 측정이 가능한 출입 통제 인증 시스템 및 방법
WO2020218754A1 (ko) 챗봇 문진을 이용한 신체 검진 방법 및 시스템, 신체 검진 방법 및 시스템
WO2021096136A1 (ko) 전자 장치 및 그 제어 방법
WO2022050742A1 (ko) 깊이 영상을 이용한 착용형 증강현실 장치의 손동작 검출 방법 및 깊이 영상을 이용한 손동작 검출이 가능한 착용형 증강현실 장치
WO2021066275A1 (ko) 전자 장치 및 그 제어 방법
WO2021045564A2 (ko) 온도 윤곽 센싱 장치와 통신하는 제어 서버의 동작 방법
WO2024071888A1 (ko) 감시 장치 및 방법
WO2020080616A1 (ko) 인공 신경망에 기반한 영상 처리 방법 및 장치
WO2023027260A1 (ko) 중이염 고막 영상에 기계 학습 모델을 이용하여 정상 고막 영상을 생성하기 위한 고막 영상 처리 장치 및 방법
WO2015060486A1 (ko) 영상 진단 장치 및 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22846102

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE