KR20240068484A - Untact Walking-through Multi-body Fever Check System based on Edge-Computing Technology - Google Patents

Untact Walking-through Multi-body Fever Check System based on Edge-Computing Technology Download PDF

Info

Publication number
KR20240068484A
KR20240068484A KR1020220150001A KR20220150001A KR20240068484A KR 20240068484 A KR20240068484 A KR 20240068484A KR 1020220150001 A KR1020220150001 A KR 1020220150001A KR 20220150001 A KR20220150001 A KR 20220150001A KR 20240068484 A KR20240068484 A KR 20240068484A
Authority
KR
South Korea
Prior art keywords
body temperature
photographed object
thermal imaging
imaging camera
temperature
Prior art date
Application number
KR1020220150001A
Other languages
Korean (ko)
Inventor
김상복
명동식
하윤식
피경준
Original Assignee
주식회사 에스비시스템즈
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 에스비시스템즈 filed Critical 주식회사 에스비시스템즈
Priority to KR1020220150001A priority Critical patent/KR20240068484A/en
Publication of KR20240068484A publication Critical patent/KR20240068484A/en

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/01Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7271Specific aspects of physiological measurement analysis
    • A61B5/7282Event detection, e.g. detecting unique waveforms indicative of a medical condition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/06Measuring instruments not otherwise provided for
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/0022Radiation pyrometry, e.g. infrared or optical thermometry for sensing the radiation of moving bodies
    • G01J5/0025Living bodies
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/02Constructional details
    • G01J5/025Interfacing a pyrometer to an external device or network; User interface
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/48Thermography; Techniques using wholly visual means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/06Measuring instruments not otherwise provided for
    • A61B2090/061Measuring instruments not otherwise provided for for measuring dimensions, e.g. length
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2560/00Constructional details of operational features of apparatus; Accessories for medical measuring apparatus
    • A61B2560/02Operational features
    • A61B2560/0223Operational features of calibration, e.g. protocols for calibrating sensors

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Surgery (AREA)
  • General Physics & Mathematics (AREA)
  • Veterinary Medicine (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Public Health (AREA)
  • Animal Behavior & Ethology (AREA)
  • Molecular Biology (AREA)
  • Medical Informatics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Human Computer Interaction (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Biophysics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Psychiatry (AREA)
  • Physiology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Theoretical Computer Science (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

본 발명의 일 측면은 엣지컴퓨팅 기술기반의 비접촉 워킹스루 다중 인체발열 체크 시스템에 관한 것으로, 더욱 상세하게는 생활방역 시대에 다중시설에서 개인의 활동을 방해하지 않으면서 대기 줄 없이 발열 의심 자를 판별하고, 바이러스 확산 가능성을 미리 차단하기 위한 엣지컴퓨팅 기술기반의 비접촉 워킹스루 다중 인체발열 체크 시스템에 관한 것이다.
본 발명의 일 실시예에 따르면 열화상 카메라로 실제 체온과의 오차범위를 최소화한 체온측정이 가능하게 한다.
One aspect of the present invention relates to a non-contact walking-through multiple body temperature check system based on edge computing technology. More specifically, in the era of daily quarantine, it identifies people suspected of having a fever without waiting in line without interfering with individual activities in multiple facilities. , It is about a non-contact walking-through multi-body fever check system based on edge computing technology to prevent the possibility of virus spread in advance.
According to one embodiment of the present invention, it is possible to measure body temperature with a minimum error range from actual body temperature using a thermal imaging camera.

Description

엣지컴퓨팅 기술기반의 비접촉 워킹스루 다중 인체발열 체크 시스템{Untact Walking-through Multi-body Fever Check System based on Edge-Computing Technology}Non-contact walking-through multi-body fever check system based on edge computing technology {Untact Walking-through Multi-body Fever Check System based on Edge-Computing Technology}

본 발명의 일 측면은 엣지컴퓨팅 기술기반의 비접촉 워킹스루 다중 인체발열 체크 시스템에 관한 것으로, 더욱 상세하게는 생활방역 시대에 다중시설에서 개인의 활동을 방해하지 않으면서 대기 줄 없이 발열 의심 자를 판별하고, 바이러스 확산 가능성을 미리 차단하기 위한 엣지컴퓨팅 기술기반의 비접촉 워킹스루 다중 인체발열 체크 시스템에 관한 것이다.One aspect of the present invention relates to a non-contact walking-through multiple body temperature check system based on edge computing technology. More specifically, in the era of daily quarantine, it identifies people suspected of having a fever without waiting in line without interfering with individual activities in multiple facilities. , It is about a non-contact walking-through multi-body fever check system based on edge computing technology to prevent the possibility of virus spread in advance.

이 부분에 기술된 내용은 단순히 본 발명의 실시예에 대한 배경 정보를 제공할 뿐 종래기술을 구성하는 것은 아니다.The content described in this section simply provides background information on embodiments of the present invention and does not constitute prior art.

체온은 신체 내부의 온도를 말한다. 체온은 신체의 부위에 따라 매우 차이가 있지만, 항문에서 6cm 이상 들어간 곳에서 측정한 직장의 온도를 표준체온으로 한다. 인간의 정상 체온은 겨드랑이 온도로 369℃라고 하며, 소아는 성인보다 약간 높고, 노인은 낮은 경향이 있다.Body temperature refers to the temperature inside the body. Body temperature varies greatly depending on the part of the body, but the rectal temperature measured more than 6cm from the anus is considered the standard body temperature. The normal human body temperature is said to be 369°C in the armpits, with children tending to be slightly higher than adults and the elderly tending to be lower.

체온의 고온 상태는 저온 상태보다 심각한 상황을 야기한다. 체온은 성인의 경우 약 37℃가 정상체온이나, 약 41℃에서는 경련과 고통 유발하며, 433℃는 생명 유지의 최대 한계점이다. 또한 체온 27℃이하에서도 생명을 유지할 수 없다.A high temperature state causes a more serious situation than a low temperature state. For adults, normal body temperature is about 37℃, but about 41℃ causes convulsions and pain, and 433℃ is the maximum limit for maintaining life. Additionally, life cannot be maintained even when the body temperature is below 27℃.

이러한 체온은 질환에 따라 반응하는데, 병원에 입원한 환자는 병실에 거주하면서, 주기적인 검사를 받는다. 이러한 주기적 검사하는 항목은 혈압, 맥박수 및 체온 등이 그 대상이다. 이 중에서 혈압 및 맥박은 해당 측정장치를 환자의 몸에 부착하여 실시간으로 체크가 가능하다.This body temperature responds depending on the disease, and patients admitted to the hospital live in the room and undergo periodic tests. Items that are periodically checked include blood pressure, pulse rate, and body temperature. Among these, blood pressure and pulse can be checked in real time by attaching the corresponding measuring device to the patient's body.

그런데 체온은 실시간으로 검사하기 위한 적당한 장치가 부재하여, 환자의 체온 검사는 담당 간호사가 체온계를 이용하여 일정 주기로 측정하고 있다. 이에 체온을 검사하기 위한 많은 인력이 소요되는 문제점 있다.However, since there is no suitable device to check body temperature in real time, the nurse in charge measures the patient's body temperature at regular intervals using a thermometer. Therefore, there is a problem that it takes a lot of manpower to check body temperature.

또한 체온의 검사는 입원 환자의 경우, 주간뿐만 아니라 야간에도 이루어지는데, 야간 검사시 환자를 깨우게 되는 문제점이 있다.Additionally, in the case of hospitalized patients, body temperature is tested not only during the day but also at night, but there is a problem in that the patient is woken up during the night test.

특히, 병원뿐만 아니라 지하철, 공원, 운동장, 군부대 등 다중이용시설의 경우에 위와 같은 문제점은 여전히 존재하므로 이러한 문제점을 해결하고자 열화상 카메라 등을 이용하는 비접촉 방식의 발열 체크 시스템의 개발이 시급하다.In particular, the above problems still exist not only in hospitals but also in multi-use facilities such as subways, parks, playgrounds, and military bases, so the development of a non-contact fever check system using thermal imaging cameras is urgently needed to solve these problems.

전술한 배경기술은 발명자가 본 발명의 실시예들의 도출을 위해 보유하고 있었거나, 도출 과정에서 습득한 기술 정보로서, 반드시 본 발명의 실시예들의 출원 전에 일반 공중에게 공개된 공지기술이라 할 수는 없다.The above-mentioned background technology is technical information that the inventor possessed for deriving the embodiments of the present invention or acquired during the derivation process, and cannot necessarily be said to be known technology disclosed to the general public before the application for the embodiments of the present invention. does not exist.

이에 본 발명에 따른 일 측면은, 전술한 문제점을 해결하기 위해 제안된 것으로서, 본 발명의 목적은 열화상 카메라로 실제 체온과의 오차범위를 최소화한 체온측정이 가능하게 한 인체발열 체크 시스템을 제공함에 있다. Accordingly, one aspect of the present invention has been proposed to solve the above-mentioned problems, and the purpose of the present invention is to provide a human body fever check system that enables body temperature measurement with a minimum error range from the actual body temperature using a thermal imaging camera. It is in

또한, 본 발명의 다른 목적은 다중시설 이용자에게 적용할 경우 동시에 여러 객체의 체온을 정확하게 측정할 수 있는 인체발열 체크 시스템을 제공함에 있다.In addition, another object of the present invention is to provide a human body temperature check system that can accurately measure the body temperature of multiple objects at the same time when applied to users of multiple facilities.

본 발명이 이루고자 하는 기술적 과제는 이상에서 언급한 기술적 과제로 제한되지 않으며 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The technical problem to be achieved by the present invention is not limited to the technical problem mentioned above, and other technical problems not mentioned can be clearly understood by those skilled in the art from the description below. will be.

위에 제기된 과제를 달성하기 위하여, 본 발명의 일 측면은 촬영 객체의 열화상을 촬영하는 열화상 카메라;In order to achieve the above-posed problem, one aspect of the present invention is a thermal imaging camera that captures a thermal image of a photographed object;

상기 촬영 객체에 대한 영상을 촬영하는 영상 카메라; 및a video camera that captures an image of the photographed object; and

상기 열화상 카메라로부터 전송된 열화상에 근거하여 상기 촬영 객체의 체온을 산출하는 제어부; a control unit that calculates the body temperature of the photographed object based on the thermal image transmitted from the thermal imaging camera;

상기 제어부는, The control unit,

상기 열화상 카메라로부터 상기 열화상을 전송받고, 상기 열화상 중에서 상기 촬영 객체의 얼굴 영역에서 체온을 검출하며, Receiving the thermal image from the thermal imaging camera, detecting body temperature in the facial area of the photographed object from the thermal image,

상기 영상 카메라로부터 상기 영상을 전송받고, 상기 전송받은 영상을 기초로 상기 촬영 객체와 상기 열화상 카메라 간의 거리를 계산하며, 상기 계산된 거리를 기초로 상기 검출된 체온을 보정하여 사용자 단말기에 표시되도록 하는 인체발열 체크 시스템을 제공할 수 있다. Receive the image from the video camera, calculate the distance between the photographed object and the thermal imaging camera based on the transmitted image, correct the detected body temperature based on the calculated distance, and display it on the user terminal. A human body temperature check system can be provided.

실시예에 따라서 상기 제어부는 상기 영상 카메라로부터 전송된 상기 영상에서 상기 촬영 객체의 상기 얼굴 영역의 크기를 측정하고, 상기 얼굴 영역의 크기에 기초하여 상기 촬영 객체와 상기 열화상 카메라 간의 거리를 계산하는 것을 특징으로 할 수 있다.According to an embodiment, the control unit measures the size of the face area of the photographed object in the image transmitted from the video camera, and calculates the distance between the photographed object and the thermal imaging camera based on the size of the face region. It can be characterized as:

실시예에 따라서 상기 제어부는 기계학습을 수행하는 학습모델에 의하여 상기 영상 카메라로부터 전송받은 상기 영상에서 상기 체온이 표시되는 상기 촬영 객체의 얼굴을 인식하여 상기 체온이 표시되는 상기 촬영 객체의 신원을 식별하는 것을 특징으로 할 수 있다.According to an embodiment, the control unit identifies the identity of the photographed object whose body temperature is displayed by recognizing the face of the photographed object whose body temperature is displayed in the image transmitted from the video camera by a learning model that performs machine learning. It can be characterized as:

실시예에 따라서 상기 제어부는 외부로부터 기준온도를 수집하고, 상기 수집된 기준온도와 상기 검출된 체온을 비교하여 상기 사용자 단말기에 표시되도록 하는 것을 특징으로 할 수 있다.Depending on the embodiment, the control unit may collect a reference temperature from the outside, compare the collected reference temperature with the detected body temperature, and display the information on the user terminal.

실시예에 따라서 상기 제어부는 엣지 컴퓨팅에 기반하는 것을 특징으로 할 수 있다.Depending on the embodiment, the control unit may be based on edge computing.

실시예에 따라서 상기 제어부는 상기 표시되는 체온이 설정범위를 벋어나는 경우, 발열의심 경고 이벤트를 발생시키는 것을 특징으로 할 수 있다.Depending on the embodiment, the control unit may generate a fever suspicion warning event when the displayed body temperature exceeds a set range.

실시예에 따라서 상기 제어부는 상기 경고 이벤트를 발생시킨 뒤에는 체온을 측정한 상기 촬영 객체와 발열 의심자 리스트를 DB에 저장하는 것을 특징으로 할 수 있다.Depending on the embodiment, after generating the warning event, the control unit may store the photographed object whose body temperature was measured and a list of people suspected of having a fever in a DB.

이상에서 설명한 바와 같이 본 발명의 일 실시예에 따르면 열화상 카메라로 실제 체온과의 오차범위를 최소화한 체온측정이 가능하게 한다. As described above, according to an embodiment of the present invention, it is possible to measure body temperature with a minimized error range from the actual body temperature using a thermal imaging camera.

또한, 본 발명을 다중시설 이용자에게 적용할 경우 동시에 여러 객체의 체온을 정확하게 측정할 수 있는 효과를 가진다.Additionally, when the present invention is applied to users of multiple facilities, it has the effect of accurately measuring the body temperature of multiple objects at the same time.

이외에도, 본 발명의 효과는 실시예에 따라서 우수한 범용성을 가지는 등 다양한 효과를 가지며, 그러한 효과에 대해서는 후술하는 실시예의 설명 부분에서 명확하게 확인될 수 있다.In addition, the effect of the present invention has various effects such as excellent versatility depending on the embodiment, and such effects can be clearly confirmed in the description of the embodiment described later.

본 명세서에 첨부되는 다음의 도면들은 본 발명의 일 실시예를 예시하는 것이며, 전술된 발명의 상세한 설명과 함께 본 발명의 기술사상을 더욱 이해시키는 역할을 하는 것이므로, 본 발명은 그러한 도면에 기재된 사항에만 한정되어 해석되어서는 아니 된다.
도 1은 본 발명에 따른 인체 발열체크 시스템의 전체적인 구성을 나타낸 도면이다.
도 2는 본 발명의 일 실시예에 따른 열화상 카메라 모듈의 구성을 나타낸 도면이다.
도 3은 도 2의 열화상 카메라 모듈의 하드웨어적 구성을 나타낸 도면이다.
도 4는 본 발명에 따른 인체 발열체크 시스템을 병실에 적용한 일 실시예를 나타낸 것이다.
The following drawings attached to this specification illustrate an embodiment of the present invention, and serve to further understand the technical idea of the present invention along with the detailed description of the above-described invention. Therefore, the present invention includes the matters described in such drawings. It should not be interpreted as limited to only .
Figure 1 is a diagram showing the overall configuration of the human body temperature check system according to the present invention.
Figure 2 is a diagram showing the configuration of a thermal imaging camera module according to an embodiment of the present invention.
FIG. 3 is a diagram showing the hardware configuration of the thermal imaging camera module of FIG. 2.
Figure 4 shows an example of applying the human body temperature check system according to the present invention to a hospital room.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 설명되는 실시 예들을 참조하면 명확해질 것이다. 그러나 본 발명은 아래에서 제시되는 실시 예들로 한정되는 것이 아니라, 서로 다른 다양한 형태로 구현될 수 있고, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 아래에 제시되는 실시 예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.The advantages and features of the present invention and methods for achieving them will become clear by referring to the embodiments described in detail together with the accompanying drawings. However, the present invention is not limited to the embodiments presented below, but may be implemented in various different forms, and should be understood to include all conversions, equivalents, and substitutes included in the spirit and technical scope of the present invention. . The embodiments presented below are provided to ensure that the disclosure of the present invention is complete and to fully inform those skilled in the art of the scope of the invention. In describing the present invention, if it is determined that a detailed description of related known technologies may obscure the gist of the present invention, the detailed description will be omitted.

본 출원에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. The terms used in this application are only used to describe specific embodiments and are not intended to limit the invention. Singular expressions include plural expressions unless the context clearly dictates otherwise.

본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다. 제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 상기 용어들에 의해 한정되어서는 안된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.In this application, terms such as “comprise” or “have” are intended to designate the presence of features, numbers, steps, operations, components, parts, or combinations thereof described in the specification, but are not intended to indicate the presence of one or more other features. It should be understood that this does not exclude in advance the possibility of the existence or addition of elements, numbers, steps, operations, components, parts, or combinations thereof. Terms such as first, second, etc. may be used to describe various components, but the components should not be limited by these terms. The above terms are used only for the purpose of distinguishing one component from another.

이하, 본 발명에 따른 실시 예들을 첨부된 도면을 참조하여 상세히 설명하기로 하며, 첨부 도면을 참조하여 설명함에 있어, 동일하거나 대응하는 구성 요소는 동일한 도면번호를 부여하고 이에 대한 중복되는 설명은 생략한다.Hereinafter, embodiments according to the present invention will be described in detail with reference to the accompanying drawings. In the description with reference to the accompanying drawings, identical or corresponding components are assigned the same drawing numbers and overlapping descriptions thereof are omitted. do.

도 1은 본 발명에 따른 인체 발열체크 시스템의 전체적인 구성을 나타낸 도면이고, 도 2는 본 발명의 일 실시예에 따른 열화상 카메라 모듈의 구성을 나타낸 도면이다.Figure 1 is a diagram showing the overall configuration of a human body temperature check system according to the present invention, and Figure 2 is a diagram showing the configuration of a thermal imaging camera module according to an embodiment of the present invention.

도 3은 도 2의 열화상 카메라 모듈의 하드웨어적 구성을 나타낸 도면이고, 도 4는 본 발명에 따른 인체 발열체크 시스템을 병실에 적용한 일 실시예를 나타낸 것이다.Figure 3 is a diagram showing the hardware configuration of the thermal imaging camera module of Figure 2, and Figure 4 shows an embodiment of the human body temperature check system according to the present invention applied to a hospital room.

본 발명의 일 실시예에 따른 인체발열 체크 시스템은 촬영 객체의 열화상을 촬영하는 열화상 카메라(110);A human body fever check system according to an embodiment of the present invention includes a thermal imaging camera 110 that captures a thermal image of a photographed object;

촬영 객체에 대한 영상을 촬영하는 영상 카메라(120); 및A video camera 120 that captures an image of a photographed object; and

열화상 카메라(110)로부터 전송된 열화상에 근거하여 촬영 객체의 체온을 산출하는 제어부(130); 중에서 하나 이상을 포함하여 구성될 수 있다.A control unit 130 that calculates the body temperature of the photographed object based on the thermal image transmitted from the thermal imaging camera 110; It may be composed of one or more of the following.

실시예에 따라서 제어부(130)는, 열화상 카메라(110)로부터 열화상을 전송받고, 전송받은 열화상 중에서 촬영 객체의 얼굴 영역에서 체온을 검출할 수 있다.Depending on the embodiment, the control unit 130 may receive a thermal image from the thermal imaging camera 110 and detect body temperature in the face area of the photographed object from the received thermal image.

또한 제어부(130)는 영상 카메라(120)로부터 영상을 전송받고, 전송받은 영상을 기초로 촬영 객체와 열화상 카메라(110) 간의 거리를 계산하며, 계산된 거리를 기초로 검출된 체온을 보정하여 사용자 단말기에 표시되도록 할 수 있다.In addition, the control unit 130 receives an image from the video camera 120, calculates the distance between the photographed object and the thermal imaging camera 110 based on the transmitted image, and corrects the detected body temperature based on the calculated distance. It can be displayed on the user terminal.

실시예에 따라서 제어부(130)는 영상 카메라(120)로부터 전송된 영상에서 촬영 객체의 얼굴 영역의 크기를 측정하고, 얼굴 영역의 크기에 기초하여 촬영 객체와 열화상 카메라(110) 간의 거리를 계산하는 것을 특징으로 할 수 있다.According to the embodiment, the control unit 130 measures the size of the face area of the photographed object in the image transmitted from the video camera 120 and calculates the distance between the photographed object and the thermal imaging camera 110 based on the size of the face region. It can be characterized as:

실시예에 따라서 열화상 카메라(110)는 보통 천정에 설치될 수 있다. 천정에 설치되어 유무선 통신에 의하여 촬영된 열화상과 관련한 정보를 관리자 단말기(200)로 전송할 수 있다.Depending on the embodiment, the thermal imaging camera 110 may usually be installed on the ceiling. It is installed on the ceiling and can transmit information related to thermal images captured through wired or wireless communication to the manager terminal 200.

영상 카메라(120)가 촬영한 영상에서 촬영 객체의 얼굴에 가상의 영역(ROI, Region of Interest)을 지정하고 가상의 영역으로 특정된 얼굴의 크기를 기초로 촬영 객체와 열화상 카메라(110) 간의 거리를 결정할 수 있다. 예컨대, 얼굴의 크기로 촬영 객체가 열화상 카메라(110)로부터 1m 거리에 있는지, 2m 거리에 있는지 또는 5m 거리에 있는지 여부를 결정할 수 있다.In the image captured by the video camera 120, a virtual region (ROI, Region of Interest) is assigned to the face of the photographed object, and a relationship between the photographed object and the thermal imaging camera 110 is determined based on the size of the face specified in the virtual area. Distance can be determined. For example, it can be determined whether the photographed object is 1 m away, 2 m away, or 5 m away from the thermal imaging camera 110 based on the size of the face.

촬영 객체가 열화상 카메라(110)로부터 1m 거리에 있을 때의 촬영 객체의 피부 온도와 2m 거리에 있을 때의 촬영 객체의 피부 온도는 차이가 있다. 따라서 거리에 따라서 열화상 카메라(110)가 촬영한 열화상에 오차가 발생하게 된다. 이 오차를 줄이기 위하여 거리를 기초로 열화상 카메라(110)가 촬영한 열화상에 의한 체온을 보정할 수 있다. 즉, 온도의 보정을 하기 위해서 거리를 측정할 수 있다.There is a difference between the skin temperature of the photographed object when the photographed object is 1 m away from the thermal imaging camera 110 and the skin temperature of the photographed object when the photographed object is 2 m away. Therefore, errors occur in the thermal image captured by the thermal imaging camera 110 depending on the distance. In order to reduce this error, the body temperature according to the thermal image captured by the thermal imaging camera 110 can be corrected based on the distance. In other words, the distance can be measured to correct the temperature.

촬영 객체와 열화상 카메라(110) 간의 거리에 따른 온도 보정이 이루어 지기 위해서 촬영 객체와 열화상 카메라(110) 간의 거리에 따른 온도보정 알고리즘을 적용할 수 있다.In order to perform temperature correction according to the distance between the photographed object and the thermal imaging camera 110, a temperature correction algorithm according to the distance between the photographed object and the thermal imaging camera 110 can be applied.

온도보정 알고리즘은 실시예에 따라서 촬영 객체의 얼굴의 크기로 거리에 따른 온도를 보정할 수 있다. 실시예에 따라서 촬영 객체의 얼굴의 크기를 H, 얼굴 상의 크기를 h라 하고, 영상 카메라(120) 초점을 f, 얼굴까지의 거리를 d라고 할 때, 다음과 같은 수식이 성립될 수 있다.Depending on the embodiment, the temperature correction algorithm may correct the temperature according to the distance to the size of the face of the photographed object. Depending on the embodiment, if the size of the face of the photographed object is H, the size of the face is h, the focus of the video camera 120 is f, and the distance to the face is d, the following equation can be established.

[수학식1][Equation 1]

f : h= d: H , d=(f*H)/hf : h= d: H , d=(f*H)/h

수학식 1에 의하면 영상 카메라(120)와 촬영 객체의 얼굴까지의 거리는 얼굴 상의 크기에 반비례한다. 또한 영상 카메라(120)의 렌즈와 열화상 카메라(110)의 렌즈는 각각 촬영 객체로부터 동일한 거리에 위치하도록 구성할 수 있다. 본 구성을 위해서 열화상 카메라(110)와 영상 카메라(120)는 하나의 하우징으로 보호되는 구조를 가질 수 있으며, 전면부에 열화상 카메라(110)와 영상 카메라(120)의 렌즈가 각각 동일한 방향을 향하도록 배치될 수 있다.According to Equation 1, the distance between the video camera 120 and the face of the photographed object is inversely proportional to the size of the face. Additionally, the lens of the video camera 120 and the lens of the thermal imaging camera 110 may each be configured to be positioned at the same distance from the photographed object. For this configuration, the thermal imaging camera 110 and the video camera 120 may have a structure in which they are protected by a single housing, and the lenses of the thermal imaging camera 110 and the video camera 120 on the front may be oriented in the same direction. It can be placed to face.

실시예에 따라서 제어부(130)는 외부로부터 기준온도를 수집하고, 수집된 기준온도와 검출된 체온을 비교하여 사용자 단말기에 표시되도록 하는 것을 특징으로 할 수 있다.Depending on the embodiment, the control unit 130 may collect the reference temperature from the outside, compare the collected reference temperature with the detected body temperature, and display it on the user terminal.

본 발명의 일 실시예에 따른 인체 발열체크 시스템(10)은 거리보정과 별도로 추가적으로 열화상 카메라(110)가 측정하는 열화상의 온도를 보정을 하기 위하여 TRSM 모듈(140, Temperature Reference Source Module)을 추가로 구비할 수 있다.The human body temperature check system 10 according to an embodiment of the present invention adds a TRSM module (140, Temperature Reference Source Module) to additionally correct the temperature of the thermal image measured by the thermal imaging camera 110, separately from distance correction. It can be provided with

TRSM 모듈(140)은 실시예에 따라서 열화상 카메라(110)의 화각 안의 범위 내에서 일정한 기준온도를 계속적으로 발생시켜주고 해당 기준온도를 열화상카메라가 실시간으로 감지하는 방식으로 열화상 카메라(110)가 체온측정의 기준온도를 자동으로 상시 유지할 수 있도록 제어해주는 장치를 포함할 수 있다.Depending on the embodiment, the TRSM module 140 continuously generates a constant reference temperature within the range of view of the thermal imaging camera 110, and the thermal imaging camera 110 detects the corresponding reference temperature in real time. ) may include a device that controls the body temperature measurement so that it can automatically maintain the reference temperature at all times.

실시예에 따라서 TRSM 모듈(140)은 기준온도 예컨대 35도를 항상 유지 시켜 주기 때문에 열화상 카메라(110)의 설치 환경에 따라 달라지는 온도차를 기준온도를 기준으로 보정하기 위해 적용할 수 있다. Depending on the embodiment, the TRSM module 140 always maintains the reference temperature, for example, 35 degrees, so it can be applied to correct the temperature difference that varies depending on the installation environment of the thermal imaging camera 110 based on the reference temperature.

TRSM 모듈(140)은 실시예에 따라서 열화상 카메라(110)의 렌즈의 전방에 배치될 수 있으며, 열화상 카메라(110)의 렌즈와 일정 거리 이격되어 배치될 수 있다. 구체적으로 열화상 카메라(110)의 렌즈가 향하는 전면부로 거치대(150)가 돌출 형성될 수 있으며, 이 거치대(150)에 설치되어 열화상 카메라(110)의 렌즈를 향하도록 설치될 수 있다. 이렇게 설치된 TRSM 모듈(140)은 열화상 카메라(110)의 화각 안의 범위 내로 일정한 기준온도를 계속적으로 조사할 수 있게 된다. 열화상 카메라(110)는 TRSM 모듈(140)로부터 기준온도를 계속적으로 제공받을 수 있으며, 제어부(130)는 열화상 카메라(110)가 촬영 객체로부터 촬영한 열화상의 온도와 기준온도를 비교하여 열화상 카메라(110)의 설치환경에 따른 오차를 보정할 수 있다. Depending on the embodiment, the TRSM module 140 may be placed in front of the lens of the thermal imaging camera 110, and may be placed at a certain distance from the lens of the thermal imaging camera 110. Specifically, a holder 150 may be formed to protrude from the front part where the lens of the thermal imaging camera 110 faces, and may be installed on this holder 150 to face the lens of the thermal imaging camera 110. The TRSM module 140 installed in this way can continuously survey a certain reference temperature within the field of view of the thermal imaging camera 110. The thermal imaging camera 110 can continuously receive the reference temperature from the TRSM module 140, and the control unit 130 compares the reference temperature with the temperature of the thermal image captured by the thermal imaging camera 110 from the object to be captured. Errors depending on the installation environment of the image camera 110 can be corrected.

구체적으로 TRSM 모듈(140)은 기준 온도값을 계속적으로 열화상 카메라(110)로 조사할 수 있다. 예컨대 기준온도가 36.5도라면 이 온도를 유지하는 빔을 계속적으로 조사한다. 이러한 방식을 통하여 열화상 카메라(110)의 열화상의 정밀도를 더욱 높일 수 있다.Specifically, the TRSM module 140 can continuously examine the reference temperature value with the thermal imaging camera 110. For example, if the standard temperature is 36.5 degrees, the beam that maintains this temperature is continuously irradiated. Through this method, the precision of thermal images of the thermal imaging camera 110 can be further improved.

실시예에 따라서 제어부(130)는 기계학습을 수행하는 학습모델에 의하여 영상 카메라(120)로부터 전송받은 영상에서 체온이 표시되는 촬영 객체의 얼굴을 인식하여 체온이 표시되는 촬영 객체의 신원을 식별하는 것을 특징으로 할 수 있다.Depending on the embodiment, the control unit 130 recognizes the face of the photographed object whose body temperature is displayed in the image transmitted from the video camera 120 by a learning model that performs machine learning and identifies the identity of the photographed object whose body temperature is displayed. It can be characterized as:

이러한 구성을 통하여 본 발명의 일 실시예에 따른 인체 발열체크 시스템(10)은 발열자의 신상을 확인할 수 있으며 이상 발열자가 감지된 경우에는 후술할 경고 이벤트를 발생시킬 수도 있다.Through this configuration, the human body temperature check system 10 according to an embodiment of the present invention can confirm the identity of the person with a fever, and when a person with an abnormal fever is detected, it can also generate a warning event to be described later.

실시예에 따라서 제어부(130)는 엣지 컴퓨팅에 기반하는 것을 특징으로 할 수 있다. 이러한 엣지 컴퓨팅에 의하여 별도의 PC나 서버가 필요없이 열화상 카메라(110)의 하우징 내부에 제어부(130)가 함께 설치될 수 있으며, 열화상 카메라(110)로부터 관리자 단말기(200)로 직접 열화상 정보가 전송될 수 있다.Depending on the embodiment, the control unit 130 may be based on edge computing. Through this edge computing, the control unit 130 can be installed inside the housing of the thermal imaging camera 110 without the need for a separate PC or server, and thermal images can be transmitted directly from the thermal imaging camera 110 to the administrator terminal 200. Information may be transmitted.

실시예에 따라서 제어부(130)는 표시되는 체온이 설정범위를 벋어나는 경우, 발열의심 경고 이벤트를 발생시키는 것을 특징으로 할 수 있다.Depending on the embodiment, the control unit 130 may generate a fever suspicion warning event when the displayed body temperature exceeds a set range.

실시예에 따라서 제어부(130)는 경고 이벤트를 발생시킨 뒤에는 체온을 측정한 상기 촬영 객체와 발열 의심자 리스트를 DB에 저장하는 것을 특징으로 할 수 있다.Depending on the embodiment, after generating a warning event, the control unit 130 may store the photographed object whose body temperature is measured and the list of fever suspects in the DB.

본 발명에 따른 열화상 카메라(110)를 이용한 인체발열 체크 시스템은, 열화상 카메라(110) 모듈(100)과 관리자 단말기(200)와 이 둘을 연결하는 네트워크(300)를 포함하여 구성될 수 있다. 여기서 열화상 카메라(110) 모듈(100)은 열화상 카메라(110), 제어부(130), 영상 카메라(120) 및 TRSM 모듈(140) 중 하나 이상을 포함하여 구성될 수 있다. The human body fever check system using the thermal imaging camera 110 according to the present invention may be configured to include a thermal imaging camera 110 module 100, an administrator terminal 200, and a network 300 connecting the two. there is. Here, the thermal imaging camera 110 module 100 may be configured to include one or more of a thermal imaging camera 110, a control unit 130, a video camera 120, and a TRSM module 140.

열화상 카메라(110) 모듈(100)은 촬영 객체의 열영상을 촬영하는 장치로, 촬영범위에 있는 촬영 객체를 촬영한다. 여기서 촬영 객체는 병원에 입원한 환자, 군대 내무반에서 단체 생활하는 군인들 등이 될 수 있다.The thermal imaging camera 110 module 100 is a device that captures a thermal image of a photographed object, and captures a photographed object within a photographing range. Here, the filming object can be a patient admitted to a hospital, soldiers living in a group in a military unit, etc.

또한 열화상 카메라(110) 모듈(100)은 제어신호에 따라 촬영 방향이 조정될 수 있다. 즉, 촬영 객체를 촬영하도록 촬영 방향이 조정될 수 있고, 조정된 위치에서 촬영 객체를 촬영할 수 있다.Additionally, the thermal imaging camera 110 module 100 may have its shooting direction adjusted according to a control signal. That is, the shooting direction can be adjusted to photograph the photographed object, and the photographed object can be photographed at the adjusted position.

이를 위해 열화상 카메라(110) 모듈(100)은 열화상 카메라(110), 촬영방향 제어부 및 온도 검출부를 포함하여 구성될 수 있다.To this end, the thermal imaging camera 110 module 100 may be configured to include a thermal imaging camera 110, a shooting direction control unit, and a temperature detection unit.

열화상 카메라(110)는 열(온도) 분포를 측정하는 카메라로 온도 차에 의한 이미지를 생성할 뿐만 아니라 이러한 온도 차를 정확하게 측정할 수 있다. 또한, 절대온도 0K 이상의 모든 물체는 적외선을 자체적으로 발생하기 때문에 열화상 카메라(110)를 이용하여 별도의 조명 없이도 주·야간에 상관없이 영상을 획득할 수 있는 장점이 있다.The thermal imaging camera 110 is a camera that measures heat (temperature) distribution and can not only generate images based on temperature differences but also accurately measure these temperature differences. In addition, since all objects with an absolute temperature of 0K or higher generate infrared rays on their own, there is an advantage in that images can be acquired regardless of day or night without separate lighting using the thermal imaging camera 110.

이러한 열화상 카메라(110)는 야간감시 목적의 군사목적으로 개발되어 왔지만 요즘에는 비접촉식 온도계측장비로 활용도가 인정되어 적용사례가 점점 더 증가하는 추세에 있다.This thermal imaging camera 110 has been developed for military purposes for night-time surveillance, but these days, its utility as a non-contact temperature measurement equipment is recognized, and its application cases are increasing.

열화상 카메라(110)는 별도의 조명 없이 영상을 획득할 수 있고 온도 차를 정확하게 측정할 수 있는 특성을 이용하여 자동차나 철도와 같은 운송수단, 감시시스템, 전자장비의 결함 검사, 신종플루 검사 등 다양한 분야에 적용할 수 있다.The thermal imaging camera 110 is capable of acquiring images without additional lighting and uses the characteristics of accurately measuring temperature differences to inspect transportation such as automobiles and railroads, surveillance systems, defect inspection of electronic equipment, and swine flu inspection. It can be applied to various fields.

본 발명에서 이러한 열화상 카메라(110)가 설치되는 구역은 주기적으로 환자의 체온을 측정해야 할 필요성이 있는 병실, 중환자실 및 지정된 위치를 고수해야 하는 군부대 내부반 구역 등을 포함할 수 있다. 이때 촬영 객체가 복수인 경우, 복수 객체를 최적으로 촬영할 수 있는 천장 또는 벽면에 설치될 수 있으며, 설치 구역의 환경에 따라 별도의 지주에 설치될 수도 있다.In the present invention, the area where the thermal imaging camera 110 is installed may include a hospital room where it is necessary to periodically measure the patient's body temperature, an intensive care unit, and an internal unit area of a military unit where a designated location must be maintained. At this time, if there are multiple objects to be photographed, it can be installed on the ceiling or wall where the plural objects can be optimally photographed, or it can be installed on a separate support depending on the environment of the installation area.

촬영방향 제어부는 입력되는 제어신호에 따라 열화상 카메라(110)의 촬영 방향을 조정할 수 있다. 이에 촬영방향 제어부는 열화상 카메라(110)의 좌우 각도, 상하 각도 및 줌(Zoom) 배율을 조정하기 위해서, 패닝 모듈, 틸팅 모듈 및 배율조정 모듈을 포함할 수 있다.The shooting direction control unit can adjust the shooting direction of the thermal imaging camera 110 according to the input control signal. Accordingly, the shooting direction control unit may include a panning module, a tilting module, and a magnification adjustment module to adjust the left and right angles, up and down angles, and zoom magnification of the thermal imaging camera 110.

패닝(panning)은 좌우로 수평적으로 카메라를 이동시키는 것을 의미하고 틸팅(tilting)은 상하로 움직이는 것을 의미한다. 또한 배율은 줌인/아웃을 통하여 촬영 지역을 확대/축소하는 기능을 의미한다. 이러한 촬영방향 제어부는 카메라를 상하좌우로 움직이는 구동모터(pan drive motor 및 tilt drive motor) 및 렌즈를 움직여서 초점거리를 조절하는 렌즈 구동모터를 하드웨어 또는/및 소프트웨어로 제어함으로써 이루어질 수 있다.Panning means moving the camera horizontally left and right, and tilting means moving it up and down. Additionally, magnification refers to the function of enlarging/reducing the shooting area through zooming in/out. This shooting direction control unit can be achieved by controlling the drive motors (pan drive motor and tilt drive motor) that move the camera up, down, left, and right and the lens drive motor that moves the lens to adjust the focal length with hardware or/and software.

온도 검출부는 열화상 카메라(110)가 설치된 구역의 주변 온도를 검출한다. 검출된 온도는 촬영 객체의 체온을 보정하는 데이터로 사용될 수 있다.The temperature detection unit detects the surrounding temperature of the area where the thermal imaging camera 110 is installed. The detected temperature can be used as data to correct the body temperature of the photographed object.

설계 조건에 따라, 촬영 객체의 주변 온도를 검출하도록 온도 검출부는 별도의 온도 센서로 구성될 수 있다.Depending on design conditions, the temperature detection unit may be configured as a separate temperature sensor to detect the surrounding temperature of the photographed object.

또한 온도 검출부는 열화상 카메라(110) 모듈(100)에 포함되지 않고 촬영 객체의 주변에 설치되는 별도의 장치로 구성될 수도 있다.Additionally, the temperature detection unit may not be included in the thermal imaging camera 110 module 100 but may be configured as a separate device installed around the photographed object.

제어부는 열화상 카메라(110) 모듈(100)로부터 전송된 열영상에 근거하여 촬영된 촬영 객체의 체온을 산출할 수 있다. 또한 산출된 촬영 객체의 체온에 따라 산출된 체온 결과를 관리자 단말기(200)로 전송하도록 구성된다.The control unit may calculate the body temperature of the photographed object based on the thermal image transmitted from the thermal imaging camera 110 module 100. In addition, it is configured to transmit the body temperature result calculated according to the calculated body temperature of the photographed object to the administrator terminal 200.

또한, 제어부는 열화상 촬카메라 모듈로 촬영방향을 결정하는 제어신호를 출력할 수 있다. 촬영 객체의 체온은 검출된 체온에 촬영 객체와 열화상 카메라(110) 간의 거리정보 및 열화상 카메라(110)가 설치된 환경정보에 근거하여 보정된 체온으로 산출될 수 있다.Additionally, the control unit may output a control signal that determines the shooting direction to the thermal imaging camera module. The body temperature of the photographed object may be calculated as the body temperature corrected based on the detected body temperature, distance information between the photographed object and the thermal imaging camera 110, and environmental information in which the thermal imaging camera 110 is installed.

이를 위해서 제어부는 체온 산출부, 체온 판단부, 문자 발송부 및 촬영방향 설정부를 포함하여 구성될 수 있다. 체온 산출부는 열화상 카메라(110)에서 촬영된 열화상에서 촬영 객체의 체온을 검출하며, 검출된 체온에 촬영 객체의 거리정보 및 환경정보에 근거하여 보정된 체온이 산출되어 표시되도록 한다.To this end, the control unit may include a body temperature calculation unit, a body temperature determination unit, a text sending unit, and a shooting direction setting unit. The body temperature calculation unit detects the body temperature of the photographed object from the thermal image captured by the thermal imaging camera 110, and calculates and displays the corrected body temperature based on the distance information and environmental information of the photographed object to the detected body temperature.

먼저, 열화상 카메라(110)에서 촬영된 열화상에서 촬영 객체의 체온을 감지하기 위해, 촬영된 열영상에서 촬영 객체의 특정영역을 한정할 필요성이 있다. 예를 들어, 입원 환자 또는 중환자의 경우, 누운 상태로 이불을 덥고 있는 경우가 많으므로, 열화상 카메라(110)의 의해 노출되는 영역은 촬영 대상자의 상반신 부분이 될 수 있으며, 상반신 중에서도 얼굴 영역으로 한정될 수 있다.First, in order to detect the body temperature of a photographed object in a thermal image captured by the thermal imaging camera 110, there is a need to limit a specific area of the photographed object in the photographed thermal image. For example, in the case of hospitalized patients or intensive care patients, they are often covered with blankets while lying down, so the area exposed by the thermal imaging camera 110 may be the upper body of the person being photographed, and even the face area among the upper body. may be limited.

이때, 촬영 객체가 담요 등을 덮고 있는 경우, 가슴 부분의 열화상은 주변 온도와 비슷하게 감지될 수 있다.At this time, if the photographed object is covered with a blanket, etc., the thermal image of the chest area may be detected similar to the surrounding temperature.

따라서 촬영 객체의 상반신 부분은 얼굴로 한정될 수 있으며, 얼굴을 인식할 수 있는 얼굴인식모듈이 포함될 수 있다.Therefore, the upper body part of the photographed object may be limited to a face, and a face recognition module capable of recognizing faces may be included.

얼굴인식모듈은 열화상 카메라(110)(110)에서 촬영된 열화상의 국부 열원분포 해석을 통해 몸체 형상 맞춤 기반의 사용자 자세 인식 알고리즘이 적용될 수 있다. 이에 촬영된 열영상에서 얼굴 부분을 추출한다. 더욱 바람직하게는 숨을 들이 내쉬는 촬영 객체의 코와 입 부분으로 한정될 수 있다.The face recognition module can apply a user posture recognition algorithm based on body shape customization through analysis of the local heat source distribution of thermal images captured by the thermal imaging camera 110 (110). Accordingly, the facial part is extracted from the captured thermal image. More preferably, it may be limited to the nose and mouth of the photographed object that breathes out.

더욱 상세히 설명하면, 일반적으로 열화상 카메라(110)에 포함될 수 있는 ISP(Image Signal Processor)에서 실시간으로 처리되는 프로그레시브 영상에서 얼굴 영역을 체온 감지 영역으로 간주하여 자동 초점되도록 구성될 수 있다.To explain in more detail, the facial area may be automatically focused by considering the facial area as a body temperature detection area in the progressive image processed in real time by an image signal processor (ISP) that may be included in the thermal imaging camera 110.

이때, 검출 영역 즉, 얼굴 영역의 설정은 에이다부스트 알고리즘 등 다양한 알고리즘이 적용될 수 있다.At this time, various algorithms such as the Adaboost algorithm may be applied to set the detection area, that is, the face area.

체온검출모듈은 촬영된 열화상에서 색상에 따라 촬영 객체의 체온을 검출한다. 즉, 체온검출모듈은 설정된 열화상의 영역에서 촬영 객체의 체온을 검출한다.The body temperature detection module detects the body temperature of the captured object according to the color in the captured thermal image. In other words, the body temperature detection module detects the body temperature of the photographed object in the set thermal image area.

바람직하게는 안면인식모듈을 통한 얼굴 부분으로 설정될 수 있으며, 더욱 바람직하게는 얼굴 영역 중 촬영 객체의 코와 입 주변으로 한정될 수 있다.Preferably, it can be set to the face part through a facial recognition module, and more preferably, it can be limited to the area around the nose and mouth of the photographed object in the face area.

또는 설계 조건에 따라 코와 입 주변의 열화상 점들을 각각 구분하여 체온을 감지하고, 구분된 각각의 부분 체온 중 높은 체온을 촬영 객체의 체온으로 설정되도록 구성될 수 있다.Alternatively, it may be configured to detect body temperature by distinguishing thermal image points around the nose and mouth according to design conditions, and set the higher body temperature among the body temperatures of each segment as the body temperature of the photographed object.

예컨대 감기 질환의 경우, 코 막힘 증상을 유발할 수 있다. 따라서 체온의 감지 부분을 코와 입으로 한정하는 경우, 코막힘 증상에 따라 코 부분의 체온은 촬영 객체의 체온보다 낮게 감지될 수 있다. 따라서 코와 입 중에서 높이 검출되는 부분의 체온을 촬영 객체의 체온으로 감지되게 구성될 수 있다.For example, cold diseases can cause symptoms of nasal congestion. Therefore, if the body temperature detection area is limited to the nose and mouth, the body temperature of the nose area may be detected as lower than the body temperature of the photographed object depending on the symptoms of nasal congestion. Therefore, the body temperature of the part of the nose and mouth that is detected as high may be configured to be detected as the body temperature of the photographed object.

사람의 체온은 측정 부위마다 체온이 달라질 수 있음을 배경기술에서 설명하였다. 부연하면, 구강에서 체온을 측정하면 정상인 경우 37℃에서 소정의 오차를 가지고 검출되나, 겨드랑이나 직장안은 구강보다 06℃ 정도 높으며 바깥 기온의 영향을 받지 않는다.It was explained in the background technology that a person's body temperature may vary depending on the measurement site. To elaborate, when measuring body temperature in the oral cavity, it is normally detected at 37℃ with a certain error, but the temperature in the armpits or rectum is about 06℃ higher than the oral cavity and is not affected by the outside temperature.

그러나 검출 영역을 얼굴로 설정하였을 경우, 얼굴 영역은 공기에 노출됨에 따라 신체 중심 체온보다 1~2℃ 정도 낮게 검출된다. 또한 체온은 연령에도 관계가 있어 어린아이는 어른보다 1℃ 가량 높다.However, when the detection area is set to the face, the face area is detected to be 1-2°C lower than the body's core body temperature as it is exposed to air. Body temperature is also related to age; children are about 1°C higher than adults.

또한 체온은 하루에도 여러 차례 변하는데, 오전 6~7시경에는 다소 낮고 오후 늦게(18~19시경)는 높아서 그 차가 약 1℃ 정도 된다.Additionally, body temperature changes several times a day, being somewhat low around 6-7 am and high in the late afternoon (around 18-19 pm), with a difference of about 1°C.

따라서 열화상 카메라(110)로 촬영된 열화상에서 검출된 촬영 객체의 체온은 촬영 객체의 신체정보(연령)와 거리정보와 환경 정보(촬영 시간 및 주변 온도)에 근거하여 보정될 수 있다.Therefore, the body temperature of the photographed object detected in the thermal image captured by the thermal imaging camera 110 can be corrected based on the physical information (age), distance information, and environmental information (photography time and surrounding temperature) of the photographed object.

만약, 신체정보 및 환경정보에 따라 보정되지 않은 순수 열영상으로부터 검출된 체온은 해당 촬영 객체의 연령, 체온 검출 시간 및 주변 온도를 반영하여 담당자(의사, 간호사 등)가 일일이 확인해야 하는 번거로움이 있다.If the body temperature detected from a pure thermal image that has not been corrected according to body information and environmental information reflects the age of the photographed object, body temperature detection time, and surrounding temperature, it is inconvenient for the person in charge (doctor, nurse, etc.) to check it one by one. there is.

또한 이를 자동으로 알람이 발생할 수 있는 시스템을 구성하고자 하는 경우에는 촬영 객체마다 신체정보 및 환경정보를 감안한 정상 체온 범위가 설정되어야 하는 문제점이 있다.In addition, when trying to configure a system that can automatically generate an alarm, there is a problem that a normal body temperature range must be set for each photographed object, taking into account body information and environmental information.

즉, 어린아이와 어른의 정상 체온을 설정하는 범위를 달리하여 입력해야 해당 촬영 객체의 체온 변화에 대처할 수 있는 것이다.In other words, the normal body temperature setting range for children and adults must be entered differently in order to cope with changes in body temperature of the subject being photographed.

예를 들면, 촬영 객체의 연령이 0~2세인 경우 정상 체온의 범위를 36.4~38℃로 설정해야 하며, 촬영 객체의 연령이 11~65세인 경우에는 정상 체온의 범위를 35.9~37.6℃로 각각 설정해야 체온 변환에 대해 응급 대처가 가능하다.For example, if the age of the subject to be photographed is 0 to 2 years, the normal body temperature range should be set to 36.4 to 38℃, and if the age of the object to be photographed is 11 to 65 years, the range of normal body temperature should be set to 35.9 to 37.6℃. It must be set to enable emergency response to body temperature changes.

이에, 본 발명의 체온 보정모듈은 촬영 객체의 주변 온도에 따라 감지된 체온을 보정하기 위한 것이다.Accordingly, the body temperature correction module of the present invention is intended to correct the detected body temperature according to the surrounding temperature of the photographed object.

체온 보정모듈은 촬영된 열화상의 얼굴영역에서 검출된 체온을 촬영 객체의 신체정보 및 환경정보에 근거하여 보정하기 위한 것으로, 신체 표면의 노출에 의한 온도, 연령에 따른 온도, 촬영 시간대에 의한 온도 및 주변온도(촬영 구역의 온도)를 감안하여 보정되어 산출된다.The body temperature correction module is intended to correct the body temperature detected in the facial area of the captured thermal image based on the body information and environmental information of the photographed object, such as temperature due to exposure of the body surface, temperature according to age, temperature according to the shooting time, and It is calculated and corrected taking into account the surrounding temperature (temperature of the shooting area).

이에 촬영 객체의 체온을 일괄 평준화할 수 있는 장점이 있다.This has the advantage of being able to uniformly equalize the body temperature of the photographed object.

따라서 촬영 객체(환자)의 연령만 입력하게 되면 평준화된 정상 체온의 범위가 특정되어 촬영 객체의 연령, 촬영 시간대, 주변 온도에 상관없이 정상 체온의 범위를 고정할 수 있다.Therefore, if only the age of the photographing object (patient) is entered, the range of normalized normal body temperature is specified and the range of normal body temperature can be fixed regardless of the age of the photographing object, the shooting time, and the surrounding temperature.

이때, 더욱 구체적인 보정 값은 신체 표면의 노출에 의한 온도 +1~2℃, 연령에 따른 온도 ±1~2℃, 촬영 시간대에 의한 온도 ±1℃ 및 주변 온도에 05~2℃의 값으로 설정될 수 있다.At this time, more specific correction values are set to +1~2℃ for body surface exposure, ±1~2℃ for age, ±1℃ for shooting time, and 05~2℃ for ambient temperature. It can be.

한편, 인체의 체온 변화는 외부의 기온의 영향을 최소화하기 위해 자율신경으로 조절된다. 그래서 정상적인 경우 급격한 체온이 변화는 드물게 발생된다.Meanwhile, changes in body temperature are controlled by the autonomic nervous system to minimize the influence of external temperature. So, under normal circumstances, sudden changes in body temperature rarely occur.

만일 더운 장소에 들어가게 되면, 처음에는 피부 온도가 상승하며 이때 촬영 객체를 촬영하게 되면 촬영 객체의 체온보다 높게 감지될 수 있다.If you enter a hot place, your skin temperature will initially rise, and if you photograph the object to be photographed at this time, the body temperature may be detected as higher than the body temperature of the object to be photographed.

반대로 차가운 장소에 들어가게 되면 촬영 객체의 체온보다 낮게 감지될 수 있다. 이때 일정한 시간이 경과되면 정상적인 경우 체온은 모공의 확대와 땀의 배출량으로 조절된다.Conversely, if you enter a cold place, your body temperature may be detected as lower than the body temperature of the photographed object. At this time, when a certain period of time has passed, body temperature is normally regulated by enlargement of pores and sweat output.

그러나 이러한 체온의 변화는 질환에 따라 달라질 수 있다. 즉, 주변 온도에 따라 일정 시간 경과 후 조절되는 체온은 정상인의 경우에 해당한다.However, these changes in body temperature may vary depending on the disease. In other words, the body temperature that is adjusted after a certain period of time according to the surrounding temperature corresponds to that of a normal person.

질환을 앓고 있는 환자의 경우, 이를 조절할 수 있는 생체 자율신경에 문제가 있으면, 일정 시간이 경과되어도 정상적인 체온으로 전환되지 않을 수 있다.In the case of patients suffering from a disease, if there is a problem with the biological autonomic nervous system that can control this, the body temperature may not be converted to normal even after a certain period of time.

따라서 본 발명에서는 온도검출부로부터 센싱된 주변온도에 따라 감지된 체온을 보정하도록 구성된다.Therefore, the present invention is configured to correct the detected body temperature according to the ambient temperature sensed from the temperature detection unit.

한편, 본 발명의 체온 보정모듈을 통해 보정된 체온은 연령 및 촬영 시간대에 따라 보정된 체온이 산출되므로, 정상 체온의 범위를 단일화하여 설정할 수 있으므로, 산출된 체온 값이 정상 범위에 있는지만을 판단하면 된다.On the other hand, since the body temperature corrected through the body temperature correction module of the present invention is calculated according to age and shooting time, the range of normal body temperature can be unified and set, so it is only determined whether the calculated body temperature value is within the normal range. Just do it.

체온 판단부에서 판단된 체온이 정상 범위에서 벗어나는 경우, 이는 알림모듈을 통해 출력되도록 구성될 수 있다. 여기서 알림모듈은 인터페이스를 통해 관리자 단말기(200)의 모니터에 표시되거나, 경보음 등이 발생되도록 구성된다.If the body temperature determined by the body temperature determination unit is outside the normal range, this may be configured to be output through a notification module. Here, the notification module is configured to be displayed on the monitor of the administrator terminal 200 or to emit an alarm sound through an interface.

문자 발송부는 체온 판단부에 판단된 촬영 객체의 체온이 정상에서 벗어나는 경우, 이를 관리자 단말기(200)로 알리기 위한 것이다. 이 경우 문자 발송부에서 발송되는 알림은 단문 메시지로 구성될 수 있다.The text sending unit is used to notify the manager terminal 200 when the body temperature of the photographed object determined by the body temperature determination unit deviates from normal. In this case, the notification sent from the text sending unit may consist of a short message.

이상 설명된 본 발명에 따른 실시 예는 컴퓨터 상에서 다양한 구성요소를 통하여 실행될 수 있는 컴퓨터 프로그램의 형태로 구현될 수 있으며, 이와 같은 컴퓨터 프로그램은 컴퓨터로 판독 가능한 매체에 기록될 수 있다. 이때, 매체는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등과 같은, 프로그램 명령어를 저장하고 실행하도록 특별히 구성된 하드웨어 장치를 포함할 수 있다.Embodiments according to the present invention described above may be implemented in the form of a computer program that can be executed through various components on a computer, and such a computer program may be recorded on a computer-readable medium. At this time, the media includes magnetic media such as hard disks, floppy disks, and magnetic tapes, optical recording media such as CD-ROMs and DVDs, magneto-optical media such as floptical disks, and ROM. , RAM, flash memory, etc., may include hardware devices specifically configured to store and execute program instructions.

한편, 상기 컴퓨터 프로그램은 본 발명을 위하여 특별히 설계되고 구성된 것이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수 있다. 컴퓨터 프로그램의 예에는, 컴파일러에 의하여 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용하여 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함될 수 있다.Meanwhile, the computer program may be designed and configured specifically for the present invention, or may be known and available to those skilled in the art of computer software. Examples of computer programs may include not only machine language code such as that created by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like.

본 발명의 명세서(특히 특허청구범위에서)에서 "상기"의 용어 및 이와 유사한 지시 용어의 사용은 단수 및 복수 모두에 해당하는 것일 수 있다. 또한, 본 발명에서 범위(range)를 기재한 경우 상기 범위에 속하는 개별적인 값을 적용한 발명을 포함하는 것으로서(이에 반하는 기재가 없다면), 발명의 상세한 설명에 상기 범위를 구성하는 각 개별적인 값을 기재한 것과 같다. In the specification (particularly in the claims) of the present invention, the use of the term “above” and similar referential terms may refer to both the singular and the plural. In addition, when a range is described in the present invention, it includes the invention to which individual values within the range are applied (unless there is a statement to the contrary), and each individual value constituting the range is described in the detailed description of the invention. It's the same.

본 발명에 따른 방법을 구성하는 단계들에 대하여 명백하게 순서를 기재하거나 반하는 기재가 없다면, 상기 단계들은 적당한 순서로 행해질 수 있다. 반드시 상기 단계들의 기재 순서에 따라 본 발명이 한정되는 것은 아니다. 본 발명에서 모든 예들 또는 예시적인 용어(예들 들어, 등등)의 사용은 단순히 본 발명을 상세히 설명하기 위한 것으로서 특허청구범위에 의해 한정되지 않는 이상 상기 예들 또는 예시적인 용어로 인해 본 발명의 범위가 한정되는 것은 아니다. 또한, 당업자는 다양한 수정, 조합 및 변경이 부가된 특허청구범위 또는 그 균등물의 범주 내에서 설계 조건 및 팩터에 따라 구성될 수 있음을 알 수 있다.Unless there is an explicit order or statement to the contrary regarding the steps constituting the method according to the invention, the steps may be performed in any suitable order. The present invention is not necessarily limited by the order of description of the above steps. The use of any examples or illustrative terms (e.g., etc.) in the present invention is merely to describe the present invention in detail, and unless limited by the claims, the scope of the present invention is limited by the examples or illustrative terms. It doesn't work. Additionally, those skilled in the art will recognize that various modifications, combinations and changes may be made according to design conditions and factors within the scope of the appended claims or their equivalents.

따라서, 본 발명의 사상은 상기 설명된 실시 예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 또는 이로부터 등가적으로 변경된 모든 범위는 본 발명의 사상의 범주에 속한다고 할 것이다.Therefore, the spirit of the present invention should not be limited to the above-described embodiments, and the scope of the patent claims described below as well as all scopes equivalent to or equivalently changed from the scope of the claims are within the scope of the spirit of the present invention. It will be said to belong to

10: 인체 발열체크 시스템
100: 열화상 카메라 모듈
110: 열화상 카메라
120: 영상 카메라
130: 제어부
140: TRSM 모듈
150: 거치대
200: 관리자 단말기
300: 네트워크
10: Human body temperature check system
100: Thermal imaging camera module
110: thermal imaging camera
120: video camera
130: control unit
140: TRSM module
150: Holder
200: Administrator terminal
300: Network

Claims (7)

촬영 객체의 열화상을 촬영하는 열화상 카메라;
상기 촬영 객체에 대한 영상을 촬영하는 영상 카메라; 및
상기 열화상 카메라로부터 전송된 열화상에 근거하여 상기 촬영 객체의 체온을 산출하는 제어부;
상기 제어부는,
상기 열화상 카메라로부터 상기 열화상을 전송받고, 상기 열화상 중에서 상기 촬영 객체의 얼굴 영역에서 체온을 검출하며,
상기 영상 카메라로부터 상기 영상을 전송받고, 상기 전송받은 영상을 기초로 상기 촬영 객체와 상기 열화상 카메라 간의 거리를 계산하며, 상기 계산된 거리를 기초로 상기 검출된 체온을 보정하여 사용자 단말기에 표시되도록 하는 인체발열 체크 시스템.
A thermal imaging camera that captures thermal images of objects to be photographed;
a video camera that captures an image of the photographed object; and
a control unit that calculates the body temperature of the photographed object based on the thermal image transmitted from the thermal imaging camera;
The control unit,
Receiving the thermal image from the thermal imaging camera, detecting body temperature in the facial area of the photographed object from the thermal image,
Receive the image from the video camera, calculate the distance between the photographed object and the thermal imaging camera based on the transmitted image, correct the detected body temperature based on the calculated distance, and display it on the user terminal. A human body temperature check system.
제1항에 있어서,
상기 제어부는 상기 영상 카메라로부터 전송된 상기 영상에서 상기 촬영 객체의 상기 얼굴 영역의 크기를 측정하고, 상기 얼굴 영역의 크기에 기초하여 상기 촬영 객체와 상기 열화상 카메라 간의 거리를 계산하는 것을 특징으로 하는 인체발열 체크 시스템.
According to paragraph 1,
The control unit measures the size of the face area of the photographed object in the image transmitted from the video camera, and calculates the distance between the photographed object and the thermal imaging camera based on the size of the face region. Human body fever check system.
제2항에 있어서,
상기 제어부는 기계학습을 수행하는 학습모델에 의하여 상기 영상 카메라로부터 전송받은 상기 영상에서 상기 체온이 표시되는 상기 촬영 객체의 얼굴을 인식하여 상기 체온이 표시되는 상기 촬영 객체의 신원을 식별하는 것을 특징으로 하는 인체발열 체크 시스템.
According to paragraph 2,
The control unit recognizes the face of the photographed object whose body temperature is displayed in the image transmitted from the video camera by a learning model that performs machine learning, and identifies the identity of the photographed object whose body temperature is displayed. A human body temperature check system.
제1항에 있어서,
상기 제어부는 외부로부터 기준온도를 수집하고, 상기 수집된 기준온도와 상기 검출된 체온을 비교하여 상기 사용자 단말기에 표시되도록 하는 것을 특징으로 하는 인체발열 체크 시스템.
According to paragraph 1,
The control unit collects a reference temperature from the outside, compares the collected reference temperature with the detected body temperature, and displays the detected body temperature on the user terminal.
제1항에 있어서,
상기 제어부는 엣지 컴퓨팅에 기반하는 것을 특징으로 하는 인체발열 체크 시스템.
According to paragraph 1,
A human body fever check system, wherein the control unit is based on edge computing.
제1항에 있어서,
상기 제어부는 상기 표시되는 체온이 설정범위를 벋어나는 경우, 발열의심 경고 이벤트를 발생시키는 것을 특징으로 하는 인체발열 체크 시스템.
According to paragraph 1,
The control unit generates a fever suspicion warning event when the displayed body temperature exceeds the set range.
제6항에 있어서,
상기 제어부는 상기 경고 이벤트를 발생시킨 뒤에는 체온을 측정한 상기 촬영 객체와 발열 의심자 리스트를 DB에 저장하는 것을 특징으로 하는 인체발열 체크 시스템.





According to clause 6,
The human body fever check system, wherein the control unit stores the photographed object whose body temperature is measured and a list of people suspected of having a fever in a database after generating the warning event.





KR1020220150001A 2022-11-10 2022-11-10 Untact Walking-through Multi-body Fever Check System based on Edge-Computing Technology KR20240068484A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020220150001A KR20240068484A (en) 2022-11-10 2022-11-10 Untact Walking-through Multi-body Fever Check System based on Edge-Computing Technology

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020220150001A KR20240068484A (en) 2022-11-10 2022-11-10 Untact Walking-through Multi-body Fever Check System based on Edge-Computing Technology

Publications (1)

Publication Number Publication Date
KR20240068484A true KR20240068484A (en) 2024-05-17

Family

ID=91332078

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220150001A KR20240068484A (en) 2022-11-10 2022-11-10 Untact Walking-through Multi-body Fever Check System based on Edge-Computing Technology

Country Status (1)

Country Link
KR (1) KR20240068484A (en)

Similar Documents

Publication Publication Date Title
KR101420200B1 (en) Body temperature detecting system using thermal image camera
KR102021999B1 (en) Apparatus for alarming thermal heat detection results obtained by monitoring heat from human using thermal scanner
JP4645961B2 (en) System and method for remotely and non-invasively detecting the core body temperature of a subject using infrared images
US10909835B1 (en) Rapid thermal dynamic image capture devices
KR101729327B1 (en) A monitoring system for body heat using the dual camera
US20230043342A1 (en) Non-contact temperature measurement in thermal imaging systems and methods
RU2618172C2 (en) Device and method for device movement and orientation tracking
KR101990803B1 (en) PROTECTION SYSTEM FOR VULNERABLE CLASSES USING Internet Of Things AND METHOD THEREFOR
JP2005237861A (en) Automatic thermometric device and automatic thermometric method
JP2020500570A (en) Patient monitoring system and method
US20170035344A1 (en) Detection of an Allergic Reaction Using Thermal Measurements of the Face
US11895560B2 (en) Distributed type traffic line tracing apparatus, and method using the same
JP6579411B1 (en) Monitoring system and monitoring method for care facility or hospital
Ulleri et al. Development of contactless employee management system with mask detection and body temperature measurement using TensorFlow
KR20130118512A (en) System and method for monitoring the health of a patient using face recognition technology
JP2017054229A (en) Person discrimination system
JP2020113016A (en) Watching system, watching method, and program
KR20240068484A (en) Untact Walking-through Multi-body Fever Check System based on Edge-Computing Technology
WO2023079928A1 (en) Information processing device, information processing method, and non-transitory computer-readable medium
JP7090327B2 (en) Information processing equipment, information processing method, program
JP2020077388A (en) Motion analyzer
US20210282646A1 (en) Medical data measurement system
KR102405783B1 (en) Proximity automatic detection type apparatus for recognizing fever and control method thereof
JP2023548886A (en) Apparatus and method for controlling a camera
EP3706035A1 (en) Device, system and method for tracking and/or de-identification of faces in video data