KR102196813B1 - 열화상 카메라 및 실화상 카메라와 연동하여 출입자의 체온을 측정하는 전자 장치 및 그 동작 방법 - Google Patents

열화상 카메라 및 실화상 카메라와 연동하여 출입자의 체온을 측정하는 전자 장치 및 그 동작 방법 Download PDF

Info

Publication number
KR102196813B1
KR102196813B1 KR1020200064524A KR20200064524A KR102196813B1 KR 102196813 B1 KR102196813 B1 KR 102196813B1 KR 1020200064524 A KR1020200064524 A KR 1020200064524A KR 20200064524 A KR20200064524 A KR 20200064524A KR 102196813 B1 KR102196813 B1 KR 102196813B1
Authority
KR
South Korea
Prior art keywords
image
identification information
visitor
unit
face
Prior art date
Application number
KR1020200064524A
Other languages
English (en)
Inventor
우경일
Original Assignee
(주)한컴인텔리전스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)한컴인텔리전스 filed Critical (주)한컴인텔리전스
Priority to KR1020200064524A priority Critical patent/KR102196813B1/ko
Application granted granted Critical
Publication of KR102196813B1 publication Critical patent/KR102196813B1/ko

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/01—Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
    • A61B5/015—By temperature mapping of body part
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/7445—Display arrangements, e.g. multiple display units
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/746—Alarms related to a physiological condition, e.g. details of setting alarm thresholds or avoiding false alarms
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/7465—Arrangements for interactive communication between patient and care services, e.g. by using a telephone network
    • A61B5/747—Arrangements for interactive communication between patient and care services, e.g. by using a telephone network in case of emergency, i.e. alerting emergency services
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/60—Radiation pyrometry, e.g. infrared or optical thermometry using determination of colour temperature
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/80—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for detecting, monitoring or modelling epidemics or pandemics, e.g. flu
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Veterinary Medicine (AREA)
  • Surgery (AREA)
  • General Physics & Mathematics (AREA)
  • Physiology (AREA)
  • Theoretical Computer Science (AREA)
  • Critical Care (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Medicine (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Nursing (AREA)
  • Emergency Management (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Image Processing (AREA)

Abstract

열화상 카메라 및 실화상 카메라와 연동하여 출입자의 체온을 측정하는 전자 장치 및 그 동작 방법이 개시된다. 본 발명은 열화상 카메라 및 실화상 카메라와 연동하여 출입자의 얼굴 영역에 해당되는 온도 값을 획득함으로써, 출입자의 체온을 정확하게 측정할 수 있는 전자 장치 및 그 동작 방법에 대한 것이다.

Description

열화상 카메라 및 실화상 카메라와 연동하여 출입자의 체온을 측정하는 전자 장치 및 그 동작 방법{ELECTRONIC DEVICE FOR MEASURING THE BODY TEMPERATURE OF AN ACCESS PERSON IN CONJUNCTION WITH A THERMAL IMAGING CAMERA AND A VIDEO CAMERA, AND OPERATING METHOD THEREOF}
본 발명은 열화상 카메라 및 실화상 카메라와 연동하여 출입자의 체온을 측정하는 전자 장치 및 그 동작 방법에 대한 것이다.
최근, 코로나19로 인한 바이러스의 전파를 막기 위해, 유증상자를 정확하게 선별하기 위한 노력이 지속되고 있다.
코로나19와 같은 바이러스 감염의 주요 증상은 발열이라는 점에서 건물 등의 출입구에서 출입자들의 체온을 측정하여 발열이 의심되는 출입자들의 출입을 통제하는 방역 지침이 수행되고 있다.
건물의 출입구에서 출입자들의 체온을 측정하는 방법으로는 열화상 카메라를 이용하는 방법이 주로 사용되고 있다. 열화상 카메라는 물체에서 방출되는 열복사를 감지하여 다양한 색깔로 시각화하여 보여 주는 카메라를 의미한다.
이러한 열화상 카메라는 촬영 대상이 사람인지 여부와 관계없이 열복사를 감지하여 시각화하는 장치이고, 촬영 대상의 다양한 지점에서 감지되는 온도 값 중 최대의 온도 값을 촬영 대상의 온도로 결정하여 화면 상에 표시해 주기 때문에, 체온을 측정할 때 오류가 발생할 수 있다.
예컨대, 출입자가 뜨거운 음료와 같은 열 발생 물건을 소지하고 있다면, 열화상 카메라는 뜨거운 음료의 온도를 출입자의 체온으로 결정하여 화면 상에 표시할 수 있기 때문에, 관리자가 음료의 온도를 출입자의 체온으로 오인/혼동하는 문제가 발생할 수 있다.
따라서, 열화상 카메라를 이용하여 건물 등에 출입하는 출입자들의 체온을 측정할 때, 출입자의 얼굴 영역에 해당되는 온도 값을 획득함으로써, 출입자의 체온을 정확하게 감지할 수 있도록 하는 기술에 대한 연구가 필요하다.
또한, 체온이 높은 것으로 감지된 고위험 출입자의 경우에는 해당 출입자가 출입구에 도달한 시각 및 출입자의 얼굴 이미지 등과 같은 고위험 출입자의 식별 정보를 별도의 데이터베이스에 저장해서 관리해야 할 필요가 있다. 이는 고위험 출입자가 추후 감염 확진자로 판명이 날 경우, 고위험 출입자의 동선 파악을 용이하게 수행하기 위함이다.
다만, 출입자의 얼굴 이미지는 민감한 개인 정보로 볼 수 있다는 점에서, 고위험 출입자의 식별 정보를 데이터베이스에 저장할 때, 해당 출입자의 얼굴 이미지를 제3자가 손쉽게 확인할 수 없도록 하기 위한 소정의 보안 조치가 수행될 필요가 있다.
본 발명은 열화상 카메라 및 실화상 카메라와 연동하여 출입자의 얼굴 영역에 해당되는 온도 값을 획득함으로써, 출입자의 체온을 정확하게 측정할 수 있는 전자 장치 및 그 동작 방법을 제시하고자 한다.
또한, 본 발명은 발열이 있는 것으로 확인된 고위험 출입자의 얼굴 이미지가 포함된 식별 정보를 별도의 데이터베이스를 통해 저장 및 관리할 수 있도록 지원하고, 데이터베이스에 저장되는 출입자의 얼굴 이미지를 스크램블링(Scrambling) 처리함으로써, 출입자의 얼굴 이미지가 유출되는 것을 방지할 수 있도록 한다.
본 발명의 일실시예에 따른 열화상 카메라 및 실화상 카메라 - 상기 열화상 카메라와 상기 실화상 카메라는 서로 동일한 카메라 앵글로 촬영 대상을 촬영하도록 설정되어 있음 - 와 연동하여 출입자의 체온을 측정하는 전자 장치는 상기 열화상 카메라를 통해 촬영된 상기 출입자의 열화상 이미지와 상기 실화상 카메라를 통해 촬영된 상기 출입자의 실화상 이미지를 획득하는 이미지 획득부, 상기 실화상 이미지로부터 상기 출입자의 얼굴 영역을 검출하는 얼굴 영역 검출부, 상기 열화상 이미지로부터 상기 얼굴 영역에 매칭되는 매칭 영역을 추출하고, 상기 매칭 영역에서 감지되는 온도 값 중 최대 온도 값을 확인하는 온도 확인부 및 상기 최대 온도 값을 상기 출입자의 체온으로 결정하여 화면 상에 표시하는 체온 표시부를 포함한다.
또한, 본 발명의 일실시예에 따른 열화상 카메라 및 실화상 카메라 - 상기 열화상 카메라와 상기 실화상 카메라는 서로 동일한 카메라 앵글로 촬영 대상을 촬영하도록 설정되어 있음 - 와 연동하여 출입자의 체온을 측정하는 전자 장치의 동작 방법은 상기 열화상 카메라를 통해 촬영된 상기 출입자의 열화상 이미지와 상기 실화상 카메라를 통해 촬영된 상기 출입자의 실화상 이미지를 획득하는 단계, 상기 실화상 이미지로부터 상기 출입자의 얼굴 영역을 검출하는 단계, 상기 열화상 이미지로부터 상기 얼굴 영역에 매칭되는 매칭 영역을 추출하고, 상기 매칭 영역에서 감지되는 온도 값 중 최대 온도 값을 확인하는 단계 및 상기 최대 온도 값을 상기 출입자의 체온으로 결정하여 화면 상에 표시하는 단계를 포함한다.
본 발명은 열화상 카메라 및 실화상 카메라와 연동하여 출입자의 얼굴 영역에 해당되는 온도 값을 출입자의 체온으로 측정할 수 있는 전자 장치 및 그 동작 방법을 제시함으로써, 체온 측정의 정확도를 향상시킬 수 있다.
또한, 본 발명은 발열이 있는 것으로 확인된 고위험 출입자의 얼굴 이미지가 포함된 식별 정보를 별도의 데이터베이스를 통해 저장 및 관리할 수 있도록 지원함과 동시에, 데이터베이스에 저장되는 출입자의 얼굴 이미지를 스크램블링(Scrambling) 처리함으로써, 출입자의 얼굴 이미지가 유출되는 것을 방지할 수 있다.
도 1은 본 발명의 일실시예에 따른 열화상 카메라 및 실화상 카메라와 연동하여 출입자의 체온을 측정하는 전자 장치의 구조를 도시한 도면이다.
도 2 내지 도 도 5는 본 발명의 일실시예에 따른 열화상 카메라 및 실화상 카메라와 연동하여 출입자의 체온을 측정하는 전자 장치의 동작을 설명하기 위한 도면이다.
도 6은 본 발명의 일실시예에 따른 열화상 카메라 및 실화상 카메라와 연동하여 출입자의 체온을 측정하는 전자 장치의 동작 방법을 도시한 순서도이다.
이하에서는 본 발명에 따른 실시예들을 첨부된 도면을 참조하여 상세하게 설명하기로 한다. 이러한 설명은 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였으며, 다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 본 명세서 상에서 사용되는 모든 용어들은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 사람에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다.
본 문서에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있다는 것을 의미한다. 또한, 본 발명의 다양한 실시예들에 있어서, 각 구성요소들, 기능 블록들 또는 수단들은 하나 또는 그 이상의 하부 구성요소로 구성될 수 있고, 각 구성요소들이 수행하는 전기, 전자, 기계적 기능들은 전자회로, 집적회로, ASIC(Application Specific Integrated Circuit) 등 공지된 다양한 소자들 또는 기계적 요소들로 구현될 수 있으며, 각각 별개로 구현되거나 2 이상이 하나로 통합되어 구현될 수도 있다.
한편, 첨부된 블록도의 블록들이나 흐름도의 단계들은 범용 컴퓨터, 특수용 컴퓨터, 휴대용 노트북 컴퓨터, 네트워크 컴퓨터 등 데이터 프로세싱이 가능한 장비의 프로세서나 메모리에 탑재되어 지정된 기능들을 수행하는 컴퓨터 프로그램 명령들(instructions)을 의미하는 것으로 해석될 수 있다. 이들 컴퓨터 프로그램 명령들은 컴퓨터 장치에 구비된 메모리 또는 컴퓨터에서 판독 가능한 메모리에 저장될 수 있기 때문에, 블록도의 블록들 또는 흐름도의 단계들에서 설명된 기능들은 이를 수행하는 명령 수단을 내포하는 제조물로 생산될 수도 있다. 아울러, 각 블록 또는 각 단계는 특정된 논리적 기능(들)을 실행하기 위한 하나 이상의 실행 가능한 명령들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또, 몇 가지 대체 가능한 실시예들에서는 블록들 또는 단계들에서 언급된 기능들이 정해진 순서와 달리 실행되는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들 또는 단계들은 실질적으로 동시에 수행되거나, 역순으로 수행될 수 있으며, 경우에 따라 일부 블록들 또는 단계들이 생략된 채로 수행될 수도 있다.
도 1은 본 발명의 일실시예에 따른 열화상 카메라 및 실화상 카메라와 연동하여 출입자의 체온을 측정하는 전자 장치의 구조를 도시한 도면이다.
본 발명에 따른 전자 장치(110)는 건물 등의 입구에서 열화상 카메라(101) 및 실화상 카메라(102)와 연동하여 출입자의 체온을 측정하는 장치로, 이미지 획득부(111), 얼굴 영역 검출부(112), 온도 확인부(113) 및 체온 표시부(114)를 포함한다.
여기서, 열화상 카메라(101)란 물체에서 방출되는 열복사를 감지하여 다양한 색깔로 시각화하여 보여 주는 카메라를 의미하고, 실화상 카메라(102)는 일반적인 영상이나 이미지를 촬영할 수 있는 카메라를 의미한다.
그리고, 열화상 카메라(101)와 실화상 카메라(102)는 서로 동일한 카메라 앵글로 촬영 대상을 촬영하도록 설정되어 있다. 즉, 열화상 카메라(101)와 실화상 카메라(102)는 동일한 구도와 위치에서 촬영 대상을 촬영하도록 설정되어 있어서, 열화상 카메라(101)를 통해서 촬영된 열화상 이미지와 실화상 카메라(102)를 통해서 촬영된 실화상 이미지는 동일한 크기, 형태, 구도를 갖게 된다.
이러한 상황에서, 출입자가 건물 등의 입구에 진입하게 되면, 열화상 카메라(101) 및 실화상 카메라(102)는 상기 출입자를 촬영하여 상기 출입자의 열화상 이미지와 상기 출입자의 실화상 이미지를 생성할 수 있다. 이때, 입구에는 상기 출입자를 인식하기 위한 소정의 감지 센서가 탑재되어 있을 수 있다. 이로 인해, 상기 출입자가 입구에 진입하게 되면, 상기 감지 센서는 상기 출입자를 감지하게 되고, 상기 감지 센서를 통해 상기 출입자가 감지되면, 열화상 카메라(101) 및 실화상 카메라(102)는 상기 출입자를 촬영할 수 있다.
이렇게, 열화상 카메라(101)와 실화상 카메라(102)가 상기 출입자를 촬영하게 되면, 이미지 획득부(111)는 열화상 카메라(101)를 통해 촬영된 상기 출입자의 열화상 이미지와 실화상 카메라(102)를 통해 촬영된 상기 출입자의 실화상 이미지를 획득한다.
얼굴 영역 검출부(112)는 상기 실화상 이미지로부터 상기 출입자의 얼굴 영역을 검출한다. 여기서, 얼굴 영역 검출부(112)가 상기 실화상 이미지로부터 상기 출입자의 얼굴 영역을 검출하는 데에는 다양한 얼굴 영역 검출 기술이 활용될 수 있다. 예컨대, 얼굴 영역 검출부(112)는 얼굴의 피부색으로 미리 지정된 색상 및 채도를 성분으로 갖는 특징 벡터와 상기 실화상 이미지를 구성하는 화소들의 색상 및 채도를 성분으로 갖는 특정 벡터 간의 벡터 유사도를 연산하여 벡터 유사도가 높은 영역을 상기 출입자의 얼굴 영역으로 검출할 수 있다. 또는, 얼굴 영역 검출부(112)는 사람의 얼굴 영역을 검출하기 위한 사전 학습이 완료된 인공지능 기반의 얼굴 영역 검출 모델을 이용해서 상기 실화상 이미지로부터 상기 출입자의 얼굴 영역을 검출할 수 있다.
온도 확인부(113)는 상기 열화상 이미지로부터 상기 얼굴 영역에 매칭되는 매칭 영역을 추출하고, 상기 매칭 영역에서 감지되는 온도 값 중 최대 온도 값을 확인한다.
체온 표시부(114)는 상기 최대 온도 값을 상기 출입자의 체온으로 결정하여 화면 상에 표시한다.
이하에서는 도 2를 참조하여 본 발명에 따른 전자 장치(110)의 동작을 예를 들어 설명하기로 한다.
우선, 열화상 카메라(101)를 통해 촬영된 상기 출입자의 열화상 이미지가 도면부호 220에 도시된 그림이라고 하고, 실화상 카메라(102)를 통해서 촬영된 상기 출입자의 실화상 이미지가 도면부호 210에 도시된 그림이라고 가정하자. 그리고, 상기 출입자는 뜨거운 음료를 소지하고 있고, 도면부호 230으로 표시한 부분이 뜨거운 음료가 촬영된 부분이라고 가정하자.
이때, 열화상 이미지(220)에서는 도면부호 220에 도시된 그림과 같이 발열이 발생하는 부분이 붉은색으로 표시될 수 있는데, 출입자의 얼굴이나 몸통뿐 아니라, 뜨거운 음료(230)가 위치하는 영역도 붉은색으로 표시되게 된다. 이로 인해, 기존의 방식과 같이, 열화상 카메라(101)를 통해서만 상기 출입자의 체온을 측정하게 되면, 뜨거운 음료(230)의 온도를 상기 출입자의 체온으로 잘못 측정하는 오류가 발생할 수 있다.
이러한 오류를 해결하기 위해, 얼굴 영역 검출부(112)는 실화상 카메라(102)를 통해서 촬영된 상기 출입자의 실화상 이미지(210)로부터 상기 출입자의 얼굴 영역(211)을 검출할 수 있고, 온도 확인부(113)는 열화상 이미지(220)로부터 얼굴 영역(211)에 매칭되는 매칭 영역(221)을 추출한 후 매칭 영역(221)에서 감지되는 온도 값 중 최대 온도 값을 확인할 수 있다.
그러고 나서, 체온 표시부(114)는 상기 최대 온도 값을 상기 출입자의 체온으로 결정하여 화면 상에 표시할 수 있다.
결국, 본 발명에 따른 전자 장치(110)는 출입자가 뜨거운 음료(230)를 소지하고 있는 상황이라도, 실화상 카메라(102)를 통해 촬영된 실화상 이미지(210)로부터 상기 출입자의 얼굴 영역(211)을 검출해 내고, 열화상 카메라(101)를 통해 촬영된 열화상 이미지(220)에서 얼굴 영역(211)에 매칭되는 매칭 영역(221)을 추출한 후 매칭 영역(221)에서의 최대 온도 값을 상기 출입자의 체온으로 결정함으로써, 상기 출입자에 대한 정확한 체온 측정이 가능하도록 지원할 수 있다.
이때, 본 발명의 일실시예에 따르면, 전자 장치(110)는 경고 메시지 표시부(115)를 더 포함할 수 있다.
경고 메시지 표시부(115)는 상기 최대 온도 값이 사전 설정된(predetermined) 임계치를 초과하는지 확인하고, 상기 최대 온도 값이 상기 임계치를 초과하는 것으로 확인되는 경우, 상기 출입자가 고위험자임을 알리는 경고 메시지를 상기 화면 상에 표시한다.
예컨대, 상기 임계치가 '38도'라고 하고, 온도 확인부(113)에서 확인된 상기 최대 온도 값이 '38.5도'라고 하는 경우, 상기 출입자는 감염이 의심되는 위험군일 가능성이 있기 때문에, 경고 메시지 표시부(115)는 상기 출입자가 고위험자임을 알리는 상기 경고 메시지를 상기 화면 상에 표시할 수 있다.
본 발명의 일실시예에 따르면, 전자 장치(110)는 상기 출입자가 고위험자인 것으로 판정되었을 경우, 향후 상기 출입자의 동선 파악이 가능하도록 하기 위해, 상기 출입자의 체온이 측정된 시간에 대한 정보와 상기 출입자의 얼굴 이미지로 구성된 식별 정보를 데이터베이스에 저장해서 관리하기 위한 구성을 더 포함할 수 있다.
이와 관련해서, 본 발명의 일실시예에 따르면, 전자 장치(110)는 생성 이벤트 발생부(116), 시간 정보 생성부(117), 스크램블링부(118) 및 식별 정보 전송부(119)를 더 포함할 수 있다.
생성 이벤트 발생부(116)는 상기 최대 온도 값이 상기 임계치를 초과하는 것으로 확인된 경우, 상기 출입자에 대한 식별 정보를 생성하기 위한 생성 이벤트를 발생시킨다.
시간 정보 생성부(117)는 상기 생성 이벤트가 발생되면, 상기 생성 이벤트가 발생된 시점의 제1 시간 정보를 생성한다.
스크램블링부(118)는 상기 제1 시간 정보가 생성되면, 상기 실화상 이미지로부터 상기 얼굴 영역에 매칭되는 얼굴 이미지를 추출하고, 상기 얼굴 이미지를 가로 n(n은 2이상의 자연수임)개와 세로 n개로 구성된 n x n개의 이미지 조각들로 분할한 후 상기 n x n개의 이미지 조각들을 랜덤하게 섞음으로써, 스크램블링(Scrambling)된 얼굴 이미지를 생성한다.
이와 관련해서, 도 3에는 상기 얼굴 이미지를 n x n개의 이미지 조각들로 분할 한 후 이를 랜덤하게 섞어서 스크램블링하는 과정을 설명하기 위한 예시가 도시되어 있다. 도 3에 도시된 그림에서 도면부호 310을 상기 얼굴 이미지라고 가정하는 경우, 스크램블링부(118)는 얼굴 이미지(310)를 3 x 3개의 이미지 조각들로 분할한 후 3 x 3개의 이미지 조각들을 랜덤하게 섞음으로써, 도면부호 320과 같은 스크램블링된 얼굴 이미지(320)를 생성할 수 있다.
이때, 본 발명의 일실시예에 따르면, 스크램블링부(118)는 순번 할당부(120), 비트열 확인부(121) 및 순번 은닉부(122)를 포함할 수 있다.
순번 할당부(120)는 상기 n x n개의 이미지 조각들 각각에 대해 위치에 따른 순번을 할당한다. 여기서, 상기 순번은 k(k는 3이상의 자연수임)비트의 데이터로 구성될 수 있다.
비트열 확인부(121)는 상기 n x n개의 이미지 조각들 각각에 대해 할당된 순번에 대한 k비트의 데이터의 비트열을 확인한다.
순번 은닉부(122)는 상기 n x n개의 이미지 조각들 각각에 대해, 최상단 좌측지점에서 우측 방향으로 순서대로 k개의 화소들을 추출하고, 각 이미지 조각에서 추출된 k개의 화소들 각각의 RGB 값 중 사전 설정된 제1 색상 값을 구성하는 데이터의 비트열에서 마지막 비트 값을 각 이미지 조각에 할당된 순번에 대한 k비트의 데이터의 비트열을 구성하는 각 비트 값으로 하나씩 치환함으로써, 상기 n x n개의 이미지 조각들 각각에 각 이미지 조각에 할당된 순번에 대한 k비트의 데이터를 은닉한다.
관련해서, 도 3과 도 4에 도시된 그림을 참조하여 순번 할당부(120), 비트열 확인부(121) 및 순번 은닉부(122)의 동작을 설명하면 다음과 같다.
먼저, 'n=3'이라고 하고, 'k=4'라고 하며, 상기 제1 색상 값을 'Red 색상 값'이라고 가정하는 경우, 순번 할당부(120)는 도면부호 310에 도시된 그림과 같이, 얼굴 이미지(310)를 구성하는 3 x 3개의 이미지 조각들 각각에 대해 위치에 따른 순번인 '1, 2, 3, 4, 5, 6, 7, 8, 9'를 할당할 수 있다.
이때, '1, 2, 3, 4, 5, 6, 7, 8, 9' 각각에 대응되는 4비트의 데이터의 비트열을 '0000, 0001, 0010, 0011, 0100, 0101, 0110, 0111, 1000'이라고 하는 경우, 비트열 확인부(121)는 상기 3 x 3개의 이미지 조각들 각각에 대해 할당된 순번인 '1, 2, 3, 4, 5, 6, 7, 8, 9'에 대한 4비트의 데이터의 비트열인 '0000, 0001, 0010, 0011, 0100, 0101, 0110, 0111, 1000'을 확인할 수 있다.
그 이후, 순번 은닉부(122)는 도 4에 도시된 그림과 같이 상기 3 x 3개의 이미지 조각들 각각에 대해, 최상단 좌측지점에서 우측 방향으로 순서대로 4개의 화소들을 추출할 수 있다.
만약, 도 4에 도시된 그림에서, 첫 번째 이미지 조각에서 추출된 4개의 화소들을 '화소 1, 화소 2, 화소 3, 화소 4'라고 하는 경우, 순번 은닉부(122)는 '화소 1, 화소 2, 화소 3, 화소 4'의 RGB 값 중 상기 제1 색상 값인 'Red 색상 값'을 구성하는 데이터인 'R1, R2, R3, R4'의 비트열인 'XXXXXXX1, XXXXXXX1, XXXXXXX0, XXXXXXX1'에서 마지막 비트 값으로 '1, 1, 0, 1'을 확인할 수 있다. 그러고 나서, 순번 은닉부(122)는 'R1, R2, R3, R4'의 마지막 비트 값인 '1, 1, 0, 1'을 첫 번째 이미지 조각에 할당된 순번인 '1'에 대한 4비트의 데이터의 비트열인 '0000'을 구성하는 각 비트 값인 '0, 0, 0, 0'으로 하나씩 치환함으로써, 상기 첫 번째 이미지 조각에 순번 '1'에 대한 데이터를 은닉할 수 있다.
즉, 순번 은닉부(122)는 'R1, R2, R3, R4'의 비트열을 'XXXXXXX0, XXXXXXX0, XXXXXXX0, XXXXXXX0'으로 각각 변환함으로써, 상기 첫 번째 이미지 조각에 '1'에 대한 순번 데이터를 은닉할 수 있다.
이러한 방식으로, 순번 은닉부(122)는 나머지 8개의 이미지 조각들 각각에 대해서도 최상단 좌측지점에서 우측 방향으로 순서대로 추출된 4개의 화소들을 이용한 순번 데이터의 은닉 과정을 반복 수행함으로써, 나머지 8개의 이미지 조각들에 '2, 3, 4, 5, 6, 7, 8, 9'에 대한 순번 데이터를 은닉할 수 있다.
지금까지 설명한 방식에 따라, 스크램블링부(118)는 상기 출입자의 얼굴 이미지를 스크램블링할 수 있고, 이렇게, 스크램블링부(118)를 통해서 스크램블링된 얼굴 이미지가 생성 완료되면, 식별 정보 전송부(119)는 상기 스크램블링된 얼굴 이미지와 상기 제1 시간 정보를 매칭시켜 상기 출입자에 대한 식별 정보로 지정한 후, 고위험자인 것으로 선별된 복수의 출입자들의 식별 정보가 기록된 데이터베이스를 포함하고 있는 통합 관리 서버(100)로 상기 출입자에 대한 식별 정보를 전송함과 동시에 상기 출입자에 대한 식별 정보를 상기 데이터베이스에 추가 기록할 것을 지시하는 기록 명령을 전송한다.
이때, 통합 관리 서버(100)는 전자 장치(110)로부터 상기 출입자에 대한 식별 정보와 상기 기록 명령이 수신되면, 상기 데이터베이스에 상기 출입자에 대한 식별 정보를 기록해 둘 수 있다.
결국, 본 발명에 따른 전자 장치(110)는 상기 출입자가 고위험자인 것으로 판정되었을 경우, 향후 상기 출입자의 동선 파악이 가능하도록 하기 위해, 상기 출입자의 체온이 측정된 시간에 대한 정보와 상기 출입자의 얼굴 이미지로 구성된 식별 정보를 데이터베이스에 저장해서 관리하되, 민감한 개인 정보에 해당되는 상기 출입자의 얼굴 이미지를 스크램블링하여 저장함으로써, 개인 정보의 보호도 가능하도록 지원한다.
이때, 본 발명의 일실시예에 따르면, 전자 장치(110)는 검색 처리부(123), 식별 정보 수신부(124), 정보 추출부(125), 순번 추출부(126), 얼굴 이미지 복원부(127) 및 조회 결과 표시부(128)를 더 포함할 수 있다.
검색 처리부(123)는 통합 관리 서버(100)로 상기 출입자에 대한 식별 정보와 상기 기록 명령이 전송된 이후에 사용자로부터 제1 시간대에 고위험자인 것으로 선별된 출입자들에 대한 검색 명령이 인가되면, 통합 관리 서버(100)에 접속하여 상기 데이터베이스에 기록되어 있는 상기 복수의 출입자들의 식별 정보 중 상기 제1 시간대에 속하는 시간 정보가 포함된 식별 정보를 갖는 적어도 하나의 제1 출입자에 대한 식별 정보를 검색한 후 상기 적어도 하나의 제1 출입자에 대한 식별 정보가 검색되었음을 알리는 검색 결과 목록을 상기 화면 상에 표시한다.
예컨대, 상기 제1 시간대가 '2020년 5월 20일 오전 10시~오후 3시'라고 하는 경우, 검색 처리부(123)는 통합 관리 서버(100)의 상기 데이터베이스로부터 '2020년 5월 20일 오전 10시~오후 3시'라는 시간대에 속하는 시간 정보가 포함된 식별 정보를 갖는 적어도 하나의 제1 출입자에 대한 식별 정보를 검색한 후 상기 적어도 하나의 제1 출입자에 대한 식별 정보가 검색되었음을 알리는 검색 결과 목록을 상기 화면 상에 표시할 수 있다.
만약, 상기 출입자에 대한 식별 정보에 포함된 상기 제1 시간 정보에 따른 시간이 상기 제1 시간대에 속한다고 하는 경우, 상기 적어도 하나의 제1 출입자에 대한 식별 정보에는 상기 출입자에 대한 식별 정보가 함께 포함되어 있을 수 있다.
이렇게, 상기 적어도 하나의 제1 출입자에 대한 식별 정보에 상기 출입자에 대한 식별 정보가 포함되어 있는 상황에서 상기 검색 결과 목록이 상기 화면 상에 표시된 후 상기 사용자로부터 상기 적어도 하나의 제1 출입자에 대한 식별 정보 중 상기 출입자에 대한 식별 정보의 조회 명령이 인가되는 경우, 식별 정보 수신부(124)는 통합 관리 서버(100)로부터 상기 출입자에 대한 식별 정보를 수신할 수 있다.
그리고, 정보 추출부(125)는 상기 출입자에 대한 식별 정보가 수신되면, 상기 출입자에 대한 식별 정보로부터 상기 제1 시간 정보와 상기 스크램블링된 얼굴 이미지를 추출한다.
그러고 나서, 순번 추출부(126)는 상기 스크램블링된 얼굴 이미지를 구성하는 상기 n x n개의 이미지 조각들 각각에 대해, 최상단 좌측지점에서 우측 방향으로 순서대로 k개의 화소들을 추출하고, 각 이미지 조각에서 추출된 상기 k개의 화소들 각각의 RGB 값 중 상기 제1 색상 값을 구성하는 데이터의 비트열에서 마지막 비트 값을 하나씩 추출하여 k비트의 데이터의 비트열로 구성함으로써, 상기 n x n개의 이미지 조각들 각각에 삽입된 순번에 대한 k비트의 데이터를 추출한다.
그 이후, 얼굴 이미지 복원부(127)는 상기 n x n개의 이미지 조각들 각각에 삽입된 순번에 대한 k비트의 데이터를 기초로, 상기 n x n개의 이미지 조각들 각각에 삽입된 순번을 확인한 후 상기 확인된 순번에 따라, 상기 n x n개의 이미지 조각들 각각을 재배치함으로써, 상기 스크램블링된 얼굴 이미지를 스크램블링 전의 얼굴 이미지로 복원한다.
예컨대, 도 3과 도 4를 이용하여 설명한 예시와 같이, 'n=3'이라고 하고, 'k=4'라고 하며, 상기 스크램블링된 얼굴 이미지가 도면부호 320과 같다고 하는 경우, 순번 추출부(126)는 도 5에 도시된 그림과 같이, 스크램블링된 얼굴 이미지(320)를 구성하는 3 x 3개의 이미지 조각들 각각에 대해, 최상단 좌측지점에서 우측 방향으로 순서대로 상기 4개의 화소들을 추출할 수 있다.
만약, 도 5에 도시된 그림에서, 네 번째 이미지 조각에서 추출된 4개의 화소들을 '화소 1, 화소 2, 화소 3, 화소 4'라고 하는 경우, 순번 추출부(126)는 '화소 1, 화소 2, 화소 3, 화소 4'의 RGB 값 중 상기 제1 색상 값인 'Red 색상 값'을 구성하는 데이터인 'R1, R2, R3, R4'의 비트열인 'XXXXXXX0, XXXXXXX0, XXXXXXX0, XXXXXXX0'에서 마지막 비트 값인 '0, 0, 0, 0'을 하나씩 추출할 수 있다. 그러고 나서, 순번 추출부(126)는 'R1, R2, R3, R4'에서 추출된 마지막 비트 값인 '0, 0, 0, 0'을 조합하여 '0000'이라는 4비트의 비트열로 구성함으로써, 상기 네 번째 이미지 조각에 삽입된 순번 '1'에 대한 데이터인 '0000'을 추출할 수 있다.
이렇게, 순번 추출부(126)는 나머지 8개의 이미지 조각들 각각에 대해서도 최상단 좌측지점에서 우측 방향으로 순서대로 추출된 4개의 화소들을 이용한 순번 데이터의 추출 과정을 반복 수행함으로써, 나머지 8개의 이미지 조각들 각각에 삽입된 순번인 '4, 2, 5, 3, 9, 7, 6, 8'에 대한 순번 데이터를 추출할 수 있다.
그러고 나서, 얼굴 이미지 복원부(127)는 상기 3 x 3개의 이미지 조각들 각각에 삽입된 순번에 대한 데이터를 기초로, 상기 3 x 3개의 이미지 조각들 각각에 삽입된 순번인 '4, 2, 5, 1, 3, 9, 7, 6, 8'을 확인한 후 상기 확인된 순번인 '4, 2, 5, 1, 3, 9, 7, 6, 8'의 오름차순에 따라, 상기 3 x 3개의 이미지 조각들 각각을 재배치함으로써, 스크램블링된 얼굴 이미지(320)를 스크램블링 전의 얼굴 이미지(310)로 복원할 수 있다.
이렇게, 상기 출입자의 얼굴 이미지에 대한 복원이 완료되면, 조회 결과 표시부(128)는 상기 제1 시간 정보와 상기 복원된 얼굴 이미지를 상기 화면 상에 표시한다.
결국, 본 발명에 따른 전자 장치(110)는 특정 시간대에 해당되는 출입자의 확인이 필요한 경우, 통합 관리 서버(100)에 접속하여 해당 시간대에 속하는 시간 정보를 갖는 출입자들의 식별 정보를 검색해서 제공해 주고, 특정 출입자에 대한 상세 조회 명령이 인가되는 경우, 스크램블링되어 있는 얼굴 이미지를 원래의 얼굴 이미지로 복원한 후 상기 특정 출입자의 시간 정보와 얼굴 이미지를 화면 상에 표시해 줌으로써, 바이러스 감염 확진자의 이동 동선 파악이 용이하게 수행될 수 있도록 지원할 수 있다.
도 6은 본 발명의 일실시예에 따른 열화상 카메라 및 실화상 카메라(상기 열화상 카메라와 상기 실화상 카메라는 서로 동일한 카메라 앵글로 촬영 대상을 촬영하도록 설정되어 있음)와 연동하여 출입자의 체온을 측정하는 전자 장치의 동작 방법을 도시한 순서도이다.
단계(S610)에서는 상기 열화상 카메라를 통해 촬영된 상기 출입자의 열화상 이미지와 상기 실화상 카메라를 통해 촬영된 상기 출입자의 실화상 이미지를 획득한다.
단계(S620)에서는 상기 실화상 이미지로부터 상기 출입자의 얼굴 영역을 검출한다.
단계(S630)에서는 상기 열화상 이미지로부터 상기 얼굴 영역에 매칭되는 매칭 영역을 추출하고, 상기 매칭 영역에서 감지되는 온도 값 중 최대 온도 값을 확인한다.
단계(S640)에서는 상기 최대 온도 값을 상기 출입자의 체온으로 결정하여 화면 상에 표시한다.
이때, 본 발명의 일실시예에 따르면, 상기 전자 장치의 동작 방법은 상기 최대 온도 값이 사전 설정된 임계치를 초과하는지 확인하고, 상기 최대 온도 값이 상기 임계치를 초과하는 것으로 확인되는 경우, 상기 출입자가 고위험자임을 알리는 경고 메시지를 상기 화면 상에 표시하는 단계를 더 포함할 수 있다.
이때, 본 발명의 일실시예에 따르면, 상기 전자 장치의 동작 방법은 상기 최대 온도 값이 상기 임계치를 초과하는 것으로 확인된 경우, 상기 출입자에 대한 식별 정보를 생성하기 위한 생성 이벤트를 발생시키는 단계, 상기 생성 이벤트가 발생되면, 상기 생성 이벤트가 발생된 시점의 제1 시간 정보를 생성하는 단계, 상기 제1 시간 정보가 생성되면, 상기 실화상 이미지로부터 상기 얼굴 영역에 매칭되는 얼굴 이미지를 추출하고, 상기 얼굴 이미지를 가로 n(n은 2이상의 자연수임)개와 세로 n개로 구성된 n x n개의 이미지 조각들로 분할한 후 상기 n x n개의 이미지 조각들을 랜덤하게 섞음으로써, 스크램블링된 얼굴 이미지를 생성하는 단계 및 상기 스크램블링된 얼굴 이미지와 상기 제1 시간 정보를 매칭시켜 상기 출입자에 대한 식별 정보로 지정한 후, 고위험자인 것으로 선별된 복수의 출입자들의 식별 정보가 기록된 데이터베이스를 포함하고 있는 통합 관리 서버로 상기 출입자에 대한 식별 정보를 전송함과 동시에 상기 출입자에 대한 식별 정보를 상기 데이터베이스에 추가 기록할 것을 지시하는 기록 명령을 전송하는 단계를 더 포함할 수 있다.
이때, 본 발명의 일실시예에 따르면, 상기 스크램블링된 얼굴 이미지를 생성하는 단계는 상기 n x n개의 이미지 조각들 각각에 대해 위치에 따른 순번(상기 순번은 k(k는 3이상의 자연수임)비트의 데이터로 구성됨)을 할당하는 단계, 상기 n x n개의 이미지 조각들 각각에 대해 할당된 순번에 대한 k비트의 데이터의 비트열을 확인하는 단계 및 상기 n x n개의 이미지 조각들 각각에 대해, 최상단 좌측지점에서 우측 방향으로 순서대로 k개의 화소들을 추출하고, 각 이미지 조각에서 추출된 k개의 화소들 각각의 RGB 값 중 사전 설정된 제1 색상 값을 구성하는 데이터의 비트열에서 마지막 비트 값을 각 이미지 조각에 할당된 순번에 대한 k비트의 데이터의 비트열을 구성하는 각 비트 값으로 하나씩 치환함으로써, 상기 n x n개의 이미지 조각들 각각에 각 이미지 조각에 할당된 순번에 대한 k비트의 데이터를 은닉하는 단계를 포함할 수 있다.
이때, 본 발명의 일실시예에 따르면, 상기 전자 장치의 동작 방법은 상기 통합 관리 서버로 상기 출입자에 대한 식별 정보와 상기 기록 명령이 전송된 이후에 사용자로부터 제1 시간대(상기 제1 시간대는 상기 제1 시간 정보에 따른 시간이 포함된 시간대임)에 고위험자인 것으로 선별된 출입자들에 대한 검색 명령이 인가되면, 상기 통합 관리 서버에 접속하여 상기 데이터베이스에 기록되어 있는 상기 복수의 출입자들의 식별 정보 중 상기 제1 시간대에 속하는 시간 정보가 포함된 식별 정보를 갖는 적어도 하나의 제1 출입자에 대한 식별 정보를 검색한 후 상기 적어도 하나의 제1 출입자에 대한 식별 정보가 검색되었음을 알리는 검색 결과 목록을 상기 화면 상에 표시하는 단계, 상기 검색 결과 목록이 상기 화면 상에 표시된 후 상기 사용자로부터 상기 적어도 하나의 제1 출입자에 대한 식별 정보 중 상기 출입자에 대한 식별 정보의 조회 명령이 인가되면, 상기 통합 관리 서버로부터 상기 출입자에 대한 식별 정보를 수신하는 단계, 상기 출입자에 대한 식별 정보가 수신되면, 상기 출입자에 대한 식별 정보로부터 상기 제1 시간 정보와 상기 스크램블링된 얼굴 이미지를 추출하는 단계, 상기 스크램블링된 얼굴 이미지를 구성하는 상기 n x n개의 이미지 조각들 각각에 대해, 최상단 좌측지점에서 우측 방향으로 순서대로 k개의 화소들을 추출하고, 각 이미지 조각에서 추출된 상기 k개의 화소들 각각의 RGB 값 중 상기 제1 색상 값을 구성하는 데이터의 비트열에서 마지막 비트 값을 하나씩 추출하여 k비트의 데이터의 비트열로 구성함으로써, 상기 n x n개의 이미지 조각들 각각에 삽입된 순번에 대한 k비트의 데이터를 추출하는 단계, 상기 n x n개의 이미지 조각들 각각에 삽입된 순번에 대한 k비트의 데이터를 기초로, 상기 n x n개의 이미지 조각들 각각에 삽입된 순번을 확인한 후 상기 확인된 순번에 따라, 상기 n x n개의 이미지 조각들 각각을 재배치함으로써, 상기 스크램블링된 얼굴 이미지를 스크램블링 전의 얼굴 이미지로 복원하는 단계 및 상기 제1 시간 정보와 상기 복원된 얼굴 이미지를 상기 화면 상에 표시하는 단계를 더 포함할 수 있다.
이상, 도 6을 참조하여 본 발명의 일실시예에 따른 전자 장치의 동작 방법에 대해 설명하였다. 여기서, 본 발명의 일실시예에 따른 전자 장치의 동작 방법은 도 1 내지 도 5를 이용하여 설명한 전자 장치(110)의 동작에 대한 구성과 대응될 수 있으므로, 이에 대한 보다 상세한 설명은 생략하기로 한다.
본 발명의 일실시예에 따른 전자 장치의 동작 방법은 컴퓨터와의 결합을 통해 실행시키기 위한 저장매체에 저장된 컴퓨터 프로그램으로 구현될 수 있다.
또한, 본 발명의 일실시예에 따른 전자 장치의 동작 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.
이상과 같이 본 발명에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.
110: 전자 장치
111: 이미지 획득부 112: 얼굴 영역 검출부
113: 온도 확인부 114: 체온 표시부
115: 경고 메시지 표시부 116: 생성 이벤트 발생부
117: 시간 정보 생성부 118: 스크램블링부
119: 식별 정보 전송부 120: 순번 할당부
121: 비트열 확인부 122: 순번 은닉부
123: 검색 처리부 124: 식별 정보 수신부
125: 정보 추출부 126: 순번 추출부
127: 얼굴 이미지 복원부 128: 조회 결과 표시부
101: 열화상 카메라
102: 실화상 카메라
100: 통합 관리 서버

Claims (12)

  1. 열화상 카메라 및 실화상 카메라 - 상기 열화상 카메라와 상기 실화상 카메라는 서로 동일한 카메라 앵글로 촬영 대상을 촬영하도록 설정되어 있음 - 와 연동하여 출입자의 체온을 측정하는 전자 장치에 있어서,
    상기 열화상 카메라를 통해 촬영된 상기 출입자의 열화상 이미지와 상기 실화상 카메라를 통해 촬영된 상기 출입자의 실화상 이미지를 획득하는 이미지 획득부;
    상기 실화상 이미지로부터 상기 출입자의 얼굴 영역을 검출하는 얼굴 영역 검출부;
    상기 열화상 이미지로부터 상기 얼굴 영역에 매칭되는 매칭 영역을 추출하고, 상기 매칭 영역에서 감지되는 온도 값 중 최대 온도 값을 확인하는 온도 확인부;
    상기 최대 온도 값을 상기 출입자의 체온으로 결정하여 화면 상에 표시하는 체온 표시부;
    상기 최대 온도 값이 사전 설정된(predetermined) 임계치를 초과하는지 확인하고, 상기 최대 온도 값이 상기 임계치를 초과하는 것으로 확인되는 경우, 상기 출입자가 고위험자임을 알리는 경고 메시지를 상기 화면 상에 표시하는 경고 메시지 표시부;
    상기 최대 온도 값이 상기 임계치를 초과하는 것으로 확인된 경우, 상기 출입자에 대한 식별 정보를 생성하기 위한 생성 이벤트를 발생시키는 생성 이벤트 발생부;
    상기 생성 이벤트가 발생되면, 상기 생성 이벤트가 발생된 시점의 제1 시간 정보를 생성하는 시간 정보 생성부;
    상기 제1 시간 정보가 생성되면, 상기 실화상 이미지로부터 상기 얼굴 영역에 매칭되는 얼굴 이미지를 추출하고, 상기 얼굴 이미지를 가로 n(n은 2이상의 자연수임)개와 세로 n개로 구성된 n x n개의 이미지 조각들로 분할한 후 상기 n x n개의 이미지 조각들을 랜덤하게 섞음으로써, 스크램블링(Scrambling)된 얼굴 이미지를 생성하는 스크램블링부; 및
    상기 스크램블링된 얼굴 이미지와 상기 제1 시간 정보를 매칭시켜 상기 출입자에 대한 식별 정보로 지정한 후, 고위험자인 것으로 선별된 복수의 출입자들의 식별 정보가 기록된 데이터베이스를 포함하고 있는 통합 관리 서버로 상기 출입자에 대한 식별 정보를 전송함과 동시에 상기 출입자에 대한 식별 정보를 상기 데이터베이스에 추가 기록할 것을 지시하는 기록 명령을 전송하는 식별 정보 전송부
    를 포함하는 것을 특징으로 하는 전자 장치.
  2. 삭제
  3. 삭제
  4. 제1항에 있어서,
    상기 스크램블링부는
    상기 n x n개의 이미지 조각들 각각에 대해 위치에 따른 순번 - 상기 순번은 k(k는 3이상의 자연수임)비트의 데이터로 구성됨 - 을 할당하는 순번 할당부;
    상기 n x n개의 이미지 조각들 각각에 대해 할당된 순번에 대한 k비트의 데이터의 비트열을 확인하는 비트열 확인부; 및
    상기 n x n개의 이미지 조각들 각각에 대해, 최상단 좌측지점에서 우측 방향으로 순서대로 k개의 화소들을 추출하고, 각 이미지 조각에서 추출된 k개의 화소들 각각의 RGB 값 중 사전 설정된 제1 색상 값을 구성하는 데이터의 비트열에서 마지막 비트 값을 각 이미지 조각에 할당된 순번에 대한 k비트의 데이터의 비트열을 구성하는 각 비트 값으로 하나씩 치환함으로써, 상기 n x n개의 이미지 조각들 각각에 각 이미지 조각에 할당된 순번에 대한 k비트의 데이터를 은닉하는 순번 은닉부
    를 포함하는 것을 특징으로 하는 전자 장치.
  5. 제4항에 있어서,
    상기 통합 관리 서버로 상기 출입자에 대한 식별 정보와 상기 기록 명령이 전송된 이후에 사용자로부터 제1 시간대 - 상기 제1 시간대는 상기 제1 시간 정보에 따른 시간이 포함된 시간대임 - 에 고위험자인 것으로 선별된 출입자들에 대한 검색 명령이 인가되면, 상기 통합 관리 서버에 접속하여 상기 데이터베이스에 기록되어 있는 상기 복수의 출입자들의 식별 정보 중 상기 제1 시간대에 속하는 시간 정보가 포함된 식별 정보를 갖는 적어도 하나의 제1 출입자에 대한 식별 정보를 검색한 후 상기 적어도 하나의 제1 출입자에 대한 식별 정보가 검색되었음을 알리는 검색 결과 목록을 상기 화면 상에 표시하는 검색 처리부;
    상기 검색 결과 목록이 상기 화면 상에 표시된 후 상기 사용자로부터 상기 적어도 하나의 제1 출입자에 대한 식별 정보 중 상기 출입자에 대한 식별 정보의 조회 명령이 인가되면, 상기 통합 관리 서버로부터 상기 출입자에 대한 식별 정보를 수신하는 식별 정보 수신부;
    상기 출입자에 대한 식별 정보가 수신되면, 상기 출입자에 대한 식별 정보로부터 상기 제1 시간 정보와 상기 스크램블링된 얼굴 이미지를 추출하는 정보 추출부;
    상기 스크램블링된 얼굴 이미지를 구성하는 상기 n x n개의 이미지 조각들 각각에 대해, 최상단 좌측지점에서 우측 방향으로 순서대로 k개의 화소들을 추출하고, 각 이미지 조각에서 추출된 상기 k개의 화소들 각각의 RGB 값 중 상기 제1 색상 값을 구성하는 데이터의 비트열에서 마지막 비트 값을 하나씩 추출하여 k비트의 데이터의 비트열로 구성함으로써, 상기 n x n개의 이미지 조각들 각각에 삽입된 순번에 대한 k비트의 데이터를 추출하는 순번 추출부;
    상기 n x n개의 이미지 조각들 각각에 삽입된 순번에 대한 k비트의 데이터를 기초로, 상기 n x n개의 이미지 조각들 각각에 삽입된 순번을 확인한 후 상기 확인된 순번에 따라, 상기 n x n개의 이미지 조각들 각각을 재배치함으로써, 상기 스크램블링된 얼굴 이미지를 스크램블링 전의 얼굴 이미지로 복원하는 얼굴 이미지 복원부; 및
    상기 제1 시간 정보와 상기 복원된 얼굴 이미지를 상기 화면 상에 표시하는 조회 결과 표시부
    를 더 포함하는 것을 특징으로 하는 전자 장치.
  6. 열화상 카메라 및 실화상 카메라 - 상기 열화상 카메라와 상기 실화상 카메라는 서로 동일한 카메라 앵글로 촬영 대상을 촬영하도록 설정되어 있음 - 와 연동하여 출입자의 체온을 측정하는 전자 장치의 동작 방법에 있어서,
    이미지 획득부가, 상기 열화상 카메라를 통해 촬영된 상기 출입자의 열화상 이미지와 상기 실화상 카메라를 통해 촬영된 상기 출입자의 실화상 이미지를 획득하는 단계;
    얼굴 영역 검출부가, 상기 실화상 이미지로부터 상기 출입자의 얼굴 영역을 검출하는 단계;
    온도 확인부가, 상기 열화상 이미지로부터 상기 얼굴 영역에 매칭되는 매칭 영역을 추출하고, 상기 매칭 영역에서 감지되는 온도 값 중 최대 온도 값을 확인하는 단계;
    체온 표시부가, 상기 최대 온도 값을 상기 출입자의 체온으로 결정하여 화면 상에 표시하는 단계;
    경고 메시지 표시부가, 상기 최대 온도 값이 사전 설정된(predetermined) 임계치를 초과하는지 확인하고, 상기 최대 온도 값이 상기 임계치를 초과하는 것으로 확인되는 경우, 상기 출입자가 고위험자임을 알리는 경고 메시지를 상기 화면 상에 표시하는 단계;
    생성 이벤트 발생부가, 상기 최대 온도 값이 상기 임계치를 초과하는 것으로 확인된 경우, 상기 출입자에 대한 식별 정보를 생성하기 위한 생성 이벤트를 발생시키는 단계;
    상기 생성 이벤트가 발생되면, 시간 정보 생성부가, 상기 생성 이벤트가 발생된 시점의 제1 시간 정보를 생성하는 단계;
    상기 제1 시간 정보가 생성되면, 스크램블링부가, 상기 실화상 이미지로부터 상기 얼굴 영역에 매칭되는 얼굴 이미지를 추출하고, 상기 얼굴 이미지를 가로 n(n은 2이상의 자연수임)개와 세로 n개로 구성된 n x n개의 이미지 조각들로 분할한 후 상기 n x n개의 이미지 조각들을 랜덤하게 섞음으로써, 스크램블링(Scrambling)된 얼굴 이미지를 생성하는 단계; 및
    식별 정보 전송부가, 상기 스크램블링된 얼굴 이미지와 상기 제1 시간 정보를 매칭시켜 상기 출입자에 대한 식별 정보로 지정한 후, 고위험자인 것으로 선별된 복수의 출입자들의 식별 정보가 기록된 데이터베이스를 포함하고 있는 통합 관리 서버로 상기 출입자에 대한 식별 정보를 전송함과 동시에 상기 출입자에 대한 식별 정보를 상기 데이터베이스에 추가 기록할 것을 지시하는 기록 명령을 전송하는 단계
    를 포함하는 것을 특징으로 하는 전자 장치의 동작 방법.
  7. 삭제
  8. 삭제
  9. 제6항에 있어서,
    상기 스크램블링된 얼굴 이미지를 생성하는 단계는
    순번 할당부가, 상기 n x n개의 이미지 조각들 각각에 대해 위치에 따른 순번 - 상기 순번은 k(k는 3이상의 자연수임)비트의 데이터로 구성됨 - 을 할당하는 단계;
    비트열 확인부가, 상기 n x n개의 이미지 조각들 각각에 대해 할당된 순번에 대한 k비트의 데이터의 비트열을 확인하는 단계; 및
    순번 은닉부가, 상기 n x n개의 이미지 조각들 각각에 대해, 최상단 좌측지점에서 우측 방향으로 순서대로 k개의 화소들을 추출하고, 각 이미지 조각에서 추출된 k개의 화소들 각각의 RGB 값 중 사전 설정된 제1 색상 값을 구성하는 데이터의 비트열에서 마지막 비트 값을 각 이미지 조각에 할당된 순번에 대한 k비트의 데이터의 비트열을 구성하는 각 비트 값으로 하나씩 치환함으로써, 상기 n x n개의 이미지 조각들 각각에 각 이미지 조각에 할당된 순번에 대한 k비트의 데이터를 은닉하는 단계
    를 포함하는 것을 특징으로 하는 전자 장치의 동작 방법.
  10. 제9항에 있어서,
    상기 통합 관리 서버로 상기 출입자에 대한 식별 정보와 상기 기록 명령이 전송된 이후에 사용자로부터 제1 시간대 - 상기 제1 시간대는 상기 제1 시간 정보에 따른 시간이 포함된 시간대임 - 에 고위험자인 것으로 선별된 출입자들에 대한 검색 명령이 인가되면, 검색 처리부가, 상기 통합 관리 서버에 접속하여 상기 데이터베이스에 기록되어 있는 상기 복수의 출입자들의 식별 정보 중 상기 제1 시간대에 속하는 시간 정보가 포함된 식별 정보를 갖는 적어도 하나의 제1 출입자에 대한 식별 정보를 검색한 후 상기 적어도 하나의 제1 출입자에 대한 식별 정보가 검색되었음을 알리는 검색 결과 목록을 상기 화면 상에 표시하는 단계;
    상기 검색 결과 목록이 상기 화면 상에 표시된 후 상기 사용자로부터 상기 적어도 하나의 제1 출입자에 대한 식별 정보 중 상기 출입자에 대한 식별 정보의 조회 명령이 인가되면, 식별 정보 수신부가, 상기 통합 관리 서버로부터 상기 출입자에 대한 식별 정보를 수신하는 단계;
    상기 출입자에 대한 식별 정보가 수신되면, 정보 추출부가, 상기 출입자에 대한 식별 정보로부터 상기 제1 시간 정보와 상기 스크램블링된 얼굴 이미지를 추출하는 단계;
    순번 추출부가, 상기 스크램블링된 얼굴 이미지를 구성하는 상기 n x n개의 이미지 조각들 각각에 대해, 최상단 좌측지점에서 우측 방향으로 순서대로 k개의 화소들을 추출하고, 각 이미지 조각에서 추출된 상기 k개의 화소들 각각의 RGB 값 중 상기 제1 색상 값을 구성하는 데이터의 비트열에서 마지막 비트 값을 하나씩 추출하여 k비트의 데이터의 비트열로 구성함으로써, 상기 n x n개의 이미지 조각들 각각에 삽입된 순번에 대한 k비트의 데이터를 추출하는 단계;
    얼굴 이미지 복원부가, 상기 n x n개의 이미지 조각들 각각에 삽입된 순번에 대한 k비트의 데이터를 기초로, 상기 n x n개의 이미지 조각들 각각에 삽입된 순번을 확인한 후 상기 확인된 순번에 따라, 상기 n x n개의 이미지 조각들 각각을 재배치함으로써, 상기 스크램블링된 얼굴 이미지를 스크램블링 전의 얼굴 이미지로 복원하는 단계; 및
    조회 결과 표시부가, 상기 제1 시간 정보와 상기 복원된 얼굴 이미지를 상기 화면 상에 표시하는 단계
    를 더 포함하는 것을 특징으로 하는 전자 장치의 동작 방법.
  11. 제6항, 제9항 또는 제10항 중 어느 한 항의 방법을 컴퓨터와의 결합을 통해 실행시키기 위한 컴퓨터 프로그램을 기록한 컴퓨터 판독 가능 기록 매체.
  12. 제6항, 제9항 또는 제10항 중 어느 한 항의 방법을 컴퓨터와의 결합을 통해 실행시키기 위한 저장매체에 저장된 컴퓨터 프로그램.
KR1020200064524A 2020-05-28 2020-05-28 열화상 카메라 및 실화상 카메라와 연동하여 출입자의 체온을 측정하는 전자 장치 및 그 동작 방법 KR102196813B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200064524A KR102196813B1 (ko) 2020-05-28 2020-05-28 열화상 카메라 및 실화상 카메라와 연동하여 출입자의 체온을 측정하는 전자 장치 및 그 동작 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200064524A KR102196813B1 (ko) 2020-05-28 2020-05-28 열화상 카메라 및 실화상 카메라와 연동하여 출입자의 체온을 측정하는 전자 장치 및 그 동작 방법

Publications (1)

Publication Number Publication Date
KR102196813B1 true KR102196813B1 (ko) 2020-12-30

Family

ID=74088203

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200064524A KR102196813B1 (ko) 2020-05-28 2020-05-28 열화상 카메라 및 실화상 카메라와 연동하여 출입자의 체온을 측정하는 전자 장치 및 그 동작 방법

Country Status (1)

Country Link
KR (1) KR102196813B1 (ko)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112784703A (zh) * 2021-01-04 2021-05-11 长春理工大学 一种基于多光谱的人员行动轨迹确定方法
KR102363313B1 (ko) * 2021-03-10 2022-02-15 주식회사 고스트패스 안면 이미지를 이용한 본인 인증을 통해 결제를 수행하는 방법 및 이를 수행하는 시스템
KR20220125968A (ko) * 2021-03-08 2022-09-15 인트플로우 주식회사 안면 인식 체온 측정 장치 및 방법
KR20230033744A (ko) 2021-08-26 2023-03-09 주식회사 포씨게이트 비접촉 피부 온도 측정 장치, 비접촉 피부 온도 측정시스템 및 비접촉 피부 온도 측정 방법
WO2023090801A1 (ko) * 2021-11-16 2023-05-25 한화테크윈 주식회사 온도 정보 제공 시스템, 장치 및 방법
KR20240055562A (ko) 2022-10-20 2024-04-29 임현근 초소형 머신러닝 모델을 이용한 마스크 착용자의 발열 측정 장치 및 이를 이용한 발열 측정 방법

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150129937A (ko) * 2014-05-12 2015-11-23 (주)유틸리온 객체 건강 상태 판단 방법 및 시스템
KR20190000074A (ko) * 2017-06-22 2019-01-02 주식회사 아이알웨이브 안면의 온도 분포를 이용하여 대상자의 질병 감염 여부를 판단하는 방법과 장치

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150129937A (ko) * 2014-05-12 2015-11-23 (주)유틸리온 객체 건강 상태 판단 방법 및 시스템
KR20190000074A (ko) * 2017-06-22 2019-01-02 주식회사 아이알웨이브 안면의 온도 분포를 이용하여 대상자의 질병 감염 여부를 판단하는 방법과 장치

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112784703A (zh) * 2021-01-04 2021-05-11 长春理工大学 一种基于多光谱的人员行动轨迹确定方法
CN112784703B (zh) * 2021-01-04 2024-01-16 长春理工大学 一种基于多光谱的人员行动轨迹确定方法
KR20220125968A (ko) * 2021-03-08 2022-09-15 인트플로우 주식회사 안면 인식 체온 측정 장치 및 방법
KR102458065B1 (ko) 2021-03-08 2022-10-25 인트플로우 주식회사 안면 인식 체온 측정 장치 및 방법
KR102363313B1 (ko) * 2021-03-10 2022-02-15 주식회사 고스트패스 안면 이미지를 이용한 본인 인증을 통해 결제를 수행하는 방법 및 이를 수행하는 시스템
KR20230033744A (ko) 2021-08-26 2023-03-09 주식회사 포씨게이트 비접촉 피부 온도 측정 장치, 비접촉 피부 온도 측정시스템 및 비접촉 피부 온도 측정 방법
WO2023090801A1 (ko) * 2021-11-16 2023-05-25 한화테크윈 주식회사 온도 정보 제공 시스템, 장치 및 방법
KR20240055562A (ko) 2022-10-20 2024-04-29 임현근 초소형 머신러닝 모델을 이용한 마스크 착용자의 발열 측정 장치 및 이를 이용한 발열 측정 방법

Similar Documents

Publication Publication Date Title
KR102196813B1 (ko) 열화상 카메라 및 실화상 카메라와 연동하여 출입자의 체온을 측정하는 전자 장치 및 그 동작 방법
CN109858371B (zh) 人脸识别的方法及装置
JP3271750B2 (ja) アイリス識別コード抽出方法及び装置、アイリス認識方法及び装置、データ暗号化装置
JP4036051B2 (ja) 顔照合装置および顔照合方法
WO2016059786A1 (ja) なりすまし検知装置、なりすまし検知方法、および、記憶媒体
CN108764052A (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
US20050063569A1 (en) Method and apparatus for face recognition
CN102197412A (zh) 伪装检测系统，伪装检测方法以及伪装检测程序
CN108959884B (zh) 人证核验装置和方法
JP4837091B2 (ja) 撮影装置、および撮影方法、ならびに撮影プログラム
US11989975B2 (en) Iris authentication device, iris authentication method, and recording medium
JP2008160354A (ja) 映像出力装置
JP7484985B2 (ja) 認証システム、認証方法、及び、プログラム
CN108764053A (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
US9965612B2 (en) Method and system for visual authentication
KR20180122831A (ko) 객체 검출 시스템, 방법 및 컴퓨터 판독 가능한 기록매체
KR101400168B1 (ko) 입체 카메라를 이용한 3d 가상 방범 관제 시스템 및 방법
JP2010166288A (ja) 映像出力方法、映像出力装置、及び監視映像出力システム
JP2012185769A (ja) 認証装置、認証方法、および認証プログラム、並びに記録媒体
JP2009301242A (ja) 頭部候補抽出方法、頭部候補抽出装置、頭部候補抽出プログラムおよびそのプログラムを記録した記録媒体
CN110084076A (zh) 证据显示方法及装置
US12001533B2 (en) Method and system for authenticating an occupant within an interior of a vehicle
JP2012009051A (ja) 撮影装置、および撮影方法、ならびに撮影プログラム
JP2017073071A (ja) 同一判定プログラム、同一判定装置、および同一判定方法
US20220130174A1 (en) Image processing apparatus, control method, and non-transitory storage medium

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant