KR101754154B1 - Fever Patient Monitering Syatem at Public Place by Using Multiple Band Camera and Statistical Sampling and Method thereof - Google Patents

Fever Patient Monitering Syatem at Public Place by Using Multiple Band Camera and Statistical Sampling and Method thereof Download PDF

Info

Publication number
KR101754154B1
KR101754154B1 KR1020160008756A KR20160008756A KR101754154B1 KR 101754154 B1 KR101754154 B1 KR 101754154B1 KR 1020160008756 A KR1020160008756 A KR 1020160008756A KR 20160008756 A KR20160008756 A KR 20160008756A KR 101754154 B1 KR101754154 B1 KR 101754154B1
Authority
KR
South Korea
Prior art keywords
camera
image
unit
face
subject
Prior art date
Application number
KR1020160008756A
Other languages
Korean (ko)
Inventor
이동성
Original Assignee
주식회사 에스원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 에스원 filed Critical 주식회사 에스원
Priority to KR1020160008756A priority Critical patent/KR101754154B1/en
Application granted granted Critical
Publication of KR101754154B1 publication Critical patent/KR101754154B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/01Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/0022Radiation pyrometry, e.g. infrared or optical thermometry for sensing the radiation of moving bodies
    • G01J5/0025Living bodies
    • H04N5/2258

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Multimedia (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)

Abstract

본 발명 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 시스템은 공공장소의 넓은 면적을 촬영하고 촬영된 영상의 가시광 이미지와 적외선 이미지를 생성하여 전송하는 광역 감지 카메라와 카메라 본체에 구성된 상하 좌우 회전 및 렌즈의 Zooming을 실행하여 공공장소의 작은 면적을 촬영하여 촬영된 영상의 가시광 이미지와 적외선 이미지를 전송하는 카메라부와, 상기 카메라부로부터 수신되는 작은 면적의 가시광 이미지와 적외선 이미지를 기초로 피사체의 얼굴을 구성하는 특징점을 결정하여 얼굴 영역을 검출하고 착용 액세서리를 검출하며 피사체의 나이 및 성별을 추출하여 얼굴 영역의 구성 화소 집합을 생성하고, 상이 얼굴 영역 구성 화소 집합을 기초로 실요 해상도를 산출하여 상기 산출된 얼굴 영역의 적외선 실요 해상도가 트레쉬 홀드 이상인 경우 상기 산출된 얼굴 영역 구성 화소 집합, 얼굴구성 특징점 및 참조 주형을 기초로 하여 화소 값 2차원 분포를 생성하고, 상기 피사체의 얼굴형에 따른 화소 값 2차원 분포를 참조 얼굴 형태로 형태적 변환을 수행한 후 정면 2차원 평면에 투영하며, 상기 형태 변환된 얼굴 영역의 메타 정보를 기초로 하여 추정온도를 산출하며, 상기 산출된 추정 온도가 체온 온도와 비교하여 초과하는 경우 경보를 제공하며, 상기 카메라로부터 수신한 넓은 면적의 가시광 이미지와 적외선 이미지를 기초로 얼굴 검출기를 적용하여 얼굴을 검출하여 다수의 피사체를 특정하고 다수의 피사체 중에서 개별 피사체에 대한 고유 ID를 부여하고 피사체가 물리적으로 고정된 화면틀에 진입하고 나가는 경우에 각각 생성되고 삭제되며 화면틀 내에서 이동하는 경우에는 계속적으로 작동하는 트래킹부에 의하여 개별 피사체에 대한 출력 값이 유지되도록 하며 상기 화면 틀에 검출된 신체 영역 이미지 크기 및 검출된 얼굴 크기를 입력으로 하여 개별 피사체와 카메라 간 거리 및 카메라 이미지 평면에 대한 각도를 추정하고 상기 개별 피사체와 카메라 간 거리 및 카메라 이미지 평면에 대한 각도, 주변 온도와 같은 섭동 요인을 추정하여 보정하여 실제 체표 온도를 추정하여 생성하는 방식으로 다수의 개별 피사체 중에서 샘플들의 추정 온도를 생성하여 추정 온도 분포를 형성하고 통계적 대표값(중위치, 평균 등)을 획득하며 상기 획득된 통계적 대표값으로 구성되는 FIFO 형태의 queue를 유지하고 새로운 피사체의 통계적 대표값이 입력됨에 따라 가장 오래된 통계적 대표값을 제거하고 가장 최근의 통계적 대표값을 샘플값으로 queue에 삽입하여 갱신을 계속적으로 진행하며 통계적 대표 값에 대한 분포도를 산출하고 분포도가 트레쉬 홀드 이상인 경우 경보를 발령하도록 제어하는 관리 서버로 구성된 것을 특징으로 하는 것이다.The present invention relates to a multi-band camera and a system for detecting a fever in a public place using statistical sampling, comprising a wide area sensing camera for photographing a large area of a public place, generating visible light images and infrared images of the captured images, And a zoom unit for zooming the lens to transmit a visible light image and an infrared image of the photographed image by photographing a small area of a public place, and a camera unit for photographing the photographed image based on the visible light image and the infrared image of a small area received from the camera unit. The feature points constituting the face are determined to detect the face region, the wearing accessories are detected, the age and gender of the subject are extracted to generate a constituent pixel set of the face region, and the actual resolution is calculated on the basis of the face constituent pixel set The infrared region of the calculated face region Dimensional distribution of pixel values on the basis of the calculated set of facial region constituting pixel sets, facial feature points and reference templates, and generates a two-dimensional distribution of pixel values according to the facial type of the object, Transforms the face image into a face image on a two-dimensional plane, calculates an estimated temperature based on the meta information of the transformed face area, and if the calculated estimated temperature exceeds the body temperature, A face detector for detecting a face by using a face detector based on a wide visible light image and an infrared image received from the camera to specify a plurality of subjects and assigning a unique ID to each of the plurality of subjects, They are created and deleted when entering and exiting a physically fixed frame, The distance between the individual subject and the camera and the distance between the camera image and the camera image are set to be the input values of the detected body area image size and the detected face size in the screen frame, Estimating an angle with respect to a plane, estimating and calibrating a disturbance factor such as an angle between the individual subject and a camera, an angle with respect to a camera image plane, and an ambient temperature, and correcting the actual body temperature to generate samples. The estimated temperature is generated to form an estimated temperature distribution, a statistical representative value (median value, average, etc.) is obtained, a queue of FIFO type consisting of the obtained statistical representative values is maintained, and a statistical representative value of a new subject is inputted Remove the oldest statistical representative value, By inserting ever representative value as the sample value in the queue proceed to update continuously calculates the distribution of the statistical representative value, and if the distribution is not less than the trash hold it, characterized in that the management server is configured to control so as to sound the alarm.

Description

복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 시스템 및 이를 이용한 발열환자 감지 방법{Fever Patient Monitering Syatem at Public Place by Using Multiple Band Camera and Statistical Sampling and Method thereof}TECHNICAL FIELD [0001] The present invention relates to a multi-band camera and a public place fever patient detection system using statistical sampling, and a fever patient detection method using the same. [0002]

본 발명의 다중이 집합하는 장소에서 광역 감지 카메라와 협역 광역 카메라를 이용하여 발열 환자를 감지하는 것에 관한 것이다. 일반적으로 발열 환자 검출은 각 개인에 포커스를 맞추어 촬영하는 적외선 카메라를 이용하여 피사체의 온도를 검출하여 발열환자를 색출할 수 있는 것이다. 이때 적용되는 CPU는 적외선 카메라로부터 영상을 수신받고 영상 속의 피사체의 얼굴 부위를 추출하고 얼굴 부위의 온도를 검출하여 체온 온도 이상인 경우 경보를 발령하도록 구성되는 것이다.
The present invention relates to the detection of a fever patient using a wide area camera and a wide area wide area camera at a location where multiple are gathered. Generally, a fever patient can be detected by detecting the temperature of a subject by using an infrared camera that focuses on each individual. In this case, the CPU receives the image from the infrared camera, extracts the face region of the subject in the image, detects the temperature of the face region, and issues an alarm when the temperature is above the body temperature.

본 발명과 관련된 종래의 기술은 대한민국 등록특허 제10-1355947호(2014. 01. 29. 공고)에 개시되어 있는 것이다. 도 1은 상기 종래의 적외선 어레이 센서를 이용한 휴대용 온도 측정 장치의 구성도이다. 상기도 1에서 종래의 적외선 어레이 센서를 이용한 휴대용 온도 측정 장치는 카메라 모듈, 적외선 어레이 센서 모듈 및 전자 회로 모듈을 포함하여 구성될 수 있다. 예컨대, 카메라 모듈은, 렌즈부(40), 씨씨디(42) 등으로 구성될 수 있다. 그리고, 적외선 어레이 센서 모듈은, 써모파일 어레이 센서(53), 앰프(54), 로우 패스 필터(55), 제1 A/D 컨버터(56), 제2 A/D 컨버터(57), 그리고 디지털 신호 처리부(58) 등을 포함하여 구성될 수 있다. 그리고, 전자 회로모듈은, 자동 이득 조절부(42), 디지털 신호 처리부(43), CCD 구동부(44), 컨트롤러(45), 검출부(46), 중첩부(47), 오에스디 생성부(48), 스위칭부(49), 디스플레이(50), 스토리지(51), TAS 구동부(52) 등을 포함하여 구성될 수 있다. 여기서, 디스플레이(50)는, 휴대용 단말기에 적합한 소형 크기의 엘씨디(LCD) 등이 사용될 수 있으며, 특히 키버튼의 간소화와 사용자의 편의성 등을 고려하여, 터치스크린(Touch Screen) 기능이 구비된 엘씨디가 사용될 수 있다. 이러한 디스플레이(50)에는, 씨씨디(CCD: Charge Coupled Device)(41)에 의해 촬영되는 카메라 영상 정보, 또는 써모파일 어레이 센서(53)에 의해 측정되는 열화상 정보가 선택적으로 표시될 수도 있고, 또는 영상 정보와 열화상 정보가 중첩(Overlay)되어 표시될 수도 있다. 나아가, 디스플레이(50)에는 후술할 오에스디 생성부(48)에서 생성된 인디케이터(Indicator)가 영상 정보 및/또는 열화상 정보와 함께 중첩되어 표시될 수도 있다. 이를위해, 컨트롤러(45)는, 사용자 키(User Key) 입력 등에 따라, 오에스디(OSD: On Screen Display) 생성부(48)의 동작을 제어하여, 다양한 메뉴 및 오에스디 영상(즉, 다양한 형상의 인디케이터)이 디스플레이(50)에 표시되도      A conventional technique related to the present invention is disclosed in Korean Patent No. 10-1355947 (published on Apr. 29, 2014). 1 is a block diagram of a portable temperature measuring device using the conventional infrared array sensor. 1, the portable temperature measuring device using the conventional infrared array sensor may include a camera module, an infrared array sensor module, and an electronic circuit module. For example, the camera module may include a lens unit 40, a CCD 42, and the like. The infrared array sensor module includes a thermopile array sensor 53, an amplifier 54, a low-pass filter 55, a first A / D converter 56, a second A / D converter 57, A signal processing unit 58, and the like. The electronic circuit module includes an automatic gain control unit 42, a digital signal processing unit 43, a CCD driving unit 44, a controller 45, a detecting unit 46, a superimposing unit 47, A switching unit 49, a display 50, a storage 51, a TAS driving unit 52, and the like. Here, the display 50 may be a small-sized LCD suitable for a portable terminal. In particular, in consideration of simplification of a key button and user's convenience, an LCD having a touch screen function Can be used. In this display 50, camera image information photographed by a CCD (Charge Coupled Device) 41 or thermal image information measured by the thermopile array sensor 53 may be selectively displayed, Alternatively, the image information and the thermal image information may be overlapped and displayed. Furthermore, an indicator generated by the image generation unit 48, which will be described later, may be superimposed on the display 50 together with the image information and / or the thermal image information. For this purpose, the controller 45 controls the operation of an OSD (On Screen Display) generating unit 48 according to a user key input or the like to display various menu and OSD images Is displayed on the display 50

록 한다. 예를 들어, 사용자가 사람(피사체)의 이마(Forehead) 부위만을 선별하여 열화상을 측정하고자 하는 경우, 컨트롤러(45)가 오에스디 생성부(48)를 제어하여, 사람의 이마 형상에 해당하는 윤곽선(Edge Line)을 가진 인디케이터(Indicator)를 상기 디스플레이부(50)에 표시하게 된다. 한편, 인디케이터는 피사체의 전체 또는 국부 형상에 대응하는 프로파일(Profile)을 가진다. 여기서, 인디케이터가 표시되는 영역은 사용자가 정확한 온도를 측정하고자 하는 대상 영역(피사체의 전체 또는 국부 영역)으로서의 타겟 영역을 정의한다. 인디케이터의 구체적인 형상 및 표시 영역에 관한 정보는, 써모파일 어레이 센서(53)를 이용하여, 예컨대 사람의 이마 부분을 측정하는 데 가장 적합한 측정 거리 및 측정 각도 등이 되도록, 사전에 실시된 실험 결과에 근거하여, 스토리지(51) 내에 미리 저장되어 관리된다. 그리고, 컨트롤러(45)는, 인디케이터가 표시된 상태에서, 씨씨디(41)에 의해 촬영되는 카메라의 영상 정보 혹은 써모파일 어레이 센서에 의해 취득된 열화상 정보가 디스플레이(50)에 중첩되어 표시되도록, 스위칭부(49)를 제어한다. 예컨대, 사용자는 카메라 영상으로 표시되는 사람의 이마 부분이, 인디케이터의 윤곽선에 맞게 표시되도록, 측정 거리와 측정 각도 등을 적절히 조절하게 된다. 또한, 위와 같은 과정을 거쳐, 사람의 이마 부분이 인디케이터에 적절히 매칭(Matching)된 상태에서 사용자가 열화상 측정 키 버튼을 푸시하게 되면, 컨트롤러(45)는, TAS 구동부(52)의 동작을 제어하여, 써모파일 어레이 센서(53)를 인에이블(Enable)시킬 수도 있다. 그리고, 써모파일 어레이 센서(53)로부터 출력되는 전기 신호는 앰프(54), 로우 패스 필터(55), 제1 A/D 컨버터(56), 그리고 디지털 신호 처리부(58)등을 거쳐, 열화상 정보로서 처리된다. 이러한 열화상 정보는, 일차적으로는 복수의 써모파일 센서들 각각에서 취득한 온도값을 의미하는데, 컨트롤러(45)는 미리 저장된 센서 교정 데이터에 기초하여 실제 각각의 써모파일 센서들에 의해 측정된 전기신호값을 온도값으로 계산 및 변환하게 된다. 또한, 컨트롤러(45)는 디스플레이(50)에 픽셀 단위로 측정된 온도값에 따라 색상을 달리한 열화상 이미지를 표시할 수 있다. 이때, 써모파일 어레이 센서의 각 픽셀값이 의미 있는 온도값을 가지기 위해서는, 별도의 온도 센서를 통해 센서 내부의 온도를 측정하고 이 측정값을 통해 각 센서가 측정한 온도값을 보상한다. 즉, 일차적으로 센서 내부의 온도를 피사체 주변의 온도(ambient temperature)와 같다고 전제하고, 센서 내부의 온도 센서에 의해 측정된 온도값을 주변 온도로 보아 각 픽셀(즉, 이에 대응하는 적외선 센서)의 측정값을 보정한다. 여기서, 종래에는 온도 센서로서 비선형적인 로그 함수 특성을 가진 써미스터 센서를 사용하였기 때문에, 센서자체의 온도 측정에 정확도가 낮았다. 그러나, 이 경우에는, 1차 함수적인 형태의 선형적인 특성을 나타내는 PTAT(Propotional to Absolute Temperature) 센서를 사용함으로써, 센서 자체의 온도 측정에 대한 정확도를 향상시킬 수 있다. PTAT 센서를 사용하면 온도값의 보정 과정이 더 간단하다. 예컨대, 써모파일 어레이 센서의 각 모서리 부분에 총 4개의 PTAT 센서를 장착하고, 이 PTAT 센서들의 평균 온도값을 센서 자체의 온도로 하여 측정값을 보정한다. 최종적으로는 4개의 PTAT 센서의 평균값을 취하여 사용하지만 평균값을 취하기 전에 각 센서들의 온도 분포 범위를 측정하여 4개의 센서가 모두 ±0.2℃이내에 들어와야 안정된 상태로 판단하여 비로소 평균값을 구하고 최종적으로 센서 내부 온도값으로 사용한다. 한편, 디스플레이(50)에 피사체의 열화상 정보(즉, 피사체의 열화상 이미지) 혹은 영상 정보(즉, 피사체의 카메라 이미지)가 인디케이터와 함께 표시된 상태에서, 사용자는 온도측정장치 또는 피사체의 위치를 조절하여 피사체의 이미지 중 타겟 영역을 인디케이터에 중첩시킨다. 그 후, 피사체의 타겟 영역에 대한 온도를 측정하게 되는 것이다.
Lock. For example, when the user selects only the forehead region of a person (subject) and wants to measure a thermal image, the controller 45 controls the image generation unit 48 so that the forehead corresponding to the human forehead shape And an indicator having an edge line is displayed on the display unit 50. On the other hand, the indicator has a profile corresponding to the entire or local shape of the subject. Here, the area in which the indicator is displayed defines a target area as a target area (entire or local area of the subject) where the user intends to measure an accurate temperature. The specific shape of the indicator and the information on the display area are determined by using the thermo-file array sensor 53, for example, in order to obtain a measurement distance and a measurement angle most suitable for measuring a forehead portion of a person, And is stored and managed in the storage 51 in advance. The controller 45 controls the display 45 so that the image information of the camera photographed by the CCD 41 or the thermal image information acquired by the thermopile array sensor is superimposed on the display 50 in a state where the indicator is displayed, And controls the switching unit 49. For example, the user appropriately adjusts the measurement distance and the measurement angle so that the forehead portion of the person displayed by the camera image is displayed according to the outline of the indicator. If the user pushes the thermal image measurement key button while the forehead portion of the person is properly matched to the indicator through the above process, the controller 45 controls the operation of the TAS driver 52 , Thereby enabling the thermopile array sensor 53 to be enabled. The electric signal outputted from the thermopile array sensor 53 passes through the amplifier 54, the low-pass filter 55, the first A / D converter 56 and the digital signal processor 58, And processed as information. This thermal image information primarily refers to the temperature value acquired from each of the plurality of thermopile sensors, and the controller 45 calculates the temperature of the thermopile sensor based on the actual sensor data measured by each thermopile sensor Value is calculated and converted to a temperature value. In addition, the controller 45 may display on the display 50 the thermal image with a different color according to the temperature value measured in pixel units. In this case, in order that each pixel value of the thermopile array sensor has a meaningful temperature value, the temperature inside the sensor is measured through a separate temperature sensor, and the temperature value measured by each sensor is compensated through the measured value. That is, it is assumed that the temperature inside the sensor is assumed to be the same as the ambient temperature, and the temperature value measured by the temperature sensor inside the sensor is regarded as the ambient temperature so that the temperature of each pixel (i.e., the corresponding infrared sensor) Correct the measured value. Conventionally, since a thermistor sensor having a nonlinear logarithmic function is used as the temperature sensor, the accuracy of temperature measurement of the sensor itself is low. However, in this case, the accuracy of temperature measurement of the sensor itself can be improved by using a PTAT (Propotional to Absolute Temperature) sensor that exhibits a linear characteristic of a linear function form. Using the PTAT sensor, the process of calibrating the temperature value is simpler. For example, a total of four PTAT sensors are mounted on each corner of the thermopile array sensor, and the measured values are corrected by using the average temperature value of the PTAT sensors as the temperature of the sensor itself. Finally, the average value of the four PTAT sensors is taken, but before the mean value is taken, the range of temperature of each sensor is measured. After all four sensors are within ± 0.2 ° C, it is determined that the sensors are stable and the average value is finally obtained. Value. On the other hand, in a state where thermal image information (i.e., thermal image of a subject) or image information (i.e., a camera image of a subject) is displayed on the display 50 together with an indicator on the display 50, Adjust the target area of the image of the subject to superimpose on the indicator. Thereafter, the temperature of the target area of the subject is measured.

상기와 같이 구성된 종래의 적외선 어레이 센서를 이용한 휴대용 온도 측정 장치는 피사체의 이마, 손, 귀와 같은 특정 부위의 온도를 정확하게 측정할 수 있으나 다수의 사람들이 집합하는 공공 장소에서 체온 이상의 온도를 발열하는 피사체를 감지할 수 없는 문제점이 있는 것이다. 따라서 본 발명의 목적은 다수의 사람들이 모이는 공공장소에서 사람들을 촬영하고 촬영된 사람들 중에서 발열 환자를 감지하고 경보를 발령할 수 있도록 하기 위한 것이다. 또한 본 발명의 목적은 통계적 샘플링 방법을 이용하여 다중 속에서 발열 환자 존재 여부를 감지하기 위한 것이다.
The portable temperature measuring apparatus using the conventional infrared array sensor configured as described above can accurately measure the temperature of a specific part such as the forehead, the hand, and the ear of a subject. However, in a public place where a large number of people gather, There is a problem that it can not be detected. It is therefore an object of the present invention to photograph people in a public place where a large number of people are gathered, to detect a fever patient among the people photographed, and to issue an alarm. It is also an object of the present invention to detect the presence of a fever patient in a multiple genome using a statistical sampling method.

상기와 같은 목적을 가지는 본 발명 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 시스템은 공공장소의 넓은 면적을 촬영하고 촬영된 영상의 가시광 이미지와 적외선 이미지를 생성하여 전송하는 광역 감지 카메라와 카메라 본체에 구성된 상하 좌우 회전 및 렌즈의 Zooming을 실행하여 공공장소의 작은 면적을 촬영하여 촬영된 영상의 가시광 이미지와 적외선 이미지를 전송하는 카메라부와, 상기 카메라부로부터 수신되는 작은 면적의 가시광 이미지와 적외선 이미지를 기초로 피사체의 얼굴을 구성하는 특징점을 결정하여 얼굴 영역을 검출하고 착용 액세서리를 검출하며 피사체의 나이 및 성별을 추출하여 얼굴 영역의 픽셀로 이루어진 구성 화소 집합을 생성하고, 상이 얼굴 영역 구성 화소 집합을 기초로 적외선 실요 해상도를 산출하여 상기 산출된 얼굴 영역의 적외선 실요 해상도가 트레쉬 홀드 이상인 경우 상기 산출된 얼굴 영역 구성 화소 집합, 얼굴구성 특징점 및 참조 주형을 기초로 하여 화소 값 2차원 분포를 생성하고, 상기 피사체의 얼굴형에 따른 화소 값 2차원 분포를 참조 얼굴 형태로 형태적 변환을 수행한 후 정면 2차원 평면에 투영하며, 상기 형태 변환된 얼굴 영역의 메타 정보를 수신하여 추정온도를 산출하며, 상기 산출된 추정 온도가 체온 온도와 비교하여 초과하는 경우 경보를 제공하며, 상기 카메라로부터 수신한 넓은 면적의 가시광 이미지와 적외선 이미지를 기초로 얼굴 검출기를 적용하여 얼굴을 검출하여 다수의 피사체를 특정하고 다수의 피사체 중에서 개별 피사체에 대한 고유 ID를 부여하고 피사체가 물리적으로 고정된 화면틀에 진입하고 나가는 경우에 각각 생성되고 삭제되며 화면틀 내에서 이동하는 경우에는 계속적으로 작동하는 트래킹부에 의하여 개별 피사체에 대한 출력 값이 유지되도록 하며, 상기 화면 틀에 검출된 신체 영역 이미지 크기 및 검출된 얼굴 크기를 입력으로 하여 개별 피사체와 카메라 간 거리 및 카메라 이미지 평면에 대한 각도를 추정하고 상기 개별 피사체와 카메라 간 거리 및 카메라 이미지 평면에 대한 각도, 주변 온도와 같은 섭동 요인을 추정하고 보정하여 실제 체표 온도를 추정하여 생성하는 방식으로 다수의 개별 피사체 중에서 샘플들의 추정 온도를 생성하여 추정 온도 분포를 형성하고 통계적 대표값(중위치, 평균 등)을 획득하며 상기 획득된 통계적 대표값으로 구성되는 FIFO 형태의 큐(queue)를 유지하고, 새로운 피사체의 통계적 대표값이 입력됨에 따라 가장 오래된 통계적 대표값을 제거하고 가장 최근의 통계적 대표값을 샘플값으로 queue에 삽입하여 갱신을 계속적으로 진행하며 통계적 대표값에 대한 분포도를 산출하고 분포도가 트레쉬 홀드 이상인 경우 경보를 발령하도록 제어하는 관리 서버로 구성된 것을 특징으로 하는 것이다.A multi-band camera of the present invention having the above-described object and a public-area heat sensor system using statistical sampling is composed of a wide-area sensing camera for capturing a large area of a public place and generating and transmitting visible light images and infrared images of the photographed images, A camera unit for photographing a small area of a public place by performing vertical and horizontal rotation and zooming of the lens in the main body, for transmitting a visible light image and an infrared image of the photographed image, a visible light image of a small area received from the camera unit, A feature point constituting a face of a subject is determined based on an image to detect a face region, a wearable accessory is detected, an age and a gender of a subject are extracted to generate a constituent pixel set composed of pixels of the face region, Based on set infrared resolution And generating a two-dimensional pixel value distribution based on the calculated facial feature set pixel set, facial feature feature point, and reference template when the calculated infrared real image resolution of the facial region is equal to or greater than the threshold, Dimensional distribution of a pixel value according to a shape of a reference face is projected on a frontal two-dimensional plane after performing morphological conversion into a reference face, and the meta information of the morphologically transformed face region is received to calculate an estimated temperature, And detects a face by detecting a face by applying a face detector based on a wide visible light image and an infrared image received from the camera and detects a plurality of subjects Give a unique ID to the subject, and the subject enters and exits the physically fixed screen frame The output values for the individual subjects are maintained by the tracking unit which is continuously operated when moving within the screen frame, and the sizes of the detected body region images and the detected face sizes The distance between the individual subject and the camera and the angle with respect to the camera image plane are estimated and the perturbation factors such as the angle between the individual subject and the camera and the angle with respect to the camera image plane and the ambient temperature are estimated and corrected, And generates an estimated temperature distribution of the samples among the plurality of discrete subjects in a manner of estimating and generating the estimated temperature distribution to obtain a statistical representative value (median value, average, etc.) and a FIFO type queue as the statistical representative value of the new subject is input, The oldest statistical representative value is removed and the most recent statistical representative value is inserted into the queue as a sample value. The update is continuously performed. The distribution chart for the statistical representative value is calculated. When the distribution is above the threshold value, And a management server.

상기와 같이 구성된 본 발명 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 시스템 및 이를 이용한 발열환자 감지 방법은 대중이 집합하는 장소에서 발열 환자를 감지할 수 있는 효과가 있는 것이다. 또한 본 발명의 다른 효과는 광역 감지 카메라와 협역 감지 카메라를 통하여 다중 속에 속한 개별 발열 환자를 감지하여 색출할 수 있는 효과가 있는 것이다.
The public-area heat-generating patient detecting system using statistical sampling and the heat-generating patient detecting method using the multi-band camera according to the present invention configured as described above has the effect of detecting a fever patient in a place where the public is gathered. Further, another effect of the present invention is that the individual fever patient belonging to multiple genus can be detected and detected through the wide area sensing camera and the narrow range sensing camera.

도 1은 종래의 적외선 어레이 센서를 이용한 휴대용 온도 측정 장치의 구성도,
도 2는 본 발명 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 시스템 전체 구성도,
도 3은 본 발명에 적용되는 관리 서버의 상세 구성도,
도 4는 본 발명에 적용되는 협역 감지 카메라의 발열 환자 감지 방법에 대한 제어 흐름도,
도 5는 본 발명 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 방법에 대한 제어 흐름도,
도 6은 본 발명에 적용되는 협역 감지 카메라의 개별 피사체 적외선 이미지 사진 ,
도 7은 본 발명에 적용되는 광역 감지 카메라의 화면틀 이미지 사진,
도 8은 본 발명에 적용되는 N명 샘플에 대한 통계적 분포값 그래프이다.
1 is a configuration diagram of a portable temperature measuring device using a conventional infrared array sensor,
FIG. 2 is a block diagram of an entire system for detecting a fever in a public place using statistical sampling with a multi-
3 is a detailed configuration diagram of a management server according to the present invention,
FIG. 4 is a control flowchart of a method for detecting a fever patient in the narrow-range detection camera according to the present invention.
FIG. 5 is a control flow diagram of a method for detecting a patient fever in a public place using statistical sampling with a multi-band camera of the present invention.
FIG. 6 is a view showing an individual subject infrared image photograph of a narrow-range detection camera applied to the present invention,
FIG. 7 is a view showing a picture of a screen image of a wide area sensing camera applied to the present invention,
8 is a graph of statistical distribution values for N samples applied to the present invention.

상기와 같은 목적을 가진 본 발명 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 시스템 및 이를 이용한 발열환자 감지 방법을 도 2 내지 도 8을 기초로 하여 설명하면 다음과 같다.
2 to 8, a multi-zone camera according to the present invention having the above-described objects, a public-area heat-generating patient detection system using statistical sampling, and a heat-generating patient detection method using the same will be described.

도 2는 본 발명 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 시스템 전체 구성도이다. 상기도 2에서 본 발명 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 시스템은 공공장소의 넓은 면적을 촬영하고 촬영된 영상의 가시광 이미지와 적외선 이미지를 생성하여 전송하는 광역 감지 카메라와 카메라 본체에 구성된 상하 좌우 회전 및 렌즈의 Zooming을 실행하여 공공장소의 작은 면적을 촬영하여 촬영된 영상의 가시광 이미지와 적외선 이미지를 전송하는 카메라부(100)와, 상기 카메라부로부터 수신되는 작은 면적의 가시광 이미지와 적외선 이미지를 기초로 피사체의 얼굴을 구성하는 특징점을 결정하여 얼굴 영역을 검출하고 착용 액세서리를 검출하며 피사체의 나이 및 성별을 추출하여 얼굴 영역의 구성 화소 집합을 생성하고, 상이 얼굴 영역 구성 화소 집합을 기초로 적외선 실요 해상도를 산출하여 상기 산출된 얼굴 영역의 적외선 실요 해상도가 트레쉬 홀드 이상인 경우 상기 산출된 얼굴 영역 구성 화소 집합, 얼굴구성 특징점 및 참조 주형을 기초로 하여 화소 값 2차원 분포를 생성하고, 상기 피사체의 얼굴형에 따른 화소 값 2차원 분포를 참조 얼굴 형태로 형태적 변환을 수행한 후 정면 2차원 평면에 투영하며, 상기 형태 변환된 얼굴 영역의 메타 정보를 수신하여 추정온도를 산출하며, 상기 산출된 추정 온도가 체온 온도와 비교하여 초과하는 경우 경보를 제공하며, 상기 카메라부로부터 수신한 넓은 면적의 가시광 이미지와 적외선 이미지를 기초로 얼굴 검출기를 적용하여 얼굴을 검출하여 다수의 피사체를 특정하고 다수의 피사체 중에서 개별 피사체에 대한 고유 ID를 부여하고 피사체가 물리적으로 고정된 화면틀에 진입하고 나가는 경우에 각각 생성되고 삭제되며 화면틀 내에서 이동하는 경우에는 계속적으로 작동하는 트래킹부에 의하여 개별 피사체에 대한 출력 값이 유지되도록 하며 상기 화면 틀에 검출된 신체 영역 이미지 크기 및 검출된 얼굴 크기를 입력으로 하여 개별 피사체와 카메라 간 거리 및 카메라 이미지 평면에 대한 각도를 추정하고 상기 개별 피사체와 카메라 간 거리 및 카메라 이미지 평면에 대한 각도, 주변 온도와 같은 섭동 요인을 추정하고 보정하여 실제 체표 온도를 추정하여 생성하는 방식으로 다수의 개별 피사체 중에서 샘플들의 추정 온도를 생성하여 추정 온도 분포를 형성하고 통계적 대표값(중위치, 평균 등)을 획득하며 상기 획득된 통계적 대표값으로 구성되는 FIFO 형태의 큐(queue)를 유지하고 새로운 피사체의 통계적 대표값이 입력됨에 따라 가장 오래된 통계적 대표값을 제거하고 가장 최근의 통계적 대표값을 샘플값으로 queue에 삽입하여 갱신을 계속적으로 진행하며 통계적 대표값에 대한 분포도를 산정하여 표준 편차값을 산출하고 표준 편차가 트레쉬 홀드 이상인 경우 경보를 발령하도록 제어하는 관리 서버(200) 및 상기 카메라부와 관리 서버를 네트워크로 연결하는 인터넷망 또는 무선 통신망(300)으로 구성된 것을 특징으로 하는 것이다. 상기에서 카메라부가 광역 감지 카메라와 협역 감지 카메라로 구성된 것을 설명하였으나 광역 감지 카메라만으로 구성될 수도 있으며 상기 광역 감지 카메라 또는 협역 감지 카메라는 가시광 카메라와 적외선 카메라로 구성될 수 있는 것이다.FIG. 2 is a block diagram of an entire system for detecting a fever in a public place using statistical sampling with a multi-band camera of the present invention. 2, the multi-band camera of the present invention and a public place fever patient detection system using statistical sampling are provided with a wide area sensing camera for photographing a large area of a public place and generating and transmitting a visible light image and an infrared image of the captured image, A camera unit 100 for transmitting a visible light image and an infrared image of a photographed image by photographing a small area of a public place by performing a vertical and a horizontal rotation and a zooming of the lens and a visible light image of a small area received from the camera unit Based on the infrared image, the feature points constituting the face of the subject are determined to detect the face region, the wearing accessories are detected, the age and sex of the subject are extracted to generate a constituent pixel set of the face region, The infrared actual color resolution is calculated on the basis of the calculated infrared real color resolution, Dimensional distribution of pixel values on the basis of the calculated set of facial area constituting pixels, the facial constituting minutiae, and the reference template when the infrared real color resolution of the area is equal to or greater than the threshold, Transforms the distribution into a face shape, projects it on a frontal two-dimensional plane, receives meta information of the transformed face area to calculate an estimated temperature, compares the calculated estimated temperature with a body temperature And detects a face by detecting a face by applying a face detector on the basis of a wide visible light image and an infrared image received from the camera unit to identify a plurality of objects, And when the subject enters and leaves a physically fixed screen frame, respectively When the moving object is moved within the screen frame, the output value of the individual object is maintained by the continuously operating tracking unit, and the body area image size and the detected face size detected in the screen frame are inputted, Camera distance and camera image plane, estimating and correcting the perturbation factors such as the distance between the individual subject and the camera, the angle with respect to the camera image plane, and the ambient temperature, and estimating and correcting the actual body surface temperature, And generates an estimated temperature distribution to obtain a statistical representative value (median value, average, etc.), maintains a FIFO type queue composed of the obtained statistical representative values, As the statistical representative value of the subject is input, the oldest statistical representative value And the most recent statistical representative value is inserted into the queue as a sample value to continue the update. The distribution of the statistical representative value is calculated to calculate the standard deviation value, and when the standard deviation exceeds the threshold value, the alarm is issued And an Internet network or a wireless communication network 300 for connecting the camera unit and the management server via a network. In the above description, the camera is composed of a wide area sensing camera and a narrow range sensing camera. However, the wide area sensing camera or the narrow area sensing camera may be composed of a visible light camera and an infrared camera.

도 3은 본 발명에 적용되는 관리 서버의 상세 구성도이다. 상기도 3에서 본 발명에 적용되는 관리 서버는 카메라부로부터 가시광 이미지와 적외선 이미지를 수신하기 위한 송수신 모듈(210)과, 상기 카메라부로부터 수신한 적은 면적의 가시광 이미지와 적외선 이미지를 기초로 피사체의 얼굴을 구성하는 특징점을 결정하여 얼굴 영역을 검출하고 착용 액세서리를 검출하며 피사체의 나이 및 성별을 추출하여 얼굴 영역의 구성 화소 집합을 생성하고, 상이 얼굴 영역 구성 화소 집합을 기초로 적외선 실요 해상도를 산출하여 상기 산출된 얼굴 영역의 적외선 실요 해상도가 트레쉬 홀드 이상인 경우 상기 산출된 얼굴 영역 구성 화소 집합, 얼굴구성 특징점 및 참조 주형(Reference Template)을 기초로 하여 화소 값 2차원 분포를 생성하고, 상기 피사체의 얼굴형에 따른 화소 값 2차원 분포를 참조 얼굴 형태로 형태적 변환을 수행한 후 정면 2차원 평면에 투영하며, 상기 형태 변환된 얼굴 영역의 메타 정보(온도 분포, 부위별 오차 특성, 주변 온도, 피사체 나이 등과 같은)를 기초로 추정온도를 산출하며, 상기 산출된 추정 온도가 체온 온도와 비교하여 초과하는 경우 경보부를 통하여 경보를 제공하는 개별 피사체 발열 처리부(220)와, 상기 카메라부로부터 수신한 넓은 면적의 가시광 이미지와 적외선 이미지를 기초로 얼굴 검출기를 적용하여 얼굴을 검출하여 다수의 피사체를 특정하고 다수의 피사체 중에서 개별 피사체에 대한 고유 ID를 부여하고 피사체가 물리적으로 고정된 화면틀에 진입하고 나가는 경우에 각각 생성되고 삭제되며 화면틀 내에서 이동하는 경우에는 계속적으로 작동하는 트래킹부에 의하여 개별 피사체에 대한 출력 값이 유지되도록 하는 피사체 특정부(230)와, 상기 화면 틀에 검출된 신체 영역 이미지 크기 및 검출된 얼굴 크기를 입력으로 하여 개별 피사체와 카메라 간 거리 및 카메라 이미지 평면에 대한 각도를 추정하는 거리 각도 추정부(240)와, 상기 개별 피사체와 카메라 간 거리 및 카메라 이미지 평면에 대한 각도, 주변 온도와 같은 섭동 요인을 추정하여 보정하는 섭동 요인 보상부(250)와, 상기 섭동 요인 보상부에서 보정된 온도를 실제 체표 온도로 추정하여 생성하는 방식으로 다수의 개별 피사체 중에서 각 개별 샘플의 추정 온도를 생성하여 추정 온도 분포를 형성하고 통계적 대표값(중위치, 평균 등)을 획득하는 개별 피사체 통계 처리부(260)와, 상기 획득된 개별 피사체의 통계적 대표값으로 구성되는 FIFO(First In First Out) 형태의 큐(queue)를 유지하고 새로운 피사체의 통계적 대표값이 입력됨에 따라 가장 오래된 통계적 대표값을 제거하고 가장 최근의 통계적 대표값을 샘플값으로 queue에 삽입하여 갱신을 계속적으로 진행하며 통계적 대표값에 대한 표준 편차값을 산출하는 전체 피사체 통계 처리부(270)와, 상기 통계적 대표값에 대한 표준편차값이 트레쉬 홀드 이상인 경우 또는 개별 피사체 추정 온도가 체온 온도 이상인 경우 경보를 발령하는 경보부(280)와, 가시광이미지, 적외선 이미지, 데이터 등을 표출하는 표시부(285)와, 상기 송수신 모듈(210), 개별 피사체 발열 처리부(220), 피사체 특정부(230), 거리 각도 추정부(240), 섭동 요인 보상부(250), 개별 피사체 통계 처리부(260), 전체 피사체 통계 처리부(270), 표시부(285) 및 경보부(280)를 제어하는 메인 제어부(290)로 구성된 것을 특징으로 하는 것이다.3 is a detailed configuration diagram of a management server applied to the present invention. 3, the management server according to the present invention includes a transmission / reception module 210 for receiving a visible light image and an infrared image from a camera unit, and a transmission / reception module 210 for receiving a visible light image and an infrared image, The feature points constituting the face are determined to detect the face region, the wearing accessories are detected, the age and gender of the subject are extracted to generate a constituent pixel set of the face region, and the infrared actual resolution is calculated based on the face constituent pixel set Generates a two-dimensional pixel value distribution based on the calculated facial feature set pixel set, the facial feature feature point, and the reference template when the infrared real image resolution of the calculated face area is equal to or greater than the threshold, The two-dimensional distribution of pixel values according to the face type of the face Dimensional plane, and calculates the estimated temperature based on the meta information (such as temperature distribution, site-specific error characteristics, ambient temperature, subject age, etc.) of the morphologically transformed face region, (220) for providing an alarm through an alarm unit when the estimated temperature is higher than the body temperature, and a face detector for applying a face detector on the basis of the visible light image of a large area and the infrared image received from the camera unit Is generated and deleted when a plurality of subjects are identified and a unique ID is given to each of a plurality of subjects and a subject enters and exits a physically fixed frame, And the output value for the individual subject is maintained by the tracking unit operating as the subject A distance angle estimator 240 for estimating the distance between the individual subject and the camera and the angle with respect to the camera image plane based on the body area image size and the detected face size detected by the screen frame, A perturbation factor compensating unit 250 for estimating and compensating for perturbation factors such as the distance between the individual subject and the camera, the angle with respect to the camera image plane, and the ambient temperature; An individual object statistical processing unit 260 for generating an estimated temperature of each individual sample among a plurality of individual subjects in a manner of generating an estimated temperature distribution and obtaining statistical representative values (median, average, etc.) A first-in first-out (FIFO) queue of statistical representative values of individual subjects is maintained and a statistical representative value of a new subject is input A total object statistic processing unit 270 for continuously updating the statistical representative value by inserting the most recent statistical representative value into the queue as a sample value and calculating a standard deviation value for the statistical representative value, An alarm unit 280 for issuing an alarm when the standard deviation value of the statistical representative value is equal to or greater than the threshold or the estimated temperature of the individual subject is equal to or more than the body temperature, a display unit 285 for displaying visible light, infrared image, An object subject heat generating unit 220, a subject specifying unit 230, a distance angle estimating unit 240, a perturbation factor compensating unit 250, an individual subject statistic processing unit 260, And a main control unit 290 for controlling the statistical processing unit 270, the display unit 285, and the alarm unit 280.

도 4는 본 발명에 적용되는 협역 감지 카메라의 발열 환자 감지 방법에 대한 제어 흐름도이다. 상기도 4에서 본 발명에 적용되는 협역 감지 카메라의 발열 환자 감지 방법은 카메라부의 협역 카메라가 다중 집합 장소에 모인 개별 피사체를 촬영하고 촬영된 피사체의 가시광 이미지와 적외선 이미지를 생성하고 관리 서버로 전송하는 단계(S11)와, 관리 서버가 수신된 가시광 이미지 정보와 적외선 이미지 정보를 기초로 피사체 촬영 각도, 얼굴의 특징점을 결정하여 얼굴 영역을 검출하고 착용 액세서리를 검출하며 피사체의 나이 및 성별을 추출하는 단계(S12)와, 관리 서버가 상기 추출된 얼굴 영역, 착용 액세서리, 나이 및 성별 정보를 기초로 픽셀로 이루어진 얼굴 영역 구성 화소 집합을 생성하는 단계(S13)와, 관리 서버가 상기 얼굴 영역 구성 화소 집합을 기초로 얼굴 영역의 적외선 실요 해상도를 계산하는 단계(S14)와, 관리 서버가 상기 얼굴 영역 적외선 실요 해상도가 트레쉬홀드 이상 인지 여부를 판단하는 단계(S15)와, 관리 서버가 적외선 실요 해상도가 트레쉬홀드 이상인 경우 얼굴 영역 구성 화소 집합, 얼굴 영역 특징점 및 참조 주형(Reference Template)을 기초로 하여 화소 값 2차원 분포를 생성하는 단계(S16)와, 관리 서버가 피사체의 얼굴형에 따라 화소 값 2차원 분포를 참조 얼굴 형태로 형태적 변환을 수행한 후 정면 2차원 평면에 투영하는 단계(S17)와, 관리 서버가 상기 형태 변환된 얼굴 영역 온도 분포, 부위별 오차 특성, 주변 온도, 피사체의 나이 등과 같은 메타 정보를 기초로 추정온도를 산출하는 단계(S18)와, 관리 서버가 상기 산출된 추정온도와 체온 온도를 비교하여 초과하는 경우 경보를 제공하는 단계(S19)를 포함하여 이루어지는 것을 특징으로 하는 것이다.
4 is a control flowchart of a method for detecting a fever patient in a narrow-range detection camera according to the present invention. 4, the narrow-range camera of the narrow-range detection camera according to the present invention detects an individual subject gathered in a multi-set location, generates a visible light image and an infrared image of the photographed subject, and transmits the infrared light image to the management server A step S11 of detecting the face area, detecting the wearable accessory, and extracting the age and sex of the subject by determining the subject photographing angle and the feature point of the face on the basis of the received visible light image information and the infrared image information (S12), the management server creating (S13) a face area constituting pixel set composed of pixels based on the extracted face area, wearing accessory, age and gender information, (S14) of calculating the infrared realistic resolution of the face region based on the face realm (S15) judging whether or not the infrared real image resolution is equal to or greater than the threshold, and if the infrared real image resolution is equal to or greater than the threshold, determining whether the infrared real image resolution is greater than or equal to the threshold A step S16 of generating a two-dimensional distribution of pixel values by the management server, and a step of projecting the two-dimensional distribution of the pixel values according to the face type of the object to the front two-dimensional plane (S18) of calculating the estimated temperature on the basis of the meta information such as the face region temperature distribution, the error characteristic, the ambient temperature, the age of the subject, and the like, (S19) comparing the estimated temperature and the temperature of the body temperature with each other and providing an alarm when the estimated temperature and the body temperature are exceeded.

도 5는 본 발명 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 방법에 대한 제어 흐름도이다. 상기도 5에서 본 발명 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 방법은 카메라부가 넓은 면적을 촬영하고 생성한 가시광 이미지와 적외선 이미지를 관리 서버로 전송하는 단계(S21)와, 관리 서버가 수신한 넓은 면적의 가시광 이미지와 적외선 이미지를 기초로 얼굴 검출기를 적용하여 얼굴을 검출하여 다수의 피사체를 특정하는 단계(S22)와, 상기 특정된 다수의 피사체 중에서 개별 피사체에 대한 고유 ID를 부여하고 피사체가 물리적으로 고정된 화면틀에 진입하고 나가는 경우에 각각 생성되고 삭제되며 화면틀 내에서 이동하는 경우에도 계속적으로 작동하는 트래킹부에 의하여 개별 피사체에 대한 온도 출력 값이 유지되도록 하는 단계(S23)와, 상기 화면 틀에 검출된 신체 영역 이미지 크기 및 검출된 얼굴 크기를 입력으로 하여 개별 피사체와 카메라 간 거리 및 카메라 이미지 평면에 대한 각도를 추정하여 산정하는 단계(S24)와, 상기 산정된 개별 피사체와 카메라 간 거리 및 카메라 이미지 평면에 대한 각도, 주변 온도와 같은 섭동 요인을 추정하여 온도를 보정하는 단계(S25)와, 상기 보정된 온도를 실제 체표 온도로 추정하여 생성하는 방식으로 다수의 개별 피사체 중에서 샘플들의 추정 온도를 생성하여 추정 온도 분포를 형성하고 통계적 대표값(중위치, 평균 등)을 획득하는 단계(S26)와, 상기 획득된 통계적 대표값으로 구성되는 FIFO 형태의 queue를 유지하고 새로운 피사체의 통계적 대표값이 입력됨에 따라 가장 오래된 통계적 대표값을 제거하고 가장 최근의 통계적 대표값을 샘플값으로 queue에 삽입하여 갱신을 계속적으로 진행하며 통계적 대표값에 대한 분포도를 산정하여 표준 편차값을 산출하는 단계(S27)와, 상기 표준 편차값이 트레쉬 홀드 이상인 경우 경보를 발령하는 단계(S28)를 포함하여 이루어지는 것을 특징으로 하는 것이다.
FIG. 5 is a control flowchart for a method for detecting a public place fever patient using statistical sampling with a multi-band camera of the present invention. 5, a method for detecting a heat source in a public place using statistical sampling with a multi-band camera according to the present invention comprises the steps of (S21) capturing a large area of a camera section and transmitting the generated visible light image and infrared image to a management server, A step S22 of detecting a face by detecting a face by applying a face detector on the basis of the received large-area visible light image and the infrared image, a step S22 of assigning a unique ID to each of the plurality of specified objects A step S23 of maintaining a temperature output value for an individual subject by a tracking unit that is continuously generated even when the subject moves into and out of a physically fixed screen frame and moves in the screen frame, A size of the body region image detected in the screen frame, and a detected face size, (S24) estimating and calculating an angle between the individual subject and the camera and an angle with respect to the camera image plane; estimating a perturbation factor such as the distance between the individual subject and the camera, the angle with respect to the camera image plane, (S25) of generating a corrected temperature by estimating an actual body temperature and generating an estimated temperature of the sample among a plurality of individual subjects in a manner of estimating the corrected body temperature to generate an estimated temperature distribution, and calculating a statistical representative value (Step S26) of obtaining the statistical representative value of the object, and maintaining the FIFO queue of the obtained statistical representative value and removing the oldest statistical representative value as the statistical representative value of the new object is inputted, The statistical representative value is inserted into the queue as a sample value, and the update is continuously performed. The distribution of the statistical representative value is calculated (S27) calculating a standard deviation value, and issuing an alarm when the standard deviation value is equal to or greater than the threshold value (S28).

도 6은 본 발명에 적용되는 협역 감지 카메라의 개별 피사체 적외선 이미지 사진이다. 상기도 6에서 본 발명에 적용되는 협역 감지 카메라의 개별 피사체 적외선 이미지는 협역 감지 카메라에 구성된 적외선 카메라가 촬영한 영상을 나타내는 것으로 상기 적외선 이미지의 피사체에서 얼굴 영역을 검출하고 얼굴 영역에 대한 온도를 추정할 수 있는 것임을 나타내고 있는 것이다.
6 is a photograph of an individual subject infrared image of the narrow-range sensing camera applied to the present invention. 6, an individual subject infrared image of the narrow-range sensing camera is an image captured by an infrared camera configured in a narrow-sense camera, and detects a face region in a subject of the infrared image and estimates a temperature of the face region It is possible to do so.

도 7은 본 발명에 적용되는 광역 감지 카메라의 화면틀 이미지 사진이다. 상기도 7에서 다중이 집합하는 장소에서 개별 피사체에 대하여 화면 틀이 생성되고 상기 화면 틀은 트래킹부에 의하여 지속적으로 이동하면서 형성할 수 있는 것이고 상기 개별 피사체에 대하여 얼굴영역을 검출하고 검출된 얼굴 영역에 대한 온도를 추정하고 전체 개별 피사체에 대한 분포도를 산출하여 상기 분포도에서 표준편차 값을 산출할 수 있는 것임을 나타내고 있는 것이다.
7 is a photograph of a screen image of a wide area sensing camera according to the present invention. In FIG. 7, a screen frame is generated for an individual subject in a place where the multiple is collected, and the screen frame is formed by continuously moving by the tracking unit. The face region is detected with respect to the individual subject, And the standard deviation value can be calculated from the distribution map by calculating the distribution map for all the individual subjects.

도 8은 본 발명에 적용되는 N명 샘플에 대한 통계적 대표값에 대한 분포도 그래프 예이다. 상기도 8에서 본 발명에 적용되는 N명 샘플에 대한 통계적 대표값에 대한 분포도는 개별 피사체의 추정된 온도가 동일한 경우 표준 편차값은 0이 되고 표준 체온보다 높을수록 표준 편차값은 크게 나타나는 것임을 나타내고 있는 것이다.
8 is a graph showing an example of a distribution chart for statistical representative values for N samples applied to the present invention. 8, the distribution of the statistical representative values of N samples applied to the present invention indicates that when the estimated temperatures of the individual subjects are the same, the standard deviation value becomes 0. When the estimated temperatures of the individual subjects are the same, the standard deviation value becomes 0, It is.

100 : 카메라부, 200 : 관리 서버,
210 : 송수신 모듈, 220 : 개별피사체 발열처리부,
230 : 피사체 특정부, 240 : 거리각도 추정부,
250 : 섭동요인 보상부, 270 : 전체 피사체 통계처리부
100: camera unit, 200: management server,
210: a sending / receiving module, 220: an individual subject heat processing section,
230: Subject identifying unit, 240: Distance angle estimating unit,
250: Perturbation factor compensating unit, 270: Overall object statistical processing unit

Claims (10)

삭제delete 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 시스템은,
공공장소의 넓은 면적을 촬영하고 촬영된 영상의 가시광 이미지와 적외선 이미지를 생성하여 전송하는 광역 감지 카메라와 카메라 본체에 구성된 상하 좌우 회전 및 렌즈의 Zooming을 실행하여 공공장소의 작은 면적을 촬영하여 촬영된 영상의 가시광 이미지와 적외선 이미지를 전송하는 협역 감지 카메라로 구성된 카메라부(100)와;
카메라부로부터 가시광 이미지와 적외선 이미지를 수신하기 위한 송수신 모듈(210)과, 상기 카메라부로부터 수신한 적은 면적의 가시광 이미지와 적외선 이미지를 기초로 피사체의 얼굴을 구성하는 특징점을 결정하여 얼굴 영역을 검출하고 착용 액세서리를 검출하며 피사체의 나이 및 성별을 추출하여 얼굴 영역의 구성 화소 집합을 생성하고, 상이 얼굴 영역 구성 화소 집합을 기초로 실요 해상도를 산출하여 상기 산출된 얼굴 영역의 적외선 실요 해상도가 트레쉬 홀드 이상인 경우 상기 산출된 얼굴 영역 구성 화소 집합, 얼굴구성 특징점 및 참조 주형을 기초로 하여 화소 값 2차원 분포를 생성하고, 상기 피사체의 얼굴형에 따른 화소 값 2차원 분포를 참조 얼굴 형태로 형태적 변환을 수행한 후 정면 2차원 평면에 투영하며, 상기 형태 변환된 얼굴 영역의 메타 정보를 기초로 하여 추정온도를 산출하며, 상기 산출된 추정 온도가 체온 온도와 비교하여 초과하는 경우 경보부를 통하여 경보를 제공하는 개별 피사체 발열 처리부(220)와, 상기 카메라부로부터 수신한 넓은 면적의 가시광 이미지와 적외선 이미지를 기초로 얼굴 검출기를 적용하여 얼굴을 검출하여 다수의 피사체를 특정하고 다수의 피사체 중에서 개별 피사체에 대한 고유 ID를 부여하고 피사체가 물리적으로 고정된 화면틀에 진입하고 나가는 경우에 각각 생성되고 삭제되며 화면틀 내에서 이동하는 경우에는 계속적으로 작동하는 트래킹부에 의하여 개별 피사체에 대한 출력값이 유지되도록 하는 피사체 특정부(230)와, 상기 화면 틀에 검출된 신체 영역 이미지 크기 및 검출된 얼굴 크기를 입력으로 하여 개별 피사체와 카메라 간 거리 및 카메라 이미지 평면에 대한 각도를 추정하는 거리 각도 추정부(240)와, 상기 개별 피사체와 카메라 간 거리 및 카메라 이미지 평면에 대한 각도, 주변 온도와 같은 섭동 요인을 추정하여 보정하는 섭동 요인 보상부(250)와, 상기 섭동 요인 보상부에서 보정된 온도를 실제 체표 온도로 추정하여 생성하는 방식으로 다수의 개별 피사체 중에서 각 개별 샘플의 추정 온도를 생성하여 추정 온도 분포를 형성하고 통계적 대표값을 획득하는 개별 피사체 통계 처리부(260)와, 상기 획득된 개별 피사체의 통계적 대표값으로 구성되는 FIFO(First In First Out) 형태의 queue를 유지하고 새로운 피사체의 통계적 대표값이 입력됨에 따라 가장 오래된 통계적 대표값을 제거하고 가장 최근의 통계적 대표값을 샘플값으로 queue에 삽입하여 갱신을 계속적으로 진행하며 통계적 대표값에 대한 표준 편차값을 산출하는 전체 피사체 통계 처리부(270)와, 상기 통계적 대표값에 대한 표준편차값이 트레쉬 홀드 이상인 경우 또는 개별 피사체 추정 온도가 체온 온도 이상인 경우 경보를 발령하는 경보부(280)와, 가시광이미지, 적외선 이미지, 데이터 등을 표출하는 표시부(285) 및 상기 송수신 모듈(210), 개별 피사체 발열 처리부(220), 피사체 특정부(230), 거리 각도 추정부(240), 섭동 요인 보상부(250), 개별 피사체 통계 처리부(260), 전체 피사체 통계 처리부(270), 표시부(285) 및 경보부(280)를 제어하는 메인 제어부(290)로 구성된 관리서버(200);
및 상기 카메라부와 관리 서버를 네트워크로 연결하는 인터넷망 또는 무선 통신망(300)으로 구성된 것을 특징으로 하는 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 시스템.
A multi-zone camera and a public location fever patient detection system using statistical sampling,
Wide-area sensing camera that takes a wide area of public places, creates visible light image and infrared image of the photographed image and transmits it, and zooms the lens by zooming in and out. A camera unit 100 including a narrow-range detection camera for transmitting a visible light image and an infrared image of the image;
A transmission / reception module 210 for receiving a visible light image and an infrared image from the camera unit, and a feature point determining unit 220 for determining a feature point constituting a face of the subject based on the visible light image and the infrared image of small area received from the camera unit, And detecting wearable accessories, extracting the age and sex of the subject to generate a constituent pixel set of the facial region, calculating a pseudo resolution based on the set of facial region constituting pixels, Dimensional distribution of pixel values on the basis of the calculated set of facial region constituting pixel sets, facial feature points and reference templates, and generates a two-dimensional distribution of pixel values according to the facial type of the object, After the transformation is performed, it is projected onto the frontal two-dimensional plane, (220) for calculating an estimated temperature based on the meta information of the subject and providing an alarm through the alarm unit when the calculated estimated temperature exceeds the body temperature, A face detector is applied based on the visible light image of the area and the infrared image to detect a face to identify a plurality of subjects and to give a unique ID to each of the plurality of subjects and to enter the screen frame in which the subject is physically fixed A body specifying unit 230 for storing an output value for an individual subject by a tracking unit that is continuously operated when the body frame is moved within a frame, And the detected face size as input, the distance between the individual subject and the camera and A distance angle estimating unit 240 for estimating an angle with respect to the camera image plane, a perturbation factor compensating unit 250 for estimating and compensating for perturbation factors such as the distance between the individual subject and the camera, And an estimating unit configured to estimate the temperature of the individual sample based on the corrected temperature of the sample and to generate an estimated temperature distribution and to obtain a statistical representative value, The object statistic processing unit 260 maintains a first-in first-out (FIFO) queue having statistical representative values of the acquired individual subjects, and removes the oldest statistical representative value as a statistical representative value of a new subject is input And inserts the most recent statistical representative value into the queue as a sample value to continuously update the statistical representative An alarm unit 280 for issuing an alarm when the standard deviation value for the statistical representative value is equal to or greater than the threshold value or when the individual subject estimated temperature is equal to or higher than the body temperature, A display unit 285 for displaying a visible light image, an infrared image, data, and the like, and the transmission / reception module 210, the individual subject heat processing unit 220, the subject specifying unit 230, the distance angle estimating unit 240, A management server 200 including a compensation unit 250, an individual object statistic processing unit 260, an entire object statistic processing unit 270, a display unit 285, and a main control unit 290 for controlling the alarm unit 280;
And an Internet network or a wireless communication network (300) for connecting the camera unit and the management server via a network.
제2항에 있어서,
상기 광역 감지 카메라 및 상기 협역 감지 카메라는,
가시광 카메라 및 적외선 카메라로 구성되는 것을 특징으로 하는 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 시스템.
3. The method of claim 2,
Wherein the wide area sensing camera and the narrow area sensing camera are arranged in a manner that,
A visible light camera, and an infrared camera, and a system for detecting a public place fever patient using statistical sampling.
삭제delete 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 시스템은,
공공장소의 넓은 면적을 촬영하고 촬영된 영상의 가시광 이미지와 적외선 이미지를 생성하여 전송하는 광역 감지 카메라로 구성되는 카메라부(100)와;
상기 카메라부로부터 가시광 이미지와 적외선 이미지를 수신하기 위한 송수신 모듈(210)과 상기 카메라부로부터 수신한 넓은 면적의 가시광 이미지와 적외선 이미지를 기초로 얼굴 검출기를 적용하여 얼굴을 검출하여 다수의 피사체를 특정하고 다수의 피사체 중에서 개별 피사체에 대한 고유 ID를 부여하고 피사체가 물리적으로 고정된 화면틀에 진입하고 나가는 경우에 각각 생성되고 삭제되며 화면틀 내에서 이동하는 경우에는 계속적으로 작동하는 트래킹부에 의하여 개별 피사체에 대한 출력 값이 유지되도록 하는 피사체 특정부(230)와 상기 화면 틀에 검출된 신체 영역 이미지 크기 및 검출된 얼굴 크기를 입력으로 하여 개별 피사체와 카메라 간 거리 및 카메라 이미지 평면에 대한 각도를 추정하는 거리 각도 추정부(240)와 상기 개별 피사체와 카메라 간 거리 및 카메라 이미지 평면에 대한 각도, 주변 온도와 같은 섭동 요인을 추정하여 보정하는 섭동 요인 보상부(250)와 상기 섭동 요인 보상부에서 보정된 온도를 실제 체표 온도로 추정하여 생성하는 방식으로 다수의 개별 피사체 중에서 각개별 샘플의 추정 온도를 생성하여 추정 온도 분포를 형성하고 통계적 대표값을 획득하는 개별 피사체 통계 처리부(260)와 상기 획득된 개별 피사체의 통계적 대표값으로 구성되는 FIFO(First In First Out) 형태의 queue를 유지하고 새로운 피사체의 통계적 대표값이 입력됨에 따라 가장 오래된 통계적 대표값을 제거하고 가장 최근의 통계적 대표값을 샘플값으로 queue에 삽입하여 갱신을 계속적으로 진행하며 통계적 대표값에 대한 표준 편차값을 산출하는 전체 피사체 통계 처리부(270)와 상기 통계적 대표값에 대한 표준편차값이 트레쉬 홀드 이상인 경우 또는 개별 피사체 추정 온도가 체온 온도 이상인 경우 경보를 발령하는 경보부(280)와 가시광이미지, 적외선 이미지, 데이터 등을 표출하는 표시부(285) 및 상기 송수신 모듈(210), 피사체 특정부(230), 거리 각도 추정부(240), 섭동 요인 보상부(250), 개별 피사체 통계 처리부(260), 전체 피사체 통계 처리부(270), 표시부(285) 및 경보부(280)를 제어하는 메인 제어부(290)로 구성된 관리서버(200);
및 상기 카메라부와 관리 서버를 네트워크로 연결하는 인터넷망 또는 무선 통신망(300)으로 구성된 것을 특징으로 하는 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 시스템.
A multi-zone camera and a public location fever patient detection system using statistical sampling,
A camera unit 100 composed of a wide area sensing camera for photographing a large area of a public place and generating and transmitting a visible light image and an infrared image of the photographed image;
A transmission / reception module 210 for receiving a visible light image and an infrared image from the camera unit, and a face detector for applying a face detector based on the visible light image and the infrared image of a large area received from the camera unit to detect a plurality of objects A unique ID is assigned to an individual object among a plurality of objects, and when a subject enters and exits a physically fixed screen frame, it is created and deleted, respectively. In case of moving within a screen frame, An object specifying unit 230 for maintaining an output value for a subject, an image size of the body region detected by the screen frame, and a detected face size, The distance-angle estimating unit 240, A perturbation factor compensating unit 250 for estimating and compensating for a perturbation factor such as an angle with respect to a camera image plane and an angle with respect to a camera image plane, an ambient temperature, and a method of estimating the temperature corrected by the perturbation factor compensating unit An individual object statistic processing unit 260 for generating an estimated temperature distribution of each individual sample among a plurality of individual subjects to form an estimated temperature distribution and obtaining a statistical representative value, and a FIFO First Out) queue is maintained and the oldest statistical representative value is removed as the statistical representative value of the new subject is input. The most recent statistical representative value is inserted into the queue as the sample value, A total object statistic processing unit 270 for calculating a standard deviation value for the statistical representative value, An alarm unit 280 for issuing an alarm when the sub-deviation value is equal to or greater than the threshold, or when the estimated temperature of the individual subject is equal to or higher than the body temperature, a display unit 285 for displaying visible light, infrared image, data, An object specifying unit 230, a distance angle estimating unit 240, a perturbation factor compensating unit 250, an individual object statistical processing unit 260, an entire object statistic processing unit 270, a display unit 285, and an alarm unit 280 A management server 200 configured as a main control unit 290 for controlling the main control unit 290;
And an Internet network or a wireless communication network (300) for connecting the camera unit and the management server via a network.
제5항에 있어서,
상기 광역 감지 카메라는,
가시광 카메라와 적외선 카메라로 구성되는 것을 특징으로 하는 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 시스템.
6. The method of claim 5,
The wide-
Wherein the system comprises a visible light camera and an infrared camera.
삭제delete 삭제delete 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 방법은,
카메라부가 넓은 면적을 촬영하고 생성한 가시광 이미지와 적외선 이미지를 관리 서버로 전송하는 단계(S21)와;
관리 서버가 수신한 넓은 면적의 가시광 이미지와 적외선 이미지를 기초로 얼굴 검출기를 적용하여 얼굴을 검출하여 다수의 피사체를 특정하는 단계(S22)와;
상기 특정된 다수의 피사체 중에서 개별 피사체에 대한 고유 ID를 부여하고 피사체가 물리적으로 고정된 화면틀에 진입하고 나가는 경우에 각각 생성되고 삭제되며 화면틀 내에서 이동하는 경우에도 계속적으로 작동하는 트래킹부에 의하여 개별 피사체에 대한 온도 출력 값이 유지되도록 하는 단계(S23)와;
상기 화면 틀에 검출된 신체 영역 이미지 크기 및 검출된 얼굴 크기를 입력으로 하여 개별 피사체와 카메라 간 거리 및 카메라 이미지 평면에 대한 각도를 추정하여 산정하는 단계(S24)와;
상기 산정된 개별 피사체와 카메라 간 거리 및 카메라 이미지 평면에 대한 각도, 주변 온도와 같은 섭동 요인을 추정하여 온도를 보정하는 단계(S25)와;
상기 보정된 온도를 실제 체표 온도로 추정하여 생성하는 방식으로 다수의 개별 피사체 중에서 샘플들의 추정 온도를 생성하여 추정 온도 분포를 형성하고 통계적 대표값을 획득하는 단계(S26)와;
상기 획득된 통계적 대표값으로 구성되는 FIFO 형태의 queue를 유지하고 새로운 피사체의 통계적 대표값이 입력됨에 따라 가장 오래된 통계적 대표값을 제거하고 가장 최근의 통계적 대표값을 샘플값으로 queue에 삽입하여 갱신을 계속적으로 진행하며 통계적 대표값에 대한 분포도를 산정하여 표준 편차값을 산출하는 단계(S27)와;
상기 표준 편차값이 트레쉬 홀드 이상인 경우 경보를 발령하는 단계(S28);
및 카메라부의 협역 카메라가 다중 집합 장소에 모인 개별 피사체를 촬영하고 촬영된 피사체의 가시광 이미지와 적외선 이미지를 생성하고 관리 서버로 전송하는 단계(S11)와 관리 서버가 수신된 가시광 이미지 정보와 적외선 이미지 정보를 기초로 피사체 촬영 각도, 얼굴의 특징점을 결정하여 얼굴 영역을 검출하고 착용 액세서리를 검출하며 피사체의 나이 및 성별을 추출하는 단계(S12)와 관리 서버가 상기 추출된 얼굴 영역, 착용 액세서리, 나이 및 성별 정보를 기초로 픽셀로 이루어진 얼굴 영역 구성 화소 집합을 생성하는 단계(S13)와 관리 서버가 상기 얼굴 영역 구성 화소 집합을 기초로 얼굴 영역의 적외선 실요 해상도를 계산하는 단계(S14)와 관리 서버가 상기 얼굴 영역 적외선 실요 해상도가 트레쉬홀드 이상 인지 여부를 판단하는 단계(S15)와 관리 서버가 적외선 실요 해상도가 트레쉬홀드 이상인 경우 얼굴 영역 구성 화소 집합, 얼굴 영역 특징점 및 참조 주형(Reference Template)을 기초로 하여 화소 값 2차원 분포를 생성하는 단계(S16)와 관리 서버가 피사체의 얼굴형에 따라 화소 값 2차원 분포를 참조 얼굴 형태로 형태적 변환을 수행한 후 정면 2차원 평면에 투영하는 단계(S17) 및 관리 서버가 상기 형태 변환된 얼굴 영역 온도 분포, 부위별 오차 특성, 주변 온도, 피사체의 나이 등과 같은 메타 정보를 기초로 하여 추정온도를 산출하는 단계(S18)로 이루어지는 관리 서버가 카메라로부터 수신되는 적은 면적의 가시광 이미지와 적외선 이미지를 수신하여 개별 피사체의 온도를 추정하는 단계를 포함하여 이루어지는 것을 특징으로 하는 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 방법.
A multi-zone camera and method for detecting a public area fever patient using statistical sampling,
A step S21 of photographing a large area of the camera section and transmitting the generated visible light image and the infrared image to the management server;
A step (S22) of detecting a plurality of objects by detecting a face by applying a face detector on the basis of a wide-area visible light image and an infrared image received by the management server;
A unique ID is assigned to an individual subject among the specified plurality of subjects, and when the subject enters and exits a physically fixed screen frame, the tracking unit is continuously generated and deleted even when the subject moves within the screen frame (S23) the temperature output value for the individual subject is maintained;
(S24) estimating and calculating an angle with respect to a camera image plane and a distance between an individual subject and a camera using the body area image size and the detected face size detected in the screen frame as inputs;
(S25) correcting the temperature by estimating a perturbation factor such as the distance between the individual subject and the camera, the angle with respect to the camera image plane, and the ambient temperature;
A step (S26) of generating an estimated temperature distribution of samples from among a plurality of discrete objects in a manner that estimates the corrected temperature as an actual body surface temperature to form an estimated temperature distribution and obtaining a statistical representative value;
The FIFO type queue composed of the obtained statistical representative values is maintained, the oldest statistical representative value is removed as the statistical representative value of the new object is input, and the most recent statistical representative value is inserted into the queue as the sample value to update Calculating a standard deviation value by calculating a distribution diagram for the statistical representative value continuously (S27);
And issuing an alarm when the standard deviation value is equal to or greater than the threshold value (S28);
A step S11 of photographing an individual subject gathered in a multi-set place, generating a visible light image and an infrared image of the photographed subject, and transmitting the visible light image and the infrared image to the management server, and a step S11 of receiving the visible light image information and the infrared image information (S12) of detecting a face area, detecting a wearing accessory and extracting the age and sex of a subject by determining a subject photographing angle and a feature point of the face on the basis of the detected face area, (S13) of generating a face area constituting pixel set composed of pixels on the basis of gender information and a step (S14) of calculating an infrared practical resolution of a face area based on the face area constituting pixel set by the management server A step (S15) of judging whether or not the face area infrared real image resolution is equal to or greater than the threshold, (S16) of generating a two-dimensional pixel value distribution based on a face region constituting pixel set, a face region feature point and a reference template when the infrared server resolution is equal to or greater than the threshold, (S17) of performing a morphological conversion of a two-dimensional distribution of pixel values according to a face type into a reference face shape and then projecting the two-dimensional distribution of the pixel value on a two-dimensional front face (S17) (S18) of calculating the estimated temperature based on the meta information such as the ambient temperature, the age of the subject, and the like, receives the visible light image and infrared image of a small area received from the camera and estimates the temperature of the individual subject The method comprising the steps of: (a) Detection method.
제9항에 있어서,
상기 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 방법은,
관리 서버가 산출된 추정온도와 체온 온도를 비교하여 초과하는 경우 경보를 제공하는 단계(S19)를 포함하여 이루어지는 것을 특징으로 하는 복수대역 카메라와 통계적 샘플링을 이용한 공공장소 발열환자 감지 방법..




10. The method of claim 9,
A method for detecting a public fever patient using statistical sampling with the multi-
And a step (S19) of providing an alarm when the management server compares the calculated estimated temperature with the temperature of the body temperature and if the measured temperature exceeds the estimated temperature, providing the alarm.




KR1020160008756A 2016-01-25 2016-01-25 Fever Patient Monitering Syatem at Public Place by Using Multiple Band Camera and Statistical Sampling and Method thereof KR101754154B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160008756A KR101754154B1 (en) 2016-01-25 2016-01-25 Fever Patient Monitering Syatem at Public Place by Using Multiple Band Camera and Statistical Sampling and Method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160008756A KR101754154B1 (en) 2016-01-25 2016-01-25 Fever Patient Monitering Syatem at Public Place by Using Multiple Band Camera and Statistical Sampling and Method thereof

Publications (1)

Publication Number Publication Date
KR101754154B1 true KR101754154B1 (en) 2017-07-05

Family

ID=59352177

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160008756A KR101754154B1 (en) 2016-01-25 2016-01-25 Fever Patient Monitering Syatem at Public Place by Using Multiple Band Camera and Statistical Sampling and Method thereof

Country Status (1)

Country Link
KR (1) KR101754154B1 (en)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107811614A (en) * 2017-11-23 2018-03-20 上海理工大学 Human body is servo-actuated long distance temperature measurement system
CN107911604A (en) * 2017-11-24 2018-04-13 广州腾德同普光电科技有限公司 The acquisition of material evidence trace, transmission method and device
KR101978264B1 (en) * 2019-01-24 2019-08-23 (주)아이피캠프 The non-contact type body temperature monitoring system
CN111191638A (en) * 2020-02-28 2020-05-22 深圳市前海用电物联网科技有限公司 Face information and body temperature information detection method and system of causal model
KR102161477B1 (en) * 2020-07-02 2020-10-05 (주)큐브이미징시스템즈 Improved method for accurate temperature of thermal imaging camera using face recognition
CN112097915A (en) * 2020-09-10 2020-12-18 江西省桑格尔电子有限公司 Face recognition temperature measurement method and device
WO2021012383A1 (en) * 2019-07-24 2021-01-28 初速度(苏州)科技有限公司 Age prediction method and device for infrared image
CN112380938A (en) * 2020-11-04 2021-02-19 浙江大华技术股份有限公司 Face recognition and temperature measurement method, device, equipment and medium
KR102235462B1 (en) * 2020-07-15 2021-04-01 김명기 Facial recognition system and method for detecting body temperature and detecting facial movements
KR102247631B1 (en) * 2020-06-30 2021-05-03 (주)프롬 Apparatus, System or Method for detecting heating element in association with multiple thermal imaging cameras
KR20210133428A (en) 2020-04-29 2021-11-08 (주)그린광학 Proximity automatic detection type apparatus for recognizing fever and control method thereof
KR20220003249A (en) * 2020-07-01 2022-01-10 탐투스 주식회사 System and method for thermal image sensing
KR20220013241A (en) * 2020-07-24 2022-02-04 백승호 Method, apparatus and program for detection of fevered person
US11501560B2 (en) * 2020-10-01 2022-11-15 Black Sesame Technologies Inc. Infrared temperature measurement fused with facial identification in an access control system
CN116152195A (en) * 2023-02-20 2023-05-23 北京御航智能科技有限公司 Hot spot detection method and device for photovoltaic cell panel and electronic equipment

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5339476B2 (en) * 2011-05-09 2013-11-13 九州日本電気ソフトウェア株式会社 Image processing system, fever tracking method, image processing apparatus, control method thereof, and control program

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5339476B2 (en) * 2011-05-09 2013-11-13 九州日本電気ソフトウェア株式会社 Image processing system, fever tracking method, image processing apparatus, control method thereof, and control program

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107811614A (en) * 2017-11-23 2018-03-20 上海理工大学 Human body is servo-actuated long distance temperature measurement system
CN107911604A (en) * 2017-11-24 2018-04-13 广州腾德同普光电科技有限公司 The acquisition of material evidence trace, transmission method and device
CN107911604B (en) * 2017-11-24 2019-08-23 广东腾德同普科技股份有限公司 The acquisition of material evidence trace, transmission method and device
KR101978264B1 (en) * 2019-01-24 2019-08-23 (주)아이피캠프 The non-contact type body temperature monitoring system
WO2021012383A1 (en) * 2019-07-24 2021-01-28 初速度(苏州)科技有限公司 Age prediction method and device for infrared image
CN111191638A (en) * 2020-02-28 2020-05-22 深圳市前海用电物联网科技有限公司 Face information and body temperature information detection method and system of causal model
KR20210133428A (en) 2020-04-29 2021-11-08 (주)그린광학 Proximity automatic detection type apparatus for recognizing fever and control method thereof
KR102247631B1 (en) * 2020-06-30 2021-05-03 (주)프롬 Apparatus, System or Method for detecting heating element in association with multiple thermal imaging cameras
KR20220003249A (en) * 2020-07-01 2022-01-10 탐투스 주식회사 System and method for thermal image sensing
KR102364702B1 (en) * 2020-07-01 2022-02-21 탐투스 주식회사 System and method for thermal image sensing
KR102161477B1 (en) * 2020-07-02 2020-10-05 (주)큐브이미징시스템즈 Improved method for accurate temperature of thermal imaging camera using face recognition
KR102235462B1 (en) * 2020-07-15 2021-04-01 김명기 Facial recognition system and method for detecting body temperature and detecting facial movements
KR20220013241A (en) * 2020-07-24 2022-02-04 백승호 Method, apparatus and program for detection of fevered person
KR102402563B1 (en) 2020-07-24 2022-06-07 백승호 Method, apparatus and program for detection of fevered person
CN112097915A (en) * 2020-09-10 2020-12-18 江西省桑格尔电子有限公司 Face recognition temperature measurement method and device
US11501560B2 (en) * 2020-10-01 2022-11-15 Black Sesame Technologies Inc. Infrared temperature measurement fused with facial identification in an access control system
CN112380938A (en) * 2020-11-04 2021-02-19 浙江大华技术股份有限公司 Face recognition and temperature measurement method, device, equipment and medium
CN112380938B (en) * 2020-11-04 2024-05-03 浙江大华技术股份有限公司 Face recognition and temperature measurement method, device, equipment and medium
CN116152195A (en) * 2023-02-20 2023-05-23 北京御航智能科技有限公司 Hot spot detection method and device for photovoltaic cell panel and electronic equipment

Similar Documents

Publication Publication Date Title
KR101754154B1 (en) Fever Patient Monitering Syatem at Public Place by Using Multiple Band Camera and Statistical Sampling and Method thereof
US11030775B2 (en) Minimal user input video analytics systems and methods
US9681066B2 (en) Facilitating improved calibration of captured infrared data values by an IR imaging system in a thermography arrangement
KR101355946B1 (en) Device and method for measuring temperature using infrared array sensors
WO2019071489A1 (en) Intelligent terminal-based method and system for measuring temperature by photographing
KR101754152B1 (en) Thermal Patient Monitering System by Using Multiple Band Camera and Method thereof
WO2014144142A2 (en) Thermographic camera accessory for personal electronics
TWI671712B (en) Method for adjusting the aspect ratio of the display and display device thereof
US20180176450A1 (en) Image processing device
US20220015644A1 (en) Fever Detector by Distant Multipixel Thermal Imaging
JP2008026999A (en) Obstacle detection system and obstacle detection method
CN103776539B (en) Analysis device and analysis method
CN112088293B (en) Method and system for preventing vision deterioration caused by using electronic display in dim light condition
JP5514605B2 (en) Imaging device and monitoring device
KR101441285B1 (en) Multi-body Detection Method based on a NCCAH(Normalized Cross-Correlation of Average Histogram) And Electronic Device supporting the same
KR101798227B1 (en) Body temperature estimation method using image and body temperature estimation apparatus using image
JPH10254903A (en) Image retrieval method and device therefor
CN113029347A (en) Alarm configuration device and alarm configuration method
CN113218507A (en) Human body detection device and human body detection method
JP6251817B2 (en) Infrared imaging device, image processing method, and image processing program
CN108344511A (en) Radiance control device and radiance control method
KR102195072B1 (en) Thermal camera system and driving method thereof
CN111811663A (en) Temperature detection method and device based on video stream
CN111537075A (en) Temperature extraction method, device, machine readable medium and equipment
KR102390125B1 (en) Method and system for measuring length of object using smart phone

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant