KR102484426B1 - 방역기능을 갖는 터치영상기기 및 이의 동작방법 - Google Patents
방역기능을 갖는 터치영상기기 및 이의 동작방법 Download PDFInfo
- Publication number
- KR102484426B1 KR102484426B1 KR1020210051322A KR20210051322A KR102484426B1 KR 102484426 B1 KR102484426 B1 KR 102484426B1 KR 1020210051322 A KR1020210051322 A KR 1020210051322A KR 20210051322 A KR20210051322 A KR 20210051322A KR 102484426 B1 KR102484426 B1 KR 102484426B1
- Authority
- KR
- South Korea
- Prior art keywords
- unit
- user
- touch display
- touch
- plasma ion
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 10
- 238000005260 corrosion Methods 0.000 title 1
- 238000004659 sterilization and disinfection Methods 0.000 claims abstract description 38
- 230000010365 information processing Effects 0.000 claims abstract description 33
- 239000007921 spray Substances 0.000 claims abstract description 21
- 230000001954 sterilising effect Effects 0.000 claims abstract description 13
- 206010037660 Pyrexia Diseases 0.000 claims description 65
- 150000002500 ions Chemical class 0.000 claims description 61
- 238000003384 imaging method Methods 0.000 claims description 39
- 238000001514 detection method Methods 0.000 claims description 32
- 230000036760 body temperature Effects 0.000 claims description 26
- 230000001815 facial effect Effects 0.000 claims description 22
- 238000010438 heat treatment Methods 0.000 claims description 21
- 238000001931 thermography Methods 0.000 claims description 19
- 238000004092 self-diagnosis Methods 0.000 claims description 12
- 239000000284 extract Substances 0.000 claims description 8
- 238000005507 spraying Methods 0.000 claims description 7
- CBENFWSGALASAD-UHFFFAOYSA-N Ozone Chemical compound [O-][O+]=O CBENFWSGALASAD-UHFFFAOYSA-N 0.000 claims description 6
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 claims description 4
- 238000011017 operating method Methods 0.000 claims description 4
- 229910052760 oxygen Inorganic materials 0.000 claims description 4
- 239000001301 oxygen Substances 0.000 claims description 4
- 230000004913 activation Effects 0.000 claims description 3
- 230000001737 promoting effect Effects 0.000 claims description 3
- 230000005855 radiation Effects 0.000 claims description 3
- 230000003213 activating effect Effects 0.000 claims 2
- 239000003570 air Substances 0.000 description 25
- 230000006870 function Effects 0.000 description 22
- 238000013473 artificial intelligence Methods 0.000 description 11
- 238000004891 communication Methods 0.000 description 11
- 238000005516 engineering process Methods 0.000 description 9
- 206010022000 influenza Diseases 0.000 description 9
- 238000012545 processing Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 230000014509 gene expression Effects 0.000 description 6
- 238000002347 injection Methods 0.000 description 6
- 239000007924 injection Substances 0.000 description 6
- 239000000356 contaminant Substances 0.000 description 5
- 244000052616 bacterial pathogen Species 0.000 description 4
- 230000008901 benefit Effects 0.000 description 4
- 230000000903 blocking effect Effects 0.000 description 4
- 238000013135 deep learning Methods 0.000 description 4
- 230000005180 public health Effects 0.000 description 4
- 241000700605 Viruses Species 0.000 description 3
- 241000894006 Bacteria Species 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 201000010099 disease Diseases 0.000 description 2
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 2
- 238000007667 floating Methods 0.000 description 2
- 208000021760 high fever Diseases 0.000 description 2
- 230000001771 impaired effect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 208000024891 symptom Diseases 0.000 description 2
- 230000003612 virological effect Effects 0.000 description 2
- 241000711573 Coronaviridae Species 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 239000012080 ambient air Substances 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 210000000746 body region Anatomy 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000002059 diagnostic imaging Methods 0.000 description 1
- 238000003912 environmental pollution Methods 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000001988 toxicity Effects 0.000 description 1
- 231100000419 toxicity Toxicity 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/01—Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
- A61B5/015—By temperature mapping of body part
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61L—METHODS OR APPARATUS FOR STERILISING MATERIALS OR OBJECTS IN GENERAL; DISINFECTION, STERILISATION OR DEODORISATION OF AIR; CHEMICAL ASPECTS OF BANDAGES, DRESSINGS, ABSORBENT PADS OR SURGICAL ARTICLES; MATERIALS FOR BANDAGES, DRESSINGS, ABSORBENT PADS OR SURGICAL ARTICLES
- A61L2/00—Methods or apparatus for disinfecting or sterilising materials or objects other than foodstuffs or contact lenses; Accessories therefor
- A61L2/02—Methods or apparatus for disinfecting or sterilising materials or objects other than foodstuffs or contact lenses; Accessories therefor using physical phenomena
- A61L2/14—Plasma, i.e. ionised gases
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61L—METHODS OR APPARATUS FOR STERILISING MATERIALS OR OBJECTS IN GENERAL; DISINFECTION, STERILISATION OR DEODORISATION OF AIR; CHEMICAL ASPECTS OF BANDAGES, DRESSINGS, ABSORBENT PADS OR SURGICAL ARTICLES; MATERIALS FOR BANDAGES, DRESSINGS, ABSORBENT PADS OR SURGICAL ARTICLES
- A61L2/00—Methods or apparatus for disinfecting or sterilising materials or objects other than foodstuffs or contact lenses; Accessories therefor
- A61L2/24—Apparatus using programmed or automatic operation
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
- G01J5/48—Thermography; Techniques using wholly visual means
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
- G01J5/60—Radiation pyrometry, e.g. infrared or optical thermometry using determination of colour temperature
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/80—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for detecting, monitoring or modelling epidemics or pandemics, e.g. flu
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61L—METHODS OR APPARATUS FOR STERILISING MATERIALS OR OBJECTS IN GENERAL; DISINFECTION, STERILISATION OR DEODORISATION OF AIR; CHEMICAL ASPECTS OF BANDAGES, DRESSINGS, ABSORBENT PADS OR SURGICAL ARTICLES; MATERIALS FOR BANDAGES, DRESSINGS, ABSORBENT PADS OR SURGICAL ARTICLES
- A61L2202/00—Aspects relating to methods or apparatus for disinfecting or sterilising materials or objects
- A61L2202/10—Apparatus features
- A61L2202/14—Means for controlling sterilisation processes, data processing, presentation and storage means, e.g. sensors, controllers, programs
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Public Health (AREA)
- Theoretical Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Medical Informatics (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Human Computer Interaction (AREA)
- Epidemiology (AREA)
- Biomedical Technology (AREA)
- Pathology (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Heart & Thoracic Surgery (AREA)
- Plasma & Fusion (AREA)
- Surgery (AREA)
- Molecular Biology (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Primary Health Care (AREA)
- Biophysics (AREA)
- Multimedia (AREA)
- Studio Devices (AREA)
- Apparatus For Disinfection Or Sterilisation (AREA)
Abstract
본 발명의 일 실시예에 따른 방역기능을 갖는 터치영상기기는 높낮이가 조절되는 터치 디스플레이부; 상기 터치디스플레이부의 상부에 위치하여 사용자의 신체영상을 촬영하는 CCD 카메라부; 사용자의 신체영상을 기초로 키, 연령을 분석하고, 분석된 키에 맞게 상기 터치디스플레이부의 높이를 조절하기 위한 제어신호를 상기 터치디스플레이부로 제공하는 정보처리부; 상기 터치 디스플레이부의 가장자리에 구비되고, 상기 정보처리부의 제어신호에 기초하여 사용자의 신체 및 사용자가 상기 터치 디스플레이부의 화면을 터치한 영역으로 플라즈마 이온 에어를 분사하는 플라즈마 이온 살균소독부를 포함한다
Description
본 발명은 방역기능을 갖는 터치영상기기 및 이의 동작방법에 관한 것이다.
기후변화와 환경오염으로 인한 수많은 질병과 바이러스 인플루엔자의 독성 및 변형으로 인한 전염성 질병의 바이러스 확산이 사회적으로 큰 문제로 대두되고 있다.
현재 발생한 코로나바이러스의 손실이 전세계적으로 계산 불가한 막대한 사회적 손실과 경제적 손실이 발생하고 있으며, 이에 재난 등의 공익정보 전달 및 광고, 홍보 기능과 함께 비정상 체온의 조기 감지로 인한 바이러스 확산의 사전 차단의 필요성과 안면인식으로 통한 보안의 필요성이 강조되고 있다.
4차 산업혁명과 스마트시티 트랜드 확산에 맞춰 기존의 영상디스플레이 장비는 공공장소 및 다중시설에서 커뮤니케이션과 모니터링의 기능으로 확장되어 공공미디어(Public Media)로 활용되고 있는 추세이며, 이에 발맞추어 광고나 홍보 등의 기존의 기능과 함께 우리의 생활과 밀접한 곳에서 인간의 편리한 생활과 건강을 지키고 또한 보안을 강화 하기 위한 인공지능 기반의 영상디스플레이 기술이 필요하다.
본 발명이 해결하고자 하는 과제는 종래의 문제점을 해결할 수 있는 방역기능을 갖는 터치영상기기를 제공하는 데 그 목적이 있다.
상기 과제를 해결하기 위한 본 발명의 일 실시예에 따른 방역기능을 갖는 터치영상기기는 자가진단 영상모드 및 일반영상모드에 대한 출력화면을 제공하고, 높낮이가 조절되는 터치 디스플레이부; 상기 터치디스플레이부의 상부에 위치하여 사용자의 신체영상을 촬영하는 CCD 카메라부; 사용자로부터 방출되는 열복사를 감지하는 열화상 카메라부; 상기 열화상 카메라부를 통해 측정된 사용자의 측정체온과 미리 설정된 기준체온을 비교하여 측정체온이 기준체온을 초과하는 경우, 열화상에서 발열 대상의 사용자를 특정한 발열대상 특정데이터와 발열감지신호를 출력하는 발열 감지부; 상기 CCD 카메라부를 통해 촬영된 영상데이터에서 사용자의 안면을 인식하여 안면인식데이터를 생성하고, 안면인식데이터를 안면등록데이터와 비교하여 사용자의 안면등록상태에 따라 구분하고, 안면등록상태가 구분된 안면인식데이터를 발열대상 특정데이터와 매칭시켜 안면등록상태 별로 발열상태데이터를 생성하는 안면인식 발열 연동부; 사용자의 신체영상을 기초로 키, 연령을 분석하고, 분석된 키에 맞게 상기 터치디스플레이부의 높이를 조절하기 위한 제어신호를 상기 터치디스플레이부로 제공하는 정보처리부; 및 상기 터치 디스플레이부의 가장자리에 구비되고, 상기 정보처리부의 제어신호에 기초하여 사용자의 신체 및 사용자가 상기 터치 디스플레이부의 화면을 터치한 영역으로 플라즈마 이온 에어를 분사하는 플라즈마 이온 살균소독부를 포함하고, 상기 안면인식 발열감지 연동부는 사용자의 안면을 인식하기 위해 발열대상 특정데이터에 기초하여 영상데이터 내 해당 사용자의 얼굴 영역을 분할 및 검출하고, 검출된 얼굴 영역에서 눈 영역을 검출하고, 검출된 눈 영역에 대한 특징을 추출하고, 추출된 특징에 기초하여 템플릿을 생성하고, 생성된 템플릿을 상기 안면등록데이터에 포함된 템플릿과 비교하여 일치하는 템플릿을 검출하고, 일치하는 템플릿과 매칭된 사용자 정보를 추출하여 안면인식데이터로서 출력하고, 등록된 사용자와 미 등록된 사용자를 구분하고, 등록된 사용자에 대해서는 개인정보 또는 인적사항(ID(이름), 성별, 나이)를 추출하여 인식된 사용자를 파악하고, 등록된 사용자와 미 등록된 사용자가 발열상태인지를 함께 확인하는 것을 특징으로 한다.
상기 과제를 해결하기 위한 방역기능을 갖는 터치영상기기의 동작방법은 터치 디스플레이부, CCD 카메라부, 열화상 카메라부, 발열 감지부, 안면인식 발열 연동부, 사용자의 신체영상을 기초로 키, 연령을 분석하고, 분석된 키에 맞게 상기 터치디스플레이부의 높이를 조절하기 위한 제어신호를 상기 터치디스플레이부로 제공하는 정보처리부 및 플라즈마 이온 살균소독부를 포함하는 터치영상기기의 동작방법으로, 기 설정된 거리 내에 사용자를 감지하면, 상기 정보처리부에서 상기 CCD 카메라부 및 상기 열화상 카메라부를 동작시켜 감지된 신체영상을 촬영한 후, 사용자의 신체정보(키, 연령) 및 발열상태를 감지하는 단계; 사용자의 신체정보(키)에 적합한 시청 높이로 터치디스플레이의 높이가 조절되도록 높낮이 조절부를 제어하는 단계; 상기 정보처리부에서 높이가 조절된 터치디스플레이가 자가진단영상 모드로 동작되도록 제어하면, 터치디스플레이에서 사용자의 발열상태정보를 표시하는 단계; 상기 정보처리부는 플라즈마 이온 살균소독부를 구동시켜, 플라즈마 이온 에어를 생성한 후, 사용자의 신체의 위치로 분사노즐을 위치를 제어한 후, 플라즈마 이온 에어를 분사하는 단계; 및 사용자가 터치디스플레이의 임의의 영역을 터치하면, 정보처리부는 터치디스플레이로부터 감지된 터치영역을 제공받은 후, 해당 터치 영역으로 플라즈마 이온에어를 분사하도록 플라즈마 이온 살균소독부의 동작을 제어하는 단계를 포함하고, 상기 발열 감지부는 상기 열화상 카메라부를 통해 측정된 사용자의 측정체온과 미리 설정된 기준체온을 비교하여 측정체온이 기준체온을 초과하는 경우, 열화상에서 발열 대상의 사용자를 특정한 발열대상 특정데이터와 발열감지신호를 출력하고, 상기 안면인식 발열 연동부는 상기 CCD 카메라부를 통해 촬영된 영상데이터에서 사용자의 안면을 인식하기 위하여 발열대상 특정데이터에 기초하여 영상데이터 내 해당 사용자의 얼굴 영역을 분할 및 검출하고, 검출된 얼굴 영역에서 눈 영역을 검출하고, 검출된 눈 영역에 대한 특징을 추출하고, 추출된 특징에 기초하여 템플릿을 생성하고, 생성된 템플릿을 상기 안면등록데이터에 포함된 템플릿과 비교하여 일치하는 템플릿을 검출하고, 일치하는 템플릿과 매칭된 사용자 정보를 추출하여 안면인식데이터로서 출력하고, 상기 안면인식데이터를 안면등록데이터와 비교하여 사용자의 안면등록상태에 따라 구분하고, 안면등록상태가 구분된 안면인식데이터를 발열대상 특정데이터와 매칭시켜 안면등록상태 별로 발열상태데이터를 생성하고, 등록된 사용자와 미 등록된 사용자를 구분하고, 등록된 사용자에 대해서는 개인정보 또는 인적사항(ID(이름), 성별, 나이)를 추출하여 인식된 사용자를 파악하고, 등록된 사용자와 미 등록된 사용자가 발열상태인지를 함께 확인하는 것을 특징으로 한다.
본 발명의 일 실시예에 따른 방역기능을 갖는 터치영상기기를 이용하면, 터치영상기기에 내장된 딥러닝 학습 기반 인공지능 안면인식 기술을 이용하여 고해상 카메라를 통해 빠르고 간편하게 출입자 또는 방문자의 안면의 특징을 수집하고, 딥러닝 학습을 통해 안면의 특징을 분석, 대조함으로써 허가되지 않은 외부인원의 출입을 효과적으로 관리하고, 인공지능 터치영상기기에 장착된 열 감지 센서를 이용하여 체온을 정밀하게 측정하고, 고열의 증상을 동반하는 인플루엔자 등의 유행성 독감의 감염자를 사전에 발견하고, 유행성 독감의 발생 및 확산을 차단하여 공중보건에 기여할 수 있다는 이점을 제공한다.
또한, 본 발명의 일 실시예에 따른 방역기능을 갖는 터치영상기기를 이용하면, 터치영상기기를 이용한 사용자의 의복등에 뭍은 바이러스 균 및 오염물질을 플라즈마 이온 에어로 소독시킬 수 있고, 더 나아가, 터치영상기기의 화면 터치시 발생할 수 있는 박테리아, 세균 등의 오염물질을 제거시킬 수 있어, 유행성 독감의 발생 및 확산을 차단하여 공중보건에 기여할 수 있다는 이점을 제공한다.
도 1은 본 발명의 일 실시예에 따른 방역기능을 갖는 터치영상기기의 예시도이다.
도 2는 도 1에 도시된 터치영상기기의 정면도이고, 도 3은 도 1에 도시된 터치영상기기의 측면도이다.
도 4는 도 1에 도시된 플라즈마 이온 살균소독부의 장치 블록도이다.
도 5는 도 4에 도시된 플라즈마 이온 생성부의 장치구성도이다.
도 6은 도 1에 도시된 터치디스플레이의 자가진단영상모드 및 일반영상모드를 나타낸 예시도이다.
도 7은 본 발명의 일 실시예에 따른 방역기능을 갖는 터치영상기기의 동작방법을 설명한 흐름도이다.
도 8은 본 명세서에 개진된 하나 이상의 실시예가 구현될 수 있는 예시적인 컴퓨팅 환경을 도시한 도이다.
도 2는 도 1에 도시된 터치영상기기의 정면도이고, 도 3은 도 1에 도시된 터치영상기기의 측면도이다.
도 4는 도 1에 도시된 플라즈마 이온 살균소독부의 장치 블록도이다.
도 5는 도 4에 도시된 플라즈마 이온 생성부의 장치구성도이다.
도 6은 도 1에 도시된 터치디스플레이의 자가진단영상모드 및 일반영상모드를 나타낸 예시도이다.
도 7은 본 발명의 일 실시예에 따른 방역기능을 갖는 터치영상기기의 동작방법을 설명한 흐름도이다.
도 8은 본 명세서에 개진된 하나 이상의 실시예가 구현될 수 있는 예시적인 컴퓨팅 환경을 도시한 도이다.
이하, 본 명세서의 다양한 실시예가 첨부된 도면을 참조하여 기재된다. 그러나, 이는 본 명세서에 기재된 기술을 특정한 실시 형태에 대해 한정하는 것이 아니며, 본 명세서의 실시예의 다양한 변경(modifications), 균등물(equivalents), 및/또는 대체물(alternatives)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 본 명세서에서, "가진다," "가질 수 있다," "포함한다," 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작, 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.
본 명세서에서, "A 또는 B," "A 또는/및 B 중 적어도 하나," 또는 "A 또는/및 B 중 하나 또는 그 이상"등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. 예를 들면, "A 또는 B," "A 및 B 중 적어도 하나," 또는 "A 또는 B 중 적어도 하나"는, (1) 적어도 하나의 A를 포함, (2) 적어도 하나의 B를 포함, 또는 (3) 적어도 하나의 A 및 적어도 하나의 B 모두를 포함하는 경우를 모두 지칭할 수 있다.
본 명세서에서 사용된 "제 1," "제 2," "첫째," 또는 "둘째,"등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다. 예를 들면, 제 1 사용자 기기와 제 2 사용자 기기는, 순서 또는 중요도와 무관하게, 서로 다른 사용자 기기를 나타낼 수 있다. 예를 들면, 본 명세서에 기재된 권리 범위를 벗어나지 않으면서 제 1 구성요소는 제 2 구성요소로 명명될 수 있고, 유사하게 제 2 구성요소도 제 1 구성요소로 바꾸어 명명될 수 있다.
어떤 구성요소(예: 제 1 구성요소)가 다른 구성요소(예: 제 2 구성요소)에 "(기능적으로 또는 통신적으로) 연결되어((operatively or communicatively) coupled with/to)" 있다거나 "접속되어(connected to)" 있다고 언급된 때에는, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제 3 구성요소)를 통하여 연결될 수 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소(예: 제 1 구성요소)가 다른 구성요소(예: 제 2 구성요소)에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 다른 구성요소(예: 제 3 구성요소)가 존재하지 않는 것으로 이해될 수 있다.
본 명세서에서 사용된 표현 "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, "~에 적합한(suitable for)," "~하는 능력을 가지는(having the capacity to)," "~하도록 설계된(designed to)," "~하도록 변경된(adapted to)," "~하도록 만들어진(made to)," 또는 "~를 할 수 있는(capable of)"과 바꾸어 사용될 수 있다. 용어 "~하도록 구성된(또는 설정된)"은 하드웨어적으로 "특별히 설계된(specifically designed to)" 것만을 반드시 의미하지 않을 수 있다. 대신, 어떤 상황에서는, "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들면, 문구 "A, B, 및 C를 수행하도록 구성된(또는 설정된) 프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서), 또는 메모리 장치에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써, 해당 동작들을 수행할 수 있는 범용프로세서(generic-purpose processor)(예: CPU 또는 application processor)를 의미할 수 있다.
본 명세서에서 사용된 용어들은 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 다른 실시예의 범위를 한정하려는 의도가 아닐 수 있다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 용어들은 본 명세서에 기재된 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가질 수 있다. 본 명세서에 사용된 용어들 중 일반적인 사전에 정의된 용어들은, 관련 기술의 문맥상 가지는 의미와 동일 또는 유사한 의미로 해석될 수 있으며, 본 명세서에서 명백하게 정의되지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다. 경우에 따라서, 본 명세서에서 정의된 용어일지라도 본 명세서의 실시예들을 배제하도록 해석될 수 없다.
이하, 첨부된 도면들에 기초하여 본 발명의 일 실시예에 따른 방역기능을 갖는 터치영상기기를 보다 상세하게 설명하도록 한다.
도 1은 본 발명의 일 실시예에 따른 방역기능을 갖는 터치영상기기의 예시도이고, 도 2는 도 1에 도시된 터치영상기기의 정면도이고, 도 3은 도 1에 도시된 터치영상기기의 측면도이고, 도 4는 도 1에 도시된 플라즈마 이온 살균소독부의 장치 블록도이고, 도 5는 도 4에 도시된 플라즈마 이온 생성부의 장치구성도이고, 도 6은 도 1에 도시된 터치디스플레이의 자가진단영상모드 및 일반영상모드를 나타낸 예시도이다.
먼저, 도 1에 도시된 방역기능을 갖는 터치영상기기(100)는 공항, 병원, 관공서, 종교시설, 식당 등 유동인구가 많은 건물의 출입구에 설치되고, 인공지능 안면 인식 기술과 기 등록된 사용자 안면등록데이터를 기반으로 촬영 영상을 분석하여 사용자의 안면을 인식하여 사용자의 등록 상태를 구분하고, 열화상 카메라를 이용한 사용자의 체온 측정을 통해 사용자의 발열상태를 사용자의 등록 상태 별로 검출하여 출력화면을 통해 표시하는 자가진단 영상모드, 및 광고 또는 홍보 영상과 생활 정보를 출력하는 일반 영상모드로 각각 동작하며, 각 영상모드에 따라 출력화면을 전환하는 동작을 수행할 수 있다.
또한, 터치영상기기(100)는 광고 대상자의 손 및 의복의 오염 물질을 플라즈마 이온 에어를 고압으로 분사하여 살균처리하는 장치일 수 있다.
또한, 터치영상기기(100)는 영상분석을 통해 사용자의 신체조건에 맞게 터치디스플레이의 높낮이 및 플라즈마 이온 에어의 분사위치를 조절할 수 있고, 또한, 주변의 기온에 따라 플라즈마 이온 에어의 온도를 조절할 수 있는 기능을 갖는다.
이를 위해, 터치영상기기(100)는 도 1에 도시된 바와 같이 터치디스플레이부(110), 열화상 카메라부(120), CCD 카메라부(130), 발열 감지부(140), 안면인식 발열 연동부(150), 플라즈마 이온 살균소독부(160), 제어부(170), 음성 인식 처리부(180) 및 장치 통신부(190) 중 적어도 하나를 포함할 수 있다.
상기 터치디스플레이부(110)는 자가진단 영상모드와 일반영상모드에 대한 출력화면을 제공할 수 있다. 이러한 터치디스플레이부(110)는 베젤이 없고 고해상도의 반사형 비디오 월(video wall) 형태(대략 43인치)로 구현될 수 있으나, 본 실시예에서는 디스플레이부(110)의 사양(Spec)에 대하여 한정하는 것은 아니며, 다양한 디스플레이의 적용이 가능하다.
한편, 터치디스플레이부(110)는 자가진단 영상모드와 일반영상모드에 따라 동작하며, 두 모드에 따른 출력화면 또는 출력영상을 자유롭게 변경할 수 있다.
상기 열화상 카메라부(120)는, 사용자(방문자)로부터 방출되는 열복사를 감지하여 터치디스플레이부(110)를 통해 다양한 색상의 그래픽으로 좀 더 구체적으로, 열화상 카메라부(120)는 열(온도) 분포를 측정하는 카메라로 온도 차에 의한 이미지를 생성할 뿐만 아니라 이러한 온도 차를 정확하게 측정할 수 있으며, 절대온도 0K 이상의 모든 물체는 적외선을 자체적으로 발생하기 때문에 열화상 카메라를 이용하여 별도의 조명 없이도 주·야간에 상관없이 영상을 획득할 수 있다.
상기 CCD 카메라부(130)는, 열화상 카메라부(120)와 동일 영역을 동시 촬영하여 터치디스플레이부(110)를 통해 해당 사용자(방문자)를 촬영한 영상을 출력할 수 있다. 이러한 CCD 카메라부(130)는 열화상 카메라부(120)와 같이 함께 동작하며, 발열 감지부(140)를 통해 발열감지신호가 수신되면 발열대상 특정데이터를 참고하여 촬영영역 내 대상자 영역을 구분하며, 해당 데이터는 안면인식 발열감지 연동부(150)로 전송될 수 있다. 예를 들어 3명의 보행자 중 중앙에 있는 사람이 발열 대상자임을 특정하여 해당 대상자가 촬영되어 나온 영역을 별도로 인식함으로써, 후술하는 얼굴 인식에 불필요한 부분 즉, 노이즈에 해당하는 부분을 최대한 제거할 수 있으며, 필터링된 최종 영상데이터는 안면인식 발열감지 연동부(150)로 해당 대상자의 얼굴을 인식하기 위해 전달될 수 있다.
상기 발열 감지부(140)는, 열화상 카메라를 통해 측정된 사용자의 측정체온과 미리 설정된 기준체온을 비교하여 측정체온이 기준체온을 초과하는 경우 열화상에서 발열 대상의 사용자를 특정한 발열대상 특정데이터와 발열감지신호를 출력할 수 있다. 예를 들어, 서로 나란히 걷고 있는 3명의 보행자를 촬영한 경우 이중 중앙에 위치한 사람의 측정체온이 기준체온보다 1도 높은 것으로 확인되는 경우, 해당 대상자의 위치 즉, 촬영영역 상에서 대상자의 위치좌표, 실루엣, 캡쳐이미지 등 해당 대상자를 촬영데이터 내에서 특정할 수 있는 정보를 생성하여 발열대상 특정데이터를 제공할 수 있으며, 이러한 데이터는 발열감지신호와 함께 안면인식 발열감지 연동부(150)로 출력될 수 있다.
상기 안면인식 발열 연동부(150)는, CCD 카메라부(130)를 통해 촬영된 영상데이터에서 사용자의 안면을 인식하여 안면인식데이터를 생성하고, 안면인식데이터를 안면등록데이터와 비교하여 사용자의 안면등록상태에 따라 구분하고, 안면등록상태가 구분된 안면인식데이터를 발열대상 특정데이터와 매칭시켜 안면등록상태 별로 발열상태데이터를 생성하고, 디스플레이부를 통해 출력되도록 전송함과 동시에 장치 통신부(190)를 통해 관리 서버부로 전송할 수 있다.
상기 안면인식 발열감지 연동부(150)는, 사용자의 안면을 인식하기 위해 발열대상 특정데이터에 기초하여 영상데이터 내 해당 사용자의 얼굴 영역을 분할 및 검출하고, 검출된 얼굴 영역에서 눈 영역을 검출하고, 검출된 눈 영역에 대한 특징을 추출하고, 추출된 특징에 기초하여 템플릿을 생성하고, 생성된 템플릿을 상기 안면등록데이터에 포함된 템플릿과 비교하여 일치하는 템플릿을 검출하고, 일치하는 템플릿과 매칭된 사용자 정보를 추출하여 안면인식데이터로서 출력할 수 있다. 즉, 안면인식 발열감지 연동부(150)는 발열 감지부(140)로부터 수신된 발열대상 특정데이터에 기초하여 CCD 카메라부(130)의 영상데이터 내 해당 사용자의 얼굴 영역을 분할(필터링)한 후 다단계로 얼굴 영역을 검출하며, 검출된 다수의 얼굴 영역에서 눈 영역을 특정하여 검출한 후, 해당 눈 영역에 대한 영상을 보정한 후, 보정된 눈 영역에 대한 영상 속 특징을 추출하고, 추출된 특징 데이터에 기초하여 템플릿을 생성할 수 있다. 이후, 생성된 템플릿을 얼굴 데이터베이스에 미리 저장된 템플릿과 비교하여 일치하는 템플릿을 검출하고, 일치하는 템플릿과 매칭되어 있는 사용자 정보(발열 대상자의 개인 정보)를 추출하여 안면인식 결과데이터로서 출력할 수 있다.
상기 안면인식 발열감지 연동부(150)는 등록된 사용자와 미 등록된 사용자를 구분하고, 등록된 사용자에 대해서는 개인정보 또는 인적사항(ID(이름), 성별, 나이 등)를 추출하여 인식된 사용자를 파악하고, 등록된 사용자와 미 등록된 사용자가 발열상태인지를 함께 확인하여 그 결과를 관리 서버부로 전달함으로써, 침입자(미 등록된 사용자)와, 발열자를 동시에 검출할 수 있다.
다음으로, 플라즈마 이온 살균소독부(160)는 광고 노출 대상자의 신체정보를 분석한 분석정보 및 광고 노출 대상자의 터치위치정보를 기초로 광고 노출 대상자의 신체 및 터치디스플레이의 터치영역으로 플라즈마 이온이 포함된 에어를 기 설정된 고압으로 분사시키는 구성일 수 있다.
보다 구체적으로, 상기 플라즈마 이온 살균소독부(160)는 입력부(161), 플라즈마 이온 생성부(162), 온도조절부(163) 및 분사노즐 활성화부(164)를 포함한다.
상기 입력부(161)는 정보처리부(200)에서 분석한 사용자의 신체정보(키) 및 손 터치지점의 좌표정보를 입력받는 구성일 수 있다.
상기 플라즈마 이온 생성부(162)는 이오나이져로서, 산소와 산소의 불안정한 상태(라디컬)의 결합을 촉진시켜 오존(O3)을 생성하는 구성일 수 있다. 이때, 생성된 오존의 농도는 인체에 유해하지 않는 범위일 수 있다.
참고로, 플라즈마 이온 공급부(162)는 주변 온도에 따라 플라즈마 이온(오존)의 농도를 조절할 수 있다.
상기 플라즈마 이온 생성부(162)는 생성된 프라즈마 이온(오존)이 포함된 기 설정된 압의 에어를 공급하는 구성일 수 있다. 상기 플라즈마 이온 생성부(162)는 에어 블로워 모터(162-1), 플라즈마 생성부(162-2), 히팅부(162-3), 분사노즐바(162-4) 및 틸팅부(162-5)를 포함한다.
상기 에어 블로워 모터(162-1)는 에어관으로 기 설정된 에어를 공급하고, 플라즈마 생성부(162-2)는 상기 에어관으로 플라즈마 이온을 생성하여 공급하고, 히팅부(162-3)는 터치 디스플레이부의 주변온도와 동일한 온도가 되도록 에어관을 가열하여 플라즈마 이온 에어를 가열하는 유도 가열코일일 수 있고, 분사노즐바(162-4)는 상기 에어관 내로 공급된 플라즈마 이온 에어를 공급받아 기 설정된 압으로 분사하도록 적어도 하나 이상구비된다.
다음으로, 틸팅부(162-5)는 분사노즐바(162-4)의 분사각을 틸팅하는 구성일 수 있다.
다음으로, 상기 온도조절부(163)는 정보처리부(200)로부터 주변온도정보를 수신하고, 주변온도에 부합하는 온도로 플라즈마 이온 공급부(162)의 히팅부(162-3)의 가열온도를 조절하는 구성일 수 있다.
상기 분사노즐 활성화부(164)는 입력부에서 전달된 신체(키)에 부합하는 위치방향으로 분사노즐을 분사방향을 배치시키고 또한, 터치영역으로 분사노즐의 분사구가 위치하도록 동작하는 구성일 수 있다.
상기 제어부(미도시)는 정보처리부(200)의 신호에 기초하여 플라즈마 이온 살균부(160)의 각 구성의 동작을 제어하는 구성일 수 있다.
다음으로, 정보처리부(200)는 터치영상기기의 각 구성들의 동작을 제어하는 구성일 수 있다.
보다 구체적으로, 정보처리부(200)는 자가진단 영상모드와 일반영상모드에 따른 출력화면 또는 출력영상을 터치디스플레이부(110)를 통해 변경할 수 있도록 제어할 수 있다.
또한, 정보처리부(200)는 CCD 카메라(130)로 측정된 광고 노출자의 신체정보를 기초로 터치디스플레이부의 높낮이가 조절되도록 터치디스플레이부의 높이는 조절하는 구성일 수 있다.
또한, 정보처리부(200)는 CCD 카메라(130)로 측정된 광고 노출자의 안면영상정보를 기초로 연령대를 분석하고, 연령대에 맞는 광고가 터치디스플레이부에서 실행되도록 제어하는 구성일 수 있다.
또한, 정보처리부(200)는 기 설정된 위치에 광고 노출자를 감지하면, 플라즈마 이온 에어를 해당 광고 노출자의 신체영역에 분사되도록 플라즈마 이온 살균소독부의 동작을 제어할 수 있다.
또한, 정보처리부(200)는 광고 노출자가 터치 디스플레이부를 터치한 터치좌표로 플라즈마 이온 에어가 분사되도록 플라즈마 이온 살균소독부(162)의 동작을 제어하는 구성일 수 있다.
다음으로, 상기 알림 서비스부(170)는, 발열 감지부(140)로부터 발열감지신호를 수신하면 미리 저장된 알림 음향 데이터를 스피커로 전달하여 외부로 출력되도록 하고, 미리 저장된 알림영상데이터를 터치디스플레이부(110)로 전달하여 외부로 출력되도록 할 수 있다.
이러한 알림 서비스부(170)는, 발열 감지부(140)로부터 발열감지신호를 수신하면 미리 저장된 알림 음향 데이터를 스피커로 전달하여 외부로 출력되도록 하고, 발열 감지부(140)로부터 발열감지신호를 수신하면 미리 저장된 알림 영상 데이터를 터치디스플레이부(110)로 전달하여 외부로 출력되도록 할 수 있다. 즉, 알림 서비스부(170)는 사용자의 발열감지 시 소리와 이미지를 이용하여 각각 발열감지상황에 대한 알림을 실시할 수 있으며, 알림을 위한 소리와 이미지에 대한 그 구체적인 예에 대해서는 한정하지 않는다.
한편, 터치디스플레이부(110)는, 자가진단 영상모드의 동작 시, CCD 카메라부(130)에서 촬영된 영상데이터로부터 추출되는 사용자 영상 부분을 캡쳐하고, 해당 캡쳐 영상을 확대하여 경고 그래픽과 함께 화면 상에 플로팅(floating)되도록 출력하되, 해당 캡쳐 영상이 미리 설정된 시간 이내에 미리 설정된 개수 이상이 생성되는 경우, 각 캡쳐 영상을 나열하는 방식으로 출력할 수 있다.
이와 같이, 알림 서비스부(187)를 통한 알림 정보 전달 시 대상자의 특정이 불분명하거나, 다수의 대상자가 존재하는 경우 이를 확인하기 위하여, 디스플레이부(110)는 검출된 발열 대상자에 대한 영상을 디스플레이 상에 플로팅시켜 명확히 전달할 수 있으며, 대상자가 여러 명일 경우 각각의 대상자를 캡쳐한 영상 또는 이미지를 화면 상에서 나열할 수 있다. 또한, 해당 캡쳐 영상을 선택(터치)하면 해당 대상자의 보호자에게 별도의 알림 메시지를 작성할 수 있는 인터페이스를 제공하며, 해당 인터페이스를 통해 작성된 메시지가 해당 발열 대상자의 보호자 또는 관리자에게 전달될 수 있다.
상기 음성 인식 처리부(180)는, 마이크를 통해 사용자의 음성명령을 입력 받고, 입력된 음성명령을 인식하여 인식된 음성명령에 따른 정보를 디스플레이부(110) 및 스피커 중 적어도 하나를 통해 출력할 수 있다. 즉, 음성 인식 처리부(180)는 마이크와 스피커를 통해 시각장애인을 위한 음성 안내 서비스를 제공할 수 있으며, 이를 위해, 인공지능 기술이 적용되어 음성 인식을 기반으로 한 대화를 통해 시각장애인에게 필요한 정보를 제공하거나 안내할 수 있다.
다음으로, 네트워크 인터페이스부(190)는 외부기기(미도시), 사용자 단말 및 디지털 사이지니 관리서버와 유선 또는 무선 네트워크 접속을 위한 통신 인터페이스를 제공하는 구성일 수 있다.
예컨대, 유선 네트워크와의 접속을 위해, 이더넷(Ethernet) 단자 등을 구비할 수 있다. 또한, 무선 네트워크와의 접속을 위해, 예를 들어 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 통신 규격 등을 이용할 수 있다.
상기 네트워크 인터페이스부(190)는 관리 서버부와의 통신하여 필요한 데이터와 다양한 정보를 주고 받을 수 있으며, TCP/IP(transmission control protocol/internet protocol)을 이용한 통신 방식이 적용될 수 있으나, 본 실시예에서는 이와 같은 통신 방식을 한정하는 것은 아니며, 다양한 통신 방식이 적용될 수 있다.
예를 들어, 네트워크를 통해 관리 서버와 연결될 수 있으며, 네트워크의 일 예에는 RF, 3GPP(3rd Generation Partnership Project) 네트워크, LTE(Long Term Evolution) 네트워크, 5GPP(5th Generation Partnership Project) 네트워크, WIMAX(World Interoperability for Microwave Access) 네트워크, 인터넷(Internet), LAN(Local Area Network), Wireless LAN(Wireless Local Area Network), WAN(Wide Area Network), PAN(Personal Area Network), 블루투스(Bluetooth) 네트워크, NFC 네트워크, 위성 방송 네트워크, 아날로그 방송 네트워크, DMB(Digital Multimedia Broadcasting) 네트워크 등이 포함되나 이에 한정되지는 않는다.
이러한 터치영상기기의 인공지능 기술은 CPU에 내장된 NPU(Neural Network Processing Unit) 신경망 네트워크 프로세싱 유닛)가 하드웨어적으로 내장된 3가지 기능(안면인식, 음성인식, 객체인식)을 소프트웨어적으로 구성되어 있으며, 기존의 인공기술을 구현하기 위해서는 CPU에 인공지능 소프트웨어 엔진을 탑재 방식이었으나, 이러한 경우 해당 소프트웨어 엔진의 탑재로 인한 개발비 상승과 라이센스 비용이 발생되는 단점이 있다. 그러나 본 실시예의 경우, 터치영상기기(100)는 인공지능 기술이 임베디드 된 CPU를 구형하여 사용하고 있어 인공지능 기능 구현을 위한 별도의 개발비와 라이선스 비용 없이 저렴하고 쉽게 구현 가능하다.
도 7은 본 발명의 일 실시예에 따른 방역기능을 갖는 터치영상기기의 동작방법을 설명한 흐름도이다.
도 7에 도시된 바와 같이, 본 발명의 일 실시예에 따른 방역기능을 갖는 터치영상기기의 동작방법(S700)은 기 설정된 거리 내에 사용자가 감지(S710)하면, 정보처리부는 CCD 카메라부 및 열화상 카메라부를 동작시켜 감지된 신체영상을 촬영한 후, 사용자의 신체정보(키, 연령) 및 발열상태를 감지한다.
이후, 사용자의 신체정보(키)에 적합한 시청 높이로 터치디스플레이의 높이가 조절되도록 높낮이 조절부를 제어(S730)한다.
다음으로, 정보처리부(200)에서 높이가 조절된 터치디스플레이가 자가진단영상 모드로 동작되도록 제어하면, 터치디스플레이에서 사용자의 발열상태정보를 표시한다.
이후, 정보처리부(200)는 플라즈마 이온 살균소독부를 구동시켜, 플라즈마 이온 에어를 생성한 후, 사용자의 신체의 위치로 분사노즐을 위치를 제어(S750)한 후, 플라즈마 이온 에어를 분사(S76)한다.
이후, 사용자가 터치디스플레이의 임의의 영역을 터치하면, 정보처리부는 터치디스플레이로부터 감지된 터치영역을 제공(S770)받은 후, 해당 터치 영역으로 플라즈마 이온에어를 분사하도록 플라즈마 이온 살균소독부의 동작을 제어한다.
본 발명의 일 실시예에 따른 방역기능을 갖는 터치영상기기를 이용하면, 터치영상기기에 내장된 딥러닝 학습 기반 인공지능 안면인식 기술을 이용하여 고해상 카메라를 통해 빠르고 간편하게 출입자 또는 방문자의 안면의 특징을 수집하고, 딥러닝 학습을 통해 안면의 특징을 분석, 대조함으로써 허가되지 않은 외부인원의 출입을 효과적으로 관리하고, 인공지능 터치영상기기에 장착된 열 감지 센서를 이용하여 체온을 정밀하게 측정하고, 고열의 증상을 동반하는 인플루엔자 등의 유행성 독감의 감염자를 사전에 발견하고, 유행성 독감의 발생 및 확산을 차단하여 공중보건에 기여할 수 있다는 이점을 제공한다.
또한, 본 발명의 일 실시예에 따른 방역기능을 갖는 터치영상기기를 이용하면, 터치영상기기를 이용한 사용자의 의복등에 뭍은 바이러스 균 및 오염물질을 플라즈마 이온 에어로 소독시킬 수 있고, 더 나아가, 터치영상기기의 화면 터치시 발생할 수 있는 박테리아, 세균 등의 오염물질을 제거시킬 수 있어, 유행성 독감의 발생 및 확산을 차단하여 공중보건에 기여할 수 있다는 이점을 제공한다.
도 8은 본 명세서에 개진된 하나 이상의 실시예가 구현될 수 있는 예시적인 컴퓨팅 환경을 도시하는 도면으로, 상술한 하나 이상의 실시예를 구현하도록 구성된 컴퓨팅 디바이스(1100)를 포함하는 시스템(1000)의 예시를 도시한다. 예를 들어, 컴퓨팅 디바이스(1100)는 개인 컴퓨터, 서버 컴퓨터, 핸드헬드 또는 랩탑 디바이스, 모바일 디바이스(모바일폰, PDA, 미디어 플레이어 등), 멀티프로세서 시스템, 소비자 전자기기, 미니 컴퓨터, 메인프레임 컴퓨터, 임의의 전술된 시스템 또는 디바이스를 포함하는 분산 컴퓨팅 환경 등을 포함하지만, 이것으로 한정되는 것은 아니다.
컴퓨팅 디바이스(1100)는 적어도 하나의 프로세싱 유닛(1110) 및 메모리(1120)를 포함할 수 있다. 여기서, 프로세싱 유닛(1110)은 예를 들어 중앙처리장치(CPU), 그래픽처리장치(GPU), 마이크로프로세서, 주문형 반도체(Application Specific Integrated Circuit, ASIC), Field Programmable Gate Arrays(FPGA) 등을 포함할 수 있으며, 복수의 코어를 가질 수 있다. 메모리(1120)는 휘발성 메모리(예를 들어, RAM 등), 비휘발성 메모리(예를 들어, ROM, 플래시 메모리 등) 또는 이들의 조합일 수 있다. 또한, 컴퓨팅 디바이스(1100)는 추가적인 스토리지(1130)를 포함할 수 있다. 스토리지(1130)는 자기 스토리지, 광학 스토리지 등을 포함하지만 이것으로 한정되지 않는다.
스토리지(1130)에는 본 명세서에 개진된 하나 이상의 실시예를 구현하기 위한 컴퓨터 판독 가능한 명령이 저장될 수 있고, 운영 시스템, 애플리케이션 프로그램 등을 구현하기 위한 다른 컴퓨터 판독 가능한 명령도 저장될 수 있다. 스토리지(1130)에 저장된 컴퓨터 판독 가능한 명령은 프로세싱 유닛(1110)에 의해 실행되기 위해 메모리(1120)에 로딩될 수 있다. 또한, 컴퓨팅 디바이스(1100)는 입력 디바이스(들)(1140) 및 출력 디바이스(들)(1150)을 포함할 수 있다.
여기서, 입력 디바이스(들)(1140)은 예를 들어 키보드, 마우스, 펜, 음성 입력 디바이스, 터치 입력 디바이스, 적외선 카메라, 비디오 입력 디바이스 또는 임의의 다른 입력 디바이스 등을 포함할 수 있다. 또한, 출력 디바이스(들)(1150)은 예를 들어 하나 이상의 디스플레이, 스피커, 프린터 또는 임의의 다른 출력 디바이스 등을 포함할 수 있다. 또한, 컴퓨팅 디바이스(1100)는 다른 컴퓨팅 디바이스에 구비된 입력 디바이스 또는 출력 디바이스를 입력 디바이스(들)(1140) 또는 출력 디바이스(들)(1150)로서 사용할 수도 있다. 또한, 컴퓨팅 디바이스(1100)는 컴퓨팅 디바이스(1100)가 다른 디바이스(예를 들어, 컴퓨팅 디바이스(1300))와 통신할 수 있게 하는 통신접속(들)(1160)을 포함할 수 있다.
여기서, 통신 접속(들)(1160)은 모뎀, 네트워크 인터페이스 카드(NIC), 통합 네트워크 인터페이스, 무선 주파수 송신기/수신기, 적외선 포트, USB 접속 또는 컴퓨팅 디바이스(1100)를 다른 컴퓨팅 디바이스에 접속시키기 위한 다른 인터페이스를 포함할 수 있다. 또한, 통신 접속(들)(1160)은 유선 접속 또는 무선 접속을 포함할 수 있다. 상술한 컴퓨팅 디바이스(1100)의 각 구성요소는 버스 등의 다양한 상호접속(예를 들어, 주변 구성요소 상호접속(PCI), USB, 펌웨어(IEEE 1394), 광학적 버스 구조 등)에 의해 접속될 수도 있고, 네트워크(1200)에 의해 상호접속될 수도 있다. 본 명세서에서 사용되는 "구성요소", "시스템" 등과 같은 용어들은 일반적으로 하드웨어, 하드웨어와 소프트웨어의 조합, 소프트웨어, 또는 실행중인 소프트웨어인 컴퓨터 관련 엔티티를 지칭하는 것이다.
예를 들어, 구성요소는 프로세서 상에서 실행중인 프로세스, 프로세서, 객체, 실행 가능물(executable), 실행 스레드, 프로그램 및/또는 컴퓨터일 수 있지만, 이것으로 한정되는 것은 아니다. 예를 들어, 컨트롤러 상에서 구동중인 애플리케이션 및 컨트롤러 모두가 구성요소일 수 있다. 하나 이상의 구성요소는 프로세스 및/또는 실행의 스레드 내에 존재할 수 있으며, 구성요소는 하나의 컴퓨터 상에서 로컬화될 수 있고, 둘 이상의 컴퓨터 사이에서 분산될 수도 있다.
본 발명은 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다. 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 본 발명에 따른 구성요소를 치환, 변형 및 변경할 수 있다는 것이 명백할 것이다.
100: 터치영상기기
110: 터치디스플레이부
111: 터치디스플레이
112: 높낮이 조절부
120: 열화상 카메라부
130: CCD 카메라부
140: 발열감지부
150: 안면인식 발열 연동부
160: 플라즈마 이온 살균소독부
170: 알림 서비스부
180: 음성인식 처리부
190: 네트워크 인터페이스부
200: 정보처리부
110: 터치디스플레이부
111: 터치디스플레이
112: 높낮이 조절부
120: 열화상 카메라부
130: CCD 카메라부
140: 발열감지부
150: 안면인식 발열 연동부
160: 플라즈마 이온 살균소독부
170: 알림 서비스부
180: 음성인식 처리부
190: 네트워크 인터페이스부
200: 정보처리부
Claims (6)
- 자가진단 영상모드 및 일반영상모드에 대한 출력화면을 제공하고, 높낮이가 조절되는 터치 디스플레이부;
상기 터치디스플레이부의 상부에 위치하여 사용자의 신체영상을 촬영하는 CCD 카메라부;
사용자로부터 방출되는 열복사를 감지하는 열화상 카메라부;
상기 열화상 카메라부를 통해 측정된 사용자의 측정체온과 미리 설정된 기준체온을 비교하여 측정체온이 기준체온을 초과하는 경우, 열화상에서 발열 대상의 사용자를 특정한 발열대상 특정데이터와 발열감지신호를 출력하는 발열 감지부;
상기 CCD 카메라부를 통해 촬영된 영상데이터에서 사용자의 안면을 인식하여 안면인식데이터를 생성하고, 안면인식데이터를 안면등록데이터와 비교하여 사용자의 안면등록상태에 따라 구분하고, 안면등록상태가 구분된 안면인식데이터를 발열대상 특정데이터와 매칭시켜 안면등록상태 별로 발열상태데이터를 생성하는 안면인식 발열감지 연동부;
사용자의 신체영상을 기초로 키, 연령을 분석하고, 분석된 키에 맞게 상기 터치디스플레이부의 높이를 조절하기 위한 제어신호를 상기 터치디스플레이부로 제공하는 정보처리부; 및
상기 터치 디스플레이부의 가장자리에 구비되고, 상기 정보처리부의 제어신호에 기초하여 사용자의 신체 및 사용자가 상기 터치 디스플레이부의 화면을 터치한 영역으로 플라즈마 이온 에어를 분사하는 플라즈마 이온 살균소독부를 포함하고,
상기 안면인식 발열감지 연동부는
사용자의 안면을 인식하기 위해 발열대상 특정데이터에 기초하여 영상데이터 내 해당 사용자의 얼굴 영역을 분할 및 검출하고, 검출된 얼굴 영역에서 눈 영역을 검출하고, 검출된 눈 영역에 대한 특징을 추출하고, 추출된 특징에 기초하여 템플릿을 생성하고, 생성된 템플릿을 상기 안면등록데이터에 포함된 템플릿과 비교하여 일치하는 템플릿을 검출하고, 일치하는 템플릿과 매칭된 사용자 정보를 추출하여 안면인식데이터로서 출력하고,
등록된 사용자와 미 등록된 사용자를 구분하고, 등록된 사용자에 대해서는 개인정보 또는 인적사항(ID(이름), 성별, 나이)를 추출하여 인식된 사용자를 파악하고, 등록된 사용자와 미 등록된 사용자가 발열상태인지를 함께 확인하는 방역기능을 갖는 터치영상기기.
- 제1항에 있어서,
상기 플라즈마 이온 살균 소독부는
상기 정보처리부에서 분석한 사용자의 신체정보(키) 및 손 터치지점의 좌표정보를 입력받는 입력부;
입력부의 입력신호에 기초하여 산소와 산소의 불안정한 상태(라디컬)의 결합을 촉진시켜 오존(O3)을 생성한 후, 생성된 프라즈마 이온(오존)이 포함된 기 설정된 에어를 가열하여 사용자의 신체 및/또는 사용자가 터치한 터치디스플레이의 패널영역에 분사하는 플라즈마 이온 살균소독부를 포함하는 방역기능을 갖는 터치영상기기.
- 제2항에 있어서,
상기 플라즈마 이온 살균 소독부는
에어관으로 기 설정된 에어를 공급하는 에어 블로워 모터;
상기 에어관으로 플라즈마 이온을 공급하는 플라즈마 생성부;
상기 터치 디스플레이부의 주변온도로 플라즈마 이온 에어를 가열하는 히팅부;
상기 에어관 내로 공급된 플라즈마 이온 에어를 공급받아 기 설정된 압으로 분사하는 적어도 하나 이상의 분사노즐이 구비된 분사노즐바; 및
상기 분사노즐바의 분사각을 틸팅하는 틸팅부를 포함하는 플라즈마 이온 생성부를 포함하는 방역기능을 갖는 터치영상기기.
- 제3항에 있어서,
상기 플라즈마 이온 살균 소독부는
상기 정보처리부에서 제공된 활성화신호에 기초하여 상기 적어도 하나 이상의 분사노즐을 개폐동작을 활성화시키는 분사노즐 활성화부를 더 포함하는 방역기능을 갖는 터치영상기기.
- 제1항에 있어서,
상기 정보처리부는
상기 터치디스플레이부가 자가진단 영상모드로 동작되도록 제어하여, 상기 터치디스플레이부에서 사용자의 발열정보가 표시되도록 하는 방역기능을 갖는 터치영상기기.
- 터치 디스플레이부, CCD 카메라부, 열화상 카메라부, 발열 감지부, 안면인식 발열 연동부, 사용자의 신체영상을 기초로 키, 연령을 분석하고, 분석된 키에 맞게 상기 터치디스플레이부의 높이를 조절하기 위한 제어신호를 상기 터치디스플레이부로 제공하는 정보처리부 및 플라즈마 이온 살균소독부를 포함하는 터치영상기기의 동작방법에 있어서,
기 설정된 거리 내에 사용자를 감지하면, 상기 정보처리부에서 상기 CCD 카메라부 및 상기 열화상 카메라부를 동작시켜 감지된 신체영상을 촬영한 후, 사용자의 신체정보(키, 연령) 및 발열상태를 감지하는 단계;
사용자의 신체정보(키)에 적합한 시청 높이로 터치디스플레이의 높이가 조절되도록 높낮이 조절부를 제어하는 단계;
상기 정보처리부에서 높이가 조절된 터치디스플레이가 자가진단영상 모드로 동작되도록 제어하면, 터치디스플레이에서 사용자의 발열상태정보를 표시하는 단계;
상기 정보처리부는 플라즈마 이온 살균소독부를 구동시켜, 플라즈마 이온 에어를 생성한 후, 사용자의 신체의 위치로 분사노즐을 위치를 제어한 후, 플라즈마 이온 에어를 분사하는 단계; 및
사용자가 터치디스플레이의 임의의 영역을 터치하면, 정보처리부는 터치디스플레이로부터 감지된 터치영역을 제공받은 후, 해당 터치 영역으로 플라즈마 이온에어를 분사하도록 플라즈마 이온 살균소독부의 동작을 제어하는 단계를 포함하고,
상기 발열 감지부는
상기 열화상 카메라부를 통해 측정된 사용자의 측정체온과 미리 설정된 기준체온을 비교하여 측정체온이 기준체온을 초과하는 경우, 열화상에서 발열 대상의 사용자를 특정한 발열대상 특정데이터와 발열감지신호를 출력하고,
상기 안면인식 발열 연동부는
상기 CCD 카메라부를 통해 촬영된 영상데이터에서 사용자의 안면을 인식하기 위하여 발열대상 특정데이터에 기초하여 영상데이터 내 해당 사용자의 얼굴 영역을 분할 및 검출하고, 검출된 얼굴 영역에서 눈 영역을 검출하고, 검출된 눈 영역에 대한 특징을 추출하고, 추출된 특징에 기초하여 템플릿을 생성하고, 생성된 템플릿을 안면등록데이터에 포함된 템플릿과 비교하여 일치하는 템플릿을 검출하고, 일치하는 템플릿과 매칭된 사용자 정보를 추출하여 안면인식데이터로서 출력하고,
상기 안면인식데이터를 안면등록데이터와 비교하여 사용자의 안면등록상태에 따라 구분하고, 안면등록상태가 구분된 안면인식데이터를 발열대상 특정데이터와 매칭시켜 안면등록상태 별로 발열상태데이터를 생성하고,
등록된 사용자와 미 등록된 사용자를 구분하고, 등록된 사용자에 대해서는 개인정보 또는 인적사항(ID(이름), 성별, 나이)를 추출하여 인식된 사용자를 파악하고, 등록된 사용자와 미 등록된 사용자가 발열상태인지를 함께 확인하는 방역기능을 갖는 터치영상기기의 동작방법.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020210051322A KR102484426B1 (ko) | 2021-04-20 | 2021-04-20 | 방역기능을 갖는 터치영상기기 및 이의 동작방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020210051322A KR102484426B1 (ko) | 2021-04-20 | 2021-04-20 | 방역기능을 갖는 터치영상기기 및 이의 동작방법 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20220144684A KR20220144684A (ko) | 2022-10-27 |
| KR102484426B1 true KR102484426B1 (ko) | 2023-01-04 |
Family
ID=83810115
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020210051322A KR102484426B1 (ko) | 2021-04-20 | 2021-04-20 | 방역기능을 갖는 터치영상기기 및 이의 동작방법 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR102484426B1 (ko) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003284766A (ja) * | 2002-01-23 | 2003-10-07 | Sharp Corp | イオン発生装置を備えた表示装置、および電子装置 |
| US20130222754A1 (en) * | 2010-11-16 | 2013-08-29 | Sharp Kabushiki Kaisha | Display device |
| KR102178328B1 (ko) * | 2020-07-22 | 2020-11-13 | 주식회사 티알에스 | 이동형 발열체크 부스 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20130048619A (ko) | 2011-11-02 | 2013-05-10 | (주)대진미디어텍 | 디지털 사이니지 시스템 |
| KR20140029877A (ko) | 2012-08-30 | 2014-03-11 | 주식회사 노크 | 사용자가 클라우드 서비스를 이용하여 대상 장비를 제어할 수 있도록 하기 위한 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체 |
| KR101707549B1 (ko) | 2015-08-28 | 2017-02-16 | 주식회사 노크 | 클라우드 서버를 이용한 디지털 사이니지 시스템 및 그 제어 방법 |
-
2021
- 2021-04-20 KR KR1020210051322A patent/KR102484426B1/ko active IP Right Grant
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003284766A (ja) * | 2002-01-23 | 2003-10-07 | Sharp Corp | イオン発生装置を備えた表示装置、および電子装置 |
| US20130222754A1 (en) * | 2010-11-16 | 2013-08-29 | Sharp Kabushiki Kaisha | Display device |
| KR102178328B1 (ko) * | 2020-07-22 | 2020-11-13 | 주식회사 티알에스 | 이동형 발열체크 부스 |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20220144684A (ko) | 2022-10-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Petrović et al. | IoT-based system for COVID-19 indoor safety monitoring | |
| US20200298017A1 (en) | Hand Sanitizer Station | |
| JP5339476B2 (ja) | 画像処理システム、発熱者追跡方法、画像処理装置およびその制御方法と制御プログラム | |
| US20130169801A1 (en) | Visual Command Processing | |
| WO2015050608A1 (en) | Systems and methods for monitoring personal protection equipment and promoting worker safety | |
| KR102235095B1 (ko) | 출입 요청자의 체온측정 기능을 갖는 출입문 개폐 제어 방법 | |
| KR102251783B1 (ko) | 인공지능 디지털 사이니지 시스템 | |
| WO2015068952A1 (en) | Method and apparatus for controlling movement of medical device | |
| US20230384162A1 (en) | Heat trace area extraction apparatus, heat trace area extraction method and program | |
| KR102222477B1 (ko) | 안면인식 기능을 갖는 스피드 게이트 시스템 및 이의 동작방법 | |
| KR20120016789A (ko) | 지역기반의 유행성 질병정보 제공 시스템 및 방법 | |
| KR102484426B1 (ko) | 방역기능을 갖는 터치영상기기 및 이의 동작방법 | |
| JP2019153920A (ja) | 情報処理装置、情報処理装置の制御方法、被写体検出システム、及び、プログラム | |
| KR102452214B1 (ko) | 방역기능을 갖는 디지털 사이니지 및 이의 동작방법 | |
| Septama et al. | Low cost non-contact rapid body temperature screening using thermal camera for early detection of Covid-19 suspect | |
| KR102375778B1 (ko) | 인공지능 기술 기반의 다기능 디지털 사이니지 시스템 | |
| Gaushik et al. | Architecture design of ai and iot based system to identify covid-19 protocol violators in public places | |
| Mohamed et al. | Assisting people with disabilities through Kinect sensors into a smart house | |
| KR102339251B1 (ko) | 살균봉 어레이를 구비한 게이트형 살균 장치 | |
| KR20220080884A (ko) | 손 소독 장치가 구비된 열화상 카메라를 이용한 얼굴인식 출입통제 시스템 | |
| CN205722264U (zh) | 移动感测装置及其系统 | |
| Venkataramanan et al. | Smart automatic COVID door opening system with contactless temperature sensing | |
| Arun et al. | Design and development of an IoT based intelligent multi parameter screening system | |
| Nabi et al. | Real-time people counting for surveillance videos | |
| Nimaia et al. | FACE MASK AND CONTACTLESS TEMPERATURE DETECTOR |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right |