KR102506799B1 - 독순술을 이용한 도어락 시스템 - Google Patents

독순술을 이용한 도어락 시스템 Download PDF

Info

Publication number
KR102506799B1
KR102506799B1 KR1020210000196A KR20210000196A KR102506799B1 KR 102506799 B1 KR102506799 B1 KR 102506799B1 KR 1020210000196 A KR1020210000196 A KR 1020210000196A KR 20210000196 A KR20210000196 A KR 20210000196A KR 102506799 B1 KR102506799 B1 KR 102506799B1
Authority
KR
South Korea
Prior art keywords
lip
security code
unit
reading
reading security
Prior art date
Application number
KR1020210000196A
Other languages
English (en)
Other versions
KR20220099133A (ko
Inventor
박경남
Original Assignee
주식회사 뮤링크
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 뮤링크 filed Critical 주식회사 뮤링크
Priority to KR1020210000196A priority Critical patent/KR102506799B1/ko
Publication of KR20220099133A publication Critical patent/KR20220099133A/ko
Application granted granted Critical
Publication of KR102506799B1 publication Critical patent/KR102506799B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00563—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys using personal physical data of the operator, e.g. finger prints, retinal images, voicepatterns
    • E—FIXED CONSTRUCTIONS
    • E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
    • E05B—LOCKS; ACCESSORIES THEREFOR; HANDCUFFS
    • E05B47/00—Operating or controlling locks or other fastening devices by electric or magnetic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00571—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated by interacting with a central unit
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/30—Individual registration on entry or exit not involving the use of a pass
    • G07C9/32—Individual registration on entry or exit not involving the use of a pass in combination with an identity check
    • G07C9/37—Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Lock And Its Accessories (AREA)

Abstract

본 발명은 인체의 3D 영상을 획득하는 ToF(Time OF Flight) 카메라; 상기 ToF 카메라로부터 제공되는 3D 영상으로부터 입을 인지하고, 입술의 움직임을 감지하여, 상기 입술의 움직임에 해당하는 독순술 보안코드를 획득하는 독순술보안코드획득부; 상기 독순술보안코드획득부에 의해 획득되는 독순술 보안코드를 출입 통제를 위한 매칭용으로 저장하는 메모리부; 상기 독순술보안코드획득부에 의해 획득되는 독순술 보안코드를 상기 메모리부에 저장된 독순술 보안코드와 매칭하여, 설정된 조건을 만족시 잠금 해제 신호를 출력하는 보안통제제어모듈; 상기 독순술보안코드획득부에 의해 획득되는 독순술 보안코드를 사용자의 요청에 따라, 출입 통제 매칭용으로 사용되도록 상기 메모리부에 저장하고, 상기 보안통제제어모듈의 동작을 제어하는 출입제어부; 및 도어에 설치되어 도어의 잠금 및 잠금 해제를 수행하고, 상기 보안통제제어모듈의 출입 해제 신호에 따라 잠금 해제를 수행하는 록킹부;를 포함하도록 한 독순술을 이용한 도어락 시스템에 관한 것이다.
본 발명에 따르면, 사용자의 입술 모양을 통해서 보안코드를 추출하여 도어락의 출입을 통제할 수 있고, 이로 인해 보안코드의 모방이나 유출 등과 같은 위험이 없으므로 보안력이 뛰어날 수 있으며, 코로나19 등과 같은 전염병 전파가 우려되는 언택트 시대에 부합할 수 있다.

Description

독순술을 이용한 도어락 시스템{Door lock system using lip-reading}
본 발명은 도어락 시스템에 관한 것으로서, 보다 상세하게는 인체 형상을 이용하여 보안코드 추출 변경이 용이한 독순술을 이용한 도어락 시스템에 관한 것이다.
일반적으로, 디지털 도어락은 주택이나 사무실 또는 공장 등의 출입문에 장착되어 도어를 개폐하는 것으로, 마그네틱, 비밀번호 또는 지문정보를 기등록시킨 후 해당 비밀번호를 입력하거나, 기등록된 마그네틱 또는 지문정보를 입력한 경우에만 도어락을 해제시켜 출입을 가능하게 하는 매우 편리한 도어잠금수단으로서, 그 보급이 크게 증가하고 있다.
이와 같은 디지털 도어락은 대개 출입 통제를 위하여, 단순한 번호키 4자리 등으로 한정된 코드를 사용하는데, 이러한 키 입력에 따른 접촉으로 입력코드가 비교적 쉽게 노출되어 보안 관리가 어려우며, 특히 여러 사람이 출입하는 곳에서 접촉을 유발하여 코로나19 등과 같은 전염병 전파로 인한 위험을 초래하는 문제점을 가진다.
근래에는 사물이나 인체의 인식 기술 발달로 인해, 도어락의 출입을 통제하기 위한 기술로서, 비접촉 방식이 가능한 얼굴 인식 기술이 적용되고 있는데, 이와 관련되는 얼굴 인식을 이용한 도어락 시스템에 대한 종래 기술로서, 한국공개특허 제10-2015-011263호의 "사람의　얼굴　정보를 이용한 얼굴인식 도어락 시스템"이 제시된 바 있는데, 이는 사람의 얼굴 정보를 이용한 얼굴인식 도어락 시스템에 있어서, 영상 입력부, Arm 프로세서기반의 제어부, 유/무선 전송장치, 이미지 메모리부, 디스플레이부 및 도어 개폐 제어부를 포함한다.
그러나, 이와 같은 종래 기술은 도어락에 등록된 같은 사람의 사진으로도 인식이 가능하여 신뢰성을 크게 해치는 문제점을 가지고 있었다.
상기한 바와 같은 종래 기술의 문제점을 해결하기 위하여, 본 발명은 사용자의 입술 모양을 통해서 보안코드를 추출하여 도어락의 출입을 통제하도록 하고, 이로 인해 보안코드의 모방이나 유출 등과 같은 위험이 없으므로 보안력이 뛰어나며, 코로나19 등과 같은 전염병 전파가 우려되는 언택트 시대에 부합하도록 하고, 입술 모양을 통해 출력되는 음성을 전혀 이용하지 않도록 함으로써, 진정한 의미의 독순술 보안을 구현함과 아울러, 텍스트화를 요구하지 않는 다양한 보안코드의 도입을 가능하도록 하여 출입 통제의 보안을 극대화시키는데 목적이 있다.
본 발명의 다른 목적들은 이하의 실시례에 대한 설명을 통해 쉽게 이해될 수 있을 것이다.
상기한 바와 같은 목적을 달성하기 위해, 본 발명의 일측면에 따르면, 인체의 3D 영상을 획득하는 ToF(Time OF Flight) 카메라; 상기 ToF 카메라로부터 제공되는 3D 영상으로부터 입을 인지하고, 입술의 움직임을 감지하여, 상기 입술의 움직임에 해당하는 독순술 보안코드를 획득하는 독순술보안코드획득부; 상기 독순술보안코드획득부에 의해 획득되는 독순술 보안코드를 출입 통제를 위한 매칭용으로 저장하는 메모리부; 상기 독순술보안코드획득부에 의해 획득되는 독순술 보안코드를 상기 메모리부에 저장된 독순술 보안코드와 매칭하여, 설정된 조건을 만족시 잠금 해제 신호를 출력하는 보안통제제어모듈; 상기 독순술보안코드획득부에 의해 획득되는 독순술 보안코드를 사용자의 요청에 따라, 출입 통제 매칭용으로 사용되도록 상기 메모리부에 저장하고, 상기 보안통제제어모듈의 동작을 제어하는 출입제어부; 및 도어에 설치되어 도어의 잠금 및 잠금 해제를 수행하고, 상기 보안통제제어모듈의 출입 해제 신호에 따라 잠금 해제를 수행하는 록킹부;를 포함하는, 독순술을 이용한 도어락 시스템이 제공된다.
상기 독순술보안코드획득부, 상기 메모리부, 상기 보안통제제어모듈 및 상기 출입제어부는, 상기 록킹부가 마련되는 도어락하우징 내에 마련될 수 있다.
본 발명의 다른 측면에 따르면, 인체의 3D 영상을 획득하는 ToF(Time OF Flight) 카메라; 도어락 독순술 제어 서버와의 통신을 수행하기 위한 통신부; 상기 ToF 카메라로부터 제공되는 3D 영상을 상기 통신부에 의해 상기 도어락 독순술 제어 서버에 제공하고, 상기 도어락 독순술 제어 서버에서 상기 3D 영상으로부터 입의 인지 및 입술의 움직임을 감지함으로써, 상기 입술의 움직임에 해당하는 독순술 보안코드를 획득하여 기존에 저장된 독순술 보안코드와의 매칭에 의해 설정된 조건을 만족시 제공하는 잠금 해제 신호를 상기 통신부를 통해 수신받도록 제어하는 출입제어부; 및 도어에 설치되어 도어의 잠금 및 잠금 해제를 수행하고, 상기 보안통제제어모듈의 출입 해제 신호에 따라 잠금 해제를 수행하는 록킹부;를 포함하는, 독순술을 이용한 도어락 시스템이 제공된다.
상기 도어락 독순술 제어 서버를 더 포함하고, 상기 도어락 독순술 제어 서버는, 상기 ToF 카메라로부터 제공되는 3D 영상으로부터 입을 인지하고, 입술의 움직임을 감지하여, 상기 입술의 움직임에 해당하는 독순술 보안코드를 획득하는 독순술보안코드획득부; 상기 독순술보안코드획득부에 의해 획득되는 독순술 보안코드를 사용자별 출입 통제를 위한 매칭용으로 저장하는 데이터베이스부; 및 상기 독순술보안코드획득부에 의해 획득되는 독순술 보안코드를 상기 데이터베이스부에 저장된 독순술 보안코드와 매칭하여, 설정된 조건을 만족시 잠금 해제 신호를 상기 통신부를 통해 상기 출입제어부에 제공하는 보안통제제어모듈;을 포함할 수 있다.
상기 독순술보안코드획득부는, 상기 ToF 카메라로부터 제공되는 3D 영상으로부터 얼굴을 추적하여 얼굴 이미지를 추출하는 얼굴추적검출부; 상기 얼굴추적검출부에 의해 추출되는 얼굴 이미지로부터 입술 이미지를 추출하는 입술추출부; 상기 입술추출부로부터 추출되는 입술 이미지로부터 입술과 그 주변에 위치하는 다수의 특징 포인트를 추출하는 입술특징포인트추출부; 및 상기 입술특징포인트추출부로부터 추출되는 특징 포인트의 위치변화를 통해서 특징을 추출하여 상기 독순술 보안코드로서 사용되도록 하는 입술특징추출부;를 포함할 수 있다.
본 발명에 따른 독순술을 이용한 도어락 시스템에 의하면, 사용자의 입술 모양을 통해서 보안코드를 추출하여 도어락의 출입을 통제할 수 있고, 이로 인해 보안코드의 모방이나 유출 등과 같은 위험이 없으므로 보안력이 뛰어날 수 있으며, 코로나19 등과 같은 전염병 전파가 우려되는 언택트 시대에 부합할 수 있고, 입술 모양을 통해 출력되는 음성을 전혀 이용하지 않도록 함으로써, 진정한 의미의 독순술 보안을 구현함과 아울러, 텍스트화를 요구하지 않는 다양한 보안코드의 도입을 가능하도록 하여 출입 통제의 보안을 극대화시키는 효과를 가진다.
도 1은 본 발명의 제 1 실시례에 따른 독순술을 이용한 도어락 시스템을 도시한 구성도이다.
도 2는 본 발명의 제 1 실시례에 따른 독순술을 이용한 도어락 시스템에서 TOF 카메라의 시스템 적용례를 도시한 구성도이다.
도 3은 본 발명의 제 1 실시례에 따른 독순술을 이용한 도어락 시스템에서 SoC 적용 EVB가 탑재되는 TOF 카메라의 일례를 도시한 구성도이다.
도 4는 본 발명의 제 1 실시례에 따른 독순술을 이용한 도어락 시스템에서 독순술보안코드획득부에 의한 LipNet 아키텍처를 나타낸다.
도 5는 본 발명의 제 1 실시례에 따른 독순술을 이용한 도어락 시스템에서 독순술보안코드획득부를 도시한 구성도이다.
도 6은 본 발명의 제 1 실시례에 따른 독순술을 이용한 도어락 시스템에서 3차원 동작 데이터를 이용한 11종류 패턴 추출 파라미터를 예시한 도면이다.
도 7은 본 발명의 제 2 실시례에 따른 독순술을 이용한 도어락 시스템을 도시한 구성도이다.
본 발명은 다양한 변경을 가할 수 있고, 여러 가지 실시례를 가질 수 있는 바, 특정 실시례들을 도면에 예시하고, 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니고, 본 발명의 기술 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 식으로 이해되어야 하고, 여러 가지 다른 형태로 변형될 수 있으며, 본 발명의 범위가 하기 실시례에 한정되는 것은 아니다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 실시례를 상세히 설명하며, 도면 부호에 관계없이 동일하거나 대응하는 구성요소에 대해서는 동일한 참조 번호를 부여하고, 이에 대해 중복되는 설명을 생략하기로 한다.
도 1은 본 발명의 제 1 실시례에 따른 독순술을 이용한 도어락 시스템을 도시한 구성도이다.
도 1을 참조하면, 본 발명의 일 실시례에 따른 독순술을 이용한 도어락 시스템(100)은 ToF(Time OF Flight) 카메라(110), 독순술보안코드획득부(120), 메모리부(130), 보안통제제어모듈(140), 출입제어부(150) 및 록킹부(160)를 포함할 수 있다.
ToF 카메라(110)는 인체의 3D 영상을 획득하도록 하는데, 록킹부(160)가 마련되는 도어락하우징(미도시)에서 외부측에 설치되거나, 도어락하우징과는 별개로 이루어져서 도어의 외측면에 설치될 수도 있다. ToF 카메라(110)는 IR 발광부와 ToF 센서를 포함하여, 피사체인 인체에 대한 3D 영상을 획득하도록 한다. 도 2에서는 이러한 ToF 카메라(110)의 시스템 적용례를 나타내고, 도 3에서는 통합 SoC 적용 EVB가 탑재되는 ToF 카메라(110)의 구성례를 나타낸다.
독순술보안코드획득부(120)는 ToF 카메라(110)로부터 제공되는 3D 영상으로부터 입을 인지하고, 입술의 움직임을 감지하여, 입술의 움직임에 해당하는 독순술 보안코드를 획득하도록 한다. 독순술보안코드획득부(120)는 예컨대, 캐릭터 레벨에서 동작하는 end-to-end 문장 수준의 독순술 알고리즘 모델을 처리하도록 하고, ToF 카메라(110)와 RGB 카메라(미도시)가 읽어들이는 입술모양 및 움직임 동영상에 대해 동영상 객체 분할(VOS)을 위한 통합된 종단간 훈련 가능한 시공간 STCNN 모델(Spatiotemporal CNN model; 도 4 참조)을 적용할 수 있으며, GRU(Gated Recurrent Unit) 및 CTC(Connectionist Temporal Classification)을 적용할 수 있고, 나아가서, Saliency Visualization 기술의 사용으로, 알고리즘 모델이 영상에서 음운학적으로 중요한 영역에 집중할 수 있도록 구현할 수 있다.
도 5를 참조하면, 독순술보안코드획득부(120)는 ToF 카메라(110)로부터 제공되는 3D 영상으로부터 얼굴을 추적하여 얼굴 이미지를 추출하는 얼굴추적검출부(121)와, 얼굴추적검출부(121)에 의해 추출되는 얼굴 이미지로부터 입술 이미지를 추출하는 입술추출부(122)와, 입술추출부(122)로부터 추출되는 입술 이미지로부터 입술과 그 주변에 위치하는 다수의 특징 포인트를 추출하는 입술특징포인트추출부(123)와, 입술특징점추출부(123)로부터 추출되는 특징 포인트의 위치변화를 통해서 특징을 추출하여 독순술 보안코드로서 사용되도록 하는 입술특징추출부(124)를 포함할 수 있다.
얼굴추적검출부(121)는 얼굴 인식 알고리즘을 사용하여 3D 영상으로부터 얼굴을 식별하도록 한다. 얼굴추적검출부(121)와 입술추출부(122)는 얼굴과 입을 Haar 캐스케이드(Cascade) 접근 방식을 사용하여 감지할 수 있는데, 캐스케이드 기능은 오류율 분석 후 최상의 기능이 선택된 포지티브 및 네거티브 이미지에 대해 학습되고, 최소 오류율은 얼굴 이미지와 얼굴이 아닌 이미지를 구분한다. 입술특징포인트추출부(123)는 입술의 왼쪽 및 오른쪽과, 윗입술 및 아랫입술의 4가지 특징 포인트를 추출할 수 있다. 입술특징추출부(124)는 이러한 각각의 특징 포인트에 대해 말하는 동안의 입술의 위치 변화를 바탕으로 특징을 추출하는데, 예컨대, 입술에 표시된 왼쪽, 위쪽 및 오른쪽 지점 사이의 각도 계산에 의해 특징을 추출할 수 있으며, 일례로 이러한 특징 포인트 간의 각도 계산을 통해 특징을 추출하거나, 그 밖에 기준 특징 포인트로 설정된 좌표 상에서 다른 특징 포인트의 좌표값 산출 등을 비롯하여 다양한 방식에 의해 특징 포인트의 위치 변화를 추출하도록 할 수 있다. 입술특징추출부(124)는 도 6에 나타낸 바와 같은 3차원 동작 데이터를 이용한 11종류 패턴 추출 파라미터 중에서 입 부분에 해당하는 파라미터를 적용할 수 있다.
메모리부(130)는 독순술보안코드획득부(120)에 의해 획득되는 독순술 보안코드를 출입 통제를 위한 매칭용으로 저장한다. 또한 메모리부(130)는 이 밖에도 동작에 필요한 각종 데이터 및 프로그램 등을 저장할 수 있다.
보안통제제어모듈(140)은 독순술보안코드획득부(120)에 의해 획득되는 독순술 보안코드를 메모리부(130)에 저장된 독순술 보안코드와 매칭하여, 설정된 조건을 만족시 잠금 해제 신호를 출력한다. 여기서 설정된 조건은 매칭율일 수 있고, 이에 한하지 않고, 다양한 조건이 해당될 수 있다. 매칭율의 경우, 요구되는 정확도에 따라 설정값을 선택하도록 할 수 있다. 또한 보안통제제어모듈(140)은 예컨대, 입술특징추출부(124)에 의해 추출된 특징 포인트의 위치변화 구간을 메모리부(130)에 저장된 독순술 보안코드의 특징 포인트의 위치변화 구간과 매칭시킨 다음, 이들간의 매칭율을 실시간으로 백분율로 산출하고, 산출된 매칭율이 실시간 동안 설정된 매칭율을 만족하는 경우, 잠금 해제 신호를 출력하도록 구성될 수 있는데, 이는 하나의 예시로서 이를 달리하여 구성될 수 있음은 물론이다.
출입제어부(150)는 독순술보안코드획득부(120)에 의해 획득되는 독순술 보안코드를 사용자의 요청에 따라, 출입 통제 매칭용으로 사용되도록 메모리부(130)에 저장하고, 보안통제제어모듈(140)이 잠금 해제 신호 출력 등의 동작을 수행하도록 제어한다.
본 실시례에서, 독순술보안코드획득부(120), 메모리부(130), 보안통제제어모듈(140) 및 출입제어부(150)는 록킹부(160)가 마련되는 도어락하우징(미도시) 내에 마련될 수 있으며, 외부 기기의 도움없이 자체적으로 독순술을 적용한 출입 통제가 이루어지도록 구성될 수 있다.
록킹부(160)는 도어에 설치되어 도어의 잠금 및 잠금 해제를 수행하고, 보안통제제어모듈(140)의 출입 해제 신호에 따라 잠금 해제를 수행하도록 한다. 록킹부(160)는 예컨대 모터나 솔레노이드 등과 같은 액추에이터의 구동에 의해 록킹레버를 구동시킴으로써, 잠금과 잠금 해제를 수행하도록 하는데, 이러한 록킹부(160)는 공지된 기술을 적용할 수 있음은 물론이다.
본 발명의 제 1 실시례에 따른 독순술을 이용한 도어락 시스템(100)은 동작에 필요한 전원을 공급하도록 도어락하우징 내에 교체 가능하게 설치되는 전원공급부(250)와, 도어락하우징에서 실내 측에 록킹부(160)의 동작 및 그 밖에 시스템(100)의 동작에 필요한 조작신호를 입력하는 조작부(180)와, 도어락하우징에서 실외측에 동작 상태 및 입력 정보를 외부로 표시하는 표시부(190)가 부가적으로 마련될 수 있다. 또한 출입제어부(150)는 조작부(180)의 조작신호에 상응하는 동작을 수행하도록 제어를 수행할 수 있다.
도 7은 본 발명의 제 2 실시례에 따른 독순술을 이용한 도어락 시스템을 도시한 구성도이다.
도 7을 참조하면, 본 발명의 제 2 실시례에 따른 독순술을 이용한 도어락 시스템(200)은 ToF 카메라(210), 통신부(220), 출입제어부(230), 록킹부(240)를 포함할 수 있다. 인체의 3D 영상을 획득하는 카메라(210)와 도어에 설치되어 도어의 잠금 및 잠금 해제를 수행하고, 보안통제제어모듈의 출입 해제 신호에 따라 잠금 해제를 수행하는 록킹부(240), 그리고 부가적으로 구성되는 전원공급부(250), 조작부(260) 및 표시부(270)에 대해서는 이미 본 발명의 제 1 실시례에 따른 독순술을 이용한 도어락 시스템(100)에서 동일한 명칭으로서 설명하였으므로 중복되는 설명을 생략하기로 하며, 이하에서 이전 실시례와의 차이점 위주로 설명하기로 한다.
통신부(220)는 원격으로 록킹부(240)의 잠금 해제에 필요한 독순술을 적용하도록 하는 도어락 독순술 제어 서버(280)와의 통신을 수행하도록 한다. 통신부(220)는 도어락 독순술 제어 서버(280)와의 유선 또는 무선 등의 통신을 수행하기 위하여, Wi-Fi, 블루투스(Bluetooth), 지그비(Zigbee), RFID, UWB, WiHD, 3G, LTE, 5G, Wibro(Wireless Broadband) 등과 같은 다양한 통신방식이 사용될 수 있다.
출입제어부(230) ToF 카메라(210)로부터 제공되는 3D 영상을 통신부(220)에 의해 도어락 독순술 제어 서버(280)에 제공하고, 도어락 독순술 제어 서버(280)에서 3D 영상으로부터 입의 인지 및 입술의 움직임을 감지함으로써, 입술의 움직임에 해당하는 독순술 보안코드를 획득하여 기존에 저장된 독순술 보안코드와의 매칭에 의해 설정된 조건을 만족시 제공하는 잠금 해제 신호를 통신부(220)를 통해 수신받도록 제어할 수 있다.
본 발명의 제 2 실시례에 따른 독순술을 이용한 도어락 시스템(200)은 도어락 독순술 제어 서버(280)를 더 포함할 수 있는데, 도어락 독순술 제어 서버(280)는 ToF 카메라(210)로부터 제공되는 3D 영상으로부터 입을 인지하고, 입술의 움직임을 감지하여, 입술의 움직임에 해당하는 독순술 보안코드를 획득하는 독순술보안코드획득부(282)와, 독순술보안코드획득부(282)에 의해 획득되는 독순술 보안코드를 사용자별 출입 통제를 위한 매칭용으로 저장하는 데이터베이스부(283)와, 독순술보안코드획득부(282)에 의해 획득되는 독순술 보안코드를 데이터베이스부(283)에 저장된 독순술 보안코드와 매칭하여, 설정된 조건을 만족시 잠금 해제 신호를 통신부(220)를 통해 출입제어부(230)에 제공하는 보안통제제어모듈(284)을 포함할 수 있다. 본 실시례에서, 독순술보안코드획득부(282), 데이터베이스부(283) 및 보안통제제어모듈(284)은 본 발명의 제 1 실시례에 따른 독순술을 이용한 도어락 시스템(100)에서 메모리부(130)의 역할을 다수의 사용자에 대한 독순술 보안코드를 저장 및 관리하는 데이터베이스부(283)가 대신 수행하고, 잠금 해제 신호 등을 통신부(220)를 통해서 통신으로 제공하는 점을 제외하고는, 독순술보안코드획득부(282)가 얼굴추적검출부, 입술추출부, 입술특징포인트추출부 및 입술특징추출부를 포함하는 점을 비롯하여, 그 밖의 구성 및 동작에 대해서 본 발명의 제 1 실시례에 따른 독순술을 이용한 도어락 시스템(100)의 독순술보안코드획득부(120), 메모리부(130) 및 보안통제제어모듈(140)과 동일하므로 그 설명을 생략하기로 한다.
도어락 독순술 제어 서버(280)는 다수의 통신부(220)와의 통신 접속을 위한접속제어부(281)가 마련될 수 있고, 접속제어부(281)가 정해진 프로세스에 의해 본인 인증 절차를 수행하도록 할 수 있으며, 이로 인해 식별되는 정보를 기초로 해당도어락의 록킹부에 대한 잠금 해제에 필요한 과정을 수행하도록 제어할 수 있다.
이와 같은 본 발명에 따른 독순술을 이용한 도어락 시스템에 따르면, 입체영상을 추출하기 위해 여러 대의 카메라 및 2D 이미지 인식의 매우 정교하고 복잡한 고가의 알고리즘을 사용하는 대신 ToF 카메라를 사용하여 1대로 정확한 입체 영상을 획득하고, 비접촉식 방식을 회피하고, 강력한 보안코드를 획득하기 위한 방안으로 입체적인 얼굴형상 인식 및 독순술에 의한 강력한 보안코드를 발생한다.
또한 본 발명에 따르면, 단순 숫자나 외부에 노출이 용이한 음성인식이 아니라 입술 모양만으로(즉 소리 없는 입술모양) “열려라 참깨” 등과 같은 말을 할 때의 입술 모양을 획득하여, 특정인의 입모양 및 연속되는 일정 움직임을 감지하여 코드를 획득함으로써 보안코드의 복사 및 전달이 불가능하고, 특히, 인체의 일부를 코드로 사용하는 방법 중 평생 변하지 않는 지문 등은 한번 등록되어 노출이 되는 순간 변경이 불가능하나, 입술의 움직임, 즉 사용자가 보안코드로 사용하기 위하여 정해놓은 문장, 단어, 비언어, 의성어, 의태어 또는 그 밖의 다양한 음을 발음하기 위한 입술의 움직임을 이용한 암호코드 획득은 언제나 변경이 가능하므로, 인체를 이용하는 보안코드의 가장 중요한 탁월한 활용성 및 보안성을 제공할 뿐만 아니라, 탁월한 변경 용이성을 제공하도록 한다.
이와 같이 본 발명에 대해서 첨부된 도면을 참조하여 설명하였으나, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양한 수정 및 변형이 이루어질 수 있음은 물론이다. 그러므로, 본 발명의 범위는 설명된 실시례에 한정되어서는 아니되며, 후술하는 특허청구범위뿐만 아니라 이러한 특허청구범위와 균등한 것들에 의해 정해져야 한다.
110,210 : ToF 카메라 120 : 독순술보안코드획득부
121 : 얼굴추적검출부 122 : 입술추출부
123 : 입술특징포인트추출부 124 : 입술특징추출부
130 : 메모리부 140 : 보안통제제어모듈
150,230 : 출입제어부 160,240 : 록킹부
170,250 : 전원공급부 180,260 : 조작부
190,270 : 표시부 220 : 통신부
280 : 도어락 독순술 제어 서버 281 : 접속제어부
283 : 데이터베이스부

Claims (5)

  1. 인체의 3D 영상을 획득하는 ToF(Time OF Flight) 카메라;
    상기 ToF 카메라로부터 제공되는 3D 영상으로부터 입을 인지하고, 입술의 움직임을 감지하여, 상기 입술의 움직임에 해당하는 독순술 보안코드를 획득하는 독순술보안코드획득부;
    상기 독순술보안코드획득부에 의해 획득되는 독순술 보안코드를 출입 통제를 위한 매칭용으로 저장하는 메모리부;
    상기 독순술보안코드획득부에 의해 획득되는 독순술 보안코드를 상기 메모리부에 저장된 독순술 보안코드와 매칭하여, 설정된 조건을 만족시 잠금 해제 신호를 출력하는 보안통제제어모듈;
    상기 독순술보안코드획득부에 의해 획득되는 독순술 보안코드를 사용자의 요청에 따라, 출입 통제 매칭용으로 사용되도록 상기 메모리부에 저장하고, 상기 보안통제제어모듈의 동작을 제어하는 출입제어부; 및
    도어에 설치되어 도어의 잠금 및 잠금 해제를 수행하고, 상기 보안통제제어모듈의 출입 해제 신호에 따라 잠금 해제를 수행하는 록킹부;
    를 포함하고,
    상기 독순술보안코드획득부, 상기 메모리부, 상기 보안통제제어모듈 및 상기 출입제어부는,
    상기 록킹부가 마련되는 도어락하우징 내에 마련되고,
    상기 독순술보안코드획득부는,
    상기 ToF 카메라로부터 제공되는 3D 영상으로부터 얼굴을 추적하여 얼굴 이미지를 추출하는 얼굴추적검출부;
    상기 얼굴추적검출부에 의해 추출되는 얼굴 이미지로부터 입술 이미지를 추출하는 입술추출부;
    상기 입술추출부로부터 추출되는 입술 이미지로부터 입술과 그 주변에 위치하는 다수의 특징 포인트를 추출하는 입술특징포인트추출부; 및
    상기 입술특징포인트추출부로부터 추출되는 특징 포인트의 위치변화를 통해서 특징을 추출하여 상기 독순술 보안코드로서 사용되도록 하는 입술특징추출부;
    를 포함하는 것을 특징으로 하는, 독순술을 이용한 도어락 시스템.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
KR1020210000196A 2021-01-04 2021-01-04 독순술을 이용한 도어락 시스템 KR102506799B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210000196A KR102506799B1 (ko) 2021-01-04 2021-01-04 독순술을 이용한 도어락 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210000196A KR102506799B1 (ko) 2021-01-04 2021-01-04 독순술을 이용한 도어락 시스템

Publications (2)

Publication Number Publication Date
KR20220099133A KR20220099133A (ko) 2022-07-13
KR102506799B1 true KR102506799B1 (ko) 2023-03-08

Family

ID=82401254

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210000196A KR102506799B1 (ko) 2021-01-04 2021-01-04 독순술을 이용한 도어락 시스템

Country Status (1)

Country Link
KR (1) KR102506799B1 (ko)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020044052A1 (en) * 2018-08-30 2020-03-05 Liopa Ltd 'liveness' detection system

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130022607A (ko) * 2011-08-25 2013-03-07 삼성전자주식회사 입술 이미지를 이용한 음성 인식 장치 및 이의 음성 인식 방법
KR20200145384A (ko) * 2019-06-21 2020-12-30 엘지전자 주식회사 스마트 도어

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020044052A1 (en) * 2018-08-30 2020-03-05 Liopa Ltd 'liveness' detection system

Also Published As

Publication number Publication date
KR20220099133A (ko) 2022-07-13

Similar Documents

Publication Publication Date Title
US10885396B2 (en) Generating composite images using audio/video recording and communication devices
CN109446981B (zh) 一种脸部活体检测、身份认证方法及装置
JP4650669B2 (ja) 動体認識装置
Han et al. Enhanced computer vision with microsoft kinect sensor: A review
US11115629B1 (en) Confirming package delivery using audio/video recording and communication devices
KR101730255B1 (ko) 얼굴 인식 디지털 도어록
US10511810B2 (en) Accessing cameras of audio/video recording and communication devices based on location
JP4951995B2 (ja) 顔照合装置
US10666913B1 (en) Input functionality for audio/video recording and communication doorbells
CN106991377A (zh) 结合深度信息的人脸识别方法、人脸识别装置和电子装置
CN113752983B (zh) 一种基于人脸识别/人眼识别的车辆解锁控制系统和方法
JP2017010543A (ja) 顔認識方法及び装置
KR101682311B1 (ko) 얼굴 인식 디지털 도어록
CN106815914A (zh) 一种基于人脸识别技术的门禁系统及解锁方法
CN109035516A (zh) 控制智能锁的方法、装置、设备及存储介质
CN101763671A (zh) 通过使用摄像机来监控人的系统
KR20160033553A (ko) 3차원 얼굴모델 투영을 통한 얼굴 인식 방법 및 시스템
US11069210B2 (en) Selecting a video frame for notification using audio/video recording and communication devices
CN112330846A (zh) 车辆控制的方法、装置、存储介质及电子设备和车辆
US20210256244A1 (en) Method for authentication or identification of an individual
US10930126B1 (en) Motion sensing for electronic devices
CN206431724U (zh) 一种基于人脸识别技术的门禁系统
KR20020022295A (ko) 3차원 정보를 이용한 얼굴 인식 장치 및 방법
Saputra et al. Smart and real-time door lock system for an elderly user based on face recognition
CN118334758A (zh) 应用于楼宇门禁系统的图像识别方法及系统

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant