KR20230120715A - 안면인식과 제스쳐를 이용한 출입 제어 시스템 및 방법 - Google Patents

안면인식과 제스쳐를 이용한 출입 제어 시스템 및 방법 Download PDF

Info

Publication number
KR20230120715A
KR20230120715A KR1020220017277A KR20220017277A KR20230120715A KR 20230120715 A KR20230120715 A KR 20230120715A KR 1020220017277 A KR1020220017277 A KR 1020220017277A KR 20220017277 A KR20220017277 A KR 20220017277A KR 20230120715 A KR20230120715 A KR 20230120715A
Authority
KR
South Korea
Prior art keywords
information
gesture
face
access
recognized
Prior art date
Application number
KR1020220017277A
Other languages
English (en)
Inventor
김명기
Original Assignee
김명기
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 김명기 filed Critical 김명기
Priority to KR1020220017277A priority Critical patent/KR20230120715A/ko
Publication of KR20230120715A publication Critical patent/KR20230120715A/ko

Links

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/00174Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00563Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys using personal physical data of the operator, e.g. finger prints, retinal images, voicepatterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/00174Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00571Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated by interacting with a central unit

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Collating Specific Patterns (AREA)

Abstract

본 발명은 객체가 되는 사람의 안면과 제스쳐를 이용하여 출입을 제어할 수 있는 안면인식과 제스쳐를 이용한 출입 제어 시스템 및 방법에 관한 것으로서, 소정의 지역에 출입 가능한 객체들의 얼굴정보, 각각의 객체들에 대응하는 제스쳐정보 및 출입정보를 기록하는 정보 데이터베이스; 소정의 지역에 출입하는 사람의 얼굴과 제스쳐를 촬영하는 카메라; 상기 카메라에 의해 촬영된 객체의 열굴을 인지하고 제스쳐가 입력되는 경우 이를 인지하며, 카메라를 통해 인식된 얼굴 및 제스쳐를 각각 얼굴정보 및 제스쳐정보로 가공하여 상기 정보 데이터베이스에 저장하도록 하는 영상처리부; 및 상기 보안이 설정된 소정의 지역에 출입하는 출입자 별로 설정에 따라 얼굴인식 및 제스쳐 인식 중 적어도 어느 하나가 상기 정보 데이터베이스에 저장된 각각의 얼굴정보 및 제스쳐정보와 일치하는 경우 문을 개방시켜 출입을 허용하는 출입제어부;를 포함하여 구성되어 얼굴인식 오류로 인하여 출입이 안되는 경우 제스쳐를 이용하여 출입할 수 있으며 객체 별로 제스쳐를 설정하여 제스쳐를 입력한 객체를 인지하도록 할 수 있는 효과가 있다.

Description

안면인식과 제스쳐를 이용한 출입 제어 시스템 및 방법{ACCESS CONTROL SYSTEM AND METHOD USING FACIAL RECOGNITION AND GESTURES}
본 발명은 안면인식과 제스쳐를 이용한 출입 제어 시스템 및 방법에 관한 것으로써, 더욱 상세하게는 객체가 되는 사람의 안면과 제스쳐를 이용하여 출입을 제어할 수 있는 안면인식과 제스쳐를 이용한 출입 제어 시스템 및 방법에 관한 것이다.
일반적으로 일정한 장소에 출입 관련하여 지문, 얼굴인식, 동공인식 또는 출입카드를 이용하여 출입을 기록하고 제어하고 있다.
출입카드를 이용하는 경우에는 빠른 인식율로 인한 빠른 출입이 가능하다는 장점이 있다. 그러나, 출입카드를 이용한 출입 제어는 출입카드를 소지하지 않은 경우에는 출입할 수 없다는 문제점이 있다.
지문을 이용한 출입의 경우, 지문을 하나의 코드로 인식하여 지문의 입력되는 위치가 달라지는 경우 일치하지 않는 경우가 많아 오류가 발생한다. 최근에는 쪽지문을 조합하여 하나의 출입 객체에 다수의 쪽지문을 설정하여 쪽 지문들을 조합하여 인식률을 높이고 이로 인하여 출입 제어의 효률을 높였다. 그러나, 쪽지문을 활용하는 경우에도 여전히 오류가 발생하는 경우가 발생하고 있다. 이와 같은 오류는 지문에 수분이 많이 함유되는 경우, 손이 뜨거운 열기에 오래 노출되는 경우, 손이 차가운 공기에 오래 노출되는 경우와 같이 지문에 변화가 발생하는 경우 또는 인식 센서의 문제라든가 기타의 이유 등으로 인하여 지문 인식에 오류가 발생하는 경우가 간혹 발생한다.
얼굴인식을 이용하는 경우에도 지문 인식을 이용한 출입과 마찬가지로 간혹 오류가 발생하여 정당한 출입자임에도 불구하고 이를 인식하지 못하는 경우가 발생한다. 이는 안면인식의 경우 건강상의 이유로 안색이 변화되는 경우, 안경이나 콘택트랜즈가 바뀌는 경우, 헤어스타일이 급격하게 바뀌는 등의 경우가 발생하는 경우 간혹 오류가 발생한다. 동공인식도 앞선 얼굴인식과 마찬가지로 콘택트랜즈가 바뀌거나 눈이 붓는 것과 같은 건강상의 이유 등으로 인하여 인식율이 떨어지는 경우가 간혹 발생한다는 문제점이 있다.
앞서 언급한 바와 같이 출입카드를 제외하고는 인식의 오류 등으로 인하여 출입에 제한이 발생할 여지가 있다. 오류가 발생하는 경우에는 출입을 반드시 등록해야 하는 경우에는 반복적으로 지문, 얼굴 및 동공을 인식시켜 출입을 등록하고, 반복적으로도 실??하는 경우에는 주변의 도움을 받아 출입한 이후에 출입 사실을 직접 기록하거나 구두로 출입 사실을 알려 기록되도록 하는 등의 문제가 간혹 발생한다는 문제점이 있다.
한편, 얼굴 인식을 이용하여 출입하는 아파트인 경우, 강도들에게 협박받아 출입하는 경우 얼굴이 인식되어 출입이 허용되는 경우가 발생할 수 있다는 문제점이 있다.
대한민국 등록특허공보 제10-1595413(2016.02.18.). '계층적 관리자 승인 구조형 ICT 융합기술 기반 출입통제 시스템 및 방법'
본 발명은 상술한 문제점을 해결하기 위하여 창안된 것으로서, 본 발명의 목적은 객체가 되는 출입자의 안면을 인식하고 이와 함께 기설정된 제스쳐를 이용하여 출입을 제어할 수 있는 안면인식과 제스쳐를 이용한 출입 제어 시스템 및 방법을 제공하기 위한 것이다.
본 발명의 해결하고자 하는 과제는 이상에서 언급된 것들에 한정되지 않으며, 언급되지 아니한 다른 해결과제들은 아래의 기재로부터 당업자에게 명확하게 이해되어 질 수 있을 것이다.
상술한 목적을 달성하기 위한 본 발명의 안면인식과 제스쳐를 이용한 출입 제어 시스템은
소정의 지역에 출입 가능한 객체들의 얼굴정보, 각각의 객체들에 대응하는 제스쳐정보 및 출입정보를 기록하는 정보 데이터베이스;
보안이 설정된 소정의 지역에 출입하는 사람의 얼굴과 제스쳐를 촬영하는 카메라;
상기 카메라에 의해 촬영된 객체의 열굴을 인지하고 제스쳐가 입력되는 경우 이를 인지하며, 카메라를 통해 인식된 얼굴 및 제스쳐를 각각 얼굴정보 및 제스쳐정보로 가공하여 상기 정보 데이터베이스에 저장하도록 하는 영상처리부; 및
상기 보안이 설정된 소정의 지역에 출입하는 출입자 별로 설정에 따라 얼굴인식 및 제스쳐 인식 중 적어도 어느 하나가 상기 정보 데이터베이스에 저장된 각각의 얼굴정보 및 제스쳐정보와 일치하는 경우 문을 개방시켜 출입을 허용하는 출입제어부;를 포함하여 구성된다.
상기 출입정보는,
인식된 얼굴과 인식된 제스쳐 중 적어도 하나를 만족시키는 상기 얼굴정보 및 상기 제스쳐정보가 상기 정보 데이터베이스에 있는 경우 출입 가능하도록 하는 제1 설정, 인식된 얼굴과 인식된 제스쳐를 모두 만족시키는 얼굴정보 및 제스쳐정보 가 정보 데이터베이스에 있는 경우 출입 가능하도록 하는 제2 설정, 상기 인식된 얼굴이 정보 데이터베이스의 얼굴정보를 만족시키는 경우 출입 가능하도록 설정하는 제3 설정 및 인식된 제스쳐가 정보 데이터베이스의 제스쳐정보를 만족시키는 경우 경우 출입 가능하도록 설정하는 제4 설정으로 구성되며 각각의 객체 별로 제1 설정 내지 제4 설정 중 하나를 선택하여 설정하도록 구성될 수 있다.
상기 출입제어부는, 해당 영역에 출입하는 객체가 상기 제1 설정으로 설정된 경우, 얼굴을 인식하여 얼굴정보와 비교하여 인식된 얼굴이 얼굴정보와 일치하는 경우 출입 가능하도록 문을 개방하도록 설정하며, 인식된 얼굴과 얼굴정보가 상기 정보 데이터베이스의 정보와 불일치하는 경우 카메라를 통해 제스쳐를 입력받아 인식된 제스쳐가 정보 데이터베이스에 저장된 제스쳐정보와 일치하는 경우 출입 가능하도록 문을 개방하도록 설정하며 상기 얼굴정보 또는 제스쳐를 이용하여 출입하는 경우 해당 얼굴정보 또는 제스쳐에 대응하는 객체의 출입을 정보 데이터베이스에 저장되도록 구성될 수 있다.
상기 출입제어부는, 해당 영역에 출입하는 객체가 상기 제2 설정으로 설정된 경우, 얼굴정보를 먼저 인지하고 상기 얼굴정보가 일치하는 경우, 카메라를 통해 제스쳐를 입력받고 상기 제스쳐가 상기 데이터베이스에 저장된 해당 객체의 제스쳐정보와 일치하는 경우 출입 가능하도록 문을 개방하도록 설정하고 얼굴정보 및 제스쳐정보 중 어느 하나가 일치하지 않는 경우 문을 폐쇄 상태로 유지하여 출입 불가능하도록 설정될 수 있다.
상술한 목적을 달성하기 위한 본 발명의 안면인식과 제스쳐를 이용한 출입 제어 방법은,
객체의 얼굴 및 제스쳐를 촬영하는 단계;
영상처리부가 촬영된 얼굴의 특징적인 부분들을 정보화하여 얼굴정보로 가공하고 정보 데이터베이스에 저장시키는 단계;
영상처리부가 개인이 설정한 제스쳐의 변화를 정보화하여 제스쳐정보로 가공하여 정보 데이터베이스에 저장시키는 단계; 및
출입제어부가 해당 객체의 얼굴정보 및 제스쳐정보에 대응하는 출입정보를 대응시켜 정보 데이터베이스에 저장시키는 단계;를 포함하여 구성된다.
상기 출입정보는,
인식된 얼굴과 인식된 제스쳐 중 적어도 하나를 만족시키는 상기 얼굴정보 및 상기 제스쳐정보가 상기 정보 데이터베이스에 있는 경우 출입 가능하도록 하는 제1 설정, 인식된 얼굴과 인식된 제스쳐를 모두 만족시키는 상기 얼굴정보 및 상기 제스쳐정보가 정보 데이터베이스에 있는 경우 출입 가능하도록 하는 제2 설정, 상기 인식된 얼굴이 정보 데이터베이스의 얼굴정보를 만족시키는 경우 출입 가능하도록 설정하는 제3 설정 및 인식된 제스쳐가 정보 데이터베이스의 제스쳐정보와 일치하는 경우 출입 가능하도록 설정하는 제4 설정으로 구성되며 각각의 객체 별로 제1 설정 내지 제4 설정 중 하나를 선택하여 설정하도록 구성될 수 있다.
객체가 상기 제1 설정으로 설정된 경우
출입제어부가 카메라를 통해 얼굴을 촬영하고 영상처리부를 통해 획득한 인식된 얼굴을 정보 데이터베이스에 저장된 얼굴정보와 비교하는 제1 비교단계;
출입제어부가 비교결과 일정 오차 범위 내에서 인식된 얼굴이 얼굴정보와 일치하는 지의 여부를 판단하는 제1 판단단계;
출입제어부가 상기 제1 판단단계에서의 판단결과 인식된 얼굴이 얼굴정보와 일치하는 경우 출입 가능하도록 문을 개방하도록 설정하는 개방단계;
상기 제1 판단단계에서의 판단결과 인식된 얼굴과 얼굴정보가 정보 데이터베이스의 얼굴정보와 불일치하는 경우 객체의 제스쳐를 입력받는 단계;
출입제어부가 인식된 제스쳐와 정보 데이터베이스에 저장된 제스쳐정보를 비교하는 제2 비교단계;
출입제어부가 인식된 제스쳐와 제스쳐정보가 일정 오차 범위 내에서 일치하는 지의 여부를 판단하는 제2 판단단계;
상기 제2 판단단계에서 판단하여 인식된 제스쳐와 제스쳐정보가 일치하는 경우 문을 개방하는 개방단계로 진행하고,
출입제어부가 해당 얼굴정보 또는 제스쳐정보에 대응하는 객체의 출입을 정보 데이터베이스의 출입정보에 기록되도록 하는 단계; 및
상기 제2 판단단계에서 판단하여 인식된 제스쳐와 제스쳐정보가 일치하지 않는 경우 출입제어부가 문을 폐쇄 상태로 유지하여 출입 불가능하도록 설정하는 단계;를 포함하여 구성될 수 있다.
해당 영역에 출입하는 객체가 상기 제2 설정으로 설정된 경우,
출입제어부가 영상처리부를 통해 얼굴을 인식하여 인식된 얼굴과 정보 데이터베이스의 얼굴정보를 비교하는 제3 비교단계;
출입제어부가 비교결과 일정 오차 범위 내에서 인식된 얼굴이 일정 오차 범위 내에서 얼굴정보와 일치하는 지의 여부를 판단하는 제3 판단단계;
상기 제3 판단단계에서의 판단결과 인식된 얼굴과 얼굴정보가 정보 데이터베이스의 얼굴정보와 일치하는 경우 객체의 제스쳐를 입력받는 단계;
출입제어부가 인식된 제스쳐와 정보 데이터베이스에 저장된 제스쳐정보를 비교하는 제4 비교단계;
출입제어부가 인식된 제스쳐와 제스쳐정보가 일정 오차 범위 내에서 일치하는 지의 여부를 판단하는 제4 판단단계;
상기 제4 판단단계에서 판단하여 인식된 제스쳐와 제스쳐정보가 일치하는 경우 출입제어부는 객체가 출입 가능하도록 문을 개방시키는 단계; 및
출입제어부는 해당 얼굴정보 및 제스쳐정보에 대응하는 객체의 출입을 정보 데이터베이스의 출입정보에 기록되도록 하는 단계를 포함하여 구성될 수 있다.
본 발명의 안면인식과 제스쳐를 이용한 출입 제어 시스템 및 방법은 안면인식 및 제스쳐 인식 중 어느 하나를 선택하여 둘 중 하나가 입력되는 경우 출입할 수 있도록 설정하는 경우 얼굴인식 오류로 인하여 출입이 안되는 경우 제스쳐를 이용하여 출입할 수 있으며 객체 별로 제스쳐를 설정하여 제스쳐를 입력한 객체를 인지하도록 할 수 있는 효과가 있다.
또한, 본 발명의 안면인식과 제스쳐를 이용한 출입 제어 시스템 및 방법은 얼굴인식 및 제스쳐 인식 모두를 만족시키는 경우에 출입 가능하도록 설정하는 경우 출입의 난이도를 높여 보안을 강화시킬 수 있어 범죄로부터 보다 안전한 출입을 설정할 수 있는 효과가 있다.
본 발명의 효과는 이상에서 언급된 것들에 한정되지 않으며, 언급되지 아니한 다른 해결과제들은 아래의 기재로부터 당업자에게 명확하게 이해되어 질 수 있을 것이다.
도 1은 본 발명의 제1 일실시예에 따른 안면인식과 제스쳐를 이용한 출입 제어 시스템의 구성을 나타낸 블록 구성도.
도 2는 본 발명의 제1 일실시예에 따른 안면인식과 제스쳐를 등록시키는 과정을 나타낸 순서도.
도 3은 본 발명의 제1 일실시예에 따른 안면인식과 제스쳐를 이용하여 출입을 제어하는 과정을 나타낸 순서도.
도 4는 본 발명의 제2 일실시예에 따른 안면인식과 제스쳐를 이용한 출입 제어하는 과정을 나타낸 순서도.
이하, 첨부된 도면에 의하여 본 발명의 바람직한 실시예를 보다 상세하게 설명한다.
도 1은 본 발명의 제1 일실시예에 따른 안면인식과 제스쳐를 이용한 출입 제어 시스템의 구성을 나타낸 블록 구성도이다.
도 1을 참조하면, 본 발명은 정보 데이터베이스(100), 카메라(200), 영상처리부(300) 및 출입제어부(400)를 포함하여 구성된다.
정보 데이터베이스(100)는 보안이 설정된 소정의 지역에 출입 가능한 객체들의 얼굴정보, 각각의 객체들에 대응하는 제스쳐정보 및 출입정보를 기록한다. 여기서 제스쳐는 객체별로 다른 제스쳐일 수 있으며, 동일한 제스쳐일 수도 있다. 다만, 제스쳐를 단독으로 출입코드로 사용하는 경우에는 객체별로 다른 제스쳐를 설정한다. 예컨대, 제스쳐는 왼손으로 손하트를 하는 것, 오른손으로 좌측에서 우측으로 손을 이동시키는 것, 왼발을 두 번 구르는 것, 고개를 왼쪽으로 꺽었다 제자리로 오는 것 등과 같이 다양한 동작이 설정될 수 있다.
출입정보는 각각의 객체의 출입기록을 포함한다. 또각 출입정보는 각각의 객체 별로 출입기록과 해당 출입자가 제1 설정 내지 제4 설정 중 어느 하나로 설정되어 있는 지의 여부가 기록된다. 먼저, 제1 설정은 상기 얼굴정보 및 상기 제스쳐정보 중 적어도 하나의 정보를 만족시키는 경우 출입 가능하도록 하는 설정이다. 제2 설정은 상기 얼굴정보 및 상기 제스쳐정보를 모두 만족시키는 경우 출입 가능하도록 하는 설정이다. 제3 설정은 얼굴정보를 이용하여 출입 가능하도록 설정이다. 제4 설정은 제스쳐정보를 이용하여 출입 가능하도록하는 설정이다. 해당 영역에 출입하는 객체는 앞서 설명한 제1 설정 내지 제4 설정 중 하나를 개별적으로 선택하거나 또는 해당 영역의 출입 정책에 따라 제1 설정 내지 제4 설정 중 하나를 선택하여 모든 출입자에게 부등 적용시키거나 또는 일괄적으로 적용시켜 설정될 수 있다.
카메라(200)는 설정된 소정의 지역에 출입하는 사람의 얼굴과 제스쳐를 촬영한다. 특히, 등록 시에 얼굴정보와 제스쳐정보를 획득하기 위하여 얼굴과 제스쳐를 촬영한다.
영상처리부(300)는 얼굴정보 등록시, 카메라(200)에 의해 촬영된 객체의 얼굴의 특징적인 부분들을 정보화하여 얼굴정보로 가공하여 정보 데이터베이스(100)에 저장되도록 한다. 영상처리부(300)는 제스쳐정보 등록시, 개인이 설정한 제스쳐의 변화를 정보화하여 제스쳐정보로 가공하여 정보 데이터베이스(100)에 저장되도록 한다.
영상처리부(300)는 이후에 출입을 목적으로 객체가 카메라(200)에 의해 감지되어 얼굴이 인식되면 이를 데이터화하여 인식된 얼굴로 가공하고 제스쳐가 입력되는 경우 제스쳐를 인지하여 이를 데어터화하여 인식된 제스쳐로 가공한다.
출입제어부(400)는 상기 보안이 설정된 소정의 지역에 출입하는 출입자 별로 출입정보에 설정된 설정에 따라 얼굴인식 및 제스쳐 인식 중 적어도 어느 하나의 인식한 정보가 해당 얼굴정보 및 제스쳐정보와 일치하는 경우 문을 개방시켜 출입을 허용하도록 한다. 특히 정보 데이터베이스(100)에 설정된 출입정보에서 해당 객체가 제1 설정 내지 제4 설정 중 하나의 설정 중 어느 설정인지의 여부를 인지하여 출입을 제어한다. 만약, 출입 영역이 아파트인 경우 보안을 높이기 위하여 얼굴정보와 제스쳐정보를 모두 충족시키는 경우에만 출입 가능하도록 설정하는 제2 설정으로 설정할 수 있으며, 이 경우 강도들에게 협박받아 출입하는 경우 얼굴이 인식되어도 제스쳐가 입력되지 않으면 출입시키지 않기 때문에 보다 큰 피해를 막을 수 있다.
출입제어부(400)는 해당 영역에 출입하는 객체가 상기 제1 설정으로 설정된 경우, 카메라(200)를 통해 얼굴을 촬영하고 영상처리부(300)를 통해 획득한 인식된 얼굴을 정보 데이터베이스(100)에 저장된 얼굴정보와 비교하여 일치하는 경우 출입 가능하도록 문을 개방하도록 설정한다. 만약 인식된 얼굴이 정보 데이터베이스(100)의 얼굴정보와 불일치하는 경우 카메라(200)를 통해 제스쳐를 입력받을 수 있도록 하고 카메라(200)를 통해 제스쳐를 입력받아 영상처리부(300)를 통해 이를 인식시켜 생성된 인식된 제스쳐와 정보 데이터베이스(100)에 저장된 제스쳐정보를 비교하여 일치하는 경우 출입 가능하도록 문을 개방하게 설정한다. 출입제어부(400)객체가 제1 설정으로 설정된 경우 영상정보 및 제스쳐정보가 모두 불일치하는 경우에는 문을 폐쇄 상태로 유지하여 출입 불가능하도록 설정한다. 출입제어부(400)는 상기 얼굴정보 또는 제스쳐정보를 이용하여 해당 객체를 출입시킨 경우에는 해당 얼굴정보 또는 제스쳐정보에 대응하는 객체의 출입을 정보 데이터베이스(100)의 출입정보에 기록되도록 한다.
출입제어부(400)는 해당 영역에 출입하는 객체가 상기 제2 설정으로 설정된 경우, 영상처리부(300)를 통해 얼굴을 인식하여 인식된 얼굴과 정보 데이터베이스(100)의 얼굴정보를 비교하여 일치하는 경우, 카메라(200)를 통해 제스쳐를 입력받도록 하고 영상처리부(300)에 의해 상기 제스쳐가 인식된 제스쳐로 변환되면 정보 데이터베이스(100)에 저장된 해당 객체의 제스쳐정보와 비교하여 일치하는 경우 출입 가능하도록 문을 개방하게 설정한다. 출입제어부(400)는 얼굴정보 및 제스쳐정보 중 어느 하나라도 일치하지 않는 경우 문을 폐쇄 상태로 유지하여 출입 불가능하도록 설정한다. 출입제어부(400)는 상기 얼굴정보 및 제스쳐정보를 이용하여 해당 객체를 출입시킨 경우에는 해당 얼굴정보 및 제스쳐정보에 대응하는 객체의 출입을 정보 데이터베이스(100)의 출입정보에 기록되도록 한다.
한편, 얼굴 인식을 이용하여 출입을 제어하는 제3 설정은 일반적인 얼굴인식에 의한 출입 제어와 동일하므로 이에 대한 설명은 생략하기로 한다.
출입제어부(400)는 해당 영역에 출입하는 객체가 상기 제4 설정으로 설정된 경우, 카메라(200)를 통해 제스쳐를 입력받고 입력받은 제스쳐를 영상처리부(300)를 통해 인식시켜 인식된 제스쳐가 정보 데이터베이스(200)에 저장된 해당 객체의 제스쳐정보와 일치하는 경우 출입 가능하도록 문을 개방하게 설정하고 제스쳐정보가 불일치하는 경우 문을 폐쇄 상태로 유지하게 설정하여 출입 불가능하도록 한다.
도 2는 본 발명의 제1 일실시예에 따른 안면인식과 제스쳐를 등록시키는 과정을 나타낸 순서도이다.
도 2를 참조하면, 먼저, S202단계에서 카메라(200)는 객체의 얼굴 및 제스쳐를 촬영한다.
S204단계에서 영상처리부(300)는 촬영된 얼굴의 특징적인 부분들을 정보화하여 얼굴정보로 가공하여 정보 데이터베이스(100)에 저장한다.
S206단계에서 영상처리부(300)는 개인이 설정한 제스쳐의 변화를 정보화하여 제스쳐정보로 가공하여 정보 데이터베이스(100)에 저장한다.
S208단계에서 출입제어부(400)는 해당 객체의 얼굴정보 및 제스쳐정보에 대응하는 출입정보를 대응시켜 정보 데이터베이스(100)에 저장한다.
도 3은 본 발명의 제1 일실시예에 따른 안면인식과 제스쳐를 이용하여 출입을 제어하는 과정을 나타낸 순서도이다.
도 3을 참조하면, 객체가 상기 제1 설정으로 설정된 경우에 출입제어부(400)가 제어하는 과정에 대하여 설명하기로 한다.
S302단계에서 카메라(200)를 통해 얼굴을 촬영하고 영상처리부(300)를 통해 획득한 인식된 얼굴을 정보 데이터베이스(100)에 저장된 얼굴정보와 비교한다.
S304단계에서 출입제어부(400)는 S302단계에서의 비교결과 일정 오차 범위 내에서 인식된 얼굴이 얼굴정보와 일치하는 지의 여부를 판단한다.
S304단계에서의 출입제어부(400)는 판단결과 인식된 얼굴이 얼굴정보와 일치하는 경우 출입 가능하도록 문을 개방하도록 설정한다S(S306단계).
S304단계에서의 판단결과 인식된 얼굴과 얼굴정보가 정보 데이터베이스(100)의 얼굴정보와 불일치하는 경우 객체의 제스쳐를 입력받는다(S308단계).
S310단계에서 출입제어부(400)는 인식된 제스쳐와 정보 데이터베이스(100)에 저장된 제스쳐정보를 비교한다.
S312단계에서 출입제어부(400)는 인식된 제스쳐와 제스쳐정보가 일정 오차 범위 내에서 일치하는 지의 여부를 판단한다.
S312단계에서 판단하여 인식된 제스쳐와 제스쳐정보가 일치하는 경우 출입제어부(400)는 객체가 출입 가능하도록 문을 개방하는 S306단계로 진행한다.
S314단계에서 출입제어부(400)는 해당 얼굴정보 또는 제스쳐정보에 대응하는 객체의 출입을 정보 데이터베이스(100)의 출입정보에 기록되도록 한다. 이때 기록되는 정보는 객체의 신상정보 및 시간 등을 기록한 정보를 포함한다.
S312단계에서 판단하여 인식된 제스쳐와 제스쳐정보가 일치하지 않는 경우 출입제어부(400)는 문을 폐쇄 상태로 유지하여 출입 불가능하도록 설정한다(S316단계).
도 4는 본 발명의 제2 일실시예에 따른 안면인식과 제스쳐를 이용한 출입 제어하는 과정을 나타낸 순서도이다.
도 4를 참조하면, 해당 영역에 출입하는 객체가 상기 제2 설정으로 설정된 경우, 출입제어부(400)의 제어에 대하여 설명하기로 한다.
먼저 S402단계에서 출입제어부(400)는 영상처리부(300)를 통해 얼굴을 인식하여 인식된 얼굴과 정보 데이터베이스(100)의 얼굴정보를 비교한다.
S404단계에서 출입제어부(400)는 402단계에서의 비교결과 일정 오차 범위 내에서 인식된 얼굴이 얼굴정보와 일치하는 지의 여부를 판단한다.
S404단계에서의 판단결과 인식된 얼굴과 얼굴정보가 정보 데이터베이스(100)의 얼굴정보와 일치하는 경우 객체의 제스쳐를 입력받는다(S406단계).
S408단계에서 출입제어부(400)는 인식된 제스쳐와 정보 데이터베이스(100)에 저장된 제스쳐정보를 비교한다.
S410단계에서 출입제어부(400)는 인식된 제스쳐와 제스쳐정보가 일정 오차 범위 내에서 일치하는 지의 여부를 판단한다.
S410단계에서 판단하여 인식된 제스쳐와 제스쳐정보가 일치하는 경우 출입제어부(400)는 객체가 출입 가능하도록 문을 개방한다(S412단계).
S414단계에서 출입제어부(400)는 해당 얼굴정보 및 제스쳐정보에 대응하는 객체의 출입을 정보 데이터베이스(100)의 출입정보에 기록되도록 한다.
S410단계에서 판단하여 인식된 제스쳐와 제스쳐정보가 일치하지 않는 경우 출입제어부(400)는 문을 폐쇄 상태로 유지하여 출입 불가능하도록 설정한다(S416단계).
한편, 해당 영역에 출입하는 객체가 제3 설정으로 설정된 경우는 앞선 도 3 내지 도 4에 얼굴을 이용하여 출입 및 출입등록하는 구성과 유사하거나 동일하므로 이에 대한 설명은 생략하기로 한다. 상기 제4 설정으로 설정된 경우의 출입제어부(400)의 제어에 대한 설명은 전술한 도 3 및 도 4의 제스쳐를 이용하여 출입 및 출입등록하는 과정과 유사하거나 동일하므로 이에 대한 설명은 생략하기로 한다.
이상에서 설명한 것은 본 발명에 따른 체온측정과 안면 움직임을 감지하는 안면인식 시스템 및 방법을 실시하기 위한 실시 예에 불과한 것으로서, 본 발명은 상기한 실시 예에 한정되지 않고, 이하의 특허청구범위에서 청구하는 바와 같이 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변경 실시가 가능한 범위까지 본 발명의 기술적 정신이 있다고 할 것이다.
100 : 정보 데이터베이스 200 : 카메라
300 : 영상처리부 400 : 출입제어부

Claims (8)

  1. 소정의 지역에 출입 가능한 객체들의 얼굴정보, 각각의 객체들에 대응하는 제스쳐정보 및 출입정보를 기록하는 정보 데이터베이스;
    소정의 지역에 출입하는 사람의 얼굴과 제스쳐를 촬영하는 카메라;
    상기 카메라에 의해 촬영된 객체의 열굴을 인지하고 제스쳐가 입력되는 경우 이를 인지하며, 카메라를 통해 인식된 얼굴 및 제스쳐를 각각 얼굴정보 및 제스쳐정보로 가공하여 상기 정보 데이터베이스에 저장하도록 하는 영상처리부; 및
    상기 보안이 설정된 소정의 지역에 출입하는 출입자 별로 설정에 따라 얼굴인식 및 제스쳐 인식 중 적어도 어느 하나가 상기 정보 데이터베이스에 저장된 각각의 얼굴정보 및 제스쳐정보와 일치하는 경우 문을 개방시켜 출입을 허용하는 출입제어부;를 포함하여 구성되는 안면인식과 제스쳐를 이용한 출입 제어 시스템.
  2. 제1항에 있어서, 상기 출입정보는,
    인식된 얼굴과 인식된 제스쳐 중 적어도 하나를 만족시키는 상기 얼굴정보 및 상기 제스쳐정보가 상기 정보 데이터베이스에 있는 경우 출입 가능하도록 하는 제1 설정, 인식된 얼굴과 인식된 제스쳐를 모두 만족시키는 상기 얼굴정보 및 상기 제스쳐정보가 정보 데이터베이스에 있는 경우 출입 가능하도록 하는 제2 설정, 상기 인식된 얼굴이 정보 데이터베이스의 얼굴정보를 만족시키는 경우 출입 가능하도록 설정하는 제3 설정 및 인식된 제스쳐가 정보 데이터베이스의 제스쳐정보와 일치하는 경우 출입 가능하도록 설정하는 제4 설정으로 구성되며 각각의 객체 별로 제1 설정 내지 제4 설정 중 하나를 선택하여 설정하도록 구성되는 안면인식과 제스쳐를 이용한 출입 제어 시스템.
  3. 제2항에 있어서, 상기 출입제어부는,
    해당 영역에 출입하는 객체가 상기 제1 설정으로 설정된 경우, 얼굴을 인식하여 얼굴정보와 비교하여 인식된 얼굴이 얼굴정보와 일치하는 경우 출입 가능하도록 문을 개방하도록 설정하며, 인식된 얼굴과 얼굴정보가 상기 정보 데이터베이스의 정보와 불일치하는 경우 카메라를 통해 제스쳐를 입력받아 인식된 제스쳐가 정보 데이터베이스에 저장된 제스쳐정보와 일치하는 경우 출입 가능하도록 문을 개방하도록 설정하며 상기 얼굴정보 또는 제스쳐를 이용하여 출입하는 경우 해당 얼굴정보 또는 제스쳐에 대응하는 객체의 출입을 정보 데이터베이스에 저장되도록 구성되는 안면인식과 제스쳐를 이용한 출입 제어 시스템.
  4. 제2항에 있어서, 상기 출입제어부는,
    해당 영역에 출입하는 객체가 상기 제2 설정으로 설정된 경우, 얼굴정보를 먼저 인지하고 상기 얼굴정보가 일치하는 경우, 카메라를 통해 제스쳐를 입력받고 상기 제스쳐가 상기 데이터베이스에 저장된 해당 객체의 제스쳐정보와 일치하는 경우 출입 가능하도록 문을 개방하도록 설정하고 얼굴정보 및 제스쳐정보 중 어느 하나가 일치하지 않는 경우 문을 폐쇄 상태로 유지하여 출입 불가능하도록 설정되는 안면인식과 제스쳐를 이용한 출입 제어 시스템.
  5. 안면인식과 제스쳐를 이용한 출입 제어 방법에 있어서,
    객체의 얼굴 및 제스쳐를 촬영하는 단계;
    영상처리부가 촬영된 얼굴의 특징적인 부분들을 정보화하여 얼굴정보로 가공하고 정보 데이터베이스에 저장시키는 단계;
    영상처리부가 개인이 설정한 제스쳐의 변화를 정보화하여 제스쳐정보로 가공하여 정보 데이터베이스에 저장시키는 단계; 및
    출입제어부가 해당 객체의 얼굴정보 및 제스쳐정보에 대응하는 출입정보를 대응시켜 정보 데이터베이스에 저장시키는 단계;를 포함하는 것인 안면인식과 제스쳐를 이용한 출입 제어 방법.
  6. 제5항에 있어서, 상기 출입정보는,
    인식된 얼굴과 인식된 제스쳐 중 적어도 하나를 만족시키는 상기 얼굴정보 및 상기 제스쳐정보가 상기 정보 데이터베이스에 있는 경우 출입 가능하도록 하는 제1 설정, 인식된 얼굴과 인식된 제스쳐를 모두 만족시키는 상기 얼굴정보 및 상기 제스쳐정보가 정보 데이터베이스에 있는 경우 출입 가능하도록 하는 제2 설정, 상기 인식된 얼굴이 정보 데이터베이스의 얼굴정보를 만족시키는 경우 출입 가능하도록 설정하는 제3 설정 및 인식된 제스쳐가 정보 데이터베이스의 제스쳐정보와 일치하는 경우 출입 가능하도록 설정하는 제4 설정으로 구성되며 각각의 객체 별로 제1 설정 내지 제4 설정 중 하나를 선택하여 설정하도록 구성되는 안면인식과 제스쳐를 이용한 출입 제어 방법.
  7. 제6항에 있어서, 객체가 상기 제1 설정으로 설정된 경우
    출입제어부가 카메라를 통해 얼굴을 촬영하고 영상처리부를 통해 획득한 인식된 얼굴을 정보 데이터베이스에 저장된 얼굴정보와 비교하는 제1 비교단계;
    출입제어부가 비교결과 일정 오차 범위 내에서 인식된 얼굴이 얼굴정보와 일치하는 지의 여부를 판단하는 제1 판단단계;
    출입제어부가 상기 제1 판단단계에서의 판단결과 인식된 얼굴이 얼굴정보와 일치하는 경우 출입 가능하도록 문을 개방하도록 설정하는 개방단계;
    상기 제1 판단단계에서의 판단결과 인식된 얼굴과 얼굴정보가 정보 데이터베이스의 얼굴정보와 불일치하는 경우 객체의 제스쳐를 입력받는 단계;
    출입제어부가 인식된 제스쳐와 정보 데이터베이스에 저장된 제스쳐정보를 비교하는 제2 비교단계;
    출입제어부가 인식된 제스쳐와 제스쳐정보가 일정 오차 범위 내에서 일치하는 지의 여부를 판단하는 제2 판단단계;
    상기 제2 판단단계에서 판단하여 인식된 제스쳐와 제스쳐정보가 일치하는 경우 문을 개방하는 개방단계로 진행하고,
    출입제어부가 해당 얼굴정보 또는 제스쳐정보에 대응하는 객체의 출입을 정보 데이터베이스의 출입정보에 기록되도록 하는 단계; 및
    상기 제2 판단단계에서 판단하여 인식된 제스쳐와 제스쳐정보가 일치하지 않는 경우 출입제어부가 문을 폐쇄 상태로 유지하여 출입 불가능하도록 설정하는 단계를 포함하는 안면인식과 제스쳐를 이용한 출입 제어 방법.
  8. 제6항에 있어서,
    해당 영역에 출입하는 객체가 상기 제2 설정으로 설정된 경우,
    출입제어부가 영상처리부를 통해 얼굴을 인식하여 인식된 얼굴과 정보 데이터베이스의 얼굴정보를 비교하는 제3 비교단계;
    출입제어부가 비교결과 일정 오차 범위 내에서 인식된 얼굴이 일정 오차 범위 내에서 얼굴정보와 일치하는 지의 여부를 판단하는 제3 판단단계;
    상기 제3 판단단계에서의 판단결과 인식된 얼굴과 얼굴정보가 정보 데이터베이스의 얼굴정보와 일치하는 경우 객체의 제스쳐를 입력받는 단계;
    출입제어부가 인식된 제스쳐와 정보 데이터베이스에 저장된 제스쳐정보를 비교하는 제4 비교단계;
    출입제어부가 인식된 제스쳐와 제스쳐정보가 일정 오차 범위 내에서 일치하는 지의 여부를 판단하는 제4 판단단계;
    상기 제4 판단단계에서 판단하여 인식된 제스쳐와 제스쳐정보가 일치하는 경우 출입제어부는 객체가 출입 가능하도록 문을 개방시키는 단계; 및
    출입제어부는 해당 얼굴정보 및 제스쳐정보에 대응하는 객체의 출입을 정보 데이터베이스의 출입정보에 기록되도록 하는 단계를 포함하는 안면인식과 제스쳐를 이용한 출입 제어 방법.
KR1020220017277A 2022-02-10 2022-02-10 안면인식과 제스쳐를 이용한 출입 제어 시스템 및 방법 KR20230120715A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020220017277A KR20230120715A (ko) 2022-02-10 2022-02-10 안면인식과 제스쳐를 이용한 출입 제어 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020220017277A KR20230120715A (ko) 2022-02-10 2022-02-10 안면인식과 제스쳐를 이용한 출입 제어 시스템 및 방법

Publications (1)

Publication Number Publication Date
KR20230120715A true KR20230120715A (ko) 2023-08-17

Family

ID=87800520

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020220017277A KR20230120715A (ko) 2022-02-10 2022-02-10 안면인식과 제스쳐를 이용한 출입 제어 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR20230120715A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102658852B1 (ko) * 2023-10-31 2024-04-19 주식회사 베스트디지탈 안면 인식 기반 출입 관리 시스템
KR102663258B1 (ko) * 2023-12-04 2024-05-03 김명기 안면과 행동 인식을 이용한 출입 및 위치 관리 시스템 및 방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101595413B1 (ko) 2015-09-21 2016-02-18 주식회사 크리에이티브넷 계층적 관리자 승인 구조형 ict 융합기술 기반 출입통제 시스템 및 방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101595413B1 (ko) 2015-09-21 2016-02-18 주식회사 크리에이티브넷 계층적 관리자 승인 구조형 ict 융합기술 기반 출입통제 시스템 및 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102658852B1 (ko) * 2023-10-31 2024-04-19 주식회사 베스트디지탈 안면 인식 기반 출입 관리 시스템
KR102663258B1 (ko) * 2023-12-04 2024-05-03 김명기 안면과 행동 인식을 이용한 출입 및 위치 관리 시스템 및 방법

Similar Documents

Publication Publication Date Title
US10430645B2 (en) Facial recognition operations based on pose
US10503992B2 (en) Process for updating templates used in facial recognition
CN110889320B (zh) 眼周面部识别切换
US11693937B2 (en) Automatic retries for facial recognition
US10719692B2 (en) Vein matching for difficult biometric authentication cases
Phillips et al. An introduction evaluating biometric systems
EP0956818B1 (en) System and method of biometric smart card user authentication
KR101051365B1 (ko) 카메라를 구비한 출입관리장치 및 그 출입관리방법
JP4760049B2 (ja) 顔認証装置、その顔認証方法、その顔認証装置を組み込んだ電子機器およびその顔認証プログラムを記録した記録媒体
KR20230120715A (ko) 안면인식과 제스쳐를 이용한 출입 제어 시스템 및 방법
US10769415B1 (en) Detection of identity changes during facial recognition enrollment process
US20080122577A1 (en) System and Method for Selectively Activating Biometric Sensors
US10970953B2 (en) Face authentication based smart access control system
US20240086513A1 (en) Adjusting biometric detection thresholds based on recorded behavior
US20230139161A1 (en) Systems and methods for verifying user activity using behavioral models
EP3785166A1 (en) Multiple enrollments in facial recognition
AU2020100218A4 (en) Process for updating templates used in facial recognition
Srivastava et al. Continuous multi-biometric user authentication fusion of face recognition and keystoke dynamics
KR100882281B1 (ko) 생체인식장치의 사용자 인증 방법
JP2004078686A (ja) 個人認証装置、個人認証方法、通行制御装置および通行制御方法
KR20070019363A (ko) 타인수락율을 감소시키기 위한 생체정보 인증방법
Rila Denial of access in biometrics-based authentication systems
WO2023145059A1 (ja) 入場管理装置、入場管理方法およびプログラム記憶媒体
JP2008071179A (ja) 顔照合装置、通行制御装置、顔照合方法、および、通行制御方法
KR20230064159A (ko) 지문 데이터를 병렬 처리하는 지문 인식 장치 및 방법

Legal Events

Date Code Title Description
AMND Amendment
X091 Application refused [patent]
AMND Amendment
X601 Decision of rejection after re-examination