KR20050005334A - 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템및 방법 - Google Patents

자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템및 방법 Download PDF

Info

Publication number
KR20050005334A
KR20050005334A KR1020030044384A KR20030044384A KR20050005334A KR 20050005334 A KR20050005334 A KR 20050005334A KR 1020030044384 A KR1020030044384 A KR 1020030044384A KR 20030044384 A KR20030044384 A KR 20030044384A KR 20050005334 A KR20050005334 A KR 20050005334A
Authority
KR
South Korea
Prior art keywords
image
face
front face
face image
automatic
Prior art date
Application number
KR1020030044384A
Other languages
English (en)
Other versions
KR100564372B1 (ko
Inventor
정욱진
Original Assignee
정욱진
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 정욱진 filed Critical 정욱진
Priority to KR1020030044384A priority Critical patent/KR100564372B1/ko
Publication of KR20050005334A publication Critical patent/KR20050005334A/ko
Application granted granted Critical
Publication of KR100564372B1 publication Critical patent/KR100564372B1/ko

Links

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07FCOIN-FREED OR LIKE APPARATUS
    • G07F19/00Complete banking systems; Coded card-freed arrangements adapted for dispensing or receiving monies or the like and posting such transactions to existing accounts, e.g. automatic teller machines
    • G07F19/20Automatic teller machines [ATMs]
    • G07F19/207Surveillance aspects at ATMs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2347Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving video stream encryption
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4385Multiplex stream processing, e.g. multiplex stream decrypting
    • H04N21/43853Multiplex stream processing, e.g. multiplex stream decrypting involving multiplex stream decryption
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Collating Specific Patterns (AREA)
  • Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)

Abstract

본 발명은 카드리더, 터치모니터, 자동현금인출기컴퓨터등의 외부장치를 구비한 자동현금인출기에 적용되어 자동현금인출기를 사용하는 사용자의 신원을 확인하기 위한 자동촬영 카메라 시스템에 있어서, 상기 사용자의 얼굴영상을 촬영하는 카메라, 상기 카메라로부터 얼굴영상을 수신하여 입력된 영상이 정면 얼굴영상인지 판단하고 정면얼굴영상을 획득했는지 여부에 대한 출력 신호를 생성하고 얼굴영상 및 얼굴암호를 생성하기 위한 고유의 암호패턴을 저장하는 컴퓨터 및 상기 컴퓨터로부터 상기 출력 신호를 받아 상기 외부장치와의 연결을 단속시키는 스위치를 포함하는 클라이언트 단말기와 상기 클라이언트 단말기의 고유 정보 및 이에 해당하는 암호패턴을 저장하고 있는 관리서버를 포함하는 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템에 관한 것이다. 본 발명은 자동현금인출기와 기능적으로 분리되어 안정되고 암호화과정을 통해 사용자의 정보를 보호하는 효과가 있다.

Description

자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템 및 방법 {System and method for automatically taking a human face front-view photograph}
본 발명은 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템 및 그 방법에 관한 것으로, 특히 자동현금인출기(ATM 또는 CD) 전면에 부착된 카메라로부터 사용자의 얼굴 영상이 입력되면 입력된 영상이 정면얼굴 영상인지 판단하고 상기 판단결과에 의해 자동현금인출기의 사용을 제어하는 한편, 정면얼굴로 판단된 영상에 대해 암호화과정을 실시함으로써 사용자의 생체정보를 보호할 수 있는 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템 및 그 방법에 관한 것이다.
종래 자동현금인출기를 이용한 범죄를 예방하기 위한 방안으로, 사용자 본인 카드가 분실 또는 도난되었을 경우에 1차적으로 비밀번호에 의해 부정사용을 방지하는 방법 또는 자동현금인출기가 설치된 장소에 카메라자동녹화(DVR)장치를 설치하여 현금을 인출하는 사람의 기록을 남겨 이후에 이를 확인할 수 있도록 하는 방법이 사용되었다.
그러나 비밀번호를 통한 부정사용 방지는 범죄에 노출되어 비밀번호가 알려진 경우에 범죄를 방지하는 역할을 할 수 없으며, 범인이 현금을 인출할 때 헬멧을 착용하거나 마스크를 착용하거나 짙은 안경을 착용하여 얼굴의 일부를 가리는 경우라면 종래의 카메라자동녹화(DVR)장치로는 현금을 인출하는 사람의 신원을 확인하기 어렵다.
또한 상기 방법들은 사용자 본인이 카드로 현금을 인출하고도 현금이 나오지 않았다고 행위를 부인하는 경우에 해결책으로도 미흡하며, 현금인출기의 사용자 기록을 남길 수 있는 수단이 없어 범인 검거에도 어려움을 겪게 된다.
따라서 이상의 문제점을 극복하기 위하여 자동현금인출기에 카메라를 이용한 사용자 식별시스템을 설치하고자 하는 시도가 있었다. 구체적으로, 최근 신용카드의 형태가 마그네틱 테이프의 정보를 판독하는 기존의 방식과 달리 신용카드 내부에 반도체 칩을 내장한 스마트 카드가 일반적으로 사용되므로 이러한 스마트카드 내부에 개인 생체정보를 저장하여 신용카드 본인의 인증수단으로 활용하려는 시도또는 자동현금인출기에 지문인식 시스템을 추가하여 신용카드 이외에 사용자 본인인증을 위한 수단으로 사용하려는 시도, 자동현금인출기에 카메라를 이용한 사용자식별시스템을 설치하고자 하는 시도가 그 예이다.
그러나 상기 자동현금인출기에 카메라를 이용한 사용자 식별시스템을 설치하고자 하는 시도는 현금인출기와의 시스템 결합이 복잡하고, 사용자의 얼굴을 이용하여 본인의 신원을 확인하는 얼굴인식 시스템을 적용하는 경우 생체인식률이 100%에 이르지 못하여 사용상의 불편함을 초래할 수 있다는 문제점이 있었다.
이러한 문제는 지문인식의 경우에도 동일하게 나타나며, 특히 얼굴인식의 경우는 조명변화 또는 포즈변화, 얼굴크기의 원근효과에 의해 지문인식보다 정확성이 많이 떨어진다는 것이 알려진 사실이다.
그러나, 최근 컴퓨터공학 발전에 의해 얼굴인식의 경우 다양한 조명환경 아래에서 단순히 얼굴의 눈을 찾거나 정면얼굴인가를 판별하는 정도의 패턴인식 기술은 거의 100%에 이를 만큼 기술적 완성도가 높고 연산량도 얼굴인식 기술에 비해 상대적으로 작다. 다만 동영상으로 사용자의 신원에 대한 기록을 저장하는 경우, 데이터량의 크기가 방대하여 자동현금인출기의 수가 많을수록 관리상의 문제점이 발생할 수 있다.
이러한 문제점을 극복하기 위하여 정지영상을 녹화하려는 시도가 있었는데, 이 경우에는 동영상과는 달리 정지영상은 동영상보다 쉽게 위조 변조할 수 있는 데이터특성을 가지고 있어서 보안상의 심각한 취약성을 포함하게 된다. 이와 같은 점은 사용자의 얼굴이 개인의 생체특성을 담고 있어서 개인정보보호 측면에서 심각한 문제점이 될 수 있다.
특히, 사용자 신원을 확인할 수 있는 얼굴영상정보를 인터넷의 TCP/IP 통신프로토콜을 이용하여 송수신하는 경우 보안성은 더욱 취약해지게 되며, 해킹등에 노출되는 경우 사용자 신원인증용 얼굴영상의 신뢰도를 크게 훼손하여 시스템이 달성하고자 하는 본래의 목적을 달성하지 못할 수도 있는 문제점이 있다.
본 발명의 목적은 상기 문제점을 해결하기 위하여 이루어진 것으로, 자동현금인출기 전면에 부착된 카메라로부터 사용자의 얼굴 영상이 입력되면 입력된 영상이 정면얼굴 영상인지 판단하고 상기 판단결과에 의해 자동현금인출기의 사용을 제어하게 함으로써 자동현금인출기와 독립되어 안정된 구조를 갖는 자동현금인출기를 위한 정면얼굴 자동촬영 시스템 및 그 방법을 제공하는데 있다.
또한 본 발명의 다른 목적은 정면얼굴로 판단된 영상에 대해서는 암호화과정을 실시한 후 영상을 저장 또는 전송함으로써 사용자의 정보를 보호하는 자동현금인출기를 위한 정면얼굴 자동촬영 시스템 및 그 방법을 제공하는데 있다.
도 1a는 본 발명의 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템의 구성도
도 1b는 본 발명의 다른 실시예로서 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템의 구성도
도 2는 본 발명이 적용된 자동현금인출기의 구성도
도 3은 자동현금인출기와 연동되는 정면얼굴 자동촬영 방법의 순서도
도 4는 임의의 이미지 영상에서 정면얼굴을 찾기 위한 순서도
도 5는 정면얼굴로 판단된 얼굴영상의 암호화 및 복호화 과정의 순서도
도 6은 정면얼굴 영상의 저장 및 전송시 데이터 구조도
도 7a는 정면얼굴이 포함된 영상이미지
도 7b는 암호패턴의 개략도
도 8은 암호패턴 위치점들을 이용해 얼굴암호를 생성하는 방법의 순서도
도 9는 얼굴암호 인증을 위한 서버 시스템의 열쇠 구조도
도 10은 본 발명의 네트워크 연결에 의한 중앙관제 모형을 나타낸 개략도
도 11a는 사용자 정면얼굴 영상의 뒤섞기 처리 전의 얼굴 영상
도 11b는 얼굴 영상 일부를 뒤섞기 처리한 후의 얼굴 영상
도 11c는 정면얼굴 영상의 데이터의 헤더 부분을 변조한 경우를 도시한 것
<도면의 주요 부분에 대한 부호의 설명>
10: 카메라 20: 컴퓨터
21: 지능형카메라 22: 입출력부
23: 이미지센서 24: 중앙처리부
25: 이미지신호처리부 26: 저장부
28: 통신부 29: 외부저장부
30: 스위치 42: 카드리더
44: 터치모니터 46: 자동현금인출기컴퓨터
상기 목적을 달성하기 위한 본 발명에 의한 자동현금인출기를 위한 정면얼굴 자동촬영 시스템은 카드리더, 터치모니터, 자동현금인출기컴퓨터등의 외부장치를 구비한 자동현금인출기에 적용되어 자동현금인출기를 사용하는 사용자의 신원을 확인하기 위한 자동촬영 카메라 시스템에 있어서, 상기 사용자의 얼굴영상을 촬영하는 카메라, 상기 카메라로부터 얼굴영상을 수신하여 입력된 영상이 정면 얼굴영상인지 판단하고 정면얼굴영상을 획득했는지 여부에 대한 출력 신호를 생성하고 고유의 암호패턴을 저장하는 컴퓨터 및 상기 컴퓨터로부터 상기 출력 신호를 받아 상기 외부장치와의 연결을 단속시키는 스위치를 포함하는 클라이언트 단말기와; 상기 클라이언트 단말기의 고유 정보 및 이에 해당하는 암호패턴을 저장하고 있는 관리서버를 포함하는 것을 특징으로 한다.
그리고 상기 관리서버는 상기 고유 정보 및 상기 암호 패턴을 데이터베이스(DB)에 저장하는 것을 특징으로 하며, 상기 카메라는 고체촬상소자 또는 상보형 전계효과소자 이미지 센서로 제작된 것을 특징으로 할 수 있다.
또한 본 발명은 카드리더, 터치모니터, 자동현금인출기컴퓨터등의 외부장치를 구비한 자동현금인출기에 적용되어 자동현금인출기를 사용하는 사용자의 신원을 확인하기 위한 자동촬영 카메라 시스템에 있어서, 사용자의 얼굴영상을 촬영하고 촬영한 영상이 정면얼굴영상인지 판단하고 정면얼굴영상을 획득했는지 여부에 대한 출력 신호를 생성하는 지능형카메라, 상기 지능형카메라로부터 상기 출력 신호를 받아 상기 외부장치와의 연결을 단속시키는 스위치를 포함할 수 있다.
이 때, 상기 지능형카메라는 사용자의 이미지를 감지하는 이미지 센서와 상기 이미지 센서가 감지한 사용자의 이미지를 전송하는 이미지신호처리부를 더 포함하는 것을 특징으로 할 수 있다.
또한 상기 컴퓨터 또는 상기 지능형 카메라는 상기 외부장치와 전기적 신호를 송수신하는 입출력부, 상기 카메라 또는 상기 이미지신호처리부로부터 전송되는 얼굴 영상이 정면 얼굴 영상인가를 판단하는 중앙처리부, 상기 고유 정보 및 상기 얼굴 영상을 저장하는 저장부, 상기 저장부에 저장된 얼굴영상 및 상기 고유 정보를 네트워크를 통하여 송수신하기 위한 통신부를 포함하는 것을 특징으로할 수 있다.
상기 저장부는 EEPROM, 불휘발성 메모리, 휘발성 메모리 또는 하드 디스크이며 상기 중앙처리부는 입력된 얼굴 영상에서 눈을 찾고 양쪽 눈으로 추정되는 두 개의 영상영역을 영상의 크기 및 눈 대상 영역의 위치 등을 고려해 정규화하여 선택된 영상에 대해 정규화하고 눈 및 입부분에 대하여 마스킹 및 프로젝션하여 주파수 특성을 분석하는 영상처리를 한다.
또한 상기 중앙 처리부는 정면얼굴 영상인가를 판단하여 판단 결과, 정면얼굴 영상인 경우에는 상기 스위치가 연결상태로 동작하도록 하는 신호를 출력하고,
상기 판단결과 정면얼굴 영상이 아닌 경우에는 상기 스위치가 차단상태로 동작하도록 하는 신호를 출력하며, 정면얼굴 영상을 획득할 때까지 수신된 입력영상 중 다른 한 장을 대상으로 상기 영상처리 및 정면얼굴 영상인가의 판단을 반복 수행하는 것을 특징으로 한다.
또한 상기 중앙처리부는 정면얼굴 영상으로 판단된 영상을 상기 암호패턴을 사용하여 얼굴암호를 생성하여 얼굴영상파일을 만드는 과정과 얼굴영상 이미지 각각의 화소에 해당하는 정보를 뒤섞기(Scramble) 처리하는 암호화과정을 포함하는 것을 특징으로 한다. 그리고 상기 얼굴영상파일은 헤더부분, 데이터부분, 정보부분으로 구성되며 상기 정보부분에는 얼굴암호, 영상채집시간, 영상을 획득한 클라이언트 시스템의 고유 번호가 포함되는 것을 특징으로 한다.
또한 상기 암호패턴은 보안 인증을 목적으로 관리자들의 사전 약속에 의해 정의되고 저장부에 저장되며, 정의된 암호패턴은 상기 중앙처리부에서 얼굴암호 생성 엔진 소프트웨어 내부에서 작용하여 얼굴암호를 생성하는 것을 특징으로 한다.
또한 상기 중앙처리부는 양쪽 눈과 상기 암호패턴의 닮은꼴 변형에 의한 매칭에 의해 얻어지는 2개 이상의 위치점 값들을 이용하여 약속된 일방향 함수에 의한 수학적 연산을 수행한 값으로 얼굴암호를 생성하는 것을 특징으로 한다.
또한 본 발명은 상기 통신부와 네트워크를 통하여 연결되고, 상기 통신부로부터 상기 고유 정보가 포함된 얼굴영상파일을 전송받고, 상기 고유 정보에 해당하는 암호패턴을 상기 DB로부터 검색하여 복호화하는 관리서버를 더 포함하여 구성되는 것을 특징으로 할 수 있다.
한편 상기 얼굴영상파일에서 뒤섞기(scramble)처리된 영상을 원래의 영상으로 환원 처리하는 소프트웨어로 영상을 복원시켜 정면얼굴 영상만을 추출하여 상기 추출된 정면얼굴 영상으로부터 얼굴 암호를 생성하여 암호화 과정에서 생성된 얼굴암호와 비교하여 얼굴 영상의 위·변조 여부를 판단하는 것을 특징으로 할 수 있으며, 상기 복호화 과정에서의 얼굴 암호 생성 방법은 양쪽 눈과 암호패턴의 닮은꼴 변형에 의한 매칭에 의해 얻어지는 2개 이상의 위치점 값들을 이용하여 약속된 일방향 함수에 의한 수학적 연산을 수행한 값으로 얼굴 암호를 생성하는 것을 특징으로 할 수 있다.
또한 본 발명은 카드리더, 터치모니터, 자동현금인출기컴퓨터등의 외부장치를 구비한 자동현금인출기와 연동되는 클라이언트 단말기로서 상기 자동현금인출기를 사용하는 사용자의 신원을 확인하기 위한 자동촬영 방법에 있어서, (a)상기 카드리더로부터 카드의 입력 신호를 전달받는 단계, (b)상기 사용자의 얼굴 영상을실시간으로 입력하는 단계, (c)입력된 영상을 처리하는 영상 처리 단계, (d)처리된 영상이 정면얼굴 영상인가를 판단하는 단계 및 (e)정면얼굴 영상을 획득했는지 여부에 의해 상기 외부장치와의 연결을 단속하는 단계를 포함한다.
상기 (c)단계는 입력된 영상을 캡처하여 사람의 정면얼굴을 구분할 수 있는 패턴인식 알고리즘으로 구현된 소프트웨어 엔진을 구동하여 영상을 처리하는 단계로서, (c1)입력된 영상에서 눈을 찾는 단계, (c2)양쪽 눈으로 추정되는 두개의 영상영역을 영상의 크기 및 눈 대상영역의 위치등을 고려해 정규화하는 단계, (c3)선택된 영상에 대하여 눈 및 입의 영역에 대한 마스킹 및 프로젝션을 실시하는 단계를 포함하는 것을 특징으로 한다.
또한 상기 (e)단계는 정면얼굴영상을 획득한 경우에는 상기 스위치가 연결상태로 동작하도록 하고, 정면얼굴영상을 획득하지 않은 경우에는 상기 스위치가 차단상태로 동작하게 하며, 이 경우 정면얼굴 영상을 획득할 때까지 (b),(c),(d)단계를 반복하는 것을 특징으로 한다.
그리고 본 발명은 정면얼굴영상으로 판단된 영상에 대해서는 (f)얼굴 암호를 생성하는 단계, (g)상기 얼굴 암호 및 얼굴 영상등의 정보를 포함하는 얼굴영상파일을 생성하는 단계, (h)상기 얼굴영상파일에 대하여 이미지 각각의 화소에 해당하는 정보를 뒤섞기(scramble) 처리하는 단계, (i)상기 얼굴영상파일을 저장 또는 전송하는 단계를 포함하는 것을 특징으로 한다.
그리고 상기 얼굴영상파일은 헤더부분, 영상의 내용에 해당하는 데이터부분, 얼굴암호, 영상채집시간, 영상을 획득한 클라이언트 시스템의 고유 번호가 포함되는 정보부분을 포함하는 것을 특징으로 할 수 있다.
상기 (f)단계는 (f1)정면얼굴 영상에서 눈을 찾는 단계, (f2)상기 (c1)단계에서 패턴인식기술로 찾아진 눈의 대상영역중에서 양쪽 눈을 기준점으로 하여 기준점과 약속된 고유 암호패턴을 매칭하는 단계, (f3)상기 기준점에 대한 상기 암호패턴의 꼭지점 위치를 추출하는 단계, (f4)상기 추출된 꼭지점에 대한 영상이미지 좌표값을 추출하는 단계, (f5)한개 이상의 영상이미지 좌표값과 기준점에 대한 이미지 좌표값을 이용하여 얼굴 암호를 생성하는 단계를 포함하는 것을 특징으로 할 수 있다. 이 때 상기 암호패턴은 암호생성을 위한 소프트웨어에 포함된다.
한편, 상기 (i)단계는 상기 클라이언트 단말기의 고유 정보 및 이에 해당하는 암호패턴을 데이터베이스(DB)에 저장하고 있는 관리서버에 상기 얼굴영상파일을 전송하는 것을 특징으로 하며 상기 관리서버는 (j)상기 얼굴영상파일을 수신하는 단계, (k)상기 고유 정보에 해당하는 암호패턴을 상기 데이터베이스로부터 검색하여 복호화하는 단계를 더 포함하는 것을 특징으로 할 수 있다.
또한 상기 (k)단계는 (k1)상기 (h)단계에서 뒤섞기(scramble) 처리된 영상을 원래의 영상으로 환원하는 소프트웨어로 영상을 복원하는 디코딩 단계, (k2)복원된 정면얼굴 영상만을 추출하는 단계, (k3)추출된 정면얼굴 영상에 대한 얼굴암호를 생성하는 단계, (k4)상기 얼굴영상파일 내에 포함된 얼굴암호와 상기 (k3)단계에서 생성된 얼굴암호를 비교하여 전송된 얼굴 영상의 위·변조 여부를 판단하는 단계를 더 포함하는 것을 특징으로 할 수 있다.
그리고 상기 (k3)단계는 (k31)정면얼굴 영상에서 눈을 찾는 단계, (k32)찾아진 눈의 대상영역 중에서 임의의 양쪽 눈을 기준점으로 하여 두 개의 기준점들과 미리 약속된 형태의 암호패턴을 매칭하는 단계, (k33)상기 기준점들에 대한 암호패턴 꼭지점 위치를 추출하는 단계, (k34)상기 추출된 꼭지점에 대한 영상이미지 좌표값을 추출하는 단계, (k35)한개 이상의 영상이미지 좌표값과 기준점에 대한 이미지 좌표값을 이용하여 얼굴암호를 생성하는 단계를 포함하여 구성되는 것을 특징으로 할 수 있다.
이하, 첨부도면을 참조하여 본 발명의 실시예에 대해 상세히 설명하기로 한다.
도 1a는 본 발명의 일실시예로서 자동현금지급기를 위한 정면얼굴 자동촬영 카메라 시스템의 구성도를 도시한 것이다.
도 1a을 참고하면, 상기 컴퓨터(20)는 입출력부(22), 중앙처리부(24), 저장부 (26), 통신부(28)를 포함하여 구성된다.
상기 입출력부(22)는 외부장치로부터 전기적 신호를 송수신하는 역할을 하고 상기 중앙처리부(24)는 카메라(10)로부터 전송되는 이미지 영상처리과정을 포함하여 그 밖에 모든 연산처리를 수행한다.
또한 상기 저장부(26)에는 컴퓨터(20)의 고유정보를 포함하는 내용이 저장되는 곳으로, EEPROM, 불휘발성 메모리, 휘발성 메모리, 하드 디스크등 다양한 저장장치로 실시될 수 있다. 상기 저장부(26)는 상기 컴퓨터(20) 내부에 포함되어 많은 양의 정보를 저장할 수 있는 수단을 제공한다.
또한 상기 통신부(28)는 네트워크에 접속하는 역할을 한다. 상기 통신부(28)는 TCP/IP, PSTN, LAN, WAN 등의 어플리케이션을 통해 네트워크에 접속되어 데이터를 송수신할 수 있게 한다.
한편 상기 스위치(30)는 외부 장치들간의 소신호 전달을 제어할 목적으로 컴퓨터(20)와 상호 작용하여 외부 장치를 차단 또는 연결하는 역할을 한다. 카드리더(42), 터치모니터(44), 자동현금인출기컴퓨터(46)가 외부장치로서 설치되고, 외부장치들 사이에 위치한 스위치(30)를 통해 외부장치가 컴퓨터(20)에 연결되었다고 할 때, 카드리더(42)에 카드가 입력되면 카드리더(42)는 컴퓨터(20)의 입출력부(22)로 시작신호를 보낸다.
그러면 상기 입출력부(22)는 시작신호를 중앙처리부(24)에 전송하고 중앙처리부(24)는 시작신호에 해당하는 출력신호를 출력한다. 이 때 스위치(30)는 입출력부(22)에서 또 다른 외부 장치인 터치모니터(44) 또는 자동현금인출기컴퓨터(46) 사이의 소신호 전달을 제어하는 출력신호("1" 또는 "0")를 중앙처리부(24)로부터 전달받아 자동현금지급기 사용자의 입력신호를 차단하거나 연결한다.
도 1b는 본 발명의 다른 실시예로서 자동현금지급기를 위한 정면얼굴 자동촬영 카메라 시스템의 또 다른 구성도이다.
도 1b를 참고하면 본 발명의 정면얼굴 자동촬영 카메라 시스템은 카메라(10)와 컴퓨터(20)를 하나의 제품으로 구성한 지능형 카메라시스템(21)과, 스위치(30)를 포함하여 이루어진다. 그리고 이 때 상기 카메라시스템(21)은 이미지 센서(23)와 이미지 센서의 신호를 처리할 수 있는 이미지신호처리부(25)를 추가적으로 포함한다.
또한 본 발명의 정면얼굴 자동촬영 카메라 시스템은 카메라시스템(21) 내부 뿐만 아니라 외부에 별도의 외부저장부(29)를 포함하여 구성될 수 있다. 이 때, 상기 외부저장부(29)는 다양한 형태의 저장장치들을 수용할 수 있다. 이 밖에 도 1b에 도시된 본 발명의 정면얼굴 자동촬영 카메라 시스템의 작동원리는 도 1a과 동일하다.
도 2는 본 발명이 적용된 자동현금인출기의 구성도를 나타낸 것이다.
도 2를 참고하면 상기 자동현금인출기는 카메라(10), 컴퓨터(20), 스위치(30)을 포함하여 구성된 본 발명 시스템이 카드리더(42), 터치모니터(44), 자동현금인출기컴퓨터(46), 터치패널(48)로 구성된 일반적인 자동현금인출기에 적용되어 하나의 전체적인 시스템으로 구현된다.
본 발명의 컴퓨터(20)는 카드리더(42)로부터 사용자(고객)의 자동현금인출기 사용 개시시점을 전달받고 카메라(10)로부터 촬영된 사용자 얼굴영상을 전송받은 후 컴퓨터(20)에서의 정면얼굴에 대한 판단을 실시한 다음 판단 결과에 따라 스위치(30)의 동작상태(개폐상태)를 변경하는 구조를 하고 있다.
도 3은 자동현금지급기와 연동되는 정면얼굴 자동촬영 카메라의 동작순서를 설명한 순서도이다.
본 발명에서는 신용카드 입력단계(S210)와 거래선택단계(S260) 사이에서 전기적인 신호의 전달통로에 단순히 소신호전달을 개폐할 목적으로 스위치를 설치하고, 스위치의 작동시기와 작동결과(개폐상태)를 전기적 신호(예를 들면 "1" 또는"0")로 제어하는 방법으로 자동현금인출기의 사용을 제어한다.
도 3에 도시된 바와 같이, 사용자(고객)가 자동현금인출기에 카드를 삽입하면(S210) 자동현금지급기는 정상적으로 작동을 시작한다. 그리고 카드가 입력되었다는 신호가 본 발명의 입출력부(22)로 전송되면 중앙처리부(24)에서는 시작신호 를 발생하고 중앙처리부(24)로부터의 제어신호에 의해 스위치(30)는 차단상태로 전환된다. 그리고 추가적인 해제신호가 입력되지 않으면 현재의 상태를 계속 유지하도록 한다.
소신호제어용 스위치상태의 "예"(또는 연결상태)가 출력되기 위한 과정을 이하 상세히 설명한다.
카메라(10)로부터 계속적으로 외부 영상신호가 컴퓨터(20)로 입력되는 상태에서 시작신호에 의해 캡쳐된 하나의 영상 신호처리를 위하여 입력하는 단계(S220)를 실시하고 사람의 정면얼굴을 구분할 수 있는 패턴인식(얼굴인식) 알고리즘으로 구현된 소프트웨어 엔진을 구동하여 입력영상을 신호처리하는 단계(S230)를 실시하며, 다음으로 정면얼굴 영상인가를 판단한다(S240).
판단 결과, 정면얼굴 영상이 아닌 경우(S240의 "아니오")에는 카메라로부터 실시간으로 입력되는 영상들 중 다른 한 장을 선택하기 위해 얼굴영상 입력단계(S220)를 재실시하고 그 후 영상신호 처리단계(S230), 정면얼굴영상 판단단계(S240)를 반복적으로 실시한다. 그리고 판단 결과, 정면얼굴 영상인 경우(S240의 "예")에는 스위치(30)를 연결시키는 제어신호를 출력(S250)한 후 사용자가 이후 사용하고자 하는 거래 종류를 선택(S260)할 수 있게 한다.
이후 현금인출기의 동작 순서는 종래 현금인출기를 사용하는 경우와 동일하다. 즉, 거래선택 단계(S260)를 거쳐 현금인출 금액 및 패스워드를 입력하고 현금을 인출하는 거래단계(S270)로 일련의 과정을 종료하게 된다. 한편, 이와 독립적으로 본 발명에서는 정면얼굴영상으로 판단된 영상의 암호화단계(S300)를 실시한다. 또한 본 발명에서 정면얼굴영상으로 판단된 영상을 저장하거나 인터넷을 이용해 전송할 필요가 있는 경우에는 저장 또는 전송하는 단계(S350)를 추가적으로 실시할 수 있다.
도 4는 임의의 이미지 영상에서 정면얼굴을 찾기 위한 순서도를 나타낸 것으로, 보다 상세하게는 도 3의 입력영상 신호처리 단계(S230)와 정면얼굴영상 판단 단계(S240)를 다시 상세히 설명하기 위한 도면이다.
카메라로부터 연속적으로 입력되는 영상들 중에서 영상처리 시작신호와 함께 한 장의 영상이 캡쳐되면, 캡쳐된 입력영상에서 눈 찾기 단계(S232)를 실시한다. 이 때, 눈을 찾는 방법은 입력영상이 촬영되는 다양한 환경조건을 고려한 RGB 또는 YCbCr영상에서 Y영상을 중심으로 눈 대상영역에 해당하는 다수의 영상영역을 추출한 다음 눈과 눈썹 머리카락 등으로 상호 연관성을 추정하여 판단한다.
그리고나서, 다음 단계로 양쪽 눈으로 추정되는 두 개의 영상영역을 대상으로 128*128 픽셀 크기의 영상으로 정규화를 실시한다(S234), 정규화 과정에서는 영상의 크기 및 눈 대상영역의 위치 등을 고려한다.
또한 다음단계로 앞 단계의 영상에 대하여 눈 부분 및 입 부분 대상영역에대하여 마스킹 및 프로젝션을 실시하고 해당영역의 영상 주파수 성분에 대하여 분석하는 단계(S236)를 실시하며, 최종적으로 캡쳐된 정지영상에서 정상적인 정면얼굴이 존재하는지의 판단을 실시한다(S240). 정면얼굴이 존재하는지의 여부를 판단하는 단계에서는 상기 눈 찾는 단계에서의 눈의 위치를 다시 종합적으로 판단하고, 판단 결과 정면얼굴이 존재하지 않으면(S240의 "아니오") 카메라로부터 입력되는 다른 영상을 대상으로 동일한 영상처리 과정을 반복 실시한다.
상기의 얼굴판별 방식에서는 얼굴영상을 구성하고 있는 영상의 주파수 특성을 반영하여 판단하는 것으로 종래의 얼굴인식 기술에서 적용하는 특징점 추출방식과 아이젠페이스(eigenface) 방식을 이용하는 경우 등 여타의 얼굴인식 기술들과는 상당한 차이가 있다.
본 발명에서는 얼굴영상에서 양쪽 눈, 눈썹 그리고 머리카락을 이용하여 눈 대상영역을 설정한 후 눈과 입부위 영상의 주파수 특성을 분석하여 정면얼굴인가를 판단하는 방법에 의해 눈 또는 입의 부위가 썬그라스, 헬멧 또는 마스크를 착용한 얼굴을 구분하고 현금자동인출기 사용자의 사용 권한을 제어(S250의 스위치 제어)할 수 있는 수단을 제공하게 된다.
도 5는 정면얼굴로 판단된 얼굴영상의 암호화 및 복호화 순서를 나타내는 도면이다.
도 5를 참조하여 얼굴영상의 암호화 과정을 상세히 설명하면 획득된 정면얼굴 영상으로부터 도 4에서 정면얼굴을 찾기 위한 과정에서 판단된 양쪽 눈의 위치점을 기준점으로 사용하여 얼굴암호를 생성한다(S310). 이에 대해 보다 상세한 내용은 도 6과 도 7에서 다시 설명하기로 한다.
얼굴암호를 생성한 후, 다음 단계에서는 얼굴영상파일을 구성하는 단계를 실시한다. 이 때 얼굴형상파일은 이미지 영상의 압축형태 크기 등에 대한 정보를 갖는 헤더부분과, 영상의 이미지 내용에 해당하는 데이터부분과, 본 발명에서 보안 인증 목적으로 추가로 생성되어 포함되는 얼굴암호, 영상채집시간, 영상을 획득한 시스템의 고유 번호등의 정보를 포함한 정보부분으로 구성되며, 정보부분의 정보가 헤더부분에 포함될 수도 있는 새로운 이미지 파일형식으로 생성된다(S320).
도 6은 카메라장치의 사용자 정면얼굴 영상 저장 및 전송에서의 얼굴영상파일의 구조를 설명하기 위한 것이다.
도 6에 도시된 것과 같이, 상기 얼굴영상파일은 헤더부분(80)과, 이미지 내용에 해당하는 데이터부분(82)과, 본 발명에서 추가로 포함되는 정보부분(84)으로 파일 규격이 만들어진다. 상기 본 발명에서 새로이 추가된 정보부분에는 얼굴암호, 영상채집시간, 영상을 획득한 시스템의 고유번호등의 정보를 포함하여 본 발명의 용도와 목적을 구현하는데 적용한다.
특히, 도 6의 파일구조는 정면 얼굴 영상을 담은 이미지 정보와 얼굴로부터 영상처리과정을 이용하여 생성된 얼굴암호를 하나의 파일 규격으로 설정함으로써 얼굴영상과 얼굴암호가 상호 연관성을 갖는 경우에만 진본의 얼굴영상으로 판단하는 방법에 의해 얼굴영상의 보안성을 향상시킬 수 있는 새로운 수단을 제공한다.또한 상기 정보 부분의 얼굴암호, 시간, 카메라장치의 고유번호를 복합적으로 활용함으로써 네트워크를 통해 전송되는 얼굴영상의 위조 변조를 방지하고 검증하여 본 발명의 보안성을 높일 수 있다.
상술한 바와 같이 얼굴영상파일을 생성한 후 얼굴영상 이미지 각각의 화소에 해당하는 정보를 약속된 방식으로 뒤섞기(scramble) 처리하여 영상의 일부분 또는 전체를 식별할 수 없게 하는 얼굴영상 엔코딩 단계를 실시하고(S330), 암호화 과정이 종료된 얼굴영상에 대하여 상기 얼굴영상파일의 데이타부분과 동일한 규격으로 저장하거나 인터넷 또는 네트웍으로 전송하는 단계(S350)를 실시한다.
본 발명에서는 정면얼굴로 판단된 개인의 얼굴영상에 대한 진위 판별도구로 얼굴암호를 이용하는 한편, 개인정보를 허가되지 않은 사람이 눈으로 볼 수 없도록 뒤섞기 처리를 함으로써 사용자로 하여금 두 개의 수단을 전체적으로 또는 선별적으로 사용하는 방식에 의해 관리의 편의성을 도모하면서 보안의 효과를 향상시킬 수 있는 효과가 있다.
이하에서는 상기 암호화 과정으로 생성된 영상 파일을 복호화하는 과정을 상세히 설명하기로 한다.
먼저 뒤섞기(scramble) 처리된 영상을 다시 원래의 영상으로 환원(descramble) 처리하는 소프트웨어로 영상을 복원하는 얼굴영상 디코딩 단계(S410)를 실시한다.
또한 그 후, 복원된 영상 내에서 정면얼굴 영상만을 추출하는 단계(S420)와얼굴암호 생성단계(S430)를 순차적으로 실시하는데 이때 얼굴암호 생성에 사용되는 소프트웨어의 구성 및 특성은 암호화과정 및 도 3과 도 4에서 정면얼굴 영상인가를 판단하기 위해 사용한 소프트웨어 엔진 알고리즘과도 동일해야 한다.
그리고 다음 단계에서는 전송된 얼굴영상파일내에 포함된 얼굴암호와 복호화 과정중 정면얼굴 영상단계(S420) 및 얼굴암호생성 단계(S430)를 통하여 새로이 생성된 얼굴암호를 비교하여 전송된 얼굴영상의 진본 또는 위조 여부를 판별하는 단계(S440)를 실시하며, 판별 결과에 따라 원본 얼굴영상 단계(S450) 또는 위조,변조된 얼굴영상 단계(S455)로 진행한다.
도 7a 및 도 7b는 상기 단계에서 얼굴암호 생성 방법을 설명하기 위한 도면으로 도 7a는 정면얼굴(61)이 포함된 영상이미지(60), 도 7b는 암호패턴을 도시한 것이다.
도 7a의 영상이미지에서 얼굴암호를 생성하기 위해서는 도 7a의 양쪽 눈을 기준점(P1,P2)(62,63)으로 도 7b의 암호패턴을 이용하여 임의의 약속된 두 개의 위치점(C1,C2)(64,65)을 추출하면 된다. 상기 암호패턴은 장치 설치자 또는 본 발명 카메라를 관리하고자 하는 특정인에게만 공지되고 관리 가능하며, 사전에 약속된 형태로 암호패턴이 결정된다. 그리고 상기 암호패턴은 암호생성을 위한 소프트웨어 내부에 포함되어 작용한다.
도 7b의 암호패턴은 양쪽 눈을 삼각형의 두 꼭지점으로 하며 동시에 기준점(62,63)과 양쪽 눈사이의 거리를 기준선으로 작용하도록 하고 삼각형의 나머지 한 점의 위치에 대한 값을 삼각측량법에 근거하여 정의하며, 얼굴영상의 다양한 크기와 회전에 대하여 동일한 위치점을 도출할 수 있도록 상기 기준점과 기준선을 일치시키면서 암호패턴을 닮은꼴 변형한다.
도 8은 도 7a의 암호패턴 위치점들을 이용하여 얼굴암호를 생성하는 순서도를 도시한 것이다.
먼저, 입력된 정면 얼굴 영상으로부터 눈을 찾는 단계(S302)를 실시한다. 이 때 양쪽 눈을 찾는 단계에서는 패턴인식기술로 찾아진 눈의 대상 영역 중에서 임의의 한점(예를 들면 눈 대상 영역의 중심)을 눈으로 인식하고 기준점으로 사용할 수 있게 한다. 눈을 찾는 단계 이후 얼굴 내 기준점과 암호패턴을 매칭하는 단계(S304)를 실시하며 다음으로 암호패턴으로 추출되는 나머지 한 개의 꼭지점 위치를 추출한다(S306).
그리고 다음 단계로 추출된 꼭지점 위치에 대응하는 영상이미지 좌표값을 좌측 상단을 (0,0) 기준점으로 하는 이미지 좌표계에 근거하여 추출(S308)하며, 다음 단계에서 한 개 이상의 영상 이미지 좌표값과 기준점에 대한 이미지 좌표값을 이용하여 얼굴암호를 생성한다(S310).
보다 구체적으로 이 때 임의의 두 개 위치점(C1,C2)에 대한 좌표값을 사전에 약속된 일방향 함수로 연산하여 얻어지는 결과 값을 얼굴암호로 사용한다. 예를 들면 하나의 위치점(C1)과 또 다른 하나의 위치점(C2)에 해당하는 좌표값의 숫자들을 서로 곱한 결과 값을 얼굴암호로 사용하는 경우 암호 생성에 사용된 두 개의 위치점(C1,C2)의 좌표값이 임의의 값이므로 당연히 결과 값도 임의의 값으로 생성되며,단순한 곱셈과 같은 연산을 수행했음에도 연산된 결과 값으로는 두 개의 위치점(C1,C2) 값을 역으로 추정할 수 없는 장점이 있다. 따라서 상기 방법으로 생성되는 얼굴암호는 얼굴영상과는 다른 별도의 숫자 값이며 임의의 얼굴영상에 대하여 각각 생성되는 인증코드로서의 의미를 갖는다.
또한 임의의 얼굴영상에 대해 두 눈의 기준점 위치와 두 눈의 위치이동에 따른 암호패턴의 나머지 꼭지점 위치가 이미지 좌표계에서는 얼굴의 이동에 따라 항시 변화하기 때문에 얼굴의 특징점을 이용한 암호체계를 만들 수 있는 수단을 제공한다.
또한 얼굴암호 생성과정에서 채택하는 임의의 변수 값으로 두 개의 위치점(C1,C2)에 해당하는 좌표값 이외에 동일 위치의 RGB영상값을 함께 적용하는 방법에 의해 영상신호의 위조·변조도 방지할 수 있는 수단을 제공하며, 위치점의 개수를 2개 이상 다수의 점으로 구현함으로써 얼굴영상 전체의 보안성을 향상시킬 수 있다.
이외에 동일한 환경조건에서 얼굴영상을 순차적으로 촬영한 사진에 대해서도 정면얼굴 및 눈을 찾는 얼굴엔진의 영상처리 과정에서는 얼굴영상의 미세한 변화에 의해 눈의 위치 이동이 미세하게 이동할 수 있으며, 또한 얼굴의 위치도 미세하게 이동하거나 포즈 변화에 의해 암호패턴으로 추출되는 꼭지점의 위치가 변경되며, 동시에 동일한 암호패턴을 적용해야 하는 이유로 임의의 얼굴영상에 대한 얼굴암호의 생성 및 복제가 매우 어렵다.
또한 상기의 얼굴암호는 생성은 간단하게 실시하여 제작할 수 있지만 복원은불가능한 구조적 특성을 가지므로 전체보안시스템을 복제하지 않으면 얼굴암호의 생성 및 복제가 어려운 특성을 갖는다. 따라서 상기의 얼굴암호는 얼굴의 생체특성 값과 사전에 약속된 인공의 암호패턴원리를 결합한 새로운 암호생성 체계를 나타낸다.
도 9는 얼굴 암호 인증을 위한 서버 시스템의 열쇠구조를 나타낸 것이다.
도 9는 상기 정면얼굴(61)이 포함된 영상이미지(60)와 얼굴내의 양쪽 눈을 나타내는 기준점(62,63) 그리고 기준점으로부터 사전에 약속된 암호패턴들에 의해 생성되는 여러 개의 꼭지점들(64,65,66,67)을 나타내고 있다. 다수의 자동현금지급기를 위한 정면 얼굴 자동촬영 카메라 시스템에 내장된 각각의 서로 다른 얼굴암호패턴을 서버시스템에서는 전체 합에 해당하는 암호패턴으로 구성하여 관리할 수 있도록 하며, 서버시스템에서는 암호패턴의 종류를 판단하는 방법으로 각각의 카메라 시스템을 인증하거나 판단할 수 있다.
종래의 네트워크 관리시스템의 경우에는 각 종단의 시스템을 인식하기 위한 수단으로 인터넷IP 또는 종단의 하드웨어 고유번호 등을 활용하고 있지만, 본 발명에서는 하드웨어적인 수단이외에 각 종단에서 처리되는 소프트웨어 솔루션의 조작에 의해 각 종단으로부터 서버의 중앙관제시스템으로 전송되는 개인의 정면얼굴이 포함된 생체정보 데이터를 이용하여 종단의 하드웨어를 인식할 수 있도록 하는 보안 수단을 제공하는 효과가 있다. 상기의 방법은 보안의 대상이 되는 사람의 얼굴영상을 이용한 생체적 특성의 보안수단으로서 종래의 방법보다 우수하고 차별화되는 보안 수단을 제공한다.
도 10은 본 발명장치의 네트워크 연결에 의한 중앙관제 모형을 나타내는 것이다.
도 10을 참조하면, 카메라(10)와 컴퓨터(20)로 구성된 본 발명의 자동촬영 카메라 시스템(74,76,78)이 인터넷(70)으로 여러 대 연결되어 있으며 서버시스템(72)에서 각각의 카메라장치들로부터 전송되는 얼굴영상들을 각각 인증하고 관제하는 모형을 나타내었다. 도 10의 관제시스템은 도 9의 서버시스템 열쇠를 가지고 있어서 사전에 약속된 암호패턴의 형태 및 조합에 따라 각각의 카메라장치를 구분할 수도 있는 특징이 있다.
도 11은 사용자 정면 얼굴 영상의 뒤섞기 처리에 의한 암호화 방법을 나타낸 것이다.
도 11a는 뒤섞기 처리전의 얼굴영상이고 도 11b는 도 10의 데이터부분 영상 일부를 뒤섞기 실시한 경우의 얼굴영상이며 도 11c는 도 10의 압축영상의 헤더 부분을 변조하여 얼굴영상 자체를 식별할 수 없도록 처리한 경우를 나타낸 것이다. 따라서 도 11의 방법은 고객 또는 사용자 개인정보 관리상의 필요에 의해 얼굴영상 의 일부 또는 전체를 변조하는 방법에 의해 개인정보를 보호하면서 관리상의 불편함은 초래하지 않는 보안시스템을 구현할 수 있다.
이상에서 설명한 본 발명의 시스템은 지능적으로 사람의 정면얼굴만을 판단하여 촬영하고 외부장치에 제어작용도 제공하며 얼굴영상의 저장, 전송등을 수행할 수 있는 카메라 시스템으로서, ATM기기 이외의 각종 무인기계 무인감시장치로도 활용이 가능하다.
이상의 본 발명은 상기에 기술된 실시 예들에 의해 한정되지 않고 당업자들에 의해 다양한 변형 및 변경을 가져올 수 있는데, 이는 첨부된 청구항에서 정의되는 본 발명의 취지와 범위에 포함된다.
이상에서 살펴본 바와 같이 본 발명에 의한 자동현금인출기를 위한 정면얼굴자동촬영 시스템 및 그 방법에 의하면 자동현금인출기 전면에 부착된 카메라로부터 사용자의 얼굴 영상이 입력되면 입력된 영상이 정면얼굴 영상인지 판단하고 상기 판단결과에 의해 자동현금인출기의 사용을 제어하게 함으로써 본 발명의 자동촬영 시스템은 자동현금인출기와 기능적으로 분리된 구조를 갖으므로 본 발명 시스템의 작동상의 문제가 일어나더라도 자동현금인출기에 미치지않는 안정된 구조를 갖는 효과가 있다.
또한 정면얼굴로 판단된 영상에 대해서는 암호화과정을 실시한 후 정면영상을 저장 또는 전송함으로써 사용자의 정보를 보호하는 자동현금인출기를 위한 정면얼굴 자동촬영 시스템 및 그 방법을 제공하는데 있다.

Claims (27)

  1. 카드리더, 터치모니터, 자동현금인출기컴퓨터등의 외부장치를 구비한 자동현금인출기에 적용되어 자동현금인출기를 사용하는 사용자의 신원을 확인하기 위한 자동촬영 카메라 시스템에 있어서,
    상기 사용자의 얼굴영상을 촬영하는 카메라,
    상기 카메라로부터 얼굴영상을 수신하여 입력된 영상이 정면 얼굴영상인지 판단하고 정면얼굴영상을 획득했는지 여부에 대한 출력 신호를 생성하고 얼굴영상 및 얼굴암호를 생성하기 위한 고유의 암호패턴을 저장하는 컴퓨터 및
    상기 컴퓨터로부터 상기 출력 신호를 받아 상기 외부장치와의 연결을 단속시키는 스위치를 포함하는 클라이언트 단말기와;
    상기 클라이언트 단말기의 고유 정보 및 이에 해당하는 암호패턴을 저장하고 있는 관리서버를 포함하는 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템.
  2. 제 1항에 있어서, 상기 관리서버는
    상기 고유 정보 및 상기 암호 패턴을 데이터베이스(DB)에 저장하는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템.
  3. 제 1항에 있어서, 상기 카메라는
    고체촬상소자 또는 상보형 전계효과소자 이미지 센서로 제작된 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템.
  4. 카드리더, 터치모니터, 자동현금인출기컴퓨터등의 외부장치를 구비한 자동현금인출기에 적용되어 자동현금인출기를 사용하는 사용자의 신원을 확인하기 위한 자동촬영 카메라 시스템에 있어서,
    사용자의 얼굴영상을 촬영하고 촬영한 영상이 정면얼굴영상인지 판단하고 정면얼굴영상을 획득했는지 여부에 대한 출력 신호를 생성하는 지능형카메라;
    상기 지능형카메라로부터 상기 출력 신호를 받아 상기 외부장치와의 연결을 단속시키는 스위치를 포함하는 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템.
  5. 제 4항에 있어서, 상기 지능형카메라는
    사용자의 이미지를 감지하는 이미지 센서;
    상기 이미지 센서가 감지한 사용자의 이미지를 전송하는 이미지신호처리부를 더 포함하는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템.
  6. 제 1항, 제 3항 및 제 4항 중 어느 한 항에 있어서, 상기 컴퓨터 또는 상기 지능형 카메라는
    상기 외부장치와 전기적 신호를 송수신하는 입출력부;
    상기 카메라 또는 상기 이미지신호처리부로부터 전송되는 얼굴 영상이 정면 얼굴 영상인가를 판단하는 중앙처리부;
    상기 고유 정보 및 상기 얼굴 영상을 저장하는 저장부;
    상기 저장부에 저장된 얼굴영상 및 상기 고유 정보를 네트워크를 통하여 송수신하기 위한 통신부를 포함하는 것을 특징으로 하는 자동현금인출기를 위한 정면 얼굴 자동촬영 카메라 시스템.
  7. 제 6항에 있어서, 상기 저장부는
    EEPROM, 불휘발성 메모리, 휘발성 메모리 또는 하드 디스크인 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템.
  8. 제 6항에 있어서, 상기 중앙처리부는
    입력된 얼굴 영상에서 눈을 찾고 양쪽 눈으로 추정되는 두 개의 영상영역을 영상의 크기 및 눈 대상 영역의 위치 등을 고려해 정규화하고 눈 및 입부분에 대하여 마스킹 및 프로젝션하여 주파수 특성을 분석하는 영상처리를 하는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템.
  9. 제 8항에 있어서, 상기 중앙 처리부는
    정면얼굴 영상인가를 판단하여 판단 결과, 정면얼굴 영상인 경우에는 상기스위치가 연결상태로 동작하도록 하는 신호를 출력하고,
    상기 판단결과 정면얼굴 영상이 아닌 경우에는 상기 스위치가 차단상태로 동작하도록 하는 신호를 출력하며, 정면얼굴 영상을 획득할 때까지 수신된 입력영상 중 다른 한 장을 대상으로 상기 영상처리 및 정면얼굴 영상인가의 판단을 수행하는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 시스템.
  10. 제 9항에 있어서, 상기 중앙처리부는
    정면얼굴 영상으로 판단된 영상에 대해 상기 암호패턴을 사용하여 얼굴암호를 생성하고, 상기 얼굴암호를 포함한 얼굴영상파일을 생성하는 과정 및 상기 영상 이미지 각각의 화소에 해당하는 정보를 뒤섞기(Scramble) 처리하는 과정을 포함하여 암호화 과정을 수행하는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템.
  11. 제 10항에 있어서, 상기 얼굴영상파일은
    헤더부분, 데이터부분, 정보부분으로 구성되며 상기 정보부분에는 얼굴암호, 영상채집시간, 영상을 획득한 클라이언트 시스템의 고유 번호가 포함되는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템.
  12. 제 10항에 있어서, 상기 암호패턴은
    보안 인증을 목적으로 관리자들의 사전 약속에 의해 정의되어 저장부에 저장되며, 저장된 암호패턴은 암호생성을 위한 소프트웨어에 적용되어 얼굴 암호를 생성하는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템.
  13. 제 10항에 있어서, 상기 중앙처리부는
    양쪽 눈과 상기 암호패턴의 닮은꼴 변형에 의한 매칭에 의해 얻어지는 2개 이상의 위치점 값들을 이용하여 약속된 일방향 함수에 의한 수학적 연산을 수행한 값으로 얼굴암호를 생성하는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템.
  14. 제 10항에 있어서,
    상기 통신부와 네트워크를 통하여 연결되고, 상기 통신부로부터 얼굴영상파일 및 상기 고유 정보를 전송받고, 상기 고유 정보에 해당하는 암호패턴을 상기 DB로부터 검색하여 복호화하는 관리서버를 더 포함하여 구성되는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템.
  15. 제 14항에 있어서,
    상기 얼굴영상파일에서 뒤섞기(scramble)처리된 영상을 원래의 영상으로 환원 처리하는 소프트웨어로 영상을 복원시켜 정면얼굴 영상만을 추출하여 상기 추출된 정면얼굴 영상으로부터 얼굴 암호를 생성하여 암호화 과정에서 생성된 얼굴암호와 비교하여 얼굴 영상의 위·변조 여부를 판단하는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템.
  16. 제 15항에 있어서, 상기 복호화 과정은
    양쪽 눈과 암호패턴의 닮은꼴 변형에 의한 매칭에 의해 얻어지는 2개 이상의 위치점 값들을 이용하여 약속된 일방향 함수에 의한 수학적 연산을 수행한 값으로 얼굴 암호를 생성하는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템.
  17. 카드리더, 터치모니터, 자동현금인출기컴퓨터등의 외부장치를 구비한 자동현금인출기와 연동되는 클라이언트 단말기로서 상기 자동현금인출기를 사용하는 사용자의 신원을 확인하기 위한 자동촬영 방법에 있어서,
    (a)상기 카드리더로부터 카드의 입력 신호를 전달받는 단계;
    (b)상기 사용자의 얼굴 영상을 실시간으로 입력하는 단계;
    (c)입력된 영상을 처리하는 영상 처리 단계;
    (d)처리된 영상이 정면얼굴 영상인가를 판단하는 단계 및
    (e)정면얼굴 영상을 획득했는지 여부에 의해 상기 외부장치와의 연결을 단속하는 단계를 포함하는 자동현금인출기를 위한 정면얼굴 자동촬영 방법.
  18. 제 17항에 있어서, 상기 (c)단계는
    입력된 영상을 캡처하여 사람의 정면얼굴을 구분할 수 있는 패턴인식 알고리즘으로 구현된 소프트웨어 엔진을 구동하여 영상을 처리하는 단계로서,
    (c1)입력된 영상에서 눈을 찾는 단계;
    (c2)양쪽 눈으로 추정되는 두개의 영상영역을 영상의 크기 및 눈 대상영역의 위치등을 고려해 정규화하는 단계;
    (c3)선택된 영상에 대하여 눈, 및 입의 영역에 대한 마스킹 및 프로젝션을 실시하는 단계를 포함하여 구성되는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 방법.
  19. 제 17항 또는 제 18항에서, 상기 (e)단계는
    정면얼굴영상을 획득한 경우에는 상기 스위치가 연결상태로 동작하도록 하고,
    정면얼굴영상을 획득하지 않은 경우에는 상기 스위치가 차단상태로 동작하게 하며, 이 경우 정면얼굴 영상을 획득할 때까지 (b),(c),(d)단계를 반복하는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 방법.
  20. 제 19항에 있어서, 정면얼굴영상으로 판단된 영상에 대해서는
    (f)얼굴 암호를 생성하는 단계;
    (g)상기 얼굴 암호 및 얼굴 영상등의 정보를 포함하는 얼굴영상파일을 생성하는 단계;
    (h)상기 얼굴영상파일에 대하여 이미지 각각의 화소에 해당하는 정보를 뒤섞기(scramble) 처리하는 단계;
    (i)상기 얼굴영상파일을 저장 또는 전송하는 단계를 포함하는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 방법.
  21. 제 20항에 있어서, 상기 얼굴영상파일은
    헤더부분, 영상의 내용에 해당하는 데이터부분, 얼굴암호, 영상채집시간, 영상을 획득한 클라이언트 시스템의 고유 번호가 포함되는 정보부분을 포함하는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 방법.
  22. 제 20항에 있어서, 상기 (f)단계는
    (f1)정면얼굴 영상에서 눈을 찾는 단계;
    (f2)상기 (c1)단계에서 패턴인식기술로 찾아진 눈의 대상영역중에서 양쪽 눈을 기준점으로 하여 기준점과 약속된 고유 암호패턴을 매칭하는 단계;
    (f3)상기 기준점에 대한 상기 암호패턴의 꼭지점 위치를 추출하는 단계;
    (f4)상기 추출된 꼭지점에 대한 영상이미지 좌표값을 추출하는 단계;
    (f5)한개 이상의 영상이미지 좌표값과 기준점에 대한 이미지 좌표값을 이용하여 얼굴 암호를 생성하는 단계를 포함하여 구성되는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 방법.
  23. 제 22항에 있어서, 상기 암호패턴은
    암호생성을 위한 소프트웨어에 포함되는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 방법.
  24. 제 20항에 있어서, 상기 (i)단계는
    상기 클라이언트 단말기의 고유 정보 및 이에 해당하는 암호패턴을 데이터베이스(DB)에 저장하고 있는 관리서버에 상기 얼굴영상파일을 전송하는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 방법.
  25. 제 24항에 있어서, 상기 관리서버는
    (j)상기 얼굴영상파일을 수신하는 단계;
    (k)상기 고유 정보에 해당하는 암호패턴을 상기 데이터베이스로부터 검색하여 복호화하는 단계를 더 포함하는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 방법.
  26. 제 25항에 있어서, 상기 (k)단계는
    (k1)상기 (h)단계에서 뒤섞기(scramble) 처리된 영상을 원래의 영상으로 환원하는 소프트웨어로 영상을 복원하는 디코딩 단계;
    (k2)복원된 정면얼굴 영상만을 추출하는 단계;
    (k3)추출된 정면얼굴 영상에 대한 얼굴암호를 생성하는 단계;
    (k4)상기 얼굴영상파일 내에 포함된 얼굴암호와 상기 (k3)단계에서 생성된 얼굴암호를 비교하여 전송된 얼굴 영상의 위·변조 여부를 판단하는 단계를 더 포함하는 것을 특징으로 하는 자동현금인출기를 위한 정면얼굴 자동촬영 방법.
  27. 제 26항에 있어서, 상기 (k3)단계는
    (k31)정면얼굴 영상에서 눈을 찾는 단계;
    (k32)찾아진 눈의 대상영역 중에서 임의의 양쪽 눈을 기준점으로 하여 두 개의 기준점들과 미리 약속된 형태의 암호패턴을 매칭하는 단계;
    (k33)상기 기준점들에 대한 암호패턴 꼭지점 위치를 추출하는 단계;
    (k34)상기 추출된 꼭지점에 대한 영상이미지 좌표값을 추출하는 단계;
    (k35)한개 이상의 영상이미지 좌표값과 기준점에 대한 이미지 좌표값을 이용하여 얼굴암호를 생성하는 단계를 포함하여 구성되는 것을 특징으로 하는
    자동현금인출기를 위한 정면얼굴 자동촬영 방법.
KR1020030044384A 2003-07-01 2003-07-01 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템및 방법 KR100564372B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020030044384A KR100564372B1 (ko) 2003-07-01 2003-07-01 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020030044384A KR100564372B1 (ko) 2003-07-01 2003-07-01 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템및 방법

Publications (2)

Publication Number Publication Date
KR20050005334A true KR20050005334A (ko) 2005-01-13
KR100564372B1 KR100564372B1 (ko) 2006-03-29

Family

ID=37219736

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020030044384A KR100564372B1 (ko) 2003-07-01 2003-07-01 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템및 방법

Country Status (1)

Country Link
KR (1) KR100564372B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110062991A (ko) * 2009-12-04 2011-06-10 삼성전자주식회사 피사체 인식을 알리는 디지털 촬영 장치, 상기 디지털 촬영 장치의 제어 방법
KR20170097443A (ko) * 2016-02-18 2017-08-28 (주)파워보이스 사용자 음성 인증 서비스 제공 방법 및 이에 사용되는 인증 서버
KR20170133666A (ko) * 2016-05-26 2017-12-06 삼성에스디에스 주식회사 영상 분석을 이용한 카메라 캘리브레이션 방법 및 그 장치
CN117058814A (zh) * 2023-09-19 2023-11-14 杭州新立仪表有限公司 一种ic卡无线智能燃气表、其控制系统及其控制方法

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101016217B1 (ko) * 2009-01-30 2011-02-25 솔라윈에너지(주) 현금인출장치의 얼굴영상비교방식에 의한 범죄방지시스템
KR101458136B1 (ko) * 2014-02-28 2014-11-05 김호 영상 처리 방법, 이를 실행하는 영상 처리 서버, 감시 서버, 영상 처리 시스템 및 이를 저장한 기록 매체
KR102444907B1 (ko) 2021-12-15 2022-09-19 주식회사 페이스테그 얼굴 특징 벡터를 이용한 데이터 접근 관리 방법, 데이터 접근 관리 장치, 이를 위한 컴퓨터 프로그램

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110062991A (ko) * 2009-12-04 2011-06-10 삼성전자주식회사 피사체 인식을 알리는 디지털 촬영 장치, 상기 디지털 촬영 장치의 제어 방법
KR20170097443A (ko) * 2016-02-18 2017-08-28 (주)파워보이스 사용자 음성 인증 서비스 제공 방법 및 이에 사용되는 인증 서버
KR20170133666A (ko) * 2016-05-26 2017-12-06 삼성에스디에스 주식회사 영상 분석을 이용한 카메라 캘리브레이션 방법 및 그 장치
CN117058814A (zh) * 2023-09-19 2023-11-14 杭州新立仪表有限公司 一种ic卡无线智能燃气表、其控制系统及其控制方法
CN117058814B (zh) * 2023-09-19 2024-04-09 杭州新立仪表有限公司 一种ic卡无线智能燃气表、其控制系统及其控制方法

Also Published As

Publication number Publication date
KR100564372B1 (ko) 2006-03-29

Similar Documents

Publication Publication Date Title
Smith et al. Face recognition on consumer devices: Reflections on replay attacks
US6330674B1 (en) Use of biometrics as a methodology for defining components for ECC encryption
TWI304946B (en) Biometrics verification system and a method thereof
US5321751A (en) Method and apparatus for credit card verification
CN1860724B (zh) 用于标识的方法
Hämmerle-Uhl et al. Watermarking as a means to enhance biometric systems: A critical survey
US20030135764A1 (en) Authentication system and apparatus having fingerprint verification capabilities thereof
JP2009543176A (ja) トレースレス生体認証識別システム及び方法
CN111815833A (zh) 一种基于智能识别与加密技术的酒店门禁认证系统
EP3674934A1 (en) Biometric acquisition system and method
JP2006262333A (ja) 生体認証システム
KR100564372B1 (ko) 자동현금인출기를 위한 정면얼굴 자동촬영 카메라 시스템및 방법
Pilania et al. Exploring face detection and recognition in steganography
Moon et al. Performance evaluation of watermarking techniques for secure multimodal biometric systems
JPS62212781A (ja) 個人認証方式
Natgunanathan et al. An overview of protection of privacy in multibiometrics
Buhan et al. A quantitative analysis of indistinguishability for a continuous domain biometric cryptosystem
Ratha Privacy protection in high security biometrics applications
CN116805436A (zh) 一种智能门禁、控制系统及控制方法
Bringer et al. Extending match-on-card to local biometric identification
CN115690969A (zh) 非接触式指纹认证方法、终端、门禁设备及存储介质
Bhanushali et al. Fingerprint based ATM system
Butt et al. Privacy protection of biometric templates
Oluwadamilola et al. An improved authentication system using hybrid of biometrics and cryptography
Gudavalli et al. A template protection scheme for multimodal biometric system with fingerprint, palmprint, iris and retinal traits

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20110309

Year of fee payment: 6

LAPS Lapse due to unpaid annual fee