KR20120048813A - 현금인출장치 - Google Patents

현금인출장치 Download PDF

Info

Publication number
KR20120048813A
KR20120048813A KR1020100110188A KR20100110188A KR20120048813A KR 20120048813 A KR20120048813 A KR 20120048813A KR 1020100110188 A KR1020100110188 A KR 1020100110188A KR 20100110188 A KR20100110188 A KR 20100110188A KR 20120048813 A KR20120048813 A KR 20120048813A
Authority
KR
South Korea
Prior art keywords
face
nose
unit
user
mouth
Prior art date
Application number
KR1020100110188A
Other languages
English (en)
Other versions
KR101766829B1 (ko
Inventor
김병익
Original Assignee
엘지이노텍 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지이노텍 주식회사 filed Critical 엘지이노텍 주식회사
Priority to KR1020100110188A priority Critical patent/KR101766829B1/ko
Publication of KR20120048813A publication Critical patent/KR20120048813A/ko
Application granted granted Critical
Publication of KR101766829B1 publication Critical patent/KR101766829B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07FCOIN-FREED OR LIKE APPARATUS
    • G07F19/00Complete banking systems; Coded card-freed arrangements adapted for dispensing or receiving monies or the like and posting such transactions to existing accounts, e.g. automatic teller machines
    • G07F19/20Automatic teller machines [ATMs]
    • G07F19/207Surveillance aspects at ATMs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/171Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07FCOIN-FREED OR LIKE APPARATUS
    • G07F19/00Complete banking systems; Coded card-freed arrangements adapted for dispensing or receiving monies or the like and posting such transactions to existing accounts, e.g. automatic teller machines
    • G07F19/20Automatic teller machines [ATMs]
    • G07F19/201Accessories of ATMs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Finance (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Accounting & Taxation (AREA)
  • Signal Processing (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

본 발명은 현금인출장치에 관한 것으로, 본 발명의 현금인출장치는 투입되는 카드로부터 사용자정보를 읽어 출력하는 카드리더부, 사용자를 촬영하는 카메라부, 상기 카메라부에서 촬영된 영상 이미지 중 얼굴 영역을 추출하고, 상기 얼굴 영역 중 눈, 코, 입이 모두 인식되면 정상 얼굴을 알리는 제1 제어신호를 출력하고, 상기 눈, 코, 입 중 일부만이 인식되면 비정상 얼굴을 알리는 제2 제어신호를 출력하는 얼굴인식부, 상기 제1 제어신호가 입력되면, 상기 카드리더부의 상기 사용자정보와 상기 사용자가 입력하는 비밀번호를 인증 처리하는 중앙처리부, 상기 제2 제어신호가 입력되면, 상기 사용자에게 상기 눈, 코, 입의 인식을 방해하는 요소를 제거하라는 안내메시지를 출력하는 알림부를 포함한다.

Description

현금인출장치{Automatic Teller Machine}
본 발명은 현금인출장치에 관한 것이다.
일반적으로, 현금인출장치(ATM)라 함은 일반사용자가 현금카드 또는 신용카드를 이용하여 현금을 인출할 수 있는 장치로서, 카드 사용자가 은행 창구를 이용하지 않고서도 은행영업 시간 이외의 시간에도 자유롭게 현금을 일출할 수 있도록 해 주는 매우 유익한 장치이다.
이러한 ATM에는 범죄자가 타인의 카드로서 현금을 인출하는 것을 방지하기 위하여 현금인출장치에 사용자를 촬영하는 카메라가 설치되어 있다.
그런데 ATM과 같은 금융기기를 대상으로 범죄를 저지르는 대부분의 범인들은, 카메라가 설치되어 있다는 사실을 알고 있고 이러한 카메라에 본인들의 얼굴이 촬영되는 것을 막기 위해 모자, 마스크, 선글라스와 같은 차단부재로 얼굴을 가린 상태에서 현금을 인출한다.
종래에는 차단부재를 이용하여 얼굴을 가린 범죄자가 ATM에 장착된 카메라에 촬영되었다 하더라도 촬영된 이미지를 통해 범죄자를 알아볼 수 없어 범죄자 색출이 불가능한 문제점이 있다.
본 발명은 얼굴인식을 기반으로 부정거래를 방지할 수 있는 현금인출장치를 제공한다.
본 발명의 한 특징에 따르면, 투입되는 카드로부터 사용자정보를 읽어 출력하는 카드리더부, 사용자를 촬영하는 카메라부, 상기 카메라부에서 촬영된 영상 이미지 중 얼굴 영역을 추출하고, 상기 얼굴 영역 중 눈, 코, 입이 모두 인식되면 정상 얼굴을 알리는 제1 제어신호를 출력하고, 상기 눈, 코, 입 중 일부만이 인식되면 비정상 얼굴을 알리는 제2 제어신호를 출력하는 얼굴인식부, 상기 제1 제어신호가 입력되면, 상기 카드리더부의 상기 사용자정보와 상기 사용자가 입력하는 비밀번호를 인증 처리하는 중앙처리부, 상기 제2 제어신호가 입력되면, 상기 사용자에게 상기 눈, 코, 입의 인식을 방해하는 요소를 제거하라는 안내메시지를 출력하는 알림부를 포함하는 현금인출장치가 제공된다.
본 발명의 실시 예에서는 현금인출기에 장착된 카메라를 통해 영상 이미지를 획득하고, 영상 이미지 중 얼굴 영역의 눈, 코 입을 인식하여 마스크, 선글라스, 모자 등과 같은 차단부재가 없는 정상얼굴일 경우에만 금융 거래를 허가함으로써, 현금인출기의 부정 거래를 방지할 수 있다.
도 1은 본 발명의 실시 예에 따른 현금인출장치의 개략적인 구성도이다.
도 2는 본 발명의 실시 예에 따른 얼굴인식부의 개략적인 구성도이다.
도 3은 피부색의 분포를 2변수 정규 분포로 모델링한 그래프이다.
도 4a 내지 도 4c는 얼굴 인식을 방해하는 요소들의 예시도이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시 예를 가질 수 있는 바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제2 구성요소는 제1 구성요소로 명명될 수 있고, 유사하게 제1 구성요소도 제2 구성요소로 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
본 출원에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
이제 본 발명의 실시 예에 따른 현금인출장치에 대하여 도면을 참고하여 상세하게 설명하고, 도면 부호에 관계없이 동일하거나 대응하는 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기도 한다.
도 1은 본 발명의 실시 예에 따른 현금인출장치의 개략적인 구성도이다.
도 1에 도시된 바와 같이, 현금인출장치는 카드리더부(10), 중앙처리부(20), 카메라부(30), 얼굴인식부(40) 및 알림부(50)를 포함한다.
카드리더부(10)는 투입되는 카드(현금카드 또는 신용카드)로부터 사용자 정보를 읽어내어 중앙처리부(20)로 출력한다.
중앙처리부(20)는 카드리더부(10)에서 읽혀진 사용자 정보, 사용자가 입력하는 비밀번호, 얼굴인식부(40)로부터 입력되는 제1 제어신호를 모두 이용하여 사용자를 인증 처리한 후 현금인출거래가 이루어지도록 제어한다.
카메라부(30)는 현금인출장치를 사용하는 사용자의 얼굴을 포함하는 영상 이미지를 촬영하여 얼굴인식부(40)로 출력한다.
얼굴인식부(40)는 카메라부(30)로부터 입력되는 영상 이미지로부터 얼굴 영역을 추출하고, 얼굴 영역에 눈, 코, 입이 모두 인식되는지를 판단한다. 얼굴인식부(40)는 눈, 코, 입이 모두 인식되면 중앙처리부(20)로 정상 얼굴을 알리는 제1 제어신호를 출력하고, 눈, 코, 입 중 어느 하나라도 인식되지 않으면 알림부(50)로 비정상얼굴을 알리는 제2 제어신호를 출력한다.
알림부(50)는 현금인출장치 사용자에게 안내메시지를 출력하는 수단으로서, 얼굴인식부(40)로부터 비정상 얼굴을 알리는 제2 제어신호가 입력되면 알림부(50)는 저장되어 있던 안내메시지를 출력한다.
예를 들어, 안내메시지는 "얼굴 촬영을 위해 마스크, 선글라스, 모자 등을 벗어주세요"와 같이, 사용자가 마스크, 선글라스, 모자 등과 같은 차단부재를 벗을 수 있는 메시지이다.
도 2는 본 발명의 실시 예에 따른 얼굴인식부의 개략적인 구성도이다.
도 2에 도시된 바와 같이, 얼굴인식부(40)는 얼굴 영역 추출부(41), 눈, 코, 입 인식부(42)를 포함한다.
얼굴 영역 추출부(41)는 카메라부(30)로부터 입력되는 영상 이미지를 채도 영상 데이터로 변환하고, 채도 영상 데이터 중 특정 색역의 채도 범위에 포함되는 픽셀들의 에지를 추출하고, 에지 내에 포함되는 모든 픽셀들을 얼굴 영역으로 추출한다.
이때, 채도 영상 데이터는 YCbCr 신호 중 색상 성분인 Cb, Cr를 의미한다.
본 발명에서는 영상 이미지를 채도 영상 데이터로 변환한 것으로 기술하였으나, 영상 이미지를 RGB 영상 데이터로 변환한 후에 RGB 영상 데이터를 채도 영상 데이터로 변환할 수도 있다.
또한, 특정 색역은 특정 채도 범위 또는 특정 휘도 범위로서, 피부색, 머리색, 적색, 녹색, 청색 등 다양할 수 있다. 그러나, 본 발명에서는 얼굴 영역의 피부색을 특정 색역으로 설정한다. 아래에서는 설명의 편의상 특정 색역을 피부 색역으로 대표하여 설명한다.
도 3은 피부색의 분포를 2변수 정규 분포로 모델링한 그래프로서, X축은 Cb 색차 신호의 값이고 Y축은 Cr 색차 신호의 값이다.
도 3의 피부 색역은 대한민국 사람들의 피부색을 통계적으로 조사하여 추출된 색역으로, 나라, 인종에 따라 피부 색역은 다르게 추출될 수 있다.
눈, 코, 입 인식부(42)는 얼굴 영역 추출부(41)로 입력되는 얼굴 영역에서 눈, 코, 입이 모두 인식되는지를 판단하고, 눈, 코, 입이 모두 인식되면 중앙처리부(20)로 제1 제어신호를 출력하고, 눈, 코, 입 중 어느 하나라도 인식되지 않으면 알림부(50)로 제2 제어신호를 출력한다.
보다 구체적으로, 도 4a 내지 도 4c는 얼굴 인식을 방해하는 요소들의 예시도로서, 도 4a에 도시된 바와 같이, 눈, 코, 입 인식부(42)는 코와 입이 인식되지 않은 경우에는 사용자가 마스크를 착용했다고 판단한다.
도 4b에 도시된 바와 같이, 눈, 코, 입 인식부(42)는 눈이 인식되지 않을 경우에는 안경테 인식 알고리즘을 이용하여 안경알의 평균 조도값으로 선글라스 착용 여부를 판단한다. 선글라스의 조도값은 8bit code값 기준(0~255)으로 대략 80~160이므로, 본 발명에서는 안경알의 조도값이 설정된 조도값 범위(80~160)에 포함되면 선글라스로 판단하여, 선글라스 착용 여부를 알 수 있다.
도 4c에 도시된 바와 같이, 눈, 코, 입 인식부(42)는 눈이 인식되지 않으면서 선글라스 착용이 아니라고 판단되는 경우에는 모자를 착용했다고 판단한다.
이와 같이, 본 발명의 눈, 코, 입 인식부(42)는 사용자가 마스크, 선글라스, 모자 등과 같이 얼굴 인식을 방해하는 요소를 착용했는지 여부를 알 수 있다.
눈, 코, 입 인식부(42)로부터 제1 제어신호가 입력되면, 중앙처리부(20)는 사용자의 얼굴이 정상얼굴로 인식되었다고 판단하여 사용자에게 현금인출거래가 이루어지도록 제어한다.
눈, 코, 입 인식부(42)로부터 제2 제어신호가 입력되면, 알림부(50)는 저장된 안내메시지를 사용자에게 출력하여 사용자가 마스크, 선글라스, 모자 등과 같은 얼굴 인식을 방해하는 요소를 제거할 수 있도록 안내한다.
이와 같이, 본 발명에서는 현금인출기에 장착된 카메라를 통해 영상 이미지를 획득하고, 영상 이미지 중 얼굴 영역의 눈, 코 입을 인식하여 마스크, 선글라스, 모자 등과 같은 차단부재가 없는 정상얼굴일 경우에만 금융 거래를 허가함으로써, 현금인출기의 부정 거래를 방지할 수 있다.
이상에서 본 발명의 실시 예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.
10: 카드리더부
20: 중앙처리부
30: 카메라부
40: 얼굴인식부
41: 얼굴 영역 추출부
42: 눈, 코, 입 인식부
50: 알림부

Claims (6)

  1. 투입되는 카드로부터 사용자정보를 읽어 출력하는 카드리더부,
    사용자를 촬영하는 카메라부,
    상기 카메라부에서 촬영된 영상 이미지 중 얼굴 영역을 추출하고, 상기 얼굴 영역 중 눈, 코, 입이 모두 인식되면 정상 얼굴을 알리는 제1 제어신호를 출력하고, 상기 눈, 코, 입 중 일부만이 인식되면 비정상 얼굴을 알리는 제2 제어신호를 출력하는 얼굴인식부,
    상기 제1 제어신호가 입력되면, 상기 카드리더부의 상기 사용자정보와 상기 사용자가 입력하는 비밀번호를 인증 처리하는 중앙처리부, 및
    상기 제2 제어신호가 입력되면, 상기 사용자에게 상기 눈, 코, 입의 인식을 방해하는 요소를 제거하라는 안내메시지를 출력하는 알림부를 포함하는 현금인출장치.
  2. 제1항에 있어서,
    상기 얼굴인식부는,
    상기 영상 이미지를 채도 영상 데이터로 변환하고, 상기 채도 영상 데이터 중 특정 색역의 채도 범위에 포함되는 픽셀들의 에지를 추출하고, 상기 에지 내에 포함되는 픽셀들을 상기 얼굴 영역으로 추출하는 얼굴 영역 추출부, 및
    상기 얼굴 영역 추출부의 상기 얼굴 영역에서 눈, 코, 입이 모두 인식되는지 여부를 판단하고, 판단 여부에 따라 상기 제1 제어신호 및 상기 제2 제어신호를 출력하는 눈, 코, 입 인식부를 포함하는 현금인출장치.
  3. 제2항에 있어서,
    상기 특정 색역은 피부 색역인 현금인출장치.
  4. 제2항에 있어서,
    상기 피부 색역의 채도 범위는 복수의 인물의 피부색을 통계적으로 조사하여 추출된 범위이며, 인종에 따라 변동 가능한 현금인출장치.
  5. 제2항에 있어서,
    상기 눈, 코, 입 인식부는 안경테 알고리즘을 이용하여 안경알의 평균 조도값이 설정된 조도값 범위에 포함되면 선글라스로 판단하는 현금인출장치.
  6. 제2항에 있어서,
    상기 눈, 코, 입 인식부는 눈만 인식될 경우 상기 사용자가 마스크를 착용했다고 판단하는 현금인출장치.
KR1020100110188A 2010-11-08 2010-11-08 현금인출장치 KR101766829B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100110188A KR101766829B1 (ko) 2010-11-08 2010-11-08 현금인출장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100110188A KR101766829B1 (ko) 2010-11-08 2010-11-08 현금인출장치

Publications (2)

Publication Number Publication Date
KR20120048813A true KR20120048813A (ko) 2012-05-16
KR101766829B1 KR101766829B1 (ko) 2017-08-23

Family

ID=46266913

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100110188A KR101766829B1 (ko) 2010-11-08 2010-11-08 현금인출장치

Country Status (1)

Country Link
KR (1) KR101766829B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019221494A1 (en) * 2018-05-14 2019-11-21 Samsung Electronics Co., Ltd. Electronic device for performing biometric authentication and method of operating the same
CN111708823A (zh) * 2020-08-18 2020-09-25 腾讯科技(深圳)有限公司 异常社交账号识别方法、装置、计算机设备和存储介质

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005526309A (ja) * 2002-02-05 2005-09-02 ▲璋▼凱企▲兆▼有限公司 人工知能デジタル撮像、記録及び画像認識機能を有したatmシステム
JP5271742B2 (ja) * 2009-02-10 2013-08-21 セコム株式会社 サングラス着用検出装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019221494A1 (en) * 2018-05-14 2019-11-21 Samsung Electronics Co., Ltd. Electronic device for performing biometric authentication and method of operating the same
US11410466B2 (en) 2018-05-14 2022-08-09 Samsung Electronics Co., Ltd. Electronic device for performing biometric authentication and method of operating the same
CN111708823A (zh) * 2020-08-18 2020-09-25 腾讯科技(深圳)有限公司 异常社交账号识别方法、装置、计算机设备和存储介质

Also Published As

Publication number Publication date
KR101766829B1 (ko) 2017-08-23

Similar Documents

Publication Publication Date Title
US9323979B2 (en) Face recognition performance using additional image features
KR20090008256A (ko) 얼굴 인식 시스템
KR100695155B1 (ko) 가리어진 얼굴 검출장치 및 방법과 이를 이용한 부정거래자식별장치 및 방법
WO2019137178A1 (zh) 人脸活体检测
CN105718925A (zh) 基于近红外和面部微表情的真人活体身份验证终端设备
JP2016170700A (ja) 人物認証方法
JP2007135149A (ja) 移動携帯端末
JP5726596B2 (ja) 画像監視装置
JP5730044B2 (ja) 顔画像認証装置
CN104424721A (zh) 一种结合atm机的脸部遮挡识别方法
KR100825689B1 (ko) 얼굴 위장 판별 방법
CN113177480A (zh) 基于人脸识别的金融业务处理方法、装置、设备及介质
JP2010079740A (ja) 監視システム及び監視装置
CN107463875A (zh) 一种判断人员身份的方法和装置
KR101766829B1 (ko) 현금인출장치
JP5726595B2 (ja) 画像監視装置
CN109196517B (zh) 对照装置和对照方法
JP2012212967A (ja) 画像監視装置
US20120219192A1 (en) Method of controlling a session at a self-service terminal, and a self-service terminal
KR101280439B1 (ko) 현금인출기 카메라에서 취득된 얼굴 영상에 대한 얼굴 인식 가능성 판단 방법
KR101372365B1 (ko) 현금 인출기용 부정 금융 거래 시도 판단 장치
KR100306355B1 (ko) 사용자식별시스템및이를이용한현금인출기
CN107392152A (zh) 一种获取虹膜图像的方法及装置
Chin et al. Enhanced face recognition method based on local binary pattern and principal component analysis for efficient class attendance system
KR101016217B1 (ko) 현금인출장치의 얼굴영상비교방식에 의한 범죄방지시스템

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant