KR101442167B1 - 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기 및그 제어방법 - Google Patents
제스처 인식을 통한 통화 발신 기능을 지원하는 단말기 및그 제어방법 Download PDFInfo
- Publication number
- KR101442167B1 KR101442167B1 KR1020070104087A KR20070104087A KR101442167B1 KR 101442167 B1 KR101442167 B1 KR 101442167B1 KR 1020070104087 A KR1020070104087 A KR 1020070104087A KR 20070104087 A KR20070104087 A KR 20070104087A KR 101442167 B1 KR101442167 B1 KR 101442167B1
- Authority
- KR
- South Korea
- Prior art keywords
- phone number
- gesture information
- gesture
- number table
- registered
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/26—Devices for calling a subscriber
- H04M1/27—Devices whereby a plurality of signals may be stored simultaneously
- H04M1/274—Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc
- H04M1/2745—Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc using static electronic memories, e.g. chips
- H04M1/27453—Directories allowing storage of additional subscriber data, e.g. metadata
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2250/00—Details of telephonic subscriber devices
- H04M2250/52—Details of telephonic subscriber devices including functional features of a camera
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Library & Information Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Health & Medical Sciences (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Telephone Function (AREA)
Abstract
본 발명에 따른 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기 제어방법은 제스처를 통한 통화 발신 기능으로 설정하는 단계; 카메라 모듈을 통한 제스처 정보를 인식하는 단계; 인식된 제스처 정보가 기 저장된 전화번호 테이블에 등록되어 있는지를 판단하는 단계; 및 상기 제스처 정보의 등록 여부를 판단하는 단계에서 인식된 제스처 정보가 기 저장된 전화번호 테이블에 등록되어 있으면, 해당 전화번호를 이용하여 통화 발신을 수행하는 단계를 포함하는 것으로, 사용자가 전화번호부를 검색하지 않고 카메라 모듈을 통해 입력되는 큰 동작 또는 간단한 손 모양(수화), 간단한 사물 인식 등을 통해 통화 발신을 수행할 수 있는 것이다.
Description
본 발명은 이동통신 단말기의 키 패드를 이용하지 않고 카메라를 이용하여 특정 제스처를 통해 지정된 사람에게 통화 발신을 할 수 있는 제스처 인식을 통한 통화 발신 기능을 지원하는 방법에 관한 것이다.
종래 단말기의 기능적인 측면에서 기존에 음성인식을 통한 통화 발신, 모션 센서를 이용한 통화 발신 기능을 들 수 있다.
따라서 본 발명은 상기와 같은 종래의 문제점을 해결하기 위한 것으로서, 본 발명의 목적은 음성인식을 통해 지정된 사용자에게 통화를 발신하는 것과 같이 전화번호부에 저장된 사람별로 제스처 정보를 저장하여 이를 인식하여 지정된 사람에게 통화 발신을 하도록 하는 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기 및 그 제어방법을 제공하는 데 있다.
상기한 목적을 달성하기 위한 본 발명에 따른 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기의 일 측면에 따르면, 제스처 정보와 그에 대응되는 전화번호를 저장하는 전화번호 테이블; 및 제스처를 통한 통화 발신 기능으로 설정한 후 카메라 모듈을 통해 제스처 정보를 입력받게 되면 그 입력된 제스처 정보와 동일한 제스처 정보를 갖는 전화번호를 상기 전화번호 테이블로부터 확인하고 해당 전화번호를 통해 통화 발신을 수행하는 제어부를 포함한다.
상기 제어부는, 제스처를 통한 통화 발신 기능으로 설정하는 기능 설정부; 카메라 모듈을 통한 제스처 정보를 인식하는 제스처 인식부; 인식된 제스처 정보가 기 저장된 전화번호 테이블에 등록되어 있는지를 판단하는 등록 판단부; 및 상기 등록 판단부를 통해 인식된 제스처 정보가 기 저장된 전화번호 테이블에 등록되어 있으면, 해당 전화번호를 이용하여 통화 발신을 수행하는 통화 처리부를 포함한다.
한편, 상기 등록 판단부를 통해 인식된 제스처 정보가 기 저장된 전화번호 테이블에 등록되어 있지 않으면, 인식된 제스처 정보를 사용자가 지정하는 전화번호 테이블에 등록할 수 있도록 전화번호 수정 기능을 제공하는 제스처 등록부를 더 포함한다.
상기 제스처 인식부는 카메라 모듈을 통해 제스처 정보를 입력받은 후 입력된 제스처 정보를 전화번호 생성/변경 기능을 통해 전화번호 테이블에 등록하며, 외부 네트워크를 통해 메모리에 기 저장된 제스처 정보를 이용할 수도 있다.
본 발명에 따른 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기 제어방법의 일 측면에 따르면, 제스처를 통한 통화 발신 기능으로 설정하는 단계; 카메라 모듈을 통한 제스처 정보를 인식하는 단계; 인식된 제스처 정보가 기 저장된 전화번호 테이블에 등록되어 있는지를 판단하는 단계; 및 상기 제스처 정보의 등록 여부를 판단하는 단계에서 인식된 제스처 정보가 기 저장된 전화번호 테이블에 등록되어 있으면, 해당 전화번호를 이용하여 통화 발신을 수행하는 단계를 포함한다.
상기 제스처 정보의 등록 여부를 판단하는 단계에서 인식된 제스처 정보가 기 저장된 전화번호 테이블에 등록되어 있지 않으면, 인식된 제스처 정보를 사용자가 지정하는 전화번호 테이블에 등록할 수 있도록 전화번호 수정 기능을 제공하는 단계를 포함한다.
상기 방법은, 카메라 모듈을 통해 제스처 정보를 입력받는 단계; 및 입력된 제스처 정보를 전화번호 생성/변경 기능을 통해 전화번호 테이블에 등록하는 단계 를 더 포함하며, 상기 입력된 제스처 정보를 전화번호 생성/변경 기능을 통해 전화번호 테이블에 등록하는 단계는, 외부 네트워크를 통해 메모리에 기 저장된 제스처 정보를 이용한다.
상술한 바와 같이 본 발명에 의한 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기 및 그 제어방법에 의하면, 사용자가 전화번호부를 검색하지 않고 카메라 모듈을 통해 입력되는 큰 동작 또는 간단한 손 모양(수화), 간단한 사물 인식 등을 통해 통화 발신을 수행할 수 있는 뛰어난 효과가 있다.
또한 사용자에게 엔터테인먼트적인 기능을 제공할 수 있는 뛰어난 효과가 있다.
이하, 본 발명에 따른 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기 및 그 제어방법에 대한 바람직한 실시예에 대하여 첨부한 도면을 참조하여 상세하게 살펴보기로 한다. 이 때, 아래에서 설명하는 시스템 구성은 본 발명의 설명을 위해서 인용한 시스템으로써 아래 시스템으로 본 발명을 한정하지 않음을 이 분야의 통상의 지식을 가진 자라면 이해해야할 것이다.
도 1은 본 발명에 따른 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기의 구성을 나타낸 도면으로서, 본 발명에 따른 제스처 인식을 통한 통화 발신 기 능을 지원하는 단말기는 카메라 모듈(10), 메모리(20), 전화번호 테이블(100)과 기능 설정부(210), 제스처 인식부(220), 등록 판단부(230), 통화 처리부(240), 그리고 제스처 등록부(250)를 구비하는 제어부(200)를 포함한다.
상기 전화번호 테이블(100)은 제스처 정보와 그에 대응되는 전화번호를 저장한다. 여기서, 상기 전화번호 테이블은 도 2에 도시된 바와 같이 사진, 모션, 이름, 휴대폰번호, 벨소리, 그룹, etc1 필드 등을 포함하고 있다.
그리고 상기 제어부(200)는 제스처를 통한 통화 발신 기능으로 설정한 후 카메라 모듈(10)을 통해 제스처 정보를 입력받게 되면 그 입력된 제스처 정보와 동일한 제스처 정보를 갖는 전화번호를 상기 전화번호 테이블(100)로부터 확인하고 해당 전화번호를 통해 통화 발신을 수행한다.
즉, 상기 기능 설정부(210)는 제스처를 통한 통화 발신 기능으로 설정한다.
그리고 상기 제스처 인식부(220)는 카메라 모듈(10)을 통한 제스처 정보를 인식한다.
또한 상기 등록 판단부(230)는 인식된 제스처 정보가 기 저장된 전화번호 테이블(100)에 등록되어 있는지를 판단한다.
만약, 인식된 제스처 정보가 기 저장된 전화번호 테이블(100)에 등록되어 있으면, 상기 통화 처리부(240)는 해당 전화번호를 이용하여 통화 발신을 수행한다.
상기 제스처 등록부(250)는 인식된 제스처 정보를 사용자가 지정하는 전화번호 테이블(100)에 등록할 수 있도록 전화번호 수정 기능을 제공하는 한편, 상기 메 모리(20)에 저장된 제스처 정보를 이용하여 전화번호를 수정할 수 있다.
상기한 각 구성들에 대한 일반적인 기능 및 각각의 상세한 동작에 대하여는 그 설명을 생략하고, 본 발명에 상응하는 동작 위주로 그 동작들을 설명하기로 한다.
먼저, 사용자는 기능 설정부(210)를 통해 제스처를 통한 통화 발신 기능으로 설정한다.
이후, 상기 제스처 인식부(220)는 카메라 모듈(10)을 통해 입력되는 사용자의 제스처 정보를 입력받는다.
그러면, 상기 등록 판단부(230)는 인식된 제스처 정보가 기 저장된 전화번호 테이블(100)에 등록되어 있는지를 판단한다.
만약, 상기 등록 판단부(230)를 통해 인식된 제스처 정보가 기 저장된 전화번호 테이블(100)에 등록되어 있지 않으면, 상기 제스처 등록부(250)는 인식된 제스처 정보를 사용자가 지정하는 전화번호 테이블(100)에 등록할 수 있도록 전화번호 수정 기능을 제공한다.
한편, 상기 등록 판단부(230)를 통해 인식된 제스처 정보가 기 저장된 전화번호 테이블(100)에 등록되어 있으면, 상기 통화 처리부(240)는 해당 전화번호를 이용하여 통화 발신을 수행한다.
또한 상기 제스처 등록부(250)는 인식된 제스처 정보를 사용자가 지정하는 전화번호 테이블(100)에 등록할 수 있도록 전화번호 수정 기능을 제공하는 한편, 상기 메모리(20)에 저장된 제스처 정보를 이용하여 전화번호를 수정할 수 있다.
그러면, 상기와 같은 구성을 가지는 본 발명에 따른 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기 제어방법에 대해 도 4를 참조하여 설명하기로 한다.
먼저, 제스처를 통한 통화 발신 기능으로 설정한다(S1).
이어서, 카메라 모듈(10)을 통한 제스처 정보를 인식한다(S2).
그러면, 인식된 제스처 정보가 기 저장된 전화번호 테이블(100)에 등록되어 있는지를 판단한다(S3).
만약, 상기 제스처 정보의 등록 여부를 판단하는 단계(S3)에서 인식된 제스처 정보가 기 저장된 전화번호 테이블(100)에 등록되어 있으면(YES), 해당 전화번호를 이용하여 통화 발신을 수행한다(S4).
반면에 상기 제스처 정보의 등록 여부를 판단하는 단계(S3)에서 인식된 제스처 정보가 기 저장된 전화번호 테이블(100)에 등록되어 있지 않으면(NO), 인식된 제스처 정보를 사용자가 지정하는 전화번호 테이블(100)에 등록할 수 있도록 전화번호 수정 기능을 제공한다(S5). 상기 입력된 제스처 정보를 전화번호 생성/변경 기능을 통해 전화번호 테이블(100)에 등록하는 단계(S5)는 외부 네트워크를 통 해 메모리(20)에 기 저장된 제스처 정보를 이용할 수도 있다.
이상에서 본 발명은 기재된 구체적인 실시예에 대해서만 상세히 설명하였지만 본 발명의 기술 사상 범위 내에서 다양한 변형 및 수정이 가능함은 당업자에게 있어서 명백한 것이며, 이러한 변형 및 수정이 첨부된 특허청구범위에 속함은 당연한 것이다.
도 1은 본 발명에 따른 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기의 구성을 나타낸 기능블록도.
도 2는 도 1에 따른 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기에서 전화번호 테이블을 나타낸 도면.
도 3은 본 발명에 따른 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기 제어방법을 나타낸 순서도이다.
<도면의 주요 부분에 대한 부호의 설명>
10 : 카메라 모듈 20 : 메모리
200 : 전화번호 테이블 200 : 제어부
210 : 기능 설정부 220 : 제스처 인식부
230 : 등록 판단부 240 : 통화 처리부
250 : 제스처 등록부
Claims (8)
- 제스처를 통한 통화 발신 기능으로 설정하는 단계;카메라 모듈을 통한 제스처 정보를 인식하는 단계;인식된 제스처 정보가 기 저장된 전화번호 테이블에 등록되어 있는지를 판단하는 단계; 및상기 제스처 정보의 등록 여부를 판단하는 단계에서 인식된 제스처 정보가 기 저장된 전화번호 테이블에 등록되어 있으면, 해당 전화번호를 이용하여 통화 발신을 수행하는 단계를 포함하는 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기 제어방법.
- 제 1항에 있어서,상기 제스처 정보의 등록 여부를 판단하는 단계에서 인식된 제스처 정보가 기 저장된 전화번호 테이블에 등록되어 있지 않으면, 인식된 제스처 정보를 사용자가 지정하는 전화번호 테이블에 등록할 수 있도록 전화번호 수정 기능을 제공하는 단계를 포함하는 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기 제어방법.
- 제 1항에 있어서,상기 방법은,카메라 모듈을 통해 제스처 정보를 입력받는 단계; 및입력된 제스처 정보를 전화번호 생성/변경 기능을 통해 전화번호 테이블에 등록하는 단계를 더 포함하는 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기 제어방법.
- 제 3항에 있어서,상기 입력된 제스처 정보를 전화번호 생성/변경 기능을 통해 전화번호 테이블에 등록하는 단계는,외부 네트워크를 통해 메모리에 기 저장된 제스처 정보를 이용하는 것을 특징으로 하는 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기 제어방법.
- 카메라 모듈을 구비한 단말기에 있어서,제스처 정보와 그에 대응되는 전화번호를 저장하는 전화번호 테이블; 및제스처를 통한 통화 발신 기능으로 설정한 후 카메라 모듈을 통해 제스처 정보를 입력받게 되면 그 입력된 제스처 정보와 동일한 제스처 정보를 갖는 전화번호를 상기 전화번호 테이블로부터 확인하고 해당 전화번호를 통해 통화 발신을 수행하는 제어부를 포함하는 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기.
- 제 5항에 있어서,상기 제어부는,제스처를 통한 통화 발신 기능으로 설정하는 기능 설정부;카메라 모듈을 통한 제스처 정보를 인식하는 제스처 인식부;인식된 제스처 정보가 기 저장된 전화번호 테이블에 등록되어 있는지를 판단하는 등록 판단부; 및상기 등록 판단부를 통해 인식된 제스처 정보가 기 저장된 전화번호 테이블에 등록되어 있으면, 해당 전화번호를 이용하여 통화 발신을 수행하는 통화 처리부를 포함하는 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기.
- 제 6항에 있어서,상기 등록 판단부를 통해 인식된 제스처 정보가 기 저장된 전화번호 테이블에 등록되어 있지 않으면, 인식된 제스처 정보를 사용자가 지정하는 전화번호 테이블에 등록할 수 있도록 전화번호 수정 기능을 제공하는 제스처 등록부를 더 포함하는 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기.
- 제 6항에 있어서,상기 제스처 인식부는,외부 네트워크를 통해 메모리에 기 저장된 제스처 정보를 이용하는 것을 특징으로 하는 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020070104087A KR101442167B1 (ko) | 2007-10-16 | 2007-10-16 | 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기 및그 제어방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020070104087A KR101442167B1 (ko) | 2007-10-16 | 2007-10-16 | 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기 및그 제어방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20090038666A KR20090038666A (ko) | 2009-04-21 |
KR101442167B1 true KR101442167B1 (ko) | 2014-09-18 |
Family
ID=40762779
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020070104087A KR101442167B1 (ko) | 2007-10-16 | 2007-10-16 | 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기 및그 제어방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101442167B1 (ko) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11785140B2 (en) * | 2020-09-23 | 2023-10-10 | Avaya Management L.P. | Gesture-based call center agent state change control |
KR102509749B1 (ko) * | 2022-12-20 | 2023-03-14 | 아날로그플러스 주식회사 | 근접 사용자와의 무선통화 기능을 갖는 헬멧 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20050073920A (ko) * | 2004-01-12 | 2005-07-18 | 주식회사 팬택앤큐리텔 | 휴대용 단말기에서 눈동자 위치 정보를 이용한 통화 연결방법 |
KR20060133428A (ko) * | 2005-06-20 | 2006-12-26 | 삼성전자주식회사 | 카메라부를 이용한 유저 인터페이스 구현 방법 및 이를위한 이동통신단말기 |
-
2007
- 2007-10-16 KR KR1020070104087A patent/KR101442167B1/ko active IP Right Grant
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20050073920A (ko) * | 2004-01-12 | 2005-07-18 | 주식회사 팬택앤큐리텔 | 휴대용 단말기에서 눈동자 위치 정보를 이용한 통화 연결방법 |
KR20060133428A (ko) * | 2005-06-20 | 2006-12-26 | 삼성전자주식회사 | 카메라부를 이용한 유저 인터페이스 구현 방법 및 이를위한 이동통신단말기 |
Also Published As
Publication number | Publication date |
---|---|
KR20090038666A (ko) | 2009-04-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2041957B1 (en) | Voice remote control | |
US8046030B2 (en) | Methods, devices and computer program products for operating mobile devices responsive to user input through movement thereof | |
EP2961148B1 (en) | Method and device for obtaining voice service | |
JP2009539326A (ja) | 適応する機能を提供する無線通信装置 | |
KR100678201B1 (ko) | 휴대단말기에서 메인언어를 설정하는 방법 | |
CN101518036B (zh) | 通信设备和通信方法 | |
CN106774976A (zh) | 输入法切换方法及装置 | |
KR101442167B1 (ko) | 제스처 인식을 통한 통화 발신 기능을 지원하는 단말기 및그 제어방법 | |
CN103974215A (zh) | 电子设备控制方法及电子设备 | |
KR20050000143A (ko) | 음성인식을 이용한 이동통신 단말기의 카메라 동작방법 | |
JP2015103838A (ja) | 携帯端末装置、及び携帯端末プログラム | |
CN111507115A (zh) | 多模态语言信息人工智能翻译方法、系统和设备 | |
JP5365378B2 (ja) | 通話伝言システム及び通話伝言登録方法 | |
KR100608837B1 (ko) | 휴대단말기의 이미지에 따른 벨소리 구현 방법 | |
JP2010272967A (ja) | 電話装置の着信表示制御方法 | |
KR20060031472A (ko) | 이미지 단축 다이얼링 가능한 이동 통신 단말기와 그 방법 | |
US9807216B2 (en) | Phone device | |
CA2807788C (en) | Method and apparatus pertaining to telephone number display formatting | |
KR101308817B1 (ko) | 임시 모닝콜 제공을 위한 단말기 그리고 그 방법 | |
JP4967169B2 (ja) | 交換システム及び交換システムにおけるpcと電話機との連携方法 | |
JP2009212782A (ja) | 内線電話番号設定システムおよび内線電話番号設定方法 | |
JP3730983B2 (ja) | 電話交換機 | |
JP2007266762A (ja) | 通話端末装置、画面表示方法および画面表示プログラム | |
JP2008153823A (ja) | 携帯電話装置およびその着信転送制御方法 | |
CN101400175A (zh) | 移动通讯装置启动驱动程序的方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20170830 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20180830 Year of fee payment: 5 |