KR20070084773A - The apparatus and method for text transformation of mobile telecommunication terminal - Google Patents
The apparatus and method for text transformation of mobile telecommunication terminal Download PDFInfo
- Publication number
- KR20070084773A KR20070084773A KR1020060016966A KR20060016966A KR20070084773A KR 20070084773 A KR20070084773 A KR 20070084773A KR 1020060016966 A KR1020060016966 A KR 1020060016966A KR 20060016966 A KR20060016966 A KR 20060016966A KR 20070084773 A KR20070084773 A KR 20070084773A
- Authority
- KR
- South Korea
- Prior art keywords
- voice
- text
- message
- mobile communication
- communication terminal
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/23—Construction or mounting of dials or of equivalent devices; Means for facilitating the use thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
- H04M2201/34—Microprocessors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
- H04M2201/39—Electronic components, circuits, software, systems or apparatus used in telephone systems using speech synthesis
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
- H04M2201/40—Electronic components, circuits, software, systems or apparatus used in telephone systems using speech recognition
Abstract
Description
도 1은 본 발명에 따른 이동통신 단말기의 텍스트 변환 장치를 나타낸 블록도.1 is a block diagram showing a text conversion apparatus of a mobile communication terminal according to the present invention;
도 2는 본 발명의 일 실시예에 따른 음성 데이터를 텍스트로 변환하는 변환부의 세부 기능을 나타낸 블록도. 2 is a block diagram illustrating a detailed function of a converter for converting voice data into text according to an embodiment of the present invention.
도 3은 본 발명의 일 실시예에 따른 이동통신 단말기의 텍스트 변환 방법을 나타낸 순서도.3 is a flowchart illustrating a text conversion method of a mobile communication terminal according to an embodiment of the present invention.
*******도면의 주요 부분에 대한 부호의 설명************** Explanation of symbols for main parts of drawings *******
10 : 입력부 20 : 제어부10: input unit 20: control unit
30 : 송신부 40 : 수신부30: transmitter 40: receiver
50 : 메모리 60 : 변환부50: memory 60: converter
70 : 출력부70: output unit
본 발명은 이동통신 단말기에 관한 것으로, 특히 음성 통화 기능이 구비된 이동통신 단말기에 관한 것이다.The present invention relates to a mobile communication terminal, and more particularly to a mobile communication terminal having a voice call function.
일반적으로 이동통신 서비스 사업자(provider)는 사용자에게 음성통화, 무선 인터넷 접속, VoD(Video on Demand) 서비스, 문자 및 멀티미디어 메시지 전송 및 무선 온라인 게임 등과 같은 통신 기능과 연계한 기능들을 제공하고, 이동통신 단말기 제조사(manufacture)는 사용자에게 카메라, 메모 작성, 스케줄 관리, 모닝콜 기능 등과 같은 통신 기능과 연계하지 않고 자체적으로 수행하는 기능들을 제공한다.Generally, a mobile service provider provides a user with functions associated with communication functions such as voice call, wireless Internet access, VoD (Video on Demand) service, text and multimedia message transmission, and wireless online game. The manufacturer provides users with functions that perform their own functions without being associated with communication functions such as cameras, note taking, schedule management, and wake-up calls.
이러한 기능들 중에서, 음성 통화 기능은 화자와 청자간의 음성을 상호 전송하기 위한 기능이며, 통화 내용 중 중요한 내용이나 기록을 요하는 내용이 있으면 음성 기록(Voice Recording) 기능을 이용하여 상호간에 통화중인 내용을 오디오 파일로 저장할 수도 있다.Among these functions, the voice call function is a function for mutually transmitting the voice between the speaker and the listener, and if there are important contents or contents requiring recording, the contents of the call are mutually communicated using the voice recording function. You can also save it as an audio file.
그런데, 통화 내용을 오디오 파일로 저장하여 기록하는 방법은 제한적인 단말기 메모리 용량으로 인해 한계가 있으며 메모리 용량을 늘리려면 추가적인 비용이 부담된다. 또한 오디오 파일로 기록 저장한 상태에서도 저장된 오디오 파일을 청취하면서 메모지 등에 내용을 다시 기록해야 하는 문제점이 있다.However, the method of recording and recording the call content as an audio file is limited due to the limited terminal memory capacity, and additional costs are required to increase the memory capacity. In addition, there is a problem in that the contents must be recorded again in a memo while listening to the stored audio file even in the state of recording and storing the audio file.
따라서, 본 발명의 목적은 음성 통화 시 상대방과의 통화 내용을 텍스트로 변환 후, 저장하는데 있다.Therefore, an object of the present invention is to convert the contents of the conversation with the other party during the voice call to text, and then store the contents.
상기의 목적을 달성하기 위하여 본 발명에 따른 이동통신 단말기는,In order to achieve the above object, a mobile communication terminal according to the present invention,
음성 통화시 음성 데이터를 수신하는 수신부와,A receiver for receiving voice data during a voice call;
상기 수신된 음성 데이터를 텍스트로 변환하는 변환부와,A converter for converting the received voice data into text;
상기 변환된 텍스트를 메시지에 기록하고, 상기 기록된 메시지의 저장을 제어하는 제어부로 구성되는 것을 특징으로 한다. And a controller for recording the converted text in a message and controlling storage of the recorded message.
또한, 상기의 목적을 달성하기 위하여 본 발명에 따른 이동통신 단말기의 텍스트 변환 방법은,In addition, the text conversion method of the mobile communication terminal according to the present invention to achieve the above object,
음성 통화시 음성 데이터를 수신하는 과정과,Receiving voice data during a voice call;
상기 수신된 음성 데이터를 텍스트로 변환하는 과정과,Converting the received voice data into text;
상기 변환된 텍스트를 메시지에 기록하고, 상기 기록된 메시지의 저장을 제어 하는 과정으로 이루어지는 것을 특징으로 한다.And recording the converted text in a message, and controlling the storage of the recorded message.
바람직하게, 상기 메시지는 상대방의 이름, 전화번호, 및/또는 통화 시간 등의 정보를 포함하는 것을 특징으로 한다.Preferably, the message may include information such as the name, phone number, and / or talk time of the other party.
이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시 예를 설명한다.Hereinafter, exemplary embodiments of the present invention will be described with reference to the accompanying drawings.
우선 본 발명을 설명함에 있어서, 관련된 공지기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단된 경우 그 상세한 설명은 생략한다.First, in describing the present invention, if it is determined that a detailed description of a related known function or configuration may unnecessarily obscure the subject matter of the present invention, the detailed description thereof will be omitted.
또한, 하기의 설명에서 구체적인 처리흐름과 같은 많은 특정 상세한 설명들은 본 발명의 보다 전반적인 이해를 제공하기 위해 나타나 있으며, 이들 특정 상세한 설명들 없이 본 발명이 실시될 수 있다는 것은 이 기술 분야에서 통상의 지식을 가진 자에게는 자명할 것이다.Also, in the following description, numerous specific details such as specific processing flows are shown to provide a more general understanding of the invention, and it is common knowledge in the art that the invention may be practiced without these specific details. It will be obvious to those who have.
본 발명의 기본 개념은 음성통화 중 중요한 내용이나 기록 및 저장하고 싶은 내용이 있으면 통화 내용을 텍스트로 변환하여 저장하는 데 있다.The basic concept of the present invention is to convert the contents of the call into text and store the important contents or contents to be recorded and stored in the voice call.
도 1은 본 발명에 따른 이동통신 단말기의 텍스트 변환 장치를 나타낸 블록도이다.1 is a block diagram illustrating a text conversion apparatus of a mobile communication terminal according to the present invention.
도 1에 도시된 바와 같이, 본 발명에 따른 단말기는 키패드, 마이크등을 포함하는 입력부(10)와, 상기 입력부(10)를 통해 입력되는 음성 데이터를 제어하고, 상대방 단말기로부터 수신되는 음성 데이터를 제어하는 제어부(20)와, 상기 제어된 음성 데이터를 송신하는 송신부(30)와, 상대방 단말기로부터 수신되는 음성 데이터를 수신하는 수신부(40)와, 상기 수신된 데이터를 스피커 등으로 출력하는 출력부(70)와, 상기 제어부(20)의 제어 하에 송수신되는 음성 데이터를 텍스트로 변환하는 변환부(60)와, 상기 변환된 텍스트를 저장하는 메모리(50)로 구성된다.As shown in FIG. 1, a terminal according to the present invention controls an
상기 변환부(60)는 통화중인 양측의 음성을 분석하여 텍스트로 변환하는 모듈이 구비되어 있으며, 상기 모듈은 제어부(20)의 제어 하에 각각의 자음 또는 모음 단위에 해당되는 주파수를 분석하여 상기 주파수 별로 메모리(50)에 저장된 각각의 자음 또는 모음에 해당된 코드를 리드하여 메모리(50)의 소정 영역에 저장하거나 또는 하나의 음절 단위로 주파수를 분석하고, 해당 코드를 리드하여 조합 후, 저장한다. 이러한 저장 과정은 저장하고자 하는 내용이 다 저장된 경우 단말기에 구비된 소정 키를 다시 입력함으로써 중지된다.The converting
추후, 상기 저장된 내용을 보고자 할 경우, 제어부(20)는 상기 메모리(50)에 저장된 내용을 리드하여 LCD 등의 표시부(미도시)에 디스플레이 한다.Later, in order to view the stored contents, the
이하, 도 1을 참조하여 본 발명에 따른 이동통신 단말기의 텍스트 변환 장치의 동작을 설명하면 다음과 같다.Hereinafter, the operation of the text conversion apparatus of the mobile communication terminal according to the present invention will be described with reference to FIG. 1.
음성통화가 진행 되는 중에 즉, 입력부(10)를 통해 입력된 음성 데이터가 제어부(20)의 제어 하에 송신부(30)를 통해 상대방 단말기에 전송되고, 상기 상대방 단말기로부터 전송되는 음성 데이터가 수신부(40)를 통해 수신되고, 상기 수신된 음성 데이터를 제어부(20)가 제어하여 출력부(70)에 출력이 되는 중에, 전화번호, 주소 등과 같이 메모나 기록을 해야 하는 중요한 정보를 저장하고자 할 경우, 상기 입력부(10)의 소정 키(예: 측면키, 볼륨 업/다운 키 등등)를 누르면, 음성 데이터를 텍스트로 변환하는 모듈이 동작하고, 상기 모듈로 인해서 기록 및 저장하고자 하는 통화 내용을 텍스트로 변환하고, 통화한 상대방 이름, 전화번호, 통화 시간등의 통화 정보와 변환된 텍스트를 포함하는 메시지를 메모리(50)에 저장한다.During the voice call, that is, voice data input through the
이와 같이, 본 발명에 따른 단말기는 송수신되는 음성의 주파수를 분석하고, 분석된 주파수에 해당되는 각각의 자음, 모음 또는 음절의 코드를 리드하여 텍스트로 변환하는 기능을 갖춘 변환부와 같이 별도의 장치를 구비해서 수행될 수 있거나 또는 위와 같은 기능을 프로그램화하여 제어부에 추가될 수 있다.As described above, the terminal according to the present invention analyzes the frequency of the transmitted / received voice and reads a code of each consonant, vowel or syllable corresponding to the analyzed frequency and converts it into text. It may be performed with or can be added to the control unit by programming the above functions.
도 2는 본 발명의 일 실시예에 따른 음성 데이터를 텍스트로 변환하는 변환부의 세부 기능을 나타낸 블록도이다.2 is a block diagram illustrating a detailed function of a converter for converting voice data into text according to an embodiment of the present invention.
도 2에 도시된 바와 같이, 본 발명의 일 실시예에 따른 변환부는 전처리 모듈(Pre-processing Module, 62)과, 상기 전처리 모듈로부터 전처리된 주파수를 통해 특징을 추출하는 특징 추출 모듈(Feature Extraction Module, 64)과, 메모리(50)에 기 저장된 음성 데이터들을 모델링 하는 Training 모듈(66)과, 상기 특징 추출 모 듈(64)로부터 추출된 특징과, 상기 Training 모듈(66)로 부터 모델링된 음성 데이터들 간에 패턴을 매칭시키는 패턴 매칭 모듈(Pattern Matching Module, 68)로 구성된다.As shown in FIG. 2, a converter according to an embodiment of the present invention extracts a feature through a
이하, 도 2를 참조하여, 본 발명의 일 실시예에 따른 변환부의 동작을 설명하면 다음과 같다.Hereinafter, an operation of the converter according to an embodiment of the present invention will be described with reference to FIG. 2.
음성 통화시 입출력되는 음성은 자음, 모음 또는 음절 별로 고유 주파수(또는 파형)을 가진다. 상기 전처리 모듈(62)은 이러한 음성 통화시 발생되는 사용자의 음성을 샘플링하여 신호 처리(Signal Processing)에 적합한 형태로 만들어 특징 추출 모듈(64)에 전송하고, 상기 특징 추출 모듈은 샘플링된 음성에서 특징을 추출하고, 불필요한 부분은 제거하고 패턴 매칭 모듈(68)로 전송한다.Voice input and output during a voice call has a unique frequency (or waveform) for each consonant, vowel or syllable. The
또한, 메모리(50)에는 수많은 화자들의 자음, 모음, 또는 음절등의 음성 데이터들이 각각의 코드가 할당된 채로 구분 정리 되어 저장되어 있으며 Training 모듈(66)에서 참조 패턴으로 이용되기 위해서 모델링된다. 상기 패턴 매칭 모듈(68)은 이와 같이 상기 Training 모듈(66)과, 상기 특징 추출 모듈(64)로 부터 수신된 데이터를 매칭 과정 과정을 통해 텍스트로 변환한다.In addition, in the
도 3은 본 발명의 일 실시예에 따른 이동통신 단말기의 텍스트 변환 방법을 나타낸 순서도이다.3 is a flowchart illustrating a text conversion method of a mobile communication terminal according to an embodiment of the present invention.
이하, 도 3을 참조하여 본 발명의 일 실시예에 따른 음성 데이터를 텍스트로 변환하는 방법을 상세히 설명하면 다음과 같다.Hereinafter, a method of converting voice data into text according to an embodiment of the present invention will be described in detail with reference to FIG. 3.
상대방과 음성 통화 중에 기억 또는 기록을 해야 하는 정보(즉, 전화번호, 주 소, 이름 등등)나 내용이 있는 경우, 단말기의 측면 키, 또는 방향키와 같이 단말기에 구비된 소정 키를 입력한다(S102). 상기 소정 키가 입력되면, 단말기는 음성을 텍스트로 변환하고자 하는 키로 인식하고, 상기 정보 또는 내용이 포함된 음성을 텍스트로 변환하는 모듈을 구동시킨다(S104). 상기 모듈이 구동되면, 상기 모듈은 단말기 사용자가 말하는 음성의 주파수를 분석하여 주파수에 해당되는 자음, 모음 또는 음절 단위로 해당 텍스트의 코드를 리드한다(S106). 상기 코드는 메모리에 기 저장되어 있으며, 상기 리드된 코드에 해당된 자음, 모음 또는 음절을 상기 메모리의 소정 영역에 저장한다(S108). 이와 같이, 말하는 음성의 주파수를 분석하고, 주파수에 해당되는 자음, 모음 또는 음절 단위로 코드를 리드하는 중에 저장을 종료하고자 하는 소정 키가 입력되지 않으면 즉, 기록 또는 저장하는 내용이 완료되지 않으면 상기 과정(S106)으로 궤환하고, 기록 또는 저장하고자 하는 내용이 완료되어 사용자가 저장을 종료하고자 하는 소정 키를 입력하면 통화자 이름, 통화한 시간, 통화자 전화번호의 정보와 저장하고자 하는 내용 등을 포함한 메시지를 저장한다(S110, S112). If there is information (i.e. phone number, address, name, etc.) or content that should be stored or recorded during a voice call with the other party, a predetermined key provided in the terminal, such as a side key or a direction key of the terminal, is input (S102). ). When the predetermined key is input, the terminal recognizes the voice as a key to be converted into text, and drives the module for converting the voice including the information or content into text (S104). When the module is driven, the module analyzes the frequency of the voice spoken by the terminal user and reads the code of the corresponding text in units of consonants, vowels or syllables corresponding to the frequency (S106). The code is pre-stored in a memory and stores consonants, vowels or syllables corresponding to the read code in a predetermined region of the memory (S108). In this way, while analyzing the frequency of the spoken voice and reading a code in units of consonants, vowels, or syllables corresponding to the frequency, if a predetermined key to end storage is not input, that is, if the recording or storing is not completed, After returning to step S106, and the contents to be recorded or stored are completed and the user inputs a predetermined key to end the storing, the caller name, the time of the call, the information of the caller's telephone number and the contents to be saved are displayed. Save the included message (S110, S112).
추후, 상기 저장된 내용을 확인하고자 하면 상기 메시지에 기록된 통화자 이름 또는 통화자 전화번호 등을 파악하여 표시부에 디스플레이 함으로써 사용자는 저장된 내용을 확인 할 수 있다(S116).Later, if the user wants to check the stored contents, the user can check the stored contents by identifying the caller name or the caller's telephone number recorded in the message and displaying them on the display unit (S116).
그리고, 본 발명은 도면에 도시된 실시 예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시 예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.In addition, the present invention has been described with reference to the embodiments shown in the drawings, which are merely exemplary, and those skilled in the art will understand that various modifications and equivalent other embodiments are possible therefrom. . Thus, seen The true technical protection scope of the invention should be defined by the technical spirit of the appended claims.
상술한 바와 같이, 본 발명은 통화 중에 기억 또는 기록하고자 하는 이름, 전화번호, 주소 등의 정보가 발생시 음성 통화 내용을 텍스트로 변환하여 저장함으로써, 추후 상기 정보를 확인 할 수 있는 효과가 있다.As described above, the present invention has the effect of confirming the information later by converting and storing the voice call contents into text when information such as name, phone number, address, etc. to be stored or recorded during a call occurs.
Claims (18)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020060016966A KR100774481B1 (en) | 2006-02-21 | 2006-02-21 | The apparatus and method for text transformation of mobile telecommunication terminal |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020060016966A KR100774481B1 (en) | 2006-02-21 | 2006-02-21 | The apparatus and method for text transformation of mobile telecommunication terminal |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20070084773A true KR20070084773A (en) | 2007-08-27 |
KR100774481B1 KR100774481B1 (en) | 2007-11-08 |
Family
ID=38612957
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020060016966A KR100774481B1 (en) | 2006-02-21 | 2006-02-21 | The apparatus and method for text transformation of mobile telecommunication terminal |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR100774481B1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100848148B1 (en) * | 2007-02-20 | 2008-07-28 | 고려대학교 산학협력단 | Apparatus and method for syllabled speech recognition and inputting characters using syllabled speech recognition and recording medium thereof |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100489203B1 (en) * | 1997-12-30 | 2005-09-02 | 엘지전자 주식회사 | The method and apparatus for communication of mobile radio communicator that converts voice to text service |
KR20020072637A (en) * | 2001-03-12 | 2002-09-18 | (주) 엘지텔레콤 | System for the voice exchange index using wireless communication terminal and the same method |
-
2006
- 2006-02-21 KR KR1020060016966A patent/KR100774481B1/en not_active IP Right Cessation
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100848148B1 (en) * | 2007-02-20 | 2008-07-28 | 고려대학교 산학협력단 | Apparatus and method for syllabled speech recognition and inputting characters using syllabled speech recognition and recording medium thereof |
Also Published As
Publication number | Publication date |
---|---|
KR100774481B1 (en) | 2007-11-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100819928B1 (en) | Apparatus for speech recognition of wireless terminal and method of thereof | |
CN102117614B (en) | Personalized text-to-speech synthesis and personalized speech feature extraction | |
US20090198497A1 (en) | Method and apparatus for speech synthesis of text message | |
KR102038827B1 (en) | An apparatus for answering a phone call when a recipient of the phone call decides that it is inappropriate to talk, and related method | |
CN101473636A (en) | Method and system for retrieving information | |
US20040189791A1 (en) | Videophone device and data transmitting/receiving method applied thereto | |
CN107135452A (en) | Audiphone adaptation method and device | |
JP2005065252A (en) | Cell phone | |
JP2011253389A (en) | Terminal and reply information creation program for pseudo conversation | |
KR20080054591A (en) | Method for communicating voice in wireless terminal | |
KR100941598B1 (en) | telephone communication system and method for providing users with telephone communication service comprising emotional contents effect | |
JP5233287B2 (en) | Mobile communication terminal | |
KR100774481B1 (en) | The apparatus and method for text transformation of mobile telecommunication terminal | |
CN105913841A (en) | Voice recognition method, voice recognition device and terminal | |
KR100380829B1 (en) | System and method for managing conversation -type interface with agent and media for storing program source thereof | |
CN101242440A (en) | A mobile phone with voice repeating function | |
KR20060065789A (en) | Method for voice announcing input character in portable terminal | |
CN111274828B (en) | Language translation method, system, computer program and handheld terminal based on message leaving | |
KR20180034927A (en) | Communication terminal for analyzing call speech | |
KR20100029356A (en) | Mobile communications terminal and method for delivering feeling of far end talker by vibration | |
KR100735885B1 (en) | Telephone terminal capable of filtering of talking message over the telephone and method thereof | |
WO2001069895A1 (en) | Telephonic device for deaf-mutes | |
KR20060063420A (en) | Voice recognition for portable terminal | |
JP2005123869A (en) | System and method for dictating call content | |
KR20020054568A (en) | Foreign language learning apparatus and method using mobile communication device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E90F | Notification of reason for final refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
G170 | Publication of correction | ||
FPAY | Annual fee payment |
Payment date: 20121026 Year of fee payment: 6 |
|
FPAY | Annual fee payment |
Payment date: 20131024 Year of fee payment: 7 |
|
FPAY | Annual fee payment |
Payment date: 20141024 Year of fee payment: 8 |
|
FPAY | Annual fee payment |
Payment date: 20151023 Year of fee payment: 9 |
|
LAPS | Lapse due to unpaid annual fee |