KR100370028B1 - Method for storing and displaying caption information of tv - Google Patents

Method for storing and displaying caption information of tv Download PDF

Info

Publication number
KR100370028B1
KR100370028B1 KR10-2000-0057821A KR20000057821A KR100370028B1 KR 100370028 B1 KR100370028 B1 KR 100370028B1 KR 20000057821 A KR20000057821 A KR 20000057821A KR 100370028 B1 KR100370028 B1 KR 100370028B1
Authority
KR
South Korea
Prior art keywords
caption
information
caption information
broadcasting
storing
Prior art date
Application number
KR10-2000-0057821A
Other languages
Korean (ko)
Other versions
KR20020026622A (en
Inventor
이광중
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR10-2000-0057821A priority Critical patent/KR100370028B1/en
Publication of KR20020026622A publication Critical patent/KR20020026622A/en
Application granted granted Critical
Publication of KR100370028B1 publication Critical patent/KR100370028B1/en

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/025Systems for the transmission of digital non-picture data, e.g. of text during the active part of a television frame
    • H04N7/035Circuits for the digital non-picture data signal, e.g. for slicing of the data signal, for regeneration of the data-clock signal, for error detection or correction of the data signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

사용자의 요구에 따라 현재 선국된 채널의 캡션정보를 저장하였다가 사용자가 요구하는 시기에 디스플레이할 수 있도록 한 티브이의 캡션정보 저장 및 디스플레이 방법에 관한 것으로서, 캡션(Caption)기능을 구비한 티브이에 있어서, 방송신호중 캡션정보와 방송안내정보를 추출하는 단계와, 캡션저장 모드가 '온'되면 방송안내정보에 따라 캡션정보를 분류하여 저장하는 단계와, 저장캡션 디스플레이 모드가 '온'되면 분류 저장된 캡션정보를 디스플레이 순위에 따라 디스플레이하는 단계를 포함하여 이루어지므로 사용자에게 편의를 제공함은 물론이고 다양한 정보활용의 기회를 부여할 수 있다.The present invention relates to a method of storing and displaying caption information of a TV that stores caption information of a channel currently tuned according to a user's request and displays the caption information of the currently tuned channel. Extracting the caption information and the broadcast guide information from the broadcast signal; classifying and storing the caption information according to the broadcast guide information when the caption storage mode is 'on'; and storing the closed caption when the storage caption display mode is 'on'. Since the information is displayed according to the display order, the user can be provided with convenience and have various information opportunities.

Description

티브이의 캡션정보 저장 및 디스플레이 방법{METHOD FOR STORING AND DISPLAYING CAPTION INFORMATION OF TV}TV caption information storage and display method {METHOD FOR STORING AND DISPLAYING CAPTION INFORMATION OF TV}

본 발명은 티브이에 관한 것으로서, 특히 티브이의 캡션정보 저장 및 디스플레이 방법에 관한 것이다.The present invention relates to a TV, and more particularly, to a method for storing and displaying caption information of a TV.

현재 방송채널 및 관련정보 등의 다양화에 따라 기본적인 영상 및 음성을 포함한 방송신호 이외에 부가적인 정보로서, 음성과 동기되는 캡션정보 및 방송안내정보가 서비스되고 있으며, 국내의 경우 방송안내정보로서 KBPS(Korea Broadcasting Program Service)가 제공되고 있다.According to the current diversification of broadcasting channels and related information, caption information and broadcasting guide information synchronized with voice are being provided as additional information in addition to the broadcast signal including basic video and audio. Korea Broadcasting Program Service) is being provided.

그리고 이와 같은 캡션정보 또는 KBPS는 CVBS(Composite Video Blanking Signal) 즉, 복합영상신호의 VBI(Vertical Blanking Internal) 구간의이븐필드(Even Field) 21번째 라인에 삽입되어 전송된다.The caption information or KBPS is inserted into the CVBS (Composite Video Blanking Signal), that is, the 21st line of the Even Field in the VBI (Vertical Blanking Internal) section of the composite video signal and transmitted.

상기 캡션정보 또는 KBPS를 수신하여 화면상에 디스플레이하기 위한 캡션 티브이의 구성을 살펴보면 도 1과 같이, CVBS로부터 VBI(Vertical Blanking Internal)구간의 이븐필드(Even Field) 21번째 라인에 삽입된 캡션정보를 추출하여 2바이트 단위로 출력하는 데이터추출부(1), 상기 데이터추출부(1)의 출력을 디코딩하여 그에 따른 제어코드 및 문자코드를 화면에 디스플레이 가능하도록 VRAM(3)에 저장하는 캡션디코더(2), RGB형식의 문자체를 저장하고 있는 폰트롬(5), 상기 VRAM(3)의 출력에 해당하는 RGB형식의 문자체를 폰트롬(5)으로 부터 읽어들여 OSD 형태로 출력시키기 위한 OSD구동부(4), 마이컴(8)의 제어신호에 따라 상기 OSD구동부(4)의 출력 또는 원방송신호 즉, CVBS를 선택출력하는 스위칭부(6), 상기 스위칭부(6)의 출력을 화면상에 디스플레이하는 디스플레이부(7)를 포함하여 구성된다.Looking at the configuration of the caption TV for receiving the caption information or KBPS to display on the screen, as shown in FIG. A caption decoder which extracts and outputs the data extracting unit 1 for output in units of 2 bytes, and decodes the output of the data extracting unit 1 and stores the control code and the character code in the VRAM 3 so as to be displayed on the screen. 2), an OSD driver for outputting an RGB format character corresponding to the output of the VRAM 3 from the font ROM 5 storing the RGB format character and outputting it in the OSD form. 4), the switching unit 6 for selectively outputting the output of the OSD driver 4 or the original broadcast signal, that is, CVBS according to the control signal of the microcomputer 8, and the output of the switching unit 6 are displayed on the screen. Four display unit 7 It is configured to.

이와 같이 구성된 티브이의 동작을 개략적으로 설명하면 다음과 같다. 먼저, 캡션기능이 설정된 상태에서 CVBS가 입력되면 데이터추출부(1)에서 상기 CVBS로부터 캡션정보를 추출하고 캡션디코더(2)가 상기 캡션정보를 문자코드와 제어코드로 디코딩한다.Referring to the operation of the TV configured as described above is as follows. First, when CVBS is input while the caption function is set, the data extraction unit 1 extracts caption information from the CVBS, and the caption decoder 2 decodes the caption information into a character code and a control code.

이때 제어코드는 화면상에 디스플레이할 위치를 지정하는 위치지정코드, 연속, 순간, 올림, 내림 등의 자막모드, 문자색, 배경색, 문자속성 등을 정의한다.In this case, the control code defines a position designation code for designating a position to be displayed on the screen, a caption mode such as continuous, instantaneous, up, and down, a text color, a background color, and a text attribute.

이어서 캡션디코더(2)는 상기 자막정보를 나타내는 문자코드를 위치지정코드에 상응하도록 VRAM(3)에 저장한다.The caption decoder 2 then stores the character code representing the caption information in the VRAM 3 so as to correspond to the positioning code.

그리고 VRAM(3)을 통해 출력된 데이터는 OSD구동부(4)에 의해 RGB형태의 문자로 변환되어 디스플레이부(7)를 통해 해당위치에 디스플레이된다.The data output through the VRAM 3 is converted into the characters of RGB form by the OSD driver 4 and displayed at the corresponding position through the display 7.

그러나 종래의 티브이는 현재 선국된 채널의 캡션정보를 바로 디스플레이하는 것으로, 상기 캡션정보는 일회성에 지나지 않으며, 이후 사용자가 원할시 다시 디스플레이하는 것은 불가능하다.However, the conventional TV is to display the caption information of the currently tuned channel immediately, the caption information is only a one-time, it is impossible to display again when the user wants.

종래의 기술에 따른 티브이는 현재시간에 선국된 채널의 캡션정보가 아닌 이전 시간대의 캡션정보를 디스플레이하는 것은 불가능하므로 다채널화 및 정보 다양화에 따른 사용자의 정보 활용욕구를 충족시키지 못하는 문제점이 있다.TV according to the prior art cannot display the caption information of the previous time zone other than the caption information of the channel tuned in at the present time, and thus there is a problem in that it cannot satisfy the user's desire to utilize information due to multi-channelization and information diversification. .

따라서 본 발명은 상기한 종래의 문제점을 해결하기 위하여 안출한 것으로서, 사용자의 요구에 따라 현재 선국된 채널의 캡션정보를 저장하였다가 사용자가 요구하는 시기에 디스플레이할 수 있도록 한 티브이의 캡션정보 저장 및 디스플레이 방법을 제공함에 그 목적이 있다.Accordingly, the present invention has been made to solve the above-described problems, and the caption information of the TV to store the caption information of the channel currently tuned according to the user's request and to display at the time required by the user and Its purpose is to provide a display method.

도 1은 일반적인 캡션 티브이의 구성을 나타낸 블록도1 is a block diagram showing the configuration of a general caption TV

도 2는 본 발명에 따른 티브이의 캡션정보 저장방법을 나타낸 플로우챠트2 is a flowchart illustrating a method of storing caption information of a TV according to the present invention.

도 3은 본 발명에 따른 티브이의 캡션정보 디스플레이 방법을 나타낸 플로우챠트3 is a flowchart illustrating a method of displaying caption information of a TV according to the present invention.

본 발명은 캡션(Caption)기능을 구비한 티브이에 있어서, 방송신호중 캡션정보와 방송안내정보를 추출하는 단계와, 캡션저장 모드가 '온'되면 방송안내정보에 따라 캡션정보를 분류하여 저장하는 단계와, 저장캡션 디스플레이 모드가 '온'되면 분류 저장된 캡션정보를 디스플레이 순위에 따라 디스플레이하는 단계를 포함하여 이루어짐을 특징으로 한다.According to the present invention, in a TV having a caption function, extracting caption information and broadcast guide information from a broadcast signal, and classifying and storing caption information according to the broadcast guide information when the caption storage mode is 'on'. And displaying the sorted stored caption information according to the display order when the storage caption display mode is 'on'.

이하, 첨부된 도면을 참조하여 본 발명에 따른 티브이의 캡션정보 저장 및 디스플레이 방법의 바람직한 일실시예를 상세히 설명하면 다음과 같다.Hereinafter, a preferred embodiment of a caption information storage and display method of a TV according to the present invention will be described in detail with reference to the accompanying drawings.

도 2는 본 발명에 따른 티브이의 캡션정보 저장방법을 나타낸 플로우챠트이고, 도 3은 본 발명에 따른 티브이의 캡션정보 디스플레이 방법을 나타낸 플로우챠트이다.2 is a flowchart illustrating a caption information storage method of a TV according to the present invention, and FIG. 3 is a flowchart illustrating a caption information display method of a TV according to the present invention.

먼저, 캡션정보 저장방법을 살펴보면, 도 2와 같이, 티브이의 전원이 '온'되면 방송신호를 수신하고 그중 캡션정보 및 KBPS를 추출한다(S21).First, referring to the caption information storage method, as shown in FIG. 2, when the TV is powered on, the broadcast signal is received and caption information and KBPS are extracted therefrom (S21).

이어서 캡션 디스플레이 모드가 '온'되었는지 판단하고(S22), '온'되지 않았으면 방송영상만을 디스플레이한다(S27).Subsequently, it is determined whether the caption display mode is 'on' (S22), and only the broadcast image is displayed (S27).

한편, 상기 판단결과(S22), 캡션 디스플레이 모드가 '온'되었으면 캡션 저장모드가 '온'되었는지 판단한다(S23). 이때 캡션 저장모드는 사용자가 리모컨 또는 키입력부의 소정 키를 눌러 온/오프시킬 수 있다.Meanwhile, if the caption display mode is 'on', the determination result (S22) determines whether the caption storage mode is 'on' (S23). In this case, the caption storage mode may be turned on / off by the user pressing a predetermined key of the remote controller or the key input unit.

상기 판단결과(S23), 캡션 저장모드가 '온'되었으면 기 추출된 KBPS 정보를 이용하여 현재 추출되는 캡션정보에 해당하는 방송국명, 프로그램 제목 및 시간 등을 검색한다(S25).As a result of the determination (S23), if the caption storage mode is 'on', the broadcasting station name, program title and time corresponding to the caption information currently extracted are searched using the extracted KBPS information (S25).

이어서 검색이 완료되면 해당 방송국/프로그램/방송시간별로 분류하여 해당 캡션정보를 저장한다(S26). 이때 캡션정보 저장을 위해 기존의 메모리 영역을 이용할 수도 있고 별도의 메모리를 사용할 수도 있다.Subsequently, when the search is completed, the corresponding caption information is classified by the broadcasting station / program / broadcasting time (S26). In this case, an existing memory area or a separate memory may be used for storing caption information.

한편, 판단결과(S23), 캡션 저장모드가 '온'되지 않았으면 현재 수신되는 방송영상 및 그에 포함된 캡션 정보를 도 1에서 상술한 일련의 캡션정보 처리과정을 거쳐 화면상에 디스플레이한다(S24).On the other hand, if the determination result (S23), the caption storage mode is not 'on', the currently received broadcast video and the caption information contained therein are displayed on the screen through the series of caption information processing described above with reference to FIG. ).

다음으로, 캡션정보 디스플레이 방법을 살펴보면, 도 3과 같이, 현재 캡션디스플레이 모드가 '온'되었는지 판단하고(S31), 캡션 디스플레이 모드가 '온'되었으면 저장캡션 디스플레이 모드가 '온'되었는지 판단한다(S33). 이때 저장캡션 디스플레이 모드는 리모컨 또는 키입력부의 소정 키를 눌러 온/오프시킬 수 있다.Next, referring to the caption information display method, as shown in FIG. 3, it is determined whether the current caption display mode is 'on' (S31), and if the caption display mode is 'on', it is determined whether the storage caption display mode is 'on' ( S33). In this case, the storage caption display mode may be turned on / off by pressing a predetermined key of the remote controller or the key input unit.

상기 판단결과(S33), 저장캡션 디스플레이 모드가 '온'되었으면 기저장된 캡션정보를 방송국/프로그램/방송시간별로 읽어들인다(S34). 예를 들어, 방송국에 대해 순위를 정하여 가장 순위가 높은 순서부터 낮은 순위로 방송국 프로그램의 캡션정보를 읽어들이거나, 방송시간 순위로 캡션정보를 읽어들인다.As a result of the determination (S33), if the storage caption display mode is 'on', the previously stored caption information is read for each broadcasting station / program / broadcast time (S34). For example, by ranking the broadcasting stations, the caption information of the broadcasting station program is read from the highest order to the lowest rank, or the caption information is read by the broadcasting time ranking.

그리고 캡션정보 디스플레이 모드가 전체 화면상에 캡션정보를 디스플레이하는 풀 텍스트(Full Text) 모드인지 아니면 일반적으로 캡션정보를 디스플레이하는 자막모드인지 파악하고(S35), 선택된 모드로 디스플레이한다(S36)(S37).The caption information display mode is a full text mode for displaying caption information on a full screen or a caption mode for displaying caption information in general (S35), and displays in the selected mode (S36) (S37). ).

한편, 상기 판단결과(S33), 저장캡션 디스플레이 모드가 아닐 경우, 방송영상과 현재 선택된 채널의 캡션정보를 도 1에서 상술한 일련의 캡션정보 처리과정을 거쳐 화면상에 디스플레이한다(S38).On the other hand, when the determination result (S33), the storage caption display mode is not, the caption information of the broadcast image and the currently selected channel is displayed on the screen through a series of caption information processing process described above in Figure 1 (S38).

본 발명에 따른 티브이의 캡션정보 저장 및 디스플레이 방법은 사용자가 원하는 캡션정보들을 방송국별/프로그램별/방송시간별로 분류 저장하였다가 필요할 때 디스플레이할 수 있으므로 사용자에게 편의를 제공함은 물론이고 다양한 정보활용의 기회를 부여할 수 있다.The caption information storage and display method of the TV according to the present invention can store and display the caption information desired by the user for each broadcasting station / program / broadcasting time and display it when necessary, thereby providing convenience to the user and utilizing various information. You can give it a chance.

Claims (5)

캡션(Caption)기능을 구비한 티브이에 있어서,In the TV with a caption function, 방송신호중 캡션정보와 방송안내정보를 추출하는 단계,Extracting caption information and broadcast guide information from the broadcast signal; 캡션저장 모드가 '온'되면 상기 방송안내정보에 따라 캡션정보를 분류하여 저장하는 단계,When the caption storage mode is 'on', classifying and storing caption information according to the broadcast guide information; 저장캡션 디스플레이 모드가 '온'되면 상기 분류 저장된 캡션정보를 디스플레이 순위에 따라 디스플레이하는 단계를 포함하여 이루어짐을 특징으로 하는 티브이의 캡션정보 저장 및 디스플레이 방법.And displaying the classified caption information according to the display order when the storage caption display mode is 'on'. 제1 항에 있어서,According to claim 1, 상기 방송안내정보는 KBPS(Korea Broadcasting Program Service)임을 특징으로 하는 티브이의 캡션정보 저장 및 디스플레이 방법.The caption information storage and display method of the TV, characterized in that the broadcasting guide information is KBPS (Korea Broadcasting Program Service). 제1 항에 있어서,According to claim 1, 상기 방송안내정보에 따라 캡션정보를 분류 저장하는 단계는 방송안내정보를 이용하여 현재 추출되는 캡션정보에 해당하는 방송국명/프로그램명/방송시간을 파악하고 상기 방송국/프로그램/방송시간을 기준으로 해당 캡션정보를 분류하여 저장하는 단계임을 특징으로 하는 티브이의 캡션정보 저장 및 디스플레이 방법.The step of classifying and storing caption information according to the broadcasting guide information includes identifying the broadcasting station name / program name / broadcast time corresponding to the caption information currently extracted using the broadcasting guide information and corresponding to the broadcasting station / program / broadcasting time. Caption information storage and display method of the TV, characterized in that the step of classifying and storing the caption information. 제1 항에 있어서,According to claim 1, 상기 디스플레이 순위는 분류 저장된 캡션정보에 해당하는 방송국, 프로그램 또는 방송시간중 하나 이상에 의해 설정됨을 특징으로 하는 티브이의 캡션정보 저장 및 디스플레이 방법.And the display rank is set by one or more of a broadcasting station, a program, or a broadcasting time corresponding to the classified and stored caption information. 제1 항에 있어서,According to claim 1, 상기 디스플레이 단계는 저장된 캡션정보를 사용자의 선택에 따라 화면전체에 디스플레이하거나 자막형태로 디스플레이하는 단계임을 특징으로 하는 티브이의 캡션정보 저장 및 디스플레이 방법.The displaying step of the caption information storage and display method of the TV, characterized in that for displaying the stored caption information on the whole screen or subtitle form according to the user's selection.
KR10-2000-0057821A 2000-10-02 2000-10-02 Method for storing and displaying caption information of tv KR100370028B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR10-2000-0057821A KR100370028B1 (en) 2000-10-02 2000-10-02 Method for storing and displaying caption information of tv

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR10-2000-0057821A KR100370028B1 (en) 2000-10-02 2000-10-02 Method for storing and displaying caption information of tv

Publications (2)

Publication Number Publication Date
KR20020026622A KR20020026622A (en) 2002-04-12
KR100370028B1 true KR100370028B1 (en) 2003-02-05

Family

ID=19691425

Family Applications (1)

Application Number Title Priority Date Filing Date
KR10-2000-0057821A KR100370028B1 (en) 2000-10-02 2000-10-02 Method for storing and displaying caption information of tv

Country Status (1)

Country Link
KR (1) KR100370028B1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100782835B1 (en) 2005-01-29 2007-12-06 삼성전자주식회사 A method of controlling presentation time and output priority of caption information and an apparatus thereof
KR101285657B1 (en) * 2006-09-27 2013-07-11 엘지전자 주식회사 A device for broadcasting and Method for providing broadcasting superimposed title in thereof

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR970009456A (en) * 1995-07-21 1997-02-24 김광호 Remote maintenance and operation management system in small capacity exchange
KR19990009348A (en) * 1997-07-09 1999-02-05 윤종용 Information display control method using KBPS data
KR20000041984A (en) * 1998-12-24 2000-07-15 전주범 Method for displaying automatically caption in television
KR20000055874A (en) * 1999-02-10 2000-09-15 구자홍 Apparatus for caption information processing of digital tv

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR970009456A (en) * 1995-07-21 1997-02-24 김광호 Remote maintenance and operation management system in small capacity exchange
KR19990009348A (en) * 1997-07-09 1999-02-05 윤종용 Information display control method using KBPS data
KR20000041984A (en) * 1998-12-24 2000-07-15 전주범 Method for displaying automatically caption in television
KR20000055874A (en) * 1999-02-10 2000-09-15 구자홍 Apparatus for caption information processing of digital tv

Also Published As

Publication number Publication date
KR20020026622A (en) 2002-04-12

Similar Documents

Publication Publication Date Title
KR100311468B1 (en) Apparatus and Method for Guiding Broadcasting Information of TV
EP0488379B1 (en) Text broadcast receiver
US7515212B2 (en) Digital broadcast receiver
JP3965239B2 (en) Receiver
JPH1028244A (en) Information display device
KR100370028B1 (en) Method for storing and displaying caption information of tv
KR20010001725A (en) Method for controlling display of a caption graphic signal
JP3694582B2 (en) Receiver
KR100364714B1 (en) Caption information storage / playback device and method
KR100308014B1 (en) apparatus and method for display caption of caption teleivision set
KR100977972B1 (en) Display device having script generating capability based on caption information and method of controlling the same
KR20050056441A (en) Display apparatus
KR100200602B1 (en) Recording reservation apparatus and method therefor
KR100247240B1 (en) Method and apparatus for reserving g-code by using kbps data
KR100198537B1 (en) Program information automatic guide method by using kbps signal
KR100287864B1 (en) Learning caption TV and its control method
KR19990013107U (en) Display language automatic selection device
JP3950894B2 (en) Receiver
JP3978214B2 (en) Receiver
KR950010605A (en) Broadcasting data storage device and VCR reservation recording device and method
KR100636782B1 (en) Caption data processing apparatus and the method thereof
JP3065128U (en) Video output device
JP2003348477A (en) Information display apparatus
KR100200131B1 (en) Osd united apparatus of television
GB2402289A (en) Teletext television with category establishing function to limit displayed pages

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
N231 Notification of change of applicant
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20111220

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20121227

Year of fee payment: 11

LAPS Lapse due to unpaid annual fee