KR20050018562A - 인터렉티브 그래픽 스트림을 기록한 정보저장매체, 그재생장치 및 방법 - Google Patents

인터렉티브 그래픽 스트림을 기록한 정보저장매체, 그재생장치 및 방법

Info

Publication number
KR20050018562A
KR20050018562A KR1020040006976A KR20040006976A KR20050018562A KR 20050018562 A KR20050018562 A KR 20050018562A KR 1020040006976 A KR1020040006976 A KR 1020040006976A KR 20040006976 A KR20040006976 A KR 20040006976A KR 20050018562 A KR20050018562 A KR 20050018562A
Authority
KR
South Korea
Prior art keywords
language
information
stream
interactive graphic
menu
Prior art date
Application number
KR1020040006976A
Other languages
English (en)
Other versions
KR100611970B1 (ko
Inventor
박성욱
문성진
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=36168741&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=KR20050018562(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020040006976A priority Critical patent/KR100611970B1/ko
Priority to US10/822,772 priority patent/US20050039207A1/en
Priority to MYPI20042729A priority patent/MY137237A/en
Priority to TW093120428A priority patent/TWI270869B/zh
Priority to CA2527884A priority patent/CA2527884C/en
Priority to RU2005141133/09A priority patent/RU2347286C2/ru
Priority to AT04774130T priority patent/ATE472797T1/de
Priority to CN2007101125057A priority patent/CN101072312B/zh
Priority to PCT/KR2004/001760 priority patent/WO2005017766A1/en
Priority to PL10159278T priority patent/PL2207178T3/pl
Priority to CNB2004800167076A priority patent/CN100432984C/zh
Priority to DE602004027919T priority patent/DE602004027919D1/de
Priority to AT09158925T priority patent/ATE482450T1/de
Priority to EP10159278A priority patent/EP2207178B1/en
Priority to BRPI0411046-3A priority patent/BRPI0411046B1/pt
Priority to AT10159278T priority patent/ATE523879T1/de
Priority to DE602004029296T priority patent/DE602004029296D1/de
Priority to EP04774130.1A priority patent/EP1654671B2/en
Priority to CA2768683A priority patent/CA2768683C/en
Priority to EP09158925A priority patent/EP2077557B1/en
Priority to JP2006523120A priority patent/JP2007503067A/ja
Priority to ES10159278T priority patent/ES2372267T3/es
Publication of KR20050018562A publication Critical patent/KR20050018562A/ko
Priority to KR1020060054377A priority patent/KR100636253B1/ko
Publication of KR100611970B1 publication Critical patent/KR100611970B1/ko
Application granted granted Critical
Priority to HK08103854.1A priority patent/HK1114490A1/xx
Priority to HK06110090.2A priority patent/HK1089829A1/xx
Priority to US12/039,936 priority patent/US8437601B2/en
Priority to US12/061,736 priority patent/US8341526B2/en
Priority to JP2010132328A priority patent/JP5005796B2/ja
Priority to JP2010132327A priority patent/JP5005795B2/ja
Priority to JP2011066550A priority patent/JP5128690B2/ja

Links

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B19/00—Driving, starting, stopping record carriers not specifically of filamentary or web form, or of supports therefor; Control thereof; Control of operating function ; Driving both disc and head
    • G11B19/02—Control of operating function, e.g. switching from recording to reproducing
    • G11B19/022—Control panels
    • G11B19/025—'Virtual' control panels, e.g. Graphical User Interface [GUI]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B26—HAND CUTTING TOOLS; CUTTING; SEVERING
    • B26D—CUTTING; DETAILS COMMON TO MACHINES FOR PERFORATING, PUNCHING, CUTTING-OUT, STAMPING-OUT OR SEVERING
    • B26D7/00—Details of apparatus for cutting, cutting-out, stamping-out, punching, perforating, or severing by means other than cutting
    • B26D7/26—Means for mounting or adjusting the cutting member; Means for adjusting the stroke of the cutting member
    • B26D7/2614—Means for mounting the cutting member
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4856—End-user interface for client configuration for language selection, e.g. for the menu or subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/20—Disc-shaped record carriers
    • G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537—Optical discs
    • G11B2220/2562—DVDs [digital versatile discs]; Digital video discs; MMCDs; HDCDs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/84—Television signal recording using optical recording
    • H04N5/85—Television signal recording using optical recording on discs or drums

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Forests & Forestry (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Television Signal Processing For Recording (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
  • Processing Or Creating Images (AREA)

Abstract

멀티미디어 컨텐츠의 재생을 제어하는데 사용되는 인터렉티브 그래픽 스트림을 기록한 정보저장매체, 그 재생장치 및 방법이 개시된다. 본 발명의 정보저장매체는, AV 데이터; 상기 AV 데이터의 재생에 관련된 네비게이션 커맨드의 집합인 네비게이션 데이터; 및 상기 AV 데이터의 재생을 제어하는 것으로서, 상기 네비게이션 커맨드에 의해서만 그 언어정보가 변경될 수 있고, 사용자 오퍼레이션에 의해서는 변경될 수 없는 인터렉티브 그래픽 스트림을 포함한다. 본 발명은, 여러 언어로 작성된 문자 정보와 각 언어에 공통으로 사용되는 데이터를 다중화하여 하나의 메뉴 스트림에 저장하므로써, 데이터를 중복하여 저장하지 않으므로 저장공간을 절약할 수 있는 효과가 있다.

Description

인터렉티브 그래픽 스트림을 기록한 정보저장매체, 그 재생장치 및 방법 {Information storage medium containing interactive graphic stream, and reproducing apparatus and method thereof}
본 발명은 인터렉티브 데이터에 관한 것으로, 구체적으로는 멀티미디어 컨텐츠의 재생을 제어하는데 사용되는 인터렉티브 그래픽 스트림을 기록한 정보저장매체, 그 재생장치 및 방법에 관한 것이다.
사용자에게 제공된 멀티미디어 컨텐츠를 제어하기 위해서 멀티미디어 컨텐츠를 다루기 위한 메뉴도 함께 사용자에게 제공된다. 이러한 메뉴를 통하여, 컨텐츠 제작자는 멀티미디어 컨텐츠에 대한 여러 가지 선택 사항들을 사용자에게 제공하고, 사용자는 이들 선택 사항들 중에서 하나를 선택함으로써 영화재생과 같은 AV 스트림의 단순한 재생 뿐만 아니라 챕터별 재생, 보너스 영상 보기 등의 기능을 제공받는다.
멀티미디어 컨텐츠를 다루기 위한 메뉴는 문자 정보를 포함하고 있다. 여기서 문자정보라 함은 문자가 들어가 있는 정보를 말한다. 즉 한국어, 영어, 일본어 등 각 언어별로 만들어진 멀티미디어 컨텐츠에 관한 정보를 말한다. 멀티미디어 컨텐츠를 제작하여 사용자에게 제공하는 컨텐츠 제작자는 여러 언어를 사용하는 사람들에게 이러한 컨텐츠를 저장한 저장매체를 판매하기 위하여 여러 가지 언어로 만들어진 메뉴를 만들어 저장매체에 저장한다. 종래의 DVD의 경우는 이러한 메뉴를 구성하는 데이터들이 각 언어마다 별도로 만들어져 저장되어 있다. 그 이유는 DVD 재생장치에서 이들 데이터를 제어하는 것을 간단하게 하기 위함이었다.
도 1은 DVD의 언어유닛(language unit)에 저장되어 있는 각 언어별 메뉴 스트림을 도시한 도면이다.
여기서 메뉴 스트림이란 오디오, 비디오, 서브 픽처, 하이라이트 정보 등을 포함하여 만들어진 메뉴가 하나의 스트림으로 다중화되어 있는 것을 말한다. 도 1을 참조하면 각 언어별로 메뉴 스트림이 따로따로 만들어져 저장되어 있음을 알 수 있다.
도 2는 DVD 재생장치가 미리 설정된 시스템 파라미터에 따라서 언어를 선택하여 선택된 언어로 만들어진 메뉴 스트림을 재생하는 재생장치의 블록도이다.
도 2를 참조하면, DVD 재생장치는 미리 결정된 규칙에 의하여 사용자가 설정한 언어에 해당하는 메뉴를 선택한다. 미리 설정한 언어 정보는 시스템 파라미터 저장부(210)에 저장되어 있다. 메뉴 언어 선택부(220)는 예를 들어, 시스템 파라미터 0번(system parameter #0 : SPRM0)에 저장된 메뉴 언어 코드(Menu Language Code) 정보를 읽어, 메뉴 언어 코드와 동일한 값을 갖는 메뉴 스트림을 도 1을 참조하여 상술한 메뉴 스트림 중에서 하나를 선택하여 읽어온다. 디코더(230)는 읽어온 메뉴 스트림을 재생한다.
이와 같이 각각의 언어에 대해서 메뉴를 별개로 만들면, 데이터량이 많은 비디오 데이터와 같이 언어에 제약을 받는 문자 정보가 아닌 정보들도 각 언어별로 만들어진 메뉴에 각각 포함되므로 저장공간의 낭비가 심하다. 또한 비디오를 재생하는 중간에 언어를 변경하는 것이 불가능하다는 문제점이 있다. 또한 메뉴를 선택하는 방법이 미리 정해져 있어서, 언어 이외의 기준으로 메뉴를 선택할 수 없다는 문제점이 있다.
본 발명이 이루고자 하는 기술적 과제는, 네비게이션 커맨드에 의해서만 언어정보가 변경될 수 있고 사용자 오퍼레이션에 의해서는 변경될 수 없는 인터렉티브 그래픽 스트림을 기록한 정보저장매체를 제공하는데 있다.
본 발명이 이루고자 하는 다른 기술적 과제는, 여러 언어로 작성된 문자 정보와 각 언어에 공통으로 사용되는 데이터를 다중화한 메뉴 스트림중에서 하나를 선택하고 재생하는 장치 및 방법을 제공하는데 있다.
상기의 과제를 이루기 위하여 본 발명에 의한 정보저장매체는, AV 데이터; 상기 AV 데이터의 재생에 관련된 네비게이션 커맨드의 집합인 네비게이션 데이터; 및 상기 AV 데이터의 재생을 제어하는 것으로서, 상기 네비게이션 커맨드에 의해서만 그 언어정보가 변경될 수 있고, 사용자 오퍼레이션에 의해서는 변경될 수 없는 인터렉티브 그래픽 스트림을 포함한다.
상기의 과제를 이루기 위하여 본 발명에 의한 멀티미디어 데이터 재생장치는, 상기 멀티미디어 데이터의 재생을 제어하는 인터렉티브 그래픽 스트림의 언어정보를 포함하는 속성정보를 저장하고 있는 메모리; 상기 언어정보에 따라 그 언어로 만들어진 인터렉티브 그래픽 스트림을 선택하는 프로그램을 로드하여 실행하는 프로세서; 및 상기 선택된 인터렉티브 그래픽 스트림을 수신하여 디코딩하는 디코더를 포함한다.
상기의 과제를 이루기 위하여 본 발명에 의한 멀티미디어 데이터를 재생하는 방법은, (a) 상기 멀티미디어 데이터의 재생을 제어하는 인터렉티브 그래픽 스트림의 언어정보를 포함하는 속성정보를 읽는 단계; (b) 상기 언어정보에 따라 그 언어로 만들어진 인터렉티브 그래픽 스트림을 선택하는 프로그램을 로드하여 실행하는 단계; 및 (c) 상기 선택된 인터렉티브 그래픽 스트림을 수신하여 디코딩하는 단계를 포함한다.
상기한 과제를 이루기 위하여 본 발명에서는, 상기 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체를 제공한다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일실시예를 상세히 설명한다.
도 3은 언어별로 만들어진 메뉴 스트림 중에서 레지스터에 저장된 값에 대응되는 메뉴 스트림이 재생되는 것을 도시한 도면이다.
여기서 메뉴 스트림은 멀티미디어 데이터의 재생을 제어하는데 사용되는 사용자 인터렉션 데이터로서 인터렉티브 그래픽 스트림이라고 한다. 인터렉티브 그래픽 스트림은 멀티미디어 데이터의 재생에 관련된 네비게이션 커맨드에 의해서만 변경될 수 있고, 사용자 오퍼레이션에 의해서는 변경될 수 없다. 네비게이션 커맨드는 네비게이션 레지스터를 여러개 가지고 있는데 그중에는 재생장치의 상태를 나타내는 플레이어 상태 레지스터(Player Status Register, PSR)가 있다. 플레이어 상태 레지스터에 대해서는 표 1을 참조하여 후술한다.
처음 레지스터에 저장된 값이 2라고 하면 영어로 만들어진 메뉴 스트림이 재생된다. 그리고 하나의 플레이 아이템(playitem)의 재생이 끝나면 다음 플레이 아이템을 재생하여야 하는데, 영어로 만들어진 플레이 아이템이 존재하지 않을 수도 있는데, 이 경우에 한국어로 만들어진 플레이 아이템이 재생되다가 다시 영어로 만들어진 플레이 아이템이 재생될 수도 있고(310), 아니면 한국어 플레이 아이템은 건너뛰고 그대로 영어 플레이 아이템만 재생될 수도 있다(320). 이렇게 재생중에 다른 언어의 메뉴 스트림을 재생하기 위해서는 소정의 레지스터에 저장된 값을 읽어 그 값과 메뉴 스트림의 언어에 해당하는 아이디 값을 비교하는 과정을 거친다.
도 4는 메뉴 스트림의 재생장치의 블록도이다.
재생장치(400)에 처음 전원이 가해지거나 또는 사용자가 메뉴선택 프로그램을 실행시키면 프로세서(420)는 프로그램(440)을 로드하여 실행시킨다. 이 프로그램(440)은 재생장치의 시스템 레지스터(410)에 미리 설정되어 있는 정보를 이용하여 여러 가지 언어로 만들어진 메뉴 중에서 하나를 선택한다. 디코더(430)는 이렇게 선택된 언어로 만들어진 메뉴 데이터를 수신하여 디코딩한다.
여러 가지 언어의 다중화된 메뉴 데이터 중에서 하나를 결정하는 방법으로 여러가지가 있다. 우선, 사전에 사용자 또는 재생장치 생산자에 의해 설정된 메뉴 언어 정보에 해당하는 문자정보를 선택한다. 또는 부모 레벨(parental level)이라고 하는 시청등급설정 정보를 활용하여 성인용 메뉴와 어린이용 메뉴를 따로 재생하는 방법이 있다. 그리고, 사용자가 원하는 메뉴 언어가 없는 경우 서브타이틀(subtitle) 또는 오디오 언어를 기초하여 사용자에게 특정 메뉴를 재생하여 표시하는 방법이 있다. 그리고 일반 목적용 레지스터(general purpose register)를 활용하여 그 레지스터에 저장된 값에 대응되는 메뉴를 재생하는 방법 등이 있다.
표 1은 플레이어 상태 레지스터(Player Status Register, PSR)를 나타낸다.
Value Name Meaning
0 Interactive Graphics Interactive Graphics Stream Number
1 Audio Audio Stream Number
2 Presentation Graphics Presentation Graphics Stream Number
3 Angle Angle Number
4 Title Title Number
5 Chapter Chapter Number
6 PlayList PlayList Number
7 PlayItem PlayItem Number
8 Presentation Time Presentation Time in 90Khz
9 Timer Navigation Timer
10 Selected Button Button Number in Selected State
11 - reserved
12 - reserved
13 Parental Parental Level
14 Video Configuration Player Configuration for Video
15 Audio Configuration Player Configuration for Audio
16 Audio Language Language Code for Audio
17 Subtitle Language Language Code for Presentation Graphics
18 Menu Language Language Code for Menu Description
19 Interactive Graphics Language Language Code for Interactive Graphics
20 - reserved
... ... ...
63 - reserved
표 1을 참조하면, 상술한 언어 정보 등이 여러개의 플레이어 상태 레지스터에 기록됨을 알 수 있다. 예를 들어 메뉴 언어 정보는 PSR 18번 레지스터에 기록되어 있는데, 초기에 이 PSR 18번 레지스터를 읽어서 그 값이 한국어(ko)에 해당되면 PSR 0번 레지스터를 0 으로, 영어(en)이면 PSR 0번 레지스터를 1로 설정하고 플레이 리스트를 플레이한다. PSR 0번 레지스터의 값이 0인가 1인가에 따라 한국어 메뉴 스트림을 재생할 것인가 영어 메뉴 스트림을 재생할 것인가 하는 것은 미리 설정되어 있다.
도 4를 참조하면 메뉴 스트림은 오디오, 비디오와 같은 공유 스트림과 여러 가지 언어로 만들어진 문자 정보 스트림으로 구성되어 있음을 알 수 있다. 여러가지 언어로 작성된 문자 정보 스트림은 텍스트 뿐만 아니라 그래픽 데이터가 될 수도 있다. 도 4에서는 이러한 문자 정보 스트림이 메뉴 스트림 내에 포함되어 있는 경우를 도시한 것이다.
사용자 또는 재생장치 생산자에 의해서 하나의 언어가 선택하면 프로세서(420)는 선택한 언어 정보를 디코더(430)에 전달하고, 디코더(430)는 복수개의 다중화된 메뉴 스트림 중에서 하나를 선택하여 복호화한다. 이때 메뉴 스트림의 데이터 형식은 텍스트 또는 그래픽 등 다양한 형식을 가질 수 있으나 통상적으로는 그래픽을 많이 사용한다.
도 5는 메뉴 스트림 중에서 하나를 선택하는 방법의 플로우차트이다.
도 5를 참조하면, 전원이 인가되거나 사용자의 명령 등에 의해 프로그램이 하나의 메뉴 스트림을 선택하여 재생하는 경우와, 영화의 재생 중 영화 스트림과 함께 다중화되어 있는 프로그램에 의해 하나의 메뉴 스트림이 선택되어 재생되는 경우를 보여 준다.
메뉴 언어 레지스터(menu language register)에는 메뉴 스트림의 아이디가 저장되어 있다. 우선 메뉴 언어와 동일한 언어의 메뉴 스트림 아이디를 소정의 레지스터에 저장한다(S510). 즉, 프로그램은 메뉴 언어 레지스터(menu language register)에 저장된 언어에 해당하는 메뉴 스트림의 아이디 정보를 찾아서, 현재 재생되고 있는 메뉴 스트림의 수를 저장하는 소정의 레지스터에 저장한다. 만일 해당하는 메뉴 스트림이 존재하지 않는다면 디폴트(default) 값으로 0을 저장한다.
상기 레지스터에 스트림 아이디를 저장한 후 영화 클립(movieclip)을 재생하는 명령을 수신한다(S520). 이때 영화 클립은 동영상을 이용하여 구성된 메뉴 또는 영화 콘텐츠 자체일 수도 있다. 그리고, 영화 클립을 재생하기 전에 만일 프로그램에 의해서 설정된 레지스터 값이 유효한 값인지 다시 확인한다(S530). 확인하는 방법은 선택된 영화 클립에 다중화되어 있는 메뉴 스트림 수 중에 레지스터에 저장된 값이 존재하는가를 판단한다. 만일 존재한다면 유효하다고 판단하여 이미 저장된 값을 유지하며, 존재하지 않는다면 유효하지 않은 레지스터 값으로 판단하여 디폴트 값인 0으로 바꾸어 저장한다. 그리고 레지스터에 저장된 값에 대응되는 메뉴 스트림이 존재하면 복호화하여 재생한다(S540). 그러다가 다른 언어를 선택하는 명령이 수신되면(S550), 상기 오류를 체크하는 단계(S530)로 되돌아간다.
도 6은 메뉴 스트림이 영화 스트림에 포함되어 있는 경우의 재생장치의 동작을 도시한 도면이다.
도 6을 참조하면 영화 스트림의 특정 부분에 컨텐트 제공업자가 사전에 준비하였던 프로그램이 포함되어 있음을 알 수 있다. 이때 프로세서(620)는 이 프로그램을 실행하면서 프로그램 자체와 재생장치에 저장되어 있는 레지스터값(610)들, 사용자 입력 등을 활용하여 메뉴 스트림을 결정한다. 이렇게 선택된 메뉴 스트림은 디코더(630)에 의해서 오디오, 비디오 등 다른 스트림과 함께 재생된다.
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
상술한 바와 같이 본 발명은 여러 언어로 작성된 문자 정보와 각 언어에 공통으로 사용되는 데이터를 다중화하여 하나의 메뉴 스트림에 저장하므로써, 데이터를 중복하여 저장하지 않으므로 저장공간을 절약할 수 있는 효과가 있다.
도 1은 DVD의 언어유닛(language unit)에 저장되어 있는 각 언어별 메뉴 스트림을 도시한 도면이다.
도 2는 DVD 재생장치가 미리 설정된 시스템 파라미터에 따라서 언어를 선택하여 선택된 언어로 만들어진 메뉴 스트림을 재생하는 재생장치의 블록도이다.
도 3은 언어별로 만들어진 메뉴 스트림 중에서 레지스터에 저장된 값에 대응되는 메뉴 스트림이 재생되는 것을 도시한 도면이다.
도 4는 메뉴 스트림의 재생장치의 블록도이다.
도 5는 메뉴 스트림 중에서 하나를 선택하는 방법의 플로우차트이다.
도 6은 메뉴 스트림이 영화 스트림에 포함되어 있는 경우의 재생장치의 동작을 도시한 도면이다.

Claims (12)

  1. AV 데이터;
    상기 AV 데이터의 재생에 관련된 네비게이션 커맨드의 집합인 네비게이션 데이터; 및
    상기 AV 데이터의 재생을 제어하는 것으로서, 상기 네비게이션 커맨드에 의해서만 그 언어정보가 변경될 수 있고, 사용자 오퍼레이션에 의해서는 변경될 수 없는 인터렉티브 그래픽 스트림을 포함하는 것을 특징으로 하는 정보저장매체.
  2. 제1항에 있어서, 상기 인터렉티브 그래픽 스트림은
    상기 AV 데이터의 재생에 사용되는 메뉴 스트림인 것을 특징으로 하는 정보저장매체.
  3. 멀티미디어 데이터 재생장치에 있어서,
    상기 멀티미디어 데이터의 재생을 제어하는 인터렉티브 그래픽 스트림의 언어정보를 포함하는 속성정보를 저장하고 있는 메모리;
    상기 언어정보에 따라 그 언어로 만들어진 인터렉티브 그래픽 스트림을 선택하는 프로그램을 로드하여 실행하는 프로세서; 및
    상기 선택된 인터렉티브 그래픽 스트림을 수신하여 디코딩하는 디코더를 포함하는 것을 특징으로 하는 재생장치.
  4. 제3항에 있어서,
    상기 인터렉티브 그래픽 스트림은 사용자 오퍼레이션에 의해 변경될 수 없는 메뉴 스트림인 것을 특징으로 하는 재생장치.
  5. 제3항에 있어서,
    상기 속성정보는 메뉴 언어 정보, 시청 등급 정보, 서브 타이틀 언어 정보 및 오디오 언어정보를 포함하는 것을 특징으로 하는 재생장치.
  6. 제3항에 있어서,
    상기 프로그램은 상기 인터렉티브 그래픽 스트림내에 포함되어 있는 것을 특징으로 하는 재생장치.
  7. 제3항에 있어서,
    상기 인터렉티브 그래픽 스트림은, 문자정보를 언어별로 가지고 있으며 언어와 무관한 정보는 서로 공유하여 구성되어 있는 것을 특징으로 하는 재생장치.
  8. 제7항에 있어서,
    상기 문자정보는 텍스트 데이터 또는 그래픽 데이터 형식으로 저장되어 있는 것을 특징으로 하는 재생장치.
  9. 멀티미디어 데이터를 재생하는 방법에 있어서,
    (a) 상기 멀티미디어 데이터의 재생을 제어하는 인터렉티브 그래픽 스트림의 언어정보를 포함하는 속성정보를 읽는 단계;
    (b) 상기 언어정보에 따라 그 언어로 만들어진 인터렉티브 그래픽 스트림을 선택하는 프로그램을 로드하여 실행하는 단계; 및
    (c) 상기 선택된 인터렉티브 그래픽 스트림을 수신하여 디코딩하는 단계를 포함하는 것을 특징으로 하는 재생방법.
  10. 제9항에 있어서,
    상기 인터렉티브 그래픽 스트림은 사용자 오퍼레이션에 의해 변경될 수 없는 메뉴 스트림인 것을 특징으로 하는 재생방법.
  11. 제9항에 있어서,
    상기 속성정보는 메뉴언어 정보, 시청 등급 정보, 서브 타이틀 언어 정보 및 오디오 언어정보를 포함하는 것을 특징으로 하는 멀티미디어 데이터 재생방법.
  12. 제6항에 있어서,
    상기 인터렉티브 그래픽 스트림은, 문자정보를 언어별로 가지고 있으며 언어와 무관한 정보는 서로 공유하여 구성되어 있는 것을 특징으로 하는 멀티미디어 데이터 재생방법.
KR1020040006976A 2003-08-16 2004-02-03 인터렉티브 그래픽 스트림을 기록한 정보저장매체 및 그 재생장치 KR100611970B1 (ko)

Priority Applications (30)

Application Number Priority Date Filing Date Title
KR1020040006976A KR100611970B1 (ko) 2003-08-16 2004-02-03 인터렉티브 그래픽 스트림을 기록한 정보저장매체 및 그 재생장치
US10/822,772 US20050039207A1 (en) 2003-08-16 2004-04-13 Information storage medium containing interactive graphic stream, and reproducing apparatus and method thereof
MYPI20042729A MY137237A (en) 2003-08-16 2004-07-08 Information storage medium containing interactive graphics stream, and reproducing apparatus and method thereof
TW093120428A TWI270869B (en) 2003-08-16 2004-07-08 Information storage medium containing interactive graphics stream, and reproducing apparatus and method thereof
BRPI0411046-3A BRPI0411046B1 (pt) 2003-08-16 2004-07-15 mídia de armazenamento de informações e aparelho de reprodução de dados de multimídia
EP09158925A EP2077557B1 (en) 2003-08-16 2004-07-15 Information storage medium containing interactive graphic stream, and reproducing apparatus and method thereof
AT04774130T ATE472797T1 (de) 2003-08-16 2004-07-15 Einen interaktiven graphikstrom enthaltendes informationsspeichermedium und wiedergabevorrichtung und verfahren dafür
CN2007101125057A CN101072312B (zh) 2003-08-16 2004-07-15 包含交互式图形流的信息存储介质的再现设备和方法
PCT/KR2004/001760 WO2005017766A1 (en) 2003-08-16 2004-07-15 Information storage medium containing interactive graphic stream, and reproducing apparatus and method thereof
PL10159278T PL2207178T3 (pl) 2003-08-16 2004-07-15 Nośnik pamięci informacji zawierający interaktywny strumień graficzny, oraz urządzenie i sposób odtwarzania
CNB2004800167076A CN100432984C (zh) 2003-08-16 2004-07-15 包含交互式图形流的信息存储介质的再现设备和方法
DE602004027919T DE602004027919D1 (de) 2003-08-16 2004-07-15 Einen interaktiven graphikstrom enthaltendes informationsspeichermedium und wiedergabevorrichtung und verfahren dafür
AT09158925T ATE482450T1 (de) 2003-08-16 2004-07-15 Informationsspeichermedium mit interaktivem grafikstrom und wiedergabevorrichtung und verfahren dafür
EP10159278A EP2207178B1 (en) 2003-08-16 2004-07-15 Information storage medium containing interactive graphic stream, and reproducing apparatus and method thereof
CA2527884A CA2527884C (en) 2003-08-16 2004-07-15 Information storage medium containing interactive graphic stream, and reproducing apparatus and method thereof
AT10159278T ATE523879T1 (de) 2003-08-16 2004-07-15 Informationsspeichermedium mit interaktivem grafikstrom und wiedergabevorrichtung und verfahren dafür
DE602004029296T DE602004029296D1 (de) 2003-08-16 2004-07-15 Informationsspeichermedium mit interaktivem Grafikstrom und Wiedergabevorrichtung und Verfahren dafür
EP04774130.1A EP1654671B2 (en) 2003-08-16 2004-07-15 Information storage medium containing interactive graphic stream, and reproducing apparatus and method thereof
CA2768683A CA2768683C (en) 2003-08-16 2004-07-15 Information storage medium containing interactive graphic stream, and reproducing apparatus and method thereof
RU2005141133/09A RU2347286C2 (ru) 2003-08-16 2004-07-15 Носитель информационных данных, содержащий диалоговый графический поток, воспроизводящее устройство и способ для них
JP2006523120A JP2007503067A (ja) 2003-08-16 2004-07-15 インタラクティブグラフィックストリームを記録した情報記録媒体、その再生装置及び方法
ES10159278T ES2372267T3 (es) 2003-08-16 2004-07-15 Soporte de almacenamiento de información que contiene un flujo de gráficos interactivos y aparato de reproducción y procedimiento correspondientes.
KR1020060054377A KR100636253B1 (ko) 2003-08-16 2006-06-16 재생 방법
HK08103854.1A HK1114490A1 (en) 2003-08-16 2006-09-12 Reproducing apparatus and method of information storage medium containing interactive graphic stream
HK06110090.2A HK1089829A1 (en) 2003-08-16 2006-09-12 Reproducing apparatus and method of information storage medium containing interactive graphic stream
US12/039,936 US8437601B2 (en) 2003-08-16 2008-02-29 Method of reproducing interactive graphic streams from information storage medium
US12/061,736 US8341526B2 (en) 2003-08-16 2008-04-03 Method of reproducing interactive graphic streams from information storage medium
JP2010132328A JP5005796B2 (ja) 2003-08-16 2010-06-09 インタラクティブグラフィックストリームを記録した情報記録媒体、その再生装置及び方法
JP2010132327A JP5005795B2 (ja) 2003-08-16 2010-06-09 インタラクティブグラフィックストリームを記録した情報記録媒体、その再生装置及び方法
JP2011066550A JP5128690B2 (ja) 2003-08-16 2011-03-24 インタラクティブグラフィックストリームを記録した情報記録媒体の再生装置

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020030056725 2003-08-16
KR20030056725 2003-08-16
KR1020040006976A KR100611970B1 (ko) 2003-08-16 2004-02-03 인터렉티브 그래픽 스트림을 기록한 정보저장매체 및 그 재생장치

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020060054377A Division KR100636253B1 (ko) 2003-08-16 2006-06-16 재생 방법

Publications (2)

Publication Number Publication Date
KR20050018562A true KR20050018562A (ko) 2005-02-23
KR100611970B1 KR100611970B1 (ko) 2006-08-11

Family

ID=36168741

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020040006976A KR100611970B1 (ko) 2003-08-16 2004-02-03 인터렉티브 그래픽 스트림을 기록한 정보저장매체 및 그 재생장치
KR1020060054377A KR100636253B1 (ko) 2003-08-16 2006-06-16 재생 방법

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020060054377A KR100636253B1 (ko) 2003-08-16 2006-06-16 재생 방법

Country Status (16)

Country Link
US (3) US20050039207A1 (ko)
EP (3) EP2077557B1 (ko)
JP (4) JP2007503067A (ko)
KR (2) KR100611970B1 (ko)
CN (2) CN100432984C (ko)
AT (3) ATE482450T1 (ko)
BR (1) BRPI0411046B1 (ko)
CA (2) CA2768683C (ko)
DE (2) DE602004029296D1 (ko)
ES (1) ES2372267T3 (ko)
HK (2) HK1114490A1 (ko)
MY (1) MY137237A (ko)
PL (1) PL2207178T3 (ko)
RU (1) RU2347286C2 (ko)
TW (1) TWI270869B (ko)
WO (1) WO2005017766A1 (ko)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100561417B1 (ko) 2004-02-09 2006-03-16 삼성전자주식회사 Ａｖ 데이터의 재생상태를 전환할 수 있는 인터랙티브그래픽 스트림을 기록한 정보저장매체, 그 재생방법 및 장치
US8108890B2 (en) * 2004-04-20 2012-01-31 Green Stuart A Localised menus
US20080137729A1 (en) * 2005-03-08 2008-06-12 Jung Kil-Soo Storage Medium Including Data Structure For Reproducing Interactive Graphic Streams Supporting Multiple Languages Seamlessly; Apparatus And Method Therefore
KR20060107282A (ko) * 2005-04-07 2006-10-13 엘지전자 주식회사 데이터 재생방법, 데이터 기록재생 플레이어 및 데이터전송방법
KR100700814B1 (ko) * 2005-07-07 2007-03-27 엘지전자 주식회사 디지털 비디오 기기에서의 텍스트 파일 재생장치 및 방법
DE102007007830A1 (de) * 2007-02-16 2008-08-21 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Erzeugen eines Datenstroms und Vorrichtung und Verfahren zum Lesen eines Datenstroms
KR101464754B1 (ko) * 2008-06-03 2014-11-24 엘지전자 주식회사 영상표시기기에서 메뉴얼 제공 장치 및 방법
JP4535180B2 (ja) * 2008-08-26 2010-09-01 ソニー株式会社 情報処理装置および動作設定方法
CN105933757A (zh) * 2016-04-22 2016-09-07 乐视控股（北京）有限公司 一种视频播放方法、装置及其系统

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0223724A (ja) * 1988-07-13 1990-01-25 Alpine Electron Inc 全世界対応ラジオ受信機
KR100228028B1 (ko) 1993-10-29 1999-11-01 니시무로 타이죠 다종 언어 대응형 기록매체 및 재생장치
US6283760B1 (en) * 1994-10-21 2001-09-04 Carl Wakamoto Learning and entertainment device, method and system and storage media therefor
US5778142A (en) 1994-11-24 1998-07-07 Kabushiki Kaisha Toshiba Large capacity recording medium, method and apparatus for reproducing data from a large-capacity recording medium, and method and apparatus for recording data on a large-capacity recording medium
US5915066A (en) * 1995-02-16 1999-06-22 Kabushiki Kaisha Toshiba Output control system for switchable audio channels
US6009234A (en) * 1995-04-14 1999-12-28 Kabushiki Kaisha Toshiba Method of reproducing information
JP3645006B2 (ja) * 1995-07-13 2005-05-11 パイオニア株式会社 媒体記録方法、装置及び媒体再生装置
JP3728344B2 (ja) * 1996-03-22 2005-12-21 パイオニア株式会社 情報再生装置及び情報再生方法
TW411451B (en) * 1996-05-14 2000-11-11 Toshiba Corp Recording medium storing video data which can forcibly reproduce sub-video in accordance with reproducing state and its reproducing system
JPH10145722A (ja) * 1996-11-07 1998-05-29 Sony Corp 再生制御データ生成装置およびその方法
DE69722563T2 (de) * 1996-11-13 2003-12-18 Matsushita Electric Industrial Co., Ltd. Schnittgerät für Kontrolldaten zum Wiedergeben eines Systemdatenstromes und ein Aufzeichnungsmedium auf dem die verwendete Methode aufgezeichnet ist
US6429879B1 (en) * 1997-09-30 2002-08-06 Compaq Computer Corporation Customization schemes for content presentation in a device with converged functionality
US6069939A (en) * 1997-11-10 2000-05-30 At&T Corp Country-based language selection
CN1118065C (zh) * 1997-12-15 2003-08-13 松下电器产业株式会社 光盘的记录和复制设备及方法
JPH11225307A (ja) 1998-02-05 1999-08-17 Sony Corp 映像データ記録媒体および映像データ再生装置
US6526426B1 (en) * 1998-02-23 2003-02-25 David Lakritz Translation management system
JP3796944B2 (ja) * 1998-02-25 2006-07-12 ソニー株式会社 再生方法、記録媒体およびコンピュータ
AU5114599A (en) 1998-07-20 2000-02-07 Thomson Licensing S.A. Digital video apparatus user interface
US6408128B1 (en) * 1998-11-12 2002-06-18 Max Abecassis Replaying with supplementary information a segment of a video
US20050182828A1 (en) * 1999-04-21 2005-08-18 Interactual Technologies, Inc. Platform specific execution
US7178106B2 (en) * 1999-04-21 2007-02-13 Sonic Solutions, A California Corporation Presentation of media content from multiple media sources
JP2000348466A (ja) 1999-06-03 2000-12-15 Alpine Electronics Inc ディスク再生装置
DE60131040T2 (de) * 2000-01-12 2008-02-07 Matsushita Electric Industrial Co., Ltd., Kadoma Digitaler Rundfunkempfänger
US6990671B1 (en) * 2000-11-22 2006-01-24 Microsoft Corporation Playback control methods and arrangements for a DVD player
EP1241588A3 (en) * 2001-01-23 2006-01-04 Matsushita Electric Industrial Co., Ltd. Audio information provision system
JP4409150B2 (ja) * 2001-06-11 2010-02-03 三星電子株式会社 多国語マークアップ文書支援情報が記録された情報貯蔵媒体、その再生装置及び再生方法
JP3871123B2 (ja) * 2001-06-16 2007-01-24 三星電子株式会社 プリロードフォント情報を有する情報貯蔵媒体、その再生装置及び再生方法
CN2486401Y (zh) * 2001-07-23 2002-04-17 蔡宁 公交车辆mp3多种语言多种文字报站装置
JP4031918B2 (ja) 2001-07-31 2008-01-09 株式会社ディーアンドエムホールディングス 再生装置
KR20030038933A (ko) * 2001-11-09 2003-05-17 이승근 시간, 공간으로 연관된 멀티미디어 파일을 재생하는 방법및 그 장치
US20050166223A1 (en) * 2002-04-17 2005-07-28 Koninklijke Philips Electronics N.V. Access allowance based on regions
US7246318B2 (en) * 2002-06-28 2007-07-17 Microsoft Corporation Application programming interface for utilizing multimedia data
KR20040024113A (ko) * 2002-09-13 2004-03-20 엘지전자 주식회사 디지털 다기능 디스크 장치에서의 재생 제어방법
WO2004077826A1 (ja) * 2003-02-28 2004-09-10 Matsushita Electric Industrial Co., Ltd. 記録媒体、再生装置、記録方法、プログラム、再生方法
JP4163551B2 (ja) 2003-05-13 2008-10-08 株式会社東芝 情報再生装置及び情報再生方法
US7563748B2 (en) 2003-06-23 2009-07-21 Cognis Ip Management Gmbh Alcohol alkoxylate carriers for pesticide active ingredients
TW200739525A (en) * 2003-06-30 2007-10-16 Matsushita Electric Ind Co Ltd Recording medium, reproduction apparatus, recording method, program, and reproduction method
US7765158B2 (en) * 2004-01-27 2010-07-27 Panasonic Corporation Playback apparatus and server apparatus

Also Published As

Publication number Publication date
US8341526B2 (en) 2012-12-25
US8437601B2 (en) 2013-05-07
JP2011154776A (ja) 2011-08-11
JP5005796B2 (ja) 2012-08-22
US20080155638A1 (en) 2008-06-26
HK1089829A1 (en) 2006-12-08
CN1806238A (zh) 2006-07-19
US20080189739A1 (en) 2008-08-07
CN101072312B (zh) 2012-07-18
EP2077557B1 (en) 2010-09-22
JP2010238355A (ja) 2010-10-21
CA2768683A1 (en) 2005-02-24
EP2207178B1 (en) 2011-09-07
EP2077557A1 (en) 2009-07-08
EP1654671B1 (en) 2010-06-30
CN101072312A (zh) 2007-11-14
WO2005017766A1 (en) 2005-02-24
CN100432984C (zh) 2008-11-12
CA2527884A1 (en) 2005-02-24
DE602004027919D1 (de) 2010-08-12
RU2347286C2 (ru) 2009-02-20
EP1654671A4 (en) 2008-04-09
EP2207178A2 (en) 2010-07-14
CA2527884C (en) 2012-03-06
TW200509101A (en) 2005-03-01
US20050039207A1 (en) 2005-02-17
TWI270869B (en) 2007-01-11
ATE472797T1 (de) 2010-07-15
MY137237A (en) 2009-01-30
CA2768683C (en) 2014-10-07
ES2372267T3 (es) 2012-01-17
JP2010238356A (ja) 2010-10-21
HK1114490A1 (en) 2008-10-31
JP2007503067A (ja) 2007-02-15
EP1654671A1 (en) 2006-05-10
EP1654671B2 (en) 2017-02-08
ATE482450T1 (de) 2010-10-15
ATE523879T1 (de) 2011-09-15
KR100611970B1 (ko) 2006-08-11
BRPI0411046A (pt) 2006-07-11
KR100636253B1 (ko) 2006-10-20
PL2207178T3 (pl) 2012-02-29
DE602004029296D1 (de) 2010-11-04
KR20060073581A (ko) 2006-06-28
RU2005141133A (ru) 2006-05-10
BRPI0411046B1 (pt) 2020-11-03
EP2207178A3 (en) 2010-08-04
JP5128690B2 (ja) 2013-01-23
JP5005795B2 (ja) 2012-08-22

Similar Documents

Publication Publication Date Title
EP1685563B1 (en) Apparatus and method of playing back a storage medium storing text-based subtitle data including style information
JP4824846B2 (ja) ディスプレイ・モニタを備えたシステム
JP5128690B2 (ja) インタラクティブグラフィックストリームを記録した情報記録媒体の再生装置
US20110081128A1 (en) Storage medium storing moving-image data that includes mode information, and reproducing apparatus and method
US20050094973A1 (en) Moving picture reproducing apparatus in which player mode information is set, reproducing method using the same, and storage medium
US20100195980A1 (en) Information storage medium, reproducing apparatus, and reproducing method
KR100561483B1 (ko) 동영상으로 재생되는 복수개의 타이틀이 기록된정보저장매체, 그 재생 장치 및 재생 방법
KR20050074881A (ko) 복수의 언어를 지원하는 인터랙티브 그래픽 스트림을기록한 저장 매체, 재생 장치 및 그 재생 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
A107 Divisional application of patent
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120730

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20130730

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20140730

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20150730

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20160728

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20170728

Year of fee payment: 12