KR20050117462A - Information storage medium containing av stream including a graphic data, and reproducing method and apparatus thereof - Google Patents
Information storage medium containing av stream including a graphic data, and reproducing method and apparatus thereof Download PDFInfo
- Publication number
- KR20050117462A KR20050117462A KR1020040047624A KR20040047624A KR20050117462A KR 20050117462 A KR20050117462 A KR 20050117462A KR 1020040047624 A KR1020040047624 A KR 1020040047624A KR 20040047624 A KR20040047624 A KR 20040047624A KR 20050117462 A KR20050117462 A KR 20050117462A
- Authority
- KR
- South Korea
- Prior art keywords
- source packet
- stream
- video
- packet
- additional data
- Prior art date
Links
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
- G11B20/10527—Audio or video recording; Data buffering arrangements
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
- G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
- G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
- G11B27/32—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
- G11B27/327—Table of contents
- G11B27/329—Table of contents on a disc [VTOC]
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
- G11B2020/10935—Digital recording or reproducing wherein a time constraint must be met
- G11B2020/10953—Concurrent recording or playback of different streams or files
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Television Signal Processing For Recording (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
비디오 데이터, 오디오 데이터 및 그래픽 데이터를 포함한 AV 스트림을 MPEG-2 트랜스포트 스트림 포맷으로 다중화하여 기록한 정보저장매체, 재생방법 및 재생장치가 개시된다. 본 발명에 따라, AV 스트림을 기록한 정보저장매체에 있어서, 상기 AV 스트림은 적어도 하나의 비디오 소스 패킷; 적어도 하나의 오디오 소스 패킷; 및 적어도 하나의 부가 데이터 소스 패킷을 포함하며, 상기 부가 데이터 소스 패킷은 그와 동일한 출력시간정보를 갖는 비디오 소스 패킷 이후에 배치되어 있는 것을 특징으로 한다. 이에 따라 비디오 데이터에 대응되는 그래픽 데이터가, 재생위치의 점프에도 불구하고 함께 디스플레이될 수 있는 효과가 있다. Disclosed are an information storage medium, a playback method, and a playback apparatus, in which an AV stream including video data, audio data, and graphic data is multiplexed and recorded in an MPEG-2 transport stream format. According to the present invention, an information storage medium for recording an AV stream, the AV stream comprising: at least one video source packet; At least one audio source packet; And at least one additional data source packet, wherein the additional data source packet is disposed after the video source packet having the same output time information. Accordingly, the graphic data corresponding to the video data can be displayed together with the jump of the playback position.
Description
본 발명은 비디오 데이터, 오디오 데이터 및 그래픽 데이터를 포함한 AV 스트림을 MPEG-2 트랜스포트 스트림 포맷으로 다중화하여 기록한 정보저장매체, 재생방법 및 재생장치에 관한 것이다.The present invention relates to an information storage medium, a reproducing method, and a reproducing apparatus in which an AV stream including video data, audio data and graphic data is multiplexed and recorded in an MPEG-2 transport stream format.
도 1은 비디오 오브젝트 셋의 상세 구성도이다.1 is a detailed configuration diagram of a video object set.
보다 상세하게는, 도 1은 DVD 규격에 따라 비디오 데이터, 오디오 데이터 및 부가 데이터를 구성하는 것을 설명하기 위하여 Video Title Set(VTS) 영역에 있는 실제 동영상 데이터를 의미하는 타이틀을 위한 비디오 오브젝트 셋(VOBS for Title)의 구조를 도시한 도면이다.More specifically, FIG. 1 illustrates a video object set (VOBS) for titles representing actual moving picture data in a Video Title Set (VTS) area to explain composing video data, audio data, and additional data according to the DVD standard. for Title).
도 1을 참조하면, 각 VOBS(110)는 복수개의 VOB(Video Object)(120-1 내지 120-i)로 구성되고, 하나의 VOB(120-1)는 복수개의 CELL들(130-1 내지 130-k)로 구성된다. 하나의 CELL(120-1)은 다시 복수개의 VOBU(Video Object Unit)(140)들로 구성된다. VOBU(140)는 DVD에서 사용하는 동영상 부호화 방법인 MPEG에 의해 부호화된 데이터이다. MPEG에 따르면 영상들은 시공간 압축 부호화되기 때문에, 어떤 영상을 복호화하기 위해서는 이전 또는 이후 영상이 필요하다. 따라서, AV 스트림의 임의의 지점에서 재생을 시작하는 랜덤 액세스 기능을 지원하기 위해서 이전 또는 이후 영상을 필요로 하지 않는 인트라 부호화가 일정한 간격으로 수행된다. 인트라 부호화에 의해 만들어진 픽처를 인트라 픽처 또는 I 픽처(I-picture)라고 부르고, I 픽처와 다음 I 픽처까지의 픽처들을 합하여 GOP(Group Of Picture)라고 부른다. 일반적으로 GOP는 12 ~ 15 개의 픽처로 이루어진다. Referring to FIG. 1, each VOBS 110 includes a plurality of VOBs (Video Objects) 120-1 to 120-i, and one VOB 120-1 includes a plurality of CELLs 130-1 through. 130-k). One CELL 120-1 is composed of a plurality of video object units (VOBUs) 140. The VOBU 140 is data encoded by MPEG, which is a video encoding method used in a DVD. According to MPEG, since images are space-time compressed and encoded, before or after images are required to decode a certain image. Thus, intra coding is performed at regular intervals that do not require a before or after picture to support a random access function that starts playback at any point in the AV stream. A picture produced by intra coding is called an intra picture or an I-picture, and the sum of the I picture and the pictures up to the next I picture is called a GOP (Group Of Picture). In general, a GOP consists of 12 to 15 pictures.
한편, 비디오 데이터와 오디오 데이터를 하나의 비트 스트림으로 다중화하는 방법에 대하여 MPEG 시스템(ISO/IEC13818-1)에서 기술하고 있다. MPEG 시스템에서의 다중화 방법으로는, 비디오 데이터와 오디오 데이터를 합쳐 하나의 프로그램으로 만들어 정보저장매체에 저장하는데 최적화된 프로그램 스트림(Program Stream, PS)으로 다중화하는 방법과, 복수의 프로그램을 만들어 네트워크를 통해 저장하는데 적합하도록 만들어진 트랜스포트 스트림(Transport Stream, TS)으로 다중화하는 방법이 있다. DVD에서는 이 방법들 중 Program Stream으로 다중화하는 방법에 따라 동영상을 다중화한다. Program Stream으로 다중화하기 위해, 비디오 데이터 또는 오디오 데이터를 각각 Pack(PCK)이라는 단위로 분할한 다음, 분할된 비디오 PCK 및 오디오 PCK을 시분할 다중화 방법에 의해 다중화 한다. MPEG에서 정의한 비디오 및 오디오 데이터 이외의 데이터는 프라이빗 스트림(Private Stream)이라고 이름지어, PCK이라는 단위로 분할되어 비디오 데이터, 오디오 데이터와 함께 다중화될 수 있다.On the other hand, the MPEG system (ISO / IEC13818-1) describes a method of multiplexing video data and audio data into one bit stream. In the multiplexing method in the MPEG system, video data and audio data are combined into a program stream (PS) optimized to be stored in an information storage medium by combining them into a single program, and a network is formed by creating a plurality of programs. There is a method of multiplexing into a transport stream (TS) made to be suitable for storage through the. On DVD, the video is multiplexed according to the method of multiplexing the program stream. In order to multiplex the program stream, video data or audio data is divided into packs (PCKs), and the divided video PCKs and audio PCKs are multiplexed by a time division multiplexing method. Data other than video and audio data defined in MPEG may be referred to as a private stream and may be divided into PCK units and multiplexed together with video data and audio data.
VOBU(140)는 복수개의 PCK로 구성된다. 복수개의 PCK 중 첫번째 PCK는 네비게이션 팩(NV_PCK)(150)이다. 이어서, 비디오 팩(V_PCK)(152), 서브 픽처 팩(Sub picture pack, SP_PCK)(154) 및 오디오 팩(A_PCK)(156) 등으로 구성된다. 비디오 팩(V_PCK)(152)에 담긴 비디오 데이터는 복수의 GOP로 이루어져 있다. 서브 픽처 팩(SP_PCK)(154)은 2차원 그래픽 데이터 및 자막 데이터를 위한 것이다. 즉 DVD에서는 비디오 영상에 오버랩되어 나타나는 자막 데이터를 2차원 그래픽 데이터와 동일한 방법으로 부호화하는데, 이렇게 부호화된 그래픽 데이터 및 자막 데이터가 서브 픽처 팩(154)에 담겨있다. 따라서, 재생위치가 점프하여 변경되더라도 네비게이션 팩 단위로 재생되기 때문에 비디오, 오디오와 함께 서브 픽처가 항상 디스플레이된다.The VOBU 140 is composed of a plurality of PCKs. The first PCK of the plurality of PCKs is a navigation pack (NV_PCK) 150. Subsequently, the video pack is composed of a video pack (V_PCK) 152, a sub picture pack (SP_PCK) 154, an audio pack (A_PCK) 156, and the like. The video data contained in the video pack (V_PCK) 152 consists of a plurality of GOPs. The sub picture pack (SP_PCK) 154 is for two-dimensional graphic data and subtitle data. That is, in DVD, subtitle data overlapping a video image is encoded in the same manner as 2D graphic data, and the encoded graphic data and the subtitle data are contained in the sub-picture pack 154. Therefore, even if the playback position is jumped and changed, the subpicture is always displayed together with the video and audio since the playback position is reproduced in units of navigation packs.
한편, MPEG-2 트랜스포트 스트림은 비디오 데이터, 오디오 데이터 및 부가 데이터가 다중화되어 있다. 그러나, MPEG-2 트랜스포트 스트림에서 재생위치를 점프하면, 부가 데이터의 MPEG-2 트랜스포트 스트림내에서의 위치에 따라서는 부가 데이터가 비디오나 오디오와 함께 재생되지 않을 수도 있다.On the other hand, in the MPEG-2 transport stream, video data, audio data and additional data are multiplexed. However, if the playback position is jumped in the MPEG-2 transport stream, the additional data may not be played together with the video or audio depending on the position of the additional data in the MPEG-2 transport stream.
따라서, 본 발명이 이루고자 하는 기술적 과제는 비디오 데이터, 오디오 데이터 및 그래픽 데이터를 포함한 AV 스트림을 MPEG-2 트랜스포트 스트림의 포맷에 맞도록 다중화하여 기록한 정보저장매체, 재생방법 및 재생장치를 제공하는 것이다.Accordingly, an object of the present invention is to provide an information storage medium, a reproduction method, and a reproducing apparatus in which an AV stream including video data, audio data, and graphic data is multiplexed and recorded according to the format of an MPEG-2 transport stream. .
상기 기술적 과제는 본 발명에 따라, AV 스트림을 기록한 정보저장매체에 있어서, 상기 AV 스트림은 적어도 하나의 비디오 소스 패킷; 적어도 하나의 오디오 소스 패킷; 및 적어도 하나의 부가 데이터 소스 패킷을 포함하며, 상기 부가 데이터 소스 패킷은 그와 동일한 출력시간정보를 갖는 비디오 소스 패킷 이후에 배치되어 있는 것을 특징으로 하는 AV 스트림을 기록한 정보저장매체에 의해 달성된다.According to an aspect of the present invention, there is provided an information storage medium for recording an AV stream, wherein the AV stream includes at least one video source packet; At least one audio source packet; And at least one additional data source packet, wherein the additional data source packet is disposed after the video source packet having the same output time information.
상기 부가 데이터 소스 패킷은, 비디오에 대응되는 자막정보를 담고 있는 프리젠테이션 그래픽 데이터로서, 그 출력시작시간으로 PTS를 갖는 것이 바람직하다.The additional data source packet is presentation graphic data containing subtitle information corresponding to video, and preferably has a PTS as an output start time.
또한, 상기 부가 데이터 소스 패킷은 메뉴 또는 사용자와의 상호 인터랙션 관련정보를 담고 있는 인터랙티브 그래픽 데이터로서, 그 출력시작시간으로 PTS를 갖는 것이 바람직하다.The additional data source packet is interactive graphic data containing information relating to interaction with a menu or a user, and preferably has a PTS as an output start time.
또한, 상기 기술적 과제는 AV 스트림을 기록한 정보저장매체에 있어서, 상기 AV 스트림은 적어도 하나의 비디오 소스 패킷; 적어도 하나의 오디오 소스 패킷; 적어도 하나의 부가 데이터 소스 패킷; 및 상기 비디오 소스 패킷들 중 I 픽처에 해당하는 비디오 소스 패킷에 대한 재생시간정보를 기록하고 있는 엔트리 포인트 맵을 포함하며, 상기 엔트리 포인트 맵은 상기 재생시간정보에 대응하여 재생될 비디오 소스 패킷의 패킷번호 및 부가 데이터 소스 패킷의 패킷번호를 기록하고 있는 것을 특징으로 하는 AV 스트림을 기록한 정보저장매체에 의해서도 달성된다.In addition, the technical problem is an information storage medium recording an AV stream, the AV stream comprises at least one video source packet; At least one audio source packet; At least one additional data source packet; And an entry point map that records reproduction time information of a video source packet corresponding to an I picture among the video source packets, wherein the entry point map is a packet of a video source packet to be reproduced corresponding to the reproduction time information. It is also achieved by an information storage medium on which an AV stream is recorded, wherein the number and packet number of the additional data source packet are recorded.
상기 엔트리 포인트 맵에서 지시하는 비디오 소스 패킷으로 재생위치를 이동하였을 때, 그 위치의 소스 패킷이 그 소스 패킷이 속한 클립의 첫 번째 엔트리 포인트인 경우에는 상기 클립의 맨 처음 소스 패킷부터 재생하는 것이 바람직하다.When the playback position is moved to the video source packet indicated by the entry point map, when the source packet at the position is the first entry point of the clip to which the source packet belongs, it is preferable to play from the first source packet of the clip. Do.
한편, 본 발명의 다른 분야에 따르면, 상기 기술적 과제는 적어도 하나의 비디오 소스 패킷, 적어도 하나의 오디오 소스 패킷 및 적어도 하나의 부가 데이터 소스 패킷을 포함하며, 상기 부가 데이터 소스 패킷은 그와 동일한 출력시간정보를 갖는 비디오 소스 패킷 이후에 배치되어 있는 AV 스트림을 독출하는 독출부; 상기 독출된 AV 스트림을 역다중화화여 비디오 소스 패킷, 오디오 소스 패킷 및 부가 데이터 소스 패킷으로 분리하는 역다중화부; 상기 비디오 소스 패킷을 디코딩하여 출력하는 비디오 디코더; 및 상기 오디오 소스 패킷을 디코딩하여 출력하는 오디오 디코더를 포함하는 것을 특징으로 하는 AV 스트림 재생장치에 의해서도 달성된다.On the other hand, according to another field of the present invention, the technical problem includes at least one video source packet, at least one audio source packet and at least one additional data source packet, the additional data source packet is the same output time A reading unit that reads an AV stream disposed after the video source packet having information; A demultiplexer which demultiplexes the read AV stream into a video source packet, an audio source packet, and an additional data source packet; A video decoder for decoding and outputting the video source packet; And an audio decoder for decoding and outputting the audio source packet.
또한, 본 발명의 다른 분야에 따르면, 상기 기술적 과제는 (a) 적어도 하나의 비디오 소스 패킷, 적어도 하나의 오디오 소스 패킷 및 적어도 하나의 부가 데이터 소스 패킷을 포함하며, 상기 부가 데이터 소스 패킷은 그와 동일한 출력시간정보를 갖는 비디오 소스 패킷 이후에 배치되어 있는 AV 스트림을 독출하는 단계; (b) 상기 독출된 AV 스트림을 역다중화화여 비디오 소스 패킷, 오디오 소스 패킷 및 부가 데이터 소스 패킷으로 분리하는 단계; 및 (c) 상기 비디오 소스 패킷과 오디오 소스 패킷을 디코딩하여 출력하는 단계를 포함하는 것을 특징으로 하는 AV 스트림 재생방법에 의해서도 달성된다.Further, according to another field of the present invention, the technical problem includes (a) at least one video source packet, at least one audio source packet and at least one additional data source packet, wherein the additional data source packet is Reading an AV stream disposed after the video source packet having the same output time information; (b) demultiplexing the read AV stream into video source packets, audio source packets, and additional data source packets; And (c) decoding and outputting the video source packet and the audio source packet.
또한, 상기 기술적 과제는 (a) 재생위치 변경 명령을 수신하는 단계; (b) 비디오 소스 패킷에서 I 픽처에 대한 시간정보와, 상기 I 픽처의 패킷번호에 더하여 상기 부가 데이터 소스 패킷의 패킷번호를 기록하고 있는 엔트리 포인트 맵을 검색하여 부가 데이터에 대한 소스 패킷번호가 포함되어 있는지 판단하는 단계; 및 (c) 부가 데이터 소스 패킷번호가 포함되어 있으면, 그 패킷번호로 재생위치를 이동하고, 그렇지 않으면 I 픽처의 패킷번호로 재생위치를 이동하여 AV 스트림을 재생하는 단계를 포함하는 것을 특징으로 하는 AV 스트림 재생방법에 의해서도 달성된다.In addition, the technical problem is (a) receiving a play position change command; (b) In addition to the time information of the I picture in the video source packet and the entry point map recording the packet number of the additional data source packet in addition to the packet number of the I picture, the source packet number of the additional data is included. Determining whether it is in progress; And (c) if the additional data source packet number is included, shifting the playback position to that packet number; otherwise, shifting the playback position to the packet number of the I picture to play the AV stream. This is also achieved by the AV stream reproduction method.
이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예에 대해 상세히 설명한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.
도 2는 비디오 스트림, 오디오 스트림 및 기타 프리젠테이션용 스트림을 다중화하여 AV 스트림으로 만들어 저장매체에 기록하는 과정을 도시한 도면이다.FIG. 2 is a diagram illustrating a process of multiplexing a video stream, an audio stream, and other presentation streams into an AV stream and recording the same on a storage medium.
도 2를 참조하면, AV 스트림에는 비디오 스트림(202), 오디오 스트림(204) 외에, 비디오에 대한 비트맵 기반의 자막을 나타내기 위한 프리젠테이션 그래픽 스트림과 특정 목적을 위해 제작자에 의해 제작된, 기타 데이터 스트림(206)이 포함될 수 있다. 프리젠테이션 그래픽 스트림, 인터랙티브 그래픽 스트림 및 기타 데이터 스트림을 포함하여 부가 데이터 스트림이라 부른다.Referring to FIG. 2, the AV stream includes, besides the video stream 202 and the audio stream 204, a presentation graphics stream for representing bitmap-based subtitles for the video and others produced by the producer for a particular purpose. Data stream 206 may be included. It is called an additional data stream, including presentation graphics streams, interactive graphics streams, and other data streams.
부호화된 비디오 데이터, 오디오 데이터 및 기타 데이터는 각각 요소 스트림(Elementary Stream)으로 만들어진다. 이렇게 만들어진 비디오 요소 스트림, 오디오 요소 스트림 및 기타 요소 스트림은 각각 패킷화되어 Packetized Elementary Stream(PES)으로 만들어진다. 하나의 PES는 헤더 필드와 PES 패킷 데이터 필드로 구성된다. 헤더 필드는 PES 패킷 데이터 필드에 기록되어 있는 데이터가 비디오, 오디오 또는 기타 데이터인지를 구분하기 위한 Stream_id 정보, PES 패킷의 디코딩 시간(Decoding Time Stamp, DTS) 및 출력시간(Presentation Time Stamp, PTS)에 대한 시간 정보 등을 기록하고 있다. The encoded video data, audio data and other data are each made of an elementary stream. The video element stream, audio element stream, and other element streams thus produced are packetized to form a Packetized Elementary Stream (PES). One PES consists of a header field and a PES packet data field. The header field includes the Stream_id information for identifying whether the data recorded in the PES packet data field is video, audio, or other data, the decoding time stamp (DTS), and the presentation time stamp (PTS) of the PES packet. Time information, etc. are recorded.
이와 같은 PES 들이 다중화되어 188 바이트 크기의 MPEG-2 트랜스포트 스트림(Transport Stream)을 구성한다. 188 바이트의 TS 패킷은 패킷에 대한 정보를 기록하고 있는 헤더와, 데이터를 기록하고 있는 페이로드(payload)로 이루어진다. TS 패킷의 헤더는 페이로드에 기록되어 있는 데이터의 종류를 나타내는 Packet ID 정보, PES 패킷의 데이터를 디코딩하고 출력하기 위해 사용하는 DTS, PTS의 기준 시간이 되는 재생 장치의 System Time Clock(STC)을 설정하기 위한 Program Clock Reference(PCR) 정보 등을 기록하고 있는 적응 필드(adaptation field) 등을 포함한다.These PESs are multiplexed to form an MPEG-2 Transport Stream having a size of 188 bytes. A TS packet of 188 bytes consists of a header that records information about the packet, and a payload that records data. The header of the TS packet includes Packet ID information indicating the type of data recorded in the payload, the DTS used to decode and output the data of the PES packet, and the system time clock (STC) of the playback device serving as the reference time of the PTS. And an adaptation field for recording Program Clock Reference (PCR) information and the like for setting.
다음으로, 188 바이트의 TS 패킷에 4 바이트의 헤더가 추가되어 소스 패킷으로 구성되어 비디오, 오디오 등의 데이터가 기록된 AV 스트림이 된다. 소스 패킷의 헤더는 해당 패킷의 컨텐츠 보호(content protection) 정보를 기록하고 있는 복사방지(copy permission) 정보와 해당 소스 패킷이 재생 장치에 도착한 시간을 나타내는 도착 타임 스탬프(Arrival Time Stamp) 정보를 담고 있다.Next, a 4-byte header is added to the 188-byte TS packet to form a source packet to form an AV stream in which data such as video and audio are recorded. The header of the source packet includes copy permission information recording content protection information of the packet and arrival time stamp information indicating a time when the source packet arrives at the playback device. .
도 3은 AV 스트림을 재생하는 재생장치의 간략한 블록도이다.3 is a simplified block diagram of a playback apparatus for playing an AV stream.
독출부(310)는 도 2를 참조하여 상술한 바와 같이 만들어진 AV 스트림을 기록한 정보저장매체로부터 AV 스트림을 읽는다. 그리고, 소스패킷의 헤더에 기록된 도착 타임 스탬프(ATS)에 따라서 해당 소스 패킷을 역다중화부(320)로 전달한다. 역다중화부(320)는 수신된 소스 패킷에서 헤더를 제거하여 MPEG-2 TS 패킷으로 만든다. 그리고, 이들 MPEG-2 TS 패킷중에서 MPEG-2 TS 패킷 헤더에 프로그램 기준 클럭(PCR) 정보를 포함하고 있는 경우에는 그 PCR 값에 따라 재생장치의 시스템 타임 클럭(STC, 350)을 설정하고, Packet ID에 의해 비디오 스트림 및 오디오 스트림 등으로 구분하여 각각의 PES 패킷을 만든다. STC(350)는 시스템 클럭을 카운트하여 계속 증가하다가 PCR에 따라 때때로 순차적으로 증가하는 값이 아닌 PCR에 의해 지시되는 값으로 재설정된다.The reading unit 310 reads the AV stream from the information storage medium which recorded the AV stream made as described above with reference to FIG. The source packet is transmitted to the demultiplexer 320 according to the arrival time stamp (ATS) recorded in the header of the source packet. The demultiplexer 320 removes the header from the received source packet to form an MPEG-2 TS packet. When the MPEG-2 TS packet header includes program reference clock (PCR) information, the system time clock (STC) 350 of the playback apparatus is set according to the PCR value. Each PES packet is generated by dividing it into a video stream and an audio stream by ID. The STC 350 counts the system clock and continues to increment, and then resets to a value indicated by the PCR, rather than a value that increases sequentially from time to time.
이렇게 만들어진 PES 패킷은 PES 패킷 헤더에 포함되어 있는 디코딩 타임 스탬프(DTS)와 재생 장치의 시스템 타임 클럭(STC)(350)이 일치하는 시점에 비디오 디코더(330) 및 오디오 디코더(340)로 전송되고, 프리젠테이션 타임 스탬프(PTS)와 재생 장치의 시스템 타임 클럭(STC)(350)가 일치하는 시점에, 디코딩된 비디오 데이터 또는 오디오 데이터를 출력한다. 이때, 특정 시점에 출력되는 비디오 스트림의 단위를 비디오 프리젠테이션 유닛(Video Presentation Unit, VPU)이라 하고 오디오 스트림의 단위를 오디오 프리젠테이션 유닛(Audio Presentation Unit, APU)이라 한다. 또한 각각의 디코더(330, 340)에 의해 디코딩되어 각각의 프리젠테이션 유닛(Presentation Unit)을 생성하기 위한 데이터를 포함하고 있는 비디오 스트림 단위를 비디오 액세스 유닛(Video Access Unit, VAU), 오디오 스트림 단위를 오디오 액세스 유닛(Audio Access Unit, AAU)이라 한다.The PES packet is transmitted to the video decoder 330 and the audio decoder 340 when the decoding time stamp (DTS) included in the PES packet header matches the system time clock (STC) 350 of the playback device. When the presentation time stamp (PTS) and the system time clock (STC) 350 of the playback device match, the decoded video data or audio data is output. In this case, a unit of a video stream output at a specific time point is referred to as a video presentation unit (VPU) and a unit of an audio stream is referred to as an audio presentation unit (APU). Also, a video stream unit decoded by each of the decoders 330 and 340 and including data for generating each presentation unit is defined as a video access unit (VAU) and an audio stream unit. Called an Audio Access Unit (AAU).
즉, 저장 매체에 기록되어 있는 소스 패킷이 역다중화되어 특정 시점에 디코딩되어야 하는 단위인 비디오 액세스 유닛(VAU)과 오디오 액세스 유닛(AAU)으로 만들어지고, 각각의 액세스 유닛에 기록된 DTS와 재생장치의 STC가 일치하는 시점에 비디오 디코더(330) 및 오디오 디코더(340)로 보내져 디코딩되어 비디오 프리젠테이션 유닛(VPU) 및 오디오 프리젠테이션 유닛(APU)으로 만들어진다. 그리고 각각의 프리젠테이션 유닛의 PTS와 재생장치의 STC가 일치하는 시점에 출력된다. 오디오 스트림의 PTS는 오디오 액세스 유닛(AAU)이 오디오 디코더(340)로 입력되는 시간 및 오디오 디코더(340)에서 출력되는 시간을 모두 의미할 수도 있다. That is, a DTS and a playback device made of a video access unit (VAU) and an audio access unit (AAU), which are units which are demultiplexed and decoded at a specific point in time, are recorded in each access unit. At the point at which the STCs match, it is sent to the video decoder 330 and the audio decoder 340 and decoded into a video presentation unit (VPU) and an audio presentation unit (APU). The PTS of each presentation unit and the STC of the playback apparatus are output at the point of coincidence. The PTS of the audio stream may mean both the time that the audio access unit (AAU) is input to the audio decoder 340 and the time that is output from the audio decoder 340.
한편, 도 3에서는 도시하지 않았지만, 비디오 스트림 또는 오디오 스트림과 마찬가지로 비트맵 기반의 서브 타이틀 데이터를 위한 프리젠테이션 그래픽 스트림도 액세스 유닛과 프리젠테이션 유닛으로 만들어지고, 그의 DTS와 PTS가 재생장치의 STC에 맞추어 동작하므로 비디오 데이터 및 오디오 데이터와 서로 동기가 가능하다.On the other hand, although not shown in Fig. 3, the presentation graphics stream for the bitmap-based subtitle data, like the video stream or the audio stream, is also made of the access unit and the presentation unit, and its DTS and PTS are transferred to the STC of the playback apparatus. It works in sync with video and audio data.
도 4는 저장매체에 기록된 AV 스트림을 구성하는 소스 패킷이 재생장치로 입력되는 것을 도시한 도면이다.4 is a diagram showing that source packets constituting an AV stream recorded on a storage medium are input to a playback apparatus.
AV 스트림은 복수개의 소스 패킷으로 구성되어 있으며, 각 소스 패킷의 헤더에는 재생 장치로 입력되는 시간 정보인 도착 타임 스탬프(ATS) 정보가 포함되어 있다. 그리고, 재생 장치로 최초에 입력되는 소스 패킷의 ATS 값으로 재생 장치의 도착 타임 시간 카운터(Arrival Time Clock Counter)를 재설정한다. 그리고, 이후에 입력되는 소스 패킷은 해당 소스 패킷 헤더의 ATS 값과 재생 장치의 ATC 카운터 값을 비교하여 일치하는 시점에 재생 장치로 입력된다. 이때 각 소스 패킷의 ATS 값이 끊김없이 연속적으로 이어져 있는 경우, 이들 소스 패킷은 동일한 ATC-Sequence를 갖는다. 일반적으로 하나의 AV 스트림은 하나의 ATC-Sequence로 구성되는 것이 바람직하다. The AV stream is composed of a plurality of source packets, and the header of each source packet includes arrival time stamp (ATS) information, which is time information input to the playback apparatus. The Arrival Time Clock Counter of the playback device is reset to the ATS value of the source packet first inputted to the playback device. Subsequently, the input source packet is inputted to the reproduction apparatus at a time point when the ATS value of the corresponding source packet header is compared with the ATC counter value of the reproduction apparatus. At this time, when the ATS value of each source packet is continuously and continuously, these source packets have the same ATC-Sequence. In general, it is preferable that one AV stream consists of one ATC-Sequence.
도 5는 하나의 ATC-Sequence를 갖는 소스 패킷들이 재생 장치로 입력될 때, 재생장치의 STC의 변화를 설명하기 위한 도면이다.FIG. 5 is a diagram for explaining a change in the STC of the playback apparatus when source packets having one ATC-Sequence are input to the playback apparatus.
하나의 ATC-Sequence에 포함되어 있는 각 소스 패킷들은 도착 타임 스탬프(ATS)에 따라 순차적으로 재생 장치로 입력된 후, MPEG-2 TS 패킷으로 재구성된다. 이때, MPEG-2 TS 패킷의 헤더에 PCR 정보가 포함되어 있는 경우, 재생 장치는 상기 PCR 정보를 이용하여 시스템 타임 클럭(STC)을 재설정한다. STC-Sequence는 특정 MPEG-2 TS 패킷의 PCR 정보에 의해 연속적으로 증가되는 시스템 타임 클럭(STC)에 의해 제어되는 MPEG-2 TS 패킷들의 시퀀스를 가리킨다.Each source packet included in one ATC-Sequence is sequentially input to a playback device according to an arrival time stamp (ATS), and then reconstructed into MPEG-2 TS packets. At this time, when the PCR information is included in the header of the MPEG-2 TS packet, the reproducing apparatus resets the system time clock (STC) by using the PCR information. STC-Sequence refers to a sequence of MPEG-2 TS packets controlled by a system time clock (STC) that is incremented continuously by PCR information of a particular MPEG-2 TS packet.
하나의 ATC-Sequence에는 최소 하나 이상의 STC-Sequence가 포함될 수 있는데, 이때 서로 다른 STC-Sequence로 변경되는 시점 즉, 새로운 STC-Sequence의 첫 MPEG-2 TS 패킷에는 시스템 타임 클럭(STC)을 재설정하는 PCR 정보가 기록되어 있어야 하며, 이 시점에서 STC값의 불연속(discontinuity)이 발생한다. At least one STC-Sequence may be included in one ATC-Sequence, which resets the system time clock (STC) to the first MPEG-2 TS packet of a new STC-Sequence. PCR information should be recorded, at which point a discontinuity in the STC values occurs.
도 5를 참조하면, 하나의 ATC-Sequence를 갖는 AV 스트림이 재생되는 경우, AV 스트림이 재생되는 시작 시점을 0으로 하는 전역 시간(Global Time)은 순차적으로 증가하는 반면, STC-Sequence는 #0부터 시작하여 #1, #2를 거치면서 STC-Sequence 별로 서로 다른 시스템 타임 클럭(STC)을 가지게 됨을 알 수 있다. Referring to FIG. 5, when an AV stream having one ATC-Sequence is played back, a global time for setting the start time at which the AV stream is played back to 0 is sequentially increased, while STC-Sequence is # 0. Starting from # 1 and # 2, we can see that each STC-Sequence has a different system time clock (STC).
그러나, 비디오 스트림, 오디오 스트림 및 프리젠테이션 그래픽 스트림 등은 STC-Sequence에 불연속이 발생하여 시스템 타임 클럭(STC)이 재설정되더라도 하나의 AV 스트림으로 다중화되어 있기 때문에, 각 스트림의 DTS와 PTS는 해당 시간 정보를 제어하는 STC-Sequence 내의 시스템 타임 클럭(STC)에 의해 처리하면 된다.However, video streams, audio streams, and presentation graphics streams are multiplexed into one AV stream even when the system time clock (STC) is reset due to a discontinuity in the STC-Sequence. This is done by the system time clock (STC) in the STC-Sequence that controls the information.
도 6은 저장매체에 기록되어 있는 AV 클립의 재생 순서와 재생 위치를 지정하기 위한 네비게이션 정보와 AV 클립의 연결 관계를 도시한 도면이다. FIG. 6 is a diagram showing a connection relation between AV information and navigation information for designating a playback order and a playback position of an AV clip recorded on a storage medium.
AV 클립은 AV 스트림을 구성하는 기록단위이다. 저장매체에는 AV 클립 외에 AV 클립에 대한 속성 정보 등을 기록하고 있는 Clip Information, AV 클립의 재생 순서를 나타내는 정보로써 네비게이션 정보 등이 포함되어 있다. 네비게이션 정보에는 저장매체에 포함되어 있는 최소 하나 이상의 타이틀에 대한 타이틀 정보와 각 타이틀에 의해 재생되는 AV 클립들의 재생 순서 정보를 포함하고 있는 최소 하나 이상의 PlayList 등이 포함되어 있다.An AV clip is a recording unit constituting an AV stream. The storage medium includes, in addition to the AV clip, Clip Information for recording attribute information and the like for the AV clip, navigation information, and the like as information representing the playback order of the AV clip. The navigation information includes at least one PlayList including title information of at least one title included in the storage medium and reproduction order information of AV clips reproduced by each title.
도 6을 참조하면, PlayList는 재생할 AV 클립을 지시하기 위한 참조 정보를 포함하고 있는 하나 이상의 PlayItem을 포함한다. PlayItem은 재생에 사용될 AV 클립에 대한 속성 정보를 기록하고 있는 Clip Information을 지시하는 정보로 Clip_info_file과, 해당 AV 클립 상에서 PlayItem이 지시하고 있는 AV 클립의 시스템 타임 클럭(STC)을 포함하고 있는 STC-Sequence의 번호를 지시하는 ref_to_STC_id, PlayItem이 지시하고 있는 STC-Sequence에서 해당 PlayItem의 시작과 끝을 지시하는 IN_time, OUT_time 정보 등을 포함한다. Referring to FIG. 6, the PlayList includes one or more PlayItems including reference information for indicating an AV clip to be played. PlayItem is information indicating Clip Information that records attribute information of an AV clip to be used for playback, and a STC-Sequence including Clip_info_file and the system time clock (STC) of the AV clip indicated by PlayItem on the corresponding AV clip. Ref_to_STC_id indicating the number of, and IN_time and OUT_time information indicating the start and end of the PlayItem in the STC-Sequence indicated by the PlayItem.
이러한 데이터 구조를 갖는 저장 매체의 재생 과정을 살펴보면, 재생하고자 하는 타이틀에서 지시하는 PlayList가 선택되고, 선택된 PlayList에 포함되어 있는 PlayItem이 일반 재생인 경우에는 앞부분부터 순차적으로 선택되고, 랜덤 접근인 경우에는 지정된 PlayItem부터 순차적으로 선택된다. Looking at the playback process of the storage medium having such a data structure, the PlayList indicated by the title to be played is selected, and when the PlayItem included in the selected PlayList is normal playback, it is sequentially selected from the beginning, and in the case of random access Selected sequentially from the specified PlayItem.
최초에 PlayItem #0이 선택되면, Clip_info_file=1 정보에 의해 Clip Information #1이 선택되고, ref_to_STC_id=0 정보에 의해 Clip Information #1이 지시하는 AV 클립의 ATC-Sequence 내에서 STC-Sequence #0이 선택되고, IN_time=in1, OUT_time=out1에 의해 STC-Sequence #0에 해당하는 시스템 타임 클럭(STC)에 의해 지시되는 in1 위치부터 out1의 위치까지 재생된다. When PlayItem # 0 is initially selected, Clip Information # 1 is selected by Clip_info_file = 1 information, and STC-Sequence # 0 is set in the ATC-Sequence of the AV clip indicated by Clip Information # 1 by ref_to_STC_id = 0 information. It is selected and reproduced from the in1 position to the position of out1 indicated by the system time clock (STC) corresponding to STC-Sequence # 0 by IN_time = in1 and OUT_time = out1.
다음으로 PlayItem #1이 선택되면, Clip_info_file=2 정보에 의해 Clip Information #2가 선택되고, ref_to_STC_id=0 정보에 의해 Clip Information #2가 지시하는 AV 클립의 ATC-Sequence 내에서 STC-Sequence #0이 선택되고, IN_time=in2, OUT_time=out2에 의해 STC-Sequence #0에 해당하는 시스템 타임 클럭(STC)에 의해 지시되는 in2 위치부터 out2 위치까지 재생되고, 이하 같은 방법으로 다음 PlayItem들을 재생하게 된다.Next, when PlayItem # 1 is selected, Clip Information # 2 is selected by Clip_info_file = 2 information, and STC-Sequence # 0 is selected in the ATC-Sequence of the AV clip indicated by Clip Information # 2 by ref_to_STC_id = 0 information. It is selected and reproduced from the in2 position to the out2 position indicated by the system time clock (STC) corresponding to STC-Sequence # 0 by IN_time = in2 and OUT_time = out2, and the following PlayItems are reproduced in the following manner.
다시 말하면, 하나의 PlayList가 선택되고, PlayList에 포함되어 있는 PlayItem이 선택되어 재생될 AV 클립의 위치를 찾고, 그 위치부터의 AV 클립을 도착 타임 스탬프(ATS)에 따라 재생 장치로 전송한 후, 전송된 데이터들 중 PCR 정보를 포함한 MPEG-2 TS 패킷을 이용하여 재생 장치의 시스템 타임 클럭(STC)을 재설정한다. 그 후에 비디오 액세스 유닛 및 오디오 액세스 유닛은 각각의 액세스 유닛에 포함된 프리젠테이션 타임 스탬프(PTS)가 시스템 타임 클럭(STC)과 일치하는 시점이 되면 디코딩을 시작하여 프리젠테이션 유닛을 만들고, 각각의 프리젠테이션 유닛의 프리젠테이션 타임 스탬프(PTS)가 상기 시스템 타임 클럭(STC)과 일치하는 시점이 되면 출력한다. In other words, one PlayList is selected, the PlayItem included in the PlayList is selected to find the position of the AV clip to be played, and the AV clip from the position is transmitted to the playback device according to the arrival time stamp (ATS), The system time clock (STC) of the playback apparatus is reset using MPEG-2 TS packets including PCR information among the transmitted data. After that, the video access unit and the audio access unit start decoding when the presentation time stamp (PTS) included in each access unit coincides with the system time clock (STC) to create a presentation unit, and make each presentation. If the presentation time stamp PTS of the presentation unit coincides with the system time clock STC, it is output.
한편, 클립의 재생시에, PlayItem에서 IN_time으로 지시하는 재생위치로 찾아 갔을 때, 그 재생위치가 그 클립내에서의 첫 번째 I-picture 이면, IN_time으로 지시된 위치부터 재생을 시작하는 것이 아니라, 해당 클립의 맨처음 위치에서부터 재생을 시작한다. 이는 오디오 데이터, 비디오 데이터의 끊김없는 재생을 위하여 부가 데이터를 미리 디코딩하여 두기 위함이다.On the other hand, when the PlayItem goes to the playback position indicated by IN_time in PlayItem, if the playback position is the first I-picture in the clip, playback does not start from the position indicated by IN_time. Playback starts from the beginning of the clip. This is to decode additional data in advance for seamless playback of audio data and video data.
도 7은 비디오 데이터, 오디오 데이터 및 그래픽 데이터를 포함하고 있는 AV 클립의 일예를 도시한 도면이다.7 is a diagram illustrating an example of an AV clip including video data, audio data, and graphic data.
도 7을 참조하면, AV 클립은 하나의 비디오 데이터, 3개의 오디오 데이터, 2개의 프리젠테이션 그래픽 데이터 및 2개의 인터랙티브 그래픽 데이터를 포함하고 있음을 알 수 있다. 3개의 오디오 데이터는 각각 영어, 한국어, 일본어 등으로 각각 다른 언어로 구성된 오디오 데이터이다. 프리젠테이션 그래픽 데이터는 종래의 DVD 등에서 자막 등을 출력하듯이 동영상에 대한 자막과 같은 그래픽을 출력하기 위한 데이터로써, 도 7의 예에서는 각각 다른 언어로 구성된 2개의 프리젠테이션 그래픽 데이터를 갖는다. 또한, 인터랙티브 그래픽 데이터는 메뉴나 버튼 등과 같이 사용자로부터 입력을 받아서 지정된 명령을 수행하기 위한 데이터로써, 도 7의 예에서는 각각 다른 언어로 구성된 2개의 인터랙티브 그래픽 데이터를 갖는다.Referring to FIG. 7, it can be seen that the AV clip includes one video data, three audio data, two presentation graphic data, and two interactive graphic data. The three audio data are audio data each composed of different languages such as English, Korean, and Japanese. The presentation graphic data is data for outputting a graphic such as a subtitle for a moving image as if a subtitle or the like is output from a conventional DVD or the like. In the example of FIG. 7, the presentation graphic data has two presentation graphic data configured in different languages. In addition, the interactive graphic data is data for performing a designated command by receiving an input from a user such as a menu or a button. In the example of FIG. 7, the interactive graphic data has two interactive graphic data configured in different languages.
도 8은 AV 클립상에 비디오 데이터, 오디오 데이터 및 그래픽 데이터들이 MPEG-2 TS 형식에 따라 기록되어 있는 것을 도시한 도면이다.FIG. 8 is a diagram showing that video data, audio data and graphic data are recorded in an MPEG-2 TS format on an AV clip.
도 8을 참조하면, 각각의 데이터들은 소정 크기의 패킷으로 만들어지며, 각 패킷은 비디오 패킷, 오디오 패킷, 그래픽 패킷 뿐만 아니라, 재생장치의 참조시간 정보인 Program Clock Reference(PCR) 패킷이 됨을 알 수 있다. 또한, 그래픽 패킷은 인터랙티브 그래픽 패킷과 프리젠테이션 그래픽 패킷이 있음을 알 수 있다.Referring to FIG. 8, each data is made of a packet having a predetermined size, and each packet is not only a video packet, an audio packet, and a graphic packet but also a Program Clock Reference (PCR) packet which is reference time information of a playback device. have. Also, it can be seen that the graphic packet includes an interactive graphic packet and a presentation graphic packet.
비디오 데이터가 MPEG-2 부호화 방식에 따라 인코딩되면, I, B, P 픽처가 만들어지며 이들 픽처가 각각 PTS를 가지며, PTS의 순서대로 배치되어 있다. 또한 오디오 데이터는 LPCM(Linear Pulse Coded Modulation), MPEG-2 오디오 부호화, AC-3 또는 DTS(Digital Teather System) 등의 압축 부호화 방식에 따라 인코딩되어 AV 클립에 배치되어 있다. 그리고, 인터랙티브 그래픽 데이터 및 프리젠테이션 그래픽 데이터도 각각 출력되어야 하는 시간 정보인 PTS를 가지고 AV 클립상에 배치되어 있다.When video data is encoded according to the MPEG-2 coding scheme, I, B, and P pictures are created, and these pictures each have a PTS and are arranged in the order of the PTSs. In addition, the audio data is encoded according to a compression coding scheme such as linear pulse coded modulation (LPCM), MPEG-2 audio coding, AC-3, or Digital Teather System (DTS), and arranged in an AV clip. The interactive graphic data and the presentation graphic data are also arranged on the AV clip with PTS which is time information to be output, respectively.
본 실시예에서는 편의상 MPEG-2 부호화 방식에 따라 만들어진 비디오 데이터만을 언급하였지만, 비디오 데이터는 MPEG-2 부호화 방식 외에 MPEG-4 또는 다른 다양한 비디오 부호화 방식으로 만들어질 수 있으며, 이 경우, 비디오 액세스 유닛(VAU)의 첫 번째 데이터가 기록되어 있는 AV 클립상의 소스 패킷의 위치가, EP_map 상에 엔트리 포인트로 기록되어 있는 경우에도 본 발명의 AV 스트림 구성방법이 적용될 수 있다.In the present embodiment, only the video data generated according to the MPEG-2 encoding method is mentioned for convenience, but the video data may be made by MPEG-4 or other various video encoding methods in addition to the MPEG-2 encoding method. In this case, the video access unit ( The AV stream construction method of the present invention can be applied even when the position of the source packet on the AV clip in which the first data of the VAU) is recorded as an entry point on the EP_map.
도 9는 EP_map 정보와 AV 클립상에서의 각 I-picture의 연결 관계를 도시한 도면이다.9 is a diagram showing a connection relationship between EP_map information and each I-picture on an AV clip.
EP_map 정보는 클립 인포메이션에 포함되어 있는데, EP_map은 각 I-picture의 PTS 정보 및 각 PTS 시간에 출력할 I-picture가 클립상의 어느 위치에 존재하는 패킷인가에 대한 정보를 저장하고 있다. 여기서, 각 I-picture의 위치를 엔트리 포인트(Entry Point)라고 한다. EP_map()에는 복수개의 엔트리 포인트가 있으며 이 정보는 특정 PTS에 출력되어야 할 동영상의 위치로 이동하기 위해 사용될 수 있다. 또한, PlayList에 포함되어 있는 PlayItem의 IN_time, OUT_time 정보에 따라 AV 클립상에서 해당 PlayItem이 가리키는 범위를 얻기 위해 사용될 수 있다. 즉, IN_time에 대한 AV 클립상의 위치부터 시작하여 OUT_time에 대한 AV 클립상의 위치까지가 PlayItem이 가리키는 범위가 된다.The EP_map information is included in the clip information. The EP_map stores PTS information of each I-picture and information on which position on the clip is the I-picture to be output at each PTS time. Here, the position of each I-picture is called an entry point. EP_map () has a plurality of entry points and this information can be used to move to the position of the video to be output to a specific PTS. In addition, it may be used to obtain the range indicated by the corresponding PlayItem on the AV clip according to the IN_time and OUT_time information of the PlayItem included in the PlayList. That is, the range indicated by the PlayItem is from the position on the AV clip for IN_time to the position on the AV clip for OUT_time.
도 10은 오디오, 비디오, 그래픽 패킷이 AV 클립상에 배치되어 있는 일예를 도시한 도면이다.10 is a diagram illustrating an example in which audio, video and graphic packets are arranged on an AV clip.
엔트리 포인트 x가 지시하는 위치에 있는 I-picture는 PTS 값 100을 가지며, PTS 값 100을 갖는 프리젠테이션 그래픽 데이터와 PTS 값 100을 갖는 인터랙티브 그래픽 데이터가 PTS 값 100을 갖는 I-picture의 앞에 배치되어 있다. 또한, 엔트리 포인트 y가 지시하는 위치에 있는 I-picture는 PTS 값 200을 가지며, PTS 값 200을 갖는 프리젠테이션 그래픽 데이터와 PTS 값 200을 갖는 인터랙티브 그래픽 데이터가, PTS 200을 갖는 I-picture 앞에 배치되어 있다. 마찬가지로 엔트리 포인트 z가 지시하는 위치에 있는 I-picture는 PTS 값 300을 가지며, PTS 값 300을 갖는 프리젠테이션 그래픽 데이터가 PTS 값 300을 갖는 I-picture 앞에 배치되어 있다.The I-picture at the position pointed to by entry point x has a PTS value of 100, and presentation graphics data having a PTS value of 100 and interactive graphic data having a PTS value of 100 are placed in front of the I-picture having a PTS value of 100. have. Further, the I-picture at the position indicated by the entry point y has a PTS value 200, and the presentation graphic data having the PTS value 200 and the interactive graphic data having the PTS value 200 are placed before the I-picture having the PTS 200. It is. Similarly, the I-picture at the position indicated by the entry point z has a PTS value 300, and the presentation graphic data having the PTS value 300 is placed before the I-picture having the PTS value 300.
이렇게 배치된 AV 클립을 순차적으로 재생을 하게 될 경우, 엔트리 포인트 x가 가리키는 위치를 재생 장치가 처리할 때, 이미 프리젠테이션 그래픽 데이터와 인터랙티브 그래픽 데이터는 이미 처리가 되어 그래픽 디코더(Graphics Decoder)에 출력 대기 상태가 되어 있다. 따라서, PTS 값 100인 시점에 엔트리 포인트 x가 가리키는 위치의 비디오가 출력되기 시작함과 동시에 프리젠테이션 그래픽 데이터와 인터랙티브 그래픽 데이터가 출력되는 순서로 재생된다.In this case, when the playback device processes the position indicated by the entry point x, the presentation graphic data and the interactive graphic data are already processed and output to the graphics decoder. It is in a waiting state. Accordingly, the video at the position indicated by the entry point x starts to be output at the point of time of the PTS value 100, and is reproduced in the order of presentation graphic data and interactive graphic data being output.
도 11a 내지 도 11c는 도 10에 도시한 바와 같이 구성된 AV 클립을 순차적으로 재생하였을 때의 출력화면을 도시한 도면이다.11A to 11C are views showing an output screen when the AV clips constructed as shown in FIG. 10 are sequentially played back.
엔트리 포인트 x 가 지시하는 비디오가 출력되는 시점인 PTS 값 100인 시점에서의 화면은, 도 11a와 같이 비디오와 함께 프리젠테이션 그래픽과 인터랙티브 그래픽이 출력됨을 알 수 있다. 또한 엔트리 포인트 y 가 지시하는 비디오가 출력되는 시점인 PTS 값 200인 시점에서의 화면도, 도 11b와 같이 비디오와 함께 프리젠테이션 그래픽과 인터랙티브 그래픽이 출력됨을 알 수 있다. 그리고, 엔트리 포인트 z 가 지시하는 비디오가 출력되는 시점인 PTS 값 300인 시점에서의 화면도, 도 11c와 같이 비디오와 함께 프리젠테이션 그래픽이 출력됨을 알 수 있다.As shown in FIG. 11A, the screen at the point of time at which the video indicated by the entry point x is outputted is a PTS value 100. As shown in FIG. 11A, the presentation graphic and the interactive graphic are output. Also, it can be seen that the presentation graphic and the interactive graphic are output together with the video as shown in FIG. 11B, when the PTS value 200 is the time point at which the video indicated by the entry point y is output. Also, it can be seen that the presentation graphic is output together with the video as shown in FIG. 11C, when the PTS value 300, which is the point in time at which the video indicated by the entry point z is output, is output.
도 12a 내지 도 12c는 도 10에 도시한 바와 같이 구성된 AV 클립을 점프 재생하였을 때의 출력화면을 도시한 도면이다.12A to 12C are diagrams showing an output screen when jumping and reproducing an AV clip configured as shown in FIG.
도 12a 내지 도 12c를 참조하면, 순차 재생과는 달리 각 엔트리 포인트로의 점프에 의한 재생에서는 프리젠테이션 그래픽과 인터랙티브 그래픽이 출력되지 않음을 알 수 있다. 그 이유는 도 10에 도시된 AV 클립상에서 각 비디오, 오디오, 프리젠테이션 그래픽 데이터와 인터랙티브 그래픽 데이터의 배열 순서 때문이다. 즉, 동일한 PTS를 갖는 비디오, 프리젠테이션 그래픽 데이터와 인터랙티브 그래픽 데이터를 배치하는데 있어, 도 10과 같이, 프리젠테이션 그래픽 데이터와 인터랙티브 그래픽 데이터를 먼저 배치하고, 뒤에 비디오 데이터를 배치한 경우, EP_map()은 비디오의 I-picture의 위치를 지시하고 있으므로 엔트리 포인트 x로 점프하여 재생을 할 경우에는 엔트리 포인트 x가 지시하는 위치보다 앞에 기록되어 있는 프리젠테이션 그래픽과 인터랙티브 그래픽은 출력이 되지 않는다. 이는 엔트리 포인트 y 및 엔트리 포인트 z로 점프하여 재생할 때도 마찬가지이다.12A to 12C, unlike the sequential playback, it can be seen that the presentation graphic and the interactive graphic are not output in the playback by jumping to each entry point. This is because of the arrangement order of each video, audio, presentation graphic data and interactive graphic data on the AV clip shown in FIG. That is, in arranging video, presentation graphic data, and interactive graphic data having the same PTS, as shown in FIG. Indicates the position of the I-picture of the video. When jumping to the entry point x for playback, the presentation graphic and the interactive graphic recorded before the position indicated by the entry point x are not output. The same applies to the playback by jumping to the entry point y and the entry point z.
도 13은 오디오, 비디오, 그래픽 패킷이 AV 클립상에 배치되어 있는 다른 일예를 도시한 도면이다.FIG. 13 is a diagram illustrating another example in which audio, video, and graphic packets are arranged on an AV clip.
도 13을 참조하면, 비디오의 I-picture와 동일한 PTS를 갖는 프리젠테이션 그래픽 데이터와 인터랙티브 그래픽 데이터는 I-picture의 이후에 기록되어 있음을 알 수 있다. 따라서, 각 엔트리 포인트로 점프하여 재생할 경우에도, I-picture 이후에 존재하는 인터랙티브 그래픽 데이터와 프리젠테이션 그래픽 데이터가 읽혀져 출력된다.Referring to FIG. 13, it can be seen that the presentation graphic data and the interactive graphic data having the same PTS as the I-picture of the video are recorded after the I-picture. Therefore, even when jumping to each entry point for reproduction, the interactive graphic data and the presentation graphic data existing after the I-picture are read and output.
따라서, 비디오와 동기되어 출력되도록 구성된 프리젠테이션 그래픽 데이터와 인터랙티브 그래픽 데이터 또는 기타 추가적인 데이터는 다음과 같은 관계를 만족하도록 배치하는 것이 바람직하다.Therefore, it is preferable to arrange the presentation graphic data and the interactive graphic data or other additional data configured to be output in synchronization with the video to satisfy the following relationship.
즉, 프리젠테이션 그래픽 데이터의 경우에 만일 PTS(Entry Point i) <= PTS(Entry Point i에 대응되는 프리젠테이션 그래픽)이면, SPN(Entry Point i) < SPN(Entry Point i에 대응되는 프리젠테이션 그래픽)가 되어야 한다. SPN은 소스 패킷 넘버(Source Packet Number)로써, AV 클립내에서의 위치를 나타낸다. 인터랙티브 그래픽 데이터의 경우에도 마찬가지로, PTS(Entry Point j) <= PTS(Entry Point j에 대응되는 인터랙티브 그래픽)이면, SPN(Entry Point j) < SPN(Entry Point j에 대응되는 인터랙티브 그래픽)의 관계가 되어야 한다.That is, in the case of presentation graphic data, if PTS (Entry Point i) <= PTS (presentation graphic corresponding to Entry Point i), SPN (Entry Point i) <SPN (presentation graphic corresponding to Entry Point i) Should be The SPN is a source packet number, which indicates a position in an AV clip. Similarly in the case of interactive graphic data, if PTS (Entry Point j) <= PTS (Interactive Graphic corresponding to Entry Point j), the relationship between SPN (Entry Point j) <SPN (Interactive Graphic corresponding to Entry Point j) is Should be.
이러한 관계는 프리젠테이션 그래픽 데이터나 인터랙티브 그래픽 데이터에만 적용되는 것은 아니고, 하나의 AV 클립상에 다중화되어 있고 PTS 값을 갖는 부가 데이터에 공통적으로 적용될 수 있다.This relationship is not only applied to presentation graphic data or interactive graphic data, but can also be commonly applied to additional data multiplexed on one AV clip and having a PTS value.
도 14는 오디오, 비디오, 그래픽 패킷이 AV 클립상에 배치되어 있는 또 다른 일예를 도시한 도면이다.14 is a diagram illustrating another example in which audio, video, and graphic packets are arranged on an AV clip.
도 14에서는 프리젠테이션 그래픽 데이터와 인터렉티브 그래픽 데이터가 I-picture의 전 또는 후에 위치할 수 있음을 알 수 있다. 따라서, 경우에 따라서는 도 14와 같이 구성된 AV 클립의 재생 위치를 엔트리 포인트 x로 점프하여 재생할 경우, 엔트리 포인트 x의 위치부터 재생을 시작한다면 엔트리 포인트 x가 지시하는 비디오 데이터의 PTS 값 100과 동일한 PTS 값을 갖는 인터랙티브 그래픽은 출력되지 않기 때문에 엔트리 포인트 x에 의해 지시되는 AV 스트림상의 위치 정보에 추가적으로 그래픽 데이터의 위치 정보를 포함하도록 한다. 이를 도 15를 참조하여 설명한다.In FIG. 14, it can be seen that the presentation graphic data and the interactive graphic data may be located before or after the I-picture. Therefore, in some cases, when the playback position of the AV clip configured as shown in FIG. 14 is played back by jumping to the entry point x, if the playback starts from the position of the entry point x, the PTS value 100 of the video data indicated by the entry point x is the same. Since the interactive graphic having the PTS value is not output, the positional information of the graphic data is included in addition to the positional information on the AV stream indicated by the entry point x. This will be described with reference to FIG. 15.
도 15는 비디오 데이터의 각 엔트리 포인트의 시간 및 위치 정보를 기록하고 있는 EP_map()에 추가적으로 그래픽 데이터의 위치를 기록하도록 한 EP_map()의 일예를 나타낸 도면이다.FIG. 15 is a diagram showing an example of EP_map () for recording the position of graphic data in addition to EP_map () which records time and position information of each entry point of video data.
종래의 EP_map()에는 비디오 데이터의 각 엔트리 포인트, 즉 I-picture에 대한 시간 정보인 PTS와 AV 스트림상에서의 위치를 나타내는 소스 패킷 번호(SPN)를 기록하고 있는데, 여기에 그래픽 데이터의 위치를 나타내는 패킷 번호를 추가로 기록함으로써, 특정 엔트리 포인트로 점프하여 재생할 경우, 재생을 시작할 위치가 비디오의 I-picture의 시작 지점부터인지, 또는 그래픽 데이터의 시작 지점부터인지를 결정할 수 있다. 도 15를 참조하면, 비디오 데이터, 오디오 데이터, 프리젠테이션 그래픽 데이터, 인터랙티브 그래픽 데이터가 AV 스트림상에 다중화되어 있고, 비디오 데이터의 각 I-picture의 PTS와 SPN 정보가 EP_map()에 기록되어 있으며, 여기에 추가하여, 각 I-picture의 PTS보다 크거나 같은 PTS를 갖는 그래픽 데이터가 I-picture의 SPN보다 앞에 기록되어 있는 경우에는, 그래픽 데이터의 SPN값이 더 기록되어 있음을 알 수 있다.In the conventional EP_map (), each entry point of video data, i.e., a PTS, which is time information on an I-picture, and a source packet number (SPN) indicating a position on an AV stream, are recorded. By further recording the packet number, when jumping and playing back to a specific entry point, it is possible to determine whether the position to start playback is from the start point of the I-picture of the video or from the start point of the graphic data. Referring to FIG. 15, video data, audio data, presentation graphic data, and interactive graphic data are multiplexed on an AV stream, and PTS and SPN information of each I-picture of video data is recorded in EP_map (). In addition, when graphic data having a PTS larger than or equal to the PTS of each I-picture is recorded before the SPN of the I-picture, it can be seen that the SPN value of the graphic data is further recorded.
한편, 재생할 위치가 EP map 상에서 클립의 첫 번째 엔트리 포인트일 때에는, 그 클립의 맨 처음인 첫 번째 소스 패킷 넘버(SPN)에서부터 재생된다.On the other hand, when the playback position is the first entry point of the clip on the EP map, it is played back from the first source packet number SPN, which is the beginning of the clip.
도 16은 도 15에서 도시한 EP_map()에 의해 동영상의 재생 위치 변경 명령이 수행되는 과정을 도시한 도면이다.FIG. 16 is a diagram illustrating a process of changing a playback position of a video by EP_map () shown in FIG. 15.
재생 장치가 시간 이동, 챕터 이동 등의 재생 위치 변경 명령을 수신하면(S1610), 재생 장치는 우선 EP_map()상에서 비디오의 PTS를 기준으로 변경할 위치에 대응하는 엔트리 포인트를 검색한다(S1620). 이동하고자 하는 엔트리 포인트가 검색된 후, 해당 엔트리 포인트가 그래픽 SPN을 포함하고 있는지를 확인하여(S1630), 그래픽 SPN이 기록되어 있는 경우에는 그래픽 SPN이 지시하는 위치로 이동하고(S1640), 그렇지 않은 경우에는 비디오 SPN이 지시하는 위치로 이동한다(S1650). 그리고 나서 재생을 시작한다(S1660).When the playback device receives a playback position change command such as a time shift or a chapter shift (S1610), the playback apparatus first searches for an entry point corresponding to the position to be changed based on the PTS of the video on the EP_map () (S1620). After the entry point to be moved is found, it is checked whether the entry point includes the graphic SPN (S1630), and if the graphic SPN is recorded, it moves to the position indicated by the graphic SPN (S1640). In step S1650, the video SPN moves to the position indicated by the video SPN. Then, playback starts (S1660).
한편, 전술한 AV 스트림의 재생방법은 컴퓨터 프로그램으로 작성 가능하다. 상기 프로그램을 구성하는 코드들 및 코드 세그먼트들은 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다. 또한, 상기 프로그램은 컴퓨터가 읽을 수 있는 정보저장매체(computer readable media)에 저장되고, 컴퓨터에 의하여 읽혀지고 실행됨으로써 AV 스트림 재생방법을 구현한다. 상기 정보저장매체는 자기 기록매체, 광 기록매체, 및 캐리어 웨이브 매체를 포함한다.On the other hand, the above-mentioned reproduction method of the AV stream can be created by a computer program. Codes and code segments constituting the program can be easily inferred by a computer programmer in the art. In addition, the program is stored in a computer readable media, and read and executed by a computer to implement the AV stream reproduction method. The information storage medium includes a magnetic recording medium, an optical recording medium, and a carrier wave medium.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.So far I looked at the center of the preferred embodiment for the present invention. Those skilled in the art will appreciate that the present invention can be implemented in a modified form without departing from the essential features of the present invention. Therefore, the disclosed embodiments should be considered in descriptive sense only and not for purposes of limitation. The scope of the present invention is shown in the claims rather than the foregoing description, and all differences within the scope will be construed as being included in the present invention.
전술한 바와 같이 본 발명에 따르면, 재생 위치 변경시 임의의 엔트리 포인트가 지시하는 PTS보다 크거나 같은 PTS를 갖는 그래픽 데이터가 그 엔트리 포인트가 지시하는 SPN보다 작은 값을 갖는 경우, 즉 비디오 데이터보다 앞에 그래픽 데이터가 기록되어 있는 경우에도 비디오와 그래픽이 모두 출력될 수 있다.As described above, according to the present invention, when the playback position changes, graphic data having a PTS that is greater than or equal to the PTS indicated by any entry point has a value smaller than the SPN indicated by the entry point, that is, before the video data. Even when graphic data is recorded, both video and graphics can be output.
도 1은 비디오 오브젝트 셋의 상세 구성도,1 is a detailed configuration diagram of a video object set;
도 2는 비디오 스트림, 오디오 스트림 및 기타 프리젠테이션용 스트림을 다중화하여 AV 스트림으로 만들어 저장매체에 기록하는 과정을 도시한 도면,2 is a diagram illustrating a process of multiplexing a video stream, an audio stream, and other presentation streams into an AV stream, and recording the same on a storage medium;
도 3은 AV 스트림을 재생하는 재생장치의 간략한 블록도,3 is a simplified block diagram of a playback apparatus for playing an AV stream;
도 4는 저장매체에 기록된 AV 스트림을 구성하는 소스 패킷이 재생장치로 입력되는 것을 도시한 도면,4 is a view showing that source packets constituting an AV stream recorded on a storage medium are input to a playback apparatus;
도 5는 하나의 ATC-Sequence를 갖는 소스 패킷들이 재생 장치로 입력될 때, 재생장치의 STC의 변화를 설명하기 위한 도면,5 is a view for explaining a change in the STC of the playback apparatus when source packets having one ATC-Sequence are input to the playback apparatus;
도 6은 저장매체에 기록되어 있는 AV 클립의 재생 순서와 재생 위치를 지정하기 위한 네비게이션 정보와 AV 클립의 연결 관계를 도시한 도면,FIG. 6 is a diagram showing a connection relation between AV information and navigation information for designating a playback order and playback position of an AV clip recorded on a storage medium; FIG.
도 7은 비디오 데이터, 오디오 데이터 및 그래픽 데이터를 포함하고 있는 AV 클립의 일예를 도시한 도면,7 illustrates an example of an AV clip including video data, audio data, and graphic data;
도 8은 AV 클립상에 비디오 데이터, 오디오 데이터 및 그래픽 데이터들이 MPEG-2 TS 형식에 따라 기록되어 있는 것을 도시한 도면,8 is a diagram showing that video data, audio data and graphic data are recorded on an AV clip according to MPEG-2 TS format;
도 9는 EP_map 정보와 AV 클립상에서의 각 I-picture의 연결 관계를 도시한 도면,9 is a diagram showing a connection relationship between EP_map information and each I-picture on an AV clip;
도 10은 오디오, 비디오, 그래픽 패킷이 AV 클립상에 배치되어 있는 일예를 도시한 도면,10 is a diagram illustrating an example in which audio, video, and graphic packets are arranged on an AV clip;
도 11a 내지 도 11c는 도 10에 도시한 바와 같이 구성된 AV 클립을 순차적으로 재생하였을 때의 출력화면을 도시한 도면,11A to 11C are views showing an output screen when sequentially playing an AV clip configured as shown in FIG. 10;
도 12a 내지 도 12c는 도 10에 도시한 바와 같이 구성된 AV 클립을 점프 재생하였을 때의 출력화면을 도시한 도면,12A to 12C are views showing an output screen when jumping and reproducing an AV clip configured as shown in FIG. 10;
도 13은 오디오, 비디오, 그래픽 패킷이 AV 클립상에 배치되어 있는 다른 일예를 도시한 도면,FIG. 13 is a diagram showing another example in which audio, video and graphic packets are arranged on an AV clip; FIG.
도 14는 오디오, 비디오, 그래픽 패킷이 AV 클립상에 배치되어 있는 또 다른 일예를 도시한 도면,14 is a diagram showing another example in which audio, video, and graphic packets are arranged on an AV clip;
도 15는 비디오 데이터의 각 Entry Point의 시간 및 위치 정보를 기록하고 있는 EP_map()에 추가적으로 그래픽 데이터의 위치를 기록하도록 한 EP_map()의 일예를 나타낸 도면,FIG. 15 is a view showing an example of EP_map () for recording the position of graphic data in addition to EP_map () which records time and position information of each entry point of video data; FIG.
도 16은 도 15에서 도시한 EP_map()에 의해 동영상의 재생 위치 변경 명령이 수행되는 과정을 도시한 도면이다.FIG. 16 is a diagram illustrating a process of changing a playback position of a video by EP_map () shown in FIG. 15.
Claims (16)
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US11/143,483 US20060007963A1 (en) | 2004-06-10 | 2005-06-03 | Information storage medium containing AV stream including graphic data, and reproducing method and apparatus therefor |
TW094118528A TWI290436B (en) | 2004-06-10 | 2005-06-06 | Information storage medium containing AV stream including graphic data, and reproducing method and apparatus therefor |
EP05253484A EP1605701A3 (en) | 2004-06-10 | 2005-06-07 | Information storage medium containing AV stream including graphic data, and reproducing method and apparatus therefor |
JP2005170062A JP2005354706A (en) | 2004-06-10 | 2005-06-09 | Information recording medium with av stream containing graphic data recorded thereon, reproducing method and reproducing apparatus |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20040042657 | 2004-06-10 | ||
KR1020040042657 | 2004-06-10 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20050117462A true KR20050117462A (en) | 2005-12-14 |
KR100547162B1 KR100547162B1 (en) | 2006-01-26 |
Family
ID=35581735
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020040047624A KR100547162B1 (en) | 2004-06-10 | 2004-06-24 | Information storage medium containing AV stream including a graphic data, and reproducing method and apparatus thereof |
Country Status (2)
Country | Link |
---|---|
KR (1) | KR100547162B1 (en) |
CN (1) | CN100450169C (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8762842B2 (en) | 2004-02-09 | 2014-06-24 | Samsung Electronics Co., Ltd. | Information storage medium containing interactive graphics stream for change of AV data reproducing state, and reproducing method and apparatus thereof |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8180029B2 (en) * | 2007-06-28 | 2012-05-15 | Voxer Ip Llc | Telecommunication and multimedia management method and apparatus |
EP3278563A4 (en) * | 2015-03-31 | 2018-10-31 | RealNetworks, Inc. | Accompanying message data inclusion in compressed video bitsreams systems and methods |
JP6760296B2 (en) * | 2015-09-16 | 2020-09-23 | ソニー株式会社 | Transmission device, transmission method, playback device and playback method |
CN113542765B (en) * | 2021-07-13 | 2023-09-15 | 海信电子科技(深圳)有限公司 | Media data jump continuous playing method and display device |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW367494B (en) * | 1996-11-28 | 1999-08-21 | Toshiba Corp | Control apparatus and method for regeneration of sub-image |
KR100234265B1 (en) * | 1997-06-17 | 1999-12-15 | 윤종용 | Caption data processing circuit and method therefor |
JP3422686B2 (en) * | 1998-06-12 | 2003-06-30 | 三菱電機株式会社 | Data decoding device and data decoding method |
KR100399999B1 (en) * | 2001-02-05 | 2003-09-29 | 삼성전자주식회사 | Recording medium containing multi-stream recorded thereon, recording apparatus, recording method therefor, reproducing apparatus, and reproducing method therefor |
EP1423853B1 (en) * | 2001-10-23 | 2009-04-01 | Samsung Electronics Co., Ltd. | Information storage medium containing event occurrence information, and method therefor |
JP4061567B2 (en) * | 2001-12-03 | 2008-03-19 | 松下電器産業株式会社 | DVD audio playback apparatus and DVD audio playback method |
JP4441884B2 (en) * | 2002-11-11 | 2010-03-31 | ソニー株式会社 | Information processing apparatus and method, program storage medium, recording medium, and program |
-
2004
- 2004-06-24 KR KR1020040047624A patent/KR100547162B1/en not_active IP Right Cessation
-
2005
- 2005-06-10 CN CNB2005100751872A patent/CN100450169C/en not_active Expired - Fee Related
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8762842B2 (en) | 2004-02-09 | 2014-06-24 | Samsung Electronics Co., Ltd. | Information storage medium containing interactive graphics stream for change of AV data reproducing state, and reproducing method and apparatus thereof |
US8856652B2 (en) | 2004-02-09 | 2014-10-07 | Samsung Electronics Co., Ltd. | Information storage medium containing interactive graphics stream for change of AV data reproducing state, and reproducing method and apparatus thereof |
Also Published As
Publication number | Publication date |
---|---|
CN1708121A (en) | 2005-12-14 |
KR100547162B1 (en) | 2006-01-26 |
CN100450169C (en) | 2009-01-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP1784014B1 (en) | Image encoding device, and image decoding device | |
CA2783960C (en) | Information storage medium having recorded thereon text subtitle data synchronized with av data, and reproducing method and apparatus therefor | |
RU2302670C2 (en) | Data carrier with data structure for controlling reproduction of video data for a set of reproduction channels, at least for segment with content elements recorded in it, reproduction and recording methods and devices | |
JP3824699B2 (en) | Information recording medium, recording apparatus and method thereof, reproducing apparatus and method thereof, and information processing apparatus and method | |
JP3815458B2 (en) | Information processing apparatus, information processing method, and program | |
JP4678761B2 (en) | Method for synchronizing a data stream comprising audio data and / or video data and / or another data | |
EP3118854B1 (en) | Recording medium, playback device, and playback method | |
US20070274393A1 (en) | Moving Image Encoding Method And Apparatus | |
EP1605701A2 (en) | Information storage medium containing AV stream including graphic data, and reproducing method and apparatus therefor | |
CN100450169C (en) | Information storage medium containing AV stream including graphic data, and reproducing method and apparatus therefor | |
KR100958760B1 (en) | Data recording method, and recording medium | |
JP4142063B2 (en) | Information recording medium, recording apparatus and method thereof, reproducing apparatus and method thereof, and information processing apparatus and method | |
KR100987767B1 (en) | Information storage medium storing still picture, reproducing apparatus and method therefor | |
JP4800824B2 (en) | recoding media | |
JP4813905B2 (en) | Playback apparatus and method, recording medium, data structure, and recording apparatus and method | |
JP2007128641A (en) | Information processing device, information processing method and program, recording medium, and data structure | |
JP2005346911A (en) | Information recording medium | |
JP2005276438A (en) | Information recording medium and replica disk |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20121228 Year of fee payment: 8 |
|
FPAY | Annual fee payment |
Payment date: 20131230 Year of fee payment: 9 |
|
LAPS | Lapse due to unpaid annual fee |