KR101516325B1 - Ｉｓｏ 기반 미디어 파일 포맷으로 ｍｐｅｇ－２전송스트림을 저장 및 재생하는 방법 및 장치 - Google Patents

Ｉｓｏ 기반 미디어 파일 포맷으로 ｍｐｅｇ－２전송스트림을 저장 및 재생하는 방법 및 장치 Download PDF

Info

Publication number
KR101516325B1
KR101516325B1 KR1020080031854A KR20080031854A KR101516325B1 KR 101516325 B1 KR101516325 B1 KR 101516325B1 KR 1020080031854 A KR1020080031854 A KR 1020080031854A KR 20080031854 A KR20080031854 A KR 20080031854A KR 101516325 B1 KR101516325 B1 KR 101516325B1
Authority
KR
South Korea
Prior art keywords
mpeg
transport stream
sample
box
information
Prior art date
Application number
KR1020080031854A
Other languages
English (en)
Other versions
KR20080090356A (ko
Inventor
방건
김휘용
기명석
김현철
이한규
홍진우
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Publication of KR20080090356A publication Critical patent/KR20080090356A/ko
Application granted granted Critical
Publication of KR101516325B1 publication Critical patent/KR101516325B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4305—Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4345—Extraction or processing of SI, e.g. extracting service information from an MPEG stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/85406—Content authoring involving a specific file format, e.g. MP4 format
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/78—Television signal recording using magnetic recording
    • H04N5/782—Television signal recording using magnetic recording on tape

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

본 발명은 ISO 기반 미디어 파일 포맷을 활용하여 MPEG-2 전송스트림을 저장 및 재생하는 방법 및 장치에 관한 것이다. 본 발명에 의한 저장 방법은 저장하고자 하는 MPEG-2 전송스트림을 임의 접근을 위한 샘플로서 상기 ISO 기반 미디어 파일 포맷의 mdat 박스에 저장하는 단계와, 상기 MPEG-2 전송스트림의 샘플의 시간 정보, 위치 정보, 크기 정보, PMT (Program Map Table) 관련 정보를 상기 ISO 기반 미디어 파일 포맷의 moov 박스에 기술하는 단계를 포함한다. 본 발명에 의하면, DMB 방식의 MPEG-2 전송스트림을 단말에 저장할 경우 스트림의 임의 접근 재생 및 단말간의 상호 호환을 용이하게 제공할 수 있다.

Description

ＩＳＯ 기반 미디어 파일 포맷으로 ＭＰＥＧ－２ 전송스트림을 저장 및 재생하는 방법 및 장치{STORAGE/PLAYBACK METHOD AND APPARATUS FOR MPEG-2 TRANSPORT STREAM BASED ON ISO BASE MEDIA FILE FORMAT}
본 발명은 MPEG-2 전송스트림(Transport Stream: TS)을 저장 및 재생하는 방법 및 장치에 관한 것으로서, 특히 ISO 기반 미디어 파일 포맷을 활용하여 MPEG-2 전송스트림을 저장 및 재생하는 방법 및 장치에 관한 것이다.
본 발명은 정보통신부 및 정보통신연구진흥원의 IT성장동력기술개발사업의 일환으로 수행한 연구로부터 도출된 것이다[과제관리번호: 2006-S-082-02, 과제명: 맞춤시청형 DMB 기술개발(Development of Digital Multimedia Broadcasting Technology for Personalized Broadcasting)].
현재 일반 MPEG-2 전송스트림 및 DMB 전송스트림을 저장하는 표준화된 방식이 규정되어 있지 않아 각 단말 사업자마다 다른 저장 방식을 사용하고 있거나 전 송된 MPEG-2 전송스트림을 그대로 저장하는 방식을 사용하고 있다.
하지만 단말 사업자의 개별적인 저장 방식을 사용할 경우 저장 방식이 단말별로 상이하게 됨으로 인해 콘텐츠 재생, 불법유통 방지 및 메타데이터 저장 등 단말간 상호 호환에 어려움이 생긴다. 또한 MPEG-2 전송스트림을 그대로 저장하는 경우 MPEG-2 전송스트림은 저장이 아닌 전송을 주 목적으로 하므로 임의 접근(random access) 재생이나 파일 재가공 등에서 많은 단점을 지니고 있다.
한편, 현재 DMB 저장 포맷의 표준화를 위해 진행 중인 DMB AF (Application Format for Digital Multimedia Broadcasting) 파일 표준은 저장된 방송 콘텐츠 파일간의 상호 호환을 지원하나 AV 데이터를 ES (Elementary Stream) 단위로 저장하므로 지상파 DMB 콘텐츠의 유통 형태로 가장 많이 사용되는 MPEG-2 전송스트림을 저장할 수 없다는 문제점이 있다.
본 발명은 이러한 종래의 문제점을 해결하기 위한 것으로서, 임의 접근 재생이 가능하고 용이한 재가공이 가능하도록 MPEG-2 전송스트림을 단말 장치에 저장하는 것을 일 목적으로 한다.
또한 본 발명은 단말간 상호 호환성을 갖도록 MPEG-2 전송스트림을 저장하는 것을 다른 목적으로 한다.
또한 본 발명은 임의 접근을 지원하면서 DMB 방송 콘텐츠를 MPEG-2 전송스트 림 형태로 저장하고 재생하는 것을 또 다른 목적으로 한다.
본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있으며, 본 발명의 실시예에 의해 보다 분명하게 알게 될 것이다. 또한, 본 발명의 목적 및 장점들은 특허청구범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.
전술한 바와 같은 목적을 달성하기 위한 본 발명은 ISO (International Organization for Standardization) 기반 미디어 파일 포맷으로 MPEG-2 전송스트림(Transport Stream)을 저장하는 방법에 있어서, 저장하고자 하는 MPEG-2 전송스트림을 임의 접근을 위한 샘플 - 여기서, 상기 샘플간의 경계는 상기 MPEG-2 전송스트림 규격에 의한 패킷 단위, GOP 단위, 전체 전송스트림 단위로 정한 샘플들간의 경계와 일치함 - 로서 정의하고 상기 ISO 기반 미디어 파일 포맷의 mdat 박스에 저장하는 단계와, 상기 MPEG-2 전송스트림의 샘플 시간 정보, 샘플 위치 정보, 샘플 크기 정보, PMT (Program Map Table) 관련 정보를 상기 ISO 기반 미디어 파일 포맷의 moov 박스에 기술하는 단계를 포함하는 것을 특징으로 한다.
또한 본 발명은 ISO 기반 미디어 파일 포맷으로 MPEG-2 전송스트림을 저장하는 장치에 있어서, 외부 신호를 수신하여 MPEG-2 전송스트림을 출력하는 신호 수신부와, 상기 신호 수신부를 통해 출력된 MPEG-2 전송스트림으로부터 샘플 단위로 시간 정보, 위치 정보, 크기 정보 및 PMT 관련 정보를 추출하는 신호 처리부와, 상기 신호 수신부에서 출력된 MPEG-2 전송스트림을 상기 ISO 기반 미디어 파일 포맷의 mdat 박스에 저장하고, 상기 신호 처리부에서 추출된 MPEG-2 전송스트림의 샘플들의 시간 정보, 위치 정보, 크기 정보 및 PMT 관련 정보를 임의 접근을 위한 상기 ISO 기반 미디어 파일 포맷의 moov 박스에 기술하는 파일 저장부를 포함하는 것을 다른 특징으로 한다.
또한 본 발명은 DMB 단말장치에 있어서, DMB 신호를 수신하여 MPEG-2 전송스트림을 출력하는 신호 수신부와, 상기 MPEG-2 전송스트림을 ISO 기반 미디어 파일 포맷으로 저장하는 파일 저장부 - 여기서, 상기 MPEG-2 전송스트림은 샘플로서 상기 ISO 기반 미디어 파일 포맷의 mdat 박스에 저장되고, 상기 MPEG-2 전송스트림의 샘플 단위의 시간 정보, 위치 정보, 크기 정보, PMT 관련 정보는 상기 ISO 기반 미디어 파일 포맷의 moov 박스에 기술됨 - 와, 상기 MPEG-2 전송스트림으로부터 AV 스트림을 생성하는 수단과, 상기 생성된 AV 스트림을 출력하는 출력부를 포함하고, 상기 moov 박스에 기술된 정보를 이용하여 상기 mdat 박스에 저장된 MPEG-2 전송스트림에 대한 임의 접근 재생을 제어하는 것을 또 다른 특징으로 한다.
또한 본 발명은 ISO 기반 미디어 파일 포맷으로 DMB 방식의 MPEG-2 전송스트림을 저장하는 방법에 있어서, 저장하고자 하는 MPEG-2 전송스트림을 임의 접근을 위한 샘플 - 여기서, 상기 샘플의 경계는 상기 MPEG-2 전송스트림의 경계와 일치함 - 로서 상기 ISO 기반 미디어 파일 포맷의 mdat 박스에 저장하는 단계와, 상기 저장하고자 하는 MPEG-2 전송스트림의 샘플 단위의 PMT 관련 정보, OD (Object Descriptor) 정보를 상기 ISO 기반 미디어 파일 포맷의 moov 박스에 기술하는 단계 를 포함하는 것을 또 다른 특징으로 한다.
또한 본 발명은 ISO 기반 미디어 파일 포맷으로 DMB 방식의 MPEG-2 전송스트림을 저장하는 장치에 있어서, 외부 신호를 수신하여 MPEG-2 전송스트림을 출력하는 신호 수신부와, 상기 신호 수신부를 통해 출력된 MPEG-2 전송스트림으로부터 샘플 단위로 PMT 관련 정보, OD 정보를 추출하는 신호 처리부와, 상기 신호 수신부에서 출력된 MPEG-2 전송스트림을 임의 접근을 위한 샘플로서 상기 ISO 기반 미디어 파일 포맷의 mdat 박스에 저장하고, 상기 신호 처리부에서 추출된 MPEG-2 전송스트림의 PMT 관련 정보, OD 정보를 샘플 단위로 상기 ISO 기반 미디어 파일 포맷의 moov 박스에 기술하는 파일 저장부를 포함하는 것을 또 다른 특징으로 한다.
전술한 바와 같은 본 발명에 의하면, DMB 방식의 MPEG-2 전송스트림을 단말에 저장할 경우 스트림의 임의 접근 재생 및 단말간의 상호 호환을 용이하게 제공할 수 있다. 또한 DMB AV 방송 채널로 전송되는 전송스트림 뿐만 아니라 현재 방송되고 있는 AV와 관련된 데이터(AV 메타데이터, DAB MOT/TDC 채널을 통해 전송된 데이터 서비스)를 함께 저장할 수 있어 기존의 AV 단순 시청에서 벋어나 AV 서비스와 함께 데이터 서비스까지 제공받을 수 있는 효과가 있다. 또한, 본 발명은 저장된 콘텐츠를 유통 및 재가공할 때 발생할 수 있는 콘텐츠의 보호에 대한 문제를 해결할 수 있을 것으로 기대된다.
상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예들을 상세히 설명하기로 한다.
도 1은 본 발명의 제1 실시예에 의한 지상파 DMB 단말 장치의 블록도이다. 도시된 바와 같이 지상파 DMB 단말 장치(100)는 신호 수신부(102), 신호 처리부(104), AV 복호화부(106), AV 출력부(108), 파일 저장부(110)로 구성된다.
신호 수신부(102)는 지상파 DMB 신호를 수신하고 처리하여 MPEG-2 전송스트림을 출력한다. 신호 처리부(104)는 신호 수신부(101)를 통해 출력된 MPEG-2 전송스트림으로부터 샘플 정보로 시간 정보, 위치 정보, 크기 정보, PMT 관련 정보를 추출한다. 그리고 파일 저장부(110)는 신호 수신부(102)에서 출력된 MPEG-2 전송스트림을 저장하고, 신호 처리부(104)에서 추출된 임의 접근을 위한 정보를 MPEG-2 전송스트림과 관련하여 저장한다.
이하, 신호 처리부(104)에 대해 구체적으로 설명한다. 도시된 바와 같이, 신호 처리부(104)는 MPEG-2 TS 디멀티플렉서(112), MPEG-2 PES 디패킷타이저(114), MPEG-4 SL 디패킷타이저(116)를 구비하고 있다.
MPEG-2 전송스트림 디멀티플렉서(112)는 신호 수신부(102)에서 출력된 MPEG-2 전송스트림을 디멀티플렉싱하여 MPEG-2 PES 패킷을 출력하고, 디멀티플렉싱된 결과를 이용하여 임의 접근 가능 여부를 파일 저장부(110)에 알려준다. 그리고 MPEG-2 PES 디패킷타이저(114)는 MPEG-2 전송스트림 디멀티플렉서(112)로부터 PES 패킷들을 수신하고 수신된 패킷을 디패킷타이징하며, 디패킷타이징할 때 추출된 시간 정보를 파일 저장부(110)로 전달한다. 일반적인 MPEG-2 전송스트림의 경우 PES 내에는 A/V 데이터가 존재하나 지상파 DMB 경우에는 MPEG-4 시스템즈 사용을 위해 A/V 데이터가 MPEG-4 SL 패킷화 되어 있다. 따라서 MPEG-4 SL 디패킷타이저(116)는 MPEG-4 SL 패킷들을 수신하고 디패킷타이징을 수행하여 시간에 따른 AV 데이터를 추출한다.
AV 복호화부(106)는 AV 스트림을 복호화하고, AV 출력부(108)는 AV 복호화부(106)에서 복호화된 AV 스트림을 이용자에게 출력하는 작업을 수행한다.
도 2는 본 발명의 제1 실시예에 의한 MPEG-2 전송스트림의 저장 방법을 설명하는 흐름도이다. 먼저, 신호 수신부(102)에서 출력된 MPEG-2 전송스트림 중에서 저장하고자 하는 MPEG-2 전송스트림을 임의 접근을 위한 샘플로서 ISO 기반 미디어 파일 포맷의 mdat 박스에 저장한다(202). 여기서, MPEG-2 전송스트림에서 샘플의 경계는 패킷, GOP, 전체 MPEG-2 전송스트림간의 경계와 일치하도록 한다. 샘플의 기본 정의는 저장시에 정할 수 있다.
다음에는 MPEG-2 전송스트림에 대한 임의 접근을 위해 샘플의 시간 정보, 샘플의 위치 정보, 샘플 크기 정보, PMT (Program Map Table) 관련 정보를 ISO 기반 미디어 파일 포맷의 moov 박스에 기술한다(204).
도 3은 본 발명에 의한 저장 파일의 구성도이다. 신호 수신부(102)에서 수신되는 전송스트림 패킷은 도 3에 도시된 바와 같은 파일 형태로 파일 저장부(110)에 저장된다. 저장 파일 형식(20)에서 MPEG-2 전송스트림은 mdat(208)에 저장된다. MPEG-2 전송스트림이 저장되었을 경우 파일내에 다양한 부가 정보들이 추가되며 moov(211) 위치에는 mdat(208)에 저장되어 있는 MPEG-2 전송스트림의 임의 접근 재생을 위해 상기에서 추출된 샘플 시간 정보, 샘플 위치 정보, PMT 관련 정보를 서술한다. moov(211)에 대해 좀 더 자세히 설명하자면 다음과 같다.
MPEG-2 전송스트림이 저장될 경우, moov(211) 내에는 MPEG-2 전송스트림 재생을 위한 시간 정보가 서술되어 있어야 한다.
따라서, moov(211)의 mvhd(201) 위치에는 단위 시간 측정을 위한 타임 스케일(time scale)을 담게 되는데, 이 단위는 MPEG-2 시스템 규격에 정의되어 있는 단위로 표시할 수 있다.
trak(202)은 mdat(208)에 저장된 MPEG-2 전송스트림의 비디오에 대한 기본 시각적 표현을 width, height로 서술하고 있는 tkhd(203), 임의 접근을 통한 MPEG-2 전송스트림의 특정 위치상에서의 재생을 위해 필요한 샘플 시간 정보 및 파일로 저장된 MPEG-2 전송스트림의 위치를 서술할 수 있는 mdia(204)로 구성되어 있다. mdia(204)에 대한 자세한 설명은 아래와 같다.
MPEG-2 전송스트림의 임의 접근 재생을 위한 파일 구성을 위해서는 재생을 위한 사전 정보를 추가하여야 하며 mdia(204)의 hdlr(206)은 이에 대한 정보를 담 을 수 있다. 그리고 minf(207)에는 단말에 저장되어 있는 MPEG-2 전송스트림 재생시 실제 사용자가 임의 접근 재생을 하기 위한 시간 정보 및 위치 정보를 담을 수 있는 stbl(sample table box)을 구비하고 있다.
도 3는 도 4에 도시된 trak 박스의 상세 구성도로서, 파일 내의 전송스트림에의 임의 접근을 위한 샘플 및 청크의 구성과, 시간 정보 및 위치 정보를 기록하는 방법을 설명하고 있다.
파일은 MPEG-2 전송스트림의 임의 접근 재생을 위해 재생 시점 단위로 샘플을 구성한다. 여기서 MPEG-2 전송스트림은 stbl에 구성된 샘플 단위로 stsd, stts, stsc, stco, stsz 등을 표현하여 구성한다.
사용자는 stts(Decoding Time to Sample Box)를 통해 각각의 샘플의 재생 시간과 이에 해당하는 샘플 번호를 알 수 있다. stsz(Sample Size Box)는 샘플 번호를 통해 각 샘플들의 위치를 알 수 있다.
또한, stsc(Sample To Chunk Box)를 통해 각 청크에 몇 개의 샘플들이 있는지와 이에 해당되는 stsd(Sample Description Box)에 표현되어 있는 sample description을 sample_description_index를 통해 알 수 있다. 또한, 각 청크들의 위치는 stco(Chunk Offset Box)를 통해 알 수 있게 된다.
본 발명에서 샘플은 실제 단말에서 디코딩할 수 있는 위치를 기준으로 하여 정해야 한다. MPEG-2 전송스트림 규격에 따르면 어떤 패킷의 adaptation_field에서 RAI(Random Access Indicator) 필드가 '1'로 표시된 경우 이 패킷은 비디오 시퀀스 헤더(video sequence header)의 시작 바이트를 포함하거나 오디오 프레임의 시작 바이트를 포함한다. 그리고 MPEG-2 전송스트림을 제대로 재생하기 위해서는 전송스트림에 재생되는 시간값이 단말의 STC(System Time Clock)와 일치해야 하며, 이를 위해 전송스트림에 포함되어 있는 PCR값이 필요하다.
이때 PCR은 100ms 간격으로 전송스트림에 포함되어 전송되며 본 발명에서는 샘플을 기반으로 임의 접근 재생을 할 경우 해당 샘플의 PCR값을 알고 있어야 한다.
도 4의 최하단에는 본 발명에 따라 정해진 MPEG-2 전송스트림의 샘플들의 일 실시예(401, 402, 403)를 도시하고 있다.
13818-1 MPEG-2 시스템 규격에 따르면 adaptation_field에는 MPEG-2 전송스트림의 임의 접근을 용하기 위한 식별자로 RAI field를 두고 있으며 RAI ='1'인 경우, 해당 패킷의 첫 페이로드(payload)가 비디오 시퀀스의 시작 바이트 또는 오디오 시퀀스를 포함한다고 정의하고 있다. 상기 속성을 갖는 TS 패킷의 adaptation_field에는 PCR 값이 포함되어 전송될 수 있기 때문에 adaptation_field의 RAI(random access indicator) = '1' 경우 PCR 값이 포함되어 있을 가능성이 높다.
따라서 샘플(401)의 경우와 같이 하나의 샘플 시작 위치는 RAI = '1'인 adaptation_field가 포함되어 있는 TS 패킷의 첫번째 바이트 위치가 될 것이다.
만약 RAI ='1' 인 TS 패킷에 PCR 값이 없을 경우, 샘플(402)과 같이 TS 패킷 이전의 TS 패킷의 PCR값과 이후 TS 패킷의 PCR값을 통해 예측하여 PCR값을 얻어낼 수 있다.
또는 샘플(403)와 같이 TS 패킷의 PCR값을 이전 샘플의 PCR값을 통해 얻을 수도 있다.
본 발명에서는 MPEG-2 전송스트림 상에서 PCR 값을 포함하는 RAI='1' 인 TS 패킷 또는 PCR을 포함하지 않을 경우 직전 또는 이전이후의 샘플의 PCR값을 통한 예측치를 PCR 값으로 하는 TS 패킷를 샘플의 시작 위치로 정의한다. 각 샘플의 PCR 값은 표 1과 같이 얻을 수 있다.
Figure 112008024743642-pat00001
도 5는 본 발명의 제 1 실시예에 따라 MPEG-2 전송스트림에의 임의 접근을 위해 필요한 시간 정보를 구성하는 방법을 설명한다.
ISO 기반 미디어 파일 포맷에는 미디어 샘플들의 시간 및 공간적 성질을 기술하기 위한 샘플 테이블 박스(stbl:Sample Table Box)가 존재한다.
본 발명에서는 저장된 MPEG-2 전송스트림 파일 포맷 내에 임의 접근 재생을 위해, 임의 접근이 가능한 PES(Packetized Elementary Stream) 패킷들을 묶어 하나의 샘플 및 하나의 청크(Chunk) 단위로 구성하였으며, 도 4를 참조하여 서술한 stts, stsc, stsz, stco 에 구성 정보를 기록한다.
일반적인 MPEG-2 전송스트림의 경우 PCR(Program Clock Reference)과 PES 패킷 헤더의 DTS(Decoding Time Stamp), PTS(Presentation Time Stamp)를 사용하여 복호화 및 시간(혹은 오프셋값)을 결정하고 이 값들은 각각 stts(혹은 ctts)에 기술 할 수 있다(501).
DMB 방송콘텐츠의 경우 PES 패킷 내에 SL(Synchronization Layer) 패킷이 포함되므로 여기서의 PTS는 실제 미디어의 재생 시점이 아닌 SL 패킷 복호화를 위한 시간을 의미하고, 실제 복호화를 위한 시간 정보는 SL 패킷 내의 OCR(Object Clock Reference)와 DTS(Decoding Time Stamp), CTS(Composition Time Stamp)에 표현되어 있다.
따라서 본 발명에서는 이러한 ISO 기반 미디어 파일 포맷 내의 MPEG-2 전송스트림에 대한 임의 접근을 위한 시간 정보 따른 샘플 구성을 위해 아래의 세가지 방법으로 제안하였다.
첫 번째는 샘플 구성을 위해 각 패킷에서 추출된 PCR값을 stts에 기술하는 방법이다. 이 경우 MPEG-2 전송스트림의 adaptation_field 정보만을 파싱해 정보를 추출 할 수 있다는 장점이 있는 반면, PCR을 기반으로 시스템 클럭을 초기화하여 복호화 시간(PTS/DTS)의 기준으로 삼는 것이기 때문에 재생 시간과 일치하지 않는다는 단점이 존재한다.
두 번째는 PTS 값을 이용하여 임의 접근 방법을 구성하고자 할 경우 상기 방법으로 구성된 샘플의 PTS값을 stts에 기술한다. 이 방법에 의한 시간 정보는 PES 패킷 파싱을 통해 획득할 수 있으며, MPEG-4 SL 패킷을 포함하지 않는 일반 MPEG-2 전송스트림의 경우 실제 재생 시간과 일치한다. 단, MPEG-4 SL 패킷을 포함하는 DMB 방송콘텐츠의 경우 실제 재생 시간과 일치하지 않는다.
세 번째는 DMB 방송콘텐츠의 경우 정확한 동기화 시간은 SL 패킷을 파싱해야 알 수 있으므로 stts에 실제 미디어의 DTS 또는 CTS값을 기술하는 방법이다. 이 방법은 SL 헤더까지 파싱해야 하며 복호화 또는 재생 시간과 파일에 기록한 시간정보가 일치한다.
도 5에 도시된 숫자 단위들은 시스템 구성을 위한 일 예이며 실제 시간 및 사이즈에 대한 단위 기술은 ISO/IEC 13818-1 MPEG-2 시스템 규격 및 전송되는 실제 데이터 구조에 따른다.
단말은 MPEG-2 전송스트림 재생을 위해서는 PAT(Program Association Table), PMT(Program Map Table)에 있는 정보들이 필수적으로 필요하다. ISO/IEC 13818-1 MPEG-2 시스템 규격에 따르면 비디오/오디오/데이터는 다중화되고 패킷화된 전송스트림으로 구성되고 PAT, PMT는 전송스트림내의 구성 정보를 서술하도록 규정하고 있다. PAT를 통해서 PMT가 어떤 패킷을 통해서 전달되는지를 알 수 있다. 그리고 PMT는 비디오, 오디오, 데이터가 어떤 패킷인지를 구분할 수 있는 정보를 가지고 있다. 따라서 단말에서 저장된 MPEG-2 전송스트림을 재생하기 위해서는 PMT 정보를 반드시 알고 있어야 한다. 본 발명에서는 사용자가 저장되어 있는 MPEG-2 전송스트림을 임의 접근하여 재생할 수 있도록 PMT을 ISO 미디어 파일 포맷의 moov(211) 위치에 직접 담거나 단말이 mdat(208) 위치에 저장된 MPEG-2 전송스트림에서 PMT 패킷를 직접 찾아 사용한다.
표 2 및 표 3 는 본 발명에 의한 PMT 정보 구성 방법을 나타낸다.
Figure 112008024743642-pat00002
Figure 112008024743642-pat00003
Figure 112008024743642-pat00004
Figure 112008024743642-pat00005
본 발명인 MPEG-2 TS가 저장된 경우, Handler Box(표2-501)의 handler_type은 'hint'를 지정하고 여기에 따라 Hint Media Header Box(표2-502)에서 주요 field는 아래와 같이 처리한다.
maxPDUsize: 188 //MPEG-2 TS 패킷 사이즈로 고정
avgPDUsize: 188 // MPEG-2 TS 패킷 사이즈로 고정
maxbitrate: 전송스트림의 최대 전송 비트율
avgbitrate: 전송스트림의 평균 전송 비트율
이와 더불어, Sample Description Box(표2-503)의 hadler_type에 따라 HintSampleEntry()를 설정해야 한다.
이 경우, HintSampleEntry의 protocol은 'm2ts'로 지정하여 M2TSSampleEntry(표3-504)의 syntax를 따를 수도 있다. 각 필드의 의미를 설명하면 아래와 같다.
transporttime_offset: 전송스트림 최초 전송 시간과 저장된 TS의 재생시작 시간과의 시간 오프셋을 의미하며 '0'일 경우 이를 따르지 않음을 의미
recordtime_offset: 녹화 시간(UTC 기준으로 1904/1/1. 24:00 부터, i.e. 2006/03/10. 10:00 KOR)
sample_type: TS 전체를 한 샘플 단위로 취급할 것인지 복수의 샘플로 나눌것인지에 대한 표시. '0'일 경우 MPEG-2 전송스트림 전체를 하나의 샘플로 지정함. '1'일 경우 여러개의 패킷을 묶어 하나의 샘플로 지정함.
sample_type = '1'에서 보통의 경우 저장된 MPEG-2 전송스트림의 샘플은 GOP(Gourp of Picture)를 포함하고 있는 패킷들이 된다. 단, DMB 방송콘텐츠일 경우에는 OD를 포함하고 있는 패킷들을 샘플로 정의할 수 있다.
pmt_type: PMT를 byte[pmt_size]에 담을지 결정함. '1' 경우 직접 담고 '0'일 경우는 mdat에 저장된 MPEG-2 전송스트림에 있는 PMT를 단말이 이용함.
pmt_size: pmt_type ='1'인 경우 PMT의 크기를 지정함.
od_type: OD를 byte[pmt_size]에 담을지 결정함. '1' 경우 직접 담고 '0'일 경우는 mdat에 저장된 MPEG-2 전송스트림에 있는 OD를 단말이 이용함.
od_size: od_type = '1'인 경우 OD의 크기를 지정함.
도 6은 본 발명의 제1 실시예에 의한 MPEG-2 전송스트림에의 임의 접근(Random Access) 방법을 설명하는 도면이다.
앞에서 설명한 방법에 의해 구성된 파일에 대해 사용자로부터 임의 접근 요구가 있으면, 임의 접근 시간에 해당하는 전송스트림 패킷으로 접근하기 위하여 ISO/IEC 14496-12 표준에서 정의된 것처럼 moov 박스내에 있는 stts 박스를 이용하여 임의 접근 시간에 해당하는 샘플을 먼저 찾는다(601). 다음에는 stsc 박스를 이용하여 상기 샘플에 해당하는 청크(chunk)(602) 및 해당 sample description(표 2-503)을 sample_description_index(603)를 통해 PMT를 찾고 stco 박스(604)를 이용하여 상기 청크의 위치의 오프셋값을 찾는다. 이렇게 하여 청크의 위치와 'stsz' 박스의 샘플 크기를 이용하여 사용자가 지정한 임의 접근하고자 하는 위치로 찾아갈 수 있다.
그러나 상기 임의 접근 위치에서부터 전송스트림을 재생하기 위해서는 PMT 정보가 필수적인데, 상기에서 서술했던 TSSampleEntry(표 2-503)를 ISO/IEC 14496-12에서 정의한 파일 형식을 기반으로 표 2 및 표 3와 같이 박스를 확장 또는 새로이 정의함으로써 PMT 정보를 쉽게 찾을 수 있을 것이다.
한편, DMB 방송콘텐츠는 전술한 바와 같이, 기존의 오디오 및 비디오를 MPEG-2 전송스트림 형태로 먹싱하여 전송하는 방식과는 다르게 MPEG-4 시스템즈 표준을 이용하여 SL 패킷화 하고 이를 MPEG-2 전송스트림 형태로 멀티플렉싱하여 전송하는 방식을 취하고 있다. 지상파 DMB 에서는 A/V 및 이미지 객체 모두를 SL 패킷화 하고 있으며, 위성 DMB 에서는 A/V를 제외한 데이터 객체들을 SL 패킷화 하여 전송하는 방식을 사용하고 있다.
MPEG-4 시스템즈에서는 미디어 객체의 복호화 정보와 타입 정보들이 OD에 포함되어 있기 때문에, DMB 방송콘텐츠는 OD를 해석하지 않으면 현재의 AV 또는 데이터 객체들의 변경 사항을 알 수 없어 전송스트림내의 미디어에 바로 접근할 경우 AV외의 데이터에 대한 임의시간 접근이 어려우며, 특히 지상파 DMB의 경우 전송 도중 AV의 전송율 또는 프레임수 등이 바뀌었을 경우에는 AV에의 접근 또한 어렵게 된다. 따라서 저장된 DMB 방송콘텐츠의 임의시간 접근을 위해서는 AV에 직접 접근이 아닌 OD에 먼저 접근해야만 콘텐츠 전체의 임의시간 접근이 가능하다.
도 7은 본 발명의 제2 실시예에 의한 지상파 DMB 단말 장치의 블록도이다. 도시된 바와 같이, 지상파 DMB 단말 장치(700)는 신호 수신부(702), 신호 처리부(704), AV 복호화부(706), AV 출력부(708), 파일 저장부(710)로 구성된다.
신호 수신부(702)는 DMB 신호를 수신하고 처리하여 DMB MPEG-2 전송스트림을 출력한다. 신호 처리부(704)는 신호 수신부(702)를 통해 출력된 MPEG-2 전송스트림으로부터 샘플 단위로 PMT 관련 정보, OD 정보를 추출한다. 파일 저장부(710)는 신호 수신부(702)에서 출력된 MPEG-2 전송스트림을 임의 접근을 위한 샘플로서 ISO 기반 미디어 파일 포맷의 mdat 박스에 저장하고, 신호 처리부(704)에서 추출된 MPEG-2 전송스트림의 PMT 관련 정보, OD 정보를 샘플 단위로 ISO 기반 미디어 파일 포맷의 moov 박스에 기술한다.
신호 처리부(704)는 MPEG-2 전송스트림 디멀티플랙서(712), OD 해석부(714), MPEG-2 PES 디패킷타이저(716), MPEG-4 SL 디패킷타이저(718)로 구성되며, 파일 저장부(710)는 moov 생성부(도시되지 않음), mdat 생성부(도시되지 않음)로 구성된다. 단말 장치(700)는 도 1에 도시된 단말 장치(100)와 비교할 때, OD 해석부(714)를 더 구비한다는 점에서 차이가 있다.
MPEG-2 전송스트림 디멀티플렉서(712)는 신호 수신부(702)로부터 출력된 MPEG-2 전송스트림을 디멀티플렉싱하고, 디멀티플렉싱된 결과를 이용하여 임의 접근 가능 여부를 파일 저장부(710)에 알려준다. OD 해석부(714)는 PES 패킷 해더 내의 OD 정보를 해석한다. MPEG-2 PES 디패킷타이저(716)는 PES 패킷들을 수신하고 수신된 패킷을 디패킷타이징 하여 SL 패킷들을 추출한다. MPEG-4 SL 디패킷타이저(718)는 MPEG-4 SL 패킷들을 수신하여 디패킷타이징을 수행하고 동기화 정보를 추출한다. AV 복호화부(706)는 AV 스트림 또는 이미지들을 복호화하고, AV 출력부(708)는 복호화된 AV 스트림 또는 이미지를 이용자에게 출력한다.
라이브 수신 도중 사용자가 콘텐츠의 녹화를 실행할 경우 MPEG-2 전송스트림 디멀티플렉서(712)를 통해 분석된 TS 패킷들은 샘플 추출 정보와 함께 파일 저장부(710)로 이동되어 먼저 파일 해석에 필요한 메타데이터인 moov를 생성하는데 이용되고, 실제 TS 패킷들은 mdat에 저장된다.
도 8은 본 발명의 제2 실시예에 의한 MPEG-2 전송스트림의 저장 방법을 설명하는 흐름도이다. 먼저, 파일 저장부(710)는 저장하고자 하는 MPEG-2 전송스트림을 임의 접근을 위한 샘플로서 ISO 기반 미디어 파일 포맷의 mdat 박스에 저장한다(802). 다음에는 저장하고자 하는 MPEG-2 전송스트림의 샘플 단위의 PMT 관련 정보, OD (Object Descriptor) 정보를 ISO 기반 미디어 파일 포맷의 moov 박스에 기술한다(804).
도 9는 본 발명에서 저장하고자 하는 DMB 방송콘텐츠 저장 방식의 MPEG-2 전송스트림의 구조를 설명하는 도면이다.
도 9의 DMB 방송콘텐츠에서는 AV 재생화면 및 데이터을 위해 MPEG-4 시스템즈의 OD와 BIFS를 사용하고 있다. 일반적으로 MPEG-4에서 하나의 장면을 렌더링 하기 위해서는 먼저 PMT에 있는 IOD를 해석하여 장면을 초기화 하고, 해당 OD와 BIFS ES_Descriptor를 해석하고, BIFS를 해석하여 장면(그래픽 객체, 이벤트 입력)을 그린다. 다음에는 OD를 해석하여 비디오, 오디오, 이미지들에 대한 복호화 정보를 획득하여 BIFS 화면상에 해당 객체를 렌더링 한다. 따라서 재생되는 화면의 특정 임의 시간의 데이터들을 온전히 렌더링 하기 위해서는 기존의 MPEG-2 전송스트림의 PMT 뿐만 아니라 OD 정보 또한 알고 있어야 한다.
그리고 앞서 서술된 [표 3]은 제2 실시예에 따른 stbl의 MPEG-2 TS Sample Entry에 기입되어야 할 TS 정보와, PMT 정보 및 OD 정보를 기술하는 샘플 기술자의 일실시예를 보인다. [표 3]에서 보인 od_type = '1'인 경우, od_size와 od_data를 통해 OD 정보를 서술하게 되어 있다.
도 10은 본 발명의 제2 실시예에 의한 샘플 기술자의 PMT 정보 및 OD 정보와 MPEG-2 전송스트림의 관계를 설명하는 흐름도이다.
제안된 방법으로 부호화된 파일에 대한 임의시간 접근 방법은 다음과 같다. 먼저 재생을 위해 DMB 파일 복호화부가 ISO 기반으로 저장된 DMB 콘텐츠 파일을 로딩한다. DMB 파일 복호화부는 파일 해석을 위한 moov 파일을 해석하고 TS 해석을 위한 설정 및 stbl에 정의된 PMT를 해석한 뒤 PID 등을 획득하여 디멀티플렉서를 초기화 한다. 디멀티플렉서를 초기화 한 뒤 DMB 파일 복호화부는 stbl의 OD를 해석하여 최초 OD를 셋팅하여 장면을 그릴 준비를 한다.
사용자가 콘텐츠 재생 중에 콘텐츠의 임의시간 영역으로 이동할 경우를 위한 샘플 구성은 도 10에 도시된 바와 같다. 사용자는 GUI 또는 기타 방법으로 콘텐츠의 임의시간을 선택한다(1001). 이때 DMB 파일 복호화부는 사용자가 접근한 시간값 P(t)를 확인(1002)하고 이를 저장한다(1010). 다음으로는 파일 포맷에 있는 stts 내의 delta값을 알아내서 D(t)(= delta(0)+delta(1)+delta(2)...+delta(t))를 계산한다(1003). D(t)을 통해 사용자가 선택한 임의시간에 가장 근접한 시간을 계산하여 해당 시간값이 사용자가 선택한 P(t)의 사이에 있으면(1004) 해당 시간값 D(t)의 sample count Scnt(D(t))를 확인한다(1005). 다음에는 "stsz" sample_count(n)가 Scnt와 동일한지 여부를 판단한다(1006). 판단 결과 동일하지 않으면 Sample_offset(n)를 계산해 가면서 이 조건이 만족될 때까지 반복한다(1011). 이에 대한 자세한 설명은 다음과 같다. 즉, 확인된 샘플을 기반으로 stsz의 내용인 샘플 순서에 따른 크기를 참고하여 전체 저장된 DMB 파일에서의 물리적 위치를 파악할 수 있고 이를 계산해 나아가면 된다(1011). 판단 결과 동일하면 Sample_offset(n)을 획득하여 사용자가 원하는 시간값 P(t)에서의 임의 재생을 위한 파일 위치를 알 수 있다. 이때 단말이 해당 샘플부터 재생하기 위해서는 PMT/OD 정보가 필요하므로 이를 확인한다(1008). PMT/OD 정보가 없을 경우, 이를 알기 위해서는 stsc에 서술된 chunk 정보와 샘플 번호(sample_count)를 통해 sample_description_index를 알 수 있고(1012), Sample Description Box에 표현되어 있는 M2TSSampleEntry의 PMT/OD를 획득(1013)할 수 있게 해준다. 끝으로 이를 DMB 파일 복호화부에 셋팅하고(1014) 이렇게 획득된 임의 재생 접근 위치와 PMT/OD 정보를 디코더를 통해 재생할 수 있게 한다(1009).
상술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 형태로 기록매체(씨디롬, 램, 롬, 플로피 디스크, 하드 디스크, 광자기 디스크 등)에 저장될 수 있다. 이러한 과정은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있으므로 더 이상 상세히 설명하지 않기로 한다.
이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.
도 1은 본 발명의 제1 실시예에 의한 지상파 DMB 단말 장치의 블록도.
도 2는 본 발명의 제1 실시예에 의한 MPEG-2 전송스트림의 저장 방법을 설명하는 흐름도.
도 3은 본 발명에 의한 저장 파일의 구성도.
도 4는 도 3에 도시된 trak 박스의 상세 구성도.
도 5는 본 발명의 제1 실시예에 따라 저장 파일에 임의 접근하기 위해 필요한 시간 정보를 구성하는 방법을 설명하는 도면.
도 6은 본 발명의 제1 실시예에 의한 저장 파일에의 임의 접근(Random Access) 방법을 설명하는 도면.
도 7은 본 발명의 제2 실시예에 의한 지상파 DMB 단말 장치의 블록도.
도 8은 본 발명의 제2 실시예에 의한 MPEG-2 전송스트림의 저장 방법을 설명하는 흐름도.
도 9는 본 발명에서 저장하고자 하는 DMB 방식의 MPEG-2 트랜스포트 스트림의 구조를 설명하는 도면.
도 10은 본 발명의 제2 실시예에 의한 샘플 기술자에 의해 PMT/OD와 MPEG-2 전송스트림의 관계를 설명한 흐름도.

Claims (23)

  1. ISO(International Organization for Standardization) 기반 미디어 파일 포맷으로 MPEG-2 전송스트림(Transport Stream)을 저장하는 방법에 있어서,
    저장하고자 하는 MPEG-2 전송스트림을 상기 ISO 기반 미디어 파일 포맷의 mdat 박스에 저장하는 단계; 및
    상기 MPEG-2 전송스트림에서 임의 접근을 위해서 상기 MPEG-2 전송스트림의 시간 정보, 위치 정보, 크기 정보, PMT(Program Map Table) 관련 정보를 통해 샘플(sample)로 구분하여 상기 ISO 기반 미디어 파일 포맷의 moov 박스에 기술하는 단계;를 포함하며;
    상기 mdat 박스에는, 상기 MPEG-2 전송스트림이 상기 샘플로 기술되고;
    상기 moov 박스에는, 상기 샘플의 시간 정보, 상기 샘플의 위치 정보, 상기 샘플의 크기 정보, 및 상기 샘플의 PMT 관련 정보가 기술되며;
    상기 moov 박스에는, 상기 MPEG-2 전송스트림의 재생을 위한 시간 정보가 서술되고;
    상기 MPEG-2 전송스트림은, 샘플 단위로 구성되며;
    상기 MPEG-2 전송스트림의 재생을 위해, 상기 MPEG-2 전송스트림이 재생되는 시간값과 단말의 STC(System Time Clock)이 일치하도록, 상기 샘플 단위로 구성된 상기 MPEG-2 전송스트림의 패킷들에는 상기 샘플의 PCR(Program Clock Reference)값이 포함되며;
    상기 샘플 단위로 구성된 상기 MPEG-2 전송스트림의 패킷들은, RAI(Random Access Indicator) 필드의 값을 통해 하나의 샘플 단위로 시작 위치가 확인되고;
    상기 샘플 단위로 구성된 상기 MPEG-2 전송스트림의 패킷들은, 상기 mdat 박스 및 상기 moov 박스를 포함하는 파일로 저장되며;
    상기 파일은, 상기 MPEG-2 전송스트림에서 임의 접근 재생을 위해, 재생 시점 단위로 상기 샘플을 구성하고;
    상기 moov 박스에는,
    단위 시간 측정을 위한 타임 스케일(time scale)을 포함하는 mvhd 박스;
    상기 MPEG-2 전송스트림의 비디오에 대한 기본 시각적 표현을 width 및 height로 서술하는 tkhd 박스; 및
    상기 MPEG-2 전송스트림의 특정 위치상에서의 재생을 위해 필요한 샘플 시간 정보 및 상기 MPEG-2 전송스트림의 위치를 서술하는 mdia 박스;가 포함되는 것을 특징으로 하는 MPEG-2 전송스트림의 저장 방법.
  2. 제1항에 있어서,
    상기 샘플 단위로 구성된 상기 MPEG-2 전송스트림의 패킷들에서 상기 PCR값이 포함되지 않은 제1패킷이 존재할 경우, 상기 제1패킷의 PCR값은, 상기 제1패킷의 이전 패킷에 포함된 PCR값 또는 상기 제1패킷의 이후 패킷에 포함된 PCR값으로부터 획득되는 것을 특징으로 하는 MPEG-2 전송스트림의 저장 방법.
  3. 삭제
  4. 삭제
  5. 삭제
  6. 제1항에 있어서, 상기 mdia 박스에는,
    상기 MPEG-2 전송스트림의 임의 접근 재생을 위한 사전 정보를 포함하는 hdlr 박스; 및
    상기 단말에서의 사용자가 상기 MPEG-2 전송스트림을 임의 접근 재생을 하기 위한 시간 정보 및 위치 정보를 포함하는 stbl(sample table box);가 포함되는 것을 특징으로 하는 MPEG-2 전송스트림의 저장 방법.
  7. 제6항에 있어서, 상기 stbl에는,
    상기 MPEG-2 전송스트림에 포함된 각 샘플들의 재생 시간과 샘플 번호가 기술된 stts(Decoding Time to Sample Box);
    상기 샘플 번호를 통한 상기 각 샘플들의 위치가 기술된 stsz(Sample Size Box);
    상기 MPEG-2 전송스트림의 각 청크(chunk)들에 포함된 샘플들의 개수가 기술된 stsc(Sample To Chunk Box); 및
    상기 각 샘플들의 sample description이 기술된 stsd(Sample Description Box);가 포함되는 것을 특징으로 하는 MPEG-2 전송스트림의 저장 방법.
  8. 제7항에 있어서,
    상기 MPEG-2 전송스트림의 임의 접근 재생을 위해, 임의 접근이 가능한 상기 MPEG-2 전송스트림의 PES(Packetized Elementary Stream) 패킷들이, 상기 샘플 단위 및 청크 단위로 구성되는 것을 특징으로 하는 MPEG-2 전송스트림의 저장 방법.
  9. 제7항에 있어서,
    상기 MPEG-2 전송스트림의 패킷들에 포함된 상기 PCR값과 상기 MPEG-2 전송스트림의 PES(Packetized Elementary Stream) 패킷 헤더의 DTS(Decoding Time Stamp) 및 PTS(Presentation Time Stamp)를 사용하여 결정된 복호화 및 시간이, 상기 stts에 기술되는 것을 특징으로 하는 MPEG-2 전송스트림의 저장 방법.
  10. 제7항에 있어서,
    상기 MPEG-2 전송스트림의 각 패킷들에서 상기 PCR값이 추출된 후 상기 stts에 기술되는 것을 특징으로 하는 MPEG-2 전송스트림의 저장 방법.
  11. 제7항에 있어서,
    상기 MPEG-2 전송스트림의 PES(Packetized Elementary Stream) 패킷 헤더의 PTS(Presentation Time Stamp)값을 이용하여 상기 MPEG-2 전송스트림의 임의 접근할 경우, 상기 MPEG-2 전송스트림에 포함된 각 샘플의 PTS값은, 상기 stts에 기술되는 것을 특징으로 하는 MPEG-2 전송스트림의 저장 방법.
  12. 제7항에 있어서,
    상기 MPEG-2 전송스트림의 페이로드에 MPEG-4 SL(Sync-Layer) 패킷이 포함될 경우, 상기 MPEG-4 SL 패킷의 DTS(Decoding Time Stamp) 및 CTS(Composition Time Stamp)는, 상기 stts에 기술되는 것을 특징으로 하는 MPEG-2 전송스트림의 저장 방법.
  13. 제1항에 있어서,
    상기 MPEG-2 전송스트림의 페이로드에 MPEG-4 SL(Sync-Layer) 패킷이 포함될 경우, 상기 MPEG-4 SL 패킷의 복호화 시간 정보는, 상기 MPEG-4 SL (Sync-Layer) 패킷 내의 OCR(Object Clock Reference), DTS(Decoding Time Stamp), 및 CTS(Composition Time Stamp)에 기술되는 것을 특징으로 하는 MPEG-2 전송스트림의 저장 방법.
  14. ISO(International Organization for Standardization) 기반 미디어 파일 포맷으로 MPEG-2 전송스트림(Transport Stream)을 저장하는 장치에 있어서,
    외부 신호를 수신하여 MPEG-2 전송스트림을 출력하는 신호 수신부;
    상기 신호 수신부를 통해 출력된 MPEG-2 전송스트림으로부터 샘플 단위로 시간 정보, 위치 정보, 크기 정보, PMT(Program Map Table) 관련 정보를 추출하는 신호 처리부;
    상기 신호 수신부에서 출력된 MPEG-2 전송스트림을 임의 접근을 위한 샘플로 상기 ISO 기반 미디어 파일 포맷의 mdat 박스에 저장하고, 상기 신호 처리부에서 추출된 MPEG-2 전송스트림의 시간 정보, 위치 정보, 크기 정보, PMT 관련 정보를 상기 ISO 기반 미디어 파일 포맷의 moov 박스에 기술하는 파일 저장부;를 포함하며;
    상기 mdat 박스에는, 상기 MPEG-2 전송스트림이 상기 샘플로 기술되고;
    상기 moov 박스에는, 상기 샘플의 시간 정보, 상기 샘플의 위치 정보, 상기 샘플의 크기 정보, 및 상기 샘플의 PMT 관련 정보가 기술되며;
    상기 moov 박스에는, 상기 MPEG-2 전송스트림의 재생을 위한 시간 정보가 서술되고;
    상기 MPEG-2 전송스트림은, 샘플 단위로 구성되며;
    상기 MPEG-2 전송스트림의 재생을 위해, 상기 MPEG-2 전송스트림이 재생되는 시간값과 단말의 STC(System Time Clock)이 일치하도록, 상기 샘플 단위로 구성된 상기 MPEG-2 전송스트림의 패킷들에는 상기 샘플의 PCR(Program Clock Reference)값이 포함되며;
    상기 샘플 단위로 구성된 상기 MPEG-2 전송스트림의 패킷들은, RAI(Random Access Indicator) 필드의 값을 통해 하나의 샘플 단위로 시작 위치가 확인되고;
    상기 샘플 단위로 구성된 상기 MPEG-2 전송스트림의 패킷들은, 상기 mdat 박스 및 상기 moov 박스를 포함하는 파일로 저장되며;
    상기 파일은, 상기 MPEG-2 전송스트림에서 임의 접근 재생을 위해, 재생 시점 단위로 상기 샘플을 구성하고;
    상기 moov 박스에는,
    단위 시간 측정을 위한 타임 스케일(time scale)을 포함하는 mvhd 박스;
    상기 MPEG-2 전송스트림의 비디오에 대한 기본 시각적 표현을 width 및 height로 서술하는 tkhd 박스; 및
    상기 MPEG-2 전송스트림의 특정 위치상에서의 재생을 위해 필요한 샘플 시간 정보 및 상기 MPEG-2 전송스트림의 위치를 서술하는 mdia 박스;가 포함되는 것을 특징으로 하는 MPEG-2 전송스트림의 저장 장치.
  15. 제14항에 있어서,
    상기 샘플 단위로 구성된 상기 MPEG-2 전송스트림의 패킷들에서 상기 PCR값이 포함되지 않은 제1패킷이 존재할 경우, 상기 제1패킷의 PCR값은, 상기 제1패킷의 이전 패킷에 포함된 PCR값 또는 상기 제1패킷의 이후 패킷에 포함된 PCR값으로부터 획득되는 것을 특징으로 하는 MPEG-2 전송스트림의 저장 장치.
  16. 삭제
  17. 삭제
  18. 삭제
  19. 제14항에 있어서, 상기 mdia 박스에는,
    상기 MPEG-2 전송스트림의 임의 접근 재생을 위한 사전 정보를 포함하는 hdlr 박스; 및
    상기 단말에서의 사용자가 상기 MPEG-2 전송스트림을 임의 접근 재생을 하기 위한 시간 정보 및 위치 정보를 포함하는 stbl(sample table box);가 포함되는 것을 특징으로 하는 MPEG-2 전송스트림의 저장 장치.
  20. 제19항에 있어서, 상기 stbl에는,
    상기 MPEG-2 전송스트림에 포함된 각 샘플들의 재생 시간과 샘플 번호가 기술된 stts(Decoding Time to Sample Box);
    상기 샘플 번호를 통한 상기 각 샘플들의 위치가 기술된 stsz(Sample Size Box);
    상기 MPEG-2 전송스트림의 각 청크(chunk)들에 포함된 샘플들의 개수가 기술된 stsc(Sample To Chunk Box); 및
    상기 각 샘플들의 sample description이 기술된 stsd(Sample Description Box);가 포함되는 것을 특징으로 하는 MPEG-2 전송스트림의 저장 장치.
  21. 제20항에 있어서,
    상기 MPEG-2 전송스트림의 패킷들에 포함된 상기 PCR값과 상기 MPEG-2 전송스트림의 PES(Packetized Elementary Stream) 패킷 헤더의 DTS(Decoding Time Stamp) 및 PTS(Presentation Time Stamp)를 사용하여 결정된 복호화 및 시간이, 상기 stts에 기술되는 것을 특징으로 하는 MPEG-2 전송스트림의 저장 장치.
  22. 제20항에 있어서,
    상기 MPEG-2 전송스트림의 PES(Packetized Elementary Stream) 패킷 헤더의 PTS(Presentation Time Stamp)값을 이용하여 상기 MPEG-2 전송스트림의 임의 접근할 경우, 상기 MPEG-2 전송스트림에 포함된 각 샘플의 PTS값은, 상기 stts에 기술되는 것을 특징으로 하는 MPEG-2 전송스트림의 저장 장치.
  23. 제20항에 있어서,
    상기 MPEG-2 전송스트림의 페이로드에 MPEG-4 SL(Sync-Layer) 패킷이 포함될 경우, 상기 MPEG-4 SL 패킷의 DTS(Decoding Time Stamp) 및 CTS(Composition Time Stamp)는, 상기 stts에 기술되는 것을 특징으로 하는 MPEG-2 전송스트림의 저장 장치.
KR1020080031854A 2007-04-04 2008-04-04 Ｉｓｏ 기반 미디어 파일 포맷으로 ｍｐｅｇ－２전송스트림을 저장 및 재생하는 방법 및 장치 KR101516325B1 (ko)

Applications Claiming Priority (10)

Application Number Priority Date Filing Date Title
KR1020070033478 2007-04-04
KR20070033478 2007-04-04
US91255407P 2007-04-18 2007-04-18
US60/912,554 2007-04-18
KR1020070038482 2007-04-19
KR20070038482 2007-04-19
US91434707P 2007-04-27 2007-04-27
US60/914,347 2007-04-27
KR1020070103592 2007-10-15
KR20070103592 2007-10-15

Publications (2)

Publication Number Publication Date
KR20080090356A KR20080090356A (ko) 2008-10-08
KR101516325B1 true KR101516325B1 (ko) 2015-05-04

Family

ID=39831131

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080031854A KR101516325B1 (ko) 2007-04-04 2008-04-04 Ｉｓｏ 기반 미디어 파일 포맷으로 ｍｐｅｇ－２전송스트림을 저장 및 재생하는 방법 및 장치

Country Status (5)

Country Link
US (1) US20100135646A1 (ko)
EP (1) EP2145471A4 (ko)
KR (1) KR101516325B1 (ko)
CN (1) CN101682718B (ko)
WO (1) WO2008123712A1 (ko)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9398346B2 (en) 2007-05-04 2016-07-19 Time Warner Cable Enterprises Llc Methods and apparatus for predictive capacity allocation
US9060208B2 (en) 2008-01-30 2015-06-16 Time Warner Cable Enterprises Llc Methods and apparatus for predictive delivery of content over a network
US8261312B2 (en) * 2008-06-27 2012-09-04 Cisco Technology, Inc. Linear hint video streaming
AU2008264229B2 (en) * 2008-11-24 2010-11-25 Canon Kabushiki Kaisha Partial edge block transmission to external processing module
AU2008264228B2 (en) * 2008-11-24 2010-11-25 Canon Kabushiki Kaisha Detection of abandoned and vanished objects
US11076189B2 (en) 2009-03-30 2021-07-27 Time Warner Cable Enterprises Llc Personal media channel apparatus and methods
US9215423B2 (en) 2009-03-30 2015-12-15 Time Warner Cable Enterprises Llc Recommendation engine apparatus and methods
US8396055B2 (en) 2009-10-20 2013-03-12 Time Warner Cable Inc. Methods and apparatus for enabling media functionality in a content-based network
US9027062B2 (en) * 2009-10-20 2015-05-05 Time Warner Cable Enterprises Llc Gateway apparatus and methods for digital content delivery in a network
US8521744B2 (en) * 2009-11-13 2013-08-27 Electronics And Telecommunications Research Institute Apparatus and method for authoring data in communication system
KR101324427B1 (ko) * 2009-12-22 2013-10-31 한국전자통신연구원 장면 기술자를 이용하여 ｍｐｅｇ-2 전송스트림을 포함하는 콘텐츠 저작/재생 장치 및 방법
KR101651137B1 (ko) * 2010-07-19 2016-08-25 엘지전자 주식회사 미디어 세그먼트 송수신 방법 및 그를 이용한 송수신 장치
US8997136B2 (en) 2010-07-22 2015-03-31 Time Warner Cable Enterprises Llc Apparatus and methods for packetized content delivery over a bandwidth-efficient network
WO2012089491A1 (en) * 2010-12-31 2012-07-05 Arcelik Anonim Sirketi A personal video recorder
US9602414B2 (en) 2011-02-09 2017-03-21 Time Warner Cable Enterprises Llc Apparatus and methods for controlled bandwidth reclamation
JP5143295B1 (ja) * 2012-01-27 2013-02-13 株式会社東芝 電子機器及びインデックス生成方法
US8978079B2 (en) 2012-03-23 2015-03-10 Time Warner Cable Enterprises Llc Apparatus and methods for managing delivery of content in a network with limited bandwidth using pre-caching
US9467723B2 (en) 2012-04-04 2016-10-11 Time Warner Cable Enterprises Llc Apparatus and methods for automated highlight reel creation in a content delivery network
US20140082645A1 (en) 2012-09-14 2014-03-20 Peter Stern Apparatus and methods for providing enhanced or interactive features
US11290510B2 (en) 2012-11-29 2022-03-29 Samsung Electronics Co., Ltd. Method and apparatus for encapsulation of motion picture experts group media transport assets in international organization for standardization base media files
US10104406B2 (en) * 2013-06-21 2018-10-16 Saturn Licensing Llc Transmission apparatus, transmission method, reproduction apparatus, reproduction method and reception apparatus
EP3014896B1 (en) * 2013-06-24 2020-06-03 Samsung Electronics Co., Ltd. Method and apparatus for converting content in multimedia system
US10110652B2 (en) * 2014-10-14 2018-10-23 Intel IP Corporation Carriage of media content quality information
US10085051B2 (en) 2015-02-13 2018-09-25 Samsung Electronics Co., Ltd. Method and apparatus for converting MMTP stream to MPEG-2TS
US10116676B2 (en) 2015-02-13 2018-10-30 Time Warner Cable Enterprises Llc Apparatus and methods for data collection, analysis and service modification based on online activity
CN108141640B (zh) * 2015-10-09 2020-11-03 索尼公司 信息处理设备和信息处理方法
CN112369041B (zh) 2018-07-05 2022-10-28 杜比国际公司 播放媒体的方法和计算机可读存储装置
CN110858916B (zh) * 2018-08-24 2020-11-24 上海交通大学 支持大跨度相关性信息编码的标识方法及系统
US11153626B1 (en) * 2019-05-20 2021-10-19 Amazon Technologies, Inc. Systems and methods for transforming a fragment media player into an access unit media player

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2784845B1 (fr) * 1998-10-14 2001-02-23 France Telecom Procede de basculement de la ou des composantes video d'un premier programme audiovisuel sur la ou les composantes video d'un second programme audiovisuel numerique
JP4292654B2 (ja) * 1999-03-19 2009-07-08 ソニー株式会社 記録装置および方法、再生装置および方法、並びに記録媒体
WO2000064092A1 (fr) * 1999-04-16 2000-10-26 Sony Corporation Dispositif de communication, procede de communication, et support d'enregistrement
JP4773664B2 (ja) * 2000-01-10 2011-09-14 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Ｍｐｅｇシーケンスのスタート時におけるシステムタイムクロックの設定方法
US6988238B1 (en) * 2000-01-24 2006-01-17 Ati Technologies, Inc. Method and system for handling errors and a system for receiving packet stream data
KR100918537B1 (ko) * 2002-04-26 2009-09-21 파나소닉 주식회사 역다중화 장치
JP3889338B2 (ja) * 2002-08-23 2007-03-07 シャープ株式会社 データ記録方法、データ記録装置、データ変換方法、データ変換装置、データ記録媒体、データ記録のためのプログラムおよびそのプログラムを記録した記録媒体
EP1613078A1 (en) * 2003-03-07 2006-01-04 Matsushita Electric Industrial Co., Ltd. Encryption device, decryption device, and data reproduction device
US7555009B2 (en) * 2003-11-14 2009-06-30 Canon Kabushiki Kaisha Data processing method and apparatus, and data distribution method and information processing apparatus
US7567584B2 (en) * 2004-01-15 2009-07-28 Panasonic Corporation Multiplex scheme conversion apparatus
KR101029808B1 (ko) * 2004-01-27 2011-04-20 엘지전자 주식회사 싱크 레이어 패킷의 패킷화 방법
CN1961522B (zh) * 2004-05-28 2011-07-20 松下电器产业株式会社 传输流处理装置和传输流处理方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
기명석 외 2인. 지상파 이동 멀티미디어방송용 멀티미디어 재생기 개발. 한국방송공학회논문지. 2003년 12월. 제8권, 제4호, pp.465-472*

Also Published As

Publication number Publication date
EP2145471A4 (en) 2011-03-30
WO2008123712A1 (en) 2008-10-16
CN101682718B (zh) 2015-09-09
KR20080090356A (ko) 2008-10-08
CN101682718A (zh) 2010-03-24
EP2145471A1 (en) 2010-01-20
US20100135646A1 (en) 2010-06-03

Similar Documents

Publication Publication Date Title
KR101516325B1 (ko) Ｉｓｏ 기반 미디어 파일 포맷으로 ｍｐｅｇ－２전송스트림을 저장 및 재생하는 방법 및 장치
CN105103540B (zh) 文件生成方法、文件生成装置及记录介质
KR101777348B1 (ko) 데이터 전송 방법 및 장치와 데이터 수신 방법 및 장치
US9313442B2 (en) Method and apparatus for generating a broadcast bit stream for digital broadcasting with captions, and method and apparatus for receiving a broadcast bit stream for digital broadcasting with captions
JP5595946B2 (ja) デジタルコンテンツ受信装置、デジタルコンテンツ受信方法、およびデジタルコンテンツ送受信方法
CN103168473B (zh) 数字接收机以及用于处理数字接收机中的3d 内容的方法
KR20090037283A (ko) 스테레오스코픽 데이터의 저장 및 재생을 위한 메타데이터구조 및 이를 이용하는 스테레오스코픽 콘텐츠 파일의 저장방법
KR20080112149A (ko) 스테레오스코픽 데이터의 저장 및 재생을 위한 메타데이터구조 및 이를 이용하는 스테레오스코픽 콘텐츠 파일의 저장방법
US20130276046A1 (en) Receiving apparatus for receiving a plurality of signals through different paths and method for processing signals thereof
US20130209063A1 (en) Digital receiver and content processing method in digital receiver
WO2013011696A1 (ja) 送信装置、受信再生装置、送信方法及び受信再生方法
JP2005123907A (ja) データ再構成装置
US11006173B2 (en) Information processing device, information recording medium, and information processing method, and program
JP7070432B2 (ja) 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
JP2017183762A (ja) 映像ストリーム生成方法、再生装置及び記録媒体
JP2015109131A (ja) ファイル生成方法、再生方法、ファイル生成装置、再生装置および記録媒体
KR102016674B1 (ko) 하이브리드 서비스를 제공하는 수신 장치 및 하이브리드 서비스 제공 방법
WO2015083354A1 (ja) ファイル生成方法、再生方法、ファイル生成装置、再生装置および記録媒体
KR101710452B1 (ko) 멀티미디어 전송 시스템에서 서비스 발견 정보를 송수신하는 방법 및 장치와 이를 위한 파일 구조
JPWO2005060259A1 (ja) Ａｖコンテンツをダウンロード型のファイル形式で配信する方法および装置
EP3429217B1 (en) Information processing device, information processing method, and program
JP5933063B2 (ja) 受信装置および受信方法
JP5933062B2 (ja) 送受信システムおよび送受信方法
JP5980858B2 (ja) 受信装置および受信方法
KR101878218B1 (ko) Ｍｐｅｇ-2 ｔｓ 기반 방송 서비스 환경에서 전달 시간이 다른 콘텐츠를 연동하여 3ｄ 서비스를 제공하는 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
J201 Request for trial against refusal decision
AMND Amendment
B701 Decision to grant
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180406

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190325

Year of fee payment: 5