KR20050087654A - 멀티미디어 데이터를 기록한 정보저장매체, 그 재생방법및 재생장치 - Google Patents

멀티미디어 데이터를 기록한 정보저장매체, 그 재생방법및 재생장치 Download PDF

Info

Publication number
KR20050087654A
KR20050087654A KR1020040013580A KR20040013580A KR20050087654A KR 20050087654 A KR20050087654 A KR 20050087654A KR 1020040013580 A KR1020040013580 A KR 1020040013580A KR 20040013580 A KR20040013580 A KR 20040013580A KR 20050087654 A KR20050087654 A KR 20050087654A
Authority
KR
South Korea
Prior art keywords
data
information
stream
streaming
stored
Prior art date
Application number
KR1020040013580A
Other languages
English (en)
Other versions
KR101145261B1 (ko
Inventor
김해광
Original Assignee
학교법인 대양학원
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 학교법인 대양학원, 삼성전자주식회사 filed Critical 학교법인 대양학원
Priority to KR1020040013580A priority Critical patent/KR101145261B1/ko
Priority to US11/064,859 priority patent/US20050193138A1/en
Priority to PCT/KR2005/000537 priority patent/WO2005083707A1/en
Priority to EP05726930A priority patent/EP1719130A4/en
Priority to CN2005800002877A priority patent/CN1985321B/zh
Publication of KR20050087654A publication Critical patent/KR20050087654A/ko
Application granted granted Critical
Publication of KR101145261B1 publication Critical patent/KR101145261B1/ko

Links

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/613—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1101—Session protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/70—Media network packetisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

멀티미디어 데이터를 저장용 데이터와 스트리밍 데이터로 분리하여 스트리밍 서비스하기 위한 멀티미디어 데이터의 구성과, 그 데이터의 재생방법 및 장치가 개시된다. 본 발명에 따른 정보저장매체는, 멀티미디어 데이터를 기록한 정보저장매체에 있어서, 상기 멀티미디어 데이터는, 네트워크를 통해 스트리밍되는 스트리밍 데이터와 네트워크를 통해 전송받지 않고 단말에 구비된 정보저장매체로부터 읽혀져 저장되는 저장 데이터를 나누어 기록하고 있는 적어도 하나의 미디어 스트림; 및 상기 스트리밍 데이터와 저장 데이터의 결합방법을 표현하는 정보인 부가정보를 포함하는 것을 특징으로 한다. 이에 의해, 단말의 정보저장매체에서 읽혀진 저장 데이터와 서버로부터 스트리밍된 스트리밍 데이터를 결합한 멀티미디어 데이터를 효율적으로 제공할 수 있다.

Description

멀티미디어 데이터를 기록한 정보저장매체, 그 재생방법 및 재생장치 {Information storage medium containing multimedia data, reproducing method and apparatus thereof}
본 발명은 멀티미디어 컨텐츠의 부호화에 관한 것으로, 보다 상세하게는 멀티미디어 데이터를 저장용 데이터와 스트리밍 데이터로 분리하여 스트리밍 서비스하기 위한 멀티미디어 데이터의 구성과, 그 데이터의 재생방법 및 장치에 관한 것이다.
비디오 데이터, 오디오 데이터, 컴퓨터 애니메이션 데이터 또는 이들을 모두 포함하는 멀티미디어 데이터들은 각각의 데이터 자체 내에서 또는 각각의 데이터들 사이에서 재생시간이 서로 동기되어 있다. 즉, 오디오 데이터와 비디오 데이터가 서로 동기되어 재생될 수 있도록 하는 시간 정보가 각 데이터에 기록되어 있고, 데이터 자체내에서도 그 데이터가 언제 출력되는지에 대한 정보가 기록되어 있다. 이러한 멀티미디어 데이터를 인터넷을 포함한 유무선 네트워크를 통해 스트리밍함으로써 교육, 오락, 영화 등의 서비스를 제공할 수 있다.
스트리밍 서비스는 네트워크의 지터(jitter), 대역폭 (bandwidth), 지연 (delay), 패킷 손실율 (packet loss ratio), 비트에러율 (bit error ratio) 등의 제한조건과 단말기의 데이터 처리 성능, 메모리 용량 등의 특성에 의해 제한된다. 따라서, 이러한 제한 조건을 극복하기 위하여 다운로드 방법과 스트리밍 방법을 결합하여 스트리밍 서비스를 제공할 수 있다. 그러나, 이 경우에도 다운로드 데이터 및 스트리밍 데이터를 포함한 스트리밍 콘텐츠 모두를 스트리밍 서버의 제어하게 단말의 요구에 따라 전송하므로, 다운로드 데이터를 수신하여 콘텐츠를 재생할 때에도 재생지연이 발생하고, 다운로드 데이터와 스트리밍 데이터를 모두 스트리밍 서버로부터 네트워크를 통해 수신함으로써 네트워크의 부하가 가중된다는 문제가 있다.
따라서, 본 발명이 이루고자 하는 기술적 과제는 단말의 정보저장매체에 미리 저장된 데이터와 스트리밍 서버로부터 수신한 스트리밍 데이터를 컨텐츠 부가정보를 참조하여 결합하여 멀티미디어 스트리밍 서브스를 제공할 수 있는 멀티미디어 데이터를 기록한 정보저장매체, 그 재생방법 및 장치를 제공하는 것이다.
상기 기술적 과제는 본 발명에 따라, 멀티미디어 데이터를 기록한 정보저장매체에 있어서, 상기 멀티미디어 데이터는, 네트워크를 통해 스트리밍되는 스트리밍 데이터와 네트워크를 통해 전송받지 않고 단말에 구비된 정보저장매체로부터 읽혀져 저장되는 저장 데이터를 나누어 기록하고 있는 적어도 하나의 미디어 스트림; 및 상기 스트리밍 데이터와 저장 데이터의 결합방법을 표현하는 정보인 부가정보를 포함하는 것을 특징으로 하는 정보저장매체에 의해 달성된다.
상기 스트리밍 데이터는 네트워크를 통해 연결된 서버 정보저장매체에 저장되어 있고, 상기 저장 데이터는 단말에 구비된 단말 정보저장매체에 저장되어 있는 것이 바람직하다.
상기 미디어 스트림은, 상기 스트리밍 데이터들을 모아서 만들어진 제1서브 스트림과 상기 저장 데이터들을 모아서 만들어진 제2서브 스트림을 조합하여, 상기 미디어 스트림을 만드는데 사용되는 정보인 컨텐츠 부가정보를 더 포함하는 것이 바람직하다.
또한, 상기 기술적 과제는 (a) 멀티미디어 데이터를 구성하는 적어도 하나의 미디어 스트림에 관한 구성정보인 컨텐츠 부가정보를 수신하는 단계; (b) 상기 컨텐츠 부가정보에 따라 저장 데이터 전송요구명령을 전송하고, 저장 데이터를 수신하여 저장하는 단계; (c) 상기 컨텐츠 부가정보에 따라 스트리밍 데이터 전송요구명령을 전송하고, 스트리밍 데이터를 수신하는 단계; 및 (d) 상기 저장 데이터와 스트리밍 데이터를 상기 컨텐츠 부가정보에 따라 원래 미디어 스트림으로 만들어 재생하는 단계를 포함하는 것을 특징으로 하는 멀티미디어 데이터 재생방법에 의해서도 달성된다.
상기 컨텐츠 부가정보는, 상기 멀티미디어 데이터를 구성하는 미디어 스트림의 개수 정보; 및 상기 미디어 스트림의 속성에 관한 정보인 스트림 부가정보를 포함하는 것이 바람직하다.
한편, 본 발명의 다른 분야에 따르면, 상기 기술적 과제는 저장 서브 스트림을 수신하는 저장 서브 스트림 버퍼; 스트리밍 서브 스트림을 수신하는 스트리밍 서브 스트림 버퍼; 상기 저장 서브 스트림 및 스트리밍 서브 스트림을 조합하여 미디어 스트림을 만들어 복호화하는 미디어 복호기; 및 상기 복호화한 데이터가 복수개인 경우에 그 각각의 시간동기를 맞추어 재생하는 렌더러를 포함하는 것을 특징으로 하는 멀티미디어 데이터 재생장치에 의해서도 달성된다.
이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예에 대해 상세히 설명한다.
도 1은 본 발명의 멀티미디어 데이터의 구성을 도시한 도면이다.
멀티미디어 컨텐츠는 비디오, 오디오 및 텍스트 등 여러 가지 데이터로 구성될 수 있다. 이들 각각의 데이터를 미디어 스트림이라고 한다. 도 1을 참조하면, 3개의 미디어 스트림으로 구성된 멀티미디어 컨텐츠의 일예를 들고 있다. 즉, 미디어 스트림 A(110), 미디어 스트림 B(120), 미디어 스트림 C(130)는 하나의 멀티미디어 콘텐츠를 구성하는 미디어 스트림들로서, 각각의 미디어 스트림은 미디어 스트림 자체의 내부 시간 동기 정보와 미디어 스트림들간의 시간동기를 맞추기 위한 미디어간 시간 동기 정보가 삽입되어 있다. 이들 정보는 미디어 스트림을 만들 때 사용되는 참조 시스템 클럭을 이용하여 만들어진다.
시간 동기에 관한 정보를 보다 상세히 설명하면 MPEG-4 시스템의 경우, 각각의 미디어 스트림의 재생시작시간은 BIFS(Binary Format or Scene Description)의 노드 정보의 startTime에 기록된다. 이외에도 BIFS에는 미디어 스트림의 위치정보 등이 기록된다. 그리고, 하나의 스트림을 복호의 기본단위인 액세스 유닛(Access Unit)으로 나누고, SL Packet(Synchronization Layer Packet)에 담아 전송하는데, 이때 SL Packet의 헤더에 기록된 CTS(Composition Time Stamp)와 DTS (Decoder Time Stamp) 정보와 OCR (Object Clock Reference) 정보를 사용하여 스트림 내 시간동기와 스트림과 스트림간의 시간 동기를 달성한다.
도 2는 저장 세그먼트와 스트리밍 세그먼트로 구성된 미디어 스트림을 도시한 도면이다.
도 2를 참조하면, 각각의 미디어 스트림은 음영으로 표시된 저장 세그먼트들과 하얀색으로 표시된 스트리밍 세그먼트로 구성됨을 알 수 있다. 저장 세그먼트들은 스트리밍 서버의 관여없이 스트리밍 개시 이전에 미리 단말에 구비된 저장장치에 저장되고, 스트리밍 세그먼트들은 스트리밍 서버로부터 단말로 실시간으로 전송된다. 스트리밍 서버의 관여없이 단말에 구비된 저장장치에 저장 세그먼트를 저장하는 방법의 일예를 들면, 콘텐츠 서비스 제공자는 저장 스트림과 부가정보를 DVD로 제작하여 배포하고 사용자는 이 DVD를 단말의 DVD 드라이브에 삽입하는 것에 의해 달성될 수 있다.
즉, DVD 에는 DVD 자체내에 저장된 저장 데이터와 스트리밍 서버로부터 수신할 스트리밍 데이터를 분리하여 기록하고 이들의 결합관계를 부가정보로서 기록하고 있다. 스트리밍 세그먼트 및 저장 세그먼트를 어떻게 분할할 것인가는 네트워크의 상태와 단말기의 입력 버퍼의 크기를 고려하여 정해질 수 있는데, 일예로 단말기 입력 버퍼의 오버플로우와 언더플로우가 발생하지 않도록 일부를 먼저 스트리밍 세그먼트들로 할당하고, 나머지는 저장 세그먼트로 할당할 수 있다. MPEG-4 시스템에서 사용되는 경우에는 이들 저장 세그먼트와 스트리밍 세그먼트들은 액세스 유닛들로 구성된다.
또 다른 예로서는 스케일러블 미디어 스트림의 경우, 기본계층 데이터를 저장 데이터로 향상계층 데이터를 스트리밍 데이터로 분리하여, 기본적으로는 미리 저장된 기본계층 데이터만을 사용자에게 제공하다가 고화질의 콘텐츠 요구가 들어오면 스트리밍 데이터를 함께 제공할 수 있다.
도 3은 도 2에 도시한 미디어 스트림을 저장 서브 스트림과 스트리밍 서브 스트림으로 만드는 것을 도시한 도면이다.
스트림 A는 저장 세그먼트(A2, A4, A6)와 스트리밍 세그먼트(A1, A3, A5, A7)로 구성되어 있다. 따라서 저장 서브 스트림 A-1(310)은 저장 세그먼트인 A2, A4, A6 세그먼트들을 모아서 만들고, 스트리밍 서브 스트림 A-2(320)은 스트리밍 세그먼트인 A1, A3, A4, A7 세그먼트들을 모아서 만든다. 마찬가지로 스트림 B에서도 B2, B4, B6 세그먼트들을 모아서 저장 서브 스트림 B-1(330)을 만들고, B1, B3, B5 세그먼트들을 모아서 스트리밍 서브 스트림 B-2(340)을 만든다. 스트림 C에서도 C2, C4 세그먼트들을 모아서 저장 서브 스트림 C-1(350)을 만들고, C1, C3, C5를 모아서 스트리밍 서브 스트림 C-2(360)을 만든다. 부가정보(370)는 저장 서브 스트림과 스트리밍 서브 스트림을 가지고 원래 스트림을 다시 만들 때 필요한 정보이다.
도 4는 도 3의 부가정보의 내용을 도시한 도면이다.
종래의 콘텐츠 부호화 기술에서 사용되고 있는, 저작권 정보, 메타데이터 정보, 키워드 정보 등을 표현하는데 사용되는 기술은 도 4의 부가정보에 포함될 수 있다. 따라서, 도 4에서는 본 발명의 스트리밍 서비스를 제공하기 위한 부가정보에 대하여 주로 설명한다. 도 4를 참조하면, 스트리밍_콘텐츠_부가정보(440)는 스트리밍 서비스에 제공되는 멀티미디어 컨텐츠에 관한 정보로서, 콘텐츠를 구성하는 스트림의 개수(스트림_수, 442)와 각각의 스트림에 대한 부가정보(스트림_부가정보, 444)로 구성된다.
그리고, 각각의 스트림에 대한 부가정보인 스트림_부가정보(444)는 이 스트림에 대한 식별자(스트림_식별자, 432)와 저장 서브 스트림과 스트리밍 서브 스트림에 관한 정보(434 내지 438)를 포함한다. 하나의 스트림은 전체가 저장 서브 스트림 또는 스트리밍 서브 스트림이 될 수 있으며, Boolean 데이터인 저장 정보(434)와 스트리밍 정보(436)의 값에 따라 저장 서브 스트림에 대한 부가정보 또는 스트리밍 서브 스트림에 대한 부가정보를 포함한다.
저장 서브 스트림 또는 스트리밍 서브 스트림에 대한 부가정보는 서브 스트림_부가정보(420)에 기록되어 있다. 서브 스트림_부가정보(420)는 서브 스트림을 구성하는 세그먼트의 수(세그먼트_수, 422), 서브 스트림의 크기(서브 스트림_크기, 424), 그리고 세그먼트 리스트(426)로 구성되어 있다. 세그먼트 리스트(426)는 서브 스트림을 구성하는 세그먼트들의 바이트 단위의 시작위치(세그먼트_시작, 412)와 세그먼트의 크기(세그먼트_크기, 414)로 구성된다.
도 5는 재생장치가 서버로부터 스트리밍 서비스를 제공받는 것을 설명하기 위한 도면이다.
스트리밍 서비스를 위한 인증, 세션 관리 등에 사용되는 프로토콜은 종래의 방법이 그대로 사용될 수 있으며, 따라서, 본 발명에 의해 추가되는 프로토콜을 위주로 설명한다. 먼저, 상술한 저장 서브 스트림과 부가정보로 구성된 데이터를 재생할 수 있는 장치를 단말에 연결한다. 단말에 연결된 장치는 도 5를 참조하여 설명하는 바와 같이 일례로 DVD 플레이어가 될 수 있으며, 이러한 저장 서브 스트림과 부가정보가 DVD에 저장되어 있는 경우, DVD를 단말에 연결된 DVD 플레이어에 삽입하는 것으로서 달성될 수 있다.
사용자가 컨텐츠의 재생을 원하면, 단말은 컨텐츠의 요구명령을 DVD 플레이어에 전달하고(S510), 단말은 DVD에 저장되어 있는 도 4에 도시한 바와 같은 부가정보를 읽는다(S520). 단말은 이 부가정보를 해석하여 서버에 스트리밍 서비스를 요구하고(S530) 스트리밍 데이터를 수신한다(S540). 아울러, DVD 플레이어에 저장 서브 스트림의 전송을 요구하여(S550) 저장 서브 스트림을 수신한다(S560). 단말은 저장부에 미리 저장된 서브 스트림과 서버에서 전송되는 스트리밍 서브 스트림을 합쳐, 도 4에 도시한 부가정보에 따라서 원래의 스트림을 만들어 재생한다.
미디어 스트림이 신축부호화(scalable coding) 방법에 따라 코딩되어 있는 경우에, 사용자의 요구 또는 네트워크의 상태에 따라 기본계층 스트림(base layer stream)에 해당하는 저장 서브 스트림만을 재생할 수 있고, 고화질의 콘텐츠를 요구하면 향상계층 스트림(enhancement layer stream)에 해당하는 스트리밍 서브 스트림을 함께 재생할 수도 있다.
도 6은 본 발명의 재생장치의 구성도이다.
네트워크(604)를 통해 서버(602)에서 스트리밍되는 스트리밍 서브 스트림들은, 디멀티플렉서(606)를 거쳐 여러개의 스트림으로 나누어지고, 각각 스트림들의 복호시간부호 (MPEG-4의 경우 DTS)와 스트림 식별자 정보를 참조하여 해당하는 스트리밍 서브 스트림 버퍼1 내지 3(630a 내지 630c)에 복호 시간 전에 입력된다.
그리고 DVD 플레이어(690)에서 전송되는 저장 서브 스트림들은, 디멀티플렉서(610)를 거쳐 여러개의 스트림으로 나누어지고, 각각 스트림들의 복호시간부호 (MPEG-4의 경우 DTS)와 스트림 식별자 정보를 참조하여 해당하는 저장 서브 스트림 버퍼1 내지 3(620a 내지 620c)에 복호 시간 전에 입력된다.
복호전 버퍼(640a 내지 640c)는 스트림의 종류에 따라 별개로 마련되어 있다. 하나의 스트림에 대한 복호전 버퍼(640a)에는 저장 서브 스트림 버퍼(620a)와 스트리밍 서브 스트림 버퍼(630a)로부터, 복호시간부호를 읽어 그 값에 따라, 순서대로 액세스 유닛별로 입력된다.
따라서, 미디어 스트림 복호기(650a, 650b)와 렌더러(670)는 종래의 그것을 그대로 이용할 수 있다. 도 6을 참조하면, 하나의 미디어 스트림은 두개의 복호전 버퍼(640a, 640b)를 갖고 있는데, 이것은 신축 부호(Scalable Coding) 방법에 의한 기본계층 스트림(Base layer stream)과 향상계층 스트림(elementary layer stream)을 위한 예를 도시한 것이다.
도 7은 본 발명에서 기술한 부가정보를 MPEG-4 표준에 적용한 실시예를 도시한 도면이다.
MPEG-4는 콘텐츠의 구성정보를 BIFS와 오브젝트 기술자(Object Descriptor)를 사용해서 표현한다. IOD(Initial Object Descriptor)는 BIFS와 OD를 가리키고 있다. 도 7의 실시예는 도 4를 참조하여 설명한 부가정보를 종래의 MPEG-4와 호환하여 적용하기 위해서, MPEG-4의 스트림에 대한 부가정보를 기술하는 기본 스트림 기술자(Elementary Stream Descriptor)가 포함하는 확장 기술자를 사용한 예이다. storedSubstream과 streamingSubstream은 이 스트림이 저장 서브 스트림이나 스트리밍 서브 스트림을 갖고 있는지에 대한 정보이다. 각각은 저장 서브 스트림과 스트리밍 서브 스트림에 대해 분할된 세그먼트의 수(numberOfSegment), 바이트 단위의 서브 스트림의 크기(subStreamSize), 그리고 서브 스트림을 구성하는 세그먼트들의 바이트 단위의 시작위치(SegmentStartPosition)와 세그먼트의 크기 (SegmentSize)로 구성된다. URL_flag와 URLlength, URLstring은 이 서브 스트림의 저장위치를 URL로 표시할 때 사용하며, 단말은 이 위치에서 저장 서브 스트림을 단말에 연결된 정보저장매체의 재생장치로부터 수신하고, 스트리밍 서브 스트림을 스트리밍한다.
기존의 MPEG-4 스트림과의 호환성을 고려하지 않는다면, MPEG-4 시스템에 존재하는 기본 스트림 기술자외에 도 7에 도시한 정보를 나타내는 새로운 기술자를 포함할 수 있다.
한편, 전술한 멀티미디어 데이터 재생방법은 컴퓨터 프로그램으로 작성 가능하다. 상기 프로그램을 구성하는 코드들 및 코드 세그먼트들은 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다. 또한, 상기 프로그램은 컴퓨터가 읽을 수 있는 정보저장매체(computer readable media)에 저장되고, 컴퓨터에 의하여 읽혀지고 실행됨으로써 멀티미디어 데이터 재생방법을 구현한다. 상기 정보저장매체는 자기 기록매체, 광 기록매체, 및 캐리어 웨이브 매체를 포함한다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
전술한 바와 같이 본 발명에 따르면, 단말의 정보저장매체에서 읽혀진 저장 데이터와 서버로부터 스트리밍된 스트리밍 데이터를 결합한 멀티미디어 데이터를 효율적으로 제공할 수 있다.
도 1은 본 발명의 멀티미디어 데이터의 구성을 도시한 도면이다.
도 2는 저장 세그먼트와 스트리밍 세그먼트로 구성된 미디어 스트림을 도시한 도면이다.
도 3은 도 2에 도시한 미디어 스트림을 저장 서브 스트림과 스트리밍 서브 스트림으로 만드는 것을 도시한 도면이다.
도 4는 도 3의 부가정보의 내용을 도시한 도면이다.
도 5는 재생장치가 서버로부터 스트리밍 서비스를 제공받는 것을 설명하기 위한 도면이다.
도 6은 본 발명의 재생장치의 구성도이다.
도 7은 본 발명에서 기술한 부가정보를 MPEG-4 표준에 적용한 실시예를 도시한 도면이다.

Claims (14)

  1. 멀티미디어 데이터를 기록한 정보저장매체에 있어서,
    상기 멀티미디어 데이터는,
    네트워크를 통해 스트리밍되는 스트리밍 데이터와 네트워크를 통해 전송받지 않고 단말에 구비된 정보저장매체로부터 읽혀져 저장되는 저장 데이터를 나누어 기록하고 있는 적어도 하나의 미디어 스트림; 및
    상기 스트리밍 데이터와 저장 데이터의 결합방법을 표현하는 정보인 부가정보를 포함하는 것을 특징으로 하는 정보저장매체.
  2. 제1항에 있어서,
    상기 스트리밍 데이터는 네트워크를 통해 연결된 서버 정보저장매체에 저장되어 있고, 상기 저장 데이터는 단말에 구비된 단말 정보저장매체에 저장되어 있는 것을 특징으로 하는 정보저장매체.
  3. 제1항에 있어서,
    상기 부가정보는, 단말에 구비된 단말정보저장매체 기록되어 있으며 그 데이터가 위치하고 있는 네트워크상의 파일이름정보, 위치정보, 저장 데이터 크기정보 및 메타정보인 것을 특징으로 하는 정보저장매체.
  4. 제3항에 있어서, 상기 미디어 스트림은
    상기 스트리밍 데이터들을 모아서 만들어진 제1서브 스트림과 상기 저장 데이터들을 모아서 만들어진 제2서브 스트림을 조합하여, 상기 미디어 스트림을 만드는데 사용되는 정보인 컨텐츠 부가정보를 더 포함하는 것을 특징으로 하는 정보저장매체.
  5. 제4항에 있어서, 상기 컨텐츠 부가정보는
    상기 멀티미디어 데이터를 구성하는 미디어 스트림의 개수 정보; 및
    상기 미디어 스트림의 속성에 관한 정보인 스트림 부가정보를 포함하는 것을 특징으로 하는 정보저장매체.
  6. 제5항에 있어서, 상기 스트림 부가정보는
    상기 미디어 스트림을 구성하는 제1서브 스트림 및 제2서브 스트림에 대한 식별자 정보;
    수신한 제1서브 스트림 또는 제2서브 스트림이 저장 데이터인지 스트리밍 데이터인지를 나타내는 정보; 및
    상기 저장 데이터와 스트리밍 데이터의 구성정보를 포함하는 것을 특징으로 하는 정보저장매체.
  7. (a) 멀티미디어 데이터를 구성하는 적어도 하나의 미디어 스트림에 관한 구성정보인 컨텐츠 부가정보를 수신하는 단계;
    (b) 상기 컨텐츠 부가정보에 따라 저장 데이터 전송요구명령을 전송하고, 저장 데이터를 수신하여 저장하는 단계;
    (c) 상기 컨텐츠 부가정보에 따라 스트리밍 데이터 전송요구명령을 전송하고, 스트리밍 데이터를 수신하는 단계; 및
    (d) 상기 저장 데이터와 스트리밍 데이터를 상기 컨텐츠 부가정보에 따라 원래 미디어 스트림으로 만들어 재생하는 단계를 포함하는 것을 특징으로 하는 멀티미디어 데이터 재생방법.
  8. 제7항에 있어서,
    상기 스트리밍 데이터는 네트워크를 통해 연결된 서버 정보저장매체에 저장되어 있고, 상기 저장 데이터는 단말에 구비된 단말 정보저장매체에 저장되어 있는 것을 특징으로 하는 멀티미디어 데이터 재생방법.
  9. 제7항에 있어서, 상기 컨텐츠 부가정보는
    상기 멀티미디어 데이터를 구성하는 미디어 스트림의 개수 정보; 및
    상기 미디어 스트림의 속성에 관한 정보인 스트림 부가정보를 포함하는 것을 특징으로 하는 멀티미디어 데이터 재생방법.
  10. 제9항에 있어서, 상기 스트림 부가정보는
    상기 미디어 스트림을 구성하는 제1서브 스트림 및 제2서브 스트림에 대한 식별자 정보;
    수신한 제1서브 스트림 또는 제2서브 스트림이 저장 데이터인지 스트리밍 데이터인지를 나타내는 정보; 및
    상기 저장 데이터와 스트리밍 데이터의 구성정보를 포함하는 것을 특징으로 하는 멀티미디어 데이터 재생방법.
  11. 저장 서브 스트림을 수신하는 저장 서브 스트림 버퍼;
    스트리밍 서브 스트림을 수신하는 스트리밍 서브 스트림 버퍼;
    상기 저장 서브 스트림 및 스트리밍 서브 스트림을 조합하여 미디어 스트림을 만들어 복호화하는 미디어 복호기; 및
    상기 복호화한 데이터가 복수개인 경우에 그 각각의 시간동기를 맞추어 재생하는 렌더러를 포함하는 것을 특징으로 하는 멀티미디어 데이터 재생장치.
  12. 제11항에 있어서,
    상기 저장 서브 스트림 및 상기 저장 서브 스트림의 부가정보를 저장하는 저장부를 더 포함하는 것을 특징으로 하는 멀티미디어 데이터 재생장치.
  13. 제11항에 있어서,
    스트리밍 서버로부터 스트리밍 데이터를 수신하여 복수개의 스트리밍 서브 스트림을 만드는 디멀티플렉서를 더 포함하는 것을 특징으로 하는 멀티미디어 데이터 재생장치.
  14. 제11항에 있어서,
    상기 스트리밍 데이터는 네트워크를 통해 연결된 서버 정보저장매체에 저장되어 있고, 상기 저장 데이터는 단말에 구비된 단말 정보저장매체에 저장되어 있는 것을 특징으로 하는 멀티미디어 데이터 재생장치.
KR1020040013580A 2004-02-27 2004-02-27 멀티미디어 데이터를 기록한 정보저장매체, 그 재생방법및 재생장치 KR101145261B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020040013580A KR101145261B1 (ko) 2004-02-27 2004-02-27 멀티미디어 데이터를 기록한 정보저장매체, 그 재생방법및 재생장치
US11/064,859 US20050193138A1 (en) 2004-02-27 2005-02-25 Storage medium storing multimedia data, and method and apparatus for reproducing the multimedia data
PCT/KR2005/000537 WO2005083707A1 (en) 2004-02-27 2005-02-26 Storage medium storing multimedia data, and method and apparatus for reproducing the multimedia data
EP05726930A EP1719130A4 (en) 2004-02-27 2005-02-26 STORAGE MEDIA THAT SAVES MULTIMEDIA DATA, AND METHOD AND DEVICE FOR PLAYING THE MULTIMEDIA DATA
CN2005800002877A CN1985321B (zh) 2004-02-27 2005-02-26 再现多媒体数据的方法和设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040013580A KR101145261B1 (ko) 2004-02-27 2004-02-27 멀티미디어 데이터를 기록한 정보저장매체, 그 재생방법및 재생장치

Publications (2)

Publication Number Publication Date
KR20050087654A true KR20050087654A (ko) 2005-08-31
KR101145261B1 KR101145261B1 (ko) 2012-05-24

Family

ID=34880328

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040013580A KR101145261B1 (ko) 2004-02-27 2004-02-27 멀티미디어 데이터를 기록한 정보저장매체, 그 재생방법및 재생장치

Country Status (5)

Country Link
US (1) US20050193138A1 (ko)
EP (1) EP1719130A4 (ko)
KR (1) KR101145261B1 (ko)
CN (1) CN1985321B (ko)
WO (1) WO2005083707A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9053754B2 (en) 2004-07-28 2015-06-09 Microsoft Technology Licensing, Llc Thumbnail generation and presentation for recorded TV programs

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9063941B2 (en) 2005-06-03 2015-06-23 Hewlett-Packard Development Company, L.P. System having an apparatus that uses a resource on an external device
US20070091926A1 (en) * 2005-10-21 2007-04-26 Apostolopoulos John G Method for optimizing portions of data from a plurality of data streams at a transcoding node
US8081635B2 (en) * 2008-10-08 2011-12-20 Motorola Solutions, Inc. Reconstruction of errored media streams in a communication system
KR101786051B1 (ko) * 2009-11-13 2017-10-16 삼성전자 주식회사 데이터 제공 방법 및 장치와 데이터 수신 방법 및 장치
KR101750048B1 (ko) 2009-11-13 2017-07-03 삼성전자주식회사 변속 재생 서비스 제공 방법 및 장치
KR101786050B1 (ko) * 2009-11-13 2017-10-16 삼성전자 주식회사 데이터 전송 방법 및 장치
KR101777347B1 (ko) * 2009-11-13 2017-09-11 삼성전자주식회사 부분화에 기초한 적응적인 스트리밍 방법 및 장치
KR101750049B1 (ko) * 2009-11-13 2017-06-22 삼성전자주식회사 적응적인 스트리밍 방법 및 장치
KR101737084B1 (ko) 2009-12-07 2017-05-17 삼성전자주식회사 메인 콘텐트에 다른 콘텐트를 삽입하여 스트리밍하는 방법 및 장치
KR101777348B1 (ko) 2010-02-23 2017-09-11 삼성전자주식회사 데이터 전송 방법 및 장치와 데이터 수신 방법 및 장치
KR20110105710A (ko) 2010-03-19 2011-09-27 삼성전자주식회사 복수의 챕터를 포함하는 콘텐트를 적응적으로 스트리밍하는 방법 및 장치
KR101837687B1 (ko) 2010-06-04 2018-03-12 삼성전자주식회사 콘텐트의 품질을 결정하는 복수의 인자에 기초한 적응적인 스트리밍 방법 및 장치
US9609179B2 (en) * 2010-09-22 2017-03-28 Thomson Licensing Methods for processing multimedia flows and corresponding devices
US9172737B2 (en) * 2012-07-30 2015-10-27 New York University Streamloading content, such as video content for example, by both downloading enhancement layers of the content and streaming a base layer of the content
US10129839B2 (en) * 2014-12-05 2018-11-13 Qualcomm Incorporated Techniques for synchronizing timing of wireless streaming transmissions to multiple sink devices
US11080101B2 (en) * 2019-03-22 2021-08-03 Apple Inc. Dependency scheduling for control stream in parallel processor
CN113630643B (zh) * 2020-05-09 2023-10-20 中央电视台 媒体流收录方法、装置及计算机存储介质、电子设备

Family Cites Families (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5995091A (en) * 1996-05-10 1999-11-30 Learn2.Com, Inc. System and method for streaming multimedia data
US5886736A (en) * 1996-10-24 1999-03-23 General Instrument Corporation Synchronization of a stereoscopic video sequence
JP3887856B2 (ja) * 1996-12-13 2007-02-28 株式会社日立製作所 端末装置
JP3814903B2 (ja) * 1996-12-25 2006-08-30 株式会社日立製作所 映像・データ表示方法及び装置
US5987525A (en) * 1997-04-15 1999-11-16 Cddb, Inc. Network delivery of interactive entertainment synchronized to playback of audio recordings
US6580870B1 (en) * 1997-11-28 2003-06-17 Kabushiki Kaisha Toshiba Systems and methods for reproducing audiovisual information with external information
AU4439899A (en) * 1998-06-16 2000-01-05 United Video Properties, Inc. Interactive television program guide with simultaneous watch and record capabilities
CN1158861C (zh) * 1998-06-17 2004-07-21 株式会社日立制作所 广播信号接收方法和广播信号接收装置
US7313809B1 (en) * 1999-04-16 2007-12-25 Apple, Inc. Convergence-enabled DVD and web system
US7178106B2 (en) * 1999-04-21 2007-02-13 Sonic Solutions, A California Corporation Presentation of media content from multiple media sources
US7346920B2 (en) * 2000-07-07 2008-03-18 Sonic Solutions, A California Corporation System, method and article of manufacture for a common cross platform framework for development of DVD-Video content integrated with ROM content
EP1249131B1 (en) * 1999-12-22 2004-03-17 General Instrument Corporation Video compression for multicast environments using spatial scalability and simulcast coding
SG103829A1 (en) * 2000-01-28 2004-05-26 Canon Kk Digital contents distribution system, digital contents distribution method, roaming server, information processor, and information processing method
US20010042249A1 (en) * 2000-03-15 2001-11-15 Dan Knepper System and method of joining encoded video streams for continuous play
US20010044851A1 (en) * 2000-04-28 2001-11-22 Rothman Peter Lorin System and method for reducing the resources required to deliver streaming media
US6633725B2 (en) * 2000-05-05 2003-10-14 Microsoft Corporation Layered coding of image data using separate data storage tracks on a storage medium
JP2002010251A (ja) * 2000-06-19 2002-01-11 Matsushita Electric Ind Co Ltd 映像信号符号化装置および映像信号復号化装置
AU2001268565A1 (en) * 2000-06-21 2002-01-02 Idt Corporation Method and apparatus for distributing video programs using partial caching
JP2002091863A (ja) * 2000-09-12 2002-03-29 Sony Corp 情報提供方法
US20020037046A1 (en) * 2000-09-22 2002-03-28 Philips Electronics North America Corporation Totally embedded FGS video coding with motion compensation
EP1342179A2 (en) * 2000-12-12 2003-09-10 Apple Computer, Inc. Use of convergence-enabled dvd and web system
US6943845B2 (en) * 2000-12-15 2005-09-13 Canon Kabushiki Kaisha Apparatus and method for data processing, and storage medium
US7111075B2 (en) * 2000-12-18 2006-09-19 Microsoft Corporation Method and system for processing data records having multiple formats
FI118830B (fi) * 2001-02-08 2008-03-31 Nokia Corp Tietovirran toisto
US7237032B2 (en) * 2001-02-16 2007-06-26 Microsoft Corporation Progressive streaming media rendering
US20020147827A1 (en) * 2001-04-06 2002-10-10 International Business Machines Corporation Method, system and computer program product for streaming of data
KR20010079083A (ko) * 2001-06-12 2001-08-22 박준상 다운로드와 스트리밍 혼합 방법을 이용한 디지털 파일의활용 방법 및 관리 시스템
EP1433317B1 (en) * 2001-07-19 2007-05-02 Thomson Licensing Fade resistant digital transmission and reception system
FI114527B (fi) * 2002-01-23 2004-10-29 Nokia Corp Kuvakehysten ryhmittely videokoodauksessa
AU2003215853A1 (en) * 2002-04-09 2003-10-20 Koninklijke Philips Electronics N.V. Transmission method combining downloading and streaming
JP4116320B2 (ja) * 2002-04-24 2008-07-09 シャープ株式会社 コンテンツ記録再生装置
JP2005533337A (ja) * 2002-07-16 2005-11-04 トムソン ライセンシング 拡張層の交互のストリーム識別番号を用いた、ｈｄ−ｄｖｄのための基本層と拡張層のインターリーブ
WO2004036908A1 (ja) * 2002-10-17 2004-04-29 Matsushita Electric Industrial Co., Ltd. データ処理装置
EP1584193A1 (en) * 2002-12-20 2005-10-12 Koninklijke Philips Electronics N.V. Method and apparatus for handling layered media data
JP2004222043A (ja) * 2003-01-16 2004-08-05 Toshiba Corp 情報処理装置およびデータ転送方法
KR101022471B1 (ko) 2004-01-17 2011-03-16 삼성전자주식회사 멀티미디어 데이터를 기록한 정보저장매체, 그 재생방법및 재생장치

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9053754B2 (en) 2004-07-28 2015-06-09 Microsoft Technology Licensing, Llc Thumbnail generation and presentation for recorded TV programs
US9355684B2 (en) 2004-07-28 2016-05-31 Microsoft Technology Licensing, Llc Thumbnail generation and presentation for recorded TV programs

Also Published As

Publication number Publication date
CN1985321B (zh) 2010-11-24
EP1719130A1 (en) 2006-11-08
EP1719130A4 (en) 2007-09-26
WO2005083707A1 (en) 2005-09-09
CN1985321A (zh) 2007-06-20
US20050193138A1 (en) 2005-09-01
KR101145261B1 (ko) 2012-05-24

Similar Documents

Publication Publication Date Title
KR101022471B1 (ko) 멀티미디어 데이터를 기록한 정보저장매체, 그 재생방법및 재생장치
CN1985321B (zh) 再现多媒体数据的方法和设备
KR101066366B1 (ko) 멀티미디어 컨텐츠 방송용 원격 통신 시스템, 서버, 멀티미디어 컨텐츠 방송 방법, 컴퓨터 판독가능 저장 매체 및 신호 전달 매체
CA2636172C (en) Dynamic media serving infrastructure
US8635356B2 (en) Method for supporting scalable progressive downloading of video signal
US20110125918A1 (en) Adaptive streaming method and apparatus
KR20020032803A (ko) 스트리밍 서비스를 위한 파일 구조
CN110832872B (zh) 使用用于文件格式方框的通用描述符处理媒体数据
KR20110041409A (ko) 콘텐츠 재생 시스템, 콘텐츠 재생 장치, 프로그램, 콘텐츠 재생 방법, 및 콘텐츠 서버의 제공
JP2007173987A (ja) マルチメディアデータ送受信システム、及び装置、又はプログラム
KR101257386B1 (ko) 통합 멀티미디어 파일 구조를 이용한 3ｄ 멀티미디어콘텐츠 서비스 시스템 및 방법
WO2020183900A1 (ja) 情報処理装置、再生処理装置、情報処理方法及び再生処理方法
JP2003153254A (ja) データ処理装置及びデータ処理方法、並びにプログラム、記憶媒体
JPWO2014171385A1 (ja) サーバ装置、コンテンツ提供方法及びコンピュータプログラム
JP2011518521A (ja) マルチメディアコンテンツのデュアルタイプ再生
KR20000060245A (ko) 인터넷 스트리밍 서비스를 위한 스트림 파일 제작 방법
JP4756848B2 (ja) データ配信方法および情報処理装置
Eberhard et al. Nextsharepc: an open-source bittorrent-based p2p client supporting svc
JP2004140552A (ja) マルチキャストシステム，ストリーミングサーバ，クライアント装置，プログラム，およびストリーミングサーバの送信方法
JP2005176094A (ja) データ処理装置及びデータ処理方法、並びにプログラム、記憶媒体
KR101656102B1 (ko) 컨텐츠 파일 생성/제공 장치 및 방법
Bouilhaguet et al. Adding delivery support to MPEG-Pro, an authoring system for MPEG-4
TW202032998A (zh) 用於經串流媒體資料之多個解碼器介面
Navali et al. Common Mezzanine Distribution Format (CMZF): For ABR TV Distribution

Legal Events

Date Code Title Description
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E90F Notification of reason for final refusal
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
J201 Request for trial against refusal decision
B701 Decision to grant
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150429

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160428

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20170427

Year of fee payment: 6

LAPS Lapse due to unpaid annual fee