KR20060111904A - 메타-데이터 및 미디어-데이터를 포함하는 멀티미디어파일의 스트리밍 - Google Patents

메타-데이터 및 미디어-데이터를 포함하는 멀티미디어파일의 스트리밍 Download PDF

Info

Publication number
KR20060111904A
KR20060111904A KR1020067020470A KR20067020470A KR20060111904A KR 20060111904 A KR20060111904 A KR 20060111904A KR 1020067020470 A KR1020067020470 A KR 1020067020470A KR 20067020470 A KR20067020470 A KR 20067020470A KR 20060111904 A KR20060111904 A KR 20060111904A
Authority
KR
South Korea
Prior art keywords
file
data
media
meta
atom
Prior art date
Application number
KR1020067020470A
Other languages
English (en)
Inventor
엠레 악수
미스카 한누크젤라
Original Assignee
노키아 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 노키아 코포레이션 filed Critical 노키아 코포레이션
Publication of KR20060111904A publication Critical patent/KR20060111904A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309—Transmission or handling of upstream communications
    • H04N7/17336—Handling of requests in head-ends
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1101—Session protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/764—Media network packet handling at the destination 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L7/00—Arrangements for synchronising receiver with transmitter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234309—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2353—Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • Library & Information Science (AREA)
  • General Business, Economics & Management (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Tourism & Hospitality (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Stored Programmes (AREA)

Abstract

본 발명은 메타-데이터(meta-data) 및 미디어-데이터(media-data)를 포함하는 멀티미디어 파일을 구성하기 위한 방법에 관한 것이다. 멀티미디어 파일은, 그 멀티미디어 파일이 자신의 모든 미디어 샘플들에 공통되는 파일-레벨(file-level)의 메타-데이터를 위한 적어도 일 부분 및 복수 개의 미디어 샘플들의 미디어-데이터 및 상기 미디어 샘플들의 메타-데이터를 포함하는 독립적 세그먼트를 포함하도록 구성된다.

Description

메타-데이터 및 미디어-데이터를 포함하는 멀티미디어 파일의 스트리밍{Streaming of multimedia files comprising meta-data and media-data}
이제부터, 본 발명은 다음과 같은 첨부 도면을 참조하여 바람직한 실시예를 이용하여 더욱 상세히 설명될 것이다.
도 1은 종래 기술에 의한 MP4 파일 포맷을 예시하는 도면이다.
도 2는 멀티미디어 콘텐트 스트리밍을 위한 송신 시스템을 예시하는 블록도이다.
*도 3은 인코더의 기능을 예시하기 위한 도면이다.
도 4는 멀티미디어 검색 클라이언트(multimedia retrieval client)의 기능을 예시하는 도면이다.
도 5a 및 도 5b는 본 발명의 바람직한 실시예에 따른 파일 포맷을 예시한다.
도 6은 순차적 다운로딩을 예시하는 신호 흐름도이다.
본 발명은 멀티미디어 데이터를 처리하기 위한 방법 및 장치에 관한 것으로 서, 특히 스트리밍을 위한 멀티미디어 파일의 구조에 관한 것이다.
스트리밍이란 오디오 및 비디오 스트림과 같은 동기화된 미디어 스트림들을, 이러한 스트림들이 데이터 네트워크를 통해서 클라이언트로 전송되는 동안에 연속적인 동작을 기반으로 재생하기 위한 응용 프로그램의 기능을 나타낸다. 멀티미디어 스트리밍 시스템은 스트리밍 서버 및 복수 개의 스트리밍 클라이언트(플레이어)를 포함하며, 클라이언트는 연결 매체(아마도 네트워크 연결)를 통하여 서버에 접근한다. 클라이언트는 사전에 저장되거나 실시간 멀티미디어 콘텐트를 서버로부터 패치(fetch)하고 이것을 이 콘텐트가 다운로드되는 동안 실질적으로 실시간에서 재생한다. 전체적인 멀티미디어 프리젠테이션은 무비(movie)라고 불릴 수 있으며 논리적으로 다수 개의 트랙으로 분할될 수 있다. 각 트랙은 단일 미디어 타입(예를 들어, 비디오 프레임등)의 타이밍된 시퀀스(timed sequence)를 나타낸다. 각 트랙에서, 타이밍된 각 유닛은 미디어 샘플(media sample)이라고 불린다.
스트리밍 시스템들은 서버 측의 기법에 기반하여 두 가지 범주로 구분될 수 있다. 이러한 범주들은 본 명세서에서 노멀 스트리밍(normal streaming) 및 순차적 다운로딩(progressive downloading)이라고 불린다. 노멀 스트리밍에서, 서버들은 응용-레벨(application-level)의 수단을 채택하여 송신된 스트림의 비트율을 제어한다. 목표는 스트림을 그것의 재생 속도(playback rate)에 근사적으로 동일한 속도로 송신하는 것이다. 어떤 서버들은 멀티미디어 파일들의 콘텐트를 온-더-플라이(on the fly) 기술로 조절하여 네트워크 정체(network congestion)를 피할 수 있는 가능한 네트워크 대역폭을 만족시킬 수 있다. 신뢰성이 보장되거나(reliable) 또는 보장되지 않는(unreliable) 전송 프로토콜 및 네트워크들이 이용될 수 있다. 만일 신뢰성 없는 전송 프로토콜이 사용된다면, 노멀 스트리밍 서버들은 전형적으로 멀티미디어 파일들 내에 존재하는 정보를 캡슐화(encapsulate)하여 네트워크 전송 패킷(network transport packets)으로 만든다. 이러한 동작은 특정 프로토콜 및 포맷에 따라서 수행될 수 있는데, 이러한 프로토콜 및 포맷은 RTP/UDP(Real Time transport Protocol/User Datagram Protocol) 프로토콜 및 RTP 페이로드 포맷(payload format)을 이용한다.
순차적 다운로딩은 HTTP(Hypertext Transfer Protocol) 스트리밍, HTTP fast-start, 또는 의사-스트리밍(pseudo-streaming)이라고 불리기도 하는데, 신뢰성 있는 전송 프로토콜의 최상위에서 동작한다. 서버들은 전송되는 스트림의 비트율을 제어하기 위하여 응용-레벨의 수단을 채택하지 않을 수도 있다. 그 대신, 서버들은 하부에 존재하는 신뢰성 있는 전송 프로토콜에 의하여 제공되는 흐름 제어 매커니즘에 의존할 수도 있다. 신뢰성 있는 전송 프로토콜은 전형적으로는 연결에 기인한(connection-oriented) 것이다. 예를 들면, TCP(Transport Control Protocol)가 궤환-기반 알고리즘(feedback-based algorithm)에서 전송된 비트율을 제어하는데 사용될 수 있다. 결과적으로, 응용 프로그램들은 데이터를 전송 패킷으로 캡슐화할 필요가 없으며, 멀티미디어 파일들은 순차적 다운로딩 시스템에서는 그 자체로서 전송된다. 그러므로, 클라이언트는 서버 측에 존재하는 파일과 완전 동일한 복제본을 수신한다. 이러한 방식을 이용하면 데이터를 다시 스트리밍할 필 요 없이 파일을 반복하여 재생할 수 있게 된다.
멀티미디어 스트리밍을 위한 콘텐트를 생성할 때, 미디어 샘플 각각은 특정 압축 방법을 이용하여 압축됨으로써 특정 포맷을 따르는 비트 스트림이 생성된다. 미디어 압축 포맷에 덧붙여서, 콘테이너 포맷(container format)이 존재하여야 하는데, 이 포맷은 압축된 미디어 샘플들을 다른 것들 사이에서 상호 관련시켜주는 파일 포맷이다. 더 나아가, 파일 포맷은 파일을 인덱싱하기 위한 정보를 포함할 수 있는데, 이것은 미디어를 어떻게 전송 패킷으로 캡슐화 하는지에 대한 힌트이며 예를 들어 미디어 트랙을 어떻게 동기화 하는지에 대한 데이터이다. 또한, 미디어 비트 스트림은 미디어-데이터(media-data)라고 불릴 수 있으며, 멀티미디어 콘테이너 파일 내의 모든 추가적인 정보들은 메타-데이터(meta-data)라고 불릴 수 있다. 파일 포맷은, 그것이 그 자체로서 서버로부터 클라이언트로 데이터 파이프의 최상위에서 스트리밍될 수 있으면 스트리밍 포맷이라고 불릴 수 있다. 결과적으로, 스트리밍 포맷들은 미디어 트랙들을 단일 파일로 인터리빙(interleave)하며, 미디어 데이터는 디코딩 또는 재생 순서로 나타난다. 스트리밍 포맷들은 하부에 존재하는 네트워크 서비스들이 각 미디어 타입을 위한 개별적 전송 채널(transmission channel)을 제공하지 않을 경우 반드시 사용되어야 한다. 스트리밍될 수 있는 파일 포맷은 스트리밍 서버가 데이터를 스트리밍하는 동안 용이하게 사용될 수 있는 정보를 포함한다. 예를 들어, 포맷은 상이한 네트워크 대역폭을 목적으로 구현된 미디어 비트 스트림의 다양한 버전의 저장을 가능하게 할 수 있고, 스트리밍 서버는 클라이언트 및 서버 간의 연결에 따라서 어떤 비트율을 이용하여야 하는지를 결 정할 수 있다. 스트리밍될 수 있는 포맷들은 그 자체로 스트리밍되는 경우는 드문데, 그러므로 그들은 인터리빙 되거나 상이한 미디어 트랙으로의 링크를 포함한다.
MPEG(Moving Pictures Experts Group)은 MPEG-4를 개발하였는데, 이것은 동영상 및 음향을 포함하는 멀티미디어 프리젠테이션(multimedia presentation)을 구현하기 위한 멀티미디어 압축 표준이다. MPEG-4 사양은 오디오-비주얼 객체를 위한 일련의 코딩 툴(coding tool)을 결정하고 코딩된 오디오-비주얼 객체의 문법적인 기술(syntactic description)을 결정한다. MPEG-4를 위하여 특정된 파일 포맷은 MP4라고 불리는데, 이것이 도 1에 예시된다. MP4는 객체 지향적인(object-oriented) 파일 포맷이며, MP4에서 데이터는 '아톰(atom)'이라고 불리는 구조로 캡슐화된다. MP4 포맷은 모든 프리젠테이션 레벨 정보(메타-데이터라고 불림)를 실제 멀티미디어 데이터 샘플(미디어-데이터라고 불림)로부터 분리하여 이것을 파일 내의 하나의 고유 구조(integral structure)에 추가하는데, 이 고유 구조는 '무비 아톰(movie atom)'이라고 불린다. 이러한 종류의 파일 구조는 일반적으로 "트랙-지향적인(track-oriented)" 구조라고 불릴 수 있는데, 그 이유는 메타-데이터가 미디어-데이터로부터 분리되기 때문이다. 미디어-데이터는 메타-데이터 아톰에 의하여 참조되고 해석된다. 어떤 미디어-데이터도 무비 아톰과 인터리빙될 수 없다. MP4 파일 포맷은 스트리밍하는 포맷(streaming format)이 아니고, 오히려 스트리밍될 수 있는 포맷(streamable format)이다. MP4는 특정 순차적 다운로딩 타입의 스트리밍 시나리오를 위하여서만 설계된 것이 아니다. 반면에, 이것은 MP4 파일의 구성 요소들이 주의 깊게 배열될 경우, 즉, 파일의 개시부의 메타-데이터 및 미디 어-데이터가 재생 또는 디코딩 순서로써 인터리빙 된다면, 통상적인 트랙-지향 스트리밍 포맷으로 생각될 수 있다. 전형적으로, 메타-데이터의 비율은 전체 MP4 파일 크기의 5% 내지 20%에 해당한다. 통상적인 트랙 지향 스트리밍 파일(MP4 파일과 같은 파일)을 순차적 다운로딩 하는 동안 모든 메타-데이터는 미디어-데이터보다 우선하여 전송되어야 한다. 결과적으로, 메타-데이터의 수신은 실제 재생이 개시되기 전에 오랜 기간의 버퍼링을 요구할 수 있는데, 이러한 것은 사용자에게는 매우 귀찮은 일이다. 또한, 버퍼링이 발생된다는 것은 클라이언트가 메타-데이터를 저장하기 위한 대용량의 메모리를 포함하여야 한다는 것을 의미하는데, 이는 특히 수신된 프리젠테이션이 길 경우에 문제가 된다. 클라이언트는 심지어는 메타-데이터가 메모리에 적합한 크기를 갖지 않을 경우에는 프리젠테이션을 재생할 수조차 없을 수 있다. 기록(recording)에 관련된 더 큰 문제는, 기록 응용 프로그램이 충돌하거나, 디스크 용량이 부족하거나, 다른 문제점들이 발생될 경우, 기록 응용 프로그램이 방대한 용량의 미디어를 디스크에 기록했으나 아직 무비 아톰을 기록하지는 않았을 경우, 기록된 데이터는 사용될 수 없다는 점이다.
전형적인 실시간(live) 순차적 다운로딩 시스템은 실시간 미디어 인코더, 서버 및 다수의 클라이언트를 포함한다. 실시간 미디어 인코더는 미디어 트랙을 인코딩하고 스트리밍 파일로 캡슐화하고, 스트리밍 파일은 실시간으로 서버로 전송된다. 서버는 수신된 파일을 각 클라이언트로 복사한다. 수신된 파일에는 서버에서는 아무런 수정도 가해지지 않는 것이 바람직하다. MP4 파일 포맷은 순차적 다운로딩 시스템에는 그다지 적합하지 않으며, 특히 상기에 언급된 바와 같은 라이브 순차적 다운로딩 시스템에는 더구나 적합하지 않다. MP4 파일이 순차적으로 다운로드 되면, 미디어-데이터 이전에 모든 메타-데이터가 전송될 것이 요구된다. 하지만, 실시간 소스를 인코딩할 때에는, 소스의 후속하는 콘텐트에 관련된 메타-데이터를 그 콘텐트를 캡쳐하기 이전에 획득하는 것은 불가능하다.
이러한 문제점들을 해결하기 위한 하나의 접근 방법은, '샘플' 레벨의 메타-데이터 및 미디어-데이터의 인터리빙을 수행하는 것인데, 이러한 기법은 샘플-지향(sample-oriented) 파일 구조라고 불릴 수 있다. 마이크로소프트TM 사의 개선된 시스템 포맷(ASF, Advanced Systems Format)은 이러한 접근 방법의 일 예이다. ASF에서, 파일 레벨 정보는 파일 헤더 섹션으로서, 파일의 시작 부분에 저장된다. 각 미디어 샘플(즉, 미디어-데이터의 최소 접근 단위)은 그 샘플에 수반되는 설명(description)과 함께 캡슐화된다. 그러나, ASF 접근 방법은 몇 가지 단점을 가진다. 즉, 각 미디어 샘플들이 자신과 함께 캡슐화되는 수반된 메타-데이터를 포함하고 트랙을 위한 별도의 메타-데이터가 존재하지 않으므로 트랙에 기반한 파일 구조가 포기된다.
메타-데이터 및 미디어-데이터의 구분이 상실된다. 미디어-데이터가 이미 패킷화된 구조에 포함되므로, 실제의 미디어-데이터를 추출하고, 필요할 경우 다른 전송 프로토콜(예를 들어, RTP와 같은) 페이로드 포맷으로 재패킷화(re-packetize)하기가 힘들다. 이러한 동작은 스트리밍 서버가 그 파일을 순차적 다운로딩 기술을 이용하여 전송하는 대신 무선 전송 프로토콜(예를 들어 UDP와 같은)을 이용하여 클라이언트로 스트리밍할 필요가 있을 때 수행되어야 한다. 메타-데이터 및 미디어-데이터를 샘플 레벨에서 인터리빙하면 저장된 파일의 용량이 커지며 유사한 정보가 여러번 반복되게 된다. 그러므로, 파일 저장 용량의 중복이 발생하게 되므로 긴 프리젠테이션의 경우 불필요한 저장 공간을 매우 많이 소비할 수 있다.
이러한 문제점들을 해결하기 위하여 MPEG 그룹에 의하여 제공된 다른 접근 방법은 단편화된 무비 파일(fragmented movie files)이라고 불린다. 이 접근 방법에서 메타-데이터는 더 이상 하나의 아톰 내에 머물도록 한정되지 않으며, 오히려 파일 전체에 확산되는데, 이 경우 다소 인터리빙 되는 형태(somewhat interleaved manner)로 확산된다. 파일의 기본적인 메타-데이터는 여전히 무비 아톰 내에 세팅되고 그것이 프리젠테이션의 구조를 설정한다. 무비 아톰 및 미디어-데이터 아톰에 더불어, 무비 단편(movie fragments)이 파일에 추가된다. 무비 단편은 시간 도메인에서 무비를 확장한다. 그들은 종래 기술에 의하면 무비 아톰 내에 존재했던 정보의 일부를 제공한다. 실제 미디어 샘플은 여전히 미디어-데이터 아톰 내에 저장된다.
MP4 파일의 단편화는 단편들 간에 완전 독립성을 확보하지는 않는다. 메타-데이터의 각 단편들은 자신에 후속하는 MP4 파일 전체에 있어서 유효(valid)하다. 그러므로, MP4 재생기는 단편의 형태로 도달하는 모든 메타-데이터 부분을 저장하여야 하는데, 심지어는 메타-데이터의 그 부분이 이용된 이후에도 저장하여야 한다(재생-및-파기(play-and-discard) 기법은 불가능한데, 다시 말해 단편은 그것을 재생한 이후에 보존되어야만 한다). 또한, 단편들은 전술된 바와 같은 라이브 스 트리밍 접근 방법에 관련된 문제점을 해결하지 못한다. 이것은 단편들이 상호 독립적이지 않다는 사실에 기인한다.
본 발명의 목적은 전술된 바와 같은 문제점을 해결하거나, 최소한 완화하기 위한 것이다. 본 발명의 목적은 첨부된 청구의 범위의 독립항에 개시된 바와 같은 특징을 가지는 방법, 멀티미디어 스트리밍 시스템, 데이터 처리 장치 및 컴퓨터 프로그램 제품에 의하여 획득된다. 본 발명의 바람직한 실시예는 첨부된 청구의 범위의 종속항에 개시된다.
본 발명의 제1 측면에 따르면, 멀티미디어 파일은, 파일의 모든 미디어 샘플들에 공통되는 파일-레벨(file-level)의 메타-데이터를 위한 적어도 일 부분 및 복수 개의 미디어 샘플들의 미디어-데이터 및 상기 미디어 샘플들의 메타-데이터를 포함하는 독립적 세그먼트를 포함하도록 구성된다.
본 발명의 제2 측면에 따르면, 독립적 세그먼트 각각은, 파일-레벨의 메타-데이터를 이용하여 하나씩 파싱된다. 멀티미디어 파일이라 함은 복수 개의 미디어 소스로부터 획득되는 것이 가능한 메타-데이터 및 미디어-데이터 모두를 포함하는 데이터의 모든 그루핑(grouping)을 의미한다. 파싱(parsing)이라 함은 일반적으로 멀티미디어 파일을 특히 파일-레벨의 메타-데이터 및 독립적 세그먼트를 분리하기 위하여 해석하는 작업을 의미한다. 세그먼트라는 용어는 복수 개의 미디어 샘플들의 타이밍된 시퀀스를 의미하며, 전형적으로는 몇 가지의 압축 기술에 의하여 압축된다. 하나의 세그먼트는 하나 또는 그 이상의 미디어 타입을 포함할 수 있다. 하나의 세그먼트는, 그 세그먼트에 상응하는 특정 시간 간격 동안 현재 파일 내에 존재하는 모든 미디어 타입들을 포함할 필요가 없다. 세그먼트 내의 특정 미디어 타입의 미디어 샘플들은 시간 도메인의 충실 블록(integral block)을 형성하여야 한다. 세그먼트에 현존하는 멀티미디어 데이터의 구성 요소들은 동일한 지속 시간(duration) 또는 바이트 길이를 가질 필요가 없다.
본 발명의 측면들은 특히 멀티미디어 콘텐트 스트리밍에 있어서 장점을 가진다. 종래 기술에 의한 트랙-지향 스트리밍 파일을 스트리밍하는데 요구되는 임시 저장 용량에 비하여 훨씬 저장 용량만 있으면 되는데, 그 이유는 이미 사용된 미디어 세그먼트들을 유지하고 있을 필요가 없기 때문이다. 이러한 기술은 멀티미디어 파일들을 구성하는 장치 및 수신된 멀티미디어 파일을 파싱하기 위한 장치 모두에 적용된다. 각 샘플을 위해 메타-데이터 및 미디어-데이터 인터리빙을 할 필요가 없다. 또한, 본 발명은 파일로부터의 정보를 편집 및 검색하기 위한 수단의 유연성을 제공한다. 미디어 세그먼트들은 다른 것과는 독립적으로 재생될 수 있으며, 특히 파일-레벨 메타-데이터 및 세그먼트의 메타-데이터가 수신되자마자 재생될 수 있으므로, 종래 기술에 의한 MP4 스트리밍에 비하여 재생이 신속히 시작될 수 있도록 한다. 본 발명의 더 나아간 장점은, 파일-레벨 메타-데이터가 수신되고 나면, 재생 동작이 수신된 미디어 세그먼트 중 어느 것으로부터도 개시될 수 있다는 것이다. ASF 포맷과 비교할 때, 본 발명에 따라서 미디어 샘플들을 세그먼트화 하여 트랙-지향 그루핑하면 그 장점이 매우 크므로, 예를 들어 TCP 대신에 UDP를 이용하여 메타-데이터를 스트리밍할 때 그 미디어-데이터를 다른 전송 프로토콜의 페이로 드 포맷으로 재패킷화 하는 것이 더 효율적이고 용이해진다. 본 발명은 스트리밍이 아닌 적용 분야를 위해서도 장점을 가진다. 예를 들어, 라이브로 기록되는 멀티미디어 파일이 업로드될 때, 세그먼트는 필요한 미디어-데이터가 캡쳐 및 인코딩된 후 즉시 업로드될 수 있다.
본 발명의 일 실시예에서, 멀티미디어 파일은 TCP(Transport Control Protocol)과 같은 신뢰성 있는 전송 프로토콜을 이용하여 스트리밍 서버로부터 스트리밍 클라이언트로 순차적으로 다운로딩 된다. 본 발명의 다른 실시예에 따르면, 파일-레벨의 메타-데이터가 단일 멀티미디어 파일 내에서 반복되어 새로운 클라이언트가 라이브 순차적 다운로딩 세션에 참가할 수 있도록 한다. 파일-레벨 메타-데이터 파트를 수신하고 난 뒤, 새로운 클라이언트는 수신되는 멀티미디어 파일을 파싱, 디코딩 및 재생하는 동작을 개시할 수 있다. 종래 기술에 의하면, 이러한 동작은 불가능하다. 대신에, 파일-레벨 메타-데이터는 예를 들면 클라이언트에 개별 파일의 형태로서 송신되었다. 이러한 라이브 순차적 다운로딩을 개시하기 위한 종래 기술에 의한 방법들은 클라이언트 및 서버의 구현 과정을 복잡하게 한다.
본 발명의 바람직한 일 실시예는 수정된 MPEG-4 포맷에 의하여 기술된다. 그러나, 본 발명은 QuickTime 포맷과 같은 다른 스트리밍 응용 프로그램 및 포맷에도 역시 적용될 수 있다.
도 2는 멀티미디어 콘텐트 스트리밍을 위한 송신 시스템을 예시한다. 도 2에 도시된 시스템은 에디터(editor)라고도 불리며 복수 개의 미디어 소스(MS)들로부터 송신을 위한 미디어 콘텐트 데이터를 준비하는 인코더(EC), 인코딩된 멀티미 디어 파일을 네트워크(NW) 상에서 송신하는 스트리밍 서버(SS) 및 송신된 파일들을 수신하는 복수 개의 클라이언트(C)들을 포함한다. 콘텐트는 라이브 프리젠테이션을 기록하는 기록기(예를 들어 비디오 카메라와 같은)로부터 수신될 수도 있고, 또는 비디오 테이프, CD, DVD, 하드 디스크 등과 같은 저장 장치에 사전에 기록되었을 수도 있다. 예를 들어, 이러한 콘텐트에는 비디오, 오디오, 정지 영상일 수 있으며, 또한 데이터 파일들을 포함할 수도 있다. 인코더(EC)로부터 수신된 멀티미디어 파일은 서버(SS)로 송신된다. 서버(SS)는 복수 개의 클라이언트(C)에 서비스를 제공하고 유니캐스트 또는 멀티캐스트 경로를 이용하여 서버 데이터베이스로부터 멀티미디어 파일을 송신하거나 인코더(EC)로부터 직접 송신함으로써 클라이언트 요청(client request)에 응답한다. 예를 들어, 네트워크(NW)는 무선 통신 네트워크이거나, 근거리 통신망이거나, 브로드캐스팅 네트워크이거나 또는 게이트웨이에 의하여 구별되는 다중의 상이한 네트워크들일 수 있다.
도 3은 인코더 유니(ENC) 내의 콘텐트 생성 단계 동안의 기능을 더욱 상세히 예시하는 도면이다. 로(Raw) 미디어 데이터는 하나 또는 그 이상의 미디어 소스로부터 캡쳐된다. 캡쳐링 단계의 출력은 일반적으로 압축된 데이터이거나 약간 압축된 데이터(slightly compressed data)이다. 예를 들어, 비디오 그래버(video grabber) 카드의 출력은 압축되지 않은 YUV 4:2:0 포맷이거나 모션-JPEG 포맷일 수 있다. 미디어 스트림은 편집되어 하나 또는 그 이상의 압축되지 않은 미디어 트랙들을 생성한다. 다양한 방법으로 미디어 트랙들을 편집하는 것이 가능한데, 예를 들어 비디오 프레임율(frame rate)을 감소시키는 방법도 가능하다. 그러면, 미디 어 트랙들은 압축될 수 있다. 그러면, 압축된 미디어 트랙들은 멀티플렉싱되어 단일 비트 스트림을 형성한다. 이 동안에, 미디어-데이터 및 메타-데이터가 선택된 파일 포맷으로 구현된다. 그 파일이 구성되면, 구성된 파일은 스트리밍 서버(SS)로 전송될 수 있다. 전형적으로, 멀티플렉싱은 순차적 다운로딩 시스템에서는 필수적인 것이지만, 노멀 스트리밍 시스템에서는 필수적인 것이 아님에 주의하여야 하는데, 그 이유는 미디어 트랙들이 개별 스트림 형태로 전송될 수 있기 때문이다.
도 2 및 도 3에서 콘텐트 생성 기능(ENC에 의하여) 및 스트리밍 기능(SS에 의하여)이 분리된 것으로 도시되어 있지만, 그들은 동일한 장치에서 수행되거나 두 개 이상의 장치에서 수행될 수 있다는 점에 주의하여야 한다. 도 4는 멀티미디어 검색 클라이언트(multimedia retrieval client)의 기능을 예시한다. 클라이언트(C)는 압축된 압축되고 멀티플렉싱된 멀티미디어 파일을 스트리밍 서버(SS)로부터 획득한다. 클라이언트(C)는 그 파일을 파싱 및 디멀티플렉싱하여 개별 미디어 트랙을 획득한다. 그러면, 이러한 미디어 트랙들은 압축 해제되어 복원된 미디어 트랙을 제공하는데, 제공된 복원된 미디어 트랙들은 사용자 인터페이스(UI)의 출력 장치를 이용하여 재생될 수 있다. 이러한 기능에 첨가하여, 제어 유닛이 단말 사용자의 동작을 내장하도록 제공되는데, 즉, 단말 사용자의 입력에 따라 재생을 제어하고 클라이언트 서버 제어 기능을 조절하기 위하여 제공된다. 재생 동작은 독립 미디어 플레이어 응용 프로그램 또는 브라우저 플러그-인에 의하여 제공될 수 있다.
본 명세서에서, 미디어 샘플은 압축된 미디어 데이터의 가장 작은 디코딩 유 닛으로서 정의되고 이 유닛은 압축 해제된 샘플 또는 샘플들을 생성한다. 예를 들어, 압축된 비디오 프레임은 미디어 샘플이고, 이것이 디코딩 되면, 압축 해제된 영상이 획득된다. 반면에, 압축된 비디오 슬라이스가 미디어 샘플이 아니면, 슬라이스를 디코딩 하는 작업은 압축 해제된 샘플(영상)의 공간적 일부분을 얻는다. 단일 미디어 타입의 미디어 샘플들은 그루핑 되어 트랙으로 만들어질 수 있다. 전형적으로, 멀티미디어 파일은 무비와 같은 스트리밍된 프리젠테이션에 관련된 모든 미디어-데이터 및 메타-데이터를 포함하는 것으로 여겨진다.
멀티미디어 파일에서 운반되는 메타-데이터는 다음과 같이 구분될 수 있다. 전형적으로, 메타-데이터의 일부분의 담당 범위(scope)는 전체 파일이다. 이러한 메타-데이터는 사용중인 미디어 코덱의 식별 정보 및 정확한 디스플레이 사각형 크기의 지시자를 포함할 수 있다. 이러한 종류의 메타-데이터는 파일-레벨 메타-데이터(또는 프리젠테이션-레벨 메타-데이터)라고 불릴 수 있다. 메타-데이터의 다른 부분은 특정 미디어 샘플에 관련된다. 이러한 메타-데이터는 샘플 타입 및 바이트 단위의 크기에 대한 지시자를 포함할 수 있다. 이러한 메타-데이터는 샘플에 고유한 메타-데이터라고 불릴 수 있다.
전형적으로, 미디어 디코딩 및 재생 작업은 파일-레벨의 메타-데이터가 없으면 가능하지 않은데, 메타-데이터는 전형적으로 파일 헤더 섹션으로서의 스트리밍 파일의 개시부에 나타난다. 샘플에 고유한(sample-specific) 메타-데이터는 종래 기술에 의하면 미디어-데이터와 함께 인터리빙 되거나 파일의 개시부에 인터리빙된 직후에 충실 섹션(integral section)으로서 나타나거나 파일-레의 메타-데이터와 함께 인터리빙될 수 있다. 이것은 순차적 다운로딩에 대한 문제점을 야기하거나, 또는 어떤 파일 포맷에서는 순차적 다운로딩은 아예 불가능하다.
본 발명의 바람직한 일 실시예에 따른 수정된 파일 포맷은 도 5a에 도시된다. 아이디어는 '메타-데이터'-'미디어-데이터' 쌍을 생성하는 것인데, 이 쌍은 다른 '메타-데이터'-'미디어-데이터' 쌍과는 독립적으로 해석 및 재생될 수 있다. 이러한 세그먼트들의 메타-데이터는 파일-레벨, 전역(global), 메타-데이터 기술자 파트(description part)에 의존한다. 순차적 다운로딩에서, 파일은 자기 한정되는데(self-contained), 즉, 파일은 다른 파일을 향한 링크를 포함하지 않으며, 메타-데이터 파트 카운트 제한은 해제 및/또는 재해석된다. 그러므로, 미디어-데이터 샘플 오프셋과 같은, 세그먼트-레벨 메타-데이터 내의 모든 미디어에 고유한 정보는 상응하는 세그먼트에만 관련된다. 다시 말하면, 다른 세그먼트에 대한 정보가 존재하지 않는다. 각 세그먼트는 자신에만 의존하는 것으로 간주되거나, 또는 파일-레벨 메타-데이터 파트에만 관련되는 것으로 간주된다. 이러한 특성이 수신 장치(TE, receiving device)로 하여금 파일-레벨 메타-데이터 기술자 파트 및 세그먼트의 메타-데이터 및 그것의 미디어-데이터의 일부를 수신하자마자 재생을 개시하는 것이 가능하도록 한다. 본 발명의 바람직한 일 실시예에서, 세그먼트는 그것이 수신 장치(C) 내에 파싱이 된 이후에 제거될 수 있다(임시 메모리로부터 삭제될 수 있다). 그러므로, 오직 파일 레벨의 메타-데이터만이 파일의 최후의 세그먼트가 파싱될때까지 유지되면 되므로, 임시 기억 용량이 적어도 된다. 만일 파일을 파싱하는 장치도 역시 멀티미디어 파일을 재생한다면, 세그먼트는 그것을 재생한 이후 에 영구적으로 제거될 수 있다. 그럼으로써 요청되는 메모리 자원을 더욱 감소시킬 수 있다. 파싱/디멀티플렉싱 기능은 우선 파일-레벨 메타-데이터를 독출하고 독출된 파일-레벨 메타-데이터에 기반하여 세그먼트를 분리한다. 이 과정 이후에, 미디어 트랙들은 한번에 한 세그먼트씩, 세그먼트 내의 데이터로부터 분리된다.
도 5b는 도 5a에 예시된 바와 같은 세그먼트화된 파일 포맷 원리에 따른 수정된 MP4 파일 포맷을 예시하는 도면으로서, 이것은 순차적 MP4 파일(progressive MP4 file)이라고 명명된다. 2개의 새로운 아톰 타입들이 MP4를 위해 정의된다. MP4 기술자 아톰(mp3d)은 MP4 파일 전체에 관련된 필수 정보를 유지한다. 어떤 MPEG-4 사양에 사용된 'box'라는 용어가 아톰 대신에 사용될 수 있다는 점에 주의하여야 한다. 만일 어떤 필수 정보도 'MP4 세그먼트 아톰(smp4)' 내에 존재하지 않는다면, 그 정보는 MP4 세그먼트 아톰(smp4) 내에 존재하여야 한다. 그러므로, MP4 기술자 아톰(mp3d) 내의 모든 정보는 이것이 모든 MP4 세그먼트 아톰(smp4)을 위해 유효하다는 점에서 광역적이다. 만일 한 아톰이 MP4 기술자 아톰(mp3d) 및 MP4 세그먼트 아톰(smp4)의 무비 아톰(moov) 모두에 존재한다면, 무비 아톰(moov) 내의 그 정보가 기준 정보로 간주되는데, 그러므로, MP4 기술자 아톰(mp3d)을 덮어쓴다. MP4 기술자 아톰(mp3d)은 종래 기술에 의한 MP4 파일의 무비 아톰(moov)의 어떤 정보도 포함할 수 있다. 예를 들어, 미디어 트랙 및 사용된 코덱들의 번호에 대한 정보를 포함할 수 있다.
MP4 세그먼트 아톰(smp4)은 순차적 MP4 파일 내에 존재하는 각 메타-데이터-미디어-데이터 쌍을 캡슐화한다. MP4 세그먼트 아톰(smp4)은 무비 아톰(moov) 및 미디어 콘테이너 아톰(mdat, media container atom)을 포함한다. 각 MP4 세그먼트 아톰(smp4) 내의 무비 아톰은 동일한 MP4 세그먼트 아톰(smp4)의 미디어-데이터 아톰(mdat) 내의 미디어-데이터에 관련되는 모든 메타-데이터를 캡슐화한다. 본 발명의 바람직한 실시예에 따르면, MP4 세그먼트 아톰(smp4)은 하나 또는 그 이상의 미디어 타입의 메타-데이터 및 미디어-데이터를 포함한다. 그럼으로써, 트랙-지향 기법을 보존하고 미디어 트랙들을 용이하게 분리하는 것이 가능해진다. 파일 내의 세그먼트 및 파일-레벨 메타-데이터의 강제적인 순서가 더 이상 없다. 실용적인 목적에서, 파일-레벨 메타-데이터(mp4d)를 파일의 개시부에 배치하고, MP4 세그먼트 아톰(smp4)은 재생 순서로 배치하는 것이 바람직하다. 라이브 스트리밍을 위하여, 고속 전진 탐색, 구속 후진 탐색, 무작위 재생, 또는 다른 목적을 위하여, 파일-레벨 메타-데이터(mp4d)가 파일 내에 반복될 수 있다. 부록 1은 수정된 MP4 아톰의 더욱 상세한 목록을 제공한다.
전술된 바와 같이 예시된 파일 포맷은 상이한 방법에서 사용되는 다수의 동작을 위하여 적용될 수 있는데, 이러한 동작의 예를 들면, 스트리밍 또는 국지적 프리젠테이션에서의 콘텐트 생성 도중의 포맷 교환과 같은 동작이다. 순차적 MP4 파일은 라이브 콘텐트 다운로딩을 포함하는 순차적 다운로딩 동작에 매우 적합하다. 더 나아가, 이 파일 포맷은 프리젠테이션의 일부(세그먼트)를 구성, 편집 및 재생하는 것을 효율적으로 할 수 있게 허용하며, 그 이유는 그 부분들이 선행 세그먼트 및 후행 세그먼트로부터 독립적이기 때문이다.
순차적 다운로딩 예시는 도 6내에 예시된다. WWW 페이지는 프리젠테이션 기 술자 파일(description file)을 향한 링크를 포함한다. 파일은 동일한 콘텐트의 다양한 버전들에 대한 기술자를 포함할 수 있는데, 이러한 기술자들 각각은 예를 들어 상이한 비트율로 타게팅(targetted) 된다 클라이언트(C) 장치의 사용자는 링크를 선택하고 요청이 서버(SS)로 전달된다(61). HTTP가 사용된다면, 파일의 URI(Uniform Resource Identifier)를 포함하는 일반적인 GET 명령이 사용될 수 있다. 그 파일은 다운로드 되고(62), 클라이언트(C)는 호출되어 수신된 프리젠테이션 기술자 파일을 처리한다. 가장 적합한 프리젠테이션이 선택될 수 있다. 클라이언트(C)는 웹 서버로부터 선택된 프리젠테이션에 상응하는 파일을 요청한다(63). 요청(63)에 대한 응답으로서, 서버(SS)는 사용되는 전송 프로토콜에 따라서 그 파일의 전달(64)을 개시한다.
순차적 MP4 파일을 수신하기 시작할 때j(스트리밍 서버(SS) 또는 국지적 데이터 저장 매체로부터), 클라이언트(C)는 MP4 기술자 아톰(mp3d)을 저장한다. 적어도 2개의 MP4 세그먼트 아톰들을 재생 이전, 및 재생 동안에 독출하고, 제3 세그먼트 아톰은 버퍼링될 것이 권장된다. 그러면 끊김이 없는 재생(cut-free playback)이 가능해진다. MP4 세그먼트는 크기가 너무 커서는 안 된다. 상당히 작은 크기의 MP4 세그먼트를 생성하면 재생 동작이 더욱 신속히 개시되도록 할 수 있다. 클라이언트(C) 내의 메모리의 용량은 더욱 감소될 수 있는데, 그 이유는 기재생된 세그먼트를 유지하고 있을 필요가 더 이상 없으며, 파일-레벨 메타-데이터 파트(MP4 기술자 아톰(mp3d))만이 최후의 세그먼트가 재생될 때까지 보존되면 되기 때문이다. 또한, 재생 동작은, 파일-레벨의 메타-데이터가 이미 수신되었다면 수 신된 어떤 세그먼트로부터도 가능하고, 그러면 파일의 일부분(특정 트랙/MP4 세그먼트 아톰 smp4)만이 재생될 수 있다.
전술된 바와 같은 본 발명의 바람직한 실시예는 모든 원격 통신 시스템에서 사용될 수 있다. 하부에 존재하는 전송 계층(transmission layer)은 회선-교환 또는 패킷-교환 데이터 연결을 이용할 수 있다. 이러한 통신 네트워크의 일 예로는 3GPP(Third Generation Partnership Project)에 의하여 개발중인 3세대 이동 통신 시스템을 들 수 있다. HTTP/TCP외에, 다른 전송 계층 프로토콜 역시 사용될 수 있다. 예를 들어, WAP 모음(Wireless Application Protocol Suite)의 WTP(Wireless Transaction Protocol)이 전송 기능을 제공할 수 있다.
본 발명의 일 실시예에 따르면, 서버(SS) 및 클라이언트(C) 간의 송신 경로에서 프로토콜 변환(protocol conversion)이 수행될 필요가 있을 수 있다. 이러한 경우, 게이트웨이 장치가 멀티미디어 파일을 파싱하여 그 파일을 새로운 전송 프로토콜에 따라 재패킷화할 필요가 있을 수 있다. 예를 들어, 이러한 파싱은 TCP의 페이로드로부터 UDP의 페이로드로 변환할 때 요구된다. 파일 변환은 종래 기술에 의한 트랙-지향 또는 샘플-지향 포맷으로부터 도 5a를 참조하여 예시된 바와 같은 포맷으로 수행될 수 있다. 예를 들어, 종래 기술에 의한 MP4 파일은 도 5b에 예시된 바와 같은 세그먼트화된 MP4 파일로 변환될 수 있다. 이러한 변환은 순차적 다운로딩을 지원하도록 수정된 멀티미디어 메시징 서비스(MMS, Multimedia Messaging Service)에 필요할 수 있다. 어떤 MMS 지원 단말기들은 도 1에 예시된 바와 같은 종래 기술에 의한 MP4 버전 1에 따라서 파일을 생성할 수 있는데, 그 이유는 이 포 맷이 3GPP MMS 사양에서 선택되기 때문이다. 이러한 파일들은 순차적 다운로딩을 가능하게 하기 위하여 세그먼트화된 MP4 파일로 변환될 수 있다.
세그먼트화된 파일 포맷은 멀티미디어 콘텐트가 생성될 때에도 장점을 제공한다. 전술된 바와 같이, 세그먼트들은 상호 독립적이기 때문에, 그들은 필요한 미디어-데이터가 캡쳐 및 인코딩된 이후에 즉시 생성 및 저장될 수 있다. 장치의 메모리가 부족해지면, 이미 생성된 미디어 샘플들을 루싱(loosing)하는 대신에 기 저장된 세그먼트를 사용하는 것이 가능하다. 세그먼트들은 여전히 재생될 수 있는데, 이것은 종래 기술에 의한 MP4 생성의 경우와는 다르다. 라이브 기록에서, 세그먼트는 필요한 미디어 데이터가 캡쳐 및 인코딩된 후 즉시 업로드될 수 있다. 인코더(ENC)가 세그먼트를 구성하고 그 세그먼트를 서버(SS)로 전송하거나, 메모리 카드 또는 디스크와 같은 데이터 저장 매체에 저장한 이후에, 인코더(ENC)는 그것을 메모리로부터 삭제함으로써, 요구되는 메모리 자원의 양을 감소시킬 수 있다. 파일 구성 과정 동안에 파일-레벨 메타-데이터 파트를 보존하는 것이 필요하다. 업로딩 프로세스는 실시간으로 이루어질 수 있는데, 즉, 송신된 파일의 비트율은 업로딩을 위해 사용되는 채널의 수율(throughput)에 따라서 조절될 수 있다. 또는, 미디어 비트율은 채널 수율과는 독립적일 수도 있다. 실시간 순차적 업로딩은 예를 들면 라이브 순차적 다운로딩 시스템의 일부로서 사용될 수 있다. 순차적 업로딩은 MMS(Multimedia Messaging Service)의 후속 개정안에 사용될만한 대안이다.
본 발명의 일 실시예에 따르면, 역방향으로 호환되는(backward-compatible) 방법으로 멀티미디어 파일의 통상적인 다운로드에 기반하여 시스템을 확장하는 것 이 가능하다. 다시 말하면, 다운로드될 파일이 본 발명에 따라서 구성된다면, 순차적 다운로딩을 지원하지 않는 단말기들도 파일을 우선 다운로드한 후 오프라인으로 그 파일을 재생할 수 있다. 그러나, 다른 단말기들은 동일한 파일을 순차적으로 다운로드할 수 있다. 이러한 대안을 지원하기 위하여 서버 측에서의 수정은 필요하지 않다. 이러한 특징은 MMS(Multimedia Messaging Service)에서는 바람직하다. 만일 멀티미디어 메시지의 일부가 본 발명에 따라서 구성된다면, 그것은 통상적인 방법에 의하여 다운로드되거나 MMS 시스템내의 적합한 다른 구성 요소로부터 순차적으로 다운로드될 수 있다. 이 기술이 멀티미디어 메시지 파일이 구성되는 방법만을 수정하므로, MMS 시스템 내의 구성 요소에는 수정이 가해질 필요가 없다.
*세그먼트화 된 파일 포맷은 비디오 편집 동작 역시 단순화할 수 있다. 세그먼트들은 멀티미디어 프리젠테이션 내의 논리적 단위를 나타낸다. 이러한 논리적 단위는 예를 들어, 단일 이벤트로부터 얻어진 뉴스 플래시일 수 있다. 만일 어떤 세그먼트가 프리젠테이션 내에 삽입되거나 프리젠테이션으로부터 제거된다면, 파일-레벨 메타-데이터 내의 소수의 파라미터만이 변경되면 되는데, 그 이유는 모든 세그먼트-레벨의 메타-데이터는 그들이 상주하는 세그먼트 내에 관련되기 때문이다. 통상적인 트랙-지향 파일 포맷에서, 데이터의 삽입 또는 삭제는 방대한 양의 파라미터 값들의 재연산을 야기하는데, 이는 미디어-데이터가 재생 또는 디코딩 순서로 정렬되어 있을 경우 특히 그러하다.
본 발명은 현존하는 원격 통신 장치에 구현될 수 있다. 그들은 모두 프로세 서 및 메모리를 포함하고 있는데, 이들에 전술된 바와 같은 본 발명의 기능적 특징들이 구현될 수 있다. 프로그램 코드는 프로세서 내에서 실행될 경우, 본 발명의 특징적 기능을 제공하며, 장치 내에 내장되거나 외부 저장 장치로부터 장치로 로드될 수 있다. 또한, 상이한 하드웨어 장치들 역시 가능한데, 개별 논리적 구성 요소를 포함하는 회로 또는 하나 또는 그 이상의 주문형 반도체(ASIC, application-specific integrated circuits)의 형태로 구현될 수 있다. 이러한 기술들의 조합 역시 가능하다.
당업자에 있어서, 기술이 발전함에 따라서 본 발명의 기술적 특징이 다양한 방법으로 변형되어 구현될 수 있다는 점은 명백하다. 본 발명은 도 2에 도시된 바와 같은 시스템에 한정되는 것이 아니며, 스트리밍 방식이 아닌 응용 분야에서도 역시 이용될 수 있다. 그러므로, 본 발명 및 본 발명의 실시예는 전술된 바와 같은 예에 한정되는 것이 아니며 첨부된 청구의 범위의 기술적 범위 내에서 변화될 수 있다.
부록 1.
무비 아톰(Movie Atom, 'moov')
각 MP4 세그먼트 아톰(smp4) 내에는 정확히 하나의 무비 아톰이 존재하는데, 이것이 동일한 MP4 세그먼트 아톰의 미디어 데이터 아톰('mdat') 내부의 미디어-데이터와 관련된 모든 메타-데이터를 캡슐화할 것이다. MP4 기술자 아톰에 대하여, 무비 아톰은 공통 메타-데이터를 포함하여야 하는데, 이것은 순차적 mp4 파일의 전체 프리젠테이션을 담당한다. 그러므로, 각 mp4 세그먼트 아톰 내에서 동일한 정 보를 반복하여 전송하지 않음에 따라 효율이 증가된다.
무비 헤더 아톰(Movie Header Atom, 'mvhd)'
MP4 기술자 아톰 내의 무비 헤더 아톰은 전체 프리젠테이션을 관리하는 정보를 포함한다. 이 아톰을 위한 모든 필드 신텍스(syntax)는 동일하다. 각 mp4 세그먼트 아톰은 무비 헤더 아톰을 포함하여야 하는데, 이것은 그 세그먼트에만 관련되는 정보를 포함한다. 그러므로, 모든 필드 신택스는 mp4 세그먼트 아톰에만 관련된다(즉, 지속 시간만이 mp4 세그먼트 아톰의 지속 시간을 제공한다).
객체 기술자 아톰(Object Descriptor Atom, 'iods')
객체 기술자 아톰은 mp4 기술자 아톰 내에 존재해야 하고, 이것은 mp4 세그먼트 아톰 내에도 존재해야 한다. 만일 이것이 MP4 기술자 아톰 내에 존재하지 않는다면, 그 정보가 모든 mp4 세그먼트 아톰도 담당해야 한다. 만일 어떤 MP4 세그먼트 아톰이 객체 기술자 아톰을 가지고 있다면, 그 아톰이 MP4 기술자 아톰 내의 아톰을 대체한다. 이 아톰의 모든 필드 신텍스는 노멀 mp4 파일의 객체 기술자 아톰과 동일할 것이다.
트랙 아톰(Track Atom, 'trak')
mp4 세그먼트 아톰의 무비 아톰 내에는 하나 또는 그 이상의 트랙 아톰들이 존재할 수 있는데, 이것은 현재 세그먼트 아톰의 트랙 정보를 포함한다. 프리젠테이션 레벨의 트랙 정보가 mp4 기술자 아톰 내에도 존재해야 한다.
트랙 헤더 아톰(Track Header Atom, 'tkhd')
각 mp4 세그먼트 아톰 및 mp4 기술자 아톰은 트랙 헤더 아톰을 가져야 한다. 동일한 트랙에서, 트랙-ID는 모든 mp4 세그먼트 아톰 내 및 mp4 기술자 아톰 내에서 동일해야 한다. mp4 기술자 아톰에 대해서, 트랙 헤더 아톰은 전체 프리젠테이션을 담당하는 정보를 유지한다. mp4 세그먼트 아톰의 트랙 헤더 아톰은 현재 세그먼트 아톰에 관련되는 정보를 포함한다.
트랙 참조 아톰(Track Reference Atom, 'tref')
트랙 참조 아톰은 현재 포함된 스트림으로부터 프리젠테이션 내의 다른 스트림으로의 참조를 제공한다. 이것은 필수적인 아톰은 아니다. 편집 아톰(edit atom)이 선택적인 것에 주의한다. 이 아톰이 존재하지 않을 경우, 이러한 타임-라인의 내재적인(implicit) 1-대-1 매핑이 존재한다. 편집 목록이 존재하지 않는 경우에, 트랙의 프리젠테이션이 즉시 개시된다. 공백 편집(empty edit)이 사용되어 트랙의 개시 시간을 오프셋 한다. 전체 트랙을 위해 정확히 하나의 편집 아톰이 존재하며 이것은 mp4 기술자 아톰 내에 존재하여야 한다.
편집 목록 아톰(Edit List Atom, 'elst')
편집 목록 아톰은 외연적인(explicit) 타임라인 맵(timeline map)을 포함한다. 타임라인에 아무런 미디어도 존재하지 않을 경우 '공백' 부분을 표시하는 것이 가능하다. 미디어 내의 단일 시간점이 소정 시간 기간 동안 유지된다면 '드웰(dwell)'이라고 표현하는 것이 가능하다. 또한 노멀 매핑을 표현하는 것이 가능하다. 편집 목록은 상대 시간(샘플 표의 델타들)으로부터 절대 시간(프리젠테이션의 타임라인)으로의 매핑을 제공함으로써 '묵음(silent)' 인터벌 또는 미디어의 반복 부분을 소개하는 것이 가능하다. 편집 목록 아톰은 필수적인 아톰은 아니다. 만일 트랙에 존재한다면, mp4 기술자 아톰 내의 편집 아톰에 의하여 포함되는 편집 목록 아톰이 존재해야 한다. 이 아톰의 모든 필드 신텍스는 종래 기술에 의한 MP4 파일의 편집 목록 아톰 내에서와 같을 것이다.
미디어 아톰(Media Atom, 'mdia')
미디어 아톰 콘테이너는 스트림 내의 미디어-데이터의 정보를 선언(declare)하는 모든 객체들을 포함한다. 이것은 mp4 기술자 아톰 및 mp4 세그먼트 아톰 각각 내에 존재해야 한다.
미디어 헤더 아톰(Media Header Atom, 'mdhd')
미디어 헤더는 스트림 내의 미디어의 특성에 관련된 미디어에 독립적인 모든 정보를 선언한다. mp4 기술자 아톰 및 각 mp4 세그먼트 아톰내의 한 트랙 내의 미디어 당 정확히 하나의 미디어 헤더 아톰이 존재해야 한다. mp4 기술자 아톰을 위한 이 아톰의 모든 필드 신텍스는 종래 기술에 의한 MP4 파일의 미디어 헤더 아톰에서의 경우와 동일할 것이다. mp4 세그먼트 아톰을 위하여, 지속 시간 필드(duration field)는 세그먼트 레벨의 지속 시간 정보를 포함한다.
핸들러 참조 아톰(Handler Reference Atom, 'hdlr')
미디어 아톰 내의 핸들러 아톰은 스트림 내의 미디어-데이터가 제공될 수 있는 프로세스를 선언하고, 그럼으로써 스트림 내의 미디어의 특성을 선언한다. 예를 들어, 비디오 핸들러는 비디오 트랙을 처리할 것이다. 이 아톰은 상이한 m4 세그먼트 아톰 내에 구분된 동일한 트랙 미디어의 전체 부분에 관련된 정보를 담당하기 때문에, 이것은 mp4 기술자 아톰의 미디어 아톰 내에서만 존재하여야 하며 다른 mp4 세그먼트 아톰 내의 동일한 트랙에 대하여 유효하다고 간주된다. 이 아톰의 모든 필드 신텍스는 종래 기술에 의한 MP4 파일의 핸들러 참조 아톰(handler reference atom)에서와 동일할 것이다.
미디어 정보 아톰(Media Information Atom, 'minf')
미디어 정보 아톰은 스트림 내의 미디어의 특징 정보를 선언하는 모든 객체를 포함한다. 각 트랙 내에 정확히 하나의 미디어 정보 아톰이 존재해야 한다. 미디어 정보 헤더 아톰은 mp4 기술자 아톰 내에만 존재해야 하는데, 그 이유는 그들이 전체 mp4 파일을 담당하는 미디어 단위의 전역 정보(global information)를 포함하기 때문이다. 데이터 정보 아톰('dinf') 및 그 하부 아톰 데이터 참조 아톰(sub-atom data reference atom, 'dref')은 mp4 기술자 아톰 내에서만 존재해야 하는데, 그 이유는 그들이 전체 순차적 mp4 파일을 담당하는 미디어 단위의 전역 정보를 포함하기 때문이다.
샘플 테이블 아톰('Sample Table Atom, 'stbl')
샘플 테이블 아톰은 각 mp4 세그먼트 아톰 또는 mp4 기술자 아톰 내의 트랙의 모든 미디어 정보 아톰 내에 존재해야 한다. 샘플 테이블 아톰은 트랙 내의 미디어 샘플의 모든 시간 및 데이터 인덱싱을 포함한다. 여기서 테이블을 이용함으로써, 시간 도메인에서 샘플의 위치를 추적하고, 그들의 타입을 결정하며(예를 들어, I-프레임인지 여부), 그들의 크기를 결정하고, 콘테이너(container)를 결정하며, 그 콘테이너 내의 오프셋을 결정하는 것이 가능하다.
디코딩 타임으로부터 샘플로 변환 아톰(Decoding Time To Sample Atom, 'stts')
이 아톰은 디코딩 시간으로부터 샘플 번호로의 인덱싱을 허용하는 간략한 버전의 테이블을 포함한다. 이것은 mp4 세그먼트 아톰의 각 트랙에 필수적인 아톰이다. 이 아톰의 필드들은 현재 mp4 세그먼트 아톰 내의 미디어 샘플들을 표시하여야 한다. 그러므로, mp4 세그먼트 아톰의 각 트랙은 디코딩 타임으로부터 샘플로 변환 아톰을 포함하여 그 mp4 세그먼트 아톰 내에 존재하는 미디어 샘플의 샘플-시간 정보를 제공하여야 한다. 현존 'stts' 아톰에 의하여 참조되는 제1 샘플은 현존 mp4 세그먼트 아톰 내의 제1 샘플인 것에 주의한다. 이 아톰의 모든 필드 신텍스들은 종래 기술에 의한 MP4 파일의 디코딩 시간으로부터 샘플로 변환 아톰에서와 동일할 수 있다.
조성 타임으로부터 샘플로 변환 아톰(Composition Time To Sample Atom, 'ctts')
이 아톰은 디코딩 타임 및 조성 타임 간의 오프셋을 제공한다. 이것은 필수적인 아톰은 아니다. 이 아톰이 제1 mp4 세그먼트 아톰의 트랙 아톰 내에 존재한다면, 이 아톰은 다른 mp4 세그먼트 아톰 내의 동일한 트랙-ID를 갖는 모든 다른 트랙 내에도 존재해야 한다. 이 아톰의 필드들은 현재 mp4 세그먼트 아톰 내의 미디어 샘플들을 표시해야 한다. 이 아톰의 모든 필드 신텍스들은 종래 기술에 의한 MP4 파일의 조성 타임으로부터 샘플로 변환 아톰 내에서와 동일할 것이다.
싱크 샘플 아톰(Sync Sample Atom, 'stss')
싱크 샘플 아톰은 스트림 내의 무작위 접근 점의 간략화된 표시를 제공한다. 이것은 필수적인 아톰은 아니다. 만일 이 아톰이 제1 mp4 세그먼트 아톰의 트랙 아톰 내에 존재한다면, 이것은 다른 mp4 세그먼트 아톰 내의 동일한 트랙-ID를 가지는 모든 다른 트랙 내에도 존재해야 한다. 이 아톰의 필드는 현재 mp4 세그먼트 아톰의 미디어 샘플을 표시해야 한다. 그러므로, 샘플-번호 파라미터에 의하여 정의되는 각 싱크 샘플은 현재 mp4 세그먼트 아톰 내부의 미디어 데이터의 제1 샘플(샘플-번호=1을 가지는 샘플)을 참조하여 인덱스 되어야 한다. 예를 들면, 만일 싱크 샘플이 mp4 파일의 시작으로부터 25번째 샘플이지만, mp4 세그먼트 아톰의 4번째 샘플이라면, 이 샘플을 유지하는 mp4 세그먼트 아톰의 싱크 샘플 아톰은 4의 인덱스를 가짐으로써 이 샘플을 표시해야 한다.
샘플 기술자 아톰(Sample Description Atoms)
샘플 기술자 아톰은 사용된 코딩 타입에 대한 자세한 정보를 제공하고, 그 코딩을 위하여 요구되는 모든 초기화 정보를 제공한다. mp4 기술자 아톰의 트랙 아톰 내에는 정확히 하나의 샘플 기술자 아톰이 존재해야 하는데, 이것이 후속하는 mp4 세그먼트 아톰 내의 동일한 트랙-ID를 가지는 트랙들을 담당하는 정보를 제공할 것이다. 이 아톰의 모든 필드 신텍스들은 종래 기술에 의한 MP4 파일의 미디어 헤더 아톰 내의 신텍스와 동일할 것이다.
샘플 크기 아톰(Sample Size Atom, 'stsz')
샘플 크기 아톰은, 샘플 카운트 및 현재 트랙에 의하여 참조되는 현재 mp4 세그먼트 아톰의 미디어 내의 각 샘플의 크기를 제공하는 테이블을 포함한다. 이것은 동일한 트랙-ID에 의하여 참조되는 동일한 트랙을 위한 각 mp4 세그먼트 아톰 내에 현존하는 필수적인 아톰이다. 이 아톰 내의 정보는 현재 mp4 세그먼트 아톰 내에 존재하는 미디어 샘플 만을 표시해야 한다. 그래서, 이 아톰 내의 제1 엔트리는 현재 mp4 세그먼트의 미디어 데이터 내의 제1 미디어 샘플의 크기를 표시한다. 이 아톰의 모든 다른 필드 신텍스들은 종래 기술에 의한 MP4 파일의 샘플 크기 아톰 내에서와 동일할 것이다.
샘플로부터 청크로 변환 아톰(Sample To Chunk Atom, 'stsc')
미디어 데이터 내의 샘플들은 청크(chunks)로 그루핑 된다. 청크는 상이한 크기를 가질 수 있고 한 청크 내의 샘플들도 상이한 크기를 가질 수 있다. 이 아톰을 이용하면, 샘플, 샘플 위치, 및 그와 관련된 샘플 기술자를 포함하는 청크를 찾을 수 있다. 이것은 동일한 트랙-ID에 의하여 참조되는 동일한 트랙을 위한 각 mp4 세그먼트 아톰 내에 현존하는 필수적인 아톰이다. 이 아톰 내의 정보는 현재 mp4 세그먼트 아톰 내에 존재하는 미디어 샘플 및 청크 만을 표시해야 한다. 그래서, 제1 청크 필드는 언제나 현재 mp4 세그먼트 아톰 내의 제1 청크(인덱스=1을 가지는)에 대한 인덱스를 포함한다. 이 아톰의 모든 다른 필드 신텍스들은 종래 기술에 의한 MP4 파일의 샘플로부터 청크로 변환 아톰 내에서와 동일할 것이다.
청크 오프셋 아톰(Chunk Offset Atom, 'stco')
청크-오프셋 테이블은 각 청크의 인덱스를 포함하는 순차적 mp4 파일 내에 제공한다. 모든 인덱스 값들은 mp4 세그먼트 아톰의 시작부에서부터 시작하는 상대적인 주소이다(mp4 세그먼트 아톰 기본 주소는 0으로 선택된다). 이것은 동일한 트랙-ID에 의하여 참조되는 동일한 트랙을 위한 각 mp4 세그먼트 아톰 내에 현존하 는 필수적인 아톰이다. 이 아톰 내의 정보는 현재 mp4 세그먼트 아톰 내에 존재하는 미디어 샘플 및 청크 만을 표시해야 한다. 이 아톰의 모든 필드 신텍스는, 청크 오프셋이 이제 기본 오프셋으로 mp4 세그먼트 아톰의 시작부를 택한다는 점을 제외하고는 노멀 mp4 파일의 청크 오프셋 아톰과 동일할 것이다.
새도우 싱크 샘플 아톰(Shadow Sync Sample Atom, 'stsh')
새도우 싱크 샘플 아톰 테이블은 탐색 과정에 사용될 수 있거나 동일한 목적으로 사용될 수 있는 싱크 샘플들의 선택적 집합을 제공한다. 노멀 정방향 재생 시에는 이들은 무시된다. 이 아톰은 필수적인 것이 아니다. 이 아톰은 모든 mp4 세그먼트 아톰 내에 존재해야 하는 것은 아니다. 필드 새도우-샘플-번호 및 싱크-샘플-번호 내에 존재하는 모든 샘플 인덱스들은 콘테이너 mp4 세그먼트 아톰 내에 존재하는 트랙의 제1 미디어 샘플을 참조한다. 이 아톰의 모든 다른 필드 신텍스들은 종래 기술에 의한 MP4 파일의 새도우 싱크 샘플 아톰의 경우와 동일할 것이다.
빈 공간 아톰(Free Space Atom, 'free' or 'skip')
빈 공간 아톰의 콘텐트는 관련이 없으며 무시될 수 있다. 이것은 필수적이지 않으며 순차적 mp4 파일 내의 아무 위치에나 존재할 수 있다. 이 아톰의 모든 필드 신텍스들은 종래 기술에 의한 MP4 파일 mp4 파일의 빈 공간 아톰에서의 경우와 동일할 것이다.
본 발명은 멀티미디어 파일을 파일의 모든 미디어 샘플들에 공통되는 파일- 레벨(file-level)의 메타-데이터를 위한 적어도 일 부분 및 복수 개의 미디어 샘플들의 미디어-데이터 및 상기 미디어 샘플들의 메타-데이터를 포함하는 독립적 세그먼트를 포함하도록 구성함으로써 멀티미디어 파일의 구성 및 재생 분야에 사용될 수 있다.

Claims (21)

  1. 메타-데이터(meta-data) 및 미디어-데이터(media-data)를 포함하는 멀티미디어 파일을 구성하기 위한 방법에 있어서,
    상기 멀티미디어 파일이, 상기 파일의 모든 미디어 샘플들에 공통되는 파일-레벨(file-level)의 메타-데이터를 위한 적어도 일 부분 및 복수 개의 미디어 샘플들의 미디어-데이터 및 동기화 샘플들의 선택적 세트 제공을 가능케 하는 상기 미디어 샘플들의 메타-데이터를 포함하는 독립적 세그먼트를 포함하도록 상기 멀티미디어 파일을 구성하는 것을 특징으로 하는 멀티미디어 파일을 구성하기 위한 방법.
  2. 멀티미디어 파일을 파싱(parsing)하기 위한 방법에 있어서,
    상기 멀티미디어 파일은, 상기 파일의 모든 미디어 샘플들에 공통되는 파일-레벨(file-level)의 메타-데이터를 위한 적어도 일 부분 및 복수 개의 미디어 샘플들의 미디어-데이터 및 상기 미디어 샘플들의 메타-데이터를 포함하는 독립적 세그먼트를 포함하며,
    각각의 독립적 세그먼트는 상기 파일-레벨의 메타-데이터를 이용하여 하나씩 파싱되고, 그리고
    상기 미디어 샘플들의 상기 메타데이터에서 제공되는 동기화 샘플의 선택적 세트가 사용되는 것을 특징으로 하는 멀티미디어 파일을 파싱하기 위한 방법.
  3. 제1항 또는 제2항에 있어서, 상기 멀티미디어 파일은,
    TCP(전송 제어 프로토콜, Transport Control Protocol)와 같은 신뢰성 있는 전송 프로토콜을 이용하여 스트리밍 서버(streaming server)로부터 스트리밍 클라이언트(streaming client)로 순차적으로(progressively) 다운로드되며,
    상기 클라이언트는, 파싱 및 디멀티플렉싱 이후에 트랙들을 압축해제(decompress)하고, 압축해제된 트랙들을 재생하는 것을 특징으로 하는 방법.
  4. 제 2 항에 있어서, 상기 파일의 모든 미디어 샘플들에 공통되는 파일-레벨(file-level)의 메타-데이터는 상기 파일의 마지막 세그먼트가 파싱될 때까지 유지되고 세그먼트는 상기 마지막 세그먼트가 플레이 된 이후 삭제되는 것을 특징으로 하는 방법.
  5. 멀티미디어 스트리밍 시스템으로서, 스트리밍을 위해 멀티미디어 파일들을 구성하도록 구현되는 제1 장치 및 스트리밍 파일들을 수신하고 상기 스트리밍 파일들을 이용하도록 구현된 제2 장치를 포함하는 멀티미디어 스트리밍 시스템에 있어서,
    상기 제1 장치는, 상기 멀티미디어 파일이, 상기 파일의 모든 미디어 샘플들에 공통되는 파일-레벨(file-level)의 메타-데이터를 위한 적어도 일 부분 및 복수 개의 미디어 샘플들의 미디어-데이터 및 상기 미디어 샘플들의 메타-데이터를 포함하는 독립적 세그먼트를 포함하도록 상기 멀티미디어 파일을 구성하고,
    상기 시스템은, 상기 제1 장치로부터 상기 제2 장치로 상기 멀티미디어 파일을 전달하도록 구현되며,
    상기 제2 장치는, 상기 파일-레벨의 메타-데이터를 이용하여 독립적 세그먼트 각각을 하나씩 파싱하도록 구현되는 것을 특징으로 하는 멀티미디어 스트리밍 시스템.
  6. 제 5 항에 있어서,
    상기 제1 장치는, 상기 멀티미디어 파일을 스트리밍 서버로 전송하도록 구현되고,
    상기 스트리밍 서버는 상기 멀티미디어 파일을 상기 제2 장치로 전송하고 상기 미디어 샘플들의 상기 메타 데이터는 동기화 샘플들의 선택적 세트 제공을 가능케 하도록 구현되는 것을 특징으로 하는 멀티미디어 스트리밍 시스템.
  7. 데이터 처리 장치에 있어서,
    멀티미디어 파일이, 상기 파일의 모든 미디어 샘플들에 공통되는 파일-레벨(file-level)의 메타-데이터를 위한 적어도 일 부분 및 복수 개의 미디어 샘플들의 미디어-데이터 및 동기화 샘플들의 선택적 세트 제공을 가능케 하는 상기 미디어 샘플들의 메타-데이터를 포함하는 독립적 세그먼트를 포함하도록 상기 멀티미디어 파일을 구성하기 위한 수단을 포함하는 것을 특징으로 하는 데이터 처리 장치.
  8. 데이터 처리 장치에 있어서,
    멀티미디어 파일의 모든 미디어 샘플들에 공통되는 파일-레벨(file-level)의 메타-데이터를 위한 적어도 일 부분 및 복수 개의 미디어 샘플들의 미디어-데이터 및 상기 미디어 샘플들의 메타-데이터를 포함하는 독립적 세그먼트를 포함하는 상기 멀티미디어 파일을 수신하기 위한 수단,
    상기 파일-레벨의 메타-데이터를 이용하여 독립적 세그먼트 각각을 하나씩 파싱하기 위한 수단, 및
    상기 미디어 샘플들의 상기 메타데이터 내에 제공된 동기화 샘플들의 선택적 세트를 이용하는 수단을 포함하는 것을 특징으로 하는 데이터 처리 장치.
  9. 제8항에 있어서, 상기 장치는,
    멀티미디어 파일들의 순차적 다운로드를 제공하는 서버를 위한 클라이언트 또는 게이트웨이 장치(gateway apparatus)인 것을 특징으로 하는 데이터 처리 장치.
  10. 제 9 항에 있어서, 상기 데이터 처리 장치는 상기 멀티미디어 파일들의 순차적 다운로딩을 제공하는 서버를 위한 클라이언트인 것을 특징으로 하는 데이터 처리 장치이고,
    상기 데이터 프로세싱 장치는 상기 파일의 마지막 세그먼트가 파싱될 때까지 상기 파일의 모든 미디어 샘플들에 공통된 상기 파일-레벨의 메타데이터를 유지하 도록 구현되며, 그리고
    상기 데이터 프로세싱 장치는 상기 마지막 세그먼트를 플레이한 이후 세그먼트를 삭제할 수 있도록 구현되는 것을 특징으로 하는 데이터 처리 장치.
  11. 제 8 항에 있어서, 상기 멀티미디어 파일은 상기 파일 및 독립된 세그먼트 아톰들 또는 박스들의 모든 미디어 샘플들에 공통된 파일-레벨의 메타-데이터를 위한 적어도 하나의 기술자 아톰 또는 박스를 포함하고, 상기 독립된 세그먼트 아톰들 또는 박스들은 복수의 미디어 샘플들의 미디어 데이터를 위한 미디어 컨테이너 아톰 또는 박스 및 상기 미디어 샘플들의 메타 데이터를 위한 무비(movie) 아톰 또는 박수를 포함하는 것을 특징으로 하는 데이터 처리 장치.
  12. 컴퓨터 프로그램 상품을 저장하는 컴퓨터 판독형 매체로서, 상기 컴퓨터 프로그램 상품은 상기 컴퓨터에서 수행시 컴퓨터가 청구항 1항의 각 단계를 수행하도록하는 컴퓨터 판독형 코드를 포함하는 것을 특징으로 하는 컴퓨터 판독형 매체.
  13. 컴퓨터 프로그램 상품을 저장하는 컴퓨터 판독형 매체로서, 상기 컴퓨터 프로그램 상품은 상기 컴퓨터에서 수행시 컴퓨터가 청구항 2항의 각 단계를 수행하도록하는 컴퓨터 판독형 코드를 포함하는 것을 특징으로 하는 컴퓨터 판독형 매체.
  14. 메타-데이터 및 상기 멀티미디어 파일은 미디어 데이터를 포함하고
    상기 파일의 모든 미디어 샘플들에 공통되는 파일-레벨(file-level)의 메타-데이터를 위한 적어도 일 부분 및 복수 개의 미디어 샘플들의 미디어-데이터 및 상기 미디어 샘플들의 메타-데이터를 포함하는 독립적 세그먼트를 포함하며, 상기 미디어 샘플들의 상기 메타 데이터는 상기 파일-레벨 메타데이터내에 신택스 구조와 동일한 구조를 지니도록 상기 멀티미디어 파일을 구성하는 것을 특징으로 하는 멀티미디어 파일을 구성 방법.
  15. 상기 파일의 모든 미디어 샘플들에 공통되는 파일-레벨(file-level)의 메타-데이터를 위한 적어도 일 부분 및 복수 개의 미디어 샘플들의 미디어-데이터 및 상기 미디어 샘플들의 메타-데이터를 포함하는 독립적 세그먼트를 포함하며, 상기 미디어 샘플들의 상기 메타 데이터는 상기 파일-레벨 메타데이터내에 신택스 구조와 동일한 구조를 지니도록 상기 멀티미디어 파일을 구성하는 수단을 포함하는 것을 특징으로 하는 데이터 프로세싱 장치.
  16. 제 15 항에 있어서, 상기 파일이 상기 파일-레벨의 메타데이터를 위한 무비 아톰 또는 박스 및 상기 미디어 샘플들의 메터 데이터를 위한 무비 아톰 또는 박스를 포함하도록 멀티미디어 파일을 구성하도록 구현되는 것을 특징으로 하는 데이터 프로세싱 장치.
  17. 멀티미디어 파일의 모든 미디어 샘플들에 공통되는 파일-레벨의 메타-데이터 를 위한 적어도 일 부분 및 복수 개의 미디어 샘플들의 미디어-데이터 및 상기 미디어 샘플들의 메타-데이터를 포함하는 독립적 세그먼트를 포함하는 상기 멀티미디어 파일을 수신하기 위한 수단,
    상기 파일-레벨의 메타-데이터를 이용하여 독립적 세그먼트 각각을 하나씩 파싱하기 위한 수단으로서, 상기 미디어 샘플들의 메타 데이터는 상기 파일-레벨의 메타데이터 내의 신택스 구조와 동일한 구조를 지니는 파싱 수단을 포함하는 것을 특징으로 하는 데이터 프로세싱 장치.
  18. 제 17 항에 있어서,
    상기 데이터 프로세싱 장치는 멀티미디어 파일들의 순차 다운로드를 지원하는 서버의 클라이언트이고,
    상기 데이터 프로세싱 장치는 파싱 이후 상기 트랙들을 압축해제하며,
    상기 데이터 프로세싱 장치는 상기 압축 해제된 트랙들을 플레이하도록 구현되는 것을 특징으로 하는 데이터 프로세싱 장치.
  19. 제 18 항에 있어서, 상기 데이터 프로세싱 장치는 상기 파일의 마지막 세그먼트가 파싱될 때까지 상기 파일의 모든 미디어 샘플들에 공통된 상기 파일-레벨의 메타 데이터를 유지하고
    상기 데이터 처리 장치는 상기 마지막 세그먼트를 플레이한 이후에 세그먼트를 삭제할 수 있도록 구현되는 것을 특징으로 하는 데이터 프로세싱 장치.
  20. 제 17 항에 있어서, 상기 파일은 상기 파일-레벨 메타데이터를 위한 무비 아톰 또는 박수 및 상기 미디어 샘플들의 메타 데이터를 위한 무비 아톰 또는 박스를 포함하는 것을 특징으로 하는 데이터 프로세싱 장치.
  21. 컴퓨터 프로그램 상품을 저장하는 컴퓨터 판독형 매체로서, 상기 컴퓨터 프로그램 상품은 상기 컴퓨터 내에서 수행될 때, 상기 파일의 모든 미디어 샘플들에 공통되는 파일-레벨(file-level)의 메타-데이터를 위한 적어도 일 부분 및 복수 개의 미디어 샘플들의 미디어-데이터 및 상기 미디어 샘플들의 메타-데이터를 포함하는 독립적 세그먼트를 포함하는 멀티미더어 파일을 수신하도록 구현시키고, 그리고
    상기 미디어 샘플들의 상기 메터 데이터는 상기 파일-레벨 메타데이터 내의 신택스 구조와 동일한 구조를 지니며, 상기 파일-레벨의 메타 데이터를 이용하여 독립된 세그먼트 각각을 하나씩 파싱하는 컴퓨터 판독형 코드를 포함하는 것을 특징으로 하는 컴퓨터 판독형 매체.
KR1020067020470A 2001-09-24 2002-09-19 메타-데이터 및 미디어-데이터를 포함하는 멀티미디어파일의 스트리밍 KR20060111904A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FI20011871A FI20011871A (fi) 2001-09-24 2001-09-24 Multimediadatan prosessointi
FI20011871 2001-09-24

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR10-2004-7004200A Division KR20040041174A (ko) 2001-09-24 2002-09-19 메타-데이터 및 미디어-데이터를 포함하는 멀티미디어파일의 스트리밍

Publications (1)

Publication Number Publication Date
KR20060111904A true KR20060111904A (ko) 2006-10-30

Family

ID=8561943

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020067020470A KR20060111904A (ko) 2001-09-24 2002-09-19 메타-데이터 및 미디어-데이터를 포함하는 멀티미디어파일의 스트리밍
KR10-2004-7004200A KR20040041174A (ko) 2001-09-24 2002-09-19 메타-데이터 및 미디어-데이터를 포함하는 멀티미디어파일의 스트리밍

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR10-2004-7004200A KR20040041174A (ko) 2001-09-24 2002-09-19 메타-데이터 및 미디어-데이터를 포함하는 멀티미디어파일의 스트리밍

Country Status (10)

Country Link
US (1) US20030061369A1 (ko)
EP (1) EP1430646A1 (ko)
JP (1) JP2005504480A (ko)
KR (2) KR20060111904A (ko)
CN (1) CN1559119A (ko)
BR (1) BR0212597A (ko)
CA (1) CA2460004A1 (ko)
FI (1) FI20011871A (ko)
WO (1) WO2003028293A1 (ko)
ZA (1) ZA200402254B (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012099400A3 (en) * 2011-01-18 2012-12-06 Samsung Electronics Co., Ltd. Apparatus and method for storing and playing content in a multimedia streaming system
KR101242472B1 (ko) * 2008-07-16 2013-03-12 노키아 코포레이션 트랙 및 트랙 서브세트의 그룹화를 위한 방법 및 장치

Families Citing this family (150)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003173625A (ja) * 2001-12-04 2003-06-20 Hitachi Ltd ファイル変換方法、ファイル変換装置、及びファイル生成装置
US7158508B2 (en) * 2001-12-21 2007-01-02 Lucent Technologies Inc. Setting up calls over circuit and packet-switched resources on a network
US7251277B2 (en) * 2002-12-04 2007-07-31 International Business Machines Corporation Efficient means for creating MPEG-4 textual representation from MPEG-4 intermedia format
JP2004200946A (ja) * 2002-12-18 2004-07-15 Nec Corp 放送配信システム
AU2003900137A0 (en) * 2003-01-14 2003-01-30 Canon Kabushiki Kaisha Process and format for reliable storage of data
JP3937223B2 (ja) * 2003-01-21 2007-06-27 ソニー株式会社 記録装置、再生装置、記録方法及び再生方法
US7246356B1 (en) 2003-01-29 2007-07-17 Adobe Systems Incorporated Method and system for facilitating comunications between an interactive multimedia client and an interactive multimedia communication server
US7617278B1 (en) 2003-01-29 2009-11-10 Adobe Systems Incorporated Client controllable server-side playlists
US7272658B1 (en) 2003-02-13 2007-09-18 Adobe Systems Incorporated Real-time priority-based media communication
US6938047B2 (en) * 2003-02-19 2005-08-30 Maui X-Stream, Inc. Methods, data structures, and systems for processing media data streams
US7496676B2 (en) * 2003-02-19 2009-02-24 Maui X-Stream, Inc. Methods, data structures, and systems for processing media data streams
US7287256B1 (en) 2003-03-28 2007-10-23 Adobe Systems Incorporated Shared persistent objects
US20050266884A1 (en) * 2003-04-22 2005-12-01 Voice Genesis, Inc. Methods and systems for conducting remote communications
BRPI0409618A (pt) * 2003-04-22 2006-04-18 Voice Genesis Inc sistema de transmissão de mensagem de multimìdia para usuários finais de remetente e recebedor, e, método para interconectar vários dispositivos de comunicação
KR100511308B1 (ko) * 2003-04-29 2005-08-31 엘지전자 주식회사 휴대 단말기에서 스마일 문서의 ｚ-인덱스 처리방법
US8230094B1 (en) * 2003-04-29 2012-07-24 Aol Inc. Media file format, system, and method
JP3969656B2 (ja) * 2003-05-12 2007-09-05 ソニー株式会社 情報処理装置および方法、プログラム記録媒体、並びにプログラム
KR100492567B1 (ko) * 2003-05-13 2005-06-03 엘지전자 주식회사 이동통신 시스템의 ｈｔｔｐ 기반 비디오 스트리밍 장치및 방법
US7177872B2 (en) 2003-06-23 2007-02-13 Sony Corporation Interface for media publishing
US7177881B2 (en) * 2003-06-23 2007-02-13 Sony Corporation Network media channels
US7483532B2 (en) * 2003-07-03 2009-01-27 Microsoft Corporation RTP payload format
KR100651566B1 (ko) * 2003-08-26 2006-11-28 삼성전자주식회사 이동통신 단말기에서 출력 버퍼링을 이용한 멀티미디어재생 장치 및 그 제어 방법
KR100608715B1 (ko) 2003-09-27 2006-08-04 엘지전자 주식회사 ＱｏＳ보장형 멀티미디어 스트리밍 서비스 시스템 및 방법
SE0302778D0 (sv) * 2003-10-17 2003-10-17 Ericsson Telefon Ab L M Container format for multimedia presentations
US7979886B2 (en) * 2003-10-17 2011-07-12 Telefonaktiebolaget Lm Ericsson (Publ) Container format for multimedia presentations
US20050102371A1 (en) * 2003-11-07 2005-05-12 Emre Aksu Streaming from a server to a client
DE10353564A1 (de) * 2003-11-14 2005-06-16 Deutsche Thomson-Brandt Gmbh Verfahren zur abschnittsweisen, diskontinuierlichen Übertragung von Daten in einem Netzwerk verteilter Stationen sowie Netzwerkteilnehmerstation als Anforderungsgerät bei der Durchführung eines solchen Verfahrens als auch Netzwerkteilnehmerstation als Quellgerät bei der Durchführung eines solchen Verfahrens
US8472792B2 (en) 2003-12-08 2013-06-25 Divx, Llc Multimedia distribution system
US7519274B2 (en) 2003-12-08 2009-04-14 Divx, Inc. File format for multiple track digital data
US7818658B2 (en) * 2003-12-09 2010-10-19 Yi-Chih Chen Multimedia presentation system
CN1938700A (zh) * 2004-03-10 2007-03-28 诺基亚公司 内容位置信息的存储
US20050207569A1 (en) * 2004-03-16 2005-09-22 Exavio, Inc Methods and apparatus for preparing data for encrypted transmission
US7818444B2 (en) 2004-04-30 2010-10-19 Move Networks, Inc. Apparatus, system, and method for multi-bitrate content streaming
US7525578B1 (en) * 2004-08-26 2009-04-28 Sprint Spectrum L.P. Dual-location tagging of digital image files
KR100729224B1 (ko) * 2004-10-13 2007-06-19 한국전자통신연구원 확장된 멀티미디어 파일 구조, 멀티미디어 파일 생성 방법및 멀티미디어 파일 실행 방법
US7885921B2 (en) 2004-11-18 2011-02-08 International Business Machines Corporation Managing atomic updates on metadata tracks in a storage system
US8856467B2 (en) 2004-11-18 2014-10-07 International Business Machines Corporation Management of metadata in a storage subsystem
US8676748B2 (en) 2004-11-18 2014-03-18 International Business Machines Corporation Clearing metadata tracks in a storage system
FI20041689A0 (fi) * 2004-12-30 2004-12-30 Nokia Corp Mediavirran merkintä ja/tai jakaminen solukkoverkon päätteessä
WO2006079368A1 (en) * 2005-01-25 2006-08-03 Nero Ag Method for preparing dvd-video formatted data, method for reconstructing dvd-video data and dvd-video data structure
ES2745045T3 (es) 2005-04-22 2020-02-27 Audinate Pty Ltd Red, dispositivo y método para transportar medios digitales
US20060259781A1 (en) * 2005-04-29 2006-11-16 Sony Corporation/Sony Electronics Inc. Method and apparatus for detecting the falsification of metadata
JP4385996B2 (ja) 2005-05-23 2009-12-16 ソニー株式会社 コンテンツ表示再生システム、コンテンツ表示再生方法、コンテンツ表示再生プログラムを記録した記録媒体及び操作制御装置
US7684566B2 (en) 2005-05-27 2010-03-23 Microsoft Corporation Encryption scheme for streamed multimedia content protected by rights management system
US8321690B2 (en) 2005-08-11 2012-11-27 Microsoft Corporation Protecting digital media of various content types
US7634816B2 (en) 2005-08-11 2009-12-15 Microsoft Corporation Revocation information management
US7720096B2 (en) 2005-10-13 2010-05-18 Microsoft Corporation RTP payload format for VC-1
US7945615B1 (en) 2005-10-31 2011-05-17 Adobe Systems Incorporated Distributed shared persistent objects
US8161159B1 (en) 2005-10-31 2012-04-17 Adobe Systems Incorporated Network configuration with smart edge servers
US8788933B2 (en) * 2005-12-01 2014-07-22 Nokia Corporation Time-shifted presentation of media streams
EP1955193A4 (en) * 2005-12-02 2011-02-23 Thomson Licensing SYSTEM AND METHOD FOR WORKFLOW METADATA
US9294728B2 (en) 2006-01-10 2016-03-22 Imagine Communications Corp. System and method for routing content
EP1999883A4 (en) 2006-03-14 2013-03-06 Divx Llc FEDERATED DIGITAL RIGHTS MANAGEMENT SYSTEM COMPRISING CONFIDENCE SYSTEMS
US20070223875A1 (en) * 2006-03-21 2007-09-27 Tsung-Ning Chung Storage device and method of accessing storage device
GB2440581B (en) * 2006-08-04 2011-07-13 Siemens Ag A method of transferring data to a mobile device
KR100768048B1 (ko) * 2006-08-21 2007-10-17 형용준 동영상 서비스 제공방법 및 그 시스템
US8180920B2 (en) * 2006-10-13 2012-05-15 Rgb Networks, Inc. System and method for processing content
EP4213033A1 (en) 2007-01-05 2023-07-19 DivX, LLC Video distribution system including progressive playback
US20080168516A1 (en) * 2007-01-08 2008-07-10 Christopher Lance Flick Facilitating Random Access In Streaming Content
US20080256431A1 (en) * 2007-04-13 2008-10-16 Arno Hornberger Apparatus and Method for Generating a Data File or for Reading a Data File
KR100899140B1 (ko) * 2007-05-31 2009-05-27 노키아 코포레이션 서버로부터 이동 단말기 장치로 특정적으로 코딩된 액세스객체들을 재발송하기 위한 방법 및 장치
US8489702B2 (en) 2007-06-22 2013-07-16 Apple Inc. Determining playability of media files with minimal downloading
US8627509B2 (en) 2007-07-02 2014-01-07 Rgb Networks, Inc. System and method for monitoring content
KR20090017170A (ko) * 2007-08-14 2009-02-18 삼성전자주식회사 미디어 파일 관리 방법 및 장치
KR101143670B1 (ko) * 2007-08-20 2012-05-09 노키아 코포레이션 스트리밍된 데이터의 조직화 방법, 컴퓨터 판독가능한 저장 매체, 수신기 및 장치
JP5061797B2 (ja) * 2007-08-31 2012-10-31 ソニー株式会社 伝送システムおよび方法、伝送装置および方法、受信装置および方法、プログラム、並びに記録媒体
US7961878B2 (en) 2007-10-15 2011-06-14 Adobe Systems Incorporated Imparting cryptographic information in network communications
KR20100106327A (ko) 2007-11-16 2010-10-01 디브이엑스, 인크. 멀티미디어 파일을 위한 계층적 및 감소된 인덱스 구조
WO2009114111A2 (en) * 2008-03-12 2009-09-17 Packetvideo Corp. System and method for reformatting digital broadcast multimedia for a mobile device
US8019737B2 (en) 2008-03-13 2011-09-13 Harris Corporation Synchronization of metadata
US7921114B2 (en) * 2008-04-10 2011-04-05 Microsoft Corporation Capturing and combining media data and geodata in a composite file
WO2009127961A1 (en) * 2008-04-16 2009-10-22 Nokia Corporation Decoding order recovery in session multiplexing
EP2150059A1 (en) * 2008-07-31 2010-02-03 Vodtec BVBA A method and associated device for generating video
WO2010030569A2 (en) * 2008-09-09 2010-03-18 Dilithium Networks, Inc. Method and apparatus for transmitting video
US9473812B2 (en) * 2008-09-10 2016-10-18 Imagine Communications Corp. System and method for delivering content
US9247276B2 (en) 2008-10-14 2016-01-26 Imagine Communications Corp. System and method for progressive delivery of media content
US8051287B2 (en) * 2008-10-15 2011-11-01 Adobe Systems Incorporated Imparting real-time priority-based network communications in an encrypted communication session
TWI392309B (zh) * 2008-12-11 2013-04-01 Ind Tech Res Inst 接合多媒體串流於通訊網路的裝置與方法
KR20100078700A (ko) * 2008-12-30 2010-07-08 삼성전자주식회사 파일 전송 방법 및 그를 수행하는 단말기
KR101635876B1 (ko) 2009-01-07 2016-07-04 쏘닉 아이피, 아이엔씨. 온라인 콘텐츠를 위한 미디어 가이드의 단일, 공동 및 자동 생성
CN102301679A (zh) 2009-01-20 2011-12-28 Rgb网络有限公司 用于拼接媒体文件的系统和方法
US8782267B2 (en) 2009-05-29 2014-07-15 Comcast Cable Communications, Llc Methods, systems, devices, and computer-readable media for delivering additional content using a multicast streaming
US8205004B1 (en) 2009-06-26 2012-06-19 Adobe Systems Incorporated Multi-bit-rate streaming delivery
US9680892B2 (en) 2009-06-26 2017-06-13 Adobe Systems Incorporated Providing integration of multi-bit-rate media streams
US8166191B1 (en) 2009-08-17 2012-04-24 Adobe Systems Incorporated Hint based media content streaming
US8412841B1 (en) 2009-08-17 2013-04-02 Adobe Systems Incorporated Media content streaming using stream message fragments
US9681464B2 (en) * 2009-09-18 2017-06-13 Industrial Technology Research Institute Cooperative transmission within heterogeneous stations
US8914835B2 (en) * 2009-10-28 2014-12-16 Qualcomm Incorporated Streaming encoded video data
KR20110047768A (ko) 2009-10-30 2011-05-09 삼성전자주식회사 멀티미디어 컨텐츠 재생 장치 및 방법
KR101786051B1 (ko) 2009-11-13 2017-10-16 삼성전자 주식회사 데이터 제공 방법 및 장치와 데이터 수신 방법 및 장치
KR101750049B1 (ko) 2009-11-13 2017-06-22 삼성전자주식회사 적응적인 스트리밍 방법 및 장치
KR101750048B1 (ko) 2009-11-13 2017-07-03 삼성전자주식회사 변속 재생 서비스 제공 방법 및 장치
KR101777347B1 (ko) 2009-11-13 2017-09-11 삼성전자주식회사 부분화에 기초한 적응적인 스트리밍 방법 및 장치
EP2507995A4 (en) 2009-12-04 2014-07-09 Sonic Ip Inc SYSTEMS AND METHODS FOR TRANSPORTING ELEMENTARY BIT TRAIN CRYPTOGRAPHIC MATERIAL
KR101737084B1 (ko) 2009-12-07 2017-05-17 삼성전자주식회사 메인 콘텐트에 다른 콘텐트를 삽입하여 스트리밍하는 방법 및 장치
KR101105365B1 (ko) 2010-02-11 2012-01-16 한국과학기술연구원 미디어 관리 시스템 및 방법
KR101777348B1 (ko) 2010-02-23 2017-09-11 삼성전자주식회사 데이터 전송 방법 및 장치와 데이터 수신 방법 및 장치
WO2011108908A2 (en) 2010-03-05 2011-09-09 Samsung Electronics Co., Ltd. Method and apparatus for transmitting and receiving a content file including multiple streams
KR20110105710A (ko) * 2010-03-19 2011-09-27 삼성전자주식회사 복수의 챕터를 포함하는 콘텐트를 적응적으로 스트리밍하는 방법 및 장치
WO2011132937A2 (en) 2010-04-20 2011-10-27 Samsung Electronics Co., Ltd. Interface apparatus and method for transmitting and receiving media data
US9276986B2 (en) * 2010-04-27 2016-03-01 Nokia Technologies Oy Systems, methods, and apparatuses for facilitating remote data processing
KR101007645B1 (ko) * 2010-06-01 2011-01-13 주식회사 넥스토디아이 인덱싱 기능을 갖는 데이터 저장 장치 및 인덱싱 방법
KR101837687B1 (ko) 2010-06-04 2018-03-12 삼성전자주식회사 콘텐트의 품질을 결정하는 복수의 인자에 기초한 적응적인 스트리밍 방법 및 장치
US9596522B2 (en) * 2010-06-04 2017-03-14 Mobitv, Inc. Fragmented file structure for live media stream delivery
US20110299586A1 (en) * 2010-06-04 2011-12-08 Mobitv, Inc. Quality adjustment using a fragmented media stream
JP2013534101A (ja) * 2010-06-14 2013-08-29 トムソン ライセンシング 符号化マルチコンポーネント・ビデオをカプセル化する方法および装置
WO2012037671A1 (en) * 2010-09-01 2012-03-29 Jigsee Inc. Systems and methods for client-side media chunking
WO2012041216A1 (zh) * 2010-09-30 2012-04-05 北京联想软件有限公司 便携式电子设备、内容发布方法和提示方法
US8914534B2 (en) 2011-01-05 2014-12-16 Sonic Ip, Inc. Systems and methods for adaptive bitrate streaming of media stored in matroska container files using hypertext transfer protocol
CN102611716B (zh) * 2011-01-19 2015-05-06 华为技术有限公司 一种传输媒体文件的方法、装置及系统
US9275254B2 (en) * 2011-03-22 2016-03-01 Fmr Llc Augmented reality system for public and private seminars
WO2012148388A1 (en) * 2011-04-26 2012-11-01 Research In Motion Limited Representation grouping for http streaming
US8503985B1 (en) * 2011-06-24 2013-08-06 Decho Corporation Real-time remote storage
KR101285654B1 (ko) * 2011-07-06 2013-08-14 주식회사 씬멀티미디어 메타 데이터와 미디어 데이터가 분리되어 있는 파일 형식의 멀티미디어 컨텐츠를 프로그래시브 다운로드하기 위한 실시간 트랜스코딩 장치
US9467708B2 (en) 2011-08-30 2016-10-11 Sonic Ip, Inc. Selection of resolutions for seamless resolution switching of multimedia content
US8787570B2 (en) 2011-08-31 2014-07-22 Sonic Ip, Inc. Systems and methods for automatically genenrating top level index files
US8964977B2 (en) 2011-09-01 2015-02-24 Sonic Ip, Inc. Systems and methods for saving encoded media streamed using adaptive bitrate streaming
US8909922B2 (en) 2011-09-01 2014-12-09 Sonic Ip, Inc. Systems and methods for playing back alternative streams of protected content protected using common cryptographic information
US10136165B2 (en) * 2011-09-14 2018-11-20 Mobitv, Inc. Distributed scalable encoder resources for live streams
CN102565851A (zh) * 2011-12-16 2012-07-11 中国石油集团川庆钻探工程有限公司地球物理勘探公司 地震资料数据的存储方法
US8488943B1 (en) * 2012-01-31 2013-07-16 Google Inc. Trimming media content without transcoding
US8768003B2 (en) * 2012-03-26 2014-07-01 The Nielsen Company (Us), Llc Media monitoring using multiple types of signatures
CN102665109A (zh) * 2012-04-19 2012-09-12 中兴通讯股份有限公司 一种多媒体视频数据的发送、接收方法及对应装置
KR20130118820A (ko) * 2012-04-20 2013-10-30 삼성전자주식회사 증강현실 서비스를 위한 미디어 파일의 제공 방법 및 장치
US9191457B2 (en) 2012-12-31 2015-11-17 Sonic Ip, Inc. Systems, methods, and media for controlling delivery of content
US9313510B2 (en) 2012-12-31 2016-04-12 Sonic Ip, Inc. Use of objective quality measures of streamed content to reduce streaming bandwidth
US9906785B2 (en) 2013-03-15 2018-02-27 Sonic Ip, Inc. Systems, methods, and media for transcoding video data according to encoding parameters indicated by received metadata
US10397292B2 (en) 2013-03-15 2019-08-27 Divx, Llc Systems, methods, and media for delivery of content
US9075960B2 (en) * 2013-03-15 2015-07-07 Now Technologies (Ip) Limited Digital media content management apparatus and method
US9344517B2 (en) 2013-03-28 2016-05-17 Sonic Ip, Inc. Downloading and adaptive streaming of multimedia content to a device with cache assist
US9247317B2 (en) 2013-05-30 2016-01-26 Sonic Ip, Inc. Content streaming with client device trick play index
US9094737B2 (en) 2013-05-30 2015-07-28 Sonic Ip, Inc. Network video streaming with trick play based on separate trick play files
US9967305B2 (en) 2013-06-28 2018-05-08 Divx, Llc Systems, methods, and media for streaming media content
US9343112B2 (en) 2013-10-31 2016-05-17 Sonic Ip, Inc. Systems and methods for supplementing content from a server
JP2014131307A (ja) * 2014-02-06 2014-07-10 Sony Corp 情報処理装置、情報処理方法およびプログラム
US9866878B2 (en) 2014-04-05 2018-01-09 Sonic Ip, Inc. Systems and methods for encoding and playing back video at different frame rates using enhancement layers
WO2015183234A1 (en) * 2014-05-27 2015-12-03 Hewlett-Packard Development Company, L.P. Portable speaker
CN105451098A (zh) * 2014-08-15 2016-03-30 北京风行在线技术有限公司 一种提供多媒体文件的方法与装置
KR102012682B1 (ko) 2015-01-06 2019-08-22 디브이엑스, 엘엘씨 디바이스들간에 콘텐트를 인코딩 및 공유하기 위한 시스템들 및 방법들
JP2017055203A (ja) * 2015-09-08 2017-03-16 船井電機株式会社 情報機器
EP3384674A1 (en) * 2015-12-04 2018-10-10 Telefonaktiebolaget LM Ericsson (publ) Technique for adaptive streaming of temporally scaling media segment levels
US10567546B2 (en) * 2015-12-31 2020-02-18 Oath Inc. Network content communication
US10165310B2 (en) 2016-06-10 2018-12-25 Affirmed Networks, Inc. Transcoding using time stamps
JP6786324B2 (ja) * 2016-09-20 2020-11-18 株式会社東芝 多重化装置及び多重化方法
JP6626602B2 (ja) 2016-10-21 2019-12-25 アファームド ネットワークス，インク． 適応型コンテンツ最適化
US10498795B2 (en) 2017-02-17 2019-12-03 Divx, Llc Systems and methods for adaptive switching between multiple content delivery networks during adaptive bitrate streaming
CN109936715B (zh) * 2017-12-19 2021-09-03 华为技术有限公司 一种mp4文件的处理方法及其相关设备
CN110545466B (zh) * 2018-05-29 2021-07-06 北京字节跳动网络技术有限公司 基于网页的媒体文件的播放方法、装置及存储介质
CN112040302B (zh) 2019-06-03 2023-01-03 优视科技有限公司 视频缓冲方法、装置、电子设备及计算机可读存储介质
CN110620950B (zh) * 2019-10-10 2022-03-15 东软集团股份有限公司 一种音视频文件的存储方法、装置及设备

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5822524A (en) * 1995-07-21 1998-10-13 Infovalue Computing, Inc. System for just-in-time retrieval of multimedia files over computer networks by transmitting data packets at transmission rate determined by frame size
WO1998046005A2 (en) * 1997-04-07 1998-10-15 At & T Corp. System and method for processing object-based audiovisual information
CA2257566C (en) * 1997-04-07 2002-01-01 At&T Corp. System and method for generation and interfacing of bitstreams representing mpeg-coded audiovisual objects
US6751623B1 (en) * 1998-01-26 2004-06-15 At&T Corp. Flexible interchange of coded multimedia facilitating access and streaming
CA2398071A1 (en) * 2000-01-28 2001-08-02 Diva Systems Corporation A system for preprocessing content for streaming server
JP2004505519A (ja) * 2000-07-13 2004-02-19 コーニンクレッカ　フィリップス　エレクトロニクス　エヌ　ヴィ Ｍｐｅｇ−４符号器及び斯様な符号器の出力符号化信号
US7130316B2 (en) * 2001-04-11 2006-10-31 Ati Technologies, Inc. System for frame based audio synchronization and method thereof

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101242472B1 (ko) * 2008-07-16 2013-03-12 노키아 코포레이션 트랙 및 트랙 서브세트의 그룹화를 위한 방법 및 장치
WO2012099400A3 (en) * 2011-01-18 2012-12-06 Samsung Electronics Co., Ltd. Apparatus and method for storing and playing content in a multimedia streaming system
US9635076B2 (en) 2011-01-18 2017-04-25 Samsung Electronics Co., Ltd Apparatus and method for storing and playing content in a multimedia streaming system
US10148715B2 (en) 2011-01-18 2018-12-04 Samsung Electronics Co., Ltd Apparatus and method for storing and playing content in a multimedia streaming system
US10498785B2 (en) 2011-01-18 2019-12-03 Samsung Electronics Co., Ltd Apparatus and method for storing and playing content in a multimedia streaming system

Also Published As

Publication number Publication date
EP1430646A1 (en) 2004-06-23
KR20040041174A (ko) 2004-05-14
JP2005504480A (ja) 2005-02-10
FI20011871A0 (fi) 2001-09-24
US20030061369A1 (en) 2003-03-27
CN1559119A (zh) 2004-12-29
BR0212597A (pt) 2004-10-13
WO2003028293A1 (en) 2003-04-03
FI20011871A (fi) 2003-03-25
ZA200402254B (en) 2004-10-05
CA2460004A1 (en) 2003-04-03

Similar Documents

Publication Publication Date Title
KR20060111904A (ko) 메타-데이터 및 미디어-데이터를 포함하는 멀티미디어파일의 스트리밍
AU2004307804B2 (en) Streaming from server to client
KR101107815B1 (ko) 멀티미디어 컨테이너 파일의 수신 힌트 트랙으로의 미디어 스트림 기록 방법 및 장치, 컴퓨터 판독가능 매체
US7979886B2 (en) Container format for multimedia presentations
US8019885B2 (en) Discontinuous download of media files
KR102303582B1 (ko) 웹 콘텐츠에 대한 파일 트랙들을 사용하여 미디어 데이터를 프로세싱
TW201842785A (zh) 作為分隔符及可定址之資源識別符之區段類型
EP3257216B1 (en) Method of handling packet losses in transmissions based on dash standard and flute protocol
TW201909007A (zh) 使用用於檔案格式邏輯框之一通用描述符處理媒體資料
US7555009B2 (en) Data processing method and apparatus, and data distribution method and information processing apparatus
TW201947938A (zh) 用於在一片段中之網路串流之媒體資料之發信丟失區段
JP2007508779A (ja) マルチメディアプレゼンテーション用コンテナフォーマット
JP2022551436A (ja) Ｄａｓｈセグメントの再同期点におけるランダムアクセス
US20210306703A1 (en) Determination of availability of chunks of data for network streaming media data
JP2021197584A (ja) 多重信号変換装置及びそのプログラム、並びに、受信機
WO2023052199A1 (en) Method and apparatus for encapsulation of media data in a media file

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E601 Decision to refuse application