KR101066366B1 - 멀티미디어 컨텐츠 방송용 원격 통신 시스템, 서버, 멀티미디어 컨텐츠 방송 방법, 컴퓨터 판독가능 저장 매체 및 신호 전달 매체 - Google Patents

멀티미디어 컨텐츠 방송용 원격 통신 시스템, 서버, 멀티미디어 컨텐츠 방송 방법, 컴퓨터 판독가능 저장 매체 및 신호 전달 매체 Download PDF

Info

Publication number
KR101066366B1
KR101066366B1 KR1020057015985A KR20057015985A KR101066366B1 KR 101066366 B1 KR101066366 B1 KR 101066366B1 KR 1020057015985 A KR1020057015985 A KR 1020057015985A KR 20057015985 A KR20057015985 A KR 20057015985A KR 101066366 B1 KR101066366 B1 KR 101066366B1
Authority
KR
South Korea
Prior art keywords
file
client
progressive file
server
multimedia content
Prior art date
Application number
KR1020057015985A
Other languages
English (en)
Other versions
KR20050106049A (ko
Inventor
필리프 젠트릭
Original Assignee
엔엑스피 비 브이
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엔엑스피 비 브이 filed Critical 엔엑스피 비 브이
Publication of KR20050106049A publication Critical patent/KR20050106049A/ko
Application granted granted Critical
Publication of KR101066366B1 publication Critical patent/KR101066366B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/765—Media network packet handling intermediate
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/12—Systems in which the television signal is transmitted via one channel or a plurality of parallel channels, the bandwidth of each channel being less than the bandwidth of the television signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/10—Architectures or entities
    • H04L65/102—Gateways
    • H04L65/1023—Media gateways
    • H04L65/103—Media gateways in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/10—Architectures or entities
    • H04L65/102—Gateways
    • H04L65/1033—Signalling gateways
    • H04L65/104—Signalling gateways in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/611—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for multicast or broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/08—Protocols for interworking; Protocol conversion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/40—Network security protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/85406—Content authoring involving a specific file format, e.g. MP4 format
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1101—Session protocols

Abstract

본 발명은 클라이언트 디바이스(60)에 멀티미디어 컨텐츠(MM)를 방송하는 원격 통신 시스템에 관한 것이다. 상기 시스템은 상기 멀티미디어 컨텐츠를 인코딩된 데이터 스트림(EDS)으로 인코딩하는 인코더(20)를 포함한다. 상기 인코딩된 데이터 스트림은 제1 네트워크 접속(30)을 통해 서버(40)에 전송된다. 상기 서버(40)는 수신된 인코딩된 데이터 스트림(EDS)에 포함된 매체 데이터(MD)로부터 메타데이터(MT)를 발생시키고, 프로그래시브 파일(PF)을 생성할 수 있고, 여기서 상기 매체 데이터(MD) 및 메타데이터(MT)는 인터리브된다. 상기 프로그래시브 파일(PF)은 제2 네트워크 접속(50)을 통해 클라이언트 디바이스(60)로 다운로드되고, 이는 상기 인터리브된 메타 및 매체 데이터를 사용하여, 다운로드의 종료 전에 수신된 멀티미디어 컨텐츠의 재생을 시작할 수 있다.
멀티미디어 컨텐츠, 프로그래시브 파일, 매타데이터, 제 1 네트워크 접속, 다운로드, 매체 데이터

Description

멀티미디어 컨텐츠 방송용 원격 통신 시스템, 서버, 멀티미디어 컨텐츠 방송 방법, 컴퓨터 판독가능 저장 매체 및 신호 전달 매체{SYSTEM FOR BROADCASTING MULTIMEDIA CONTENT}
본 발명은 클라이언트 디바이스에 멀티미디어 컨텐츠를 방송하기 위한 원격 통신 시스템에 관한 것이다. 또한, 본 발명은 그러한 시스템에 사용되는 서버에 관한 것이다. 또한, 본 발명은 그러한 서버로부터의 상기 멀티미디어 컨텐츠를 요청하는 클라이언트 디바이스에 관한 것이다. 마지막으로, 본 발명은 상기 시스템에 사용하기 위한 방법에 관한 것이다.
본 발명은 예를 들어, 인터넷 또는 모바일 네트워크들을 통해 클라이언트에게 라이브 멀티미디어 컨텐츠를 방송하기 위한 애플리케이션을 발견한다.
인터넷 상의 라이브 오디오, 비디오 및 모든 종류의 멀티미디어 컨텐츠의 스트리밍은 널리 보급되고 있다. 도 1에 나타낸 바와 같이, 스트리밍 세션은 라이브 멀티미디어 컨텐츠를 실시간으로 인코딩하고 인코딩된 데이터 스트림을 공급하기 위한 실시간 인코더, 상기 인코더와 스트리밍 서버 사이의 방송 접속 및 상기 서버와 여러 클라이언트들 사이의 여러 점대점 접속들(point to point connections)을 포함한다. IP 네트워크들 상의 그러한 실시간 전송을 위해 사용된 표준 프로토콜은 실시간 프로토콜(RTP)이다. 따라서, 상기 인코딩된 데이터 스트림은 RTP 패킷들로 변환되고, 이는 서버에 전송되고, 클라이언트들에게 추가로전송된다.
상기 RTP 프로토콜에 의해 야기되는 문제점은 RTP 패킷들이 종종 방화벽들 및 네트워크 어드레스 변환기(NAT들)에 의해 차단된다는 것이다. 결과적으로, 클라이언트들은 요청된 멀티미디어 컨텐츠를 수신할 수 없다.
이러한 문제를 해결하는 해법(solution)은 마티아스 요한슨(Mathias Johanson)의 공개 문헌 "An RTP to HTTP video gateway", ACM, 1-58113-348-0/01/0005, 2001에 이미 공지되어 있다. 상기 해법은 RTP 패킷들을 서버의 웹 페이지에 포함 파일로 변환시키고, RTP 프로토콜 대신에 하이퍼 텍스트 전송 프로토콜(HTTP)을 사용하여 클라이언트에게 전송된다. 상기 HTTP 프로토콜의 장점은 그것이 모든 방화벽들에 의해 수용되고, NAT들과 잘 작동한다는 것이다.
이러한 선행 기술에서, 이미지들의 시퀀스를 포함하는 비디오 컨텐츠는 MJPEG(모션 조인트 화상 전문가 그룹) 스트림으로 인코딩된다. MJPEG는 비디오를 인코딩하기 위한 표준 포맷이고, 이는 시퀀스의 각각의 이미지를, 정지 화상들용으로 개발된 JPEG 포맷을 사용하여 개별적으로 인코딩한다. 상기 MJPEG 스트림은 추가로 Request For Comment RFC2435에 기술된 바와 같이 RTP 스트림으로 변환된다. 상기 RTP 스트림은 RTP 멀티캐스트 접속을 통해 웹 서버에 전송된다. 상기 웹 서버는 상기 RTP 스트림을 다목적 인터넷 메일 확장 멀티파트(MIME 멀티파트) 파일로 변환시키기 위한 변환 수단을 포함한다. MIME 멀티파트는 인터넷 메시지 바디들의 포맷을 명시하고 기술하기 위한 표준이고, HTML 웹 페이지에서 JPEG 이미지들의 시퀀스들을 디스플레이할 수 있게 한다. 요한슨의 해법에서, MJPEG 스트림의 JPEG 이미지는 MIME 멀티파트 파일의 한 부분에 저장된다. 상기 MIME 파일은 URL(균일한 자원 로케이터들, 코멘트 번호 1738에 대한 요청 참조) 어드레스에 의해 상기 웹 서버에서 이용가능한 웹 페이지를 액세스 할 수 있게 이루어진다. 클라이언트가 상기 웹 페이지를 브라우즈하고, 상기 URL 어드레스를 클릭할 때, 특정 자바 애플릿은 MJPEG 파일의 연속적인 JPEG 이미지들의 다운로드를 명령하고, 동기화시키기 위해 클라이언트 측에서 다운로드되고 착수된다. 일단 클라이언트에 의해 수신되면, JPEG 이미지는 JPEG 디코더에 의해 디코딩되는 한편, 다음 JPEG 이미지는 다운로드된다. 따라서, MJPEG 비디오 시퀀스가 실시간으로 재생된다.
이러한 해법의 주요 결점은 그것이 매우 특이하다는 것이다. MIME 멀티파트 포맷은 JPEG 또는 GIF와 같은 정지 화상 인코딩 포맷들 만을 수용한다. 독립적인 JPEG 이미지들의 수집(collection)으로서 비디오 시퀀스를 인코딩하고, 결과적으로 비디오 시퀀스의 일시적 용장도를 이용하지 않는 MJPEG 포맷은 인터넷 또는 모바일 네트워크들과 같은 낮은 비트율 네트워크 접속들을 통해 비디오 스트리밍을 허용하기에 충분한 압축 비율을 달성하지 않는다. MJPEG 포맷은 스튜디오 합성을 위해 매우 흥미롭지만, 그것은 인터넷 상의 비디오 스트리밍용으로 전혀 널리 보급되지 않았다. MPEG-4와 같은 다른 비디오 인코딩 포맷을 사용하기 위해, 변환이 필요하고, 이는 중요한 품질 저하를 유도한다.
이러한 방법의 다른 결점은 그것이 오디오 또는 텍스트와 같이 비디오 이외의 다른 종류의 멀티미디어 컨텐츠에 대해 작동하지 않는다는 것이다. 이는 여러 멀티미디어 소스들을 동기화시키기 이한 해법들을 제공하지 않는다. 예를 들어, 그러한 방법은 인터넷을 통해 영화를 스트리밍하기 위한 어떤 해법도 제공하지 않는다.
본 발명의 목적은 비디오 및 보다 일반적으로는 모든 종류의 멀티미디어 컨텐츠를 서버를 통해 인터넷 상에서 방송하기 위한 보다 효율적인 해법을 제안하는 것이다.
이는 특허 청구항 1 내지 4에 정의된 원격 통신 시스템, 특허 청구항 5 내지 7에 정의된 서버, 청구항 8에 정의된 클라이언트 디바이스, 청구항 9 및 10에 정의된 방법, 청구항 11에 정의된 컴퓨터 프로그램 및 청구항 12에 정의된 신호에 의해 달성된다.
본 발명에 따라, 멀티미디어 컨텐츠는 인코딩된 데이터 스트림으로 인코딩된다. 상기 인코딩된 데이터 스트림은 방송 전송을 통해 실시간으로 서버에 분배된다. IP 네트워크들 상에서, 인코더와 서버 간의 방송 전송은 보편적으로 RTP(실시간 프로토콜) 프로토콜에 의해 규정되는 멀티캐스트 접속이다. 이어서, 서버는 수신된 인코딩된 데이터 스트림을 프로그래시브 다운로드와 호환될 수 있는 포맷을 갖는 "프로그래시브" 파일로 변환시키고, 상기 프로그래시브 파일은 예를 들어 웹 페이지 상에서 이 프로그래시브 파일이 클라이언트 디바이스에서 이용가능하게 할 수 있다.
상기 프로그래시브 파일은 서버로부터 클라이언트에게 점대점 네트워크 접속을 통해 전송된다. IP 네트워크들 상에서, 상기 점대점 네트워크 접속은 보편적으로 월드 와이드 웹에서 기초(basis)인 HTTP 프로토콜(하이퍼 텍스트 트랜스퍼 프로토콜, RFC 2616 참조)에 의해 규정되고, 모든 방화벽들 및 NAT들에 의해 허용된다는 큰 장점을 갖는다.
파일의 프로그래시브 다운로드는 그의 완전한 다운로드 전에 파일을 디코딩하기 시작한다. 이는 매체 데이터 및 메타데이터가 인터리브된 구조를 갖는 파일 포맷에 의해 이루어질 수 있다. 매체 데이터는 인코딩된 멀티미디어 컨텐츠의 오디오, 비디오, 화상들 또는 텍스트 트랙들을 포함한다. 메타데이터는 매체 데이터가 인코딩되는 방식을 기술한다. 그러므로 상기 파일 포맷을 사용함으로써, 디코딩은 파일의 프래그먼트(fragment)가 매체 데이터(MD) 및 상기 매체 데이터와 관련된 메타데이터를 포함한다면, 제공된 파일의 프래그먼트 상에서 달성될 수 있다.
본 발명에 따라, 상기 클라이언트는 상기 멀티미디어 컨텐츠의 방송 중의 임의의 시점에 서버에 접속하고, 작동중에 상기 멀티미디어 컨텐츠를 수신 요청할 것으로 기대된다. 이를 위해, 상기 서버는 상기 프로그래시브 파일을 클라이언트 요청에 적응된 클라이언트 프로그래시브 파일로 커스터마이징(customize)할 수 있다. 상기 클라이언트 프로그래시브 파일은 초기화 메타데이터와 같이, 현재 멀티미디어 방송을 클라이언트가 포착할 수 있게 하는 메타데이터를 포함하고, 이는 예를 들어 플레이어를 구성하기 위해 통상적으로 방송의 시작 전에 전송된다.
본 발명의 바람직한 실시예에서, 사용된 파일 포맷은 ISO 파일 포맷 버전 2이고, 이는 비디오용 MPEG-4 또는 H.263 또는 오디오용 AMR(Advanced Multi Rate)과 같은 표준을 인코딩하는 많은 멀티미디어 데이터에 의해 판독될 수 있다.
본 발명의 제1 장점은 이들 표준들이 멀티미디어 데이터 압축을 위해 보급된다는 것이다. 예를 들어, MPEG-4 또는 등가의 표준이 인터넷 상의 컨텐츠 제공자들에 의해 널리 사용된다. 결과적으로, 서버 측에 어떠한 트랜스코딩 수단도 필요치 않고, 이는 종종 MPEG-4 스트림을 M-JPEG 스트림으로 트랜스코딩하기 위한 요한슨의 해법의 경우와 같다.
제2 장점은 비디오 인코딩을 위한 상기 표준들이 매우 낮은 비트율에서 높은 비트율에 이르는 임의의 비트율로 MJPEG보다 훨씬 더 양호한 압축율을 달성한다는 것이다. 이러한 품질의 획득은 특히 클라이언트가 모바일 폰 또는 모뎀 인터넷 접속된 개인용 컴퓨터이고, 낮은 비트율 네트워크 접속으로 제한될 때 특히 적절하다.
상기 ISO 파일 포맷 버전 2는 오디오, 비디오, 화상 또는 텍스트와 같은 상이한 소스들로부터 멀티미디어 데이터를 인터리브하고, 따라서 동기된 오디오, 비디오 및 텍스트가 동시에 이용가능한 경우 인코딩된 데이터를 클라이언트의 플레이어에 제공할 수 있다. 특히 멀티미디어 소스들을 다루도록 고안된 MPEG-4와 같은 멀티미디어 표준과 조합됨으로써, 상기 ISO 파일 포맷 버전 2는 다운로드 서버를 통해 클라이언트에게 멀티미디어 데이터의 전송을 허용한다. 따라서, 본 발명의 다른 장점은 비디오 만이 아닌 임의의 종류의 멀티미디어 컨텐츠, 즉, 동기화된 오디오, 비디오, 텍스트 및 화상들을 방송하기 위한 해법이 제안되고, 이는 인터넷 상의 현대적인 애플리케이션들에 보다 적합하다는 것이다.
본 발명에 따른 시스템은 또한 수신된 클라이언트 프로그래시브 파일의 사본을 클라이언트가 유지할 수 있게 하기 때문에 유리하다. 서버는 DRM(데이터 자원 관리)을 사용하여 허가된 사본들의 수를 제한할 수도 있다. 이는 자바 애플릿이 클라이언트의 파일 시스템에 데이터를 기입할 우선적인 권리도 갖지 못하기 때문에 요한슨의 해법을 사용하는 경우에 용이하게 이루어질 수 없다.
본 발명의 이들 국면 및 기타 국면들은 다음으로부터 명백하고, 아래 기술된 실시예들을 참조함으로써 명확해질 것이다.
본 발명은 추가로 첨부되는 도면들을 참조하여 기술될 것이다.
도 1은 실시간 네트워크 접속을 통해 멀티미디어 데이터를 스트리밍하는 원격 통신 시스템을 예시하는 도면.
도 2는 본 발명에 따른 제1 네트워크 접속, 서버 및 제2 네트워크 접속을 통해 멀티미디어 컨텐츠를 방송하는 원격 통신 시스템을 예시하는 블록도.
도 3은 ISO 파일 포맷 버전 2에 따라 파일의 구조를 나타내는 도면.
도 4는 본 발명에 따라, 커스터마이징 수단이 클라이언트 요청에 적응된 클라이언트 프로그래시브 파일을 어떻게 구축할 수 있는지의 기능적 방식을 보여주는 도면.
도 5는 본 발명에 따른 클라이언트 프로그래시브 파일의 구조를 나타내는 도면.
도 6은 서버가 수신된 인코딩된 데이터 스트림에 포함된 매체 데이터를 복구하기 위한 복구 수단을 포함하는, 본 발명의 실시예의 개략적 예시도.
본 발명에 따른 원격 통신 시스템은 도 2에 나타낸다. 그러한 원격 통신 시스템은 인코더(20), 인코더(20)와 서버(40) 사이의 제1 네트워크 접속(30) 및 상기 서버와 클라이언트 디바이스(60) 사이의 제2 네트워크 접속(50)을 포함한다. 상기 인코더는 컨텐츠 제공자로부터 나오는 멀티미디어 컨텐츠(10)를 인코딩된 데이터 스트림(EDS)으로 인코딩한다.
상기 인코딩된 데이터 스트림은 비디오 트랙, 오디오 트랙 및 가능하게는 텍스트 트랙 또는 화상 트랙과 같은 임의의 수의 매체 트랙들을 포함할 수 있다. 이는 상기 제1 네트워크 접속(30)을 통해 실시간으로 전송된다. 본 발명의 바람직한 실시예에서, RTP(실시간 프로토콜) 프로토콜은 그것이 종종 스트리밍 용도들의 경우와 같이 사용되지만, 이는 제한적이지 않다. MPEG-2 TS라 칭하는 MPEG-2 표준의 전송층은 마찬가지로 사용되고 있다. 따라서, 상기 인코딩된 데이터 스트림(EDS)은 RTP 패킷들 내로 캡슐화된다. RTP 패킷은 매체 데이터 및 상기 매체 데이터를 기술하기 위한 제어 데이터인 메타데이터라 칭하기도 하는 일부 인코딩된 데이터를 포함한다.
멀티미디어 컨텐츠(MM)는 라이브 컨텐츠일 수 있거나, 또는 보다 일반적인 방식으로 임의의 기록된 멀티미디어 프로그램일 수 있지만, 상기 멀티미디어 컨텐츠는 방송되고, "주문형 비디오(Video on demand)" 서버에 대해 적절하지 않을 수 있음에 주의해야 한다. 따라서, 상기 제1 네트워크 접속은 멀티캐스트 방송 세션이고, 이는 많은 클라이언트들에 의해 그 중에서도 서버(40)에 의해 "청취"된다.
RTP 패킷들의 상기 스트림은 서버(40)의 수신 수단(41)에 의해 수신되고, 스트림-파일 변환 수단(42)에 의해 프로그래시브 파일(PF)로 변환된다. 상기 프로그래시브 파일(PF)은 인터리브된 매체 데이터 및 메타데이터를 포함하는 파일 포맷을 갖는다. 본 발명의 바람직한 실시예에서, 상기 프로그래시브 파일은 ISO 파일 포맷 버전 2에 따른다. ISO 파일 포맷 버전 2에 따라, 파일은 메타 및 매체 데이터 모두를 포함할 필요가 있고 데이터의 신택스는 이들의 조직에 의해서가 아닌 표준에 의해 한정되는 것에 주의해야 한다. 도 3을 참조하여, 본 발명에 따른 라이브 파일은 연결된 데이터 박스들로 분할되고, 데이터 박스는 메타 데이터나 매체 데이터를 포함하는 것이다. ISO 파일 포맷 버전 2는 3가지 유형의 데이터 박스들을 정의한다:
- 오디오 A, 비디오 V 또는 텍스트 T 소스들과 같은 매체 데이터의 인터리브된 데이터 조각들을 포함하는 "MDAT" 데이터 박스들. 상기 데이터 조각들은 임의의 구조 또는 마커들을 갖지 않는다.
- 상기 매체 데이터를 기술하고 액세스하기 위한 메타데이터를 포함하는 하나의 "MOOV" 및 많은 "MOOF" 데이터 박스들. 상기 ISO 파일 포맷은 단일 "MOOV" 데이터 박스에 의해 시작된다. "MDAT" 및 "MOOF" 박스들의 교체가 후속된다.
- 상기 "MOOV" 데이터 박스는 예를 들어 제1 MDAT에 저장된 매체 데이터를 액세스하기 위한 일부 인덱스 테이블들 및 디코더 구성 소자들과 같은 초기화 매체 데이터를 포함한다. "MOOF" 데이터 박스는 전형적으로 후속 MDAT에 저장된 매체 데이터를 액세스하기 위한 인덱스 테이블을 포함한다.
예를 들어 MPEG 또는 애플의 .moov 파일 포맷과 같은 독점 파일과 같은 다른 파일 포맷이 사용될 수 있음에 주의하자. ISO 파일 포맷 버전 2의 장점은 그것이 비디오 트랙용 MPEG-4 및 오디오 트랙용 AMR과 같은 멀티미디어 데이터를 인코딩하 기 위한 많은 표준들과 호환될 수 있고, 이는 상기 포맷을 사용하는 파일이 상기 표준들과 호환되는 디코더에 의해 재생될 수 있다는 것이다. 이는 MJPEG 디코더를 필요로 하는 MJPEG 파일인 경우나 특히 애플 QuickTime 플레이어를 위해 고안된 .moov 파일의 경우는 아니다.
스트림-파일 변환 수단(42)은 수신된 RTP 패킷들에 포함된 메타 및 매체 데이터를 라이브 파일 구조에 충전시킬 책임이 있다.
이하, 인코딩된 데이터 스트림은 MPEG-4 인코딩된 데이터 스트림인 것으로 가정될 것이다. 이는 상기한 바와 같이 제한적이지 않고, ISO 파일 포맷 버전 2와 호환되는 임의의 다른 포맷이 사용되고 있다.
상기 MPEG-4 인코딩된 데이터 스트림은 액세스 유닛들로 분할된다. 액세스 유닛은 직접적으로 액세스될 수 있는 데이터 세트이다. RTP 패킷은 MPEG-4 인코딩된 데이터 스트림으로부터 나오는 1개 또는 여러 개의 액세스 유닛들 및 상기 액세스 유닛들에 관한 일부 메타데이터를 포함하고, 상기 메타데이터는 RTP 헤더를 형성한다. 특히, 상기 RTP 헤더는 어느 시점에 상기 액세스 유닛들이 디코딩되어야 할지를 지시하는 액세스 유닛 타임 스탬프를 포함한다.
스트림-파일 변환 수단(42)은 주로 다음과 같이:
- 각각의 MDAT 박스가 인덱스를 갖는 하나 또는 여러 개의 MDAT 박스들 내로 타임 스탬프와 연관된 액세스 유닛들을 복사하고,
- 상기 타임 스탬프를 상기 MDAT 박스 인덱스들과 연관시킴으로써 MOOV 및 MOOF 테이블을 구축하고,
- SDP (세션 묘사 프로토콜, 멀티미디어 세션들의 초기화 전용 프로토콜) 파일 (이 파일은 보편적으로 RTP 스트림과 병치로 서버에 전송되고, 이들을 프로그래시브 파일의 MOOV 테이블 내로 복사하는 것임)로부터 디코더 구성을 명시하는 메타데이터를 추출함으로써, 프로그래시브 파일(PF)을 ISO 파일 포맷 버전 2를 사용하여 생성하는 것으로 구성된다
얻어진 프로그래시브 파일은 그것이 MOOV 데이터 박스를 제외한 임의의 다른 데이터와 독립적으로 디코딩될 수 있는 MOOF 데이터 박스 및 MDAT 데이터 박스를 포함하는 독립적인 데이터 프래그먼트들로 구성되기 때문에 프로그래시브적으로 다운로드되도록 적응된다. 결과적으로 디코딩은 MOOV 데이터 박스가 클라이언트에 의해 수신되자 마자 시작할 수 있고, 이는 매우 단기간의 지연에 대응한다.
상기 서버(40)는 상기 클라이언트 프로그래시브 파일을 클라이언트 디바이스(60)에 전송하기 위한 전송 수단(44)을 추가로 포함한다. 클라이언트 디바이스(60)는 예를 들어 웹 페이지를 브라우징하는 웹 브라우저를 포함하고, 여기서 클라이언트 프로그래시브 파일(CPF)는 예를 들어 다운로드 가능한 파일로서 유효하게 이루어진다. 상기 클라이언트 프로그래시브 파일(CPF)은 제2 네트워크 접속(50)을 통해 클라이언트 요청(RQ)에 응답하여 클라이언트 디바이스(60)로 전송된다. 본 발명의 바람직한 실시예에서, 상기 제2 네트워크 접속(50)은 HTTP (하이퍼 텍스트 전송 프로토콜) 프로토콜을 사용한다. 월드 와이드 웹의 기준인 상기 프로토콜은 HTML 문서들을 수송할 책임이 있고, 인터넷 상의 트래픽을 관리한다. 그러나, 이는 제한적이지 않고, FTP(파일 수송 프로토콜)이 사용될 수도 있다.
상기 프로그래시브 파일은 기본적인 URL 어드레스, 예를 들어 http://server:port/american/live/madoona.mpg4로 주어진다. 전송 수단(44)은 리다이렉션(redirection) 서브-수단을 포함한다. 상기 리다이렉션 서브-수단들은 기본적인 URL 어드레스를 포함하기 위한 리다이렉션 파일을 생성하는 것으로 구성된다. 상기 리다이렉션 파일은 리다이렉션 URL 어드레스, 예를 들어 http://server:port/redirection/madonna.m4r로 주어지고, 이는 예를 들어 웹 페이지 상에 퍼이퍼텍스트 링크로 포인트된다. 상기 리다이렉션 URL 어드레스를 클릭함으로써 클라이언트 디바이스(60)의 웹 브라우저가 리다이렉션 파일을 다운로드하게 한다. 일단 다운로드되면, 리다이렉션 파일은 웹 브라우저에 의해 판독된다. 상기 웹 브라우저는 기본적인 URL 어드레스 내의 MPEG-4 파일을 식별하고, 플레이어(61)를 직접적으로 발동시킬 수 있고, 이는 그러한 파일 포맷을 다루기 위해 갖추어져야 하는 요건이다. 이어서, 플레이어는 리다이렉션 파일에 포함된 URL 어드레스를 판독하고, 일부 다운로드 수단(62)이 다운로드를 수행하도록 직접적으로 요청한다. 상기 플레이어가 즉각적으로 프로그래시브 파일을 열게 하기 위해, 실제로 이용될 수 있지만, 상기 다운로드 수단(62)은 전체 파일이 이미 다운로드된 것과 같은 외형을 플레이어에 제공하도록 의도될 것이다. 일단 오픈되면, 이미 이용되고 있는 프로그래시브 파일의 일부는 ISO 파일 포맷 버전 2의 구조에 의해 판독될 수 있다
본 발명에 따른 리다이렉션 수단 및 다운로드 수단(62)의 장점은 프로그래시브적인 다운로드를 가능하게 한다는 것이다. 임의의 리다이렉션(redirection) 없이, 프로그래시브 파일(PF)는 플레이어로 전송되기 전에 웹 브라우저에 의해 완전히 다운로드될 수 있다. 다운로드 수단(62) 없이, 플레이어는 프로그래시브 파일(PF)을 열기 전에 다운로드가 종료될 때까지 대기할 수 있다.
상기 서버(40)는 마지막으로 상기 프로그래시브 파일(PF)을 클라이언트 요청에 적응된 클라이언트 프로그래시브 파일(CPF)로 커스터마이징하는 커스터마이징 수단(43)을 포함한다. 상기 클라이언트 프로그래시브 파일의 가능한 구조는 도 5에 나타내고, 아래 설명할 것이다.
멀티미디어 컨텐츠는 시점 t0 이래 서버(40)에 의해 RTP 스트림으로서 수신되고 있고, 상기 RTP 스트림은 서버 측에서 웹 페이지 상의 프로그래시브 파일(PF) 쪽으로 파이퍼 텍스트 링크로서 이용될 수 있다고 가정된다. 많은 클라이언트들이 상기 멀티미디어 컨텐츠를 동시에 재생할 수 있다. 도 4를 참조하여, 상기 서버의 웹 페이지를 브라우징하는 신규 클라이언트가 시점 t에 상기 프로그래시브 파일(PF)을 프로그래시브적으로 다운로드하고자 요청하는 것으로 가정된다. 상기 커스터마이징 수단(43)의 목적은 상기 신규 클라이언트가 가능한 한 신속히 멀티미디어 컨텐츠를 포착하게 하는 것이다. 이 때문에, 상기 커스터마이징 수단(43)은 시점 t에서 메타데이터 초기화를 제공하는 프라이머 서브-수단(45)을 포함한다. 상기 메타데이터 초기화는 주로 디코더 구성을 포함하지만, 보다 일반적으로 클라이언트가 실시간 인코딩된 데이터를 수신하기 시작하는데 필요한 모든 데이터를 포함한다.
요점은 상기 인코딩된 데이터가 소정의 시간 스탬프들에 유일하게 액세스될 수 있다는 것이다. 상기 타임 스탬프들은 상기 액세스 유닛들과 관련된다. 따라서, 액세스 유닛은 매체 데이터가 어느 시점에 재생되어야 할지를 지시하는 타임 스탬프를 포함한다. 일부 액세스 유닛들은 랜덤 액세스 포인트들이고, 즉, 이들은 직접적으로 액세스될 수 있다. 비디오 트랙 내에서, 예를 들어 랜덤 액세스 포인트들은 "인트라" 이미지들, 즉 이전의 이미지들과 독립적으로 인코딩되고, 따라서 독립적으로 디코딩될 수 있는 이미지들에 대응한다.
서버는 최종적으로 수신된 RTP 패킷들에 대응하는 프로그래시브 파일의 일부를 일시적으로 저장하기 위한 버퍼(BUF)를 포함한다. 상기 버퍼는 RTP 패킷들과 독립적으로 디코딩될 수 있지만 수신되지 않는 상기 프로그래시브 파일의 프래그먼트를 저장할 수 있다. 따라서, 상기 프래그먼트는 MOOF 박스 및 MDAT 박스를 포함한다. 상기 MDAT 박스는 인코딩된 데이터의 상이한 트랙들로부터, 예를 들어 오디오 및 비디오 트랙으로부터 많은 액세스 유닛들을 포함한다. 상기 MOOF 박스는 상기 MDAT 박스에 포함된 인코딩된 데이터를 액세스하기 위한 인덱스 테이블을 포함한다. 따라서, 상기 프래그먼트는 1개 이상의 액세스 유닛 타임 스탬프들을 포함한다. "액세스 가능한 타임 스탬프"(TS)는 이하 MDTA 박스의 제1 액세스 유닛 타임 스탬프라 칭하게 될 것이다.
일단 상기 버퍼가 가득 채워지면, 그의 컨텐츠는 모든 접속된 클라이언트들에게 동시에 데이터 버스트로서 전송되고, 버퍼는 새로운 프로그래시브 파일 프래그먼트를 저장한다.
상기 버퍼는 수 초의 인코딩된 데이터를 저장할 수 있다. 이는 클라이언트가 몇초의 지연을 갖고 라이브 멀티미디어 컨텐츠를 수신할 것임을 의미한다. 한편으로, 이러한 지연은 특히 축구 시합과 같은 라이브 사건에 대해 너무 크지 않아야 하지만, 다른 한편으로 버퍼가 작을수록, 데이터 오버헤드는 커진다. 사실상, MOOF 및 MDAT내로 데이터를 재조직화하는 것은 비용이 적게 드는 것이 아니고, 압축비에 영향을 미치지 않기 위해 상당한 박스 크기가 사용되어야 한다.
따라서, 상기 프라이머 서브-수단(45)은
- 초기 SDP 파일에 대응하는 프로그래시브 파일의 MOOV 박스의 일부로서 디코더 구성 INI를 클라이언트에게 전송함으로써 클라이언트 요청에 응답하고,
- 시점 t 후에 발생하는 다음의 액세스 가능한 타임 스탬프 TS를 발견할 수 있다. 시점 t가 다음 타임 스탬프 TS보다 짧은 경우, 상기 프로그래시브 파일 내에 포함된 데이터는 다음 타임 스탬프 TS 전에 액세스될 수 없다. 그 사이에, 상기 프라이머 서브-수단(45)은 클라이언트를 타임 스탬프 TS까지 대기시키고자 의도된 추가의 패딩 데이터(PAD)를 상기 신규 클라이언트에게 전송할 수 있다. 이들 패딩 데이터(PAD)는 단순히 블랙 스크린 또는 로고 또는 심지어 일부 광고들을 제공할 수 있다.
상기 프로그래시브 파일(PF)은 그것이 서버 측에서 전체적으로 발휘될 수 없기 때문에 사실상 가상 파일인 것으로 나타난다. 상기 라이브 파일의 프래그먼트 만이 버퍼(BUF)에서 시점 t에 이용될 수 있다.
상기 커스터마이징 수단(43)은 추가로 시작하는 서브-수단(46)을 포함한다. 시작하는 서브-수단(46)은 상기 타임 스탬프(TS)로부터 신규 클라이언트에게 상기 버퍼(BUF)의 컨텐츠의 전송을 개시하는 것을 목표로 한다. 상기 시작하는 서브-수단(46)은 예를 들어 이미 등록된 클라이언트들의 리스트에 상기 클라이언트의 어드레스를 부가하는 것으로 구성된다. 도 4는 시점 t에 서버로부터 신규 클라이언트에 의해 수신된 데이터를 보여준다. 상기 타임 스탬프(TS)로부터, 상기 신규 클라이언트는 다른 클라이언트들과 동일한 데이터를 정확히 수신한다.
이는 본 발명의 추가의 중요한 장점이고, 즉, 각각의 클라이언트는 최소 하드웨어 자원들에 의해 우수한 서버 성능들을 허용하기 때문에 동시에 동일한 데이터를 제공받는다. 사실상, 고전적인 요구불 비디오에서, 서버 성능들은 서버가 처리해야 하는 동시 발생하는 상이한 스트림들의 수에 따라 감소한다. 예를 들어, 1000개의 동시 발생하는 상이한 스트림들을 서비스할 수 있는 서버는 서버 다이내믹 메모리 크기에 의존하여, 즉, 하드 디스크 대신에 다이내믹 메모리 내의 데이터의 유용성에 따라 2000개 이상의 유사한 스트림들을 서비스할 수 있고, 이들 저장 매체들 사이의 액세스 속도의 차이는 매우 크다. 구체적으로, 이 경우에, 비디오 서버 성능은 모든 클라이언트들에게 동시에 서비스하는데 필요한 메모리 크기가 전술한 버퍼 크기이고, 이는 전형적인 서버 다이내믹 메모리보다 훨씬 더 작기 때문에 최적이다.
타임 스탬프(TS)로부터 디코덩 구성(INI), 패딩 데이터(PAD) 및 매체 데이터는 프로그래시브 파일(PF)의 커스터마이징된 버전, 즉 특히 클라이언트 요청에 적응된 클라이언트 프로그래시브 파일(CPF)을 형성한다. 상기 클라이언트 프로그래시브 파일(CPF)은 가상 파일이기도 하다.
제1 네트워크 접속(30)이 달리, 제2 네트워크 접속(50)은 서버(40)와 클라이언트 디바이스(60) 사이의 점대점이고, 여기서 상기 서버 및 상기 클라이언트 디바이스는 모두 서로를 인식한다. 도 4에 나타낸 바와 같이, 클라이언트 디바이스(60)는 서버(40)에 이용가능한 프로그래시브 파일(PF)을 요청하는 요청 수단(63), 제2 네트워크 접속(50)을 통해 상기 커스터마이징 수단(43)에 의해 공급되는 클라이언트 프로그래시브 파일(CPF)을 다운로드하기 위한 다운로드 수단(62) 및 상기 클라이언트 프로그래시브 파일에 포함된 수신된 인코딩된 데이터(RED)를 실시간으로 재생하는 플레이어(61)를 포함한다.
고전적인 플레이어는 단지 로컬 파일을 열 수 있고, 원격 파일, 즉 원격지 서버에 위치하는 파일은 다운로드할 수 없음에 주의하자. 당업계의 숙련자들에게 공지된 다운로드 수단(62)은 이들이 로컬 파일에 저장된 경우와 마찬가지로 상기 프로그래시브 파일 내에 포함된 수신된 인코딩된 데이터를 플레이어(61)가 다루게 할 수 있다. 상기 다운로드 수단은 예를 들어 웹 브라우징 수단(63) 대신에 HTTP 명령(GET)을 사용함으로써 상기 프로그래시브 파일의 다운로드를 명령할 수 있다. 상기 프로그래시브 파일로부터 인코딩된 데이터가 수신되자마자, 플레이어(61)는 ISO 파일 포맷 버전 2를 인식할 수 있고, 다운로드의 종료 전에 상기 수신된 인코딩된 데이터(RED)를 디코딩하기 시작할 수 있다. 디코딩된 멀티미디어 컨텐츠(DMC)가 출력되고 디스플레이된다.
상기 수신된 인코딩된 데이터(RED)는 수신된 클라이언트 프로그래시브 파일을 형성하고, 이는 저장될 수 있고, 다시 재생될 수 있다. 서버는 클라이언트들에게 허가된 사본들의 수를 제한시키고자 고안될 수 있음에 주의해야 한다. 그러한 제한은 예를 들어 오픈 모바일 얼라이언스(OMA) 다운로드 버전 1과 같은 DRM(데이터 자원 관리) 기술을 사용함으로써 셋업될 수 있다.
완전한 파일 크기는 클라이언트에 따라 저장 크기를 초과할 수 있고, 그 경우, 프로그래시브 다운로드는 파일의 시작에 대응하는 데이터가 재생이 진행됨에 따라 소거될 수 있고, 보다 최근의 데이터에 대한 공간을 제공하고; 이러한 방식으로 끝없는 프로그램들이 효과적으로 유효하게 이루어질 수 있다는 추가의 장점을 제공하는 것에 주의해야 한다.
본 발명에 따른 클라이언트 디바이스의 다른 장점은 당업계의 숙련자들에게 공지되고, 널리 보급되고 있는 프로그래시브적인 다운로드를 달성하는 능력을 제외하고는 어떠한 특이성도 갖지 않는다는 것이다. 이는 본 발명이 ISO 파일 포맷 버전 2를 다룰 수 있는 플레이어 및 다운로드 수단을 포함하는 임의의 클라이언트와 작업할 것임을 의미한다.
본 발명의 다른 실시예에서, 상기 다운로드 서버(50)는 도 6에 나타낸 바의 프로그래시브 파일(PF) 내의 홀들을 완성하기 위한 복구 수단(49)을 추가로 포함한다. 상기 홀들은 제1 네트워크 접속(30)에 의해 실시간 데이터 스트림 내의 데이터의 가능한 손실에 의해 유발될 수 있다. 예를 들어, RTP 프로토콜이 사용되는 경우, 일부 RTP 패킷들은 전송 도중에 단순히 상실될 수 있거나, 또는 서버 측에서 RTP 프로토콜에 의해 오류로 식별될 수 있다. 제2의 경우에, 이들은 실시간 전송에서 패킷 재전송을 요청할 시간이 없을 수 있기 때문에 거부될 수 있다. 서버(40)에 의한 RTP 패킷들의 손실 또는 거부는 모두 변환 수단(42)에 의해 생성되는 프로그래시브 파일 내의 "홀들"에 대한 책임이 있다. 상기 홀들은 플레이어가 클라이언트 측에서 충돌하게 하지 않아야 하고, 그 이유는 순응형 디코더가 예를 들어 타임 스탬프까지 액세스 유닛이 실종됨을 검출함으로써 인코딩된 데이터의 스트림 내의 실종 데이터에 대처할 수 있을 것으로 기대되기 때문이다. 그러나, 상기 홀은 디스플레이된 디코딩된 멀티미디어 컨텐츠의 품질 저하를 유도할 것이다.
디코더(20)로부터 클라이언트(60)로 전송되는 동안 인코딩된 데이터를 차단할 수 있는 본 발명에 따른 시스템의 장점은 플라이되고 있는 인코딩된 데이터를 복구하기 위해 이러한 차단이 유리하다는 것이다. 이 때문에, 복구 수단(48)은 에러 복원 기술들을 사용하여 이웃하는 데이터를 외삽함으로써 상기 홀들을 완성할 수 있다. 당업계의 숙련자들에게 공지된 상기 에러 복원 기술들은 압축 데이터 또는 압축 해제된 데이터를 다룰 수 있다. 복구된 프로그래시브 파일(RPF)이 출력되고, 클라이언트 복구 프로그래시브 파일(a client repair progrssive file: CRPF)은 클라이언트(60)에게 전송된다.
프로세싱의 추가의 유리한 세트는 서버(40)에 의해 데이터 차단 중에 수행될 수 있다. 이는 예를 들어 상이한 언어들을 피쳐링하는 트랙들에 대해 전형적으로 다른 오디오 트랙으로 하나의 오디오 트랙을 대체함으로써 클라이언트 디바이스(60)에 할당된 프로파일 데이터의 함수로서 상기 프로그래시브 파일(PF)에 포함된 매체 데이터를 커스터마이징하는 것으로 구성될 수 있다. 사실상, 매우 광범위한 스케일(즉, 국가 범역 또는 심지어 월드-와이드) 프로그램들이 각각의 서버가 주어진 국가 도는 지역 또는 마을 또는 영역에 대해 특이적인 많은 서버들을 사용하여 분배될 수 있고, 그 경우, 일부 시퀀스들을 다른 것들로 대체하는 것은 사용자의 흥미를 끌 수 있거나 또는 예를 들어 전형적으로 광고들을 주어진 서버의 청중을 타겟으로 하는 보다 많은 광고들로 대체하는 서비스 제공자들에 대해 경제적일 것으로 기대된다. 도한, 서버당 기준으로 상기한 바와 상이한 프로세싱을 하는 대신에, 동일한 서버가 사용자 기호도 또는 사용자 프로파일 등의 다른 기준에 기초하여 특이적 프로세싱을 수행할 수도 있다. 그러한 프로세싱 유형들의 예는 언어 선택 및 광고 타겟팅을 포함한다.
지금까지 도면들 및 이들의 설명은 본 발명을 제한하기 보다는 오히려 예시하는 것이다. 첨부된 특허 청구의 범위에 속하는 수많은 대안들이 존재하는 것은 명백하다. 이러한 점에서, 다음의 끝맺음 의견들이 제공된다: 하드웨어 도는 소프트웨어, 또는 이들 모두에 의해 기능들을 구현하는 수많은 방식들이 있다. 이러한 점에서, 도면들은 매우 도식적으로, 각각의 도면은 본 발명의 하나의 가능한 실시예만을 나타낸다. 따라서, 도면은 상이한 블록들로서 상이한 기능들을 보여주지만, 이는 결코 하드웨어 또는 소프트웨어의 단일 아이템이 여러 기능들을 수행할 수 있음을 배제하지 않고, 또한 단일 기능이 하드웨어 또는 소프트웨어 또는 이들 모두의 아이템들의 조립에 의해 수행되는 것을 배제하지 않는다. 예를 들어, 도 2, 4 및 6에 기술된 것과 달리, 플레이어(61)는 클라이언트 디바이스(60)와 독립적으로 원격 디바이스가 될 수 있다. 청구항에서 임의의 참조 부호는 그 청구항을 제한하는 것으로 해석되지 않아야 한다. "포함하는"이라는 동사 및 그의 콘쥬게이션의 사용은 청구항에 진술된 것 이외의 다른 원소들 또는 단계들의 존재를 배제하지 않는다. 소자나 단계 앞의 "하나" 또는 "한개"라는 관사의 사용은 복수개의 그러한 소자들 또는 단계들의 존재를 배제하지 않는다.

Claims (12)

  1. 멀티미디어 컨텐츠(MM)를 방송하는 원격 통신 시스템으로서,
    - 매체 데이터(media data)(MD)를 포함하는 인코딩된 데이터 스트림(EDS) 내에서 상기 멀티미디어 컨텐츠(MM)를 인코딩하는 인코더(20)와,
    - 서버(40)와,
    - 클라이언트 디바이스(60)와,
    - 상기 인코딩된 데이터 스트림(EDS)을 상기 서버(40)에 전송하기 위한 제1 네트워크 접속(30)을 포함하되,
    - 상기 서버(40)는,
    - 상기 인코딩된 데이터 스트림(EDS)을 수신하는 수신 수단(41),
    - 상기 수신된 인코딩된 데이터 스트림에 포함된 상기 매체 데이터(MD)로부터 메타데이터(MT)를 발생시키고, 상기 매체 데이터와 상기 메타데이터가 인터리브된 프로그래시브 파일(progressive file; PF)을 생성하는 스트림-파일 변환 수단(42),
    - 상기 메타데이터(MT)를 사용하여, 상기 프로그래시브 파일(PF)을 클라이언트 요청(RQ)에 적응된 클라이언트 프로그래시브 파일(CPF)로 커스터마이징하는(customizing) 커스터마이징 수단(43), 및
    - 상기 클라이언트 프로그래시브 파일(CPF)을 제2 네트워크 접속(50)을 통해 상기 클라이언트 디바이스(60)에 전송하는 전송 수단(44)을 포함하고,
    - 상기 클라이언트 디바이스(60)는,
    - 상기 서버(40)에 상기 프로그래시브 파일(PF)을 요청하는 요청 수단, 및
    - 상기 제2 네트워크 접속(50)을 통해 상기 클라이언트 프로그래시브 파일(CPF)을 다운로드하고, 다운로드의 종료 전에, 상기 클라이언트 프로그래시브 파일(CPF)의 다운로드된 부분으로부터 이용 가능한 상기 메타데이터(MT)를 사용하여 상기 수신된 매체 데이터(MD)를 플레이어(61)에 제공하는 다운로드 수단(62)을 포함하는
    멀티미디어 컨텐츠(MM) 방송용 원격 통신 시스템.
  2. 제1항에 있어서,
    상기 프로그래시브 파일(PF)은 ISO 파일 포맷 버전 2를 갖는
    멀티미디어 컨텐츠(MM) 방송용 원격 통신 시스템.
  3. 제1항에 있어서,
    상기 제1 네트워크 접속(30)은 실시간 프로토콜(RTP)을 사용하는
    멀티미디어 컨텐츠(MM) 방송용 원격 통신 시스템.
  4. 제1항에 있어서,
    상기 제2 네트워크 접속(50)은 하이퍼 텍스트 전송 프로토콜(HTTP)을 사용하는
    멀티미디어 컨텐츠(MM) 방송용 원격 통신 시스템.
  5. 매체 데이터(MD)를 포함하는 인코딩된 데이터 스트림(EDS)으로서 방송된 멀티미디어 컨텐츠를 수신하고, 상기 매체 데이터(MD)를 클라이언트 디바이스(60)에 전송하는 서버(40)로서,
    - 상기 인코딩된 데이터 스트림(EDS)을 수신하는 수신 수단(41)과,
    - 상기 수신된 인코딩된 데이터 스트림에 포함된 상기 매체 데이터(MD)로부터 메타데이터(MT)를 발생시키고, 상기 매체 데이터(MD) 및 상기 메타데이터(MT)가 인터리브된 프로그래시브 파일(PF)을 생성하는 스트림-파일 변환 수단(42)과,
    - 상기 메타데이터(MT)를 사용하여, 상기 프로그래시브 파일(PF)을 클라이언트 요청(RQ)에 적응된 클라이언트 프로그래시브 파일(CPF)로 커스터마이징하는 커스터마이징 수단(43)과,
    - 상기 클라이언트 프로그래시브 파일(CPF)을 상기 클라이언트 디바이스(60)에 전송하는 전송 수단(44)을 포함하는
    서버.
  6. 제5항에 있어서,
    상기 프로그래시브 파일(PF)은 상기 매체 데이터(MD)를 액세스하기 위한 타임 스탬프들을 포함하고,
    상기 커스터마이징 수단(43)은, 시간 t에서의 클라이언트 요청(RQ)에 대해,
    - 시간 t에서 상기 클라이언트 디바이스(60)에 초기화 메타데이터를 제공하는 프라이머(primer) 서브-수단(44), 및
    - 상기 시간 t보다 큰 타임 스탬프(TS)에서 상기 프로그래시브 파일(PF)의 다운로드를 시작하기 위한 시작 서브-수단(45)을 포함하는
    서버.
  7. 제5항에 있어서,
    상기 프로그래시브 파일(PF) 내의 홀들(holes)을 복구하는 복구 수단(48)을 포함하고, 상기 홀들은 상기 수신된 인코딩된 데이터 스트림에서의 데이터 손실에 의해 생기는
    서버.
  8. 인터리브된 매체 데이터(MD) 및 메타데이터(MT)를 포함하는 프로그래시브 파일(PF)로서 서버(40)로부터의 방송 멀티미디어 컨텐츠(MM)를 요청하는 클라이언트 디바이스(60)로서,
    - 상기 서버(40)에 상기 프로그래시브 파일(PF)을 요청하는 요청 수단(63)과,
    - 제2 네트워크 접속(50)을 통해 상기 프로그래시브 파일(PF)을 다운로드하고, 상기 다운로드의 종료 전에, 상기 클라이언트 프로그래시브 파일(CPF)의 다운로드된 부분으로부터 이용 가능한 상기 메타데이터(MT)를 사용하여 상기 매체 데이터(MD)를 플레이어(61)에 제공하는 다운로드 수단(62)을 포함하는
    클라이언트 디바이스.
  9. 멀티미디어 컨텐츠 방송 방법으로서,
    - 매체 데이터(MD)를 포함하는 인코딩된 데이터 스트림(EDS) 내에서 상기 멀티미디어 컨텐츠를 인코딩하는 단계와,
    - 상기 인코딩된 데이터 스트림(EDS)을 서버(40)에 전송하는 단계와,
    - 상기 매체 데이터(MD)로부터 메타데이터(MT)를 발생시키고, 인터리브된 메타데이터 및 매체 데이터를 포함하는 프로그래시브 파일(PF)을 생성하는 단계와,
    - 상기 프로그래시브 파일을 클라이언트 요청(RQ)에 적응된 클라이언트 프로그래시브 파일(CPF)로 커스터마이징하는 단계와,
    - 상기 클라이언트 프로그래시브 파일(CPF)을 클라이언트 디바이스(60)에 전송하는 단계와,
    - 상기 클라이언트 프로그래시브 파일(CPF)을 다운로드하고, 상기 다운로드의 종료 전에, 상기 클라이언트 프로그래시브 파일(CPF)의 다운로드된 부분으로부터 이용 가능한 상기 인터리브된 메타데이터(MT) 및 매체 데이터(MD)를 사용하여, 상기 인코딩된 데이터 스트림(EDS) 내에서 인코딩된 상기 멀티미디어 컨텐츠의 재생을 시작하는 단계를 포함하는
    멀티미디어 컨텐츠 방송 방법.
  10. 제9항에 있어서,
    상기 프로그래시브 파일을 클라이언트 상기 프로그래시브 파일(CPF)로 커스터마이징하는 단계 이전에, 상기 클라이언트 디바이스(60)에 할당된 프로파일 데이터의 함수로서 상기 프로그래시브 파일(PF)에 포함된 상기 매체 데이터(MD)를 커스터마이징하는 단계를 더 포함하는
    멀티미디어 컨텐츠 방송 방법.
  11. 프로세서 또는 컴퓨터로 로딩될 때, 상기 프로세서 또는 상기 컴퓨터가 제9항의 방법을 실행하게 하는 명령들의 세트를 포함하는 컴퓨터 프로그램을 저장하는 컴퓨터 판독가능 저장 매체.
  12. 삭제
KR1020057015985A 2003-02-26 2004-02-06 멀티미디어 컨텐츠 방송용 원격 통신 시스템, 서버, 멀티미디어 컨텐츠 방송 방법, 컴퓨터 판독가능 저장 매체 및 신호 전달 매체 KR101066366B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP03290453 2003-02-26
EP03290453.4 2003-02-26

Publications (2)

Publication Number Publication Date
KR20050106049A KR20050106049A (ko) 2005-11-08
KR101066366B1 true KR101066366B1 (ko) 2011-09-20

Family

ID=32921626

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020057015985A KR101066366B1 (ko) 2003-02-26 2004-02-06 멀티미디어 컨텐츠 방송용 원격 통신 시스템, 서버, 멀티미디어 컨텐츠 방송 방법, 컴퓨터 판독가능 저장 매체 및 신호 전달 매체

Country Status (6)

Country Link
US (1) US20060092938A1 (ko)
EP (1) EP1602213A1 (ko)
JP (1) JP4619353B2 (ko)
KR (1) KR101066366B1 (ko)
CN (1) CN100583880C (ko)
WO (1) WO2004077790A1 (ko)

Families Citing this family (63)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050102371A1 (en) * 2003-11-07 2005-05-12 Emre Aksu Streaming from a server to a client
EP1810110A1 (en) * 2004-09-29 2007-07-25 Nokia Corporation Data file including encrypted content
CN101077008A (zh) 2004-10-13 2007-11-21 韩国电子通信研究院 扩展多媒体文件结构以及多媒体文件生成方法和多媒体文件执行方法
US20060168227A1 (en) * 2004-11-24 2006-07-27 Nokia Corporation System, method, device, module and computer code product for progressively downloading a content file
KR20060059782A (ko) * 2004-11-29 2006-06-02 엘지전자 주식회사 영상신호의 스케일러블 프로그레시브 다운로딩을 지원하는방법
GB0508946D0 (en) * 2005-04-30 2005-06-08 Ibm Method and apparatus for streaming data
JP4719506B2 (ja) * 2005-05-19 2011-07-06 キヤノン株式会社 端末装置、コンテンツ再生方法、及びコンピュータプログラム
KR100724899B1 (ko) * 2005-11-22 2007-06-04 삼성전자주식회사 호환성있는(ｃｏｍｐａｔｉｂｌｅ) 프로그레시브 다운로드방법 및 그 시스템
US20070168534A1 (en) * 2005-12-16 2007-07-19 Nokia Corp. Codec and session parameter change
US9294728B2 (en) 2006-01-10 2016-03-22 Imagine Communications Corp. System and method for routing content
US8774602B1 (en) * 2006-02-10 2014-07-08 Tp Lab, Inc. Method to record a media file
JP4944484B2 (ja) * 2006-04-20 2012-05-30 キヤノン株式会社 再生装置、再生方法及びプログラム
BRPI0711042B1 (pt) 2006-05-02 2019-01-29 Koninklijke Philips Eletronics N V sistema, método para possibilitar um emissor de direitos criar dados de autenticação relacionados à um objeto e/ou criptografar o objeto usando uma chave diversificada e dispositivo
US20070274683A1 (en) * 2006-05-24 2007-11-29 Michael Wayne Shore Method and apparatus for creating a custom track
US8831408B2 (en) * 2006-05-24 2014-09-09 Capshore, Llc Method and apparatus for creating a custom track
US20080008440A1 (en) * 2006-05-24 2008-01-10 Michael Wayne Shore Method and apparatus for creating a custom track
US20080002942A1 (en) * 2006-05-24 2008-01-03 Peter White Method and apparatus for creating a custom track
US8805164B2 (en) 2006-05-24 2014-08-12 Capshore, Llc Method and apparatus for creating a custom track
CN1960520B (zh) * 2006-09-30 2011-02-23 中兴通讯股份有限公司 一种在移动多媒体广播中传递辅助数据的方法
US8180920B2 (en) 2006-10-13 2012-05-15 Rgb Networks, Inc. System and method for processing content
KR100765193B1 (ko) * 2006-12-21 2007-10-09 (주)스트림비젼 아이피티비 통합방송송출 장치와 방법 및 그 프로그램을저장한 저장매체
EP2127230A4 (en) * 2007-02-09 2014-12-31 Onmobile Global Ltd METHOD AND APPARATUS FOR ADAPTING MULTIMEDIA CONTENT IN TELECOMMUNICATIONS NETWORKS
US8171518B2 (en) 2007-04-20 2012-05-01 At&T Intellectual Property I, Lp System and method for presenting progressively downloaded media programs
US20080267218A1 (en) * 2007-04-27 2008-10-30 Liquid Air Lab Gmbh Media proxy for providing compressed files to mobile devices
US8627509B2 (en) 2007-07-02 2014-01-07 Rgb Networks, Inc. System and method for monitoring content
US9961374B2 (en) 2008-03-07 2018-05-01 Iii Holdings 1, Llc Pause and replay of media content through bookmarks on a server device
US8875181B2 (en) 2008-08-05 2014-10-28 At&T Intellectual Property I, L.P. Method and system for presenting media content
US9473812B2 (en) 2008-09-10 2016-10-18 Imagine Communications Corp. System and method for delivering content
JP4444358B1 (ja) * 2008-12-24 2010-03-31 株式会社プランネット・アソシエイツ プログレッシブダウンロード再生用プログラム
US9247276B2 (en) 2008-10-14 2016-01-26 Imagine Communications Corp. System and method for progressive delivery of media content
WO2010085470A1 (en) 2009-01-20 2010-07-29 Ripcode, Inc. System and method for splicing media files
CN102449975A (zh) * 2009-04-09 2012-05-09 诺基亚公司 用于媒体文件流式传输的系统、方法和装置
CA2765532C (en) 2009-06-15 2015-06-02 Research In Motion Limited Methods and apparatus to facilitate client controlled sessionless adaptation
US20110110641A1 (en) * 2009-11-11 2011-05-12 Electronics And Telecommunications Research Institute Method for real-sense broadcasting service using device cooperation, production apparatus and play apparatus for real-sense broadcasting content thereof
CN102082761A (zh) * 2009-11-27 2011-06-01 浙江省公众信息产业有限公司 一种流媒体协议转换系统及其方法
JP4904564B2 (ja) 2009-12-15 2012-03-28 シャープ株式会社 コンテンツ配信システム、コンテンツ配信装置、コンテンツ再生端末およびコンテンツ配信方法
US8259719B2 (en) * 2009-12-18 2012-09-04 Alcatel Lucent Method and apparatus for imposing preferences on broadcast/multicast service
US9401813B2 (en) * 2009-12-29 2016-07-26 Iheartmedia Management Services, Inc. Media stream monitor
KR101656102B1 (ko) * 2010-01-21 2016-09-23 삼성전자주식회사 컨텐츠 파일 생성/제공 장치 및 방법
KR101802273B1 (ko) * 2010-03-05 2017-11-28 삼성전자주식회사 복수 개의 스트림으로 구성된 컨텐츠 파일 송수신 장치 및 방법
US10028018B1 (en) * 2011-03-07 2018-07-17 Verint Americas Inc. Digital video recorder with additional video inputs over a packet link
EP2375680A1 (en) * 2010-04-01 2011-10-12 Thomson Licensing A method for recovering content streamed into chunk
US9986252B2 (en) * 2010-04-21 2018-05-29 Mykhaylo Sabelkin Method and apparatus for efficient data communications
KR20120008432A (ko) * 2010-07-16 2012-01-30 한국전자통신연구원 스트리밍 서비스 송/수신 장치 및 방법
CN102346752A (zh) * 2010-08-06 2012-02-08 康佳集团股份有限公司 网络电视多媒体文件错误标识方法及系统
KR101285654B1 (ko) * 2011-07-06 2013-08-14 주식회사 씬멀티미디어 메타 데이터와 미디어 데이터가 분리되어 있는 파일 형식의 멀티미디어 컨텐츠를 프로그래시브 다운로드하기 위한 실시간 트랜스코딩 장치
EP2566177B1 (en) * 2011-08-31 2020-10-07 Samsung Electronics Co., Ltd. Electronic apparatus and method for transferring contents on cloud system to device connected to DLNA
US9438883B2 (en) * 2012-04-09 2016-09-06 Intel Corporation Quality of experience reporting for combined unicast-multicast/broadcast streaming of media content
KR20150005576A (ko) * 2012-05-01 2015-01-14 톰슨 라이센싱 컨텐츠 다운로드를 위한 시스템 및 방법
US9767259B2 (en) * 2012-05-07 2017-09-19 Google Inc. Detection of unauthorized content in live multiuser composite streams
US9215269B2 (en) * 2012-08-23 2015-12-15 Amazon Technologies, Inc. Predictive caching for content
CN105453581B (zh) * 2013-04-30 2020-02-07 杜比实验室特许公司 从单个容器输出多种语言的音频和关联音频的系统和方法
US9330101B2 (en) * 2013-12-18 2016-05-03 Microsoft Technology Licensing, Llc Using constraints on media file formats to improve performance
JP2014131307A (ja) * 2014-02-06 2014-07-10 Sony Corp 情報処理装置、情報処理方法およびプログラム
US9544388B1 (en) 2014-05-09 2017-01-10 Amazon Technologies, Inc. Client-side predictive caching for content
US9326046B1 (en) 2015-03-19 2016-04-26 Amazon Technologies, Inc. Uninterrupted playback of video streams using lower quality cached files
GB2538998A (en) * 2015-06-03 2016-12-07 Nokia Technologies Oy A method, an apparatus, a computer program for video coding
US10986154B2 (en) * 2016-05-16 2021-04-20 Glide Talk Ltd. System and method for interleaved media communication and conversion
GB2563267A (en) * 2017-06-08 2018-12-12 Reactoo Ltd Methods and systems for generating a reaction video
US11501010B2 (en) * 2020-05-20 2022-11-15 Snowflake Inc. Application-provisioning framework for database platforms
US11593354B2 (en) 2020-05-20 2023-02-28 Snowflake Inc. Namespace-based system-user access of database platforms
US11249988B2 (en) 2020-05-20 2022-02-15 Snowflake Inc. Account-level namespaces for database platforms
CN112948860A (zh) * 2021-03-05 2021-06-11 华控清交信息科技(北京)有限公司 数据处理方法、相关节点及介质

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3202606B2 (ja) * 1996-07-23 2001-08-27 キヤノン株式会社 撮像サーバ及びその方法及び媒体
US6025888A (en) * 1997-11-03 2000-02-15 Lucent Technologies Inc. Method and apparatus for improved error recovery in video transmission over wireless channels
US6134243A (en) * 1998-01-15 2000-10-17 Apple Computer, Inc. Method and apparatus for media data transmission
US6438594B1 (en) * 1999-08-31 2002-08-20 Accenture Llp Delivering service to a client via a locally addressable interface
US7065212B1 (en) * 2000-10-27 2006-06-20 Matsushita Electric Industrial Co., Ltd. Data hiding in communication
US7213075B2 (en) * 2000-12-15 2007-05-01 International Business Machines Corporation Application server and streaming server streaming multimedia file in a client specific format
JP4114318B2 (ja) * 2000-12-26 2008-07-09 ソニー株式会社 データ記録方法、データ記録装置及び記録媒体
US20020144276A1 (en) * 2001-03-30 2002-10-03 Jim Radford Method for streamed data delivery over a communications network
US6985174B1 (en) * 2001-10-30 2006-01-10 Logitech Europe S.A. Dynamic radio frequency interference detection and correction
JP2003304524A (ja) * 2002-04-08 2003-10-24 Matsushita Electric Ind Co Ltd 映像データ配信システム
JP2004252884A (ja) * 2003-02-21 2004-09-09 Ntt Docomo Inc コンテンツ配信変換装置及びコンテンツ配信変換方法

Also Published As

Publication number Publication date
WO2004077790A1 (en) 2004-09-10
EP1602213A1 (en) 2005-12-07
JP4619353B2 (ja) 2011-01-26
KR20050106049A (ko) 2005-11-08
JP2006521038A (ja) 2006-09-14
CN1754370A (zh) 2006-03-29
US20060092938A1 (en) 2006-05-04
CN100583880C (zh) 2010-01-20

Similar Documents

Publication Publication Date Title
KR101066366B1 (ko) 멀티미디어 컨텐츠 방송용 원격 통신 시스템, 서버, 멀티미디어 컨텐츠 방송 방법, 컴퓨터 판독가능 저장 매체 및 신호 전달 매체
US10902474B2 (en) Targeted advertisement insertion for streaming media data
TWI714602B (zh) 超級本文傳輸協定(http)上動態自適應串流(dash)客戶經驗品質度量之中間軟體傳遞
RU2558615C2 (ru) Обновление файла манифеста для сетевой потоковой передачи кодированных видеоданных
CN111837403B (zh) 处理用于以流传送媒体数据的交互性事件
KR102303582B1 (ko) 웹 콘텐츠에 대한 파일 트랙들을 사용하여 미디어 데이터를 프로세싱
KR101022471B1 (ko) 멀티미디어 데이터를 기록한 정보저장매체, 그 재생방법및 재생장치
CN110832872B (zh) 使用用于文件格式方框的通用描述符处理媒体数据
KR102288815B1 (ko) Dash 표준 및 flute 프로토콜에 기초한 전송 시 패킷 손실을 처리하는 방법
US11321516B2 (en) Processing dynamic web content of an ISO BMFF web resource track
TW201830974A (zh) 對於用於串流媒體資料之預取支持之資料發信
CN112771876B (zh) 检索媒体数据的方法和设备以及发送媒体数据的方法和设备
CN101984619A (zh) 一种流媒体业务的实现方法及系统
WO2021195398A1 (en) Determination of availability of chunks of data for network streaming media data
Mekuria et al. Tools for live CMAF ingest
KR20060034376A (ko) 휴대인터넷용 멀티미디어 플랫폼 시스템
KR20070001938A (ko) 스트리밍 서비스들에서 자산 정보의 전송

Legal Events

Date Code Title Description
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee