KR20040106413A - Ｊｖｔ 비디오용의 포괄 적응층 - Google Patents

Ｊｖｔ 비디오용의 포괄 적응층 Download PDF

Info

Publication number
KR20040106413A
KR20040106413A KR10-2004-7017387A KR20047017387A KR20040106413A KR 20040106413 A KR20040106413 A KR 20040106413A KR 20047017387 A KR20047017387 A KR 20047017387A KR 20040106413 A KR20040106413 A KR 20040106413A
Authority
KR
South Korea
Prior art keywords
units
nal
gal
multimedia data
unit
Prior art date
Application number
KR10-2004-7017387A
Other languages
English (en)
Inventor
모하메드 즈바르 비샤람
알리 타바타바이
토비 월커
Original Assignee
소니 일렉트로닉스 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 일렉트로닉스 인코포레이티드 filed Critical 소니 일렉트로닉스 인코포레이티드
Publication of KR20040106413A publication Critical patent/KR20040106413A/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8451—Structuring of content, e.g. decomposing content into time segments using Advanced Video Coding [AVC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2381—Adapting the multiplex stream to a specific network, e.g. an Internet Protocol [IP] network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4381—Recovering the multiplex stream from a specific network, e.g. recovering MPEG packets from ATM cells
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/64322—IP
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64707—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless for transferring content from a first network to a second network, e.g. between IP and wireless
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/85406—Content authoring involving a specific file format, e.g. MP4 format
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

엔코딩 시스템은 멀티미디어 데이터를 엔코딩할 때 슬라이스를 발생하기 위한 비디오 코딩층(VCL)과, 각종 전송 시스템에 포괄적인 포맷을 가진 GAL 유닛의 세트를 상기 슬라이스로부터 생성하기 위한 포괄 적응층(GAL)과, GAL 유닛의 세트를 특정 전송 시스템의 포맷으로 맵하기 위하여 특정 전송 시스템과 관련된 네트워크 적응층(NAL)을 포함한다.

Description

ＪＶＴ 비디오용의 포괄 적응층{GENERIC ADAPTATION LAYER FOR JVT VIDEO}
네트워크, 멀티미디어, 데이터베이스 및 기타 디지털 능력에 대한 급속히 증가하는 수요에 좇아서, 많은 멀티미디어 코딩 방식이 발전되었다. 최근에, 국제 전기 통신 연합(ITU)의 동영상 전문가 그룹(MPEG) 및 비디오 코딩 전문가 그룹(VCEG)은 ITU Recommendation H.264 또는 MPEG-4-Part 10, 어드반스드 비디오 코덱(AVC)또는 JVT 코덱이라고 부르는 새로운 비디오 코딩/디코딩(코덱(codec)) 표준을 개발하기 위해 합동 비디오 팀(Joint Video Team; JVT)과 함께 연구하기 시작하였다.
JVT 코덱 설계는 2개의 상이한 개념적 층인 비디오 코딩층(VCL)과 네트워크 추상화층(NAL)을 구별한다. VCL은 움직임 보상, 계수의 변환 코딩 및 엔트로피 코딩과 같은 코덱의 코딩 관련 부분을 포함한다. VCL의 출력은 슬라이스이고, 각 슬라이스는 일련의 매크로 블록과 관련 헤더 정보를 포함한다. NAL은 시스템층에서 전송할 VCL 데이터를 패키지화한다. 각 시스템층은 특정 구문(syntax)을 필요로 한다. 예를 들어서, 실시간 전송 프로토콜(RTP) 시스템은 패킷 지향 구문을 필요로 하고, MPEG-2 시스템은 바이트 스트림 구문을 필요로 하며, 특정 파일 포맷(예를 들면, MP4 파일 포맷)을 사용하는 전송 시스템은 VCL 데이터가 이들 파일 포맷에 따라서 구성될 것을 필요로 한다. 그러므로, NAL은 VCL 데이터를 각종 포맷으로 패키지화할 수 있도록 특수한 전송 시스템에 특정되거나 또는 대량의 정보를 기억하여야 한다. 전자의 방법은 더 큰 최적화를 가능하게 하지만, 상호 동작 가능성을 방해한다. 반대로, 후자의 방법은 성능에 영향을 주고 기존의 전송 시스템에 대한 NAL의 동작을 제한한다.
이 출원은 2002년 4월 29일에 출원한 미국 가특허 출원 번호 제60/376,473호를 우선권 주장하며, 이 문헌은 인용에 의해 여기에 통합된다.
본 발명은 일반적으로 멀티미디어 데이터의 코딩에 관한 것이고, 특히 코드화 멀티미디어 데이터의 포괄 적응층(generic adaptation layer)에 관한 것이다.
이 특허 명세서의 일부 설명은 저작권 보호를 받는 물질을 포함한다. 저작권 소유자는 특허 명세서 또는 특허 설명이 특허 상표청의 특허 파일 또는 기록에 나타나는 한, 그 특허 명세서 또는 특허 설명을 누구든지 팩시밀리로 재생하는 것을 반대하지 않지만, 그렇지 않은 경우에는 어느 것이든지 모두 저작권의 보호를 받는다. 다음의 공고는 이하에서 설명하는 소프트웨어 및 데이터와 그 관련 도면에 적용된다: 저작권 ⓒ 2001, 소니 일렉트로닉스, 인코포레이티드, 모든 권리를 소유함.
본 발명은 비제한적인 예로서 첨부 도면을 참조하여 설명되며, 첨부 도면에서 동일한 참조 부호는 유사한 엘리멘트를 나타낸다. 도면에 있어서,
도 1은 엔코딩 시스템의 일 실시예의 블록도이고;
도 2는 디코딩 시스템의 일 실시예의 블록도이고;
도 3은 게이트웨이 시스템의 일 실시예의 블록도이고;
도 4는 본 발명을 실시하는데 적합한 컴퓨터 환경의 블록도이고;
도 5는 포괄 적응층에서 GAL 유닛들을 생성하기 위한 처리의 일 실시예를 도시한 것이고;
도 6은 포괄 적응층에 의해 수행되는 NAL에 GAL 유닛들을 제공하기 위한 처리의 일 실시예를 나타내는 흐름도이고;
도 7은 비디오의 GAL 유닛의 계층 구조도이고;
도 8은 NAL에 의해 수행되는 GAL 유닛들을 맵핑하기 위한 처리의 일 실시예를 나타내는 흐름도이고;
도 9는 GAL 구문으로부터 RTP 패킷 구문으로 구문 맵핑하는 일 실시예를 나타내는 도이고;
도 10A와 도 10B는 GAL 구문으로부터 MPEG-2 NAL 구문으로 맵핑하는 다른 실시예를 나타내는 도이고;
도 11은 GAL 구문으로부터 MP4 파일 포맷으로 맵핑하는 일 실시예를 나타내는 도이다.
엔코딩 시스템은 멀티미디어 데이터를 엔코딩할 때 슬라이스를 발생하기 위한 비디오 코딩층(VCL)과, 각종 전송 시스템에 포괄적인 포맷을 가진 GAL 유닛들의 세트를 상기 슬라이스로부터 생성하기 위한 포괄 적응층(GAL)과, 상기 GAL 유닛들의 세트를 특정 전송 시스템의 포맷으로 맵하기 위하여 특정 전송 시스템과 관련된네트워크 적응층(NAL)을 포함한다.
본 발명의 실시예에 대한 이하의 구체적인 설명에서는 첨부 도면을 참조할 것이며, 첨부 도면에 있어서, 동일한 참조 부호는 유사한 엘리멘트를 나타내고, 그 실시예들은 본 발명이 실시될 수 있는 특수한 실시예들을 예로서 제시한 것이다. 이 실시예들은 이 기술에 숙련된 사람이라면 본 발명을 실시할 수 있을 정도로 충분히 구체적으로 설명되고, 다른 실시예를 이용할 수 있다는 것 및 논리적, 기계적, 전기적, 기능적 및 기타의 변화들이 본 발명의 범위로부터 벗어나지 않고 행하여질 수 있다는 것을 이해할 수 있을 것이다. 그러므로, 이하의 구체적인 설명은 제한적인 의미로 해석되어서는 안되고, 본 발명의 범위는 특허 청구 범위에 의해서만 한정된다.
본 발명의 동작의 개관을 먼저 설명한다. 도 1은 엔코딩 시스템(100)의 일 실시예를 도시한 것이다. 엔코딩 시스템(100)은 개념적으로 3개의 층, 즉 비디오 코딩층(VCL)(102)과, 포괄 적응층(GAL)(105)과, 네트워크 적응층(NAL)(107)을 포함한다.
비디오 코딩층(102)에서, VCL 엔코더(104)는 비디오 데이터(예를 들면, 원시 소스 비디오 장면으로부터 생성된 비디오 객체 및 다른 외부 비디오 객체), 오디오 데이터(예를 들면, 원시 소스 오디오 장면으로부터 생성된 오디오 객체 및 다른 외부 오디오 객체), 합성 객체, 또는 이들의 임의의 조합을 포함할 수 있는 미디어 데이터를 수신한다. 미디어 엔코더(104)는 다수의 개별적인 엔코더로 구성될 수 있고, 또는 각종 유형의 미디어 데이터를 처리하기 위한 서브 엔코더들을 포함할 수 있다. 미디어 엔코더(104)는 미디어 데이터를 코드화하고, 일련의 매크로블록 및 관련 헤더 정보를 각각 포함하는 다수의 슬라이스를 생성한다.
포괄 적응층(105)에서, GAL 인터페이스(106)는 VCL 엔코더(104)로부터 슬라이스들을 수신하여 NAL 독립 포맷을 가진 GAL 유닛들의 세트를 생성한다. 즉, GAL 유닛들은 임의의 전송 시스템의 NAL이 대응하는 전송 시스템에서 필요로 하는 구문에 따라 데이터를 패키지화할 수 있도록 충분한 정보를 포함한다. 뒤에서 상세히 설명하겠지만, GAL 유닛들은 미디어 데이터의 구조에 대한 정보를 제공하는 구조 유닛과, VCL 엔코더(104)에서 코드화한 미디어 데이터를 포함하는 미디어 데이터 유닛과, 미디어 데이터와 관련된 파라메터 세트를 포함하는 파라메터 세트 유닛을 포함할 수 있다. 파라메터 세트는 VCL 데이터의 디코딩을 제어하는 일군의 파라메터 값들을 규정한다. 일 실시예에서, GAL 유닛들은 미디어 데이터와 관련된 보충적 강화 정보(SEI) 메시지를 포함하는 SEI 메시지 유닛들을 또한 포함한다. SEI 메시지는 미디어 데이터에 대한 보조 정보를 내포한다.
GAL 인터페이스(106)는 소프트웨어, 하드웨어 또는 이들의 조합으로 구현될 수 있다. 일 실시예에서, GAL 인터페이스(106)는 VCL 엔코더(104)의 일부이다. 다른 예에서, GAL 인터페이스(106)는 VCL 엔코더(104)와 직접, 또는 공중 네트워크(예를 들면, 인터넷) 또는 사적 네트워크(예를 들면, LAN)를 통하여 통신하는 독립 모듈이다.
네트워크 적응층(107)에서, 특정 전송 시스템 유형의 NAL 인터페이스(108)는GAL 인터페이스(106)로부터 GAL 유닛들을 수신하고, GAL 유닛들을 그 전송 시스템 유형의 구문에 따라 패키지화한다. 각각의 NAL 인터페이스(108)는 GAL 인터페이스(106)와 직접 또는 사적 네트워크나 공중 네트워크를 통하여 통신할 수 있다. NAL 인터페이스(108)는 소프트웨어, 하드웨어 또는 이들의 조합으로 구현될 수 있다. 전송 시스템 유형의 예로는 패킷 지향 구문을 필요로 하는 인터넷 프로토콜(IP) 전송 시스템(110)(예를 들면, IP를 통한 실시간 전송 프로토콜(RTP/IP) 시스템), 비트 스트림 구문을 필요로 하는 MPEG-2 시스템(112), 특정 파일 포맷(예를 들면, MP4 파일 포맷)을 필요로 하는 파일 저장 시스템(114) 등이 있다.
일 실시예에서, NAL 인터페이스(108)는 컨텐츠를 운반하기 위해 다수의 채널을 사용한다. 예를 들면, NAL 인터페이스(108)는 제1 스트림에서 미디어 데이터를 운반하고, 제2 스트림에서 상기 미디어 데이터와 관련된 파라메터 세트를 운반하며, 제3 스트림에서 상기 미디어 데이터와 관련된 SEI 메시지들을 운반할 수 있다. 다른 실시예에서, NAL 인터페이스는 단일 채널 내에서 컨텐츠를 운반한다. 일 실시예에서, 각 유형의 NAL 인터페이스(108)는 이 유형의 NAL 인터페이스에서 사용하는 하나 이상의 채널들을 지정하고 각 채널의 특성을 규정하는 미리 규정된 사양(specification)(이 명세서에서는 NAL 디스크립터라고 부른다)과 관련된다.
도 2는 디코딩 시스템(200)의 일 실시예를 도시한 것이다. 디코딩 시스템(200)은 엔코딩 시스템(100)과 비교해서 역순서로 동작하는 3개의 층, 즉, 네트워크 적응층(201)과 포괄 적응층(203)과 비디오 코딩층(205)을 개념적으로 포함한다.
네트워크 적응층(201)에서, NAL 인터페이스(202)는 IP 시스템, MPEG-2 시스템, 파일 저장 시스템(예를 들면, MP4 시스템) 등과 같은 각종 전송 시스템으로부터 데이터를 수신하고, 그 데이터를 GAL 유닛으로 변환한다. 일 실시예에서, 변환은 특정 NAL 인터페이스(202)의 디스크립터에 의해 지정된 역 맵핑에 기초하여 수행된다.
또한, 포괄 적응층(203)에서, GAL 인터페이스(204)는 GAL 유닛으로부터 슬라이스를 추출하고, 그 슬라이스들을 비디오 코딩층(205)에서 동작하여 컨텐츠를 디코드하는 VCL 디코더(206)에 보낸다.
도 3은 게이트웨이 시스템(300)의 일 실시예를 도시한 것이다. 게이트웨이 시스템(300)은 다른 유형의 2개의 네트워크(304, 306)를 접속하는 게이트웨이(302)를 포함한다. 예를 들면, 네트워크(306)는 IP 기반 네트워크이고 네트워크(304)는 MPEG-4 기반 네트워크일 수 있다. 게이트웨이(302)는 개념적으로 네트워크 적응층(310, 312)과 포괄 적응층(314)으로 구성된 변환 시스템(308)을 포함한다.
네트워크 적응층(310)에서, NAL 인터페이스(316)는 제1 네트워크(304)(예를 들면, MPEG-4 기반 네트워크)로부터 데이터를 수신하고, 그 데이터를 위에서 설명한 바와 같이 GAL 유닛으로 다시 패키지화 한다. 포괄 적응층(314)에서, GAL 인터페이스(318)는 NAL 인터페이스(316)로부터 GAL 유닛들을 수신하고 그 GAL 유닛들을 NAL 인터페이스(320)에 전달한다. 네트워크 적응층(312)에서, NAL 인터페이스(320)는 GAL 유닛들을 제2 네트워크(306)(예를 들면, RTP/IP 기반 네트워크)의 전송 매체에서 필요로 하는 구문으로 맵하고, 결과적인 컨텐츠를 제2 네트워크(306)에 보낸다.
유사하게, 제2 네트워크(306)로부터 수신된 데이터는 NAL 인터페이스(320)에 의해 GAL 유닛으로 다시 패키지화되고, GAL 인터페이스(318)로 전달되어 NAL 인터페이스(316)에 의해 제1 네트워크의 구문으로 맵될 수 있다.
도 4에 대한 이하의 설명은 본 발명을 구현하는데 적합한 컴퓨터 하드웨어 및 다른 동작 구성 요소의 개관을 제공하기 위한 것이지만, 적용가능한 환경을 제한하는 의도는 없다. 도 4는 도 1의 GAL 인터페이스(106) 및/또는 NAL 인터페이스(108)로서, 도 2의 GAL 인터페이스(204) 및/또는 NAL 인터페이스(202)로서, 또는 도 3의 GAL 인터페이스(318) 및/또는 NAL 인터페이스(316 또는 320)로서 사용하기에 적합한 컴퓨터 시스템의 일 실시예를 도시한다.
컴퓨터 시스템(440)은 시스템 버스(465)에 결합된 프로세서(450), 메모리(455) 및 입력/출력 장치(460)를 포함한다. 메모리(455)는 프로세서(450)에 의해 실행될 때 여기에서 설명하는 방법들을 수행하는 명령어들을 저장하도록 구성된다. 입력/출력 장치(460)는 프로세서(450)에 의해 액세스가능한 임의 유형의 기억 장치를 비롯해서 각종 유형의 컴퓨터 판독가능 매체를 또한 포함한다. 이 기술에 숙련된 사람이라면 용어 "컴퓨터 판독 가능 매체"가 데이터 신호를 엔코드하는 반송파를 더 포함한다는 것을 즉시 알 것이다. 또한, 시스템(440)은 메모리(455)에서 실행하는 운영 체계 소프트웨어에 의해 제어된다는 것도 알 것이다. 입력/출력 장치 및 관련 매체(460)는 운영 체계 및 본 발명의 방법들을 위한 컴퓨터 실행가능 명령어들을 저장한다. 도 1과 도 2에 도시한 메타데이터 발생기(106), 파일 생성기(108), 메타데이터 추출기(204) 및 미디어 데이터 스트림 프로세서(206)는 각각 프로세서(450)에 결합된 별도의 구성 요소일 수도 있고, 또는 프로세서(450)에 의해 실행되는 컴퓨터 실행가능 명령어로 구체화될 수도 있다. 일 실시예에서, 컴퓨터 시스템(440)은 ISP(인터넷 서비스 공급자)의 일부이거나, 또는 인터넷을 통해 미디어 데이터를 전송 또는 수신하기 위해 입력/출력 장치(460)를 통해 ISP에 결합될 수 있다. 본 발명은 인터넷 액세스 및 인터넷 웹 기반 사이트에 제한되지 않고, 직접 결합된 사적 네트워크를 또한 생각할 수 있다는 것은 명백하다.
컴퓨터 시스템(440)은 다른 구조를 가진 많은 가능한 컴퓨터 시스템 중의 일 예라는 것을 알 것이다. 전형적인 컴퓨터 시스템은 일반적으로 적어도 프로세서, 메모리, 및 메모리를 프로세서에 결합하는 버스를 포함한다. 이 기술에 숙련된 사람이라면 본 발명이 멀티프로세서 시스템, 미니컴퓨터, 메인프레임 컴퓨터 등을 포함하는 다른 컴퓨터 시스템 구성에 의해 실행될 수 있다는 것을 즉시 알 것이다. 본 발명은 또한 통신 네트워크를 통하여 결합되는 리모트 처리 장치에 의해 타스크가 수행되는 분산형 컴퓨팅 환경에서 실행될 수 있다.
이제, 포괄 적응층의 동작에 대하여 더 자세하게 설명하겠다. 구체적으로, GAL 인터페이스는 VCL 로부터 수신된 슬라이스를 이용하여 GAL 유닛의 세트를 생성한다. GAL 유닛들은 미디어 데이터의 구조를 규정하는 구조 유닛 및 VCL로부터의 코드화 미디어 데이터를 포함하는 미디어 데이터 유닛을 포함한다. 일 실시예에서, GAL 유닛들은 또한 멀티미디어 데이터와 관련된 파라메터 세트를 포함하는 파라메터 세트 유닛을 포함한다. 일 실시예에서, GAL 유닛은 미디어 데이터와 관련된 SEI 메시지를 내포하는 SEI 메시지 유닛을 추가로 포함한다.
도 5는 포괄 적응층에서 GAL 유닛들을 생성하기 위한 처리의 일 실시예를 도시한 것이다.
도 5를 참조하면, VCL에 의해 코드화된 미디어 데이터의 예시적 모델(500)이 도시되어 있다. 모델(500)의 최하위 레벨에는 VCL 데이터를 내포하는 슬라이스들이 있다. 모델(500)의 제2 레벨에는 이미지 데이터를 나타내는 화상(picture)들이 있다. 각 화상은 일련의 슬라이스로서 코드화된다. 모델(500)의 제3 레벨에는 화상들의 그룹(GOP)이 있다. 각 GOP는 독립적으로 디코드할 수 있는 일련의 화상들을 결합한다. 모델(500)의 최고위 레벨에는 GOP의 시퀀스(sequence)를 내포하는 시퀀스들이 있다.
포괄 적응층은 미디어 데이터의 상기 구조를 규정하는 구조 유닛들을 생성한다. 구체적으로, 구조 유닛들은 모델(500)의 각 층의 개시와 종료를 지정한다. 예를 들면, GAL 유닛의 세트(502)는 시퀀스 층의 개시를 신호하는 -이 시퀀스에 관련된 모든 데이터는 대응하는 순서 종료 유닛(518) 이전에 발생한다- 순서 개시 유닛(504)과, 화상 그룹(GOP)의 개시를 신호하는 -GOP의 모든 데이터는 유닛(506)의 뒤에 및 대응하는 GOP 종료 유닛(516) 이전에 발생한다- GOP 개시 유닛(506)과, 화상의 개시를 신호하는 -이 화상과 관련된 모든 데이터는 유닛(508)의 뒤에 및 대응하는 화상 종료 유닛(514) 이전에 발생한다- 화상 개시 유닛(508)을 내포하는 구조 유닛들을 포함한다. 일 실시예에서, 종료층 유닛(514~518)들은 하나의 층의 종료가 다른 층의 개시로부터 추론되기 때문에(시퀀스의 개시와 종료에서는 제외) 선택적인 것이다.
GAL 인터페이스가 VCL 엔코더의 일부로 구성되는 일 실시예에서, GAL 인터페이스는 미디어 데이터의 각 층의 개시와 종료를 표시하는 VCL로부터의 신호를 수신한다. GAL 인터페이스가 독립 모듈로 구성되는 다른 실시예에서, GAL 인터페이스는 미디어 데이터의 구조에 관한 정보(예를 들면, 미디어 데이터의 각 층의 개시와 종료에 관한 정보)를 VCL 엔코더로부터 수신한 슬라이스의 헤더로부터 추출한다.
또한, GAL 유닛의 세트(502)는 슬라이스(512)들을 내포하는 미디어 데이터 유닛들을 포함한다. 미디어 데이터 유닛에는 슬라이스 유닛과 분할 슬라이스 유닛의 2가지 유형이 있다. 일 실시예에서, 슬라이스 유닛은 슬라이스 헤더와 비디오 데이터로 구성된 슬라이스를 내포한다. 비디오 데이터는 매크로블록 세트에 대한 VCL 데이터를 내포한다. VCL 데이터는 슬라이스의 매크로블록에 대하여 VCL에 의해 규정된 구문 엘리멘트를 나타내는 비트들의 시퀀스이다.
분할 슬라이스 유닛은 슬라이스의 일부를 포함한다. 즉, 헤더 데이터와 페이로드 데이터를 모두 포함하는 슬라이스의 데이터는 분할될 수 있다. 분할되었을 때, 비디오 데이터와 헤더 데이터 엔코딩의 심볼들의 세트가 분리된다. 슬라이스의 각 파티션(partition)의 데이터는 심볼들이 헤더 또는 비디오 구문에 의해 규정된 순서로 그 파티션 내에 있는 모든 비트들로 구성된다. 예를 들어서, 만일 데이터 파티션이 헤더와 비디오 데이터를 모두 내포하고 있으면, 순서는 헤더 비트 다음에 비디오 데이터 비트가 위치하는 순서로 된다. 일 실시예에서는 헤더 정보(슬라이스 헤더를 포함함), 인트라 계수, 및 인터 계수를 각각 내포하는 3개의 상이한 파티션들이 있다. 분할된 슬라이스 유닛은 분할된 슬라이스 데이터에 대하여 규정되고,각 유닛은 파티션의 데이터가 후속되는 파티션 식별자를 내포한다.
도시를 생략한 일 실시예에 있어서, GAL 유닛의 세트(502)는 파라메터 세트 유닛과 SEI 메시지 유닛을 또한 포함한다. 파라메터 세트 엘리멘트는 VCL 데이터의 디코딩을 제어하는 한 세트의 파라메터 값들을 규정한다. 일 실시예에서, 파라메터들은 그들이 변화할 수 있는 최하위 레벨에 따라서 미디어 데이터 구조의 레벨들과 관련된다. 예를 들면, 화상 크기와 같은 GOP 파라메터 값은 GOP들 사이에서 변화할 수 있지만, 임의의 하위 레벨에서는 변화하지 않는다. 그러므로, 일 실시예에서, 하나의 GOP의 모든 화상과 슬라이스들은 동일한 GOP 파라메터 값을 사용하고, 슬라이스 파라메터는 각각의 슬라이스에 대하여 변화될 수 있다. 일 실시예에서, 각 파라메터 세트는 비디오 시퀀스를 통하여 일정한 독특한 식별자가 할당되고, 각 슬라이스 유닛은 대응하는 파라메터 세트 식별자를 참조한다.
SEI 메시지는 비디오 모델의 4개의 층(시퀀스, GOP, 화상, 슬라이스) 중 임의의 층에 관련된 정보를 내포한다. 일 실시예에서, 임의 레벨에서의 SEI 메시지는 메시지 유형 식별자와 메시지 유형에 의해 규정된 포맷을 가진 메시지 데이터로 구성된다.
도 6은 포괄 적응층에 의해 수행되는 NAL에 GAL 유닛들을 제공하는 처리의 일 실시예의 흐름도를 도시한 것이다. 처리는 하드웨어(예를 들면, 회로, 전용 로직 등), 소프트웨어(예를 들면, 범용 컴퓨터 또는 전용 머신에서 동작하는 것), 또는 이들의 조합을 포함하는 로직을 처리함으로써 수행될 수 있다. 소프트웨어 구현 처리에 있어서, 흐름도의 설명은 이 기술에 숙련된 사람이 적절히 구성된 컴퓨터(메모리를 비롯한 컴퓨터 판독가능 매체로 부터 명령어를 실행하는 컴퓨터의 프로세서)에서 처리를 실행하기 위한 명령어들을 포함하는 프로그램을 개발할 수 있게 한다. 컴퓨터 실행가능 명령어들은 컴퓨터 프로그래밍 언어로 기록될 수 있고, 또는 펌웨어 로직으로 구체화될 수 있다. 인식된 표준과 일치하는 프로그래밍 언어로 기록된 경우, 그 명령어들은 각종 하드웨어 플랫폼에서 각종 운영 체계에 대한 인터페이스를 위해 실행될 수 있다. 또한, 본 발명의 실시예들은 임의의 특수한 프로그래밍 언어와 관련하여 설명되지 않는다. 각종 프로그래밍 언어는 여기에서 설명하는 기술들을 구현하기 위해 사용될 수 있다는 것을 알 것이다. 또한, 동작을 취할 때 또는 결과를 야기할 때 하나의 형태 또는 다른 형태(예를 들면, 프로그램, 절차, 처리, 응용, 모듈, 로직,...)로 소프트웨어를 이야기하는 것이 이 기술계에서 일반적이다. 이러한 표현은 컴퓨터에 의한 소프트웨어의 실행에 의해 컴퓨터의 프로세서가 동작을 수행하거나 결과를 생성하는 것을 이야기하는 단순한 속기법이다. 더 많은 또는 더 적은 동작들이 본 발명의 범위에서 벗어나지 않고 도 6에 도시된 처리에 통합될 수 있으며, 도 6에 도시되고 여기에서 설명하는 블록들의 배열에 의해 특수한 순서를 의미하는 것이 아니라는 것을 알 것이다.
도 6을 참조하면, 처리 로직은 VCL로부터 슬라이스를 수신하는 것으로부터 시작한다(처리 블록 602). 다음에, 처리 로직은 슬라이스에 내포된 멀티미디어 데이터의 구조를 식별한다(처리 블록 604). 멀티미디어 데이터의 구조는 시퀀스, GOP, 화상 및 슬라이스와 같은 멀티미디어 데이터 내의 다수의 단계적 층들에 의해 규정된다. 일 실시예에서, 처리 로직은 각 층의 개시와 종료를 표시하는 VCL로부터수신된 신호에 기초해서 멀티미디어 데이터의 구조를 식별한다. 다른 실시예에서, 처리 로직은 VCL 엔코더로부터 수신된 슬라이스의 헤더로부터 추출한 정보를 이용하여 멀티미디어 데이터의 구조를 식별한다.
더 나아가서, 처리 로직은 VCL로부터 수신한 슬라이스 및 멀티미디어 데이터의 구조에 관한 정보를 이용하여 GAL 유닛의 세트를 생성한다(처리 블록 606). GAL 유닛의 포맷은 각종 NAL 유형(예를 들면, IP NAL, MPEG-2 NAL, 미디어 파일 포맷 NAL, 등)에 대하여 포괄적이다. 일 실시예에서, GAL 유닛들의 세트는 멀티미디어 데이터의 구조를 규정하는 구조 유닛, 코드화 멀티미디어 데이터를 포함하는 미디어 데이터 유닛, 멀티미디어 데이터와 관련된 파라메터 세트를 포함하는 파라메터 세트 유닛 및 멀티미디어 데이터와 관련된 SEI 메시지를 포함하는 SEI 메시지 유닛들을 포함한다.
그 다음에, 처리 로직은 GAL 유닛 세트를 특정 유형의 NAL에 전송한다(처리 블록 608). 일 실시예에서, 처리 로직은 GAL 유닛 세트를 NAL로 전송하기 전에 미리 규정된 요구 조건에 따라 GAL 유닛들을 순서정하는데, 이것에 대해서는 뒤에서 더 구체적으로 설명할 것이다.
일 실시예에서, GAL 유닛(이 명세서에서 캐리지 유닛이라고도 함)은 임의의 하위 전송 또는 저장 메카니즘일 수 있는 채널을 통하여 보내진다. 채널은 NAL로부터 VCL 디코더로, VCL 엔코더로부터 NAL로, 또는 NAL로부터 게이트웨이의 NAL로 이어질 수 있다. GAL 유닛들은 미디어 데이터 스트림과 함께 대역 내에서 전달될 수도 있고, 대역 외에서 전달될 수도 있고(파라메터 세트 GAL 유닛들을 전송할 때),또는 정보를 미리 알고 있는 경우(예를 들면, 비디오을 엔코딩할 때 하드웨어 파라메터 세트를 사용하는 경우)에는 전혀 전달되지 않을 수도 있다.
일 실시예에서, 각 GAL 유닛의 구문은 페이로드가 후속되는 공동 헤더에 의해 작성된다. 일 실시예에서, 구문은 각각의 포괄 엘리멘트에 대하여 하나의 클래스로, 구문 설명 언어(Syntactic Description Language)를 이용하여 규정된다. 구문은 여분의 정보가 GAL 유닛에 포함되게 함으로써 확장가능성을 제공한다. 확장된 구문을 이해하지 못한 디코더는 추가의 정보를 무시하도록 구성된다.
일 실시예에서, GAL 유닛의 헤더는 8-비트 유형 식별자를 포함한다. 표 1은 GAL 유닛의 다른 유형의 식별자들을 규정하는 태그의 리스트를 제공한다.
태그값 태그명
0x00 무효값(즉, 개시 코드)
0x10 GAL_SEQUENCE_START
0x11 GAL_SEQUENCE_END
0x12 GAL_GOP_START
0x13 GAL_GOP_END
0x14 GAL_PICTURE_START
0x15 GAL_PICTURE_END
0x16 GAL_SLICE_START
0x17 GAL_SLICE_END
0x18 GAL_SLICE_UNPARTIONED_DATA
0x19 GAL_SLICE_PARTIONED_DATA
0x1A GAL_PARAMETER_SET
0x1B GAL_SEQUENCE_SEI_MESSAGE
0x1C GAL_GOP_SEI_MESSAGE
0x1D GAL_PICTURE_SEI_MESSAGE
0x1E GAL_SLICE_SEI_MESSAGE
일 실시예에서, 각 GAL 유닛의 바디의 구문은 2단계, 즉 먼저, 패딩(padding), 개시 에뮬레이션 또는 바이트 정렬과 관계가 없는 비트 지향 구문으로서, 그 다음에, 개시 코드 에스케이프를 가진 바이트 지향 구문으로서 규정된다.메시지는 또한 메시지 헤더와 메시지 바디에서 비트의 연쇄(concatenation)로서 규정된다. 일 실시예에서, 모든 GAL 유닛의 길이는 GAL 유닛 구문에서 엔코드되지 않는다. 그 대신에, GAL 유닛의 길이는 개시 코드, 길이 필드, 또는 임의의 다른 적당한 필드를 이용하여 실행할 수 있는 하위 레벨 프레이밍 프로토콜에 의해 규정된다.
일 실시예에서, NAL로 전송된 GAL 유닛들의 세트는 액세스 유닛을 나타낸다. MPEG-4 규정에 따라서, 액세스 유닛은 타이밍 정보가 부착될 수 있는 최소 데이터 엔티티인 스트림 내에서 개별적으로 액세스가능한 데이터 부분이다. 일 실시예에서, GAL 액세스 유닛은 동일한 타이밍 정보를 공유하는 GAL 유닛의 연쇄된 시퀀스를 포함한다. GAL 액세스 유닛은 각 GAL 유닛의 크기 및 GAL 액세스 유닛에 내포된 GAL 유닛의 수를 지정하는 헤더를 포함한다. 표 2는 예시적인 GAL 액세스 유닛을 나타낸다.
GAL 유닛의 수
GAL 유닛 크기 1
…
GAL 유닛 크기 m
GAL 유닛 1
GAL 유닛 2
…
GAL 유닛 m
일 실시예에서, NAL에 보내진 GAL 유닛은 하나의 시퀀스로 순서정해진다(ordered). 이 순서는 각종 GAL 유닛 내 정보들간의 의존성에 기초한 정보의 논리적 순서정하기일 수 있다. 일 실시예에서, GAL 유닛의 순서정하기는 NAL의 임의의 특수한 전달 스케쥴을 의미하는 것이 아니다. 공식적으로, 순서정하기 제한은 전체순서정하기가 아니라 GAL 유닛을 통한 부분 순서정하기를 강요한다. NAL은 결과적인 논리 정보가 GAL 유닛 시퀀스의 부분적 순서정하기를 만족시키도록 재구성되게끔 GAL 유닛들을 전달해야 한다. 예를 들면, 이것은 임의의 슬라이스가 파라메터 세트를 참조하기 전에 파라메터 세트가 이용가능하게 되고 NAL이 파라메터 세트를 1회 이상 보내게 하는 것을 NAL이 보장해야 한다는 것을 의미한다.
일 실시예에서, GAL 유닛의 순서정하기는 다음의 사항들을 만족시킨다. (1) 파라메터 세트 메시지는 그 메시지들이 참조되기 전에 발생해야 한다. (2) SEI 메시지는 그들이 속하는 아이템의 개시 전에 발생해야 한다. (3) 비디오 메시지는 디코딩 순서로 운반된다. (4) 단일 화상 내의 슬라이스들은 임의의 순서로 보내질 수 있다(예를 들면, 슬라이스들은 "스캔 순서"로 보내질 필요는 없다). (5) 단일 슬라이스의 데이터 파티션들은 임의의 순서로 보내질 수 있다.
도 7은 비디오에 대한 GAL 유닛의 계층적 구조를 도시한 것이다. 위에서 설명한 바와 같이, 여기에서 GAL 캐리지 유닛(GAL CU)이라고도 부르는 GAL 유닛은 헤더(722)와 페이로드(720)를 포함한다. 일 실시예에서, GAL CU 페이로드(720)는 개시 코드 에뮬레이션 보호를 가진 바이트 기반의 것이다. 비디오의 GAL CU(718)는 다른 유형의 CU의 조합으로부터 발생한다. 구체적으로, GAL 비디오 구조 CU(708)는 다수의 구조 유닛(702)으로 구성되고, GAL 비디오 데이터 CU(710)는 슬라이스 유닛(706)과 분할 데이터 유닛(704)과 같은 다수의 미디어 데이터 유닛으로 구성된다. 다음에, GAL 비디오 구조 CU(708)와 GAL 비디오 데이터 CU(710)는 결합되어 GAL 비디오 CU(712)를 구성한다. GAL 비디오 CU(712)는 GAL 파라메터 세트 CU(714) 및GALSEICU(716)와 추가로 결합되어 비디오와 관련된 최종의 GALCU(718)를 구성한다.
이제, 네트워크 적응층(NAL)의 동작을 더 자세하게 설명하겠다. 각 NAL은 특정의 전송 시스템(예를 들면, RTP/IP 시스템, MPEG-2 시스템, MP4 파일 포맷 시스템 등)과 관련되고, NAL은 전송 시스템에 따라서 패킷 지향 네트워크 적응층, 비트 스트림 네트워크 적응층, 파일에 비디오 컨텐츠를 저장하기 위한 저장 적응층 등으로 될 수 있다.
도 8은 NAL에 의해 수행되는 GAL 유닛을 맵핑하기 위한 처리의 일 실시예를 나타내는 흐름도이다. 처리는 하드웨어(예를 들면, 회로, 전용 로직 등), 소프트웨어(예를 들면, 범용 컴퓨터 시스템 또는 전용 머신에서 동작하는 것), 또는 이들의 조합을 포함할 수 있는 로직을 처리함으로써 수행될 수 있다. 더 많거나 더 적은 동작들이 발명의 범위에서 벗어나지 않고 도 8에 도시된 처리에 통합될 수 있고, 도 8에 도시되고 여기에서 설명하는 블록들의 배열에 의해 특수한 순서가 의미되는 것이 아니라는 것을 알 것이다.
도 8을 참조하면, 처리 로직은 GAL로부터 GAL 세트들을 수신하는 것으로부터 시작한다(처리 블록 802). 다음에, 처리 로직은 GAL 유닛의 세트를 특정 전송 시스템과 관련된 NAL의 포맷으로 맵하고(처리 블록 804), 그 맵된 컨텐츠를 특정 전송 시스템에 보낸다(처리 블록806). 일 실시예에서, 처리 로직은 이 NAL에 의해 사용되는 논리 채널을 식별하고, 어떤 유형의 GAL 유닛이 각 채널에서 운반되는지를 결정하며, 각 채널의 구문을 결정하고, GAL 유닛들을 대응하는 채널의 구문으로 맵핑함으로써 맵핑을 수행한다.
위에서 설명한 바와 같이, 각 NAL은 하나 이상의 논리 채널을 통하여 컨텐츠를 운반할 수 있다. 예를 들면, 채널은 시스템 레벨 스트림 또는 대역 외 시그널링 프로토콜일 수 있다. 다른 예에서, 논리 채널은 미디어 데이터(예를 들면, 데이터의 교환이 없는 하드와이어드 파라메터 세트)와 관련된 이전의 정보 교환을 반영할 수 있다. 파일 포맷 NAL의 경우에, "채널"은 미디어 데이터(예를 들면, VCL 데이터)와 메타데이터(예를 들면, 비 VCL 데이터)를 모두 포함해서 파일에 저장된 정보이다. 일 실시예에서, 각 NAL 유형은 이 NAL 유형에 의해 사용되는 채널의 수, 각 채널의 특성, 각 채널을 통해 운반되는 GAL 유닛의 유형 및 GAL 유닛의 포괄 구문으로부터 각 채널의 구문으로의 맵핑을 지정하는 NAL 디스크립터에 의해 규정된다. 표 3은 예시적인 NAL 디스크립터의 필드들을 나타낸다.
논리 채널의 수 이 NAL에서 사용되는 채널의 수를 나타낸다.
논리 채널 디스크립터 NAL에 의해 사용되는 각 논리 채널의 특성을 규정한다.
표 4는 표 3의 논리 채널 디스크립터의 예시적인 필드들을 나타낸다.
채널 클래스 저장, 스트림, 무효(null)이 메카니즘을 구현하기 위해 NAL이 사용하는 시스템 층의 일반적인 클래스를 표시한다. 무효 채널은 정보가 전송되지 않는다는 것을 표시한다. 이것은 모든 NAL에 의해 지원되지 않는 SEI 메시지와 같이 선택적 아이템에 대하여 사용된다.
GAL 유닛 유형 이 논리 채널에 내포된 GAL 유닛의 유형을 표시한다.
우선순위 GAL 채널의 우선순위 레벨을 표시한다.
개시 코드 이 채널이 개시 코드를 사용하는지를 표시한다. 디폴트 개시 코드는 MPEG-2 시스템에 의해 규정된 "00 00 01"이다.
개시 코드 에뮬레이션 회피 이 채널이 채널에서 개시 코드의 에뮬레이션을 방지하기 위해 에스케이프 코드를 사용하는지를 표시한다. 이 값은 채널이 개시 코드를 사용하는 경우에만 설정된다.
초기 디스크립션 정보 정적, 동적채널이 세션의 수명중에 정보를 전송할 수 있는지를 표시한다. 이것은 예를 들면, NAL이 파라메터 세트 메시지를 정적으로 지원하는지(재생을 시작하기 전에 1회 설정된다) 또는 동적으로 지원하는지(비디오가 존재하는 동안 변화하고 세션 셋업시에 디코더에 대한 우선순위를 반드시 알 필요는 없다)를 표시하기 위해 사용된다.
이제, 각종 유형의 NAL에 의한 GAL 유닛의 예시적인 맵핑을 더 자세하게 설명하겠다.
RTP/IP NAL에서 시작해서, 일 실시예에서, 모든 정보는 RTP 패킷 내에 캡슐화된 다른 유형의 패킷으로서 단일의 대역 내 채널에서 운반될 수 있다. 정보는 미디어 데이터, 파라메터 세트 데이터 및 SEI 메시지를 포함할 수 있다. 표 5는 RTP/IP NAL의 적응층 디스크립터의 일 실시예를 나타낸다.
채널수 2
채널 1 디스크립터 클래스 스트림
GAL 유형 비디오 데이터 유닛,파라메터 세트 유닛
우선 순위 높은
개시 코드 없음
개시 코드 에뮬에시션 방지 없음
캐리지 동적
채널 2 디스크립터 클래스 무효
GAL 유형 비디오 구조 유닛
우선 순위 N/A
개시 코드 N/A
개시 코드 에뮬레이션 방지 N/A
캐리지 N/A
도 9는 GAL 구문으로부터 RTP 패킷 구문으로 구문 맵핑하는 일 실시예를 나타낸 것이다. GAL(902)의 구문으로부터 RTP/IP NAL(904)로의 구문 맵핑은 비디오 데이터 유닛 또는 파라메터 세트 유닛을 변화없이 캡슐화하는 것 및 RTP 헤더를 각 유닛 앞에 첨부하는 것을 포함한다. RTP/IP NAL은 개시 코드들을 추가할 필요가 없고, 개시 코드 에뮬레이션 방지도 제공하지 않는다.
대안적인 실시예에서, RTP/IP NAL은 파라메터 세트값들을 대역 외에서 보내기 위해 세션 디스크립션을 사용한다. 표 6은 대안적 실시예에 따른 RTP/IP NAL의 적응층 디스크립터를 나타낸다.
채널수 2
파라메터 세트 개방
채널 1 디스크립터 클래스 스트림
GAL 유형 비디오 데이터
우선 순위 높음
개시 코드 없음
앤티 에뮬레이션 없음
캐리지 동적
채널 2 디스크립터 클래스 스트림
GAL 유형 파라메터 세트
우선 순위 높음
개시 코드 없음
개시 코드 에뮬레이션 방지 없음
캐리지 정적
MPEG-2 시스템 NAL과 관련하여, 일 실시예에서, MPEG-2 액세스 유닛은 비디오 데이터 스트림에서 비디오 데이터를 운반하기 위해 사용된다. 비디오 스트림은 또한 액세스 유닛과 헤더 사이의 경계들을 구분하기 위해 헤더(화상 헤더 등)들을 내포한다. SEI 메시지와 파라메터 세트들은 프로그램 디스크립터 내에 별도로 위치된다. 표 7은 일 실시예에 따른 MPEG-2 NAL의 적응층 디스크립터를 나타낸다.
채널수 2
채널 1 디스크립터 클래스 스트림
GAL 유형 비디오 데이터, 비디오 구조
우선 순위 높음
개시 코드 있음
개시 코드 에뮬레이션 방지 있음
내부 디스크립션 동적
채널 2 디스크립터 클래스 스트림
GAL 유형 파라메터 세트, SEI 메시지
우선 순위 높음
개시 코드 없음
개시 코드 에뮬레이션 방지 없음
내부 디스크립션 정적
도 10A는 GAL(1002)로부터 MPEG-2 NAL(1004)로의 맵핑의 일 실시예를 나타낸다. 맵핑은 다수의 프로그램 요소 스트림(PES), 즉, 미디어 데이터 정보를 내포하는 제1 PES, SEI 메시지를 내포하는 제2 PES 및 파라메터 세트를 내포하는 제3 PES에 대하여 수행된다.
다른 실시예에서, 모든 데이터는 파라메터 세트 및 메시지를 비롯해서 비디오 스트림 채널의 대역 내에서 운반된다. AVC 패킷이라고 부르는 단일 패킷 포맷은 포괄 액세스 유닛과 등가인 것으로 규정된다. AVC 패킷은 MPEG-2 프로그램 또는 전송 스트림을 통해 운반될 수 있다. 표 8은 제2 실시예에 따른 MPEG-2 NAL의 적응층 디스크립터를 나타낸다.
채널수 1
채널 1 디스크립터 클래스 스트림
GAL 유형 비디오 데이터, 비디오 구조,파라메터 세트
우선 순위 높음
개시 코드 없음
개시 코드 에뮬레이션 방지 없음
캐리지 동적
또다른 실시예에서, MPEG-2 NAL은 슬라이스를 가진 JVT 비디오(시퀀스 헤더,GOP 헤더 등)에 대하여 MPEG-2 비디오 구문을 사용한다. 이것은 비트 스트림에서 경계를 정하기 위해 MPEG-2 개시 코드를 사용한다. 표 9는 제3 실시예에 따른 MPEG-2의 적응층 디스크립터를 나타낸다.
채널수 1
채널 1 디스크립터 클래스 스트림
GAL 유형 비디오 데이터, 비디오 구조,파라메터 세트
우선 순위 높음
개시 코드 없음
개시 코드 에뮬레이션 방지 없음
캐리지 동적
도 10B는 GAL(1010)로부터 MPEG-2 NAL(1012)로의 맵핑의 다른 실시예를 나타낸다. 맵핑은 하나의 프로그램 요소 스트림(PES)에 대하여 수행된다. MPEG-2 사용자 데이터는 SEI 메시지를 맵핑하기 위해 사용된다.
MP4 파일 포맷 NAL과 관련해서, 일 실시예에서, 비디오 데이터는 MP4 트랙의 샘플 구조 내의 파일 포맷에 미디어 데이터로서 저장되고, 파라메터 세트는 별도의 메타데이터 구조 내에 메타데이터로서 저장되며, SEI 메시지는 비디오 데이터로부터 별도의 트랙에 저장되거나 동일한 스트림 내에서 인터리브된다. 표 10은 일 실시예에 따른 MP4 파일 포맷 NAL의 적응층 디스크립터를 나타낸다.
채널수 2
채널 1 디스크립터 클래스 스트림
GAL 유형 비디오 데이터, 비디오 구조
우선 순위 N/A
개시 코드 있음
앤티 에뮬레이션 있음
캐리지 동적
채널 2 디스크립터 클래스 스트림
GAL 유형 파라메터 세트, SEI 메시지
우선 순위 N/A
개시 코드 없음
앤티 에뮬레이션 없음
캐리지 N/A
도 11은 GAL(1102)로부터 MP4 파일 포맷 NAL(1104)로의 맵핑의 일 실시예를 나타낸다.
지금까지 포괄 적응층 및 네트워크 적응층의 동작을 설명하였다. 비록, 이 명세서에서 특정의 실시예를 도시하고 설명하였지만, 이 기술에 숙련된 사람이라면 동일한 목적을 달성하도록 적합시킨 임의의 구성이 여기에서 설명한 특정의 실시예를 대체할 수 있다는 것을 알 것이다. 이 출원은 본 발명의 임의의 개작 또는 변경을 포함하는 것으로 의도된다.

Claims (35)

  1. 멀티미디어 데이터를 엔코딩할 때 복수의 슬라이스를 발생하기 위한 비디오 코딩층(VCL)과;
    복수의 전송 시스템에 포괄적인 포맷을 가진 포괄 적응층(GAL) 유닛들의 세트를 상기 복수의 슬라이스를 이용하여 생성하기 위한 포괄 적응층(GAL)과;
    상기 GAL 유닛의 세트를 복수의 전송 시스템 중의 하나의 포맷으로 맵하기 위하여 복수의 전송 시스템 중의 하나와 관련된 네트워크 적응층(NAL)을 포함하는 엔코딩 시스템.
  2. 제1항에 있어서, GAL은 추가로 멀티미디어 데이터의 구조를 식별하는 것인 엔코딩 시스템.
  3. 제2항에 있어서, 상기 GAL 유닛들의 세트는 멀티미디어 데이터의 구조에 대한 정보를 제공하는 복수의 구조 유닛과, 상기 멀티미디어 데이터를 포함하는 하나 이상의 멀티미디어 데이터 유닛과, 상기 멀티미디어 데이터와 관련된 파라메터 세트들을 포함하는 하나 이상의 파라메터 세트 유닛을 포함하는 것인 엔코딩 시스템.
  4. 제3항에 있어서, 상기 GAL 유닛들의 세트는 상기 멀티미디어 데이터와 관련된 보충적 강화 정보(SEI) 메시지를 포함하는 하나 이상의 보충적 강화 정보(SEI)메시지 유닛을 포함하는 것인 엔코딩 시스템.
  5. 제2항에 있어서, 상기 GAL은 멀티미디어 데이터의 구조와 관계된 VCL 신호에 기초하여 멀티미디어 데이터의 구조를 식별하는 것인 엔코딩 시스템.
  6. 제2항에 있어서, 상기 GAL은 복수의 슬라이스의 헤더로부터 데이터를 추출함으로써 상기 멀티미디어 데이터의 구조를 식별하는 것인 엔코딩 시스템.
  7. 제1항에 있어서, 상기 GAL 유닛들의 세트는 동일한 타이밍 정보를 공유하는 유닛들의 연쇄된 시퀀스를 포함하는 것인 엔코딩 시스템.
  8. 제1항에 있어서, 상기 GAL은 추가로 세트 내에서 유닛들을 순서정하는 것인 엔코딩 시스템.
  9. 제1항에 있어서, 상기 복수의 전송 시스템 중의 하나의 포맷은 특정 전송 시스템과 관련된 NAL의 디스크립터에 의해 규정되는 것인 엔코딩 시스템.
  10. 제9항에 있어서, 상기 디스크립터는 유닛들의 세트를 운반하기 위해 사용되는 다수의 NAL 채널을 지정하고 각 NAL 채널의 특성을 규정하는 것인 엔코딩 시스템.
  11. 제10항에 있어서, 상기 NAL은 세트 내의 각 GAL 유닛에 대하여 어떤 채널이 상기 각 GAL 유닛을 운반하도록 지정되는지를 상기 각 GAL 유닛의 유닛 유형에 기초하여 결정하고, 대응하는 채널의 미리 규정된 구문에 따라 상기 GAL 유닛들의 세트를 포맷팅함으로써 GAL 유닛들의 세트를 맵하는 것인 엔코딩 시스템.
  12. 제1항에 있어서, 복수의 전송 시스템 중의 하나와 관련된 NAL은 IP NAL, MPEG-2 NAL, 및 미디어 파일 포맷 NAL 중의 임의의 NAL인 엔코딩 시스템.
  13. 비디오 코딩층(VCL)으로부터 멀티미디어 데이터와 관련된 복수의 슬라이스를 수신하는 단계와;
    복수의 네트워크 적응층(NAL) 유형에 포괄적인 포맷을 가진 유닛들의 세트를 복수의 슬라이스를 이용하여 생성하는 단계와;
    상기 유닛들의 세트를 복수의 NAL 유형 중의 하나의 NAL에 전송하는 단계를 포함하는 컴퓨터화 방법.
  14. 제13항에 있어서, 복수의 슬라이스에 내포된 멀티미디어 데이터의 구조를 식별하는 단계를 더 포함하는 컴퓨터화 방법.
  15. 제14항에 있어서, 상기 유닛들의 세트는 멀티미디어 데이터의 구조에 대한정보를 제공하는 복수의 구조 유닛과, 상기 멀티미디어 데이터를 포함하는 하나 이상의 멀티미디어 데이터 유닛과, 상기 멀티미디어 데이터와 관련된 파라메터 세트들을 포함하는 하나 이상의 파라메터 세트 유닛을 포함하는 것인 컴퓨터화 방법.
  16. 제15항에 있어서, 상기 유닛들의 세트는 멀티미디어 데이터와 관련된 보충적 강화 정보(SEI) 메시지를 포함하는 하나 이상의 보충적 강화 정보(SEI) 메시지 유닛을 포함하는 것인 컴퓨터화 방법.
  17. 제15항에 있어서, 상기 복수의 구조 유닛들은 시퀀스 개시 유닛, 시퀀스 종료 유닛, 화상 그룹(GOP) 개시 유닛, GOP 종료 유닛, 화상 개시 유닛, 화상 종료 유닛, 슬라이스 개시 유닛 및 슬라이스 종료 유닛을 포함하는 그룹으로부터 선택되는 것인 컴퓨터화 방법.
  18. 제15항에 있어서, 상기 하나 이상의 멀티미디어 데이터 유닛은 슬라이스 유닛과 분할 슬라이스 유닛으로 구성된 그룹으로부터 선택된 것인 컴퓨터화 방법.
  19. 제14항에 있어서, 상기 멀티미디어 데이터의 구조를 식별하는 단계는 멀티미디어 데이터의 구조에 관계되는 신호를 VCL로부터 수신하는 단계를 포함하는 것인 컴퓨터화 방법.
  20. 제14항에 있어서, 상기 멀티미디어 데이터의 구조를 식별하는 단계는 복수의 슬라이스의 헤더로부터 데이터를 추출하는 단계를 포함하는 것인 컴퓨터화 방법.
  21. 제13항에 있어서, 상기 유닛들의 세트는 동일한 타이밍 정보를 공유하는 유닛들의 연쇄 시퀀스를 포함하는 것인 컴퓨터와 방법.
  22. 제13항에 있어서, 상기 하나 이상의 미리 규정된 요구 조건에 따라 세트 내에서 유닛들의 순서를 정하는 단계를 더 포함하는 컴퓨터화 방법.
  23. 포괄 적응층(GAL)으로부터 유닛들의 세트를 수신하는 단계와;
    유닛들의 세트를 특정의 네트워크 적응층(NAL) 유형의 포맷으로 맵핑하는 단계를 포함하는 방법.
  24. 제23항에 있어서, 상기 유닛들의 세트는 복수의 구조 유닛, 하나 이상의 멀티미디어 데이터 유닛, 하나 이상의 파라메터 세트 유닛, 및 하나 이상의 보충적 강화 정보(SEI) 메시지 유닛으로 구성된 그룹으로부터 선택된 것인 방법.
  25. 제24항에 있어서, 상기 복수의 구조 유닛은 멀티미디어 데이터의 시퀀스에 대한 정보를 제공하는 것인 방법.
  26. 제23항에 있어서, 상기 특정 전송 시스템의 포맷은 네트워크 적응층(NAL)의 디스크립터에 의해 규정되는 것인 방법.
  27. 제26항에 있어서, 상기 디스크립터는 유닛들의 세트를 운반하기 위해 사용하는 다수의 채널들을 지정하고 각 채널의 특성들을 규정하는 것인 방법.
  28. 제27항에 있어서, 상기 유닛들의 세트를 맵핑하는 단계는,
    세트 내의 각 유닛에 대하여, 어떤 채널이 상기 각 유닛을 운반하기 위해 지정되는지를 상기 각 유닛의 유닛 유형에 기초하여 결정하는 단계와;
    대응하는 채널의 미리 규정된 구문에 따라 유닛들의 세트를 포맷하는 단계를 포함하는 것인 방법.
  29. 제27항에 있어서, 상기 특정의 NAL 유형이 IP NAL, MPEG-2 NAL 및 미디어 파일 포맷 NAL 중의 임의의 NAL인 방법.
  30. 비디오 코딩층(VCL)으로부터 멀티미디어 데이터와 관련된 복수의 슬라이스를 수신하는 수단과;
    복수의 네트워크 적응층(NAL) 유형에 포괄적인 포맷을 가진 유닛들의 세트를 복수의 슬라이스를 이용하여 생성하는 수단과;
    상기 유닛들의 세트를 복수의 NAL 유형 중의 하나의 NAL에 전송하는 수단을포함하는 장치.
  31. 포괄 적응층(GAL)으로부터 유닛들의 세트를 수신하는 수단과;
    유닛들의 세트를 특정의 네트워크 적응층(NAL) 유형의 포맷으로 맵핑하는 수단을 포함하는 장치.
  32. 메모리와;
    메모리에 결합된 적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서는 적어도 하나의 프로세서가 비디오 코딩층(VCL)으로부터 멀티미디어 데이터와 관련된 복수의 슬라이스를 수신하고, 복수의 네트워크 적응층(NAL) 유형에 포괄적인 포맷을 가진 유닛들의 세트를 복수의 슬라이스를 이용하여 생성하며, 유닛들의 세트를 복수의 NAL 유형 중의 하나의 NAL에 전송하게 하는 명령어 세트를 실행하는 것인 시스템.
  33. 메모리와;
    메모리에 결합된 적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서는 적어도 하나의 프로세서가 포괄 적응층(GAL)으로부터 유닛들의 세트를 수신하고, 유닛들의 세트를 특정의 네트워크 적응층(NAL) 유형의 포맷으로 맵핑하게 하는 명령어 세트를 실행하는 것인 시스템.
  34. 프로세서에서 실행될 때, 프로세서가,
    비디오 코딩층(VCL)으로부터 멀티미디어 데이터와 관련된 복수의 슬라이스를 수신하는 단계와;
    복수의 네트워크 적응층(NAL) 유형에 포괄적인 포맷을 가진 유닛들의 세트를 복수의 슬라이스를 이용하여 생성하는 단계와;
    상기 유닛들의 세트를 복수의 NAL 유형 중의 하나의 NAL에 전송하는 단계를 포함하는 방법을 수행하게 하는 명령어를 제공하는 컴퓨터 판독가능 매체.
  35. 프로세서에서 실행될 때, 프로세서가,
    포괄 적응층(GAL)으로부터 유닛들의 세트를 수신하는 단계와;
    유닛들의 세트를 특정의 네트워크 적응층(NAL) 유형의 포맷으로 맵핑하는 단계를 포함하는 방법을 수행하게 하는 명령어를 제공하는 컴퓨터 판독가능 매체.
KR10-2004-7017387A 2002-04-29 2003-04-29 Ｊｖｔ 비디오용의 포괄 적응층 KR20040106413A (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US37647302P 2002-04-29 2002-04-29
US60/376,473 2002-04-29
US10/425,291 2003-04-28
US10/425,291 US7831990B2 (en) 2002-04-29 2003-04-28 Generic adaptation layer for JVT video
PCT/US2003/013160 WO2003093928A2 (en) 2002-04-29 2003-04-29 Generic adaptation layer for jvt video

Publications (1)

Publication Number Publication Date
KR20040106413A true KR20040106413A (ko) 2004-12-17

Family

ID=29406756

Family Applications (1)

Application Number Title Priority Date Filing Date
KR10-2004-7017387A KR20040106413A (ko) 2002-04-29 2003-04-29 Ｊｖｔ 비디오용의 포괄 적응층

Country Status (9)

Country Link
US (1) US7831990B2 (ko)
EP (1) EP1499938A4 (ko)
JP (1) JP4417244B2 (ko)
KR (1) KR20040106413A (ko)
CN (1) CN100399824C (ko)
AU (1) AU2003228734B2 (ko)
DE (1) DE10392586T5 (ko)
GB (1) GB2403620B (ko)
WO (1) WO2003093928A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10230999B2 (en) 2013-12-16 2019-03-12 Lg Electronics Inc. Signal transmission/reception device and signal transmission/reception method for providing trick play service

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7305036B2 (en) * 2002-05-14 2007-12-04 Broadcom Corporation System and method for entropy code preprocessing
EP1595404B1 (en) * 2003-02-18 2014-10-22 Nokia Corporation Picture decoding method
WO2004075555A1 (en) * 2003-02-18 2004-09-02 Nokia Corporation Picture coding method
US7724818B2 (en) * 2003-04-30 2010-05-25 Nokia Corporation Method for coding sequences of pictures
US8503541B2 (en) * 2004-01-16 2013-08-06 Motorola Mobility Llc Method and apparatus for determining timing information from a bit stream
EP1521475A1 (fr) * 2004-01-20 2005-04-06 France Telecom Procédé et dispositif de traitement de flux de données codées
US20050201471A1 (en) * 2004-02-13 2005-09-15 Nokia Corporation Picture decoding method
US7296205B2 (en) * 2004-02-18 2007-11-13 Nokia Corporation Data repair
AU2005270047B2 (en) * 2004-07-02 2011-06-02 Discus Dental, Llc. Dental light device having an improved heat sink
US9560367B2 (en) * 2004-09-03 2017-01-31 Nokia Technologies Oy Parameter set and picture header in video coding
US9124907B2 (en) * 2004-10-04 2015-09-01 Nokia Technologies Oy Picture buffering method
JP4693427B2 (ja) * 2005-01-27 2011-06-01 京セラ株式会社 ディジタル放送受信装置
JP5188817B2 (ja) * 2005-02-22 2013-04-24 コネクティフ ソリューションズ インク． 分散型資産管理システム及び方法
KR100934671B1 (ko) 2006-03-30 2009-12-31 엘지전자 주식회사 비디오 신호를 디코딩/인코딩하기 위한 방법 및 장치
EP1845685B1 (fr) 2006-04-11 2012-06-27 Alcatel Lucent Transmission perfectionnée de paquets IP de contenus, par adjonction à ces paquets IP de données d'information relatives aux contenus
EP2030450B1 (en) 2006-06-19 2015-01-07 LG Electronics Inc. Method and apparatus for processing a video signal
TW200820791A (en) 2006-08-25 2008-05-01 Lg Electronics Inc A method and apparatus for decoding/encoding a video signal
CN101193321B (zh) * 2006-11-27 2012-02-22 汤姆森许可贸易公司 编码设备、解码设备、记录设备、音频/视频数据传送系统
KR101305514B1 (ko) * 2007-04-17 2013-09-06 (주)휴맥스 비트스트림 디코딩 장치 및 방법
US20090003429A1 (en) * 2007-06-27 2009-01-01 Mediatek Inc. Apparatus And Method For Processing A Bitstream
US8767832B2 (en) * 2009-03-10 2014-07-01 Mediatek Inc. Method and apparatus for processing a multimedia bitstream
US9131033B2 (en) * 2010-07-20 2015-09-08 Qualcomm Incoporated Providing sequence data sets for streaming video data
CN102833508B (zh) * 2012-08-09 2015-08-12 中兴通讯股份有限公司 一种带有解码自适应性视频录制方法及系统
US9565452B2 (en) * 2012-09-28 2017-02-07 Qualcomm Incorporated Error resilient decoding unit association
KR101979634B1 (ko) 2012-12-13 2019-05-20 삼성전자주식회사 화질 개선을 위한 영상 처리 장치 및 그 방법
JP2015136057A (ja) * 2014-01-17 2015-07-27 ソニー株式会社 通信装置、通信データ生成方法、および通信データ処理方法
US10944572B2 (en) * 2017-01-02 2021-03-09 Western Digital Technologies, Inc. Decryption and variant processing

Family Cites Families (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6400996B1 (en) 1999-02-01 2002-06-04 Steven M. Hoffberg Adaptive pattern recognition based control system and method
US5406557A (en) * 1993-02-01 1995-04-11 National Semiconductor Corporation Interenterprise electronic mail hub
US6327304B1 (en) 1993-05-12 2001-12-04 The Duck Corporation Apparatus and method to digitally compress video signals
US6181822B1 (en) 1993-05-12 2001-01-30 The Duck Corporation Data compression apparatus and method
US5619501A (en) 1994-04-22 1997-04-08 Thomson Consumer Electronics, Inc. Conditional access filter as for a packet video signal inverse transport system
US5706493A (en) 1995-04-19 1998-01-06 Sheppard, Ii; Charles Bradford Enhanced electronic encyclopedia
US5754700A (en) 1995-06-09 1998-05-19 Intel Corporation Method and apparatus for improving the quality of images for non-real time sensitive applications
US5659539A (en) 1995-07-14 1997-08-19 Oracle Corporation Method and apparatus for frame accurate access of digital audio-visual information
TW436777B (en) 1995-09-29 2001-05-28 Matsushita Electric Ind Co Ltd A method and an apparatus for reproducing bitstream having non-sequential system clock data seamlessly therebetween
EP0837608B1 (en) 1996-10-15 2005-12-28 Matsushita Electric Industrial Co., Ltd. Video and audio coding method and coding apparatus
US6038256A (en) 1996-12-31 2000-03-14 C-Cube Microsystems Inc. Statistical multiplexed video encoding using pre-encoding a priori statistics and a priori and a posteriori statistics
CA2257578C (en) 1997-04-07 2003-01-21 At&T Corp. System and method for processing object-based audiovisual information
EP0909509B1 (en) 1997-04-07 2007-05-30 AT & T Corporation System and method for generation and interfacing of bitstreams representing mpeg-coded audiovisual objects
JP4726097B2 (ja) 1997-04-07 2011-07-20 エイ・ティ・アンド・ティ・コーポレーション 適応制御を行うことができるｍｐｅｇコード化オーディオ・ビジュアル対象物をインターフェースで連結するためのシステムおよび方法
WO1999019864A2 (en) 1997-10-15 1999-04-22 At & T Corp. Improved system and method for processing object-based audiovisual information
US6453355B1 (en) 1998-01-15 2002-09-17 Apple Computer, Inc. Method and apparatus for media data transmission
US6134243A (en) 1998-01-15 2000-10-17 Apple Computer, Inc. Method and apparatus for media data transmission
US6426778B1 (en) 1998-04-03 2002-07-30 Avid Technology, Inc. System and method for providing interactive components in motion video
US6370116B1 (en) 1998-05-26 2002-04-09 Alcatel Canada Inc. Tolerant CIR monitoring and policing
JP3382159B2 (ja) 1998-08-05 2003-03-04 株式会社東芝 情報記録媒体とその再生方法及び記録方法
US6317462B1 (en) 1998-10-22 2001-11-13 Lucent Technologies Inc. Method and apparatus for transmitting MPEG video over the internet
US6574378B1 (en) 1999-01-22 2003-06-03 Kent Ridge Digital Labs Method and apparatus for indexing and retrieving images using visual keywords
GB9909605D0 (en) * 1999-04-26 1999-06-23 Telemedia Systems Ltd Networked delivery of media files to clients
AUPQ867700A0 (en) 2000-07-10 2000-08-03 Canon Kabushiki Kaisha Delivering multimedia descriptions
GB2369973B (en) * 2000-12-06 2002-12-04 Open Business Exchange Ltd Communication Router
US6937770B1 (en) 2000-12-28 2005-08-30 Emc Corporation Adaptive bit rate control for rate reduction of MPEG coded video
US6920175B2 (en) 2001-01-03 2005-07-19 Nokia Corporation Video coding architecture and methods for using same
US8144728B2 (en) * 2001-02-06 2012-03-27 Nokia Corporation Access system for a cellular network
EP1258837A1 (en) 2001-05-14 2002-11-20 Thomson Licensing S.A. Method to generate mutual photometric effects
US20040006745A1 (en) 2001-08-31 2004-01-08 Van Helden Wico Methods, apparatuses, system, and articles for associating metadata with datastream
US20040123327A1 (en) 2002-12-19 2004-06-24 Tsang Fai Ma Method and system for managing multimedia settings
US8978090B2 (en) 2003-03-12 2015-03-10 Qualcomm Incorporated Multimedia transcoding proxy server for wireless telecommunication system
TWI229562B (en) 2003-04-17 2005-03-11 Mediatek Inc Apparatus and method for signal processing of format conversion and combination of video signals
US7724818B2 (en) * 2003-04-30 2010-05-25 Nokia Corporation Method for coding sequences of pictures
US8908699B2 (en) 2004-04-16 2014-12-09 Broadcom Corporation Providing automatic format conversion via an access gateway in a home
US7742524B2 (en) * 2006-11-17 2010-06-22 Lg Electronics Inc. Method and apparatus for decoding/encoding a video signal using inter-layer prediction

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10230999B2 (en) 2013-12-16 2019-03-12 Lg Electronics Inc. Signal transmission/reception device and signal transmission/reception method for providing trick play service

Also Published As

Publication number Publication date
GB2403620B (en) 2005-08-24
CN1666526A (zh) 2005-09-07
JP2005524313A (ja) 2005-08-11
CN100399824C (zh) 2008-07-02
US7831990B2 (en) 2010-11-09
GB0424071D0 (en) 2004-12-01
US20040010802A1 (en) 2004-01-15
GB2403620A (en) 2005-01-05
EP1499938A4 (en) 2009-06-10
WO2003093928A3 (en) 2004-02-19
JP4417244B2 (ja) 2010-02-17
AU2003228734A1 (en) 2003-11-17
EP1499938A2 (en) 2005-01-26
WO2003093928A2 (en) 2003-11-13
AU2003228734B2 (en) 2008-05-08
DE10392586T5 (de) 2005-06-30

Similar Documents

Publication Publication Date Title
KR20040106413A (ko) Ｊｖｔ 비디오용의 포괄 적응층
JP6345827B2 (ja) ビデオデータをストリーミングするためのシーケンスデータセットを提供すること
US9992555B2 (en) Signaling random access points for streaming video data
Schierl et al. System layer integration of high efficiency video coding
US8411746B2 (en) Multiview video coding over MPEG-2 systems
US8780999B2 (en) Assembling multiview video coding sub-BITSTREAMS in MPEG-2 systems
JP5591932B2 (ja) ファイルフォーマットトラック選択のためのメディアエクストラクタトラック
EP2589222B1 (en) Signaling video samples for trick mode video representations
JP2013537762A (ja) ネットワークストリーミングされるビデオデータについての属性をシグナリングすること
JP5886341B2 (ja) 送信装置、送信方法、受信装置および受信方法
JP5976189B2 (ja) 送信装置、送信方法、受信装置および受信方法
JP6614281B2 (ja) 受信装置および受信方法
JP6350638B2 (ja) 送信装置、送信方法、受信装置および受信方法
JP5976188B2 (ja) 送信装置、送信方法、受信装置および受信方法
JP6052354B2 (ja) 送信装置、送信方法、受信装置および受信方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application