KR101022078B1 - 비디오 정보의 스트리밍을 용이하게 하는 방법 및 장치, 컴퓨터 판독가능 매체 및 비디오 정보를 포함하는 파일을 처리하는 방법 및 장치 - Google Patents

비디오 정보의 스트리밍을 용이하게 하는 방법 및 장치, 컴퓨터 판독가능 매체 및 비디오 정보를 포함하는 파일을 처리하는 방법 및 장치 Download PDF

Info

Publication number
KR101022078B1
KR101022078B1 KR1020067015804A KR20067015804A KR101022078B1 KR 101022078 B1 KR101022078 B1 KR 101022078B1 KR 1020067015804 A KR1020067015804 A KR 1020067015804A KR 20067015804 A KR20067015804 A KR 20067015804A KR 101022078 B1 KR101022078 B1 KR 101022078B1
Authority
KR
South Korea
Prior art keywords
information
parameter information
parameter
video information
transmitting
Prior art date
Application number
KR1020067015804A
Other languages
English (en)
Other versions
KR20060113766A (ko
Inventor
존 윌리암 리차드슨
젠스 챈블리
Original Assignee
톰슨 라이센싱
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 톰슨 라이센싱 filed Critical 톰슨 라이센싱
Publication of KR20060113766A publication Critical patent/KR20060113766A/ko
Application granted granted Critical
Publication of KR101022078B1 publication Critical patent/KR101022078B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/08Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/24Systems for the transmission of television signals using pulse code modulation
    • H04N7/52Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Abstract

어드밴스드 비디오 코딩(AVC) 파일에 대응하는 파라미터 세트 정보를 이용하는 방법이 제공된다. 이러한 방법은 파라미터 세트 정보를 AVC 파일의 힌트 트랙 내에 포함시키는 방법을 포함한다.
AVC, 힌트 트랙, 파라미터 세트, 미디어 스트림

Description

비디오 정보의 스트리밍을 용이하게 하는 방법 및 장치, 컴퓨터 판독가능 매체 및 비디오 정보를 포함하는 파일을 처리하는 방법 및 장치{METHOD AND APPARATUS FOR FACILITATING STREAMING OF VIDEO INFORMATION, COMPUTER READABLE MEDIUM AND METHOD AND APPARATUS FOR PROCESSING A FILE CONTAINING VIDEO INFORMATION}
본 발명은 전반적으로 어드밴스드 비디오 코딩(AVC) 파일 포맷에 관한 것으로, 특히 AVC 파일 포맷으로 AVC 파라미터 세트를 저장하는 것에 관한 것이다.
AVC 파일 포맷은 로컬 플레이백과 네트워크를 통한 스트리밍 미디어 데이터 모두를 지원한다. 가장 통상적인 스트리밍 서버는 SDP(Session Description Protocol)와 함께 RTSP(Real Time Streaming Protocol)을 클라이언트와 서버 사이의 멀티미디어 스트리밍 세션의 설정 및 해제를 위한 제어 프로토콜로서 사용한다. 또한, RTP(Real Time Transport Protocol)가 서버와 클라이언트 사이의 멀티미디어 정보의 데이터 전송을 위한 프로토콜로서 사용된다.
AVC 코덱은 하나 이상의 비디오 프레임에 관한 특정 정보를 비디오 스트림으로부터 분리하는 수단을 제공한다. 이것은 이러한 특정 정보가 멀티미디어 스트림에 임베드(embed)되어 (예컨대, UDP(User Datagram Protocol)와 같은)신뢰할 수 없는 프로토콜을 통해서 송신되는 것에 추가하여 (예컨대, TCP(Transmission Control Protocol)와 같은)신뢰할 만한 전송 프로토콜을 통해서 송신되기 위한 것이다. 이러한 특정 정보는 함께 결합되어 파라미터 세트를 형성한다. AVC 파라미터 세트는, 예컨대 픽쳐 또는 이미지 크기, 디스플레이 윈도우 크기, 매크로 블록 할당 맵 등과 같은 정보를 포함할 수 있을 것이다.
임의의 주어진 AVC 비디오 스트림에 대하여 하나 또는 많은 파라미터 세트가 존재할 수 있을 것이다. 인코더 및 디코더는 파라미터 세트의 동일한 목록을 유지하여야 할 것이다. AVC 비디오 스트림 내의 각각의 슬라이스 헤더는 디코딩 시에 이용될 파라미터 세트를 나타내는 코드를 포함한다. 이러한 코드에 기초하여, 디코더는 올바른 디코딩을 위하여 어떤 파라미터 세트를 사용할지를 결정할 수 있다. 파라미터 세트는 주 비디오 스트림으로부터 분리되기 때문에, 이들을 멀티미디어 스트리밍 서버에서 멀티미디어 스트리밍 클라이언트로 아웃 오브 밴드(out-of-band) 방식으로 송신하는 것이 가능하고, 또한 바람직하다.
이제 스트리밍 멀티미디어 트랜잭션의 전형적인 시나리오가 아래에 기술될 것이다. 멀티미디어 스트리밍 클라이언트가 서버에 스트리밍 멀티미디어를 요청하는 때에, 전형적으로 스트리밍에 앞서 초기 협상이 이루어진다. 초기 협상 시퀀스는 특정 스트림에 대한 정보를 획득하기 위하여 서버에 요청을 송신하는 클라이언트를 포함한다. 그 후에, 서버는 스트림을 수신하고 디코딩하는 데에 요구되는 최소한의 필요한 세부사항으로 클라이언트에 응답을 송신한다. 이러한 초기 협상은 통상적으로 RTSP와 같은 네트워크 프로토콜을 이용하여 행해진다. RTSP 프로토콜은 멀티미디어 스트리밍 서버에서 멀티미디어 스트리밍 클라이언트로 파라미터 세트를 송신하는 데에 이용될 수 있다. 그러나, 스트리밍 서버의 특질에 기인하여, 스트리밍 서버가 미디어 의존적인 데이터를 클라이언트에 송신하기 위하여, 파라미 터 세트는 스트리밍 서버가 멀티미디어 파일이 어떠한 타입인지 알지 못하거나 관심을 가지지 않는 방식으로 파일 내에 저장되어야 한다.
따라서, 멀티미디어 스트리밍 서버의 RTSP 프로토콜이 미디어 독립적인 방식으로 파라미터 세트를 클라이언트에 전송할 수 있도록 하는 방법을 가지는 것은 바람직하고 큰 장점을 가질 것이다.
전술한 문제점들과 종래 기술의 다른 관련 문제점들이 AVC 파라미터 세트를 AVC 파일 포맷으로 저장하는 방법에 관한 본 발명에 의해서 해결된다. 본 발명은 스트리밍 서비스를 향상시키기 위하여 개선된 메타데이터를 저장할 목적으로 AVC 파일 포맷으로의 확장을 제공한다. 이러한 확장은 기존 스트리밍 서버와의 역방향의 양립성을 여전히 제공할 수 있으면서 AVC 파라미터 세트를 AVC 파일 포맷의 힌트 트랙 메타데이터 내에 삽입하는 것을 포함한다.
본 발명의 한 측면에 따르면, AVC 파일에 대응하는 파라미터 세트 정보를 이용하는 방법이 제공된다. 이러한 방법은 파라미터 세트 정보를 AVC 파일의 힌트 트랙 내에 임베드하는 단계를 포함한다.
본 발명의 다른 측면에 따르면, AVC 파일에 대응하는 파라미터 세트 정보를 이용하는 장치가 제공된다. 이러한 장치는 파라미터 세트 정보를 AVC 파일의 힌트 트랙에 임베드하는 임베드 디바이스(embedding device)를 포함한다.
본 발명의 또 다른 측면에 따르면, AVC 파일에 대응하는 파라미터 세트 정보를 이용하는 방법이 제공된다. 이러한 방법은 파라미터 세트 정보를 AVC 파일의 힌트 트랙에 임베드하고, 이러한 파라미터 세트 정보를 아웃 오브 밴드 및 미디어에 독립적인 송신 방식으로 송신하는 단계를 포함한다.
본 발명의 이러한 측면들 및 다른 측면들, 특징들 및 장점들은 첨부된 도면과 함께 읽혀질 아래의 바람직한 실시예의 상세한 설명으로부터 명확하게 될 것이다.
도 1은 본 발명이 이용될 수 있는 본 발명의 예시적인 실시예에 따른 AVC 파일(100)을 도시하는 도면.
도 2는 본 발명이 이용될 수 있는 본 발명의 예시적인 실시예에 따른 도 2의 AVC 인코더(200)를 도시하는 도면.
도 3은 본 발명의 예시적인 실시예에 따라 도 2의 AVC 인코더(200)로부터 출력된 예시적인 메타데이터(300)를 도시하는 도면.
도 4는 본 발명의 예시적인 실시예에 따른 SDP 트랙 기술 정보(400)를 도시하는 도면.
도 5는 본 발명의 예시적인 실시예에 따라 파라미터 세트를 AVC 파일(599)의 힌트 트랙에 삽입하는 장치(500)를 도시하는 고레벨 블록도.
도 6은 본 발명의 예시적인 실시예에 따른 메타데이터 테이블의 생성과 메타데이터 테이블의 AVC 파일로의 기록을 도시하는 고레벨 블록도.
도 7은 본 발명의 예시적인 실시예에 따른 메타데이터의 AVC 파일에의 기록을 도시하는 고레벨 블록도.
도 8은 본 발명의 예시적인 실시예에 따른 힌트 트랙의 AVC 파일에의 기록을 도시하는 고레벨 블록도.
본 발명은 스트리밍 서비스를 향상시키기 위하여 개선된 메타데이터를 저장하는 목적을 가지는, 통상적으로 알려진 스트리밍 디지털 미디어 저장 포맷인 AVC 파일 포맷의 확장에 관한 것이다. 이러한 확장은 기존의 스트리밍 서버에 역방향의 양립성을 제공할 수 있으면서 AVC 파라미터 세트를 AVC 파일 포맷의 힌트 트랙 메타데이터에 삽입하는 것을 포함한다. 파라미터 세트는 멀티미디어 스트리밍 서버의 RTSP 프로토콜이 미디어 독립적인 방식으로 파라미터 세트를 클라이언트에 전송할 수 있도록 AVC 파일 포맷 힌트 트랙 내에 임베드된다.
본 발명은 전반적으로 ITU(International Telecommunication Union) 및 MPEG(Moving Pictures Experts Group)에 의해서 공동 개발된 AVC 파일 포맷(ISO/IEC(International Organization for Standardization/International Electrotechnical Commission) 14496, 파트 15)에 관한 것임을 이해하여야 할 것이다. 그러나, 본 명세서에 제공되는 본 발명의 내용으로부터, 본 기술 분야의 당업자는 본 발명의 기술적 사상과 범위를 유지하면서 본 발명이 이용될 수 있는 본 발명 및 기타의 파일 포맷들을 고려할 수 있을 것이다.
본 발명이 다양한 형태의 하드웨어, 소프트웨어, 펌웨어, 전용 프로세서 또는 그 결합으로 실시될 수 있음을 이해하여야 한다. 바람직하게, 본 발명은 하드웨어와 소프트웨어의 결합으로 실시된다. 또한, 소프트웨어는 바람직하게 프로그 램 저장 장치 상에 유형의 형태로 구현되는 애플리케이션 프로그램으로 실시된다. 애플리케이션 프로그램은 임의의 적절한 구조를 포함하는 머신에 의해서 업로딩되고 실행될 수 있을 것이다. 바람직하게, 이러한 머신은 하나 이상의 CPU, RAM, I/O 인터페이스(들)와 같은 하드웨어를 구비하는 컴퓨터 플랫폼 상에서 실시된다. 이러한 컴퓨터 플랫폼은 오퍼레이팅 시스템 및 마이크로인스트럭션 코드 또한 포함한다. 본 명세서에 기술되는 다양한 프로세스 및 기능은 오퍼레이팅 시스템에 의해서 실행되는 마이크로인스트럭션 코드의 일부 또는 애플리케이션 프로그램의 일부(또는 그 조합)일 수 있을 것이다. 부가적으로, 추가적인 데이터 저장 장치 및 프린팅 장치와 같은 다양한 기타 주변 장치들이 컴퓨터 플랫폼에 접속될 수 있을 것이다.
첨부된 도면에 도시된 구성 요소인 시스템 컴포넌트들 및 방법 단계들 중 몇몇은 바람직하게 소프트웨어로 실시되기 때문에, 시스템 컴포넌트들(또는 프로세스 단계들) 간의 실제 접속은 본 발명이 프로그래밍되는 방식에 따라 다를 수 있음 또한 이해하여야 할 것이다. 본 명세서에서 기술되는 방법에 의해면, 본 발명의 기술 분야의 당업자는 본 발명의 이러한 실시 또는 구성과, 이와 유사한 실시 또는 구성을 고려할 수 있을 것이다.
AVC 파일 포맷은 로컬 플레이백과 네트워크를 통한 스트리밍 미디어 데이터 모두를 지원한다. 스트리밍 멀티미디어를 지원하는 AVC 파일은 스트리밍할 데이터 유닛에 관한 추가적인 정보를 포함한다. 이러한 추가적인 정보는 힌트 트랙으로 알려진, 파일의 추가적인 트랙에 포함된다. 힌트 트랙은, 예컨대 적절한 전달을 보장하기 위한 패킷 포맷팅 정보 및 올바른 전송 타이밍을 보장하기 위한 타이밍 정보와 같은 스트리밍 인스트럭션을 서버에 제공한다. 추가적으로, 힌트 트랙은 클라이언트가 요청하는 미디어의 타입에 관한 세부사항과 같은 보다 많은 정보 또한 제공할 수 있을 것이며, 이것은 클라이언트와 서버 사이의 초기의 상호작용 동안에 클라이언트에게 송신될 수 있을 것이다.
가장 통상적인 스트리밍 서버들은 SDP와 함께 RTSP를 클라이언트와 서버 사이의 멀티미디어 스트리밍 세션의 설정 및 해제를 위한 제어 프로토콜로서 이용한다. 또한, RTP가 서버와 클라이언트 사이의 멀티미디어 정보의 데이터 전송을 위한 프로토콜로서 이용된다. 본 발명은 RTSP를 세션 확립을 위한 제어 프로토콜로서 이용하는 스트리밍 서버에 관한 것임을 이해하여야 한다. 물론, 본 기술 분야의 당업자는 본 발명이 본 발명의 기술적 사상과 범위를 유지하면서 제어 프로토콜로서 RTSP가 아닌 프로토콜을 이용하는 스트리밍 서버에 대하여 변경되어 실시될 수 있음을 용이하게 이해할 것이다.
RTSP는 메시지가 헤더와 페이로드를 포함하는 텍스트 기반 프로토콜이다. 헤더는 통상적으로 표준에 의해서 정의되는 반면, 페이로드 부분은 애플리케이션에 따라 달라질 수 있다. RTSP 기반 멀티미디어 스트리밍 서버의 경우에, 서버는 클라이언트와의 초기 미디어 스트리밍 협상 동안에 AVC 파일 내에 포함된 SDP 정보를 RTSP 메시지 내에 디폴트로 삽입한다. 따라서, AVC 파라미터 세트를 SDP 정보 내에 임베드함으로써, 서버가 미디어 포맷에 대한 정보를 가지지 않고서도 미디어 스트림의 파라미터 세트를 클라이언트에게 송신하는 것이 가능하다. 결과적으로, 파라미터 세트는 임의의 미디어에 앞서 송신되며, 추가적으로, RTSP가 TCP를 디폴트로 이용하기 때문에, 이들은 신뢰할 수 있는 전송 프로토콜을 이용하여 송신된다.
도 1은 본 발명이 이용될 수 있는 본 발명의 예시적인 실시예에 따른 AVC 파일(100)을 도시하는 도면이다. AVC 파일(100)은 AVC 비디오 트랙 정보(160), 오디오 트랙 정보(165), 비디오 힌트 트랙 정보(170) 및 오디오 힌트 트랙 정보(175)를 포함한다. AVC 파일(100)은 오디오 트랙(110), 비디오 트랙(120) 및 힌트 트랙(130)을 더 포함한다. 힌트 트랙(130)은 본 발명에 따른 스트리밍을 위하여 이용될 수 있을 것이다.
AVC 파일(100) 내의 힌트 트랙(130)은 패킷의 형성을 돕는, 스트리밍 서버를 위한 특별한 인스트럭션을 포함한다. 이러한 정보는 서버가 특정한 네트워크 전송을 이용한 스트리밍에 적절한 방식으로 미디어 데이터를 패킷화할 수 있도록 제공된다. 특별한 스트리밍 인스트럭션을 포함하는 것에 부가하여, 다른 데이터가 힌트 트랙 내에 임베드되어 서버가 클라이언트에게 즉시 송신하도록 명령받을 수 있을 것이다(본 발명에 따른 예를 들면 다른 데이터는 파라미터 세트를 포함할 수 있을 것이다.).
이제 AVC 파라미터 세트를 AVC 파일의 힌트 트랙 내에 저장하는 프로세스가 기술될 것이다. 도 2는 본 발명이 이용될 수 있는 본 발명의 예시적인 실시예에 따른 AVC 비디오 인코더(200)를 도시하는 도면이다. 처음에, AVC 비디오 인코더(200)는 압축 비디오 데이터 및 이에 대응하는 메타데이터를 저장을 위한 제2 모듈에 전달하는 적어도 하나의 출력 인터페이스를 가질 것이다. 또한, 도 2에는 파라미터 세트를 아웃 오브 밴드 송신 방식으로 송신하는 송신기(250)가 포함된다. 파라미터 세트는 AVC 파일의 SDP 페이로드 내에 임베드되어 송신된다.
도 3은 본 발명의 예시적인 실시예에 따른 도 2의 AVC 인코더(200)로부터 출력된 예시적인 메타데이터(300)를 도시하는 도면이다. AVC 비디오 인코더(200)로부터 전달된 메타데이터(300)는 압축 비디오 프레임의 크기(210), (예컨대, I-프레임, P-프레임, B-프레임과 같은)비디오 프레임의 타입(215), (예컨대, 프레임 레이트와 같은)타이밍 정보(220), 기타 속성(225) 및 새로운 파라미터 세트(230)와 같은 정보를 포함할 수 있을 것이다. 본 출원에서 특별히 관심을 가지는 부분은 파라미터 세트(230)인데, 이는 파라미터 세트(230)가 비디오 스트림 내의 AVC 파일 내에, 그리고 이러한 비디오 스트림을 참조하는 힌트 트랙 내에 저장될 것이기 때문이다. 따라서, 파라미터 세트(230)가 힌트 트랙 내에 저장되도록 하기 위하여, AVC 비디오 인코더의 출력 인터페이스 상에 수신되는 데이터는 올바르게 관리될 필요가 있을 것이다.
파라미터 세트(230)가 AVC 비디오 인코더로부터 출력된 메타데이터(300)의 일부인 경우에, 이들은 힌트 트랙이 생성되는 때에 나중의 참조를 위하여 복사되어 저장 장소에 저장된다. 이것은 파라미터 세트를 찾기 위하여 개시하여 종료하도록 미디어 트랙이 분석될 필요가 없기 때문에 힌트 트랙 생성이 보다 간단하고 용이할 수 있도록 한다.
도 4는 본 발명의 예시적인 실시예에 따른 SDP 트랙 기술 정보(400)를 도시하는 도면이다. AVC 파라미터 세트(230)는 힌트 트랙 내에 포함된 SDP 트랙 기술 정보(400) 내에 저장된다. 힌트 트랙 내에 파라미터 세트(230)를 저장하는 것은 스트림 세션의 초기화 동안에 신뢰할 수 있는 네트워크 전송을 이용하여 파라미터 세트(230)를 전송하는 수단을 제공한다. 역시 중요한 것은, 파일에 대한 추가적인 확장이 요구되지 않기 때문에 현재의 스트리밍 서버에 대한 역방향의 양립성이 제공된다는 점이다. SDP 트랙 기술 정보(400)는 트랙 지속시간 정보(410), 트랙 기술 정보(420) 및 기타 속성(430)을 더 포함한다. 표 1은 본 발명의 예시적인 실시예에 따른 SDP 트랙 기술 정보 내의 AVC 파라미터 세트의 저장을 도시한다.
Figure 112006056041332-pct00001
파라미터 세트 정보는 힌트 트랙의 SDP 페이로드 내에 임베드되기 전에 MIME(Multipurpose Internet Mail Extensions)으로 인코딩될 수 있다.
도 5는 파라미터 세트를 AVC 파일(599)의 힌트 트랙 내에 삽입하는 장치(500)를 도시하는 고레벨 블록도이다. 장치(500)는 미디어 및 메타데이터 관리기(510), 메타데이터 파서(parser)(520), 삽입 모듈(530), 미디어 기록 모듈(540), 메타데이터 기록 모듈(550), 힌트 트랙 기록 모듈(560) 및 일반 파일 기록 모듈(570)을 포함한다.
비디오 데이터(501) 및 메타데이터(502)는 미디어 및 메타데이터 관리기(510)에 의해서 수신된다. 미디어 및 메타데이터 관리기(510)는 파일 기록 프로세스가 올바르게 수행되며, 파일이 일치하는 않는 방식으로 기록되지 않도록 보장한다. 대부분의 경우에, 메타데이터(502)는 먼저 파일 내에, 그 다음에 미디어 데이터 트랙 및 힌트 트랙에 존재하여야 한다. 따라서, 미디어 및 메타데이터 관리기(510)가 기록 프로세스를 제어하도록 제공된다.
일반 파일 기록 모듈(570)에 인터페이스하는 3개의 주 기록 모듈(540,550,560)이 존재한다. 이들 모듈들은 각각 데이터를 일반 파일 기록에 동시에 송신하는 것으로 보일 수 있을 것이지만, 이들은 실제로는 (예컨대, 전술한 바와 같은 메타데이터, 미디어데이터 및 힌트 데이터의 순서와 같은)특정한 순서로 기록되도록 데이터를 송신한다. 이들 기록 모듈들은 도 6 내지 8을 참조하여 이제 보다 상세히 설명될 것이다.
도 6은 본 발명의 예시적인 실시예에 따른 메타데이터 테이블의 생성과 메타데이터 테이블의 AVC 파일에의 기록을 도시하는 고레벨 블록도이다. 도 7은 본 발명의 예시적인 실시예에 따른 메타데이터의 AVC 파일에의 기록을 도시하는 고레벨 블록도이다. 도 8은 본 발명의 예시적인 실시예에 따른 힌트 트랙의 AVC 파일에의 기록을 도시하는 고레벨 블록도이다. 전술한 바와 같이, AVC 힌트 트랙의 AVC 파일에의 기록은 메타데이터로부터 파라미터 세트를 추출하고 이들을 힌트 트랙 SDP 정보 내에 저장하는 것을 포함한다.
도 6 및 도 8을 참조하면, 메타데이터는 미디어 및 메타데이터 관리기(510)에 입력된다. 알려진 바와 같이, 메타데이터는 타임스탬프, 프레임 크기, 파라미터 세트 등과 같은(그러나 이에 한정되지는 않음) 미디어 의존적인 정보를 저장하는 데이터 구조의 세트이다. 메타데이터는, 예컨대 디코딩, 인코딩, 디스플레이, 액세스 및 송신을 위하여 대응하는 미디어와 추가적인 데이터의 동기화(synchronization)를 유지하는 데에 이용된다.
미디어 및 메타데이터 관리기(510)는 미디어로부터 메타데이터를 추출하고 파라미터 세트에 대한 메타데이터를 분석한다(도 8 참조). 따라서, 파라미터 세트가 메타데이터 내에 존재하는 경우에는 메타데이터 파서(520)는 파라미터 세트를 추출하고, 이들을 힌트 트랙의 SDP 데이터 구조 내에 전달할 것이다. 그렇지 않고서 파라미터 세트가 발견되지 않은 경우에는, 메타데이터 파서(520)는 메타데이터를 정보를 파일에 기록하는 수단을 제공하는 표준화된 데이터 구조로 변환할 것이다. 메타데이터 기록 모듈(550)은 메타데이터를 AVC 파일(599)에 기록하는 데에 일반 기록 모듈(570)의 API(Application Programming Interface)를 이용한다.
도 7에서, 미디어 및 메타데이터 관리기(510)는 미디어 및 미디어의 전체 크기를 추출한다. 그 후에 데이터는 미디어 기록 모듈(540)에 직접 전달된다. 미디어 기록 모듈은 미디어 샘플을 AVC 파일(599)에 기록하는 데에 일반 기록 모듈(570)의 API를 또한 이용한다.
비록 첨부된 도면을 참조하여 예시적인 실시예들이 본 명세서에 기술되었지만, 본 발명은 이들 상세한 실시예들에 한정되지 않으며, 본 발명의 범위 또는 기술적 사상을 벗어나지 않고서 다양한 다른 변형 및 변경이 본 발명의 기술 분야의 당업자에 의해서 이루어질 수 있음을 이해하여야 한다. 이러한 모든 변형 및 변경은 첨부된 청구의 범위에 의해서 규정되는 본 발명의 범위 내에 포함되는 것으로 의도된다.

Claims (24)

  1. 비디오 정보의 스트리밍을 용이하게 하는 방법으로서,
    상기 비디오 정보의 스트리밍을 용이하게 하기 위해, 파라미터 정보가 상기 비디오 정보로부터 분리되어 존재하도록, 상기 비디오 정보를 보유하는 파일의 힌트 트랙의 SDP(Session Description Protocol) 페이로드 내에 상기 파라미터 정보를 임베드(embed)하여, 상기 파라미터 정보가 상기 비디오 정보와는 독립적으로 스트리밍될 수 있도록 하는, 파라미터 정보 임베드 단계를 포함하는 방법.
  2. 삭제
  3. 삭제
  4. 제1항에 있어서,
    상기 파라미터 정보 임베드 단계는 상기 힌트 트랙의 상기 SDP 페이로드 내에 임베드되기 전에 상기 파라미터 정보를 MIME(Multipurpose Internet Mail Extensions)로 인코딩하는 단계를 더 포함하는 방법.
  5. 제1항에 있어서,
    상기 파라미터 정보를 아웃 오브 밴드(out-of-band) 송신 방식으로 송신하는 단계를 더 포함하는 방법.
  6. 제5항에 있어서,
    상기 송신 단계는 TCP(Transmission Control Protocol)를 이용하여 파라미터 세트 정보를 송신하는 단계를 더 포함하는 방법.
  7. 제5항에 있어서,
    상기 송신 단계는 실시간 스트리밍 프로토콜(Real Time Streaming Protocol)을 이용하여 파라미터 세트 정보를 송신하는 단계를 더 포함하는 방법.
  8. 제1항에 있어서,
    상기 파라미터 정보를 미디어 독립적인 송신 방식으로 송신하는 단계를 더 포함하는 방법.
  9. 제8항에 있어서,
    상기 송신 단계는 상기 파라미터 정보를 대응하는 임의의 미디어에 앞서 송신하는 단계를 포함하는 방법.
  10. 제1항에 있어서,
    상기 파라미터 정보를 적어도 하나의 미디어 스트림에 대응하는 메타데이터로부터 추출하는 단계를 더 포함하는 방법.
  11. 파일이 저장되는 컴퓨터 판독가능 매체로서, 상기 파일은 비디오 정보 및 파라미터 정보를 포함하고, 상기 비디오 정보로부터 분리된 상기 파일의 부분에 상기 파라미터 정보를 임베드하여, 상기 파라미터 정보가 상기 비디오 정보와는 독립적으로 스트리밍될 수 있도록 하는, 컴퓨터 판독가능 매체.
  12. 비디오 정보의 스트리밍을 용이하게 하는 장치로서,
    상기 비디오 정보를 보유하는 파일 내에 파라미터 정보를 임베드하는 임베드 디바이스를 포함하고,
    상기 임베드 디바이스는 상기 파라미터 정보가 상기 비디오 정보로부터 분리된 상기 파일의 부분에 존재하도록, 힌트 트랙의 SDP 페이로드 내에 파라미터 세트 정보를 임베드하여, 상기 파라미터 정보가 상기 비디오 정보와는 독립적으로 스트리밍될 수 있도록 하는 장치.
  13. 삭제
  14. 삭제
  15. 제12항에 있어서,
    상기 임베드 디바이스에 의해서 SDP 페이로드 내에 임베드되는 상기 파라미터 정보는 MIME로 인코딩되는 장치.
  16. 제12항에 있어서,
    상기 파라미터 정보를 아웃 오브 밴드 송신 방식으로 송신하는 송신기를 더 포함하는 장치.
  17. 제16항에 있어서,
    상기 송신기는 TCP를 이용하여 상기 파라미터 세트 정보를 송신하는 장치.
  18. 제16항에 있어서,
    상기 송신기는 실시간 스트리밍 프로토콜을 이용하여 상기 파라미터 세트 정보를 송신하는 장치.
  19. 제12항에 있어서,
    상기 파라미터 정보를 미디어 독립적인 송신 방식으로 송신하는 송신기를 더 포함하는 장치.
  20. 제19항에 있어서,
    상기 송신기는 상기 파라미터 정보를 대응하는 임의의 미디어에 앞서 송신하는 장치.
  21. 제12항에 있어서,
    적어도 하나의 미디어 스트림에 대응하는 메타데이터로부터 파라미터를 추출하는 추출기를 더 포함하는 장치.
  22. 삭제
  23. 삭제
  24. 삭제
KR1020067015804A 2004-02-10 2004-02-10 비디오 정보의 스트리밍을 용이하게 하는 방법 및 장치, 컴퓨터 판독가능 매체 및 비디오 정보를 포함하는 파일을 처리하는 방법 및 장치 KR101022078B1 (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2004/003883 WO2005086625A2 (en) 2004-02-10 2004-02-10 Storage of advanced video coding (avc) parameter sets in avc file format

Publications (2)

Publication Number Publication Date
KR20060113766A KR20060113766A (ko) 2006-11-02
KR101022078B1 true KR101022078B1 (ko) 2011-03-17

Family

ID=34976052

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020067015804A KR101022078B1 (ko) 2004-02-10 2004-02-10 비디오 정보의 스트리밍을 용이하게 하는 방법 및 장치, 컴퓨터 판독가능 매체 및 비디오 정보를 포함하는 파일을 처리하는 방법 및 장치

Country Status (8)

Country Link
US (1) US8879641B2 (ko)
EP (1) EP1721459A4 (ko)
KR (1) KR101022078B1 (ko)
CN (1) CN1939060B (ko)
BR (1) BRPI0418464B1 (ko)
CA (1) CA2554987C (ko)
MY (1) MY163737A (ko)
WO (1) WO2005086625A2 (ko)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1939060B (zh) 2004-02-10 2010-09-29 汤姆逊许可公司 一种用于促进视频信息的流式传输的方法和设备
EP1884063A1 (en) * 2005-05-24 2008-02-06 Nokia Corporation Method and apparatuses for hierarchical transmission/reception in digital broadcast
WO2008023328A2 (en) * 2006-08-24 2008-02-28 Nokia Corporation System and method for indicating track relationships in media files
US8365060B2 (en) 2006-08-24 2013-01-29 Nokia Corporation System and method for indicating track relationships in media files
US8223851B2 (en) * 2007-11-23 2012-07-17 Samsung Electronics Co., Ltd. Method and an apparatus for embedding data in a media stream
US20100250763A1 (en) * 2009-03-31 2010-09-30 Nokia Corporation Method and Apparatus for Transmitting Information on Operation Points
US20100250764A1 (en) * 2009-03-31 2010-09-30 Nokia Corporation Method and Apparatus for Signaling Layer Information of Scalable Media Data
US8406245B2 (en) * 2009-07-09 2013-03-26 Qualcomm Incorporated System and method of transmitting content from a mobile device to a wireless display
US9516308B2 (en) * 2012-04-27 2016-12-06 Qualcomm Incorporated Parameter set updates in video coding
US9736476B2 (en) 2012-04-27 2017-08-15 Qualcomm Incorporated Full random access from clean random access pictures in video coding
US10291561B2 (en) * 2015-02-09 2019-05-14 Nokia Technologies Oy Apparatus, a method and a computer program for image coding and decoding
US20160330453A1 (en) * 2015-05-05 2016-11-10 Cisco Technology, Inc. Parameter Set Header

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030217091A1 (en) * 2002-05-14 2003-11-20 Tomio Echigo Content provisioning system and method

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11507752A (ja) 1995-06-07 1999-07-06 オープン・マーケット・インコーポレーテッド インターネットサーバーのアクセス管理およびモニタシステム
US6134243A (en) 1998-01-15 2000-10-17 Apple Computer, Inc. Method and apparatus for media data transmission
JP4599740B2 (ja) 2000-04-21 2010-12-15 ソニー株式会社 情報処理装置および方法、記録媒体、プログラム、並びに記録媒体
RU2273109C2 (ru) 2000-09-07 2006-03-27 Сони Корпорейшн Способ и устройство обработки информации, программа и носитель записи
DE60130037T2 (de) 2000-11-09 2008-05-08 International Business Machines Corp. Verfahren und system zur web-basierten cross-domain berechtigung mit einmaliger anmeldung
DE10392284T5 (de) 2002-02-25 2005-04-07 Sony Electronics Inc. Verfahren und Vorrichtung zum Unterstützen von AVC in MP4
US7613727B2 (en) * 2002-02-25 2009-11-03 Sont Corporation Method and apparatus for supporting advanced coding formats in media files
US20030163477A1 (en) 2002-02-25 2003-08-28 Visharam Mohammed Zubair Method and apparatus for supporting advanced coding formats in media files
US20040006575A1 (en) * 2002-04-29 2004-01-08 Visharam Mohammed Zubair Method and apparatus for supporting advanced coding formats in media files
EP1500002A1 (en) 2002-04-29 2005-01-26 Sony Electronics Inc. Supporting advanced coding formats in media files
US7987491B2 (en) 2002-05-10 2011-07-26 Richard Reisman Method and apparatus for browsing using alternative linkbases
US20050004968A1 (en) * 2003-07-02 2005-01-06 Jari Mononen System, apparatus, and method for a mobile information server
CN1939060B (zh) 2004-02-10 2010-09-29 汤姆逊许可公司 一种用于促进视频信息的流式传输的方法和设备

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030217091A1 (en) * 2002-05-14 2003-11-20 Tomio Echigo Content provisioning system and method

Also Published As

Publication number Publication date
EP1721459A4 (en) 2013-07-31
CA2554987C (en) 2014-05-13
WO2005086625A3 (en) 2006-08-17
US8879641B2 (en) 2014-11-04
BRPI0418464B1 (pt) 2019-02-05
WO2005086625A2 (en) 2005-09-22
KR20060113766A (ko) 2006-11-02
CN1939060B (zh) 2010-09-29
CN1939060A (zh) 2007-03-28
US20080253465A1 (en) 2008-10-16
BRPI0418464A (pt) 2007-06-05
MY163737A (en) 2017-10-31
CA2554987A1 (en) 2005-09-22
EP1721459A2 (en) 2006-11-15

Similar Documents

Publication Publication Date Title
TWI668982B (zh) 用於多媒體和檔案傳輸的傳輸介面的方法及伺服器設備、及用於記錄相關指令於其上的電腦可讀取儲存媒體
US7720096B2 (en) RTP payload format for VC-1
US11805302B2 (en) Method, device, and computer program for transmitting portions of encapsulated media content
US7853981B2 (en) Multimedia streaming service system and method
EP3167621B1 (en) Error handling for files exchanged over a network
CN110870282B (zh) 使用网络内容的文件轨处理媒体数据
WO2016182844A1 (en) Transferring media data using a websocket subprotocol
KR101022078B1 (ko) 비디오 정보의 스트리밍을 용이하게 하는 방법 및 장치, 컴퓨터 판독가능 매체 및 비디오 정보를 포함하는 파일을 처리하는 방법 및 장치
CN112154672B (zh) 一种检索媒体数据的方法、设备及可读存储介质
US9153127B2 (en) Video transmitting apparatus, video receiving apparatus, and video transmission system
CN113766317A (zh) 视频传输方法、装置、电子设备和存储介质
WO2018118710A1 (en) Detecting and signaling new initialization segments during manifest-file-free media streaming
US8813157B2 (en) Method and device for determining the value of a delay to be applied between sending a first dataset and sending a second dataset
US20130097334A1 (en) Method and apparatus for encapsulating coded multi-component video
KR20060011937A (ko) 데이터 송신 장치
JP2022551436A (ja) Dashセグメントの再同期点におけるランダムアクセス
CN109729318B (zh) 视频数据回放处理方法、装置、计算机设备和存储介质
EP4356593A1 (en) Real-time augmented reality communication session
RU2366103C2 (ru) Хранение наборов параметров улучшенного видеокодирования (avc) в файловом формате avc
MXPA06008820A (en) Storage of advanced video coding (avc) parameter sets in avc file format
JP4756848B2 (ja) データ配信方法および情報処理装置
JP2007318545A (ja) データ送信装置、データ受信装置、データ送信方法及びデータ受信方法
TW200803523A (en) Frame level multimedia decoding with frame information table

Legal Events

Date Code Title Description
AMND Amendment
A201 Request for examination
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
J201 Request for trial against refusal decision
B701 Decision to grant
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140220

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20150224

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20160218

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20170220

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20180219

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20200226

Year of fee payment: 10