KR20140053777A - 이종 비디오 코덱을 사용하는 영상 시스템에서의 디코더 버퍼링 방법 및 그 장치 - Google Patents

이종 비디오 코덱을 사용하는 영상 시스템에서의 디코더 버퍼링 방법 및 그 장치 Download PDF

Info

Publication number
KR20140053777A
KR20140053777A KR1020130125809A KR20130125809A KR20140053777A KR 20140053777 A KR20140053777 A KR 20140053777A KR 1020130125809 A KR1020130125809 A KR 1020130125809A KR 20130125809 A KR20130125809 A KR 20130125809A KR 20140053777 A KR20140053777 A KR 20140053777A
Authority
KR
South Korea
Prior art keywords
video
std
buffer
codec
decoder
Prior art date
Application number
KR1020130125809A
Other languages
English (en)
Inventor
이광순
윤국진
이진영
임현정
이응돈
정원식
허남호
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to US14/059,913 priority Critical patent/US20140112395A1/en
Publication of KR20140053777A publication Critical patent/KR20140053777A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

이종 비디오 코덱을 사용하는 영상 시스템에서의 디코더 버퍼링 방법 및 그 장치가 개시된다. 상기 이종 비디오 코덱을 사용하는 영상 시스템에서의 전송 장치는 제1 비디오 코덱을 이용하여 제1 영상(video)을 인코딩하는 제1 비디오 인코더, 제2 비디오 코덱을 이용하여 제2 영상(video)을 인코딩하는 제2 비디오 인코더 및 상기 제1 비디오 인코더에서 규정된 제1 T-STD(Transport stream System Target Decoder)의 버퍼 크기와 상기 제2 비디오 인코더에서 규정된 제2 T-STD의 버퍼 크기를 기반으로, 상기 제1 영상과 상기 제2 영상에 대한 지연 시간을 동기화하기 위한 지연 버퍼(delay buffer)를 포함한다.

Description

이종 비디오 코덱을 사용하는 영상 시스템에서의 디코더 버퍼링 방법 및 그 장치{METHOD AND APPARATUS FOR DECODER BUFFERING IN HYBRID CODED VIDEO SYSTEM}
본 발명은 이종 비디오 코덱(codec)을 적용한 영상 시스템에 관한 것으로, 보다 구체적으로는 시스템 타겟 디코더(STD: System Target Decoder)의 버퍼 모델에 관한 것이다.
MPEG-2(Moving Pictures Exports Group-2) 비디오 압축 규격(ISO/IEC 13818-2)은 오래 전부터 디지털 영상 송수신 시스템에 상용화되었으며, 미국식 디지털 방송규격(ATSC: Advanced Television Systems Committee) 등에서 널리 표준 코덱(codec)으로 적용되고 있다. 예를 들어, MPEG-2 비디오 압축 규격을 적용한 비디오 인코더, 전용 칩셋들이 출시되어 왔으며, ATSC DTV 수상기 및 셋탑 박스(set-top box) 등에는 다양한 형태의 MPEG-2 디코더 칩셋이 내장되어 왔다.
또한, MPEG-4 AVC(Advanced Video Coding) 압축 규격은 MPEG-2 비디오 압축 규격보다 더 우수한 압축 효율을 갖고 있으며, 최근에 상용화되어 널리 사용되고 있다.
한편, 3DTV 방송 시스템과 같이 3D 서비스를 제공하기 위한 시스템에서는 서로 다른 비디오 코덱을 사용하여 좌영상과 우영상을 각각 인코딩 할 수 있다. 예컨대, MPEG-2 비디오 압축 규격을 사용하여 좌영상을 인코딩할 수 있고, MPEG-4 AVC 압축 규격을 사용하여 우영상을 인코딩할 수 있다. 이러한 경우, 수신측에서는 서로 다른 비디오 코덱을 사용하여 인코딩된 좌영상과 우영상을 수신하고, 수신한 좌영상과 우영상을 각각 디코더를 통해 디코딩하여 동시에 화면에 재생시킬 수 있다. 이때, 좌영상을 디코딩하기 위한 디코더와 우영상을 디코딩하기 위한 디코더에서 필요로 하는 버퍼의 크기가 상이하기 때문에 좌영상과 우영상을 동시에 디코딩하여 화면에 재생할 경우 디코더 버퍼링 및 동기화 문제가 발생할 수 있다.
따라서, 이종 비디오 코덱을 사용하는 영상 시스템에 적합한 디코더 버퍼링 방법이 필요하다.
본 발명은 이종 비디오 코덱을 사용하는 영상 시스템에 적합한 시스템 타겟 디코더 버퍼링 방법 및 장치를 제공한다.
본 발명의 일 양태에 따르면, 이종 비디오 코덱을 사용하는 영상 시스템에서의 전송 장치가 제공된다. 상기 전송 장치는 제1 비디오 코덱을 이용하여 제1 영상(video)을 인코딩하는 제1 비디오 인코더, 제2 비디오 코덱을 이용하여 제2 영상(video)을 인코딩하는 제2 비디오 인코더 및 상기 제1 비디오 인코더에서 규정된 제1 T-STD(Transport stream System Target Decoder)의 버퍼 크기와 상기 제2 비디오 인코더에서 규정된 제2 T-STD의 버퍼 크기를 기반으로, 상기 제1 영상과 상기 제2 영상에 대한 지연 시간을 동기화하기 위한 지연 버퍼(delay buffer)를 포함한다.
본 발명의 다른 양태에 따르면, 이종 비디오 코덱을 사용하는 영상 시스템에서의 수신 장치가 제공된다. 상기 수신 장치는 수신된 전송 스트림을 제1 비디오 코덱을 이용하여 디코딩하는 제1 비디오 디코더, 상기 전송 스트림을 제2 비디오 코덱을 이용하여 디코딩하는 제2 비디오 디코더 및 상기 제1 비디오 디코더와 연결되어 동작하는 지연 버퍼(delay buffer)를 포함한다.
상기 지연 버퍼의 크기는 제1 비디오 인코더에서 규정된 제1 T-STD(Transport stream System Target Decoder)의 버퍼 크기와 제2 비디오 인코더에서 규정된 제2 T-STD의 버퍼 크기 간의 차이를 기반으로 결정되며, 상기 제1 T-STD는 상기 제1 비디오 디코더이고, 상기 제2 T-STD는 상기 제2 비디오 디코더일 수 있다.
본 발명의 또 다른 양태에 따르면, 이종 비디오 코덱을 사용하는 영상 시스템에서의 디코더 버퍼링 방법이 제공된다. 상기 디코더 버퍼링 방법은 제1 비디오 인코더에 의해 인코딩된 제1 영상과 제2 비디오 인코더에 의해 인코딩된 제2 영상을 다중화한 전송 스트림을 수신하는 단계, 상기 제1 비디오 인코더에서 규정된 제1 T-STD(Transport stream System Target Decoder)와 상기 제2 비디오 인코더에서 규정된 제2 T-STD에 대한 버퍼를 조정하는 단계 및 상기 조정된 버퍼를 기반으로 상기 제1 T-STD와 상기 제2 T-STD에 의해 상기 전송 스트림을 각각 디코딩하는 단계를 포함한다.
듀얼스트림 방식의 3DTV 방송 시스템에서와 같이 본래 서로 다른 규격의 T-STD 버퍼를 가진 이종 인코더를 사용하여 영상을 인코딩하더라도, 허용되는 최대 범위의 디코더 버퍼를 규정함으로써 영상의 최대 화질을 유지할 수 있다. 또한, 허용되는 최대 범위의 디코더 버퍼를 규정함으로써 이미 출시된 디코더 칩셋 내의 버퍼 용량 한계를 극복할 수 있다. 이종 코덱을 통해 인코딩된 비트스트림이 서로 다른 네트워크(hybrid network)를 통해 각각 전송될 때 발생되는 지연 시간의 차이도 극복할 수 있다.
도 1은 MPEG-2 시스템에서 전송 스트림 시스템 타겟 디코더(Transport Stream System Target Decoder: T-STD 혹은 TS-STD)의 일 예를 나타내는 도면이다.
도 2는 이종 비디오 코덱(codec)을 적용한 영상 시스템의 일 예를 나타내는 도면이다.
도 3은 본 발명에 따른 이종 비디오 코덱을 적용한 영상 시스템의 일 예를 나타내는 도면이다.
도 4는 본 발명에 따른 이종 비디오 코덱을 적용한 영상 시스템의 다른 예를 나타내는 도면이다.
도 5는 본 발명에 따른 이종 비디오 코덱을 적용한 영상 시스템에서의 디코더 버퍼링 방법을 설명하기 위한 도면을 나타낸 것이다.
도 6은 본 발명의 실시예에 따른 이종 비디오 코덱을 적용한 영상 시스템에서의 디코더 버퍼링 방법을 나타내는 순서도이다.
이하, 도면을 참조하여 본 발명의 실시 형태에 대하여 구체적으로 설명한다. 본 명세서의 실시예를 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 명세서의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.
어떤 구성 요소가 다른 구성 요소에 “연결되어” 있다거나 “접속되어” 있다고 언급된 때에는, 그 다른 구성 요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있으나, 중간에 다른 구성 요소가 존재할 수도 있다고 이해되어야 할 것이다. 아울러, 본 발명에서 특정 구성을 “포함”한다고 기술하는 내용은 해당 구성 이외의 구성을 배제하는 것이 아니며, 추가적인 구성이 본 발명의 실시 또는 본 발명의 기술적 사상의 범위에 포함될 수 있음을 의미한다.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.
또한 본 발명의 실시예에 나타나는 구성부들은 서로 다른 특징적인 기능들을 나타내기 위해 독립적으로 도시되는 것으로, 각 구성부들이 분리된 하드웨어나 하나의 소프트웨어 구성단위로 이루어짐을 의미하지 않는다. 즉, 각 구성부는 설명의 편의상 각각의 구성부로 나열하여 포함한 것으로 각 구성부 중 적어도 두 개의 구성부가 합쳐져 하나의 구성부로 이루어지거나, 하나의 구성부가 복수 개의 구성부로 나뉘어져 기능을 수행할 수 있고 이러한 각 구성부의 통합된 실시예 및 분리된 실시예도 본 발명의 본질에서 벗어나지 않는 한 본 발명의 권리범위에 포함된다.
또한, 일부의 구성 요소는 본 발명에서 본질적인 기능을 수행하는 필수적인 구성 요소는 아니고 단지 성능을 향상시키기 위한 선택적 구성 요소일 수 있다. 본 발명은 단지 성능 향상을 위해 사용되는 구성 요소를 제외한 본 발명의 본질을 구현하는데 필수적인 구성부만을 포함하여 구현될 수 있고, 단지 성능 향상을 위해 사용되는 선택적 구성 요소를 제외한 필수 구성 요소만을 포함한 구조도 본 발명의 권리범위에 포함된다.
도 1은 MPEG-2 시스템에서 전송 스트림 시스템 타겟 디코더(Transport Stream System Target Decoder: T-STD 혹은 TS-STD)의 일 예를 나타내는 도면이다.
MPEG-2 시스템에서는 동기 재생 및 디코딩시 버퍼 관리를 위해 STD(System Target Decoder)라 불리는 가상 참조 복호화기 모델을 규정하고 있다. STD에서는 화면 재생 및 디코딩을 위한 버퍼를 두고, 이들 버퍼의 크기, 입출력 방식 및 비트율 등을 정의하고 있다.
예를 들어, 도 1에 도시된 바와 같이, MPEG-2 비디오와 MPEG-4 AVC로 인코딩된 비트스트림이 MPEG-2 전송 스트림(TS: Transport Stream) 패킷으로 다중화되어 전송될 때, 이러한 전송 스트림을 수신한 수신기 측에서는 역다중화, 디코딩 및 화면 재생을 수행할 수 있다. 이때, 수신기 측의 T-STD는 역다중화, 디코딩 및 화면 재생을 위해 각 단계별로 필요한 버퍼의 최대 크기 및 각 버퍼에서 데이터가 출력되는 시간 등을 정의하고 있다(ISO/IEC 13818-1 Information technology ? Generic coding of moving pictures and associated audio information: Systems, 2007년 규격 참조). 각 단계별로 필요한 버퍼는 도 1에 도시된 바와 같이, TB(Transport Buffer, 전송 버퍼), MB(Multiplexing Buffer, 다중화 버퍼), EB(Elementary stream Buffer, ES 버퍼) 등일 수 있다.
T-STD 모델은 각각의 인코더 출력단에 가상적으로 필요한 버퍼를 한정하고 각 버퍼의 비트율을 제어하기 위해 사용될 수 있다. 예컨대, T-STD 모델은 특정 시간 동안 발생되는 비트량을 제어할 수 있다. 표준 규격을 통해 최대 허용되는 STD 버퍼는 MPEG-4 AVC가 MPEG-2 비디오에 비해 최대 약 10배 가량 크다. 왜냐하면 MPEG-4 AVC가 최신의 비디오 코덱으로서 복잡한 알고리즘을 수행하기 위해 더 많은 버퍼를 필요로 하기 때문이다. 또한, 대부분 계층적 GOP(Group Of Picture) 구조처럼 복잡한 알고리즘이 적용될수록 요구되는 버퍼는 커지며, 이로 인해 인코딩 및 디코딩 시의 지연 시간이 증가될 수 있다.
예컨대, MPEG-2 비디오 인코더를 통해 인코딩되어 다중화된 MPEG-2 전송 스트림 패킷은 T-STD에 입력된 후 디코딩될 때까지 최대 1초 가량의 지연 시간이 걸리나, MPEG-4 AVC 인코더를 통해 인코딩되어 다중화된 MPEG-2 전송 스트림 패킷은 T-STD에 입력된 후 디코딩될 때까지 최대 10초 가량의 지연 시간이 소요될 수 있다.
상기와 같이, 서로 다른 코덱을 사용하는 인코더(예를 들어, MPEG-2 비디오 인코더 및 MPEG-4 AVC 인코더)를 통해 인코딩되어 다중화된 전송 스트림을 수신한 경우, 수신 측에서는 동일 시점에 서로 다른 코덱을 사용하는 T-STD(예를 들어, MPEG-2 비디오 디코더 및 MPEG-4 AVC 디코더)를 통해 전송 스트림을 각각 디코딩하고 동기화하여 영상을 재생하며, 이때 서로 다른 T-STD 간의 지연 시간 차이로 인해 문제가 발생할 수 있다.
도 2는 이종 비디오 코덱(codec)을 적용한 영상 시스템의 일 예를 나타내는 도면이다. 도 2의 영상 시스템은 듀얼 스트림(dual stream) 방식 기반의 하이브리드(이종) 인코딩 서비스 호환(hybrid-coded service-compatible, 혹은 SCHC: service-compatible hybrid-coded) 3DTV 방송 시스템일 수 있다.
도 2를 참조하면, 영상 시스템은 3D 영상을 제공하는 전송 장치(210)와 3D 영상을 수신하여 재생하는 수신 장치(220)를 포함할 수 있다. 이때, 전송 장치(210)에 의해 생성된 3D 영상은 전송망을 통해 수신 장치(220)로 전송될 수 있다. 전송망은 서로 다른 네트워크(hybrid network)로 구성될 수 있으며, 예컨대 방송망과 통신망으로 구성된 네트워크일 수 있다.
전송 장치(210)는 MPEG-2 비디오 인코더(211), MPEG-4 AVC 인코더(213)와, 다중화 및 전송부(215)를 포함한다.
MPEG-2 비디오 인코더(211)는 MPEG-2 비디오 압축 규격(MPEG-2 비디오 코덱)을 이용하여 좌영상(L)을 인코딩하고, MPEG-4 AVC 인코더(213)는 MPEG-4 AVC 압축 규격(MPEG-4 AVC 코덱)을 이용하여 우영상(R)을 인코딩한다. 다중화 및 전송부(215)는 각 인코더를 통해 인코딩된 좌영상(L)과 우영상(R)을 MPEG-2 전송 스트림으로 다중화하여 전송한다.
수신 장치(220)는 수신 및 역다중화부(221), MPEG-2 비디오 디코더(223) 및 MPEG-4 AVC 디코더(225)를 포함한다. 예컨대, 수신 장치(220)는 3DTV 수상기 혹은 3DTV 셋탑 박스(set-top box)일 수 있다.
수신 및 역다중화부(221)는 전송 장치(210)로부터 전송된 MPEG-2 전송 스트림을 수신하고 역다중화한다. 역다중화된 전송 스트림은 MPEG-2 비디오 디코더(223) 및 MPEG-4 AVC 디코더(225)로 입력되어 디코딩될 수 있다.
MPEG-2 비디오 디코더(223)는 MPEG-2 비디오 코덱을 기반으로 역다중화된 스트림을 디코딩하여 좌영상(L)을 생성할 수 있으며, MPEG-4 AVC 디코더(225)는 MPEG-4 AVC 코덱을 기반으로 역다중화된 스트림을 디코딩하여 우영상(R)을 생성할 수 있다. 좌영상(L)과 우영상(R)은 수신 장치(220)를 통해 영상 프레임 레벨에서 동시에 재생될 수 있다.
이때, MPEG-2 비디오와 MPEG-4 AVC와 같이 서로 다른 허용 T-STD 버퍼 용량을 가지도록(서로 다른 지연 시간을 가지도록) 인코딩된 스트림을 디코딩하여 동시에 재생할 때, 수신 장치(220)에서는 각 디코더의 버퍼 용량 차이로 인해 디코더 버퍼의 오버플로우(overflow) 혹은 언더플로우(underflow)가 발생할 수 있다.
상술한 바와 같이, 이종 비디오 코덱을 사용하는 영상 시스템의 경우, 서로 다른 규격의 T-STD 버퍼 크기를 가진 이종 인코더를 사용하여 영상을 인코딩하고, 이러한 영상을 수신한 수신 측 역시 서로 다른 규격의 T-STD 버퍼 크기를 가진 이종 디코더를 사용하여 영상을 디코딩하므로, 디코더 버퍼의 오버플로우 혹은 언더플로우 현상이 발생할 뿐만 아니라 영상의 재생 및 동기화에 문제가 발생할 수도 있다.
상기와 같은 문제점을 해결하기 위해서, 본 발명에서는 이종 비디오 코덱을 적용한 영상 시스템에 적합한 시스템 타겟 디코더(STD)의 버퍼 모델을 제공한다.
도 3은 본 발명에 따른 이종 비디오 코덱을 적용한 영상 시스템의 일 예를 나타내는 도면이다.
도 3을 참조하면, 이종 비디오 코덱을 적용한 영상 시스템은 이종 비디오 코덱을 통해 생성된 전송 스트림을 전송하는 전송 장치(300)와 상기 전송 스트림을 전송망을 통해 수신하여 재생하는 수신 장치(310)를 포함할 수 있다. 이때, 전송망은 서로 다른 네트워크(hybrid network)로 구성될 수 있으며, 예컨대 방송망과 통신망으로 구성된 네트워크일 수 있다.
전송 장치(300)는 제1 비디오 인코더(301), 제2 비디오 인코더(303) 및 지연 버퍼(delay buffer)(307, 309)를 포함한다.
제1 비디오 인코더(301)는 제1 비디오 코덱을 이용하여 제1 영상(video)을 인코딩하고, 제2 비디오 인코더(303)는 제2 비디오 코덱을 이용하여 제2 영상(video)을 인코딩할 수 있다.
이때, 제1 비디오 코덱은 MPEG-2 비디오 코덱일 수 있고, 제2 비디오 코덱은 MPEG-4 AVC 코덱일 수 있다. 또는 제1 비디오 코덱은 MPEG-4 AVC 코덱일 수 있으며, 제2 비디오 코덱은 HEVC(High Efficiency Video Coding) 코덱일 수 있다. 다시 말해, 제1 비디오 인코더(301)는 MPEG-2 비디오와 같이 디코더 버퍼가 상대적으로 작은 인코더에 해당되며, 제2 비디오 인코더(303)는 MPEG-4 AVC와 같이 디코더 버퍼가 상대적으로 큰 인코더에 해당될 수 있다.
지연 버퍼(307, 309)는 제1 비디오 인코더(301)에서 규정된 제1 T-STD(Transport stream System Target Decoder)(311)의 버퍼 크기와 제2 비디오 인코더(303)에서 규정된 제2 T-STD(313)의 버퍼 크기를 기반으로 상기 제1 영상과 상기 제2 영상을 동기화하도록 한다.
예를 들어, 전송 장치(300)는 제1 비디오 인코더(301)에서 규정된 제1 T-STD (311)의 버퍼 크기와 제2 비디오 인코더(303)에서 규정된 제2 T-STD(313)의 버퍼 크기 간의 차이를 보정하기 위해, 제1 비디오 인코더(301) 측에 제1 지연 버퍼(307)를 추가할 수 있고, 혹은 제2 비디오 인코더(303) 측에 제2 지연 버퍼(309)를 추가할 수도 있다.
지연 버퍼(307, 309)는 인코더(301, 303)에 내장할 수 있으며, 또는 별도의 장비를 통해 구현될 수 있다. 예컨대, 본 발명의 실시예에 따른 이종 비디오 코덱을 적용한 영상 시스템이 SCHC(service-compatible hybrid-coded) 기반의 3DTV 방송 시스템인 경우, 제1 비디오 인코더(301) 및 제2 비디오 인코더(303)는 각 비디오 코덱을 기반으로 구현된 종래의 인코더 장비를 이용하고, 3DTV 재다중화기(305)를 통해 두 인코더(301, 303)에 의해 인코딩된 제1 및 제2 영상을 동기화하고 재다중화할 수 있다. 이때, 3DTV 재다중화기(305)는 지연 버퍼(307, 309)를 통해 인코딩된 제1 영상 혹은 제2 영상을 지연함으로써 제1 및 제2 영상을 동기화할 수 있다.
일 예로, 3DTV 재다중화기(305)는 제1 지연 버퍼(307)를 포함할 수 있다. 제1 지연 버퍼(307)는 제1 비디오 인코더(301)에 의해 인코딩된 제1 영상(예컨대, MPEG-2 비디오 스트림)을 입력 받아, 제1 T-STD(311)의 버퍼 크기와 제2 T-STD(313)의 버퍼 크기 간의 차이를 기반으로 결정된 지연 시간만큼 상기 인코딩된 제1 영상을 지연시킬 수 있다.
다른 예로, 3DTV 재다중화기(305)는 제2 지연 버퍼(309)를 포함할 수 있다. 제2 지연 버퍼(309)는 제2 비디오 인코더(303)에 의해 인코딩된 제2 영상(예컨대, MPEG-4 AVC 스트림)을 입력 받아, 제1 T-STD(311)의 버퍼 크기와 제2 T-STD(313)의 버퍼 크기 간의 차이를 기반으로 결정된 지연 시간만큼 상기 인코딩된 제2 영상을 지연시킬 수 있다.
3DTV 재다중화기(305)는 제1 지연 버퍼(307) 혹은 제2 지연 버퍼(309)를 통해 지연 시간이 동기화된 제1 영상과 제2 영상을 재다중화하여 전송 스트림을 생성할 수 있고, 상기 전송 스트림을 전송망을 통해 수신 장치(310)로 전송할 수 있다.
상술한 바와 같이, 전송 장치(300)에 지연 버퍼를 추가함으로써, 수신 장치(310)에서는 종래의 MPEG-2 시스템의 T-STD(도 1 참조)로 구현된 칩셋을 그대로 사용할 수 있다. 하지만, 제1 지연 버퍼(307)를 통해 제1 비디오 인코더(301)에 의해 인코딩되는 제1 영상을 지연시킬 경우, 이러한 제1 비디오 인코더(301)에서 출력된 비트스트림을 수신한 수신 장치(310)에서는 이를 디코딩하고 재생할 때 화면 지연 현상이 발생할 수도 있다.
도 4는 본 발명에 따른 이종 비디오 코덱을 적용한 영상 시스템의 다른 예를 나타내는 도면이다.
도 4를 참조하면, 이종 비디오 코덱을 적용한 영상 시스템은 이종 비디오 코덱을 통해 생성된 전송 스트림을 전송하는 전송 장치(400)와 상기 전송 스트림을 전송망을 통해 수신하여 재생하는 수신 장치(410)를 포함할 수 있다. 이때, 전송망은 서로 다른 네트워크(hybrid network)로 구성될 수 있으며, 예컨대 방송망과 통신망으로 구성된 네트워크일 수 있다.
전송 장치(400)는 제1 비디오 코덱을 이용하여 제1 영상(video)을 인코딩하는 제1 비디오 인코더(401)와 제2 비디오 코덱을 이용하여 제2 영상(video)을 인코딩하는 제2 비디오 인코더(403)를 포함할 수 있다. 또한, 전송 장치(400)는 인코딩된 제1 영상과 제2 영상을 재다중화하여 전송 스트림을 생성하는 재다중화기(405)를 포함할 수 있으며, 상기 전송 스트림을 수신 장치(410)로 전송할 수 있다.
이때, 제1 비디오 코덱은 MPEG-2 비디오 코덱일 수 있고, 제2 비디오 코덱은 MPEG-4 AVC 코덱일 수 있다. 또는 제1 비디오 코덱은 MPEG-4 AVC 코덱일 수 있으며, 제2 비디오 코덱은 HEVC(High Efficiency Video Coding) 코덱일 수 있다. 다시 말해, 제1 비디오 인코더(401)는 MPEG-2 비디오와 같이 디코더 버퍼가 상대적으로 작은 인코더에 해당되며, 제2 비디오 인코더(403)는 MPEG-4 AVC와 같이 디코더 버퍼가 상대적으로 큰 인코더에 해당될 수 있다.
수신 장치(410)는 제1 비디오 디코더(413), 제2 비디오 디코더(415) 및 지연 버퍼(417)를 포함한다. 예컨대, 수신 장치(410)는 3DTV 수상기 혹은 3DTV 셋탑 박스(set-top box)일 수 있다.
제1 비디오 디코더(413)는 전송 장치(400)로부터 수신한 전송 스트림을 제1 비디오 코덱을 이용하여 디코딩하며, 제2 비디오 디코더(415)는 전송 장치(400)로부터 수신한 전송 스트림을 제2 비디오 코덱을 이용하여 디코딩할 수 있다. 이때, 제1 비디오 디코더(413)와 제2 비디오 디코더(415)는 도 1에서 상술한 바와 같은 MPEG-2 시스템에서의 T-STD 모델로 구현된 디코더일 수 있다.
이때, 제1 비디오 코덱은 MPEG-2 비디오 코덱일 수 있고, 제2 비디오 코덱은 MPEG-4 AVC 코덱일 수 있다. 또는 제1 비디오 코덱은 MPEG-4 AVC 코덱일 수 있으며, 제2 비디오 코덱은 HEVC(High Efficiency Video Coding) 코덱일 수 있다. 또한, 제1 비디오 디코더(413)는 제1 비디오 인코더(401)에서 인코딩되어 출력되는 제1 스트림(제1 영상)을 수신하여 디코딩하며, 제2 비디오 디코더(415)는 제2 비디오 인코더(403)에서 인코딩되어 출력되는 제2 스트림(제2 영상)을 수신하여 디코딩할 수 있다.
지연 버퍼(417)는 제1 비디오 디코더(413)와 연결되어 동작될 수 있다. 예컨대, 지연 버퍼(417)는 제1 비디오 디코더(413) 앞에 추가될 수 있으며, 전송 장치(400)로부터 수신한 전송 스트림에 대해 소정의 지연 시간 동안 지연시킨 다음 상기 전송 스트림을 제1 비디오 디코더(413)로 전달할 수 있다.
여기서, 전송 장치(400)로부터 수신한 전송 스트림은 상술한 바와 같이, 제1 비디오 인코더(401)에서 인코딩된 제1 스트림과 제2 비디오 인코더(403)에서 인코딩된 제2 스트림을 포함할 수 있다. 제2 비디오 인코더(403)에서 인코딩된 제2 스트림은 지연 버퍼(417)와 무관하게 제2 비디오 디코더(415)로 입력되어 디코딩될 수 있으며, 제1 비디오 인코더(401)에서 인코딩된 제1 스트림은 지연 버퍼(417)를 통과하여 지연된 다음 제1 비디오 디코더(413)로 입력되거나 혹은 지연 버퍼(417)를 통과하지 않고 제1 비디오 디코더(413)로 입력되어 디코딩될 수도 있다.
수신 장치(410)는 지연 버퍼(417) 앞에 스위치(419)를 구비하여, 전송 장치(400)로부터 수신한 전송 스트림에 대해 제1 모드(mode) 혹은 제2 모드로 동작하도록 할 수 있다.
예를 들어, 제1 모드인 경우 스위치(419)가 제1 모드로 전환되고, 상기 전송 스트림(보다 구체적으로, 제1 비디오 인코더(401)에서 인코딩된 제1 스트림)이 지연 버퍼(417)에 의한 지연 없이 제1 비디오 디코더(413)로 입력되어 디코딩될 수 있다. 제2 모드인 경우 스위치(419)가 제2 모드로 전환되고, 상기 전송 스트림(보다 구체적으로, 제1 비디오 인코더(401)에서 인코딩된 제1 스트림)이 지연 버퍼(417)로 입력되어 소정의 지연 시간 동안 지연된 다음 제1 비디오 디코더(413)로 전달되어 디코딩될 수 있다.
수신 장치(410)가 제1 비디오 인코더(401)에서 인코딩되어 출력된 제1 스트림만을 디코딩할 경우, 수신 장치(410)는 제1 모드로 동작할 수 있다. 이러한 경우, 상기 제1 스트림이 지연 버퍼(417)를 통과하지 않고 바로 제1 비디오 디코더(413)로 입력되어 디코딩될 수 있으므로, 추가적인 지연 시간이 요구되지 않는다. 반면, 수신 장치(410)가 3DTV와 같은 영상, 즉 제1 비디오 인코더(401) 및 제2 비디오 인코더(403)에 의해 각각 인코딩되어 다중화된 스트림을 수신하고, 이를 프레임 레벨로 동기화하여 재생할 경우, 수신 장치(410)는 제2 모드로 동작할 수 있다. 이러한 경우, 제1 비디오 디코더(413)와 제2 비디오 디코더(415)를 동시에 동작시켜 상기 스트림을 디코딩하되, 제2 비디오 인코더(403)에 의해 인코딩된 스트림은 제2 비디오 디코더(415)로 바로 입력되어 디코딩될 수 있으며, 제1 비디오 인코더(401)에 의해 인코딩된 스트림은 지연 버퍼(417)를 통과한 다음 제1 비디오 디코더(413)로 입력되어 디코딩될 수 있다.
상술한 바와 같이, 지연 버퍼를 수신 측에 추가할 경우, 수신 측에서는 지연 버퍼를 통해 전송 스트림에 대한 지연 시간을 조절할 수 있으므로, 이종 비디오 코덱을 사용하지 않고 인코딩된 스트림만을 수신하여 디코딩하더라도 화면 지연 현상이 발생하지 않을 수 있다.
지연 버퍼(417)의 크기는 제1 비디오 인코더(401)에서 규정된 제1 T-STD(Transport stream System Target Decoder)의 버퍼 크기와 제2 비디오 인코더(403)에서 규정된 제2 T-STD의 버퍼 크기 간의 차이를 기반으로 결정될 수 있다. 이때, 제1 T-STD는 제1 비디오 디코더(413)이고, 제2 T-STD는 제2 비디오 디코더(415)를 말한다.
실제 동작 시 지연 버퍼(417)에 의해 지연되는 지연 시간은 제1 비디오 인코더(401)와 제2 비디오 인코더(403)의 인코딩 조건, 수신된 전송 스트림 내 기준 시간 값을 기반으로 유도된 제1 DTS(Decoding Time Stamp)와 제2 DTS 간의 차이 값, 및 제1 T-STD의 버퍼 초기 지연 시간과 상기 제2 T-STD의 버퍼 초기 지연 시간 간의 차이 값 중 적어도 하나를 기반으로 결정될 수 있다.
여기서, 기준 시간 값은 전송 스트림 내 PCR(Program Clock Reference)일 수 있으며, PCR은 인코더의 시스템 클럭(system clock)으로부터 만들어지는 값으로 디코더에서 PCR 값을 수신하여 현재 디코딩하려는 프로그램의 기준 시간 값으로 설정하여 DTS를 획득할 수 있다. 제1 DTS는 제1 비디오 디코더(413)로 입력되는 전송 스트림이 디코딩되어야 하는 시점을 나타내는 정보이고, 제2 DTS는 제2 비디오 디코더(415)로 입력되는 전송 스트림이 디코딩되어야 하는 시점을 나타내는 정보일 수 있다.
제1 T-STD의 버퍼 초기 지연 시간은 예컨대, 제1 비디오 디코더(413)가 MPEG-2 비디오 코덱을 사용하면 MPEG-2 비디오의 Vbv(video buffering verifier)_delay 값을 이용할 수 있다. 제2 T-STD의 버퍼 초기 지연 시간은 예컨대, 제2 비디오 디코더(415)가 MPEG-4 AVC 코덱을 사용하면 MPEG-4 AVC의 initial_cpb(coded picture buffer)_removal_delay 값을 이용할 수 있다.
도 5는 본 발명에 따른 이종 비디오 코덱을 적용한 영상 시스템에서의 디코더 버퍼링 방법을 설명하기 위한 도면을 나타낸 것이다.
본 발명에 따른 이종 비디오 코덱을 적용한 영상 시스템은, 이종 비디오 코덱을 사용하여 인코딩된 전송 스트림을 전송하는 전송 장치와, 상기 전송 장치로부터 전송 스트림을 수신하여 디코딩하는 수신 장치를 포함할 수 있다. 예를 들어, 전송 장치는 제1 비디오 코덱(예컨대, MPEG-2 비디오)을 기반으로 제1 영상을 인코딩하는 제1 비디오 인코더와 제2 비디오 코덱(예컨대, MPEG-4 AVC)를 기반으로 제2 영상을 인코딩하는 제2 비디오 인코더를 포함할 수 있다. 수신 장치는 제1 비디오 코덱(예컨대, MPEG-2 비디오)을 기반으로 수신한 제1 영상을 디코딩하는 제1 비디오 디코더와 제2 비디오 코덱(예컨대, MPEG-4 AVC)를 기반으로 수신한 제2 영상을 디코딩하는 제2 비디오 디코더를 포함할 수 있다.
상기와 같은 이종 비디오 코덱을 사용하는 영상 시스템에서, 제2 비디오 인코더에 허용된 제2 T-STD의 버퍼 크기가 제1 비디오 인코더에 허용된 제1 T-STD의 버퍼 크기에 비해 큰 경우, 본 발명의 일 실시예에 따른 디코더 버퍼링 방법은 실제 사용 가능한 제2 T-STD의 버퍼 용량을 제한할 수 있다. 여기서, 제1 T-STD는 제1 비디오 디코더를 의미하며, 제2 T-STD는 제2 비디오 디코더를 의미한다.
예를 들어, 도 5에 도시된 바와 같이, MPEG-4 AVC 규격에서 정의된 T-STD의 버퍼 크기(cpb_size)(510)가 MPEG-2 비디오 규격에서 정의된 T-STD의 버퍼 크기(VBV_size)(520)보다 크다. 이러한 경우, 본 발명에서는 MPEG-4 AVC 규격에서 정의된 T-STD의 버퍼 크기(cpb_size)(510)를 MPEG-2 비디오 규격에서 정의된 T-STD의 버퍼 크기(VBV_size)(520)와 유사하거나(530) 동일하게 조정할 수 있다.
또한, 상기와 같은 이종 비디오 코덱을 사용하는 영상 시스템에서, 제2 비디오 인코더에 허용된 제2 T-STD의 버퍼 크기가 제1 비디오 인코더에 허용된 제1 T-STD의 버퍼 크기에 비해 큰 경우, 본 발명의 다른 실시예에 따른 디코더 버퍼링 방법으로는 제2 T-STD의 버퍼 초기 지연 시간을 제1 T-STD의 버퍼 초기 지연 시간과 유사하거나 동일하게 조정할 수 있다.
예를 들어, MPEG-2 비디오와 MPEG-4 AVC에서는 각각 Vbv_delay와 initial_cpb_removal_delay를 통해 억세스 유닛(access unit) 단위로 디코딩 초기의 버퍼 지연을 제어할 수 있게 하고 있다(ISO/IEC 13818-2 및 ISO/IEC 14496-10 참조). MPEG-2 비디오와 MPEG-4 AVC를 기반으로 각각 인코딩되는 스트림은 Vbv_delay와 initial_cpb_removal_delay를 통해 초기 비트율이 제어되며, 이 과정에서 비트스트림의 지연 시간이 결정될 수 있다. 일 예로, 제2 비디오 인코더의 제2 T-STD의 버퍼 지연 시간을 줄이기 위해서, 비트량 발생이 감소하더라도 제2 비디오 인코더의 제2 T-STD의 버퍼 초기 지연 시간(MPEG-4 AVC의 initial_cpb_removal_delay 값)이 제1 비디오 인코더의 제1 T-STD의 버퍼 초기 지연 시간(MPEG-2 비디오의 Vbv_delay 값)과 유사하거나 동일하도록 설정될 수 있다(540). 필요 시 SEI 메시지(message)(ISO/IEC 14496-10 참조)를 통해 디코더 버퍼의 초기 지연 시간에 대한 정보를 전송할 수 있다.
도 6은 본 발명의 실시예에 따른 이종 비디오 코덱을 적용한 영상 시스템에서의 디코더 버퍼링 방법을 나타내는 순서도이다. 일 예로, 도 6의 방법은 수신 장치에서 수행될 수도 있고, 별도의 제어 장치에서 수행될 수도 있다. 또는, 전송 장치에서 디코더 버퍼를 조정할 수도 있다.
도 6을 참조하면, 수신 장치는 제1 비디오 인코더에 의해 인코딩된 제1 영상과 제2 비디오 인코더에 의해 인코딩된 제2 영상을 다중화한 전송 스트림을 수신한다(S600).
이때, 제1 비디오 인코더는 MPEG-2 비디오 코덱을 기반으로 영상을 인코딩하는 인코더일 수 있으며, 제2 비디오 인코더는 MPEG-4 AVC 코덱을 기반으로 영상을 인코딩하는 인코더일 수 있다. 또는, 제1 비디오 인코더는 MPEG-4 AVC 코덱을 기반으로 영상을 인코딩하는 인코더일 수 있으며, 제2 비디오 인코더는 HEVC(High Efficiency Video Coding) 코덱을 기반으로 영상을 인코딩하는 인코더일 수 있다.
수신 장치는 제1 비디오 인코더에서 규정된 제1 T-STD와 제2 비디오 인코더에서 규정된 제2 T-STD에 대한 버퍼를 조정한다(S610).
일 예로, 제1 T-STD와 제2 T-STD의 버퍼 크기를 조정할 수 있다. 만일 제2 T-STD의 버퍼 크기(예를 들어, MPEG-4 AVC의 cpb_size)가 제1 T-STD의 버퍼 크기(예를 들어, MPEG-2 비디오의 VBV_size)보다 큰 경우, 수신 장치는 제2 T-STD의 버퍼 크기를 제1 T-STD의 버퍼 크기로 제한할 수 있다.
다른 예로, 제1 T-STD와 제2 T-STD의 버퍼 초기 지연 시간을 조정할 수 있다. 만일 제2 T-STD의 버퍼 초기 지연 시간(예를 들어, MPEG-4 AVC의 initial_cpb_removal_delay)이 제1 T-STD의 버퍼 초기 지연 시간(예를 들어, MPEG-2 비디오의 Vbv_delay)보다 긴 경우, 수신 장치는 제2 T-STD이 버퍼 초기 지연 시간을 제1 T-STD의 버퍼 초기 지연 시간으로 조정할 수 있다.
수신 장치는 조정된 제1 T-STD와 제2 T-STD의 버퍼를 기반으로 수신된 전송 스트림을 제1 T-STD 및 제2 T-STD를 통해 각각 디코딩한다(S620).
예컨대, 제1 비디오 인코더가 MPEG-2 비디오 코덱을 기반으로 영상을 인코딩하고 제2 비디오 인코더가 MPEG-4 AVC 코덱을 기반으로 영상을 인코딩한 경우, 제1 T-STD는 MPEG-2 비디오 코덱을 기반으로 수신된 전송 스트림을 디코딩할 수 있으며, 제2 T-STD는 MPEG-4 AVC 코덱을 기반으로 수신된 전송 스트림을 디코딩할 수 있다. 또는, 제1 비디오 인코더가 MPEG-4 AVC 코덱을 기반으로 영상을 인코딩하고 제2 비디오 인코더가 HEVC 코덱을 기반으로 영상을 인코딩한 경우, 제1 T-STD는 MPEG-4 AVC 코덱을 기반으로 수신된 전송 스트림을 디코딩할 수 있으며, 제2 T-STD는 HEVC 코덱을 기반으로 수신된 전송 스트림을 디코딩할 수 있다.
상술한 실시예들에서, 방법들은 일련의 단계 또는 블록으로서 순서도를 기초로 설명되고 있으나, 본 발명은 단계들의 순서에 한정되는 것은 아니며, 어떤 단계는 상술한 바와 다른 단계와 다른 순서로 또는 동시에 발생할 수 있다. 또한, 당해 기술 분야에서 통상의 지식을 가진 자라면 순서도에 나타난 단계들이 배타적이지 않고, 다른 단계가 포함되거나, 순서도의 하나 또는 그 이상의 단계가 본 발명의 범위에 영향을 미치지 않고 삭제될 수 있음을 이해할 수 있을 것이다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시 예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시 예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호범위는 특허청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.

Claims (17)

  1. 이종 비디오 코덱을 사용하는 영상 시스템에서의 전송 장치에 있어서,
    제1 비디오 코덱을 이용하여 제1 영상(video)을 인코딩하는 제1 비디오 인코더;
    제2 비디오 코덱을 이용하여 제2 영상(video)을 인코딩하는 제2 비디오 인코더; 및
    상기 제1 비디오 인코더에서 규정된 제1 T-STD(Transport stream System Target Decoder)의 버퍼 크기와 상기 제2 비디오 인코더에서 규정된 제2 T-STD의 버퍼 크기를 기반으로, 상기 제1 영상과 상기 제2 영상에 대한 지연 시간을 동기화하기 위한 지연 버퍼(delay buffer)를 포함하는 전송 장치.
  2. 제1항에 있어서,
    상기 지연 버퍼는,
    상기 제1 T-STD의 버퍼 크기와 상기 제2 T-STD의 버퍼 크기 간의 차이를 기반으로, 상기 제1 비디오 인코더에 의해 인코딩된 제1 영상을 지연하는 것을 특징으로 하는 전송 장치.
  3. 제1항에 있어서,
    상기 지연 버퍼는,
    상기 제1 T-STD의 버퍼 크기와 상기 제2 T-STD의 버퍼 크기 간의 차이를 기반으로, 상기 제2 비디오 인코더에 의해 인코딩된 제2 영상을 지연하는 것을 특징으로 하는 전송 장치.
  4. 제1항에 있어서,
    상기 제1 비디오 코덱은 MPEG-2 비디오 코덱이고,
    상기 제2 비디오 코덱은 MPEG-4 AVC 코덱인 것을 특징으로 하는 전송 장치.
  5. 제1항에 있어서,
    상기 제1 비디오 코덱은 MPEG-4 AVC 코덱이고,
    상기 제2 비디오 코덱은 HEVC(High Efficiency Video Coding) 코덱인 것을 특징으로 하는 전송 장치.
  6. 제1항에 있어서,
    상기 지연 버퍼를 통해 지연 시간이 동기화된 상기 제1 영상과 상기 제2 영상을 재다중화하는 재다중화기를 포함하는 것을 특징으로 하는 전송 장치.
  7. 이종 비디오 코덱을 사용하는 영상 시스템에서의 수신 장치에 있어서,
    수신된 전송 스트림을 제1 비디오 코덱을 이용하여 디코딩하는 제1 비디오 디코더;
    상기 전송 스트림을 제2 비디오 코덱을 이용하여 디코딩하는 제2 비디오 디코더; 및
    상기 제1 비디오 디코더와 연결되어 동작하는 지연 버퍼(delay buffer)를 포함하며,
    상기 지연 버퍼의 크기는 제1 비디오 인코더에서 규정된 제1 T-STD(Transport stream System Target Decoder)의 버퍼 크기와 제2 비디오 인코더에서 규정된 제2 T-STD의 버퍼 크기 간의 차이를 기반으로 결정되며,
    상기 제1 T-STD는 상기 제1 비디오 디코더이고, 상기 제2 T-STD는 상기 제2 비디오 디코더인 것을 특징으로 하는 수신 장치.
  8. 제7항에 있어서,
    상기 지연 버퍼는 상기 제1 비디오 디코더로 입력되는 상기 전송 스트림에 대해 소정의 지연 시간 동안 지연시키며,
    상기 소정의 지연 시간은 상기 제1 비디오 인코더 및 상기 제2 비디오 인코더의 인코딩 조건, 상기 전송 스트림 내 기준 시간 값(PCR: Program Clock Reference)을 기반으로 유도된 제1 DTS(Decoding Time Stamp)와 제2 DTS 간의 차이 값, 및 상기 제1 T-STD의 버퍼 초기 지연 시간과 상기 제2 T-STD의 버퍼 초기 지연 시간 간의 차이 값 중 적어도 하나를 기반으로 결정되며,
    상기 제1 DTS는 상기 제1 비디오 디코더로 입력되는 상기 전송 스트림이 디코딩되어야 하는 시점을 나타내는 정보이고,
    상기 제2 DTS는 상기 제2 비디오 디코더로 입력되는 상기 전송 스트림이 디코딩되어야 하는 시점을 나타내는 정보인 것을 특징으로 하는 수신 장치.
  9. 제8항에 있어서,
    상기 전송 스트림에 대해 제1 모드(mode)로 동작할 경우, 상기 전송 스트림은 상기 지연 버퍼에 의한 지연 없이 상기 제1 비디오 디코더로 입력되어 디코딩되며,
    상기 전송 스트림에 대해 제2 모드로 동작할 경우, 상기 전송 스트림은 상기 지연 버퍼로 입력되어 상기 소정의 시간 동안 지연된 다음 상기 제1 비디오 디코더로 입력되어 디코딩되는 것을 특징으로 하는 수신 장치.
  10. 제9항에 있어서,
    상기 전송 스트림이 상기 제1 비디오 인코더에 의해 인코딩된 스트림일 경우, 상기 제1 모드로 동작되며,
    상기 전송 스트림이 상기 제1 비디오 인코더 및 상기 제2 비디오 인코더에 의해 각각 인코딩되어 다중화된 스트림일 경우, 상기 제2 모드로 동작되는 것을 특징으로 하는 수신 장치.
  11. 제7항에 있어서,
    상기 제1 비디오 코덱은 MPEG-2 비디오 코덱이고,
    상기 제2 비디오 코덱은 MPEG-4 AVC 코덱인 것을 특징으로 하는 수신 장치.
  12. 제7항에 있어서,
    상기 제1 비디오 코덱은 MPEG-4 AVC 코덱이고,
    상기 제2 비디오 코덱은 HEVC(High Efficiency Video Coding) 코덱인 것을 특징으로 하는 전송 장치.
  13. 이종 비디오 코덱을 사용하는 영상 시스템에서의 디코더 버퍼링 방법에 있어서,
    제1 비디오 인코더에 의해 인코딩된 제1 영상과 제2 비디오 인코더에 의해 인코딩된 제2 영상을 다중화한 전송 스트림을 수신하는 단계;
    상기 제1 비디오 인코더에서 규정된 제1 T-STD(Transport stream System Target Decoder)와 상기 제2 비디오 인코더에서 규정된 제2 T-STD에 대한 버퍼를 조정하는 단계; 및
    상기 조정된 버퍼를 기반으로 상기 제1 T-STD와 상기 제2 T-STD에 의해 상기 전송 스트림을 각각 디코딩하는 단계를 포함하는 디코더 버퍼링 방법.
  14. 제13항에 있어서,
    상기 버퍼를 조정하는 단계에서는,
    상기 제1 T-STD의 버퍼 크기와 상기 제2 T-STD의 버퍼 크기를 조정하되,
    상기 제2 T-STD의 버퍼 크기가 상기 제1 T-STD의 버퍼 크기보다 큰 경우, 상기 제2 T-STD의 버퍼 크기를 상기 제1 T-STD의 버퍼 크기로 제한하는 것을 특징으로 하는 디코더 버퍼링 방법.
  15. 제13항에 있어서,
    상기 버퍼를 조정하는 단계에서는,
    기 제1 T-STD의 버퍼 초기 지연 시간과 상기 제2 T-STD의 버퍼 초기 지연 시간을 조정하되,
    상기 제2 T-STD의 버퍼 초기 지연 시간이 상기 제1 T-STD의 버퍼 초기 지연 시간보다 긴 경우, 상기 제2 T-STD의 버퍼 초기 지연 시간을 상기 제1 T-STD의 버퍼 초기 지연 시간으로 조정하는 것을 특징으로 하는 디코더 버퍼링 방법.
  16. 제13항에 있어서,
    상기 제1 비디오 인코더 및 상기 제1 T-STD는 MPEG-2 비디오 코덱을 이용하고,
    상기 제2 비디오 인코더 및 상기 제2 T-STD는 MPEG-4 AVC 코덱을 이용하는 것을 특징으로 하는 디코더 버퍼링 방법.
  17. 제13항에 있어서,
    상기 제1 비디오 인코더 및 상기 제1 T-STD는 MPEG-4 AVC 코덱을 이용하고,
    상기 제2 비디오 인코더 및 상기 제2 T-STD는 HEVC(High Efficiency Video Coding) 코덱을 이용하는 것을 특징으로 하는 디코더 버퍼링 방법.
KR1020130125809A 2012-10-22 2013-10-22 이종 비디오 코덱을 사용하는 영상 시스템에서의 디코더 버퍼링 방법 및 그 장치 KR20140053777A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US14/059,913 US20140112395A1 (en) 2012-10-22 2013-10-22 Method and apparatus for decoder buffering in hybrid coded video system

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR20120117339 2012-10-22
KR1020120117339 2012-10-22
KR1020120120383 2012-10-29
KR20120120383 2012-10-29

Publications (1)

Publication Number Publication Date
KR20140053777A true KR20140053777A (ko) 2014-05-08

Family

ID=50886298

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130125809A KR20140053777A (ko) 2012-10-22 2013-10-22 이종 비디오 코덱을 사용하는 영상 시스템에서의 디코더 버퍼링 방법 및 그 장치

Country Status (1)

Country Link
KR (1) KR20140053777A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200071666A (ko) * 2018-12-11 2020-06-19 주식회사 디에스브로드캐스트 버퍼모델을 따르는 스트리밍을 위한 부가 정보 생성 방법 및 장치
KR102313323B1 (ko) * 2020-04-10 2021-10-14 에스케이브로드밴드주식회사 동영상 인코딩장치 및 동영상 인코딩방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200071666A (ko) * 2018-12-11 2020-06-19 주식회사 디에스브로드캐스트 버퍼모델을 따르는 스트리밍을 위한 부가 정보 생성 방법 및 장치
KR102313323B1 (ko) * 2020-04-10 2021-10-14 에스케이브로드밴드주식회사 동영상 인코딩장치 및 동영상 인코딩방법

Similar Documents

Publication Publication Date Title
US9628771B2 (en) Transmitter and receiver for transmitting and receiving multimedia content, and reproduction method therefor
US8885709B2 (en) Image decoding device, image coding device, image decoding method, image coding method, and program
KR101683119B1 (ko) 방송 송신기, 방송 수신기 및 3ｄ 비디오 데이터 처리 방법
US9210354B2 (en) Method and apparatus for reception and transmission
KR101967818B1 (ko) 수신 장치 및 그 수신 방법
US20130293677A1 (en) Reception device for receiving a plurality of real-time transfer streams, transmission device for transmitting same, and method for playing multimedia content
JP2000500634A (ja) ビデオプログラムを多重化するための方法および装置
US9438895B2 (en) Receiving apparatus, transmitting apparatus, communication system, control method of the receiving apparatus and program
US20140112395A1 (en) Method and apparatus for decoder buffering in hybrid coded video system
US9860458B2 (en) Method, apparatus, and system for switching transport stream
US8170401B2 (en) Optimizing ad insertion by removing low information frames
US20150109411A1 (en) Image playback apparatus for 3dtv and method performed by the apparatus
WO2013161442A1 (ja) 画像データ送信装置、画像データ送信方法、画像データ受信装置および画像データ受信方法
US20120307006A1 (en) Receiving apparatus, transmitting apparatus, communication system, receiving apparatus control method, and program
WO2012169204A1 (ja) 送信装置、受信装置、送信方法及び受信方法
KR101699367B1 (ko) 3ｄｔｖ 다중화 방법 및 그 장치
JPWO2013099289A1 (ja) 再生装置、送信装置、再生方法及び送信方法
KR20140053777A (ko) 이종 비디오 코덱을 사용하는 영상 시스템에서의 디코더 버퍼링 방법 및 그 장치
Kim et al. World's first hybrid 3DTV broadcasting experiment
KR20110068821A (ko) 송, 수신 장치 및 송, 수신 방법
GB2543080A (en) Digital media splicing system and method
KR101620083B1 (ko) 다채널 디지털 방송을 위한 스플라이싱 장치 및 그 방법
KR20170093637A (ko) 이종 네트워크 환경에서 미디어 전송 스트림 버퍼링 방법 및 이를 이용한 영상 수신 장치
Lee et al. Delivery system and receiver for service-compatible 3DTV broadcasting
Nakamura et al. Super high resolution video codec system with multiple MPEG-s HDTV codec LSI's

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination