KR20080099094A - 계층적 부호화 장치 및 방법, 계층적 복호화 장치 및 방법 - Google Patents

계층적 부호화 장치 및 방법, 계층적 복호화 장치 및 방법 Download PDF

Info

Publication number
KR20080099094A
KR20080099094A KR1020070044747A KR20070044747A KR20080099094A KR 20080099094 A KR20080099094 A KR 20080099094A KR 1020070044747 A KR1020070044747 A KR 1020070044747A KR 20070044747 A KR20070044747 A KR 20070044747A KR 20080099094 A KR20080099094 A KR 20080099094A
Authority
KR
South Korea
Prior art keywords
layer
audio
video
layered
hierarchical
Prior art date
Application number
KR1020070044747A
Other languages
English (en)
Other versions
KR101292893B1 (ko
Inventor
박상규
Original Assignee
(주)카이미디어
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)카이미디어 filed Critical (주)카이미디어
Priority to KR1020070044747A priority Critical patent/KR101292893B1/ko
Publication of KR20080099094A publication Critical patent/KR20080099094A/ko
Application granted granted Critical
Publication of KR101292893B1 publication Critical patent/KR101292893B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4343—Extraction or processing of packetized elementary streams [PES]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H2201/00—Aspects of broadcast communication
    • H04H2201/10—Aspects of broadcast communication characterised by the type of broadcast system
    • H04H2201/11—Aspects of broadcast communication characterised by the type of broadcast system digital multimedia broadcasting [DMB]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은 비디오 및 오디오 신호를 부호화하고 복호화하는데 있어서, 비디오 및 오디오 신호에 대하여 계층적으로 부호화 및 복호화를 수행하게 함으로써 지상파 DMB 수신기의 성능에 따라 선택적으로 계층별 신호를 복원할 수 있도록 하는 장치 및 방법을 제공한다.
이를 위하여 본 발명의 계층적 부호화 장치는 계층적 비디오 부호화부, 계층적 오디오 부호화부, 계층별 SL(Sync Layer) 패킷타이저부, 계층별 PES(Packetized Elementary Stream) 패킷타이저부, 계층별 섹션 발생부, 그리고 계층별 TS(Transport Stream) 다중화부로 구성되고, 계층적 복호화 장치는 계층별 TS 역다중화부, 계층별 PES 디패킷타이저부, 계층별 섹션 분석부, 계층별 SL 디패킷타이저부, 계층적 비디오 복호화부, 그리고 계층적 오디오 복호화부로 구성된다.
계층적 부호화, 계층적 복호화, 지상파 DMB

Description

계층적 부호화 장치 및 방법, 계층적 복호화 장치 및 방법{Scalable coding apparatus and method, scalable decoding apparatus and method}
도 1 은 기존의 지상파 DMB 부호화 장치의 내부 구성도
도 2 는 기존의 지상파 DMB 복호화 장치의 내부 구성도
도 3 은 본 발명의 계층적 부호화 장치의 내부 구성도
도 4 는 본 발명의 계층적 부호화 방식의 동작 흐름도
도 5 는 본 발명의 계층적 복호화 장치의 내부 구성도
도 6 은 본 발명의 계층적 복호화 방식의 동작 흐름도
<도면의 주요 부분에 대한 부호 설명>
11 비디오 부호화부 12 오디오 부호화부
13 SL 패킷타이저부 14 PES 패킷타이저부
15 섹션 발생부 16 TS 다중화부
21 TS 역다중화부 22 PES 디패킷타이저부
23 섹션 분석부 24 SL 디패킷타이저부
25 비디오 복호화부 26 오디오 복호화부
31 계층적 비디오 부호화부 32 계층적 오디오 부호화부
33 계층별 SL 패킷타이저부 34 계층별 PES 패킷타이저부
35 계층별 섹션 발생부 36 계층별 TS 다중화부
51 계층별 TS 역다중화부 52 계층별 PES 디패킷타이저부
53 계층별 섹션 분석부 54 계층별 SL 디패킷타이저부
55 계층적 비디오 복호화부 56 계층적 오디오 복호화부
본 발명은 비디오 및 오디오 신호를 부호화하고 복호화하는데 있어서, 비디오 및 오디오 신호에 대하여 계층적으로 부호화 및 복호화를 수행하게 함으로써 지상파 DMB 수신기의 성능에 따라 선택적으로 계층별 신호를 복원할 수 있도록 하는 장치 및 방법에 관한 것이다.
현재 상용 서비스되고 있는 지상파 DMB의 경우 320(가로)x240(세로)의 해상도를 갖는 비디오 부호화 데이터와 CD 음질의 오디오 부호화 데이터가 방송국에서 만들어 져서 공중파를 이용하여 수신기에 전달되고 있다.
지상파 DMB에서의 비디오 및 오디오 부호화는 공지의 MPEG-4 AVC(Advanced Video Coding) 베이스라인 프로파일 방식과 MPEG-4 BSAC 혹은 MPEG-4 HE-AAC 방식이 사용되고 있으며, MPEG-4 AVC 방식은 320(가로)x240(세로)의 해상도를 갖는 비디오 신호를 부호화하고 있고 MPEG-4 BSAC 혹은 MPEG-4 HE-AAC 방식은 좌우 스테레오 채널을 갖는 오디오 신호를 부호화하고 있다.
최근 DMB에서 컨텐츠의 고급화에 대한 요구가 생기면서, 비디오의 해상도를 높여서 640(가로)x480(세로)의 고해상도로 화질을 개선시키고, 오디오 채널을 서라운드 채널까지 포함시켜 입체감을 향상시킬 필요성이 크게 늘어나고 있다. 이런 요구에 대응하기 위해서는 무엇보다도 기존 지상파 DMB 부호화 방식과의 호환성을 유지하면서 비디오 해상도를 높이고 오디오 채널수를 늘리는 방법이 필요하다.
이를 만족시키기 위해서는 새로운 비디오 부호화 방식, 오디오 부호화 방식, 그리고 다중화 방식의 사용이 필요하다.
예를 들면, 비디오 부호화 방식은 MPEG-4 SVC(Scalable Video Coding) 부호화 방식이 적합한데, 이는 MPEG-4 SVC 부호화 방식이 계층적으로 부호화하는데 있어서 기본 계층으로 MPEG-4 AVC 부호화 방식을 사용하기 때문이다. 즉, MPEG-4 SVC 부호화 에 의해 기본 계층 데이터와 향상 계층 데이터가 생성 되면, 기존 지상파 DMB 수신기는 기본 계층 데이터인 MPEG-4 AVC 부호화 데이터만 이용하여 복호화 함으로써 320(가로)x240(세로)의 해상도를 갖는 비디오 신호를 복원하는 것이 가능하고, 신규 지상파 DMB 수신기는 기본 계층 데이터와 향상 계층 데이터를 모두 이용하여 복호화 함으로써 640(가로)x480(세로)의 고해상도의 비디오 신호를 복원하는 것이 가능하게 된다.
또한 오디오 부호화 방식의 경우에는, MPEG-4 오디오 부호화 방식을 사용하여 계층적으로 오디오를 부호화하게 되면 기본 계층으로 기존 지상파 DMB 오디오 데이터와 호환되는 스테레오 오디오 부호화 데이터가 생성되고, 향상 계층으로 서라운드 오디오 부호화 데이터가 생성되는데, 기존 지상파 DMB 수신기는 기본 계층 데이터인 스테레오 오디오 부호화 데이터만 이용하여 복호화 함으로써 스테레오 오디오 신호를 복원하는 것이 가능하고, 신규 지상파 DMB 수신기는 기본 계층 데이터와 향상 계층 데이터를 모두 이용하여 복호화 함으로써 서라운드 오디오를 포함한 멀티 채널의 오디오 신호를 복원하는 것이 가능하게 된다.
또한 다중화 방식은 기존 지상파 DMB의 다중화 방식과 다른 방식이 필요하다. 기존 지상파 DMB의 다중화 방식은 비디오 부호화 데이터, 오디오 부호화 데이터, 기타 관련 데이터를 한 개의 TS(Transport Stream)로 다중화하여 동일한 전송 채널로 전송한다. 하지만 계층별로 생성된 비디오 부호화 데이터를 다중화할 경우에 한 개의 TS로 다중화하면 동일한 전송 채널로 전송되어야 하는데 현재 지상파 DMB 채널의 대역폭으로는 향상 계층의 데이터를 전송하는데 부족하다. 따라서 변조 방식을 변경하여 전송 대역폭을 늘리면서 기존 지상파 DMB 변조 방식과 호환되도록 전송 채널을 계층화할 필요가 있으며, 그에 따라 채널 계층별로 계층별 부호화 데이터를 전송하기 위해서 다중화 방식도 계층별로 별도의 TS를 생성하는 것이 필요하다.
따라서 계층별 TS가 채널 계층별로 송신되면, 지상파 DMB 수신기는 계층별 TS를 선택적으로 수신하여 계층별 비디오 및 오디오 신호를 복호화 함으로써 서로 다른 품질의 비디오 및 오디오 신호를 선택적으로 복원하는 것이 가능하게 된다.
따라서 본 발명은 기존 지상파 DMB에 비하여 해상도가 높은 비디오 화면과 멀티 채널 오디오를 제공하면서 동시에 지상파 DMB 수신기가 그 성능에 따라 선택적으로 계층별 비디오 및 오디오 신호를 복원할 수 있도록 하기 위하여, 기존의 지상파 DMB 부호화 장치와는 다른 새로운 장치를 제공하고자 한다.
본 발명은 기존 지상파 DMB에 비하여 해상도가 높은 비디오 화면과 멀티 채널 오디오를 제공하면서 지상파 DMB 수신기가 그 성능에 따라 선택적으로 계층별 비디오 및 오디오 신호를 복원할 수 있도록 하기 위하여, 비디오 및 오디오 신호에 대하여 MPEG-4 SVC(Scalable Video Coding) 부호화/복호화 방식과 MPEG-4 오디오 부호화/ 복호화 방식을 사용하여 계층적으로 부호화하고 복호화할 수 있는 장치 및 방법을 제공 한다.
이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시 예에 대하여 상세히 설명한다.
도 1 은 기존의 지상파 DMB 부호화 장치의 내부 구성도
기존의 지상파 DMB 부호화 장치는 비디오 신호를 입력하여 MPEG-4 AVC(Advanced Video Coding) 부호화 방식으로 비디오 부호화를 수행하고 비디오 ES(Elementary Stream)를 생성하는 비디오 부호화부(11), 오디오 신호를 입력하여 MPEG-4 오디오 부호화 방식으로 오디오 부호화를 수행하고 오디오 ES를 생성하는 오디오 부호화부(12), 상기 비디오 및 오디오 ES와 OD/BIFS(Object Descriptor/Binary Format for Scene) 스트림에 대하여 SL(Sync Layer) 패킷화를 수행하고 비디오 및 오디오 SL 패킷과 OD/BIFS SL 패킷을 생성하는 SL 패킷타이저부(13), 상기 비디오 및 오디오 SL 패킷과 OD/BIFS SL 패킷에 대하여 PES(Packetized Elementary Stream) 패킷화를 수행하고 PES 패킷을 생성하는 PES 패킷타이저부(14), 상기 OD/BIFS SL 패킷과 IOD(Initial Object Descriptor) 데이터를 이용하여 14496 섹션 데이터와 PSI(Program Specific Information) 섹션 데이터를 생성하는 섹션 발생부(15), 그 리고 상기 PES 패킷과 14496 섹션 데이터 및 PSI 섹션 데이터를 이용하여 TS(Transport Stream)를 생성하는 TS 다중화부(16)로 구성되어 있다.
상기 비디오 부호화부(11)는 MPEG-4 AVC 비디오 부호화 방식을 이용하여 320(가로)x240(세로)의 해상도에 해당하는 비디오 부호화 데이터를 생성하며, 상기 오디오 부호화부(12)는 MPEG-4 오디오 부호화 방식을 이용하여 좌우 스테레오 신호에 해당하는 오디오 부호화 데이터를 생성한다.
상기 SL 패킷타이저부(13), 상기 PES 패킷타이저부(14), 상기 섹션 발생부(15) 및 상기 TS 다중화부(16)는 공지의 TTA 표준인 TTAS.KO_07.0026(지상파 DMB 비디오 송수신 정합 표준)에 따라 동작하며 최종적으로 한 개의 지상파 DMB용 TS를 생성하여 출력한다.
도 2 는 기존의 지상파 DMB 복호화 장치의 내부 구성도이다.
기존의 지상파 DMB 복호화 장치는 TS를 입력하여 TS 역다중화를 수행하고 PES 패킷과 14496 섹션 데이터 및 PSI 섹션 데이터를 출력하는 TS 역다중화부(21), 상기 PES 패킷을 입력하여 디패킷타이징을 수행하고 비디오 및 오디오 SL 패킷과 OD/BIFS SL 패킷을 출력하는 PES 디패킷타이저부(22), 상기 14496 섹션 데이터 및 PSI 섹션 데이터를 입력하여 OD/BIFS SL 패킷 관련 데이터 및 IOD 데이터를 출력하 는 섹션 분석부(23), 상기 비디오 및 오디오 SL 패킷과 OD/BIFS SL 패킷을 입력하여 디패킷타이징을 수행하고 비디오 및 오디오 ES와 OD/BIFS 스트림을 출력하는 SL 디패킷타이저부(24), 상기 비디오 ES, OD/BIFS 스트림 및 IOD 데이터를 이용하여 MPEG-4 AVC 비디오 복호화 방식으로 비디오 복호화를 수행하고 비디오 신호를 출력하는 비디오 복호화부(25), 그리고 상기 오디오 ES, OD/BIFS 스트림 및 IOD 데이터를 이용하여 MPEG-4 오디오 복호화 방식으로 오디오 복호화를 수행하고 오디오 신호를 출력하는 오디오 복호화부(26)로 구성되어 있다.
상기 TS 역다중화부(21), PES 디패킷타이저부(22), 섹션 분석부(23) 및 SL 디패킷타이저부(24)는 공지의 TTA 표준인 TTAS.KO_07.0026(지상파 DMB 비디오 송수신 정합 표준)에 따라 생성된 지상파 DMB용 TS로부터 상기 비디오 복호화부(25)와 오디오 복호화부(26)가 복호화 처리를 수행하는데 필요한 비디오 ES, 오디오 ES, OD/BIFS 스트림 그리고 IOD 데이터를 추출한다.
상기 비디오 복호화부(25)는 MPEG-4 AVC 비디오 복호화 방식을 이용하여 320(가로)x240(세로)의 해상도에 해당하는 비디오 신호를 복원하며, 상기 오디오 복호화부(26)는 MPEG-4 오디오 복호화 방식을 이용하여 좌우 스테레오 신호에 해당하는 오디오 신호를 복원한다.
도 3 은 본 발명의 계층적 부호화 장치의 내부 구성도이다.
본 발명의 계층적 부호화 장치는 서로 다른 해상도를 표현하는 계층별 비디오 부호화 데이터와 서로 다른 오디오 채널을 표현하는 계층별 오디오 데이터를 생성하고, 이들 계층별 데이터를 효율적으로 전달하기 위해 서로 다른 계층별 TS를 생성하도록 구성되어 있다.
본 발명의 계층적 부호화 장치는 비디오 신호를 입력하여 MPEG-4 SVC(Scalable Video Coding) 부호화 방식으로 계층적 비디오 부호화를 수행하고 계층별 비디오 ES를 생성하는 계층적 비디오 부호화부(31), 오디오 신호를 입력하여 MPEG-4 오디오 부호화 방식으로 계층적 오디오 부호화를 수행하고 계층별 오디오 ES를 생성하는 계층적 오디오 부호화부(32), 상기 계층별 비디오 및 오디오 ES와 계층별 OD/BIFS 스트림에 대하여 SL 패킷화를 수행하고 계층별 비디오 및 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 생성하는 계층별 SL 패킷타이저부(33), 상기 계층별 비디오 및 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷에 대하여 계층별 PES 패킷화를 수행하고 계층별 PES 패킷을 생성하는 계층별 PES 패킷타이저부(34), 상기 계층별 OD/BIFS SL 패킷과 계층별 IOD 데이터를 이용하여 계층별 14496 섹션 데이터와 계층별 PSI 섹션 데이터를 생성하는 계층별 섹션 발생부(35), 그리고 상기 계층별 PES 패킷과 계층별 14496 섹션 데이터 및 계층별 PSI 섹션 데이터를 이용하여 계층별 TS를 생성하는 계층별 TS 다중화부(36)로 구성된다.
본 발명의 계층적 부호화 장치는 기존의 지상파 DMB 부호화 장치와는 다르게 계층적 비디오 및 오디오 부호화를 수행하기 때문에, 그에 따라 나머지 구성부도 계층별 데이터를 처리할 수 있도록 구성되는 것이 특징이다.
계층적 비디오 부호화부(31)는 비디오 신호를 입력하여 공지의 국제 표준인 MPEG-4 SVC 부호화 방식을 이용하여 압축 부호화하고, 그 결과 데이터로 계층별 비디오 ES를 출력한다. 예를 들어 계층적 비디오 부호화부(31)는 두 종류의 비디오 ES를 생성할 수 있다. 한가지는 320(가로)x240(세로) 해상도의 화면을 표현할 수 있는 기본 계층 비디오 ES이고, 다른 한가지는 기본 계층 비디오 ES와 함께 640(가로)x480(세로)의 고해상도의 화면을 표현할 수 있는 향상 계층 비디오 ES이다. 이렇게 부호화를 수행 하면, 수신기에서는 기본 계층 비디오 ES만 이용하면 320(가로)x240(세로) 해상도의 화면을 복원할 수 있고, 향상 계층 비디오 ES를 기본 계층 비디오 ES와 함께 이용하면 640(가로)x480(세로)의 고해상도의 화면을 복원할 수 있게 된다. 이런 경우에 신규 지상파 DMB 수신기에서 기본 계층 비디오 ES와 향상 계층 비디오 ES를 별도로 복호화하고 서로 조합하여 고해상도 화면을 정확히 표현할 수 있도록 하기 위해, 계층적 비디오 부호화부(31)는 기본 계층 비디오 ES와 향상 계층 비디오 ES에 대하여 각 화면을 시간 기준으로 서로 구분할 수 있는 정보도 함께 생성하여야 한다.
계층적 오디오 부호화부(32)는 오디오 신호를 입력하여 공지의 국제 표준인 MPEG-4 오디오 부호화 방식을 이용하여 압축 부호화하고, 그 결과 데이터로 계층별 오디오 ES를 출력한다. 예를 들어 계층적 오디오 부호화부(32)는 스테레오 오디오 채널의 소리를 표현할 수 있는 기본 계층 오디오 ES와 서라운드 오디오 채널의 소리를 표현할 수 있는 향상 계층 오디오 ES를 생성할 수 있다. 이렇게 부호화를 수행 하면, 수신기에서는 기본 계층 오디오 ES만 이용하면 스테레오 오디오 채널의 소리를 복원할 수 있고, 향상 계층 오디오 ES를 기본 계층 오디오 ES와 함께 이용하면 서라운드 오디오를 포함한 멀티 채널의 오디오를 복원할 수 있게 된다. 이런 경우에 신규 지상파 DMB 수신기에서 기본 계층 오디오 ES와 향상 계층 오디오 ES를 별도로 복호화하고 서로 조합하여 입체 음향을 정확히 표현할 수 있도록 하기 위해, 계층적 오디오 부호화부(32)는 기본 계층 오디오 ES와 향상 계층 오디오 ES에 대하여 각 오디오 구간을 시간 기준으로 서로 구분할 수 있는 정보도 함께 생성하여야 한다.
계층별 SL 패킷타이저부(33)는 상기 계층적 비디오 부호화부(31)와 계층적 오디오 부호화부(32)에서 생성한 계층별 비디오 및 오디오 ES, 그리고 부호화 관련 정보를 포함하고 있는 OD/BIFS 스트림에 대하여 SL 패킷화를 수행하고, 그 결과로 계층별 비디오 및 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 생성한다. 각 계층에 대한 SL 패킷화는 기존의 지상파 DMB 부호화 장치의 SL 패킷타이저부(13)에서 사용하는 SL 패킷화 방식과 동일하게 이루어진다.
계층별 PES 패킷타이저부(34)는 상기 계층별 비디오 및 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷에 대하여 계층별 PES 패킷화를 수행하고, 그 결과로 계층별 PES 패킷을 생성한다. 각 계층에 대한 PES 패킷화는 기존의 지상파 DMB 부호화 장치의 PES 패킷타이저부(14)에서 사용하는 PES 패킷화 방식과 동일하게 이루어진다.
계층별 섹션 발생부(35)는 상기 계층별 OD/BIFS SL 패킷과 부호화 관련 정보를 포함하고 있는 계층별 IOD 데이터를 이용하여 계층별 14496 섹션 데이터와 계층별 PSI 섹션 데이터를 생성한다. 각 계층에 대한 섹션 발생 처리는 기존의 지상파 DMB 부호화 장치의 섹션 발생부(15)에서 사용하는 섹션 발생 처리와 동일하게 이루어진다.
계층별 TS 다중화부(36)는 상기 계층별 PES 패킷과 계층별 14496 섹션 데이터 및 계층별 PSI 섹션 데이터를 이용하여 계층별 TS를 생성한다. 각 계층에 대한 TS 다중화는 기존의 지상파 DMB 부호화 장치의 TS 다중화부(16)에서 사용하는 TS 다중화 방식과 동일하게 이루어진다.
오디오 신호의 경우에 수신기의 스피커수의 제약으로 인하여 서라운드 오디오 채널까지 필요 없을 가능성도 있다. 그럴 경우에 본 발명의 계층적 오디오 부호화부(32)는 단일 계층 오디오 부호화를 수행하는 기존의 지상파 DMB 부호화 장치의 오디오 부호화부(12)로 대체될 수도 있다.
이런 경우에, 본 발명의 계층적 부호화 장치는 비디오 신호를 입력하여 MPEG-4 SVC 부호화 방식으로 계층적 비디오 부호화를 수행하고 계층별 비디오 ES를 생성하는 계층적 비디오 부호화부, 오디오 신호를 입력하여 MPEG-4 오디오 부호화 방식으로 단일 계층 오디오 부호화를 수행하고 단일 계층 오디오 ES를 생성하는 오디오 부호화부, 상기 계층별 비디오 ES 및 단일 계층 오디오 ES와 계층별 OD/BIFS 스트림에 대하여 SL 패킷화를 수행하고 계층별 비디오 SL 패킷 및 단일 계층 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 생성하는 계층별 SL 패킷타이저부, 상기 계층별 비디오 SL 패킷 및 단일 계층 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷에 대하여 계층별 PES 패킷화를 수행하고 계층별 PES 패킷을 생성하는 계층별 PES 패킷타이저부, 상기 계층별 OD/BIFS SL 패킷과 계층별 IOD 데이터를 이용하여 계층별 14496 섹션 데이터와 계층별 PSI 섹션 데이터를 생성하는 계층별 섹션 발생부, 그리고 상기 계층별 PES 패킷과 계층별 14496 섹션 데이터 및 계층별 PSI 섹션 데이터를 이용하여 계층별 TS를 생성하는 계층별 TS 다중화부로 구성된다.
또한 본 발명의 계층적 부호화 장치는 OD/BIFS 관련 데이터와 IOD 관련 데이터의 전송 효율을 높이기 위해서 OD/BIFS 관련 데이터와 IOD 관련 데이터를 어느 한 계층에서만 사용할 수도 있다. 이를 위하여, 본 발명의 계층적 부호화 장치는 OD/BIFS 관련 데이터와 IOD 관련 데이터를 계층별로 선택적으로 사용할 수 있도록 구성된다.
도 4 는 본 발명의 계층적 부호화 방식의 동작 흐름도
본 발명의 계층적 부호화 방식은 비디오 및 오디오 신호를 입력하여 각 신호에 대하여 계층적 비디오 및 오디오 부호화를 수행하는 단계(41), 상기 계층적 비디오 및 오디오 부호화의 결과로 생성된 계층별 비디오 및 오디오 ES와 계층별 OD/BIFS 스트림에 대하여 계층별 SL 패킷화를 수행하는 단계(42), 상기 계층별 SL 패킷화의 결과로 생성된 계층별 비디오 및 오디오 SL 패킷과 계층별 OD/BIFS 패킷에 대하여 계층별 PES 패킷화를 수행하는 단계(43), 상기 계층별 PES 패킷화의 결과로 생성된 계층별 PES 패킷에 대하여 계층별 OD/BIFS SL 패킷과 계층별 IOD 데이터로부터 구한 계층별 14496 섹션 및 계층별 PSI 섹션 정보를 이용하여 계층별 TS 다중화를 수행하는 단계(44)로 이루어지며, 상기 과정을 부호화가 끝날 때까지 반복적으로 수행한다.
계층적 오디오 부호화를 수행하지 않고, 단일 계층 오디오 부호화를 수행하는 경우에, 본 발명의 계층적 부호화 방식은 비디오 및 오디오 신호를 입력하여 각 신호에 대하여 계층적 비디오 부호화 및 단일 계층 오디오 부호화를 수행하는 단계, 상기 계층적 비디오 및 오디오 부호화의 결과로 생성된 계층별 비디오 ES 및 단일 계층 오디오 ES와 계층별 OD/BIFS 스트림에 대하여 계층별 SL 패킷화를 수행하는 단계, 상기 계층별 SL 패킷화의 결과로 생성된 계층별 비디오 SL 패킷 및 단일 계층 오디 오 SL 패킷과 계층별 OD/BIFS 패킷에 대하여 계층별 PES 패킷화를 수행하는 단계, 상기 계층별 PES 패킷화의 결과로 생성된 계층별 PES 패킷에 대하여 계층별 OD/BIFS SL 패킷과 계층별 IOD 데이터로부터 구한 계층별 14496 섹션 및 계층별 PSI 섹션 정보를 이용하여 계층별 TS 다중화를 수행하는 단계로 이루어지며, 상기 과정을 부호화가 끝날 때까지 반복적으로 수행하게 된다.
도 5 는 본 발명의 계층적 복호화 장치의 내부 구성도
본 발명의 계층적 복호화 장치는 서로 다른 계층별 TS를 선택적으로 입력하여, 서로 다른 해상도를 표현하는 계층별 비디오 신호와 서로 다른 오디오 채널을 표현하는 계층별 오디오 신호를 선택적으로 복원할 수 있도록 구성되어 있다.
본 발명의 계층적 복호화 장치는 계층별 TS를 입력하여 계층별 TS 역다중화를 수행하고 계층별 PES 패킷과 계층별 14496 섹션 데이터 및 계층별 PSI 섹션 데이터를 출력하는 계층별 TS 역다중화부(51), 상기 계층별 PES 패킷을 입력하여 계층별 디패킷타이징을 수행하고 계층별 비디오 및 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 출력하는 계층별 PES 디패킷타이저부(52), 상기 계층별 14496 섹션 데이터 및 계층별 PSI 섹션 데이터를 입력하여 계층별 OD/BIFS SL 패킷 관련 데이터 및 계층별 IOD 데이터를 출력하는 계층별 섹션 분석부(53), 상기 계층별 비디오 및 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 입력하여 계층별 디패킷타이징을 수행하고 계 층별 비디오 및 오디오 ES와 계층별 OD/BIFS 스트림을 출력하는 계층별 SL 디패킷타이저부(54), 상기 계층별 비디오 ES, 계층별 OD/BIFS 스트림 및 계층별 IOD 데이터를 이용하여 MPEG-4 SVC 비디오 복호화 방식으로 계층적 비디오 복호화를 수행하고 비디오 신호를 출력하는 계층적 비디오 복호화부(55), 그리고 상기 계층별 오디오 ES, 계층별 OD/BIFS 스트림 및 계층별 IOD 데이터를 이용하여 MPEG-4 오디오 복호화 방식으로 계층적 오디오 복호화를 수행하고 오디오 신호를 출력하는 계층적 오디오 복호화부(56)로 구성된다.
본 발명의 계층적 복호화 장치는 기존의 지상파 DMB 복호화 장치와는 다르게 계층적 비디오 및 오디오 복호화를 수행하기 때문에, 그에 따라 나머지 구성부도 계층별 데이터를 처리할 수 있도록 구성되는 것이 특징이다.
계층별 TS 역다중화부(51)는 계층별 TS를 입력하여 계층별 TS 역다중화를 수행하고 계층별 PES 패킷과 계층별 14496 섹션 데이터 및 계층별 PSI 섹션 데이터를 출력한다. 각 계층에 대한 TS 역다중화는 기존의 지상파 DMB 복호화 장치에서의 TS 역다중화부(21)에서 사용하는 방식과 동일하게 이루어진다. 계층별 TS 역다중화부(51)는 계층별 TS 를 선택적으로 사용한다. 즉, 기본 계층 TS에 해당하는 지상파 DMB TS가 입력되면, 기본 계층 TS만 사용하여 TS 역다중화를 수행한다.
계층별 PES 디패킷타이저부(52)는 상기 계층별 PES 패킷을 입력하여 계층별 디패킷 타이징을 수행하고 계층별 비디오 및 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 출력한다. 각 계층에 대한 PES 디패킷타이징은 기존의 지상파 DMB 복호화 장치의 PES 디패킷타이저부(22)에서 사용하는 방식과 동일하게 이루어진다.
계층별 섹션 분석부(53)는 상기 계층별 14496 섹션 데이터 및 계층별 PSI 섹션 데이터를 입력하여 계층별 OD/BIFS SL 패킷 관련 데이터 및 계층별 IOD 데이터를 출력한다. 각 계층에 대한 섹션 발생 처리는 기존의 지상파 DMB 복호화 장치의 섹션 분석부(23)에서 사용하는 방식과 동일하게 이루어진다.
계층별 SL 디패킷타이저부(54)는 상기 계층별 비디오 및 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 입력하여 계층별 디패킷타이징을 수행하고 계층별 비디오 및 오디오 ES와 계층별 OD/BIFS 스트림을 출력한다. 각 계층에 대한 SL 패킷화는 기존의 지상파 DMB 복호화 장치의 SL 디패킷타이저부(24)에서 사용하는 방식과 동일하게 이루어진다.
계층적 비디오 복호화부(55)는 상기 계층별 비디오 ES, 계층별 OD/BIFS 스트림 및 계층별 IOD 데이터를 입력하여 MPEG-4 SVC 비디오 복호화 방식으로 계층적 비디오 복호화를 수행하고, 그 결과로 비디오 신호를 출력한다. 계층적 비디오 복호화부(55)는 계층별 비디오 ES를 계층별로 선택하여 사용한다. 즉, 기본 계층 비디오 ES에 해당하는 지상파 DMB 비디오 ES가 입력되면, 기본 계층 비디오 ES만 사용하여 비디오 복호화를 수행한다.
계층적 오디오 복호화부(56)는 상기 계층별 오디오 ES, 계층별 OD/BIFS 스트림 및 계층별 IOD 데이터를 이용하여 MPEG-4 오디오 복호화 방식으로 계층적 오디오 복호화를 수행하고 오디오 신호를 출력한다. 계층적 오디오 복호화부(56)는 계층별 오디오 ES를 계층별로 선택하여 사용한다. 즉, 기본 계층 오디오 ES에 해당하는 지상파 DMB 오디오 ES가 입력되면, 기본 계층 오디오 ES만 사용하여 오디오 복호화를 수행한다.
오디오 신호의 경우에 수신기의 스피커수의 제약으로 인하여 서라운드 오디오 채널까지 필요 없을 가능성도 있다. 그럴 경우에 본 발명의 계층적 오디오 복호화부(56)는 단일 계층 오디오 복호화를 수행하는 기존의 지상파 DMB 복호화 장치에서의 오디오 복호화부(26)로 대체될 수도 있다.
이런 경우에, 본 발명의 계층적 복호화 장치는 계층별 TS를 입력하여 계층별 TS 역다중화를 수행하고 계층별 PES 패킷과 계층별 14496 섹션 데이터 및 계층별 PSI 섹션 데이터를 출력하는 계층별 TS 역다중화부, 상기 계층별 PES 패킷을 입력하여 계층별 디패킷타이징을 수행하고 계층별 비디오 SL 패킷 및 단일 계층 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 출력하는 계층별 PES 디패킷타이저부, 상기 계층별 14496 섹션 데이터 및 계층별 PSI 섹션 데이터를 입력하여 계층별 OD/BIFS SL 패킷 관련 데이터 및 계층별 IOD 데이터를 출력하는 계층별 섹션 분석부, 상기 계층별 비디오 SL 패킷 및 단일 계층 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 입력하여 계층별 디패킷타이징을 수행하고 계층별 비디오 ES 및 단일 계층 오디오 ES와 계층별 OD/BIFS 스트림을 출력하는 계층별 SL 디패킷타이저부, 상기 계층별 비디오 ES, 계층별 OD/BIFS 스트림 및 계층별 IOD 데이터를 이용하여 MPEG-4 SVC 비디오 복호화 방식으로 계층적 비디오 복호화를 수행하고 비디오 신호를 출력하는 계층적 비디오 복호화부, 그리고 상기 단일 계층 오디오 ES, 기본 계층 OD/BIFS 스트림 및 기본 계층 IOD 데이터를 이용하여 MPEG-4 오디오 복호화 방식으로 단일 계층 오디오 복호화를 수행하고 오디오 신호를 출력하는 단일 계층 오디오 복호화부로 구성된다.
또한 본 발명의 계층적 복호화 장치는 OD/BIFS 관련 데이터와 IOD 관련 데이터가 전송 효율을 위해서 어느 한 계층에서만 사용될 경우를 위하여, OD/BIFS 관련 데이터와 IOD 관련 데이터를 계층별로 선택적으로 사용할 수 있도록 구성된다.
도 6 은 본 발명의 계층적 복호화 방식의 동작 흐름도이다.
본 발명의 계층적 복호화 방식은 계층별 TS에 대하여 TS 역다중화를 수행하고 계층별 PES 패킷과 계층별 14496 섹션 및 계층별 PSI 섹션 데이터를 출력하는 계층별 TS 역다중화 단계(61), 상기 계층별 PES 패킷에 대하여 PES 디패킷타이징을 수행하 고 계층별 비디오 및 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 출력하는 계층별 PES 디패킷타이징 단계(62), 상기 계층별 비디오 및 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 입력하고 계층별 14496 섹션 및 계층별 PSI 섹션 데이터로부터 구한 계층별 섹션 분석 정보를 이용하여 SL 디패킷타이징을 수행하는 계층별 SL 디패킷타이징 단계(63), 계층별 비디오 및 오디오 ES를 입력하고 계층별 OD/BIFS 스트림 정보 및 계층별 IOD 정보를 이용하여 계층적 비디오 및 오디오 복호화를 수행하는 계층적 비디오 및 오디오 복호화 단계(64)로 이루어지며, 상기 과정을 복호화가 끝날 때까지 반복적으로 수행한다.
계층적 오디오 복호화를 수행하지 않고, 단일 계층 오디오 복호화를 수행하는 경우에, 본 발명의 계층적 복호화 방식은 계층별 TS에 대하여 TS 역다중화를 수행하고 계층별 PES 패킷과 계층별 14496 섹션 및 계층별 PSI 섹션 데이터를 출력하는 계층별 TS 역다중화 단계, 상기 계층별 PES 패킷에 대하여 PES 디패킷타이징을 수행하고 계층별 비디오 SL 패킷 및 단일 계층 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 출력하는 계층별 PES 디패킷타이징 단계, 상기 계층별 비디오 SL 패킷 및 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 입력하고 계층별 14496 섹션 및 계층별 PSI 섹션 데이터로부터 구한 계층별 섹션 분석 정보를 이용하여 SL 디패킷타이징을 수행하는 계층별 SL 디패킷타이징 단계, 계층별 비디오 ES 및 단일 계층 오디오 ES를 입력하고 계층별 OD/BIFS 스트림 정보 및 계층별 IOD 정보를 이용하여 계층적 비디오 및 단일 계층 오디오 복호화를 수행하는 계층적 비디오 복호화 및 단일 계 층 오디오 복호화 단계로 이루어지며, 상기 과정을 복호화가 끝날 때까지 반복적으로 수행한다.
이상에서 본 발명을 특정의 바람직한 실시예로서 설명하였으나, 본 발명은 상기한 실시예에 한정되지 아니하며, 특허 청구의 범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형이 가능할 것이다.
본 발명을 사용하면 기존 지상파 DMB 신호와 호환성을 가지면서도 기존 지상파 DMB 신호에 비하여 해상도가 4배로 높은 비디오와 입체감이 향상된 멀티 채널 오디오를 제공할 수 있는 새로운 지상파 DMB 신호를 생성할 수 있다.
또한 본 발명을 사용하는 지상파 DMB 수신기는 그 성능에 따라 선택적으로 기존의 지상파 DMB 품질의 비디오 및 오디오 신호를 복원하거나, 새로운 지상파 DMB 품질의 고해상도 비디오 및 멀티 채널 오디오를 복원할 수 있는 장점을 갖는다.

Claims (20)

  1. 비디오 신호를 입력하여 MPEG-4 SVC(Scalable Video Coding) 부호화 방식으로 계층적 비디오 부호화를 수행하고 계층별 비디오 ES(Elementary Stream)를 생성하는 계층적 비디오 부호화부,
    오디오 신호를 입력하여 MPEG-4 오디오 부호화 방식으로 계층적 오디오 부호화를 수행하고 계층별 오디오 ES를 생성하는 계층적 오디오 부호화부,
    상기 계층별 비디오 및 오디오 ES와 계층별 OD/BIFS(Object Descriptor/Binary Format for Scene) 스트림에 대하여 SL(Sync Layer) 패킷화를 수행하고 계층별 비디오 및 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 생성하는 계층별 SL 패킷타이저부,
    상기 계층별 비디오 및 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷에 대하여 계층별 PES(Packetized Elementary Stream) 패킷화를 수행하고 계층별 PES 패킷을 생성하는 계층별 PES 패킷타이저부,
    상기 계층별 OD/BIFS SL 패킷과 계층별 IOD(Initial Object Descriptor) 데이터를 이용하여 계층별 14496 섹션 데이터와 계층별 PSI(Program Specific Information) 섹션 데이터를 생성하는 계층별 섹션 발생부,
    그리고 상기 계층별 PES 패킷과 계층별 14496 섹션 데이터 및 계층별 PSI 섹션 데이터를 이용하여 계층별 TS(Transport Stream)를 생성하는 계층별 TS 다중화부,
    를 포함하는 것을 특징으로 하는 계층적 부호화 장치.
  2. 제1항에 있어서,
    상기 계층적 비디오 부호화부는 기본 계층 비디오 ES와 향상 계층 비디오 ES에 대하여 각 화면을 시간 기준으로 서로 구분할 수 있는 정보도 함께 생성하는 것을 특징으로 하는 계층적 부호화 장치.
  3. 제1항에 있어서,
    상기 계층적 오디오 부호화부는 기본 계층 오디오 ES와 향상 계층 오디오 ES에 대하여 각 오디오 구간을 시간 기준으로 서로 구분할 수 있는 정보도 함께 생성 생성하는 것을 특징으로 하는 계층적 부호화 장치.
  4. 비디오 신호를 입력하여 MPEG-4 SVC 부호화 방식으로 계층적 비디오 부호화를 수행하고 계층별 비디오 ES를 생성하는 계층적 비디오 부호화부,
    오디오 신호를 입력하여 MPEG-4 오디오 부호화 방식으로 단일 계층 오디오 부호화를 수행하고 단일 계층 오디오 ES를 생성하는 오디오 부호화부,
    상기 계층별 비디오 ES 및 단일 계층 오디오 ES와 계층별 OD/BIFS 스트림에 대하여 SL 패킷화를 수행하고 계층별 비디오 SL 패킷 및 단일 계층 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 생성하는 계층별 SL 패킷타이저부,
    상기 계층별 비디오 SL 패킷 및 단일 계층 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷에 대하여 계층별 PES 패킷화를 수행하고 계층별 PES 패킷을 생성하는 계층별 PES 패킷타이저부,
    상기 계층별 OD/BIFS SL 패킷과 계층별 IOD 데이터를 이용하여 계층별 14496 섹션 데이터와 계층별 PSI 섹션 데이터를 생성하는 계층별 섹션 발생부,
    그리고 상기 계층별 PES 패킷과 계층별 14496 섹션 데이터 및 계층별 PSI 섹션 데이터를 이용하여 계층별 TS를 생성하는 계층별 TS 다중화부,
    를 포함하는 것을 특징으로 하는 계층적 부호화 장치.
  5. 제4항에 있어서,
    상기 계층적 비디오 부호화부는 기본 계층 비디오 ES와 향상 계층 비디오 ES에 대하여 각 화면을 시간 기준으로 서로 구분할 수 있는 정보도 함께 생성하는 것을 특징으로 하는 계층적 부호화 장치.
  6. 제1항 내지 제4항 중 어느 한 항에 있어서,
    OD/BIFS 관련 데이터와 IOD 관련 데이터는 계층별로 선택적으로 사용되는 것을 특징으로 하는 계층적 부호화 장치.
  7. 비디오 및 오디오 신호를 입력하여 각 신호에 대하여 계층적 비디오 및 오디오 부호화를 수행하는 단계,
    상기 계층적 비디오 및 오디오 부호화의 결과로 생성된 계층별 비디오 및 오디오 ES와 계층별 OD/BIFS 스트림에 대하여 계층별 SL 패킷화를 수행하는 단계,
    상기 계층별 SL 패킷화의 결과로 생성된 계층별 비디오 및 오디오 SL 패킷과 계층별 OD/BIFS 패킷에 대하여 계층별 PES 패킷화를 수행하는 단계,
    상기 계층별 PES 패킷화의 결과로 생성된 계층별 PES 패킷에 대하여 계층별 OD/BIFS SL 패킷과 계층별 IOD 데이터로부터 구한 계층별 14496 섹션 및 계층별 PSI 섹션 정보를 이용하여 계층별 TS 다중화를 수행하는 단계,
    로 이루어지며, 상기 과정을 부호화가 끝날 때까지 반복적으로 수행하는 것을 특징으로 하는 계층적 부호화 방법.
  8. 비디오 및 오디오 신호를 입력하여 각 신호에 대하여 계층적 비디오 부호화 및 단일 계층 오디오 부호화를 수행하는 단계,
    상기 계층적 비디오 및 오디오 부호화의 결과로 생성된 계층별 비디오 ES 및 단일 계층 오디오 ES와 계층별 OD/BIFS 스트림에 대하여 계층별 SL 패킷화를 수행하는 단계,
    상기 계층별 SL 패킷화의 결과로 생성된 계층별 비디오 SL 패킷 및 단일 계층 오디오 SL 패킷과 계층별 OD/BIFS 패킷에 대하여 계층별 PES 패킷화를 수행하는 단계,
    상기 계층별 PES 패킷화의 결과로 생성된 계층별 PES 패킷에 대하여 계층별 OD/BIFS SL 패킷과 계층별 IOD 데이터로부터 구한 계층별 14496 섹션 및 계층별 PSI 섹션 정보를 이용하여 계층별 TS 다중화를 수행하는 단계,
    로 이루어지며, 상기 과정을 부호화가 끝날 때까지 반복적으로 수행하는 것을 특징으로 하는 계층적 부호화 방법.
  9. 제7항 내지 제8항 중 어느 한 항에 있어서,
    OD/BIFS 관련 데이터와 IOD 관련 데이터는 계층별로 선택적으로 사용되는 것을 특징으로 하는 계층적 부호화 방법.
  10. 계층별 TS를 입력하여 계층별 TS 역다중화를 수행하고 계층별 PES 패킷과 계층별 14496 섹션 데이터 및 계층별 PSI 섹션 데이터를 출력하는 계층별 TS 역다중화부,
    상기 계층별 PES 패킷을 입력하여 계층별 디패킷타이징을 수행하고 계층별 비디오 및 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 출력하는 계층별 PES 디패킷타이저부,
    상기 계층별 14496 섹션 데이터 및 계층별 PSI 섹션 데이터를 입력하여 계층별 OD/BIFS SL 패킷 관련 데이터 및 계층별 IOD 데이터를 출력하는 계층별 섹션 분석부,
    상기 계층별 비디오 및 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 입력하여 계층별 디패킷타이징을 수행하고 계층별 비디오 및 오디오 ES와 계층별 OD/BIFS 스트림을 출력하는 계층별 SL 디패킷타이저부,
    상기 계층별 비디오 ES, 계층별 OD/BIFS 스트림 및 계층별 IOD 데이터를 이용하여 MPEG-4 SVC 비디오 복호화 방식으로 계층적 비디오 복호화를 수행하고 비디오 신호를 출력하는 계층적 비디오 복호화부,
    그리고 상기 계층별 오디오 ES, 계층별 OD/BIFS 스트림 및 계층별 IOD 데이터를 이용하여 MPEG-4 오디오 복호화 방식으로 계층적 오디오 복호화를 수행하고 오디오 신호를 출력하는 계층적 오디오 복호화부,
    를 포함하는 것을 특징으로 하는 계층적 복호화 장치.
  11. 제10항에 있어서,
    상기 계층별 TS 역다중화부는 계층별 TS 를 선택적으로 사용하는 것을 특징으로 하는 계층적 복호화 장치.
  12. 제10항에 있어서,
    상기 계층적 비디오 복호화부는 계층별 비디오 ES를 계층별로 선택하여 사용하는 것을 특징으로 하는 계층적 복호화 장치.
  13. 제10항에 있어서,
    상기 계층적 오디오 복호화부는 계층별 오디오 ES를 계층별로 선택하여 사용하는 것을 특징으로 하는 계층적 복호화 장치.
  14. 계층별 TS를 입력하여 계층별 TS 역다중화를 수행하고 계층별 PES 패킷과 계층별 14496 섹션 데이터 및 계층별 PSI 섹션 데이터를 출력하는 계층별 TS 역다중화부,
    상기 계층별 PES 패킷을 입력하여 계층별 디패킷타이징을 수행하고 계층별 비디오 SL 패킷 및 단일 계층 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 출력하는 계층 별 PES 디패킷타이저부,
    상기 계층별 14496 섹션 데이터 및 계층별 PSI 섹션 데이터를 입력하여 계층별 OD/BIFS SL 패킷 관련 데이터 및 계층별 IOD 데이터를 출력하는 계층별 섹션 분석부,
    상기 계층별 비디오 SL 패킷 및 단일 계층 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 입력하여 계층별 디패킷타이징을 수행하고 계층별 비디오 ES 및 단일 계층 오디오 ES와 계층별 OD/BIFS 스트림을 출력하는 계층별 SL 디패킷타이저부,
    상기 계층별 비디오 ES, 계층별 OD/BIFS 스트림 및 계층별 IOD 데이터를 이용하여 MPEG-4 SVC 비디오 복호화 방식으로 계층적 비디오 복호화를 수행하고 비디오 신호를 출력하는 계층적 비디오 복호화부,
    그리고 상기 단일 계층 오디오 ES, 기본 계층 OD/BIFS 스트림 및 기본 계층 IOD 데이터를 이용하여 MPEG-4 오디오 복호화 방식으로 단일 계층 오디오 복호화를 수행하고 오디오 신호를 출력하는 단일 계층 오디오 복호화부,
    를 포함하는 것을 특징으로 하는 계층적 복호화 장치.
  15. 제14항에 있어서,
    상기 계층별 TS 역다중화부는 계층별 TS 를 선택적으로 사용하는 것을 특징으로 하는 계층적 복호화 장치.
  16. 제14항에 있어서,
    상기 계층적 비디오 복호화부는 계층별 비디오 ES를 계층별로 선택하여 사용하는 것을 특징으로 하는 계층적 복호화 장치.
  17. 제10항 내지 제14항 중 어느 한 항에 있어서,
    OD/BIFS 관련 데이터와 IOD 관련 데이터는 계층별로 선택적으로 사용되는 것을 특징으로 하는 계층적 복호화 장치.
  18. 계층별 TS에 대하여 TS 역다중화를 수행하고 계층별 PES 패킷과 계층별 14496 섹션 및 계층별 PSI 섹션 데이터를 출력하는 계층별 TS 역다중화 단계,
    상기 계층별 PES 패킷에 대하여 PES 디패킷타이징을 수행하고 계층별 비디오 및 오 디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 출력하는 계층별 PES 디패킷타이징 단계,
    상기 계층별 비디오 및 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 입력하고 계층별 14496 섹션 및 계층별 PSI 섹션 데이터로부터 구한 계층별 섹션 분석 정보를 이용하여 SL 디패킷타이징을 수행하는 계층별 SL 디패킷타이징 단계,
    계층별 비디오 및 오디오 ES를 입력하고 계층별 OD/BIFS 스트림 정보 및 계층별 IOD 정보를 이용하여 계층적 비디오 및 오디오 복호화를 수행하는 계층적 비디오 및 오디오 복호화 단계,
    로 이루어지며, 상기 과정을 복호화가 끝날 때까지 반복적으로 수행하는 것을 특징으로 하는 계층적 복호화 방법.
  19. 계층별 TS에 대하여 TS 역다중화를 수행하고 계층별 PES 패킷과 계층별 14496 섹션 및 계층별 PSI 섹션 데이터를 출력하는 계층별 TS 역다중화 단계,
    상기 계층별 PES 패킷에 대하여 PES 디패킷타이징을 수행하고 계층별 비디오 SL 패킷 및 단일 계층 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 출력하는 계층별 PES 디패킷타이징 단계,
    상기 계층별 비디오 SL 패킷 및 오디오 SL 패킷과 계층별 OD/BIFS SL 패킷을 입력하고 계층별 14496 섹션 및 계층별 PSI 섹션 데이터로부터 구한 계층별 섹션 분석 정보를 이용하여 SL 디패킷타이징을 수행하는 계층별 SL 디패킷타이징 단계,
    계층별 비디오 ES 및 단일 계층 오디오 ES를 입력하고 계층별 OD/BIFS 스트림 정보 및 계층별 IOD 정보를 이용하여 계층적 비디오 및 단일 계층 오디오 복호화를 수행하는 계층적 비디오 복호화 및 단일 계층 오디오 복호화 단계,
    로 이루어지며, 상기 과정을 복호화가 끝날 때까지 반복적으로 수행하는 것을 특징으로 하는 계층적 복호화 방법.
  20. 제18항 내지 제19항 중 어느 한 항에 있어서,
    OD/BIFS 관련 데이터와 IOD 관련 데이터는 계층별로 선택적으로 사용되는 것을 특징으로 하는 계층적 복호화 방법.
KR1020070044747A 2007-05-08 2007-05-08 계층적 부호화 장치 및 방법, 계층적 복호화 장치 및 방법 KR101292893B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070044747A KR101292893B1 (ko) 2007-05-08 2007-05-08 계층적 부호화 장치 및 방법, 계층적 복호화 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070044747A KR101292893B1 (ko) 2007-05-08 2007-05-08 계층적 부호화 장치 및 방법, 계층적 복호화 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20080099094A true KR20080099094A (ko) 2008-11-12
KR101292893B1 KR101292893B1 (ko) 2013-09-02

Family

ID=40286286

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070044747A KR101292893B1 (ko) 2007-05-08 2007-05-08 계층적 부호화 장치 및 방법, 계층적 복호화 장치 및 방법

Country Status (1)

Country Link
KR (1) KR101292893B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101068086B1 (ko) * 2009-10-07 2011-09-28 한국과학기술원 통합 지상파 모바일 멀티미디어 방송 수신기 및 수신 방법
CN102326387A (zh) * 2008-12-22 2012-01-18 韩国电子通信研究院 用于基于数字多媒体广播来进行多路复用和解多路复用的设备和方法
WO2012023837A3 (en) * 2010-08-19 2012-05-10 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding multilayer videos
KR101638791B1 (ko) * 2015-03-13 2016-07-12 한국디엠비 (주) 고화질 dmb를 위한 계층적 비디오 스트림 다중화 방법, 역다중화 방법

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100392384B1 (ko) * 2001-01-13 2003-07-22 한국전자통신연구원 엠펙-2 데이터에 엠펙-4 데이터를 동기화시켜 전송하는장치 및 그 방법
KR100587324B1 (ko) 2003-06-14 2006-06-08 엘지전자 주식회사 디지털 멀티미디어 방송 서비스 방법, 송/수신기, 및 데이터 구조
KR100658222B1 (ko) * 2004-08-09 2006-12-15 한국전자통신연구원 3차원 디지털 멀티미디어 방송 시스템

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102326387A (zh) * 2008-12-22 2012-01-18 韩国电子通信研究院 用于基于数字多媒体广播来进行多路复用和解多路复用的设备和方法
CN102326387B (zh) * 2008-12-22 2014-07-09 韩国电子通信研究院 用于基于数字多媒体广播来进行多路复用和解多路复用的设备和方法
KR101068086B1 (ko) * 2009-10-07 2011-09-28 한국과학기술원 통합 지상파 모바일 멀티미디어 방송 수신기 및 수신 방법
WO2012023837A3 (en) * 2010-08-19 2012-05-10 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding multilayer videos
US8971417B2 (en) 2010-08-19 2015-03-03 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding multilayer videos
KR101638791B1 (ko) * 2015-03-13 2016-07-12 한국디엠비 (주) 고화질 dmb를 위한 계층적 비디오 스트림 다중화 방법, 역다중화 방법

Also Published As

Publication number Publication date
KR101292893B1 (ko) 2013-09-02

Similar Documents

Publication Publication Date Title
KR100658222B1 (ko) 3차원 디지털 멀티미디어 방송 시스템
KR101129387B1 (ko) Ｄａｂ 시스템에서 ｉｐ 데이터캐스팅 서비스를 제공하는방법 및 장치
US11722702B2 (en) Method and apparatus for decoding an enhanced video stream
CN102123297B (zh) 用于数字多媒体广播的系统和方法
KR101501333B1 (ko) 강화된 비디오 스트림을 디코딩하는 방법 및 장치
US9538199B2 (en) Data transmission across independent streams
JP6729382B2 (ja) 送信装置、送信方法、受信装置および受信方法
CN102171750A (zh) 用于输送对齐的多通道音频的方法和设备
EP2276192A2 (en) Method and apparatus for transmitting/receiving multi - channel audio signals using super frame
KR20130011994A (ko) 송신 장치, 수신 장치 및 그 송수신 방법
US10469856B2 (en) Apparatus and method for transmitting and receiving 3DTV broadcasting
KR101292893B1 (ko) 계층적 부호화 장치 및 방법, 계층적 복호화 장치 및 방법
KR102189520B1 (ko) 방송 송수신 장치 및 방법
KR101336423B1 (ko) 계층적 부호화 장치 및 방법, 복호화 장치 및 방법
TW200516989A (en) Encoded signal separating apparatus, encoded signal combining apparatus, encoded signal separating/combining system, and methods therefor
KR20040084508A (ko) 멀티미디어 데이터를 디지털 오디오 방송 데이터에다중화하는 장치와 그 방법 및 그 역다중화 방법
KR100917844B1 (ko) 멀티채널 오디오 신호를 전송 또는 재생하는 장치 및 방법
KR101336553B1 (ko) 계층적 부호화 장치 및 방법
KR20080074366A (ko) 계층적 복호화 장치 및 방법
CN103474076A (zh) 用于输送对齐的多通道音频的方法和设备
KR20160062716A (ko) 3dtv 방송 송수신 장치 및 방법
KR101531510B1 (ko) 수신 시스템 및 오디오 데이터 처리 방법
KR20080017115A (ko) 계층적 부호화 데이터용 다중화 및 역다중화 장치
KR20120017402A (ko) 디지털 방송 시스템에서 방송 서비스 모니터링 장치 및 방법
KR100691287B1 (ko) 수화 서비스 제공 기능을 가지는 디지털 방송시스템의송／수신 장치

Legal Events

Date Code Title Description
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20160628

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee