KR20130078319A - 스테레오 영상 부호화 방법 및 장치 - Google Patents

스테레오 영상 부호화 방법 및 장치 Download PDF

Info

Publication number
KR20130078319A
KR20130078319A KR1020110147190A KR20110147190A KR20130078319A KR 20130078319 A KR20130078319 A KR 20130078319A KR 1020110147190 A KR1020110147190 A KR 1020110147190A KR 20110147190 A KR20110147190 A KR 20110147190A KR 20130078319 A KR20130078319 A KR 20130078319A
Authority
KR
South Korea
Prior art keywords
screen
eye image
encoded
left eye
image
Prior art date
Application number
KR1020110147190A
Other languages
English (en)
Inventor
황수진
호요성
Original Assignee
광주과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 광주과학기술원 filed Critical 광주과학기술원
Priority to KR1020110147190A priority Critical patent/KR20130078319A/ko
Publication of KR20130078319A publication Critical patent/KR20130078319A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은 HEVC를 이용하여 스테레오 영상을 부호화함에 있어서 어느 한 시점의 영상과 다른 시점의 영상을 순차적으로 부호화하고 다른 시점의 화면을 참조 화면으로 사용하는 것을 특징으로 하는 스테레오 영상 부호화 방법 및 장치에 대한 것이다.
본 발명은 인트라 예측부, 인터 예측부, 변환부, 양자화부, 필터부, 및 엔트로피 코딩부를 포함하는 스테레오 영상의 부호화 장치에 있어서, 상기 스테레오 영상의 좌안 영상과 우안 영상을 순차적으로 입력받아 저장하는 버퍼를 포함하고, 상기 좌안 영상과 우안 영상 중 적어도 하나는 현재 시간에서의 다른 시점(viewpoint)에서의 화면과 이전 시간에서의 자기 시점(viewpoint)에서의 화면을 참조하여 부호화되는 것을 특징으로 하는 스테레오 영상 부호화 장치 및 이를 위한 부호화 방법을 제공한다.

Description

스테레오 영상 부호화 방법 및 장치 {Method and Device for Encoding Stereoscopic Video}
본 발명은 스테레오 영상 부호화 방법 및 장치에 대한 것이다. 더욱 상세하게는 본 발명은 스테레오 영상을 부호화함에 있어서 어느 한 시점의 영상과 다른 시점의 영상을 순차적으로 부호화하고 다른 시점의 화면을 참조 화면으로 사용하는 것을 특징으로 하는 스테레오 영상 부호화 방법 및 장치에 대한 것이다.
최근 방송과 통신을 위한 정보처리 기술이 빠르게 발전함에 따라 차세대 방송 서비스에 대한 관심이 높아지고 있다. 이와 관련하여 기존의 2차원 영상과 차별되는 실감나는 3차원 입체 영상을 제공하기 위하여 스테레오 영상(stereoscopic video)과 다시점 영상(multi-view video, MVC) 등에 대한 연구가 진행되고 있다. 스테레오 영상은 좌안 영상과 우안 영상을 이용하여 사용자에게 입체감을 느낄 수 있는 기회를 제공하지만 영상의 증가로 처리해야 할 데이터양이 증가하기 때문에 이를 효과적으로 부호화할 수 있는 새로운 부호화 방법이 요구된다.
한편, 최근 영상 부호화 기술로 HEVC(High Efficiency Video Coding) 기술이 개발되고 있다. HEVC는 압축 성능 측면에서 기존 H.264/AVC 표준 기술의 약 40% 정도의 부호화 효율 향상을 보이고 있으며 H.264/AVC 대비 2배 이상의 부호화 효율을 달성하는 것이 최종 목표로서 현재 표준화가 진행중이다.
최근 제한된 대역폭에서 3DTV를 효율적으로 방송하기 위한 3차원 콘텐츠 부호화 기술의 개발은 중요한 이슈이다. 현재 우리나라에서 준비중인 3DTV 실험방송에서는 기존 DTV(digital television)와 역호환성을 보장하기 위해 3D 콘텐츠의 구성을 2개의 스트림으로 구성하는 방식(full resolution dual stream)을 추진하고 있다. 기존 DTV 신청자는 MPEG-2로 부호화된 좌안용 영상만으로 DTV를 통해 시청하게 되고, 3DTV 수신기를 보유한 사용자는 두 개의 비트스트림을 복호화하여 3D 입체영상을 시청하게 된다.
이러한 상황에서 스테레오 영상을 효율적으로 부호화하여 사용자에게 제공하는 방법을 제공하는 것이 요구된다
본 발명은 스테레오 영상을 효율적으로 부호화하는 방법 및 장치를 제공하는 것을 목적으로 한다.
본 발명은 인트라 예측부, 인터 예측부, 변환부, 양자화부, 필터부, 및 엔트로피 코딩부를 포함하는 스테레오 영상의 부호화 장치에 있어서, 상기 스테레오 영상의 좌안 영상과 우안 영상을 순차적으로 입력받아 저장하는 버퍼를 포함하고, 상기 좌안 영상과 우안 영상 중 적어도 하나는 현재 시간에서의 다른 시점(viewpoint)에서의 화면과 이전 시간에서의 자기 시점(viewpoint)에서의 화면을 참조하여 부호화되는 것을 특징으로 하는 스테레오 영상 부호화 장치를 제공한다.
일 실시예에 있어서, 상기 좌안 영상 또는 상기 우안 영상 중 하나는 I 화면으로 부호화되고, 다른 하나는 최초 화면은 I 화면 또는 P 화면으로 부호화되고 이후의 화면은 자기 시점과 다른 시점의 화면을 함께 참조한 B 화면으로 부호화될 수 있다.
다른 실시예에 있어서, 상기 좌안 상기 좌안 영상 또는 상기 우안 영상 중 하나는 최초 화면은 I 화면으로 부호화되고 이후의 화면은 P 화면으로 부호화되며, 다른 하나는 최초 화면은 I 화면 또는 P 화면으로 부호화되고 이후의 화면은 자기 시점과 다른 시점의 화면을 함께 참조한 B 화면으로 부호화될 수 있다.
또 다른 실시예에 있어서, 상기 좌안 상기 좌안 영상 또는 상기 우안 영상 중 하나는 최초 화면은 I 화면으로 부호화되고 이후의 시점은 자기 시점과 다른 시점의 화면을 참조하면 B 화면으로 부호화되고, 다른 하나는 최초 화면은 I 화면 또는 P 화면으로 부호화되고 이후의 화면은 자기 시점과 다른 시점의 화면을 함께 참조한 B 화면으로 부호화될 수 있다.
바람직하게는, 상기 엔트로피 코딩부는 상기 좌안 영상의 화면과 상기 우안 영상의 화면을 순차적으로 엔트로피 부호화하여 하나의 비트스트림으로 출력한다.
또한, 본 발명은, (a) 좌안 영상과 우안 영상을 입력받는 단계; (b) 상기 좌안 영상의 화면과 상기 우안 영상의 화면 중 어느 하나를 부호화하는 단계; 및 (c) 상기 좌안 영상의 화면과 상기 우안 영상의 화면 중 다른 하나를 부호화함에 있어서 현재 시간에서의 다른 시점(viewpoint)에서의 화면과 이전 시간에서의 자기 시점(viewpoint)에서의 화면을 참조하여 부호화하는 단계를 포함하는 스테레오 영상 부호화 방법을 제공한다.
바람직하게는, 상기 부호화 방법은 (d) 부호화된 상기 좌안 영상의 화면과 상기 우안 영상의 화면을 엔트로피 부호화하여 하나의 비트스트림으로 출력하는 단계를 추가로 포함한다.
본 발명은 스테레오 영상을 부호화함에 있어서 각 화면의 시간 상관도(temporal correlation)와 화면간 상관도(inter-view correlation)를 함께 고려하여 좌우 영상을 함께 부호화함에 따라 부호화 성능을 향상시킬 수 있다.
도 1은 HEVC 부호화기의 구조를 도시한 도면이다.
도 2는 본 발명의 바람직한 실시예에 따른 스테레오 영상 부호화 장치를 도시한 도면이다.
도 3 내지 5는 본 발명의 바람직한 실시예에 따른 스테레오 영상의 부호화 장치에서 좌안 영상과 우안 영상을 부호화하는 구조를 설명하는 도면이다.
도 6은 본 발명의 바람직한 실시예에 따른 스테레오 영상의 부호화 방법을 나타내는 순서도이다.
이하, 본 발명의 바람직한 실시예를 첨부된 도면들을 참조하여 상세히 설명한다. 우선 각 도면의 구성 요소들에 참조 부호를 부가함에 있어서, 동일한 구성 요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다. 또한, 이하에서 본 발명의 바람직한 실시예를 설명할 것이나, 본 발명의 기술적 사상은 이에 한정하거나 제한되지 않고 당업자에 의해 변형되어 다양하게 실시될 수 있음은 물론이다.
본 발명에 따른 부호화 방법을 설명함에 앞서, HEVC에 대하여 간략히 설명한다.
HEVC 부호화기는 기본 부호화 단위인 정사각형의 코딩 유닛(CU : Coding Unit)을 사용하여 부호화하며, 예측 기본 단위로는 예측 유닛(PU : Prediction Unit)을 이용하여 여러 개의 블록으로 분할되어 예측에 사용된다. 예측 후에는 변환 및 양자화를 위한 기본 단위인 변환 유닛(TU : Transform Unit)을 이용하여 부호화를 수행한다. 예측 방법으로는 화면간 상관도를 이용하는 인트라(intra) 모드와 화면간의 시간적 상관도를 기본으로 하는 인터(inter) 모드가 있다. HEVC에서는 정확도를 개선하기 위해 인트라 모드시 최대 34가지 방향성을 고려하는 것이 제안되었다. 또한, 기존의 디블록킹 필터(deblocking filter)의 성능을 보완하기 위해 적응적 루프 필터(ALF : Adaptive Loop Filter)를 사용하여 주관적 화질 향상을 고려하였다.
도 1은 HEVC 부호화기의 구조를 도시한 도면이다.
HEVC 부호화기(100)는 인트라 예측부(120), 인터 예측부(130), 변환부(140), 양자화부(150), 역양자화 및 역변환부(160), 필터부(180), 및 엔트로피 코딩부(190)를 포함한다.
인트라 예측부(120)는 입력 영상의 블록을 부호화하기 위하여 공간적으로 인접한 픽셀 값을 이용하여 부호화하고자 하는 블록을 예측 부호화한다.
인터 예측부(130)는 이전 영상의 부호화 정보에 기초하여 입력 영상을 예측한다. 인터 예측부(130)는 움직임 예측부(132)와 움직임 보상부(134)를 포함한다.
차분부(110)는 현재 블록에서 예측 블록을 감산하여 차분 블록을 생성한다.
변환부(140)는 차분부(110)에서 생성된 차분 블록을 이산 코사인 변환(DCT : Discrete Cosine Transform)하고, 양자화부(150)는 이산 코사인 변환된 값을 양자화하여 양자화된 변환 계수를 생성한다.
엔트로피 코딩부(190)는 양자화된 변환계수, 움직임 벡터 등의 부호화 정보를 엔트로피 부호화한다. 부호화된 정보는 비트스트림에 삽입되어 복호화 장치로 전송될 수 있다.
역양자화 및 역변환부(160)는 양자화부(150)에서 양자화된 차분 블록을 다음에 부호화되는 영상의 예측에 이용하기 위해 역양양자화하고, 역이산 코사인 변환하여 부호화 이전의 차분 블록을 복원한다.
가산부(170)는 복원된 차분 블록과 인트라 예측부(120)에서 생성된 예측 블록을 가산하여 부호화 이전의 현재 블록을 복원한다.
필터부(180)는 복원된 영상에 대한 필터링을 수행한다. 필터부(180)는 디블록킹 필터(deblocking filter) 및 적응적 루프 필터(ALF, Adaptive Loop Filter)로 구성될 수 있다. 디블록킹 필터와 적응적 루프 필터는 양자화 및 컴퓨터의 소수 계산 오차 등으로 발생하는 정보의 손실을 줄이기 위하여 복원된 영상에 적응적으로 필터링을 수행하는 기술이다. 디블록킹 필터는 부호화 과정에서 DCT(discrete cosine transform) 적용 후 고주파 영역을 일부 제거함으로써 발생하는 블록화 현상(blocking artifact)의 효과를 제거하여 주관적 화질을 향상시킨다. 적응적 루프 필터는 디블록킹 필터링 과정 이후의 복원된 영상에 대해 적응적 필터를 적용하여 최종적인 복호된 영상을 출력한다. 적응적 루프 필터는 원영상과 복원된 영상간의 차이를 최소화시키는 필터를 설계 및 적용하여 부호화 과정에서 손실되는 정보를 일부 복구할 수 있다.
현재까지 제안된 HEVC에서는 기본 부화화 단위인 CU의 단위를 최대 64×64에서 최소 8×8까지 구분하고 있다. 각 CU는 split_flag를 이용하여 CU의 추가 여부를 판단한다. 부호화 과정에서는 다양한 크기의 CU 중에서 최적의 크기를 결정하기 위해 비트율 왜곡값(rate-distortion cost, RD cost)을 이용한다.
결정된 하나의 CU를 통해 예측을 위한 단위인 PU를 여러 개의 블록으로 분할하여 인트라와 인터 모드 예측을 수행한 후 TU를 이용하여 변환 및 양자화를 수행한다.
HEVC에서는 부호화기의 환경 설정을 인트라 화면만 부호화하는 방법(intra only), 임의 접근 방법(random access) 및 저지연 방법(low delay) 방법으로 분류한다. 또한, HEVC에서는 GPB(Generalized P and B-picture) 기술을 적용한다. GPB란 P 화면 대신에 B 화면을 사용하는 방법으로 한 장의 참조 화면을 두 개의 움직임 벡터가 가리킬 수 있게 하는 방법이다. 임의 접근 방법에서의 GPB는 계층적 B 화면 구조를 사용하며, 저지연 방법에서는 P 화면 대신에 B 화면을 사용한다. 움직임이 복잡한 장면에서 GPB를 적용할 경우에는 움직임을 좀 더 세밀하게 예측할 수 있으며 부호화 효율을 높일 수 있다. 기존의 H.264/AVC에서는 한 장의 참조화면에서 2 개의 움직임 벡터 정보를 가져오지 못하게 강제하였으나, HEVC의 임의접근 구조에서는 한 장의 참조화면에서 2 개의 움직임 벡터를 사용 가능하며, 저지연 구조에서는 이미 복호화 된 참조화면에서 2 개의 움직임 벡터의 정보를 사용가능하게 하는 GPB 기술을 제공한다.
그런데, 전술한 바와 같이 스테레오 영상을 부호화함에 있어서, 기존의 H.264/AVC는 물론 HEVC도 좌우 영상을 각각 부호화하고 별도의 비트스트림으로 제공하는 방법을 채용하고 있어 화면간의 상관도(inter-view-correlation)를 충분히 고려하지 못한다는 문제점이 존재한다.
도 2는 본 발명의 바람직한 실시예에 따른 스테레오 영상 부호화 장치를 도시한 도면이다.
본 발명의 바람직한 실시예에 따른 스테레오 영상 부호화 장치는, 좌안 영상과 우안 영상을 순차적으로 부호화하되 다른 시점의 영상을 참조 화면으로 사용하는 것을 특징으로 한다.
도 2를 참조하면, 본 발명의 바람직한 실시예에 따른 스테레오 영상 부호화 장치(100′)는 기본적으로 도 1과 동일한 구성을 포함하되 좌안 영상과 우안 영상이 순차적으로 부호화하는 것을 특징으로 한다. 이를 위해 스테레오 영상 부호화 장치(100′)는 좌안 영상과 우안 영상을 일시 저장하는 버퍼(102)를 추가로 구비한다. 또한, 엔트로피 코딩부(190)는 좌안 영상과 우안 영상의 화면을 순차적으로 엔트로피 부호화하여 이를 하나의 비트스트림으로 출력한다. 좌안 영상의 화면 및 우안 영상의 화면은 순차적으로 버퍼(102)에 입력될 수 있다. 예컨대, 좌안 영상의 화면이 n번째 화면(fn)인 경우 우안 영상의 화면은 n+1번째 화면(fn +1)이 되는 것으로 이해될 수 있다.
일 실시예에 있어서, 좌안 영상을 부호화한 이후에 우안 영상을 부호화하고, 우안 영상을 부호화함에 있어서 복원된 좌안 영상을 참조 화면으로 사용한다. 물론, 본 발명의 실시에 있어서 우안 영상을 부호화한 이후에 좌안 영상을 부호화하고 좌안 영상을 부호화함에 있어서 복원된 우안 영상을 참조 화면으로 사용하는 것도 가능하다. 다만, 본 발명의 설명을 위하여 이하에서는 좌안 영상을 부호화한 이후에 우안 영상을 부호화하는 것으로 한다. 여기서, 좌안 영상과 우안 영상을 순차적으로 부호화한다는 것은, 좌안 영상의 한 화면을 부호화한 후 우안 영상의 한 화면을 부호화한다는 것이다. 이는 기존에 좌안 영상의 시퀀스를 전부 부호화한 이후에 우안 영상의 시퀀스를 부호화하는 것과는 다른 것이다.
도 2에 있어서, 우안 영상(fn +1)을 부호화할 때, 복원된 동일 시간대의 좌안 영상(fn)과 이전 시간대의 우안 영상(fn -1)을 참조 화면으로 이용한다.
도 3 내지 5는 본 발명의 바람직한 실시예에 따른 스테레오 영상의 부호화 장치에서 좌안 영상과 우안 영상을 부호화하는 구조를 설명하는 도면이다.
도 3 내지 5에 있어서, 실선 화살표는 1 개의 움직임 벡터를 사용하는 것을 의미하고, 점선 화살표는 2 개의 움직임 벡터를 사용하는 것을 의미한다.
도 3을 참조하면, 좌안 영상은 인트라 화면으로 부호화하며 시간 상관도는 고려하지 않는다. 부호화되는 GOP(Group Of Pictures)에서 우안 영상의 최초 화면은 I 화면이나 좌안 영상의 최초 화면을 참조한 P 화면으로 부호화하고, 우안 영상의 다음 화면들은 이전 시간의 우안 화면과 동일 시간의 좌안 화면을 참조 화면으로 한 B 화면으로 부호화한다.
도 4를 참조하면, 좌안 영상의 최초 화면은 I 화면으로 부호화하고, 이후의 화면들은 이전 시간의 좌안 화면 또는 이전 시간의 우안 화면을 참조한 P 화면으로 부호화한다. 한편, 우안 영상의 최초 화면은 I 화면이나 P 화면으로 부호화하고, 우안 영상의 다음 화면들은 이전 시간의 우안 화면과 동일 시간의 좌안 화면을 참조 화면으로 한 B 화면으로 부호화한다.
도 5를 참조하면, 좌안 영상의 최초 화면은 I 화면으로 부호화하고, 이후의 화면들은 이전 시간의 좌안 화면 및 이전 시간의 우안 화면을 참조한 B 화면으로 부호화한다. 한편, 우안 영상의 최초 화면은 I 화면이나 P 화면으로 부호화하고, 우안 영상의 다음 화면들은 이전 시간의 우안 화면과 동일 시간의 좌안 화면을 참조 화면으로 한 B 화면으로 부호화한다.
도 6은 본 발명의 바람직한 실시예에 따른 스테레오 영상의 부호화 방법을 나타내는 순서도이다.
좌안 영상 및 우안 영상을 입력받고 이를 버퍼(102)에 일시 저장한다(S600). 여기서, 좌안 영상의 화면 및 우안 영상의 화면은 순차적으로 버퍼(102)에 입력될 수 있다. 예컨대, 좌안 영상의 화면이 n번째 화면(fn)인 경우 우안 영상의 화면은 n+1번째 화면(fn +1)이 되는 것으로 이해될 수 있다.
좌안 영상의 화면을 부호화한다(S610). 좌안 영상의 부호화 화면 구조는 도 3 내지 5와 같은 형태로 이루어질 수 있다.
다음으로 우안 영상의 화면을 부호화하되, 동일 시간의 좌안 영상의 화면과 이전 시간의 우안 영상의 화면을 함께 참조한 B 화면으로 부호화한다(S620).
부호화된 좌안 영상의 화면과 우안 영상의 화면은 엔트로피 부호화되며 좌안 영상의 화면과 우안 영상의 화면이 순차적으로 삽입된 하나의 비트스트림으로 출력된다(S630).
도 6을 참조한 설명에 있어서 좌안 영상과 우안 영상의 부호화 방법 및 순서는 서로 변경되어도 무방하다.
이후, 하나의 비트스트림으로 출력된 스테레오 영상은 복호화 장치에 의해 순차적으로 복호화되고, 좌안 영상과 우안 영상으로 나뉜 스테레오 영상으로 제공될 수 있다.
한편, 하나의 비트스트림에 포함된 좌안 영상과 우안 영상을 구분함에 있어서는 다양한 방법이 사용될 수 있다. 일 예로서 부호화된 각각의 화면(프레임)에 좌안 영상과 우안 영상을 구분하는 플래그(flag)를 부가할 수 있다. 다른 예로서, 좌안 영상을 부호화한 이후에 우안 영상을 부호화하는 것으로 약속되는 경우에는 부호화기에서 먼저 부호화된 화면은 좌안 영상인 것으로 판단할 수 있다. 다른 예로서, 좌안 영상과 우안 영상에서 매칭되는 매크로 블록을 비교하면, 좌안 영상에서 그 매크로 블록은 우안 영상에 비해 더 오른쪽에 위치하게 되는바, 비트스트림에 순차적으로 포함된 2개의 화면을 비교하여 어느 것이 좌안 영상에 해당되는 것인지를 판단할 수 있다.
좌안 영상과 우안 영상을 각각 분리하여 부호화한 기존의 방법과, 본 발명에서 제안한 부호화 방법을 대비하면, 본 발명의 경우 최대 BDBR(Bjontegaard-delta bit rate)이 약 56.12% 감소하고, BDPSNR(Bjontegaard-delta PSNR)은 2.08dB 증가한 결과를 얻었다. 다양한 영상으로 실험한 결과 평균적으로 BDBR이 약 36.24% 감소하고, BDPSNR은 1.19dB 증가하였다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위 내에서 다양한 수정, 변경 및 치환이 가능할 것이다. 따라서, 본 발명에 개시된 실시예 및 첨부된 도면들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예 및 첨부된 도면에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
100 : HEVC 부호화기 110 : 차분부
120 : 인트라 예측부 130 : 인터 예측부
140 : 변환부 150 : 양자화부
160 : 역양자화 및 역변환부 180 : 필터부
190 : 엔트로피 코딩부

Claims (7)

  1. 인트라 예측부, 인터 예측부, 변환부, 양자화부, 필터부, 및 엔트로피 코딩부를 포함하는 스테레오 영상의 부호화 장치에 있어서,
    상기 스테레오 영상의 좌안 영상과 우안 영상을 순차적으로 입력받아 저장하는 버퍼를 포함하고,
    상기 좌안 영상과 우안 영상 중 적어도 하나는 현재 시간에서의 다른 시점(viewpoint)에서의 화면과 이전 시간에서의 자기 시점(viewpoint)에서의 화면을 참조하여 부호화되는 것을 특징으로 하는 스테레오 영상 부호화 장치.
  2. 제 1 항에 있어서,
    상기 좌안 영상 또는 상기 우안 영상 중 하나는 I 화면으로 부호화되고, 다른 하나는 최초 화면은 I 화면 또는 P 화면으로 부호화되고 이후의 화면은 자기 시점과 다른 시점의 화면을 함께 참조한 B 화면으로 부호화되는 것을 특징으로 하는 스테레오 영상 부호화 장치.
  3. 제 1 항에 있어서,
    상기 좌안 상기 좌안 영상 또는 상기 우안 영상 중 하나는 최초 화면은 I 화면으로 부호화되고 이후의 화면은 P 화면으로 부호화되며, 다른 하나는 최초 화면은 I 화면 또는 P 화면으로 부호화되고 이후의 화면은 자기 시점과 다른 시점의 화면을 함께 참조한 B 화면으로 부호화되는 것을 특징으로 하는 스테레오 영상 부호화 장치.
  4. 제 1 항에 있어서,
    상기 좌안 상기 좌안 영상 또는 상기 우안 영상 중 하나는 최초 화면은 I 화면으로 부호화되고 이후의 시점은 자기 시점과 다른 시점의 화면을 참조하면 B 화면으로 부호화되고, 다른 하나는 최초 화면은 I 화면 또는 P 화면으로 부호화되고 이후의 화면은 자기 시점과 다른 시점의 화면을 함께 참조한 B 화면으로 부호화되는 것을 특징으로 하는 스테레오 영상 부호화 장치.
  5. 제 1 항 내지 제 4 항 중 어느 한 항에 있어서,
    상기 엔트로피 코딩부는 상기 좌안 영상의 화면과 상기 우안 영상의 화면을 순차적으로 엔트로피 부호화하여 하나의 비트스트림으로 출력하는 것을 특징으로 하는 스테레오 영상 부호화 장치.
  6. (a) 좌안 영상과 우안 영상을 입력받는 단계;
    (b) 상기 좌안 영상의 화면과 상기 우안 영상의 화면 중 어느 하나를 부호화하는 단계; 및
    (c) 상기 좌안 영상의 화면과 상기 우안 영상의 화면 중 다른 하나를 부호화함에 있어서 현재 시간에서의 다른 시점(viewpoint)에서의 화면과 이전 시간에서의 자기 시점(viewpoint)에서의 화면을 참조하여 부호화하는 단계
    를 포함하는 스테레오 영상 부호화 방법.
  7. 제 6 항에 있어서,
    (d) 부호화된 상기 좌안 영상의 화면과 상기 우안 영상의 화면을 엔트로피 부호화하여 하나의 비트스트림으로 출력하는 단계
    를 추가로 포함하는 스테레오 영상 부호화 방법.
KR1020110147190A 2011-12-30 2011-12-30 스테레오 영상 부호화 방법 및 장치 KR20130078319A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110147190A KR20130078319A (ko) 2011-12-30 2011-12-30 스테레오 영상 부호화 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110147190A KR20130078319A (ko) 2011-12-30 2011-12-30 스테레오 영상 부호화 방법 및 장치

Publications (1)

Publication Number Publication Date
KR20130078319A true KR20130078319A (ko) 2013-07-10

Family

ID=48991315

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110147190A KR20130078319A (ko) 2011-12-30 2011-12-30 스테레오 영상 부호화 방법 및 장치

Country Status (1)

Country Link
KR (1) KR20130078319A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016027979A1 (ko) * 2014-08-20 2016-02-25 전자부품연구원 Shvc 기반의 uhd 영상데이터 송수신 시스템

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016027979A1 (ko) * 2014-08-20 2016-02-25 전자부품연구원 Shvc 기반의 uhd 영상데이터 송수신 시스템
US10284890B2 (en) 2014-08-20 2019-05-07 Korea Electronics Technology Institute SHVC-based UHD image data transmission and reception system

Similar Documents

Publication Publication Date Title
KR102442894B1 (ko) 필터 정보 예측을 이용한 영상 부호화/복호화 방법 및 장치
US10484678B2 (en) Method and apparatus of adaptive intra prediction for inter-layer and inter-view coding
US10681378B2 (en) Method for encoding and decoding video including plurality of layers
CN106170092B (zh) 用于无损编码的快速编码方法
US20130003838A1 (en) Lossless Coding and Associated Signaling Methods for Compound Video
US20100165077A1 (en) Multi-View Video Coding Using Scalable Video Coding
CN110381317B (zh) 导出子预测单元的时间点之间的运动信息的方法和装置
KR20220162739A (ko) Hls를 시그널링하는 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 컴퓨터 판독 가능한 기록 매체
USRE49308E1 (en) Method and apparatus for video-encoding/decoding using filter information prediction
KR20130078319A (ko) 스테레오 영상 부호화 방법 및 장치
KR101356890B1 (ko) 다시점 비디오에 대한 이종 코덱에서의 비디오 시점간 부호화 및 복호화 방법 및 그 장치
EP4315849A1 (en) Externally enhanced prediction for video coding
KR101672008B1 (ko) 변이 벡터 예측 방법 및 장치
KR20220160043A (ko) 혼성 nal 유닛 타입에 기반하는 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장하는 기록 매체
KR20240004569A (ko) 레이어 식별자 정보를 포함하는 sei 메시지 기반의영상 부호화/복호화 방법, 장치, 및 비트스트림을 전송하는 방법
JP5421739B2 (ja) 動画像符号化装置、動画像復号化装置、および、動画像符号化方法
KR20130057402A (ko) 다시점 비디오 복호화 방법 및 장치

Legal Events

Date Code Title Description
E601 Decision to refuse application