KR102340929B1 - 3d 영상 처리 방법 및 그 장치 - Google Patents

3d 영상 처리 방법 및 그 장치 Download PDF

Info

Publication number
KR102340929B1
KR102340929B1 KR1020200072879A KR20200072879A KR102340929B1 KR 102340929 B1 KR102340929 B1 KR 102340929B1 KR 1020200072879 A KR1020200072879 A KR 1020200072879A KR 20200072879 A KR20200072879 A KR 20200072879A KR 102340929 B1 KR102340929 B1 KR 102340929B1
Authority
KR
South Korea
Prior art keywords
image
format
window
eye image
input port
Prior art date
Application number
KR1020200072879A
Other languages
English (en)
Inventor
박상민
김국화
Original Assignee
(주)디앤티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)디앤티 filed Critical (주)디앤티
Priority to KR1020200072879A priority Critical patent/KR102340929B1/ko
Application granted granted Critical
Publication of KR102340929B1 publication Critical patent/KR102340929B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/139—Format conversion, e.g. of frame-rate or size
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/167—Synchronising or controlling image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

3D 영상 처리 방법 및 그 장치가 개시된다. 3D 영상 처리 장치는, 제1 포맷의 3D 영상을 다운 스케일링(down scaling)하는 스케일러부; 상기 다운 스케일링된 제1 포맷의 3D 영상을 이용하여 제2 포맷의 3D 영상으로 변환하는 전처리부; 및 상기 제2 포맷의 3D 영상에 대한 싱크 및 화질 보정을 수행하는 후처리부를 포함한다.

Description

3D 영상 처리 방법 및 그 장치{3D image processing method and apparatus}
본 발명은 프레임 버퍼를 사용하지 않는 3D 영상 처리 방법 및 그 장치에 관한 것이다.
3D 영상을 출력하기 위해서는 양안 영상(Left/Right 영상)이 필요하다. 좌안과 우안으로 입력되는 영상은 각각 고유의 시차를 갖는다(도 1 참조). 좌안과 우안으로 각각 입력된 영상을 이용하여 3D 영상을 출력하기 위해서는 좌안과 우안 영상을 동시에 처리해야 한다.
양안 영상을 전달하는 방식에 따라 (1) Side by side, (2) Top bottom, (3) Line by line, (4) Frame packing으로 구분된다. Side by Side 방식의 경우, 양안 영상을 좌우로 나누어 전달하는 방식으로 영상 필드에 좌안 영상과 우안 영상이 동시에 포함되나 해상도가 낮은 단점이 있다.
최근 고해상도 영상에 대한 니즈에 따라 Side by Side 방식에 비해 Top bottom 방식이 사용되고 있으나, Tom bottom 방식은 양안 영상을 상하로 나누어 전달하는 방식으로 3D 영상 처리를 위해서는 별도의 프레임 버퍼가 이용되는 문제점이 있다.
본 발명은 프레임 버퍼를 사용하지 않는 고해상도 3D 영상 처리가 가능한 3D 영상 처리 방법 및 그 장치를 제공하기 위한 것이다.
또한, 본 발명은 프레임 버퍼를 사용하지 않기 때문에 다양한 해상도의 Top bottom 3D 영상 처리가 가능한 3D 영상 처리 방법 및 그 장치를 제공하기 위한 것이다.
또한, 본 발명은 비디오 스케일러(scalar)의 듀얼 입력(dual input)을 사용하여 구조가 간단한 Top bottom 3D 영상 처리가 가능한 3D 영상 처리 방법 및 그 장치를 제공하기 위한 것이다.
본 발명의 일 측면에 따르면, 프레임 버퍼를 사용하지 않는 고해상도 3D 영상 처리가 가능한 장치가 제공된다.
본 발명의 일 실시예에 따르면, 제1 포맷의 3D 영상을 다운 스케일링(down scaling)하는 스케일러부; 상기 다운 스케일링된 제1 포맷의 3D 영상을 이용하여 제2 포맷의 3D 영상으로 변환하는 전처리부; 및 상기 제2 포맷의 3D 영상에 대한 싱크 및 화질 보정을 수행하는 후처리부를 포함하는 3D 영상 처리 장치가 제공될 수 있다.
상기 제1 포맷은 Top bottom 방식이며, 상기 제2 포맷은 Side by Side 방식이며,
상기 스케일러부는 제1 입력 포트 및 제2 입력 포트를 포함하되, 상기 제1 포맷의 3D 영상을 복제하여 상기 제1 입력 포트 및 상기 제2 입력 포트를 통해 각각 출력할 수 있다.
상기 스케일러부는, 상기 제1 입력 포트 및 상기 제2 입력 포트로 출력되는 제1 포맷의 3D 영상의 수평방향 해상도를 1/2 다운 스케일링하여 각각의 윈도우(window)로 출력할 수 있다.
상기 전처리부는, 제1 윈도우 및 제2 윈도우를 통해 상기 다운 스케일링된 제1 포맷의 3D 영상을 획득한 후, 상기 제1 윈도우 및 상기 제2 윈도우 중 어느 하나의 영상을 이용하여 업 스케일링된 좌안 영상을 생성하고, 상기 제1 윈도우 및 상기 제2 윈도우 중 다른 하나의 영상을 이용하여 업 스케일링된 우안 영상을 생성할 수 있다.
상기 전처리부는, 상기 업 스케일링 좌안 영상과 우안 영상을 이용하여 상기 제2 포맷의 3D 영상을 생성할 수 있다.
상기 후처리부는, 상기 좌안 영상과 상기 우안 영상의 데이터 인에이블(DE: data enable)을 일치시켜 싱크를 보정할 수 있다.
본 발명의 다른 실시예에 따르면, 프레임 버퍼를 사용하지 않는 고해상도 3D 영상 처리가 가능한 방법이 제공된다.
본 발명의 일 실시예에 따르면, (a) 제1 포맷의 3D 영상을 복제한 후 다운 스케일링하는 단계; (b) 상기 다운 스케일링된 제1 포맷의 3D 영상을 이용하여 제2 포맷의 3D 영상으로 변환하는 단계; 및 (c) 상기 제2 포맷의 3D 영상에 대한 싱크 및 화질 보정을 수행하는 단계를 포함하는 3D 영상 처리 방법이 제공될 수 있다.
상기 (a) 단계는, 상기 제1 포맷의 3D 영상이 수신되면, 상기 제1 포맷의 3D 영상을 멀티플렉싱하여 복제한 후 듀얼 입력 포트를 통해 각각 출력하는 단계; 및 상기 듀얼 입력 포트 각각으로부터 복제된 제1 포맷의 3D 영상을 다운 스케일링하여 제1 윈도우 및 제2 윈도우로 각각 출력하는 단계를 포함할 수 있다.
상기 (b) 단계는, 제1 윈도우 및 제2 윈도우를 통해 상기 다운 스케일링된 제1 포맷의 3D 영상을 획득한 후, 상기 제1 윈도우 및 상기 제2 윈도우 중 어느 하나의 영상을 이용하여 업 스케일링된 좌안 영상을 생성하는 단계; 및 상기 제1 윈도우 및 상기 제2 윈도우 중 다른 하나의 영상을 이용하여 업 스케일링된 우안 영상을 생성하는 단계를 포함할 수 있다.
상기 좌안 영상은 상기 제1 윈도우상의 다운 스케일링된 제1 포맷의 3D 영상 중 상위 절반 프레임을 이용하되, 수직 방향 해상도를 업 스케일링하여 생성되며, 상기 우안 영상은 상기 제2 윈도우상의 다운 스케일링된 제1 포맷의 3D 영상 중 하위 절반 프레임을 이용하되, 수직 방향 해상도를 업 스케일링하여 생성될 수 있다.
상기 (c) 단계는, 상기 좌안 영상과 상기 우안 영상의 데이터 인에이블(DE: data enable)을 일치시켜 싱크를 보정할 수 있다.
본 발명의 일 실시예에 따른 3D 영상 처리 방법 및 그 장치를 제공함으로써, 프레임 버퍼를 사용하지 않으며, 화질 저하가 없는 고화질 3D 영상 제공이 가능한 이점이 있다.
또한, 본 발명은 프레임 버퍼를 사용하지 않기 때문에 다양한 해상도의 Top bottom 3D 영상 처리가 가능한 이점이 있다.
또한, 본 발명은 비디오 스케일러(scalar)의 듀얼 입력(dual input)을 사용하여 구조가 간단한 이점이 있다.
도 1은 3D 시차를 설명하기 위해 도시한 도면.
도 2는 본 발명의 일 실시예에 따른 3D 영상 처리 장치의 내부 구성을 개략적으로 도시한 블록도.
도 3은 본 발명의 일 실시예에 따른 제1 포맷의 3D 영상을 다운 스케일링하는 방법을 설명하기 위해 도시한 도면.
도 4는 본 발명의 일 실시예에 따른 제1 포맷의 3D 영상을 제2 포맷의 3D 영상으로 변환하는 방법을 설명하기 위해 도시한 도면.
도 5는 본 발명의 일 실시예에 따른 싱크 보정을 설명하기 위해 도시한 도면.
도 6은 본 발명의 일 실시예에 따른 3D 영상 처리 방법을 나타낸 순서도.
본 명세서에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "구성된다" 또는 "포함한다" 등의 용어는 명세서상에 기재된 여러 구성 요소들, 또는 여러 단계들을 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다. 또한, 명세서에 기재된 "...부", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.
본 발명은 좌안 영상과 우안 영상이 상하로 붙은 제1 포맷으로 입력되며, 이를 좌안 영상과 우안 영상을 좌우로 붙은 제2 포맷으로 변환할 수 있다. 여기서, 제1 포맷은 Top bottom 방식이며, 제2 포맷은 Side by Side 방식일 수 있다. 본 발명은 Top bottom 방식으로 입력되는 3D 영상을 Side by Side 방식으로 변환하여 처리함으로써 종래의 Top bottom 방식의 3D 영상 처리의 경우 프레임 버퍼에 좌안 영상 또는 우안 영상을 저장하지 않고서도 고해상도 3D 영상 처리가 가능하도록 할 수 있다. 이에 대해서는 하기의 설명에 의해 보다 명확하게 이해될 것이다.
이하, 첨부된 도면들을 참조하여 본 발명의 실시예를 상세히 설명한다.
도 2는 본 발명의 일 실시예에 따른 3D 영상 처리 장치의 내부 구성을 개략적으로 도시한 블록도이며, 도 3은 본 발명의 일 실시예에 따른 제1 포맷의 3D 영상을 다운 스케일링하는 방법을 설명하기 위해 도시한 도면이고, 도 4는 본 발명의 일 실시예에 따른 제1 포맷의 3D 영상을 제2 포맷의 3D 영상으로 변환하는 방법을 설명하기 위해 도시한 도면이며, 도 5는 본 발명의 일 실시예에 따른 싱크 보정을 설명하기 위해 도시한 도면이다.
도 2를 참조하면, 본 발명의 일 실시예에 따른 3D 영상 처리 장치(200)는 스케일러부(210), 전처리부(215), 후처리부(220), 메모리(225) 및 프로세서(230)를 포함하여 구성된다.
스케일러부(210)는 제1 포맷의 3D 영상을 복제하여 지정된 크기로 다운 스케일링(down scaling0하기 위한 수단이다. 여기서, 제1 포맷은 Tom bottom 형식일 수 있다.
도 3을 참조하여 보다 상세히 설명하기로 한다.
도 3의 310과 같이 제1 포맷(즉, Top bottom 방식)으로 3D 영상이 입력되면, 스케일러부(210)는 멀티플렉서(multiplexer)를 이용하여 복제한다(320).
스케일러부(210)는 제1 입력 포트와 제2 입력 포트를 포함한다. 따라서, 도 3의 320에 도시된 바와 같이 복제된 3D 영상(복제된 제1 포맷의 3D 영상) 중 하나는 제1 입력 포트로 입력되고, 복제된 3D 영상(복제된 제1 포맷의 3D 영상) 중 다른 하나는 제2 입력 포트로 입력된다.
스케일러부(210)는 제1 입력 포트와 제2 입력 포트로 각각 입력된 제1 포맷의 3D 영상을 지정된 크기로 다운스케일링한다(330). 예를 들어, 스케일러부(210)는 복제된 제1 포맷의 3D 영상을 수평 방향으로 절반(즉, 1/2) 크기로 다운 스케일링할 수 있다.
전처리부(215)는 다운 스케일링된 제1 포맷의 3D 영상을 제2 포맷로 변환하기 위한 수단이다.
이에 대해 도 4를 참조하여 보다 상세히 설명하기로 한다.
전처리부(215)는 다운 스케일링된 제1 포맷의 3D 영상을 제2 포맷으로 변환할 수 있다. 여기서, 제2 포맷은 Side by Side 포맷일 수 있다.
즉, 전처리부(215)는 듀얼 윈도우 모드로 다운 스케일링된 제1 포맷의 3D 영상을 획득할 수 있다. 편의상 제1 윈도우 및 제2 윈도우라 칭하기로 한다.
제1 윈도우 및 제2 윈도우에는 동일한 다운 스케일링된 제1 포맷의 3D 영상이 각각 입력될 수 있다.
전처리부(215)는 제1 윈도우의 다운 스케일링된 제1 포맷의 3D 영상을 이용하여 좌안 영상을 생성하며, 제2 윈도우상의 다운 스케일링된 제1 포맷의 3D 영상을 이용하여 우안 영상을 생성할 수 있다.
예를 들어, 전처리부(215)는 제1 윈도우의 0 ~ 1/2 프레임을 출력 윈도우 크기로 스케일링하여 좌안 영상을 생성할 수 있다. 또한, 전처리부(215)는 제2 윈도우의 1/2 ~ 2/2 프레임을 출력 윈도우 크기로 스케일링하여 우안 영상을 생성할 수 있다.
즉, 제1 윈도우와 제2 윈도우상에 각각 저장된 다운 스케일링된 제1 포맷의 3D 영상은 Top bottom 포맷으로, 0~ 1/2 프레임은 다운 스케일링된 좌안 영상이며, 1/2 ~ 2/2 프레임은 다운 스케일링된 우안 영상이다.
따라서, 전처리부(215)는 제1 윈도우에 저장된 다운 스케일링된 제1 포맷의 3D 영상 중 일부(즉, 좌안 영상에 해당하는 0 ~ 1/2 프레임)을 이용하여 좌안 영상으로 생성할 수 있다. 이때, 전처리부(215)는 제1 윈도우의 0 ~ 1/2 프레임을 업 스케일링하여 좌안 영상을 생성할 수 있다.
제1 윈도우에 저장된 다운 스케일링된 제1 포맷의 3D 영상을 좌안 영상으로 변환함에 있어, 전처리부(215)는 제1 윈도우에 저장된 다운 스케일링된 제1 포맷의 3D 영상 중 0 ~ 1/2 프레임에 대해 수직 방향을 2배로 곱하여 업 스케일링하여 출력 윈도우 크기로 스케일링된 좌안 영상을 생성할 수 있다.
또한, 제2 윈도우에 저장된 다운 스케일링된 제1 포맷의 3D 영상을 우안 영상으로 변환함에 있어, 전처리부(215)는 제2 윈도우에 저장된 다운 스케일링된 제1 포맷의 3D 영상 중 1/2 ~ 2/2 프레임에 대해 수직 방향을 2배로 곱하여 업 스케일링하여 출력 윈도우 크기로 스케일링된 우안 영상을 생성할 수 있다.
이와 같이, 생성된 좌안 영상 및 우안 영상은 수신되는 제1 포맷의 3D 영상에 비해 수평 방향 해상도가 1/2로 줄어든 영상으로 생성되게 된다.
다시 정리하면, 전처리부(215)는 제1 윈도우 및 제2 윈도우를 통해 다운 스케일링된 제1 포맷의 3D 영상을 획득할 수 있다. 여기서, 제1 윈도우 및 제2 윈도우상의 영상은 복제된 영상으로 동일한 영상일 수 있다.
전처리부(215)는 제1 윈도우상의 다운 스케일링된 제1 포맷의 3D 영상을 이용하여 좌안 영상을 생성하고, 제2 윈도우상의 다운 스케일링된 제1 포맷의 3D 영상을 이용하여 우안 영상을 생성할 수 있다.
제1 윈도우 및 제2 윈도우상의 다운 스케일링된 제1 포맷의 3D 영상은 다운 스케일링된 좌안 영상과 우안 영상이 상하로 붙여진 Top bottom 방식의 영상이다. 따라서, 전처리부(215)는 제1 윈도우상의 다운 스케일링된 제1 포맷의 3D 영상 중 상부 절반 프레임을 이용하여 좌안 영상을 생성하고, 제2 윈도우상의 다운 스케일링된 제1 포맷의 3D 영상 중 하부 절반 프레임을 이용하여 우안 영상을 생성할 수 있다.
제1 윈도우 및 제2 윈도우상에 저장된 다운 스케일링된 제1 포맷의 3D 영상은 수평방향으로 1/2 다운 스케일링된 영상이므로, 좌안 영상과 우안 영상의 크기를 맞추기 위해 업 스케일링할 수 있다.
이때, 전처리부(215)는 좌안 영상과 우안 영상을 이용하여 제2 포맷의 3D 영상을 생성하므로, 좌안 영상과 우안 영상 각각에 대해 수직 방향으로 업 스케일링하여 최종 좌안 영상과 우안 영상을 생성할 수 있다.
전처리부(215)는 좌안 영상과 우안 영상을 옆으로 붙여 제2 포맷의 3D 영상을 생성한다. 즉, 전처리부(215)는 다운 스케일링된 Top bottom 방식의 3D 영상을 이용하여 Side by Side 방식의 3D 영상을 생성할 수 있다.
후처리부(220)는 제2 포맷의 3D 영상에 대한 싱크 및 화질 보정을 수행한다.
각 윈도우를 통해 전달되는 제2 포맷의 3D 영상은 좌안 영상과 우안 영상의 영상 데이터가 정확하게 정렬(align)되지 않는 상황이 발생하게 되며, 이와 같은 경우 티어링(tearing) 현상이 발생하게 된다.
따라서, 후처리부(220)는 제2 포맷의 좌안 영상과 우안 영상의 데이터 인에이블(DE: data enable)을 일치시켜 스크린 티어링 현상을 방지할 수 있다.
즉, 후처리부(220)는 도 5의 510과 같이 좌안 영상과 우안 영상의 데이터가 정렬되지 않은 경우, 데이터 인에이블(DE: data enable) 신호를 일치시켜 도 5의 520과 같이 싱크를 일치시킬 수 있다.
또한, 이미 전술한 바와 같이, 제2 포맷의 3D 영상은 제1 포맷의 3D 영상에 비해 수평 방향 해상도가 1/2로 줄어들게 된다. 따라서, 후처리부(220)는 화질 보정을 수행할 수 있다.
본 발명의 일 실시예에 따르면, Top bottom 방식으로 전달되는 3D 영상을 Side by Side 방식의 3D 영상으로 변환하여 처리함으로써 FHD, 4k, 8k 등 해상도 제약 없이 처리 가능한 이점이 있다.
메모리(225)는 본 발명의 일 실시예에 따른 프레임 버퍼를 사용하지 않는 고해상도 3D 영상 처리 방법을 수행하기 위해 필요한 다양한 명령어들(프로그램 코드들)을 저장한다.
프로세서(230)는 본 발명의 일 실시예에 따른 3D 영상 처리 장치의 내부 구성 요소들(예를 들어, 스케일러부(210), 전처리부(215), 후처리부(220), 메모리(225) 등)을 제어하기 위한 수단이다.
도 6은 본 발명의 일 실시예에 따른 3D 영상 처리 방법을 나타낸 순서도이다.
단계 610에서 3D 영상 처리 장치(200)는 제1 포맷의 3D 영상을 복제한 후 다운 스케일링한다.
예를 들어, 3D 영상 처리 장치(200)는 Top bottom 방식으로 전달되는 3D 영상을 멀티플렉싱하여 복제한 후 제1 입력 포트 및 제2 입력 포트를 통해 각각 출력한다.
이로 인해, 제1 입력 포트 및 제2 입력 포트를 통해 출력되는 제1 포맷의 3D 영상은 동일한 영상일 수 있다.
3D 영상 처리 장치(200)는 제1 입력 포트 및 제2 입력 포트를 통해 출력되는 제1 포맷의 3D 영상을 다운 스케일링하여 제1 윈도우 및 제2 윈도우로 출력한다. 도 1에서 전술한 바와 같이, 제1 윈도우 및 제2 윈도우상에 저장된 제1 포맷의 3D 영상은 1/2 다운 스케일링된 영상일 수 있다.
단계 615에서 3D 영상 처리 장치(200)는 제1 윈도우 및 제2 윈도우상의 다운 스케일링된 제1 포맷의 3D 영상을 이용하여 제2 포맷의 3D 영상을 생성한다.
예를 들어, 3D 영상 처리 장치(200)는 제1 윈도우상의 다운 스케일링된 제1 포맷의 3D 영상의 상위 절반 프레임(0 ~ 1/2 프레임)을 이용하여 좌안 영상을 생성할 수 있다. 이때, 3D 영상 처리 장치(200)는 좌안 영상을 생성함에 있어, 제1 윈도우상의 다운 스케일링된 제1 포맷의 3D 영상의 상위 절반 프레임(0 ~ 1/2 프레임)의 수직 방향을 업 스케일링하여 좌안 영상을 생성할 수 있다.
마찬가지로, 우안 영상 또한 제2 윈도우상의 다운 스케일링된 제1 포맷의 3D 영상의 하위 절반 프레임(1/2 ~ 2/2 프레임)을 이용하여 생성될 수 있으며, 수직 방향을 업 스케일링하여 생성될 수 있다.
이로 인해, 좌안 영상과 우안 영상은 결과적으로 수평 방향의 해상도는 다운 스케일링된 제1 포맷의 3D 영상과 동일하며 수직 방향의 해상도가 2배인 영상으로 생성될 수 있다.
3D 영상 처리 장치(200)는 좌안 영상과 우안 영상을 붙여서 제2 포맷의 3D 영상을 생성할 수 있다.
단계 620에서 3D 영상 처리 장치(200)는 제2 포맷의 3D 영상에 대한 싱크 및 화질 보정을 수행한다.
제2 포맷의 3D 영상은 좌안 영상과 우안 영상을 붙여서 만든 것으로, 좌안 영상과 우안 영상의 데이터 인에이블(DE: data enable) 신호가 맞지 않지 않는 경우 티어링 현상이 발생할 수 있다. 따라서, 3D 영상 처리 장치(200)는 제2 포맷의 3D 영상의 좌안 영상과 우안 영상의 DE 신호를 맞춰 싱크를 보정할 수 있다.
또한, 제2 포맷의 3D 영상은 원래 입력 영상(제1 포맷의 3D 영상)에 비해 수평 방향으로 1/2 해상도가 줄어든 영상으로, 수평 방향의 해상도를 향상시키기 위한 화질 보정이 수행될 수 있다.
본 발명의 실시 예에 따른 장치 및 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 컴퓨터 판독 가능 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 분야 통상의 기술자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media) 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.
상술한 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이제까지 본 발명에 대하여 그 실시 예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

Claims (13)

  1. 제1 입력 포트 및 제2 입력 포트를 가지며, 제1 포맷의 3D 영상을 복제하여 상기 제1 입력 포트와 상기 제2 입력 포트로 출력하며, 상기 제1 입력 포트와 상기 제2 입력 포트로 출력되는 상기 제1 포맷의 3D 영상의 수평 방향 해상도를 1/2 다운 스케일링하여 제1 및 제2 윈도우(window)로 출력하는 스케일러부;
    제2 포맷의 제1 출력 윈도우와 제2 출력 윈도우를 가지되, 상기 제1 윈도우에 저장된 다운 스케일링된 제1 포맷의 3D 영상 중 0 ~ 1/2 프레임에 대해 수직 방향을 2배로 곱하여 업 스케일링하여 상기 제1 출력 윈도우 크기로 스케일링된 좌안 영상을 생성하여 상기 제1 출력 윈도우로 출력하며, 제2 윈도우에 저장된 다운 스케일링된 제1 포맷의 3D 영상 중 1/2 ~ 2/2 프레임에 대해 수직 방향을 2배로 곱하여 업 스케일링하여 출력 윈도우 크기로 스케일링된 우안 영상을 생성하여 상기 제2 출력 윈도우로 출력하며, 상기 제1 및 상기 제2 출력 윈도우에서 출력되는 업 스케일링된 좌안 영상과 우안 영상을 이용하여 제2 포맷의 3D 영상을 생성하는 전처리부; 및
    상기 제2 포맷의 3D 영상에 대한 싱크 및 화질 보정을 수행하는 후처리부를 포함하되,
    상기 제1 포맷은 Top bottom 방식이며, 상기 제2 포맷은 Side by Side 방식인 것을 특징으로 하는 3D 영상 처리 장치.
  2. 제1 항에 있어서,
    상기 제1 포맷은 Top bottom 방식이며, 상기 제2 포맷은 Side by Side 방식인 것을 특징으로 하는 3D 영상 처리 장치.
  3. 삭제
  4. 삭제
  5. 삭제
  6. 제1 항에 있어서,
    상기 전처리부는,
    상기 업 스케일링 좌안 영상과 우안 영상을 이용하여 상기 제2 포맷의 3D 영상을 생성하는 것을 특징으로 하는 3D 영상 처리 장치.
  7. 제6 항에 있어서,
    상기 후처리부는,
    상기 좌안 영상과 상기 우안 영상의 데이터 인에이블(DE: data enable)을 일치시켜 싱크를 보정하는 것을 특징으로 하는 3D 영상 처리 장치.
  8. (a) 제1 입력 포트 및 제2 입력 포트를 가지며, 제1 포맷의 3D 영상을 복제하여 상기 제1 입력 포트와 상기 제2 입력 포트로 출력하며, 상기 제1 입력 포트와 상기 제2 입력 포트로 출력되는 상기 제1 포맷의 3D 영상의 수평 방향 해상도를 1/2 다운 스케일링하여 제1 및 제2 윈도우(window)로 출력하는 단계;
    (b) 제2 포맷의 제1 출력 윈도우와 제2 출력 윈도우를 가지되, 상기 제1 윈도우에 저장된 다운 스케일링된 제1 포맷의 3D 영상 중 0 ~ 1/2 프레임에 대해 수직 방향을 2배로 곱하여 업 스케일링하여 상기 제1 출력 윈도우 크기로 스케일링된 좌안 영상을 생성하여 상기 제1 출력 윈도우로 출력하며, 제2 윈도우에 저장된 다운 스케일링된 제1 포맷의 3D 영상 중 1/2 ~ 2/2 프레임에 대해 수직 방향을 2배로 곱하여 업 스케일링하여 출력 윈도우 크기로 스케일링된 우안 영상을 생성하여 상기 제2 출력 윈도우로 출력하며, 상기 제1 및 상기 제2 출력 윈도우에서 출력되는 업 스케일링된 좌안 영상과 우안 영상을 이용하여 제2 포맷의 3D 영상을 생성하는 단계; 및
    (c) 상기 제2 포맷의 3D 영상에 대한 싱크 및 화질 보정을 수행하는 단계를 포함하는 3D 영상 처리 방법.
  9. 제8 항에 있어서,
    상기 (a) 단계는,
    상기 제1 포맷의 3D 영상이 수신되면, 상기 제1 포맷의 3D 영상을 멀티플렉싱하여 복제한 후 듀얼 입력 포트를 통해 각각 출력하는 단계; 및
    상기 듀얼 입력 포트 각각으로부터 복제된 제1 포맷의 3D 영상을 다운 스케일링하여 제1 윈도우 및 제2 윈도우로 각각 출력하는 단계를 포함하는 것을 특징으로 하는 3D 영상 처리 방법.
  10. 삭제
  11. 삭제
  12. 제8 항에 있어서,
    상기 (c) 단계는,
    상기 좌안 영상과 상기 우안 영상의 데이터 인에이블(DE: data enable)을 일치시켜 싱크를 보정하는 것을 특징으로 하는 3D 영상 처리 방법.
  13. 제8 항에 따른 방법을 수행하기 위한 프로그램 코드를 기록한 컴퓨터로 판독 가능한 기록매체.

KR1020200072879A 2020-06-16 2020-06-16 3d 영상 처리 방법 및 그 장치 KR102340929B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200072879A KR102340929B1 (ko) 2020-06-16 2020-06-16 3d 영상 처리 방법 및 그 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200072879A KR102340929B1 (ko) 2020-06-16 2020-06-16 3d 영상 처리 방법 및 그 장치

Publications (1)

Publication Number Publication Date
KR102340929B1 true KR102340929B1 (ko) 2021-12-17

Family

ID=79033434

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200072879A KR102340929B1 (ko) 2020-06-16 2020-06-16 3d 영상 처리 방법 및 그 장치

Country Status (1)

Country Link
KR (1) KR102340929B1 (ko)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110073212A (ko) * 2009-12-21 2011-06-29 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 제어 방법
KR20130091546A (ko) * 2012-02-08 2013-08-19 삼성디스플레이 주식회사 입체영상 표시장치 및 이를 포함하는 입체영상 시스템

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110073212A (ko) * 2009-12-21 2011-06-29 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 제어 방법
KR20130091546A (ko) * 2012-02-08 2013-08-19 삼성디스플레이 주식회사 입체영상 표시장치 및 이를 포함하는 입체영상 시스템

Similar Documents

Publication Publication Date Title
US9924153B2 (en) Parallel scaling engine for multi-view 3DTV display and method thereof
RU2421933C2 (ru) Система и способ формирования и воспроизведения трехмерного видеоизображения
JP4994622B2 (ja) 立体映像信号の発生方法及びそれに適したスケーリング方法
KR101468746B1 (ko) 스테레오스코픽 포맷 변환기
US20090315982A1 (en) Arrangement and method for the recording and display of images of a scene and/or an object
US20100020160A1 (en) Stereoscopic Motion Picture
JP5039182B2 (ja) 立体映像出力装置およびバックライト制御方法
KR101675041B1 (ko) 해상도가 향상된 3d 비디오 렌더링 시스템 및 방법
JP4763571B2 (ja) 立体画像生成装置及び立体画像復号装置
US8339442B2 (en) Image conversion method and image conversion apparatus
JP2011525075A (ja) 移動機器用立体画像生成チップ及びこれを用いた立体画像表示方法
JP2011523323A (ja) 映像変換方法及び装置
CA2824829C (en) Method and apparatus for transmitting/receiving a digital broadcasting signal
TWI511525B (zh) 用於產生、傳送及接收立體影像之方法，以及其相關裝置
JP2001128195A (ja) 立体画像補正装置、立体画像表示装置および立体画像補正処理プログラムを記録した記録媒体
KR102340929B1 (ko) 3d 영상 처리 방법 및 그 장치
US20120163700A1 (en) Image processing device and image processing method
CN105007444A (zh) 一种单像素视频显示装置及显示方法
WO2013021915A1 (ja) ３次元画像データ生成方法及び３次元画像データ生成装置
JP2004104331A (ja) 画像処理装置および方法、記録媒体、並びにプログラム
JP5700998B2 (ja) 立体映像表示装置及びその制御方法
CN110809147A (zh) 图像处理方法及装置、计算机存储介质、电子设备
JP2006128842A (ja) 立体映像信号生成装置
US8526714B2 (en) Method and system for reconstructing a stereoscopic image stream from quincunx sampled frames
US20110090214A1 (en) Image signal processing device, image signal processing method, image display device, image display method, program, image display system and video signal

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant