KR20110134327A - 영상 처리 방법 및 그에 따른 영상 표시 장치 - Google Patents

영상 처리 방법 및 그에 따른 영상 표시 장치 Download PDF

Info

Publication number
KR20110134327A
KR20110134327A KR1020110055181A KR20110055181A KR20110134327A KR 20110134327 A KR20110134327 A KR 20110134327A KR 1020110055181 A KR1020110055181 A KR 1020110055181A KR 20110055181 A KR20110055181 A KR 20110055181A KR 20110134327 A KR20110134327 A KR 20110134327A
Authority
KR
South Korea
Prior art keywords
image data
image
scaling
scaled
eye view
Prior art date
Application number
KR1020110055181A
Other languages
English (en)
Inventor
송준용
한미경
임근화
손민
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Publication of KR20110134327A publication Critical patent/KR20110134327A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformation in the plane of the image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/139—Format conversion, e.g. of frame-rate or size
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/261—Image signal generators with monoscopic-to-stereoscopic image conversion

Abstract

영상 처리 방법 및 영상 표시 장치가 개시된다. 신호 입력부는 영상 데이터를 수신한다. 신호 처리부는 신호 입력부가 수신한 영상 데이터를 제1 영상 데이터 및 제2 영상 데이터로 스케일링한다. 여기서 제1 영상 데이터 및 제2 영상 데이터는 서로 다르게 스케일링된 것이다.

Description

영상 처리 방법 및 그에 따른 영상 표시 장치{METHOD FOR PROCESSING IMAGE AND IMAGE DISPLAY DEVICE THEREOF}
본 발명은 영상 처리 방법 및 그에 따른 영상 표시 장치에 관한 것으로, 더욱 상세하게는 수신된 영상이 디스플레이되도록 처리할 수 있는 영상 처리 방법 및 그에 따른 영상 표시 장치에 관한 것이다.
현재에는 아날로그 방송에서 디지털 방송으로 방송환경이 급속히 전환되고 있다. 그에 따라 디지털 방송을 위한 컨텐츠의 양이 급속히 증가하고 있다. 또한, 디지털 방송을 위한 컨텐츠로는 2차원(2-dimensions: 2D) 영상 신호를 2차원 이미지로 디스플레이하는 컨텐츠 이외에도 3차원(3 dimensions: 3D) 영상 신호를 3차원 이미지로 디스플레이하는 컨텐츠가 제작 및 기획되고 있다. 이하에서는 3차원 영상 신호를 3차원 이미지로 디스플레이하는 컨텐츠를 3차원 컨텐츠라 한다.
3차원 컨텐츠의 제작 및 기획에 따라서, 3차원 컨텐츠를 시청할 수 있는 디스플레이 장치가 제공되고 있으며, 3차원 컨텐츠의 제작 및 기획은 계속하여 증가하고 있다.
3차원 컨텐츠에 있어서, 가장 중요시되는 화질 요소는 실제감이라 할 수 있다. 즉, 실제 입체 사물 및 형상과 가깝게 입체적인 영상을 표시하는 것이 3차원 컨텐츠에 있어서 무엇보다 중요하다 할 것이다.
그에 따라서, 3차원 영상의 실제감 또는 입체감을 증대시킬 수 있는 방법 및 그에 따른 영상 표시 장치가 필요하다.
본 발명은 디스플레이되는 영상에 대한 사용자의 몰입감 및 재미를 높이는 영상 처리 방법 및 그에 따른 영상 표시 장치의 제공을 목적으로 한다.
본 발명은 디스플레이되는 3차원 영상의 화질을 개선할 수 있는 영상 처리 방법 및 그에 따른 영상 표시 장치의 제공을 목적으로 한다.
본 발명은 3차원 영상의 실제감 및 입체감을 증대시킬 수 있는 영상 처리 방법 및 그에 따른 영상 표시 장치의 제공을 목적으로 한다.
본 발명의 일 실시예에 따른 영상 처리 방법은, 영상 데이터를 수신하는 단계, 상기 수신된 영상 데이터를 제1 영상 데이터로 스케일링하는 단계, 및 상기 수신된 영상 데이터를 제2 영상 데이터로 스케일링하는 단계를 포함하고, 상기 제1 영상 데이터 및 상기 제2 영상 데이터는 서로 다르게 스케일링된 것일 수 있다. 여기서 상기 수신된 영상 데이터는, 2차원 영상 데이터 또는 3차원 영상 데이터 중 적어도 하나를 포함할 수 있다.
또한, 상기 제1 영상 데이터는 상기 수신된 영상 데이터의 분할 간격들이 다르게 스케일링된 것이고, 상기 제 2 영상 데이터는 상기 수신된 영상 데이터의 분할 간격들이 동일하게 스케일링된 것일 수 있다. 여기서 상기 분할 간격은 수직 방향 또는 수평 방향 중 적어도 한 방향으로 분할된 것일 수 있다.
또한, 상기 제1 영상 데이터 또는 상기 제2 영상 데이터 중 적어도 하나는 상기 수신된 영상 데이터의 중심에서 좌우 방향 및 상하 방향 중 적어도 하나의 방향으로 스케일링 크기가 증가 또는 감소되는 방식으로 스케일링된 것일 수 있다. 여기서 상기 제1 영상 데이터 및 상기 제2 영상 데이터에 대한 상기 스케일링 크기의 증가 또는 감소는 서로 다를 수 있다.
또한, 상기 제1 영상 데이터 또는 상기 제2 영상 데이터 중 적어도 하나는 상기 수신된 영상 데이터의 좌측, 우측, 상측 또는 하측 중 적어도 하나에서 중심 방향으로 스케일링 크기가 증가 또는 감소되는 방식으로 스케일링된 것일 수 있다. 여기서 상기 제1 영상 데이터 및 상기 제2 영상 데이터에 대한 상기 스케일링 크기의 증가 또는 감소는 서로 다를 수 있다.
또한, 상기 제1 데이터 및 상기 제2 데이터는 서로 동일 크기, 동일 해상도, 또는 동일 화면비 중 적어도 하나가 동일할 수 있다.
또한, 상기 수신된 영상 데이터는 좌안 시점 영상 데이터 및 우안 시점 영상 데이터를 포함하는 3차원 영상 데이터이고, 상기 제1 영상 데이터는 상기 좌안 시점 영상 데이터 및 상기 우안 시점 영상 데이터 중 하나로부터 스케일링된 것이고, 상기 제2 영상 데이터는 다른 하나로부터 스케일링된 것일 수 있다.
또한, 상기 영상 처리 방법은 상기 제 1영상 데이터 및 상기 제 2영상 데이터를 3차원 영상 프레임 포맷으로 샘플링하는 단계를 더 포함할 수 있다.
또한, 상기 영상 처리 방법은, 스케일링 방식 설정을 요청하는 사용자 조치를 감지하는 단계, 상기 사용자 조치 감지에 응답하여, 스케일링 방식을 설정하기 위한 GUI가 디스플레이되도록 제어하는 단계 및 상기 GUI를 통해 스케일링 파라미터를 입력 받는 단계를 더 포함하고, 상기 수신된 영상 데이터는 상기 입력된 스케일링 파라미터에 따라 제1 영상 데이터 및 제2 영상 데이터로 스케일링될 수 있다. 여기서, 상기 GUI는 상기 스케일링 파라미터에 따라 스케일링된 제1 영상 데이터 및 제2 영상 데이터를 디스플레이하는 영역을 포함할 수 있다.
본 발명의 일 실시예에 따른 영상 표시 장치는, 영상 데이터를 수신하는 신호 입력부, 및 상기 수신된 영상 데이터를 제1 영상 데이터 및 제2 영상 데이터로 스케일링하는 신호 처리부를 포함하고, 상기 제1 영상 데이터 및 제2 영상 데이터는 서로 다르게 스케일링된 것일 수 있다.
또한, 상기 신호 처리부는, 상기 수신된 영상 데이터를 디코딩하는 디코더, 상기 디코딩된 영상 데이터를 상기 제1 영상 데이터로 스케일링하는 스케일러, 상기 디코딩된 영상 데이터를 상기 제2 영상 데이터로 스케일링하는 제2 스케일러, 및 상기 제1 영상 데이터 및 상기 제2 영상 데이터를 3차원 영상 프레임 포맷으로 샘플링하는 포맷터를 포함할 수 있다.
또한, 상기 영상 표시 장치는, 스케일링 방식 설정을 요청하는 사용자 조치를 수신하는 인터페이스부를 더 포함하고, 상기 제어부는, 상기 사용자 조치 감지에 응답하여, 스케일링 방식을 설정하기 위한 GUI가 디스플레이되도록 제어하고, 상기 GUI를 통해 입력된 스케일링 파라미터에 따라 상기 수신된 입체영상 데이터가 제1 영상 데이터 및 제2 영상 데이터로 스케일링되도록 제어할 수 있다.
또한, 상기 신호 처리부는, 상기 수신된 영상 데이터 또는 저장된 영상 데이터를 상기 스케일링 파라미터에 따라 제1 영상 데이터 및 제2 영상 데이터로 스케일링하고, 상기 GUI는 상기 스케일링된 제1 영상 데이터 및 상기 스케일링된 제2 영상 데이터를 디스플레이하는 영역을 포함할 수 있다.
또한, 상기 신호 입력부는, 상기 영상 데이터를 포함하는 RF 신호를 수신하는 튜너, 상기 영상 데이터를 포함하는 IP 패킷을 수신하는 유선 네트워크 인터페이스부, 상기 영상 데이터를 포함하는 IP 패킷을 수신하는 무선신호 입력부 또는 외부 장치로부터 상기 영상 데이터를 수신하는 A/V(Audio/Video) 입력부 중 적어도 하나를 포함할 수 있다.
본 발명의 일 실시예에 따른 영상 처리 방법은, 영상 데이터를 수신하는 단계, 상기 수신된 영상 데이터를 제1 영상 데이터로 스케일링하는 단계, 상기 수신된 영상 데이터를 제2 영상 데이터로 스케일링하는 단계, 및 상기 스케일링된 제1 영상 데이터 및 제2 영상 데이터를 디스플레이하는 단계를 포함하고, 상기 제1 영상 데이터 및 상기 제2 영상 데이터는 서로 다르게 스케일링된 것일 수 있다.
또한, 상기 디스플레이하는 단계는, 상기 제1 영상 데이터 및 상기 제 2 영상 데이터를 3차원 디스플레이 방식으로 디스플레이하는 단계를 포함할 수 있다.
또한, 상기 영상 처리 방법은, 스케일링 방식 설정을 요청하는 사용자 조치를 감지하는 단계, 상기 사용자 조치 감지에 응답하여, 스케일링 방식을 설정하기 위한 GUI를 디스플레이하는 단계, 및 상기 디스플레이된 GUI를 통해 스케일링 파라미터를 입력 받는 단계를 더 포함하고, 상기 수신된 영상 데이터는 상기 입력된 스케일링 파라미터에 따라 제1 영상 데이터 및 제2 영상 데이터로 스케일링되는 것일 수 있다.
본 발명의 일 실시예에 따른 영상 처리 방법 및 그에 따른 영상 표시 장치는 영상을 구부러진 곡선 형태의 스크린에 디스플레이하는 것처럼 보이도록 디스플레이하므로, 디스플레이되는 영상에 대한 사용자의 몰입감 및 재미를 높일 수 있다.
본 발명의 일 실시예에 따른 영상 처리 방법 및 그에 따른 영상 표시 장치는 3차원 영상의 좌안 시점 영상 및 우안 시점 영상을 서로 다르게 스케일링 처리하므로, 3차원 영상의 실제감 및 입체감을 증대시킬 수 있다. 그에 따라서, 3차원 영상의 화질을 개선할 수 있다.
도 1은 3차원 영상 신호의 전송 포맷들 중 싱글 비디오 스트림 포맷들을 설명하기 위한 도면이다.
도 2는 3차원 영상 신호의 전송 포맷들 중 멀티 비디오 스트림 포맷들을 설명하기 위한 도면이다.
도 3은 본 발명의 일 실시예에 따른 영상 표시 장치를 나타내는 블록 다이어그램이다.
도 4는 본 발명의 일 실시예에 따른 영상 처리 방법을 나타내는 플로우차트이다.
도 5는 3차원 영상 신호의 양안 시차에 따른 거리감의 차이를 설명하기 위한 도면이다.
도 6은 도 4의 S110 단계 및 S120 단계의 분할 간격 조절 동작을 설명하기 위한 일 도면이다.
도 7은 도 4의 S110 단계 및 S120 단계의 분할 간격 조절 동작을 설명하기 위한 다른 도면이다.
도 8은 수평 방향으로 스케일링을 설명하기 위한 일 도면이다.
도 9는 수평 방향으로 스케일링을 설명하기 위한 다른 도면이다.
도 10은 수직 방향으로 스케일링을 설명하기 위한 일 도면이다.
도 11은 수직 방향으로 스케일링을 설명하기 위한 다른 도면이다.
도 12는 컨텐츠가 디스플레이된 화면을 도시한 도면이다.
도 13 내지 16은 스케일링 방식을 설정하기 위한 GUI(Graphical User Interface)가 디스플레이된 도면이다.
도 17은 본 발명의 다른 실시예에 따른 영상 처리 방법을 나타내는 플로우차트이다.
이하 상기의 목적을 구체적으로 실현할 수 있는 본 발명의 바람직한 실시예를 첨부한 도면을 참조하여 설명한다. 이때 도면에 도시되고 또 이것에 의해서 설명되는 본 발명의 구성과 작용은 적어도 하나의 실시예로서 설명되는 것이며, 이것에 의해서 본 발명의 기술적 사상과 그 핵심 구성 및 작용이 제한되지는 않는다.
본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당해 기술분야에 종사하는 기술자의 의도 또는 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 함을 밝혀두고자 한다.
본 발명은, 영상을 디스플레이하는 과정에서 몰입감을 증대시킬 수 있는 영상 처리 방법 및 그에 따른 영상 표시 장치를 제공하고자 한다.
본 발명은, 3차원(3 dimensions; 이하 '3D') 영상을 디스플레이하는 과정에서 실제감을 증대시킬 수 있는 영상 처리 방법 및 그에 따른 영상 표시 장치를 제공하고자 한다.
이하 본 명세서에서는 본 발명의 기술적 사상을 설명함에 있어서, 설명의 편의를 위해 차원 영상인 3차원 영상을 처리할 수 있는 영상 표시 장치가 좌안 시점 영상과 우안 시점 영상을 순차적으로 보여주는 액티브(active) 방식을 예로 하여 설명한다.
본 발명과 관련하여, 이하에서 먼저 3차원 영상에 대해 간략하게 설명한다.
3차원 영상으로는 두 개의 시점을 고려하는 스테레오(또는 스테레오스코픽) 영상, 세 개의 시점 이상을 고려하는 다시점 영상 등이 있다. 스테레오 영상은 일정한 거리로 이격되어 있는 좌측 카메라와 우측 카메라로 동일한 피사체를 촬영하여 획득한 1쌍의 좌안 시점 영상 및 우안 시점 영상으로 구성된 영상을 말한다. 다시점 영상은 일정한 거리나 각도를 갖는 3개 이상의 카메라로 동일한 피사체를 촬영하여 획득한 3개 이상의 시점 영상으로 구성된 영상을 말한다.
스테레오 영상의 전송 포맷으로는 싱글 비디오 스트림 포맷(single video stream format)과 멀티 비디오 스트림 포맷(multi video stream format)이 있다.
싱글 비디오 스트림 포맷 및 멀티 비디오 스트림 포맷들은 도 1 및 도 2를 참조하여 상세히 설명한다.
도 1은 3차원 영상의 전송 포맷들 중 싱글 비디오 스트림 포맷들을 설명하기 위한 도면이다.
싱글 비디오 스트림 포맷으로는 사이드 바이 사이드(side by side), 탑/다운(top/down), 인터레이스드(interlaced), 프레임 시퀀셜(frame sequential), 체커 보드(checker board), 또는 애너그리프(anaglyph) 등이 있다.
도 1의 (a)를 참조하면, 도 1의 (a)는 사이드 바이 사이드 포맷을 나타낸다. 사이드 바이 사이드 포맷은 좌안 시점 영상과 우안 시점 영상을 각각 수평 방향으로 1/2 서브 샘플링(sub sampling)하고, 샘플링한 좌안 시점 영상을 좌측에, 샘플링한 우안 시점 영상을 우측에 위치시켜 하나의 스테레오 영상을 만든다.
도 1의 (b)를 참조하면, 도 1의 (b)는 탑/다운 포맷을 나타낸다. 탑/다운 포맷은 좌안 시점 영상과 우안 시점 영상을 각각 수직 방향으로 1/2 서브 샘플링하고, 샘플링한 좌안 시점 영상을 상부에, 샘플링한 우안 시점 영상을 하부에 위치시켜 하나의 스테레오 영상을 만든 경우이다.
도 1의 (c)를 참조하면, 도 1의 (c)는 인터레이스드 포맷을 나타낸다. 인터레이스드 포맷은 좌안 시점 영상과 우안 시점 영상을 각각 수직 방향으로 1/2 서브 샘플링하고, 샘플링한 좌안 시점 영상의 화소와 우안 시점 영상의 화소가 라인마다 교대로 위치하도록 하여 스테레오 영상을 만든다. 또는 인터레이스드 포맷은 좌안 시점 영상과 우안 시점 영상을 각각 수평 방향으로 1/2 서브 샘플링하고, 샘플링한 좌안 시점 영상의 화소와 우안 시점 영상의 화소가 한 화소씩 교대로 위치하도록 하여 스테레오 영상을 만든다.
도 1의 (d)를 참조하면, 도 1의 (d)는 프레임 시퀀셜 포맷을 나타낸다. 프레임 시퀀셜 포맷은 좌안 시점 영상과 우안 시점 영상을 서브 샘플링하는 것이 아니라, 좌안 시점 영상과 우안 시점 영상 각각을 하나의 프레임으로 하여 순차적으로 번갈아 배치되도록 하여 스테레오 영상을 만든다.
도 1의 (e)를 참조하면, 도 1의 (e)는 체커 보드 포맷을 나타낸다. 체커 보드 포맷은 좌안 시점 영상과 우안 시점 영상을 각각 수직과 수평 방향으로 1/2 서브 샘플링하고, 샘플링한 좌안 시점 영상의 화소와 우안 시점 영상의 화소가 한 화소씩 교대로 위치하도록 하여 스테레오 영상을 만든다.
도 2는 3차원 영상 신호의 전송 포맷들 중 멀티 비디오 스트림 포맷들을 설명하기 위한 도면이다.
멀티 비디오 스트림 포맷으로는 풀 좌/우(Full left/right), 풀 좌/하프 우(Full left/Half right), 또는 2D 비디오/깊이(2D video/depth) 등이 있다.
도 2의 (a)를 참조하면, 도 2의 (a)는 풀 좌/우 포맷을 나타낸다. 풀 좌/우 포맷은 좌안 시점 영상과 우안 시점 영상을 순차적으로 각각 전송한다.
도 2의 (b)를 참조하면, 도 2의 (b)는 풀 좌/하프 우 포맷을 나타낸다. 풀 좌/하프 우 포맷은 좌안 시점 영상은 그대로, 우안 시점 영상은 수직 또는 수평 방향으로 1/2 서브 샘플링하여 전송한다.
도 2의 (c)를 참조하면, 도 2의 (c)는 2D 비디오/깊이 포맷을 나타낸다. 2D 비디오/깊이 포맷은 좌안 시점 영상과 우안 시점 영상 중 하나의 영상과 다른 하나의 영상을 만들어내기 위한 깊이 정보를 함께 전송한다.
스테레오 영상 또는 다시점 영상은 MPEG 또는 여러 가지 방법으로 압축 부호화되어 수신 시스템으로 전송된다. 여기서, 수신 시스템은 3차원 영상 신호를 처리 및 디스플레이할 수 있는 영상 표시 장치가 된다.
예를 들어, 전송 시스템에서 사이드 바이 사이드 포맷, 탑/다운 포맷, 인터레이스드 포맷, 체커 보드 등과 같은 스테레오 영상은 H.264/AVC 방식으로 압축 부호화하여 전송할 수 있다. 이때, 수신 시스템에서 H.264/AVC 코딩 방식의 역으로 상기 스테레오 영상에 대해 복호를 수행하여 3차원 영상을 얻을 수 있다.
또한, 전송 시스템에서 풀 좌/하프 우 포맷의 좌안 시점 영상 또는 다시점 영상 중 하나의 영상은 기본 계층(based layer) 영상으로, 나머지 영상은 상위 계층(enhanced layer) 영상으로 할당한 후, 기본 계층의 영상은 모노스코픽 영상과 동일한 방식으로 부호화하고, 상위 계층의 영상은 기본 계층과 상위 계층의 영상 간의 상관 정보에 대해서만 부호화하여 전송할 수 있다.
기본 계층의 영상에 대한 압축 부호화 방식의 예로는 JPEG, MPEG-1, MPEG-2, MPEG-4, H.264/AVC 방식 등이 사용될 수 있다. 그리고 상위 계층의 영상에 대한 압축 부호화 방식은 H.264/MVC (Multi-view Video Coding) 방식을 사용할 수 있다. 이때, 스테레오 영상은 기본 계층의 영상과 하나의 상위 계층 영상으로 할당되나, 다시점 영상은 하나의 기본 계층의 영상과 복수 개의 상위 계층 영상으로 할당된다. 여기서, 다시점 영상을 기본 계층의 영상과 하나 이상의 상위 계층의 영상으로 구분하는 기준은 카메라의 위치에 따라 결정될 수도 있고, 카메라의 배열 형태에 따라 결정될 수도 있다. 또는 특별한 기준을 따르지 않고 임의로 기본 계층의 영상과 하나 이상의 상위 계층의 영상이 결정될 수도 있다.
일반적으로 3차원 영상(또는 3차원 영상)은 두 눈의 스테레오(stereo) 시각 원리에 의한다. 양안 시차(binocular parallax)는 입체감을 느끼게 하는 중요한 요인으로 좌우 눈이 각각 연관된 평면 영상을 볼 경우, 뇌는 이들 서로 다른 두 영상을 융합하여 3차원 영상 본래의 깊이감과 실재감을 재생할 수 있다. 여기서, 양안 시차란, 두 눈의 시차를 말하는 것으로, 약 65mm 정도 떨어져 존재하는 두 눈 사이의 간격에 따라 발생하는 좌안과 우안의 보이는 것의 차이를 뜻한다.
이러한 3차원 영상 표시는 크게 스테레오스코픽(stereoscopic) 방식, 부피표현(volumetric) 방식, 홀로그래픽(holographic) 방식으로 구분된다. 예를 들어, 스테레오스코픽 기술을 적용한 3차원 영상 신호를 디스플레이할 수 있는 영상 표시 장치는 2D 영상에 깊이(depth) 정보를 부가하고, 이 깊이 정보를 이용하여 관찰자가 입체의 생동감과 현실감을 느낄 수 있게 하는 장치로, 셋 톱 박스(set-top box) 또는 디지털 텔레비전과 같은 디지털 방송 수신기가 있다.
그리고, 3차원 영상을 보여주는 방식에는 크게 안경을 착용하는 방식과 안경을 착용하지 않는 무안경 방식이 있다. 안경을 착용하는 방식은 다시 패시브(passive) 방식과 액티브(active) 방식으로 나뉜다.
여기서 패시브 방식은 편광 필터를 사용해서 좌안 시점 영상과 우안 시점 영상을 구분해서 보여주는 방식이다. 즉, 패시브 방식은 양안에 각각 청색과 적색의 색안경을 쓰고 보는 방식이다. 그리고 액티브 방식은 액정 셔터를 이용하여 좌우 안을 구분하는 방식으로, 시간적으로 좌안(왼쪽 눈)과 우안(오른쪽 눈)을 순차적으로 가림으로써 좌안 시점 영상과 우안 시점 영상을 구분하는 방식이다. 즉, 액티브 방식은 시간 분할된 화면을 주기적으로 반복시키고 이 주기에 동기시킨 전자 셔터가 설치된 안경을 쓰고 보는 방식이며, 시분할 방식(time split type) 또는 셔텨드 글래스(shuttered glass) 방식이라 하기도 한다. 이하에서는 셔터드 글래스 방식으로 구동되는 안경을 셔터 안경이라 한다.
안경을 착용하지 않는 무안경 방식으로서 알려진 대표적인 것으로는 원통형의 렌즈 어레이를 수직으로 배열한 렌티큘러(lenticular) 렌즈 판을 영상 패널 전방에 설치하는 렌티큘러 방식과, 영상 패널 상부에 주기적인 슬릿을 갖는 배리어 층을 구비하는 패러랙스 배리어(parallax barrier) 방식이 있다.
이하 본 명세서에서는 본 발명의 기술적 사상을 보다 용이하게 설명하기 위해 입체 디스플레이 방식 중 스테레오스코픽 방식을 예로 하고, 스테레오스코픽 방식 중 액티브 방식을 예로 하여 설명한다. 다만, 이하에서 액티브 방식의 매체로 셔터 안경을 예로 하여 설명하나 이에 한정되는 것은 아니고, 다른 매체를 이용하는 경우에도 후술하는 바와 같이 적용 가능함을 미리 밝혀둔다.
상술한 바와 같이, 액티브 방식에 의할 경우, 좌안 시점 영상이 영상 표시 장치를 통하여 디스플레이되는 경우에는 셔터 안경의 좌측 셔터를 오픈(open)하고, 우안 시점 영상이 영상 표시 장치를 통하여 디스플레이되는 경우에는 우측 셔터를 오픈한다.
도 3은 본 발명의 일 실시예에 따른 영상 표시 장치를 나타내는 블록 다이어그램이다.
도 3을 참조하면, 본 발명에 따른 영상 표시 장치(300)는 신호 입력부(310), 신호 처리부(330), 및 포맷터(Formatter)(350)를 포함한다. 그리고, 본 발명에 따른 영상 표시 장치(300)는 적외선 출력부(355), 제어부(Controller)(360), 디스플레이 부(Display unit)(370), 저장부(380), 사용자 인터페이스부(390)를 더 포함할 수 있다. 영상 표시 장치로는 디지털 텔레비전 또는 셋 톱 박스(set-top box) 등과 같은 디지털 방송 수신기가 있다. 또한, 영상 표시 장치(300)는 외부적으로 셔터 안경(Shutter glasses)(미도시)을 더 포함할 수 있다. 또한 영상 표시 장치는 휴대폰, 스마트폰(smart phone), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 내비게이션 등과 같은 이동 단말기일 수 있고, 데스크톱, 랩톱, 태블릿 또는 핸드헬드 컴퓨터 등의 퍼스널 컴퓨터 시스템일 수 있다.
또한, 영상 표시 장치(300)에는 도 1에서 도시되는 구성 이외에 필요한 다른 구성이 더 포함될 수 있다.
또한, 신호 입력부(310)는 튜너(Tuner)(311), A/V(Audio/Video) 입력부(312), 무선신호 입력부(313), 또는 네트워크 인터페이스부(314) 중 적어도 하나를 포함할 수 있으며, 영상 신호를 수신 받는다. 여기서, 수신되는 영상 신호는 2차원 영상 데이터 또는 3차원 영상 데이터 중 적어도 하나를 포함할 수 있다. 3차원 영상 데이터는 스테레오 영상 또는 다시점 영상일 수 있다. 또한 수신되는 3차원 영상 데이터는 도 1 및 도 2에서 도시 및 설명된 포맷을 가질 수 있다.
튜너(311)는 무선 주파수(RF: Radio Frequency) 신호 형태로 전송되는 소정 콘텐츠를 포함하는 방송 신호를 소정 주파수 대역의 채널을 통하여 선택적으로 수신한다. 즉, 튜너(311)는 방송국 등의 컨텐츠 제작자로부터 전송되는 방송 신호를 선택적으로 수신한다. 여기서 방송 신호는 2차원 영상 데이터 또는 3차원 영상 데이터 중 적어도 하나를 포함할 수 있다.
A/V 입력부(312)는 오디오 및 비디오 신호를 출력할 수 있는 외부 장치와 연결되어, 연결된 외부 장치에서 출력되는 A/V 신호를 입력 받는다. 여기서 외부 장치는 DVD(Digital Versatile Disk), 블루레이(Bluray), 게임기기, 켐코더, 컴퓨터(노트북) 등 다양한 종류의 영상 또는 음성 출력 장치를 의미한다. 여기서 A/V 신호는 2차원 영상 데이터 또는 3차원 영상 데이터 중 적어도 하나를 포함할 수 있다.
무선신호 입력부(313)는 내부적으로 구비되는 네트워크 인터페이스 부(network interface unit)(미도시)를 통하여 무선 네트워크(wireless network)로부터 전송되는 무선 신호를 입력 받는다. 여기서, 무선 네트워크로 전송되는 무선 신호는 컨텐츠 제공자(CP: Content Provider) 또는 서비스 제공자(SP: Service Provider)로부터 송신되는 컨텐츠를 포함할 수 있다. 또한 무선 신호는 오디오 및 비디오 신호를 포함할 수 있고, 상기 오디오 및 비디오 신호를 포함하는 IP 패킷을 포함할 수 있다. 여기서 비디오 신호는2차원 영상 데이터 또는 3차원 영상 데이터 중 적어도 하나를 포함할 수 있다.
네트워크 인터페이스부(314)는 유선 네트워크로부터 전송되는 IP 패킷을 수신한다. 상기 IP 패킷은 인터넷 망으로부터 전송된 것일 수 있다. 또한 상기 IP 패킷은 컨텐츠 제공자(CP: Content Provider) 또는 서비스 제공자(SP: Service Provider)가 전송한 것일 수 있다. 여기서 IP 패킷은 오디오 및 비디오 신호를 포함할 수 있다. 여기서 비디오 신호는2차원 영상 데이터 또는 3차원 영상 데이터 중 적어도 하나를 포함할 수 있다.
신호 처리부(330)는 복조부(Demodulator)(331), 역다중화부(Demux: Demultiplexer)(333), 디코더 부(335) 및 스케일러(Scaler)(340)를 포함할 수 있다. 그리고, 디코더 부(335)는 비디오 디코더(Video Decoder)(미도시) 및 오디오 디코더(Audio Decoder)(미도시)를 포함할 수 있다. 일부 실시예로, 신호 처리부(330)는 포맷터(350)을 더 포함할 수 있다.
복조부(331)는 신호 입력부(310)에서 수신 및 전송된 방송 신호를 복조(demodulating)한다.
역다중화부(333)는 복조된 방송 신호 또는 신호 입력부(310)가 출력한 신호로부터 오디오 데이터, 비디오 데이터 및 부가 정보를 역다중화(demultiplex)한다. 여기서, 부가 정보는 PSI/PSIP(Program Specific Information/Program and System Information Protocol)와 같은 SI(System Information) 정보일 수 있다.
역다중화부(333)는 역다중화 된 오디오 데이터 및 비디오 데이터를 디코더 부(335)로 출력하고, 부가 정보를 부가 정보 처리부(미도시)로 출력한다.
디코더 부(335)는 신호 입력부(310) 또는 역다중화부(333)가 출력한 비디오 데이터를 방송국 등의 영상 신호 제공원에서 송신한 원래의 데이터로 복호화한다. 디코더 부(335)는 내부적으로 구비되는 비디오 디코더(미도시)를 통하여 역 다중화된 비디오 데이터를 송신 전의 원 데이터 형태로 복호하고, 오디오 디코더(미도시)를 통하여 역 다중화된 오디오 데이터를 송신 전의 원 데이터 형태로 복호화한다.
스케일러(340)는 상기 디코더 부(335)에서 처리된 데이터를 디스플레이 부(370) 또는 스피커 부(미도시)를 통하여 출력하기 위한 적절한 크기의 신호로 크기 조절(스케일링: scaling)한다. 구체적으로, 스케일러(340)는 2차원 영상 또는 3차원 영상을 수신하여 영상 표시 장치(300)의 해상도 또는 소정 화면비(aspect ratio)에 맞도록 스케일링(scaling)한다. 영상 표시 장치(300)는 제품 사양 별로 소정 해상도, 예를 들어 720x480 포맷, 1024x768 포맷, 1280×720 포맷, 1280×768 포맷, 1280×800 포맷, 1920×540 포맷, 1920×1080 포맷 또는 4K×2K 포맷 등을 갖는 영상 화면을 출력하도록 제작되어 있다. 그에 따라서, 스케일러(340)는 다양한 값으로 입력될 수 있는 3차원 영상의 해상도를 해당 영상 표시 장치의 해상도에 맞춰 변환할 수 있다.
또한, 스케일러(340)는 디스플레이되는 컨텐츠의 종류 또는 사용자 설정 등에 따라서, 3차원 영상의 화면비(aspect ratio)를 조절하여 출력한다. 화면비 값은 16:9, 4:3, 또는 3:2 등의 값이 될 수 있으며, 스케일러(340)는 가로 방향의 화면 길이 비와 세로 방향의 화면 길이 비가 특정 비율이 되도록 조절할 수도 있다.
스케일러(340)는 제1 스케일러(341)와 제2 스케일러(343)을 포함할 수 있다. 제1 스케일러(341)는 주 화면 또는 3차원 영상의 좌안 시점 영상 또는 우안 시점 영상 중 어느 하나의 영상을 스케일링한다. 그리고, 제2 스케일러(343)는 부 화면 또는 3차원 영상의 좌안 시점 영상 또는 우안 시점 영상 중 다른 영상을 스케일링한다.
또한, 본 발명의 일 실시예에 따른 영상 표시 장치(300)의 스케일러(340)는 디스플레이될 3차원 영상 신호에 있어서, 하나의 화면을 구성하는 하나의 프레임 신호를 다수개로 분할하고, 분할 폭을 선형적(linear) 또는 비선형적(non-linear)으로 조절하여 출력할 수도 있다.
예를 들어, 제1 스케일러(341)는 3차원 영상 신호의 좌안 시점 영상 또는 우안 시점 영상 중 어느 하나의 영상(예를 들어, 좌안 시점 영상)에 포함된 영상 프레임을 다수개로 분할하고, 분할 간격을 비선형적으로 조절하여 출력할 수 있다. 그리고, 제2 스케일러(343)는 3차원 영상 신호의 좌안 시점 영상 또는 우안 시점 영상 중 다른 이미지(우안 시점 영상)에 포함된 영상 프레임을 제1 스케일러(341)가 출력하는 이미지의 크기에 맞춰 출력하거나, 다른 이미지의 분할 간격을 선형적으로 조절하여 출력할 수 있다. 이하에서, 좌안 시점 영상에 포함된 영상 프레임을 좌안 시점 영상 프레임이라고 명명하고 우안 시점 영상에 포함된 영상 프레임을 우안 시점 영상 프레임이라고 명명한다.
즉, 제1 스케일러(341)와 제2 스케일러(343) 중 어느 하나에서 좌안 시점 영상 프레임 또는 우안 시점 영상 프레임 중 어느 하나의 영상 프레임의 분할 간격을 비선형적으로 조절하고 전체 화면 크기를 조절하였다면, 제1 스케일러(341)와 제2 스케일러(343) 중 다른 하나는, 좌안 시점 영상 프레임 또는 우안 시점 영상 프레임 중 다른 이미지는 분할 간격의 폭을 조절하지 않고 전체 화면 크기 조절만 하여 출력하거나, 다른 이미지의 분할 간격을 선형적으로 조절하여 출력하는 것이다.
또한 제1 스케일러(341) 및 제2 스케일러(343)는 동일한 영상을 각각 다르게 스케일링할 수 있다. 제1 스케일러(341)는 디코더 부(335)가 디코딩한 영상을 제1 영상으로 스케일링하고, 제2 스케일러(343)는 제1 스케일러(341)와 다른 방식으로 상기 영상을 제2 영상으로 스케일링한다.
일부 실시예로 스케일러(340)는 하나의 스케일러로 구성될 수 있다. 이러한 경우에는, 스케일러(340)는 디코더 부(335)가 디코딩한 영상을 순차적으로 두 번 스케일링하여 제1 영상 및 제2 영상을 생성할 수 있다. 여기서 스케일러(340)는 상기 영상을 각각 다르게 스케일링하여 제1 영상 및 제2 영상을 생성할 수 있다. 즉 제1 영상 및 제2 영상은 동일한 영상으로부터 서로 다르게 스케일링된 것일 수 있다. 또한 스케일러(340)는 좌안 시점 영상 프레임 및 우안 시점 영상 프레임을 순차적으로 스케일링할 수 있다. 여기서 상기 스케일된 좌안 시점 영상 프레임 및 상기 우안 시점 영상 프레임은 서로 다르게 스케일링된 것일 수 있다.
또한, 스케일러(340)는 3차원 영상을 디스플레이하기 위하여 적용되는 화질 설정값(예를 들어, 색감(color), 선명도(sharpness) 등)을 3차원 영상 신호에 따른 좌안 시점 영상 및 우안 시점 영상에 각각 적용시킬 수 있다. 여기서, 화질 설정값은 제어부(360)에 의하여 구체적으로 조절 또는 설정될 수 있으며, 스케일러(340)는 제어부(360)의 제어에 따라서 소정 화질 설정값을 디스플레이할 3차원 영상 신호에 따른 좌안 시점 영상 및 우안 시점 영상에 각각 적용하여 출력한다. 또한, 소정 화질 설정값을 디스플레이할 3차원 영상 신호에 따른 좌안 시점 영상 및 우안 시점 영상에 각각 적용하여 출력하는 동작은 스케일러(340)가 아닌 포맷터(350)에서 수행될 수도 있다.
포맷터(formatter)(350)는 스케일러(340)에서 출력되는 영상 및 음성 신호들을 디스플레이 부(350)의 출력 포맷에 맞게 변환한다. 여기서, 포맷터(350)는 2D 컨텐츠를 디스플레이하는 경우에는 상기 변환 기능 수행 없이 입력 받은 신호를 통과시킨다. 그리고, 3D 컨텐츠를 디스플레이하는 경우에는 제어부(360)의 제어에 따라 3D 컨텐츠의 포맷 및 디스플레이 부(370)의 출력 주파수 등에 맞게 스케일러(340)에서 출력되는 영상을 3D 포맷으로 처리하는 3D 포맷터로 동작할 수 있다. 스케일러(340)가 2D 영상을 제1 영상 및 제2 영상으로 스케일링한 경우에는, 포맷터(350)는 제어부(360)의 제어에 따라 3D 컨텐츠의 포맷 및 디스플레이부(370)의 출력 주파수 등에 맞게 상기 제1 영상 및 제2 영상을 3D 포맷으로 처리하는 3D 포맷터로 동작할 수 있다.
또한, 포맷터(350)는 3차원 입체 영상을 구현하기 위하여 변환된 영상 신호를 디스플레이 부(370)로 출력하고, 출력되는 3차원 영상 신호에 관한 수직 동기 신호(Vsync)를 생성하여 적외선 출력부(355)로 출력한다. 여기서, 수직 동기 신호(Vsync)는 3차원 영상 신호에 따른 좌안 시점 영상 또는 우안 시점 영상의 디스플레이 시점과 셔터 안경(미도시)의 좌 안 렌즈 또는 우안 렌즈의 개폐 시점을 동기 시키기 위한 신호이다.
일부 실시예로, 포맷터(350)는 스케일러(340)의 기능을 대신 수행할 수 있다. 즉 포맷터(350)는 디코더 부(335)가 출력한 영상을 직접 스케일링할 수 있다.
적외선 출력부(355)는 포맷터(340)에서 출력되는 수직 동기 신호를 수신하여 셔터 안경(미도시)으로 전송한다. 그러면, 셔터 안경은 전송 받은 수직 동기 신호에 따라 좌안 셔터 액정 패널(좌안 렌즈)과 우안 셔터 액정 패널(우안 렌즈)의 셔터 오픈 주기를 조정한다. 구체적으로, 영상 표시 장치(300)가 좌안 시점 영상을 디스플레이할 때, 좌안 셔터 액정 패널은 광을 통과시키고 우안 셔터 액정 패널은 광 투과를 차단한다. 그에 따라서, 좌안 시점 영상이 안경 사용자의 좌측 눈에만 전달된다. 그리고, 영상 표시 장치(300)가 우안 시점 영상을 디스플레이할 때에는, 좌안 셔터 액정 패널은 광 투과를 차단하고, 우안 셔터 액정 패널은 광을 통과시킨다. 그에 따라서, 우안 시점 영상이 사용자의 우측 눈에만 전달된다.
제어부(360)는 영상 표시 장치(300)의 전반적인 동작을 제어한다. 제어부(360)는 2차원 영상 신호에 포함된 영상 프레임이 제1 영상 프레임 및 제2 영상 프레임으로 각각 스케일링되도록 스케일러(340)을 제어할 수 있다. 여기서 제1 영상 프레임 및 제2 영상 프레임은 서로 다르게 스케일링된 것일 수 있다. 또한 제어부(360)는 3차원 영상 신호에 포함되는 좌안 시점 영상 프레임 및 우안 시점 영상 프레임이 각각 다르게 스케일링되도록 스케일러(340)를 제어할 수 있다.
구체적으로, 수신된 3차원 영상 신호에 포함되는 좌안 시점 영상 프레임 및 우안 시점 영상 프레임 중 하나의 분할 간격이 비선형적으로 조절 및 출력되도록 스케일러(340)를 제어한다. 그리고, 수신된 3차원 영상 신호에 포함되는 좌안 시점 영상 프레임 및 우안 시점 영상 프레임 중 다른 하나는 분할 간격 조절 없이 출력되도록 스케일러(340)를 제어하거나, 상기 다른 하나의 분할 간격이 선형적으로 조절 및 출력되도록 스케일러(340)를 제어한다.
디스플레이 부(370)는 포맷터(350)를 통하여 전송되는 2차원 영상 신호 또는 3차원 영상 신호를 입체 영상으로 디스플레이한다. 또한, 디스플레이 부(370)는 포맷터(350)를 단순 통과(bypass)하여 전송되거나 포맷터(340)를 통과하지 않고 스케일러(340)에서 출력되는 2차원 영상 신호를 디스플레이할 수 있다.
저장부(380)는 디스플레이 동작에 필요한 각종 정보들을 저장할 수 있다.
사용자 인터페이스부(390)는 사용자 조치를 수신할 수 있다. 사용자 인터페이스부(390)는 터치 스크린, 터치 패드, 리모컨 수신부, 촬영 장치, 음성 수신부 또는 물리적 버튼을 포함하는 버튼부 중 적어도 하나를 포함할 수 있다. 여기서 사용자 조치는 영상 표시 장치 또는 리모컨의 물리적인 버튼의 선택, 터치 스크린 디스플레이면상의 소정의 제스처의 실시 또는 소프트 버튼의 선택 및 촬상 장치로 촬영된 영상으로부터 인식되는 소정의 제스처의 실시 및 음성 인식에 의해 인식되는 소정의 발성의 실시를 포함할 수 있다.
본 발명의 일 실시예에 따른 영상 표시 장치(300)는 이하에서 도 4 내지 도 7을 참조하여 설명할 영상 처리 방법과 그 기술적 사상이 동일하다. 따라서, 영상 표시 장치(300)의 세부 동작은 이하에서 상세히 설명한다.
도 4는 본 발명의 일 실시예에 따른 영상 처리 방법을 나타내는 플로우차트이다.
도 4를 참조하면, 본 발명의 일 실시예에 따른 영상 처리 방법은 좌안 시점 영상 및 우안 시점 영상을 포함하는 3차원 영상 신호를 수신한다(S100 단계). S100 단계의 동작은 신호 입력부(310)에서 수행될 수 있으며, 수신되는 3차원 영상 신호는 도 1 및 도 2에서 도시 및 설명한 신호 형태를 가질 수 있다.
또한, 본 발명의 일 실시예에 따른 영상 처리 방법은 S100 단계에서 수신한 3차원 영상 신호를 복조하고 역다중화시키며, 역다중화된 오디오 및 비디오 신호를 디코딩하는 단계(미도시)를 더 포함할 수 있다.
그리고, 영상 처리 방법은3차원 영상 신호에 포함되는 좌안 시점 영상 및 우안 시점 영상 중 어느 하나의 영상 프레임(이하, '일 이미지')를 다수개로 분할하는데 있어서의 분할 간격을 비선형적으로 조절한다(S110 단계). 즉, 일 이미지의 분할 간격을 서로 다르게 조절하는 것이다. 또한, S110 단계는 3차원 영상 신호에 포함되는 좌안 시점 영상 및 우안 시점 영상 중 일 이미지를 다수개의 분할 이미지로 균등 분할하는 단계, 및 상기 분할 이미지들 각각의 분할 간격(분할 이미지의 폭)을 비선형적으로 조절하는 단계를 포함할 수 있다.
S110 단계는 일 이미지를 수직 방향으로 분할하였을 때의 다수개의 분할 이미지에 있어서, 수직 폭 간격을 비선형적으로 조절하는 단계를 포함할 수 있다. 또한, S110 단계는 일 이미지를 수평 방향으로 분할하였을 때의 다수개의 분할 이미지에 있어서, 수평 폭 간격을 비선형적으로 조절하는 단계를 포함할 수 있다. 이하의 도 6 및 도 7에서는 일 이미지를 수직방향으로 분할한 경우를 예로 들어 도시하였다.
또한, 3차원 영상 신호에 포함되는 좌안 시점 영상 및 우안 시점 영상 중 다른 이미지를 다수개로 분할하는데 있어서의 분할 간격을 선형적으로 조절하는 단계(S120 단계)를 더 포함할 수 있다. 즉, 다른 이미지의 분할 간격을 동일하게 조절하는 것이다.
본 발명에서는 3차원 영상의 실제감을 증대시키기 위하여, S110 단계에 있어서, 일 이미지만 분할 간격을 비선형적으로 조절한다. S110 단계의 일 이미지의 분할 간격의 비선형적 조절과 실제감 증대와 관련하여는 이하의 도 5를 참조하여 상세히 설명한다.
도 5는 3차원 영상 신호의 양안 시차에 따른 거리감의 차이를 설명하기 위한 도면이다.
도 5를 참조하면, 도 5의 (a)는 우안 시점 영상(501)과 좌안 시점 영상(502)의 간격이 좁은 경우 상기 양 데이터가 겹합되어 맺히는 상의 위치(503)를 도시한다. 그리고, 도 5의 (b)는 우안 시점 영상(511)과 좌안 시점 영상(512)의 간격이 넓은 경우 맺히는 상의 위치(513)를 도시한다.
즉, 도 5의 (a) 및 도 5의 (b)는 영상 표시 장치(300)에서 디스플레이하는 좌안 시점 영상과 우안 시점 영상의 간격에 따라 서로 다른 위치에서 상이 맺히는 원근감의 정도를 나타낸다.
도 5의 (a)를 참조하면, 상은 우안으로 우안 시점 영상(501)의 일측과 다른 측을 바라보는 연장선(R1,R2)을 그리고, 좌안으로 좌안 시점 영상(502)의 일측과 다른 측을 바라보는 연장선(L1,L2)을 그릴 때, 상기 우안 시점 영상에 대한 연장선(R1)과 좌안 시점 영상에 대한 연장선(L1)이 우안 및 좌안으로부터 일정 거리(d1)에서 서로 교차되는 지점(503)에 맺힌다. 그에 따라서, 사용자는 영상 표시 장치(300)를 통하여 3차원 영상을 시청하는데 있어서 d1 거리의 거리감을 느끼게 된다.
도 5의 (b)를 참조하면, 상은 도 5의 (a)에서 전술한 내용을 기초로 하면 우안 시점 영상에 대한 연장선(R3)과 좌안 시점 영상에 대한 연장선(L3)이 우안 및 좌안으로부터 일정 거리(d2)에서 서로 교차되는 지점(513)에서 맺힌다.
여기서, 좌안 및 우안으로부터 상이 맺히는 위치(503, 513)까지의 거리를 나타내는 도 5의 (a)에서 d1과 도 5의 (b)에서 d2를 비교하면, 상기 d1이 d2보다 좌안 내지 우안으로부터 거리가 더 멀다. 즉, 도 5의 (a)에서의 상이 도 5의 (b)에서의 상보다 좌안 및 우안으로부터 보다 먼 거리에서 맺힌다. 즉, 좌 이미지(501)와 우 이미지(502)의 중심 거리 차이(G1)가 좁으면 거리감이 증가하게 된다. 그에 따라서, 사용자는 중심 거리 차이(G1)가 좁을수록 멀리 있는 화면(또는 화면상에 디스플레이된 사물)으로 인식하게 되며, 화면상에 디스플레이되는 사물을 멀게 느끼게 된다.
즉, 우안 시점 영상과 좌안 시점 영상의 디스플레이 간격(G1 또는 G2)에 따라서, 원근감이 달라지는 것이다. 여기서, 우안 시점 영상과 좌안 시점 영상의 디스플레이 간격(G1 또는 G2)을 스테레오스코픽 방식의 원리에 따라 촬영된 2개 카메라의 시차(즉, 양안 시차)라 할 수 있다. 즉, 우안 시점 영상과 좌안 시점 영상의 디스플레이 간격(G1 또는 G2)인 양안 시차에 따라서, 원근감이 달라진다.
본원에서는 동일 주기에서 디스플레이되는 좌안 시점 영상과 우안 시점 영상에 있어서, 동일 화면 상의 소정 분할 영역들(분할 이미지들)에서의 양안 시차를 다르게 설정하기 위하여, 일 이미지에서만 분할 간격의 비선형적 조절하고, 다른 이미지에서는 분할 간격을 조절하지 않는다. 그에 따라서, 동일 주기에 디스플레이 되어 사용자에게 하나의 화면으로 인식되는 좌안 시점 영상과 우안 시점 영상의 각 분할 영역별로 양안 시차를 다르게 할 수 있다. 그에 따라서, 동일 주기에서 디스플레이되는 좌안 시점 영상과 우안 시점 영상에서 거리감(원근감 또는 depth)을 다르게 할 수 있어서, 보다 입체적인 3차원 영상을 디스플레이할 수 있다. 즉, 3차원 영상의 실제감을 증대시킬 수 있는 것이다.
S110 단계 및 S120 단계에 따른 좌안 시점 영상 및 우안 시점 영상의 분할 간격 조절은 이하의 도 6 및 도 7을 참조하여 상세히 설명한다.
도 6은 도 4의 S110 단계 및 S120 단계의 분할 간격 조절 동작을 설명하기 위한 일 도면이다.
도 7은 도 4의 S110 단계 및 S120 단계의 분할 간격 조절 동작을 설명하기 위한 다른 도면이다.
도 6의 (a)를 참조하면, 3차원 영상 신호에 포함되는 좌안 시점 영상 및 우안 시점 영상 중 어느 하나의 일 이미지(예를 들어, 좌안 시점 영상의 이미지)(610)를 수직 방향으로 다수개의 분할 이미지들로 분할한 경우를 예로 들어 도시하였다. 그리고, 각 분할 이미지의 간격(수직 폭, G11 또는 G12)을 비선형적으로 조절한 경우를 예로 들어 도시하였다.
도 6의 (a)를 참조하면, S110 단계는, 일 이미지의 소정 축(611)을 중심으로 좌우로 갈수록 상기 분할 간격의 폭이 감소되도록 다수개의 분할 이미지들 각각의 분할 간격을 비선형적으로 조절하는 단계를 포함할 수 있다. 즉, 각각의 분할 이미지들의 분할 간격(G11 또는 G12)을 서로 다르게 조절하는 것이다. 여기서, 소정 축은 일 이미지에 있어서 수직 방향의 축인 경우를 예로 들어 도시하였다. 또한, 일 이미지를 수평 방향으로 분할할 경우, 소정 축은 수평 방향의 축이 될 수 있다.
또한, 도 6의 (b)를 참조하면, 도 6의 (a)에 도시된 좌안 시점 영상의 이미지와 하나의 입체 영상을 형성하는 다른 이미지인 우안 시점 영상의 이미지(630)는 분할 간격을 서로 다르게 조절하지 않는다. 즉, 이미지(630)는 도 6의 (b)에 도시된 바와 같이 다수개로 균등 분할하고, 분할된 분할 간격(G21 또는 G22)을 동일하게 조절(선형적으로 조절)한다.
또한, 또한, S120 단계에 있어서, 다른 이미지인 이미지(630)를 분할 간격의 선형적 조절 동작 없이, 좌 이미지(710)와 동일 크기, 동일 해상도, 또는 동일 화면비를 갖도록 크기 조절(scaling)하여 출력하는 단계를 포함할 수도 있다. 분할 화면 간격을 동일하게 조작하는 것은, 이미지를 일 방향(예를 들어, 수평 방향)으로 확대 또는 축소시키는 것과 동일하므로, 크기 조절(scaling)만 하여 출력하는 것이다.
또한, 본 발명의 일 실시예에 따른 영상 처리 방법은, 분할 간격이 선형적 또는 비선형적으로 조절된 좌안 시점 영상의 이미지(일 이미지) 및 우안 시점 영상의 이미지(다른 이미지)를 동일 크기, 동일 해상도 또는 동일 화면비로 크기 조절(scaling)하여 출력하는 단계를 더 포함할 수 있다. 또한, 크기 조절 동작은 스케일러(340)에서 수행될 수 있다.
도 6의 (a)에서와 같이 이미지(610)의 소정 축(611)을 중심으로 좌우로 갈수록 상기 분할 간격의 폭이 감소되도록 다수개의 분할 이미지들 각각의 분할 간격을 비선형적으로 조절하고, 다른 이미지(630)의 분할 간격은 선형적으로(동일하게) 조절하면, 소정 축(611)을 기준으로 좌우로 갈수록 좌안 시점 영상과 우안 시점 영상 간의 양안 시차가 감소하게 된다. 그에 따라서 볼록 거울에 재생된 3차원 영상 효과가 발생하게 된다.
구체적으로, 소정 축(611)에 가까운 영역에서는 가까운 거리감의 화면으로 디스플레이되고 소정 축(611)에서 멀어지는 영역에서는 먼 거리감의 화면으로 디스플레이되는 것이다. 따라서, 3차원 영상에서의 입체감을 더욱 증대시킬 수 있으며, 그에 따라서 3차원 영상의 화질을 개선할 수 있다.
또한, 분할 이미지들 각각에 있어서, 분할 간격을 크게 하면, 해당 분할 이미지가 앞으로(시청자가 있는 방향으로) 나오는 효과 또는 가까운 거리감으로 디스플레이되는 효과를 가질 수 있다. 또한, 분할 간격을 작게 하면, 해당 분할 이미지가 뒤로(시청자가 있는 방향에서 반대되는 방향으로) 가는 효과 또는 먼 거리감으로 디스플레이되는 효과를 가질 수 있다.
도 7의 (a)를 참조하면, 3차원 영상 신호에 포함되는 좌안 시점 영상의 이미지 및 우안 시점 영상의 이미지 중 어느 일 이미지(예를 들어, 좌안 시점 영상의 이미지)(710)를 수직 방향으로 다수개의 분할 이미지들로 분할한 경우를 예로 들어 도시하였다. 그리고, 각 분할 이미지의 간격(수직 폭, G31 또는 G32)을 비선형적으로 조절한 경우를 예로 들어 도시하였다.
도 7의 (a)를 참조하면, S110 단계는, 일 이미지의 소정 축(711)을 중심으로 좌우로 갈수록 상기 분할 간격의 폭이 증가되도록 다수개의 분할 이미지들 각각의 분할 간격(G31, G32)을 비선형적으로 조절하는 단계를 포함할 수 있다. 즉, 각각의 분할 이미지들의 분할 간격(G31 또는 G32)을 서로 다르게 조절하는 것이다. 여기서, 소정 축은 일 이미지에 있어서 수직 방향의 축인 경우를 예로 들어 도시하였다.
또한, 도 7의 (b)는 도 6의 (b)에서와 동일하므로, 상세한 설명은 생략하도록 한다.
도 7의 (a)에서와 같이 일 이미지(710)의 소정 축(711)을 중심으로 좌우로 갈수록, 즉, 소정 축(711)에서 멀어질수록, 상기 분할 간격의 폭이 증가되도록 다수개의 분할 이미지들 각각의 분할 간격을 비선형적으로 조절하고, 다른 이미지(730)의 분할 간격은 선형적으로(동일하게) 조절한다. 그러면, 소정 축(711)을 기준으로 좌우로 갈수록 좌안 시점 영상과 우안 시점 영상 간의 양안 시차가 증가하게 된다. 그에 따라서 오목 거울에 재생된 3차원 영상 효과가 발생하게 된다.
구체적으로, 소정 축(711)에 가까운 영역에서는 먼 거리감의 화면으로 디스플레이되고 소정 축(711)에서 멀어지는 영역에서는 가까운 거리감의 화면으로 디스플레이되는 것이다. 따라서, 3차원 영상에서의 입체감을 더욱 증대시킬 수 있으며, 그에 따라서 3차원 영상의 화질을 개선할 수 있다.
도 7 및 도 6에서 도시 및 설명한 소정 축(611 또는 711)은 디스플레이되는 화면의 구성에 따라서 다르게 위치할 수 있다. 예를 들어, 동일 화면에서 가까운 거리감 또는 먼 거리감을 주고자 하는 화면 구성이 있는 곳에 소정 축(611 또는 711)을 위치시킬 수 있다.
본 발명의 일 실시예에 따른 영상 처리 방법은 일 이미지 및 다른 이미지를 출력하는 단계(S130 단계)를 포함한다. S130 단계의 동작은 스케일러(340)에서 이뤄질 수 있으며, 출력되는 일 이미지 및 다른 이미지는 포맷터(350)에서 전송 받을 수 있다.
또한, 본 발명의 일 실시예에 따른 영상 처리 방법은 S110 단계에서의 일 이미지와 S120 단계에서의 다른 이미지를 영상 표시 장치(300)의 디스플레이 포맷에 맞춰 변환하여 3차원 영상으로 출력하는 단계(미도시)를 더 포함할 수 있다. 상기 단계의 동작은 포맷터(350)에서 수행될 수 있다.
또한, 본 발명의 일 실시예에 따른 영상 처리 방법은 포맷 변환된 일 이미지 및 다른 이미지를 3차원 영상으로 디스플레이하는 단계(미도시)를 더 포함할 수 있다. 상기 단계의 동작은 디스플레이 부(370)에서 수행될 수 있다.
또한, 본 발명의 일 실시예에 따른 영상 처리 방법에 있어서, 각 단계 동작의 제어는 제어부(360)에 의하여 수행될 수 있다.
도 8은 수평 방향으로 스케일링을 설명하기 위한 일 도면이다.
도 8을 참조하면, 스케일러(340)는 영상 데이터(810)를 이용하여 제1 영상 데이터(820) 및 제2 영상 데이터(830)를 생성할 수 있다. 스케일러(340)는 영상 데이터(810)를 중심에서 좌측(811) 및 우측(812)로 갈수록 스케일링 크기가 증가되도록 영상 데이터(810)를 스케일링하여 제1 영상 데이터(820)을 생성할 수 있다. 스케일러(340)는 영상 데이터(810)를 수직 방향으로 다수개의 분할 이미지들로 분할하고, 중심에서 좌측(811) 및 우측(812)로 갈수록 분할 간격의 폭(G81, G82)이 증가되도록 다수개의 분할 이미지들 각각을 스케일링하여 제1 영상 데이터(820)를 생성할 수 있다. 제1 영상 데이터(820)는 중심(823)에서 좌측(821) 또는 우측(822)으로 갈수록 분할 이미지의 간격의 폭이 증가된다. 즉 폭(G84)이 폭 (G83)보다 클 수 있다.
일부 실시예로, 스케일러(340)는 영상 데이터(810)를 중심에서 좌측(811) 및 우측(812)로 갈수록 스케일링 크기가 감소되도록 영상 데이터(810)를 스케일링하여 제1 영상 데이터(820)을 생성할 수 있다. 스케일러(340)는 영상 데이터(810)를 수직 방향으로 다수개의 분할 이미지들로 분할하고, 중심에서 좌측(811) 및 우측(812)으로 갈수록 분할 간격의 폭(G81, G82)이 감소되도록 다수개의 분할 이미지들 각각을 스케일링하여 제1 영상 데이터(820)를 생성할 수 있다.
스케일러(340)는 영상 데이터(810)를 선형적으로 스케일링하여 제2 영상 데이터(830)를 생성할 수 있다. 스케일러(340)는 영상 데이터(810)의 분할 간격을 선형적으로 스케일링하여 제 2 영상 데이터(830)를 생성할 수 있다. 제2 영상 데이터(830)는 분할 이미지의 간격의 폭(G85, G86)이 동일하다.
도 9는 수평 방향으로 스케일링을 설명하기 위한 다른 도면이다.
스케일러(340)는 영상 데이터(910)를 이용하여 제1 영상 데이터(920) 및 제2 영상 데이터(930)를 생성할 수 있다. 스케일러(340)는 영상 데이터(910)를 중심에서 좌측(911) 및 우측(912)로 갈수록 스케일링 크기가 증가되도록 영상 데이터(910)를 스케일링하여 제1 영상 데이터(920)을 생성할 수 있다. 스케일러(340)는 영상 데이터(910)를 수직 방향으로 다수개의 분할 이미지들로 분할하고, 중심에서 좌측(911) 및 우측(912)으로 갈수록 분할 간격의 폭(G91, G92)이 증가되도록 다수개의 분할 이미지들 각각을 스케일링하여 제1 영상 데이터(920)를 생성할 수 있다. 제1 영상 데이터(920)는 중심(923)에서 좌측(921) 또는 우측(922)으로 갈수록 분할 이미지의 간격의 폭이 증가된다. 즉 폭(G94)가 폭 (G93)보다 클 수 있다.
스케일러(340)는 영상 데이터(910)를 중심에서 좌측(911) 및 우측(912)로 갈수록 스케일링 크기가 증가되도록 영상 데이터(910)를 스케일링하여 제2 영상 데이터(930)을 생성할 수 있다. 여기서, 스케일러(340)는 상기 스케일링 크기를 상기 제1 영상 데이터(920)의 생성 과정에서 스케일링 크기와 다르게 증가시킨다. 스케일러(340)는 영상 데이터(910)를 수직 방향으로 다수개의 분할 이미지들로 분할하고, 중심에서 좌측(911) 및 우측(912)으로 갈수록 분할 간격의 폭(G91, G92)이 증가되도록 다수개의 분할 이미지들 각각을 스케일링하여 제2 영상 데이터(930)를 생성할 수 있다. 제2 영상 데이터(930)는 중심(933)에서 좌측(931) 또는 우측(932)으로 갈수록 분할 이미지의 간격의 폭이 증가된다. 즉 폭(G96)가 폭 (G95)보다 클 수 있다. 또한 폭(G95) 및 폭(G96)은 각각 폭(G93) 및 폭(G94)와 다르다.
일부 실시예로, 스케일러(340)는 영상 데이터(910)를 중심에서 좌측(911) 및 우측(912)로 갈수록 스케일링 크기가 감소되도록 영상 데이터(910)를 스케일링하여 제1 영상 데이터(920) 및 제2 영상 데이터(930)을 생성할 수 있다. 여기서 스케일러(340)는 제2 영상 데이터(930)에 대한 스케일링 크기가 제1 영상 데이터(920)의 스케일링 크기와 다르게 감소될 수 있다. 스케일러(340)는 영상 데이터(910)를 수직 방향으로 다수개의 분할 이미지들로 분할하고, 중심에서 좌측(911) 및 우측(912)으로 갈수록 분할 간격의 폭(G91, G92)이 감소되도록 다수개의 분할 이미지들 각각을 스케일링하여 제1 영상 데이터(920) 및 제2 영상 데이터(930)를 생성할 수 있다. 여기서 폭(G95) 및 폭(G96)은 각각 폭(G93) 및 폭(G94)와 각각 다르다.
도 10은 수직 방향으로 스케일링을 설명하기 위한 일 도면이다.
도 10을 참조하면, 스케일러(340)는 영상 데이터(1010)를 이용하여 제1 영상 데이터(1020) 및 제2 영상 데이터(1030)를 생성할 수 있다. 스케일러(340)는 영상 데이터(1010)를 중심에서 상측(1011) 및 하측(1012)로 갈수록 스케일링 크기가 증가되도록 영상 데이터(1010)를 스케일링하여 제1 영상 데이터(1020)을 생성할 수 있다. 스케일러(340)는 영상 데이터(1010)를 수평 방향으로 다수개의 분할 이미지들로 분할하고, 중심에서 상측(1011) 및 하측(1012)으로 갈수록 분할 간격의 폭(G101, G102)이 증가되도록 다수개의 분할 이미지들 각각을 스케일링하여 제1 영상 데이터(1020)를 생성할 수 있다. 제1 영상 데이터(1020)는 중심(1023)에서 상측(1021) 또는 하측(1022)로 갈수록 분할 이미지의 간격의 폭이 증가된다. 즉 폭(G104)이 폭 (G103)보다 클 수 있다.
일부 실시예로, 스케일러(340)는 영상 데이터(1010)를 중심에서 상측(1011) 및 하측(1012)으로 갈수록 스케일링 크기가 감소되도록 영상 데이터(1010)를 스케일링하여 제1 영상 데이터(1020)을 생성할 수 있다. 스케일러(340)는 영상 데이터(1010)를 수평 방향으로 다수개의 분할 이미지들로 분할하고, 중심에서 상측(1011) 및 하측(1012)으로 갈수록 분할 간격의 폭(G101, G102)이 감소되도록 다수개의 분할 이미지들 각각을 스케일링하여 제1 영상 데이터(1020)를 생성할 수 있다.
스케일러(340)는 영상 데이터(1010)를 선형적으로 스케일링하여 제2 영상 데이터(1030)를 생성할 수 있다. 스케일러(340)는 영상 데이터(1010)의 분할 간격을 선형적으로 스케일링하여 제 2 영상 데이터(1030)를 생성할 수 있다. 제2 영상 데이터(1030)는 분할 이미지의 간격의 폭(G105, G106)이 동일하다.
도 11은 수직 방향으로 스케일링을 설명하기 위한 다른 도면이다.
도 11을 참조하면, 스케일러(340)는 영상 데이터(1110)를 이용하여 제1 영상 데이터(1120) 및 제2 영상 데이터(1130)를 생성할 수 있다. 스케일러(340)는 영상 데이터(1110)를 중심에서 상측(1111) 및 하측(1112)로 갈수록 스케일링 크기가 증가되도록 영상 데이터(1110)를 스케일링하여 제1 영상 데이터(1120)을 생성할 수 있다. 스케일러(340)는 영상 데이터(1100)를 수평 방향으로 다수개의 분할 이미지들로 분할하고, 중심에서 상측(1011) 및 하측(1012)으로 갈수록 분할 간격의 폭(G111, G112)이 증가되도록 다수개의 분할 이미지들 각각을 스케일링하여 제1 영상 데이터(1120)를 생성할 수 있다. 제1 영상 데이터(1120)는 중심(1123)에서 상측(1121) 또는 하측(1122)로 갈수록 분할 이미지의 간격의 폭이 증가된다. 즉 폭(G113)이 폭 (G114)보다 클 수 있다.
스케일러(340)는 영상 데이터(1110)를 중심에서 상측(1111) 및 하측(1112)으로 갈수록 스케일링 크기가 증가되도록 영상 데이터(1110)를 스케일링하여 제2 영상 데이터(1130)을 생성할 수 있다. 여기서, 스케일러(340)는 상기 스케일링 크기를 상기 제1 영상 데이터(1120)의 생성 과정에서 스케일링 크기와 다르게 증가시킨다. 스케일러(340)는 영상 데이터(1110)를 수직 방향으로 다수개의 분할 이미지들로 분할하고, 중심에서 상측(1111) 및 하측(1112)으로 갈수록 분할 간격의 폭(G111, G112)이 증가되도록 다수개의 분할 이미지들 각각을 스케일링하여 제2 영상 데이터(1130)를 생성할 수 있다. 제2 영상 데이터(1130)는 중심(1133)에서 상측(1131) 또는 하측(1132)으로 갈수록 분할 이미지의 간격의 폭이 증가된다. 즉 폭(G115)가 폭(G116)보다 클 수 있다. 또한 폭(G115) 및 폭(G116)은 각각 폭(G113) 및 폭(G114)와 다르다.
일부 실시예로, 스케일러(340)는 영상 데이터(1110)를 중심에서 상측(1111) 및 하측(1112)로 갈수록 스케일링 크기가 감소되도록 영상 데이터(1110)를 스케일링하여 제1 영상 데이터(1120) 및 제2 영상 데이터(1130)을 생성할 수 있다. 여기서 스케일러(340)는 제2 영상 데이터(1130)에 대한 스케일링 크기가 제1 영상 데이터(1120)에 대한 스케일링 크기와 다르게 감소될 수 있다. 스케일러(340)는 영상 데이터(1110)를 수직 방향으로 다수개의 분할 이미지들로 분할하고, 중심에서 상측(1111) 및 하측(1112)으로 갈수록 분할 간격의 폭(G111, G112)이 감소되도록 다수개의 분할 이미지들 각각을 스케일링하여 제1 영상 데이터(1120) 및 제2 영상 데이터(1130)를 생성할 수 있다. 여기서 폭(G115) 및 폭(G116)은 각각 폭(G113) 및 폭(G114)와 각각 다르다.
도 12는 컨텐츠가 디스플레이된 화면을 도시한 도면이다.
도 12(a)는 디스플레이 부(370)가 영상 데이터를 디스플레이한 화면을 도시한다. 여기서 영상 데이터는 2차원 영상 데이터 및 3차원 영상 데이터 중 하나일 수 있다.
도 12(b)는 도 12(a)에 디스플레이된 영상 데이터가 도 8 또는 도 9에서 전술된 방식으로 스케일링된 제1 영상 데이터 및 제2 영상 데이터가 디스플레이된 화면을 도시한다. 제1 영상 데이터 및 제2 영상 데이터는 중심에서 좌측 및 우측으로 갈수록 영상의 간격이 넓어지므로, 영상은 화면의 중심에서는 먼 거리감으로 디스플레이되고, 화면의 좌측 및 우측으로 갈수록 가까운 거리감으로 디스플레이된다. 그러므로 도 12(b)의 영상은 도 12(a)의 영상이 수평방향으로 구부러진 곡선 형태의 스크린에 디스플레이되는 것처럼 보인다. 이에 따라, 본 발명은 디스플레이되는 영상에 대한 사용자의 몰입감 및 재미를 높일 수 있다. 여기서 영상 데이터가 3차원 영상 데이터인 경우에는, 제1 영상 데이터는 3차원 영상 데이터의 좌안 시점 영상 및 우안 시점 영상 중 하나로부터 스케일링된 것이고, 제2 영상 데이터는 나머지 하나로부터 스케일링된 것일 수 있다.
도 12(c)는 도 12(a)에 디스플레이된 영상 데이터가 도 10 또는 도 11에서 전술된 방식으로 스케일링된 제1 영상 데이터 및 제2 영상 데이터가 디스플레이된 화면을 도시한다. 제1 영상 데이터 및 제2 영상 데이터는 중심에서 상측 및 하측으로 갈수록 영상의 간격이 넓어지므로, 영상은 화면의 중심에서는 먼 거리감으로 디스플레이되고, 화면의 상측 및 하측으로 갈수록 가까운 거리감으로 디스플레이된다. 그러므로 도 12(c)의 영상은 도 12(a)의 영상이 수직방향으로 구부러진 곡선 형태의 스크린에 디스플레이되는 것처럼 보인다. 이에 따라, 본 발명은 디스플레이되는 영상에 대한 사용자의 몰입감 및 재미를 높일 수 있다. 여기서 영상 데이터가 3차원 영상 데이터인 경우에는, 제1 영상 데이터는 3차원 영상 데이터의 좌안 시점 영상 및 우안 시점 영상 중 하나로부터 스케일링된 것이고, 제2 영상 데이터는 나머지 하나로부터 스케일링된 것일 수 있다.
도 12(d)는 도 12(a)에 디스플레이된 영상 데이터가 도 8 또는 도 9에서 전술된 방식 중 하나와, 도 10또는 도 11에서 전술된 방식 중 하나로 스케일링된 제1 영상 데이터 및 제2 영상 데이터가 디스플레이된 화면을 도시한다. 제1 영상 데이터 및 제2 영상 데이터는 중심에서 좌측 및 우측으로 갈수록 영상의 간격이 넓어지므로, 영상은 화면의 중심에서는 먼 거리감으로 디스플레이되고, 화면의 좌측 및 우측으로 갈수록 가까운 거리감으로 디스플레이된다. 또한 제1 영상 데이터 및 제2 영상 데이터는 중심에서 상측 및 하측으로 갈수록 영상의 간격이 넓어지므로, 영상은 화면의 중심에서는 먼 거리감으로 디스플레이되고, 화면의 상측 및 하측으로 갈수록 가까운 거리감으로 디스플레이된다. 그러므로 도 12(d)의 영상은 도 12(a)의 영상이 수평방향 및 수직방향으로 구부러진 곡선 형태의 스크린에 디스플레이되는 것처럼 보인다. 즉 도 12(d)의 영상은 구 모양의 스크린에 디스플레이되는 것처럼 보인다. 이에 따라, 본 발명은 디스플레이되는 영상에 대한 사용자의 몰입감 및 재미를 높일 수 있다. 여기서 영상 데이터가 3차원 영상 데이터인 경우에는, 제1 영상 데이터는 3차원 영상 데이터의 좌안 시점 영상 및 우안 시점 영상 중 하나로부터 스케일링된 것이고, 제2 영상 데이터는 나머지 하나로부터 스케일링된 것일 수 있다.
도 13 내지 16은 스케일링 방식을 설정하기 위한 GUI(Graphical User Interface)가 디스플레이된 도면이다.
사용자 인터페이스부(390)는 스케일링 방식 설정을 요청하는 사용자 조치를 수신하고, 제어부(360)는 상기 수신된 사용자 조치를 감지한다. 그리고 제어부(360)는 상기 사용자 조치 감지에 응답하여, 스케일링 방식을 설정하기 위한 GUI가 디스플레이되도록 제어한다.
도 13을 참조화면, 디스플레이 부(370)는 스케일링 방식을 설정하기 위한 GUI로 GUI(1300)를 화면에 디스플레이할 수 있다.
GUI(1300)는 영상을 디스플레이하는 영상 디스플레이 영역(1310), 수평 방향에 대한 스케일링 방식을 지시하는 수평 스케일링 파라미터를 설정하기 위한 제1 바(1320), 수직 방향에 대한 스케일링 방식을 지시하는 수직 스케일링 파라미터를 설정하기 위한 제2 바(1330), 확인 버튼(1352) 및 취소 버튼(1354)를 포함할 수 있다.
영상 디스플레이 영역(1310)는 제1 바(1320) 및 제2 바(1330)를 통해 설정된 수평 스케일링 파라미터 및 수직 스케일링 파라미터를 기초로 스케일된 영상을 디스플레이한다.
사용자는 제1 바(1320)의 눈금 선택 표시(1325)의 위치를 조절하여, 눈금 선택 표시(1325)가 위치한 지점이 지시하는 값을 수평 스케일링 파라미터로 선택할 수 있다.
사용자는 제2 바(1330)의 눈금 선택 표시(1325)의 위치를 조절하여, 눈금 선택 표시(1335)가 위치한 지점이 지시하는 값을 수직 스케일링 파라미터로 선택할 수 있다.
제어부(360)는 확인 버튼(1352)을 선택하는 사용자 조치를 감지한 경우에는, 상기 사용자 조치 감지에 응답하여 눈금 선택 표시(1325)가 위치한 지점이 지시하는 값을 수평 스케일링 파라미터로 설정하고, 눈금 선택 표시(1335)가 위치하는 지점이 지시하는 값을 수직 스케일링 파라미터로 설정한다.
제어부(360)는 설정된 수평 스케일링 파라미터 및 수직 스케일링 파라미터에 따라 영상 데이터가 스케일링되도록 스케일러(340)를 제어할 수 있다. 여기서 수평 스케일링 파라미터에 따라 도 8 또는 도 9에서 전술된 중심에서 좌측 또는 우측으로의 스케일링 크기의 증가 또는 감소가 변경된다. 또한 수평 스케일링 파라미터가 1에 가까울수록 영상 디스플레이 영역 (1310)은 수평 방향으로 더 기울어진 스크린으로 보이고, 0에 가까울수록 영상 디스플레이 영역(1310)은 평면에 가까운 스크린으로 보인다. 또한 수직 스케일링 파라미터에 따라 도 10 또는 도 11에서 전술된 중심에서 상측 또는 하측으로의 스케일링 크기의 증가 또는 감소가 변경된다. 또한 수직 스케일링 파라미터가 1에 가까울수록 영상 디스플레이 영역(1310)은 수직 방향으로 더 기울어진 스크린으로 보이고, 0에 가까울수록 영상 디스플레이 영역(1310)은 평면에 가까운 스크린으로 보인다.
도 13에서 눈금 선택 표시(1325) 및 눈금 선택 표시(1335)가 눈금이 0인 지점에 위치하므로 수평 스케일링 파라미터 및 수직 스케일링 파라미터는 모두 0으로 셋팅된다. 그리고 영상 데이터가 2D 영상 데이터인 경우에는, 분할 간격이 동일한 크기를 갖는 하나의 영상 데이터로 스케일링될 수 있다. 영상 데이터가 3D 영상 데이터인 경우에는, 좌안 시점 영상 데이터 및 우안 시점 영상 데이터가 각각 동일한 방식으로 스케일링된다. 그리고 영상 디스플레이 영역(1310)은 평면 스크린으로 보인다.
도 14 의 GUI(1400)에서 눈금 선택 표시(1425)는 제1바(1420)의 눈금 0.5인 지점에 위치하므로 수평 스케일링 파라미터는 0.5로 셋팅되고, 눈금 선택 표시(1435)는 그대로 제2 바(1430)의 눈금0인 지점에 위치하므로 수직 스케일링 파라미터는 0으로 셋팅된다. 그리고 영상 데이터가 2D 영상 데이터인 경우에는, 영상 데이터는 도 8또는 도 9에 전술된 제1 영상 데이터 및 제2 영상 데이터로 스케일링될 수 있다. 영상 데이터가 3D 영상 데이터인 경우에는, 좌안 시점 영상 데이터 및 우안 시점 영상 데이터 중 하나는 도 8또는 도 9에 전술된 제1 영상 데이터로 스케일링될 수 있고, 나머지 하나는 도 8또는 도 9에 전술된 제2 영상 데이터로 스케일링될 수 있다. 여기서 영상 데이터의 중심에서 좌측 및 우측으로 스케일링 크기의 증가량 또는 감소량은 수평 스케일링 파라미터의 값인 0.5를 기초로 결정될 수 있다. 또한, 영상 디스플레이 영역(1410)은 수평 스케일링 파라미터 0.5 및 수평 스케일링 파라미터 0에 따라 스케일링된 영상을 디스플레이한다. 그리고 영상 디스플레이 영역(1410)은 수평 방향으로 기울어진 스크린으로 보인다.
도 15의 GUI(1500)에서 눈금 선택 표시(1535)는 제2바(1530)의 눈금 0.5인 지점에 위치하므로 수직 스케일링 파라미터는 0.5로 셋팅되고, 눈금 선택 표시(1525)는 그대로 제1 바(1520)의 눈금 0인 지점에 위치하므로 수평 스케일링 파라미터는 0으로 셋팅된다. 그리고 영상 데이터가 2D 영상 데이터인 경우에는, 영상 데이터는 도 10또는 도 11에 전술된 제1 영상 데이터 및 제2 영상 데이터로 스케일링될 수 있다. 영상 데이터가 3D 영상 데이터인 경우에는, 좌안 시점 영상 데이터 및 우안 시점 영상 데이터 중 하나는 도 10또는 도 11에 전술된 제1 영상 데이터로 스케일링될 수 있고, 나머지 하나는 도 10또는 도 11에 전술된 제2 영상 데이터로 스케일링될 수 있다. 여기서 영상 데이터의 중심에서 상측 및 하측으로 스케일링 크기의 증가량 또는 감소량은 수직 스케일링 파라미터의 값인 0.5를 기초로 결정될 수 있다. 또한, 영상 디스플레이 영역(1510)은 수평 스케일링 파라미터 0 및 수직 스케일링 파라미터 0.5에 따라 스케일링된 영상을 디스플레이한다. 그리고 영상 디스플레이 영역(1510)은 수직 방향으로 기울어진 스크린으로 보인다.
도 16의 GUI(1600)에서 눈금 선택 표시(1625)는 제1바(1620)의 눈금 0.5인 지점에 위치하므로 수평 스케일링 파라미터는 0.5로 셋팅되고, 눈금 선택 표시(1635)는 제2바(1630)의 눈금 0.5인 지점에 위치하므로 수직 스케일링 파라미터는 0.5로 셋팅된다. 그리고 영상 데이터가 2D 영상 데이터인 경우에는, 영상 데이터는 도 8 또는 도 9에 전술된 방식 중 하나와, 도 10또는 도 11에 전술된 방식 중 하나로 스케일링될 수 있다. 영상 데이터가 3D 영상 데이터인 경우에는, 좌안 시점 영상 데이터 및 우안 시점 영상 데이터 중 하나는 도 8 또는 도 9에 전술된 제1영상 데이터로의 스케일 방식 중 하나와, 도 10또는 도 11에 전술된 제1 영상 데이터로의 스케일 방식 중 하나가 복합된 방식으로 스케일링될 수 있고, 나머지 하나는 도 8 또는 도 9에 전술된 제2영상 데이터로의 스케일 방식 중 하나와, 도 10또는 도 11에 전술된 제2 영상 데이터로의 스케일 방식 중 하나가 복합된 방식으로 스케일링될 수 있다. 여기서 영상 데이터의 중심에서 좌측 및 우측으로 스케일링 크기의 증가량 또는 감소량은 수평 스케일링 파라미터의 값인 0.5를 기초로 결정될 수 있고, 영상 데이터의 중심에서 상측 및 하측으로 스케일링 크기의 증가량 또는 감소량은 수직 스케일링 파라미터의 값인 0.5를 기초로 결정될 수 있다. 또한, 영상 디스플레이 영역(1610)은 수평 스케일링 파라미터 0.5 및 수직 스케일링 파라미터 0.5에 따라 스케일링된 영상을 디스플레이한다. 그리고 영상 디스플레이 영역(1610)은 수평 방향 및 수직 방향으로 기울어진 스크린으로 보인다.
도 17은 본 발명의 다른 실시예에 따른 영상 처리 방법을 나타내는 플로우차트이다.
도 17을 참조하면, 신호 입력부(310)는 영상 데이터를 포함하는 신호를 수신한다(S200). 여기서, 상기 영상 데이터는 2D 영상 데이터 또는 3D 영상 데이터 중 적어도 하나를 포함할 수 있다.
제어부(360)는 스케일링 방식 설정을 요청하는 사용자 조치가 감지되었는지 여부를 확인한다(S210).
상기 사용자 조치 감지에 응답하여, 제어부(360)는 사용자 조치 감지에 응답하여 스케일링 방식을 설정하기 위한 GUI가 디스플레이되도록 제어한다(S220). 여기서 상기 디스플레이된 GUI는 도 13에 도시된 GUI(1300)일 수 있다.
제어부(360)는 스케일링 파라미터가 입력되었는지 여부를 확인한다(S230). 여기서 스케일링 파라미터는 수평 스케일링 파라미터 또는 수직 스케일링 파라미터 중 적어도 하나를 포함할 수 있다.
스케일링 파라미터가 입력된 경우에는, 제어부(360)는 입력된 스케일링 파라미터로 스케일링 파라미터를 설정한다(S240).
스케일러(340)는 영상 데이터를 제1 영상 데이터로 스케일링한다(S250). 제1 영상 데이터는 도 8 또는 도 9에 전술된 방식으로 스케일링된 것일 수 있고, 도 10 또는 11에 전술된 방식으로 스케일링된 것일 수 있으며, 도 8 또는 도 9에 전술된 방식 중 하나와 도 10 또는 도 11에 전술된 방식 중 하나가 복합된 방식으로 스케일링된 것일 수 있다. 영상 데이터가 3D 영상 데이터인 경우에는, 제1 영상 데이터는 영상 데이터의 좌안 시점 영상 데이터 및 우안 시점 영상 데이터 중 하나가 스케일링된 것일 수 있다. 또한 스케일러(340)는 단계 S240에서 설정된 스케일링 파라미터에 따라 영상 데이터를 제1 영상 데이터로 스케일링한다. 즉 스케일러(340)는 스케일링 파라미터가 지시하는 하는 방식으로 제1 영상 데이터를 스케일링한다.
스케일러(340)는 영상 데이터를 제2 영상 데이터로 스케일링한다(S260). 제2 영상 데이터는 도 8 또는 도 9에 전술된 방식으로 스케일링된 것일 수 있고, 도 10 또는 11에 전술된 방식으로 스케일링된 것일 수 있으며, 도 8 또는 도 9에 전술된 방식 중 하나와 도 10 또는 도 11에 전술된 방식 중 하나가 복합된 방식으로 스케일링된 것일 수 있다. 영상 데이터가 3D 영상 데이터인 경우에는, 제2 영상 데이터는 영상 데이터의 좌안 시점 영상 데이터 및 우안 시점 영상 데이터 중 나머지 하나가 스케일링된 것일 수 있다. 또한 스케일러(340)는 단계 S240에서 설정된 스케일링 파라미터에 따라 영상 데이터를 제2 영상 데이터로 스케일링한다. 즉 스케일러(340)는 스케일링 파라미터가 지시하는 하는 방식으로 제2 영상 데이터를 스케일링한다.
포맷터(350)는 제1 영상 데이터 및 제2 영상 데이터를 3차원 영상 프레임 포맷으로 샘플링한다(S270). 여기서 3차원 영상 프레임 포맷은 디스플레이 부(370)가 3차원 영상을 디스플레이하기 위한 포맷이다.
디스플레이 부(370)는 포맷터(350)이 출력한 3차원 영상 프레임을 디스플레이한다(S280). 여기서 3차원 영상 프레임은 안경 방식 및 무안경 방식으로 디스플레이될 수 있다.
한편, 본 발명에서 사용되는 용어(terminology)들은 본 발명에서의 기능을 고려하여 정의 내려진 용어들로써 이는 해당 분야에 종사하는 기술자의 의도 또는 관례 등에 따라 달라질 수 있으므로 그 정의는 본 발명의 전반에 걸친 내용을 토대로 내려져야 할 것이다.
이상의 본 발명은 상기에 기술된 실시 예들에 의해 한정되지 않고 당업자들에 의해 다양한 변형 및 변경을 가져올 수 있으며, 이는 첨부된 청구항에서 정의되는 본 발명의 취지와 범위에 포함된다.
본 발명은 영상 처리 기술에 관한 것으로, 영상 산업 분야에서 영상 처리 장치 개발 및 활용 등에 이용 가능하다.

Claims (20)

  1. 영상 데이터를 수신하는 단계;
    상기 수신된 영상 데이터를 제1 영상 데이터로 스케일링하는 단계; 및
    상기 수신된 영상 데이터를 제2 영상 데이터로 스케일링하는 단계를 포함하고,
    상기 제1 영상 데이터 및 상기 제2 영상 데이터는 서로 다르게 스케일링된 것을 특징으로 하는 영상 처리 방법.
  2. 제 1항에 있어서,
    상기 수신된 영상 데이터는,
    2차원 영상 데이터 또는 3차원 영상 데이터 중 적어도 하나를 포함하는 것을 특징으로 하는 영상 처리 방법.
  3. 제 1항에 있어서,
    상기 제1 영상 데이터는 상기 수신된 영상 데이터의 분할 간격들이 다르게 스케일링된 것이고, 상기 제 2 영상 데이터는 상기 수신된 영상 데이터의 분할 간격들이 동일하게 스케일링된 것을 특징으로 하는 영상 처리 방법.
  4. 제 3항에 있어서,
    상기 분할 간격은 수직 방향 또는 수평 방향 중 적어도 한 방향으로 분할된 것을 특징으로 하는 영상 처리 방법.
  5. 제 1항에 있어서,
    상기 제1 영상 데이터 또는 상기 제2 영상 데이터 중 적어도 하나는 상기 수신된 영상 데이터의 중심에서 좌우 방향 및 상하 방향 중 적어도 하나의 방향으로 스케일링 크기가 증가 또는 감소되는 방식으로 스케일링된 것을 특징으로 하는 영상 처리 방법.
  6. 제 1항에 있어서,
    상기 제1 영상 데이터 또는 상기 제2 영상 데이터 중 적어도 하나는 상기 수신된 영상 데이터의 좌측, 우측, 상측 또는 하측 중 적어도 하나에서 중심 방향으로 스케일링 크기가 증가 또는 감소되는 방식으로 스케일링된 것을 특징으로 하는 영상 처리 방법.
  7. 제 5항 또는 제 6항에 있어서,
    상기 제1 영상 데이터 및 상기 제2 영상 데이터에 대한 상기 스케일링 크기의 증가 또는 감소는 서로 다른 것을 특징으로 하는 영상 처리 방법.
  8. 제 1항에 있어서,
    상기 제1 데이터 및 상기 제2 데이터는 서로 동일 크기, 동일 해상도, 또는 동일 화면비 중 적어도 하나가 동일한 것을 특징으로 하는 영상 처리 방법.
  9. 제 1항에 있어서,
    상기 수신된 영상 데이터는 좌안 시점 영상 데이터 및 우안 시점 영상 데이터를 포함하는 3차원 영상 데이터이고,
    상기 제1 영상 데이터는 상기 좌안 시점 영상 데이터 및 상기 우안 시점 영상 데이터 중 하나로부터 스케일링된 것이고, 상기 제2 영상 데이터는 다른 하나로부터 스케일링된 것을 특징으로 하는 영상 처리 방법.
  10. 제 1항에 있어서,
    상기 제 1영상 데이터 및 상기 제 2영상 데이터를 3차원 영상 프레임 포맷으로 샘플링하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
  11. 제 1항에 있어서,
    스케일링 방식 설정을 요청하는 사용자 조치를 감지하는 단계;
    상기 사용자 조치 감지에 응답하여, 스케일링 방식을 설정하기 위한 GUI가 디스플레이되도록 제어하는 단계; 및
    상기 GUI를 통해 스케일링 파라미터를 입력 받는 단계를 더 포함하고,
    상기 수신된 영상 데이터는 상기 입력된 스케일링 파라미터에 따라 제1 영상 데이터 및 제2 영상 데이터로 스케일링되는 것을 특징으로 하는 영상 처리 방법.
  12. 제 11항에 있어서,
    상기 GUI는 상기 스케일링 파라미터에 따라 스케일링된 제1 영상 데이터 및 제2 영상 데이터를 디스플레이하는 영역을 포함하는 것을 특징으로 하는 영상 처리 방법.
  13. 영상 데이터를 수신하는 신호 입력부; 및
    상기 수신된 영상 데이터를 제1 영상 데이터 및 제2 영상 데이터로 스케일링하는 신호 처리부를 포함하고,
    상기 제1 영상 데이터 및 제2 영상 데이터는 서로 다르게 스케일링된 것을 특징으로 하는 영상 표시 장치.
  14. 제 13항에 있어서,
    상기 신호 처리부는,
    상기 수신된 영상 데이터를 디코딩하는 디코더;
    상기 디코딩된 영상 데이터를 상기 제1 영상 데이터로 스케일링하는 스케일러;
    상기 디코딩된 영상 데이터를 상기 제2 영상 데이터로 스케일링하는 제2 스케일러; 및
    상기 제1 영상 데이터 및 상기 제2 영상 데이터를 3차원 영상 프레임 포맷으로 샘플링하는 포맷터를 포함하는 것을 특징으로 하는 영상 표시 장치.
  15. 제 13항에 있어서,
    스케일링 방식 설정을 요청하는 사용자 조치를 수신하는 인터페이스부를 더 포함하고,
    상기 제어부는,
    상기 사용자 조치 감지에 응답하여, 스케일링 방식을 설정하기 위한 GUI가 디스플레이되도록 제어하고, 상기 GUI를 통해 입력된 스케일링 파라미터에 따라 상기 수신된 입체영상 데이터가 제1 영상 데이터 및 제2 영상 데이터로 스케일링되도록 제어하는 것을 특징으로 하는 영상 표시 장치.
  16. 제 15항에 있어서,
    상기 신호 처리부는,
    상기 수신된 영상 데이터 또는 저장된 영상 데이터를 상기 스케일링 파라미터에 따라 제1 영상 데이터 및 제2 영상 데이터로 스케일링하고,
    상기 GUI는 상기 스케일링된 제1 영상 데이터 및 상기 스케일링된 제2 영상 데이터를 디스플레이하는 영역을 포함하는 것을 특징으로 하는 영상 표시 장치.
  17. 제 13항에 있어서,
    상기 신호 입력부는,
    상기 영상 데이터를 포함하는 RF 신호를 수신하는 튜너, 상기 영상 데이터를 포함하는 IP 패킷을 수신하는 유선 네트워크 인터페이스부, 상기 영상 데이터를 포함하는 IP 패킷을 수신하는 무선신호 입력부 또는 외부 장치로부터 상기 영상 데이터를 수신하는 A/V(Audio/Video) 입력부 중 적어도 하나를 포함하는 것을 특징으로 하는 영상 표시 장치.
  18. 영상 데이터를 수신하는 단계;
    상기 수신된 영상 데이터를 제1 영상 데이터로 스케일링하는 단계;
    상기 수신된 영상 데이터를 제2 영상 데이터로 스케일링하는 단계; 및
    상기 스케일링된 제1 영상 데이터 및 제2 영상 데이터를 디스플레이하는 단계를 포함하고,
    상기 제1 영상 데이터 및 상기 제2 영상 데이터는 서로 다르게 스케일링된 것을 특징으로 하는 영상 처리 방법.
  19. 제 18항에 있어서,
    상기 디스플레이하는 단계는,
    상기 제1 영상 데이터 및 상기 제 2 영상 데이터를 3차원 디스플레이 방식으로 디스플레이하는 단계를 포함하는 것을 특징으로 하는 영상 처리 방법.
  20. 제 18항에 있어서,
    스케일링 방식 설정을 요청하는 사용자 조치를 감지하는 단계;
    상기 사용자 조치 감지에 응답하여, 스케일링 방식을 설정하기 위한 GUI를 디스플레이하는 단계; 및
    상기 디스플레이된 GUI를 통해 스케일링 파라미터를 입력 받는 단계를 더 포함하고,
    상기 수신된 영상 데이터는 상기 입력된 스케일링 파라미터에 따라 제1 영상 데이터 및 제2 영상 데이터로 스케일링되는 것을 특징으로 하는 영상 처리 방법.
KR1020110055181A 2010-06-08 2011-06-08 영상 처리 방법 및 그에 따른 영상 표시 장치 KR20110134327A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20100053786 2010-06-08
KR1020100053786 2010-06-08

Publications (1)

Publication Number Publication Date
KR20110134327A true KR20110134327A (ko) 2011-12-14

Family

ID=45098529

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110055181A KR20110134327A (ko) 2010-06-08 2011-06-08 영상 처리 방법 및 그에 따른 영상 표시 장치

Country Status (5)

Country Link
US (1) US20130229409A1 (ko)
EP (1) EP2582144A4 (ko)
KR (1) KR20110134327A (ko)
CN (1) CN103039082A (ko)
WO (1) WO2011155766A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014051319A1 (ko) * 2012-09-28 2014-04-03 삼성전자주식회사 깊이 영상 부호화 방법 및 장치, 깊이 영상 복호화 방법 및 장치

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9264747B2 (en) * 2012-03-11 2016-02-16 Broadcom Corporation Audio/video channel bonding configuration adaptations
US9928874B2 (en) 2014-02-05 2018-03-27 Snap Inc. Method for real-time video processing involving changing features of an object in the video
KR102192986B1 (ko) * 2014-05-23 2020-12-18 삼성전자주식회사 영상 디스플레이 장치 및 영상 디스플레이 방법
US10116901B2 (en) 2015-03-18 2018-10-30 Avatar Merger Sub II, LLC Background modification in video conferencing
KR102366231B1 (ko) 2015-10-05 2022-02-23 삼성전자 주식회사 디스플레이장치 및 그 제어방법
JP6748477B2 (ja) * 2016-04-22 2020-09-02 キヤノン株式会社 撮像装置及びその制御方法、プログラム並びに記憶媒体
CN109803138B (zh) * 2017-11-16 2020-10-09 宏达国际电子股份有限公司 自适应交错图像卷绕的方法、系统以及记录介质

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3091644B2 (ja) * 1994-08-26 2000-09-25 三洋電機株式会社 ２次元画像の３次元化方法
US6108005A (en) * 1996-08-30 2000-08-22 Space Corporation Method for producing a synthesized stereoscopic image
US6757431B2 (en) * 2000-12-19 2004-06-29 Xerox Corporation Resolution conversion for anti-aliased images using loose gray scale template matching
KR100376753B1 (ko) * 2001-06-18 2003-03-19 주식회사 에이로직스 영상 감시 시스템의 영상 출력방법
CN1457597A (zh) * 2001-06-18 2003-11-19 韩唯逻辑公司 在视频监视系统中输出视频图像的方法
US7164768B2 (en) * 2001-06-21 2007-01-16 Bose Corporation Audio signal processing
US7027054B1 (en) * 2002-08-14 2006-04-11 Avaworks, Incorporated Do-it-yourself photo realistic talking head creation system and method
US20050046615A1 (en) * 2003-08-29 2005-03-03 Han Maung W. Display method and apparatus for navigation system
KR100563738B1 (ko) * 2003-12-30 2006-03-28 주식회사 팬택앤큐리텔 텔레비젼 신호의 재생이 가능한 이동통신 단말기
EP1745440B1 (en) * 2004-05-03 2008-04-23 Nxp B.V. Graphics pipeline for rendering graphics
KR100653090B1 (ko) * 2004-07-13 2006-12-06 삼성전자주식회사 디스플레이 사이즈 조정 장치 및 그 방법
KR100888963B1 (ko) * 2004-12-06 2009-03-17 엘지전자 주식회사 영상 신호의 스케일러블 인코딩 및 디코딩 방법
CN1835601A (zh) * 2005-03-18 2006-09-20 明基电通股份有限公司 一种显示器分辨率缩放比例的方法
US8045047B2 (en) * 2005-06-23 2011-10-25 Nokia Corporation Method and apparatus for digital image processing of an image having different scaling rates
US8432588B2 (en) * 2005-10-25 2013-04-30 Hewlett-Packard Development Company, L.P. Color mapping
US9107723B2 (en) * 2005-11-22 2015-08-18 Benson Luther Hall System and method for the design, creation and installation of implant-supported dental prostheses
DE102006014903A1 (de) * 2006-03-30 2007-10-18 Siemens Ag Verfahren und Bildverarbeitungseinrichtung zur optimierten Bilddarstellung von Bildern mit unterschiedlichem Kontrast
JP4310330B2 (ja) * 2006-09-26 2009-08-05 キヤノン株式会社 表示制御装置及び表示制御方法
US7949498B2 (en) * 2006-10-02 2011-05-24 University Of Virginia Patent Foundation Method, system and computer program product for registration of multi-dimensional datasets
KR20080066408A (ko) * 2007-01-12 2008-07-16 삼성전자주식회사 3차원 영상 처리 장치 및 방법
JP4996366B2 (ja) * 2007-06-28 2012-08-08 株式会社東芝 ３次元構造データ作成装置
KR101448904B1 (ko) * 2007-08-07 2014-10-13 삼성디스플레이 주식회사 표시장치
US8629898B2 (en) * 2008-09-03 2014-01-14 Sony Corporation Stereoscopic video delivery
KR20100111082A (ko) * 2009-04-06 2010-10-14 삼성전자주식회사 3차원 영상 표시 방법 및 이를 수행하기 위한 표시 장치
CN102656620B (zh) * 2009-11-13 2017-06-09 寇平公司 用于从标准视频流驱动3d双目眼镜的方法
US20120014578A1 (en) * 2010-07-19 2012-01-19 Qview Medical, Inc. Computer Aided Detection Of Abnormalities In Volumetric Breast Ultrasound Scans And User Interface
WO2011097564A1 (en) * 2010-02-05 2011-08-11 Kopin Corporation Touch sensor for controlling eyewear
KR101738476B1 (ko) * 2010-11-17 2017-05-23 삼성디스플레이 주식회사 표시 패널의 구동 방법 및 이를 수행하는 표시 장치
KR101753262B1 (ko) * 2010-11-17 2017-07-04 삼성디스플레이 주식회사 표시 장치 및 이의 구동방법
CA2806520C (en) * 2011-01-23 2016-02-16 Extreme Reality Ltd. Methods, systems, devices and associated processing logic for generating stereoscopic images and video
US8982117B2 (en) * 2011-06-22 2015-03-17 Samsung Display Co., Ltd. Display apparatus and method of displaying three-dimensional image using same
KR101859677B1 (ko) * 2011-07-27 2018-05-21 삼성디스플레이 주식회사 표시장치

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014051319A1 (ko) * 2012-09-28 2014-04-03 삼성전자주식회사 깊이 영상 부호화 방법 및 장치, 깊이 영상 복호화 방법 및 장치

Also Published As

Publication number Publication date
CN103039082A (zh) 2013-04-10
US20130229409A1 (en) 2013-09-05
WO2011155766A2 (ko) 2011-12-15
WO2011155766A3 (ko) 2012-03-15
EP2582144A2 (en) 2013-04-17
EP2582144A4 (en) 2015-06-24

Similar Documents

Publication Publication Date Title
CN102300109B (zh) 输出音频信号的显示装置和方法
US8665321B2 (en) Image display apparatus and method for operating the same
EP2410753B1 (en) Image-processing method for a display device which outputs three-dimensional content, and display device adopting the method
KR20110134327A (ko) 영상 처리 방법 및 그에 따른 영상 표시 장치
CN102918847B (zh) 显示图像的方法和设备
CA2802668C (en) Digital receiver and method for processing caption data in the digital receiver
US20130038611A1 (en) Image conversion device
KR20110139276A (ko) 3ｄ 이미지 데이터 출력 방법 및 3ｄ 이미지 데이터 처리 장치
KR20110044573A (ko) 디스플레이장치 및 그 영상표시방법
KR20110116525A (ko) 3ｄ 오브젝트를 제공하는 영상표시장치, 그 시스템 및 그 동작 제어방법
CN102340678A (zh) 一种景深可调的立体显示装置及其景深调整方法
KR20100112940A (ko) 데이터 처리방법 및 수신 시스템
JP6377155B2 (ja) 多視点映像処理装置及びその映像処理方法
KR20110135053A (ko) 3차원 영상의 화질 개선 방법 및 그에 따른 디지털 방송 수신기
KR101728724B1 (ko) 영상 표시 방법 및 그에 따른 영상 표시 장치
KR101733488B1 (ko) 3차원 영상 표시 방법 및 그에 따른 3차원 영상 표시 장치
KR101674688B1 (ko) 입체영상 재생 장치 및 입체영상 재생 방법
KR101742993B1 (ko) 디지털 방송 수신기 및 디지털 방송 수신기에서 3ｄ 효과 제공 방법
KR20120011520A (ko) 3차원 영상 표시 방법 및 그에 따른 3차원 영상 표시 장치
KR101746538B1 (ko) 입체영상 처리 시스템, 입체영상 처리 방법 및 액정 안경
KR20110037068A (ko) 입체 영상 기기 및 화질 조절 방법
KR101913252B1 (ko) 입체영상 처리 장치 및 입체영상 디스플레이 방법
KR101746539B1 (ko) 입체영상 처리 시스템, 입체영상 처리 방법 및 안경
KR101804912B1 (ko) 입체영상 디스플레이 장치 및 입체영상 자막 디스플레이 방법
KR102014149B1 (ko) 영상표시장치, 및 그 동작방법

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid