KR20130038657A - 입체영상 처리 장치 및 입체영상 시청 안내 방법 - Google Patents

입체영상 처리 장치 및 입체영상 시청 안내 방법 Download PDF

Info

Publication number
KR20130038657A
KR20130038657A KR1020110103137A KR20110103137A KR20130038657A KR 20130038657 A KR20130038657 A KR 20130038657A KR 1020110103137 A KR1020110103137 A KR 1020110103137A KR 20110103137 A KR20110103137 A KR 20110103137A KR 20130038657 A KR20130038657 A KR 20130038657A
Authority
KR
South Korea
Prior art keywords
image
view
viewpoint
depth value
images
Prior art date
Application number
KR1020110103137A
Other languages
English (en)
Inventor
이용욱
김학태
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020110103137A priority Critical patent/KR20130038657A/ko
Publication of KR20130038657A publication Critical patent/KR20130038657A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/128—Adjusting depth or disparity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/156—Mixing image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/349—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • H04N13/351—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking for displaying simultaneously

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

입체영상 처리 장치 및 입체영상 시청 안내 방법이 개시된다. 제어부는 다시점 영상의 깊이값(Depth value)에 따라 다시점 영상에 포함된 시점 영상들 중 복수의 시점 영상들을 선택한다. 믹서는 제어부가 선택한 복수의 시점 영상에 시청을 안내하는 안내 메시지의 이미지를 믹싱한다.

Description

입체영상 처리 장치 및 입체영상 시청 안내 방법{APPARATUS FOR DISPLAYING A 3-DIMENSIONAL IMAGE AND GUIDE METHOD FOR VIEWING A 3-DIMENSIONAL IMAGE}
본 발명은 입체영상 처리 장치 및 입체영상 시청 안내 방법에 관한 것으로, 보다 상세하게는, 무 안경 방식으로 입체영상을 디스플레이하는 입체영상 처리 장치 및 입체영상 시청 안내 방법에 관한 것이다.
최근 3 차원 영상을 표현하는 디스플레이 기술이 다양한 분야에서 연구 및 활용되고 있다. 특히 3차원 영상을 디스플레이하는 기술을 활용하여, 3차원 영상을 디스플레이하는 전자 장치가 주목을 받고 있다.
3 차원 영상을 디스플레이하는 기술은 양안의 시차로 관찰자가 입체감을 느끼게 되는 양안 시차의 원리를 이용하는 것으로, 안경 방식(shutter glass method), 무안경 방식, 완전 3차원 방식 등으로 구분된다. 안경 방식에는 사용자가 안경과 같은 별도의 장비를 착용해야 하는 문제점이 있으며, 무안경 방식에는 사용자가 특정 위치에서만 3차원 영상을 볼 수 있는 문제점이 있다.
본 발명이 이루고자 하는 기술적 과제는 무안경 방식으로 디스플레이되는 입체영상을 시청하는 사용자가 스윗 스포트 영역에 위치할 수 있도록, 입체영상 시청을 안내하는 입체영상 처리 장치 및 입체영상 처리 방법을 제공하는데 있다.
상기의 기술적 과제를 달성하기 위한, 본 발명에 따른 입체영상 시청 안내 방법은, 입체영상 처리 장치가 디스플레이하는 다시점 영상(Multiview image)에 대한 시청을 안내하기 위한 방법에 있어서, 상기 다시점 영상의 깊이값(Depth value)에 따라 상기 다시점 영상에 포함된 시점 영상들 중 복수의 시점 영상들을 선택하는 단계, 및 상기 선택된 복수의 시점 영상에 시청을 안내하는 안내 메시지의 이미지를 믹싱하는 단계를 포함할 수 있다. 여기서, 상기 선택된 복수의 시점 영상 중 적어도 하나는 시청 영역(Viewing zone)의 가장자리에서 보이도록 디스플레이될 수 있다. 또한, 상기 선택된 복수의 시점 영상 중 일부는 서로 연속해서 보이도록 디스플레이될 수 있다. 또한, 상기 선택된 복수의 시점 영상 중 일부는 시청 영역(Viewing zone)의 중심을 기준으로 서로 대칭되는 위치에 디스플레이될 수 있다.
상기 다시점 영상의 깊이값은 감지된 사용자 조치에 따라 조절될 수 있다. 그리고, 상기 다시점 영상은 수신되는 것일 수 있다.
상기 입체영상 시청 안내 방법은, 수신된 좌안 시점 영상 및 우안 시점 영상을 이용하여 상기 다시점 영상을 생성하는 단계를 더 포함할 수 있다.
상기 안내 메시지는 중앙으로의 이동을 지시하는 것일 수 있다.
상기의 다른 기술적 과제를 달성하기 위한, 본 발명에 따른 입체영상 시청 안내 방법은, 다시점 입체 디스플레이(Multiview display)가 동시에 디스플레이하는 시점 비디오(View video)들에 대한 시청을 안내하기 위한 방법에 있어서, 상기 시점 비디오들의 깊이값(Depth value)에 따라 상기 시점 비디오들 중 복수의 시점 비디오들을 선택하는 단계, 및 상기 선택된 복수의 시점 비디오가 디스플레이되는 위치에 시청을 안내하는 안내 메시지를 디스플레이하는 단계를 포함할 수 있다.
상기의 또 다른 기술적 과제를 달성하기 위한, 본 발명에 따른 입체영상 처리 장치는, 다시점 영상(Multiview image)을 디스플레이하는 입체영상 처리 장치에 있어서, 상기 다시점 영상의 깊이값(Depth value)에 따라 상기 다시점 영상에 포함된 시점 영상들 중 복수의 시점 영상들을 선택하는 제어부, 및 상기 선택된 복수의 시점 영상에 시청을 안내하는 안내 메시지의 이미지를 믹싱하는 믹서를 포함할 수 있다.
상기의 또 다른 기술적 과제를 달성하기 위한, 본 발명에 따른 입체영상 처리 장치는, 다시점 비디오(Multiview video)을 디스플레이하는 입체영상 처리 장치에 있어서, 상기 다시점 비디오의 깊이값(Depth value)에 따라 상기 다시점 비디오에 포함된 시점 비디오 중에서 중 복수의 시점 비디오들을 선택하는 제어부, 및 상기 선택된 복수의 시점 비디오가 디스플레이되는 위치에 시청을 안내하는 안내 메시지를 디스플레이하는 디스플레이 장치를 포함할 수 있다.
본 발명에 따른 입체영상 처리 장치 및 입체영상 시청 안내 방법에 의하면, 다시점 영상의 깊이값의 가변량에 따라 스윗 스포트를 위한 안내 메시지를 디스플레하는 범위를 가변적으로 변경하므로, 사용자로 하여금 피로감이나 어색함이 없이 입체감을 느낄 수 있게 한다.
도 1은 본 발명에 따른 입체영상 처리 장치에 대한 바람직한 일실시예의 구성을 도시한 도면,
도 2는 다시점 영상을 생성하는 방법을 도시한 도면,
도 3은 본 발명에 따른 디스플레이 장치에 대한 바람직한 일실시예의 배치를 도시한 도면,
도 4는 본 발명에 다른 디스플레이 장치에 대한 바람직한 다른 실시예의 배치를 도시한 도면,
도 5는 액정 Lenticular의 원리를 도시한 도면,
도 6은 단위 시역 내의 시청 영역(viewing zone)과 불시청 영역(Dead Zone)을 도시한 도면,
도 7은 안내 메시지가 삽입된 시점 영상을 도시한 도면,
도 8은 깊이값(Depth value)의 변화에 따라 안내 메시지를 디스플레이하는 시점 영상들의 변화를 도시한 도면,
도 9는 깊이값(Depth value)의 변화에 따라 좌안 시점 영상과 우안 시점 영상간의 불일치를 도시한 도면,
도 10은 깊이값(Depth value)의 변화에 따라 시점 영상간의 영향을 도시한 도면,
도 11은 시청 안내 룩업 테이블에 대한 바람직한 일실시예를 도시한 도면,
도 12는 본 발명에 따른 시청 안내 방법에 대한 바람직한 일실시예의 수행과정을 도시한 도면,
도 13은 본 발명에 따른 시청 안내 방법에 대한 바람직한 다른 실시예의 수행과정을 도시한 도면,
도 14는 본 발명에 따른 시청 안내 방법에 대한 바람직한 또 다른 실시예의 수행과정을 도시한 도면,
도 15는 본 발명에 따른 시청 안내 방법에 대한 바람직한 또 다른 실시예의 수행과정을 도시한 도면, 그리고,
도 16은 함수 W(x)의 그래프를 도시한 도면이다.
이하 상기의 목적을 구체적으로 실현할 수 있는 본 발명의 바람직한 실시예를 첨부한 도면을 참조하여 설명한다. 이때 도면에 도시되고 또 이것에 의해서 설명되는 본 발명의 구성과 작용은 적어도 하나의 실시예로서 설명되는 것이며, 이것에 의해서 본 발명의 기술적 사상과 그 핵심 구성 및 작용이 제한되지는 않는다.
본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당해 기술분야에 종사하는 기술자의 의도 또는 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 함을 밝혀두고자 한다.
도 1은 본 발명에 따른 입체영상 처리 장치에 대한 바람직한 일실시예의 구성을 도시한 도면이다.
도 1을 참조하면, 본 발명에 따른 입체영상 처리 장치(100)는 튜너부(105), 복조부(110), 역다중화부(115), 네트워크 인터페이스부(120), 외부 신호 입력부(125), 비디오 디코더(130), 오디오 디코더(135), 제어부(140), 저장부(145), 버퍼(150), 믹서(155), 그래픽 프로세서(160), 영상 드라이버(170) 및 OSD(On Screen Display) 생성부(180)를 포함할 수 있다. 일부 실시예로 입체영상 처리 장치(100)는 디스플레이 장치(101)를 더 포함할 수 있다.
튜너부(105)는 안테나를 통해 수신되는 RF(Radio Frequency) 방송 신호 중 사용자에 의해 선택된 채널에 해당하는 RF 방송 신호를 선택하고, 선택된 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성 신호로 변환한다. 튜너부(105)는 ATSC(Advanced Television System Committee) 방식에 따른 단일 캐리어의 RF 방송 신호 또는 DVB(Digital Video Broadcasting) 방식에 따른 복수 캐리어의 RF 방송 신호를 수신할 수 있다. RF 방송 신호는 2시점 영상 및 다시점 영상을 포함할 수 있다. 영상은 비디오와 같은 개념으로 사용될 수 있고, 비디오에 포함된 영상 프레임으로 사용될 수 있다. 즉 다시점 영상은 다시점 비디오(multiview video)를 의미할 수 있다. 또한 다시점 영상에 포함된 시점 영상은 하나의 영상 프레임일 수 있고, 복수의 영상 프레임으로 구성된 비디오일 수 있다. 즉 상기 시점 영상은 시점 비디오(view video)일 수 있고 시점 비디오에 포함된 영상 프레임일 수 있다.
복조부(110)는 튜너부(105)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다. 일예로, 튜너부(105)에서 출력되는 디지털 IF 신호가 ATSC 방식인 경우, 복조부(110)는 8-VSB(1-Vestigial Side Band) 복조를 수행한다. 또 다른 예로, 튜너부(105)에서 출력되는 디지털 IF 신호가 DVB 방식인 경우, 복조부(110)는 COFDMA(Coded Orthogonal Frequency Division Modulation) 복조를 수행한다.
또한, 복조부(110)는 채널 복호화를 수행할 수도 있다. 이를 위해 복조부(110)는 트렐리스 디코더(Trellis Decoder), 디인터리버(De-interleaver), 및 리드 솔로먼 디코더(Reed Solomon Decoder) 등을 구비하여, 트렐리스 복호화, 디인터리빙, 및 리드 솔로먼 복호화를 수행할 수 있다.
복조부(110)는 복조 및 채널 복호화를 수행한 후 스트림 신호(TS)를 출력할 수 있다. 이때 스트림 신호는 영상 신호, 음성 신호 또는 데이터 신호가 다중화된 신호일 수 있다. 일예로, 스트림 신호는 MPEG-2 규격의 영상 신호, 돌비(Dolby) AC-3 규격의 음성 신호 등이 다중화된 MPEG-2 TS(Transport Stream)일 수 있다. 구체적으로 MPEG-2 TS는, 4 바이트(byte)의 헤더와 184 바이트의 페이로드(payload)를 포함할 수 있다.
역다중화부(115)는 복조부(110), 네트워크 인터페이스부(120) 및 외부 신호 입력부(125)로부터 스트림 신호를 수신할 수 있다. 또한 역다중화부(115)는 수신된 스트림 신호를 영상 신호, 음성 신호 및 데이터 신호로 역다중화하여 각각 비디오 디코더(130), 오디오 디코더(135) 및 제어부(140)로 출력할 수 있다.
비디오 디코더(130)는 역다중화부(115)로부터 영상 신호를 수신하고, 수신된 영상 신호를 복원하여 버퍼(150)에 저장한다. 여기서 영상 신호는 입체영상 신호를 포함할 수 있다.
오디오 디코더(135)는 역다중화부(115)로부터 영상 신호를 수신하고, 수신된 영상 신호를 복원하여 음성을 디스플레이 장치(101)로 출력한다.
네트워크 인터페이스부(120)는 네트워크 망으로부터 수신되는 패킷(packet)들을 수신하고, 네트워크 망으로 패킷을 전송한다. 즉 네트워크 인터페이스부(120)는 네트워크 망을 통해 서비스 제공 서버로부터 방송 데이터 및 영상 데이터를 전달하는 IP 패킷을 수신한다. 여기서 상기 영상 데이터는 2차원 영상 및 3차원 영상을 포함할 수 있고 3차원 영상은 2시점 영상 또는 다시점 영상일 수 있다.
네트워크 인터페이스부(120)는 IP패킷을 스트림 신호를 포함하는 경우에는, IP패킷에서 스트림 신호를 추출하여 역다중화부(115)로 출력할 수 있다.
외부 신호 입력부(125)는 외부 장치와 입체영상 처리 장치(100)를 연결할 수 있는 인터페이스를 제공할 수 있다. 여기서 외부 장치는 DVD(Digital Versatile Disk), 블루레이(Bluray), 게임기기, 켐코더, 컴퓨터(노트북) 등 다양한 종류의 영상 또는 음성 출력 장치를 의미한다. 입체영상 처리 장치(100)는 외부 신호 입력부(125)로부터 수신된 영상 신호 및 음성 신호가 디스플레이되도록 제어할 수 있고, 데이터 신호를 저장하거나 사용할 수 있다. 여기서 상기 영상 신호는 2시점 영상 또는 다시점 영상을 포함할 수 있다.
제어부(140)는 명령어를 실행하고 입체영상 처리 장치(100)와 연관된 동작을 수행한다. 예를 들면, 저장부(145)로부터 검색된 명령어를 사용하여, 제어부(140)는 입체영상 처리 장치(100)의 컴포넌트들 간의 입력 및 출력, 데이터의 수신 및 처리를 제어할 수 있다. 제어부(140)는 단일 칩, 다수의 칩, 또는 다수의 전기 부품 상에 구현될 수 있다. 예를 들어, 전용 또는 임베디드 프로세서, 단일 목적 프로세서, 컨트롤러, ASIC, 기타 등등을 비롯하여 여러 가지 아키텍처가 제어부(140)에 대해 사용될 수 있다.
제어부(140)는 운영 체제와 함께 컴퓨터 코드를 실행하고 데이터를 생성 및 사용하는 동작을 한다. 운영 체제는 일반적으로 공지되어 있으며 이에 대해 보다 상세히 기술하지 않는다. 예로서, 운영 체제는 Window 계열 OS, Unix, Linux, Palm OS, DOS, 안드로이드 및 매킨토시 등일 수 있다. 운영 체제, 다른 컴퓨터 코드 및 데이터는 제어부(140)와 연결되어 동작하는 저장부(145) 내에 존재할 수 있다.
제어부(140)는 수신된 2시점 영상을 이용하여 다시점 영상을 생성할 수 있다. 비디오 디코더(130)는 수신된 2시점 영상을 디코딩하고, 제어부(140)로 출력하거나 버퍼(150)에 저장할 수 있다. 제어부(140)는 비디오 디코더(130)로부터 수신된 2시점 영상 또는 버퍼(150)에 저장된 2시점 영상을 이용하여 다시점 영상을 생성할 수 있다. 여기서, 제어부(140)는 사전에 설정된 깊이값을 갖는 다시점 영상을 생성할 수 있다. 또한 제어부(140)는 상기 사전에 설정된 깊이값을 사용자 명령에 따라 조절할 수 있고, 상기 조절된 깊이값을 갖는 다시점 영상을 생성할 수 있다.
비디오 디코더(130)는 수신된 다시점 영상을 디코딩하고, 제어부(140)는 상기 사전에 설정되니 깊이값 또는 상기 조절된 깊이값을 갖도록 상기 디코딩된 다시점 영상의 깊이값을 변경할 수 있다.
제어부(140)는 다시점 영상의 깊이값을 기초로 수신된 다시점 영상 또는 생성된 다시점 영상에서 복수의 시점 영상을 선택하고, 선택된 시점 영상에 안내 메시지가 믹싱되도록 제어할 수 있다. 여기서 안내 메시지는 불시청 영역에 위치하는 사용자에게 시청 영역으로의 이동을 권고하는 것일 수 있다. 또한 선택된 시점 영상의 개수에 따라 안내 메시지를 디스플레이하는 가이드 라인이 변경된다.
사용자의 기호에 맞추어 입체영상의 깊이값을 임의로 변경했을 경우에는, 시청 영역 내의 크로스톡의 영향이 고려되는 스윗 스포트 영역 또한 변경되어 진다. 예를 들어, 광학적으로 주어지는 시청 영역 내에서 사용자가 입체영상의 깊이값을 작게 주면 줄 수록 스윗 스포트의 범위는 넓어지게 되고, 깊이값을 크게 주면 줄 수록 스윗 스포트의 범위는 좁아지게 된다. 본 발명은 다시점 영상의 깊이값의 가변량에 따라 스윗 스포트를 위한 안내 메시지를 디스플레하는 범위를 지시하는 가이드 라인도 가변적으로 변경하므로, 사용자로 하여금 피로감이나 어색함이 없이 입체감을 느낄 수 있게 한다.
저장부(145)는 일반적으로 입체영상 처리 장치(100)에 의해 사용되는 프로그램 코드 및 데이터를 저장하는 장소를 제공한다. 예로서, 저장부(145)는 판독 전용 메모리(ROM), 랜덤 액세스 메모리(RAM), 하드 디스크 드라이브 등으로 구현될 수 있다. 프로그램 코드 및 데이터는 분리형 저장 매체에 존재할 수 있고, 필요할 때, 입체영상 처리 장치(100) 상으로 로드 또는 설치될 수 있다. 여기서 분리형 저장 매체는 CD-ROM, PC-CARD, 메모리 카드, 플로피 디스크, 자기 테이프, 및 네트워크 컴포넌트를 포함한다. 저장부(145)는 수신된 2시점 영상을 기초로 생성된 다시점 영상 및 시청 안내 룩업 테이브를 저장할 수 있다. 상기 시청 안내 룩업 테이블은 입체영상의 깊이값이 조절될 수 있는 깊이값 레벨들을 포함하고, 안내 메시지가 표시될 시점 영상을 지시하는 시점 영상 정보, 및 상기 깊이값 레벨들 중의 하나와 상기 시점 영상 정보를 연관시키는 연관 정보를 포함할 수 있다.
또한 제어부(140)는 상기 시청 안내 룩업 테이블을 이용하여 다시점 영상에서 복수의 시점 영상을 선택할 수 있다. 즉 제어부(140)는 다시점 영상의 깊이값의 깊이값 레벨을 확인하고, 상기 시청 안내 룩업 테이블에서 연관 정보를 이용하여 확인된 레벨과 연관된 시점 영상 정보를 찾을 수 있다. 그리고 제어부(140)는 찾은 시점 영상 정보가 지시하는 시점 영상들을 안내 메시지가 디스플레이될 시점 영상들로 선택할 수 있다.
믹서(155)는 시점 영상과 안내 메시지를 믹싱한다. 여기서 시점 영상은 제어부(140)이 다시점 영상에서 선택한 것일 수 있고, 믹서(155)는 버퍼(150)에 저장된 시점 영상을 액세스할 수 있고, 액세스된 시점 영상에 안내 메지시를 믹싱할 수 있다.
그래픽 프로세서(160)는 버퍼(150)에 저장된 영상 데이터가 디스플레이되도록 디스플레이 장치(101)를 제어한다. 그래픽 프로세서(160)는 마스크 생성부(162) 및 다중화부(163)를 포함할 수 있다.
픽셀주기 산출부(161)는 다음의 수학식 1로부터 입체영상 픽셀주기 Q를 산출할 수 있다.
Figure pat00001
여기서, D는 시거리이고, d: 디스플레이 패널(410)과 입체영상 필터(420)의 간격이며, R: 입체영상 필터(420)의 패턴 주기이다.
마스크 생성부(162)는 픽셀주기 산출부(161)가 산출한 입체영상 픽셀주기 Q를 이용하여 입체영상에 대한 시점 마스크를 생성할 수 있다. 먼저, 마스크 생성부(162)는 입체영상 픽셀 주기 Q에 따라 각 서브픽셀의 소수점을 포함하는 시점 번호 Vi를 다음의 수학식 2로부터 결정할 수 있다.
Figure pat00002
여기서, i는 서브 픽셀 수평번호(0, 1, 2, … )이고, Vi o는 최적 시거리에서의 서브픽셀의 시점 번호이며, Q0는 최적 시거리에서의 입체영상 픽셀주기이고, N는 입체영상 시점 수이다.
다음으로, 마스크 생성부(162)는 서브픽셀별 시점 번호에 맞추어 시점 마스크를 다음의 수학식 3로부터 생성할 수 있다.
Figure pat00003
여기서, k는 시점 번호이고, 함수 W(k-Vi)에 대한 그래프는 도 16에 도시된다.
다중화부(163)는 마스크 생성부(162)가 생성한 시점 마스크를 이용하여 픽셀의 최종색을 결정할 수 있다. 다중화부(163)는 다음의 수학식 4로부터 최종색 MCi를 결정할 수 있다.
Figure pat00004
여기서, C(i, K)는 k시점 영상의 i서브 픽셀의 색이다.
영상 드라이버(170)는 다중화부(163)가 산출한 최종색 MCi가 디스플레이되도록 제어 신호를 디스플레이 장치(101)로 출력할 수 있다.
OSD 생성부(180)는 제어부(140)가 선택한 복수의 시점 영상들이 디스플레이되는 위치에 안내 메시지를 디스플레이하기 위한 OSD 데이터를 생성하고, 생성한 OSD 데이터를 디스플레이 장치(101)로 출력한다.
도 2는 다시점 영상을 생성하는 방법을 도시한 도면이다.
도 2를 참조하면, 제어부(140)는 수신된 2시점 영상을 이용하여 다시점 영상을 생성할 수 있다. 제어부(140)는 2시점 영상에서 깊이 맵(Depth map)을 추출하고, 추출한 깊이 맵을 이용하여 N개의 다시점 영상을 생성할 수 있다. 예를 들면, 제어부(140)는 좌안 시점 영상(210) 및 우안 시점 영상 (220)에서 깊이 맵을 추출하고, N개의 시점 영상(231 내지 239)을 생성할 수 있다. 좌안 시점 영상(210) 및 우안 시점 영상(220)은 튜너부(105), 네트워크 인터페이스부(120) 및 외부 신호 입력부(125)가 수신한 것일 수 있다.
제어부(140)는 사용자 명령을 기초로 입체영상의 깊이값을 조절할 수 있다. 즉 사용자는 입체영상의 깊이값을 설정할 수 있다.
도 3은 본 발명에 따른 디스플레이 장치에 대한 바람직한 일실시예의 배치를 도시한 도면이다.
도 3을 참조하면, 디스플레이 장치(101)는 복수의 시점 영상이 혼합된 다시점 영상(parallax images)을 표시하는 디스플레이 패널(310) 및 디스플레이 패널(310)의 전면에 배치되고, 불투과영역(321) 및 투과영역(322)이 일정 간격으로 배열되는 입체영상 필터(320)를 포함할 수 있다.
입체영상 필터(320)는 디스플레이 패널(310)의 전방에 일정한 거리를 두고 배치되고, 불투과영역(321) 및 투과영역(322)이 디스플레이 패널(310)과 나란한 방향으로 교번적으로 배열된다.
디스플레이 패널(310)이 각 서브 픽셀을 통해 다시점 영상에 포함된 시점 영상을 디스플레이하면, 시청자는 디스플레이된 시점 영상들을 입체영상 필터(320)를 통하여 보게 되고, 시청자의 좌안 및 우안은 각각 디스플레이 패널(310)에서 제공되는 시점 영상들 중 하나를 독립적으로 보게 되어, 시청자는 입체감을 느낄 수 있다.
시청자가 입체영상이 잘 볼 수 있는 지점을 스윗 스포트(Sweet Spot)라고 한다. 즉 스윗 스포트는 시점 영상들이 겹쳐 보이는 크로스 턱(Cross-talk)이 발생하지 않는 지점을 의미한다. 제4 시점 영상을 보기 위한 스윗 스포트는 지점(331)일 수 있고, 제10 시점 영상을 보기 위한 스윗 스포트는 지점(333)일 수 있다. 만일 지점(333)에 시청자의 우안이 위치하고, 지점(331)에 시청자의 좌안이 위치한 경우에는, 시청자는 우안을 통해 제10 시점 영상을 보고, 좌안을 통해 제4 시점 영상을 볼 수 있어, 제4 시점 영상과 제10 시점 영상을 통해 입체영상을 볼 수 있게 된다.
입체영상 디스플레이 장치(100)는 디스플레이 장치(101)가 될 수 있고, 또는 입체영상 필터(120)가 디스플레이 패널(110)의 배면에 배치된 입체영상 디스플레이 장치될 수 있다.
도 4는 본 발명에 다른 디스플레이 장치에 대한 바람직한 다른 실시예의 배치를 도시한 도면이다.
도 4를 참조하면, 디스플레이 장치(101)은 좌안 시점 영상(L)과 우안 시점 영상(R)이 혼합된 입체영상을 표시하는 디스플레이 패널(410) 및 다수의 렌즈를 구비한 입체영상 필터(420)를 포함할 수 있다.
입체영상 필터(420)은 디스플레이 패널(410)의 전면에 배치될 수 있다. 이때, 입체영상 필터(420)은 영상이 렌티큘라 렌즈의 초점면에 놓이도록 디스플레이 패널(410)로부터 소정거리(ℓ)만큼 이격되도록 배치될 수 있다.
입체영상 필터(420)은 액정 렌티큘라 필터(Lenticular filter)일 수 있다. 이러한 경우에, 입체영상 필터(420)에 구비된 렌즈(421), 렌즈(422), 렌즈(423), 렌즈(424) 및 렌즈(425)는 액정 렌즈일 수 있다.
도 5는 도 18은 액정 Lenticular의 원리를 도시한 도면이다.
도 5를 참조하면, 액정 렌티큘라 필터(520)는 투명전극(ITO)(521, 522) 및 투명전극 사이에 위치하는 액정(LC: Liquid Crystal)으로 구성될 수 있다. 액정 렌티큘라 필터(520)는 액정(LC, Liquid Crystal)을 통해 디스플레이 패널(510)이 방출하는 빛의 굴절을 조절하여 시점 영들이 적정한 스윗 스포트 상에 위치되게 한다. 즉 액정(LC, Liquid Crystal)은 빛을 굴절시키는 렌즈들을 형성한다. 여기서 액정 렌티큘라 필터(520)는 투명전극(ITO)으로 인가되는 전압을 조절하여 액정(LC, Liquid Crystal)의 위치, 방향 및 배치를 조절할 수 있다. 액정(LC, Liquid Crystal)의 위치, 방향 및 배치에 따라 형성되는 렌즈의 위치가 변경될 수 있고, 그에 따라 스윗 스포트는 변경될 수 있다.
도 6은 단위 시역 내의 시청 영역(viewing zone)과 불시청 영역(Dead Zone)을 도시한 도면이다.
다시점 영상은 3차원 디스플레이 장치의 물리적, 광학적 특성에 따라 해상도 저하가 되지 않고 크로스턱(crosstalk)이 감소되는 최적의 위치에 재 배열 하게 되고 다수의 사용자에게 3차원 입체감 효과를 제공한다. 각각의 사용자가 시각적 입체 효과를 얻을 수 있는 영역을 시청영역(viewing zone)으로 정의하고, 사용자의 이동에 따라 좌안 시점 영상과 우안 시점 영상이 역전되는 공간이 발생하는데, 이를 불시청 영역(Dead Zone)으로 정의한다. 불시청 영역에 머물러 있는 사용자는 좌안 시점 영상 및 우안 시점 영상의 역전으로 입체감 효과를 얻을 수 없을 뿐더로 시각적으로 어지러움증이나 불편함을 느끼게 되는 문제가 있다.
도 6은 10개의 다시점 영상을 사용할 경우 단위 시역 내의 시청 영역(viewing zone)과 불시청 영역(Dead Zone)을 도시한 것이다.
도 6을 참조하면, 디스플레이 패널(610)에 디스플레이된 시점 영상(v1 내지 v10)은 입체영상 필터(620)을 통과하여 단위 시역(630)으로 이동된다. 단위 시역(630)은 시청 영역(640)과 불시청 영역(650)으로 구분된다.
시청 영역(640)내의 공간(650) 및 공간(670)에 사용자가 머물러 있게 되면 각각의 시점 영상들이 좌안과 우안에 분리되어 사용자가 한정된 공간 내에서 움직임이 있더라도 3차원 입체 효과를 얻을 수 있다. 사용자(650)는 좌안(665)로 시점 영상(v6)을 보고, 우안(663)으로 시점 영상(v8)을 봄으로 이미지 역전 없이 시점 영상(v6) 및 시점 영상(v8)을 통해 입체감을 느낄 수 있다. 또한 사용자(670)는 좌안(675)으로 시점 영상(v3)을 보고, 우안(673)으로 시점 영상(v6)을 봄으로 이미지 역전 없이 시점 영상(v3) 및 시점 영상(v6)을 통해 입체감을 느낄 수 있다.
그러나, 사용자가 공간(680)의 위치로 이동하게 되면 우측에는 시점 영상(v1)의 영상이 좌측에는 시점 영상(v10)의 영상이 보이게 되어 좌안 시점 영상과 우안 시점 영상이 역전 현상이 발생하게 된다. 즉 사용자(680)는 좌안(685)으로 시점 영상(v10)을 보고 우안(683)으로 시점 영상(v1)을 봄으로, 좌안으로 우안 시점 영상(v10)을 보고 우안으로 좌안 시점 영상(v1)을 보게 되는 것으로, 역전 현상이 발생하게 된다.
도 7은 안내 메시지가 삽입된 시점 영상을 도시한 도면이다.
도 7을 참조하면, 입체영상 처리 장치(100)는 시점 영상(710, 720)과 함께 시청을 안내하는 안내 메시지(715, 725)를 디스플레이할 수 있다. 안내 메시지(715, 725)는 불시청 영역에 위치하는 사용자에게 시청 영역으로의 이동을 권고하는 것이 수 있다. 좌안 시점 영상(710)의 안내 메시지(715)는 중앙으로의 이동을 요청하는 내용(Move to the center)을 포함할 수 있고, 오른쪽으로의 이동을 요청하는 내용(Move to the Right)을 포함할 수 있다. 또한 우안 시점 영상(720)의 안내 메시지(725)는 중앙으로의 이동을 요청하는 내용(Move to the center)를 포함할 수 있고, 왼쪽으로의 이동을 요청하는 내용(Move to the Left)를 포함할 수 있다.
본 발명은 안내 메시지(715, 725)를 통해 사용자는 시청 영역으로 이동을 안내할 수 있고, 좌안 시점 영상과 우안 시점 영상의 역전 현상에 의하여 사용자가 느끼는 시각인 불편함을 덜어주고 안전한 입체감 효과를 사용자에게 제공할 수 있다.
안내 메시지(715, 725)는 시점 영상에 믹싱될 수 있고, 시점 영상이 디스플이되는 위치에 OSD(on screen display)로 디스플레이될 수 있다.
안내 메시지(715, 725)는 시점 영상의 상하좌우 영역 및 중앙 영역 중 임의 영역에 디스플레이될 수 있다.
도 8은 깊이값(Depth value)의 변화에 따라 안내 메시지를 디스플레이하는 시점 영상들의 변화를 도시한 도면이다.
도 8을 참조하면, 사용자가 스윗 스포트(880)에 위치한 경우에는 안내 메시지가 보이지 않는다. 사용자(880)는 좌안(885)으로 시점 영상(863)(v4)을 보고, 우안(883)(v6)으로 시점 영상(865)을 본다. 시점 영상(803) 및 시점 영상(865)에는 안내 메시지가 디스플레이되지 않는다.
스윗 스포트(880)에서 사용자가 왼쪽으로 이동하여 좌측 가이드 라인(845)을 지나게 되면, 안내 메시지가 보이게 된다. 사용자가 위치(870)에 위치한 경우에는, 좌안(871)으로 시점 영상(831)(v1)을 보게 된다. 시점 영상(831)에는 안내 메시지가 디스플레이된다. 여기서 안내 메시지는 도 7의 안내 메시지(715)일 수 있다.
불시청 영역의 시작 지점(841) 이전에 안내 메시지를 디스플레이하므로, 본 발명은 사용자가 좌측으로 이동시, 불시청 영역에 빠지기 전에 안내 메시지를 보여주어 사용자가 중앙 방향으로 이동하도록 유도 할 수 있고, 사용자가 좌안 시점 영상과 우안 시점 영상의 역전 현상을 경험하는 것을 방지할 수 있다.
스윗 스포트(880)에서 사용자가 오른쪽으로 이동하여 우측 가이드 라인(855)을 지나게 되면, 안내 메시지가 보이게 된다. 사용자가 위치(890)에 위치한 경우에는, 좌안(893)으로 시점 영상(867)(v3)을 보게 된다. 시점 영상(867)에는 안내 메시지가 디스플레이된다. 여기서 안내 메시지는 도 7의 안내 메시지(725)일 수 있다.
불시청 영역의 시작 지점(851) 이전에 안내 메시지를 디스플레이하므로, 본 발명은 사용자가 우측으로 이동시, 불시청 영역에 빠지기 전에 안내 메시지를 보여주어 사용자가 중앙 방향으로 이동하도록 유도 할 수 있고, 사용자가 좌안 시점 영상과 우안 시점 영상의 역전 현상을 경험하는 것을 방지할 수 있다.
또한 좌측 가이드 라인(845) 및 우측 가이드 라인(855)은 입체영상의 깊이값에 따라 변경될 수 있다. 입체영상의 깊이값이 클수록 좌측 가이드 라인(845) 및 우측 가이드 라인(855)은 중앙으로 이동될 수 있다. 입체영상의 깊이값이 작을수록 좌측 가이드 라인(845)은 좌측으로 이동될 수 있고, 우측 가이드 라인(855)은 우측으로 이동될 수 있다. 본 발명은 입체영상의 깊이값에 따라 좌측 가이드 라인(845) 및 우측 가이드 라인(855)을 이동시킴으로, 크로스턱이 없는 스윗 스포트 영역으로 사용자의 이동을 유도할 수 있어 사용자의 입체감을 증대시킬 수 있고, 사용자의 피로감을 감소시킬 수 있다.
도 9는 깊이값(Depth value)의 변화에 따라 좌안 시점 영상과 우안 시점 영상간의 불일치를 도시한 도면이다.
도 9를 참조하면, 디폴트 깊이값(915)을 갖는 입체영상의 좌안 시점 영상(911)과 우안 시점 영상(913) 간의 불일치(disparity)(910)는 디폴트 불일치로 정의된다. 여기서 디폴트 깊이값(915)은 수신된 입체영상의 깊이값일 수 있다.
입체영상의 깊이값이 디폴트 깊이값(915)에서 감소 방향(901)으로 깊이값이 조절된 경우에는, 조절된 깊이값을 갖는 입체영상의 좌안 시점 영상(921)과 우안 시점 영상(923) 간의 불일치는 감소하게 된다. 즉 좌안 시점 영상(921)과 우안 시점 영상(923) 간의 불일치는 디폴트 불일치보다 감소된 값(920)이 된다.
입체영상의 깊이값이 디폴트 깊이값(915)에서 증가 방향(903)으로 깊이값이 조절된 경우에는, 조절된 깊이값을 갖는 입체영상의 좌안 시점 영상(931)과 우안 시점 영상(933) 간의 불일치는 증가하게 된다. 즉 좌안 시점 영상(931)과 우안 시점 영상(933) 간의 불일치는 디폴트 불일치보다 증가된 값(930)이 된다.
입체영상의 깊이값이 커질 수록 시점 영상간의 불일치가 커지므로, 크로스톡에 의한 영향이 많아지기 때문에 시청 영역 내부의 스윗 스포트의 범위는 작아지게 된다. 반대로, 입체영상의 깊이값이 작아질 수록 시점 영상간의 불일치 작아짐으로, 크로스톡에 의한 영향이 작아지기 때문에 시청 영역 내부의 스윗 스포트의 범위는 커지게 된다.
도 10은 깊이값(Depth value)의 변화에 따라 시점 영상간의 영향을 도시한 도면이다.
도 10을 참조하면, 입체영상의 깊이값이 디폴트 깊이값일 경우(1040)에는, 사용자의 좌안(1021)에 보이는 시점 영상(v4)에 시점 영상(v4)의 좌측에 위치하는 시점 영상(v3) 부터 시점 영상(v8)까지의 시점 영상들이 영향을 미치게 된다. 또한 사용자의 우안(1023)에 보이는 시점 영상(v6)에 시점 영상(v6)의 우측에 위치하는 시점 영상(v7) 부터 시점 영상(v2)까지의 시점 영상들이 영상을 미치게 된다.
입체영상의 깊이값이 디폴트 깊이값 보다 더 큰 깊이값으로 조절된 경우(1050)에는, 사용자의 좌안(1021)에 보이는 시점 영상(v4)에 시점 영상(v4)의 좌측에 위치하는 시점 영상(v3) 부터 시점 영상(v7)까지의 시점 영상들이 영향을 미치게 된다. 또한 사용자의 우안(1023)에 보이는 시점 영상(v6)에 시점 영상(v6)의 우측에 위치하는 시점 영상(v7) 부터 시점 영상(v3)까지의 시점 영상들이 영상을 미치게 된다. 즉 입체영상의 깊이값이 증가하면 입체영상의 불일치가 증가되고 이에 따라 시점 영상 간의 영향이 커지므로, 크로스톡 가능성이 더 커지게 되어 스윗 스포트의 범위가 작아지게 된다.
입체영상의 깊이값이 디폴트 깊이값 보다 더 작은 깊이값으로 조절된 경우(1030)에는, 사용자의 좌안(1021)에 보이는 시점 영상(v4)에 시점 영상(v4)의 좌측에 위치하는 시점 영상(v3) 부터 시점 영상(v9)까지의 시점 영상들이 영향을 미치게 된다. 또한 사용자의 우안(1023)에 보이는 시점 영상(v6)에 시점 영상(v6)의 우측에 위치하는 시점 영상(v7) 부터 시점 영상(v1)까지의 시점 영상들이 영상을 미치게 된다. 즉 입체영상의 깊이값이 감소하면 입체영상의 불일치가 감소되고 이에 따라 시점 영상 간의 영향이 작아지므로, 크로스톡 가능성이 작아지게 되어 스윗 스포트의 범위가 커지게 된다.
도 11은 시청 안내 룩업 테이블에 대한 바람직한 일실시예를 도시한 도면이다.
도 11을 참조하면, 시청 안내 룩업 테이블(1100)은 입체영상의 깊이값이 조절될 수 있는 깊이값 레벨로 0, 1, 2, 3, 4를 포함한다. 여기서 레벨 1은 디폴트 레벨로 입체영상의 깊이값을 디폴트 깊이값을 유지하는 레벨일 수 있고, 레벨 0은 입체영상의 깊이값이 0인 레벨일 수 있다. 그리고, 1 보다 큰 레벨일 수록 입체영상의 깊이값은 커진다. 즉 레벨 2는 입체영상이 디폴트 깊이값보다 더 큰 깊이값을 갖고, 레벨 5는 입체영상이 레벨 3의 깊이값보다 더 큰 깊이값을 갖는다.
시청 안내 룩어 테이블(1100)의 각 행에는 하나의 깊이값 레벨과 메시지가 표시될 시점 영상을 지시하는 시점 영상 정보를 포함할 수 있다. 예를 들면, 2행은 깊이값 레벨로 레벨 1을 포함하고, 시점 영상 정보로 시점 영상 1을 지시하는 정보를 포함한다. 여기서 2행을 나타내는 정보가 깊이값 레벨과 시점 영상 정보를 연관시키는 연관 정보일 수 있다. 또한 특정 깊이값 레벨에서 메시지가 표시된 시점 영상이 없는 경우에는, 상기 특정 깊이값 레벨을 포함하는 행은 시점 영상 정보를 포함하지 않을 수 있다. 예를 들면, 1행은 깊이값 레벨로 레벨 0을 포함하고, 시점 영상 정보를 포함하지 않는다.
도 12는 본 발명에 따른 시청 안내 방법에 대한 바람직한 일실시예의 수행과정을 도시한 도면이다.
도 12를 참조하면, 제어부(140)는 다시점 영상에서 복수의 시점 영상들을 선택한다(S100). 제어부(140)는 다시점 영상의 깊이값에 따라 상기 복수의 시점 영상들을 선택할 수 있다. 또한 제어부(140)는 시청 안내 룩업 테이블을 이용하여 복수의 시점 영상을 선택할 수 있다. 여기서 다시점 영상은 수신된 것일 수 있고, 생성된 것일 수 있으며, 시청 안내 룩업 테이블은 도 11에 도시된 시청 안내 룩업 테이블(1100)일 수 있다. 그리고, 다시점 영상의 깊이값은 사용자 조치에 따라 조절된 는 것일 수 있다.
믹서(155)는 선택된 복수의 시점 영상들에 안내 메시지를 믹싱한다(S110). 여기서 안내 메시지는 도 7의 안내 메시지(715) 또는 안내 메시지(725)일 수 있다.
디스플레이 장치(101)는 다시점 영상을 디스플레이한다(S120). 여기서 다시점 영상은 도 8에서 도시된 시점 영상(v1 내지 v10)들이 디스플레이 되는 방식으로 디스플레이될 수 있다. 또한 디스플레이된 다시점 영상은 단계 S110에서 안내 메시지가 믹싱된 시점 영상들을 포함할 수 있다. 또한 안내 메시지가 믹싱된 시점 영상 중 적어도 하나는 시청 영역의 가장 자리에서 보이도록 디스플레이될 수 있고, 안내 메시지가 믹싱된 시점 영상 중 일부는 서로 연속해서 보이도록 디스플레이될 수 있다. 또한 안내 메시지가 믹싱된 시점 영상 중 일부는 시청 영역의 중심을 기준으로 서로 대칭되는 위치에 디스플레이될 수 있다.
도 13은 본 발명에 따른 시청 안내 방법에 대한 바람직한 다른 실시예의 수행과정을 도시한 도면이다.
도 13을 참조하면, 제어부(140)는 다시점 영상에서 복수의 시점 영상들을 선택한다(S200). 제어부(140)는 다시점 영상의 깊이값에 따라 상기 복수의 시점 영상들을 선택할 수 있다. 또한 제어부(140)는 시청 안내 룩업 테이블을 이용하여 복수의 시점 영상을 선택할 수 있다. 여기서 다시점 영상은 수신된 것일 수 있고, 생성된 것일 수 있으며, 시청 안내 룩업 테이블은 도 11에 도시된 시청 안내 룩업 테이블(1100)일 수 있다. 그리고, 다시점 영상의 깊이값은 사용자 조치에 따라 조절된 는 것일 수 있다.
제어부(140)는 선택된 복수의 시점 영상들이 디스플레이되는 위치를 확인한다(S210). 예를 들어, 시점 영상(v1)과 시점 영상(v10)가 선택된 경우에는, 제어부(140)는 도 6의 디스플레이 패널(610) 상에서 시점 영상(v1)과 시점 영상(v10)가 디스플레이되는 위치를 확인한다.
OSD 생성부(180)는 선택된 복수의 시점 영상들이 디스플레이되는 위치에 아내 메시지를 디스플레이하기 위한 OSD 데이터를 생성한다(S220). 여기서 안내 메시지는 도 7의 안내 메시지(715) 또는 안내 메시지(725)일 수 있다.
디스플레이 장치(101)는 다시점 영상 및 생성된 OSD 데이터를 디스플레이한다(S30). 상기 다시점 영상은 도 8에서 도시된 시점 영상(v1 내지 v10)들이 디스플레이 되는 방식으로 디스플레이될 수 있다. 상기 ODS 데이터의 디스플레이가 위치하는 시점 영상 중 적어도 하나는 시청 영역의 가장 자리에서 보이도록 디스플레이될 수 있고, 상기 ODS 데이터의 디스플레이가 위치하는 시점 영상 중 일부는 서로 연속해서 보이도록 디스플레이될 수 있다. 또한 상기 ODS 데이터의 디스플레이가 위치하는 시점 영상 중 일부는 시청 영역의 중심을 기준으로 서로 대칭되는 위치에 디스플레이될 수 있다.
도 14는 본 발명에 따른 시청 안내 방법에 대한 바람직한 또 다른 실시예의 수행과정을 도시한 도면이다.
도 14를 참조하면, 입체영상 처리 장치(100)는 다시점 영상을 수신한다(S300). 여기서, 튜너부(105), 네트워크 인터페이스부(120) 및 외부 신호 입력부(125)는 중 적어도 하나가 상기 다시점 영상을 수신할 수 있다. 튜너부(105)를 통해 수신된 다시점 영상은 복조부(110)에서 복조되고, 역다중화부(115)에서 역다중화되어, 비디오 디코더(130)로 입력될 수 있다. 네트워크 인터페이스부(120) 및 외부 신호 입력부(125)를 통해 수신된 다시점 영상은 비디오 디코더(130)로 입력되거나, 제어부(140) 및 역다중화부(115)를 중 적어도 하나를 통해 비디오 디코더(130)로 입력될 수 있다.
비디오 디코더(130)는 수신된 다시점 영상을 디코딩한다(S310).
제어부(140)는 사전에 설정된 깊이값에 따라 디코딩된 다시점 영상의 깊이값을 조절한다(S320). 여기서 제어부(140)는 사용자 조치에 따라 상기 사전에 설정된 깊이값을 조절할 수 있고 조절된 깊이값에 따라 디코딩된 다시점 영상의 깊이값을 조절할 수 있다.
제어부(140)는 다시점 영상 중 복수의 시점 영상을 선택한다(S330). 여기서, 제어부(140)는 다시점 영상의 깊이값에 따라 상기 복수의 시점 영상들을 선택할 수 있다. 또한 제어부(140)는 시청 안내 룩업 테이블을 이용하여 복수의 시점 영상을 선택할 수 있다. 여기서 시청 안내 룩업 테이블은 도 11에 도시된 시청 안내 룩업 테이블(1100)일 수 있다.
믹서(155)는 선택된 복수의 시점 영상에 안내 메시지를 디스플레이하는 이미지를 믹싱한다(S340). 여기서 안내 메시지는 도 7의 안내 메시지(715) 또는 안내 메시지(725)일 수 있다.
디스플레이 장치(101)는 다시점 영상을 디스플레이한다(S350). 여기서 다시점 영상은 도 8에서 전술된 방식으로 디스플레이될 수 있다. 또한 디스플레이된 다시점 영상은 단계 S340에서 안내 메시지가 믹싱된 시점 영상들을 포함할 수 있다. 또한 안내 메시지가 믹싱된 시점 영상 중 적어도 하나는 시청 영역의 가장 자리에서 보이도록 디스플레이될 수 있고, 안내 메시지가 믹싱된 시점 영상 중 일부는 서로 연속해서 보이도록 디스플레이될 수 있다. 또한 안내 메시지가 믹싱된 시점 영상 중 일부는 시청 영역의 중심을 기준으로 서로 대칭되는 위치에 디스플레이될 수 있다.
도 15는 본 발명에 따른 시청 안내 방법에 대한 바람직한 또 다른 실시예의 수행과정을 도시한 도면이다.
도 15를 참조하면, 입체영상 처리 장치(100)는 2시점 영상을 수신한다(S400). 여기서, 튜너부(105), 네트워크 인터페이스부(120) 및 외부 신호 입력부(125)는 중 적어도 하나가 상기 2시점 영상을 수신할 수 있다. 튜너부(105)를 통해 수신된 2시점 영상은 복조부(110)에서 복조되고, 역다중화부(115)에서 역다중화되어, 비디오 디코더(130)로 입력될 수 있다. 네트워크 인터페이스부(120) 및 외부 신호 입력부(125)를 통해 수신된 2시점 영상은 비디오 디코더(130)로 입력되거나, 제어부(140) 및 역다중화부(115)를 중 적어도 하나를 통해 비디오 디코더(130)로 입력될 수 있다.
비디오 디코더(130)는 2시점 영상을 디코딩한다(S410).
제어부(140)는 디코딩된 2시점 영상을 이용하여 다시점 영상을 생성한다(S420). 여기서 제어부(140)는 사전에 설정된 깊이값을 갖는 다시점 영상을 생성할 수 있다. 제어부(140)는 사용자 조치에 따라 상기 사전에 설정된 깊이값을 조절할 수 있다.
제어부(140)는 생성된 다시점 영상 중 복수의 시점 영상을 선택한다(S430). 여기서, 제어부(140)는 다시점 영상의 깊이값에 따라 상기 복수의 시점 영상들을 선택할 수 있다. 또한 제어부(140)는 시청 안내 룩업 테이블을 이용하여 복수의 시점 영상을 선택할 수 있다. 여기서, 시청 안내 룩업 테이블은 도 11에 도시된 시청 안내 룩업 테이블(1100)일 수 있다.
믹서(155)는 선택된 복수의 시점 영상에 안내 메시지를 디스플레이하는 이미지를 믹싱한다(S440). 여기서 안내 메시지는 도 7의 안내 메시지(715) 또는 안내 메시지(725)일 수 있다.
디스플레이 장치(101)는 다시점 영상을 디스플레이한다(S450). 여기서 다시점 영상은 도 8에서 전술된 방식으로 디스플레이될 수 있다. 또한 디스플레이된 다시점 영상은 단계 S440에서 안내 메시지가 믹싱된 시점 영상들을 포함할 수 있다. 또한 안내 메시지가 믹싱된 시점 영상 중 적어도 하나는 시청 영역의 가장 자리에서 보이도록 디스플레이될 수 있고, 안내 메시지가 믹싱된 시점 영상 중 일부는 서로 연속해서 보이도록 디스플레이될 수 있다. 또한 안내 메시지가 믹싱된 시점 영상 중 일부는 시청 영역의 중심을 기준으로 서로 대칭되는 위치에 디스플레이될 수 있다.
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 장치에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 장치에 분산되어 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
이상에서 본 발명의 바람직한 실시예에 대해 도시하고 설명하였으나, 본 발명은 상술한 특정의 바람직한 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능한 것은 물론이고, 그와 같은 변경은 청구범위 기재의 범위 내에 있게 된다.

Claims (11)

  1. 입체영상 처리 장치가 디스플레이하는 다시점 영상(Multiview image)에 대한 시청을 안내하기 위한 방법에 있어서,
    상기 다시점 영상의 깊이값(Depth value)에 따라 상기 다시점 영상에 포함된 시점 영상들 중 복수의 시점 영상들을 선택하는 단계; 및
    상기 선택된 복수의 시점 영상에 시청을 안내하는 안내 메시지의 이미지를 믹싱하는 단계를 포함하는 것을 특징으로 하는 입체영상 시청 안내 방법.
  2. 제 1항에 있어서,
    상기 선택된 복수의 시점 영상 중 적어도 하나는 시청 영역(Viewing zone)의 가장자리에서 보이도록 디스플레이되는 것을 특징으로 하는 입체영상 시청 안내 방법.
  3. 제 1항에 있어서,
    상기 선택된 복수의 시점 영상 중 일부는 서로 연속해서 보이도록 디스플레이되는 것을 특징으로 하는 것을 특징으로 하는 입체영상 시청 안내 방법.
  4. 제 1항에 있어서,
    상기 선택된 복수의 시점 영상 중 일부는 시청 영역(Viewing zone)의 중심을 기준으로 서로 대칭되는 위치에 디스플레이되는 것을 특징으로 하는 입체영상 시청 안내 방법.
  5. 제 1항에 있어서,
    상기 다시점 영상의 깊이값은 감지된 사용자 조치에 따라 조절되는 것을 특징으로 하는 입체영상 시청 안내 방법.
  6. 제 1항에 있어서,
    상기 다시점 영상은 수신된 것을 특징으로 하는 입체영상 시청 안내 방법.
  7. 제 1항에 있어서,
    수신된 좌안 시점 영상 및 우안 시점 영상을 이용하여 상기 다시점 영상을 생성하는 단계를 더 포함하는 것을 특징으로 하는 입체영상 시청 안내 방법.
  8. 제 1항에 있어서,
    상기 안내 메시지는 중앙으로의 이동을 지시하는 것을 특징으로 하는 입체영상 시청 안내 방법.
  9. 다시점 입체 디스플레이(Multiview display)가 동시에 디스플레이하는 시점 비디오(View video)들에 대한 시청을 안내하기 위한 방법에 있어서,
    상기 시점 비디오들의 깊이값(Depth value)에 따라 상기 시점 비디오들 중 복수의 시점 비디오들을 선택하는 단계; 및
    상기 선택된 복수의 시점 비디오가 디스플레이되는 위치에 시청을 안내하는 안내 메시지를 디스플레이하는 단계를 포함하는 것을 특징으로 하는 입체영상 시청 안내 방법.
  10. 다시점 영상(Multiview image)을 디스플레이하는 입체영상 처리 장치에 있어서,
    상기 다시점 영상의 깊이값(Depth value)에 따라 상기 다시점 영상에 포함된 시점 영상들 중 복수의 시점 영상들을 선택하는 제어부; 및
    상기 선택된 복수의 시점 영상에 시청을 안내하는 안내 메시지의 이미지를 믹싱하는 믹서를 포함하는 것을 특징으로 하는 입체영상 처리 장치.
  11. 다시점 비디오(Multiview video)을 디스플레이하는 입체영상 처리 장치에 있어서,
    상기 다시점 비디오의 깊이값(Depth value)에 따라 상기 다시점 비디오에 포함된 시점 비디오 중에서 중 복수의 시점 비디오들을 선택하는 제어부; 및
    상기 선택된 복수의 시점 비디오가 디스플레이되는 위치에 시청을 안내하는 안내 메시지를 디스플레이하는 디스플레이 장치를 포함하는 것을 특징으로 하는 입체영상 처리 장치.
KR1020110103137A 2011-10-10 2011-10-10 입체영상 처리 장치 및 입체영상 시청 안내 방법 KR20130038657A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110103137A KR20130038657A (ko) 2011-10-10 2011-10-10 입체영상 처리 장치 및 입체영상 시청 안내 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110103137A KR20130038657A (ko) 2011-10-10 2011-10-10 입체영상 처리 장치 및 입체영상 시청 안내 방법

Publications (1)

Publication Number Publication Date
KR20130038657A true KR20130038657A (ko) 2013-04-18

Family

ID=48439135

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110103137A KR20130038657A (ko) 2011-10-10 2011-10-10 입체영상 처리 장치 및 입체영상 시청 안내 방법

Country Status (1)

Country Link
KR (1) KR20130038657A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150118325A (ko) * 2014-04-14 2015-10-22 삼성전자주식회사 다시점 영상 디스플레이 장치 및 디스플레이 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150118325A (ko) * 2014-04-14 2015-10-22 삼성전자주식회사 다시점 영상 디스플레이 장치 및 디스플레이 방법

Similar Documents

Publication Publication Date Title
KR101695819B1 (ko) 입체영상 디스플레이 장치 및 입체영상 디스플레이 방법
US8488869B2 (en) Image processing method and apparatus
KR102076598B1 (ko) 디스플레이 장치 및 그의 다시점 영상 디스플레이 방법
US10694173B2 (en) Multiview image display apparatus and control method thereof
KR102121389B1 (ko) 무안경 3d 디스플레이 장치 및 그 제어 방법
EP2413610B1 (en) Method and apparatus for displaying a 3-dimensional image
US20110293240A1 (en) Method and system for transmitting over a video interface and for compositing 3d video and 3d overlays
KR20120014433A (ko) 입체영상 디스플레이 시스템, 입체영상 디스플레이 장치 및 입체영상 디스플레이 방법, 그리고 위치 추적 장치
EP3182702B1 (en) Multiview image display device and control method therefor
CN103339949A (zh) 发送/接收数字广播信号的方法和设备
KR101867815B1 (ko) 입체영상 처리 장치 및 입체영상의 시역 거리를 조절하기 위한 방법
CN106559662B (zh) 多视图图像显示设备及其控制方法
JP6377155B2 (ja) 多視点映像処理装置及びその映像処理方法
KR20130038657A (ko) 입체영상 처리 장치 및 입체영상 시청 안내 방법
KR101980275B1 (ko) 다시점 영상 디스플레이 장치 및 디스플레이 방법
US20120154383A1 (en) Image processing apparatus and image processing method
US20120154554A1 (en) Video signal processing apparatus, processing method, and video display apparatus
JP5050094B2 (ja) 映像処理装置及び映像処理方法
JP2013545184A (ja) ３次元画像にグラフィックオブジェクトを散りばめる３次元画像生成方法及びこれに用いられる表示装置
TWI499279B (zh) 影像處理裝置及其方法
JP2012205285A (ja) 映像信号処理装置及び映像信号処理方法
JP5355758B2 (ja) 映像処理装置及び映像処理方法
KR101746538B1 (ko) 입체영상 처리 시스템, 입체영상 처리 방법 및 액정 안경
Zinger et al. iGLANCE project: free-viewpoint 3D video
KR20120015666A (ko) 입체영상 재생 장치 및 입체영상 재생 방법

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination