KR20120067879A - 삼차원 영상 표시 장치 및 그 표시 방법 - Google Patents

삼차원 영상 표시 장치 및 그 표시 방법 Download PDF

Info

Publication number
KR20120067879A
KR20120067879A KR1020100129520A KR20100129520A KR20120067879A KR 20120067879 A KR20120067879 A KR 20120067879A KR 1020100129520 A KR1020100129520 A KR 1020100129520A KR 20100129520 A KR20100129520 A KR 20100129520A KR 20120067879 A KR20120067879 A KR 20120067879A
Authority
KR
South Korea
Prior art keywords
image
control information
dimensional
depth
depth value
Prior art date
Application number
KR1020100129520A
Other languages
English (en)
Inventor
김낙우
윤심권
이병탁
고재상
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020100129520A priority Critical patent/KR20120067879A/ko
Priority to JP2011273468A priority patent/JP2012130008A/ja
Priority to US13/326,853 priority patent/US20120154531A1/en
Publication of KR20120067879A publication Critical patent/KR20120067879A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/128Adjusting depth or disparity

Abstract

본 발명은 좌안으로 입력되는 제1 영상과 우안으로 입력되는 제2 영상을 제공하는 삼차원 영상 표시장치에 있어서, 제어정보를 입력받는 제어정보 취득장치; 및 상기 제어정보 취득장치로부터 전달되는 상기 제어정보를 키(Key)로 하여 상기 제1 영상과 제2 영상간에 존재하는 양안시차를 제어하는 삼차원 방송 수신장치;를 포함하는 것을 특징으로 하는 삼차원 영상 표시장치를 제공한다.
본 발명에 따르면, 제어정보 취득장치에 의해 얻어진 사용자와 삼차원 영상 표시장치 사이의 거리 또는 사용자의 기호 등을 고려해 삼차원 영상을 재구성하게 되므로 사용자가 최적의 깊이감을 느낄 수 있는 삼차원 영상을 제공할 수 있게 된다.

Description

삼차원 영상 표시 장치 및 그 표시 방법{Apparatus and method for offering 3D video processing, rendering, and displaying}
본 발명은 삼차원 영상 표시 장치 및 그 표시 방법에 관한 것이다. 보다 상세하게는 삼차원 영상 표시 장치에서 디스플레이 되는 삼차원 영상을 시청 환경에 따라 변환시키는 삼차원 영상 표시 장치 및 그 처리 방법에 관한 것이다.
최근 삼차원 영상기술 및 방송기술이 비약적으로 발전하면서 극장 뿐만 아니라 일반 가정 내에서도 TV를 사용해 삼차원의 실감 영상을 시청할 수 있는 삼차원 실감 방송에 대한 다양한 서비스가 계획되고 있다.
일반 가정에까지 삼차원 실감 영상을 공급하는 방법으로는 방대한 용량의 삼차원 영상 콘텐츠의 저장이 가능한 블루레이 디스크와 같은 저장 장치를 통한 방법과, 공중파나 위성방송 또는 케이블 TV 사업자를 통해 삼차원 콘텐츠를 전송받는 방법을 들 수 있다.
이때, 시청자가 재생되는 삼차원 영상으로부터 느끼는 깊이감이 정확하면 정확할수록 시청자는 더욱 명확한 현실감을 얻을 수 있게 된다.
그러나, 삼차원 콘텐츠를 수신받는 시청자의 시청 환경은 일률적일 수 없으므로 삼차원 영상의 깊이감이 맞지 않게 되는 문제가 있다. 즉, 최초 촬영된 삼차원 영상은 다양한 크기와 해상도를 갖는 삼차원 영상 표시 장치에서 재생될 수 밖에 없으므로 깊이감이 최초 촬영된 상태로 유지될 수 없고 화면에 일그러짐이 발생되는 문제점이 있다.
또한, 시청자가 느끼는 깊이감에는 개인차가 존재할 수 밖에 없으며, 삼차원 영상의 깊이감에 영향을 미치게 되는 시청자와 삼차원 영상 표시 장치 사이의 거리 또한 일률적일 수 없으므로 모든 시청자에게 통일된 깊이감을 제공하는 것은 현실적으로 불가능한 문제점이 있다.
한편, 극장용으로 제작된 삼차원 콘텐츠를 일반 가정에서 시청하기 위해서는 극장용 삼차원 콘텐츠를 일반 가정용 삼차원 영상 표시 장치에 적합하도록 삼차원 영상을 재가공하는 것이 필요하였는바 막대한 비용 및 비효율성이 초래되는 문제가 있다.
본 발명은 상기한 문제점을 해결하기 위해 안출된 것으로서, 삼차원 영상 표시 장치에서 디스플레이되는 삼차원 영상을 시청 환경에 따라 변환시킴으로써 사용자가 최적의 깊이감을 느낄 수 있도록 하는 삼차원 영상 표시장치 및 그 표시방법을 제공하는 것을 목적으로 한다.
본 발명은 상기한 목적을 달성하기 위해 안출된 것으로서, 좌안으로 입력되는 제1 영상과 우안으로 입력되는 제2 영상을 제공하는 삼차원 영상 표시장치에 있어서, 제어정보를 입력받는 제어정보 취득장치; 및 상기 제어정보 취득장치로부터 전달되는 상기 제어정보를 키(Key)로 하여 상기 제1 영상과 제2 영상간에 존재하는 양안시차를 제어하는 삼차원 방송 수신장치;를 포함하는 것을 특징으로 하는 삼차원 영상 표시장치를 제공한다.
바람직하게는 상기 삼차원 방송 수신 장치는 삼차원 비디오 포맷 형태의 미가공데이터를 입력받아 상기 제1 영상과 제2 영상으로 분할하는 영상분할부; 상기 제1 영상과 제2 영상에서 전경 객체를 배경 객체와 분할시키는 객체분할부; 및 상기 제어정보를 키로 하여 상기 제1 영상과 제2 영상의 대응되는 전경 객체 및 배경 객체 간의 양안시차를 제어하는 영상합성부;를 포함하는 것을 특징으로 한다.
바람직하게는 상기 삼차원 방송 수신장치는, 상기 전경 객체 및 배경 객체에 대한 깊이값 정보 테이블이 저장된 데이터베이스; 및 상기 제어정보를 상기 데이터베이스에 저장된 깊이값 정보 매칭테이블과 대비하여 상기 제어정보에 매칭되는 깊이값을 검색하는 외부신호처리부;를 더 포함하는 것을 특징으로 한다.
이때, 상기 깊이값은 상기 대응되는 객체들 사이에서 독립적으로 산출되며, 상기 영상합성부는 상기 독립적으로 산출된 차이값을 입력받아 상기 각 객체 영상의 깊이값을 개별적으로 제어하는 것이 바람직하다.
상기 영상합성부는, 상기 각 객체 영상의 깊이값을 제어하는 깊이조정부와, 상기 각 객체의 색상을 균일하게 보정하는 색상조정부와, 상기 색상조정부에서 출력되는 영상이 일정 해상도 이상이 되도록 픽셀 및 라인을 보정하는 선예처리부를 포함하는 것이 바람직하다.
상기 제어정보 취득장치는 적외선 카메라, 웹캠 또는 리모트 컨트롤러 중 적어도 하나 이상일 수 있다. 또한 본 발명에 따른 삼차원 영상 표시장치는 포인팅 수단을 더 포함할 수도 있다.
또한 본 발명은 삼차원 비디오 포맷 형태의 미가공데이터를 입력받아 좌안으로 입력되는 제1 영상과 우안으로 입력되는 제2 영상으로 분할하는 제 1 단계; 상기 제1 영상과 제2 영상간의 색도 또는 계조 차이를 소정 범위 이내로 조절하는 제 2 단계; 상기 제1 영상과 제2 영상에서 전경 객체를 배경 객체와 분할시키는 제3 단계; 상기 전경 개체 및 배경 객체에 대하여 삼차원 영상의 깊이조절값을 산출하는 제 4 단계; 및 상기 산출된 깊이조절값에 따라 상기 전경 객체와 배경 객체 영상의 깊이값을 조절하여 삼차원 영상을 재구성하는 제 5 단계;를 포함하는 것을 특징으로 하는 삼차원 영상 표시방법을 제공한다.
상기 제 4 단계의 깊이조절값은 사용자와의 거리에 따라 기설정된 표준 양안시차에서 실제 사용자와의 거리로부터 산출된 개별 양안시차를 차감하여 산출되는 것이 바람직하다.
본 발명에 따른 삼차원 영상 표시방법은 상기 재구성된 삼차원 영상이 소정의 해상도를 갖도록 상기 재구성된 삼차원 영상의 픽셀 및 라인을 보정하는 단계를 더 포함하는 것이 바람직하다.
본 발명에서는 제어정보 취득장치에 의해 얻어진 제어정보를 이용해서 삼차원 영상을 재구성하게 되므로 사용자가 최적의 깊이감을 느낄 수 있는 삼차원 영상을 제공할 수 있게 된다.
도 1은 본 발명의 바람직한 실시예에 따른 삼차원 영상 표시장치를 포함하는 삼차원 영상 방송 시스템의 구성도이다.
도 2는 본 발명의 바람직한 실시예에 따른 삼차원 방송 수신장치의 구성도이다.
도 3은 본 발명의 바람직한 실시예에 따른 영상합성부의 구성도이다.
도 4는 본 발명의 바람직한 실시예에 따른 삼차원 영상 처리 방법을 도시한 순서도이다.
도 5는 본 발명의 바람직한 실시예에 따른 삼차원 영상 처리 방법을 도시한 순서도이다.
도 6은 본 발명의 바람직한 실시예에 따른 양안 영상의 객체 분할을 도시한 개념도이다.
이하의 실시예들은 본 발명의 구성요소들과 특징들을 소정 형태로 결합한 것들이다. 각 구성요소 또는 특징은 별도의 명시적 언급이 없는 한 선택적인 것으로 고려될 수 있다. 각 구성요소 또는 특징은 다른 구성요소나 특징과 결합되지 않은 형태로 실시될 수 있다. 또한, 일부 구성요소들 및/또는 특징들을 결합하여 본 발명의 실시예를 구성할 수도 있다. 본 발명의 실시예들에서 설명되는 동작들의 순서는 변경될 수 있다. 어느 실시예의 일부 구성이나 특징은 다른 실시예에 포함될 수 있고, 또는 다른 실시예의 대응하는 구성 또는 특징과 교체될 수 있다.
본 발명의 실시예들은 다양한 수단을 통해 구현될 수 있다. 예를 들어, 본 발명의 실시예들은 하드웨어, 펌웨어(firmware), 소프트웨어 또는 그것들의 결합 등에 의해 구현될 수 있다.
하드웨어에 의한 구현의 경우, 본 발명의 실시예들에 따른 방법은 하나 또는 그 이상의 ASICs(application specific integrated circuits), DSPs(digital signal processors), DSPDs(digital signal processing devices), PLDs(programmable logic devices), FPGAs(field programmable gate arrays), 프로세서, 콘트롤러, 마이크로 콘트롤러, 마이크로 프로세서 등에 의해 구현될 수 있다.
펌웨어나 소프트웨어에 의한 구현의 경우, 본 발명의 실시예들에 따른 방법은 이상에서 설명된 기능 또는 동작들을 수행하는 모듈, 절차 또는 함수 등의 형태로 구현될 수 있다. 소프트웨어 코드는 메모리 유닛에 저장되어 프로세서에 의해 구동될 수 있다. 상기 메모리 유닛은 상기 프로세서 내부 또는 외부에 위치하여, 이미 공지된 다양한 수단에 의해 상기 프로세서와 데이터를 주고 받을 수 있다.
명세서 전체에서, 어떤 부분이 다른 부분과 “연결”되어 있다고 할 때, 이는 직접적으로 연결되어 있는 경우뿐만 아니라, 그 중간에 다른 소자를 사이에 두고 전기적으로 연결되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 포함한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있다는 것을 의미한다.
또한, 본 명세서에서 기재한 모듈(module)이란 용어는 특정한 기능이나 동작을 처리하는 하나의 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현할 수 있다.
이하의 설명에서 사용되는 특정(特定) 용어들은 본 발명의 이해를 돕기 위해서 제공된 것이며, 이러한 특정 용어의 사용은 본 발명의 기술적 사상을 벗어나지 않는 범위에서 다른 형태로 변경될 수 있다.
도 1은 본 발명의 바람직한 실시예에 따른 삼차원 영상 표시장치를 포함하는 삼차원 영상 방송 시스템의 구성도이다. 도 1에 도시된 바와 같이 본 발명에 따른 삼차원 영상 표시장치를 포함하는 방송시스템은 삼차원 방송 공급장치(12), 방송 송신부(13), 방송/통신망(14), 방송 수신부(15) 및 삼차원 디스플레이 장치(18)를 포함한다. 제어정보 취득장치(17)는 본 발명의 바람직한 실시예에 의해 삼차원 영상의 깊이감을 조절하는데 필요한 주변정보를 취득하기 위한 것으로서, 도 2의 삼차원 방송 수신장치(16)를 설명하는 과정에서 보다 상세히 설명하도록 한다.
획득된 삼차원 콘텐츠(11)는 삼차원 방송 공급장치에 의해 영상 전송에 적합한 형태로 전처리 및 부호화 된다. 부호화된 삼차원 콘텐츠는 방송 송신부(13)를 거치면서 패킷 다중화 처리가 된 후 유선 또는 무선 형태의 방송/통신망(14)을 통해 송신된다. 방송/통신망(14)을 거쳐 방송 수신부(15)에 수신된 삼차원 콘텐츠는 다시 역다중화 과정을 거치게 된다. 역다중화된 삼차원 콘텐츠는 삼차원 방송 수신장치(16)로 전달된다.
도 2는 본 발명의 바람직한 실시예에 따른 삼차원 방송 수신장치(16)의 구성도이다. 삼차원 방송 수신장치(16)는 수신된 삼차원 콘텐츠(11) 영상을 재구성하여 삼차원 영상의 깊이값을 최적화 하기 위한 것이다.
삼차원 방송 수신장치(16)에서는 제어정보 취득장치(17)로부터 전달받는 제어정보를 키(Key)로 하여 좌안으로 입력되는 제1 영상과 우안으로 입력되는 제2 영상간에 존재하는 시차를 제어하여 삼차원 영상의 깊이값을 최적화하게 된다.
도 2에 도시된 바와 같이 삼차원 방송 수신장치(16)는 복호화부(21), 영상분할부(22), 객체분할부(23), 영상합성부(24), 영상렌더링부(25), 외부신호처리부(26) 및 데이터베이스(27)를 포함한다.
한편, 본 발명에 따른 삼차원 방송 수신장치(16)는 포인팅 수단(미도시)을 더 포함할 수도 있다. 이때, 포인팅 수단이란 유선 또는 무선으로 연결되는 마우스와 같이 디스플레이된 삼차원 영상에 대하여 특정 위치를 지정할 수 있는 수단을 의미한다. 포인팅 수단을 사용한 특정 위치 지정 방법에 대해서는 이하에서 도 6의 바람직할 실시예를 설명하는 과정에서 보다 상세히 설명하도록 한다.
복호화부(21)는 방송 수신부(15)에서 역다중화된 데이터로부터 미가공데이터(Raw Data)를 추출하기 위한 것이다. 즉, 방송 수신부(15)에서 역다중화된 데이터에서 다중화 또는 역다중화를 위해 미가공데이터 사이에 삽입된 신호처리용 데이터들을 제거한다. 따라서, 복호화부(21)에서 출력된 미가공데이터는 side-by-side 또는 top-and-bottom과 같이 좌안용 영상데이터와 우안용 영상데이터가 교번적으로 배치된 삼차원 비디오 포맷이거나, 양안식 영상 각각을 이차원 영상의 크기에 맞게 따로 전송하는 dual mode 기반의 삼차원 비디오 포맷일 수 있다.
영상분할부(22)는 복호화부(21)에서 출력되는 양안식 미가공데이터를 삼차원식 데이터로 분할하는 것이다. 따라서, 영상분할부(22)에서 출력되는 삼차원 데이터는 좌/우 패턴 또는 상/하 패턴 등의 적절한 삼차원 포맷에 맞도록 분할된다. 예를 들어, 영상분할부는 양안식 미가공 데이터를 좌안으로 입력되는 제1영상과 우안으로 입력되는 제2영상으로 분할시킬 수 있다.
객체분할부(23)는 영상분할부(22)로부터 출력되는 영상 내에서 객체 영역을 따로 분할하게 된다. 즉, 도 6의 영상분할부에서 출력되는 제1영상(42)과 제2영상(43)에 대해 각각 a~f, a'~f'과 같은 객체를 분할하여 지정하게 된다. 도 6의 경우 b와 d는 배경 객체이며, a,c,e 및 f는 전경 객체이다. 이때 대응되는 객체, 예를 들어 전경 객체인 a와 a' 사이에 양안시차가 존재할 경우 사용자는 그 양안시차에 의해 깊이감을 느끼게 되므로 양안시차를 조절하게 되면 사용자는 최적의 깊이감을 느낄 수 있게 된다.
양안시차의 조절 정도는 제어정보 취득장치(17)에 의해 얻는 제어정보에 따라 달라지게 된다. 즉, 제어정보란 양안시차의 정도를 조절하는데 사용되는 외부 입력정보로서, 본 발명에 따른 삼차원 영상 표시장치에서는 제어정보를 사용하여 사용자에 따라 최적화된 양안시차의 정도, 즉 삼차원 영상의 깊이감을 조절하게 된다.
제어정보로는 웹캠 또는 적외선 카메라 등을 통해 얻게 되는 사용자의 신체적인 특징과 같은 사용자 인식 정보, 사용자와 삼차원 영상 간의 거리 정보, 디스플레이 화면의 크기와 같은 디스플레이 장치 정보 등을 들 수 있다. 이때, 사용자 인식 정보, 거리 정보 또는 디스플레이 장치 정보 등은 사용자가 리모트 컨트롤러 등을 사용해서 직접 원하는 값으로 설정할 수도 있음은 물론이다. 이하에서는, 설명의 편의를 위하여 사용자가 리모트 컨트롤러로 직접 입력하는 정보는 사용자 입력정보로 호칭하도록 한다.
한편, 사용자가 리모트 컨트롤러 자신에게 맞도록 제어정보를 프리셋팅 (presetting) 할 수도 있다. 즉, 제어정보 취득장치(17)는 취득된 사용자 인식정보를 활용하여 프리셋팅된 제어정보가 존재하는지를 확인하고, 만일 프리셋팅된 제어정보가 존재할 경우에는 해당 제어정보를 활용하게 된다.
이때, 웹캠 또는 적외선 카메라와 같은 거리측정 장치는 셋톱박스(STB) 형태로 구성되거나 삼차원 TV 내에 구성될 수 있음은 물론이다.
웹캠, 적외선 카메라 또는 리모트 컨트롤러와 같은 제어정보 취득장치(17)를 통해 입력되는 제어정보는 외부신호처리부(26)로 전달되며, 외부신호처리부(26)는 입력받은 제어정보를 데이터베이스(27)에 미리 저장되어 있는 깊이값 정보 매칭테이블과 대비하여 최적의 깊이감을 느낄 수 있는 삼차원 영상의 깊이, 즉 앞서 설명한 전경 객체 및 배경 객체의 깊이값을 검색하고, 검색된 깊이값을 사용하여 깊이 조절값을 산출하게 된다. 즉, 깊이 조절값이란 검색된 깊이값을 이용하여 산출하게 되는 보상치를 의미한다.
표 1은 사용자 기호에 따른 깊이값 정보 매칭테이블의 예시이며, 표 2는 디스플레이 장치의 화면 크기에 따른 깊이값 정보 매칭 테이블의 예시이다. 표 1 또는 표 2에 나타난 바와 같이, 시청거리에 따라 최적의 깊이감을 주는 깊이값이 달라지는 것을 알 수 있으며, 한편 동일한 시청거리에 위치한 사용자라도 기호에 따라 최적의 깊이감을 주는 깊이값이 달라지는 것을 알 수 있다.
시청거리 표준 깊이값 홍길동1 홍길동2 홍길동3
1~2m 1 1 1.2 1.1
2~3m 2 2 2.3 2.2
... ... ... ... ...
8~10m 8 8 8.2 8.2
... ... ... ... ...
시청거리 표준 깊이값 32인치 47인치 52인치
1~2m 1 1.32 1.47 1.52
2~3m 2 2.32 2.47 2.52
... ... ... ... ...
8~10m 8 8.32 8.47 8.52
... ... ... ... ...
거리 측정장치에 의해 삼차원 영상과 사용자간의 거리, 즉 시청거리가 측정이 되면, 측정된 시청거리에 대응되는 표준 깊이값을 알 수 있게 된다. 삼차원 영상의 재구성 과정은 일단 각 개체에 대해 그 깊이값을 표준 깊이값으로 설정한 이후, 개인적인 기호 또는 디스플레이 화면의 크기를 고려하여 표준 깊이값에 대해 조절을 하는 과정으로 진행되는 것이 바람직하다. 이때, 사용자는 리모트 컨트롤러 등을 통해 자신이 원하는 정도로 조절을 할 수 있음은 물론이다.
외부신호처리부(26)가 정보 매칭 테이블로부터 검색한 깊이조정값은 영상합성부(24)로 전달되며, 영상합성부(24)에서는 전달받은 깊이조정값을 이용하여 각 객체의 깊이값을 재조종 하게 된다.
도 3은 본 발명의 바람직한 실시예에 따른 영상합성부의 구성도이다. 도 3에 도시된 바와 같이 영상합성부(24)는 깊이조정부(31), 색상조정부(32), 선예처리부(33) 및 영상재구성부(34)를 포함한다. 즉, 영상재구성부(34)는 각 객체에 대하여 깊이 조정, 색상 조정 및 선예 처리를 진행한 후 재구성된 삼차원 영상을 출력한다.
깊이조정부(31)는 외부신호처리부(26)로부터 입력받은 깊이조정값을 이용하여 각 객체의 깊이값을 결정한다. 이때, 각 객체의 깊이값은 서로 독립적이며 서로 다른 값으로 조정될 수 있음을 물론이며, 나아가 객체별로 깊이값을 선형적 또는 비선형적으로 조정하는 것도 가능함은 물론이다.
색상조정부(32)는 객체의 색상을 균일하게 보정하기 위한 것으로서, 대응되는 객체의 색을 균일하게 유지시키기 위한 것이다.
선예처리부(33)는 영상재구성부(34)에서 최종적으로 재구성된 영상의 각 픽셀 및 라인의 흐트러짐을 원영상과 같이 바로잡기 위한 것이다.
영상재구성부(34)에서 재구성된 삼차원 영상은 영상렌더링부(25)를 거쳐 삼차원 디스플레이 장치에 표시된다.
도 4와 도 5는 본 발명의 바람직한 실시예에 따른 삼차원 영상 처리 방법을 도시한 순서도이다.
방송/통신망(14)을 거쳐 수신된 삼차원 콘텐츠는(S1, S2) 방송 수신부(15)에서 역다중화를 거치게 되며, 역다중화된 삼차원 콘텐츠는 삼차원 방송 수신장치(16)에서 복호화 되며(S3), 그 결과 삼차원 비디오 포맷 형태의 미가공데이터가 생성된다. 이후, 미가공데이터에 대해 깊이값 조절이 필요한지 여부를 일단 판단하게 된다(S4). 즉, 제어정보 취득장치(17)를 통해 얻은 제어정보를 키(Key)로 하여 파악한 삼차원 영상의 깊이값이 사전 설정된 수준에 적합할 경우에는 깊이값의 조절이 수행되지 않는다. 깊이값의 조절이 불필요한 경우에는 영상합성부(24)의 선예처리부(33)에서 선예도가 조정된 후 삼차원 디스플레이 장치에 의해 재생된다(S12 내지 S16).
그러나, 깊이값의 조절이 필요한 경우에는 다음의 과정에 의해 깊이값을 조절하게 된다.
우선, 입력받은 삼차원 비디오 포멧 형태의 미가공데이터를 좌안으로 입력되는 제1 영상과 우안으로 입력되는 제2 영상으로 분할되며(S5), 분할된 제1 영상과 제2 영상간의 색도 또는 계조 차이를 기절성된 소정 범위 이내로 조절하게 된다(S6). 색도 또는 계조의 조절이 완료되면, 외부신호처리부(26)에서 산출된 깊이 조절값에 따라 깊이값의 조절이 수행된다(S9) 이후 색상 및 줄맞춤(선예도)을 거쳐 삼차원 영상을 재구성하고 삼차원 디스플레이장치를 통해 재생되는 과정은 삼차원 영상 표시장치에서의 재생과정과 동일하므로 보다 상세한 설명은 생략하도록 한다.
이때, 깊이조절값은 사용자와의 거리에 따라 기설정된 표준 양안시차에서 실제 사용자와의 거리로부터 산출된 개별 양안시차를 차감하여 산출하는 것이 일반적이다.
도 6은 본 발명의 바람직한 실시예에 따른 양안 영상의 객체 분할을 도시한 개념도이다. 앞서 살펴본 바와 같이 본 발명에서는 분할된 객체(a 내자 f, a' 내지 f')에 대해 개별적으로 깊이값을 조절하게 된다.
한편, 본 발명에 따른 삼차원 방송 수신장치(16)는 마우스와 같은 포인팅 수단(미도시)을 포함할 수도 있는데, 포인팅 수단을 사용하여 특정 객체를 포인팅 할 경우에는 마우스 포인터와 같은 인식자가 포인팅되는 객체와 동일한 깊이값을 갖는 것이 바람직하다. 이 경우 디스플레이 화면에 도시되는 마우스 포인터 또한 하나의 별도 객체로 인식되어 포인팅되는 객체와 동일한 깊이값을 갖도록 재생되는바, 그 재생방법은 삼차원 영상의 재생방법과 동일하므로 보다 상세한 마우스 포인터의 재생방법에 대해서는 보다 상세한 설명은 생략하기로 한다.
본 발명은 본 발명의 정신 및 필수적 특징을 벗어나지 않는 범위에서 다른 특정한 형태로 구체화될 수 있다. 따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다. 또한, 특허청구범위에서 명시적인 인용 관계가 있지 않은 청구항들을 결합하여 실시예를 구성하거나 출원 후의 보정에 의해 새로운 청구항으로 포함시킬 수 있다.
11 : 삼차원 콘텐츠 12 : 삼차원 방송 공급장치
13: 방송 송신부 14 : 방송/통신망
15 : 방송 수신부 16 : 삼차원 방송 수신장치
17 : 제어정보 취득 장치 18 : 삼차원 영상 표시장치
19 : 사용자 21 : 복호화부
22 : 영상분할부 23 : 객체분할부
24 : 영상합성부 25 : 영상렌더링부
26 : 외부신호처리부` 27 : 데이터베이스
31 : 깊이조정부 32 : 색상조정부
33 : 선예처리부 34 : 영상재구성부
35 : 영상렌더링부 41 : 마우스 포인터
42 : 좌안 영상 43 : 우안 영상

Claims (10)

  1. 좌안으로 입력되는 제1 영상과 우안으로 입력되는 제2 영상을 제공하는 삼차원 영상 표시장치에 있어서,
    제어정보를 입력받는 제어정보 취득장치; 및
    상기 제어정보 취득장치로부터 전달되는 상기 제어정보를 키(Key)로 하여 상기 제1 영상과 제2 영상간에 존재하는 양안시차를 제어하는 삼차원 방송 수신장치;를 포함하는 것을 특징으로 하는 삼차원 영상 표시장치.
  2. 제 1 항에 있어서,
    상기 삼차원 방송 수신 장치는 삼차원 비디오 포맷 형태의 미가공데이터를 입력받아 상기 제1 영상과 제2 영상으로 분할하는 영상분할부;
    상기 제1 영상과 제2 영상에서 전경 객체를 배경 객체와 분할시키는 객체분할부; 및
    상기 제어정보를 키로 하여 상기 제1 영상과 제2 영상의 대응되는 전경 객체 및 배경 객체 간의 양안시차를 제어하는 영상합성부;를 포함하는 것을 특징으로 하는 삼차원 영상 표시장치.
  3. 제 2 항에 있어서,
    상기 삼차원 방송 수신장치는,
    상기 전경 객체 및 배경 객체에 대한 깊이값 정보 테이블이 저장된 데이터베이스; 및
    상기 제어정보를 상기 데이터베이스에 저장된 깊이값 정보 매칭테이블과 대비하여 상기 제어정보에 매칭되는 깊이값을 검색하는 외부신호처리부;를 더 포함하는 것을 특징으로 하는 삼차원 영상 표시장치.
  4. 제 3 항에 있어서,
    상기 깊이값은 상기 대응되는 객체들 사이에서 독립적으로 산출되며, 상기 영상합성부는 상기 독립적으로 산출된 차이값을 입력받아 상기 각 객체 영상의 깊이값을 개별적으로 제어하는 것을 특징으로 하는 삼차원 영상 표시장치.
  5. 제 4 항에 있어서,
    상기 영상합성부는,
    상기 각 객체 영상의 깊이값을 제어하는 깊이조정부;
    상기 각 객체의 색상을 균일하게 보정하는 색상조정부; 및
    상기 색상조정부에서 출력되는 영상이 일정 해상도 이상이 되도록 픽셀 및 라인을 보정하는 선예처리부;를 포함하는 것을 특징으로 하는 삼차원 영상 표시장치.
  6. 제 1 항에 있어서,
    상기 제어정보 취득장치는 적외선 카메라, 웹캠 또는 리모트 컨트롤러 중 적어도 하나 이상인 것을 특징으로 하는 삼차원 영상 표시장치.
  7. 제 1 항에 있어서,
    포인팅 수단을 더 포함하는 것을 특징으로 하는 삼차원 영상 표시장치.
  8. 삼차원 비디오 포맷 형태의 미가공데이터를 입력받아 좌안으로 입력되는 제1 영상과 우안으로 입력되는 제2 영상으로 분할하는 제 1 단계;
    상기 제1 영상과 제2 영상간의 색도 또는 계조 차이를 소정 범위 이내로 조절하는 제 2 단계;
    상기 제1 영상과 제2 영상에서 전경 객체를 배경 객체와 분할시키는 제3 단계;
    상기 전경 개체 및 배경 객체에 대하여 삼차원 영상의 깊이조절값을 산출하는 제 4 단계; 및
    상기 산출된 깊이조절값에 따라 상기 전경 객체와 배경 객체 영상의 깊이값을 조절하여 삼차원 영상을 재구성하는 제 5 단계;를 포함하는 것을 특징으로 하는 삼차원 영상 표시방법.
  9. 제 8 항에 있어서,
    상기 제 4 단계의 깊이조절값은 사용자와의 거리에 따라 기설정된 표준 양안시차에서 실제 사용자와의 거리로부터 산출된 개별 양안시차를 차감하여 산출하는 것을 특징으로 하는 삼차원 영상 표시방법.
  10. 제 8 항에 있어서,
    상기 재구성된 삼차원 영상이 소정의 해상도를 갖도록 상기 재구성된 삼차원 영상의 픽셀 및 라인을 보정하는 단계를 더 포함하는 것을 특징으로 하는 삼차원 영상 표시방법.

KR1020100129520A 2010-12-16 2010-12-16 삼차원 영상 표시 장치 및 그 표시 방법 KR20120067879A (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020100129520A KR20120067879A (ko) 2010-12-16 2010-12-16 삼차원 영상 표시 장치 및 그 표시 방법
JP2011273468A JP2012130008A (ja) 2010-12-16 2011-12-14 三次元映像表示装置およびその表示方法
US13/326,853 US20120154531A1 (en) 2010-12-16 2011-12-15 Apparatus and method for offering 3d video processing, rendering, and displaying

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100129520A KR20120067879A (ko) 2010-12-16 2010-12-16 삼차원 영상 표시 장치 및 그 표시 방법

Publications (1)

Publication Number Publication Date
KR20120067879A true KR20120067879A (ko) 2012-06-26

Family

ID=46233856

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100129520A KR20120067879A (ko) 2010-12-16 2010-12-16 삼차원 영상 표시 장치 및 그 표시 방법

Country Status (3)

Country Link
US (1) US20120154531A1 (ko)
JP (1) JP2012130008A (ko)
KR (1) KR20120067879A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014051319A1 (ko) * 2012-09-28 2014-04-03 삼성전자주식회사 깊이 영상 부호화 방법 및 장치, 깊이 영상 복호화 방법 및 장치
WO2014142409A1 (ko) * 2013-03-12 2014-09-18 엘지전자 주식회사 영상 표시장치 및 그것의 비디오 스트림 제어방법
KR101470693B1 (ko) * 2012-07-31 2014-12-08 엘지디스플레이 주식회사 영상 데이터 처리 방법과 이를 이용한 입체 영상 표시장치

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9106908B2 (en) * 2012-07-30 2015-08-11 Intel Corporation Video communication with three dimensional perception
US9979952B2 (en) 2013-12-13 2018-05-22 Htc Corporation Method of creating a parallax video from a still image

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2848291B2 (ja) * 1995-08-24 1999-01-20 松下電器産業株式会社 立体tv装置
JPH11164329A (ja) * 1997-11-27 1999-06-18 Toshiba Corp 立体映像表示装置
JP2003209858A (ja) * 2002-01-17 2003-07-25 Canon Inc 立体画像生成方法及び記録媒体
JP2004246725A (ja) * 2003-02-14 2004-09-02 Sharp Corp 表示装置、表示制御方法、表示制御プログラム及びこれを記録したコンピュータ読み取り可能な記録媒体
JP2010045584A (ja) * 2008-08-12 2010-02-25 Sony Corp 立体画像補正装置、立体画像補正方法、立体画像表示装置、立体画像再生装置、立体画像提供システム、プログラム及び記録媒体
JP4737573B2 (ja) * 2009-02-05 2011-08-03 富士フイルム株式会社 3次元画像出力装置及び方法
JP2012518317A (ja) * 2009-02-18 2012-08-09 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 3d観察者メタデータの転送
EP2268045A1 (en) * 2009-06-26 2010-12-29 Lg Electronics Inc. Image display apparatus and method for operating the same
WO2011033423A1 (en) * 2009-09-16 2011-03-24 Koninklijke Philips Electronics N.V. 3d screen size compensation
KR101636537B1 (ko) * 2009-11-12 2016-07-06 삼성전자주식회사 깊이감 인지 향상을 위한 영상 처리 장치 및 방법

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101470693B1 (ko) * 2012-07-31 2014-12-08 엘지디스플레이 주식회사 영상 데이터 처리 방법과 이를 이용한 입체 영상 표시장치
WO2014051319A1 (ko) * 2012-09-28 2014-04-03 삼성전자주식회사 깊이 영상 부호화 방법 및 장치, 깊이 영상 복호화 방법 및 장치
WO2014142409A1 (ko) * 2013-03-12 2014-09-18 엘지전자 주식회사 영상 표시장치 및 그것의 비디오 스트림 제어방법

Also Published As

Publication number Publication date
US20120154531A1 (en) 2012-06-21
JP2012130008A (ja) 2012-07-05

Similar Documents

Publication Publication Date Title
US8860785B2 (en) Stereo 3D video support in computing devices
KR101622690B1 (ko) 3차원 영상신호 처리 방법과 이를 구현하기 위한 영상표시 장치
CN103329547B (zh) 伪3d强迫透视方法及设备
US20100309287A1 (en) 3D Data Representation, Conveyance, and Use
US20120162367A1 (en) Apparatus and method for converting image display mode
US20110255003A1 (en) Method and apparatus for presenting on-screen graphics in a frame-compatible 3d format
US8958628B2 (en) Image scaling
US8817070B2 (en) Method and apparatus for generating three-dimensional content based on user preferences
CN102300109A (zh) 输出音频信号的显示装置和方法
KR101287786B1 (ko) 3차원 입체영상 표시 방법 및 그를 이용한 영상 표시 장치
JPWO2004071102A1 (ja) 立体視用映像提供方法及び立体映像表示装置
WO2010092823A1 (ja) 表示制御装置
CA2845780C (en) Digital broadcast signal processing method and device
CN107925840A (zh) 用于处理与视频图像相关联的音频信号的方法和装置
KR20120067879A (ko) 삼차원 영상 표시 장치 및 그 표시 방법
CA2841192C (en) Method and apparatus for processing a 3d service
KR20100046485A (ko) 관심 영역 깊이 정보 기반의 3차원 방송 서비스 방법 및 장치
WO2012026342A1 (ja) 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
US9667951B2 (en) Three-dimensional television calibration
US20130215225A1 (en) Display apparatus and method for adjusting three-dimensional effects
US20110304690A1 (en) Image processing apparatus and control method of the same
US20140282678A1 (en) Method for Enabling 3DTV on Legacy STB
US20110084974A1 (en) Image providing method, and image providing apparatus, display apparatus, and image providing system using the same
KR101733488B1 (ko) 3차원 영상 표시 방법 및 그에 따른 3차원 영상 표시 장치
US8736602B2 (en) Display apparatus and control method thereof

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid