KR20120067879A - 삼차원 영상 표시 장치 및 그 표시 방법 - Google Patents
삼차원 영상 표시 장치 및 그 표시 방법 Download PDFInfo
- Publication number
- KR20120067879A KR20120067879A KR1020100129520A KR20100129520A KR20120067879A KR 20120067879 A KR20120067879 A KR 20120067879A KR 1020100129520 A KR1020100129520 A KR 1020100129520A KR 20100129520 A KR20100129520 A KR 20100129520A KR 20120067879 A KR20120067879 A KR 20120067879A
- Authority
- KR
- South Korea
- Prior art keywords
- image
- control information
- dimensional
- depth
- depth value
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/128—Adjusting depth or disparity
Abstract
본 발명은 좌안으로 입력되는 제1 영상과 우안으로 입력되는 제2 영상을 제공하는 삼차원 영상 표시장치에 있어서, 제어정보를 입력받는 제어정보 취득장치; 및 상기 제어정보 취득장치로부터 전달되는 상기 제어정보를 키(Key)로 하여 상기 제1 영상과 제2 영상간에 존재하는 양안시차를 제어하는 삼차원 방송 수신장치;를 포함하는 것을 특징으로 하는 삼차원 영상 표시장치를 제공한다.
본 발명에 따르면, 제어정보 취득장치에 의해 얻어진 사용자와 삼차원 영상 표시장치 사이의 거리 또는 사용자의 기호 등을 고려해 삼차원 영상을 재구성하게 되므로 사용자가 최적의 깊이감을 느낄 수 있는 삼차원 영상을 제공할 수 있게 된다.
본 발명에 따르면, 제어정보 취득장치에 의해 얻어진 사용자와 삼차원 영상 표시장치 사이의 거리 또는 사용자의 기호 등을 고려해 삼차원 영상을 재구성하게 되므로 사용자가 최적의 깊이감을 느낄 수 있는 삼차원 영상을 제공할 수 있게 된다.
Description
본 발명은 삼차원 영상 표시 장치 및 그 표시 방법에 관한 것이다. 보다 상세하게는 삼차원 영상 표시 장치에서 디스플레이 되는 삼차원 영상을 시청 환경에 따라 변환시키는 삼차원 영상 표시 장치 및 그 처리 방법에 관한 것이다.
최근 삼차원 영상기술 및 방송기술이 비약적으로 발전하면서 극장 뿐만 아니라 일반 가정 내에서도 TV를 사용해 삼차원의 실감 영상을 시청할 수 있는 삼차원 실감 방송에 대한 다양한 서비스가 계획되고 있다.
일반 가정에까지 삼차원 실감 영상을 공급하는 방법으로는 방대한 용량의 삼차원 영상 콘텐츠의 저장이 가능한 블루레이 디스크와 같은 저장 장치를 통한 방법과, 공중파나 위성방송 또는 케이블 TV 사업자를 통해 삼차원 콘텐츠를 전송받는 방법을 들 수 있다.
이때, 시청자가 재생되는 삼차원 영상으로부터 느끼는 깊이감이 정확하면 정확할수록 시청자는 더욱 명확한 현실감을 얻을 수 있게 된다.
그러나, 삼차원 콘텐츠를 수신받는 시청자의 시청 환경은 일률적일 수 없으므로 삼차원 영상의 깊이감이 맞지 않게 되는 문제가 있다. 즉, 최초 촬영된 삼차원 영상은 다양한 크기와 해상도를 갖는 삼차원 영상 표시 장치에서 재생될 수 밖에 없으므로 깊이감이 최초 촬영된 상태로 유지될 수 없고 화면에 일그러짐이 발생되는 문제점이 있다.
또한, 시청자가 느끼는 깊이감에는 개인차가 존재할 수 밖에 없으며, 삼차원 영상의 깊이감에 영향을 미치게 되는 시청자와 삼차원 영상 표시 장치 사이의 거리 또한 일률적일 수 없으므로 모든 시청자에게 통일된 깊이감을 제공하는 것은 현실적으로 불가능한 문제점이 있다.
한편, 극장용으로 제작된 삼차원 콘텐츠를 일반 가정에서 시청하기 위해서는 극장용 삼차원 콘텐츠를 일반 가정용 삼차원 영상 표시 장치에 적합하도록 삼차원 영상을 재가공하는 것이 필요하였는바 막대한 비용 및 비효율성이 초래되는 문제가 있다.
본 발명은 상기한 문제점을 해결하기 위해 안출된 것으로서, 삼차원 영상 표시 장치에서 디스플레이되는 삼차원 영상을 시청 환경에 따라 변환시킴으로써 사용자가 최적의 깊이감을 느낄 수 있도록 하는 삼차원 영상 표시장치 및 그 표시방법을 제공하는 것을 목적으로 한다.
본 발명은 상기한 목적을 달성하기 위해 안출된 것으로서, 좌안으로 입력되는 제1 영상과 우안으로 입력되는 제2 영상을 제공하는 삼차원 영상 표시장치에 있어서, 제어정보를 입력받는 제어정보 취득장치; 및 상기 제어정보 취득장치로부터 전달되는 상기 제어정보를 키(Key)로 하여 상기 제1 영상과 제2 영상간에 존재하는 양안시차를 제어하는 삼차원 방송 수신장치;를 포함하는 것을 특징으로 하는 삼차원 영상 표시장치를 제공한다.
바람직하게는 상기 삼차원 방송 수신 장치는 삼차원 비디오 포맷 형태의 미가공데이터를 입력받아 상기 제1 영상과 제2 영상으로 분할하는 영상분할부; 상기 제1 영상과 제2 영상에서 전경 객체를 배경 객체와 분할시키는 객체분할부; 및 상기 제어정보를 키로 하여 상기 제1 영상과 제2 영상의 대응되는 전경 객체 및 배경 객체 간의 양안시차를 제어하는 영상합성부;를 포함하는 것을 특징으로 한다.
바람직하게는 상기 삼차원 방송 수신장치는, 상기 전경 객체 및 배경 객체에 대한 깊이값 정보 테이블이 저장된 데이터베이스; 및 상기 제어정보를 상기 데이터베이스에 저장된 깊이값 정보 매칭테이블과 대비하여 상기 제어정보에 매칭되는 깊이값을 검색하는 외부신호처리부;를 더 포함하는 것을 특징으로 한다.
이때, 상기 깊이값은 상기 대응되는 객체들 사이에서 독립적으로 산출되며, 상기 영상합성부는 상기 독립적으로 산출된 차이값을 입력받아 상기 각 객체 영상의 깊이값을 개별적으로 제어하는 것이 바람직하다.
상기 영상합성부는, 상기 각 객체 영상의 깊이값을 제어하는 깊이조정부와, 상기 각 객체의 색상을 균일하게 보정하는 색상조정부와, 상기 색상조정부에서 출력되는 영상이 일정 해상도 이상이 되도록 픽셀 및 라인을 보정하는 선예처리부를 포함하는 것이 바람직하다.
상기 제어정보 취득장치는 적외선 카메라, 웹캠 또는 리모트 컨트롤러 중 적어도 하나 이상일 수 있다. 또한 본 발명에 따른 삼차원 영상 표시장치는 포인팅 수단을 더 포함할 수도 있다.
또한 본 발명은 삼차원 비디오 포맷 형태의 미가공데이터를 입력받아 좌안으로 입력되는 제1 영상과 우안으로 입력되는 제2 영상으로 분할하는 제 1 단계; 상기 제1 영상과 제2 영상간의 색도 또는 계조 차이를 소정 범위 이내로 조절하는 제 2 단계; 상기 제1 영상과 제2 영상에서 전경 객체를 배경 객체와 분할시키는 제3 단계; 상기 전경 개체 및 배경 객체에 대하여 삼차원 영상의 깊이조절값을 산출하는 제 4 단계; 및 상기 산출된 깊이조절값에 따라 상기 전경 객체와 배경 객체 영상의 깊이값을 조절하여 삼차원 영상을 재구성하는 제 5 단계;를 포함하는 것을 특징으로 하는 삼차원 영상 표시방법을 제공한다.
상기 제 4 단계의 깊이조절값은 사용자와의 거리에 따라 기설정된 표준 양안시차에서 실제 사용자와의 거리로부터 산출된 개별 양안시차를 차감하여 산출되는 것이 바람직하다.
본 발명에 따른 삼차원 영상 표시방법은 상기 재구성된 삼차원 영상이 소정의 해상도를 갖도록 상기 재구성된 삼차원 영상의 픽셀 및 라인을 보정하는 단계를 더 포함하는 것이 바람직하다.
본 발명에서는 제어정보 취득장치에 의해 얻어진 제어정보를 이용해서 삼차원 영상을 재구성하게 되므로 사용자가 최적의 깊이감을 느낄 수 있는 삼차원 영상을 제공할 수 있게 된다.
도 1은 본 발명의 바람직한 실시예에 따른 삼차원 영상 표시장치를 포함하는 삼차원 영상 방송 시스템의 구성도이다.
도 2는 본 발명의 바람직한 실시예에 따른 삼차원 방송 수신장치의 구성도이다.
도 3은 본 발명의 바람직한 실시예에 따른 영상합성부의 구성도이다.
도 4는 본 발명의 바람직한 실시예에 따른 삼차원 영상 처리 방법을 도시한 순서도이다.
도 5는 본 발명의 바람직한 실시예에 따른 삼차원 영상 처리 방법을 도시한 순서도이다.
도 6은 본 발명의 바람직한 실시예에 따른 양안 영상의 객체 분할을 도시한 개념도이다.
도 2는 본 발명의 바람직한 실시예에 따른 삼차원 방송 수신장치의 구성도이다.
도 3은 본 발명의 바람직한 실시예에 따른 영상합성부의 구성도이다.
도 4는 본 발명의 바람직한 실시예에 따른 삼차원 영상 처리 방법을 도시한 순서도이다.
도 5는 본 발명의 바람직한 실시예에 따른 삼차원 영상 처리 방법을 도시한 순서도이다.
도 6은 본 발명의 바람직한 실시예에 따른 양안 영상의 객체 분할을 도시한 개념도이다.
이하의 실시예들은 본 발명의 구성요소들과 특징들을 소정 형태로 결합한 것들이다. 각 구성요소 또는 특징은 별도의 명시적 언급이 없는 한 선택적인 것으로 고려될 수 있다. 각 구성요소 또는 특징은 다른 구성요소나 특징과 결합되지 않은 형태로 실시될 수 있다. 또한, 일부 구성요소들 및/또는 특징들을 결합하여 본 발명의 실시예를 구성할 수도 있다. 본 발명의 실시예들에서 설명되는 동작들의 순서는 변경될 수 있다. 어느 실시예의 일부 구성이나 특징은 다른 실시예에 포함될 수 있고, 또는 다른 실시예의 대응하는 구성 또는 특징과 교체될 수 있다.
본 발명의 실시예들은 다양한 수단을 통해 구현될 수 있다. 예를 들어, 본 발명의 실시예들은 하드웨어, 펌웨어(firmware), 소프트웨어 또는 그것들의 결합 등에 의해 구현될 수 있다.
하드웨어에 의한 구현의 경우, 본 발명의 실시예들에 따른 방법은 하나 또는 그 이상의 ASICs(application specific integrated circuits), DSPs(digital signal processors), DSPDs(digital signal processing devices), PLDs(programmable logic devices), FPGAs(field programmable gate arrays), 프로세서, 콘트롤러, 마이크로 콘트롤러, 마이크로 프로세서 등에 의해 구현될 수 있다.
펌웨어나 소프트웨어에 의한 구현의 경우, 본 발명의 실시예들에 따른 방법은 이상에서 설명된 기능 또는 동작들을 수행하는 모듈, 절차 또는 함수 등의 형태로 구현될 수 있다. 소프트웨어 코드는 메모리 유닛에 저장되어 프로세서에 의해 구동될 수 있다. 상기 메모리 유닛은 상기 프로세서 내부 또는 외부에 위치하여, 이미 공지된 다양한 수단에 의해 상기 프로세서와 데이터를 주고 받을 수 있다.
명세서 전체에서, 어떤 부분이 다른 부분과 “연결”되어 있다고 할 때, 이는 직접적으로 연결되어 있는 경우뿐만 아니라, 그 중간에 다른 소자를 사이에 두고 전기적으로 연결되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 포함한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있다는 것을 의미한다.
또한, 본 명세서에서 기재한 모듈(module)이란 용어는 특정한 기능이나 동작을 처리하는 하나의 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현할 수 있다.
이하의 설명에서 사용되는 특정(特定) 용어들은 본 발명의 이해를 돕기 위해서 제공된 것이며, 이러한 특정 용어의 사용은 본 발명의 기술적 사상을 벗어나지 않는 범위에서 다른 형태로 변경될 수 있다.
도 1은 본 발명의 바람직한 실시예에 따른 삼차원 영상 표시장치를 포함하는 삼차원 영상 방송 시스템의 구성도이다. 도 1에 도시된 바와 같이 본 발명에 따른 삼차원 영상 표시장치를 포함하는 방송시스템은 삼차원 방송 공급장치(12), 방송 송신부(13), 방송/통신망(14), 방송 수신부(15) 및 삼차원 디스플레이 장치(18)를 포함한다. 제어정보 취득장치(17)는 본 발명의 바람직한 실시예에 의해 삼차원 영상의 깊이감을 조절하는데 필요한 주변정보를 취득하기 위한 것으로서, 도 2의 삼차원 방송 수신장치(16)를 설명하는 과정에서 보다 상세히 설명하도록 한다.
획득된 삼차원 콘텐츠(11)는 삼차원 방송 공급장치에 의해 영상 전송에 적합한 형태로 전처리 및 부호화 된다. 부호화된 삼차원 콘텐츠는 방송 송신부(13)를 거치면서 패킷 다중화 처리가 된 후 유선 또는 무선 형태의 방송/통신망(14)을 통해 송신된다. 방송/통신망(14)을 거쳐 방송 수신부(15)에 수신된 삼차원 콘텐츠는 다시 역다중화 과정을 거치게 된다. 역다중화된 삼차원 콘텐츠는 삼차원 방송 수신장치(16)로 전달된다.
도 2는 본 발명의 바람직한 실시예에 따른 삼차원 방송 수신장치(16)의 구성도이다. 삼차원 방송 수신장치(16)는 수신된 삼차원 콘텐츠(11) 영상을 재구성하여 삼차원 영상의 깊이값을 최적화 하기 위한 것이다.
삼차원 방송 수신장치(16)에서는 제어정보 취득장치(17)로부터 전달받는 제어정보를 키(Key)로 하여 좌안으로 입력되는 제1 영상과 우안으로 입력되는 제2 영상간에 존재하는 시차를 제어하여 삼차원 영상의 깊이값을 최적화하게 된다.
도 2에 도시된 바와 같이 삼차원 방송 수신장치(16)는 복호화부(21), 영상분할부(22), 객체분할부(23), 영상합성부(24), 영상렌더링부(25), 외부신호처리부(26) 및 데이터베이스(27)를 포함한다.
한편, 본 발명에 따른 삼차원 방송 수신장치(16)는 포인팅 수단(미도시)을 더 포함할 수도 있다. 이때, 포인팅 수단이란 유선 또는 무선으로 연결되는 마우스와 같이 디스플레이된 삼차원 영상에 대하여 특정 위치를 지정할 수 있는 수단을 의미한다. 포인팅 수단을 사용한 특정 위치 지정 방법에 대해서는 이하에서 도 6의 바람직할 실시예를 설명하는 과정에서 보다 상세히 설명하도록 한다.
복호화부(21)는 방송 수신부(15)에서 역다중화된 데이터로부터 미가공데이터(Raw Data)를 추출하기 위한 것이다. 즉, 방송 수신부(15)에서 역다중화된 데이터에서 다중화 또는 역다중화를 위해 미가공데이터 사이에 삽입된 신호처리용 데이터들을 제거한다. 따라서, 복호화부(21)에서 출력된 미가공데이터는 side-by-side 또는 top-and-bottom과 같이 좌안용 영상데이터와 우안용 영상데이터가 교번적으로 배치된 삼차원 비디오 포맷이거나, 양안식 영상 각각을 이차원 영상의 크기에 맞게 따로 전송하는 dual mode 기반의 삼차원 비디오 포맷일 수 있다.
영상분할부(22)는 복호화부(21)에서 출력되는 양안식 미가공데이터를 삼차원식 데이터로 분할하는 것이다. 따라서, 영상분할부(22)에서 출력되는 삼차원 데이터는 좌/우 패턴 또는 상/하 패턴 등의 적절한 삼차원 포맷에 맞도록 분할된다. 예를 들어, 영상분할부는 양안식 미가공 데이터를 좌안으로 입력되는 제1영상과 우안으로 입력되는 제2영상으로 분할시킬 수 있다.
객체분할부(23)는 영상분할부(22)로부터 출력되는 영상 내에서 객체 영역을 따로 분할하게 된다. 즉, 도 6의 영상분할부에서 출력되는 제1영상(42)과 제2영상(43)에 대해 각각 a~f, a'~f'과 같은 객체를 분할하여 지정하게 된다. 도 6의 경우 b와 d는 배경 객체이며, a,c,e 및 f는 전경 객체이다. 이때 대응되는 객체, 예를 들어 전경 객체인 a와 a' 사이에 양안시차가 존재할 경우 사용자는 그 양안시차에 의해 깊이감을 느끼게 되므로 양안시차를 조절하게 되면 사용자는 최적의 깊이감을 느낄 수 있게 된다.
양안시차의 조절 정도는 제어정보 취득장치(17)에 의해 얻는 제어정보에 따라 달라지게 된다. 즉, 제어정보란 양안시차의 정도를 조절하는데 사용되는 외부 입력정보로서, 본 발명에 따른 삼차원 영상 표시장치에서는 제어정보를 사용하여 사용자에 따라 최적화된 양안시차의 정도, 즉 삼차원 영상의 깊이감을 조절하게 된다.
제어정보로는 웹캠 또는 적외선 카메라 등을 통해 얻게 되는 사용자의 신체적인 특징과 같은 사용자 인식 정보, 사용자와 삼차원 영상 간의 거리 정보, 디스플레이 화면의 크기와 같은 디스플레이 장치 정보 등을 들 수 있다. 이때, 사용자 인식 정보, 거리 정보 또는 디스플레이 장치 정보 등은 사용자가 리모트 컨트롤러 등을 사용해서 직접 원하는 값으로 설정할 수도 있음은 물론이다. 이하에서는, 설명의 편의를 위하여 사용자가 리모트 컨트롤러로 직접 입력하는 정보는 사용자 입력정보로 호칭하도록 한다.
한편, 사용자가 리모트 컨트롤러 자신에게 맞도록 제어정보를 프리셋팅 (presetting) 할 수도 있다. 즉, 제어정보 취득장치(17)는 취득된 사용자 인식정보를 활용하여 프리셋팅된 제어정보가 존재하는지를 확인하고, 만일 프리셋팅된 제어정보가 존재할 경우에는 해당 제어정보를 활용하게 된다.
이때, 웹캠 또는 적외선 카메라와 같은 거리측정 장치는 셋톱박스(STB) 형태로 구성되거나 삼차원 TV 내에 구성될 수 있음은 물론이다.
웹캠, 적외선 카메라 또는 리모트 컨트롤러와 같은 제어정보 취득장치(17)를 통해 입력되는 제어정보는 외부신호처리부(26)로 전달되며, 외부신호처리부(26)는 입력받은 제어정보를 데이터베이스(27)에 미리 저장되어 있는 깊이값 정보 매칭테이블과 대비하여 최적의 깊이감을 느낄 수 있는 삼차원 영상의 깊이, 즉 앞서 설명한 전경 객체 및 배경 객체의 깊이값을 검색하고, 검색된 깊이값을 사용하여 깊이 조절값을 산출하게 된다. 즉, 깊이 조절값이란 검색된 깊이값을 이용하여 산출하게 되는 보상치를 의미한다.
표 1은 사용자 기호에 따른 깊이값 정보 매칭테이블의 예시이며, 표 2는 디스플레이 장치의 화면 크기에 따른 깊이값 정보 매칭 테이블의 예시이다. 표 1 또는 표 2에 나타난 바와 같이, 시청거리에 따라 최적의 깊이감을 주는 깊이값이 달라지는 것을 알 수 있으며, 한편 동일한 시청거리에 위치한 사용자라도 기호에 따라 최적의 깊이감을 주는 깊이값이 달라지는 것을 알 수 있다.
시청거리 | 표준 깊이값 | 홍길동1 | 홍길동2 | 홍길동3 |
1~2m | 1 | 1 | 1.2 | 1.1 |
2~3m | 2 | 2 | 2.3 | 2.2 |
... | ... | ... | ... | ... |
8~10m | 8 | 8 | 8.2 | 8.2 |
... | ... | ... | ... | ... |
시청거리 | 표준 깊이값 | 32인치 | 47인치 | 52인치 |
1~2m | 1 | 1.32 | 1.47 | 1.52 |
2~3m | 2 | 2.32 | 2.47 | 2.52 |
... | ... | ... | ... | ... |
8~10m | 8 | 8.32 | 8.47 | 8.52 |
... | ... | ... | ... | ... |
거리 측정장치에 의해 삼차원 영상과 사용자간의 거리, 즉 시청거리가 측정이 되면, 측정된 시청거리에 대응되는 표준 깊이값을 알 수 있게 된다. 삼차원 영상의 재구성 과정은 일단 각 개체에 대해 그 깊이값을 표준 깊이값으로 설정한 이후, 개인적인 기호 또는 디스플레이 화면의 크기를 고려하여 표준 깊이값에 대해 조절을 하는 과정으로 진행되는 것이 바람직하다. 이때, 사용자는 리모트 컨트롤러 등을 통해 자신이 원하는 정도로 조절을 할 수 있음은 물론이다.
외부신호처리부(26)가 정보 매칭 테이블로부터 검색한 깊이조정값은 영상합성부(24)로 전달되며, 영상합성부(24)에서는 전달받은 깊이조정값을 이용하여 각 객체의 깊이값을 재조종 하게 된다.
도 3은 본 발명의 바람직한 실시예에 따른 영상합성부의 구성도이다. 도 3에 도시된 바와 같이 영상합성부(24)는 깊이조정부(31), 색상조정부(32), 선예처리부(33) 및 영상재구성부(34)를 포함한다. 즉, 영상재구성부(34)는 각 객체에 대하여 깊이 조정, 색상 조정 및 선예 처리를 진행한 후 재구성된 삼차원 영상을 출력한다.
깊이조정부(31)는 외부신호처리부(26)로부터 입력받은 깊이조정값을 이용하여 각 객체의 깊이값을 결정한다. 이때, 각 객체의 깊이값은 서로 독립적이며 서로 다른 값으로 조정될 수 있음을 물론이며, 나아가 객체별로 깊이값을 선형적 또는 비선형적으로 조정하는 것도 가능함은 물론이다.
색상조정부(32)는 객체의 색상을 균일하게 보정하기 위한 것으로서, 대응되는 객체의 색을 균일하게 유지시키기 위한 것이다.
선예처리부(33)는 영상재구성부(34)에서 최종적으로 재구성된 영상의 각 픽셀 및 라인의 흐트러짐을 원영상과 같이 바로잡기 위한 것이다.
영상재구성부(34)에서 재구성된 삼차원 영상은 영상렌더링부(25)를 거쳐 삼차원 디스플레이 장치에 표시된다.
도 4와 도 5는 본 발명의 바람직한 실시예에 따른 삼차원 영상 처리 방법을 도시한 순서도이다.
방송/통신망(14)을 거쳐 수신된 삼차원 콘텐츠는(S1, S2) 방송 수신부(15)에서 역다중화를 거치게 되며, 역다중화된 삼차원 콘텐츠는 삼차원 방송 수신장치(16)에서 복호화 되며(S3), 그 결과 삼차원 비디오 포맷 형태의 미가공데이터가 생성된다. 이후, 미가공데이터에 대해 깊이값 조절이 필요한지 여부를 일단 판단하게 된다(S4). 즉, 제어정보 취득장치(17)를 통해 얻은 제어정보를 키(Key)로 하여 파악한 삼차원 영상의 깊이값이 사전 설정된 수준에 적합할 경우에는 깊이값의 조절이 수행되지 않는다. 깊이값의 조절이 불필요한 경우에는 영상합성부(24)의 선예처리부(33)에서 선예도가 조정된 후 삼차원 디스플레이 장치에 의해 재생된다(S12 내지 S16).
그러나, 깊이값의 조절이 필요한 경우에는 다음의 과정에 의해 깊이값을 조절하게 된다.
우선, 입력받은 삼차원 비디오 포멧 형태의 미가공데이터를 좌안으로 입력되는 제1 영상과 우안으로 입력되는 제2 영상으로 분할되며(S5), 분할된 제1 영상과 제2 영상간의 색도 또는 계조 차이를 기절성된 소정 범위 이내로 조절하게 된다(S6). 색도 또는 계조의 조절이 완료되면, 외부신호처리부(26)에서 산출된 깊이 조절값에 따라 깊이값의 조절이 수행된다(S9) 이후 색상 및 줄맞춤(선예도)을 거쳐 삼차원 영상을 재구성하고 삼차원 디스플레이장치를 통해 재생되는 과정은 삼차원 영상 표시장치에서의 재생과정과 동일하므로 보다 상세한 설명은 생략하도록 한다.
이때, 깊이조절값은 사용자와의 거리에 따라 기설정된 표준 양안시차에서 실제 사용자와의 거리로부터 산출된 개별 양안시차를 차감하여 산출하는 것이 일반적이다.
도 6은 본 발명의 바람직한 실시예에 따른 양안 영상의 객체 분할을 도시한 개념도이다. 앞서 살펴본 바와 같이 본 발명에서는 분할된 객체(a 내자 f, a' 내지 f')에 대해 개별적으로 깊이값을 조절하게 된다.
한편, 본 발명에 따른 삼차원 방송 수신장치(16)는 마우스와 같은 포인팅 수단(미도시)을 포함할 수도 있는데, 포인팅 수단을 사용하여 특정 객체를 포인팅 할 경우에는 마우스 포인터와 같은 인식자가 포인팅되는 객체와 동일한 깊이값을 갖는 것이 바람직하다. 이 경우 디스플레이 화면에 도시되는 마우스 포인터 또한 하나의 별도 객체로 인식되어 포인팅되는 객체와 동일한 깊이값을 갖도록 재생되는바, 그 재생방법은 삼차원 영상의 재생방법과 동일하므로 보다 상세한 마우스 포인터의 재생방법에 대해서는 보다 상세한 설명은 생략하기로 한다.
본 발명은 본 발명의 정신 및 필수적 특징을 벗어나지 않는 범위에서 다른 특정한 형태로 구체화될 수 있다. 따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다. 또한, 특허청구범위에서 명시적인 인용 관계가 있지 않은 청구항들을 결합하여 실시예를 구성하거나 출원 후의 보정에 의해 새로운 청구항으로 포함시킬 수 있다.
11 : 삼차원 콘텐츠 12 : 삼차원 방송 공급장치
13: 방송 송신부 14 : 방송/통신망
15 : 방송 수신부 16 : 삼차원 방송 수신장치
17 : 제어정보 취득 장치 18 : 삼차원 영상 표시장치
19 : 사용자 21 : 복호화부
22 : 영상분할부 23 : 객체분할부
24 : 영상합성부 25 : 영상렌더링부
26 : 외부신호처리부` 27 : 데이터베이스
31 : 깊이조정부 32 : 색상조정부
33 : 선예처리부 34 : 영상재구성부
35 : 영상렌더링부 41 : 마우스 포인터
42 : 좌안 영상 43 : 우안 영상
13: 방송 송신부 14 : 방송/통신망
15 : 방송 수신부 16 : 삼차원 방송 수신장치
17 : 제어정보 취득 장치 18 : 삼차원 영상 표시장치
19 : 사용자 21 : 복호화부
22 : 영상분할부 23 : 객체분할부
24 : 영상합성부 25 : 영상렌더링부
26 : 외부신호처리부` 27 : 데이터베이스
31 : 깊이조정부 32 : 색상조정부
33 : 선예처리부 34 : 영상재구성부
35 : 영상렌더링부 41 : 마우스 포인터
42 : 좌안 영상 43 : 우안 영상
Claims (10)
- 좌안으로 입력되는 제1 영상과 우안으로 입력되는 제2 영상을 제공하는 삼차원 영상 표시장치에 있어서,
제어정보를 입력받는 제어정보 취득장치; 및
상기 제어정보 취득장치로부터 전달되는 상기 제어정보를 키(Key)로 하여 상기 제1 영상과 제2 영상간에 존재하는 양안시차를 제어하는 삼차원 방송 수신장치;를 포함하는 것을 특징으로 하는 삼차원 영상 표시장치.
- 제 1 항에 있어서,
상기 삼차원 방송 수신 장치는 삼차원 비디오 포맷 형태의 미가공데이터를 입력받아 상기 제1 영상과 제2 영상으로 분할하는 영상분할부;
상기 제1 영상과 제2 영상에서 전경 객체를 배경 객체와 분할시키는 객체분할부; 및
상기 제어정보를 키로 하여 상기 제1 영상과 제2 영상의 대응되는 전경 객체 및 배경 객체 간의 양안시차를 제어하는 영상합성부;를 포함하는 것을 특징으로 하는 삼차원 영상 표시장치.
- 제 2 항에 있어서,
상기 삼차원 방송 수신장치는,
상기 전경 객체 및 배경 객체에 대한 깊이값 정보 테이블이 저장된 데이터베이스; 및
상기 제어정보를 상기 데이터베이스에 저장된 깊이값 정보 매칭테이블과 대비하여 상기 제어정보에 매칭되는 깊이값을 검색하는 외부신호처리부;를 더 포함하는 것을 특징으로 하는 삼차원 영상 표시장치.
- 제 3 항에 있어서,
상기 깊이값은 상기 대응되는 객체들 사이에서 독립적으로 산출되며, 상기 영상합성부는 상기 독립적으로 산출된 차이값을 입력받아 상기 각 객체 영상의 깊이값을 개별적으로 제어하는 것을 특징으로 하는 삼차원 영상 표시장치.
- 제 4 항에 있어서,
상기 영상합성부는,
상기 각 객체 영상의 깊이값을 제어하는 깊이조정부;
상기 각 객체의 색상을 균일하게 보정하는 색상조정부; 및
상기 색상조정부에서 출력되는 영상이 일정 해상도 이상이 되도록 픽셀 및 라인을 보정하는 선예처리부;를 포함하는 것을 특징으로 하는 삼차원 영상 표시장치. - 제 1 항에 있어서,
상기 제어정보 취득장치는 적외선 카메라, 웹캠 또는 리모트 컨트롤러 중 적어도 하나 이상인 것을 특징으로 하는 삼차원 영상 표시장치.
- 제 1 항에 있어서,
포인팅 수단을 더 포함하는 것을 특징으로 하는 삼차원 영상 표시장치.
- 삼차원 비디오 포맷 형태의 미가공데이터를 입력받아 좌안으로 입력되는 제1 영상과 우안으로 입력되는 제2 영상으로 분할하는 제 1 단계;
상기 제1 영상과 제2 영상간의 색도 또는 계조 차이를 소정 범위 이내로 조절하는 제 2 단계;
상기 제1 영상과 제2 영상에서 전경 객체를 배경 객체와 분할시키는 제3 단계;
상기 전경 개체 및 배경 객체에 대하여 삼차원 영상의 깊이조절값을 산출하는 제 4 단계; 및
상기 산출된 깊이조절값에 따라 상기 전경 객체와 배경 객체 영상의 깊이값을 조절하여 삼차원 영상을 재구성하는 제 5 단계;를 포함하는 것을 특징으로 하는 삼차원 영상 표시방법.
- 제 8 항에 있어서,
상기 제 4 단계의 깊이조절값은 사용자와의 거리에 따라 기설정된 표준 양안시차에서 실제 사용자와의 거리로부터 산출된 개별 양안시차를 차감하여 산출하는 것을 특징으로 하는 삼차원 영상 표시방법.
- 제 8 항에 있어서,
상기 재구성된 삼차원 영상이 소정의 해상도를 갖도록 상기 재구성된 삼차원 영상의 픽셀 및 라인을 보정하는 단계를 더 포함하는 것을 특징으로 하는 삼차원 영상 표시방법.
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020100129520A KR20120067879A (ko) | 2010-12-16 | 2010-12-16 | 삼차원 영상 표시 장치 및 그 표시 방법 |
JP2011273468A JP2012130008A (ja) | 2010-12-16 | 2011-12-14 | 三次元映像表示装置およびその表示方法 |
US13/326,853 US20120154531A1 (en) | 2010-12-16 | 2011-12-15 | Apparatus and method for offering 3d video processing, rendering, and displaying |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020100129520A KR20120067879A (ko) | 2010-12-16 | 2010-12-16 | 삼차원 영상 표시 장치 및 그 표시 방법 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20120067879A true KR20120067879A (ko) | 2012-06-26 |
Family
ID=46233856
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020100129520A KR20120067879A (ko) | 2010-12-16 | 2010-12-16 | 삼차원 영상 표시 장치 및 그 표시 방법 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20120154531A1 (ko) |
JP (1) | JP2012130008A (ko) |
KR (1) | KR20120067879A (ko) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014051319A1 (ko) * | 2012-09-28 | 2014-04-03 | 삼성전자주식회사 | 깊이 영상 부호화 방법 및 장치, 깊이 영상 복호화 방법 및 장치 |
WO2014142409A1 (ko) * | 2013-03-12 | 2014-09-18 | 엘지전자 주식회사 | 영상 표시장치 및 그것의 비디오 스트림 제어방법 |
KR101470693B1 (ko) * | 2012-07-31 | 2014-12-08 | 엘지디스플레이 주식회사 | 영상 데이터 처리 방법과 이를 이용한 입체 영상 표시장치 |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9106908B2 (en) * | 2012-07-30 | 2015-08-11 | Intel Corporation | Video communication with three dimensional perception |
US9979952B2 (en) | 2013-12-13 | 2018-05-22 | Htc Corporation | Method of creating a parallax video from a still image |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2848291B2 (ja) * | 1995-08-24 | 1999-01-20 | 松下電器産業株式会社 | 立体tv装置 |
JPH11164329A (ja) * | 1997-11-27 | 1999-06-18 | Toshiba Corp | 立体映像表示装置 |
JP2003209858A (ja) * | 2002-01-17 | 2003-07-25 | Canon Inc | 立体画像生成方法及び記録媒体 |
JP2004246725A (ja) * | 2003-02-14 | 2004-09-02 | Sharp Corp | 表示装置、表示制御方法、表示制御プログラム及びこれを記録したコンピュータ読み取り可能な記録媒体 |
JP2010045584A (ja) * | 2008-08-12 | 2010-02-25 | Sony Corp | 立体画像補正装置、立体画像補正方法、立体画像表示装置、立体画像再生装置、立体画像提供システム、プログラム及び記録媒体 |
JP4737573B2 (ja) * | 2009-02-05 | 2011-08-03 | 富士フイルム株式会社 | 3次元画像出力装置及び方法 |
JP2012518317A (ja) * | 2009-02-18 | 2012-08-09 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 3d観察者メタデータの転送 |
EP2268045A1 (en) * | 2009-06-26 | 2010-12-29 | Lg Electronics Inc. | Image display apparatus and method for operating the same |
WO2011033423A1 (en) * | 2009-09-16 | 2011-03-24 | Koninklijke Philips Electronics N.V. | 3d screen size compensation |
KR101636537B1 (ko) * | 2009-11-12 | 2016-07-06 | 삼성전자주식회사 | 깊이감 인지 향상을 위한 영상 처리 장치 및 방법 |
-
2010
- 2010-12-16 KR KR1020100129520A patent/KR20120067879A/ko not_active Application Discontinuation
-
2011
- 2011-12-14 JP JP2011273468A patent/JP2012130008A/ja active Pending
- 2011-12-15 US US13/326,853 patent/US20120154531A1/en not_active Abandoned
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101470693B1 (ko) * | 2012-07-31 | 2014-12-08 | 엘지디스플레이 주식회사 | 영상 데이터 처리 방법과 이를 이용한 입체 영상 표시장치 |
WO2014051319A1 (ko) * | 2012-09-28 | 2014-04-03 | 삼성전자주식회사 | 깊이 영상 부호화 방법 및 장치, 깊이 영상 복호화 방법 및 장치 |
WO2014142409A1 (ko) * | 2013-03-12 | 2014-09-18 | 엘지전자 주식회사 | 영상 표시장치 및 그것의 비디오 스트림 제어방법 |
Also Published As
Publication number | Publication date |
---|---|
US20120154531A1 (en) | 2012-06-21 |
JP2012130008A (ja) | 2012-07-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8860785B2 (en) | Stereo 3D video support in computing devices | |
KR101622690B1 (ko) | 3차원 영상신호 처리 방법과 이를 구현하기 위한 영상표시 장치 | |
CN103329547B (zh) | 伪3d强迫透视方法及设备 | |
US20100309287A1 (en) | 3D Data Representation, Conveyance, and Use | |
US20120162367A1 (en) | Apparatus and method for converting image display mode | |
US20110255003A1 (en) | Method and apparatus for presenting on-screen graphics in a frame-compatible 3d format | |
US8958628B2 (en) | Image scaling | |
US8817070B2 (en) | Method and apparatus for generating three-dimensional content based on user preferences | |
CN102300109A (zh) | 输出音频信号的显示装置和方法 | |
KR101287786B1 (ko) | 3차원 입체영상 표시 방법 및 그를 이용한 영상 표시 장치 | |
JPWO2004071102A1 (ja) | 立体視用映像提供方法及び立体映像表示装置 | |
WO2010092823A1 (ja) | 表示制御装置 | |
CA2845780C (en) | Digital broadcast signal processing method and device | |
CN107925840A (zh) | 用于处理与视频图像相关联的音频信号的方法和装置 | |
KR20120067879A (ko) | 삼차원 영상 표시 장치 및 그 표시 방법 | |
CA2841192C (en) | Method and apparatus for processing a 3d service | |
KR20100046485A (ko) | 관심 영역 깊이 정보 기반의 3차원 방송 서비스 방법 및 장치 | |
WO2012026342A1 (ja) | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 | |
US9667951B2 (en) | Three-dimensional television calibration | |
US20130215225A1 (en) | Display apparatus and method for adjusting three-dimensional effects | |
US20110304690A1 (en) | Image processing apparatus and control method of the same | |
US20140282678A1 (en) | Method for Enabling 3DTV on Legacy STB | |
US20110084974A1 (en) | Image providing method, and image providing apparatus, display apparatus, and image providing system using the same | |
KR101733488B1 (ko) | 3차원 영상 표시 방법 및 그에 따른 3차원 영상 표시 장치 | |
US8736602B2 (en) | Display apparatus and control method thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
WITN | Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid |