KR20060087511A

KR20060087511A - 입체 영상 재생 장치 및 입체 영상 재생 방법

Info

Publication number: KR20060087511A
Application number: KR1020067003516A
Authority: KR
Inventors: 류지 키타우라; 카즈토 오하라; 토시오 노무라; 나오키 이시하라
Original assignee: 샤프 가부시키가이샤
Priority date: 2003-08-26
Filing date: 2004-07-16
Publication date: 2006-08-02
Also published as: US8035683B2; CN1864415A; KR100820129B1; WO2005020591A1; US20060290778A1; JP2005073049A; CN1864415B; EP1662809A4; EP1662809A1

Abstract

3차원 영상을 여러 가지의 표시장치에 표시한 경우, 표시장치의 사이즈가 커지는 경우, 또는 표시장치의 해상도가 낮아지는 경우에도, 입체시 가능한 상태에서 표시를 행한다. 3차원 영상 데이터를 표시한 경우의 표시화면에서의 시차량이, 상기 3차원 영상 데이터의 표시에 최적의 표시장치에서의 시차량보다 커지는 것인지 아닌 지를, 상기 제어 정보에 포함되는 기준 정보에 따라 판정하는 판정 수단, 및 시차량을 변경하기 위한 화상 처리를 실시하는 화상처리수단을 구비하고, 3차원 영상을 표시하는 경우 기준으로 되는 표시 장치의 도트간 피치와 자신의 단자의 도트간 피치의 비에 따라, 3차원 영상의 시차량을 조절한다.

Description

입체 영상 재생 장치 및 입체 영상 재생 방법{3-DIMENSIONAL VIDEO REPRODUCTION DEVICE AND 3-DIMENSIONAL VIDEO REPRODUCTION METHOD}

본 발명은, 3차원 영상을 입체시할 수 있도록 재생하는 입체 영상 재생 장치 및 입체 영상 재생 방법에 관한 것이다.

종래, 3차원 영상을 표시하는 여러 가지 방법이 제안되어 있다. 그 중에서도 일반적으로 사용되고 있는 것은 양안 시차를 이용한, 2안식이라고 불리는 것이다.즉, 양안 시차를 가진 좌안용 영상과 우안용 영상을 제공하고, 각각 독립적으로 좌우의 눈에 투영하는 것에 의해 입체시를 행할 수 있다. 이와 같은 3차원 영상은, 양안 시차의 크기(이하, 시차량이라 한다)에 의해 얻어지는 입체감이 다르다. 따라서, 같은 3차원 영상이라도, 화면에 표시되는 표시 사이즈가 다르면, 시차량이 변화하여 보는 시각이 다르게 된다. 즉, 동일의 표시 장치를 사용하는 경우에도, 영상의 표시 사이즈를 확대한 경우에 시차량이 커진다. 또한 다른 표시 장치에서는,사이즈가 큰 표시장치로 표시하면 시차량이 커지는 경우가 있다.

도7은 이것을 나타낸 것이고, 도면에 있어서 w<W이다. 도7(a)에 나타낸 바와 같이, 우안용 영상(701)과 좌안용 영상(702)의 입체상이 위치(703)에서 융합하고 있는 경우에, 도7(b)에 나타낸 바와 같이, 영상의 표시 사이즈가 커지면, 도7(a)에 나타낸 상태에서는 w인 시차량이 W로 커진다. W가 과도하게 커지면 양안에 의한 입체시가 불가능해진다. 화상 처리에 의해 확대하는 경우에는, 단말측의 처리에 의해 확대되기 때문에, 사전에 입체시할 수 없게 될 가능성에 대해 예견할 수 있지만, 표시 장치의 사양의 차이로 인해 확대되는 경우에는, 단말측에서는 정확하게 파악할 수 없는 문제가 있었다.

이와 같은 문제를 해결하기 위해, 특허 문헌1에서는, 3차원 영상을 그대로 공급하여도 적절한 입체감이 얻어지는 표시 장치의 사이즈에 관한 정보를, ３차원 영상 데이터와 함께 수취하고, 유저 단말의 표시장치에 있어서도 양호한 입체감이 얻어지도록, 3차원 영상의 시차량을 변경하는 기술이 개시되어 있다.

특허 문헌1 : 일본 특허 공개 공보 제1998-150608호

그러나, 상기 종래의 기술에서는, 다른 표시 장치 사이에서 사이즈만이 다른 경우 밖에 고려하고 있지 않아서 해상도가 다른 경우가 고려되어 있지 않다고 하는 문제가 있다.

도8은 사이즈 및 해상도가 다른 표시 장치의 예를 나타내는 도면이다. 도8(a)에 나타낸 표시 장치와 도8(b)에 나타낸 표시 장치는 사이즈가 다르지만, 해상 도가 같고, 도8(b)와 도8(c)에 나타낸 표시 장치는, 사이즈는 같지만, 해상도가 다르다. 또한, 도면에서 점선은 도트의 구분을 나타내고 있다. 또한, 도8(a)와 도8(b)에서는 영상이 전화면에 표시되어 있고, 도8(c)에서는, 중앙부분에 표시되어 있는 상태를 나타내고 있다.

도8(a)에 나타낸 표시 장치와 도8(b)에 나타낸 표시 장치를 비교하면, 표시 장치의 사이즈가 커지고, 해상도가 변화하지 않는 경우에는, 표시 장치의 도트의 간격이 넓어지기 때문에, 표시되는 영상은 공간적으로 잡아 늘여진다. 그러나, 도8(a)에 나타낸 표시 장치와 도8(c)에 나타낸 표시 장치와 같이, 사이즈에 따라 해상도가 높아지도록 하는 경우에는, 반드시 영상의 표시 사이즈가 커진다고는 할 수 없다.

또한, 표시 장치의 사이즈가 변화하지 않는 경우에도, 해상도가 낮아진 경우에는, 영상이 확대되어 표시되기 때문에, 시차량이 커진다. 이상과 같이, 표시장치의 사이즈만을 고려하는 것 만으로는 불충분하다.

본 발명은, 이상과 같은 문제점을 해결하기 위한 것으로서, 그 목적은, 표시 장치의 사이즈와 해상도에 따라, 3차원 영상을 입체시 가능하게 표시할 수 있는 입체 영상 재생 장치 및 입체 영상 재생 방법을 제공하는 것이다.

본 발명에 따른 입체 영상 재생 장치는, 3차원 영상 데이터의 표시를 제어하기 위한 제어 정보에 기초하여, 3차원 영상을 재생하는 입체 영상 재생 장치에 있어서, 상기 3차원 영상 데이터를 표시한 경우의 표시 화면에서의 시차량이, 상기 3차원 영상데이터를 기준이 되는 표시 장치에 표시한 때의 표시 화면에서의 시차량보다 크게 되는지 아닌지를, 상기 제어 정보에 기초하여 판정하는 판정 수단과, 상기 시차량을 변경하기 위한 화상 처리를 실시하는 화상 처리 수단을 포함하고, 상기 판정 수단에 의해 상기 시차량이 커지는 것으로 판정된 경우에, 상기 화상 처리 수단에 의한 화상 처리를 행하는 것을 특징으로 한다.

바람직하게도, 상기 화상 처리 수단은, 상기 3차원 영상 데이터를 구성하는 소정의 시점의 영상을 수평방향으로 이동하여 시차량을 조정하는 시차량 조정 수단인 것을 특징으로 한다.

바람직하게도, 상기 화상 처리 수단은, 상기 3차원 영상 데이터의 화상 사이 즈를 변경하는 사이즈 변경 수단을 포함하는 것을 특징으로 한다.

바람직하게도, 상기 제어 정보는, 상기 기준이 되는 표시 장치의 분해능에 관한 정보를 포함하는 것을 특징으로 한다.

바람직하게도, 상기 제어 정보는, 상기 기준이 되는 표시 장치에 있어서, 상기 3차원 영상 데이터를 표시한 때의 표시 사이즈에 관한 정보를 포함하는 것을 특징으로 한다.

본 발명에 따른 입체 영상 재생 장치는, 3차원 영상 데이터의 표시를 제어하기 위한 제어 정보에 기초하여, 3차원 영상을 재생하는 입체 영상 재생 장치에 있어서, 상기 제어 정보에 따라, 상기 3차원 영상 데이터를 표시한 때의 표시 화면에서의 시차량이, 입체시 가능한 값인지 아닌 지를 판정하는 판정 수단과, 상기 3차원 영상 데이터의 화상 사이즈를 변경하는 사이즈 변경 수단을 포함하고, 상기 판정 수단에 의해 입체시 가능한 값이 아닌 것으로 판정된 경우, 상기 확대 및 축소비율을 제한하는 것을 특징으로 한다.

바람직하게도, 상기 제어 정보는, 중요한 피사체의 시차량을 포함하여 상기 3차원 영상 데이터의 시차량을 나타내는 시차 정보를 포함하는 것을 특징으로 한다.

본 발명에 따른 입체 영상 재생 방법은, 3차원 영상 데이터의 표시를 제어하기 위한 제어 정보에 기초하여, 3차원 영상을 재생하는 입체 영상 재생 방법에 있어서, 상기 3차원 영상 데이터를 표시한 때의 표시 화면에서의 시차량이, 상기 3차원 영상 데이터를 기준이 되는 표시 장치에 표시한 때의 표시 화면에서의 시차량보다 크게 되는지 아닌지를, 상기 제어 정보에 기초하여 판정하는 판정 스텝과, 시차량을 변경하기 위한 화상 처리를 실시하는 화상 처리 스텝을 포함하고, 상기 판정 스텝에 의해 시차량이 커지는 것으로 판정된 경우, 상기 화상 처리 스텝에 의한 화상 처리를 행하는 것을 특징으로 한다.

바람직하게도, 상기 화상 처리 스텝은, 상기 3차원 영상 데이터를 구성하는 소정의 시점의 영상을 수평 방향으로 이동하여 시차량을 조정하는 것을 특징으로 한다.

바람직하게도, 상기 화상 처리 스텝은, 상기 3차원 영상 데이터의 화상 사이즈를 변경하는 것을 특징으로 한다.

바람직하게도, 상기 제어 정보는, 상기 기준이 되는 표시 장치에 있어서, 상기 3차원 영상 데이터를 표시한 때의 표시 사이즈를 포함하는 것을 특징으로 한다.

3차원 영상 데이터의 표시를 제어하기 위한 제어 정보에 기초하여, 3차원 영상을 재생하는 입체 영상 재생 방법에 있어서, 상기 제어 정보에 따라, 상기 3차원 영상 데이터를 표시한 때의 표시 화면에서의 시차량이, 입체시 가능한 값으로 되도록 확대 및 축소율을 제한하여 3차원 영상 데이터의 화상 사이즈를 변경하는 것을 특징으로 한다.

본 발명에 따른 입체 영상 재생 방법은, 3차원 영상 데이터의 표시를 제어하기 위한 제어 정보에 기초하여, 3차원 영상을 재생하는 입체 영상 재생 방법에 있어서, 상기 제어 정보에 따라, 상기 3차원 영상 데이터를 표시한 때의 표시 화면에서의 시차량이, 입체시 가능한 값인지 아닌 지를 판정하는 판정 스텝과, 상기 3차원 영상 데이터의 화상 사이즈를 변경하는 사이즈 변경 스텝을 포함하고, 상기 판정 스텝에 의해 입체시 가능한 값이 아닌 것으로 판정된 경우, 상기 확대 및 축소율을 제한하는 것을 특징으로 한다.

본 발명에 따르면, 하나의 3차원 영상 데이터를 다른 표시 장치에 있어서 표시시키는 경우에, 상기한 3차원 영상 데이터를 표시한 때의 표시 화면에서의 시차량이, 상기 3차원 영상 데이터의 표시에 최적인 표시 장치에서의 시차량보다 커지는 경우에, 상기 3차원 영상의 시차량을 조정하는 것에 의해 3차원 영상을 입체시 불가능한 상태에서 표시하여 버리는 문제를 해결할 수 있는 유리한 효과가 얻어진다.

또한, 본 발명에 따르면, 표시 장치의 화면상에 표시되는 시차량이나 영상의 실제의 표시 사이즈에 따라 화상의 확대/축소율을 제한하는 것에 의해, 시차량이 한도를 넘어 커지게 되고, 입체시가 불가능한 상태에서 3차원 영상 데이터를 표시하여 버리는 문제를 해결할 수 있는 유리한 효과가 얻어진다.

도1은 본 발명의 제1 실시예에 따른 입체 영상 재생 장치의 구성예를 나타내는 블럭도이다.

도2는 본 발명의 제1 실시예에 따른 입체 영상 재생 장치의 화상 처리 수단의 구성예를 나타내는 블럭도이다.

도3은 시차 배리어 방식의 표시 장치를 설명하기 위한 도면이다.

도4는 본 발명의 제1 실시예에 따른 입체 영상 재생 장치의 처리 흐름을 나타내는 도면이다.

도5는 시차량 조정 처리를 설명하기 위한 도면이다.

도6은 본 발명의 제2 실시예에 따른 입체 영상 재생 장치의 처리 흐름을 나타내는 도면이다.

도7은 확대에 의한 시차량의 변화를 설명하는 도면이다.

도8은 표시 장치의 차이에 의한 표시예를 나타내는 도면이다.

이하, 본 발명을 실시하기 위한 최선의 형태에 대해, 도면을 참조하여 설명한다.

<제1 실시예>

도1은 본 발명의 제1 실시예에 따른 입체 영상 재생 장치의 구성예를 나타내 는 블럭도이다. 도1에서, 입체 영상 재생 장치(10)는, 분리 수단(11), 복호 수단(12), 제어 수단(13)(판정 수단), 화상 처리 수단(14), 표시 수단(15)으로 구성된다. 도시되지 않았지만, 분리 수단(11)은, 기록 매체로부터 데이터를 독출하는 수단이나, 통신로를 통해 데이터를 수신하는 수단에 접속된다.

분리 수단(11)은, 영상 데이터나 음성 데이터, 제어 정보 등의 복수의 종류의 데이터를 소정의 방식에 의해 다중화한 다중화 데이터를 각각의 구성 요소의 데이터로 분리한다. 다중화의 방식으로는, MPEG-2시스템 규격으로 정할 수 있었던 트랜스포트 스트림 등이 알려져 있다. 또한, 분리 수단(11)을 사용하지 않고, 영상 데이터와 제어 정보를 따로따로 입력하도록 해도 된다.

제어 정보에는, 영상 데이터가 3차원 영상임을 나타내는 정보나, 기준 정보가 포함되어 있다. 기준 정보란, 시차량의 변화를 판정하기 위한 기준이 되는 정보이고, 여기에서는, ３차원 영상을 그대로 표시한 경우에, 적절한 입체감을 얻는 것이 가능한 기준 디스플레이의 분해능에 관한 정보(디스플레이 사이즈와 해상도. 이하, 각각을 기준 디스플레이 사이즈, 기준 해상도라 한다)이다.

복호 수단(12)은, 소정의 방식에 의해 부호화되어 있는 영상 데이터를 복호한다. 일반적으로 영상 데이터를 전송 또는 기록할 때에는, 데이터량을 압축하기 위해 부호화되어 있다. 동화상의 부호화 방식으로는, MPEG-2 비디오, MPEG-4 비디오, Motion-JPEG 등이, 정지 화상의 부호화 방식으로는 JPEG 등이 알려져 있다.

제어 수단(13)은, 제어 정보 등에 의해 영상 데이터가 적절하게 재생되도록 각 수단을 제어한다. 제어 수단(13)에는, 표시 수단(15)의 디스플레이 사이즈와 해 상도가 입력되어 있다. 디스플레이 사이즈나 해상도가 다른 표시 수단(15)에 변경된 경우에 3차원 영상 데이터의 사이즈의 변경이나 시차량의 조정 등에 대해서는, 상세하게 후술한다. 이 디스플레이 사이즈와 해상도는, 표시 수단(15)이 입체 영상 재생 장치에 고정되어 있는 경우는 사전에 정할 수 있지만, 외부의 표시 장치에 접속되는 경우에는, 유저에 의해 설정되기도 한다.

화상 처리 수단(14)은 영상 데이터를 구성하는 프레임 단위로 화상 처리를 행한다. 도2에 화상 처리 수단(14)의 구성예를 나타낸다. 도2에 나타내는 바와 같이, 화상 처리 수단(14)은 영상 데이터의 확대 처리 또는 축소 처리를 행하는 사이즈 변경 수단(141), 3차원 영상의 시차량을 조정하는 시차량 조정 수단(142), 및 영상을 표시 수단(15)의 표시 형식으로 변환하기 위한 표시 영상 생성 수단(143)으로 구성된다.

표시 수단(15)은 3차원 영상을 표시하는 것이 가능한 표시 장치이고, 필드 시퀀셜 방식이나 시차 배리어 방식 등의 표시 장치가 알려져 있다. 본 실시예에서는, 시차 배리어 방식의 표시 장치를 사용하는 경우에 대해서 설명하지만, 본 발명은 이것으로 한정되는 것은 아니고, 기타의 방식의 표시 장치에 대해서도 적용할 수 있다.

시차 배리어 방식에 대해, 도3을 참조하여 설명한다. 도3(a)는, 시차 배리어 방식에 의해 시차가 생기는 원리를 나타내는 도면이고, 영상 표시 패널(301)의 전면에 시차 배리어(302)가 배치되어 있다. 도3(b)는, 시차 배리어 방식으로 표시되는 화면의 표시 형식을 나타내는 도면이고, 좌안용 영상과 우안용 영상이 수평 방 향 1화소를 두고 번갈아 나란하게 된 형태로 배치되어 있다.

시차 배리어 방식에서는, 도3(b)에 나타낸 바와 같은 영상을, 영상 표시 패널(301)에 표시하고, 동일 시점의 화소의 간격보다도 좁은 간격으로 슬릿을 가진 시차 배리어(302)를 통하는 것에 의해, 좌안용 영상은 좌안(303) 만으로, 우안용 영상은 우안(304) 만으로 관찰함애 의해, 입체시를 행할 수 있다.

또한, 도1에는 도시되지 않았지만, 다중화 데이터에 음성 데이터가 포함되어 있는 경우에는, 분리 수단(11)에 의해 분리되어 복호처리된 후, 스피커로부터 출력된다.

이상과 같이 구성된 입체 영상 재생 장치(10)의 동작에 대해, 도4를 참조하여 설명한다. 도4는 입체 영상 재생 장치(10)에 다중화 데이터가 공급되고 나서, 영상이 표시되기 까지의 처리의 흐름을 나타내는 도면이다.

분리 수단(11)에는, 영상 데이터와 음성 데이터와 제어 정보가 다중화된 다중화 데이터가 입력된다. 분리 수단(11)은 입력된 다중화 데이터를 분리한다(스텝ST101).

복호수단(12)은, 분리 수단(11)에 의해 분리된 영상 데이터가 소정의 부호화 방식으로 부호화되어 있는 경우에, 부호화 방식에 의해 규정되는 데이터의 서식을 해석하여, 영상 데이터를 복호한다(스텝ST1O2). 일반적으로 부호화된 영상 데이터에는, 영상 데이터의 사이즈에 관한 정보(영상 1 프레임의 화소 수인 화상 사이즈 정보)가 부호화되어 있다. 복호된 영상 데이터의 화상 사이즈 정보가 제어 수단(13)에 출력된다. 또한, 상기한 영상 데이터의 화상 사이즈 정보는 반드시 복호수 단(12)으로부터 취득할 필요는 없고, 다른 수단에 의해 별도 제어 수단(13)에 입력하도록 해도 된다. 영상 데이터가 부호화되어 있지 않은 경우에, 스텝ST1O2는 생략된다.

제어 수단(13)은, 분리 수단(11)으로부터 입력된 제어 정보를 해석하고, 이 중에서 기준 디스플레이 사이즈와 기준 해상도로부터 기준 도트간 피치 DP1을 산출한다. 또한, 표시 수단(15)의 디스플레이 사이즈와 해상도로부터 표시 수단(15)의 도트간 피치 DP2를 계산한다(스텝ST1O3).

도트간 피치는, 예컨대, 표시 수단(15)의 사이즈가 12.1인치로서, 해상도가 1024×768도트인 경우, 약 0.24mm로 계산된다. 또한, 도트간 피치를 계산할 때에는, 양안 시차에 관계하는 것은 수평 방향뿐인 것으로부터, 수평 방향의 도트간 피치만을 고려하도록 해도 된다.

다음에, 사이즈 변경 처리 유무에 따라 처리가 분기한다(스텝ST1O4). 사이즈 변경 처리를 행하는 경우에는, 처리가 스텝 ST1O5로 진행된다. 사이즈 변경 처리를 행하지 않는 경우에는, 처리가 스텝 ST1O7로 진행된다. 여기에서, 사이즈 변경 처리란 화상의 확대 처리 또는 축소 처리이다. 예컨대, 도8(a)에 나타낸 표시 장치가 기준 디스플레이이고, 도8(c)에 나타낸 표시 장치가 표시 수단(15)이라고 한다. 이 경우, 표시 수단(15)의 디스플레이 사이즈가 기준 디스플레이 사이즈보다 크고, 해상도도 기준 해상도보다 높아지게 되고, 기준이 되는 디스플레이에서 화면 전체에 표시되어 있는 영상이, 표시 수단(15)에서는 화면의 소정 부분에 표시된다. 이와 같은 경우에, 영상 데이터를 화면 전체에 표시하려면 확대 처리가 행해진다. 또한, 표시 수단(15)의 해상도가 기준이 되는 디스플레이의 해상도보다 낮은 경우에는, 기준이 되는 디스플레이에 화면 전체에 표시할 수 있는 영상 데이터가, 표시부(15)에서는 표시 화면 내에 수용되지 않는다. 이와 같은 경우에, 영상 데이터를 화면 전체로 표시하려면 축소 처리가 행해진다. 사이즈 변경 처리의 유무는 내부 플래그로서, 사전에 설정되어 있거나, 유저에 의해 설정된다. 사이즈 변경 처리의 유무는 제어 신호 A로서 화상 처리 수단(14)에 입력된다.

스텝 ST1O5에서는, 다음의 처리가 행해진다. 먼저, 제어 수단(13)은 영상 데이터의 화상 사이즈 정보와, 표시 수단(15)의 해상도로부터 확대/축소율을 계산한다. 여기에서는 수평 방향에 대해서, 사이즈 변경 처리를 행하는 전과 후의 영상 데이터의 해상도의 비를 계산한 값을 확대/축소율이라 한다. 확대/축소율이 화상 처리 수단(14)에 입력되고, 화상 처리 수단(14)의 사이즈 변경 수단(141)에 의해 사이즈 변경 처리가 행해진다. 스텝 ST1O6에서, 제어 수단(13)은 표시 수단(15)의 도트간 피치 DP2에, 상기 확대/축소율을 곱하여, 도트간 피치 DP2를 보정한다. 이것은, 영상을 확대 처리하여 표시한 결과가, 도트간 피치가 커진 경우와 등가라고 생각되기 때문이다.

제어 수단(13)은, 표준 도트간 피치 DP1로 표시 수단(15)의 도트간 피치 DP2의 대소를 비교하고, 3차원 영상을 기준 디스플레이에 표시한 때의 시차량보다, 표시 수단(15)에 표시한 때의 시차량이 커지는지 아닌지를 판정한다(스텝 ST1O7). DP2가 DP1이하의 경우에는, 시차량이 변하지 않거나, 적어지기 때문에 보정의 필요가 없으므로, 처리가 스텝 ST1O9로 진행된다. DP2가 DP1보다 큰 경우에는, 시차량 이 크게 되기 때문에, 시차량의 조정이 필요하다고 판단되어, 처리가 스텝 ST1O8로 진행된다. 시차량 조정 처리의 유무는, 제어 신호 B로서 화상 처리 수단(14)에 입력되고, 시차량 조정 수단(142)에 의해 시차량의 조정 처리가 행해진다(스텝 ST1O8). 스텝 ST1O9에서, 제어 수단(13)은, 영상 데이터의 종별(2차원/ 3차원)을, 제어 신호 C로서 화상 처리 수단(14)과 표시 수단(15)에 대해 출력한다.

영상 데이터가 3차원 영상인 경우에는, 화상 처리 수단(14)의 표시 화상 생성 수단(143)에 의해 표시 수단(15)에서의 3차원 영상의 표시 형식으로 변환되어, 표시 수단(15)에 표시된다.

여기에서, 시차량 조정 처리에 대해서, 도5를 참조하여 설명한다. 도5는 디스플레이에 표시되는 3차원 영상을 관찰하는 상태를 윗쪽에서 내려다 본 구도로 되어 있다. 도5(a)에 있어서, 우안용 영상의 화소 R1은 표시 위치(501)에 표시되고, 대응하는 좌안용 영상의 화소 L1은 표시 위치(502)에 표시된다. 이러한 화소는 위치(503)에 결상하기 때문에, 디스플레이면보다 더 안쪽의 위치에서 관찰된다.

우안용 영상의 화소 R1의 표시 위치를 좌측으로 이동하여 위치(501)로부터 위치(504)로 변경된 상태가 도5(b)이다. 여기에서, 위치(503)에 형성된 영상을 위치(505)에서 관찰하게 된다. 위치(505)는 위치(503)에 비해 앞에 있기 때문에, 표시 면에 근접하여 관찰하게 된다. 도시되지 않았지만, 반대로 화소 R1을 501보다 우측으로 이동시키면, 위치(503)에 형성된 영상이 표시면보다 더 내측의 위치에서 보이게 된다.

도7(b)에 나타낸 바와 같이, 시차량이 너무 커지는 경우에는, 우안용 화상을 좌측 방향으로 이동시키거나 또는 좌안용 화상을 우측 방향으로 이동시켜 시차량을 조정한다. 시차량이란, 좌안용과 우안용의 화상의 각각에 대응하는 부분의 수평 방향의 상대 거리이고, 예컨대, 도5의 우안용 화상의 화소 R1의 표시 위치와, 그의 대응점인 좌안용 화상의 화소 L1의 표시 위치 사이의 상대 거리가 그 경우에 해당한다. 이 경우, 시차량을 작게 조정하려면, R1의 표시 위치와 좌안 화상의 화소 L1의 표시 위치를, 그것들의 상대 거리가 작아지는 방향으로 각각 움직여 주면 된다. 시차량 조정치는, 상기 위치(501)에서 위치(504)까지의 이동량을 지정하는 것이고, 도트간 피치 DP1,DP2의 비에 따라서, 사전에 정해진 값을 사용한다. 또한, 좌우의 영상을 각각 반대 방향으로, 상기 시차량 조정치의 반만 이동시키도록 해도 된다.

여기에서, 상기의 처리를 구체적인 사례에 의해 보충한다. 여기에서, 기준 디스플레이 사이즈가 10인치, 기준 해상도가 640×480도트인 3차원 영상을, 12.1인치, 1024×768도트의 디스플레이를 구비한 입체 영상 재생 장치에서 재생하는 경우를 생각한다. 기준 도트간 피치 DP1과 입체 영상 재생 장치의 표시 장치에서의 도트간 피치 DP2를 계산하면, DP1≒0.32mm, DP2≒0.24mm이다. 사이즈 변경 처리를 행하지 않는 경우, DP1>DP2이기 때문에 시차량의 조정을 행하지 않고 표시한다.

사이즈 변경 처리를 행하는 경우, 전화면 표시를 하기 위해 확대 처리를 행하면, 영상 데이터를 수평 방향, 수직 방향 모두 1.6배로 할 필요가 있다. 도트간 피치 DP2를 보정하면, DP2≒0.38이 된다. 이 경우, DP1<DP2이기 때문에 시차량의 조정을 행한다.

이와 같이 표시부(15)의 분해능에 따라, 적절하게 시차량을 조정하는 것에 의해 시차량이 한도를 넘어 커지고, 입체시가 생기지 않는 상태에서 3차원 영상 데이터를 표시하여 버리는 문제를 해결할 수 있다.

또한, 상기 실시예에서는, 시차량 조정 처리를 행할 때에, 시차량 조정치는 사전에 정해진 값을 사용하고 있는데, 3차원 영상의 최대 시차량, 또는 가장 중요한 피사체의 시차량 등의 시차 정보를 제어 정보에 포함시켜 수취하고, 도트간 피치 DP1, DP2의 비에 따라 상기 시차 정보를 변경하도록 해도 된다.

또한, 상기 실시예에서는, 기준 정보로서 사용하는 기준 디스플레이의 분해능에 관한 정보로서, 디스플레이 사이즈와 해상도가 제어 정보에 포함되어 있는 경우에 대해 설명하였지만, 이들 대신에 기준이 되는 도트간 피치나 단위 면적당의 도트 수가 제어 정보에 포함되는 경우에도, 마찬가지로 전술한 효과가 얻어진다. 또한, 분해능에 관한 정보 대신에 기준 디스플레이 상에서의 표시 사이즈가 제어 정보에 포함되어도 되고, 이 경우, 영상 데이터의 화상 사이즈 정보로 나누는 것에 의해 도트간 피치로 변경하면 된다.

또한, 상기 실시예에서는, 스텝 ST1O8에서 시차량 조정 처리를 행하고 있지만, 도트간 피치 DP2를 DP1로 나눈 값을 축소율로 하여, 사이즈 변경 처리를 행하도록 해도 된다. 영상 데이터를 축소함에 의해 시차량이 감소하기 때문에, 상기 시차량 조정 처리와 같은 효과가 얻어진다.

또한, 상기 실시예에서는, 확대/축소율은 계산에 의해 구하고 있지만, 유저 지정에 의해 확대/축소율을 지정할 수 있도록 해도 된다. 이 경우, 지정된 확대/축소율에 따라 시차량을 보정하도록 한다. 또한, 이 경우뿐 아니라, 제어 수단(13)에 서의 사이즈 변경 처리 유무나 시차량 조정 처리 유무를 유저에게 통지하는 수단을 별도로 제공하고, 유저에 영상 데이터가 확대 또는 축소되는 것이나, 시차량이 조정되어 있는 사실을 표시하고, 또한 기준 디스플레이 사이즈와 기준 해상도를 표시하도록 해도 된다. 이 구성에 의해, 유저가 사이즈 변경 처리의 유무나 시차량 조정 처리의 유무를 알 수 있는 것 뿐만 아니라, 예컨대, 일반적으로 보급되어 있는 퍼스널 컴퓨터와 같이 복수의 해상도를 선택할 수 있는 경우에, 해상도를 절환함에 의해 원하는 시차량으로 영상 데이터를 표시할 수 있기 때문에, 편의성을 향상시킬 수 있다.

<제2 실시예>

또한, 본 발명에 따른 다른 실시예에 대해 설명한다. 본 실시예에서의 입체 영상 재생 장치는, 3차원 영상의 최대 시차량이나 가장 중요한 피사체의 시차량 등의 시차 정보를 제어 정보에 포함하여 수취하고, 표시 수단(15)에 표시되는 3차원 영상의 시차량을 조정하는 것이다. 여기에서, 시차 정보는 도트 단위라도 되고, 밀리미터 단위 등의 절대량으로 주어질 수 있다.

도6은, 이때의 처리 흐름을 나타내는 도면이다. 도6에서, 스텝 ST201과 스텝 ST202의 처리는 각각, 상기 실시예에서의 스텝 ST101과 스텝 ST1O2와 마찬가지이므로, 여기에서의 설명은 생략한다.

제어 수단(13)은, 사이즈 변경 처리를 행하는 전과 후의 영상 데이터의 사이즈로부터 확대/축소 비율을 계산하고(스텝 ST203), 상기한 시차 정보를 곱하여 실제의 시차량을 계산한다(스텝 ST204). 이때, 입력된 상기 시차 정보가 도트 단위인 경우에는, 표시 수단(15)에서의 도트간 피치 DP를 계산하고, 상기한 시차 정보에 도트간 피치 DP를 곱한다.

다음에, 스텝 ST204의 시차량과 소정의 제한치를 비교하고, 상기 시차량이 제한치를 넘는 경우에는, 처리가 스텝 ST206으로 진행되고, 그 이외의 경우에는 처리가 스텝 ST207로 진행한다(스텝 ST205). 여기에서 상기한 제한치는, 3차원 영상이 입체상으로서 융합 가능한 범위 내에 있도록 결정된다. 시차량이 사람의 양안의 사이의 거리 보다 커지면 입체시가 곤란하게 되는 것으로 알려져 있고, 예컨대 제한치는 그의 양안 사이의 거리인 6.5cm정도로 될 수 있다.

스텝 ST206에서는, 실제의 시차량이 제한치를 넘지 않도록, 확대/축소율을 제한한다. 이렇게 해서 계산한 확대/축소율을 화상 처리 수단(140에 출력한다.

화상 처리 수단(14)에서, 제한된 확대/축소율을 사용하여 사이즈 변경 처리를 행하고(스텝 ST207), 표시 수단(15)에 표시할 수 있는 표시 형식으로 변환한다(스텝 ST208). 이와 같이 화상의 확대/축소율을 제한함으로써, 시차량이 한도를 넘어 커지고, 입체시가 불가능한 상태에서, 3차원 영상 데이터를 표시해 버리는 문제를 해결할 수 있다.

또한, 상기 시차 정보 이외에 영상 데이터를 실제로 화면에 표시할 때의 사이즈(밀리미터 단위)가 제어 정보에 포함되어 있는 영상 데이터를 재생하도록 해도 된다. 이 경우에도, 지정된 표시 사이즈를 지키는 것에 의해, 시차량이 한도를 넘어 커지는 것이 없어지고, 입체시가 불가능한 상태에서, 3차원 영상 데이터를 표시해 버리는 문제를 해결할 수 있다.

또한, 확대/축소율이 제한된 것을 유저에게 통지하는 수단을 별도로 제공하고, 유저에 확대/축소율이 제한된 사실을 표시하고, 이울러 확대/축소율을 표시하는 것에 의해, 유저가 이 표시를 참고로, 원하는 확대/축소율로 영상 데이터를 표시하는 것이 가능하기 때문에, 편의성을 향상시킬 수 있다.

이상, 본 발명의 실시예에 대해 설명하였지만, 본 발명의 입체 영상 재생 장치는, 상기한 실시예로 한정되는 것은 아니고, 본 발명의 요지를 벗어나지 않는 범위 내에서 여러 가지의 변경을 가할 수 있는 것은 물론이다.

본 발명에 따른 입체 영상 재생 장치는, 기준 표시 사이즈나 기준 해상도를 알 수 있어서, 원하는 시차량에서 영상 데이터를 표시할 수 있기 때문에, 일반적으로 보급되어 있는 퍼스널 컴퓨터와 같이 복수의 해상도를 선택할 수 있는 기기에 대해 널리 적용할 수 있다.

Claims

3차원 영상 데이터의 표시를 제어하기 위한 제어 정보에 기초하여, 3차원 영상을 재생하는 입체 영상 재생 장치에 있어서,

상기 3차원 영상 데이터를 표시한 경우의 표시 화면에서의 시차량이, 상기 3차원 영상데이터를 기준이 되는 표시 장치에 표시한 때의 표시 화면에서의 시차량보다 크게 되는지 아닌지를, 상기 제어 정보에 기초하여 판정하는 판정 수단, 및

상기 시차량을 변경하기 위한 화상 처리를 실시하는 화상 처리 수단을 포함하고,

상기 판정 수단에 의해 상기 시차량이 커지는 것으로 판정된 경우에, 상기 화상 처리 수단에 의한 화상 처리를 행하는 것을 특징으로 하는 입체 영상 재생 장치.
제1항에 있어서, 상기 화상 처리 수단은, 상기 3차원 영상 데이터를 구성하는 소정의 시점의 영상을 수평방향으로 이동하여 시차량을 조정하는 시차량 조정 수단을 포함하는 것을 특징으로 하는 입체 영상 재생 장치.
제1항 또는 2항에 있어서, 상기 화상 처리 수단은, 상기 3차원 영상 데이터의 화상 사이즈를 변경하는 사이즈 변경 수단을 포함하는 것을 특징으로 하는 입체 영상 재생 장치.
제1항 내지 3항 중 어느 한 항에 있어서, 상기 제어 정보는, 상기 기준이 되는 표시 장치의 분해능에 관한 정보를 포함하는 것을 특징으로 하는 입체 영상 재생 장치.
제1항 내지 3항 중 어느 한 항에 있어서, 상기 제어 정보는, 상기 기준이 되는 표시 장치에 있어서, 상기 3차원 영상 데이터를 표시한 때의 표시 사이즈에 관한 정보를 포함하는 것을 특징으로 하는 입체 영상 재생 장치.
3차원 영상 데이터의 표시를 제어하기 위한 제어 정보에 기초하여, 3차원 영상을 재생하는 입체 영상 재생 장치에 있어서,

상기 제어 정보에 따라, 상기 3차원 영상 데이터를 표시한 때의 표시 화면에서의 시차량이, 입체시 가능한 값인지 아닌 지를 판정하는 판정 수단, 및

상기 3차원 영상 데이터의 화상 사이즈를 변경하는 사이즈 변경 수단을 포함하고,

상기 판정 수단에 의해 입체시 가능한 값이 아닌 것으로 판정된 경우, 상기 확대 및 축소비율을 제한하는 것을 특징으로 하는 입체 영상 재생 장치.
제6항에 있어서, 상기 제어 정보는, 중요한 피사체의 시차량을 포함하여 상기 3차원 영상 데이터의 시차량을 나타내는 시차 정보를 포함하는 것을 특징으로 하는 입체 영상 재생 장치.
3차원 영상 데이터의 표시를 제어하기 위한 제어 정보에 기초하여, 3차원 영상을 재생하는 입체 영상 재생 방법에 있어서,

상기 3차원 영상 데이터를 표시한 때의 표시 화면에서의 시차량이, 상기 3차원 영상 데이터를 기준이 되는 표시 장치에 표시한 때의 표시 화면에서의 시차량보다 크게 되는지 아닌지를, 상기 제어 정보에 기초하여 판정하는 판정 스텝, 및

시차량을 변경하기 위한 화상 처리를 실시하는 화상 처리 스텝을 포함하고,

상기 판정 스텝에 의해 시차량이 커지는 것으로 판정된 경우, 상기 화상 처리 스텝에 의한 화상 처리를 행하는 것을 특징으로 하는 입체 영상 재생 방법.
제8항에 있어서, 상기 화상 처리 스텝은, 상기 3차원 영상 데이터를 구성하는 소정의 시점의 영상을 수평 방향으로 이동하여 시차량을 조정하는 것을 특징으로 하는 입체 영상 재생 방법.
제8항 또는 9항에 있어서, 상기 화상 처리 스텝은, 상기 3차원 영상 데이터의 화상 사이즈를 변경하는 것을 특징으로 하는 입체 영상 재생 방법.
제8항 내지 10항 중 어느 한 항에 있어서, 상기 제어 정보는, 상기 기준이 되는 표시 장치의 분해능에 관한 정보를 포함하는 것을 특징으로 하는 입체 영상 재생 방법.
제8항 내지 10항 중 어느 한 항에 있어서, 상기 제어 정보는, 상기 기준이 되는 표시 장치에 있어서, 상기 3차원 영상 데이터를 표시한 때의 표시 사이즈를 포함하는 것을 특징으로 하는 입체 영상 재생 방법.
3차원 영상 데이터의 표시를 제어하기 위한 제어 정보에 기초하여, 3차원 영상을 재생하는 입체 영상 재생 방법에 있어서,

상기 제어 정보에 따라, 상기 3차원 영상 데이터를 표시한 때의 표시 화면에서의 시차량이, 입체시 가능한 값인지 아닌 지를 판정하는 판정 스텝, 및

상기 3차원 영상 데이터의 화상 사이즈를 변경하는 사이즈 변경 스텝을 포함하고,

상기 판정 스텝에 의해 입체시 가능한 값이 아닌 것으로 판정된 경우, 상기 확대 및 축소율을 제한하는 것을 특징으로 하는 입체 영상 재생 방법.
제13항에 있어서, 상기 제어 정보는, 중요한 피사체의 시차량을 포함하여 상기 3차원 영상 데이터의 시차량을 나타내는 시차 정보를 포함하는 것을 특징으로 하는 입체 영상 재생 방법.