JP2009031533A - 三次元画像表示装置、三次元画像表示方法およびそのプログラムを記憶した記憶媒体 - Google Patents
三次元画像表示装置、三次元画像表示方法およびそのプログラムを記憶した記憶媒体 Download PDFInfo
- Publication number
- JP2009031533A JP2009031533A JP2007195389A JP2007195389A JP2009031533A JP 2009031533 A JP2009031533 A JP 2009031533A JP 2007195389 A JP2007195389 A JP 2007195389A JP 2007195389 A JP2007195389 A JP 2007195389A JP 2009031533 A JP2009031533 A JP 2009031533A
- Authority
- JP
- Japan
- Prior art keywords
- image
- dimensional image
- screen
- projection
- light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Stereoscopic And Panoramic Photography (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
【課題】表示する三次元画像の表示領域に起因する不自然な画像表示を防止して、立体感や臨場感のある三次元画像表示装置、三次元画像表示方法およびそのプログラムを記憶した記憶媒体を得ることを目的とする。
【解決手段】三次元画像表示装置は、表示させる三次元画像に応じた光を投影する投影装置10と、投影装置10からの光を散乱させて三次元画像を投影表示するスクリーン20と、表示させる三次元画像に関する三次元画像情報50と、三次元画像情報50のうちスクリーン20への投影表示対象となる投影画像部分に関するマスク情報60と、に基づいて、三次元画像情報50の中から投影画像部分を選択してスクリーン20に表示させるよう投影装置10またはスクリーン20の少なくとも一方を制御する選択表示制御部70と、を備える。
【選択図】図1
【解決手段】三次元画像表示装置は、表示させる三次元画像に応じた光を投影する投影装置10と、投影装置10からの光を散乱させて三次元画像を投影表示するスクリーン20と、表示させる三次元画像に関する三次元画像情報50と、三次元画像情報50のうちスクリーン20への投影表示対象となる投影画像部分に関するマスク情報60と、に基づいて、三次元画像情報50の中から投影画像部分を選択してスクリーン20に表示させるよう投影装置10またはスクリーン20の少なくとも一方を制御する選択表示制御部70と、を備える。
【選択図】図1
Description
本発明は、三次元画像表示装置、三次元画像表示方法およびそのプログラムを記憶した記憶媒体に関するものである。
近年、表示デバイスの高解像度化、計算機能力の向上、ディジタル信号技術の進歩などに伴って、比較的安価に裸眼三次元画像表示システムを実現できる環境が整いつつあり、既にパララックスバリアを使った裸眼三次元画像表示機能を持った携帯電話やパーソナルコンピュータなどが商品化されている。しかしながら、これらの商品に使われている二眼式による三次元画像の表示方法では、決まった位置から画像を見る必要がある。このため、画像を立体視させるためには、観察者が一人に限定されるという欠点や、画像の観測位置が限定されるという欠点があった。
裸眼三次元画像を表示する方法の中で、インテグラルフォトグラフィ(IP)方式は、複数の観察者が同時に画像を観察することが出来る方法である。IP方式では、画像の観測位置が変われば画像の観測位置に伴って画像の見え方が変化するという特徴を持っており、画像表示の有力な方式の一つであると考えられている。
2004−325542号公報
しかしながら、IP方式を含む従来の三次元画像表示方法では、液晶ディスプレイなどの表示装置を使っているので、液晶ディスプレイの枠や画枠の位置に観察者のピントが引き込まれてしまい、表示する画像の立体感を失う場合があるという問題があった。
また、投影装置を使用することによってスクリーンの端部を目立たなくした場合であっても、スクリーンに映った被写体の背景と、被写体が投影される位置の背景(スクリーン配設位置の背景)とが異なるものであるため、画像の投影範囲が知覚され、それにより表示する画像の立体感や臨場感が損なわれる場合があるという問題があった。
本発明は、上記に鑑みてなされたものであって、表示する三次元画像の表示領域に起因する不自然な画像表示を防止して、立体感や臨場感のある三次元画像を表示する三次元画像表示装置、三次元画像表示方法およびそのプログラムを記憶した記憶媒体を得ることを目的とする。
上記課題を解決するために本発明は、表示させる三次元画像に応じた光を投影する投影装置と、前記投影装置からの光を散乱させて前記三次元画像を投影表示するスクリーンと、表示させる三次元画像に関する三次元画像情報と、前記三次元画像情報のうち前記スクリーンへの投影表示対象となる投影画像部分に関する画像マスク情報と、に基づいて、前記三次元画像情報の中から前記投影画像部分を選択して前記スクリーンに表示させるよう前記投影装置またはスクリーンの少なくとも一方を制御する選択表示制御部と、を備えるものである。
本発明によれば、表示する三次元画像の表示領域に起因する不自然な画像表示を防止して、立体感や臨場感のある三次元画像を表示する三次元画像表示装置、三次元画像表示方法およびそのプログラムを記憶した記憶媒体が得られる。
本発明の第1の発明の三次元画像表示装置は、表示させる三次元画像に応じた光を投影する投影装置と、投影装置からの光を散乱させて三次元画像を投影表示するスクリーンと、表示させる三次元画像に関する三次元画像情報と、三次元画像情報のうちスクリーンへの投影表示対象となる投影画像部分に関する画像マスク情報と、に基づいて、三次元画像情報の中から投影画像部分を選択してスクリーンに表示させるよう投影装置またはスクリーンの少なくとも一方を制御する選択表示制御部と、を備えるものであり、三次元画像のうち表示させたい画像部分を選択的に表示できる。
第2の発明の三次元画像表示装置は、第1の発明の三次元画像表示装置において、選択表示制御部は、投影画像部分の色をスクリーンに投影させるとともに投影画像部分以外の色をスクリーンに投影させないよう、投影装置を制御するものであり、色を表示させるか否かを制御することによって三次元画像のうち表示させたい画像部分を選択的に表示できる。
第3の発明の三次元画像表示装置は、第1または第2の発明の三次元画像表示装置において、投影装置とスクリーンとの間に配置されるとともに、投影装置からの光をスクリーンに反射する光反射部をさらに備え、投影装置は、光反射部を介してスクリーンに光を投影するものであり、投影装置とスクリーンとの配設間隔を短くできる。
第4の発明の三次元画像表示装置は、第3の発明の三次元画像表示装置において、光反射部は、空間光変調器であり、選択表示制御部は、空間光変調器に入射してくる光のうち投影画像部分の画素に対応する光を空間光変調器に反射させるとともに投影画像部分以外の画素に対応する光を空間光変調器に反射させないよう空間光変調器を制御するものであり、空間変調器の制御によって詳細に三次元画像を選択表示できる。
第5の発明の三次元画像表示装置は、第1〜第4の発明の三次元画像表示装置において、選択表示制御部は、投影画像部分とスクリーンの配設位置の背景画像とを合成するとともに、合成後の三次元画像をスクリーンに投影表示させるものであり、スクリーンの配設位置の背景画像中に投影画像部分を表示できる。
第6の発明の三次元画像表示装置は、第1〜第4の発明の三次元画像表示装置において、選択表示制御部は、投影画像部分を可視光でスクリーンに投影するとともに投影画像部分以外の画像部分を可視光以外の光でスクリーンに投影するよう投影装置を制御し、スクリーンは、投影装置によって投影された光のうち可視光のみを散乱させることによって三次元画像を投影表示するものであり、画像を可視光を用いて投影するか否かを制御することによって三次元画像のうち表示させたい画像部分を選択的に表示できる。
第7の発明の三次元画像表示装置は、第1〜第4の発明の三次元画像表示装置において、選択表示制御部は、投影画像部分の画素に対応する投影光を散乱させるとともに投影画像部分以外の画素に対応する投影光を透過させるようスクリーンを制御することを特徴とする請求項1〜4のいずれか1つに記載の三次元画像表示装置。スクリーンに投影光を散乱させるか否かを制御することによって三次元画像のうち表示させたい画像部分を選択的に表示できる。
第8の発明の三次元画像表示装置は、第1〜第7の発明の三次元画像表示装置において、選択表示制御部による投影画像部分の選択表示処理を有効にするモードと選択表示制御部による投影画像部分の選択表示処理を無効にするモードとを、切替えるモード切替部をさらに備えるものであり、必要に応じて投影画像部分の選択表示処理を行なうことができる。
第9の発明の三次元画像表示装置は、第8の発明の三次元画像表示装置において、モード切替部は、ユーザからの指示情報に基づいて、投影画像部分の選択表示処理を有効にするモードと投影画像部分の選択表示処理を無効にするモードとを、切替えるものであり、ユーザが所望する態様で三次元画像を表示することができる。
第10の発明の三次元画像表示装置は、第8の発明の三次元画像表示装置において、三次元画像情報から三次元画像の特徴を抽出する特徴抽出部をさらに備え、モード切替部は、特徴抽出部が抽出した三次元画像の特徴に基づいて、投影画像部分の選択表示処理を有効にするモードと投影画像部分の選択表示処理を無効にするモードとを、切替えるものであり、三次元画像の特徴に応じた態様で三次元画像を表示することができる。
第11の発明の三次元画像表示装置は、第1〜第10の発明の三次元画像表示装置において、三次元画像情報は、投影表示される三次元画像の色に関する色情報および投影表示される三次元画像の表示方向に関する方向情報を有し、選択表示制御部は、色情報に対応する色を方向情報に対応する方向へ三次元画像を表示投影するよう投影装置を制御するものであり、色情報と方向情報に応じた適切な三次元画像を表示することができる。
第12の発明の三次元画像表示装置は、第11の発明の三次元画像表示装置においてスクリーンは、三次元画像の画像投影面にほぼ平行に配置されるとともに、スクリーンと一体化されたレンズシートによって三次元画像を投影表示するものであり、色情報と方向情報に応じた適切な三次元画像をレンズシートによって表示できる。
第13の発明の三次元画像表示装置は、第12の発明の三次元画像表示装置において、レンズシートは、蝿の目レンズであり、色情報と方向情報に応じた適切な三次元画像を蝿の目レンズによって表示できる。
第14の発明の三次元画像表示装置は、第12の発明の三次元画像表示装置において、レンズシートは、レンチキュラレンズであり、色情報と方向情報に応じた適切な三次元画像をレンチキュラレンズによって表示できる。
第15の発明の三次元画像表示装置は、第1〜第14の発明の三次元画像表示装置において、投影画像部分をスクリーンへ投影表示させる際に投影画像部分を遮光する遮光マスク量と投影画像部分以外を遮光する遮光マスク量との間の中間マスク量が画像マスク情報に設定されている場合、選択表示制御部は、中間マスク量が設定されている投影画像部分とスクリーンの配設位置の背景画像とを、中間マスク量に基づいて合成するとともに、合成後の三次元画像をスクリーンに投影表示させるものであり、所定の遮光量によって投影画像部分を遮光しつつ、この投影画像部分と背景画像とを合成して三次元画像を表示できる。
第16の発明の三次元画像表示装置は、第1〜第15の発明の三次元画像表示装置において、複数方向から被写体画像を撮像する撮像部と、撮像部が複数方向から撮像した各被写体画像を三次元画像として合成する三次元画像合成部と、をさらに備え、スクリーンは、三次元画像合成部が合成した三次元画像を投影表示するものであり、撮像した被写体画像の三次元画像を表示することができる。
第17の発明の三次元画像表示方法は、表示させる三次元画像に関する三次元画像情報と、三次元画像情報のうちスクリーンへの投影表示対象となる投影画像部分に関する画像マスク情報と、に基づいて、三次元画像情報の中から投影画像部分を選択する選択ステップと、選択された投影画像部分に応じた光をスクリーンに投影する投影ステップと、投影された光を散乱させて投影画像部分をスクリーンに投影表示する表示ステップと、を含むものであり、三次元画像のうち表示させたい画像部分を選択的に表示できる。
第18の発明の三次元画像表示方法のプログラムを記憶した記憶媒体は、第17の発明の三次元画像表示方法のプログラムを記憶した記憶媒体であり、三次元画像のうち表示させたい画像部分を選択的に表示させることができる。
以下の説明において、三次元画像を投影する方法については、種々の方法があるが、例えば図7に示すようにレンズシートを使ったIP方式を使う。このIP方式では、投影装置10によって、レンズアレイ15を貼り合せたスクリーン20に、レンズのピッチ11に対応した二次元の画像12を投影する。これにより、観察者(視者)80は、立体感のある三次元画像を観察することが出来る。図7に示したレンズシート(レンズアレイ15を貼り合せたスクリーン20)は、蝿の目レンズであってもよいし、レンチキュラレンズであってもよい。以下、図を参照しながら、発明を実施する最良の形態について説明する。
(実施の形態1)
図1は本発明の実施の形態1に係る三次元画像表示装置の構成を示す図である。図1において、10は三次元画像に関する情報(後述の三次元画像情報50)に基づいて画像の投影処理を行なう投影装置、20は投影装置10によって投影される画像を表示するスクリーン、50はスクリーン20に投影する画像の三次元画像情報、30は三次元画像情報50のうち画像の色に関する色情報、40は三次元画像情報50のうち画像への光線方向に関する方向情報(各色情報の色を表示する方向に関する情報)、60は三次元画像情報50の有効部分(スクリーン20に表示させる領域)を示すマスク情報(画像マスク情報)、70は三次元画像情報50とマスク情報60に基づいて投影装置10やスクリーン20を制御する選択表示制御部70である。
図1は本発明の実施の形態1に係る三次元画像表示装置の構成を示す図である。図1において、10は三次元画像に関する情報(後述の三次元画像情報50)に基づいて画像の投影処理を行なう投影装置、20は投影装置10によって投影される画像を表示するスクリーン、50はスクリーン20に投影する画像の三次元画像情報、30は三次元画像情報50のうち画像の色に関する色情報、40は三次元画像情報50のうち画像への光線方向に関する方向情報(各色情報の色を表示する方向に関する情報)、60は三次元画像情報50の有効部分(スクリーン20に表示させる領域)を示すマスク情報(画像マスク情報)、70は三次元画像情報50とマスク情報60に基づいて投影装置10やスクリーン20を制御する選択表示制御部70である。
選択表示制御部70は、色情報30と方向情報40を持った三次元画像情報50に応じた画像をスクリーン20に表示させる際に、マスク情報60に基づいて、三次元画像情報50に含まれる三次元画像の一部(投影表示対象)を選択的に表示するよう、投影装置10やスクリーン20を制御する。
投影装置10は、画像の投影方向(投影面)にほぼ平行に配置されたスクリーン20に、三次元画像を投影する。本実施の形態の投影装置10は、選択表示制御部70からの指示に基づき、三次元画像情報50の一部を用いてスクリーン20に三次元画像の一部を投影する。具体的には、投影装置10は、投影表示対象となる画像部分(投影画像部分)の色をスクリーン20に投影するとともに投影表示対象とならない画像部分の色をスクリーン20に投影しない。これにより、投影画像を見る人(観察者)に対して三次元画像の見せたい部分だけを投影できるので、観察者にスクリーン20(表示装置)の枠や画枠を意識させることなく、立体感と臨場感のある三次元画像を表示することができる。なお、本実施の形態に係るマスク情報60は、三次元画像のうちスクリーン20に表示させたい三次元画像の部分(データ)を表していることとする。
図2は、スクリーンへの三次元画像の投影方向を説明するための図である。スクリーン20と投影装置10は、投影装置10からスクリーン20への三次元画像の投影方向によって、光線の透過と散乱とを切替えることができる。
スクリーン20は、スクリーン20の主面(裏面)に所定範囲の入射角度で入射してくる光線のみを透過させ、それ以外の光線を散乱させる性質を有している。例えば、図2に示すスクリーン20は、斜線で示される角度の範囲(角度範囲21)から入射する光線22を透過させ、この角度範囲21の範囲外から入射してくる光線23を散乱させる。
従って、光線23の方向にプロジェクタ(投影装置10)を配置すれば、投影装置10からスクリーン20への光線はスクリーン20で散乱する。そして、投影装置10の配置される方向とは異なる他の方向(角度範囲21)からの光線は、スクリーン20を透過する。このため、観察者80が図2に示す方向D1(観察者80側に延長された角度範囲21)からスクリーン20を見れば、観察者80は投影装置10によるスクリーン20への投影画像を見ることが出来る。
本実施の形態では、投影装置10の枠(投影エリアの外縁部)に三次元画像(投影される三次元画像の外縁部)がかからないよう、スクリーン20に三次元画像を投影できる範囲よりも狭い範囲で三次元画像を投影させる。このため、スクリーン20に投影できる範囲よりも狭い範囲の物体像または人物像だけをマスク情報60に設定しておく。選択表示制御部70は、マスク情報60に基づいて、スクリーン20に投影させる三次元画像の部分を画素単位で制御する。具体的には、選択表示制御部70は、マスク情報60に対応する色情報によって示される色だけを投影するよう投影装置10を制御する。
投影装置10は、選択表示制御部70からの指示に基づいて、画素単位で三次元画像を投影する。これにより、観察者80からスクリーン20を見ると、三次元画像の枠(外縁部)は目立つことない。また、人や物の撮影された側の背景を映す代わりに、人や物だけを表示して、その背景には、再生側の背景(スクリーン20の背景)を表示する。したがって、投影装置10は、物体像や人物像が宙に浮いたようにスクリーン20に画像を投影することができる。これにより、投影装置10は、その場にない物体や人物が、あたかもそこに在る又はあたかもそこに居るかのように見えるよう、スクリーン20に三次元画像を投影表示させることが可能となる。
なお、本実施の形態では、マスク情報60が三次元画像のうちスクリーン20に表示させたい三次元画像の部分を表している場合について説明したが、マスク情報60は三次元画像のうちスクリーン20に表示させたくない三次元画像の部分を表してもよい。
また、三次元画像表示装置は、選択表示制御部70(三次元画像の選択的な表示機能)(選択表示処理)を有効にするモードと無効にするモードとを切替えるモード切替え部を備える構成としてもよい。これにより、三次元画像表示装置は、三次元画像の選択的な表示と全ての三次元画像の表示との両方を行なうことが可能となる。例えば、撮影側の背景(人や物を撮影した際の背景)をスクリーン20に映したい場合には、選択表示制御部70の機能を無効にする。
モード切替え部は、例えばユーザ(観測者)から外部入力され指示に基づいて、有効モードと無効モードを切替える。これにより、ユーザ所望のモードで三次元画像を表示することが可能となる。
また、三次元画像表示装置は、三次元画像情報50から画像の特徴を抽出する特徴抽出部と、抽出された画像の特徴に基づいてモード切替え部を制御するモード制御部を備える構成としてもよい。
三次元画像表示装置が特徴抽出部とモード制御部を備える場合、三次元画像表示装置は、三次元画像情報50に基づいて選択表示制御部70を有効にするモードと無効にするモードとの何れを用いるかを自動判断する。例えば、三次元画像表示装置は、撮影された画像の背景が単一のテクスチャである場合にモードを有効にする(撮影側の背景は表示しない)と判断する。
また、三次元画像表示装置は、三次元画像の表示方法として多眼式やインテグラルフォトグラフィ方式などのように光線の色と方向を再現して画像を表示してもよい。この場合、三次元画像表示装置は、色情報を方向情報の方向に表示投影する。図8に示すように、三次元画像表示装置は、例えば色情報101、色情報102、色情報103、色情報104を、それぞれ方向情報105、方向情報106、方向情報107、方向情報108に対応する方向に表示投影する。
また、三次元画像表示装置は、インテグラルフォトグラフィ方式で画像を表示する場合、図7に示した色情報に従って投影された光線(色情報により示される色)をレンズアレイ15の効果によって方向情報に対応する方向に投影する。
また、マスク情報60は、三次元画像のうちスクリーン20に表示させたい三次元画像の部分(マスク情報60がオンの部分)を示す場合や、三次元画像のうちスクリーン20に表示させない三次元画像の部分を示す場合に限らず、マスク情報60にこれらの中間を示すデータ(オンオフ以外の中間データ)を含めてもよい。
例えば、被写体がガラスなどの透明の場合、被写体はある程度透けて見える必要があるので、マスク情報60のオン(投影表示させる画像部分を遮光する遮光マスク量)とオフ(投影表示させない画像部分を遮光する遮光マスク量)の中間値によって被写体の部分も撮影された画像と再生側の背景を合わせて表示する。三次元画像表示装置は、中間値(中間マスク量)に応じた透明度で被写体の三次元画像を表示する。
ところで、本実施の形態で説明した画像の投影処理は、三次元画像表示装置が所定の記録媒体に記録されたプログラムを読み出して実行してもよい。記録媒体は、例えばフレキシブルディスク(FD)、CD、MOディスク、DVD、光磁気ディスク、ハードディスクドライブ(HDD)、RAM、ROMなどである。
また、三次元画像表示装置は、複数の方向の被写体画像を撮像する撮像部、複数の方向の被写体画像から三次元画像を合成する三次元画像合成部、必要に応じて三次元画像の圧縮復元を行なうとともに遠隔地と三次元画像の通信を行なう三次元画像通信部を備える構成としてもよい。
三次元画像表示装置が撮像部を備える場合、三次元画像表示装置は例えば撮像部が撮像した被写体画像を用いてスクリーン20に三次元画像を投影する。また、三次元画像表示装置が三次元画像合成部を備える場合、三次元画像表示装置は例えば撮像部が撮像した複数方向の被写体画像から三次元画像を合成し、合成した三次元画像をスクリーン20に投影する。また、三次元画像表示装置が三次元画像通信部を備える場合、三次元画像表示装置は例えば遠隔地(外部装置)から送られてくる三次元画像を三次元画像通信部によって受信し、受信した三次元画像をスクリーン20に投影する。また、三次元画像表示装置は、必要に応じて、被写体画像や三次元画像を遠隔地に送信してもよい。
このように、実施の形態1によれば、マスク情報60に基づいて、三次元画像を投影できる範囲よりも狭い範囲で三次元画像をスクリーン20に投影させるので、三次元画像の表示領域に起因する不自然な画像表示を防止して、立体感や臨場感のある三次元画像を表示することが可能となる。
また、選択表示制御部70が、マスク情報60に対応する色情報によって示される色だけを投影するよう投影装置10を制御するので、投影装置10を容易に制御して立体感や臨場感のある三次元画像を容易に表示することが可能となる。
(実施の形態2)
次に、本発明の実施の形態2について説明する。実施の形態2では、鏡(光反射部)を用いて投影装置10からの三次元画像をスクリーン20に投影する。図3は、実施の形態2に係る三次元画像表示装置の鏡の配設位置を説明するための図であり、三次元画像表示装置内における鏡90の設置例を示している。図3では、三次元画像表示装置の一部として、投影装置10、スクリーン20、鏡90を示している。
次に、本発明の実施の形態2について説明する。実施の形態2では、鏡(光反射部)を用いて投影装置10からの三次元画像をスクリーン20に投影する。図3は、実施の形態2に係る三次元画像表示装置の鏡の配設位置を説明するための図であり、三次元画像表示装置内における鏡90の設置例を示している。図3では、三次元画像表示装置の一部として、投影装置10、スクリーン20、鏡90を示している。
三次元画像表示装置では、投影装置10からの光線31が鏡90で反射され、光線31が反射光32としてスクリーン20に投射される。これにより、投影装置10とスクリーン20との間の距離を投影距離(投影装置10とスクリーン20の配設間隔)に合わせる必要がなくなるので、三次元画像表示装置を小さな構成にすることが可能となる。
実施の形態2の三次元画像表示装置も実施の形態1の三次元画像表示装置と同様に、観察者80から見て三次元画像の枠は目立つことなく、物体像や人物像が宙に浮いたように三次元画像をスクリーン20に投影することが可能となる。
なお、本実施の形態では、三次元画像表示装置が1つの鏡90によって投影装置10からの光線31をスクリーン20へ反射する場合について説明したが、三次元画像表示装置が複数枚の鏡90を備える構成としてもよい。この場合、各鏡90によって投影装置10からの光線31を順番に反射しスクリーン20まで光線31を導く。これにより、三次元画像表示装置の備える鏡90が1枚である場合よりも、投影装置10とスクリーン20の間の配設間隔を短くすることが可能となる。したがって、三次元画像表示装置の備える鏡90が1枚である場合よりも、三次元画像表示装置を小さく構成することが可能となる。
ところで、三次元画像表示装置の鏡90を空間光変調器で構成してもよい。この場合、鏡90を、三次元画像の画素単位で反射制御や透過制御できる液晶などの空間光変調器で構成しておく。そして、選択表示制御部70は、空間光変調器の画素と三次元画像情報50の画素とが対応するよう空間光変調器を制御する。このとき、選択表示制御部70は、マスク情報60に対応する三次元画像だけを選択的に空間光変調器で鏡90のように反射させ、この反射光をスクリーン20に投影することによって、三次元画像の枠は目立つことなく、物体像や人物像が宙に浮いたように三次元画像をスクリーン20に投影することが可能となる。
図4は、実施の形態2に係る三次元画像表示装置の動作手順を示すフローチャートである。図4では、三次元画像表示装置の空間光変調器を用いた画像投影に関する動作手順を示している。
三次元画像表示装置では、予め投影装置10と、鏡90を構成する空間光変調器とに関するキャリブレーションを行なっておく。これにより、三次元画像表示装置では、投影画像の画素と、空間光変調器の画素との対応関係を予め認識しておく。
三次元画像表示装置の選択表示制御部70は、まずマスク情報60で指定されている画素(選択表示させる画像の画素)を空間光変調器の画素に変換する(S1)。次に、選択表示制御部70は、マスク情報60に対応する部分(画素)だけを反射し、それ以外の部分は透過するよう空間光変調器の設定(制御)を行なう(S2)。これにより、三次元画像表示装置は、投影装置10からの三次元画像のうち、空間光変調器で所定の画素(マスク情報60に対応する画素)だけを反射させて三次元画像をスクリーン20に投影する(S3)。
このように、実施の形態2によれば、鏡90を用いてスクリーン20に三次元画像を投影するので三次元画像表示装置の構成を小さな構成にすることが可能となる。また、投影装置10からの光線31を反射する鏡90として空間光変調器を用いるので、スクリーン20に投影させる三次元画像の部分を空間光変調器によって画素単位で制御できる。
(実施の形態3)
次に、本発明の実施の形態3について説明する。実施の形態3では、マスク情報60に対応する被写体の一部分(被写体の周縁部)以外(人物像など)は、三次元画像を再生する側の背景画像(スクリーン20の配設位置の背景)と合成する。図5は、実施の形態3に係る三次元画像表示装置の動作手順を示すフローチャートである。本実施の形態では、三次元画像を再生する側の背景画像を複数方向から撮像した撮影画像を準備しておき、三次元画像表示装置がこの背景画像(三次元画像)を外部装置(画像の撮像装置など)から取得することが出来るものとする。
次に、本発明の実施の形態3について説明する。実施の形態3では、マスク情報60に対応する被写体の一部分(被写体の周縁部)以外(人物像など)は、三次元画像を再生する側の背景画像(スクリーン20の配設位置の背景)と合成する。図5は、実施の形態3に係る三次元画像表示装置の動作手順を示すフローチャートである。本実施の形態では、三次元画像を再生する側の背景画像を複数方向から撮像した撮影画像を準備しておき、三次元画像表示装置がこの背景画像(三次元画像)を外部装置(画像の撮像装置など)から取得することが出来るものとする。
三次元画像表示装置の選択表示制御部70は、まず、マスク情報60がオフの部分に対応する三次元画像であって、再生する側の背景に対応する三次元画像を取得する(S11)。
次に、選択表示制御部70は、マスク情報60がオンの部分に対応する元の三次元画像と、取得した背景画像(三次元画像)を合成する(S12)。そして、選択表示制御部70は、合成した三次元画像をスクリーン20に投影する(S13)。
このように、実施の形態3によれば、再生する側の背景画像を三次元画像で再生するので、観察者80から見て三次元画像の枠は目立つことなく、物体像や人物像などの三次元画像を、宙に浮いたようにスクリーン20に投影することが可能となる。
(実施の形態4)
次に、本発明の実施の形態4について説明する。実施の形態4では、スクリーン20が可視光の照射された箇所の入射光を散乱させ、可視光でない光が照射された場合は入射光を透過させる。
次に、本発明の実施の形態4について説明する。実施の形態4では、スクリーン20が可視光の照射された箇所の入射光を散乱させ、可視光でない光が照射された場合は入射光を透過させる。
三次元画像表示装置は、可視光を散乱するとともに可視光でない光を透過するスクリーン20を用いて三次元画像の投影を行なう。このとき、選択表示制御部70は、マスク情報60がオンに対応する画像を可視光でスクリーン20に投影し、マスク情報60がオフの部分を可視光でない光でスクリーン20に投影するよう投影装置10を制御する。
このように、実施の形態4によれば、スクリーン20では可視光のみを散乱させることができるので、観察者80から見て三次元画像の枠は目立つことなく、物体像や人物像などの三次元画像を、宙に浮いたようにスクリーン20に投影することが可能となる。
(実施の形態5)
次に、本発明の実施の形態5について説明する。実施の形態5では、スクリーン20が投影画素単位で、入射光の透過と散乱を切替える。図6は、実施の形態5に係る三次元画像表示装置の動作手順を示すフローチャートである。本実施の形態では、選択表示制御部70が、投影装置10によってスクリーン20に投影させられる画素に対応する単位(画素単位)でスクリーン20への入射光の透過範囲や散乱範囲を切替える。
次に、本発明の実施の形態5について説明する。実施の形態5では、スクリーン20が投影画素単位で、入射光の透過と散乱を切替える。図6は、実施の形態5に係る三次元画像表示装置の動作手順を示すフローチャートである。本実施の形態では、選択表示制御部70が、投影装置10によってスクリーン20に投影させられる画素に対応する単位(画素単位)でスクリーン20への入射光の透過範囲や散乱範囲を切替える。
三次元画像表示装置の選択表示制御部70は、マスク情報60の三次元画像に対応するスクリーン20上の部分(三次元画像の画素位置)を求める(S21)。次に、選択表示制御部70は、マスク情報60に対応するスクリーン20の部分を散乱させ、それ以外の部分を透過させるようスクリーン20を設定(制御)する(S22)。これにより、三次元画像表示装置は、投影装置10からの三次元画像のうち、マスク情報60に対応するスクリーン20の部分(三次元画像)をスクリーン20に投影する(S23)。
このように、実施の形態5によれば、マスク情報60に対応するスクリーン20の部分をスクリーン20に散乱させるので、観察者80から見て三次元画像の枠は目立つことなく、物体像や人物像などの三次元画像を、宙に浮いたようにスクリーン20に投影することが可能となる。
以上のように、本発明に係る三次元画像表示装置、三次元画像表示方法およびそのプログラムを記憶した記憶媒体は、三次元画像の表示に適している。
10 投影装置
11 ピッチ
12 画像
15 レンズアレイ
20 スクリーン
21 角度範囲
22,23,31 光線
30 色情報
32 反射光
40 方向情報
50 三次元画像情報
60 マスク情報
70 選択表示制御部
80 観察者
90 鏡
11 ピッチ
12 画像
15 レンズアレイ
20 スクリーン
21 角度範囲
22,23,31 光線
30 色情報
32 反射光
40 方向情報
50 三次元画像情報
60 マスク情報
70 選択表示制御部
80 観察者
90 鏡
Claims (18)
- 表示させる三次元画像に応じた光を投影する投影装置と、
前記投影装置からの光を散乱させて前記三次元画像を投影表示するスクリーンと、
表示させる三次元画像に関する三次元画像情報と、前記三次元画像情報のうち前記スクリーンへの投影表示対象となる投影画像部分に関する画像マスク情報と、に基づいて、前記三次元画像情報の中から前記投影画像部分を選択して前記スクリーンに表示させるよう前記投影装置またはスクリーンの少なくとも一方を制御する選択表示制御部と、
を備えることを特徴とする三次元画像表示装置。 - 前記選択表示制御部は、前記投影画像部分の色を前記スクリーンに投影させるとともに前記投影画像部分以外の色を前記スクリーンに投影させないよう、前記投影装置を制御することを特徴とする請求項1に記載の三次元画像表示装置。
- 前記投影装置と前記スクリーンとの間に配置されるとともに、前記投影装置からの光を前記スクリーンに反射する光反射部をさらに備え、
前記投影装置は、前記光反射部を介して前記スクリーンに光を投影することを特徴とする請求項1または2に記載の三次元画像表示装置。 - 前記光反射部は、空間光変調器であり、
前記選択表示制御部は、前記空間光変調器に入射してくる光のうち前記投影画像部分の画素に対応する光を前記空間光変調器に反射させるとともに前記投影画像部分以外の画素に対応する光を前記空間光変調器に反射させないよう前記空間光変調器を制御することを特徴とする請求項3に記載の三次元画像表示装置。 - 前記選択表示制御部は、前記投影画像部分と前記スクリーンの配設位置の背景画像とを合成するとともに、合成後の三次元画像を前記スクリーンに投影表示させることを特徴とする請求項1〜4のいずれか1つに記載の三次元画像表示装置。
- 前記選択表示制御部は、前記投影画像部分を可視光で前記スクリーンに投影するとともに前記投影画像部分以外の画像部分を可視光以外の光で前記スクリーンに投影するよう前記投影装置を制御し、
前記スクリーンは、前記投影装置によって投影された光のうち可視光のみを散乱させることによって前記三次元画像を投影表示することを特徴とする請求項1〜4のいずれか1つに記載の三次元画像表示装置。 - 前記選択表示制御部は、前記投影画像部分の画素に対応する投影光を散乱させるとともに前記投影画像部分以外の画素に対応する投影光を透過させるよう前記スクリーンを制御することを特徴とする請求項1〜4のいずれか1つに記載の三次元画像表示装置。
- 前記選択表示制御部による前記投影画像部分の選択表示処理を有効にするモードと前記選択表示制御部による前記投影画像部分の選択表示処理を無効にするモードとを、切替えるモード切替部をさらに備えることを特徴とする請求項1〜7のいずれか1つに記載の三次元画像表示装置。
- 前記モード切替部は、ユーザからの指示情報に基づいて、前記投影画像部分の選択表示処理を有効にするモードと前記投影画像部分の選択表示処理を無効にするモードとを、切替えることを特徴とする請求項8に記載の三次元画像表示装置。
- 前記三次元画像情報から三次元画像の特徴を抽出する特徴抽出部をさらに備え、
前記モード切替部は、前記特徴抽出部が抽出した三次元画像の特徴に基づいて、前記投影画像部分の選択表示処理を有効にするモードと前記投影画像部分の選択表示処理を無効にするモードとを、切替えることを特徴とする請求8に記載の三次元画像表示装置。 - 前記三次元画像情報は、投影表示される三次元画像の色に関する色情報および投影表示される三次元画像の表示方向に関する方向情報を有し、
前記選択表示制御部は、前記色情報に対応する色を前記方向情報に対応する方向へ前記三次元画像を表示投影するよう前記投影装置を制御することを特徴とする請求項1〜10のいずれか1つに記載の三次元画像表示装置。 - 前記スクリーンは、前記三次元画像の画像投影面にほぼ平行に配置されるとともに、前記スクリーンと一体化された前記レンズシートによって前記三次元画像を投影表示することを特徴とする請求項11に記載の三次元画像表示装置。
- 前記レンズシートは、蝿の目レンズであることを特徴とする請求項12に記載の三次元画像表示装置。
- 前記レンズシートは、レンチキュラレンズであることを特徴とする請求項12に記載の三次元画像表示装置。
- 前記投影画像部分を前記スクリーンへ投影表示させる際に前記投影画像部分を遮光する遮光マスク量と前記投影画像部分以外を遮光する遮光マスク量との間の中間マスク量が前記画像マスク情報に設定されている場合、
前記選択表示制御部は、前記中間マスク量が設定されている投影画像部分と前記スクリーンの配設位置の背景画像とを、前記中間マスク量に基づいて合成するとともに、合成後の三次元画像を前記スクリーンに投影表示させることを特徴とする請求項1〜14のいずれか1つに記載の三次元画像表示装置。 - 複数方向から被写体画像を撮像する撮像部と、
前記撮像部が複数方向から撮像した各被写体画像を三次元画像として合成する三次元画像合成部と、
をさらに備え、
前記スクリーンは、前記三次元画像合成部が合成した三次元画像を投影表示することを特徴とする請求項1〜15のいずれか1つに記載の三次元画像表示装置。 - 表示させる三次元画像に関する三次元画像情報と、前記三次元画像情報のうち前記スクリーンへの投影表示対象となる投影画像部分に関する画像マスク情報と、に基づいて、前記三次元画像情報の中から前記投影画像部分を選択する選択ステップと、
選択された前記投影画像部分に応じた光をスクリーンに投影する投影ステップと、
投影された光を散乱させて前記投影画像部分をスクリーンに投影表示する表示ステップと、
を含むことを特徴とする三次元画像表示方法。 - 前記請求項17に記載の三次元画像表示方法のプログラムを記憶した記憶媒体。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007195389A JP2009031533A (ja) | 2007-07-27 | 2007-07-27 | 三次元画像表示装置、三次元画像表示方法およびそのプログラムを記憶した記憶媒体 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007195389A JP2009031533A (ja) | 2007-07-27 | 2007-07-27 | 三次元画像表示装置、三次元画像表示方法およびそのプログラムを記憶した記憶媒体 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2009031533A true JP2009031533A (ja) | 2009-02-12 |
Family
ID=40402103
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007195389A Pending JP2009031533A (ja) | 2007-07-27 | 2007-07-27 | 三次元画像表示装置、三次元画像表示方法およびそのプログラムを記憶した記憶媒体 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2009031533A (ja) |
-
2007
- 2007-07-27 JP JP2007195389A patent/JP2009031533A/ja active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10397556B2 (en) | Perspective altering display system | |
JP3022558B1 (ja) | 三次元表示方法及び装置 | |
KR20150068299A (ko) | 다면 영상 생성 방법 및 시스템 | |
JP4712872B2 (ja) | 多次元画像化システムおよびその方法 | |
JP6878389B2 (ja) | 立体像表示装置及び立体像表示方法 | |
JP4111832B2 (ja) | 3dまたは4d画像を見るための電子式仮想レンズ | |
JPH09238369A (ja) | 3次元像表示装置 | |
WO2013108285A1 (ja) | 画像記録装置、立体画像再生装置、画像記録方法、及び立体画像再生方法 | |
KR100351805B1 (ko) | 3차원 영상 디스플레이 시스템 | |
JP6166985B2 (ja) | 画像生成装置および画像生成プログラム | |
JP2017199958A (ja) | 撮像装置、その制御方法、および制御プログラム | |
US20080024595A1 (en) | 3D Image Capture Camera And Non-Stereoscopic 3D Viewing Device That Does Not Require Glasses | |
US8717425B2 (en) | System for stereoscopically viewing motion pictures | |
US20200201044A1 (en) | Periodic lenses systems for augmented reality | |
JP2013090180A (ja) | 立体映像撮影表示装置 | |
JP4505559B2 (ja) | スタジオセット用遠見パネルおよびこれを用いたスタジオセット | |
JP4475201B2 (ja) | 立体画像表示装置及び立体画像表示装置システム | |
KR20090026876A (ko) | 3차원 입체영상 부양 확대 장치 | |
KR102042914B1 (ko) | 다중 배열된 디스플레이 면을 이용한 플로팅 방식의 홀로그램 디스플레이 장치와 그를 위한 다중영상 생성방법 | |
JP2009031533A (ja) | 三次元画像表示装置、三次元画像表示方法およびそのプログラムを記憶した記憶媒体 | |
JP3583613B2 (ja) | 立体表示方法及び装置 | |
JPH03226198A (ja) | 立体表示装置 | |
KR102172329B1 (ko) | 다중 배열된 디스플레이 면을 이용한 플로팅 방식의 홀로그램 디스플레이 장치와 그를 위한 다중영상 생성방법 | |
JP2011250352A (ja) | 3次元画像データ生成方法 | |
KR100939080B1 (ko) | 합성 영상 생성 방법 및 장치, 합성 영상을 이용한 디스플레이 방법 및 장치 |