JP6161348B2 - 立体視画像データ生成装置 - Google Patents
立体視画像データ生成装置 Download PDFInfo
- Publication number
- JP6161348B2 JP6161348B2 JP2013057495A JP2013057495A JP6161348B2 JP 6161348 B2 JP6161348 B2 JP 6161348B2 JP 2013057495 A JP2013057495 A JP 2013057495A JP 2013057495 A JP2013057495 A JP 2013057495A JP 6161348 B2 JP6161348 B2 JP 6161348B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- depth
- stereoscopic
- eye image
- eye
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000008859 change Effects 0.000 claims description 35
- 238000000034 method Methods 0.000 claims description 29
- 238000013500 data storage Methods 0.000 claims description 4
- 238000004590 computer program Methods 0.000 claims description 3
- 230000008569 process Effects 0.000 description 16
- 238000012545 processing Methods 0.000 description 12
- 230000005540 biological transmission Effects 0.000 description 10
- 230000000694 effects Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 5
- 235000010724 Wisteria floribunda Nutrition 0.000 description 3
- 230000008901 benefit Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 210000004556 brain Anatomy 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
Landscapes
- Processing Or Creating Images (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Description
ここで、3次元地図には、多数の地物が含まれ、3次元モデルの数も多量となるため、3次元地図の描画処理にかかる負荷は非常に高くなることがある。かかる負荷を軽減するための方法として、特許文献1は、3次元モデルを予め平行投影して得られた投影画像を2次元画像のデータベースとして構築しておき、これを用いて3次元地図を表示する技術を開示している。
人間の脳が右眼用画像、左眼用画像を融像して立体視を実現できる能力には限界があるため、立体視によって奥行きを感じることができる範囲にも限界がある(この限界の範囲をデプスバジェットと呼ぶ)。あまりに深い奥行きを与えようとすると、右眼用画像、左眼用画像が融像できなくなり、立体視ではなく、単にずれた2つの映像としか認識できなくなるのである。従って、立体視の対象となる映像のうち、もっとも手前に飛び出している部分と、最も奥に引っ込んでいる部分がデプスバジェットに一致するように、立体視で利用する奥行き範囲(この範囲をデプスブラケットと呼ぶ)を割り当てると、奥行きの感度が鈍くなり、わずかな突出/引っ込みしかない画像では、立体感を十分に得られなくなることがある。
こうした限界を踏まえ、デプスバジェットを有効に活用し、奥行き感を十分に認識させるための技術として、例えば、シーンごとに、十分な立体感を得られるように、奥行き範囲の割り当て、即ちデプスブラケットを調整する技術がある。
しかし、立体視を実現するためには、3次元地図を表示する視点位置に、左眼用および右眼用の仮想的なカメラを設置し、それぞれのカメラで透視投影を行って左眼用画像、右眼用画像を生成する必要があり、通常の透視投影の2倍の処理負荷を要することになる。3次元地図は、ナビゲーション装置や携帯端末など処理能力の低い端末で表示されることもあるため、描画のための処理負荷の増大は看過できない課題である。処理負荷を軽減するため、平行投影で得られた画像を用いて立体視を実現することが考えられるが、3次元モデルを投影して得られた画像は、2次元オブジェクトとは異なり、単に左右にずらすだけでは立体視を実現することはできない。
また、平行投影を用いる場合には、予め全領域について左眼用画像、右眼用画像を用意しておくことができることが利点となるが、このような方法では、表示する領域に応じて、柔軟にデプスバジェットを調整し、十分な立体感を与えることはできない。
かかる課題は、電子的に地図を表示する場合だけでなく、立体視できるように地図の任意の場所を切り出して左眼用画像、右眼用画像を印刷する場合にも同様に生じる。また、地図のみならずコンピュータグラフィックス等で生成された架空空間、機械・建築物その他の設計モデルなど、種々の3次元モデルについて立体視可能な画像を出力する場合に共通の課題である。本発明は、これらの課題に鑑み、平行投影を利用した画像の立体視を実現するとともに、領域ごとに十分な立体感を与えることを目的とする。
画像を立体視させるために視差を与えた左眼用画像および右眼用画像の画像データを生成する立体視画像データ生成装置であって、
立体視の対象となる3次元モデルを記憶した3次元モデルデータベースと、
前記3次元モデルの複数の領域ごとに、前記立体視における視差を設定する視差設定部と、
前記設定された視差に基づいて、前記複数の領域ごとに前記3次元モデルを鉛直方向から斜めに傾けた斜め方向より平行投影して、前記左眼用画像および右眼用画像の画像データを生成する平行投影部とを備え、
前記視差設定部は、前記平行投影によって生成される前記左眼用画像および右眼用画像において、前記視差の変化に起因して前記複数の領域の境界において生じる画像のずれが、ずれとして認識できない程度、または看過できる程度に設定された所定長に収まる条件下で前記視差を設定する立体視画像データ生成装置として構成することができる。
平行投影では、固有の視点が存在しないため、全領域について予め投影画像、即ち平行投影データを生成することができる。立体視を実現する場合も、左右眼の画像は、それぞれ平行投影で生成されるのであるから、こうした利点は損なわれない。従って、本発明によれば、予め用意された左右眼用の平行投影データを適宜、読み出して出力するだけで、軽い負荷により立体視を実現できる利点がある。
一方、領域ごとに視差を変化させた場合には、視差によって平行投影の条件が異なるため、得られる左眼用画像、右眼用画像に、境界部分で不整合が生じるおそれがある。この点に関し、本発明では、境界で生じる画像のずれが所定長さに収まるように、視差の変化を抑制している。所定長さは、視認されたときにずれとして認識できない程度、または看過できる程度の長さを言う。こうすることによって、任意の範囲を切り出して出力しても違和感なく立体視を実現できる立体視画像を生成することができる。
即ち、前記複数の領域についての視差の設定を入力する視差設定入力部を有し、
前記視差設定部は、前記設定された視差を補間して、視差が設定されていない他の領域の視差を設定するものとしてもよい。
かかる態様によれば、オペレータがいくつかの領域について視差を設定すると、その間を補間して他の領域の視差を設定することができるため、視差の設定にかかる負荷を軽減することができる。こうして設定されたそれぞれの視差も、左眼用画像および右眼用画像において、領域の境界において生じる画像のずれが所定長に収まるという条件を満たす必要がある。
かかる条件を満たすようにするためには、種々の構成を取ることができる。
第1の構成として、視差設定部は、補間して設定した視差も含めて、それぞれの視差の領域間での変化が、上述した条件を満たすか否かを判断し、この条件を満たさない範囲をオペレータに提示して、設定値の修正を要求する構成である。
第2の構成として、上述の条件を満たさない場合には、これを満たすように、一端設定された視差を修正する構成である。例えば、視差の変化率が条件を満たさない領域に対して、条件を満たすための変化率に基づいて視差の修正値を求め、これに置換していく方法が考えられる。
前記3次元モデルは、所定の地理的サイズのメッシュ単位で地物の3次元形状を記憶した3次元地図データベースであり、
前記領域は、前記メッシュとすることによって、
立体視地図を実現するための前記左眼用画像および右眼用画像の画像データを前記メッシュの地理的サイズを超える範囲で生成する立体視画像データ生成装置。
オブジェクトデータを格納しており、
前記立体視画像出力部は、前記2次元オブジェクトデータについては、所定の出力位置に対して左右にずらすことによって視差を与え前記左眼用画像および右眼用画像を出力するものとしてもよい。
本発明は、種々の画像を出力対象とすることができるが、上述の構成により、地図を立体視するための画像データを生成することができる。3次元地図は、地理情報を直感的に把握できる点で非常に有用性が高いと同時に、いわゆるスマートフォンその他の携帯型端末で表示されることもあり、表示にかかる負荷の軽減が求められる分野である。従って、本発明を地図に適用すれば、軽い負荷で、立体視の地図表示を実現でき、非常に有用性の高い地図表示を行うことができる。
例えば、本発明は、視差を与えた左眼用画像および右眼用画像を出力して画像を立体視させる立体視画像出力装置であって、
前記複数の領域ごとに異なる視差で、前記3次元モデルを鉛直方向から斜めに傾けた斜め方向より平行投影して得られる前記左眼用画像および右眼用画像の画像データをそれぞれ記憶する平行投影データ記憶部と、
前記立体視画像として出力する範囲の指定を入力する入力部と、
前記平行投影データ記憶部から、前記指定された範囲に対応する領域の画像データを切り出し、前記左眼用画像および右眼用画像をそれぞれ出力する立体視画像出力部とを備え、
前記複数の領域ごとに異なる視差は、前記平行投影によって生成される前記左眼用画像および右眼用画像において、前記視差の変化に起因して前記複数の領域の境界において生じる画像のずれが所定長に収まる条件下で設定されている立体視画像出力装置としてもよい。
こうすることによって、領域ごとに異なる視差が与えられ、デプスバジェットを有効活用した立体視の画像を出力することが可能となる。
本発明の立体視出力部としては、例えば、左眼用画像、右眼用画像をそれぞれ左右眼で個別に認識できるように表示する立体視ディスプレイを用いることができる。レンチキュラーと呼ばれる立体視用のレンズの背後に置くことによって立体視が実現されるように左眼用画像、右眼用画像を配置して印刷する印刷装置を用いてもよい。単に左眼用画像、右眼用画像を左右に配列して印刷する印刷装置であってもよい。
最初に、立体視を実現する場合のデプスバジェットの影響について説明する。デプスバジェットとは、立体視を実現するためのディスプレイその他の媒体に応じて定まる、立体視を実現可能な最大奥行き範囲のことを言う。
図1は、デプスバジェットの影響を示す説明図である。種々の地域の立体視地図を提供する場合を考える。
図1(a)は、デプスバジェットの中で立体視に利用する奥行き範囲、即ちデプスブラケットを広く設定した場合の例を示している。図示するように、地図を提供する地域には、都市Aのように比較的低い標高にある街並み、都市Bのように比較的高い標高にある街並み、富士山のように標高が非常に高い地域などがある。これら地域を対象として立体視地図を提供するため、標高の最小値が最大奥行、最大値が最大突出となるよう奥行き範囲(デプスブラケット)Rを設定した例が図1(a)である。このように設定すると、都市Aでは、ビルの高さHA程度の凹凸しかないため、デプスブラケットRのうち、ごく一部しか使わないことになる。同様に高さHB程度までの凹凸しかない都市B、標高は高いながらも凹凸は高さHc程度の範囲にしかならない富士山地域など、それぞれの地域においては、デプスブラケットのごく一部しか利用しないこととなり、各地域では、十分な奥行き感が得られないことになる。
ただし、このように地域ごとにデプスブラケットを変化させる場合、視差が変化する境界部分では、3次元モデルから立体視画像を生成するための投影条件が異なるため、画像間にずれが生じることがある。本実施例では、こうしたずれが視認できないか、または看過できるほど小さくなるように、視差の変化(図中の矢印VA、VB)を抑制しているのである。
次に、平行投影によって立体視を実現する原理について説明する。
図2は、平行投影による立体視の原理を示す説明図である。図2(a)に示すように3軸を定義する。即ち水平面内にx軸、z軸を定義し、鉛直下方向にy軸を定義する。x軸、y軸、z軸は右手座標系である。図示する通り地物の鉛直上方にカメラを置いて平行投影すると2次元地図が描かれる。本実施例に言う平行投影は、この状態からカメラを傾けた状態で投影することを言う。
平行投影では、透視投影と異なり「視点」は存在しない。本明細書において、平行投影に関し、カメラという用語を用いる場合には、投影方向を模式的に表している。
図2(a)において、x軸周りにカメラを回転させると、鉛直方向から斜めに傾けて平行投影することになるので、x軸周りの回転はピッチ角を表すことになる。また、y軸方向にカメラを回転させると、水平方向で平行投影の方位が変化することになるので、y軸周りの回転は投影方位を表すことになる。そして、z軸周りにカメラを回転させると、以下に示す通り視差を与えることができる。
図2(b)に視差が生じる理由を示した。図2(b)はz軸方向に地物を見た状態、つまり、z軸が紙面に垂直な状態となっている。視差は、この地物を鉛直上方からy軸方向に見た時に、右眼、左眼の位置の違いによって生じる視線方向の相違である。従って、図中における基準のカメラ位置CCに対して、右眼から見た状態に相当するカメラ位置CR、左眼から見た状態に相当するカメラ位置CLで投影することによって、視差を与えた右眼用/左眼用の画像を生成することができる。視差、即ちz軸周りの回転角δは、任意に設定可能であるが、違和感のない視差を与え得る角度としては、例えば、約20度程度とすることができる。
このように、投影角度、投影方位に加えて、図2(b)で示した視差を考慮して平行投影を行うことにより、平行投影であっても、立体視可能な右眼用/左眼用画像を生成することができる。
図4は、デプスブラケットの変化による影響の例を示す説明図である。本実施例では、先に図1(b)で説明した通り、地域によって視差の条件を変化させ、デプスブラケットを変化させている。図4には、このデプスブラケットの変化が画像に与える影響を示した。
図4(a)は、画像の生成対象となる3次元モデルを表している。本実施例の地図データは、所定の地理的サイズの矩形状メッシュで構成されている。図中の境界線LV、LHは、これらのメッシュの境界を表している。
図4(b)は、全メッシュに対して同じ条件で平行投影したときの画像である。視差を与えて平行投影によって生成される右眼用/左眼用画像の一方を示していることになる。図4(c)は、図4(b)の中央付近のビルの拡大図である。これらを見ても、境界LV、LHは視認されない。
本実施例では、メッシュ単位で地図データが格納されているため、デプスブラケットもメッシュ単位で変化させるものとした。デプスブラケットを変化させると、視差が変化するため、平行投影の条件が変化することになる。従って、メッシュの境界付近で画像間にずれが生じる。
図4(d)は、上述の通り、図4(a)に示した境界LHより上側と下側で、視差を変化させて平行投影した画像である。また、図4(e)は、その中央付近のビルの拡大図である。図4(e)中の領域Bに示すように、境界LH付近の領域において、ビルの画像がわずかに歪んでいることが視認できる。視差を変化させることによって、こうした画像のずれが生じる。しかし、このずれは、数ピクセル程度の小さなものであるため、拡大しない状態、即ち図4(d)の表示スケールでは、境界LH付近の領域Aを見ても、画像のずれは、ほとんど視認することができない。視差の変化率をさらに小さくすれば、こうした数ピクセル内のずれすらも生じないほどにすることも可能である。
このように、本実施例では、メッシュ単位で視差を変化させるとともに、その変化による影響が、視認できないか、または看過できる程度に抑制するようにしている。こうすることによって、平行投影で全体のメッシュについて、それぞれのメッシュに適した視差で、予め右眼用/左眼用画像を生成しつつ、視差の変化による影響を回避することが可能となる。
図1〜4で説明した平行投影による右眼用/左眼用画像を生成し、地図表示を行う立体視地図表示システムについて、以下、説明する。
図5は、立体視地図表示システムの構成を示す説明図である。
図5には、サーバ200からネットワークNE2等を介して提供される地図データに基づいて、端末300のディスプレイ300dに地図を表示する構成例を示した。端末300としては、スマートフォンを用いるものとしたが、携帯電話、パーソナルコンピュータ、ナビゲーション装置などを用いてもよい。また、3次元立体視地図表示システムは、端末300とサーバ200とからなるシステムの他、スタンドアロンで稼働するシステムとして構成してもよい。
図中には、地図データを生成する立体視画像データ生成装置100も併せて示した。
端末300のディスプレイ300dは、右眼用画像と左眼用画像を、それぞれ右眼、左眼で視認できるように表示可能な立体視の機能を有している。本実施例では、いわゆる裸眼での立体視が可能なディスプレイ300dを用いるものとしているが、立体視用の眼鏡等を用いて立体視するデバイスを用いても良い。
送受信部301は、サーバ200とのネットワークNE2を介した通信を行う。本実施例では、立体視地図を表示するための地図データおよびコマンドの送受信が主として行われる。
コマンド入力部302は、ボタンやタッチパネルの操作等を通じて、ユーザからの指示を入力する。本実施例における指示としては、3次元地図の表示範囲、拡大・縮小の指定、経路案内を行う際の出発地、目的地の設定などが揚げられる。
GPS入力部303は、GPS(Global Positioning System)の信号に基づいて緯度経度の座標値を得る。また、経路案内では、緯度経度の変化に基づいて進行方向を算出する。
地図情報記憶部305は、サーバ200から提供された地図データを一時的に記憶しておくバッファである。経路案内時のように表示すべき地図が時々刻々と移動していく場合、地図情報記憶部305では不足する範囲の地図データをサーバ200から受信して地図を表示する。
表示制御部306は、地図情報記憶部305に格納されている地図データを用いて、端末300のディスプレイ300dに立体視地図を表示する。
地図データベース210は、立体視地図を表示するためのデータベースである。本実施例では、平行投影データ211、2次元オブジェクト212、ネットワークデータ213を含む地図データを格納する。ネットワークデータ213は省略することもできる。
平行投影データ211は、道路、建物などの地物を3次元的、かつ立体視可能に表示するための平行投影データであり、地物の3次元モデルを右眼用/左眼用に投影条件を変えてそれぞれ平行投影することで得られた2次元のポリゴンデータである。即ち、平行投影データ211としては、同一の地図領域に対し、右眼用の条件で平行投影された2次元の画像データとしての右眼用平行投影データと、左眼用の条件で平行投影された2次元の画像データとしての左眼用平行投影データが格納されている。
2次元オブジェクト212は、地物以外に地図に表示すべき地物名称・地名・案内情報等を表す文字、地図記号・通行規制標識、経路案内における現在位置を表すシンボルデータや経路などを構成する矢印のポリゴンデータ等である。現在位置や経路のように表示位置が不定のものを除き、2次元オブジェクト212には、表示すべき文字や記号などのデータ、および表示位置が対応づけて格納されている。表示位置は、3次元空間上の位置としてもよいし、平行投影された投影画像上の位置座標としてもよい。また、地物名称のように、特定の地物と関連づけられた2次元オブジェクト212については、地物との関連付けを表すデータも併せて格納されている。
本実施例では、2次元オブジェクト212は、表示時に視差を与えるものとしているが、変形例として、予め決まった視差で立体視可能な構成とすることもできる。かかる場合には、2次元オブジェクト212としては、立体視可能な右眼用画像と左眼用画像の形式で格納しておいてもよい。また、平行投影データ211と2次元オブジェクト212とを重畳した状態の画像データを、平行投影データ211として格納しておくこともできる。
ネットワークデータ213は、道路をノード、リンクの集まりで表現したデータである。ノードとは、道路同士の交点や道路の端点に相当するデータである。リンクはノードとノードとを結ぶ線分であり、道路に相当するデータである。本実施例では、ネットワークデータ213を構成するノード、リンクの位置は、緯度経度および高さの3次元データで定められている。
送受信部201は、ネットワークNE2を介して端末300とのデータの送受信を行う。本実施例では、3次元地図を表示するための地図データおよびコマンドの送受信が主として行われる。また、送受信部201は、ネットワークNE1を介して立体視画像データ生成装置100との通信も行う。本実施例では、生成された地図データの授受が主として行われる。
データベース管理部202は、地図データベース210からのデータの読み出し、書き込みを制御する。
経路探索部203は、地図データベース210内のネットワークデータ213を用いて、経路探索を行う。経路探索には、ダイクストラ法などを用いることができる。上述の通り、経路探索によって得られた経路を表す矢印等も、2次元オブジェクトに該当する。
送受信部105は、ネットワークNE1を介してサーバ200とデータの授受を行う。
コマンド入力部101は、キーボード等を介してオペレータの指示を入力する。本実施例では、地図データを生成すべき領域の指定、平行投影パラメータの指定等が含まれる。平行投影パラメータとは、平行投影する際のピッチ角、ヨー角を言う。ピッチ角とは、鉛直方向からどれだけ傾けて投影するかを意味する。ヨー角とは、視差を与えるために左右眼で異なる方向に傾ける角度(図1参照)を言う。本実施例では、メッシュ単位での視差の設定も含まれる。
3D地図データベース104は、地図データを生成するために用いられる3次元モデルを格納するデータベースである。道路、建物などの地物については、3次元形状を表す電子データが格納されている。また、地図中に表示すべき文字、記号などの2次元オブジェクトも、格納されている。
平行投影部102は、3D地図データベース104に基づいて平行投影による描画を行って地物データを生成する。描画された投影図は、平行投影データ103として格納され、送受信部105を介してサーバ200の地図データベース210の平行投影データ211に格納される。
投影パラメータ設定部106は、まず、オペレータによって指定された視差に基づいて、視差が未設定のメッシュも含め、各メッシュの視差を設定する。そして、平行投影を行う際に、視差に基づいて、指定された平行投影パラメータをヨー角が正負逆の値となるよう修正し、右眼用/左眼用の平行投影パラメータを設定する。こうすることで、立体視するための右眼用画像、左眼用画像をそれぞれ生成することができる。
次に、平行投影データ211、即ち地物の3次元モデルを右眼用/左眼用に投影条件を変えてそれぞれ平行投影した2次元のポリゴンデータを生成するための処理について説明する。この処理は、立体視画像データ生成装置100の平行投影部102、および投影パラメータ設定部106が主として実行する処理であり、ハードウェア的には、立体視画像データ生成装置100のCPUが実行する処理である。
図6は、平行投影データ生成処理のフローチャートである。
処理を開始すると、立体視画像データ生成装置100は、地図上の代表点についてデプス設定を入力する(ステップS10)。デプス設定とは、デプスブラケットの設定、ひいては視差の設定を意味する。図中にデプス設定の様子を例示した。本実施例では、オペレータがメッシュ単位で代表点を指定した上で、指定された点について、デプスバジェットの中で、最大突出状態に割り当てるべき標高値、最大奥行状態に割り当てるべき標高値を指定する。これらの標高値は、オペレータが指定したメッシュ内の最高地点、最低地点の標高値に基づいて、立体視画像データ生成装置100が自動的に設定するようにしてもよい。
図中に計算例を示した。メッシュM1〜M4のうち、メッシュM1について最大突出HA、最大奥行LA、メッシュM4について最大突出HB、最大奥行LBが設定されているとする。立体視画像データ生成装置100は、メッシュM1、M4の間を線形補間して、メッシュM2の最大突出H2、最大奥行L2およびメッシュM3の最大突出H3、最大奥行L3を設定する。
ここでは、1次元の補間を図示したが、地図のメッシュは2次元的に広がっているため、補間は2次元的に行われる。
また、変化率の許容範囲は、メッシュの配列方向によって変化させてもよい。例えば、地図には、建物が多数表示されることを考えると、上下方向に延びる線については、比較的ずれが視認されやすく、左右方向に延びる線は、比較的ずれが視認されにくい傾向にあると言える。こうした傾向を考慮し、左右に配列されたメッシュ間では変化率の許容範囲を大きく設定し、上下に配列されたメッシュ間では変化率の許容範囲を小さく設定してもよい。
さらに、デプス設定の変化率の評価は、斜め方向に配列されたメッシュ間では、省略してもよい。斜めに配列されたメッシュ間では、点で接するのみであるため、画像のずれは視認しづらいからである。
図に表示例を示した。メッシュM1〜M4について、最大突出状態に割り当てる標高値HA、H2、H3、HBは、変化率の許容範囲内にあるため、警告は表示されていない。これに対し、最大奥行状態に割り当てる標高値LA、L2、L3、LBに対しては、変化率の許容範囲内を超えるため、「WARNING」という警告表示がなされる。このように警告表示をすることによって、オペレータに対し、最大奥行の設定(この例の場合は、値LA、LBの一方または双方)を変えることを促すのである。
こうした警告表示に変えて、立体視画像データ生成装置100が許容範囲に収まるように、最大奥行の設定を修正するようにしてもよい。
平行投影データを生成する際の手順は、次の通りである。まず、立体視画像データ生成装置100は、処理対象となるメッシュを決め、平行投影パラメータを入力する。平行投影パラメータは、ピッチ角と投影方位である。この段階では、視差、即ちヨー角は0度としておく。これらは、地物データを生成する度にオペレータが指定するものとしてもよいし、デフォルト値を用いるようにしてもよい。
投影方位は、いずれか単一の方位としてもよいが、本実施例では、方位を45度ずつずらした8方位について、それぞれ平行投影を行い、地物データを生成するものとした。このように多方位で地物データを用意しておけば、いずれかの投影方位で建物の陰になるなどの死角が生じた場合でも、他の投影方位を利用することにより、死角を回避した表示を実現できる利点がある。
平行投影パラメータは、ピッチ角、投影方位のいずれについても任意の設定が可能であり、単一の値とする方法、複数の値をパラメトリックに用いる方法など、種々の値をとり得る。
本実施例では、3D地図データベースに含まれる3次元モデルを鉛直方向に対して所定の投影角度だけ傾けた斜め方向から平行投影することによって地物データを生成する。このように斜め方向からの平行投影を行う場合、処理対象となるメッシュの周辺のメッシュに存在する地物の一部が投影されることもある。逆に、単に対象メッシュだけの3D地図データベースを利用して平行投影を行ったのでは、他のメッシュに存在する地物の投影図が欠けてしまい、適切な地物データを得ることができない。これを回避するため、本実施例では、対象メッシュの周辺のメッシュも読み込むこととしている。読み込む範囲は、任意に設定可能であるが、本実施例では、対象メッシュから2区画以内のメッシュに属する3D地図データを読み込むものとした。
以上の処理を全投影方位、全メッシュについて実行することによって、立体視画像データ生成装置100は、本実施例の平行投影データ211を整備することができる。
図7は、地図表示処理のフローチャートである。ここでは、ユーザから指定された地点、方位に従って、背景となる地図を立体視可能に表示する処理の例を示す。この処理は、経路探索と併せて用いることにより、経路案内表示として利用することもできる。
地図表示処理は、端末300の主制御部304および表示制御部306が実行する処理であり、ハードウェア的には端末300のCPUが実行する処理である。
そして、端末300は、指定された表示位置等に従って、地図情報記憶部305から左右眼用平行投影データを読み込む(ステップS52)。地図情報記憶部305に蓄積されていない領域のデータが必要な場合には、端末300は、サーバ200から当該データをダウンロードする。
端末300は、左右眼用平行投影データから、左眼用画像表示範囲を切り出し(ステップS54)、右眼用画像表示範囲を切り出し(ステップS56)、それぞれ左眼画像および右眼画像をディスプレイ300dに表示する(ステップS58)。
左右眼用平行投影データは、既に平行投影された後の2次元のポリゴンデータに過ぎないから、ステップS58の処理においては、取得したデータに従ってポリゴンを描画するだけで投影処理を行うまでなく軽い負荷で立体視を実現することができる。
2次元オブジェクトには、3次元空間内で表示位置が指定されているから、端末300は、読み込んだ2次元オブジェクトに対して座標変換処理を施し、さらに左眼用画像、右眼用画像のそれぞれについて2次元オブジェクトの位置を左右にずらすことで視差を与え、左右眼用の2次元オブジェクト画像を生成すればよい。表示時に視差を与えるため、メッシュ間でのデプス設定の変化は、影響しない。端末300は、メッシュに設定されたデプス設定とは無関係に、2次元オブジェクト用に用意されたデプス設定を用いて、視差を与えればよい。
こうして表示深さを設定すると、2次元オブジェクトを設定された表示深さhに応じた3次元位置に設定し、視差(ヨー角)δによる回転行列を作用させて得られるx座標の変位が右眼用/左眼用の2次元オブジェクトのずらし量となる。このとき、ずらし量は表示深さhの関数となり、「ずらし量=h・tanδ」で与えられる。
以上で説明した本実施例の立体視地図表示システムによれば、平行投影によって立体視を実現することができる。平行投影では、立体視用の左右眼画像は、視点位置に関わらず予め全領域で生成しておくことができ、非常に軽い負荷で立体視を実現できる。
また、実施例では、メッシュごとに視差を変化させることができるため、地図を表示する地域ごとに、デプスバジェットを有効活用し、奥行き感を十分に与えた立体視を実現することができる。さらに、本実施例では、メッシュ間の視差の変化率を十分に抑制しているため、視差の変化に応じてメッシュの境界で生じる画像のずれを抑制することができ、違和感のない立体視画像を表示することが可能である。
本発明は上述の実施例に限定されず、その趣旨を逸脱しない範囲で種々の構成を採ることができることはいうまでもない。例えば、実施例においてハードウェア的に構成されている部分は、ソフトウェア的に構成することもでき、その逆も可能である。また、地図のみならず種々の立体視画像を対象とすることができる。さらに、立体視画像の出力は、ディスプレイへの表示に限らず、印刷によっても良い。
101…コマンド入力部
102…平行投影部
103…平行投影データ
104…3D地図データベース
105…送受信部
106…投影パラメータ設定部
200…サーバ
201…送受信部
202…データベース管理部
203…経路探索部
210…地図データベース
211…平行投影データ
212…2次元オブジェクト
213…ネットワークデータ
300…端末
300d…ディスプレイ
301…送受信部
302…コマンド入力部
303…GPS入力部
304…主制御部
305…地図情報記憶部
306…表示制御部
Claims (6)
- 画像を立体視させるために鉛直方向から左右眼で異なる斜め方向に傾けた投影方向から平行投影して左眼用画像および右眼用画像の画像データを生成する立体視画像データ生成装置であって、
立体視の対象となる3次元モデルを記憶した3次元モデルデータベースと、
前記3次元モデルの複数の領域ごとに、立体視で利用する奥行き範囲を表すデプスブラケットを設定するデプスブラケット設定部と、
前記設定されたデプスブラケットに基づいて、前記複数の領域ごとに前記3次元モデルを鉛直方向から斜めに傾けた斜め方向より平行投影して、前記左眼用画像および右眼用画像の画像データを生成する平行投影部とを備え、
前記デプスブラケット設定部は、前記平行投影によって生成される前記左眼用画像および右眼用画像において、前記デプスブラケットの変化に起因して前記複数の領域の境界において生じる画像のずれが、ずれとして認識できない程度、または看過できる程度の所定長に収まる条件下で前記デプスブラケットを設定する立体視画像データ生成装置。 - 請求項1記載の立体視画像データ生成装置であって、
前記複数の領域についてのデプスブラケットの設定を入力するデプスブラケット設定入力部を有し、
前記デプスブラケット設定部は、前記設定されたデプスブラケットを補間して、デプスブラケットが設定されていない他の領域のデプスブラケットを設定する立体視画像データ生成装置。 - 請求項1または2記載の立体視画像データ生成装置であって、
前記3次元モデルは、所定の地理的サイズのメッシュ単位で地物の3次元形状を記憶した3次元地図データベースであり、
前記領域は、前記メッシュとすることによって、
立体視地図を実現するための前記左眼用画像および右眼用画像の画像データを前記メッシュの地理的サイズを超える範囲で生成する立体視画像データ生成装置。 - 視差を与えた左眼用画像および右眼用画像を出力して画像を立体視させる立体視画像出力装置であって、
立体視で利用する奥行き範囲を表すデプスブラケットが複数の領域ごとに異なる状態で、立体視の対象となる3次元モデルを鉛直方向から斜めに傾けた斜め方向より平行投影して得られる前記左眼用画像および右眼用画像の画像データをそれぞれ記憶する平行投影データ記憶部と、
前記立体視画像として出力する範囲の指定を入力する入力部と、
前記平行投影データ記憶部から、前記指定された範囲に対応する領域の画像データを切り出し、前記左眼用画像および右眼用画像をそれぞれ出力する立体視画像出力部とを備え、
前記複数の領域ごとに異なるデプスブラケットは、前記平行投影によって生成される前記左眼用画像および右眼用画像において、前記デプスブラケットの変化に起因して前記複数の領域の境界において生じる画像のずれが所定長に収まる条件下で設定されている立体視画像出力装置。 - コンピュータによって、画像を立体視させるために鉛直方向から左右眼で異なる斜め方向に傾けた投影方向から平行投影して左眼用画像および右眼用画像の画像データを生成する立体視画像データ生成方法であって、
立体視の対象となる3次元モデルを記憶した3次元モデルデータベースを備え、
前記コンピュータが実行するステップとして、
前記3次元モデルの複数の領域ごとに、立体視で利用する奥行き範囲を表すデプスブラケットを設定するデプスブラケット設定ステップと、
前記設定されたデプスブラケットに基づいて、前記複数の領域ごとに前記3次元モデルを鉛直方向から斜めに傾けた斜め方向より平行投影して、前記左眼用画像および右眼用画像の画像データを生成する平行投影ステップとを備え、
前記デプスブラケット設定ステップは、前記平行投影によって生成される前記左眼用画像および右眼用画像において、前記デプスブラケットの変化に起因して前記複数の領域の境界において生じる画像のずれが、ずれとして認識できない程度、または看過できる程度の所定長に収まる条件下で前記デプスブラケットを設定する立体視画像データ生成方法。 - 画像を立体視させるために鉛直方向から左右眼で異なる斜め方向に傾けた投影方向から平行投影して左眼用画像および右眼用画像の画像データを生成するためのコンピュータプログラムであって、
前記立体視の対象となる3次元モデルを記憶した3次元モデルデータベースを備えたコンピュータによって、
前記3次元モデルの複数の領域ごとに、立体視で利用する奥行き範囲を表すデプスブラケットを設定するデプスブラケット設定機能と、
前記設定されたデプスブラケットに基づいて、前記複数の領域ごとに前記3次元モデルを鉛直方向から斜めに傾けた斜め方向より平行投影して、前記左眼用画像および右眼用画像の画像データを生成する平行投影機能とを実現させ、
前記デプスブラケット設定機能は、前記平行投影によって生成される前記左眼用画像および右眼用画像において、前記デプスブラケットの変化に起因して前記複数の領域の境界において生じる画像のずれが、ずれとして認識できない程度、または看過できる程度の所定長に収まる条件下で前記デプスブラケットを設定する機能であるコンピュータプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013057495A JP6161348B2 (ja) | 2013-03-21 | 2013-03-21 | 立体視画像データ生成装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013057495A JP6161348B2 (ja) | 2013-03-21 | 2013-03-21 | 立体視画像データ生成装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014183502A JP2014183502A (ja) | 2014-09-29 |
JP6161348B2 true JP6161348B2 (ja) | 2017-07-12 |
Family
ID=51701804
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013057495A Active JP6161348B2 (ja) | 2013-03-21 | 2013-03-21 | 立体視画像データ生成装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6161348B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6988813B2 (ja) * | 2016-10-06 | 2022-01-05 | ソニーグループ株式会社 | 再生装置および再生方法、記録装置および記録方法、再生記録装置および再生記録方法、並びにプログラム |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3504111B2 (ja) * | 1996-06-27 | 2004-03-08 | 株式会社東芝 | 立体視システム、立体視方法、及び、異なる2つの視点から見た一対の画像を立体視可能に表示させるコンピュータプログラムを格納する記憶媒体 |
JP5352869B2 (ja) * | 2011-09-07 | 2013-11-27 | シャープ株式会社 | 立体画像処理装置、立体画像処理方法、及びプログラム |
JP2012150823A (ja) * | 2012-02-28 | 2012-08-09 | Geo Technical Laboratory Co Ltd | 3次元地図描画システム |
JP5927608B2 (ja) * | 2012-04-09 | 2016-06-01 | 横山 隆三 | 立体形状の立体視画像作成方法、立体形状の立体視表示方法及び立体形状の立体視画像作成プログラム |
-
2013
- 2013-03-21 JP JP2013057495A patent/JP6161348B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2014183502A (ja) | 2014-09-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10964079B2 (en) | Method and apparatus for editing road element on map, electronic device, and storage medium | |
JP5903023B2 (ja) | 立体視地図表示システム | |
US20130057550A1 (en) | Three-dimensional map drawing system | |
JP5997640B2 (ja) | 3次元画像出力装置および背景画像生成装置 | |
CN105793895A (zh) | 用于生成和显示地理区域的立体图像对的系统和方法 | |
JP6110780B2 (ja) | 付加情報表示システム | |
JP5883723B2 (ja) | 3次元画像表示システム | |
JP2016134009A (ja) | 3次元地図表示システム | |
JP6022386B2 (ja) | 3次元地図表示装置、3次元地図表示方法、および、コンピュータプログラム | |
US9609309B2 (en) | Stereoscopic image output system | |
JP6161348B2 (ja) | 立体視画像データ生成装置 | |
JP2012073520A (ja) | 立体視画像表示処理装置、立体視画像表示処理方法及びプログラム | |
JP2015049716A (ja) | パノラマ画像表示装置 | |
JP6091676B2 (ja) | 3次元地図表示システム | |
JP2015179345A (ja) | 3次元地図表示システム | |
JP5927608B2 (ja) | 立体形状の立体視画像作成方法、立体形状の立体視表示方法及び立体形状の立体視画像作成プログラム | |
JP5964611B2 (ja) | 3次元地図表示システム | |
JP6016684B2 (ja) | 3次元地図表示システム | |
JP2004333993A (ja) | ステレオ写真方式による立体視地図表示装置および方法 | |
JP2016126668A (ja) | 3次元地図表示システム | |
CN118212361A (zh) | 水电站的三维建模方法及装置、存储介质及电子装置 | |
WO2015087616A1 (ja) | 3次元地図表示システムおよび合成テクスチャ生成装置 | |
JPH1166348A (ja) | 差分抽出型景観ラベリング装置およびシステム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160114 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20161021 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161115 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161208 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170605 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170613 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6161348 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |