JP2010092436A5 - - Google Patents

Description

即ち、複数の指標が配された現実空間を撮像する撮像手段と、
前記撮像手段による撮像画像から前記指標を検出する検出手段と、
前記検出手段により検出された指標を用いて、前記撮像手段の位置姿勢情報を求める計算手段と、
前記計算手段が求めた位置姿勢情報を用いて、該位置姿勢情報が示す位置姿勢を有する視点から見える仮想空間の画像を、仮想空間画像として生成する生成手段と、
前記撮像画像において表示対象領域として設定された領域内の画像を表示画像として抽出する抽出手段と、
前記抽出手段により抽出された表示画像と、前記生成手段が生成した仮想空間画像と、を合成することで合成画像を生成する合成手段と、
前記合成手段による合成画像を表示する表示手段と
を備えることを特徴とする。

次に、ステップＳ９０３では、表示画像処理部２１５は、ステップＳ９０２による画像処理済みの合成画像を、表示ユニット２１６に送出する。これにより、表示ユニット２１６には、表示画像処理部２１５による画像処理済みの合成画像が表示される。

次に、ステップＳ２２０３では、指標抽出部２０９Ｌ，２０９Ｒはそれぞれ、撮像ユニット２０４Ｌ，２０４Ｒから取得した撮像画像から指標を検出する。なお、ステップＳ１８０１とステップＳ２２０３とは並行して行っても良い。

動き方向が左方向の場合、優先度が高い領域内に指標が位置しているのは撮像画像２３０１Ｌの方であるが、撮像画像の左端（動き方向が左であるため。動き方向が右であれば右端）に指標が近いのは撮像画像２３０１Ｒである。従って、撮像画像選択部２０１１は、撮像画像２３０１Ｒを選択する。逆に動き方向が右方向の場合は、動き方向である右に指標２３０４が近い左側の撮像画像を選択する。

ステップＳ２８０４では、それぞれの指標の位置に対応する仮想物体を配置する場合、指標の優先度を参照し、優先度がより低い指標の位置に配する仮想物体ほど、より目立たなくなるような描画方法でもって描画する。即ち、描画の際に優先度に応じて目立つ度合いを制御する以外は、第１の実施形態と同様にして仮想空間画像を生成する。もちろん、上述の通り、優先度が低い指標の位置に配置する仮想物体のサイズが表示領域に比べて大きい場合には、目立つ度合いをあまり下げないようにする。

Claims (15)

1. 複数の指標が配された現実空間を撮像する撮像手段と、
   前記撮像手段による撮像画像から前記指標を検出する検出手段と、
   前記検出手段により検出された指標を用いて、前記撮像手段の位置姿勢情報を求める計算手段と、
   前記計算手段が求めた位置姿勢情報を用いて、該位置姿勢情報が示す位置姿勢を有する視点から見える仮想空間の画像を、仮想空間画像として生成する生成手段と、
   前記撮像画像において表示対象領域として設定された領域内の画像を表示画像として抽出する抽出手段と、
   前記抽出手段により抽出された表示画像と、前記生成手段が生成した仮想空間画像と、を合成することで合成画像を生成する合成手段と、
   前記合成手段による合成画像を表示する表示手段と
   を備えることを特徴とする画像処理装置。
2. 前記計算手段は、
   前記検出手段により検出されたそれぞれの指標に優先度を設定する設定手段を有し、
   より高い優先度が設定された指標ほど優先的に用いて前記位置姿勢情報を求めることを特徴とする請求項１に記載の画像処理装置。
3. 前記設定手段は、前記撮像画像の中心位置により近い指標に、より高い優先度を設定することを特徴とする請求項２に記載の画像処理装置。
4. 前記設定手段は、前記撮像画像において表示対象領域として設定された領域内の指標の優先度を、該領域外の指標の優先度よりも高く設定することを特徴とする請求項２に記載の画像処理装置。
5. 前記設定手段は、前記撮像画像内の動き量が閾値以上であれば、該撮像画像内の指標に対する優先度として、該指標に対して従前に設定された優先度を設定することを特徴とする請求項２に記載の画像処理装置。
6. 前記抽出手段は、前記撮像画像のうち、前記表示手段で表示可能な範囲内の画像を前記表示画像として抽出することを特徴とする請求項１乃至５の何れか１項に記載の画像処理装置。
7. 前記抽出手段は、前記撮像画像と該撮像画像よりも過去に撮像された過去撮像画像とを用いて該撮像画像内における動きベクトルを求め、該過去撮像画像内で表示対象領域として設定された領域と同画像が写っている該撮像画像内の領域を、該動きベクトルとは逆の方向に該動きベクトルのぶんだけ移動させた領域を、該撮像画像における表示対象領域として設定し、該設定した表示対象領域内の画像を表示画像として抽出することを特徴とする請求項１乃至５の何れか１項に記載の画像処理装置。
8. 前記撮像手段は、右目用の撮像手段と、左目用の撮像手段と、からなり、
   前記検出手段は、前記右目用の撮像手段による右目用撮像画像から前記指標を検出する右目用の検出手段と、前記左目用の撮像手段による左目用撮像画像から前記指標を検出する左目用の検出手段と、からなり、
   前記右目用の検出手段による検出結果、前記左目用の検出手段による検出結果、前記右目用撮像画像内の動き量、前記左目用撮像画像内の動き量を用いて、前記右目用撮像画像、前記左目用撮像画像、のうち何れか１つを選択する選択手段を更に有し、
   前記計算手段は、前記選択手段が選択した撮像画像から検出された指標を用いて、該撮像画像を撮像した撮像手段の位置姿勢情報を求め、
   前記抽出手段は、前記右目用撮像画像、前記左目用撮像画像、のそれぞれから前記表示画像を抽出し、
   前記合成手段は、前記右目用撮像画像から抽出された表示画像と、前記生成手段が生成した仮想空間画像と、を合成した右目用合成画像を生成すると共に、前記左目用撮像画像から抽出された表示画像と、前記生成手段が生成した仮想空間画像と、を合成した左目用合成画像を生成し、
   前記表示手段は、前記右目用合成画像を右目用の表示手段に表示すると共に、前記左目用合成画像を左目用の表示手段に表示する
   ことを特徴とする請求項１に記載の画像処理装置。
9. 前記選択手段は、前記動き量が閾値よりも小さい場合には、より高い優先度が設定された指標がより多く検出された方の撮像画像を選択することを特徴とする請求項８に記載の画像処理装置。
10. 前記選択手段は、前記動き量が閾値以上である場合には、前記右目用の撮像手段による撮像画像、前記左目用の撮像手段による撮像画像のうち、前記動き量が示す動きの方向にある画像端部により近い位置に指標が写っている撮像画像を選択することを特徴とする請求項８に記載の画像処理装置。
11. 前記生成手段は、指標が配されている位置に仮想物体を配置した仮想空間の画像を生成する場合、該指標に対して設定された優先度に応じて該仮想物体の透明度、若しくは明るさを制御することを特徴とする請求項１乃至１０の何れか１項に記載の画像処理装置。
12. 前記画像処理装置は、前記撮像手段と前記表示手段とを有する装置と、前記検出手段と前記計算手段と前記生成手段と前記抽出手段と前記合成手段とを有する装置と、で構成されているシステムであることを特徴とする請求項１乃至１１の何れか１項に記載の画像処理装置。
13. 画像処理装置が行う画像処理方法であって、
    前記画像処理装置の撮像手段が、複数の指標が配された現実空間を撮像手段によって撮像する撮像工程と、
    前記画像処理装置の検出手段が、前記撮像手段による撮像画像から前記指標を検出する検出工程と、
    前記画像処理装置の計算手段が、前記検出工程で検出された指標を用いて、前記撮像手段の位置姿勢情報を求める計算工程と、
    前記画像処理装置の生成手段が、前記計算工程で求めた位置姿勢情報を用いて、該位置姿勢情報が示す位置姿勢を有する視点から見える仮想空間の画像を、仮想空間画像として生成する生成工程と、
    前記画像処理装置の抽出手段が、前記撮像画像において表示対象領域として設定された領域内の画像を表示画像として抽出する抽出工程と、
    前記画像処理装置の合成手段が、前記抽出工程で抽出された表示画像と、前記生成工程で生成した仮想空間画像と、を合成することで合成画像を生成する合成工程と、
    前記画像処理装置の表示手段が、前記合成工程による合成画像を表示する表示工程と
    を備えることを特徴とする画像処理方法。
14. コンピュータを、請求項１乃至１２の何れか１項に記載の画像処理装置の各手段として機能させるためのコンピュータプログラム。
15. 請求項１４に記載のコンピュータプログラムを格納した、コンピュータ読み取り可能な記憶媒体。

Images