JP2015079433A5 - - Google Patents

Description

しかしながら、該拡張現実技術では、表示装置の撮像画像を表示する画面において、マーカの位置に、該マーカに対応する３次元画像データが重畳して表示されるだけであって、視覚的効果として、変化が乏しいものであった。

また、仮想オブジェクトの態様は、該仮想オブジェクトの外観で定義されてもよい。また、仮想オブジェクトの態様は、該仮想オブジェクトの姿勢で定義されてもよい。また、仮想オブジェクトの態様は、該仮想オブジェクトに実行させる動作で定義されてもよい。これによって、仮想オブジェクトの態様の変化を富んだものにすることができる。

マーカ情報は、マーカ３に関する情報である。マーカ情報には、例えば、マーカ３を識別するためのマーカＩＤ、マーカ画像、マーカサイズ、マーカ３に対する仮想オブジェクトの配置位置、オブジェクトの表示サイズ等が含まれる。マーカ画像は、マーカ３の外観を示す画像である。また、マーカサイズは、マーカ３の縦横の長さ等、マーカ３の大きさ
を示す情報である。マーカ３に対する仮想オブジェクトの配置位置は、例えば、マーカ３に対する仮想オブジェクトを配置する位置であって、例えば、マーカ３と仮想オブジェクトとの距離である。マーカ情報は、情報処理システム１００において使用される各マーカ３に対して存在する。

なお、オブジェクト決定部２５は、特徴検出部２２によって検出された各マーカ３について、検出からの経過時間を計測し、計測経過時間としてメモリに記録する。計測経過時間は、該当マーカ３が撮像画像から検出される度にリセットされる。例えば、撮像画像が６０ｆｐｓのレートで取得され、マーカ３が連続して検出される場合には、撮像画像が取得される度に該マーカ３の計測経過時間がリセットされる。なお、最後の検出から該当のマーカ３の検出がないまま所定時間（例えば、５分）経過すると、オブジェクト決定部２５は、該当のマーカ３の計測経過時間を削除する。処理ＯＰ３において、処理対象のマーカ３の計測経過時間が記録されていない場合には、オブジェクト決定部２５は、処理対象マーカ３の計測経過時間が第１の時間閾値未満である（ＯＰ３：ＮＯ）、と判定する。

例えば、情報処理装置１が省電力状態に移行したり、ユーザによってマーカ３が撮像範囲から外されたままになったり等、例えば１分以上マーカ３が検出されずに再度マーカ３が検出された場合には、前回の検出からの計測経過時間が第２の時間閾値以上であると判定され（ＯＰ４：ＹＥＳ）、処理がＯＰ６に進み、前回の検出時と同じ仮想オブジェクトが表示されることとなる。

ただし、第１のＡＲ処理は、図５に示されるフローチャートに限定されない。例えば、ＯＰ４の処理は省略することもできる。ＯＰ４の処理が省略される場合には、マーカ３の前回の検出から今回の検出までの時間が第２の時間閾値以上である場合にも、ＯＰ５の処理に進み、背面カメラ対応情報中のポインタが移動され、前回の検出時とは異なる仮想オブジェクトが表示される。

また、マーカ３の前回の検出からの計測経過時間が第１の時間閾値以上第２の時間閾値未満の範囲内で発生する検出の回数に応じて、マーカ３に基づく所定の位置に配置される仮想オブジェクトが変化するようにしてもよい。すなわち、例えば、ユーザが撮像範囲にマーカ３を出し入れしたりするような、情報処理装置１にマーカ３を認識し直させるユーザ行為の回数に応じて、該マーカ３に基づく所定の位置に配置される仮想オブジェクトが変化するようにしてもよい。この場合には、オブジェクト決定部２５は、検出される各マーカ３について、前回の検出からの計測経過時間が第１の時間閾値以上第２の時間閾値未満の範囲内で発生する検出の回数を計数する。該検出の回数のカウンタは、例えば、マーカ３の前回の検出からの計測経過時間が第１の時間閾値以上第２の時間閾値未満の範囲内で検出が発生した場合に１加算され、該当マーカ３の前回の検出からの計測経過時間が第２の時間閾値以上である検出が発生した場合にリセットされる。例えば、前回の検出からの計測経過時間が第１の時間閾値以上第２の時間閾値未満の範囲内で発生する検出の回数が、２回ごとに、すなわち、情報処理装置１にマーカ３を認識し直させるユーザ行為が２回行われる毎に、オブジェクト決定部２５は、該当マーカ３の背面カメラ対応情報のポインタを移動させる。

一時的対応情報には、基準マーカ３Ｙとノーマルマーカ３Ａとがともに撮像画像から検出された場合に、検出された基準マーカ３Ｙとノーマルマーカ３Ａとの情報が背面カメラ対応情報からコピーされる。ノーマルマーカ３Ａの情報において、ポインタが指し示す仮想オブジェクトＩＤは、基準マーカ３Ｙの情報に書き込まれる。これによって、該仮想オブジェクトが基準マーカ３Ｙに関連付けられ、基準マーカ３Ｙに関連付けられる仮想オブジェクトが増える。

上述した実施形態において、情報処理装置１は、単体で上述の処理を行ったが、これに限られない。上述した実施形態の処理は、複数の情報処理装置で分散して行われてもよい。例えば、背面カメラ対応情報は、ネットワーク上のデータベースに配置されており、情報処理装置１が該データベースにアクセスして背面カメラ対応情報を取得してもよい。また、例えば、画像生成部２６の処理を、ネットワーク上のサーバに実行させるように設計することによって、情報処理装置１がマーカ３の検出結果をサーバに送信し、該サーバが仮想空間画像を生成して情報処理装置１に送信するようにしてもよい。

Claims (15)

1. コンピュータを、
   撮像装置によって撮像された現実空間の画像を取得する画像取得手段と、
   前記画像から特徴を検出する特徴検出手段と、
   検出された前記特徴の認識状況に応じて変化させて、仮想オブジェクト又は仮想オブジェクトと該仮想オブジェクトの態様と、を決定する決定手段と、
   前記決定された仮想オブジェクト又は前記決定された態様の仮想オブジェクトが前記特徴に基づいて配置された仮想空間の画像を生成する画像生成手段と、
   前記仮想空間の画像が現実空間に重畳されてユーザから視認されるように、表示装置に画像を表示させる表示制御手段と、
   として機能させる情報処理プログラム。
2. 前記決定手段は、前記特徴の認識状況として、前記特徴の前回の検出からの経過時間が第１の閾値以上であると判定した場合に、前記特徴に基づいて前記仮想空間に配置される仮想オブジェクト又は仮想オブジェクトと該仮想オブジェクトの態様を変化させる、
   請求項１に記載の情報処理プログラム。
3. 前記決定手段は、前記経過時間が前記第１の閾値以上且つ第２の閾値未満であると判定した場合に、前記特徴に基づいて前記仮想空間に配置される仮想オブジェクト又は仮想オブジェクトと該仮想オブジェクトの態様を変化させる、
   請求項２に記載の情報処理プログラム。
4. 前記決定手段は、前記特徴の認識状況として、前記特徴の前回の検出からの経過時間が第１の閾値以上であると判定した前記特徴の検出の回数に応じて、前記特徴に基づいて前記仮想空間に配置される仮想オブジェクト又は仮想オブジェクトと該仮想オブジェクトの態様を変化させる、
   請求項１に記載の情報処理プログラム。
5. 前記決定手段は、前記経過時間が前記第１の閾値以上且つ第２の閾値未満であると判定した前記特徴の検出の回数に応じて、前記特徴に基づいて前記仮想空間に配置される仮想オブジェクト又は仮想オブジェクトと該仮想オブジェクトの態様を変化させる、
   請求項４に記載の情報処理プログラム。
6. 前記決定手段は、前記特徴の認識状況として、前記画像からの前記特徴の検出の継続時間に応じて、前記特徴に基づいて前記仮想空間に配置される仮想オブジェクト又は仮想オブジェクトと該仮想オブジェクトの態様を変化させる、
   請求項１から５のいずれか一項に記載の情報処理プログラム。
7. 前記決定手段は、前記特徴の認識状況として、前記特徴の姿勢に応じて、前記特徴に基づいて配置される仮想オブジェクト又は仮想オブジェクトと該仮想オブジェクトの態様を変化させる、
   請求項１から６のいずれか一項に記載の情報処理プログラム
8. 前記決定手段は、前記特徴の認識状況に応じて、前記特徴に基づいて前記仮想空間に配置される仮想オブジェクト又は仮想オブジェクトと該仮想オブジェクトの態様を、前記特徴に関連付けられている複数の仮想オブジェクト又は仮想オブジェクトの複数の態様の中から所定の順序で、変化させる、
   請求項１から７のいずれか一項に記載の情報処理プログラム。
9. 前記決定手段は、前記特徴に基づいて前記仮想空間に配置される仮想オブジェクト又は仮想オブジェクトと該仮想オブジェクトの態様を、前記所定の順序で循環的に変化させる、
   請求項８に記載の情報処理プログラム。
10. 前記仮想オブジェクトの前記態様は、該仮想オブジェクトの外観で定義される、
    請求項１から９のいずれか一項に記載の情報処理プログラム。
11. 前記仮想オブジェクトの前記態様は、該仮想オブジェクトの姿勢で定義される、
    請求項１から１０のいずれか一項に記載の情報処理プログラム。
12. 前記仮想オブジェクトの前記態様は、該仮想オブジェクトに実行させる動作で定義される、
    請求項１から１１のいずれか一項に記載の情報処理プログラム。
13. 撮像装置によって撮像された現実空間の画像を取得する画像取得手段と、
    前記画像から特徴を検出する特徴検出手段と、
    検出された前記特徴の認識状況に応じて変化させて、仮想オブジェクト又は仮想オブジェクトと該仮想オブジェクトの態様と、を決定する決定手段と、
    前記決定された仮想オブジェクト又は前記決定された態様の仮想オブジェクトが前記特徴に基づいて配置された仮想空間の画像を生成する画像生成手段と、
    前記仮想空間の画像が現実空間に重畳されてユーザから視認されるように、表示装置に画像を表示させる表示制御手段と、
    を備える情報処理装置。
14. コンピュータと、
    撮像装置と、
    表示装置と、
    現実空間に配置された特徴と、
    を含む情報処理システムであって、
    前記コンピュータは、
    前記撮像装置によって撮像された現実空間の画像を取得する画像取得手段と、
    前記画像から特徴を検出する特徴検出手段と、
    検出された前記特徴の認識状況に応じて変化させて、仮想オブジェクト又は仮想オブジェクトと該仮想オブジェクトの態様と、を決定する決定手段と、
    前記決定された仮想オブジェクト又は前記決定された態様の仮想オブジェクトが前記特徴に基づいて配置された仮想空間の画像を生成する画像生成手段と、
    前記仮想空間の画像が現実空間に重畳されてユーザから視認されるように、前記表示装置に画像を表示させる表示制御手段と、
    を備える情報処理システム。
15. コンピュータが、
    撮像装置によって撮像された現実空間の画像を取得し、
    前記画像から特徴を検出し、
    検出された前記特徴の認識状況に応じて変化させて、仮想オブジェクト又は仮想オブジェクトと該仮想オブジェクトの態様と、を決定し、
    前記決定された仮想オブジェクト又は前記決定された態様の仮想オブジェクトが前記特徴に基づいて配置された仮想空間の画像を生成し、
    前記仮想空間の画像が現実空間に重畳されてユーザから視認されるように、表示装置に画像を表示させる、
    情報処理方法。

Images