JP2017059062A5

JP2017059062A5 -

Info

Publication number: JP2017059062A5
Application number: JP2015184523A
Authority: JP
Filing date: 2015-09-17
Publication date: 2018-11-01
Anticipated expiration: 2035-09-17

Description

上記課題を解決するために、本発明に係る情報処理装置の一態様は、頭部装着型表示装置を装着したユーザの頭部の位置姿勢を検出する第一の検出手段と、前記ユーザの視野範囲内に存在する、タスクの実行に用いられる入力装置を識別する第一の識別手段と、前記ユーザの視野範囲内に存在する、前記ユーザが前記入力装置を操作するための操作媒体を識別する第二の識別手段と、前記第一の検出手段によって検出された前記頭部の位置姿勢に基づいて、前記ユーザの視点位置から、前記第一の識別手段によって識別された入力装置までの第一距離を検出する第二の検出手段と、前記第一の検出手段によって検出された前記頭部の位置姿勢に基づいて、前記ユーザの視点位置から、前記第二の識別手段によって識別された操作媒体までの第二距離を検出する第三の検出手段と、前記第二の検出手段によって検出された第一距離と、前記第三の検出手段によって検出された第二距離とに基づいて、実行すべきタスクを判別する判別手段と、前記判別手段によって判別されたタスクに応じた情報を前記頭部装着型表示装置に表示させる表示制御手段と、を備える。

Claims

頭部装着型表示装置を装着したユーザの頭部の位置姿勢を検出する第一の検出手段と、
前記ユーザの視野範囲内に存在する、タスクの実行に用いられる入力装置を識別する第一の識別手段と、
前記ユーザの視野範囲内に存在する、前記ユーザが前記入力装置を操作するための操作媒体を識別する第二の識別手段と、
前記第一の検出手段によって検出された前記頭部の位置姿勢に基づいて、前記ユーザの視点位置から、前記第一の識別手段によって識別された入力装置までの第一距離を検出する第二の検出手段と、
前記第一の検出手段によって検出された前記頭部の位置姿勢に基づいて、前記ユーザの視点位置から、前記第二の識別手段によって識別された操作媒体までの第二距離を検出する第三の検出手段と、
前記第二の検出手段によって検出された第一距離と、前記第三の検出手段によって検出された第二距離とに基づいて、実行すべきタスクを判別する判別手段と、
前記判別手段によって判別されたタスクに応じた情報を前記頭部装着型表示装置に表示させる表示制御手段と、
を備えることを特徴とする情報処理装置。
前記ユーザの視点位置から撮像された前記ユーザの視線方向の画像を取得する取得手段をさらに備え、
前記第一の識別手段は、前記画像内に存在する前記入力装置を、前記視野範囲内に存在する前記入力装置として識別し、
前記第二の識別手段は、前記画像内に存在する前記操作媒体を、前記視野範囲内に存在する前記操作媒体として識別することを特徴とする請求項１に記載の情報処理装置。
前記取得手段は、少なくとも前記ユーザの左右の目に対応する複数の視点位置からそれぞれ撮像された前記ユーザの視線方向の複数の画像を取得し、
前記第二の検出手段は、前記取得手段によって取得された前記複数の画像をもとに、三角測量の原理を用いて前記第一距離を検出し、
前記第三の検出手段は、前記取得手段によって取得された前記複数の画像をもとに、三角測量の原理を用いて前記第二距離を検出することを特徴とする請求項２に記載の情報処理装置。
前記第三の検出手段は、
前記取得手段により取得された前記画像内における前記操作媒体に対応する領域を包含する外接図形の面積と、所定の基準面積とを比較することにより、前記第二距離を検出することを特徴とする請求項２または３に記載の情報処理装置。
前記入力装置の位置姿勢を検出する第四の検出手段と、
前記操作媒体の位置姿勢を検出する第五の検出手段と、をさらに備え、
前記第一の識別手段は、前記第一の検出手段によって検出された前記頭部の位置姿勢と、前記第四の検出手段によって検出された前記入力装置の位置姿勢とに基づいて、前記視野範囲内に存在する前記入力装置を識別し、
前記第二の識別手段は、前記第一の検出手段によって検出された前記頭部の位置姿勢と、前記第五の検出手段によって検出された前記操作媒体の位置姿勢とに基づいて、前記視野範囲内に存在する前記操作媒体を識別する
ことを特徴とする請求項１に記載の情報処理装置。
前記判別手段は、
前記第二の検出手段によって検出された前記第一距離が、前記入力装置の種別毎に予め設定された第一規定距離の範囲内であるか否かを判定する第一の判定手段と、
前記第三の検出手段によって検出された前記第二距離が、前記操作媒体の種別毎に予め設定された第二規定距離の範囲内であるか否かを判定する第二の判定手段と、を備え、
前記第一の判定手段によって前記第一規定距離の範囲内にあると判定された前記入力装置と、前記第二の判定手段によって前記第二規定距離の範囲内にあると判定された前記操作媒体との組合せに基づいて、前記タスクを判別する
ことを特徴とする請求項１から５のいずれか１項に記載の情報処理装置。
前記判別手段は、１つの前記組合せに対応付けられた複数のタスクの中から、直前に実行されていたタスクに応じたタスクを判別することを特徴とする請求項６に記載の情報処理装置。
前記判別手段は、
前記第一の判定手段によって前記第一規定距離の範囲内にあると判定されていた前記入力装置が前記第一規定距離の範囲外にあると判定されてから、種別の異なる前記入力装置が新たに前記第一規定距離の範囲内にあると判定されるまでの時間が、予め設定された規定時間の範囲内である場合、
前記複数のタスクの中から、直前に実行されていたタスクに関連するタスクを判別することを特徴とする請求項７に記載の情報処理装置。
前記操作媒体は、前記入力装置を操作する前記ユーザの手であることを特徴とする請求項１から８のいずれか１項に記載の情報処理装置。
前記頭部装着型表示装置は、ビデオシースルー型ヘッドマウントディスプレイ（ＨＭＤ）であることを特徴とする請求項１から９のいずれか１項に記載の情報処理装置。
前記頭部装着型表示装置は、光学シースルー型ヘッドマウントディスプレイ（ＨＭＤ）であることを特徴とする請求項１から９のいずれか１項に記載の情報処理装置。
前記入力装置は、少なくともキーボードを含み、
前記判別手段により判別されるタスクの少なくとも１つは、前記キーボードを操作して文字を入力するタスクであることを特徴とする請求項１から１１のいずれか１項に記載の情報処理装置。
前記入力装置は、少なくとも指示を入力するためのボタンを有するコントローラを含み、
前記判別手段により判別されるタスクの少なくとも１つは、前記コントローラを操作して前記頭部装着型表示装置に表示された仮想コンテンツを移動するタスクであることを特徴とする請求項１から１２のいずれか１項に記載の情報処理装置。
頭部装着型表示装置を装着したユーザの頭部の位置姿勢を検出するステップと、
前記ユーザの視野範囲内に存在する、タスクの実行に用いられる入力装置を識別するステップと、
前記ユーザの視野範囲内に存在する、前記ユーザが前記入力装置を操作するための操作媒体を識別するステップと、
前記頭部の位置姿勢に基づいて、前記ユーザの視点位置から前記入力装置までの第一距離を検出するステップと、
前記頭部の位置姿勢に基づいて、前記ユーザの視点位置から前記操作媒体までの第二距離を検出するステップと、
前記第一距離と前記第二距離とに基づいて、実行すべきタスクを判別するステップと、
前記判別によって判別されたタスクに応じた情報を前記頭部装着型表示装置に表示させるステップと、
を含むことを特徴とする情報処理方法。
コンピュータを、請求項１から１３のいずれか１項に記載の情報処理装置の各手段として機能させるためのプログラム。
請求項１５に記載のプログラムを記録した、コンピュータが読み取り可能な記録媒体。