JP2014186361A5 - - Google Patents

Description

図１６は、複数の操作対象にジェスチャ領域を設定するための第４の手法について説明するための説明図である。なお、ここでも２つの操作対象が存在するものとする。第４の手法において、操作制御部１８２は、第１の基準位置を有する第１の操作対象のために第１のジェスチャ領域を設定した後、第１の基準位置とより優先度の高い第２の操作対象の第２の基準位置とに基づいて、第１のジェスチャ領域を変更する。図１６の上段を参照すると、表示オブジェクトＶｏ３が表示されている。また、入力画像内で実オブジェクトＲｏ１が認識されている。表示オブジェクトＶｏ３はジェスチャ領域ＧＡ３を有し、実オブジェクトＲｏ１はジェスチャ領域ＧＡ１を有する。ここで、実オブジェクトＲｏ１の優先度は表示オブジェクトＶｏ３よりも高いものとする。その後、図１６の下段を参照すると、画角が移動した結果として、入力画像内で実オブジェクトＲｏ１の基準位置ＲＰ１が左方へ移動している。その結果、実オブジェクトＲｏ１のジェスチャ領域ＧＡ１は左方へ拡大している一方で、表示オブジェクトＶｏ３のジェスチャ領域ＧＡ３はジェスチャ領域ＧＡ１からの影響を受け、縮小している。このような手法によれば、ユーザが優先的に操作したいと望む操作対象について十分に広いジェスチャ領域を確実に設定することができる。なお、優先度は、様々な操作対象の種類についてどのように設定されてもよい。

本項では主に２つの操作対象が存在する例について説明したが、操作対象の数はかかる例に限定されない。例えば、図１７を参照すると、入力画像内で実オブジェクトＲｏ１及びＲｏ４が認識されている。実オブジェクトＲｏ４は、遠隔操作可能なオーディオ機器である。また、表示オブジェクトＶｏ３が表示されている。実オブジェクトＲｏ１及びＲｏ４並びに表示オブジェクトＶｏ３は、ユーザにより操作可能である。そこで、操作制御部１８２は、上述した４つの手法の任意の組合せに従って、画角ＡＮＧを３つの領域に分割する。図１７の例では、分割後の右上のジェスチャ領域ＧＡ１が実オブジェクトＲｏ１のために、分割後の右下のジェスチャ領域ＧＡ４が実オブジェクトＲｏ４のために、分割後の左のジェスチャ領域ＧＡ３が表示オブジェクトＶｏ３のためにそれぞれ設定されている。

操作対象がアプリケーションウィンドウなどの表示オブジェクトである場合には（ステップＳ１８５）、操作制御部１８２は、認識されたジェスチャに対応するアプリケーション処理をアプリケーション部１４０に実行させる（ステップＳ１８６）。アプリケーション処理が実行された結果は、図２２のステップＳ１９０において画面に表示され得る。

Claims (20)

1. ユーザにより操作可能な複数の操作対象の画面内の基準位置に基づいて前記画面内に設定される少なくとも１つのジェスチャ領域であって、少なくとも１つの操作対象に関連付けられる前記ジェスチャ領域を用いて、前記少なくとも１つの操作対象の操作を制御する制御部、
   を備える情報処理装置。
2. 前記制御部は、前記ジェスチャ領域を示す標識を前記画面に表示させる、請求項１に記載の情報処理装置。
3. 前記制御部は、前記少なくとも１つの操作対象の操作のために利用可能なジェスチャを示す標識を前記画面に表示させる、請求項１又は２に記載の情報処理装置。
4. 前記複数の操作対象は、実空間に存在する実オブジェクトを含み、
   前記実オブジェクトの前記基準位置は、当該実オブジェクトの前記画面内の位置から決定される、
   請求項１〜３のいずれか１項に記載の情報処理装置。
5. 前記複数の操作対象は、前記画面に表示される表示オブジェクトを含み、
   前記表示オブジェクトの前記基準位置は、当該表示オブジェクトが表示される際に前記ユーザにより指定される、
   請求項１〜４のいずれか１項に記載の情報処理装置。
6. 前記表示オブジェクトは、前記ユーザにより発せられる音声コマンドに応じて表示され、
   当該表示オブジェクトの前記基準位置は、前記音声コマンドが認識された際の前記画面内の操作体の位置から決定される、
   請求項５に記載の情報処理装置。
7. 前記実オブジェクトに関連付けて設定される前記ジェスチャ領域は、当該実オブジェクトが前記画面の外へ移動した後に前記画面内に残される、請求項４に記載の情報処理装置。
8. 前記実オブジェクトは、遠隔操作可能な機器であり、
   前記制御部は、前記遠隔操作可能な機器に関連付けられる前記ジェスチャ領域において前記ユーザのジェスチャが認識された場合に、認識された当該ジェスチャに対応する遠隔操作信号を前記遠隔操作可能な機器へ送信する、
   請求項４に記載の情報処理装置。
9. 前記実オブジェクトは、仮想的な操作の定義されたオブジェクトであり、
   前記制御部は、当該オブジェクトに関連付けられる前記ジェスチャ領域において前記ユーザのジェスチャが認識された場合に、認識された当該ジェスチャに対応する前記仮想的な操作を前記画面に表示させる、
   請求項４に記載の情報処理装置。
10. 前記表示オブジェクトは、アプリケーションを実行することにより表示され、
    前記制御部は、前記表示オブジェクトに関連付けられる前記ジェスチャ領域において前記ユーザのジェスチャが認識された場合に、認識された当該ジェスチャに対応するアプリケーション処理を前記アプリケーションに実行させる、
    請求項５又は６に記載の情報処理装置。
11. 前記制御部は、第１の基準位置を有する第１の操作対象に関連付けられる第１のジェスチャ領域と第２の基準位置を有する第２の操作対象に関連付けられる第２のジェスチャ領域とを、前記第１の基準位置と前記第２の基準位置との間を通る境界によって画角を分割することにより設定する、請求項１〜１０のいずれか１項に記載の情報処理装置。
12. 前記境界の方向は、前記第１の基準位置と前記第２の基準位置との間の位置関係に依存して決定される、請求項１１に記載の情報処理装置。
13. 前記制御部は、第１の基準位置を有する第１の操作対象に関連付けられる第１のジェスチャ領域と第２の基準位置を有する第２の操作対象に関連付けられる第２のジェスチャ領域とを、画角を均等に分割し、分割後の領域を前記第１の基準位置と前記第２の基準位置との間の位置関係に応じて前記第１の操作対象及び前記第２の操作対象に割り当てることにより、設定する、請求項１〜１０のいずれか１項に記載の情報処理装置。
14. 前記制御部は、第１の基準位置を有する第１の操作対象に関連付けられる第１のジェスチャ領域を設定した後、第２の基準位置を有する第２の操作対象に関連付けられる第２のジェスチャ領域を、前記第１の基準位置と前記第２の基準位置とに基づいて設定する、請求項１〜１０のいずれか１項に記載の情報処理装置。
15. 前記制御部は、第１の基準位置を有する第１の操作対象に関連付けられる第１のジェスチャ領域を、当該第１の基準位置とより優先度の高い第２の操作対象の第２の基準位置とに基づいて設定する、請求項１〜１０のいずれか１項に記載の情報処理装置。
16. 前記制御部は、前記第１の操作対象及び前記第２の操作対象のうち一方が前記ユーザにより指定された場合に、指定されなかった方の操作対象のジェスチャ領域を、指定された方の操作対象のジェスチャ領域にマージする、請求項１１〜１５のいずれか１項に記載の情報処理装置。
17. 前記制御部は、単一の操作対象が存在する場合には、当該単一の操作対象に関連付けられるジェスチャ領域を前記画面内の利用可能な領域の全体に設定し、前記複数の操作対象が存在する場合には、前記複数の操作対象の各々に関連付けられるジェスチャ領域を、前記複数の操作対象の前記基準位置に基づいて設定する、請求項１〜１６のいずれか１項に記載の情報処理装置。
18. 前記画面は、前記ユーザの頭部に装着される、請求項１〜１６のいずれか１項に記載の情報処理装置。
19. 情報処理装置により実行される操作制御方法において、
    ユーザにより操作可能な複数の操作対象の画面内の基準位置に基づいて前記画面内に設定される少なくとも１つのジェスチャ領域であって、少なくとも１つの操作対象に関連付けられる前記ジェスチャ領域を用いて、前記少なくとも１つの操作対象の操作を制御すること、
    を含む操作制御方法。
20. 情報処理装置を制御するコンピュータを、
    ユーザにより操作可能な複数の操作対象の画面内の基準位置に基づいて前記画面内に設定される少なくとも１つのジェスチャ領域であって、少なくとも１つの操作対象に関連付けられる前記ジェスチャ領域を用いて、前記少なくとも１つの操作対象の操作を制御する制御部、
    として機能させるためのプログラム。
    

Images