JP2016018252A

JP2016018252A - 情報処理装置及び情報処理方法及びプログラム

Info

Publication number: JP2016018252A
Application number: JP2014138720A
Authority: JP
Inventors: 大介木皿; Daisuke Kizara; 堀　淳志; Atsushi Hori; 淳志堀; 進也田口; Shinya Taguchi
Original assignee: Mitsubishi Electric Corp
Current assignee: Mitsubishi Electric Corp
Priority date: 2014-07-04
Filing date: 2014-07-04
Publication date: 2016-02-01

Abstract

【課題】空間認識センサを利用してユーザが指定する数値の認識間違いを最小限に抑え、ストレスの無い操作を可能にする。
【解決手段】状態判定部１２１は、動作状態が対象物選択状態であるときに空間認識センサ３００によりユーザの両手が認識された場合に、動作状態を数量加減状態に切り替える。ジェスチャ判定部１２５は、動作状態が数量加減状態であるときに、空間認識センサ３００により認識されたユーザの一方の手への他方の手のジェスチャを解析して、ユーザが指定する数量を判定する。
【選択図】図１

Description

本発明は、空間認識センサを利用したジェスチャシステムに関する。

従来の空間認識センサを利用したジェスチャシステムは、移動方向、移動速度及び移動距離を判断し、空間上の多様なジェスチャの認識を行っていた（例えば、特許文献１）。
また、カメラ画像から人間の画像を検出、空間移動パラメータを算出し、人間の画像の位置に応じて仮想空間内を移動するように制御する方法も提案されている（例えば、特許文献２）。

特願２０１３−９７７１９号公報特願平９−６０９７４号公報

従来の空間認識センサを利用したジェスチャシステムは、細かい手や指の動きに対して認識間違いが起きやすいという課題があった。
特に、表示画面を有した購買システムで、空間認識センサを利用したジェスチャシステムに関しては、より誤認識を軽減する必要がある。

本発明は上記のような課題を解決することを主な目的とし、空間認識センサを利用してユーザが指定する数値の認識間違いを抑えることを主な目的とする。

本発明に係る情報処理装置は、
空間認識センサに接続された情報処理装置であって、
前記空間認識センサにより認識された前記情報処理装置のユーザの一方の手への他方の手のジェスチャを解析して、前記ユーザが指定する数値を判定する数値判定部を有することを特徴とする。

本発明によれば、ユーザの両手により指定された数値を判定するため、ユーザが指定する数値の認識間違いを抑えることができる。

実施の形態１に係る対象物選択・数量加減装置の構成例を示す図。実施の形態１に係る対象物選択・数量加減装置の動作例を示すフローチャート図。実施の形態１に係る物品購入画面の例を示す図。実施の形態１に係る対象物の決定例を示す図。実施の形態１に係る対象物の変更例を示す図。実施の形態１に係るユーザの両手の検出例を示す図。実施の形態１に係るフリック動作による数量加減の例を示す図。実施の形態２に係る対象物選択・数量加減装置の動作例を示すフローチャート図。実施の形態２に係るフリック動作による数量加減の例を示す図。実施の形態３に係る対象物選択・数量加減装置の動作例を示すフローチャート図。実施の形態３に係るタップ動作による数量加算の例を示す図。実施の形態３に係るタップ動作による数量減算の例を示す図。実施の形態４に係る対象物選択・数量加減装置の動作例を示すフローチャート図。実施の形態４に係るフリック動作による数量加減の例を示す図。

実施の形態１．
本実施の形態では、空間認識センサを利用してより自然な対象物選択を実現し、対象物数量加減の認識間違いを最小限に抑え、ストレス無く操作できる構成を説明する。

［構成の説明］
図１は、本実施の形態に係る対象物選択・数量加減装置１００の構成例を示す。
対象物選択・数量加減装置１００は、情報処理装置の例に相当する。

図１において、対象物選択・数量加減装置１００はメモリ１１０と処理装置１２０を備えている。
メモリ１１０は、現在状態１１１とジェスチャ認識範囲１１２、対象物数量１１３、対象物データ内容１１４、ジェスチャ動作データベース１１５、プログラム１１６を備えている。
メモリ１１０は、例えばＲＡＭ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）である。
処理装置１２０は、状態判定部１２１と対象物決定部１２２、ジェスチャ認識範囲決定部１２３、対象物数量加減部１２４、ジェスチャ判定部１２５、対応桁数決定部１２６を備えている。
処理装置１２０は、例えばＣＰＵ（ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）である。
処理装置１２０は表示装置２００と空間認識センサ３００に接続される。

現在状態１１１は対象物選択状態か数量加減状態かを格納しており、状態判定部１２１から渡される。
対象物選択・数量加減装置１００の動作状態（動作モード）には、対象物選択状態と数量加減状態があり、現在状態１１１は、対象物選択・数量加減装置１００の動作状態が対象物選択状態及び数量加減状態のいずれであるかを示す。
対象物選択状態は、数量指定の対象物（例えば、購入対象の物品）を判定する状態であり、対象物判定モードに相当する。
数量加減状態は、対象物選択状態において選択された対象物についてユーザが指定する数量（例えば、購入数量）を判定する状態であり、数値判定モードに相当する。

ジェスチャ認識範囲１１２は、現状認識可能とする座標範囲を格納しており、処理装置１２０のジェスチャ認識範囲決定部１２３から渡され、ジェスチャ判定部１２５から呼び出しがあった場合に現在座標範囲を渡す。

対象物数量１１３は、表示されている物品の選択数量を格納しており、処理装置１２０の対象物数量加減部１２４でデータの呼び出しがあった場合、該当物品の数量を渡す。

対象物データ内容１１４は、現在数量加減対象となるデータ（購入対象物品の物品名や識別子）を格納しており、処理装置１２０の対象物決定部１２２からデータが渡され、対象物数量加減部１２４から呼び出しがあった場合、該当対象物データ内容を渡す。

ジェスチャ動作データベース１１５は、対象物選択・数量加減装置１００で認識しうるジェスチャを格納しており、処理装置１２０のジェスチャ判定部１２５から呼び出しがあった場合、該当ジェスチャを渡す。

プログラム１１６は全体の処理情報を格納しており、実行時に処理装置１２０に渡される。
プログラム１１６は、処理装置１２０で実行される状態判定部１２１、対象物決定部１２２、ジェスチャ認識範囲決定部１２３、対象物数量加減部１２４、ジェスチャ判定部１２５、対応桁数決定部１２６を実現するプログラムである。
つまり、状態判定部１２１等は、プログラム１１６として処理装置１２０により読み込まれ、処理装置１２０により実行される。
プログラム１１６は、例えば、図１に図示していない不揮発性記憶装置（ＲＯＭ、ハードディスク等）に記憶されており、実行時にメモリ１１０にロードされ、メモリ１１０から処理装置１２０に読み込まれて処理装置１２０により実行される。
また、不揮発性記憶装置にはオペレーティングシステム（ＯＳ）も記憶されており、ＯＳの少なくとも一部がメモリ１１０にロードされ、処理装置１２０はＯＳを実行しながら、プログラム１１６を実行する。
また、実施の形態１〜４の説明において、「〜の判断」、「〜の判定」、「〜の判別」、「〜の抽出」、「〜の検出」、「〜の検知」、「〜の解析」、「〜の選択」、「〜の生成」等として説明している処理の結果を示す情報やデータがメモリ１１０に記憶される。

状態判定部１２１は、空間認識センサ３００が認識する手の本数に応じて、対象物選択状態か数量加減状態かを判定する。
状態判定部１２１は、対象物未決定時には対象物選択状態とし、対象物選択状態において空間認識センサ３００によりユーザの２本の手、すなわちユーザの両手が認識された場合に、動作状態を数量加減状態に切替え、メモリ１１０の現在状態１１１に数量加減状態を格納する。
状態判定部１２１は、動作モード切替部の例に相当する。

対象物決定部１２２は、空間認識センサ３００からの座標情報に応じて、メモリ１１０の対象物データ内容１１４を変更し、表示装置２００へ表示を行う。
対象物決定部１２２は、対象物判定部の例に相当する。

ジェスチャ認識範囲決定部１２３は、空間認識センサ３００からの座標情報の認識範囲を決定し、メモリ１１０のジェスチャ認識範囲１１２に格納する。

対象物数量加減部１２４は、メモリ１１０の対象物数量１１３及び対象物データ内容１１４、ジェスチャ判定部１２５、対応桁数決定部１２６に応じて、対象物数量を加減する。

ジェスチャ判定部１２５は、ジェスチャ動作データベース１１５及びジェスチャ認識範囲１１２、空間認識センサ３００の座標情報に応じて、現在ジェスチャが行われた否か、行われた場合にどの種類のジェスチャかを判定し、表示装置２００へ表示を行う。
例えば、ジェスチャ判定部１２５は、動作状態が数量加減状態であるときに、空間認識センサ３００により認識されたユーザの一方の手への他方の手のジェスチャを解析して、ユーザが指定する対象物の数量を判定する。
ジェスチャ判定部１２５は、後述の対応桁数決定部１２６とともに、数値判定部の例に相当する。

対応桁数決定部１２６は、ジェスチャ判定部１２５で判定されたジェスチャに基づき、対応する桁を決定し、処理装置１２０の対象物数量加減部１２４へ対応する桁を渡す。
より具体的には、対応桁数決定部１２６は、ユーザが一方の手で伸ばしている指の本数を解析して、数量加減の対象となる桁を判定する。
対応桁数決定部１２６は、ジェスチャ判定部１２５とともに数値判定部の例に相当する。
対応桁数決定部１２６の詳細は、実施の形態２で説明する。

［動作の説明］
以上の構成について、処理装置１２０の状態判定部１２１、対象物決定部１２２、ジェスチャ認識範囲決定部１２３、対象物数量加減部１２４、ジェスチャ判定部１２５、対応桁数決定部１２６を中心に説明する。
ここで、図２は実施の形態１の処理手順を示すメインフローチャートである。
本実施の形態では、図３のような３Ｄグラフィックス表示の物品購入画面の選択及び数量加減方法について述べる。

メインフローチャートから本動作ステップについて述べる。

はじめに、片手Ａの位置に応じて空間認識センサ３００から空間座標を取得する（Ｓ２０１）。
次に、取得した座標は対象物を指しているか否かを判別し（Ｓ２０２）、対象物を指していたら、対象物決定部１２２により対象物決定処理を行う（Ｓ２０３）。
次に、認識している手の本数を空間認識センサ３００から判別し（Ｓ２０４）、２本である場合に状態判定部１２１が動作状態を、数量加減状態に変更する（Ｓ２０５）。
次に、ジェスチャ認識範囲決定部１２３が、ジェスチャ認識範囲１１２を対象物を決定した手Ａの周囲に制限する（Ｓ２０６）。
次に、ジェスチャ判定部１２５がジェスチャ判定処理を行い（Ｓ２０７）、片手Ｂの片手Ａに対するフリック動作に応じた数量加減処理を行う（Ｓ２０８）。
次に、ジェスチャ判定部１２５が数量加減に応じた結果を表示装置２００に表示する（Ｓ２０９）。

物品の選択から、数量の加減について述べる。
空間認識センサ３００が、認識空間座標において手Ａの動きを認識することで、ユーザの手Ａが任意物品を指していることを確認できた場合に、対象物決定部１２２が対象物を決定し（図４）、手Ａが更に別の場所に動いた場合は、対象物決定部１２２は対象物を変更する（図５）。
空間認識センサ３００が、認識空間座標において２本目の手Ｂを検出した場合に（図６）、状態判定部１２１は動作状態を数量加減状態に遷移させ、ジェスチャ認識範囲１１２を手Ａの周囲に制限する。
この際に、制限する手Ａからの距離となる閾値は任意とする。
手Ｂが手Ａをデバイスとし、フリック動作を行うことで数量の加減を行う（図７）。
つまり、ジェスチャ判定部１２５は、手Ｂによる手Ａに対するフリック動作を解析して、ユーザが指定する数量を判定する。

［効果］
本実施の形態では、空間認識センサを用いて対象物選択と、対象物数量加減を手認識の場合と、両手認識の場合で分岐することで、操作認識間違いを最小限に抑えることが可能である。
また、片方の手Ａをデバイスとして扱い、もう片方の手Ｂでジェスチャ操作（フリック操作）をすることで、ユーザに操作感を与える効果も期待できる。

実施の形態２．
［動作の説明］
以上の実施の形態１では、空間認識センサを用い、手Ａを物品選択用及び数量加減用デバイスとし、手Ｂのフリック動作で自然に数量加減を実現した。

本実施の形態では、空間認識センサにより認識された手Ａにおける指の状態と、手Ａへの手Ｂの動作とを解析して、ユーザが指定する数値を判定する例を説明する。

ここで、図８は実施の形態２の処理手順を示すメインフローチャートである。
本実施の形態も、実施の形態１と同様の構成において、実施の形態１と同様に図３のような物品購入画面の数量変更方法について述べる。

はじめに、片手Ａの位置に応じて空間認識センサ３００から空間座標を取得する（Ｓ８０１）。
次に、取得した座標は対象物を指しているか否かを判別し（Ｓ８０２）、対象物を指していたら、対象物決定部１２２により対象物決定処理を行う（Ｓ８０３）。
次に、認識している手の本数を空間認識センサ３００が判別し（Ｓ８０４）、２本である場合に状態判定部１２１が、動作状態を数量加減状態に変更する（Ｓ８０５）。
次に、ジェスチャ認識範囲決定部１２３が、ジェスチャ認識範囲１１２を対象物を決定した手Ａの周囲に制限する（Ｓ８０６）。
次に、ジェスチャ判定部１２５がジェスチャ判定処理を行い（Ｓ８０７）、また、対応桁数決定部１２６が、認識している指の本数に応じて対応桁を制御し、ジェスチャ判定部１２５が、フリックの動作に応じて数量加減処理を行う（Ｓ８０８、Ｓ８０９、Ｓ８１０）。
次に、ジェスチャ判定部１２５が、数量加減に応じた結果を表示装置２００に表示する（Ｓ８１１）。

本実施の形態では、数量加減動作は手Ｂが手Ａをデバイスとし、フリック動作を行うことで数量の加減を行うところまでは実施の形態１と同様であるが、手Ａの任意物品を指している指本数が１本の場合は１桁目の数量加減、２本の場合は２桁目の数量加減を行う（図９）。
つまり、対応桁数決定部１２６は、ユーザが手Ａで伸ばしている指の本数を解析して、伸ばしている指が１本である場合は、１桁目が数量加減の対象であると判定し、伸ばしている指が２本である場合は、２桁目が数量加減の対象であると判定する。

［効果］
本実施の形態では、物品選択時の指の本数に応じて桁数を制御することで、多くの物品数量加減時にも素早い選択が可能である。

実施の形態３．
［動作の説明］
以上の実施の形態では、空間認識センサを用い、手Ａを物品選択用及び数量加減用デバイスとし、手Ｂのフリック動作で自然に物品選択及び数量加減を実現した。

本実施の形態では、ジェスチャ判定部１２５が、手Ｂで伸ばしている指の本数を解析して、ユーザが意図する操作が加算操作及び減算操作のいずれかであるかを判定し、手Ａへの手Ｂのタップジェスチャを解析して、加算数及び減算数のいずれかを判定する。

ここで、図１０は、実施の形態３の処理手順を示すメインフローチャートである。
実施の形態１と同様の構成において本実施の形態も、実施の形態１と同様に図３のような物品購入画面の数量変更方法について述べる。

はじめに、片手Ａの位置に応じて空間認識センサ３００から空間座標を取得する（Ｓ１００１）。
次に、取得した座標は対象物を指しているか否かを判別し（Ｓ１００２）、対象物を指していたら、対象物決定部１２２により対象物決定処理を行う（Ｓ１００３）。
次に、認識している手の本数を空間認識センサ３００から判別し、２本である場合（Ｓ１００４）に状態判定部１２１が、動作状態を数量加減状態に変更する（Ｓ１００５）。
次に、ジェスチャ認識範囲決定部１２３が、ジェスチャ認識範囲を対象物を決定した手Ａの周囲に制限する（Ｓ１００６）。
次に、ジェスチャ判定部１２５がジェスチャ判定処理を行い（Ｓ１００７）、認識している指の本数が１本の場合は加算、２本の場合は減算と制御し、タップ動作に応じて数量加減処理を行う（Ｓ１００８、Ｓ１００９、Ｓ１０１０）。
次に、ジェスチャ判定部１２５が数量加減に応じた結果を表示装置２００に表示する（Ｓ１０１１）。

動作は手Ｂが手Ａをデバイスとし、数量の加減を行うところまでは実施の形態１と同様であるが、本実施の形態では、手Ｂがタップジェスチャで数量加減を行い、また手Ｂの指の本数が１本の場合は加算（図１１）、２本の場合は減算を行う（図１２）。

［効果］
本実施の形態では、タップジェスチャに応じて物品数量を加減するため、少ない加減時にも容易に選択が可能になる。

実施の形態４．
［動作の説明］
以上の実施の形態１〜３では、空間認識センサを用い、手Ａを物品選択用及び数量加減用デバイスとし、手Ｂのジェスチャ操作で自然に物品選択及び数量加減を実現した。

本実施の形態では、動作状態が対象物選択状態であるときに、対象物決定部１２２は、空間認識センサ３００により認識されたユーザの視線が指し示す物を対象物として判定する。
また、動作状態が対象物選択状態であるときに空間認識センサ３００によりユーザの視線がユーザの手を指し示していることが認識された場合に、状態判定部１２１は、動作状態を数量加減状態に切り替える。
また、動作状態が数量加減状態であるときに、ジェスチャ判定部１２５は、空間認識センサ３００により認識されたユーザの手のジェスチャを解析して、ユーザが指定する数量を判定する。

ここで、図１３は、実施の形態４の処理手順を示すメインフローチャートである。
本実施の形態も、実施の形態１と同様の構成において、実施の形態１と同様に図３のような物品購入画面の対象物選択及び数量変更方法について述べる。

はじめに、目線の方向に応じて空間認識センサ３００から空間座標を取得する（Ｓ１３０１）。
次に、取得した座標は対象物を指しているか否かを判別し（Ｓ１３０２）、対象物を指していたら、対象物決定部１２２が対象物決定処理を行う（Ｓ１３０３）。
次に、認識している情報から手を認識した場合（Ｓ１３０４）、状態判定部１２１は動作状態を数量加減状態に変更する（Ｓ１３０５）。
次に、ジェスチャ判定部１２５がジェスチャ判定処理を行い（Ｓ１３０６）、フリック動作に応じて数量加減処理を行う（Ｓ１３０７）。
次に、ジェスチャ判定部１２５が数量加減に応じた結果を表示装置２００に表示する（Ｓ１３０８）。

対象物品の選択から、数量の加減について述べる。
認識空間座標において空間認識センサ３００がユーザの視線（目の動き）を認識し、ユーザの視線が任意物品を指している場合に対象物を決定し、更に別の場所に視線が動くことを検知した場合は対象物を変更する。
認識空間座標において空間認識センサ３００が手を検出した場合、数量加減状態に遷移する。
そして、認識している手が上下のフリック動作を行うことで数量の加減を行う（図１４）。

［効果］
本実施の形態では、空間認識センサを用いた視線からの対象物選択と、手の操作で対象物数量加減を行うことで、より自然な動作で対応することが可能である。

以上、本発明の実施の形態について説明したが、これらの実施の形態のうち、２つ以上を組み合わせて実施しても構わない。
あるいは、これらの実施の形態のうち、１つを部分的に実施しても構わない。
あるいは、これらの実施の形態のうち、２つ以上を部分的に組み合わせて実施しても構わない。
なお、本発明は、これらの実施の形態に限定されるものではなく、必要に応じて種々の変更が可能である。

１００対象物選択・数量加減装置、１１０メモリ、１２０処理装置、１１１現在状態、１１２ジェスチャ認識範囲、１１３対象物数量、１１４対象物データ内容、１１５ジェスチャ動作データベース、１１６プログラム、１２１状態判定部、１２２対象物決定部、１２３ジェスチャ認識範囲決定部、１２４対象物数量加減部、１２５ジェスチャ判定部、１２６対応桁数決定部、２００表示装置、３００空間認識センサ。

Claims

空間認識センサに接続された情報処理装置であって、
前記空間認識センサにより認識された前記情報処理装置のユーザの一方の手への他方の手のジェスチャを解析して、前記ユーザが指定する数値を判定する数値判定部を有することを特徴とする情報処理装置。
前記情報処理装置は、
ユーザが指定する数値を判定する数値判定モードと前記数値判定モード以外のモードとで動作モードを切り替える情報処理装置であり、
前記情報処理装置は、更に、
前記動作モードが前記数値判定モード以外のモードであるときに前記空間認識センサにより前記ユーザの両手が認識された場合に、前記動作モードを前記数値判定モードに切り替える動作モード切替部を有し、
前記数値判定部は、
前記動作モードが前記数値判定モードであるときに、前記空間認識センサにより認識された前記ユーザの一方の手への他方の手のジェスチャを解析して、前記ユーザが指定する数値を判定することを特徴とする請求項１に記載の情報処理装置。
前記数値判定部は、
前記空間認識センサにより認識された前記一方の手への前記他方の手のフリックジェスチャを解析して、前記ユーザが指定する数値を判定することを特徴とする請求項１に記載の情報処理装置。
前記数値判定部は、
前記空間認識センサにより認識された前記一方の手における指の状態と、前記一方の手への前記他方の手のジェスチャとを解析して、前記ユーザが指定する数値を判定することを特徴とする請求項１に記載の情報処理装置。
前記数値判定部は、
前記一方の手で伸ばしている指の本数を解析して、対象となる桁を判定し、前記一方の手への前記他方の手のフリックジェスチャを解析して、桁ごとの数値を判定することを特徴とする請求項４に記載の情報処理装置。
前記数値判定部は、
前記空間認識センサにより認識された前記他方の手における指の状態と、前記一方の手への前記他方の手のジェスチャとを解析して、前記ユーザが指定する数値を判定することを特徴とする請求項１に記載の情報処理装置。
前記数値判定部は、
前記他方の手で伸ばしている指の本数を解析して、前記ユーザが意図する操作が加算操作及び減算操作のいずれかであるかを判定し、前記一方の手への前記他方の手のタップジェスチャを解析して、加算数及び減算数のいずれかを判定することを特徴とする請求項６に記載の情報処理装置。
前記情報処理装置は、
前記数値判定モード以外のモードとして、数値指定の対象物を判定する対象物判定モードを有し、
前記情報処理装置は、更に、
前記動作モードが前記対象物判定モードであるときに、前記空間認識センサにより認識された前記ユーザの前記一方の手が指し示す物を前記対象物として判定する対象物判定部を有することを特徴とする請求項２に記載の情報処理装置。
空間認識センサに接続され、ユーザが指定する数値を判定する数値判定モードと、数値指定の対象物を判定する対象物判定モードとで動作モードを切り替える情報処理装置であって、
前記動作モードが前記対象物判定モードであるときに、前記空間認識センサにより認識された前記ユーザの視線が指し示す物を前記対象物として判定する対象物判定部と、
前記動作モードが前記対象物判定モードであるときに前記空間認識センサにより前記ユーザの視線が前記ユーザの手を指し示していることが認識された場合に、前記動作モードを前記数値判定モードに切り替える動作モード切替部と、
前記動作モードが前記数値判定モードであるときに、前記空間認識センサにより認識された前記ユーザの手のジェスチャを解析して、前記ユーザが指定する数値を判定する数値判定部とを有することを特徴とする情報処理装置。
空間認識センサに接続されたコンピュータが行う情報処理方法であって、
前記コンピュータが、前記コンピュータのユーザの一方の手への他方の手のジェスチャを解析して、前記ユーザが指定する数値を判定する数値判定ステップを有することを特徴とする情報処理方法。
空間認識センサに接続され、ユーザが指定する数値を判定する数値判定モードと、数値指定の対象物を判定する対象物判定モードとで動作モードを切り替えるコンピュータが行う情報処理方法であって、
前記動作モードが前記対象物判定モードであるときに、前記コンピュータが、前記空間認識センサにより認識された前記ユーザの視線が指し示す物を前記対象物として判定する対象物判定ステップと、
前記動作モードが前記対象物判定モードであるときに前記空間認識センサにより前記ユーザの視線が前記ユーザの手を指し示していることが認識された場合に、前記コンピュータが、前記動作モードを前記数値判定モードに切り替える動作モード切替ステップと、
前記動作モードが前記数値判定モードであるときに、前記コンピュータが、前記空間認識センサにより認識された前記ユーザの手のジェスチャを解析して、前記ユーザが指定する数値を判定する数値判定ステップとを有することを特徴とする情報処理方法。
空間認識センサに接続されたコンピュータに、
前記空間認識センサにより認識された前記コンピュータのユーザの一方の手への他方の手のジェスチャを解析して、前記ユーザが指定する数値を判定する数値判定処理を実行させることを特徴とするプログラム。
空間認識センサに接続され、ユーザが指定する数値を判定する数値判定モードと、数値指定の対象物を判定する対象物判定モードとで動作モードを切り替えるコンピュータに、
前記動作モードが前記対象物判定モードであるときに、前記空間認識センサにより認識された前記ユーザの視線が指し示す物を前記対象物として判定する対象物判定処理と、
前記動作モードが前記対象物判定モードであるときに前記空間認識センサにより前記ユーザの視線が前記ユーザの手を指し示していることが認識された場合に、前記動作モードを前記数値判定モードに切り替える動作モード切替処理と、
前記動作モードが前記数値判定モードであるときに、前記空間認識センサにより認識された前記ユーザの手のジェスチャを解析して、前記ユーザが指定する数値を判定する数値判定処理とを実行させることを特徴とするプログラム。