JP6127839B2 - 情報処理装置、情報処理方法、およびプログラム - Google Patents
情報処理装置、情報処理方法、およびプログラム Download PDFInfo
- Publication number
- JP6127839B2 JP6127839B2 JP2013181228A JP2013181228A JP6127839B2 JP 6127839 B2 JP6127839 B2 JP 6127839B2 JP 2013181228 A JP2013181228 A JP 2013181228A JP 2013181228 A JP2013181228 A JP 2013181228A JP 6127839 B2 JP6127839 B2 JP 6127839B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- information
- eyes
- line
- information processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Position Input By Displaying (AREA)
Description
1.本実施形態に係る情報処理方法
2.本実施形態に係る情報処理装置
3.本実施形態に係るプログラム
本実施形態に係る情報処理装置の構成について説明する前に、まず、本実施形態に係る情報処理方法について説明する。以下では、本実施形態に係る情報処理方法に係る処理を、本実施形態に係る情報処理装置が行う場合を例に挙げて、本実施形態に係る情報処理方法について説明する。
上述したように、ユーザが視線により操作を行うときにおいて、カーソルなどのオブジェクトを視線により動かす場合、ユーザが当該オブジェクトを表示画面上の所望の位置に配置しようとしても、目の動きにつられて当該オブジェクトが動いてしまうことが起こりうる。また、上記のように、目の動きにつられて当該オブジェクトが動いてしまう場合には、所望の位置に上記オブジェクトを配置することが困難であることから、ユーザの利便性を低下させる恐れがある。
(a)ユーザの視線の動きに基づき直接的に操作されるオブジェクト
(b)上記直接的に操作されるオブジェクトによって間接的に操作されるオブジェクト
より具体的には、本実施形態に係る情報処理装置は、本実施形態に係る情報処理方法に係る処理として、例えば、下記に示す(1)判定処理、および(2)表示制御処理を行うことによって、ユーザの利便性の向上を図る。
本実施形態に係る情報処理装置は、ユーザの目に関する情報に基づいて、オブジェクトの選択に関する所定の条件を満たすかを判定する。
選択に関する所定の条件が、時間に関する条件である場合には、本実施形態に係る情報処理装置は、ユーザの目に関する情報に基づき得られる時間に基づいて、オブジェクトの選択に関する所定の条件を満たすか否かを判定する。
上述したように、本実施形態に係るユーザの目に関する情報には、ユーザの目の動作に関する情報が含まれうる。また、上述したように、本実施形態に係る情報処理装置は、ユーザの目の動作に関する情報(例えば、ユーザの目の動作を示すデータや、ユーザの目の動作の特定に用いることが可能なデータ)を用いることによって、所定の目の動作が行われたことを判定することが可能である。
選択の解除に関する所定の条件が、時間に関する条件である場合には、本実施形態に係る情報処理装置は、ユーザの目に関する情報に基づき得られる時間に基づいて、オブジェクトの選択の解除に関する所定の条件を満たすか否かを判定する。
上述したように、本実施形態に係るユーザの目に関する情報には、ユーザの目の動作に関する情報が含まれうる。また、上述したように、本実施形態に係る情報処理装置は、ユーザの目の動作に関する情報(例えば、ユーザの目の動作を示すデータや、ユーザの目の動作の特定に用いることが可能なデータ)を用いることによって、所定の目の動作が行われたことを判定することが可能である。
本実施形態に係る情報処理装置は、例えば、上記(1)の処理(判定処理)において選択に関する所定の条件を満たすと判定された場合に、表示画面においてユーザの目に関する情報が示す視線の位置に表示されているオブジェクトを、選択された状態とする。
まず、本実施形態に係る表示制御処理の第1の例として、移動オブジェクトによって、選択候補オブジェクトである静的なオブジェクトを選択された状態とする場合における表示制御処理の一例について説明する。
・移動オブジェクトOの基準位置を中心として、表示画面におけるx軸、y軸、z軸方向に、移動オブジェクトOを動かす(例えば、ランダム、または、所定のパターンで移動オブジェクトOを動かす)
・移動オブジェクトOを点滅させる
・移動オブジェクトOに影をつけるなどの加工を施す
・上記の組み合わせ
・ユーザの目に関する情報が示す視線の位置の変化によらず、移動オブジェクトOを動かさない
・移動オブジェクトOの基準位置を中心として、表示画面におけるx軸、y軸、z軸方向に、移動オブジェクトOを動かさない(選択に関する所定の条件を満たすと判定されていない場合に、移動オブジェクトOが動いている場合)
・移動オブジェクトOを点滅させない(選択に関する所定の条件を満たすと判定されていない場合に、移動オブジェクトOが点滅されている場合)
・移動オブジェクトOに施されている影をつけるなどの加工を削除する(選択に関する所定の条件を満たすと判定されていない場合に、加工が施されている場合)
・移動オブジェクトOと背景とをアルファ・ブレンディングなどにより合成する
次に、本実施形態に係る表示制御処理の第2の例として、選択候補オブジェクトである移動オブジェクトを選択された状態とする場合における表示制御処理の一例について説明する。
例えば、上述したように、本実施形態に係る情報処理装置は、上記(1)の処理(判定処理)において、オブジェクトの選択の解除に関する所定の条件を満たすかを判定することが可能である。上記(1)の処理(判定処理)において、オブジェクトの選択の解除に関する所定の条件を満たすと判定された場合には、本実施形態に係る情報処理装置は、本実施形態に係る表示制御処理として、選択された状態であるオブジェクトを、選択されていない状態としてもよい。
次に、上述した本実施形態に係る情報処理方法に係る処理の適用例(ユースケース)を挙げる。図2は、本実施形態に係る情報処理方法に係る処理の適用例を説明するための説明図である。
図2に示すAは、本実施形態に係る情報処理方法に係る処理が、カーソル(移動オブジェクトの一例)の移動に適用される場合の一例を示している。図2のAでは、符号O1で示されるオブジェクトが、移動オブジェクトであるカーソルを示している。また、図2のAでは、符号Rで示される領域に表示されている各アイコンが、本実施形態に係る選択候補オブジェクトの一例に該当する。
図2に示すBは、本実施形態に係る情報処理方法に係る処理が、ゲームにおける回答選択に適用される場合の一例を示している。図2のBでは、符号O2〜O4で示されるオブジェクトそれぞれが、ユーザそれぞれに対応するユーザの目に関する情報が示すユーザの視線の位置に表示される移動オブジェクトを示している。図2のBでは、撮像されたユーザの顔部分を示す撮像画像が移動オブジェクトとして用いられる例を示しているが、図2のBの例に係る移動オブジェクトは、例えば、ユーザそれぞれに対応するキャラクターを示す画像や、文字が表示される画像など、任意の画像であってもよい。また、図2のBでは、符号SEL1、SEL2で示されるオブジェクトが、本実施形態に係る選択候補オブジェクトの一例に該当する。
図2に示すCは、本実施形態に係る情報処理方法に係る処理が、ノーティフィケーションオブジェクトの選択に適用される場合の一例を示している。図2のCでは、符号O5で示されるオブジェクトが、ノーティフィケーションオブジェクトを示している。また、図2のCにおいて符号O5で示されるノーティフィケーションオブジェクトは、本実施形態に係る移動オブジェクトの一例に該当し、かつ、本実施形態に係る選択候補オブジェクトの一例に該当する。
次に、上述した本実施形態に係る情報処理方法に係る処理を行うことが可能な、本実施形態に係る情報処理装置の構成の一例について、説明する。
図4は、本実施形態に係る情報処理装置100のハードウェア構成の一例を示す説明図である。情報処理装置100は、例えば、MPU150と、ROM152と、RAM154と、記録媒体156と、入出力インタフェース158と、操作入力デバイス160と、表示デバイス162と、通信インタフェース164とを備える。また、情報処理装置100は、例えば、データの伝送路としてのバス166で各構成要素間を接続する。
コンピュータを、本実施形態に係る情報処理装置として機能させるためのプログラム(例えば、上記(1)の処理(判定処理)、および上記(2)の処理(表示制御処理)など、本実施形態に係る情報処理方法に係る処理を実行することが可能なプログラム)が、コンピュータにおいてプロセッサなどにより実行されることによって、ユーザが視線の動きにより表示画面に表示されるオブジェクトを操作する場合における、ユーザの利便性の向上を図ることができる。
(1)
表示画面におけるユーザの視線の位置に関する情報を含むユーザの目に関する情報に基づいて、オブジェクトの選択に関する所定の条件を満たすかを判定する判定部と、
前記選択に関する所定の条件を満たすと判定された場合に、前記表示画面において前記ユーザの目に関する情報が示す視線の位置に表示されているオブジェクトを、選択された状態とする表示制御部と、
を備える、情報処理装置。
(2)
前記判定部は、
前記ユーザの目に関する情報が示す視線の位置が、選択された状態とされうる対象のオブジェクトである選択候補オブジェクトが表示される前記表示画面の第1領域内である時間が、設定されている第1設定時間よりも長い場合、または、
前記ユーザの目に関する情報が示す視線の位置が前記第1領域内である時間が、前記第1設定時間以上である場合に、
前記選択に関する所定の条件を満たすと判定する、(1)に記載の情報処理装置。
(3)
前記判定部は、
前記第1設定時間を、前記ユーザの目に関する情報が示す視線の位置の変化に基づくユーザの目の動きの大きさに基づいて、動的に設定し、
動的に設定された前記第1設定時間に基づいて、前記選択に関する所定の条件を満たすかを判定する、(2)に記載の情報処理装置。
(4)
前記判定部は、予め設定されている前記第1設定時間に基づいて、前記選択に関する所定の条件を満たすかを判定する、(2)に記載の情報処理装置。
(5)
前記ユーザの目に関する情報には、ユーザの目の動作に関する情報が含まれ、
前記判定部は、前記目の動作に関する情報に基づいて、所定の目の動作が検出された場合に、前記選択に関する所定の条件を満たすと判定する、(1)に記載の情報処理装置。
(6)
前記表示制御部は、
オブジェクトが選択された状態ではない場合には、前記ユーザの目に関する情報に基づいて、前記ユーザの目に関する情報が示すユーザの視線の位置に応じて前記表示画面に表示される位置が移動する移動オブジェクトを、前記表示画面における前記ユーザの目に関する情報が示すユーザの視線の位置に対応する位置に表示させ、
オブジェクトが選択された状態である場合には、前記表示制御部は、前記ユーザの目に関する情報が示すユーザの視線の位置が変化したとしても、前記移動オブジェクトが表示画面に表示される位置を変えない、(1)〜(5)のいずれか1つに記載の情報処理装置。
(7)
前記表示制御部は、前記表示画面における前記ユーザの目に関する情報が示すユーザの視線の位置が、選択された状態とされうる対象のオブジェクトである選択候補オブジェクトが表示される前記表示画面の領域内に存在する場合に、前記移動オブジェクトを選択的に表示させる、(6)に記載の情報処理装置。
(8)
前記選択に関する所定の条件を満たすと判定されてオブジェクトを選択された状態とする場合には、前記移動オブジェクトの表示態様を変化させる、(6)、または(7)に記載の情報処理装置。
(9)
前記表示制御部により選択された状態とされる前記オブジェクトは、前記ユーザの目に関する情報が示すユーザの視線の位置に応じて表示画面に表示される位置が移動しない静的なオブジェクトである、(1)〜(5)のいずれか1つに記載の情報処理装置。
(10)
前記表示制御部により前記オブジェクトが選択された状態とされている場合、
前記判定部は、前記ユーザの目に関する情報に基づいて、オブジェクトの選択の解除に関する所定の条件を満たすかを判定し、
前記表示制御部は、前記選択の解除に関する所定の条件を満たすと判定された場合に、選択された状態である前記オブジェクトを、選択されていない状態とする、(1)〜(9)のいずれか1つに記載の情報処理装置。
(11)
前記判定部は、
前記ユーザの目に関する情報が示す視線の位置が前記表示画面の第2領域内である時間が、設定されている第2設定時間よりも長い場合、または、
前記ユーザの目に関する情報が示す視線の位置が前記第2領域内である時間が、前記第2設定時間以上である場合に、
前記選択の解除に関する所定の条件を満たすと判定し、
前記第2領域は、選択された状態とされうる対象のオブジェクトである選択候補オブジェクトであって、かつ選択された状態である前記オブジェクトとは異なるオブジェクトが表示される、前記表示画面の領域である、(10)に記載の情報処理装置。
(12)
前記判定部は、
前記第2設定時間を、前記ユーザの目に関する情報が示す視線の位置の変化に基づくユーザの目の動きの大きさに基づいて、動的に設定し、
動的に設定された前記第2設定時間に基づいて、前記選択の解除に関する所定の条件を満たすかを判定する、(11)に記載の情報処理装置。
(13)
前記判定部は、予め設定されている前記第2設定時間に基づいて、前記選択の解除に関する所定の条件を満たすかを判定する、(11)に記載の情報処理装置。
(14)
前記表示制御部は、ユーザの目に関する情報が示す視線の位置が前記第2領域内である場合には、前記視線の位置が前記第2領域内にある時間に応じて、選択された状態である前記オブジェクトに関する表示態様を段階的に変える、(11)〜(13)のいずれか1つに記載の情報処理装置。
(15)
前記表示制御部は、ユーザの目に関する情報が示す視線の位置が前記第2領域内である場合には、前記第2領域に対応する前記選択候補オブジェクトの表示態様を変える、(11)〜(14)のいずれか1つに記載の情報処理装置。
(16)
前記ユーザの目に関する情報には、ユーザの目の動作に関する情報が含まれ、
前記判定部は、前記目の動作に関する情報に基づいて、所定の目の動作が検出された場合に、前記選択の解除に関する所定の条件を満たすと判定する、(10)に記載の情報処理装置。
(17)
表示画面におけるユーザの視線の位置に関する情報を含むユーザの目に関する情報に基づいて、オブジェクトの選択に関する所定の条件を満たすかを判定するステップと、
前記選択に関する所定の条件を満たすと判定された場合に、前記表示画面において前記ユーザの目に関する情報が示す視線の位置に表示されているオブジェクトを、選択された状態とするステップと、
を有する、情報処理装置により実行される情報処理方法。
(18)
表示画面におけるユーザの視線の位置に関する情報を含むユーザの目に関する情報に基づいて、オブジェクトの選択に関する所定の条件を満たすかを判定するステップ、
前記選択に関する所定の条件を満たすと判定された場合に、前記表示画面において前記ユーザの目に関する情報が示す視線の位置に表示されているオブジェクトを、選択された状態とするステップ、
をコンピュータに実行させるためのプログラム。
102 通信部
104 制御部
110 判定部
112 表示制御部
Claims (15)
- 表示画面におけるユーザの視線の位置に関する情報を含むユーザの目に関する情報に基づいて、オブジェクトの選択に関する所定の条件を満たすかを判定する判定部と、
前記選択に関する所定の条件を満たすと判定された場合に、前記表示画面において前記ユーザの目に関する情報が示す視線の位置に表示されているオブジェクトを、選択された状態とする表示制御部と、
を備え、
前記表示制御部により前記オブジェクトが選択された状態とされている場合、
前記判定部は、前記ユーザの目に関する情報に基づいて、オブジェクトの選択の解除に関する所定の条件を満たすかを判定し、
前記表示制御部は、前記選択の解除に関する所定の条件を満たすと判定された場合に、選択された状態である前記オブジェクトを、選択されていない状態とし、
前記判定部は、
前記ユーザの目に関する情報が示す視線の位置が前記表示画面の第2領域内である時間が、設定されている第2設定時間よりも長い場合、または、
前記ユーザの目に関する情報が示す視線の位置が前記第2領域内である時間が、前記第2設定時間以上である場合に、
前記選択の解除に関する所定の条件を満たすと判定し、
前記第2領域は、選択された状態とされうる対象のオブジェクトである選択候補オブジェクトであって、かつ選択された状態である前記オブジェクトとは異なるオブジェクトが表示される、前記表示画面の領域であり、
前記表示制御部は、ユーザの目に関する情報が示す視線の位置が前記第2領域内である場合には、前記視線の位置が前記第2領域内にある時間に応じて、選択された状態である前記オブジェクトに関する表示態様を段階的に変える、情報処理装置。 - 前記判定部は、
前記ユーザの目に関する情報が示す視線の位置が、選択された状態とされうる対象のオブジェクトである選択候補オブジェクトが表示される前記表示画面の第1領域内である時間が、設定されている第1設定時間よりも長い場合、または、
前記ユーザの目に関する情報が示す視線の位置が前記第1領域内である時間が、前記第1設定時間以上である場合に、
前記選択に関する所定の条件を満たすと判定する、請求項1に記載の情報処理装置。 - 前記判定部は、
前記第1設定時間を、前記ユーザの目に関する情報が示す視線の位置の変化に基づくユーザの目の動きの大きさに基づいて、動的に設定し、
動的に設定された前記第1設定時間に基づいて、前記選択に関する所定の条件を満たすかを判定する、請求項2に記載の情報処理装置。 - 前記判定部は、予め設定されている前記第1設定時間に基づいて、前記選択に関する所定の条件を満たすかを判定する、請求項2に記載の情報処理装置。
- 前記ユーザの目に関する情報には、ユーザの目の動作に関する情報が含まれ、
前記判定部は、前記目の動作に関する情報に基づいて、所定の目の動作が検出された場合に、前記選択に関する所定の条件を満たすと判定する、請求項1に記載の情報処理装置。 - 前記表示制御部は、
オブジェクトが選択された状態ではない場合には、前記ユーザの目に関する情報に基づいて、前記ユーザの目に関する情報が示すユーザの視線の位置に応じて前記表示画面に表示される位置が移動する移動オブジェクトを、前記表示画面における前記ユーザの目に関する情報が示すユーザの視線の位置に対応する位置に表示させ、
オブジェクトが選択された状態である場合には、前記表示制御部は、前記ユーザの目に関する情報が示すユーザの視線の位置が変化したとしても、前記移動オブジェクトが表示画面に表示される位置を変えない、請求項1〜5のいずれか1項に記載の情報処理装置。 - 前記表示制御部は、前記表示画面における前記ユーザの目に関する情報が示すユーザの視線の位置が、選択された状態とされうる対象のオブジェクトである選択候補オブジェクトが表示される前記表示画面の領域内に存在する場合に、前記移動オブジェクトを選択的に表示させる、請求項6に記載の情報処理装置。
- 前記選択に関する所定の条件を満たすと判定されてオブジェクトを選択された状態とする場合には、前記移動オブジェクトの表示態様を変化させる、請求項6、または7に記載の情報処理装置。
- 前記表示制御部により選択された状態とされる前記オブジェクトは、前記ユーザの目に関する情報が示すユーザの視線の位置に応じて表示画面に表示される位置が移動しない静的なオブジェクトである、請求項1〜5のいずれか1項に記載の情報処理装置。
- 前記判定部は、
前記第2設定時間を、前記ユーザの目に関する情報が示す視線の位置の変化に基づくユーザの目の動きの大きさに基づいて、動的に設定し、
動的に設定された前記第2設定時間に基づいて、前記選択の解除に関する所定の条件を満たすかを判定する、請求項1〜9のいずれか1項に記載の情報処理装置。 - 前記判定部は、予め設定されている前記第2設定時間に基づいて、前記選択の解除に関する所定の条件を満たすかを判定する、請求項1〜9のいずれか1項に記載の情報処理装置。
- 前記表示制御部は、ユーザの目に関する情報が示す視線の位置が前記第2領域内である場合には、前記第2領域に対応する前記選択候補オブジェクトの表示態様を変える、請求項1〜11のいずれか1項に記載の情報処理装置。
- 前記ユーザの目に関する情報には、ユーザの目の動作に関する情報が含まれ、
前記判定部は、前記目の動作に関する情報に基づいて、所定の目の動作が検出された場合に、前記選択の解除に関する所定の条件を満たすと判定する、請求項1〜9のいずれか1項に記載の情報処理装置。 - 表示画面におけるユーザの視線の位置に関する情報を含むユーザの目に関する情報に基づいて、オブジェクトの選択に関する所定の条件を満たすかを判定する判定ステップと、
前記選択に関する所定の条件を満たすと判定された場合に、前記表示画面において前記ユーザの目に関する情報が示す視線の位置に表示されているオブジェクトを、選択された状態とする表示制御ステップと、
を有し、
前記表示制御ステップにおいて前記オブジェクトが選択された状態とされている場合、
前記判定ステップでは、前記ユーザの目に関する情報に基づいて、オブジェクトの選択の解除に関する所定の条件を満たすかが判定され、
前記表示制御ステップでは、前記選択の解除に関する所定の条件を満たすと判定された場合に、選択された状態である前記オブジェクトを、選択されていない状態とさせ、
前記判定ステップでは、
前記ユーザの目に関する情報が示す視線の位置が前記表示画面の第2領域内である時間が、設定されている第2設定時間よりも長い場合、または、
前記ユーザの目に関する情報が示す視線の位置が前記第2領域内である時間が、前記第2設定時間以上である場合に、
前記選択の解除に関する所定の条件を満たすと判定され、
前記第2領域は、選択された状態とされうる対象のオブジェクトである選択候補オブジェクトであって、かつ選択された状態である前記オブジェクトとは異なるオブジェクトが表示される、前記表示画面の領域であり、
前記表示制御ステップでは、ユーザの目に関する情報が示す視線の位置が前記第2領域内である場合には、前記視線の位置が前記第2領域内にある時間に応じて、選択された状態である前記オブジェクトに関する表示態様が段階的に変えられる、情報処理装置により実行される情報処理方法。 - 表示画面におけるユーザの視線の位置に関する情報を含むユーザの目に関する情報に基づいて、オブジェクトの選択に関する所定の条件を満たすかを判定する判定ステップ、
前記選択に関する所定の条件を満たすと判定された場合に、前記表示画面において前記ユーザの目に関する情報が示す視線の位置に表示されているオブジェクトを、選択された状態とする表示制御ステップ、
をコンピュータに実行させ、
前記表示制御ステップにおいて前記オブジェクトが選択された状態とされている場合、
前記判定ステップでは、前記ユーザの目に関する情報に基づいて、オブジェクトの選択の解除に関する所定の条件を満たすかが判定され、
前記表示制御ステップでは、前記選択の解除に関する所定の条件を満たすと判定された場合に、選択された状態である前記オブジェクトを、選択されていない状態とさせ、
前記判定ステップでは、
前記ユーザの目に関する情報が示す視線の位置が前記表示画面の第2領域内である時間が、設定されている第2設定時間よりも長い場合、または、
前記ユーザの目に関する情報が示す視線の位置が前記第2領域内である時間が、前記第2設定時間以上である場合に、
前記選択の解除に関する所定の条件を満たすと判定され、
前記第2領域は、選択された状態とされうる対象のオブジェクトである選択候補オブジェクトであって、かつ選択された状態である前記オブジェクトとは異なるオブジェクトが表示される、前記表示画面の領域であり、
前記表示制御ステップでは、ユーザの目に関する情報が示す視線の位置が前記第2領域内である場合には、前記視線の位置が前記第2領域内にある時間に応じて、選択された状態である前記オブジェクトに関する表示態様が段階的に変えられる、プログラム。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013181228A JP6127839B2 (ja) | 2013-09-02 | 2013-09-02 | 情報処理装置、情報処理方法、およびプログラム |
PCT/JP2014/003921 WO2015029328A1 (en) | 2013-09-02 | 2014-07-24 | Information processing apparatus, information processing method, and program |
CN201480046755.3A CN105474136B (zh) | 2013-09-02 | 2014-07-24 | 信息处理设备、信息处理方法和程序 |
EP14755721.9A EP3042265B1 (en) | 2013-09-02 | 2014-07-24 | Information processing apparatus, information processing method, and program |
US14/915,637 US9939894B2 (en) | 2013-09-02 | 2014-07-24 | Information processing to operate a display object based on gaze information |
US15/914,572 US10180718B2 (en) | 2013-09-02 | 2018-03-07 | Information processing apparatus and information processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013181228A JP6127839B2 (ja) | 2013-09-02 | 2013-09-02 | 情報処理装置、情報処理方法、およびプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2015049721A JP2015049721A (ja) | 2015-03-16 |
JP2015049721A5 JP2015049721A5 (ja) | 2016-02-18 |
JP6127839B2 true JP6127839B2 (ja) | 2017-05-17 |
Family
ID=51399750
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013181228A Active JP6127839B2 (ja) | 2013-09-02 | 2013-09-02 | 情報処理装置、情報処理方法、およびプログラム |
Country Status (5)
Country | Link |
---|---|
US (2) | US9939894B2 (ja) |
EP (1) | EP3042265B1 (ja) |
JP (1) | JP6127839B2 (ja) |
CN (1) | CN105474136B (ja) |
WO (1) | WO2015029328A1 (ja) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106534879B (zh) * | 2016-11-08 | 2020-02-07 | 天脉聚源(北京)传媒科技有限公司 | 一种基于关注度的直播切换方法及系统 |
WO2018107566A1 (zh) * | 2016-12-16 | 2018-06-21 | 华为技术有限公司 | 一种处理方法及移动设备 |
JP6852612B2 (ja) | 2017-07-26 | 2021-03-31 | 富士通株式会社 | 表示プログラム、情報処理装置、及び表示方法 |
KR102518404B1 (ko) * | 2017-09-29 | 2023-04-06 | 삼성전자주식회사 | 전자 장치 및 그의 시선 정보를 이용한 컨텐트 실행 방법 |
JP6935921B2 (ja) * | 2017-10-06 | 2021-09-15 | 株式会社コナミデジタルエンタテインメント | 端末装置、及びプログラム |
CN109828655A (zh) * | 2017-11-23 | 2019-05-31 | 英属开曼群岛商麦迪创科技股份有限公司 | 车辆多荧幕控制系统及车辆多荧幕控制方法 |
US11240685B2 (en) * | 2018-01-29 | 2022-02-01 | Samsung Electronics Co., Ltd. | Devices and methods of selecting signal processing algorithm based on parameters |
WO2019176910A1 (ja) * | 2018-03-14 | 2019-09-19 | 本田技研工業株式会社 | 情報表示装置、情報表示方法および情報表示プログラム |
US11175730B2 (en) | 2019-12-06 | 2021-11-16 | Facebook Technologies, Llc | Posture-based virtual space configurations |
WO2021230048A1 (ja) | 2020-05-15 | 2021-11-18 | 株式会社Nttドコモ | 情報処理システム |
US11256336B2 (en) | 2020-06-29 | 2022-02-22 | Facebook Technologies, Llc | Integration of artificial reality interaction modes |
US11178376B1 (en) * | 2020-09-04 | 2021-11-16 | Facebook Technologies, Llc | Metering for display modes in artificial reality |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5367315A (en) * | 1990-11-15 | 1994-11-22 | Eyetech Corporation | Method and apparatus for controlling cursor movement |
JPH04372012A (ja) * | 1991-06-20 | 1992-12-25 | Fuji Xerox Co Ltd | 入力装置 |
JPH0651901A (ja) * | 1992-06-29 | 1994-02-25 | Nri & Ncc Co Ltd | 視線認識によるコミュニケーション装置 |
US5481622A (en) * | 1994-03-01 | 1996-01-02 | Rensselaer Polytechnic Institute | Eye tracking apparatus and method employing grayscale threshold values |
US5565888A (en) * | 1995-02-17 | 1996-10-15 | International Business Machines Corporation | Method and apparatus for improving visibility and selectability of icons |
JPH0954239A (ja) * | 1995-08-18 | 1997-02-25 | Canon Inc | 視線検出機能付光学装置及びカメラ |
US5850211A (en) * | 1996-06-26 | 1998-12-15 | Sun Microsystems, Inc. | Eyetrack-driven scrolling |
US5689619A (en) * | 1996-08-09 | 1997-11-18 | The United States Of America As Represented By The Secretary Of The Army | Eyetracker control of heads-up displays |
JPH10187334A (ja) * | 1996-12-26 | 1998-07-14 | Canon Inc | 情報入力方法および情報入力装置と情報入力用記憶媒体 |
JP2002301030A (ja) * | 2001-04-09 | 2002-10-15 | Canon Inc | 視線検出機能付き機器 |
JP2002345756A (ja) * | 2001-05-25 | 2002-12-03 | Canon Inc | 視線検出装置及び光学機器 |
JP2003280805A (ja) * | 2002-03-26 | 2003-10-02 | Gen Tec:Kk | データ入力装置 |
JP4526307B2 (ja) * | 2004-06-09 | 2010-08-18 | 富士通テン株式会社 | 機能選択装置 |
JP2009064395A (ja) | 2007-09-10 | 2009-03-26 | Hiroshima Univ | ポインティングデバイス、操作者の注視位置とカーソルの位置との誤差の補正をコンピュータに実行させるためのプログラムおよびそのプログラムを記録したコンピュータ読み取り可能な記録媒体 |
CN101681201B (zh) * | 2008-01-25 | 2012-10-17 | 松下电器产业株式会社 | 脑波接口系统、脑波接口装置、方法 |
KR101773845B1 (ko) * | 2011-05-16 | 2017-09-01 | 삼성전자주식회사 | 휴대용 단말기에서 입력 처리 방법 및 장치 |
JP5945417B2 (ja) | 2012-01-06 | 2016-07-05 | 京セラ株式会社 | 電子機器 |
CN103150021B (zh) * | 2013-03-21 | 2017-02-22 | 上海斐讯数据通信技术有限公司 | 电子书阅读控制系统及电子书阅读控制方法 |
-
2013
- 2013-09-02 JP JP2013181228A patent/JP6127839B2/ja active Active
-
2014
- 2014-07-24 CN CN201480046755.3A patent/CN105474136B/zh active Active
- 2014-07-24 US US14/915,637 patent/US9939894B2/en active Active
- 2014-07-24 EP EP14755721.9A patent/EP3042265B1/en active Active
- 2014-07-24 WO PCT/JP2014/003921 patent/WO2015029328A1/en active Application Filing
-
2018
- 2018-03-07 US US15/914,572 patent/US10180718B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US10180718B2 (en) | 2019-01-15 |
US20180196513A1 (en) | 2018-07-12 |
CN105474136B (zh) | 2019-02-15 |
EP3042265B1 (en) | 2022-09-14 |
WO2015029328A1 (en) | 2015-03-05 |
US20160231810A1 (en) | 2016-08-11 |
JP2015049721A (ja) | 2015-03-16 |
EP3042265A1 (en) | 2016-07-13 |
US9939894B2 (en) | 2018-04-10 |
CN105474136A (zh) | 2016-04-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6127839B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
JP6398987B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
US11816330B2 (en) | Display device, display controlling method, and computer program | |
JP6221535B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
US10397649B2 (en) | Method of zooming video images and mobile display terminal | |
US10928896B2 (en) | Information processing apparatus and information processing method | |
US9704028B2 (en) | Image processing apparatus and program | |
US9823815B2 (en) | Information processing apparatus and information processing method | |
JP2015524951A (ja) | 画像内で丸い物体を検出することによるコンピューティングデバイスの操作 | |
EP3255627A1 (en) | Image display method and device | |
JP2016192136A (ja) | 表示制御装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20151222 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20151222 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20161011 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161018 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161114 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170314 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170327 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6127839 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |