JP2000089905A - ポインティングデバイス - Google Patents
ポインティングデバイスInfo
- Publication number
- JP2000089905A JP2000089905A JP26046698A JP26046698A JP2000089905A JP 2000089905 A JP2000089905 A JP 2000089905A JP 26046698 A JP26046698 A JP 26046698A JP 26046698 A JP26046698 A JP 26046698A JP 2000089905 A JP2000089905 A JP 2000089905A
- Authority
- JP
- Japan
- Prior art keywords
- selection
- information processing
- coordinate information
- pointing device
- processing means
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
(57)【要約】
【課題】 操作者の視線の方向に基づいて選択対象物を
特定し、この特定に基づいた情報の入力を行うポインテ
ィングデバイスにおいて、一定位置を注視するような不
自然な動作を必要とせず、かつ、視線検出の精度に影響
されずに的確な入力操作が行えるようにする。 【解決手段】 操作者の視線の方向を検出する視線検出
装置１と、この視線検出装置１からの出力信号に基づい
て座標情報を生成し該座標情報に対応した選択対象物を
特定する座標情報処理回路３と、操作者が操作する確定
スイッチ２と、この確定スイッチ２が操作されたときに
確定情報を生成する確定情報処理回路４と、確定情報処
理回路４が確定情報を生成したときに座標情報処理回路
３により選択対象物が特定されている場合には該選択対
象物に対する選択が確定したものとして選択確定情報を
生成する選択確定情報処理回路５とを備えた。
特定し、この特定に基づいた情報の入力を行うポインテ
ィングデバイスにおいて、一定位置を注視するような不
自然な動作を必要とせず、かつ、視線検出の精度に影響
されずに的確な入力操作が行えるようにする。 【解決手段】 操作者の視線の方向を検出する視線検出
装置１と、この視線検出装置１からの出力信号に基づい
て座標情報を生成し該座標情報に対応した選択対象物を
特定する座標情報処理回路３と、操作者が操作する確定
スイッチ２と、この確定スイッチ２が操作されたときに
確定情報を生成する確定情報処理回路４と、確定情報処
理回路４が確定情報を生成したときに座標情報処理回路
３により選択対象物が特定されている場合には該選択対
象物に対する選択が確定したものとして選択確定情報を
生成する選択確定情報処理回路５とを備えた。
Description
【０００１】
【発明の属する技術分野】本発明は、操作者の視野中や
メニュー画面に表示した複数の選択肢のうちから、操作
者の視線の方向により特定の選択対象物を選択して、選
択結果を情報処理装置などに入力するためのポインティ
ングデバイスに関する。
メニュー画面に表示した複数の選択肢のうちから、操作
者の視線の方向により特定の選択対象物を選択して、選
択結果を情報処理装置などに入力するためのポインティ
ングデバイスに関する。
【０００２】
【従来の技術】従来、操作者の視線の方向を視線検出装
置により検出して、この検出結果に応じた情報を情報処
理装置に入力する、いわゆる視線入力方式のポインティ
ングデバイスが提案されている。
置により検出して、この検出結果に応じた情報を情報処
理装置に入力する、いわゆる視線入力方式のポインティ
ングデバイスが提案されている。
【０００３】このようなポインティングデバイスにおい
ては、メニュー画面上の選択肢を選択する場合におい
て、選択の確定は、ある一つの選択肢を一定時間以上に
亘って注視することで行われる。すなわち、このポイン
ティングデバイスは、図９に示すように、操作者の視線
の方向を座標情報として検出する視線検出装置１０１
と、視線の方向が一定方向に維持された時間を計測する
確定判定装置１０２とを有して構成されている。このポ
インティングデバイスにおいては、視線検出装置１０１
が操作者の視線の方向を検出し、確定判定装置１０２が
該視線の方向が一定時間以上に亘って維持されたことを
検出すると、この確定判定装置１０２により、確定情報
が出力される。
ては、メニュー画面上の選択肢を選択する場合におい
て、選択の確定は、ある一つの選択肢を一定時間以上に
亘って注視することで行われる。すなわち、このポイン
ティングデバイスは、図９に示すように、操作者の視線
の方向を座標情報として検出する視線検出装置１０１
と、視線の方向が一定方向に維持された時間を計測する
確定判定装置１０２とを有して構成されている。このポ
インティングデバイスにおいては、視線検出装置１０１
が操作者の視線の方向を検出し、確定判定装置１０２が
該視線の方向が一定時間以上に亘って維持されたことを
検出すると、この確定判定装置１０２により、確定情報
が出力される。
【０００４】この確定情報は、種々の信号処理装置など
に送られる。この信号処理装置は、送られた確定情報に
基づいて、選択された選択肢を特定し、この選択肢に応
じた種々の動作や信号処理を実行する。
に送られる。この信号処理装置は、送られた確定情報に
基づいて、選択された選択肢を特定し、この選択肢に応
じた種々の動作や信号処理を実行する。
【０００５】
【発明が解決しようとする課題】ところで、上述のよう
なポインティングデバイスにおいては、特定の選択肢を
選択するために、該選択肢を示す絵記号（アイコン）な
どを一定時間以上に亘って注視しなければならない。こ
のような注視という動作は、操作者にとって不自然なも
のであり、使い難く、ストレスのもととなるとともに、
円滑な選択操作が行えず、無駄な時間を要するものだっ
た。
なポインティングデバイスにおいては、特定の選択肢を
選択するために、該選択肢を示す絵記号（アイコン）な
どを一定時間以上に亘って注視しなければならない。こ
のような注視という動作は、操作者にとって不自然なも
のであり、使い難く、ストレスのもととなるとともに、
円滑な選択操作が行えず、無駄な時間を要するものだっ
た。
【０００６】また、上述のような視線検出装置による視
線方向の検出は、検出精度に問題があり、特に、選択肢
の表示同士が接近している場合など、入力すべき位置の
情報が精度を要する場合には、入力したい位置に対し見
る場所をずらさないと所望の入力位置を選択できないよ
うなことがあった。
線方向の検出は、検出精度に問題があり、特に、選択肢
の表示同士が接近している場合など、入力すべき位置の
情報が精度を要する場合には、入力したい位置に対し見
る場所をずらさないと所望の入力位置を選択できないよ
うなことがあった。
【０００７】そこで、本発明は、上述の実情に鑑みて提
案されるものであって、操作者の視線の方向に基づいて
選択対象物を特定し、この特定に基づいた情報の入力を
行うポインティングデバイスにおいて、一定位置を注視
するような不自然な動作を必要とせず、かつ、視線検出
の精度に影響されずに的確な入力操作を行うことができ
るポインティングデバイスを提供しようとするものであ
る。
案されるものであって、操作者の視線の方向に基づいて
選択対象物を特定し、この特定に基づいた情報の入力を
行うポインティングデバイスにおいて、一定位置を注視
するような不自然な動作を必要とせず、かつ、視線検出
の精度に影響されずに的確な入力操作を行うことができ
るポインティングデバイスを提供しようとするものであ
る。
【０００８】
【課題を解決するための手段】上述の課題を解決するた
め、本発明に係るポインティングデバイスは、操作者の
視線の方向を検出する視線検出装置と、この視線検出装
置からの出力信号に基づいて座標情報を生成し該座標情
報に対応した選択対象物を特定する座標情報処理手段
と、操作者が操作する確定スイッチと、この確定スイッ
チが操作されたときに確定情報を生成する確定情報処理
手段と、確定情報処理手段が確定情報を生成したときに
座標情報処理手段により選択対象物が特定されている場
合には該選択対象物に対する選択が確定したものとして
選択確定情報を生成する選択確定情報処理手段とを備え
たことを特徴とするものである。
め、本発明に係るポインティングデバイスは、操作者の
視線の方向を検出する視線検出装置と、この視線検出装
置からの出力信号に基づいて座標情報を生成し該座標情
報に対応した選択対象物を特定する座標情報処理手段
と、操作者が操作する確定スイッチと、この確定スイッ
チが操作されたときに確定情報を生成する確定情報処理
手段と、確定情報処理手段が確定情報を生成したときに
座標情報処理手段により選択対象物が特定されている場
合には該選択対象物に対する選択が確定したものとして
選択確定情報を生成する選択確定情報処理手段とを備え
たことを特徴とするものである。
【０００９】すなわち、このポインティングデバイスに
おいては、選択対象物の特定を視線検出装置を通じて視
線の方向によって行い、選択の確定を確定スイッチの操
作を通じて行うことを特徴とする。
おいては、選択対象物の特定を視線検出装置を通じて視
線の方向によって行い、選択の確定を確定スイッチの操
作を通じて行うことを特徴とする。
【００１０】そして、このポインティングデバイスにお
いては、いわゆる視線入力による場合の選択対象物から
の位置ずれを、手動により入力操作された入力情報に基
づいて補正することができる。
いては、いわゆる視線入力による場合の選択対象物から
の位置ずれを、手動により入力操作された入力情報に基
づいて補正することができる。
【００１１】また、このポインティングデバイスにおい
ては、視線入力による位置ずれを予め記憶された自動補
正値を用いて自動補正し、それをさらに手入力により補
正することもできる。
ては、視線入力による位置ずれを予め記憶された自動補
正値を用いて自動補正し、それをさらに手入力により補
正することもできる。
【００１２】さらに、このポインティングデバイスにお
いては、視線入力による位置ずれを自動補正するにあた
り、初期状態では補正量のない状態から始め、手動によ
り入力操作された入力情報による最終的な補正結果か
ら、視線入力による場合の選択対象物からの位置ずれを
記憶し、自動補正の結果が選択対象物に近づくように自
動補正値を更新してゆくことで、手動により入力操作さ
れた入力情報による補正を不要とし、または、軽減する
こともできる。
いては、視線入力による位置ずれを自動補正するにあた
り、初期状態では補正量のない状態から始め、手動によ
り入力操作された入力情報による最終的な補正結果か
ら、視線入力による場合の選択対象物からの位置ずれを
記憶し、自動補正の結果が選択対象物に近づくように自
動補正値を更新してゆくことで、手動により入力操作さ
れた入力情報による補正を不要とし、または、軽減する
こともできる。
【００１３】
【発明の実施の形態】以下、本発明の実施の形態を図面
を参照しながら説明する。
を参照しながら説明する。
【００１４】本発明に係るポインティングデバイスは、
図１に示すように、操作者の視線の方向を検出する視線
検出装置１と、操作者が操作することにより確定情報を
出力させる確定スイッチ２とを有して構成されている。
視線検出装置１による検出結果は、座標情報処理手段と
なる座標情報処理回路３に送られ、座標情報とし出力さ
れる。座標情報処理回路３から出力される座標情報によ
り、メニュー画面上の選択肢を示す絵記号（アイコン）
や、操作者の視野中の選択対象物が特定される。
図１に示すように、操作者の視線の方向を検出する視線
検出装置１と、操作者が操作することにより確定情報を
出力させる確定スイッチ２とを有して構成されている。
視線検出装置１による検出結果は、座標情報処理手段と
なる座標情報処理回路３に送られ、座標情報とし出力さ
れる。座標情報処理回路３から出力される座標情報によ
り、メニュー画面上の選択肢を示す絵記号（アイコン）
や、操作者の視野中の選択対象物が特定される。
【００１５】また、確定スイッチ２の出力信号は、確定
情報処理手段となる確定情報処理回路４に送られ、確定
情報として出力される。
情報処理手段となる確定情報処理回路４に送られ、確定
情報として出力される。
【００１６】これら座標情報及び確定情報は、選択確定
処理手段となる選択確定処理回路５に送られる。
処理手段となる選択確定処理回路５に送られる。
【００１７】選択確定処理回路５は、確定情報処理回路
４が確定情報を生成したときに、座標情報処理回路３に
より選択対象物が特定されている場合には、該選択対象
物に対する選択が確定したものとして、選択確定情報を
生成し出力する。この選択確定情報は、種々の信号処理
装置などに送られる。この信号処理装置は、送られた選
択確定情報に基づいて、選択を確定された選択肢を特定
し、この選択肢に応じた種々の動作や信号処理を実行す
る。
４が確定情報を生成したときに、座標情報処理回路３に
より選択対象物が特定されている場合には、該選択対象
物に対する選択が確定したものとして、選択確定情報を
生成し出力する。この選択確定情報は、種々の信号処理
装置などに送られる。この信号処理装置は、送られた選
択確定情報に基づいて、選択を確定された選択肢を特定
し、この選択肢に応じた種々の動作や信号処理を実行す
る。
【００１８】視線検出装置１は、操作者の顔面上の眼球
付近に取付けられ、または、該操作者の顔面に対向して
配置され、該操作者の瞳位置を光学的に検出して眼球の
方向を判別することにより、該操作者の視線の方向を検
出できるように構成されている。この視線検出装置１
は、例えば、瞳上、すなわち、水晶体表面で反射される
光束の位置を検出することなどによって、該瞳の位置を
検出するように構成されている。
付近に取付けられ、または、該操作者の顔面に対向して
配置され、該操作者の瞳位置を光学的に検出して眼球の
方向を判別することにより、該操作者の視線の方向を検
出できるように構成されている。この視線検出装置１
は、例えば、瞳上、すなわち、水晶体表面で反射される
光束の位置を検出することなどによって、該瞳の位置を
検出するように構成されている。
【００１９】本発明に係るポインティングデバイスの応
用形態としては、図２に示すように、コンピュータにお
ける入力装置として構成することが考えられる。この場
合には、このポインティングデバイスを含むシステム
は、視線検出装置１、ディスプレイ６、確定スイッチ２
を有する入力装置（キーボード）７、及び処理装置８を
有して構成される。処理装置８は、座標情報処理回路
３、確定情報処理回路４及び選択確定情報処理回路５を
備えている。この場合の確定スイッチ２の位置として
は、図３に示すように、入力装置７上の他にも、マウス
９上など、押圧操作のし易い場所が考えられる。なお、
入力装置７は、複数の入力操作用のキー７ａを備えて構
成されている。
用形態としては、図２に示すように、コンピュータにお
ける入力装置として構成することが考えられる。この場
合には、このポインティングデバイスを含むシステム
は、視線検出装置１、ディスプレイ６、確定スイッチ２
を有する入力装置（キーボード）７、及び処理装置８を
有して構成される。処理装置８は、座標情報処理回路
３、確定情報処理回路４及び選択確定情報処理回路５を
備えている。この場合の確定スイッチ２の位置として
は、図３に示すように、入力装置７上の他にも、マウス
９上など、押圧操作のし易い場所が考えられる。なお、
入力装置７は、複数の入力操作用のキー７ａを備えて構
成されている。
【００２０】また、このポインティングデバイスは、図
４に示すように、カメラ装置１０におけるフォーカス中
心の指定、すなわち、視野角中のどの被写体にピントを
合わせるかという指定や、撮影モードなどのメニュー選
択用の入力装置として構成することが考えられる。この
場合の確定スイッチ２の位置としては、カメラ装置１０
の背面部などの押圧操作のし易い場所が考えられる。な
お、カメラ装置１０は、シャッタボタン１１やビューフ
ァインダ１２を備えて構成されている。
４に示すように、カメラ装置１０におけるフォーカス中
心の指定、すなわち、視野角中のどの被写体にピントを
合わせるかという指定や、撮影モードなどのメニュー選
択用の入力装置として構成することが考えられる。この
場合の確定スイッチ２の位置としては、カメラ装置１０
の背面部などの押圧操作のし易い場所が考えられる。な
お、カメラ装置１０は、シャッタボタン１１やビューフ
ァインダ１２を備えて構成されている。
【００２１】図２に示すように、コンピュータの入力装
置として構成したポインティングデバイスにおける信号
処理では、最終的な入力座標として、視線検出座標Ｅ、
自動補正値Ａ及び手入力補正値Ｈの合計値Ｉを用いる。
最終的な入力座標である合計値Ｉの計算は、視線検出装
置１からの視線検出座標Ｅと入力装置７からの入力情報
をもとに、処理装置８が行う。
置として構成したポインティングデバイスにおける信号
処理では、最終的な入力座標として、視線検出座標Ｅ、
自動補正値Ａ及び手入力補正値Ｈの合計値Ｉを用いる。
最終的な入力座標である合計値Ｉの計算は、視線検出装
置１からの視線検出座標Ｅと入力装置７からの入力情報
をもとに、処理装置８が行う。
【００２２】この合計値Ｉを求める信号処理において
は、まず、視線検出装置１が視線検出座標Ｅを求める。
なお、この視線検出座標Ｅは、従来は、そのまま入力座
標として用いられていた。処理装置８は、視線検出座標
Ｅの値と、過去の履歴から作成し内部に保持している数
表をもとに、自動補正値Ａを計算する。
は、まず、視線検出装置１が視線検出座標Ｅを求める。
なお、この視線検出座標Ｅは、従来は、そのまま入力座
標として用いられていた。処理装置８は、視線検出座標
Ｅの値と、過去の履歴から作成し内部に保持している数
表をもとに、自動補正値Ａを計算する。
【００２３】また、処理装置８は、入力装置７より手動
による入力操作に関する情報、すなわち、マウスの動き
情報などを受け取り、これをもとに、手入力補正値Ｈも
計算する。このようにして得られた視線検出座標Ｅ、自
動補正値Ａ及び手入力補正値Ｈを合計し、入力座標とし
て合計値Ｉを得る。ただし、これらの値Ｅ、Ａ、Ｈ、Ｉ
は、いずれも２次元のベクトルであり、以下のように表
現される。
による入力操作に関する情報、すなわち、マウスの動き
情報などを受け取り、これをもとに、手入力補正値Ｈも
計算する。このようにして得られた視線検出座標Ｅ、自
動補正値Ａ及び手入力補正値Ｈを合計し、入力座標とし
て合計値Ｉを得る。ただし、これらの値Ｅ、Ａ、Ｈ、Ｉ
は、いずれも２次元のベクトルであり、以下のように表
現される。
【００２４】・Ｅ＝（Ｅｘ，Ｅｙ） ・Ａ＝（Ａｘ，Ａｙ） ・Ｈ＝（Ｈｘ，Ｈｙ） ・Ｉ＝（Ｉｘ，Ｉｙ） また、自動補正値Ａの算出時に用いる数表は、確定ボタ
ン２の押下操作時に更新される。
ン２の押下操作時に更新される。
【００２５】さらに、自動補正値Ａの算出方法として
は、まず、視線検出座標Ｅの座標系を、図５に示すよう
に、複数の領域（領域番号０，１，２，３・・・）に分
割するとともに、それぞれの領域に対応する自動補正値
Ａの有無及びその値を、図６に示すように、数表に格納
しておく。ただし、システム起動時のこの数表の初期値
は、自動補正値Ａの有無、自動補正値Ａのｘ成分、自動
補正値Ａのｙ成分の全てが０であり、確定ボタンを押下
操作する度に更新されていく。そして、各入力座標の計
算時には、その時の視線検出座標Ｅを含む領域（ｃ）に
対応する自動補正値（Ａｃ）を自動補正値Ａの値として
用いる。ただし、同領域に対する自動補正値Ａが無い場
合には、近傍の領域の自動補正値（Ａｃ′）の線形和に
より自動補正値Ａを算出する。自動補正値（Ａｃ）が全
く未登録の初期状態では、自動補正値Ａを０ベクトルと
する。
は、まず、視線検出座標Ｅの座標系を、図５に示すよう
に、複数の領域（領域番号０，１，２，３・・・）に分
割するとともに、それぞれの領域に対応する自動補正値
Ａの有無及びその値を、図６に示すように、数表に格納
しておく。ただし、システム起動時のこの数表の初期値
は、自動補正値Ａの有無、自動補正値Ａのｘ成分、自動
補正値Ａのｙ成分の全てが０であり、確定ボタンを押下
操作する度に更新されていく。そして、各入力座標の計
算時には、その時の視線検出座標Ｅを含む領域（ｃ）に
対応する自動補正値（Ａｃ）を自動補正値Ａの値として
用いる。ただし、同領域に対する自動補正値Ａが無い場
合には、近傍の領域の自動補正値（Ａｃ′）の線形和に
より自動補正値Ａを算出する。自動補正値（Ａｃ）が全
く未登録の初期状態では、自動補正値Ａを０ベクトルと
する。
【００２６】なお、図５において、領域がディスプレイ
の表示画面６ａの範囲の外にも設定してあるのは、操作
者がディスプレイの表示画面６ａ上を見ているにも拘わ
らず、視線検出の結果がディスプレイの表示画面６ａの
範囲外となる場合に対応するためである。
の表示画面６ａの範囲の外にも設定してあるのは、操作
者がディスプレイの表示画面６ａ上を見ているにも拘わ
らず、視線検出の結果がディスプレイの表示画面６ａの
範囲外となる場合に対応するためである。
【００２７】以下、このポインティングデバイスにおい
て実際に行われる信号処理の流れを述べる。ただし、こ
こで述べるのは、入力座標についての信号処理に関して
のみであり、システムが操作者に提供するその他の機
能、例えばメニュー画面における選択結果に基づいて実
行される特定の処理等についてはここでは述べない。
て実際に行われる信号処理の流れを述べる。ただし、こ
こで述べるのは、入力座標についての信号処理に関して
のみであり、システムが操作者に提供するその他の機
能、例えばメニュー画面における選択結果に基づいて実
行される特定の処理等についてはここでは述べない。
【００２８】処理装置８が行う信号処理は、２通りあ
る。１つは、図７に示すように、入力座標を計算するた
めの処理で、これは、例えば１／６０秒などの一定の周
期で繰返し行われる。もう１つは自動補正値Ａの数表の
更新用の処理で、図８に示すように、確定ボタンが押下
操作されたときに実行される。
る。１つは、図７に示すように、入力座標を計算するた
めの処理で、これは、例えば１／６０秒などの一定の周
期で繰返し行われる。もう１つは自動補正値Ａの数表の
更新用の処理で、図８に示すように、確定ボタンが押下
操作されたときに実行される。
【００２９】すなわち、処理装置８は、図７において、
ステップｓｔ１で処理を開始すると、ステップｓｔ２に
進み、視線検出結果としてディスプレイ上周辺の視線検
出座標Ｅを求め、ステップｓｔ３に進む。ステップｓｔ
３では、マウスを介して手動により入力操作された値の
検出結果として、手入力補正値Ｈを求め、ステップｓｔ
４に進む。ステップｓｔ４では、視線検出座標Ｅを含む
領域ｃ（領域番号がｃである領域）を求め、ステップｓ
ｔ５に進む。
ステップｓｔ１で処理を開始すると、ステップｓｔ２に
進み、視線検出結果としてディスプレイ上周辺の視線検
出座標Ｅを求め、ステップｓｔ３に進む。ステップｓｔ
３では、マウスを介して手動により入力操作された値の
検出結果として、手入力補正値Ｈを求め、ステップｓｔ
４に進む。ステップｓｔ４では、視線検出座標Ｅを含む
領域ｃ（領域番号がｃである領域）を求め、ステップｓ
ｔ５に進む。
【００３０】ステップｓｔ５では、処理装置８は、領域
ｃについての自動補正値Ａｃの有無を判別し、自動補正
値Ａｃが無い場合には、ステップｓｔ６に進み、自動補
正値Ａｃが有る場合には、ステップｓｔ１０に進む。ス
テップｓｔ１０では、自動補正値ＡをＡｃとして、ステ
ップｓｔ８に進む。ステップｓｔ６では、全領域におい
てすでに登録されている自動補正値が無いか否かを判別
し、全領域について自動補正値が無いならばステップｓ
ｔ１１に進み、これ以外の場合はステップｓｔ７に進
む。ステップｓｔ１１では、自動補正値Ａを０（０ベク
トル）として、ステップｓｔ８に進む。
ｃについての自動補正値Ａｃの有無を判別し、自動補正
値Ａｃが無い場合には、ステップｓｔ６に進み、自動補
正値Ａｃが有る場合には、ステップｓｔ１０に進む。ス
テップｓｔ１０では、自動補正値ＡをＡｃとして、ステ
ップｓｔ８に進む。ステップｓｔ６では、全領域におい
てすでに登録されている自動補正値が無いか否かを判別
し、全領域について自動補正値が無いならばステップｓ
ｔ１１に進み、これ以外の場合はステップｓｔ７に進
む。ステップｓｔ１１では、自動補正値Ａを０（０ベク
トル）として、ステップｓｔ８に進む。
【００３１】ステップｓｔ７では、処理装置８は、重心
が最も領域ｃに近い３つの領域ｒ，領域ｓ，領域ｔを求
め、重心に関する領域ｒ，領域ｓ，領域ｔと領域ｃとの
距離を、それぞれ、Ｄｒ，Ｄｓ，Ｄｔとする。そして、
自動補正値Ａを、 Ａ＝（Ａｒ／Ｄｒ＋Ａｓ／Ｄｓ＋Ａｔ／Ｄｔ）／（１／
Ｄｒ＋１／Ｄｓ＋１／Ｄｔ） により求める。ただし、自動補正値が存在している領域
が１つしかない場合には、 １／Ｄｓ＝１／Ｄｔ＝０ として計算し、自動補正値が存在している領域が２つし
かない場合には、 １／Ｄｔ＝０ として計算する。そして、ステップｓｔ８に進む。
が最も領域ｃに近い３つの領域ｒ，領域ｓ，領域ｔを求
め、重心に関する領域ｒ，領域ｓ，領域ｔと領域ｃとの
距離を、それぞれ、Ｄｒ，Ｄｓ，Ｄｔとする。そして、
自動補正値Ａを、 Ａ＝（Ａｒ／Ｄｒ＋Ａｓ／Ｄｓ＋Ａｔ／Ｄｔ）／（１／
Ｄｒ＋１／Ｄｓ＋１／Ｄｔ） により求める。ただし、自動補正値が存在している領域
が１つしかない場合には、 １／Ｄｓ＝１／Ｄｔ＝０ として計算し、自動補正値が存在している領域が２つし
かない場合には、 １／Ｄｔ＝０ として計算する。そして、ステップｓｔ８に進む。
【００３２】ステップｓｔ８では、入力座標Ｉを、 Ｉ＝Ｅ＋Ａ＋Ｈ により求め、ステップｓｔ９に進んで終了する。
【００３３】そして、確定ボタンが押下操作されたとき
には、処理装置８は、図８に示すように、ステップｓｔ
１２で処理を開始し、ステップｓｔ１３で、視線検出座
標Ｅを含む領域ｃの新しい自動補正値Ａｃを、 Ａｃ＝Ａ＋Ｈ により求めて記憶するとともに、自動補正値の有無につ
いては「有」にして、ステップｓｔ１４に進む。
には、処理装置８は、図８に示すように、ステップｓｔ
１２で処理を開始し、ステップｓｔ１３で、視線検出座
標Ｅを含む領域ｃの新しい自動補正値Ａｃを、 Ａｃ＝Ａ＋Ｈ により求めて記憶するとともに、自動補正値の有無につ
いては「有」にして、ステップｓｔ１４に進む。
【００３４】ステップｓｔ１４では、処理装置８は、手
入力補正値Ｈを０ベクトル（Ｈ＝（０，０））にリセッ
トし、ステップｓｔ１５に進んで終了する。
入力補正値Ｈを０ベクトル（Ｈ＝（０，０））にリセッ
トし、ステップｓｔ１５に進んで終了する。
【００３５】
【発明の効果】上述のように、本発明に係るポインティ
ングデバイスにおいては、操作者の視線の方向を検出す
ることによるいわゆる視線入力において、一定の位置に
対する不自然な注視を不要とし、操作の快適性と迅速性
を向上させることができる。
ングデバイスにおいては、操作者の視線の方向を検出す
ることによるいわゆる視線入力において、一定の位置に
対する不自然な注視を不要とし、操作の快適性と迅速性
を向上させることができる。
【００３６】また、このポインティングデバイスにおい
ては、視線検出の精度が不充分である場合においても、
入力したい位置を見ることと、必要に応じて最小限の手
動による入力操作による補正を行うことにより、精度の
高い位置入力操作が可能である。
ては、視線検出の精度が不充分である場合においても、
入力したい位置を見ることと、必要に応じて最小限の手
動による入力操作による補正を行うことにより、精度の
高い位置入力操作が可能である。
【００３７】すなわち、本発明は、操作者の視線の方向
に基づいて選択対象物を特定し、この特定に基づいた情
報の入力を行うポインティングデバイスにおいて、一定
位置を注視するような不自然な動作を必要とせず、か
つ、視線検出の精度に影響されずに的確な入力操作を行
うことができるポインティングデバイスを提供すること
ができるものである。
に基づいて選択対象物を特定し、この特定に基づいた情
報の入力を行うポインティングデバイスにおいて、一定
位置を注視するような不自然な動作を必要とせず、か
つ、視線検出の精度に影響されずに的確な入力操作を行
うことができるポインティングデバイスを提供すること
ができるものである。
【図１】本発明に係るポインティングデバイスの構成を
示すブロック図である。
示すブロック図である。
【図２】上記ポインティングデバイスをコンピュータの
入力装置に適用した状態を示すブロック図である。
入力装置に適用した状態を示すブロック図である。
【図３】上記ポインティングデバイスを適用されたコン
ピュータの入力装置の構成を示す平面図である。
ピュータの入力装置の構成を示す平面図である。
【図４】上記ポインティングデバイスを適用されたカメ
ラ装置の構成を示す背面図である。
ラ装置の構成を示す背面図である。
【図５】上記ポインティングデバイスを適用されたコン
ピュータにおけるディスプレイ画面と座標系を分割して
構成された領域との関係を示す正面図である。
ピュータにおけるディスプレイ画面と座標系を分割して
構成された領域との関係を示す正面図である。
【図６】上記ポインティングデバイスにおける自動補正
に用いる自動補正値の数表を示す図である。
に用いる自動補正値の数表を示す図である。
【図７】上記ポインティングデバイスにおける自動補正
及び手動補正の動作を示すフローチャートである。
及び手動補正の動作を示すフローチャートである。
【図８】上記ポインティングデバイスにおける自動補正
値の更新の動作を示すフローチャートである。
値の更新の動作を示すフローチャートである。
【図９】従来のポインティングデバイスの構成を示すブ
ロック図である。
ロック図である。
１ 視線検出装置、２ 確定スイッチ、３ 座標情報処
理回路、４ 確定情報処理回路、５ 選択確定情報処理
回路
理回路、４ 確定情報処理回路、５ 選択確定情報処理
回路
フロントページの続き (72)発明者 大月 知之 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内 Ｆターム(参考） 5B087 AA09 AD01 BC05 BC12 BC13 BC17 BC32 DD01 DE00 DJ00
Claims (5)
- 【請求項１】 操作者の視線の方向を検出する視線検出
装置と、 上記視線検出装置からの出力信号に基づいて座標情報を
生成し、該座標情報に対応した選択対象物を特定する座
標情報処理手段と、 上記操作者が操作する確定スイッチと、 上記確定スイッチが操作されたときに確定情報を生成す
る確定情報処理手段と、 確定情報処理手段が確定情報を生成したときに、上記座
標情報処理手段により選択対象物が特定されている場合
には、該選択対象物に対する選択が確定したものとし
て、選択確定情報を生成する選択確定情報処理手段とを
備えたことを特徴とするポインティングデバイス。 - 【請求項２】 メニュー画面を表示するメニュー画面表
示手段を備え、選択対象物は、該メニュー画面上に表示
された選択肢のうちから選択されるものとしたことを特
徴とする請求項１記載のポインティングデバイス。 - 【請求項３】 選択確定情報処理手段は、座標情報処理
手段が生成した座標情報と選択されるべき選択対象物と
の位置ずれを、手動により入力操作された入力情報に基
づいて補正することを特徴とする請求項１記載のポイン
ティングデバイス。 - 【請求項４】 選択確定情報処理手段は、座標情報処理
手段が生成した座標情報と選択されるべき選択対象物と
の位置ずれを、予め記憶された自動補正値を用いて補正
し、さらに、手動により入力操作された入力情報に基づ
いて補正することを特徴とする請求項１記載のポインテ
ィングデバイス。 - 【請求項５】 選択確定情報処理手段は、座標情報処理
手段が生成した座標情報と選択されるべき選択対象物と
の位置ずれを補正するにあたり、 初期状態において自動補正値を用いて行う補正の補正量
がない状態から始め、 上記座標情報と手動により入力操作された入力情報に基
づく最終的な補正が完了した結果との差異を記憶し、記
憶された差異に基づいて自動補正値を決定し、この自動
補正値を用いて行う補正の結果と選択対象物との位置ず
れを減少させることを特徴とする請求項４記載のポイン
ティングデバイス。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP26046698A JP2000089905A (ja) | 1998-09-14 | 1998-09-14 | ポインティングデバイス |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP26046698A JP2000089905A (ja) | 1998-09-14 | 1998-09-14 | ポインティングデバイス |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2000089905A true JP2000089905A (ja) | 2000-03-31 |
Family
ID=17348350
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP26046698A Pending JP2000089905A (ja) | 1998-09-14 | 1998-09-14 | ポインティングデバイス |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2000089905A (ja) |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013506209A (ja) * | 2009-09-29 | 2013-02-21 | アルカテル−ルーセント | 顔検出および画像測定に基づいて注視点を検出する方法および装置 |
| JP2014021596A (ja) * | 2012-07-13 | 2014-02-03 | Fujitsu Ltd | タブレット端末、操作受付方法および操作受付プログラム |
| JP2014117355A (ja) * | 2012-12-14 | 2014-06-30 | Sankyo Co Ltd | 遊技機 |
| KR20150093016A (ko) * | 2014-02-06 | 2015-08-17 | 삼성전자주식회사 | 디스플레이 장치 및 그 제어 방법 |
| KR101619635B1 (ko) | 2014-11-06 | 2016-05-10 | 현대자동차주식회사 | 시선추적을 이용한 메뉴 선택장치 |
| US9619017B2 (en) | 2012-11-07 | 2017-04-11 | Qualcomm Incorporated | Techniques for utilizing a computer input device with multiple computers |
| US10078416B2 (en) | 2013-12-18 | 2018-09-18 | Denso Corporation | Display control device, display control program and display-control-program product |
| JP2018180776A (ja) * | 2017-04-07 | 2018-11-15 | 京セラドキュメントソリューションズ株式会社 | 表示入力装置 |
| US10146058B2 (en) | 2013-11-13 | 2018-12-04 | Denso Corporation | Visual line direction sensing device |
| US10241570B2 (en) | 2015-11-12 | 2019-03-26 | Fujitsu Limited | Pointing support device, pointing support method, and non-transitory computer-readable recording medium |
-
1998
- 1998-09-14 JP JP26046698A patent/JP2000089905A/ja active Pending
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101394719B1 (ko) | 2009-09-29 | 2014-05-15 | 알까뗄 루슨트 | 주시점을 검출하는 방법, 장치 및 다중 스크린 컴퓨터 |
| JP2013506209A (ja) * | 2009-09-29 | 2013-02-21 | アルカテル−ルーセント | 顔検出および画像測定に基づいて注視点を検出する方法および装置 |
| JP2014021596A (ja) * | 2012-07-13 | 2014-02-03 | Fujitsu Ltd | タブレット端末、操作受付方法および操作受付プログラム |
| US9952690B2 (en) | 2012-07-13 | 2018-04-24 | Fujitsu Limited | Tablet device, and operation receiving method |
| US9619017B2 (en) | 2012-11-07 | 2017-04-11 | Qualcomm Incorporated | Techniques for utilizing a computer input device with multiple computers |
| JP2014117355A (ja) * | 2012-12-14 | 2014-06-30 | Sankyo Co Ltd | 遊技機 |
| US10146058B2 (en) | 2013-11-13 | 2018-12-04 | Denso Corporation | Visual line direction sensing device |
| US10078416B2 (en) | 2013-12-18 | 2018-09-18 | Denso Corporation | Display control device, display control program and display-control-program product |
| KR20150093016A (ko) * | 2014-02-06 | 2015-08-17 | 삼성전자주식회사 | 디스플레이 장치 및 그 제어 방법 |
| KR102005406B1 (ko) * | 2014-02-06 | 2019-07-30 | 삼성전자주식회사 | 디스플레이 장치 및 그 제어 방법 |
| KR101619635B1 (ko) | 2014-11-06 | 2016-05-10 | 현대자동차주식회사 | 시선추적을 이용한 메뉴 선택장치 |
| US9696800B2 (en) | 2014-11-06 | 2017-07-04 | Hyundai Motor Company | Menu selection apparatus using gaze tracking |
| US10241570B2 (en) | 2015-11-12 | 2019-03-26 | Fujitsu Limited | Pointing support device, pointing support method, and non-transitory computer-readable recording medium |
| JP2018180776A (ja) * | 2017-04-07 | 2018-11-15 | 京セラドキュメントソリューションズ株式会社 | 表示入力装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11086397B2 (en) | Method and apparatus for construction machine visualization | |
| CN107851424B (zh) | 投影型显示装置及投影控制方法 | |
| US20170064192A1 (en) | Video Processing Apparatus, Control Method, and Recording Medium | |
| US20170344110A1 (en) | Line-of-sight detector and line-of-sight detection method | |
| JP2000089905A (ja) | ポインティングデバイス | |
| US20140003661A1 (en) | Camera apparatus and method for tracking object in the camera apparatus | |
| EP3545818B1 (en) | Sight line direction estimation device, sight line direction estimation method, and sight line direction estimation program | |
| US8339443B2 (en) | Three-dimensional image display method and apparatus | |
| CN107665039B (zh) | 图像显示装置、图像形成装置和图像显示方法 | |
| JP2015152939A (ja) | 情報処理装置、情報処理方法、及びプログラム | |
| JP2019016044A (ja) | 表示制御プログラム、表示制御方法及び表示制御装置 | |
| WO2019021601A1 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
| JP5868128B2 (ja) | 情報処理装置およびその制御方法 | |
| JP2009003576A (ja) | 機器制御装置及び制御方法 | |
| EP3771967A2 (en) | Electronic device, control method, and computer readable medium | |
| US11073949B2 (en) | Display method, display device, and interactive projector configured to receive an operation to an operation surface by a hand of a user | |
| US11443719B2 (en) | Information processing apparatus and information processing method | |
| US10919111B2 (en) | Laser engraver mirror adjustment system | |
| WO2024088093A1 (zh) | 智能眼镜、智能眼镜的校正方法、装置及存储介质 | |
| JP2015046111A (ja) | 視点検出装置および視点検出方法 | |
| JP3325323B2 (ja) | 表示装置 | |
| KR20140131381A (ko) | 하전 입자선 조정 지원 장치 및 방법 | |
| CN112074801A (zh) | 用于检测通过指向手势的输入的方法和用户界面 | |
| US11570352B2 (en) | Image processing apparatus and control method thereof, imaging apparatus, and storage medium | |
| US20240303948A1 (en) | Wearable terminal apparatus to change display position of partial image |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050803 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20071126 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20071204 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080131 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20080226 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080421 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20080502 |
|
| A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20080530 |