JP4611667B2 - 情報入力器、収納装置、情報入力装置、及び情報処理装置 - Google Patents

情報入力器、収納装置、情報入力装置、及び情報処理装置 Download PDF

Info

Publication number
JP4611667B2
JP4611667B2 JP2004169074A JP2004169074A JP4611667B2 JP 4611667 B2 JP4611667 B2 JP 4611667B2 JP 2004169074 A JP2004169074 A JP 2004169074A JP 2004169074 A JP2004169074 A JP 2004169074A JP 4611667 B2 JP4611667 B2 JP 4611667B2
Authority
JP
Japan
Prior art keywords
fingertip
finger
information input
image
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004169074A
Other languages
English (en)
Other versions
JP2005182744A (ja
Inventor
健爾 西
Original Assignee
健爾 西
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 健爾 西 filed Critical 健爾 西
Priority to JP2004169074A priority Critical patent/JP4611667B2/ja
Priority to PCT/JP2004/015474 priority patent/WO2005052778A1/ja
Priority to AT04792640T priority patent/ATE554439T1/de
Priority to US10/580,590 priority patent/US7688305B2/en
Priority to EP04792640A priority patent/EP1698964B1/en
Priority to TW093136234A priority patent/TWI272515B/zh
Publication of JP2005182744A publication Critical patent/JP2005182744A/ja
Application granted granted Critical
Publication of JP4611667B2 publication Critical patent/JP4611667B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/014—Hand-worn input/output arrangements, e.g. data gloves
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/033—Indexing scheme relating to G06F3/033
    • G06F2203/0331—Finger worn pointing device

Description

本発明は、操作者の指に装着される情報入力器、情報入力器の収納装置、操作者の手元からその指動作の情報を取り込む情報入力装置、及び情報処理装置に関する。
バーチャルキーボードなどと呼ばれる情報入力システムが提案されている。これは、既存のキーボードを操作するのと同じキータッチ動作（キーボードデバイスを操作するときの動作）やポインティング動作（マウスなどのポインティングデバイスを操作するときの動作）をしている操作者から情報を取り込むものである。
この情報入力システムにおけるキータッチ動作中の指の運動の認識方法としては、以下の４種類がある。
（１）画像認識（特許文献１，非特許文献１など）
既存のキーボードと同サイズのスペース（仮想キーボード）上で操作者にキータッチ動作をさせ、そのときの手の画像をビデオ撮影し、取り込まれたビデオデータを解析して三次元的に手の外形を認識し、仮想キーボード上の各キーに対するキータッチの有無を認識する。
（２）音波又は光波照射（特許文献２など）
既存のキーボードと同サイズのスペース（仮想キーボード）上で操作者にキータッチ動作をさせ、各指に向けて複数の位置から音波又は光波を照射し、各指から戻る音波又は光波から各方向への各指の移動速度をドップラー効果の原理に基づき算出し、仮想キーボード上の各キーに対するキータッチの有無を認識する。
（３）タッチパネル使用
既存のキーボードと同サイズの特殊平面パネル（静電容量検出素子や磁界変化検出素子が設けられたパネル）上で操作者にキータッチ動作をさせ（必要に応じて指キャップ使用。）、その特殊平面パネル上の各キーに対するキータッチの有無を検出する。
（４）グローブ使用（特許文献１など）
発光素子、加速度センサ、指圧センサなどの電子部品が複数個設けられたグローブを操作者の手に装着してキータッチ動作をさせ、そのときの素子の出力に基づいてキータッチ動作を検知する。
特開平７−１９１７９１号公報 米国特許６６１４４２２号明細書 松井望，山本喜一，「バーチャルキーボード：ビデオ画像からの頑健な実時間指先検出の実現」，第３回プログラミングおよび応用のシステムに関するワークショップＳＰＡ２０００オンライン論文集，日本ソフトウエア科学会，２０００年３月２１日，セッション８：データベースとアプリケーション
しかし、（１），（２），（３），（４）の認識方法の技術にはそれぞれ問題がある。このため、これらのうち何れかの認識方法を組み合わせた手法も実験室レベルで検討されているが、まだ実用化には至っていない。以下、それぞれの問題を順に説明する。
先ず、（１），（２），（３）の問題は、省スペース化できないことにある。すなわち、キーボードは不要であるものの、キーボードを設置するのと同じだけのスペースが必要である。
さらに、（１）には、応答時間が長大という別の問題もある。応答時間に対する要求は、１５０ｍｓ又はそれ以下である（なぜなら、人間のキータッチ動作の周波数は速い人で１０Ｈｚほどであり、ビデオデータの取り込み周波数は２５〜６０Ｈｚほどかかる。）。にも拘わらず、（１）は画像からノイズ部分と有意なデータの部分とを峻別するために複雑な三次元画像解析が必要であり、この要求を満たすことは難しい。また、仮に応答時間の長大化を許容したとしても、二次元画像から三次元情報を抽出（推測）するというこの原理は、認識精度が低いという問題もある。
一方、（４）の問題は、キータッチ動作への制約が大きいことにある。グローブに設けられた電子部品への電力供給のため、手に有線配線を施す必要があるが、グローブ周辺の機構が複雑になり、キータッチ動作への制約が生じる。また、認識精度向上のために電子部品の点数を増加させると、その制約は大きくなる。また、有線配線を省略してバッテリーを装備することもできるが、グローブの重量が嵩むので、重さの制約が大きくなる。特に、加速度センサや指圧センサは構造が複雑でありしかも重いので、これらを電子部品として用いた場合、問題は顕著である。
そこで本発明は、省スペース化が可能であり、かつキータッチ動作への制約が少ない情報入力器を提供することを目的とする。
また、本発明は、本発明の情報入力器に好適な収納装置を提供することを目的とする。
また、本発明は、本発明の情報入力器を的確に利用した情報入力装置を提供することを目的とする。
また、本発明は、本発明の情報入力装置に好適な情報処理装置を提供することを目的とする。
また、本発明は、情報入力に要するスペースの削減を可能とする情報処理装置を提供することを目的とする。
また、本発明は、情報入力器の取り扱いを容易とする収納装置を提供することを目的とする。
請求項１に記載の情報入力器は、再帰反射性を有する単数又は複数の反射部材が設けられた反射部と、前記反射部を操作者の指に対し装着する装着具と、前記指の指先に印加された指圧に応じて前記反射部の反射率分布を変化させる変化機構とを備えたことを特徴とする。
請求項２に記載の情報入力器は、請求項１に記載の情報入力器において、前記変化機構は、前記反射部の少なくとも一部を遮蔽／開放することを特徴とする。
請求項３に記載の情報入力器は、請求項２に記載の情報入力器において、前記反射部には、複数の再帰反射性を有する反射部材が並べて設けられており、前記変化機構は、前記複数の再帰反射性を有する反射部材のうち少なくとも１つを遮蔽／開放することを特徴とする。
請求項４に記載の情報入力器は、請求項３に記載の情報入力器において、前記反射部には、３以上の複数の再帰反射性を有する反射部材が並べて設けられており、前記変化機構は、前記複数の再帰反射性を有する反射部材のうち２以上の再帰反射性を有する反射部材によって挟まれた少なくとも１つの再帰反射性を有する反射部材を遮蔽／開放することを特徴とする。
請求項５に記載の情報入力器は、請求項１〜請求項４の何れか一項に記載の情報入力器において、前記反射部材を構成する各反射面のうち少なくとも１つは、入射光の波面の形状に対して反射光の波面の形状を変形させる反射型回折光学面であることを特徴とする。
請求項６に記載の情報入力器は、請求項１〜請求項５の何れか一項に記載の情報入力器において、前記反射部材は、前記指の種類を示す識別マークを兼ねていることを特徴とする。
請求項７に記載の情報入力器は、請求項１〜請求項６の何れか一項に記載の情報入力器において、前記反射部には、互いに姿勢の異なる少なくとも２種類のコーナー状反射面が設けられていることを特徴とする。
請求項８に記載の情報入力器は、請求項７に記載の情報入力器において、前記反射部には、配置角度の差θが０°＜θ＜９０°の式を満たす少なくとも２種類の前記コーナー状反射面が設けられていることを特徴とする。
請求項９に記載の情報入力器は、請求項１〜請求項８の何れか一項に記載の情報入力器において、前記装着具は、前記反射部を前記操作者の指に対し固定するストッパー機構と、前記反射部を前記操作者の指から開放する開放機構とを有することを特徴とする。
請求項１０に記載の収納装置は、請求項９に記載の情報入力器を収納する収納室と、前記情報入力器の前記ストッパー機構を駆動する手段と、前記情報入力器の前記開放機構を駆動する手段とを備えたことを特徴とする。
請求項１１に記載の収納装置は、操作者の複数の各指に個別に装着される請求項１〜請求項９の何れか一項に記載の複数の情報入力器を個別に収納する収納室と、前記複数の情報入力器の収納の有無を個別に検出する検出手段とを備えたことを特徴とする。
請求項１２に記載の収納装置は、請求項１０又は請求項１１に記載の収納装置において、顔面追従型ディスプレイに設けられていることを特徴とする。
請求項１３に記載の情報入力装置は、請求項１〜請求項９の何れか一項に記載の情報入力器を装着した操作者の手元を照明光で照明する照明光学系と、前記操作者の手元から前記照明光の反射光を導光して前記反射部の像を所定位置に形成する光学系と、前記所定位置の画像を撮像する二次元受光素子とを備えたことを特徴とする。
請求項１４に記載の情報処理装置は、請求項１３に記載の情報入力装置に適用され、前記二次元受光素子が取得した画像上の前記反射部の像の位置及び輝度分布に基づきその二次元受光素子上の座標で前記操作者の指先動作を認識する制御部を備えたことを特徴とする。
請求項１５に記載の情報処理装置は、請求項１４に記載の情報処理装置において、前記制御部は、前記指先動作と共に、前記指の種類を認識することを特徴とする。
請求項１６に記載の情報処理装置は、請求項１４又は請求項１５に記載の情報処理装置において、前記制御部は、少なくとも、前記指先の位置の認識をしてから、前記指圧の有無の認識を行うことにより前記指先動作の認識を行うことを特徴とする。
請求項１７に記載の情報処理装置は、請求項１４〜請求項１６の何れか一項に記載の情報処理装置において、前記制御部は、キーボードデバイスのキートップ配列を示すキーボードイメージを外部又は内部のディスプレイに対し表示すると共に、前記二次元受光素子上の前記指先の位置を前記ディスプレイ上の座標に座標変換しつつ前記指先動作を示す指先イメージをそのディスプレイ上にリアルタイムで表示し、前記操作者から所定の合図がなされるまでの期間は、前記指先の位置を前記ディスプレイ上の基準座標に変換する座標変換を採用し、前記操作者から所定の合図がなされてからは、その合図がなされたタイミングにおける前記指先の位置を前記ディスプレイ上の前記基準座標に変換する座標変換を採用することを特徴とする。
請求項１８に記載の情報処理装置は、請求項１７に記載の情報処理装置において、前記制御部は、前記情報入力装置を介して前記操作者から前記所定の合図を受け付けることを特徴とする。
請求項１９に記載の情報処理装置は、請求項１７又は請求項１８に記載の情報処理装置において、前記制御部は、前記キーボードイメージのうち前記指先イメージと少なくとも位置が重畳するキーを、他のキーとは異なる色で表示することを特徴とする。
請求項２０に記載の情報処理装置は、請求項１９に記載の情報処理装置において、前記制御部は、前記キーの表示色を、前記指先に指圧が印加されたタイミングで変化させることを特徴とする。
請求項２１に記載の情報処理装置は、請求項１７〜請求項２０の何れか一項に記載の情報処理装置において、前記ディスプレイが表示する表示領域には、前記キーボードイメージが表示されるべき特殊フィールドの他に、外部から入力された画像及び／又は文字が表示されるべき一般フィールドが確保されており、前記制御部は、前記指先イメージが前記一般フィールドに表示されるときには、前記指先イメージに加え又はその指先イメージに代えて、その指先の位置にポインティングデバイスのポインタイメージを表示することを特徴とする。
請求項２２に記載の情報処理装置は、請求項１７〜請求項２１の何れか一項に記載の情報処理装置において、前記制御部は、複数の指先の前記指先動作を認識した場合、前記操作者から所定の合図がなされるまでの期間は、特定の指先の位置が前記ディスプレイ上の基準座標に変換される座標変換を各指先の位置の座標変換に採用し、前記操作者から所定の合図がなされてからは、その合図がなされたタイミングにおける前記特定の指先の位置が前記ディスプレイ上の前記基準座標に変換される座標変換を各指先の位置の座標変換に採用することを特徴とする。
請求項２３に記載の情報処理装置は、請求項１７〜請求項２２の何れか一項に記載の情報処理装置において、前記制御部は、左右の手の前記指先動作を認識した場合、前記座標変換を、左右の手について独立して行うことを特徴とする。
請求項２４に記載の情報処理装置は、操作者の左右の指動作の情報を取得する情報入力装置に適用され、かつその情報を処理する制御部を備えた情報処理装置であって、前記制御部は、キーボードデバイスのキートップ配列を示すキーボードイメージを外部又は内部のディスプレイに対し表示すると共に、前記操作者の左右の手元上の各指先の位置を前記ディスプレイ上の座標に座標変換しつつ前記指先動作を示す指先イメージをそのディスプレイ上にリアルタイムで表示し、前記操作者から所定の合図がなされるまでの期間は、左の特定の指先の位置が前記ディスプレイ上の左の基準座標に変換される座標変換を前記左の各指先の位置の座標変換に採用すると共に、右の特定の指先の位置が前記ディスプレイ上の右の基準座標に変換される座標変換を前記右の各指先の位置の座標変換に採用し、前記操作者から所定の合図がなされてからは、その合図がなされたタイミングにおける前記左の特定の指先の位置が前記ディスプレイ上の前記左の基準座標に変換される座標変換を前記左の各指先の位置の座標変換に採用すると共に、その合図がなされたタイミングにおける前記右の特定の指先の位置が前記ディスプレイ上の前記右の基準座標に変換される座標変換を前記右の各指先の位置の座標変換に採用することを特徴とする。
請求項２５に記載の収納装置は、操作者の複数の指に個別に装着される複数の情報入力器を個別に収納する収納室と、前記複数の情報入力器の収納の有無を個別に検出する検出手段とを備えたことを特徴とする。
請求項２６に記載の収納装置は、請求項２５に記載の収納装置において、前記情報入力器を前記操作者の指に対し装着する手段と、前記情報入力器を前記操作者の指から離脱する手段とを更に備えたことを特徴とする。
請求項２７に記載の収納装置は、請求項２５又は請求項２６に記載の収納装置において、顔面追従型ディスプレイに設けられていることを特徴とする。
本発明によれば、省スペース化が可能であり、かつキータッチ動作への制約が少ない情報入力器が実現する。
また、本発明によれば、本発明の情報入力器に好適な収納装置が実現する。
また、本発明によれば、本発明の情報入力器を的確に利用した情報入力装置が実現する。
また、本発明によれば、本発明の情報入力装置に好適な情報処理装置が実現する。
また、本発明によれば、情報入力に要するスペースの削減を可能とする情報処理装置が実現する。
また、本発明によれば、情報入力器の取り扱いを容易とする収納装置が実現する。
以下、本発明の実施形態を図を用いて説明する。
本実施形態は、本発明の情報入力器、情報入力システム、収納装置、情報処理装置が適用された顔面追従型画像表示システムの実施形態である。
図１に示すように、この顔面追従型画像表示システムには、画像を表示するディスプレイ（請求項におけるディスプレイ、収納装置、顔面追従型ディスプレイに対応。）１７、操作者の左右の各指先に装着可能な指クリップ（請求項における情報入力器に対応。）１１1，１１2，１１3，１１4，１１5、操作者の左右の手元の像を撮像する指先検出装置（請求項における情報入力装置に対応。）１２、ディスプレイ１７及び指先検出装置１２を支持する機構（床に設置された伸縮可能なポール１４、複数の関節を有した伸縮・回動可能な振動防止型のアーム１５、１５’、カウンターバランス部１６などからなる）、汎用の外部機器２、各部の統制を図る主制御部（請求項における情報処理装置に対応。）１３などが配置される。
操作者は、ソファなどに楽な姿勢で座っており、左右の手をソファの肘掛けの上などに置いている。左右の手の親指、人差し指、中指、薬指、小指の各指先にそれぞれ指クリップ１１1，１１2，１１3，１１4，１１5が装着されている。操作者は、指クリップ１１1，１１2，１１3，１１4，１１5を装着したままキータッチ動作やポインティング動作をすることができる。
ディスプレイ１７には、ヘッドホン１７Ｈやマイクロホン１７Ｍが弾性部材や板バネなどにより設けられる。ヘッドホン１７Ｈは、操作者の顔面をディスプレイ１７で柔らかく覆う働きをしている。
指先検出装置１２には、操作者の手元の像を形成するための光学系（詳細は後述）が備えられる。
アーム１５、アーム１５’は、共通のポール１４にそれぞれ取り付けられ、ディスプレイ１７、指先検出装置１２をそれぞれ支持する。
アーム１５の各関節部は、操作者の頭部の姿勢や位置の変化に応じて、ディスプレイ１７が追従する機構となっている。
アーム１５’の各関節部は、指先検出装置１２に与えられた外力に応じて、その指先検出装置１２の位置及び姿勢を変化させるよう動作する。よって、指先検出装置１２の位置及び姿勢は、操作者によって自在に変更可能である。
カウンターバランス部１６は、所謂ウェイトフリーバランサであり、その重量及び取り付け位置が最適化され、ディスプレイ１７の重量をキャンセルする働きをする。よって、頭部の姿勢や位置が変化しても操作者はディスプレイ１７の重量感を感じなくて済む。したがって、ディスプレイ１７が重量物であってもよい。
主制御部１３は、ディスプレイ１７、指先検出装置１２、及び汎用の外部機器２に対し電気的に接続された回路基板などからなり、ポール１４の架台部分などの比較的振動の少ない箇所に設置されている。
汎用の外部機器２は、ＤＶＤプレーヤ、ビデオプレーヤ、テレビジョン受像機、コンピュータ、テレビゲーム機など、表示用の画像を生成することのできる汎用機器のうち操作者（ユーザ）の所望するものである。以下、汎用の外部機器２をコンピュータ２として説明する。
コンピュータ２の入出力端子（以下、キーボード端子、マウス端子、画像端子とする。）は、主制御部１３に接続される。
主制御部１３は、コンピュータ２の画像端子から表示用の画像（以下、「コンピュータイメージ」という。）を取り込み、そのコンピュータイメージをディスプレイ１７に適した画像に変換してそのディスプレイ１７に入力する。
また、主制御部１３は、指先検出装置１２からの出力信号に基づき、操作者のキータッチ動作（キーボードデバイスを操作するときの動作）やポインティング動作（マウスを操作するときの動作）を認識し、それらの動作によって表される操作者からの入力情報をコンピュータ２に適した信号に変換し、入力する。
また、主制御部１３は、キーボードのキートップ配列を示すキーボードイメージやマウスのポインタイメージを生成し、それらイメージをコンピュータイメージと共にディスプレイ１７に入力する。
ディスプレイ１７には、このキーボードイメージやポインタイメージ、及びコンピュータイメージが表示される。主制御部１３は、それらのイメージに、キータッチ動作やポインティング動作の様子をリアルタイムで反映させる（詳細は後述）。
よって、操作者は、ディスプレイ１７に表示された画像を目視しながら実際のキーボードを使用している感覚でキータッチ動作やポインティング動作をするだけで、所望する情報を誤り無く入力することができる。
なお、操作者は、指先検出装置１２，ディスプレイ１７を動かして、例えば図２のような使用形態をとることもできる。
この使用形態では、操作者はベッドに横たわっている。このように、リラックスした姿勢をとることも可能である。
しかも、本実施形態は、実際のキーボードを要さず、左右の手の配置位置への自由度が大きいので、操作者は両手を腹の上、又は図２に示すごとく両脇腹の横などに置くことができ、リラックスした姿勢のまま情報入力をすることができる。
なお、指先検出装置１２の位置及び姿勢は、これら左右の手が指先検出装置１２によって確実に捉えられるようセットされる。
ところで、図１から図２のように操作者の姿勢が変更される場合や、操作者が顔面の位置や方向が変化する場合には、ディスプレイ１７とアーム１５との位置関係が変化する。
次に、そのディスプレイ１７とアーム１５との位置関係の変化について図３に基づき詳細に説明する。
上述したように、アーム１５は伸縮可能である。また、アーム１５とディスプレイ１７との取り付け箇所は、ディスプレイ１７の重心である。また、この取り付け箇所は、図３に示すように、ユニバーサルジョイントとなっている。
先ず、図３（ａ）の矢印の方向へのアーム１５の伸縮によって、操作者が首の高さを変化させる方向にディスプレイ１７が移動可能である。
また、図３（ｂ）の矢印の方向へのユニバーサルジョイントの回動によって、操作者が首を傾げる方向に、ディスプレイ１７が回動可能である。少なくともその回動範囲は、操作者が首を傾げるときの角度範囲だけ確保される。
また、図３（ｃ）の矢印の方向へのアーム１５の回動によって、操作者が左右を向く方向に、ディスプレイ１７が回動可能である。その回動範囲は、少なくとも操作者が左右を向くときの角度範囲だけ確保される。
また、図３（ｄ）の矢印の方向へのユニバーサルジョイントの回動によって、操作者が頷く方向にディスプレイ１７が回動可能である。因みに、この方向への回動範囲は、操作者が頷くだけでなく図１の状態から図２の状態へと変化できるよう、十分に大きく（９０°程度）とられる。ディスプレイ１７には、各方向への回動時のアーム１５の軌跡に沿って「堀」が設けられている。
なお、アーム１５とディスプレイ１７との取り付け箇所と、ディスプレイ１７の重心との関係などは、この説明された内容に限定されない。例えば、ディスプレイ１７を見て操作者が激しい動きをすることが予想される場合、ディスプレイ１７の重心を、操作者の近くに来るようにして、ディスプレイ１７とアーム１５との取り付け箇所から敢えてずらしてもよい。
次に、ディプレイ１７内の光学系について図４、図５、図６、図７に基づき説明する。
この光学系は、例えば図４に示すように、液晶表示素子１７ｆ，１７ｆ’の虚像を操作者の眼から十分な遠隔位置に形成し、かつ広視野角（例えば、±６０°）を実現するよう設計されている。因みに、虚像が遠隔位置に形成されれば、たとえ操作者がその虚像を長時間目視し続けても、眼が疲労することが少ないので、視力低下を防止できる。
因みに、図４に示すこの光学系は、特願２００２−３１３４６６に開示された光学系であるので、以下、概要のみ説明する。
この光学系には、接眼光学系１７ａＲ，１７ａＬ，ズーム光学系（レンズ群１７ｂＲ，１７ｂＬ，１７ｃ，１７ｃ’，１７ｄ，１７ｄ’，１７ｅ，１７ｅ’），液晶表示素子１７ｆ，１７ｆ’，プリズム１７ｐ、スクリーンなどが備えられる。
一方の液晶表示素子１７ｆには主制御部１３から図５（ａ）に示すようなコンピュータイメージが入力され、他方の液晶表示素子１７ｆ’には主制御部１３から図５（ｂ）に示すようなキーボードイメージが入力される。
コンピュータイメージは、図５（ａ）に示すように、視野の上部に相当する第１フィールド（請求項における特殊フィールドに対応。）Ｆ１に配置され、キーボードイメージは図５（ｂ）に示すように、視野の下部に相当する第２フィールド（請求項における一般フィールドに対応。）Ｆ２に配置される。
一方の液晶表示素子１７ｆから射出した光（コンピュータイメージを眼の網膜に結像するための光）は、レンズ群１７ｅ，レンズ群１７ｄ，レンズ群１７ｃを経由した後にプリズム１７ｐにて分離され、２つのレンズ群１７ｂＲ，１７ｂＬ，２つの接眼光学系１７ａＲ，１７ａＬを個別に経由して左右の眼に導光される。
他方の液晶表示素子１７ｆ’から射出した光（キーボードイメージを眼の網膜に結像するための光）は、レンズ群１７ｅ’，レンズ群１７ｄ’，レンズ群１７ｃ’を経由した後にプリズム１７ｐにて分離され、２つのレンズ群１７ｂＲ，１７ｂＬ，２つの接眼光学系１７ａＲ，１７ａＬを個別に経由して左右の眼に導光される。
よって、操作者の眼には、図５（ｃ）に示すように、コンピュータイメージとキーボードイメージとが上下に並ぶ表示画像が見える。
主制御部１３（図１参照）は、表示画像における第１フィールド上の各位置と第２フィールド上の各位置とを共通の座標系で管理する。
因みに、液晶表示素子１７ｆ’の表示サイズを第２フィールド一杯に相当するサイズよりも小さいものを採用すると共に、その分だけ、その液晶表示素子１７ｆ’の射出光路の拡大倍率（ズーム倍率）を、液晶表示素子１７ｆの射出光路の拡大倍率（ズーム倍率）よりも高く設定すれば、細密に表示すべきコンピュータイメージを細密に、粗く表示しても差し支えないキーボードイメージを粗くそれぞれ表示することができる。このようにすれば、液晶表示素子を低コストにすることができる。
また、液晶表示素子１７ｆ，１７ｆ’から射出された光によって構成される像は、１７ｅ，１７ｄ，１７ｃからなるレンズ群や、１７ｅ’，１７ｄ’，１７ｃ’からなるレンズ群によるズーム倍率の変更により、それぞれ独立にその大きさが変えられるので、使用者の様々な要望に応じて像を投影することができる。
なお、この場合も、それら設定された拡大倍率が既知であれば、主制御部１３は、第１フィールド上の各位置と第２フィールド上の各位置とを共通の座標系で管理することができる。
なお、表示画像上には、図６に示すように、キーボードイメージと同様に、他の操作ボタンイメージ（ＣＡＤシステムにおけるＣＡＤキーなど）が表示されてもよい。
また、ここでは、コンピュータイメージとキーボードイメージとの重畳（統合）がディスプレイ１７内の光学系（ここではプリズム１７ｐ）にて図られたが、主制御部１３による画像処理にて図られてもよい。その場合、光学系は図４に示したものよりも簡略化可能である。
また、図４に示す光学系がディスプレイ１７に搭載される際には、例えば図７に示すように適宜、光路が折りたたまれて配置される。なお、図７では、操作者の左側から見た光学系、つまり左眼用の光学系しか図示していない。
光路配置の際には、上述したアーム１５の運動（図３参照）に必要なスペースがそのディスプレイ１７の内部に確保される。また、光学系の重心位置がなるべく接眼光学系の１７ａＲ，１７ａＬの近くになるように光路配置される。
このように重心位置を操作者の首の位置に近づければ、首を回転中心とした顔面の動きに追従するディスプレイ１７の慣性が小さくなるので、その追従をスムーズにすることができる。
次に、指先検出装置１２の構成、及び指先検出装置１２と指クリップ１１1，１１2，１１3，１１4，１１5との関係について図８に基づき詳細に説明する。なお、図８では、一方の手の各指に装着された指クリップ１１1，１１2，１１3，１１4，１１5のみを示したが、他方の手の各指にも同様の指クリップ１１1，１１2，１１3，１１4，１１5が装着される。
指先検出装置１２には、図８に示すように、照明光学系１２ａ、ハーフミラー１２ｂ、絞り１２ｅ、色フィルタ１２ｆ、投影レンズ１２ｃ、射出窓１２ｈ、二次元受光素子１２ｄ、指先検出装置１２の各部の制御及び簡単な信号処理（Ａ／Ｄ変換処理など）のために用意された回路１２ｉが備えられる。この指先検出装置１２からの出力信号（二次元受光素子１２ｄからの出力信号）は、回路１２ｉを介して主制御部１３（図１参照）に与えられる。
指クリップ１１1，１１2，１１3，１１4，１１5において各指先の爪上に相当する各箇所には、反射素子基板（請求項の反射部に対応。）１１Ｂ1，１１Ｂ2，１１Ｂ3，１１Ｂ4，１１Ｂ5がそれぞれ設けられている。
反射素子基板１１Ｂ1，１１Ｂ2，１１Ｂ3，１１Ｂ4，１１Ｂ5は、互いに垂直な３枚の反射面（コーナー状反射面）からなるコーナーキューブ１１Ｃを、そのコーナーを爪側に向けた姿勢で基板上に設けてなる。
このコーナーキューブ１１Ｃとしては、図８の右側に拡大して示すように３つの内面１１ｒがそれぞれ反射面となったプリズムからなるコーナーキューブの他、３枚の金属反射面からなるコーナーキューブ、微小コーナーキューブの集合体からなるコーナーキューブなど、何れのコーナーキューブをも適用可能である。
また、このようなコーナーキューブの他にも、特開昭５５−７５９３８号公報に開示されているガラス球状体が分散された再帰反射性を有する反射部材を使用することもできる。なお、本実施形態では、コーナーキューブを使用した場合を例として説明を進める。
指先検出装置１２において、照明光学系１２ａが出射する照明光（単色光である。）は、ハーフミラー１２ｂを透過して拡散しつつ射出窓１２ｈを透過し、指クリップ１１1，１１2，１１3，１１4，１１5が装着された操作者の手元（図８では一方の手元となっているが、実際には両方の手元）を一括して照明する。
左右の各指クリップ１１1，１１2，１１3，１１4，１１5に設けられた各コーナーキューブ１１Ｃは、どのような角度で照明光が入射したとしても、その入射光を図８の右側に拡大して示すように、反対方向に（逆平行に）反射する。
各コーナーキューブ１１Ｃで反射した照明光は、ハーフミラー１２ｂに再入射し、ハーフミラー１２ｂにて反射して絞り１２ｅ、色フィルタ１２ｆ、投影レンズ１２ｃを順に通過して二次元受光素子１２ｄに入射する。
ここで、絞り１２ｅは、照明光の射出位置と略共役な位置にあり、コーナーキューブ１１Ｃで反射した照明光以外の余分な光をカットする。また、色フィルタ１２ｆは、照明光と同じ波長以外の光をカットする。投影レンズ１２ｃは、操作者の手元の像を二次元受光素子１２ｄ上に形成する。
よって、コーナーキューブ１１Ｃ以外の面、例えば操作者の指、反射素子基板１１Ｂ1，１１Ｂ2，１１Ｂ3，１１Ｂ4，１１Ｂ5の基板表面などで反射した光（拡散光）は、二次元受光素子１２ｄ上に殆ど結像しない。
したがって、その二次元受光素子１２ｄ上に明確に結像するのは、各反射素子基板１１Ｂ1，１１Ｂ2，１１Ｂ3，１１Ｂ4，１１Ｂ5上の各コーナーキューブ１１Ｃの像（以下、「コーナーキューブ群の像」という。）となる。
主制御部１３（図１参照）は、指先検出装置１２からの出力信号に基づき、このコーナーキューブ群の像を認識することができる。
なお、以上の指先検出装置１２の位置及び姿勢は、その指先検出装置１２から射出する照明光が、左右の手に装着された各反射素子基板１１Ｂ1，１１Ｂ2，１１Ｂ3，１１Ｂ4，１１Ｂ5の全体を照明できるように操作者によって予め調整される。
但し、照明の角度は、真上からよりも、なるべく斜めからであることが好ましい。このようにすれば、手の表面などが照明光束に対し正対する可能性が少なくなり、強度の高い余分な正反射光が二次元受光素子１２ｄに入射する可能性も少なくなり、その結果、二次元受光素子１２ｄのＳ／Ｎが高まる。
また、前述したように、指先検出装置１２の位置及び姿勢は、アーム１５’によって自在に変更できるので、必要な照明光の光路から障害物（操作者の頭部、操作者の肘など）を確実に排除することができる。
次に、反射素子基板１１Ｂ1，１１Ｂ2，１１Ｂ3，１１Ｂ4，１１Ｂ5の光学系部分について図９、図１０、図１１に基づき詳細に説明する。なお、図９、図１０には、各要素のうち光学系部分以外（機構部分）の図示を省略した（機構部分については後述。）。また、図９、図１０には、左手用の各指クリップ１１1，１１2，１１3，１１4，１１5に設けられた反射素子基板１１Ｂ1，１１Ｂ2，１１Ｂ3，１１Ｂ4，１１Ｂ5しか示していないが、右手用の指クリップ１１1，１１2，１１3，１１4，１１5にも同様の反射素子基板１１Ｂ1，１１Ｂ2，１１Ｂ3，１１Ｂ4，１１Ｂ5が設けられる。
反射素子基板１１Ｂ1，１１Ｂ2，１１Ｂ3，１１Ｂ4，１１Ｂ5のそれぞれには、図９に示すように、操作者から見て横方向に３つ以上の複数（ここでは３つ）のコーナーキューブ１１Ｃが並べられる。
また、反射素子基板１１Ｂ1，１１Ｂ2，１１Ｂ3，１１Ｂ4，１１Ｂ5のそれぞれには、図９に示すように、それぞれシャッタ部材（遮光板である。請求項における変化機構に対応。）１１Ｓが設けられる。
或る反射素子基板１１Ｂiの指先に指圧が印加されると、その反射素子基板１１Ｂiに設けられたシャッタ部材１１Ｓは、その反射素子基板１１Ｂiの中央に配置されたコーナーキューブ１１Ｃを遮蔽する。その印加が終わると、再びそのコーナーキューブ１１Ｃを開放する（その遮蔽／開放に関わる機構については後述）。
例えば、左手の中指の指先にのみ指圧が印加されると、図９の状態から図１０の状態へと変化し、印加が終わると、図９の状態から図１０の状態へと変化する。
このように、或る指の指先に印加された指圧に応じて、その指に対応する反射素子基板１１Ｂiの反射率分布が変化すると、二次元受光素子１２ｄ上に形成されるコーナーキューブ群の像も、例えば図１１の（ａ）の状態から図１１の（ｂ）の状態へと変化する。よって、主制御部１３は、コーナーキューブ群の像から、各指に印加された指圧の有無を認識することができる。
また、遮蔽／開放の対象が、２以上のコーナーキューブ１１Ｃによって挟まれたコーナーキューブ１１Ｃ（ここでは、２つのコーナーキューブ１１Ｃによって挟まれた中央のコーナーキューブ１１Ｃ）に選定されているので、指圧が印加されたときのコーナーキューブ群の像（図１１（ｂ））と、障害物が照明光の光路を遮ったときのコーナーキューブ群の像（図１１（ｃ））とが確実に異なるものとなる。よって、主制御部１３は、指圧の印加された状態と障害物が光路を遮った状態とをコーナーキューブ群の像から峻別することができる。
因みに、反射素子基板１１Ｂ1，１１Ｂ2，１１Ｂ3，１１Ｂ4，１１Ｂ5のサイズは指の爪程度であり、コーナーキューブ１１Ｃは、それら反射素子基板１１Ｂ1，１１Ｂ2，１１Ｂ3，１１Ｂ4，１１Ｂ5よりも十分小さく、かつコーナーキューブ１１Ｃの配置間隔は十分に小さいので、よほど小さな障害物（コーナーキューブ１１Ｃの配置間隔よりも小さい障害物）でない限りは、峻別が可能である。
また、図９に示すように、横方向の両端の２つのコーナーキューブ１１Ｃの間隔Ｌは、各反射素子基板１１Ｂ1，１１Ｂ2，１１Ｂ3，１１Ｂ4，１１Ｂ5の間で（つまり、各指の間で）互いに異なる値Ｌ１，Ｌ２，Ｌ３，Ｌ４，Ｌ５に設定されている。
このように各指の間でコーナーキューブ１１Ｃの分布が相違していれば、仮に各指の配置順が「小指、薬指、中指、人差し指、親指の順」でなかったとしても、主制御部１３は、コーナーキューブ群の像から、各指をそれぞれ識別することができる。
また、図９に示すように、反射素子基板１１Ｂ1，１１Ｂ2，１１Ｂ3，１１Ｂ4，１１Ｂ5のそれぞれにおいては、左右の一方の側のみ（ここでは左側のみ）、コーナーキューブ１１Ｃが縦方向に２つ並べられる。
このように、各反射素子基板１１Ｂ1，１１Ｂ2，１１Ｂ3，１１Ｂ4，１１Ｂ5におけるコーナーキューブ１１Ｃの分布（反射面の分布）を左右非対称にしておけば、隣接する指同士が近づいてしまったとき（図１１（ｄ））などにも、主制御部１３は、コーナーキューブ群の像から、隣接する指同士の境界を認識することができる。
次に、上述した指先検出装置１２の変形例（指先検出装置１２’，１２”），コーナーキューブ１１Ｃの変形例（コーナーキューブ１１Ｃ’），反射素子基板１１Ｂの変形例（反射素子基板１１Ｂ’）について図１２、図１３、図１４、図１５に基づき順に説明する。
図１２は、指先検出装置１２’の構成図である。なお、図１２においては、図８に示した指先検出装置１２における要素と同じ要素には同一の符号を付した。また、図１２では簡単のため、各コーナーキューブ１１Ｃを１面の反射面として示した。また、図１２では、或る２つのコーナーキューブ１１Ｃ上の或る点に集光する光束のみを示した。
指先検出装置１２’の照明光学系１２ａ’は、発光ＬＥＤ等に代表される有限光源と、その有限光源からの射出光束を均一化する光学系とを備える（なお、その有限光源及び光学系の大きさ、及び、コーナーキューブ１１Ｃまでの距離により、集光する光束の照明ＮＡが決定される。）。
投影レンズ１２ｃ’、絞り１２ｅ、色フィルタ１２ｆは、照明光学系１２ａ’の射出位置と略共役な位置（集光位置）に挿入される。
この集光位置に挿入された投影レンズ１２ｃ’の曲率半径を最適化すれば、各光束の主光線を偏向することなく、コーナーキューブ１１Ｃにて反射した光束を所望の位置の二次元受光素子１２ｄ上に結像させることができる。また、投影レンズ１２ｃ’の挿入位置の集光位置に対する位置の差を最適化すれば、その二次元受光素子１２ｄ上に形成される像のサイズ（コーナーキューブ群のサイズ）を、所望のサイズに設定することができる。したがって、この指先検出装置１２’は、光学設計の自由度が高い。
図１３は、指先検出装置１２”の構成，及びコーナーキューブ１１Ｃ’の構成を示す図である。
図１３においては、図８に示した指先検出装置１２における要素と同じ要素には同一の符号を付した。また、図１３では簡単のため、コーナーキューブ１１Ｃ’を１面の反射面として示した。また、図１３では、或る２つのコーナーキューブ１１Ｃ’に入射する光束のみを示した。
指先検出装置１２”の照明光学系１２ａ”は、コヒーレンス性が高く、かつ平行光束化された照明光束を射出する光源（固体レーザ等に代表される。）と、その照明光束を拡散する凹レンズとを備える。
また、この指先検出装置１２”においては投影レンズが省略されている。その代わりに、コーナーキューブ１１Ｃ’の少なくとも１面１１ｒ’が、反射型回折光学面（ＤＯＥ面）となっている。
この指先検出装置１２”から射出する照明光束は、コーナーキューブ１１Ｃ’上では略平行な光束となり、コヒーレンス性が高い。
この照明光束は、コーナーキューブ１１Ｃ’の反射型回折光学面１１ｒ’においてその波面が変換され、その後、ハーフミラー１２ｂ、絞り１２ｅ、色フィルタ１２ｆを介して二次元受光素子１２ｄ上に入射する。
その反射型回折光学系１１ｒ’の回折パターンさえ最適化すれば、所望の位置に配置された二次元受光素子１２ｄ上にコーナーキューブ１１Ｃ’の像を結像させることができる。
さらに、その回折パターンの変形により、コーナーキューブ１１Ｃ’の像を、所望の形状、例えば図１４に示すような矩形状にすることもできる。
つまり、回折パターンの変形により、二次元受光素子１２ｄ上に形成されるコーナーキューブ群の像を、認識し易い所望の形状に最適化することができる。このようにすれば、主制御部１３は、認識を高速に行うことができる。
図１５は、反射素子基板１１Ｂ’を説明する図である。
前述した反射素子基板１１Ｂ（図９参照）上においては、指の左右のコーナーキューブ１１Ｃの数に差異が与えられているが、この反射素子基板１１Ｂ’においては、コーナーキューブ１１Ｃの配置方向に差異が与えられている（図１５（ａ））。
このように配置方向に差異が与えられた場合にも、反射素子基板１１Ｂ上のコーナーキューブ１１Ｃの分布（反射面の分布）は左右非対称になる。因みに、このときに二次元受光素子１２ｄ上に形成されるコーナーキューブ群の像は、図１５（ｂ）のようになる。
なお、左右のコーナーキューブ１１Ｃのサイズに差異を与えることによって、反射素子基板１１Ｂ上のコーナーキューブ１１Ｃの分布（反射面の分布）を左右非対称にしてもよい。
次に、指クリップ１１1，１１2，１１3，１１4，１１5の機構部分を図１６に基づき説明する。
図１６（ａ），（ｂ）は、指クリップ１１1，１１2，１１3，１１4，１１5のシャッタ部材１１Ｓに関わる機構部分を示す概略断面図である。なお、左右の各指クリップ１１1，１１2，１１3，１１4，１１5の間では、その機構部分に相違が無いので、ここでは一括して（識別用の添え字を省略して）説明する。
指クリップ１１には、上述したコーナーキューブ１１Ｃ及びシャッタ部材１１Ｓを設け、かつ指の爪側に配置される板状の反射素子基板１１Ｂ、指の腹側を覆う駆動架台１１ａ4、駆動架台１１ａ4と指との間に配置される微小板状の接触板１１ａ5、接触板１１ａ5と駆動架台１１ａ4との間に介設されるバネ１１ａ6などが備えられる。バネ１１ａ6の伸縮方向は、駆動架台１１ａ4と接触板１１ａ5との間隔が変化する方向である。
さらに、反射素子基板１１Ｂには、シャッタ部材１１Ｓを移動可能にするために、バネ１１ａ1、バネ抑え部１１ａ8が設けられる（請求項における変化機構に対応。）。
シャッタ部材１１Ｓの移動方向（図９←→図１０のようにコーナーキューブ１１Ｃを遮蔽／開放する方向）の一端は、バネ１１ａ1を介してバネ抑え部１１ａ8に連結され、バネ抑え部１１ａ8が、反射素子基板１１Ｂの基板上に固定される。バネ１１ａ1の伸縮方向は、シャッタ部材１１Ｓの移動方向である。これらバネ１１ａ1，バネ押さえ部１１ａ8は、コーナーキューブ１１Ｃを遮ることのないよう配置される。
さらに、シャッタ部材１１Ｓの他端と、駆動架台１１ａ4の指先側の端部とは、滑車１１ａ2及び糸状の連結子１１ａ3からなる機構により連結されている。この機構は、シャッタ部材１１Ｓの移動方向を制御する。
また、これら反射素子基板１１Ｂの反指先側、及び駆動架台１１ａ4の反指先側にはそれぞれ指先の付け根（例えば、第１関節の近傍）を柔らかく抑えるためのゴム部１１ｃが設けられている。これらゴム部１１ｃは、後述するストッパー機構によって、指を挟む方向に付勢されている。よって、指クリップ１１は指先に固定される。
さて、この指クリップ１１を装着した指先の腹に外部から圧力（本明細書では、この外力を「指圧」と称している。）が印加されていないとき、指クリップ１１は、図１６（ａ）に示す状態となる。
このとき、バネ１１ａ6は伸張し、接触板１１ａ5と駆動架台１１ａ4との間隔は広く確保される。このとき駆動架台１１ａ4と反射素子基板１１Ｂとの間隔も広く確保され、連結子１１ａ3は引っ張られた状態である。また、バネ１１ａ1は伸張しており、シャッタ部材１１Ｓは、コーナーキューブ１１Ｃから外れた位置に配置される（予め、この状態でシャッタ部材１１Ｓは位置決めされる。）。よって、コーナーキューブ１１Ｃは開放される。
一方、この指クリップ１１を装着した指先に指圧が印加されているとき、指クリップ１１は、図１６（ｂ）に示す状態となる。
このとき、バネ１１ａ6は圧縮され、接触板１１ａ5と駆動架台１１ａ4との間隔は縮小する。このとき駆動架台１１ａ4と反射素子基板１１Ｂとの間隔も縮小されるので、連結子１１ａ3は緩められる。バネ１１ａ1はそれに応じて圧縮され、シャッタ部材１１Ｓは、コーナーキューブ１１Ｃ上に配置される。よって、コーナーキューブ１１Ｃは遮蔽される。
次に、指クリップ１１1，１１2，１１3，１１4，１１5のストッパー機構を図１７に基づき説明する。
図１７（ａ），（ｂ）は、指クリップ１１1，１１2，１１3，１１4，１１5のストッパー機構を示す概略断面図である。なお、各指クリップ１１1，１１2，１１3，１１4，１１5の間では、そのストッパー機構部分に相違が無いので、一括して（識別用の添え字を省略して）説明する。
ストッパー機構には、反射素子基板１１Ｂ側のゴム部１１ｃに固定された連結棒１１ｄ1、固定架台１１ａ４側のゴム部１１ｃに固定された連結棒１１ｄ2が備えられる。
また、連結棒１１ｄ1と連結棒１１ｄ2とは、共通の回動軸１１ｄ7に連結されている。よって、連結棒１１ｄ1と連結棒１１ｄ2とはその回動軸１１ｄ7の周りに回動可能である。
また、連結棒１１ｄ1と連結棒１１ｄ2との間にはバネ（請求項における開放機構に対応。）１１ｄ9が設けられている。
また、連結棒１１ｄ1の連結部と固定部との間の箇所と、連結棒１１ｄ2の連結部と固定部との間の箇所とは、連結されている。
その連結部分には、鋸状の複数の微小突出部を有したストッパー棒１１ｄ4とそのストッパー棒１１ｄ4に噛み合う鍵部１１ｄ6とが設けられる。
ストッパー棒１１ｄ4は、一方の連結棒１１ｄ2に設けられた回動軸１１ｄ5の周りに回動可能である。鍵部１１ｄ6は、他方の連結棒１１ｄ1に固定される。
また、ストッパー棒１１ｄ4と連結棒１１ｄ1との間には、鍵部１１ｄ6と、鋸状の複数の微小突出部とを噛み合わせる方向に付勢されたバネ１１ｄ3が設けられている。
また、連結棒１１ｄ1又は連結棒１１ｄ2において回動軸１１ｄ7の近傍の箇所は、非伸縮部材１１ｄ8などを介して反射素子基板１１Ｂの側に固定される。
さて、この指クリップ１１に差し込まれた指先に、爪側及び腹側から外力が加えられていくと、連結棒１１ｄ1，１１ｄ2がそれぞれ指を徐々に締め付ける方向に回動し、ストッパー棒１１ｄ4の各微小突出部の間隙に次々と鍵部１１ｄ6が噛み合っていく。外力が停止するとその運動も停止する。このとき、指クリップ１１は、図１７（ａ）の状態となる。よって、操作者は、外力を加え、かつ適当な位置で外力を停止することにより、指クリップ１１を所望の強さで装着することができる（緩く装着することも、きつく装着することもできる。）。
一方、この指クリップ１１のストッパー棒１１ｄ4に対し、鍵部１１ｄ6との噛み合いを解除する方向に外力が加えられると、バネ１１ｄ9の弾性力により、連結棒１１ｄ1，１１ｄ2が指を緩める方向に回動する。このとき、指クリップ１１は、図１７（ｂ）の状態となる。よって、操作者は、指クリップ１１から指を離脱することができる。
つまり、適当な方向から適当な大きさの外力を加えれば、指に対し指クリップ１１を装着したり離脱させたりすることができる。
ところで、指先に装着されるこの指クリップ１１は小さいので、その着脱時に紛失したり、破損したりする可能性が高い。
そこで、本実施形態の情報入力システムには、各指の指クリップ１１に対し専用の収納室（請求項における収納室に対応。）１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5がそれら指毎に用意される。
次に、収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5を図１８に基づき説明する。
収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5は、図１８に示すように、ディスプレイ１７の側面に設けられる。
このようにすれば、別途スペースを用意する必要が無い。また、ディスプレイ１７の位置は自在に変更可能なので、収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5の位置も自在に変更可能となる。
指クリップ１１1，１１2，１１3，１１4，１１5は左右の手それぞれに対し用意されるので、ディスプレイ１７の操作者から見て右側面に右手用の指クリップ１１1，１１2，１１3，１１4，１１5を個別に収納する収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5、ディスプレイ１７の左側面に左手用の指クリップ１１1，１１2，１１3，１１4，１１5を個別に収納する収納室１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5がそれぞれ設けられる。
右側の収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5の位置関係、及び左側の収納室１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5の位置関係は、図１８に示すごとく、操作者がディスプレイ１７を左右の手で両側から挟持するときの各指の位置関係に相当する。このような位置関係を設定しておけば、操作者が左右の手でディスプレイ１７の位置を最適な位置にセットする（又は最適な位置から外す）ときに、指クリップ１１1，１１2，１１3，１１4，１１5を左右の手に対し装着する（又は手から離脱する）ことができる。
次に、各収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5の構造について図１９に基づき説明する。なお、各収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5の間では、サイズの相違はあるものの、その機構に相違は無いので、一括して（符号１７ＲＬを付して）説明する。
図１９は、収納室１７ＲＬの概略断面図である。なお、図１９では、互いに固定された部材同士は、同一の斜線パターンで塗りつぶされている。
収納室１７ＲＬは、指クリップ１１を装着した指先（図１９点線部）を包み込む空間を有しており、その全体がディスプレイ１７の側面に埋め込まれている。図１９において、符号２０は、ディスプレイ１７の側に固定された壁である。
壁２０の内側には、指をその腹側から先端にかけて覆う駆動室２１、指を爪側から押さえつけるための棒状のテコ型押さえ部材２３、指の出入り口近傍に突出した解除部材２２などが配置される。このうち、駆動室２１とテコ型押さえ部材２３とは、指に対し指クリップ１１を装着する手段の一部を成しており、解除部材２２は、指から指クリップ１１を離脱する手段の一部を成す。
指の腹側の壁２０と駆動室２１との間には、両者の間隔を拡縮する方向に伸縮するバネ２６が介設される。よって、この駆動室２１は、指の腹から受ける外力に応じて収納室１７ＲＬの空間を拡縮する方向（図中矢印の方向）に運動する。
また、テコ型押さえ部材２３は、駆動室２１の指先側に設けられた回動軸２４、及び壁２０の指先側に設けられた回動軸２４を支点及び力点としてテコ運動可能である。
したがって、指の腹から外力が加わると、駆動室２１が運動し、それに伴い駆動室２１の指先に設けられた回動軸２４の位置がずれ、その結果、テコ型押さえ部材２３は図中矢印の方向に指を爪側から押さえつける。
また、爪側の壁２０と解除部材２２との間には、バネ２７が介設される。また、その壁２０には、バネ２７の伸縮による解除部材２２の運動方向を図中矢印の方向（解除部材２２が収納室１７ＲＬの入り口を拡縮する方向）に制限するガイド部材２８が設けられる。
何ら外力が加えられていないとき、この解除部材２２は壁２０の側から所定量だけ突出する。収納室１７ＲＬの外側から内側へ向けて外力が加わると、解除部材２２は突出したままの状態を保ち、収納室１７ＲＬの内側から外側へ向けて外力が加わると、解除部材２２はその外力に従って壁２０の側に格納される。このような動作を可能とするために、解除部材２２の外形は、図示したごとく楔状に整えられている（傾斜面及び段差部とが設けられている。）。
また、駆動室２１には、指クリップ１１が収納されているか否かを検知するセンサ（請求項における検出手段に対応。）３０が設けられる。センサ３０からの出力信号は、主制御部１３（図１参照）に入力される。
主制御部１３は、左右の各収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5に個別に設けられた各センサ３０からの出力信号によって、左右の手にそれぞれ装着されるべき各指クリップ１１1，１１2，１１3，１１4，１１5の収納の有無を個別に認識することができる。
次に、この収納室１７ＲＬの動作について図２０、図２１、図２２に基づき説明する。
図２０、図２１、図２２は、収納室１７ＲＬが指クリップ１１を収納する収納時、収納室１７ＲＬが指クリップ１１を指に装着する装着時、収納室１７ＲＬが指クリップ１１を指から離脱する離脱時の状態をそれぞれ示している。
図２０に示すとおり、収納時、指クリップ１１のストッパー棒１１ｄ4と鍵部１１ｄ6との噛み合いは、外れている。
図２１に示すとおり、装着時、収納室１７ＲＬに収納されている指クリップ１１に対し指が挿入され、その後、白矢印１の方向に指の腹から外力が印加される。このとき、駆動室２１、バネ２６、回動軸２４が白矢印２のように運動し、テコ型押さえ部材２３が指クリップ１１の反射素子基板１１Ｂの基板を白矢印３のように押さえつける。このとき、指クリップ１１の駆動架台１１ａ4は、反力により駆動室２１及び壁２０の側から押し返される。よって、指が指クリップ１１の反射素子基板１１Ｂの基板と駆動架台１１ａ4との間に挟まれ、ストッパー棒１１ｄ4と鍵部１１ｄ6とが適当な位置で噛み合い、指クリップ１１が指に装着される。
なお、指クリップ１１を装着した指が収納室１７ＲＬから抜き取られる際には、指クリップ１１のストッパー棒１１ｄ4から解除部材２２の傾斜面に対し外力が加わるが、その外力に応じて解除部材２２は壁２０の側に格納されるので、指クリップ１１は指と共に何の障害も無く外部に抜き出される。
図２２に示すとおり、離脱時、指クリップ１１を装着した指が空の収納室１７ＲＬに挿入される。このとき、指クリップ１１のストッパー棒１１ｄ4が解除部材２２の段差部に当接するので、その解除部材２２が障害となってストッパー棒１１ｄ4と鍵部１１ｄ6との噛み合いが外れ（白矢印）、指から指クリップ１１が離脱する。
その後、収納室１７ＲＬの一番奥まで指が挿入されると、ストッパー棒１１ｄ4の先端が解除部材２２の段差部から外れてその傾斜面に当接し、バネ２７の弾性力がストッパー棒１１ｄ4を押さえる。この状態で指を抜き取ると、指クリップ１１のみが収納室１７ＲＬに残る。この残った状態が、図２０の収納時の状態である。
なお、以上説明した左右の各収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5のディスプレイ１７に対する取り付け角度は、各指それぞれの腹側に駆動室２１が位置するような角度とする。
このように取り付け角度を最適化しておけば、操作者は、指クリップ１１1，１１2，１１3，１１4，１１5を装着していない左右の各指を各収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5に個別に差し込むと共に左右の手をそれぞれ握る動作をするだけで、左右の指クリップ１１1，１１2，１１3，１１4，１１5を一度に装着することができる。
また、操作者は、指クリップ１１1，１１2，１１3，１１4，１１5を装着した左右の各指を各収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5に差し込むだけで、それら指クリップ１１1，１１2，１１3，１１4，１１5を一度に離脱することができる。
このように、各収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5を利用すれば、指クリップ１１1，１１2，１１3，１１4，１１5の取り扱いが容易になる。
なお、以上説明した各機構、及びコーナーキューブ１１Ｃを備える指クリップ１１1，１１2，１１3，１１4，１１5は、ゴミが付着すると、それら機構が動きづらくなったりコーナーキューブ１１Ｃの光学的特性が悪くなったりする可能性がある。このため、機構の回動軸部分やコーナーキューブＣは、操作者の手指などが接触しないよう透過性を有するカバー（少なくとも指先検出装置１２の光源波長に対し透過性を有するカバー）などで保護されることが望ましい。
次に、主制御部１３（図１参照）の実行する主な処理について図２３、図２４、図２５、図２６、図２７に基づき説明する。
前述したように、主制御部１３は、指先検出装置１２からの出力信号（二次元受光素子１２ｄからの出力信号。以下「取得画像」という。）に基づき、操作者のキータッチ動作やポインティング動作を認識する。
先ず、指先検出装置１２による照明の角度が斜めなので、取得画像が示すコーナーキューブ群の像には、図２３（ａ）や、図２３（ｂ）に示すようにディストーションが生じている（なお、図中点線部は、コーナーキューブ群の像から推測される手の輪郭である。）。
主制御部１３は、図２３（ｃ）に示すごとく、そのディストーションが補正される方向に取得画像を変換する。なお、この変換をする代わりに、二次元受光素子１２ｄを傾斜させることでディストーションを補正してもよい。
また、主制御部１３は、取得画像上のコーナーキューブ群の像を、その取得画像上の座標系ＸＹ１で認識する。
また、主制御部１３は、取得画像上のコーナーキューブ群の像に基づき、各指の位置を認識する。ここで、全ての指に指クリップ１１が装着されているとは限らないので、その像に基づき、主制御部１３は、指クリップ１１を装着している指の種類を認識する。
また、主制御部１３は、各収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ（図１８参照）に個別に設けられた各センサ３０（図１９参照）からの出力信号に基づき、左右の指クリップ１１1，１１2，１１3，１１4，１１5のうち非収納状態にある指クリップ１１の種類、つまり指クリップ１１を装着しているべき指の種類を認識する。
主制御部１３は、コーナーキューブ群の像に基づいて認識した指の種類と、センサ３０からの出力信号に基づいて認識した指の種類とを比較し、両者が一致していないときには、操作者に対し何らかの方法で（ヘッドホン１７Ｈへの音声情報の発生、ディスプレイ１７への画像又は文字情報の表示などにより）ワーニング情報を通知する。
この通知により、操作者は、指クリップ１１の紛失や、指クリップ１１の装着ミスなどを認識することができる。
続いて主制御部１３は、両者の種類が一致した時点、或いは操作者の承認がとれた時点で、次の処理へと進む。
次の処理では、左手の所定の指先（以下、親指の指先とする。）の位置（Ｌ０ｘ，Ｌ０ｙ）、右手の所定の指先（以下、親指の指先とする。）の位置（Ｒ０ｘ，Ｒ０ｙ）、及びその他の各指先の位置をそれぞれ取得画像上の座標系ＸＹ１上で認識する（なお、図２３では、座標系ＸＹ１上の左右の手の間隔を狭く表したが、実際の間隔は、操作者の左右の手の間隔に応じたものとなる。）。
また、制御部１３は、それらの各位置をディスプレイ１７の表示画像上の座標系ＸＹ２の各位置座標に座標変換した上で、左右の各指先の位置を示す指先イメージ（以下、手の輪郭のイメージとする。）を生成し、その表示画像上に図２４に示すとおりリアルタイムで表示する。なお、表示画像上には、コンピュータイメージとキーボードイメージとが表示されているが、図２４には、キーボードイメージの部分のみを示した。
表示に当たり、制御部１３は、取得画像上の左手親指の指先の位置（Ｌ０ｘ，Ｌ０ｙ）が表示画像上のキーボードイメージのスペースキーの位置座標に変換されるような変換式で、取得画像上の左手の各指先の各位置を座標変換する。また、制御部１３は、取得画像上の右手親指の指先の位置（Ｒ０ｘ，Ｒ０ｙ）が、表示画像上のスペースキーの位置座標に変換されるような変換式で、取得画像上の右手の各指先の各位置を座標変換する。
なお、この座標変換の方法には、各座標に実際に変換式を当てはめて演算する方法の他に、変換前後の座標の対応関係を格納したルックアップテーブルを用意すると共に各座標を引数としてそのルックアップテーブルを参照する方法などを適用することができる。
したがって、操作者が左右の手指を動かすと、各時点における左右の親指の指先位置を基準とした各位置に、表示画像上の手の輪郭のイメージも動く。このとき、左右の親指の指先の表示位置は、常にスペースキー上に一致している。
このように手の輪郭のイメージがリアルタイムで表示されば、操作者は実際の手元を実際に目視しなくとも、ディスプレイ１７を目視しているだけで、右手各指の運動と左手各指の運動とをそれぞれ実感できる。
なお、必要に応じて、この変換に、上述したディストーション補正のための変換を含めるとよい。また、この変換に、取得画像上の座標系ＸＹ１と表示画像上の座標系ＸＹ２との間の倍率調整のための変換も含めるとよい。
さらに、主制御部１３は、取得画像上のコーナーキューブ群の像に基づき各指先の指圧の有無を監視し、何れかの指に指圧が印加されると、その印加の時点で用いていた変換式（又はルックアップテーブル）を記憶し、左右の親指の位置に拘わらずその変換式（又はルックアップテーブル）を継続して用いる。
したがって、指圧が印加されてから以降は、操作者が左右の手指を動かすと、印加の時点における左右の親指それぞれの指先位置を基準とした各位置に、表示画像上の手の輪郭のイメージが動く。このとき、左右の親指を含む全指先の表示位置が、それら指先の移動に応じて移動する。
つまり、操作者は、キータッチ動作するのに最もリラックスできる左右の手の親指の位置をそれぞれ探し、それぞれの位置が定まった時点で何らかのキーを押す動作をすれば、それ以降は、その位置の近傍でキータッチ動作をすることができる。よって、左右の手の間隔は、操作者が任意に決定することができる。
また、主制御部１３は、表示画像上の指先が何れかのキーに重畳するときには、図２５に示すように、そのキー（図２５では、左手の親指、中指、薬指、小指、右手の親指、人差し指が重畳したキー）の色を変化させる。さらにそれらの指の何れかに指圧が印加されると、その指に重畳するキーの色を、さらに変化させる（図２５では、enterキーの色がさらに変化した様子を示した）。そして、その指圧と同じタイミングで、そのキーのキーコードを、コンピュータ２のキーボード端子に入力する。
したがって、操作者は、最もリラックスできるよう左右の手をそれぞれ配置し、そこでキータッチ動作をするだけで、所望の情報をコンピュータ２に入力することができる。
次に、主制御部１３によるコーナーキューブ群の像の認識方法、指圧の有無の認識方法、指の種類の認識方法について図２６に基づき説明する。
図２６（ａ）の上部には、二次元受光素子１２ｄ上の一部に形成されたコーナーキューブ群の像（指圧有り）を示し、図２６（ａ）の下部には、そのときの二次元受光素子１２ｄの出力信号を示した。二次元受光素子１２ｄ上の或るラインＬiとそのラインＬiからの出力信号Ｓiとには、互いに同じ下付数字”ｉ”（ｉ＝１，２，３，４，５）を付した。
図２６（ａ）下部に明らかなように、二次元受光素子１２ｄ上の画素ピッチ（画素配置周期）は、単一のコーナーキューブ１１Ｃの像のサイズと比較して十分に密になっている。少なくとも、画素ピッチは、コーナーキューブ１１Ｃの像の幅よりも小さい。
この画素ピッチの下では、出力信号Ｓ1，Ｓ2，Ｓ3，Ｓ4，Ｓ5から、横方向に３つのコーナーキューブ１１Ｃが配置されていることを確実に認識できる。また、その出力信号Ｓ1，Ｓ2，Ｓ3，Ｓ4，Ｓ5から、各コーナーキューブ１１Ｃの形状、及びコーナーキューブ１１Ｃの幅などを認識することもできる。
これらの認識は、二次元受光素子１２ｄの各画素からの出力信号値（すなわち、二次元受光素子１２ｄへの入射光量）に閾値を設けたプログラムによって簡単に実行できる。
但し、本実施形態ではコーナーキューブ１１Ｃに対する照明光束の照射方向が斜めになっていることなどから、各画素信号に重畳される一次成分が大きく、全画素信号を平均化するノイズ軽減方法を適用し難い。また、手の輪郭のイメージをリアルタイムで表示するためにはその認識を高速化する必要がある。そこで、次のような方法を採ることが望ましい。
主制御部１３は、二次元受光素子１２ｄの出力信号をノイズやテーパに強いローパスフィルタに通し、その高次成分をカットする。その後、出力信号を微分データに変換し、微分データが閾値以上となった出力信号に対応する画素の位置を、コーナーキューブ１１Ｃの像の位置とみなす。
さらに、主制御部１３は、距離Ｌ１（図９参照）に相当する各間隔で横方向に配置された一対の像の位置を親指の位置とみなし、距離Ｌ２（図９参照）に相当する間隔で横方向に配置された一対の像の位置を人差し指の位置とみなし、距離Ｌ３（図９参照）に相当する間隔で横方向に配置された一対の像の位置を中指の位置とみなし、距離Ｌ４（図９参照）に相当する間隔で横方向に配置された一対の像の位置を薬指の位置とみなし、距離Ｌ５（図９参照）に相当する間隔で横方向に配置された一対の像の位置を小指の位置とみなすと共に、それら各指先の位置座標を求める。
もし、或る特定の指に対応する一対の像が検出できなかった場合には、何らかの障害物によってその指が検出できないとみなす。
その後、検出した各対の像の間にもう一つコーナーキューブ１１Ｃの像が存在するか否かを判別し、図２６（ａ）に示すように存在するときには、それに対応する指に指圧の印加が無いとみなし、図２６（ｂ）に示すように存在しないときには、それに対応する指に指圧の印加が有るとみなす。
このように、各指先の位置を認識する手順と、指圧の有無を認識する手順とをこの順で行うシーケンスによれば、指圧の誤認識（＝実際には指圧が無いにも拘わらず、障害物があったために有ると誤認識すること。）が殆ど発生しなくなる。
最後に、主制御部１３によるその他の処理について図２７に基づき説明する。
図２７は、表示画像上のキーボードイメージ、コンピュータイメージ、手の輪郭のイメージ、及び、マウスのポインタイメージを示す図である。
主制御部１３は、上述したように、手の輪郭のイメージを生成を表示画像上に表示するが、その際、何れか１つの指先が第１フィールド（つまりキーボードイメージ）から外れたときには、図２７に示すようにその指先の位置にマウスのポインタイメージ（図２５では、十字のイメージ）を表示する。なお、ポインタイメージとしては、×印のイメージ、矢印のイメージ、矩形状のカーソルイメージなどの何れをも適用できる。
そして、主制御部１３は、第２フィールド（つまりコンピュータイメージ）上における各指の動きを示す信号を生成、それをコンピュータ２に入力する。
また、このとき、指に指圧が印加されたときには、マウスのクリック動作がなされたとみなし、クリック信号をコンピュータ２に入力する。
したがって、操作者は、コンピュータイメージ上でマウスを使うときと同様の感覚でポインティング動作を行い、所望の情報を入力することができる。
例えば、主制御部１３は次の動作をすることもできる。
すなわち、コンピュータイメージ上に配置された右手中指に指圧が印加されたときに、マウスの右クリック動作がなされたとみなし、右クリック信号を生成してコンピュータ２に入力する。一方、コンピュータイメージ上に配置された右手人差し指に指圧が印加されたときに、マウスの左クリック動作がなされたとみなし、左クリック信号を生成してコンピュータ２に入力する。
また、片手だけでも５つの指があるので、それら５つの指の動作の組み合わせに応じて様々な信号を生成し、コンピュータ２に入力してもよい。
（効果）
以上、本実施形態において左右の手に装着される指クリップ１１1，１１2，１１3，１１4，１１5は、機構部分と光学系部分とからなり、何の電子部品も備えていない。
このような指クリップ１１1，１１2，１１3，１１4，１１5は、配線、電池の何れも要しない。また、それらの光学系部分及び機構部分さえ軽量化すれば、指クリップ１１1，１１2，１１3，１１4，１１5は軽量化可能である。
よって、指クリップ１１1，１１2，１１3，１１4，１１5は、操作者によるキータッチ動作に殆ど制約を与えることは無く、操作者は、疲労することなく楽に情報を入力することができる。
また、それらの光学系部分及び機構部分さえ小型化すれば、指クリップ１１1，１１2，１１3，１１4，１１5は小型化可能である。よって、操作者が情報を入力するためのスペースを低減することができる。
また、指クリップ１１1，１１2，１１3，１１4，１１5が小型化・軽量化されれば、収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5への移動、収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5からの取り出しを、操作者は、疲労無く行うことができる。
また、光学系部分に関しては、１枚の反射素子基板１１Ｂが複数の情報（ここでは、各指の位置、各指の種類、各指の指圧の有無）を示すので、指クリップ１１1，１１2，１１3，１１4，１１5は、多くの情報を示す割には簡易化や小型化が可能である。また、機構部分に関しても、主にシャッタ開閉の動作をする機構なので、簡易化や小型化が可能である。
したがって、指クリップ１１1，１１2，１１3，１１4，１１5は、小型化、軽量化、かつ低コスト化が可能である。
また、指クリップ１１1，１１2，１１3，１１4，１１5においては、それぞれの反射素子基板１１Ｂの反射率分布（ここでは、コーナーキューブ１１Ｃの配置）に工夫が施されているので、各指の位置、各指の種類、各指の指圧の有無を、それぞれ簡単なアルゴリズムによって認識することができる。
また、指クリップ１１１１1，１１2，１１3，１１4，１１5によれば、指圧の印加された状態と、障害物が光路を遮った状態とが峻別可能になるので、情報の入力ミスを低減することができる。
また、指クリップ１１1，１１2，１１3，１１4，１１5は、左右の各指に対し個別に着脱可能であるので、用途に応じて一部の指にだけ装着することもできる。このように、必要な指にのみ指クリップ１１を装着すれば、キータッチ動作やポインティング動作時の手の自由度を向上させることができる。
また、その光学系部分と機構部分の仕様さえ統一されていれば、様々なデザインの様々なサイズの指クリップ１１1，１１2，１１3，１１4，１１5を用意し、各操作者に利用させることができる。
また、各収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5によれば、指クリップ１１1，１１2，１１3，１１4，１１5の離脱と収納、装着と取り出しが同時に行われるので、それらの手間は軽減され、紛失や破損、装着指の誤り（親指用の指クリップ１１1を人差し指に装着するなどの誤り）の生じる可能性も軽減される。
また、それら収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5にはそれらの収納の有無を検出するセンサ３０が設けられ、それによって指クリップ１１1，１１2，１１3，１１4，１１5の使用状況がモニタされるので、万一紛失した場合にも、その事実を操作者が即座に知ることができる。また、その使用状況の情報に基づけば、各指の位置、各指の種類、各指の指圧の有無などの情報を、精度高く取得することもできる。
また、収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5は、位置及び姿勢変化の自在なディスプレイ１７に設けられるので、操作者にとって装着／離脱、及び収納／取り出しがそれぞれ容易である。
また、ディスプレイ１７の表示画像上には、キーボードイメージと指先イメージとが表示されるので、操作者は、表示画像を目視しているだけで右手各指の運動と左手各指の運動とをそれぞれ実感できる。
因みに、ディスプレイ１７は、表示画像を広い視野角で表示する。つまり、操作者の視野一杯に表示画像が表示される。このときに操作者は、その表示画像を目視しつつ自分の手元を目視することはできない。したがって、このように指先イメージが表示されることは、情報入力を円滑に行う上で極めて有意である。
また、指先イメージが表示される際、左手の各指先の位置座標と右手の各指先の位置座標とがそれぞれ独立してキーボードイメージ上に対応付けられるので、操作者が左右の手を特定のスペースに配置する必要が無く、左右の手をそれぞれ好きなスペースに配置することができる。つまり、操作者の周囲の何れかの箇所に左右の手を個別に配置する小さなスペースが２つあれば、情報入力が可能である。
しかも、指クリップ１１1，１１2，１１3，１１4，１１5は小型化・軽量化が可能なので、左右の手を配置する場所の自由度も高まる。よって、特に、体の不自由な操作者が情報を入力する手段として有効である。
また、両手の不自由な操作者に対しては、足の指や体の動く部分に対応した機構を導入すれば、同様の効果が得られる。
（コーナーキューブ１１Ｃの配置パターンの変形例）
コーナーキューブ１１Ｃの配置パターンの変形例を説明する。
以下の説明は、左右の各指クリップ１１1，１１2，１１3，１１4，１１5の何れに当てはめてもよいので、以下、添え字を省略して説明する。
図９、図１０、図１５に示した指クリップ１１には、複数のコーナーキューブ１１Ｃが隙間をおいて配置されているが、例えば、図２８（ａ）に示すように、隙間無く密に配置されてもよい。
このとき二次元受光素子１２ｄ上に形成されるコーナーキューブ群の像は、図２８（ａ’）に示すように、離散的な図形ではなく連続的な図形（図２８（ａ’）では平行四辺形）になる。
このように、複数のコーナーキューブ１１Ｃを密に配置すれば、コーナーキューブ群の像の外形を単純化できるので、主制御部１３による認識速度を高速化することができる。
また、複数のコーナーキューブ１１Ｃが密に配置された反射素子基板１１Ｂは、所謂コーナーキューブアレイ（コーナーリフレクタアレイ）と同じ公知の成形技術により、簡単に、かつ十分な精度で製造することができる。
また、例えば、シャッタ部材１１Ｓを、図２８（ａ）に示すように、互いに隣接する２つのコーナーキューブ１１Ｃを遮蔽／解放するよう構成すれば、指圧の印加時における反射素子基板１１Ｂの様子は図２８（ｂ）のとおりとなり、そのときのコーナーキューブ群の像は、図２８（ｂ’）のとおり（図２８（ｂ’）では２つの平行四辺形）となる。
また、例えば、シャッタ部材１１Ｓを、図２９（ａ）に示すように、或るコーナーキューブ１３Ｃの全体、及びその両隣のコーナーキューブ１１Ｃの反射面１枚ずつを遮蔽／解放するよう構成すれば、指圧の印加時における反射素子基板１１Ｂの様子は図２９（ｂ）に示すようになり、そのときのコーナーキューブ群の像は、図２９（ｂ’）のとおり（図２９（ｂ’）では台形と平行四辺形）となる。
なお、コーナーキューブ１１Ｃが照明光を逆平行に反射するためには、コーナーキューブ１１Ｃの有する３つの反射面が全て開放されている必要があるので、或るコーナーキューブ１１Ｃの少なくとも１つの反射面が遮蔽されていれば、そのコーナーキューブ１１Ｃは二次元受光素子１２ｄ上に結像されない。よって、図２９（ｂ）に示すように遮蔽されているのが、或るコーナーキューブ１１Ｃの全体と、その両隣のコーナーキューブ１１Ｃの反射面１枚ずつであるが、二次元受光素子１２ｄ上では、図２９（ｂ’）に示すようにそれら３つのコーナーキューブ１１Ｃの全体が結像されないこととなる。
（コーナーキューブ１１Ｃの形状の変形例）
コーナーキューブ１１Ｃの形状の変形例を説明する。
以上の各図では、コーナーキューブ１１Ｃの３つの反射面の外形を三角形にしたが、図３０に示すように、四角形にしてもよい。反射面の中線方向から見たこのコーナーキューブ１１Ｃの見え方は、６角形である。
このコーナーキューブ１１Ｃの反射面によって囲まれる空間は深いので、このコーナーキューブ１１Ｃが逆平行に反射できる光の入射角度範囲は若干広い。
また、このようなコーナーキューブ１１Ｃが密に配置された反射素子基板１１Ｂも、所謂コーナーキューブアレイ（コーナーリフレクタアレイ）と同じ公知の成形技術により、簡単に、かつ十分な精度で製造することができる。
なお、図３０（ａ）は、このコーナーキューブ１１Ｃが複数個、二列に亘り密に形成された例を示している。
図３０（ａ’）は、そのコーナーキューブ群の像、図３０（ｂ）は、指圧の印加時におけるこのコーナーキューブ１１Ｃの様子（一例）、図３０（ｂ’）は、指圧の印加時のコーナーキューブ群の像の様子（一例）を示している。
なお、コーナーキューブの代わりに、再帰反射性を有する反射シートなどを所定のパターンに形成し、その一部を遮蔽することで、二次元受光素子１２ｄ上の像を変形させる様にしてもよい。
（コーナーキューブ１１Ｃの配置姿勢の変形例）
コーナーキューブ１１Ｃの配置姿勢の変形例を説明する。
以上説明した指クリップ１１には、互いに同じ姿勢の１種類のコーナーキューブ１１Ｃしか設けられていないが、図３１（ａ）に示すように、互いに異なる姿勢の複数種類のコーナーキューブ１１Ｃが設けられていてもよい。以下、互いに異なる姿勢の２種類のコーナーキューブ（第１コーナーキューブ１１Ｃ−１，第２コーナーキューブ１１Ｃ−２）が設けられる場合を説明する。
例えば、指クリップ１１は次のように構成される。
図３１（ａ）に示すように、反射素子基板１１Ｂが二枚化され、第１基板１１Ｂ−１と第２基板１１Ｂ−２とにより構成される。第１基板１１Ｂ−１の法線と第２基板１１Ｂ−２の法線との成す角度θＡは、９０°よりも若干狭い角度に設定される。この反射素子基板１１Ｂは、一方の基板（以下、第１基板１１Ｂ−１とする。）が爪の表面に沿う姿勢で指に装着される。
第１基板１１Ｂ−１上には、複数のコーナーキューブ１１Ｃが、それぞれ第１基板１１Ｂ−１の法線方向に反射面の中線を向けた姿勢で設けられる。これらのコーナーキューブ１１Ｃが第１コーナーキューブ１１Ｃ−１となる。
第２基板１１Ｂ−２上には、第１基板１１Ｂ−１に設けられたのと同じ複数のコーナーキューブ１１Ｃが、それぞれ第２基板１１Ｂ−２の法線方向に反射面の中線を向けた姿勢で設けられる。これらのコーナーキューブ１１Ｃが第２コーナーキューブ１１Ｃ−２となる。
よって、第１コーナーキューブ１１Ｃ−１の反射面の中線と、第２コーナーキューブ１１Ｃ−２の反射面の中線とが成す角度（＝両者の配置角度の差）は、θＡ（＝９０°よりも若干狭い角度）となる。
また、複数の第１コーナーキューブ１１Ｃ−１の第１基板１１Ｂ−１における配置パターンと、複数の第２コーナーキューブ１１Ｃ−２の第２基板１１Ｂ−２における配置パターンとは、同じである。これらを正面から見ると、例えば、図３１（ｂ）のとおりである。
また、第１基板１１Ｂ−１には第１コーナーキューブ１１Ｃ−１の配置領域の一部を指圧に応じて遮蔽／開放するシャッタ部材１１Ｓ−１が、第２基板１１Ｂ−２には第２コーナーキューブ１１Ｃ−２の配置領域の一部を指圧に応じて遮蔽／開放するシャッタ部材１１Ｓ−２が設けられる。シャッタ部材１１Ｓ−１による遮蔽パターンと、シャッタ部材１１Ｓ−２による遮蔽パターンとは、同じである。
次に、この指クリップ１１の効果を説明する。
ここでは、簡単のため、照明光が操作者の手の甲に対し略垂直に入射する場合を考える。
先ず、指先が図３２（ａ）に示すように意識的に曲げられていないときには、第１基板１１Ｂ−１の表面に対し入射角度０°近傍の入射角度で照明光が入射し、第２基板１１Ｂ−２の表面に対し入射角度４５°近傍の入射角度で照明光が入射する。
このとき、第２コーナーキューブ１１Ｃ−２は、図３２（ａ’）の左に示すように、その照明光を逆平行に反射することはできない可能性があるが、第１コーナーキューブ１１Ｃ−１は、図３２（ａ’）の右に示すように、その照明光を逆平行に確実に反射できる。
このとき、二次元受光素子１２ｄ上には、図３２（ａ”）に示すように、複数の第１コーナーキューブ１１Ｃ−１からなる群の像が確実に形成される。
一方、指先が図３２（ｂ）に示すように曲げられているときには、第１基板１１Ｂ−１の表面に対し入射角度４５°に近い角度で照明光が入射し、第２基板１１Ｂ−２の表面に対し入射角度０°に近い角度で照明光が入射する。
よって、第１コーナーキューブ１１Ｃ−１は、図３２（ｂ’）の右に示すように、その照明光を逆平行に反射できない可能性があるが、第２コーナーキューブ１１Ｃ−２は、図３２（ｂ’）の左に示すように、その照明光を逆平行に確実に反射できる。
このとき、二次元受光素子１２ｄ上には、図３２（ｂ”）に示すように、複数の第２コーナーキューブ１１Ｃ−２からなる群の像が確実に形成される。
したがって、この指クリップ１１によると、指先の曲げ動作によらず、二次元受光素子１２上にコーナーキューブ群の像が確実に形成される。また、指先が曲げられているとき、曲げられていないときの何れにおいても、指圧に応じてその像が同様に変形する。よって、指先の曲げ動作に依らず、キータッチ動作を確実に主制御部１３に認識させることができる。
なお、指先が曲げられていないときと曲げられているときとでは、図３２（ａ”），（ｂ”）に示すように像の形成位置が若干ずれることもあるが、キー１つ分のキートップのサイズと比較するとそのずれ量ｄは十分に小さいので、操作者の意図したキー（仮想のキー）の上に指先がきちんと配置されている限り、主制御部１３がキータッチ動作を誤認する確率（別のキーを押したとみなす確率）は低い。
次に、角度θＡについて詳細に説明する。
或る１つのコーナーキューブ１１Ｃが逆平行に反射できる光の入射角度範囲（コーナーキューブ１１Ｃの中線に対し成す角度の範囲）は、０°〜約４５°である。よって、互いの姿勢が９０°異なる２種類の第１コーナーキューブ１１Ｃ−１と第２コーナーキューブ１１Ｃ−２をその光の入射面に配置すれば、入射角度範囲０°〜約４５°の光については一方のコーナーキューブ（第１コーナーキューブ１１Ｃ又は第２コーナーキューブ１１Ｃ−２）によって逆平行に反射させ、入射角度範囲４５°〜約９０°の光については他方のコーナーキューブ（第２コーナーキューブ１１Ｃ−２又は第１コーナーキューブ１１Ｃ−１）によって逆平行に反射させることができる。
但し、照明光が両者の入射角度範囲のちょうど境界の角度（４５°）になったときにも逆平行に反射される光の強度が０にならないよう、両者の入射角度範囲は、若干重畳していることが望ましい。それを考慮すると、角度θＡは、９０°ではなく、９０°よりも若干小さい角度にすることが最善となる。
なお、図３１，図３２では、反射素子基板１１ＢがＶ字状になった例を示したが、図３３に示すように逆Ｖ字状にしてもよい。
その場合、指先が曲げられていないとき（図３４（ａ）参照）には、第２コーナーキューブ１１Ｃ−２からなる群の像のみが形成され（図３４（ａ’）参照）、指先が曲げられているとき（図３４（ｂ）参照）には、第１コーナーキューブ１１Ｃ−１からなる群の像のみが形成されるが（図３４（ｂ’）参照）、Ｖ字状の例（図３１，図３２参照）と同じ効果が得られる。
但し、逆Ｖ字状の例（図３３，図３４参照）よりもＶ字状の例（図３１，図３２参照）の方が、指先の曲げ動作よる像の形成位置のずれ量ｄが小さくなるので、主制御部１３による誤認の確率は、より低く抑えられる。
また、図３１，図３２，図３３，図３４では、互いに姿勢の異なる２第１コーナーキューブ１１Ｃ−１と第２コーナーキューブ１１Ｃ−２とを設けるために、反射素子基板１１Ｂを二枚化したが、図３５（ａ）に示すように、一枚の反射素子基板１１Ｂ上に第１コーナーキューブ１１Ｃ−１と第２コーナーキューブ１１Ｃ−２との双方を設けてもよい。
その場合にも、複数の第１コーナーキューブ１１Ｃ−１の配置パターンと、複数の第２コーナーキューブ１１Ｃ−２の配置パターンとは、例えば図３５（ｂ）に示すように、同じに設定される。また、シャッタ部材１１Ｓによる複数の第１コーナーキューブ１１Ｃ−１の遮蔽パターンと、複数の第２コーナーキューブ１１Ｃ−２の遮蔽パターンとは同じに設定される。
因みに、１枚の反射素子基板１１Ｂ上に第１コーナーキューブ１１Ｃ−１と第２コーナーキューブ１１Ｃ−２との双方が設けられている場合には、図３５（ｂ）に示すように遮蔽／解放を単一のシャッタ部材１１Ｓによって図ることができる。
なお、図３５（ｂ）に示すように、第１コーナーキューブ１１Ｃ−１の形成領域Ｅ１と、第２コーナーキューブ１１Ｃ−２の形成領域Ｅ２とが重複していると、指先の曲げ動作による像の形成位置のずれ量ｄが極めて小さくなるので、主制御部１３による誤認の確率は、極めて低く抑えられる。
なお、互いに隣接する第１コーナーキューブ１１Ｃ−１と第２コーナーキューブ１１Ｃ−２とは、互いの反射面に入射する照明光を互いに遮ることのないよう、十分な間隔をおいて配置されることが望ましい。
また、以上説明した指クリップ１１は、左右の各指クリップ１１1，１１2，１１3，１１4，１１5の全てに適用されても、一部の指クリップにのみ適用されてもよい。因みに、親指の曲げ運動は手の甲に水平な面内で行われるので、親指用の指クリップ１１1が１種類の姿勢のコーナーキューブ１１Ｃしか設けていなくても照明光を逆反射できなくなる可能性は低い。よって、以上説明した指クリップ１１は、親指以外の指用の指クリップ１１2，１１3，１１4，１１5に特に好適である。
（その他）
なお、指先検出装置１２は、左右の手元の全体を一括して捉えるが、その指先検出装置１２の代わりに、左の手元のみ捉える指先検出装置と右の手元のみ捉える指先検出装置とが用いられてもよい。
また、指先検出装置１２の光源としては、ノイズを低減するために単色光を用いることが望ましいが、白色光や不可視光線（赤外線など）を利用することもできる。
また、白色光を利用した場合、例えば、左右の各指の指クリップ１１1，１１2，１１3，１１4，１１5に異なる色フィルタを装着し、二次元受光素子１２ｄとして、カラー受光素子を用いてもよい。このようにすれば、各コーナーキューブ１１Ｃの像が、指毎に互いに異なる色で検出されるので、指の種類の認識が容易になる。
また、指クリップ１１には、付勢手段、運動伝達手段として、バネ、連結子と滑車（図１１等参照）との組み合わせがそれぞれ用いられているが、それらに兼用される板バネなどの手段が用いられてもよい。また、付勢手段としては、永久磁石などの非接触の付勢手段が用いられてもよい。また、運動伝達手段としては、てこ、滑車、歯車などが用いられてもよい。
また、指クリップ１１は、ゴム部１１ｃを基準として駆動架台１１ａ4が回動するよう構成されているが、横シフトやスライドするよう構成されてもよい。
また、指クリップ１１は、指圧が印加されていないときにシャッタ部材１１Ｓが特定のコーナーキューブ１１Ｃを開放し、指圧が印加されているときにシャッタ部材１１Ｓがそのコーナーキューブ１１Ｃを遮蔽するよう構成されているが、指圧が印加されていないときにシャッタ部材１１Ｓが特定のコーナーキューブ１１Ｃを遮蔽し、指圧が印加されているときにシャッタ部材１１Ｓがそのコーナーキューブ１１Ｃを開放するよう構成されてもよい。
また、指クリップ１１には、反射素子基板１１Ｂの反射率分布を変化させる変化機構として、特定のコーナーキューブ１１Ｃを遮蔽／開放する機構が設けられたが、複数のコーナーキューブ１１Ｃの位置関係を変化させる機構や、コーナーキューブ１１Ｃからの反射光強度を変化させる機構が設けられてもよい。
また、実際の指のサイズと表示画像上の指のサイズとの関係を操作者が調整することができるよう、取得画像上の座標系ＸＹ１と表示画像上の座標系ＸＹ２との間の倍率調整の比率を操作者からの指示に応じて主制御部１３が変更してもよい。このようにすれば、操作者は自分の好みに合わせて実際の指のストロークを変更することができる。
因みに、キーボードイメージ上の指のサイズが大きくなるよう調整すれば、実際の指のストロークを小さくできるので、さらなる省スペース化の効果も得られる。
また、主制御部１３は、キータッチ動作からポインティング動作へと移行するタイミングを、指先が第１フィールド（つまりキーボードイメージ）から外れた時点としたが、操作者から所定の合図が発行された時点（例えば、複数のキーが同時に押された時点）としてもよい。
その時点から、前述した変換式（又はルックアップテーブル）が新たなもの（例えば、その時点における取得画像上の右手人差し指の指先の位置座標が表示画像上のコンピュータイメージ中央の位置座標に変換されるようなもの）に置き換わる。このようにすれば、操作者は手を移動させることなくキータッチ動作とポインティング動作との間を移行できるので、さらなる省スペース化が図られる。
また、左右の手について個別の変換式（又はルックアップテーブル）が適用されることを利用し、左右の手で独立した作業（例えば左手はキータッチ動作、右手はポインティング動作）ができるよう主制御部１３が動作してもよい。
また、主制御部１３は、指圧が印加されたことを操作者に通知するために、キーの色を変化させたが、ヘッドホン１７Ｈから音を発生させてもよい。また、表示画像上でそのキーを太枠で囲うこととしてもよい。
また、主制御部１３による処理の一部又は全部については、指先検出装置１２内の回路１２ｉに行わせてもよい。
また、主制御部１３による処理の一部又は全部を、コンピュータ２、又は別のコンピュータに行わせてもよい。
また、コンピュータによる処理の一部又は全部に関するプログラムについては、コンピュータ内のＲＯＭに予め書き込まれているものであっても、可搬の記録媒体からコンピュータのハードディスクに読み込まれたものであってもよい。また、そのプログラムは、コンピュータのハードディスクに別のコンピュータからインターネットなどの通信網を介してダウンロードされたものであってもよい。
また、指先検出装置１２をビデオカメラに切り替え可能に構成しておけば、操作者の所望するタイミングで周囲の様子をディスプレイ１７に表示させることもできる。
例えば、ビデオカメラのレンズをワイド若しくは魚眼レンズに設定するとともに、汎用の外部機器２としてＤＶＤプレーヤを接続し、ビデオカメラからの画像をディスプレイ１７の画面の端の方に小さく表示すれば、操作者は、自分の周囲の様子をモニタしつつ映画鑑賞することができる。
また、ビデオカメラのレンズを通常のレンズ（ズームレンズなど）に設定するとともに、そのビデオカメラで操作者の手元を映し、ビデオカメラからの出力信号をディスプレイ１７の画面に表示すれば、操作者は、手元に置いた本のページをめくりながら、自分の首を好きな方向に向けたまま読書をすることができる。よって、仰向けで寝たまま本を持ち上げずに読書することも可能である。
以上のように、本実施形態の顔面追従型画像表示システムは、ウエアラブルディスプレイやウエアラブルコンピュータを超越した本格的な情報入力装置の役割を果たしている。
よって、ディスプレイの性能（ここでは、広視野角）を有効に利用する新感覚のゲームソフトウエア、画像サイズの大きいＤＶＤ、画像サイズの大きいビデオテープ、バーチャルリアリティなどの最新ソフトウエアの発展が促される。
また、最新システムでなくとも、現行の卓上コンピュータやテレビジョン受像機などの床上設置型の汎用機器と、映画館の椅子、飛行機の椅子、リラクゼーション用椅子などの家具とを組み合わせれば、不快感から操作者を開放することができる。
また、椅子の代わりにベッド（介護用ベッドなど）を組み合わせれば、ベッドに寝た状態の人も簡単に情報入力することができ、そのコミュニケーション能力を存分に発揮することができる。
その他、本実施形態の顔面追従型画像表示システムの応用範囲としては、機密性の高い情報の個人向け表示システム、遠隔操作可能な大画面ディスプレイ、大画面上のディジタル新聞受信システム、教育教材、アミューズメント姿勢でのディスプレイゲームなどの市場が挙げられる。
本実施形態の顔面追従型画像表示システムの全体構成図である（操作者が座った姿勢をとった場合）。 本実施形態の顔面追従型画像表示システムの全体構成図である（操作者が寝た姿勢をとった場合）。 ディスプレイ１７の位置や姿勢の変化を説明する図である。 ディスプレイ１７内の光学系の構成図である。 ディスプレイ１７における表示画像を説明する図である。 ディスプレイ１７における表示画像の別の例を説明する図である。 ディスプレイ１７内の光学系の概略断面図である。 指先検出装置１２の構成、及び指先検出装置１２と指クリップ１１1，１１2，１１3，１１4，１１5との関係を示す図である。 反射素子基板１１Ｂ1，１１Ｂ2，１１Ｂ3，１１Ｂ4，１１Ｂ5の光学系部分を示す図である。 反射素子基板１１Ｂ1，１１Ｂ2，１１Ｂ3，１１Ｂ4，１１Ｂ5の光学系部分の別の状態を示す図である。 コーナーキューブ群の像の各状態を示す図である。 指先検出装置１２’（指先検出装置１２の変形例）の構成図である。 指先検出装置１２”（指先検出装置１２の別の変形例）の構成，及びコーナーキューブ１１Ｃ’（コーナーキューブ１１Ｃの変形例）の構成を示す図である。 コーナーキューブ１１Ｃ’の像の例を示す図である。 反射素子基板１１Ｂ’を説明する図である。 指クリップ１１1，１１2，１１3，１１4，１１5の機構部分を示す概略断面図である。 指クリップ１１1，１１2，１１3，１１4，１１5のストッパー機構を示す概略断面図である。 指クリップ１１1，１１2，１１3，１１4，１１5の収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5の形成箇所を示す図である。 収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5を示す概略断面図である。 収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5の動作を説明する概略断面図である（収納時）。 収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5の動作を説明する概略断面図である（装着時）。 収納室１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5の動作を説明する概略断面図である（離脱時）。 主制御部１３の実行する主な処理を説明する図である（ディストーション補正）。 主制御部１３の実行する主な処理を説明する図である（手の輪郭のイメージの表示）。 主制御部の実行する主な処理を説明する図である（色の表示切り替え）。 主制御部１３によるコーナーキューブ１１Ｃの像の認識方法、指圧の有無の認識方法、指の種類の認識方法を説明する図である。 主制御部１３によるその他の処理を説明する図である（ポインタイメージの表示）。 コーナーキューブ１１Ｃの配置パターンの変形例を説明する図である。（ａ），（ｂ）は、反射素子基板１１Ｂを示す図、（ａ’），（ｂ’）は、二次元受光素子１２ｄ上に形成される像を示す図、（ａ），（ａ’）は、指圧の非印加時の様子、（ｂ），（ｂ’）は、指圧の印加時の様子である。 シャッタ部材１１Ｓの形状の変形例を説明する図である。 コーナーキューブ１１Ｃの形状の変形例を説明する図である。 コーナーキューブ１１Ｃの配置姿勢の変形例を説明する図である。 姿勢の異なる第１コーナーキューブ１１Ｃ−１と第２コーナーキューブ１１Ｃ−２とを併用したことによる効果を説明する図である。 反射素子基板１１Ｂを逆Ｖ字状にした例を示す図である。 反射素子基板１１Ｂを逆Ｖ字状にした例の効果を説明する図である。 １枚の反射素子基板１１Ｂ上に互いに姿勢の異なる第１コーナーキューブ１１Ｃ−１と第２コーナーキューブ１１Ｃ−２との双方を設けた例を説明する図である。
符号の説明
１１1，１１2，１１3，１１4，１１5 指クリップ
１１ｒ 反射面
１１ｒ’反射型回折光学面
１２，１２’，１２” 指先検出装置
１７ ディスプレイ
１４ ポール
１５、１５’ アーム
１６ カウンターバランス部
２ 汎用の外部機器
１３ 主制御部
１７Ｈ ヘッドホン
１７ｆ，１７ｆ’ 液晶表示素子
１７ａＲ，１７ａＬ 接眼光学系
１７ｂＲ，１７ｂＬ，１７ｃ，１７ｃ’，１７ｄ，１７ｄ’．１７ｅ，１７ｅ’ レンズ群
１７ｐ プリズム
１２ａ，１２ａ’，１２ａ” 照明光学系
１２ｂ ハーフミラー
１２ｅ 絞り
１２ｆ 色フィルタ
１２ｃ，１２ｃ’ 投影レンズ
１２ｈ 射出窓
１２ｄ 二次元受光素子
１２ｉ 回路
１１Ｂ1，１１Ｂ2，１１Ｂ3，１１Ｂ4，１１Ｂ5，１１Ｂ’ 反射素子基板
１１Ｃ，１１Ｃ’ コーナーキューブ
１１Ｓ シャッタ部材
１１ａ4 駆動架台１１ａ4
１１ａ5 接触板
１１ａ6，１１ａ1 バネ
１１ａ8 バネ抑え部
１１ａ2 滑車
１１ａ3 連結子
１１ｃ ゴム部
１１ｄ1 連結棒
１１ｄ2 連結棒
１１ｄ4 ストッパー棒
１１ｄ6 鍵部
１１ｄ7，１１ｄ5 回動軸
１１ｄ3，１１ｄ9 バネ
１７ＲＬ，１７Ｒ1，１７Ｒ2，１７Ｒ3，１７Ｒ4，１７Ｒ5，１７Ｌ1，１７Ｌ2，１７Ｌ3，１７Ｌ4，１７Ｌ5 収納室
２０ 壁
２１ 駆動室
２３ テコ型押さえ部材
２２ 解除部材
２６，２７ バネ
２８ ガイド部材
２４ 回動軸
３０ センサ
Ｌ１，Ｌ２，Ｌ３，Ｌ４，Ｌ５ 間隔
Ｌ1，Ｌ2，Ｌ3，Ｌ4，Ｌ5 ライン
Ｓ1，Ｓ2，Ｓ3，Ｓ4，Ｓ5 出力信号
ＸＹ１ 取得画像上の座標系
ＸＹ２ 表示画像上の座標系

Claims (27)

  1. 再帰反射性を有する単数又は複数の反射部材が設けられた反射部と、
    前記反射部を操作者の指に対し装着する装着具と、
    前記指の指先に印加された指圧に応じて前記反射部の反射率分布を変化させる変化機構と
    を備えたことを特徴とする情報入力器。
  2. 請求項１に記載の情報入力器において、
    前記変化機構は、
    前記反射部の少なくとも一部を遮蔽／開放する
    ことを特徴とする情報入力器。
  3. 請求項２に記載の情報入力器において、
    前記反射部には、
    複数の再帰反射性を有する反射部材が並べて設けられており、
    前記変化機構は、
    前記複数の再帰反射性を有する反射部材のうち少なくとも１つを遮蔽／開放する
    ことを特徴とする情報入力器。
  4. 請求項３に記載の情報入力器において、
    前記反射部には、
    ３以上の複数の再帰反射性を有する反射部材が並べて設けられており、
    前記変化機構は、
    前記複数の再帰反射性を有する反射部材のうち２以上の再帰反射性を有する反射部材によって挟まれた少なくとも１つの再帰反射性を有する反射部材を遮蔽／開放する
    ことを特徴とする情報入力器。
  5. 請求項１〜請求項４の何れか一項に記載の情報入力器において、
    前記反射部材を構成する各反射面のうち少なくとも１つは、
    入射光の波面の形状に対して反射光の波面の形状を変形させる反射型回折光学面である
    ことを特徴とする情報入力器。
  6. 請求項１〜請求項５の何れか一項に記載の情報入力器において、
    前記反射部材は、
    前記指の種類を示す識別マークを兼ねている
    ことを特徴とする情報入力器。
  7. 請求項１〜請求項６の何れか一項に記載の情報入力器において、
    前記反射部には、
    互いに姿勢の異なる少なくとも２種類のコーナー状反射面が設けられている
    ことを特徴とする情報入力器。
  8. 請求項７に記載の情報入力器において、
    前記反射部には、
    配置角度の差θが０°＜θ＜９０°の式を満たす少なくとも２種類の前記コーナー状反射面が設けられている
    ことを特徴とする情報入力器。
  9. 請求項１〜請求項８の何れか一項に記載の情報入力器において、
    前記装着具は、
    前記反射部を前記操作者の指に対し固定するストッパー機構と、前記反射部を前記操作者の指から取り外す取り外し機構機構とを有する
    ことを特徴とする情報入力器。
  10. 請求項９に記載の情報入力器を収納する収納室と、
    前記情報入力器の前記ストッパー機構を駆動する手段と、
    前記情報入力器の前記開放機構を駆動する手段と
    を備えたことを特徴とする収納装置。
  11. 操作者の複数の各指に個別に装着される請求項１〜請求項９の何れか一項に記載の複数の情報入力器を個別に収納する収納室と、
    前記複数の情報入力器の収納の有無を個別に検出する検出手段と
    を備えたことを特徴とする収納装置。
  12. 顔面追従型ディスプレイに設けられている
    ことを特徴とする請求項１０又は請求項１１に記載の収納装置。
  13. 請求項１〜請求項９の何れか一項に記載の情報入力器を装着した操作者の手元を照明光で照明する照明光学系と、
    前記操作者の手元から前記照明光の反射光を導光して前記反射部の像を所定位置に形成する光学系と、
    前記所定位置の画像を撮像する二次元受光素子と
    を備えたことを特徴とする情報入力装置。
  14. 請求項１３に記載の情報入力装置に適用され、
    前記二次元受光素子が取得した画像上の前記反射部の像の位置及び輝度分布に基づきその二次元受光素子上の座標で前記操作者の指先動作を認識する制御部を備えた
    ことを特徴とする情報処理装置。
  15. 請求項１４に記載の情報処理装置において、
    前記制御部は、
    前記指先動作と共に、前記指の種類を認識する
    ことを特徴とする情報処理装置。
  16. 請求項１４又は請求項１５に記載の情報処理装置において、
    前記制御部は、少なくとも、
    前記指先の位置の認識をしてから、前記指圧の有無の認識を行うことにより前記指先動作の認識を行う
    ことを特徴とする情報処理装置。
  17. 請求項１４〜請求項１６の何れか一項に記載の情報処理装置において、
    前記制御部は、
    キーボードデバイスのキートップ配列を示すキーボードイメージを外部又は内部のディスプレイに対し表示すると共に、前記二次元受光素子上の前記指先の位置を前記ディスプレイ上の座標に座標変換しつつ前記指先動作を示す指先イメージをそのディスプレイ上にリアルタイムで表示し、
    前記操作者から所定の合図がなされるまでの期間は、前記指先の位置を前記ディスプレイ上の基準座標に変換する座標変換を採用し、
    前記操作者から所定の合図がなされてからは、その合図がなされたタイミングにおける前記指先の位置を前記ディスプレイ上の前記基準座標に変換する座標変換を採用する
    ことを特徴とする情報処理装置。
  18. 請求項１７に記載の情報処理装置において、
    前記制御部は、
    前記情報入力装置を介して前記操作者から前記所定の合図を受け付ける
    ことを特徴とする情報処理装置。
  19. 請求項１７又は請求項１８に記載の情報処理装置において、
    前記制御部は、
    前記キーボードイメージのうち前記指先イメージと少なくとも位置が重畳するキーを、他のキーとは異なる色で表示する
    ことを特徴とする情報処理装置。
  20. 請求項１９に記載の情報処理装置において、
    前記制御部は、
    前記キーの表示色を、前記指先に指圧が印加されたタイミングで変化させる
    ことを特徴とする情報処理装置。
  21. 請求項１７〜請求項２０の何れか一項に記載の情報処理装置において、
    前記ディスプレイが表示する表示領域には、前記キーボードイメージが表示されるべき特殊フィールドの他に、外部から入力された画像及び／又は文字が表示されるべき一般フィールドが確保されており、
    前記制御部は、
    前記指先イメージが前記一般フィールドに表示されるときには、
    前記指先イメージに加え又はその指先イメージに代えて、その指先の位置にポインティングデバイスのポインタイメージを表示する
    ことを特徴とする情報処理装置。
  22. 請求項１７〜請求項２１の何れか一項に記載の情報処理装置において、
    前記制御部は、
    複数の指先の前記指先動作を認識した場合、
    前記操作者から所定の合図がなされるまでの期間は、特定の指先の位置が前記ディスプレイ上の基準座標に変換される座標変換を各指先の位置の座標変換に採用し、
    前記操作者から所定の合図がなされてからは、その合図がなされたタイミングにおける前記特定の指先の位置が前記ディスプレイ上の前記基準座標に変換される座標変換を各指先の位置の座標変換に採用する
    ことを特徴とする情報処理装置。
  23. 請求項１７〜請求項２２の何れか一項に記載の情報処理装置において、
    前記制御部は、
    左右の手の前記指先動作を認識した場合、
    前記座標変換を、左右の手について独立して行う
    ことを特徴とする情報処理装置。
  24. 操作者の左右の指動作の情報を取得する情報入力装置に適用され、かつその情報を処理する制御部を備えた情報処理装置であって、
    前記制御部は、
    キーボードデバイスのキートップ配列を示すキーボードイメージを外部又は内部のディスプレイに対し表示すると共に、前記操作者の左右の手元上の各指先の位置を前記ディスプレイ上の座標に座標変換しつつ前記指先動作を示す指先イメージをそのディスプレイ上にリアルタイムで表示し、
    前記操作者から所定の合図がなされるまでの期間は、左の特定の指先の位置が前記ディスプレイ上の左の基準座標に変換される座標変換を前記左の各指先の位置の座標変換に採用すると共に、右の特定の指先の位置が前記ディスプレイ上の右の基準座標に変換される座標変換を前記右の各指先の位置の座標変換に採用し、
    前記操作者から所定の合図がなされてからは、その合図がなされたタイミングにおける前記左の特定の指先の位置が前記ディスプレイ上の前記左の基準座標に変換される座標変換を前記左の各指先の位置の座標変換に採用すると共に、その合図がなされたタイミングにおける前記右の特定の指先の位置が前記ディスプレイ上の前記右の基準座標に変換される座標変換を前記右の各指先の位置の座標変換に採用する
    ことを特徴とする情報処理装置。
  25. 操作者の複数の指に個別に装着される複数の情報入力器を個別に収納する収納室と、
    前記複数の情報入力器の収納の有無を個別に検出する検出手段と
    を備えたことを特徴とする収納装置。
  26. 請求項２５に記載の収納装置において、
    前記情報入力器を前記操作者の指に対し装着する手段と、
    前記情報入力器を前記操作者の指から離脱する手段と
    を更に備えたことを特徴とする収納装置。
  27. 顔面追従型ディスプレイに設けられている
    ことを特徴とする請求項２５又は請求項２６に記載の収納装置。
JP2004169074A 2003-11-25 2004-06-07 情報入力器、収納装置、情報入力装置、及び情報処理装置 Expired - Fee Related JP4611667B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2004169074A JP4611667B2 (ja) 2003-11-25 2004-06-07 情報入力器、収納装置、情報入力装置、及び情報処理装置
PCT/JP2004/015474 WO2005052778A1 (ja) 2003-11-25 2004-10-20 情報入力器、収納装置、情報入力装置、及び情報処理装置
AT04792640T ATE554439T1 (de) 2003-11-25 2004-10-20 Informationseingabeeinheit, speichereinheit, informationseingabeeinrichtung und informationsverarbeitungseinrichtung
US10/580,590 US7688305B2 (en) 2003-11-25 2004-10-20 Information inputting tool, storage device, information inputting device, and information processing equipment
EP04792640A EP1698964B1 (en) 2003-11-25 2004-10-20 Information input unit, storing unit, information input device, and information processing device
TW093136234A TWI272515B (en) 2003-11-25 2004-11-25 Information input unit, storing unit, information input device, and information processing device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2003394444 2003-11-25
JP2004169074A JP4611667B2 (ja) 2003-11-25 2004-06-07 情報入力器、収納装置、情報入力装置、及び情報処理装置

Publications (2)

Publication Number Publication Date
JP2005182744A JP2005182744A (ja) 2005-07-07
JP4611667B2 true JP4611667B2 (ja) 2011-01-12

Family

ID=34635601

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004169074A Expired - Fee Related JP4611667B2 (ja) 2003-11-25 2004-06-07 情報入力器、収納装置、情報入力装置、及び情報処理装置

Country Status (6)

Country Link
US (1) US7688305B2 (ja)
EP (1) EP1698964B1 (ja)
JP (1) JP4611667B2 (ja)
AT (1) ATE554439T1 (ja)
TW (1) TWI272515B (ja)
WO (1) WO2005052778A1 (ja)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4029410B2 (ja) * 2006-05-05 2008-01-09 治幸 岩田 指先装着センサによる入力装置
TWI343031B (en) * 2007-07-16 2011-06-01 Ind Tech Res Inst Method and device for keyboard instrument learning
JP5254311B2 (ja) * 2008-03-14 2013-08-07 シャープ株式会社 液晶表示装置
WO2011149431A1 (en) * 2010-05-24 2011-12-01 Kanit Bodipat An apparatus for a virtual input device for a mobile computing device and the method therein
TWI423287B (zh) * 2010-07-16 2014-01-11 Primax Electronics Ltd 壓力感測式發光鍵盤
US20130207900A1 (en) * 2012-02-09 2013-08-15 Hooshmand Harooni Fingernail Mounted Device To Allow Typing Input On Touch Sensitive Computer Or Mobile Device Screens
TWM452383U (zh) * 2012-07-03 2013-05-01 Myson Century Inc 觸控按鍵及圖標顯示裝置
US9262940B2 (en) * 2013-11-28 2016-02-16 Shlomo Michael Farber Musical notation interface for the visually impaired
US9715286B2 (en) 2014-01-28 2017-07-25 Solid Art Labs, Inc. Hand-controllable signal-generating devices and systems
WO2016115976A1 (en) * 2015-01-21 2016-07-28 Kong Liang Smart wearable input apparatus
GB2534386A (en) * 2015-01-21 2016-07-27 Kong Liang Smart wearable input apparatus
GB201514721D0 (en) * 2015-08-19 2015-09-30 Morgan Innovation & Technology Ltd Haptic stimulation apparatus
US10216272B2 (en) * 2016-08-25 2019-02-26 Facebook Technologies, Llc Strain measurement ring
US10394342B2 (en) * 2017-09-27 2019-08-27 Facebook Technologies, Llc Apparatuses, systems, and methods for representing user interactions with real-world input devices in a virtual space
US11379051B2 (en) * 2018-02-09 2022-07-05 Vspatial, Inc. Directionally oriented interfaces and systems and methods for the same
FR3099359B1 (fr) * 2019-07-29 2021-12-10 Centre Nat Rech Scient Appareil de mesure d’une force exercée par la face palmaire de la phalange d’un doigt

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS585145A (ja) 1981-06-27 1983-01-12 Suntory Ltd トウモロコシの胚芽分離法
JPS585145U (ja) * 1981-06-30 1983-01-13 日本電気株式会社 色彩図形情報入力装置
JPS6324645A (ja) 1986-07-17 1988-02-02 Toshiba Corp 半導体装置の製造方法
JPS6324645U (ja) * 1986-07-31 1988-02-18
DE69204045T2 (de) * 1992-02-07 1996-04-18 Ibm Verfahren und Vorrichtung zum optischen Eingang von Befehlen oder Daten.
JP2689879B2 (ja) 1993-12-27 1997-12-10 日本電気株式会社 仮想キーボード
JP3260240B2 (ja) 1994-05-31 2002-02-25 株式会社ワコム 情報入力方法およびその装置
US5581484A (en) * 1994-06-27 1996-12-03 Prince; Kevin R. Finger mounted computer input device
KR0144191B1 (ko) 1995-07-10 1998-08-17 구자홍 적외선을 이용한 포인트형 무선조정장치
JPH1153153A (ja) 1997-06-06 1999-02-26 Yuusuke Nonomura 情報入力装置とその方法
US20020036617A1 (en) * 1998-08-21 2002-03-28 Timothy R. Pryor Novel man machine interfaces and applications
WO1999042800A1 (en) * 1998-02-20 1999-08-26 Massachusetts Institute Of Technology Finger touch sensors and virtual switch panels
JPH11312033A (ja) * 1998-04-28 1999-11-09 Sony Corp 眼鏡型画像表示装置
US6614422B1 (en) 1999-11-04 2003-09-02 Canesta, Inc. Method and apparatus for entering data using a virtual input device
GB9912784D0 (en) * 1999-06-02 1999-08-04 White Peter M Device and method for human interaction with a computer through a lifesize image of the user within a three dimensional setting
JP2003528382A (ja) * 2000-03-21 2003-09-24 レナード ライフェル マルチユーザのための逆反射体によるデータ入力
EP1253509A1 (en) 2001-04-27 2002-10-30 Jacques Andre Device for controlling a three-dimensional movement
US7161579B2 (en) * 2002-07-18 2007-01-09 Sony Computer Entertainment Inc. Hand-held computer interactive device

Also Published As

Publication number Publication date
EP1698964A4 (en) 2010-03-31
US20070103430A1 (en) 2007-05-10
EP1698964B1 (en) 2012-04-18
TW200535676A (en) 2005-11-01
ATE554439T1 (de) 2012-05-15
EP1698964A1 (en) 2006-09-06
WO2005052778A1 (ja) 2005-06-09
JP2005182744A (ja) 2005-07-07
TWI272515B (en) 2007-02-01
US7688305B2 (en) 2010-03-30

Similar Documents

Publication Publication Date Title
JP4611667B2 (ja) 情報入力器、収納装置、情報入力装置、及び情報処理装置
AU2020250245B2 (en) Compact eye-tracked head-mounted display
JP6393367B2 (ja) 追従表示システム、追従表示プログラム、および追従表示方法、ならびにそれらを用いたウェアラブル機器、ウェアラブル機器用の追従表示プログラム、およびウェアラブル機器の操作方法
US7199934B2 (en) Head-mounted display apparatus
CN104898406A (zh) 电子设备和采集控制方法
JP6554948B2 (ja) 表示装置、表示装置の制御方法、及び、プログラム
US11360587B1 (en) Deployment systems for computer system finger devices
US11630520B1 (en) Systems and methods for sensing gestures via vibration-sensitive wearables donned by users of artificial reality systems
JPH09179062A (ja) コンピュータシステム
US20240094882A1 (en) Gestures for selection refinement in a three-dimensional environment
JP2006155244A (ja) 情報表示装置
JP2012194626A (ja) 表示装置
JPH04210390A (ja) ロボットハンドの遠隔操作システム
JP6740613B2 (ja) 表示装置、表示装置の制御方法、及び、プログラム
US11204504B1 (en) Head-mounted display assemblies and related methods for interpupillary distance adjustments
WO2020189595A1 (ja) 頸掛式ウェアラブルコンピュータ
CN116547639A (zh) 物件互动的系统与方法
US20240103678A1 (en) Devices, methods, and graphical user interfaces for interacting with extended reality experiences
US20240103684A1 (en) Methods for displaying objects relative to virtual surfaces
US20240103616A1 (en) User interfaces for gaze tracking enrollment
US20240118746A1 (en) User interfaces for gaze tracking enrollment
WO2022064881A1 (ja) 情報処理装置、情報処理方法およびプログラム
LaViola Jr Input and output devices
JP2018092206A (ja) 頭部装着型表示装置、プログラム、及び頭部装着型表示装置の制御方法
WO2024064278A1 (en) Devices, methods, and graphical user interfaces for interacting with extended reality experiences

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20050404

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20050404

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070219

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20071002

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071127

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20071218

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20080117

RD14 Notification of resignation of power of sub attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7434

Effective date: 20080307

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20101014

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131022

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees