WO2009130985A1 - 情報入力システム - Google Patents
情報入力システム Download PDFInfo
- Publication number
- WO2009130985A1 WO2009130985A1 PCT/JP2009/056952 JP2009056952W WO2009130985A1 WO 2009130985 A1 WO2009130985 A1 WO 2009130985A1 JP 2009056952 W JP2009056952 W JP 2009056952W WO 2009130985 A1 WO2009130985 A1 WO 2009130985A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- information
- key
- image
- information input
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
- G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
- G06F21/36—User authentication by graphic or iconic representation
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/70—Protecting specific internal or peripheral components, in which the protection of a component leads to protection of the entire computer
- G06F21/82—Protecting input, output or interconnection devices
- G06F21/83—Protecting input, output or interconnection devices input devices, e.g. keyboards, mice or controllers thereof
Definitions
- the present invention relates to an information input system, and more particularly to an information input system including a head-mounted image display device.
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Computer Security & Cryptography (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Human Computer Interaction (AREA)
- Input From Keyboards Or The Like (AREA)
- Image Processing (AREA)
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本発明は、秘匿情報を漏洩させることなく、確実に入力することが可能な情報入力システムを提供する。該情報入力システムは、画像データに基づき画像を表示し、外界をシースルー可能な表示ユニットを有する頭部装着式映像表示装置と、被操作装置に情報を入力し、それぞれのキーに対応する情報を示す表示を有さない複数のキーを備えた情報入力手段と、情報入力手段のそれぞれのキーに対応する情報の割振りを設定するキー割振り設定部および該キー割振り設定部で割振られた情報のキー割振りを示す画像データを生成する画像データ生成部を有するキー情報割振り装置と、を備えた情報入力システムであって、頭部装着式映像表示装置は、画像データ生成部で生成された画像データに基づいたキー割振り画像を生成し、該キー割振り画像を表示ユニットを通して観察できるシースルー画像に重ね合わせて表示する。
Description
本発明は、情報入力システムに関し、特に頭部装着式映像表示装置を備えた情報入力システムに関する。
従来、観察者の頭部や顔面に着脱自在に装着され、小型のCRTや液晶表示素子等の映像表示素子から得られる映像(以下、画像とも称する。)を、接眼光学系によって観察者の眼球に直接投影させることで、恰も該映像が空中に拡大投影されているかのような虚像の観察を可能にした頭部装着式映像表示装置、すなわちHMD(Head Mount Display)が知られている。
HMDは、DVDやビデオ等のコンテンツ映像の観賞用や、産業機器若しくは医療機器等の遠隔操作用としての表示装置として利用され、また、近年では、セキュリティの確保を目的とした情報入力装置への応用が検討され、その用途は多岐に渡っている。
セキュリティ用としては、例えば、HMDを装着した使用者が、HMDの画面に表示された仮想入力デバイスに対して入力操作することにより、入力情報の漏洩を防止する仮想入力装置が知られている(特許文献1参照)。
ところで、特許文献1に開示されている仮想入力装置は、例えば、キーボードのような入力デバイスを示す仮想の入力デバイスの画像を画面に表示している為、該仮想入力デバイスに対する使用者の指による入力操作を検出する必要がある。すなわち、仮想空間において、仮想入力デバイスを表示し、その空間座標における指の座標を精度よく検出し、検出した座標に基づき使用者がどのような入力操作を行ったかを判断する必要がある。
ここで、指の動きを検出する方法としては、以下の方法が用いられる。
1.指先にセンサを装着し、センサの出力に基づき指の動きを検出する。
2.電子カメラを用いて撮影された画像データに基づき指を検出し、その動きを検出する。
しかしながら、前記1項の場合は、部品点数の増加による装置の複雑化と高価格化を招き、さらに、使用者は、指先にセンサを装着する必要がある為、軽便性が阻害されるといった問題がある。また、前記2項の場合は、画像データより指の動きを精度よく検出する必要がある為、誤検出の恐れがある。
また、特許文献1に開示されている仮想入力装置においては、入力デバイスのキー割振りに関し記載されていないが、入力デバイスとしてキーボードを用いた場合、通常のキー割振りは、101、106等の規格により定まっている為、指の動きによりどのような入力操作を行ったかを読取られるといった問題がある。
本発明は、上記課題を鑑みてなされたもので、装置の複雑化と高価格化を招くことなく、秘匿情報を漏洩させることなく、確実に入力することが可能な情報入力システムを提供することを目的とする。
上記目的は、下記の1から5の何れか1項に記載の発明によって達成される。
1.画像データに基づき画像を表示し、外界をシースルー可能な表示ユニットを有する頭部装着式映像表示装置と、
被操作装置に情報を入力し、それぞれのキーに対応する前記情報を示す表示を有さない複数のキーを備えた情報入力手段と、
前記情報入力手段のそれぞれのキーに対応する前記情報の割振りを設定するキー割振り設定部および該キー割振り設定部で割振られた前記情報のキー割振りを示す画像データを生成する画像データ生成部を有するキー情報割振り装置と、
を備えた情報入力システムであって、
前記頭部装着式映像表示装置は、前記画像データ生成部で生成された前記画像データに基づいたキー割振り画像を生成し、該キー割振り画像を前記表示ユニットを通して観察できるシースルー画像に重ね合わせて表示することを特徴とする情報入力システム。
被操作装置に情報を入力し、それぞれのキーに対応する前記情報を示す表示を有さない複数のキーを備えた情報入力手段と、
前記情報入力手段のそれぞれのキーに対応する前記情報の割振りを設定するキー割振り設定部および該キー割振り設定部で割振られた前記情報のキー割振りを示す画像データを生成する画像データ生成部を有するキー情報割振り装置と、
を備えた情報入力システムであって、
前記頭部装着式映像表示装置は、前記画像データ生成部で生成された前記画像データに基づいたキー割振り画像を生成し、該キー割振り画像を前記表示ユニットを通して観察できるシースルー画像に重ね合わせて表示することを特徴とする情報入力システム。
2.前記頭部装着式映像表示装置は、前記情報入力手段を含む外界を撮影する電子カメラを有し、
前記キー情報割振り装置は、前記電子カメラで撮影された画像における前記情報入力手段の位置を検出する位置検出部を有し、
前記頭部装着式映像表示装置は、前記位置検出部で検出された前記電子カメラの画像における前記情報入力手段の位置に対応する前記表示ユニットの画面の位置に前記キー割振り画像を表示することを特徴とする前記第1項に記載の情報入力システム。
前記キー情報割振り装置は、前記電子カメラで撮影された画像における前記情報入力手段の位置を検出する位置検出部を有し、
前記頭部装着式映像表示装置は、前記位置検出部で検出された前記電子カメラの画像における前記情報入力手段の位置に対応する前記表示ユニットの画面の位置に前記キー割振り画像を表示することを特徴とする前記第1項に記載の情報入力システム。
3.前記キー割振り設定部は、前記情報入力手段により一連の情報が入力される度に、該情報入力手段のそれぞれのキーに対応する前記情報の割振りの設定を変更することを特徴とする前記第1項または第2項に記載の情報入力システム。
4.前記キー割振り設定部は、前記情報入力手段のそれぞれのキーに対応する前記情報の割振りをランダムに設定することを特徴とする前記第1項から第3項の何れか1項に記載の情報入力システム。
5.前記情報入力手段は、キーボードまたはタッチパネルであることを特徴とする前記第1項から第4項の何れか1項に記載の情報入力システム。
本発明によれば、HMDは、キー情報割振り装置の画像データ生成部で生成された情報表示のない情報入力手段のそれぞれのキーに対応する情報のキー割振りを示す画像データに基づいたキー割振り画像を生成し、該キー割振り画像を表示ユニットを通して観察できるシースルー画像に重ね合わせて表示する構成とした。
すなわち、情報入力手段には、それぞれのキーに対応する情報を示す表示がなく、HMDを装着した使用者のみが、HMDの表示ユニットに表示されるキー割振り画像によりキー割振りを知ることができるので、入力情報の漏洩を防止することができる。また、被操作装置への情報の入力は、例えばキーボードやタッチパネル等の現実の情報入力手段を用いて行われるので、確実に情報を入力することができる。
以下図面に基づいて、本発明に係る情報入力システムの実施の形態を説明する。尚、本発明を図示の実施の形態に基づいて説明するが、本発明は該実施の形態に限られない。
最初に、情報入力システム1の構成を図1を用いて説明する。図1は、本発明の実施形態に係る情報入力システム1の全体構成の概要を示す模式図である。
情報入力システム1は、図1に示すように、本発明における頭部装着式映像表示装置に該当するHMD2、キー情報割振り装置5、及び本発明における被操作装置に該当するATM装置7に設けられた本発明における情報入力手段として機能するキーボード71等から構成され、それぞれの装置は、有線または無線で接続されている。尚、被操作装置としては、ATM装置7に限定されることなくキーボード71により情報が入力される装置であればよい。また、キーボード71は、タイプフェースを押下するという入力操作を行うことにより、例えば暗証番号等の情報(文字、数字、記号等)を入力する入力デバイスであり、それぞれのキーに対応する情報を示す表示を有していない。また、情報入力手段としては、キーボード71に限定されることなくタッチパネルや操作ボタン等の入力デバイスであってもよい。
このような構成の情報入力システム1は、HMD2の後述の表示ユニット25に、キー情報割振り装置5から提供された情報表示のないキーボード71のそれぞれのキーに対応する情報の割振りを示すキー割振り画像を表示させ、HMD2を装着した使用者が、かかるキー割振り画像を見ながら情報表示のないキーボード71を操作してATM装置7に例えば暗証番号等の情報を入力するものである。
次に、HMD2の構成を図2を用いて説明する。図2は、本発明の実施形態に係るHMD2の外観を示す斜視図である。
HMD2は、図2に示すように、テンプル21R、21L、ブリッジ22、鼻当て23R、23L、透明基板24R、24L、表示ユニット25(LCD表示部26、接眼光学系27)、カメラユニット28、イヤホン29R、29L、及び制御ユニット31等を有している。
HMD2は、カメラユニット28で撮影された画像やキー情報割振り装置5から提供された画像を表示ユニット25に設けられたLCD表示部26に表示させ、該LCD表示部26から得られた画像を、接眼光学系27によって装着者(以下、使用者とも称する。)の眼球に直接投影させることで、恰も該画像が空中に拡大投影されているかのような虚像の観察を可能にしている。
テンプル21R、21Lは、可撓性を有する弾性材等により構成された長尺状の部材であり、装着者の耳や側頭部に掛止され、HMD2の装着者に対する頭部への保持及び装着位置の調整を行う為のものである。尚、テンプル21R、21Lは、回動部21Ra、21Laにおいて矢印P、Q方向に回動可能に構成されており、HMD2を使用しない場合には、テンプル21R、21Lを矢印P、Q方向に回動させて透明基板24R、24Lに沿わせることにより、コンパクト化することができる。
ブリッジ22は、HMD2の装着者に対する顔面への保持を行う鼻当て23R、23Lを備え、透明基板24R、24Lの互いに対向する所定位置に架け渡された短尺の棒状部材であり、透明基板24Rと透明基板24Lとを一定の間隙を介した相対位置関係に保持するものである。
透明基板24R、24Lは、一方の眼球に対応した位置にU字型のスペース24Rsを形成する略平板状の透明体である。また、透明基板24Rに囲まれて形成されるU字型のスペース24Rsには、接眼光学系27が嵌め込まれている。
表示ユニット25は、LCD表示部26、及び接眼光学系27等を有し、カメラユニット28で撮影された画像や制御ユニット31に設けられた後述の通信部36を介してキー情報割振り装置5から提供された情報表示のないキーボード71のそれぞれのキーに対応する情報の割振りを示すキー割振り画像等を表示する。
カメラユニット28は、本発明における電子カメラに該当し、図示しない後述のズームレンズ281、CCD(Charge Coupled Device)282、及び画像処理部283等を有し、装着者の周囲の外界情景を撮影するものである。カメラユニット28は、ズームレンズ281によって結像された被写体光学像を、CCD282によって光電変換して画像信号(映像信号)を生成し、生成された画像信号に画像処理部283等により所定の画像処理を施す。また、カメラユニット28の光軸や画角は、装着者の視線や視野と略同一になるように設定されている。
イヤホン29R、29Lは、装着者の耳に挿入され、装着者に音声を提供する。
制御ユニット31は、マイクロコンピュータからなり、電源スイッチ351、操作スイッチ352等を有し、これら各種操作スイッチからの信号、及びキー情報割振り装置5からの制御信号等を受けて、HMD2で行われる表示動作や画像信号処理動作を統括的に制御するものである。
ここで、表示ユニット25の構成を、図3を用いて説明する。図3は、本発明の実施形態に係るHMD2における表示ユニット25の左側面からの側断面図であり、主に表示ユニット25の内部構成を示している。
図3に示すように、表示ユニット25は、筐体261、バックライト262、コリメータレンズ263、LCD(Liquid Crystal Display)264からなるLCD表示部26、及びプリズム271、HOE(Holographic Optical Element)272からなる接眼光学系27等から構成される。
LCD表示部26の筐体261の内部には、バックライト262、コリメータレンズ263、及びLCD264が内蔵された状態で、該筐体261が接眼光学系27のプリズム271の上端部において上斜め前方(図3では右斜め上方向)に突出する態様で取り付けられている。
バックライト262は、所定波長色を含む白色発光ダイオード(LED)からなりLCD264を照明する点光源である。
コリメータレンズ263は、バックライト262のLEDの光を略平行光にしてLCD264に投光するものである。
LCD264は、カメラユニット28で撮影され生成された画像信号(以下、画像データ、映像データとも称する。)に基づく画像やキー情報割振り装置5から提供された情報表示のないキーボード71のそれぞれのキーに対応する情報の割振りを示す画像データに基づくキー割振り画像等を表示するものであり、例えば光透過型の液晶表示パネルである。
プリズム271は、ガラスや透明樹脂等からなる略板状の透明部材であり、LCD264からの光を内部で複数回の反射を行わせるものである。プリズム271の上端部は、LCD264からの光の大部分を内部に採光できるように、上方に向かってより肉厚となるように前面側(接眼面と反対側)が突き出るように楔形状に形成された肉厚部271bが形成されている。
また、プリズム271の下端部には、傾斜面271aが形成されており、プリズム271は、透明基板24Rに形成された傾斜面24Raに対しHOE272を介して接合(例えば接着)されている。また、プリズム271の表裏面は、透明基板24Rの表裏面に対して面一とされている。これにより、プリズム271は、透明基板24Rと一枚の板状に一体化されている。
HOE272は、光学的に軸非対称な所謂自由曲面で構成されて正のパワーを有する体積位相型のホログラム光学素子であり、プリズム271の下端部において所定の傾斜角を有して支持されている。HOE272は、プリズム271により導光された光が照射されることにより、光の干渉現象を用いてホログラム映像を眼球Eに提供する。
以上のような構成を有する表示ユニット25においては、バックライト262のLEDから射出された光は、コリメータレンズ263を通してLCD264を照明し、この照明によりLCD264で生成された像光は、プリズム271内で複数回の全反射を行った後、HOE272により回折し虚像として装着者の眼球Eに導かれる。
さらに、プリズム271は、前方から入射する光を装着者の眼球Eに導くようになっている。これにより、装着者は、外界(前方の被写体)をシースルー可能となり、カメラユニット28で撮影され生成された画像やキー情報割振り装置5から提供された情報表示のないキーボード71のそれぞれのキーに対応する情報の割振りを示すキー割振り画像等を外界(前方の被写体)と重畳して視認することとなる。
次に、情報入力システム1のブロック構成を図4を用いて説明する。図4は、本発明の実施形態に係わる情報入力システム1の要部構成を示すブロック図である。尚、図4では、図1乃至図3に示した部材と同じ部材には同一の番号を付与した。
最初に、キー情報割振り装置5は、コンピュータからなり、画像データ生成部51、キー割振り設定部52、及び位置検出部53等を有する。
キー割振り設定部52は、情報表示のないキーボード71のそれぞれのキーに対応する情報の割振りを設定する。また、キー割振り設定部52は、キーボード71により一連の情報(例えば、4桁の暗証番号として、「1234」)が入力される度に、キーボード71のそれぞれのキーに対応する情報の割振りの設定をランダムに変更する。ランダムな割振り方法としては、例えば、熱雑音による乱数発生を利用する等、通常乱数発生で用いられるアルゴリズムを用いることにより、予測が困難なランダムな割振りを設定することができる。
画像データ生成部51は、キー割振り設定部52で割振られた情報のキー割振りを示す画像データを生成する。
位置検出部53は、HMD2のカメラユニット28で撮影された画像におけるキーボード71の位置(座標)を検出する。位置検出方法としては、予め登録しておいたキーボード71の形状(テンプレート)が、画像の何処に位置するかを検出する周知のテンプレートマッチング等を用いることができる。
キー情報割振り装置5は、画像データ生成部51で生成されたキー割振りを示す画像データ、及び位置検出部53で検出されたキーボード71の座標情報をHMD2に提供する。そして、これらの情報を取得したHMD2は、該情報に基づいたキー割振り画像を生成し、該キー割振り画像を表示ユニット25を通して観察できるシースルー画像に重ね合わせて表示する。尚、HMD2で行われるこれらの表示制御動作の詳細は後述する。
次に、HMD2の要部は、表示ユニット25、カメラユニット28、及び制御ユニット31等から構成される。
表示ユニット25は、LCD表示部26、接眼光学系27から構成され、各部位で行われる動作については前述したので説明は省略する。
カメラユニット28は、ズームレンズ281、CCD(Charge Coupled Device)282、及び画像処理部283等を有する。
CCD282は、R(赤)光、G(緑)光、B(青)光の各色透過フィルタをピクセル単位(画素単位)で市松模様状に配置させたカラーエリア撮像センサで、ズームレンズ281により結像された被写体光像を、R(赤)光、G(緑)光、B(青)光の各色成分の画像信号(各画素単位で受光された画素信号の信号列からなる信号)に光電変換するものである。
画像処理部283は、図示しない例えば、黒レベル補正部、画素補間部、ホワイトバランス制御部、ガンマ補正部、マトリックス演算部、シェーディング補正部、及び画像圧縮部等を有し、CCD282より読み出された画像信号に周知の画像信号処理を施すものである。そして、これらの部位で所定の処理を施された画像信号は、後述の制御ユニット31の画像メモリ33に格納される。
制御ユニット31は、制御部32、画像メモリ33、VRAM(Video Random Access Memory)34、操作部35、及び通信部36等から構成される。
制御部32は、図示しない各制御プログラム等を記憶するROM(Read Only Memory)、演算処理や制御処理等のデータを一時的に格納するRAM(Random Access Memory)、及び制御プログラム等をROMから読み出して実行するCPU(中央演算処理装置)等から構成される。制御部32は、電源スイッチ351及び各種操作スイッチ352等からの信号、及びキー情報割振り装置5からの制御信号等を受けて、HMD2で行われる表示動作や画像信号処理動作を統括的に制御するものである。また、制御部32は、キー情報割振り装置5から提供された前述の情報に基づいたキー割振り画像を生成し、該キー割振り画像を表示ユニット25を通して観察できるシースルー画像に重ね合わせて表示する。尚、制御部32で行われるこれらの表示制御動作の詳細は後述する。
画像メモリ33は、制御部32により画像信号に対する各種処理を行う為の作業領域として用いられる一時メモリである。
VRAM34は、LCD表示部26中のLCD264の画素数に対応した画像信号の記録容量を有し、LCD264に再生表示される画像を構成する画像信号のバッファメモリである。
通信部36は、キー情報割振り装置5との間で交信を行い、画像、音声、及び各種制御信号等の入出力を行う。
このような構成の情報入力システム1において、本発明は、HMD2の表示ユニット25に、キー情報割振り装置5から提供された情報表示のないキーボード71のそれぞれのキーに対応する情報の割振りを示すキー割振り画像を表示させる。そして、HMD2を装着した使用者が、かかるキー割振り画像を見ながらシースルーで観察できる情報表示のないキーボード71を操作してATM装置7に例えば暗証番号等の情報を入力するものである。以下、図5を用いてその詳細を説明する。図5(a)~図5(c)は、HMD2で行われる表示制御動作の流れを説明する模式図である。
まず、図5(a)に示すように、HMD2の表示ユニット25の画面Dには、情報表示のない無地のキーボード71のシースルー画像Sが表示されている。
次に、HMD2の制御部32は、図5(b)に示すように、キー情報割振り装置5から提供された情報表示のないキーボード71のそれぞれのキーに対応する情報の割振りを示す画像データに基づいたキー割振り画像Kを生成する。
そして、HMD2の制御部32は、キー情報割振り装置5から提供されたHMD2のカメラユニット28で撮影された画像におけるキーボード71の位置(座標)に対応する表示ユニットの画面Dの位置にキー割振り画像Kを表示する。すなわち、図5(c)に示すように、キーボード71のシースルー画像Sにキー割振り画像Kが重なって表示される。
これにより、使用者は、無地のキーボード71のそれぞれのキーに恰も情報が表示されているかのように見え、容易に所望の情報を入力することができる。
尚、キーボード71の形状や大きさ、また姿勢等の態様により、キーボード71のシースルー画像Sにキー割振り画像Kを重ねて表示することが困難な場合は、図6に示すように、画面Dの例えば、片隅にキー割振り画像Kを表示するようにしてもよい。
このように本発明の実施形態に係わる情報入力システム1においては、HMD2は、キー情報割振り装置5から提供された情報表示のないキーボード71のそれぞれのキーに対応する情報のキー割振りを示す画像データに基づいたキー割振り画像Kを生成し、該キー割振り画像Kを表示ユニット25を通して観察できるキーボード71のシースルー画像Sに重ね合わせて表示する構成とした。
すなわち、現実のキーボード71には、それぞれのキーに対応する情報を示す表示がなく、HMD2を装着した使用者のみが、HMD2の表示ユニット25に表示されるキー割振り画像Kによりキー割振りを知ることができるので、入力情報の漏洩を防止することができる。また、被操作装置7への情報の入力は、現実のキーボード71を用いて行われるので、確実に情報を入力することができる。
1 情報入力システム
2 頭部装着式映像表示装置(HMD)
21R、21L テンプル
22 ブリッジ
23R、23L 鼻当て
24R、24L 透明基板
25 表示ユニット
26 LCD表示部
261 筐体
262 バックライト
263 コリメータレンズ
264 LCD
27 接眼光学系
271 プリズム
272 HOE
28 カメラユニット
281 ズームレンズ
282 CCD
283 画像処理部
29R、29L イヤホン
31 制御ユニット
32 制御部
33 画像メモリ
34 VRAM
35 操作部
351 電源スイッチ
352 操作スイッチ
36 通信部
5 キー情報割振り装置
51 画像データ生成部
52 キー割振り設定部
53 位置検出部
7 ATM装置
71 キーボード
E 目
2 頭部装着式映像表示装置(HMD)
21R、21L テンプル
22 ブリッジ
23R、23L 鼻当て
24R、24L 透明基板
25 表示ユニット
26 LCD表示部
261 筐体
262 バックライト
263 コリメータレンズ
264 LCD
27 接眼光学系
271 プリズム
272 HOE
28 カメラユニット
281 ズームレンズ
282 CCD
283 画像処理部
29R、29L イヤホン
31 制御ユニット
32 制御部
33 画像メモリ
34 VRAM
35 操作部
351 電源スイッチ
352 操作スイッチ
36 通信部
5 キー情報割振り装置
51 画像データ生成部
52 キー割振り設定部
53 位置検出部
7 ATM装置
71 キーボード
E 目
Claims (5)
- 画像データに基づき画像を表示し、外界をシースルー可能な表示ユニットを有する頭部装着式映像表示装置と、
被操作装置に情報を入力し、それぞれのキーに対応する前記情報を示す表示を有さない複数のキーを備えた情報入力手段と、
前記情報入力手段のそれぞれのキーに対応する前記情報の割振りを設定するキー割振り設定部および該キー割振り設定部で割振られた前記情報のキー割振りを示す画像データを生成する画像データ生成部を有するキー情報割振り装置と、
を備えた情報入力システムであって、
前記頭部装着式映像表示装置は、前記画像データ生成部で生成された前記画像データに基づいたキー割振り画像を生成し、該キー割振り画像を前記表示ユニットを通して観察できるシースルー画像に重ね合わせて表示することを特徴とする情報入力システム。 - 前記頭部装着式映像表示装置は、前記情報入力手段を含む外界を撮影する電子カメラを有し、
前記キー情報割振り装置は、前記電子カメラで撮影された画像における前記情報入力手段の位置を検出する位置検出部を有し、
前記頭部装着式映像表示装置は、前記位置検出部で検出された前記電子カメラの画像における前記情報入力手段の位置に対応する前記表示ユニットの画面の位置に前記キー割振り画像を表示することを特徴とする請求項1に記載の情報入力システム。 - 前記キー割振り設定部は、前記情報入力手段により一連の情報が入力される度に、該情報入力手段のそれぞれのキーに対応する前記情報の割振りの設定を変更することを特徴とする請求項1または2に記載の情報入力システム。
- 前記キー割振り設定部は、前記情報入力手段のそれぞれのキーに対応する前記情報の割振りをランダムに設定することを特徴とする請求項1から3の何れか1項に記載の情報入力システム。
- 前記情報入力手段は、キーボードまたはタッチパネルであることを特徴とする請求項1から4の何れか1項に記載の情報入力システム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2010509127A JP5029759B2 (ja) | 2008-04-23 | 2009-04-03 | 情報入力システム |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2008-112430 | 2008-04-23 | ||
| JP2008112430 | 2008-04-23 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2009130985A1 true WO2009130985A1 (ja) | 2009-10-29 |
Family
ID=41216723
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2009/056952 Ceased WO2009130985A1 (ja) | 2008-04-23 | 2009-04-03 | 情報入力システム |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP5029759B2 (ja) |
| WO (1) | WO2009130985A1 (ja) |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012008745A (ja) * | 2010-06-23 | 2012-01-12 | Softbank Mobile Corp | ユーザインターフェース装置及び電子機器 |
| JP2012088474A (ja) * | 2010-10-19 | 2012-05-10 | Seiko Epson Corp | ヘッドマウントディスプレイ装置 |
| JP2012138011A (ja) * | 2010-12-27 | 2012-07-19 | Ns Solutions Corp | 情報処理システム、情報処理方法及びプログラム |
| KR20140064384A (ko) * | 2012-11-20 | 2014-05-28 | 엘지전자 주식회사 | 헤드 마운트 디스플레이 및 그 제어 방법 |
| JP2014232548A (ja) * | 2014-08-08 | 2014-12-11 | 新日鉄住金ソリューションズ株式会社 | 情報処理システム、情報処理方法及びプログラム |
| GB2520207A (en) * | 2012-07-20 | 2015-05-13 | Licentia Group Ltd | Authentication method and system |
| WO2015093221A1 (ja) * | 2013-12-20 | 2015-06-25 | 株式会社ニコン | 電子機器及びプログラム |
| JP2017182814A (ja) * | 2012-06-29 | 2017-10-05 | ノキア テクノロジーズ オサケユイチア | 環境情報の視覚的複雑性に基づいて情報の提示を修正する方法と装置 |
| CN107239716A (zh) * | 2016-03-27 | 2017-10-10 | 陈金仁 | 防偷窥输入设备与方法 |
| JP2017534961A (ja) * | 2014-09-17 | 2017-11-24 | ジェムアルト エスアー | ユーザの認証方法及び対応端末と認証システム |
| US10592653B2 (en) | 2015-05-27 | 2020-03-17 | Licentia Group Limited | Encoding methods and systems |
| US12393661B2 (en) | 2019-11-12 | 2025-08-19 | Licentia Group Limited | Systems and methods for secure data input and authentication |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006126936A (ja) * | 2004-10-26 | 2006-05-18 | Canon Inc | 画像処理方法、画像処理装置 |
| JP2006163747A (ja) * | 2004-12-07 | 2006-06-22 | Brother Ind Ltd | 入力支援装置 |
| JP2007293413A (ja) * | 2006-04-21 | 2007-11-08 | Canon Inc | 情報処理方法および装置 |
| JP2008077572A (ja) * | 2006-09-25 | 2008-04-03 | Toshiba Corp | 画像表示装置 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH05334334A (ja) * | 1992-06-02 | 1993-12-17 | Mitsubishi Electric Corp | 暗証番号入力装置 |
| JPH06318186A (ja) * | 1993-05-07 | 1994-11-15 | Hitachi Ltd | 暗証入力装置 |
| GB9813190D0 (en) * | 1998-06-18 | 1998-08-19 | Ncr Int Inc | Self-service terminal display screen |
-
2009
- 2009-04-03 WO PCT/JP2009/056952 patent/WO2009130985A1/ja not_active Ceased
- 2009-04-03 JP JP2010509127A patent/JP5029759B2/ja not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006126936A (ja) * | 2004-10-26 | 2006-05-18 | Canon Inc | 画像処理方法、画像処理装置 |
| JP2006163747A (ja) * | 2004-12-07 | 2006-06-22 | Brother Ind Ltd | 入力支援装置 |
| JP2007293413A (ja) * | 2006-04-21 | 2007-11-08 | Canon Inc | 情報処理方法および装置 |
| JP2008077572A (ja) * | 2006-09-25 | 2008-04-03 | Toshiba Corp | 画像表示装置 |
Cited By (28)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012008745A (ja) * | 2010-06-23 | 2012-01-12 | Softbank Mobile Corp | ユーザインターフェース装置及び電子機器 |
| JP2012088474A (ja) * | 2010-10-19 | 2012-05-10 | Seiko Epson Corp | ヘッドマウントディスプレイ装置 |
| JP2012138011A (ja) * | 2010-12-27 | 2012-07-19 | Ns Solutions Corp | 情報処理システム、情報処理方法及びプログラム |
| JP2017182814A (ja) * | 2012-06-29 | 2017-10-05 | ノキア テクノロジーズ オサケユイチア | 環境情報の視覚的複雑性に基づいて情報の提示を修正する方法と装置 |
| US11048784B2 (en) | 2012-07-20 | 2021-06-29 | Licentia Group Limited | Authentication method and system |
| GB2520207A (en) * | 2012-07-20 | 2015-05-13 | Licentia Group Ltd | Authentication method and system |
| US11048783B2 (en) | 2012-07-20 | 2021-06-29 | Licentia Group Limited | Authentication method and system |
| US10565359B2 (en) | 2012-07-20 | 2020-02-18 | Licentia Group Limited | Authentication method and system |
| GB2520207B (en) * | 2012-07-20 | 2016-01-06 | Licentia Group Ltd | Authentication method and system |
| GB2571019B (en) * | 2012-07-20 | 2019-12-04 | Licentia Group Ltd | Authentication method and system |
| AU2016225848B2 (en) * | 2012-07-20 | 2016-09-29 | Licentia Group Limited | Pin verification |
| GB2517879B (en) * | 2012-07-20 | 2019-08-28 | Licentia Group Ltd | Authentication method and system |
| US11194892B2 (en) | 2012-07-20 | 2021-12-07 | Licentia Group Limited | Authentication method and system |
| US9804686B2 (en) | 2012-11-20 | 2017-10-31 | Microsoft Technology Licensing, Llc | Wearable display and method of controlling the wearable display generating a user interface according to that of an external device |
| EP2923232A4 (en) * | 2012-11-20 | 2015-11-25 | Microsoft Technology Licensing Llc | HEAD-MOUNTED DISPLAY AND METHOD FOR CONTROLLING THEREOF |
| KR20140064384A (ko) * | 2012-11-20 | 2014-05-28 | 엘지전자 주식회사 | 헤드 마운트 디스플레이 및 그 제어 방법 |
| KR101991133B1 (ko) | 2012-11-20 | 2019-06-19 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | 헤드 마운트 디스플레이 및 그 제어 방법 |
| EP3098643A1 (en) * | 2012-11-20 | 2016-11-30 | Microsoft Technology Licensing, LLC | Head mounted display as input layout and output of an external device |
| JP2016506530A (ja) * | 2012-11-20 | 2016-03-03 | マイクロソフト テクノロジー ライセンシング,エルエルシー | ヘッドマウントディスプレイ、およびこれを制御する方法 |
| WO2015093221A1 (ja) * | 2013-12-20 | 2015-06-25 | 株式会社ニコン | 電子機器及びプログラム |
| JP2014232548A (ja) * | 2014-08-08 | 2014-12-11 | 新日鉄住金ソリューションズ株式会社 | 情報処理システム、情報処理方法及びプログラム |
| JP2017534961A (ja) * | 2014-09-17 | 2017-11-24 | ジェムアルト エスアー | ユーザの認証方法及び対応端末と認証システム |
| US10592653B2 (en) | 2015-05-27 | 2020-03-17 | Licentia Group Limited | Encoding methods and systems |
| US10740449B2 (en) | 2015-05-27 | 2020-08-11 | Licentia Group Limited | Authentication methods and systems |
| US11036845B2 (en) | 2015-05-27 | 2021-06-15 | Licentia Group Limited | Authentication methods and systems |
| US11048790B2 (en) | 2015-05-27 | 2021-06-29 | Licentia Group Limited | Authentication methods and systems |
| CN107239716A (zh) * | 2016-03-27 | 2017-10-10 | 陈金仁 | 防偷窥输入设备与方法 |
| US12393661B2 (en) | 2019-11-12 | 2025-08-19 | Licentia Group Limited | Systems and methods for secure data input and authentication |
Also Published As
| Publication number | Publication date |
|---|---|
| JP5029759B2 (ja) | 2012-09-19 |
| JPWO2009130985A1 (ja) | 2011-08-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5029759B2 (ja) | 情報入力システム | |
| JP5250834B2 (ja) | 頭部装着式映像表示装置 | |
| CN108535868B (zh) | 头部佩戴型显示装置及其控制方法 | |
| RU2488860C2 (ru) | Дисплейное приспособление и устройство | |
| JP6094305B2 (ja) | 頭部装着型表示装置、および、頭部装着型表示装置の制御方法 | |
| CN111602082A (zh) | 用于包括传感器集成电路的头戴式显示器的位置跟踪系统 | |
| WO2010023887A1 (ja) | 3次元表示時における指示位置設定装置および方法並びにプログラム | |
| KR20240056592A (ko) | 컴팩트 반사 굴절 프로젝터 | |
| JP4900277B2 (ja) | 頭部装着式映像表示装置 | |
| JP2017116562A (ja) | 表示装置、表示装置の制御方法、及び、プログラム | |
| JP2009251428A (ja) | 情報表示システム | |
| EP4298473B1 (en) | Projector with field lens | |
| JP2017191293A (ja) | 覗き見防止システム | |
| JP2009192583A (ja) | 頭部装着式映像表示装置 | |
| JP6609920B2 (ja) | 表示装置、及び、表示装置の制御方法 | |
| CN113888958B (zh) | 光学显示装置、光学显示控制方法及显示器 | |
| JP2008009490A (ja) | 情報入力装置 | |
| JP4952204B2 (ja) | 遠隔作業支援システム、及びその表示方法 | |
| CN119071457A (zh) | 用于具有沉浸式观看的电子设备的色彩校正 | |
| JP2008123257A (ja) | 遠隔作業支援システム、表示制御方法 | |
| JP2007121625A (ja) | 画像表示装置 | |
| JP2008113317A (ja) | 遠隔作業支援システム | |
| JP2007219069A (ja) | 映像表示装置 | |
| JP6304415B2 (ja) | 頭部装着型表示装置、および、頭部装着型表示装置の制御方法 | |
| US12498583B2 (en) | Eyewear having a projector with heat sink shields |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 09735298 Country of ref document: EP Kind code of ref document: A1 |
|
| WWE | Wipo information: entry into national phase |
Ref document number: 2010509127 Country of ref document: JP |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 09735298 Country of ref document: EP Kind code of ref document: A1 |