JP2005529395A - Computer navigation - Google Patents

Computer navigation Download PDF

Info

Publication number
JP2005529395A
JP2005529395A JP2004511970A JP2004511970A JP2005529395A JP 2005529395 A JP2005529395 A JP 2005529395A JP 2004511970 A JP2004511970 A JP 2004511970A JP 2004511970 A JP2004511970 A JP 2004511970A JP 2005529395 A JP2005529395 A JP 2005529395A
Authority
JP
Japan
Prior art keywords
display
stylus
electronic device
electromagnetic radiation
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2004511970A
Other languages
Japanese (ja)
Other versions
JP2005529395A5 (en
Inventor
マイケル リップマン，ロバート
ミシェル リップマン，サラ
Original Assignee
マイケル リップマン，ロバート
ミシェル リップマン，サラ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by マイケル リップマン，ロバート, ミシェル リップマン，サラ filed Critical マイケル リップマン，ロバート
Publication of JP2005529395A publication Critical patent/JP2005529395A/en
Publication of JP2005529395A5 publication Critical patent/JP2005529395A5/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545—Pens or stylus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G06F3/0386—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry for light pen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/22—Character recognition characterised by the type of writing
    • G06V30/228—Character recognition characterised by the type of writing of three-dimensional handwriting, e.g. writing in the air
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S11/00—Systems for determining distance or velocity not using reflection or reradiation
    • G01S11/12—Systems for determining distance or velocity not using reflection or reradiation using electromagnetic waves other than radio waves
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S3/00—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
    • G01S3/78—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using electromagnetic waves other than radio waves
    • G01S3/782—Systems for determining direction or deviation from predetermined direction

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Position Input By Displaying (AREA)
  • Navigation (AREA)

Abstract

電子装置は、前記電子装置上に記憶されたデータを表示するためのディスプレイと、入力手段と、前記装置に対する入力手段の３次元的位置を検知するための検知手段と、前記装置に対する入力手段の３次元的位置に依存して前記ディスプレイ上に表示されるデータを制御するための制御手段と、で構成される。入力手段は、円錐状の赤外線をディスプレイ上に向けるための電磁放射の源を含む。検知手段は、ディスプレイに入射する電磁放射の楕円離心率を検知して、電磁放射がディスプレイに達する角度を決定することができ、ディスプレイに入射する電磁放射の面積を検知して、入力手段のディスプレイからの距離を決定することができる。An electronic device includes a display for displaying data stored on the electronic device, an input unit, a detection unit for detecting a three-dimensional position of the input unit with respect to the device, and an input unit with respect to the device. And control means for controlling data displayed on the display depending on a three-dimensional position. The input means includes a source of electromagnetic radiation for directing conical infrared radiation onto the display. The detecting means can detect an elliptical eccentricity of electromagnetic radiation incident on the display, determine an angle at which the electromagnetic radiation reaches the display, detect an area of electromagnetic radiation incident on the display, and display the input means The distance from can be determined.

Description

本発明は、コンピュータ・ナビゲーションに関し、特に、排他的ではないが、たとえ装置のディスプレイが小さい場合であっても、装置に記憶されたソフトウェアのナビゲーションを容易にする装置に関する。   The present invention relates to computer navigation, and more particularly, but not exclusively, to a device that facilitates navigation of software stored in the device, even when the device display is small.

ポケット・オーガナイザー、携帯情報端末（ＰＤＡ）、携帯電話等のような小さい携帯型コンピュータ装置が提供されているのは、公知である。現在の動向は、できる限りサイズを小さくしたかかる装置を製造することである。より小さい装置は、より簡単に運ぶことができ、低減された電源を一般に必要とする。   It is well known that small portable computer devices such as pocket organizers, personal digital assistants (PDAs), mobile phones and the like are provided. The current trend is to make such devices as small as possible. Smaller devices can be carried more easily and generally require a reduced power source.

しかしながら、かかる装置の著しい不都合として、縮小されたサイズはユーザ・インターフェースのサイズ、特に、装置が記憶するか又は処理する情報又はデータを表示するために用いるスクリーンすなわちディスプレイのサイズの縮小が余儀なくされる点がある。   However, a significant disadvantage of such devices is that the reduced size necessitates a reduction in the size of the user interface, in particular the size of the screen or display used to display the information or data that the device stores or processes. There is a point.

多くのかかる装置は、従来のデスクトップ・コンピュータ又はラップトップ・コンピュータ又はサイズが何倍もある類似の装置の処理電源を有しており、ワコム及びソニー・バイオ・ポケット・コンピュータのような多くの製品は、マイクロソフト・ウィンドウズ等のようなオペレーティング・システムを用いる完全に動作可能な携帯型コンピュータである。   Many such devices have the processing power of traditional desktop or laptop computers or similar devices that are many times larger in size, and many products such as Wacom and Sony Bio-Pocket Computers Is a fully operational portable computer using an operating system such as Microsoft Windows.

かかる携帯型装置に精通している人は、特に、ユーザが多数の選択項目から特定の機能を選択することのできる場合、比較的小さいディスプレイ上に必要な情報の全てを表示することの問題を理解するであろう。従来は、１つの選択項目を選択することの結果として、例えば、更なる選択項目及び下位選択項目を表示する新たな「ウィンドウ」が開く。大きいディスプレイを有する装置は、データがより簡単に理解される方法で表示されるように、データを整理することができる一方で、より小さいスクリーンを有する装置は、データの「階層」すなわち「レベル」を用いる傾向があり、それにより、多くの下位選択項目を有する１つの選択項目を選択すると、元のメニューを完全に覆う下位選択項目を全スクリーンが表示することになる。誤った選択項目をたまたま選択すると、選択項目の元のリストに表示を戻すために多くのステップが必要となる。   Those familiar with such portable devices have the problem of displaying all of the necessary information on a relatively small display, especially when the user can select a particular function from a number of choices. You will understand. Conventionally, as a result of selecting one selection item, for example, a new “window” is displayed that displays additional selection items and sub-selection items. A device with a large display can organize the data so that the data is displayed in a more easily understood manner, while a device with a smaller screen is a “hierarchy” or “level” of data. When selecting one selection item having many sub-selection items, the entire screen displays a sub-selection item that completely covers the original menu. If you accidentally select an incorrect selection, many steps are required to return the display to the original list of selections.

装置上のデータに、より簡単にアクセスできるようにするための手段を内蔵し、装置のユーザ・インターフェースを改善したポケット・コンピュータ又は携帯型装置を提供すれば、好都合である。   It would be advantageous to provide a pocket computer or portable device with built-in means to allow easier access to data on the device and an improved device user interface.

従って、本発明の一態様によると、記憶されたデータを表示するためのディスプレイと、入力手段と、前記装置に対する入力手段の３次元的位置に依存して前記ディスプレイ上に表示されるデータを制御するための制御手段と、を有する電子装置が提供される。   Therefore, according to one aspect of the present invention, a display for displaying stored data, an input means, and data displayed on the display are controlled depending on a three-dimensional position of the input means relative to the device. And an electronic device having a control means.

望ましくは、本装置は、装置に対する入力手段の位置を検知するか又は監視するための手段を含む。   Preferably, the device includes means for detecting or monitoring the position of the input means relative to the device.

一実施形態において、入力手段は、信号を送信する送信機を含み、ディスプレイは、信号がディスプレイに達する位置を検知するための検知手段を含む。信号は、円錐状の又は円状の赤外線の形態とすることができ、検知手段は、光線がディスプレイに達するときに、光線の面積及び／又は強度を検知して、それにより、ディスプレイに対する入力装置の３次元的位置を決定すべく動作可能とすることができる。   In one embodiment, the input means includes a transmitter that transmits a signal, and the display includes detection means for detecting a position where the signal reaches the display. The signal can be in the form of a conical or circular infrared, and the sensing means senses the area and / or intensity of the light when it reaches the display, thereby providing an input device for the display Can be operable to determine a three-dimensional position of

本発明の別の態様によると、記憶されたデータを表示するためのディスプレイと、入力手段で構成される入力装置と、入力手段の３次元的位置を検知し、かつ前記３次元的位置に依存して前記コンピュータ等に位置信号を適用し、それにより、前記ディスプレイ上に表示されるデータを制御するための検知手段と、を有するコンピュータ等に対する入力装置が提供される。   According to another aspect of the present invention, a display for displaying stored data, an input device including input means, and a three-dimensional position of the input means are detected and dependent on the three-dimensional position. Thus, an input device for a computer or the like is provided that includes a detection means for applying a position signal to the computer or the like and thereby controlling data displayed on the display.

例示のみを目的とし、添付の図面を参照して、本発明をここに記載する。   For purposes of illustration only, the present invention will now be described with reference to the accompanying drawings.

図１を参照すると、本発明に従う電子装置が、一般に１０で示されている。装置１０は、例えば、携帯型又は「パームトップ」コンピュータ、携帯情報端末（ＰＤＡ）、又は携帯電話のような移動体通信装置とすることができる。液晶ディスプレイ、ドット・マトリックス・ディスプレイ、又はＴＦＴ（薄膜トランジスタ）ディスプレイとすることができるディスプレイすなわちスクリーン１２からのデータを、装置１０は記憶し表示することができる。   Referring to FIG. 1, an electronic device according to the present invention is indicated generally at 10. The device 10 can be, for example, a mobile communication device such as a portable or “palmtop” computer, a personal digital assistant (PDA), or a mobile phone. The device 10 can store and display data from a display or screen 12, which can be a liquid crystal display, a dot matrix display, or a TFT (thin film transistor) display.

従来は、装置１０のユーザは、装置上に配置された多くのボタン１４によって、又はスクラッチ・パッド又はトラック・ボールのような入力装置によって、ディスプレイ上に表示されるデータを制御している。これとは別に、望む位置においてディスプレイに物理的に押し付けて、それにより望む位置を選択する鉛筆形の位置決め装置によって、ディスプレイ１２上でユーザが選択項目を選択するか又はデータを変更することができるようにするタッチセンシティブ・ディスプレイを、多くの装置は実装している。かかるタッチセンシティブ・ディスプレイは、位置決め装置がディスプレイの表面に押し付けられるとき、ディスプレイ１２に対する位置決め装置の２次元的Ｘ−Ｙ位置を決定することだけができる。   Conventionally, the user of the device 10 controls the data displayed on the display by a number of buttons 14 arranged on the device or by an input device such as a scratch pad or trackball. Alternatively, a pencil-shaped positioning device that physically presses the display at the desired location, thereby selecting the desired location, allows the user to select a choice or change data on the display 12. Many devices have a touch-sensitive display that does this. Such touch-sensitive displays can only determine the two-dimensional XY position of the positioning device relative to the display 12 when the positioning device is pressed against the surface of the display.

かかる装置の不都合は、携帯型装置又はポケット・コンピュータとして装置を利用可能とるために要求されるサイズの縮小を達成するために、ディスプレイ１２は、それに応じてサイズがより小さくなる点である。しかしながら、装置が目的とするアプリケーションによっては、サイズをかなりの規模で大きくできるディスプレイを有する従来のデスクトップ・コンピュータ又はラップトップ・コンピュータと同様のデータ量を、ディスプレイ１２は表示することが要求されることがある。ディスプレイ１２の小さいサイズは、一度に表示することのできるデータ量を減少させる。   The disadvantage of such a device is that in order to achieve the size reduction required to make the device available as a portable device or a pocket computer, the display 12 is correspondingly smaller in size. However, depending on the application for which the device is intended, the display 12 may be required to display the same amount of data as a conventional desktop or laptop computer having a display that can be scaled considerably large. There is. The small size of the display 12 reduces the amount of data that can be displayed at one time.

この影響を最小にするために、多くの「レベル」でデータを表示するように装置はプログラムされ、それにより、ディスプレイ１２は最初、ユーザが選択可能な例えば４個の選択項目を表示する。例えば位置決め装置によってこれらの選択項目の１つを選択すると、ディスプレイ１２は、例えば従来のコンピュータにおいて通常に用いられているドロップ・ダウン・リストすなわちメニューの形態で、選択項目の第２の「レベル」を表示する。リスト内に表示される各選択項目は、更なるドロップ・ダウン・リストを生成する。   To minimize this effect, the device is programmed to display data at a number of “levels” so that the display 12 initially displays, for example, four choices that the user can select. Selecting one of these choices, for example by a positioning device, causes the display 12 to display a second “level” of choices, for example in the form of a drop down list or menu commonly used in conventional computers. Is displayed. Each choice displayed in the list generates a further drop down list.

装置が用いるレベルの個数は、一般に、ユーザに利用可能な選択項目の個数に比例し、ディスプレイのサイズに反比例することが理解されよう。従って、ユーザは、装置の特定の機能を作動させるために幾つかの選択項目を選択することを要求されるかも知れないということがごく通常に見出される。これは、時間がかかり、ユーザにとって不愉快になり得る。更に、誤った選択をすると、選択項目の元のセットに戻るためには、ユーザは手動で現在のリストから抜け出すことが要求されるように、ドロップ・ダウン・リスト等の生成が元のリストを完全に覆い隠すことがある。これは、ユーザが実行することを要求される操作の回数を著しく増加させる。   It will be appreciated that the number of levels used by the device is generally proportional to the number of choices available to the user and inversely proportional to the size of the display. Thus, it is usually found that the user may be required to select several choices to activate a particular function of the device. This is time consuming and can be uncomfortable for the user. In addition, if an incorrect selection is made, generating a drop-down list etc. will cause the original list to be deleted so that the user is required to manually exit the current list to return to the original set of choices. May be completely obscured. This significantly increases the number of operations that the user is required to perform.

本発明の望ましい形態によると、装置１０は、入力装置１６の形態の入力手段によって制御することのできる装置１０上に記憶されたデータを表示するためのディスプレイ１２を有する。望ましい実施形態において、入力装置１６は、ディスプレイ１２上に表示される様々な選択項目をユーザが選択することを可能にする、以後は「スタイラス」と称する、ペン形器具の形態を取る。本発明の構想は、装置１０に対する、特にディスプレイに対する、スタイラス１６の３次元的位置を検出するか又は監視することを、電子装置１０が可能にすることである。これは、例えば以下の制御機能を達成するために用いることのできるディスプレイ１２の「３次元制御」を効果的に可能とする。   According to a preferred form of the invention, the device 10 has a display 12 for displaying data stored on the device 10 which can be controlled by input means in the form of an input device 16. In the preferred embodiment, the input device 16 takes the form of a pen-shaped instrument, hereinafter referred to as a “stylus”, that allows the user to select various choices displayed on the display 12. The concept of the present invention is to allow the electronic device 10 to detect or monitor the three-dimensional position of the stylus 16 with respect to the device 10, in particular with respect to the display. This effectively enables "three-dimensional control" of the display 12, which can be used, for example, to achieve the following control functions.

ディスプレイ１２に対してＸ又はＹ方向へスタイラスが動くことにより、（例えばマウス・ポインタ又はその均等物等の）ディスプレイ１２上のカーソルは、それに応じて、従来のマウスの方法で動く。しかしながら、重要なことには、スタイラス１６のＺ方向への、すなわちディスプレイ１２に一般に垂直な方向への、動きは、ディスプレイの方へ向かうかディスプレイから離れるかのいずれかの、スタイラス１６の動きの方向に応じて、ディスプレイにズーム・イン又はズーム・アウトのいずれかをさせる「ズーム」機能を実行する。   As the stylus moves in the X or Y direction relative to the display 12, the cursor on the display 12 (eg, a mouse pointer or equivalent) moves accordingly in a conventional mouse manner. Importantly, however, the movement of the stylus 16 in the Z direction, i.e., in a direction generally perpendicular to the display 12, is either the direction of the stylus 16 moving away from the display or away from the display. Depending on the direction, a “zoom” function is performed that causes the display to either zoom in or zoom out.

一実施形態において、例えば、ディスプレイ１２の方向へのスタイラス１６の動きによって、従来のコンピュータ及びコンピュータ・プログラムの「ズーム・イン」機能によって得られるのと類似の方法で、スタイラス１６のＸ−Ｙ位置に相当するディスプレイ１２の領域は拡大される。このように、スタイラス１６がディスプレイ１２のより近くに動くと、スタイラス１６のＸ−Ｙ位置に相当するディスプレイ１２の領域内のデータは、拡大される。ディスプレイ１２のこのズームによって、下位選択項目に関連するデータを元の選択項目の位置に表示することが可能となる。しかしながら、従来のソフトウェアがそれぞれの離散的な選択で「インクリメンタル・ズーム」を提供するのに対し、図面を参照して記載する装置は、スタイラスの計算された軌道に基づき常に更新される情報によって、連続的なズームを提供する。連続的なズームは、直感的で応答性の良いユーザ・インターフェースを可能とする。   In one embodiment, the XY position of the stylus 16 in a manner similar to that obtained, for example, by the “zoom in” function of conventional computers and computer programs, by movement of the stylus 16 in the direction of the display 12. The area of the display 12 corresponding to is enlarged. Thus, as the stylus 16 moves closer to the display 12, the data in the area of the display 12 corresponding to the XY position of the stylus 16 is enlarged. This zoom of the display 12 makes it possible to display data related to the lower selection item at the position of the original selection item. However, whereas conventional software provides “incremental zoom” at each discrete choice, the device described with reference to the drawings, with information that is constantly updated based on the calculated trajectory of the stylus, Provides continuous zoom. Continuous zoom enables an intuitive and responsive user interface.

「ズーム・イン」又は「ズーム・アウト」が所定の閾値に達すると、下位選択項目に関連するデータが、元の選択項目に加えて或いはそれに置き換わって（すなわち第１のものに次いで別のもの）、表示される。   When “zoom in” or “zoom out” reaches a predetermined threshold, the data associated with the sub-selection item is in addition to or in place of the original selection item (ie another one after the first one) ),Is displayed.

図２は、ディスプレイ１２が表示する情報の「レベル」の概念を説明する。最初に、ユーザが選択可能な２つの選択肢である選択項目１及び選択項目２を、図３に示すように、ユーザに与えることのできる「レベル１」データが表示される。更なる２つの選択肢である選択項目Ａ及び選択項目Ｂを例えば含むことができる、特定の「レベル２」データを、選択項目１は代表する。例えば電子メールを送信すること又はインターネットにアクセスすること等の、装置１０が実行することのできる様々な機能を、例えば代表することができる、それぞれの「レベル３」データを、選択項目Ａ及びＢは代表する。   FIG. 2 explains the concept of “level” of information displayed on the display 12. First, as shown in FIG. 3, "level 1" data that can be given to the user is displayed, as shown in FIG. 3, two selection options that can be selected by the user. Selection item 1 is representative of specific “level 2” data that can include, for example, two additional options, selection item A and selection item B. Each “level 3” data that can represent, for example, various functions that the device 10 can perform, such as sending an e-mail or accessing the Internet, can be selected as items A and B. Represents.

同様に、レベル１データ内の選択項目２は、第２レベル・データ内の選択項目Ｃ及びＤに相当することができ、これらの項目のそれぞれは、例えばカレンダーを開くこと又は日記を開くこと等の、装置１０が実行することのできる様々な機能を代表する。   Similarly, selection item 2 in the level 1 data can correspond to selection items C and D in the second level data, each of these items, for example, opening a calendar or opening a diary, etc. Of the various functions that the device 10 can perform.

従来の装置であれば、上述の例からインターネット機能を選択するためには、スクリーン上の選択項目１にスタイラス１６を押し付けてから、再度選択項目Ｂに、最後にインターネット項目にスタイラス１６を押し付けることを、ユーザは要求されるであろう。このように、３回の個別の操作が要求される。例えば選択項目Ｂではなく選択項目Ａを選択すること等の、誤った選択は、レベル１データへ戻るために「抜け出し」項目（図示せず）を選択することを、ユーザに要求する。   In the case of the conventional apparatus, in order to select the Internet function from the above example, the stylus 16 is pressed against the selection item 1 on the screen, and then the stylus 16 is pressed again against the selection item B and finally the Internet item. The user will be required. Thus, three separate operations are required. An incorrect selection, such as selecting selection item A instead of selection item B, requires the user to select an “exit” item (not shown) to return to level 1 data.

他方、本発明によれば、ユーザは、最小の個別操作で、例えばインターネット等を選択することができる。例えば、一実施形態において、ユーザは、選択項目１を含むディスプレイ１２の部分上にスタイラス１６を動かし、次いでスタイラス１６をディスプレイの方へ動かす。スクリーン方向へのスタイラス１６の動きを、選択項目Ａ及び選択項目Ｂがスクリーン上に表示されるまで、レベル１データを通ってレベル２データの方へディスプレイ１２をズームする「ズーム・イン」動作であると、装置１０は解釈する。次いで、スタイラス１６が選択項目Ｂのアイコン上に位置するまで、ユーザは、Ｘ−Ｙ平面内でスタイラス１６の位置を変えて、再度スタイラス１６をディスプレイの方へ動かす。この動きは、インターネット・アイコンがスクリーン上に現れるまで、レベル２データを通ってレベル３データの方へ「ズーム・イン」する。次いで、例えばスクリーン上の要求される位置にスタイラス１６を押し付ける等の、従来の方法で、ユーザはこれを選択することができる。   On the other hand, according to the present invention, the user can select, for example, the Internet or the like with a minimum individual operation. For example, in one embodiment, the user moves the stylus 16 over the portion of the display 12 that includes the selection item 1, and then moves the stylus 16 toward the display. The movement of the stylus 16 in the screen direction is a “zoom in” operation that zooms the display 12 through the level 1 data to the level 2 data until the selection item A and selection item B are displayed on the screen. If so, the device 10 interprets. Then, the user changes the position of the stylus 16 in the XY plane and moves the stylus 16 toward the display again until the stylus 16 is positioned on the selection item B icon. This movement “zooms in” through the level 2 data to the level 3 data until an internet icon appears on the screen. The user can then select this in a conventional manner, such as pressing the stylus 16 to the required position on the screen.

従来のタッチセンシティブ・ディスプレイとは異なり、スタイラス１６はディスプレイ１２自体とは非接触であるが、ディスプレイ１２に対するスタイラス１６の３次元的Ｘ−Ｙ−Ｚ位置を監視、追跡、或いは検出する、装置１０の機能に、本発明は依存していることが理解されよう。これは、多くの方法で達成することができる。   Unlike a conventional touch-sensitive display, the stylus 16 is non-contact with the display 12 itself, but monitors, tracks or detects the three-dimensional XYZ position of the stylus 16 relative to the display 12. It will be appreciated that the present invention relies on the function of: This can be accomplished in a number of ways.

一実施形態において、スタイラス１６は、例えば、赤外線発光器、ＬＥＤ、又は別のかかる発光素子（図示せず）等の、電磁放射源を含む、いわゆる「スマート・スタイラス」である。スタイラス１６は、円の、球の、又は別の形状の先端から、例えば赤外又は別のスペクトルの光線を放射する。ディスプレイ１２上に位置するか又はそれに内蔵された検知層（図示せず）によって、光は検知される。光検知層は、例えば、ＣＣＤ又はＣＭＯＳの赤外検知アレイ等の形態とすることができる。ディスプレイ１２を横切ってスタイラス１６を動かすと、検知層の或る部分だけがスタイラス１６の放射する光線によって照射され、これは、検知層によって検出される。検知層は、スタイラス１６の適切なＸ−Ｙ座標を決定し、それに応じてディスプレイ１２を適応させる装置１０の中央演算処理装置等に、相当する位置信号を送信する。図４は、この実施形態の例である。スタイラス１６は、ディスプレイのより近くに動かすと、それがディスプレイから離れているときに形成される円又は楕円３２よりも小さい大きさを有する円又は楕円３０を生成する。楕円の同一の離心率は、入力スタイラスがディスプレイに対して同一の角度にあることを意味しており、その領域の大きさは、スタイラスのディスプレイからの距離を示している。   In one embodiment, the stylus 16 is a so-called “smart stylus” that includes a source of electromagnetic radiation, such as, for example, an infrared emitter, LED, or another such light emitting element (not shown). The stylus 16 emits, for example, infrared or other spectral rays from the tip of a circle, sphere, or other shape. Light is detected by a sensing layer (not shown) located on or incorporated in the display 12. The light detection layer may be in the form of a CCD or CMOS infrared detection array, for example. As the stylus 16 is moved across the display 12, only a portion of the sensing layer is illuminated by the light rays emitted by the stylus 16, which is detected by the sensing layer. The sensing layer determines the appropriate XY coordinates of the stylus 16 and sends corresponding position signals to the central processing unit of the device 10 that adapts the display 12 accordingly. FIG. 4 is an example of this embodiment. When the stylus 16 is moved closer to the display, it produces a circle or ellipse 30 having a smaller size than the circle or ellipse 32 formed when it is away from the display. The same eccentricity of the ellipse means that the input stylus is at the same angle with respect to the display, and the size of the area indicates the distance of the stylus from the display.

別の実施形態において、スタイラス１６は、従来の光ペンの方法で動作し、ディスプレイが発する光を検知する光検知器又はフォトダイオードを内部に含む。画像が、いわゆるラスター走査でディスプレイ１２を横切り下方へと連続的に更新されるように、従来のテレビ画面と同様に、ディスプレイ１２は走査される。この連続的な更新によって、その効果が肉眼では見えないほど非常に高い周波数で、ディスプレイ１２の画素は、交互に明るくなり暗くなる。   In another embodiment, the stylus 16 operates in a conventional light pen manner and internally includes a light detector or photodiode that detects light emitted by the display. Similar to a conventional television screen, the display 12 is scanned so that the image is continuously updated downward across the display 12 in a so-called raster scan. This continuous update causes the pixels of the display 12 to alternately become brighter and darker at such a high frequency that the effect is not visible to the naked eye.

しかしながら、フォトダイオードは、この明／暗効果を検出することができ、フォトダイオードの受けた光が暗から明へ変化するとき、スタイラス１６は、装置１０のディスプレイ制御装置へ信号を送信する。ディスプレイ制御装置はディスプレイ信号を生成しているので、現在のラスター線の位置を知っており、スタイラス１６が制御装置へ信号を送るときに、ディスプレイ１２上のどの画素が更新されているのかを決定することができる。次いで、ディスプレイ制御装置は、画素のＸ及びＹ座標を表す２つの数字を与えるラッチを、装置１０の中央演算処理装置等に対してセットし、それにより、装置は、スクリーンのどの場所をスタイラス１６が指しているのかを決定することができる。   However, the photodiode can detect this light / dark effect, and when the light received by the photodiode changes from dark to light, the stylus 16 sends a signal to the display controller of the device 10. Since the display controller is generating a display signal, it knows the current raster line position and determines which pixels on the display 12 are updated when the stylus 16 sends a signal to the controller. can do. The display controller then sets a latch that gives two numbers representing the X and Y coordinates of the pixel to the central processing unit, etc., of the device 10 so that the device can locate which location on the screen the stylus 16. Can be determined.

上述の例は、ディスプレイ１２に対するスタイラス１６のＸ−Ｙ座標を決定する方法のみを説明している。装置１０は、Ｚ座標、すなわちスタイラス１６のディスプレイからの距離、をも決定する必要があることが理解されよう。やはり、これは、多くの方法で達成することができる。   The above example only describes a method for determining the XY coordinates of the stylus 16 relative to the display 12. It will be appreciated that the device 10 also needs to determine the Z coordinate, ie the distance of the stylus 16 from the display. Again, this can be accomplished in a number of ways.

一実施形態において、例えばスタイラス１６の先端からの距離と共に直径が広くなる円錐状の光線で送信される赤外又は別のスペクトルの光である、電磁放射の光線を、スタイラス１６は放射する。   In one embodiment, the stylus 16 emits a ray of electromagnetic radiation, for example, infrared or another spectrum of light that is transmitted in a conical ray that increases in diameter with distance from the tip of the stylus 16.

ディスプレイ１２すなわち検知層に入射する光は、楕円の形態であり、その離心率は、光がディスプレイ１２に入射する、すなわちスタイラスが保持されている、角度に依存する。例えば、１という離心率は、入射する光が円であること、すなわち、スタイラス１６が垂直に保持されていることを示す。   The light incident on the display 12, i.e. the sensing layer, is in the form of an ellipse and its eccentricity depends on the angle at which the light is incident on the display 12, i.e. the stylus is held. For example, an eccentricity of 1 indicates that the incident light is a circle, that is, that the stylus 16 is held vertically.

検知層に入射する光の分布は、スタイラス１６内の光源からの距離と共に変化するであろう。スタイラス１６がディスプレイの検知層から離れて位置している場合は、照射された検知層の全面積は比較的大きくなるが、入射光の強度は低くなろう。スタイラス１６をディスプレイのより近くに動かすと、検知層に入射する光の面積は減少するが、強度は増加するであろう。ディスプレイから非常に短い距離においては、スタイラス１６からの光が照射するディスプレイ１２の面積は小さくなるが、強度は高くなろう。   The distribution of light incident on the sensing layer will vary with distance from the light source in the stylus 16. If the stylus 16 is positioned away from the display sensing layer, the total area of the illuminated sensing layer will be relatively large, but the intensity of the incident light will be low. Moving the stylus 16 closer to the display will reduce the area of light incident on the sensing layer, but will increase the intensity. At very short distances from the display, the area of the display 12 illuminated by light from the stylus 16 will be small but the intensity will be high.

入射光の強度を測定するために、考えられる強度の連続する範囲を、多くの刺激閾値に分割することができる。これより、光の強度は、どの閾値の間に入るかに応じて、計算することができる。   In order to measure the intensity of incident light, a contiguous range of possible intensities can be divided into a number of stimulation thresholds. Thus, the light intensity can be calculated according to which threshold value it falls between.

動作中、検知層は、ディスプレイ１２に入射する光を検出し、適切な信号を装置１０の処理装置に送信する。次いで、ディスプレイ１２に入射する光の楕円離心率が計算され、これよりスタイラス１６の角度が決定される。ディスプレイ１２に入射する光の全面積も計算することができ、これよりスタイラス１６のディスプレイ１２からの距離を決定することができる。これとは別に或いはこれに加えて、スタイラス１６のディスプレイ１２からの距離を独立に決定するため、又は測定された面積に基づく計算結果の精度を上げるためのいずれかの目的で、入射光の強度を計算して用いることができる。   In operation, the sensing layer detects light incident on the display 12 and sends an appropriate signal to the processing device of the device 10. Next, the elliptical eccentricity of the light incident on the display 12 is calculated, and the angle of the stylus 16 is determined from this. The total area of light incident on the display 12 can also be calculated, from which the distance of the stylus 16 from the display 12 can be determined. Alternatively or additionally, the intensity of the incident light, either for the purpose of independently determining the distance of the stylus 16 from the display 12 or for increasing the accuracy of the calculation results based on the measured area. Can be calculated and used.

次いで、ディスプレイ１２上のスタイラス１６の垂直な高さを決定するために、スタイラス１６のディスプレイ１２からの距離と併せて、スタイラス１６の角度を用いる。これより、Ｚ次元におけるスタイラス１６の位置は、装置１０によって決定される。   The angle of the stylus 16 is then used in conjunction with the distance of the stylus 16 from the display 12 to determine the vertical height of the stylus 16 on the display 12. Thus, the position of the stylus 16 in the Z dimension is determined by the device 10.

スタイラス１６を動かすときの、１秒あたり数回の、スタイラス位置の反復する計算によって、スタイラスの軌道を記録することができる。次いで、ユーザの意図を予測することを補助するために、スタイラスの軌道を用いることができる。   The stylus trajectory can be recorded by repeated calculations of the stylus position several times per second as the stylus 16 is moved. The stylus trajectory can then be used to help predict user intent.

スタイラス１６とディスプレイとの間の物理的な接触を伴わずに、ユーザが選択を行うときを決定するためにも、スタイラス１６の位置及び角度を用いることができる。例えば、選択を表現するために、単純な下げる動作を用いることができる。これとは別に或いはこれに加えて、非接触の選択を表現するために、光の面積及び／又は強度を用いることもできる。例えば、或る最小閾値を下回る入射光の面積及び／又は或る最大閾値を上回る強度によって、かかる選択を指示することができる。   The position and angle of the stylus 16 can also be used to determine when a user makes a selection without physical contact between the stylus 16 and the display. For example, a simple lowering action can be used to represent the selection. Alternatively or in addition, the area and / or intensity of light can be used to represent a contactless selection. For example, such selection may be indicated by an area of incident light below a certain minimum threshold and / or an intensity above a certain maximum threshold.

図３で説明する別の実施形態において、装置１０は、ディスプレイ１２の縁の周りに位置する複数の光検知器２０を備える。スタイラス１６がディスプレイ１２の方へ向かって又はそこから離れて動くときに、スタイラス１６の放射する円錐状の光線が光検知器の異なる区分又は層を照射するように、光検知器をＺ方向に区分化或いは層化する。特に、スタイラス１６がスクリーンのより近くに動くとき、図３に示すように、ディスプレイ１２の周りの光検知器のより少ないものが照射されることになろう。検知器からの信号は、装置１０の処理装置によって分析され、それにより、処理装置は、スタイラス１６のディスプレイ１２からの距離を計算する。   In another embodiment described in FIG. 3, the apparatus 10 comprises a plurality of photodetectors 20 located around the edge of the display 12. When the stylus 16 moves toward or away from the display 12, the light detector is moved in the Z direction so that the cone-shaped light rays emitted by the stylus 16 illuminate different sections or layers of the light detector. Segment or stratify. In particular, when the stylus 16 moves closer to the screen, fewer of the photodetectors around the display 12 will be illuminated, as shown in FIG. The signal from the detector is analyzed by the processing device of the device 10 so that the processing device calculates the distance of the stylus 16 from the display 12.

図示しない、なお更なる実施形態において、ディスプレイ１２を装置１０の筐体内にはめ込むか又は沈めて、囲む壁を与える。複数の発光素子を有する２つの面及び相当する数の光検知素子による別の２つの面の上にこの壁を与える。スタイラス１６がディスプレイ１２の方向に動くときに、いくつかの発光器と相当する光検知器との間で伝播される光をさえぎり、それにより、スタイラス１６がディスプレイのより近くに動いたことが装置１０に対して示されるように、発光器の放射する光を、対向する光検知器が検知する。発光器及び検知器をＺ方向に層化した場合、これは、スタイラス１６のディスプレイからの距離の指示を与える。   In still further embodiments, not shown, the display 12 is fitted or submerged within the housing of the device 10 to provide a surrounding wall. This wall is provided on two surfaces with a plurality of light emitting elements and another two surfaces with a corresponding number of light sensing elements. When the stylus 16 moves in the direction of the display 12, the light propagating between some light emitters and the corresponding photodetector is blocked, so that the stylus 16 has moved closer to the display. As shown for 10, the light emitted by the light emitter is detected by the opposing light detector. If the emitter and detector are layered in the Z direction, this gives an indication of the distance of the stylus 16 from the display.

ディスプレイに対するスタイラス１６の３次元的Ｘ−Ｙ−Ｚ位置を検知する多くの考えられる方法があり、上述の例が特に単純で好都合な技術を代表していることは、当業者には明らかとなろう。本発明の重要な特徴は、装置１０又は装置１０のディスプレイ１２に対して３次元的にスタイラス１６又は別の入力装置を動かすことによって、装置１０が表示するデータをユーザが変更できることである。   There are many possible ways to detect the three-dimensional XYZ position of the stylus 16 relative to the display, and it will be apparent to those skilled in the art that the above example represents a particularly simple and convenient technique. Let's go. An important feature of the present invention is that the user can change the data displayed by the device 10 by moving the stylus 16 or another input device in three dimensions relative to the device 10 or the display 12 of the device 10.

特定の利点を提供することのできる上述の発明に関して、多数の修正又は改良又は変形が存在することが更に理解されよう。スタイラス１６が円錐状の光線を生成する発光素子を内蔵する場合、ズーム・イン又はズーム・アウトの機能を実現すべくユーザが要求するＺ方向の動きの量を制限するために、所定の長さ及び円錐角を有する光線を生成するように、素子の出力を選択することができる。発光器の種類は、提供することを要求された通りに選択することができ、赤外又は可視光又は別の形態の電磁放射を用いることができる。これとは別に、スタイラス１６は、光ペンと類似の利用を可能とするフォトダイオード及びＺ座標情報を確定するための発光器の両者を含むことができる。スタイラス１６は、電子装置１０との間で信号を送受信するためのケーブルによって、装置１０に接続することができる。これとは別に、スタイラス１６を電子装置１０に遠隔接続することができ、或いは、データ接続を全く与えないこともできる。後者の状況は、発光素子がスタイラス１６内に用いられている場合に、可能である。   It will be further understood that there are numerous modifications or improvements or variations on the above-described invention that can provide particular advantages. When the stylus 16 includes a light emitting element that generates a conical light beam, a predetermined length is used to limit the amount of movement in the Z direction required by the user to achieve the zoom-in or zoom-out function. And the output of the element can be selected to produce a ray having a cone angle. The type of light emitter can be selected as required to provide, infrared or visible light or another form of electromagnetic radiation can be used. Alternatively, the stylus 16 can include both a photodiode that allows similar use as a light pen and a light emitter for determining Z coordinate information. The stylus 16 can be connected to the device 10 by a cable for transmitting and receiving signals to and from the electronic device 10. Alternatively, the stylus 16 can be remotely connected to the electronic device 10, or no data connection can be provided. The latter situation is possible when a light emitting element is used in the stylus 16.

冷蔵庫、コンピュータ、又は商用サイトのような、多くの人々が頻繁に装置を使う場所から、スタイラスを紛失するのを簡単に防ぐために、単純な鎖（螺旋ビニール・コード等）で、随意的に装置にスタイラスを取り付けることができる。   Optional equipment with a simple chain (such as a spiral vinyl cord) to easily prevent stylus loss from places where many people frequently use the equipment, such as refrigerators, computers, or commercial sites A stylus can be attached to the.

従来のライト・ガン等と同様に、電子装置１０に信号を送信するようにする、スタイラス１６上に配置されたボタン等を用いて、選択を達成するタッチセンシティブ・スクリーン又は従来のスクリーンを、装置１０は内蔵することができる。検知層を用いる場合、これは、あらゆる適切な材料で形成することができ、それは、付加的に又は代替的に感熱的なものとすることができる。検知層は、ディスプレイ１２のスクリーンの上又は下に形成することができ、或いはそこに一体化することができる。選択される材料の感度及び質は、所望のごとく選択することができる。   Like a conventional light gun or the like, a touch sensitive screen or conventional screen that achieves selection using a button or the like disposed on the stylus 16 that transmits a signal to the electronic device 10, the device 10 can be built in. If a sensing layer is used, it can be formed of any suitable material, which can additionally or alternatively be thermally sensitive. The sensing layer can be formed on or under the screen of the display 12 or can be integrated therein. The sensitivity and quality of the material selected can be selected as desired.

上述の実施形態は、装置１０のディスプレイ１２に対するスタイラス１６の位置を検知することに関して記載されているが、装置１０のあらゆる別の部分又はあらゆる固定位置に対するスタイラス１６の３次元的位置を同じ目的に対して用いることができることが理解されよう。この点で、本発明は、それらに対するスタイラス１６の３次元的位置を決定することのできるスタイラス１６及び検知「パッド」等のみを提供することができる。十分に理解されることになるあらゆる適切な手段によって、パッドは、電子装置１０との通信のために接続することができる。かかる実施形態によって、より旧来的なマウス、スクラッチ・パッド、又はトラック・ボールの代わりにスタイラス１６及び「パッド」を、従来のデスクトップ・コンピュータ又はラップトップ・コンピュータと共に用いることができる。   Although the above-described embodiments have been described with respect to sensing the position of the stylus 16 relative to the display 12 of the device 10, the three-dimensional position of the stylus 16 relative to any other part of the device 10 or any fixed position is the same purpose. It will be understood that it can be used against. In this regard, the present invention can only provide a stylus 16 and a sensing “pad” that can determine the three-dimensional position of the stylus 16 relative to them. The pads can be connected for communication with the electronic device 10 by any suitable means that will be fully understood. Such an embodiment allows the stylus 16 and “pad” to be used with a conventional desktop or laptop computer instead of the more traditional mouse, scratch pad, or trackball.

本発明の装置１０は、既存のシステムに対して多くの利点を提供することが理解されよう。特に、スタイラス１６の装置１０からの深さ／高さ座標を計算することができ、それにより、ディスプレイ１２又は装置１０からの距離が変化するときに、装置１０のソフトウェアは、ディスプレイ１２の内容を適応させることができる。スタイラス１６をディスプレイにより接近させるとき、この動きは、特定の範囲内における座標を選択して、ディスプレイのより広い部分を満たすように、その座標内で表示される全ての情報をズームする意図であると、装置１０は解釈する。これにより、情報ディスプレイは、ユーザの意図に応じるように、直感的に「より近くに」来ることができる。更に、レベル１の選択肢のより少ないものしか示さず、状況メニュー（contextual menu）のような選択肢の付加的階層を選択的に付加して、スタイラス１６のより少ない「クリック」すなわち選択でより多くの選択を実行することができるようになるので、ディスプレイ１２上のより多くのスペースが利用可能となる。２つ以上の選択のレベルが要求される場合は、スタイラス１６のわずか１回の操作で選択を実行可能とするために、スタイラス１６の動きによって、装置１０は、ユーザが要求する選択を予測することができる。   It will be appreciated that the apparatus 10 of the present invention provides many advantages over existing systems. In particular, the depth / height coordinates of the stylus 16 from the device 10 can be calculated so that when the distance from the display 12 or the device 10 changes, the software of the device 10 Can be adapted. When the stylus 16 is brought closer to the display, this movement is intended to select coordinates within a particular range and zoom all the information displayed within those coordinates to fill a wider portion of the display. The device 10 interprets. This allows the information display to come "closer" intuitively, depending on the user's intention. In addition, only a few of the Level 1 choices are shown, and an additional hierarchy of choices such as a contextual menu is selectively added to make more “clicks” or selections of the stylus 16 more More space on the display 12 becomes available as the selection can be performed. If more than one level of selection is required, the movement of the stylus 16 will cause the device 10 to predict the selection requested by the user so that the selection can be performed with only one operation of the stylus 16. be able to.

本発明に従う装置を実例として示す図である。1 shows an apparatus according to the invention as an example. データ「レベル」の概念を実例として示す図である。It is a figure which shows the concept of data "level" as an example. 本発明の一実施形態に従う装置の断面を実例として示す図である。FIG. 2 shows a cross section of an apparatus according to an embodiment of the present invention as an example.

Claims (11)

電子装置であって、
前記電子装置上に記憶されたデータを表示するためのディスプレイと、
入力手段と、
前記装置に対する前記入力手段の３次元的位置を検知するための検知手段と、
前記装置に対する前記入力手段の前記３次元的位置に依存して前記ディスプレイ上に表示されるデータを制御するための制御手段と、
で構成される、電子装置。 An electronic device,
A display for displaying data stored on the electronic device;
Input means;
Detection means for detecting a three-dimensional position of the input means relative to the device;
Control means for controlling data displayed on the display depending on the three-dimensional position of the input means relative to the device;
An electronic device composed of 前記入力手段は、前記ディスプレイ上に向けるための電磁放射の源を含む、請求項１に記載の電子装置。   The electronic device of claim 1, wherein the input means includes a source of electromagnetic radiation for directing on the display. 前記電磁放射は、円錐状の赤外線の形態である、請求項２に記載の電子装置。   The electronic device of claim 2, wherein the electromagnetic radiation is in the form of a conical infrared. 前記検知手段は、前記ディスプレイに入射する前記電磁放射の楕円離心率を検知して、それにより、前記電磁放射が前記ディスプレイに達する角度を決定すべく動作可能である、請求項２又は３に記載の電子装置。   The detection means is operable to detect an elliptical eccentricity of the electromagnetic radiation incident on the display, thereby determining an angle at which the electromagnetic radiation reaches the display. Electronic devices. 前記検知手段は、前記ディスプレイに入射する前記電磁放射の面積を検知して、それにより、前記入力手段の前記ディスプレイからの距離を決定すべく動作可能である、請求項２乃至４のいずれか一項に記載の電子装置。   The detection means is operable to detect an area of the electromagnetic radiation incident on the display, thereby determining a distance of the input means from the display. The electronic device according to item. 前記検知手段は、前記ディスプレイに入射する前記電磁放射の強度を検知して、それにより、前記入力手段の前記ディスプレイからの距離を決定すべく動作可能である、請求項２乃至５のいずれか一項に記載の電子装置。   The detection means is operable to detect the intensity of the electromagnetic radiation incident on the display, thereby determining the distance of the input means from the display. The electronic device according to item. 前記検知手段は、前記電磁放射が前記ディスプレイに達する位置を検知すべく動作可能である、請求項２乃至６のいずれか一項に記載の電子装置。   The electronic device according to claim 2, wherein the detection means is operable to detect a position where the electromagnetic radiation reaches the display. 前記入力手段は、スタイラス又はそれと同様な物のような携帯型装置で構成される、請求項１乃至７のいずれか一項に記載の電子装置。   The electronic device according to any one of claims 1 to 7, wherein the input unit is configured by a portable device such as a stylus or the like. 前記入力手段は、位置信号を送信するための送信機を含み、前記ディスプレイは、前記位置信号が前記ディスプレイに達する位置を検知するための検知手段を含む、請求項１乃至８のいずれか一項に記載の電子装置。   9. The input device according to claim 1, wherein the input means includes a transmitter for transmitting a position signal, and the display includes detection means for detecting a position at which the position signal reaches the display. An electronic device according to 1. 前記位置信号は、円錐状の赤外線の形態であり、前記検知手段は、前記赤外線が前記ディスプレイに達するときに前記赤外線の面積及び強度を検知して、それにより、前記ディスプレイに対する前記入力手段の前記３次元的位置を決定すべく動作可能である、請求項９に記載の電子装置。   The position signal is in the form of a conical infrared, and the detecting means detects the area and intensity of the infrared when the infrared reaches the display, and thereby the input means of the input means to the display. The electronic device of claim 9, wherein the electronic device is operable to determine a three-dimensional position. 記憶されたデータを表示するためのディスプレイを有するコンピュータ又はそれと同様な物に対する入力装置であって、
入力手段と、
検知手段であって、前記検知手段に対する前記入力手段の３次元的位置を検知し、かつ前記３次元的位置に依存して前記コンピュータ又はそれと同様な物に位置信号を適用し、それにより、前記ディスプレイ上に表示されるデータを制御するための検知手段と、
で構成される、入力装置。 An input device for a computer having a display for displaying stored data or the like,
Input means;
Detecting means for detecting a three-dimensional position of the input means relative to the detecting means, and applying a position signal to the computer or the like depending on the three-dimensional position, thereby Sensing means for controlling the data displayed on the display;
An input device composed of
JP2004511970A 2002-06-08 2003-06-09 Computer navigation Pending JP2005529395A (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
GBGB0213215.7A GB0213215D0 (en) 2002-06-08 2002-06-08 Computer navigation
PCT/GB2003/002533 WO2003104965A2 (en) 2002-06-08 2003-06-09 Computer navigation

Publications (2)

Publication Number Publication Date
JP2005529395A true JP2005529395A (en) 2005-09-29
JP2005529395A5 JP2005529395A5 (en) 2006-06-15

Family

ID=9938235

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004511970A Pending JP2005529395A (en) 2002-06-08 2003-06-09 Computer navigation

Country Status (11)

Country Link
EP (1) EP1522006A2 (en)
JP (1) JP2005529395A (en)
CN (1) CN100555186C (en)
AU (1) AU2003240092A1 (en)
CA (1) CA2488676C (en)
GB (1) GB0213215D0 (en)
IL (1) IL165578A0 (en)
NO (1) NO20050115D0 (en)
NZ (1) NZ537550A (en)
WO (1) WO2003104965A2 (en)
ZA (1) ZA200500137B (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007172585A (en) * 2005-11-25 2007-07-05 Sega Corp Coordinate input device
JP2008541222A (en) * 2005-06-02 2008-11-20 サムスン エレクトロニクス カンパニー リミテッド Electronic device capable of three-dimensional input of user commands
JP2010277191A (en) * 2009-05-26 2010-12-09 Toshiba Corp Information processing apparatus
US8537137B2 (en) 2008-12-03 2013-09-17 Fujitsu Mobile Communications Limited Input device and information processing apparatus for entering an energy-saving mode
US8654100B2 (en) 2008-12-03 2014-02-18 Fujitsu Mobile Communications Limited Input device and mobile terminal
KR20140043058A (en) * 2011-02-11 2014-04-08 마이크로소프트 코포레이션 Universal stylus device

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7952570B2 (en) 2002-06-08 2011-05-31 Power2B, Inc. Computer navigation
WO2005029395A2 (en) * 2003-09-22 2005-03-31 Koninklijke Philips Electronics N.V. Coordinate detection system for a display monitor
RU2379747C2 (en) 2004-03-18 2010-01-20 Конинклейке Филипс Электроникс Н.В. Scanning display device
GB2424269A (en) * 2004-04-01 2006-09-20 Robert Michael Lipman Control apparatus
JP4469650B2 (en) * 2004-04-22 2010-05-26 東芝モバイルディスプレイ株式会社 Display device with light input function, display device, and light source device
US8610675B2 (en) 2007-03-14 2013-12-17 Power2B, Inc. Interactive devices
US10452207B2 (en) 2005-05-18 2019-10-22 Power2B, Inc. Displays and information input devices
US9569093B2 (en) 2005-05-18 2017-02-14 Power2B, Inc. Displays and information input devices
US9317170B2 (en) 2005-05-18 2016-04-19 Power2B, Inc. Interactive devices
WO2008111040A2 (en) 2007-03-14 2008-09-18 Power2B, Inc. Displays and information input devices
KR20080063300A (en) 2005-09-08 2008-07-03 파워2비, 인크. Displays and information input devices
JP2009517755A (en) * 2005-11-30 2009-04-30 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Electromagnetic beam projection position detection
GB0617400D0 (en) * 2006-09-06 2006-10-18 Sharan Santosh Computer display magnification for efficient data entry
AT508094B1 (en) 2009-03-31 2015-05-15 Fronius Int Gmbh METHOD AND DEVICE FOR OPERATING A POWER SOURCE ASSOCIATED WITH A HAND-HELD WORK EQUIPMENT
US8664582B2 (en) * 2009-10-12 2014-03-04 Hewlett-Packard Development Company, L.P. Display with an optical sensor
CN102915186A (en) * 2009-12-24 2013-02-06 联咏科技股份有限公司 Control method, control device, and electronic device
CN102221954B (en) * 2010-04-15 2014-01-29 中国移动通信集团公司 Zooming displayer as well as electronic device comprising same and zoom displaying method
CN102346626A (en) * 2010-08-05 2012-02-08 中国移动通信有限公司 Running program control method, device and system and light ray emission method and device
US8791963B2 (en) * 2010-10-29 2014-07-29 Nokia Corporation Responding to the receipt of zoom commands
CN102508561B (en) * 2011-11-03 2013-11-06 深圳超多维光电子有限公司 Operating rod
CN104012073B (en) * 2011-12-16 2017-06-09 奥林巴斯株式会社 The storage medium of the tracing program that filming apparatus and its image pickup method, storage can be processed by computer
CN104298438B (en) * 2013-07-17 2017-11-21 宏碁股份有限公司 Electronic installation and its touch operation method
CN110825254B (en) * 2018-08-13 2021-12-07 中兴通讯股份有限公司 Touch device and interaction method thereof

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5227985A (en) * 1991-08-19 1993-07-13 University Of Maryland Computer vision system for position monitoring in three dimensions using non-coplanar light sources attached to a monitored object
JPH05265637A (en) * 1992-03-16 1993-10-15 Toshiba Corp Three-dimensional pointing device
US5448261A (en) * 1992-06-12 1995-09-05 Sanyo Electric Co., Ltd. Cursor control device
US5926168A (en) * 1994-09-30 1999-07-20 Fan; Nong-Qiang Remote pointers for interactive televisions
GB9516441D0 (en) * 1995-08-10 1995-10-11 Philips Electronics Uk Ltd Light pen input systems
JP3814904B2 (en) * 1996-12-25 2006-08-30 ソニー株式会社 Position detection device and remote control device
US5949402A (en) * 1997-02-13 1999-09-07 International Business Machines Corporation Optical alignment method for pointing devices
US6377250B1 (en) * 1999-01-19 2002-04-23 Roni Raviv Device for use with raster display
WO2001043072A1 (en) * 1999-12-13 2001-06-14 Princeton Video Image, Inc. 2-d/3-d recognition and tracking algorithm for soccer application
JP4708581B2 (en) * 2000-04-07 2011-06-22 キヤノン株式会社 Coordinate input device, coordinate input instruction tool, and computer program

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008541222A (en) * 2005-06-02 2008-11-20 サムスン エレクトロニクス カンパニー リミテッド Electronic device capable of three-dimensional input of user commands
JP2007172585A (en) * 2005-11-25 2007-07-05 Sega Corp Coordinate input device
US8537137B2 (en) 2008-12-03 2013-09-17 Fujitsu Mobile Communications Limited Input device and information processing apparatus for entering an energy-saving mode
US8654100B2 (en) 2008-12-03 2014-02-18 Fujitsu Mobile Communications Limited Input device and mobile terminal
JP2010277191A (en) * 2009-05-26 2010-12-09 Toshiba Corp Information processing apparatus
KR20140043058A (en) * 2011-02-11 2014-04-08 마이크로소프트 코포레이션 Universal stylus device
KR101931924B1 (en) * 2011-02-11 2018-12-21 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 Universal stylus device
KR101953403B1 (en) * 2011-02-11 2019-02-28 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 Universal stylus device

Also Published As

Publication number Publication date
CA2488676C (en) 2014-05-13
CN100555186C (en) 2009-10-28
NZ537550A (en) 2006-09-29
WO2003104965A2 (en) 2003-12-18
CN1675612A (en) 2005-09-28
CA2488676A1 (en) 2003-12-18
ZA200500137B (en) 2006-01-25
NO20050115L (en) 2005-01-10
NO20050115D0 (en) 2005-01-10
AU2003240092A2 (en) 2003-12-22
AU2003240092A1 (en) 2003-12-22
EP1522006A2 (en) 2005-04-13
IL165578A0 (en) 2006-01-15
WO2003104965A3 (en) 2004-06-10
GB0213215D0 (en) 2002-07-17

Similar Documents

Publication Publication Date Title
US11416087B2 (en) Input system for controlling electronic device
JP2005529395A (en) Computer navigation
KR101709889B1 (en) Optical proximity sensors
US8466934B2 (en) Touchscreen interface
KR20170046624A (en) Apparatus and method for providing user interface, and computer-readable recording medium recording the same
US8270677B2 (en) Optical pointing device and method of detecting click event in optical pointing device
US20110012856A1 (en) Methods for Operation of a Touch Input Device
JP2008305087A (en) Display device
KR20070030294A (en) Apparatus and method for performing data entry with light based touch screen displays
KR20010083355A (en) A method of implementing touch pad using fingerprint reader and a touch pad apparatus for functioning as fingerprint scan
KR100349031B1 (en) A pen type light mouse device
KR20150022536A (en) Method and apparatus for providing user interface of medical diagnostic apparatus
JP2007518182A (en) Versatile optical mouse
KR200477008Y1 (en) Smart phone with mouse module
WO2019209365A1 (en) Stylus with display
US20220261097A1 (en) Input system for controlling electronic device
KR20050019736A (en) Computer navigation
KR20080017194A (en) Wireless mouse and driving method thereof
US20230081556A1 (en) Electronic Devices with Air Input Sensors
EP2101248A2 (en) Electronic device with unit for sending and receiving light

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060414

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060414

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20080108

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20081110

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081118

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20090217

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20090224

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090518

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090616

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20090916

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20090917

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20090928

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20091001

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091215

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20100202