WO2000008593A2 - Combined mouse - Google Patents

Combined mouse Download PDF

Info

Publication number
WO2000008593A2
WO2000008593A2 PCT/DE1999/002358 DE9902358W WO0008593A2 WO 2000008593 A2 WO2000008593 A2 WO 2000008593A2 DE 9902358 W DE9902358 W DE 9902358W WO 0008593 A2 WO0008593 A2 WO 0008593A2
Authority
WO
WIPO (PCT)
Prior art keywords
unit
information
motion detector
signals
movement
Prior art date
Application number
PCT/DE1999/002358
Other languages
German (de)
French (fr)
Other versions
WO2000008593A3 (en
Inventor
Thomas Teufel
Original Assignee
Thomas Teufel
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomas Teufel filed Critical Thomas Teufel
Priority to AU63249/99A priority Critical patent/AU6324999A/en
Priority to EP99950480A priority patent/EP1101189A2/en
Publication of WO2000008593A2 publication Critical patent/WO2000008593A2/en
Publication of WO2000008593A3 publication Critical patent/WO2000008593A3/en

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • G06F3/0317Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03543Mice or pucks

Definitions

  • the invention relates to a combination mouse for detecting movement and for reading in and visualizable information, such as alphanumeric characters, graphics and photographic images.
  • the object of the present invention is therefore to create a combination mouse for detecting movement and for reading in information, in which the data from the movement detection can be used to display the position in a visual system.
  • a combination mouse for detecting movement and for reading in information with a movement detector which continuously or at predetermined time intervals detects its respective position relative to a surface during a movement and into electronic signals containing information about the movement converts, with a computer unit that converts the electronic signals of the motion detector into position displays in a two- and / or three-dimensional visual system, for example into the positioning of a cursor on a screen, and with an optical unit that can be visualized by one Information, such as alphanumeric characters, graphics or photographic images, captures the reflected surface of reflected light from a radiation source and images it on an image sensor, which converts the light into a sequence of electronic signals and feeds it to a signal processing unit for further electronic processing listen
  • the device unit of the combi-mouse also has a display with which the optical unit or the image sensor detects it, which is input by means of the input unit or by means of remote data transmission.
  • Data transmitted from an external computer can be visualized promptly.
  • online monitoring of the information just acquired can take place via the display.
  • the display is initially used to define the desired section and to position the combination mouse accordingly in relation to the detection level. Then the information can be tracked on the display, true to the principle known from word processing, "what you get is what you see".
  • the object of the invention is therefore to convert the information about the movement of the motion detector relative to a surface or the movement of the surface relative to the motion detector in a computer unit in such a way that it can be used for position indication in a visual system which is data-connected to the computer unit.
  • the visual system can allow a two- or three-dimensional position display.
  • the visual unit and the image sensor can be used to record visualizable information, such as alphanumeric characters, graphics and / or photographic images, which are displayed on a surface and fed to a signal processing unit for further electronic processing.
  • the information obtained from the image sensor can be transmitted to the visual system which is data-connected to the computer unit and processed there.
  • the surface to be scanned by the optical unit can be identical to or different from the surface to be detected by the motion detector.
  • the radiation source used for the optical detection a built-in optical unit radiation source can be used, or it can be an external radiation source or overall homely daylight 'are used.
  • the motion detector can also expediently be used to generate synchronization signals for describing a movement of the motion detector with respect to the marked area and thus the relative position of information which can be visualized on the marked area.
  • the motion detector is in a data connection with the image-processing signal processing unit.
  • the synchronization signals are generated simultaneously or promptly with the image acquisition of the optical unit during a movement relative to the marked area and serve to supply the visualizable information of a freely selectable part of the marked area to electronic processing while maintaining the location information.
  • a series of images consisting of partially overlapping images of a predeterminable size, is first recorded and stored and then, while determining and suppressing the overlapping image parts, the image formation obtained is temporarily stored, for example for further processing in an image or word processor.
  • This process is called image assembly
  • the movement detector has means for contactless detection of the movement relative to the surface. This is particularly advantageous because it has been shown that mechanical parts used for motion detection, such as, for example, the roller-shaped scanning elements known from conventional computer mice, become dirty over a longer period of use, which considerably improves the suitability of the motion detector is reduced. Likewise, contact-free movement detection is advantageous if mechanical scanning is not possible due to the sensitivity of the surface to be scanned or a strongly relief-like surface structure.
  • suitable motion detectors work with the help of light or other electromagnetic radiation, sound waves or by means of electrical or magnetic fields.
  • a particularly suitable movement detector has a matrix of optical detection means arranged next to one another in a surface, by means of which a movement which is relative to the surface can be converted into a sequence of electronic signals.
  • the movement along the surface carried out by the detector is thus easy to understand on the basis of the chronological sequence of the electronic signals emitted by the individual optical detection means.
  • An array of photodiodes or selected pixels of a CCD image sensor comes as a matrix.
  • the motion detector has a rotationally symmetrical scanning element that is rotatably mounted about at least one axis. This results in a particularly simple handling of the combination mouse according to the invention.
  • the motion detector has a Hall element with a scanning element, the scanning element being surrounded by an inhomogeneous magnetic field.
  • the rotary movement of the scanning element causes a periodic change in the Hall voltage.
  • the motion detector has an optical detector with a scanning element, the surface of the scanning element being designed to be optically inhomogeneous in such a way that, when the scanning element rotates, electrical signals are generated in cooperation with the optical detector, which signals the respective Rotational movement can be clearly assigned.
  • the device unit is provided with an input unit, by means of which control signals can be transmitted to the computer unit and / or to the signal processing unit.
  • a particularly simple and efficient handling results if the input unit for the phonetic input of control commands is provided with a microphone and a conversion electronics connected to it, which translates the phonetic signal of given sounds or words into predetermined control signals.
  • a keyboard can be considered as an advantageous input unit, by means of which the input of further information or of processing programs is also made possible.
  • the keyboard can be designed in the form of an arrangement of hard or soft keys.
  • the combi-mouse is provided with a — preferably serial — interface.
  • the device unit has digital storage elements. This makes it possible to save imported text or complex visual information.
  • the equipment of the combi-mouse according to the invention with a microprocessor extends the functional possibilities to that of a computer and enables the complex processing of recorded, entered, calculated and / or transmitted information.
  • the combi-mouse represents a portable pocket PC.
  • the device unit comprises a distance meter, by means of which the distance of the device unit can be determined at a predetermined position relative to the marked area and converted into electronic signals that can be used as information about a real or virtual position indication.
  • a distance meter can, on the one hand, be used to enable non-contact detection of information which can be visualized even when the distance between the device unit and the area provided with this information varies.
  • the detection of the distance as a third coordinate also enables a three-dimensional position specification in the visual system connected to the computer unit.
  • Fig. 4b the principle of distance measurement in a
  • the combi-mouse 1 shown in FIG. 1 is a non-contact device with a motion detector 2 and with a detection unit 3 for detecting visualizable information, for example alphanumeric characters, graphics, photographic images, located on a surface 4 , Relief structures or other two- and / or three-dimensional representations.
  • the motion detector 2 and the detection unit 3 are integrated in a compact device unit 5, which at the same time, as explained in more detail below, devices for input, Data transmission, processing and visualization as well as an internal power supply.
  • the contact-free motion detector 2 shown in FIG. 3 has - integrated in a microchip 10 - a semiconductor emitter 11 and a total of five photodiodes 12, 12 ', 12 ", 12"', 13.
  • the photodiodes 12, 12 ', 12 ", 12"' serve to detect motion components parallel to a plane, while the photodiode 13 measures the vertical distance of the motion detector allowed from the surface 4.
  • the mode of operation of the non-contact movement detector 2 can be described as follows:
  • the semiconductor emitter 11 is actuated by suitable control electronics as soon as the intended movement detection begins.
  • the light focused by the lens 14 from the semiconductor emitter 11 in the direction of the surface 4 is reflected by the latter and imaged by the lens 14 onto the microchip 10.
  • the photodiodes 12, 12 ', 12 ", 12'" and 14 at least partially detect the reflected light.
  • the electrical pulses of the photodiodes 12, 12 ', 12 ", 12'” are amplified in an A / D converter 15 and used as a digital signal from a computer unit 16 of the further electronic see processing fed. These signals can be used, in particular, for position display or for cursor control in a visual system, such as a computer screen, which is data-connected to the device unit 5 but not shown here.
  • the detecting unit 3 includes an optical unit 21 and an image sensor 22.
  • the image sensor 22 it is preferably a high resolution CCD image sensor 10 of some 5 to 10 6 pixels / cm 2 or more.
  • the optical unit comprises optics known per se, as described in detail, for example, in DE 196 25 767 AI. It essentially comprises a light source, for example a light-emitting diode 27, a focusing lens unit 28 and an adjustable slit diaphragm 29.
  • the detection unit 3 When the detection unit 3 is used as intended, the light emitted by the light-emitting diode 27 is focused by the lens unit 28 onto the surface 4 which is provided with information which can be visualized.
  • the adjustability of the light emitted by the light-emitting diode 27 is focused by the lens unit 28 onto the surface 4 which is provided with information which can be visualized.
  • Slit diaphragm 29 enables the illumination of a more or less large section of the area 4.
  • the light reflected from the area 4 is wholly or partially projected onto the image sensor 22, in which the light is converted in a known manner into a sequence of electronic signals and for amplification
  • a / D converter 15 is supplied.
  • the amplified electronic signals of the motion detector 2 are converted into synchronization signals in a signal processing unit 31.
  • These synchronization signals which contain the information about the movement of the motion detector and thus the device unit 5, are fed together with the amplified image signals of the image sensor 22 to a signal processing unit 33 and converted into digital information packets which contain the full information about the image recording and about the movement.
  • the information packets can be stored in a storage unit 34.
  • the intended use of a combination mouse 1 working with a non-contact motion detector 2 also includes the case that the distance between the device unit 5 and the surface 4 is variable.
  • the motion detector 2 has means for distance detection for this purpose, the mode of operation of which is described below with reference to FIGS. 4 a and b.
  • a light signal 38 in the example a sinusoidally modulated wave, is emitted by the semiconductor emitter 11 in the direction of the surface 4.
  • the light signal 38 is reflected on the marked area and reaches the photodiode 13.
  • the light propagation time t is determined by comparing the phase of the modulation signal 39 with the phase of the received light signal 38.
  • the amplitudes of the two signals 38, 39 are plotted as a function of time in FIG. 4b.
  • the method described is not limited to light in the visible frequency range. For this reason, emitters which emit in the infrared or ultraviolet frequency range can also be used as light sources.
  • the electronic components used for the distance measurement are shown in FIG. 5.
  • the emitted light of the semiconductor radiator 11 is modulated with the sine wave signal generated in the oscillator 41 and amplified in the signal amplifier 42.
  • the photodiode 13 receives the modulated light signal 38 reflected on the surface 4, converts it into a modulated photovoltaic signal and feeds it to the amplifier 43.
  • the phase positions of the generated sine wave signal 39 and the photovoltaic signal 38 are compared in a discriminator 44.
  • the discriminator signal passes via the signal amplifier 45 to the computer unit 16, in which it is combined with the corresponding signals from the photodiodes 12, 12 ', 12 ", 12'” to form a digital information package and, if necessary, is fed to the image signal of the image sensor 22 in the signal processing unit 31.
  • the signal can also be used to control sensor motors 47, 48, by means of which the focal length of the lens arrangement 28 or the lens 14 can be set in accordance with the determined distance.
  • a laser can be used instead of the light emitting diode 14 and sufficiently smooth surfaces 4, the distance can be determined approximately by means of optical triangulation.
  • the determination of the distance L enables, on the one hand, the variation of the distance ' L of the detection unit 3 to the marked surface 4, and on the other hand, the distance L represents an additional parameter by means of which, in conjunction with the areal, from the signals of the photodiodes 12 , 12 ', 12 ", 12"' data, a three-dimensional position indication is made possible in a visual system connected to the device unit.
  • the data obtained from the motion detector 2 or the detection unit 3 are fed to a central control electronics 50, which is arranged on a circuit board 51 inside the device unit.
  • the central control electronics have a microprocessor 54 and one or more storage units 34, 55.
  • the storage units 34, 55 comprise working and / or permanent storage locations.
  • the central control electronics 50 is in data connection with further peripheral units: this includes an interface 57, an input unit 58 and a display 59.
  • a battery unit with — preferably rechargeable — batteries 60, 60 ′ is used for the autonomous power supply of the device unit 5.
  • Text, table or graphic programs, for example, can be evaluated directly in the central control electronics 50.
  • the programs, like any reference information, are stored in the memory unit 55 so that they can be called up.
  • Corresponding electronic control elements for the peripheral units are arranged on a second circuit board 61.
  • the interface 57 is used for electronic data exchange with external computers and is preferably designed as a serial interface to which the corresponding data transmission means can be permanently but detachably connected. In order to accelerate the processing of even large amounts of data, the interface 57 is designed as a fiber optic connection and is suitable for also being connected to networks of external computers and for being able to exchange data with them.
  • the device unit 5 has a transmitting and receiving unit 63, by means of which wireless data exchange with external systems is possible.
  • the input unit 58 is used, in particular, for inputting additional information or for inputting control commands to the central control electronics 50 in order, for example, to call up processing programs stored in the storage unit 55.
  • the input unit comprises a keyboard and / or a sensor input function.
  • the input unit 58 is data-connected to a microphone 68 and a comparator 69.
  • the electronic signal sequences obtained from sound signals in the microphone 68 are fed to the comparator 69, where they are compared with predetermined or entered signal sequences, which each represent codes for certain control commands and / or other information. If the two signal sequences match sufficiently, the comparator sends a control signal corresponding to the coding to the input unit 58, from which this signal is passed on to the central control electronics 50.
  • the display 59 which can comprise a liquid crystal display, for example, is used to visualize data, for example information that was acquired by the detection unit 3 and / or the motion detector 2, input by the input unit 58 or transmitted by communication with external computers; the display 59 also serves to display the status and to display any error messages.
  • the display is used for "online monitoring" during the recording.
  • the user recognizes the section that has just been recorded in the display.
  • the display thus serves on the one hand to position the combination mouse and on the other hand to control the recording of information.
  • the movement detector 75 of the combi-mouse 1 'in FIG. 2 does not operate without contact, but detects the relative movement of the detector via the direct mechanical contact of a scanning element with the surface 4.
  • the motion detector 75 has, as a scanning element, a freely rotatable scanning ball 76, on the surface of which small magnetic plates 77 are arranged evenly spaced from one another.
  • the magnetic field emanating from these magnetic plates can be detected by a Hall element 78 which is connected to the device unit 5 'and is spaced apart from the scanning ball 76 and has a plurality of Hall detectors 79.
  • the movement of the scanning ball 76 relative to the Hall element 78 leads to a periodic change in the magnetic field passing through the Hall element 78, and thus to a periodically changing the Hall voltages generated by the Hall detectors 79.
  • at least two Hall detectors 79 arranged in different directions, preferably perpendicular to one another, are required in the Hall element 78.
  • the electronic signals emanating from the Hall element 87 are, in the same way as the signals of the contact-free motion detector 2 of the combination mouse 1, an A / D
  • Converter 15 fed and fed to an electronic further processing.
  • the motion detection of the scanning ball 76 can also take place optically.
  • the surface of the scanning ball 76 is provided with a pattern of different color tones, for example with regularly arranged dark points on an overall lighter ball surface.
  • the spherical surface is illuminated by one or more light sources, such as light-emitting diodes.
  • detection takes place by means of an optical matrix sensor which detects the light from the light sources reflected from the spherical surface. Due to the light-dark sequence of the reflected radiation during the movement of the scanning ball 76, an exact movement image of the scanning ball 76 can be created.
  • the other electronic components and peripheral units of the combination mouse 1 'do not fundamentally differ from those of the combination mouse 1.
  • the surface 4 to be scanned by the detection unit 3 can be identical to or different from the surface 4 to be detected by the motion detector 2,70.
  • the latter is particularly the case, for example, in the case of a combination mouse used as a trackball, in which the surface 4 to be detected by a touching motion detector 70 corresponds to a finger surface of a user, and the marked area to be read by the detection unit 3 on a side of the device unit facing away from this is present.
  • the invention in particular expands the possible uses of previous computer mice or trackballs considerably and at the same time represents a powerful device for reading in visualizable information from a correspondingly marked area.
  • the combination mouse according to the invention combines a device for cursor control and a device for recording and intermediate storage, in particular of text and / or image information. It is therefore also able to do one of the main applications of a laptop, namely word processing, and therefore makes it unnecessary for a large number of users to purchase a corresponding device.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)

Abstract

The invention relates to a combined mouse (1) for detecting movement and reading information. Said mouse comprises a motion detector (2) that detects its position in relation to its surface (4) continuously or at predetermined intervals when a movement is carried out and converts it into an electronic signal containing information regarding said movement. The combined mouse also comprises a computer unit (16) converting the electronic signals of the motion detector (2) into position indications in a two-dimensional and/or three-dimensional visual system, approximately in the position of a cursor on a screen, in addition to an optical unit (3) that detects the surfaces containing visual information such as alphanumeric characters, graphic characters or photographic images marked by the reflected light of a radiation source (27) and displays said information on an image sensor (22) that transforms the light into a sequence of electronic signals and supplies said light to a signal processing unit (31) for electronic processing. The signals generated by the motion detector (2) can be used to synchronize the image information detected by the image sensor (3).

Description

B E S C H R E I B U N G DESCRIPTION
Kombi -MausCombi mouse
Die Erfindung betrifft eine Kombi-Maus zum Erfassen von Bewegung und zum Einlesen und von visualisierbarer Information, wie alphanumerischer Zeichen, Grafiken und fotographischen Bildern.The invention relates to a combination mouse for detecting movement and for reading in and visualizable information, such as alphanumeric characters, graphics and photographic images.
Aus der DE 196 24 767 AI ist ein Lesegerät für die optische Erfassung und Speicherung von visuell markierten und proji- zierten alphanumerischen Zeichen, Grafiken und fotografischen Bildern bekannt. Bei diesem Gerät wird das Licht einer Strahlungsquelle auf einen Ausschnitt einer mit alphanumerischen Zeichen markierten Fläche projiziert und das von der Fläche reflektierte Licht in einer optischen Einheit auf einen Bildsensor abgebildet, der das Licht in eine Abfolge von elektronischen Signalen umwandelt. Zeitgleich mit der optischen Information gewonnene Signale eines Dewegungsdetektors dienen als Synchronisationssignale mit dem Ziel, die Zeicheninformation eines frei wählbaren Teils der markierten Fläche in Form von Informationspaketen in einer die elektronische Weiterverarbeitung zugänglichen Weise abzuspeichern. Die vom Bildsensor gewonnene Information ist dabei logisch fest mit denen des Bewegungsdetektors verknüpft. Es bei diesem vorbekannten Gerät somit nicht möglich, die von dem Bewegungsdetektor gewonnenen Informationen unabhängig von denen des Bildsensors zu verwenden, und erstere etwa zur Cursorsteuerung in einen visuellen System einzusetzen.From DE 196 24 767 AI a reader for the optical detection and storage of visually marked and projected alphanumeric characters, graphics and photographic images is known. In this device, the light from a radiation source is projected onto a section of an area marked with alphanumeric characters and the light reflected from the area is imaged in an optical unit on an image sensor, which converts the light into a sequence of electronic signals. Signals obtained from a motion detector at the same time as the optical information serve as synchronization signals with the aim of storing the character information of a freely selectable part of the marked area in the form of information packets in a manner which is accessible to further electronic processing. The information obtained from the image sensor is logically linked to that of the motion detector. It is therefore not possible with this previously known device to use the information obtained from the motion detector independently of that from the image sensor, and to use the former, for example, for cursor control in a visual system.
Aufgabe der vorliegenden Erfindung ist daher, eine Kombi- Maus zum Erfassen von Bewegung und zum Einlesen von Infor- mation zu schaffen, bei dem die Daten der Bewegungserfassung zur Positionsanzeige in einem visuellen System einsetzbar sind.The object of the present invention is therefore to create a combination mouse for detecting movement and for reading in information, in which the data from the movement detection can be used to display the position in a visual system.
Gelöst ist diese Aufgabe mit einer Kombi-Maus zum Erfassen von Bewegung und zum Einlesen von Information mit einem Bewegungsdetektor, der kontinuierlich oder in vorgegebenen Zeitabständen seine jeweilige Position relativ zu einer Oberfläche bei einer Bewegung erfaßt und in elektronische, eine Information über die Bewegung enthaltende Signale um- wandelt, mit einer Rechnereinheit, die die elektronischen Signale des Bewegungsdetetektors in Positionsanzeigen in einem zwei- und/oder dreidimensionalen visuellen System, etwa in die Positionierung eines Cursors auf einem Bildschirm, umwandelt, und mit einer optischen Einheit, die von einer mit visualisierbarer Information, etwa alphanumerischen Zeichen, Graphiken oder fotografischen Bildern, markierten Fläche reflektiertes Licht einer Strahlungsquelle erfaßt und auf einen Bildsensor abbildet, der das Licht in eine Abfolge elektronischer Signale umwandelt und zur elek- tronischen Weiterverarbeitung einer Signalverarbeitungseinheit zuführt. Die Geräteeinheit der Kombi-Maus weist ferner ein Display auf, mit dem von der optischen Einheit oder dem Bildsensor erfaßte, mittels der Eingabeeinheit eingegebene oder mit- tels Datenferntragung. von einem externen Rechner übermittelte Daten zeitnah visuell darstellbar sind. Insbesondere kann über das Display eine online Überwachung der gerade erfaßten Information erfolgen. Das Display wird zunächst genutzt, um den gewünschten Ausschnitt zu definieren und die Kombi-Maus relativ zur Erfassungsebene entsprechend zu positionieren. Anschließend kann auf dem Display getreu dem aus der Textverarbeitung bekannten Grundsatz „what you get is what you see" die Erfassung der Information verfolgt werden.This object is achieved with a combination mouse for detecting movement and for reading in information with a movement detector which continuously or at predetermined time intervals detects its respective position relative to a surface during a movement and into electronic signals containing information about the movement converts, with a computer unit that converts the electronic signals of the motion detector into position displays in a two- and / or three-dimensional visual system, for example into the positioning of a cursor on a screen, and with an optical unit that can be visualized by one Information, such as alphanumeric characters, graphics or photographic images, captures the reflected surface of reflected light from a radiation source and images it on an image sensor, which converts the light into a sequence of electronic signals and feeds it to a signal processing unit for further electronic processing listen The device unit of the combi-mouse also has a display with which the optical unit or the image sensor detects it, which is input by means of the input unit or by means of remote data transmission. Data transmitted from an external computer can be visualized promptly. In particular, online monitoring of the information just acquired can take place via the display. The display is initially used to define the desired section and to position the combination mouse accordingly in relation to the detection level. Then the information can be tracked on the display, true to the principle known from word processing, "what you get is what you see".
Beim Gegenstand der Erfindung handelt es sich somit darum, die Information über die Bewegung des Bewegungsdetektors gegenüber einer Oberfläche bzw. der Bewegung der Oberfläche gegenüber dem Bewegungsdetektor in einer Rechnereinheit derart umzuwandeln, daß sie zur Positionsanzeige in einem mit der Rechnereinheit datenverbundenen visuellen System einsetzbar ist. Das visuelle System kann dabei eine zwei- oder dreidimensionale Positionsanzeige erlauben. Unabhängig davon kann mit Hilfe der optischen Einheit und des Bildsen- sors auf einer Fläche abgebildete visualisierbare Information, etwa alphanumerische Zeichen, Grafiken und/oder fotografische Bilder, erfaßt und an eine Signalverarbeitungseinheit zur elektronischen Weiterverarbeitung zugeführt werden. Insbesondere können die vom Bildsensor gewonnenen Informationen in das mit der Rechnereinheit datenverbundenen visuellen System übertragen und dort bearbeitet werden. Die von der optischen Einheit abzuscannende Fläche kann identisch mit oder verschieden von der vom Bewegungsdetektor zu erfassenden Oberfläche sein. Als Strahlungsquelle zur optischen Erfassung kann eine in der optischen Einheit eingebaute Strahlungsquelle verwendet werden, oder es kann eine externe Strahlungsquelle oder ge- wohnliches Tageslicht ' zum Einsatz kommen.The object of the invention is therefore to convert the information about the movement of the motion detector relative to a surface or the movement of the surface relative to the motion detector in a computer unit in such a way that it can be used for position indication in a visual system which is data-connected to the computer unit. The visual system can allow a two- or three-dimensional position display. Independently of this, the visual unit and the image sensor can be used to record visualizable information, such as alphanumeric characters, graphics and / or photographic images, which are displayed on a surface and fed to a signal processing unit for further electronic processing. In particular, the information obtained from the image sensor can be transmitted to the visual system which is data-connected to the computer unit and processed there. The surface to be scanned by the optical unit can be identical to or different from the surface to be detected by the motion detector. The radiation source used for the optical detection a built-in optical unit radiation source can be used, or it can be an external radiation source or overall homely daylight 'are used.
Zweckmäßigerweise ist der Bewegungsdetektor auch zur Erzeugung von Synchronisationssignalen zur Beschreibung einer Bewegung des Bewegungsdetektors gegenüber der markierten Fläche und somit der Relativposition visualisierbarer Information auf der markierten Fläche einsetzbar. Hierzu steht der Bewegungsdetektor mit der bildverarbeitenden Signalverarbeitungseinheit in Datenverbindung. Die Synchronisationssignale werden gleichzeitig oder zeitnah mit der Bilderfassung der optischen Einheit bei einer Bewegung relativ zu der markierten Fläche erzeugt und dienen dazu, die visualisierbare Information eines frei wählbaren Teiles der markierten Fläche unter Wahrung der Ortsinformation einer elektronischen Weiterverarbeitung zuzuführen. Hierzu wird beipielsweise eine Bildserie, bestehend aus sich teilweise überlappenden Bildern vorgebbarer Größe, zunächst erfaßt und abgespeichert und dann unter Ermittlung und Unterdrük- kung der überlappenden Bildteile die erhaltene Bildiforma- tion beispielsweise zur Weiterverarbeitung in einer Bild- oder Textverarbeitung zwischengespeichert. Dieser Vorgang wird als Bildassemblierung bezeichnetThe motion detector can also expediently be used to generate synchronization signals for describing a movement of the motion detector with respect to the marked area and thus the relative position of information which can be visualized on the marked area. For this purpose, the motion detector is in a data connection with the image-processing signal processing unit. The synchronization signals are generated simultaneously or promptly with the image acquisition of the optical unit during a movement relative to the marked area and serve to supply the visualizable information of a freely selectable part of the marked area to electronic processing while maintaining the location information. For this purpose, for example, a series of images, consisting of partially overlapping images of a predeterminable size, is first recorded and stored and then, while determining and suppressing the overlapping image parts, the image formation obtained is temporarily stored, for example for further processing in an image or word processor. This process is called image assembly
In einer vorteilhaften Weiterbildung weist der Bewegungsdetektor Mittel zum berührungsfreien Erfassen der Bewegung relativ zur Oberfläche auf. Dies ist insbesondere deshalb vorteilhaft, weil sich gezeigt hat, daß zur Bewegungsdetek- tion eingesetzte mechanische Teile, wie beispielsweise die von üblichen Computermäusen her bekannten walzenförmigen Abtastelemente, bei längerer Benutzungsdauer verschmutzen, wodurch die Tauglichkeit des Bewegungsdetektors erheblich gemindert wird. Gleichfalls ist eine berührungsfreie Bewe- gungsdetektion vorteilhaft, wenn eine mechanische Abtastung wegen der Empfindlichkeit der abzutastenden Oberfläche oder einer stark reliefartig ausgebildeten Oberflächenstruktur nicht möglich ist.In an advantageous development, the movement detector has means for contactless detection of the movement relative to the surface. This is particularly advantageous because it has been shown that mechanical parts used for motion detection, such as, for example, the roller-shaped scanning elements known from conventional computer mice, become dirty over a longer period of use, which considerably improves the suitability of the motion detector is reduced. Likewise, contact-free movement detection is advantageous if mechanical scanning is not possible due to the sensitivity of the surface to be scanned or a strongly relief-like surface structure.
Geeignete Bewegungsdetektoren arbeiten je nach der Beschaffenheit der Oberfläche etwa mit Hilfe von Licht oder son- stiger elektromagnetischer Strahlung, Schallwellen oder mittels elektrischer oder magnetischer Felder.Depending on the nature of the surface, suitable motion detectors work with the help of light or other electromagnetic radiation, sound waves or by means of electrical or magnetic fields.
Ein besonders geeigneter Bewegungsdetektor weist eine Matrix aus in einer Fläche nebeneinander angeordneten opti- sehen Erfassungsmitteln auf, mittels derer eine relativ zur Oberfläche erfolgte Bewegung in eine Abfolge elektronischer Signale umwandelbar ist. Die vom Detektor vollzogene Bewegung entlang der Oberfläche ist damit leicht aufgrund der zeitlichen Abfolge der von den einzelnen optischen Erfas- sungsmitteln abgegebenen elektronischen Signale nachvollziehbar. Als Matrix kommt dabei etwa eine Anordnung von Photodioden oder ausgewählten Pixeln eines CCD-Bildsensors.A particularly suitable movement detector has a matrix of optical detection means arranged next to one another in a surface, by means of which a movement which is relative to the surface can be converted into a sequence of electronic signals. The movement along the surface carried out by the detector is thus easy to understand on the basis of the chronological sequence of the electronic signals emitted by the individual optical detection means. An array of photodiodes or selected pixels of a CCD image sensor comes as a matrix.
In einer anderen vorteilhaften Weiterbildung weist der Be- wegungsdetektor ein rotationssymmetrisch ausgebildetes und um mindestens eine Achse drehbar gelagertes Abtastelement auf. Hierdurch ergibt sich eine besonders einfache Handhabbarkeit der erfindungsgemäßen Kombi-Maus.In another advantageous development, the motion detector has a rotationally symmetrical scanning element that is rotatably mounted about at least one axis. This results in a particularly simple handling of the combination mouse according to the invention.
Die Detektion der Bewegung relativ zur Oberfläche kann zweckmäßigerweise unter Zuhilfenahme des Halleffekts erfolgen. Insoweit sieht eine abermalige wichtige Weiterbildung der Erfindung vor, daß der Bewegungsdetektor ein Hallelement mit einem Abtastelement aufweist, wobei das Abtastele- ment von einem inhomogenen Magnetfeld umgeben ist. Die Drehbewegung des Abtastelements verursacht eine periodische Veränderung der Hallspannung. Dieser Aufbau ermöglicht eine sehr genaue Bestimmung der Position des Lesege- räts auf der markierten Fläche.The movement relative to the surface can expediently be detected with the aid of the Hall effect. In this respect, another important development of the invention provides that the motion detector has a Hall element with a scanning element, the scanning element being surrounded by an inhomogeneous magnetic field. The rotary movement of the scanning element causes a periodic change in the Hall voltage. This structure enables a very precise determination of the position of the reading device on the marked area.
Alternativ zur Detektion mittels des Halleffekts weist der Bewegungsdetektor einen optischen Detektor mit einem Abtastelement auf, wobei die Oberfläche des Abtastelements der- art optisch inhomogen gestaltet ist, daß in Zusammenwirken mit dem optischen Detektor bei einer Drehung des Abtastelements elektrische Signale erzeugt werden, die der jeweiligen Drehbewegung eindeutig zuzuordnen sind.As an alternative to detection by means of the Hall effect, the motion detector has an optical detector with a scanning element, the surface of the scanning element being designed to be optically inhomogeneous in such a way that, when the scanning element rotates, electrical signals are generated in cooperation with the optical detector, which signals the respective Rotational movement can be clearly assigned.
In einer Weiterbildung ist die Geräteeinheit mit einer Eingabeeinheit versehen, mittels der Steuerungssignale an die Rechnereinheit und/oder an die Signalverarbeitungseinheit übermittelbar sind.In one development, the device unit is provided with an input unit, by means of which control signals can be transmitted to the computer unit and / or to the signal processing unit.
Eine besonders einfache und rationelle Handhabung ergibt sich, wenn die Eingabeeinheit zur phonetischen Eingabe von Steuerungsbefehlen mit einem Mikrofon und einer an diesem angeschlossenen Umwandlungselektronik versehen ist, die das phonetische Signal vorgegebener Laute oder Worte in vorbe- stimmte Steuerungssignale übersetzt.A particularly simple and efficient handling results if the input unit for the phonetic input of control commands is provided with a microphone and a conversion electronics connected to it, which translates the phonetic signal of given sounds or words into predetermined control signals.
Als vorteilhafte Eingabeeinheit kommt eine Tastatur in Betracht, mittels der auch die Eingabe weiterer Informationen oder von Verarbeitungsprogrammen ermöglicht wird. Die Ta- statur kann dabei etwa in Form einer Anordnung von Hard- oder Softkeys ausgeführt sein.A keyboard can be considered as an advantageous input unit, by means of which the input of further information or of processing programs is also made possible. The keyboard can be designed in the form of an arrangement of hard or soft keys.
Um den Datenaustausch mit einem externen Rechner zu ermöglichen, ist die Kombi-Maus nach Anspruch 11 mit einer - vorzugsweise seriellen - Schnittstelle versehen. Nach einer abermaligen Ausgestaltung weist die Geräteeinheit digitale Speicherelemente auf. Dadurch ist es möglich, eingelesene Texte oder komplexe bildliche Informationen ab- zuspeichern.In order to enable data exchange with an external computer, the combi-mouse is provided with a — preferably serial — interface. According to another configuration, the device unit has digital storage elements. This makes it possible to save imported text or complex visual information.
Die Ausstattung der erfindungsgemäßen Kombi-Maus mit einem Mikroprozessor erweitert die Funktionsmöglichkeiten hin zu denen eines Computers und ermöglicht die komplexe Verarbei- tung erfaßter, eingegebener, errechneter und/oder übermittelter Information. Die Kombi-Maus stellt in dieser Ausgestaltung einen transportablen Taschen-PC dar.The equipment of the combi-mouse according to the invention with a microprocessor extends the functional possibilities to that of a computer and enables the complex processing of recorded, entered, calculated and / or transmitted information. In this embodiment, the combi-mouse represents a portable pocket PC.
In einer besonders vorteilhaften Weiterbildung umfaßt die Geräteeinheit einen Distanzmesser, mittels dessen der Abstand der Geräteeinheit bei einer vorgegebenen Position relativ zur markierten Fläche ermittelbar und in elektronische, als Information über eine reale oder virtuelle Positionsangabe nutzbare Signale umwandelbar sind. Ein solcher Distanzmesser kann einerseits dazu eingesetzt werden, eine berührungsfreie Erfassung von visualisierbarer Information selbst bei einer Variation des Abstandes zwischen der Geräteeinheit und der mit dieser Information versehenen Fläche zu ermöglichen. Andererseits ermöglicht die Erfassung des Abstandes als einer dritte Koordinate auch eine dreidimensionale Positionsangabe in dem mit der Rechnereinheit verbundenen visuellen System.In a particularly advantageous development, the device unit comprises a distance meter, by means of which the distance of the device unit can be determined at a predetermined position relative to the marked area and converted into electronic signals that can be used as information about a real or virtual position indication. Such a distance meter can, on the one hand, be used to enable non-contact detection of information which can be visualized even when the distance between the device unit and the area provided with this information varies. On the other hand, the detection of the distance as a third coordinate also enables a three-dimensional position specification in the visual system connected to the computer unit.
Besonders zweckmäßig erweist sich der Einsatz der Erfindung als Computermaus oder als Trackball. Durch die zusätzliche Funktion der Erfassungsmöglichkeit visualisierbarer Information ist die Erfindung konventionellen Computermäusen oder Trackballs deutlich überlegen. Anhand der Zeichnungen sollen nachfolgend Ausführungsbei- . spiele der Erfindung näher erläutert werden. In schematischen Ansichten zeigen:The use of the invention as a computer mouse or as a trackball has proven particularly expedient. Due to the additional function of the possibility of recording visualizable information, the invention is clearly superior to conventional computer mice or trackballs. Based on the drawings, the following are examples. games of the invention are explained in more detail. Schematic views show:
Fig. 1: eine berührungsfrei arbeitende Kombi-Maus in einem Längsschnitt,1: a non-contact combi mouse in a longitudinal section,
Fig. 2: eine mit einer Hallsonde als Berührungsde- tektor versehene Kombi-Maus,2: a combination mouse provided with a Hall probe as a touch detector,
Fig. 3: den Bewegungsdetektor einer erfindungsgemäßen Kombi-Maus in einer Draufsicht,3: the motion detector of a combination mouse according to the invention in a plan view,
Fig. 4a: einen beabstandet von einer Fläche gehaltenen Distanzmesser,4a: a spacer held at a distance from a surface,
Fig. 4b: das Prinzip der Abstandsmessung bei einemFig. 4b: the principle of distance measurement in a
Distanzmesser einer erfindungsgemäßen Kombi- Maus undDistance meter of a combination mouse according to the invention and
Fig. 5: in einem Blockschaltbild die elektronischen Komponenten des Distanzmessers aus Fig. 4a.5: in a block diagram, the electronic components of the distance meter from FIG. 4a.
Bei der in Fig. 1 gezeigten Kombi-Maus 1 handelt es sich um ein berührungsfrei arbeitendes Gerät mit einem Bewegungsdetektor 2 sowie mit einer Erfassungseinheit 3 zur Erfassung von auf einer Fläche 4 befindlicher visualisierbarer Information, etwa von alphanumerischen Zeichen, Grafiken, foto- grafischen Bildern, ReliefStrukturen oder sonstigen zwei- und/oder dreidimensionalen Repräsentationen.The combi-mouse 1 shown in FIG. 1 is a non-contact device with a motion detector 2 and with a detection unit 3 for detecting visualizable information, for example alphanumeric characters, graphics, photographic images, located on a surface 4 , Relief structures or other two- and / or three-dimensional representations.
Der Bewegungsdetektor 2 und die Erfassungseinheit 3 sind in einer kompakten Geräteeinheit 5 integriert, die zugleich, wie unten näher ausgeführt, Vorrichtungen zur Eingabe, Übertragung, Verarbeitung und Visualisierung von Daten sowie eine interne Stromversorgung umfaßt.The motion detector 2 and the detection unit 3 are integrated in a compact device unit 5, which at the same time, as explained in more detail below, devices for input, Data transmission, processing and visualization as well as an internal power supply.
Der in Fig. 3 gezeigte berührungsfreie Bewegungsdetektor 2 weist - in einem Mikrochip 10 integriert - einen Halbleiterstrahier 11 sowie insgesamt fünf Fotodioden 12, 12', 12", 12" ',13 auf. Die Fotodioden 12, 12' , 12" , 12" ' dienen bei einer Bewegung des Detektors relativ zu einer zwei- oder dreidimensional ausgerichteten Oberfläche 4 der Er- fassung von Bewegungskomponenten parallel zu einer Ebene, während die Fotodiode 13 die Messung des Vertikalabstandes des Bewegungsdetektors von der Oberfläche 4 erlaubt.The contact-free motion detector 2 shown in FIG. 3 has - integrated in a microchip 10 - a semiconductor emitter 11 and a total of five photodiodes 12, 12 ', 12 ", 12"', 13. When the detector moves relative to a two- or three-dimensionally oriented surface 4, the photodiodes 12, 12 ', 12 ", 12"' serve to detect motion components parallel to a plane, while the photodiode 13 measures the vertical distance of the motion detector allowed from the surface 4.
Die Funktionsweise des berührungsfreien Bewegungsdetektors 2 läßt sich wie folgt beschreiben: Durch eine geeignete An- steuerungselektronik wird der Halbleiterstrahler 11 betätigt, sobald die bestimmungsgemäße Bewegungsdetektion beginnt. Das durch die Linse 14 vom Halbleiterstrahler 11 in Richtung auf die Oberfläche 4 fokussierte Licht wird von dieser reflektiert und von der Linse 14 auf den Mikrochip 10 abgebildet. Die Fotodioden 12, 12', 12", 12'" und 14 erfassen zumindest teilweise das reflektierte Licht. Bei der Bewegung des Bewegungsdetektors 2 parallel zu einer durch die Anordnung der Fotodioden 12, 12', 12", 12"' be- stimmten Ebene wird in dem aus den Fotodioden 12, 12', 12", 12'" bestehenden Diodenarray ein Muster zeitlich aufeinanderfolgender Signale erzeugt, aus denen mittels einer geeigneten Datenverarbeitung die Richtung und die Geschwindigkeit der zu dieser Ebene parallelen Bewegungskom- ponenten der Bewegung des Detektors in eindeutiger Weise bestimmbar ist.The mode of operation of the non-contact movement detector 2 can be described as follows: The semiconductor emitter 11 is actuated by suitable control electronics as soon as the intended movement detection begins. The light focused by the lens 14 from the semiconductor emitter 11 in the direction of the surface 4 is reflected by the latter and imaged by the lens 14 onto the microchip 10. The photodiodes 12, 12 ', 12 ", 12'" and 14 at least partially detect the reflected light. When the motion detector 2 moves parallel to a plane determined by the arrangement of the photodiodes 12, 12 ', 12 ", 12"', a pattern becomes in the diode array consisting of the photodiodes 12, 12 ', 12 ", 12" " temporally successive signals are generated, from which the direction and speed of the movement components of the movement of the detector which are parallel to this plane can be determined uniquely by means of suitable data processing.
Die elektrischen Impulse der Fotodioden 12, 12' , 12" , 12' " werden in einem A/D-Konverter 15 verstärkt und als digita- les Signal einer Rechnereinheit 16 der weiteren elektroni- sehen Verarbeitung zugeführt. Diese Signale sind insbesondere zur Positionsanzeige oder zur Cursorsteuerung in einem mit der Geräteeineit 5 datenverbundenen - hier jedoch nicht gezeigten - visuellen System, etwa einem Computerbild- schirm, einsetzbar.The electrical pulses of the photodiodes 12, 12 ', 12 ", 12'" are amplified in an A / D converter 15 and used as a digital signal from a computer unit 16 of the further electronic see processing fed. These signals can be used, in particular, for position display or for cursor control in a visual system, such as a computer screen, which is data-connected to the device unit 5 but not shown here.
Die Erfassungseinheit 3 umfaßt ' eine optische Einheit 21 sowie einen Bildsensor 22. Bei dem Bildsensor 22 handelt es sich vorzugsweise um einen CCD-Bildsensor hoher Auflösung von einigen 105 -106 Pixeln/cm2 oder mehr. Die optische Einheit umfaßt eine an sich bekannte Optik, wie sie beispielsweise in der DE 196 25 767 AI ausführlich beschrieben ist. Sie umfaßt im wesentlichen eine Lichtquelle, etwa eine Leuchtdiode 27, eine fokussierenden Linseneinheit 28 sowie eine einstellbare Schlitzblende 29.The detecting unit 3 'includes an optical unit 21 and an image sensor 22. The image sensor 22 it is preferably a high resolution CCD image sensor 10 of some 5 to 10 6 pixels / cm 2 or more. The optical unit comprises optics known per se, as described in detail, for example, in DE 196 25 767 AI. It essentially comprises a light source, for example a light-emitting diode 27, a focusing lens unit 28 and an adjustable slit diaphragm 29.
Bei bestimmungsgemäßem Einsatz der Erfassungseinheit 3 wird das von der Leuchtdiode 27 emittierte Licht von der Linseneinheit 28 auf die mit visualisierbarer Information be- stückte Fläche 4 fokussiert. Die Einstellbarkeit derWhen the detection unit 3 is used as intended, the light emitted by the light-emitting diode 27 is focused by the lens unit 28 onto the surface 4 which is provided with information which can be visualized. The adjustability of the
Schlitzblende 29 ermöglicht dabei die Ausleuchtung eines mehr oder minder großen Ausschnitts der Fläche 4. Das von der Fläche 4 reflektierte Licht wird ganz oder teilweise auf den Bildsensor 22 projiziert, in welchem das Licht in bekannter Weise in eine Abfolge elektronischer Signale umgewandelt und zur Verstärkung einem A/D-Konverter 15 zugeführt wird.Slit diaphragm 29 enables the illumination of a more or less large section of the area 4. The light reflected from the area 4 is wholly or partially projected onto the image sensor 22, in which the light is converted in a known manner into a sequence of electronic signals and for amplification A / D converter 15 is supplied.
Bei der Bewegung der Erfassungseinheit 3 relativ zur Fläche 4 ist die Ermittlung der Relativposition der Erfassungseinheit 3 erforderlich. Hierzu werden die verstärkten elektronischen Signale des Bewegungsdetektors 2 in einer Signalverarbeitungseinheit 31 in Synchronisationssignale umgewandelt. Diese Synchronisationssignale, die die Information über die Bewegung des Bewegungsdetektors und somit der Geräteeinheit 5 enthalten, werden zusammen mit den verstärkten Bildsignalen des Bildsensors 22 einer Signalaufbereitungseinheit 33 zugeführt und in digitale Informationspakete umgewandelt, die die volle Information über die Bildaufnahme und über die Bewegung enthalten. Die Informationspakete sind in einer Speichereinheit 34 abspeicherbar.When the detection unit 3 moves relative to the surface 4, it is necessary to determine the relative position of the detection unit 3. For this purpose, the amplified electronic signals of the motion detector 2 are converted into synchronization signals in a signal processing unit 31. These synchronization signals, which contain the information about the movement of the motion detector and thus the device unit 5, are fed together with the amplified image signals of the image sensor 22 to a signal processing unit 33 and converted into digital information packets which contain the full information about the image recording and about the movement. The information packets can be stored in a storage unit 34.
Die bestimmungsgemäße Verwendung einer mit einem berüh- rungsfreien Bewegungsdetektor 2 arbeitenden Kombi-Maus 1 schließt auch den Fall ein, daß der Abstand zwischen der Geräteeinheit 5 und der Oberfläche 4 variabel ist. Wie be- reits erwähnt, weist der Bewegungsdetektor 2 hierzu Mittel zur Distanzerfassung auf, deren Wirkungsweise anhand der Fig. 4 a und b im folgenden beschrieben werden.The intended use of a combination mouse 1 working with a non-contact motion detector 2 also includes the case that the distance between the device unit 5 and the surface 4 is variable. As already mentioned, the motion detector 2 has means for distance detection for this purpose, the mode of operation of which is described below with reference to FIGS. 4 a and b.
Vom Halbleiterstrahler 11 wird ein Lichtsignal 38, im Bei- spiel eine sinusförmig durchmodulierte Welle, in Richtung auf die Oberfläche 4 abgestrahlt. Das Lichtsignal 38 wird an der markierten Fläche reflektiert und gelangt auf die Fotodiode 13. Für die dabei zurückgelegte Wegstrecke, die größer als der doppelte Abstand 2L zwischen dem Bewegungs- detektor 2 und der Oberfläche 4 ist, benötigt das Licht die Laufzeit t. Die Bestimmung der Lichtlaufzeit t erfolgt aus einem Vergleich der Phase des Modulationssignals 39 mit der Phase des empfangenen Lichtsignals 38. In Fig. 4b sind die Amplituden der beiden Signale 38,39 als Funktion der Zeit aufgetragen. Die Laufzeitdifferenz t2 - ti = t zwischen Modulationssignal 39 und Lichtsignal 38 führt zu markanten Unterschieden der Amplituden der beiden Signale zu einem gegebenen Zeitpunkt ti. Die beschriebene Methode ist nicht auf Licht im sichtbaren Frequenzbereich beschränkt. Als Lichtquellen sind daher auch Strahler einsetzbar, die im infraroten oder ultravioletten Frequenzbereich emittieren.A light signal 38, in the example a sinusoidally modulated wave, is emitted by the semiconductor emitter 11 in the direction of the surface 4. The light signal 38 is reflected on the marked area and reaches the photodiode 13. For the distance covered, which is greater than twice the distance 2L between the motion detector 2 and the surface 4, the light requires the transit time t. The light propagation time t is determined by comparing the phase of the modulation signal 39 with the phase of the received light signal 38. The amplitudes of the two signals 38, 39 are plotted as a function of time in FIG. 4b. The transit time difference t 2 - ti = t between modulation signal 39 and light signal 38 leads to marked differences in the amplitudes of the two signals at a given time ti. The method described is not limited to light in the visible frequency range. For this reason, emitters which emit in the infrared or ultraviolet frequency range can also be used as light sources.
Die für die Distanzmessung eingesetzten elektronischen Komponenten sind in Fig. 5 gezeigt. Das abgestrahlte Licht des Halbleiterstrahlers 11 wird mit dem im Oszillator 41 generierten und im Signalverstärker 42 verstärkten Sinuswellen- signal moduliert. Die Fotodiode 13 empfängt das modulierte, an der Oberfläche 4 reflektierte Lichtsignal 38, wandelt es in ein moduliertes photovoltaisches Signal um und leitet es dem Verstärker 43 zu. In einem Diskriminator 44 werden die Phasenlagen des generierten Sinuswellensignals 39 und des photovoltaischen Signals 38 verglichen. Das Ausgangssignal des Diskriminators 44 verhält sich proportional zur Phasenverschiebung und ist ein Maß für die vom Licht innerhalb einer Zeit t = t2 - ti mit der Geschwindigkeit c zurückgelegten Wegstrecke.The electronic components used for the distance measurement are shown in FIG. 5. The emitted light of the semiconductor radiator 11 is modulated with the sine wave signal generated in the oscillator 41 and amplified in the signal amplifier 42. The photodiode 13 receives the modulated light signal 38 reflected on the surface 4, converts it into a modulated photovoltaic signal and feeds it to the amplifier 43. The phase positions of the generated sine wave signal 39 and the photovoltaic signal 38 are compared in a discriminator 44. The output signal of the discriminator 44 is proportional to the phase shift and is a measure of the distance traveled by the light within a time t = t 2 - ti at the speed c.
Das Diskriminatorsignal gelangt über des Signalverstärker 45 zur Rechnereinheit 16, in der es mit den entsprechenden Signalen der Fotodioden 12, 12', 12", 12'" zu einem digitalen Informationspaket zusammengefaßt und gegebenenfalls in der Signalverarbeitungseinheit 31 dem Bildsignal des Bildsensors 22 zugeleitet wird.The discriminator signal passes via the signal amplifier 45 to the computer unit 16, in which it is combined with the corresponding signals from the photodiodes 12, 12 ', 12 ", 12'" to form a digital information package and, if necessary, is fed to the image signal of the image sensor 22 in the signal processing unit 31.
Das Signal ist auch zur Steuerung von Sensormotoren 47, 48 einsetzbar, mittels der etwa die Brennweite der Linsenan- Ordnung 28 oder der Linse 14 entsprechend dem ermittelten Abstand eingestellt werden können.The signal can also be used to control sensor motors 47, 48, by means of which the focal length of the lens arrangement 28 or the lens 14 can be set in accordance with the determined distance.
Alternativ zur beschriebenen Lichtlaufzeitmessung kann bei Einsatz eines Lasers anstelle der Leuchtdiode 14 und bei hinreichend glatten Oberflächen 4 der Abstand etwa mittels optischer Triangulation bestimmt werden.As an alternative to the described light transit time measurement, a laser can be used instead of the light emitting diode 14 and sufficiently smooth surfaces 4, the distance can be determined approximately by means of optical triangulation.
Die Ermittlung der Distanz L ermöglicht zum einen die Va- riation des Abstandes 'L der Erfassungseinheit 3 zur markierten Fläche 4, zum zweiten stellt die Distanz L einen zusätzlichen Parameter dar, mittels dessen, in Verbindung mit den flächenhaften, aus den Signalen der Fotodioden 12, 12', 12", 12"' gewonnenen Daten, eine dreidimensionale Positionsangabe in einem mit der Geräteeinheit in Datenverbindung stehenden visuellen System ermöglicht wird.The determination of the distance L enables, on the one hand, the variation of the distance ' L of the detection unit 3 to the marked surface 4, and on the other hand, the distance L represents an additional parameter by means of which, in conjunction with the areal, from the signals of the photodiodes 12 , 12 ', 12 ", 12"' data, a three-dimensional position indication is made possible in a visual system connected to the device unit.
Die vom Bewegungsdetektor 2 bzw. der Erfassungseinheit 3 gewonnenen Daten werden einer zentralen Steuerungselektro- nik 50 zugeleitet, die im Innern der Geräteeinheit auf einer Platine 51 angeordnet ist. Die zentrale Steuerungselektronik weist einen Mikroprozessor 54 sowie eine oder mehrere Speichereinheiten 34,55 auf. Die Speichereinheiten 34,55 umfassen Arbeits- und/oder Festspeicherplätze.The data obtained from the motion detector 2 or the detection unit 3 are fed to a central control electronics 50, which is arranged on a circuit board 51 inside the device unit. The central control electronics have a microprocessor 54 and one or more storage units 34, 55. The storage units 34, 55 comprise working and / or permanent storage locations.
Die zentrale Steuerungselektronik 50 steht mit weiteren Peripherieeinheiten in Datenverbindung: Hierzu gehören eine Schnittstelle 57, eine Eingabeeinheit 58 und ein Display 59. Zur autonomen Stromversorgung der Geräteeinheit 5 dient eine Batterieeinheit mit - vorzugsweise wiederaufladbaren - Batterien 60, 60' . In der zentralen Steuerungselektronik 50 können etwa Text- Tabellen- oder Grafikprogramme unmittelbar ausgewertet werden. Die Programme sind, ebenso wie etwaige Referenzinformationen, in der Speichereinheit 55 ab- rufbar abgelegt. Auf einer zweiten Platine 61 sind entsprechende elektronische Steuerungselemente für die Peripherieeinheiten angeordnet. Die Schnittstelle 57 dient zum elektronischen Datenaustausch mit externen Rechnern und ist vorzugsweise als serielle Schnittstelle ausgebildet, an der entsprechende Daten- Übertragungsmittel fest, aber ablösbar verbunden werden können. Um die Verarbeitung auch größerer Datenmengen zu beschleunigen, ist die Schnittstelle 57 als Glasfaseran- schluß konzipiert und geeignet, auch mit Netzwerken externer Rechner verbunden zu werden, und mit diesen in Daten- austausch treten zu können.The central control electronics 50 is in data connection with further peripheral units: this includes an interface 57, an input unit 58 and a display 59. A battery unit with — preferably rechargeable — batteries 60, 60 ′ is used for the autonomous power supply of the device unit 5. Text, table or graphic programs, for example, can be evaluated directly in the central control electronics 50. The programs, like any reference information, are stored in the memory unit 55 so that they can be called up. Corresponding electronic control elements for the peripheral units are arranged on a second circuit board 61. The interface 57 is used for electronic data exchange with external computers and is preferably designed as a serial interface to which the corresponding data transmission means can be permanently but detachably connected. In order to accelerate the processing of even large amounts of data, the interface 57 is designed as a fiber optic connection and is suitable for also being connected to networks of external computers and for being able to exchange data with them.
Des weiteren weist die Geräteeinheit 5 eine Sende- und Empfangseinheit 63 auf, mittels der ein drahtloser Datenaustausch mit externen Systemen möglich ist.Furthermore, the device unit 5 has a transmitting and receiving unit 63, by means of which wireless data exchange with external systems is possible.
Die Eingabeeinheit 58 dient insbesondere zur Eingabe zusätzlicher Information oder zur Eingabe von Steuerungsbefehlen an die zentrale Steuerungselektronik 50, um beispielsweise in der Speichereinheit 55 abgelegte Verarbei- tungsprogramme aufzurufen. Die Eingabeeinheit umfaßt dabei eine Tastatur und/oder eine sensorisch wirkende Eingabemöglichkeit .The input unit 58 is used, in particular, for inputting additional information or for inputting control commands to the central control electronics 50 in order, for example, to call up processing programs stored in the storage unit 55. The input unit comprises a keyboard and / or a sensor input function.
Um die phonetische Eingabe von Steuerbefehlen und sonstiger Information zu ermöglichen, ist die Eingabeeinheit 58 mit einem Mikrofon 68 sowie einem Komparator 69 datenverbunden. Die aus Schallsignalen im Mikrofon 68 gewonnenen elektronischen Signalfolgen werden dem Komparator 69 zugeleitet und dort mit vorbestimmten oder eingegebenen Signalfolgen ver- glichen, die jeweils Codierungen für bestimmte Steuerungsbefehle und/oder sonstiger Information repräsentieren. Bei einer hinreichenden Übereinstimmung beider Signalfolgen sendet der Komparator ein der Codierung ensprechendes Steuersignal an die Eingabeeinheit 58, von der aus dieses Si- gnal an die zentrale Steuerungselektronik 50 weitergegeben wird.In order to enable the phonetic input of control commands and other information, the input unit 58 is data-connected to a microphone 68 and a comparator 69. The electronic signal sequences obtained from sound signals in the microphone 68 are fed to the comparator 69, where they are compared with predetermined or entered signal sequences, which each represent codes for certain control commands and / or other information. If the two signal sequences match sufficiently, the comparator sends a control signal corresponding to the coding to the input unit 58, from which this signal is passed on to the central control electronics 50.
Das Display 59, das beispielsweise eine Flüssigkristallan- zeige umfassen kann, dient zur Visualisierung von Daten, etwa von Information, die mittels der Erfassungseinheit 3 und/oder des Bewegungsdetektors 2 erfaßt, von der Eingabeeinheit 58 eingegeben oder durch Kommunikation mit externen Rechnern übermittelt wurde; ferner dient das Display 59 zur Statusanzeige und zur Anzeige etwaiger Fehlermeldungen.The display 59, which can comprise a liquid crystal display, for example, is used to visualize data, for example information that was acquired by the detection unit 3 and / or the motion detector 2, input by the input unit 58 or transmitted by communication with external computers; the display 59 also serves to display the status and to display any error messages.
Insbesondere aber dient das Display zu einem „online- monitoring" bei der Erfassung. Der Benutzer erkennt dabei im Display jeweils den gerade erfaßten Ausschnitt. Das Dis- play dient somit einerseits der Positionierung der Kombi- Maus und andererseits der Kontrolle der Informationserfassung.In particular, however, the display is used for "online monitoring" during the recording. The user recognizes the section that has just been recorded in the display. The display thus serves on the one hand to position the combination mouse and on the other hand to control the recording of information.
Im Unterschied zur Kombi-Maus 1 arbeitet der Bewegungsde- tektor 75 der Kombi-Maus 1' in Fig. 2 nicht berührungsfrei, sondern erfaßt die Relativbewegung des Detektors über den direkten mechanischen Kontakt eines Abtastelements mit der Oberfläche 4.In contrast to the combi-mouse 1, the movement detector 75 of the combi-mouse 1 'in FIG. 2 does not operate without contact, but detects the relative movement of the detector via the direct mechanical contact of a scanning element with the surface 4.
In der in Fig. 2 gezeigten Ausführungsform weist der Bewegungsdetektor 75 als Abtastelement eine frei drehbar gelagerte Abtastkugel 76 auf, auf deren Oberfläche kleine Ma- gnetplättchen 77 gleichmäßig beabstandet voneinander angeordnet sind. Das von diesen Magnetplättchen ausgehende Ma- gnetfeld ist von einem mit der Geräteeinheit 5' verbundenen und beabstandet von der Abtastkugel 76 angeordneten Hallelement 78 detektierbar, das mehrere Halldetektoren 79 aufweist. Die Bewegung der Abtastkugel 76 gegenüber dem Hallelement 78 führt zu einer periodischen Änderung des das Hal- lelement 78 durchsetzenden Magnetfelds, und damit zu einer periodischen Änderung der von den Halldetektoren 79 erzeugten Hallspannungen. Um die Bewegung der Abtastkugel 76 in eindeutiger Weise in Hallspannungssignale umsetzen zu können, bedarf es dabei wenigstens zweier in unterschiedli- chen Richtungen, vorzugsweise senkrecht zueinander angeordneten Halldetektoren 79 im Hallelement 78.In the embodiment shown in FIG. 2, the motion detector 75 has, as a scanning element, a freely rotatable scanning ball 76, on the surface of which small magnetic plates 77 are arranged evenly spaced from one another. The magnetic field emanating from these magnetic plates can be detected by a Hall element 78 which is connected to the device unit 5 'and is spaced apart from the scanning ball 76 and has a plurality of Hall detectors 79. The movement of the scanning ball 76 relative to the Hall element 78 leads to a periodic change in the magnetic field passing through the Hall element 78, and thus to a periodically changing the Hall voltages generated by the Hall detectors 79. In order to be able to unambiguously convert the movement of the scanning ball 76 into Hall voltage signals, at least two Hall detectors 79 arranged in different directions, preferably perpendicular to one another, are required in the Hall element 78.
Die vom Hallelement 87 ausgehenden elektronischen Signale werden, in gleicher Weise wie die Signale des berührungs- freien Bewegungsdetektors 2 der Kombi-Maus 1, einem A/D-The electronic signals emanating from the Hall element 87 are, in the same way as the signals of the contact-free motion detector 2 of the combination mouse 1, an A / D
Konverter 15 zugeleitet und einer elektronischen Weiterverarbeitung zugeführt.Converter 15 fed and fed to an electronic further processing.
Alternativ zur Bewegungserfassung unter Zuhilfenahme des Halleffekts kann die Bewegungserfassung der Abtastkugel 76 auch optisch erfolgen. Hierzu ist die Oberfläche der Abtastkugel 76 mit einem Muster verschiedener Farbtöne versehen, etwa mit regelmäßig angeordneten dunklen Punkte auf einer insgesamt helleren Kugeloberfläche. Die Kugeloberflä- ehe wird von einer oder mehreren Lichtquellen, etwa Leuchtdioden, angestrahlt. Die Detektion erfolgt bei dieser alternativen Ausführungsform mittels eines optischen Matrixsensors, der das von der Kugeloberfläche reflektierte Licht der Lichtquellen erfaßt. Aufgrund der Hell-Dunkel Abfolge der reflektierten Strahlung bei der Bewegung der Abtastkugel 76 kann so ein genaues Bewegungsbild der Abtastkugel 76 erstellt werden.As an alternative to motion detection with the aid of the Hall effect, the motion detection of the scanning ball 76 can also take place optically. For this purpose, the surface of the scanning ball 76 is provided with a pattern of different color tones, for example with regularly arranged dark points on an overall lighter ball surface. The spherical surface is illuminated by one or more light sources, such as light-emitting diodes. In this alternative embodiment, detection takes place by means of an optical matrix sensor which detects the light from the light sources reflected from the spherical surface. Due to the light-dark sequence of the reflected radiation during the movement of the scanning ball 76, an exact movement image of the scanning ball 76 can be created.
Die übrigen elektronischen Bausteine und Peripherieeinhei- ten der Kombi-Maus 1' unterscheiden sich nicht grundsätzlich von denen der Kombi-Maus 1.The other electronic components and peripheral units of the combination mouse 1 'do not fundamentally differ from those of the combination mouse 1.
Die von der Erfassungseinheit 3 abzuscannende Fläche 4 kann identisch mit oder verschieden von der vom Bewegungsdetek- tor 2,70 zu erfassenden Oberfläche 4 sein. Letzteres ist insbesondere etwa bei einer als Trackball eingesetzten Kombi-Maus der Fall, bei der die von einem berührenden Bewegungsdetektor 70 zu erfassende Oberfläche 4 einer Fingeroberflache eines Benutzers entspricht, und die von der Erfassungseinheit 3 zu lesende markierte Fläche auf einer hierzu abgewandten Seite der Geräteeinheit vorliegt.The surface 4 to be scanned by the detection unit 3 can be identical to or different from the surface 4 to be detected by the motion detector 2,70. The latter is particularly the case, for example, in the case of a combination mouse used as a trackball, in which the surface 4 to be detected by a touching motion detector 70 corresponds to a finger surface of a user, and the marked area to be read by the detection unit 3 on a side of the device unit facing away from this is present.
Die Erfindung erweitert insbesondere die Einsatzmöglichkeiten bisheriger Computermäuse oder Trackballs erheblich und stellt zugleich eine leistungsstarke Einrichtung zum Einlesen visualisierbarer Information von einer entsprechend markierten Fläche dar. Die erfindungsgmäße Kombi-Maus ver- einigt in sich ein Gerät zur Cursor-Steuerung ebenso wie ein Gerät zur Erfassung und Zwischenspeicherung, insbesondere von Text und/oder Bildinformation. Sie ist daher zusätzlich in der Lage eine der Hauptanwendungen eines Laptops, nämlich die Textverarbeitung mit zu erledigen und macht daher für eine Vielzahl von Nutzern die Anschaffung eines entsprechenden Gerätes überflüssig. The invention in particular expands the possible uses of previous computer mice or trackballs considerably and at the same time represents a powerful device for reading in visualizable information from a correspondingly marked area. The combination mouse according to the invention combines a device for cursor control and a device for recording and intermediate storage, in particular of text and / or image information. It is therefore also able to do one of the main applications of a laptop, namely word processing, and therefore makes it unnecessary for a large number of users to purchase a corresponding device.

Claims

P A T E N T A N S P R Ü C H E PATENT CLAIMS
1. Kombi-Maus zum Erfassen von Bewegung und zum Einlesen von Information,1. combi-mouse for detecting movement and reading information,
- mit einem Bewegungsdetektor (2,75), der kontinuierlich oder in vorgegebenen Zeitabständen seine jeweilige Position relativ zu einer Oberfläche (4) bei einer Bewegung er- faßt und in elektronische, eine Information über die Bewegung enthaltende Signale umwandelt,with a motion detector (2.75) which detects its respective position relative to a surface (4) during a movement continuously or at predetermined time intervals and converts it into electronic signals containing information about the movement,
- mit einer Rechnereinheit (16) , die die elektronischen Signale des Bewegungsdetetektors (2) in Positionsanzeigen in einem zwei- und/oder dreidimensionalen visuellen System, etwa in die Positionierung eines Cursors auf einem Bildschirm, umwandelt,with a computer unit (16) which converts the electronic signals of the motion detector (2) into position indicators in a two- and / or three-dimensional visual system, for example into the positioning of a cursor on a screen,
mit einer optischen Einheit (3) , die von einer mit vi- sualisierbarer Information, etwa alphanumerischen Zeichen, Graphiken oder fotografischen Bildern, markierten Fläche reflektiertes Licht einer Strahlungsquelle (27) erfaßt und auf einen Bildsensor abbildet (22), der das Licht in eine Abfolge elektronischer Signale umwandelt und zur elektronischen Weiterverarbeitung einer Signalverarbeitungseinheit (31) zuführt, wobei die Rechnereinheit (16) und/oder Signalverarbeitungseinheit (31) in einer Geräteeinheit (5,5') angeordnet sind, die zugleich den Bewegungsdetektor (2,75) um- faßt undwith an optical unit (3) which detects light from a radiation source (27) reflected by a surface marked with visualizable information, such as alphanumeric characters, graphics or photographic images, and images it on an image sensor (22) which converts the light into a Converts sequence of electronic signals and feeds them to a signal processing unit (31) for further electronic processing, the computer unit (16) and / or signal processing unit (31) being arranged in a device unit (5,5 ') which at the same time comprises the motion detector (2,75) and
- mit einem Display (59,) das mit der Geräteeinheit (5, 5') verbunden ist, auf dem erfaßte, eingegebene und/oder übermittelte Informationen visuell darstellbar sind, insbesondere eine online-Überwachung der Erfassung gege- ben ist.- With a display (59,) which is connected to the device unit (5, 5 '), on which recorded, entered and / or transmitted information can be visualized, in particular online monitoring of the recording is given.
2. Kombi-Maus nach Anspruch 1, dadurch gekennzeichnet, daß die Signalverarbeitungseinheit (31) aus den elektronischen Signalen des Bewegungsdetektors (2,75) Synchronisations- Signale zur Beschreibung einer Relativposition von visualisierbarer Information auf der markierten Fläche erzeugt und die Signale des Bildsensors (3) mit Hilfe der Synchronisationssignale in Informationspakete umwandelt und zu einem Bild assembliert, die die visualisierbare Information eines frei wählbaren Teiles der markierten Fläche (4) enthalten.2. Combination mouse according to claim 1, characterized in that the signal processing unit (31) from the electronic signals of the motion detector (2.75) generates synchronization signals for describing a relative position of information which can be visualized on the marked area and the signals of the image sensor ( 3) converted into information packets with the aid of the synchronization signals and assembled into an image, which contain the visualizable information of a freely selectable part of the marked area (4).
3. Kombi-Maus Anspruch 1 oder 2, dadurch gekennzeichnet, daß der Bewegungsdetektor (2) Mittel zum berührungsfreien Erfassen der Bewegung relativ zur Oberfläche aufweist.3. combi-mouse claim 1 or 2, characterized in that the motion detector (2) has means for contactless detection of the movement relative to the surface.
4. Kombi-Maus nach Anspruch 3, dadurch gekennzeichnet, daß der Bewegungsdetektor (2) eine Matrix aus in einer Fläche nebeneinander angeordneten optischen Erfassungsmitteln, etwa eine Anordnung von Photodioden (12, 12' , 12" , 12' " ) oder Pixel eines CCD-Bildsensors, aufweist, mittels derer eine relativ zur Oberfläche (4) erfolgte Bewegung in eine für die Bewegung charakteristische Abfolge elektronischer Signale umwandelbar ist. 4. Combination mouse according to claim 3, characterized in that the motion detector (2) has a matrix of optical detection means arranged next to one another in a surface, for example an arrangement of photodiodes (12, 12 ', 12 ", 12'") or pixels CCD image sensor, by means of which a movement relative to the surface (4) can be converted into a sequence of electronic signals characteristic of the movement.
5. Kombi-Maus nach Anspruch 1 oder 2, dadurch gekennzeichnet, daß der Bewegungsdetektor (75) ein rotationssymmetrisch ausgebildetes und um mindestens eine Achse drehbar gelagertes Abtastelement (76) aufweist.5. Combination mouse according to claim 1 or 2, characterized in that the motion detector (75) has a rotationally symmetrical and rotatably mounted about at least one axis scanning element (76).
6. Kombi-Maus nach Anspruch 5, dadurch gekennzeichnet, daß der Bewegungsdetektor (75) ein Hallelement (78) mit einem Abtastelement (76) aufweist, wobei das Abtastelement (76) von einem inhomogenen Magnetfeld derart umgeben ist, daß in Zusammenwirken mit dem Hallelement (78) bei einer Drehung des Abtastelements (76) elektrische Signale erzeugt werden, die der jeweiligen Drehbewegung eindeutig zuzuordnen sind.6. combi-mouse according to claim 5, characterized in that the motion detector (75) has a Hall element (78) with a scanning element (76), wherein the scanning element (76) is surrounded by an inhomogeneous magnetic field such that in cooperation with the Hall element (78) when the scanning element (76) rotates, electrical signals are generated which can be uniquely assigned to the respective rotary movement.
7. Kombi-Maus nach Anspruch 5, dadurch gekennzeichnet, daß der Bewegungsdetektor (75) einen optischen Detektor mit einem Abtastelement (76) aufweist, wobei die Oberfläche des Abtastelements derart optisch inhomogen gestaltet ist, daß in Zusammenwirken mit dem optischen Detektor bei einer Drehung des Abtastelements elektrische Signale erzeugt werden, die der jeweiligen Drehbewegung eindeutig zuzuordnen sind.7. Combination mouse according to claim 5, characterized in that the motion detector (75) has an optical detector with a scanning element (76), the surface of the scanning element being designed in such an optically inhomogeneous manner that in cooperation with the optical detector during rotation electrical signals are generated by the scanning element, which can be clearly assigned to the respective rotary movement.
8. Kombi-Maus nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, daß die Geräteeinheit (5,5') eine Eingabeeinheit (58) umfaßt, mittels der Steuerungssignale an die Rechnereinheit (16) und/oder an die Signalverarbeitungeinheit (31) übermittelbar sind.8. Combination mouse according to one of the preceding claims, characterized in that the device unit (5,5 ') comprises an input unit (58) by means of which control signals can be transmitted to the computer unit (16) and / or to the signal processing unit (31) .
9. Kombi-Maus nach Anspruch 8, dadurch gekennzeichnet, daß die Eingabeeinheit (58) zur phonetischen Eingabe von Steue- rungsbefehlen mit einem Mikrofon (68) und einer an diesem angeschlossenen Konversionselektronik (69) versehen ist, die vorgegebene phonetische Signale in eingegebene oder vorbestimmte Steuerungssignale übersetzt. 9. Combination mouse according to claim 8, characterized in that the input unit (58) for the phonetic input of control commands is provided with a microphone (68) and a conversion electronics (69) connected to this, the predetermined phonetic signals into input or predetermined control signals translated.
10. Kombi-Maus nach Anspruch 8 oder 9, dadurch gekennzeichnet, daß die Eingabeeinheit (58) eine Tastatur umfaßt.10. Combination mouse according to claim 8 or 9, characterized in that the input unit (58) comprises a keyboard.
11. Kombi-Maus nach einem der Ansprüche 8 bis 10, dadurch gekennzeichnet, daß die Geräteeinheit (5,5') zur Übermittlung elektronischer Daten an einen und/oder von einem externen Rechner mit einer - vorzugsweise seriellen - Schnittstelle (57) versehen ist.11. Combination mouse according to one of claims 8 to 10, characterized in that the device unit (5,5 ') for transmitting electronic data to and / or from an external computer with a - preferably serial - interface (57) is provided .
12. Kombi-Maus nach einem der Ansprüche 8 bis 11, dadurch gekennzeichnet, daß die Geräteeinheit (5,5') digitale Speicherelemente (34,55) zum Abspeichern erfaßter, eingegebener und/oder übermittelter Informationen umfaßt.12. Combination mouse according to one of claims 8 to 11, characterized in that the device unit (5,5 ') comprises digital storage elements (34,55) for storing recorded, entered and / or transmitted information.
13. Kombi-Maus nach einem der Ansprüche 8 bis 12, dadurch gekennzeichnet, daß die Geräteeinheit (5,5') mit einem Mikroprozessor (54) zur Verarbeitung erfaßter, eingegebener und/oder übermittelter Daten versehen ist.13. Combination mouse according to one of claims 8 to 12, characterized in that the device unit (5,5 ') is provided with a microprocessor (54) for processing recorded, entered and / or transmitted data.
14. Kombi-Maus nach einem der Ansprüche 8 bis 13, dadurch gekennzeichnet, daß die Geräteeinheit (5) einen Distanzmesser (2) umfaßt, mittels dessen der Abstand (L) der Geräteeinheit (5) bei einer vorgegebenen Position relativ zur Oberfläche (4) ermittelbar und in elektronische, als Infor- mation über eine reale oder virtuelle Positionsangabe einsetzbare Signale umwandelbar sind.14. Combination mouse according to one of claims 8 to 13, characterized in that the device unit (5) comprises a distance meter (2) by means of which the distance (L) of the device unit (5) at a predetermined position relative to the surface (4th ) can be determined and converted into electronic signals which can be used as information about a real or virtual position indication.
15. Kombi-Maus nach einem der Ansprüche 8 bis 14, dadurch gekennzeichnet, daß die Geräteeinheit (5,5') als Computer- maus oder als Trackball einsetzbar ist. 15. Combination mouse according to one of claims 8 to 14, characterized in that the device unit (5,5 ') can be used as a computer mouse or as a trackball.
PCT/DE1999/002358 1998-08-07 1999-08-03 Combined mouse WO2000008593A2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
AU63249/99A AU6324999A (en) 1998-08-07 1999-08-03 Combined mouse
EP99950480A EP1101189A2 (en) 1998-08-07 1999-08-03 Combined mouse

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE1998135809 DE19835809A1 (en) 1998-08-07 1998-08-07 Combo mouse
DE19835809.1 1998-08-07

Publications (2)

Publication Number Publication Date
WO2000008593A2 true WO2000008593A2 (en) 2000-02-17
WO2000008593A3 WO2000008593A3 (en) 2000-05-25

Family

ID=7876839

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/DE1999/002358 WO2000008593A2 (en) 1998-08-07 1999-08-03 Combined mouse

Country Status (4)

Country Link
EP (1) EP1101189A2 (en)
AU (1) AU6324999A (en)
DE (1) DE19835809A1 (en)
WO (1) WO2000008593A2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001061455A1 (en) * 2000-02-18 2001-08-23 Anoto Ab Input unit arrangement
WO2003042802A2 (en) * 2001-11-16 2003-05-22 3Dconnexion Gmbh Input device, webcam and screen having a voice input function
US6992655B2 (en) 2000-02-18 2006-01-31 Anoto Ab Input unit arrangement

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004027434A1 (en) 2002-09-23 2004-04-01 Stefan Reich Measuring and stabilising system for machine-controllable vehicles
DE10258545B4 (en) * 2002-09-23 2008-01-24 Stefan Reich Method and system for stabilizing a translation motion size of a missile
DE102004015767A1 (en) * 2004-03-23 2005-10-06 Adolf Würth GmbH & Co. KG Computer input device e.g. mouse, uses wireless transmission device for transmission of information
US7466416B2 (en) * 2004-04-30 2008-12-16 X-Rite, Inc. Color measurement system
DE102004035240A1 (en) 2004-07-21 2006-02-16 "Wolke" Inks & Printers Gmbh Identification device and labeling method
DE102010015014A1 (en) * 2010-04-14 2011-10-20 Bayer Technology Services Gmbh Optical scanner

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3407131A1 (en) * 1984-02-28 1985-08-29 Jaekel Fessenmaier Christian D Position data input device which can be moved freehandedly for electronic data processing systems (technical term: computer mouse) with mechanical/optical or mechanical/magnetic detection of the motion vector
US4804949A (en) * 1987-03-20 1989-02-14 Everex Ti Corporation Hand-held optical scanner and computer mouse
US4818978A (en) * 1984-06-26 1989-04-04 Kabushiki Kaisha Toshiba Position and image inputting unit
WO1992006465A1 (en) * 1990-09-27 1992-04-16 Triton Technologies, Inc. Computer apparatus input device
EP0484888A2 (en) * 1990-11-06 1992-05-13 Omron Corporation Image scanner
US5126955A (en) * 1989-02-10 1992-06-30 Kabushiki Kaisha Toshiba Manually sweepable apparatus housed in a computer main body
US5444193A (en) * 1992-09-21 1995-08-22 Ricoh Company, Ltd. Pen input device
US5457480A (en) * 1994-10-03 1995-10-10 Dell Usa Integrated mouse and numerical keypad device
US5574804A (en) * 1990-12-21 1996-11-12 Olschafskie; Francis Hand-held scanner
DE19625767A1 (en) * 1996-06-27 1998-01-08 Mm Lesestift Manager Memory Reader for the optical acquisition and storage of visually marked and projected alphanumeric characters, graphics and photographic images
US5721837A (en) * 1993-10-28 1998-02-24 Elonex I.P. Holdings, Ltd. Micro-personal digital assistant including a temperature managed CPU
WO1999008227A1 (en) * 1997-08-09 1999-02-18 Mm-Lesestift Manager Memory Gmbh Device and method for detecting without contact two-dimensional or three-dimensional marked surfaces and/or for detecting two-dimensional or three-dimensional movements

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3045133C2 (en) * 1980-11-29 1985-08-29 Olympia Werke Ag, 2940 Wilhelmshaven Input device for a two-dimensional manual position control
US5631669A (en) * 1994-02-04 1997-05-20 Stobbs; Gregory A. Pointing device with integral microphone
DE19519124A1 (en) * 1995-05-17 1996-11-21 Victor Victorovic Vetckanov Manually-operated optical input device e.g. mouse, for computer inputs
DE29622375U1 (en) * 1996-12-24 1997-03-06 Wameling Tim X-Y position input device with integrated keypad and display unit
DE29723363U1 (en) * 1997-10-08 1998-08-06 Sick Ag Electronic pointing device with optoelectronic sensor device

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3407131A1 (en) * 1984-02-28 1985-08-29 Jaekel Fessenmaier Christian D Position data input device which can be moved freehandedly for electronic data processing systems (technical term: computer mouse) with mechanical/optical or mechanical/magnetic detection of the motion vector
US4818978A (en) * 1984-06-26 1989-04-04 Kabushiki Kaisha Toshiba Position and image inputting unit
US4804949A (en) * 1987-03-20 1989-02-14 Everex Ti Corporation Hand-held optical scanner and computer mouse
US5126955A (en) * 1989-02-10 1992-06-30 Kabushiki Kaisha Toshiba Manually sweepable apparatus housed in a computer main body
WO1992006465A1 (en) * 1990-09-27 1992-04-16 Triton Technologies, Inc. Computer apparatus input device
EP0484888A2 (en) * 1990-11-06 1992-05-13 Omron Corporation Image scanner
US5574804A (en) * 1990-12-21 1996-11-12 Olschafskie; Francis Hand-held scanner
US5444193A (en) * 1992-09-21 1995-08-22 Ricoh Company, Ltd. Pen input device
US5721837A (en) * 1993-10-28 1998-02-24 Elonex I.P. Holdings, Ltd. Micro-personal digital assistant including a temperature managed CPU
US5457480A (en) * 1994-10-03 1995-10-10 Dell Usa Integrated mouse and numerical keypad device
DE19625767A1 (en) * 1996-06-27 1998-01-08 Mm Lesestift Manager Memory Reader for the optical acquisition and storage of visually marked and projected alphanumeric characters, graphics and photographic images
WO1999008227A1 (en) * 1997-08-09 1999-02-18 Mm-Lesestift Manager Memory Gmbh Device and method for detecting without contact two-dimensional or three-dimensional marked surfaces and/or for detecting two-dimensional or three-dimensional movements

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001061455A1 (en) * 2000-02-18 2001-08-23 Anoto Ab Input unit arrangement
US6992655B2 (en) 2000-02-18 2006-01-31 Anoto Ab Input unit arrangement
US7345673B2 (en) 2000-02-18 2008-03-18 Anoto Ab Input unit arrangement
WO2003042802A2 (en) * 2001-11-16 2003-05-22 3Dconnexion Gmbh Input device, webcam and screen having a voice input function
WO2003042802A3 (en) * 2001-11-16 2004-04-01 3Dconnexion Gmbh Input device, webcam and screen having a voice input function

Also Published As

Publication number Publication date
EP1101189A2 (en) 2001-05-23
WO2000008593A3 (en) 2000-05-25
AU6324999A (en) 2000-02-28
DE19835809A1 (en) 2000-02-10

Similar Documents

Publication Publication Date Title
DE69835665T2 (en) RETROFIT KIT FOR THE CONVERSION OF AN ESSENTIALLY LEVEL SURFACE INTO AN ELECTRONIC DATA COLLECTION DEVICE
DE102008039838B4 (en) Method for scanning the three-dimensional surface of an object by means of a light beam scanner
DE112012005524B4 (en) Method for mechanically transmitting a command to control the operation of a laser tracker
DE69617413T2 (en) POINTER CONTROL DEVICE FOR 2-D AND 3-D APPLICATIONS
DE69130282T2 (en) Position and function input system for large surface display
EP1606581B1 (en) Method and device for image processing in a geodesical measuring appliance
DE4410078B4 (en) Optical position detection unit and optical coordinate input unit
EP3623843B1 (en) Hand-held laser range finder
EP1637985A2 (en) Input control for appliances
DE69919759T2 (en) METHOD FOR DIGITIZING, WRITING AND DRAWING WITH THE POSSIBILITY OF DELETING AND / OR NOTICE
DE102006041815A1 (en) Position detection system using laser granulation
DE102009043800A1 (en) Optical finger navigation using quantized motion information
DE60001671T2 (en) ELECTRONIC WRITING PANEL AND COORDINATE PEN
WO1998000965A1 (en) Reader for optical detection and storage of visually marked and projected alphanumerical characters, graphics and photographic images
WO2002041128A2 (en) Measuring method for determining the position of an object in front of a screen and a device for carrying out said method
DE69525160T2 (en) Cursor guiding device using thin film interference filters
WO2000008593A2 (en) Combined mouse
EP3642699A1 (en) Electronic device for generating analogue strokes and for digitally storing the analogue strokes, and an input system and method for digitising analogue recordings
DE69408452T2 (en) PEN-SHAPED DEVICE WITH MEANS FOR LENGTH MEASUREMENT
EP2002220A1 (en) Electro-optical output unit and measuring device comprising said electro-optical output unit
DE69907588T2 (en) NOTICE DEVICE FOR USE IN A COMPUTER SYSTEM
EP2059833B1 (en) Distance measuring device
DE4326371A1 (en) Multi-dimensional position data entry system for computers
DE29823802U1 (en) Combo mouse
DE4426355B4 (en) Optical position detection unit and optical coordinate input unit

Legal Events

Date Code Title Description
ENP Entry into the national phase

Ref country code: AU

Ref document number: 1999 63249

Kind code of ref document: A

Format of ref document f/p: F

AK Designated states

Kind code of ref document: A2

Designated state(s): AU CA CN JP KR SG US

AL Designated countries for regional patents

Kind code of ref document: A2

Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LU MC NL PT SE

121 Ep: the epo has been informed by wipo that ep was designated in this application
DFPE Request for preliminary examination filed prior to expiration of 19th month from priority date (pct application filed before 20040101)
AK Designated states

Kind code of ref document: A3

Designated state(s): AU CA CN JP KR SG US

AL Designated countries for regional patents

Kind code of ref document: A3

Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LU MC NL PT SE

WWE Wipo information: entry into national phase

Ref document number: 1999950480

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: CA

WWP Wipo information: published in national office

Ref document number: 1999950480

Country of ref document: EP

WWW Wipo information: withdrawn in national office

Ref document number: 1999950480

Country of ref document: EP