AT503305B1 - METHOD FOR CONTROLLING TECHNICAL DEVICES THROUGH THE HUMAN VOICE - Google Patents

METHOD FOR CONTROLLING TECHNICAL DEVICES THROUGH THE HUMAN VOICE Download PDF

Info

Publication number
AT503305B1
AT503305B1 AT3052006A AT3052006A AT503305B1 AT 503305 B1 AT503305 B1 AT 503305B1 AT 3052006 A AT3052006 A AT 3052006A AT 3052006 A AT3052006 A AT 3052006A AT 503305 B1 AT503305 B1 AT 503305B1
Authority
AT
Austria
Prior art keywords
control
control tone
started
technical
tone
Prior art date
Application number
AT3052006A
Other languages
German (de)
Other versions
AT503305A4 (en
Inventor
Reinhard Dipl Ing Hainisch
Original Assignee
Reinhard Dipl Ing Hainisch
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Reinhard Dipl Ing Hainisch filed Critical Reinhard Dipl Ing Hainisch
Priority to AT3052006A priority Critical patent/AT503305B1/en
Application granted granted Critical
Publication of AT503305B1 publication Critical patent/AT503305B1/en
Publication of AT503305A4 publication Critical patent/AT503305A4/en

Links

Landscapes

  • Prostheses (AREA)
  • Electrophonic Musical Instruments (AREA)

Description

2 AT 503 305 B12 AT 503 305 B1

Die Erfindung betrifft ein Verfahren zur Steuerung von technischen Geräten durch die menschliche Stimme.The invention relates to a method for controlling technical devices by the human voice.

Die DE 102 37 951 A1 betrifft einen Roboter, der zu zeitgleich laufender Musik choreographische Bewegungen ausführt.DE 102 37 951 A1 relates to a robot that performs choreographic movements at the same time running music.

Der Roboter ist darauf programmiert, zu definierten musikalischen Merkmalen wie Takt, Rhythmus und Geschwindigkeit der Musik bestimmte Bewegungen, die nach fix vorgegebenen choreographischen Regeln definiert sind, auszuführen. Für die Steuerung werden die musikalischen Merkmale erfasst, ausgewertet und die dazugehörigen Bewegungen an den Roboter übertragen.The robot is programmed to perform certain movements defined to defined musical characteristics such as beat, rhythm and speed of the music, which are defined according to fixed choreographic rules. For the control, the musical characteristics are recorded, evaluated and transferred the associated movements to the robot.

Nachteilig bei dieser Erfindung ist, dass der Roboter auf eine sehr große akustische Bandbreite reagiert, und somit sehr unvorhersehbare Bewegungen entstehen, die lediglich für Unterhaltungszwecke verwendet werden können.A disadvantage of this invention is that the robot reacts to a very large acoustic bandwidth, and thus very unpredictable movements arise that can be used only for entertainment purposes.

Die DE 197 505 36 A1 betrifft ein Gerät zur Sprachunterstützung von Beatmungspatienten. Es wird durch einfaches Zungenschnalzen des Patienten aktiviert bzw. deaktiviert. Eine zusätzliche Funktion verhindert, dass die Kehle des Patienten während des Sprechens austrocknet. Dem Patienten wird damit das selbstständige und andauernde Sprechen ohne einem Helfer ermöglicht. Das Zungenschnalzen wird lediglich dazu verwendet, die Maschine zu aktivieren bzw. zu deaktivieren.DE 197 505 36 A1 relates to a device for language support of respiratory patients. It is activated or deactivated by simply tapping the patient's tongue. An additional feature prevents the patient's throat from drying out during speech. The patient is thus enabled to speak independently and continuously without an assistant. The tongue-click is used only to activate or deactivate the machine.

Es ist eine Vielzahl von Steuerungen mit Spracherkennungssystemen bekannt. Dabei werden benutzerspezifische Sprachmerkmale bzw. Sprachmuster in einem Lernmodus als Sprachbe-fehle bzw. Kommandos erfasst und bestimmten Operationen zugeordnet. Im Betriebsmodus wird ein Sprachbefehl von der Steuerung über einen akustischen Sensor erkannt und die dafür zugeordnete Operation auf eine Maschine übertragen.There are a variety of controls with speech recognition systems known. In this case, user-specific speech features or speech patterns in a learning mode are detected as voice commands or commands and assigned to specific operations. In the operating mode, a voice command is recognized by the controller via an acoustic sensor and the associated operation is transmitted to a machine.

Nachteilig bei diesen Systemen ist, dass ihre nutzerspezifische Konfiguration und Programmierung sehr viel Zeit und Speicherplatz benötigt und dass je Sprachbefehl nur eine bestimmte Operation ausgeführt bzw. gestoppt werden kann. Dadurch ist damit nicht möglich, mit einfachen Befehlen eine Maschine unmittelbar und zuverlässig mit exakt steuerbarer, variabler Dauer der Bewegungen zu manipulieren.The disadvantage of these systems is that their user-specific configuration and programming requires a great deal of time and storage space and that only one specific operation can be executed or stopped per voice command. As a result, it is not possible with simple commands to manipulate a machine directly and reliably with precisely controllable, variable duration of the movements.

Die US 6 108 592 A und die JP 2000-084004 A zeigen elektrisch betriebene Rollstühle, welche auf diese Weise angesteuert werden.US Pat. No. 6,108,592 A and JP 2000-084004 A show electrically operated wheelchairs which are activated in this way.

Die DE 600 14 833 T2 beschreibt einen Roboter, welcher mit Hilfe von in Worten gesprochener Sprache gesteuert werden kann. Gemäß einer Variante davon wird die Tonhöhe des Sprachsignals extrahiert und in Abhängigkeit davon wird ein „Emotionszustand“ des Roboters gesteuert. Dieser „Emotionszustand“ bedeutet eine komplexe Adaption von vorgefertigten Bewegungsmustern, welche über komplexe Spracherkennung einzelnen Wörtern oder Sätzen zugeordnet sind.DE 600 14 833 T2 describes a robot which can be controlled by means of words spoken in speech. According to a variant thereof, the pitch of the speech signal is extracted, and depending on this, an "emotion state" of the robot is controlled. This "emotion state" means a complex adaptation of prefabricated motion patterns, which are assigned to individual words or sentences via complex speech recognition.

Die DE 100 60 544 A1 beschreibt eine mit Sensoren, Aktionsmitteln wie Antrieben und Lautsprechern sowie Datenübertragungsmitteln ausgestattete, steuerbare Puppe, welche in einer Ausführungsvariante auch mit Mitteln zur Spracherkennung versehen ist. Dabei wird auch die Klanganalyse der empfangenen Sprache nach Tonhöhe und Tondauer vorgeschlagen, um damit beispielsweise die Puppe zum Mitsingen veranlassen zu können.DE 100 60 544 A1 describes a controllable doll equipped with sensors, action means such as drives and loudspeakers as well as data transmission means, which in a variant embodiment is also provided with means for speech recognition. Here, the sound analysis of the received language by pitch and duration of sound is proposed, so as to cause, for example, the doll to sing along.

Weiters sind Vorrichtungen zur Steigerung der Lebensqualität von Personen mit starker Bewegungsbeeinträchtigung, wie z.B. mit Rückenmarkverletzung im Bereich der Halswirbelsäule bekannt, wobei Biosignale wie Gehirnströme oder Muskelbewegungen als Eingangssignale für die Steuerung verwendet werden. Derartige Lösungen sind noch nicht marktreif, da eine exakte 3 AT 503 305 B1Furthermore, devices for increasing the quality of life of persons with severe movement impairment, such as e.g. cervical spinal cord injury using biopsy signals such as brain waves or muscle movements as inputs to the control. Such solutions are not yet ready for the market, since an exact 3 AT 503 305 B1

Steuerung mit den niedrigen Signalpegeln kaum möglich ist. Weitere Nachteile sind sehr hohe Anforderungen an Konzentrationsfähigkeit und Selbstbeherrschung des Benutzers, sowie eine starke Verkabelung.Control with the low signal levels is hardly possible. Other disadvantages are very high demands on the ability to concentrate and self-control of the user, as well as a strong wiring.

Von diesem Stand der Technik ausgehend hat sich der Erfinder die Aufgabe gestellt, mit einfachen, stimmlich erzeugten Lauten eine große Bandbreite von technischen Anwendungen präzise und kontrolliert zu steuern.Starting from this state of the art, the inventor has set itself the task to control a large range of technical applications precisely and in a controlled manner with simple, vocally produced sounds.

Zur Lösung dieser Aufgabe wird ein stimmlich erzeugter Laut - des weiteren kurz „Steuerton“ genannt - z.B. ein Summen, hauptsächlich charakterisiert durch Grundfrequenz, Lautstärke und Dauer in die Steuerung eingelesen, analysiert, bestimmten Funktionen des zu steuernden technischen Gerätes zugeordnet, dementsprechend ein Steuersignal erzeugt und an das technische Gerät gesandt. Über unterschiedliche Frequenzen werden die jeweiligen Funktionen angesprochen. Die Lautstärke des Steuertons bestimmt den Wert der jeweils gestarteten Funktion. Beispielsweise kann durch Summen eines Tones in einer bestimmten Tonhöhe eine Bewegung eines technischen Gerätes in eine bestimmte Richtung gestartet werden. Die Lautstärke des gesummten Tones bestimmt die Geschwindigkeit dieser Bewegung.To solve this problem, a vocally generated sound - also called "control tone" for short - e.g. a sum, mainly characterized by fundamental frequency, volume and duration read into the controller, analyzed, assigned to certain functions of the technical device to be controlled, accordingly generates a control signal and sent to the technical device. The respective functions are addressed via different frequencies. The volume of the control tone determines the value of the currently started function. For example, by humming a tone at a certain pitch, a movement of a technical device in a certain direction can be started. The volume of the hummed sound determines the speed of this movement.

Fig. 1: veranschaulicht den Ablauf von der Erfassung des stimmlich erzeugten Lautes bis zur Ausgabe des Steuersignals auf Antriebe einer technische Anwendung.Fig. 1: illustrates the sequence from the detection of the vocally generated sound to the output of the control signal to drives of a technical application.

Fig. 2: zeigt eine mögliche Zuordnung der Grundfrequenzen einer Tonleiter zu verschiedenen Bewegungsrichtungen im Raum.Fig. 2: shows a possible assignment of the fundamental frequencies of a scale to different directions of movement in space.

In einer einfachen Ausführung hält die so gestartete Funktion so lange an, so lange der zugehörige Steuerton anhält.In a simple execution, the function started in this way lasts as long as the associated control tone stops.

In einer vorteilhaften Weiterentwicklung der Erfindung wird die Funktion durch einen Steuerton, welcher auch kurz sein kann, gestartet, und hält so lange an, bis sie durch einen weiteren dafür kennzeichnenden Steuerton wieder gestoppt wird. Dieser zweite Laut kann beispielsweise der gleiche wie der zum Starten erforderliche sein. Es kann aber auch eine weitere nachfolgende oder auch gleichzeitige Funktion auslösen. Gegenüber der zuvor oben beschriebenen einfachen Ausführungsform ist an dieser Methode vorteilhaft, dass es nicht erforderlich ist Töne lang auszuhalten - was insbesondere für Menschen mit Atemproblemen sehr schwierig ist -, und dass am technischen Gerät mehrere Funktionen zeitlich überlappend eingeschaltet werden können.In an advantageous further development of the invention, the function is started by a control tone, which may also be short, and stops until it is stopped again by a further control tone characterizing it. For example, this second sound may be the same as that required for starting. But it can also trigger another subsequent or simultaneous function. Compared to the simple embodiment described above is advantageous in this method that it is not necessary to endure sounds long - which is very difficult especially for people with breathing problems - and that several functions can be switched overlapping in time on the technical device.

Der Steuerton 1 gemäß Fig. 1 ist ein stimmlich erzeugter Laut, welcher mit annähernd gleicher Grundfrequenz kontinuierlich aufrecht erhalten werden kann. Gut geeignet sind Laute wie Summlaute und Selbstlaute. Weniger gut geeignet sind kontinuierlich ausführbare Zischlaute wie z.B. f, s, v, da an diesen Lauten kaum eine Tonhöhe erkennbar ist. Ungeeignet sind solche Laute, welche durch einen plötzlichen Übergang zwischen dauerhafteren Zuständen der an der Lautbildung beteiligten Stimmorgane gebildet werden, da derartige Laute nur kurz klingen können, und da sie in der Tonhöhe praktisch nicht einstellbar sind.The control tone 1 according to FIG. 1 is a vocally generated sound which can be maintained continuously with approximately the same fundamental frequency. Well suited are sounds such as humming and auto sounds. Less suitable are continuously executable sibilants such as e.g. f, s, v, since hardly any pitch is recognizable on these sounds. Unsuitable are those sounds which are formed by a sudden transition between more permanent states of the vocal organs involved in the phonation, since such sounds can only sound short, and since they are practically not adjustable in pitch.

Der Steuerton 1 bedeutet eine Befehlseingabe durch die das technische Gerät steuernde Person.The control tone 1 means a command input by the person controlling the technical device.

Ein Mikrofon 2 erfasst den Steuerton 1 und wandelt ihn in ein elektrisches bzw. elektromagnetisches oder digitales Signal um. Es sind Vorkehrungen zu treffen, damit Umgebungsgeräusche möglichst wenig mit aufgenommen werden. Beispielsweise kann das Mikrofon sehr nahe am Mund der steuernden Person, oder direkt am Kehlkopf angebracht werden, oder es wird ein entsprechend angepasstes Richtmikrofon verwendet, oder es wird im Mikrofon eine Filterung vorgenommen, sodass ohnedies nur die Frequenzen im interessierenden Spektrum aufgenommen werden können. 4 AT 503 305 B1A microphone 2 detects the control tone 1 and converts it into an electrical or electromagnetic or digital signal. Precautions must be taken to minimize ambient noise. For example, the microphone can be placed very close to the person controlling the mouth, or directly on the larynx, or a directional microphone adapted accordingly, or filtering is performed in the microphone, so that in any case only the frequencies in the spectrum of interest can be recorded. 4 AT 503 305 B1

Aus dem vom Mikrofon 2 abgegebenen Signal werden in der Analyseeinheit 3 die wesentlichen Informationen, im dargestellten Beispiel die Frequenz der Grundschwingung des Steuertons, und die Lautstärke des Steuertons, beispielsweise an Hand der Amplitude der Grundschwingung, extrahiert. Diese Informationsgewinnung kann beispielsweise mit Hilfe des Verfahrens der schnellen Fourier-Transformation, oder mittels analoger Filterung der Grundfrequenz abgewickelt werden.From the signal emitted by the microphone 2, the essential information in the analysis unit 3, in the example shown, the frequency of the fundamental tone of the control tone, and the volume of the control tone, for example, on the basis of the amplitude of the fundamental wave extracted. This information acquisition can be handled for example by means of the method of fast Fourier transformation, or by means of analog filtering of the fundamental frequency.

Weitere Merkmale des Steuertons 1, beispielsweise Obertonverteilung oder Rauschanteil können entweder ignoriert werden, zu erweiterten Steuerbefehlen, oder unter Anwendung einer entsprechenden Datenverarbeitung beispielsweise dazu herangezogen werden, zu erkennen, ob der vom Mikrofon erfasste Ton überhaupt ein Steuerton ist.Further features of the control tone 1, for example harmonic distribution or noise component, can either be ignored, applied to extended control commands, or, using appropriate data processing, for example, to detect whether the tone detected by the microphone is at all a control tone.

In einer Funktionstabelle sind definierte Frequenzbereiche der Grundfrequenz, bestimmten Funktionen der technischen Anwendung, beispielsweise Bewegungsrichtungen (Fig. 2), zugeordnet. Gemäß dieser Tabelle wird auf Basis der jeweils aktuell vorliegenden Information über die Grundfrequenz und die Amplitude des Steuertons 1, ggf. ein Steuersignal erzeugt, und an das ausführende technische Gerät 5 gesandt, welches daraufhin die entsprechende Aktion, beispielsweise eine Bewegung in eine bestimmte Richtung ausführt.In a function table, defined frequency ranges are assigned to the fundamental frequency, to certain functions of the technical application, for example directions of movement (FIG. 2). In accordance with this table, a control signal is generated on the basis of the respectively currently available information about the fundamental frequency and the amplitude of the control tone 1, and sent to the executing technical device 5, which then executes the corresponding action, for example a movement in a certain direction ,

Im vorliegenden Beispiel bestimmt der Aspekt „Amplitude“ des Steuertons 1 den Wert der Funktion (beispielsweise die Geschwindigkeit). Am Beispiel Geschwindigkeit heißt das, dass die entsprechend Steuerbefehl ausgeführte Bewegung mit umso höherer Geschwindigkeit verläuft, umso lauter der Steuerton 1 ist. Die Dauer der Ausgabe des Steuersignals entspricht der Dauer des Ertönens des Steuertons 1. Stoppt der Steuerton 1, stoppt praktisch gleichzeitig die Ausgabe des Steuersignals und damit auch die Bewegung des ausführenden technischen Gerätes 5.In the present example, the aspect "amplitude" of the control tone 1 determines the value of the function (for example, the speed). By the example of speed this means that the movement executed according to the control command proceeds at an even faster rate, the louder the control tone is 1. The duration of the output of the control signal corresponds to the duration of the sounding of the control tone 1. Stops the control tone 1, stops virtually simultaneously the output of the control signal and thus the movement of the executive technical device. 5

Der Prozess, Erfassung und Analyse des Steuertons 1, Funktionszuordnung und Ausgabe des Steuersignals, erfolgt in Echtzeit. Bei der Erfassung einer neuen Grundfrequenz oder einer Änderung der Amplitude wird das Steuersignal 6 sofort entsprechend angepasst und für die Dauer des Steuertons 1 ausgeführt.The process, acquisition and analysis of the control tone 1, function assignment and output of the control signal, takes place in real time. When detecting a new fundamental frequency or a change in amplitude, the control signal 6 is immediately adapted accordingly and executed for the duration of the control tone 1.

Am Beispiel Bewegung heißt das, durch das Summen einer Tonhöhe wird eine Bewegung des technischen Gerätes in eine bestimmte Richtung ausgeführt. Durch Änderung der Tonlautstärke und Beibehalten der Tonhöhe wird die Geschwindigkeit der Bewegung reguliert. Stoppt das Summen, stoppt auch die Bewegung.The example of movement means that by humming a pitch, a movement of the technical device is carried out in a certain direction. Changing the sound volume and maintaining the pitch controls the speed of the movement. If the buzzing stops, the movement also stops.

Die Frequenzbereiche und die dafür gewünschten Funktionen sind beliebig zuzuordnen. Werden die Frequenzbereiche mit einer Tonleiter von acht Tönen belegt, können die Töne sechs unterschiedlichen Richtungen und zwei zusätzlichen Steuerbefehlen zugeordnet werden. Dadurch kann ein Roboterarm bzw. ein Cursor auf einem Bildschirm in sechs Richtungen bzw. drei Freiheitsgraden mit zwei zusätzlichen Befehlen z.B. Handschließen und Handöffnen vom Benutzer bewusst gesteuert werden. Vorteilhaft dabei ist, wenn man zwei benachbarte Töne der Tonleiter zur Steuerung eines Freiheitsgrades verwendet, dass also jeweils zwei benachbarte Töne Bewegung in entgegengesetzte Richtung bewirken (siehe Fig. 2).The frequency ranges and the required functions can be assigned as desired. If the frequency ranges are assigned a scale of eight tones, the tones can be assigned to six different directions and two additional control commands. Thereby, a robot arm or a cursor on a screen in six directions or three degrees of freedom with two additional commands, e.g. Manual closing and manual opening are controlled by the user. It is advantageous if two adjacent tones of the scale used to control a degree of freedom, so that in each case two adjacent tones cause movement in the opposite direction (see Fig. 2).

Je nach Übung und Fertigkeit des Benutzers kann das akustische Signal noch nach Halbtönen oder Obertönen bzw. nach der Klangfarbe differenziert und dadurch einer Vielzahl von unterschiedlichen Funktionen zugeordnet werden. Obertöne in diesem Sinne sind ganzzahlige vielfache Tonfrequenzen der Grundfrequenz. Die Klangfarbe in diesem Sinne setzt sich aus Grundton, Obertönen und Rauschanteil zusammen. Beispielsweise können so verschiedenen Vokale verschiedenen Funktionen zugeordnet werden.Depending on the exercise and skill of the user, the acoustic signal can still be differentiated by semitones or overtones or by the timbre and thereby assigned to a variety of different functions. Harmonics in this sense are integer multiple tone frequencies of the fundamental frequency. The timbre in this sense is composed of the basic tone, overtones and noise. For example, such different vowels can be assigned to different functions.

Durch Zuordnung der Grundfrequenz zum Winkel bei Polarkoordinaten erreicht man bei Zwischentönen schräge Bewegungen in einer definierten Raumebene.By assigning the fundamental frequency to the angle in polar coordinates, you can achieve oblique movements in a defined spatial plane with intermediate tones.

Claims (21)

5 AT 503 305 B1 Die Erfindung ist auch für Menschen, welche nicht bewegungsbehindert sind, nützlich anwendbar. Ganz besonders ist das dann der Fall, wenn sie bei manchen Tätigkeiten keine Hand mehr frei haben, oder wenn die Hände aus anderen Gründen nicht zum Einsatz kommen können. Beispiele dazu sind die Ansteuerung von Operationsgeräten, insbesondere Mikroskopen durch einen Chirurgen, feinmechanische Tätigkeiten, Arbeiten unter Wasser oder im Weltraum bei denen die Arbeitskleidung eine starke Bewegungseinschränkung darstellt, Tätigkeiten an Stellen, welche außerhalb des Greifbereiches der steuernden Person liegen, allgemein Umgebungssteuerung (Licht, Heizung, Herd, Fernsteuerung von Unterhaltungselektronik, Steuerung von Haushaltsgeräten, etc...) Als eine weitere Ausbaustufe der Erfindung ist eine Kombination mit Spracherkennungssystemen oder eine Erweiterung durch Triggersignale wie Zungenschnalzen oder Klickgeräusche sinnvoll. So könnte auch zwischen unterschiedlichen gespeicherten Bewegungsmustern umgeschaltet, oder Raumpositionen des Manipulator angefahren gespeichert und später wieder abgerufen werden. Es ließen sich auch Bewegungsmuster vom Benutzer erstellen und speichern. Vor allem für die Konfiguration, und Schulung des Anwenders ist es zweckmäßig ein Tonwiedergabegerät zu verwenden, welches per Hand einstellbar Steuertöne in gewünschter Tonhöhe und in einstellbarer Lautstärke ausgibt. Die Grundtonhöhen und die jeweilige Codierung können je nach Anwender individuell konfiguriert werden. Ein sehr wichtiger Anwendungsfall der Erfindung ist die Ansteuerung von technischen Hilfsmitteln für stark bewegungsbehinderte Personen. Derart gesteuerte technische Hilfsmittel können beispielsweise Rollstühle, Prothesen, robotische Manipulatoren, Esshilfen etc. sein. Bemerkenswert bei dieser Erfindung ist, dass damit erstmals in gut beherrschbarer Technik ohne Berührung oder Verkabelung des Benutzers mit stimmlich erzeugten Tönen eine große Bandbreite von technisch komplexen Anwendungen schnell, präzise und kontrolliert gesteuert werden kann, ohne dass der Benutzer dafür einer aufwendigen Einschulung bedarf. Die einfache, vielseitige und schnelle Konfiguration und die geringen Anforderungen an die Hardware zeichnen die sprachenunabhängige Erfindung als sehr wirtschaftliches, nützliches und praktisches Produkt aus. Patentansprüche: 1. Verfahren zur Steuerung eines technischen Gerätes durch ein von der menschlichen Stimme erzeugtes akustisches Signal, welches über ein Mikrofon erfasst und automatisiert hinsichtlich physikalischer Eigenschaften analysiert wird, wobei dem Ergebnis dieser Analyse entsprechend einer Zuordnungstabelle ein Steuersignal für eine auszuführende Funktionen des zu steuernden technischen Gerätes generiert wird, gekennzeichnet dadurch, dass das akustische Signal ein Steuerton (1) ist welcher mit annähernd gleicher Grundfrequenz kontinuierlich aufrecht erhalten werden kann, also beispielsweise ein Selbstlaut oder ein Summlaut und dass der Steuerton (1) keinen Laut enthält, welcher nur durch einen plötzlichen Übergang zwischen dauerhafteren Zuständen der an der Lautbildung beteiligten Stimmorgane gebildet werden kann.The invention is also useful for people who are not handicapped. This is particularly the case when in some activities they no longer have a hand free or when the hands can not be used for other reasons. Examples of this are the control of operating devices, in particular microscopes by a surgeon, fine mechanical activities, work under water or in space in which the workwear represents a strong restriction of movement, activities in places which lie outside the gripping area of the controlling person, general environmental control (light, Heating, stove, remote control of consumer electronics, control of household appliances, etc ...) As a further expansion stage of the invention, a combination with speech recognition systems or an extension by trigger signals such as tongue locks or clicks makes sense. So could also switched between different stored motion patterns, or space positions of the manipulator approached stored and retrieved later. It was also possible to create and save movement patterns by the user. Especially for the configuration and training of the user, it is expedient to use a sound reproduction device which outputs manually adjustable control tones at the desired pitch and in an adjustable volume. The basic pitches and the respective coding can be configured individually depending on the user. A very important application of the invention is the control of technical aids for persons with severe mobility problems. Such controlled technical aids may be, for example, wheelchairs, prostheses, robotic manipulators, eating aids, etc. It is noteworthy in this invention is that for the first time in a well manageable technology without touching or cabling the user with vocally generated sounds, a wide range of technically complex applications can be controlled quickly, accurately and controlled without the user for a costly enrollment needs. The simple, versatile, and fast configuration and low hardware requirements make the language-independent invention a very economical, useful, and practical product. 1. A method for controlling a technical device by an acoustic signal generated by the human voice, which is detected by a microphone and automatically analyzed in terms of physical properties, the result of this analysis according to a mapping table, a control signal to be executed functions of the controlled technical device is generated, characterized in that the acoustic signal is a control tone (1) which can be maintained with approximately the same fundamental frequency continuously, so for example a self-sound or a buzzer and that the control tone (1) contains no sound, which only by a sudden transition between more permanent states of the vocal organs involved in the phonation can be formed. 2. Verfahren nach Anspruch 1, gekennzeichnet dadurch, dass die Lautstärke des Steuertons (1) den Wert der jeweils gestarteten Funktion, beispielsweise die Geschwindigkeit einer Bewegung des gesteuerten technischen Gerätes (6) bestimmt. 6 AT 503 305 B12. The method according to claim 1, characterized in that the volume of the control tone (1) determines the value of each started function, such as the speed of movement of the controlled technical device (6). 6 AT 503 305 B1 3. Verfahren nach Anspruch 1 oder 2, gekennzeichnet dadurch, dass die Art der gestarteten Funktion durch die Grundfrequenz des Steuertons (1) bestimmt wird.3. The method according to claim 1 or 2, characterized in that the type of the started function by the fundamental frequency of the control tone (1) is determined. 4. Verfahren nach einem der vorgenannten Ansprüche, gekennzeichnet dadurch, dass die am technischen Gerät (6) zu startenden Funktionen so lange ausgeführt werden, wie der Steuerton (1) anhält.4. The method according to any one of the preceding claims, characterized in that the technical equipment (6) to be started functions are executed as long as the control tone (1) stops. 5. Verfahren nach einem der Ansprüche 1 bis 3, gekennzeichnet dadurch, dass die am technischen Gerät (6) zu startenden Funktionen durch einen Steuerton gestartet werden und nach dem Erlöschen dieses Steuertons weiter ausgeführt werden.5. The method according to any one of claims 1 to 3, characterized in that the technical device (6) to be started functions are started by a control tone and continue to run after the extinction of this control tone. 6. Verfahren nach Anspruch 5, gekennzeichnet dadurch, dass die gestarteten Funktionen durch einen weiteren Steuerton (1), vorzugsweise einen gleichen Steuerton wie der zum Starten verwendete, wieder gestoppt werden.6. The method according to claim 5, characterized in that the started functions by another control tone (1), preferably a same control tone as that used for starting, are stopped again. 7. Verfahren nach Anspruch 5, gekennzeichnet dadurch, dass zu der schon gestarteten Funktion durch einen weiteren Steuerton eine weitere Funktion gestartet und des weiteren zeitgleich ausgeführt werden kann, und/oder dass mit einem weiteren Steuerton die erste Funktion beendet und sofort eine zweite Funktion gestartet wird.7. The method according to claim 5, characterized in that the already started function by another control tone another function can be started and further executed at the same time, and / or terminated with a further control tone, the first function and immediately started a second function becomes. 8. Verfahren nach einem der vorgenannten Ansprüche, gekennzeichnet dadurch, dass damit technische Geräte insgesamt, oder Teile von technischen Geräten bewegt werden.8. The method according to any one of the preceding claims, characterized in that so that technical devices in total, or parts of technical equipment are moved. 9. Verfahren nach einem der vorgenannten Ansprüche, gekennzeichnet dadurch, dass der Grundfrequenz des Steuertons (1) Bewegungen des technischen Gerätes (6) in bestimmte Raumrichtungen zugeordnet sind, wobei Vor- bzw. Zurückbewegung in der gleichen Raumrichtung durch in der Tonleiter nebeneinander liegende Steuertöne bestimmt werden.9. The method according to any one of the preceding claims, characterized in that the fundamental frequency of the control tone (1) movements of the technical device (6) are assigned in certain spatial directions, with forward or backward movement in the same spatial direction by in the scale adjacent control tones be determined. 10. Verfahren nach einem der Ansprüche 1 bis 8, gekennzeichnet dadurch, dass damit ein Anzeigesignal auf einem Bildschirm gesteuert wird.10. The method according to any one of claims 1 to 8, characterized in that it is used to control a display signal on a screen. 11. Verfahren nach einem der vorgenannten Ansprüche, gekennzeichnet dadurch, dass damit technische Hilfsmittel für bewegungsbehinderte Personen gesteuert werden.11. The method according to any one of the preceding claims, characterized in that so that technical aids for people with physical disabilities are controlled. 12. Verfahren nach einem der vorgenannten Ansprüche, gekennzeichnet dadurch, dass damit technische Hilfsmittel für Personen, die durch besonderes anspruchsvolle Umgebungsbedingungen in ihrer Bewegungsfreiheit stark eingeschränkt sind, gesteuert werden.12. The method according to any one of the preceding claims, characterized in that thus technical aids for persons who are severely limited by special demanding environmental conditions in their freedom of movement, are controlled. 13. Verfahren nach einem der vorgenannten Ansprüche, gekennzeichnet dadurch, dass damit technische Hilfsmittel von Personen gesteuert werden, welche für die Steuerung dieses Gerätes keine Hand mehr frei haben.13. The method according to any one of the preceding claims, characterized in that so that technical aids are controlled by persons who have no hand free for the control of this device. 14. Verfahren nach einem der vorgenannten Ansprüche, gekennzeichnet dadurch, dass damit ein technisches Gerät gesteuert wird, welches außerhalb des Greifbereiches der steuernden Person angeordnet ist.14. The method according to any one of the preceding claims, characterized in that it is a technical device is controlled, which is arranged outside the gripping region of the controlling person. 15. Verfahren nach einem der vorgenannten Ansprüche, gekennzeichnet dadurch, das die Obertonverteilung des Steuertons (1) ein Kriterium in der automatisiert ablaufenden Entscheidung, ob es sich um einen zugelassenen Steuerton (1) handelt, ist.15. The method according to any one of the preceding claims, characterized in that the overtone distribution of the control tone (1) is a criterion in the automatically running decision whether it is an approved control tone (1) is. 16. Verfahren nach einem der bisherigen Ansprüche mit Ausnahme von Anspruch 2, gekennzeichnet dadurch, dass die zu startende Funktion des technischen Gerätes (6) durch die Obertonverteilung des Steuertons (entspricht dem Vokal oder dem Summen) bestimmt wird. 7 AT 503 305 B116. The method according to any one of the preceding claims with the exception of claim 2, characterized in that the function to be started of the technical device (6) by the overtone distribution of the control tone (corresponding to the vowel or the sum) is determined. 7 AT 503 305 B1 17. Verfahren nach einem der vorgenannten Ansprüche, gekennzeichnet dadurch, dass durch zusätzliche Laute wie Klicklaute, Triggerlaute oder Sprachbefehle etc. weitere Funktionen des technischen Gerätes (6) gestartet werden, und/oder zwischen einzelnen Modi des technischen Gerätes hin- und hergeschaltet werden kann.17. The method according to any one of the preceding claims, characterized in that by additional sounds such as clicks, trigger sounds or voice commands, etc. other functions of the technical device (6) are started, and / or back and forth between individual modes of the technical device can be switched , 18. Verfahren nach einem der vorgenannten Ansprüche, gekennzeichnet dadurch, dass der Steuerton (1) ein Summen ist.18. The method according to any one of the preceding claims, characterized in that the control tone (1) is a buzzing. 19. Verfahren nach einem der vorgenannten Ansprüche, gekennzeichnet dadurch, dass der Grundfrequenz des Steuertons (1) Bewegungen des technischen Gerätes (6) in bestimmte Raumrichtungen entsprechend einem kartesischem Koordinatensystem zugeordnet sind.19. The method according to any one of the preceding claims, characterized in that the fundamental frequency of the control tone (1) movements of the technical device (6) are assigned in certain spatial directions corresponding to a Cartesian coordinate system. 20. Verfahren nach Anspruch 19, gekennzeichnet dadurch, dass jenen Grundfrequenzen des Steuertons, welche im Bereich zwischen zwei unterschiedlichen, genau jeweils einer anderen Hauptrichtung zugeordneten Grundfrequenz liegen, eine Bewegung in der durch die beiden unterschiedlichen Hauptrichtungen aufgespannten Ebene zugeordnet ist, und dass der Winkel dieser Bewegung in dieser Ebene zu den beiden Hauptrichtungen durch den Unterschied der Grundfrequenz zu den Grundfrequenzen bestimmt wird, die den Hauptrichtungen zugeordnet sind.20. The method according to claim 19, characterized in that those fundamental frequencies of the control tone, which are in the range between two different, each exactly one other main direction associated fundamental frequency, a movement in the plane defined by the two different main directions plane is assigned, and that the angle of this movement in this plane to the two principal directions is determined by the difference of the fundamental frequency to the fundamental frequencies associated with the principal directions. 21. Verfahren nach einem der vorgenannten Ansprüche, gekennzeichnet dadurch, dass der Grundfrequenz des Steuertons (1) Bewegungen des technischen Gerätes (6) entsprechend einem Polarkoordinaten zugeordnet sind. Hiezu 2 Blatt Zeichnungen21. The method according to any one of the preceding claims, characterized in that the fundamental frequency of the control tone (1) movements of the technical device (6) are assigned according to a polar coordinates. For this purpose 2 sheets of drawings
AT3052006A 2006-02-23 2006-02-23 METHOD FOR CONTROLLING TECHNICAL DEVICES THROUGH THE HUMAN VOICE AT503305B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
AT3052006A AT503305B1 (en) 2006-02-23 2006-02-23 METHOD FOR CONTROLLING TECHNICAL DEVICES THROUGH THE HUMAN VOICE

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
AT3052006A AT503305B1 (en) 2006-02-23 2006-02-23 METHOD FOR CONTROLLING TECHNICAL DEVICES THROUGH THE HUMAN VOICE

Publications (2)

Publication Number Publication Date
AT503305B1 true AT503305B1 (en) 2007-09-15
AT503305A4 AT503305A4 (en) 2007-09-15

Family

ID=38474512

Family Applications (1)

Application Number Title Priority Date Filing Date
AT3052006A AT503305B1 (en) 2006-02-23 2006-02-23 METHOD FOR CONTROLLING TECHNICAL DEVICES THROUGH THE HUMAN VOICE

Country Status (1)

Country Link
AT (1) AT503305B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102015219121A1 (en) * 2015-10-02 2017-04-06 Carl Zeiss Microscopy Gmbh Microscope control method and microscope

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107515562A (en) * 2016-06-17 2017-12-26 青海汉拉信息科技股份有限公司 The adaptive cluster remote control of Chinese language text is performed entirely automatically system
CN107515541A (en) * 2016-06-17 2017-12-26 青海汉拉信息科技股份有限公司 The execution system of the adaptive energy self-navigation of live clustered control of Chinese speech
CN107515547A (en) * 2016-06-17 2017-12-26 青海汉拉信息科技股份有限公司 The method of the adaptive live clustered control energy self-navigation execution system of Chinese speech

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19750536A1 (en) * 1997-11-14 1999-05-20 Hans J Effertz Speech supporting device for patients with assisted breathing, e.g. quadriplegic
JP2000084004A (en) * 1998-09-11 2000-03-28 Misawa Homes Co Ltd Electric wheelchair
US6108592A (en) * 1998-05-07 2000-08-22 International Business Machines Corporation Voice-controlled motorized wheelchair with sensors and displays
DE19960544A1 (en) * 1999-12-15 2001-07-26 Infineon Technologies Ag Controllable doll providing interaction with user
DE10237951A1 (en) * 2002-08-20 2004-03-04 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Operating robot to music being played involves reading dynamic movement properties from table of dynamic movement properties associated with defined musical properties according to choreographic rules
DE60014833T2 (en) * 1999-11-30 2005-11-17 Sony Corp. language processing

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19750536A1 (en) * 1997-11-14 1999-05-20 Hans J Effertz Speech supporting device for patients with assisted breathing, e.g. quadriplegic
US6108592A (en) * 1998-05-07 2000-08-22 International Business Machines Corporation Voice-controlled motorized wheelchair with sensors and displays
JP2000084004A (en) * 1998-09-11 2000-03-28 Misawa Homes Co Ltd Electric wheelchair
DE60014833T2 (en) * 1999-11-30 2005-11-17 Sony Corp. language processing
DE19960544A1 (en) * 1999-12-15 2001-07-26 Infineon Technologies Ag Controllable doll providing interaction with user
DE10237951A1 (en) * 2002-08-20 2004-03-04 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Operating robot to music being played involves reading dynamic movement properties from table of dynamic movement properties associated with defined musical properties according to choreographic rules

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102015219121A1 (en) * 2015-10-02 2017-04-06 Carl Zeiss Microscopy Gmbh Microscope control method and microscope
US11054626B2 (en) 2015-10-02 2021-07-06 Carl Zeiss Microscopy Gmbh Microscope control method and microscope
US11681136B2 (en) 2015-10-02 2023-06-20 Carl Zeiss Microscopy Gmbh Microscope control method and microscope

Also Published As

Publication number Publication date
AT503305A4 (en) 2007-09-15

Similar Documents

Publication Publication Date Title
Cai et al. Adaptive auditory feedback control of the production of formant trajectories in the Mandarin triphthong/iau/and its pattern of generalization
CA2661150C (en) Method, system and apparatus for real-time classification of muscle signals from self-selected intentional movements
Agus et al. Fast recognition of musical sounds based on timbre
Ostry et al. An examination of the degrees of freedom of human jaw motion in speech and mastication
DE10129326B4 (en) Information processing system with a graphical user interface controllable by a voice recognition device and thus equipped musical instrument
AT503305B1 (en) METHOD FOR CONTROLLING TECHNICAL DEVICES THROUGH THE HUMAN VOICE
DE102020110901A1 (en) VOICE TRANSPLANTATION USING MACHINE LEARNING
Solis et al. The development of the anthropomorphic flutist robot at Waseda University
AT519468B1 (en) Tuning device of a pipe of an organ
Hinterberger et al. Auditory Feedback of Human EEG for Direct Brain-Computer Communication.
Lyu et al. Electromyography (EMG)-based Chinese voice command recognition
DE102017000570B3 (en) Method and training instrument for adjusting the vocal tract for speech, singing and playing wind instruments
JP2000116670A (en) Surgical microscope
WO1988004462A1 (en) Supporting device for transverse flutes, especially boehm flutes
DE2616656C3 (en) Speech generator
DE29705610U1 (en) Device for operating electronically controllable devices
Roy et al. Evidence for common expressions of apraxia
DE102009023924A1 (en) Method for speech recognition in patients with neurological disorder or laryngectomy for e.g. vocal rehabilitation, involves acoustically reproducing output signal and/or converting signal into written text reference number list
Miranda et al. Steering generative rules with the EEG: An approach to brain-computer music interfacing
DE102012219128A1 (en) Method for determining anatomical causes of snoring person during surgery, involves determining localization of sound formation place in vowel tract by distance from acoustic source to delta using resonant frequencies of transfer function
DE2405882A1 (en) ELECTRONIC MUSICAL INSTRUMENTS
Matanga et al. A Matlab/Simulink framework for real time implementation of endogenous brain computer interfaces
Lega Moving “in tune”: neuro-functional mechanisms mediating auditory-motor associations
Hung Teaching mute retarded children vocal imitation
AT525615A1 (en) DEVICE AND METHOD FOR OUTPUTTING AN ACOUSTIC SIGNAL BASED ON PHYSIOLOGICAL DATA

Legal Events

Date Code Title Description
ELJ Ceased due to non-payment of the annual fee