DE102022115032A1 - HEADPHONE PART WITH SENSORS FOR CHARACTERIZING A PERSON'S VOCAL TRACT - Google Patents

HEADPHONE PART WITH SENSORS FOR CHARACTERIZING A PERSON'S VOCAL TRACT Download PDF

Info

Publication number
DE102022115032A1
DE102022115032A1 DE102022115032.1A DE102022115032A DE102022115032A1 DE 102022115032 A1 DE102022115032 A1 DE 102022115032A1 DE 102022115032 A DE102022115032 A DE 102022115032A DE 102022115032 A1 DE102022115032 A1 DE 102022115032A1
Authority
DE
Germany
Prior art keywords
wireless interface
person
headphone
signals
antenna
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102022115032.1A
Other languages
German (de)
Inventor
Martin Laabs
Dirk Plettemeier
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Altavo De GmbH
Technische Universitaet Dresden
Original Assignee
Altavo GmbH
Technische Universitaet Dresden
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Altavo GmbH, Technische Universitaet Dresden filed Critical Altavo GmbH
Priority to DE102022115032.1A priority Critical patent/DE102022115032A1/en
Publication of DE102022115032A1 publication Critical patent/DE102022115032A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1091—Details not provided for in groups H04R1/1008 - H04R1/1083
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/12—Audiometering
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/02—Systems using reflection of radio waves, e.g. primary radar systems; Analogous systems
    • G01S13/50—Systems of measurement based on relative movement of target
    • G01S13/58—Velocity or trajectory determination systems; Sense-of-movement determination systems
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/86—Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88—Radar or analogous systems specially adapted for specific applications
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
    • G01S7/415—Identification of targets based on measurements of movement associated with the target
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R23/00—Transducers other than those covered by groups H04R9/00 - H04R21/00
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/003—Transmission of data between radar, sonar or lidar systems and remote stations
    • G01S7/006—Transmission of data between radar, sonar or lidar systems and remote stations using shared front-end circuitry, e.g. antennas
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00—Details of connection covered by H04R, not provided for in its groups
    • H04R2420/07—Applications of wireless loudspeakers or wireless microphones

Abstract

Ein System (400) umfasst ein Kopfhörerteil (401, 402) zum Tragen durch eine Person (71) sowie mindestens eine Drahtlosschnittstelle (151, 152, 153), die im Kopfhörerteil (401, 402) angeordnet ist und die eingerichtet ist, um elektromagnetische Signale (471, 472) nach einer Wechselwirkung der elektromagnetischen Signale (471, 472) mit dem Vokaltrakt der Person (70) zu empfangen. Derart kann der Vokaltrakt basierend auf den elektromagnetischen Signalen (471, 472) charakterisiert werden, beispielsweise um eine intendierte Sprachäußerung der Person zu bestimmen.A system (400) comprises a headphone part (401, 402) to be worn by a person (71) and at least one wireless interface (151, 152, 153) which is arranged in the headphone part (401, 402) and which is set up to receive electromagnetic To receive signals (471, 472) after an interaction of the electromagnetic signals (471, 472) with the vocal tract of the person (70). In this way, the vocal tract can be characterized based on the electromagnetic signals (471, 472), for example to determine the person's intended speech utterance.

Description

TECHNISCHES GEBIETTECHNICAL FIELD

Verschiedene Aspekte der Offenbarung betreffen ein Kopfhörerteil, das Sensorik aufweist, mittels derer ein Vokaltrakt charakterisiert werden kann.Various aspects of the disclosure relate to a headphone part that has sensors by means of which a vocal tract can be characterized.

HINTERGRUNDBACKGROUND

Die Charakterisierung des Vokaltrakts kann zum Zwecke der Bestimmung einer intendierten Sprachäußerung der Person erfolgen. Siehe z.B. Wagner, Christoph, et al. „Silent Speech Command Word Recognition Using Stepped Frequency Continuous Wave Radar.“ (2021).The characterization of the vocal tract can be done for the purpose of determining the person's intended speech expression. See e.g. Wagner, Christoph, et al. “Silent Speech Command Word Recognition Using Stepped Frequency Continuous Wave Radar.” (2021).

Technisch wird die menschliche Stimme häufig durch das sogenannte Quelle-Filter-Modell beschrieben. Die Lunge, die Luftröhre und der Kehlkopf bilden zusammen die Quelle. Die Luft wird in der Lunge komprimiert und strömt durch die Luftröhre nach oben zum Kehlkopf. Im Kehlkopf bilden die Stimmlippen - umgangssprachlich als „Stimmbänder“ bezeichnet - die Stimmritze. Die Kehlkopfmuskulatur hält die Stimmlippen unter Spannung, indem sie über die Aryknorpel eine Kraft ausübt. Beim stimmhaften Sprechen bewirken der Druck in der Luftröhre und die Spannung der Stimmlippen, dass sich diese periodisch öffnen und schließen, wodurch eine akustische Schwingung, eine Schallwelle, entsteht. Diese Schallwelle wird durch die zeitlich veränderliche Form des Vokaltrakts, bestehend aus Rachen, Mundhöhle und Nasenhöhle, akustisch gefiltert, bevor sie aus dem Mund und den Nasenlöchern austritt. Der Vokaltrakt bildet zusammen mit der Gesichtsmuskulatur und dem Kehlkopf den Sprechapparat.Technically, the human voice is often described by the so-called source-filter model. The lungs, trachea and larynx together form the source. The air is compressed in the lungs and flows up the trachea to the larynx. In the larynx, the vocal folds - colloquially known as “vocal cords” - form the glottis. The larynx muscles keep the vocal folds under tension by exerting force through the arytenoid cartilages. During voiced speech, the pressure in the trachea and the tension of the vocal folds cause them to open and close periodically, creating an acoustic vibration, a sound wave. This sound wave is acoustically filtered by the time-changing shape of the vocal tract, consisting of the pharynx, oral cavity and nasal cavity, before exiting the mouth and nostrils. The vocal tract, together with the facial muscles and the larynx, forms the speech apparatus.

Die Erzeugung von Sprache aus entsprechenden Sprachäußerungen besteht dabei aus dem Vorgang der Phonation, technisch ausgedrückt der Anregung einer akustischen Schwingung durch die Stimmlippen, und der Artikulation, also der Filterung des Schallspektrums durch die zeitlich veränderliche Form des Vokaltrakts. Die Formung des Vokaltrakts erfolgt mit dem Gaumensegel, das die Nasenhöhle öffnet oder abschließt, der Zunge, etc.The production of speech from corresponding speech utterances consists of the process of phonation, in technical terms the excitation of an acoustic vibration through the vocal folds, and articulation, i.e. the filtering of the sound spectrum through the time-changing shape of the vocal tract. The vocal tract is formed by the soft palate, which opens or closes the nasal cavity, the tongue, etc.

Zur Charakterisierung des Vokaltrakts kann verschiedene Sensorik verwendet werden. Beispielsweise kann zur Charakterisierung des Vokaltrakts die Veränderung von elektromagnetischen Wellen durch Reflexion oder Transmission am Vokaltrakt einer Person im Rahmen einer Radarmessung ausgenutzt werden. Die entsprechenden Signale können dann zum Beispiel mittels eines künstlichen neuronalen Netzwerks verarbeitet werden, um eine intendierte Sprachäußerung zu bestimmen.Various sensor technologies can be used to characterize the vocal tract. For example, to characterize the vocal tract, the change in electromagnetic waves through reflection or transmission on a person's vocal tract can be used as part of a radar measurement. The corresponding signals can then be processed, for example, using an artificial neural network to determine an intended speech utterance.

KURZE ZUSAMMENFASSUNG DER ERFINDUNGBRIEF SUMMARY OF THE INVENTION

Es ist eine Aufgabe, eine kompakt integrierte und von der Person bequem zu tragende Sensorik zur Charakterisierung des Vokaltrakts der Person bereitzustellen.It is a task to provide a compactly integrated sensor system that can be easily worn by the person for characterizing the person's vocal tract.

Diese Aufgabe wird gelöst von den Merkmalen der unabhängigen Patentansprüche. Die Merkmale der abhängigen Patentansprüche definieren Ausführungsformen.This task is solved by the features of the independent patent claims. The features of the dependent claims define embodiments.

Gemäß verschiedener Aspekte wird Sensorik zur Charakterisierung des Vokaltrakts einer Person in ein Kopfhörerteil eines Kopfhörers, der von der Person getragen werden kann, integriert. Basierend auf der Charakterisierung des Vokaltrakts kann eine intendierte Sprachäußerung der Person bestimmt werden. Es ist möglich, dass eine Audiorepräsentation der intendierten Sprachäußerung erzeugt wird und über den Kopfhörer ausgegeben wird.According to various aspects, sensors for characterizing a person's vocal tract are integrated into a headphone part of a headphone that can be worn by the person. Based on the characterization of the vocal tract, the person's intended speech expression can be determined. It is possible that an audio representation of the intended speech utterance is generated and output via the headphones.

Ein System umfasst ein Kopfhörerteil zum Tragen durch eine Person. Das System umfasst auch mindestens eine Drahtlosschnittstelle. Die mindestens eine Drahtlosschnittstelle ist im Kopfhörerteil angeordnet. Die mindestens eine Drahtlosschnittstelle ist eingerichtet, um elektromagnetische Signale nach einer Wechselwirkung der elektromagnetischen Signale mit dem Vokaltrakt der Person zu empfangen. Das System umfasst außerdem eine Datenverarbeitungseinheit. Die Datenverarbeitungseinheit ist eingerichtet, um den Vokaltrakt basierend auf den elektromagnetischen Signalen zum Bestimmen einer intendierten Sprachäußerung der Person zu charakterisieren.One system includes a headphone portion for wear by a person. The system also includes at least one wireless interface. The at least one wireless interface is arranged in the headphone part. The at least one wireless interface is set up to receive electromagnetic signals after an interaction of the electromagnetic signals with the vocal tract of the person. The system also includes a data processing unit. The data processing unit is set up to characterize the vocal tract based on the electromagnetic signals to determine an intended speech utterance of the person.

Die elektromagnetischen Signale können also im Rahmen einer Radarmessung ausgewertet werden. Eine Radarmessung kann z.B. die Bestimmung der Impulsantwort des Übertragungskanals der elektromagnetischen WellenKanals umfassen. Eine Radarmessung kann also eine Interaktion von elektromagnetischen Wellen mit dem Gewebe und das Gewinnen von Information über diese Interaktion umfassen. Diejenigen elektromagnetischen Signale, die im Rahmen der Radarmessung ausgewertet werden, werden nachfolgend auch als Radarsignale bezeichnet (obwohl diese elektromagnetischen Signale, wie nachfolgend näher erläutert, auch andere Funktionalität über die Radarmessung hinaus erfüllen können).The electromagnetic signals can therefore be evaluated as part of a radar measurement. A radar measurement can, for example, include determining the impulse response of the transmission channel of the electromagnetic wave channel. A radar measurement can therefore involve an interaction of electromagnetic waves with the tissue and obtaining information about this interaction. Those electromagnetic signals that are evaluated as part of the radar measurement are also referred to below as radar signals (although, as explained in more detail below, these electromagnetic signals can also fulfill other functions beyond the radar measurement).

Bei dem Kopfhörerteil kann es sich um ein „In-Ear“-Kopfhörerteil eines Paars von In-Ear-Kopfhörerteilen (die zusammen einen Kopfhörer bilden) handeln. Das Kopfhörerteil könnte auch ein „On-Ear“ oder „Over-Ear“-Kopfhörerteil eines Kopfhörers sein. Das In-Ear-Kopfhörerteil weist einen Abschnitt auf, der sich in den Gehörgang der Person erstreckt. Das On-Ear-Kopfhörerteil weist eine Auflagefläche (typischerweise durch ein Polster ausgebildet) auf, welches auf der Ohrmuschel der Person aufliegt. Das Over-Ear-Kopfhörerteil umschließt die Ohrmuschel der Person vollständig. On-Ear-Kopfhörerteile und Over-Ear-Kopfhörerteile sind an einem Kopftragebügel angebracht; während In-Ear-Kopfhörerteile durch die Anordnung im Gehörgang am Ohr oder der Ohrmuschel fixiert werden.The headphone part may be an “in-ear” headphone part of a pair of in-ear headphone parts (which together form a headphone). The headphone part could also be an “on-ear” or “over-ear” headphone part of a headphone. The in-ear headphone part has a section that extends into the person's ear canal. The on-ear headphone part has a support surface (typically formed by a pad) which rests on the person's auricle. The over-ear headphone part completely encloses the person's auricle. On-ear headphone parts and over-ear headphone parts are attached to a headband; while in-ear headphone parts are fixed to the ear or the auricle by being arranged in the ear canal.

Durch das Integrieren der Drahtlosschnittstelle, welche die elektromagnetischen Signale empfängt, in das Kopfhörerteil, kann eine platzsparende und komfortabel zu tragende Umsetzung der entsprechenden Sensorik erreicht werden.By integrating the wireless interface, which receives the electromagnetic signals, into the headphone part, a space-saving and comfortable-to-carry implementation of the corresponding sensor technology can be achieved.

Die elektromagnetischen Signale können von einer anderen Drahtlosschnittstelle oder derselben Drahtlosschnittstelle ausgesendet werden.The electromagnetic signals may be emitted from another wireless interface or the same wireless interface.

Beispielsweise wäre es denkbar, dass Radarsignale durch die Datenverarbeitungseinheit ausgewertet werden, die normalerweise zur drahtlosen Datenübertragung zu und zwischen drahtlosen Kopfhörern genutzt werden.For example, it would be conceivable for radar signals to be evaluated by the data processing unit, which are normally used for wireless data transmission to and between wireless headphones.

In anderen Worten können bestimmte Signalbestandteile eines Datenkommunikationsprotokolls auch zum Zwecke einer Radarmessung verwendet werden. Es bieten sich insbesondere solche Signalbestandteile an, welche bei einer Autokorrelation ein möglichst hohes Verhältnis zwischen Haupt- und Nebenmaxima sowie ein möglichst schmales Hauptmaxima ergeben. Derart lässt sich nämlich die Impulsantwort der Übertragungsstrecke ermitteln; die Impulsantwort ist dann wesentlich beeinflusst durch die Wechselwirkung des Signals im oder am Vokaltrakt.In other words, certain signal components of a data communication protocol can also be used for the purpose of radar measurement. Signal components which, in the case of autocorrelation, result in the highest possible ratio between main and secondary maxima as well as the narrowest possible main maxima are particularly suitable. In this way, the impulse response of the transmission path can be determined; The impulse response is then significantly influenced by the interaction of the signal in or on the vocal tract.

Es können Signalbestandteile des Datenkommunikationsprotokolls zum Zwecke der Radarmessung verwendet werden, welche eine vorbestimmte Signalform aufweisen. Mittels eines solchen Datenkommunikationsprotokolls ist es möglich, paketierte Anwendungsdaten zu übertragen, die Audiodaten beinhalten, die über das Kopfhörerteil wiedergegeben werden. Um die Übertragung von paketierten Anwendungsdaten zu ermöglichen, werden auch Pilottöne übertragen. Insbesondere können solche Pilottöne des Datenkommunikationsprotokolls dazu verwendet werden, den Vokaltrakt zu charakterisieren. Beispielsweise sind Datenkommunikationsprotokolle, wie beispielsweise Bluetooth oder Wifi, bekannt, welche eine Sequenz von Datenpakete umfassen, wobei jedes Datenpaket Zeit-Frequenz-Ressourcen umfasst. Bestimmte Ressourcen können dann wiederkehrend für die Übertragung von Pilottönen allokiert sein. Ein Beispiel wären das sog. Synchronisation Wordword bei BluetoothBlueooth. Siehe Bluetooth Core Specification v5.3, Section 6.3.3. Pilottöne können auch in einer Trainingssequenz für ein Demodulationsverfahren, z.B. BPSK, verwendet werden. Mittels der Pilottöne kann beispielsweise auch der Kanal zwischen Sender und Empfänger vermessen werden. Basierend auf einer Kenntnis des Kanals bzw. einer Synchronisation können dann Übertragungsparameter des Datenkommunikationsprotokolls eingestellt werden, etwa ein Zeitgeber beim Sender und Empfänger für die Demodulation.Signal components of the data communication protocol can be used for the purpose of radar measurement, which have a predetermined signal shape. Using such a data communication protocol, it is possible to transmit packetized application data that includes audio data that is played back via the headphone part. To enable the transmission of packetized application data, pilot tones are also transmitted. In particular, such pilot tones of the data communication protocol can be used to characterize the vocal tract. For example, data communication protocols, such as Bluetooth or Wifi, are known which comprise a sequence of data packets, each data packet comprising time-frequency resources. Certain resources can then be allocated on a recurring basis for the transmission of pilot tones. An example would be the so-called synchronization Wordword for BluetoothBlueooth. See Bluetooth Core Specification v5.3, Section 6.3.3. Pilot tones can also be used in a training sequence for a demodulation method, e.g. BPSK. For example, the channel between the transmitter and receiver can also be measured using the pilot tones. Based on knowledge of the channel or synchronization, transmission parameters of the data communication protocol can then be set, such as a timer at the transmitter and receiver for demodulation.

Solche Pilottöne sind nativ im Datenkommunikationsprotokoll vorhanden und nicht abhängig von den übertragenen paketierten Anwendungsdaten. In manchen Beispielen wäre es auch denkbar, dass die paketierten Anwendungsdaten gezielt geformt werden, so dass die Signale, die die paketierten Anwendungsdaten kodieren, eine Autokorrelation aufweisen, die ein möglichst hohes Verhältnis zwischen Haupt- und Nebenmaxima sowie ein möglichst schmales Hauptmaxima darstellen. Beispielsweise wäre es denkbar, paketierte Dummy-Daten zu erzeugen. Diese Dummy-Daten können gezielt im Zusammenhang mit der Radarmessung verwendet werden. Die paketierten Dummy-Daten können dann in eine obere Schicht eines Protokollstacks des Datenkommunikationsprotokolls eingespeist werden, beispielsweise in die Schicht 2 (Datenlink-Schicht), Schicht 3 (Netzwerkschicht) oder höher (insb. Anwendungsschicht, d.h. Schicht 7). Dann können die Radarsignale diejenigen Signalbestandteile des Datenkommunikationsprotokolls sein, welche die Dummy-Daten kodieren. Die Dummy-Daten werden in einem Nutzdaten-Bereich von Transportblöcken des Datenkommunikationsprotokolls versendet.Such pilot tones are native to the data communication protocol and are not dependent on the packetized application data being transmitted. In some examples, it would also be conceivable for the packetized application data to be specifically shaped so that the signals that encode the packetized application data have an autocorrelation that represents the highest possible ratio between main and secondary maxima as well as the narrowest possible main maxima. For example, it would be conceivable to create packetized dummy data. This dummy data can be used specifically in connection with radar measurement. The packetized dummy data can then be fed into an upper layer of a protocol stack of the data communication protocol, for example into layer 2 (data link layer), layer 3 (network layer) or higher (especially application layer, i.e. layer 7). The radar signals can then be those signal components of the data communication protocol that encode the dummy data. The dummy data is sent in a payload area of transport blocks of the data communication protocol.

Beispielsweise könnten die Dummy-Daten in Abhängigkeit von einer verwendeten Modulation in Schicht 1 des Protokollstacks ausgewählt werden (d.h. je nach Modulationsart könnten andere Dummy-Daten verwendet werden). Beispielsweise gibt es bei Bluetooth die Möglichkeit, zwischen unterschiedlichen Modulationsverfahren umzuschalten, etwa zwischen Frequenz-Kodierung und einer Phasen-Kodierung (Gaussian Shift Keying, GFSK; sowie Phase Shift Keying). Die Signalform der basierend auf den Dummy-Daten erzeugten Signale ist abhängig von dem verwendeten Modulationsverfahren. Um jeweils für die Radarmessung geeignete Signalform zu erzeugen, kann in Abhängigkeit vom verwendeten Modulationsverfahren zwischen unterschiedlichen Dummy-Daten umgeschaltet werden.For example, the dummy data could be selected depending on a modulation used in layer 1 of the protocol stack (i.e. depending on the type of modulation, other dummy data could be used). For example, with Bluetooth it is possible to switch between different modulation methods, such as between frequency coding and phase coding (Gaussian Shift Keying, GFSK; and Phase Shift Keying). The signal shape of the signals generated based on the dummy data depends on the modulation method used. In order to generate a signal form suitable for radar measurement, you can switch between different dummy data depending on the modulation method used.

Durch das Wiederverwenden von Signalbestandteilen eines Datenkommunikationsprotokolls für die Radarmessung ist es entbehrlich, Signale außerhalb des vom Datenkommunikationsprotokoll verwendeten Frequenzband zu senden. Interferenz zwischen Übertragungen des Datenkommunikationsprotokolls und Radarsignalen wird inhärent vermieden.By reusing signal components of a data communication protocol for radar measurement, it is unnecessary to send signals outside the frequency band used by the data communication protocol. Interference between transmissions of the Data communication protocol and radar signals are inherently avoided.

In manchen Beispielen wäre es aber auch denkbar, dass die verwendeten Radarsignale nicht im Kontext des Datenkommunikationsprotokolls definiert sind (d.h. insbesondere keine Pilottöne sind oder keine Dummy-Daten kodieren). In anderen Worten wäre es also denkbar, dass zusätzliche Radarsignale verwendet werden, die keine Funktion im Rahmen des Datenkommunikationsprotokolls ausüben. Diese zusätzlichen Radarsignale können beispielsweise bei ein oder mehreren Frequenzen übertragen werden, die außerhalb eines Frequenzbandes des Datenkommunikationsprotokolls liegen. Es wäre aber auch denkbar, dass diese zusätzlichen Radarsignale bei ein oder mehreren Frequenzen übertragen werden, die im Frequenzband des Datenkommunikationsprotokolls liegen. In einem solchen Fall kann es erstrebenswert sein, dass gezielt Interferenz zwischen den Radarsignalen und den Signalen des Datenkommunikationsprotokolls vermieden wird. Dies kann zum Beispiel dadurch erfolgen, dass die Radarsignale zeitsynchronisiert mit einer Zeitbasis des Datenkommunikationsprotokolls gesendet werden. Die Zeitbasis wird z.B. durch entsprechende Synchronisationssignale des Datenkommunikationsprotokolls angezeigt. Es könnte auch auf einen Zeitgeber des Protokollstacks zurückgegriffen werden. Dadurch kann ein Multiplexen im Zeitraum ermöglicht werden. Beispielsweise wäre es denkbar, dass in Datenrahmen des Datenkommunikationsprotokolls bestimmte Zeitschlitze definiert sind, während denen die Radarsignale übertragen werden. Es kann also ein gemeinsames Steuern der Übertragung von Signalen des Datenkommunikationsprotokolls und den Radarsignalen erfolgen, manchmal als gemeinsames „scheduling“ bezeichnet.In some examples, however, it would also be conceivable that the radar signals used are not defined in the context of the data communication protocol (i.e. in particular are not pilot tones or do not encode dummy data). In other words, it would be conceivable for additional radar signals to be used that do not perform any function within the framework of the data communication protocol. These additional radar signals can, for example, be transmitted at one or more frequencies that lie outside a frequency band of the data communication protocol. However, it would also be conceivable for these additional radar signals to be transmitted at one or more frequencies that lie in the frequency band of the data communication protocol. In such a case, it may be desirable to specifically avoid interference between the radar signals and the signals of the data communication protocol. This can be done, for example, by sending the radar signals in a time-synchronized manner with a time base of the data communication protocol. The time base is displayed, for example, by corresponding synchronization signals from the data communication protocol. A timer of the protocol stack could also be used. This allows multiplexing over time. For example, it would be conceivable for certain time slots during which the radar signals are transmitted to be defined in data frames of the data communication protocol. The transmission of signals from the data communication protocol and the radar signals can therefore be jointly controlled, sometimes referred to as joint “scheduling”.

Als allgemeine Regel wäre es denkbar, in den verschiedenen dargestellten Szenarien - das heißt insbesondere erstens komplett getrennte Radarsignale und Signale des Datenkommunikationsprotokolls, zweitens Radarsignale und Signale des Datenkommunikationsprotokolls im selben Frequenzbereich und drittens Verwendung von Signalbestandteilen der Signale des Datenkommunikationsprotokolls für die Radarmessung - eine gemeinsame Antenne für das Datenkommunikationsprotokoll (d.h. entsprechende Signale die z.B. packetierte Anwendungsdaten kodieren) und gegebenenfalls die separaten Radarsignale zu verwenden. Dadurch kann eine besonders kleine Bauform des Kopfhörerelements erzielt werden.As a general rule, it would be conceivable in the various scenarios presented - that is, in particular, firstly, completely separate radar signals and data communication protocol signals, secondly, radar signals and data communication protocol signals in the same frequency range and thirdly, use of signal components of the data communication protocol signals for radar measurement - a common antenna for the data communication protocol (i.e. corresponding signals that encode, for example, packetized application data) and, if necessary, the separate radar signals. This allows a particularly small design of the headphone element to be achieved.

In manchen Beispielen wäre es auch denkbar, dass unterschiedliche Antennen für die Übertragung von Signalen des Datenkommunikationsprotokolls einerseits und für das Übertragen von Radarsignalen, die ausgewertet werden, um den Vokaltrakt zu charakterisieren, andererseits verwendet werden. Dadurch kann ein flexibles Positionieren der beiden Antennen jeweils in Anbetracht der entsprechenden Anwendung ermöglicht werden. Beispielsweise könnte eine für die Übertragung von Signalen des Datenprotokolls verwendete Antenne so positioniert werden, dass eine Abstrahlung bzw. Sensitivität in den Freiraum, weg vom Kopf der Person orientiert ist. Andererseits kann eine für die Übertragung der Radarsignale verwendete Antenne so positioniert werden, dass die Abstrahlung bzw. Sensitivität hin zum Kopf der Person bzw. insbesondere hin zum Vokaltrakt der Person orientiert sein kann.In some examples it would also be conceivable that different antennas are used for the transmission of signals from the data communication protocol on the one hand and for the transmission of radar signals that are evaluated to characterize the vocal tract on the other hand. This allows flexible positioning of the two antennas in consideration of the corresponding application. For example, an antenna used for transmitting data protocol signals could be positioned so that radiation or sensitivity is oriented into the free space, away from the person's head. On the other hand, an antenna used for transmitting the radar signals can be positioned so that the radiation or sensitivity can be oriented towards the person's head or in particular towards the person's vocal tract.

Es ist möglich, dass die Datenverarbeitungseinheit im Kopfhörerteil angeordnet ist. Das bedeutet, dass die Auswertung der Radarsignale im Kopfhörerteil selbst erfolgen kann.It is possible for the data processing unit to be arranged in the headphone part. This means that the radar signals can be evaluated in the headphone section itself.

Es wäre aber auch denkbar, dass die Datenverarbeitungseinheit separat angeordnet ist. Zum Beispiel könnte die Datenverarbeitungseinheit in einem Server oder PC angeordnet sein. Cloud-Prozessierung wäre denkbar. Der Server kann entfernt von der Person angeordnet sein. Das Kopfhörerteil kann dazu paketierte Anwendungsdaten, basierend auf denen die Auswertung erfolgt, an den Server senden. Dies kann z.B. über eine Mobilfunkverbindung erfolgen. Eine Kommunikation über das Internet wäre denkbar.However, it would also be conceivable for the data processing unit to be arranged separately. For example, the data processing unit could be arranged in a server or PC. Cloud processing would be conceivable. The server can be located remotely from the person. For this purpose, the headphone part can send packaged application data, based on which the evaluation is carried out, to the server. This can be done, for example, via a mobile phone connection. Communication via the Internet would be conceivable.

In weiteren Beispielen kann die Datenverarbeitungseinheit auch in einem Mobilgerät angeordnet sein, das über eine lokale Datenverbindung mit dem Kopfhörerteil kommuniziert. Das Mobilgerät kann vom Nutzer getragen werden, der auch das Kopfhörerteil trägt.In further examples, the data processing unit can also be arranged in a mobile device that communicates with the headphone part via a local data connection. The mobile device can be carried by the user who also wears the headphone part.

In manchen Beispielen kann das System also das Mobilgerät umfassen, welches getrennt vom Kopfhörerteil angeordnet ist. Das Mobilgerät könnte zum Beispiel ein Smartphone sein. Das Mobilgerät könnte eine Smartwatch sein. Das Mobilgerät kann die Datenverarbeitungseinheit und eine weitere Drahtlosschnittstelle umfassen. Die Drahtlosschnittstelle, die im Kopfhörerteil angeordnet ist, und die im Mobilgerät angeordnete weitere Drahtlosschnittstelle können mittels des Datenkommunikationsprotokolls paketierte Anwendungsdaten kommunizieren. Beispielsweise könnten Audiodaten von der im Mobilgerät angeordneten weiteren Drahtlosschnittstelle an die Drahtlosschnittstelle im Kopfhörerteil übertragen werden und dann eine entsprechende Audioausgabe über das Kopfhörerteil bereitgestellt werden.In some examples, the system may therefore include the mobile device, which is arranged separately from the headphone part. The mobile device could be a smartphone, for example. The mobile device could be a smartwatch. The mobile device can include the data processing unit and another wireless interface. The wireless interface, which is arranged in the headphone part, and the further wireless interface arranged in the mobile device can communicate packeted application data using the data communication protocol. For example, audio data could be transmitted from the additional wireless interface arranged in the mobile device to the wireless interface in the headphone part and then a corresponding audio output could be provided via the headphone part.

Die empfangenen elektromagnetischen Signale oder daraus abgeleitete Daten können an einen Empfänger übermittelt werden. Dadurch kann die Datenverarbeitungseinheit entfernt vom Kopfhörerteil die Auswertung durchführen. Dies wird nachfolgend näher erläutert.The received electromagnetic signals or data derived therefrom can be transmitted to a receiver. This allows the data processing unit carries out the evaluation away from the headphone part. This is explained in more detail below.

Die Drahtlosschnittstelle des Mobilgeräts kann eingerichtet sein, um eine Repräsentation der elektromagnetischen Signale in Anwendungsdaten paketiert an die weitere Drahtlosschnittstelle mittels des Datenkommunikationsprotokolls zu übertragen.The wireless interface of the mobile device can be set up to transmit a representation of the electromagnetic signals packaged in application data to the further wireless interface using the data communication protocol.

Das bedeutet also in anderen Worten, dass die Anwendungsdaten eine Signalform oder andere Eigenschaften der elektromagnetischen Signale anzeigen können. Dadurch kann ein Empfänger der Anwendungsdaten eine Auswertung der elektromagnetischen Signale durchführen, um den Sprechapparat zu charakterisieren.In other words, this means that the application data can display a waveform or other properties of the electromagnetic signals. This allows a recipient of the application data to evaluate the electromagnetic signals in order to characterize the speaking apparatus.

Die Repräsentation der elektromagnetischen Signale könnte zum Beispiel basierend auf einer Vor-Auswertung in einer weiteren Datenverarbeitungseinheit im Kopfhörerteil bestimmt werden. Beispielsweise könnte eine Fourier-Transformation durchgeführt werden und ein entsprechendes Spektrum in die Anwendungsdaten paketiert werden. Es könnte eine Datenkompression erfolgen. Derart kann die zu übertragende Datenmenge reduziert werden, wobei aber gleichzeitig eine umfassende und genaue Charakterisierung des Vokaltrakts in der Datenverarbeitungseinheit im Mobilgerät erfolgen kann. Typischerweise ist diese Auswertung zur Charakterisierung des Vokaltrakts vergleichsweise rechenintensiv und erfordert daher eine besonders große Rechenleistung. Die Datenverarbeitungseinheit im Mobilgerät kann diese Rechenleistung zur Verfügung stellen; während typischerweise eine Datenverarbeitungseinheit im Kopfhörerteil eine vergleichsweise kleinere Rechenleistung bereitstellen kann.The representation of the electromagnetic signals could, for example, be determined based on a pre-evaluation in a further data processing unit in the headphone part. For example, a Fourier transformation could be performed and a corresponding spectrum packaged into the application data. Data compression could occur. In this way, the amount of data to be transmitted can be reduced, but at the same time a comprehensive and precise characterization of the vocal tract can be carried out in the data processing unit in the mobile device. Typically, this evaluation to characterize the vocal tract is comparatively computationally intensive and therefore requires a particularly large amount of computing power. The data processing unit in the mobile device can provide this computing power; while typically a data processing unit in the headphone part can provide comparatively smaller computing power.

Es wäre denkbar, dass das Kopfhörerteil einen Audiotreiber umfasst, und dieser eingerichtet ist, um eine Audiorepräsentation der intendierten Sprachäußerung auszugeben. Der Audiotreiber kann also beispielsweise eine Membran umfassen, die Schallwellen erzeugt. Dadurch ist es möglich, die intendierte Sprachäußerungen bzw. eine entsprechende Abfolge mehrerer Sprachäußerungen als Sprache an die Person auszugeben.It would be conceivable that the headphone part includes an audio driver and this is set up to output an audio representation of the intended speech utterance. The audio driver can therefore, for example, comprise a membrane that generates sound waves. This makes it possible to output the intended speech utterances or a corresponding sequence of several speech utterances to the person as speech.

Die Audiorepräsentation der intendierten Sprachäußerung kann von der weiteren Drahtlosschnittstelle im Mobilgerät an die Drahtlosschnittstelle im Kopfhörer übertragen werden, in Form von paketierten Anwendungsdaten mittels des DatenkommunikationsprotokollsThe audio representation of the intended speech utterance can be transmitted from the further wireless interface in the mobile device to the wireless interface in the headphones, in the form of packetized application data using the data communication protocol

Es ist nicht in allen Anwendungsszenarien erforderlich, dass die Audiorepräsentation ausgegeben wird. Die Audiorepräsentation könnte auch aufgezeichnet werden oder in Form von paketierten Anwendungsdaten an einen entfernten Empfänger übersendet werden.Not all application scenarios require the audio representation to be output. The audio representation could also be recorded or sent to a remote recipient in the form of packaged application data.

In den verschiedenen hierin beschriebenen Beispielen kann eine Antenne, die im Kopfhörerteil angeordnet ist und dazu verwendet wird, die Radarsignale zu empfangen (und optional auch zu senden) an unterschiedlichen Positionen im Kopfhörerteil angeordnet sein. Beispielsweise könnte im Falle eines In-Ear-Kopfhörers diese Antenne in einem Abschnitt angeordnet sein, der außerhalb des Gehörgangs bzw. insbesondere außerhalb der Ohrmuschel angeordnet ist; oder auch in einem Abschnitt angeordnet sein, der sich innerhalb des Gehörgangs erstreckt.In the various examples described herein, an antenna disposed in the headphone portion and used to receive (and optionally also transmit) the radar signals may be located at different positions in the headphone portion. For example, in the case of in-ear headphones, this antenna could be arranged in a section that is arranged outside the ear canal or in particular outside the auricle; or be arranged in a section that extends within the ear canal.

Als allgemeine Regel wäre es denkbar, die Radarmessung in Transmission oder in Reflektion durchzuführen. Das bedeutet, dass es zum Beispiel denkbar wäre, dass die Drahtlosschnittstelle sowohl eingerichtet ist, die Radarsignale zu senden, wie auch eingerichtet ist, Radarsignale zu empfangen, für eine Messung in Reflektion. Für eine Messung in Transmission kann das System eine weitere Drahtlosschnittstelle aufweisen, die getrennt vom Kopfhörerteil angeordnet ist, wobei dann diese weitere Drahtlosschnittstelle die Radarsignale aussendet. Beispielsweise wäre es denkbar, dass diese weitere Drahtlosschnittstelle in einem weiteren Kopfhörerteil (das zusammen mit dem Kopfhörerteil einen Kopfhörer bildet, also für das gegenüberliegende Ohr gedacht ist) angeordnet ist. Es wäre auch denkbar, dass diese weitere Drahtlosschnittstelle in einem Mobilgerät, beispielsweise einem Smartphone oder einer Smartwatch, angeordnet ist.As a general rule, it would be conceivable to carry out the radar measurement in transmission or reflection. This means that it would be conceivable, for example, for the wireless interface to be set up to send radar signals as well as to receive radar signals for a measurement in reflection. For a measurement in transmission, the system can have a further wireless interface, which is arranged separately from the headphone part, in which case this further wireless interface then sends out the radar signals. For example, it would be conceivable for this further wireless interface to be arranged in a further headphone part (which together with the headphone part forms a headphone, i.e. is intended for the opposite ear). It would also be conceivable for this additional wireless interface to be arranged in a mobile device, for example a smartphone or a smartwatch.

Beispielsweise könnten Radarsignale ausgesendet werden, die eine Sendeleistung von nicht größer als 10 mW aufweisen, optional von nicht größer als 50 mW aufweisen, weiter optional von nicht größer als 500 mW aufweisen. Typischerweise kann für solch in der Sendeleistung limitierte Radarsignale eine spezielle Frequenzzuteilung entbehrlich sein - insbesondere dann, wenn die elektromagnetischen Wellen das Gewebe durchlaufen und nicht in den Freiraum austreten (was durch ein entsprechendes Antennendesign erreicht werden kann). Außerdem kann es entbehrlich sein, eine sog. „Listen before talk“ Zugriffsregulierung zu verwenden (was die Latenz erhöhen würde).For example, radar signals could be emitted which have a transmission power of not greater than 10 mW, optionally not greater than 50 mW, further optionally not greater than 500 mW. Typically, special frequency allocation may be unnecessary for such radar signals with limited transmission power - especially if the electromagnetic waves pass through the tissue and do not escape into free space (which can be achieved with an appropriate antenna design). In addition, it may be unnecessary to use a so-called “listen before talk” access regulation (which would increase latency).

Ein Verfahren zum Bestimmen einer intendierten Sprachäußerung einer Person umfasst das Aussenden von Radarsignalen. Die Radarsignale werden mit einer ersten Drahtlosschnittstelle ausgesendet. Die Radarsignale werden so ausgesendet, dass diese mit einem Vokaltrakt der Person wechselwirkenden. Das Verfahren umfasst auch das Empfangen der Radarsignale mit einer zweiten Drahtlosschnittstelle. Das Verfahren umfasst ferner das Charakterisieren des Vokaltrakts der Person basierend auf den Radarsignalen, um derart eine intendierte Sprachäußerung zu bestimmen. Die erste Drahtlosschnittstelle und/oder die zweite Drahtlosschnittstelle sind in einem Kopfhörerteil, welches von der Person getragen wird, angeordnet.A method for determining a person's intended speech utterance includes sending radar signals. The radar signals are sent out using a first wireless interface. The radar signals are sent out in such a way that they interact with a person's vocal tract. The method also includes receiving the radar signals with a second Wireless interface. The method further includes characterizing the person's vocal tract based on the radar signals in order to determine an intended speech utterance. The first wireless interface and/or the second wireless interface are arranged in a headphone part which is worn by the person.

Das Charakterisieren des Vokaltrakts der Person kann also basierend auf einer Reflexionsscharakteristik der Radarsignale und/oder basierend auf einer Transmissionscharakteristik Radarsignale erfolgen. Eine entsprechende Radarmessung kann basierend auf den Radarsignalen umgesetzt werden. Beispielsweise könnte ein bestimmtes anatomisches Merkmal des Vokaltrakts der Person lokalisiert werden. Es könnte eine Bestimmung von Bewegungen des Vokaltrakts oder eines bestimmten anatomischen Merkmals des Vokaltrakts erfolgen.The characterization of the person's vocal tract can therefore be based on a reflection characteristic of the radar signals and/or based on a transmission characteristic of the radar signals. A corresponding radar measurement can be implemented based on the radar signals. For example, a particular anatomical feature of the person's vocal tract could be located. A determination of movements of the vocal tract or a specific anatomical feature of the vocal tract could be made.

Die Radarsignale können Teil eines Datenkommunikationsprotokolls sein, das eingerichtet ist, um paketierte Anwendungsdaten zu übermitteln.The radar signals may be part of a data communication protocol designed to transmit packetized application data.

Beispielsweise könnte eine entsprechende Audiorepräsentation der Sprache der Person, die sich aus einer Abfolge von entsprechenden Sprachäußerungen ergibt, über den Kopfhörer ausgegeben werden. Die paketierten Anwendungsdaten können die Audiorepräsentation umfassen.For example, a corresponding audio representation of the person's speech, which results from a sequence of corresponding speech utterances, could be output via the headphones. The packaged application data may include the audio representation.

Die oben dargelegten Merkmale und Merkmale, die nachfolgend beschrieben werden, können nicht nur in den entsprechenden explizit dargelegten Kombinationen verwendet werden, sondern auch in weiteren Kombinationen oder isoliert, ohne den Schutzumfang der vorliegenden Erfindung zu verlassen.The features set out above and features described below can be used not only in the corresponding combinations explicitly set out, but also in further combinations or in isolation without departing from the scope of the present invention.

KURZE BESCHREIBUNG DER FIGURENBRIEF DESCRIPTION OF THE FIGURES

  • 1 illustriert schematisch ein System umfassend zwei Kopfhörerteile und ein Mobilgerät gemäß verschiedenen Beispielen. 1 schematically illustrates a system comprising two headphone parts and a mobile device according to various examples.
  • 2 ist ein Flussdiagramm eines beispielhaften Verfahrens. 2 is a flowchart of an example method.
  • 3 illustriert schematisch ein Kopfhörerteil gemäß verschiedenen Beispielen. 3 schematically illustrates a headphone part according to various examples.
  • 4 illustriert schematisch ein Kopfhörerteil gemäß verschiedenen Beispielen. 4 schematically illustrates a headphone part according to various examples.
  • 5 illustriert schematisch ein Kopfhörerteil gemäß verschiedenen Beispielen. 5 schematically illustrates a headphone part according to various examples.
  • 6 illustriert schematisch ein Kopfhörerteil gemäß verschiedenen Beispielen. 6 schematically illustrates a headphone part according to various examples.
  • 7 illustriert schematisch die Übertragung von Daten mittels eines Datenkommunikationsprotokolls gemäß verschiedenen Beispielen. 7 schematically illustrates the transmission of data using a data communication protocol according to various examples.
  • 8 illustriert schematisch ein Mobilgerät gemäß verschiedenen Beispielen. 8th schematically illustrates a mobile device according to various examples.
  • 9 illustriert schematisch Details zum Kopfhörerelement. 9 schematically illustrates details of the headphone element.

DETAILLIERTE BESCHREIBUNGDETAILED DESCRIPTION

Die oben beschriebenen Eigenschaften, Merkmale und Vorteile dieser Erfindung sowie die Art und Weise, wie diese erreicht werden, werden klarer und deutlicher verständlich im Zusammenhang mit der folgenden Beschreibung der Ausführungsbeispiele, die im Zusammenhang mit den Zeichnungen näher erläutert werden.The characteristics, features and advantages of this invention described above, as well as the manner in which these are achieved, will be more clearly and clearly understood in connection with the following description of the exemplary embodiments, which will be explained in more detail in connection with the drawings.

Nachfolgend wird die vorliegende Erfindung anhand bevorzugter Ausführungsformen unter Bezugnahme auf die Zeichnungen näher erläutert. In den Figuren bezeichnen gleiche Bezugszeichen gleiche oder ähnliche Elemente. Die Figuren sind schematische Repräsentationen verschiedener Ausführungsformen der Erfindung. In den Figuren dargestellte Elemente sind nicht notwendigerweise maßstabsgetreu dargestellt. Vielmehr sind die verschiedenen in den Figuren dargestellten Elemente derart wiedergegeben, dass ihre Funktion und genereller Zweck dem Fachmann verständlich wird. In den Figuren dargestellte Verbindungen und Kopplungen zwischen funktionellen Einheiten und Elementen können auch als indirekte Verbindung oder Kopplung implementiert werden. Eine Verbindung oder Kopplung kann drahtgebunden oder drahtlos implementiert sein. Funktionale Einheiten können als Hardware, Software oder eine Kombination aus Hardware und Software implementiert werden.The present invention is explained in more detail below using preferred embodiments with reference to the drawings. In the figures, the same reference numbers designate the same or similar elements. The figures are schematic representations of various embodiments of the invention. Elements shown in the figures are not necessarily drawn to scale. Rather, the various elements shown in the figures are reproduced in such a way that their function and general purpose is understandable to those skilled in the art. Connections and couplings between functional units and elements shown in the figures can also be implemented as an indirect connection or coupling. A connection or coupling can be implemented in a wired or wireless manner. Functional units can be implemented as hardware, software, or a combination of hardware and software.

Nachfolgend werden Techniken beschrieben, die eine Integration von Sensorik für eine Radarmessung in ein Kopfhörerteil ermöglichen.Techniques are described below that enable the integration of sensors for radar measurement into a headphone part.

1 zeigt eine Person 71 mit einem Sprechapparat 70, beispielsweise bestehend aus einem Vokaltrakt mit Kehlkopf, und Muskeln im Mundbereich der Person 71. Die Person 71 trägt zwei In-Ear-Kopfhörerteile 401, 402. Statt In-Ear-Kopfhörerteilen könnten auch On-Ear oder Over-Ear-Kopfhörerteile verwendet werden. 1 shows a person 71 with a speech apparatus 70, for example consisting of a vocal tract with a larynx, and muscles in the mouth area of the person 71. The person 71 wears two in-ear headphone parts 401, 402. Instead of in-ear headphone parts, on-ear could also be used or over-ear headphone parts can be used.

Die beiden Kopfhörerteile 401 und/oder 402 können elektromagnetische Signale 471, 472, 479 aussenden. Dazu verfügen die Kopfhörerteile 401, 402 jeweils über entsprechende Drahtlosschnittstelle und ein oder mehrere Antennen (in 1 nicht gezeigt).The two headphone parts 401 and/or 402 can emit electromagnetic signals 471, 472, 479. For this purpose, the headphone parts 401, 402 each have a corresponding wireless interface and one or more antennas (in 1 Not shown).

Die elektromagnetischen Signale 471, 472 dienen dabei eine Radarmessung, die ausgewertet werden kann, um den Vokaltrakt zu charakterisieren. Entsprechend könnten die elektromagnetischen Signale 471, 472 auch als Radarsignale bezeichnet werden. Die Radarsignale 471, 472 werden nach Wechselwirkung am Vokaltrakt empfangen. Dies kann wiederum mittels ein oder mehreren der Kopfhörerteilen 401, 402 erfolgen. Alternativ oder zusätzlich wäre es auch denkbar, die elektromagnetischen Signale 471, 472 mittels eines Mobilgeräts 450 zu empfangen. In manchen Beispielen wäre es auch denkbar, dass ein oder mehrere von den Kopfhörerteilen 401, 402 die elektromagnetischen Signale 471, 472 nach Wechselwirkung am Vokaltrakt 70 empfangen; wobei die Radarsignale 471, 472 vom Mobilgerät 450 ausgesendet werden.The electromagnetic signals 471, 472 serve as a radar measurement that can be evaluated to characterize the vocal tract. Accordingly, the electromagnetic signals could nale 471, 472 are also referred to as radar signals. The radar signals 471, 472 are received after interaction on the vocal tract. This can in turn be done using one or more of the headphone parts 401, 402. Alternatively or additionally, it would also be conceivable to receive the electromagnetic signals 471, 472 using a mobile device 450. In some examples, it would also be conceivable that one or more of the headphone parts 401, 402 receive the electromagnetic signals 471, 472 after interaction on the vocal tract 70; wherein the radar signals 471, 472 are emitted by the mobile device 450.

Im Beispiel der 1 ist außerdem gezeigt, dass weitere elektromagnetische Signale 479 für die Übertragung von paketierten Anwendungsdaten zwischen dem Kopfhörerteil 401 und dem Mobilgerät 450 verwendet werden, beispielsweise mittels des Bluetooth-Datenkommunikationsprotokolls. Auch wenn das nicht in 1 gezeigt ist, könnte entsprechend auch eine Übertragung von paketierten Anwendungsdaten (z.B. Audiodateien oder Steuerdaten, die etwa die Lautstärke der Audioausgabe der Kopfhörerteile 401, 402 betreffen) zwischen den Kopfhörerteil in 401, 402 erfolgen und/oder zwischen dem Mobilgerät 450 in dem Kopfhörerteil 402.In the example of 1 It is also shown that further electromagnetic signals 479 are used for the transmission of packetized application data between the headphone part 401 and the mobile device 450, for example using the Bluetooth data communication protocol. Even if that's not in 1 is shown, a transmission of packetized application data (e.g. audio files or control data relating, for example, to the volume of the audio output of the headphone parts 401, 402) could also take place between the headphone part in 401, 402 and/or between the mobile device 450 in the headphone part 402.

Nachfolgend wird die Funktionsweise des Systems 400, welches die beiden Kopfhörerteil 401, 402, sowie das Mobilgerät 450 umfasst, erläutert. Dabei sollte verstanden werden, dass das System 400 in manchen Beispielen auch nur ein einzelnes Kopfhörerteil aufweisen kann. Auch das Mobilgerät 450 ist jeweils optional.The functionality of the system 400, which includes the two headphone parts 401, 402 and the mobile device 450, is explained below. It should be understood that in some examples the system 400 may include only a single headphone section. The mobile device 450 is also optional.

2 ist ein Flussdiagramm eines beispielhaften Verfahrens. 2 illustriert Aspekte im Zusammenhang mit einem Verfahren zur Bestimmung einer intendierten Sprachäußerung einer Person. Das Verfahren der 2 kann zum Beispiel von dem System 400 aus 1 ausgeführt werden. 2 is a flowchart of an example method. 2 illustrates aspects related to a method for determining a person's intended speech utterance. The procedure of 2 can for example from the system 400 1 be executed.

Optionale Boxen sind gestrichelt dargestellt.Optional boxes are shown in dashed lines.

Zunächst werden in Box 3005 Radarsignale drahtlos gesendet, z.B. mit einer Sendeleistung von nicht größer als 10 mW, optional von nicht größer als 50 mW, weiter optional von nicht größer als 500 mW . Dazu wird beispielsweise eine Drahtlosschnittstelle in einem Kopfhörerteil verwendet (vgl. 1; Kopfhörerteil 401, 402). Es könnte auch eine Drahtlosschnittstelle in einem Mobilgerät (vgl. 1: Mobilgerät 450) verwendet werden.First, radar signals are sent wirelessly in Box 3005, for example with a transmission power of not greater than 10 mW, optionally not greater than 50 mW, further optionally not greater than 500 mW. For this purpose, for example, a wireless interface is used in a headphone section (cf. 1 ; Headphone part 401, 402). There could also be a wireless interface in a mobile device (cf. 1 : Mobile device 450).

Grundsätzlich wäre es denkbar, dass die Radarsignale Teil eines Datenkommunikationsprotokolls sind. Beispielsweise könnten die Radarsignale durch Pilottöne des Datenkommunikationsprotokolls implementiert werden. Die Radarsignale könnten durch das Erzeugen von paketierten Dummy-Daten, die dann in eine obere Schicht eines Protokollstacks des Datenkommunikationsprotokolls eingespeist werden, erhalten werden. Solche Techniken ermöglichen das Wiederverwenden des Datenkommunikationsprotokolls zum Zwecke der Radarmessung.In principle, it would be conceivable that the radar signals are part of a data communication protocol. For example, the radar signals could be implemented by pilot tones of the data communication protocol. The radar signals could be obtained by generating packetized dummy data which is then fed into an upper layer of a protocol stack of the data communications protocol. Such techniques allow the data communication protocol to be reused for radar measurement purposes.

Es könnten aber auch Radarsignale verwendet werden, die nicht Teil des Datenkommunikationsprotokolls sind, beispielsweise also komplett getrennt erzeugt und gesendet werden. Es könnte aber auch eine Synchronisation mit Übertragungen des Datenkommunikationsprotokolls erfolgen. Beispielsweise könnten die Radarsignale zeitsynchronisiert mit einer Zeitbasis des Datenkommunikationsprotokolls gesendet werden. Derart wird Interferenz reduziert und es kann auf dasselbe Frequenzband zugegriffen werden.However, radar signals could also be used that are not part of the data communication protocol, for example, that are generated and sent completely separately. However, synchronization with transmissions of the data communication protocol could also take place. For example, the radar signals could be sent time-synchronized with a time base of the data communication protocol. In this way, interference is reduced and the same frequency band can be accessed.

Diese Radarsignale wechselwirkenden dann mit dem Vokaltrakt der Person können anschließend, in Box 3010, empfangen werden.These radar signals then interact with the person's vocal tract and can then be received in box 3010.

Grundsätzlich könnte in Transmission oder Reflektion gemessen werden. Das bedeutet, dass eine unterschiedliche Drahtlosschnittstellen zum Senden und zum Empfangen verwendet werden können; es könnte aber auch ein und dieselbe Drahtlosschnittstelle zum Senden und zum Empfangen verwendet werden. Es könnten insbesondere zwei Drahtlosschnittstellen verwendet werden, die in unterschiedlichen Kopfhörerteilen angeordnet sind.In principle, measurements could be made in transmission or reflection. This means that different wireless interfaces can be used for sending and receiving; However, one and the same wireless interface could also be used for sending and receiving. In particular, two wireless interfaces could be used, which are arranged in different headphone parts.

Optional wäre es in Box 3015 möglich, weitere elektromagnetische Signale drahtlos zu übertragen. Beispielsweise könnten elektromagnetische Signale eines Datenkommunikationsprotokolls gesendet werden, welche paketierte Anwendungsdaten beinhalten, die eine Repräsentation der empfangenen Radarsignale aus Box 3010 beschreiben. Dies kann zum Zwecke einer Auswertung der Radarsignale in einer separaten Datenverarbeitungseinheit, die beispielsweise in einem Mobilgerät getrennt vom Kopfhörerteil angeordnet ist, erfolgen.Optionally, it would be possible to transmit additional electromagnetic signals wirelessly in Box 3015. For example, electromagnetic signals of a data communication protocol could be sent that contain packetized application data that describes a representation of the received radar signals from box 3010. This can be done for the purpose of evaluating the radar signals in a separate data processing unit, which is arranged, for example, in a mobile device separately from the headphone part.

In Box 3020 erfolgt dann das Charakterisieren des Vokaltrakts basierend auf den Radarsignalen aus Box 3010, um derart eine intendierte Sprachäußerung der Person zu bestimmen. Dies kann in einer Datenverarbeitungseinheit erfolgen, z.B. im Kopfhörerteil, das die Radarsignale empfangen hat oder auch in einem separaten Mobilgerät. Es wäre auch eine Cloud-Auswertung auf einem Server denkbar.In Box 3020, the vocal tract is then characterized based on the radar signals from Box 3010 in order to determine the person's intended speech expression. This can be done in a data processing unit, e.g. in the headphone part that received the radar signals or in a separate mobile device. Cloud evaluation on a server would also be conceivable.

In Box 3025 kann optional eine Audiorepräsentation der Sprachäußerung bzw. mehrerer Sprachäußerungen aus Box 3020 drahtlos übertragen werden, beispielsweise zu einer Drahtlosschnittstelle in einem Kopfhörerteil. Entsprechend wäre es möglich, in Box 3030 dieser Audiorepräsentation als Audio über das Kopfhörerteil auszugeben, mittels eines Audiotreibers.In Box 3025, an audio representation of the speech utterance or several speech utterances from Box 3020 can optionally be transmitted wirelessly, for example to a wireless interface in a headphone part. Accordingly, it would be possible to use this audio representation in Box 3030 Output audio via the headphone section using an audio driver.

Es sind grundsätzlich verschiedene Konfigurationen für ein oder mehrere Drahtlosschnittstellen und ein oder mehrere Antennen, die zum Senden und/oder Empfangen von elektromagnetischen Signalen in Boxen 3005, 3010, 3015 und 3025 verwendet werden. Das ist in 3, 4, 6 und 7 gezeigt.There are basically different configurations for one or more wireless interfaces and one or more antennas used to transmit and/or receive electromagnetic signals in Boxes 3005, 3010, 3015 and 3025. Is in 3 , 4 , 6 and 7 shown.

In 3 sind die Kopfhörerteile 401, 402 schematisch dargestellt. Die Kopfhörerteile 401, 402 umfassen eine Datenverarbeitungseinheit 181 und einen Speicher 185. Die Datenverarbeitungseinheit 181 - z.B. ein Prozessor - kann Programmcode aus dem Speicher 185 laden und ausführen. Dann kann die Datenverarbeitungseinheit 181 Techniken ausführen, wie sie hierin beschrieben sind, beispielsweise: Senden und/oder Empfangen von Radarsignalen einer Radarmessung zur Charakterisierung des Vokaltrakts; Ansteuern einer Drahtlosschnittstelle zum Senden und/oder Empfangen von Signalen; Implementieren zumindest eines Teils eines Protokollstacks eines Datenkommunikationsprotokolls zum Übertragen von Anwendungsdaten; Ansteuern eines Audiotreiber 191 zum Ausgeben von Audio; Kommunizieren mit einem weiteren Kopfhörerteil oder einem Mobilgerät mittels des Datenkommunikationsprotokolls und über eine Drahtlosschnittstelle und eine entsprechende Antenne.In 3 the headphone parts 401, 402 are shown schematically. The headphone parts 401, 402 include a data processing unit 181 and a memory 185. The data processing unit 181 - for example a processor - can load and execute program code from the memory 185. Then, the data processing unit 181 may perform techniques as described herein, for example: sending and/or receiving radar signals of a radar measurement to characterize the vocal tract; Controlling a wireless interface to send and/or receive signals; implementing at least a portion of a protocol stack of a data communications protocol for transmitting application data; driving an audio driver 191 to output audio; Communicate with another headphone part or a mobile device using the data communication protocol and via a wireless interface and a corresponding antenna.

Eine Drahtlosschnittstelle wie hierin beschrieben kann zum Beispiel einen Analog-Digital-Wandler und/oder einen Digital-Analog-Wandler umfassen. Es könnten Signalverstärker verwendet werden. Bandpassfilter können eingesetzt werden. Es könnte eine Demodulation oder Modulation erfolgen. Die Drahtlosschnittstelle kann ein oder mehrere Schichten eines Protokollstacks des Datenkommunikationsprotokolls implementieren, etwa Schicht 1, 2 und 3.A wireless interface as described herein may include, for example, an analog-to-digital converter and/or a digital-to-analog converter. Signal amplifiers could be used. Bandpass filters can be used. There could be demodulation or modulation. The wireless interface may implement one or more layers of a data communications protocol protocol stack, such as layers 1, 2 and 3.

In 3 weist das Kopfhörerteil 401, 402 eine einzelne Drahtlosschnittstelle 151 auf, die mit einer einzelnen Antenne 161 gekoppelt ist. Die Drahtlosschnittstelle 151 kann über die Antenne 161 sowohl Signale eines Datenkommunikationsprotokolls und Radarsignale senden und/oder empfangen.In 3 the headphone part 401, 402 has a single wireless interface 151 which is coupled to a single antenna 161. The wireless interface 151 can send and/or receive both signals of a data communication protocol and radar signals via the antenna 161.

Es wäre auch denkbar, wie in 4 gezeigt, dass die Drahtlosschnittstelle 151 auf unterschiedliche Antennen 162, 163 zugreift, je nachdem ob eine Übertragung des Datenkommunikationsprotokolls implementiert wird oder ob Radarsignale gesendet und/oder empfangen werden. Dies kann insbesondere dann hilfreich sein, wenn die Signale des Datenkommunikationsprotokolls und die Radarsignale unterschiedlichen Frequenzbereichen angeordnet sind. Dies kann auch hilfreich sein, wenn die unterschiedlichen Antennen 162, 163 unterschiedliche Richtcharakteristiken aufweisen, so dass je nach Anwendung (Datenübertragung oder Radarmessung) ein im Ortsraum strukturierter Zugriff auf das Spektrum erfolgt.It would also be conceivable, as in 4 shown that the wireless interface 151 accesses different antennas 162, 163, depending on whether a transmission of the data communication protocol is implemented or whether radar signals are sent and / or received. This can be particularly helpful if the signals of the data communication protocol and the radar signals are arranged in different frequency ranges. This can also be helpful if the different antennas 162, 163 have different directional characteristics, so that, depending on the application (data transmission or radar measurement), access to the spectrum is structured in the spatial space.

In 5 ist eine weitere Abwandlung gezeigt, wo für jede der Antennen 162, 163 eine entsprechende Drahtlosschnittstelle 152, 153 vorhanden ist. In 6 ist noch eine weitere Abwandlung gezeigt, wo unterschiedliche Drahtlosschnittstelle 152, 153 jeweils auf dieselbe Antenne 161 zugreifen.In 5 A further modification is shown, where a corresponding wireless interface 152, 153 is present for each of the antennas 162, 163. In 6 Another modification is shown, where different wireless interfaces 152, 153 each access the same antenna 161.

7 illustriert, wie Daten zwischen den Kopfhörerteilen 401, 402 und die Mobilgerät 450 übertragen werden können. Das entspricht Box und Box 3025 aus 2. Insbesondere können Radardaten 511 jeweils von jedem der Kopfhörerteil 401, 402 mittels eines Datenkommunikationsprotokolls, beispielsweise Bluetooth, an das Mobilgerät 450 gesendet werden. Diese Radardaten 511 entsprechen einer Repräsentation der Radarsignale. Dann kann die Charakterisierung des Vokaltrakts der Person 71 mittels einer Datenverarbeitungseinheit des Mobilgeräts 450 erfolgen, basierend auf den Radardaten. Das Mobilgerät 450 kann dann mittels des Datenkommunikationsprotokolls eine Audiorepräsentation einer bestimmten intendierten Sprachäu-ßerung (aus der Charakterisierung des Vokaltrakts abgeleitet) in Form von Audiodaten 512 an ein oder mehrere der Kopfhörerteile 401, 402 senden, so dass entsprechendes Audio ausgegeben werden kann. 7 illustrates how data can be transferred between the headphone parts 401, 402 and the mobile device 450. This corresponds to Box and Box 3025 2 . In particular, radar data 511 can be sent from each of the headphone parts 401, 402 to the mobile device 450 using a data communication protocol, for example Bluetooth. This radar data 511 corresponds to a representation of the radar signals. The vocal tract of the person 71 can then be characterized using a data processing unit of the mobile device 450, based on the radar data. The mobile device 450 can then use the data communication protocol to send an audio representation of a specific intended speech utterance (derived from the characterization of the vocal tract) in the form of audio data 512 to one or more of the headphone parts 401, 402, so that corresponding audio can be output.

8 illustriert schematisch das Mobilgerät 450. Das Mobilgerät 182 umfasst eine Datenverarbeitungseinheit 182 - beispielsweise einen Prozessor - und einen Speicher 186, sowie eine Drahtlosschnittstelle 154 und eine Antenne 164. 8th schematically illustrates the mobile device 450. The mobile device 182 includes a data processing unit 182 - for example a processor - and a memory 186, as well as a wireless interface 154 and an antenna 164.

Der Prozessor 182 kann Programmcode aus dem Speicher 186 laden und ausführen. Wenn der Prozessor 182 dem Programmcode ausführt, so kann dies bewirken, dass der Prozessor Techniken wie hierin offenbart ausführt, das heißt zum Beispiel: Charakterisieren des Vokaltrakts basierend auf Radarsignalen; Bestimmen einer intendierten Sprachäußerung; Empfangen von Radardaten; Senden von Audiodaten; Implementieren zumindest eines Teils eines Protokollstacks eines Datenkommunikationsprotokolls; Ansteuern der Drahtlosschnittstelle 154 zum Senden und/oder Empfangen von Daten; usw.The processor 182 can load and execute program code from the memory 186. When the processor 182 executes the program code, this may cause the processor to perform techniques as disclosed herein, for example: characterizing the vocal tract based on radar signals; determining an intended speech expression; receiving radar data; sending audio data; Implementing at least a portion of a protocol stack of a data communications protocol; driving the wireless interface 154 to send and/or receive data; etc.

9 zeigt eine Implementierung des Kopfhörerteils 401 als In-Ear-Kopfhörerteil. Es sind drei Abschnitte 411, 412, 413 gezeigt. Der Abschnitt 411 erstreckt sich im Gehörgang; der Abschnitt 411 erstreckt sich weg vom Abschnitt 412 innerhalb der Ohrmuschel; und der Abschnitt 413 erstreckt sich weg vom Abschnitt 412 und vom Abschnitt 411, außerhalb der Ohrmuschel. Beispielsweise wäre es denkbar, dass die für das Senden und/oder Empfangen von Radarsignalen der Radarmessung verwendete Antenne (vgl. 2: Box 3005, Box 3010) im Abschnitt 411 oder im Abschnitt 412 oder im Abschnitt 413 angeordnet ist. 9 shows an implementation of the headphone part 401 as an in-ear headphone part. Three sections 411, 412, 413 are shown. Section 411 extends into the ear canal; Section 411 extends away from Section 412 within the Auricle; and section 413 extends away from section 412 and section 411, outside the auricle. For example, it would be conceivable that the antenna used for sending and/or receiving radar signals from the radar measurement (cf. 2 : Box 3005, Box 3010) is located in Section 411 or in Section 412 or in Section 413.

Wenn die Antenne im Abschnitt 411 - d.h. im Gehörgang - angeordnet ist, kann erreicht werden, dass umliegende Schädelknochen als verlustarmer Wellenleiter für die elektromagnetischen Wellen/Signale z.B. in den vorderen Sprechapparat 70 wirken. Selbstverständlich können die Merkmale der vorab beschriebenen Ausführungsformen und Aspekte der Erfindung miteinander kombiniert werden. Insbesondere können die Merkmale nicht nur in den beschriebenen Kombinationen, sondern auch in anderen Kombinationen oder für sich genommen verwendet werden, ohne das Gebiet der Erfindung zu verlassen.If the antenna is arranged in section 411 - i.e. in the ear canal - it can be achieved that the surrounding skull bones act as a low-loss waveguide for the electromagnetic waves/signals, for example in the front speech apparatus 70. Of course, the features of the previously described embodiments and aspects of the invention can be combined with one another. In particular, the features can be used not only in the combinations described, but also in other combinations or alone, without departing from the field of the invention.

Beispielsweise wurden verschiedene Aspekte im Zusammenhang mit dem Senden von Radarsignalen mittels einer Drahtlosschnittstelle in einem Kopfhörerteil offenbart; die Radarsignale könnten auch von einem z.B. hüfthoch oder in einer Jackentasche getragenen Mobilgerät gesendet werden.For example, various aspects related to sending radar signals using a wireless interface in a headphone portion have been disclosed; The radar signals could also be sent from a mobile device carried, for example, waist high or in a jacket pocket.

Ferner wurden verschiedene Aspekte im Zusammenhang mit dem Empfangen von Radarsignalen mittels einer Drahtlosschnittstelle in einem Kopfhörerteil offenbart; die Radarsignale könnten auch von einem z.B. hüfthoch oder in einer Jackentasche getragenen Mobilgerät empfangen werden.Furthermore, various aspects related to receiving radar signals using a wireless interface in a headphone part have been disclosed; The radar signals could also be received from a mobile device carried, for example, waist high or in a jacket pocket.

Ferner wurden voranstehend Varianten beschrieben, bei denen eine Auswertung von Radarsignalen zum Charakterisieren des Sprechapparats in einem Mobilgerät erfolgt. Es wäre aber auch denkbar, dass die Radarsignale von einem Cloud-Server ausgewertet werden. Hier kann eine Kommunikation über das Internet zwischen Kopfhörerteil oder lokalem Mobilgerät erfolgen. Beispielsweise könnte das Kopfhörerteil Anwendungsdaten an ein Mobilgerät, z.B. eine Smart-Watch oder ein Smartphone, übertragen und das Mobilgerät kann dann die Anwendungsdaten über das Internet an den Cloud-Server übertragen. Die Anwendungsdaten können eine Repräsentation der Radarsignale umfassen.Furthermore, variants were described above in which radar signals are evaluated to characterize the speaking apparatus in a mobile device. However, it would also be conceivable for the radar signals to be evaluated by a cloud server. Here communication can take place via the Internet between the headphone part or the local mobile device. For example, the headset part could transmit application data to a mobile device, such as a smart watch or a smartphone, and the mobile device can then transmit the application data to the cloud server over the Internet. The application data may include a representation of the radar signals.

Claims (18)

System (400), das umfasst: - ein Kopfhörerteil (401, 402) zum Tragen durch eine Person (71), - mindestens eine Drahtlosschnittstelle (151, 152, 153), die im Kopfhörerteil (401, 402) angeordnet ist und die eingerichtet ist, um elektromagnetische Signale (471, 472) nach einer Wechselwirkung der elektromagnetischen Signale (471, 472) mit dem Vokaltrakt der Person (70) zu empfangen, und - eine Datenverarbeitungseinheit (181, 182), die eingerichtet ist, um den Vokaltrakt basierend auf den elektromagnetischen Signalen (471, 472) zu charakterisieren.System (400) comprising: - a headphone part (401, 402) to be worn by one person (71), - at least one wireless interface (151, 152, 153), which is arranged in the headphone part (401, 402) and which is set up to receive electromagnetic signals (471, 472) after an interaction of the electromagnetic signals (471, 472) with the vocal tract of the Person (70) to receive, and - a data processing unit (181, 182) which is set up to characterize the vocal tract based on the electromagnetic signals (471, 472). System (400) nach Anspruch 1, wobei die elektromagnetischen Signale (471, 472) Pilottöne eines Datenkommunikationsprotokolls umfassen.System (400) after Claim 1 , wherein the electromagnetic signals (471, 472) include pilot tones of a data communication protocol. System (400) nach Anspruch 1 oder 2, wobei die mindestens eine Drahtlosschnittstelle (151, 152, 153) oder mindestens eine weitere Drahtlosschnittstelle (151, 152, 153) eingerichtet ist, um paketierte Dummy-Daten zu erzeugen und um die paketierten Dummy-Daten in eine obere Schicht eines Protokollstacks eines Datenkommunikationsprotokolls einzuspeisen, wobei die elektromagnetischen Signale (471, 472) die paketierten Dummy-Daten kodieren.System (400) after Claim 1 or 2 , wherein the at least one wireless interface (151, 152, 153) or at least one further wireless interface (151, 152, 153) is set up to generate packetized dummy data and to convert the packetized dummy data into an upper layer of a protocol stack of a data communication protocol to be fed in, the electromagnetic signals (471, 472) encoding the packetized dummy data. System (400) nach einem der voranstehenden Ansprüche, wobei die elektromagnetischen Signale Radarsignale umfassen, die zeitsynchronisiert mit einer Zeitbasis eines Datenkommunikationsprotokolls gesendet werden.System (400) according to one of the preceding claims, wherein the electromagnetic signals comprise radar signals which are transmitted in time synchronization with a time base of a data communication protocol. System (400) nach einem der Ansprüche 2 bis 4, das weiterhin umfasst: - eine Antenne (161), die im Kopfhörerteil (401, 402) angeordnet ist, wobei die mindestens eine Drahtlosschnittstelle (151, 152, 153) eingerichtet ist, um die eine Antenne (161) zum Empfangen der elektromagnetischen Signale sowie zum Übertragen von Signalen, die paketierte Anwendungsdaten mittels des Datenkommunikationsprotokolls kodieren, anzusteuern.System (400) according to one of the Claims 2 until 4 , which further comprises: - an antenna (161) which is arranged in the headphone part (401, 402), the at least one wireless interface (151, 152, 153) being set up around the one antenna (161) for receiving the electromagnetic signals and for transmitting signals that encode packetized application data using the data communication protocol. System (400) nach Anspruch 1, das weiterhin umfasst: - eine erste Antenne (162) und/oder eine zweite Antenne (163), die beide im Kopfhörerteil (401, 402) angeordnet sind, wobei die mindestens eine Drahtlosschnittstelle eingerichtet ist, um die erste Antenne (162) zum Empfangen der elektromagnetischen Signale anzusteuern, wobei die mindestens eine Drahtlosschnittstelle eingerichtet ist, um die zweite Antenne (163) zum Übertragen von Signalen, die packetierte Anwendungsdaten mittels eines Datenkommunikationsprotokolls kodieren, anzusteuern.System (400) after Claim 1 , which further comprises: - a first antenna (162) and / or a second antenna (163), both of which are arranged in the headphone part (401, 402), wherein the at least one wireless interface is set up to connect the first antenna (162). Receiving the electromagnetic signals to control, wherein the at least one wireless interface is set up to control the second antenna (163) for transmitting signals that encode packetized application data using a data communication protocol. System (400) nach einem der voranstehenden Ansprüche, das weiterhin umfasst: - ein Mobilgerät (450), das getrennt vom Kopfhörerteil (401, 402) angeordnet ist und welches die Datenverarbeitungseinheit (182) und eine weitere Drahtlosschnittstelle (154) umfasst, wobei die mindestens eine Drahtlosschnittstelle (151, 152, 153) eingerichtet ist, um eine Repräsentation der elektromagnetischen Signale in Anwendungsdaten paketiert an die weitere Drahtlosschnittstelle (154) mittels eines Datenkommunikationsprotokolls zu übertragen.System (400) according to one of the preceding claims, further comprising: - a mobile device (450) which is arranged separately from the headphone part (401, 402) and which has the data processing unit (182) and another Wireless interface (154), wherein the at least one wireless interface (151, 152, 153) is set up to transmit a representation of the electromagnetic signals packaged in application data to the further wireless interface (154) by means of a data communication protocol. System (400) nach einem der Ansprüche 1 bis 6, wobei die Datenverarbeitungseinheit (182) in einem Cloud-Server angeordnet ist.System (400) according to one of the Claims 1 until 6 , wherein the data processing unit (182) is arranged in a cloud server. System (400) nach einem der voranstehenden Ansprüche, das weiterhin umfasst: - eine Antenne, die im Kopfhörerteil angeordnet ist, wobei die mindestens eine Drahtlosschnittstelle eingerichtet ist, um die Antenne zum Empfangen der elektromagnetischen Signale anzusteuern, wobei das Kopfhörerteil einen ersten Abschnitt aufweist, der ausgebildet ist, um sich im Gehörgang eines Ohrs der Person zu erstrecken (411), wobei das Kopfhörerteil einen zweiten Abschnitt aufweist, der ausgebildet ist, um sich weg vom ersten Teil außerhalb des Gehörgangs der Person zu erstrecken, wobei die Antenne im zweiten Abschnitt (412, 413) angeordnet ist.System (400) according to any one of the preceding claims, further comprising: - an antenna which is arranged in the headphone part, the at least one wireless interface being set up to control the antenna for receiving the electromagnetic signals, wherein the headphone part has a first section which is designed to extend into the ear canal of an ear of the person (411), wherein the headphone portion has a second portion configured to extend away from the first portion outside of the person's ear canal, wherein the antenna is arranged in the second section (412, 413). System (400) nach Anspruch 9, wobei der zweite Abschnitt (413) ausgebildet ist, um sich außerhalb einer Ohrmuschel des Ohrs zu erstrecken.System (400) after Claim 9 , wherein the second portion (413) is designed to extend outside an auricle of the ear. System (400) nach einem der Ansprüche 1 bis 8, - eine Antenne, die im Kopfhörerteil angeordnet ist, wobei die mindestens eine Drahtlosschnittstelle eingerichtet ist, um die Antenne zum Empfangen der elektromagnetischen Signale anzusteuern, wobei das Kopfhörerteil einen Abschnitt aufweist, der ausgebildet ist, um sich im Gehörgang eines Ohrs der Person zu erstrecken, wobei die Antenne im Abschnitt (411) angeordnet ist.System (400) according to one of the Claims 1 until 8th , - an antenna arranged in the headphone part, wherein the at least one wireless interface is configured to control the antenna for receiving the electromagnetic signals, the headphone part having a section which is designed to extend in the ear canal of an ear of the person , wherein the antenna is arranged in section (411). System (400) nach einem der voranstehenden Ansprüche, wobei die mindestens eine Drahtlosschnittstelle auch eingerichtet ist, um die elektromagnetischen Signale (471, 472) auszusenden.System (400) according to one of the preceding claims, wherein the at least one wireless interface is also set up to emit the electromagnetic signals (471, 472). System (400) nach einem der Ansprüche 1 bis 11, das weiterhin umfasst: - eine weitere Drahtlosschnittstelle, die getrennt vom Kopfhörerteil (401, 402) angeordnet ist und die eingerichtet ist, um die elektromagnetischen Signale (471, 472) auszusenden.System (400) according to one of the Claims 1 until 11 , which further comprises: - a further wireless interface which is arranged separately from the headphone part (401, 402) and which is set up to emit the electromagnetic signals (471, 472). System (400) nach Anspruch 13, das weiterhin umfasst: - ein weiteres Kopfhörerteil (401, 402), welches die mindestens eine weitere Drahtlosschnittstelle umfasst.System (400) after Claim 13 , which further comprises: - another headphone part (401, 402), which includes the at least one further wireless interface. System (400) nach Anspruch 13, das weiterhin umfasst: - ein Mobilgerät (450), das getrennt vom Kopfhörerteil (471, 472) angeordnet ist und das die mindestens eine weitere Drahtlosschnittstelle umfasst.System (400) after Claim 13 , which further comprises: - a mobile device (450) which is arranged separately from the headphone part (471, 472) and which comprises the at least one further wireless interface. System (400) nach einem der voranstehenden Ansprüche, wobei die elektromagnetischen Signale (471, 472) eine Sendeleistung von nicht größer 10 mW aufweisen.System (400) according to one of the preceding claims, wherein the electromagnetic signals (471, 472) have a transmission power of not greater than 10 mW. System (400) nach einem der voranstehenden Ansprüche, wobei die Datenverarbeitungseinheit (181, 182) eingerichtet ist, um den Vokaltrakt zum Bestimmen einer intendierten Sprachäußerung der Person (71) zu charakterisieren, wobei das System (400) weiterhin umfasst: - einen Audiotreiber, der im Kopfhörerteil (401, 402) angeordnet ist und der eingerichtet ist, um eine Audiorepräsentation der intendierten Sprachäußerung auszugeben.System (400) according to one of the preceding claims, wherein the data processing unit (181, 182) is set up to characterize the vocal tract to determine an intended speech utterance of the person (71), wherein the system (400) further comprises: - an audio driver which is arranged in the headphone part (401, 402) and which is set up to output an audio representation of the intended speech utterance. Verfahren zum Bestimmen einer intendierten Sprachäußerung einer Person, wobei das Verfahren umfasst: - Senden (3005) von Radarsignalen mit einer ersten Drahtlosschnittstelle, sodass diese mit einem Vokaltrakt der Person wechselwirken, - Empfangen (3010) der Radarsignale mit der ersten Drahtlosschnittstelle und/oder einer zweiten Drahtlosschnittstelle, und - Charakterisieren (3020) des Vokaltrakts der Person basierend auf den Radarsignalen, wobei zumindest eine der ersten Drahtlosschnittstelle oder der zweiten Drahtlosschnittstelle in einem Kopfhörerteil (401, 402), das von der Person getragen wird, angeordnet ist.Method for determining an intended speech utterance of a person, the method comprising: - Sending (3005) radar signals with a first wireless interface so that they interact with a vocal tract of the person, - Receiving (3010) the radar signals with the first wireless interface and/or a second wireless interface, and - Characterizing (3020) the person's vocal tract based on the radar signals, wherein at least one of the first wireless interface or the second wireless interface is arranged in a headphone part (401, 402) worn by the person.
DE102022115032.1A 2022-06-15 2022-06-15 HEADPHONE PART WITH SENSORS FOR CHARACTERIZING A PERSON'S VOCAL TRACT Pending DE102022115032A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102022115032.1A DE102022115032A1 (en) 2022-06-15 2022-06-15 HEADPHONE PART WITH SENSORS FOR CHARACTERIZING A PERSON'S VOCAL TRACT

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102022115032.1A DE102022115032A1 (en) 2022-06-15 2022-06-15 HEADPHONE PART WITH SENSORS FOR CHARACTERIZING A PERSON'S VOCAL TRACT

Publications (1)

Publication Number Publication Date
DE102022115032A1 true DE102022115032A1 (en) 2023-12-21

Family

ID=88975125

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102022115032.1A Pending DE102022115032A1 (en) 2022-06-15 2022-06-15 HEADPHONE PART WITH SENSORS FOR CHARACTERIZING A PERSON'S VOCAL TRACT

Country Status (1)

Country Link
DE (1) DE102022115032A1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6492933B1 (en) 1999-09-02 2002-12-10 Mcewan Technologies, Llc SSB pulse Doppler sensor and active reflector system
US20220079464A1 (en) 2018-07-09 2022-03-17 Neteera Technologies Ltd. A sub-thz and thz system for physiological paramenters detection and method thereof

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6492933B1 (en) 1999-09-02 2002-12-10 Mcewan Technologies, Llc SSB pulse Doppler sensor and active reflector system
US20220079464A1 (en) 2018-07-09 2022-03-17 Neteera Technologies Ltd. A sub-thz and thz system for physiological paramenters detection and method thereof

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
WAGNER, Christoph [u.a.]: Silent speech command word recognition using stepped frequency continuous wave radar. In: Scientific Reports, Vol. 12, 2022, Artikelnummer: 4192. ISSN 2045-2322 (E). DOI: 10.1038/s41598-022-07842-9. URL: https://www.nature.com/articles/s41598-022-07842-9.pdf [abgerufen am 23.06.2022].

Similar Documents

Publication Publication Date Title
EP3451705B1 (en) Method and apparatus for the rapid detection of own voice
US5800475A (en) Hearing aid including a cochlear implant
CN109246515B (en) A kind of intelligent earphone and method promoting personalized sound quality function
DE102005049507B4 (en) Device for generating a combination signal and corresponding method and computer program for carrying out the method
DE112016004161T5 (en) Microphone signal merging
US20110237295A1 (en) Hearing aid system adapted to selectively amplify audio signals
DE102019206743A1 (en) Hearing aid system and method for processing audio signals
DE112016006126T5 (en) Occlusion reduction and noise reduction based on a sealing quality
DE60204902T2 (en) Method for programming a communication device and programmable communication device
CN105120059B (en) Mobile terminal and its method that earphone call noise reduction is controlled according to breathing power
CN109951783B (en) Method for adjusting hearing aid configuration based on pupil information
DE102019219510B3 (en) Method in which two hearing aids are coupled to one another, as well as hearing aid
EP4017031A1 (en) Hearing system with user-specific programming
DE102022115032A1 (en) HEADPHONE PART WITH SENSORS FOR CHARACTERIZING A PERSON'S VOCAL TRACT
WO2019213965A1 (en) Speech signal processing method and mobile device
Lee et al. Audio–vocal responses of vocal fundamental frequency and formant during sustained vowel vocalizations in different noises
DE112016006762T5 (en) Apparatus and method for equalizing a timbre of an earphone set
Rahman et al. Amplitude variation of bone-conducted speech compared with air-conducted speech
EP2584795A2 (en) Method for determining a compression characteristic curve
WO2011103934A1 (en) Method for training speech recognition, and training device
EP2793488B1 (en) Binaural microphone adjustment by means of the user's own voice
CN112037759B (en) Anti-noise perception sensitivity curve establishment and voice synthesis method
DE102011006472B4 (en) Method for improving speech intelligibility with a hearing aid device and hearing aid device
EP2063663A1 (en) Method for individually modifying a hearing device
DE102009032238A1 (en) Method for controlling adjustment of behind-the-ear hearing aid, involves spectrally filtering or selecting natural language element of test signal, where spectrum of test signal corresponds to spectral range of filter of filter bank

Legal Events

Date Code Title Description
R081 Change of applicant/patentee

Owner name: TECHNISCHE UNIVERSITAET DRESDEN, KOERPERSCHAFT, DE

Free format text: FORMER OWNER: ALTAVO GMBH, 01069 DRESDEN, DE

Owner name: ALTAVO GMBH, DE

Free format text: FORMER OWNER: ALTAVO GMBH, 01069 DRESDEN, DE

R163 Identified publications notified