DE102021103769B4 - Methods for signal processing - Google Patents

Methods for signal processing Download PDF

Info

Publication number
DE102021103769B4
DE102021103769B4 DE102021103769.7A DE102021103769A DE102021103769B4 DE 102021103769 B4 DE102021103769 B4 DE 102021103769B4 DE 102021103769 A DE102021103769 A DE 102021103769A DE 102021103769 B4 DE102021103769 B4 DE 102021103769B4
Authority
DE
Germany
Prior art keywords
signal
change data
signal processing
output
combination
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
DE102021103769.7A
Other languages
German (de)
Other versions
DE102021103769A1 (en
Inventor
gleich Patentinhaber Erfinder
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Clir Technologies At GmbH
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to DE102021103769.7A priority Critical patent/DE102021103769B4/en
Priority to PCT/EP2022/053859 priority patent/WO2022175349A2/en
Publication of DE102021103769A1 publication Critical patent/DE102021103769A1/en
Application granted granted Critical
Publication of DE102021103769B4 publication Critical patent/DE102021103769B4/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/55—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception using an external connection, either wireless or wired
    • H04R25/554—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception using an external connection, either wireless or wired using a wireless connection, e.g. between microphone and amplifier or using Tcoils
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1083—Reduction of ambient noise
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/50—Customised settings for obtaining desired overall acoustical characteristics
    • H04R25/505—Customised settings for obtaining desired overall acoustical characteristics using digital signal processing
    • H04R25/507—Customised settings for obtaining desired overall acoustical characteristics using digital signal processing implemented by neural network or fuzzy logic
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2225/00—Details of deaf aids covered by H04R25/00, not provided for in any of its subgroups
    • H04R2225/43—Signal processing in hearing aids to enhance the speech intelligibility
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/01—Hearing devices using active noise cancellation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/11—Transducers incorporated or for use in hand-held devices, e.g. mobile phones, PDA's, camera's
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments

Abstract

Verfahren zur Signalverarbeitung, wobei das Verfahren folgende Schritte aufweist:- Aufnehmen eines Signals mittels einer Aufnahmeeinrichtung (11),- Weiterleiten des Signals von der Aufnahmeeinrichtung (11) zumindest an eine Signalverarbeitungseinrichtung (25) und eine Kombinationseinrichtung (39),- Erzeugen von Signalveränderungsdaten basierend auf dem Signal in der Signalverarbeitungseinrichtung (25),- Weiterleiten der Signalveränderungsdaten von der Signalverarbeitungseinrichtung (25) an die Kombinationseinrichtung (39),- Erzeugen eines Ausgangssignals durch Anwenden der Signalveränderungsdaten auf das Signal mittels der Kombinationseinrichtung (39),- Weiterleiten des Ausgangssignals an eine Ausgabeeinrichtung (37), und- Ausgeben des Ausgangssignals mittels der Ausgabeeinrichtung (37),- wobei die Signalverarbeitungseinrichtung (25) in einem Hostgerät (20) angeordnet ist, und mindestens die Aufnahmeeinrichtung (11) oder die Ausgabeeinrichtung (37) in mindestens einem Schnittstellengerät (10, 30) angeordnet ist, wobei jedes Schnittstellengerät (10, 30) separat zum Hostgerät (20) handhabbar ist und mit dem Hostgerät (20) ausschließlich drahtlos kommuniziert.Method for signal processing, the method having the following steps: - recording a signal by means of a recording device (11), - forwarding the signal from the recording device (11) to at least one signal processing device (25) and a combination device (39), - generating signal change data based on the signal in the signal processing device (25), - forwarding the signal change data from the signal processing device (25) to the combination device (39), - generating an output signal by applying the signal change data to the signal by means of the combination device (39), - forwarding the output signal to an output device (37), and- outputting the output signal by means of the output device (37),- wherein the signal processing device (25) is arranged in a host device (20), and at least the recording device (11) or the output device (37) in at least an interface device ät (10, 30) is arranged, wherein each interface device (10, 30) can be handled separately from the host device (20) and communicates exclusively wirelessly with the host device (20).

Description

Die Erfindung betrifft ein Verfahren zur Signalverarbeitung.The invention relates to a method for signal processing.

Signale können beispielsweise Audio-, Video- oder neurologische Signale sein. Derartige Signale können beispielsweise mittels tragbarer Geräte wie Hörgeräte, intelligente Brillen, Implantate zur Messung und/oder Indizierung neurologischer Aktivität, oder andere ein Mikrofon und/oder eine Kamera enthaltende Geräte aufgenommen werden, wobei derartige Geräte zumindest in gewissen Ausführungen so ausgeführt sind, dass sie unmittelbar am Körper eines Benutzers getragen oder in dessen Körper implantiert werden können. Sie können beispielsweise wie bei einem Hörgerät direkt am Körper befestigt sein, oder sie können an der Kleidung eines Benutzers befestigt sein oder darin integriert sein.Signals can be audio, video or neurological signals, for example. Such signals can be picked up, for example, by means of wearable devices such as hearing aids, smart glasses, implants for measuring and/or indicating neurological activity, or other devices containing a microphone and/or a camera, with such devices being designed, at least in certain embodiments, to worn directly on a user's body or implanted in his body. For example, they can be attached directly to the body, as in a hearing aid, or they can be attached to or integrated into a user's clothing.

Das Dokument DE 10 2019 200 956 A1 offenbart eine Signalverarbeitungseinrichtung zur Verarbeitung von Audiosignalen mittels eines neuronalen Netzwerks.The document DE 10 2019 200 956 A1 discloses a signal processing device for processing audio signals by means of a neural network.

Das Dokument WO 2019/ 043 246 A1 offenbart ein Hörgerätesystem mit einer Höreinheit am Ohr und mit einer abgesetzten Verarbeitungseinheit.The document WO 2019/ 043 246 A1 discloses a hearing aid system with a hearing unit on the ear and with a remote processing unit.

Das Dokument US 2019 / 0 253 816 A1 offenbart eine Fernsteuerungseinheit für ein Hörgerät.The document U.S. 2019/0 253 816 A1 discloses a remote control unit for a hearing aid.

Das Dokument DE 10 2007 010 601 A1 offenbart ein Hörsystem mit verteilter Signalverarbeitung und ein zugehöriges Verfahren.The document DE 10 2007 010 601 A1 discloses a distributed signal processing hearing system and associated method.

Das Dokument US 2017 / 0 295 439 A1 offenbart ein Hörsystem mit nichtlinearer Verarbeitung von Signalen von einer Vielzahl von Mikrophonen unter Verwendung eines neuronalen Netzwerks.The document U.S. 2017/0 295 439 A1 discloses an auditory system with non-linear processing of signals from a plurality of microphones using a neural network.

Es wäre wünschenswert, im Vergleich zu bekannten Ausführungen alternative oder erweiterte Möglichkeiten zur Signalverarbeitung zur Verfügung zu stellen. Dies wird erfindungsgemäß durch ein Verfahren nach Anspruch 1 erreicht. Vorteilhafte Ausgestaltungen können beispielsweise den Unteransprüchen entnommen werden. Der Inhalt der Ansprüche wird durch ausdrückliche Inbezugnahme zum Inhalt der Beschreibung gemacht.It would be desirable to provide alternative or expanded signal processing options compared to known designs. This is achieved according to the invention by a method according to claim 1. Advantageous configurations can be found in the dependent claims, for example. The content of the claims is made part of the content of the description by express reference.

Die Erfindung betrifft ein Verfahren zur Signalverarbeitung. Das Verfahren weist folgende Schritte auf:

  • - Aufnehmen eines Signals mittels einer Aufnahmeeinrichtung,
  • - Weiterleiten des Signals von der Aufnahmeeinrichtung zumindest an eine Signalverarbeitungseinrichtung und eine Kombinationseinrichtung,
  • - Erzeugen von Signalveränderungsdaten basierend auf dem Signal in der Signalverarbeitungseinrichtung,
  • - Weiterleiten der Signalveränderungsdaten von der Signalverarbeitungseinrichtung an die Kombinationseinrichtung,
  • - Erzeugen eines Ausgangssignals durch Anwenden der Signalveränderungsdaten auf das Signal mittels der Kombinationseinrichtung,
  • - Weiterleiten des Ausgangssignals an eine Ausgabeeinrichtung, und
  • - Ausgeben des Ausgangssignals mittels der Ausgabeeinrichtung.
The invention relates to a method for signal processing. The procedure has the following steps:
  • - recording a signal by means of a recording device,
  • - Forwarding the signal from the recording device at least to a signal processing device and a combination device,
  • - generating signal change data based on the signal in the signal processing device,
  • - forwarding the signal change data from the signal processing device to the combination device,
  • - generating an output signal by applying the signal change data to the signal by means of the combination device,
  • - forwarding the output signal to an output device, and
  • - Outputting the output signal by means of the output device.

Die Signalverarbeitungseinrichtung ist zweckmäßig in einem Host-Gerät angeordnet, und mindestens die Aufnahmeeinrichtung oder die Ausgabeeinrichtung ist zweckmäßig in mindestens einem Schnittstellengerät angeordnet, wobei jedes Schnittstellengerät separat zum Host-Gerät handhabbar ist und mit dem Host-Gerät ausschließlich drahtlos kommuniziert.The signal processing device is expediently arranged in a host device, and at least the receiving device or the output device is expediently arranged in at least one interface device, with each interface device being operable separately from the host device and communicating exclusively wirelessly with the host device.

Durch die beschriebene Aufteilung kann insbesondere eine Optimierung des Host-Geräts für die Signalverarbeitungseinrichtung durchgeführt werden, so dass für die Signalverarbeitungseinrichtung umfangreichere Rechenressourcen zur Verfügung stehen. Das Host-Gerät kann beispielsweise auch eine bessere Stromversorgung oder eine leichtere Bedienbarkeit haben. Beispielsweise kann es sich bei dem Host-Gerät um ein Mobiltelefon handeln, und bei einem Schnittstellengerät kann es sich beispielsweise um ein Hörgerät, um Kopfhörer, um eine intelligente Brille oder um ein Implantat zur Induzierung neurologischer Aktivität handeln. Solche Schnittstellengeräte sind typischerweise erheblich kleiner und leichter als ein Mobiltelefon, so dass zur Signalverarbeitung auf die erheblich höheren Ressourcen des Mobiltelefons zurückgegriffen werden kann.The described division allows the host device for the signal processing device to be optimized in particular, so that more extensive computing resources are available for the signal processing device. The host device may also have better power supply or easier usability, for example. For example, the host device can be a mobile phone and an interface device can be, for example, a hearing aid, headphones, smart glasses, or an implant for inducing neurological activity. Such interface devices are typically significantly smaller and lighter than a mobile phone, so that the significantly higher resources of the mobile phone can be used for signal processing.

Unter einer Signalverarbeitung sei insbesondere eine Änderung eines Signals, insbesondere eines digitalen Signals, verstanden, wobei eine solche Signalverarbeitung typischerweise dazu führt, dass das Signal nach der Signalverarbeitung bestimmte Eigenschaften hat oder in Bezug auf bestimmte Eigenschaften optimiert wird. Beispielsweise können dabei bestimmte Frequenzen oder Geräusche ausgeblendet werden oder es kann die Erscheinung von bestimmten Objekten in einem Bild oder einer Videosequenz geändert werden.Signal processing is understood to mean in particular a change in a signal, in particular a digital signal, such signal processing typically resulting in the signal having specific properties after signal processing or being optimized with respect to specific properties. For example, certain frequencies or noises can be masked out, or the appearance of certain objects in an image or a video sequence can be changed.

Bei der Aufnahmeeinrichtung kann es sich beispielsweise um ein Mikrofon zur Aufnahme von Schallsignalen, um eine Kamera oder einen Bildsensor zur Aufnahme von Video- oder Bildsignalen oder um ein Implantat zur Messung neurologischer Aktivität handeln. Solche Aufnahmeeinrichtungen können beispielsweise in ein Schnittstellengerät integriert sein. Unter dem Aufnehmen kann insbesondere verstanden werden, dass Schallwellen oder sichtbares Licht in elektronisch verarbeitbare Information umgesetzt werden. Es kann darunter zumindest gemäß einer Ausführung auch verstanden werden, dass ein Signal bereits als digitale Information empfangen wird.The recording device can be, for example, a microphone for recording Sound signals, a camera or an image sensor for recording video or image signals, or an implant for measuring neurological activity. Such recording devices can be integrated into an interface device, for example. Recording can in particular be understood to mean that sound waves or visible light are converted into electronically processable information. At least according to one embodiment, this can also be understood to mean that a signal is already being received as digital information.

Das Weiterleiten des Signals von der Aufnahmeeinrichtung an eine Signalverarbeitungseinrichtung und eine Kombinationseinrichtung kann insbesondere eine drahtlose Übertragung oder auch mehrere drahtlose Übertragungen beinhalten. Dadurch bleibt eine besonders hohe Flexibilität bei der Anordnung der Komponenten. In diesem Schritt wird typischerweise das Signal aufgeteilt, so dass es in einem Pfad zur Signalverarbeitungseinrichtung geleitet wird und im anderen Pfad zur Kombinationseinrichtung geleitet wird. Bei der Signalverarbeitungseinrichtung kann es sich insbesondere um eine vergleichsweise leistungsfähige oder leistungsfähigere Recheneinrichtung handeln, beispielsweise einen Mikrochip, welcher beispielsweise auf einer Platine befestigt sein kann. Die Kombinationseinrichtung kann insbesondere davon strukturell und/oder funktionell unabhängig sein und kann beispielsweise in einem anderen Mikrochip angeordnet sein. Signalverarbeitungseinrichtung und Kombinationseinrichtung haben typischerweise die hierin beschriebene Funktionalität.The forwarding of the signal from the recording device to a signal processing device and a combination device can in particular include a wireless transmission or also a number of wireless transmissions. This leaves a particularly high degree of flexibility when arranging the components. In this step, the signal is typically split so that it is routed to the signal processing device in one path and to the combining device in the other path. The signal processing device can in particular be a comparatively powerful or more powerful computing device, for example a microchip, which can be attached to a printed circuit board, for example. The combination device can in particular be structurally and/or functionally independent of this and can be arranged in another microchip, for example. Signal processing device and combination device typically have the functionality described herein.

Die Signalverarbeitungseinrichtung erzeugt die Signalveränderungsdaten typischerweise basierend auf dem Signal. Dies kann insbesondere bedeuten, dass die Signalveränderungsdaten von dem der Signalverarbeitungseinrichtung gelieferten Signal abhängen. Die Signalveränderungsdaten sind dabei insbesondere nicht unmittelbar ein neues Signal, sondern Daten, mittels welchen das Signal in einem weiteren Schritt in der Kombinationseinrichtung verändert werden kann. Die Signalveränderungsdaten können beispielsweise als Filter oder als Schablone angesehen werden, welche dann in der Kombinationseinrichtung auf das tatsächliche Signal angewendet werden. Beispielsweise kann in der Signalverarbeitungseinrichtung ein Rauschen im Signal erkannt werden und die Signalveränderungsdaten können so erzeugt werden, dass bei Anwendung der Signalveränderungsdaten auf das Signal in der Kombinationseinrichtung das Rauschen unterdrückt wird. Gemäß einer alternativen Ausführung sind die Signalveränderungsdaten derart, dass sie unmittelbar als neues Signal verwendet werden können. In diesem Fall können sie auch anders benannt werden, beispielsweise als neues Signal oder Ausgangssignal. Insbesondere kann dann auf die Kombinationseinrichtung verzichtet werden.The signal processing device typically generates the signal change data based on the signal. In particular, this can mean that the signal change data depend on the signal supplied to the signal processing device. In particular, the signal change data is not directly a new signal, but rather data by means of which the signal can be changed in a further step in the combination device. The signal change data can be viewed, for example, as a filter or as a template, which is then applied to the actual signal in the combiner. For example, noise in the signal can be detected in the signal processing device and the signal change data can be generated in such a way that the noise is suppressed when the signal change data is applied to the signal in the combination device. According to an alternative embodiment, the signal change data is such that it can be used immediately as a new signal. In this case they can also be named differently, for example as new signal or output signal. In particular, the combination device can then be dispensed with.

Die Signalveränderungsdaten können beispielsweise über eine drahtlose Übertragung an die Kombinationseinrichtung weitergeleitet werden. Wenn sich die Kombinationseinrichtung und die Signalverarbeitungseinrichtung im gleichen Gerät befinden, können sie beispielsweise auch fest verdrahtet übertragen werden.The signal change data can be forwarded to the combination device via wireless transmission, for example. If the combination device and the signal processing device are located in the same device, they can also be hard-wired, for example.

Durch Anwenden der Signalverarbeitungsdaten auf das Signal in der Kombinationseinrichtung, was beispielsweise wie eben beschrieben erfolgen kann, wird das Ausgangssignal erzeugt. Das Ausgangssignal ist dasjenige Signal, welches die Kombinationseinrichtung wieder verlässt und anschließend weiterverarbeitet und insbesondere ausgegeben werden kann.The output signal is generated by applying the signal processing data to the signal in the combination device, which can be done, for example, as just described. The output signal is the signal that leaves the combination device again and can then be further processed and, in particular, output.

Das Weiterleiten des Ausgangssignals an eine Ausgabeeinrichtung kann beispielsweise eine drahtlose Kommunikation beinhalten. Befinden sich die Ausgabeeinrichtung und die Kombinationseinrichtung im gleichen Gerät, kann die Weiterleitung beispielsweise auch fest verdrahtet erfolgen.Forwarding the output signal to an output device can include wireless communication, for example. If the output device and the combination device are in the same device, forwarding can also be hard-wired, for example.

Das Ausgeben des Ausgangssignals mittels der Ausgabeeinrichtung kann beispielsweise die Umsetzung des Ausgangssignals in eine von einem Menschen wahrnehmbare Form beinhalten. Im Fall eines Audiosignals kann dies beispielsweise die Ausgabe mittels eines Lautsprechers, d.h. insbesondere die Umsetzung in Schallwellen, bedeuten. Im Fall eines Videosignals kann dies beispielsweise die Anzeige auf einer Anzeigeeinrichtung, insbesondere einer für Menschen wahrnehmbaren Anzeigeeinrichtung, bedeuten. Gemäß einer Ausführung kann jedoch das Ausgeben auch das Ausgeben in digitaler Form bedeuten.The outputting of the output signal by means of the output device can contain, for example, the conversion of the output signal into a form that can be perceived by a human. In the case of an audio signal, this can mean, for example, the output using a loudspeaker, i.e. in particular the conversion into sound waves. In the case of a video signal, this can mean, for example, the display on a display device, in particular a display device that can be seen by humans. However, according to one embodiment, outputting may also mean outputting in digital form.

Bei dem Host-Gerät kann es sich insbesondere um ein Mobiltelefon oder um ein anderes Gerät, insbesondere ein tragbares Gerät, mit einer vergleichsweise hohen Rechenleistung und ausreichender Stromversorgung handeln. Dies erlaubt die bereits beschriebene Funktionalität. Ein Schnittstellengerät kann insbesondere kleiner und leichter als das Host-Gerät sein und somit freier positionierbar sein. Gemäß einer Ausführung ist die Aufnahmeeinrichtung in einem Schnittstellengerät angeordnet, welches vom Host-Gerät separat ist, und die Ausgabeeinrichtung ist in dem Host-Gerät angeordnet. Gemäß einer Ausführung ist die Ausgabeeinrichtung in einem Schnittstellengerät angeordnet, welches zum Host-Gerät separat ist, und die Aufnahmeeinrichtung ist in dem Host-Gerät angeordnet. Gemäß einer Ausführung ist die Aufnahmeeinrichtung in einem Schnittstellengerät angeordnet und die Ausgabeeinrichtung ist in einem dazu separaten weiteren Schnittstellengerät angeordnet, wobei beide Schnittstellengeräte separat zum Host-Gerät sind. Dies ermöglicht eine besonders freie Positionierung. Typischerweise hat jedes Gerät eine eigene Energieversorgung, insbesondere in Form einer Batterie. Die Kommunikation zwischen den Geräten erfolgt typischerweise über drahtlose Kommunikation, wobei beispielsweise auf Bluetooth, WLAN, NFC oder andere Datenübertragungsverfahren zurückgegriffen werden kann.The host device can in particular be a mobile phone or another device, in particular a portable device, with a comparatively high computing power and sufficient power supply. This allows the functionality already described. In particular, an interface device can be smaller and lighter than the host device and can therefore be positioned more freely. According to one embodiment, the receiving device is located in an interface device that is separate from the host device, and the output device is located in the host device. According to one embodiment, the output device is located in an interface device that is separate from the host device, and the receiving device is located in the host device. According to one embodiment, the recording device is arranged in an interface device and the output device is in a separate space Arranged ren interface device, both interface devices are separate to the host device. This enables a particularly free positioning. Typically, each device has its own power supply, particularly in the form of a battery. The communication between the devices typically takes place via wireless communication, with Bluetooth, WLAN, NFC or other data transmission methods being able to be used, for example.

Die Signalveränderungsdaten können insbesondere mittels eines neuronalen Netzes und/oder mittels künstlicher Intelligenz in der Signalverarbeitungseinrichtung erzeugt werden. Anders ausgedrückt kann ein neuronales Netz oder eine künstliche Intelligenz in der Signalverarbeitungseinrichtung implementiert sein. Hierzu können beispielsweise geeignete Softwaremodule verwendet werden. Ein neuronales Netz kann auch als ein Spezialfall einer künstlichen Intelligenz aufgefasst werden. Insbesondere kann ein neuronales Netz in geeigneter Weise trainiert werden, so dass es die erforderlichen Aufgaben ausführen kann.The signal change data can be generated in the signal processing device in particular by means of a neural network and/or by means of artificial intelligence. In other words, a neural network or artificial intelligence can be implemented in the signal processing device. Suitable software modules can be used for this purpose, for example. A neural network can also be understood as a special case of artificial intelligence. In particular, a neural network can be suitably trained so that it can perform the required tasks.

Insbesondere kann die Kombinationseinrichtung in einem Schnittstellengerät angeordnet sein. Dies erlaubt eine Trennung von der Signalverarbeitungseinrichtung, welche grundsätzlich im Host-Gerät angeordnet ist, wobei durch die Anordnung der Kombinationseinrichtung im Schnittstellengerät der Signalfluss optimiert werden kann. Beispielsweise kann die Erzeugung des Ausgangssignals näher an der Ausgabeeinrichtung erfolgen. Durch die Verwendung drahtloser Kommunikation ist trotz freier Positionierbarkeit die gewünschte Funktionalität sichergestellt.In particular, the combination device can be arranged in an interface device. This permits a separation from the signal processing device, which is basically arranged in the host device, with the signal flow being able to be optimized by the arrangement of the combination device in the interface device. For example, the output signal can be generated closer to the output device. By using wireless communication, the desired functionality is ensured despite free positioning.

Insbesondere kann in dem Schnittstellengerät, in welchem die Kombinationseinrichtung angeordnet ist, auch die Ausgabeeinrichtung angeordnet sein. Dies erlaubt eine Erzeugung des Ausgangssignals nahe zur Ausgabeeinrichtung. Die Kombinationseinrichtung benötigt typischerweise erheblich weniger Rechenleistung und Energie als die Signalverarbeitungseinrichtung, so dass die Kombinationseinrichtung typischerweise gut in einem kleineren Schnittstellengerät angeordnet werden kann, während für die Signalverarbeitungseinrichtung die höhere Rechenleistung und bessere Energieversorgung des Host-Geräts zur Verfügung steht. Dadurch können komplexere Funktionalitäten implementiert werden als wenn auch die Signalverarbeitungseinrichtung in einem Schnittstellengerät implementiert wäre.In particular, the output device can also be arranged in the interface device in which the combination device is arranged. This allows the output signal to be generated close to the output device. The combination device typically requires significantly less computing power and energy than the signal processing device, so that the combination device can typically be easily arranged in a smaller interface device, while the higher computing power and better energy supply of the host device is available for the signal processing device. As a result, more complex functionalities can be implemented than if the signal processing device were also implemented in an interface device.

Die Signalveränderungsdaten können insbesondere in zeitlich aufeinanderfolgenden Paketen erzeugt werden, wobei jedem Paket eine Paketzeit zugeordnet ist. Anders ausgedrückt werden die Signalveränderungsdaten in Paketen erzeugt oder auch nach der Erzeugung in einzelne Pakete aufgeteilt, was als äquivalent angesehen werden kann. Die Paketzeit ist insbesondere anzeigend dafür, zu welchem Zeitpunkt im Signal die Signalveränderungsdaten zur Anwendung kommen sollen.The signal change data can be generated in particular in chronologically consecutive packets, with each packet being assigned a packet time. In other words, the signal change data is generated in packets or also divided into individual packets after generation, which can be regarded as equivalent. In particular, the packet time is indicative of at what point in time in the signal the signal change data should be applied.

Insbesondere kann vor dem Anwenden jedes Pakets die Paketzeit mit der Signalzeit des Signals verglichen werden. Bevorzugt wird das Paket nur angewendet, wenn die Paketzeit der Signalzeit entspricht. Dadurch kann sichergestellt werden, dass nur Pakete auf ein Signal angewendet werden, welche auch zum korrekten Zeitpunkt angewendet werden. Die Überprüfung der Paketzeit kann insbesondere nach einer Übertragung, beispielsweise einer drahtlosen Übertragung, der Signalveränderungsdaten erfolgen. Somit kann eine etwaige Latenz und/oder eine Störung während der Signalübertragung durch die Kontrolle der Paketzeit kompensiert werden.In particular, before applying each packet, the packet time can be compared to the signal's signal time. Preferably the packet is only applied if the packet time equals the signal time. This ensures that only packets that are used at the correct time are applied to a signal. The packet time can be checked in particular after a transmission, for example a wireless transmission, of the signal change data. Any latency and/or interference during signal transmission can thus be compensated for by controlling the packet time.

Ein Paket, dessen Paketzeit zu einer späteren Signalzeit entspricht, kann insbesondere zwischengespeichert werden und später bei der Signalzeit angewendet werden. Dadurch wird das Paket in geeigneter Weise zur korrekten Zeit angewendet. Die Zwischenspeicherung kann beispielsweise in einem Zwischenspeicher erfolgen.In particular, a packet whose packet time corresponds to a later signal time can be buffered and applied later at the signal time. This will apply the package appropriately at the correct time. The intermediate storage can take place in an intermediate memory, for example.

Die Signalzeit kann insbesondere eine Zeit sein, mittels welcher das Signal zeitlich unterteilt wird. Die Paketzeit kann insbesondere basierend auf der Signalzeit erzeugt werden.The signal time can in particular be a time by means of which the signal is subdivided in time. In particular, the packet time can be generated based on the signal time.

Ansprechend darauf, dass bei mindestens einem Paket oder bei mindestens einer vorgegebenen Anzahl von Paketen die Paketzeit nicht der Signalzeit entspricht, insbesondere einer schon vergangenen Paketzeit entspricht, kann insbesondere ein Beschleunigungssignal an die Signalverarbeitungseinrichtung gesendet werden. In response to the fact that the packet time for at least one packet or for at least a predetermined number of packets does not correspond to the signal time, in particular corresponds to a packet time that has already passed, an acceleration signal can be sent to the signal processing device.

Dadurch kann basierend darauf, dass offenbar ein Paket zu spät ankommt oder mehrere Pakete zu spät ankommen, gezielt in die Signalverarbeitung eingegriffen werden, so dass wieder eine ordnungsgemäße Weiterverarbeitung möglich ist.In this way, based on the fact that a packet apparently arrives too late or several packets arrive too late, specific intervention in the signal processing is possible, so that proper further processing is again possible.

Die Signalverarbeitungseinrichtung kann beispielsweise ansprechend auf den Empfang eines Beschleunigungssignals die Erzeugung der Signalveränderungsdaten beschleunigen und/oder ein schnelleres Verfahren zur Erzeugung der Signalveränderungsdaten anwenden und/oder mehr Datenverarbeitungsressourcen allokieren. Dadurch kann die Signalverarbeitung beschleunigt werden, so dass Pakete wieder rechtzeitig an der Kombinationseinrichtung ankommen. Bei Datenverarbeitungsressourcen kann es sich beispielsweise um Arbeitsspeicher, Datenübertragungskapazität, Prozessorkerne oder Prozessorgeschwindigkeit handeln.The signal processing device can, for example, accelerate the generation of the signal change data in response to the receipt of an acceleration signal and/or use a faster method for generating the signal change data and/or allocate more data processing resources. As a result, the signal processing can be accelerated, so that packets arrive at the combination device in good time again. For example, computing resources can be memory cher, data transmission capacity, processor cores or processor speed.

Die Aufnahmeeinrichtung kann beispielsweise in dem gleichen Schnittstellengerät wie die Kombinationseinrichtung angeordnet sein. Dadurch wird ein direkter Signalfluss ermöglicht. Die Aufnahmeeinrichtung kann in dem gleichen Schnittstellengerät wie die Ausgabeeinrichtung angeordnet sein. Dadurch kann beispielsweise eine Trennung in ein Schnittstellengerät mit Aufnahmeeinrichtung und Ausgabeeinrichtung und ein Host-Gerät erfolgen.The receiving device can be arranged, for example, in the same interface device as the combination device. This enables a direct signal flow. The recording device can be arranged in the same interface device as the output device. As a result, for example, a separation into an interface device with receiving device and output device and a host device can take place.

Das Host-Gerät kann insbesondere ein Mobiltelefon oder ein Computer sein. Derartige Geräte haben üblicherweise ausreichend Rechenleistung und Stromversorgung für die hierin beschriebenen Aufgaben. Auch die Verwendung anderer Host-Geräte ist jedoch möglich.In particular, the host device can be a mobile phone or a computer. Such devices usually have sufficient computing power and power supply for the tasks described herein. However, other host devices can also be used.

Das Schnittstellengerät kann insbesondere ein Hörgerät, eine Mikrofoneinheit, eine Lautsprechereinheit, eine Mikrofon- und Lautsprechereinheit, eine Brille, eine Kameraeinheit, eine Displayeinheit, eine Kamera- und Displayeinheit oder ein Implantat zur Messung und/oder Induzierung neurologischer Aktivität sein. Derartige Geräte können in vorteilhafter Weise eine Aufnahmeeinrichtung wie beispielsweise ein Mikrofon oder eine Kamera, und/oder ein Ausgabegerät wie beispielsweise ein Display oder einen Lautsprecher beinhalten. Auch eine entsprechende Kombination ist möglich. Eine Mikrofoneinheit kann beispielsweise ein Gerät sein, welches ein Mikrofon und erforderliche Komponenten zur Signalweiterleitung beinhaltet. Ein Hörgerät kann beispielsweise in oder an einem Ohr tragbar sein. Eine Lautsprechereinheit kann beispielsweise einen Lautsprecher und erforderliche Unterstützungskomponenten beinhalten. Eine Mikrofon- und Lautsprechereinheit kann sowohl ein Mikrofon wie auch einen Lautsprecher aufweisen. Eine Brille kann beispielsweise als intelligente Brille ausgeführt sein, welche ein Display oder eine andere Einheit zum Anzeigen von Bildern oder anderen Daten an einen Benutzer aufweist. Eine Kameraeinheit kann beispielsweise eine Kamera und unterstützende Einheiten aufweisen. Als Kamera kann beispielsweise ein CCD-Sensor verwendet werden. Eine Displayeinheit kann beispielsweise ein Display und unterstützende Einheiten aufweisen. Eine Kamera- und Displayeinheit kann insbesondere sowohl eine Kamera wie auch ein Display aufweisen.The interface device can in particular be a hearing aid, a microphone unit, a loudspeaker unit, a microphone and loudspeaker unit, glasses, a camera unit, a display unit, a camera and display unit or an implant for measuring and/or inducing neurological activity. Such devices can advantageously contain a recording device such as a microphone or a camera, and/or an output device such as a display or a loudspeaker. A corresponding combination is also possible. A microphone unit can, for example, be a device that contains a microphone and the necessary components for signal transmission. A hearing aid can be worn in or on one ear, for example. For example, a speaker unit may include a speaker and necessary support components. A microphone and loudspeaker unit can have both a microphone and a loudspeaker. A pair of glasses can be designed as intelligent glasses, for example, which have a display or another unit for displaying images or other data to a user. For example, a camera unit may include a camera and supporting units. A CCD sensor, for example, can be used as the camera. For example, a display unit may include a display and supporting units. A camera and display unit can in particular have both a camera and a display.

Gemäß einer Ausführung wird das Signal vor einer drahtlosen Übertragung zur Signalverarbeitungseinrichtung komprimiert. Dadurch kann Bandbreite eingespart werden. Eine solche Komprimierung kann insbesondere in einem Schnittstellengerät erfolgen, welches das komprimierte Signal dann drahtlos zum Host-Gerät sendet.According to one embodiment, the signal is compressed before wireless transmission to the signal processing device. This can save bandwidth. Such a compression can take place in particular in an interface device, which then sends the compressed signal wirelessly to the host device.

Gemäß einer Ausführung wird das Signal vor der Signalverarbeitungseinrichtung dekomprimiert. Dadurch kann die Signalverarbeitungseinrichtung das Signal so weiterverarbeiten, als wäre es nie komprimiert worden. Gemäß einer Ausführung kann jedoch auch die Signalverarbeitungseinrichtung das komprimierte Signal verarbeiten. Insbesondere können die Signalveränderungsdaten vor der Kombinationseinrichtung dekomprimiert werden, so dass die Signalveränderungsdaten basierend auf dem komprimierten Signal erzeugt werden, jedoch der Effekt der Kompression vor der Anwendung in der Kombinationseinrichtung rückgängig gemacht wird.According to one embodiment, the signal is decompressed before the signal processing device. This allows the signal processing device to further process the signal as if it had never been compressed. According to one embodiment, however, the signal processing device can also process the compressed signal. In particular, the signal change data can be decompressed before the combiner, so that the signal change data is generated based on the compressed signal, but the effect of the compression is reversed before application in the combiner.

Unter einer Kompression kann insbesondere verstanden werden, dass die in dem Signal enthaltenen Daten unter Erhalt der Qualität oder unter Inkaufnahme eines vordefinierten Qualitätsverlusts in weniger Dateneinheiten wie beispielsweise Bits übertragen werden können. Typischerweise wird somit bei einer Komprimierung das Signal so verändert, dass Redundanzen wegfallen und eventuell unwichtige Informationen entfernt werden.Compression can in particular be understood to mean that the data contained in the signal can be transmitted in fewer data units, such as bits, for example, while maintaining the quality or accepting a predefined loss of quality. Typically, the signal is changed during compression in such a way that redundancies are eliminated and possibly unimportant information is removed.

Gemäß einer Ausführung verarbeitet die Signalverarbeitungseinrichtung das komprimierte Signal. Die Kombinationseinrichtung kann insbesondere komprimierte Signalveränderungsdaten verarbeiten. Somit kann der Effekt der Kompression während der Signalverarbeitung in der Signalverarbeitungseinrichtung und auch bei der Anwendung der Signalveränderungsdaten aufrechterhalten werden. Das Ausgangssignal kann somit von der Kombinationseinrichtung so erzeugt werden, als wäre das Signal nicht komprimiert worden, wobei sowohl die Signalverarbeitung in der Signalverarbeitungseinrichtung mit komprimierten Daten erfolgt und auch die Signalveränderungsdaten noch komprimiert sind. Dadurch kann auch bei dieser Übertragungsstrecke Bandbreite eingespart werden.According to one embodiment, the signal processing device processes the compressed signal. In particular, the combination device can process compressed signal change data. Thus, the effect of compression can be maintained during signal processing in the signal processing device and also when applying the signal change data. The output signal can thus be generated by the combination device as if the signal had not been compressed, the signal processing in the signal processing device taking place with compressed data and the signal change data also being compressed. As a result, bandwidth can also be saved on this transmission link.

Gemäß einer Ausführung erfolgt das Weiterleiten des Signals von der Aufnahmeeinrichtung zumindest an die Signalverarbeitungseinrichtung und/oder die Kombinationseinrichtung durch drahtlose Kommunikation. Gemäß einer Ausführung erfolgt das Weiterleiten des Ausgangssignals an eine Ausgabeeinrichtung durch drahtlose Kommunikation. Gemäß einer Ausführung erfolgt das Weiterleiten der Signalveränderungsdaten an die Kombinationseinrichtung durch drahtlose Kommunikation. Gemäß einer Ausführung erfolgt das Senden eines Beschleunigungssignals an die Datenverarbeitungseinrichtung durch drahtlose Kommunikation.According to one embodiment, the signal is forwarded from the recording device at least to the signal processing device and/or the combination device by wireless communication. According to one embodiment, the output signal is forwarded to an output device by wireless communication. According to one embodiment, the signal change data is forwarded to the combination device by wireless communication. According to one embodiment, an acceleration signal is sent to the data processing device by wireless communication.

Insbesondere kann drahtlose Kommunikation immer dann angewendet werden, wenn Daten zwischen unterschiedlichen Geräten, also insbesondere zwischen Schnittstellengeräten oder zwischen einem Schnittstellengerät und dem Host-Gerät, übertragen werden sollen. Dadurch wird die Flexibilität erhalten.In particular, wireless communication can always be used when data is transferred between different devices, ie in particular between interface devices or between an interface device and the host device are to be carried. This maintains the flexibility.

Gemäß einer Ausführung ist das Signal ein Audiosignal. Die Aufnahmeeinrichtung kann dann insbesondere ein Mikrofon sein und/oder die Ausgabeeinrichtung kann insbesondere ein Lautsprecher sein.According to one embodiment, the signal is an audio signal. The recording device can then in particular be a microphone and/or the output device can in particular be a loudspeaker.

Die Signalveränderungsdaten können für den Fall, dass das Signal ein Audiosignal ist, insbesondere in der Kombinationseinrichtung eine Abschwächung, eine Verstärkung oder ein Ausblenden vorgegebener Frequenzen oder Frequenzbänder bewirken. Ebenso können die Signalveränderungsdaten in der Kombinationseinrichtung eine Rauschunterdrückung bewirken. Insbesondere werden die Signalveränderungsdaten in der Signalverarbeitungseinrichtung so erzeugt, dass die gewünschte Wirkung erzielt wird.If the signal is an audio signal, the signal change data can cause predetermined frequencies or frequency bands to be weakened, amplified or faded out, in particular in the combination device. Likewise, the signal change data in the combination device can cause noise suppression. In particular, the signal change data is generated in the signal processing device in such a way that the desired effect is achieved.

Gemäß einer Ausführung ist das Signal ein Videosignal oder ein Bildsignal. Die Aufnahmeeinrichtung kann in diesem Fall insbesondere eine Kamera sein und/oder die Ausgabeeinrichtung kann insbesondere eine visuelle Anzeige sein. Die Signalveränderungsdaten können, insbesondere in dem Fall, in welchem das Signal ein Videosignal oder ein Bildsignal ist, in der Kombinationseinrichtung eine Hervorhebung, Umrandung, Maskierung oder ein Ausblenden von Objekten bewirken. Insbesondere können die Signalveränderungsdaten so erzeugt werden, dass eine solche Wirkung in der Kombinationseinrichtung stattfindet. Dadurch können beispielsweise die Signalveränderungsdaten dazu verwendet werden, ein Bild oder ein Videosignal so aufzubereiten, dass Informationen leichter erkannt werden und/oder dass Behinderte unterstützt werden.According to one embodiment, the signal is a video signal or an image signal. In this case, the recording device can in particular be a camera and/or the output device can in particular be a visual display. The signal change data can, particularly in the case in which the signal is a video signal or an image signal, cause objects to be highlighted, bordered, masked or faded out in the combination device. In particular, the signal change data can be generated in such a way that such an effect takes place in the combination device. In this way, for example, the signal change data can be used to prepare an image or a video signal in such a way that information can be recognized more easily and/or that the disabled can be supported.

Gemäß einer Ausführung weist das Verfahren ferner folgende Schritte auf:

  • - Übertragen eines in einem der Schnittstellengeräte gespeicherten Codes an das Host-Gerät,
  • - Überprüfen einer Gültigkeit des Codes, und
  • - Aktivieren der Signalverarbeitungseinrichtung nur dann, wenn der Code gültig ist.
According to one embodiment, the method also has the following steps:
  • - transmitting a code stored in one of the interface devices to the host device,
  • - checking a validity of the code, and
  • - Activate the signal processing device only if the code is valid.

Dadurch kann die Ausführung von in der Signalverarbeitungseinrichtung implementierten Prozessen nur dann zugelassen werden, wenn ein gültiger Code vorliegt. Ein solcher Code kann beispielsweise in einem Schnittstellengerät herstellerseitig einprogrammiert werden, und er kann zur Laufzeit an das Host-Gerät gesendet werden. Das Host-Gerät kann beispielsweise eine frei distributierbare Software beinhalten, beispielsweise eine App oder eine andere herunterladbare Anwendung. Durch die Verwendung des Codes kann diese Anwendung überprüfen, ob das Schnittstellengerät dazu berechtigt ist, auf die Anwendung zuzugreifen. Dadurch kann die Softwaredistribution frei verfügbar sein, jedoch kann auf Hardwareseite sichergestellt werden, dass nur lizenzierte Schnittstellengeräte die Funktionalität verwenden können. Solche Codes können beispielsweise Herstellern von Hörgeräten zur Verfügung gestellt werden, welche den entsprechenden Code dann in ihre Hörgeräte einbauen, so dass diese dann mit einer bestimmten Anwendung zusammenarbeiten können. Diese Anwendung kann beispielsweise eine besonders gute Rauschunterdrückung oder eine andere Art der Signalverarbeitung bereitstellen. As a result, the execution of processes implemented in the signal processing device can only be allowed if a valid code is present. Such code can be programmed into an interface device at the factory, for example, and sent to the host device at runtime. For example, the host device may include freely distributable software, such as an app or other downloadable application. By using the code, this application can verify that the interface device is authorized to access the application. This means that the software distribution can be freely available, but on the hardware side it can be ensured that only licensed interface devices can use the functionality. Such codes can be made available, for example, to manufacturers of hearing aids, who then build the corresponding code into their hearing aids so that they can then work with a specific application. This application can, for example, provide particularly good noise reduction or another type of signal processing.

Durch unterschiedliche Codes können auch unterschiedliche Funktionen freigeschaltet werden oder blockiert werden. So kann beispielsweise ein Code anzeigen, welche Funktionen in der Signalverarbeitung verfügbar sein sollen und welche nicht. Dadurch kann differenziert werden, auf welche Funktionalitäten welche unterschiedlichen Schnittstellengeräte zugreifen können.Different codes can also be used to unlock or block different functions. For example, a code can indicate which functions should be available in the signal processing and which should not. This makes it possible to differentiate which functionalities can be accessed by which different interface devices.

Die Erfindung betrifft des Weiteren ein Host-Gerät sowie ein Schnittstellengerät, welche jeweils derart konfiguriert sind, dass sie ein Verfahren wie hierin beschrieben ausführen, insbesondere hinsichtlich des jeweiligen auf das Gerät entfallenden Teils des Verfahrens. Insbesondere können diese wie nachfolgen mit Bezug auf die Figuren beschrieben ausgeführt sein. Die Erfindung betrifft des Weiteren ein nichtflüchtiges computerlesbares Speichermedium, welches Programmcode enthält, bei dessen Ausführung ein Prozessor ein erfindungsgemäßes Verfahren ausführt. Bezüglich des Verfahrens kann auf alle hierin beschriebenen Ausführungen zurückgegriffen werden.The invention also relates to a host device and an interface device, which are each configured in such a way that they execute a method as described herein, in particular with regard to the respective part of the method attributable to the device. In particular, these can be designed as described below with reference to the figures. The invention also relates to a non-transitory computer-readable storage medium which contains program code which, when executed, causes a processor to carry out a method according to the invention. With regard to the method, all of the versions described herein can be used.

Weitere Merkmale und Vorteile wird der Fachmann den nachfolgend mit Bezug auf die beigefügte Zeichnung beschriebenen Ausführungsbeispielen entnehmen. Dabei zeigen:

  • 1: eine Anordnung aus einem Host-Gerät und zwei Schnittstellengeräten,
  • 2: eine alternative Anordnung,
  • 3: einen beispielhaften Signalfluss, und
  • 4: eine Anordnung aus Host-Gerät und Schnittstellengerät.
The person skilled in the art will find further features and advantages in the exemplary embodiments described below with reference to the attached drawing. show:
  • 1 : an arrangement of one host device and two interface devices,
  • 2 : an alternative arrangement,
  • 3 : an example signal flow, and
  • 4 : an arrangement of host device and interface device.

1 zeigt eine Anordnung aus einem ersten Schnittstellengerät 10, einem Host-Gerät 20 und einem zweiten Schnittstellengerät 30. Diese werden nun nachfolgend beschrieben. Es sei verstanden, dass es sich hierbei um eine rein schematische Darstellung handelt, welche im Wesentlichen zur Erläuterung funktionaler Zusammenhänge verwendet wird. 1 Fig. 12 shows an arrangement of a first interface device 10, a host device 20 and a second interface device 30. These will now be described below. It should be understood that this is a purely schematic representation, which is essentially used to explain functional relationships.

Es wird nun beispielhaft eine Ausführung zur Verarbeitung eines Audiosignals beschrieben.An embodiment for processing an audio signal will now be described by way of example.

Ein rauschbehafteter Ton 5 wird zunächst von einer Aufnahmeeinrichtung in Form eines Mikrofons 11 des ersten Schnittstellengeräts 10 aufgenommen. Das Mikrofon 11 erzeugt ein elektronisches Signal und leitet dieses an eine erste Vorverarbeitungseinheit 12 weiter. Die erste Vorverarbeitungseinheit 12 ist mit einem internen Puffer 13 verbunden, um eine Signalvorverarbeitung durchzuführen. Nach dieser Signalvorverarbeitung wird das Signal zu einer Sendeeinheit 14 des ersten Schnittstellengeräts 10 weitergeleitet, welche das Signal drahtlos aussendet. Hierzu kann beispielsweise Bluetooth verwendet werden.A noisy sound 5 is first recorded by a recording device in the form of a microphone 11 of the first interface device 10 . The microphone 11 generates an electronic signal and forwards it to a first pre-processing unit 12 . The first pre-processing unit 12 is connected to an internal buffer 13 in order to perform signal pre-processing. After this signal pre-processing, the signal is forwarded to a transmission unit 14 of the first interface device 10, which transmits the signal wirelessly. Bluetooth can be used for this, for example.

Das drahtlos ausgesendete Signal wird von einem Empfänger 21 des Host-Geräts 20 empfangen. Es wird weitergeleitet zu einer zweiten Vorverarbeitungseinheit 22 des Host-Geräts 20, welcher wiederum ein interner Puffer 23 zur Verfügung steht. Nach einer eventuellen Vorverarbeitung wird das Signal weitergeleitet an eine Signalverarbeitungseinrichtung 25, welche in dem Host-Gerät 20 implementiert ist. Diese weist von allen gezeigten Einheiten die größte Rechenleistung und die größten zugehörigen Ressourcen auf, wodurch insbesondere neuronale Netze oder andere Einheiten mit künstlicher Intelligenz implementierbar sind. Nach einer solchen Signalverarbeitung in der Signalverarbeitungseinrichtung 25 wird das Signal weitergeleitet zu einer Nachverarbeitungseinheit 26, welcher ebenfalls der bereits erwähnte interne Puffer 23 zur Verfügung steht. Nach einer eventuellen Nachverarbeitung gelangt das Signal zu einer Sendeeinheit 27 des Host-Geräts 20. Das Host-Gerät 20 sendet damit das Signal drahtlos weiter zu dem zweiten Schnittstellengerät 30, wo es von einer Empfangseinheit 31 empfangen wird. Das empfangene Signal wird intern weitergeleitet an eine dritte Vorverarbeitungseinheit 32 des zweiten Schnittstellengeräts 30, wo wiederum eine Vorverarbeitung durchgeführt werden kann. Hierzu greift die dritte Vorverarbeitungseinheit 32 auf einen internen Puffer 33 zurück. Anschließend gelangt das Signal zu einer Ausgabeeinrichtung in Form eines Lautsprechers 37, welcher ein akustisches Signal in Form von Schallwellen erzeugt, welches von einem Benutzer 6 hörbar ist.The wirelessly transmitted signal is received by a receiver 21 of the host device 20 . It is forwarded to a second preprocessing unit 22 of the host device 20, which in turn has an internal buffer 23 at its disposal. After any pre-processing, the signal is forwarded to a signal processing device 25 which is implemented in the host device 20 . Of all the units shown, this has the greatest computing power and the greatest associated resources, as a result of which neural networks or other units with artificial intelligence can be implemented in particular. After such a signal processing in the signal processing device 25, the signal is forwarded to a post-processing unit 26, to which the already mentioned internal buffer 23 is also available. After any post-processing, the signal reaches a transmission unit 27 of the host device 20. The host device 20 thus transmits the signal wirelessly to the second interface device 30, where it is received by a receiving unit 31. The received signal is forwarded internally to a third pre-processing unit 32 of the second interface device 30, where in turn pre-processing can be carried out. The third preprocessing unit 32 uses an internal buffer 33 for this purpose. The signal then reaches an output device in the form of a loudspeaker 37 which generates an acoustic signal in the form of sound waves which can be heard by a user 6 .

Bei der Ausführung von 1 wird zunächst davon ausgegangen, dass die Signalverarbeitung lediglich in der Signalverarbeitungseinrichtung 25 erfolgt. Die beiden Schnittstellengeräte 10, 30 können dabei kleine und leichte Geräte mit nur eingeschränkter Stromversorgung und Rechenkapazität sein, welche beispielsweise in Form eines Hörgeräts und eines separaten, am Körper getragenen Mikrofons ausgeführt sein können. Das Host-Gerät 20 kann beispielsweise ein Mobiltelefon sein und somit über eine erheblich größere Rechenleistung und eine bessere Stromversorgung verfügen.When executing 1 it is initially assumed that the signal processing only takes place in the signal processing device 25 . The two interface devices 10, 30 can be small and light devices with only limited power supply and computing capacity, which can be designed, for example, in the form of a hearing aid and a separate microphone worn on the body. The host device 20 can be a mobile phone, for example, and can therefore have significantly more computing power and a better power supply.

Auf einzelne gezeigte Komponenten, beispielsweise auf einige oder alle Verarbeitungseinheiten 12, 22, 26, 32, kann in alternativen Ausführungen verzichtet werden.Individual components shown, for example some or all of the processing units 12, 22, 26, 32, can be dispensed with in alternative embodiments.

2 zeigt eine Abwandlung der Ausführung von 1 dahingehend, dass die Signalverarbeitung insgesamt aufgeteilt erfolgt. Das von der Sendeeinheit 14 des ersten Schnittstellengeräts 10 ausgesandte Signal wird dabei auch von einem Empfänger 38 des zweiten Schnittstellengeräts 30 empfangen. Von diesem wird es an eine Kombinationseinrichtung 39 des zweiten Schnittstellengeräts 30 weitergeleitet. 2 shows a modification of the execution of 1 to the effect that the signal processing is carried out as a whole. The signal sent out by the transmitter unit 14 of the first interface device 10 is also received by a receiver 38 of the second interface device 30 . From there it is forwarded to a combination device 39 of the second interface device 30 .

Die Signalverarbeitungseinrichtung 25 verarbeitet in dieser Ausführung das Signal nicht vollständig weiter, sondern erzeugt mithilfe der ihr zur Verfügung stehenden Rechenleistung Signalveränderungsdaten. Diese dienen dazu, das Signal zu verändern. Über den bereits beschriebenen Signalpfad werden die Signalveränderungsdaten zu der Empfangseinheit 31 der zweiten Schnittstelleneinheit 30 und somit weiter zur Kombinationseinrichtung 39 geleitet. Die Kombinationseinrichtung 39 erhält somit sowohl das Signal wie auch die Signalveränderungsdaten.In this embodiment, the signal processing device 25 does not further process the signal completely, but generates signal change data with the aid of the computing power available to it. These serve to change the signal. The signal change data are routed via the signal path already described to the receiving unit 31 of the second interface unit 30 and thus further to the combination device 39 . The combination device 39 thus receives both the signal and the signal change data.

Die Kombinationseinrichtung 39 bearbeitet das Signal so, wie dies von den Signalveränderungsdaten vorgegeben wird. Die Signalveränderungsdaten können somit als Schablone verstanden werden, wodurch beispielsweise unerwünschte Frequenzen oder Rauschen ausgefiltert werden können. Entscheidend daran ist, dass der Hauptteil der hierfür erforderlichen Rechenarbeit in der Signalverarbeitungseinrichtung 25 erfolgt, welcher aufgrund ihrer Anordnung im Host-Gerät 20 wesentlich umfangreichere Rechenressourcen zur Verfügung stehen.The combiner 39 processes the signal as dictated by the signal change data. The signal change data can thus be understood as a template, as a result of which unwanted frequencies or noise can be filtered out, for example. The decisive factor here is that the main part of the computing work required for this takes place in the signal processing device 25, which, due to its arrangement in the host device 20, has significantly more extensive computing resources available.

3 zeigt einen typischen Signalfluss, wobei in diesem Fall eigenständige Bezugszeichen im Vergleich zu den 1 und 2 verwendet werden. 3 shows a typical signal flow, in this case independent reference numbers compared to the 1 and 2 be used.

Mit einer horizontalen durchgehenden Trennlinie ist dabei eine Einteilung in die Funktionalität der Schnittstellengeräte 100, 300 und eines Host-Geräts 200 eingezeichnet. Typischerweise ist das Host-Gerät 200 zumindest von einem der beiden Schnittstellengeräte 100, 300 separat. Zwischen den beiden Schnittstellengeräten 100, 300 ist eine gestrichelte Linie eingezeichnet, um anzuzeigen, dass diese beispielsweise auch zu einem Gerät zusammengefasst werden können. In einer Ausführung mit drei Geräten gehören die mit Bezugszeichen 110 bis 160 bezeichneten Elemente zum ersten Schnittstellengerät 100, die mit Bezugszeichen 210 bis 260 bezeichneten Elemente gehören zum Host-Gerät 200, und die mit Bezugszeichen 310 bis 390 bezeichneten Elemente gehören zum zweiten Schnittstellengerät 300. Wie erwähnt können sowohl die beiden Schnittstellengeräte 100, 300 zusammengefasst werden, es kann aber alternativ auch das erste Schnittstellengerät 100 mit dem Host-Gerät 200 zusammengefasst werden, oder es kann alternativ das zweite Schnittstellengerät 300 mit dem Host-Gerät 200 zusammengefasst werden.A division into the functionality of the interface devices 100, 300 and a host device 200 is drawn in with a horizontal continuous dividing line. Typically, the host device 200 is separate from at least one of the two interface devices 100,300. A dashed line is drawn between the two interface devices 100, 300 to indicate that they can also be combined into one device, for example. In an embodiment with three devices, the elements designated by reference numerals 110 to 160 belong to the first interface device 100, the elements denoted by reference numerals 210 to 260 belong to the host device 200, and the elements denoted by reference numerals 310 to 390 belong to the second interface device 300. As mentioned, both the two interface devices 100, 300 can be combined, but alternatively the first can also be combined Interface device 100 can be combined with the host device 200, or alternatively the second interface device 300 can be combined with the host device 200.

Ein hier beispielhaft genannter rauschbehafteter Klang 50 aus der Umgebung wird zunächst von einem Mikrofon 110 aufgenommen. Das Mikrofon 110 erzeugt ein elektronisch weiterverarbeitetes Signal daraus. Dieses gelangt zunächst in einen Puffer 120 und wird dann weitergeleitet zu einer Zeit-/Frequenz-Domänentransformation 130, welche beispielsweise eine diskrete Fourier-Transformation (DFT) durchführen kann.A noisy sound 50 from the environment, mentioned here as an example, is first picked up by a microphone 110 . The microphone 110 generates an electronically processed signal therefrom. This first reaches a buffer 120 and is then forwarded to a time/frequency domain transformation 130, which can carry out a discrete Fourier transformation (DFT), for example.

Das entsprechend bearbeitete Signal wird dann an eine Kompressionseinheit 140 weitergeleitet, wo es komprimiert wird. Das komprimierte Signal gelangt zu einem Puffer 150 und anschließend zu einer drahtlosen Kommunikationseinheit 160. Von dort aus wird es drahtlos übertragen, und von einer drahtlosen Kommunikationseinheit 210 des Host-Geräts 200 empfangen. Das Signal wird dann an eine Vorverarbeitungseinheit 220 weitergeleitet und gelangt anschließend zu einer Signalverarbeitungseinrichtung 230. Diese wendet künstliche Intelligenz auf das Signal an, beispielsweise in Form eines neuronalen Netzwerks, und erzeugt basierend darauf Signalveränderungsdaten. Diese Signalveränderungsdaten werden in Paketen an eine Nachverarbeitungseinheit 240 ausgegeben, wobei jedes Paket mit einem Zeitstempel versehen ist. Dadurch wird angezeigt, zu welcher Zeit in einer Signalzeit, welche im Signal dessen zeitliche Komponente anzeigt, das jeweilige Paket angewendet werden soll.The appropriately processed signal is then forwarded to a compression unit 140 where it is compressed. The compressed signal goes to a buffer 150 and then to a wireless communication unit 160. From there it is transmitted wirelessly and received by a wireless communication unit 210 of the host device 200. The signal is then forwarded to a pre-processing unit 220 and then reaches a signal processing device 230. This applies artificial intelligence to the signal, for example in the form of a neural network, and generates signal change data based thereon. This signal change data is output to a post-processing unit 240 in packets, each packet being time-stamped. This indicates at what time in a signal time, which shows the time component in the signal, that the respective package is to be applied.

Von der Nachverarbeitungseinheit 240 gelangen die Signalveränderungsdaten zu einer drahtlosen Kommunikationseinheit 250 und werden an eine empfangende drahtlose Kommunikationseinheit 310 des zweiten Schnittstellengeräts 300 gesendet. Dort gelangen die Signalveränderungsdaten zunächst an eine Dekompressionseinheit 320 und werden dekomprimiert. Durch die gezeigte Komprimierung und Dekomprimierung wird sowohl Bandbreite für die drahtlose Übertragung zu und vom Host-Gerät 200 eingespart wie auch Rechenkapazität im Host-Gerät 200 eingespart. Durch die Rückgängigmachung der Komprimierung können nachfolgende Schritte die Signalveränderungsdaten so weiterverarbeiten, als wäre keine Komprimierung erfolgt.The signal change data arrive from the post-processing unit 240 to a wireless communication unit 250 and are sent to a receiving wireless communication unit 310 of the second interface device 300 . There the signal change data first reaches a decompression unit 320 and is decompressed. The compression and decompression shown saves bandwidth for the wireless transmission to and from the host device 200 and also saves computing capacity in the host device 200 . Undoing the compression allows subsequent steps to process the signal change data as if no compression had occurred.

Das Signal wird von dem ersten Schnittstellengerät 100 wie gezeigt nicht nur an das Host-Gerät 200 gesendet, sondern auch an das zweite Schnittstellengerät 300. Dort gelangt es in einen Signalpuffer 340. Diese Übertragung kann drahtlos erfolgen, wenn die beiden Schnittstellengeräte 100, 300 getrennt voneinander ausgeführt sind. Sind sie als ein einziges Schnittstellengerät ausgeführt, kann diese Übertragung beispielsweise auch in einer drahtgebundenen Form erfolgen.As shown, the signal is sent from the first interface device 100 not only to the host device 200, but also to the second interface device 300. There it arrives in a signal buffer 340. This transmission can take place wirelessly if the two interface devices 100, 300 are separated are executed from each other. If they are designed as a single interface device, this transmission can also take place in a wired form, for example.

Das Signal wird jedenfalls von dem Signalpuffer 340 an eine Kombinationseinrichtung 350 weitergeleitet. Die weiter oben bereits erwähnten Pakete von Signalveränderungsdaten gelangen zunächst in eine Latenzüberprüfung 330. Ergibt sich dabei, dass der Zeitstempel eines Pakets zu einer aktuellen Signalzeit passt, wird das Paket auch an die Kombinationseinrichtung 350 weitergeleitet. Die Kombinationseinrichtung 350 erzeugt aus dem Signal und den Signalveränderungsdaten ein Ausgangssignal, welches an einen Ausgangspuffer 380 weitergeleitet wird. Durch Anwendung der Signalveränderungsdaten kann beispielsweise ein Rauschen entfernt werden, wobei die Signalveränderungsdaten als Schablone zum Entfernen des Rauschens aus dem Signal wirken.In any case, the signal is forwarded from the signal buffer 340 to a combination device 350 . The packets of signal change data already mentioned above first reach a latency check 330 . If the result is that the time stamp of a packet matches a current signal time, the packet is also forwarded to the combination device 350 . The combination device 350 generates an output signal from the signal and the signal change data, which output signal is forwarded to an output buffer 380 . For example, noise can be removed by applying the signal change data, with the signal change data acting as a template for removing noise from the signal.

Entspricht der Zeitstempel eines Pakets nicht der aktuellen Signalzeit, so wird in einem Entscheidungsblock 360 überprüft, ob das Paket zu einer späteren Signalzeit gehört, es also später noch verwendet werden kann. In diesem Fall wird es später, also zur richtigen Zeit, an die Kombinationseinrichtung 350 geleitet. Ist dies nicht der Fall, gehört das Paket also zu einer Signalzeit, welche bereits vergangen ist, so wird das Paket in einem Block 362 verworfen.If the time stamp of a packet does not correspond to the current signal time, a decision block 360 checks whether the packet belongs to a later signal time, ie whether it can still be used later. In this case, it is forwarded to the combination device 350 later, ie at the right time. If this is not the case, ie the packet belongs to a signal time which has already passed, the packet is discarded in a block 362.

Des Weiteren wird bei der Feststellung, dass ein Paket oder auch eine vorgegebene Mindestanzahl von Paketen zu spät angekommen ist, ein Beschleunigungssignal 370 erzeugt, welches an eine Empfangseinheit 260 des Host-Geräts 200 gesendet wird. Dadurch weiß das Host-Gerät 200, dass es die Signalveränderungsdaten zu langsam erzeugt und kann die Erzeugung beschleunigen, beispielsweise indem effizientere Algorithmen verwendet werden oder indem der Signalverarbeitungseinrichtung 230 höhere Rechenressourcen zugewiesen werden.Furthermore, when it is determined that a packet or also a predetermined minimum number of packets has arrived too late, an acceleration signal 370 is generated, which is sent to a receiving unit 260 of the host device 200 . As a result, the host device 200 knows that it is generating the signal change data too slowly and can speed up the generation, for example by using more efficient algorithms or by allocating more computational resources to the signal processing device 230 .

Von dem Ausgangspuffer 380 gelangt das Ausgangssignal zu einem Lautsprecher 390, wo ein Schallsignal 70 erzeugt wird. Dieses ist von einem Benutzer wahrnehmbar und ist beispielsweise so aufbereitet, dass Hintergrundrauschen entfernt oder zumindest deutlich verringert ist.From the output buffer 380 the output signal goes to a loudspeaker 390 where an acoustic signal 70 is generated. This can be perceived by a user and is processed, for example, in such a way that background noise is removed or at least significantly reduced.

4 zeigt rein schematisch eine Anordnung aus Host-Gerät 20 und einem Schnittstellengerät 10, wobei das Schnittstellengerät 10 hier sowohl für die Aufnahme wie auch für die Wiedergabe eines Schallsignals ausgebildet ist. Das Schnittstellengerät 10 erfüllt somit im Wesentlichen die Funktionen der beiden in 2 mit den Bezugszeichen 10 und 30 bezeichneten Schnittstellengeräte. 4 shows a purely schematic arrangement of a host device 20 and an interface device 10, the interface device 10 being designed here both for recording and for reproducing a sound signal. The interface device 10 thus essentially fulfills the functions of the two 2 interface devices denoted by reference numerals 10 and 30.

Bei dem Schnittstellengerät 10 handelt es sich vorliegend um ein Hörgerät. Dieses nimmt folglich einen Ton 5 auf und sendet ihn über eine bidirektionale Kommunikation, welche mit Pfeilen eingezeichnet ist, an das Host-Gerät 20. Das Host-Gerät 20 ist vorliegend als Mobiltelefon ausgeführt. Dort werden wie bereits weiter oben beschrieben Signalveränderungsdaten erzeugt. Diese werden über die bidirektionale Kommunikation an das Schnittstellengerät 10 gesendet und dort in einer Kombinationseinrichtung auf das Signal angewendet. Dementsprechend wird ein Ausgangssignal erzeugt, welches als Schallwelle an einen Benutzer 6 ausgegeben wird.In the present case, the interface device 10 is a hearing aid. This consequently records a tone 5 and sends it to the host device 20 via bidirectional communication, which is indicated by arrows. The host device 20 is in the present case designed as a mobile telephone. Signal change data are generated there, as already described above. These are sent to the interface device 10 via the bidirectional communication and applied to the signal there in a combination device. Accordingly, an output signal is generated, which is output to a user 6 as a sound wave.

Durch diese Ausführung kann die im Vergleich zum Hörgerät wesentlich höhere Rechenleistung des Mobiltelefons genutzt werden, um die Signalveränderungsdaten zu erzeugen, welche das Signal anschließend in einem wesentlich weniger rechenintensiven, im Hörgerät ausführbaren Vorgang so beeinflussen, dass beispielsweise Rauschen aus dem Signal entfernt wird.With this design, the much higher computing power of the mobile phone compared to the hearing aid can be used to generate the signal change data, which then influence the signal in a much less computationally intensive process that can be carried out in the hearing aid in such a way that, for example, noise is removed from the signal.

Erwähnte Schritte des erfindungsgemäßen Verfahrens können in der angegebenen Reihenfolge ausgeführt werden. Sie können jedoch auch in einer anderen Reihenfolge ausgeführt werden, soweit dies technisch sinnvoll ist. Das erfindungsgemäße Verfahren kann in einer seiner Ausführungen, beispielsweise mit einer bestimmten Zusammenstellung von Schritten, in der Weise ausgeführt werden, dass keine weiteren Schritte ausgeführt werden. Es können jedoch grundsätzlich auch weitere Schritte ausgeführt werden, auch solche welche nicht erwähnt sind.Mentioned steps of the method according to the invention can be carried out in the order given. However, they can also be executed in a different order, as far as this is technically reasonable. In one of its implementations, for example with a specific combination of steps, the method according to the invention can be carried out in such a way that no further steps are carried out. In principle, however, further steps can also be carried out, including those which are not mentioned.

Es sei darauf hingewiesen, dass in den Ansprüchen und in der Beschreibung Merkmale in Kombination beschrieben sein können, beispielsweise um das Verständnis zu erleichtern, obwohl diese auch separat voneinander verwendet werden können. Der Fachmann erkennt, dass solche Merkmale auch unabhängig voneinander mit anderen Merkmalen oder Merkmalskombinationen kombiniert werden können.It should be noted that in the claims and in the description features can be described in combination, for example to facilitate understanding, although they can also be used separately. The person skilled in the art recognizes that such features can also be combined independently of one another with other features or combinations of features.

Rückbezüge in Unteransprüchen können bevorzugte Kombinationen der jeweiligen Merkmale kennzeichnen, schließen jedoch andere Merkmalskombinationen nicht aus.Back-references in dependent claims can identify preferred combinations of the respective features, but do not exclude other combinations of features.

Claims (22)

Verfahren zur Signalverarbeitung, wobei das Verfahren folgende Schritte aufweist: - Aufnehmen eines Signals mittels einer Aufnahmeeinrichtung (11), - Weiterleiten des Signals von der Aufnahmeeinrichtung (11) zumindest an eine Signalverarbeitungseinrichtung (25) und eine Kombinationseinrichtung (39), - Erzeugen von Signalveränderungsdaten basierend auf dem Signal in der Signalverarbeitungseinrichtung (25), - Weiterleiten der Signalveränderungsdaten von der Signalverarbeitungseinrichtung (25) an die Kombinationseinrichtung (39), - Erzeugen eines Ausgangssignals durch Anwenden der Signalveränderungsdaten auf das Signal mittels der Kombinationseinrichtung (39), - Weiterleiten des Ausgangssignals an eine Ausgabeeinrichtung (37), und - Ausgeben des Ausgangssignals mittels der Ausgabeeinrichtung (37), - wobei die Signalverarbeitungseinrichtung (25) in einem Hostgerät (20) angeordnet ist, und mindestens die Aufnahmeeinrichtung (11) oder die Ausgabeeinrichtung (37) in mindestens einem Schnittstellengerät (10, 30) angeordnet ist, wobei jedes Schnittstellengerät (10, 30) separat zum Hostgerät (20) handhabbar ist und mit dem Hostgerät (20) ausschließlich drahtlos kommuniziert.Method for signal processing, the method having the following steps: - recording a signal by means of a recording device (11), - Forwarding the signal from the recording device (11) at least to a signal processing device (25) and a combination device (39), - Generating signal change data based on the signal in the signal processing device (25), - forwarding the signal change data from the signal processing device (25) to the combination device (39), - generating an output signal by applying the signal change data to the signal by means of the combination device (39), - forwarding the output signal to an output device (37), and - outputting the output signal by means of the output device (37), - wherein the signal processing device (25) is arranged in a host device (20), and at least the receiving device (11) or the output device (37) is arranged in at least one interface device (10, 30), each interface device (10, 30) being separate to the host device (20) is manageable and communicates exclusively wirelessly with the host device (20). Verfahren nach Anspruch 1, - wobei die Signalveränderungsdaten mittels eines neuronalen Netzes und/oder mittels künstlicher Intelligenz in der Signalverarbeitungseinrichtung (25) erzeugt werden.procedure after claim 1 , - the signal change data being generated by means of a neural network and/or by means of artificial intelligence in the signal processing device (25). Verfahren nach einem der vorhergehenden Ansprüche, - wobei die Kombinationseinrichtung (39) in einem Schnittstellengerät (10, 30) angeordnet ist.Method according to one of the preceding claims, - wherein the combination device (39) is arranged in an interface device (10, 30). Verfahren nach Anspruch 3, - wobei in dem Schnittstellengerät (10, 30), in welchem die Kombinationseinrichtung (39) angeordnet ist, auch die Ausgabeeinrichtung (37) angeordnet ist.procedure after claim 3 - the output device (37) also being arranged in the interface device (10, 30) in which the combination device (39) is arranged. Verfahren nach einem der vorhergehenden Ansprüche, - wobei die Signalveränderungsdaten in zeitlich aufeinanderfolgenden Paketen erzeugt werden, wobei jedem Paket eine Paketzeit zugeordnet ist.Method according to one of the preceding claims, - wherein the signal change data are generated in chronologically consecutive packets, each packet being assigned a packet time. Verfahren nach Anspruch 5, - wobei vor dem Anwenden jedes Pakets die Paketzeit mit einer Signalzeit des Signals verglichen wird.procedure after claim 5 , - where before applying each packet, the packet time is compared to a signal time of the signal. Verfahren nach Anspruch 6, - wobei das Paket nur angewendet wird, wenn die Paketzeit der Signalzeit entspricht.procedure after claim 6 , - where the packet is applied only if the packet time equals the signal time. Verfahren nach einem der Ansprüche 6 oder 7, - wobei ein Paket, dessen Paketzeit zu einer späteren Signalzeit entspricht, zwischengespeichert und später bei der Signalzeit angewendet wird.Procedure according to one of Claims 6 or 7 , - where a packet whose packet time corresponds to a later signal time is buffered and applied later at the signal time. Verfahren nach einem der Ansprüche 6 bis 8, - wobei ansprechend darauf, dass bei mindestens einem Paket oder bei mindestens einer vorgegebenen Anzahl von Paketen die Paketzeit nicht der Signalzeit entspricht, ein Beschleunigungssignal an die Signalverarbeitungseinrichtung (25) gesendet wird.Procedure according to one of Claims 6 until 8th , - in response to the fact that the packet time does not correspond to the signal time for at least one packet or for at least a predetermined number of packets, an acceleration signal is sent to the signal processing device (25). Verfahren nach Anspruch 9, - wobei die Signalverarbeitungseinrichtung (25) ansprechend auf den Empfang eines Beschleunigungssignals die Erzeugung der Signalveränderungsdaten beschleunigt und/oder ein schnelleres Verfahren zur Erzeugung der Signalveränderungsdaten anwendet und/oder mehr Datenverarbeitungsressourcen allokiert.procedure after claim 9 , - wherein the signal processing device (25) accelerates the generation of the signal change data in response to the receipt of an acceleration signal and/or uses a faster method for generating the signal change data and/or allocates more data processing resources. Verfahren nach einem der vorhergehenden Ansprüche, - wobei die Aufnahmeeinrichtung (11) in dem gleichen Schnittstellengerät (10, 30) wie die Kombinationseinrichtung (39) angeordnet ist, und/oder - wobei die Aufnahmeeinrichtung (11) in dem gleichen Schnittstellengerät (10, 30) wie die Ausgabeeinrichtung (37) angeordnet ist.Method according to one of the preceding claims, - wherein the receiving device (11) is arranged in the same interface device (10, 30) as the combination device (39), and/or - wherein the receiving device (11) is arranged in the same interface device (10, 30) as the output device (37). Verfahren nach einem der vorhergehenden Ansprüche, - wobei das Hostgerät (20) ein Mobiltelefon oder ein Computer ist.Method according to one of the preceding claims, - wherein the host device (20) is a mobile phone or a computer. Verfahren nach einem der vorhergehenden Ansprüche, - wobei das Schnittstellengerät (10, 30) ein Hörgerät, eine Mikrofoneinheit, eine Lautsprechereinheit, eine Mikrofon- und Lautsprechereinheit, eine Brille, eine Kameraeinheit, eine Displayeinheit, eine Kamera- und Displayeinheit, oder ein Implantat zur Messung und/oder Induzierung neurologischer Aktivität ist.Method according to one of the preceding claims, - wherein the interface device (10, 30) is a hearing aid, a microphone unit, a loudspeaker unit, a microphone and loudspeaker unit, glasses, a camera unit, a display unit, a camera and display unit, or an implant for measuring and/or inducing neurological activity is. Verfahren nach einem der vorhergehenden Ansprüche, - wobei das Signal vor einer drahtlosen Übertragung zur Signalverarbeitungseinrichtung (25) komprimiert wird.Method according to one of the preceding claims, - wherein the signal is compressed prior to wireless transmission to the signal processing device (25). Verfahren nach Anspruch 14, - wobei das Signal vor der Signalverarbeitungseinrichtung (25) dekomprimiert wird, und/oder - wobei die Signalveränderungsdaten vor der Kombinationseinrichtung (39) dekomprimiert werden.procedure after Claim 14 , - the signal being decompressed before the signal processing device (25), and/or - the signal change data being decompressed before the combination device (39). Verfahren nach einem der Ansprüche 14 oder 15, - wobei die Signalverarbeitungseinrichtung (25) das komprimierte Signal verarbeitet, und/oder - wobei die Kombinationseinrichtung (39) komprimierte Signalveränderungsdaten verarbeitet.Procedure according to one of Claims 14 or 15 , - wherein the signal processing device (25) processes the compressed signal, and/or - wherein the combining device (39) processes compressed signal change data. Verfahren nach einem der vorhergehenden Ansprüche, - wobei das Weiterleiten des Signals von der Aufnahmeeinrichtung (11) zumindest an die Signalverarbeitungseinrichtung (25) und/oder die Kombinationseinrichtung (39) durch drahtlose Kommunikation erfolgt; und/oder - wobei das Weiterleiten des Ausgangssignals an eine Ausgabeeinrichtung (37) durch drahtlose Kommunikation erfolgt; und/oder - wobei das Weiterleiten der Signalveränderungsdaten an die Kombinationseinrichtung (39) durch drahtlose Kommunikation erfolgt und/oder - wobei das Senden eines Beschleunigungssignals an die Signalverarbeitungseinrichtung (25) durch drahtlose Kommunikation erfolgt.Method according to one of the preceding claims, - wherein the signal is forwarded from the receiving device (11) at least to the signal processing device (25) and/or the combination device (39) by wireless communication; and or - wherein the forwarding of the output signal to an output device (37) takes place by wireless communication; and or - the signal change data being forwarded to the combination device (39) by wireless communication and/or - wherein the transmission of an acceleration signal to the signal processing device (25) takes place by wireless communication. Verfahren nach einem der vorhergehenden Ansprüche, - wobei das Signal ein Audiosignal ist.Method according to one of the preceding claims, - wherein the signal is an audio signal. Verfahren nach Anspruch 18, - wobei die Signalveränderungsdaten in der Kombinationseinrichtung (39) eine Abschwächung, eine Verstärkung oder ein Ausblenden vorgegebener Frequenzen oder Frequenzbänder bewirken, und/oder - wobei die Signalveränderungsdaten in der Kombinationseinrichtung (39) eine Rauschunterdrückung bewirken.procedure after Claim 18 , - the signal change data in the combination device (39) bringing about a weakening, amplification or masking out of predetermined frequencies or frequency bands, and/or - the signal change data in the combination device (39) effecting noise suppression. Verfahren nach einem der vorhergehenden Ansprüche, - wobei das Signal ein Videosignal oder ein Bildsignal ist.Method according to one of the preceding claims, - wherein the signal is a video signal or an image signal. Verfahren nach Anspruch 20, - wobei die Signalveränderungsdaten in der Kombinationseinrichtung (39) eine Hervorhebung, Umrandung, Maskierung oder ein Ausblenden von Objekten bewirken.procedure after claim 20 , - the signal change data in the combination device (39) causing objects to be highlighted, bordered, masked or hidden. Verfahren nach einem der vorhergehenden Ansprüche, welches ferner folgende Schritte aufweist: - Übertragen eines in einem der Schnittstellengeräte (10, 30) gespeicherten Codes an das Hostgerät (20), - Überprüfen einer Gültigkeit des Codes, und - Aktivieren der Signalverarbeitungseinrichtung (25) nur dann, wenn der Code gültig ist.Method according to one of the preceding claims, further comprising the steps of: - transmitting a code stored in one of the interface devices (10, 30) to the host device (20), - checking a validity of the code, and - Activate the signal processing device (25) only if the code is valid.
DE102021103769.7A 2021-02-17 2021-02-17 Methods for signal processing Active DE102021103769B4 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
DE102021103769.7A DE102021103769B4 (en) 2021-02-17 2021-02-17 Methods for signal processing
PCT/EP2022/053859 WO2022175349A2 (en) 2021-02-17 2022-02-16 Method and arrangement for signal processing

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102021103769.7A DE102021103769B4 (en) 2021-02-17 2021-02-17 Methods for signal processing

Publications (2)

Publication Number Publication Date
DE102021103769A1 DE102021103769A1 (en) 2022-08-18
DE102021103769B4 true DE102021103769B4 (en) 2022-10-27

Family

ID=80780472

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102021103769.7A Active DE102021103769B4 (en) 2021-02-17 2021-02-17 Methods for signal processing

Country Status (2)

Country Link
DE (1) DE102021103769B4 (en)
WO (1) WO2022175349A2 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102007010601A1 (en) 2007-03-05 2008-09-25 Siemens Audiologische Technik Gmbh Hearing system with distributed signal processing and corresponding method
US20170295439A1 (en) 2016-04-06 2017-10-12 Buye Xu Hearing device with neural network-based microphone signal processing
WO2019043246A1 (en) 2017-09-04 2019-03-07 Kemmelmeyer Karl Juergen Multi-purpose high-power hearing aid having a mobile terminal, in particular a smartphone
US20190253816A1 (en) 2018-02-09 2019-08-15 Widex A/S Communication channel between a remote control and a hearing assistive device
DE102019200956A1 (en) 2019-01-25 2020-07-30 Sonova Ag Signal processing device, system and method for processing audio signals

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013102370A (en) * 2011-11-09 2013-05-23 Sony Corp Headphone device, terminal device, information transmission method, program, and headphone system
EP2936834A1 (en) * 2012-12-20 2015-10-28 Widex A/S Hearing aid and a method for improving speech intelligibility of an audio signal
EP3930348A3 (en) * 2020-06-25 2022-03-23 Oticon A/s A hearing system comprising a hearing aid and a processing device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102007010601A1 (en) 2007-03-05 2008-09-25 Siemens Audiologische Technik Gmbh Hearing system with distributed signal processing and corresponding method
US20170295439A1 (en) 2016-04-06 2017-10-12 Buye Xu Hearing device with neural network-based microphone signal processing
WO2019043246A1 (en) 2017-09-04 2019-03-07 Kemmelmeyer Karl Juergen Multi-purpose high-power hearing aid having a mobile terminal, in particular a smartphone
US20190253816A1 (en) 2018-02-09 2019-08-15 Widex A/S Communication channel between a remote control and a hearing assistive device
DE102019200956A1 (en) 2019-01-25 2020-07-30 Sonova Ag Signal processing device, system and method for processing audio signals

Also Published As

Publication number Publication date
DE102021103769A1 (en) 2022-08-18
WO2022175349A3 (en) 2022-10-13
WO2022175349A2 (en) 2022-08-25

Similar Documents

Publication Publication Date Title
EP2180726B2 (en) Sound localization in binaural hearing aids
EP3451705B1 (en) Method and apparatus for the rapid detection of own voice
DE102019206743A1 (en) Hearing aid system and method for processing audio signals
DE102018216667B3 (en) Process for processing microphone signals in a hearing system and hearing system
DE102019220408A1 (en) Procedure for fitting a hearing instrument and associated hearing system
DE102010041653A1 (en) Method and apparatus for frequency compression with selective frequency shift
DE102011006129B4 (en) Hearing device with feedback suppression device and method for operating the hearing device
EP3355592B1 (en) Method for operating a binaural hearing aid system
EP1406469B1 (en) Feedback compensator in acoustic amplifying systems, hearing-aid, method for feedback compensation and use of said method in hearing-aids
EP2276272B1 (en) Hearing aid and method for suppressing feedback
DE102021103769B4 (en) Methods for signal processing
DE102010041643B4 (en) Hearing aid for frequency compression
EP1962554A2 (en) Hearing device with interference signal separation and corresponding method
DE202019107201U1 (en) Binaural hearing aid for improved spatial hearing perception
DE102010041435A1 (en) Method for reconstructing a speech signal and hearing device
EP3048813B1 (en) Method and device for suppressing noise based on inter-subband correlation
EP2190218B1 (en) Filter bank system with specific stop-band attenuation for a hearing device
DE102020201615B3 (en) Hearing system with at least one hearing instrument worn in or on the user's ear and a method for operating such a hearing system
DE102007010601A1 (en) Hearing system with distributed signal processing and corresponding method
DE102016206327A1 (en) A method for transmitting an audio signal from a transmitter to a receiver
DE102020207585A1 (en) Hearing system with at least one hearing instrument worn on the head of the user and a method for operating such a hearing system
EP3876556A1 (en) Binaural hearing aid with two hearing instrument worn in or on the ear of the user and method for operating such a hearing system
EP4243448A1 (en) Method for operating a hearing aid
DE102021210098A1 (en) Method of operating a hearing aid
DE102021205251A1 (en) Method and device for frequency-selective processing of an audio signal with low latency

Legal Events

Date Code Title Description
R163 Identified publications notified
R012 Request for examination validly filed
R018 Grant decision by examination section/examining division
R081 Change of applicant/patentee

Owner name: CLIR TECHNOLOGIES GMBH, AT

Free format text: FORMER OWNER: KRASSNITZER, ANDREAS, GRAZ, AT

R020 Patent grant now final
R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee
R409 Internal rectification of the legal status completed