DE102017117570A1 - Method, system, user device and computer program for generating an auditory message in a stationary home - Google Patents
Method, system, user device and computer program for generating an auditory message in a stationary home Download PDFInfo
- Publication number
- DE102017117570A1 DE102017117570A1 DE102017117570.9A DE102017117570A DE102017117570A1 DE 102017117570 A1 DE102017117570 A1 DE 102017117570A1 DE 102017117570 A DE102017117570 A DE 102017117570A DE 102017117570 A1 DE102017117570 A1 DE 102017117570A1
- Authority
- DE
- Germany
- Prior art keywords
- communication
- parameter
- auditory
- message
- parameters
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
Abstract
In der Erfindung wird ein oder mehrere Parameter (PK1, PK2, ... PK8) einer Kommunikation K-a, K-b, K-c, K-a' innerhalb des stationären Wohnraums 1 an der zumindest zwei Personen beteiligt sind ermittelt, insbesondere prädiziert, und ein oder mehrere Parameter (PAM1, PAM2, ...) zumindest einer auditiven Meldung AM1, AM2, AM3 die in einem stationären Wohnraum 1 ausgegeben wird, abhängig von einem oder mehreren Parameter (PK1, PK2, ... PK8) der Kommunikation K-a, K-b, K-c, K-a' bestimmt oder anpasst.
Dabei können die Parameter (PAM1, PAM2, ...) zumindest einer auditiven Meldung AM1, AM2, AM3 oder die korrespondierenden auf Basis der auditiven Meldung AM1, AM2, AM3 erzeugten Schallwellen im stationären Wohnraum 1 abhängig von den ermittelten, insbesondere prädizierten Parameter (PK1, PK2, ... PK8) der besagten Kommunikation K-a, K-b, K-c, K-a' verändert, insbesondere dynamisch gesteuert werden.
In the invention, one or more parameters (PK1, PK2,... PK8) of a communication Ka, Kb, Kc, Ka 'within the stationary living space 1 in which at least two persons are involved are determined, in particular predicated, and one or more parameters (PAM1, PAM2, ...) at least one auditory message AM1, AM2, AM3 which is output in a stationary housing 1, depending on one or more parameters (PK1, PK2, ... PK8) of the communication Ka, Kb, Kc 'Ka' determines or adjusts.
In this case, the parameters (PAM1, PAM2,...) Of at least one auditory message AM1, AM2, AM3 or the corresponding sound waves generated on the basis of the auditory message AM1, AM2, AM3 in the stationary housing 1 can be dependent on the determined, in particular predicated parameters (FIG. PK1, PK2, ... PK8) of the said communication Ka, Kb, Kc, Ka 'changed, in particular dynamically controlled.
Description
Die Erfindung betrifft ein Verfahren, ein System und ein korrespondierendes Computerprogramm zum Erzeugen einer auditiven Meldung in einem stationären Wohnraum. Des Weiteren betrifft die Erfindung ein entsprechend eingerichtetes Anwendergerät. Das Anwendergerät kann dabei zum Betrieb als ein Teil des besagten Systems ausgestaltet sein.The invention relates to a method, a system and a corresponding computer program for generating an auditory message in a stationary housing. Furthermore, the invention relates to a correspondingly configured user device. The user device can be configured for operation as part of the said system.
Aus dem Stand der Technik ist eine Vielzahl diverser Sprachsteuerungsapplikationen bekannt. Diese können beispielsweise zur Steuerung von einer Einrichtung eines Hauses dienen. Auch sind Audiosysteme bekannt, die einen Zugriff und die Wiedergabe von Audiosignalen, z.B. von Streaming-Inhalten aus dem Internet ermöglichen. Ebenso kann beispielsweise ein Sound zu einem Video, eine Fernsehsendung, zu einem Videospiel, über ein Audiosystem ausgegeben werden. Ein entsprechendes Audiosignal des Audiosystems, z.B. eines Heimkinosystems kann ein Raumklangsignal sein, das beispielsweise fünf bis neun Kanäle umfasst. Üblicherweise besteht ein Bedürfnis der Personen, speziell im häuslichen Bereich miteinander zu kommunizieren. Eine solche, insbesondere sprachliche Kommunikation kann für die betreffenden Personen oftmals eine sehr hohe Bedeutung haben. Diese kann die aktuelle Relevanz der über das Audiosystem wiedergegebenen Audiosignale oder von Tönen einer Sprachsteuerungsapplikation zeitweise wesentlich übersteigen. Dabei können die Personen im Raum, z.B. Mitglieder einer Familie mit 2-4 Generationen, sehr unterschiedliche, teils sehr widersprüchliche Bedürfnisse haben, z.B. mit Blick auf die eigene aktive sprachliche Äußerungen, mit Blick auf das akustische Empfangen der Äußerungen (Kommunikationsbotschaften) anderer Personen oder zuhören zu bestimmten Audiosignalen oder sonstigen akustischen Inhalten.A variety of various voice control applications are known in the art. These can serve, for example, for controlling a device of a house. Also known are audio systems that allow access and playback of audio signals, e.g. streaming content from the Internet. Also, for example, a sound may be output to a video, a television program, a video game, an audio system. A corresponding audio signal of the audio system, e.g. A home theater system may be a surround sound signal comprising, for example, five to nine channels. There is usually a need for people to communicate with each other, especially in the home. Such, in particular linguistic communication can often have a very high importance for the persons concerned. This can significantly exceed the current relevance of the audio signals reproduced via the audio system or of sounds of a voice control application at times. The persons in the room, e.g. Members of a family of 2-4 generations, have very different, partly very contradictory needs, e.g. with regard to their own active linguistic utterances, with a view to the acoustic reception of the utterances (communication messages) of other persons or listening to certain audio signals or other acoustic content.
Die Aufgabe der Erfindung ist es, ein Verfahren, ein System, ein mobiles Anwendergerät und ein korrespondierendes Computerprogramm zum Erzeugen, Verändern, insbesondere zum Anpassen einer in einem stationären Wohnraum auszugebender auditiver Meldung aufzuzeigen. Insbesondere ist es eine Aufgabe der Erfindung, ein verbessertes Verfahren zum Betrieb einer Sprachsteuerungsapplikation bzw. eines virtuellen Sprachassistenten in einem stationären Wohnraum aufzuzeigen. Auch ist es die Aufgabe der Erfindung eine verbesserte Kommunikation in einem stationären Wohnraum zu ermöglichen, vor allem unter einem möglichst geringen Verzicht auf auditive Meldungen oder weitere auszugebende Audiosignale.The object of the invention is to disclose a method, a system, a mobile user device and a corresponding computer program for generating, modifying, in particular for adapting an auditory message to be output in a stationary housing. In particular, it is an object of the invention to provide an improved method for operating a voice control application or a virtual voice assistant in a stationary living space. It is also the object of the invention to enable improved communication in a stationary living room, especially with the least possible renunciation of auditory messages or other audio signals to be output.
Die Aufgabe wird gelöst durch die Merkmale der unabhängigen Patentansprüche. Vorteilhafte Ausgestaltungen sind in den Unteransprüchen gekennzeichnet.The object is solved by the features of the independent claims. Advantageous embodiments are characterized in the subclaims.
Die Erfindung zeichnet sich gemäß eines ersten Aspekts durch ein Verfahren zum Erzeugen einer auditiven Meldung in einem stationären Wohnraum. Das Verfahren umfasst das Ermitteln, insbesondere Prädizieren, eines oder mehrerer Parameters einer Kommunikation innerhalb eines stationären Wohnraums an der zumindest zwei Personen beteiligt sind, und das Bestimmen oder Anpassen eines Parameters zumindest einer (auszugebenden) auditiven Meldung im stationären Wohnraum, abhängig von dem einem oder mehreren ermittelten Parametern der Kommunikation.According to a first aspect, the invention is characterized by a method for generating an auditory message in a stationary home. The method comprises determining, in particular predicting, one or more parameters of a communication within a stationary living space in which at least two persons are involved, and determining or adjusting a parameter of at least one auditory message (to be output) in the stationary living space, depending on the one or more several determined parameters of the communication.
Alternativ, bevorzugt zusätzlich zum Bestimmen des Parameters der zumindest einen auditiven Meldung, kann ein Parameter zumindest eines weiteren Audiosignals im stationären Wohnraum bestimmt, insbesondere angepasst werden. Bei dem weiteren auszugebenen Audiosignal kann es um ein Audiosignal handeln, welches gerade in einem stationäre Wohnraum ausgegeben wird, zur Ausgabe geplant ist oder zu einer Menge vorausgewählter (etwa: freigeschalteter, im Rahmen eines Accounts zugänglicher) Audiosignale gehört die sich zur Ausgabe eignen. Dieses Audiosignals wird nachstehend als „das weitere Audiosignal“ bezeichnet. Das Verändern, insbesondere Anpassen des weiteren Audiosignals wird im Verfahren insbesondere auf einen (bestimmten, zeitlich bzw. inhaltlich betreffenden) Abschnitt und/oder Kanal des Audiosignals angewandt. Bevorzugt kann es sich bei dem zumindest einen weiteren Audiosignal um einen Abschnitt des Audiosignals handeln, der im selben gewissen (kurzen) Zeitintervall wie die besagte auditive Meldung ausgegeben wird, ausgegeben werden kann oder soll. Insbesondere handelt es sich bei dem Audiosignal um ein auszugebendes Audiosignal welches gerade ausgegeben wird oder zur Ausgabe bestimmt ist.Alternatively, preferably in addition to determining the parameter of the at least one auditory message, a parameter of at least one further audio signal in the stationary living space can be determined, in particular adapted. The further audio signal to be output can be an audio signal which is currently being output in a stationary housing, is planned for output or belongs to a large number of preselected (eg: unlocked, accessible in the context of an account) audio signals which are suitable for output. This audio signal is hereinafter referred to as "the further audio signal". In the method, the modification, in particular adaptation of the further audio signal, is applied in particular to a (specific, temporally or in terms of content) section and / or channel of the audio signal. The at least one further audio signal may preferably be a section of the audio signal which can or should be output in the same certain (short) time interval as the said auditory message. In particular, the audio signal is an audio signal to be output which is currently being output or intended for output.
Bei der Kommunikation von handelt es sich insbesondere um eine sprachliche Kommunikation und/oder eine nonverbale Kommunikation, z.B. sogenannte Körpersprache, Gestik, Mimik, etc. Insbesondere handelt es sich bei der Kommunikation um ein Gespräch der besagten zumindest zwei Personen im Wohnraum. Die besagte Kommunikation betrifft die zumindest zwei Personen insbesondere derart, dass zumindest eine Person zumindest zeitweise ein Absender einer Kommunikationsbotschaft („Sprecher“), ein Empfänger der Kommunikationsbotschaft („Zuhörer“) oder abwechselnd oder etwa gleichzeitig ein Absender und Empfänger der Kommunikationsbotschaften („Sprecher und Zuhörer“) innerhalb der besagten Kommunikation ist. Mit anderen Worten handelt es sich bei einem Abschnitt der Kommunikation insbesondere um eine oder mehrere unmittelbar ausgetauschte Kommunikationsbotschaften zwischen den besagten zumindest zwei Personen im Wohnraum. Ferner kann es sich um eine Kommunikation handeln, an der zumindest drei Personen beteiligt sind.The communication is in particular a linguistic communication and / or a non-verbal communication, eg so-called body language, gestures, facial expressions, etc. In particular, the communication is a conversation of said at least two people in the living room. The said communication relates to the at least two persons in particular such that at least one person at least temporarily a sender of a communication message ("speaker"), a recipient of the communication message ("listener") or alternately or about simultaneously a sender and recipient of the communication messages ("spokesman and listener ") within said communication. In other words, a section of the communication is, in particular, one or more directly exchanged communication messages between said at least two persons in the living space. Furthermore, it can be a Communication involving at least three people.
Die Kommunikation kann auch ein Monolog sein, wobei sich insbesondere zumindest eine potentiell oder wahrscheinlich zuhörende Person (ein zumindest potentieller Zuhörer) im Wohnraum befindet. Bevorzugt umfasst die Kommunikation einen Dialog zwischen zumindest zwei im Wohnraum anwesenden Personen oder eine multidirektionale Kommunikation zwischen drei oder Vielzahl von Personen im Wohnraum. Insbesondere umfasst zumindest ein Abschnitt der besagten Kommunikation eine sprachliche Botschaft oder die zur Kommunikation bestimmten Laute einer Person im Wohnraum, die z.B. eine Empfindung, Willens- oder Bewertungshaltung ausdrücken. Es können Kommunikationslaute wie etwa Interjektionen oder Ausrufewörter sein, wobei die sprachliche Botschaft bzw. die Laute der zumindest einen im Wohnraum anwesenden Person insbesondere an zumindest eine weitere im Wohnraum anwesende Person bestimmt bzw. gerichtet sind. Bevorzugt handelt es sich bei der Kommunikation um eine zumindest teilweise bidirektional oder multidirektional stattfindende, sprachliche Botschaften umfassende, Kommunikation zwischen zumindest zwei im Wohnraum anwesenden Personen.The communication can also be a monologue, wherein in particular at least one potentially or probably listening person (an at least potential listener) is located in the living space. The communication preferably includes a dialogue between at least two persons present in the living space or a multidirectional communication between three or a plurality of persons in the living space. In particular, at least a portion of said communication comprises a linguistic message or the communicating sounds of a person in the living room, e.g. to express a sensation, attitude of will or judgment. It may be communication sounds such as interjections or exclamation words, wherein the linguistic message or the sounds of the at least one person present in the living space are determined or directed in particular to at least one other person present in the living space. Preferably, the communication is an at least partially bidirectional or multidirectionally occurring, linguistic messages comprehensive, communication between at least two persons present in the living room.
Bevorzugt kann das Verfahren umfassen: Erkennen, dass sich zumindest zwei Personen im Wohnraum befinden, insbesondere Ermitteln der Anzahl von Personen im Wohnraum und eine Berücksichtigung der erkannten Information. Dabei kann das Bestimmen, insbesondere Anpassen zumindest eines Parameters der zumindest einen auditiven Meldung und/oder des weiteren Audiosignals abhängig von der Erkennung einer stattfindenden oder erwarteten Kommunikation und von der Anwesenheit von zumindest zwei Personen im Wohnraum erfolgen. Dabei kann eine andere, z.B. anders parametrierte oder jeweils speziell dafür vorgesehenes, insbesondere vorausschauendes Bestimmen oder Anpassen eines oder mehrerer Parameter des auszugebenden Audiosignals und/oder einer auditiven Meldung erfolgen, die sich von dem Anpassen unterscheidet, wobei dieses ausgeführt wird, wenn erkannt wird, dass sich lediglich eine Person im Wohnraum befindet.The method may preferably include: recognizing that there are at least two persons in the living space, in particular determining the number of persons in the living space and taking into account the recognized information. In this case, the determination, in particular adaptation of at least one parameter of the at least one auditory message and / or of the further audio signal can be effected depending on the recognition of an ongoing or expected communication and the presence of at least two persons in the living space. Thereby another, e.g. differently parameterized or in each case specially provided, in particular foresighted, determination or adaptation of one or more parameters of the audio signal to be output and / or an auditory message which differs from the adaptation, this being carried out if it is recognized that only one person is present in the Living room is located.
Das Ermitteln, insbesondere Prädizieren des Parameters der besagten Kommunikation kann mit den unmittelbar oder mittelbar (z.B. durch eine zweckmäßig eingerichtete Datenverbindung) mit einer Audioausgabevorrichtung verbunden bzw. vernetzten Mittel, z.B. einer Sensorvorrichtung, weiterer vernetzten Sensoren, Recheneinheiten sein. Eine solche Verbindung bzw. Vernetzung kann z.B. über eine bidirektionale, multidirektionale, drahtlose Verbindung mit oder ohne einen zentralen Server, einen Computer, ein Router bzw. ein Hub mit oder ohne einer zur Ausführung des Verfahrens erweiterten Funktionalität erfolgen.Determining, in particular predicting, the parameter of said communication may be coupled with the means directly or indirectly connected (e.g., through a properly established data link) to an audio output device, e.g. a sensor device, further networked sensors, computing units. Such a connection or cross-linking can e.g. via a bidirectional, multidirectional, wireless connection with or without a central server, a computer, a router, or a hub, with or without functionality extended to perform the method.
Beispielsweise kann das Ermitteln, insbesondere Prädizieren des Parameters der besagten Kommunikation mit den im Wohnraum betriebenen (betreibbaren), insbesondere mit einem elektronischen System des Wohnraums verbundenen oder über ein Netzwerk verbundenen Mitteln, z.B. Mikrophonen einer Freisprecheinrichtung, z.B. eines Mikrophons einer Fernmeldeapplikation, einer oder mehreren Kameras, z.B. einer Kamera zum Betrieb eines Fernsehgeräts bzw. Anzeigevorrichtung für Videos, oder einer weiteren Sensorik, erfolgen. Ein oder mehrere Parameter der Kommunikation können aus Daten eines oder mehrerer im Wohnraum betriebenen, zur Ausführung einer weiteren Funktionalität eingerichteten Sensoren, z.B. Sensoren, Recheneinheiten, Datenspeicher eines sogenannten Smart-Home-Systems, erfolgen. Auch kann das Ermitteln, insbesondere Prädizieren der Kommunikation mittels zumindest eines persönlichen (mobilen) Anwendergeräts erfolgen. Ein solches Anwendergerät kann auch eine am Körper der Personen tragbare oder ggf. mit dem Körper verbundene elektronische Vorrichtung, z.B. eine sogenannte Smart-Watch oder Smart-Closes sein.For example, determining, in particular predicting, the parameter of the said communication with the home-operated (operable), in particular connected to an electronic system of the living space or connected via a network, e.g. Microphones of a handsfree, e.g. a microphone of a telecommunications application, one or more cameras, e.g. a camera for operating a television or display device for videos, or another sensor, done. One or more parameters of the communication may be obtained from data from one or more home-based sensors configured to carry out another functionality, e.g. Sensors, computing units, data storage of a so-called smart home system done. The determination, in particular predication, of the communication can also take place by means of at least one personal (mobile) user device. Such a user device may also include an electronic device that can be worn on the body of the person or possibly connected to the body, e.g. be a so-called smart watch or smart closes.
Ein Parameter der Kommunikation kann eine, z.B. zeitlich geordnete, Sequenz aus mehreren Parameterwerten, z.B. in Bezug auf die nahe Vergangenheit, etwa den aktuellen Zeitpunkt, und/oder eine Prädiktion für die nahe Zukunft umfassen. Beispielsweise kann ein Parameter der Kommunikation auch ein Maß der Veränderung der Werte eines bestimmten Parameters im Verlauf der Zeit und/oder in Bezug auf eine auf den Raum bezogene (räumlich veränderliche) Größe, z.B. Richtung und/oder Distanz, z.B. innerhalb des Wohnraums repräsentieren. Auch kann zumindest ein Parameter der sprachlichen Kommunikation zwischen den zumindest zwei Personen im Wohnraum abhängig von einer erkannten etwa im selben (kleinen) Zeitintervall, einhergehend, stattfindenden und im Verfahren erfassten Körpersprache, Stimmlage, und/oder einer erfassten Szene berücksichtigt werden. Beispielsweise kann auf eine ermittelte, im Zusammenhang mit der Kommunikation von zumindest zwei Personen stehende, Veränderung der Körpersprache oder Stimme zumindest einer Person im Wohnraum berücksichtigt werden. Beim Ermitteln zumindest eines Parameters der besagten Kommunikation und/oder bei einer Auswertung oder Interpretation zumindest eines Abschnitts der Kommunikation (durch die Sprachsteuerungsapplikation) können die z.B. aus der NLP (= neurolinguistischen Programmierung) bekannten naturwissenschaftlichen Zusammenhänge berücksichtigt werden. Beispielsweise kann eine Auswertung eines oder mehrerer Aspekte einer Kommunikationsbotschaft, einer Transaktion bzw. eine Abfolge von Transaktionen abhängig von solchen Zusammenhängen erfolgen.A parameter of the communication may include a sequence of several parameter values, eg temporally ordered, eg with respect to the near past, for example the current time, and / or a prediction for the near future. For example, a parameter of the communication may also represent a measure of the change in the values of a particular parameter over time and / or in relation to a space (spatially varying) size, eg direction and / or distance, eg within the living space. Also, at least one parameter of the linguistic communication between the at least two persons in the living space can be taken into account as a function of a recognized body language, voice position, and / or a detected scene occurring approximately in the same (small) time interval, associated with, taking place in the method. For example, a determined change in the body language or voice of at least one person in the living space in connection with the communication of at least two persons can be taken into account. When determining at least one parameter of said communication and / or in an evaluation or interpretation of at least a portion of the communication (through the voice control application), the scientific relationships known eg from NLP (= neurolinguistic programming) can be taken into account. For example, an evaluation of one or more aspects of a communication message, a transaction or a sequence of Transactions depend on such relationships.
Insbesondere kann von einer besagten Kommunikation ausgegangen werden, wenn die im Wohnraum erfassten, entsprechenden Schallwellen bestimmte Vorbedingungen erfüllen, beispielsweise bestimmte Grenzwerte in Bezug auf Parameter einer bestimmten Art der Kommunikation erfüllt bzw. überschritten werden und/oder eine oder mehrere bestimmte Ausbreitungseigenschaft bzw. Ausbreitungsrichtung dieser Schallwellen festgestellt wurden. Auch kann von einer besagten Kommunikation ausgegangen werden, wenn zumindest ein (vorausbestimmtes und/oder gelerntes) Muster in den Parametern der akustischen Schallwellen und/oder einer körperlichen Regung einer Person oder zwei körperlicher Regungen von zumindest zwei Personen erkannt bzw. wiedererkannt wird oder werden. Beispielsweise kann festgestellt werden, dass eine lokalisierte Quelle der Schallwellen mit einer, z.B. mit einem (weiteren) Sensor erfasster, räumlichen Position zumindest einer Person oder einem bestimmten Raumbereich hinreichend übereinstimmt, und/oder dass die Schallwellen nicht zu der Sprachsteuerungsapplikation gerichtet sind und/oder zu einem weiteren Raumbereich oder zu einer weiteren Person gerichtet sind. Daraufhin kann zumindest mit einem erhöhten Wahrscheinlichkeitsmaß angenommen werden, dass es sich (bei einem Abschnitt der Schallwellen) um eine besagte Kommunikation handelt. Auch kann z.B. davon ausgegangen werden, dass es sich bei der Person bzw. bei dem Raumbereich um einen „Sprecher“ innerhalb der besagten Kommunikation handelt.In particular, a said communication can be assumed if the corresponding sound waves detected in the living space fulfill certain preconditions, for example certain limit values with respect to parameters of a particular type of communication are met or exceeded and / or one or more specific propagation characteristics or propagation direction thereof Sound waves were detected. Also, said communication can be assumed when at least one (predetermined and / or learned) pattern in the parameters of the acoustic sound waves and / or a bodily movement of one or two physical impulses is recognized or recognized by at least two persons. For example, it can be stated that a localized source of the sound waves has a, e.g. with a (further) sensor detected, spatial position of at least one person or a certain area of space sufficiently agrees, and / or that the sound waves are not directed to the voice control application and / or are directed to another room area or to another person. Thereupon, at least with an increased probability measure, it can be assumed that (in the case of a section of the sound waves) this is a said communication. Also, e.g. it can be assumed that the person or room area is a "speaker" within said communication.
Der Begriff „auditive Meldung“ bezieht sich im Verfahren insbesondere auf: eine auditive Meldung, repräsentierend eine (mit technischen Mitteln auszugebende) akustisch übermittelbare Information die durch Menschen interpretiert bzw. verstanden werden soll. Bevorzugt kann eine auditive Meldung eine relativ komplexe Information umfassen. Es kann eine derartige auditive Meldung sein mit der eine Vielzahl unterschiedlicher Bedeutungen übermittelbar sind. Bevorzugt kann eine auszugebende auditive Meldung zumindest einen Abschnitt einer Sprachmitteilung umfassen. Beispielsweise bezieht sich eine auditive Meldung auf einen Zustand eines Betriebssystems des entsprechenden Hauses oder auf eine Information zu einem, insbesondere aktuellen das Haus bzw. Wohnraum betreffenden, Event (Ereignis).The term "auditory message" in the method refers in particular to: an auditory message representing an acoustically conveyable information (to be output by technical means) which should be interpreted or understood by humans. Preferably, an auditory message may include relatively complex information. It may be such an auditory message with a variety of different meanings can be transmitted. Preferably, an auditory message to be output may include at least a portion of a voice message. For example, an auditory message refers to a state of an operating system of the corresponding house or to an information about an event, in particular current house or living space related event.
Bevorzugt umfasst die auditive Meldung zumindest eine Sprachmitteilung. Die Sprachmitteilung kann beispielsweise eine oder mehrere sogenannte Transaktionen (in Analogie mit sogenannten Kommunikations-Transaktionen) umfassen. Eine auditive Meldung, insbesondere die Sprachmitteilung kann künstliche, beispielsweise computergenerierte, insbesondere interaktiv generierte Sprachinhalte, z.B. eine Stimme eines virtuellen Assistenten, umfassen. Beispielsweise kann die auditive Meldung eine mittels einer künstlichen Intelligenz generierte Ansage, textuelle Information, Frage, sprachlich geäußerte Meinungen, etc. sein. Diese können z.B. mit oder auf Basis der Daten eines Hauscomputers, „Smart-Home-Computers“, eines elektronischen „persönlichen Assistenten“, „Familienassistenten“, „virtuellen Babysitters“, „virtuellen Unterhalters“, einer oder mehreren virtuellen Persönlichkeiten, etc. generiert werden. Beispielsweise kann die auditive Meldung eine Kommunikationsform, z.B. eine Stimme einer mit Mitteln der künstlichen Intelligenz simulierten virtuellen Persönlichkeit umfassen. Die zumindest eine auditive Meldung kann auch, insbesondere durch die Stimme der virtuellen Persönlichkeit repräsentierte, künstlich erzeugte bzw. improvisierte Inhalte, z.B. Unterhaltungsinhalte umfassen. Eine auditive Meldung kann eine nicht durch Sprache, sondern z.B. auf Basis von Tonsequenzen, Melodien, bestimmte Geräusche, repräsentierte Information umfassen.The auditory message preferably comprises at least one voice message. The voice message may include, for example, one or more so-called transactions (analogous to so-called communications transactions). An auditory message, in particular the voice message, can be artificial, for example computer-generated, in particular interactively generated, speech content, e.g. a voice of a virtual assistant. For example, the auditory message may be an announcement generated by artificial intelligence, textual information, question, voiced opinions, etc. These may e.g. generated with or based on the data of a home computer, "smart home computer", an electronic "personal assistant", "family assistant", "virtual babysitter", "virtual entertainer", one or more virtual personalities, etc. For example, the auditory message may be a communication form, e.g. include a voice of a virtual personality simulated with artificial intelligence means. The at least one auditory message may also, in particular represented by the voice of the virtual personality, artificially generated or improvised contents, e.g. Include entertainment content. An auditory message may be one not by voice, but e.g. based on sound sequences, melodies, certain sounds, information represented.
Alternativ oder zusätzlich kann die auditive Meldung akustisch auszugebenden Inhalten auf Basis der Daten eines (mit dem Hausnetzwerk vernetzten) Anwendergeräts (Smartphone, Tablet, Smart-Watch, Daten-Brille, intelligente Kopfhörer, etc.), z.B. einem mittels einer Sprachgenerierung vorgelesenen Textinhalt entsprechen. Das Anwendergerät kann ein persönliches (mobiles, insbesondere am Körper tragbares, ggf. mit dem Körper verbundenes) Anwendergerät der zumindest einen im Wohnraum anwesenden, an der besagten Kommunikation beteiligten Person sein.Alternatively or additionally, the auditory message can be acoustically output content based on the data of a user device (networked with the home network) (smartphone, tablet, smart watch, data glasses, intelligent headphones, etc.), e.g. correspond to a read by means of a speech generation text content. The user device can be a personal (mobile, in particular portable, possibly connected to the body) user device of the at least one person present in the living space and participating in said communication.
Alternativ oder zusätzlich kann ein Abschnitt eines Audiosignals (nicht des besagten „weiteren Audiosignals“), z.B. ein, nach bestimmten Kriterien ausgewählter Abschnitt eines Audiosignals aus einer Radiosendung, Video, Film, Unterhaltungsprogramm, als eine auditive Meldung aufgefasst werden. Beispielsweise kann ein (ggf. nach bestimmten Kriterien ausgewählter) Abschnitt eines Audiosignals, umfassend Sprachanteile, z.B. eine sprachliche Botschaft bzw. eine Kommunikations-Transaktion, im Verfahren wie eine auditive Meldung behandelt bzw. verarbeitet werden. So kann ein Abschnitt eines Audiosignals, repräsentierend eine sprachlich übermittelte Nachricht, einen Abschnitt eines Telekommunikationsinhalts, z.B. eine Nachricht an einem Anrufbeantworter oder eine versendete Sprachbotschaft ausnahmsweise auch eine auditive Meldung sein bzw. entsprechend behandelt werden. Die auditiven Meldungen der letztgenannten Art können im Verfahren anders behandelt werden, als z.B. die zumindest eine mittels einer Sprachgenerierung (abhängig von bestimmten Events) generierte auditive Meldung.Alternatively or additionally, a portion of an audio signal (not the said "further audio signal"), e.g. a section of an audio signal selected from a radio program, video, film, entertainment program, selected according to certain criteria, as an auditory message. For example, a section of an audio signal (possibly selected according to specific criteria) comprising speech components, e.g. a linguistic message or a communication transaction, are treated in the procedure as an auditory message or processed. Thus, a portion of an audio signal representing a linguistically transmitted message may include a portion of a telecommunications content, e.g. a message to an answering machine or a voice message sent exceptionally be an auditory message or be treated accordingly. The auditory messages of the latter type may be treated differently in the procedure than e.g. the at least one generated by means of a speech generation (depending on certain events) auditory message.
Ein oder mehrere Abschnitte einer auditiven Meldung können eine auditiv zu übermittelnde Information betreffend eine bestimmte im Wohnraum anwesende Person umfassen und/oder speziell an zumindest eine im Wohnraum anwesende (oder mit einer hohen Wahrscheinlichkeit anwesende) Person gerichtet sein. Insbesondere kann die auditive Meldung in einem oder in mehreren akustisch verbundenen oder akustisch teilweise getrennten Teilen des Wohnraumes ausgegeben werden. Ein Abschnitt einer längeren, komplexen auditiven Meldung, insbesondere ein an sich sinnvoller (eine unmissverständliche Bedeutung, eine Botschaft, eine an sich schlüssige Transaktionen bzw. Kommunikationsbotschaften tragender) Abschnitt der auditiven Meldung kann dabei auch als eine auditive Meldung betrachtet werden. Es sein hier betont, dass auditive Meldung prinzipiell unterschiedliche Inhalte oder Inhalte unterschiedlicher Arten repräsentieren können. Ein Abschnitt einer auditiven Meldung kann beispielsweise bestimmte menschliche Kommunikationslaute, z.B. Interjektionen, in einer synthetisierten oder nachempfundenen Form, umfassen. One or more sections of an auditory message may include information to be transmitted auditorially regarding a particular person present in the home and / or specifically directed to at least one person present (or likely to be present) in the home. In particular, the auditory message can be output in one or more acoustically connected or acoustically partially separated parts of the living space. A section of a longer, complex auditory message, in particular a section of the auditory message which in itself makes sense (an unequivocal meaning, a message, a coherent transaction or a communication message) can also be regarded as an auditory report. It should be emphasized here that auditory reporting can in principle represent different content or content of different kinds. For example, a portion of an auditory message may include certain human communication sounds, eg, interjections, in a synthesized or imitated form.
Unterschiedliche Arten auditiver Meldungen können im Verfahren unterschiedlich behandelt werden.Different types of auditory messages can be treated differently in the procedure.
Beispielsweise können Parameter auditiver Meldungen auf Basis einer Sprachgenerierung, auf Basis von eingelesener Daten die eine sprachliche Information umfassen oder repräsentieren, und auditive Meldungen auf Basis von Tonsequenzen, Melodien, bestimmter Geräusche, nach jeweils unterschiedlichen mathematischen Zusammenhängen (Logiken, Formeln, Kennlinien) bestimmt oder angepasst werden.For example, parameters of auditory messages can be determined on the basis of a speech generation, on the basis of read-in data which comprise or represent a linguistic information, and auditory messages based on sound sequences, melodies, specific sounds, according to different mathematical contexts (logics, formulas, characteristics) be adjusted.
Insbesondere zeichnet sich die zumindest eine auditive Meldung durch zumindest einen von (denkbaren) vorangegangenen bestimmten Informationseingaben unabhängigen, generierten Inhalt. Die zumindest eine auditive Meldung ist insbesondere keine unmittelbare Reaktion, z.B. keine Antwort auf bestimmte (gezielte) Informationseingaben. Diese muss auch in keinem bestimmten, unmittelbaren zeitlichen Zusammenhang mit dem Abschnitt der besagten Kommunikation stehen.In particular, the at least one auditory message is characterized by at least one generated content independent of (conceivable) preceding specific information inputs. In particular, the at least one auditory message is not an immediate response, e.g. no response to specific (targeted) information entries. It also need not be in any particular, immediate temporal relationship with the section of said communication.
Eine (auszugebende) auditive Meldung kann beispielsweise bereits als ein Abschnitt eines zu der auditiven Meldung korrespondierenden Audiosignals oder eine Vielzahl kombinierbarer Audiosignale oder Abschnitte eines Audiosignals (ggf. auch einzelne Wörter, Silben, Kommunikationslaute, etc.) vorliegen oder eingelesen werden. Eine auditive Meldung kann auf Basis oder unter Berücksichtigung der Daten aus einer Datenquelle, z.B. als ein Datenstrom bzw. in einer auf Datenpakete beliebig verteilten Form, vorliegen oder im Verfahren erzeugt werden. Beispielsweise kann die auditive Meldung als Daten erzeugt werden, aus welchen in derselben oder in einer weiteren Recheneinheit die entsprechenden Laute, bzw. Daten zur Erzeugung von den Lauten, erzeugt bzw. synthetisiert werden. In diesem Sinne kann die auditive Meldung auch als eine Vorschrift zur Generierung bzw. Ausgabe einer oder mehrerer bestimmter Sprachmitteilungen erzeugt werden. Beispielsweise kann ein oder mehrere Parameter der auditiven Meldung bestimmt oder angepasst werden, die die Ausgabe zumindest eines Abschnitts der auditiven Meldung aus einer oder mehrerer (unterschiedlichen, weiteren) Audioausgabevorrichtungen im Wohnraum oder an einem mobilen Anwendergerät einer Person, z.B. einer nach bestimmten Kriterien gewählter Person, veranlassen. Auch kann die auditive Meldung auf Basis der zu der entsprechenden Audioausgabevorrichtung im Wohnraum gepushten oder gestreamten (in einem sogenannten „Push-Verfahren“ oder „Streaming-Verfahren“) Datenabschnitte erzeugt werden. Dabei kann im Verfahren ein oder mehrere Parameter bestimmt werden die eine Übertragung der Daten zu einer oder mehreren bestimmten Audioausgabevorrichtungen im Wohnraum und/oder die Ausgabe der Daten der auditiven Meldung in Form akustischer Schallwellen betreffen. Das Erzeugen der auditiven Meldung entsprechend einem im Verfahren bestimmten Parameter kann mittels einer unmittelbaren oder mittelbaren Ansteuerung einer Recheneinheit, in der das der zumindest einen auditiven Meldung entsprechende Audiosignal erzeugt, verarbeitet, verstärkt oder als Schallwellen ausgegeben wird, erfolgen. Beispielsweise kann ein Verändern, insbesondere ein Anpassen zumindest eines Parameters einer im Wohnraum auszugebenden auditiven Meldung, durch Ansteuern einer (zur Ausführung des Verfahrens vernetzten) Recheneinheit erfolgen.For example, an auditory message (to be output) can already be present or read in as a section of an audio signal corresponding to the auditory message or a multiplicity of combinable audio signals or sections of an audio signal (possibly also individual words, syllables, communication sounds, etc.). An auditory message may be based on or taking into account the data from a data source, e.g. are present as a data stream or in a form arbitrarily distributed on data packets, or are generated in the method. For example, the auditory message can be generated as data from which the corresponding sounds, or data for generating the sounds, are generated or synthesized in the same or in another arithmetic unit. In this sense, the auditory message can also be generated as a rule for generating or outputting one or more specific voice messages. For example, one or more parameters of the auditory message may be determined or adjusted, which may include outputting at least a portion of the auditory message from one or more (different, further) audio output devices in the living space or at a mobile user device, e.g. a person selected according to certain criteria. The auditory message can also be generated on the basis of the data portions pushed or streamed in the living space to the corresponding audio output device (in a so-called "push method" or "streaming method"). In this case, one or more parameters can be determined in the method which relate to a transmission of the data to one or more specific audio output devices in the living space and / or the output of the data of the audible message in the form of acoustic sound waves. The generation of the auditory message in accordance with a parameter determined in the method can take place by means of a direct or indirect control of a computing unit in which the audio signal corresponding to the at least one auditory message is generated, processed, amplified or output as sound waves. For example, a modification, in particular an adaptation of at least one parameter of an auditory message to be output in the living space, can take place by triggering a computing unit (networked to execute the method).
Das Bestimmen, insbesondere Anpassen eines Parameters der auditiven Meldung kann im Verfahren bereits während der Erzeugung der zugrundeliegenden Daten, Datenabschnitte bzw. während des Einlesens des entsprechenden Datenstroms erfolgen. Insbesondere kann ein Parameter zu einer auszugebenden auditiven Meldung abhängig von dem besagten Parameter der Kommunikation, z.B. dynamisch, angepasst werden. Auch kann der mathematische Zusammenhang zwischen einer Veränderung des zumindest eines Parameters der Kommunikation im Wohnraum und einer daraufhin auszuführendem Bestimmen bzw. Anpassen eines oder mehrerer Parameter der besagten auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals, bevorzugt dynamisch, verändert werden.The determination, in particular adaptation of a parameter of the auditory message, can already take place in the method during the generation of the underlying data, data sections or during the reading in of the corresponding data stream. In particular, a parameter to an auditory message to be issued may depend on the said parameter of the communication, e.g. dynamic, adapted. The mathematical relationship between a change in the at least one parameter of the communication in the living space and a subsequent determination or adaptation of one or more parameters of said auditory message and / or a section of the further audio signal, preferably dynamically, can also be changed.
Bevorzugt wird im Verfahren zwischen der zumindest einer besagten auditiven Meldung, insbesondere einer Sprachmitteilung, und dem besagten weiteren Audiosignal unterschieden. Auch kann zwischen dem besagten weiteren Audiosignal, z.B. einem von einer Datenquelle ausgelesenen Audiosignal eines Multimediainhalts, und einem weiteren, anders gearteten, Audiosignal, z.B. etwa eines Audiosignals eines Fernmeldeinhalts, bzw. Telekommunikation, unterschieden werden.In the method, a distinction is preferably made between the at least one said auditory message, in particular a voice message, and the said further audio signal. Also can between the said further audio signal, for example an audio signal of a multimedia content read from a data source, and a further, different kind of audio signal, for example an audio signal of a telecommunications content or telecommunication.
Im Verfahren kann ein quantitativ und/oder quantitativ unterschiedliches Bestimmen oder Anpassen der zumindest einen auditiven Meldung oder (prinzipiell) unterschiedliche Varianten des Bestimmens oder Anpassens der Parameter der zumindest einen auditiven Meldung vorgesehen werden. Dabei können jeweils unterschiedliche Parameter, insbesondere bestimmte Kombinationen der Parameter bzw. Parameter unterschiedlicher Art angepasst oder bestimmt werden. Beispielsweise kann ein Bestimmen oder Anpassen eines akustischen Parameters der zumindest einen auditiven Meldung in einer beliebigen, bestimmten, zweckmäßigen Kombination mit dem Bestimmen oder Anpassen eines Zeitparameters der auditiven Meldung ausgeführt werden. Auch kann bei unterschiedlichen Varianten ein unterschiedlicher, dem Bestimmen oder Anpassen zugrundeliegender mathematischer Zusammenhang (Formel, Logik, Kennlinien, Koeffizienten, etc...) gewählt werden. Beispielsweise kann abhängig von einem oder mehreren Parametern der besagten Kommunikation, der an der Kommunikation (als „Sprecher“ oder „Zuhörer“) beteiligten Personen, zumindest eines vorausbestimmten Kriteriums, z.B. abhängig von Optimierungskriterien ein unterschiedliches Bestimmen oder Anpassen der Parameter der zumindest einen auditiven Meldung ausgeführt werden.In the method, a quantitatively and / or quantitatively different determination or adaptation of the at least one auditory message or (in principle) different variants of the determination or adaptation of the parameters of the at least one auditory message can be provided. In each case different parameters, in particular specific combinations of the parameters or parameters of different types can be adapted or determined. For example, determining or adjusting an acoustic parameter of the at least one auditory message in any particular convenient combination may be performed by determining or adjusting a time parameter of the auditory message. In the case of different variants, a different mathematical relationship (formula, logic, characteristic curves, coefficients, etc.) can also be selected for determining or adapting. For example, depending on one or more parameters of said communication, the person involved in the communication (as "speaker" or "listener"), at least one predetermined criterion, e.g. depending on optimization criteria, a different determination or adaptation of the parameters of the at least one auditory message can be carried out.
Abhängig von einem oder mehreren Parametern der besagten Kommunikation, der an dieser (als „Sprecher“ oder „Zuhörer“ oder „Sprecher und Zuhörer“) beteiligten Personen, zumindest eines vorausbestimmten Kriteriums, z.B. abhängig von Optimierungskriterien kann ein unterschiedliches Bestimmen bzw. Anpassen der Parameter der besagten auditiven Meldung ausgeführt werden. Ein unterschiedliches Bestimmen bzw. Anpassen bedeutet insbesondere, dass ein dem Bestimmen oder Anpassen eines Parameters eines Abschnitts der auditiven Meldung und/oder des weiteren auszugebenden Audiosignals zugrundeliegender mathematischer Zusammenhang (z.B. Logik, Funktion, Formel, Koeffizienten einer Formel, Kennlinien) unterschiedlich gewählt wird.Depending on one or more parameters of said communication, the persons involved in this (as "speaker" or "listener" or "speaker and listener"), at least one predetermined criterion, e.g. Depending on optimization criteria, a different determination or adaptation of the parameters of the said auditory message can be carried out. In particular, different fitting means that a mathematical relationship (e.g., logic, function, formula, coefficients of a formula, characteristics) underlying the determination or adaptation of a parameter of a portion of the auditory message and / or the further audio signal is chosen differently.
Im Verfahren können für das Bestimmen bzw. Anpassen der auditiven Meldung oder für zumindest zwei Abschnitte einer auditiven Meldung unterschiedliche (auch prinzipiell unterschiedliche) Varianten vorgesehen werden. Dabei können jeweils unterschiedliche Parameter insbesondere unterschiedliche Arten von Parametern oder Kombinationen von Parametern der auditiven Meldung angepasst werden. Auch kann bei unterschiedlichen Varianten ein unterschiedliches, dem Bestimmen oder Anpassen zugrundeliegender mathematischer Zusammenhang jeweils unterschiedlich gewählt werden.In the method, different (also fundamentally different) variants can be provided for determining or adapting the auditory message or for at least two sections of an auditory message. In each case different parameters, in particular different types of parameters or combinations of parameters of the auditory message can be adapted. Also, in different variants, a different, the determining or adjusting underlying mathematical context can be chosen differently.
Beispielsweise kann im Verfahren ein Bestimmen oder Anpassen der Parameter zum Erzeugen einer auditiven Meldung und das Anpassen zumindest eines Abschnitts des weiteren Audiosignals erfolgen, wobei die auditive Meldung und der Abschnitt des Audiosignals zumindest teilweise innerhalb eines gewissen (kleinen) Zeitintervalls, z.B. 1, 10, 30, 60, 120 Sekunden, gleichzeitig oder zumindest teilweise zeitlich überlappend ausgegeben werden. Alternativ oder zusätzlich kann das Bestimmen bzw. Anpassen der Parameter der zumindest einen auditiven Meldung und zumindest eines Abschnitts des weiteren Audiosignals erfolgen, wobei die auditive Meldung und der Abschnitt des Audiosignals zumindest überwiegend in jeweils unterschiedlichen, insbesondere benachbarten Raumbereichen des Wohnraums (in der Größenordnung von einigen Quadratmeter), die sich beispielsweise teilweise räumlich überlappen, ausgegeben werden (sollen). Ein oder mehrere Parameter der zumindest einer auditiven Meldung und/oder des weiteren Audiosignals, die zumindest teilweise dasselbe Zeitintervall und/oder denselben Raumbereich betreffen, können im Verfahren abhängig voneinander bestimmt, angepasst, gesteuert werden. Ein oder mehrere Parameter der zumindest einer auditiven Meldung und/oder des weiteren auszugebenden Audiosignals können derart bestimmt werden, dass das zumindest ein Optimierungskriterium, z.B. in Bezug auf einen (bestimmten) Raumbereich des Wohnraums, eine bestimmte Person, erreicht oder angestrebt wird. Dabei kann eine kumulierte („gemeinsame“) Wirkung von den besagten zumindest zwei auditiven Inhalten auf zumindest einen zumindest potentiellen Zuhörer in zumindest einem Raumbereich des Wohnraums zweckmäßig, z.B. nach zumindest einem gemeinsamen Optimierungskriterium, gesteuert werden.For example, in the method, the parameters for generating an auditory message and adjusting at least a portion of the further audio signal may be determined or adjusted, wherein the auditory message and the portion of the audio signal are at least partially resolved within a certain (small) time interval, e.g. 1, 10, 30, 60, 120 seconds, simultaneously or at least partially temporally overlapping output. Alternatively or additionally, the parameters of the at least one auditory message and at least one section of the further audio signal can be determined or adapted, wherein the auditory message and the audio signal section are at least predominantly in respectively different, in particular adjacent spatial areas of the living space (on the order of a few square meters), which overlap, for example, partially spatially, (should) be spent. One or more parameters of the at least one auditory message and / or of the further audio signal, which relate at least partially to the same time interval and / or the same spatial area, can be determined, adapted, controlled in the method depending on one another. One or more parameters of the at least one auditory message and / or the further audio signal to be output can be determined in such a way that the at least one optimization criterion, e.g. in relation to a (specific) space of the living space, a particular person, is achieved or desired. A cumulative ("common") effect of said at least two auditory content on at least one at least potential listener in at least one room area of the living space may be expedient, e.g. be controlled according to at least one common optimization criterion.
Insbesondere wird beim Bestimmen oder Anpassen zumindest eines oder mehreren Parameter der auditiven Meldung berücksichtig, ob das zumindest ein weiteres Audiosignal in einem bestimmten, betreffenden Zeitintervall in der nahen Zukunft auszugegeben ist und/oder ob durch das weitere Audiosignal in einem bestimmten, betreffenden, Zeitintervall in der nahen Zukunft ein oder mehrere bestimmte Grenzwerte, insbesondere bestimmte akustische Grenzwerte in einem bestimmten (die Ausgabe oder den Empfänger der auditiven Meldung im Zusammenhang stehenden), Raumbereich überschritten bzw. voraussichtlich überschritten wird.In particular, when determining or adapting at least one or more parameters of the auditory message, it is taken into account whether the at least one further audio signal is output in a specific, relevant time interval in the near future and / or by the further audio signal in a specific, relevant time interval in In the near future, one or more specific limits, in particular, certain acoustic limits in a particular (related to the output or the recipient of the auditory message), space area is exceeded or expected to be exceeded.
Dabei können Daten repräsentierend das besagte weitere Audiosignals betreffend ein in der nahen Zukunft (>10, 20, 30, 60 Sekunden) liegendes Zeitintervall (bereits vorab) eingelesen und ausgewertet werden. Mit anderen Worten werden dabei Daten, z.B. von einem Datenträger, ausgelesen und ausgewertet, die nicht zu der Ausgabe des Audiosignals zum aktuellen Zeitpunkt dienen, sondern faktisch repräsentierend sind für einen weiteren Verlauf des Audiosignals in der nahen Zukunft. Beispielsweise wird ein weiterer Verlauf eines Audiosignals eines Multimediasignals, z.B. eines Films mit einem (virtuellen) Vorlauf von > 10, 20, 30, 60 Sekunden auf das Vorhandensein der Abschnitte ausgewertet, die eine Überschreitung bestimmter Grenzwerte, insbesondere in einem Raumbereich der mit der besagten Kommunikation und/oder der besagten auditiven Meldung im Zusammenhang steht, insbesondere unmittelbar betroffen sein wird. Daraufhin (im positiven Fall) erfolgt ein Bestimmen oder Anpassen der Parameter, eine Maßnahme oder eine Variante des Anpassens der Parameter, die wahlweise ein Anpassen eines oder mehrerer Parameter der auditiven Meldung, ein Bestimmen oder Anpassen der Parameter des zumindest eines Abschnitts des auszugebenden Audiosignals oder beides umfasst.In this case, data representing said further audio signal regarding a in the near future (> 10, 20, 30, 60 seconds) lying time interval (already in advance) read and be evaluated. In other words, in this case data, for example from a data carrier, are read out and evaluated, which do not serve to output the audio signal at the current time, but are actually representative of a further course of the audio signal in the near future. For example, a further course of an audio signal of a multimedia signal, for example a film with a (virtual) flow of> 10, 20, 30, 60 seconds is evaluated for the presence of the sections exceeding certain limits, in particular in a spatial area with the said Communication and / or said auditory reporting is related, in particular will be directly affected. Thereafter (in the affirmative case), the parameters are determined or adjusted, a measure or variant of adapting the parameters, optionally adjusting one or more parameters of the auditory message, determining or adjusting the parameters of the at least one portion of the audio signal to be output, or includes both.
Beispielweise kann das Verfahren umfassen: das Ermitteln eines voraussichtlichen Verlaufs der akustischer Werte auf Basis eines, Abschnitts des zumindest einen weiteren auszugebenden Audiosignals oder eines Kanals des Audiosignals der ein (bestimmtes) Zeitintervall in der nahen Zukunft betrifft, und daraufhin das Bestimmen insbesondere Anpassen eines Parameters der zumindest einen auditiven Meldung abhängig von dem voraussichtlichen Verlauf der akustischer Werte in zumindest einem Raumbereich des Wohnraums auf Basis des zumindest einen weiteren Audiosignals. Dabei können die besagten akustischen Werte für zumindest einen Raumbereich des Wohnraums vorausschauend geschätzt, insbesondere simuliert werden.For example, the method may include determining an expected history of the acoustic values based on a portion of the at least one further audio signal to be output, or a channel of the audio signal that relates to a particular time interval in the near future, and then determining, in particular, a parameter the at least one auditory message depending on the probable course of the acoustic values in at least one spatial area of the living space on the basis of the at least one further audio signal. In this case, the said acoustic values for at least one spatial region of the living space can be estimated in advance, in particular simulated.
Bevorzugt wird im Verfahren zwischen der besagten zu erzeugenden auditiven Meldung, insbesondere einer Sprachmitteilung, und dem besagten weiteren auszugebenden Audiosignal unterschieden. Das Audiosignal, kann insbesondere in wesentlicher Hinsicht anders als die besagte auditive Meldung geartet sein, z.B. kann es zu einem von einer Datenquelle oder Internet ausgelesen Multimediainhalt oder zu einen Fernmeldeinhalt (Telefonie, Videotelefonie) oder zu einer virtuellen Realität gehören.In the method, a distinction is preferably made between the said auditory message to be generated, in particular a voice message, and the said further audio signal to be output. The audio signal, in particular, may be substantially different than the said auditory message, e.g. It may belong to a multimedia content read from a data source or Internet or to a telecommunications content (telephony, video telephony) or to a virtual reality.
Zum Erzeugen bzw. Ausgabe der besagten auditiven Meldung können unterschiedliche Signale, Kanäle oder bestimmte Kanäle eines mehrkanaligen Raumklangsignals, z.B. in eine Heimkino-Format oder einem prinzipiell vergleichbaren Format genutzt werden. Beispielsweise kann ein der auditiven Meldung entsprechendes oder diese umfassendes Raumklangsignal ermittelt, verstärkt und z.B. auch über ein im Wohnraum betriebene Audioausgabevorrichtung („Audiosystem“, „Receiver“, etc.) ausgegeben werden. Die Ausgabe eines oder mehrerer Abschnitte des Audiosignals und/oder die zumindest eine auditive Meldung können über unterschiedliche Kanäle derselben Audiosystems, z.B. eines Receivers für unterschiedliche Räumlichkeiten des Hauses sein, wie z.B. bei einem Multi-Raum-Entertainment-Modus (vgl. auch einen sogenannten Partymodus) oder, bevorzugt in bestimmten Raumbereichen des Wohnraum veranlasst werden. Dies kann auch dann zutreffen, wenn die auditive Meldung auf Basis der Daten weiterer, von Multimedia unterschiedlichen Vorrichtungen oder Geräte, z.B. Haushaltsgeräte erzeugt wird. Auch kann die besagte auditive Meldung in der Erfindung zusammen, insbesondere zumindest teilweise räumlich und/oder zeitlich überschneidend mit dem zumindest einem weiteren Audiosignal ausgegeben werden.For generating or outputting said auditory message, different signals, channels or certain channels of a multichannel surround sound signal, e.g. be used in a home theater format or a basically comparable format. For example, a room sound signal corresponding to or encompassing the auditory message may be detected, amplified, and e.g. can also be output via an audio output device operated in the living space ("audio system", "receiver", etc.). The output of one or more portions of the audio signal and / or the at least one auditory message may be transmitted over different channels of the same audio system, e.g. a receiver for different premises of the house, such as in a multi-room entertainment mode (see also a so-called party mode) or, preferably, be initiated in certain areas of the living space. This may be true even if the auditory message is based on the data of other devices or devices other than multimedia, e.g. Household appliances is generated. Also, said auditory message in the invention together, in particular at least partially spatially and / or temporally overlapping with the at least one further audio signal output.
Das Bestimmen des zumindest eines Parameters der auditiven Meldung kann insbesondere ein Anpassen des Parameters sein. Das Bestimmen eines Parameters bedeutet insbesondere ein Bestimmen eines oder mehrerer Parameterwerte eines bestimmten Parameters, insbesondere eines Parameters einer bestimmten Art. Vereinfacht gesagt können ein oder mehrere Parameterwerte ermittelt und für ein bestimmtes Zeitintervall bzw. in Bezug auf einen Abschnitt der auditiven Meldung, insbesondere vorausschauend festgelegt werden. Das Anpassen bedeutet insbesondere das Anpassen eines oder mehrerer vorgegebenen bzw. sonst gültiger Parameterwerte eines Parameters insbesondere eines Parameters einer bestimmten Art. Beispielsweise kann dabei ein additiver, multiplikativer, logarithmischer Faktor angewandt werden mit dem ein Parameterwert angepasst wird. Beispielsweise kann im Verfahren das Bestimmen bzw. Anpassen der Parameter zum Erzeugen einer auditiven Meldung und das Anpassen zumindest eines Abschnitts des auszugebenden Audiosignals erfolgen, wobei die auditive Meldung und der Abschnitt des Audiosignals zumindest teilweise innerhalb eines gewissen (kleinen) Zeitintervalls, z.B. 1, 10, 30, 60, 120 Sekunden, gleichzeitig oder zumindest teilweise zeitlich überlappend ausgegeben werden.The determination of the at least one parameter of the auditory message may in particular be an adaptation of the parameter. In particular, determining a parameter means determining one or more parameter values of a particular parameter, in particular a parameter of a particular type. Simply put, one or more parameter values may be determined and determined for a particular time interval or with respect to a portion of the auditory message, particularly in a forward-looking manner become. The adaptation means in particular the adaptation of one or more predetermined or otherwise valid parameter values of a parameter, in particular of a parameter of a specific type. For example, an additive, multiplicative, logarithmic factor can be used with which a parameter value is adapted. For example, in the method, the parameters may be adjusted to produce an auditory message and to match at least a portion of the audio signal to be output, the auditory message and the portion of the audio signal being at least partially resolved within a certain (small) time interval, e.g. 1, 10, 30, 60, 120 seconds, simultaneously or at least partially temporally overlapping output.
Bevorzugt ist im Verfahren vorgesehen, dass speziell auf (im Wohnraum akustisch hörbare) Personenstimmen, insbesondere aber nicht auf weitere Geräuschquellen wie z.B. das Bellen eines Hundes, Lärm von innerhalb oder außerhalb des Wohnraums, oder auch nicht auf ein Hintergrundgeräusch, z.B. ein Windgeräusch oder bestimmte Arten von Geräuschkulissen, reagiert wird. Alternativ wird auf solche weiteren, nicht zu einem weiteren auszugebenden Audiosignal und nicht zu der besagten sprachlichen Kommunikation gehörenden akustischen Inhalte prinzipiell anders und/oder mit einem quantitativ oder qualitativ (prinzipiell) anderen Verändern eines Parameters der auditiven Meldung reagiert. Beispielsweise kann auf ein erkanntes Schreien, Weinen, Lachen eines Kindes und/oder auf eine Stimme eines Haustiers, oder Haustiers einer bestimmten Art (Hund, Katze, Vogel, Nagetier, etc.) entsprechend anderer Bedingungen, z.B. einer bestimmten Logik, oder in Bezug auf die zu berücksichtigenden Parameter der entsprechender Schallwellen, oder in Bezug auf einen oder mehrere Parameter der zumindest einen auditiven Meldung und/oder eines weiteren Audiosignals reagiert werden. Bei bestimmten weiteren akustischen Inhalten kann auch eine weitere (gesonderte) vorausbestimmte Maßnahme ausgeführt werden.Preferably, it is provided in the method that especially on (in the living room acoustically audible) person voices, but especially not on other sources of noise such as the barking of a dog, noise from inside or outside the living room, or not on a background noise, such as a wind noise or certain Types of background noise, is responding. Alternatively, such further, not to be issued to another audio signal and not to said linguistic communication acoustic content is in principle different and / or with a quantitative or qualitative (in principle) other changing a parameter of the auditory message. For example, recognized crying, crying, laughing of a child, and / or voice of a pet or pet of a particular species (dog, cat, bird, rodent, etc.) may be subject to other conditions, such as a particular logic, or relatedness be reacted to the parameters of the corresponding sound waves to be considered, or with respect to one or more parameters of the at least one auditory message and / or another audio signal. For certain other acoustic content, another (separate) predetermined action may be performed.
In einem vereinfachten Beispiel wird erkannt, dass eine Person, beispielsweise eine bestimmte Person, eine Person, die zu einer bestimmten Personengruppe gehört, eine Person in einem bestimmten Raumbereich des Wohnraums und/oder an einem bestimmten Sitzplatz im Wohnraum, anfängt zu sprechen oder (vorerst lediglich) vorhat zu sprechen. Daraufhin wird eine auszugebende (z.B. das gerade ausgegebene und/oder zur Ausgabe bestimmte) auditive Meldung, beispielsweise eine Sprachmitteilung zweckmäßig verändert. Bevorzugt erfolgt eine solche Veränderung nur bzw. vorwiegend betreffend eines passenden Zeitintervalls bzw. betreffend einen oder mehreren bestimmte, passende, Abschnitte der auditiven Meldung und der Parameter bestimmter Arten.In a simplified example, it is recognized that a person, for example a certain person, a person belonging to a certain group of people, a person in a certain room area of the living space and / or at a certain seat in the living room, starts to speak or (for the time being only) intends to speak. Thereafter, an auditory message to be outputted (e.g., the one being outputted and / or intended for issue), for example, a voice message is appropriately changed. Such a change preferably takes place only or predominantly with regard to a suitable time interval or with regard to one or more specific, suitable, sections of the auditory message and the parameters of specific types.
Dabei kann die auditive Meldung derart verändert werden, dass diese z.B. in einem Raumbereich oder von einem bestimmten (ersten) Raumbereich besser hörbar ist und/oder in einem weiteren (zweiten) Raumbereich oder von einer weiteren bestimmten Position im Wohnraum weniger hörbar wird oder weniger störend wirkt. Bevorzugt kann der eine oder mehrere Parameter der auditiven Meldung derart bestimmt werden, dass eine Verbesserung der Wahrnehmbarkeit und/oder Verständlichkeit zumindest einer in der besagten Kommunikation zwischen zwei Personen im Wohnraum enthaltenen sprachlichen Botschaft angestrebt wird. Dabei kann das die Anpassen zumindest vorranging in Bezug auf einen oder mehrere bestimmte Raumbereiche ausgeführt werden und mit einer verringerten Einflussnahme auf einen oder mehrerer weitere (für die besagte sprachliche Kommunikation nicht oder weniger relevanten) dritte Raumbereiche erfolgen. Somit kann ein Widerspruch zwischen der Wahrnehmbarkeit einer oder mehreren auditiven Meldungen und einer unmittelbaren, unter anwesenden Personen stattfindenden gewollten sprachlichen Kommunikation und/oder des weiteren im selben Zeitintervall ausgegebenen Audiosignals vorteilhaft gelöst werden.In this case, the auditory message can be changed so that this e.g. is better audible in a room area or from a certain (first) room area and / or is less audible or less disturbing in another (second) room area or from another particular position in the living room. Preferably, the one or more parameters of the auditory message may be determined such that an improvement in the perceptibility and / or intelligibility of at least one linguistic message contained in said communication between two persons in the living space is sought. In this case, the adaptation can be carried out at least in priority with respect to one or more specific spatial regions and with a reduced influence on one or more further (not or less relevant for said linguistic communication) third spatial regions. Thus, a contradiction between the perceivability of one or more auditory messages and an immediate, taking place among present persons intended language communication and / or the further output in the same time interval audio signal can be solved advantageously.
Auch kann für zumindest zwei Stimmen oder zwei unterschiedliche Personen ein unterschiedliches Bestimmen oder Anpassen der Parameter der zumindest einen auditiven Meldung, z.B. hinsichtlich einer Anpassungsfunktion, Anpassungskennlinie, eines entsprechenden mathematischen Zusammenhangs, ausgeführt werden. Beispielsweise kann die zumindest eine auditive Meldung auf das Schreien oder Weinen eines Kindes oder auf eine Stimme eines Haustiers (nachdem diese als solche erkannt werden) nicht, oder anders angepasst werden, als auf eine sprachliche Kommunikation einer Person, die zugehörig ist zu der Personengruppe „Erwachsener“, z.B. „Mutter“ bzw. „Frau“. Die Unterschiede in der entsprechenden sprachlichen Kommunikation können nach vorausbestimmten Kriterien erkannt werden, z.B. auch vereinfacht durch eine Auswertung bzw. Erkennung menschlicher Sprache, entsprechender Wortsequenzen, etc. erfolgen.Also, for at least two voices or two different persons, a different determination or adaptation of the parameters of the at least one auditory message, e.g. in terms of an adaptation function, adaptation characteristic, a corresponding mathematical relationship. For example, the at least one auditory message may not be adapted to the crying or weeping of a child or a voice of a pet (after they are recognized as such), or otherwise, than to a linguistic communication of a person belonging to the group of persons. " Adult ", eg "Mother" or "woman". The differences in the corresponding linguistic communication can be recognized according to predetermined criteria, e.g. also simplified by an evaluation or recognition of human speech, corresponding word sequences, etc. take place.
Der Begriff „Personengruppen“ kann im Rahmen dieses Dokuments unterschiedliche, nach naturwissenschaftlichen Kriterien unterscheidbaren Gruppen bzw. Kategorien von Personen sein. Personengruppen können, z.B. Mitglieder einer Familie, Personen aus einem Bekanntenkreis einer Person oder einer Familie, „bekannte Gäste“, „unbekannte Gäste“, „Frauen“, „Männer“, „Kinder“, „Haustier“, „Haustiere einer bestimmter Art“, Personengruppen entsprechend Altersabschnitten, z.B. 0-2 Jahre, 2-4 Jahre, 4-8 Jahre, 8-12 Jahre, ... etc. oder vergleichbare Kategorien umfassen. Eine Personengruppe kann im Verfahren auch ein nach vorausbestimmten naturwissenschaftlichen Kriterien unterscheidbarer Persönlichkeitstyp, ein sogenannter Archetyp, ein Wahrnehmungstyp bzw. Kommunikationstyp sein.The term "groups of persons" in the context of this document may be different groups or categories of persons that can be differentiated according to scientific criteria. Groups of persons may, e.g. Members of a family, persons from a circle of acquaintances of a person or a family, "known guests", "unknown guests", "women", "men", "children", "pets", "pets of a certain kind", groups of persons according to age segments , eg 0-2 years, 2-4 years, 4-8 years, 8-12 years, ... etc. or include comparable categories. In the method, a group of persons may also be a personality type that can be differentiated according to predetermined scientific criteria, a so-called archetype, a type of perception or a type of communication.
Beispielsweise kann eine Personengruppe auch nach Kriterien eines Interessenschwerpunkts, einer Wahrnehmungsbehinderung, Schwerhörigkeit bzw. einer bestimmten Variante der Schwerhörigkeit, etc. definiert werden. Zwei bis fünf besagte Wahrnehmungstypen können im Einklang mit der sogenannten NLP (= neurolinguistischen Programmierung) definiert werden, z.B. visuell, auditiv, kinästhetisch, olfaktorisch gustatorisch. Dabei können Eigenschaften die diesen Wahrnehmungstypen entsprechend eigen sind bzw. ihnen zugeordnet werden, z.B. besondere Reize an welchen sich die Wahrnehmungstypen vorwiegend orientieren, Eigenschaften der Augenbewegung, Mimik, Körpersprache, Kommunikationsverhaltens, etc. im Verfahren berücksichtigt werden. Bevorzugt kann die Personengruppe alternativ oder zusätzlich einem oder mehreren sogenannten Kundensegmenten bzw. Verbrauchersegmenten zugeordnet werden oder ein mathematischer Zusammenhang zwischen mehreren Personengruppen und Kundensegmenten bzw. Verbrauchersegmenten ermittelt oder vorgegeben werden. Auf Basis dieser Daten und Zuordnungen können im Verfahren weitere Funktionalitäten, z.B. Informationsflüsse oder Kontextbezüge hergestellt werden.For example, a group of people may also be defined according to criteria of a focus of interest, a perception disability, a hearing loss or a specific variant of the deafness, etc. Two to five types of perception can be defined in accordance with so-called NLP (= neuro-linguistic programming), e.g. visual, auditory, kinaesthetic, olfactory gustatory. In this case, properties that are inherent to these types of perception or are assigned to them, e.g. special stimuli to which the types of perception are predominantly oriented, features of eye movement, facial expressions, body language, communication behavior, etc. are taken into account in the process. Preferably, the group of persons can alternatively or additionally be assigned to one or more so-called customer segments or consumer segments, or a mathematical relationship between several groups of persons and customer segments or consumer segments can be determined or specified. Based on these data and assignments, additional functionalities, e.g. Information flows or contextual references are produced.
Beispielsweise können 4-12 Personengruppen die bestimmten Persönlichkeitstypen entsprechen, etwa entsprechend den an sich bekannten Archetypen, wie z.B. Sternzeichen (bzw. diesen zugewiesenen Eigenschaften) oder einem statischem oder dynamischen Typenmodell, beispielsweise wie diese aus den Kommunikationswissenschaften, Theaterwissenschaft, etc. bekannt sind, gewählt werden. Persönlichkeitstypen können auch anhand ihres sogenannten Egogramms, z.B. basierend auf einem Test, unterschieden werden. Beispielsweise kann die Ausführung des Verfahrens für Personen zugehörig zu unterschiedlichen Personengruppen qualitativ bzw. quantitativ unterschiedlich erfolgen. Dabei können für Personen bzw. auf die Erkennung von Personen die (zumindest mit einem bestimmten Wahrscheinlichkeitsmaß) bestimmten oder unterschiedlichen Personengruppen zugehören, im Verfahren unterschiedliche (erwartete) Wahrnehmungseigenschaften, Kommunikationseigenschaften, etc. zugeordnet und bei der Ausführung des Verfahrens berücksichtigt werden. Beispielsweise kann eine zumindest wahrscheinliche oder ein gewisses Wahrscheinlichkeitsmaß übersteigernde Zugehörigkeit einer Person zu einer Personengruppe beim Erzeugen einer auditiven Meldung, Sprachmitteilung, etc. berücksichtigt werden. Somit kann ein (zumindest statistisch) verbessertes Ergebnis erzielt werden. For example, 4-12 groups of people may correspond to certain personality types, such as the archetypes known per se, such as zodiac signs (or those assigned properties), or a static or dynamic type model, such as those known from the communications sciences, theater studies, etc. to get voted. Personality types can also be distinguished by their so-called egogram, eg based on a test. For example, the execution of the method for persons belonging to different groups of people may be qualitatively or quantitatively different. In this case, for persons or for the recognition of persons the (at least with a certain probability measure) certain or different groups of persons belong, in the procedure different (expected) perception properties, communication properties, etc. assigned and taken into account in the execution of the method. For example, an affiliation of a person to a group of persons that is at least probable or that exceeds a certain degree of probability when generating an auditory message, voice message, etc., may be taken into account. Thus, an (at least statistically) improved result can be achieved.
Abhängig von einer Personengruppe einer an der Kommunikation beteiligten Person, beispielsweise entsprechend einer Rolle, die eine Person in der Familie hat, unterschiedliche Parameter der besagten Kommunikation unterschiedlich berücksichtigt werden und/oder unterschiedliche Parameter der auditiven Meldung, bestimmt, insbesondere in unterschiedlichen Maßen angepasst werden. Beispielsweise kann abhängig von der (erkannten, ermittelten, eingelesenen) Information zu der Personengruppe einer an der besagten Kommunikation beteiligten Person kann ein unterschiedliches Bestimmen oder Anpassen eines oder mehrerer Parameter der zumindest einen auditiven Meldung und/oder eines weiteren Audiosignals ausgeführt werden. Dabei können jeweils unterschiedliche Parameter der besagten Kommunikation jeweils unterschiedlich berücksichtigt bzw. gewichtet werden oder unterschiedlichen Varianten des Bestimmens der Parameter der auditiven Meldung und/oder des weiteren Audiosignals angewandt werden.Depending on a person group of a person involved in the communication, for example according to a person's role in the family, different parameters of said communication are considered differently and / or different parameters of the auditory message are determined, in particular adapted in different dimensions. For example, depending on the (recognized, determined, read) information on the group of persons involved in said communication, a different determination or adaptation of one or more parameters of the at least one auditory message and / or another audio signal can be performed. In each case, different parameters of said communication can each be considered or weighted differently or different variants of the determination of the parameters of the auditory message and / or the further audio signal can be used.
Als Wohnraum sind im Rahmen dieser Beschreibung ein oder mehrere Zimmer bzw. beliebig geformte Räumlichkeiten eines Hauses bzw. einer Immobilie zu verstehen. Der Wohnraum kann aus mehreren zumindest teilweise akustisch voneinander getrennten und/oder zumindest teilweise akustisch miteinander verbundenen Teilen, z.B. Zimmern, Kammern oder Räumlichkeiten oder Bereichen einer anderen Art bestehen. Der Begriff „Raumbereiche“ bezieht sich insbesondere auf Raumbereiche innerhalb eines Zimmers, oder innerhalb zumindest teilweise akustisch miteinander verbundener Räumlichkeiten, z.B. einer Wohnküche, eines Wohnzimmers und eines verbundenen Korridors. Beim dem Wohnraum handelt es sich stets um einen stationären Wohnraum. In jedem Fall bezieht sich der Begriff „Wohnraum“ auf eine wie auch immer gestaltete oder genutzte Immobilie.As a living space in the context of this description, one or more rooms or arbitrarily shaped premises of a house or a property to understand. The living space may consist of several at least partially acoustically separated and / or at least partially acoustically interconnected parts, e.g. Rooms, chambers or premises or areas of a different nature. The term "room areas" refers in particular to room areas within a room, or within at least partially acoustically interconnected premises, e.g. a kitchen, a living room and a connected corridor. The living room is always a stationary living room. In any case, the term "living space" refers to a property, however designed or used.
Das Verfahren kann bevorzugt mit einem System umfassend eine Sprachsteuerungsapplikation ausgeführt werden. Die Sprachsteuerungsapplikation kann z.B. zur Ausführung von sprachlich geäußerten Befehlen oder Eingaben von Personen und/oder zu zum Erzeugen einer zumindest teilweise computergestützten auditiver Meldungen für Personen (nach vorgegebenen Bedingungen, Logik, Events, etc.) ausgestaltet sein. Auch kann die Sprachsteuerungsapplikation zu einer interaktiven Unterhaltung oder zur Ausführung organisatorischer oder sonstiger Aufgaben ausgestaltet sein. Dabei können Teile einer Sprachsteuerungsapplikation, die normalerweise zur Ausführung bestimmter Sprachbefehle dienen, auch zur Ausführung des Verfahrens genutzt werden. Auch die Ausgabe der entsprechenden Schallwellen kann mit Mitteln der Sprachsteuerungsapplikation, z.B. mit zumindest einem Lautsprecher der Sprachsteuerungsapplikation erfolgen.The method may preferably be implemented with a system comprising a voice control application. The voice control application may e.g. to execute linguistically uttered commands or input from persons and / or to generate at least partially computerized auditory messages for persons (according to predetermined conditions, logic, events, etc.). Also, the voice control application may be configured for interactive entertainment or for performing organizational or other tasks. In this case, parts of a voice control application, which normally serve to execute certain voice commands, can also be used to execute the method. Also, the output of the corresponding sound waves may be obtained by means of the voice control application, e.g. with at least one speaker of the voice control application.
Das erfindungsgemäße System kann ein dezentrales oder verteiltes elektronisches System sein welches zur Ausführung des Verfahrens eingerichtet ist. Dieses kann z.B. eine Sprachsteuerungsapplikation, einen Smart-Home-Computer, einen Router bzw. ein Hausnetzwerk, ein Fernsehgerät, eine Audioausgabevorrichtung und insbesondere eine beabstandet angeordnete Recheneinheit, z.B. zur Verwaltung und/oder Aggregation der Daten, umfassen. Das System umfasst eine zur Ausführung des Verfahrens eingerichtete Recheneinheit, insbesondere zumindest eine Signalverarbeitungseinheit und/oder eine Einheit zur Sprachgenerierung. Das System kann zur Erzeugung einer bestimmten akustischen Wirkung auf Basis der auditiven Meldung durch mehrere im Wohnraum angeordnete oder virtuell erzeugte Lautsprecher ausgestaltet sein. Beispielsweise kann es mehrere im Wohnraum verteilte Lautsprecher, einen sogenannten unidirektionalen Lautsprecher oder einen Lautsprecher in einer sogenannten akustischen Richtstrahltechnologie oder mehrere in verschiedene Raumwinkel ausgerichtete und im Verfahren steuerbare (Hochton-)Lautsprecher umfassen. Das System kann zu der Ansteuerung einer oder mehrerer Audioausgabevorrichtungen, insbesondere eines Audiosystems oder eines oder mehreren Lausprecher zur Ausführung des Verfahrens ausgestaltet sein.The system according to the invention can be a decentralized or distributed electronic system which is set up to carry out the method. This may e.g. a voice control application, a smart home computer, a router, a home network, a television, an audio output device and, in particular, a spaced-apart computing unit, e.g. to manage and / or aggregate the data. The system comprises a computing unit set up for carrying out the method, in particular at least one signal processing unit and / or a unit for generating speech. The system can be designed to generate a specific acoustic effect based on the auditory message by a plurality of speakers arranged in the living space or virtually generated. For example, it can comprise a plurality of loudspeakers distributed in the living space, a so-called unidirectional loudspeaker or a loudspeaker in a so-called acoustic directional beam technology, or a plurality of loudspeakers oriented in different solid angles and controllable in the method. The system can be designed to control one or more audio output devices, in particular an audio system or one or more speakers for carrying out the method.
Ferner kann das System, insbesondere die zum System gehörende Sprachsteuerungsapplikation zur Erfassung der Daten von weiteren im Haus bzw. im Wohnraum betriebener oder zum Haus bzw. Wohnraum gehörenden Vorrichtungen und/oder zur Steuerung zumindest einer im Hauses oder Wohnraums betriebenen bzw. zum Haus oder Wohnraum gehörenden Vorrichtung ausgestaltet sein. Solche Vorrichtungen können z.B. eine Innenbeleuchtung, Außenbeleuchtung, Heizung, Lüftung, Wärmespeicher, Wärmetauscher, Fenster, Jalousie, ein Multimediasystem, ein Sicherheitssystem des Wohnraums, etc., sein. Ferner kann das System bzw. die Sprachsteuerungsapplikation auch in ein im Haus betriebenes Gerät, z.B. ein Haushaltgerät oder ein Spielzeug integriert sein oder mit einem solchen zur Ausführung des Verfahrens vernetzt sein. In einem Beispiel des Verfahrens werden die Daten zur Erzeugung zumindest einer auditiven Meldung und/oder zumindest eines Parameters in einer Recheneinheit ermittelt und eine Ausgabe der entsprechenden Schallwellen in einer oder mehreren, insbesondere drahtlos verbundenen Audioausgabevorrichtungen im Wohnraum veranlasst. Furthermore, the system, in particular the voice control application belonging to the system for acquiring the data of further devices operated in the house or in the living space or belonging to the home or living space and / or for controlling at least one in the house or living space operated or to the house or living space belonging device to be configured. Such devices may be, for example, an interior lighting, exterior lighting, heating, ventilation, heat storage, heat exchangers, windows, blinds, a multimedia system, a security system of the living space, etc., be. Furthermore, the system or the voice control application can also be integrated into a device operated in the house, for example a domestic appliance or a toy, or can be networked with such a device for carrying out the method. In one example of the method, the data for generating at least one auditory message and / or at least one parameter is determined in a computing unit and causes an output of the corresponding sound waves in one or more, in particular wirelessly connected audio output devices in the living space.
Im Verfahren werden ein oder mehrere Parameter der besagten Kommunikation ermittelt. Die Parameter betreffen insbesondere eine aktuell stattfindende oder bevorstehende Kommunikation an der besagten zumindest zwei Personen (aktiv) beteiligt sind. Ein Parameter der Kommunikation kann beispielsweise den Inhalt der Kommunikation und/oder einen oder mehrere akustische Parameter der auditiven Kommunikation kennzeichnen. Ferner können die Parameter der besagten Kommunikation (z.B. Parameter entsprechender Schallwellen) auch auf eine nahe Zukunft (von ca. 1, 5, 10, 20, 40 Sekunden) bezogen sein oder für die nahe Zukunft prädiziert werden. Bevorzugt repräsentieren die besagten Parameter der Kommunikation, bzw. die entsprechenden Arten der Parameter:
- - einen Richtungsparameter, kennzeichnend eine oder mehrere Richtungen, der besagten Kommunikation,
- - eine räumliche Verteilung des akustischen Signals der Sprache (der entsprechenden Druckwellen), entsprechende Phasenparameter, z.B. Phasenverschiebungsparameter;
- - einen Frequenzparameter der auditiven Kommunikation, z.B. eine (effektive bzw. effektiv genutzte) Bandbreite, ein Frequenzspektrum, ein Energiedichtespektrum und dergleichen;
- - Dynamik einer oder mehreren Amplituden und/oder Frequenzen der im Wohnraum hörbaren auditiven Kommunikation;
- - eine oder mehrere Stimmenparameter oder Erkennungsdaten für Stimmen einer oder mehreren auditiv kommunizierenden Personen;
- - einen Amplitudenverlauf, bzw. eine zeitliche Amplitudenveränderung, bzw. eine Amplitudendynamik, eine Veränderung des Frequenzspektrums bzw. des Energiedichtespektrums der entsprechender Schallwellen;
- - ein inhaltliches Merkmal eines Abschnitts bzw. zumindest einer Transaktion aus der besagten Kommunikation zwischen zumindest zwei Personen. Das inhaltliche Merkmal kann sich auf die in einem hinreichend großen Abschnitt der Kommunikation repräsentierte (sprachliche, inhaltliche) Information bzw. einen Inhalt einer mit dem Audiosignal repräsentierten Kommunikationsbotschaft beziehen. Ein inhaltlicher Parameter kann bevorzugt einen oder mehrere Inhalte bzw. Merkmale des Inhalts der besagten Kommunikation kennzeichnen. Ein inhaltliches Merkmal muss dabei nicht einem Informationsgehalt der Kommunikation entsprechen;
- - linguistische Parameter der Kommunikation, z.B. bestimmte in der Kommunikation vorkommende linguistische Strukturen bzw. Konstrukte;
- - ein im Rahmen der besagten Kommunikation auftretendes oder erwartetes Kommunikationsverhalten oder den Kommunikationsstil zumindest einer Person.
- a directional parameter indicative of one or more directions, said communication,
- a spatial distribution of the acoustic signal of the speech (the corresponding pressure waves), corresponding phase parameters, eg phase shift parameters;
- a frequency parameter of the auditory communication, eg a (effectively or effectively used) bandwidth, a frequency spectrum, an energy density spectrum and the like;
- Dynamics of one or more amplitudes and / or frequencies of the auditory communication audible in the living space;
- - one or more voice parameters or recognition data for voices of one or more auditory communicating persons;
- an amplitude variation, or a temporal amplitude change, or an amplitude dynamic, a change in the frequency spectrum or the energy density spectrum of the corresponding sound waves;
- a content-related feature of a section or at least one transaction from said communication between at least two persons. The content-related feature can refer to the (linguistic, content-related) information or content of a communication message represented by the audio signal, which is represented in a sufficiently large portion of the communication. A content parameter may preferably characterize one or more contents of the content of said communication. A content-related feature does not have to correspond to an information content of the communication;
- linguistic parameters of communication, eg certain linguistic structures or constructs occurring in the communication;
- a communication behavior occurring or expected within the scope of said communication or the communication style of at least one person.
Ferner kann ein Parameter der Kommunikation auch ein Maß der Veränderung bzw. Abweichung eines besagten Parameterwertes sein. Beispielsweise kann ein Parameter der Kommunikation auch ein Maß der Veränderung eines oder mehrerer Parameterwerte in Abhängigkeit von weiteren Kriterien kennzeichnen. Ein Parameter der Kommunikation kann als eine Funktion eines der besagten Parameterwerte abhängig von einer weiteren Größe ausgedrückt werden.Furthermore, a parameter of the communication can also be a measure of the change or deviation of a said parameter value. For example, a parameter of the communication may also indicate a measure of the change of one or more parameter values depending on further criteria. A parameter of the communication may be expressed as a function of one of said parameter values depending on another quantity.
Ein Parameter der Kommunikation kann sich auf eine Kommunikationsbotschaft, eine sogenannte Transaktion oder mehrere Transaktionen innerhalb der besagten Kommunikation beziehen. Als Transaktion gilt dabei ein Schritt in der Kommunikation zweier Menschen, der zum Beispiel aus einer Frage und einer Antwort, einer Aussage und einer Gegenaussage oder einer Empfehlung, einer Weisung, eines Kommando und einer Rückfrage besteht. Beispielsweise kann ein Parameter einer auditiven Meldung bestimmt oder angepasst werden abhängig von einer in der Vergangenheit liegenden, insbesondere häufig wiederholter und/oder einer aktuellen und/oder zumindest einen erwarteten Transaktion erfolgen, wobei die Transaktion zu einer Kommunikation zwischen den zumindest zwei Personen (nicht etwa mit oder mittels einer optional vorhandenen technischen Vorrichtung) gehört.A parameter of the communication may relate to a communication message, a so-called transaction, or multiple transactions within said communication. A transaction is a step in the communication of two people, consisting of a question and an answer, a statement and a counter statement or a recommendation, an instruction, a command and a query. For example, a parameter of an auditory message may be determined or adjusted depending on a past, particularly frequently repeated and / or current and / or at least expected transaction, the transaction being for communication between the at least two persons (not with or by means of an optionally available technical device).
Bei dem zumindest einem Parameter der Kommunikation kann es sich um ein in der Vergangenheit ermittelten Parameter der Kommunikation, und/oder einem aktuellen Parameter und/oder zumindest einem prädizierter Parameter der Kommunikation handeln. Insbesondere werden zumindest zwei Parameter bzw. Parameterwerte eines Parameters aus unterschiedlichen Zeitintervallen ermittelt und berücksichtigt. Beispielsweise wird eine zeitliche Sequenz der entsprechenden Parameterwerte eines oder mehrerer Parameter der Kommunikation, z.B. innerhalb eines gewissen Zeitintervalls, ermittelt und berücksichtigt. Beispielsweise kann ein Parameter der Kommunikation auch ein Maß der Veränderung eines Parameterwerts im Verlauf der Zeit und/oder in Bezug auf eine auf den Raum bezogene (räumlich veränderliche) Größe, z.B. Richtung und/oder Distanz und/oder bestimmte Flächenbereiche oder Volumenbereiche, die einen oder mehrere bestimmte Raumbereiche des Wohnraums repräsentieren. Beispielsweise kann ein Parameter der besagten Kommunikation ein zeitlicher Gradient und/oder ein räumlicher Gradient eines oder mehreren Parameterwerte sein.The at least one parameter of the communication may be one in the Past determined parameters of the communication, and / or a current parameter and / or act at least one predicated parameter of the communication. In particular, at least two parameters or parameter values of a parameter from different time intervals are determined and taken into account. For example, a temporal sequence of the corresponding parameter values of one or more parameters of the communication, eg within a certain time interval, is determined and taken into account. For example, a parameter of the communication may also be a measure of the change of a parameter value over time and / or in relation to a space (spatially varying) size, eg direction and / or distance, and / or certain surface areas or volume areas, the one or several specific room areas of the living space. For example, a parameter of said communication may be a temporal gradient and / or a spatial gradient of one or more parameter values.
Zumindest ein Parameter der besagten Kommunikation im Wohnraum kann im Verfahren auf Basis von Sensordaten, einer Historie, z.B. zu einer oder mehreren, insbesondere früheren Kommunikationen im Wohnraum oder Kommunikationen mit Beteiligung bestimmter Personen, Personen zugehörig zu bestimmten Personengruppen, etc., ermittelt, bevorzugt prädiziert werden. Dabei kann eine, zumindest vereinfachte, Wahrscheinlichkeitsrechnung oder Schätzung, insbesondere bei einer Prädiktion eines oder mehrerer Parameter angewandt werden. Bevorzugt kann zumindest ein Parameter der Kommunikation mittels eines maschinellen Lernens, insbesondere anhand eines Abgleichs bzw. einer Verrechnung einer Vielzahl der Parameter aus der Historie für einen oder mehrere Kommunikationsvorgänge und/oder für eine oder mehrere (bestimmte) Personen ermittelt werden. Insbesondere erfolgt das besagte Lernen im Zusammenhang oder unter Berücksichtigung einer innerhalb eines bestimmten Zeitintervalls mit dem Abschnitt der Kommunikation erfassten Szene im Wohnraum. Dabei kann, ein späteres Ermitteln eines Parameters der Kommunikation abhängig von einem Parameter einer dann erfassten, insbesondere erkannten Szene erfolgen. Bevorzugt erfolgt das Bestimmen eines Parameters einer auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals abhängig von einer Kombination aus Lerndaten auf Basis mehrerer Kommunikationen in der Vergangenheit und eines aktuellen oder aktuell prädizierten Parameter der besagten Kommunikation.At least one parameter of said communication in the living space may be stored in the method on the basis of sensor data, a history, e.g. to one or more, in particular earlier communications in the living space or communications involving certain persons, persons belonging to specific groups of persons, etc., are determined, preferably predicted. In this case, an, at least simplified, probability calculation or estimation, in particular in a prediction of one or more parameters can be applied. Preferably, at least one parameter of the communication can be determined by means of machine learning, in particular by means of a comparison or a clearing of a plurality of the parameters from the history for one or more communication processes and / or for one or more (specific) persons. In particular, the said learning takes place in the context of or taking into account a scene in the living space detected within a certain time interval with the section of the communication. In this case, a later determination of a parameter of the communication can take place as a function of a parameter of a scene then detected, in particular recognized scene. Preferably, the determination of a parameter of an auditory message and / or a portion of the further audio signal is dependent on a combination of learning data based on a plurality of communications in the past and a current or currently predicted parameter of said communication.
Beispielsweise repräsentiert zumindest ein Parameter der Kommunikation ein Kommunikationsvorhaben und/oder einen Stimmenparameter zumindest einer, insbesondere einer bestimmten Person im Wohnraum und/oder einer Person in einem bestimmten Raumbereich, z.B. an einem Sitzplatz im Wohnraum. Dabei kann das Verfahren ein Erfassen eines Kommunikationsvorhabens und/oder einer Stimme zumindest einer, insbesondere einer bestimmten Person im Wohnraum und/oder einer Person in einem bestimmten Raumbereich im Wohnraum erfolgen, wobei daraufhin ein Bestimmen eines Parameters einer auditiven Meldung und/oder eines Abschnitts des weiteren auszugebenden Audiosignals abhängig von dem erfassten Kommunikationsvorhaben und/oder der Stimme erfolgt.For example, at least one parameter of the communication represents a communication project and / or a voice parameter of at least one, in particular a specific person in the living space and / or a person in a certain spatial area, e.g. at a seat in the living room. The method may involve recording a communication project and / or a voice of at least one, in particular a specific person in the living space and / or a person in a specific room area in the living space, thereupon determining a parameter of an auditory message and / or a section of the further output audio signal depending on the detected communication project and / or the voice takes place.
Das Kommunikationsvorhaben kann sich z.B. auf einen erwarteten Beginn einer auditiven Kommunikation oder eine erwartete Transaktion bzw. eine bestimmte erwartete Transaktion oder einer Transaktion einer bestimmten Art (Frage, Ansage, Reaktion, Kommentar, Weisung, Bitte, etc.) beziehen. Das Kommunikationsvorhaben kann insbesondere kennzeichnen, dass von einer bestimmten Person oder von einer in einem bestimmten Raumbereich befindlichen, z.B. an einem bestimmten Sitzplatz sitzender Person, insbesondere mit einem gewissen (einen Schwellenwert übersteigenden) Wahrscheinlichkeitsmaß eine sprachliche Kommunikation, z.B. das „Sprechen“, zu erwarten ist. Analog kann mit dem Parameter „Kommunikationsvorhaben“ auch die Information ermittelt und bereitgestellt werden, dass keine sprachliche Kommunikation (ggf. von einer Person im Wohnraum oder einer bestimmten Person) in der nahen Zukunft oder lediglich mit einem vergleichsweise niedrigen Wahrscheinlichkeitsmaß zu erwarten ist.The communication project may be e.g. refer to an expected start of an auditory communication or an expected transaction or a particular expected transaction or transaction of a particular type (question, announcement, response, comment, instruction, request, etc.). In particular, the communication project may indicate that it is from a particular person or from a particular area of space, e.g. person seated at a particular seat, in particular with a certain degree of probability (exceeding a threshold), linguistic communication, e.g. the "speaking" is to be expected. Similarly, with the parameter "communication project" also the information can be determined and provided that no linguistic communication (possibly of a person in the living room or a certain person) in the near future or only with a comparatively low probability measure is to be expected.
Auch kann mit dem Kommunikationsvorhaben ein prädizierter Wert eines weiteren, z.B. akustischen, Parameters einer erwarteten Kommunikation, beispielsweise eine erwartete Größenordnung eines akustischen Parameters, ermittelt bzw. geschätzt und berücksichtigt werden. Das Kommunikationsvorhaben kann als einer oder als mehrere qualitative Werte und/oder quantitative Werte des Parameters der Kommunikation bzw. Transaktion repräsentiert werden, der einen (wahrscheinlichen folgenden), Abschnitt der Kommunikation bzw. erwiderte Transaktion kennzeichnet. Dabei kann sich der Parameter „Kommunikationsvorhaben“ auch auf einen, zumindest wahrscheinlichen, Abschluss bzw. die Beendigung eines Abschnitts der sprachlichen Kommunikation beziehen. Beispielsweise kann das Kommunikationsvorhaben auch ein voraussichtliches Ende eines Satzes, einer Phrase, oder einer bestimmten linguistischen Struktur innerhalb der Kommunikation kennzeichnen.Also, with the communication project, a predicted value of another, e.g. acoustic, parameters of an expected communication, for example, an expected magnitude of an acoustic parameter, are determined or estimated and taken into account. The communication project may be represented as one or more qualitative values and / or quantitative values of the parameter of the communication or transaction identifying a (probable following), portion of the communication or returned transaction. In this case, the parameter "communication project" can also refer to an at least probable conclusion or the termination of a section of the linguistic communication. For example, the communication project may also identify an anticipated end of a sentence, phrase, or linguistic structure within the communication.
Das Kommunikationsvorhaben und/oder die Stimmenparameter zumindest einer, insbesondere einer bestimmten Person können beispielsweise mit den im Wohnraum betriebenen elektronischen Mitteln bzw. mit Mitteln des Hauses ermittelt werden. Solche Mittel können z.B. einen oder mehrere Mikrophone, eine bildgebende Sensorik, eine Bildverarbeitungsvorrichtung umfassen. Besonders bevorzugt kann ein Kommunikationsvorhaben mit einer Kamera, z.B. mit einer oder mehreren digital vernetzten Kameras und einer entsprechend eingerichteten Bildverarbeitung erfolgen. Dabei kann z.B. eine Merkmalserkennung, Objekttracking, Eye-Tracking, Personenerkennung, Mimikerkennung, Absichtserkennung bzw. Prädiktion, etc. ausgeführt werden.The communication project and / or the voice parameters of at least one, in particular a specific person can be determined, for example, with the electronic means operated in the living space or with means of the house. Such means may be one or more Microphones, an imaging sensor, an image processing device include. Particularly preferred may be a communication project with a camera, for example with one or more digitally networked cameras and a correspondingly configured image processing. In this case, for example, feature recognition, object tracking, eye tracking, person recognition, facial expressions recognition, intent recognition or prediction, etc. can be performed.
Ein Kommunikationsvorhaben, bzw. ein Parameterwert des Kommunikationsvorhabens kann im Verfahren abhängig von einem Parameter oder Muster einer oder mehreren körperlichen Regungen ermittelt werden, die beispielsweise dem Sprechen und/oder einer Pause im Redefluss oder einer bestimmten Veränderung im Redefluss vorausgeht. Alternativ oder zusätzlich kann der zumindest ein besagter Parameter der Kommunikation, z.B. das Kommunikationsvorhaben auch anhand eines oder mehrerer körperlicher Parameter oder anhand von Geräuschen, z.B. Atemgeräuschen, die einem Sprechen vorausgehen oder sonstiger mit einem Sprechen korrelierender Größen, erkannt werden.A communication project or a parameter value of the communication project can be determined in the method as a function of a parameter or pattern of one or more physical impulses, which precedes, for example, speaking and / or a pause in the flow of speech or a certain change in the flow of speech. Alternatively or additionally, the at least one said parameter of the communication, e.g. the communication project also on the basis of one or more physical parameters or sounds, e.g. Breath sounds that precede speech or other variables that correlate with speaking are recognized.
Gemäß einer zweckmäßigen Ausgestaltung betrifft das Bestimmen oder Anpassen des Parameters der zumindest einen auditiven Meldung einen Raumklangparameter. Dabei kann zumindest eine Richtung aus der ein akustischer Inhalt auf Basis der besagten auditiven Meldung ausgegeben wird und/oder wahrnehmbar gemacht wird bestimmt oder angepasst werden. Insbesondere kann auch ein Raumbereich des stationären Wohnraums bestimmt oder angepasst werden aus dem diese auditive Meldung, insbesondere mit einem gewünschten Raumklangeffekt, wahrnehmbar gemacht wird.According to an expedient embodiment, determining or adjusting the parameter of the at least one auditory message relates to a surround parameter. In this case, at least one direction from which an acoustic content is output on the basis of the said auditory message and / or made perceptible can be determined or adapted. In particular, a spatial region of the stationary living space can also be determined or adapted from which this auditory message, in particular with a desired spatial sound effect, is made perceptible.
Bevorzugt kann dabei zumindest eine Richtung aus der ein akustischer Inhalt (vereinfacht: Schallwellen) auf Basis der auditiven Meldung ausgegeben oder für zumindest eine im Wohnraum anwesende, wahrscheinlich anwesende oder angenommene Person wahrnehmbar für zumindest eine im Wohnraum anwesende oder wahrscheinlich anwesende Person gemacht wird, zweckmäßig angepasst werden. Beispielsweise kann durch den Raumklangparameter eine von dem oder den Personen im Wohnraum wahrnehmbare Richtung, aus welcher der zumindest ein akustischer Inhalt (die entsprechenden Schallwellen) auf Basis des auszugebenden Audiosignals ausgegeben oder wahrnehmbar gemacht wird verändert, insbesondere (dynamisch) gesteuert werden.Preferably, at least one direction from which an acoustic content (simplified: sound waves) is output on the basis of the auditory message or made perceptible to at least one person present in the living space, probably present or assumed for at least one person present or likely present in the living space, is expedient be adjusted. For example, the room sound parameter can be used to change, in particular (dynamically), a direction perceptible by the person or persons in the living space from which the at least one acoustic content (the corresponding sound waves) is output or made perceptible on the basis of the audio signal to be output.
Beispielsweise wird ein Parameter der besagten Kommunikation ermittelt, der kennzeichnet, wie viele Personen, insbesondere welche Personen oder Personen in bestimmten Raumbereichen oder an welchen Sitzplätzen, die eine aktuell stattfindende oder prädizierte sprachliche Kommunikation, insbesondere zumindest mit einem gewissen Wahrscheinlichkeitsmaß, betrifft. Daraufhin können abhängig von dem Parameter ein oder mehrere Raumklangparameter für die Ausgabe der zumindest einen auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals bestimmt bzw. angepasst werden. Beispielsweise kann dabei eine Verteilung der Schallwellen (auf Basis zumindest eines Abschnitts der zumindest einer auditiven Meldung und/oder des weiteren Audiosignals) in mehreren akustisch verbundenen und/oder akustisch teilweise abgetrennten Teilen des Wohnraumes zweckmäßig gesteuert werden.For example, a parameter of the said communication is determined which identifies how many persons, in particular which persons or persons in certain room areas or at which seats, concern a currently occurring or predicated linguistic communication, in particular with at least a certain degree of probability. Thereupon, depending on the parameter, one or more surround parameters for the output of the at least one auditory message and / or a section of the further audio signal can be determined or adapted. For example, a distribution of the sound waves (based on at least a portion of the at least one auditory message and / or the further audio signal) in a plurality of acoustically connected and / or acoustically partially separated parts of the living space can be appropriately controlled.
Bevorzugt kann ein Raumklangparameter mit dem die auditive Meldung ausgegeben wird, abhängig von der ermittelten Verteilung der Personen auf die Raumbereiche und/oder Sitzplätze derart angepasst werden, dass ein zumindest auf zwei Personen bezogener kumulierter Wert, repräsentierend die Güte der Wahrnehmbarkeit und/oder Verständlichkeit zumindest eines Teils der auditiven Meldung und/oder zumindest einen besagten Kommunikation erhöht bzw. zu einem Zielwert hin, gesteuert wird. Es kann ein kumulierter Wert aus den gemessenen, ermittelten, geschätzten oder simulierten Werten der Wahrnehmbarkeit und/oder Verständlichkeit für zumindest zwei im Wohnraum anwesende, bzw. wahrscheinlich anwesende Personen sein. Die Wahrnehmbarkeit kann sich auch auf eine räumliche Verteilung der entsprechenden Schallwellen bzw. Klangquellen und/oder auf ermittelte oder angenommene Wahrnehmungseigenschaften der betreffenden Personen oder Personen aus betreffenden Personengruppen beziehen. Dabei kann eine gewünschte Raumklangwahrnehmung einer auditiven Meldung und/oder des weiteren Audiosignals, z.B. eines Multimediainhalts, durch zumindest zwei Personen im Wohnraum erreicht oder verbessert werden, bevorzugt ohne oder mit einer verringerten Störung einer Kommunikation zwischen diesen Personen oder anderen Personen im Wohnraum. Alternativ oder zusätzlich kann ein Maß einer jeweiligen (einseitigen und/oder gegenseitigen) Störung bzw. einer Störungsanfälligkeit in Bezug auf (bzw. für) eine menschliche Wahrnehmung (z.B. als ein Maß einer psychoakustischen Maskierung, ein Maß einer Korrelation zumindest eines Parameters, ein Maß einer inhaltlichen Korrelation die zur Störung der Verständlichkeit führen kann) von zumindest einem Abschnitt des auszugebenden Audiosignals und einem Abschnitt der Kommunikation ermittelt, bevorzugt prädiziert. Diese kann (beispielsweise als eine Umkehrgröße zu der besagten Wahrnehmbarkeit und/oder Verständlichkeit oder als Basis zum Ermitteln der Wahrnehmbarkeit und/oder Verständlichkeit) berücksichtigt werden.Preferably, a surround parameter with which the auditory message is output can be adjusted depending on the determined distribution of the persons to the spatial areas and / or seats such that a cumulative value related at least to two persons representing the quality of the perceptibility and / or intelligibility at least a portion of the auditory message and / or at least one said communication is increased or driven towards a target value. It may be a cumulative value of the measured, determined, estimated or simulated values of perceptibility and / or comprehensibility for at least two persons present or likely to be present in the living space. The perceptibility may also refer to a spatial distribution of the corresponding sound waves or sound sources and / or to determined or assumed perception properties of the persons or persons concerned from groups of persons concerned. In this case, a desired surround sound perception of an auditory message and / or the further audio signal, e.g. a multimedia content, be achieved or improved by at least two people in the living room, preferably without or with a reduced disruption of communication between these people or other people in the living room. Alternatively or additionally, a measure of a respective (one-sided and / or mutual) disorder or a susceptibility to malfunction in relation to (or for) a human perception (eg as a measure of psychoacoustic masking, a measure of a correlation of at least one parameter, a measure a content correlation that can lead to the disturbance of intelligibility) of at least a portion of the output audio signal and a portion of the communication determined, preferably predicted. This can be taken into account (for example, as an inverse of the said perceptibility and / or intelligibility or as the basis for determining perceptibility and / or intelligibility).
Beispielsweise kann nur oder überwiegend ein bestimmter Teil einer auditiven Meldung und/oder des weiteren Audiosignals, welcher in einem Raumklangsystem, z.B. in einem Kinoformat, die Sprache repräsentiert, verändert werden. Dabei kann die hörbare Position aus welcher ein Großteil der entsprechenden Schallwellen ausgegeben wird, insbesondere für die Wahrnehmung zumindest einer Person im Wohnraum durch eine Anpassung des zumindest einen Raumklangparameters räumlich verändert, z.B. verschoben werden. Dabei kann ein anderer Teil, bzw. Kanal des Audiosignals, z.B. repräsentierend eine über eine (raumklangfähige) Audioausgabevorrichtung auszugebende Hintergrundmusik, z.B. weniger oder auf eine andere Weise, abhängig von dem ermittelten, insbesondere prädizierten Parameter der auditiven Kommunikation angepasst werden. Dabei kann im Verfahren auch eine Verbesserung der Hörbarkeit bestimmter Teile, insbesondere Kanäle eines Raumklangs bzw. den Raumklang umfassenden Audiosignals durch zumindest eine (bestimmte) Person erfolgen.For example, only or predominantly a specific part of an auditory message and / or the further audio signal, which in a surround sound system, for example in a cinema format, the language is changed. In this case, the audible position from which a majority of the corresponding sound waves is output, in particular for the perception of at least one person in the living space by adapting the at least one surround parameter spatially changed, for example, be moved. In this case, another part, or channel, of the audio signal, for example representing a background music to be output via a (surround soundable) audio output device, for example less or in some other way, can be adapted depending on the determined, in particular predicated parameters of the auditory communication. In this case, in the method, an improvement of the audibility of certain parts, in particular channels of a room sound or the surround sound comprehensive audio signal by at least one (certain) person done.
Auch kann im Verfahren in diesem Zusammenhang eine, insbesondere inhaltliche Verteilung bzw. eine zweckmäßige Trennung, der auditiven Kommunikation einerseits und einer auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals (quasi „auf zwei der Ohren eines potentiellen Zuhörers oder eines bestimmten Zuhörers“) ausgeführt werden, was wiederum eine gegenseitige Maskierung der auditiven Kommunikation und der auditiven Meldung und/oder des auszugebenden weiteren Audiosignals verringert und/oder eine verbesserte akustische Wahrnehmbarkeit durch einen oder mehrere (bestimmte) Personen ermöglicht. Ferner kann dabei eine gehirngerechtere Wahrnehmung von zumindest zwei Sprache umfassenden Inhalten durch einen Zuhörer verbessert werden. Dabei können die entsprechenden Inhalte (die zu den erzeugten bzw. angepassten auditiven Reizen passen) bei ihrer Wahrnehmung durch eine oder mehrere Personen besser inhaltlich eingeordnet, verarbeitet oder interpretiert werden.Also, in the method in this context, a distribution, in particular content distribution or a purposeful separation, of the auditory communication on the one hand and an auditory message and / or a portion of the further audio signal (quasi "on two of the ears of a potential listener or a particular listener") which, in turn, reduces mutual masking of the auditory communication and the auditory message and / or the additional audio signal to be output, and / or enables improved auditory perceptibility by one or more (specific) persons. Furthermore, a more brain-appropriate perception of content comprising at least two languages can be improved by a listener. The corresponding contents (which match the generated or adapted auditory stimuli) can be better classified, processed or interpreted in their perception by one or more persons.
Im Verfahren kann ein derartiges Bestimmen bzw. Anpassen der Parameter der zumindest einen auditiven Meldung ausgeführt werden, dass eine Verschiebung der in bestimmten Teilen des Wohnraums erzeugten akustischen Leistung und/oder eine Veränderung der Phase und/oder eine relative Zeitverzögerung (z.B. in einem Millisekundenbereich) des aus einem oder mehreren bestimmten (physikalischen oder virtuellen) Lautsprechern ausgegebenen, auf Basis der auditiven Meldung erzeugten Schallwellen, erfolgt. Insbesondere kann eine relative zeitliche Verzögerung oder eine frequenzabhängige Veränderung einer Phasenverschiebung zwischen den durch zumindest zwei (physikalische oder virtuelle) Lautsprecher auszugebenden der auditiven Meldung entsprechender akustischen Schallwellen oder bestimmte bzw. durch bestimmte Eigenschaften gekennzeichnete Schallwellenmuster, gesteuert oder geregelt werden.In the method, such a determination or adaptation of the parameters of the at least one auditory message can be carried out that a shift of the acoustic power generated in certain parts of the living space and / or a change of the phase and / or a relative time delay (eg in a millisecond range) of the sound waves generated by one or more specific (physical or virtual) loudspeakers and generated on the basis of the auditory message. In particular, it is possible to control or regulate a relative time delay or a frequency-dependent change in a phase shift between the acoustic sound waves emitted by at least two (physical or virtual) loudspeakers and certain sound wave patterns.
Alternativ oder zusätzlich kann abhängig von einem oder mehreren ermittelten Parametern der Kommunikation veranlasst werden, dass die Erzeugung akustischer Schallwellen für einen bestimmten Raumbereich des Wohnraums oder für eine bestimmte Person, auf Basis der zumindest einen (bestimmten) auditiven Meldung und/oder zumindest eines (bestimmten) Abschnitts des weiteren Audiosignals, zumindest teilweise oder abschnittsweise mit anderen Mitteln, z.B. mit anderen Lautsprechern, mit einer anderen Kombination von Lautsprechern oder mit einer weiteren Ausgabevorrichtung, z.B. einer Audioausgabevorrichtung oder einer Multimediaausgabevorrichtung erfolgt. Dabei können die akustischen Parameter, insbesondere Leistungsparameter, der korrespondierender Schallwellen, die in einem bestimmten Raumbereich (in dem sich ein Zuhörer befindet oder vermutet wird) ankommen, zweckmäßig gesteuert werden, z.B. im Wesentlichen aufrechterhalten oder verhältnismäßig geringfügig verändert werden. Dabei kann beispielsweise das Übermitteln der Daten zur Ausgabe einer auditiven Meldung und/oder können die entsprechenden Ausgabeparameter für zumindest zwei vernetzte Audioausgabevorrichtungen gesteuert werden.Alternatively or additionally, depending on one or more determined parameters of the communication, it can be arranged that the production of acoustic sound waves for a certain room area of the living space or for a specific person, based on the at least one (specific) auditory message and / or at least one (determined ) Portion of the further audio signal, at least partially or in sections by other means, eg with other speakers, with another combination of speakers, or with another output device, e.g. an audio output device or a multimedia output device. In this case, the acoustic parameters, in particular performance parameters, of the corresponding sound waves arriving in a certain area of space (in which a listener is or is suspected) can be suitably controlled, e.g. be substantially maintained or changed to a relatively minor extent. In this case, for example, the transmission of the data for outputting an auditory message and / or the corresponding output parameters for at least two networked audio output devices can be controlled.
Ferner kann auf Basis einer auditiven Meldung eine oder mehrere (von zumindest einer Person im Wohnraum wahrnehmbare) Klangquellen erzeugt werden. Ein oder mehrere Inhalte der auditiven Meldung, bzw. die mit einer auditiven Meldung zu übermittelnde Inhalte können, abhängig von einem oder mehreren im Verfahren ermittelten Parameter bzw. Informationen, insbesondere nach einer vorgegebenen Logik, an zumindest zwei im Wohnraum wahrnehmbare Klangquellen zugeordnet werden. Bevorzugt repräsentiert dabei der zumindest eine anzupassende Raumklangparameter des Audiosignals einen oder mehrere Merkmale die das Erzeugen von einer oder mehrerer (auch virtueller, zumindest durch menschliche Wahrnehmung hörbarer) Klangquellen bestimmt. Beispielsweise repräsentiert ein im Verfahren bestimmter oder angepasster Raumklangparameter eine Richtung, einen Abstand, eine Position, einen akustischen Parameter einer oder mehrerer solcher Klangquellen. Dabei entspricht die Position der Klangquelle bevorzugt nicht einer Position eines Lautsprechers. Vielmehr sind akustisch, beispielsweise mittels einer Erzeugen und Steuerung eines entsprechenden Raumklangsignals gebildete (virtuelle von Person wahrnehmbare) Klangquellen gemeint.Furthermore, one or more sound sources (perceptible by at least one person in the living space) can be generated on the basis of an auditory message. Depending on one or more parameters or information determined in the method, in particular according to a predetermined logic, one or more contents of the auditory message, or the contents to be transmitted with an auditory message, can be assigned to at least two sound sources perceptible in the living space. Preferably, the at least one spatial sound parameter of the audio signal to be adapted thereby represents one or more features that determine the generation of one or more sound sources (also virtual, at least audible by human perception). For example, a spatial sound parameter determined or adjusted in the method represents a direction, a distance, a position, an acoustic parameter of one or more such sound sources. The position of the sound source preferably does not correspond to a position of a loudspeaker. Rather, acoustic, for example, by means of generating and controlling a corresponding room sound signal formed (virtual perceptible by person) sound sources meant.
Das Erzeugen der zumindest einen Klangquellen bezieht sich bevorzugt auf einen oder mehrere bestimmte Raumbereiche beziehen, aus welchen diese wahrnehmbar (hörbar) gemacht werden. Bevorzugt kann ein besagter Raumklangparameter die Werte für Richtung, Abstand, Position, akustische Parameter repräsentieren, die zu zumindest einer Klangquelle zugeordnet werden. Bevorzugt kann ein anzupassender Parameter, z.B. der besagte anzupassender Raumklangparameter (auch) bestimmen, für den Zuhörer aus welchem Raumbereich des Wohnraums, und/oder von welchem Sitzplatz, und/oder von welcher Person, Person zugehörig zu einer Personengruppe oder einer bestimmten Person die jeweilige Klangquelle, wahrnehmbar oder mit verbesserten Parametern wahrnehmbar gemacht werden soll. Beispielsweise werden auf Basis der auditiven Meldung, abhängig von den besagten Parametern der sprachlichen Kommunikation, für zumindest zwei unterschiedliche Raumbereiche oder für zwei anwesende Personen zumindest zwei hörbare Klangquellen erzeugt, die unterschiedliche, jeweils zweckmäßig bestimmte, objektiv messbare oder subjektiv von den anwesenden oder angenommenen Personen wahrnehmbare Parameter, z.B. Richtungen, Positionen, Lautstärken, aufweisen.Generating the at least one sound source preferably refers to one or more particular space regions from which they are rendered audible. Preferably, said surround sound parameter may represent the values of direction, distance, position, acoustic parameters associated with at least one sound source. Preferably, a parameter to be adapted, for example the said spatial sound parameter to be adapted, also determine for the listener from which room area of the living space, and / or from which seat, and / or from which person, person belonging to a group of people or a specific person Sound source, perceptible or made perceptible with improved parameters. For example, based on the auditory message, depending on the said parameters of the linguistic communication, at least two audible sound sources are generated for at least two different room areas or for two present persons, the different, each purposefully determined, objectively measurable or subjectively by the present or accepted persons perceptible parameters, eg directions, positions, volumes.
Bevorzugt wird zumindest eine Klangquelle mittels oder unter Berücksichtigung einer oder mehreren Reflektionen der (betreffenden, in eine bestimmte Richtung abgestrahlten) Schallwellen an zumindest einer Fläche des Wohnraums erzeugt. Beispielsweise kann ein gezieltes Abstrahlen von Schallwellen, in eine erste Richtung, z.B. in Richtung einer Fläche des Wohnraums z.B. eine Wand, erfolgen, wobei eine Klangquelle platziert wird, die aus einer bestimmten zweiten Richtung, welche abweichend ist von der ersten Richtung wahrnehmbar ist, erzeugt werden. Beispielsweise kann zumindest ein Parameter der zumindest einer auditiven Meldung und/oder des weiteren Audiosignals bestimmt oder angepasst werden, indem ein bestimmter Abschnitt der entsprechenden auszugebender Schallwellen, insbesondere in einer bestimmten Weise, von zumindest einer Wand oder Gegenstand des Wohnraums reflektiert werden. Mit anderen Worten kann ein bestimmter Parameter der Schallwellen oder Schallwellenmuster mittels einer oder mehreren Reflektionen (sozusagen: Ricochet) von einer oder mehreren Flächen, z.B. Wänden des Wohnraums bestimmt oder angepasst werden. Ein oder mehrere Raumklangparameter können im Verfahren derart bestimmt oder angepasst werden, dass bestimmte Schallwellen oder Schallwellenmuster in einem oder mehreren bestimmten Raumbereichen des Wohnraums erzeugt werden und/oder aus einem bestimmten Raumbereich bzw. der Wahrnehmungsperspektive (mit bestimmten Parametern) hörbar gemacht werden.Preferably, at least one sound source is generated by means of or taking into account one or more reflections of the (relevant, radiated in a certain direction) sound waves on at least one surface of the living space. For example, targeted blasting of sound waves, in a first direction, e.g. towards an area of the living space e.g. a wall, wherein a sound source is generated, which are generated from a certain second direction, which is different from the first direction is perceived, placed. For example, at least one parameter of the at least one auditory message and / or the further audio signal can be determined or adapted by reflecting a specific section of the corresponding sound waves to be output, in particular in a specific manner, from at least one wall or object of the living space. In other words, a particular parameter of the sound waves or sound wave patterns may be detected by one or more reflections (so-called ricochet) from one or more surfaces, e.g. Walls of the living space to be determined or adapted. One or more surround sound parameters may be determined or adjusted in the method such that specific sound waves or sound wave patterns are generated in one or more specific room areas of the living space and / or made audible from a particular spatial area or perceptual perspective (with certain parameters).
Beispielsweise kann eine erzeugte, zumindest subjektiv empfindbare, Richtung und/oder Entfernung, insbesondere die Position einer Klangquelle aus der die zumindest eine auditiven Meldung und/oder ein Abschnitt des weiteren Audiosignals ausgegeben wird, abhängig von einem oder mehreren Parametern der besagten Kommunikation, beispielsweise abhängig von einem erkannten Kommunikationsvorhaben und/oder einer Stimme zumindest einer Person im Wohnraum variiert werden. Dabei kann eine bestimmte Richtung und/oder Position und/oder Entfernung einer Klangquelle in den Wohnraumkoordinaten und/oder in Relation zu einer, insbesondere einer bestimmten Person, insbesondere in Relation zu der Kopfposition oder Kopfausrichtung der Position angepasst bzw. erreicht werden. Auch kann zumindest eine wahrnehmbare Position zumindest einer Klangquelle abhängig von zumindest einem Parameter der Kommunikation, beispielsweise schrittweise oder weitgehend stufenlos bewegt werden. Insbesondere kann eine oder mehrere im Verfahren erzeugte Klangquellen, die einen (bestimmten) Inhalt einer oder mehrerer der auditiven Meldungen und/oder eines oder mehreren Abschnitte des weiteren Audiosignals im Wohnraum wiedergibt, abhängig von dem, insbesondere prädizierten Parameter der auditiven Kommunikation, beispielsweise bei einem erkannten Kommunikationsvorhaben und/oder einem Parameter einer Kommunikation zumindest einer Person im Wohnraum, in einer zweckmäßigen Weise platziert und/oder verlagert und/oder bewegt werden.For example, a generated, at least subjectively sensible, direction and / or distance, in particular the position of a sound source from which the at least one auditory message and / or a portion of the further audio signal is output, depending on one or more parameters of said communication, for example, dependent be varied by a recognized communication project and / or a vote of at least one person in the living room. In this case, a specific direction and / or position and / or distance of a sound source in the living space coordinates and / or in relation to one, in particular a particular person, in particular in relation to the head position or head alignment of the position adapted or achieved. Also, at least one perceptible position of at least one sound source can be moved depending on at least one parameter of the communication, for example stepwise or substantially continuously. In particular, one or more sound sources generated in the method, which reproduces a (specific) content of one or more of the auditory messages and / or one or more sections of the further audio signal in the living space, depending on the, in particular predicated parameters of the auditory communication, for example in a recognized communication project and / or a parameter of communication at least one person in the living room, placed in a convenient manner and / or relocated and / or moved.
Beispielsweise können die Schallwellen nur oder überwiegend zu einer bestimmten auditive Meldung für die Wahrnehmung zumindest einer (bestimmten, mit hohen Wahrscheinlichkeitsmaß anwesenden oder angenommenen) Person oder für die Wahrnehmung durch eine Person mit einer aktuellen Kopfposition und/oder Kopfausrichtung räumlich, z.B. hinsichtlich ihrer wahrnehmbaren Richtung oder Entfernung, verschoben, bzw. an einer neuen Position erzeugt werden.For example, the sound waves may only or predominantly result in a particular auditory message for the perception of at least one (particular, highly probable or assumed) person or for perception by a person having a current head position and / or head orientation, e.g. in terms of their perceptible direction or distance, shifted, or generated at a new position.
Wenn ermittelt wird, dass eine auditive Meldung auszugeben ist, kann auch ein Abschnitt des weiteren Audiosignal, z.B. eines Multimediasignals, z.B. eines Audiosignals zu einem Video derart angepasst werden, dass insbesondere für die Wahrnehmung zumindest einer (bestimmten) Person oder für die Wahrnehmung mit einer aktuellen Kopfposition und/oder Kopfausrichtung räumlich, z.B. hinsichtlich ihrer wahrnehmbaren Richtung oder Entfernung, verschoben, bzw. aus zumindest einer neuen Klangquelle an einer neuen Position erzeugt werden, wobei sich die neue Position, insbesondere von der Position der zumindest einen Klangquelle der zumindest einen auditiven Meldung unterscheidet.If it is determined that an auditory message is to be output, a portion of the further audio signal, e.g. a multimedia signal, e.g. an audio signal is adapted to a video such that in particular for the perception of at least one (specific) person or for the perception with a current head position and / or head alignment spatially, e.g. with respect to their perceptible direction or distance, shifted, or generated from at least one new sound source at a new position, wherein the new position, in particular from the position of the at least one sound source of at least one auditory message.
Dabei können auch unterschiedliche Teile des weiteren Audiosignals, insbesondere repräsentierend Sprache, z.B. eine Stimme eines Protagonisten oder ein typischer Inhalt eines Kanals „Center“ und ein anderer Teil, bzw. Kanal des Audiosignals (z.B. korrespondierend mit auszugebenden Hintergrundmusik oder sogenannten Atmosphärengeräusche, „Background“) unterschiedlich angepasst werden. Insbesondere kann in Bezug auf eine auditive Meldung und in Bezug auf einen ersten Inhalt oder Kanal des weiteren Audiosignals und/oder in Bezug auf einen zweiten Inhalt oder Kanal des Audiosignals, ein unterschiedliches Anpassen, hinsichtlich der Art der Parameter, der Logik und/oder eines mathematischen Zusammenhangs ausgeführt werden.In this case, different parts of the further audio signal, in particular representing language, for example a voice of a protagonist or a typical content of a channel "center" and another part, or channel of the audio signal (For example, corresponding to be output with background music or so-called atmosphere noise, "background") are adjusted differently. In particular, with regard to an auditory message and with regard to a first content or channel of the further audio signal and / or with respect to a second content or channel of the audio signal, a different adaptation, with regard to the type of parameters, the logic and / or a mathematical context are executed.
Beispielsweise kann abhängig von einem ermittelten Parameter der Kommunikation ein Balancewert zwischen zumindest zwei in einem weiteren, von der auditiven Meldung abweichenden, Raumklangsignal enthaltenen Kanälen oder Inhalte angepasst werden. Dabei kann z.B. bei einem Abschnitt einer sprachlichen Kommunikation im Wohnraum ein zeitlich korrespondierender Abschnitt des Audiosignals im Wesentlichen auf eine begrenzte Anzahl von Kanälen oder Inhalten stufenlos oder in Stufen reduziert bzw. degradiert werden. Dabei kann eine gewisse (zumindest subjektiv wahrnehmbare) Vereinfachung eines, z.B. im Zusammenhang mit einem Multimediasignal, z.B. Heimkino, auszugebenden Audiosignals bzw. einer aus diesem erzeugten akustischen Wirkung erfolgen. Dies kann für ein passendes Zeitintervall zugunsten der Wahrnehmbarkeit der zumindest einen besagten in diesem Zeitintervall stattfindenden Kommunikation oder der zumindest einen auditiven Meldung erfolgen.For example, depending on a determined parameter of the communication, a balance value can be adjusted between at least two channels or contents contained in a further room sound signal deviating from the auditory message. In this case, e.g. in a portion of a spoken communication in the living space, a temporally corresponding portion of the audio signal is substantially reduced or demoted to a limited number of channels or contents, steplessly or in stages. There may be some (at least subjectively perceptible) simplification of, e.g. in the context of a multimedia signal, e.g. Home theater, output audio signal or a generated from this acoustic effect. This can be done for a suitable time interval in favor of the perceptibility of the at least one said communication taking place in this time interval or the at least one auditory message.
In einem weiterführenden Beispiel kann eine (dynamische) inhaltliche Verteilung bzw. Umverteilung von zumindest teilweise unterschiedlichen als Schallwellen auszugebender auditiver Inhalte auf zumindest zwei, insbesondere mittels des Bestimmens oder Anpassens eines Raumklangparameters gebildeter bzw. platzierter Klangquellen, abhängig von dem zumindest einem Parameter der besagten Kommunikation erfolgen. Dabei kann ein oder mehrere Parameter (der zumindest einen auditiven Meldung und/oder eines Abschnitts des auszugebenden Audiosignals) derart bestimmt oder angepasst werden, dass eine Verteilung bzw. Verteilungslogik der zumindest zwei auszugebenden auditiven Inhalte auf zwei oder mehrere Kanäle, Lautsprecher, bzw. virtuelle Klangquellen bzw. (Audio-) Ausgabevorrichtungen verändert wird.In a further example, a (dynamic) content distribution or redistribution of at least partially audible contents to be output as sound waves can be based on at least two sound sources formed or placed in particular by determining or adapting a surround parameter, depending on the at least one parameter of said communication respectively. In this case, one or more parameters (of the at least one auditory message and / or a section of the audio signal to be output) can be determined or adapted in such a way that distribution or distribution logic of the at least two auditory contents to be output to two or more channels, loudspeakers, or virtual channels Sound sources or (audio) output devices is changed.
Dabei kann auch die Art und/oder Prioritätsmaß der zumindest einen auditiven Meldung, zumindest eines Abschnitts des weiteren Audiosignals und/oder eines bestimmten Kanals eines mehrkanaligen Audiosignals berücksichtigt werden. Die Art und/oder das Prioritätsmaß können dabei abhängig von dem Inhalt der zumindest einen auditiven Meldung und/oder die zumindest eine auditive Meldung begleitenden oder mit ihr zusammenhängenden Information, und/oder abhängig vom Auslesen einer das weitere Audiosignal begleitender oder mit ihm zusammenhängender Information und/oder abhängig von einer inhaltlichen Auswertung des zumindest eines Abschnitts des Audiosignals, ermittelt und berücksichtigt werden. Beispielsweise werden, abhängig von einem Anfang und/oder Ende eines Abschnitts der besagten Kommunikation, ein oder mehrere Parameter zur Ausgabe von zumindest zwei unterschiedlichen Arten der als Schallwellen auszugebenden Inhalte, unterschiedlich bestimmt, insbesondere auf unterschiedliche Weise (als entsprechende Schallwellen oder Schallwellenmuster) im Wohnraum, z.B. auf bestimmte Raumbereiche, verteilt werden und/oder zumindest teilweise an unterschiedliche Klangquellen zugeordnet werden. Alternativ oder zusätzlich kann zumindest ein bestimmtes Schallwellenmuster, z.B. ein Interferenzmuster, abhängig oder auf Basis zumindest eines Inhalts, beispielsweise der zumindest einen auditiven Meldung und/oder des weiteren Audiosignals und/oder eines weiteren im Wohnraum hörbaren akustischen Inhalts erzeugt werden.In this case, the type and / or priority measure of the at least one auditory message, at least one section of the further audio signal and / or a specific channel of a multi-channel audio signal can also be taken into account. The type and / or the priority measure can depend on the content of the at least one auditory message and / or the at least one auditory message accompanying or related information, and / or depending on the reading of a further audio signal accompanying or related information and / or depending on a content evaluation of the at least one section of the audio signal, determined and taken into account. For example, depending on a beginning and / or end of a portion of said communication, one or more parameters for outputting at least two different types of contents to be output as sound waves are determined differently, in particular in different ways (as corresponding sound waves or sound wave patterns) in the living space , eg to certain areas of space, be distributed and / or at least partially assigned to different sound sources. Alternatively or additionally, at least one particular sound wave pattern, e.g. an interference pattern, depending on or based on at least one content, for example, the at least one auditory message and / or the further audio signal and / or another audible in the living space audible content can be generated.
Beispielsweise können zumindest zwei Abschnitte einer auditiven Meldung oder zwei unterschiedliche auditive Meldungen, kennzeichnend inhaltlich unterschiedlich ausgerichtete Inhalte (hinsichtlich ihrer inhaltlicher Merkmale unterschiedlich „gepolter“), z.B. repräsentierend Meinungen, Standpunkte, Wertungen, Sichtpunkte zu zumindest einem Thema, Anfrage, Kontext zu zumindest zwei unterschiedlich platzierten Klangquellen zugeordnet werden. Dabei kann eine inhaltliche Differenzierung (durch eine räumliche Platzierung bzw. Ausrichtung) repräsentiert werden. Eine solche räumliche Anordnung der Inhalte kann eine gehirngerechte Wahrnehmung durch zumindest einen bestimme (wahrscheinlich, tatsächlich anwesende oder in einem Raumbereich angenommene) Person fördern.For example, at least two sections of an auditory message or two different auditory messages, characteristically differently oriented content (different in terms of their content characteristics "poled"), e.g. representing opinions, viewpoints, ratings, viewpoints on at least one topic, request, context, associated with at least two differently placed sound sources. In this case, a substantive differentiation (by a spatial placement or orientation) can be represented. Such a spatial arrangement of the contents can promote a brain-oriented perception by at least one particular (probably, actually present or assumed in a spatial area) person.
Beispielsweise kann dabei eine „räumliche Inszenierung“ und/oder ein im Verfahren dargestellter (nicht unbedingt tatsächlich stattfindender) Dialog oder Gegenüberstellung zwischen den zumindest zwei unterschiedlichen Inhalten die aus zumindest zwei Klangquellen ausgegeben werden dargestellt werden. Beispielsweise können zu einem Thema, Kontext, Frage, Eingabe, Event, etc. zumindest zwei auditive Meldungen erzeugt werden, wobei die zumindest zwei unterschiedlichen, insbesondere inhaltlich kontrastierenden, insbesondere gegensätzlichen Inhalte zu einem (dem) Thema, Kontext, Frage, Eingabe, Event etc., aus zumindest zwei unterschiedlichen Klangquellen ausgegeben werden.For example, a "spatial staging" and / or a dialogue (shown or not necessarily actually taking place) or a comparison between the at least two different contents that are output from at least two sound sources can be displayed. For example, at least two auditory messages can be generated on a topic, context, question, input, event, etc., wherein the at least two different, in particular content-contrasting, in particular conflicting content to a (the) topic, context, question, input, event etc., are output from at least two different sound sources.
Dabei können die zumindest zwei auditive Inhalte, insbesondere die zumindest zwei Abschnitte zumindest einer oder mehreren auditiven Meldungen und/oder eines weiteren Audiosignals, die zumindest zwei zueinander kontrastierende oder entgegengesetzte Meinungen (z.B. Vorteile und Nachteile, „Pro“ und „Kontra“), und/oder zu einer Sichtperspektive unterschiedlicher Personen oder Personengruppen passende, und/oder auf mehr oder minder alten oder neuen Daten basierende Inhalte, aus zumindest zwei unterschiedlichen Klangquellen ausgegeben werden. Ferner können die zumindest zwei auditiven Meldungen, z.B. auditiven Meldungen die jeweils inhaltlich kontrastierende Inhalte repräsentieren, zumindest teilweise im selben Zeitintervall, insbesondere zumindest teilweise zeitlich überlappend oder gleichzeitig, oder auch in einer (von dem Inhalt abhängigen) Reihenfolge ausgegeben werden.In this case, the at least two auditory contents, in particular the at least two sections of at least one or more auditory messages and / or a further audio signal, the at least two contrasting or opposite opinions (eg advantages and Cons, "pros" and "contra"), and / or content appropriate to a visual perspective of different persons or groups of people, and / or based on more or less old or new data, are output from at least two different sound sources. Furthermore, the at least two auditory messages, eg auditory messages representing the respective content-contrasting contents, can be output at least partially in the same time interval, in particular at least partially overlapping temporally or simultaneously, or also in an order (dependent on the content).
Beispielsweise werden die zumindest zwei auditiv auszugebenden Inhalte bzw. Abschnitte, abhängig von einem oder mehreren Parameter der besagten Kommunikation, beispielsweise anhand einer vorausbestimmten Relation oder Assoziation zu einem inhaltlichen Merkmal der Kommunikation, ermittelt und zu zumindest zwei Klangquellen zugeordnet.By way of example, the at least two contents or sections to be output audibly, depending on one or more parameters of said communication, for example based on a predetermined relation or association with a content characteristic of the communication, are determined and assigned to at least two sound sources.
Bevorzugt kann ein dynamisches Zuordnen von unterschiedlichen akustisch auszugebenden Inhalten, z.B. der zumindest einen besagten auditiven Meldung, von Abschnitten des zumindest eines weiteren Audiosignals, insbesondere der weiteren Inhalte unterschiedlicher (bestimmter) Arten ausgeführt werden. Das kann auch abhängig von einer oder mehreren vorausbestimmten Bedingungen erfolgen. Beispielsweise werden die zwei Klangquellen platziert oder die auditiven Inhalte zu unterschiedlichen, insbesondere bestimmten, Klangquellen zugeordnet, wenn ermittelt wurde, dass die zwei ermittelten Inhalte einen wesentlichen inhaltlichen Unterschied zueinander aufweisen. Beispielsweise können die zumindest zwei Abschnitte des zumindest eines weiteren Audiosignals, z.B. ein Multimediasignal, ein Telekommunikationsinhalt zu zumindest zwei unterschiedlichen Klangquellen zugeordnet werden. Dabei können die Klangquellen für zumindest eine (zumindest wahrscheinlich) im Wohnraum anwesende oder angenommene Person in unterschiedlichen Raumwinkeln bzw. Positionen wahrnehmbar und/oder weniger wahrnehmbar gemacht werden. Eine solche Verteilung kann auch passend zu einem aktuellen, wahrscheinlichen Raumbereich erfolgen, in welchem sich eine Person aufhält für die der Abschnitt entsprechender Schallwellen bestimmt ist, und abhängig von der Beteiligung der Person an der besagten Kommunikation im Wohnraum, z.B. als ein „Sprecher“, „Zuhörer“ oder „Sprecher und Zuhörer“.Preferably, dynamic allocation of different acoustically outputting contents, e.g. the at least one said auditory message is executed by sections of the at least one further audio signal, in particular the further contents of different (specific) types. This can also be done depending on one or more predetermined conditions. For example, the two sound sources are placed or the auditory content is assigned to different, in particular specific, sound sources, if it has been determined that the two determined contents have a substantial difference in content. For example, the at least two portions of the at least one further audio signal, e.g. a multimedia signal, a telecommunications content to at least two different sound sources are assigned. In this case, the sound sources can be made perceptible and / or less perceptible for at least one (at least probably) person present or assumed in the living space in different spatial angles or positions. Such distribution may also be made to fit a current probable room area in which a person resides for whom the section of corresponding sound waves is intended, and depending on the person's participation in said communication in the living space, e.g. as a "speaker", "listener" or "speaker and listener".
Optional kann im Verfahren eine (für die Person selbst mehr oder minder bewusste oder intuitiv oder reflexartig ausgeführte) körperliche Regung, die der Absicht in eine bestimmte Richtung zuzuhören entspricht oder korreliert, ermittelt werden und verarbeitet werden. Eine solche körperliche Regung kann z.B. eine Kopfdrehung in eine entsprechende Richtung und/oder das Halten einer Handfläche am linken oder am rechten Ohr zu der entsprechenden Richtung sein. In einem Beispiel kann dabei ein Parameter, insbesondere repräsentierend die Lautstärke oder Frequenzparameter des aus der jeweiligen Richtung auszugebenden Audiosignals bzw. des Inhalts aus einer betreffenden, bestimmten Richtung verändert, in diesem Beispiel erhöht werden, und/oder ein Abschnitt des Audiosignals, z.B. der letzte Satz oder Phrase, wiederholt werden und/oder eine besser verständliche, z.B. vereinfachte Fassung einer auditiven Meldung erzeugt werden.Optionally, in the process, a physical impulse (more or less conscious for the person or intuitively or reflexively executed) that corresponds to or corresponds to the intention to listen in a particular direction can be identified and processed. Such a physical impulse may e.g. a head rotation in a corresponding direction and / or holding a palm on the left or right ear to the appropriate direction. In one example, a parameter, in particular representing the volume or frequency parameters of the audio signal to be output from the respective direction or the content from a particular, particular direction, may be increased in this example, and / or a portion of the audio signal, e.g. the last sentence or phrase, be repeated and / or a better understood, e.g. simplified version of an auditory report.
Dabei können bestimmte Muster insbesondere explizit als bewusste Muster oder unbewusste Muster einer körperlichen Regung, z.B. Gestik, Mimik, einer starken Augenbewegung, Körperausrichtung erkannt und berücksichtigt werden. Dies können Muster sein die kennzeichnend sind für ein nicht hinreichendes Wahrnehmen und/oder nicht hinreichendes Verstehen eines gehörten auditiven Inhalts, wobei zumindest ein solches Muster im Zusammenhang mit der Ausgabe einer auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals steht, z.B. unmittelbar auf die Ausgabe eines Abschnitts der auditiven Meldung oder des Audiosignals gefolgt ist. Daraufhin kann eine Ausgabe eines angepassten Abschnitts der auditiven Meldung oder eine Ausgabe einer alternativen, von dem Inhalt der auditiven Meldung abhängiger Information oder die Umsetzung einer sonstigen bestimmten Maßnahme veranlasst werden. Auch kann auf Basis solcher Muster ein Erfolgsmaß in Bezug auf die Ausgabe zumindest eines Abschnitts des weiteren Audiosignals bzw. zumindest einer auditiven Meldung ermittelt und im Verfahren verarbeitet werden.In particular, certain patterns may be explicitly identified as conscious patterns or unconscious patterns of bodily motion, e.g. Gestures, facial expressions, a strong eye movement, body alignment are recognized and taken into account. These may be patterns indicative of inadequate perception and / or understanding of a heard auditory content, at least one such pattern being associated with the output of an auditory message and / or a portion of the further audio signal, e.g. immediately followed by the output of a portion of the auditory message or audio signal. Thereafter, an output of an adapted portion of the auditory report or an issue of an alternative information dependent on the content of the auditory report or the implementation of any other particular action may be initiated. On the basis of such patterns, a measure of success with regard to the output of at least one section of the further audio signal or at least one auditory message can also be determined and processed in the method.
Ferner können im Verfahren eine oder mehrere vorgegebene oder einstellbaren Grenzparameter bzw. Grenzwerte in Bezug auf akustische Parameter, berücksichtigt werden, die in einem bestimmten Raumbereich oder in einem mit einer bestimmten Person oder einer Person zugehörig zu einer Personengruppe belegten Raumbereich, bestimmten Raumbereich und/oder Sitzplatz im Wohnraum, überschritten und/oder nicht überschritten, bzw. auf eine bestimmte Weise eingehalten werden sollen. Beispielsweise kann das Verfahren derart ausgeführt werden, dass bestimmte Grenzwerte für bestimmte, insbesondere akustische, Parameter in einem bestimmten Raumbereich des Wohnraums nicht oder höchstens für eine kurze Zeit überschritten oder nicht überschritten werden sollen.
Bevorzugt können solche Raumbereiche durch einen Nutzer, z.B. mittels einer grafischen Oberfläche die einen Teil des Wohnraums repräsentiert, gewählt werden. Dabei können auch weitere Bedingungen, z.B. Zeitintervalle, Uhrzeiten, Abhängigkeiten von einer Anwesenheit einer Person oder einer Person zugehörig zu einer bestimmten Personengruppe festgelegt werden.Furthermore, in the method, one or more predetermined or adjustable limit parameters or limit values with respect to acoustic parameters can be taken into account which in a specific room area or in a room area, specific room area and / or room assigned to a specific person or person Seating in the living room, exceeded and / or not exceeded, or should be maintained in a certain way. For example, the method can be carried out in such a way that certain limit values for certain, in particular acoustic, parameters in a certain room area of the living space are not exceeded or not exceeded for a short time or not exceeded.
Such spatial regions can preferably be selected by a user, for example by means of a graphic surface which represents a part of the living space. In this case, other conditions, such as time intervals, times, dependencies of a presence of a person or a person belonging to a particular group of people can be set.
Gemäß einer zweckmäßigen Ausgestaltung wird die Stimme einer im Wohnraum anwesenden Person, insbesondere einer an der besagten Kommunikation beteiligten Person, von einer Stimme aus einer (technischen) Audiowiedergabevorrichtung, insbesondere aus einer, z.B. mit dem Haus und/oder mit dem Audiosystem vernetzten Audiowiedergabevorrichtung, z.B. aus einem mobilen Anwendergerät, unterschieden. Daraufhin kann der erkannte Unterschied im Verfahren berücksichtigt werden. Beispielsweise erfolgt das Bestimmen oder Anpassen eines oder mehrerer Parameter der zumindest einen auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals nur oder vorwiegend auf eine oder mehrere live (unmittelbar akustisch gesprochene) Stimmen innerhalb des Wohnraums.
Auf eine Stimme aus einer technischen Audioausgabevorrichtung kann hingegen keine oder eine (prinzipiell) anderes, vordefiniertes Bestimmen oder Anpassen der zumindest einen auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals oder eine vordefinierte Maßnahme veranlasst werden. According to an expedient embodiment, the voice of a person present in the living space, in particular a person involved in the said communication, of a voice from a (technical) audio playback device, in particular from an audio playback device networked eg to the house and / or the audio system, eg from a mobile user device, a distinction. Thereupon the recognized difference in the procedure can be considered. For example, determining or adjusting one or more parameters of the at least one auditory message and / or a portion of the further audio signal only or predominantly to one or more live (directly audible spoken) voices within the living space.
On the other hand, no or (in principle) other, predefined determination or adaptation of the at least one auditory message and / or a section of the further audio signal or a predefined measure can be initiated on a voice from a technical audio output device.
Beispielsweise wird erkannt, dass es sich bei der im Wohnraum (akustisch) erfassten Stimme um eine Personenstimme, insbesondere um eine Stimme einer bestimmten Person oder Person zugehörig zu einer bestimmten Personengruppe, handelt und daraufhin das Bestimmen der Parameter auditiven Meldung abhängig von der Erkennung der Stimme als eine Personenstimme, insbesondere abhängig vom Erkennen, dass die Stimme von einer bestimmten Person oder von einer Person zugehörig zu einer Personengruppe ist, ausgeführt wird. Auch kann im Verfahren, beispielsweise mittels einer Stimmenerkennung und/oder Bilderkennung oder mit anderen Mitteln, ermittelt bzw. sichergestellt werden, dass eine oder mehrere (akustisch hörbare) Stimme zu einer anwesenden Person gehört oder nicht gehört, und die ermittelte Information im Verfahren berücksichtigt werden. Beispielsweise kann daraufhin vermieden werden, dass eine Stimme aus einer weiteren Audioausgabevorrichtung das Erzeugen einer auditiven Meldung in einer nachteilhaften Weise beeinflusst.For example, it is recognized that the voice recorded in the living space (acoustically) is a person's voice, in particular a voice of a specific person or person belonging to a certain group of persons, and then determining the parameters auditory message depending on the recognition of the voice as a person's voice, in particular depending on the recognition that the voice is from a specific person or from a person belonging to a group of people, is performed. Also, in the method, for example by means of voice recognition and / or image recognition or by other means, it can be ascertained or ensured that one or more (acoustically audible) voices belong or do not belong to a person present, and the ascertained information is taken into account in the method , For example, it may then be avoided that a voice from another audio output device affects the generation of an auditory message in a disadvantageous manner.
Alternativ oder zusätzlich kann ermittelt werden, dass eine im Wohnraum hörbare akustische Stimme zumindest mit einem, einen Grenzwert übersteigendem Wahrscheinlichkeitsmaß, aus einer Audioausgabevorrichtung kommt und/oder dass die akustisch hörbare Stimme mit einem, einen Grenzwert übersteigendem Wahrscheinlichkeitsmaß, einer oder mehreren, insbesondere keiner der mit anderen Mitteln erfassbaren Personen im Wohnraum (zu keiner in Frage kommender Person) gehört, und auf Basis der ermittelten Information eine Interpretation und/oder Weiterverarbeitung der mit der besagten Stimme gesagten Wörter oder sprachlichen Botschaften verändert wird. Alternatively or additionally, it can be determined that an audible voice audible in the living space comes from an audio output device at least with a probability measure exceeding a limit value and / or that the acoustically audible voice has a probability value exceeding one limit, one or more, in particular none of the Persons who can be detected by other means in the living space (not being a person in question) are heard, and an interpretation and / or further processing of the words or linguistic messages said with said voice is changed on the basis of the information determined.
Bevorzugt kann veranlasst werden, dass ein mit der besagte Stimme gesprochenes Wort, Wörter oder zumindest eine sprachliche Botschaft nicht als eine Spracheingabe interpretiert oder nicht als ein Sprachbefehl ausgeführt wird und/oder die Kriterien zur Interpretation der Wörter oder sprachlichen Botschaften verändert, insbesondere verschärft werden.It can preferably be arranged that a word, words or at least one linguistic message spoken with said voice is not interpreted as a voice input or executed as a voice command and / or that the criteria for interpreting the words or linguistic messages are changed, in particular tightened.
Beispielsweise kann die Stimme einer im Wohnraum anwesenden Person (z.B. eines „Sprechers“) im Wohnraum von einer Stimme aus einer Audioausgabevorrichtung (z.B. eines Multimediaabspielgeräts oder eines mobilen Anwendergeräts) einer im Wohnraum drahtlos vernetzten Audioausgabevorrichtung, dadurch unterschieden werden, dass ermittelt wird, ob die Stimme nur in den Daten eines Mikrophons bzw. eines Mikrophonsystems enthalten bzw. erkennbar ist, oder ob die Stimme (auch, in irgendeiner Form) in den Signaldaten einer Audioausgabevorrichtung erkannt werden kann.For example, the voice of a person present in the living space (eg, a "speaker") in the living space of a voice from an audio output device (eg, a multimedia player or a mobile user device) of a wirelessly networked in the living room audio output device, can be distinguished by whether the Voice is contained or recognizable only in the data of a microphone or a microphone system, or whether the voice (also, in some form) can be detected in the signal data of an audio output device.
Ein solcher Abgleich kann z.B. mittels Auswertung eines Ähnlichkeitsmaßes bzw. Korrelationsmaßes zwischen einem von einem Mikrophon im Wohnraum abhängigen (mit einem Mikrophon erfassten) Signal und den Daten bzw. dem Datenstrom, die mit einem anderen im Wohnraum hörbaren Audiosignal korrespondieren oder unmittelbar korrelieren, erfolgen. Die Daten zu dem zumindest einen anderen Audiosignal können aus Daten des Audiosystems, aus Daten einer weiteren Audioausgabevorrichtung oder eines weiteren im Haus vernetzten (vernetzt betreibbaren) Geräts, welches Audiosignale wiedergibt bzw. bestimmte akustische Wellen erzeugt, ermittelt werden. Dabei kann z.B. ein durch eine im Wohnraum betriebene Audioausgabevorrichtung auszugebendes Audiosignal, unmittelbar oder mittelbar zu der besagten Sprachsteuerungsapplikation, übermittelt werden, wobei dieses nicht ausgegeben, sondern zum Abgleich mit einem durch ein Mikrophon im Wohnraum erfassten Signal bereitgestellt wird.Such a calibration may e.g. by means of evaluation of a measure of similarity or correlation between a dependent of a microphone in the living room (detected by a microphone) signal and the data or the data stream, which correspond to another audible in the living room audio signal or correlate directly done. The data for the at least one other audio signal can be determined from data of the audio system, from data from a further audio output device or from another networked device which reproduces audio signals or generates specific acoustic waves. In this case, e.g. an audio signal to be outputted by an audio output device operated in the living space, directly or indirectly to said voice control application, which is not output, but provided for matching with a signal detected by a microphone in the living space.
Auch können im Verfahren bestimmte Stimmen, z.B. Stimmen eines TV- oder Radiomoderators, Schauspielers, etc., Stimmen aus einer virtuellen Realität oder aus einem Videospiel, Stimmen aus einer Kategorie oder Liste von Stimmen, von den unmittelbar (live) im Wohnraum gesprochenen, insbesondere nicht mit technischen Mitteln wiedergegebenen, Stimmen unterschieden werden. Solche Stimmen können anhand entsprechender (im Verfahren eingelernter und/oder bereitgestellter) Erkennungsdaten erkannt und im Verfahren berücksichtigt werden.Also, in the method, certain voices, e.g. Voices of a TV or radio presenter, actor, etc., voices of a virtual reality or of a video game, voices of a category or list of voices, of voices spoken directly (live) in the living room, in particular not reproduced by technical means become. Such voices can be recognized by means of appropriate (learned in the process and / or provided) recognition data and taken into account in the process.
Gemäß einer zweckmäßigen Ausgestaltung umfasst das Verfahren ein Erfassen eines Parameters einer körperlichen Regung, insbesondere einer Lippenbewegung zumindest einer im stationären Wohnraum anwesenden Person. Dies kann, insbesondere mittels einer vernetzten Kamera erfolgen. Daraufhin, auf Basis eines Parameters der erfassten körperlichen Regung, insbesondere einer Lippenbewegung, ein Ermitteln eines Kommunikationsvorhabens der Person und/oder eine Prädiktion eines Parameters einer daraufhin erwarteten Kommunikation erfolgen. Dabei kann im Verfahren bereits eine (zumindest wahrscheinlich) erwarte Kommunikation bzw. eine Auswahl der erwarteten Parameter der erwarteten Kommunikation berücksichtigt werden. Somit kann ein erheblicher Zugewinn an Performance erreicht werden.According to an expedient embodiment, the method comprises detecting a parameter of a physical movement, in particular a lip movement of at least one in the stationary one Housing person present. This can be done, in particular by means of a networked camera. Thereupon, on the basis of a parameter of the detected physical impulse, in particular a lip movement, a determination of a communication project of the person and / or a prediction of a parameter of a subsequently expected communication take place. In this case, an (at least probably) expected communication or a selection of the expected parameters of the expected communication can already be taken into account in the method. Thus, a significant gain in performance can be achieved.
Dabei kann ein Wahrscheinlichkeitsmaß ermittelt werden, dem zufolge die betreffende Person daraufhin, insbesondere innerhalb eines bestimmten Zeitintervalls nach der erfassten körperlichen Regung, z.B. einer Lippenbewegung, auditiv kommunizieren wird. Das entsprechende Wahrscheinlichkeitsmaß und/oder ein besagtes Zeitintervall kann auch abhängig von den Historiendaten ermittelt bzw. geschätzt werden. Ferner kann das Bestimmen oder Anpassen eines oder mehrerer Parameters des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung abhängig von dem Wahrscheinlichkeitsmaß und/oder abhängig von dem ermittelten bzw. geschätzten Zeitintervall ausgeführt werden.In this case, a probability measure can be determined according to which the person concerned then, in particular within a certain time interval after the detected physical movement, e.g. lip movement, auditory communication. The corresponding probability measure and / or a said time interval can also be determined or estimated depending on the history data. Furthermore, the determination or adaptation of one or more parameters of the audio signal to be output and / or of the at least one auditory message can be carried out as a function of the probability measure and / or as a function of the determined or estimated time interval.
Bevorzugt werden ein oder mehrere Parameter der körperlichen Regung, insbesondere von Mimik, von Gestik, und/oder einer Lippenbewegung einer Person zu mehreren aufeinanderfolgenden Zeitpunkten erfasst. Daraufhin werden ein oder mehrere Muster, bevorzugt Muster eines zeitlichen Verlaufs einer körperlichen Regung, ermittelt. Beispielsweise kann ein solches Muster der körperlichen Regung, insbesondere umfassend ein Muster einer Lippenbewegung, insbesondere Lippenverformung, z.B. in mehreren Bildern mit einer Kamera erfasst und im Verfahren verarbeitet werden. Insbesondere kann auch ein Abgleich eines erkannten Muster der Lippenbewegung, Mimikveränderung, Gestikveränderung oder ein Muster einer Veränderung weiterer sensorisch erfassten Merkmale, insbesondere in den erfassten Bildern, mit einem oder mehreren Parametern einer etwa gleichzeitig ablaufenden oder anschließend folgenden auditiven Kommunikation der Person erfolgen.Preferably, one or more parameters of the physical movement, in particular of facial expressions, gestures, and / or a lip movement of a person are recorded at several successive points in time. Subsequently, one or more patterns, preferably patterns of a temporal course of a physical movement, are determined. For example, such a pattern of bodily agitation, in particular comprising a pattern of lip movement, in particular lip deformation, e.g. captured in multiple images with a camera and processed in the process. In particular, an adjustment of a recognized pattern of the lip movement, facial expression change, gesture change or a pattern of changing further sensory features, especially in the captured images, can be done with one or more parameters of an approximately simultaneous or subsequent auditive communication of the person.
Beispielsweise wird ein Parameter der Kommunikation, insbesondere ein Kommunikationsvorhaben zumindest einer im Wohnraum befindlichen Person mittels des Erkennens ihrer Lippenbewegung und/oder einer körperlichen Regung, insbesondere mittels einer zum Datenaustausch ausgestalteten Kamera ermittelt, insbesondere prädiziert. Bevorzugt kann daraufhin eine auszugebende auditive Meldung, insbesondere ein betreffender Abschnitt der auditiven Meldung auch vorausschauend (vor oder kurz nach dem Anfang des Sprechens) angepasst werden. Auch kann im Verfahren ein Bestimmen zumindest eines Parameters der zumindest einen auditiven Meldung oder Anpassen eines oder mehrerer Parameter des auszugebenden Audiosignals auf eine Kommunikation erfolgen, die (unter gegebenen Umständen) nicht oder nicht hinreichend hörbar bzw. nicht mit einem Mikrophon erfassbar ist oder wäre. Auch kann abhängig von einem Abgleich zwischen einem oder mehreren Parametern einer körperlichen Regung, z.B. einer Lippenbewegung, Mimikveränderung, Gestikveränderung mit einer erhöhten Sicherheit darauf geschlossen werden, dass (auch) eine auditive Kommunikation stattfindet oder erwünscht ist. Dabei kann auch ein Parameter einer stattfindenden oder prädizierten Kommunikation berücksichtigt werden, die akustisch (beispielsweise mit einem Mikrophon) nicht hinreichend erkennbar wäre.By way of example, a parameter of the communication, in particular a communication project of at least one person located in the living space is determined, in particular predicted, by the recognition of their lip movement and / or a bodily movement, in particular by means of a camera designed for data exchange. Preferably, an auditory message to be issued, in particular a relevant section of the auditory message, can then also be adapted in a forward-looking manner (before or shortly after the beginning of the speech). Also, in the method, at least one parameter of the at least one auditory message or adaptation of one or more parameters of the audio signal to be output can be determined on a communication which (under given circumstances) is or would not be sufficiently audible or not detectable with a microphone. Also, depending on a match between one or more parameters of a physical sensation, e.g. lip movement, mimic change, gesture change with increased assurance that (also) an auditory communication is taking place or is desired. In this case, a parameter of an ongoing or predicated communication can be taken into account, which would not be sufficiently recognizable acoustically (for example with a microphone).
Es kann, insbesondere einhergehend mit dem Ermitteln eines Kommunikationsvorhabens, auch eine Prädiktion, insbesondere eine Annahme über einen oder mehrere akustische Parameter einer (wahrscheinlich) darauffolgenden Kommunikation, z.B. eines bestimmten Abschnitts der Kommunikation, getroffen werden. Beispielsweise kann auf diese Weise ein zeitlicher Parameter kennzeichnend eine wahrscheinliche Dauer der Kommunikation, bzw. eines betreffenden Abschnitts der Kommunikation bestimmt werden. Aus einer besonders starken körperlichen Regung, z.B. einer schnellen und/oder starken mimischen Regung, kann beispielsweise ein Rückschluss auf eine relativ lange Dauer einer darauffolgenden Kommunikation gemacht werden. Auch kann abhängig von dem letztgenannten Abgleich eine unmittelbar stattfindende, insbesondere zu einer weiteren Person oder Raumrichtung gerichtete Kommunikation von weiteren, in der Umgebung ausgegebenen oder in der Umgebung akustisch erzeugten Sprache umfassender, Schallwellen, beispielsweise aus der Nachbarschaft, unterschieden werden.In particular, accompanied by the determination of a communication project, it may also be a prediction, in particular an assumption about one or more acoustic parameters of (probably) subsequent communication, e.g. of a particular section of communication. By way of example, in this way, a time parameter may characteristically be determined as a probable duration of the communication or of a relevant section of the communication. From a particularly strong physical movement, e.g. a fast and / or strong facial movement, for example, a conclusion can be drawn on a relatively long duration of a subsequent communication. Also, depending on the latter adjustment, a directly occurring, in particular to another person or spatial direction directed communication of further, issued in the environment or in the environment acoustically generated speech more comprehensive, sound waves, for example from the neighborhood, can be distinguished.
Bevorzugt werden ein oder mehrere Parameter einer auditiven Meldung abhängig von einem Abgleich zwischen einer ermittelten körperlichen Regung und einem entsprechenden oder darauffolgend ermittelten akustischen Parameter der besagten Kommunikation bestimmt. Beispielsweise kann zumindest ein, z.B. mittels einer Kamera im Wohnraum und einer Bildverarbeitung, erkanntes Muster einer körperlichen Regung bzw. Gestik, Mimik, Lippenbewegung ermittelt und im Verfahren berücksichtigt werden. Ferner kann zumindest ein, z.B. von einer Audiosignalanalyse, erkanntes Muster zu einem Parameter der auditiven Kommunikation, zu einer bestimmten Gefühlsäußerung, einem Lachen, Weinen, einer Interjektion innerhalb der besagten Kommunikation entspricht, ermittelt und berücksichtigt werden. Bevorzugt erfolgt ein Bestimmen oder Anpassen des Parameters der zumindest einen auditiven Meldung abhängig von dem Abgleich der zumindest zwei genannten Muster bzw. der Muster der genannten unterschiedlichen Arten. Ein solcher Abgleich kann auf Basis eines Maßes für eine Übereinstimmung, Ähnlichkeit, Korrelation, insbesondere einer daraus abgeleiteter zeitlicher oder kausaler Abhängigkeit der besagten Muster erfolgen. Dabei können die Daten auf Basis eines ersten Musters, der auf Basis einer im Wohnraum erfassten Bildfolge ermittelt wurde mit eines zweiten Muster der auf Basis einer Auswertung akustischer Schalwellen im Wohnraum ermittelt wurde, abgeglichen werden. Auch kann das Verfahren bei einer temporären Nichtverfügbarkeit akustischer erfasster Daten zumindest übergangsweise auf Basis der Bilddaten betrieben werden oder umgekehrt. Somit wird eine verbesserte Performance, Verfügbarkeit, Verlässlichkeit bei der Ausführung des Verfahrens erreicht.One or more parameters of an auditory message are preferably determined as a function of a comparison between a determined bodily movement and a corresponding or subsequently determined acoustic parameter of said communication. For example, at least one, for example by means of a camera in the living room and an image processing, recognized pattern of physical emotion or gesture, facial expression, lip movement can be determined and taken into account in the process. Furthermore, at least one pattern, for example, that is recognized by an audio signal analysis, can be determined and taken into account as a parameter of the auditive communication, to a specific feeling statement, a laugh, a cry, an interjection within said communication. Preferably, the parameter of the at least one auditory message is determined or adapted depending on the matching of the at least two named patterns or the patterns of the mentioned different types. Such matching may be done on the basis of a measure of correspondence, similarity, correlation, in particular of a temporal or causal dependence of said patterns derived therefrom. In this case, the data can be adjusted on the basis of a first pattern which was determined on the basis of an image sequence recorded in the living space with a second pattern which was determined on the basis of an evaluation of acoustic sound waves in the living space. In the case of a temporary unavailability of acoustically acquired data, the method can also be operated at least transitionally on the basis of the image data or vice versa. Thus, improved performance, availability, reliability in the execution of the method is achieved.
Insbesondere kann bei einem Abgleich ein mathematischer Zusammenhang zwischen mehreren Parametern einer körperlichen Regung und einer in etwa gleichzeitig mit dieser stattfindenden und/oder einer darauffolgenden auditiven Kommunikation ermittelt und im Verfahren berücksichtigt werden. Beispielsweise kann ein Erkennen von einem lächelnden oder weinenden Gesicht in Kombination mit einem entsprechenden akustischen Muster, welches beispielsweise typisch für das Lachen, Weinen oder eine bestimmte Interjektion ist, im Verfahren verarbeitet werden. Beispielsweise kann ein Parameter einer auditiven Meldung bestimmt werden abhängig von: einem bestimmten mimisches Muster, z.B. ein Lächeln insbesondere kombiniert mit dem Sprechen und/oder einem durch eine starke mimische Regung gekennzeichnetes Gesicht und ein lautes Sprechen bzw. Schreien; Daraufhin kann beispielsweise eine Anpassung eines oder mehrerer Parameters einer auditiven Meldung nach einer jeweils bestimmten (veränderten) Logik, Formel oder Kennlinien ausgeführt werden.In particular, during a comparison, a mathematical relationship between a plurality of parameters of a physical movement and an auditory communication taking place approximately simultaneously with the latter and / or a subsequent one can be determined and taken into account in the method. For example, a recognition of a smiling or crying face in combination with a corresponding acoustic pattern, which is typical for example for laughter, crying or a certain interjection, can be processed in the process. For example, a parameter of an auditory message may be determined depending on: a particular mimetic pattern, e.g. a smile in particular combined with speech and / or a face marked by a strong facial expression and a loud speaking or shouting; Thereupon, for example, an adaptation of one or more parameters of an auditory message can be carried out according to a respectively determined (changed) logic, formula or characteristic curves.
Bevorzugt wird im Verfahren die Anzahl und/oder Verteilung der zumindest zwei, bevorzugt aller im Wohnraum anwesenden Personen auf bestimmte Raumbereiche bzw. Sitzplätze innerhalb des Wohnraums ermittelt und berücksichtigt. Dies kann im Rahmen einer Erfassung bzw. Erkennung einer Szene, insbesondere einer Bildszene oder unabhängig hiervon, z.B. mit vereinfachten Mitteln erfolgen. Dabei kann eine oder können mehrere Positionen bzw. Raumbereiche ermittelt werden, in welchen sich (bestimmte) Personen bzw. Personen zugehörig zu bestimmten Personengruppen (zumindest mit einer hohen Wahrscheinlichkeit) befinden, und/oder die Belegung eines oder mehrerer Sitzplätze durch (bestimmte) Personen bzw. Personen zugehörig zu bestimmten Personengruppen, innerhalb des Wohnraums ermittelt werden. Beispielsweise können es die Raumbereiche bzw. Sitzplätze sein, die einem Sofa, einer Spielecke, einem bestimmten Sessel, Plätzen in der Küche, Plätzen am Esstisch, der Spielecke für Kinder, Balkon, etc. entsprechen. Personengruppen können z.B. erwachsenen Personen, Kinder Babysitzen, Kinderbett, etc. entsprechen. Durch die Unterscheidung und Berücksichtigung der Raumbereiche innerhalb des Wohnraums, und aus der Unterscheidung und Berücksichtigung nach Personenklassen ergeben sich diverse vom Fachmann nachvollziehbare Vorteile.In the method, the number and / or distribution of the at least two persons, preferably all persons present in the living space, is preferably determined and taken into account in certain room areas or seats within the living space. This can be done in the context of detection or recognition of a scene, in particular an image scene or independently thereof, e.g. done with simplified means. In this case, one or more positions or areas in which (specific) persons or persons belong to certain groups of persons (at least with a high degree of probability) can be determined, and / or the occupancy of one or more seats by (specific) persons or persons belonging to specific groups of persons, within the living space. For example, it may be the room areas or seats that correspond to a sofa, a play area, a particular armchair, places in the kitchen, places at the dining table, the children's play area, balcony, etc. Groups of persons can e.g. adult persons, children's baby sitting, cot, etc. By distinguishing and considering the areas of space within the living space, and from the distinction and consideration according to class of persons, various advantages that can be understood by the skilled person result.
Das Ermitteln der Anzahl und/oder der Verteilung der im Wohnraum anwesenden Personen kann in einem vereinfachten Fall mit einer oder mehreren Infrarotsensoren, Bewegungsmeldern, Anwesenheitssensoren, Brandschutzsensoren im Wohnraum oder mit weiteren Sensoren, die z.B. zur Steuerung weiterer Systeme des Hauses dienen, erfolgen. Ferner können Daten bzw. Signale eines Sensors oder Systems des Hauses ermittelt werden, welches zu einer (bedarfsgerechten) Steuerung der Beleuchtung, Heizung, Belüftung, des Brandmelders bzw. eines Brandverhinderungs- oder Brandlöschungssystems des Wohnraums bzw. des Hauses dienen. Das Ermitteln der Anzahl und/oder der Verteilung der im Wohnraum anwesenden Personen kann im Verfahren mittels an sich bekannter Sensoren bzw. Systeme, oder mittels der zur Ausführung des Verfahrens eingerichteten bzw. weitergebildeten Sensoren bzw. Vorrichtungen im Wohnraum erfolgen.The determination of the number and / or the distribution of the persons present in the living space can in a simplified case with one or more infrared sensors, motion detectors, occupancy sensors, fire protection sensors in the living space or with other sensors, e.g. serve to control other systems of the house done. Furthermore, data or signals of a sensor or system of the house can be determined, which serve for a (needs-based) control of lighting, heating, ventilation, the fire alarm or a fire prevention or fire extinguishing system of the living room or the house. The determination of the number and / or the distribution of the persons present in the living space can take place in the process by means of sensors or systems known per se, or by means of the sensors or devices set up or further developed for carrying out the method.
Ferner kann das Ermitteln der Anzahl und/oder der Verteilung der im Wohnraum anwesenden Personen auch über die Anzahl der im Wohnraum erkannten, insbesondere lokalisierten mobilen Anwendergeräte, z.B. Mobilfunkendgeräte und/oder Wearables (z.B. Smart Watches) erfolgen. Ferner kann das Ermitteln der Anzahl und/oder der Verteilung der im Wohnraum anwesender Personen mittels sogenannter Smart-Closes oder einer Nahfeldkommunikation NFC (= Near Field Communication) oder z.B. RFID-Chips (= Radio Frequency Identification) erfolgen. Eine Identifikation der Personen ist im Verfahren nicht notwendig. Dennoch kann auch eine Identifikation oder Wiedererkennung bestimmter Personen, ein Ermitteln einer Personengruppe oder eine Zuordnung eines bestimmten für das Verfahren maßgeblichen Nutzerprofils, ausgeführt werden. Insbesondere kann auch eine Zuordnung von einer oder mehreren Personen oder Raumbereichen, wo sich diese aktuell, typischerweise, zu bestimmen Zeitintervallen innerhalb des Hauses aufhalten, zu bestimmten Personengruppen erfolgen.Furthermore, determining the number and / or the distribution of the persons present in the living space can also be determined by the number of mobile user devices detected in the living space, in particular localized mobile user devices, e.g. Mobile terminals and / or wearables (e.g., smart watches). Furthermore, determining the number and / or the distribution of the persons present in the living space by means of so-called smart closes or near field communication NFC (= Near Field Communication) or e.g. RFID chips (= Radio Frequency Identification). Identification of the persons is not necessary in the procedure. Nevertheless, an identification or recognition of specific persons, a determination of a group of people or an assignment of a particular relevant for the process user profile can be performed. In particular, an association of one or more persons or room areas, where these are currently, typically, to determine time intervals within the house, can be made to particular groups of people.
Beispielsweise kann eine Zuordnung, zwischen den Personengruppen: ein Erwachsener, ein Kind, ein Kindebett mit Kind, ein Baby ohne Babysitz, ein Babysitz mit oder ohne Baby zu den bestimmten Raumbereichen und/oder Sitzpositionen im Wohnraum erfolgen, in welchen sich diese (zumindest mit einem erhöhten Wahrscheinlichkeitsmaß) aufhalten. Für eine (aktuell auszuführende) Bestimmung des zumindest einen Parameters der auditiven Meldung kann den (bestimmten) Personen, Personengruppen, oder den entsprechenden Raumbereichen und/oder Sitzplätzen jeweils die Eigenschaft als ein, zumindest wahrscheinlicher, „Sprecher“ und/oder als, zumindest potentieller oder wahrscheinlicher, „Zuhörer“ und/oder zumindest potentieller oder wahrscheinlicher „Sprecher und Zuhörer“ zugeordnet werden.For example, an association can be made between the groups of people: an adult, a child, a child bed with a child, a baby without a baby seat, a baby seat with or without a baby Spaces and / or sitting positions in the living space made in which they (at least with an increased probability) stay. For a (currently to be carried out) determination of the at least one parameter of the auditory message, the (specific) persons, groups of persons, or the corresponding spatial areas and / or seats can each have the property of being an at least more likely "speaker" and / or at least potential or more likely to be associated with "listeners" and / or at least potential or likely "speakers and listeners".
Beispielsweise kann im Verfahren auch unterschieden werden, wie viele der im Wohnraum anwesenden Personen, insbesondere welche der Personen mit welcher Person auditiv kommunizieren (sprechen) und abhängig davon ein oder mehrere Parameter des mit der auditiven Meldung korrespondierenden Audiosignals bestimmt oder angepasst werden. Auch kann ein zweckmäßiges Verteilen der Schallwellen oder Schallwellenmuster die den Inhalten zumindest einer auditiven Meldung und/oder zumindest einem Abschnitts des weiteren Audiosignals auf bestimmte Raumbereiche innerhalb des Wohnraums und/oder bestimmte Zeitintervalle erfolgen. Bevorzugt wird zumindest ein Parameter einer auditiven Meldung abhängig von der Position des Sprechers und/oder einer relativen Richtung, aus der ein (sprachlicher) Kommunikationsinhalt kommt oder entsprechend dem erkannten Kommunikationsvorhaben (innerhalb eines bestimmten Zeitintervalls) erwartet wird angepasst.For example, it can also be distinguished in the method how many of the persons present in the living space, in particular which of the persons communicate audibly with which person and depending on this one or more parameters of the audio signal corresponding to the auditory message are determined or adjusted. Also, a suitable distribution of the sound waves or sound wave patterns that the contents of at least one auditory message and / or at least a portion of the further audio signal to certain areas of space within the living space and / or certain time intervals done. Preferably, at least one parameter of an auditory message is adjusted depending on the position of the speaker and / or a relative direction from which a (linguistic) communication content arrives or is expected according to the recognized communication project (within a certain time interval).
Gemäß einer zweckmäßigen Ausgestaltung wird zumindest eine auditive Meldung und/oder ein Abschnitt des weiteren Audiosignals abhängig von der Position des Sprechers und/oder von einer relativen Richtung, aus der ein Abschnitt der (sprachlichen) Kommunikation (ein Kommunikationsinhalt, eine Kommunikationsbotschaft) kommt oder entsprechend dem erkannten Kommunikationsvorhaben kommen wird und/oder abhängig von der Position eines bestimmten, wahrscheinlichen oder angenommenen Zuhörers zu dem Abschnitt der Kommunikation angepasst.According to an expedient embodiment, at least one auditory message and / or a portion of the further audio signal is dependent on the position of the speaker and / or a relative direction from which a section of the (speech) communication (a communication content, a communication message) comes from or the identified communication project will come and / or adjusted depending on the position of a particular, probable or assumed listener to the section of the communication.
Gemäß einer zweckmäßigen Ausgestaltung erfolgt ein Einlernen einer oder mehrerer körperlichen Regungen (einer Person) die einer Kommunikation, insbesondere einem Sprechen (der Person), insbesondere mit Parametern in bestimmten Wertebereichen vorausgehen, zu einem oder mehreren Zeitintervallen, und daraufhin, beispielsweise bei einer Ausführung des Verfahrens zu zumindest einem späteren Zeitintervall, bei einer Wiedererkennung der zumindest einen (bestimmten, eingelernten) körperlichen Regung ein Bestimmen oder Anpassen eines oder mehrerer Parameters der zumindest einen auditiven Meldung abhängig von der Wiedererkennung zumindest einer der eingelernten körperlichen Regungen ausgeführt wird. Die besagte körperliche Regung kann auch einen Teil der besagten Kommunikation sein bzw. bilden. Bevorzugt werden zumindest zwei unterschiedliche körperliche Regungen eingelernt und/oder wiedererkannt. Insbesondere wird ein Parameter der zumindest einen auditiven Meldung und/oder des Anschnitts des weiteren Audiosignals bestimmt oder angepasst abhängig davon, welche von zumindest zwei körperlichen Regungen erkannt bzw. wiedererkannt wurden. Die körperlichen Regungen können als die ihnen entsprechende Muster, z.B. Parametermuster als Bewegungsmuster bzw. Veränderugsmuster eingelernt und/oder wiedererkannt werden.According to an expedient embodiment, one or more physical impulses (of a person) are taught in at one or more time intervals, and then, for example, during an execution of the communication, in particular speaking (of the person), in particular with parameters in certain value ranges Method at least a later time interval, upon recognition of the at least one (specific, learned) physical impulse determining or adjusting one or more parameters of the at least one auditory message is performed depending on the recognition of at least one of the learned physical impulses. The said physical impulse can also be part of said communication. Preferably, at least two different physical impulses are learned and / or recognized. In particular, a parameter of the at least one auditory message and / or the bleed of the further audio signal is determined or adapted depending on which of at least two physical impulses were recognized or recognized. The physical impulses may be described as their corresponding patterns, e.g. Parameter patterns are learned and / or recognized as movement patterns or change patterns.
Bevorzugt werden zumindest zwei unterschiedliche körperliche Regungen eingelernt und/oder wiedererkannt. Insbesondere wird ein Parameter der auditiven Meldung bestimmt abhängig davon, welche von zumindest zwei körperlichen Regungen erkannt bzw. wiedererkannt wurden.Preferably, at least two different physical impulses are learned and / or recognized. In particular, a parameter of the auditory message is determined depending on which of at least two physical impulses were recognized or recognized.
Beispielsweise kann ein Anpassen eines Parameters der zumindest einen auditiven Meldung abhängig von der Wiedererkennung einer bestimmten körperlichen Regung ausgeführt werden. Dabei können bei einer Wiedererkennung unterschiedlicher körperlichen Regungen, jeweils ein unterschiedliches Anpassen bestimmter Parameter ausgeführt werden, und/oder unterschiedliche Parameter der auditiven Meldung oder Kombinationen der Parameter, insbesondere von unterschiedlichen Arten zum Bestimmen oder Anpassen ausgewählt werden. Beispielsweise werden zu unterschiedlichen vordefinierten Klassen (Kategorien) körperlicher Regungen unterschiedliche mathematische Zusammenhänge zum Bestimmen oder Anpassen der Parameters der auditiven Meldung oder Varianten des Bestimmens der auditiven Meldung angewandt bzw. aktiviert. Mit anderen Worten kann auf das Wiederkennen einer von einem bestimmten Sprecher und seiner körperlichen Regung ein zweckmäßiges Verändern bzw. Anpassen einer auditiven Meldung (auf eine verbesserte, optimierte oder für diesen Fall vordefinierte oder eingelernte Art und Weise) ausgeführt werden. Diese kann beispielsweise für die Stimme des Sprechers bzw. für die für ihn typischen Parameter der Kommunikation oder sein Kommunikationsverhalten, passende Parameter bzw. passende Parameterwerte der auditiven Meldung bestimmt werden.For example, adjusting a parameter of the at least one auditory message may be performed depending on the recognition of a particular physical emotion. In this case, when recognizing different physical impulses, a different adaptation of particular parameters can be carried out in each case, and / or different parameters of the auditory message or combinations of the parameters, in particular of different types for determining or adapting can be selected. For example, at different predefined classes (categories) of bodily impulses, different mathematical relationships are used or activated to determine or adjust the parameters of the auditory message or variants of determining the auditory message. In other words, upon recognizing one of a particular speaker and his physical impulse, a convenient altering or adjusting of an auditory message (in an improved, optimized or in this case predefined or learned manner) may be performed. This can be determined, for example, for the voice of the speaker or for the typical parameters of the communication or his communication behavior, suitable parameters or appropriate parameter values of the auditory message.
Beispielsweise erfolgt ein Einlernen mehrerer bestimmter Stimmen und/oder mehrerer bestimmter körperlicher Regungen eines oder mehrerer Sprecher. Das Einlernen kann bevorzugt ein Ermitteln der entsprechenden Erkennungsmerkmale, beispielsweise der Wiederkennungsmuster zu den Stimmen oder zu den körperlichen Regungen umfassen, die eine spätere Unterscheidung dieser Stimmen bzw. körperlichen Regungen von anderen Stimmen bzw. körperlichen Regungen, oder solche einer anderen Person erlauben. Dies wird bevorzugt zu mehreren Zeitintervallen und für mehrere Personen ausgeführt. Dabei können Lerndaten erzeugt werden, die eine Zuordnung zwischen einem oder mehreren Wiedererkennungsmuster und einer darauffolgend, mit einem ein bestimmtes Erfolgsmaß überschreitenden und/oder ein bestimmtes Erfolgsmaß unterschreitenden Erzeugung einer auditiven Meldung repräsentieren.For example, a learning of several specific voices and / or more specific physical impulses of one or more speakers is done. The training may preferably comprise determining the corresponding recognition features, for example the recognition patterns for the voices or the physical impulses, which may later distinguish these voices or physical impulses from other voices or physical impulses, or those of another person. This is preferably carried out at several time intervals and for several persons. In this case, learning data can be generated which represent an association between one or more recognition patterns and a generation of an auditory message that subsequently exceeds a certain degree of success and / or goes beyond a certain measure of success.
Bei einer Wiedererkennung der bestimmten Stimme bzw. der entsprechender Muster, bzw. der Wiederkennungsmuster in einem oder mehreren späteren Zeitintervallen erfolgt die Anwendung einer entsprechend verbesserten, z.B. zu den Mustern oder zu den Stimmenparametern zugeordneter Anpassung einer auditiven Meldung, insbesondere der Varianten zum Bestimmen der Parameter auditiven Meldung. Dabei können die Eigenschaften die bestimmte Stimme des Sprechers und/oder Eigenschaften bezüglich Kommunikationsverhalten, Wahrnehmung, etc. für die bestimmte Person oder bestimmte Personengruppe berücksichtigt werden. Ein Sprecher kann auch mit anderen Mitteln als ein bestimmter Sprecher, als eine bestimmte Person oder Person zugehörig zu einer bestimmten Personengruppe erkannt werden und die ihm bzw. ihr zugeordneten oder im Verfahren gelernten Eigenschaften beim Erzeugen einer auditiven Meldung berücksichtigt werden. Wenn dann (auch) die besagte körperliche Regung der Person z.B. als ein Muster einer körperlichen Regung erkannt wird, erfolgt ein für diesen Fall vorgesehenes, insbesondere verbessertes Bestimmen eines oder mehrerer Parameter einer auditiven Meldung.Upon recognition of the particular voice (s), or patterns of recognition at one or more later time intervals, the application of a correspondingly improved, e.g. adaptation of an auditory message assigned to the patterns or to the voice parameters, in particular the variants for determining the parameter auditory message. The characteristics of the particular voice of the speaker and / or characteristics regarding communication behavior, perception, etc. for the particular person or specific group of persons may be taken into account. A speaker may also be recognized by any means other than a particular speaker, as a particular person or person belonging to a particular group of persons, and be aware of the characteristics assigned to him or her or learned in the method when generating an auditory message. If, then, the said bodily movement of the person (e.g. is recognized as a pattern of a physical emotion, there is provided for this case, in particular improved determination of one or more parameters of an auditory message.
Es kann die Logik und/oder Formel bzw. Zusammenhänge, nach welchen ein Bestimmen, bzw. Anpassen eines oder mehrerer Parameter ausgeführt wird, abhängig von einer wiederkannten körperlichen Regung angepasst werden. Für unterschiedliche Muster körperlicher Regungen, z.B. Mimik, Gestik, Lippenbewegung, eine bestimmte mit der Körpersprache kommunizierte Botschaft, können unterschiedliche Varianten des Bestimmens oder Anpassens der zumindest einen auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals vorgegeben bzw. eingelernt werden. Diese können dann bei einer Erkennung (Wiedererkennung) entsprechender Muster angewandt werden. Bevorzugt kann dabei eine vorgespeicherte, insbesondere der bestimmten körperlichen Regung zugeordnetes oder eine im Zusammenhang mit der besagten körperlichen Regung in der Vergangenheit mit einem gewissen Erfolgsmaß ausgeführtes Erzeugen der zumindest einen auditiven Meldung und/oder der Ausgabe eines (in der Vergangenheit angepassten oder nicht angepassten) Abschnitts des weiteren Audiosignals ausgeführt werden.The logic and / or formula or contexts under which determining or adjusting one or more parameters may be adjusted depending on a recognized bodily sensation. For different patterns of bodily movements, e.g. Facial expressions, gestures, lip movement, a specific message communicated with the body language, different variants of determining or adapting the at least one auditory message and / or a section of the further audio signal can be predetermined or learned. These can then be used in recognition (recognition) of corresponding patterns. Preference may be given to generating a pre-stored, in particular the specific physical impulse associated with or generating in the past with a certain degree of success the at least one auditory message and / or the output of a (in the past adapted or not adapted) Section of the further audio signal to be executed.
Ferner kann diese Variante des Verfahrens mit dem Erkennen bzw. Wiedererkennen der Person des Sprechers oder der Personengruppe, zu welcher der Sprecher zugeordnet ist, kombiniert werden. Mit anderen Worten kann dann eine bestimmte körperliche Regung einer bestimmten Person bzw. einer Person zugehörig zu einer Personengruppe erkannt werden. Daraufhin kann eine einer betreffenden Person bzw. eine Person zugehörig zu der Personengruppe zugeordnetes Bestimmen oder Anpassen des auszugebenden Audiosignals ausgeführt werden, wobei die Zuordnung, z.B. unter Berücksichtigung von Statistikdaten, Historiendaten, aggregierten Daten, bestimmt wird. Dabei können zumindest zwei oder drei unterschiedliche der besagten Zusammenhänge, z.B. für Kinder, Erwachsene, oder ältere Personen berücksichtigt werden.Furthermore, this variant of the method can be combined with recognizing or recognizing the person of the speaker or the group of persons to which the speaker is assigned. In other words, a specific physical impulse of a particular person or a person belonging to a group of persons can then be recognized. Thereupon, a determination or adaptation of the audio signal to be output associated with the person or a person belonging to the person group can be carried out, the assignment, e.g. taking into account statistical data, history data, aggregated data. At least two or three different ones of said relationships, e.g. be considered for children, adults, or the elderly.
Bevorzugt bezieht sich ein Einlernen auf das Ermitteln eines (naturwissenschaftlichen, mathematischen) Zusammenhangs zwischen einem Parameter einer oder mehreren körperlichen Regungen, die abhängig von bestimmten Mustern der Gestik und/oder Mimik und/oder Lippenbewegung und/oder Augenbewegung sind, und innerhalb eines gewissen Zeitintervalls stattfindenden (damit einhergehenden oder nachfolgenden) Kommunikation, insbesondere dem Sprechen einer Person. Dabei kann es sich beim Begriff „Sprechen“ um zumindest eine bestimmte (Kommunikations-) Transaktion oder eine Transaktion einer bestimmten Art innerhalb der besagten Kommunikation handeln.Preferably, training refers to determining a (scientific, mathematical) relationship between a parameter of one or more bodily movements that are dependent on particular patterns of gesture and / or facial expression and / or lip movement and / or eye movement, and within a certain time interval taking place (accompanying or subsequent) communication, in particular the speaking of a person. The term "speaking" can be at least one particular (communication) transaction or a transaction of a certain type within said communication.
Das besagte Einlernen bzw. Wiedererkennen kann im Verfahren in Bezug auf eine bestimmte Person oder in Bezug auf eine Person mit bestimmten, z.B. sensorisch erkennbaren Eigenschaften (Körpergröße, Kleidung, Bewegungsparameter, Personengruppe, etc.) oder in Bezug auf eine Person in einem bestimmten Raumbereich, z.B. an einem Sitzplatz im Wohnraum ausgeführt werden. Das Einlernen und/oder Wiedererkennen kann ferner umfassen: Erfassen eines Feedback-Indikators, der kennzeichnend ist für eine zumindest einmal erfolgtes, zweckmäßiges, passendes bzw. zufriedenstellendes Erzeugen oder Anpassen der auditiven Meldung, sowie Berücksichtigen des Feedback-Indikators bei einer wiederholten Ausführung des Verfahrens. Ein solcher Feedback-Indikator kann wiederum durch eine Eingabe eines Nutzers, etwa „like“ bzw. „not like“ oder bevorzugt durch ein Auswerten seiner auf die Ausgabe zumindest einer (angepassten, nicht angepassten, auf eine bestimmte Art und Weise angepassten) auditiven Meldung folgenden Reaktion ermittelt werden.Said teaching can be recognized in the method with respect to a particular person or with respect to a person having certain, e.g. sensory characteristics (height, clothing, movement parameters, group of people, etc.) or with respect to a person in a particular space, e.g. be performed on a seat in the living room. Teaching and / or recognizing may further comprise: detecting a feedback indicator indicative of at least one occasion, appropriately, satisfactorily generating or adjusting the auditory message, and considering the feedback indicator in a repeated execution of the method , Such a feedback indicator may in turn be provided by an input from a user, such as "not like" or preferably by evaluating it for the output of at least one (adapted, unmatched, customized in a particular manner) auditory message following reaction can be determined.
Besonders bevorzugt kann auch eine, einer Kommunikation, insbesondere mit einem bestimmten Richtungsparameter und/oder einer bestimmten Stimmlage bzw. Sprachton oder einem bestimmten inhaltlichen Merkmal und/oder Kommunikationsverhalten vorausgehende körperliche Regung für eine (bestimmte) Person erkannt werden, und daraufhin ein (noch viel präziseres) Bestimmen der Parameter der zumindest einen auditiven Meldung erfolgen. Ferner kann eine solche Ausführung des Verfahrens als Mittel zur Erkennung bzw. Klassifizierung des Verhaltensmusters zumindest einer Person genutzt werden, wobei eine Information über ein ermitteltes Verhaltensmuster ausgegeben wird.Particularly preferred may also be a, a communication, in particular with a certain directional parameters and / or a certain voice or speech tone or a certain content characteristic and / or communication behavior preceding physical impulse for a (specific) person are detected, and then take place (even more precise) determining the parameters of the at least one auditory message. Furthermore, such an embodiment of the method can be used as means for recognizing or classifying the behavioral pattern of at least one person, whereby information about a determined behavioral pattern is output.
Bei einer im Verfahren erkannten Stimme einer bestimmten Person und/oder der Stimme zugehörig zu einer bestimmten Personengruppe kann es sich um eine eingelernte Stimme handeln. Eingelernte Stimmen können als ein oder mehrere, für die Stimme typische Parameterwerte repräsentiert werden. Auf Basis solcher Parameter können Erkennungsdaten für eine oder mehrere bestimmte Stimmen ermittelt bzw. im Verfahren verarbeitet bzw. berücksichtigt werden. Bevorzugt können Stimmen bestimmter im Wohnraum wohnender Personen im Verfahren eingelernt werden. Speziell auf die Erkennung einer oder mehrerer eingelernter Stimmen oder einer Kombination von Stimmen, wenn diese zu einer Kommunikation mit einer weiteren Person im Wohnraum eingesetzt werden, kann ein geeignetes, bzw. eine nach vorausbestimmten Kriterien gewählte Logik, Formel, oder eine bestimmte Auswahl der Parameter zum Erzeugen der zumindest einen auditiven Meldung ausgeführt werden.A voice of a particular person recognized in the procedure and / or the voice belonging to a particular group of persons may be a trained voice. Teach-in voices can be represented as one or more typical parameter values for the voice. On the basis of such parameters, identification data for one or more specific votes can be determined or processed in the method or taken into account. Preferably, voices of certain persons living in the living space can be trained in the procedure. Specifically, the recognition of one or more learned voices or a combination of voices when used to communicate with another person in the living space may include a suitable or predetermined logic, formula, or a particular choice of parameters to generate the at least one auditory message.
Das Einlernen der Stimme (einer bestimmten Person) oder der Personengruppe kann wiederum mit Mitteln der in diesem Dokument beschriebenen Systems oder mit Hilfe eines weiteren Geräts, z.B. eines weiteren mobilen Anwendergeräts, erfolgen. Beispielsweise können die Erkennungsdaten für eine oder mehrere Stimmen auf Basis der Daten eines mobilen Anwendergeräts und/oder eines Fernmeldedienstes (z.B. beim Telefonieren) gewonnen werden und/oder aus einem zur Ausführung des Verfahrens eingerichteten mobilen Anwendergerät bereitgestellt werden. Besonders bevorzugt können für zumindest zwei unterschiedliche, z.B. wiedererkannte, Stimmen von zwei unterschiedlichen Personen oder Personen zugehörig zu zwei unterschiedlichen Personengruppen, unterschiedliche Parametersetze, Logik, Formel, Kennlinie, etc. beim Erzeugen einer auditiven Meldung und/oder Ausgabe des weiteren Audiosignals angewandt werden.The teaching of the voice (of a certain person) or of the group of persons may in turn be carried out by means of the system described in this document or by means of another device, e.g. another mobile user device, done. For example, the recognition data for one or more voices may be obtained based on the data of a mobile user equipment and / or a telecommunications service (e.g., telephoning) and / or provided from a mobile user equipment set up to perform the method. Particularly preferred may be for at least two different, e.g. Recognized, voices of two different persons or persons belonging to two different groups of people, different parameter networks, logic, formula, characteristic, etc. are applied when generating an auditory message and / or output of the further audio signal.
In einem Beispiel kann die zumindest eine auditive Meldung, beispielsweise eine Sprachmitteilung auf den einen oder mehrere Parameter der Kommunikation der zumindest einer bestimmten (erkannten, vermuteten, angenommenen) Person und/oder eine Person in einem bestimmten Bereich des Wohnraums und/oder auf eine bestimmte Stimme quantitativ (z.B. stärker oder schwächer) und/oder qualitativ (hinsichtlich anderer Parameter des Audiosignals) und/oder nach jeweils zweckmäßigen, bestimmten logischen Zusammenhängen angepasst werden. Beispielsweise kann ein Zeitparameter zur Ausgabe zumindest einer auditiven Meldung und/oder des weiteren Audiosignals auf bestimmte Parameter bzw. Parameter der bestimmten Art der Kommunikation unterschiedlicher Personen unterschiedlich angepasst werden. Auch kann dabei für bestimmte Personen, Personengruppen oder Raumbereiche ein, im selben Zeitintervall mit einer auditiven Meldung auszugebender Multimediainhalt unterschiedlich angepasst werden. Bei bestimmten in der besagten Kommunikation erkannten Stimmen, Rufnamen, oder Richtungsparameter der Kommunikation kann z.B. zwischen unterschiedlichen Anpassungen eines weiteren Multimediainhalts entschieden werden, z.B. nicht verändern, Pausieren, Verändern eines ausgewählten Leistungsparameters, Verändern eines Raumklangparameters, etc.In one example, the at least one auditory message, such as a voice message, may refer to the one or more parameters of communication of the at least one particular (recognized, suspected, assumed) person and / or person in a particular area of the housing and / or to a particular one Be adapted quantitatively (eg stronger or weaker) and / or qualitatively (with respect to other parameters of the audio signal) and / or according to each appropriate, specific logical connections. For example, a time parameter for outputting at least one auditory message and / or the further audio signal can be adapted differently to specific parameters or parameters of the particular type of communication of different persons. Also, for certain persons, groups of people or areas of space, a multimedia content to be output in the same time interval with an auditory message can be adapted differently. For certain voices, nicknames, or directional parameters of the communication recognized in said communication, e.g. between different adjustments of another multimedia content, e.g. not changing, pausing, changing a selected performance parameter, changing a surround sound parameter, etc.
Gemäß einer zweckmäßigen Ausgestaltung erfolgt ein Einlernen bestimmter Schlüsselwörter, Wortsequenzen und/oder mimischer Muster zumindest einer (bestimmten) Person im Wohnraum. Schlüsselwörter können Wörter aus einer bestimmten Liste sein, z.B. Hauptwörter, Adjektive, bestimmte Interjektionen, etc.. Dabei können entsprechende Lerndaten erzeugt werden. Es können Lerndaten auf Basis mehrerer Abschnitte der Kommunikation mit Beteiligung einer bestimmten Person, einer Kommunikation zwischen zwei bestimmten Personen oder einer Kommunikation zwischen den Personen zugehörig zu bestimmten Personengruppen im Verfahren ermittelt und/oder berücksichtigt werden. Auch können Lerndaten auf Basis einer Vielzahl der Kommunikationen zwischen zumindest je zwei Personen aus unterschiedlichen Wohnräumen bzw. Häusern abgeglichen werden, und daraus zweckmäßig aggregierte Lerndaten erzeugt werden. Ein Abgleichen bzw. eine Aggregation entsprechender Daten kann in einer beabstandet angeordneten Recheneinheit, z.B. in einem Server erfolgen. Die resultierenden abgeglichenen bzw. aggregierten Lerndaten können dann für eine weitere Ausführung des Verfahrens bereitgestellt werden. Beispielsweise kann ein Erkennen einer Kommunikationsbereitschaft, ein Bestimmen eines Prioritätsmaßes eines Abschnitts der Kommunikation (einer Transaktion oder einer Kommunikationsbotschaft) oder eine Assoziation einer sprachlichen Botschaft mit einem bestimmten Event (Ereignis), abhängig von den in einem Wohnraum erzeugten und/oder bereitgestellten Lerndaten, insbesondere unter Berücksichtigung einer aktuell ermittelten Szene im Wohnraum, erfolgen.According to an expedient refinement, certain key words, word sequences and / or mimic patterns of at least one (specific) person are taught in the living space. Keywords can be words from a particular list, e.g. Nouns, adjectives, certain interjections, etc .. In this case, corresponding learning data can be generated. Learning data based on several sections of the communication involving a particular person, communication between two specific persons or communication between the persons belonging to specific groups of persons may be determined and / or taken into account in the method. Also, learning data based on a plurality of communications between at least two people each from different homes or houses can be matched and useful aggregated learning data generated therefrom. Matching or aggregation of corresponding data may be performed in a spaced apart arithmetic unit, e.g. done in a server. The resulting matched learning data may then be provided for a further implementation of the method. For example, recognition of a willingness to communicate, determination of a priority measure of a section of the communication (a transaction or a communication message) or an association of a linguistic message with a specific event (event), in particular depending on the learning data generated and / or provided in a living space taking into account a currently determined scene in the living room, done.
Insbesondere umfasst das Verfahren einen Abgleich zwischen einer in der Vergangenheit erfassten körperlichen Regung, z.B. einer bestimmten Mimik, Gestik, Lippenbewegungen und diversen Parameter einer daraufhin folgenden Kommunikation, z.B. der daraufhin benutzter Worte, Wortsequenzen, linguistischen Strukturen, Transaktionen bestimmter Arten, Stimmenparameter, etc. Dabei kann auch ein Parameter der besagten Kommunikation auf Basis des Abgleichs ermittelt bzw. prädiziert und verarbeitet werden.In particular, the method includes reconciliation between one in the past detected physical emotion, eg a certain facial expressions, gestures, lip movements and various parameters of subsequent communication, eg the words subsequently used, word sequences, linguistic structures, transactions of certain types, voice parameters, etc. In this case, a parameter of said communication based on the Adjustments are determined or predicated and processed.
Bevorzugt können im Verfahren ein oder mehrere Parameter aus der Vergangenheit berücksichtigt werden, die eine kausale Abhängigkeit und/oder ein Zeitintervall zwischen einer bestimmten körperlichen Regung, z.B. Mustern der körperlichen Regung und Parametern einer zeitgleich, innerhalb eines gewissen Zeitintervalls oder daraufhin stattfindenden, sprachlichen Kommunikation, z.B. des inhaltliches Merkmal der Kommunikation, benutzter Worte, Wortsequenzen, linguistischen Strukturen, Transaktionen bestimmter Arten Ton, Unterton, Stimme, Kommunikationsverhalten, etc.) kennzeichnen. Ein solcher Abgleich kann im Verfahren personenspezifisch abhängig von der besagten Kommunikation zwischen zumindest zwei Personen im Wohnraum ermittelt und/oder beim Erzeugen zumindest einer auditiven Meldung und/oder beim Anpassen zumindest eines Abschnitts des weiteren Audiosignals berücksichtigt werden. Beispielsweise kann sich der Abgleich oder können sich aus dem Abgleich ermittelte Daten (qualitative und/oder quantitative Werte oder Zusammenhänge zwischen den Parametern) auf bestimmte Personen oder Personen zugehörig zu bestimmten Personengruppen beziehen. Daraufhin können sich beim Abgleich ermittelte Daten bei einer späteren Ausführung des Verfahrens, insbesondere abhängig von der Erkennung der Person bzw. Person aus der bestimmten Personengruppe, berücksichtigt werden.Preferably, the method may take into account one or more parameters from the past that have a causal dependence and / or a time interval between a particular bodily movement, e.g. Patterning of the physical sensation and parameters of a simultaneous, within a certain time interval or subsequent linguistic communication, e.g. the content characteristic of the communication, used words, word sequences, linguistic structures, transactions of certain types of tone, undertone, voice, communication behavior, etc.). Such matching can be determined person-specific depending on the said communication between at least two people in the living room and / or considered when generating at least one auditory message and / or adjusting at least a portion of the further audio signal. For example, the reconciliation or data obtained from the reconciliation (qualitative and / or quantitative values or relationships between the parameters) may relate to particular persons or persons belonging to particular groups of persons. Thereupon, data determined during the comparison can be taken into account in a later execution of the method, in particular depending on the recognition of the person or person from the particular group of persons.
Insbesondere kann im Verfahren auch das Einlernen von Stimmen und/oder körperlichen Regungen mit oder ohne Berücksichtigung einer erkannten Szene, insbesondere der zumindest einen bestimmten Klasse der Szene (Bildszene), ausgeführt und berücksichtigt werden. Ein solches Einlernen kann sich auf Merkmale beziehen die für bestimmte Personen bzw. Personen zugehörig zu bestimmten Personengruppen charakteristisch, z.B. statistisch typisch sind.In particular, in the method, the training of voices and / or physical impulses with or without consideration of a recognized scene, in particular the at least one particular class of the scene (image scene), executed and taken into account. Such training can refer to characteristics that are characteristic of certain persons or persons belonging to particular groups of persons, e.g. are statistically typical.
Gemäß einer zweckmäßigen Ausgestaltung wird eine aktuelle, insbesondere die besagte Kommunikation begleitende oder der Kommunikation vorausgehende, Szene im Wohnraum erfasst und im Verfahren berücksichtigt. Insbesondere handelt es sich um eine im Zusammenhang mit zumindest einer an der Kommunikation beteiligten Person stehende Szene. Dabei kann eine bildgestützte Klassifikation und Mustererkennung in Bildern oder Bildfolgen in Bezug auf die im Wohnraum erfassten (im Zusammenhang mit zumindest einem Abschnitt der besagten Kommunikation stehender) Bilder oder Bildfolgen ausgeführt werden. Es kann ein Parameter der Szene, insbesondere eine erkannte Klasse (Kategorie) der Szene zusammen oder alternativ zu einem ermittelten Parameter einer auditiven Kommunikation im Verfahren berücksichtigt werden. Eine Information zu der erfassten, insbesondere erkannten Szene kann im Verfahren zusammen bzw. auf dieselbe Weise wie ein Parameter einer auditiven Kommunikation verarbeitet werden. Beispielsweise kann abhängig von einem Parameter der Szene eine Parameter einer weiteren Kommunikation und/oder ein Parameter einer darauffolgenden Kommunikation (zumindest mit einem gewissen Wahrscheinlichkeitsmaß) prädiziert werden.According to an expedient embodiment, a current scene, in particular the said communication accompanying or preceding the communication, scene in the living space is detected and taken into account in the process. In particular, it is a scene associated with at least one person involved in the communication. In this case, an image-based classification and pattern recognition can be carried out in images or image sequences with respect to the images or image sequences recorded in the living space (standing in connection with at least a portion of the said communication). A parameter of the scene, in particular a recognized class (category) of the scene together or alternatively to a determined parameter of an auditory communication in the method can be taken into account. Information about the detected, in particular recognized, scene can be processed in the method in the same way as a parameter of an auditory communication. For example, depending on a parameter of the scene, a parameter of a further communication and / or a parameter of a subsequent communication can be predicted (at least with a certain degree of probability).
Bevorzugt wird ein Parameter der erfassten Szene zu zumindest einem weiteren Parameter der besagten Kommunikation zugeordnet und im Verfahren verarbeitet. Insbesondere umfasst die Szene eine Anordnung von zumindest zwei besagten, an der Kommunikation beteiligten, bzw. von der Kommunikation (in einer störender Weise) betroffenen Personen im Wohnraum, insbesondere eine relative Position, Ausrichtung, Posen, etc.. Bevorzugt umfasst eine Szene zumindest einen Parameter kennzeichnend eine körperliche Ausrichtung von zumindest zwei Personen in Bezug zueinander, insbesondere eine relative Ausrichtung und/oder eine Aktion von zumindest einer Person in Bezug auf eine weitere Person. Eine Aktion kann als eine Veränderung bzw. eine Dynamik bzw. eine Sequenz der Veränderung der Szene ebenfalls ausgewertet und im Verfahren berücksichtigt werden. Die Veränderung der Szene bzw. Aktion innerhalb der Szene kann mit Mittel der Bildverarbeitung, Objekterkennung und Dergleichen, erfasst werden. Bevorzugt erfolgt im Verfahren eine Klassifikation und/oder Einlernen der Szenen, insbesondere der typischen, in einem Wohnraum, oder in dem bestimmten Wohnraum häufig vorkommenden Szenen. Ein ermittelter Parameter kann eine von zumindest einer Person aktuell ausgeführte oder prädizierte Aktion kennzeichnen. Beispielsweise können bestimmte häufig ausgeführte Aktionen, oder Aktionen, die anhand vorausbestimmter Merkmale zu bestimmten Muster passen als solche erkannt bzw. wiedererkannt und berücksichtigt werden.Preferably, a parameter of the detected scene is assigned to at least one further parameter of said communication and processed in the method. In particular, the scene comprises an arrangement of at least two said persons involved in the communication or those affected by the communication (in a disturbing manner) in the living space, in particular a relative position, orientation, poses, etc. Preferably, a scene comprises at least one Parameter characterizing a physical orientation of at least two persons in relation to each other, in particular a relative orientation and / or an action of at least one person with respect to another person. An action can also be evaluated as a change or a dynamic or a sequence of the change of scene and taken into account in the process. The change of the scene within the scene can be detected by means of image processing, object recognition and the like. Preferably, in the method, a classification and / or learning of the scenes, in particular the typical, in a living room, or in the particular living space frequently occurring scenes. A determined parameter may identify an action currently being performed or predicated by at least one person. For example, certain frequently-performed actions, or actions that match predefined features to particular patterns, may be recognized as such, or recognized and taken into account.
Bevorzugt erfolgt eine Auswertung des zumindest eines Parameters der besagten Kommunikation und/oder das Bestimmen eines Parameters der auditiven Meldung abhängig von einer erkannten Szene, beispielsweise von einer erkannten Klasse der Szene oder von einem quantitativen Parameter der Szene. Dabei wird der Tatsache Rechnung getragen, dass in einer natürlichen, nicht gesondert genormten Kommunikation zwischen den Menschen dieselben Worte oder Kommunikationslaute je nach einer gegenseitigen Anordnung der Personen bzw. der Szene, einer aktuell ausgeführten Aktion, oder der Aktion innerhalb der Szene unterschiedliche Bedeutungen haben kann. Mit der Berücksichtigung der Szene kann im Verfahren eine höhere Performance erzielt werden. Beispielsweise kann ein Kommunikationsvorhabens der Person und/oder Prädiktion eines Parameters einer erwarteten Kommunikation oder eine Auswertung bzw. Interpretation zumindest eines inhaltlichen Merkmals eines Abschnitts der Kommunikation abhängig von der erfassten Szene, beispielsweise von einer erkannten Klasse (Kategorie) der Szene erfolgen.Preferably, an evaluation of the at least one parameter of the said communication and / or the determination of a parameter of the auditory message depends on a detected scene, for example on a recognized class of the scene or on a quantitative parameter of the scene. It takes into account the fact that in a natural, not separately standardized communication between people the same words or communication sounds depending on a mutual arrangement of the person or the scene, a currently performed action, or the action within the scene may have different meanings. With the consideration of the scene, a higher performance can be achieved in the process. For example, a communication project of the person and / or prediction of a parameter of an expected communication or an evaluation or interpretation of at least one content feature of a portion of the communication depending on the detected scene, for example, from a recognized class (category) of the scene.
Beispielsweise erfolgt abhängig von zumindest einer erfassten Szene und/oder einem ermittelten Zeitparameter zur Ausgabe einer auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals eine Auswahl, Auslesen oder Ausgeben eines oder mehrerer zugrundeliegenden Daten zum Erzeugen einer auditiven Meldung bzw. zur Ausgabe des weitere Audiosignals. Auch können aus zwei oder mehreren auszugebenden auditiven Meldungen (oder zugrundeliegenden als auditive Meldungen auszugebenden Inhalten) zumindest eine auditive Meldung oder eine bestimmte Auswahl, Reihenfolge, Sequenz, von auditiven Meldungen ausgewählt (und zum bestimmten Zeitintervall) werden. Diese können zum jeweils bestimmten Zeitintervall ausgegeben werden. Auch können zumindest zwei auditive Meldungen ausgewählt werden, die zumindest zeitlich überschneidend und/oder in unterschiedlichen Raumbereichen erzeugt werden sollen. Beispielsweise können auditive Meldungen mit bestimmten Merkmalen, z.B. Inhalten, Themen abhängig von einem Parameter der besagten Kommunikation oder der Szene bevorzugt oder vermieden werden.For example, depending on at least one detected scene and / or a determined time parameter for outputting an auditory message and / or a portion of the further audio signal, a selection, reading or output of one or more underlying data for generating an auditory message or for outputting the further audio signal , Also, from two or more auditory messages to be output (or underlying contents to be output as auditory messages), at least one auditory message or a particular selection, sequence, sequence, of auditory messages may be selected (and at the particular time interval). These can be output at the respective time interval. Also, at least two auditory messages can be selected, which are to be generated at least temporally overlapping and / or in different spatial areas. For example, auditory messages with certain features, e.g. Content, topics depending on a parameter of said communication or scene are preferred or avoided.
Bevorzugt wird abhängig von der zumindest einen erkannten Szene, einer aktuellen Aktion zumindest einer Person und zumindest einem inhaltlichen Merkmal der besagten Kommunikation ein passendes stilistisches und/oder thematisches oder eine Ausgabesprache betreffendes Merkmal ermittelt, nach welchem die zumindest eine auditive Meldungen ausgewählt, vermieden, unterdrückt, zeitlich verschoben oder vorgezogen werden. Auch kann ein Zeitparameter zur Ausgabe zumindest eines Abschnitt des weiteren Audiosignals abhängig von den Parametern einer oder mehrerer auditiven auszugebenden Meldungen bestimmt werden. Ein solcher Zeitparameter der auditiven Meldung und/oder des Abschnitts des weiteren Audiosignals bestimmt beispielsweise zumindest eine passende Abspieldauer und/oder einen Ausgabezeitpunkt oder einen Zeitpunkt bis zu dem die Ausgabe abgeschlossen werden soll. Beispielsweise kann für einen ermittelten Zeitparameter eine auditive Meldung (von mehreren auszugebenden auditiven Meldungen oder Varianten einer auditiven Meldung) zu Ausgabe ausgewählt oder generiert werden.Preferably, depending on the at least one recognized scene, a current action of at least one person and at least one content feature of said communication, a suitable stylistic and / or thematic or output language-related feature is determined according to which the at least one auditory message is selected, avoided, suppressed , postponed or brought forward. Also, a time parameter for outputting at least a portion of the further audio signal may be determined depending on the parameters of one or more audible messages to be output. Such a time parameter of the auditory message and / or of the section of the further audio signal determines, for example, at least one suitable playback time and / or one output time or a point in time until which the output is to be completed. For example, for a determined time parameter, an auditory message (from several auditory messages to be output or variants of an auditory message) can be selected or generated for output.
Alternativ oder zusätzlich kann auch ein Parameter des weiteren Audiosignals, ein passendes stilistisches und/oder thematisches Merkmal zu einem auszuwählenden Audiosignals, einer abzuspielenden Multimediasequenz abhängig von einer erkannten Szene, einer aktuellen Aktion zumindest einer Person und zumindest einem inhaltlichen Merkmal der besagten Kommunikation bestimmt oder angepasst werden. Ferner kann auch ein oder mehrere Zeitparameter zur Ausgabe des besagten weiteren Audiosignals ermittelt werden. Ein solcher Zeitparameter bestimmt beispielsweise zumindest eine passende Abspieldauer und/oder einen Ausgabezeitpunkt oder einen Zeitpunkt bis zu dem die Ausgabe abgeschlossen werden soll. Daraufhin kann ein abzuspielender Multimediainhalt oder ein Abschnitt eines Multimediainhalts, insbesondere unter Berücksichtigung zumindest eines prädizierten Parameters der besagten Kommunikation und/oder zumindest einer auszugebenden auditiven Meldung, ausgewählt werden. Dabei kann auf dieser Basis eine Anfrage ins Netzwerk bzw. Internet, z.B. zu einem Portal oder Plattform mit Multimediainhalten versendet werden. Beispielsweise kann eine Anfrage generiert werden abhängig von einem Parameter der Szene im Wohnraum, einer aktuellen Beschäftigung einer oder mehrerer Personen und/oder zumindest einem Parameter, insbesondere einem inhaltlichen Merkmal der besagten Kommunikation. Daraufhin kann ein oder mehrere passende Multimediainhalte, beispielsweise umfassend wahlweise nur ein Audiosignal, oder ein Audiosignal und ein Videosignal bereitgestellt.Alternatively or additionally, a parameter of the further audio signal, a matching stylistic and / or thematic feature to an audio signal to be selected, a multimedia sequence to be played depending on a detected scene, a current action at least one person and at least one content-related feature of said communication determined or adjusted become. Furthermore, one or more time parameters for outputting the said further audio signal can also be determined. Such a time parameter determines, for example, at least a suitable playback time and / or an output time or a time until the output is to be completed. Thereupon, a multimedia content to be played or a section of a multimedia content, in particular taking into account at least one predicated parameter of said communication and / or at least one auditory message to be output, can be selected. On this basis, a request can be sent to the network or Internet, for example to a portal or platform with multimedia content. For example, a request may be generated depending on a parameter of the scene in the living space, a current employment of one or more persons and / or at least one parameter, in particular a content-related feature of said communication. Then one or more matching multimedia content, for example, optionally comprising only one audio signal, or an audio signal and a video signal.
Dabei kann ein in Bezug auf die Art, Thema, Genre, Lauflänge, etc. passender Inhalt, z.B. ein Multimediainhalt, beispielsweise von einem Datenträger oder aus einem Internetportal ausgelesen und im Wohnraum ausgegeben werden. Solche Multimediainhalte können bevorzugt abhängig von einer sie kennzeichnenden Lauflänge und/ oder abhängig dem besagten ermittelten Zeitparameter und/oder Genre, der zu einer ermittelten Szene, Kombination der Parameter der besagten Kommunikation nach vorausbestimmten Kriterien assoziiert oder zugeordnet wird, ausgewählt werden. Ein solcher Zeitparameter bestimmt beispielsweise zumindest eine passende Abspieldauer und/oder einen Ausgabezeitpunkt oder einen Zeitpunkt bis zu dem die Ausgabe abgeschlossen werden soll. Daraufhin kann ein abzuspielender Multimediainhalt oder ein Abschnitt eines Multimediainhalts ausgewählt werden. Dabei kann eine Anfrage ins Internet, z.B. zu einem Portal oder Plattform mit Multimediainhalten versendet werden. Daraufhin wird ein oder mehrere Multimediainhalte, beispielsweise umfassend wahlweise nur ein Audiosignal, oder ein Audiosignal und ein Videosignal bereitgestellt. Daraufhin kann ein oder mehrere Multimediainhalte, beispielsweise umfassend wahlweise nur ein Audiosignal, oder ein Audiosignal und ein Videosignal bereitgestellt. Dabei kann die Entscheidung darüber ob ein Multimediainhalt vorwiegend mit Audiosignalen oder vorwiegend ohne Audiosignale ausgewählt wird, abhängig von dem zumindest einem Parameter der besagten Kommunikation oder der zumindest einen (auszugebenden) auditiven Meldung getroffen werden.Thereby, a content matching in kind, subject, genre, run length, etc., e.g. a multimedia content, for example, read from a disk or from an Internet portal and spent in the living room. Such multimedia content may preferably be selected depending on a runlength characterizing it and / or depending on said determined time parameter and / or genre associated with or assigned to a detected scene, combination of the parameters of said communication according to predetermined criteria. Such a time parameter determines, for example, at least a suitable playback time and / or an output time or a time until the output is to be completed. Thereupon a multimedia content to be played or a section of a multimedia content can be selected. In doing so, a request to the Internet, e.g. be sent to a portal or platform with multimedia content. Thereupon, one or more multimedia contents, for example optionally comprising only an audio signal, or an audio signal and a video signal are provided. Thereupon, one or more multimedia contents, for example optionally comprising only one audio signal, or one audio signal and one video signal, may be provided. In this case, the decision as to whether a multimedia content is selected predominantly with audio signals or predominantly without audio signals can be made depending on the at least one parameter of said communication or the at least one (to be output) auditory message.
Im Verfahren kann die Position zumindest eines des Sprechers oder eines Raumteils in dem sich ein Sprecher befindet ermittelt, insbesondere mit einem Wahrscheinlichkeitsmaß vorausgesagt werden, durch einen Abgleich zwischen den Signalen von zumindest zwei Mikrophonen im Wohnraum oder mit einem Sensor, der die Erfassung akustischer Signale mit einem auf Ultraschall oder Radar basierenden Prinzip kombiniert. Auch kann eine Erkennung eines Aufenthaltsortes einer Person im Wohnraum, beispielsweise mit einer Kamera, Brandschutzsensor, Bewegungsmelder erfolgen. Beispielsweise kann zumindest die Position des Sprechers aus einer Phasenverschiebung eines akustischen Signals ermittelt werden, der z.B. von zwei räumlich versetzten Mikrophonen erfasst wird. Die Position zumindest einer der besagten an der Kommunikation beteiligten Personen kann auch unter Berücksichtigung, insbesondere Abgleich mit den Daten aus der Vergangenheit erfolgen.In the method, the position of at least one of the speaker or a part of space in which a speaker is located can be predicted, in particular with a probability measure, by a comparison between the signals of at least two microphones in the living space or with a sensor that detects the detection of acoustic signals combined with an ultrasound or radar based principle. Also, a recognition of a location of a person in the living room, for example, with a camera, fire protection sensor, motion detectors. For example, at least the position of the speaker can be determined from a phase shift of an acoustic signal, e.g. is detected by two spatially displaced microphones. The position of at least one of the said persons involved in the communication can also take place with consideration, in particular comparison with the data from the past.
Beispielsweise kann ein Raumklangparameter einer auditiven Meldung und/oder des weiteren Audiosignals derart, abhängig von einer (für ein bestimmtes Zeitintervall) ermittelten Szene und/oder Verteilung der Personen bzw. Personen zugehörig zu bestimmten Personengruppen auf die Raumbereiche und/oder Sitzplätze innerhalb des Wohnraums und/oder der Kopfposition einer oder mehreren Personen, bestimmt oder angepasst werden, dass ein kumulierter Wert für zumindest zwei Personen der kennzeichnend ist für die Güte der Wahrnehmbarkeit und/oder Verständlichkeit der zumindest einen auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals und/oder zumindest eines Abschnitts der besagten Kommunikation, erhöht bzw. zu einem Zielwert hin verändert, z.B. gesteuert wird. Dabei kann der ein oder mehrere Raumklangparameter verändert werden abhängig davon, wie viele Personen sich im Wohnraum befinden, in welchen bestimmten Raumbereichen sich diese befinden und/oder auf welchen Sitzplätzen diese sitzen und/oder ob und wie sich zumindest eine Person bewegt, und/oder von der erkannten Aktion zumindest einer Person in Bezug auf eine weitere Person, und/oder abhängig davon, wie viele oder welche der Person sich an der besagten Kommunikation beteiligen.For example, a surround sound parameter of an auditory message and / or the further audio signal may be dependent on a (for a specific time interval) determined scene and / or distribution of persons or persons belonging to specific groups of people on the room areas and / or seats within the living room and / or the head position of one or more persons, determined or adapted, that a cumulative value for at least two persons is indicative of the quality of the perceptibility and / or intelligibility of the at least one auditory message and / or a portion of the further audio signal and / or at least a portion of said communication, increased or changed to a target value, eg is controlled. In this case, the one or more surround sound parameters can be changed depending on how many people are in the living room, in which specific room areas they are and / or sitting on these seats and / or if and how at least one person moves, and / or of the recognized action of at least one person with respect to another person, and / or depending on how many or which of the person participate in said communication.
In einem weiteren Beispiel kann der Raumklangparameter derart abhängig von der Position der zumindest einer Person gesteuert werden, dass bei einer Bewegung der besagten Person innerhalb des Wohnraums eine Ausgabe des für sie bestimmten bzw. ihr zugeordneten zumindest einer auditiven Meldung und/oder eines weiteren Audiosignals abhängig oder sinngemäß entsprechend zu der Bewegung und/oder räumlichen Ausrichtung der Person verändert wird und/oder ein oder mehrere Parameter der Schallwellen oder Schallwellenmuster, die für die besagte Person (für zumindest eine neue Position und/oder Ausrichtung der Person) auf Basis der auditiven Meldung und/oder des Audiosignals erzeugt bzw. wahrnehmbar gemacht werden, von der zumindest einen früheren (bisherigen) Parameter bzw. der Wahrnehmbarkeit der Schallwellen bzw. Schallwellenmuster auf Basis des Audiosignals in einem bisherigen Raumbereich gesteuert werden und/oder im Wesentlichen aufrechterhalten werden.In another example, the surround sound parameter may be controlled depending on the position of the at least one person that upon movement of said person within the living space, an output of the at least one auditory message and / or audio signal intended for or associated therewith or mutatis mutandis according to the movement and / or spatial orientation of the person is changed and / or one or more parameters of the sound waves or sound wave pattern, for the said person (for at least one new position and / or orientation of the person) based on the auditory message and / or the audio signal are generated or made perceptible, are controlled by the at least one previous (previous) parameter or the perceptibility of the sound waves or sound wave pattern based on the audio signal in a previous spatial area and / or maintained substantially.
Bevorzugt werden für zumindest zwei Personen, zumindest zwei, insbesondere zu den besagten Personen zugeordneten Ausgaben des jeweils zumindest eines Audioinhalts, insbesondere der insgesamt zumindest zwei Abschnitten eines oder mehrerer auszugebenden Audiosignale, oder einer auditiven Meldung und eines auszugebenden Audiosignals, abhängig von der Bewegung der Personen derart gesteuert, dass ein Maß der Wahrnehmbarkeit durch die eine oder zwei Personen erhöht wird und/oder ein Maß einer gegenseitigen Störung der zumindest zwei auditiver Inhalte verringert wird. Beispielsweise können die der zumindest einer, zwei oder mehreren Personen zugeordneten (für sie bestimmte und/oder die von ihnen bisher gehörten) auditiven Inhalte bei einer Veränderung ihrer (jeweiligen) Position, Ausrichtung, Kopfrichtung derart gesteuert werden, dass eine (unerwünschte) Veränderung der Wahrnehmbarkeit bzw. Verständlichkeit vermieden wird. Auch können akustische Inhalte (mittels der Steuerung, insbesondere Regelung der entsprechenden Ausgabe bzw. der den Inhalten korrespondierender Schallwellen bzw. Schallwellenmuster der zumindest einen der besagten Personen (räumlich) nachgeführt werden.Preference is given for at least two persons, at least two, in particular to the said persons associated outputs of each at least one audio content, in particular the total of at least two sections of one or more output audio signals, or an auditory message and an output audio signal, depending on the movement of persons controlled such that a measure of perceptibility by the one or two persons is increased and / or a degree of mutual interference of the at least two auditory contents is reduced. For example, the auditory contents assigned to the at least one, two or more persons (intended for them and / or those they have hitherto heard) can be controlled in such a way that their (respective) position, orientation, head direction change (undesired) Perceptibility or intelligibility is avoided. Also, acoustic contents (by means of the control, in particular regulation of the corresponding output or of the contents of corresponding sound waves or sound wave patterns of the at least one of said persons (spatially) can be tracked.
Auch kann zumindest ein auditiver Inhalt, insbesondere auf eine Bedienhandlung oder eine sonstige Willensäußerung, z.B. eine vorausbestimmte Geste der Person, zu einer Person zugeordnet werden, wobei daraufhin die Parameter des zumindest einen zugeordneten auditiven Inhalts, und insbesondere zumindest eines zweiten zu einer anderen Person zugeordneten auditiven Inhalts gesteuert werden. Dabei kann zumindest eine Person einen gewählten (ihren) auditiven Inhalt, beispielsweise von einem ersten Raumbereich in einen zweiten Raumbereich sozusagen „mitnehmen“. Dabei kann auch ein zweiter, insbesondere zu einer zweiten Person zugeordneter auditiver Inhalt entsprechend zumindest einem Optimierungskriterium gesteuert werden. Beispielsweise können die Parameter der im Wohnraum zu erzeugten Schallwellen bzw. Schallwellenmuster zu zumindest zwei auditiven Inhalten derart gesteuert, insbesondere geregelt werden, dass ein raumbereichsspezifisches Übersprechen zwischen den zumindest zwei akustischen Inhalten verringert wird, eine unerwünschte Wechselwirkung oder eine psychoakustische Maskierung reduziert wird, eine gegenseitige räumliche Trennung der auditiven Inhalte erhöht wird oder eine (kumulierte) Wahrnehmbarkeit der zumindest zwei auditiven Inhalte erhöht wird.Also, at least one auditory content, in particular an operator action or another will, eg a predefined gesture of the person, can be assigned to a person, the parameters of the at least one associated auditory content, and in particular at least one second, assigned to another person auditory content. In this case, at least one person can "take away" a chosen auditory content, for example from a first spatial region into a second spatial region. In this case, a second, in particular to a second person assigned auditory content corresponding to at least one optimization criterion to be controlled. For example, the parameters of the sound waves or sound wave patterns generated in the living space can be controlled, in particular regulated, to at least two auditory contents such that a spatial area-specific crosstalk between the at least two acoustic contents is reduced, an undesired interaction or a psychoacoustic masking is reduced, a reciprocal one spatial separation of the auditory content is increased or a (cumulative) perceptibility of the at least two auditory content is increased.
Gemäß einer zweckmäßigen Ausgestaltung wird eine Emotion, insbesondere zumindest eine Klasse der Emotion, und/oder eine Absicht, insbesondere zumindest eine Klasse der Absicht zumindest einer Person im stationären Wohnraum ermittelt bzw. nach vorausbestimmten Kriterien geschätzt und berücksichtigt. Daraufhin kann zumindest ein oder mehrere Parameter der zumindest einen auditiven Meldung, abhängig von einer erkannten Emotion bzw. Absicht der zumindest einen Person, insbesondere von der erkannten Klasse der Emotion bzw. der erkannten Klasse der Absicht und/oder von einem qualitativen oder quantitativen Parameter der Emotion bzw. Absicht der zumindest einen Person, bestimmt oder angepasst werden. Besonders bevorzugt handelt es sich um eine Emotion bzw. Absicht, die sich im Zusammenhang mit der besagten Kommunikation zwischen zumindest zwei Personen im stationären Wohnraum einstellt bzw. gilt.According to an expedient embodiment, an emotion, in particular at least one class of the emotion, and / or an intention, in particular at least one class of the intention of at least one person in the inpatient housing is determined or estimated according to predetermined criteria and considered. Thereupon, at least one or more parameters of the at least one auditory message, depending on a detected emotion or intention of the at least one person, in particular of the recognized class of the emotion or the recognized class of intention and / or of a qualitative or quantitative parameter of the Emotion or intention of at least one person, determined or adapted. Particularly preferably, it is an emotion or intention that arises or applies in connection with said communication between at least two persons in the stationary living space.
Dabei kann die besagte Emotionserkennung und/oder Absichtserkennung insbesondere mit einer im Wohnraum befindlichen, insbesondere zu der in diesem Dokument beschriebenes System gehörenden oder vernetzten Kamera ausgeführt werden. Beispielsweise kann die Erkennung zumindest eines Parameters der Emotion (z.B. betreffend eine Veränderung der Emotion) und/oder der Absicht zumindest einer (an der vorliegenden Kommunikation beteiligten Person) auf Basis der Auswertung des zeitlichen Verlaufs der Mimik und/oder Gestik und/oder Augenbewegungen der betreffenden Person, mit oder ohne Berücksichtigung einer weitere körperliche Regungen mit oder ohne Abgleich mit dem zumindest einem Parameter der auditiven Kommunikation erfolgen. Beispielsweise können zwei oder mehrere vereinfachte Klassen der Emotion, z.B. relativ neutral, Freude, Zuneigung, Abneigung, Verärgerung, Verzückung, etc. und/oder zwei oder mehrere der Absicht, z.B. bereit für eine Reaktion, bereit für eine (bestimmte) Bewegung oder Art der Aktion, Passivität, etc. erkannt und berücksichtigt.In this case, the said emotion recognition and / or intent recognition can be carried out in particular with a camera located in the living space, in particular belonging to or linked to the system described in this document. For example, the detection of at least one parameter of the emotion (eg concerning a change of the emotion) and / or the intention of at least one person involved in the present communication on the basis of the evaluation of the temporal course of the facial expressions and / or gestures and / or eye movements person, with or without consideration of further physical impulses, with or without reconciliation with the at least one auditory communication parameter. For example, two or more simplified classes of emotion, e.g. relatively neutral, joy, affection, dislike, annoyance, rapture, etc. and / or two or more of the intention, e.g. ready for a reaction, ready for a (specific) movement or type of action, passivity, etc. recognized and considered.
Gemäß einer zweckmäßigen Ausgestaltung wird ein Maß der Anwendbarkeit und/oder ein Maß der Erfolgswahrscheinlichkeit einer oder mehrerer Varianten des Bestimmens oder Anpassens eines oder mehrerer Parameter der zumindest einen auditiven Meldung ermittelt und im Verfahren berücksichtigt. Daraufhin kann eine Auswahl (oder Veränderung) einer oder mehreren Varianten des Bestimmens oder des Anpassens eines und/oder mehrerer Parameter oder die Auswahl zumindest einer alternativen Maßnahme in Bezug auf die auditive Meldung oder den mit der auditiven Meldung zu übermittelnden Inhalt.According to an expedient embodiment, a measure of the applicability and / or a measure of the probability of success of one or more variants of determining or adapting one or more parameters of the at least one auditory message is determined and taken into account in the method. There may then be a selection (or variation) of one or more variants of determining or adapting one and / or more parameters, or selecting at least one alternative measure relating to the auditory message or content to be conveyed with the auditory message.
Das Maß der besagten Anwendbarkeit und/oder der Erfolgswahrscheinlichkeit kann oder können dabei entsprechend vorausbestimmten Kriterien, z.B. unter Berücksichtigung zumindest eines Optimierungskriterium ermittelt werden. Insbesondere wird das Wahrscheinlichkeitsmaß, dass das Erzeugen der auditiven Meldung nicht erfolgreich war, ist oder wird und/oder das Maß der Anwendbarkeit einer oder mehrerer bestimmter Varianten des Bestimmens bzw. Anpassens eines oder mehrerer Parameter der auditiven Meldung ermittelt und berücksichtigt. Das Maß der besagten Anwendbarkeit und/oder der Erfolgswahrscheinlichkeit kann oder können zumindest teilweise, prädiktiv, z.B. auf Basis der Historiendaten ermittelt werden. Dabei kann ein Ergebnis des Erzeugens einer auditiven Meldung kurz vor, während oder nach der Erzeugung der auditiven Meldung simuliert und mit zumindest einer vorausbestimmten Bedingung, bevorzugt einem aktuellen Optimierungskriterium verglichen werden. Beispielsweise kann ein Maß der Wahrnehmbarkeit und/oder der Verständlichkeit der zumindest einen auditiven Meldung in einem bestimmten Raumbereich und/oder von einer bestimmten Person ermittelt und berücksichtigt werden. Auf die analoge Weise kann ein Maß der besagten Anwendbarkeit und/oder der Erfolgswahrscheinlichkeit in Bezug auf die Ausgabe zumindest eines Abschnitts des weiteren Audiosignals, der insbesondere während der Ausgabe der besagten auditiven Meldung auszugeben ist, ermittelt und berücksichtigt werden. Daraufhin kann ein oder mehrere Parameter der besagten auditiven Meldung und/oder zumindest eines (betreffenden) Abschnitts des weiteren Audiosignals zweckmäßig angepasst werden.The degree of said applicability and / or the probability of success may or may be determined according to predetermined criteria, e.g. be determined taking into account at least one optimization criterion. In particular, the measure of likelihood that the auditory reporting was not successful is or will be and / or the degree of applicability of one or more particular variants of determining one or more parameters of the auditory message is determined and taken into account. The degree of said applicability and / or the probability of success may or may be at least partially, predictively, e.g. determined on the basis of the history data. In this case, a result of the generation of an auditory message can be simulated shortly before, during or after the generation of the auditory message and compared with at least one predefined condition, preferably a current optimization criterion. For example, a measure of the perceptibility and / or the intelligibility of the at least one auditory message in a specific spatial area and / or by a specific person can be determined and taken into account. In the analogous manner, a measure of said applicability and / or probability of success may be determined and taken into account with respect to the output of at least a portion of the further audio signal to be output, in particular, during the output of said auditory message. Thereupon, one or more parameters of said auditory message and / or at least one (relevant) section of the further audio signal may be suitably adjusted.
Alternativ oder zusätzlich kann im Verfahren ein Ermitteln eines Wahrscheinlichkeitsmaßes erfolgen, dass ein Erzeugen zumindest einer auditiven Meldung und/oder die Ausgabe eines weiteren Audiosignals bei dem ermittelten und/oder prädizierten Parameter der besagten Kommunikation, insbesondere unter der Berücksichtigung eines Parameters eines weiteren akustischen Inhalts nicht erfolgreich war, ist oder wird und daraufhin abhängig von dem ermittelten Wahrscheinlichkeitsmaß die Auswahl der Variante der Anpassung eines oder mehrerer Parameter oder einer bestimmten alternativen Maßnahme in Bezug auf zumindest einen Abschnitt des weiteren Audiosignals, und/oder in Bezug auf die auditive Meldung oder den mit der auditiven Meldung zu übermittelnden Inhalt ausgeführt werden.Alternatively or additionally, in the method, a determination of a probability measure may be made that generating at least one auditory message and / or the output of a further audio signal in the determined and / or predicted parameter of said communication, in particular taking into account a parameter of a further acoustic content was successful, is or will, and then depending on the determined probability measure the selection of the variant of the adaptation of one or more parameters or a specific alternative measure with respect to at least a portion of the further audio signal, and / or in relation to the auditory Message or the content to be delivered with the auditory message.
Beispielsweise wird ein Maß für die Erfolgswahrscheinlichkeit ermittelt, dass die Ausgabe einer auditiven Meldung, unter Berücksichtigung eines ermittelten oder prädizierten Parameter der besagten Kommunikation, insbesondere unter der Berücksichtigung eines ermittelten oder prädizierten Parameters eines weiteren (im Wohnraum hörbaren) akustischen Inhalts, insbesondere in einem bestimmten Raumbereich bzw. für eine Person in einem bestimmten Raumbereich, nicht hinreichend ist oder war, ermittelt und berücksichtigt. Daraufhin kann eine vorausbestimmte Maßnahme, z.B. eine Wiederholung zumindest eines Teils der besagten auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals (mit oder ohne zumindest einer zugeordneten oder begleitende Videosequenz) veranlasst werden, und/oder ein weiteren (verändertes) Bestimmen oder Anpassen der Parameter der zumindest einen auditiven Meldung und/oder des weiteren Audiosignals bei einer weiteren Ausführung des Verfahrens ausgeführt werden.For example, a measure of the probability of success is determined that the output of an auditory message, taking into account a determined or predicated parameter of said communication, in particular taking into account a determined or predicted parameter of another (audible in the living room) acoustic content, especially in a specific Room area or for a person in a particular area, is insufficient or was, determined and taken into account. Thereupon, a predetermined measure, e.g. a repetition of at least a portion of said auditory message and / or a portion of the further audio signal (with or without at least one associated or accompanying video sequence) being made, and / or further (changing) determining or adjusting the parameters of the at least one auditory message; / or the further audio signal are executed in a further embodiment of the method.
Alternativ oder zusätzlich wird ein Maß für die Anwendbarkeit einer Anpassung eines Parameters der auditiven Meldung, unter Berücksichtigung eines ermittelten Parameter der besagten Kommunikation, insbesondere unter der Berücksichtigung eines Parameters eines weiteren akustischen Inhalts im Wohnraum nicht hinreichend ist oder war, ermittelt und berücksichtigt. Abhängig von dem ermittelten Maß der Erfolgswahrscheinlichkeit bzw. Anwendbarkeit eines Anpassens wird eine Maßnahme in Bezug die auszugebende auditive Meldung oder in Bezug auf den mit der auditiven Meldung zu übermittelnden Inhalt ausgewählt. Eine solche Maßnahme kann z.B. eine Variante des Bestimmens oder Anpassens zumindest eines Parameters der auditiven Meldung umfassen.Alternatively or additionally, a measure of the applicability of an adaptation of a parameter of the auditory message, taking into account a determined parameter of the said communication, in particular taking into account a parameter of a further acoustic content in the living space is or is insufficient, is determined and taken into account. Depending on the measure of probability of success or applicability of an adjustment, a measure is selected in relation to the auditory report to be issued or to the content to be transmitted with the auditory report. Such a measure may e.g. a variant of determining or adapting at least one parameter of the auditory message.
Beispielsweise kann ein Maß der Erfolgswahrscheinlichkeit in Bezug auf das Erzeugen einer auditiven Meldung und/oder eine zweckmäßige Anwendbarkeit eines bestimmten Anpassens der auditiven Meldung zumindest teilweise vorab, d.h. vor oder teilweise während der Erzeugung auditiven Meldung oder der zu der auditiven Meldung korrespondierender Daten erfolgen. Auch kann ein Maß für die Erfolgswahrscheinlichkeit in Bezug auf einen bereits in der Ausgabe befindlichen oder bereits ausgegebenen Abschnitt der auditiven Meldung ermittelt und, insbesondere dynamisch, berücksichtigt werden. Beispielsweise kann ein Maß für die Anwendbarkeit oder Erfolgswahrscheinlichkeit eine, insbesondere voraussichtliche, Erreichung eines bestimmten Ziels bzw. Zielwerts, z.B. bezüglich einer Wahrnehmbarkeit des betreffenden Abschnitts der besagten Kommunikation und/oder der auditiven Meldung, repräsentieren.For example, a measure of the probability of success relating to generating an auditory report and / or expedient applicability of a particular adjustment of the auditory message may be at least partially pre-determined, i. before or partly during the generation of an auditory report or the data corresponding to the auditory report. Also, a measure of the probability of success in relation to an already existing in the issue or already issued section of the auditory message can be determined and, in particular dynamically taken into account. For example, a measure of the applicability or likelihood of success may include, in particular, anticipated achievement of a particular goal, e.g. in terms of perceptibility of the relevant portion of said communication and / or the auditory message.
Abhängig von dem ermittelten Maß für die Anwendbarkeit und/oder Erfolgswahrscheinlichkeit können diverse Maßnahmen, bevorzugt das Bestimmen oder Anpassen diverser in diesem Dokument beschriebener Parameter einer oder mehrerer auditiven Meldungen ausgeführt werden. Bevorzugt kann die Logik, Formel, Kennlinie zum Bestimmen oder Anpassen zumindest eines Parameters, abhängig von dem Maß der Anwendbarkeit und/oder Erfolgswahrscheinlichkeit, verändert werden. Beispielsweise kann eine solche Maßnahme ein Variieren eines Zeitparameters bei der Ausgabe der zumindest einer auditiven Meldung, Reihenfolge oder Kombination bei der Ausgabe von zumindest zwei auditiven Meldungen, eine Kombination zumindest einer auditiven Meldung mit zumindest einem Abschnitt des weiteren des Audiosignals, einer wiederholten Ausgabe eines Teils der zumindest einen auditiven Meldung oder eines Teils der mit der auditiven Meldung repräsentierten Inhalts umfassen. Ferner kann die zumindest eine vorausbestimmte Maßnahme umfassen zumindest einen Teil des mit der auditiven Meldung zu übermittelnden Inhalts mit anderen Mitteln, z.B. visuell, textuell und/oder in einem weiteren Raumbereich des Wohnraums und/oder auf einer weiteren Ausgabevorrichtung, z.B. auf einem mobilen Anwendergerät einer Person auszugeben.Depending on the measure of applicability and / or likelihood of success determined, various measures, preferably the determination or adaptation of various parameters of one or more auditory messages described in this document, can be carried out. Preferably, the logic, formula, characteristic for determining or adjusting at least one parameter, depending on the degree of applicability and / or probability of success, are changed. For example, such a measure may include varying a time parameter in outputting the at least one auditory message, order or combination in the output of at least two auditory messages, a combination of at least one auditory message with at least a portion of the further of the audio signal, a repeated output of a part comprising at least one auditory message or part of the content represented by the auditory message. Furthermore, the at least one predetermined measure may comprise at least part of the content to be conveyed with the auditory message by other means, e.g. visually, textually and / or in another room area of the living space and / or on a further output device, e.g. on a mobile user device of a person.
Gemäß einer zweckmäßigen Ausgestaltung repräsentiert zumindest ein Parameter der besagten Kommunikation ein inhaltliches, insbesondere thematisches, Merkmal der Kommunikation. Beispielsweise repräsentiert der zumindest ein Parameter eine Art des Inhalts und/oder ein Thema des in der besagten Kommunikation übermittelten Inhalts, z.B. des Informationsinhalts. Ein inhaltliches Merkmal kann auch einen oder mehrere Inhalte bzw. Aspekte einer Kommunikationsbotschaft innerhalb der besagten Kommunikation kennzeichnen. Beispielsweise bezieht sich das inhaltliche Merkmal auf die sogenannte Selbstoffenbarung, Appeal, Sachaspekt, Beziehungsaspekt der Kommunikationsbotschaft.According to an expedient embodiment, at least one parameter of said communication represents a content, in particular thematic, feature of the communication. For example, the at least one parameter represents a type of content and / or a theme of the content transmitted in said communication, e.g. the information content. A content feature may also identify one or more contents or aspects of a communication message within said communication. For example, the content-related feature refers to the so-called self-disclosure, appeal, factual aspect, relationship aspect of the communication message.
Beispielsweise kann daraufhin ein oder mehrere Parameter der zumindest einen auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals angepasst werden, wobei der oder die Parameter dasselbe oder darauffolgendes zeitliches Intervall wie der Abschnitt der besagten Kommunikation betreffen. Dabei kann ein (von der Sprachsteuerungsapplikation generierter bzw. noch zu generierender) Abschnitt der auditiven Meldung, der beispielsweise eine generierte Sprachmitteilung umfasst, und/oder ein Parameter des erst in einigen Sekunden auszugebenden Abschnitts des weiteren Audiosignals angepasst werden.For example, one or more parameters of the at least one auditory message and / or a portion of the further audio signal may then be adjusted, the parameter or parameters relating to the same or subsequent time interval as the portion of said communication. In this case, a section of the auditory message (generated or yet to be generated by the voice control application) which, for example, comprises a generated voice message and / or a parameter of the section of the further audio signal to be output in a few seconds, can be adapted.
Ein inhaltliches Merkmal kann beispielsweise kennzeichnend für die Kommunikationsbotschaften oder bestimmte Zusammenhänge zwischen den Kommunikationsbotschaften sein. Das inhaltliche Merkmal eines Abschnitts der Kommunikation kann abhängig von der erkannten oder voreingestellten Sprache, einem Kontext, einer erkannten Szene bzw. eines Parameters der Szene im Wohnraum ermittelt oder berücksichtigt werden. Das inhaltliche Merkmal muss nicht dem Inhalt der Kommunikation oder der Kommunikationsbotschaften entsprechen. Dieses kann lediglich einen oder mehrere Parameterwerte umfassen, die ein oder mehrere Merkmale der Kommunikation repräsentieren, ohne dabei die Kommunikation selbst wiederzugeben. Ein inhaltliches Merkmal bzw. ein Parameter des inhaltlichen Merkmals kann als eine (zumindest grobe) Kennung zu der Klassifikation und/oder einem bestimmten Muster ausgedrückt bzw. verarbeitet werden. Im Vergleich zu einem vollständigen Inhalt der Kommunikation kann das besagte inhaltliche Merkmal als ein sehr kompakter Wertesatz ermittelt und verarbeitet werden.A content-related feature can, for example, characterize the communication messages or certain relationships between the Be communication messages. The content-related feature of a section of the communication can be determined or taken into account as a function of the recognized or preset language, a context, a recognized scene or a parameter of the scene in the living space. The content characteristic does not have to correspond to the content of the communication or the communication messages. This may include only one or more parameter values representing one or more features of the communication without reflecting the communication itself. A content-related feature or parameter of the content-related feature can be expressed or processed as an identifier (at least coarse) for the classification and / or a specific pattern. Compared to a complete content of the communication, said content feature can be determined and processed as a very compact set of values.
Zumindest ein inhaltliches Merkmal der besagten Kommunikation kann auf Basis von Sensordaten, einer Historie, z.B. im Zusammenhang mit einer oder mehreren Kommunikationen im Wohnraum oder Kommunikationen mit Beteiligung bestimmter Personen und/oder unter Berücksichtigung einer Wahrscheinlichkeitsrechnung, ermittelt werden. Beispielsweise kann zumindest ein inhaltliches Merkmal einer aktuellen oder bevorstehenden sprachlichen Kommunikation, mittels eines Abgleichs bzw. einer Verrechnung einer Vielzahl inhaltlicher Merkmale und/oder weiterer Parameter aus der Historie prädiziert werden. Ein solcher Abgleich kann im Verfahren z.B. innerhalb einer beabstandet angeordneten Recheneinheit, z.B. in einem Server ausgeführt werden.At least one content feature of said communication may be based on sensor data, a history, e.g. in connection with one or more communications in the home or communications involving certain persons and / or taking into account a probability calculation. For example, at least one content-related feature of a current or forthcoming linguistic communication can be predicted by means of a comparison or a clearing of a multiplicity of content-related features and / or further parameters from the history. Such alignment can be performed in the method e.g. within a spaced apart arithmetic unit, e.g. running in a server.
Im Verfahren kann eine einfache, inhaltliche Auswertung, insbesondere Analyse der sprachlichen Kommunikation zwischen zumindest zwei Personen ausgeführt und berücksichtigt werden. Bevorzugt kann daraufhin eine Anpassung an eine auf Basis einer automatischen Sprachgenerierung auszugebende Sprachmitteilung oder Kommunikation angewandt werden, die einen im Wesentlichen von der besagten Kommunikation (thematisch, logisch, kausal) unabhängigen Inhalt oder Kontext repräsentiert.In the method, a simple, content-related evaluation, in particular analysis of the linguistic communication between at least two persons can be carried out and taken into account. Preferably, an adaptation to a speech message or communication to be output on the basis of an automatic speech generation can then be applied, which represents a content or context substantially independent of the said communication (thematically, logically, causally).
Im Gegensatz etwa zu einer Eingabe eines Sprachbefehls an eine Sprachsteuerung wird im Verfahren eine sprachliche Kommunikation, die (explizit) nicht an eine Sprachsteuerungsapplikation bzw. an einen Sprachassistenten gerichtet ist, berücksichtigt. Dabei werden ein oder mehrere Parameter der sprachlichen Kommunikation, insbesondere ein besagtes inhaltliches Merkmal, insbesondere auf die hier beschriebene Art und Weise verarbeitet bzw. berücksichtigt.In contrast to, for example, an input of a voice command to a voice control, in the method a voice communication which (explicitly) is not directed to a voice control application or to a voice assistant is taken into account. In this case, one or more parameters of the linguistic communication, in particular a content-related feature, in particular processed or taken into account in the manner described here.
Bevorzugt wird im Verfahren explizit erkannt, dass eine Kommunikationsbotschaft, eine sprachliche Botschaft bzw. eine Transaktion einer Person (eines Sprechers) im Wohnraum (insbesondere explizit) nicht an einen im Wohnraum betriebenen Sprachsteuerungsapplikation gerichtet ist. Diese kann daraufhin nicht etwa zur Interpretation eines Steuerungsbefehls oder zum Informationsaustausch mit einem Sprachassistenten, sondern vielmehr zur Anpassung des Parameters des auszugebenden Audiosignals verwendet werden. Falls eine sprachliche Botschaft hingegen als eine, an die im Wohnraum betriebene Sprachsteuerungsapplikation gerichtete Botschaft erkannt wird, kann wiederum eine zweckmäßig veränderte (oder keine) Anpassung der auditiven Meldung erfolgen und/oder eine für diesen Falls vordefinierte Maßnahme ausgeführt werden.Preferably, it is explicitly recognized in the method that a communication message, a linguistic message or a transaction of a person (a speaker) in the living space (in particular explicitly) is not addressed to a voice control application operated in the living space. This can then be used not to interpret a control command or to exchange information with a speech assistant, but rather to adapt the parameter of the audio signal to be output. In contrast, if a linguistic message is recognized as a message directed to the voice control application operated in the living space, a suitably changed (or no) adaptation of the auditory message can take place and / or a measure predefined for this case can be executed.
Ebenso kann im Verfahren ein Abschnitt einer von einer Sprachsteuerungsapplikation oder einem Sprachassistenten auszugebenden (zu generierenden) auditiven Meldung mit einem eigenen Prioritätsmaß versehen werden. Ein solches Prioritätsmaß kann z.B. mit einem bestimmten „Sprachprioritätsmaß“, bzw. „Mitspracheprioritätsmaß“, und/oder mit einer „Wichtigkeit“ und/oder „Dringlichkeit“ und/oder „Zum Ausgeben bis Zeitpunkt ... oder Event ...“ versehen werden. Bevorzugt kann ein solches Prioritätsmaß vergleichbar, d.h. beispielsweise in einer vergleichbaren Form, in vergleichbaren absoluten oder relativen Einheiten wie ein Prioritätsmaß eines Abschnitts der besagten Kommunikation zwischen zumindest zwei Personen im Wohnraum ausgedrückt werden. Beispielsweise kann für eine Sprachmitteilung, oder eine auditive Meldung einer anderen Art, ein Prioritätsmaß bestimmt werden, wobei das Prioritätsmaß ein absolutes oder relatives Maß der Priorität zumindest eines Abschnitts der auditiven Meldung kennzeichnet. Ein solches relatives Prioritätsmaß kann beispielsweise eine Relation zu einem Prioritätsmaß eines bestimmten Abschnitts oder bestimmten Inhalt der sprachlichen Kommunikation, eine Relation zu Prioritätsmaßen einer oder mehrerer Personen, insbesondere in Relation zu Prioritätsmaßen der Personen in bestimmten Raumbereichen im Wohnraum oder in Relation zu statistischen oder von einem Nutzer gewünschten Werten versehen werden.Similarly, in the method, a portion of an auditory message to be outputted (to be generated) by a voice control application or a voice assistant may be provided with its own priority measure. Such a priority measure may e.g. with a certain "language priority level", or "Mitspracheprioritätsmaß", and / or with an "importance" and / or "urgency" and / or "to spend until time ... or Event ..." are provided. Preferably, such a priority measure is comparable, i. for example, in a comparable form, in comparable absolute or relative units as a priority measure of a portion of said communication between at least two persons in the living space. For example, for a voice message, or an auditory message of another type, a priority measure may be determined, wherein the priority measure indicates an absolute or relative measure of the priority of at least a portion of the auditory message. Such relative priority measure, for example, a relation to a priority measure of a particular section or specific content of linguistic communication, a relation to priority measures of one or more people, especially in relation to priority measures of persons in certain areas of the room in the living room or in relation to statistical or of a Users are provided with desired values.
Beispielsweise dann, wenn erkannt wird, dass der Sprecher seinen Satz und/oder eine Phrase und/oder eine Botschaft zu Ende gesprochen hat, kann ein entsprechendes Anpassen eines Abschnitts einer auditiven Meldung erfolgen. Dabei kann im Verfahren eine passende, insbesondere prädiktive, Planung der Ausgabe einer oder mehreren auditiven Meldungen mit oder ohne Kombination mit einem Abschnitt des weiteren Audiosignals, erfolgen.For example, when it is detected that the speaker has finished his sentence and / or phrase and / or message, a corresponding adaptation of a portion of an auditory message may occur. In the process, an appropriate, in particular predictive, planning of the output of one or more auditory messages with or without combination with a section of the further audio signal can take place.
Bevorzugt kann aus dem inhaltlichen Merkmal bzw. einem entsprechenden Parameterwert ermittelt, insbesondere prädiziert werden, zu welchem Zeitpunkt eine sprachliche Botschaft einer Person im Wohnraum abgeschlossen sein wird, und insbesondere zu welchem Zeitpunkt eine weitere sprachliche Botschaft (z.B. eine Reaktion des Kommunikationspartners) erfolgen wird bzw. mit welcher Wahrscheinlichkeit sie zu erwarten ist. Daraufhin kann beispielsweise ein Zeitparameter (hier: der Beginn der Ausgabe einer oder mehrerer auditiven Meldungen und/oder eines oder mehrerer Abschnitte des weiteren Audiosignals) geplant werden. Preferably, it can be determined from the content-related feature or a corresponding parameter value, in particular to be predicted, at which time a linguistic message of a person in the living room will be completed, and in particular at what time a further linguistic message (eg a reaction of the communication partner) will take place with what probability it is to be expected. Thereupon, for example, a time parameter (here: the beginning of the output of one or more auditory messages and / or one or more sections of the further audio signal) can be planned.
Alternativ oder zusätzlich kann daraufhin ein passender Abschnitt des Audiosignals ausgewählt werden und/oder ein mit einer auditiven Meldung zu repräsentierender Inhalt (z.B. eine zu übermittelnde Information) an einen oder mehrere ermittelte Zeitintervalle angepasst und/oder das Erzeugen der entsprechenden Schallwellen in einem anderen Raumbereich bzw. für einen anderen Raumbereich des Wohnraums veranlasst werden. Beispielsweise kann daraufhin ein mit einer auditiven Meldung, insbesondere einer Sprachmitteilung zu übermittelnder Inhalt als eine schneller oder langsamer, mit einem verringerten oder erhöhten Detaillierungsgrad ausgegeben werden. Mit anderen Worten kann auch eine Ausführlichkeit der zumindest einen Sprachmitteilung im Verfahren gesteuert werden.Alternatively or additionally, a suitable section of the audio signal can then be selected and / or a content to be represented with an auditory message (for example information to be transmitted) adapted to one or more determined time intervals and / or the generation of the corresponding sound waves in another spatial region or space be arranged for another room area of the living space. For example, then a content to be transmitted with an auditory message, in particular a voice message, can be output as a faster or slower, with a reduced or increased level of detail. In other words, a verbosity of the at least one voice message in the method can be controlled.
Eine weitere zweckmäßige Ausgestaltung sieht vor, dass abhängig von einer inhaltlichen und/oder linguistischen, Auswertung der sprachlichen Kommunikation zwischen den zumindest zwei Personen ein Prädizieren des zumindest einen Richtungsparameters der sprachlichen Kommunikation erfolgt. Dabei können im Verfahren auch Namen (auch Rufnahmen, Spitznamen, Kosenamen, etc.) und/oder typische Satzteile und/oder eine typische Intonation erkannt und verarbeitet werden. Aus dieser Information kann z.B. der aktuelle oder für die nahe Zukunft prädizierte Wert eines Richtungsparameters der Kommunikation ermittelt und berücksichtigt werden.A further expedient embodiment provides that, depending on a content-related and / or linguistic evaluation of the linguistic communication between the at least two persons, the at least one directional parameter of the linguistic communication is predicated. In the process, names (including calls, nicknames, pet names, etc.) and / or typical phrases and / or a typical intonation can also be recognized and processed. From this information, e.g. the current or predicted value of a direction parameter of the communication is determined and taken into account.
Beispielsweise können vorgegebene Parameter der Kommunikation erkannt und daraus prädiziert werden, wie sich der zumindest ein Richtungsparameter der Kommunikation verändert wird, z.B. welche bestimmte Veränderung zumindest eines Richtungsparameters in der nahen Zukunft (mit einer hohen Wahrscheinlichkeit) erfolgen wird. Solche vorgegebenen Parameter können beispielsweise einen Anfang und/oder ein Ende und/oder einen zeitlichen Verlauf der Amplituden- und/oder der Frequenzparameter der sprachlichen Kommunikation kennzeichnen. Beispielsweise kann abhängig von vorgegebenen Parametern und/oder abhängig von vorgegebenen Zusammenhängen zwischen bestimmten Parametern eine Veränderung eines Richtungsparameters einer auditiven Kommunikation oder eine Prädiktion eines (neuen oder geänderten) Richtungsparameters für die nahe Zukunft erfolgen. Bei der Umkehrung des Richtungsparameters kann z.B. ein bisher als ein mit dem „Zuhörer“ belegter Raumbereich (nachfolgend) als ein mit einem „Zuhörer“ belegter Raumbereich gekennzeichnet werden, und/oder ein bisher mit einem „Zuhörer“ belegter Raumbereich (nachfolgend) als ein mit einem „Zuhörer“ belegter Raumbereich berücksichtigt werden.For example, predetermined parameters of the communication can be recognized and predicated on how the at least one direction parameter of the communication is changed, e.g. which particular change of at least one directional parameter will occur in the near future (with a high probability). Such predefined parameters may, for example, characterize a beginning and / or an end and / or a temporal course of the amplitude and / or the frequency parameters of the speech communication. For example, depending on predetermined parameters and / or dependent on predetermined relationships between certain parameters, a change of a direction parameter of an auditory communication or a prediction of a (new or changed) direction parameter for the near future can take place. In reversing the directional parameter, e.g. a space area (hereinafter referred to) as a space occupied with the "listener" will be identified as a space area occupied by a "listener", and / or a space area previously occupied by a "listener" (hereinafter) as a space area occupied by a "listener" be taken into account.
Eine weitere optionale Ausgestaltung sieht das Bestimmen, insbesondere Anpassen der Parameter einer mittels einer Sprachgenerierung erzeugten Sprachmitteilung vor, wobei ein oder mehrere Parameter der Sprachgenerierung mit der ein Abschnitt der Sprachmitteilung erzeugt wird, bestimmt oder angepasst werden.A further optional embodiment provides for the determination, in particular adaptation of the parameters, of a voice message generated by means of a voice generation, wherein one or more parameters of the voice generation with which a section of the voice message is generated are determined or adapted.
Beispielsweise wird die Wortwahl und/oder die Intonation und/oder eine mit dem Unterton wiedergegebene Bedeutung und/oder zumindest ein Aspekt einer Kommunikationsbotschaft eines Abschnitts der Sprachmitteilung, abhängig von dem ermittelten inhaltlichen Merkmal der besagten Kommunikation angepasst. Dabei kann abhängig von dem ermittelten inhaltlichen Merkmal der Kommunikation ein vorausschauendes Bestimmen oder Anpassen eines inhaltlichen Parameters der auditiven Meldung oder eines oder mehrerer bestimmten Aspekte der durch die auditiven Meldung (hier: Sprachmitteilung) zu übermittelnder Kommunikationsbotschaft ausgeführt werden.For example, the wording and / or the intonation and / or a meaning reproduced with the undertone and / or at least one aspect of a communication message of a section of the voice message is adapted depending on the determined content characteristic of the said communication. In this case, depending on the identified content-related feature of the communication, a forward-looking determination or adaptation of a content-related parameter of the auditory message or one or more specific aspects of the communication message to be transmitted by the auditory message (here: voice message) can be carried out.
Beispielsweise können abhängig von einem oder mehreren Parameter eines Abschnitts der besagten Kommunikation ein oder mehrere ausgewählte Aspekte einer Kommunikationsbotschaft für eine, insbesondere in der nahen Zukunft zu erzeugenden und/oder nicht unbedingt zeitlich zusammenhängend mit dem Abschnitt der Kommunikation stehenden, auditiven Meldung bestimmt oder angepasst werden. Beispielsweise kann der Inhalt, ein qualitativer und/oder ein Parameter eines Aspekts zumindest einer Kommunikationsbotschaft, z.B. der aus Kommunikationswissenschaft bekannter, sogenannter Selbstoffenbarung, Appeal, Sachaspekt, Beziehungsaspekt der Kommunikationsbotschaft bestimmt werden. Dabei kann eine, vom Kontext der Kommunikation zwischen zumindest zwei Personen und/oder der Szene im Wohnraum abhängige, insbesondere in einer vorausbestimmten Relation zu dem Kontext der Kommunikation stehende auditive Meldung erzeugt werden.For example, depending on one or more parameters of a portion of said communication, one or more selected aspects of a communication message may be determined or adjusted for an auditory message to be generated and / or not necessarily contiguous with the portion of the communication in the near future , For example, the content, a qualitative and / or a parameter of an aspect of at least one communication message, e.g. the so-called self-disclosure, appeal, factual aspect, relationship aspect of the communication message known from communication science. In this case, an auditory message which is dependent on the context of the communication between at least two persons and / or the scene in the living space, in particular in a predefined relation to the context of the communication, can be generated.
Beispielsweise kann abhängig von einem prädizierten inhaltlichen Merkmal der besagten Kommunikation und/oder einem zeitlichen Parameter der einen (vorausliegenden) Abschnitt der Kommunikation kennzeichnet, ein Detaillierungsgrad einer Sprachmitteilung bestimmt, insbesondere (dynamisch) gesteuert werden. Z.B. kann eine Reduktion eines mit der auditiven Meldung zu übermittelnden Inhalts und/oder eine Erweiterung des Inhalts, insbesondere ein Hinzufügen weiterer Inhalte ausgeführt worden. Dabei kann die Reduktion und/oder Erweiterung bestimmter, z.B. bestimmten zu übermittelnden Inhalten entsprechenden, linguistischen Strukturen, ausgeführt werden. z.B. werden abhängige, nachgeschaltete oder verschachtelte linguistische Strukturen einer oder mehrerer auditiven Meldungen gebildet oder zusammengefügt.For example, depending on a predicated content characteristic of said communication and / or a time parameter, the one (forward) section of the communication identifies a level of detail of a voice message, in particular ( dynamic). For example, a reduction of a content to be transmitted with the auditory message and / or an extension of the content, in particular an addition of further contents, has been carried out. In this case, the reduction and / or expansion of certain, for example, certain content to be transmitted content corresponding linguistic structures are executed. For example, dependent, downstream, or nested linguistic structures of one or more auditory messages are formed or merged.
Beispielsweise kann zum selben bestimmten Anlass oder Event (Ereignis) eine mehr oder minder ausführlichere sprachliche Information innerhalb einer oder mehreren Sprachmitteilungen ausgegeben werden, wobei ein Maß der Ausführlichkeit abhängig von einem oder mehreren Parameter der besagten Kommunikation bestimmt, insbesondere dynamisch gesteuert wird. Dabei kann eine von einer Sprachsteuerungsapplikation generierte sprachliche Botschaft, abhängig von einem inhaltlichen Merkmal der besagten Kommunikation und/oder abhängig von einem zeitlichen Parameter betreffend die besagte Kommunikation angepasst werden, wobei der Inhalt der auditiven Meldung aus der Sprachsteuerungsapplikation mit dem Inhalt der Kommunikation der Personen untereinander nicht kausal, thematisch oder logisch zusammenhängen muss.For example, for the same particular event or event, more or less verbose linguistic information may be output within one or more voice messages, with a measure of verbosity determined, in particular dynamically controlled, depending on one or more parameters of said communication. In this case, a linguistic message generated by a voice control application can be adapted depending on a content characteristic of the said communication and / or dependent on a time parameter relating to the said communication, the content of the auditory message from the voice control application with the content of the communication between the persons not causally, thematically or logically related.
Die besagten Themenmerkmale, Schlüsselwörter, linguistische Parameter, z.B. bestimmte Strukturen können im Verfahren mittels einer hinterlegten Assoziationsvorschrift, Assoziationslogik, einer Datenbank repräsentierend unterschiedlich starke (Assoziations-) Zuordnungen zwischen diversen Themen, Wörtern, typischen Satzstrukturen, etc. ermittelt werden. Insbesondere werden die Zusammenhänge zwischen bestimmten Wörtern, Themenmerkmalen, linguistischen Strukturen, ausgewertet. Dabei kann ein kompakt mathematisch ausgedrücktes Merkmal, z.B. in Form eines Code ermittelt werden. Dieser kann derart gestaltet werden, dass aus diesem kein präziser oder eindeutiger Rückschluss auf den vollständigen Inhalt die besagte Kommunikation möglich ist. Beispielsweise wird ein inhaltliches Merkmal der besagten Kommunikation auch mittels oder unter Berücksichtigung einer (auf einen betreffenden Abschnitt der Kommunikation angewandten) linguistischen Auswertung, insbesondere einer linguistischen Analyse ermittelt. Dabei können bei der linguistischen Auswertung zumindest eines oder mehreren linguistischen Parameter der besagten Kommunikation verarbeitet, insbesondere erkannt werden: ein semantisches Merkmal, eine Information über mehr oder minder (mit einem bestimmten Wahrscheinlichkeitsmaß) abgeschlossene Kommunikationsabschnitte bzw. Kommunikationsbotschaften, insbesondere Phrasen oder Sätze. Auch kann ein Richtungsparameter der besagten Kommunikation, z.B. mittels einer Assoziationsvorschrift, aus den erkannten Wörtern, Themenmerkmalen, linguistischen Strukturen für die nahe Zukunft von einigen Sekunden prädiziert werden.The said topic features, keywords, linguistic parameters, e.g. Certain structures can be determined in the method by means of a stored association rule, association logic, a database representing different strong (association) associations between various topics, words, typical sentence structures, etc. In particular, the relationships between certain words, subject features, linguistic structures, are evaluated. In this case, a compactly mathematically expressed feature, e.g. be determined in the form of a code. This can be designed in such a way that no precise or unambiguous inference to the complete content of said communication is possible from it. For example, a content-related feature of said communication is also determined by means of or taking into account a linguistic analysis (in particular a linguistic analysis applied to a relevant section of the communication). In the linguistic evaluation, at least one or more linguistic parameters of said communication can be processed, in particular recognized: a semantic feature, information about more or less (with a certain probability measure) completed communication sections or communication messages, in particular phrases or sentences. Also, a direction parameter of said communication, e.g. by means of an association rule, from the recognized words, subject features, linguistic structures for the near future of a few seconds are predicted.
Gemäß einer zweckmäßigen Ausgestaltung wird ein inhaltlicher Parameter der zumindest einen auditiven Meldung (auch: zumindest eines Abschnitts einer auditiven Meldung), insbesondere einer Sprachmitteilung bestimmt, insbesondere angepasst. Bevorzugt erfolgt ein (dynamisches oder fortlaufendes) Bestimmen oder Anpassen eines oder mehrerer inhaltlichen Parameter (eines oder mehreren entsprechenden Parameterwerte) eines oder mehrerer Abschnitte einer im Verfahren generierten Sprachmitteilung abhängig von einem oder mehreren Parameter der (in der Vergangenheit und/oder etwa im selben Zeitintervall) stattfindenden besagten Kommunikation, insbesondere abhängig von dem ermittelten inhaltlichen Merkmal der besagten Kommunikation. Dabei kann ein oder mehrere Parameter der Sprachgenerierung bestimmt ober angepasst werden.According to an expedient embodiment, a content parameter of the at least one auditory message (also: at least one section of an auditory message), in particular a voice message, is determined, in particular adjusted. Preferably, one (dynamic or continuous) determination or adaptation of one or more content parameters (one or more corresponding parameter values) of one or more sections of a speech message generated in the method is dependent on one or more parameters of (in the past and / or approximately in the same time interval ) taking place, in particular depending on the determined content characteristic of said communication. In this case, one or more parameters of the speech generation can be determined above.
Beispielsweise kann ein bestimmter, z.B. zeitlich oder inhaltlich passender, Abschnitt einer sprachliche Information umfassender auditiven Meldung, in Abhängigkeit von dem ermittelten inhaltlichen Merkmal und/oder linguistisches Merkmal der sprachlichen Kommunikation zwischen zumindest zwei Personen angepasst werden. In diesem Beispiel kann (auch) eine Anpassung einer oder mehrerer durch die auditive Meldung repräsentierter Information, z.B. eines akustisch auszugebenden Textes, entsprechender linguistischen Merkmale der zu erzeugenden Sprachmitteilung erfolgen. Beispielsweise kann eine Anpassung des inhaltlichen Merkmals der auditiven Meldung in Abhängigkeit von dem Thema der sprachlichen Kommunikation zwischen den besagten Personen vorgesehen werden, wobei die Anpassung nach vorausbestimmten Kriterien bzw. einer vorausbestimmten Logik bzw. hinterlegten Assoziationsverbindungen ausgeführt wird.For example, a particular, e.g. temporally or substantively matching, section of a linguistic information comprehensive audio message, depending on the determined content feature and / or linguistic feature of the linguistic communication between at least two people to be adjusted. In this example, adaptation of one or more information represented by the auditory message, e.g. an acoustically output text, corresponding linguistic features of the speech message to be generated. For example, an adaptation of the content feature of the auditory message depending on the subject of the linguistic communication between the said persons can be provided, wherein the adaptation is carried out according to predetermined criteria or a predetermined logic or deposited association connections.
Bevorzugt wird abhängig von dem ermittelten, insbesondre prädizierten inhaltlichen Merkmal der sprachlichen Kommunikation zwischen den zwei Personen im Wohnraum eine, insbesondere eine zumindest teilweise vorausschauende, inhaltliche Anpassung der auditiven Meldung ausgeführt.Preferably, depending on the ascertained, in particular predicated, content-related feature of the linguistic communication between the two persons in the living space, one, in particular an at least partially forward-looking, content-related adaptation of the auditory message is executed.
Auch kann abhängig von den im Verfahren ermittelten Parametern eine Reduktion eines Inhalts zumindest eines Abschnitts der auditiven Meldung und/oder ein Hinzufügen weiterer Inhalte zu einer (auszugebenden, bisher ermittelten) auditiven Meldung erfolgen. Auch kann eine Ausführlichkeit, insbesondere Nutzung zusätzlicher beschreibender Wörter, Adjektive, sogenannter Füllwörter, Nebensätze, verschachtelter linguistischer Konstrukte, etc. einer mit der auditiven Meldung zu übermittelnder sprachlichen Sätze angepasst werden. Es können diverse inhaltliche, thematische, linguistische Parameter eines Abschnitts einer generierten Sprachmitteilung abhängig von einem inhaltlichen Merkmal einer Kommunikation zwischen zwei Personen (nach einer vorausbestimmten Logik oder Gesetzmäßigkeit) variiert werden, wobei die Inhalte der Sprachmitteilung mit der besagten Kommunikation der Personen im Wohnraum jedoch nicht unmittelbar, insbesondere nicht thematisch, logisch oder kausal, zusammenhängen.Also, depending on the parameters determined in the method, a reduction of a content of at least a portion of the auditory message and / or an addition of further contents to an auditory message (to be issued, previously determined) can take place. Also, verbosity, in particular use of additional descriptive words, adjectives, so-called filler words, subordinate clauses, nested linguistic constructs, etc., may be used be adapted with the auditory message to be transmitted linguistic sentences. Various contentual, thematic, linguistic parameters of a portion of a generated voice message may be varied depending on a content characteristic of communication between two persons (according to a predetermined logic or lawfulness), but the contents of the voice message with the said communication of the persons in the living space are not directly, especially not thematically, logically or causally.
Bevorzugt kann ein Abgleich zwischen einer, auf die sprachliche Kommunikation der zumindest zwei Personen im Wohnraum angewandten, inhaltlichen, und/oder linguistischen Auswertung und einer Auswertung einer oder mehreren einhergehend (im Zeitintervall von ca. 1, 3, 5, 10 Sekunden) stattfindender körperlichen Regungen, beispielsweise Muster körperlicher Regungen ausgeführt und, bei Bestimmen bzw. Anpassen eines Parameters der auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals berücksichtigt werden. Zweckmäßigerweise wird ein vorausschauendes Anpassen der zumindest einen auditiven Meldung, insbesondere einer Sprachmitteilung, ausgeführt.Preferably, a comparison can be made between a content-related and / or linguistic evaluation applied to the linguistic communication of the at least two persons in the living space and an evaluation of one or more physical (in the time interval of approximately 1, 3, 5, 10 seconds) taking place Emotions, for example, patterns of physical impulses executed and taken into account in determining or adjusting a parameter of the auditory message and / or a portion of the further audio signal. Expediently, a forward-looking adaptation of the at least one auditory message, in particular a voice message, is carried out.
Gemäß einer zweckmäßigen Ausgestaltung werden ein oder mehrere Zeitparameter zur Ausgabe der zumindest einen auditiven Meldung, insbesondere mehrerer Abschnitte einer auditiven Meldung bestimmt oder angepasst. Bevorzugt wird der Zeitparameter abhängig von dem ermittelten (auch: zumindest teilweise prädizierten) inhaltlichen Merkmal (quantitativer und/oder qualitativer Merkmale) der besagten Kommunikation bestimmt oder angepasst.According to an expedient embodiment, one or more time parameters are determined or adjusted for the output of the at least one auditory message, in particular several sections of an auditory message. Preferably, the time parameter is determined or adjusted depending on the determined (also: at least partially predicated) content-related feature (quantitative and / or qualitative features) of said communication.
Auch können zumindest zwei alternativ anwendbaren Zeitparameter, beispielsweise der zumindest zwei alternativen Zeitparametervarianten, Ausgabe zumindest einer auditiven Meldung oder eines Abschnitts einer auditiven Meldung ermittelt werden und daraufhin nach vorausbestimmten Kriterien zumindest ein der zumindest zwei Zeitparameter bzw. der zwei Zeitparametervarianten, ausgewählt. Beispielsweise können auch Zeitparameter zum Erzeugen oder Ausgabe mehrerer auszugebender Sätze, Nebensätze, bestimmter Wortsequenzen einer Sprachmitteilung bestimmt werden.It is also possible to determine at least two alternatively applicable time parameters, for example the at least two alternative time parameter variants, output at least one auditory message or section of an auditory message, and then select at least one of the at least two time parameters or the two time parameter variants according to predetermined criteria. For example, time parameters for generating or outputting a plurality of sentences to be output, subordinate clauses, specific word sequences of a voice message can also be determined.
Es kann eine linguistische Auswertung, bevorzugt Analyse, in Bezug auf Sätze, Phrasen oder diverse linguistische Strukturen sowie eine Auswertung eines inhaltlichen Merkmals der besagten Kommunikation zwischen zumindest zwei Personen im Wohnraum, insbesondere für bestimmte Abschnitte der Kommunikation, ausgeführt und berücksichtigt werden. Beispielsweise kann dabei berücksichtigt werden, von welcher Person an welche Person oder mehrere Personen ein jeweiliger betreffender Abschnitt der Kommunikation gerichtet wird. Daraufhin kann ein oder mehrere Parameter der zumindest einen auditiven Meldung, insbesondere in Bezug auf ihren Inhalt, in Bezug auf eine Aufteilung in zumindest zwei Abschnitte, oder hinsichtlich des Zeitpunkts der Aufgabe zumindest eines Abschnitts oder Inhalts der auditiven Meldung, abhängig von der Ausführung der besagten inhaltlichen und/oder linguistischen Auswertung der besagten Kommunikation erfolgen. Daraufhin kann beispielsweise ein zu der besagten Kommunikation und/oder Szene im Wohnraum passendes, mittels einer Sprachgenerierung und/oder Kombination aus mehreren Abschnitten von Audiosignaldaten, nach vorausbestimmten Kriterien, ein Sprache umfassendes („improvisiertes“) Unterhaltungsprogramm zusammengestellt, insbesondere synthetisiert werden. Dabei kann das Unterhaltungsprogramm zumindest teilweise oder überwiegend Inhalte umfassen, die nicht der besagten Kommunikation entsprechen und/oder nicht unmittelbar, insbesondere nicht thematisch, logisch oder kausal, mit dieser zusammenhängen müssen.A linguistic evaluation, preferably analysis, with regard to sentences, phrases or various linguistic structures as well as an evaluation of a content-related feature of said communication between at least two persons in the living space, in particular for specific sections of the communication, can be carried out and taken into account. For example, it can be taken into account from which person to which person or persons a respective relevant section of the communication is addressed. Thereupon, one or more parameters of the at least one auditory message, in particular with respect to its content, may be divided into at least two sections, or as to the timing of the abandonment of at least a portion or content of the auditory message, depending on the execution of said content and / or linguistic evaluation of the said communication. Thereupon, for example, a ("improvised") entertainment program suitable for the said communication and / or scene in the living room can be compiled, in particular synthesized, by means of a voice generation and / or a combination of several sections of audio signal data, according to predetermined criteria. In this case, the entertainment program may at least partially or predominantly include content that does not correspond to said communication and / or not directly, in particular not thematically, logically or causally related to this.
Ein Begriff „Zeitparameter“ kann im Rahmen dieser Beschreibung einen (absoluten oder relativen) Zeitpunkt zur Ausgabe, insbesondere zu einem Anfang und/oder Ende der Ausgabe einer auditiven Meldung bzw. eines Abschnitt einer auditiven Meldung, eine Dauer, oder bevorzugt ein bestimmtes Zeitintervall zur Ausgabe zumindest eines Abschnitts der auditiven Meldung kennzeichnen. Alternativ oder zusätzlich kann zumindest ein Zeitparameter zur Ausgabe zumindest eines Abschnitts der auditiven Meldung einen (absoluten oder relativen) Zeitpunkt, insbesondere den Anfang und/oder das Ende oder die Dauer eines Zeitintervalls der oder die zur Ausgabe der auditiven Meldung, insbesondere eines bestimmten Abschnitts der auditiven Meldung mit einem bestimmten Inhalt nicht geeignet ist kennzeichnen. Daraufhin kann die Ausgabe zumindest eines Abschnitts der auditiven Meldung unter Berücksichtigung eines oder mehrerer solchen Zeitparameter erfolgen. Beispielsweise kann im Verfahren ein Zeitparameter, umfassend zwei Zeitpunkte (für den Anfang und/oder für das geplante Ende) und/oder einen Zeitpunkt und die Dauer der Ausgabe repräsentierende Größe, für eine oder mehrere auditive Meldungen oder deren Abschnitte bestimmt werden.A term "time parameter" in the context of this description may be an (absolute or relative) time for output, in particular at the beginning and / or end of the output of an auditory message or a portion of an auditory message, a duration, or preferably a specific time interval Flag output of at least a portion of the auditory message. Alternatively or additionally, at least one time parameter for outputting at least a portion of the auditory message may be an (absolute or relative) time, in particular the beginning and / or the end or the duration of a time interval for issuing the auditory message, in particular a specific portion of the indicate an auditory message with a particular content is not appropriate. Thereupon, the output of at least a portion of the auditory message may be made taking into account one or more such time parameters. For example, in the method, a time parameter comprising two time points (for the beginning and / or for the planned end) and / or a time and the duration of the output may be determined for one or more auditory messages or their sections.
Beispielsweise werden ein oder mehrere zeitliche Intervalle, z.B. repräsentiert durch einen Zeitpunkt und/oder Dauer, ermittelt, welche zur Ausgabe zumindest eines bestimmten Abschnitts einer auditiven Meldung und/oder eines oder mehrerer Abschnitte des weiteren Audiosignals mit jeweils einer bestimmten zeitlichen Dauer geeignet und/oder ungeeignet sind. Das Bestimmen des Zeitparameters zur Ausgabe eines oder mehrerer Abschnitte der auditiven Meldung bzw. des Audiosignals kann dann aus den ermittelten Zeitintervallen erfolgen. Dabei kann berücksichtigt werden, ob diese (mehr oder minder, insbesondere in einem quantitativen Maß) geeignet und/oder ungeeignet zur Ausgabe eines Abschnitts einer auditiven Meldung, insbesondere bestimmter Abschnitte der zumindest einen auditiven Meldung, sind. In einem vereinfachten Fall können die geeigneten Zeitpunkte bzw. Intervalle aus den Zeitpunkten sowie die Zeitpunkte, die nicht geeignet sind, ermittelt werden.For example, one or more temporal intervals, eg represented by a time and / or duration, are determined, which are suitable for outputting at least one specific section of an auditory message and / or one or more sections of the further audio signal, each having a specific time duration and / or are unsuitable. Determining the time parameter to output one or more sections of the auditory message or audio signal may then take place from the determined time intervals. In this case, it may be considered whether these are (more or less, in particular in a quantitative measure) suitable and / or unsuitable for outputting a section of an auditory report, in particular specific sections of the at least one auditory report. In a simplified case, the appropriate time points or the points in time which are not suitable can be determined.
Alternativ oder zusätzlich kann sich ein zu bestimmender oder anzupassender Zeitparameter auf zumindest ein Event (Ereignis), insbesondere ein vorausermitteltes Ereignis und/oder ein Event einer bestimmten Art oder ein Event mit einem bestimmten Prioritätsmaß beziehen oder bezogen werden. Bevorzugt kann es sich um ein Event im Kontext des Wohnraums bzw. des Hauses oder einer darin anwesenden Personen handeln. Ein solches Event (Ereignis) kann aber auch ein Fernmeldesignal sein oder es kann aus einem Internetdienst oder aus Daten eines Hausnetzwerks ermittelt werden. Beispielsweise kann der Zeitparameter einen zeitlichen Rahmen in Relation zu einem bestimmten Event oder einem Event einer bestimmten Art kennzeichnen. Beispielsweise kann ein Zeitparameter bestimmt werden, der repräsentieret, dass eine auditive Meldung und/oder ein Abschnitt des weiteren auszugebenden Audiosignals nicht früher als ein Zeitwert und/oder nicht später als ein Zeitwert ausgegeben werden soll, wobei sich der Zeitwert auf einen bestimmten Event bezieht, z.B. in Relation zu dem Event, z.B. in Sekunden, ausgedrückt wird.Alternatively or additionally, a time parameter to be determined or adapted can relate to or be referred to at least one event (event), in particular a pre-determined event and / or an event of a specific type or an event with a specific priority measure. Preferably, it can be an event in the context of the living space or the house or a person present therein. However, such an event can also be a telecommunication signal or it can be determined from an Internet service or from data of a home network. For example, the time parameter may identify a time frame in relation to a particular event or event of a particular type. For example, a time parameter may be determined which represents that an auditory message and / or a portion of the further audio signal to be output should not be output earlier than a time value and / or later than a time value, the time value relating to a particular event, eg in relation to the event, e.g. in seconds.
Ein oder mehrere Zeitparameter zur Ausgabe der zumindest einen auditiven Meldung und/oder zumindest eines Abschnitts des weiteren Audiosignals kann sich im Verfahren insbesondere auf bestimmte Arten der zumindest einen auditiven Meldung, bestimmte Abschnitte des weiteren Audiosignals, bestimmte Kanäle des Audiosignals, und/oder auf einen Teil des Audiosignals bzw. der zumindest einen auditiven Meldung mit einem bestimmten Inhalt und/oder mit einer bestimmten Art von Inhalt beziehen.In the method, one or more time parameters for outputting the at least one auditory message and / or at least one section of the further audio signal may be specific types of the at least one auditory message, specific sections of the further audio signal, specific channels of the audio signal, and / or one Obtain part of the audio signal or the at least one auditory message with a specific content and / or with a particular type of content.
Beispielsweise wird vorgesehen, dass ein oder mehrere Parameter zumindest eines Abschnitts der besagten Kommunikation ermittelt, insbesondere prädiziert werden. In diesem Beispiel ist der zumindest ein ermittelter Parameter ein zeitlicher Parameter der zumindest einen Abschnitts der Kommunikation, z.B. eine Transaktion und/oder eine Pause innerhalb der Kommunikation kennzeichnet. Ein weiterer ermittelter Parameter kennzeichnet und/oder die Art und/oder ein inhaltliches Merkmal des Abschnitts der Kommunikation, z.B. die Art der Transaktion, Erwartung einer Reaktion von zumindest einem „Zuhörer“, etc. Ferner kann eine Art und/oder ein inhaltliches Merkmal der zwei oder mehrerer auszugebender auditiver Meldungen oder als auditive Meldung auszugebender Inhalte ermittelt werden. Daraufhin wird ein Zeitparameter und/oder die Reihenfolge für die Ausgabe von zumindest zwei auditiver Meldungen bzw. Abschnitte einer auditiven Meldung, z.B. mit zumindest zwei unterschiedlichen Arten und/oder Inhalten abhängig von den ermittelten, insbesondere prädizierten Parametern der Kommunikation bestimmt.For example, it is provided that one or more parameters of at least one section of said communication are determined, in particular predicated. In this example, the at least one determined parameter is a temporal parameter of the at least one portion of the communication, e.g. denotes a transaction and / or a break within the communication. Another determined parameter identifies and / or the type and / or content characteristic of the portion of the communication, e.g. the nature of the transaction, expectation of a response from at least one "listener", etc. Further, a type and / or content characteristic of the two or more auditory messages to be output or content to be output as an auditory message may be determined. Thereupon, a time parameter and / or the order for the output of at least two auditory messages or sections of an auditory message, e.g. determined with at least two different types and / or contents depending on the determined, in particular predicated parameters of the communication.
Alternativ oder zusätzlich kann das Erzeugen eines weiteren im Wohnraum hörbaren akustischen Inhalts, z.B. eines Betriebsgeräuschs einer Vorrichtung des Hauses (soweit steuerbar) abhängig von einem Parameter der besagten Kommunikation und/oder vom Erzeugen der zumindest einer auditiven Meldung und/oder von er Ausgabe zumindest eines Abschnitts des auszugebenden Audiosignals beeinflusst werden erfolgen. Beispielsweise kann im Verfahren ein oder mehrere Parameter, z.B. umfassend einen Zeitparameter einer mit einem bestimmten Betriebsgeräusch verbundene Betriebsphase einer Vorrichtung verändert oder angepasst werden. Dabei kann eine einen Betriebsgeräusch umfassende Betriebsphase einer Vorrichtung z.B. nicht früher als ein bestimmter Zeitwert und/oder nicht später als ein bestimmter Zeitwert veranlasst werden soll, wobei sich der Zeitwert von einem oder mehreren Parameter der besagten Kommunikation abhängt.Alternatively or additionally, the generation of another acoustic content audible in the living space, e.g. an operating noise of a device of the house (as far as controllable) depending on a parameter of said communication and / or by generating the at least one auditory message and / or he output of at least a portion of the output audio signal to be influenced. For example, in the method, one or more parameters, e.g. comprising changing or adjusting a time parameter of an operating phase of a device associated with a particular operating noise. In this case, an operating phase of an apparatus comprising an operating sound may be e.g. not earlier than a certain time value and / or later than a certain time value, the time value depending on one or more parameters of said communication.
Eine weitere zweckmäßige Ausgestaltung sieht vor, dass eine Reihenfolge zumindest zweier, insbesondere zumindest zwei unterschiedliche Inhalte repräsentierender, auditiver Meldungen oder Abschnitte auditiver Meldungen, abhängig von einem ermittelten, bevorzugt prädizierten Parameter der Kommunikation insbesondere einem Kommunikationsvorhaben und/oder einer Stimme zumindest einer Person und/oder einer erkannten Szene im Wohnraum, bestimmt, insbesondere verändert wird. Beispielsweise kann dabei das Anpassen eines, mehrere unterschiedliche Inhalte repräsentierenden, auszugebenden auditiver Meldungen oder Abschnitte auditiver Meldungen derart erfolgen, dass die entsprechenden Datenabschnitte zur Ausgabe jeweiliger Abschnitte oder repräsentierend jeweils unterschiedliche Inhalte, in einer veränderten Reihenfolge eingelesen oder ausgegeben werden. Bevorzugt kann eine auditiven Meldung bereits vor ihrer Ausgabe, z.B. einige Sekunden vor der Ausgabe in Form mehrerer Abschnitte bzw. der Daten zur Generierung mehrerer Sprachabschnitte ermittelt und dann abhängig von den Parametern der Kommunikation, insbesondere abhängig davon ob oder wie gut ein prädizierter Parameter der Kommunikation sich bestätigt hat, ausgegeben werden.A further expedient embodiment provides that a sequence of at least two auditory messages or sections of auditory messages representing at least two different contents depends on a determined, preferably predicated parameter of the communication, in particular a communication project and / or a vote of at least one person and / or or a recognized scene in the living room, determined, in particular, is changed. For example, it is possible to adapt an auditory message or sections of auditory messages that represent a plurality of different contents in such a way that the corresponding data sections are read or output in a changed order for the purpose of outputting respective sections or representing respectively different contents. Preferably, an auditory message can be pre-issued, e.g. a few seconds before the output in the form of several sections or the data for generating multiple language sections and then depending on the parameters of the communication, in particular depending on whether or how well a predicted parameter of the communication has been confirmed, issued.
Zweckmäßigerweise wird im Verfahren eine solche Reihenfolge der Ausgabe von zumindest zwei auditiven Meldung oder von zumindest zwei Abschnitten einer auditiven Meldung oder von zwei unterschiedlichen weiteren Audiosignalen oder von zwei Abschnitten des weiteren Audiosignals oder von zumindest einem Abschnitt des weiteren Audiosignals und zumindest eines Abschnitts einer auditiven Meldung gewählt werden, bei der die insgesamt auszugebende Information (bzw. Inhalte) in möglichst wenig Abschnitte zerlegt werden muss und/oder eine zweckmäßige Länge der Pausen zwischen der besagten Kommunikation und der zumindest einer Ausgabe des zumindest eines Abschnitts der zumindest einer auditiven Meldung oder des weiteren Audiosignals eingehalten wird.Conveniently, in the method, such an order of outputting at least two auditory messages or at least two sections of an auditory message or of two different further audio signals or two sections of the further audio signal or at least a portion of the further audio signal and at least a portion of an auditory message are selected in which the total information to be output (or content) must be broken down into as few sections and / or one appropriate length of the pauses between the said communication and the at least one output of the at least one portion of the at least one auditory message or the further audio signal is maintained.
Auch kann die besagte Reihenfolge der Ausgabe der Abschnitte derart gewählt werden, dass die Ähnlichkeit, Kompatibilität, oder eine vorausbestimmte (z.B. logische, inhaltliche) Relation zu zumindest zwei nacheinander ausgegebenen Abschnitten (eines oder mehreren auszugebenden Audiosignale, auditiver Meldungen) vergrößert wird und/oder nicht hinreichend ähnliche, explizit unähnliche, nicht (auch thematisch) zueinander kompatible Abschnitte möglichst nicht nacheinander ausgegeben werden. Beispielsweise wird die Reihenfolge derart bestimmt oder angepasst, dass, verhältnismäßig harte Übergänge zwischen zumindest zwei Inhalten vermieden werden und/oder eine Ähnlichkeit, Kompatibilität, oder eine vorausbestimmte (z.B. logische, inhaltliche) Relation zu der zumindest zwei nacheinander ausgegebenen Abschnitte vergrößert wird. Die Ähnlichkeit, Kompatibilität oder weitere in diesem Zusammenhang anwendbaren Kriterien können beispielsweise hinterlegt werden und/oder nach einer vorausbestimmten Logik bzw. hinterlegten Assoziationsverbindungen bestimmt werden. Das Ermitteln der besagten Abschnitte und/oder das Bestimmen oder Anpassen der Reihenfolge kann oder können einer hinterlegten Assoziationsvorschrift, Assoziationslogik, einer Datenbank repräsentierend unterschiedlich starke (Assoziations-) Zuordnungen zwischen diversen möglichen Inhalten, Quellen, Informationen einer auditiven Meldung einerseits und Themen, Wörtern, typischen Satzstrukturen, Kommunikationsverhaltensmuster, Kombination aus den zumindest zwei im Rahmen der besagten Kommunikation kommunizierenden Personen im Wohnraum, etc. andererseits, ermittelt werden.Also, the said order of output of the sections may be selected such that the similarity, compatibility, or a predetermined (eg, logical, content) relation to at least two consecutively output sections (one or more audio signals to be output, auditory messages) is increased and / or not sufficiently similar, explicitly dissimilar, not (also thematically) compatible sections as possible not be issued sequentially. For example, the order is determined or adjusted such that relatively hard transitions between at least two contents are avoided and / or a similarity, compatibility, or a predetermined (e.g., logical, contentual) relation to the at least two consecutively outputted portions is increased. The similarity, compatibility or other applicable criteria in this context, for example, can be deposited and / or determined according to a predetermined logic or deposited association compounds. The determination of said sections and / or the determination or adaptation of the order may or may be based on association rules, association logic, a database representing different strong (association) associations between various possible contents, sources, information of an auditory message on the one hand, and topics, words, typical sentence structures, communication behavior pattern, combination of at least two in the context of said communication communicating people in the living room, etc. on the other hand, are determined.
Gemäß einer zweckmäßigen Ausgestaltung wird die zumindest eine auditive Meldung pausiert und/oder in zumindest zwei Abschnitte aufgeteilt, oder es werden zwei als auditive Meldung auszugebende Inhalte zusammengefügt oder (z.B. in einer auditiven Meldung) kombiniert, abhängig von einem oder mehreren Parameter der besagten Kommunikation. Dabei kann der zumindest ein Parameter der besagten Kommunikation bevorzugt ein inhaltliches Merkmal und/oder einen linguistischen Parameter zumindest eines Abschnitts der Kommunikation kennzeichnen.According to an expedient embodiment, the at least one auditory message is paused and / or divided into at least two sections, or two contents to be output as auditory messages are combined or combined (e.g., in an auditory message) depending on one or more parameters of said communication. In this case, the at least one parameter of said communication may preferably characterize a content-related feature and / or a linguistic parameter of at least one section of the communication.
Ein oder mehrere Parameter für das Pausieren, Aufteilen einer auditiven Meldung, insbesondere einer Sprachmitteilung und/oder für das Zusammenfügen oder Kombination von zumindest zwei auditiven Meldungen oder als auditive Meldung ausgegebener Inhalte kann abhängig von zumindest einem inhaltlichen Merkmal und/oder einem linguistischen Parameter der sprachlichen Kommunikation zwischen zumindest zwei Personen im Wohnraum bestimmt werden.One or more parameters for pausing, splitting an auditory message, in particular a voice message, and / or for combining or combining at least two auditory messages or auditory message content may be dependent on at least one content feature and / or one linguistic parameter of the speech Communication between at least two people in the living room to be determined.
Eine Prädiktion eines, insbesondere inhaltlichen Merkmals der besagten Kommunikation zwischen den Personen kann dabei aus einem bisherigen Inhalt der Kommunikation, einer Kommunikation aus der Historie, aus der Art der zumindest einen letzten oder aktuellen Transaktion und/oder abhängig von den Lerndaten, Historiendaten und/oder einem Kommunikationsmodell bzw. einem Zustand eines solchen Modells prädiziert werden.A prediction of a particular content-related feature of the said communication between the persons may be based on a previous content of the communication, a communication from the history, the nature of the at least one last or current transaction and / or depending on the learning data, history data and / or a communication model or a state of such a model are predicted.
Beispielsweise kann abhängig von einem ermittelten Parameter der Kommunikation (z.B. abhängig von einem inhaltlichen Parameter der Kommunikation) eine (bereits als Inhalt oder bestimmte Datenabschnitte ermittelte) auszugebende auditive Meldung pausiert werden. Das Pausieren kann insbesondere von einer und/oder bis zu einer geeigneten Stelle innerhalb der auditiven Meldung erfolgen. Nach dem Ende eines Abschnitts der sprachlichen Kommunikation, z.B. nach dem Ende einer Phrase, einer oder mehrerer Transaktionen innerhalb der sprachlichen Kommunikation, kann die auditive Meldung, insbesondere von derselben Stelle wiedergegeben werden oder, oder neu, ggf. in einer aktualisierten Form erzeugt werden, oder zumindest teilweise, in einem zweckmäßigen Umfang wiederholt werden.For example, depending on a determined parameter of the communication (for example, depending on a content-related parameter of the communication), an auditory message (already determined as content or specific data sections) may be paused. In particular, pausing may be from one and / or to a suitable location within the auditory message. After the end of a portion of the speech communication, e.g. after the end of a phrase, one or more transactions within the linguistic communication, the auditory message, in particular from the same location, may be reproduced or, or may be newly generated, possibly in an updated form, or at least partially, to an appropriate extent ,
Beispielsweise kann abhängig von der Art und/oder dem Inhalt der sprachlichen Kommunikation im Wohnraum erfolgen:
- - ein sofortiges Pausieren, ein Pausieren nach Ende eines Satzes, einer Phrase oder einer bestimmten linguistischen Struktur;
- - ein Aufteilen des mittels der auditiven Meldung zu übermittelnden Inhalts, z.B. auf zumindest zwei auditive Meldungen, wobei diese bevorzugt bei jeweils zumindest zwei unterschiedlichen Bedingungen ausgegeben werden;
- - ein Verändern, insbesondere ein Bestimmen einer Reihenfolge zur Ausgabe zumindest zweier auditiver Meldungen oder Abschnitte einer oder mehrerer auditiven Meldungen;
- - Zusammenfügen oder Kombinieren zumindest zwei auszugebender Inhalte in einer auditiven Meldung oder nacheinander auszugebende Abschnitte einer auditiven Meldung. Dabei können z.B. zwei auszugebende Inhalte in einer linguistischen Struktur oder in zumindest zwei zusammenhängenden linguistischen Strukturen kombiniert werden;
- - Zusammenfügen oder Kombinieren zumindest einer auditiven Meldung und eines Abschnitts des einen oder mehrerer weiteren Audiosignale. Dabei kann die zumindest eine auditive Meldung und ein oder mehrere Abschnitte zumindest eines weiteren Audiosignals zu einem Raumklangsignal oder einem mehrkanaligen, z.B. entsprechend kodierten, Audiosignals, z.B. zu einem Multiraum-Audiosignals zusammengefügt oder kombiniert werden.
- - an immediate pause, a pause after the end of a sentence, a phrase or a particular linguistic structure;
- a division of the content to be transmitted by means of the auditory message, eg to at least two auditory reports, these being preferably output at at least two different conditions;
- a modification, in particular a determination of an order for outputting at least two auditory messages or sections of one or more auditory messages;
- Merging or combining at least two contents to be output in an auditory report or sections of an auditory report to be output one after the other. It can For example, two contents to be output are combined in a linguistic structure or in at least two coherent linguistic structures;
- Merging or combining at least one auditory message and a portion of the one or more further audio signals. In this case, the at least one auditory message and one or more sections of at least one further audio signal can be combined or combined to form a surround sound signal or a multi-channel, eg correspondingly coded, audio signal, for example to form a multi-room audio signal.
Ferner kann (in einer analogen Weise) ein Zusammenfügen oder Kombinieren von zumindest zwei Abschnitten eines auszugebenden Audiosignals zueinander und/oder von zwei auditiven Meldungen aneinander oder Verrechnen miteinander erfolgen. Dabei kann im Verfahren eine beliebige, zweckmäßige Form des Zusammenfügens oder des Kombinierens bestimmt werden.Further, in an analogous manner, joining or combining of at least two sections of an audio signal to be output to each other and / or of two auditory messages to each other or to each other can take place. In this case, any suitable form of assembly or combination can be determined in the process.
Dabei können eine oder mehrere auditive Meldungen und/oder ein oder mehrere Abschnitte des weiteren auszugebenden Audiosignals abhängig von dem zumindest einem ermittelten Parameter der Kommunikation beispielsweise nahtlos aneinander angefügt, mit einem definierten Übergang, z.B. einem Übergangseffekt versehen werden. Bei zumindest einem Abschnitt oder zumindest zwei solchen Abschnitten des auszugebenden Audiosignals und/oder der auditiven Meldungen kann es sich um vorher angehaltene, pausierte, aufgeteilte, und/oder zwischengespeicherte und/oder in einer Warteschlange befindliche Abschnitte bzw. Daten zur Ausgabe der zumindest einen auditiver Meldung handeln.In this case, one or more auditory messages and / or one or more sections of the further audio signal to be output may, for example, be added to one another seamlessly, depending on the at least one determined parameter of the communication, with a defined transition, e.g. be provided a transition effect. At least one section or at least two such sections of the audio signal to be output and / or the auditory messages may be previously paused, paused, split, and / or cached and / or queued sections or data for outputting the at least one auditory Act message.
Ferner kann im Verfahren auch ein Ermitteln, insbesondere Prädizieren eines weiteren akustischen Inhalts im Wohnraum, insbesondere unter Berücksichtigung von zumindest zwei unterschiedlichen, bevorzugt jedoch von allen wesentlichen akustischen Inhalten, und daraufhin eine Prädiktion von einem oder mehreren zeitlichen Intervallen erfolgen, welche zur Ausgabe der zumindest einen (bestimmten) auditiven Meldung oder einer (vorausbestimmte Kriterien, z.B. eine erforderliche Ausgabedauer, Thema, Bezug, erfüllenden) auditiven Meldung und/oder des zumindest einen (bestimmten) Audiosignals bzw. eines (vorausbestimmte Kriterien, z.B. Abspieldauer, Thema, Genre, erfüllenden) Abschnitts des weiteren Audiosignals, geeignet sind. Ein solcher akustischer Inhalt kann auch einer Soundemission, einem Betriebsgeräusch eines im Haus betriebenen Vorrichtung oder Geräts entsprechen. Beispielsweise kann es sich um ein Haushaltsgerät, ein Küchengerät, etc. handeln. Dabei kann ein oder mehrere Parameter des besagten akustischen Inhalts ermittelt oder prädiziert werden im etwa analog oder sinngemäß wie dies mit den Parametern der besagten Kommunikation erfolgt. Beispielsweise können zwei oder mehrere Zeitparameter zur Ausgabe eines oder mehrerer auditiver Meldungen und/oder eines oder mehrerer Abschnitte des weiteren Audiosignals abhängig von zumindest einem, insbesondere prädizierten Parameter der besagten Kommunikation und zumindest einem, insbesondere prädizierten Parameter zumindest eines weiteren akustischen Inhalts bestimmt werden. Beispielsweise kann eine Aufteilung der auditiven Meldung und/oder eines Abschnitts des Audiosignals in zumindest zwei Abschnitte und/oder ihre darauffolgende Ausgabe erfolgen, abhängig von den Zeitparametern kennzeichnend geeignete und/oder ungeeignete Zeitintervalle, die unter Berücksichtigung ermittelter oder prädizierter akustischer Inhalte im Wohnraum bestimmt werden.Furthermore, in the method, a determination, in particular predication of a further acoustic content in the living space, in particular taking into account at least two different, but preferably of all essential acoustic contents, and then a prediction of one or more temporal intervals, which at least to output the a (specific) auditory report or a (predefined criteria, eg a required issue duration, subject, subscription, fulfilling) auditory report and / or at least one (specific) audio signal or one (predetermined criteria, eg playing time, subject, genre, fulfilling ) Section of the further audio signal, are suitable. Such acoustic content may also correspond to sound emission, operating noise of a home-operated device or device. For example, it may be a household appliance, a kitchen appliance, etc. In this case, one or more parameters of the said acoustic content can be determined or predicted in a manner analogous or analogous to what happens with the parameters of said communication. By way of example, two or more time parameters for outputting one or more auditory messages and / or one or more sections of the further audio signal can be determined as a function of at least one, in particular predicated, parameter of said communication and at least one, in particular predicated, parameter of at least one further acoustic content. For example, a division of the auditory message and / or a portion of the audio signal in at least two sections and / or their subsequent output can be made depending on the time parameters characteristically suitable and / or inappropriate time intervals, which are determined taking into account determined or predicted acoustic content in the living room ,
Beispielsweise wird zumindest ein Parameter zur Ausgabe zumindest eines Abschnitts einer auditiven Meldung (auch) abhängig von einem Parameter eines weiteren, insbesondere prädizierten akustischen Inhalts im Wohnraum bestimmt. Dabei kann zwischen einem im Wohnraum erzeugten und einem von außen kommenden (und im Wohnraum hörbaren) akustischen Inhalt unterschieden werden. Auch kann ein Prioritätsmaß eines jeweiligen akustischen Inhalts ermittelt, eingeschätzt und berücksichtigt werden. Ein solcher akustischer Inhalt kann, z.B. eine eingelernte oder wiedererkannte Stimme eines Kindes oder des Haustiers einer bestimmten Art, z.B. aus dem Garten oder vom Balkon, ein Hilferuf, ein „Mama-Ruf“ eines Kindes und Dergleichen sein. Bevorzugt kann auch die Art des akustischen Inhalts nach vorausbestimmten Kriterien klassifiziert werden und abhängig von der Art des akustischen Inhalts (mit oder ohne einen Parameter der besagten Kommunikation) wird ein jeweils unterschiedliches Bestimmen der Parameter oder unterschiedliche Varianten zum Bestimmen der Parameter (des auszugebenden Audiosignals und/oder der zumindest einer auditiven Meldung) angewandt. Z.B. wird dabei ein jeweils unterschiedlicher Einfluss auf das Bestimmen des Zeitpunkts zur Ausgabe der auditiven Meldung oder eines Abschnitts der auditiven Meldung festgelegt.For example, at least one parameter for outputting at least a portion of an auditory message (also) is determined as a function of a parameter of a further, in particular predicated, acoustic content in the living space. In this case, it is possible to distinguish between an acoustic content generated in the living space and an audible (and audible in the living room) coming from outside. Also, a priority measure of a respective acoustic content can be determined, estimated and taken into account. Such acoustic content may be, e.g. a learned or recognized voice of a child or pet of a particular species, e.g. from the garden or the balcony, a cry for help, a "mummy call" of a child and the like. Preferably, the type of acoustic content may also be classified according to predetermined criteria and, depending on the type of acoustic content (with or without a parameter of said communication), different determination of the parameters or different variants for determining the parameters (of the audio signal to be output and / or the at least one auditory message). For example, In doing so, a different influence is respectively determined on the determination of the time for the output of the auditory message or a section of the auditory message.
Gemäß einer zweckmäßigen Ausgestaltung wird die zumindest eine Sprachmitteilung (die zumindest einen Teil der zumindest einen auditiven Meldung bildet) abhängig von einem inhaltlichen, insbesondere linguistischen Parameter der besagten Kommunikation linguistisch, stilistisch, hinsichtlich einer Ausgabestimme und/oder Tonlage und/oder Unterton angepasst. Dabei kann z.B. ein oder mehrere Parameter der zumindest einen auditiven Meldung betreffend die Ausgabestimme und/oder eine angestrebte linguistische Struktur und/oder die Tonlage der Sprachmitteilung, den Unterton, den Rhythmus der Sprachausgabe, etc. bestimmt oder angepasst, insbesondere gesteuert werden.According to an expedient embodiment, the at least one voice message (which forms at least one part of the at least one auditory message) is adapted linguistically, stylistically with regard to an output voice and / or pitch and / or undertone depending on a content-related, in particular linguistic parameter of said communication. In this case, for example, one or more parameters of the at least one auditory message concerning the output voice and / or a desired linguistic structure and / or the pitch of the voice message, the undertone, the rhythm the voice output, etc. determined or adapted, in particular controlled.
Auch kann eine bestimmte Emotion und/oder ein virtuell erzeugter, aus dem Bereich der persönlichen Kommunikation an sich bekannter „Ich-Zustand“, in diesem Falle einer durch die Sprachsteuerungsapplikation repräsentierte virtuellen Persönlichkeit, durch das Bestimmen zumindest eines Parameters der Ausgabestimme, Tonlage, Unterton dargestellt werden. Beispielsweise können eine oder mehrere Sprachmitteilungen abhängig von dem ermittelten inhaltlichen Merkmal der besagten Kommunikation nach einer vorausbestimmten Logik bzw. Gesetzmäßigkeit stilistisch, hinsichtlich ihrer Stimme und/oder ihrer Tonlage und/oder einem Unterton und/oder einen Kommunikationsverhalten, von dem diese gekennzeichnet sind, angepasst werden, wobei die besagte Sprachmitteilung nicht ein Teil der besagten Kommunikation ist und insbesondere Inhaltlich, logisch oder zeitlich nicht zusammenhängen.Also, a particular emotion and / or a virtually generated "I-state" known per se in the field of personal communication, in this case a virtual personality represented by the voice control application, may be determined by determining at least one parameter of the output voice, pitch, undertone being represented. For example, one or more voice messages may be adapted stylistically, in terms of their voice and / or pitch, and / or undertone and / or communication behavior that identifies them, depending on the identified content characteristic of the said communication the said voice message is not part of the said communication and in particular is not related in content, logic or time.
Die Tonlage und/oder der Inhalt der auditiven Meldung können beispielsweise derart angepasst werden, dass ein zweckmäßiges, z.B. ein mehr oder minder höfliches, stilistisch passendes Einfügen in oder zwischen die besagte Kommunikation und/oder zu dem Inhalt des zumindest eines Audiosignals erfolgt. Dabei kann die auditive Meldung abhängig von einem oder mehreren Parameter der besagten Kommunikation und/oder von einem im Verfahren angepassten oder nicht angepassten Parameter eines Abschnitts des weiteren Audiosignals, z.B. hinsichtlich ihrer Wortwahl, Ton, Stimme oder linguistischem Parameter variiert werden. Ferner kann ein oder mehrere Parameter der zumindest einen auditiven Meldung, insbesondere der besagten Sprachmitteilung auch abhängig vom Inhalt, Genre, Melodie, Sprechart zumindest eines Abschnitts des (nahezu im selben Zeitintervall auszugebenden) weiteren Audiosignals bestimmt oder angepasst werden. Beispielsweise können eine oder mehrere Sprachmitteilungen abhängig von dem ermittelten inhaltlichen Merkmal der besagten Kommunikation und/oder des auszugebenden (kurz vorher wiedergegebenen, aktuell ausgegebenen oder in der nahen Zukunft möglicherweise ausgabebereiten) Audiosignal nach einer vorausbestimmten Logik bzw. Gesetzmäßigkeit stilistisch, hinsichtlich ihrer Stimme und/oder ihrer Tonlage und/oder einem Unterton und/oder einen Kommunikationsverhalten, von dem diese gekennzeichnet sind, angepasst werden.The pitch and / or the content of the auditory message may be adjusted, for example, such that a convenient, e.g. a more or less polite, stylistically fitting insertion into or between the said communication and / or the content of the at least one audio signal. In this case, the auditory message may be dependent on one or more parameters of said communication and / or on a parameter adapted or not adjusted in the method of a portion of the further audio signal, e.g. be varied in terms of their choice of words, tone, voice or linguistic parameter. Furthermore, one or more parameters of the at least one auditory message, in particular the said voice message, can also be determined or adapted depending on the content, genre, melody, speech type of at least a portion of the further audio signal (to be output during the same time interval). For example, one or more voice messages may be stylistically, in terms of voice, and / or output (shortly before played, currently issued, or possibly output in the near future) depending on the determined content characteristic of the said communication and / or legitimacy. or their pitch and / or undertone and / or communication behavior that characterizes them.
Beispielsweise kann die zumindest eine auditive Meldung erzeugt werden, die zumindest einen Abschnitt der besagten Kommunikation (in einer vorausbestimmten Weise) kommentiert und/oder mit diesem nach vorausbestimmten Kriterien assoziierte Informationen bzw. Inhalte umfasst. Beispielsweise kann die zumindest eine auditive Meldung erzeugt werden, die zumindest einen Abschnitt des auszugebenden Audiosignals kommentiert und/oder mit diesem nach vorausbestimmten Kriterien assoziierte Informationen bzw. Inhalte umfasst.For example, the at least one auditory message may be generated that annotates (at least a portion of) said communication (and in a predetermined manner) and / or includes information or content associated therewith according to predetermined criteria. For example, the at least one auditory message can be generated which comments on at least a portion of the audio signal to be output and / or comprises information or content associated therewith according to predetermined criteria.
Auch kann ein Bestimmen oder Anpassen eines oder mehreren Parameter der auditiven Meldung unter Berücksichtigung eines Kommunikationsmodells, z.B. eines Modells basierend auf einer sogenannten Transaktionsanalyse oder einem sog. SR (Stimulus-Response)-Modell bestimmt werden. Dabei können beispielsweise an sich aus dem Bereich der persönlichen Kommunikation bekannte, sogenannte „Ich-Zustände“ eines Menschen und die entsprechenden typischen Aktionen, Reaktionen, Gesten, Worte berücksichtigt bzw. nachgebildet werden. Beispielsweise wird im Verfahren ein aktiver „Ich-Zustand“ zumindest einer im Wohnraum anwesenden Person erkannt und im Verfahren berücksichtigt. Beispielsweise wird ein „Ich-Zustand“ eines virtuellen Assistenten derart gewählt, dass dadurch ein darauffolgender „Ich-Zustand“ bei einer folgenden Transaktion der Person (gegenüber der weiteren anwesenden Person oder gegenüber dem virtuellen Assistenten, insbesondere nach vorgegebenen Kriterien, beeinflusst wird.Also, determining or adjusting one or more parameters of the auditory message may take into account a communication model, e.g. of a model based on a so-called transaction analysis or a so-called SR (stimulus-response) model. In this case, for example, known from the field of personal communication, so-called "ego states" of a person and the corresponding typical actions, reactions, gestures, words can be considered or reproduced. For example, in the method, an active "I-state" of at least one person present in the living space is recognized and taken into account in the method. For example, an "I-state" of a virtual assistant is chosen such that a subsequent "I-state" in a subsequent transaction of the person (against the other person present or the virtual assistant, in particular according to predetermined criteria, is influenced.
Beispielsweise kann eine auditive Meldung in einem emphatischen bzw. „ruhigen“ Ton ausgegeben oder in einem ernsten oder weisenden bzw. „klaren“ Ton ausgegeben werden. Bevorzugt können die Anteile weisender, fürsorglicher, empathischer, ironischer, scherzhaften, mitleiderregender, oder relativ neutraler Botschaften, Ausdrücke oder Verhaltensweisen adaptiv, z.B. durch das Bestimmen oder Anpassen der Parameter bei einer Sprachgenerierung, variiert werden. Bevorzugt kann ein Kommunikationsverhalten, in dem eine oder mehrere Sprachmitteilungen generiert werden, entsprechend einem vorausbestimmten, mathematische abgebildeten Transaktionsmodells der Sprachsteuerungsapplikation und/oder aktuellen oder prädizierten Zuständen („Ich-Zuständen“) zumindest einer Person nach einem (auf Menschen bezogenen) Transaktionsmodell, oder entsprechend einem dynamischen Typenmodell, gewählt werden. Beispielsweise kann das Bestimmen oder Anpassen eines ersten Parameters des Kommunikationsverhaltens, in dem zumindest eine auditive Meldung (hier: Sprachmitteilung) erzeugt wird, abhängig von zumindest einem zweiten Parameter der besagten Kommunikation im Wohnraum erfolgen, wobei der zweiter Parameter bevorzugt ein Kommunikationsverhalten der zumindest einen Person gegenüber einer weiteren, insbesondere im Wohnraum anwesenden Person kennzeichnet.For example, an auditory message may be output in an emphatic or "quiet" tone or output in a serious or "clear" tone. Preferably, the portions of indicative, caring, empathic, ironic, jocular, pitying, or relatively neutral messages, expressions, or behaviors may be adaptively varied, eg, by determining or adjusting the parameters in a speech generation. Preferably, a communication behavior in which one or more voice messages are generated according to a predetermined, mathematically mapped transaction model of the voice control application and / or current or predicted states ("ego states") of at least one person according to a (on people related) transaction model, or according to a dynamic type model. For example, the determination or adaptation of a first parameter of the communication behavior in which at least one auditory message (here: voice message) is generated, depending on at least one second parameter of the said communication in the living space, wherein the second parameter preferably characterizes a communication behavior of the at least one person with respect to a further person present in particular in the living space.
Mit anderen Worten kann ein erster Parameter kennzeichnend ein Kommunikationsverhalten einer Sprachmitteilung gegenüber zumindest einer Person bestimmt oder angepasst werden abhängig von zumindest einem zweiten Parameter kennzeichnend das Kommunikationsverhalten zwischen zumindest zwei Personen im Rahmen einer besagten Kommunikation, wobei der erste Parameter des Kommunikationsverhaltens und der zweiter Parameter des Kommunikationsverhaltens auf unterschiedliche Kommunikationen bzw. Kommunikationsvorgänge bzw. auf unterschiedliche Fakten, Inhalte, Themen, Zusammenhänge beziehen.In other words, a first parameter may characteristically determine or adapt a communication behavior of a voice message to at least one person depending on at least a second parameter, the communication behavior between at least two persons in the context of a said communication, wherein the first parameter of the communication behavior and the second parameter of the Communication behavior on different communications or communication processes or on different facts, content, topics, relationships relate.
Falls beispielsweise eine Person zugehörig zu einer ersten Personengruppe (hier: „Eltern“) zu einer Person zugehörig zu einer zweiten Personengruppe (hier: „Kind“) etwa einem ersten (hier: sehr strengen) Kommunikationsverhalten kommuniziert, kann ein Parameter der zumindest einen nachfolgend erzeugten Sprachmitteilung kennzeichnend ein entsprechendes zweites Kommunikationsverhalten, bestimmt oder angepasst werden. Dabei kann ein Parameter der zumindest einen, beispielsweise ohnehin auszugebenden oder einer von der vorliegenden Kommunikation thematisch weitgehend unabhängigen Sprachmitteilung, gegenüber der Person aus der ersten Personengruppe (hier: „Eltern“) oder gegenüber der Person aus der zweiten Personengruppe (hier: „Kind“) oder gegenüber einer Person auf (bisher unbeteiligten) dritten Personengruppe, abhängig von dem Parameter des ersten Kommunikationsverhaltens bestimmt oder angepasst werden. Dabei kann ein zweckmäßiger, z.B. ein gleicher, gegensätzlicher oder entsprechend einem Kommunikationsmodell, z.B. im Einklang mit der Transaktionsanalyse passender Parameter des Kommunikationsverhaltens zum Erzeugen der zumindest einen Sprachmitteilung bestimmt werden.If, for example, a person belonging to a first group of persons (here: "parents") communicates with a person belonging to a second group of persons (here: "child") about a first (here: very strict) communication behavior, a parameter of the at least one can follow generated speech message characterizing a corresponding second communication behavior, be determined or adapted. In this case, a parameter of the at least one, for example, anyway to be issued or one of the present communication thematically largely independent voice message to the person from the first group of people (here: "parents") or to the person from the second group of people (here: "child" ) or to a person on (previously uninvolved) third group of people, depending on the parameter of the first communication behavior determined or adapted. In this case, a suitable, e.g. a same, more opposite or according to a communication model, e.g. be determined in accordance with the transaction analysis matching parameters of the communication behavior for generating the at least one voice message.
Alternativ oder zusätzlich kann die zumindest eine auditive Meldung (hier: für eine Person aus der ersten Personengruppe, aus der zweiten Personengruppe, aus der dritten Personengruppe) hinsichtlich der Parameter die kennzeichnend sind für die Stimme und/oder ihrer Tonlage und/oder einem Unterton, in dem diese erzeugt wird, abhängig von dem Parameter der Stimme und/oder der Tonlage und/oder des Untertons zumindest eines Abschnitts der besagten Kommunikation (hier: zwischen einer Person aus der ersten Personengruppe und einer Person aus der zweiten Personengruppe) bestimmt oder angepasst werden. Dabei kann das Verfahren eine Auswertung der Stimme und/oder der Tonlage und/oder des Untertons und/oder des Kommunikationsverhaltens bzw. Stils der besagten Kommunikation umfassen. Diese können z.B. stark vereinfacht in 4-16 Klassen eingeteilt werden und die jeweilige Klasse als Parameter berücksichtigt werden. Das daraufhin ausgeführtes Bestimmen oder Anpassen der zumindest einen auditiven Meldung, insbesondere hinsichtlich ihrer Stimme und/oder ihrer Tonlage und/oder dem Unterton, kann auch die mit der auditiven Meldung repräsentiertes inhaltliches Merkmal und/oder einen linguistischen Parameter betreffen, wobei der Inhalt der auditiven Meldung mit den Inhalten der besagten Kommunikation nicht, insbesondere nicht unmittelbar, insbesondere nicht kausal, logisch, thematisch zusammenhängen muss. In einem Beispiel kann die Sprachsteuerungsapplikation auch ausgestaltet sein, eine bestimmte Auswahl der Kriterien oder Merkmale, die ein sogenanntes Rapport kennzeichnen, anzustreben. Die Merkmale eines solchen Rapports (in Bezug auf eine Kommunikation zwischen Menschen) sind beispielsweise aus der sogenannten neurolinguistischen Programmierung bekannt. Diese können im Verfahren in Form mathematischer Zusammenhänge, z.B. als ein Optimierungskriterium, hinterlegt bzw. berücksichtigt werden.Alternatively or additionally, the at least one auditory message (here: for a person from the first group of persons, from the second group of persons, from the third group of persons) can be used with regard to the parameters which characterize the voice and / or their pitch and / or an undertone, in which it is generated, depending on the parameter of the voice and / or the pitch and / or the undertone of at least a portion of said communication (here: between a person from the first group of people and a person from the second group of people) determined or adapted , In this case, the method may include an evaluation of the voice and / or the pitch and / or the undertone and / or the communication behavior or style of the said communication. These may e.g. can be divided into 4-16 classes and the respective class can be considered as a parameter. The subsequently performed determination or adaptation of the at least one auditory message, in particular with regard to its voice and / or its pitch and / or the undertone, may also relate to the content-related feature and / or a linguistic parameter represented by the auditory message, the content of the auditory Message with the contents of the said communication is not, in particular not directly, especially not causally, logically, thematically related. In one example, the voice control application may also be configured to aim for a particular selection of the criteria or features that characterize a so-called rapport. The characteristics of such rapport (in relation to communication between humans) are known, for example, from so-called neurolinguistic programming. These can be used in the method in the form of mathematical relationships, e.g. as an optimization criterion, deposited or taken into account.
Es kann darüber hinaus eine Erkennung von vorgegebenen, insbesondere eingelernten Schlüsselwörtern, linguistischen Merkmale die im Rahmen der besagten Kommunikation zwischen zumindest zwei Personen vorkommen, und/oder eines Parameters der Körpersprache zumindest einer Person im Zusammenhang mit der Kommunikation, erfolgen. Daraufhin kann ein inhaltliches Merkmal, die Tonlage, ein Kommunikationsstil der Sprachmitteilung derart gewählt bzw. angepasst werden, dass ein (nach vorausbestimmten objektiven, naturwissenschaftlichen, technischen) Merkmalen mehr oder minder höfliches, bevorzugt stilistisch passendes, „Einscheren“ in die Kommunikation oder ein vorausbestimmtes Interagieren mit der Kommunikation zwischen zumindest zwei Personen im Wohnraum erfolgt, wobei beispielsweise eine Sprachmitteilung mit einem inhaltlichen Merkmal erzeugt wird, welches von einem Thema der Kommunikation abhängig gewählt wird. Beispielsweise kann ein inhaltliches Merkmal einer Sprachbotschaft entsprechend oder passend zu dem Thema der besagten Kommunikation gewählt werden oder ein vom Thema explizit abweichendes Thema kennzeichnen. Beispielsweise kann ein Thema einer Sprachmitteilung derart gewählt werden, dass durch das Erzeugen der Sprachmitteilung ein Themawechsel in der nachfolgenden Kommunikation zwischen den besagten Personen, insbesondere zu einem vorausbestimmten Thema, einem Thema aus einer Auswahl von Themen und/oder abweichend von einer Auswahl vorausbestimmter Themen, anstrebt oder bewirkt wird. Die Themen können im Verfahren z.B. mittels einer Assoziationslogik und/oder mittels unterschiedlich stark vordefinierten (logischen) Verbindungen zwischen bestimmten Schlagwörtern, Wortsequenzen, etc. vorgegeben werden.Furthermore, recognition of predefined, in particular learned, key words, linguistic features which occur within the scope of said communication between at least two persons and / or of a parameter of the body language of at least one person in connection with the communication can take place. Thereupon, a content-related feature, the pitch, a communication style of the voice message can be chosen or adapted such that a (more or less polite, preferably stylistically fitting, "breaking in" into the communication or a predetermined (according to predetermined objective, scientific, technical) Interacting with the communication between at least two people takes place in the living room, for example, a voice message is generated with a content-related feature, which is selected depending on a topic of communication. For example, a content-related feature of a voice message can be selected in accordance with or appropriate to the topic of the said communication or can identify a subject that deviates explicitly from the topic. For example, a topic of a voice message may be selected such that by generating the voice message a change of subject in the subsequent communication between said persons, in particular to a predetermined topic, a topic from a selection of topics, and / or deviating from a selection of predetermined topics, seeks or is effected. The topics may be described in the method e.g. by means of an association logic and / or by means of different degrees predefined (logical) connections between certain keywords, word sequences, etc. are given.
Alternativ oder zusätzlich kann die zumindest eine auditive Meldung erzeugt werden, die zumindest einen Abschnitt der besagten Kommunikation (in einer vorausbestimmten Weise, insbesondere zu einem späteren Zeitpunkt) kommentiert und/oder deren inhaltlicher Parameter in einer bestimmten thematischen, logischen Relation zu dem Abschnitt der Kommunikation steht, z.B. mit einem oder mehreren Abschnitten der besagten Kommunikation nach vorausbestimmten Kriterien assoziierte Informationen bzw. Inhalte umfasst und/oder Informationen bzw. Inhalte mit einem (von dem inhaltlichen Merkmal des Abschnitts der Kommunikation) explizit abweichenden inhaltlichen Parameter umfasst.Alternatively or additionally, the at least one auditory message may be generated, which comments on at least a portion of said communication (in a predetermined manner, in particular at a later time) and / or its content parameters in one certain topical, logical relation to the section of communication, eg information or content associated with one or more sections of said communication according to predetermined criteria, and / or information or content with one (explicitly from the content feature of the section of communication) deviating content parameters.
Ein im Verfahren zu bestimmender oder anzupassender Parameter der auditiven Meldung kann ein Parameter des Kommunikationsverhaltens sein. Ein solcher Parameter der auditiven Meldung kann ein Kommunikationsverhalten der Sprachsteuerungsapplikation bzw. etwa eines virtuellen Assistenten gegenüber zumindest einer Person, einer bestimmten Person, bzw. einem wahrscheinlichen oder angenommenen Zuhörer im Wohnraum, insbesondere gegenüber einer oder zwei an der besagten Kommunikation beteiligten oder nicht beteiligten Person kennzeichnen.A parameter of the auditory message to be determined or adapted in the method can be a parameter of the communication behavior. Such a parameter of the auditory message can be a communication behavior of the voice control application or of a virtual assistant to at least one person, a certain person or a probable or assumed listener in the living space, in particular to one or two persons involved or not participating in said communication mark.
Auch kann sich ein anzupassender Kommunikationsverhalten auf eine (optionale, mögliche, nach vorausbestimmten Kriterien erfolgende) Beteiligung der Sprachsteuerungsapplikation an der besagten Kommunikation, z.B. an einem Gespräch zwischen den Personen im Wohnraum, oder einer Interaktion mit einem akustisch geführten Gespräch zwischen den Personen im Wohnraum beziehen. Beispielsweise kann ein Parameter, der das Kommunikationsverhalten der zumindest einer auditiven Meldung einer Sprachsteuerungsapplikation bzw. der aktuell aktiven virtuellen Persönlichkeit repräsentiert, variiert, z.B. für ein bestimmtes bevorstehendes Zeitintervall bestimmt oder angepasst werden.Also, communication behavior to be adapted may be related to (optional, possible, pre-determined) participation of the voice control application in said communication, e.g. refer to a conversation between the people in the living room, or an interaction with an acoustically guided conversation between the people in the living room. For example, a parameter representing the communication behavior of the at least one auditory message of a voice control application or the currently active virtual personality may be varied, e.g. be determined or adjusted for a particular upcoming time interval.
Im Verfahren kann ein erstes Persönlichkeitsmodell stellvertretend für die zumindest eine bestimmte Person oder die zumindest eine besagte Personengruppe, z.B. auf Basis mehrerer Kommunikationen jeweils zwischen den zumindest zwei Personen im Wohnraum ermittelt und im Verfahren berücksichtigt werden. Alternativ können die das Persönlichkeitsmodell der zumindest einen oder zwei Personen kennzeichnenden Daten eingelesen, insbesondere abgerufen werden.In the method, a first personality model representing the at least one particular person or the at least one said person group, e.g. determined on the basis of several communications between the at least two people in the living room and taken into account in the process. Alternatively, the personality model of the at least one or two persons characterizing data can be read in particular retrieved.
Ein Parameter des Kommunikationsverhaltens, welcher beim Erzeugen einer auditiven Meldung zur Kommunikation mit zumindest einer Person angewandt wird, kann auf Basis eines Persönlichkeitsmodells zu einer bestimmten (erkannten bzw. wiederkannten) Person oder Person zugehörig zu einer Personengruppe ermittelt werden.A parameter of the communication behavior which is used when generating an auditory message for communication with at least one person can be determined on the basis of a personality model for a specific (recognized or recognized) person or person belonging to a person group.
Im Verfahren kann ein zweites Persönlichkeitsmodell für eine oder mehrere virtuellen Persönlichkeiten ermittelt oder eingelesen werden. Ein oder mehrere Parameter der zumindest einen auditiven Meldung werden daraufhin abhängig von dem zumindest einen Parameter des ersten Persönlichkeitsmodells und/oder zumindest einem Zustand des ersten Persönlichkeitsmodells und/oder abhängig von einem Parameter des zweiten Persönlichkeitsmodells und/oder zumindest einem Zustand des zweiten Persönlichkeitsmodells bestimmt. Mit anderen Worten kann in Verfahren zumindest ein Persönlichkeitsmodell ermittelt, simuliert und/oder aktualisiert werden, der einen Eindruck einer oder mehreren virtuellen Persönlichkeiten erzeugt und sich dabei abhängig von einem Parameter des Zustands einer, stellvertretend für zumindest eine z.B. im Wohnraum erkannte, reale Person, angenommenes Persönlichkeitsmodell verhält, insbesondere agiert und/oder reagiert.In the method, a second personality model for one or more virtual personalities can be determined or read. One or more parameters of the at least one auditory message are then determined as a function of the at least one parameter of the first personality model and / or at least one state of the first personality model and / or depending on a parameter of the second personality model and / or at least one state of the second personality model. In other words, in methods at least one personality model can be determined, simulated and / or updated, which produces an impression of one or more virtual personalities and thereby depends on a parameter of the state of, representative of at least one e.g. recognized in the living space, real person behaves adopted personality model, in particular acts and / or reacted.
Zumindest ein erstes Persönlichkeitsmodell und/oder ein zweites Persönlichkeitsmodell, insbesondere ein aktueller Zustand eines solchen Persönlichkeitsmodells kann beim Erzeugen der zumindest einen auditiven Meldung berücksichtigt werden. Ein Parameter des Kommunikationsverhaltens, welcher beim Erzeugen einer auditiven Meldung zur Kommunikation mit zumindest einer Person angewandt wird, kann auf Basis eines Persönlichkeitsmodells zu einer bestimmten (nach vorausbestimmten Kriterien aktivierbaren) virtuellen Persönlichkeit ermittelt werden.At least a first personality model and / or a second personality model, in particular a current state of such a personality model, can be taken into account when generating the at least one auditory message. A parameter of the communication behavior which is used when generating an auditory message for communication with at least one person can be determined on the basis of a personality model for a specific (activatable according to predetermined criteria) virtual personality.
Das erste Persönlichkeitsmodell und/oder das zweite Persönlichkeitsmodell kann ein oder mehrere (kommunikationsrelevante) Merkmale einer Persönlichkeit bzw. eines bestimmten Persönlichkeitstyps in einer (zweckmäßig vereinfachten) mathematischen Form kennzeichnen. Ein solches Persönlichkeitsmodell kann das unterschiedliche Auftreten bzw. das jeweilige Kommunikationsverhalten einer Person bzw. einer virtuellen Persönlichkeit in verschiedenen Situationen bzw. abhängig von unterschiedlichen, bestimmten Stimuli, mittels naturwissenschaftlicher, mathematischer Abhängigkeiten (Zustandsmodelle, Logiken, Formeln, Daten, etc.), beschreiben. Vereinfacht gesagt kann das erfindungsgemäße Persönlichkeitsmodell ein mathematisches Modell, insbesondere eine Simulation sein, die eine Vielzahl der Abhängigkeiten zwischen einem oder mehreren Stimuli (Kommunikationseingaben) und einer oder mehreren (zumindest möglichen, wahrscheinlichen, zweckmäßigen) Aktionen oder Reaktionen darauf beschreibt. Auch kann ein Persönlichkeitsmodell unterschiedliche Zustände annehmen, die unterschiedlichen Gemütslagen, Launen oder Emotionen, entsprechen kann.The first personality model and / or the second personality model may characterize one or more (communication-relevant) characteristics of a personality or a specific personality type in a (suitably simplified) mathematical form. Such a personality model can describe the different occurrence or the respective communication behavior of a person or a virtual personality in different situations or depending on different, specific stimuli, by means of scientific, mathematical dependencies (state models, logics, formulas, data, etc.) , Put simply, the personality model according to the invention can be a mathematical model, in particular a simulation, which describes a multiplicity of dependencies between one or more stimuli (communication inputs) and one or more (at least possible, probable, expedient) actions or reactions thereto. Also, a personality model can assume different states that can correspond to different moods, moods or emotions.
Bevorzugt wird zumindest ein Persönlichkeitsmodell oder ein aktueller Zustand eines solchen Persönlichkeitsmodells (der Sprachsteuerungsapplikation bzw. zumindest einer damit repräsentierten virtuellen Persönlichkeit), abhängig von einem oder mehreren Parameter der besagten Kommunikation, z.B. des besagten Kommunikationsverhaltens der zumindest einen Person im Wohnraum und/oder abhängig von zumindest einem Persönlichkeitsmodell oder einem (jeweils gültigen) Zustand eines Persönlichkeitsmodells der zumindest einen Person im Wohnraum bestimmt oder beeinflusst. Das Erzeugen der zumindest einen auditiven Meldung kann wiederum abhängig von dem Persönlichkeitsmodell, bzw. ihrem aktuellen Zustand erfolgen.At least one personality model or current state of such a personality model (the voice control application or at least one virtual personality represented thereby) is preferred, depending on one or more parameters of said communication, eg of the said communication behavior the at least one person in the living space and / or depending on at least one personality model or a (valid) state of a personality model of at least one person in the living room determines or influenced. The generation of the at least one auditory message can, in turn, be done depending on the personality model or its current state.
Beispielsweise kann ein Parameter des Kommunikationsverhaltens einer auditiven Meldung (einer Sprachsteuerungsapplikation, z.B. eines Sprachassistenten) bestimmt werden, abhängig von einem (aktuell stellvertretend angenommenen) Persönlichkeitsmodell einer oder mehrerer Personen, wobei das Persönlichkeitsmodell wiederum abhängig von der Kommunikation der bestreffenden Person mit zumindest einer weiteren Person bestimmt wird. Ein aktuell gültiges Persönlichkeitsmodell, der z.B. stellvertretend ist für eine bestimmte Person oder Persönlichkeitsgruppe kann z.B. abhängig von einer Erkennung bzw. Wiedererkennung der Person im Verfahren aktiviert und berücksichtigt werden.For example, a parameter of the communication behavior of an auditory message (a voice control application, eg, a voice assistant) may be determined, depending on a personality model of one or more persons currently assumed, the personality model again depending on the person's communication with at least one other person is determined. A currently valid personality model, e.g. Representing a particular person or personality group may e.g. be activated and considered depending on a recognition or recognition of the person in the process.
Beispielsweise kann das Verfahren auch derart konfiguriert werden, dass es bestimmte, z.B. für bestimmte Personen oder Personengruppen typische Muster des Kommunikationsverhaltens berücksichtigt und/oder zur Auflösung bzw. einer (bestimmten, gezielten) Veränderung eines Muster des Kommunikationsverhaltens konfiguriert ist. Z.B. kann ein bestimmter (z.B. aus der Historie oder Statistik erfasster) Parameter repräsentierend ein Verhalten der Personen zugehörig zu einer ersten Personengruppe bei einer Kommunikation, insbesondere mit einer Person aus einer zweiten Personengruppe berücksichtigt werden und/oder durch eine Auswahl einer zweckmäßigen Logik im Verfahren beeinflusst, z.B. verändert werden.For example, the method may also be configured to have certain, e.g. is taken into account for certain persons or groups typical patterns of communication behavior and / or configured for the resolution or a (specific, targeted) change a pattern of communication behavior. For example, a certain parameter (eg from the history or statistics) representing a behavior of the persons belonging to a first group of persons in a communication, in particular with a person from a second group of persons, can be considered and / or influenced by a selection of a suitable logic in the method, eg to be changed.
Auch kann das Verfahren derart ausgestaltet sein, dass es das Kommunikationsverhalten der Personen im Wohnraum bei der besagten Kommunikation untereinander erkennt und durch eine Veränderung des eigenen Verhaltens, insbesondere durch eine Veränderung eines oder mehrerer Parameter, anschaulich macht. Beispielsweise kann im Verfahren eine solche Anpassung des Parameters des Kommunikationsverhaltens erfolgen, dass die eine oder mehrere Sprachmitteilungen einer Sprachsteuerungsapplikation, das Verhalten zumindest einer Person, insbesondere ihr Kommunikationsverhalten auf eine bestimmte Weise reflektieren. Dabei kann einer Person geholfen werden, eigene Verhaltensmuster bzw. Kommunikationsverhaltensmuster zu erkennen.The method can also be designed in such a way that it recognizes the communication behavior of the persons in the living space during said communication with each other and makes them vivid by a change of their own behavior, in particular by a change of one or more parameters. For example, in the method, such an adaptation of the parameter of the communication behavior can take place that the one or more voice messages of a voice control application, the behavior of at least one person, in particular their communication behavior reflected in a certain way. In this case, a person can be helped to recognize their own behavior patterns or communication behavior patterns.
Ferner kann im Verfahren ein Parameter einer zu erzeugenden Sprachmitteilung der kennzeichnend ist für ein aktuelles Kommunikationsziel bestimmt oder angepasst werden. Ein Kommunikationsziel kann beispielsweise eine Herstellung einer Einigung oder eines Ausgleichs zwischen zwei Personen, einer Problemlösung (für zumindest eine Person) dienen, eine Lenkung der Aufmerksamkeit zumindest einer Person auf eine bestimmte Information, z.B. einen organisatorischen Hinweis, Sicherheitshinweis, Ratschlag, Verbraucherinformation bewirken. Beispielsweise kann daraufhin auch das Kommunikationsverhalten einer Sprachsteuerungsapplikation entsprechend angepasst werden. Das Bestimmen oder Anpassen eines oder mehreren Parameter betreffend das Kommunikationsziel und das Kommunikationsverhalten kann entsprechend einer hinterlegten Logik bzw. hinterlegten Zusammenhängen, z.B. auf Basis der Erkenntnisse aus der Transaktionsanalyse und/oder des Stimulus-Response-Modell, bevorzugt unter Berücksichtigung eines oder mehrerer Parameter der besagten Kommunikation aus der Vergangenheit, erfolgen.Further, in the method, a parameter of a voice message to be generated which is indicative of a current communication destination can be determined or adjusted. For example, a communication goal may be to make an agreement or balance between two persons, to solve a problem (for at least one person), to direct the attention of at least one person to some information, e.g. provide an organizational indication, safety notice, advice, consumer information. For example, then the communication behavior of a voice control application can be adjusted accordingly. Determining or adjusting one or more parameters relating to the communication destination and the communication behavior may be according to a stored logic, e.g. based on the findings from the transaction analysis and / or the stimulus-response model, preferably taking into account one or more parameters of said communication from the past, take place.
Beispielsweise können eine oder mehrere auditive Mitteilungen unter Berücksichtigung eines, bevorzugt auf einer Transaktionsanalyse oder einem SR-Modell (= Stimulus-Response Modell) basierenden, Kommunikationsmodells und/oder einer zu zumindest einer anwesenden Person anwendbares Persönlichkeitsmodells, erzeugt bzw. angepasst werden. Beispielsweise kann das Anpassen bzw. Erzeugen zumindest einer auditiven Meldung derart erfolgen, dass
- - einem psychischen Bedürfnis zumindest einer Person entsprochen wird, und/oder
- - ein Informationsaustausch zwischen den zwei Personen durch die Ausgabe einer angepassten auditiven Meldung verbessert, insbesondere optimiert, wird, und/oder
- - ein bestimmtes Kommunikationsziel zwischen einer Person und einer Sprachsteuerungsapplikation gefördert wird, und/oder
- - ein bestimmtes Kommunikationsziel (Einigung, Harmonie, fließende Kommunikation, Hinweis auf eine Unstimmigkeit oder ein Problem, Auffindung eines Problems) zwischen den zumindest zwei Personen gefördert wird, und/oder
- - ein emotionaler Ausgleich zumindest einer der zwei besagten Personen im Wohnraum gefördert wird.
- - a psychic need of at least one person is met, and / or
- an information exchange between the two persons is improved, in particular optimized, by the output of a customized auditory message, and / or
- a particular communication goal between a person and a voice control application is promoted, and / or
- - a specific communication objective (agreement, harmony, fluent communication, indication of a discrepancy or problem, finding a problem) between the at least two persons is encouraged, and / or
- - an emotional balance of at least one of the two persons in the living space is promoted.
Gemäß einer zweckmäßigen Ausgestaltung wird ein oder mehrere Parameter der Körpersprache zumindest einer im Wohnraum anwesenden Person, insbesondere einer an der besagten Kommunikation beteiligten Person, insbesondere eines aktuellen Sprechers oder eines Zuhörers, oder eines Sprechers und Zuhörers ermittelt und berücksichtigt. Daraufhin kann zumindest ein Parameter zum Erzeugen der zumindest einen auditiven Meldung, insbesondere ein inhaltlicher Parameter bzw. ein inhaltliches Merkmal einer Sprachmitteilung, abhängig von dem erfassten Parameter der Körpersprache bestimmt oder angepasst werden. Auch kann ein Parameter betreffend Ausgabe einer mit zumindest einem Abschnitt der (auszugebenden) auditiven Meldung und/oder des weiteren Audiosignals zusammenhängenden Information abhängig von zumindest einem Parameter der Körpersprache bestimmt oder angepasst werden. Mit anderen Worten kann abhängig von dem zumindest einem Parameter der Körpersprache eine Ausgabe einer mit zumindest einem Abschnitt der (auszugebenden) auditiven Meldung oder mit dem weiteren Audiosignal zusammenhängenden Information, insbesondere mit einem bestimmten oder angepassten Parameter, z.B. für zumindest ein betreffendes Zeitintervall veranlasst werden.According to an expedient refinement, one or more parameters of the body language of at least one person present in the living space, in particular of a person involved in said communication, in particular a current speaker or a listener, or a speaker and listener are determined and considered. Thereupon, at least one parameter for generating the at least one auditory message, in particular a content-related parameter or a content-related Feature of a voice message, depending on the detected parameter of the body language determined or adapted. Also, a parameter relating to output of information related to at least a portion of the auditory message (and audible signal) to be output and / or the further audio signal may be determined or adjusted depending on at least one parameter of the body language. In other words, depending on the at least one parameter of the body language, an output of an information associated with at least one section of the auditory message (to be output) or with the further audio signal, in particular with a specific or adjusted parameter, eg for at least one relevant time interval, can be initiated.
Dabei kann der besagte Parameter der Körpersprache abhängig von der Gestik und/oder Mimik und/oder einer weiteren körperlichen Regung zumindest einer an der Kommunikation beteiligten Person im Wohnraum ermittelt werden. Beispielsweise kann ein Parameter der Körpersprache auf Basis von einem Veränderungsmuster bzw. einem zeitlichen Muster der Veränderung der Gestik, Mimik oder der körperlichen Regung ermittelt werden. Beispielsweise kann der Parameter der Körpersprache einem von insgesamt bis zu
Bevorzugt kann die anhand der Erfassung und Auswertung der Körpersprache ermittelte Information zusammen mit einem Parameter der etwa gleichzeitig stattfindenden auditiven Kommunikation und/oder einer erkannten Szene berücksichtigt werden. Insbesondere wird daraufhin zumindest ein inhaltliches Merkmal der auditiven Meldung und/oder ein Parameter des weiteren Audiosignals bestimmt.Preferably, the information determined on the basis of the detection and evaluation of the body language can be taken into account together with a parameter of the approximately simultaneous auditory communication and / or a recognized scene. In particular, at least one content-related feature of the auditory message and / or a parameter of the further audio signal is then determined.
Bei der im Verfahren erfassten Parameter der zumindest einen körperlichen Regung, Mimik, Gestik und/oder der Körpersprache (einen Parameter der mit der Körpersprache übermittelbaren Kommunikationsbotschaft) kann es sich um eine bewusste (von der entsprechenden Person bewusst erzeugte oder kontrollierte) Regung und/oder eine unbewusste (von der entsprechenden Person nicht bewusst erzeugte oder nicht kontrollierte oder nicht kontrollierbare) Regung handeln. Insbesondere kann im Verfahren zwischen einer bewussten und unbewussten körperlichen Regung und/oder einen bewussten oder unbewussten körpersprachlichen Botschaft unterschieden werden. Insbesondere wird im Verfahren eine Deutung bzw. Klassifikation der Körpersprache einer oder zweier an der besagten Kommunikation beteiligten Personen ausgeführt und berücksichtigt. Diese kann ein Erkennen (eingelesener oder im Verfahren eingelernter), einer bestimmten Person oder einer Person zugehörig zu einer bestimmten Personengruppe entsprechender Muster umfassen. Beispielsweise können auf Basis der erfassten Körpersprache ein oder mehrere Parameter der Kommunikation, z.B. ein inhaltliches Merkmal einer etwa gleichzeitig (im selben vordefinierten Zeitintervall) stattfindenden sprachlichen Transaktion ermittelt werden. Eine tatsächliche Bedeutung eines Abschnitts der Körpersprache, bzw. einer körpersprachlichen Botschaft kann dabei, muss aber nicht bewertet werden. Eine (technisch verhältnismäßig schwer umsetzbare) Ermitteln bzw. Übersetzen der Körpersprache etwa in Form einer (inhaltlichen) Information kann muss aber nicht ausgeführt werden. Bevorzugt wird der zumindest ein besagter Parameter der Körpersprache zusätzlich zu weiteren, in diesem Dokument beschriebenen Parametern der Kommunikation, der Szene, etc. berücksichtigt werden, insbesondere derart, dass zumindest ein Optimierungskriterium angestrebt wird.The parameters of the at least one physical sensation, facial expressions, gestures and / or body language (a parameter of the communication message conveyable with the body language) can be a conscious (consciously generated or controlled by the corresponding person) and / or act an unconscious (unintentionally generated by the corresponding person or uncontrolled or uncontrollable) impulse. In particular, in the method a distinction can be made between a conscious and unconscious physical impulse and / or a conscious or unconscious body language message. In particular, in the method, an interpretation or classification of the body language of one or two persons involved in said communication is carried out and taken into account. This can include a recognition (read in or learned in the procedure), a specific person or a person belonging to a specific group of people corresponding patterns. For example, based on the detected body language, one or more parameters of the communication, e.g. a content-related feature of a linguistic transaction taking place approximately simultaneously (in the same predefined time interval) can be determined. An actual meaning of a section of the body language, or a body language message, may or may not be evaluated. However, a (technically relatively difficult) determination or translation of body language in the form of (content) information, however, need not be carried out. The at least one said parameter of the body language is preferably taken into account in addition to further parameters of the communication, the scene, etc. described in this document, in particular such that at least one optimization criterion is sought.
Auch kann im Verfahren zumindest ein Parameter der auditiven Meldung bestimmt werden abhängig von der zumindest einen erkannten körperlichen Regung und einem innerhalb eines bestimmten Zeitintervalls erkannten Schlüsselwort oder einem Kommunikationslaut. Beispielsweise wird im Verfahren zwischen unterschiedlichen Arten der Kommunikationslaute, z.B. Ausrufewort, Interjektion, Zungenschnalzen, Aufschreien, Lachen, Schluchzen, Weinen, Stöhnen, etc. unterschieden. Bevorzugt erfolgt im Verfahren ein Abgleich zwischen einer erfassten Information zu einem oder mehreren erfassten Schlüsselwörtern, Kommunikationslauten und/oder zu einem linguistischen Merkmal einerseits, und der innerhalb eines bestimmten Zeitintervalls erfassten körperlichen Regung, insbesondere eines Musters der körperlichen Regung zumindest einer an der Kommunikation beteiligten Person andererseits. Daraufhin kann eine Anpassung eines Parameters des auszugebenden Audiosignals abhängig von dem Abgleich ausgeführt werden. Beispielsweise kann im Verfahren ein Maß der Korrelation, Übereinstimmung zwischen der zumindest einen erkannten Gestik, Mimik und zumindest einem Schlüsselwort, einem Kommunikationslaut oder einem ermittelten linguistischen Merkmal, ermittelt und berücksichtigt werden. Die Informationen zu der Gestik, Mimik, weiterer körperlichen Regung, Auswahl, Reihenfolge, Sequenz, Konstellation von Schlüsselwörtern, Interjektionen oder linguistischen Merkmalen können bevorzugt als entsprechende Muster, insbesondere als für eine Person typischen Sequenzen, erkannt, wiedererkannt und im Verfahren berücksichtigt werden.Also, in the method, at least one parameter of the auditory message can be determined depending on the at least one detected physical emotion and a recognized within a certain time interval keyword or a communication sound. For example, in the method, a distinction is made between different types of communication sounds, eg exclamation word, interjection, tongue snapping, screaming, laughing, sobbing, crying, groaning, etc. Preferably, in the method, a comparison is made between acquired information on one or more detected keywords, communication sounds and / or on a linguistic feature on the one hand, and the physical emotion detected within a certain time interval, in particular a pattern of the physical emotion of at least one person involved in the communication on the other hand. Thereupon, adjustment of a parameter of the audio signal to be outputted may be performed depending on the adjustment. For example, in the method, a measure of the correlation, correspondence between the at least one recognized gesture, facial expressions and at least one keyword, a communication tone or a determined linguistic feature can be determined and taken into account. The information on the gestures, facial expressions, further physical exercise, selection, sequence, sequence, constellation of keywords, interjections or linguistic features may be preferred as corresponding patterns, in particular as sequences typical for a person, recognized, recognized and taken into account in the process.
Alternativ oder zusätzlich kann der besagter Abgleich zwischen einem Parameter einer körperlichen Regung und der auditiven Kommunikation einer Person auch auf Basis einer oder mehrerer Kommunikationen der Person aus der Vergangenheit ermittelt und berücksichtigt werden. Dabei können Lerndaten ermittelt der Lerndaten zur Ausführung des Verfahrens bereitgestellt werden. Beispielsweise werden Lerndaten zu einer Person auf Basis der Daten, die bei einer Videotelefonie bzw. Videokonferenz ermittelt, insbesondere eingelernt wurden, zur Ausführung des Verfahrens bereitgestellt bzw. (gezielt) abgerufen werden.Alternatively or additionally, the said reconciliation between a parameter of a physical impulse and the auditive communication of a person may also be determined and taken into account on the basis of one or more communications of the person from the past. In this case, learning data of the learning data for executing the method can be provided. For example, learning data on a person based on the data, which are determined in a video telephony or video conference, in particular, have been trained to be provided for the execution of the method or (targeted) retrieved.
Mit anderen Worten können die Parameter einer Sprachmitteilung und/oder eines Abschnitts des weiteren Audiosignals, abhängig von einem ermittelten Parameter der Körpersprache, insbesondere unter Berücksichtigung einer im Verfahren ermittelten Übereinstimmung, Korrelation oder eine Zeitverzögerung zwischen der zumindest Parameter der Körpersprache und dem zumindest einen inhaltlichen Merkmal innerhalb einer auditiven Kommunikation zwischen zumindest zwei Personen variiert werden. Auch kann ein Richtungsparameter der besagten Kommunikation im Wohnraum abhängig von einer erfassten, bevorzugt interpretierter Körpersprache ermittelt werden.In other words, the parameters of a voice message and / or a portion of the further audio signal, depending on a determined parameter of the body language, in particular taking into account a match determined in the method, correlation or a time delay between the at least parameters of the body language and the at least one content-related feature be varied within an auditory communication between at least two persons. Also, a direction parameter of said communication in the living space can be determined depending on a detected, preferably interpreted body language.
Gemäß einer zweckmäßigen Ausgestaltung wird abhängig von einer linguistischen Auswertung und/oder inhaltlichen Auswertung zumindest eines Abschnitts der besagten Kommunikation ein Prädizieren eines Verlaufs der weiteren Kommunikation oder einer nachfolgenden Kommunikation ausgeführt und beim Bestimmen oder Anpassen eines Parameters der zumindest einer auditiven Meldung und/oder eines weiteren Audiosignals berücksichtigt. Beispielsweise wird abhängig von einer linguistischen Auswertung und/oder inhaltlichen Auswertung zumindest eines Abschnitts der besagten Kommunikation ein Ermitteln, insbesondere Prädizieren eines oder mehrerer zeitlichen Parameter, insbesondere kennzeichnend einen zeitlichen Verlauf der weiteren Kommunikation oder einer nachfolgenden Kommunikation ausgeführt und der zumindest ein ermittelter zeitlicher Parameter beim Bestimmen oder Anpassen eines Parameters der zumindest einer auditiven Meldung und/oder des weiteren Audiosignals berücksichtigt. Beispielsweise kann sich das Prädizieren eines oder mehrerer zeitlichen Parameter auf eine Stimme zumindest eines Sprechers beziehen. Beispielsweise kann daraufhin auf Basis des einen oder mehrerer ermittelten zeitlichen Parameter, insbesondere eines prädizierten zeitlichen Verlaufs der weiteren oder der nachfolgenden Kommunikation ein Zeitparameter zur Ausgabe eines Abschnitts des weiteren Audiosignals und/oder der zumindest einen auditiven Meldungen bestimmt werden.According to an expedient embodiment, depending on a linguistic evaluation and / or content evaluation of at least one section of said communication, a prediction of a course of the further communication or a subsequent communication is carried out and when determining or adjusting a parameter of the at least one auditory message and / or another Considered audio signal. For example, depending on a linguistic evaluation and / or content evaluation of at least a portion of said communication, determining, in particular predicating one or more temporal parameters, in particular characterizing a temporal course of the further communication or a subsequent communication, and the at least one determined temporal parameter during Determining or adjusting a parameter of the at least one auditory message and / or the further audio signal considered. For example, predicting one or more temporal parameters may refer to a voice of at least one speaker. By way of example, a time parameter for outputting a section of the further audio signal and / or the at least one auditory message can then be determined on the basis of the one or more determined temporal parameters, in particular a predicted chronological progression of the further or subsequent communication.
Derartige Parameter können im Verfahren beispielsweise in Form qualitativer und/oder quantitativer Maße erkannt, ausgewertet und berücksichtigt werden. Dabei kann ein Spracherkennungsverfahren oder eine spezielle Weiterbildung eines Spracherkennungsverfahrens verwendet werden, wobei das Ergebnis der Ausführung eines solchen Verfahrens nicht etwa zur Interpretation oder Verwandlung der Sprache in eine textuelle Information oder zur Ausführung eines Befehls, sondern zum Bestimmen oder Verändern der Parameter zum Erzeugen einer auditiven Meldung und/oder zum Verändern oder Anpassen eines Abschnitts des weiteren Audiosignals abhängig von der (beiläufig) stattfindenden besagten Kommunikation verarbeitet wird.Such parameters can be recognized, evaluated and taken into account in the method, for example in the form of qualitative and / or quantitative measures. In this case, a speech recognition method or a specific development of a speech recognition method can be used, the result of the execution of such a method not for interpreting or converting the language into textual information or for executing a command, but for determining or changing the parameters for generating an auditory Message and / or for changing or adjusting a portion of the further audio signal depending on the (incidentally) said communication is processed.
Alternativ oder zusätzlich kann ein räumlicher (auf den Raum: Positionen, Richtungen bezogener) Parameter der besagten Kommunikation, insbesondere ein Richtungsparameter der Kommunikation und/oder die Ausbreitung der akustischen Schallwellen innerhalb des Wohnraums prädiziert werden und daraufhin ein räumlicher Parameter, ein Raumklangparameter oder ein Parameter kennzeichnend eine Aufteilung einer auditiven Meldung oder eines Inhalts der auditiven Meldung auf zumindest zwei Raumbereiche im Wohnraum bzw. Haus bestimmt oder angepasst werden, wobei die akustischen Eigenschaften des Wohnraums, insbesondere in Bezug auf die Ausbreitung der akustischen Schallwellen innerhalb des Wohnraums (Dämpfung, Reflektion, Phasenverschiebung, Veränderung der Frequenzcharakteristik) prädiziert bzw. berücksichtigt werden können.Alternatively or additionally, a spatial (in the space: positions, directions related) parameters of said communication, in particular a directional parameter of communication and / or the propagation of the acoustic sound waves within the living space can be predicted and then a spatial parameter, a surround parameter or a parameter characterizing a distribution of an auditory message or a content of the auditory message on at least two spatial areas in the living room or house determined or adapted, the acoustic properties of the living space, in particular with respect to the propagation of the acoustic sound waves within the living space (damping, reflection, Phase shift, change in the frequency characteristic) can be predicted or taken into account.
Beispielsweise kann eine linguistische Auswertung in Bezug auf Parameter der Sätze bzw. Phrasen, linguistischer Konstrukte erfolgen und die ermittelten Parameter beim Erzeugen einer auditiver Meldung, insbesondere hinsichtlich ihres Inhalts, Aufteilung, Zeitpunkts der Ausgabe berücksichtigt wird. Bevorzugt wird eine vorausschauende Anpassung der als auditive Meldung auszugebender Inhalte ausgeführt.For example, a linguistic evaluation can take place with respect to parameters of the sentences or phrases, linguistic constructs, and the parameters determined during the generation of an auditory message, in particular with regard to their content, distribution, time of the output, are taken into account. Preferably, a forward-looking adaptation of the content to be output as an auditory message is carried out.
Bevorzugt werden zumindest zwei Zeitparameter ermittelt, insbesondere prädiziert, kennzeichnend ein Zeitintervall, in dem eine auditive Meldung oder ein an sich sinnvoller Abschnitt einer auditiven Meldung, insbesondere mit keiner, keiner wesentlichen oder minimierter zeitlichen Überschneidung mit einer sprachlichen Kommunikation im Wohnraum ausgegeben werden kann. Bevorzugt werden daraufhin Parameter zu einer vorausschauenden Anpassung zumindest einer auditiven Meldung, z.B. in Form einer zeitlichen Planung der Ausgabe von einem oder mehreren Abschnitten einer auditiven Meldung bestimmt. Besonders bevorzugt werden abhängig von einem oder mehreren zeitlichen Parametern der Kommunikation: das Starten der Ausgabe eines (bestimmten) Abschnitts einer Sprachmitteilung, und/oder das Erzeugen einer auditiven Meldung mit einem bestimmten Inhalt, und/oder des Ende der Ausgabe eines (bestimmten) Abschnitts einer Sprachmitteilung, und/oder der zeitlichen Verlaufs der Amplitudenparameter und/oder Frequenzparameter der Sprachmitteilung, und/oder eines Parameters eines, im selben Zeitintervall auszugebenden Abschnitts des weiteren Audiosignals, bestimmt bzw. angepasst.Preferably, at least two time parameters are determined, in particular predicated, characterizing a time interval in which an auditory message or a per se useful portion of an auditory message, in particular with no, no significant or minimized temporal overlap with a linguistic communication in the living room can be spent. Parameters for a forward-looking adaptation of at least one auditory message, eg in the form of a temporal planning of the output of one or more sections of an auditory message, are then preferred Message determined. Depending on one or more temporal parameters of the communication, it is particularly preferred to start the output of a (specific) section of a voice message, and / or to generate an auditory message with a specific content and / or the end of the output of a (specific) section a voice message, and / or the time course of the amplitude parameters and / or frequency parameters of the voice message, and / or a parameter of a, to be output in the same time interval portion of the further audio signal, determined or adapted.
Ein solches Bestimmen bzw. Anpassen der Parameter kann mehrmals, bevorzugt zyklisch, erfolgen, wobei die Parameter insbesondere präzisiert bzw. optimiert werden können.Such a determination or adaptation of the parameters can take place several times, preferably cyclically, whereby the parameters can be specified or optimized in particular.
Zweckmäßigerweise wird dabei eine solche Reihenfolge der Ausgabe der zumindest zwei Abschnitte der zumindest einen auditiven Meldung und/oder eines oder mehrerer Abschnitte des weiteren auszugebenden Audiosignals gewählt werden, bei der
- - die auditive Meldung, die mit der auditiven Meldung zu repräsentierende Information, und/oder ein weiteres auszugebendes Audiosignal in möglichst wenige Abschnitte aufgeteilt werden muss, und/oder
- - eine zur Ausgabe einer auditiven Meldung oder eines Abschnitts des Audiosignals geeignetes Zeitintervall, zwischen zumindest zwei Abschnitten der sprachlichen Kommunikation, in einem zweckmäßigen Maße, bzw. möglichst vollständig genutzt wird.
- - the auditory message, the information to be represented by the auditory message, and / or another audio signal to be outputted must be divided into as few sections as possible, and / or
- a time interval which is suitable for outputting an auditory message or a section of the audio signal, between at least two sections of the speech communication, is used to the extent possible or as completely as possible.
Auch können dabei Pausen einer vorausbestimmten Dauer zwischen den Abschnitten der sprachlichen Kommunikation und der Ausgabe zumindest einer auditiven Meldung berücksichtigt werden.It is also possible to take into account pauses of a predetermined duration between the sections of the linguistic communication and the output of at least one auditory message.
Beispielsweise können zwischen den Abschnitten der sprachlichen Kommunikation, insbesondere zwischen zwei aufeinander folgenden Transaktionen der besagten Kommunikation, auditive Meldungen erzeugt werden. Beispielsweise können auch kurze, insbesondere einen Abschnitt der besagten Kommunikation kommentierende auditive Meldungen erzeugt werden, z.B. auch umfassend Kommunikationslaute, Interjektionen, Lachen, Weinen, Zungenschnalzen, Stöhnen, Ausrufewörter.For example, auditory messages can be generated between the sections of the speech communication, in particular between two successive transactions of said communication. For example, short auditory messages, notably commenting on a portion of said communication, may also be generated, e.g. also comprising communication sounds, interjections, laughter, crying, tongue lashes, moans, exclamation words.
Gemäß einer zweckmäßigen Ausgestaltung wird ein Parameter und/oder eine Klassifikation der Art und/oder eines Inhalt eines weiteren im Wohnraum hörbaren akustischen Inhalts ermittelt, ausgewertet, insbesondere analysiert, und im Verfahren berücksichtigt. Dabei kann im Verfahren auch zumindest ein Parameter eines weiteren, insbesondere von der besagten Kommunikation und von dem besagten Audiosignal abweichenden, akustischen Inhalts ermittelt, insbesondere prädiziert und berücksichtigt werden. Dieser kann bevorzugt qualitativ und/oder quantitativ anders berücksichtigt werden, als ein Parameter der besagten (sprachlichen) Kommunikation.According to an expedient embodiment, a parameter and / or a classification of the type and / or content of another audible content audible in the living space is determined, evaluated, in particular analyzed, and taken into account in the method. In this case, at least one parameter of another acoustic content deviating, in particular, from said communication and from said audio signal, can also be determined, in particular predicated, and taken into account. This can preferably be taken into account differently qualitatively and / or quantitatively, as a parameter of the said (linguistic) communication.
Beispielsweise kann alternativ oder zusätzlich zu dem Parameter der besagten Kommunikation, ein Parameter eines bestimmten, von vorausbestimmten Eigenschaften geprägten im Wohnraum hörbaren akustischen Inhalts berücksichtigt werden. Beispielsweise kann eine von einem anderen Zimmer, Garten, Balkon kommende Stimme eines Kindes, Haustiers, ein Hilferuf, ein bestimmtes eingelerntes Geräusch als eine bestimmte Art eines hörbaren akustischen Inhalts im Verfahren berücksichtigt werden. Der besagte im Wohnraum hörbare akustische Inhalt unterscheidet sich dabei insbesondere von dem besagten weiteren im Wohnraum hörbaren Audiosignal. Der hörbare akustische Inhalt kann dabei einer „rein akustischen“ Natur sein. Der hörbare akustische Inhalt kann ein nicht im Wohnraum erzeugter und im Wohnraum hörbarer akustischer Inhalt sein. Ein weiteres hörbares Audiosignal entspricht nicht dem durch das System auszugebenden, bzw. dem unmittelbar steuerbaren Audiosignal. Dieses kann ein weiteres auf Basis analoger oder digitaler Daten aus einer weiteren Ausgabevorrichtung ausgegebenes Audiosignal sein.For example, as an alternative or in addition to the parameter of the said communication, a parameter of a specific acoustic content which is characterized by predefined properties and can be heard in the living space can be taken into account. For example, a voice of a child, pet, call for help, a particular taught-in sound coming from another room, garden, balcony, may be considered as a particular type of audible acoustic content in the process. The said acoustic content audible in the living space differs in particular from the said further audio signal audible in the living space. The audible acoustic content may be a "purely acoustic" nature. The audible acoustic content may be audible content not generated in the living space and audible in the living space. Another audible audio signal does not correspond to the audio signal to be output by the system or the directly controllable audio signal. This may be another based on analog or digital data from another output device audio signal.
Gemäß einer zweckmäßigen Ausgestaltung wird ein Parameter und/oder eine Klassifikation der Art und/oder ein inhaltliches Merkmal eines weiteren im Wohnraum hörbaren Audiosignals ermittelt und im Verfahren berücksichtigt. Dabei kann ein Parameter und/oder eine Klassifikation der Art und/oder ein inhaltliches Merkmal eines weiteren im Wohnraum hörbaren Audiosignals ermittelt und im Verfahren verarbeitet werden. Beispielsweise wird ein Parameter eines Abschnitts der zumindest einen auditiven Meldung und/oder des weiteren Audiosignals abhängig von einer erkannten Klasse der Art und/oder einem inhaltlichen Merkmal eines weiteren im Wohnraum, z.B. in einem zumindest teilweise akustisch verbundenen Raumbereich, hörbaren Audiosignals bestimmt. Bei dem weiteren im Wohnraum hörbaren Audiosignal handelt es sich bevorzugt um ein technisch, elektronisch erzeugtes Audiosignal. Das zumindest eine weitere im Wohnraum hörbare Audiosignals kann ein aus einer weiteren Audioausgabevorrichtung ausgegebenes Audiosignal sein, das z.B. in einem teilweise akustisch getrennten Raumbereich des Wohnraums, insbesondre von einem benachbarten Zimmer in Form von zumindest teilweise gedämpften Schallwellen, hörbar ist.According to an expedient embodiment, a parameter and / or a classification of the type and / or a content-related feature of another audio signal audible in the living space is determined and taken into account in the method. In this case, a parameter and / or a classification of the type and / or a content-related feature of another audio signal audible in the living space can be determined and processed in the method. For example, a parameter of a section of the at least one auditory message and / or the further audio signal is dependent on a recognized class of the type and / or a content-related feature of another in the living space, e.g. in an at least partially acoustically connected spatial region, audible audio signal. The further audio signal audible in the living area is preferably a technically, electronically generated audio signal. The at least one further audio signal audible in the living space may be an audio signal output from another audio output device, e.g. in a partially acoustically separated room area of the living space, in particular of an adjacent room in the form of at least partially damped sound waves, is audible.
Beispielsweise kann im Verfahren ein Anpassen des zumindest eines Parameters der auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals abhängig von der Art eines oder mehrerer weiterer im Wohnraum hörbaren akustischen Inhalte erfolgen. Insbesondere kann dabei eine unterschiedliche Anpassung auf einen Sprache (der Sprache entsprechender Schallwellen) umfassenden und/oder keine Sprache umfassenden akustischen Inhalte ausgeführt werden. Die Art des besagten weiteren akustischen Inhalts kann in folgende oder vergleichbare Arten unterteilt und im Verfahren ermittelt werden: z.B. ein Musiktitel; ein Sprachprogramm, die beispielsweise aus einer weiteren, insbesondere tragbaren Audioausgabevorrichtung kommen, ein Fernmeldeinhalt (Telefonat, vorgelesene SMS, Messenger, usw.). Dabei kann der hörbarer akustischer Inhalt z.B. mittels eines oder mehreren Mikrophonen erfasst, bewertet, insbesondere klassifiziert und im Verfahren berücksichtigt werden. Beispielsweise kann daraufhin zumindest eine auditive Meldung vorausschauend pausiert, insbesondere an zumindest einer geeigneten Stelle pausiert, aufgeteilt, und/oder zu einem weiteren Inhalt zusammengefügt und/oder mit einem weiteren Inhalt kombiniert werden. Auch können daraufhin eine oder mehrere auditive Meldungen von bestimmten Vorrichtungen oder Geräten des Hauses, z.B. auf Basis der Daten von vernetzten Geräten und/oder zu bestimmen Themen oder Events nicht, zu einem späteren Zeitintervall oder in einer wesentlich veränderten, angepassten Form ausgegeben werden. For example, in the method, the at least one parameter of the auditory message and / or a section of the further audio signal can be adapted depending on the type of one or more further audible contents audible in the living space. In particular, a different adaptation to a language (the language of corresponding sound waves) comprising comprehensive and / or no language comprehensive acoustic content can be performed. The type of said further acoustic content can be subdivided into the following or comparable types and determined in the method: eg a music title; a voice program, which come for example from another, in particular portable audio output device, a telecommunications content (telephone call, read SMS, messenger, etc.). In this case, the audible acoustic content can be detected, evaluated, in particular classified by means of one or more microphones, in particular, and taken into account in the method. For example, at least one auditory message can then be paused in advance, in particular paused at at least one suitable location, divided, and / or combined to form a further content and / or combined with a further content. Also, one or more auditory messages from certain devices or devices of the house, eg based on the data from networked devices and / or themes or events not to be determined, may then be output at a later time interval or in a substantially altered, adapted form.
Bevorzugt wird im Verfahren ein Abgleich eines oder mehrerer Parameter der besagten Kommunikation und eines oder mehrerer Parameter des besagten weiteren im Wohnraum hörbaren akustischen Inhalts in Bezug auf etwa denselben Raumbereich und/oder Zeitintervall ausgeführt. Die anzugleichenden Parameter können die nach vorausbestimmten Kriterien ermittelten Arten entsprechender Kommunikationsabschnitte (ein entspanntes Dialog, rege Diskussion, Monolog, Streit, Drama, etc.), die Arten eines weiteren im Wohnraum hörbaren akustischen Inhalts (Lärm von außen, Lärm eines im Haus betriebenen Geräts, Klingelton, spielende Kinder, Küchengeräusche, Stimme eines Haustiers, etc.) und die Art eines Abschnitts des zumindest einen weiteren im Wohnraum hörbaren Audiosignals (Nachrichten, Musik, auditive Meldung auf Basis der Daten einer im Haus, z.B. in einem benachbarten Zimmer betriebenen Vorrichtung) kennzeichnen. Insbesondere werden dabei die zumindest zwei entsprechenden, in diesem Dokument definierten Prioritätsmaße jeweiliger (um einen Raumbereich und/oder Zeitintervall konkurrierender) auditiver Inhalte abgeglichen. Abhängig vom dem Abgleich der Prioritätsmaße kann eine Variante zum Bestimmen oder Anpassen der (jeweiligen) Parameter gewählt werden ein Bestimmen oder Anpassen der Parameter unter Berücksichtigung der beim Abgleich ermittelter Information ausgeführt werden.Preferably, in the method, matching of one or more parameters of said communication and one or more parameters of said further audible content audible in the living space is performed with respect to approximately the same space area and / or time interval. The parameters to be adjusted may be the types of corresponding communication sections determined by predetermined criteria (a relaxed dialogue, lively discussion, monologue, argument, drama, etc.), the types of another audible content audible in the living space (external noise, noise of a domestic appliance , Ringtone, playing children, kitchen sounds, voice of a pet, etc.) and the nature of a portion of the at least one further audio signal audible in the living room (news, music, auditory message based on the data of a device operated in the home, eg in a neighboring room ). In particular, the at least two corresponding priority measures of respective auditory contents (competing for one spatial area and / or time interval) are defined in this document. Depending on the adjustment of the priority measures, a variant for determining or adapting the (respective) parameters can be selected, determining or adapting the parameters taking into account the information determined during the adjustment.
Bevorzugt werden die Prioritätsmaße für die jeweiligen Abschnitte der besagten Kommunikation, eines weiteren akustischen Inhalts und/oder für den Abschnitt eines weiteren Audiosignals bestimmt, z.B. nach hinterlegten Kriterien zugeordnet und abgeglichen. Das Ergebnis des Abgleichs wird beim Bestimmen oder Anpassen der Parameter der zumindest einen auditiven Meldung und/oder des weiteren Audiosignals berücksichtigt. Ein solcher Abgleich der zumindest zwei Prioritätsmaße kann beispielsweise nach einer vorgegebenen Vorschrift, Logik, Zuordnungstabelle, etc. ausgeführt werden. Dabei kann ein im Verfahren ermitteltes bzw. verarbeitetes Prioritätsmaß zumindest eine jeweilige „Wichtigkeit“ und/oder zumindest eine (zeitliche) „Dringlichkeit“ kennzeichnen. Beispielsweise können bei einem akustischen Inhalt mit etwa durchschnittlichen Parametern, Abschnitte eines auszugebenen Audiosignals und/oder auditive Meldungen die folgende Prioritätskennungen haben: „Wichtig“, und „Dringend“; „Wichtig“ aber nicht „Dringend“; „Dringend“ aber nicht „Wichtig“; nicht „Dringend“ und nicht „Wichtig“, unterschiedlich behandelt werden.Preferably, the priority measures are determined for the respective sections of said communication, another audio content and / or for the section of another audio signal, e.g. assigned and matched according to stored criteria. The result of the adjustment is taken into account when determining or adjusting the parameters of the at least one auditory message and / or the further audio signal. Such a comparison of the at least two priority measures can be carried out, for example, according to a prescribed rule, logic, assignment table, etc. In this case, a priority measure determined or processed in the method can identify at least one respective "importance" and / or at least one (temporal) "urgency". For example, in the case of an acoustic content having approximately average parameters, portions of an audio signal to be output and / or auditory messages, the following may have the following priority flags: "Important" and "Urgent"; "Important" but not "Urgent"; "Urgent" but not "important"; not "urgent" and not "important", treated differently.
Abhängig von dem Abgleich der eingelesenen, ermittelten, oder geschätzten Prioritätsmaße kann ein Bestimmen oder Anpassen der Parameter einer auditiven Meldung und/oder eines Abschnitt des weiteren Audiosignals erfolgen. Dabei kann ein Zeitparameter der Ausgabe und/oder zumindest ein, insbesondere akustischer Parameter zweckmäßig variiert werden. Beispielsweise kann Parameter bestimmt oder angepasst werden, der einen Zeitpunkt, zu dem die Ausgabe der auditiven Meldung beendet werden soll, und/oder die verfügbare Dauer die eine (auszugebende) auditive Meldung haben darf kennzeichnet, insbesondere ohne, dass der Inhalt des Audiosignals dadurch in einer wesentlich nachteiligen Weise beeinflusst wird, z.B. missverständlich wird. Insbesondere kann die auditive Meldung passend zu einem zur Verfügung stehenden Zeitintervall innerhalb der besagten Kommunikation, z.B. zwischen zumindest zwei Abschnitten der besagten Kommunikation, zwischen zumindest zwei Abschnitten des zumindest einen auszugebenden Audiosignals, zwischen einem Abschnitt des Audiosignals und einem Abschnitt der Kommunikation platziert bzw. vorausschauend geplant werden. Beispielsweise kann eine auditive Meldung zwischen zwei Phrasen eines Sprechers oder einer Phrase eines Sprechers ausgegeben werden, wobei ein Zeitintervall bis zu einer erwarteten Erwiderung der Phrase durch eine jeweils andere Person als hinreichend ermittelt, prädiziert, bzw. geschätzt wird. Alternativ oder zusätzlich kann abhängig von dem Abgleich der besagten Parameter eine zur Ausgabe als eine akustische Meldung bestimmte Information als eine visuelle Meldung, z.B. Bild, Grafik, Text oder Symbol oder eine haptische Meldung, Vibration, beispielsweise durch ein Anwendergerät einer bestimmten Person (Smartphone, Smart-Watch, Smart-Closes, Datenbrille, etc.) ausgegeben werden.Depending on the alignment of the read, determined or estimated priority measures, it is possible to determine or adapt the parameters of an auditory message and / or a section of the further audio signal. In this case, a time parameter of the output and / or at least one, in particular acoustic parameters can be suitably varied. For example, parameters may be determined or adjusted that characterize a time at which the output of the auditory message is to be terminated and / or the available duration which may have an auditory message (to be output), in particular without the content of the audio signal thereby being canceled is influenced in a substantially disadvantageous way, eg becomes misleading. In particular, the auditory message may be placed or anticipated between a portion of the audio signal and a portion of the communication to match an available time interval within said communication, eg between at least two portions of said communication, between at least two portions of the at least one audio signal to be output be planned. For example, an auditory message may be output between two phrases of a speaker or a phrase of a speaker, where a time interval until an expected response of the phrase by another person is sufficiently determined, predicted, or estimated. Alternatively or additionally, depending on the adjustment of said parameters, information intended for output as an audible message may be provided as a Visual message, such as image, graphics, text or icon or a haptic message, vibration, for example, by a user device of a specific person (smartphone, smart watch, smart closets, data glasses, etc.) are output.
Falls beispielsweise aus dem Abgleich der Parameter ermittelt wird, dass ein bestimmter weiterer im Wohnraum hörbarer akustischer Inhalt ein insgesamt höheres Prioritätsmaß als die zumindest eine auditive Meldung und/oder zumindest ein Abschnitt des weiteren Audiosignals hat bzw. haben soll, kann eine Ausgabe des Abschnitts des Audiosignals und/oder der auditiven Meldung pausiert, unterdrückt und/oder zu einem späteren Zeitpunkt und/oder mit einem veränderten Parameter ausgegeben werden. Beispielsweise kann, falls aus dem Abgleich der Prioritätsmaße ermittelt wird, dass einem bestimmten Abschnitt des weiteren Audiosignals und/oder der zumindest einen bestimmten auditiven Meldung ein insgesamt höheres Prioritätsmaß als einem bestimmten Abschnitt der Kommunikation (allein genommen oder zusammen mit einem bestimmten akustische Inhalt im Wohnraum) zuzuordnen ist, kann der Abschnitt des weiteren Audiosignals bzw. die auditive Meldung mit einem veränderten Parameter, z.B. lauter oder vorwiegend aus einem anderen Lautsprecher oder Klangquelle, ausgegeben werden und zusätzlich eine visuelle bzw. grafische und/oder textuelle Information an zumindest eine Person oder aus zumindest einem Anwendergerät ausgegeben werden.If, for example, it is determined from the comparison of the parameters that a certain further audible content audible in the living space has an overall higher priority measure than the at least one auditory message and / or at least a portion of the further audio signal, an output of the section of the Audio signal and / or the auditory message pauses, suppressed and / or issued at a later date and / or with a changed parameter. For example, if it is determined from the alignment of the priority measures, that a particular portion of the further audio signal and / or the at least one particular auditory message may have an overall higher priority level than a particular portion of the communication (alone or along with a particular acoustic content in the living space ), the section of the further audio signal or the auditory message with an altered parameter, eg louder or predominantly from another loudspeaker or sound source, and in addition a visual or graphical and / or textual information is output to at least one person or from at least one user device.
Gemäß einer zweckmäßigen Ausgestaltung wird (explizit) erkannt, dass zumindest eine (aktuell gesprochene oder prädizierte) sprachliche Botschaft einer Person im Wohnraum und/oder ein Abschnitt der Schallwellen, repräsentierend die Stimme zumindest einer Person im stationären Wohnraum, zumindest mit einem erhöhten, insbesondere einen Schwellwert übersteigendem, Wahrscheinlichkeitsmaß, nicht an eine Sprachsteuerungsapplikation gerichtet ist oder gerichtet wird. Daraufhin kann ein Bestimmen oder Anpassen eines oder mehrerer Parameter der zumindest einer auditiven Meldung und/oder zumindest eines Abschnitts des weiteren Audiosignals erfolgen. Dabei kann ein oder mehrere Parameter der zumindest einer auditiven Meldung und/oder zumindest eines Abschnitts des weiteren Audiosignals abhängig von dem besagten Wahrscheinlichkeitsmaß bestimmt werden. Beispielsweise kann eine Variante zum Bestimmen oder Anpassen der Parameter der zumindest einen auditiven Meldung und/oder ein Parameter des auszugebenden Audiosignals abhängig von dem besagten Wahrscheinlichkeitsmaß ausgewählt werden.According to an expedient embodiment, it is (explicitly) recognized that at least one (currently spoken or predicated) linguistic message of a person in the living space and / or a portion of the sound waves, representing the voice of at least one person in the stationary living room, at least with an elevated, in particular one Threshold-exceeding, probability measure, is not directed to a voice control application or directed. Thereupon, it is possible to determine or adapt one or more parameters of the at least one auditory message and / or at least one section of the further audio signal. In this case, one or more parameters of the at least one auditory message and / or at least one section of the further audio signal can be determined as a function of the said probability measure. For example, a variant for determining or adapting the parameters of the at least one auditory message and / or a parameter of the audio signal to be output can be selected as a function of the said probability measure.
Beispielsweise wird ermittelt, dass zumindest eine (akustische) sprachliche Botschaft nicht an eine Sprachsteuerungsapplikation im Wohnraum gerichtet ist oder eine (von einer Person anhand des ermittelten Kommunikationsvorhabens erwartete) sprachliche Botschaft nicht an eine Sprachsteuerungsapplikation gerichtet wird und abhängig von der ermittelten Information ein Bestimmen eines Parameters der auditiven Meldung und/oder ein Anpassen eines Abschnitts des weiteren Audiosignals ausgeführt werden.For example, it is determined that at least one (acoustic) linguistic message is not directed to a voice control application in the living room or a (expected by a person based on the identified communication project) linguistic message is not directed to a voice control application and depending on the information determined determining a parameter the auditory message and / or adjusting a portion of the further audio signal are executed.
Beispielsweise kann auch ermittelt werden, dass ein Abschnitt der besagten Kommunikation, z.B. als eine sprachliche Kommunikationsbotschaft, für eine weitere Person bestimmt ist, und/oder keine Merkmale, insbesondere keine hinreichende Übereinstimmung mit einer, ggf. vorgegebenen Spracheingabe, einem Sprachbefehl und/oder oder eine Frage für die zumindest eine Sprachsteuerungsapplikation ausweist und/oder dass der Abschnitt der besagten Kommunikation vorausbestimmte Merkmale oder Kombinationen von Merkmalen aufweist die (explizit) eine Unterscheidung von einer Spracheingabe, Sprachbefehl und/oder Frage oder von einer Liste bzw. Kategorien bestimmter Formulierungen zu Spracheingaben, Sprachbefehlen und/oder Fragen kennzeichnen.For example, it may also be determined that a portion of said communication, e.g. as a linguistic communication message intended for a further person, and / or no features, in particular no sufficient correspondence with a possibly given voice input, a voice command and / or a question for the at least one voice control application identifies and / or that the section said communication comprises predetermined features or combinations of features which (explicitly) characterize a distinction from a voice input, voice command and / or question or from a list or categories of particular phrases to voice inputs, voice commands and / or questions.
Dabei kann ein Wahrscheinlichkeitsmaß ermittelt oder geschätzt werden, der kennzeichnend ist, dass eine von einer Person akustisch erzeugte sprachliche Botschaft oder eine erwartete sprachliche Botschaft nicht an eine Sprachsteuerungsapplikation gerichtet ist oder wird. Ein solches Wahrscheinlichkeitsmaß kann im Verfahren abhängig bzw. unter Berücksichtigung eines Parameters einer erfassten Szene im Wohnraum ermittelt werden. Auch kann der Wahrscheinlichkeitsmaß ermittelt werden dafür, ob die sprachliche Botschaft in Erwartung einer Reaktion seitens der Sprachsteuerungsapplikation und/oder zumindest einen Person gesprochen wurde bzw. voraussichtlich gesprochen wird. Daraufhin wird zumindest ein Parameter der zumindest einen auditiven Meldung und/oder eines Abschnitts des weiteren auszugebenden Audiosignals unter Berücksichtigung eines oder mehrerer ermittelter Wahrscheinlichkeitsmaße, beispielsweise abhängig von einem Überschreiten und/oder Unterschreiten bestimmter Wahrscheinlichkeitsmaße, bestimmt oder angepasst werden.In doing so, a probability measure may be determined or estimated, which is indicative that a person's acoustically generated linguistic message or expected linguistic message is not or will not be directed to a voice control application. Such a probability measure can be determined in the method depending on or taking into account a parameter of a detected scene in the living room. The probability measure can also be determined as to whether the linguistic message was spoken or is expected to be spoken in anticipation of a reaction on the part of the voice control application and / or at least one person. Thereupon, at least one parameter of the at least one auditory message and / or of a portion of the further audio signal to be output is determined or adapted taking into account one or more determined probability measures, for example, depending on an exceeding and / or falling below of certain probability measures.
Beispielsweise kann ein erstes Wahrscheinlichkeitsmaß ermittelt und berücksichtigt werden, dass zumindest ein Teil der Schallwellen im Wohnraum, insbesondere eine bestimmte (durch im Wohnraum akustisch, durch Stimmbänder einer Person erzeugte Schallwellen erzeugte) sprachliche Botschaft, nicht an die Sprachsteuerungsapplikation gerichtet ist, und/oder an eine Person (an einen oder mehrere anwesende oder angenommene Zuhörer) gerichtet ist, und/oder an einen über eine Telekommunikation, z.B. per Mobilfunk zugeschalteten Zuhörer gerichtet ist. Insbesondere wird abhängig von einem oder mehreren besagten ersten Wahrscheinlichkeitsmaße entschieden, einen Abschnitt der Schallwellen (die mit der besagten Kommunikation korrespondieren) zum Verändern eines Abschnitts des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung zu verarbeiten. Ein solches erstes Wahrscheinlichkeitsmaß kann z.B. auch abhängig von einem zweiten Wahrscheinlichkeitsmaß ermittelt werden welches kennzeichnet, dass die besagte sprachliche Botschaft dem Zweck einer Spracheingabe, Sprachbefehl und/oder Frage an eine Steuerungsapplikation dient, und/oder dass eine Reaktion, insbesondere eine Antwort oder eine bestimmte (unmittelbare) Aktion, der Sprachsteuerungsapplikation erwartet wird.For example, a first probability measure can be determined and taken into account that at least a part of the sound waves in the living space, in particular a specific speech message (acoustically generated in the living space by sound waves of a person), is not addressed to the speech control application, and / or a person (to one or more present or accepted listeners) is directed, and / or addressed to a via telecommunication, eg via mobile connected listeners. In particular, depending on one or a plurality of said first probability measures, to process a portion of the sound waves (corresponding to said communication) for altering a portion of the audio signal to be output and / or the at least one auditory message. Such a first probability measure can also be determined, for example, as a function of a second probability measure which indicates that the spoken message is for the purpose of voice input, voice command and / or question to a control application, and / or that a response, in particular a response or a specific (immediate) action expected from the voice control application.
Das eine oder mehrere ermittelten ersten Wahrscheinlichkeitsmaße können im Verfahren verarbeitet und berücksichtigt werden. Das besagte zweite Wahrscheinlichkeitsmaß kann wiederum als eine inverse Größe berücksichtigt werden. Abhängig einem Abgleich eines ersten und/oder zweiten ermittelten bzw. geschätzten Wahrscheinlichkeitsmaßes mit einen oder mehrere vorgegebenen Schwellwerten, kann entschieden werden, dass die Sprachsteuerungsapplikation die sprachliche Botschaft, z.B. nicht analysieren soll, nicht beantworten oder nicht unmittelbar (für die Person wahrnehmbar) oder zumindest nicht unmittelbar auf den Inhalt der besagten sprachlichen Botschaft reagieren soll, insbesondere nicht im Sinne einer Befehlsinterpretation verarbeiten bzw. keinen Sprachbefehl ausführen oder nicht als eine Frage beantworten.The one or more determined first probability measures can be processed and taken into account in the method. The said second probability measure can again be taken into account as an inverse variable. Depending on a comparison of a first and / or second determined or estimated probability measure with one or more predetermined threshold values, it can be decided that the speech control application stores the linguistic message, e.g. should not analyze, do not answer, or not immediately (perceptible to the person) or at least not immediately respond to the content of said linguistic message, in particular not process in the sense of a command interpretation or execute a voice command or not answer as a question.
Gemäß einer optionalen Ausgestaltung umfasst das Verfahren eine Auswertung zumindest einer körperlichen Haltung und/oder einer körperlichen Regung zumindest einer Person im Wohnraum und daraufhin entschieden wird, dass eine sprachliche Botschaft: explizit an die Sprachsteuerungsapplikation, und/oder explizit nicht an die Sprachsteuerungsapplikation, und/oder an eine bestimmte Person im Wohnraum gerichtet ist. Eine oder mehrere körperlichen Regung einer oder mehreren an der Kommunikation beteiligten Person können auch abhängig von zumindest einem Parameter einer oder mehreren erfassten Szenen im stationären Wohnraum verarbeitet und berücksichtigt werden.According to an optional embodiment, the method comprises an evaluation of at least one physical posture and / or physical movement of at least one person in the living space and then decides that a linguistic message: explicitly to the voice control application, and / or explicitly not to the voice control application, and / or directed to a specific person in the living space. One or more physical impulses of one or more persons involved in the communication can also be processed and taken into account as a function of at least one parameter of one or more recorded scenes in the stationary living space.
Beispielsweise kann erkannt werden, dass ein Sprecher einen Satz sagt und sich dabei körperlich zu einer anderen Person im Wohnraum wendet. Daraufhin wird die von dem Sprecher ausgegebene sprachliche Botschaft nicht oder zumindest nicht zum Zweck der Generierung einer Antwort oder Befehlsausführung analysiert. Insbesondere wird dann der Inhalt der sprachlichen Botschaft nicht zu einer unmittelbaren Reaktion bzw. der Antwort darauf verarbeitet. Dabei können auch eine nicht erwünschte Antworten oder nicht gewünschte oder explizit unerwünschte inhaltliche (textuelle) Analyse des Gesprächs vermieden werden. Die Auswertung erfolgt dann vielmehr zweckgerichtet, insbesondere lediglich zum Bestimmen oder Anpassen eines Parameters der zumindest einen durch die Sprachsteuerungsapplikation generierten auditiven Meldung.For example, it can be recognized that a speaker says one sentence and turns physically to another person in the living room. Thereupon, the linguistic message output by the speaker is not or at least not analyzed for the purpose of generating a response or instruction execution. In particular, then the content of the linguistic message is not processed into an immediate response or the answer to it. It can also be an undesirable answers or unwanted or explicitly unwanted content (textual) analysis of the conversation can be avoided. The evaluation is then rather purposeful, in particular merely for determining or adapting a parameter of the at least one auditory message generated by the voice control application.
Beispielsweise kann eine solche körperliche Haltung und/oder körperliche Regung zumindest einer Person mittels zumindest einer im Wohnraum befindlichen Kamera, z.B. einer Webkamera eines TV-Geräts, erkannt werden. Beispielsweise wenn eine Zuwendung zumindest einer der besagten Personen zu zumindest einer zweiten Person als eine Kopf- oder Oberkörperdrehung und/oder ein Augenkontakt erkannt wird, dann kann ein einhergehend von der Person gesprochene sprachliche Botschaft als nicht an die Sprachsteuerungsapplikation gerichtet, sondern als ein Teil der besagten Kommunikation berücksichtigt werden.For example, such a physical posture and / or physical movement of at least one person by means of at least one camera located in the living room, e.g. a webcam on a TV. For example, if a donation of at least one of said persons to at least one second person is recognized as a head or torso rotation and / or eye contact, then a spoken message spoken by the person may not be addressed to the voice control application but as part of the speech control application said communication.
Gemäß einer zweckmäßigen Ausgestaltung wird die Reihenfolge in der zumindest zwei Abschnitte einer auditiven Meldung oder in der zumindest zwei unterschiedliche auditive Meldungen ausgegeben werden und/oder die Reihenfolge in der zumindest eine auditive Meldung und ein Abschnitt des weiteren Audiosignals ausgegeben werden, abhängig von einem oder mehreren ermittelten, insbesondere prädizierten Parameter der besagten Kommunikation verändert, insbesondere vertauscht wird.According to an expedient refinement, the sequence in the at least two sections of an auditory message or in the at least two different auditory messages is output and / or the sequence in which at least one auditory message and a section of the further audio signal are output, depending on one or more determined, in particular predicated parameters of said communication changed, in particular, is reversed.
Bevorzugt kann im Verfahren eine Reihenfolge bestimmt werden, in der zumindest eine auditive Meldung oder ein einzelner Inhalt der zumindest einen auditiven Meldung und zumindest ein (bestimmter) Abschnitt des weiteren Audiosignals ausgegeben werden.In the method, a sequence may preferably be determined in which at least one auditory message or a single content of the at least one auditory message and at least one (specific) section of the further audio signal are output.
Beispielsweise kann z.B. eine Reihenfolge aus einem oder mehreren Abschnitten eines als Signaldaten ausgelesenen weiteren Audiosignals und einer oder mehreren generierten oder zu generierenden auditiven Meldungen, z.B. generierter Sprachmitteilungen verändert werden. Beispielsweise kann eine Reihenfolge, in der ein Abschnitt des Audiosignals, umfassend ein Audiosignal eines Multimediainhalts, die besagte auditive Meldung und/oder einen Telekommunikationsinhalts ausgegeben werden, abhängig von zumindest einem Parameter der besagten Kommunikation bestimmt werden.For example, e.g. an order of one or more sections of a further audio signal read as signal data and one or more auditory messages generated or to be generated, e.g. generated voice messages are changed. For example, an order in which a portion of the audio signal comprising an audio signal of a multimedia content, said auditory message, and / or a telecommunications content is output may be determined depending on at least one parameter of said communication.
Beispielsweise kann, insbesondere zusammen mit oder abhängig von den für zumindest zwei besagte Abschnitte ermittelte zumindest zwei Zeitparameter und/oder der Reihenfolge zur Ausgabe der zumindest zwei Abschnitte, auch eine zweckmäßige Zuordnung der mit den besagten Abschnitten korrespondierenden Schallwellen oder Schallwellenmuster zu zumindest zwei Raumbereichen des Wohnraums bestimmt oder angepasst werden. Dabei können die zumindest zwei Abschnitte, zumindest überwiegend, in den zwei zumindest teilweise unterschiedlichen Raumbereichen ausgegeben werden und/oder aus zwei zumindest teilweise unterschiedlichen Raumbereichen wahrnehmbar gemacht werden.For example, in particular together with or depending on the at least two time parameters determined for at least two sections and / or the sequence for outputting the at least two sections, a suitable assignment of the sound waves or sound wave patterns corresponding to said sections to at least two spatial regions of the Living space is determined or adapted. In this case, the at least two sections, at least predominantly, can be output in the two at least partially different spatial regions and / or made perceptible from two at least partially different spatial regions.
Auch kann im Verfahren ein Zusammenfügen bzw. ein Ausgeben einer Sequenz bzw. in einer dichten Folge von zwei oder mehreren Abschnitten des Audiosignals und/oder einer oder mehreren auditiven Meldungen insbesondere in einer bestimmten Reihenfolge ausgeführt werden. Beispielsweise kann das Bestimmen oder Anpassen eines Parameters zum Erzeugen einer oder mehreren auditiven Meldungen derart erfolgen, dass die Datenabschnitte, die zu unterschiedlichen auditiver Meldungen und/oder einzelnen Teilen einer (aufgeteilten) auditiven Mitteilung gehören, in einer veränderten Reihenfolge ausgelesen bzw. ausgegeben werden.Also, in the method, a merging or outputting of a sequence or in a dense sequence of two or more sections of the audio signal and / or one or more auditory messages can be carried out, in particular in a specific sequence. For example, determining or adjusting a parameter to generate one or more auditory messages may be performed such that the data portions associated with different auditory messages and / or portions of a (split) auditory message are read out in a changed order.
Alternativ oder zusätzlich kann auch abhängig von dem Prädizieren der Parameters eines oder mehreren weiteren im Wohnraum hörbaren akustischen Inhalts, insbesondere unter Berücksichtigung von zumindest zwei unterschiedlichen, bevorzugt aller wesentlichen (bestimmte Grenzwerte überschreitender) weiteren im Wohnraum hörbaren akustischen Inhalte, eine Prädiktion eines oder mehrerer Zeitintervallen erfolgen, die zur Ausgabe einer oder mehreren (bestimmten) auditiven Meldungen und/oder eines oder mehreren bestimmten Abschnitte des weiteren Audiosignals geeignet sind. Die besagten zeitlichen Intervalle können auch (erwartete) Pausen kennzeichnen, in welchen die besagten Abschnitte des weiteren Audiosignals und/oder auditive Meldungen zeitlich passend, bevorzugt ohne zeitliche Überschneidung und/oder ohne eine wesentliche Erhöhung der Lautstärke ausgegeben werden können. Hierbei können kürzere (vorausgesagte) Pausen in den akustischen Inhalten im Wohnraum und/oder im Ablauf der besagten Kommunikation, (im Redefluss zwischen den zwei miteinander kommunizierenden Personen, für die Ausgabe eines kürzeren Abschnitts des weiteren Audiosignals und/oder der ersten auditiven Meldung oder einer ersten linguistischen Struktur der auditiven Meldung genutzt werden, und/oder längere (vorausgesagte) Pausen in den weiteren hörbaren akustischen Inhalten im Wohnraum und/oder im Ablauf der besagten Kommunikation (im Redefluss zwischen den zwei miteinander kommunizierenden Personen), für die Ausgabe eines längeren Abschnitts des weiteren Audiosignals und/oder der ersten auditiven Meldung oder einer zweiten linguistischen Struktur der auditiven Meldung genutzt werden.Alternatively or additionally, a prediction of one or more time intervals may also be dependent on the prediction of the parameters of one or more further audible contents audible in the living space, in particular taking into account at least two different, preferably all essential audible contents (exceeding certain limits) in the living space carried out, which are suitable for the output of one or more (specific) auditory messages and / or one or more specific sections of the further audio signal. Said temporal intervals may also indicate (expected) pauses in which said portions of the further audio signal and / or auditory messages may be output in time, preferably without temporal overlap and / or without a substantial increase in volume. Here, shorter (predicted) pauses in the acoustic content in the living room and / or in the course of said communication, (in the flow of speech between the two communicating persons, for the output of a shorter portion of the further audio signal and / or the first auditory message or a the first linguistic structure of the auditory message, and / or longer (predicted) pauses in the further audible acoustic content in the living space and / or in the course of the said communication (in the flow of speech between the two communicating persons), for the output of a longer section the further audio signal and / or the first auditory message or a second linguistic structure of the auditory message.
Gemäß einer zweckmäßigen Ausgestaltung wird die Art und/oder Prioritätsmaß eines oder mehrerer Abschnitte der besagten (sprachlichen) Kommunikation zwischen zumindest zwei Personen im Wohnraum, und/oder die Art und/oder Prioritätsmaß eines oder mehrerer Abschnitte der zumindest einen auditiven Meldung oder zweier unterschiedlichen auditiven Meldungen ermittelt. Daraufhin erfolgt das Bestimmen oder Anpassen eines Parameters, insbesondere eines Zeitparameters, zur Ausgabe zumindest eines Abschnitts der zumindest einen auditiven Meldung, und/oder der Reihenfolge in der zumindest zwei Abschnitte einer auditiven Meldung ausgegeben werden. Es kann die Art bzw. Arten, bevorzugt eine Klassifikation der Art zumindest eines oder mehrerer Abschnitte der besagten Kommunikation, insbesondere abhängig von einem inhaltlichen Merkmal der zumindest eines Abschnitts der besagten Kommunikation, Anzahl der an der Kommunikation (aktiv) beteiligten Personen, bestimmter beteiligten Personen, bestimmter Arten der Transaktionen ermittelt und berücksichtigt werden.According to an expedient embodiment, the type and / or priority measure of one or more sections of the said (linguistic) communication between at least two persons in the living space, and / or the type and / or priority measure of one or more sections of the at least one auditory message or two different auditory Messages determined. This is followed by determining or adapting a parameter, in particular a time parameter, for outputting at least a portion of the at least one auditory message, and / or the sequence in which at least two sections of an auditory message are output. It may be the type or types, preferably a classification of the nature of at least one or more sections of said communication, in particular depending on a content characteristic of at least a portion of said communication, number of persons involved in the communication (active), certain persons involved certain types of transactions are identified and taken into account.
Ferner kann ein Prioritätsmaß einer oder mehrerer auditiven Meldung und/oder ein oder zwei Abschnitte eines etwa im selben Zeitintervall auszugebenden Audiosignals ermittelt werden. Abhängig von einem Abgleich ermittelter Prioritätsmaße kann ein oder mehrere Parameter zum Erzeugen eines Abschnitts der auditiven Meldung und/oder einer Reihenfolge in der zumindest zwei Abschnitte der zumindest einen auditiven Meldung und/oder zum Ausgeben eines Abschnitts des weiteren Audiosignals, bestimmt werden.Furthermore, a priority measure of one or more auditory messages and / or one or two sections of an audio signal to be output approximately in the same time interval can be determined. Depending on an alignment of determined priority measures, one or more parameters for generating a portion of the auditory message and / or an order in the at least two sections of the at least one auditory message and / or for outputting a portion of the further audio signal may be determined.
Bevorzugt erfolgt ein Ermitteln eines inhaltlichen Merkmals der sprachlichen Kommunikation zwischen zumindest zwei Personen im Wohnraum, und/oder Ermitteln der Art und/oder Prioritätsmaß eines oder mehrerer im Wohnraum auszugebenden Audiosignalen oder Abschnitten eines Audiosignals, und/oder Ermitteln bzw. Berücksichtigen der Art und/oder Prioritätsmaß zumindest einer auszugebenden auditiven Meldung die etwa dasselbe (kurze) Zeitintervall betrifft, und daraufhin abhängig von den ermittelten Informationen: Bestimmen, insbesondere Anpassen einer Reihenfolge in der zumindest zwei Abschnitte des Audiosignals ausgegeben werden, abhängig von einem ermittelten inhaltlichen Merkmals der Kommunikation und/oder der ermittelten Art und/oder der ermittelten Priorität eines oder mehrerer auszugebenden Audiosignalen oder Abschnitten eines Audiosignals.Preferably, a content-related feature of the linguistic communication is determined between at least two persons in the living space, and / or determining the type and / or priority measure of one or more audio signals or sections of an audio signal to be output in the living space, and / or determining or considering the type and / or or priority measure of at least one auditory message to be output which concerns approximately the same (short) time interval, and then depending on the determined information: determining, in particular adapting an order in which at least two sections of the audio signal are output, depending on a determined content characteristic of the communication and / or the determined type and / or the determined priority of one or more audio signals or sections of an audio signal to be output.
Auch kann die zumindest eine auditive Meldung abhängig von einem oder mehreren ermittelten Prioritätsmaße pausiert und/oder in zumindest zwei Abschnitte aufgeteilt werden, oder zwei als auditive Meldung auszugebende Inhalte zu einer auditiven Meldung zusammengefügt oder (in einer auditiven Meldung) kombiniert werden.Also, the at least one auditory message may be paused and / or divided into at least two sections depending on one or more determined priority measures, or two auditory message contents may be merged into an auditory message or combined (in an auditory message).
Bevorzugt erfolgt ein Zuordnen der Ausgabe einer oder mehrerer auditiven Meldungen und eines oder mehreren Abschnitte des weiteren Audiosignals zu bestimmten, zumindest teilweise unterschiedlichen (und zumindest teilweise überlappenden) Zeitintervallen und/oder zu bestimmten zumindest teilweise unterschiedlichen (und zumindest teilweise überschneidenden) Raumbereichen im Wohnraum. Dabei kann das Zuordnen unter Berücksichtigung von einem oder mehreren der besagten Prioritätsmaße erfolgen. Beispielsweise reicht ein vereinfachtes, rudimentäres Ermitteln der Daten bzw. Werte eines inhaltlichen Merkmals zumindest eines Abschnitts der besagten Kommunikation aus, ohne dass die entsprechenden ermittelten Daten bzw. Werte den Inhalt der Kommunikation wiedergeben (müssen). Beispielsweise kann das inhaltliche Merkmal eines Abschnitts der Kommunikation, z.B. nach einem Mustererkennungsverfahren, hinterlegten Ähnlichkeitskriterien, Assoziationsvorschriften in ca. 4 - 64 vordefinierte Klassen (Kategorien) klassifiziert werden. Auch kann dabei zwischen mehreren Arten von besagten Transaktionen innerhalb der Kommunikation unterschieden werden. Die Daten und Werte über eine oder mehrere erkannte Klassen können beispielsweise zu den entsprechenden Abschnitten der Kommunikation zugeordnet und im Verfahren berücksichtigt werden. Preferably, the output of one or more auditory messages and one or more sections of the further audio signal are assigned to specific, at least partially different (and at least partially overlapping) time intervals and / or to certain at least partially different (and at least partially overlapping) spatial areas in the living space. In this case, the assignment can take place taking into account one or more of the said priority measures. For example, a simplified, rudimentary determination of the data or values of a content-related feature of at least one section of said communication suffices, without the corresponding ascertained data or values reflecting (must) the content of the communication. For example, the content-related feature of a section of the communication, for example according to a pattern recognition method, stored similarity criteria, association rules can be classified into approximately 4-64 predefined classes (categories). It is also possible to distinguish between several types of said transactions within the communication. For example, the data and values about one or more recognized classes may be associated with the corresponding sections of the communication and taken into account in the method.
Gemäß einer zweckmäßigen Ausgestaltung repräsentiert zumindest ein Parameter der besagten Kommunikation eine Richtung zumindest eines Abschnitts der Kommunikation bzw. eine Richtung die in einem unmittelbaren Zusammenhang mit der besagten Kommunikation oder mit einer darauffolgenden oder weiteren, für die nahe Zukunft prädizierten, Kommunikation steht. Mit anderen Worten kann zumindest ein Richtungsparameter zumindest eines Abschnitts einer Kommunikation ermittelt und berücksichtigt werden, die eine Fortsetzung der aktuellen Kommunikation oder einer weiteren prädizierten Kommunikation entspricht.According to an expedient embodiment, at least one parameter of said communication represents a direction of at least a portion of the communication or a direction that is directly related to said communication or to a subsequent or further communication predicted for the near future. In other words, at least one direction parameter of at least one section of a communication can be determined and taken into account, which corresponds to a continuation of the current communication or another predicated communication.
Es kann zumindest ein Richtungsparameter einer sprachlichen Kommunikation in Bezug auf zumindest eine Person im Wohnraum ermittelt, insbesondere prädiziert werden. Daraufhin können mehrere Parameter der zumindest einen auditiven Meldung und/oder eines Abschnitts des weiteren auszugebenden Audiosignals, insbesondere jeweilige akustische und/oder inhaltliche Parameter, abhängig von zumindest einem, zumindest mit einer gewissen Wahrscheinlichkeitsmaß zutreffenden, Richtungsparameter der Kommunikation zwischen zumindest zwei Personen im Wohnraum und/oder der entsprechender akustischen Parameter, bestimmt, angepasst, gesteuert werden. Beispielsweise kann als ein Faktor für ein Bestimmen eines Parameters der auditiven Meldung auch einer Nennung eines oder mehreren Empfänger der Kommunikationsbotschaft beim Namen, eines vorgespeicherten oder im Verfahren gelernten (häufig in Bezug auf eine Person verwendeten) Rufnamen, und/oder Schlüsselwörter die einen oder mehrere Adressaten bei Kommunikation bezeichnen, wie „an alle“, „hört alle zu“, „Kinder“, „Ihr auf der Couch“, „Ihr am Balkon“, und dergleichen genutzt werden. Dabei kann das besagte Erkennen eines oder mehrerer im Voraus definierter oder im Voraus eingelernter Schlüsselwörter und/oder körperlichen Regungen und/oder Empfänger einer Kommunikationstransaktion, die eine Richtung der Kommunikation kennzeichnen erfolgen, und daraufhin eine zweckmäßige Anpassung eines oder mehrerer Parameter eines Abschnitts einer auditiven Meldung erfolgen. Bevorzugt wird der zumindest ein Raumklangparameter in Bezug auf die betreffende, auf Basis der auditiven Meldung und/oder des weiteren Audiosignals erzeugte Schallwellen bestimmt oder angepasst.At least one direction parameter of a linguistic communication with respect to at least one person in the living space can be determined, in particular predicated. Thereupon, a plurality of parameters of the at least one auditory message and / or of a portion of the further audio signal to be output, in particular respective acoustic and / or content parameters, depending on at least one, at least with a certain probability measure applicable, directional parameters of communication between at least two people in the living room and / or the corresponding acoustic parameters, determined, adjusted, controlled. For example, as a factor for determining a parameter of the auditory message, also mentioning one or more recipients of the communication message by name, a pre-stored or learned in the method (often used with respect to a person) call names, and / or keywords one or more Addressees of communication such as "to all", "listen to all", "children", "your on the couch", "your on the balcony", and the like can be used. In doing so, the said recognition of one or more keywords defined in advance or learned in advance and / or physical impulses and / or recipients of a communication transaction identifying a direction of the communication, and then an appropriate adaptation of one or more parameters of a portion of an auditory message respectively. Preferably, the at least one surround parameter is determined or adjusted with respect to the relevant sound waves generated on the basis of the auditory message and / or the further audio signal.
Der zumindest ein Richtungsparameter der besagten Kommunikation kann repräsentierend sein für die Richtung, in die die Kommunikation, bzw. ein bestimmter Abschnitt der Kommunikation geführt wird, beispielsweise repräsentierend sein für eine oder mehrere Richtungen zwischen einem oder mehreren Sprechern und einem oder mehreren Zuhörern bzw. der Raumbereiche die mit einem erhöhten Wahrscheinlichkeitsmaß einen „Sprecher“ und/oder „Zuhörer“ bzw. einen „Sprecher und Zuhörer“ umfassen. Für unterschiedliche Abschnitte der Kommunikation, die z.B. unterschiedlichen Transaktionen entsprechen, können unterschiedliche Richtungsparameter ermittelt werden. Zu dem Richtungsparameter kann auch ein Parameter gehören, der einen bestimmten, insbesondere zu einem bestimmten Sitzplatz korrespondierenden, Raumbereich, als einen Raumbereich des „Sprechers“, als einen Raumbereich des „Zuhörers“ oder als einer Raumbereich als „Sprecher und Zuhörer“ kennzeichnet. Zu dem Richtungsparameter kann auch ein Parameter gehören, der kennzeichnend ist dafür, ob eine Kommunikation einseitig, beidseitig oder multidirektional geführt wird oder (bei der Prädiktion des Parameters) demnächst geführt werden wird. Dabei kann beispielsweise unterschieden werden, ob es sich bei der laufenden oder prädizierten auditiven Kommunikation um ein Monolog oder Dialog handelt. Ferner kann der Richtungsparameter auch kennzeichnend sein für eine Kommunikation, die (von einem „Sprecher“) mit einem Mobiltelefon oder Freisprecheinrichtung geführt wird und/oder für keine bzw. an keine weitere im Wohnraum anwesende Personen bestimmt bzw. gerichtet ist. Beispielsweise kann für die besagte Kommunikation, an der zumindest drei Personen beteiligt sind, 1-6 unterschiedliche Richtungsparameter ermittelt und berücksichtigt werden.The at least one directional parameter of said communication may be representative of the direction in which the communication, or a particular portion of the communication, is conducted, for example representing one or more directions between one or more speakers and one or more listeners Spaces with an increased probability measure a "speaker" and / or "listener" or a "speaker and listener" include. For different sections of communication, e.g. correspond to different transactions, different directional parameters can be determined. The directional parameter may also include a parameter that identifies a particular room area corresponding in particular to a particular seat, as a room area of the "speaker", as a room area of the "listener" or as a room area as "speaker and listener". The directional parameter may also include a parameter that is indicative of whether a communication is one-way, two-way, or multidirectional, or (in the prediction of the parameter) will soon be performed. For example, a distinction can be made as to whether the ongoing or predicted auditory communication is a monologue or dialogue. Furthermore, the directional parameter may also be indicative of a communication which is conducted (by a "speaker") with a mobile telephone or hands-free device and / or intended for no or no other persons present in the living space. For example, for the said communication in which at least three persons are involved, 1-6 different directional parameters are determined and taken into account.
Ein Richtungsparameter kann beispielsweise Werte repräsentieren, die Raumbereiche innerhalb des Wohnraums, Winkelwerte, Raumwinkel, etc. und/oder die Beziehungen zwischen diesen, z.B. durch Vektoren, repräsentieren. Bevorzugt umfasst ein Richtungsparameter eine räumliche Verteilung und/oder jeweilige Ausrichtung akustischer Parameter der besagten Kommunikation. Ein oder mehrere Richtungsparameter können beispielsweise kennzeichnend sein für die räumliche Verteilung und/oder Ausbreitung und/oder einer oder mehreren Ausbreitungsrichtungen bzw. Ausbreitungsfunktionen der Schallwellen, die den Abschnitten der besagten Kommunikation entsprechen.For example, a directional parameter may represent values, the space regions within the living space, angle values, solid angles, etc. and / or the relationships between them, eg by vectors. Preferably, a direction parameter comprises a spatial distribution and / or respective alignment of acoustic parameters of the said communication. For example, one or more directional parameters may be indicative of the spatial distribution and / or propagation and / or one or more propagation directions or propagation functions of the sound waves corresponding to the portions of said communication.
Zusätzlich kann der Richtungsparameter der besagten Kommunikation auch ein oder mehrere unterschiedliche Parameter der Kommunikation, insbesondere kennzeichnend für akustische Parameter der auditiven Kommunikation, Parameter der Körpersprache umfassen oder zu einem oder mehreren weiteren (in diesem Dokument beschriebener) Parametern zugeordnet sein. Die akustischen Parameter können z.B. einen Amplitudenverlauf der Kommunikation (z.B. eine Umhüllende des Amplitudenverlaufs) und/oder einen oder mehrere Frequenzparameter (z.B. Energiedichtespektrum oder Umhüllende des Energiedichtespektrums) und/oder einen oder mehrere Phasenparameter (z.B. Phasendifferenzen oder Phasenverschiebungen) und/oder einen zeitlichen Verlauf diverser akustischer Größen und dergleichen kennzeichnen.Additionally, the directional parameter of said communication may also include one or more different parameters of the communication, particularly indicative of acoustic parameters of the auditory communication, body language parameters, or associated with one or more other parameters (described in this document). The acoustic parameters may e.g. an amplitude characteristic of the communication (eg an envelope of the amplitude characteristic) and / or one or more frequency parameters (eg energy density spectrum or envelope of the energy density spectrum) and / or one or more phase parameters (eg phase differences or phase shifts) and / or a temporal course of various acoustic quantities and the like mark.
Bevorzugt kann sich ein Richtungsparameter auf zumindest einen räumlichen Parameter, insbesondere eine Richtung oder mehrere bestimmte Richtungen, beziehen und zumindest einen Parameter einer anderen Art der Kommunikation umfassen oder zu diesem zugeordnet sein, der die zumindest eine (jeweilige) Richtung betrifft. Dabei kann der Richtungsparameter der besagten Kommunikation einen Bezug, z.B. eine Zuordnung oder eine mathematische Funktion, zwischen einer oder mehreren bestimmten Richtungen und einem oder mehreren bestimmten, entsprechenden akustischen Parametern der Kommunikation herstellen.Preferably, a directional parameter may relate to at least one spatial parameter, in particular one direction or several specific directions, and may include or be associated with at least one parameter of another type of communication concerning the at least one (respective) direction. In this case, the directional parameter of said communication may have a reference, e.g. establish an association or mathematical function between one or more particular directions and one or more particular corresponding acoustic parameters of the communication.
Die Erfassung eines oder mehrerer Richtungsparameters der besagten Kommunikation kann mit zwei oder mehreren im Wohnraum betreibbaren Sensoren, z.B. zum System gehörenden Mikrophonen, Bewegungsmeldern und/oder Kameras und/oder Bewegungsmeldern erfolgen. Dabei kann, z.B. die Position eines Sprechers beispielsweise durch den Abgleich der Phasen der mit zwei oder mehreren Mikrophonen erfassten akustischen Schallwellen erfolgen. Auch kann dabei eine Unterscheidung, insbesondere Trennung, der auditiven Kommunikation (das Sprechen) von einem weiteren im Wohnraum hörbaren akustischen Inhalt, z.B. mit Mitteln der Signalverarbeitung erfolgen. Ferner kann ein besagter Richtungsparameter auch abhängig von Sensordaten, einer Historie, zu zumindest einer oder mehreren Kommunikationen, insbesondere abhängig von mehreren unterschiedlichen Kommunikationsvorgängen aus der Vergangenheit (z.B. „Großvater schimpft häufig mit dem Onkel“), einem aktuell erfassten oder prädizierten Parameter einer Szene oder Aktion im Wohnraum ermittelt werden.The detection of one or more directional parameters of said communication may be accomplished with two or more sensors operable in the home, e.g. The system includes microphones, motion detectors and / or cameras and / or motion detectors. Thereby, e.g. the position of a speaker, for example, by adjusting the phases of the detected with two or more microphones acoustic sound waves done. Also, a distinction, in particular separation, of the auditory communication (speaking) of another audible content audible in the living space, e.g. done with means of signal processing. Furthermore, a said directional parameter may also depend on sensor data, a history, on at least one or more communications, in particular depending on several different communication processes from the past (eg "grandfather often scolds the uncle"), a currently detected or predicted parameter of a scene or Action in the living space can be determined.
Ferner kann das Verfahren auf zumindest zwei gleichzeitig bzw. zeitlich überschneidend ablaufende besagte Kommunikationen angewandt werden, wobei das Bestimmen oder Anpassen eines oder mehreren Parameters der zumindest einen auditiven Meldung und/oder des weiteren Audiosignals unter der Berücksichtigung der Parameter der zumindest zwei (etwa im selben Zeitintervall ablaufenden) Kommunikationen erfolgt. Dabei können die zumindest zwei unterschiedlichen Kommunikationen beispielsweise mit unterschiedlichen vorausbestimmten Kriterien und/oder mit unterschiedlichem Einfluss auf einen oder mehrere anzupassende Parameter der zumindest einen auditiven Meldung und/oder des weiteren Audiosignals, berücksichtigt werden. Ferner kann ein Bestimmen oder Anpassen des jeweils zumindest einen Parameters der zumindest zwei unterschiedlichen, insbesondere im selben Zeitintervall mit einer oder mehreren auszugebenden auditiven Meldung auszugebenden weiteren Audiosignals in einer bestimmten, jeweils unterschiedlichen, Weise, z.B. entsprechen unterschiedlichen Varianten des Bestimmens oder Anpassens der Parameter, erfolgen.Furthermore, the method may be applied to at least two concurrently said communications, wherein determining or adjusting one or more parameters of the at least one auditory message and / or the further audio signal taking into account the parameters of the at least two (approximately in the same Time interval expiring) communications takes place. In this case, the at least two different communications, for example with different predetermined criteria and / or with different influence on one or more parameters to be adapted of the at least one auditory message and / or the further audio signal, can be taken into account. Furthermore, determining or adapting in each case the at least one parameter of the at least two different further audio signals to be output in the same time interval with one or more auditory messages to be output in a specific, respectively different, manner, e.g. correspond to different variants of determining or adapting the parameters.
Das Ermitteln des zumindest einen Richtungsparameter der besagten Kommunikation kann im Verfahren abhängig von folgenden, zumindest teilweise sensorisch erfassten und/oder auf Basis der Historiendaten ermittelten Informationen erfolgen:
- - eine Position einer aktuell aktiv kommunizierenden sprechenden Person im Wohnraum, insbesondere einen bestimmten Raumbereich und/oder einen Sitzplatz der sprechenden Person, und/oder
- - eine Position oder mehrere Positionen, insbesondere Raumbereiche und/oder Sitzplätze, der Person oder Personen, an die die Kommunikation (zumindest eine bestimmte Kommunikation oder ein bestimmter Abschnitt der Kommunikation) der aktuell aktiv kommunizierenden sprechenden Person gerichtet ist, und/oder
- - eine oder mehrere räumliche Richtungen, insbesondere als einen oder mehrere Vektoren, in die die Kommunikation (eine bestimmte Kommunikation oder ein bestimmter Abschnitt der Kommunikation), insbesondere mittels Schallwellen und/oder einer gerichteten Körpersprache geführt wird.
- a position of a currently actively communicating speaking person in the living space, in particular a specific space area and / or a seat of the speaking person, and / or
- a position or a plurality of positions, in particular room areas and / or seats, of the person or persons to whom the communication (at least a specific communication or a specific section of communication) of the currently actively communicating speaking person is directed, and / or
- one or more spatial directions, in particular as one or more vectors, into which the communication (a specific communication or a certain portion of the communication) is guided, in particular by means of sound waves and / or directed body language.
Ferner kann zu einem besagten Richtungsparameter ein entsprechendes Erfolgsmaß zugeordnet werden, kennzeichnend eine in der Vergangenheit in eine oder mehrere bestimmte, betreffende Richtungen (bzw. zwischen zumindest zwei bestimmten Raumbereichen) mehr oder minder gut gelungene (nicht oder nur im akzeptablem Maß) gestörte und/oder nicht zufriedenstellend gelungene (gestörte, durch häufiges Nachfragen oder durch bestimmte Körperregungen gekennzeichnete) Kommunikationsabschnitte, z.B. Transaktionen zugeordnet werden. Dabei kann beim Bestimmen oder Anpassen eines Parameters der zumindest einen auditiven Meldung und/oder eines auszugebenden Audiosignals ein oder mehrere jeweilige (in der Vergangenheit zugeordnete) Erfolgsmaße der Kommunikation berücksichtigt werden. Furthermore, a corresponding measure of success can be assigned to a said directional parameter, characterizing in the past one or more specific, relevant directions (or between at least two specific regions of space) more or less well (not or only to an acceptable extent) disturbed and / or or unsatisfactorily successful (disturbed, characterized by frequent inquiries or by certain physical stimuli) communication sections, eg transactions are assigned. In this case, when determining or adapting a parameter of the at least one auditory message and / or an audio signal to be output, one or more respective (in the past assigned) success measures of the communication can be taken into account.
Im Verfahren können auf Basis der Daten aus der Vergangenheit ermittelte Erfolgsmaße der besagten Kommunikation von zumindest einem bestimmten Raumbereich, zu zumindest einem bestimmten Raumbereich, und/oder zwischen zumindest zwei bestimmten Raumbereichen, insbesondere mit bestimmten Richtungsparametern berücksichtigt werden. Dabei kann eine Prädiktion zumindest eines Erfolgsmaßen für ein aktuelles Zeitintervall und/oder für die nahe Zukunft auf Basis der besagten Daten zu den Erfolgsmaßen aus der Vergangenheit erfolgen.In the method, based on the data from the past, success measures of said communication of at least one specific room area, at least one specific room area, and / or between at least two specific room areas, in particular with certain directional parameters, can be taken into account. In this case, a prediction of at least one measure of success for a current time interval and / or for the near future on the basis of the said data on the success measures from the past can take place.
Beispielsweise kann bei einer in der Vergangenheit nicht erfolgreichen Anwendung des Verfahrens, z.B. wenn das entsprechende Erfolgsmaß eines Abschnitts der Kommunikation ohne Anpassen der Parameter der auditiven Meldung oder trotz dem Anpassen der Parameter der auditiven Meldung zumindest statistisch niedrig war, z.B. einen Grenzwert unterschritt, kann daraufhin zu einem weiteren Zeitintervall, insbesondere in Bezug auf die Kommunikation von oder zu bestimmten Raumbereichen, mit bestimmten Richtungsparametern, ein verändertes Anpassen der zumindest einen auditiven Meldung oder eine andere, alternative Variante für das Bestimmen oder Anpassen der Parameter ausgeführt werden.For example, in a past unsuccessful application of the method, e.g. if the corresponding measure of success of a portion of the communication was at least statistically low without adjusting the parameters of the auditory message or despite adjusting the parameters of the auditory message, e.g. If a limit value is undershot, then at a further time interval, in particular in relation to the communication from or to certain areas, with certain directional parameters, a modified adaptation of the at least one auditory message or another alternative variant for the determination or adaptation of the parameters can be carried out ,
Der zumindest eine, im Verfahren bestimmte oder angepasste Parameter der zumindest einer auditiven Meldung berücksichtigt insbesondere, welche Person (oder welcher entsprechender Raumbereich) in einem bestimmten Zeitintervall eine Kommunikationsbotschaft sendet oder senden wird, insbesondere spricht oder sprechen wird, und welche Person oder welche Personen (oder welche oder welche entsprechende Raumbereiche), zumindest potentiell, zuhören und/oder als Empfänger der entsprechenden sprachlichen Botschaft vorgesehen sind, und/oder an einem Zuhören zu dem zumindest einem Abschnitt des auszugebenden Audiosignals voraussichtlich interessiert sind. Dabei kann zumindest ein zeitlicher Parameter und/oder akustischer Parameter der besagten Kommunikation, betreffend einen oder mehrere Abschnitte der Kommunikation in Kombination mit dem Richtungsparameter der betreffenden Abschnitte der Kommunikation, insbesondere bestimmter Transaktionen bzw. Kommunikationsbotschaften ermittelt, insbesondere und berücksichtigt werden.The at least one parameter of the at least one auditory message determined or adapted in the method takes into account, in particular, which person (or which corresponding spatial area) will send or send a communication message, in particular speak or speak, within a specific time interval, and which person or persons ( or which or which corresponding spatial regions), at least potentially, listen and / or are provided as receivers of the corresponding linguistic message and / or are expected to listen to the at least a portion of the audio signal to be output. In this case, at least one temporal parameter and / or acoustic parameter of said communication, relating to one or more sections of the communication in combination with the directional parameter of the relevant sections of the communication, in particular of specific transactions or communication messages can be determined, in particular and taken into account.
Der zumindest eine Parameter der zumindest einer auditiven Meldung kann derart bestimmt werden, dass eine zweckmäßige Hörbarkeit und/oder Interpretierbarkeit der besagten Kommunikation, insbesondere zumindest eines bestimmten Abschnitts der besagten Kommunikation, in zumindest einem oder mehreren bestimmten Raumbereichen des Wohnraums, z.B. einem Raumbereich an dem oder in den sich zumindest ein bestimmter, wahrscheinlicher oder potentieller Zuhörer befindet, und/oder zu bestimmten Zeitintervallen nach bestimmten Kriterien gewährleistet ist.The at least one parameter of the at least one auditory message may be determined such that an appropriate audibility and / or interpretability of said communication, in particular of at least a certain portion of said communication, in at least one or more particular room areas of the living space, e.g. a room area where or in which at least one particular, probable or potential listener is located, and / or which is guaranteed at certain time intervals according to certain criteria.
Ferner kann die ermittelte Anzahl und/oder Verteilung der im Wohnraum anwesenden Personen in bestimmten Raumbereichen oder auf bestimmten Sitzplätzen bzw. Sitzpositionen innerhalb des Wohnraums, beim Ermitteln des zumindest einen Parameters der besagten Kommunikation und/oder beim Bestimmen oder Anpassen des zumindest einen Parameters der zumindest einen auditiven Meldung und/oder des weiteren Audiosignals berücksichtigt werden. Dabei können auch Raumbereiche und/oder Sitzplätze berücksichtigt werden, zu welchen ermittelt wurde, dass sich dort (zumindest mit einer hohen Wahrscheinlichkeit) keine Person befindet. Die Anzahl und/oder Verteilung der im Wohnraum anwesenden Personen kann auch aus statistischen, für den Wohnraum erfassten oder gelernten Daten ermittelt werden. Auf Raumbereiche, wo sich Personen oder bestimmte Personen nie oder lediglich vergleichsweise selten aufhalten, können, insbesondere für zumindest ein Anpassen des Audiosignals oder der zumindest einen auditiven Meldung, insbesondere für diese Personen, außer Acht gelassen werden.Furthermore, the determined number and / or distribution of the persons present in the living space in certain room areas or in certain seats or seating positions within the living space, when determining the at least one parameter of said communication and / or when determining or adjusting the at least one parameter of at least an auditory message and / or the further audio signal are taken into account. Room areas and / or seats may also be taken into account, for which it has been determined that there is (at least with a high probability) no person there. The number and / or distribution of the persons present in the living space can also be determined from statistical data collected or learned for the living space. Space regions where persons or certain persons never or only relatively rarely reside can be disregarded, in particular for at least one adaptation of the audio signal or the at least one auditory message, in particular for these persons.
Auch eine Bewegung zumindest einer Person (eines Sprechers und/oder eines Zuhörers) im Wohnraum und/oder eine prädizierter Raumbereich in dem sich eine Person (ein Sprecher und/oder ein Zuhörer) in einem Zeitintervall in der nahen Zukunft aufhalten wird, können, beispielsweise anhand Sensordaten und/oder Historiendaten ermittelt und berücksichtigt werden.Also, a movement of at least one person (a speaker and / or a listener) in the living space and / or a predicted space area in which a person (a speaker and / or a listener) will be in a time interval in the near future may, for example determined and taken into account using sensor data and / or history data.
Wird beispielsweise festgestellt, dass sich in einem bestimmten Raumbereich und/oder auf einem bestimmten Sitzplatz (zumindest mit einer gewissen Wahrscheinlichkeit) kein Sprecher und/oder Zuhörer aufhält, dann kann beim Bestimmen oder Anpassen des zumindest einen Parameters der auditiven Meldung der entsprechender Raumbereich bzw. Sitzplatz unberücksichtigt bleiben oder als explizit irrelevant berücksichtigt werden. Insbesondere kann für diese Raumbereiche bzw. Sitzplätze keine Erreichung der Optimierungskriterien oder abweichende Optimierungskriterien angestrebt werden. Demgegenüber kann ein besseres Anpassen, insbesondere Erreichung zumindest eines Optimierungskriteriums für einen oder mehrere der restlichen, Raumbereiche und/oder Sitzplätze ausgeführt werden, über die (explizit) ermittelt wurde und/oder mit einer gewissen Wahrscheinlichkeit ermittelt oder angenommen wird, dass sich dort zumindest ein „Sprecher“ und/oder zumindest ein „Zuhörer“ und/oder zumindest ein „Sprecher und Zuhörer“ aufhalten.If, for example, it is found that there is no speaker and / or listener in a certain room area and / or seat (at least with a certain probability), then the corresponding room area or room can be used when determining or adapting the at least one parameter of the auditory message. Seating can be disregarded or considered as explicitly irrelevant. In particular, it is not possible to achieve the optimization criteria or deviating optimization criteria for these room areas or seats. In contrast, a better adaptation, in particular achievement of at least one optimization criterion for one or more of the remaining, room areas and / or seats can be carried out, was (explicitly) determined and / or determined or assumed with a certain probability that at least one there "Speaker" and / or at least one "listener" and / or at least one "speaker and listener" stop.
Im Ergebnis erfolgt abhängig von den ermittelten Informationen beispielsweise ein Bestimmen bzw. Anpassen eines oder mehrerer Parameter der zumindest einer auditiven Meldung und/oder des weiteren Audiosignals, der oder die kennzeichnend sind für die räumliche Aufteilung der entsprechenden akustischen Schallwellen die im Zusammenhang mit den entsprechenden Inhalten der zumindest einer auditiven Meldung und/oder des weiteren Audiosignals im Wohnraum erzeugt werden. Auch können dabei ein oder mehrere auszugebenden unterschiedliche (von bestimmten Kriterien gekennzeichnete) Abschnitte eines oder mehrerer Audiosignale und/oder der einen oder mehreren auditiven Meldungen unterschiedlich (ggf. entsprechend unterschiedlicher Varianten) angepasst werden, wobei eine angepasste, insbesondere zu zumindest einem geltenden oder gewählten Optimierungskriterium passende, Steuerung, insbesondere Regelung, der entsprechenden akustischen Schallwellen bzw. eines oder mehrerer Schallwellenmuster im Wohnraum ausgeführt wird.As a result, depending on the determined information, for example, a determination or adaptation of one or more parameters of the at least one auditory message and / or the further audio signal, which are indicative of the spatial distribution of the corresponding acoustic sound waves in connection with the corresponding contents the at least one auditory message and / or the further audio signal are generated in the living room. Also, one or more different sections (of particular criteria) of one or more audio signals and / or the one or more auditory messages to be output may be adapted differently (possibly according to different variants), whereby an adapted, in particular at least one valid or selected one Optimization criterion suitable, control, in particular control, the corresponding acoustic sound waves or one or more sound wave pattern is executed in the living room.
Die Ausgabe der zumindest einen auditiven Meldung von denen es nicht nur eine, sondern auch mehrere gegeben kann und/oder zumindest eines (bestimmten) Abschnitts oder mehrerer bestimmter (unterschiedlicher) Abschnitte des weiteren Audiosignals, wird in einem stark vereinfachten Fall durch die Auswahl der Lautsprecher, Auswahl eine Kombination von Lautsprechern und/oder einer Anpassung der Balance und/oder einer Zeitverzögerung (von einigen Millisekunden) zwischen den Ausgaben aus den zumindest zwei im Wohnraum vorhandenen oder virtuell erzeugten Lautsprechern, erfolgen.The output of the at least one auditory message of which not only one but also several can be given and / or at least one (specific) section or several specific (different) sections of the further audio signal, is in a greatly simplified case by the selection of the loudspeakers , Selecting a combination of loudspeakers and / or an adjustment of the balance and / or a time delay (of a few milliseconds) between the outputs from the at least two loudspeakers present or virtually generated in the living space.
Weiterhin können alternativ oder zusätzlich Phasenparameter zumindest einer Signalkomponente zu einem Abschnitt des mit der auditiven Meldung korrespondierenden Audiosignals, derart angepasst werden, dass, bei zumindest einer Person im Wohnraum die Wahrnehmung erzeugt wird, dass sich eine Klangquelle aus der die zumindest eine auditiven Meldung und/oder ein bestimmter Abschnitt des weiteren Audiosignals ausgegeben wird, in einer bestimmen Position und/oder in einer bestimmten Richtung und/oder in einer bestimmten Entfernung befindet. Es können auch derartige (virtuelle) Klangquellen erzeugt werden, die sich (in der subjektiven Wahrnehmung zumindest einer Person im Wohnraum) außerhalb des Wohnraums, z.B. hinter einer Wand, befinden.Furthermore, alternatively or additionally, phase parameters of at least one signal component to a section of the audio signal corresponding to the auditory message can be adjusted such that, if at least one person in the living space is perceived, a sound source emerges from which the at least one auditory message and / or or a certain portion of the further audio signal is output, in a certain position and / or in a certain direction and / or at a certain distance. It is also possible to generate such (virtual) sound sources which are located (in the subjective perception of at least one person in the living space) outside the living space, e.g. behind a wall.
Beispielsweise kann sich die Klangquelle aus der zumindest ein (nach bestimmten Kriterien gewählter) Abschnitt des weiteren Audiosignals und/oder eine (nach bestimmten Kriterien gewählte) auditive Meldung bzw. ein Abschnitt der auditiven Meldung ausgegeben wird, abhängig von einem Richtungsparameter der besagten Kommunikation zwischen zumindest zwei Personen virtuell verschoben, entfernt, näher gebracht oder bewegt werden. Dabei kann zumindest eine körperliche Haltung und/oder eine Geste zumindest einer Person im Wohnraum mit einem Sensor, z.B. mit einer Kamera erkannt und berücksichtigt werden. Z.B. kann eine Zuwendung des Kopfes einer Person oder eine Körperdrehung und/oder ein Augenkontakt zu einer anderen Person erkannt und, z.B. beim Erzeugen einer Klangquelle zur Ausgabe zumindest einer auditiven Meldung, berücksichtigt werden. Dabei kann der eine oder mehrere Parameter der zumindest einer (von zumindest zwei im Wohnraum erzeugten) Klangquellen abhängig von zumindest einem Parameter kennzeichnend eine relativen körperliche Haltung, Pose, Kopfposition(en) von zumindest einer Person (zu zumindest einer Person oder Raumbereich), gewählt werden. Bevorzugt werden die Parameter kennzeichnend eine relativen körperliche Haltung, Pose, Kopfposition(en) von zumindest zwei anwesenden, insbesondere kommunizierenden, Personen in Relation zueinander oder zu den jeweiligen Raumbereichen berücksichtigt.By way of example, the sound source may be output from the at least one (selected according to specific criteria) section of the further audio signal and / or a (selected by specific criteria) auditory message or a portion of the auditory message, depending on a directional parameter of said communication between at least Two people are virtually moved, removed, brought closer or moved. In this case, at least one physical posture and / or gesture of at least one person in the living space can be detected by a sensor, e.g. be recognized with a camera and taken into account. For example, For example, an affection of a person's head or body rotation and / or eye contact with another person may be recognized and, e.g. when generating a sound source for outputting at least one auditory message. In this case, the one or more parameters of the at least one sound source (of at least two sound sources generated in the living space) may be selected by at least one person (to at least one person or room area) as a function of at least one parameter characterizing a relative physical posture, pose, head position (s) become. Preferably, the parameters are characteristically taken into account relative to each other or to the respective spatial regions of a relative physical posture, pose, head position (s) of at least two present, in particular communicating, persons.
Auch kann im Verfahren abhängig von zumindest einem Parameter der besagten Kommunikation und/oder einem Parameter kennzeichnend für eine erfasste, insbesondere erkannte Szene, Bewegung, Aktion ein wahrnehmbarer Eindruck für eine Bewegung zumindest einer Klangquelle erzeugt werden. Beispielsweise kann für zumindest eine (sensorisch erfasste, erkannte oder angenommene Person) der Eindruck der Bewegung durch eine schrittweise Veränderung der Entfernung und/oder Richtung bzw. einer Position in der eine Klangquelle (zu den aufeinanderfolgenden Zeitintervallen) erzeugt werden.Also, depending on at least one parameter of said communication and / or one parameter indicative of a detected, especially recognized scene, movement, action, a perceptible impression for a movement of at least one sound source can be generated in the method. For example, for at least one (sensory detected, recognized or assumed person) the impression of movement may be generated by a stepwise change of the distance and / or direction or position in the one sound source (at the successive time intervals).
Darüber hinaus kann das Bestimmen bzw. Anpassen eines Raumklangparameters auch abhängig von einer ermittelten, aktuellen oder prädizierten oder mit einer gewissen Wahrscheinlichkeit eingeschätzter Position und/oder Ausrichtung und/oder Pose, und/oder Kopfausrichtung einer oder mehrerer Person im Wohnraum erfolgen. Beispielsweise können daraufhin eine oder mehrere virtuellen Klangquellen platziert und/oder bewegt werden und/oder ein akustischer Parameter zumindest einer virtuellen Klangquelle angepasst wird. Bevorzugt kann dabei eine (insgesamt bzw. kumuliert betrachtet) verbesserte Raumklangwahrnehmung abhängig von Position und/oder Ausrichtung und/oder Pose, und/oder Kopfausrichtung zumindest einer Person und/oder einer erkannten Szene, bevorzugt zumindest zwei Personen im Wohnraum erzeugt werden.In addition, the determination or adaptation of a surround sound parameter can also take place depending on a determined, current or predicted or with a certain probability estimated position and / or orientation and / or pose, and / or head orientation of one or more persons in the living space. For example, one or more virtual sound sources may then be placed and / or moved and / or an acoustic parameter is adapted to at least one virtual sound source. In this case, an improved spatial sound perception (overall or cumulatively considered) can preferably be generated in the living space depending on the position and / or orientation and / or pose, and / or head orientation of at least one person and / or one recognized scene, preferably at least two persons.
Gemäß einer zweckmäßigen Ausgestaltung erfolgt das Erzeugen von zumindest zwei unterschiedlichen auditiven Meldungen bzw. der zumindest zwei zumindest teilweise unterschiedlicher Abschnitte der zumindest einen auditiven Meldung, oder einer zumindest einer auditiven Meldung und zumindest eines Abschnitts des weiteren Audiosignals abhängig von dem Richtungsparameter der besagten Kommunikation für einen von zumindest zwei unterschiedlichen Raumbereiche und/oder mit zwei oder mehreren Klangquellen. Dabei kann es sich um zwei unterschiedliche Abschnitte einer auditiven Meldung oder ein oder mehrere weiterverarbeitete Audiosignale auf Basis zumindest einer auditiven Meldung handeln. Die Parameter der zumindest zwei auditiven Meldungen können derart angepasst werden, dass sich eine zweckmäßige Verteilung akustischer Schallwellen, insbesondere bestimmter Schallwellenmuster innerhalb des Wohnraums, insbesondere in bestimmten Raumbereichen, ergibt.According to an expedient embodiment, the generation of at least two different auditory messages or the at least two at least partially different sections of the at least one auditory message, or at least one auditory message and at least a portion of the further audio signal depends on the directional parameter of said communication for one of at least two different room areas and / or with two or more sound sources. These may be two different sections of an auditory message or one or more further processed audio signals based on at least one auditory message. The parameters of the at least two auditory messages can be adapted in such a way that there is an expedient distribution of acoustic sound waves, in particular specific sound wave patterns within the living space, in particular in certain spatial areas.
Gemäß einer zweckmäßigen Ausgestaltung erfolgt eine Ausgabe von zumindest einem Abschnitt des weiteren Audiosignals oder eines oder mehrerer (bestimmter) Kanäle eines weiteren Audiosignals auf zumindest zwei Raumbereiche und/oder Klangquellen abhängig von einem ermittelten Richtungsparameter der besagten Kommunikation und/oder von einem oder mehreren Parametern der zumindest einen auditiven Meldung. Insbesondere kann dabei von einer, beispielsweise in einem Audiosystem bzw. Raumklangsystem des Wohnraums oder in einem mehrkanaligen Audiosignal möglicherweise vorgesehenen Verteilungsvorschrift bzw. Raumklangkodierung abgewichen werden. Mit anderen Worten kann eine bestimmte Verteilung, bzw. nach vorausbestimmten Kriterien veränderbare Verteilung eines ausgegebenen, durch das weitere Audiosignal repräsentierten Inhalts zwischen zumindest zwei zumindest teilweise unterschiedlichen Raumbereichen bzw. Richtungen (im Koordinatensystem des Wohnraums) abhängig von einem oder mehreren Parametern der besagten Kommunikation und/oder von einem oder mehreren Parametern der zumindest einen (etwa im selben Zeitintervall auszugebenden) auditiven Meldung ausgeführt werden.According to an expedient embodiment, at least a portion of the further audio signal or one or more (specific) channels of a further audio signal is output to at least two spatial regions and / or sound sources depending on a determined direction parameter of said communication and / or of one or more parameters of the at least one auditory message. In particular, it is possible to deviate from a distribution rule or surround sound coding possibly provided, for example, in an audio system or surround sound system of the living space or in a multi-channel audio signal. In other words, a certain distribution or predefined criteria variable distribution of an output, represented by the further audio signal content between at least two at least partially different spatial areas or directions (in the coordinate system of the living space) depending on one or more parameters of said communication and / or by one or more parameters of the at least one auditory message (to be output in the same time interval).
Bevorzugt kann eine Verteilung oder eine Umverteilung der zumindest einen auditiven Meldungen, und einem Abschnitt des weiteren Audiosignals, oder zumindest zwei unterschiedlichen auditiven Meldungen, oder zumindest zwei Abschnitten des weiteren Audiosignals entsprechender Schallwellen oder korrespondierender Schallwellenmuster auf zumindest zwei (bestimmte) Raumbereiche des Wohnraums ausgeführt werden. Dabei können die besagten zumindest zwei Raumbereiche bestimmt werden abhängig davon, ob und welche Personen, bestimmte Personen oder Personen zugehörig zu bestimmten Personengruppen sich dort zumindest mit einer erhöhten Wahrscheinlichkeit aufhalten.Preferably, a distribution or a redistribution of the at least one auditory messages, and a portion of the further audio signal, or at least two different auditory messages, or at least two sections of the further audio signal corresponding sound waves or corresponding sound wave pattern can be performed on at least two (certain) space areas of the living space , In this case, the said at least two spatial regions can be determined depending on whether and which persons, certain persons or persons belonging to certain groups of people are there at least with an increased probability.
Auch können Klangquellen oder Schallwellenmuster die mit unterschiedlichen auditiven Meldungen oder auditiven Meldungen aus unterschiedlichen Quellen oder Inhalten korrespondieren, abhängig von dem zumindest einen ermittelten Parameter der Kommunikation gesteuert, insbesondere geregelt, werden.Sound sources or sound wave patterns that correspond to different auditory messages or auditory messages from different sources or contents can also be controlled, in particular regulated, as a function of the at least one determined parameter of the communication.
Insbesondere kann eine sich über die Zeit verändernde räumliche Verteilung der Schallwellen die mit bestimmten auditiven Meldungen und/oder Abschnitten des weiteren Audiosignalen korrespondieren, abhängig von einer zeitlichen Veränderung eines ermittelten Parameters der Kommunikation gesteuert werden. Das Bestimmen oder Anpassen der räumlichen Verteilung eines oder mehrerer Inhalte, z.B. auf zumindest zwei Raumbereiche des Wohnraums oder hörbar aus zumindest zwei Raumbereichen des Wohnraums, kann abhängig von einer erkannten Veränderung des zumindest einen Parameters der besagten Kommunikation gesteuert werden. In diesem Fall kann der zumindest ein Parameter der Kommunikation eine, insbesondere eine bestimmte, Veränderung zumindest eines Parameters, z.B. eines aktuellen oder für eine nahe Zukunft prädizierten, z.B. akustischen Parameters der Kommunikation repräsentieren.In particular, a time-varying spatial distribution of the sound waves which correspond to specific auditory messages and / or sections of the further audio signals can be controlled depending on a temporal change of a determined parameter of the communication. Determining or adjusting the spatial distribution of one or more contents, e.g. to at least two spatial areas of the living space or audibly from at least two spatial areas of the living space, can be controlled depending on a detected change in the at least one parameter of the said communication. In this case, the at least one parameter of the communication can be one, in particular a specific, change of at least one parameter, e.g. of a current or predicted for a near future, e.g. represent the acoustic parameter of the communication.
Insbesondere wird im Verfahren eine subjektiv empfundene Richtung und/oder Entfernung und/oder einer einem bestimmten Inhalt einer auditiven Meldung entsprechenden Klangquelle (als ein subjektiv empfundener Ort, an dem der betreffende Inhalt durch die menschliche akustische Wahrnehmung empfunden wird oder empfunden werden kann), angepasst. Dabei können ein oder mehrere Phasenparameter, insbesondere ein Phasenparameter zumindest einer Signalkomponente eines Teils eines Audiosignals auf Basis der auditiven Meldung, z.B. ein Phasenversatz zu einer weiteren Signalkomponente, die aus zumindest zwei unterschiedlichen im Wohnraum angeordneten physikalischen oder virtuell gebildeten Lautsprechern oder erzeugten Klangquellen ausgegeben wird, bestimmt oder angepasst werden.In particular, in the method, a subjectively perceived direction and / or distance and / or a sound source corresponding to a specific content of an auditory message (as a subjectively perceived location where the content in question is perceived or felt by human auditory perception) are adjusted , In this case, one or more phase parameters, in particular a phase parameter of at least one signal component of a part of an audio signal on the basis of the auditory message, e.g. determining or adjusting a phase offset to a further signal component output from at least two different physically or virtually formed loudspeakers or generated sound sources arranged in the living space.
Die von einer bestimmten Person, insbesondere in einem bestimmten Raumbereich und/oder auf einem bestimmten Sitzplatz im Wohnraum wahrnehmbare Klangquelle, die zumindest einem Teil der auditiven Meldung entspricht, kann dynamisch abhängig von dem zumindest einen Richtungsparameter der sprachlichen Kommunikation platziert, verlagert oder bewegt werden. Dies erfolgt beispielsweise in Kombination mit dem Variieren der Amplitude und/oder der Frequenzparameter der entsprechenden Schallwellen. Die Teile des mit der auditiven Meldung korrespondierenden Audiosignals können beispielsweise abhängig von einem oder mehreren Parametern der besagten Kommunikation an einen oder mehrere unterschiedliche Kanäle eines Raumklangsignals verteilt werden, welches z.B. in einem Heimkino-Format vorliegt und ggf. weitere Inhalte (eine Stimme des Sprechers einer Sendung oder Unterhaltungsprogramms, Hintergrundmusik, sogenannte Atmosphärengeräusche, etc.) trägt. Dabei können bestimmte Inhalte der zumindest einen auditiven Meldung mittels eines kontrollierten Beimischens des entsprechenden Audiosignals zum Audiosignal eines Audiosystems des Wohnraums ausgegeben werden.The perceptible by a specific person, especially in a certain area of space and / or on a particular seat in the living room sound source, the at least part of the can be placed, relocated or moved dynamically depending on the at least one directional parameter of the linguistic communication. This is done, for example, in combination with varying the amplitude and / or the frequency parameters of the corresponding sound waves. The parts of the audio signal corresponding to the auditory message can be distributed, for example, depending on one or more parameters of said communication to one or more different channels of a room sound signal, which is present eg in a home theater format and possibly further content (a voice of the speaker Broadcast or entertainment program, background music, so-called atmospheric sounds, etc.). In this case, certain contents of the at least one auditory message can be output by means of a controlled admixing of the corresponding audio signal to the audio signal of an audio system of the living space.
Darüber hinaus kann eine inhaltliche Verteilung von zwei oder mehrerer auditiver Inhalte auf Lautsprecher oder Klangquellen erzeugt werden, wobei eine gegenseitige Maskierung zumindest eines Abschnitts der besagten Kommunikation und zumindest eines Abschnitts der zumindest einer auditiven Meldung verringert und/oder eine verbesserte akustische Wahrnehmbarkeit und/oder Verständlichkeit durch zumindest eine Person im Wohnraum, z.B. durch zumindest einen (zumindest wahrscheinlichen) Zuhörer, ermöglicht.In addition, a content distribution of two or more auditory contents to loudspeakers or sound sources may be generated, with mutual masking of at least a portion of said communication and at least a portion of the at least one auditory message reduced and / or improved acoustic perceptibility and / or intelligibility by at least one person in the living room, eg by at least one (at least likely) listener.
Alternativ oder zusätzlich kann eine Verteilung eines der zumindest einen auditiven Meldung entsprechenden Audiosignals auf einen oder mehrere (bestimmte) unterschiedliche Kanäle eines, beispielsweise in einem Heimkino-Format vorliegenden oder ermittelten Raumklangsignals, veranlasst werden. Auch können zumindest zwei auditive Meldungen oder zumindest zwei Inhalte zumindest zwei auditiver Meldungen auf unterschiedliche Kanäle eines im Wohnraum auszugebenden Raumklangsignals nach vorausbestimmten Bedingungen verteilt werden.Alternatively or additionally, a distribution of the audio signal corresponding to the at least one auditory message to one or more (certain) different channels of, for example, in a home theater format present or determined spatial sound signal, be caused. Also, at least two auditory messages or at least two contents of at least two auditory messages can be distributed to different channels of a room sound signal to be output in the living room according to predetermined conditions.
Beispielsweise kann durch das Bestimmen eines Parameters (auch) ein Zuordnen, Verteilen oder Umverteilen eines, zu dem zumindest einen (auszugebenden) auditiven Inhalt korrespondierenden, Audiosignals auf unterschiedliche Kanäle eines Raumklangsignals, z.B. in einem Heimkino-Format, veranlasst werden. Beispielsweise kann ein auszugebendes Audiosignal und eine auditive Meldung oder können zumindest zwei auditive Meldungen oder zumindest zwei Inhalte von zumindest zwei auditiver Meldungen auf unterschiedliche Kanäle eines im Wohnraum auszugebenden Raumklangsignals nach vorausbestimmten Bedingungen verteilt werden. Dabei kann beispielsweise ein Inhalt der zumindest einen auditiven Meldung zu einem, bevorzugt zumindest zwei bestimmten (jeweils ausgewählten) Kanälen eines, z.B. über das Audiosystem auszugebenden Audiosignals (in der nach vorausbestimmten Bedingungen zu erfolgender Weise) beigemischt werden.For example, by determining a parameter, (also) assigning, distributing or redistributing an audio signal corresponding to at least one auditory content (to be output) to different channels of a surround sound signal, e.g. in a home theater format. For example, an audio signal to be output and an auditory message or at least two auditory messages or at least two contents of at least two auditory messages to different channels of a room sound signal to be output in the living space can be distributed according to predetermined conditions. In this case, for example, a content of the at least one auditory message can be assigned to one, preferably at least two specific (respectively selected) channels of a, e.g. be added via the audio system to be output (in the manner to be carried out according to predetermined conditions).
Beispielsweise kann auch eine Gewichtung und/oder eine räumliche Verlagerung und/oder Bewegung einzelner Teile bzw. Inhalte zumindest einer auditiven Meldung und/oder des weitere Audiosignals, die unterschiedlichen Kanälen eines Raumklangsignals entsprechen, abhängig von den Parametern der besagten Kommunikation zwischen zumindest zwei Personen verändert werden.For example, a weighting and / or a spatial displacement and / or movement of individual parts or contents of at least one auditory message and / or the further audio signal corresponding to different channels of a surround sound signal, depending on the parameters of said communication between at least two people changed become.
Darüber hinaus kann eine inhaltliche Verteilung einer auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals auf Lautsprecher oder Klangquellen erzeugt werden, die eine gegenseitige Störung oder Maskierung zumindest eines Abschnitts der Kommunikation und zumindest eines der auditiven Meldung verringert und/oder eine verbesserte akustische Wahrnehmbarkeit und/oder Verständlichkeit durch zumindest eine Person im Wohnraum, z.B. durch zumindest einen (zumindest wahrscheinlichen) Zuhörer, angestrebt wird. Beispielsweise kann die zumindest eine auditive Meldung zu den zumindest zwei bestimmten (jeweils ausgewählten) Kanälen eines, z.B. über das Audiosystem auszugebenden Audiosignals (in der nach vorausbestimmten Bedingungen zu erfolgender Weise) beigemischt werden. Beispielsweise kann eine sich über die Zeit verändernde räumliche Verteilung der Schallwellen oder ein oder mehrere bestimmte Schallwellenmuster die mit bestimmten Abschnitten des weiteren Audiosignals und/oder mit zumindest einer auditiven Meldung korrespondieren, abhängig von einer zeitlichen Veränderung eines ermittelten Parameters der Kommunikation gesteuert werden.In addition, a content distribution of an auditory message and / or a portion of the further audio signal to loudspeakers or sound sources can be generated, which reduces mutual interference or masking of at least a portion of the communication and at least one of the auditory messages and / or an improved acoustic perceptibility and / or understandability by at least one person in the living room, eg by at least one (at least likely) listener, is sought. For example, the at least one auditory message may be sent to the at least two particular (each selected) channels of, e.g. be added via the audio system to be output (in the manner to be carried out according to predetermined conditions). For example, a time-varying spatial distribution of the sound waves or one or more specific sound wave patterns corresponding to certain portions of the further audio signal and / or at least one auditory message may be controlled depending on a time variation of a determined parameter of the communication.
Gemäß einer zweckmäßigen Ausgestaltung umfasst das Verfahren eine Auswertung, insbesondere Analyse der besagten Kommunikation auf das Vorhandensein eines Satzfragments einer vorgegebenen Art, insbesondere vorgegebenen Satzfragments, oder einer Frage und/oder einer (daraufhin) in der Zukunft erwarteten Antwort. Beispielsweise kann es ein Satzfragment sein der (in der vorliegenden Sprache) eine Frage bedeutet und/oder kennzeichnend ist für eine (daraufhin) in der Zukunft erwartete Antwort. Im positiven Fall wird ein, insbesondere vorausschauendes, Anpassen der bislang verarbeiteten Richtungsparameter der besagten Kommunikation durchgeführt. Insbesondere erfolgt eine Umkehrung des zumindest einen bisher ermittelten bzw. verarbeiteten Richtungsparameters der Kommunikation. Bei der Umkehrung des Richtungsparameters kann z.B. ein bisher als ein „Zuhörer“ repräsentierter Raumbereich (nachfolgend) als „Sprecher“ kennzeichnet werden und/oder ein bisher als „Sprecher“ repräsentierter Raumbereich (nachfolgend) als ein „Zuhörer“ gekennzeichnet werden. Konkret kann ein solcher Satzfragment als eine Transaktion einer bestimmten Art bzw. Kategorie erkannt werden und mit oder ohne eine Erkennung eines Personennamens, Spitznamens, Rufnamens, einer sonstigen Bezeichnung der Person und mit oder ohne eine Erkennung einer fragenden Intonation, berücksichtigt werden.According to an expedient embodiment, the method comprises an evaluation, in particular analysis of the said communication for the presence of a sentence fragment of a predetermined type, in particular predetermined sentence fragments, or a question and / or a (subsequently) expected answer in the future. For example, it may be a sentence fragment that (in the present language) is a question and / or is indicative of a (subsequently) expected response. In the positive case, a, in particular anticipatory, adaptation of the previously processed directional parameters of the said communication is carried out. In particular, there is a reversal of the at least one previously determined or processed direction parameter of the communication. In the reversal of the directional parameter, for example, a space area previously represented as a "listener" (hereinafter) may be referred to as a "speaker". and / or a space area previously represented as a "speaker" (hereafter) may be identified as a "listener". Specifically, such a sentence fragment may be recognized as a transaction of a particular type and category, with or without recognition of a personal name, nickname, nickname, other name of the person, and with or without recognition of a questioning intonation.
Dabei kann die erwartete Richtung der weiteren bzw. einer nachfolgenden Kommunikation, beispielsweise zumindest in Bezug auf eine der nachfolgenden Transaktionen, prädiziert und berücksichtigt werden. Wenn z.B. ermittelt wird, dass eine Frage von einer bestimmten Person oder Person aus einem bestimmten Raumbereich an eine andere (bestimmte) Person oder Person aus einem anderen Raumbereich gerichtet ist, und daraufhin nach dem Beenden der Frage von einer entsprechenden Veränderung, insbesondere Umkehrung des Richtungsparameters der Kommunikation ausgegangen. Fragen innerhalb der sprachlichen Kommunikation können (je nach benutzter, eingestellten Sprache) anhand der für Fragen typischen Reihenfolge der Wörter und/oder einer für Fragen typischen Intonation, z.B. in Verbindung mit der Nennung des Namens einer Person, erkannt werden. Darüber hinaus kann der Empfänger der Frage abhängig von einem Parameter der Szene, Aktion, seiner körperlichen Reaktion auf eine Transaktion, z.B. Transaktion einer bestimmten Art und/oder einer körperlichen Zuwendung bestimmt werden.In this case, the expected direction of further or a subsequent communication, for example, at least with respect to one of the subsequent transactions, predicted and taken into account. If e.g. determining that a question from a particular person or person from a particular room area is directed to another (specific) person or person from another room area, and then after completing the question of a corresponding change, in particular reversing the directional parameter of the communication went out. Questions within the linguistic communication may (depending on the language used) be based on the order of words typical of questions and / or a questioning intonation, e.g. in connection with the naming of a person's name. In addition, the recipient of the question may depend on a parameter of the scene, action, his physical response to a transaction, e.g. Transaction of a particular type and / or a physical affection.
Ferner können im Verfahren auch Eigenschaften der Ausbreitung, Dämpfung, Reflektion akustischer Schallwellen im Wohnraum, insbesondere der Schallwellen aus mehreren unterschiedlichen Frequenzbereichen, berücksichtigt werden. Dabei können die entsprechenden Parameter, z.B. ein Datensatz repräsentierend ein akustisches Modell des Wohnraums ermittelt, eingelesen und/oder beim Bestimmen oder Anpassen eines oder mehrerer Parameter der besagten Auditiven Meldung und/oder eines Abschnitts des weiteren auszugebenden Audiosignals berücksichtigt werden. Beispielsweise können die Parameter repräsentierend eine akustische Trennung (Dämpfung, Reflektion, Phasenverschiebung) zwischen zumindest teilweise akustisch getrennten Teilen des Wohnraums, z.B. zwischen benachbarten Zimmern, Zimmer und ein angeschlossener Gang, etc. berücksichtigt werden. In einem vereinfachten Fall können z.B. Daten auf Basis einer sogenannten YPAO - Einmessung oder einer erweiterten Messung etwa nach dem Prinzip von YPAO berücksichtigt werden.Furthermore, properties of propagation, attenuation, reflection of acoustic sound waves in the living space, in particular of the sound waves from a plurality of different frequency ranges, can also be taken into account in the method. The corresponding parameters, e.g. a record representative of an acoustic model of the living space is determined, read and / or taken into account in determining or adjusting one or more parameters of said auditory message and / or a portion of the further audio signal to be output. For example, the parameters may represent an acoustic separation (attenuation, reflection, phase shift) between at least partially acoustically separated parts of the living space, e.g. between adjacent rooms, rooms and a connected corridor, etc. are taken into account. In a simplified case, e.g. Data based on a so-called YPAO - measurement or an extended measurement, for example, according to the principle of YPAO be considered.
Gemäß einer zweckmäßigen Ausgestaltung erfolgt eine Ausgabe eines Inhalts der zumindest einen auditiven Meldung in einer alternativen Form oder eine Ausgabe einer die auditive Meldung begleitenden Information, abhängig von dem zumindest einen Parameter der besagten Kommunikation. Dabei kann abhängig von einem oder mehreren Parametern der besagten Kommunikation ein oder mehrere Parameter ermittelt werden, die die Ausgabe eines Inhalts der zumindest einen auditiven Meldung (oder zumindest eines Abschnitts der auditiven Meldung in einem bestimmten Zeitintervall) in einer alternativen Form oder die Ausgabe einer die auditive Meldung begleitenden Information veranlassen, insbesondere steuern. Bevorzugt wird zumindest ein Steuerungssignal erzeugt, der eine Veränderung der Form der auditiven Meldung und/oder die Ausgabe einer begleitenden Information veranlasst.According to an expedient embodiment, an output of a content of the at least one auditory message takes place in an alternative form or an output of an information accompanying the auditory message, depending on the at least one parameter of the said communication. In this case, depending on one or more parameters of the said communication, one or more parameters may be determined which include the output of a content of the at least one auditory message (or at least a portion of the auditory message in a particular time interval) in an alternative form or the output of an auditory message accompanying information, in particular control. Preferably, at least one control signal is generated, which causes a change in the form of the auditory message and / or the output of accompanying information.
Beispielsweise wird ein Parameter zur Ausgabe einer einen Abschnitt der auditiven Meldung begleitenden Information, insbesondere ein Parameter einer Text-, Bild- oder Videoausgabe, abhängig von dem ermittelten Parameter der besagten Kommunikation gesteuert. Ein solcher Abschnitt der begleitenden Information kann auch einem Inhalt der auditiven Meldung, z.B. Sprachmitteilung, in einer anderen oder alternativen Form (zumindest sinngemäß) entsprechen, oder einen Teil der begleitenden Information umfassen. Beispielsweise kann zusammen mit der zumindest einen auditiven Meldung auch eine begleitende Information erzeugt werden, die z.B. eine zu einem Teil der auditiven Meldung entsprechende Information, oder eine mit einem Teil der mit der auditiven Meldung korrespondierenden Information repräsentiert. Eine solche begleitende Information kann eine in einer visuellen Form oder in einer textuellen Form (als eine Art „Untertitel“ oder eine „Textspur“) darstellbare Daten umfassen. Die begleitende Information kann abhängig von dem zumindest einem Parameter der besagten Kommunikation, beispielsweise je nach Verlauf der Kommunikation, auch nur abschnittsweise ausgegeben werden. Ein Parameter einer solchen die auditive Meldung begleitenden Information kann abhängig von dem Parameter der besagten Kommunikation gesteuert werden.For example, a parameter for outputting information accompanying a portion of the auditory message, in particular a parameter of a text, image or video output, is controlled depending on the determined parameter of said communication. Such a portion of the accompanying information may also be a content of the auditory message, e.g. Voice message, in another or alternative form (at least analogously), or comprise part of the accompanying information. For example, together with the at least one auditory message, accompanying information may also be generated, e.g. an information corresponding to a part of the auditory message, or one representing a part of the information corresponding to the auditory message. Such accompanying information may include data representable in a visual form or in a textual form (as a "subtitle" or "text track"). Depending on the at least one parameter of said communication, for example depending on the course of the communication, the accompanying information may also be output only in sections. A parameter of such information accompanying the auditory message may be controlled depending on the parameter of said communication.
Alternativ oder zusätzlich kann im Verfahren eine Information, bevorzugt eine von dem Inhalt der auditiven Meldung abhängige Information, ersatzweise zu einem mobilen Anwendergerät einer Person übermittelt werden und/oder über ein vernetztes mobiles Anwendergerät einer Person im Wohnraum ausgegeben werden. Beispielsweise wenn im Wohnraum eine Kommunikation mit einen oder mehreren bestimmten oder bestimmte Grenzwerte übersteigenden Parametern läuft oder prädiziert wurde, kann die Ausgabe der zumindest einen auditiven Meldung oder eine mit einem Teil der zumindest einen auditiven Meldung korrespondierenden Information mittels eines mobilen Anwendergeräts einer Person im Wohnraum veranlasst werden.Alternatively or additionally, in the method, information, preferably an information dependent on the content of the auditory message, can be transmitted to a mobile user device of a person and / or output via a networked mobile user device of a person in the living space. For example, if a communication with one or more parameters exceeding certain limits is or has been predicted in the living space, the output of the at least one auditory message or information corresponding to a part of the at least one auditory message can be initiated by a mobile user device in the living space become.
Gemäß einer zweckmäßigen Ausgestaltung wird ein oder mehrere Parameter repräsentierend eine spektrale Eigenschaft, insbesondere ein Frequenzdichtespektrum des zumindest eines der auditiven Meldung entsprechenden (auf Basis der auditiven Meldung erzeugten) Audiosignals oder eine Wellenlängeneigenschaft der zumindest einen auditiven Meldung entsprechender Schallwellen oder Schallwellenmuster, abhängig von dem zumindest einen Parameter der besagten Kommunikation bestimmt oder angepasst. Dabei kann eine spektrale Eigenschaft, insbesondere ein Frequenzdichtespektrum zumindest eines Abschnitts des weiteren Audiosignals und die spektrale Eigenschaft, insbesondere ein Frequenzdichtespektrum eines der zumindest einen auditiven Meldung entsprechenden (auf Basis der auditiven Meldung erzeugten) Audiosignals, jeweils unterschiedlich bzw. auf eine unterschiedliche Weise bestimmt oder angepasst werden. Bzw. kann eine spektrale Eigenschaft, insbesondere ein oder mehrere Wellenlängenbereiche der Schallwellen die mit der zumindest einen auditiven Meldung korrespondieren (auf Basis der auditiven Meldung erzeugt werden) und die spektrale Eigenschaft, insbesondere ein oder mehrere Wellenlängenbereiche der Schallwellen die mit einem Abschnitt des weiteren Audiosignals korrespondieren (auf Basis des Abschnitts des weiteren Audiosignals erzeugt sind) unterschiedlich bzw. auf eine unterschiedliche Weise bestimmt oder angepasst werden. Beispielsweise kann die spektrale Eigenschaft, insbesondere ein Frequenzdichtespektrum eines Abschnitts des weiteren Audiosignals bzw. der entsprechenden in einem Raumbereich des Wohnraums erzeugter Schallwellen derart angepasst werden, dass eine (vergrößerte) Trennung zwischen den (im gleichen Zeitintervall auszugebenden) Frequenzparametern bzw. Wellenlängenparametern eines Abschnitts der zumindest einen auditiven Meldung, bewirkt wird. Mit anderen Worten kann sozusagen ein zueinander komplementäres Anpassen der entsprechenden Parameter der zumindest einer auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals ausgeführt werden. According to an expedient refinement, one or more parameters is representative of a spectral property, in particular a frequency density spectrum of the at least one audio signal (generated on the basis of the auditory message) or a wavelength characteristic of the at least one auditory report of corresponding sound waves or sound wave patterns, depending on the at least determines or adjusts a parameter of said communication. In this case, a spectral property, in particular a frequency density spectrum of at least one section of the further audio signal and the spectral property, in particular a frequency density spectrum of an audio signal corresponding to the at least one auditory message (generated on the basis of the auditory message), can be determined differently or in a different manner be adjusted. Respectively. a spectral property, in particular one or more wavelength ranges of the sound waves which correspond to the at least one auditory message (generated on the basis of the auditory message) and the spectral property, in particular one or more wavelength ranges of the sound waves which correspond to a portion of the further audio signal ( generated on the basis of the portion of the further audio signal) are determined differently or in a different way or adapted. For example, the spectral property, in particular a frequency density spectrum of a section of the further audio signal or of the corresponding sound waves generated in a spatial area of the living space, can be adjusted such that an (enlarged) separation between the (in the same time interval to be output) frequency parameters or wavelength parameters of a portion of at least one auditory message is effected. In other words, a complementary adaptation of the corresponding parameters of the at least one auditory message and / or a section of the further audio signal can be carried out, so to speak.
Beispielsweise erfolgt ein derartiges Erzeugen oder eine derartige Abwandlung des Audiosignals der zumindest einen auditiven Meldung, dass Signalkomponenten des Audiosignals die eine (hohe) Überdeckung mit dem Frequenzbereich einer menschlicher Stimme, insbesondere mit der zumindest einen Stimme innerhalb der besagten Kommunikation aufweisen, in Frequenzkomponenten, die eine geringere Überdeckung mit dem Frequenzbereich einer menschlicher Stimme, insbesondere mit der zumindest einen Stimme innerhalb der besagten Kommunikation aufweisen, abgewandelt werden.For example, such generating or modifying the audio signal of the at least one auditory message that signal components of the audio signal have a (high) coverage with the frequency range of a human voice, in particular with the at least one voice within said communication, in frequency components, the have a lower coverage with the frequency range of a human voice, in particular with the at least one voice within the said communication, modified.
Bevorzugt können die Frequenzkomponenten des weiteren Audiosignals und/oder des Audiosignals der zumindest einen auditiven Meldung die eine Überdeckung mit dem Frequenzbereich einer menschlichen Stimme, insbesondere mit der Stimme des Sprechers innerhalb der besagten Kommunikation, aufweisen, hinsichtlich ihrer Frequenzparameter verändert werden. Beispielsweise wird ein oder mehrere Parameter der zumindest einen auditiven Meldung derart bestimmt oder angepasst, dass das ihr entsprechendes Audiosignals überwiegend Frequenzkomponenten bzw. Frequenzbänder umfasst, die von einer oder mehreren im Wohnraum hörbaren Stimmen abhängt, insbesondere eine verringerte Überdeckung mit dem Frequenzbereich einer menschlichen Stimme, insbesondere mit der Stimme des Sprechers innerhalb der besagten Kommunikation, aufweist.Preferably, the frequency components of the further audio signal and / or the audio signal of the at least one auditory message which have an overlap with the frequency range of a human voice, in particular with the voice of the speaker within said communication, can be changed with respect to their frequency parameters. By way of example, one or more parameters of the at least one auditory message are determined or adapted in such a way that the audio signal corresponding thereto predominantly comprises frequency components or frequency bands that depend on one or more voices audible in the living space, in particular a reduced coverage with the frequency range of a human voice, especially with the voice of the speaker within said communication.
Auch können die Frequenzkomponenten (ggf. nachträglich) einer Frequenzbandanpassung oder einer zweckmäßigen Frequenzbandkompression unterzogen werden. Dabei können die besagten Frequenzkomponenten, die eine (hohe oder besonders hohe) Überdeckung mit dem Frequenzbereich einer menschlichen Stimme, insbesondere mit der (bestimmten bzw. im betreffenden Zeitintervall klingenden) Stimme zumindest eines Sprechers innerhalb der besagten Kommunikation, aufweisen, in Frequenzkomponenten umgewandelt werden, die eine geringere Überdeckung mit dem Frequenzbereich der zumindest einen menschlichen Stimme, insbesondere der Stimme des Sprechers innerhalb der besagten Kommunikation aufweisen.Also, the frequency components (possibly later) may be subjected to frequency band adjustment or convenient band compression. In this case, the said frequency components, which have a (high or very high) coverage with the frequency range of a human voice, in particular with the (specific or in the relevant time interval sounding) voice of at least one speaker within said communication, be converted into frequency components, which have a lower coverage with the frequency range of the at least one human voice, in particular the voice of the speaker within said communication.
Beispielsweise können der eine oder mehrere Parameter zumindest eines Abschnitts des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung derart bestimmt oder angepasst werden, dass ein Teil der Signalkomponenten des Audiosignals, der den Frequenzbereich der menschlichen Sprache, insbesondere die (aktuell oder in der Vergangenheit erfasste) Stimme des Sprechers betrifft, derart abgewandelt wird, dass ein Teil der entsprechenden Signalenergie auf einen oder mehrere Frequenzbereiche verteilt wird, die den Frequenzbereich der menschlichen Stimme, insbesondere der Stimme des Sprechers, nicht oder in einem geringeren Maße betreffen.For example, the one or more parameters of at least a portion of the audio signal to be output and / or the at least one auditory message may be determined or adjusted such that a portion of the signal components of the audio signal representing the frequency range of the human speech, in particular (currently or in the past detected voice of the speaker is modified such that a part of the corresponding signal energy is distributed to one or more frequency ranges that do not affect the frequency range of the human voice, in particular the voice of the speaker, or to a lesser extent.
Es kann eine Transformation der Signalkomponenten im Frequenzbereich, z.B. als eine Anpassung des Frequenzdichtespektrums ausgeführt werden, wobei die Signalkomponenten des auszugebenden Audiosignals im Frequenzbereich, die einen wesentlichen Teil ihrer Signalenergie innerhalb des Frequenzbereichs der menschlichen Sprache, insbesondere innerhalb der Stimme des Sprechers aufweisen, in einen oder mehrere Frequenzbereiche transformiert („verschoben“) werden, der oder die den Frequenzbereich der menschlichen Sprache nicht oder weniger betreffen. Dabei können ein oder mehrere erste Frequenzbänder bzw. Wellenlängenbereiche gebildet werden, in die ein Inhalt des zumindest eines ersten Abschnitts (z.B. des einen ersten Audiosignals oder einer ersten auditiven Meldung) transformiert wird und ein oder mehrere akustische Frequenzbänder gebildet werden, in die ein Inhalt des zumindest eines zweiten Abschnitts (z.B. eines zweiten Audiosignals oder einer zweiten auditiven Meldung) transformiert wird.A transformation of the signal components in the frequency domain may be carried out, for example as an adaptation of the frequency density spectrum, wherein the signal components of the audio signal to be output in the frequency domain, which have a substantial part of their signal energy within the frequency range of human speech, in particular within the speaker's voice, into one or multiple frequency ranges ("shifted") that do not or less affect the frequency range of human speech. In this case, one or more first frequency bands or wavelength ranges into which a content of the at least one first portion (eg of the one first audio signal or a first auditory message) is transformed and one or more acoustic frequency bands are formed into which a content of the at least one second portion (eg of a second audio signal or a second auditory message).
Gemäß einer zweckmäßigen Ausgestaltung, werden auf Basis einer auditiven Meldung und/oder des weiteren Audiosignals zu erzeugenden Schallwellen, die sich, zumindest statistisch, hinsichtlich ihrer Frequenzen bzw. Frequenzbereiche mit den (ermittelten oder prädizierten) akustischen Schallwellen des zumindest einen Sprechers überlagern bzw. wahrscheinlich überlagern werden, ersatzweise in einem veränderten oder angepassten Frequenzbereich und/oder in einem zumindest teilweise abweichenden Raumbereich erzeugt. Bevorzugt werden die besagten Schallwellen auf Basis der zumindest einer auditiven Meldung und/oder des Abschnitts des weiteren Audiosignals zumindest teilweise von einer ersten Raumrichtung, in der sich der zumindest ein Sprecher befindet, zu einer zweiten Raumrichtung verlagert (d.h. ersatzweise aus einer zweiten Richtung ausgegeben), die abweichend von der ersten Richtung ist.According to an expedient embodiment, based on an auditory message and / or the further audio signal to be generated sound waves, which overlap, at least statistically, in terms of their frequencies or frequency ranges with the (determined or predicted) acoustic sound waves of at least one speaker or likely be superimposed, alternatively generated in a modified or adjusted frequency range and / or in an at least partially divergent space area. The said sound waves are preferably at least partially displaced from a first spatial direction in which the at least one speaker is located, based on the at least one auditory message and / or the portion of the further audio signal, to a second spatial direction (ie, issued as a substitute from a second direction). which is different from the first direction.
Mit anderen Worten kann eine zumindest teilweise Veränderung der auf Basis eines Abschnitts des weiteren Audiosignals oder der zumindest einen auditiven Meldung innerhalb eines oder mehrerer bestimmten Wellenlängenbereiche zu erzeugenden Schallwellen, die sich (im betreffenden Zeitintervall oder zumindest statistisch) mit den Wellenlängenbereichen des akustischen Sprachsignals des Sprechers überlagern bzw. wahrscheinlich überlagern werden, veranlasst werden. Dabei können die auf Basis eines Abschnitts des Audiosignals oder der zumindest einer auditiven Meldung akustische Schallwellen ersatzweise in veränderten, abweichenden Wellenlängenbereichen erzeugt werden, die eine geringere Überschneidung (im betreffenden Zeitintervall oder zumindest statistisch) mit den (aktiv genutzten) Wellenlängenbereichen des akustischen Sprachsignals des Sprechers und/oder eines weiteren im Wohnraum hörbaren akustischen Inhalts überlagern bzw. wahrscheinlich überlagern werden.In other words, an at least partial change of the sound waves to be generated on the basis of a portion of the further audio signal or the at least one auditory message within one or more specific wavelength ranges may coincide (at the relevant time interval or at least statistically) with the wavelength ranges of the speaker's acoustic speech signal superimpose or are likely to be superimposed. In this case, based on a portion of the audio signal or the at least one auditory message, acoustic sound waves may alternatively be generated in altered, deviating wavelength ranges, which have less overlap (in the relevant time interval or at least statistically) with the (actively used) wavelength ranges of the speaker's acoustic speech signal and / or another in the living room audible acoustic content superimposed or likely to overlap.
Bevorzugt werden die besagten Schallwellen betreffend einen bestimmten Schallwellenbereich in dem zumindest eine gegenseitige Störung zumindest eines Abschnitts des weiteren Audiosignals, der zumindest einer auditiven Meldung, und/oder eines Abschnitts der besagten Kommunikation von einer ersten Raumrichtung, in der sich der zumindest ein Sprecher und/oder Zuhörer befindet, zu einer zweiten Raumrichtung verlagert, die abweichend von der ersten Richtung angeordnet ist. Dabei können ein oder mehrere Parameter der auditiven Meldung derart gesteuert werden, dass die, z.B. durch die entsprechenden Lausprecher oder Klangquellen ausgegebenen Schallwellen, die durch die besagten Frequenzen gekennzeichnet sind, in einer anderen, insbesondere zweckmäßig verlagerten, Raumrichtung, z.B. in einem anderen Raumbereich ausgegeben werden. Insbesondere kann eine spektrale Eigenschaft, insbesondere ein Frequenzdichtespektrum zusammen, insbesondere in einer zweckmäßigen Kombination, mit einer entsprechenden Veränderung des zumindest einen Raumklangparameters verändert oder angepasst werden.The said sound waves relating to a certain sound wave range are preferably selected in the at least mutual interference of at least a portion of the further audio signal, the at least one auditory message, and / or a portion of said communication from a first spatial direction in which the at least one speaker and / or or listener is displaced to a second spatial direction, which is arranged deviating from the first direction. One or more parameters of the auditory message may be controlled such that the, e.g. sound waves emitted by the corresponding loudspeakers or sound sources, characterized by said frequencies, in another, particularly suitably displaced, spatial direction, e.g. be spent in another room area. In particular, a spectral property, in particular a frequency density spectrum together, in particular in a suitable combination, can be changed or adapted with a corresponding change of the at least one surround sound parameter.
Beispielsweise kann ein Abschnitt des weiteren Audiosignals der in etwa aus der Richtung des Sprechers (der im selben Zeitintervall sprechender Person) oder im Raumbereich des Sprechers auszugeben ist und den Frequenzbereich, z.B. von 120 - 6000 Hz, insbesondere von 350 - 3000 Hz wesentlich betrifft, hinsichtlich seiner Amplitude reduziert wird und/oder zumindest teilweise aus einer anderen Richtung als der Richtung des Sprechers oder in einem Raumbereich als der Raumbereich des Sprechers ausgegeben werden. Auch können die Signalkomponenten, die aus einer anderen Richtung als der Richtung des Sprechers oder in einem Raumbereich als der Raumbereich des Sprechers ausgegeben werden und den Frequenzbereich von 120 - 6000 Hz, insbesondere 350 - 3000 Hz betreffen, verstärkt werden.For example, a portion of the further audio signal may be output from the direction of the speaker (who is speaking in the same time interval) or in the space area of the speaker and the frequency range, e.g. from 120 to 6000 Hz, in particular from 350 to 3000 Hz, is reduced in amplitude and / or at least partially output from a direction other than the direction of the speaker or in a spatial region as the speaker's spatial region. Also, the signal components output from a direction other than the speaker's direction or in a space area than the speaker's room area and affecting the frequency range of 120-6000 Hz, particularly 350-3000 Hz can be amplified.
Beispielsweise umfasst das Bestimmen oder Anpassen des Parameters der zumindest einer auditiven Meldung eine zumindest teilweise Verlagerung der ihr entsprechenden Schallwellen, die zumindest kumuliert oder statistisch, den Frequenzen bzw. der Schallwellenlängen (eines ermittelten oder prädizierten) akustischen Sprachsignals des Sprechers entsprechen, insbesondere eine hohe Überdeckung mit dem Frequenzkomponenten bzw. der Schallwellenlängen des akustischen Sprachsignals des Sprechers aufweisen bzw. voraussichtlich aufweisen werden, von einer ersten Raumrichtung, in der sich der Sprecher befindet, zu einer zweiten Raumrichtung, die abweichend von der ersten Raumrichtung, insbesondere im Wesentlichen entgegengesetzt zu der ersten Raumrichtung, angeordnet ist, und/oder von einem ersten Raumbereich wo sich der zumindest eine Zuhörer befindet zu einem zweiten Raumbereich der abweichend von dem ersten Raumbereich ist.By way of example, determining or adapting the parameter of the at least one auditory message comprises an at least partial displacement of the corresponding sound waves which at least cumulatively or statistically correspond to the frequencies or the sound wavelengths (of a determined or predicted) acoustic speech signal of the speaker, in particular a high coverage with the frequency components or the sound wavelengths of the acoustic speech signal of the speaker or are likely to have, from a first spatial direction in which the speaker is located to a second spatial direction, which deviates from the first spatial direction, in particular substantially opposite to the first Direction is arranged, and / or from a first space area where the at least one listener is located to a second space area which is different from the first space area.
Im Verfahren kann eine räumliche Verlagerung der auf Basis der zumindest einen auditiven Meldung und/oder des weiteren Audiosignals erzeugten akustischen Schallwellen oder Schallwellenmuster erfolgen, wobei die akustischen Schallwellen mit bestimmten Wellenlängen (z.B. innerhalb eines oder mehrerer bestimmter Wellenlängenbereiche bzw. entsprechend zu einem oder mehreren akustischen Frequenzbändern) derart räumlich verlagert werden, dass eine oder mehrere (insgesamt, in Summe) bei einem bestimmten, wahrscheinlichen oder angenommenen Zuhörer ankommende Proportion zwischen mehreren Wellenlängenbereichen der Schallwellen bzw. der Frequenzbändern auf Basis eines Abschnitts des auszugebenden Audiosignals im Wesentlichen unverändert bleibt, oder relativ geringfügig ausfällt.In the method, a spatial displacement of the acoustic sound waves or sound wave patterns generated on the basis of the at least one auditory message and / or the further audio signal, wherein the acoustic sound waves with certain wavelengths (eg within one or more specific wavelength ranges or corresponding to one or more acoustic frequency bands) are spatially relocated such that one or more (in total) of a given, probable or assumed listener incoming proportion between a plurality of wavelength ranges of the sound waves or the frequency bands based on a portion of the output audio signal substantially unchanged, or relatively minor fails.
Beispielsweise kann zumindest ein Parameter, insbesondere kennzeichnend eine spektrale Eigenschaft, eines Abschnitts des auszugebenden Audiosignals derart verändert werden, dass sich dabei eine oder mehrere Proportionen zwischen zwei oder mehreren Parameterwerten in zwei oder mehreren unterschiedlichen Wellenlängenbereichen des Abschnitts des Audiosignals nicht oder vergleichsweise geringfügig verändert werden. Mit anderen Worten kann oder können im Verfahren eine oder mehrere besagten Proportionen zwischen zumindest zwei zu bestimmenden oder anzupassenden Parametern, die für ein menschliches (psychoakustisches) Wahrnehmen relevant sind, im Wesentlichen aufrechterhalten werden. Auf diese Art und Weise können auch (objektiv oder subjektiv) für das Wahrnehmen der musikalischen Eigenschaften eines Audiosignals relevante Proportionen aufrechterhalten bzw. nicht in nachteilhafter Weise beeinflusst werden.For example, at least one parameter, in particular a spectral property, of a section of the audio signal to be output may be changed in such a way that one or more proportions between two or more parameter values in two or more different wavelength ranges of the section of the audio signal are not changed or are comparatively slightly changed. In other words, in the method, one or more of said proportions may be substantially maintained between at least two parameters to be determined or adapted that are relevant to human (psychoacoustic) sensing. In this way, (objective or subjective) relevant proportions for the perception of the musical properties of an audio signal can be maintained or not adversely affected.
Dabei kann ein derartiges Anpassen des jeweiligen Audiosignals ausgeführt werden, dass die entsprechende Veränderung, insbesondere für eine bestimmte, wahrscheinlich anwesende oder in einem Raumbereich angenommene Person, geringfügig, wesentlich weniger oder weniger nachteilhaft bzw. störend wahrnehmbar ist, als etwa eine Verringerung der Amplituden der Schallwellen in den besagten Wellenlängenbereichen. Ein solches Anpassen kann abhängig von dem Raumbereich des Sprechers und/oder von dem Raumbereich des Zuhörers erfolgen. Beispielsweise wird vorwiegend die spektrale Eigenschaft der Schallwellen angepasst, die aus der Richtung ausgegeben oder wahrnehmbar gemacht werden, in der sich der Sprecher befindet. Somit kann die Wahrnehmbarkeit des entsprechenden Abschnitts der Kommunikation für den Zuhörer verbessert.In this case, such an adaptation of the respective audio signal can be carried out such that the corresponding change, in particular for a specific person, probably present or assumed in a spatial area, is slightly, significantly less or less disadvantageous or annoying than, for example, a reduction in the amplitudes of Sound waves in the said wavelength ranges. Such adaptation may be done depending on the speaker's room area and / or the listener's room area. For example, it mainly adjusts the spectral property of the sound waves emitted or made perceptible from the direction in which the speaker is located. Thus, the perceivability of the corresponding portion of the communication for the listener can be improved.
Alternativ oder zusätzlich können Töne, Sequenzen von Tönen, Melodien, Geräusche der zumindest einen auditiven Meldung abhängig von zumindest einem Parameter der besagten Kommunikation und/oder des auszugebenden Abschnitts des weiteren Audiosignals angepasst werden. Dabei kann auch der annähernd derselbe oder entsprechende Inhalt der zumindest einen auditiven Meldung (dieselbe Information, Informationsinhalt), z.B. eine Information im Zusammenhang mit der Bedienung eines im Haus betriebener Vorrichtung, mit anderen, angepassten Tönen, Sequenzen von Tönen, Melodien oder Geräuschen ausgegeben werden.Alternatively or additionally, tones, sequences of tones, melodies, sounds of the at least one auditory message can be adapted depending on at least one parameter of said communication and / or of the portion of the further audio signal to be output. In this case, also the approximately the same or corresponding content of the at least one auditory message (the same information, information content), e.g. information related to the operation of an in-house device may be outputted with other adapted tones, sequences of tones, melodies or sounds.
Beispielsweise kann zumindest ein erstes Merkmal der zumindest einen auditiven Meldung, welches kennzeichnend ist für eine auditive Meldung einer bestimmten Art, oder kennzeichnend ist für den Bezug der auditiven Meldung zu einer bestimmten Vorrichtung im Haus oder zu einer weiteren Information oder zu einem Event, oder kennzeichnend ist für ein Prioritätsmaß der besagten auditiven Meldung, angepasst werden, während zumindest ein zweites Merkmal das kennzeichnend ist für zumindest ein inhaltliches Merkmal der auditiven Meldung, beispielsweise eine mit der auditiven Meldung zu übermittelnde Information, insbesondere eine textuelle bzw. faktische Information, im Wesentlichen unverändert oder betont bzw. hervorgehoben werden kann.For example, at least a first feature may be indicative of, or indicative of, the at least one auditory message indicative of an auditory message of a particular type or indicative of the auditory message to a particular device in the home or other information or event is for a priority measure of said auditory reporting, adapted, while at least a second feature that is indicative of at least one substantive feature of the auditory reporting, for example, to be transmitted with the auditory message information, in particular a textual or factual information, essentially unchanged or can be emphasized or highlighted.
Beispielsweise kann eine oder mehrere Frequenzen und/oder Amplituden, in welchen die Töne ausgegeben werden, angepasst werden, während eine Tonsequenz im Wesentlichen konstant bleibt. Somit ist die auditive Meldung durch die menschliche Wahrnehmung immer noch hinreichend wiedererkennbar bzw. interpretierbar.For example, one or more frequencies and / or amplitudes in which the tones are output may be adjusted while a tone sequence remains substantially constant. Thus, the auditory message through human perception is still sufficiently recognizable or interpretable.
Alternativ oder zusätzlich kann ein Parameter des Frequenzspektrums eines Abschnitts des weiteren Audiosignals abhängig von einem oder mehreren Parametern der besagten (auditiven) Kommunikation und/oder der besagten auditiven Meldung bestimmt werden. Beispielsweise kann ein Frequenzparameter, z.B. Parameter des Frequenzspektrums eines Abschnitts des weiteren Audiosignals bestimmt oder angepasst werden, abhängig von dem ermittelten oder prädizierten Parameter der besagten Kommunikation und/oder einem Parameter der im selben gewissen Zeitintervall auszugebenden auditiven Meldung.Alternatively or additionally, a parameter of the frequency spectrum of a portion of the further audio signal may be determined depending on one or more parameters of said (auditory) communication and / or said auditory message. For example, a frequency parameter, e.g. Parameters of the frequency spectrum of a portion of the further audio signal can be determined or adjusted, depending on the determined or predicted parameter of the said communication and / or a parameter of the output in the same certain time interval auditory message.
Gemäß einer zweckmäßigen Ausgestaltung umfasst das Verfahren ein Einlernen einer bestimmten Stimme und/oder einer bestimmten körperlichen Regung einer Person (eines Sprechers, der sprechenden Person) zu einem oder mehreren Zeitintervallen und daraufhin, bei einer Wiedererkennung der bestimmten Stimme und/oder der bestimmten körperlichen Regung der Person in einem oder mehreren späteren Zeitintervallen, eine Anwendung eines (für diesen Fall) optimierten oder vorgespeicherten Bestimmens oder Anpassens der Parameter der zumindest einen auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals. Dabei kann das Bestimmen oder Anpassen der Parameter jeweils abhängig von den z.B. akustischen Parametern der Stimme der Person und/oder vom den Erkennungsdaten zu einer bestimmten Stimme erfolgen. Beispielsweise kann auch folgende Abhängigkeit festgelegt werden:
- - Wenn eine körperliche Regung, z.B. ein bestimmtes Lippenbewegungsmuster, erkannt wird, bei einer Person, die bisher im Wohnraum immer leise und/oder undeutlich gesprochen hat, dann wird ein Parameter der zumindest einen auditiven Meldung und/oder ein Abschnitt des weiteren Audiosignals vergleichsweise stark verändert, und/oder abhängig von den akustischen Parametern der Stimme des Sprechers, insbesondere einer aktiv genutzten Amplitude und/oder Frequenzbandbreite angepasst.
- - Wenn eine körperliche Regung, z.B. ein bestimmtes Lippenbewegungsmuster erkannt wird, bei einer Person, die bisher im Wohnraum immer laut und/oder deutlich gesprochen hat, dann wird ein Parameter der zumindest einen auditiven Meldung und/oder ein Abschnitt des weiteren Audiosignals vergleichsweise stark verändert, und/oder abhängig von den akustischen Parametern der Stimme des Sprechers, insbesondere einer aktiv genutzten Amplitude und/oder Frequenzbandbreite angepasst.
- - If a physical sensation, eg a specific lip movement pattern, is recognized by a person who has always spoken softly and / or indistinctly in the living space, then a parameter of the at least one auditory message and / or a portion of the further audio signal is changed comparatively strongly , and / or adjusted depending on the acoustic parameters of the voice of the speaker, in particular an actively used amplitude and / or frequency bandwidth.
- If a physical sensation, eg a specific lip movement pattern, is recognized by a person who has always spoken loudly and / or clearly in the living space, then a parameter of the at least one auditory message and / or a portion of the further audio signal is changed comparatively strongly , and / or adjusted depending on the acoustic parameters of the voice of the speaker, in particular an actively used amplitude and / or frequency bandwidth.
Beispielsweise umfasst das Verfahren ein Einlernen einer oder mehrerer bestimmten körperlichen Regungen, die in einer sprachlichen Kommunikation, insbesondere bei einer bestimmten Person oder Person zugehörig zu einer Personengruppe, dem Sprechen vorausgeht, zu einem oder mehreren Zeitintervallen und daraufhin bei einer (späteren) Wiedererkennung der körperlichen Regung, insbesondere auch beim Wiedererkennen einer auditiven Kommunikation der Person oder einer Person zugehörig zu der Personengruppe, eine Anwendung einer veränderten Logik und/oder vorgegebener Parameter oder eines speziell optimierten Anpassens. Beispielsweise wenn eine für die zumindest eine (im Wohnraum kommunizierende) Person aus mehreren Zeitintervallen statistisch häufig vorkommende, ermittelte, eingelernte körperliche Regung erkannt bzw. wiedererkannt wird, erfolgt ein (verbessertes, vorausbestimmtes, für diesen Fall zugeordnetes) Bestimmen oder Anpassen der Parameter zumindest einer auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals, oder eine für bzw. auf die Stimme bzw. weitere Eigenschaften der Person zugeordnete bzw. optimierte Variante des Bestimmens oder Anpassens der Parameter ausgeführt werden.By way of example, the method comprises training one or more specific physical impulses, which in a linguistic communication, in particular in a specific person or person preceding a group of persons, precedes the speaking at one or more time intervals and subsequently at a (later) recognition of the physical Stir, especially when recognizing an auditory communication of the person or a person belonging to the group of people, an application of a changed logic and / or given parameters or a specially optimized adaptation. For example, if a person statistically frequently occurring, ascertained, learned physical impulse is recognized or recognized from a plurality of time intervals for the at least one person (communicating in the living space), at least one (improved, predefined, assigned for this case) determination or adaptation of the parameters takes place auditory message and / or a portion of the further audio signal, or performed for or on the voice or other properties of the person or optimized variant of determining or adjusting the parameters are performed.
Ein Erkennen bestimmter körperlicher Regungen bzw. bestimmter Arten körperlicher Regungen kann basierend auf entsprechenden aus der Wissenschaft abgeleiteten Gesetzmäßigkeiten, und/oder dem Expertenwissen bzw. Beobachtungen, und/oder basierend auf Nutzereinstellungen und/oder bevorzugt basierend auf die durch ein maschinelles Lernverfahren gewonnenen Lerndaten erfolgen. Bevorzugt kann hierbei auch eine einer bestimmten Stimmlage bzw. einem Sprachton vorausgehende körperliche Regung als solche erkannt werden und/oder als eine einem Muster entsprechende körperliche Regung klassifiziert werden und daraufhin eine (noch viel präzisere) Anpassung des Audiosignals erfolgen.Recognition of certain bodily movements may be based on appropriate science-derived laws, and / or expert observations, and / or based on user preferences, and / or preferably based on the learning data obtained by a machine learning method , In this case, a physical impulse preceding a certain vocal range or a speech tone may also be recognized as such and / or classified as a physical impulse corresponding to a pattern, and then a (much more precise) adaptation of the audio signal takes place.
Gemäß einer zweckmäßigen Ausgestaltung wird ein oder mehrere Parameter zur Ausgabe zumindest eines weiteren Audiosignals abhängig von einem oder mehreren Parametern der besagten Kommunikation bestimmt oder angepasst wird, wobei das Audiosignal sich von der zumindest einen auditiven Meldungen unterscheidet und insbesondere zumindest teilweise im selben gewissen Zeitintervall wie die auditive Meldung ausgegeben werden kann. Beispielsweise kann ein Abschnitt des Audiosignals zumindest teilweise im selben gewissen Zeitintervall wie zumindest ein Abschnitt der zumindest einen auditiven Meldung auszugegeben sein, z.B. im selben gewissen Zeitintervall von ca. 5, 15, 30, 60 Sekunden, zur Ausgabe bestimmt sein. Dabei können diverse in diesem Dokument beschriebene Parameter des Audiosignals abhängig von diversen ermittelten bzw. prädizierten Parametern der besagten Kommunikation, sowie von den weiteren Parametern z.B. der Szene, Körpersprache, etc. bestimmt, angepasst, insbesondere gesteuert werden. Auch kann ein Parameter zur Ausgabe einer einen Abschnitt des weiteren Audiosignals begleitenden Information, insbesondere ein Parameter einer Text-, Bild- oder Videoausgabe, abhängig von dem ermittelten Parameter der besagten Kommunikation und/oder abhängig von der zumindest einen auditiven Meldung gesteuert werden.According to an expedient refinement, one or more parameters for outputting at least one further audio signal are determined or adapted depending on one or more parameters of said communication, wherein the audio signal differs from the at least one auditory message and in particular at least partially in the same certain time interval as the one auditory message can be issued. For example, a portion of the audio signal may be at least partially output in the same certain time interval as at least a portion of the at least one auditory message, e.g. in the same certain time interval of about 5, 15, 30, 60 seconds, to be determined for the output. Various parameters of the audio signal described in this document can be used as a function of various determined or predicated parameters of said communication, as well as of the other parameters, e.g. the scene, body language, etc. determined, adapted, in particular controlled. A parameter for outputting information accompanying a section of the further audio signal, in particular a parameter of a text, image or video output, can also be controlled as a function of the determined parameter of said communication and / or as a function of the at least one auditory message.
Beispielsweise, wenn ermittelt oder prädiziert wird, dass aktuell oder in einem vorausliegenden Zeitintervall bestimmte akustischen Grenzwerte, insbesondere betreffend einen bestimmten Raumbereich, (zumindest mit einer gewissen Wahrscheinlichkeit) überschritten werden, dann kann anstatt von oder zusätzlich zu der Ausgabe eines (betreffenden) Abschnitts des Audiosignals, eine Information in Form einer Text-, Bild- oder Videoausgabe (beispielsweise entsprechende ermittelte oder im Verfahren generierte Untertitel) ausgegeben werden. Auch kann die zumindest ein Abschnitt des weiteren Audiosignals ersatzweise mit Mitteln einer alternativen Ausgabevorrichtung ausgegeben werden. Beispielsweise kann das Audiosignals oder die besagte Information in Form einer Text-, Bild- oder Videoausgabe ersatzweise oder zusätzlich an einem mobilen Anwendergerät zumindest einer (betreffenden) Person im Wohnraum ausgegeben werden.For example, if it is determined or predicted that certain acoustic limit values, in particular with respect to a specific area, are exceeded (at least with a certain probability), then instead of or in addition to the output of a (relevant) section of the Audio signal, information in the form of a text, image or video output (for example, corresponding determined or generated in the process subtitles) are output. Also, the at least one portion of the further audio signal can be replaced by means of an alternative output device. For example, the audio signal or the said information in the form of a text, image or video output can be issued as a substitute or in addition to a mobile user device of at least one (relevant) person in the living room.
Das Bestimmen, insbesondere Anpassen des Parameters der zumindest einen auditiven Meldung kann im Verfahren nach vorausbestimmten, durch Nutzer einstellbaren, veränderbaren und/oder im Verfahren lernbaren Kriterien erfolgen. Diese können z.B. Optimierungskriterien sein, die jeweils einem Ziel, Zweck bzw. Optimierungszweck dienen. Das Wort „Optimierung“ oder „optimiert“ bedeutet dabei nicht, dass ein absolutes Optimum erreicht werden soll. Vielmehr ist es als das Anstreben der Verbesserung und eine gewisse Annäherung an ein bestimmtes denkbares Optimum zu verstehen. Beispielsweise können die vorausbestimmten Optimierungskriterien als ein objektives Maß für die Zweckmäßigkeit dienen.The determination, in particular adaptation of the parameter of the at least one auditory message can be carried out in the method according to predetermined, user-adjustable, changeable and / or method-learnable criteria. These can be, for example, optimization criteria, each one Goal, purpose or purpose of optimization serve. The word "optimization" or "optimized" does not mean that an absolute optimum should be achieved. Rather, it is to be understood as the pursuit of improvement and a certain approximation to a certain conceivable optimum. For example, the predetermined optimization criteria may serve as an objective measure of convenience.
Beispielsweise kann nach einem Optimierungskriterium eine Verringerung einer zeitlichen Überschneidung zwischen einem oder mehreren Abschnitten der auditiven Kommunikation zumindest eines Sprechers und der Ausgabe der zumindest einen auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals ausgeführt werden.For example, according to an optimization criterion, a reduction of a temporal overlap between one or more sections of the auditory communication of at least one speaker and the output of the at least one auditory message and / or a section of the further audio signal can be carried out.
Ein weiteres Optimierungskriterium kann zumindest eine Nutzereinstellung oder Nutzereingabe sein, wobei mit der Nutzereinstellung oder Nutzereingabe ein oder mehrere Raumbereiche z.B. ein oder mehrere Sitzplätze oder Schlafplätze innerhalb des Wohnraums gewählt werden, wobei die Parameter und/oder Logik, nach welchen das Bestimmen oder Anpassen der Parameter der zumindest einen auditiven Meldung und/oder des weiteren Audiosignals für den zumindest einen bestimmten (gewählten) Raumbereich, Sitzplatz, Schlafplatz ausgeführt wird, gesondert gewählt oder durch die Nutzereingabe eingestellt werden kann. Beispielsweise können ein oder mehrere bestimmte Raumbereiche definiert werden, in welchen zu bestimmten Uhrzeiten bestimmte akustische Grenzwerte (möglichst unabhängig von möglichen akustischen Grenzwerten in anderen, benachbarten Raumbereichen) eingehalten werden sollen. Beispielsweise können sich die besagten akustischen Grenzwerte auf kumulierte (insgesamt ankommende) akustische Schallwellen oder Schallwellenmuster beziehen, die in einem betreffenden Raumbereich ankommen (sich dort insgesamt ergeben) sollen. Dabei können für zumindest einen oder mehrere bestimmte (gewählte) Raumbereiche bevorzugt, bestimmte Varianten des Bestimmens oder Anpassens der Parameter gewählt werden.A further optimization criterion may be at least one user setting or user input, wherein with the user setting or user input one or more spatial regions e.g. one or more seats or beds within the living space are selected, the parameters and / or logic according to which the determining or adjusting the parameters of the at least one auditory message and / or the further audio signal for the at least one particular (selected) room area, seat , Sleeping place is running, can be selected separately or adjusted by the user input. For example, one or more specific areas of the room may be defined in which certain acoustic limits (as independent as possible of possible acoustic limits in other adjacent room areas) should be maintained at certain times. For example, the said acoustic limit values may relate to cumulative (total incoming) acoustic sound waves or sound wave patterns arriving in a respective spatial area (resulting there as a whole). In this case, certain variants of determining or adapting the parameters may be selected for at least one or more specific (selected) spatial regions.
Ein weiteres Optimierungskriterium kann beispielsweise bestimmte Richtungen und/oder bestimmte Raumbereiche hinsichtlich des Prioritätsmaßes der Kommunikation und/oder hinsichtlich des Prioritätsmaßes zumindest eines Abschnitts des auditiven Meldung und/oder des weiteren Audiosignals (insbesondere jeweils unterschiedlicher Art und/oder zu Events unterschiedlicher Art oder mit unterschiedlichen Inhalten) kennzeichnen, beispielsweise hervorheben. Beispielsweise können einstellbare, typische oder im Verfahren gelernte Aufenthaltsorte der Personen der Personengruppe unterschiedlich behandelt werden. Z.B. wird das Verfahren für die statistisch berücksichtigten Aufenthaltsorte der Personen aus einer ersten Personengruppe (hier: „Eltern“) und für die (statistisch berücksichtigte) Aufenthaltsorte der Personen aus einer zweiten Personengruppe (hier: „Kinder“) oder aus einer dritten Personengruppe (hier: „Großeltern“), unterschiedlich ausgeführt.A further optimization criterion may be, for example, certain directions and / or specific spatial areas with regard to the priority measure of the communication and / or with regard to the priority measure of at least one section of the auditory message and / or the further audio signal (in particular of different types and / or events of different types or with different Content), for example, highlight. For example, adjustable, typical or learned in the process whereabouts of the persons of the group of people can be treated differently. For example, the procedure for the statistically considered whereabouts of the persons from a first group of persons (here: "parents") and for the (statistically considered) whereabouts of the persons from a second group of persons (here: "children") or from a third group of persons (here: "Grandparents"), executed differently.
Ein weiteres Optimierungskriterium kann bestimmte, z.B. von statistischen Werten abweichende (auf besondere Weise ausgeprägte), Wahrnehmungseigenschaften zumindest einer bestimmten Person, Person zugehörig zu einer Personengruppe, betreffen. Beispielsweise kann ein solches Optimierungskriterium die Berücksichtigung der Parameter der Stimmeneigenschaften und/oder ein Audiogramm zumindest einer Person oder Personen aus einer bestimmten Personengruppe repräsentieren. Dabei kann das Verfahren unter Berücksichtigung der (bestimmten) von der Norm abweichenden Eigenschaften der Personen in einer passenden Weise, insbesondere speziell für den Raumbereich in dem sich die Person zumindest wahrscheinlich aufhält, angewandt werden.Another optimization criterion may be certain, e.g. Deviating from statistical values (pronounced in a special way), the perception characteristics of at least one particular person, person belonging to a group of people, concern. For example, such an optimization criterion may represent the consideration of the parameters of the voice characteristics and / or an audiogram of at least one person or persons from a certain group of persons. In this case, the method can be applied taking into account the (non-standard) characteristics of the persons in a suitable manner, in particular especially for the area in which the person is at least likely to be present.
Ein weiteres Optimierungskriterium kann ein bestimmtes Kommunikationsziel und/oder Kommunikationsverhalten betreffen, welches mit der auditiven Meldung, insbesondere einer Sprachmitteilung erzielt werden soll. Beispielsweise können sowohl ein Kommunikationsverhalten einer Sprachsteuerungsapplikation als auch ein gewünschtes (als ein aktuelles Ziel der Ausführung des Verfahrens definierte) Kommunikationsziel und/oder das Kommunikationsverhalten bestimmt werden, welche zum Erzeugen auditiver Meldungen für auf eine bestimmte Person bzw. für eine Person zugehörig zu einer bestimmten Personengruppe genutzt werden.A further optimization criterion may relate to a specific communication target and / or communication behavior which is to be achieved with the auditory message, in particular a voice message. For example, both a communication behavior of a voice control application and a desired (defined as a current goal of the execution of the method) communication target and / or the communication behavior can be determined, which for generating an auditory messages for a specific person or for a person belonging to a specific Group of people are used.
Die besagten Optimierungskriterien können im Verfahren in einer mannigfaltigen Weise kombiniert werden. Auch kann im Verfahren eine mathematische Funktion zur Findung eines oder mehreren Maxima bzw. Optima zum Annähern an ein oder mehrere geltende Optimierungskriterien ausgeführt werden. Beispielsweise kann eine solche mathematische Funktion eine sogenannte Kostenfunktion sein. Abhängig von der Findung eines oder mehreren Maxima oder Optima kann eine Variante des Bestimmend oder Anpassens der besagten Parameter der zumindest einer auditiven Meldung und/oder des weiteren Audiosignals ausgewählt werden.The said optimization criteria can be combined in the method in a varied manner. Also, in the method, a mathematical function for finding one or more maxima or optima for approximating one or more valid optimization criteria can be performed. For example, such a mathematical function may be a so-called cost function. Depending on the finding of one or more maxima or optima, a variant of the determination or adaptation of the said parameters of the at least one auditory message and / or the further audio signal can be selected.
Insbesondere kann im Verfahren eine Steuerung, bevorzugt Regelung, eines Parameters der zumindest einen auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals, insbesondere einer Umhüllenden („Envelope“) oder eines zeitlichen Verlaufs eines Parameterwertes abhängig vom dem zumindest einem Parameter, z.B. Richtungsparameter einer aktuellen oder prädizierten besagten Kommunikation ausgeführt werden. Beispielsweise kann ein anzupassender Parameter des Audiosignals kennzeichnend sein für die Amplitudendynamik und/oder Frequenzdynamik, sein. Dabei kann, z.B. eine von den ermittelten Parametern der besagten Kommunikation abhängige, Dynamikkompression, Dynamikspreizung, Frequenzbandkompression, Frequenzbandspreizung zumindest einer auditiven Meldung oder des Abschnitts des auszugebenen Audiosignals ausgeführt bzw. angepasst werden. Auch kann eine Steuerung, insbesondere Regelung der Parameter der entsprechenden, zu zumindest einem Teil der besagten auditiven Meldung und/oder dem weiteren Audiosignal korrespondierender Schallwellen oder Schallwellenmuster im Wohnraum ausgeführt werden.In particular, in the method, a control, preferably regulation, of a parameter of the at least one auditory message and / or a section of the further audio signal, in particular an envelope or a time profile of a parameter value can depend on the at least one parameter, eg direction parameter of a parameter current or predicted communication is executed. For example, a parameter of the audio signal to be adapted can be characteristic of the amplitude dynamics and / or frequency dynamics. In this case, for example, one of the determined parameters of said communication dependent, dynamic compression, dynamic spread, frequency band compression, frequency band spreading at least one auditory message or the portion of the output audio signal to be executed or adapted. It is also possible to carry out a control, in particular regulation of the parameters of the corresponding sound waves or sound wave patterns in the living space corresponding to at least part of the said auditory message and / or the further audio signal.
Bevorzugt wird eine Steuerung, insbesondere Regelung eines oder mehrerer besagten Parameter der zumindest einen auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals ausgeführt. Dabei kann ein Sollwert der Regelung abhängig von einer vorgegebenen Hörbarkeit und/oder akustischen Wahrnehmbarkeit eines auszugebenden Audiosignals und/oder der zumindest einer auditiven Meldung und/oder des zumindest einen Abschnitts der besagten Kommunikation, bzw. der Kommunikation mit einem bestimmten Richtungsparameter, gewählt werden. Der besagte Sollwert der Regelung kann auch, insbesondere adaptiv, angepasst werden. Als ein Sollwert, Bezugsgröße bzw. die Regelgröße können dabei die entsprechenden Parameter der Schallwellen bzw. Schallwellenmuster auf Basis der zumindest einer auditiven Meldung und/oder des weiteren Audiosignals, insbesondere in einem oder mehreren bestimmten Raumbereichen des Wohnraums dienen.Preferably, a control, in particular regulation of one or more said parameters of the at least one auditory message and / or a portion of the further audio signal is executed. In this case, a target value of the control can be selected as a function of a given audibility and / or acoustic perceptibility of an audio signal to be output and / or the at least one auditory message and / or the at least one section of said communication, or communication with a specific direction parameter. The said nominal value of the control can also be adapted, in particular adaptively. The corresponding parameters of the sound waves or sound wave patterns on the basis of the at least one auditory message and / or the further audio signal, in particular in one or more specific spatial regions of the living space, can serve as a desired value, reference variable or the controlled variable.
Das Bestimmen oder Anpassen der Parameter der zumindest einer auditiven Meldung und zumindest eines Abschnitts des weiteren Audiosignals kann bevorzugt abhängig voneinander, insbesondere entsprechend einer gewählten Variante oder einer Kombination von jeweils anzuwendenden Varianten, erfolgen. Dabei kann ein mathematischer Zusammenhang gewählt oder ermittelt werden, nach dem die Abhängigkeit zwischen dem Bestimmen bzw. Anpassen der Parameter zum Erzeugen einer auditiven Meldung und dem Anpassen zumindest eines Abschnitts des weiteren Audiosignals sichergestellt wird. Auch kann Parameter, z.B. ein Zeitparameter, z.B. ein Zeitpunkt zum Anpassen (Pausieren, Unterbrechen, Verändern) zumindest eines Parameters des weiteren Audiosignal bestimmt werden, wobei das Anpassen zur Ausgabe der zumindest einen bestimmten auditiven Meldung erfolgt. Insbesondere können ein oder mehrere Parameter des (auszugebenden) Audiosignals und zumindest einer auditiven Meldung zum Anstreben zumindest eines gemeinsamen Optimierungskriteriums angepasst werden.The determination or adaptation of the parameters of the at least one auditory message and at least one section of the further audio signal may preferably be dependent on one another, in particular in accordance with a selected variant or a combination of respectively applicable variants. In this case, a mathematical relationship can be selected or determined according to which the dependence between the determination or adaptation of the parameters for producing an auditory message and the adaptation of at least one section of the further audio signal is ensured. Also, parameters, e.g. a time parameter, e.g. a time for adjusting (pausing, interrupting, changing) at least one parameter of the further audio signal is determined, wherein the adaptation to the output of the at least one specific auditory message takes place. In particular, one or more parameters of the (to be outputted) audio signal and at least one auditory message may be adapted to target at least one common optimization criterion.
Das Verfahren kann bei einer typischen privaten Kommunikation in einem Haus, insbesondere im Falle einer Großfamilie und bei Vorhandensein mehrerer laufenden bzw. zuschaltbarer Multimediainhalte sehr hilfreich sein. Beispielsweise kann das Verfahren oder ein Modus des Verfahrens zu bestimmten Uhrzeiten oder ab einer bestimmten Anzahl von Personen im Wohnraum, oder ab einer gewissen akustischen Lautstärke innerhalb des Wohnraums oder innerhalb eines bestimmten Raumbereichs automatisch aktiviert werden. Bei einem spontanen Kommunikationsbedarf muss der Sprecher eine auditive Meldung oder ein gleichzeitig laufendes Audio- bzw. Multimedia-Programm nicht mit einer gesonderten Handlung abschalten oder mit seiner Stimme übertönen um von Mitmenschen hinreichend gehört zu werden.The method can be very helpful in a typical private communication in a house, especially in the case of a large family and in the presence of multiple running or switchable multimedia content. For example, the method or a mode of the method may be automatically activated at certain times or from a certain number of persons in the living room, or from a certain acoustic volume within the living space or within a certain space. In a spontaneous communication needs, the speaker must not turn off an auditory message or a simultaneously running audio or multimedia program with a separate act or drown his voice to be heard by fellow human beings sufficiently.
Der Zuhörer muss sich weniger anstrengen, um die sprachliche Botschaft und/oder die zumindest eine auditive Meldung wahrzunehmen und richtig zu interpretieren. Das eventuell vorhandene, zugeschaltete bzw. auszugebende weitere Audiosignal bzw. ein Multimediainhalt wird pausiert und besonders wichtige Abschnitte des weiteren Audiosignals bzw. des Multimediainhalts werden nach dem Abschluss des Abschnitts der auditiven Kommunikation oder der zumindest einen auditiven Meldung wiederholt. Der Zuhörer muss daher nicht das Gefühl haben, dass er eine wichtige auditive Meldung oder einen wichtigen Abschnitt des Audiosignals verpasst. Somit kann eine Kommunikation innerhalb eines häuslichen Bereichs effektiver und entspannter ablaufen.The listener must make less effort to perceive and correctly interpret the linguistic message and / or the at least one auditory message. Any further audio signal or multimedia content that is present, connected or to be output is paused and particularly important sections of the further audio signal or the multimedia content are repeated after the end of the section of the auditory communication or the at least one auditory message. The listener therefore does not have to feel that he misses an important auditory message or portion of the audio signal. Thus, communication within a home area can be more effective and relaxed.
Je nach Ausgestaltung bzw. Konfiguration des Verfahrens kann auch ein hoher interaktiver bzw. spielerischer Wert erreicht werden. Beispielsweise ist das Verfahren zur Generierung zahlreicher spielerischer bzw. der Unterhaltung dienender Effekte im Wohnraum geeignet. Das Verfahren kann nach den Wünschen der Nutzer konfiguriert werden. Beispielsweise kann abhängig von den Nutzereingaben oder einer automatischer Interpretation der Wünsche oder Bedürfnisse der im Wohnraum anwesender Personen eine Anpassung der in diesem Dokument beschriebenen Zusammenhänge, z.B. der Logik mit der eine Anpassung der auditiven Meldung und/oder des Audiosignals erfolgen. Mit dem Verfahren kann ein positives emotionales Erlebnis beim Sprecher, beim Zuhörer oder bei weiteren Personen im Wohnraum bewirkt werden.Depending on the configuration or configuration of the method, a high interactive or playful value can also be achieved. For example, the method is suitable for generating numerous playful or entertaining effects in the living space. The procedure can be configured according to the wishes of the users. For example, depending on the user input or an automatic interpretation of the desires or needs of the persons present in the living space, an adaptation of the relationships described in this document, e.g. the logic with which an adjustment of the auditory message and / or the audio signal. With the method, a positive emotional experience in the speaker, the listener or other people in the living room can be effected.
Gemäß eines zweiten Aspekts zeichnet sich die Erfindung aus durch ein System zum Erzeugen einer auditiven Meldung in einem Wohnraum. Das System ist ausgestaltet zur Ausführung des Verfahrens. Das System ist insbesondere ausgestaltet zum Ermitteln, insbesondere Prädizieren, eines Parameters einer Kommunikation innerhalb eines Wohnraums an der zumindest zwei Personen beteiligt sind, und das Bestimmen eines Parameters zumindest einer auszugebenden auditiven Meldung, abhängig von dem ermittelten Parameter der Kommunikation. Alternativ, bevorzugt zusätzlich ist das System ausgestaltet zum Bestimmen oder Anpassen eines Parameter des zumindest eines weiteren Audiosignals im Wohnraum, wobei es sich um zumindest ein weiteres Audiosignal bzw. einen Abschnitt des weiteren Audiosignals handelt das im selben gewissen (kurzen) Zeitintervall wie die besagte auditive Meldung auszugeben ist, d.h. ausgegeben werden kann oder soll. Bevorzugt ist das System auch zur Ausführung weiterer zweckmäßiger oder optionaler Merkmale des Verfahrens ausgestaltet. Dabei weist das System die geleichen oder die entsprechenden Merkmale sowie die entsprechenden Vorteile wie das Verfahren aus.According to a second aspect, the invention is characterized by a system for generating an auditory message in a living space. The system is designed to carry out the method. The system is in particular configured to determine, in particular predict, a parameter of a communication within a living space in which at least two persons are involved, and to determine a parameter of at least one of them Auditory message to be output, depending on the determined parameter of the communication. Alternatively, preferably in addition, the system is designed to determine or adapt a parameter of the at least one further audio signal in the living space, which is at least one further audio signal or a portion of the further audio signal in the same certain (short) time interval as the said auditory Message is output, ie can be output or should. Preferably, the system is also designed to carry out further expedient or optional features of the method. In this case, the system exhibits the same or the corresponding features and the corresponding advantages as the method.
Bei dem System kann es sich um ein sogenanntes verteiltes elektronisches System handeln. Insbesondere umfasst das System ein im Wohnraum betreibbare Sprachsteuerungsapplikation, Audioausgabevorrichtung bzw. ein Audiosystem. Die Audioausgabevorrichtung kann ein Teil eines Multimediasystems, z.B. eines Heimkinosystems, einer HiFi-Anlage sein. Auch kann die Audioausgabevorrichtung ein Multimediasystem umfassen oder es kann mit einer zweckmäßigen Datenschnittstelle zur Ausführung des Verfahrens, z.B. zum Austausch der Steuerungsdaten, mit einem Multimediasystem ausgestaltet sein. Ferner kann das System weitere im Haus verbaute oder angeordnete oder am Körper der Personen tragbaren Sensoren, sowie Geräte, z.B. Haushaltsgeräte oder Systeme des Hauses, z.B. einem Energieversorgungsystem, Heizungssystem, Brandschutzsystem, umfassen. Ferner kann das System auch zumindest eine beabstandet angeordnete Recheneinheit, z.B. ein Server oder ein entsprechend eingerichtetes Internetportal oder einen entsprechend (zur Ausführung des Verfahrens) eingerichteten Dienst, insbesondere einen Cloud-Dient umfassen. Die beabstandet angeordnete Recheneinheit kann mit Mitteln einer künstlichen Intelligenz, maschinelles Lernens, sowie einer Datenaggregation von Daten aus einer Vielzahl von Wohnräumen
Gemäß eines dritten Aspekts zeichnet sich die Erfindung aus durch ein Anwendergerät, insbesondere ein mobiles Anwendergerät, das eingerichtet ist, das Verfahren, insbesondere zusammen mit einem stationären Wohnraum betriebenen Audioausgabevorrichtung und/oder einem oder mehreren im Haus bzw. Wohnraum betreibbaren, abgebrachten Sensoren und/oder einer weiteren Recheneinheit das Verfahren auszuführen. Das Anwendungsgerät kann im Rahmen dieser Beschreibung ein Smartphone, Tablet, Smart-Watch, Smart-Closes, insbesondere ein Kleidungsstück mit einer in das Kleidungsstück integrierter elektronischer Vorrichtung, eine Datenbrille, eine Vorrichtung zum Erzeugen oder Ausgabe bzw. Darstellung von VR (= Virtual Reality), oder eine sinngemäße Weiterbildung einer derartigen Vorrichtung sein. Insbesondere kann das mobile Anwendergerät an dem Audiosystem, Multimediasystem oder einer geeigneten Stelle im Wohnraum, z.B. mittels einer speziellen Halterung mit oder ohne einer Datenschnittstelle platzierbar sein. Ferner kann das mobile Anwendergerät auch als ein Teil des erfindungsgemäßen Systems angesehen werden. Das mobile Anwendungsgerät kann hierzu eine drahtgebundene oder drahtlose Schnittstelle aufweisen die zur Ausführung des Verfahrens eingerichtet ist. Vorteilhafterweise kann alternativ oder zusätzlich ein Sendeteil und/oder ein Sensor und/oder Rechenressourcen und/oder eine Sende-Empfangseinheit und/oder Authentisierungsverfahren des Anwendergeräts im Verfahren verwendet oder mitverwendet werden. Beispielsweise können die besagten eingelernten Daten (Lerndaten) mit dem Anwendergerät verarbeitet oder verwaltet werden. Auch kann ein Teil der Auswertung der besagten Kommunikation mit Mitteln des Anwendergeräts erfolgen.According to a third aspect, the invention is characterized by a user device, in particular a mobile user device, which is set up, the method, in particular together with a stationary living room operated audio output device and / or one or more operated in the house or living room, removed sensors and / or another computing unit to perform the method. In the context of this description, the application device can be a smartphone, tablet, smart watch, smart closes, in particular a garment with an electronic device integrated in the garment, data glasses, a device for generating or outputting VR (= Virtual Reality ), or be an appropriate development of such a device. In particular, the mobile user equipment may be connected to the audio system, multimedia system, or a suitable location in the home, e.g. be placeable by means of a special holder with or without a data interface. Furthermore, the mobile user device can also be regarded as part of the system according to the invention. For this purpose, the mobile application device can have a wired or wireless interface which is set up to carry out the method. Advantageously, alternatively or additionally, a transmission part and / or a sensor and / or computing resources and / or a transceiver unit and / or authentication method of the user equipment can be used or used in the method. For example, the said taught-in data (learning data) can be processed or managed with the user device. Also, a part of the evaluation of the said communication can take place with means of the user equipment.
Gemäß eines vierten Aspekts zeichnet sich die Erfindung aus durch ein Computerprogramm, insbesondere ein Computerprogrammprodukt umfassend das Computerprogramm, wobei das Computerprogramm ausgebildet ist, bei seiner Ausführung auf einer Recheneinheit zumindest einen wesentlichen Teil des erfindungsgemäßen Verfahrens oder eine vorteilhafte Ausgestaltung des Verfahrens gemäß einem oder mehrerer weiterer Merkmale des Verfahrens auszuführen. Insbesondere handelt es sich bei dem Computerprogramm um ein Computerprogramm, welches beispielsweise als eine App (= „Applikation“) auf einer Recheneinheit lauffähig ist. Das Computerprogramm bzw. Computerprogrammprodukt umfasst dabei einen ausführbaren Programmcode, der bei einer Ausführung mittels einer Recheneinheit oder mehreren verteilten Recheneinheiten, zumindest einen Teil des Verfahrens gemäß dem ersten Aspekt oder eine vorteilhafte Ausgestaltung des Verfahrens nach einem oder mehreren weiteren in diesem Dokument beschriebenen Merkmalen ausführt. Das Computerprogrammprodukt kann dabei als ein Update eines bisherigen Computerprogramms oder eines Betriebssystems ausgebildet sein, welches beispielsweise im Rahmen einer Funktionserweiterung, die betreffenden Teile Computerprogramms bzw. des entsprechenden Programmcode umfasst der auf zumindest einer besagten Recheneinheit ausführbar ist.According to a fourth aspect, the invention is characterized by a computer program, in particular a computer program product comprising the computer program, wherein the computer program is designed, when executed on a computer unit, at least an essential part of the method according to the invention or an advantageous embodiment of the method according to one or more others Characteristics of the method. In particular, the computer program is a computer program which, for example, can run as an app (= "application") on a computing unit. In this case, the computer program or computer program product comprises executable program code which, when executed by means of one or more distributed computing units, performs at least part of the method according to the first aspect or an advantageous embodiment of the method according to one or more other features described in this document. The computer program product can be embodied as an update of a previous computer program or of an operating system which, for example, within the framework of a functional extension, comprises the relevant parts of the computer program or the corresponding program code that can be executed on at least one said arithmetic unit.
Die in diesem Dokument beschriebenen Merkmale sind beliebig miteinander kombinierbar. Dabei ergeben sich explizit beschriebene sowie weitere durch einen Fachmann unschwer nachvollziehbare Vorteile. Der Anmelder behält sich das Recht vor, die in diesem Dokument beschriebenen Merkmale, auch unabhängig von dem ursprünglichen Wortlaut der unabhängigen Ansprüche, einzeln oder in diversen Kombinationen, zum Gegenstand eines weiteren unabhängigen Anspruchs, einer Teilungsanmeldung oder einer Nachanmeldung zu machen, unter der Voraussetzung, dass zumindest ein Parameter in einem stationären Wohnraum (gehörend zu einer Immobilie) ermittelt wird und daraufhin zumindest ein Audiosignal, eine auditive Meldung oder eine Sprachsteuerungsapplikation in einem stationären Wohnraum
Ausführungsbeispiele der Erfindung sind im Folgenden, ohne Einschränkung der Allgemeinheit, auch anhand der schematischen Zeichnungen näher erläutert. Es zeigen:
Die 1 zeigt ein Ablaufdiagramm des Verfahrens bzw. des entsprechen Computerprogramms bzw. des Softwareprodukts.Die 2 zeigt einen stationären Wohnraum1 , hier in Form von einem Grundriss einer Wohnung1 in der die Erfindung entstand und ausgeführt wird. Ferner wird eine selbsterklärende beispielhafte Einrichtung des Wohnraums1 sowie unterschiedliche beispielhaft definierte Raumbereiche RB1, ...RB6 dargestellt.Die 3 zeigt denselben Wohnraum1 mit schematisch dargestellten KommunikationenK-a ,K-b ,K-c ,K-a' , zwischen bestimmten RaumbereichenRB1 , ...RB6 bzw. mit unterschiedlichen Richtungsparametern. Es handelt sich beispielsweise um mehrere zeitlich teilweise überlappend geführte KommunikationenK-a ,K-b ,K-c ,K-a' .
- The
1 shows a flowchart of the method or the corresponding computer program or the software product. - The
2 shows astationary living room 1 , here in the form of a floor plan of anapartment 1 in which the invention was made and executed. Furthermore, a self-explanatory exemplary device of theliving space 1 as well as different exemplarily defined spatial areas RB1, ...RB6 shown. - The
3 shows thesame living space 1 with schematically represented communicationska .kb .kc .K-a ' , between certain room areasRB1 , ...RB6 or with different directional parameters. These are, for example, a plurality of temporally partially overlapping guided communicationska .kb .kc .K-a ' ,
Auch die nachfolgend beschriebenen Beispiele der Erfindung beziehen sich auf die Nutzung im Zusammenhang mit einem oder mehreren stationären, d.h. an einen festen Standort gebundenen Wohnräumen bzw. Immobilien. Der Begriff „Wohnraum“ ist im Rahmen des vorliegenden Dokuments als ein stationärer Wohnraum zu verstehen. Die nachfolgend beschriebenen Beispiele 1 - 7 veranschaulichen jeweils unterschiedliche Aspekte der Erfindung. Diese sind beliebig miteinander kombinierbar und in diversen Kombinationen vorteilhaft.Also, the examples of the invention described below relate to use in conjunction with one or more stationary, i. Residential areas or real estate linked to a fixed location. The term "living space" in the context of this document is to be understood as a stationary living space. The examples 1-7 described below each illustrate different aspects of the invention. These are arbitrarily combinable and advantageous in various combinations.
Zur Vereinfachung wird das zumindest ein besagtes weiteres Audiosignal
BEISPIEL 1 (Beschreibt die Vision des Erfinders)EXAMPLE 1 (Describes the vision of the inventor)
In der Vision des Erfinders wird die Erfindung in einem vernetzten Haus mit dem Wohnraum
Zur Ausführung der Erfindung, insbesondere zum Ermitteln des zumindest einen Parameters (
Diverse Mitglieder der im Wohnraum
Wenn eine Person etwas an eine oder mehrere Personen im Wohnraum
Der Begriff „Kommunikation“ bezieht sich im Verfahren auf eine Kommunikation
Beispielsweise erfolgt ein Anpassen eines, insbesondere Sprachanteile bzw. Personenstimmen umfassenden, Abschnitts des auszugebenden Audiosignals
Auch werden größtenteils Sprachanteile umfassende akustische Inhalte oder Audiosignale anders als keine oder wenige Sprachanteile umfassenden akustischen Inhalte oder Audiosignale verarbeitet. Dabei wird berücksichtigt, dass eine Kommunikation
Je nach Art des Audiosignals
Wenn ein Abschnitt des Audiosignals
Beispielsweise wird eine Ausgabe eines (nächsten) Abschnitts des Audiosignals
Im Verfahren wird eine räumliche Position des „Sprechers“ und/oder zumindest eines tatsächlich erkannten, vermuteten oder möglichen „Zuhörers“ und/oder zumindest eines tatsächlich erkannten, vermuteten oder möglichen „Sprechers und Zuhörers“, und/oder eine mehr oder minder wahrscheinliche Richtung der Kommunikation
Die im Rahmen der besagten Kommunikation
In diesem Beispiel wird auch ein Parameter (
Dabei kann ein Parameter
Abhängig von der erkannten Szene
Alternativ oder zusätzlich zu weiteren Merkmalen erfolgt eine Auswahl eines auszugebenden Abschnitts des Audiosignals
Bevorzugt wird ein Prioritätsmaß bei einer Auswahl von einem oder mehreren Abschnitten der Multimediainhalte, z.B. ein Abspielen von relativ kurzen Audio- oder Videosequenzen aus einem Internetportal, abhängig von dem ermittelten Parameter
Wird beispielsweise innerhalb einer Szene
Beispielsweise kann eine räumliche Verteilung bzw. Umverteilung von den auf Basis des Audiosignals
In diesem Beispiel wird auch erkannt und berücksichtigt, wer von den Personen (bzw. Personen von welchem Raumbereich
In einem Beispiel wird ein oder mehrere Parameter
Beispielsweise kann abhängig von einem Parameter
Ein prädizierter Parameter (
Das besagte Zeitintervall (
In einem Beispiel kann eine Kommunikation
Abhängig von den ermittelten Parametern
Auch kann ein Videoinhalt
Beispielsweise wird bei einer Übertragung eines Sportmatches, wenn der Zuschauer kurz z.B. in die Küche herausgeht oder sich vom Bildschirm abwendet, adaptiv eine entsprechende Hörversion mit einer auditiven Beschreibung der Ereignisse (des Sportmatches) zugeschaltet. Dabei kann das, bei der bestimmten Art der Inhalte möglicherweise unerwünschtes Pausieren vermieden werden und der Inhalt kann trotz Ablenkung der visuellen Wahrnehmung weiterhin in Echtzeit („live“) ausgegeben werden.For example, in a broadcast of a sports match, when the viewer is briefly watching, e.g. goes out into the kitchen or turns away from the screen, adaptively hooked up a corresponding audio version with an auditory description of the events (of the sports match). In doing so, undesirable pauses may be avoided for the particular type of content, and the content may continue to be output in real time ("live") despite distraction of the visual perception.
Ferner kann als ein Parameter
Zweckmäßigerweise wird durch das Anpassen eines Abschnitts des auszugebenden Audiosignals
Beispielsweise kann ein von einem auszugebenden Audiosignal
Unterschiedliche Abschnitte der Schallwellen werden im Verfahren unterschiedlich behandelt:Different sections of the sound waves are treated differently in the process:
Beispielsweise wird ermittelt, dass es sich bei einem Abschnitt akustischer Schallwellen, z.B. aus einem bestimmten Raumbereich
- - eine Spracheingabe
SE1 ,SE2 in die SprachsteuerungsapplikationSSA1 ,SSA2 , und/oder - - einen Sprachbefehl
SB1 ,SB2 für die SprachsteuerungsapplikationSSA1 ,SSA2 , und/oder - - eine Frage
FR1 ,FR2 an die SprachsteuerungsapplikationSSA1 ,SSA2 handelt.
- - a voice input
SE1 .SE2 into the voice control applicationSSA1 .SSA2 , and or - - a voice command
SB1 .SB2 for the voice control applicationSSA1 .SSA2 , and or - - a question
FR1 .FR2 to the voice control applicationSSA1 .SSA2 is.
Daraufhin kann zumindest eine erste Maßnahme oder eine erste Variante (
Ferner kann bei der Ausgabe einer auf die Spracheingabe
Beispielsweise wird ermittelt, dass es sich bei einem Abschnitt akustischer Schallwellen (aus einem bestimmten Raumbereich
In einem weiteren Beispiel des Verfahrens kann eine Sprachsteuerungsapplikation
Im Verfahren kann die zumindest eine auditive Meldung
- zum Inhalt,
- zum Thema,
- zur Wortwahl,
- zu einem linguistischen Merkmal,
- zur Sprache, Dialekt
- zum Kontext
- zumindest eines Abschnitts der Kommunikation
K-a ,K-b ,K-c ,K-a' ; - UND/ODER
In einer zweiten Abhängigkeit (hier: unähnlich oder explizit abweichend, kontrastierend) zu einem oder mehreren Parametern oder Aspekten zumindest eines Abschnitts der Kommunikation
- zum Inhalt,
- zum Thema,
- zur Wortwahl,
- zu einem linguistischen Merkmal,
- zur Sprache, Dialekt
- zum Kontext
- zumindest eines Abschnitts der Kommunikation
K-a ,K-b ,K-c ,K-a' ;
- Go to content,
- on the subject,
- to the wording,
- to a linguistic feature,
- to the language, dialect
- to the context
- at least part of the communication
ka .kb .kc .K-a ' ; - AND OR
In a second dependency (here: dissimilar or explicitly different, contrasting) to one or more parameters or aspects of at least a portion of the communication
- Go to content,
- on the subject,
- to the wording,
- to a linguistic feature,
- to the language, dialect
- to the context
- at least part of the communication
ka .kb .kc .K-a ' ;
Falls dabei, insbesondere nach oder während der Ausgabe der zumindest einer auditiven Meldung
Unterschiedliche weitere, etwa im selben Zeitintervall mit der auditiven Meldung
Auch kann das Verfahren für unterschiedliche Nutzer unterschiedlich ausgeführt werden. Als Nutzer kann dabei ein bestimmter, zugeordneter bzw. aktuell automatisch erkannter oder eingeloggter Nutzer, z.B. mit einem bestimmten Benutzerkonto angenommen werden. Ein „Nutzer“ kann auch einer Personengruppe entsprechen, bzw. die Personengruppe des Nutzers kann abhängig von dem erkannten bzw. angemeldeten Nutzer bestimmt werden oder umgekehrt. Insbesondere kann der Nutzer auch der „Hauptnutzer“, „Master“ oder einer von mehreren möglichen Nutzern sein, der das System auf eine bestimmte Art und Weise und/oder besonders intensiv nutzt. Ein derartiger Nutzer kann im Verfahren als eine Person zugehörig zu einer bestimmten Personengruppe (hier: „Eltern“) gehandhabt werden. Z.B. kann ein bestimmter Nutzer hinsichtlich der Veränderung des Parameters (
Auch kann ein Prioritätsmaß bestimmter Abschnitte des Audiosignals
Im Verfahren kann eine (physikalische oder virtuelle) Klangquelle, aus der ein Abschnitt des auszugebenen Audiosignals
Es kann eine Verteilung bzw. eine dynamische Umverteilung von zumindest zwei unterschiedlichen Audioinhalten
Je nach Art, oder entsprechend dem Prioritätsmaß zumindest einer auditiven Meldung
Auch können zwei oder mehrere unterschiedliche auditive Meldungen
Bei Bedarf wird auf einen Abschnitt des Audiosignals
Alternativ oder zusätzlich kann, abhängig von einem ermittelten Parameter
Ein oder mehrere Parameter (
In einer Variante der Erfindung ist vorgesehen, dass abhängig von dem erkannten inhaltlichen Merkmal (
Beispielsweise kann, wenn im Wohnraum
Das Verfahren wird auf eine natürliche, nicht genormte Kommunikation
Im Ergebnis kann beispielsweise ein automatisierter, eventgesteuerter, insbesondere betriebenes Ermitteln, Parametrieren und Kombinieren der Abschnitte der Audioinhalte und Videoinhalte, eine Art von Audio- und/oder Videoschnitt in Bezug auf diverse (Informations- und/oder Multimedia-) Inhalte ausgeführt werden, wobei das Ergebnis in Form der Schallwellen, Schallwellenmuster und/oder Vodeoausgaben im Wohnraum
Bei dem (weiteren) Audiosignal
- - ein Audiosignal eines Multimediainhalts, z.B. repräsentierend Musik, Kinosound, Teil eines Unterhaltungsprogramms. Bevorzugt gehört das Audiosignal
AS1 ,AS2 zu einem mitdem im Wohnraum 1 betriebenen AudiosystemASYS abspielbaren Audioprogramm, bzw. Multimediaprogramm. Ferner kann das AudiosignalAS1 ,AS2 ein über das besagte AudiosystemASYS abspielbarer Sound sein der zu einem Video, Videospiel, Simulation, virtuellen Realität, etc. gehört. Alternativ oder zusätzlich kann das AudiosignalAS1 ,AS2 aufgefasst werden alsein im Wohnraum 1 laut hörbarer TelekommunikationsinhaltTI1 ,TI2 bzw. Fernmeldeinhalt; Das zumindest eine AudiosignalAS1 ,AS2 kann auf Basis der von einem Datenträger eingelesenen oder zum Wohnraum1 oder dem entsprechenden Haus übertragenen, z.B. gestreamten Datenabschnitte ausgegeben werden. Auch können die besagten AudiosignaleAS1 ,AS2 mit weiteren Daten, z.B. Bild- VideodatenVI1 ,VI2 , Textdaten zusammenhängen bzw. diesen zugeordnet sein. Beispielsweise kann es sich bei dem AudiosignalAS1 ,AS2 um einen entsprechenden Teil einer Videosequenz handeln.
- an audio signal of a multimedia content, eg representing music, cinema sound, part of an entertainment program. The audio signal preferably belongs
AS1 .AS2 to one with the in theliving room 1 operated audio systemASYS playable audio program, or multimedia program. Furthermore, the audio signalAS1 .AS2 a via the said audio systemASYS playable sound that belongs to a video, video game, simulation, virtual reality, etc. Alternatively or additionally, the audio signalAS1 .AS2 be understood as one in theliving room 1 loud audible telecommunications contentTI1 .TI2 or telecommunications content; The at least one audio signalAS1 .AS2 can be read based on the read from a disk or to theliving room 1 or the corresponding house transmitted, eg streamed data sections are output. Also, the said audio signalsAS1 .AS2 with further data, eg picture video dataVI1 .VI2 , Text data related or assigned to this. For example, the audio signal may beAS1 .AS2 to act on a corresponding part of a video sequence.
Das (weitere) Audiosignal
Bevorzugt wird im Verfahren zumindest ein Abschnitt eines akustischen Inhalts
Beispielsweise kann ein sich stets in einer ähnlicher Form wiederholendes Geräusch
Auch kann ein (für zumindest eine Person relevanter oder gewünschter) akustischer Inhalt
Die besagten Erkennungsdaten zu zumindest einem ermittelten akustischen Inhalt
Wird beispielsweise erkannt, dass ein bestimmter erkannter, prädizierter oder wiedererkannter akustisches Inhalt
Die Erkennungsdaten zu zumindest einem akustischen Inhalt
BEISPIEL 2 (Beispielhafte Zusammenfassung zum Ablauf des Verfahrens)EXAMPLE 2 (Exemplary summary of the procedure)
Das Verfahren kann in Form folgender frei kombinierbarer Verfahrensschritte (
=> Schritt umfassend den Start des Verfahrens=> Step comprising the start of the procedure
Das Verfahren wird gestartet. Die Daten zur Ausführung des Verfahrens werden eingelesen. In diesem Beispiel erfolgt eine Aktivierung des Verfahrens einhergehend mit oder abhängig von einem Einschalten des Audiosystems
Zumindest zwei oder mehrere Arten der Audiosignale
Das auszugebende Audiosignal
Zumindest zwei oder mehrere Arten der auditiven Meldungen
=> Schritt mit dem Ermitteln der Information über die anwesende Personen, Szene, etc.=> Step by determining the information about the persons present, scene, etc.
In einem optionalen Schritt erfolgt ein Erkennen zumindest einer Person, bzw. eines bestimmten mit einer Person belegten Raumbereichs
In einem vereinfachten Fall kann eine menschliche Stimme, insbesondere eine bestimmte Stimme erkannt werden und eine Anwesenheit einer (weiteren) Person im Wohnraum
Optional wird eine Bewegung, bevorzugt eine prädizierte Bewegung der Personen im Wohnraum
In diesem Beispiel wird auch eine Kennung der Personengruppe, insbesondere des besagten Kommunikationstyps der zumindest einen Person im Wohnraum
Unterschiedlichen Personen bzw. Personengruppen oder Personen, die sich in unterschiedlichen Raumbereichen
In diesem Beispiel wird ferner auch eine aktuelle oder eine der besagten Kommunikation
Auch quantitative Parameter
Bevorzugt wird jeweils eine zweckmäßig gewählte Kombination der genannten Parameter
=> Schritt mit dem Ermitteln der Parameter der Kommunikation=> Step with determining the parameters of the communication
Ein Parameter
Insbesondere ist die besagte Kommunikation
Dabei werden ein oder mehrere Parameter, jeweils als Parameterwerte zu folgenden unterschiedlichen Arten von Parametern
- (
PK1 ), einen Richtungsparameter, kennzeichnend eine oder mehrere Richtungen zumindest eines Abschnitts der besagten KommunikationK-a ,K-b ,K-c ,K-a' , z.B. einer Transaktion, einer Kommunikationsbotschaft; - (
PK2 ), einen akustischen Parameter, z.B. eine räumliche Verteilung der akustischen Schallwellen der Sprache, ein oder mehrere Phasenparameter, z.B. Phasenverschiebungsparameter, Dynamik einer oder mehrerer Amplituden und/oder Frequenzen, einen Amplitudenverlauf, eine zeitliche Amplitudenveränderung, eine Veränderung des Frequenzspektrums bzw. des Energiedichtespektrums der Schallwellen eines Abschnitts der besagten KommunikationK-a ,K-b ,K-c ,K-a' im Wohnraum 1 ; - (
PK3 ), einen oder mehrere Stimmenparameter einer oder mehrerer (auditiv kommunizierender)Personen im Wohnraum 1 , eine oder mehrere Frequenzparameter oder Parametermuster einer Stimme, Erkennungsdaten kennzeichnend eine oder mehrere bereits eingelernte oder einzulernende, bzw. erkannte oder wiedererkannten Stimmen; - (
PK4 ), einen zeitlicher Parameter eines Abschnitts der KommunikationK-a ,K-b ,K-c ,K-a' , z.B. repräsentierend einen oder mehrere Zeitwerte im Zusammenhang mit zumindest einem Abschnitt der KommunikationK-a ,K-b ,K-c ,K-a' , z.B. mit dem Beginn oder dem Ende eines Satzes, einer Transaktion, einer linguistischen Struktur, eines Gesprächs, etc.; - (
PK5 ), ein inhaltliches Merkmal eines Abschnitts bzw. zumindest einer Transaktion innerhalb der KommunikationK-a ,K-b ,K-c ,K-a' . Das inhaltliche Merkmal kann sich auf einen hinreichend großen Abschnitt der KommunikationK-a ,K-b ,K-c ,K-a' bzw. auf eine oder mehrere Kommunikationsbotschaften beziehen. Hier werden mehrere Parameterwerte bzw. Maße, Kennungen zu einem oder mehreren inhaltlichen Merkmalen des zumindest einen Abschnitt der KommunikationK-a ,K-b ,K-c ,K-a' erfasst, ohne dabei den besagten Inhalt wiederzugeben; - (
PK6 ), einen Parameter des aktuellen oder erwarteten Kommunikationsverhaltens oder des Kommunikationsstils zumindest einer Person im Rahmen der besagten KommunikationK-a ,K-b ,K-c ,K-a' ; - (
PK7" ), einen linguistischen Parameter der KommunikationK-a ,K-b ,K-c ,K-a' , der z.B. bestimmte in der KommunikationK-a ,K-b ,K-c ,K-a' vorkommende linguistische Strukturen bzw. Konstrukte kennzeichnet; - (
PK8 ), einen oder mehrere Parameter der besagten KommunikationK-a ,K-b ,K-c ,K-a' , der oder die unmittelbar oder mittelbar repräsentieren:- - Phonologische Parameter (z.B. betreffend Phoneme, Silben);
- - Morphologische Parameter (z.B. betreffend Bestandteile einer Sprache (Morpheme), deren Kombination, Verhältnis zueinander, etc.);
- - Syntaktische Parameter (z.B. zur Form und der Struktur von Wortkombinationen, Satzgrammatik);
- - Lexikologische Parameter (z.B. betreffend Nutzung bestimmter Wörter innerhalb der Kommunikation);
- - Semantische Parameter (z.B. die Bedeutung von Wörtern in Bezug auf bestimmte Gegebenheiten);
- - Satzsemantische Parameter (z.B. betreffend logische Bedeutung von Sätzen);
- - Textsemantische Parameter (z.B. betreffend Bezüge auf erkannte Gegebenheiten oder Szene
S1 , ...S8 ).
- (
PK1 ), a directional parameter indicative of one or more directions of at least a portion of said communicationka .kb .kc .K-a ' , eg a transaction, a communication message; - (
PK2 ), an acoustic parameter, eg a spatial distribution of the acoustic sound waves of the speech, one or more phase parameters, eg phase shift parameters, dynamics of one or more amplitudes and / or frequencies, an amplitude curve, a temporal amplitude change, a change of the frequency spectrum or the energy density spectrum of the Sound waves of a section of said communicationka .kb .kc .K-a ' in theliving room 1 ; - (
PK3 ), one or more voice parameters of one or more (auditory communicating) persons in theliving space 1 , one or more frequency parameters or parameter patterns of a voice, identifying identification data one or more voices already learned or einzulernende, or recognized or recognized; - (
PK4 ), a temporal parameter of a section of the communicationka .kb .kc .K-a ' , eg, representing one or more time values associated with at least a portion of the communicationka .kb .kc .K-a ' eg with the beginning or the end of a sentence, a transaction, a linguistic structure, a conversation, etc .; - (
PK5 ), a content-related feature of a section or at least one transaction within the communicationka .kb .kc .K-a ' , The content feature can affect a sufficiently large section of the communicationka .kb .kc .K-a ' or to one or more communication messages. Here, a plurality of parameter values or measures, identifiers for one or more content-related features of the at least one section of the communicationka .kb .kc .K-a ' recorded without reproducing the said content; - (
PK6 ), a parameter of the current or expected communication behavior or the communication style of at least one person in the context of said communicationka .kb .kc .K-a ' ; - (
PK7 " ), a linguistic parameter of communicationka .kb .kc .K-a ' For example, the particular in communicationka .kb .kc .K-a ' characterizes existing linguistic structures or constructs; - (
PK8 ), one or more parameters of said communicationka .kb .kc .K-a ' which directly or indirectly represent:- - Phonological parameters (eg concerning phonemes, syllables);
- - Morphological parameters (eg concerning components of a language (morphemes), their combination, relationship to each other, etc.);
- - Syntactic parameters (eg on the form and structure of word combinations, sentence grammar);
- - lexicological parameters (eg regarding the use of certain words within the communication);
- - semantic parameters (eg the meaning of words in relation to specific circumstances);
- - sentence-semantic parameters (eg regarding the logical meaning of sentences);
- - Text-semantic parameters (eg regarding references to recognized conditions or scene
S1 , ...S8 ).
Zumindest ein Parameter
Bevorzugt werden zwei oder mehrere Parameter oder zwei unterschiedliche Arten der Parameter
Auch wird im Verfahren zumindest ein Parameter einer körperlichen Regung
Zu der zumindest einen körperlichen Regung gehören dabei auch eine oder mehrere (bestimmte) Gesten, Mimiken, Augenbewegungen, Körperausrichtungen oder daraus bestehende Kombinationen. In diesem Beispiel wird abhängig von einer (z.B. mit einer Kamera erfassten) körperlichen Haltung und/oder einer bewussten oder unbewussten körperlichen Regung, und/oder von bestimmten erkannten Gesten zumindest einer an der besagten Kommunikation
Alle besagten Parameter
In diesem Beispiel beziehen sich die ermittelten Parameter
Es können Parameter
Auch wird zwischen einem akustischen Inhalt aus dem Audiosystem
Eine im Wohnraum
In einem optionalen Beispiel wird auch ein (naturwissenschaftlicher, mathematischer, zeitlicher, kausaler) Zusammenhang zwischen einem Parameter
In diesem Beispiel werden die Daten auf Basis mehrerer zeitlicher Zusammenhänge und/oder eines Zusammenhangs zwischen den entsprechenden Parametern der körperlichen Regung, Gestik, Mimik, Augenbewegung, Lippenbewegung oder der entsprechenden Muster mit einem Parameter einer etwa im selben Zeitintervall stattfindenden sprachlichen Kommunikation
Eine Prädiktion eines Zeitwerts, nach welchem (mit einem gewissen Wahrscheinlichkeitsmaß) eine sprachliche Kommunikation
Beispielsweise wird ein besagter zeitlicher Zusammenhang und/oder ein Zusammenhang zwischen den Parametern
Alternativ oder zusätzlich zu weiteren Merkmalen des Verfahrens kann daraufhin (hier: auf das Erkennen bzw. Wiedererkennen eines Musters der körperlichen Regung, einer Auswahl eines passenden mathematischen Zusammenhangs, einer Belegung mit bestimmten Parameterwerten und der Prädiktion eines Parameters im Zusammenhang mit einem darauffolgenden Ereignis) eine weitere Maßnahme ausgeführt werden. In diesem Beispiel wird z.B. vorausschauend ein Multimediainhalt für das Kind ausgegeben welches einer Beruhigung des Kindes dient oder eine (für diesen Fall) vordefinierte Maßnahme ausgeführt werden. Beispielsweise kann eine oder eine von mehrere vordefinierten Melodien, Tonsequenzen, oder Audio- und/oder Videoaufnahmen ausgegeben und/oder ein oder mehrere vordefinierte Reize ausgegeben werden. Bevorzugt wird auf das Ermitteln eines oder mehreren derartiger Erkennungsmuster, insbesondere unter Berücksichtigung eines ermittelten Parameters eines Kommunikationslauts des Kindes eine Aufnahme mit einer Stimme und/oder Bild bzw. Videosequenz eines Elternteils bzw. Erziehers ausgegeben. Auch kann das Kind beispielsweise durch Ansteuerung eines Aktors geschaukelt bzw. gestreichelt werden.As an alternative or in addition to further features of the method, a recognizing or recognizing a pattern of the physical impulse, a selection of a suitable mathematical relationship, an occupancy with certain parameter values and the prediction of a parameter in connection with a subsequent event can then be followed be carried out further action. In this example, e.g. anticipating a multimedia content for the child spent which is used to calm the child or a (for this case) predefined action are executed. For example, one or more predefined tunes, sound sequences, or audio and / or video recordings may be output and / or one or more predefined stimuli may be output. A recording with a voice and / or image or video sequence of a parent or educator is preferably output upon the determination of one or more such detection patterns, in particular taking into account a determined parameter of a communication sound of the child. Also, the child can be rocked or petted, for example, by controlling an actuator.
Alternativ oder zusätzlich kann auf das Ermitteln eines besagten Zusammenhangs in Bezug auf eine Person bei einer oder mehreren Ausführungen des Verfahrens in einem Wohnraum
Alternativ, bevorzugt zusätzlich, zum Ermitteln des zumindest einen Parameters
Beispielsweise kann eine Spracheingabe
=> Schritt mit dem Erkennung einer Emotion und/oder Absicht=> Step with the recognition of an emotion and / or intention
In einem optionalen Schritt wird eine Erkennung einer Emotion und/oder eine Erkennung einer Absicht einer Person, insbesondere einer an der besagten Kommunikation
Beispielsweise kann beim Erkennen einer bestimmten Klasse (
Die Erkennung der Emotion und/oder Absicht kann insbesondere mit Mitteln einer Kamera, insbesondere einer Kamera der Sensorvorrichtung
=> Schritt mit dem Ermitteln eines Prioritätsmaßes eines Kommunikationsabschnitts=> Step with determining a priority measure of a communication section
In einem optionalen Schritt wird die Art eines Abschnitts der besagten Kommunikation
In diesem Beispiel wird das Prioritätsmaß zweidimensional, insbesondere mit zumindest zwei mehr oder minder voneinander unabhängigen Indikatoren ermittelt. Es wird ein erster Prioritätsindikator zumindest eines Abschnitts der Kommunikation
Nach diesem Prinzip definierte Prioritätsindikatoren sind für eine spätere Verarbeitung der Prioritätsmaße im Verfahren sehr förderlich. Beispielsweise wird auch in Bezug auf zumindest einen Abschnitt des Audiosignals
=> Schritt mit dem Ermitteln eines Maßes für die Erfolgswahrscheinlichkeit=> Step with determining a measure of the probability of success
In einem optionalen Schritt des Verfahrens werden ein oder mehrere Maße für die Erfolgswahrscheinlichkeit ermittelt, dass ein (bestimmter) Abschnitt eines im Wohnraum
Bevorzugt kann sich ein solches Maß der Erfolgswahrscheinlichkeit auf eine nahe Zukunft bzw. auf ein (zumindest teilweise) bevorstehendes Zeitintervall beziehen. Ein oder mehrere Maße für die Erfolgswahrscheinlichkeit, z.B. für unterschiedliche Zeitintervalle oder unterschiedliche Abschnitte eines oder mehrerer auszugebenden Audiosignale
Bevorzugt erfolgt eine Auswahl einer zweckmäßigen (Maßnahmen-)Variante (
Falls beispielsweise das Maß der Erfolgswahrscheinlichkeit einen bestimmten Grenzwert unterschreitet bzw. überschreitet, kann daraufhin eine Auswahl einer Maßnahme in Bezug auf das Audiosignal
=> Schritt mit dem Ermitteln eines Prioritätsmaßes eines Abschnitts des Audiosignals=> Step of determining a priority measure of a portion of the audio signal
In einem optionalen Schritt wird die vorliegende Art zumindest eines Abschnitts des auszugebenden Audiosignals
In diesem Beispiel wird das Prioritätsmaß zweidimensional, insbesondere mit zumindest zwei mehr oder minder voneinander unabhängigen Indikatoren ermittelt. Es wird ein erster Prioritätsindikator zumindest eines auszugebenden Abschnitts des Audiosignals
Die Prioritätsindikatoren des zumindest eines Abschnitts des Audiosignals
=> Schritt mit der Erfassung weiterer optional zu berücksichtigender Größen=> Step with the capture of further optional variables
In einem optionalen Schritt wird ein Parameter (PAI-a, PAI-b, PAI-c, PAI-d) des zumindest eines weiteren akustischer Inhalts
Auch kann der besagte weitere im Wohnraum
=> Schritt mit dem Einlesen bzw. Ermitteln von anzuwendenden Optimierungskriterien=> Step with the reading in or determination of optimization criteria to be applied
In einem optionalen Schritt wird ein oder mehrere vorgegebene oder ermittelte Optimierungskriterien (
Abhängig von zumindest einem Optimierungskriterium (
Die Kombination und ggf. eine jeweils unterschiedliche Gewichtung der zu berücksichtigenden Parameter
=> Schritt mit dem Bestimmen oder Anpassen der Parameter des AS und/oder AM=> Step with determining or adjusting the parameters of the AS and / or AM
Abhängig, insbesondere auf Basis von den ermittelten oder prädizierten Parametern
Im Ergebnis hängt ein Parameter (
Die besagte auditive Meldung
Ausnahmsweise kann zumindest eine erzeugte auditive Meldung
Alternativ oder zusätzlich kann eine bestimmte Bedienhandlung oder ein Auslösekriterium dafür vorgesehen werden, eine auditive Meldung
Beispielsweise kann abhängig von einem oder mehreren Kommunikationen
For example, depending on one or more communications
FOLGENER ABSCHNITT nur für die Anmeldung (
In diesem Beispiel wird auch ein Parameter einer auditiven Meldung
Ein oder mehrere Parameter bzw. Arten von Parameter der Antwort RESP können dabei in einer analogen Weise wie die besagten Parameter (
One or more parameters or parameters of the response RESP can be used in an analogous manner as the said parameters (
Das Bestimmen oder Anpassen eines oder mehrerer (zweckmäßig gewählter) Parameter (
Das Bestimmen oder Anpassen eines oder mehrerer Parameter (
(
(
(
(
(
(
(
(
(
(
(
(
(
Alle besagten Parameter (
Dabei erfolgt im Verfahren ein, insbesondere laufend, bzw. zyklisch ausgeführtes, Bestimmen oder Anpassen eines oder mehrerer Parameters (
Das Bestimmen bzw. Anpassen der Parameter (
Es folgt eine beispielhafte Beschreibung der Varianten des Bestimmens bzw. Anpassens eines oder mehrerer Parameter (
Es folgt Beschreibung der Variante
Beispielsweise wird ein Zeitparameter (
Ein solches Aufteilen, eine spätere Wiedergabe und/oder ein späteres Zusammenfügen, z.B. mit zumindest einem weiteren Abschnitt kann dabei auch abhängig von dem prädizierten inhaltlichen Merkmal
Beispielsweise betrifft das Bestimmen oder Anpassen eines Parameters eine Auswahl, insbesondere das Anpassen eines Zeitintervalls für die Ausgabe zumindest eines Abschnitts des Audiosignals
Ferner erfolgt ein Ermitteln einer geeigneten Stelle zum Pausieren, Aufteilen und/oder Zusammenfügen eines Abschnitts des Audiosignals
In diesem Beispiel werden auch zeitliche Intervalle ermittelt, die beispielsweise Pausen innerhalb einer sprachlichen Kommunikation
In diesem Beispiel wird eine Reihenfolge zumindest zweier auszugebender, z.B. sich in einer Warteschlange befindlicher, auditiver Meldungen
Es folgt Beschreibung der Variante
Falls im Verfahren zumindest ein Richtungsparameter
Dabei wird zumindest ein Parameter (
Dabei kann auch eine bestimmte zweckmäßige Verteilung akustischer Schallwellen auf Basis des Audiosignals
Es folgt Beschreibung der Variante
Falls im Verfahren ein Prioritätsmaß eines Abschnitts der besagten Kommunikation
Es folgt Beschreibung der Variante
Falls im Verfahren ein inhaltliches Merkmal (
Es folgt Beschreibung der Variante
Es erfolgt eine Bildung bzw. Platzierung einer oder mehreren virtueller Klangquellen, insbesondere Schallquellen derart, dass zwei, z.B. Sprache umfassende, auszugebende Inhalte, wobei zumindest ein der zumindest zwei auszugebenden Inhalte auf Basis des auszugerbenden Audiosignals
Beispielsweise kann ein auf Basis eines Abschnitts des Audiosignals
Beispielsweise kann ein auf Basis der zumindest einer auditiven Meldung
Es folgt Beschreibung der Variante
Falls im Verfahren ein Parameter
Bevorzugt wird im Verfahren ein (naturwissenschaftlicher, mathematischer, zeitlicher, kausaler) Zusammenhang zwischen einem erkannten und ggf. klassifizierten Mustern einer körperlichen Regung, Gestik, Mimik, Augenbewegung, Lippenbewegung und einer in einem Zusammenhang mit diesem stehende auditive, sprachliche Kommunikation ermittelt und berücksichtigt. Insbesondere kann abhängig von dem besagten Zusammenhang ein Zeitparameter (
Es kann eine (für zumindest eine Person selbst mehr oder minder bewusste oder intuitiv oder reflexartig ausgeführte) körperliche Regung ermittelt und verarbeitet, insbesondere interpretiert werden. Dabei kann auch die Absicht bzw. den Wunsch zumindest einer Person erkannt werden, in eine bestimmte Richtung (und somit ggf. einem bestimmten Inhalt) zuzuhören. Daraufhin kann ein Parameter des aus der betreffenden Richtung mit einem ersten Inhalt und/oder aus der zumindest einer alternativen Richtung mit einem zweiten Inhalt angepasst werden. Beispielsweise kann die Lautstärke der Schallwellen die aus einer betreffenden, bestimmten Richtung bzw. Klangquelle ausgegeben werden, erhöht werden, und/oder die Laustärke des jeweils weiteren Inhalts zeitweise reduziert werden.It can be a (for at least one person even more or less conscious or intuitive or knee-jerk executed running) determined and processed, in particular interpreted. At the same time, the intention or the wish of at least one person to be recognized in a certain direction (and thus, if necessary, a certain content) can be recognized. Thereupon, a parameter of the direction concerned can be adapted with a first content and / or from the at least one alternative direction with a second content. For example, the volume of the sound waves output from a particular, specific direction or sound source can be increased, and / or the volume of the respective further content can be temporarily reduced.
Auch kann ein Einlernen einer bestimmten körperlichen Regung als ein bestimmtes (durch bestimmte Merkmale gekennzeichnetes) Muster erfolgen, wobei die körperliche Regung bzw. das Muster bei einem nicht hinreichenden Hören bzw. Verstehen, insbesondere für eine bestimmte im Wohnraum
Auch können ein auf die nahe Vergangenheit bezogener Parameter (
Es folgt Beschreibung der Variante
In einer Variante kann auf das Ermitteln, insbesondere Prädizieren eines Parameters
Beispielsweise kann es sich dabei um eine, insbesondere fließende Umschaltung bzw. Umwandlung zwischen zumindest zwei Parameter-Datensätzen repräsentierend bzw. entsprechen zu unterschiedlichen Einstellungen des Raumklangs etwa umfassend eine Nachbildung bestimmter akustischer Raumeigenschaften, z.B. ein (bestimmter) „Konzertsaal“, „Jazz-Club“, „Science-Fiction“, „Kino“, „Gaming“, etc. „Nachrichten“, handeln. Dabei kann abhängig von dem erfassten Parameter
Ferner können Einstellungen des Raumklangs und/oder weitere Einstellungen jeweils im Zusammenhang mit einem Erkennen eines Parameters
Es folgt Beschreibung der Variante
Optional kann vorgesehen werden, dass für einen bestimmten, z.B. seitens eines Nutzers wählbaren, Raumbereich
Bevorzugt wird auf die Erkennung einer bestimmten Person, einer Person zugehörig zu einer bestimmten Personengruppe und/oder unter Berücksichtigung eines oder mehrerer wählbaren Raumbereiche
Im Ergebnis kann beispielsweise eine mehr oder minder lokale Zone in der Umgebung einer Person, bzw. einer Person zugehörig zu einer bestimmten Personengruppe geschaffen werden, in der ein oder mehrere bestimmte Grenzwerte, z.B. Höchstwerte und/oder Mindestwerte, eingehalten werden. Das zumindest eine auszugebende Audiosignals
Es kann ein mathematischer Zusammenhang zwischen einem Parameter (
Es folgt Beschreibung der Variante
Abhängig von einem oder mehreren ermittelten, insbesondere prädizierten Parameter
Ein oder mehrere Parameter der Sprachgenerierung (
- - Morphologische Parameter (z.B. betreffend Bestandteile einer Sprache (Morpheme), deren Kombination, Verhältnis zueinander, etc.);
- - Syntaktische Parameter (z.B. zur Form und der Struktur von Wortkombinationen, Satzgrammatik);
- - Lexikologische Parameter (z.B. betreffend Wortwahl);
- - Semantische Parameter (z.B. die Bedeutung von Wörtern in Bezug auf erkannte Gegebenheiten);
- - Satzsemantische Parameter (z.B. betreffend logische Bedeutung von Sätzen);
- - Textsemantische Parameter (z.B. betreffend Bezüge auf erkannte Gegebenheiten, und/oder auf einen Parameter einer erkannten oder prädizierten Szene
S1 , ...S8 im Wohnraum1 ).
- - Morphological parameters (eg concerning components of a language (morphemes), their combination, relationship to each other, etc.);
- - Syntactic parameters (eg on the form and structure of word combinations, sentence grammar);
- - lexicological parameters (eg regarding word choice);
- - semantic parameters (eg the meaning of words in terms of recognized facts);
- - sentence-semantic parameters (eg regarding the logical meaning of sentences);
- Text-semantic parameters (eg relating to references to recognized conditions, and / or to a parameter of a recognized or predicted scene
S1 , ...S8 in the living room1 ).
Es folgt Beschreibung der Variante
Falls der betreffende Abschnitt des Audiosignals
Wenn ermittelt, wird, dass eine Person einen Raumbereich
Bevorzugt kann abhängig von einem oder mehreren Parametern
Im Ergebnis kann eine Vielzahl diverser Abschnitte (z.B. Datenabschnitte, die den Abschnitten eines auszugebenden Audiosignals
Die jeweilige Trennung und/oder das Zusammenfügen der Abschnitte erfolgt bevorzugt an den, insbesondere im Verfahren ermittelten, geeigneten Stellen. Beispielsweise kann die Stimme eines Nachrichtenmoderators an einer Stelle unterbrochen und/oder an einer Stelle ausgegeben und/oder mit einem weiteren Abschnitt zusammengefügt werden, die etwa einem Übergang zwischen zwei unterschiedlichen Themen oder Inhalten entspricht. Beispielsweise können die besagten geeigneten Stellen ermittelt werden, die jeweils zumindest zwei mehr oder minder zu den Themenkriterien passen, die abhängig von der besagten Kommunikation
Dabei kann beispielsweise ein Abschnitt des Audiosignals
In diesem Beispiel kann die Bildung der Sequenz aus den ermittelten Abschnitten adaptiv, abhängig von den im Verfahren eingelesenen, erfassten, ermittelten Informationen gesteuert werden. Bevorzugt erfolgt die Bildung der Sequenz aus den mehreren ermittelten Abschnitten derart, dass ein Kontextbezug und/oder ermittelte, hinterlegte, bevorzugte Assoziationsverbindungen zu zumindest einer erkannten Szene
Die Auswertung, insbesondere die Interpretation oder Weiterverarbeitung der zumindest einer Spracheingabe
Optional umfasst das Verfahren eine Speicherung, insbesondere Zwischenspeicherung bestimmter, mit der besagten Kommunikation
=> Schritt mit einem Ermitteln oder Bewerten eines Erfolgsmaßes=> Step with a determination or evaluation of a measure of success
In einer optionalen Variante des Verfahrens wird der (aktuelle oder voraussichtliche) Erfolg der Ausgabe zumindest eines Abschnitts des Audiosignals
Ferner kann eine Zugehörigkeit einer Person zu einer Personengruppe, z.B. einem von mehreren vorausbestimmten Wahrnehmungstypen, Kommunikationstypen, ... etc. bei einem oder mehreren Ausführungen des Verfahrens bestimmt, insbesondere gelernt und für weitere Zwecke bereitgestellt werden.Furthermore, an affiliation of a person to a group of persons, e.g. one of a plurality of predetermined types of perception, types of communication, ... etc. in one or more embodiments of the method, in particular learned and provided for further purposes.
In einer Variante des Verfahrens kann auch eine Ausgabe von Daten auf Basis eines vorher erfassten bzw. zwischengespeicherten Abschnitts der Kommunikation
Dabei kann für den jeweilige Sprecher erkannt, ob seine Botschaft hinreichend oder nicht hinreichend gehört werden konnte. Beispielsweise kann ein oder mehrere von einem niedrigen Erfolgsmaß betroffene Abschnitte des Audiosignals
In einem vereinfachten Fall kann es sich dabei um eine Wiedergabe eines vorher erfassten, z.B. in einem Ringspeicher gespeicherten, Abschnitts der Kommunikation
Auch kann ein (vorher erfasster) Abschnitt der Kommunikation
Falls beispielsweise eine körperliche Regung oder ein Muster einer körperlichen Regung erkannt wird, die oder das auf ein nicht hinreichendes Verständnis deutet, kann eine automatische Übersetzung eines vorab erfassten Abschnitts der Kommunikation
Beispielsweise kann eine (Zwischen-)Speicherung der Daten oder Inhalte
Bevorzugt wird eine Ausgabe einer Information
- - ein ermitteltes, insbesondere prädiziertes Erfolgsmaß eine vorausbestimmte Schwelle überschreitet, und/oder
- - ein oder mehrere akustische Parameter, insbesondere in dem Raumbereich wo sich der Adressat des Abschnitts der Kommunikation
K-a ,K-b ,K-c ,K-a' (zumindest wahrscheinlich) befindet, z.B. eine Schwelle unterschreiten, und/oder - - wenn der Adressat des Abschnitts der Kommunikation
K-a ,K-b ,K-c ,K-a' seine räumliche Position derart verändert, z.B. derart, dass das Erfolgsmaß hinreichend anteigt.
- a determined, in particular predicted measure of success exceeds a predetermined threshold, and / or
- one or more acoustic parameters, in particular in the spatial area where the addressee of the communication section
ka .kb .kc .K-a ' (at least likely), eg below a threshold, and / or - - if the addressee of the section of communication
ka .kb .kc .K-a ' changed its spatial position in such a way, eg in such a way that the measure of success increases sufficiently.
=> Schritt mit der Handhabung der Daten oder dem Beenden des Verfahrens=> Step to handle the data or stop the procedure
Ausgewählte Daten im Zusammenhang mit der Ausführung des Verfahrens werden gespeichert. In diesem Beispiel werden Statistikdaten, Daten repräsentierend einen oder mehrere Erfolgsmaße, ermittelte oder aktualisierte mathematische Zusammenhänge, eingelernte Daten (Lerndaten) bzw. auf Basis der besagten Daten ermittelte Datensätze, die letztgültigen oder von einem Nutzer bevorzugten Einstellungen in einem nichtflüchtigen Speicher gespeichert. In diesem Beispiel erfolgt auch ein Zuordnen zwischen einer oder mehreren Nutzereinstellungen und einer oder mehreren im Verfahren erkannten Parameter
Die Speicherung erfolgt innerhalb des Hauses z.B. in der Recheneinheit
In einem Beispiel wird ein mathematischer Zusammenhang zwischen einem oder mehreren Parametern
Ferner kann eine zumindest statistische Korrelation zwischen einem oder mehreren Werten oder Mustern zumindest eines oder mehrerer Parametern
Beispielsweise kann auf Basis eines veränderten, wesentlich überdurchschnittlich gehäuften und/oder unterdurchschnittlich seltenen Auftreten der (bestimmten) Laute, Szenen, Aktionen, (Parameter-) Muster, z.B. in Bezug auf Haustiere, bzw. Haustiere einer bestimmten Art in einer Vielzahl der Wohnräume
Dabei kann eine Vielzahl solcher oder derartigen Daten auf Basis mehrerer Wohnräume
Auch bestimmte (über Vielzahl der Wohnräume
Die Erfindung kann mit einem System aus zwei oder mehreren Vorrichtungen realisiert bzw. betrieben werden. Bei zumindest einer der zur Ausführung des Verfahrens eingerichteten Vorrichtungen handelt es sich um eine im Wohnraum
In diesem Beispiel erfolgt das Erzeugen der Daten zur Ausgabe der auditiven Meldung
Dennoch sind auch weitere Varianten möglich: eine auditive Meldung
Das Verfahren kann auf zwei oder mehrere gleichzeitig bzw. sich zeitlich überlappend und/oder räumlich überschneidend ablaufenden Kommunikationen
Auch kann ein oder mehrere Erfolgsmaße im Zusammenhang mit einer oder mehreren Ausführungen des Verfahrens (unter bestimmten Voraussetzungen, bei bestimmten Parametern
Das „Anpassen“ bedeutet im Verfahren ein zweckmäßiges Verändern, welches beispielsweise zur Erreichung eines oder mehreren vorausbestimmter Ziele, beispielsweise entsprechend einem oder mehreren vorausbestimmten Logiken und/oder mathematischen Zusammenhängen, und/oder zumindest einem Optimierungskriterium (
Dabei kann im Verfahren eine gezielte Verbesserung der Hörbarkeit bestimmter Inhalte oder bestimmter Teile, insbesondere Kanäle eines Raumklangsignals bzw. eines eine Raumklangvorschrift oder Raumklangdaten umfassenden Audiosignals
Im Verfahren kann ein zweckmäßiges oder vorgegebenes Maß der Hörbarkeit und/oder Verständlichkeit der besagten Kommunikation
In einem bevorzugten Beispiel erfolgt ein Ermitteln, insbesondere Prädizieren eines Parameters
In einem weiterführenden Beispiel des Verfahrens ist der Wohnraum
Im Ergebnis werden auch Parameter der Schallwellen die für auf Basis eines oder mehrerer auszugebenden Audiosignale
Aus den vorstehenden Ausführungen ergibt sich eine Vielzahl von Merkmalen der Erfindung die sowohl einzeln als auch in diversen Kombinationen vorteilhaft sind.From the foregoing, there are a variety of features of the invention which are advantageous both individually and in various combinations.
Mit dem Verfahren wird eine verbesserte, insbesondere effizientere Kommunikation
BEISPIEL 3 (Anpassen weiterer Audio-Inhalte, von weiteren Geräten im Wohnraum)EXAMPLE 3 (Adjusting other audio content, from other devices in the living room)
Alternativ oder zusätzlich zum Anpassen der zumindest einer auditiven Meldung
Dabei kann eine Veränderung von Parametern
In diesem Beispiel kann ein Verändern oder Anpassen eines oder mehrerer Parameter einer Soundemission
Beispielsweise kann das Bestimmen oder Anpassen abhängig von dem zumindest einen ermittelten, insbesondere prädizierten Parameter der Kommunikation
Beispielsweise kann auf diese Weise ein, bevorzugt vorausschauende, Verändern oder Anpassen eines oder mehrerer im Wohnraum
Falls beispielsweise ermittelt wird, dass im Wohnraum
BEISPIEL 4 => (Anpassung auf Sprache, Dialekt, Geschlecht)EXAMPLE 4 => (adaptation to language, dialect, gender)
Optional kann ein Parameter der Kommunikation
Optional kann das Verfahren umfassen, dass ein Parameter
Beispielsweise kann eine im Wohnraum
In einem besonderen Beispiel des Verfahrens wird erkannt, dass ein Zuhörer, insbesondere der Zuhörer (Adressat) der sprachlichen Botschaft innerhalb der besagten Kommunikation
In einem besonderen Beispiel des Verfahrens kann ein inhaltliches Merkmal (
Beispielsweise kann daraufhin eine scherzhafte und/oder ironische Sprachmitteilung erzeugt werden.In a particular example of the method, a content characteristic (
For example, a jocular and / or ironic voice message may then be generated.
BEISPIEL 5 (Berücksichtigung der Körpersprache)Example 5 (consideration of body language)
Es kann eine Auswertung eines Parameters
Es kann, z.B. aus einem zeitlichen Zusammenhang zwischen einem Parameter Kommunikationsbotschaft (
Im Gegensatz etwa zu einer Eingabe eines Steuerungsbefehls
Daraufhin kann ein oder können mehrere Parameter (
Alternativ oder zusätzlich kann abhängig von den Daten einer im Wohnraum
Ein ermittelter Parameter
Dabei können auf Basis von einem oder mehreren naturwissenschaftlich beschreibbaren, in Bezug auf Kommunikation
Ferner kann im Verfahren ein Ermitteln und Berücksichtigen eines mathematischen Zusammenhangs zwischen einem Parameter
BEISPIEL 6 („Handhabung der Klangquellen auf Basis eines oder mehrerer Inhalte“)EXAMPLE 6 ("Handling Sound Sources Based on One or More Contents")
In einem weiterführenden Beispiel ist das Verfahren derart ausgestaltet, dass zumindest zwei der akustisch auszugebenden Inhalte
In diesem Beispiel kann das Erzeugen oder Platzieren der Klangquellen mittels Ansteuerung von zwei beabstandet (im Abstand von 50 cm, 150 cm, 2 Meter, 4 Meter angeordneten Audioausgabevorrichtungen, z.B. Lautsprechern oder vorwiegend der Hochton-Lautsprecher erfolgen. Alternativ oder zusätzlich kann das Erzeugen oder Platzieren der Klangquellen mittels Ansteuerung der zumindest zwei, in zumindest
In einem Beispiel wird werden abhängig von einem oder mehreren Parametern (
Bevorzugt wird in diesem Beispiel ein zweites Audiosignal
Ferner kann ein Parameter einer (bestimmten) körperlichen Regung, insbesondere eine bestimmte Geste einer Person beispielsweise mittels einer im Wohnraum
Beispielsweise werden zwei akustisch auszugebende Inhalte (aus einer Audiosignalquelle oder aus verschiedenen Audiosignalquellen), die insbesondere unterschiedliche Informationsinhalte bzw. Sprache umfassende Inhalte repräsentieren, insbesondere nach einer vorausbestimmter Vorschrift, auf zwei virtuelle Klangquellen, bzw. synthetisierten Schallquellen zugeordnet, insbesondere verteilt. Dabei können die zumindest zwei Inhalte aus zumindest zwei Richtungen wahrnehmbar (zumindest potentiell bzw. für potentiell im Wohnraum anwesende Personen hörbar) gemacht. Die zumindest zwei Richtungen können, z.B. in einem Richtungsunterschied von ca. 90° - 120° oder 120° - 180° zueinander und/oder in Richtung von +/- 45° - 60° zu der Kopfrichtung (Blickrichtung) der Person platziert werden.For example, two acoustically outputting contents (from an audio signal source or from different audio signal sources), which in particular represent contents comprising different information content or language, in particular according to a predetermined rule, are allocated, in particular distributed, to two virtual sound sources or synthesized sound sources. In this case, the at least two contents can be made perceptible from at least two directions (audible at least potentially or for persons potentially present in the living space). The at least two directions may be, e.g. be placed in a directional difference of about 90 ° - 120 ° or 120 ° - 180 ° to each other and / or in the direction of +/- 45 ° - 60 ° to the head direction (line of sight) of the person.
Ferner kann abhängig von einer Handbewegung der Person, z.B. einer Bewegung der Hand der Person in Richtung einer Klangquelle und/oder zu dem rechten Ohr oder linken Ohr, ein Parameter des zumindest eines Abschnitts des Audiosignals mit dem entsprechenden Inhalt, z.B. aus der Klangquelle rechts oder links ausgegebenen Inhalt variiert werden. Beispielsweise kann eine Person mit ihrer Hand auf eine Klangquelle, z.B. auf die Richtung und/oder Entfernung, weisen und anschließend die Hand in einem gegebenen Maße nach oben heben oder senken und/oder die Handfläche nach oben oder nach unten halten bzw. richten. Daraufhin kann ein Parameter des Audiosignals aus der betreffenden Klangquelle (in einem vereinfachten Fall die Lautstärke) erhöht oder gesenkt werden.Further, depending on a hand movement of the person, e.g. a movement of the person's hand towards a sound source and / or to the right ear or left ear, a parameter of the at least one portion of the audio signal with the corresponding content, e.g. from the sound source right or left output content can be varied. For example, a person may place their hand on a sound source, e.g. pointing and / or removing, pointing and then raising or lowering the hand to a given degree and / or holding the palm up or down. Thereupon, a parameter of the audio signal from the respective sound source (in a simplified case, the volume) can be increased or decreased.
Beispielsweise kann auch eine zu der Raumrichtung und/oder Position der besagten Klangquellen korrespondierende, insbesondere eine der Raumrichtung und/oder Position räumlich entsprechende, Visualisierung erzeugt werden. Bevorzugt wird die Visualisierung in Form einer Lichtprojektion, einer holografischen Abbildung im Wohnraum, einer Augmentation oder einer VR-Anzeige (= Virtual-Reality), erfolgen. Eine solche Visualisierung kann ferner eine (symbolische, textuelle, grafische, fotografische, fotorealistische) Information umfassen die kennzeichnend sind zu der Quelle, Inhalt, Absender, Thema, Genre, Bezugsperson, eine Steuerungs- oder Bedienmöglichkeit, etc. eines Abschnitts des entsprechenden Audiosignals. Beispielsweise kann dabei ein Abschnitt eines Multimediasignals, eines Telekommunikationsinhalts oder einer auditiven Meldung, beispielsweise symbolhaft oder durch Farbgebung als solche gekennzeichnet werden. Eine solche Visualisierung kann beispielweise in einer sogenannten Datenbrille, auf Basis der eingelesenen Daten zu zumindest einem besagten Inhalt erfolgen.For example, a visualization corresponding to the spatial direction and / or position of said sound sources, in particular spatially corresponding to one of the spatial direction and / or position, can also be generated. The visualization is preferably carried out in the form of a light projection, a holographic image in the living space, an augmentation or a VR display (= virtual reality). Such visualization may further include (symbolic, textual, graphical, photographic, photorealistic) information indicative of the source, content, sender, subject, genre, caregiver, control or operation, etc. of a portion of the corresponding audio signal. By way of example, a section of a multimedia signal, of a telecommunications content or of an auditory message, for example symbolically or by coloration, can be identified as such. Such a visualization can be done, for example, in a so-called data glasses, based on the read data for at least one content.
Beispielsweise kann die Person eine, insbesondere von ihr wahrgenommene, Position der Klangquelle mittels einer körperlichen Geste verändern. Beispielsweise kann die Person eine Klangquelle „mit der Hand greifen“ oder „mit der Hand markieren“, wobei eine nachfolgende Bedienaktion sich auf eine markierte Klangquelle bezieht. Auch kann die Richtung und/oder Entfernung einer bestimmten, insbesondere vorher ausgewählten, Klangquelle (eine Richtung, in der die Klangquelle wahrgenommen wird) auf ein Erkennen einer bestimmten Geste oder eines Musters einer körperlichen Regung verändert werden. Beispielsweise kann eine Klangquelle, respektive ein zu der Klangquelle zugewiesener oder der Klangquelle entsprechender Inhalt, mittels einer Geste „weggeschoben“ oder mit der Hand an einer, mit einer bestimmten Geste zugewiesenen Stelle platziert, quasi „fixiert“ werden. In diesem Fall können weitere, aktive Klangquellen ihre Position beibehalten, oder nach vorausbestimmten Bedingungen oder in einem vorausbestimmten Maß verschoben werden, z.B. um einen freigewordenen Raumbereich bzw. Winkelbereich einzunehmen. Dabei kann im Verfahren erreicht werden, dass eine Person die Inhalte nach ihrem Ermessen räumlich ordnen („sortieren“) kann. Insbesondere können die entsprechenden Inhalte bzw. die Audioinhalte aus denselben Quellen oder derselben Art, im weiteren Betrieb des Verfahrens oder beim nächsten Start des Verfahrens, wieder an den zugewiesenen Richtungen und/oder Entfernungen erzeugt werden.For example, the person may have a position of the sound source, in particular perceived by her, by means of a physical gesture change. For example, the person may "hand-pick" or "hand-mark" a sound source, with a subsequent operator action relating to a marked sound source. Also, the direction and / or distance of a particular, in particular preselected, sound source (a direction in which the sound source is perceived) may be changed to a recognition of a particular gesture or pattern of physical motion. For example, a sound source, or a content corresponding to the sound source or corresponding to the sound source, can be "pushed away" by means of a gesture or placed by hand at a location assigned with a certain gesture, so to speak, "fixed". In this case, further, active sound sources may maintain their position, or be displaced according to predetermined conditions or to a predetermined extent, eg to occupy a vacant space or angular range. It can be achieved in the process that a person can organize the content in their discretion spatially ("sort"). In particular, the corresponding contents or the audio contents can be generated from the same sources or the same type, in the further operation of the method or at the next start of the method, again at the assigned directions and / or distances.
Bevorzugt wird die besagte Visualisierung bei einer ersten Erscheinung, bzw. Zuschaltung oder Veränderung einer Klangquelle und/oder bei einer Erkennung einer vom Nutzer (von den Adressaten des ausgegebenen Inhalts) gewünschten, oder erforderlichen Bedienhandlung (für ein bestimmtes Zeitintervall) erzeugt. Dabei kann bei einer Veränderung einer oder mehreren Klangquelle, z.B. mittels einer körperlichen Geste die entsprechende Visualisierung, bevorzugt in einer korrespondierenden Weise verändert werden. Dabei kann ein sehr hohes Maß an Interaktivität und Übersichtlichkeit erreicht werden.The said visualization is preferably generated in the case of a first appearance, or connection or modification of a sound source and / or recognition of a user action (desired by the addressees of the output content) or required operator action (for a specific time interval). In the case of a change, one or more sound sources, e.g. by means of a physical gesture, the corresponding visualization, preferably be changed in a corresponding manner. A very high degree of interactivity and clarity can be achieved.
Die in der
Die Sensorvorrichtung
In diesem Beispiel ist die Sensorvorrichtung
Ferner ist die Sensorvorrichtung
Die Sensorvorrichtung
In einem (denkbaren) Querschnitt entspricht diese einem Polygon mit 4-
In a (conceivable) cross section, this corresponds to a polygon with 4-
Die Sensorvorrichtung
Die zumindest eine Sprachsteuerungsapplikationen
In diesem Beispiel werden zwei, insbesondere vernetzte Sprachsteuerungsapplikationen
Die Sensorvorrichtung
Ein oder mehrere Parameter
Ein Teil der Daten zum Bestimmen oder Anpassen zumindest eines Parameters (
Innerhalb des Wohnraums
Das Erfassen, Ermitteln der Parameter
The detection, determination of the parameters
Für die Raumbereiche
Die
Eine Kommunikation
Beispielsweise kann auf das Sprechen oder ein erkanntes Kommunikationsvorhaben einer ersten Person, je nachdem, in welchem Raumbereich
Bei dem Bestimmen eines oder mehrerer Parameter bzw. Parameterwerte können im Verfahren bestimmte frei kombinierbaren Logiken, Formeln, Kennlinien oder Varianten des Bestimmens eines Parameters (
Bei dem Anpassen eines Parameters kann im Verfahren ein bisheriger bzw. ein sonst gültiger Wert des Parameters (mit) berücksichtigt werden. Bevorzugt kann ein betreffender neuer Parameterwert mittels eines, z.B. für eine bestimmte (ausgewählte) Variante vorgesehenen multiplikativen, additiven, logarithmischen Faktors X, und/oder eines zeitlichen Parameters T angepasst werden. Ein angepasster Parameterwert kann in diesem Falle z.B. (
Auch sind in der
Die Erfindung kann umfassen: Ermitteln, insbesondere Prädizieren, eines Parameters
BezugszeichenlisteLIST OF REFERENCE NUMBERS
- 11
- stationärer Wohnraum, ein Teil einer Immobilie;stationary housing, part of a property;
- 1', 1",..1 ', 1 ", ..
- Weitere Wohnräume;Other living spaces;
- PB1, ..., RB6PB1, ..., RB6
-
Raumbereiche innerhalb des Wohnraums
1 ,1' ,1" ;Spaces within theliving space 1 .1' .1" ; - K-a, K-b, K-c, K-a'K-a, K-b, K-c, K-a '
- die besagten Kommunikation, unterschiedliche Abschnitte der besagten Kommunikation;the said communication, different sections of said communication;
- (PK1, PK2, ... PK8)(PK1, PK2, ... PK8)
- Parameter bzw. Parameterwerte der besagten Kommunikation, insbesondere zumindest eines Abschnitts oder mehrerer Abschnitte der besagten Kommunikation;Parameters or parameter values of said communication, in particular at least one or more sections of said communication;
- AAV1center, AAV1r, AAV1I, AAV1hr, AAV1hl, AAV2r, AAV2I, AAV3r, AAV3I,AAV1center, AAV1r, AAV1I, AAV1hr, AAV1hl, AAV2r, AAV2I, AAV3r, AAV3I,
-
Audioausgabevorrichtungen, die z.B. zusammen mit dem Audiosystem
ASYS betrieben werden;Audio output devices, for example, together with the audio systemASYS operate; - AAV-SSA1, AAV-SSA2AAV-SSA1, AAV-SSA2
-
Audioausgabevorrichtungen der Sprachsteuerungsapplikation
SSA1 ,SSA2 ;Audio output devices of the voice control applicationSSA1 .SSA2 ; - AS1, AS2AS1, AS2
-
das im stationären Wohnraum
1 auszugendende Audiosignal, bzw. ein Abschnitt eines solchen Audiosignals;that in thestationary living room 1 an output audio signal, or a section of such an audio signal; - ISA1, IAS2ISA1, IAS2
-
ein mit dem Audiosignal
AS1 ,AS2 , bzw. einem Abschnitt des AudiosignalsAS1 ,AS2 übermittelter bzw. zu übermittelnder Inhalt;one with the audio signalAS1 .AS2 , or a section of the audio signalAS1 .AS2 transmitted or to be transmitted content; - AM1, AM2, AM3AM1, AM2, AM3
-
die im stationären Wohnraum
1 ,1' ,1" auszugebende auditive Meldung, Sprachmitteilung;in thestationary living room 1 .1' .1" auditory message to be issued, voice message; - IAM1, IAM2, IAM3IAM1, IAM2, IAM3
-
ein mit der auditiven Meldung bzw. Sprachmitteilung
AM1 ,AM2 ,AM3 übermittelter oder zu übermittelnder Inhalt;one with the auditory message or voice messageAM1 .ON 2AT 3 transmitted or to be transmitted content; - IV1, IV2IV1, IV2
- Ein Inhalt eines Videobilds bzw. einer Videosequenz;A content of a video picture or a video sequence;
- AI-a, AI-bAI-a, AI-b
-
ein von außerhalb des Wohnraums
1 kommender hörbarer akustischer Inhalt;one from outside the livingspace 1 incoming audible acoustic content; - AI-a, AI-bAI-a, AI-b
-
ein von innerhalb des Wohnraums
1 bzw. Hauses erzeugter akustischer Inhalt;one from within theliving space 1 or home-generated acoustic content; - (PAI1, PAI2, ...)(PAI1, PAI2, ...)
-
Parameter eines entsprechenden akustischen Inhalts
Al-a' ,Al-b' ,Al-c ,Al-d ;Parameters of a corresponding acoustic contentAl-a ' .Al-b ' .Al-c .Al-d ; - S1, ... S8S1, ... S8
-
Eine Szene innerhalb eines stationären Wohnraums
1 ,1' ,1" ;A scene inside astationary living room 1 .1' .1" ; - (PS1, PS2, ...)(PS1, PS2, ...)
- Parameter, insbesondere kennzeichnend einen Merkmal oder Klasse einer Szene bzw. ein entsprechender Codewert.Parameter, in particular characterizing a feature or class of a scene or a corresponding code value.
- (PBL1, PBL2, ...)(PBL1, PBL2, ...)
-
Parameter einer körperlichen Regung oder ein Muster der Parameter einer körperlichen Regung oder ein Parameter der Körpersprache zumindest einer Person. Insbesondere ein Parameter einer mit der Körpersprache ausgedrückten Kommunikationsbotschaft oder der Körpersprache die einen Abschnitt der Kommunikation
K-a ,K-b ,K-c ,K-a' begleitet.Parameters of a physical impulse or a pattern of the parameters of a physical impulse or a parameter of the body language of at least one person. In particular, a parameter of a body language communication message or body language is a portion of the communicationka .kb .kc .K-a ' accompanied.
Claims (20)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102017117570.9A DE102017117570A1 (en) | 2017-08-02 | 2017-08-02 | Method, system, user device and computer program for generating an auditory message in a stationary home |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102017117570.9A DE102017117570A1 (en) | 2017-08-02 | 2017-08-02 | Method, system, user device and computer program for generating an auditory message in a stationary home |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102017117570A1 true DE102017117570A1 (en) | 2019-02-07 |
Family
ID=65020068
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102017117570.9A Pending DE102017117570A1 (en) | 2017-08-02 | 2017-08-02 | Method, system, user device and computer program for generating an auditory message in a stationary home |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102017117570A1 (en) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090055190A1 (en) * | 2007-04-26 | 2009-02-26 | Ford Global Technologies, Llc | Emotive engine and method for generating a simulated emotion for an information system |
DE102010040818A1 (en) * | 2009-10-02 | 2011-04-07 | Ford Global Technologies, LLC, Dearborn | Acoustic environment of an appealing guidance system |
US20150149177A1 (en) * | 2013-11-27 | 2015-05-28 | Sri International | Sharing Intents to Provide Virtual Assistance in a Multi-Person Dialog |
-
2017
- 2017-08-02 DE DE102017117570.9A patent/DE102017117570A1/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090055190A1 (en) * | 2007-04-26 | 2009-02-26 | Ford Global Technologies, Llc | Emotive engine and method for generating a simulated emotion for an information system |
DE102010040818A1 (en) * | 2009-10-02 | 2011-04-07 | Ford Global Technologies, LLC, Dearborn | Acoustic environment of an appealing guidance system |
US20150149177A1 (en) * | 2013-11-27 | 2015-05-28 | Sri International | Sharing Intents to Provide Virtual Assistance in a Multi-Person Dialog |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE202017105819U1 (en) | Multi-user personalization on a voice interface device | |
Zacharov | Sensory evaluation of sound | |
Dynel | Revisiting Goffman’s postulates on participant statuses in verbal interaction | |
DE102011107992A1 (en) | System and method for logging to events based on keywords | |
EP3661797B1 (en) | Method, device, mobile user apparatus and computer program for controlling an audio system of a vehicle | |
US11869496B2 (en) | Information processing device and information processing method, and information processing system | |
Antaki et al. | How adults with a profound intellectual disability engage others in interaction | |
DE112017006882T5 (en) | CONTEXT-RELATED, ENVIRONMENT-BASED USER INTERFACE | |
DE102017117569A1 (en) | Method, system, user device and a computer program for generating an output in a stationary housing audio signal | |
DE102017122216A1 (en) | Multi-user personalization on a voice interface device | |
DE102018118349A1 (en) | METHOD AND DEVICE FOR SELECTING AN AUDIO OUTPUT CABLE BASED ON PRIORITY ATTRIBUTES | |
DE102020112476A1 (en) | Method, system, user device and computer program for operating a virtual personality | |
WO2020221865A1 (en) | Method, computer program product, system and device for modifying acoustic interaction signals, which are produced by at least one interaction partner, in respect of an interaction target | |
EP3945729A1 (en) | System and method for headphone equalization and space adaptation for binaural reproduction in augmented reality | |
DE102017117570A1 (en) | Method, system, user device and computer program for generating an auditory message in a stationary home | |
Batcho | Revisiting the Howard Dean scream: sound exclusivity in broadcast news | |
CN112863505A (en) | Artificial intelligence-based data processing device and method between neighbors | |
DE102021112060A1 (en) | Method, system, user device and computer program for generating a media output on a user device | |
DE102023112019A1 (en) | Method, system, personality model, avatar, user device, computer program and a neural network to support interpersonal communication | |
DE102021129482A1 (en) | Method, system, user device and computer program for generating a communication message for output on a user device | |
Shrader | A comparison of audience response to live and recorded theatre performances | |
DE102021129483A1 (en) | Method, system, user device, computer program and a neural network for supporting interpersonal communication | |
DE102017213260A1 (en) | Method, device, mobile user device, computer program for controlling an audio system of a vehicle | |
DE102017213256A1 (en) | Method, device, mobile user device, computer program for controlling an audio system of a vehicle | |
Losiak et al. | Listening to the First Lockdown: The Auditory Experience of Wrocław's Inhabitants 1 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R086 | Non-binding declaration of licensing interest | ||
R012 | Request for examination validly filed | ||
R079 | Amendment of ipc main class |
Free format text: PREVIOUS MAIN CLASS: G10L0015000000 Ipc: G10L0025480000 |
|
R016 | Response to examination communication | ||
R016 | Response to examination communication | ||
R016 | Response to examination communication |