DE102017117569A1 - Method, system, user device and a computer program for generating an output in a stationary housing audio signal - Google Patents
Method, system, user device and a computer program for generating an output in a stationary housing audio signal Download PDFInfo
- Publication number
- DE102017117569A1 DE102017117569A1 DE102017117569.5A DE102017117569A DE102017117569A1 DE 102017117569 A1 DE102017117569 A1 DE 102017117569A1 DE 102017117569 A DE102017117569 A DE 102017117569A DE 102017117569 A1 DE102017117569 A1 DE 102017117569A1
- Authority
- DE
- Germany
- Prior art keywords
- audio signal
- communication
- output
- parameter
- parameters
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000005236 sound signal Effects 0.000 title claims abstract description 1068
- 238000000034 method Methods 0.000 title claims description 394
- 238000004590 computer program Methods 0.000 title claims description 19
- 230000006854 communication Effects 0.000 claims abstract description 933
- 238000004891 communication Methods 0.000 claims abstract description 930
- 230000006978 adaptation Effects 0.000 claims abstract description 107
- 101100016388 Arabidopsis thaliana PAS2 gene Proteins 0.000 claims abstract description 81
- 101100297150 Komagataella pastoris PEX3 gene Proteins 0.000 claims abstract description 81
- 101100315760 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) PEX4 gene Proteins 0.000 claims abstract description 81
- 101100060179 Drosophila melanogaster Clk gene Proteins 0.000 claims abstract description 80
- 101150038023 PEX1 gene Proteins 0.000 claims abstract description 80
- 101150014555 pas-1 gene Proteins 0.000 claims abstract description 80
- 108700038250 PAM2-CSK4 Proteins 0.000 claims description 78
- 101100206155 Schizosaccharomyces pombe (strain 972 / ATCC 24843) tbp1 gene Proteins 0.000 claims description 78
- 101100108891 Arabidopsis thaliana PRMT11 gene Proteins 0.000 claims description 75
- 101100484946 Petunia hybrida VPY gene Proteins 0.000 claims description 75
- 101150091418 pam1 gene Proteins 0.000 claims description 75
- 230000033001 locomotion Effects 0.000 claims description 66
- 230000008569 process Effects 0.000 claims description 53
- 101100082457 Arabidopsis thaliana PBL2 gene Proteins 0.000 claims description 49
- 101100082447 Arabidopsis thaliana PBL1 gene Proteins 0.000 claims description 47
- 102100023431 E3 ubiquitin-protein ligase TRIM21 Human genes 0.000 claims description 46
- 101000685877 Homo sapiens E3 ubiquitin-protein ligase TRIM21 Proteins 0.000 claims description 46
- 101000685886 Homo sapiens RNA-binding protein RO60 Proteins 0.000 claims description 42
- 102100023433 RNA-binding protein RO60 Human genes 0.000 claims description 42
- 238000011156 evaluation Methods 0.000 claims description 40
- 241000282414 Homo sapiens Species 0.000 claims description 29
- 238000012545 processing Methods 0.000 claims description 24
- 238000001514 detection method Methods 0.000 claims description 22
- 101100220046 Bos taurus CD36 gene Proteins 0.000 claims description 11
- 101100315759 Komagataella pastoris PEX4 gene Proteins 0.000 claims description 11
- 101100407813 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) PEX10 gene Proteins 0.000 claims description 11
- 101100407812 Schizosaccharomyces pombe (strain 972 / ATCC 24843) pas4 gene Proteins 0.000 claims description 11
- 230000004044 response Effects 0.000 claims description 11
- 101000623895 Bos taurus Mucin-15 Proteins 0.000 claims description 7
- 239000012634 fragment Substances 0.000 claims description 5
- 241001655883 Adeno-associated virus - 1 Species 0.000 claims 2
- 241000702423 Adeno-associated virus - 2 Species 0.000 claims 1
- 241000202702 Adeno-associated virus - 3 Species 0.000 claims 1
- 230000008859 change Effects 0.000 description 60
- 230000009471 action Effects 0.000 description 50
- 230000002123 temporal effect Effects 0.000 description 49
- 238000009826 distribution Methods 0.000 description 46
- 230000008447 perception Effects 0.000 description 46
- 238000005457 optimization Methods 0.000 description 45
- 230000001419 dependent effect Effects 0.000 description 39
- 230000008451 emotion Effects 0.000 description 30
- 230000006870 function Effects 0.000 description 29
- 101000609261 Homo sapiens Plasminogen activator inhibitor 2 Proteins 0.000 description 28
- 102100039418 Plasminogen activator inhibitor 1 Human genes 0.000 description 28
- 102100039419 Plasminogen activator inhibitor 2 Human genes 0.000 description 28
- 230000008921 facial expression Effects 0.000 description 28
- 108010022233 Plasminogen Activator Inhibitor 1 Proteins 0.000 description 27
- 101100286168 Hordeum vulgare IAM1 gene Proteins 0.000 description 26
- 238000001228 spectrum Methods 0.000 description 24
- 101000617725 Homo sapiens Pregnancy-specific beta-1-glycoprotein 2 Proteins 0.000 description 18
- 102100022019 Pregnancy-specific beta-1-glycoprotein 2 Human genes 0.000 description 18
- 230000002829 reductive effect Effects 0.000 description 18
- 230000006399 behavior Effects 0.000 description 16
- 230000000694 effects Effects 0.000 description 16
- 230000015572 biosynthetic process Effects 0.000 description 14
- 238000006243 chemical reaction Methods 0.000 description 14
- 230000004048 modification Effects 0.000 description 13
- 238000012986 modification Methods 0.000 description 13
- 206010011469 Crying Diseases 0.000 description 12
- 101100232386 Arabidopsis thaliana IBL1 gene Proteins 0.000 description 11
- 230000001105 regulatory effect Effects 0.000 description 11
- 230000003595 spectral effect Effects 0.000 description 11
- 230000004424 eye movement Effects 0.000 description 10
- 230000035807 sensation Effects 0.000 description 10
- 238000003786 synthesis reaction Methods 0.000 description 10
- 101000617708 Homo sapiens Pregnancy-specific beta-1-glycoprotein 1 Proteins 0.000 description 9
- 101100082969 Komagataella pastoris PEX12 gene Proteins 0.000 description 9
- 101100029361 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) PEX5 gene Proteins 0.000 description 9
- 230000000873 masking effect Effects 0.000 description 9
- 230000006835 compression Effects 0.000 description 8
- 238000007906 compression Methods 0.000 description 8
- 230000001186 cumulative effect Effects 0.000 description 8
- 230000010363 phase shift Effects 0.000 description 8
- 230000007704 transition Effects 0.000 description 8
- 230000003044 adaptive effect Effects 0.000 description 7
- 238000004458 analytical method Methods 0.000 description 7
- 230000008901 benefit Effects 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 7
- 238000004364 calculation method Methods 0.000 description 7
- 230000001953 sensory effect Effects 0.000 description 7
- 238000000926 separation method Methods 0.000 description 7
- 238000003860 storage Methods 0.000 description 7
- 238000012800 visualization Methods 0.000 description 7
- 230000008933 bodily movement Effects 0.000 description 6
- 230000001364 causal effect Effects 0.000 description 6
- 230000009467 reduction Effects 0.000 description 6
- 238000012549 training Methods 0.000 description 6
- 101100029357 Komagataella pastoris PEX5 gene Proteins 0.000 description 5
- 101100463577 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) PEX6 gene Proteins 0.000 description 5
- 208000003443 Unconsciousness Diseases 0.000 description 5
- 230000002776 aggregation Effects 0.000 description 5
- 238000004220 aggregation Methods 0.000 description 5
- 230000000454 anti-cipatory effect Effects 0.000 description 5
- 230000001276 controlling effect Effects 0.000 description 5
- 238000010801 machine learning Methods 0.000 description 5
- 238000004088 simulation Methods 0.000 description 5
- 230000000007 visual effect Effects 0.000 description 5
- 238000005406 washing Methods 0.000 description 5
- 101100409539 Caenorhabditis elegans pas-7 gene Proteins 0.000 description 4
- 241001465754 Metazoa Species 0.000 description 4
- 206010039740 Screaming Diseases 0.000 description 4
- 230000003466 anti-cipated effect Effects 0.000 description 4
- 238000006073 displacement reaction Methods 0.000 description 4
- 239000011521 glass Substances 0.000 description 4
- 238000010438 heat treatment Methods 0.000 description 4
- 238000005304 joining Methods 0.000 description 4
- 238000007620 mathematical function Methods 0.000 description 4
- 238000005259 measurement Methods 0.000 description 4
- 239000000203 mixture Substances 0.000 description 4
- 238000003909 pattern recognition Methods 0.000 description 4
- 238000000527 sonication Methods 0.000 description 4
- 238000013519 translation Methods 0.000 description 4
- 101100245253 Caenorhabditis elegans pas-5 gene Proteins 0.000 description 3
- 101100190054 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) PEX8 gene Proteins 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 3
- 230000008909 emotion recognition Effects 0.000 description 3
- 230000006872 improvement Effects 0.000 description 3
- 230000003993 interaction Effects 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 3
- 238000002156 mixing Methods 0.000 description 3
- 230000007935 neutral effect Effects 0.000 description 3
- 230000036961 partial effect Effects 0.000 description 3
- 230000003252 repetitive effect Effects 0.000 description 3
- 239000007787 solid Substances 0.000 description 3
- 230000009466 transformation Effects 0.000 description 3
- 230000001755 vocal effect Effects 0.000 description 3
- 206010011878 Deafness Diseases 0.000 description 2
- 241000282412 Homo Species 0.000 description 2
- 101100463573 Komagataella pastoris PEX6 gene Proteins 0.000 description 2
- 102100024078 Plasma serine protease inhibitor Human genes 0.000 description 2
- 101710183733 Plasma serine protease inhibitor Proteins 0.000 description 2
- 101100519629 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) PEX2 gene Proteins 0.000 description 2
- 230000004913 activation Effects 0.000 description 2
- 239000000654 additive Substances 0.000 description 2
- 230000000996 additive effect Effects 0.000 description 2
- 230000002411 adverse Effects 0.000 description 2
- 238000013019 agitation Methods 0.000 description 2
- 230000003542 behavioural effect Effects 0.000 description 2
- 230000002457 bidirectional effect Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000004069 differentiation Effects 0.000 description 2
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 2
- 208000035475 disorder Diseases 0.000 description 2
- 210000005069 ears Anatomy 0.000 description 2
- 230000002996 emotional effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000004438 eyesight Effects 0.000 description 2
- 208000016354 hearing loss disease Diseases 0.000 description 2
- 238000002329 infrared spectrum Methods 0.000 description 2
- 230000001788 irregular Effects 0.000 description 2
- 230000003278 mimic effect Effects 0.000 description 2
- 230000000877 morphologic effect Effects 0.000 description 2
- 230000000474 nursing effect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000012567 pattern recognition method Methods 0.000 description 2
- 241000894007 species Species 0.000 description 2
- 208000024891 symptom Diseases 0.000 description 2
- 238000002604 ultrasonography Methods 0.000 description 2
- 239000013598 vector Substances 0.000 description 2
- 238000001429 visible spectrum Methods 0.000 description 2
- 241000251468 Actinopterygii Species 0.000 description 1
- 101100110333 Arabidopsis thaliana ATL31 gene Proteins 0.000 description 1
- 206010063659 Aversion Diseases 0.000 description 1
- 206010013647 Drowning Diseases 0.000 description 1
- 108010014173 Factor X Proteins 0.000 description 1
- 241000282326 Felis catus Species 0.000 description 1
- 101000994167 Homo sapiens Iron-sulfur cluster assembly 1 homolog, mitochondrial Proteins 0.000 description 1
- 101000609255 Homo sapiens Plasminogen activator inhibitor 1 Proteins 0.000 description 1
- 102100031404 Iron-sulfur cluster assembly 1 homolog, mitochondrial Human genes 0.000 description 1
- 101100407811 Komagataella pastoris PEX10 gene Proteins 0.000 description 1
- 101150009729 Pal2 gene Proteins 0.000 description 1
- 101000798429 Pinus strobus Putative 2-Cys peroxiredoxin BAS1 Proteins 0.000 description 1
- 101001136140 Pinus strobus Putative oxygen-evolving enhancer protein 2 Proteins 0.000 description 1
- 101000600488 Pinus strobus Putative phosphoglycerate kinase Proteins 0.000 description 1
- 241001122315 Polites Species 0.000 description 1
- 101150051586 RIM21 gene Proteins 0.000 description 1
- 241000283984 Rodentia Species 0.000 description 1
- 101100136245 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) PEX17 gene Proteins 0.000 description 1
- 101100190051 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) PEX7 gene Proteins 0.000 description 1
- 101001087274 Solanum lycopersicum Pto-interacting protein 1 Proteins 0.000 description 1
- 241001011888 Sulfolobus spindle-shaped virus 1 Species 0.000 description 1
- 241001011846 Sulfolobus spindle-shaped virus 2 Species 0.000 description 1
- 241001255830 Thema Species 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 230000003213 activating effect Effects 0.000 description 1
- 230000002238 attenuated effect Effects 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 238000010418 babysitting Methods 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 230000001149 cognitive effect Effects 0.000 description 1
- 230000001427 coherent effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 150000001875 compounds Chemical class 0.000 description 1
- 230000008094 contradictory effect Effects 0.000 description 1
- 238000004132 cross linking Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 231100000895 deafness Toxicity 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000005265 energy consumption Methods 0.000 description 1
- 230000005284 excitation Effects 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 229910021389 graphene Inorganic materials 0.000 description 1
- 230000001339 gustatory effect Effects 0.000 description 1
- 231100000888 hearing loss Toxicity 0.000 description 1
- 230000010370 hearing loss Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000009474 immediate action Effects 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000012432 intermediate storage Methods 0.000 description 1
- RQQRAHKHDFPBMC-UHFFFAOYSA-L lead(ii) iodide Chemical compound I[Pb]I RQQRAHKHDFPBMC-UHFFFAOYSA-L 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 239000002932 luster Substances 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 230000003340 mental effect Effects 0.000 description 1
- 230000007176 multidirectional communication Effects 0.000 description 1
- 230000003472 neutralizing effect Effects 0.000 description 1
- 230000000149 penetrating effect Effects 0.000 description 1
- 230000037081 physical activity Effects 0.000 description 1
- 230000000704 physical effect Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000004800 psychological effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 230000033764 rhythmic process Effects 0.000 description 1
- 230000002269 spontaneous effect Effects 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
- 238000003892 spreading Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000003756 stirring Methods 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 238000011144 upstream manufacturing Methods 0.000 description 1
- 238000009423 ventilation Methods 0.000 description 1
- 230000016776 visual perception Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0316—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
- G10L21/0364—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude for improving intelligibility
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L17/00—Speaker identification or verification techniques
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Stereophonic System (AREA)
Abstract
In der Erfindung wird ein Parameter (PK1, PK2, ... PK8) einer Kommunikation K-a, K-b, K-c, K-a' von zumindest zwei Personen innerhalb eines stationären Wohnraums 1, 1', 1" ermittelt, insbesondere prädiziert, und zum Verändern, insbesondere Anpassen zumindest eines Parameters (PAS1, PAS2, ...) des in einem stationären Wohnraum 1 auszugebenden Audiosignals AS1, AS2 verarbeitet.
Dabei können die Parameter (PAS1, PAS2, ...) zumindest eines Abschnitts des auszugebenden Audiosignals AS1, AS2 oder der auf Basis des Audiosignals AS1, AS2 erzeugten Schallwellen, insbesondere mit dem Audiosignal korrespondierenden Schallwellen im Wohnraum 1, abhängig von den ermittelten, insbesondere prädizierten Parameter (PK1, PK2, ... PK8) der besagten Kommunikation K-a, K-b, K-c, K-a' verändert, insbesondere dynamisch gesteuert werden.
In the invention, a parameter (PK1, PK2,... PK8) of a communication Ka, Kb, Kc, Ka 'of at least two persons within a stationary living space 1, 1', 1 "is determined, in particular predicated, and modified, in particular, adaptation of at least one parameter (PAS1, PAS2,...) of the audio signal AS1, AS2 to be output in a stationary living space 1 is processed.
In this case, the parameters (PAS1, PAS2,...) Of at least one section of the audio signal AS1, AS2 to be output or the sound waves generated on the basis of the audio signal AS1, AS2, in particular with the audio signal corresponding sound waves in the living room 1, depending on the determined, in particular predicted parameters (PK1, PK2, ... PK8) of the said communication Ka, Kb, Kc, Ka 'changed, in particular dynamically controlled.
Description
Die Erfindung betrifft ein Verfahren, ein System und ein korrespondierendes Computerprogramm zum Erzeugen eines in einem stationären Wohnraum auszugebenden Audiosignals.The invention relates to a method, a system and a corresponding computer program for generating an audio signal to be output in a stationary living space.
Die Erfindung betrifft des Weiteren ein entsprechend eingerichtetes Anwendergerät. Das Anwendergerät kann dabei zum Betrieb als ein Teil des Systems ausgestaltet sein.The invention further relates to a correspondingly configured user device. The user device can be designed for operation as part of the system.
Moderne Audiosysteme können auf eine Vielzahl unterschiedlicher Audioquellen zugreifen, die über ein Audiosystem in einem Wohnraum ausgegeben werden können. Diese können z.B. als Rundfunk-Inhalte empfangen werden, von einem portablen oder fest eingebauten Speicher (z.B. Massenspeicher, USB-Sticks, etc.) oder von einem an das Audiosystem angeschlossenen Anwendergerät eingelesen werden. Dazu zählen auch der Zugriff und die Wiedergabe von Audiosignale umfassenden Streaming-Inhalten aus dem Internet. Ebenso kann beispielsweise ein Sound zu einem Video, eine Fernsehsendung, zu einem Videospiel, über das Audiosystem ausgegeben werden. Ein entsprechendes Audiosignal kann ein Raumklangsignal sein, das beispielsweise fünf bis neun Kanäle umfasst.Modern audio systems can access a variety of different audio sources that can be output via an audio system in a living room. These may e.g. are received as broadcast contents, read from a portable or fixed memory (e.g., mass storage, USB flash drives, etc.) or from a user equipment connected to the audio system. This includes accessing and playing audio streaming content from the Internet. Likewise, for example, a sound to a video, a television program, a video game, are output via the audio system. A corresponding audio signal may be a surround sound signal comprising, for example, five to nine channels.
Üblicherweise besteht ein Bedürfnis der Personen, speziell im häuslichen Bereich miteinander zu kommunizieren. Eine solche, insbesondere sprachliche Kommunikation kann für die betreffenden Personen oftmals eine sehr hohe Bedeutung haben. Diese kann die aktuelle Relevanz der über das Audiosystem wiedergegebenen Audiosignale zumindest zeitweise wesentlich übersteigen. Dabei können die Personen im Raum, z.B. Mitglieder einer Familie mit 2-4 Generationen, sehr unterschiedliche, teils sehr widersprüchliche Bedürfnisse haben, z.B. mit Blick auf die eigene aktive sprachliche Äußerungen, mit Blick auf das akustische Empfangen der Äußerungen (Kommunikationsbotschaften) anderer Personen oder bestimmter Audiosignale.There is usually a need for people to communicate with each other, especially in the home. Such, in particular linguistic communication can often have a very high importance for the persons concerned. This can significantly exceed the current relevance of the audio signals reproduced via the audio system, at least temporarily. The persons in the room, e.g. Members of a family of 2-4 generations, have very different, partly very contradictory needs, e.g. with regard to their own active linguistic utterances, with a view to the acoustic reception of the utterances (communication messages) of other persons or certain audio signals.
Die Aufgabe der Erfindung ist es, ein Verfahren, ein System, ein mobiles Anwendergerät und ein korrespondierendes Computerprogramm zum Erzeugen, Verändern, insbesondere zum Anpassen eines in einem stationären Wohnraum auszugebenden Audiosignals aufzuzeigen. Insbesondere ist es eine Aufgabe der Erfindung, eine verbesserte Kommunikation in einem stationären Wohnraum, vor allem unter einem möglichst geringen Verzicht auf im stationären Wohnraum auszugebende Audiosignale zu ermöglichen.The object of the invention is to disclose a method, a system, a mobile user device and a corresponding computer program for generating, modifying, in particular for adapting an audio signal to be output in a stationary living space. In particular, it is an object of the invention to enable improved communication in a stationary housing, especially with the least possible renunciation of output in stationary living room audio signals.
Die Aufgabe wird gelöst durch die Merkmale der unabhängigen Patentansprüche. Vorteilhafte Ausgestaltungen sind in den Unteransprüchen gekennzeichnet.The object is solved by the features of the independent claims. Advantageous embodiments are characterized in the subclaims.
Die Erfindung zeichnet sich gemäß eines ersten Aspekts durch ein Verfahren zum Erzeugen eines in einem stationären Wohnraum auszugebenden Audiosignals, umfassend: Ermitteln, insbesondere Prädizieren, eines Parameters einer Kommunikation von zumindest zwei Personen innerhalb eines stationären Wohnraums, und Verändern, insbesondere Anpassen zumindest eines Parameters des im stationären Wohnraum auszugebenden Audiosignals, abhängig von dem ermittelten, insbesondere prädizierten Parameter der Kommunikation.According to a first aspect, the invention is characterized by a method for generating an audio signal to be output in a stationary living space, comprising: determining, in particular predicting, a parameter of a communication of at least two persons within a stationary housing, and modifying, in particular adapting at least one parameter of the in the stationary housing to be output audio signal, depending on the determined, in particular predicated parameters of the communication.
Alternativ, bevorzugt zusätzlich zum Anpassen des Parameters des besagten auszugebenden Audiosignals kann im Verfahren ein Parameter zumindest einer auditiven Meldung, insbesondere umfassend zumindest eine Sprachmitteilung, in einem stationären Wohnraum bestimmt oder angepasst werden. Bevorzugt kann es sich dabei und zumindest eine auditive Meldung handeln, die im selben gewissen (kurzen) Zeitintervall wie das besagte Audiosignal, bzw. ein betreffender oder bestimmter Abschnitt des Audiosignals im stationären Wohnraum ausgegeben werden kann oder soll.Alternatively, preferably in addition to adjusting the parameter of the said audio signal to be output, in the method a parameter of at least one auditory message, in particular comprising at least one voice message, may be determined or adapted in a stationary housing. In this case, it may be preferable and at least one auditory message which can or should be output in the same certain (short) time interval as the said audio signal or a relevant or specific section of the audio signal in the stationary housing.
Bei der Kommunikation von handelt es sich insbesondere um eine sprachliche Kommunikation und/oder eine nonverbale Kommunikation, z.B. sogenannte Körpersprache, Gestik, Mimik, etc. Insbesondere handelt es sich bei der Kommunikation um ein Gespräch der besagten zumindest zwei Personen im Wohnraum. Die besagte Kommunikation betrifft die zumindest zwei Personen insbesondere derart, dass zumindest eine Person zumindest zeitweise ein Absender einer Kommunikationsbotschaft („Sprecher“), ein Empfänger der Kommunikationsbotschaft („Zuhörer“) oder abwechselnd oder etwa gleichzeitig ein Absender und Empfänger der Kommunikationsbotschaften („Sprecher und Zuhörer“) innerhalb der besagten Kommunikation ist. Mit anderen Worten handelt es sich bei einem Abschnitt der Kommunikation insbesondere um eine oder mehrere unmittelbar ausgetauschte Kommunikationsbotschaften zwischen den besagten zumindest zwei Personen im Wohnraum. Ferner kann es sich um eine Kommunikation handeln, an der zumindest drei Personen beteiligt sind.The communication is in particular a linguistic communication and / or a non-verbal communication, e.g. So-called body language, gestures, facial expressions, etc. In particular, the communication is a conversation of said at least two people in the living room. Said communication relates to the at least two persons in particular such that at least one person at least temporarily a sender of a communication message ("speaker"), a recipient of the communication message ("listener") or alternately or about the same time a sender and recipient of the communication messages ("spokesman and listener ") within said communication. In other words, a section of the communication is, in particular, one or more directly exchanged communication messages between said at least two persons in the living space. Furthermore, it can be a communication in which at least three persons are involved.
Die Kommunikation kann auch ein Monolog sein, wobei sich insbesondere zumindest eine potentiell oder wahrscheinlich zuhörende Person (ein zumindest potentieller Zuhörer) im Wohnraum befindet. Bevorzugt umfasst die Kommunikation einen Dialog zwischen zumindest zwei im Wohnraum anwesenden Personen oder eine multidirektionale Kommunikation zwischen drei oder Vielzahl von Personen im Wohnraum. Insbesondere umfasst zumindest ein Abschnitt der besagten Kommunikation eine sprachliche Botschaft oder die zur Kommunikation bestimmten Laute einer Person im Wohnraum, die z.B. eine Empfindung, Willens- oder Bewertungshaltung ausdrücken. Es können Kommunikationslaute wie etwa Interjektionen oder Ausrufewörter sein, wobei die sprachliche Botschaft bzw. die Laute der zumindest einen im Wohnraum anwesenden Person insbesondere an zumindest eine weitere im Wohnraum anwesende Person bestimmt bzw. gerichtet sind. Bevorzugt handelt es sich bei der Kommunikation um eine zumindest teilweise bidirektional oder multidirektional stattfindende, sprachliche Botschaften umfassende, Kommunikation zwischen zumindest zwei im Wohnraum anwesenden Personen.The communication can also be a monologue, wherein in particular at least one potentially or probably listening person (an at least potential listener) is located in the living space. The communication preferably includes a dialogue between at least two persons present in the living space or a multidirectional communication between three or a plurality of persons in the living space. In particular, at least one comprises Section of said communication a linguistic message or intended for communication sounds of a person in the living room, for example, expressing a sensation, will or evaluation attitude. It may be communication sounds such as interjections or exclamation words, wherein the linguistic message or the sounds of the at least one person present in the living space are determined or directed in particular to at least one other person present in the living space. Preferably, the communication is an at least partially bidirectional or multidirectionally occurring, linguistic messages comprehensive, communication between at least two persons present in the living room.
Bevorzugt kann das Verfahren umfassen: Erkennen, dass sich zumindest zwei Personen im Wohnraum befinden, insbesondere Ermitteln der Anzahl von Personen im Wohnraum und eine Berücksichtigung der erkannten Information. Dabei kann das Bestimmen, insbesondere Anpassen zumindest eines Parameters der zumindest einen auditiven Meldung und/oder des weiteren Audiosignals abhängig von der Erkennung einer stattfindenden oder erwarteten Kommunikation und von der Anwesenheit von zumindest zwei Personen im Wohnraum erfolgen. Dabei kann eine andere, z.B. anders parametrierte oder jeweils speziell dafür vorgesehenes, insbesondere vorausschauendes Bestimmen oder Anpassen eines oder mehrerer Parameter des auszugebenden Audiosignals und/oder einer auditiven Meldung erfolgen, die sich von dem Anpassen unterscheidet, wobei dieses ausgeführt wird, wenn erkannt wird, dass sich lediglich eine Person im Wohnraum befindet.The method may preferably include: recognizing that there are at least two persons in the living space, in particular determining the number of persons in the living space and taking into account the recognized information. In this case, the determination, in particular adaptation of at least one parameter of the at least one auditory message and / or of the further audio signal can be effected depending on the recognition of an ongoing or expected communication and the presence of at least two persons in the living space. Thereby another, e.g. differently parameterized or in each case specially provided, in particular foresighted, determination or adaptation of one or more parameters of the audio signal to be output and / or an auditory message which differs from the adaptation, this being carried out if it is recognized that only one person is present in the Living room is located.
Das Ermitteln, insbesondere Prädizieren des Parameters der besagten Kommunikation kann mit den unmittelbar oder mittelbar (z.B. durch eine zweckmäßig eingerichtete Datenverbindung) mit einer Audioausgabevorrichtung verbunden bzw. vernetzten Mittel, z.B. einer Sensorvorrichtung, weiterer vernetzten Sensoren, Recheneinheiten sein. Eine solche Verbindung bzw. Vernetzung kann z.B. über eine bidirektionale, multidirektionale, drahtlose Verbindung mit oder ohne einen zentralen Server, einen Computer, ein Router bzw. ein Hub mit oder ohne einer zur Ausführung des Verfahrens erweiterten Funktionalität erfolgen.Determining, in particular predicting, the parameter of said communication may be coupled with the means directly or indirectly connected (e.g., through a properly established data link) to an audio output device, e.g. a sensor device, further networked sensors, computing units. Such a connection or cross-linking can e.g. via a bidirectional, multidirectional, wireless connection with or without a central server, a computer, a router, or a hub, with or without functionality extended to perform the method.
Beispielsweise kann das Ermitteln, insbesondere Prädizieren des Parameters der besagten Kommunikation mit den im Wohnraum betriebenen (betreibbaren), insbesondere mit einem elektronischen System des Wohnraums verbundenen oder über ein Netzwerk verbundenen Mitteln, z.B. Mikrophonen einer Freisprecheinrichtung, z.B. eines Mikrophons einer Fernmeldeapplikation, einer oder mehreren Kameras, z.B. einer Kamera zum Betrieb eines Fernsehgeräts bzw. Anzeigevorrichtung für Videos, oder einer weiteren Sensorik, erfolgen. Ein oder mehrere Parameter der Kommunikation können aus Daten eines oder mehrerer im Wohnraum betriebenen, zur Ausführung einer weiteren Funktionalität eingerichteten Sensoren, z.B. Sensoren, Recheneinheiten, Datenspeicher eines sogenannten Smart-Home-Systems, erfolgen. Auch kann das Ermitteln, insbesondere Prädizieren der Kommunikation mittels zumindest eines persönlichen (mobilen) Anwendergeräts erfolgen. Ein solches Anwendergerät kann auch eine am Körper der Personen tragbare oder ggf. mit dem Körper verbundene elektronische Vorrichtung, z.B. eine sogenannte Smart-Watch oder Smart-Closes sein.For example, determining, in particular predicting, the parameter of the said communication with the home-operated (operable), in particular connected to an electronic system of the living space or connected via a network, e.g. Microphones of a handsfree, e.g. a microphone of a telecommunications application, one or more cameras, e.g. a camera for operating a television or display device for videos, or another sensor, done. One or more parameters of the communication may be obtained from data from one or more home-based sensors configured to carry out another functionality, e.g. Sensors, computing units, data storage of a so-called smart home system done. The determination, in particular predication, of the communication can also take place by means of at least one personal (mobile) user device. Such a user device may also include an electronic device that can be worn on the body of the person or possibly connected to the body, e.g. be a so-called smart watch or smart closes.
Ein Parameter der Kommunikation kann eine, z.B. zeitlich geordnete, Sequenz aus mehreren Parameterwerten, z.B. in Bezug auf die nahe Vergangenheit, etwa den aktuellen Zeitpunkt, und/oder eine Prädiktion für die nahe Zukunft umfassen. Beispielsweise kann ein Parameter der Kommunikation auch ein Maß der Veränderung der Werte eines bestimmten Parameters im Verlauf der Zeit und/oder in Bezug auf eine auf den Raum bezogene (räumlich veränderliche) Größe, z.B. Richtung und/oder Distanz, z.B. innerhalb des Wohnraums repräsentieren. Auch kann zumindest ein Parameter der sprachlichen Kommunikation zwischen den zumindest zwei Personen im Wohnraum abhängig von einer erkannten etwa im selben (kleinen) Zeitintervall, einhergehend, stattfindenden und im Verfahren erfassten Körpersprache, Stimmlage, und/oder einer erfassten Szene berücksichtigt werden. Beispielsweise kann auf eine ermittelte, im Zusammenhang mit der Kommunikation von zumindest zwei Personen stehende, Veränderung der Körpersprache oder Stimme zumindest einer Person im Wohnraum berücksichtigt werden. Beim Ermitteln zumindest eines Parameters der besagten Kommunikation und/oder bei einer Auswertung oder Interpretation zumindest eines Abschnitts der Kommunikation (durch die Sprachsteuerungsapplikation) können die z.B. aus der NLP (= neurolinguistischen Programmierung) bekannten naturwissenschaftlichen Zusammenhänge berücksichtigt werden. Beispielsweise kann eine Auswertung eines oder mehrerer Aspekte einer Kommunikationsbotschaft, einer Transaktion bzw. eine Abfolge von Transaktionen abhängig von solchen Zusammenhängen erfolgen.One parameter of the communication may be one, e.g. time-ordered, sequence of several parameter values, e.g. with respect to the near past, such as the current time, and / or a prediction for the near future. For example, a parameter of the communication may also be a measure of the change in the values of a particular parameter over time and / or in relation to a space-related (spatially varying) quantity, e.g. Direction and / or distance, e.g. within the living space. Also, at least one parameter of the linguistic communication between the at least two persons in the living space can be taken into account as a function of a recognized body language, voice position, and / or a detected scene occurring approximately in the same (small) time interval, associated with, taking place in the method. For example, a determined change in the body language or voice of at least one person in the living space in connection with the communication of at least two persons can be taken into account. Upon determining at least one parameter of said communication and / or evaluating or interpreting at least a portion of the communication (by the voice control application), the e.g. from the NLP (= neuro-linguistic programming) known scientific contexts are considered. For example, an evaluation of one or more aspects of a communication message, a transaction, or a sequence of transactions may be made depending on such relationships.
Insbesondere kann von einer besagten Kommunikation ausgegangen werden, wenn die im Wohnraum erfassten, entsprechenden Schallwellen bestimmte Vorbedingungen erfüllen, beispielsweise bestimmte Grenzwerte in Bezug auf Parameter einer bestimmten Art der Kommunikation erfüllt bzw. überschritten werden und/oder eine oder mehrere bestimmte Ausbreitungseigenschaft bzw. Ausbreitungsrichtung dieser Schallwellen festgestellt wurden. Auch kann von einer besagten Kommunikation ausgegangen werden, wenn zumindest ein (vorausbestimmtes und/oder gelerntes) Muster in den Parametern der akustischen Schallwellen und/oder einer körperlichen Regung einer Person oder zwei körperlicher Regungen von zumindest zwei Personen erkannt bzw. wiedererkannt wird oder werden. Beispielsweise kann festgestellt werden, dass eine lokalisierte Quelle der Schallwellen mit einer, z.B. mit einem (weiteren) Sensor erfasster, räumlichen Position zumindest einer Person oder einem bestimmten Raumbereich hinreichend übereinstimmt, und/oder dass die Schallwellen nicht zu der Sprachsteuerungsapplikation gerichtet sind und/oder zu einem weiteren Raumbereich oder zu einer weiteren Person gerichtet sind. Daraufhin kann zumindest mit einem erhöhten Wahrscheinlichkeitsmaß angenommen werden, dass es sich (bei einem Abschnitt der Schallwellen) um eine besagte Kommunikation handelt. Auch kann z.B. davon ausgegangen werden, dass es sich bei der Person bzw. bei dem Raumbereich um einen „Sprecher“ innerhalb der besagten Kommunikation handelt.In particular, a said communication can be assumed if the corresponding sound waves detected in the living space fulfill certain preconditions, for example certain limit values with respect to parameters of a particular type of communication are met or exceeded and / or one or more specific propagation characteristics or propagation direction thereof Sound waves were detected. It is also possible to assume a communication if at least one ( predetermined and / or learned) pattern in the parameters of the acoustic sound waves and / or a physical movement of a person or two physical movements of at least two persons are recognized or become. For example, it can be stated that a localized source of the sound waves sufficiently coincides with a spatial position of at least one person or a certain spatial area, for example with a (further) sensor, and / or that the sound waves are not directed to the voice control application and / or are directed to another room area or to another person. Thereupon, at least with an increased probability measure, it can be assumed that (in the case of a section of the sound waves) this is a said communication. It can also be assumed, for example, that the person or room area is a "speaker" within said communication.
Im Verfahren kann ein quantitativ und/oder quantitativ unterschiedliches Anpassen oder unterschiedliche Varianten des Bestimmens oder Anpassens eines Abschnitts des auszugebenden Audiosignals vorgesehen werden. Dabei können jeweils unterschiedliche Parameter bzw. Parameterwerte des Audiosignals angepasst bzw. neu bestimmt werden. Auch kann bei unterschiedlichen Varianten ein unterschiedlicher, dem Bestimmen oder Anpassen zugrundeliegender mathematischer Zusammenhang (Formel, Logik, Kennlinien, Koeffizienten, etc...) gewählt werden. Beispielsweise kann abhängig von einem oder mehreren Parametern der besagten Kommunikation, der an der Kommunikation (als „Sprecher“ oder „Zuhörer“) beteiligten Personen, zumindest eines vorausbestimmten Kriteriums, z.B. abhängig von Optimierungskriterien ein unterschiedliches Verändern, insbesondere Anpassen der Parameter des auszugebenden Audiosignals ausgeführt werden.In the method, a quantitatively and / or quantitatively different adaptation or different variants of determining or adapting a section of the audio signal to be output can be provided. In each case different parameters or parameter values of the audio signal can be adapted or redetermined. In the case of different variants, a different mathematical relationship (formula, logic, characteristic curves, coefficients, etc.) can also be selected for determining or adapting. For example, depending on one or more parameters of said communication, the person involved in the communication (as "speaker" or "listener"), at least one predetermined criterion, e.g. Depending on optimization criteria, a different changing, in particular adjusting the parameters of the output audio signal to be executed.
Auch können für das Anpassen zumindest zwei unterschiedlicher auszugebenden Audiosignale oder zumindest zwei unterschiedliche Abschnitte des zumindest einen auszugebenden Audiosignals unterschiedliche (auch prinzipiell unterschiedliche) Varianten vorgesehen werden. Dabei können jeweils unterschiedliche Parameter bzw. Parameterwerte des Audiosignals, insbesondere Kombinationen aus Parametern bzw. Parameter unterschiedlicher Arten, angepasst werden. Beispielsweise kann ein Bestimmen oder Anpassen eines akustischen Parameters in einer beliebigen, bestimmten, zweckmäßigen Kombination mit dem Bestimmen oder Anpassen zumindest eines Zeitparameters ausgeführt werden. Auch kann bei unterschiedlichen Varianten ein unterschiedliches, dem Bestimmen oder Anpassen zugrundeliegender mathematischer Zusammenhang jeweils unterschiedlich gewählt werden.Also, different (also fundamentally different) variants can be provided for adjusting at least two different audio signals to be output or at least two different sections of the at least one audio signal to be output. In each case different parameters or parameter values of the audio signal, in particular combinations of parameters or parameters of different types, can be adapted. For example, determining or adjusting an acoustic parameter in any particular convenient combination may be accomplished by determining or adjusting at least one time parameter. Also, in different variants, a different, the determining or adjusting underlying mathematical context can be chosen differently.
Bei dem auszugebenden Audiosignal kann es sich um folgende Arten von Audiosignalen handeln:
- - ein Audiosignal eines Multimediainhalts, z.B. repräsentierend Musik, Kinosound, Teil eines Unterhaltungsprogramms. Bevorzugt gehört das auszugebende Audiosignal zu einem mit dem im Wohnraum betriebenen Audiosystem abspielbaren Audioprogramm, bzw. Multimediaprogramm. Ferner kann das Audiosignal ein über das besagte Audiosystem abspielbarer Sound sein der zu einem Video, Videospiel, Simulation, virtuellen Realität, etc. gehört. Alternativ oder zusätzlich kann das Audiosignal aufgefasst werden als:
- - ein Abschnitt einer mit einem Sound akustisch übermittelbaren Information, die durch den Menschen interpretiert bzw. verstanden werden soll;
- - im Wohnraum laut hörbar auszugebender Telekommunikationsinhalt bzw. Fernmeldeinhalt; Ausnahmsweise kann es sich beim auszugebenden Audiosignal auch um eine auditive Meldung handeln, die auf Basis der Daten eines weiteren Geräts oder einer Vorrichtung erzeugt wird. Diese wird bevorzugt aus dem besagten im Wohnraum betriebenen Audiosystem ausgegeben.
- an audio signal of a multimedia content, eg representing music, cinema sound, part of an entertainment program. The audio signal to be output preferably belongs to an audio program or multimedia program that can be played with the audio system operated in the living space. Further, the audio signal may be a sound playable via the said audio system which belongs to a video, video game, simulation, virtual reality, etc. Alternatively or additionally, the audio signal can be understood as:
- a section of information that can be transmitted acoustically with a sound that is to be interpreted or understood by humans;
- - in the living room loud audible to be issued telecommunications content or telecommunications content; By way of exception, the audio signal to be output may also be an auditory message, which is generated on the basis of the data of another device or a device. This is preferably output from said audio-operated in the living room audio system.
Audiosignale können auf Basis der von einem Datenträger eingelesenen oder zum Wohnraum oder dem entsprechenden Haus übertragenen, z.B. gestreamten Datenabschnitte ausgegeben werden. Auch können die besagten Audiosignale mit weiteren Daten, z.B. Bild- Videodaten, Textdaten zusammenhängen bzw. diesen zugeordnet sein. Beispielsweise kann es sich bei dem Audiosignal um einen Teil einer Videosequenz handeln.Audio signals may be based on the data read from a data carrier or transmitted to the home or the corresponding home, e.g. streamed data sections are output. Also, said audio signals may be combined with other data, e.g. Picture - video data, text data related or assigned to this. For example, the audio signal may be part of a video sequence.
Der Begriff „auszugebender“ Audiosignal bedeutet insbesondere dass das Audiosignal aktuell ausgegeben wird, zur Ausgabe geplant ist oder zu einer Menge vorausgewählter (etwa: freigeschalteter) Audiosignale gehört die sich zur Ausgabe eignen. Das Verändern, insbesondere Anpassen des auszugebenden Audiosignals wird insbesondere auf einen (bestimmten, zeitlich bzw. inhaltlich betreffenden) Abschnitt des Audiosignals angewandt.The term "audio signal to be output" means, in particular, that the audio signal is currently being output, scheduled to be output, or belonging to a set of preselected (eg, unlocked) audio signals suitable for output. The modification, in particular adaptation of the audio signal to be output, is applied in particular to a section of the audio signal (which relates to time or content).
Das auszugebende Audiosignal kann beispielsweise bereits ein Stereosignal, bevorzugt als mehrkanaliges Audiosignal, oder als ein, z.B. kodiertes, Raumklangsignal sein. Dieses kann von einer Audioquelle, z.B. als ein Datenstrom bzw. in einer auf Datenpakete beliebig verteilten Form, ausgelesen oder im Verfahren ermittelt werden. Das auszugebende Audiosignal kann z.B. in einem aus Heimkino-Anwendungen bekannten Raumklangformat vorliegen. Das im Wohnraum auszugebende Audiosignal kann mehrere durch unterschiedliche Lautsprecher auszugebende Kanäle umfassen. Es können Kanäle für unterschiedliche Räumlichkeiten eines Hauses sein, wie z.B. bei einem Multi-Raum-Entertainment-Modus (vgl. auch einen sogenannten Partymodus). Beispielsweise kann ein dem Audiosignal entsprechendes Raumklangsignal, z.B. aus den Daten oder Datenpaketen einer Audioquelle, entsprechend den nachstehend beschriebenen Merkmalen der Erfindung ermittelt, verstärkt und im Wohnraum ausgegeben werden.The audio signal to be output can, for example, already be a stereo signal, preferably as a multi-channel audio signal, or as a surround sound signal, for example encoded. This can be read out by an audio source, eg as a data stream or in a form arbitrarily distributed on data packets, or determined in the method. The audio signal to be output can, for example, in a home theater Applications known surround sound format present. The audio signal to be output in the living space may include several channels to be output by different speakers. It can be channels for different rooms of a house, such as in a multi-room entertainment mode (see also a so-called party mode). For example, a room sound signal corresponding to the audio signal, for example from the data or data packets of an audio source, can be determined in accordance with the features of the invention described below, amplified and output in the living space.
Das Verändern, insbesondere Anpassen des auszugebenden Audiosignals kann bereits während der Erzeugung der zugrundeliegenden Daten, z.B. beim Ermitteln der das Audiosignal repräsentierenden Datenabschnitte bzw. des entsprechenden Datenstroms erfolgen. Das Verändern, insbesondere Anpassen des im Wohnraum auszugebenden Audiosignals kann mittels einer unmittelbaren oder mittelbaren Ansteuerung des Audiosystems, bzw. der Recheneinheit in der das Audiosignal erzeugt, verarbeitet, verstärkt oder ausgegeben wird, erfolgen. Beispielsweise kann ein Verändern, insbesondere Anpassen zumindest eines Parameters des im Wohnraum auszugebenden Audiosignals, durch Ansteuern einer der genannten (zur Ausführung des Verfahrens vernetzten) Recheneinheiten erfolgen. Ein Teil des Verfahrens kann in einem mobilen Anwendergerät ausgeführt werden, wobei das mobile Anwendergerät über eine, insbesondere zur Ausführung des Verfahrens eingerichtete, Schnittstelle verfügt.The altering, in particular adaptation of the audio signal to be output can already take place during the generation of the underlying data, e.g. take place when determining the audio signal representing data sections or the corresponding data stream. The modification, in particular adaptation of the audio signal to be output in the living space, can take place by means of a direct or indirect activation of the audio system or of the arithmetic unit in which the audio signal is generated, processed, amplified or output. For example, a modification, in particular adaptation of at least one parameter of the audio signal to be output in the living space, can take place by activating one of the mentioned (networked to execute the method) computing units. A part of the method can be executed in a mobile user device, the mobile user device having an interface set up, in particular for carrying out the method.
Bevorzugt ist im Verfahren vorgesehen, dass speziell auf (im Wohnraum akustisch hörbare) Personenstimmen, insbesondere aber nicht auf weitere Geräuschquellen wie z.B. das Bellen eines Hundes, Lärm von innerhalb oder außerhalb des Wohnraums, oder auch nicht auf ein Hintergrundgeräusch, z.B. ein Windgeräusch oder bestimmte Arten von Geräuschkulissen, reagiert wird. Alternativ wird auf solche weiteren, nicht zum besagten Audiosignal und nicht zu der besagten sprachlichen Kommunikation gehörenden akustischen Inhalte erfindungsgemäß prinzipiell anders und/oder mit einem quantitativ oder qualitativ (prinzipiell) anderen Verändern des auszugebenden Audiosignals reagiert.Preferably, it is provided in the method that especially on (in the living room acoustically audible) person voices, but especially not on other noise sources such. the barking of a dog, noise from inside or outside the living space, or even no background noise, e.g. a wind noise or certain types of background noise, is reacted. Alternatively, such further, not to said audio signal and not to the said linguistic communication belonging acoustic content according to the invention in principle reacts differently and / or with a quantitative or qualitative (in principle) other changing the audio signal to be output.
Im Verfahren können abhängig von einer Personengruppe einer an der Kommunikation beteiligten Person, beispielsweise entsprechend einer Rolle, die eine Person in der Familie hat, unterschiedliche Parameter der Kommunikation unterschiedlich stark berücksichtigt werden und/oder unterschiedliche Parameter des auszugebenden Audiosignals, insbesondere in unterschiedlichen Maßen angepasst werden. Beispielsweise kann auf das, im Verfahren erkannte Schreien oder Weinen der Kinder und/oder auf eine Stimme eines Haustiers, oder Haustiers einer bestimmten Art (Hund, Katze, Vogel, Nagetier, etc.) entsprechend anderer Bedingungen, z.B. einer bestimmten Logik, oder in Bezug auf die zu berücksichtigenden Parameter entsprechender auditiven Kommunikation, oder in Bezug auf einen oder mehrere Parameter des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung, auch eine weitere (gesonderte) vorausbestimmte Maßnahme ausgeführt werden.In the method, different parameters of the communication can be taken into account differently depending on a person group of a person involved in the communication, for example according to a person's role in the family, and / or different parameters of the audio signal to be output, especially in different dimensions , For example, the crying or crying of the child and / or voice of a pet or pet of a particular species (dog, cat, bird, rodent, etc.) detected in the procedure may be affected according to other conditions, e.g. a particular logic, or with respect to the parameters of appropriate auditory communication to be considered, or with respect to one or more parameters of the audio signal to be output and / or the at least one auditory message, also a further (separate) predetermined action may be performed.
In einem vereinfachten Beispiel wird erkannt, dass eine Person, beispielsweise eine bestimmte Person, eine Person, die zu einer bestimmten Personengruppe gehört, eine Person in einem bestimmten Raumbereich des Wohnraums und/oder an einem bestimmten Sitzplatz im Wohnraum, anfängt zu sprechen oder (vorerst lediglich) vorhat zu sprechen. Daraufhin wird eine auszugebende (z.B. das gerade ausgegebene und/oder zur Ausgabe bestimmte) Abschnitt des Audiosignals zweckmäßig verändert. Bevorzugt erfolgt eine solche Veränderung nur bzw. vorwiegend betreffend eines passenden Zeitintervalls bzw. betreffend einen oder mehreren bestimmte, passende, Abschnitte der auditiven Meldung und der Parameter bestimmter Arten.In a simplified example, it is recognized that a person, for example a certain person, a person belonging to a certain group of people, a person in a certain room area of the living space and / or at a certain seat in the living room, starts to speak or (for the time being only) intends to speak. Thereupon, a portion of the audio signal to be outputted (e.g., the one being outputted and / or intended for output) is appropriately changed. Such a change preferably takes place only or predominantly with regard to a suitable time interval or with regard to one or more specific, suitable, sections of the auditory message and the parameters of specific types.
Dabei kann das Audiosignal derart verändert werden, dass es z.B. in einem Raumbereich oder von einem bestimmten (ersten) Raumbereich besser hörbar ist und/oder in einem weiteren (zweiten) Raumbereich oder von einer weiteren bestimmten Position im Wohnraum weniger hörbar wird oder weniger störend wirkt. Bevorzugt kann der eine oder mehrere Parameter der auditiven Meldung derart bestimmt werden, dass eine Verbesserung der Wahrnehmbarkeit und/oder Verständlichkeit zumindest einer in der besagten Kommunikation zwischen zwei Personen im Wohnraum enthaltenen Kommunikationsbotschaft, z.B. einer sprachlichen Botschaft bzw. einer Transaktion angestrebt wird. Dabei kann die Anpassung zumindest vorranging in Bezug auf einen oder mehrere bestimmte Raumbereiche ausgeführt werden und mit einer verringerten Einflussnahme auf weitere (für die besagte sprachliche Kommunikation nicht oder weniger relevante) Raumbereiche erfolgen. Somit kann ein Widerspruch zwischen der Wahrnehmbarkeit eines oder mehrerer Audiosignale und einer unmittelbaren, unter anwesenden Personen stattfindenden oder gewollten sprachlichen Kommunikation und/oder einer im selben Zeitintervall ausgegebenen auditiven Meldung vorteilhaft gelöst werden.In this case, the audio signal can be changed such that e.g. is better audible in a room area or from a certain (first) room area and / or is less audible or less disturbing in another (second) room area or from another particular position in the living room. Preferably, the one or more parameters of the auditory message may be determined so as to improve the perceptibility and / or intelligibility of at least one communication message included in said communication between two persons in the living space, e.g. a linguistic message or a transaction is sought. In this case, the adaptation can be carried out at least predominantly with respect to one or more specific spatial regions and with a reduced influence on further spatial regions (which are not or less relevant for said linguistic communication). Thus, a contradiction between the perceivability of one or more audio signals and an immediate, taking place among people present or intended linguistic communication and / or issued in the same time interval auditory message can be solved advantageously.
Beispielsweise kann ein Parameter des auszugebenden Audiosignals derart bestimmt oder angepasst werden, dass eine Verschiebung der in bestimmten Raumbereichen erzeugten bzw. zu erzeugenden akustischen Leistung und/oder eine Veränderung der Phase des aus einem oder mehreren bestimmten Lautsprechern ausgegebenen Audiosignals erfolgt. Insbesondere kann eine frequenzabhängige Veränderung einer Phasenverschiebung zwischen dem durch zumindest zwei (physikalische oder virtuell gebildete) Lautsprecher ausgegebenen besagten Audiosignal ausgeführt werden. Auch kann für zumindest zwei Stimmen oder zwei unterschiedliche Personen eine unterschiedliche Anpassung, z.B. hinsichtlich einer Anpassungsfunktion, Anpassungskennlinie, eines entsprechenden mathematischen Zusammenhangs, zumindest eines Abschnitts eines im Wohnraum auszugebenden Audiosignals ausgeführt werden.For example, a parameter of the audio signal to be output can be determined or adapted in such a way that a shift of the acoustic power generated or to be generated in certain spatial areas and / or a change in the phase of the one or more audio signal output from several dedicated speakers. In particular, a frequency-dependent change of a phase shift between the said audio signal output by at least two (physically or virtually formed) loudspeakers may be carried out. Also, for at least two voices or two different persons, a different adaptation, for example with respect to an adaptation function, adaptation characteristic, a corresponding mathematical relationship, at least a portion of an audio signal to be output in the living space can be carried out.
Beispielsweise kann das auszugebende Audiosignal auf das Schreien oder Weinen eines Kindes oder auf eine Stimme eines Haustiers (nachdem diese als solche erkannt werden) nicht, oder anders angepasst werden, als auf eine sprachliche Kommunikation einer Person, die zugehörig ist zu der Personengruppe „Erwachsener“, z.B. „Mutter“ bzw. „Frau“. Die Unterschiede in der entsprechenden sprachlichen Kommunikation können nach vorausbestimmten Kriterien erkannt werden, z.B. auch vereinfacht durch eine Auswertung bzw. Erkennung menschlicher Sprache, entsprechender Wortsequenzen, etc. erfolgen. Im Verfahren können abhängig von einer Personengruppe, beispielsweise entsprechend einer Rolle, die eine Person z.B. in der Familie hat, unterschiedliche Parameter der Kommunikation unterschiedlich stark berücksichtigt werden und/oder unterschiedliche Parameter des auszugebenden Audiosignals, insbesondere in unterschiedlichen Maßen angepasst werden. Je nach der (erkannten, ermittelten, eingelesenen) Information zu der Personengruppe einer von der besagten Kommunikation betroffenen im Wohnraum kann ein unterschiedliches Anpassen eines oder mehrerer Parameter des im Wohnraum auszugebenden Audiosignals und/oder der zumindest einer auditiven Meldung erfolgen.For example, the audio signal to be output may not be adapted to the crying or crying of a child or a voice of a pet (after being recognized as such), or otherwise, than to a linguistic communication of a person belonging to the adult person group. , eg "Mother" or "woman". The differences in the corresponding linguistic communication can be recognized according to predetermined criteria, e.g. also simplified by an evaluation or recognition of human speech, corresponding word sequences, etc. take place. In the method, depending on a group of persons, for example according to a person's role, e.g. in the family, different parameters of the communication have to be taken into account to different degrees and / or different parameters of the audio signal to be output, in particular to be adapted in different dimensions. Depending on the (recognized, determined, read) information on the group of people in the living space affected by said communication, a different adaptation of one or more parameters of the audio signal to be output in the living space and / or the at least one auditory message can take place.
Bevorzugt wird im Verfahren zwischen dem besagten Audiosignal und der zumindest einer besagten auditiven Meldung, insbesondere einer Sprachmitteilung, unterschieden. Auch kann zwischen dem besagten auszugebenden Audiosignal, z.B. einem von einer Datenquelle ausgelesenen Audiosignal eines Multimediainhalts, der besagten auditiven Meldung und einem weiteren, anders gearteten, Audiosignal, z.B. eines Audiosignals eines Fernmeldeinhalts, unterschieden werden.In the method, a distinction is preferably made between the said audio signal and the at least one said auditory message, in particular a voice message. Also, between the said audio signal to be output, e.g. an audio signal of a multimedia content read from a data source, said auditory message and another, different audio signal, e.g. an audio signal of a telecommunications content.
Die Ausgabe eines oder mehrerer Abschnitte des Audiosignals und/oder die zumindest eine auditive Meldung können über unterschiedliche Kanäle des (desselben) Audiosystems, z.B. eines Receivers für unterschiedliche Räumlichkeiten eines Hauses sein, wie z.B. bei einem Multi-Raum-Entertainment-Modus (vgl. auch einen sogenannten Partymodus) oder, bevorzugt in bestimmten Raumbereichen des Wohnraum veranlasst werden. Beispielsweise kann ein Raumklangsignal der zumindest einer auditiven Meldung entspricht ermittelt, verstärkt und z.B. auch mittels des besagten Audiosystems ausgegeben werden. Auch kann die auditive Meldung, insbesondere nur wenn zweckmäßig möglich, zusammen mit dem zumindest einem auszugebenden Audiosignal, insbesondere zumindest teilweise räumlich und/oder zeitlich überschneidend ausgegeben werden. Bevorzugt wird die zumindest eine auditive Meldung, z.B. auf Basis der Daten einer Sprachsteuerungsapplikation, eines Hausnetzwerks, einer im Haus betriebenen Vorrichtung mittels des im Wohnraum betriebenen Audiosystems erzeugt.The output of one or more portions of the audio signal and / or the at least one auditory message may be transmitted through different channels of the same audio system, e.g. a receiver for different premises of a house, such as in a multi-room entertainment mode (see also a so-called party mode) or, preferably, be initiated in certain areas of the living space. For example, a surround sound signal corresponding to at least one auditory message may be detected, amplified, and e.g. also be output by means of said audio system. Also, the auditory message, in particular only if expediently possible, together with the at least one output audio signal, in particular at least partially spatially and / or temporally overlapping output. Preferably, the at least one auditory message, e.g. generated on the basis of the data of a voice control application, a home network, an in-house device by means of operated in the living room audio system.
Beispielsweise kann im Verfahren ein Bestimmen oder Anpassen der Parameter zum Erzeugen zumindest eines Abschnitts des auszugebenden Audiosignals und der zumindest einer auditiven Meldung erfolgen, wobei die auditive Meldung und der Abschnitt des Audiosignals zumindest teilweise innerhalb eines gewissen (kleinen) Zeitintervalls, z.B. 1, 10, 30, 60, 120 Sekunden, gleichzeitig oder zumindest teilweise zeitlich überlappend ausgegeben werden. Alternativ oder zusätzlich kann das Bestimmen bzw. Anpassen der Parameter der zumindest einen auditiven Meldung und zumindest eines Abschnitts des auszugebenden Audiosignals erfolgen, wobei die auditive Meldung und zumindest ein Abschnitt des Audiosignals zumindest überwiegend in jeweils unterschiedlichen Raumbereichen des Wohnraums (in der Größenordnung von einigen Quadratmeter), die sich beispielsweise teilweise räumlich überlappen, ausgegeben werden (sollen). Ein oder mehrere Parameter der zumindest einer auditiven Meldung und/oder des auszugebenden Audiosignals, die zumindest teilweise dasselbe Zeitintervall und/oder denselben Raumbereich betreffen, können im Verfahren abhängig voneinander bestimmt, angepasst, gesteuert werden. Ein oder mehrere Parameter der zumindest einer auditiven Meldung und/oder des weiteren auszugebenden Audiosignals können derart bestimmt werden, dass das zumindest ein Optimierungskriterium, z.B. in Bezug auf einen (bestimmten) Raumbereich des Wohnraums, eine bestimmte Person, erreicht oder angestrebt wird. Dabei kann eine kumulierte („gemeinsame“) Wirkung von den besagten zumindest zwei auditiven Inhalten auf zumindest einen zumindest potentiellen Zuhörer in zumindest einem Raumbereich des Wohnraums zweckmäßig, z.B. nach zumindest einem gemeinsamen Optimierungskriterium, gesteuert werden.For example, in the method, the parameters may be determined or adjusted to produce at least a portion of the audio signal to be output and the at least one auditory message, wherein the auditory message and the portion of the audio signal are at least partially resolved within a certain (small) time interval, e.g. 1, 10, 30, 60, 120 seconds, simultaneously or at least partially temporally overlapping output. Alternatively or additionally, the parameters of the at least one auditory message and at least one section of the audio signal to be output can be determined or adapted, the auditory message and at least a portion of the audio signal being at least predominantly in respectively different spatial areas of the living space (on the order of a few square meters ), which overlap, for example, partially spatially, (should) be spent. One or more parameters of the at least one auditory message and / or the audio signal to be output, which relate at least partially to the same time interval and / or the same spatial area, can be determined, adapted, controlled in the method depending on one another. One or more parameters of the at least one auditory message and / or the further audio signal to be output can be determined in such a way that the at least one optimization criterion, e.g. in relation to a (specific) space of the living space, a particular person, is achieved or desired. A cumulative ("common") effect of said at least two auditory content on at least one at least potential listener in at least one room area of the living space may be expedient, e.g. be controlled according to at least one common optimization criterion.
Insbesondere wird beim Anpassen eines oder mehrerer Parameter des auszugebenden Audiosignals berücksichtig, ob zumindest eine auditive Meldung in einem bestimmten Zeitintervall in der nahen Zukunft auszugegeben ist und/oder ob durch die zumindest eine auditive Meldung in einem bestimmten, betreffenden, Zeitintervall in der nahen Zukunft ein oder mehrere bestimmte Grenzwerte, insbesondere bestimmte akustische Grenzwerte, z.B. in einem bestimmten Raumbereich des Wohnraums, überschritten bzw. voraussichtlich überschritten werden.In particular, when adjusting one or more parameters of the audio signal to be outputted, it is taken into account whether at least one auditory message is output in a specific time interval in the near future and / or by the at least one auditory message in a specific, relevant time interval in the near future Future one or more specific limits, in particular certain acoustic limits, eg in a certain area of the living space, exceeded or expected to be exceeded.
Dabei können Daten betreffend zumindest eine auditive Meldung die in der nahen Zukunft (etwa in 10, 20, 30, 60 Sekunden) auszugeben ist, eingelesen und berücksichtigt werden. Daraufhin können die Daten die eine in der nahen Zukunft auszugebende auditive Meldung betreffen (z.B. einen Vorlauf auditiver Meldungen) mit den Daten zu einem weiteren Verlauf des auszugebenden Audiosignals, z.B. eines Films etwa mit einem (virtuellen) Vorlauf von > 10, 20, 30, 60 Sekunden, abgeglichen werden. Beispielsweise wird das auszugebende Audiosignals und/oder die zumindest eine auditive Meldung auf das Vorhandensein der Abschnitte ausgewertet, die (jeweils allein genommen oder insgesamt) eine Überschreitung bestimmter Grenzwerte, insbesondere in zumindest einem Raumbereich in einem vorausliegenden Zeitintervall voraussichtlich verursachen können. Daraufhin (im positiven Fall) erfolgt ein Bestimmen oder Anpassen der Parameter, eine Maßnahme oder eine Variante des Anpassens der Parameter, die wahlweise ein Anpassen eines oder mehrerer Parameter der auditiven Meldung, ein Bestimmen oder Anpassen der Parameter des zumindest eines Abschnitts des auszugebenden Audiosignals oder beides umfasst.In this case, data concerning at least one auditory message that is to be output in the near future (approximately in 10, 20, 30, 60 seconds) can be read in and taken into account. Thereafter, the data may relate to an auditory message to be issued in the near future (e.g., an auditory prefix) with the data on a further course of the audio signal to be output, e.g. for example, with a (virtual) forerun of> 10, 20, 30, 60 seconds. By way of example, the audio signal to be output and / or the at least one auditory message are evaluated for the presence of the sections which (in each case taken alone or in total) can presumably cause exceeding of certain limit values, in particular in at least one spatial area in a preceding time interval. Thereafter (in the affirmative case), the parameters are determined or adjusted, a measure or variant of adapting the parameters, optionally adjusting one or more parameters of the auditory message, determining or adjusting the parameters of the at least one portion of the audio signal to be output, or includes both.
Beispielweise kann das Verfahren umfassen: ein Ermitteln eines voraussichtlichen Verlaufs eines oder mehrerer akustischer Werte auf Basis der zumindest einen auditiven Meldung die ein (bestimmtes) Zeitintervall in der nahen Zukunft betrifft, und daraufhin das Bestimmen insbesondere Anpassen eines Parameters zumindest eines Abschnitts des auszugebenden Audiosignals, abhängig von dem ermittelten voraussichtlichen Verlauf der akustischer Werte auf Basis der auditiven Meldung in zumindest einem Raumbereich. Dabei können die besagten akustischen Werte für zumindest einen oder mehrere bestimmte Raumbereiche des Wohnraums und/oder Zeitintervalle vorausschauend (rechnerisch) ermittelt, geschätzt, insbesondere simuliert werden.For example, the method may include: determining a prospective history of one or more acoustic values based on the at least one auditory message relating to a (specific) time interval in the near future, and then determining, in particular, adjusting a parameter of at least a portion of the audio signal to be output; depending on the determined probable course of the acoustic values on the basis of the auditory message in at least one spatial area. In this case, the said acoustic values for at least one or more specific spatial regions of the living space and / or time intervals can be determined (mathematically) in advance, estimated, in particular simulated.
Das Bestimmen des zumindest eines Parameters der zumindest einer auditiven Meldung kann insbesondere ein Anpassen des Parameters sein. Das Bestimmen eines Parameters bedeutet insbesondere ein Bestimmen eines oder mehrerer Parameterwerte eines bestimmten Parameters, insbesondere eines Parameters einer bestimmten Art. Vereinfacht gesagt können beim Bestimmen eines Parameters ein oder mehrere Parameterwerte ermittelt und für ein bestimmtes Zeitintervall oder in Bezug auf einen bestimmten Abschnitt des Audiosignals, insbesondere vorausschauend festgelegt werden. Das Anpassen bedeutet insbesondere das Anpassen eines oder mehrerer vorgegebenen bzw. sonst gültigen Parameterwerte eines Parameters insbesondere eines Parameters einer bestimmten Art. Beispielsweise kann dabei ein additiver, multiplikativer, logarithmischer Faktor angewandt werden mit dem ein Parameterwert angepasst wird.The determination of the at least one parameter of the at least one auditory message can in particular be an adaptation of the parameter. Specifically, determining a parameter means determining one or more parameter values of a particular parameter, in particular a parameter of a particular type. Simply stated, when determining a parameter, one or more parameter values may be determined and for a particular time interval or with respect to a particular portion of the audio signal, be determined in particular forward-looking. The adaptation means in particular the adaptation of one or more predetermined or otherwise valid parameter values of a parameter, in particular of a parameter of a specific type. For example, an additive, multiplicative, logarithmic factor can be used with which a parameter value is adapted.
Ein Abschnitt eines (eventuell vorhandenen) zweiten weiteren, Audiosignals, repräsentierend eine sprachlich übermittelte Nachricht, einen Abschnitt eines Telekommunikationsinhalts, z.B. eine Nachricht an einem Anrufbeantworter oder eine versendete Sprachbotschaft kann im Verfahren dabei auch als eine auditive Meldung behandelt werden.A portion of a (possibly existing) second further audio signal representing a linguistically transmitted message, a portion of a telecommunications content, e.g. a message to an answering machine or a sent voice message can also be treated as an auditory message in the process.
Der Begriff „Personengruppen“ kann im Rahmen dieses Dokuments unterschiedliche, nach naturwissenschaftlichen Kriterien unterscheidbaren Gruppen bzw. Kategorien von Personen sein. Personengruppen können, z.B. Mitglieder einer Familie, Personen aus einem Bekanntenkreis einer Person oder einer Familie, „bekannte Gäste“, „unbekannte Gäste“, „Frauen“, „Männer“, „Kinder“, „Haustier“, „Haustiere einer bestimmter Art“, Personengruppen entsprechend Altersabschnitten, z.B. 0-2 Jahre, 2-4 Jahre, 4-8 Jahre, 8-12 Jahre, ... etc. oder vergleichbare Kategorien umfassen. Eine Personengruppe kann im Verfahren auch ein nach vorausbestimmten naturwissenschaftlichen Kriterien unterscheidbarer Persönlichkeitstyp, ein sogenannter Archetyp, ein Wahrnehmungstyp bzw. Kommunikationstyp sein.The term "groups of persons" in the context of this document may be different groups or categories of persons that can be differentiated according to scientific criteria. Groups of persons may, e.g. Members of a family, persons from a circle of acquaintances of a person or a family, "known guests", "unknown guests", "women", "men", "children", "pets", "pets of a certain kind", groups of persons according to age segments , eg 0-2 years, 2-4 years, 4-8 years, 8-12 years, ... etc. or include comparable categories. In the method, a group of persons may also be a personality type that can be differentiated according to predetermined scientific criteria, a so-called archetype, a type of perception or a type of communication.
Beispielsweise kann eine Personengruppe auch nach Kriterien eines Interessenschwerpunkts, einer Wahrnehmungsbehinderung, Schwerhörigkeit bzw. einer bestimmten Variante der Schwerhörigkeit, etc. definiert werden. Zwei bis fünf besagte Wahrnehmungstypen können im Einklang mit der sogenannten NLP (= neurolinguistischen Programmierung) definiert werden, z.B. visuell, auditiv, kinästhetisch, olfaktorisch gustatorisch. Dabei können Eigenschaften die diesen Wahrnehmungstypen entsprechend eigen sind bzw. ihnen zugeordnet werden, z.B. besondere Reize an welchen sich die Wahrnehmungstypen vorwiegend orientieren, Eigenschaften der Augenbewegung, Mimik, Körpersprache, Kommunikationsverhaltens, etc. im Verfahren berücksichtigt werden. Bevorzugt kann die Personengruppe alternativ oder zusätzlich einem oder mehreren sogenannten Kundensegmenten bzw. Verbrauchersegmenten zugeordnet werden oder ein mathematischer Zusammenhang zwischen mehreren Personengruppen und Kundensegmenten bzw. Verbrauchersegmenten ermittelt oder vorgegeben werden. Auf Basis dieser Daten und Zuordnungen können im Verfahren weitere Funktionalitäten, z.B. Informationsflüsse oder Kontextbezüge hergestellt werden.For example, a group of people may also be defined according to criteria of a focus of interest, a perception disability, a hearing loss or a specific variant of the deafness, etc. Two to five types of perception can be defined in accordance with so-called NLP (= neuro-linguistic programming), e.g. visual, auditory, kinaesthetic, olfactory gustatory. In this case, properties that are inherent to these types of perception or are assigned to them, e.g. special stimuli to which the types of perception are predominantly oriented, features of eye movement, facial expressions, body language, communication behavior, etc. are taken into account in the process. Preferably, the group of persons can alternatively or additionally be assigned to one or more so-called customer segments or consumer segments, or a mathematical relationship between several groups of persons and customer segments or consumer segments can be determined or specified. Based on these data and assignments, additional functionalities, e.g. Information flows or contextual references are produced.
Beispielsweise können 4-12 Personengruppen die bestimmten Persönlichkeitstypen entsprechen, etwa entsprechend den an sich bekannten Archetypen, wie z.B. Sternzeichen (bzw. diesen zugewiesenen Eigenschaften) oder einem statischem oder dynamischen Typenmodell, beispielsweise wie diese aus den Kommunikationswissenschaften, Theaterwissenschaft, etc. bekannt sind, gewählt werden. Persönlichkeitstypen können auch anhand ihres sogenannten Egogramms, z.B. basierend auf einem Test, unterschieden werden. Beispielsweise kann die Ausführung des Verfahrens für Personen zugehörig zu unterschiedlichen Personengruppen qualitativ bzw. quantitativ unterschiedlich erfolgen. Dabei können für Personen bzw. auf die Erkennung von Personen die (zumindest mit einem bestimmten Wahrscheinlichkeitsmaß) bestimmten oder unterschiedlichen Personengruppen zugehören, im Verfahren unterschiedliche (erwartete) Wahrnehmungseigenschaften, Kommunikationseigenschaften, etc. zugeordnet und bei der Ausführung des Verfahrens berücksichtigt werden. Beispielsweise kann eine zumindest wahrscheinliche oder ein gewisses Wahrscheinlichkeitsmaß übersteigernde Zugehörigkeit einer Person zu einer Personengruppe beim Erzeugen einer auditiven Meldung, Sprachmitteilung, etc. berücksichtigt werden. Somit kann ein (zumindest statistisch) verbessertes Ergebnis erzielt werden.For example, 4-12 groups of people may have the specific personality types correspond, for example, according to the known archetypes, such as zodiac (or those assigned properties) or a static or dynamic type model, for example, as these are known from the communication sciences, theater studies, etc., are selected. Personality types can also be distinguished by their so-called egogram, eg based on a test. For example, the execution of the method for persons belonging to different groups of people may be qualitatively or quantitatively different. In this case, for persons or for the recognition of persons the (at least with a certain probability measure) certain or different groups of persons belong, in the procedure different (expected) perception properties, communication properties, etc. assigned and taken into account in the execution of the method. For example, an affiliation of a person to a group of persons that is at least probable or that exceeds a certain degree of probability when generating an auditory message, voice message, etc., may be taken into account. Thus, an (at least statistically) improved result can be achieved.
Abhängig von einer Personengruppe einer an der Kommunikation beteiligten Person, beispielsweise entsprechend einer Rolle, die eine Person in der Familie hat, unterschiedliche Parameter der besagten Kommunikation unterschiedlich berücksichtigt werden und/oder unterschiedliche Parameter des Audiosignals, insbesondere in unterschiedlichen Maßen bestimmt oder angepasst werden. Beispielsweise kann abhängig von der (erkannten, ermittelten, eingelesenen) Information zu der Personengruppe zumindest einer an der besagten Kommunikation beteiligten Person kann ein unterschiedliches Bestimmen oder Anpassen eines oder mehrerer Parameter zumindest eines Abschnitts des auszugebenden Audiosignals und/oder der zumindest einer auditiven Meldung ausgeführt werden. Dabei können jeweils unterschiedliche Parameter der besagten Kommunikation jeweils unterschiedlich berücksichtigt bzw. gewichtet werden oder unterschiedlichen Varianten des Bestimmens der Parameter des auszugebenden Audiosignals und/oder der auditiven Meldung angewandt werden.Depending on a group of people involved in the communication, for example, according to a role that has a person in the family, different parameters of said communication are considered differently and / or different parameters of the audio signal, in particular determined or adapted in different dimensions. For example, depending on the (recognized, determined, read) information on the group of persons of at least one involved in said communication, a different determination or adjustment of one or more parameters of at least a portion of the output audio signal and / or the at least one auditory message can be performed , In each case, different parameters of said communication can each be considered or weighted differently or applied to different variants of determining the parameters of the audio signal to be output and / or the auditory message.
Als Wohnraum sind im Rahmen dieser Beschreibung ein oder mehrere Zimmer bzw. beliebig geformte Räumlichkeiten eines Hauses bzw. einer Immobilie zu verstehen. Der Wohnraum kann aus mehreren zumindest teilweise akustisch voneinander getrennten und/oder zumindest teilweise akustisch miteinander verbundenen Teilen, z.B. Zimmern, Kammern oder Räumlichkeiten oder Bereichen einer anderen Art bestehen. Der Begriff „Raumbereiche“ bezieht sich insbesondere auf Raumbereiche innerhalb eines Zimmers, oder innerhalb zumindest teilweise akustisch miteinander verbundener Räumlichkeiten, z.B. einer Wohnküche, eines Wohnzimmers und eines verbundenen Korridors. Beim dem Wohnraum handelt es sich stets um einen stationären Wohnraum. In jedem Fall bezieht sich der Begriff Wohnraum auf eine wie auch immer gestaltete oder genutzte Immobilie.As a living space in the context of this description, one or more rooms or arbitrarily shaped premises of a house or a property to understand. The living space may consist of several at least partially acoustically separated and / or at least partially acoustically interconnected parts, e.g. Rooms, chambers or premises or areas of a different nature. The term "room areas" refers in particular to room areas within a room, or within at least partially acoustically interconnected premises, e.g. a kitchen, a living room and a connected corridor. The living room is always a stationary living room. In any case, the term "living space" refers to a property, however designed or used.
Das Audiosystem kann z.B. ein im Wohnraum betriebenes System zur Erzeugung und/oder Ausgabe von akustischen Schallwellen auf Basis eines (des) Audiosignals sein. Bevorzugt umfasst das Audiosystem eine zur Ausführung des Verfahrens geeignete, insbesondere zur Ausführung des Verfahrens eingerichtete Recheneinheit, insbesondere eine Signalverarbeitungseinheit. Bevorzugt ist das Audiosystem zur Verarbeitung und/oder zur Ausgabe von Raumklanginhalten, z.B. auf Basis eines Raumklangsignals ausgestaltet. Beispielsweise kann das Audiosystem ein (typischer, stationär betreibbarer) Receiver, ein Multimediasystem, ein Heimkinosystem sein. Das Audiosystem kann zur Erzeugung einer akustischen Wirkung auf Basis des Audiosignals durch mehrere im Wohnraum angeordnete oder virtuelle Lautsprecher ausgestaltet sein. Beispielsweise kann das Audiosystem mehrere im Wohnraum verteilte Lautsprecher, einen sogenannten unidirektionalen Lautsprecher oder einen Lautsprecher in einer sogenannten akustischen Richtstrahltechnologie oder mehreren in verschiedene Raumwinkel ausgerichtete (Hochton-)Lautsprecher umfassen oder entsprechend den Merkmalen des Verfahrens steuern. Auch kann das Audiosystem ein Teil einer mit einem Multimediasystem und/oder einem Computer (z.B. Smart-Home-Computer) oder mit einer Sprachsteuerungsapplikation vernetztes und/oder integriertes System sein. Ferner kann das Audiosystem insbesondere ein mit einer (separaten) Audioausgabevorrichtung vernetztes Anwendergerät, z.B. Laptop, Tablet, Smartphone, Smart-Watch, Smart-Closes oder ein Virtual-Reality-Ausgabegerät sein, welches zur Handhabung, z.B. Erzeugung, Veränderung, Ausgabe von Inhalten, die Audiosignale umfassen sein. Beispielsweise kann das Audiosystem ein Teil eines dezentralen oder verteilten elektronischen Systems sein und z.B. über den Smart-Home-Computer, einen Routers oder ein Multimediasystem steuerbar sein. Es kann sich dabei um ein im Wesentlichen auf den Wohnraum bzw. das entsprechende Haus begrenztes oder ein, eine weitere beabstandet angeordnete Recheneinheit, z.B. einen Server umfassendes System sein.The audio system may e.g. an indoor-powered system for generating and / or outputting acoustic sound waves based on an audio signal (s). The audio system preferably comprises a computing unit, in particular a signal processing unit, which is suitable for executing the method, in particular configured for carrying out the method. Preferably, the audio system is for processing and / or outputting surround sound content, e.g. designed on the basis of a room sound signal. For example, the audio system may be a (typical, stationary operable) receiver, a multimedia system, a home theater system. The audio system may be designed to generate an acoustic effect based on the audio signal by a plurality of arranged in the living room or virtual speakers. For example, the audio system may comprise a plurality of loudspeakers distributed in the living space, a so-called unidirectional loudspeaker or a loudspeaker in a so-called acoustic directional beam technology or a plurality of (tweeter) loudspeakers oriented in different solid angle or control according to the features of the method. Also, the audio system may be part of a system networked and / or integrated with a multimedia system and / or a computer (e.g., smart home computer) or with a voice control application. In addition, the audio system may in particular comprise a user device networked with a (separate) audio output device, e.g. Laptop, tablet, smartphone, smart watch, smart closes or a virtual reality output device, which is designed for handling, e.g. Generation, modification, output of content comprising audio signals. For example, the audio system may be part of a distributed or distributed electronic system, e.g. be controllable via the smart home computer, a router or a multimedia system. It may be a substantially limited to the living space or the corresponding house or one, another spaced apart arithmetic unit, e.g. be a server-wide system.
Auch kann das Audiosystem eine im Wohnraum betriebene Sprachsteuerungsapplikation umfassen, zusammen mit dieser verbaut oder mit dieser (z.B. über eine drahtlose Datenverbindung vernetzt sein. Eine solche Sprachsteuerungsapplikation kann auch eine Funktion eines „Smart-Home-Assistenten“, eines Personenassistenten, etc. umfassen. Eine in diesem Dokument beschriebene Sprachsteuerungsapplikation kann z.B. zur Steuerung der Systeme des Wohnraums bzw. des Hauses, z.B. Licht, Heizung, Fenster, Jalousie, etc., zur Unterhaltung, zur Ausführung organisatorischer Aufhaben, Beantwortung der Fragen oder Ausgabe diverser Informationen abhängig von jeweiligen vorausbestimmten Bedingungen ausgestaltet sein.Also, the audio system may include, be installed with, or be networked with a home-operated voice control application (eg, via a wireless data connection.) Such a voice control application may also include a function of a "smart home assistant," a personal assistant, etc. An in This voice control application described in this document may eg be designed to control the systems of the living space or the house, eg light, heating, windows, blinds, etc., for entertainment, to carry out organizational tasks, to answer the questions or to issue various information depending on respective predetermined conditions be.
Im Verfahren werden ein oder mehrere Parameter der besagten Kommunikation ermittelt. Die Parameter betreffen insbesondere eine aktuell stattfindende oder bevorstehende Kommunikation an der besagten zumindest zwei Personen (aktiv) beteiligt sind. Ein Parameter der Kommunikation kann beispielsweise den Inhalt der Kommunikation und/oder einen oder mehrere akustische Parameter der auditiven Kommunikation kennzeichnen. Ferner können die Parameter der besagten Kommunikation (z.B. Parameter entsprechender Schallwellen) auch auf eine nahe Zukunft (von ca. 1, 5, 10, 20, 40 Sekunden) bezogen sein oder für die nahe Zukunft prädiziert werden. Bevorzugt repräsentieren die besagten Parameter der Kommunikation, bzw. die entsprechenden Arten der Parameter:
- - einen Richtungsparameter, kennzeichnend eine oder mehrere Richtungen, der besagten Kommunikation,
- - eine räumliche Verteilung des akustischen Signals der Sprache (der entsprechenden Druckwellen), entsprechende Phasenparameter, z.B. Phasenverschiebungsparameter;
- - einen Frequenzparameter der auditiven Kommunikation, z.B. eine (effektive bzw. effektiv genutzte) Bandbreite, ein Frequenzspektrum, ein Energiedichtespektrum und dergleichen;
- - Dynamik einer oder mehreren Amplituden und/oder Frequenzen der im Wohnraum hörbaren auditiven Kommunikation;
- - eine oder mehrere Stimmenparameter oder Erkennungsdaten für Stimmen einer oder mehreren auditiv kommunizierenden Personen;
- - einen Amplitudenverlauf, bzw. eine zeitliche Amplitudenveränderung, bzw. eine Amplitudendynamik, eine Veränderung des Frequenzspektrums bzw. des Energiedichtespektrums der entsprechender Schallwellen;
- - ein inhaltliches Merkmal eines Abschnitts bzw. zumindest einer Transaktion aus der besagten Kommunikation zwischen zumindest zwei Personen. Das inhaltliche Merkmal kann sich auf die in einem hinreichend großen Abschnitt der Kommunikation repräsentierte (sprachliche, inhaltliche) Information bzw. einen Inhalt einer mit dem Audiosignal repräsentierten Kommunikationsbotschaft beziehen. Ein inhaltlicher Parameter kann bevorzugt einen oder mehrere Inhalte bzw. Merkmale des Inhalts der besagten Kommunikation kennzeichnen. Ein inhaltliches Merkmal muss dabei nicht einem Informationsgehalt der Kommunikation entsprechen;
- - linguistische Parameter der Kommunikation, z.B. bestimmte in der Kommunikation vorkommende linguistische Strukturen bzw. Konstrukte;
- - ein im Rahmen der besagten Kommunikation auftretendes oder erwartetes Kommunikationsverhalten oder den Kommunikationsstil zumindest einer Person.
- a directional parameter indicative of one or more directions, said communication,
- a spatial distribution of the acoustic signal of the speech (the corresponding pressure waves), corresponding phase parameters, eg phase shift parameters;
- a frequency parameter of the auditory communication, eg a (effectively or effectively used) bandwidth, a frequency spectrum, an energy density spectrum and the like;
- Dynamics of one or more amplitudes and / or frequencies of the auditory communication audible in the living space;
- - one or more voice parameters or recognition data for voices of one or more auditory communicating persons;
- an amplitude variation, or a temporal amplitude change, or an amplitude dynamic, a change in the frequency spectrum or the energy density spectrum of the corresponding sound waves;
- a content-related feature of a section or at least one transaction from said communication between at least two persons. The content-related feature can refer to the (linguistic, content-related) information or content of a communication message represented by the audio signal, which is represented in a sufficiently large portion of the communication. A content parameter may preferably characterize one or more contents of the content of said communication. A content-related feature does not have to correspond to an information content of the communication;
- linguistic parameters of communication, eg certain linguistic structures or constructs occurring in the communication;
- a communication behavior occurring or expected within the scope of said communication or the communication style of at least one person.
Ferner kann ein Parameter der Kommunikation auch ein Maß der Veränderung bzw. Abweichung eines besagten Parameterwertes sein. Beispielsweise kann ein Parameter der Kommunikation auch ein Maß der Veränderung eines oder mehrerer Parameterwerte in Abhängigkeit von weiteren Kriterien kennzeichnen. Ein Parameter der Kommunikation kann als eine Funktion eines der besagten Parameterwerte abhängig von einer weiteren Größe ausgedrückt werden.Furthermore, a parameter of the communication can also be a measure of the change or deviation of a said parameter value. For example, a parameter of the communication may also indicate a measure of the change of one or more parameter values depending on further criteria. A parameter of the communication may be expressed as a function of one of said parameter values depending on another quantity.
Ein Parameter der Kommunikation kann sich auf eine Kommunikationsbotschaft, eine sogenannte Transaktion oder mehrere Transaktionen innerhalb der besagten Kommunikation beziehen. Als Transaktion gilt dabei ein Schritt in der Kommunikation zweier Menschen, der zum Beispiel aus einer Frage und einer Antwort, einer Aussage und einer Gegenaussage oder einer Empfehlung, einer Weisung, eines Kommando und einer Rückfrage besteht. Beispielsweise kann ein Parameter einer auditiven Meldung bestimmt oder angepasst werden abhängig von einer in der Vergangenheit liegenden, insbesondere häufig wiederholter und/oder einer aktuellen und/oder zumindest einen erwarteten Transaktion erfolgen, wobei die Transaktion zu einer Kommunikation zwischen den zumindest zwei Personen (nicht etwa mit einer optional vorhandenen oder aktiven Sprachsteuerungsapplikation) gehört.A parameter of the communication may relate to a communication message, a so-called transaction, or multiple transactions within said communication. A transaction is a step in the communication of two people, consisting of a question and an answer, a statement and a counter statement or a recommendation, an instruction, a command and a query. For example, a parameter of an auditory message may be determined or adjusted depending on a past, particularly frequently repeated and / or current and / or at least expected transaction, the transaction being for communication between the at least two persons (not with an optional existing or active voice control application).
Im Verfahren kann zumindest ein in der Vergangenheit ermittelter, z.B. statistischer, Parameter der Kommunikation, und/oder aktueller Parameter und/oder zumindest ein prädizierter Parameter der Kommunikation ermittelt und verarbeitet werden. Insbesondere wird im Verfahren eine zeitliche Sequenz der entsprechenden Parameterwerte eines oder mehrerer Parameter der Kommunikation, z.B. innerhalb eines gewissen Zeitintervalls oder in bestimmten Zeitintervallen, ermittelt und berücksichtigt. Beispielsweise kann ein Parameter der Kommunikation auch ein Maß der Veränderung eines Parameterwerts im Verlauf der Zeit und/oder in Bezug auf eine auf den Raum bezogene (räumlich veränderliche) Größe, z.B. Richtung und/oder Distanz und/oder bestimmte Flächenbereiche oder Volumenbereiche, die einen oder mehrere bestimmte Raumbereiche des Wohnraums repräsentieren. Beispielsweise kann ein Parameter der besagten Kommunikation ein zeitlicher Gradient und/oder ein räumlicher Gradient eines oder mehreren Parameterwerte sein.In the method, at least one parameter determined in the past, for example statistical, of the communication, and / or current parameters and / or at least one predicated parameter of the communication can be determined and processed. In particular, in the method, a temporal sequence of the corresponding parameter values of one or more parameters of the communication, for example within a certain time interval or at specific time intervals, is determined and taken into account. For example, a parameter of the communication may also be a measure of the change of a parameter value over time and / or in relation to a space (spatially varying) size, eg direction and / or distance, and / or certain surface areas or volume areas, the one or several specific areas of the room Represent living space. For example, a parameter of said communication may be a temporal gradient and / or a spatial gradient of one or more parameter values.
Zumindest ein Parameter der besagten Kommunikation im Wohnraum kann im Verfahren auf Basis von Sensordaten, einer Historie, z.B. zu einer oder mehreren, insbesondere früheren Kommunikationen im Wohnraum oder Kommunikationen mit Beteiligung bestimmter Personen, Personen zugehörig zu bestimmten Personengruppen, etc., ermittelt, bevorzugt prädiziert werden. Dabei kann eine, zumindest vereinfachte, Wahrscheinlichkeitsrechnung oder Schätzung, insbesondere bei einer Prädiktion eines oder mehrerer Parameter angewandt werden. Bevorzugt kann zumindest ein Parameter der Kommunikation mittels eines maschinellen Lernens, insbesondere anhand eines Abgleichs bzw. einer Verrechnung einer Vielzahl der Parameter aus der Historie für einen oder mehrere Kommunikationsvorgänge und/oder für eine oder mehrere (bestimmte) Personen ermittelt werden. Insbesondere erfolgt das besagte Lernen im Zusammenhang oder unter Berücksichtigung einer innerhalb eines bestimmten Zeitintervalls mit dem Abschnitt der Kommunikation erfassten Szene im Wohnraum. Dabei kann, ein späteres Ermitteln eines Parameters der Kommunikation abhängig von einem Parameter einer dann erfassten, insbesondere erkannten Szene erfolgen. Bevorzugt erfolgt das Bestimmen eines Parameters einer auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals abhängig von einer Kombination aus Lerndaten auf Basis mehrerer Kommunikationen in der Vergangenheit und eines aktuellen oder aktuell prädizierten Parameter der besagten Kommunikation.At least one parameter of said communication in the living space may be stored in the method on the basis of sensor data, a history, e.g. to one or more, in particular earlier communications in the living space or communications involving certain persons, persons belonging to specific groups of persons, etc., are determined, preferably predicted. In this case, an, at least simplified, probability calculation or estimation, in particular in a prediction of one or more parameters can be applied. Preferably, at least one parameter of the communication can be determined by means of machine learning, in particular by means of a comparison or a clearing of a plurality of the parameters from the history for one or more communication processes and / or for one or more (specific) persons. In particular, the said learning takes place in the context of or taking into account a scene in the living space detected within a certain time interval with the section of the communication. In this case, a later determination of a parameter of the communication can take place as a function of a parameter of a scene then detected, in particular recognized scene. Preferably, the determination of a parameter of an auditory message and / or a portion of the further audio signal is dependent on a combination of learning data based on a plurality of communications in the past and a current or currently predicted parameter of said communication.
Beispielsweise repräsentiert zumindest ein Parameter der Kommunikation ein Kommunikationsvorhaben und/oder einen Stimmenparameter zumindest einer, insbesondere einer bestimmten Person im Wohnraum und/oder einer Person in einem bestimmten Raumbereich, z.B. an einem Sitzplatz im Wohnraum. Dabei kann das Verfahren ein Erfassen eines Kommunikationsvorhabens und/oder einer Stimme zumindest einer, insbesondere einer bestimmten Person im Wohnraum und/oder einer Person in einem bestimmten Raumbereich im Wohnraum erfolgen, wobei daraufhin ein Bestimmen eines Parameters einer auditiven Meldung und/oder eines Abschnitts des weiteren auszugebenden Audiosignals abhängig von dem erfassten Kommunikationsvorhaben und/oder der Stimme erfolgt.For example, at least one parameter of the communication represents a communication project and / or a voice parameter of at least one, in particular a specific person in the living space and / or a person in a certain spatial area, e.g. at a seat in the living room. The method may involve recording a communication project and / or a voice of at least one, in particular a specific person in the living space and / or a person in a specific room area in the living space, thereupon determining a parameter of an auditory message and / or a section of the further output audio signal depending on the detected communication project and / or the voice takes place.
Das Kommunikationsvorhaben kann sich z.B. auf einen erwarteten Beginn einer auditiven Kommunikation oder eine erwartete Transaktion bzw. eine bestimmte erwartete Transaktion oder einer Transaktion einer bestimmten Art (Frage, Ansage, Reaktion, Kommentar, Weisung, Bitte, etc.) beziehen. Das Kommunikationsvorhaben kann insbesondere kennzeichnen, dass von einer bestimmten Person oder von einer in einem bestimmten Raumbereich befindlichen, z.B. an einem bestimmten Sitzplatz sitzender Person, insbesondere mit einem gewissen (einen Schwellenwert übersteigenden) Wahrscheinlichkeitsmaß eine sprachliche Kommunikation, z.B. das „Sprechen“, zu erwarten ist. Analog kann mit dem Parameter „Kommunikationsvorhaben“ auch die Information ermittelt und bereitgestellt werden, dass keine sprachliche Kommunikation (ggf. von einer Person im Wohnraum oder einer bestimmten Person) in der nahen Zukunft oder lediglich mit einem vergleichsweise niedrigen Wahrscheinlichkeitsmaß zu erwarten ist.The communication project may be e.g. refer to an expected start of an auditory communication or an expected transaction or a particular expected transaction or transaction of a particular type (question, announcement, response, comment, instruction, request, etc.). In particular, the communication project may indicate that it is from a particular person or from a particular area of space, e.g. person seated at a particular seat, in particular with a certain degree of probability (exceeding a threshold), linguistic communication, e.g. the "speaking" is to be expected. Similarly, with the parameter "communication project" also the information can be determined and provided that no linguistic communication (possibly of a person in the living room or a certain person) in the near future or only with a comparatively low probability measure is to be expected.
Auch kann mit dem Kommunikationsvorhaben ein prädizierter Wert eines weiteren, z.B. akustischen, Parameters einer erwarteten Kommunikation, beispielsweise eine erwartete Größenordnung eines akustischen Parameters, ermittelt bzw. geschätzt und berücksichtigt werden. Das Kommunikationsvorhaben kann als einer oder als mehrere qualitative Werte und/oder quantitative Werte des Parameters der Kommunikation bzw. Transaktion repräsentiert werden, der einen (wahrscheinlichen folgenden), Abschnitt der Kommunikation bzw. erwiderte Transaktion kennzeichnet. Dabei kann sich der Parameter „Kommunikationsvorhaben“ auch auf einen, zumindest wahrscheinlichen, Abschluss bzw. die Beendigung eines Abschnitts der sprachlichen Kommunikation beziehen. Beispielsweise kann das Kommunikationsvorhaben auch ein voraussichtliches Ende eines Satzes, einer Phrase, oder einer bestimmten linguistischen Struktur innerhalb der Kommunikation kennzeichnen.Also, with the communication project, a predicted value of another, e.g. acoustic, parameters of an expected communication, for example, an expected magnitude of an acoustic parameter, are determined or estimated and taken into account. The communication project may be represented as one or more qualitative values and / or quantitative values of the parameter of the communication or transaction identifying a (probable following), portion of the communication or returned transaction. In this case, the parameter "communication project" can also refer to an at least probable conclusion or the termination of a section of the linguistic communication. For example, the communication project may also identify an anticipated end of a sentence, phrase, or linguistic structure within the communication.
Das Kommunikationsvorhaben und/oder die Stimmenparameter zumindest einer, insbesondere einer bestimmten Person können beispielsweise mit den im Wohnraum betriebenen elektronischen Mitteln bzw. mit Mitteln des Hauses ermittelt werden. Solche Mittel können z.B. einen oder mehrere Mikrophone, eine bildgebende Sensorik, eine Bildverarbeitungsvorrichtung umfassen. Besonders bevorzugt kann ein Kommunikationsvorhaben mit einer Kamera, z.B. mit einer oder mehreren digital vernetzten Kameras und einer entsprechend eingerichteten Bildverarbeitung erfolgen. Dabei kann z.B. eine Merkmalserkennung, Objekttracking, Eye-Tracking, Personenerkennung, Mimikerkennung, Absichtserkennung bzw. Prädiktion, etc. ausgeführt werden.The communication project and / or the voice parameters of at least one, in particular a specific person can be determined, for example, with the electronic means operated in the living space or with means of the house. Such agents may e.g. comprise one or more microphones, an imaging sensor, an image processing device. Particularly preferred may be a communication project with a camera, e.g. be done with one or more digitally networked cameras and an appropriately equipped image processing. In this case, e.g. a feature recognition, object tracking, eye tracking, person recognition, facial expressions recognition, intent detection or prediction, etc. are performed.
Ein Kommunikationsvorhaben, bzw. ein Parameterwert des Kommunikationsvorhabens kann im Verfahren abhängig von einem Parameter oder Muster einer oder mehreren körperlichen Regungen ermittelt werden, die beispielsweise dem Sprechen und/oder einer Pause im Redefluss oder einer bestimmten Veränderung im Redefluss vorausgeht. Alternativ oder zusätzlich kann der zumindest ein besagter Parameter der Kommunikation, z.B. das Kommunikationsvorhaben auch anhand eines oder mehrerer körperlicher Parameter oder anhand von Geräuschen, z.B. Atemgeräuschen, die einem Sprechen vorausgehen oder sonstiger mit einem Sprechen korrelierender Größen, erkannt werden.A communication project or a parameter value of the communication project can be determined in the method as a function of a parameter or pattern of one or more physical impulses, which precedes, for example, speaking and / or a pause in the flow of speech or a certain change in the flow of speech. Alternatively or additionally, the at least one said parameter of the communication, eg the communication project also on the basis of one or more physical parameters or on the basis of noises, eg breathing noises, which precede a speech or other variables correlating with a speaking, are recognized.
Bei dem zumindest einem Parameter der Kommunikation kann es sich um ein in der Vergangenheit ermittelten Parameter der Kommunikation, und/oder einem aktuellen Parameter und/oder zumindest einem prädizierter Parameter der Kommunikation handeln. Insbesondere werden zumindest zwei Parameter bzw. Parameterwerte eines Parameters aus unterschiedlichen Zeitintervallen ermittelt und berücksichtigt. Beispielsweise wird eine zeitliche Sequenz der entsprechenden Parameterwerte eines oder mehrerer Parameter der Kommunikation, z.B. innerhalb eines gewissen Zeitintervalls, ermittelt und verarbeitet. Beispielsweise kann ein Parameter der besagten Kommunikation auch ein Maß der Veränderung eines Parameterwerts im Verlauf der Zeit und/oder in Bezug auf eine auf den Raum bezogene Größe, z.B. Richtung und/oder Distanz, einen oder mehrere bestimmte Raumbereiche des Wohnraums repräsentieren. Beispielsweise kann ein Parameter der Kommunikation ein zeitlicher Gradient und/oder ein räumlicher Gradient eines oder mehreren entsprechender Parameterwerte sein.The at least one parameter of the communication can be a parameter of the communication determined in the past, and / or a current parameter and / or at least one predicted parameter of the communication. In particular, at least two parameters or parameter values of a parameter from different time intervals are determined and taken into account. For example, a temporal sequence of the corresponding parameter values of one or more parameters of the communication, e.g. within a certain time interval, determined and processed. For example, a parameter of said communication may also be a measure of the change in a parameter value over time and / or in relation to a space-related quantity, e.g. Direction and / or distance, one or more specific areas of the living space represent. For example, a parameter of the communication may be a temporal gradient and / or a spatial gradient of one or more corresponding parameter values.
Zumindest ein Parameter der Kommunikation kann im Verfahren auf Basis von Sensordaten, einer Historie, z.B. zu einer oder mehreren, insbesondere früheren Kommunikationen in dem Wohnraum oder in zumindest einem weiteren Wohnraum, oder Kommunikationen mit Beteiligung bestimmter Personen, Personen zugehörig zu bestimmten Personengruppen, etc., ermittelt, bevorzugt prädiziert werden. Dabei kann eine Wahrscheinlichkeitsrechnung, insbesondere bei einer Prädiktion eines oder mehrerer Parameter angewandt werden. Bevorzugt kann zumindest ein Parameter der Kommunikation mittels eines maschinellen Lernens, insbesondere anhand eines Abgleichs bzw. einer Verrechnung einer Vielzahl der Parameter aus der Historie für einen oder mehrere Kommunikationsvorgänge und/oder Personen ermittelt werden.At least one parameter of the communication may be used in the method based on sensor data, a history, e.g. to one or more, in particular earlier communications in the living space or in at least one other living space, or communications involving certain persons, persons belonging to specific groups of people, etc., determined, preferably predicted. In this case, a probability calculation can be used, in particular in the case of a prediction of one or more parameters. Preferably, at least one parameter of the communication can be determined by means of machine learning, in particular by means of a comparison or a clearing of a plurality of the parameters from the history for one or more communication processes and / or persons.
Insbesondere erfolgt das besagte Lernen der Parameter der Kommunikation im Zusammenhang oder unter Berücksichtigung einer innerhalb eines bestimmten Zeitintervalls mit dem Abschnitt der Kommunikation erfassten Szene im Wohnraum. Dabei kann, ein späteres Ermitteln eins Parameters der Kommunikation abhängig von einer dann erfassten, insbesondere erkannten Szene erfolgen.In particular, the said learning of the parameters of the communication takes place in connection with or taking into account a scene in the living space detected within a specific time interval with the section of the communication. In this case, a subsequent determination of a parameter of the communication can take place as a function of a scene then detected, in particular recognized.
Auch kann das Verändern, insbesondere Anpassen eines Parameters des im Wohnraum auszugebenden Audiosignals abhängig von einem oder mehreren Parametern der Kommunikation in der Vergangenheit, insbesondere abhängig von Lerndaten auf Basis der in den in der Vergangenheit ermittelten bzw. gelernten) Parametern der Kommunikation erfolgen. Beispielsweise erfolgt das Bestimmen eines Parameters eines auszugebenden Audiosignals abhängig von einer Kombination der Lerndaten auf Basie mehreren Kommunikationen in der Vergangenheit und mit einem aktuellen Parameter der Kommunikation.Also, changing, in particular adjusting a parameter of the audio signal to be output in the living space, can be dependent on one or more parameters of the communication in the past, in particular depending on learning data on the basis of the communication parameters determined or learned in the past. For example, determining a parameter of an audio signal to be outputted depends on a combination of the learning data based on a plurality of communications in the past and a current parameter of the communication.
In einem weiteren Beispiel erfolgt ein Anpassen eines oder mehrerer Parameters eines, Sprache bzw. Personenstimmen umfassenden Abschnitts des Audiosignals vorwiegend oder stärker als das Anpassen eines, keine Sprache bzw. Personenstimmen repräsentierenden und/oder vorwiegend andere Inhalte, oder bestimmte andere Inhalte, z.B. Musik, repräsentierenden, Abschnitts des Audiosignals. Beispielsweise können die Sprache bzw. Personenstimmen repräsentierenden Abschnitte des Audiosignal hinsichtlich anderer Parameter des Audiosignals, und/oder in einer anderen Intensität angepasst werden, als z.B. andere Inhalte umfassende Abschnitte des Audiosignals. Es kann sich dabei um eine Anpassung der vergleichbaren Parameter der Audiosignals und eine andere, größere, kleinere Veränderung der Parameterwerte handeln, und/oder um eine Anpassung anderer Parameter des Audiosignals oder anderer Arten der Parameter des Audiosignals handeln.In another example, adjusting one or more parameters of a portion of the audio signal comprising voice or voices predominantly or more than adjusting a content that does not represent speech and / or predominantly other content, or certain other contents, e.g. Music, representing, section of the audio signal. For example, portions of the audio signal representing speech may be adjusted for other parameters of the audio signal, and / or in a different intensity, e.g. other content comprising sections of the audio signal. This may be an adaptation of the comparable parameters of the audio signal and another, larger, smaller variation of the parameter values, and / or an adaptation of other parameters of the audio signal or other types of the parameters of the audio signal.
Dabei ergibt sich ein besonderer Vorteil, da eine gegenseitige Störung zweiter jeweils Sprache umfassender akustischer Inhalte, die typischerweise wesentlich höher ist, als eine Störung eines Sprache umfassenden akustischen Inhalts durch einen anders gearteten akustischen Inhalt, z.B. durch instrumentale Musik oder Geräuschkulisse, besonders effektiv vermieden wird.In this case, there is a particular advantage, since a mutual interference of the second language in each case comprehensive acoustic content, which is typically much higher than a disturbance of a speech-comprehensive acoustic content by a different kind of acoustic content, e.g. through instrumental music or background noise, is particularly effectively avoided.
Gemäß einer zweckmäßigen Ausgestaltung betrifft die Anpassung des zumindest einen Parameters des im stationären Wohnraum auszugebenden Audiosignals eine Anpassung eines oder mehrerer Raumklangparameter. Bevorzugt kann dabei kann zumindest eine Richtung aus der ein akustischer Inhalt auf Basis des Audiosignal ausgegeben oder im stationären Wohnraum wahrnehmbar gemacht wird, zweckmäßig angepasst werden.According to an expedient embodiment, the adaptation of the at least one parameter of the audio signal to be output in the stationary living room concerns an adaptation of one or more surround sound parameters. Preferably, at least one direction from which an acoustic content is output on the basis of the audio signal or made perceptible in the stationary housing can be suitably adapted.
Beispielsweise kann durch den Raumklangparameter eine von dem oder den Personen im Wohnraum wahrnehmbare Richtung, aus welcher zumindest ein akustischer Inhalt (die entsprechenden Schallwellen) auf Basis des auszugebenden Audiosignals ausgegeben oder für zumindest eine im Wohnraum anwesende, wahrscheinlich anwesende oder angenommene Person wahrnehmbar gemacht wird verändert, insbesondere (dynamisch) gesteuert werden.For example, the room sound parameter makes a direction perceivable by the person or persons in the living space from which at least one acoustic content (the corresponding sound waves) is output on the basis of the audio signal to be output or made perceptible to at least one person who is probably present or assumed in the living space changed, in particular (dynamically) controlled.
Beispielsweise wird ein Parameter der besagten Kommunikation ermittelt, der kennzeichnet, wie viele Personen, insbesondere welche Personen oder Personen in bestimmten Raumbereichen oder an welchen Sitzplätzen, die eine aktuell stattfindende oder prädizierte Kommunikation, insbesondere zumindest mit einem gewissen Wahrscheinlichkeitsmaß, betrifft. Daraufhin können abhängig von dem Parameter ein oder mehrere Raumklangparameter für die Ausgabe zumindest auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals bestimmt bzw. angepasst werden. Beispielsweise kann dabei eine Verteilung der Schallwellen (auf Basis zumindest eines Abschnitts des zumindest einen Audiosignals und/oder der zumindest einer auditiven Meldung) in mehreren akustisch verbundenen und/oder akustisch teilweise abgetrennten Teilen des Wohnraumes zweckmäßig gesteuert werden.For example, a parameter of the said communication is determined, which identifies how many persons, in particular which persons or persons in certain areas of the room or at which seats, concern an actual or predicated communication, in particular with a certain degree of probability. Thereupon, depending on the parameter, one or more surround parameters for the output of at least auditory message and / or a section of the further audio signal can be determined or adapted. For example, a distribution of the sound waves (based on at least a portion of the at least one audio signal and / or the at least one auditory message) in a plurality of acoustically connected and / or acoustically partially separated parts of the living space can be appropriately controlled.
Bevorzugt kann ein Raumklangparameter mit dem ein Abschnitt des auszugebenden Audiosignals und/oder die zumindest eine auditive Meldung ausgegeben wird, abhängig von der ermittelten Verteilung der Personen auf die Raumbereiche und/oder Sitzplätze derart angepasst werden, dass ein zumindest auf zwei Personen bezogener kumulierter Wert, repräsentierend die Güte der Wahrnehmbarkeit und/oder Verständlichkeit zumindest eines Audiosignals und/oder zumindest einer sprachlichen Kommunikation erhöht bzw. zu einem Zielwert hin, gesteuert wird. Es kann ein kumulierter Wert aus den gemessenen, ermittelten, geschätzten oder simulierten Werten der Wahrnehmbarkeit und/oder Verständlichkeit für zumindest zwei im Wohnraum anwesende, bzw. wahrscheinlich anwesende Personen sein.Preferably, a surround sound parameter with which a portion of the audio signal to be output and / or the at least one auditory message is output may be adapted depending on the determined distribution of the persons to the spatial areas and / or seats such that a cumulative value related to at least two persons, representing the quality of the perceptibility and / or intelligibility of at least one audio signal and / or at least one linguistic communication increased or towards a target value, is controlled. It may be a cumulative value of the measured, determined, estimated or simulated values of perceptibility and / or comprehensibility for at least two persons present or likely to be present in the living space.
Die Wahrnehmbarkeit kann sich auch auf eine räumliche Verteilung der entsprechenden Schallwellen bzw. Klangquellen und/oder auf ermittelte oder angenommene Wahrnehmungseigenschaften der betreffenden Personen oder Personen aus betreffenden Personengruppen beziehen. Dabei kann eine gewünschte Raumklangwahrnehmung einer auditiven Meldung und/oder des weiteren Audiosignals, z.B. eines Multimediainhalts, durch zumindest zwei Personen im Wohnraum erreicht oder verbessert werden, bevorzugt ohne oder mit einer verringerten Störung einer Kommunikation zwischen diesen Personen oder anderen Personen im Wohnraum. Alternativ oder zusätzlich kann ein Maß einer jeweiligen (einseitigen und/oder gegenseitigen) Störung bzw. einer Störungsanfälligkeit in Bezug auf (bzw. für) eine menschliche Wahrnehmung (z.B. als ein Maß einer psychoakustischen Maskierung, ein Maß einer Korrelation zumindest eines Parameters, ein Maß einer inhaltlichen Korrelation die zur Störung der Verständlichkeit führen kann) von zumindest einem Abschnitt des auszugebenden Audiosignals und einem Abschnitt der besagten Kommunikation ermittelt, bevorzugt prädiziert. Diese kann (beispielsweise als eine Umkehrgröße zu der besagten Wahrnehmbarkeit und/oder Verständlichkeit oder als Basis zum Ermitteln der Wahrnehmbarkeit und/oder Verständlichkeit) berücksichtigt werden.The perceptibility may also refer to a spatial distribution of the corresponding sound waves or sound sources and / or to determined or assumed perception properties of the persons or persons concerned from groups of persons concerned. In this case, a desired surround sound perception of an auditory message and / or the further audio signal, e.g. a multimedia content, be achieved or improved by at least two people in the living room, preferably without or with a reduced disruption of communication between these people or other people in the living room. Alternatively or additionally, a measure of a respective (one-sided and / or mutual) disorder or a susceptibility to malfunction in relation to (or for) a human perception (eg as a measure of psychoacoustic masking, a measure of a correlation of at least one parameter, a measure a content correlation which can lead to the disturbance of intelligibility) of at least a portion of the audio signal to be output and a portion of said communication determined, preferably predicted. This can be taken into account (for example, as an inverse of the said perceptibility and / or intelligibility or as the basis for determining perceptibility and / or intelligibility).
Beispielsweise kann nur oder überwiegend ein bestimmter Teil und/des Audiosignals, welcher in einem Raumklangsystem, z.B. in einem Kinoformat, die Sprache repräsentiert, verändert werden. Dabei kann die hörbare Position aus welcher der Teil entsprechender Schallwellen ausgegeben wird, insbesondere für die Wahrnehmung zumindest einer Person im Wohnraum durch eine Anpassung des zumindest einen Raumklangparameters räumlich verändert, z.B. verschoben werden. Dabei kann ein anderer Teil, bzw. Kanal des Audiosignals, z.B. repräsentierend eine im Raumklangsystem auszugebende Hintergrundmusik, z.B. weniger oder auf eine andere Weise, abhängig von dem ermittelten, insbesondere prädizierten Parameter der auditiven Kommunikation angepasst werden. Dabei kann im Verfahren auch eine Verbesserung der Hörbarkeit bestimmter Teile, insbesondere Kanäle eines Raumklangs bzw. den Raumklang umfassenden Audiosignals durch zumindest eine bestimmte Person erfolgen.For example, only or predominantly a particular part and / or the audio signal used in a surround sound system, e.g. in a cinema format that represents language. In this case, the audible position from which the part of corresponding sound waves is output, in particular for the perception of at least one person in the living space by an adaptation of the at least one surround sound parameter spatially changed, e.g. be moved. In this case, another part or channel of the audio signal, e.g. representing a background music to be output in the surround sound system, e.g. be adapted less or in some other way, depending on the determined, in particular predicated parameters of the auditory communication. In this case, an improvement in the audibility of certain parts, in particular channels of a room sound or the surround sound comprehensive audio signal can be carried out by at least one specific person in the process.
Auch kann im Verfahren in diesem Zusammenhang eine, insbesondere inhaltliche Verteilung bzw. eine zweckmäßige Trennung, der auditiven Kommunikation einerseits und eines Abschnitts des weiteren Audiosignals und/oder einer auditiven Meldung auf „zwei der Ohren eines potentiellen Zuhörers oder eines bestimmten Zuhörers“ ausgeführt werden, was wiederum eine gegenseitige Maskierung der auditiven Kommunikation und des auszugebenden weiteren Audiosignals und/oder der auditiven Meldung verringert und/oder eine verbesserte akustische Wahrnehmbarkeit durch einen oder mehrere (bestimmte) Personen ermöglicht. Ferner kann dabei eine gehirngerechtere Wahrnehmung von des auszugebenden Audiosignals verbessert werden zumindest zwei Sprache umfassenden Inhalten durch einen Zuhörer verbessert werden. Dabei können die entsprechenden Inhalte (die zu den erzeugten bzw. angepassten auditiven Reizen passen) bei ihrer Wahrnehmung durch eine oder mehrere Personen besser inhaltlich eingeordnet, verarbeitet oder interpretiert werden.Also, in the method in this connection, a distribution, or rather a suitable separation, of the auditory communication on the one hand and a portion of the further audio signal and / or an auditory message on "two ears of a potential listener or a particular listener" can be carried out in the context of this method, which in turn reduces mutual masking of the auditory communication and the additional audio signal to be output and / or the auditory message and / or enables improved audible perceptibility by one or more (specific) persons. Furthermore, a more brain-appropriate perception of the audio signal to be output can be improved by at least two language comprehensive content can be improved by a listener. The corresponding contents (which match the generated or adapted auditory stimuli) can be better classified, processed or interpreted in their perception by one or more persons.
Im Verfahren kann ein derartiges Bestimmen bzw. Anpassen eines oder mehrerer Parameter des auszugebenden Audiosignals ausgeführt werden, dass eine Verschiebung der in bestimmten Teilen des Wohnraums erzeugten akustischen Leistung und/oder eine Veränderung der Phase und/oder eine relative Zeitverzögerung (z.B. in einem Millisekundenbereich) des aus einem oder mehreren bestimmten (physikalischen oder virtuellen) Lautsprechern ausgegebenen, auf Basis des Audiosignals erzeugten Schallwellen, erfolgt.In the method, such a determination or adaptation of one or more parameters of the audio signal to be output can be carried out, that a shift of the acoustic power generated in certain parts of the living space and / or a change of the phase and / or a relative time delay (eg in a millisecond range) of one or more certain (physical or virtual) loudspeakers output based on the audio signal generated sound waves occurs.
Insbesondere kann eine (steuerbare) relative zeitliche Verzögerung oder eine frequenzabhängige Veränderung einer Phasenverschiebung zwischen den durch zumindest zwei (physikalische oder virtuelle) Lautsprecher auszugebenden akustischen Schallwellen auf Basis des auszugebenden Audiosignals, oder bestimmte bzw. durch bestimmte Eigenschaften gekennzeichnete Schallwellenmuster, gesteuert oder geregelt werden.In particular, a (controllable) relative time delay or a frequency-dependent change in a phase shift between the acoustic sound waves to be output by at least two (physical or virtual) loudspeakers can be controlled or regulated on the basis of the audio signal to be output, or certain sound wave patterns.
Alternativ oder zusätzlich kann abhängig von einem oder mehreren ermittelten Parametern der Kommunikation veranlasst werden, dass die Erzeugung akustischer Schallwellen für einen bestimmten Raumbereich des Wohnraums oder für eine bestimmte Person, auf Basis der zumindest einen (bestimmten) Abschnitts des auszugebenden Audiosignals, zumindest teilweise oder abschnittsweise mit anderen Mitteln, z.B. mit anderen Lautsprechern, mit einer anderen Kombination von Lautsprechern oder mit einer weiteren Ausgabevorrichtung, z.B. einer Audioausgabevorrichtung oder einer Multimediaausgabevorrichtung erfolgt. Dabei können die akustischen Parameter, insbesondere Leistungsparameter, der korrespondierenden Schallwellen, die in einem bestimmten Raumbereich (in dem sich ein Zuhörer befindet oder vermutet wird) ankommen, zweckmäßig gesteuert werden. Diese können z.B. durch die besagte Steuerung im Wesentlichen aufrechterhalten werden oder ihrer (unerwünschten) Veränderung kann entgegengewirkt werden, derart, dass diese sich (aus der Wahrnehmungsperspektive des jeweiligen Zuhörers) verhältnismäßig geringfügig verändern werden. Dabei kann beispielsweise das Übermitteln der Daten zur Ausgabe einer auditiven Meldung und/oder können die entsprechenden Ausgabeparameter für zumindest zwei vernetzte Audioausgabevorrichtungen gesteuert werden.Alternatively or additionally, depending on one or more determined parameters of the communication, the generation of acoustic sound waves for a specific room area of the living space or for a specific person based on the at least one (specific) section of the audio signal to be output can be initiated at least partially or in sections by other means, eg with other speakers, with another combination of speakers, or with another output device, e.g. an audio output device or a multimedia output device. In this case, the acoustic parameters, in particular performance parameters, of the corresponding sound waves arriving in a certain area of space (in which a listener is or is suspected) can be suitably controlled. These may e.g. can be substantially maintained by the said control or its (undesired) change can be counteracted, so that they will change relatively slightly (from the perceptual perspective of the respective listener). In this case, for example, the transmission of the data for outputting an auditory message and / or the corresponding output parameters for at least two networked audio output devices can be controlled.
Ferner kann auf Basis des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung eine oder mehrere (von zumindest einer im Wohnraum anwesende oder angenommene Person wahrnehmbare) Klangquellen erzeugt werden. Ein oder mehrere Inhalte des auszugebenden Audiosignals, bzw. die mit einem Abschnitt des auszugebenden Audiosignals zu übermittelnde Inhalte können abhängig von einem oder mehreren im Verfahren ermittelten Parameter bzw. Informationen, insbesondere nach einer vorgegebenen Logik, an zumindest zwei im Wohnraum wahrnehmbare Klangquellen zugeordnet werden. Bevorzugt repräsentiert dabei der zumindest eine anzupassende Raumklangparameter des Audiosignals einen oder mehrere Merkmale die das Erzeugen von einer oder mehrerer (auch virtueller, zumindest durch menschliche Wahrnehmung hörbarer) Klangquellen. Beispielsweise repräsentiert ein im Verfahren bestimmter oder angepasster Raumklangparameter eine Richtung, einen Abstand, eine Position, einen akustischen Parameter einer oder mehrerer solcher Klangquellen. Dabei entspricht die Position der Klangquelle bevorzugt nicht einer Position eines Lautsprechers. Vielmehr sind akustisch, beispielsweise mittels einer Erzeugen und Steuerung eines entsprechenden Raumklangsignals gebildete (virtuelle, von anwesenden oder angenommenen Person wahrnehmbare) Klangquellen gemeint.Furthermore, on the basis of the audio signal to be output and / or the at least one auditory message, one or more sound sources (perceptible by at least one person present or assumed in the living space) can be generated. One or more contents of the audio signal to be output, or the contents to be transmitted with a portion of the audio signal to be output, can be assigned to at least two sound sources perceptible in the living space, depending on one or more parameters or information determined in the method, in particular according to a predetermined logic. Preferably, the at least one spatial sound parameter of the audio signal to be adapted thereby represents one or more features which generate one or more sound sources (also virtual, at least audible by human perception). For example, a spatial sound parameter determined or adjusted in the method represents a direction, a distance, a position, an acoustic parameter of one or more such sound sources. The position of the sound source preferably does not correspond to a position of a loudspeaker. Rather, acoustically, sound sources formed, for example, by means of generating and controlling a corresponding room sound signal (virtual, perceivable by present or assumed person) are meant.
Das Erzeugen der zumindest einen Klangquellen bezieht sich bevorzugt auf einen oder mehrere bestimmte Raumbereiche des Wohnraums beziehen, aus welchen diese (besonders gut, vollwertig) wahrnehmbar (hörbar) gemacht werden. Bevorzugt kann ein besagter Raumklangparameter die Werte für Richtung, Abstand, Position, akustische Parameter repräsentieren, die zu zumindest einer Klangquelle zugeordnet werden. Bevorzugt kann ein anzupassender Parameter des auszugebenden Audiosignals, z.B. der besagte anzupassender Raumklangparameter (auch) bestimmen, für den Zuhörer aus welchem Raumbereich des Wohnraums, und/oder von welchem Sitzplatz, und/oder von welcher Person, Person zugehörig zu einer Personengruppe oder einer bestimmten Person die jeweilige Klangquelle, wahrnehmbar oder mit verbesserten Parametern wahrnehmbar gemacht werden soll. Beispielsweise werden auf Basis des auszugebenden Audiosignals und/oder auf Basis der zumindest einen auditiven Meldung, abhängig von den besagten Parametern der sprachlichen Kommunikation, für zumindest zwei unterschiedliche Raumbereiche oder für zwei anwesende Personen zumindest zwei hörbare Klangquellen erzeugt, die unterschiedliche, jeweils zweckmäßig bestimmte, objektiv messbare oder subjektiv von den anwesenden oder angenommenen Personen wahrnehmbare Parameter, z.B. Richtungen, Positionen, Lautstärken, aufweisen.The generation of the at least one sound source preferably relates to one or more specific spatial regions of the living space, from which they are made (particularly good, fully) perceptible (audible). Preferably, said surround sound parameter may represent the values of direction, distance, position, acoustic parameters associated with at least one sound source. Preferably, a parameter to be adjusted of the audio signal to be output, e.g. said surround sound parameter (s) to be determined (for the listener from which room area of the living space, and / or from which seat, and / or by which person, person belonging to a group of people or a particular person the respective sound source, perceptible or with improved parameters should be made perceptible. For example, on the basis of the audio signal to be output and / or on the basis of the at least one auditory message, depending on the said parameters of the speech communication, at least two audible sound sources are generated for at least two different room areas or for two present persons, the different, respectively appropriately determined, Objectively measurable or subjectively perceptible by the present or assumed persons parameters, eg Directions, positions, volumes, have.
Bevorzugt wird zumindest eine Klangquelle mittels oder unter Berücksichtigung einer oder mehreren Reflektionen der (betreffenden, in eine bestimmte Richtung abgestrahlten) Schallwellen an zumindest einer Fläche des Wohnraums erzeugt. Beispielsweise kann ein gezieltes Abstrahlen von Schallwellen, in eine erste Richtung, z.B. in Richtung einer Fläche des Wohnraums z.B. eine Wand, erfolgen, wobei eine Klangquelle platziert wird, die aus einer bestimmten zweiten Richtung, welche abweichend ist von der ersten Richtung wahrnehmbar ist, erzeugt werden. Beispielsweise kann zumindest ein Parameter der zumindest einer auditiven Meldung und/oder des weiteren Audiosignals bestimmt oder angepasst werden, indem ein bestimmter Abschnitt der entsprechenden auszugebender Schallwellen, insbesondere in einer bestimmten Weise, von zumindest einer Wand oder Gegenstand des Wohnraums reflektiert werden. Mit anderen Worten kann ein bestimmter Parameter der Schallwellen oder Schallwellenmuster mittels einer oder mehreren Reflektionen (sozusagen: Ricochet) von einer oder mehreren Flächen, z.B. Wänden des Wohnraums bestimmt oder angepasst werden. Ein oder mehrere Raumklangparameter können im Verfahren derart bestimmt oder angepasst werden, dass bestimmte Schallwellen oder Schallwellenmuster in einem oder mehreren bestimmten Raumbereichen des Wohnraums erzeugt werden und/oder aus einem bestimmten Raumbereich bzw. der Wahrnehmungsperspektive (mit bestimmten Parametern) hörbar gemacht werden.Preferably, at least one sound source is generated by means of or taking into account one or more reflections of the (relevant, radiated in a certain direction) sound waves on at least one surface of the living space. For example, a targeted emission of sound waves, in a first direction, for example in the direction of a surface of the living space such as a wall, take place, a sound source is placed, which from a certain second direction, which is different from the first direction is noticeable generated become. For example, at least one parameter of the at least one auditory message and / or the further audio signal can be determined or adapted by a specific section of the corresponding sound waves to be output, in particular in a specific way, from at least a wall or object of the living space are reflected. In other words, a specific parameter of the sound waves or sound wave pattern can be determined or adjusted by means of one or more reflections (so-called ricochet) of one or more surfaces, eg walls of the living space. One or more surround sound parameters may be determined or adjusted in the method such that specific sound waves or sound wave patterns are generated in one or more specific room areas of the living space and / or made audible from a particular spatial area or perceptual perspective (with certain parameters).
Beispielsweise kann eine erzeugte, zumindest subjektiv empfindbare, Richtung und/oder Entfernung, insbesondere die Position einer Klangquelle aus der die zumindest ein Abschnitt des Audiosignals und/oder die zumindest eine auditive Meldung ausgegeben wird, abhängig von einem oder mehreren Parametern der besagten Kommunikation, beispielsweise abhängig von einem erkannten Kommunikationsvorhaben und/oder einer Stimme zumindest einer Person im Wohnraum variiert werden. Dabei kann eine bestimmte Richtung und/oder Position und/oder Entfernung einer Klangquelle in den Wohnraumkoordinaten und/oder in Relation zu einer, insbesondere einer bestimmten Person, insbesondere in Relation zu der Kopfposition oder Kopfausrichtung der Position angepasst bzw. erreicht werden. Auch kann zumindest eine wahrnehmbare Position zumindest einer Klangquelle abhängig von zumindest einem Parameter der Kommunikation, beispielsweise schrittweise oder weitgehend stufenlos bewegt werden. Insbesondere kann eine oder mehrere im Verfahren erzeugte Klangquellen, die einen (bestimmten) Inhalt einer oder mehrerer der auditiven Meldungen und/oder eines oder mehreren Abschnitte des weiteren Audiosignals im Wohnraum wiedergibt, abhängig von dem, insbesondere prädizierten Parameter der auditiven Kommunikation, beispielsweise bei einem erkannten Kommunikationsvorhaben und/oder einem Parameter einer Kommunikation zumindest einer Person im Wohnraum, in einer zweckmäßigen Weise platziert und/oder verlagert und/oder bewegt werden.For example, a generated, at least subjectively sensible, direction and / or distance, in particular the position of a sound source from which the at least one section of the audio signal and / or the at least one auditory message is output, dependent on one or more parameters of said communication, for example be varied depending on a recognized communication project and / or a vote of at least one person in the living room. In this case, a specific direction and / or position and / or distance of a sound source in the living space coordinates and / or in relation to one, in particular a particular person, in particular in relation to the head position or head alignment of the position adapted or achieved. Also, at least one perceptible position of at least one sound source can be moved depending on at least one parameter of the communication, for example stepwise or substantially continuously. In particular, one or more sound sources generated in the method, which reproduces a (specific) content of one or more of the auditory messages and / or one or more sections of the further audio signal in the living space, depending on the, in particular predicated parameters of the auditory communication, for example at a recognized communication project and / or a parameter of communication at least one person in the living room, placed in a convenient manner and / or relocated and / or moved.
Beispielsweise können die Schallwellen nur oder überwiegend zu einer bestimmten auditive Meldung für die Wahrnehmung zumindest einer (bestimmten, mit hohen Wahrscheinlichkeitsmaß anwesenden oder angenommenen) Person oder für die Wahrnehmung durch eine Person mit einer aktuellen Kopfposition und/oder Kopfausrichtung räumlich, z.B. hinsichtlich ihrer wahrnehmbaren Richtung oder Entfernung, verschoben, bzw. an einer neuen Position erzeugt werden.For example, the sound waves may only or predominantly result in a particular auditory message for the perception of at least one (particular, highly probable or assumed) person or for perception by a person having a current head position and / or head orientation, e.g. in terms of their perceptible direction or distance, shifted, or generated at a new position.
Wenn ermittelt wird, dass eine auditive Meldung auszugeben ist, kann auch ein Abschnitt des weiteren Audiosignal, z.B. eines Multimediasignals, z.B. eines Audiosignals zu einem Video derart angepasst werden, dass insbesondere für die Wahrnehmung zumindest einer (bestimmten) Person oder für die Wahrnehmung mit einer aktuellen Kopfposition und/oder Kopfausrichtung räumlich, z.B. hinsichtlich ihrer wahrnehmbaren Richtung oder Entfernung, verschoben, bzw. aus zumindest einer neuen Klangquelle an einer neuen Position erzeugt werden, wobei sich die neue Position, insbesondere von der Position der zumindest einen Klangquelle der zumindest einen auditiven Meldung unterscheidet.If it is determined that an auditory message is to be output, a portion of the further audio signal, e.g. a multimedia signal, e.g. an audio signal is adapted to a video such that in particular for the perception of at least one (specific) person or for the perception with a current head position and / or head alignment spatially, e.g. with respect to their perceptible direction or distance, shifted, or generated from at least one new sound source at a new position, wherein the new position, in particular from the position of the at least one sound source of at least one auditory message.
Dabei können auch unterschiedliche Teile des auszugebenden Audiosignals, insbesondere repräsentierend Sprache, z.B. eine Stimme eines Protagonisten oder ein typischer Inhalt eines Kanals „Center“ und ein anderer Teil, bzw. Kanal des Audiosignals (z.B. korrespondierend mit auszugebenden Hintergrundmusik oder sogenannten Atmosphärengeräusche, „Background“) unterschiedlich angepasst werden. Insbesondere kann in Bezug auf eine auditive Meldung und in Bezug auf einen ersten Inhalt oder Kanal des auszugebenden Audiosignals und/oder in Bezug auf einen zweiten Inhalt oder Kanal des Audiosignals, ein unterschiedliches Anpassen, hinsichtlich der Art der Parameter, der Logik und/oder eines mathematischen Zusammenhangs ausgeführt werden.In this case, different parts of the audio signal to be output, in particular representing voice, e.g. a voice of a protagonist or a typical content of a channel "center" and another part or channel of the audio signal (e.g., corresponding to background music to be output or so-called atmosphere sounds, "background") are adapted differently. In particular, with regard to an auditory message and with regard to a first content or channel of the audio signal to be output and / or with respect to a second content or channel of the audio signal, a different adaptation, with regard to the type of parameters, the logic and / or a mathematical context are executed.
Beispielsweise kann abhängig von einem ermittelten Parameter der Kommunikation ein Balancewert zwischen zumindest zwei in einem weiteren, Raumklangsignal enthaltenen Kanälen oder Inhalte angepasst werden. Dabei kann z.B. bei einem Abschnitt einer sprachlichen Kommunikation im Wohnraum ein zeitlich korrespondierender Abschnitt des Audiosignals im Wesentlichen auf eine begrenzte Anzahl von Kanälen oder Inhalten stufenlos oder in Stufen reduziert bzw. degradiert werden. Dabei kann eine gewisse (zumindest subjektiv wahrnehmbare) Vereinfachung eines, z.B. im Zusammenhang mit einem Multimediasignal, z.B. Heimkino, auszugebenden Audiosignals bzw. einer aus diesem erzeugten akustischen Wirkung erfolgen. Dies kann für ein passendes Zeitintervall zugunsten der Wahrnehmbarkeit der zumindest einen besagten in diesem Zeitintervall stattfindenden Kommunikation oder der zumindest einen auditiven Meldung erfolgen.For example, depending on a determined parameter of the communication, a balance value can be adjusted between at least two channels or contents contained in a further room sound signal. In this case, e.g. in a portion of a spoken communication in the living space, a temporally corresponding portion of the audio signal is substantially reduced or demoted to a limited number of channels or contents, steplessly or in stages. There may be some (at least subjectively perceptible) simplification of, e.g. in the context of a multimedia signal, e.g. Home theater, output audio signal or a generated from this acoustic effect. This can be done for a suitable time interval in favor of the perceptibility of the at least one said communication taking place in this time interval or the at least one auditory message.
In einem weiterführenden Beispiel kann eine (dynamische) inhaltliche Verteilung bzw. Umverteilung von zumindest teilweise unterschiedlichen als Schallwellen auszugebender auditiver Inhalte auf zumindest zwei, insbesondere mittels des Bestimmens oder Anpassens eines Raumklangparameters gebildeter bzw. platzierter Klangquellen, abhängig von dem zumindest einem Parameter der besagten Kommunikation erfolgen. Dabei kann ein oder mehrere Parameter (zumindest eines Abschnitts des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung) derart bestimmt oder angepasst werden, dass eine Verteilung bzw. Verteilungslogik der zumindest zwei auszugebenden auditiven Inhalte auf zwei oder mehrere Kanäle, Lautsprecher, bzw. virtuelle Klangquellen bzw. (Audio-) Ausgabevorrichtungen verändert wird.In a further example, a (dynamic) content distribution or redistribution of at least partially auditory contents to be output as sound waves can be based on at least two sound sources formed or placed in particular by determining or adapting a surround parameter, depending on the at least one parameter of said Communication takes place. In this case, one or more parameters (at least of a portion of the audio signal to be output and / or the at least one auditory message) can be determined or adapted such that a distribution logic of the at least two auditory contents to be output to two or more channels, loudspeakers, or virtual sound sources or (audio) output devices is changed.
Dabei kann auch die Art und/oder Prioritätsmaß des zumindest eines Abschnitts des auszugebenden Audiosignals und/oder eines bestimmten Kanals eines mehrkanaligen Audiosignals und/oder der zumindest einen auditiven Meldung, berücksichtigt werden. Die Art und/oder das Prioritätsmaß können dabei abhängig vom Auslesen einer das auszugebende Audiosignal begleitender oder mit ihm zusammenhängender Information und/oder abhängig von einer inhaltlichen Auswertung des zumindest eines Abschnitts des Audiosignals und/oder abhängig von dem Inhalt der zumindest einen auditiven Meldung und/oder die zumindest eine auditive Meldung begleitenden oder mit ihr zusammenhängenden Information, ermittelt und berücksichtigt werden. Beispielsweise werden, abhängig von einem Anfang und/oder Ende eines Abschnitts der besagten Kommunikation, ein oder mehrere Parameter zur Ausgabe von zumindest zwei unterschiedlichen Arten der als Schallwellen auszugebenden Inhalte, unterschiedlich bestimmt, insbesondere auf unterschiedliche Weise (als entsprechende Schallwellen oder Schallwellenmuster) im Wohnraum, z.B. auf bestimmte Raumbereiche, verteilt werden und/oder zumindest teilweise an unterschiedliche Klangquellen zugeordnet werden. Alternativ oder zusätzlich kann zumindest ein bestimmtes Schallwellenmuster, z.B. ein Interferenzmuster, abhängig oder auf Basis zumindest eines Inhalts, beispielsweise der zumindest einen auditiven Meldung und/oder des weiteren Audiosignals und/oder eines weiteren im Wohnraum hörbaren akustischen Inhalts erzeugt werden.In this case, the type and / or priority measure of the at least one section of the audio signal to be output and / or a specific channel of a multi-channel audio signal and / or the at least one auditory message can also be taken into account. The type and / or the priority measure can depend on the reading of the audio signal to be output accompanying or related information and / or depending on a content evaluation of at least a portion of the audio signal and / or depending on the content of the at least one auditory message and / or the at least one auditory message accompanying or related information, are determined and taken into account. For example, depending on a beginning and / or end of a portion of said communication, one or more parameters for outputting at least two different types of contents to be output as sound waves are determined differently, in particular in different ways (as corresponding sound waves or sound wave patterns) in the living space , eg to certain areas of space, be distributed and / or at least partially assigned to different sound sources. Alternatively or additionally, at least one particular sound wave pattern, e.g. an interference pattern, depending on or based on at least one content, for example, the at least one auditory message and / or the further audio signal and / or another audible in the living space audible content can be generated.
Beispielsweise können Abschnitte eines oder mehreren Audiosignale, kennzeichnend inhaltlich unterschiedlich ausgerichtete (hinsichtlich ihrer inhaltlicher Merkmale unterschiedlich „gepolter“) Inhalte, z.B. repräsentierend Meinungen, Standpunkte, Wertungen, Sichtpunkte zu zumindest einem Thema, Anfrage, Kontext zu zumindest zwei unterschiedlich platzierten Klangquellen zugeordnet werden. Dabei kann eine inhaltliche Differenzierung (durch eine räumliche Platzierung bzw. Ausrichtung) repräsentiert werden. Eine solche räumliche Anordnung der Inhalte kann eine gehirngerechte Wahrnehmung durch zumindest einen bestimme (wahrscheinlich, tatsächlich anwesende oder in einem Raumbereich angenommene) Person fördern. Beispielsweise kann dabei eine „räumliche Inszenierung“ und/oder ein im Verfahren dargestellter (nicht unbedingt tatsächlich stattfindender) Dialog oder Gegenüberstellung zwischen den zumindest zwei unterschiedlichen Inhalten z.B. zumindest zwei unterschiedlichen Meinungen zu einem Thema, Kontext, Frage, etc., die aus zumindest zwei Klangquellen ausgegeben werden dargestellt werden.For example, portions of one or more audio signals, characteristically different in content (different in terms of their content characteristics "poled") content, e.g. representing opinions, viewpoints, ratings, viewpoints on at least one topic, request, context, associated with at least two differently placed sound sources. In this case, a substantive differentiation (by a spatial placement or orientation) can be represented. Such a spatial arrangement of the contents can promote a brain-oriented perception by at least one particular (probably, actually present or assumed in a spatial area) person. For example, a "spatial staging" and / or a dialogue (shown or not necessarily actually taking place) or a comparison between the at least two different contents, e.g. At least two different opinions on a topic, context, question, etc. that are displayed from at least two sound sources will be presented.
Beispielsweise können zumindest zwei unterschiedliche Abschnitte eines oder mehrerer auszugebenden Audiosignals mit zumindest zwei, nach zumindest einem vorausbestimmten Kriterium unterschiedlichen, oder inhaltlich zueinander kontrastierenden, insbesondere gegensätzlichen Inhalten, aus zumindest zwei unterschiedlichen Klangquellen ausgegeben werden. Dabei können die zumindest zwei unterschiedliche Abschnitte eines oder mehrerer auszugebenden Audiosignale aus einer oder unterschiedlichen Daten- bzw. Signalquellen sein, z.B. aus einem oder mehreren Infotainment-Programmen nach einem oder mehreren Kriterien ermittelt werden oder aus einer oder mehreren Suchanfragen stammen. Die zumindest zwei unterschiedlichen Abschnitte eines oder mehrerer auszugebenden Audiosignals können zumindest zwei zueinander kontrastierende oder entgegengesetzte Meinungen (z.B. Vorteile und Nachteile, „Pro“ und „Kontra“), und/oder zu einer Sichtperspektive unterschiedlicher Personen oder Personengruppen passende, und/oder auf mehr oder minder alten oder neuen Daten basierende Inhalte repräsentieren. Diese können aus zumindest zwei unterschiedlichen Klangquellen ausgegeben werden. Die zumindest zwei unterschiedliche Abschnitte eines oder mehrerer auszugebenden Audiosignale die jeweils inhaltlich kontrastierende Inhalte repräsentieren können dabei zumindest teilweise im selben Zeitintervall, insbesondere zumindest teilweise zeitlich überlappend oder gleichzeitig, oder auch in einer (von dem Inhalt abhängigen) Reihenfolge ausgegeben werden.By way of example, at least two different sections of one or more audio signals to be output can be output from at least two different sound sources with at least two contents which differ from one another according to at least one predetermined criterion or whose content is contrasted in terms of content. In this case, the at least two different sections of one or more audio signals to be output can be from one or different data or signal sources, e.g. are determined from one or more infotainment programs according to one or more criteria or come from one or more search queries. The at least two different sections of one or more audio signals to be output may have at least two opposing or opposite opinions (eg, advantages and disadvantages, "pros" and "contra"), and / or matching to a perspective of different people or groups of people, and / or more or less recent or new data-based content. These can be output from at least two different sound sources. The at least two different sections of one or more audio signals to be output, each representing content-contrasting content, can thereby be output at least partially in the same time interval, in particular at least partially overlapping temporally or simultaneously, or else in an order (dependent on the content).
Bevorzugt kann ein dynamisches Zuordnen von unterschiedlichen akustisch auszugebenden Inhalten, z.B. von Abschnitten des zumindest eines auszugebenden Audiosignals und/oder der zumindest einen besagten auditiven Meldung, insbesondere mit Inhalten die jeweils unterschiedlichen (bestimmten) Arten zugehören ausgeführt werden. Das kann auch abhängig von einer oder mehreren vorausbestimmten Bedingungen erfolgen. Beispielsweise werden die zwei Klangquellen platziert oder die auditiven Inhalte zu unterschiedlichen, insbesondere bestimmten, Klangquellen zugeordnet, wenn ermittelt wurde, dass die zwei ermittelten Inhalte einen wesentlichen inhaltlichen Unterschied zueinander aufweisen. Beispielsweise können die zumindest zwei Abschnitte des zumindest eines (zweiten) weiteren Audiosignals, z.B. ein Multimediasignal, ein Telekommunikationsinhalt zu zumindest zwei unterschiedlichen Klangquellen zugeordnet werden. Dabei können die Klangquellen für zumindest eine (zumindest wahrscheinlich) im Wohnraum anwesende Person in unterschiedlichen Raumwinkeln bzw. Positionen wahrnehmbar und/oder weniger wahrnehmbar gemacht werden. Eine solche Verteilung kann auch passend zu einem aktuellen, wahrscheinlichen Raumbereich erfolgen, in welchem sich eine Person aufhält für die der Abschnitt entsprechender Schallwellen bestimmt ist, und abhängig von der Beteiligung der Person an der besagten Kommunikation im Wohnraum, z.B. als ein „Sprecher“, „Zuhörer“ oder „Sprecher und Zuhörer“.Preferably, a dynamic assignment of different acoustically outputting contents, eg of sections of the at least one audio signal to be output and / or of the at least one said auditory message, in particular with contents which respectively belong to different (specific) types, can be carried out. This can also be done depending on one or more predetermined conditions. For example, the two sound sources are placed or the auditory content is assigned to different, in particular specific, sound sources, if it has been determined that the two determined contents have a substantial difference in content. For example, the at least two sections of the at least one (second) further audio signal, for example a multimedia signal, can be assigned a telecommunication content to at least two different sound sources. The sound sources for at least one ( at least probably) present in the living room person in different spatial angles or positions are made perceptible and / or less perceptible. Such a distribution may also be made to match a current probable room area in which a person is resident for whom the section of corresponding sound waves is destined, and depending on the person's participation in the said communication in the living space, eg as a "speaker", "Listener" or "speaker and listener".
Optional kann im Verfahren eine (für die Person selbst mehr oder minder bewusste oder intuitiv oder reflexartig ausgeführte) körperliche Regung, die der Absicht in eine bestimmte Richtung zuzuhören entspricht oder korreliert, ermittelt werden und verarbeitet werden. Eine solche körperliche Regung kann z.B. eine Kopfdrehung in eine entsprechende Richtung und/oder das Halten einer Handfläche am linken oder am rechten Ohr zu der entsprechenden Richtung sein. In einem Beispiel kann dabei ein Parameter, insbesondere repräsentierend die Lautstärke oder Frequenzparameter des aus der jeweiligen Richtung auszugebenden Audiosignals bzw. des Inhalts aus einer betreffenden, bestimmten Richtung verändert, in diesem Beispiel erhöht werden, und/oder ein (bestimmter, letzter) Abschnitt des Audiosignals, z.B. der letzte Satz oder Phrase, wiederholt werden und/oder eine besser verständliche, z.B. vereinfachte Fassung einer auditiven Meldung erzeugt werden.Optionally, in the process, a physical impulse (more or less conscious for the person or intuitively or reflexively executed) that corresponds to or corresponds to the intention to listen in a particular direction can be identified and processed. Such a physical impulse may e.g. a head rotation in a corresponding direction and / or holding a palm on the left or right ear to the appropriate direction. In one example, a parameter, in particular representing the volume or frequency parameters of the audio signal to be output from the respective direction or the content from a particular, particular direction, may be increased in this example, and / or a (specific, last) section of the Audio signal, eg the last sentence or phrase, be repeated and / or a better understood, e.g. simplified version of an auditory report.
Dabei können bestimmte Muster insbesondere explizit als bewusste Muster oder unbewusste Muster einer körperlichen Regung, z.B. Gestik, Mimik, einer starken Augenbewegung, Körperausrichtung erkannt und berücksichtigt werden. Dies können Muster sein die kennzeichnend sind für ein nicht hinreichendes Wahrnehmen und/oder nicht hinreichendes Verstehen eines gehörten auditiven Inhalts, wobei zumindest ein solches Muster im Zusammenhang mit der Ausgabe einer auditiven Meldung und/oder eines Abschnitts des auszugebenden Audiosignals steht, z.B. unmittelbar auf die Ausgabe eines Abschnitts der auditiven Meldung oder des Audiosignals gefolgt ist. Daraufhin kann eine Ausgabe eines angepassten Abschnitts der auditiven Meldung oder eine Ausgabe einer alternativen, von dem Inhalt der auditiven Meldung abhängiger Information oder die Umsetzung einer sonstigen bestimmten Maßnahme veranlasst werden. Auch kann auf Basis solcher Muster ein Erfolgsmaß in Bezug auf die Ausgabe zumindest eines Abschnitts des weiteren Audiosignals bzw. zumindest einer auditiven Meldung ermittelt und im Verfahren verarbeitet werden.In particular, certain patterns may be explicitly identified as conscious patterns or unconscious patterns of bodily motion, e.g. Gestures, facial expressions, a strong eye movement, body alignment are recognized and taken into account. These may be patterns indicative of inadequate perception and / or inadequate understanding of a heard auditive content, at least one such pattern being associated with the output of an auditory message and / or a portion of the audio signal to be output, e.g. immediately followed by the output of a portion of the auditory message or audio signal. Thereafter, an output of an adapted portion of the auditory report or an issue of an alternative information dependent on the content of the auditory report or the implementation of any other particular action may be initiated. On the basis of such patterns, a measure of success with regard to the output of at least one section of the further audio signal or at least one auditory message can also be determined and processed in the method.
Ferner können im Verfahren eine oder mehrere vorgegebene oder einstellbaren Grenzparameter bzw. Grenzwerte in Bezug auf akustische Parameter, berücksichtigt werden, die in einem bestimmten Raumbereich oder in einem mit einer bestimmten Person oder einer Person zugehörig zu einer Personengruppe belegten Raumbereich, bestimmten Raumbereich und/oder Sitzplatz im Wohnraum, überschritten und/oder nicht überschritten, bzw. auf eine bestimmte Weise eingehalten werden sollen. Beispielsweise kann das Verfahren derart ausgeführt werden, dass bestimmte Grenzwerte für bestimmte, insbesondere akustische, Parameter in einem bestimmten Raumbereich des Wohnraums nicht oder höchstens für eine kurze Zeit überschritten oder nicht überschritten werden sollen.Furthermore, in the method, one or more predetermined or adjustable limit parameters or limit values with respect to acoustic parameters can be taken into account which in a specific room area or in a room area, specific room area and / or room assigned to a specific person or person Seating in the living room, exceeded and / or not exceeded, or should be maintained in a certain way. For example, the method can be carried out in such a way that certain limit values for certain, in particular acoustic, parameters in a certain room area of the living space are not exceeded or not exceeded for a short time or not exceeded.
Bevorzugt können solche Raumbereiche durch einen Nutzer, z.B. mittels einer grafischen Oberfläche die einen Teil des Wohnraums repräsentiert, gewählt werden. Dabei können auch weitere Bedingungen, z.B. Zeitintervalle, Uhrzeiten, Abhängigkeiten von einer Anwesenheit einer Person oder einer Person zugehörig zu einer bestimmten Personengruppe festgelegt werden.Preferably, such space areas may be provided by a user, e.g. be selected by means of a graphical surface that represents a part of the living space. In this case, other conditions, e.g. Time intervals, times, dependencies on the presence of a person or a person belonging to a specific group of people are determined.
Gemäß einer zweckmäßigen Ausgestaltung wird die Stimme einer im stationären Wohnraum anwesenden Person von einer Stimme aus einer Audiowiedergabevorrichtung, insbesondere aus dem besagten Audiosystem oder einer, z.B. mit dem Haus und/oder mit dem Audiosystem vernetzten Audiowiedergabevorrichtung, z.B. aus einem mobilen Multimediaabspielgerät, unterschieden. Daraufhin kann der Unterschied berücksichtigt werden. Beispielsweise erfolgt die Anpassung eines auszugebenden Audiosignals nur oder vorwiegend auf die live (unmittelbar akustisch gesprochene) Stimme innerhalb des Wohnraums. Beispielsweise erfolgt das Bestimmen oder Anpassen eines oder mehrerer Parameter eines Abschnitts des auszugebenden Audiosignals nur oder vorwiegend auf eine oder mehrere live (unmittelbar akustisch gesprochene) Stimmen innerhalb des Wohnraums. Auf einen Abschnitt der Stimme aus einer technischen Ausgebevorrichtung kann eine vordefinierte Maßnahme ausgeführt werden.According to an expedient embodiment, the voice of a person present in the stationary living room is heard from a voice from an audio reproduction device, in particular from the said audio system or a, e.g. audio reproducing apparatus, e.g., the home and / or audio system, e.g. from a mobile multimedia player. Then the difference can be considered. For example, the adaptation of an audio signal to be output is only or predominantly to the live (immediately acoustically spoken) voice within the living space. For example, determining or adjusting one or more parameters of a portion of the audio signal to be output is only or predominantly to one or more live (immediately acoustically speaking) voices within the living space. A predefined action may be taken on a portion of the voice from a technical issuer.
Gemäß einer weiteren optionalen Ausgestaltung wird auch erkannt, dass es sich bei der im stationären Wohnraum (akustisch) erfassten Stimme um eine Personenstimme, insbesondere um eine (aktuell erzeugte) Stimme einer bestimmten Person oder Person zugehörig zu einer bestimmten Personengruppe, handelt und daraufhin das Verändern des Audiosignals abhängig von der Erkennung der Stimme als eine Personenstimme, insbesondere abhängig vom Erkennen dass die Stimme von einer bestimmten Person oder von einer Person zugehörig zu einer Personengruppe ist, erfolgt.According to another optional embodiment, it is also recognized that the voice recorded in the stationary living space (acoustically) is a person's voice, in particular a (currently generated) voice. Voice of a particular person or person belonging to a particular group of persons, and then changing the audio signal depending on the recognition of the voice as a person's voice, in particular depending on the recognition that the voice is from a specific person or from a person belonging to a group of people, he follows.
Beispielsweise wird erkannt, dass es sich bei der im Wohnraum (akustisch) erfassten Stimme um eine Personenstimme, insbesondere um eine Stimme einer bestimmten Person oder Person zugehörig zu einer bestimmten Personengruppe, handelt und daraufhin das Bestimmen der Parameter auditiven Meldung abhängig von der Erkennung der Stimme als eine Personenstimme, insbesondere abhängig vom Erkennen, dass die Stimme von einer bestimmten Person oder von einer Person zugehörig zu einer Personengruppe ist, ausgeführt wird. Auch kann im Verfahren, beispielsweise mittels einer Stimmenerkennung und/oder Bilderkennung oder mit anderen Mitteln, ermittelt bzw. sichergestellt werden, dass eine oder mehrere (akustisch hörbare) Stimme zu einer anwesenden Person gehört oder nicht gehört, und die ermittelte Information im Verfahren berücksichtigt werden. Beispielsweise kann daraufhin vermieden werden, dass eine Stimme aus einer weiteren Audioausgabevorrichtung das Erzeugen einer auditiven Meldung in einer nachteilhaften Weise beeinflusst oder etwa als eine mögliche Spracheingabe, Sprachbefehl, Frage an bzw. in eine Sprachsteuerungsapplikation interpretiert wird.For example, it is recognized that the voice recorded in the living space (acoustically) is a person's voice, in particular a voice of a specific person or person belonging to a certain group of persons, and then determining the parameters auditory message depending on the recognition of the voice as a person's voice, in particular depending on the recognition that the voice is from a specific person or from a person belonging to a group of people, is performed. Also, in the method, for example by means of voice recognition and / or image recognition or by other means, it can be ascertained or ensured that one or more (acoustically audible) voices belong or do not belong to a person present, and the ascertained information is taken into account in the method , For example, it can then be avoided that a voice from another audio output device affects the generation of an auditory message in a disadvantageous manner or is interpreted as a possible speech input, voice command, question to a voice control application.
Alternativ oder zusätzlich kann ermittelt werden, dass eine im Wohnraum hörbare akustische Stimme zumindest mit einem, einen Grenzwert übersteigendem Wahrscheinlichkeitsmaß, aus einer Audioausgabevorrichtung kommt und/oder dass die akustisch hörbare Stimme mit einem, einen Grenzwert übersteigendem Wahrscheinlichkeitsmaß, einer oder mehreren, insbesondere keiner der mit anderen Mitteln erfassbaren Personen im Wohnraum (zu keiner in Frage kommender Person) gehört, und auf Basis der ermittelten Information eine Interpretation und/oder Weiterverarbeitung der mit der besagten Stimme gesagten Wörter oder sprachlichen Botschaften verändert wird. Bevorzugt kann veranlasst werden, dass ein mit der besagten Stimme gesprochenes Wort, Wörter oder zumindest eine sprachliche Botschaft nicht als eine Spracheingabe interpretiert oder nicht als ein Sprachbefehl ausgeführt wird und/oder die Kriterien zur Interpretation der Wörter oder sprachlichen Botschaften verändert, insbesondere verschärft werden.Alternatively or additionally, it can be determined that an audible voice audible in the living space comes from an audio output device at least with a probability measure exceeding a limit value and / or that the acoustically audible voice has a probability value exceeding one limit, one or more, in particular none of the Persons who can be detected by other means in the living space (not being a person in question) are heard, and an interpretation and / or further processing of the words or linguistic messages said with said voice is changed on the basis of the information determined. Preferably, a word, words or at least one linguistic message spoken with the said voice may be caused not to be interpreted as a voice input or to be executed as a voice command and / or the criteria for interpreting the words or linguistic messages may be changed, in particular aggravated.
Beispielsweise kann die Stimme einer im Wohnraum anwesenden Person (z.B. eines „Sprechers“) im Wohnraum von einer Stimme aus einer Audioausgabevorrichtung (z.B. eines Multimediaabspielgeräts oder eines mobilen Anwendergeräts) einer im Wohnraum drahtlos vernetzten Audioausgabevorrichtung, dadurch unterschieden werden, dass ermittelt wird, ob die Stimme nur in den Daten eines Mikrophons bzw. eines Mikrophonsystems enthalten bzw. erkennbar ist, oder ob die Stimme (auch, in irgendeiner Form) in den Signaldaten einer Audioausgabevorrichtung erkannt werden kann.For example, the voice of a person present in the living space (eg, a "speaker") in the living space of a voice from an audio output device (eg, a multimedia player or a mobile user device) of a wirelessly networked in the living room audio output device, can be distinguished by whether the Voice is contained or recognizable only in the data of a microphone or a microphone system, or whether the voice (also, in some form) can be detected in the signal data of an audio output device.
Ein solcher Abgleich kann z.B. mittels Auswertung eines Ähnlichkeitsmaßes bzw. Korrelationsmaßes zwischen einem von einem Mikrophon im Wohnraum abhängigen (mit einem Mikrophon erfassten) Signal und den Daten bzw. dem Datenstrom, die mit einem anderen im Wohnraum hörbaren Audiosignal korrespondieren oder unmittelbar korrelieren, erfolgen. Die Daten zu dem zumindest einen anderen Audiosignal können aus Daten des Audiosystems, aus Daten einer weiteren Audioausgabevorrichtung oder eines weiteren im Haus vernetzten (vernetzt betreibbaren) Geräts, welches Audiosignale wiedergibt bzw. bestimmte akustische Schallwellen erzeugt, ermittelt werden. Dabei kann z.B. ein durch eine im Wohnraum betriebene Audioausgabevorrichtung auszugebendes Audiosignal, unmittelbar oder mittelbar zu der besagten Sprachsteuerungsapplikation, übermittelt werden, wobei dieses nicht ausgegeben, sondern zum Abgleich mit einem durch ein Mikrophon im Wohnraum erfassten Signal bereitgestellt wird.Such a calibration may e.g. by means of evaluation of a measure of similarity or correlation between a dependent of a microphone in the living room (detected by a microphone) signal and the data or the data stream, which correspond to another audible in the living room audio signal or correlate directly done. The data for the at least one other audio signal can be determined from data of the audio system, from data from a further audio output device or from another networked device which reproduces audio signals or generates specific acoustic sound waves. In this case, e.g. an audio signal to be outputted by an audio output device operated in the living space, directly or indirectly to said voice control application, which is not output, but provided for matching with a signal detected by a microphone in the living space.
Auch können im Verfahren bestimmte Stimmen, z.B. Stimmen eines TV- oder Radiomoderators, Schauspielers, etc., Stimmen aus einer virtuellen Realität oder aus einem Videospiel, Stimmen aus einer Kategorie oder Liste von Stimmen, von den unmittelbar (live) im Wohnraum gesprochenen, insbesondere nicht mit technischen Mitteln wiedergegebenen, Stimmen unterschieden werden. Solche Stimmen können anhand entsprechender (im Verfahren eingelernter und/oder bereitgestellter) Erkennungsdaten erkannt und im Verfahren berücksichtigt werden.Also, in the method, certain voices, e.g. Voices of a TV or radio presenter, actor, etc., voices of a virtual reality or of a video game, voices of a category or list of voices, of voices spoken directly (live) in the living room, in particular not reproduced by technical means become. Such voices can be recognized by means of appropriate (learned in the process and / or provided) recognition data and taken into account in the process.
Gemäß einer zweckmäßigen Ausgestaltung umfasst das Verfahren ein Erfassen eines Parameters einer körperlichen Regung, insbesondere einer Lippenbewegung, zumindest einer im stationären Wohnraum anwesenden Person. Dies kann, insbesondere mittels einer vernetzten Kamera erfolgen. Daraufhin kann, auf Basis eines Parameters der erfassten körperlichen Regung, insbesondere einer Lippenbewegung, ein Ermitteln eines Kommunikationsvorhabens der Person und/oder eine Prädiktion eines Parameters einer daraufhin erwarteten Kommunikation erfolgen. Dabei kann im Verfahren bereits eine (zumindest wahrscheinlich) erwarte Kommunikation bzw. eine Auswahl der erwarteten Parameter der erwarteten Kommunikation berücksichtigt werden. Somit kann ein erheblicher Zugewinn an Performance erreicht werden.According to an expedient embodiment, the method comprises detecting a parameter of a physical movement, in particular a lip movement, of at least one person present in the stationary living space. This can be done, in particular by means of a networked camera. Thereupon, on the basis of a parameter of the detected physical movement, in particular a lip movement, a determination of a communication project of the person and / or a prediction of a parameter of a subsequently expected communication can take place. In this case, an (at least probably) expected communication or a selection of the expected parameters of the expected communication can already be taken into account in the method. Thus, a significant gain in performance can be achieved.
Dabei kann ein Wahrscheinlichkeitsmaß ermittelt werden, dem zufolge die betreffende Person daraufhin, insbesondere innerhalb eines bestimmten Zeitintervalls nach der erfassten körperlichen Regung, z.B. einer Lippenbewegung, auditiv kommunizieren wird. Das entsprechende Wahrscheinlichkeitsmaß und/oder ein besagtes Zeitintervall kann auch abhängig von den Historiendaten ermittelt bzw. geschätzt werden. Ferner kann das Bestimmen oder Anpassen eines oder mehrerer Parameters des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung abhängig von dem Wahrscheinlichkeitsmaß und/oder abhängig von dem ermittelten bzw. geschätzten Zeitintervall ausgeführt werden.In this case, a probability measure can be determined according to which the person concerned will then communicate audibly, in particular within a certain time interval, after the detected physical movement, for example a lip movement. The corresponding probability measure and / or a said time interval can also be determined or estimated depending on the history data. Furthermore, determining or adjusting one or more parameters of the be outputted audio signal and / or the at least one auditory message depending on the probability measure and / or depending on the determined or estimated time interval to be executed.
Bevorzugt werden ein oder mehrere Parameter der körperlichen Regung, insbesondere von Mimik, von Gestik, und/oder einer Lippenbewegung einer Person zu mehreren aufeinanderfolgenden Zeitpunkten erfasst. Daraufhin werden ein oder mehrere Muster, bevorzugt Muster eines zeitlichen Verlaufs einer körperlichen Regung, ermittelt. Beispielsweise kann ein solches Muster der körperlichen Regung, insbesondere umfassend ein Muster einer Lippenbewegung, insbesondere Lippenverformung, z.B. in mehreren Bildern mit einer Kamera erfasst und im Verfahren verarbeitet werden. Insbesondere kann auch ein Abgleich eines erkannten Muster der Lippenbewegung, Mimikveränderung, Gestikveränderung oder ein Muster einer Veränderung weiterer sensorisch erfassten Merkmale, insbesondere in den erfassten Bildern, mit einem oder mehreren Parametern einer etwa gleichzeitig ablaufenden oder anschließend folgenden auditiven Kommunikation der Person erfolgen.Preferably, one or more parameters of the physical movement, in particular of facial expressions, gestures, and / or a lip movement of a person are recorded at several successive points in time. Subsequently, one or more patterns, preferably patterns of a temporal course of a physical movement, are determined. For example, such a pattern of bodily agitation, in particular comprising a pattern of lip movement, in particular lip deformation, e.g. captured in multiple images with a camera and processed in the process. In particular, an adjustment of a recognized pattern of the lip movement, facial expression change, gesture change or a pattern of changing further sensory features, especially in the captured images, can be done with one or more parameters of an approximately simultaneous or subsequent auditive communication of the person.
Beispielsweise wird ein Parameter der Kommunikation, insbesondere ein Kommunikationsvorhaben zumindest einer im Wohnraum befindlichen Person mittels des Erkennens ihrer Lippenbewegung und/oder einer körperlichen Regung, insbesondere mittels einer zum Datenaustausch ausgestalteten Kamera ermittelt, insbesondere prädiziert. Bevorzugt kann daraufhin ein betreffender Abschnitt des auszugebenden Audiosignals auch vorausschauend (vor oder kurz nach dem Anfang des Sprechens) angepasst werden.By way of example, a parameter of the communication, in particular a communication project of at least one person located in the living space is determined, in particular predicted, by the recognition of their lip movement and / or a bodily movement, in particular by means of a camera designed for data exchange. In this case, a relevant section of the audio signal to be output can then also be adapted in a forward-looking manner (before or shortly after the beginning of the speech).
Auch kann im Verfahren ein Verändern, insbesondere Anpassen eines oder mehrerer Parameter des auszugebenden Audiosignals und/oder ein Bestimmen zumindest eines Parameters der zumindest einen einer auditiven Meldung auf eine solche Kommunikation erfolgen, die (unter gegebenen Umständen) nicht oder nicht hinreichend hörbar bzw. nicht mit einem Mikrophon erfassbar ist oder wäre.Also, in the method, a modification, in particular adaptation of one or more parameters of the audio signal to be output and / or a determination of at least one parameter of the at least one of an auditory message to such a communication, the (under given circumstances) not or not sufficiently audible or not with a microphone is detectable or would be.
Ferner kann abhängig von einem Abgleich zwischen einem oder mehreren Parametern einer körperlichen Regung, z.B. einer Lippenbewegung, Mimikveränderung, Gestikveränderung mit einer erhöhten Sicherheit darauf geschlossen werden, dass (auch) eine auditive Kommunikation stattfindet oder erwünscht ist. Dabei kann auch ein Parameter einer stattfindenden oder prädizierten Kommunikation berücksichtigt werden, die akustisch (beispielsweise mit einem Mikrophon) nicht hinreichend erkennbar wäre.Further, depending on a match between one or more parameters, a physical sensation, e.g. lip movement, mimic change, gesture change with increased assurance that (also) an auditory communication is taking place or is desired. In this case, a parameter of an ongoing or predicated communication can be taken into account, which would not be sufficiently recognizable acoustically (for example with a microphone).
Es kann, insbesondere einhergehend mit dem Ermitteln eines Kommunikationsvorhabens, auch eine Prädiktion, insbesondere eine Annahme über einen oder mehrere akustische Parameter einer (wahrscheinlich) darauffolgenden Kommunikation, z.B. eines bestimmten Abschnitts der Kommunikation, getroffen werden. Beispielsweise kann auf diese Weise ein zeitlicher Parameter kennzeichnend eine wahrscheinliche Dauer der Kommunikation, bzw. eines betreffenden Abschnitts der Kommunikation bestimmt werden. Aus einer besonders starken körperlichen Regung, z.B. einer schnellen und/oder starken mimischen Regung, kann beispielsweise ein Rückschluss auf eine relativ lange Dauer einer darauffolgenden Kommunikation gemacht werden. Auch kann abhängig von dem letztgenannten Abgleich eine unmittelbar stattfindende, insbesondere zu einer weiteren Person oder Raumrichtung gerichtete Kommunikation von weiteren, in der Umgebung ausgegebenen oder in der Umgebung akustisch erzeugten, Sprache umfassender, Schallwellen beispielsweise aus der Nachbarschaft, unterschieden werden.In particular, accompanied by the determination of a communication project, it may also be a prediction, in particular an assumption about one or more acoustic parameters of (probably) subsequent communication, e.g. of a particular section of communication. By way of example, in this way, a time parameter may characteristically be determined as a probable duration of the communication or of a relevant section of the communication. From a particularly strong physical movement, e.g. a fast and / or strong facial movement, for example, a conclusion can be drawn on a relatively long duration of a subsequent communication. Also, depending on the latter comparison, a directly occurring, in particular to a further person or spatial direction directed communication of further, issued in the environment or in the environment acoustically generated speech comprehensive, sound waves, for example from the neighborhood, can be distinguished.
Bevorzugt wird ein oder mehrere Parameter eines auszugebenden Audiosignals abhängig von einem Abgleich zwischen einer ermittelten körperlichen Regung und einem entsprechenden oder darauffolgend ermittelten akustischen Parameter der besagten Kommunikation bestimmt. Beispielsweise kann zumindest ein, z.B. mittels einer Kamera im Wohnraum und einer Bildverarbeitung, erkanntes Muster einer körperlichen Regung bzw. Gestik, Mimik, Lippenbewegung ermittelt und berücksichtigt werden. Ferner kann zumindest ein, z.B. von einer Audiosignalanalyse, erkanntes Muster zu einem Parameter der auditiven Kommunikation, zu einer bestimmten Gefühlsäußerung, einem Lachen, Weinen, einer Interjektion innerhalb der besagten Kommunikation entspricht, ermittelt und berücksichtigt werden. Bevorzugt erfolgt ein Anpassen des auszugebenden Audiosignals abhängig von dem Abgleich der zumindest zwei genannten Muster bzw. der Muster der genannten unterschiedlichen Arten. Ein solcher Abgleich kann auf Basis eines Maßes für eine Übereinstimmung, Ähnlichkeit, Korrelation, insbesondere einer daraus abgeleiteter zeitlicher oder kausaler Abhängigkeit der besagten Muster erfolgen. Dabei können die Daten auf Basis eines ersten Musters, der auf Basis einer im Wohnraum erfassten Bildfolge ermittelt wurde mit eines zweiten Muster der auf Basis einer Auswertung akustischer Schallwellen im Wohnraum ermittelt wurde, abgeglichen werden. Auch kann das Verfahren bei einer temporären Nichtverfügbarkeit akustischer erfasster Daten zumindest übergangsweise auf Basis der Bilddaten betrieben werden oder umgekehrt. Somit wird eine verbesserte Performance, Verfügbarkeit, Verlässlichkeit bei der Ausführung des Verfahrens erreicht.Preferably, one or more parameters of an audio signal to be output are determined as a function of a comparison between a determined physical movement and a corresponding or subsequently determined acoustic parameter of said communication. For example, at least one, e.g. be detected and taken into account by means of a camera in the living room and an image processing, recognized pattern of physical emotion or gesture, facial expression, lip movement. Furthermore, at least one, e.g. from an audio signal analysis, detected pattern to a parameter of the auditory communication, to a particular feeling, laughing, crying, an interjection within the said communication, determined and taken into account. Preferably, the audio signal to be output is adjusted as a function of the matching of the at least two named patterns or the patterns of the mentioned different types. Such matching may be done on the basis of a measure of correspondence, similarity, correlation, in particular of a temporal or causal dependence of said patterns derived therefrom. In this case, the data can be adjusted on the basis of a first pattern which was determined on the basis of an image sequence recorded in the living space with a second pattern which was determined on the basis of an evaluation of acoustic sound waves in the living space. In the case of a temporary unavailability of acoustically acquired data, the method can also be operated at least transitionally on the basis of the image data or vice versa. Thus, improved performance, availability, reliability in the execution of the method is achieved.
Insbesondere kann bei einem Abgleich ein mathematischer Zusammenhang zwischen mehreren Parametern einer körperlichen Regung und einer in etwa gleichzeitig mit dieser stattfindenden und/oder einer darauffolgenden auditiven Kommunikation ermittelt und im Verfahren berücksichtigt werden. Beispielsweise kann ein Erkennen von einem lächelnden oder weinenden Gesicht in Kombination mit einem entsprechenden akustischen Muster, welches beispielsweise typisch für das Lachen, Weinen oder eine bestimmte Interjektion ist, im Verfahren verarbeitet werden. Beispielsweise kann ein Parameter eines Abschnitts des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung bestimmt werden abhängig von: einem bestimmten mimisches Muster, z.B. ein Lächeln insbesondere kombiniert mit dem Sprechen und/oder einem durch eine starke mimische Regung gekennzeichnetes Gesicht und ein lautes Sprechen bzw. Schreien; Daraufhin kann beispielsweise eine Anpassung eines oder mehrerer Parameters des Audiosignals und/oder der zumindest einen auditiven Meldung nach einer jeweils bestimmten (veränderten) Logik, Formel, Kennlinien ausgeführt werden. In particular, during a comparison, a mathematical relationship between a plurality of parameters of a physical movement and an auditory communication taking place approximately simultaneously with the latter and / or a subsequent one can be determined and taken into account in the method. For example, a recognition of a smiling or crying face in combination with a corresponding acoustic pattern, which is typical for example for laughter, crying or a certain interjection, can be processed in the process. For example, a parameter of a portion of the audio signal to be output and / or the at least one auditory message may be determined depending on: a particular facial expression, eg, a smile, in particular combined with speech and / or a face marked by a strong facial expression and loud speech or screaming; Thereupon, for example, an adaptation of one or more parameters of the audio signal and / or the at least one auditory message can be carried out according to a respectively determined (changed) logic, formula, characteristic curves.
Bevorzugt wird im Verfahren die Anzahl und/oder Verteilung der zumindest zwei, bevorzugt aller im Wohnraum anwesenden Personen auf bestimmte Raumbereiche bzw. Sitzplätze innerhalb des Wohnraums ermittelt und berücksichtigt. Dies kann im Rahmen einer Erfassung bzw. Erkennung einer Szene, insbesondere einer Bildszene oder unabhängig hiervon, z.B. mit vereinfachten Mitteln erfolgen. Dabei kann eine oder können mehrere Positionen bzw. Raumbereiche ermittelt werden, in welchen sich (bestimmte) Personen bzw. Personen zugehörig zu bestimmten Personengruppen (zumindest mit einer hohen Wahrscheinlichkeit) befinden, und/oder die Belegung eines oder mehrerer Sitzplätze durch (bestimmte) Personen bzw. Personen zugehörig zu bestimmten Personengruppen, innerhalb des Wohnraums ermittelt werden. Beispielsweise können es die Raumbereiche bzw. Sitzplätze sein, die einem Sofa, einer Spielecke, einem bestimmten Sessel, Plätzen in der Küche, Plätzen am Esstisch, der Spielecke für Kinder, Balkon, etc. entsprechen. Personengruppen können z.B. erwachsenen Personen, Kinder Babysitzen, Kinderbett, etc. entsprechen. Durch die Unterscheidung und Berücksichtigung der Raumbereiche innerhalb des Wohnraums, und aus der Unterscheidung und Berücksichtigung nach Personenklassen ergeben sich diverse vom Fachmann nachvollziehbare Vorteile.In the method, the number and / or distribution of the at least two persons, preferably all persons present in the living space, is preferably determined and taken into account in certain room areas or seats within the living space. This can be done in the context of detection or recognition of a scene, in particular an image scene or independently thereof, e.g. done with simplified means. In this case, one or more positions or areas in which (specific) persons or persons belong to certain groups of persons (at least with a high degree of probability) can be determined, and / or the occupancy of one or more seats by (specific) persons or persons belonging to specific groups of persons, within the living space. For example, it may be the room areas or seats that correspond to a sofa, a play area, a particular armchair, places in the kitchen, places at the dining table, the children's play area, balcony, etc. Groups of persons can e.g. adult persons, children's baby sitting, cot, etc. By distinguishing and considering the areas of space within the living space, and from the distinction and consideration according to class of persons, various advantages that can be understood by the skilled person result.
Das Ermitteln der Anzahl und/oder der Verteilung der im Wohnraum anwesenden Personen kann in einem vereinfachten Fall mit einer oder mehreren Infrarotsensoren, Bewegungsmeldern, Anwesenheitssensoren, Brandschutzsensoren im Wohnraum oder mit weiteren Sensoren, die z.B. zur Steuerung weiterer Systeme des Hauses dienen, erfolgen. Ferner können Daten bzw. Signale eines Sensors oder Systems des Hauses ermittelt werden, welches zu einer (bedarfsgerechten) Steuerung der Beleuchtung, Heizung, Belüftung, des Brandmelders bzw. eines Brandverhinderungs- oder Brandlöschungssystems des Wohnraums bzw. des Hauses dienen. Das Ermitteln der Anzahl und/oder der Verteilung der im Wohnraum anwesenden Personen kann im Verfahren mittels an sich bekannter Sensoren bzw. Systeme, oder mittels der zur Ausführung des Verfahrens eingerichteten bzw. weitergebildeten Sensoren bzw. Vorrichtungen im Wohnraum erfolgen.The determination of the number and / or the distribution of the persons present in the living space can in a simplified case with one or more infrared sensors, motion detectors, occupancy sensors, fire protection sensors in the living space or with other sensors, e.g. serve to control other systems of the house done. Furthermore, data or signals of a sensor or system of the house can be determined, which serve for a (needs-based) control of lighting, heating, ventilation, the fire alarm or a fire prevention or fire extinguishing system of the living room or the house. The determination of the number and / or the distribution of the persons present in the living space can take place in the process by means of sensors or systems known per se, or by means of the sensors or devices set up or further developed for carrying out the method.
Ferner kann das Ermitteln der Anzahl und/oder der Verteilung der im Wohnraum anwesenden Personen auch über die Anzahl der im Wohnraum erkannten, insbesondere lokalisierten mobilen Anwendergeräte, z.B. Mobilfunkendgeräte und/oder Wearables (z.B. Smart Watches) erfolgen. Ferner kann das Ermitteln der Anzahl und/oder der Verteilung der im Wohnraum anwesender Personen mittels sogenannter Smart-Closes oder einer Nahfeldkommunikation NFC (= Near Field Communication) oder z.B. RFID-Chips (= Radio Frequency Identification) erfolgen. Eine Identifikation der Personen ist im Verfahren nicht notwendig. Dennoch kann auch eine Identifikation oder Wiedererkennung bestimmter Personen, ein Ermitteln einer Personengruppe oder eine Zuordnung eines bestimmten für das Verfahren maßgeblichen Nutzerprofils, ausgeführt werden. Insbesondere kann auch eine Zuordnung von einer oder mehreren Personen oder Raumbereichen, wo sich diese aktuell, typischerweise, zu bestimmen Zeitintervallen innerhalb des Hauses aufhalten, zu bestimmten Personengruppen erfolgen.Furthermore, determining the number and / or the distribution of the persons present in the living space can also be determined by the number of mobile user devices detected in the living space, in particular localized mobile user devices, e.g. Mobile terminals and / or wearables (e.g., smart watches). Furthermore, determining the number and / or the distribution of the persons present in the living space by means of so-called smart closes or near field communication NFC (= Near Field Communication) or e.g. RFID chips (= Radio Frequency Identification). Identification of the persons is not necessary in the procedure. Nevertheless, an identification or recognition of specific persons, a determination of a group of people or an assignment of a particular relevant for the process user profile can be performed. In particular, an association of one or more persons or room areas, where these are currently, typically, to determine time intervals within the house, can be made to particular groups of people.
Beispielsweise kann eine Zuordnung, zwischen den Personengruppen: ein Erwachsener, ein Kind, ein Kindebett mit Kind, ein Baby ohne Babysitz, ein Babysitz mit oder ohne Baby zu den bestimmten Raumbereichen und/oder Sitzpositionen im Wohnraum erfolgen, in welchen sich diese (zumindest mit einem erhöhten Wahrscheinlichkeitsmaß) aufhalten. Für ein (aktuell auszuführendes) Bestimmen eines oder mehrerer Parameter des auszugebenden Audiosignals kann den (bestimmten) Personen, Personengruppen, oder den entsprechenden Raumbereichen und/oder Sitzplätzen jeweils die Eigenschaft als ein, zumindest wahrscheinlicher, „Sprecher“ und/oder als, zumindest potentieller oder wahrscheinlicher, „Zuhörer“ und/oder zumindest potentieller oder wahrscheinlicher „Sprecher und Zuhörer“ zugeordnet werden.For example, an association can be made between the groups of persons: an adult, a child, a child bed with a child, a baby without a baby seat, a baby seat with or without a baby to the specific room areas and / or sitting positions in the living room in which they (at least with an increased probability measure). For (currently executing) determining one or more parameters of the audio signal to be output, the (particular) persons, groups of people, or the corresponding spatial areas and / or seats may each have the property of being at least more likely "spokespersons" and / or at least potential or more likely to be associated with "listeners" and / or at least potential or likely "speakers and listeners".
Beispielsweise kann im Verfahren auch unterschieden werden, wie viele der im Wohnraum anwesenden Personen, insbesondere welche der Personen mit welcher Person auditiv kommunizieren (sprechen) und abhängig davon ein oder mehrere Parameter des auszugebenden Audiosignals bestimmt oder angepasst werden. Auch kann ein zweckmäßiges Verteilen der Schallwellen oder Schallwellenmuster auf Basis zumindest eines Abschnitts des auszugebenden Audiosignals auf bestimmte Raumbereiche innerhalb des Wohnraums und/oder bestimmte Zeitintervalle erfolgen. Bevorzugt wird zumindest ein Parameter eines Abschnitts des Audiosignals und/oder der zumindest einen auditiven Meldung abhängig von der Position des Sprechers und/oder einer relativen Richtung, aus der ein (sprachlicher) Kommunikationsinhalt kommt oder entsprechend dem erkannten Kommunikationsvorhaben (innerhalb eines bestimmten Zeitintervalls) erwartet wird angepasst.For example, it can also be distinguished in the method how many of the persons present in the living space, in particular which of the persons communicate audibly with which person and, depending on this, one or more Parameters of the output audio signal to be determined or adjusted. A suitable distribution of the sound waves or sound wave patterns on the basis of at least one section of the audio signal to be output to specific spatial areas within the living space and / or specific time intervals can also be carried out. At least one parameter of a section of the audio signal and / or the at least one auditory message is expected depending on the position of the speaker and / or a relative direction from which a (linguistic) communication content arrives or is expected (within a certain time interval) will be adapted.
Gemäß einer weiteren zweckmäßigen Ausgestaltung wird zumindest ein Abschnitt eines in einem stationären Wohnraum auszugebenden Audiosignals abhängig von der Position des Sprechers und/oder von einer relativen Richtung, aus der ein Abschnitt der (sprachlichen) Kommunikation (ein Kommunikationsinhalt, eine Kommunikationsbotschaft) kommt oder entsprechend dem erkannten Kommunikationsvorhaben kommen wird und/oder abhängig von der Position eines bestimmten, wahrscheinlichen oder angenommenen Zuhörers zu dem Abschnitt der Kommunikation angepasst.According to a further expedient embodiment, at least a portion of an audio signal to be output in a stationary living space is dependent on the position of the speaker and / or a relative direction from which a portion of the (speech) communication (a communication content, a communication message) comes from or in accordance with detected communication projects and / or adjusted depending on the position of a particular, probable or assumed listener to the section of communication.
Gemäß einer zweckmäßigen Ausgestaltung erfolgt ein Einlernen einer oder mehrerer körperlichen Regungen (einer Person) die einer Kommunikation, insbesondere einem Sprechen vorausgehen, zu einem oder mehreren Zeitintervallen, und daraufhin, beispielsweise bei einer Ausführung des Verfahrens zu zumindest einem späteren Zeitintervall, bei einer Wiedererkennung der zumindest einer (bestimmten, eingelernten) körperlichen Regung ein Anpassen eines oder mehrerer Parameters des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung abhängig von der Wiedererkennung zumindest einer der eingelernten körperlichen Regungen erfolgt. Die besagte körperliche Regung kann auch einen Teil der besagten Kommunikation sein bzw. bilden. Bevorzugt werden zumindest zwei unterschiedliche körperliche Regungen eingelernt und/oder wiedererkannt. Insbesondere wird ein Parameter zumindest eines Anschnitts des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung bestimmt oder angepasst abhängig davon, welche von zumindest zwei körperlichen Regungen erkannt bzw. wiedererkannt wurden. Die körperlichen Regungen können als die ihnen entsprechende Muster, z.B. Parametermuster als Bewegungsmuster bzw. Veränderugsmuster eingelernt und/oder wiedererkannt werden.According to an expedient refinement, one or more physical impulses (of a person) that are preceded by a communication, in particular speaking, take place at one or more time intervals, and then, for example, at an execution of the method at least one later time interval, at a recognition of the at least one (specific, learned-in) physical impulse is adapted to one or more parameters of the audio signal to be output and / or the at least one auditory message depends on the recognition of at least one of the learned physical impulses. The said physical impulse can also be part of said communication. Preferably, at least two different physical impulses are learned and / or recognized. In particular, a parameter of at least one bleed of the audio signal to be output and / or of the at least one auditory message is determined or adapted depending on which of at least two physical impulses were recognized or recognized. The physical impulses may be described as their corresponding patterns, e.g. Parameter patterns are learned and / or recognized as movement patterns or change patterns.
Beispielsweise kann ein Anpassen eines oder mehrerer Parameter des auszugebenden Audiosignals und/oder Bestimmen oder Anpassen zumindest eines Parameters der zumindest einen auditiven Meldung abhängig von der Wiedererkennung einer bestimmten körperlichen Regung ausgeführt werden. Dabei können bei einer Wiedererkennung unterschiedlicher körperlichen Regungen, jeweils ein unterschiedliches, Anpassen bestimmter Parameter ausgeführt werden, und/oder unterschiedliche Parameter des auszugebenden Audiosignals oder Kombinationen der Parameter, insbesondere von unterschiedlichen Arten zum Anpassen ausgewählt werden. Beispielsweise werden zu unterschiedlichen vordefinierten Klassen (Kategorien) körperlicher Regungen unterschiedliche mathematische Zusammenhänge zum Bestimmen des Parameters des auszugebenden Audiosignals oder Varianten des Bestimmens Parameter angewandt bzw. aktiviert. Mit anderen Worten kann auf das Wiederkennen einer von einem bestimmten Sprecher und seiner körperlichen Regung ein zweckmäßiges Verändern bzw. Anpassen des Audiosignals (auf eine verbesserte, optimierte oder für diesen Fall vordefinierte oder eingelernte Art und Weise) ausgeführt werden. Diese kann beispielsweise für die Stimme des Sprechers bzw. für die für ihn typischen Parameter der Kommunikation oder sein Kommunikationsverhalten, passende Parameter bzw. passende Parameterwerte des Audiosignals bestimmt werden.For example, an adaptation of one or more parameters of the audio signal to be output and / or determination or adaptation of at least one parameter of the at least one auditory message depending on the recognition of a specific physical emotion can be performed. In this case, when different physical impulses are recognized, a different adaptation of certain parameters can be carried out in each case, and / or different parameters of the audio signal to be output or combinations of the parameters, in particular of different types for adaptation, can be selected. For example, different mathematical relationships are used or activated for different predefined classes (categories) of physical impulses for determining the parameter of the audio signal to be output or variants of the determining parameter. In other words, upon recognizing one of a particular speaker and his physical impulse, an appropriate altering of the audio signal (in an improved, optimized, or in this case predefined or learned manner) may be performed. This can be determined, for example, for the voice of the speaker or for the typical parameters of the communication or his communication behavior, suitable parameters or suitable parameter values of the audio signal.
Beispielsweise erfolgt ein Einlernen mehrerer bestimmter Stimmen und/oder mehrerer bestimmter körperlicher Regungen eines oder mehrerer Sprecher. Das Einlernen kann bevorzugt ein Ermitteln der entsprechenden Erkennungsmerkmale, beispielsweise der Wiederkennungsmuster zu den Stimmen oder zu den körperlichen Regungen umfassen, die eine spätere Unterscheidung dieser Stimmen bzw. körperlichen Regungen von anderen Stimmen bzw. körperlichen Regungen, oder solche einer anderen Person erlauben. Dies wird bevorzugt zu mehreren Zeitintervallen und für mehrere Personen ausgeführt. Dabei können Lerndaten erzeugt werden, die eine Zuordnung zwischen einem oder mehreren Wiedererkennungsmuster und einer darauffolgend, mit einem ein bestimmtes Erfolgsmaß überschreitenden und/oder ein bestimmtes Erfolgsmaß unterschreitenden Ausgabe des Audiosignals, bzw. eines Abschnitts des Audiosignals repräsentieren.For example, a learning of several specific voices and / or more specific physical impulses of one or more speakers is done. The training may preferably comprise determining the corresponding recognition features, for example the recognition patterns for the voices or the physical impulses, which allow a later differentiation of these voices or physical impulses from other voices or physical impulses, or those of another person. This is preferably carried out at several time intervals and for several persons. In this case, learning data can be generated which represent an association between one or more recognition patterns and a subsequent output of the audio signal, or a section of the audio signal, which exceeds a certain degree of success and / or falls below a certain measure of success.
Bei einer Wiedererkennung der bestimmten Stimme bzw. der entsprechender Muster, bzw. der Wiederkennungsmuster in einem oder mehreren späteren Zeitintervallen erfolgt die Anwendung einer entsprechend verbesserten, z.B. zu den Mustern oder zu den Stimmenparametern zugeordneter Anpassung des Audiosignals, insbesondere der Varianten zum Verändern der Parameter des Audiosignals. Dabei können die Eigenschaften die bestimmte Stimme des Sprechers und/oder Eigenschaften bezüglich Kommunikationsverhalten, Wahrnehmung, etc. für die bestimmte Person oder bestimmte Personengruppe berücksichtigt werden. Ein Sprecher kann auch mit anderen Mitteln als ein bestimmter Sprecher, als eine bestimmte Person oder Person zugehörig zu einer bestimmten Personengruppe erkannt werden und die ihm bzw. ihr zugeordneten oder im Verfahren gelernten Eigenschaften bei der Ausgabe eines Audiosignals berücksichtigt werden. Wenn dann (auch) die besagte körperliche Regung der Person z.B. als ein Muster einer körperlichen Regung erkannt wird, erfolgt ein für diesen Fall vorgesehenes, insbesondere verbessertes Bestimmen eines oder mehrerer Parameter einer auditiven Meldung.In a recognition of the particular voice or the corresponding pattern, or the recognition patterns in one or more later time intervals, the application of a correspondingly improved, for example, the patterns or the voice parameters associated adjustment of the audio signal, in particular the variants for changing the parameters of audio signal. The characteristics may be the particular voice of the speaker and / or characteristics relating to communication behavior, perception, etc. for the particular person or particular Person group are taken into account. A speaker may also be recognized by means other than a particular speaker, a particular person or person belonging to a particular group of persons, and the characteristics assigned to him or her or learned in the method may be taken into account in the output of an audio signal. If, then, the said bodily movement of the person is recognized as a pattern of a physical movement, for example, an especially improved determination of one or more parameters of an auditory message is provided.
Es kann die Logik und/oder Formel bzw. Zusammenhänge, nach welchen ein Bestimmen, bzw. Anpassen eines oder mehrerer Parameter ausgeführt wird, abhängig von einer wiederkannten körperlichen Regung angepasst werden. Für unterschiedliche Muster körperlicher Regungen, z.B. Mimik, Gestik, Lippenbewegung, eine bestimmte mit der Körpersprache kommunizierte Botschaft, können unterschiedliche Varianten des Bestimmens oder Anpassens der zumindest einen auditiven Meldung und/oder eines Abschnitts des weiteren Audiosignals vorgegeben bzw. eingelernt werden. Diese können dann bei einer Erkennung (Wiedererkennung) entsprechender Muster angewandt werden. Bevorzugt kann dabei eine vorgespeicherte, insbesondere der bestimmten körperlichen Regung zugeordnete oder eine im Zusammenhang mit der besagten körperlichen Regung in der Vergangenheit mit einem gewissen Erfolgsmaß ausgeführtes Erzeugen einer auditiven Meldung und/oder der Anpassung bzw. Ausgabe eines (in der Vergangenheit angepassten oder nicht angepassten) Abschnitts des Audiosignals ausgeführt werden.The logic and / or formula or contexts under which determining or adjusting one or more parameters may be adjusted depending on a recognized bodily sensation. For different patterns of bodily movements, e.g. Facial expressions, gestures, lip movement, a specific message communicated with the body language, different variants of determining or adapting the at least one auditory message and / or a section of the further audio signal can be predetermined or learned. These can then be used in recognition (recognition) of corresponding patterns. Preference is given to generating a pre-stored, in particular the specific physical impulse associated with or generated in connection with said physical impulse in the past with a certain degree of achievement generating an auditory message and / or the adjustment or output of a (in the past adjusted or not ) Section of the audio signal.
Ferner kann diese Variante des Verfahrens mit dem Erkennen bzw. Wiedererkennen der Person des Sprechers oder der Personengruppe, zu welcher der Sprecher zugeordnet ist, kombiniert werden. Mit anderen Worten kann dann eine bestimmte körperliche Regung einer bestimmten Person bzw. einer Person zugehörig zu einer Personengruppe erkannt werden. Daraufhin kann eine einer betreffenden Person bzw. eine Person zugehörig zu der Personengruppe zugeordnetes Bestimmen oder Anpassen des auszugebenden Audiosignals ausgeführt werden, wobei die Zuordnung, z.B. unter Berücksichtigung von Statistikdaten, Historiendaten, aggregierten Daten, bestimmt wird. Dabei können zumindest zwei oder drei unterschiedliche der besagten Zusammenhänge, z.B. für Kinder, Erwachsene, oder ältere Personen berücksichtigt werden.Furthermore, this variant of the method can be combined with recognizing or recognizing the person of the speaker or the group of persons to which the speaker is assigned. In other words, a specific physical impulse of a particular person or a person belonging to a group of persons can then be recognized. Thereupon, a determination or adaptation of the audio signal to be output associated with the person or a person belonging to the person group can be carried out, the assignment, e.g. taking into account statistical data, history data, aggregated data. At least two or three different ones of said relationships, e.g. be considered for children, adults, or the elderly.
Bevorzugt bezieht sich ein Einlernen auf das Ermitteln eines (naturwissenschaftlichen, mathematischen) Zusammenhangs zwischen einem Parameter einer oder mehreren körperlichen Regungen, die abhängig von bestimmten Mustern der Gestik und/oder Mimik und/oder Lippenbewegung und/oder Augenbewegung sind, und innerhalb eines gewissen Zeitintervalls stattfindenden (damit einhergehenden oder nachfolgenden) Kommunikation, insbesondere dem Sprechen einer Person. Dabei kann es sich beim Begriff „Sprechen“ um zumindest eine bestimmte (Kommunikations-) Transaktion oder eine Transaktion einer bestimmten Art innerhalb der besagten Kommunikation handeln.Preferably, training refers to determining a (scientific, mathematical) relationship between a parameter of one or more bodily movements that are dependent on particular patterns of gesture and / or facial expression and / or lip movement and / or eye movement, and within a certain time interval taking place (accompanying or subsequent) communication, in particular the speaking of a person. The term "speaking" can be at least one particular (communication) transaction or a transaction of a certain type within said communication.
Das besagte Einlernen bzw. Wiedererkennen kann im Verfahren in Bezug auf eine bestimmte Person oder in Bezug auf eine Person mit bestimmten, z.B. sensorisch erkennbaren Eigenschaften (Körpergröße, Kleidung, Bewegungsparameter, Personengruppe, etc.) oder in Bezug auf eine Person in einem bestimmten Raumbereich, z.B. an einem Sitzplatz im Wohnraum ausgeführt werden. Das Einlernen und/oder Wiedererkennen kann ferner umfassen: Erfassen eines Feedback-Indikators, der kennzeichnend ist für eine zumindest einmal erfolgtes, zweckmäßiges, passendes bzw. zufriedenstellendes Erzeugen oder Anpassen des Audiosignals, sowie Berücksichtigen des Feedback-Indikators bei einer wiederholten Ausführung des Verfahrens. Ein solcher Feedback-Indikator kann wiederum durch eine Eingabe eines Nutzers, etwa „like“ bzw. „not like“ oder bevorzugt durch ein Auswerten seiner auf die Ausgabe eines (angepassten, nicht angepassten, auf eine bestimmte Art und Weise angepassten) Audiosignals folgenden Reaktion ermittelt werden.Said teaching can be recognized in the method with respect to a particular person or with respect to a person having certain, e.g. sensory characteristics (height, clothing, movement parameters, group of people, etc.) or with respect to a person in a particular space, e.g. be performed on a seat in the living room. Teaching and / or recognizing may further comprise: detecting a feedback indicator indicative of at least one time, appropriately, satisfactorily generating or adjusting the audio signal, and considering the feedback indicator in a repetitive execution of the method. Such a feedback indicator may in turn be triggered by an input from a user, such as "like" or "preferably", or preferably by evaluating its response to the output of a (adjusted, unmatched, adjusted in a particular manner) audio signal be determined.
Besonders bevorzugt kann auch eine, einer besagten Kommunikation, insbesondere mit einem bestimmten Richtungsparameter und/oder einer bestimmten Stimmlage bzw. Sprachton oder einem bestimmten inhaltlichen Merkmal und/oder Kommunikationsverhalten vorausgehende körperliche Regung für eine (bestimmte) Person erkannt werden, und daraufhin ein (noch viel präziseres) Bestimmen der Parameter des auszugebenden Audiosignals erfolgen. Ferner kann eine solche Ausführung des Verfahrens als Mittel zur Erkennung bzw. Klassifizierung des Verhaltensmusters zumindest einer Person genutzt werden, wobei eine Information über ein ermitteltes Verhaltensmuster ausgegeben wird.Particularly preferably, a physical emotion preceding a said communication, in particular with a specific directional parameter and / or a specific voice or voice or a certain content-related feature and / or communication behavior, can also be recognized for a (specific) person, and then a (still much more precise) determining the parameters of the output audio signal. Furthermore, such an embodiment of the method can be used as means for recognizing or classifying the behavioral pattern of at least one person, whereby information about a determined behavioral pattern is output.
Bei einer im Verfahren erkannten Stimme einer bestimmten Person und/oder der Stimme zugehörig zu einer bestimmten Personengruppe kann es sich um eine eingelernte Stimme handeln. Eingelernte Stimmen können als ein oder mehrere, für die Stimme typische Parameterwerte repräsentiert werden. Auf Basis solcher Parameter können Erkennungsdaten für eine oder mehrere bestimmte Stimmen ermittelt bzw. im Verfahren verarbeitet bzw. berücksichtigt werden. Bevorzugt können Stimmen bestimmter im Wohnraum wohnender Personen im Verfahren eingelernt werden. Speziell auf die Erkennung einer oder mehrerer eingelernter Stimmen oder einer Kombination von Stimmen, wenn diese zu einer Kommunikation mit einer weiteren Person im Wohnraum eingesetzt werden, kann ein geeignetes, bzw. eine nach vorausbestimmten Kriterien gewählte Logik, Formel, oder eine bestimmte Auswahl der Parameter zum Erzeugen der zumindest einen auditiven Meldung ausgeführt werden.A voice of a particular person recognized in the procedure and / or the voice belonging to a particular group of persons may be a trained voice. Teach-in voices can be represented as one or more typical parameter values for the voice. On the basis of such parameters, identification data for one or more specific votes can be determined or processed in the method or taken into account. Preferably, voices of certain persons living in the living space can be trained in the procedure. Especially on the recognition of one or more learned voices or a Combining voices, when used to communicate with another person in the living space, may execute an appropriate or predetermined logic, formula, or selection of the parameters for generating the at least one auditory message.
Das Einlernen der Stimme (einer bestimmten Person) oder der Personengruppe kann wiederum mit Mitteln der in diesem Dokument beschriebenen Systems oder mit Hilfe eines weiteren Geräts, z.B. eines weiteren mobilen Anwendergeräts, erfolgen. Beispielsweise können die Erkennungsdaten für eine oder mehrere Stimmen auf Basis der Daten eines mobilen Anwendergeräts und/oder eines Fernmeldedienstes (z.B. beim Telefonieren) gewonnen werden und/oder aus einem zur Ausführung des Verfahrens eingerichteten mobilen Anwendergerät bereitgestellt werden. Besonders bevorzugt können für zumindest zwei unterschiedliche, z.B. wiedererkannte, Stimmen von zwei unterschiedlichen Personen oder Personen zugehörig zu zwei unterschiedlichen Personengruppen, unterschiedliche Parametersetze, Logik, Formel, Kennlinie, etc. beim Erzeugen einer auditiven Meldung und/oder Ausgabe des weiteren Audiosignals angewandt werden.The teaching of the voice (of a certain person) or of the group of persons may in turn be carried out by means of the system described in this document or by means of another device, e.g. another mobile user device, done. For example, the recognition data for one or more voices may be obtained based on the data of a mobile user equipment and / or a telecommunications service (e.g., telephoning) and / or provided from a mobile user equipment set up to perform the method. Particularly preferred may be for at least two different, e.g. Recognized, voices of two different persons or persons belonging to two different groups of people, different parameter networks, logic, formula, characteristic, etc. are applied when generating an auditory message and / or output of the further audio signal.
In einem Beispiel kann das auszugebende Audiosignals auf einen oder mehrere Parameter der Kommunikation einer bestimmten (erkannten, vermuteten, angenommenen) Person und/oder eine Person in einem bestimmten Bereich des Wohnraums und/oder auf eine bestimmte Stimme quantitativ (z.B. stärker oder schwächer) und/oder qualitativ (hinsichtlich anderer Parameter des Audiosignals) und/oder nach jeweils zweckmäßigen, bestimmten logischen Zusammenhängen angepasst werden. Beispielsweise kann ein Zeitparameter zur Ausgabe zumindest eines Abschnitts des Audiosignals und/oder der zumindest einen auditiven Meldung auf bestimmte Parameter bzw. Parameter der bestimmten Art der Kommunikation unterschiedlicher Personen unterschiedlich angepasst werden. Auch kann dabei für bestimmte Personen, Personengruppen oder Raumbereiche ein, im selben Zeitintervall auszugebender Multimediainhalt unterschiedlich angepasst werden. Bei bestimmten in der besagten Kommunikation erkannten Stimmen, Rufnamen, oder Richtungsparameter der Kommunikation kann z.B. zwischen unterschiedlichen Anpassungen eines weiteren Multimediainhalts entschieden werden, z.B. nicht verändern, Pausieren, Verändern eines ausgewählten Leistungsparameters, Verändern eines Raumklangparameters, etc.In one example, the audio signal to be output may be related to one or more parameters of communication of a particular (recognized, presumed, assumed) person and / or a person in a particular area of the living space and / or to a particular voice quantitatively (eg, stronger or weaker) and / or qualitatively (with respect to other parameters of the audio signal) and / or according to appropriate, specific logical relationships. For example, a time parameter for outputting at least a portion of the audio signal and / or the at least one auditory message can be adapted differently to specific parameters or parameters of the particular type of communication of different persons. Also, for certain persons, groups of people or areas of space, a multimedia content to be output in the same time interval can be adapted differently. For certain voices, nicknames, or directional parameters of the communication recognized in said communication, e.g. between different adjustments of another multimedia content, e.g. not changing, pausing, changing a selected performance parameter, changing a surround sound parameter, etc.
Gemäß einer zweckmäßigen Ausgestaltung erfolgt ein Einlernen bestimmter Schlüsselwörter, Wortsequenzen und/oder mimischer Muster zumindest einer (bestimmten) Person im stationären Wohnraum. Schlüsselwörter können Wörter aus einer bestimmten Liste sein, z.B. Hauptwörter, Adjektive, bestimmte Interjektionen, etc.. Dabei können entsprechende Lerndaten erzeugt werden. Es können Lerndaten auf Basis mehrerer Abschnitte der Kommunikation mit Beteiligung einer bestimmten Person, einer Kommunikation zwischen zwei bestimmten Personen oder einer Kommunikation zwischen den Personen zugehörig zu bestimmten Personengruppen im Verfahren ermittelt und/oder berücksichtigt werden. Auch können Lerndaten auf Basis einer Vielzahl der Kommunikationen zwischen zumindest je zwei Personen aus unterschiedlichen Wohnräumen bzw. Häusern abgeglichen werden, und daraus zweckmäßig aggregierte Lerndaten erzeugt werden. Ein Abgleichen bzw. eine Aggregation entsprechender Daten kann in einer beabstandet angeordneten Recheneinheit, z.B. in einem Server erfolgen. Die resultierenden abgeglichenen bzw. aggregierten Lerndaten können dann für eine weitere Ausführung des Verfahrens bereitgestellt werden. Beispielsweise kann ein Erkennen einer Kommunikationsbereitschaft, ein Bestimmen eines Prioritätsmaßes eines Abschnitts der Kommunikation (einer Transaktion oder einer Kommunikationsbotschaft) oder eine Assoziation einer sprachlichen Botschaft mit einem bestimmten Event (Ereignis), abhängig von den in einem Wohnraum erzeugten und/oder bereitgestellten Lerndaten, insbesondere unter Berücksichtigung einer aktuell ermittelten Szene im Wohnraum, erfolgen.According to an expedient refinement, certain key words, word sequences and / or mimic patterns of at least one (specific) person are taught in the stationary living space. Keywords can be words from a particular list, e.g. Nouns, adjectives, certain interjections, etc .. In this case, corresponding learning data can be generated. Learning data based on several sections of the communication involving a particular person, communication between two specific persons or communication between the persons belonging to specific groups of persons may be determined and / or taken into account in the method. Also, learning data based on a plurality of communications between at least two people each from different homes or houses can be matched and useful aggregated learning data generated therefrom. Matching or aggregation of corresponding data may be performed in a spaced apart arithmetic unit, e.g. done in a server. The resulting matched learning data may then be provided for a further implementation of the method. For example, recognition of a willingness to communicate, determination of a priority measure of a section of the communication (a transaction or a communication message) or an association of a linguistic message with a specific event (event), in particular depending on the learning data generated and / or provided in a living space taking into account a currently determined scene in the living room, done.
Insbesondere umfasst das Verfahren einen Abgleich zwischen einer in der Vergangenheit erfassten körperlichen Regung, z.B. einer bestimmten Mimik, Gestik, Lippenbewegungen und diversen Parameter einer daraufhin folgenden Kommunikation, z.B. der daraufhin benutzter Worte, Wortsequenzen, linguistischen Strukturen, Transaktionen bestimmter Arten, Stimmenparameter, etc. Dabei kann auch ein Parameter der besagten Kommunikation auf Basis des Abgleichs ermittelt bzw. prädiziert und verarbeitet werden.In particular, the method comprises a comparison between a physical sensation detected in the past, e.g. certain facial expressions, gestures, lip movements and various parameters of subsequent communication, e.g. the subsequently used words, word sequences, linguistic structures, transactions of certain types, voice parameters, etc. In this case, a parameter of the said communication can also be determined or predicated and processed on the basis of the comparison.
Bevorzugt können im Verfahren ein oder mehrere Parameter aus der Vergangenheit berücksichtigt werden, die eine kausale Abhängigkeit und/oder ein Zeitintervall zwischen einer bestimmten körperlichen Regung, z.B. Mustern der körperlichen Regung und Parametern einer zeitgleich, innerhalb eines gewissen Zeitintervalls oder daraufhin stattfindenden, sprachlichen Kommunikation, z.B. des inhaltliches Merkmal der Kommunikation, benutzter Worte, Wortsequenzen, linguistischen Strukturen, Transaktionen bestimmter Arten Ton, Unterton, Stimme, Kommunikationsverhalten, etc.) kennzeichnen. Ein solcher Abgleich kann im Verfahren personenspezifisch abhängig von der besagten Kommunikation zwischen zumindest zwei Personen im Wohnraum ermittelt und/oder beim Erzeugen zumindest einer auditiven Meldung und/oder beim Anpassen zumindest eines Abschnitts des weiteren Audiosignals berücksichtigt werden. Beispielsweise kann sich der Abgleich oder können sich aus dem Abgleich ermittelte Daten (qualitative und/oder quantitative Werte oder Zusammenhänge zwischen den Parametern) auf bestimmte Personen oder Personen zugehörig zu bestimmten Personengruppen beziehen. Daraufhin können sich beim Abgleich ermittelte Daten bei einer späteren Ausführung des Verfahrens, insbesondere abhängig von der Erkennung der Person bzw. Person aus der bestimmten Personengruppe, berücksichtigt werden.Preferably, one or more parameters from the past may be taken into account in the method, which may be a causal dependence and / or a time interval between a certain physical impulse, eg physical impulse patterns and parameters of a simultaneous, within a certain time interval or subsequently occurring linguistic communication, eg the content of communication, used words, word sequences, linguistic structures, transactions of certain types of sound, undertone, voice, communication behavior, etc.). Such a comparison can be determined person-specific depending on the said communication between at least two people in the living room and / or when generating at least one auditory message and / or adjusting at least a portion of the further audio signal be taken into account. For example, the reconciliation or data obtained from the reconciliation (qualitative and / or quantitative values or relationships between the parameters) may relate to particular persons or persons belonging to particular groups of persons. Thereupon, data determined during the comparison can be taken into account in a later execution of the method, in particular depending on the recognition of the person or person from the particular group of persons.
Insbesondere kann im Verfahren auch das Einlernen von Stimmen und/oder körperlichen Regungen mit oder ohne Berücksichtigung einer erkannten Szene, insbesondere der zumindest einen bestimmten Klasse der Szene (Bildszene), ausgeführt und berücksichtigt werden. Ein solches Einlernen kann sich auf Merkmale beziehen die für bestimmte Personen bzw. Personen zugehörig zu bestimmten Personengruppen charakteristisch, z.B. statistisch typisch sind.In particular, in the method, the training of voices and / or physical impulses with or without consideration of a recognized scene, in particular the at least one particular class of the scene (image scene), executed and taken into account. Such training can refer to characteristics that are characteristic of certain persons or persons belonging to particular groups of persons, e.g. are statistically typical.
Gemäß einer zweckmäßigen Ausgestaltung wird eine aktuelle, insbesondere die besagte Kommunikation begleitende oder der Kommunikation vorausgehende, Szene im stationären Wohnraum erfasst und im Verfahren berücksichtigt. Insbesondere handelt es sich um eine im Zusammenhang mit zumindest einer an der Kommunikation beteiligten Person stehende Szene. Es kann ein Parameter der Szene, insbesondere eine erkannte Klasse (Kategorie) der Szene zusammen oder alternativ zu einem ermittelten Parameter einer auditiven Kommunikation im Verfahren berücksichtigt werden. Eine Information zu der erfassten, insbesondere erkannten Szene kann im Verfahren zusammen bzw. auf dieselbe Weise wie ein Parameter einer auditiven Kommunikation verarbeitet werden. Dabei kann eine bildgestützte Klassifikation und Mustererkennung in Bildern oder Bildfolgen in Bezug auf die im Wohnraum erfassten (im Zusammenhang mit zumindest einem Abschnitt der besagten Kommunikation stehender) Bilder oder Bildfolgen ausgeführt werden. According to an expedient embodiment, a current scene, which in particular accompanies said communication or precedes the communication, is recorded in the stationary living space and taken into account in the method. In particular, it is a scene associated with at least one person involved in the communication. A parameter of the scene, in particular a recognized class (category) of the scene together or alternatively to a determined parameter of an auditory communication in the method can be taken into account. Information about the detected, in particular recognized, scene can be processed in the method in the same way as a parameter of an auditory communication. In this case, an image-based classification and pattern recognition can be carried out in images or image sequences with respect to the images or image sequences recorded in the living space (standing in connection with at least a portion of the said communication).
Beispielsweise kann abhängig von einem Parameter der Szene eine Parameter einer weiteren Kommunikation und/oder ein Parameter einer darauffolgenden Kommunikation (zumindest mit einem gewissen Wahrscheinlichkeitsmaß) prädiziert werden.For example, depending on a parameter of the scene, a parameter of a further communication and / or a parameter of a subsequent communication can be predicted (at least with a certain degree of probability).
Bevorzugt wird ein Parameter der erfassten Szene zu zumindest einem weiteren Parameter der besagten Kommunikation zugeordnet und im Verfahren verarbeitet. Insbesondere umfasst die Szene eine Anordnung von zumindest zwei besagten, an der Kommunikation beteiligten, bzw. von der Kommunikation (in einer störender Weise) betroffenen Personen im Wohnraum, insbesondere eine relative Position, Ausrichtung, Posen, etc.. Bevorzugt umfasst eine Szene zumindest einen Parameter kennzeichnend eine körperliche Ausrichtung von zumindest zwei Personen in Bezug zueinander, insbesondere eine relative Ausrichtung und/oder eine Aktion von zumindest einer Person in Bezug auf eine weitere Person. Eine Aktion kann als eine Veränderung bzw. eine Dynamik bzw. eine Sequenz der Veränderung der Szene ebenfalls ausgewertet und im Verfahren berücksichtigt werden. Die Veränderung der Szene bzw. Aktion innerhalb der Szene kann mit Mittel der Bildverarbeitung, Objekterkennung und Dergleichen, erfasst werden. Bevorzugt erfolgt im Verfahren eine Klassifikation und/oder Einlernen der Szenen, insbesondere der typischen, in einem Wohnraum, oder in dem bestimmten Wohnraum häufig vorkommenden Szenen. Ein ermittelter Parameter kann eine von zumindest einer Person aktuell ausgeführte oder prädizierte Aktion kennzeichnen. Beispielsweise können bestimmte häufig ausgeführte Aktionen, oder Aktionen, die anhand vorausbestimmter Merkmale zu bestimmten Muster passen als solche erkannt bzw. wiedererkannt und berücksichtigt werden.Preferably, a parameter of the detected scene is assigned to at least one further parameter of said communication and processed in the method. In particular, the scene comprises an arrangement of at least two said persons involved in the communication or those affected by the communication (in a disturbing manner) in the living space, in particular a relative position, orientation, poses, etc. Preferably, a scene comprises at least one Parameter characterizing a physical orientation of at least two persons in relation to each other, in particular a relative orientation and / or an action of at least one person with respect to another person. An action can also be evaluated as a change or a dynamic or a sequence of the change of scene and taken into account in the process. The change of the scene within the scene can be detected by means of image processing, object recognition and the like. Preferably, in the method, a classification and / or learning of the scenes, in particular the typical, in a living room, or in the particular living space frequently occurring scenes. A determined parameter may identify an action currently being performed or predicated by at least one person. For example, certain frequently-performed actions, or actions that match predefined features to particular patterns, may be recognized as such, or recognized and taken into account.
Bevorzugt erfolgt eine Auswertung des zumindest eines Parameters der besagten Kommunikation und/oder das Anpassen eines oder mehrerer Parameter des auszugebenden Audiosignals abhängig von einer erkannten Szene, beispielsweise von einer erkannten Klasse der Szene oder von einem quantitativen Parameter der Szene. Dabei wird der Tatsache Rechnung getragen, dass in einer natürlichen, nicht gesondert genormten Kommunikation zwischen den Menschen dieselben Worte oder Kommunikationslaute je nach einer gegenseitigen Anordnung der Personen bzw. der Szene, einer aktuell ausgeführten Aktion, oder der Aktion innerhalb der Szene unterschiedliche Bedeutungen haben kann. Mit der Berücksichtigung der Szene kann im Verfahren eine höhere Performance erzielt werden. Beispielsweise kann ein Kommunikationsvorhabens der Person und/oder Prädiktion eines Parameters einer erwarteten Kommunikation oder eine Auswertung bzw. Interpretation zumindest eines inhaltlichen Merkmals eines Abschnitts der Kommunikation abhängig von der erfassten Szene, beispielsweise von einer erkannten Klasse (Kategorie) der Szene erfolgen.An evaluation of the at least one parameter of said communication and / or the adaptation of one or more parameters of the audio signal to be output depends on a detected scene, for example on a recognized class of the scene or on a quantitative parameter of the scene. It takes into account the fact that in a natural, not separately standardized communication between people the same words or communication sounds may have different meanings depending on a mutual arrangement of the persons or the scene, a currently performed action, or the action within the scene , With the consideration of the scene, a higher performance can be achieved in the process. For example, a communication project of the person and / or prediction of a parameter of an expected communication or an evaluation or interpretation of at least one content feature of a portion of the communication depending on the detected scene, for example, from a recognized class (category) of the scene.
Beispielsweise erfolgt abhängig von zumindest einer erfassten Szene und/oder einem ermittelten Zeitparameter zur Ausgabe zumindest eines Abschnitts des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung eine Auswahl, Auslesen oder Ausgeben eines oder mehrerer zugrundeliegenden Daten zum Erzeugen des Audiosignals bzw. der zumindest einen auditiven Meldung. Auch können aus zwei oder mehreren auszugebenden Audiosignalen (oder zugrundeliegenden auszugebenden Inhalten) zumindest eines Audiosignals oder eine bestimmte Auswahl, Reihenfolge, Sequenz, von Abschnitten ausgewählt werden. Diese können zum jeweils bestimmten Zeitintervall ausgegeben werden. Auch können zumindest Abschnitte eines oder mehreren auszugebenden Audiosignale ausgewählt werden, die zumindest zeitlich überschneidend und/oder in unterschiedlichen Raumbereichen ausgegeben werden sollen. Beispielsweise können auditive Meldungen mit bestimmten Merkmalen, z.B. Inhalten, Themen abhängig von einem Parameter der besagten Kommunikation oder der Szene bevorzugt oder vermieden werden.For example, depending on at least one detected scene and / or a determined time parameter for outputting at least a portion of the audio signal to be output and / or the at least one auditory message, a selection, readout or output of one or more underlying data for generating the audio signal or the at least one auditory message. Also, two or more audio signals to be output (or underlying contents to be output) of at least one audio signal or a particular selection, order, sequence, portions may be selected. These can be output at the respective time interval. Also, at least portions of one or more audio signals to be output can be selected, which are to be output at least temporally overlapping and / or in different spatial areas. For example, auditory messages with certain features, eg, contents, topics may be preferred or avoided depending on a parameter of said communication or scene.
Bevorzugt wird abhängig von der zumindest einen erkannten Szene, einer aktuellen Aktion zumindest einer Person und zumindest einem inhaltlichen Merkmal der besagten Kommunikation ein passendes stilistisches und/oder thematisches oder eine Ausgabesprache, z.B. Sprachkanal, betreffendes Merkmal ermittelt, nach welchem zumindest ein auszugebendes Audiosignal, ein oder mehrere Abschnitte eines oder mehrerer auszugebender Audiosignale ausgewählt, vermieden, unterdrückt, zeitlich verschoben oder vorgezogen werden. Auch kann ein Zeitparameter zur Ausgabe zumindest einer auditiven Meldung abhängig von den Parametern eines oder mehrerer auszugebenden Audiosignale bestimmt werden. Ein solcher Zeitparameter der auditiven Meldung und/oder des Abschnitts des weiteren Audiosignals bestimmt beispielsweise zumindest eine passende Abspieldauer und/oder einen Ausgabezeitpunkt oder einen Zeitpunkt bis zu dem die Ausgabe abgeschlossen werden soll. Beispielsweise kann für einen ermittelten Zeitparameter eine auditive Meldung (von mehreren auszugebenden auditiven Meldungen oder Varianten einer auditiven Meldung) zu Ausgabe ausgewählt oder generiert werden.Preferably, depending on the at least one recognized scene, a current action of at least one person and at least one content characteristic of said communication, a suitable stylistic and / or thematic or an output language, e.g. Speech channel, relevant feature determined, according to which at least one output audio signal, one or more sections of one or more output audio signals selected, avoided, suppressed, time-shifted or brought forward. Also, a time parameter for outputting at least one auditory message can be determined depending on the parameters of one or more audio signals to be output. Such a time parameter of the auditory message and / or of the section of the further audio signal determines, for example, at least one suitable playback time and / or one output time or a point in time until which the output is to be completed. For example, for a determined time parameter, an auditory message (from several auditory messages to be output or variants of an auditory message) can be selected or generated for output.
Alternativ oder zusätzlich kann auch ein Parameter des auszugebenden Audiosignals, ein passendes stilistisches und/oder thematisches Merkmal zu einem auszuwählenden Audiosignals, einer abzuspielenden Multimediasequenz abhängig von einer erkannten Szene, einer aktuellen Aktion zumindest einer Person und zumindest einem inhaltlichen Merkmal der besagten Kommunikation bestimmt oder angepasst werden.Alternatively or additionally, a parameter of the audio signal to be output, a suitable stylistic and / or thematic feature for an audio signal to be selected, a multimedia sequence to be played depending on a detected scene, a current action of at least one person and at least one content-related feature of said communication determined or adjusted become.
Ferner kann ein Zeitparameter zur Ausgabe zumindest eines Abschnitts des auszugebenden Audiosignals ermittelt werden. Ein solcher Zeitparameter bestimmt beispielsweise zumindest eine passende Abspieldauer und/oder einen Ausgabezeitpunkt oder einen Zeitpunkt bis zu dem die Ausgabe abgeschlossen werden soll. Daraufhin kann ein auszugebender Multimediainhalt oder ein Abschnitt eines Multimediainhalts, insbesondere unter Berücksichtigung zumindest eines prädizierten Parameters der besagten Kommunikation und/oder der zumindest einer (auszugebenden, geplanten, wahrscheinlich kommenden) auditiven Meldung ausgewählt werden. Dabei kann eine Anfrage ins Internet, z.B. zu einem Portal oder Plattform mit Multimediainhalten versendet werden. Daraufhin wird ein oder mehrere Multimediainhalte, beispielsweise umfassend wahlweise nur ein Audiosignal, oder ein Audiosignal und ein Videosignal bereitgestellt, was wiederum abhängig von den besagten Parametern entschieden werden kann.Furthermore, a time parameter for outputting at least a portion of the audio signal to be output can be determined. Such a time parameter determines, for example, at least a suitable playback time and / or an output time or a time until the output is to be completed. Thereupon, a multimedia content or a section of a multimedia content to be output can be selected, in particular taking into account at least one predicated parameter of said communication and / or the at least one audible message (to be issued, planned, probably coming). In doing so, a request to the Internet, e.g. be sent to a portal or platform with multimedia content. Thereupon, one or more multimedia contents, for example optionally comprising only one audio signal, or an audio signal and a video signal are provided, which in turn can be decided depending on the said parameters.
Dabei kann ein in Bezug auf die Art, Thema, Genre, Lauflänge, etc. passender Multimediainhalt, beispielsweise von einem Datenträger oder aus einem Internetportal ausgelesen und im Wohnraum ausgegeben werden. Solche Multimediainhalte können bevorzugt abhängig von einer sie kennzeichnenden Lauflänge und/ oder abhängig dem besagten ermittelten Zeitparameter und/oder Genre, der zu einer ermittelten Szene, Kombination der Parameter der besagten Kommunikation nach vorausbestimmten Kriterien assoziiert oder zugeordnet wird, ausgewählt werden. Ein solcher Zeitparameter bestimmt beispielsweise zumindest eine passende Abspieldauer und/oder einen Ausgabezeitpunkt oder einen Zeitpunkt bis zu dem die Ausgabe abgeschlossen werden soll. Daraufhin kann ein abzuspielender Multimediainhalt oder ein Abschnitt eines Multimediainhalts ausgewählt werden.In this case, in relation to the type, theme, genre, run length, etc. suitable multimedia content, for example, read from a disk or an Internet portal and output in the living room. Such multimedia content may preferably be selected depending on a runlength characterizing it and / or depending on said determined time parameter and / or genre associated with or assigned to a detected scene, combination of the parameters of said communication according to predetermined criteria. Such a time parameter determines, for example, at least a suitable playback time and / or an output time or a time until the output is to be completed. Thereupon a multimedia content to be played or a section of a multimedia content can be selected.
Bevorzugt wird abhängig von einer erkannten Szene, einer aktuellen Aktion zumindest einer Person und/oder zumindest einem Parameter der besagten Kommunikation, insbesondere kennzeichnend ein inhaltliches Merkmal der eines oder mehrerer Abschnitte der Kommunikation ein passendes stilistisches und/oder thematisches Merkmal eines auszugebenden bzw. auszuwählenden Audiosignals, z.B. einer abzuspielenden Multimediasequenz, bestimmt. Ferner kann ein Zeitparameter zur Ausgabe eines oder mehrerer bestimmten Abschnitte eines oder mehreren auszugebenden Audiosignale ermittelt werden. Ein oder mehrere solche Zeitparameter bestimmen beispielsweise zumindest eine passende (in diesem Falle insbesondere auch eine gewünschte) Abspieldauer und/oder einen Ausgabezeitpunkt oder einen Zeitpunkt bis zu dem die Ausgabe abgeschlossen werden soll. Daraufhin kann ein abzuspielender, beispielsweise zweckmäßig passender, Multimediainhalt oder ein Abschnitt eines Multimediainhalts ausgewählt werden.Depending on a detected scene, a current action of at least one person and / or at least one parameter of said communication, in particular a content-related feature of one or more sections of the communication, a suitable stylistic and / or thematic feature of an audio signal to be output or selected is preferred , eg of a multimedia sequence to be played. Furthermore, a time parameter for outputting one or more specific sections of one or more audio signals to be output can be determined. One or more such time parameters determine, for example, at least one suitable (in this case in particular also a desired) playback time and / or an output time or a time until which the output should be completed. Thereupon, a multimedia content or a section of a multimedia content to be played back, for example appropriately matching, can be selected.
Dabei kann auf dieser Basis eine Anfrage ins Netzwerk bzw. Internet, z.B. zu einem Portal oder Plattform mit Multimediainhalten versendet werden. Beispielsweise kann eine Anfrage generiert werden abhängig von einem Parameter der Szene im Wohnraum, einer aktuellen Beschäftigung einer oder mehrerer Personen und/oder zumindest einem Parameter, insbesondere einem inhaltlichen Merkmal der besagten Kommunikation. Daraufhin können ein oder mehrere Multimediainhalte, beispielsweise umfassend wahlweise nur ein Audiosignal, oder ein Audiosignal und ein Videosignal bereitgestellt. Dabei kann die Entscheidung darüber ob ein Multimediainhalt vorwiegend mit Audiosignalen oder vorwiegend ohne Audiosignale ausgewählt wird, abhängig von dem zumindest einem Parameter der besagten Kommunikation oder der zumindest einen (auszugebenden) auditiven Meldung getroffen werden.On this basis, a request can be sent to the network or Internet, for example to a portal or platform with multimedia content. For example, a request may be generated depending on a parameter of the scene in the living space, a current employment of one or more persons and / or at least one parameter, in particular a content-related feature of said communication. Thereupon, one or more multimedia contents, for example comprising optionally only one audio signal, or one audio signal and one video signal, may be provided. there For example, the decision as to whether a multimedia content is selected predominantly with audio signals or predominantly without audio signals may be made depending on the at least one parameter of said communication or the at least one auditory message (to be output).
Im Verfahren kann die Position zumindest eines des Sprechers oder eines Raumteils in dem sich ein Sprecher befindet ermittelt, insbesondere mit einem Wahrscheinlichkeitsmaß vorausgesagt werden, durch einen Abgleich zwischen den Signalen von zumindest zwei Mikrophonen im Wohnraum oder mit einem Sensor, der die Erfassung akustischer Signale mit einem auf Ultraschall oder Radar basierenden Prinzip kombiniert. Auch kann eine Erkennung eines Aufenthaltsortes einer Person im Wohnraum, beispielsweise mit einer Kamera, Brandschutzsensor, Bewegungsmelder erfolgen. Beispielsweise kann zumindest die Position des Sprechers aus einer Phasenverschiebung eines akustischen Signals ermittelt werden, der z.B. von zwei räumlich versetzten Mikrophonen erfasst wird. Die Position zumindest einer der besagten an der Kommunikation beteiligten Personen kann auch unter Berücksichtigung, insbesondere Abgleich mit den Daten aus der Vergangenheit erfolgen.In the method, the position of at least one of the speaker or a part of space in which a speaker is located can be predicted, in particular with a probability measure, by a comparison between the signals of at least two microphones in the living space or with a sensor that detects the detection of acoustic signals combined with an ultrasound or radar based principle. Also, a recognition of a location of a person in the living room, for example, with a camera, fire protection sensor, motion detectors. For example, at least the position of the speaker can be determined from a phase shift of an acoustic signal, e.g. is detected by two spatially displaced microphones. The position of at least one of the said persons involved in the communication can also take place with consideration, in particular comparison with the data from the past.
Beispielsweise kann ein Raumklangparameter eines auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung derart, abhängig von einer (für ein bestimmtes Zeitintervall) ermittelten Szene und/oder Verteilung der Personen bzw. Personen zugehörig zu bestimmten Personengruppen auf die Raumbereiche und/oder Sitzplätze innerhalb des Wohnraums und/oder der Kopfposition einer oder mehreren Personen, bestimmt oder angepasst werden, dass ein kumulierter Wert für zumindest zwei Personen der kennzeichnend ist für die Güte der Wahrnehmbarkeit und/oder Verständlichkeit zumindest eines Abschnitts des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung, und/oder zumindest eines Abschnitts der besagten Kommunikation, erhöht bzw. zu einem Zielwert hin verändert, z.B. gesteuert wird. Dabei kann der ein oder mehrere Raumklangparameter verändert werden abhängig davon, wie viele Personen sich im Wohnraum befinden, in welchen bestimmten Raumbereichen sich diese befinden und/oder auf welchen Sitzplätzen diese sitzen und/oder ob und wie sich zumindest eine Person bewegt, und/oder von der erkannten Aktion zumindest einer Person in Bezug auf eine weitere Person, und/oder abhängig davon, wie viele oder welche der Person sich an der besagten Kommunikation beteiligen.For example, a surround sound parameter of an audio signal to be outputted and / or the at least one auditory message may depend on a scene (determined for a specific time interval) and / or distribution of the persons or persons belonging to particular groups of persons to the spatial areas and / or seats within the Housing and / or the head position of one or more persons, be determined or adapted that a cumulative value for at least two persons is indicative of the quality of the visibility and / or intelligibility of at least a portion of the output audio signal and / or the at least one auditory message , and / or at least a portion of said communication, increased or changed to a target value, eg is controlled. In this case, the one or more surround sound parameters can be changed depending on how many people are in the living room, in which specific room areas they are and / or sitting on these seats and / or if and how at least one person moves, and / or of the recognized action of at least one person with respect to another person, and / or depending on how many or which of the person participate in said communication.
In einem weiteren Beispiel kann der Raumklangparameter derart abhängig von der Position der zumindest einer Person gesteuert werden, dass bei einer Bewegung der besagten Person innerhalb des Wohnraums eine Ausgabe des für sie bestimmten bzw. ihr zugeordneten auszugebenen Audiosignals und/oder der zumindest einer auditiven Meldung abhängig oder sinngemäß entsprechend zu der Bewegung und/oder räumlichen Ausrichtung der Person verändert wird und/oder ein oder mehrere Parameter der Schallwellen oder Schallwellenmuster, die auf Basis des Abschnitts des auszugebenden Audiosignals und/oder der auditiven Meldung für die besagte Person (für zumindest eine neue Position und/oder Ausrichtung der Person) erzeugt bzw. wahrnehmbar gemacht werden, von der zumindest einen früheren (bisherigen) Parameter bzw. der Wahrnehmbarkeit der Schallwellen auf Basis des Audiosignals in einem bisherigen Raumbereich gesteuert werden und/oder im Wesentlichen aufrechterhalten werden.In a further example, the surround sound parameter may be controlled depending on the position of the at least one person that upon movement of said person within the living space, an output of the dedicated audio signal and / or the at least one auditory message is determined or mutatis mutandis according to the movement and / or spatial orientation of the person is changed and / or one or more parameters of the sound waves or sound wave patterns, based on the portion of the output audio signal and / or the auditory message for said person (for at least one new Position and / or orientation of the person) are made or made perceptible, are controlled by the at least one previous (previous) parameter or the perceptibility of the sound waves based on the audio signal in a previous spatial area and / or maintained substantially.
Bevorzugt werden für zumindest zwei Personen, zumindest zwei, insbesondere zu den besagten Personen zugeordneten Ausgaben des jeweils zumindest eines Audioinhalts, insbesondere der insgesamt zumindest zwei Abschnitten eines oder mehrerer auszugebenden Audiosignale, oder einer auditiven Meldung und eines auszugebenden Audiosignals, abhängig von der Bewegung der Personen derart gesteuert, dass ein Maß der Wahrnehmbarkeit durch die eine oder zwei Personen erhöht wird und/oder ein Maß einer gegenseitigen Störung der zumindest zwei auditiver Inhalte verringert wird. Beispielsweise können die der zumindest einer, zwei oder mehreren Personen zugeordneten (für sie bestimmte und/oder die von ihnen bisher gehörten) auditiven Inhalte bei einer Veränderung ihrer (jeweiligen) Position, Ausrichtung, Kopfrichtung derart gesteuert werden, dass eine (unerwünschte) Veränderung der Wahrnehmbarkeit bzw. Verständlichkeit vermieden wird. Auch können akustische Inhalte (mittels der Steuerung, insbesondere Regelung der entsprechenden Ausgabe bzw. der den Inhalten korrespondierender Schallwellen bzw. Schallwellenmuster der zumindest einen der besagten Personen (räumlich) nachgeführt werden.Preference is given for at least two persons, at least two, in particular to the said persons associated outputs of each at least one audio content, in particular the total of at least two sections of one or more output audio signals, or an auditory message and an output audio signal, depending on the movement of persons controlled such that a measure of perceptibility by the one or two persons is increased and / or a degree of mutual interference of the at least two auditory contents is reduced. For example, the auditory contents assigned to the at least one, two or more persons (intended for them and / or those they have hitherto heard) can be controlled in such a way that their (respective) position, orientation, head direction change (undesired) Perceptibility or intelligibility is avoided. Also, acoustic contents (by means of the control, in particular regulation of the corresponding output or of the contents of corresponding sound waves or sound wave patterns of the at least one of said persons (spatially) can be tracked.
Auch kann zumindest ein auditiver Inhalt, insbesondere auf eine Bedienhandlung oder eine sonstige Willensäußerung, z.B. eine vorausbestimmte Geste der Person, zu einer Person zugeordnet werden, wobei daraufhin die Parameter des zumindest einen zugeordneten auditiven Inhalts, und insbesondere zumindest eines zweiten zu einer anderen Person zugeordneten auditiven Inhalts gesteuert werden. Dabei kann zumindest eine Person einen gewählten (ihren) auditiven Inhalt, beispielsweise von einem ersten Raumbereich in einen zweiten Raumbereich sozusagen „mitnehmen“. Dabei kann auch ein zweiter, insbesondere zu einer zweiten Person zugeordneter auditiver Inhalt entsprechend zumindest einem Optimierungskriterium gesteuert werden. Beispielsweise können die Parameter der im Wohnraum zu erzeugten Schallwellen bzw. Schallwellenmuster zu zumindest zwei auditiven Inhalten derart gesteuert, insbesondere geregelt werden, dass ein raumbereichsspezifisches Übersprechen zwischen den zumindest zwei akustischen Inhalten verringert wird, eine unerwünschte Wechselwirkung oder eine psychoakustische Maskierung reduziert wird, eine gegenseitige räumliche Trennung der auditiven Inhalte erhöht wird oder eine (kumulierte) Wahrnehmbarkeit der zumindest zwei auditiven Inhalte erhöht wird.Also, at least one auditory content, in particular an operator action or another will, eg a predefined gesture of the person, can be assigned to a person, the parameters of the at least one associated auditory content, and in particular at least one second, assigned to another person auditory content. In this case, at least one person can "take away" a chosen auditory content, for example from a first spatial region into a second spatial region. In this case, it is also possible to control a second auditory content assigned in particular to a second person in accordance with at least one optimization criterion. For example, the parameters of the sound waves generated in the living space or Sound wave pattern to at least two auditory content so controlled, in particular regulated, that a space area specific crosstalk between the at least two acoustic content is reduced, an undesirable interaction or psychoacoustic masking is reduced, a mutual spatial separation of the auditory content is increased or a (cumulative) Perceptibility of at least two auditory content is increased.
Beispielsweise kann auf das Sprechen oder Kommunikationsvorhaben des zumindest einer ersten Person, je nachdem, an welcher Position sich diese innerhalb des Wohnraums befindet, z.B. in welchem Teil des Wohnraumes sich diese aufhält und/oder in welche Richtung die erste Person kommuniziert und/oder in welche Richtung sich zumindest eine Person bewegt, das auszugebende Audiosignal anders, insbesondere stärker, angepasst werden als auf das Sprechen und/oder Kommunikationsvorhaben einer weiteren, zweiten Person im Wohnraum, die sich in an einer anderen Position innerhalb des Wohnraumes befindet.For example, the speech or communication project of the at least one first person, depending on which position is within the living space, e.g. in which part of the living space it is located and / or in which direction the first person communicates and / or in which direction at least one person moves, the audio signal to be output is adapted differently, in particular more strongly, than to the speaking and / or communication project of another , second person in the living room, who is in a different position within the living space.
Gemäß einer zweckmäßigen Ausgestaltung wird eine Emotion, insbesondere zumindest eine Klasse der Emotion, und/oder eine Absicht, insbesondere zumindest eine Klasse der Absicht zumindest einer Person im stationären Wohnraum ermittelt bzw. nach vorausbestimmten Kriterien geschätzt und berücksichtigt. Daraufhin kann zumindest ein oder mehrere Parameter des im stationären Wohnraum auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung, abhängig von einer erkannten Emotion bzw. Absicht der zumindest einen Person, insbesondere von der jeweils erkannten Klasse der Emotion bzw. der Absicht und/oder von einem qualitativen oder quantitativen Parameter der Emotion bzw. Absicht der zumindest einen Person, bestimmt oder angepasst werden. Besonders bevorzugt handelt es sich um eine Emotion bzw. Absicht, die sich im Zusammenhang mit der besagten Kommunikation zwischen zumindest zwei Personen im stationären Wohnraum einstellt bzw. gilt.According to an expedient embodiment, an emotion, in particular at least one class of the emotion, and / or an intention, in particular at least one class of the intention of at least one person in the inpatient housing is determined or estimated according to predetermined criteria and considered. Thereupon, at least one or more parameters of the audio signal to be output in the stationary living room and / or the at least one auditory message, depending on a detected emotion or intention of the at least one person, in particular of the respectively recognized class of the emotion or the intention and / or of a qualitative or quantitative parameter of the emotion or intention of the at least one person, determined or adapted. Particularly preferably, it is an emotion or intention that arises or applies in connection with said communication between at least two persons in the stationary living space.
Dabei kann die besagte Emotionserkennung und/oder Absichtserkennung insbesondere mit einer im Wohnraum befindlichen, insbesondere zu der in diesem Dokument beschriebenes System gehörenden oder vernetzten Kamera ausgeführt werden. Beispielsweise kann die Erkennung zumindest eines Parameters der Emotion (z.B. betreffend eine Veränderung der Emotion) und/oder der Absicht zumindest einer (an der vorliegenden Kommunikation beteiligten Person) auf Basis der Auswertung des zeitlichen Verlaufs der Mimik und/oder Gestik und/oder Augenbewegungen der betreffenden Person, mit oder ohne Berücksichtigung einer weitere körperliche Regungen mit oder ohne Abgleich mit dem zumindest einem Parameter der auditiven Kommunikation erfolgen. Beispielsweise können zwei oder mehrere vereinfachte Klassen der Emotion, z.B. relativ neutral, Freude, Zuneigung, Abneigung, Verärgerung, Verzückung, etc. und/oder zwei oder mehrere der Absicht, z.B. bereit für eine Reaktion, bereit für eine (bestimmte) Bewegung oder Art der Aktion, Passivität, etc. erkannt und berücksichtigt.In this case, the said emotion recognition and / or intent recognition can be carried out in particular with a camera located in the living space, in particular belonging to or linked to the system described in this document. For example, the detection of at least one parameter of the emotion (eg concerning a change of the emotion) and / or the intention of at least one person involved in the present communication on the basis of the evaluation of the temporal course of the facial expressions and / or gestures and / or eye movements person, with or without consideration of further physical impulses, with or without reconciliation with the at least one auditory communication parameter. For example, two or more simplified classes of emotion, e.g. relatively neutral, joy, affection, dislike, annoyance, rapture, etc. and / or two or more of the intention, e.g. ready for a reaction, ready for a (specific) movement or type of action, passivity, etc. recognized and considered.
Gemäß einer zweckmäßigen Ausgestaltung wird ein Maß der Anwendbarkeit und/oder ein Maß der Erfolgswahrscheinlichkeit einer oder mehrerer Varianten des Bestimmens oder Anpassens eines oder mehrerer Parameter des auszugebenden Audiosignals im stationären Wohnraum ermittelt und im Verfahren berücksichtigt. Daraufhin kann eine Auswahl der Variante des Bestimmens oder der Anpassens eines und/oder mehrerer Parameter oder die Auswahl zumindest einer alternativen Maßnahme in Bezug auf das auszugebende Audiosignal oder eine zu dem Audiosignal zugeordnete bzw. das Audiosignal begleitenden Information ausgeführt werden.According to an expedient refinement, a measure of the applicability and / or a measure of the probability of success of one or more variants of determining or adapting one or more parameters of the audio signal to be output in the stationary housing is determined and taken into account in the method. Thereupon, a selection of the variant of determining or adapting one and / or more parameters or the selection of at least one alternative measure with respect to the audio signal to be output or an information associated with the audio signal or accompanying the audio signal can be carried out.
Das Maß der besagten Anwendbarkeit und/oder der Erfolgswahrscheinlichkeit kann oder können dabei entsprechend vorausbestimmten Kriterien, z.B. unter Berücksichtigung zumindest eines Optimierungskriterium ermittelt werden. Insbesondere wird das Wahrscheinlichkeitsmaß, dass die Ausgabe zumindest eines (bestimmten) Abschnitts des Audiosignals nicht erfolgreich war, ist oder wird und/oder das Maß der Anwendbarkeit einer oder mehrerer bestimmter Varianten des Bestimmens bzw. Anpassens eines oder mehrerer Parameter des Audiosignals ermittelt und berücksichtigt. Das Maß der besagten Anwendbarkeit und/oder der Erfolgswahrscheinlichkeit kann oder können zumindest teilweise, prädiktiv, z.B. auf Basis der Historiendaten ermittelt werden. Dabei kann ein Ergebnis der Ausgabe zumindest eines Abschnitts des Audiosignals kurz vor, während oder nach der Ausgabe des besagten Abschnitts simuliert und mit zumindest einer vorausbestimmten Bedingung, bevorzugt einem aktuellen Optimierungskriterium verglichen werden. Beispielsweise kann ein Maß der Wahrnehmbarkeit und/oder Verständlichkeit des Audiosignals in einem bestimmten Raumbereich und/oder von einer bestimmten Person ermittelt und berücksichtigt werden. Auf die analoge Weise kann ein Maß der besagten Anwendbarkeit und/oder der Erfolgswahrscheinlichkeit in Bezug auf das Erzeugen der zumindest einen auditiven Meldung, insbesondere während der Ausgabe des zumindest einen Abschnitts des auszugebenden Audiosignals ermittelt und berücksichtigt werden. Daraufhin kann ein oder mehrere Parameter zumindest eines (betreffenden) Abschnitts des Audiosignals und/oder der besagten auditiven Meldung zweckmäßig angepasst werden.The degree of said applicability and / or the probability of success may or may be determined according to predetermined criteria, e.g. be determined taking into account at least one optimization criterion. In particular, the probability measure that the output of at least one (specific) section of the audio signal was unsuccessful is or will be determined and / or the degree of applicability of one or more specific variants of the determination or adaptation of one or more parameters of the audio signal is taken into account and considered. The degree of said applicability and / or the probability of success may or may be at least partially, predictively, e.g. determined on the basis of the history data. In this case, a result of the output of at least one section of the audio signal shortly before, during or after the output of said section can be simulated and compared with at least one predefined condition, preferably a current optimization criterion. For example, a measure of the perceptibility and / or intelligibility of the audio signal in a specific spatial area and / or by a specific person can be determined and taken into account. In the analogous manner, a measure of the said applicability and / or the probability of success with respect to the generation of the at least one auditory message, in particular during the output of the at least one section of the audio signal to be output, can be determined and taken into account. Thereupon, one or more parameters of at least one (relevant) section of the audio signal and / or said auditory message may be suitably adjusted.
Alternativ oder zusätzlich kann im Verfahren ein Ermitteln eines Wahrscheinlichkeitsmaßes erfolgen, dass eine Ausgabe eines Abschnitts des Audiosignals und/oder ein Erzeugen der zumindest einer auditiven Meldung bei dem ermittelten und/oder prädizierten Parameter der besagten Kommunikation, insbesondere unter der Berücksichtigung eines Parameters eines weiteren akustischen Inhalts nicht erfolgreich war, ist oder wird und daraufhin abhängig von dem ermittelten Wahrscheinlichkeitsmaß die Auswahl der Variante der Anpassung eines oder mehrerer Parameter oder einer bestimmten alternativen Maßnahme in Bezug auf zumindest einen Abschnitt des auszugebenden Audiosignal, und/oder auf die auditive Meldung oder den mit der auditiven Meldung zu übermittelnden Inhalt ausgeführt werden.Alternatively or additionally, in the method, a determination of a probability measure be carried out that an output of a portion of the audio signal and / or generating the at least one auditory message in the determined and / or predicted parameter of said communication, in particular taking into account a parameter of a further acoustic content was not successful, is or will and then depending on the determined probability measure, the selection of the variant of adaptation of one or more parameters or a specific alternative measure with respect to at least a portion of the audio signal to be output, and / or to the auditory message or the content to be transmitted with the auditory message.
Beispielsweise wird ein Maß für die Erfolgswahrscheinlichkeit ermittelt, dass die Ausgabe eines Abschnitts des Audiosignals, unter Berücksichtigung eines ermittelten oder prädizierten Parameter der besagten Kommunikation, insbesondere unter der Berücksichtigung eines ermittelten oder prädizierten Parameters eines weiteren (im Wohnraum hörbaren) akustischen Inhalts, insbesondere in einem bestimmten Raumbereich bzw. für eine Person in einem bestimmten Raumbereich, nicht hinreichend ist oder war, ermittelt und berücksichtigt. Daraufhin kann eine vorausbestimmte Maßnahme, z.B. eine Wiederholung eines Abschnitts des Audiosignals (mit oder ohne zumindest einer zugeordneten oder begleitende Videosequenz) veranlasst werden und/oder ein verändertes Anpassen der Parameter des auszugebenden Audiosignals bei einer weiteren Ausführung des Verfahrens ausgeführt werden.For example, a measure of the probability of success is determined that the output of a portion of the audio signal, taking into account a determined or predicated parameter of said communication, in particular taking into account a determined or predicated parameter of another (audible in the living room) acoustic content, in particular in a certain space or for a person in a particular area, is insufficient or has been determined and taken into account. Thereupon, a predetermined measure, e.g. a repetition of a portion of the audio signal (with or without at least one associated or accompanying video sequence) may be caused and / or altered adaptation of the parameters of the audio signal to be output in a further embodiment of the method are performed.
Alternativ oder zusätzlich wird ein Maß für die Anwendbarkeit einer Anpassung eines Parameters der auditiven Meldung, unter Berücksichtigung eines ermittelten Parameter der besagten Kommunikation, insbesondere unter der Berücksichtigung eines Parameters eines weiteren akustischen Inhalts im Wohnraum nicht hinreichend ist oder war, ermittelt und berücksichtigt. Abhängig von dem ermittelten Maß der Erfolgswahrscheinlichkeit bzw. Anwendbarkeit eines Anpassens wird eine Maßnahme in Bezug die auszugebende auditive Meldung oder in Bezug auf den mit der auditiven Meldung zu übermittelnden Inhalt ausgewählt. Eine solche Maßnahme kann z.B. eine Variante des Bestimmens oder Anpassens zumindest eines Parameters der auditiven Meldung umfassen.Alternatively or additionally, a measure of the applicability of an adaptation of a parameter of the auditory message, taking into account a determined parameter of the said communication, in particular taking into account a parameter of a further acoustic content in the living space is or is insufficient, is determined and taken into account. Depending on the measure of probability of success or applicability of an adjustment, a measure is selected in relation to the auditory report to be issued or to the content to be transmitted with the auditory report. Such a measure may e.g. a variant of determining or adapting at least one parameter of the auditory message.
Beispielsweise kann ein Maß der Erfolgswahrscheinlichkeit in Bezug auf die Ausgabe eines Abschnitts des Audiosignals und/oder eine zweckmäßige Anwendbarkeit eines bestimmten Anpassens des Audiosignals zumindest teilweise vorab, d.h. vor oder teilweise während der Ausgabe des Abschnitts des Audiosignals oder der mit dem Abschnitt des Audiosignals korrespondierender bzw. zusammenhängender Daten erfolgen. Auch kann ein Maß für die Erfolgswahrscheinlichkeit in Bezug auf einen bereits in der Ausgabe befindlichen oder bereits ausgegebenen Abschnitt des Audiosignals ermittelt und, insbesondere dynamisch, berücksichtigt werden. Beispielsweise kann ein Maß für die Anwendbarkeit oder Erfolgswahrscheinlichkeit eine, insbesondere voraussichtliche, Erreichung eines bestimmten Ziels bzw. Zielwerts, z.B. bezüglich einer Wahrnehmbarkeit des betreffenden Abschnitts der besagten Kommunikation und/oder des Abschnitts des Audiosignals, repräsentieren.For example, a measure of the probability of success relating to the output of a portion of the audio signal and / or a convenient applicability of a particular adaptation of the audio signal may be at least partially pre-determined, i. before or partly during the output of the portion of the audio signal or the data corresponding to the portion of the audio signal. Also, a measure of the probability of success with respect to a portion of the audio signal already present in the output or already output can be determined and taken into account, in particular dynamically. For example, a measure of the applicability or likelihood of success may include, in particular, anticipated achievement of a particular goal, e.g. in terms of perceptibility of the relevant portion of said communication and / or the portion of the audio signal.
Abhängig von dem ermittelten Maß für die Anwendbarkeit und/oder Erfolgswahrscheinlichkeit können diverse Maßnahmen, bevorzugt die in diesem Dokument beschriebene Veränderungen, Anpassungen diverser Parameter eines oder mehrerer auszugebender Audiosignale ausgeführt werden. Bevorzugt kann die Logik, Formel, Kennlinie zur Bestimmung bzw. Anpassung zumindest eines Parameters des Audiosignals und/oder der zumindest einen auditiven Meldung, abhängig von dem Maß der Anwendbarkeit und/oder Erfolgswahrscheinlichkeit, verändert werden. Beispielsweise kann eine solche Maßnahme ein Variieren eines Zeitparameters bei der Ausgabe zumindest eines Abschnitts des auszugebenden Audiosignals, Reihenfolge oder Kombination bei der Ausgabe von zumindest zwei Audiosignalen oder Abschnitten zweier Audiosignale, eine Kombination mit zumindest einer auditiven Meldung und/oder einem Audiosignal einer weiteren Art, einer wiederholten Ausgabe eines Abschnitts des Audiosignals und/oder eines Teils des mit dem Abschnitt des Audiosignals zusammenhängender Daten, z.B. eines entsprechenden Videoabschnitts, umfassen.Depending on the measure determined for the applicability and / or probability of success, various measures, preferably the changes described in this document, adaptations of various parameters of one or more audio signals to be output can be carried out. Preferably, the logic, formula, characteristic for determining or adapting at least one parameter of the audio signal and / or the at least one auditory message, depending on the degree of applicability and / or probability of success, are changed. For example, such a measure may include varying a time parameter in the output of at least a portion of the audio signal to be output, sequence or combination in the output of at least two audio signals or portions of two audio signals, a combination with at least one auditory message and / or an audio signal of another type, a repeated output of a portion of the audio signal and / or a portion of the data associated with the portion of the audio signal, eg a corresponding video section.
Ferner kann die zumindest eine vorausbestimmte Maßnahme umfassen, dass zumindest ein Abschnitt des Audiosignals und/oder Teil des mit zumindest einer auditiven Meldung zu übermittelnden Inhalts mit anderen Mitteln, z.B. visuell, textuell und/oder in einem weiteren Raumbereich des Wohnraums und/oder auf einer weiteren Ausgabevorrichtung, z.B. auf einem mobilen Anwendergerät einer Person auszugeben.Furthermore, the at least one predefined measure may include that at least a portion of the audio signal and / or part of the content to be transmitted with at least one auditory message is transmitted by other means, e.g. visually, textually and / or in another room area of the living space and / or on a further output device, e.g. on a mobile user device of a person.
Gemäß einer zweckmäßigen Ausgestaltung repräsentiert zumindest ein Parameter der besagten Kommunikation ein inhaltliches, insbesondere thematisches, Merkmal der besagten Kommunikation. Beispielsweise repräsentiert der Parameter eine Art des Inhalts und/oder ein Thema des in der besagten Kommunikation übermittelten Inhalts, z.B. des Informationsinhalts. Ein inhaltliches Merkmal kann auch einen oder mehrere Inhalte einer Kommunikationsbotschaft innerhalb der besagten Kommunikation kennzeichnen. Beispielsweise bezieht sich das inhaltliche Merkmal auf die sogenannte Selbstoffenbarung, Appeal, Sachaspekt, Beziehungsaspekt der Kom munikationsbotschaft.According to an expedient embodiment, at least one parameter of said communication represents a content-related, in particular thematic, feature of said communication. For example, the parameter represents a type of content and / or a topic of the content transmitted in said communication, e.g. the information content. A content feature may also identify one or more contents of a communication message within said communication. For example, the content-related feature refers to the so-called self-disclosure, appeal, factual aspect, relationship aspect of the communication message.
Beispielsweise kann daraufhin ein oder können mehrere Parameter eines Abschnitts des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung angepasst werden, die dasselbe oder nachfolgendes zeitliches Intervall wie der Abschnitt der besagten Kommunikation betreffen. Dabei kann ein Parameter des erst in einigen Sekunden auszugebenden Abschnitts des Audiosignals und/oder ein (bereits generierter bzw. noch zu generierender) Abschnitt der zumindest einer auditiven Meldung, angepasst werden. For example, one or more parameters of a portion of the audio signal to be output and / or of the at least one auditory message which relate to the same or subsequent time interval as the portion of the said communication can then be adapted. In this case, a parameter of the section of the audio signal to be output only in a few seconds and / or a section (already generated or yet to be generated) of the at least one auditory message can be adapted.
Ein inhaltliches Merkmal kann beispielsweise kennzeichnend für die Kommunikationsbotschaften oder bestimmte Zusammenhänge zwischen den Kommunikationsbotschaften sein. Das inhaltliche Merkmal eines Abschnitts der Kommunikation kann abhängig von der erkannten oder voreingestellten Sprache, einem Kontext, einer erkannten Szene bzw. eines Parameters der Szene im Wohnraum ermittelt oder berücksichtigt werden. Das inhaltliche Merkmal muss nicht dem Inhalt der Kommunikation oder der Kommunikationsbotschaften entsprechen. Dieses kann lediglich einen oder mehrere Parameterwerte umfassen, die ein oder mehrere Merkmale der Kommunikation repräsentieren, ohne dabei die Kommunikation selbst wiederzugeben. Ein inhaltliches Merkmal bzw. ein Parameter des inhaltlichen Merkmals kann als eine (zumindest grobe) Kennung zu der Klassifikation und/oder einem bestimmten Muster ausgedrückt bzw. verarbeitet werden. Im Vergleich zu einem vollständigen Inhalt der Kommunikation kann das besagte inhaltliche Merkmal als ein sehr kompakter Wertesatz ermittelt und verarbeitet werden.A content-related feature may, for example, be indicative of the communications messages or certain relationships between the communications messages. The content-related feature of a section of the communication can be determined or taken into account as a function of the recognized or preset language, a context, a recognized scene or a parameter of the scene in the living space. The content characteristic does not have to correspond to the content of the communication or the communication messages. This may include only one or more parameter values representing one or more features of the communication without reflecting the communication itself. A content-related feature or parameter of the content-related feature can be expressed or processed as an identifier (at least coarse) for the classification and / or a specific pattern. Compared to a complete content of the communication, said content feature can be determined and processed as a very compact set of values.
Zumindest ein inhaltliches Merkmal der besagten Kommunikation kann auf Basis von Sensordaten, einer Historie, z.B. im Zusammenhang mit einer oder mehreren Kommunikationen im Wohnraum oder Kommunikationen mit Beteiligung bestimmter Personen und/oder unter Berücksichtigung einer Wahrscheinlichkeitsrechnung, ermittelt werden. Beispielsweise kann zumindest ein inhaltliches Merkmal einer aktuellen oder bevorstehenden sprachlichen Kommunikation, mittels eines Abgleichs bzw. einer Verrechnung einer Vielzahl inhaltlicher Merkmale und/oder weiterer Parameter aus der Historie prädiziert werden. Ein solcher Abgleich kann im Verfahren z.B. innerhalb einer beabstandet angeordneten Recheneinheit, z.B. in einem Server ausgeführt werden.At least one content feature of said communication may be based on sensor data, a history, e.g. in connection with one or more communications in the home or communications involving certain persons and / or taking into account a probability calculation. For example, at least one content-related feature of a current or forthcoming linguistic communication can be predicted by means of a comparison or a clearing of a multiplicity of content-related features and / or further parameters from the history. Such alignment can be performed in the method e.g. within a spaced apart arithmetic unit, e.g. running in a server.
Im Verfahren kann eine einfache, inhaltliche Auswertung, insbesondere Analyse der sprachlichen Kommunikation zwischen zumindest zwei Personen ausgeführt und berücksichtigt werden.In the method, a simple, content-related evaluation, in particular analysis of the linguistic communication between at least two persons can be carried out and taken into account.
Im Gegensatz etwa zu einer Eingabe eines Sprachbefehls an eine Sprachsteuerung wird im Verfahren eine sprachliche Kommunikation, die (explizit) nicht an eine Sprachsteuerungsapplikation bzw. an einen Sprachassistenten gerichtet ist, berücksichtigt. Dabei werden ein oder mehrere Parameter der sprachlichen Kommunikation, insbesondere ein besagtes inhaltliches Merkmal, insbesondere auf die hier beschriebene Art und Weise verarbeitet bzw. berücksichtigt.In contrast to, for example, an input of a voice command to a voice control, in the method a voice communication which (explicitly) is not directed to a voice control application or to a voice assistant is taken into account. In this case, one or more parameters of the linguistic communication, in particular a content-related feature, in particular processed or taken into account in the manner described here.
Bevorzugt wird im Verfahren explizit erkannt, dass eine Kommunikationsbotschaft, eine sprachliche Botschaft bzw. eine Transaktion einer Person (eines Sprechers) im Wohnraum (insbesondere explizit) nicht an einen im Wohnraum (möglicherweise vorhandene, betriebene, aktive) Sprachsteuerungsapplikation gerichtet ist. Diese kann daraufhin nicht etwa zur Interpretation eines Steuerungsbefehls oder zum Informationsaustausch mit einem Sprachassistenten, sondern vielmehr zur Anpassung des Parameters des auszugebenden Audiosignals verwendet werden. Falls eine sprachliche Botschaft hingegen als eine, an die im Wohnraum betriebene Sprachsteuerungsapplikation gerichtete Botschaft erkannt wird, kann wiederum eine zweckmäßig veränderte (oder keine) Anpassung des Audiosignals, erfolgen und/oder eine für diesen Falls vordefinierte Maßnahme ausgeführt werden.Preferably, it is explicitly recognized in the method that a communication message, a linguistic message or a transaction of a person (a speaker) in the living space (in particular explicitly) is not addressed to a voice control application in the living space (possibly existing, operated, active). This can then be used not to interpret a control command or to exchange information with a speech assistant, but rather to adapt the parameter of the audio signal to be output. On the other hand, if a linguistic message is recognized as a message addressed to the voice control application operated in the living space, a suitably modified (or no) adaptation of the audio signal can again take place and / or a measure predefined for this case can be executed.
Beispielsweise dann, wenn erkannt wird, dass der Sprecher seinen Satz und/oder eine Phrase und/oder eine Botschaft zu Ende gesprochen hat, kann ein entsprechendes Anpassen eines Abschnitts einer auditiven Meldung erfolgen. Dabei kann im Verfahren eine passende, insbesondere prädiktive, Planung der Ausgabe eines oder mehrerer Abschnitte eines oder mehrerer auszugebenden Audiosignale mit oder ohne Kombination mit der zumindest einen auditiven Meldung, erfolgen.For example, when it is detected that the speaker has finished his sentence and / or phrase and / or message, a corresponding adaptation of a portion of an auditory message may occur. In this case, an appropriate, in particular predictive, planning of the output of one or more sections of one or more audio signals to be output can be carried out in the method, with or without combination with the at least one auditory message.
Bevorzugt kann aus dem inhaltlichen Merkmal bzw. einem entsprechenden Parameterwert ermittelt, insbesondere prädiziert werden, zu welchem Zeitpunkt eine sprachliche Botschaft einer Person im Wohnraum abgeschlossen sein wird, und insbesondere zu welchem Zeitpunkt eine weitere sprachliche Botschaft (z.B. als eine Reaktion des Kommunikationspartners) erfolgen wird bzw. mit welcher Wahrscheinlichkeit sie zu erwarten ist. Daraufhin kann beispielsweise ein Zeitparameter (hier: der Beginn der Ausgabe einer oder mehrerer Abschnitte des auszugebenden Audiosignals und/oder einer auditiven Meldungen) geplant werden.Preferably, it can be determined from the content-related feature or a corresponding parameter value, in particular at what time a linguistic message of a person in the living room will be completed, and in particular at what time a further linguistic message (eg as a reaction of the communication partner) will take place or with what probability it is to be expected. Thereupon, for example, a time parameter (here: the beginning of the output of one or more sections of the audio signal to be output and / or an auditory message) can be planned.
Alternativ oder zusätzlich kann daraufhin ein passender Abschnitt des Audiosignals ausgewählt werden und/oder ein mit einer auditiven Meldung zu repräsentierender Inhalt (z.B. eine zu übermittelnde Information) an einen oder mehrere ermittelte Zeitintervalle angepasst und/oder das Erzeugen der entsprechenden Schallwellen in einem anderen Raumbereich bzw. für einen anderen Raumbereich des Wohnraums veranlasst werden.Alternatively or additionally, a suitable section of the audio signal can then be selected and / or a content to be represented with an auditory message (eg information to be transmitted) adapted to one or more determined time intervals and / or the generation of the corresponding sound waves in another Room area or for another room area of the living room.
Eine weitere optionale Ausgestaltung sieht vor, dass abhängig von einer inhaltlichen und/oder linguistischen, Auswertung der sprachlichen Kommunikation zwischen den zumindest zwei Personen ein Prädizieren des zumindest einen Richtungsparameters der sprachlichen Kommunikation erfolgt. Dabei können im Verfahren auch Namen (auch Rufnahmen, Spitznamen, Kosenamen, etc.) und/oder typische Satzteile und/oder eine typische Intonation erkannt und verarbeitet werden. Aus dieser Information kann z.B. der aktuelle oder für die nahe Zukunft prädizierte Wert eines Richtungsparameters der Kommunikation ermittelt und berücksichtigt werden.A further optional embodiment provides that, depending on a content-related and / or linguistic evaluation of the linguistic communication between the at least two persons, a prediction of the at least one directional parameter of the linguistic communication takes place. In the process, names (including calls, nicknames, pet names, etc.) and / or typical phrases and / or a typical intonation can also be recognized and processed. From this information, e.g. the current or predicted value of a direction parameter of the communication is determined and taken into account.
Beispielsweise können vorgegebene Parameter der Kommunikation erkannt und daraus prädiziert werden, wie sich der zumindest ein Richtungsparameter der Kommunikation verändert wird, z.B. welche bestimmte Veränderung zumindest eines Richtungsparameters in der nahen Zukunft (mit einer hohen Wahrscheinlichkeit) erfolgen wird. Solche vorgegebenen Parameter können beispielsweise einen Anfang und/oder ein Ende und/oder einen zeitlichen Verlauf der Amplituden- und/oder der Frequenzparameter der sprachlichen Kommunikation kennzeichnen. Beispielsweise kann abhängig von vorgegebenen Parametern und/oder abhängig von vorgegebenen Zusammenhängen zwischen bestimmten Parametern eine Veränderung eines Richtungsparameters einer auditiven Kommunikation oder eine Prädiktion eines (neuen oder geänderten) Richtungsparameters für die nahe Zukunft erfolgen. Bei der Umkehrung des Richtungsparameters kann z.B. ein bisher als ein mit dem „Zuhörer“ belegter Raumbereich (nachfolgend) als ein mit einem „Zuhörer“ belegter Raumbereich gekennzeichnet werden, und/oder ein bisher mit einem „Zuhörer“ belegter Raumbereich (nachfolgend) als ein mit einem „Zuhörer“ belegter Raumbereich berücksichtigt werden.For example, predetermined parameters of the communication can be recognized and predicated on how the at least one direction parameter of the communication is changed, e.g. which particular change of at least one directional parameter will occur in the near future (with a high probability). Such predefined parameters may, for example, characterize a beginning and / or an end and / or a temporal course of the amplitude and / or the frequency parameters of the speech communication. For example, depending on predetermined parameters and / or dependent on predetermined relationships between certain parameters, a change of a direction parameter of an auditory communication or a prediction of a (new or changed) direction parameter for the near future can take place. In reversing the directional parameter, e.g. a space area (hereinafter referred to) as a space occupied with the "listener" will be identified as a space area occupied by a "listener", and / or a space area previously occupied by a "listener" (hereinafter) as a space area occupied by a "listener" be taken into account.
Gemäß einer zweckmäßigen Ausgestaltung umfasst ein Abschnitt des auszugebenden Audiosignals eine Information, insbesondere eine Information in einer sprachlichen Form, bevorzugt eine Sprachmitteilung, wobei ein Anpassen eines inhaltlichen Merkmals des auszugebenden Audiosignals, insbesondere eine Auswahl eines Abschnitts des zumindest eines Audiosignals oder Auswahl zwischen zumindest zwei Audiosignalen, abhängig von dem ermittelten inhaltlichen Merkmal der besagten Kommunikation erfolgt.According to an expedient embodiment, a section of the audio signal to be output comprises information, in particular information in a linguistic form, preferably a voice message, wherein an adaptation of a content feature of the audio signal to be output, in particular a selection of a portion of the at least one audio signal or selection between at least two audio signals , Is dependent on the determined content characteristic of said communication.
Beispielsweise kann ein bestimmter, z.B. zeitlich oder inhaltlich passender, Abschnitt des auszugebenden Audiosignals, umfassend eine sprachliche Information, z.B. etwa wie ein Beitrag innerhalb eines Multimediaprogramms, in Abhängigkeit von dem ermittelten inhaltlichen Merkmal der sprachlichen Kommunikation zwischen zumindest zwei Personen im Wohnraum bestimmt werden. Beispielsweise kann eine Zusammensetzung einer auszugebenden Sequenz von Multimediainhalten angepasst werden.For example, a particular, e.g. time or content matched portion of the audio signal to be output, comprising linguistic information, e.g. such as a contribution within a multimedia program, depending on the determined content characteristic of the linguistic communication between at least two people in the living space are determined. For example, a composition of a sequence of multimedia contents to be output can be adapted.
In diesem Beispiel kann (auch) eine Anpassung einer oder mehrerer durch die auditive Meldung repräsentierter Information, abhängig von dem ermittelten inhaltlichen Merkmal der besagten Kommunikation erfolgen.In this example, an adaptation of one or more information represented by the auditory message can also take place (depending on the determined content characteristic of said communication).
Beispielsweise kann im Verfahren eine Auswahl eines auszugebenden Audiosignals oder zumindest eines Abschnitt eines oder mehrerer Audiosignale in Abhängigkeit von dem Thema der besagten Kommunikation vorgesehen werden. Dabei kann eine vorausbestimmte Abhängigkeit, insbesondere eine Relation, eine Ähnlichkeit, zwischen einem ermittelten oder prädizierten inhaltlichen Merkmals zumindest eines Abschnitts der Kommunikation und einem inhaltlichen Parameter eines oder mehrerer Abschnitte des Audiosignals angestrebt werden.For example, in the method, a selection of an audio signal to be output or at least a portion of one or more audio signals may be provided depending on the subject of said communication. In this case, a predefined dependency, in particular a relation, a similarity, between a determined or predicted content characteristic of at least one section of the communication and a content-related parameter of one or more sections of the audio signal can be sought.
Dabei kann die besagte vorausbestimmte Relation nach vorausbestimmten Kriterien bzw. einer vorausbestimmten Logik bzw. hinterlegten Assoziationsverbindungen ausgeführt wird.In this case, the said predetermined relation can be executed according to predetermined criteria or a predetermined logic or association links.
Gemäß einer optionalen Ausgestaltung wird abhängig von dem ermittelten inhaltlichen Merkmal der besagten Kommunikation eine, insbesondere vorausschauende, inhaltliche Anpassung eines oder mehrerer auszugebenden (zur Ausgabe zu wählenden, zur bestimmten Weiterverarbeitung bzw. Ausgabe bestimmter) Audiosignale ausgeführt. Beispielsweise kann abhängig von den ermittelten, insbesondere prädizierten, inhaltlichen Merkmalen der besagten zwischen den zumindest zwei Personen eine Reduktion der Inhalte des Abschnitts des Audiosignals und/oder ein Hinzufügen weiterer Inhalte zum (auf einmal, am Stück) auszugebenden Abschnitt des Audiosignals erfolgen. Beispielsweise kann dabei eine Erweiterung des Inhalts oder ein Hinzufügen eines Inhalts zu einer mit einem Abschnitt des Audiosignals zu übermittelnden Information erfolgen.According to an optional embodiment, depending on the identified content-related feature of the said communication, a, in particular anticipatory, content-related adaptation of one or more audio signals to be output (to be selected for output, intended for specific further processing or output) is carried out. For example, depending on the determined, in particular predicated, content characteristics of said between the at least two persons, a reduction of the contents of the portion of the audio signal and / or adding further contents to the (at one time, at a time) output section of the audio signal. For example, an extension of the content or an addition of a content to an information to be transmitted with a section of the audio signal can take place.
Alternativ oder zusätzlich können auch Inhalte einer generierten auditiven Meldung, z.B. ein Abschnitt einer automatisch generierten Sprache abhängig von einem Parameter, z.B. zumindest einem inhaltlichen Merkmal der besagten Kommunikation, insbesondere nach einer vorausbestimmten Logik oder Gesetzmäßigkeit, verändert oder angepasst werden, wobei die Inhalte der zumindest einen auditiven Meldung mit der besagten Kommunikation der Personen jedoch nicht unmittelbar, insbesondere nicht thematisch, logisch oder kausal, zusammenhängen oder zusammenhängen müssen.Alternatively or additionally, contents of a generated auditory message, e.g. a portion of an automatically generated language depending on a parameter, e.g. at least one content-related feature of said communication, in particular according to a predetermined logic or legitimacy, be changed or adapted, the contents of the at least one auditory message with the said communication of persons but not directly, especially not thematically, logically or causally related or related have to.
Auch kann eine Ausgabe einer weiteren Information die dem auszugebenden Audiosignal und/oder der zumindest einen auditiven Meldung zugeordnet ist oder einen Abschnitt des Audiosignals begleitet, beispielsweise einer Videosequenz, eines Textes, eines weiteren Kanals des entsprechenden Multimediainhalts, eines entsprechenden Internet-Beitrags, abhängig von einem oder mehreren Parameter eines, insbesondere in der nahen Vergangenheit erfolgten, Abschnitts der besagten Kommunikation, z.B. von einem inhaltlichen Merkmal, zweckmäßig variiert bzw. angepasst werden. Also, an output of further information associated with the audio signal to be output and / or the at least one auditory message or accompanied a portion of the audio signal, such as a video sequence, a text, another channel of the corresponding multimedia content, a corresponding Internet post, depending on one or more parameters of a, in particular in the near past, section of said communication, eg of a content-related feature, suitably varied or adapted.
Gemäß einer zweckmäßigen Ausgestaltung werden ein oder mehrere Zeitparameter zur Ausgabe des zumindest einen auszugebenden Audiosignals oder zumindest zwei Abschnitte des zumindest einen auszugebenden Audiosignals oder von zwei unterschiedlichen auszugebenden Audiosignale abhängig von einem inhaltlichen Merkmal der besagten Kommunikation bestimmt wird. bestimmt oder angepasst.According to an expedient refinement, one or more time parameters for outputting the at least one audio signal to be output or at least two sections of the at least one audio signal to be output or of two different audio signals to be output are determined as a function of a content-related feature of said communication. determined or adjusted.
Alternativ oder zusätzlich kann im Verfahren ein oder mehrere Parameter, insbesondere Auswahlparameter verändert oder angepasst werden, die maßgeblich sind für die Auswahl zumindest eines auszugebenden Audiosignals und/oder eines oder mehrerer Abschnitte eines oder mehrerer auszugebenden Audiosignale. Beispielsweise können die Auswahlparameter ermittelt bzw. angepasst werden, nach welchen zwischen zwei oder mehreren, prinzipiell zur Ausgabe geeigneten Audiosignalen, insbesondere für zumindest ein Zeitintervall, ausgewählt wird oder nach welchen (aus den Signaldaten) zumindest eines Audiosignals bzw. eines Multimediaprogramms ein oder mehrere passende Abschnitte, insbesondere für zumindest ein Zeitintervall, ausgewählt werden.Alternatively or additionally, one or more parameters, in particular selection parameters, can be changed or adapted in the method, which are decisive for the selection of at least one audio signal to be output and / or one or more sections of one or more audio signals to be output. By way of example, the selection parameters can be determined or adapted according to which one or more appropriate one of two or more audio signals suitable for output, in particular for at least one time interval, or according to which (from the signal data) at least one audio signal or a multimedia program Sections, in particular for at least one time interval selected.
Beispielsweise können Zeitparameter für mehrere (jeweils von bestimmten Merkmalen gekennzeichnete) Abschnitte eines oder mehreren Multimediaprogramme, z.B. einer oder mehrerer Radiosendungen abhängig von einem oder mehreren Parameter der besagten Kommunikation bestimmt werden. Dabei können die besagten Abschnitte, insbesondere eine Auswahl von den ermittelten Abschnitten, abhängig von einem oder mehreren ermittelten Parameter der besagten Kommunikation, ausgegeben werden, insbesondere als eine zweckmäßig gewählte Sequenz bzw. ein im Verfahren für das Wohnraum erstelltes Programm ausgegeben werden.For example, time parameters may be used for a plurality of sections (each identified by particular features) of one or more multimedia programs, e.g. one or more radio broadcasts depending on one or more parameters of said communication. In this case, the said sections, in particular a selection of the determined sections, depending on one or more determined parameters of said communication, are output, in particular as a suitably selected sequence or a created in the process for the living space program.
Beispielsweise kann abhängig von einem oder mehreren Parametern der besagten Kommunikation eine bestimmte Anordnung, Reihenfolge aus diversen (z.B. jeweils kurzen) Inhalten, Beiträgen, Unterhaltungssequenzen, oder auch eine „Neuordnung“ bzw. „Umsortieren“ eines (empfangenen oder ausgelesenen) Programms, beispielsweise einer Fernsehsendung erfolgen. Beispielsweise können auch Zeitparameter zum Erzeugen oder Ausgabe mehrerer auszugebender Sätze, Nebensätze, bestimmter Wortsequenzen eines auszugebenden Audiosignals bzw. eines Multimediaprogramms bestimmt werden. Beispielsweise können auch Parameter zur Auswahl und/oder zur Ausgabe (kurzer) Sequenzen umfassend eine Verbraucherinformation, abhängig von einem oder mehreren Parameter der besagten Kommunikation bestimmt bzw. angepasst werden. Dabei können sich diese z.B. mit keinem oder mit einem vordefinierten Übergang, Übergangseffekt, nach einer vordefinierten Pause oder etwa „nahtlos“, zu den Abschnitten der besagten Kommunikation und/oder zu weiteren auszugebenden Audiosignalen bzw. Abschnitten der Audiosignale und/oder zu den weiteren im Wohnraum hörbaren Inhalten gefügt oder mit diesen kombiniert werden. Dabei kann eine dynamische, insbesondere zumindest teilweise echtzeitfähige, Synthese aus mehreren auditiven Inhalten abhängig von der besagten Kommunikation und weiterer im Verfahren ermittelter Parameter erfolgen.For example, depending on one or more parameters of said communication, a particular arrangement, order of diverse (eg, each short) content, contributions, entertainment sequences, or even a "reordering" or "resorting" a (received or read) program, such as a TV broadcast. For example, time parameters for generating or outputting a plurality of sentences to be output, subordinate clauses, specific word sequences of an audio signal to be output or a multimedia program can also be determined. For example, parameters for selecting and / or outputting (short) sequences comprising consumer information may also be determined or adapted depending on one or more parameters of said communication. These may be e.g. with no or with a predefined transition, transition effect, after a predefined pause or "seamlessly", added to the sections of said communication and / or to further output audio signals or portions of the audio signals and / or to the other contents audible in the living space or be combined with these. In this case, a dynamic, in particular at least partially real-time-capable, synthesis of a plurality of auditory contents can be made dependent on the said communication and further parameters determined in the method.
Auch können zumindest zwei alternativ anwendbaren Zeitparameter, beispielsweise der zwei Zeitparametervarianten, zur Ausgabe zumindest eines Abschnitts des Audiosignals und/oder einer oder mehreren auditiven Meldung ermittelt werden und daraufhin nach vorausbestimmten Kriterien zumindest ein der zumindest zwei Zeitparameter bzw. der Zeitparametervarianten ausgewählt werden.It is also possible to determine at least two alternatively applicable time parameters, for example the two time parameter variants, for outputting at least one section of the audio signal and / or one or more auditory messages and then selecting at least one of the at least two time parameters or the time parameter variants according to predetermined criteria.
Es kann eine linguistische Auswertung, bevorzugt Analyse, in Bezug auf Sätze, Phrasen oder diverse linguistische Strukturen sowie eine Auswertung eines inhaltlichen Merkmals der besagten Kommunikation zwischen zumindest zwei Personen im Wohnraum, insbesondere für bestimmte Abschnitte der Kommunikation, ausgeführt und berücksichtigt werden. Beispielsweise kann dabei berücksichtigt werden, von welcher Person an welche Person oder mehrere Personen ein jeweiliger betreffender Abschnitt der Kommunikation gerichtet wird. Daraufhin kann beispielsweise ein zu der besagten Kommunikation und/oder Szene im Wohnraum passendes Audioprogramm bzw. Multimediaprogramm, nach vorausbestimmten Kriterien zusammengestellt, insbesondere synthetisiert werden.A linguistic evaluation, preferably analysis, with regard to sentences, phrases or various linguistic structures as well as an evaluation of a content-related feature of said communication between at least two persons in the living space, in particular for specific sections of the communication, can be carried out and taken into account. For example, it can be taken into account from which person to which person or persons a respective relevant section of the communication is addressed. Thereupon, for example, an audio program or multimedia program matching the said communication and / or scene in the living space, compiled according to predetermined criteria, can be synthesized in particular.
Auch kann ein oder mehrere Parameter der zumindest einen auditiven Meldung, insbesondere in Bezug auf ihren Inhalt, in Bezug auf eine Aufteilung in zumindest zwei Abschnitte, oder hinsichtlich des Zeitpunkts der Aufgabe zumindest eines Abschnitts oder Inhalts der auditiven Meldung, abhängig von der Ausführung der besagten inhaltlichen und/oder linguistischen Auswertung der besagten Kommunikation erfolgen. Daraufhin kann beispielsweise ein zu der besagten Kommunikation und/oder Szene im Wohnraum passendes, mittels einer Sprachgenerierung und/oder Kombination aus mehreren Abschnitten von Audiosignaldaten, nach vorausbestimmten Kriterien, ein Sprache umfassendes („improvisiertes“) Unterhaltungsprogramm zusammengestellt, insbesondere synthetisiert werden. Dabei kann das Unterhaltungsprogramm zumindest teilweise oder überwiegend Inhalte umfassen, die nicht der besagten Kommunikation entsprechen und/oder nicht unmittelbar thematisch, logisch oder kausal, mit dieser zusammenhängen müssen.Also, one or more parameters of the at least one auditory message, in particular as to its content, may be divided into at least two sections, or as to the timing of the abandonment of at least a portion or content of the auditory message, depending on the execution of said content and / or linguistic evaluation of the said communication. Thereupon, for example, a suitable for the said communication and / or scene in the living room, by means of a speech generation and / or a combination of a plurality of sections of audio signal data, according to predetermined criteria, a speech-comprehensive ("improvised") entertainment program, in particular synthesized. In this case, the entertainment program may at least partially or predominantly include content that does not correspond to said communication and / or does not have to be thematically, logically, or causally related to it.
Ein Begriff „Zeitparameter“ kann im Rahmen dieser Beschreibung einen (absoluten oder relativen) Zeitpunkt zur Ausgabe, insbesondere zu einem Anfang und/oder Ende der Ausgabe eines auszugebenen Audiosignals, insbesondere eines (bestimmten) Abschnitts eines (bestimmten, z.B. nach bestimmten Kriterien ausgewählten) auszugebenen Audiosignals, eine Dauer, oder bevorzugt ein bestimmtes Zeitintervall zur Ausgabe zumindest eines Abschnitts des auszugebende Audiosignals kennzeichnen. Alternativ oder zusätzlich kann zumindest ein Zeitparameter zur Ausgabe zumindest eines Abschnitts des auszugebenden Audiosignals einen (absoluten oder relativen) Zeitpunkt, insbesondere den Anfang und/oder das Ende oder die Dauer eines Zeitintervalls der oder die zur Ausgabe, insbesondere eines (des) bestimmten Abschnitts des Audiosignals, beispielsweise eines (nach bestimmten Kriterien ausgewählten) Abschnitts des Audiosignals nicht geeignet ist, kennzeichnen. Daraufhin kann die Ausgabe zumindest eines Abschnitts des Audiosignals unter Berücksichtigung eines oder mehrerer solchen Zeitparameter erfolgen. Beispielsweise kann im Verfahren ein Zeitparameter, umfassend zwei Zeitpunkte (für den Anfang und/oder für das geplante Ende) und/oder einen Zeitpunkt und die Dauer der Ausgabe repräsentierende Größe, für eine oder mehrere auszugebenden Audiosignale oder deren Abschnitte bestimmt werden.A term "time parameter" may in the context of this description be an (absolute or relative) time for output, in particular at the beginning and / or end of the output of an audio signal to be output, in particular a (specific) section of a (determined, eg selected according to specific criteria) output audio signal, a duration, or preferably a specific time interval for outputting at least a portion of the output audio signal. Alternatively or additionally, at least one time parameter for outputting at least a portion of the audio signal to be output can be an (absolute or relative) time, in particular the beginning and / or the end or the duration of a time interval of or for the output, in particular of a certain section of the Audio signal, for example, a (selected according to certain criteria) portion of the audio signal is not suitable, mark. Thereupon, the output of at least a portion of the audio signal can take place taking into account one or more such time parameters. For example, in the method, a time parameter comprising two times (for the beginning and / or for the planned end) and / or a time and the duration of the output representing size, for one or more audio signals to be output or their sections can be determined.
Beispielsweise werden ein oder mehrere zeitliche Intervalle, z.B. repräsentiert durch einen Zeitpunkt und/oder Dauer, ermittelt, welche zur Ausgabe zumindest eines bestimmten Abschnitts eines oder mehrerer Abschnitte des auszugebenden Audiosignals und/oder der zumindest einer auditiven Meldung mit jeweils einer bestimmten zeitlichen Dauer geeignet und/oder ungeeignet sind. Das Bestimmen des Zeitparameters zur Ausgabe eines oder mehrerer Abschnitte des Audiosignals und/oder der zumindest einer auditiven Meldung kann dann aus den ermittelten Zeitintervallen erfolgen. Dabei kann berücksichtigt werden, ob diese (mehr oder minder, insbesondere in einem quantitativen Maß) geeignet und/oder ungeeignet zur Ausgabe eines Abschnitts des (bestimmten) auszugebenden Audiosignals, insbesondere bestimmter Abschnitte der eines oder mehrerer Audiosignale, sind. In einem vereinfachten Fall können die geeigneten Zeitpunkte bzw. Intervalle aus den Zeitpunkten sowie die Zeitpunkten, die nicht geeignet sind, ermittelt werden.For example, one or more temporal intervals, e.g. represented by a time and / or duration, determines which ones are suitable and / or unsuitable for outputting at least one specific section of one or more sections of the audio signal to be output and / or the at least one auditory message, each with a specific time duration. The determination of the time parameter for the output of one or more sections of the audio signal and / or the at least one auditory message can then take place from the determined time intervals. In this case, it can be considered whether these are (more or less, in particular in a quantitative measure) suitable and / or unsuitable for outputting a section of the (specific) audio signal to be output, in particular specific sections of the one or more audio signals. In a simplified case, the appropriate time points or the points in time which are not suitable can be determined.
Alternativ oder zusätzlich kann sich ein zu bestimmender oder anzupassender Zeitparameter auf zumindest ein Event (Ereignis), insbesondere ein vorausermitteltes Ereignis und/oder ein Event einer bestimmten Art oder ein Event mit einem bestimmten Prioritätsmaß beziehen oder bezogen werden. Bevorzugt kann es sich um ein Event im Kontext des Wohnraums bzw. des Hauses oder einer darin anwesenden Personen handeln. Ein solches Event (Ereignis) kann aber auch ein Fernmeldesignal sein oder es kann aus einem Internetdienst oder aus Daten eines Hausnetzwerks ermittelt werden. Beispielsweise kann der Zeitparameter einen zeitlichen Rahmen in Relation zu einem bestimmten Event oder einem Event einer bestimmten Art kennzeichnen. Beispielsweise kann ein Zeitparameter bestimmt werden, der repräsentieret, dass ein (bestimmter) Abschnitt des auszugebenden Audiosignals und/oder die zumindest eine (bestimmte) auditive Meldung nicht früher als ein Zeitwert und/oder nicht später als ein Zeitwert ausgegeben werden soll, wobei sich der Zeitwert auf einen bestimmten Event bezieht, z.B. in Relation zu dem Event, z.B. in Sekunden, ausgedrückt wird.Alternatively or additionally, a time parameter to be determined or adapted can relate to or be referred to at least one event (event), in particular a pre-determined event and / or an event of a specific type or an event with a specific priority measure. Preferably, it can be an event in the context of the living space or the house or a person present therein. However, such an event can also be a telecommunication signal or it can be determined from an Internet service or from data of a home network. For example, the time parameter may identify a time frame in relation to a particular event or event of a particular type. For example, a time parameter may be determined that represents that a (particular) portion of the audio signal to be output and / or the at least one (specific) auditory message should not be output earlier than a time value and / or later than a time value Time value refers to a specific event, eg in relation to the event, e.g. in seconds.
Ein oder mehrere Zeitparameter zur Ausgabe zumindest eines Abschnitts des zumindest einen auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung kann sich im Verfahren insbesondere auf bestimmte Abschnitte des Audiosignals, bestimmte Kanäle des Audiosignals, bestimmte Arten der zumindest einen auditiven Meldung, und/oder auf einen Teil des Audiosignals bzw. der zumindest einen auditiven Meldung mit einem bestimmten Inhalt und/oder mit einer bestimmten Art von Inhalten beziehen.One or more time parameters for outputting at least a portion of the at least one audio signal to be output and / or the at least one auditory message may be in the method in particular to certain sections of the audio signal, certain channels of the audio signal, certain types of at least one auditory message, and / or refer a part of the audio signal or the at least one auditory message with a specific content and / or with a certain type of content.
Alternativ oder zusätzlich kann das Erzeugen eines weiteren im Wohnraum hörbaren akustischen Inhalts, z.B. eines Betriebsgeräuschs einer Vorrichtung des Hauses (soweit steuerbar) abhängig von einem Parameter der besagten Kommunikation und/oder vom Erzeugen der zumindest einer auditiven Meldung und/oder von er Ausgabe zumindest eines Abschnitts des auszugebenden Audiosignals beeinflusst werden erfolgen. Beispielsweise kann im Verfahren ein oder mehrere Parameter, z.B. umfassend einen Zeitparameter einer mit einem bestimmten Betriebsgeräusch verbundene Betriebsphase einer Vorrichtung verändert oder angepasst werden. Dabei kann eine einen Betriebsgeräusch umfassende Betriebsphase einer Vorrichtung z.B. nicht früher als ein bestimmter Zeitwert und/oder nicht später als ein bestimmter Zeitwert veranlasst werden soll, wobei sich der Zeitwert von einem oder mehreren Parameter der besagten Kommunikation abhängt.Alternatively or additionally, the generation of another acoustic content audible in the living space, e.g. an operating noise of a device of the house (as far as controllable) depending on a parameter of said communication and / or by generating the at least one auditory message and / or he output of at least a portion of the output audio signal to be influenced. For example, in the method, one or more parameters, e.g. comprising changing or adjusting a time parameter of an operating phase of a device associated with a particular operating noise. In this case, an operating phase of an apparatus comprising an operating sound may be e.g. not earlier than a certain time value and / or later than a certain time value, the time value depending on one or more parameters of said communication.
Eine weitere zweckmäßige Ausgestaltung sieht vor, dass eine Reihenfolge zumindest zweier, insbesondere zumindest zwei unterschiedliche Inhalte repräsentierender, auditiver Meldungen oder Abschnitte auditiver Meldungen, abhängig von einem ermittelten, bevorzugt prädizierten Parameter der Kommunikation insbesondere einem Kommunikationsvorhaben und/oder einer Stimme zumindest einer Person und/oder einer erkannten Szene im Wohnraum, bestimmt, insbesondere verändert wird. Beispielsweise kann dabei das Anpassen eines, mehrere unterschiedliche Inhalte repräsentierenden, auszugebenden auditiver Meldungen oder Abschnitte auditiver Meldungen derart erfolgen, dass die entsprechenden Datenabschnitte zur Ausgabe jeweiliger Abschnitte oder repräsentierend jeweils unterschiedliche Inhalte, in einer veränderten Reihenfolge eingelesen oder ausgegeben werden. Bevorzugt kann eine auditiven Meldung bereits vor ihrer Ausgabe, z.B. einige Sekunden vor der Ausgabe in Form mehrerer Abschnitte bzw. der Daten zur Generierung mehrerer Sprachabschnitte ermittelt und dann abhängig von den Parametern der Kommunikation, insbesondere abhängig davon ob oder wie gut ein prädizierter Parameter der Kommunikation sich bestätigt hat, ausgegeben werden. A further expedient embodiment provides that a sequence of at least two auditory messages or sections of auditory messages representing at least two different contents depends on a determined, preferably predicated parameter of the communication, in particular a communication project and / or a vote of at least one person and / or or a recognized scene in the living room, determined, in particular, is changed. For example, it is possible to adapt an auditory message or sections of auditory messages that represent a plurality of different contents in such a way that the corresponding data sections are read or output in a changed order for the purpose of outputting respective sections or representing respectively different contents. Preferably, an auditory message can already be determined before its output, eg a few seconds before the output, in the form of several sections or the data for generating several voice sections and then depending on the parameters of the communication, in particular depending on whether or how well a predicted parameter of the communication has been confirmed.
Zweckmäßigerweise wird im Verfahren eine solche Reihenfolge der Ausgabe von zumindest zwei auditiven Meldung oder von zumindest zwei Abschnitten einer auditiven Meldung oder von zwei unterschiedlichen auszugebenden Audiosignalen oder von zwei Abschnitten des auszugebenen Audiosignals oder von zumindest einem Abschnitt des Audiosignals und zumindest eines Abschnitts einer auditiven Meldung gewählt werden, bei der die insgesamt auszugebende Information (bzw. Inhalte) in möglichst wenig Abschnitte zerlegt werden muss und/oder eine zweckmäßige Länge der Pausen zwischen der besagten Kommunikation und der zumindest einer Ausgabe eines Abschnitts der auditiven Meldung und/oder des auszugebenden Audiosignals eingehalten wird.Conveniently, the method selects such an order of outputting at least two auditory messages or at least two sections of an auditory message or two different audio signals to be output, or two sections of the audio signal to be output or at least a portion of the audio signal and at least a portion of an auditory message in which the total information (or content) to be output must be broken down into as few sections as possible and / or an appropriate length of the pauses between said communication and the at least one output of a portion of the auditory message and / or the audio signal to be output ,
Auch kann die besagte Reihenfolge der Ausgabe der Abschnitte derart gewählt werden, dass die Ähnlichkeit, Kompatibilität, oder eine vorausbestimmte (z.B. logische, inhaltliche) Relation zu zumindest zwei nacheinander ausgegebenen Abschnitten (eines oder mehreren auszugebenden Audiosignale, auditiver Meldungen) vergrößert wird und/oder nicht hinreichend ähnliche, explizit unähnliche, nicht (auch thematisch) zueinander kompatible Abschnitte möglichst nicht nacheinander ausgegeben werden. Beispielsweise wird die Reihenfolge derart bestimmt oder angepasst, dass, verhältnismäßig harte Übergänge zwischen zumindest zwei Inhalten vermieden werden und/oder eine Ähnlichkeit, Kompatibilität, oder eine vorausbestimmte (z.B. logische, inhaltliche) Relation zu der zumindest zwei nacheinander ausgegebenen Abschnitte vergrößert wird. Die Ähnlichkeit, Kompatibilität oder weitere in diesem Zusammenhang anwendbaren Kriterien können beispielsweise hinterlegt werden und/oder nach einer vorausbestimmten Logik bzw. hinterlegten Assoziationsverbindungen bestimmt werden. Das Ermitteln der besagten Abschnitte und/oder das Bestimmen oder Anpassen der Reihenfolge kann oder können einer hinterlegten Assoziationsvorschrift, Assoziationslogik, einer Datenbank repräsentierend unterschiedlich starke (Assoziations-) Zuordnungen zwischen diversen möglichen Inhalten, Quellen, Informationen einer auditiven Meldung einerseits und Themen, Wörtern, typischen Satzstrukturen, Kommunikationsverhaltensmuster, Kombination aus den zumindest zwei im Rahmen der besagten Kommunikation kommunizierenden Personen im Wohnraum, etc. andererseits, ermittelt werden.Also, the said order of output of the sections may be selected such that the similarity, compatibility, or a predetermined (eg, logical, content) relation to at least two consecutively output sections (one or more audio signals to be output, auditory messages) is increased and / or not sufficiently similar, explicitly dissimilar, not (also thematically) compatible sections as possible not be issued sequentially. For example, the order is determined or adjusted such that relatively hard transitions between at least two contents are avoided and / or a similarity, compatibility, or a predetermined (e.g., logical, contentual) relation to the at least two consecutively outputted portions is increased. The similarity, compatibility or other applicable criteria in this context, for example, can be deposited and / or determined according to a predetermined logic or deposited association compounds. The determination of said sections and / or the determination or adaptation of the order may or may be based on association rules, association logic, a database representing different strong (association) associations between various possible contents, sources, information of an auditory message on the one hand, and topics, words, typical sentence structures, communication behavior pattern, combination of at least two in the context of said communication communicating people in the living room, etc. on the other hand, are determined.
Gemäß einer zweckmäßigen Ausgestaltung wird eine Ausgabe des zumindest einen auszugebenden Audiosignals pausiert und/oder das Audiosignal wird in zumindest zwei Abschnitte aufgeteilt, und/oder werden die in zwei Abschnitten eines oder mehreren auszugebenden Audiosignale enthaltenen Inhalte oder ihnen jeweils zugeordneten Daten zusammengefügt, verrechnet oder kombiniert. Dies kann abhängig von zumindest einem aktuellen Parameterwert, aus einem Parameterwert aus der (nahen) Vergangenheit und/oder abhängig von einem für die (nahe) Zukunft prädizierten Parameter der besagten Kommunikation erfolgen. Dabei kann der zumindest ein Parameter der besagten Kommunikation bevorzugt ein inhaltliches Merkmal und/oder einen linguistischen Parameter der Kommunikation kennzeichnen.According to an expedient embodiment, an output of the at least one audio signal to be output is paused and / or the audio signal is divided into at least two sections, and / or the contents contained in two sections of one or more audio signals or their associated data are merged, offset or combined , Depending on at least one current parameter value, this can take place from a parameter value from the (near) past and / or depending on a parameter of said communication predicated on the (near) future. In this case, the at least one parameter of said communication may preferably characterize a content-related feature and / or a linguistic parameter of the communication.
Ein oder mehrere Parameter für das Pausieren, Aufteilen einer auditiven Meldung, insbesondere einer Sprachmitteilung und/oder für das Zusammenfügen oder Kombination von zumindest zwei Audiosignale, Abschnitte zumindest eines Audiosignals, oder und/oder als auditive Meldung ausgegebener Inhalte kann abhängig von zumindest einem inhaltlichen Merkmal und/oder einem linguistischen Parameter der sprachlichen Kommunikation zwischen zumindest zwei Personen im Wohnraum bestimmt werden.One or more parameters for pausing, dividing an auditory message, in particular a voice message and / or for the combination or combination of at least two audio signals, portions of at least one audio signal, and / or output as an auditory message depending on at least one content-related feature and / or a linguistic parameter of the linguistic communication between at least two persons in the living space.
Eine Prädiktion eines, insbesondere inhaltlichen Merkmals der besagten Kommunikation kann dabei aus einem bisherigen Inhalt der Kommunikation, einer Kommunikation aus der Historie, aus der Art der zumindest einen letzten oder aktuellen Transaktion und/oder abhängig von den Lerndaten, Historiendaten und/oder einem Kommunikationsmodell bzw. einem Zustand eines solchen Modells prädiziert werden.A prediction of a, in particular content-related, feature of said communication can be based on a previous content of the communication, a communication from the history, the type of at least one last or current transaction and / or depending on the learning data, history data and / or a communication model or a state of such a model can be predicted.
Beispielsweise kann das zumindest ein auszugebende Audiosignal abhängig von einem ermittelten Parameter der Kommunikation (z.B. abhängig von einem inhaltlichen Parameter der Kommunikation) für eine gewisse Zeit pausiert werden. Dies kann insbesondere von einer und/oder bis zu einer (bereits als Inhalt oder bestimmte Datenabschnitte ermittelte), an geeigneten Stelle innerhalb des Audiosignals erfolgen. Nach dem Ende eines Abschnitts der Kommunikation, z.B. nach dem Ende einer Phrase, einer oder mehrerer Transaktionen innerhalb der besagten Kommunikation, kann zumindest ein Abschnitt des Audiosignals, insbesondere von derselben Stelle wiedergegeben werden oder, oder neu, ggf. in einer aktualisierten Form erzeugt werden, oder zumindest teilweise, in einem zweckmäßigen Umfang wiederholt werden.For example, the at least one audio signal to be output depends on a determined parameters of the communication (for example, depending on a content-related parameter of the communication) for a certain time to be paused. This can be done in particular from one and / or up to one (already determined as content or specific data sections) at a suitable location within the audio signal. After the end of a portion of the communication, eg after the end of a phrase, one or more transactions within the said communication, at least a portion of the audio signal, in particular from the same location, can be reproduced or, or newly, possibly generated in an updated form , or at least partially, to a reasonable extent.
Beispielsweise kann abhängig von der Art und/oder dem Inhalt eines Abschnitts der besagten Kommunikation erfolgen:
- - ein sofortiges Pausieren, ein Pausieren nach Ende eines Satzes, einer Phrase oder einer bestimmten linguistischen Struktur;
- - ein Aufteilen des zu übermittelnden Inhalts, der mittels des auszugebenen Audiosignals oder der zu dem Audiosignal zugeordneter oder der mit dem Audiosignal zusammenhängender Daten. Das Aufteilen kann, z.B. auf zumindest Abschnitte des Audiosignals erfolgen, wobei diese, bevorzugt bei jeweils zumindest zwei unterschiedlichen Bedingungen, ausgegeben werden;
- - ein Verändern, insbesondere ein Bestimmen einer Reihenfolge zur Ausgabe zumindest zweier Abschnitte zumindest eines auszugebenden Audiosignals und/oder eines Abschnitts des auszugebenen Audiosignals und der zumindest einen auditiven Meldungen;
- - Zusammenfügen oder Kombinieren zumindest zwei auszugebender Inhalte in einem Audiosignal oder in nacheinander auszugebende Abschnitte eines oder mehreren Audiosignale.
- - Zusammenfügen oder Kombinieren zumindest einer auditiven Meldung und eines Abschnitts des einen oder mehrerer weiteren auszugebenden Audiosignale.
- - Verrechnen von zumindest zwei auszugebenden Audiosignalen von zumindest zwei unterschiedlichen Arten und/oder mit wesentlich unterschiedlichen Inhalten zu einem Raumklangsignal oder einem mehrkanaligen, z.B. entsprechend kodierten, Audiosignals, z.B. zu einem Multiraum-Audiosignals.
- - an immediate pause, a pause after the end of a sentence, a phrase or a particular linguistic structure;
- - Dividing the content to be transmitted, by means of the output audio signal or associated with the audio signal or related to the audio signal data. The splitting can take place, for example, on at least sections of the audio signal, these being output, preferably at at least two different conditions;
- a modification, in particular a determination of an order for outputting at least two sections of at least one audio signal to be output and / or a section of the audio signal to be output and the at least one auditory message;
- Combining or combining at least two contents to be output in an audio signal or in successive sections of one or more audio signals to be output.
- Merging or combining at least one auditory message and a portion of the one or more further audio signals to be output.
- - Compute at least two audio signals to be output from at least two different types and / or with substantially different contents to a surround sound signal or a multi-channel, eg correspondingly encoded, audio signal, for example to a multi-room audio signal.
Ferner kann (in einer analogen Weise) ein Zusammenfügen oder Kombinieren von zumindest zwei Abschnitten zumindest eines auszugebenden Audiosignals und/oder von zwei auditiven Meldungen aneinander oder Verrechnen miteinander erfolgen. Dabei kann im Verfahren eine beliebige, zweckmäßige Form des Zusammenfügens oder des Kombinierens bestimmt werden.Furthermore, an aggregation or combination of at least two sections of at least one audio signal to be output and / or of two auditory messages to each other or to each other can take place (in an analogous manner). In this case, any suitable form of assembly or combination can be determined in the process.
Dabei können eine oder mehrere auditive Meldungen und/oder ein oder mehrere Abschnitte des auszugebenden Audiosignals abhängig von dem zumindest einem ermittelten Parameter der Kommunikation beispielsweise nahtlos aneinander angefügt, mit einem definierten Übergang, z.B. einem Übergangseffekt versehen werden. Bei zumindest einem Abschnitt oder zumindest zwei solchen Abschnitten des auszugebenden Audiosignals und/oder der auditiven Meldungen kann es sich um vorher angehaltene, pausierte, aufgeteilte, und/oder zwischengespeicherte und/oder in einer Warteschlange befindliche Abschnitte bzw. Daten zur Ausgabe der zumindest einen auditiver Meldung handeln.In this case, one or more auditory messages and / or one or more sections of the audio signal to be output can, for example, be added to one another seamlessly, depending on the at least one determined parameter of the communication, with a defined transition, e.g. be provided a transition effect. At least one section or at least two such sections of the audio signal to be output and / or the auditory messages may be previously paused, paused, split, and / or cached and / or queued sections or data for outputting the at least one auditory Act message.
Ferner kann im Verfahren auch ein Ermitteln, insbesondere Prädizieren eines weiteren akustischen Inhalts im Wohnraum, insbesondere unter Berücksichtigung von zumindest zwei unterschiedlichen, bevorzugt jedoch von allen wesentlichen akustischen Inhalten, und daraufhin eine Prädiktion von einem oder mehreren zeitlichen Intervallen erfolgen, welche zur Ausgabe des zumindest einen (bestimmten) Audiosignals bzw. eines (vorausbestimmte Kriterien, z.B. Abspieldauer, Thema, Genre, erfüllenden) Abschnitts des Audiosignals und/oder der zumindest einen (bestimmten) auditiven Meldung oder einer (vorausbestimmte Kriterien, z.B. eine erforderliche Ausgabedauer, Thema, Bezug, erfüllenden) auditiven Meldung, geeignet sind. Ein solcher akustischer Inhalt kann auch einer Soundemission, einem Betriebsgeräusch eines im Haus betriebenen Vorrichtung oder Geräts entsprechen. Beispielsweise kann es sich um ein Haushaltsgerät, ein Küchengerät, etc. handeln. Dabei kann ein oder mehrere Parameter des besagten akustischen Inhalts ermittelt oder prädiziert werden im etwa analog oder sinngemäß wie dies mit den Parametern der besagten Kommunikation erfolgt. Beispielsweise können zwei oder mehrere Zeitparameter zur Ausgabe eines oder mehrerer auditiver Meldungen und/oder eines oder mehrerer Abschnitte des weiteren Audiosignals abhängig von zumindest einem, insbesondere prädizierten Parameter der besagten Kommunikation und zumindest einem, insbesondere prädizierten Parameter zumindest eines weiteren akustischen Inhalts bestimmt werden. Beispielsweise kann eine Aufteilung der auditiven Meldung und/oder eines Abschnitts des Audiosignals in zumindest zwei Abschnitte und/oder ihre darauffolgende Ausgabe erfolgen, abhängig von den Zeitparametern kennzeichnend geeignete und/oder ungeeignete Zeitintervalle, die unter Berücksichtigung ermittelter oder prädizierter akustischer Inhalte im Wohnraum bestimmt werden.Furthermore, in the method also a determination, in particular predication of a further acoustic content in the living space, in particular taking into account at least two different, but preferably of all essential acoustic content, and then a prediction of one or more temporal intervals take place, which for the output of at least a (specific) audio signal or a (predetermined criteria, eg playing time, theme, genre, fulfilling) portion of the audio signal and / or the at least one (specific) auditory message or one (predetermined criteria, eg a required issue duration, subject, reference, fulfilling) auditory message. Such acoustic content may also correspond to sound emission, operating noise of a home-operated device or device. For example, it may be a household appliance, a kitchen appliance, etc. In this case, one or more parameters of the said acoustic content can be determined or predicted in a manner analogous or analogous to what happens with the parameters of said communication. By way of example, two or more time parameters for outputting one or more auditory messages and / or one or more sections of the further audio signal can be determined as a function of at least one, in particular predicated, parameter of said communication and at least one, in particular predicated, parameter of at least one further acoustic content. For example, a division of the auditory message and / or a portion of the audio signal in at least two sections and / or their subsequent output can be made depending on the time parameters characteristically suitable and / or inappropriate time intervals, which are determined taking into account determined or predicted acoustic content in the living room ,
Dabei kann zwischen einem im Wohnraum erzeugten und einem von außen kommenden (und im Wohnraum hörbaren) akustischen Inhalt unterschieden werden. Auch kann ein Prioritätsmaß eines jeweiligen akustischen Inhalts ermittelt, eingeschätzt und berücksichtigt werden. Ein solcher akustischer Inhalt kann, z.B. eine eingelernte oder wiedererkannte Stimme eines Kindes oder des Haustiers einer bestimmten Art, z.B. aus dem Garten oder vom Balkon, ein Hilferuf, ein „Mama-Ruf“ eines Kindes und Dergleichen sein. Bevorzugt kann auch die Art des akustischen Inhalts nach vorausbestimmten Kriterien klassifiziert werden und abhängig von der Art des akustischen Inhalts (mit oder ohne einen Parameter der besagten Kommunikation) wird ein jeweils unterschiedliches Bestimmen der Parameter (des auszugebenden Audiosignals und/oder der zumindest einer auditiven Meldung) oder unterschiedliche Varianten zum Bestimmen der besagten Parameter angewandt. Z.B. wird dabei ein jeweils unterschiedlicher Einfluss auf das Bestimmen des Zeitpunkts zur Ausgabe der auditiven Meldung oder eines Abschnitts der auditiven Meldung festgelegt. In this case, it is possible to distinguish between an acoustic content generated in the living space and an audible (and audible in the living room) coming from outside. Also, a priority measure of a respective acoustic content can be determined, estimated and taken into account. Such acoustic content may be, for example, a learned or recognized voice of a child or pet of a particular species, eg, from the garden or the balcony, a cry for help, a "mummy call" of a child, and the like. Preferably, the type of acoustic content may also be classified according to predetermined criteria and, depending on the type of acoustic content (with or without a parameter of said communication), a different determination of the parameters (of the audio signal to be output and / or the at least one auditory message ) or different variants for determining said parameters. For example, a different influence on the determination of the time for the output of the auditory message or a portion of the auditory message is determined.
Gemäß einer zweckmäßigen Ausgestaltung umfasst zumindest eine auditive Meldung eine Sprachmitteilung, wobei die Sprachmitteilung abhängig von einem inhaltlichen, insbesondere linguistischen Parameter der besagten Kommunikation stilistisch hinsichtlich der Stimme (Ausgabestimme) und/oder Tonlage und/oder des Untertons, in denen zumindest ein Teil der Sprachmitteilung ausgegeben wird, angepasst wird. Ferner kann die besagte Sprachmitteilung auch abhängig vom Inhalt, Genre, Melodie, Sprechart zumindest eines Abschnitts des (nahezu im selben Zeitintervall) auszugebenden Audiosignals angepasst werden. Dabei kann ein, insbesondere ein bei einer Sprachgenerierung anzuwendender, Parameter, der eine Stimmeneigenschaft und/oder eine Stilrichtung, Tonlage, einen (simulierten bzw. künstlich erzeugten) Unterton einer entsprechenden, in sprachlicher Form generierten auditiven Mitteilung kennzeichnet, angepasst werden.According to an expedient embodiment, at least one auditory message comprises a voice message, the voice message depending on a content, in particular linguistic parameters of said communication stylistically in terms of voice (output voice) and / or pitch and / or undertone, in which at least a part of the voice message is output, is adjusted. Furthermore, the said voice message can also be adapted depending on the content, genre, melody, speech type of at least a portion of the audio signal to be output (almost in the same time interval). In this context, a parameter, in particular a parameter to be used in a speech generation, which characterizes a voice characteristic and / or a style direction, pitch, a (simulated or artificially generated) undertone of a corresponding auditory message generated in linguistic form can be adapted.
Beispielsweise können eine oder mehrere Sprachmitteilungen abhängig von dem ermittelten inhaltlichen Merkmal der besagten Kommunikation und/oder des auszugebenden (kurz vorher wiedergegebenen, aktuell ausgegebenen oder in der nahen Zukunft möglicherweise ausgabebereiten) Audiosignal nach einer vorausbestimmten Logik bzw. Gesetzmäßigkeit stilistisch, hinsichtlich ihrer Stimme und/oder ihrer Tonlage und/oder einem Unterton und/oder einen Kommunikationsverhalten, von dem diese gekennzeichnet sind, angepasst werden.For example, one or more voice messages may be stylistically, in terms of voice, and / or output (shortly before played, currently issued, or possibly output in the near future) depending on the determined content characteristic of the said communication and / or legitimacy. or their pitch and / or undertone and / or communication behavior that characterizes them.
Die Tonlage und/oder der Inhalt der auditiven Meldung können beispielsweise derart angepasst werden, dass ein zweckmäßiges, z.B. ein mehr oder minder höfliches, stilistisch passendes Einfügen in oder zwischen die besagte Kommunikation und/oder zu dem Inhalt des zumindest eines Audiosignals erfolgt. Dabei kann die auditive Meldung abhängig von einem oder mehreren Parameter der besagten Kommunikation und/oder von einem im Verfahren angepassten oder nicht angepassten Parameter eines Abschnitts des Audiosignals, z.B. hinsichtlich ihrer Wortwahl, Ton, Stimme oder linguistischem Parameter variiert werden. Beispielsweise kann eine Anpassung unter Berücksichtigung eines Kommunikationsmodells, z.B. eines Modells basierend auf einer sogenannten Transaktionsanalyse oder einem sog. SR (Stimulus-Response)-Modell bestimmt werden. Dabei können beispielsweise dem Fachmann bekannte fünf sogenannte „Ich-Zustände“ eines Menschen und die entsprechenden typischen Aktionen, Reaktionen, Gesten, Worte berücksichtigt bzw. nachgebildet werden. Beispielsweise wird im Verfahren ein aktiver „Ich-Zustand“ zumindest eine Person im Wohnraum erkannt und im Verfahre berücksichtigt.The pitch and / or the content of the auditory message may be adjusted, for example, such that a convenient, e.g. a more or less polite, stylistically fitting insertion into or between the said communication and / or the content of the at least one audio signal. In this case, the auditory message may be dependent on one or more parameters of the said communication and / or on a parameter adapted or unadjusted in the method of a portion of the audio signal, e.g. be varied in terms of their choice of words, tone, voice or linguistic parameter. For example, an adaptation may be made taking into account a communication model, e.g. of a model based on a so-called transaction analysis or a so-called SR (stimulus-response) model. For example, five so-called "ego states" known to the person skilled in the art and the corresponding typical actions, reactions, gestures, words can be taken into account or simulated. For example, in the method, an active "I-state" at least one person in the living room is recognized and taken into account in the process.
Beispielsweise kann die zumindest eine auditive Meldung erzeugt werden, die zumindest einen Abschnitt der besagten Kommunikation (in einer vorausbestimmten Weise) kommentiert und/oder mit diesem nach vorausbestimmten Kriterien assoziierte Informationen bzw. Inhalte umfasst. Beispielsweise kann die zumindest eine auditive Meldung erzeugt werden, die zumindest einen Abschnitt des auszugebenden Audiosignals kommentiert und/oder mit diesem nach vorausbestimmten Kriterien assoziierte Informationen bzw. Inhalte umfasst.For example, the at least one auditory message may be generated that annotates (at least a portion of) said communication (and in a predetermined manner) and / or includes information or content associated therewith according to predetermined criteria. For example, the at least one auditory message can be generated which comments on at least a portion of the audio signal to be output and / or comprises information or content associated therewith according to predetermined criteria.
Beispielsweise können eine oder mehrere auditive Mitteilungen unter Berücksichtigung eines, bevorzugt auf einer Transaktionsanalyse oder einem SR-Modell (= Stimulus-Response Modell) basierenden, Kommunikationsmodells und/oder einer zu zumindest einer anwesenden Person anwendbares Persönlichkeitsmodells, erzeugt bzw. angepasst werden. Beispielsweise kann das Anpassen bzw. Erzeugen derart erfolgen, dass
- - einem psychischen Bedürfnis zumindest einer Person im Wohnraum entsprochen wird, und/oder
- - ein Informationsaustausch zwischen den zwei Personen im Wohnraum durch die Ausgabe einer angepassten auditiven Meldung verbessert, insbesondere optimiert, wird, und/oder
- - ein bestimmtes Kommunikationsziel zwischen einer Person und einer Sprachsteuerungsapplikation gefördert wird, und/oder
- - ein bestimmtes Kommunikationsziel (Einigung, Harmonie, fließende Kommunikation, Hinweis auf eine Unstimmigkeit oder ein Problem, Auffindung eines Problems) zwischen zumindest zwei Personen im Wohnraum gefördert wird, und/oder
- - ein emotionaler Ausgleich zumindest einer der zwei besagten Personen im Wohnraum gefördert wird.
- - a mental need of at least one person in the living space is met, and / or
- an information exchange between the two persons in the living space is improved, in particular optimized, by the issuance of an adapted auditory message, and / or
- a particular communication goal between a person and a voice control application is promoted, and / or
- - a specific communication goal (agreement, harmony, fluent communication, indication of a discrepancy or problem, finding a problem) between at least two Persons in the living space is promoted, and / or
- - an emotional balance of at least one of the two persons in the living space is promoted.
Gemäß einer zweckmäßigen Ausgestaltung wird ein Parameter der Körpersprache zumindest einer an der Kommunikation im stationären Wohnraum beteiligten Person, die insbesondere an der besagten Kommunikation aktiv beteiligt ist, erfasst und daraufhin zumindest ein Parameter des im stationären Wohnraum auszugebenden Audiosignals und/oder ein inhaltlicher Parameter der zumindest einen auditiven Meldung abhängig von dem erfassten Parameter der Körpersprache bestimmt oder angepasst wird. Auch kann ein Parameter betreffend Ausgabe einer mit zumindest einem Abschnitt des auszugebenden Audiosignals oder mit der (auszugebenden) auditiven Meldung zusammenhängende Information abhängig von zumindest einem Parameter der Körpersprache bestimmt oder angepasst werden. Mit anderen Worten kann abhängig von dem zumindest einem Parameter der Körpersprache eine Ausgabe einer mit zumindest einem Abschnitt des auszugebenden Audiosignals oder mit der (auszugebenden) auditiven Meldung zusammenhängenden Information, insbesondere mit einem bestimmten oder angepassten Parameter, z.B. für zumindest ein betreffendes Zeitintervall veranlasst werden.According to an expedient refinement, a parameter of the body language of at least one person involved in the communication in the stationary living space, who is actively involved in particular in said communication, is detected and then at least one parameter of the audio signal to be output in the stationary living space and / or a content parameter of the at least an auditory message is determined or adjusted depending on the detected body language parameter. Also, a parameter concerning output of information associated with at least a portion of the audio signal to be output or with the auditory message (to be outputted) may be determined or adjusted depending on at least one parameter of the body language. In other words, depending on the at least one parameter of the body language, an output of information related to at least a portion of the audio signal to be output or to the auditory message to be output, in particular to a particular or adjusted parameter, e.g. be prompted for at least one relevant time interval.
Dabei kann der besagte Parameter der Körpersprache abhängig von der Gestik und/oder Mimik und/oder einer weiteren körperlichen Regung zumindest einer an der Kommunikation beteiligten Person im Wohnraum ermittelt werden. Beispielsweise kann ein Parameter der Körpersprache auf Basis von einem Veränderungsmuster bzw. einem zeitlichen Muster der Veränderung der Gestik, Mimik oder der körperlichen Regung ermittelt werden. Beispielsweise kann der Parameter der Körpersprache einem von insgesamt bis zu 4, 16, 32, 64 erkennbaren unterschiedlichen Mustern entsprechen. Bevorzugt erfolgt im Verfahren eine Auswertung einer, insbesondere aktuellen, kontextbezogenen Bedeutung der Körpersprache, wobei bevorzugt zumindest ein Parameter der Gestik, Mimik, Körperpose, einer an der Kommunikation beteiligten Person und zumindest ein Parameter der Gestik, Mimik, Körperpose einer weiteren an der Kommunikation beteiligten Person ausgewertet wird. Der besagte Kontextbezug kann dabei z.B. abhängig von einem Parameter der Szene im Wohnraum, z.B. einem Erkennen oder Wiedererkennen einer bestimmten Klasse der Szene im Wohnraum, einer Aktion innerhalb einer Szene, bestimmt werden.In this case, said parameter of the body language can be determined depending on the gestures and / or facial expressions and / or a further physical emotion of at least one person involved in the communication in the living space. For example, a parameter of the body language may be determined based on a change pattern or a temporal pattern of the change of the gesture, facial expression, or physical emotion. For example, the body language parameter may correspond to one of a total of up to 4, 16, 32, 64 recognizable different patterns. Preferably, in the method an evaluation of a, in particular current, context-related meaning of the body language, wherein preferably at least one parameter of the gestures, facial expressions, body pose, a person involved in the communication and at least one parameter of the gestures, facial expressions, body pose another involved in the communication Person is evaluated. The said context reference may be e.g. depending on a parameter of the scene in the living room, e.g. recognizing or recognizing a particular class of the scene in the living space, an action within a scene.
Bevorzugt kann die anhand der Erfassung und Auswertung der Körpersprache ermittelte Information zusammen mit einem Parameter der etwa gleichzeitig stattfindenden auditiven Kommunikation und/oder einer erkannten Szene berücksichtigt werden. Insbesondere wird daraufhin zumindest ein inhaltliches Merkmal des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung bestimmt.Preferably, the information determined on the basis of the detection and evaluation of the body language can be taken into account together with a parameter of the approximately simultaneous auditory communication and / or a recognized scene. In particular, at least one content-related feature of the audio signal to be output and / or the at least one auditory message is then determined.
Bei der im Verfahren erfassten Parameter der zumindest einen körperlichen Regung, Mimik, Gestik und/oder der Körpersprache (einen Parameter der mit der Körpersprache übermittelbaren Kommunikationsbotschaft) kann es sich um eine bewusste (von der entsprechenden Person bewusst erzeugte oder kontrollierte) Regung und/oder eine unbewusste (von der entsprechenden Person nicht bewusst erzeugte oder nicht kontrollierte oder nicht kontrollierbare) Regung handeln. Insbesondere kann im Verfahren zwischen einer bewussten und unbewussten körperlichen Regung und/oder einen bewussten oder unbewussten körpersprachlichen Botschaft unterschieden werden. Insbesondere wird im Verfahren eine Deutung bzw. Klassifikation der Körpersprache einer oder zweier an der besagten Kommunikation beteiligten Personen ausgeführt und berücksichtigt. Diese kann ein Erkennen (eingelesener oder im Verfahren eingelernter), einer bestimmten Person oder einer Person zugehörig zu einer bestimmten Personengruppe entsprechender Muster umfassen. Beispielsweise können auf Basis der erfassten Körpersprache ein oder mehrere Parameter der Kommunikation, z.B. ein inhaltliches Merkmal einer etwa gleichzeitig (im selben vordefinierten Zeitintervall) stattfindenden sprachlichen Transaktion ermittelt werden. Eine tatsächliche Bedeutung eines Abschnitts der Körpersprache, bzw. einer körpersprachlichen Botschaft kann dabei, muss aber nicht bewertet werden. Eine (technisch verhältnismäßig schwer umsetzbare) Ermitteln bzw. Übersetzen der Körpersprache etwa in Form einer (inhaltlichen) Information kann muss aber nicht ausgeführt werden. Bevorzugt wird der zumindest ein besagter Parameter der Körpersprache zusätzlich zu weiteren, in diesem Dokument beschriebenen Parametern der Kommunikation, der Szene, etc. berücksichtigt werden, insbesondere derart, dass zumindest ein Optimierungskriterium angestrebt wird.The parameters of the at least one physical sensation, facial expressions, gestures and / or body language (a parameter of the communication message conveyable with the body language) can be a conscious (consciously generated or controlled by the corresponding person) and / or act an unconscious (unintentionally generated by the corresponding person or uncontrolled or uncontrollable) impulse. In particular, in the method a distinction can be made between a conscious and unconscious physical impulse and / or a conscious or unconscious body language message. In particular, in the method, an interpretation or classification of the body language of one or two persons involved in said communication is carried out and taken into account. This can include a recognition (read in or learned in the procedure), a specific person or a person belonging to a specific group of people corresponding patterns. For example, based on the detected body language, one or more parameters of the communication, e.g. a content-related feature of a linguistic transaction taking place approximately simultaneously (in the same predefined time interval) can be determined. An actual meaning of a section of the body language, or a body language message, may or may not be evaluated. However, a (technically relatively difficult) determination or translation of body language in the form of (content) information, however, need not be carried out. The at least one said parameter of the body language is preferably taken into account in addition to further parameters of the communication, the scene, etc. described in this document, in particular such that at least one optimization criterion is sought.
Auch kann im Verfahren zumindest ein Parameter des auszugebenden Audiosignals bestimmt werden abhängig von der zumindest einen erkannten körperlichen Regung und einem innerhalb eines bestimmten Zeitintervalls erkannten Schlüsselwort oder einem Kommunikationslaut. Beispielsweise wird im Verfahren zwischen unterschiedlichen Arten der Kommunikationslaute, z.B. Ausrufewort, Interjektion, Zungenschnalzen, Aufschreien, Lachen, Schluchzen, Weinen, Stöhnen, etc. unterschieden. Bevorzugt erfolgt im Verfahren ein Abgleich zwischen einer erfassten Information zu einem oder mehreren erfassten Schlüsselwörtern, Kommunikationslauten und/oder zu einem linguistischen Merkmal einerseits, und der innerhalb eines bestimmten Zeitintervalls erfassten körperlichen Regung, insbesondere eines Musters der körperlichen Regung zumindest einer an der Kommunikation beteiligten Person andererseits. Daraufhin kann ein Anpassen eines oder mehrerer Parameters des auszugebenden Audiosignals abhängig von dem Abgleich ausgeführt werden. Beispielsweise kann im Verfahren ein Maß der Korrelation, Übereinstimmung zwischen der zumindest einen erkannten Gestik, Mimik und zumindest einem Schlüsselwort, einem Kommunikationslaut oder einem ermittelten linguistischen Merkmal, ermittelt und berücksichtigt werden. Die Informationen zu der Gestik, Mimik, weiterer körperlichen Regung, Auswahl, Reihenfolge, Sequenz, Konstellation von Schlüsselwörtern, Interjektionen oder linguistischen Merkmalen können bevorzugt als entsprechende Muster, insbesondere als für eine Person typischen Sequenzen, erkannt, wiedererkannt und im Verfahren berücksichtigt werden.Also, in the method, at least one parameter of the audio signal to be outputted may be determined depending on the at least one detected physical emotion and a key word or a communication tone recognized within a certain time interval. For example, in the method, a distinction is made between different types of communication sounds, eg exclamation word, interjection, tongue snapping, screaming, laughing, sobbing, crying, groaning, etc. In the method, a comparison preferably takes place between recorded information on one or more detected keywords, communication sounds and / or on a linguistic feature on the one hand, and within a specific one Time interval detected physical impulse, in particular a pattern of physical activity of at least one person involved in the communication on the other. Thereupon, adjustment of one or more parameters of the audio signal to be outputted may be performed depending on the adjustment. For example, in the method, a measure of the correlation, correspondence between the at least one recognized gesture, facial expressions and at least one keyword, a communication tone or a determined linguistic feature can be determined and taken into account. The information on the gestures, facial expressions, further physical movement, selection, sequence, sequence, constellation of keywords, interjections or linguistic features can preferably be recognized as corresponding patterns, in particular as sequences typical for a person, recognized and taken into account in the method.
Alternativ oder zusätzlich kann der besagter Abgleich zwischen einem Parameter einer körperlichen Regung und der auditiven Kommunikation einer Person auch auf Basis einer oder mehrerer Kommunikationen der Person aus der Vergangenheit ermittelt und berücksichtigt werden. Dabei können Lerndaten ermittelt der Lerndaten zur Ausführung des Verfahrens bereitgestellt werden. Beispielsweise werden Lerndaten zu einer Person auf Basis der Daten, die bei einer Videotelefonie bzw. Videokonferenz ermittelt, insbesondere eingelernt wurden, zur Ausführung des Verfahrens bereitgestellt bzw. (gezielt) abgerufen werden.Alternatively or additionally, the said reconciliation between a parameter of a physical impulse and the auditive communication of a person may also be determined and taken into account on the basis of one or more communications of the person from the past. In this case, learning data of the learning data for executing the method can be provided. For example, learning data on a person based on the data, which are determined in a video telephony or video conference, in particular, have been trained to be provided for the execution of the method or (targeted) retrieved.
Mit anderen Worten können die Parameter eines Abschnitts des auszugebenden Audiosignals und/oder einer auditiven Meldung, abhängig von einem ermittelten Parameter der Körpersprache, insbesondere unter Berücksichtigung einer im Verfahren ermittelten Übereinstimmung, Korrelation oder eine Zeitverzögerung zwischen der zumindest Parameter der Körpersprache und dem zumindest einen inhaltlichen Merkmal innerhalb einer auditiven Kommunikation zwischen zumindest zwei Personen variiert werden. Auch kann ein Richtungsparameter der besagten Kommunikation abhängig von einer erfassten, bevorzugt interpretierter Körpersprache ermittelt werden.In other words, the parameters of a portion of the audio signal to be output and / or an auditory message, depending on a determined parameter of the body language, in particular taking into account a match determined in the method, correlation or a time delay between the at least parameters of the body language and the at least one content Characteristic within an auditory communication between at least two persons are varied. Also, a direction parameter of said communication can be determined depending on a detected, preferably interpreted body language.
Gemäß einer zweckmäßigen Ausgestaltung wird abhängig von einer linguistischen Auswertung und/oder inhaltlichen Auswertung zumindest eines Abschnitts der besagten Kommunikation ein Prädizieren eines zeitlichen Verlaufs der weiteren Kommunikation oder einer nachfolgenden Kommunikation ausgeführt und beim Bestimmen oder Anpassen eines Parameters des auszugebenden Audiosignals und/oder der zumindest einer auditiven Meldung berücksichtigt. Beispielsweise wird abhängig von einer linguistischen Auswertung und/oder inhaltlichen Auswertung zumindest eines Abschnitts der besagten Kommunikation ein Ermitteln, insbesondere Prädizieren eines oder mehrerer zeitlichen Parameter, insbesondere kennzeichnend einen zeitlichen Verlauf der weiteren Kommunikation oder einer nachfolgenden Kommunikation ausgeführt und zumindest ein ermittelter zeitlicher Parameter beim Bestimmen oder Anpassen eines Parameters des auszugebenden Audiosignals und/oder der zumindest einer auditiven Meldung berücksichtigt. Beispielsweise kann sich das Prädizieren eines oder mehrerer zeitlichen Parameter auf eine Stimme zumindest eines Sprechers beziehen. Beispielsweise kann daraufhin auf Basis des einen oder mehrerer ermittelten zeitlichen Parameter, insbesondere eines prädizierten zeitlichen Verlaufs der weiteren oder der nachfolgenden Kommunikation ein Zeitparameter zur Ausgabe eines Abschnitts des weiteren Audiosignals und/oder der zumindest einen auditiven Meldungen bestimmt werden.According to an expedient embodiment, depending on a linguistic evaluation and / or content evaluation of at least a portion of the said communication, a prediction of a time profile of the further communication or a subsequent communication is carried out and when determining or adjusting a parameter of the audio signal to be output and / or the at least one auditory notification. For example, depending on a linguistic evaluation and / or content evaluation of at least a portion of said communication, determining, in particular predicating one or more temporal parameters, in particular characterizing a temporal course of the further communication or a subsequent communication and at least one determined temporal parameter in determining or adjusting a parameter of the audio signal to be outputted and / or the at least one auditory message. For example, predicting one or more temporal parameters may refer to a voice of at least one speaker. By way of example, a time parameter for outputting a section of the further audio signal and / or the at least one auditory message can then be determined on the basis of the one or more determined temporal parameters, in particular a predicted chronological progression of the further or subsequent communication.
Derartige Parameter können im Verfahren beispielsweise in Form qualitativer und/oder quantitativer Maße erkannt, ausgewertet und berücksichtigt werden. Dabei kann ein Spracherkennungsverfahren oder eine spezielle Weiterbildung eines Spracherkennungsverfahrens verwendet werden, wobei das Ergebnis der Ausführung eines solchen Verfahrens nicht etwa zur Interpretation oder Verwandlung der Sprache in eine textuelle Information oder zur Ausführung eines Befehls, sondern zum Verändern bzw. Anpassen eines Abschnitts des auszugebenden Audiosignals abhängig von der (beiläufig) stattfindenden Kommunikation zwischen zumindest zwei Personen im Wohnraum verarbeitet wird.Such parameters can be recognized, evaluated and taken into account in the method, for example in the form of qualitative and / or quantitative measures. In this case, a speech recognition method or a specific development of a speech recognition method can be used, the result of the execution of such a method not for interpreting or transforming the speech into textual information or for executing a command but for modifying a portion of the audio signal to be output is processed depending on the (casual) communication between at least two people in the living room.
Alternativ oder zusätzlich kann ein räumlicher (auf den Raum: Positionen, Richtungen bezogener) Parameter der besagten Kommunikation, insbesondere ein Richtungsparameter der besagten Kommunikation ermittelt werden. Daraufhin ein räumlicher Parameter, ein Raumklangparameter oder ein Parameter kennzeichnend eine Aufteilung einer auditiven Meldung oder eines Inhalts der auditiven Meldung auf zumindest zwei Raumbereiche im Wohnraum bzw. Haus angepasst werden, wobei die akustischen Eigenschaften des Wohnraums, insbesondere in Bezug auf die Ausbreitung der akustischen Schallwellen innerhalb des Wohnraums (Dämpfung, Reflektion, Phasenverschiebung, Veränderung der Frequenzcharakteristik) prädiziert bzw. berücksichtigt werden können.Alternatively or additionally, a spatial (in the space: positions, directions related) parameters of said communication, in particular a directional parameter of said communication can be determined. Thereupon, a spatial parameter, a surround sound parameter or a parameter characterizing a distribution of an auditory message or a content of the auditory message are adapted to at least two spatial areas in the living space or house, wherein the acoustic properties of the living space, in particular with respect to the propagation of the acoustic sound waves within the living space (attenuation, reflection, phase shift, change in the frequency characteristic) can be predicted or taken into account.
Bevorzugt werden zumindest zwei Zeitparameter ermittelt, insbesondere prädiziert, kennzeichnend ein Zeitintervall, in dem ein an sich sinnvoller Abschnitt einer auditiven Meldung oder ein an sich sinnvoller Abschnitt der zumindest einen auditive Meldung, insbesondere mit keiner, keiner wesentlichen oder minimierter zeitlichen Überschneidung mit einer sprachlichen Kommunikation im Wohnraum ausgegeben werden kann. Ein solches Bestimmen bzw. Anpassen der Parameter kann mehrmals, bevorzugt zyklisch, erfolgen, wobei die Parameter insbesondere präzisiert bzw. optimiert werden können.Preferably, at least two time parameters are determined, in particular predicated, characterizing a time interval in which a per se meaningful section of an auditory message or a per se meaningful section of the at least one auditory message, in particular with no, no significant or minimized temporal overlap can be spent with a linguistic communication in the living space. Such a determination or adaptation of the parameters can take place several times, preferably cyclically, whereby the parameters can be specified or optimized in particular.
Auch können Pausen einer vorausbestimmten Dauer zwischen den Abschnitten der sprachlichen Kommunikation und der Ausgabe zumindest eines Abschnitt des Audiosignals und/oder der zumindest einer auditiven Meldung berücksichtigt werden. Beispielsweise können zwischen den Abschnitten der sprachlichen Kommunikation, insbesondere zwischen zwei aufeinander folgenden Transaktionen der besagten Kommunikation, eine auditive Meldung erzeugt werden. Beispielsweise können auch kurze, insbesondere einen Abschnitt der besagten Kommunikation und/oder den Abschnitt des Audiosignals kommentierende auditive Meldungen erzeugt werden, z.B. auch umfassend Kommunikationslaute, Interjektionen, Lachen, Weinen, Zungenschnalzen, Stöhnen, Ausrufewörter.Also, pauses of a predetermined duration between the portions of the speech communication and the output of at least a portion of the audio signal and / or the at least one auditory message may be taken into account. For example, an auditory message can be generated between the sections of the speech communication, in particular between two successive transactions of said communication. For example, short, in particular a portion of said communication and / or the portion of the audio signal commenting auditory messages can be generated, e.g. also comprising communication sounds, interjections, laughter, crying, tongue lashes, moans, exclamation words.
Auch können dabei Pausen einer vorausbestimmten Dauer zwischen den Abschnitten der sprachlichen Kommunikation und zur Ausgabe zumindest eines Abschnitts des auszugebenden Audiosignals mit einer passenden Abspieldauer benutzt werden. Beispielsweise kann eine linguistische Auswertung der besagten Kommunikation in Bezug auf Parameter der Sätze bzw. Phrasen, linguistischer Konstrukte erfolgen und die ermittelten Parameter beim Erzeugen einer auditiver Meldung, insbesondere hinsichtlich ihres Inhalts, Aufteilung, Zeitpunkts der Ausgabe berücksichtigt wird. Bevorzugt wird eine vorausschauende Anpassung der mit dem Audiosignal auszugebender Inhalte ausgeführt.It is also possible to use pauses of a predetermined duration between the sections of the speech communication and to output at least a portion of the audio signal to be output with a suitable playing time. For example, a linguistic evaluation of the said communication can take place with respect to parameters of the sentences or phrases, linguistic constructs, and the determined parameters are taken into account when generating an auditory message, in particular with regard to its content, distribution, time of the output. Preferably, a predictive adaptation of the contents to be output with the audio signal is carried out.
Gemäß einer zweckmäßigen Ausgestaltung wird ein Parameter und/oder eine Klassifikation der Art und/oder Inhalt eines weiteren im stationären Wohnraum hörbaren akustischen Inhalts ermittelt, insbesondere analysiert, und im Verfahren berücksichtigt wird. Dabei kann im Verfahren auch zumindest ein Parameter eines weiteren, insbesondere von der besagten Kommunikation und von dem besagten Audiosignal abweichenden, akustischen Inhalts ermittelt und im Verfahren berücksichtigt werden. Dieser kann bevorzugt qualitativ und/oder quantitativ anders berücksichtigt werden, als ein Parameter der besagten sprachlichen Kommunikation.According to an expedient embodiment, a parameter and / or a classification of the type and / or content of another audible content audible in the stationary living space is determined, in particular analyzed, and taken into account in the method. In this case, in the method, at least one parameter of another, in particular of the said communication and of the said audio signal deviating, acoustic content can be determined and taken into account in the process. This can preferably be taken into account differently qualitatively and / or quantitatively, as a parameter of said linguistic communication.
Gemäß einer zweckmäßigen Ausgestaltung wird ein Parameter und/oder eine Klassifikation der Art und/oder ein inhaltliches Merkmal eines weiteren im stationären Wohnraum hörbaren Audiosignals ermittelt und im Verfahren berücksichtigt wird. Dabei kann im Verfahren ein Parameter und/oder eine Klassifikation der Art und/oder ein inhaltliches Merkmal eines weiteren im Wohnraum hörbaren Audiosignals ermittelt und im Verfahren verarbeitet werden. Beispielsweise wird ein Parameter eines Abschnitts des auszugebenden Audiosignals bzw. eine auditive Meldung abhängig von einer erkannten Klasse der Art und/oder einem inhaltlichen Merkmal eines weiteren im Wohnraum, z.B. in einem zumindest teilweise akustisch verbundenen Raumbereich, hörbaren Audiosignals bestimmt.According to an expedient embodiment, a parameter and / or a classification of the type and / or a content-related feature of another audio signal audible in the stationary living space is determined and taken into account in the method. In this case, in the method, a parameter and / or a classification of the type and / or a content-related feature of another audio signal audible in the living space can be determined and processed in the method. For example, a parameter of a section of the audio signal to be output or an auditory message is dependent on a recognized class of the type and / or a content-related feature of another in the living space, e.g. in an at least partially acoustically connected spatial region, audible audio signal.
Beispielsweise kann alternativ oder zusätzlich zu einen oder mehreren Parametern der besagten Kommunikation, ein Parameter eines bestimmten, von vorausbestimmten Eigenschaften geprägten im Wohnraum hörbaren akustischen Inhalts berücksichtigt werden. Beispielsweise kann eine von einem anderen Zimmer, Garten, Balkon kommende Stimme eines Kindes, Haustiers, ein Hilferuf, ein bestimmtes eingelerntes Geräusch als eine bestimmte Art eines hörbaren akustischen Inhalts im Verfahren berücksichtigt werden. Der besagte im Wohnraum hörbare akustische Inhalt unterscheidet sich dabei insbesondere von dem besagten weiteren im Wohnraum hörbaren Audiosignal. Der hörbare akustische Inhalt kann dabei einer „rein akustischen“ Natur sein. Der hörbare akustische Inhalt kann ein nicht im Wohnraum erzeugter und im Wohnraum hörbarer akustischer Inhalt sein. Ein weiteres hörbares Audiosignal entspricht nicht dem (durch das System) auszugebenden, bzw. dem unmittelbar steuerbaren Audiosignal. Dieses kann ein weiteres auf Basis analoger oder digitaler Daten aus einer weiteren Ausgabevorrichtung ausgegebenes Audiosignal sein. Bei dem weiteren im Wohnraum hörbaren Audiosignal handelt es sich bevorzugt um ein technisch, elektronisch erzeugtes Audiosignal. Das zumindest eine weitere im Wohnraum hörbare Audiosignals kann ein aus einer weiteren Audioausgabevorrichtung ausgegebenes Audiosignal sein, das z.B. in einem teilweise akustisch getrennten Raumbereich des Wohnraums, insbesondre von einem benachbarten Zimmer in Form von zumindest teilweise gedämpften Schallwellen, hörbar ist.For example, as an alternative or in addition to one or more parameters of the said communication, a parameter of a specific acoustic content which is characterized by predetermined characteristics and can be heard in the living space can be taken into account. For example, a voice of a child, pet, call for help, a particular taught-in sound coming from another room, garden, balcony, may be considered as a particular type of audible acoustic content in the process. The said acoustic content audible in the living space differs in particular from the said further audio signal audible in the living space. The audible acoustic content may be a "purely acoustic" nature. The audible acoustic content may be audible content not generated in the living space and audible in the living space. Another audible audio signal does not correspond to the audio signal (to be output by the system) or the directly controllable audio signal. This may be another based on analog or digital data from another output device audio signal. The further audio signal audible in the living area is preferably a technically, electronically generated audio signal. The at least one further audio signal audible in the living space may be an audio signal output from another audio output device, e.g. in a partially acoustically separated room area of the living space, in particular of an adjacent room in the form of at least partially damped sound waves, is audible.
Beispielsweise kann im Verfahren ein Anpassen des zumindest eines Parameters zumindest eines Abschnitts des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung abhängig von der Art eines oder mehrerer weiterer im Wohnraum hörbaren akustischen Inhalts erfolgen. Insbesondere kann dabei eine unterschiedliche Anpassung auf einen Sprache (der Sprache entsprechender Schallwellen) umfassenden und/oder keine Sprache umfassenden akustischen Inhalte ausgeführt werden. Die Art des besagten weiteren akustischen Inhalts kann in folgende oder vergleichbare Arten unterteilt und im Verfahren ermittelt werden: z.B. ein Musiktitel; ein Sprachprogramm, ein Fernmeldeinhalt (Telefonat, vorgelesene SMS, Messenger, usw.). Dabei kann der hörbarer akustischer Inhalt z.B. mittels eines oder mehreren Mikrophonen erfasst, bewertet, insbesondere klassifiziert und im Verfahren berücksichtigt werden. Beispielsweise können daraufhin Abschnitte des auszugebenden Audiosignals vorausschauend pausiert, insbesondere an zumindest einer geeigneten Stelle pausiert, aufgeteilt, und/oder mit einem weiteren Abschnitt des auszugebenden Audiosignals oder mit einem weiteten Inhalt zusammengefügt werden. Auch können daraufhin eine oder mehrere auditive Meldungen von bestimmten Vorrichtungen oder Geräten des Hauses, z.B. auf Basis der Daten von vernetzten Geräten und/oder zu bestimmen Themen oder Events nicht, später oder in einer wesentlich veränderten, angepassten Form ausgegeben werden.For example, in the method, the at least one parameter of at least one section of the audio signal to be output and / or the at least one auditory message can be adapted depending on the type of one or more further audible contents audible in the living space. In particular, a different adaptation to a language (the language of corresponding sound waves) comprising comprehensive and / or no language comprehensive acoustic content can be performed. The type of said further acoustic content can be subdivided into the following or comparable types and determined in the method: eg a music title; a language program, a telecommunications content (telephone call, read SMS, messenger, etc.). In this case, the audible acoustic content, for example by means of one or more microphones recorded, assessed, in particular classified and taken into account in the procedure. For example, sections of the audio signal to be output can then be panned in advance, in particular paused at at least one suitable location, split, and / or combined with another section of the audio signal to be output or with a broad content. Also, one or more auditory messages from certain devices or devices of the house, eg based on data from networked devices and / or themes or events to be determined, may subsequently be output later or in a substantially modified, adapted form.
Bevorzugt wird im Verfahren ein Abgleich eines oder mehrerer Parameter der besagten Kommunikation und eines oder mehrerer Parameter des besagten weiteren im Wohnraum hörbaren akustischen Inhalts in Bezug auf etwa denselben Raumbereich und/oder Zeitintervall ausgeführt. Die anzugleichenden Parameter können die nach vorausbestimmten Kriterien ermittelten Arten entsprechender Kommunikationsabschnitte (ein entspanntes Dialog, rege Diskussion, Monolog, Streit, Drama, etc.), die Arten eines weiteren im Wohnraum hörbaren akustischen Inhalts (Lärm von außen, Lärm eines im Haus betriebenen Geräts, Klingelton, spielende Kinder, Küchengeräusche, Stimme eines Haustiers, etc.) und die Art eines Abschnitts des zumindest einen weiteren im Wohnraum hörbaren Audiosignals (Nachrichten, Musik, auditive Meldung auf Basis der Daten einer im Haus, z.B. in einem benachbarten Zimmer betriebenen Vorrichtung) kennzeichnen. Insbesondere werden dabei die zumindest zwei entsprechenden, in diesem Dokument definierten Prioritätsmaße jeweiliger (um einen Raumbereich und/oder Zeitintervall konkurrierender) auditiver Inhalte abgeglichen. Abhängig vom dem Abgleich der Prioritätsmaße kann eine Variante zum Bestimmen oder Anpassen der (jeweiligen) Parameter gewählt werden und/oder ein Bestimmen oder Anpassen der Parameter unter Berücksichtigung der beim Abgleich ermittelter Information ausgeführt werden.Preferably, in the method, matching of one or more parameters of said communication and one or more parameters of said further audible content audible in the living space is performed with respect to approximately the same space area and / or time interval. The parameters to be adjusted may be the types of corresponding communication sections determined by predetermined criteria (a relaxed dialogue, lively discussion, monologue, argument, drama, etc.), the types of another audible content audible in the living space (external noise, noise of a domestic appliance , Ringtone, playing children, kitchen sounds, voice of a pet, etc.) and the nature of a portion of the at least one further audio signal audible in the living room (news, music, auditory message based on the data of a device operated in the home, eg in a neighboring room ). In particular, the at least two corresponding priority measures of respective auditory contents (competing for one spatial area and / or time interval) are defined in this document. Depending on the adjustment of the priority measures, a variant for determining or adjusting the (respective) parameters can be selected and / or a determination or adaptation of the parameters can be carried out taking into account the information determined during the adjustment.
Bevorzugt werden die Prioritätsmaße für die jeweiligen Abschnitte der Kommunikation, eines weiteren akustischen Inhalts und/oder für den Abschnitt eines auszugebenden Audiosignals bestimmt, z.B. nach hinterlegten Kriterien zugeordnet, und abgeglichen. Das Ergebnis des Abgleichs wird beim Anpassen zumindest eines Abschnitts des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung berücksichtigt. Ein solcher Abgleich der zumindest zwei Prioritätsmaße kann beispielsweise nach einer vorgegebenen Vorschrift, Logik, Zuordnungstabelle, etc. ausgeführt werden. Dabei kann ein im Verfahren ermitteltes bzw. verarbeitetes Prioritätsmaß zumindest eine jeweilige „Wichtigkeit“ und/oder zumindest eine (zeitliche) „Dringlichkeit“ kennzeichnen. Beispielsweise können bei einem akustischen Inhalt mit etwa durchschnittlichen Parametern, Abschnitte eines auszugebenen Audiosignals und/oder auditive Meldungen die folgende Prioritätskennungen haben: „Wichtig“, und „Dringend“; „Wichtig“ aber nicht „Dringend“; „Dringend“ aber nicht „Wichtig“; nicht „Dringend“ und nicht „Wichtig“, unterschiedlich behandelt werden.Preferably, the priority measures are determined for the respective sections of the communication, another acoustic content and / or for the portion of an audio signal to be output, e.g. assigned according to stored criteria, and compared. The result of the adjustment is taken into account when adapting at least a portion of the audio signal to be output and / or the at least one auditory message. Such a comparison of the at least two priority measures can be carried out, for example, according to a prescribed rule, logic, assignment table, etc. In this case, a priority measure determined or processed in the method can identify at least one respective "importance" and / or at least one (temporal) "urgency". For example, in the case of an acoustic content having approximately average parameters, portions of an audio signal to be output and / or auditory messages, the following may have the following priority flags: "Important" and "Urgent"; "Important" but not "Urgent"; "Urgent" but not "important"; not "urgent" and not "important", treated differently.
Abhängig von dem Abgleich der eingelesenen, ermittelten, oder geschätzten Prioritätsmaße kann ein Bestimmen oder Anpassen der Parameter zumindest eines Abschnitts des auszugebenden Audiosignals und/oder der zumindest einer auditiven Meldung erfolgen. Dabei kann ein Zeitparameter der Ausgabe und/oder zumindest ein, insbesondere akustischer Parameter zweckmäßig variiert werden. Beispielsweise kann ein Parameter bestimmt oder angepasst werden, der einen Zeitpunkt, zu dem die Ausgabe des zumindest einen Abschnitts des auszugebenden Audiosignals beendet werden soll, und/oder die verfügbare Abspiellänge die ein Abschnitt des auszugebenden Audiosignals haben darf kennzeichnet, insbesondere ohne, dass der Inhalt des Audiosignals dadurch in einer wesentlich nachteiligen Weise beeinflusst wird, z.B. missverständlich wird. Insbesondere kann auch die zumindest eine auditive Meldung passend zu einem zur Verfügung stehenden Zeitintervall, beispielsweise innerhalb der besagten Kommunikation, zwischen zumindest zwei Abschnitten der besagten Kommunikation, zwischen zumindest zwei Abschnitten des zumindest einen auszugebenden Audiosignals, zwischen einem Abschnitt des Audiosignals und einem Abschnitt der Kommunikation platziert bzw. vorausschauend geplant werden. Beispielsweise kann eine auditive Meldung zwischen zwei Phrasen eines Sprechers oder einer Phrase eines Sprechers ausgegeben werden, wobei ein Zeitintervall bis zu einer erwarteten Erwiderung der Phrase durch eine jeweils andere Person als hinreichend ermittelt, prädiziert, bzw. geschätzt wird. Alternativ oder zusätzlich kann abhängig von dem Abgleich der besagten Parameter eine zur Ausgabe als eine akustische Meldung bestimmte Information als eine visuelle Meldung, z.B. Bild, Grafik, Text oder Symbol oder eine haptische Meldung, Vibration, beispielsweise durch ein Anwendergerät einer bestimmten Person (Smartphone, Smart-Watch, Smart-Closes, Datenbrille, etc.) ausgegeben werden.Depending on the alignment of the read, determined or estimated priority measures, the parameters of at least one section of the audio signal to be output and / or the at least one auditory message can be determined or adapted. In this case, a time parameter of the output and / or at least one, in particular acoustic parameters can be suitably varied. For example, a parameter can be determined or adapted that identifies a point in time at which the output of the at least one section of the audio signal to be output is to end, and / or the available playback length that a section of the audio signal may output, in particular without the content the audio signal is thereby affected in a substantially disadvantageous way, eg becomes misleading. In particular, the at least one auditory message can also be matched to an available time interval, for example within said communication, between at least two sections of said communication, between at least two sections of the at least one audio signal to be output, between a section of the audio signal and a section of the communication be placed or planned ahead. For example, an auditory message may be output between two phrases of a speaker or a phrase of a speaker, where a time interval until an expected response of the phrase by another person is sufficiently determined, predicted, or estimated. Alternatively or additionally, depending on the alignment of said parameters, information intended for output as an audible message may be provided as a visual message, e.g. Image, graphics, text or symbol or a haptic message, vibration, for example, by a user device of a specific person (smartphone, smart watch, smart closets, data glasses, etc.) are output.
Falls beispielsweise aus dem Abgleich der Parameter ermittelt wird, dass ein bestimmter weiterer im Wohnraum hörbarer akustischer Inhalt ein insgesamt höheres Prioritätsmaß als zumindest ein Abschnitt des auszugebenden Audiosignals und/oder die zumindest eine auditive Meldung hat bzw. haben soll, kann eine Ausgabe des Abschnitts des Audiosignals und/oder der auditiven Meldung pausiert, unterdrückt und/oder zu einem späteren Zeitpunkt und/oder mit einem veränderten Parameter ausgegeben werden. Beispielsweise kann, falls aus dem Abgleich der Prioritätsmaße ermittelt wird, dass einem bestimmten Abschnitt des auszugebenden Audiosignals und/oder der zumindest einen bestimmten auditiven Meldung ein insgesamt höheres Prioritätsmaß als einem bestimmten Abschnitt der Kommunikation (allein genommen oder zusammen mit einem bestimmten akustische Inhalt im Wohnraum) zuzuordnen ist, kann der Abschnitt des Audiosignals bzw. die auditive Meldung mit einem veränderten Parameter, z.B. lauter oder vorwiegend aus einem anderen Lautsprecher oder Klangquelle, ausgegeben werden und zusätzlich eine visuelle bzw. grafische und/oder textuelle Information an zumindest eine Person oder aus zumindest einem Anwendergerät ausgegeben werden.If, for example, it is determined from the comparison of the parameters that a certain additional audible content audible in the living space should have an overall higher priority than at least a portion of the audio signal to be output and / or the at least one auditory message, an output of the section of the Audio signal and / or the auditory message pauses, suppressed and / or at a later date and / or with a changed parameter be issued. For example, if it is determined from the alignment of the priority measures, that a particular portion of the audio signal to be output and / or the at least one particular auditory message may have an overall higher priority measure than a particular portion of the communication (alone or along with a particular acoustic content in the living space ), the portion of the audio signal or the auditory message with a changed parameter, eg louder or predominantly from another speaker or sound source, and additionally a visual or graphical and / or textual information to at least one person or out at least one user device to be output.
In einer anderen Variante der Erfindung wird ein weiteres, in einem zum Wohnraum benachbarten oder nur teilweise akustisch getrennten Raumbereich, z.B. in einem weiteren Zimmer des Hauses auszugebendes Audiosignal (dieses wird „das weitere im Wohnraum hörbare“ bzw. „benachbarte“ Audiosignal genannt) ermittelt. Dieses kann drahtlos, als die entsprechenden Datenabschnitte eingelesen und bei der Anpassung des (eigentlichen) in einem betreffenden Raumbereich des Wohnraums auszugebenden Audiosignals berücksichtigt werden. Auf diese Weise können Daten bzw. Datenabschnitte kennzeichnend ein oder mehrere weitere, den Wohnraum indirekt betreffende, benachbart auszugebende Audiosignale ermittelt und verarbeitet werden. Beispielsweise können Daten zu einem oder mehreren Audiosignalen, z.B. mittels einer drahtlosen Übertragungstechnologie (Bluetooth, WLAN, Hausnetzwerk, etc.), insbesondere gezielt bzw. entsprechend einer Anfragebotschaft, übertragen werden. Diese Daten können bei dem Anpassen des auszugebenden Audiosignals, (der sich von dem zumindest einem besagten „benachbarten“ Audiosignal unterschiedet bzw. in keinem technischen Zusammenhang mit diesem steht, berücksichtigt werden.In another variant of the invention, another room area adjacent to the living space or only partially acoustically separated, e.g. in another room of the house to be output audio signal (this is called "the more audible in the living room" or "adjacent" audio signal). This can be read in wirelessly as the corresponding data sections and taken into account when adapting the (actual) audio signal to be output in a respective room area of the living space. In this way, data or data sections may characteristically be determined and processed one or more further, indirectly affecting the living space, to be issued adjacent audio signals. For example, data may be related to one or more audio signals, e.g. be transmitted by means of a wireless transmission technology (Bluetooth, WLAN, home network, etc.), in particular targeted or according to a request message. These data may be taken into account in the adaptation of the audio signal to be output (which is different from, or in no technical connection with, the at least one said "adjacent" audio signal).
Beispielsweise werden ein Datenstrom bzw. die entsprechenden Datenabschnitte des weiteren im Wohnraum hörbaren Audiosignals aus einem benachbarten Raumbereich eingelesen und eine zeitliche Zuordnung, z.B. eine zeitliche Abhängigkeit (vereinfacht: Zeitverzögerung) zu einen entsprechenden (mit dem Datenstrom korrespondierenden) im relevanten Raumbereich des Wohnraums hörbaren Schallwellen ermittelt. Daraufhin werden Steuerungsdaten zum Anpassen des auszugebenden Audiosignals ermittelt und/oder Daten die zur Kompensation des Einflusses der Schallwellen aus dem benachbarten Raumbereich dienen, ermittelt. In einem Beispiel des Verfahrens wird ein Audiosignal eines elektronischen Musikinstruments, z.B. einer Elektrogitarre, eines Keyboards, in einem teilweise akustisch verbundenen Bereich, z.B. aus einem benachbarten Zimmer eingelesen und beim Bestimmen oder Anpassen eines oder mehrerer Parameter des auszugebenden Audiosignals in einem (relevanten) Raumbereich des Wohnraums berücksichtigt und/oder zum Ermitteln der Daten die zur Kompensation des Einflusses der Schallwellen aus dem benachbarten Raumbereich dienen verwendet.For example, one data stream or the corresponding data sections of the further audio signal audible in the living space are read in from an adjacent spatial area and a temporal assignment, e.g. a temporal dependence (simplified: time delay) to a corresponding (corresponding to the data stream) in the relevant room area of the living room audible sound waves determined. Subsequently, control data for adapting the audio signal to be output are determined and / or data which serve to compensate for the influence of the sound waves from the adjacent spatial area is determined. In an example of the method, an audio signal of an electronic musical instrument, e.g. an electric guitar, a keyboard, in a partially acoustically connected area, e.g. read from an adjacent room and used in determining or adjusting one or more parameters of the output audio signal in a (relevant) space of the living space and / or used to determine the data used to compensate for the influence of the sound waves from the adjacent room area.
Mit anderen Worten können im Verfahren auch weitere, im stationären Wohnraum zumindest potentiell hörbare (von dem auszugebenden Audiosignal abweichende bzw. nicht durch das Audiosystem des Wohnraums auszugebende, potentiell störende) Audiosignale, beispielsweise (gezielt) in Form von Daten eingelesen bzw. (zum Wohnraum bzw. zu dem System im Wohnraum) übertragen, gestreamt werden. Diese müssen jedoch nicht (etwa wie das besagte auszugebende Audiosignal) unmittelbar ausgegeben werden, sondern werden zum Erreichen zumindest eines Optimierungskriteriums bereitgestellt oder verwendet, z.B. zum Anpassen zumindest eines Abschnitts des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung verarbeitet.In other words, the method can also read in the stationary housing at least potentially audible (potentially deviant from the audio signal to be output or not by the audio system of the living, potentially disturbing) audio signals, for example (targeted) in the form of data or (to the living room or to the system in the living room), be streamed. However, these need not be output directly (much like the said audio signal to be output), but are provided or used to achieve at least one optimization criterion, e.g. for adapting at least a portion of the audio signal to be output and / or the at least one auditory message processed.
Ferner können die Daten kennzeichnend das besagte weitere im Wohnraum hörbare Audiosignal zur Abwandlung des auszugebenden Audiosignals verwendet werden. Insbesondere können die Daten zu dem besagten weiteren Audiosignal in einem bestimmten Mischverhältnis mit dem eigentlichen auszugebenden Audiosignal wiedergegeben werden, wobei die Wahrnehmbarkeit und/oder Hörbarkeit des auszugebenden Audiosignals in einem bestimmten Raumbereich des Wohnraums verbessert wird. Auch kann ein Raumklangparameter, Frequenzparameter, Frequenzdichtespektrum, Amplitudendynamik, Frequenzdynamik des auszugebenden Audiosignals abhängig von einem weiteren, benachbart auszugebenden Audiosignal variiert werden.Further, the data may characteristically be used in said living room audible audio signal to modify the output audio signal. In particular, the data relating to the said further audio signal can be reproduced in a specific mixing ratio with the actual audio signal to be output, the perceptibility and / or audibility of the audio signal to be output being improved in a certain spatial area of the living space. Also, a surround parameter, frequency parameters, frequency density spectrum, amplitude dynamics, frequency dynamics of the audio signal to be output can be varied depending on a further audio signal to be output adjacently.
In einem weiteren Beispiel der Erfindung wird zu in einem ersten Raumbereich, z.B. einem Zimmer auszugebenden Audiosignal, weitere Signalkomponenten auf Basis des weiteren im Wohnraum hörbaren, drahtlos übermittelten oder mittels eines Mikrophon erfassten („benachbarten“) Audiosignals, welches in einem zweiten Raumbereich, z.B. in einem benachbarten Zimmer, ausgegeben oder auszugeben wird, beigemischt. Dabei werden die beigemischten Signalkomponenten derart ermittelt, dass die akustisch hörbaren Schallwellen des weiteren Audiosignals zumindest in dem ersten Raumbereich reduziert und/oder maskiert werden, und/oder die Wahrnehmbarkeit bzw. Hörbarkeit des auszugebenden Audiosignals in dem ersten Raumbereich erhöht wird.In a further example of the invention, in a first spatial region, e.g. an audio signal to be output to a room, further signal components based on the further audible in the living room, wirelessly transmitted or recorded by a microphone ("adjacent") audio signal, which in a second space area, e.g. in a neighboring room, spent or spend. In this case, the admixed signal components are determined in such a way that the acoustically audible sound waves of the further audio signal are reduced and / or masked at least in the first spatial region, and / or the perceptibility or audibility of the audio signal to be output in the first spatial region is increased.
Gemäß einer weitere Ausgestaltung umfasst das Verfahren eine Auswertung zumindest einer körperlichen Haltung und/oder einer körperlichen Regung zumindest einer Person im Wohnraum und daraufhin entschieden wird, dass eine sprachliche Botschaft: explizit an die Sprachsteuerungsapplikation, und/oder explizit nicht an die Sprachsteuerungsapplikation, und/oder an eine bestimmte Person im Wohnraum gerichtet ist. Eine oder mehrere körperlichen Regung einer oder mehreren an der Kommunikation beteiligten Person können auch abhängig von zumindest einem Parameter einer oder mehreren erfassten Szenen im Wohnraum verarbeitet und berücksichtigt werden.According to a further embodiment, the method comprises an evaluation of at least one physical posture and / or one physical impulse of at least one person in the living space and then it is decided that a linguistic message: explicitly addressed to the voice control application, and / or explicitly not to the voice control application, and / or to a specific person in the living room. One or more physical impulses of one or more persons involved in the communication can also be processed and taken into account as a function of at least one parameter of one or more detected scenes in the living space.
Beispielsweise kann erkannt werden, dass ein Sprecher einen Satz sagt und sich dabei körperlich zu einer anderen Person im Wohnraum wendet. Daraufhin wird die von dem Sprecher ausgegebene sprachliche Botschaft nicht oder zumindest nicht zum Zweck der Generierung einer Antwort oder Befehlsausführung analysiert. Insbesondere wird dann der Inhalt der sprachlichen Botschaft nicht zu einer unmittelbaren Reaktion bzw. der Antwort darauf verarbeitet. Dabei können auch nicht erwünschte Antworten oder eine nicht gewünschte oder explizit unerwünschte inhaltliche (textuelle) Analyse des Gesprächs vermieden werden. Die Auswertung erfolgt dann vielmehr zweckgerichtet, insbesondere lediglich zum Anpassen zumindest eines Abschnitts des Audiosignals bzw. der zumindest einen auditiven Meldung.For example, it can be recognized that a speaker says one sentence and turns physically to another person in the living room. Thereupon, the linguistic message output by the speaker is not or at least not analyzed for the purpose of generating a response or instruction execution. In particular, then the content of the linguistic message is not processed into an immediate response or the answer to it. It is also possible to avoid unwanted answers or unwanted or explicitly undesirable content (textual) analysis of the conversation. The evaluation is then rather purposive, in particular only for adapting at least a portion of the audio signal or the at least one auditory message.
Beispielsweise kann eine solche körperliche Haltung und/oder körperliche Regung zumindest einer Person mittels zumindest einer im Wohnraum befindlichen Kamera, z.B. einer Webkamera eines TV-Geräts, erkannt werden. Beispielsweise wenn eine Zuwendung zumindest einer der besagten Personen zu zumindest einer zweiten Person als eine Kopf- oder Oberkörperdrehung und/oder ein Augenkontakt erkannt wird, dann kann ein einhergehend von der Person gesprochene sprachliche Botschaft als nicht an die Sprachsteuerungsapplikation gerichtet, sondern als ein Teil der besagten Kommunikation berücksichtigt werden.For example, such a physical posture and / or physical movement of at least one person by means of at least one camera located in the living room, e.g. a webcam on a TV. For example, if a donation of at least one of said persons to at least one second person is recognized as a head or torso rotation and / or eye contact, then a spoken message spoken by the person may not be addressed to the voice control application but as part of the speech control application said communication.
Gemäß einer zweckmäßigen Ausgestaltung wird die Reihenfolge in der zumindest zwei auszugebenden Audiosignale und/oder zwei Abschnitte eines oder mehrerer auszugebenden Audiosignale und/oder zumindest zwei auditiven Meldungen ausgegeben werden und/oder die Reihenfolge in der zumindest eine auditive Meldung und ein Abschnitt des auszugebenden Audiosignals ausgegeben werden, abhängig von dem ermittelten, insbesondere prädizierten Parameter der besagten Kommunikation verändert, insbesondere vertauscht.According to an expedient refinement, the sequence in the at least two audio signals to be output and / or two sections of one or more audio signals to be output and / or at least two auditory messages is output and / or the sequence is output in the at least one auditory message and a portion of the audio signal to be output be changed depending on the determined, in particular predicated parameters of said communication, in particular reversed.
Beispielsweise kann dabei auch ein ermittelter oder prädizierter Parameter der Stimme zumindest einer Person im Wohnraum, insbesondere einer bestimmten Person und/oder einer Person in einem bestimmten Raumbereich bzw. an einem bestimmten Sitzplatz im Wohnraum auf eine (besondere) vorausbestimmte Weise berücksichtigt werden. Bevorzugt kann eine Reihenfolge bestimmt werden, in der zumindest eine auditive Meldung oder ein einzelner Inhalt bzw. der zumindest einer auditiven Meldung und zumindest ein (bestimmter) Abschnitt des auszugebenden Audiosignals ausgegeben werden.For example, a determined or predicted parameter of the voice of at least one person in the living space, in particular a specific person and / or a person in a specific room area or at a certain seat in the living space can be taken into account in a (special) predetermined manner. Preferably, an order can be determined in which at least one auditory message or a single content or the at least one auditory message and at least one (specific) section of the audio signal to be output are output.
Beispielsweise kann z.B. eine Reihenfolge aus einem oder mehreren Abschnitten eines als Signaldaten ausgelesenen Audiosignals und einer oder mehreren generierten oder zu generierenden auditiven Meldungen, z.B. generierter Sprachmitteilungen verändert werden. Beispielsweise kann eine Reihenfolge, in der ein Abschnitt des Audiosignals, umfassend ein Audiosignal eines Multimediainhalts, die besagte auditive Meldung und/oder einen Telekommunikationsinhalts ausgegeben werden, abhängig von zumindest einem Parameter der besagten Kommunikation bestimmt werden.For example, e.g. an order of one or more sections of an audio signal read as a signal data and one or more auditory messages generated or to be generated, e.g. generated voice messages are changed. For example, an order in which a portion of the audio signal comprising an audio signal of a multimedia content, said auditory message, and / or a telecommunications content is output may be determined depending on at least one parameter of said communication.
Beispielsweise kann, insbesondere zusammen mit oder abhängig von den für zumindest zwei besagte Abschnitte ermittelte zumindest zwei Zeitparameter und/oder der Reihenfolge zur Ausgabe der zumindest zwei Abschnitte, auch eine zweckmäßige Zuordnung der mit den besagten Abschnitten korrespondierenden Schallwellen oder Schallwellenmuster zu zumindest zwei Raumbereichen des Wohnraums bestimmt oder angepasst werden. Dabei können die zumindest zwei Abschnitte, zumindest überwiegend, in den zwei zumindest teilweise unterschiedlichen Raumbereichen ausgegeben werden und/oder aus zwei zumindest teilweise unterschiedlichen Raumbereichen wahrnehmbar gemacht werden.For example, in particular together with or depending on the at least two time parameters determined for at least two sections and / or the sequence for outputting the at least two sections, also a suitable assignment of the sound waves or sound wave patterns corresponding to said sections to at least two spatial areas of the living space be determined or adjusted. In this case, the at least two sections, at least predominantly, can be output in the two at least partially different spatial regions and / or made perceptible from two at least partially different spatial regions.
Auch kann im Verfahren ein Zusammenfügen bzw. ein Ausgeben einer Sequenz bzw. in einer dichten Folge von zwei oder mehreren Abschnitten des Audiosignals und/oder einer oder mehreren auditiven Meldungen insbesondere in einer bestimmten Reihenfolge ausgeführt werden. Beispielsweise kann das Bestimmen oder Anpassen eines Parameters zum Erzeugen einer oder mehreren auditiven Meldungen derart erfolgen, dass die Datenabschnitte, die zu unterschiedlichen auditiver Meldungen und/oder einzelnen Teilen einer (aufgeteilten) auditiven Mitteilung gehören, in einer veränderten Reihenfolge ausgelesen bzw. ausgegeben werden.Also, in the method, a merging or outputting of a sequence or in a dense sequence of two or more sections of the audio signal and / or one or more auditory messages can be carried out, in particular in a specific sequence. For example, determining or adjusting a parameter to generate one or more auditory messages may be performed such that the data portions associated with different auditory messages and / or portions of a (split) auditory message are read out in a changed order.
Alternativ oder zusätzlich kann auch abhängig von dem Prädizieren der Parameters eines oder mehreren weiteren im Wohnraum hörbaren akustischen Inhalts, insbesondere unter Berücksichtigung von zumindest zwei unterschiedlichen, bevorzugt aller wesentlichen (bestimmte Grenzwerte überschreitender) weiteren im Wohnraum hörbaren akustischen Inhalte, eine Prädiktion eines oder mehrerer Zeitintervallen erfolgen, die zur Ausgabe eines oder mehreren bestimmten Abschnitte des Audiosignals und/oder der zumindest einen auditiven Meldung geeignet sind. Die besagten zeitlichen Intervalle können auch (erwartete) Pausen kennzeichnen, in welchen die besagten Abschnitte des Audiosignals und/oder auditive Meldungen zeitlich passend, bevorzugt ohne zeitliche Überschneidung und/oder ohne eine wesentliche Erhöhung der Lautstärke ausgegeben werden können. Hierbei können kürzere (vorausgesagte) Pausen in den akustischen Inhalten im Wohnraum und/oder im Ablauf der besagten Kommunikation, (im Redefluss zwischen den zwei miteinander kommunizierenden Personen, für die Ausgabe eines kürzeren Abschnitts des auszugebenden Audiosignals und/oder der ersten auditiven Meldung oder einer ersten linguistischen Struktur der auditiven Meldung genutzt werden, und/oder längere (vorausgesagte) Pausen in den weiteren hörbaren akustischen Inhalten im Wohnraum und/oder im Ablauf der besagten Kommunikation (im Redefluss zwischen den zwei miteinander kommunizierenden Personen), für die Ausgabe eines längeren Abschnitts des auszugebenden Audiosignals und/oder der ersten auditiven Meldung oder einer zweiten linguistischen Struktur der auditiven Meldung genutzt werden.Alternatively or additionally, a prediction of one or more time intervals may also be dependent on the prediction of the parameters of one or more further audible contents audible in the living space, in particular taking into account at least two different, preferably all essential audible contents (exceeding certain limits) in the living space be carried out to issue a or several specific sections of the audio signal and / or the at least one auditory message are suitable. Said temporal intervals may also indicate (expected) pauses in which said portions of the audio signal and / or auditory messages may be output in time, preferably without temporal overlap and / or without a substantial increase in volume. Here, shorter (predicted) pauses in the acoustic content in the living room and / or in the course of said communication, (in the flow of speech between the two communicating persons, for the output of a shorter portion of the audio signal to be output and / or the first auditory message or a the first linguistic structure of the auditory message, and / or longer (predicted) pauses in the further audible acoustic content in the living space and / or in the course of the said communication (in the flow of speech between the two communicating persons), for the output of a longer section of the audio signal to be output and / or the first auditory message or a second linguistic structure of the auditory message.
Beispielsweise wird eine Auswertung eines ermittelten inhaltlichen Merkmals der Kommunikation ohne oder bevorzugt mit Berücksichtigung weiterer Parameter der Kommunikation ausgeführt. Ferner wird eine Auswertung eines oder mehrerer auszugebender Abschnitte eines Audiosignals oder zweier unterschiedlicher auszugebender Audiosignale bzw. auditiver Meldungen ausgeführt. Dabei kann die Art bzw. Arten, bevorzugt eine Klassifikation der Art zumindest eines oder mehrerer auszugebender Abschnitte eines auszugebenden Audiosignals und/oder ein Prioritätsmaßes eines oder mehrerer auszugebenden Abschnitte eines Audiosignals oder zweier unterschiedlicher auszugebenden Audiosignale ermittelt werden. Abhängig von einem Abgleich ausgewerteter Daten kann ein oder mehrere Zeitparameter zur Ausgabe zumindest eines bestimmten Abschnitts des Audiosignals und/oder der Reihenfolge in der zumindest zwei Abschnitte eines Audiosignals bzw. zwei Audiosignale ausgegeben werden, bestimmt werden.For example, an evaluation of a determined content-related feature of the communication is carried out without or preferably taking into account further parameters of the communication. Furthermore, an evaluation of one or more sections of an audio signal to be output or of two different audio signals or auditory messages to be output is carried out. In this case, the type or types, preferably a classification of the type of at least one or more sections to be output of an audio signal to be output and / or a priority measure of one or more sections of an audio signal to be output or two different audio signals to be output can be determined. Depending on a comparison of evaluated data, one or more time parameters for outputting at least a specific section of the audio signal and / or the order in which at least two sections of an audio signal or two audio signals are output can be determined.
Gemäß einer zweckmäßigen Ausgestaltung umfasst das Verfahren ein Ermitteln eines inhaltlichen Merkmals der besagten Kommunikation zwischen zumindest zwei Personen im Wohnraum, und/oder Ermitteln der Art und/oder eines Prioritätsmaßes eines oder mehrerer im Wohnraum auszugebenden Audiosignalen oder Abschnitten zumindest eines Audiosignals, und daraufhin abhängig von den ermittelten Informationen: Bestimmen, insbesondere Anpassen einer Reihenfolge in der zumindest zwei Abschnitte des Audiosignals ausgegeben werden, abhängig von einem ermittelten inhaltlichen Merkmals der Kommunikation und/oder der ermittelten Art und/oder der ermittelten Priorität eines oder mehrerer im Wohnraum auszugebenden Audiosignalen oder Abschnitten eines Audiosignals.According to an expedient embodiment, the method comprises determining a content feature of said communication between at least two persons in the living space, and / or determining the type and / or a priority measure of one or more audio signals to be output in the living space or sections of at least one audio signal, and then depending on the determined information: determining, in particular adjusting an order in which at least two sections of the audio signal are output, depending on a determined content feature of the communication and / or the determined type and / or the determined priority of one or more audio signals or sections of a living space audio signal.
Beispielsweise reicht ein vereinfachtes, rudimentäres Ermitteln eines inhaltlichen Merkmals derart, dass der Inhalt eines Abschnitts der besagten Kommunikation, z.B. mit hinterlegten Mustererkennungsverfahren oder Ähnlichkeitskriterien in 4-64 vordefinierte Kategorien klassifiziert wird. Ein oder mehrere Abschnitte des auszugebenden Audiosignals, die dabei angepasst werden, können eine auditive übermittelte Information für oder in Bezug auf zumindest eine bestimmte im Wohnraum anwesende Person, z.B. in Form einer auditiven Meldung und/oder einer Sprachmitteilung repräsentieren.For example, a simplified, rudimentary determination of a content feature is such that the content of a portion of said communication, e.g. with stored pattern recognition methods or similarity criteria is classified into 4-64 predefined categories. One or more portions of the audio signal to be output thereby adapted may include auditory transmitted information for or relating to at least one particular person present in the home, e.g. in the form of an auditory message and / or a voice message.
Gemäß einer zweckmäßigen Ausgestaltung wird die Art (z.B. Kategorie) und/oder ein Prioritätsmaß eines oder mehrerer Abschnitte der besagten Kommunikation, und/oder die Art und/oder ein Prioritätsmaß eines oder mehrerer Abschnitte des zumindest einen auszugebenden Audiosignals, oder zweier unterschiedlichen auszugebenden Audiosignale ermittelt. Daraufhin kann eine Ausgabe zumindest eines Abschnitts zumindest eines auszugebenden Audiosignals mit veränderten, insbesondere angepassten Parametern und/oder eine Ausgabe von zumindest zwei Abschnitten zumindest eines auszugebenden Audiosignals einer veränderten Reihenfolge erfolgen.According to an expedient embodiment, the type (eg category) and / or a priority measure of one or more sections of said communication, and / or the type and / or priority measure of one or more sections of the at least one audio signal to be output, or two different audio signals to be output are determined , Thereupon, an output of at least one section of at least one audio signal to be output with changed, in particular adapted parameters and / or an output of at least two sections of at least one audio signal of a changed order can be output.
Alternativ oder zusätzlich kann die Art und/oder Prioritätsmaß eines oder mehrerer Abschnitte der zumindest einen (auszugebenden) auditiven Meldung oder zweier unterschiedlichen auditiven Meldungen ermittelt werden und mit der ermittelten Art (z.B. Kategorie) und/oder dem Prioritätsmaß eines oder mehrerer Abschnitte der besagten Kommunikation, und/oder mit die Art und/oder mit dem Prioritätsmaß eines oder mehrerer Abschnitte des zumindest einen auszugebenden Audiosignals verglichen werden. Abhängig von dem Vergleich kann zumindest ein Parameter der auditiven Meldung bestimmt oder angepasst werden.Alternatively or additionally, the type and / or priority measure of one or more sections of the at least one (to be output) auditory message or two different auditory messages can be determined and with the determined type (eg category) and / or the priority measure of one or more sections of said communication , and / or compared with the type and / or with the priority measure of one or more sections of the at least one audio signal to be output. Depending on the comparison, at least one parameter of the auditory message may be determined or adjusted.
Beispielsweise umfasst das Verfahren, ein Ermitteln der Art und/oder Prioritätsmaßes eines oder mehrerer Abschnitte der besagten Kommunikation, und/oder ein Ermitteln der Art und/oder Prioritätsmaßes eines oder mehrerer Abschnitte des zumindest einen auszugebenden Audiosignals, oder zweier unterschiedlichen Audiosignale, und daraufhin erfolgt: ein Bestimmen oder Anpassen, insbesondere Anpassen eines Parameters zur Ausgabe zumindest eines Abschnitts zumindest eines auszugebenden Audiosignals und/oder der Reihenfolge in der zumindest zwei Abschnitte des auszugebenden Audiosignals ausgegeben werden.For example, the method comprises determining the type and / or priority measure of one or more sections of said communication, and / or determining the type and / or priority measure of one or more sections of the at least one audio signal to be output, or two different audio signals, and then in particular determining a parameter for outputting at least a portion of at least one audio signal to be output and / or the order in which at least two sections of the audio signal to be output are output.
Ferner kann ein Prioritätsmaß einer oder mehrerer auditiven Meldung und/oder ein oder zwei Abschnitte eines etwa im selben Zeitintervall auszugebenden Audiosignals ermittelt werden. Abhängig von einem Abgleich ermittelter Prioritätsmaße kann ein oder mehrere Parameter zum Erzeugen eines Abschnitts der auditiven Meldung und/oder einer Reihenfolge in der zumindest zwei Abschnitte der zumindest einen auditiven Meldung und/oder zum Ausgeben eines Abschnitts des auszugebenden Audiosignals, bestimmt werden. Furthermore, a priority measure of one or more auditory messages and / or one or two sections of an audio signal to be output approximately in the same time interval can be determined. Depending on a matching of determined priority measures, one or more parameters for generating a portion of the auditory message and / or an order in the at least two sections of the at least one auditory message and / or outputting a portion of the audio signal to be output may be determined.
Bevorzugt erfolgt ein Ermitteln eines inhaltlichen Merkmals der sprachlichen Kommunikation zwischen zumindest zwei Personen im Wohnraum, und/oder Ermitteln der Art und/oder Prioritätsmaß eines oder mehrerer im Wohnraum auszugebenden Audiosignalen oder Abschnitten eines Audiosignals, und/oder Ermitteln bzw. Berücksichtigen der Art und/oder Prioritätsmaß zumindest einer auszugebenden auditiven Meldung betreffen etwa denselben Zeitintervall, und daraufhin abhängig von den ermittelten Informationen: Bestimmen, insbesondere Anpassen einer Reihenfolge in der zumindest zwei Abschnitte des Audiosignals ausgegeben werden, abhängig von einem ermittelten inhaltlichen Merkmals der Kommunikation und/oder der ermittelten Art und/oder der ermittelten Priorität eines oder mehrerer im Wohnraum auszugebenden Audiosignalen oder Abschnitten eines Audiosignals.Preferably, a content-related feature of the linguistic communication is determined between at least two persons in the living space, and / or determining the type and / or priority measure of one or more audio signals or sections of an audio signal to be output in the living space, and / or determining or considering the type and / or or priority measure of at least one auditory message to be output concerns about the same time interval, and then depending on the determined information: determining, in particular adjusting an order in which at least two sections of the audio signal are output, depending on a determined content characteristic of the communication and / or the determined type and / or the determined priority of one or more audio signals or sections of an audio signal to be output in the living space.
Alternativ oder zusätzlich kann die zumindest eine auditive Meldung abhängig von einem oder mehreren ermittelten Prioritätsmaße eines oder mehrerer Abschnitte der besagten Kommunikation und/oder eines oder mehrerer Abschnitte des auszugebenden Audiosignals pausiert und/oder in zumindest zwei Abschnitte aufgeteilt werden, oder zwei als auditive Meldung auszugebende Inhalte zu einer auditiven Meldung zusammengefügt oder (in einer auditiven Meldung) kombiniert werden.Alternatively or additionally, the at least one auditory message may be paused and / or divided into at least two sections depending on one or more determined priority measures of one or more sections of said communication and / or one or more sections of the audio signal to be output, or two audible messages Content is merged into an auditory message or combined (in an auditory message).
Bevorzugt erfolgt ein Zuordnen der Ausgabe einer oder mehrerer auditiven Meldungen und eines oder mehreren Abschnitte des weiteren Audiosignals zu bestimmten, zumindest teilweise unterschiedlichen (und zumindest teilweise überschneidenden) Zeitintervallen und/oder zu bestimmten zumindest teilweise unterschiedlichen (und zumindest teilweise überlappenden) Raumbereichen im Wohnraum. Dabei kann das Zuordnen unter Berücksichtigung von einem oder mehreren der besagten Prioritätsmaße erfolgen.Preferably, the output of one or more auditory messages and one or more sections of the further audio signal are assigned to specific, at least partially different (and at least partially overlapping) time intervals and / or to specific at least partially different (and at least partially overlapping) spatial areas in the living space. In this case, the assignment can take place taking into account one or more of the said priority measures.
Beispielsweise reicht ein vereinfachtes, rudimentäres Ermitteln der Daten bzw. Werte eines inhaltlichen Merkmals zumindest eines Abschnitts der besagten Kommunikation aus, ohne dass die entsprechenden ermittelten Daten bzw. Werte den Inhalt der Kommunikation wiedergeben (müssen). Beispielsweise kann das inhaltliche Merkmal eines Abschnitts der Kommunikation, z.B. nach einem Mustererkennungsverfahren, hinterlegten Ähnlichkeitskriterien, Assoziationsvorschriften in ca. 4-64 vordefinierte Klassen (Kategorien) klassifiziert werden. Auch kann dabei zwischen mehreren Arten von besagten Transaktionen innerhalb der Kommunikation unterschieden werden. Die Daten und Werte über eine oder mehrere erkannte Klassen können beispielsweise zu den entsprechenden Abschnitten der Kommunikation zugeordnet und im Verfahren berücksichtigt werden.For example, a simplified, rudimentary determination of the data or values of a content-related feature of at least one section of said communication suffices, without the corresponding ascertained data or values reflecting (must) the content of the communication. For example, the content feature of a portion of the communication, e.g. After a pattern recognition process, deposited similarity criteria, association rules in about 4-64 predefined classes (categories) are classified. It is also possible to distinguish between several types of said transactions within the communication. For example, the data and values about one or more recognized classes may be associated with the corresponding sections of the communication and taken into account in the method.
Gemäß einer zweckmäßigen Ausgestaltung repräsentiert zumindest ein Parameter der Kommunikation im Wohnraum eine Richtung einer Kommunikation bzw. eine Richtung die in einem unmittelbaren Zusammenhang mit der besagten Kommunikation steht. Mit anderen Worten handelt es sich bei zumindest einem ermittelten Parameter der Kommunikation im Wohnraum um ein Richtungsparameter einer Kommunikation. Beispielsweise repräsentiert zumindest ein Parameter der besagten Kommunikation eine Richtung zumindest eines Abschnitts der Kommunikation bzw. eine Richtung die in einem unmittelbaren Zusammenhang mit der besagten Kommunikation oder einer weiteren, für die nahe Zukunft prädizierten, Kommunikation steht. Mit anderen Worten kann zumindest ein Richtungsparameter einer Kommunikation ermittelt und berücksichtigt werden, die eine Fortsetzung der aktuellen Kommunikation oder einer weiteren prädizierten Kommunikation entspricht.According to an expedient embodiment, at least one parameter of the communication in the living space represents a direction of a communication or a direction which is directly related to the said communication. In other words, at least one determined parameter of the communication in the living space is a directional parameter of a communication. For example, at least one parameter of said communication represents a direction of at least a portion of the communication or a direction that is directly related to said communication or another communication predicted for the near future. In other words, at least one direction parameter of a communication can be determined and taken into account, which corresponds to a continuation of the current communication or another predicated communication.
Beispielsweise kann zumindest ein Richtungsparameter einer (sprachlichen) Kommunikation in Bezug auf zumindest eine Person im Wohnraum ermittelt, insbesondere prädiziert werden. Daraufhin können mehrere Parameter der zumindest einen auditiven Meldung und/oder eines Abschnitts des weiteren auszugebenden Audiosignals, insbesondere jeweilige akustische und/oder inhaltliche Parameter, abhängig von zumindest einem, zumindest mit einer gewissen Wahrscheinlichkeitsmaß zutreffenden, Richtungsparameter der Kommunikation zwischen zumindest zwei Personen im Wohnraum und/oder der entsprechender akustischen Parameter, bestimmt, angepasst, gesteuert werden. Beispielsweise kann als ein Faktor für ein Bestimmen eines Parameters der auditiven Meldung auch einer Nennung eines oder mehreren Empfänger der Kommunikationsbotschaft beim Namen, eines vorgespeicherten oder im Verfahren gelernten (häufig in Bezug auf eine Person verwendeten) Rufnamen, und/oder Schlüsselwörter die einen oder mehrere Adressaten bei Kommunikation bezeichnen, wie „an alle“, „hört alle zu“, „Kinder“, „Ihr auf der Couch“, „Ihr am Balkon“, und dergleichen genutzt werden. Dabei kann das besagte Erkennen eines oder mehrerer im Voraus definierter oder im Voraus eingelernter Schlüsselwörter und/oder körperlichen Regungen und/oder Empfänger einer Kommunikationstransaktion, die eine Richtung der Kommunikation kennzeichnen erfolgen, und daraufhin eine zweckmäßige Anpassung eines oder mehrerer Parameter des auszugebenden Audiosignals erfolgen. Bevorzugt wird der zumindest eine Raumklangparameter der betreffenden (bestimmten), auf Basis des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung erzeugten Schallwellen bestimmt oder angepasst.For example, at least one directional parameter of a (linguistic) communication with respect to at least one person in the living space can be determined, in particular predicated. Thereupon, a plurality of parameters of the at least one auditory message and / or of a portion of the further audio signal to be output, in particular respective acoustic and / or content parameters, depending on at least one, at least with a certain probability measure applicable, directional parameters of communication between at least two people in the living room and / or the corresponding acoustic parameters, determined, adjusted, controlled. For example, as a factor for determining a parameter of the auditory message, also mentioning one or more recipients of the communication message by name, a pre-stored or learned in the method (often used with respect to a person) call names, and / or keywords one or more Addressees of communication such as "to all", "listen to all", "children", "your on the couch", "your on the balcony", and the like can be used. In this case, the said recognition of one or more keywords defined in advance or learned in advance and / or physical impulses and / or recipients of a communication transaction, which identify a direction of the communication, and thereupon a suitable adaptation of one or more parameters of the audio signal to be output takes place. Preferably, the at least one surround parameter of the relevant (specific) sound waves generated on the basis of the audio signal to be output and / or the at least one auditory message is determined or adjusted.
Der zumindest ein Richtungsparameter der besagten Kommunikation kann repräsentierend sein für die Richtung, in die die Kommunikation, bzw. ein bestimmter Abschnitt der Kommunikation geführt wird, beispielsweise repräsentierend sein für eine oder mehrere Richtungen zwischen einem oder mehreren Sprechern und einem oder mehreren Zuhörern bzw. der Raumbereiche die mit einem erhöhten Wahrscheinlichkeitsmaß einen „Sprecher“ und/oder „Zuhörer“ bzw. einen „Sprecher und Zuhörer“ umfassen. Für unterschiedliche Abschnitte der Kommunikation, die z.B. unterschiedlichen Transaktionen entsprechen, können unterschiedliche Richtungsparameter ermittelt werden. Zu dem Richtungsparameter kann auch ein Parameter gehören, der einen bestimmten, insbesondere zu einem bestimmten Sitzplatz korrespondierenden, Raumbereich, als einen Raumbereich des „Sprechers“, als einen Raumbereich des „Zuhörers“ oder als einer Raumbereich als „Sprecher und Zuhörer“ kennzeichnet. Zu dem Richtungsparameter kann auch ein Parameter gehören, der kennzeichnend ist dafür, ob eine Kommunikation einseitig, beidseitig oder multidirektional geführt wird oder (bei der Prädiktion des Parameters) demnächst geführt werden wird. Dabei kann beispielsweise unterschieden werden, ob es sich bei der laufenden oder prädizierten auditiven Kommunikation um ein Monolog oder Dialog handelt. Ferner kann der Richtungsparameter auch kennzeichnend sein für eine Kommunikation, die (von einem „Sprecher“) mit einem Mobiltelefon oder Freisprecheinrichtung geführt wird und/oder für keine bzw. an keine weitere im Wohnraum anwesende Personen bestimmt bzw. gerichtet ist. Beispielsweise kann für die besagte Kommunikation, an der zumindest drei Personen beteiligt sind, 1-6 unterschiedliche Richtungsparameter ermittelt und berücksichtigt werden.The at least one directional parameter of said communication may be representative of the direction in which the communication, or a particular portion of the communication, is conducted, for example representing one or more directions between one or more speakers and one or more listeners Spaces with an increased probability measure a "speaker" and / or "listener" or a "speaker and listener" include. For different sections of communication, e.g. correspond to different transactions, different directional parameters can be determined. The directional parameter may also include a parameter that identifies a particular room area corresponding in particular to a particular seat, as a room area of the "speaker", as a room area of the "listener" or as a room area as "speaker and listener". The directional parameter may also include a parameter that is indicative of whether a communication is one-way, two-way, or multidirectional, or (in the prediction of the parameter) will soon be performed. For example, a distinction can be made as to whether the ongoing or predicted auditory communication is a monologue or dialogue. Furthermore, the directional parameter may also be indicative of a communication which is conducted (by a "speaker") with a mobile telephone or hands-free device and / or intended for no or no other persons present in the living space. For example, for the said communication in which at least three persons are involved, 1-6 different directional parameters are determined and taken into account.
Ein Richtungsparameter kann beispielsweise Werte repräsentieren, die Raumbereiche innerhalb des Wohnraums, Winkelwerte, Raumwinkel, etc. und/oder die Beziehungen zwischen diesen, z.B. durch Vektoren, repräsentieren. Bevorzugt umfasst ein Richtungsparameter eine räumliche Verteilung und/oder jeweilige Ausrichtung akustischer Parameter der besagten Kommunikation. Ein oder mehrere Richtungsparameter können beispielsweise kennzeichnend sein für die räumliche Verteilung und/oder Ausbreitung und/oder einer oder mehreren Ausbreitungsrichtungen bzw. Ausbreitungsfunktionen der Schallwellen, die den Abschnitten der besagten Kommunikation entsprechen.For example, a directional parameter may represent values, the spatial regions within the living space, angle values, solid angles, etc., and / or the relationships between them, e.g. by vectors, represent. Preferably, a direction parameter comprises a spatial distribution and / or respective alignment of acoustic parameters of the said communication. For example, one or more directional parameters may be indicative of the spatial distribution and / or propagation and / or one or more propagation directions or propagation functions of the sound waves corresponding to the portions of said communication.
Zusätzlich kann der Richtungsparameter der besagten Kommunikation auch ein oder mehrere unterschiedliche Parameter der Kommunikation, insbesondere kennzeichnend für akustische Parameter der auditiven Kommunikation, Parameter der Körpersprache umfassen oder zu einem oder mehreren weiteren (in diesem Dokument beschriebener) Parametern zugeordnet sein. Die akustischen Parameter können z.B. einen Amplitudenverlauf der Kommunikation (z.B. eine Umhüllende des Amplitudenverlaufs) und/oder einen oder mehrere Frequenzparameter (z.B. Energiedichtespektrum oder Umhüllende des Energiedichtespektrums) und/oder einen oder mehrere Phasenparameter (z.B. Phasendifferenzen oder Phasenverschiebungen) und/oder einen zeitlichen Verlauf diverser akustischer Größen und dergleichen kennzeichnen.Additionally, the directional parameter of said communication may also include one or more different parameters of the communication, particularly indicative of acoustic parameters of the auditory communication, body language parameters, or associated with one or more other parameters (described in this document). The acoustic parameters may e.g. an amplitude characteristic of the communication (eg an envelope of the amplitude characteristic) and / or one or more frequency parameters (eg energy density spectrum or envelope of the energy density spectrum) and / or one or more phase parameters (eg phase differences or phase shifts) and / or a temporal course of various acoustic quantities and the like mark.
Bevorzugt kann sich ein Richtungsparameter auf zumindest einen räumlichen Parameter, insbesondere eine Richtung oder mehrere bestimmte Richtungen, beziehen und zumindest einen Parameter einer anderen Art der Kommunikation umfassen oder zu diesem zugeordnet sein, der die zumindest eine (jeweilige) Richtung betrifft. Dabei kann der Richtungsparameter der besagten Kommunikation einen Bezug, z.B. eine Zuordnung oder eine mathematische Funktion, zwischen einer oder mehreren bestimmten Richtungen und einem oder mehreren bestimmten, entsprechenden akustischen Parametern der Kommunikation herstellen.Preferably, a directional parameter may relate to at least one spatial parameter, in particular one direction or several specific directions, and may include or be associated with at least one parameter of another type of communication concerning the at least one (respective) direction. In this case, the directional parameter of said communication may have a reference, e.g. establish an association or mathematical function between one or more particular directions and one or more particular corresponding acoustic parameters of the communication.
Die Erfassung eines oder mehrerer Richtungsparameters der besagten Kommunikation kann mit zwei oder mehreren im Wohnraum betreibbaren Sensoren, z.B. zum System gehörenden Mikrophonen, Bewegungsmeldern und/oder Kameras und/oder Bewegungsmeldern erfolgen. Dabei kann, z.B. die Position eines Sprechers beispielsweise durch den Abgleich der Phasen der mit zwei oder mehreren Mikrophonen erfassten akustischen Schallwellen erfolgen. Auch kann dabei eine Unterscheidung, insbesondere Trennung, der auditiven Kommunikation (das Sprechen) von einem weiteren im Wohnraum hörbaren akustischen Inhalt, z.B. mit Mitteln der Signalverarbeitung erfolgen. Ferner kann ein besagter Richtungsparameter auch abhängig von Sensordaten, einer Historie, zu zumindest einer oder mehreren Kommunikationen, insbesondere abhängig von mehreren unterschiedlichen Kommunikationsvorgängen aus der Vergangenheit (z.B. „Großvater schimpft häufig mit dem Onkel“), einem aktuell erfassten oder prädizierten Parameter einer Szene oder Aktion im Wohnraum ermittelt werden.The detection of one or more directional parameters of said communication may be accomplished with two or more sensors operable in the home, e.g. The system includes microphones, motion detectors and / or cameras and / or motion detectors. Thereby, e.g. the position of a speaker, for example, by adjusting the phases of the detected with two or more microphones acoustic sound waves done. Also, a distinction, in particular separation, of the auditory communication (speaking) of another audible content audible in the living space, e.g. done with means of signal processing. Furthermore, a said directional parameter may also depend on sensor data, a history, on at least one or more communications, in particular depending on several different communication processes from the past (eg "grandfather often scolds the uncle"), a currently detected or predicted parameter of a scene or Action in the living space can be determined.
Ferner kann das Verfahren auf zumindest zwei gleichzeitig bzw. zeitlich überschneidend ablaufende besagte Kommunikationen angewandt werden, wobei das Bestimmen oder Anpassen eines oder mehreren Parameters des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung unter der Berücksichtigung der Parameter der zumindest zwei (etwa im selben Zeitintervall ablaufenden) Kommunikationen erfolgt. Dabei können die zumindest zwei unterschiedlichen Kommunikationen beispielsweise mit unterschiedlichen vorausbestimmten Kriterien und/oder mit unterschiedlichem Einfluss auf einen oder mehrere anzupassende Parameter des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung, berücksichtigt werden. Ferner kann ein Bestimmen oder Anpassen des jeweils zumindest einen Parameters der zumindest zwei unterschiedlichen, insbesondere im selben Zeitintervall mit einem oder mehreren auszugebenden Audiosignalen auszugebender auditiven Meldung in einer bestimmten, jeweils unterschiedlichen, Weise, z.B. entsprechen unterschiedlichen Varianten des Bestimmens oder Anpassens der Parameter, erfolgen. Further, the method may be applied to at least two concurrently said communications, wherein determining or adjusting one or more parameters of the audio signal to be output and / or the at least one auditory message taking into account the parameters of the at least two (approximately in the same Time interval expiring) communications takes place. In this case, the at least two different communications, for example with different predetermined criteria and / or with different influence on one or more parameters to be adjusted of the audio signal to be output and / or the at least one auditory message, can be taken into account. Furthermore, a determination or adaptation of the respective at least one parameter of the at least two different auditory signals to be output in the same time interval with one or more audio signals can be carried out in a specific, respectively different, manner, eg different variants of determining or adapting the parameters ,
Das Ermitteln des zumindest einen Richtungsparameter der besagten Kommunikation kann im Verfahren abhängig von folgenden, zumindest teilweise sensorisch erfassten und/oder auf Basis der Historiendaten ermittelten Informationen erfolgen:
- - eine Position einer aktuell aktiv kommunizierenden sprechenden Person im Wohnraum, insbesondere einen bestimmten Raumbereich und/oder einen Sitzplatz der sprechenden Person, und/oder
- - eine Position oder mehrere Positionen, insbesondere Raumbereiche und/oder Sitzplätze, der Person oder Personen, an die die Kommunikation (zumindest eine bestimmte Kommunikation oder ein bestimmter Abschnitt der Kommunikation) der aktuell aktiv kommunizierenden sprechenden Person gerichtet ist, und/oder
- - eine oder mehrere räumliche Richtungen, insbesondere als einen oder mehrere Vektoren, in die die Kommunikation (eine bestimmte Kommunikation oder ein bestimmter Abschnitt der Kommunikation), insbesondere mittels Schallwellen und/oder einer gerichteten Körpersprache geführt wird.
- a position of a currently actively communicating speaking person in the living space, in particular a specific space area and / or a seat of the speaking person, and / or
- a position or a plurality of positions, in particular room areas and / or seats, of the person or persons to whom the communication (at least a specific communication or a specific section of communication) of the currently actively communicating speaking person is directed, and / or
- one or more spatial directions, in particular as one or more vectors, into which the communication (a specific communication or a certain portion of the communication) is guided, in particular by means of sound waves and / or directed body language.
Ferner kann zu einem besagten Richtungsparameter ein entsprechendes Erfolgsmaß zugeordnet werden, kennzeichnend eine in der Vergangenheit in eine oder mehrere bestimmte, betreffende Richtungen (bzw. zwischen zumindest zwei bestimmten Raumbereichen) mehr oder minder gut gelungene (nicht oder nur im akzeptablem Maß) gestörte und/oder nicht zufriedenstellend gelungene (gestörte, durch häufiges Nachfragen oder durch bestimmte Körperregungen gekennzeichnete) Kommunikationsabschnitte, z.B. Transaktionen zugeordnet werden. Dabei kann beim Bestimmen oder Anpassen eines Parameters eines auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung ein oder mehrere jeweilige (in der Vergangenheit zugeordnete) Erfolgsmaße der Kommunikation berücksichtigt werden.Furthermore, a corresponding measure of success can be assigned to a said directional parameter, characterizing in the past one or more specific, relevant directions (or between at least two specific regions of space) more or less well (not or only to an acceptable extent) disturbed and / or or unsatisfactorily successful (disturbed, characterized by frequent inquiries or by certain physical stimuli) communication sections, eg Transactions are assigned. In this case, when determining or adapting a parameter of an audio signal to be output and / or the at least one auditory message, one or more respective (in the past assigned) success measures of the communication can be taken into account.
Im Verfahren können auf Basis der Daten aus der Vergangenheit ermittelte Erfolgsmaße der besagten Kommunikation von zumindest einem bestimmten Raumbereich, zu zumindest einem bestimmten Raumbereich, und/oder zwischen zumindest zwei bestimmten Raumbereichen, insbesondere mit bestimmten Richtungsparametern berücksichtigt werden. Dabei kann eine Prädiktion zumindest eines Erfolgsmaßen für ein aktuelles Zeitintervall und/oder für die nahe Zukunft auf Basis der besagten Daten zu den Erfolgsmaßen aus der Vergangenheit erfolgen.In the method, based on the data from the past, success measures of said communication of at least one specific room area, at least one specific room area, and / or between at least two specific room areas, in particular with certain directional parameters, can be taken into account. In this case, a prediction of at least one measure of success for a current time interval and / or for the near future on the basis of the said data on the success measures from the past can take place.
Beispielsweise kann bei einer in der Vergangenheit nicht erfolgreichen Anwendung des Verfahrens, z.B. wenn das entsprechende Erfolgsmaß eines Abschnitts der Kommunikation ohne Anpassen der Parameter des Audiosignals oder trotz dem Anpassen der Parameter des Audiosignals zumindest statistisch niedrig war, z.B. einen Grenzwert unterschritt, kann daraufhin zu einem weiteren Zeitintervall, insbesondere in Bezug auf die Kommunikation von oder zu bestimmten Raumbereichen, mit bestimmten Richtungsparametern, ein verändertes Anpassen der Parameter des Audiosignals oder eine andere, alternative Variante für das Bestimmen oder Anpassen der Parameter ausgeführt werden.For example, in a past unsuccessful application of the method, e.g. if the corresponding measure of success of a portion of the communication without at least adjusting the parameters of the audio signal or despite adjusting the parameters of the audio signal was at least statistically low, e.g. If the threshold value falls below a limit value, then at a further time interval, in particular with respect to the communication from or to certain areas, with certain directional parameters, a modified adaptation of the parameters of the audio signal or another alternative variant for the determination or adaptation of the parameters can be carried out.
Der zumindest eine, im Verfahren angepasste Parameter des Audiosignals berücksichtigt insbesondere, welche Person (oder welcher entsprechender Raumbereich) in einem bestimmten Zeitintervall eine Kommunikationsbotschaft sendet oder senden wird, insbesondere spricht oder sprechen wird, und welche Person oder welche Personen (oder welche oder welche entsprechende Raumbereiche), zumindest potentiell, zuhören und/oder als Empfänger der entsprechenden sprachlichen Botschaft vorgesehen sind, und/oder an einem Zuhören zu dem zumindest einem Abschnitt des auszugebenden Audiosignals voraussichtlich interessiert sind. Dabei kann zumindest ein zeitlicher Parameter und/oder akustischer Parameter der besagten Kommunikation, betreffend einen oder mehrere Abschnitte der Kommunikation in Kombination mit dem Richtungsparameter der betreffenden Abschnitte der Kommunikation, insbesondere bestimmter Transaktionen bzw. Kommunikationsbotschaften ermittelt, insbesondere und berücksichtigt werden.In particular, the at least one parameter of the audio signal adapted in the method takes into account which person (or which corresponding spatial area) sends or will send a communication message in a particular time interval, in particular speaks or speaks, and which person or persons (or which or which corresponding person) Spaces), at least potentially, listening and / or are provided as receivers of the corresponding linguistic message, and / or are expected to listen to the at least a portion of the output audio signal. In this case, at least one temporal parameter and / or acoustic parameter of said communication, relating to one or more sections of the communication in combination with the directional parameter of the relevant sections of the communication, in particular of specific transactions or communication messages can be determined, in particular and taken into account.
Der zumindest eine Parameter des auszugebenden Audiosignals kann derart bestimmt werden, dass eine zweckmäßige Hörbarkeit und/oder Interpretierbarkeit der besagten Kommunikation, insbesondere zumindest eines bestimmten Abschnitts der besagten Kommunikation, in zumindest einem oder mehreren bestimmten Raumbereichen des Wohnraums, z.B. einem Raumbereich an dem oder in den sich zumindest ein bestimmter, wahrscheinlicher oder potentieller Zuhörer befindet, und/oder zu bestimmten Zeitintervallen nach bestimmten Kriterien gewährleistet ist.The at least one parameter of the audio signal to be output can be determined in such a way an appropriate audibility and / or interpretability of said communication, in particular of at least one particular section of said communication, in at least one or more particular room areas of the living space, eg a room area at or in which at least one particular, probable or potential listener is located; and / or at certain time intervals according to certain criteria.
Ferner kann die ermittelte Anzahl und/oder Verteilung der im Wohnraum anwesenden Personen in bestimmten Raumbereichen oder auf bestimmten Sitzplätzen bzw. Sitzpositionen innerhalb des Wohnraums, beim Ermitteln des zumindest einen Parameters der besagten Kommunikation und/oder beim Bestimmen oder Anpassen des zumindest einen Parameters der zumindest einen auditiven Meldung und/oder des auszugebenden Audiosignals berücksichtigt werden. Dabei können auch Raumbereiche und/oder Sitzplätze berücksichtigt werden, zu welchen ermittelt wurde, dass sich dort (zumindest mit einer hohen Wahrscheinlichkeit) keine Person befindet. Die Anzahl und/oder Verteilung der im Wohnraum anwesenden Personen kann auch aus statistischen, für den Wohnraum erfassten oder gelernten Daten ermittelt werden. Auf Raumbereiche, wo sich Personen oder bestimmte Personen nie oder lediglich vergleichsweise selten aufhalten, können, insbesondere für zumindest ein Anpassen des Audiosignals oder der zumindest einen auditiven Meldung, insbesondere für diese Personen, außer Acht gelassen werden.Furthermore, the determined number and / or distribution of the persons present in the living space in certain room areas or in certain seats or seating positions within the living space, when determining the at least one parameter of said communication and / or when determining or adjusting the at least one parameter of at least an auditory message and / or the audio signal to be output. Room areas and / or seats may also be taken into account, for which it has been determined that there is (at least with a high probability) no person there. The number and / or distribution of the persons present in the living space can also be determined from statistical data collected or learned for the living space. Space regions where persons or certain persons never or only relatively rarely reside can be disregarded, in particular for at least one adaptation of the audio signal or the at least one auditory message, in particular for these persons.
Auch eine Bewegung zumindest einer Person (eines Sprechers und/oder eines Zuhörers) im Wohnraum und/oder eine prädizierter Raumbereich in dem sich eine Person (ein Sprecher und/oder ein Zuhörer) in einem Zeitintervall in der nahen Zukunft aufhalten wird, können, beispielsweise anhand Sensordaten und/oder Historiendaten ermittelt und berücksichtigt werden.Also, a movement of at least one person (a speaker and / or a listener) in the living space and / or a predicted space area in which a person (a speaker and / or a listener) will be in a time interval in the near future may, for example determined and taken into account using sensor data and / or history data.
Wird beispielsweise festgestellt, dass sich in einem bestimmten Raumbereich und/oder auf einem bestimmten Sitzplatz (zumindest mit einer gewissen Wahrscheinlichkeit) kein Sprecher und/oder Zuhörer aufhält, dann kann beim Anpassen des zumindest einen Parameters des Audiosignals der entsprechender Raumbereich bzw. Sitzplatz unberücksichtigt bleiben oder als explizit irrelevant berücksichtigt werden. Insbesondere kann für diese Raumbereiche bzw. Sitzplätze keine Erreichung der Optimierungskriterien oder abweichende Optimierungskriterien angestrebt werden. Demgegenüber kann eine bessere Anpassung, insbesondere Erreichung zumindest eines Optimierungskriteriums für einen oder mehrere der restlichen, Raumbereiche und/oder Sitzplätze ausgeführt werden, über die (explizit) ermittelt wurde und/oder mit einer gewissen Wahrscheinlichkeit ermittelt oder angenommen wird, dass sich dort zumindest ein „Sprecher“ und/oder zumindest ein „Zuhörer“ und/oder zumindest ein „Sprecher und Zuhörer“ aufhalten.If, for example, it is determined that there is no speaker and / or listener in a specific room area and / or seat (at least with a certain probability), then the corresponding room area or seat can be disregarded when adjusting the at least one parameter of the audio signal or considered explicitly irrelevant. In particular, it is not possible to achieve the optimization criteria or deviating optimization criteria for these room areas or seats. In contrast, a better adaptation, in particular achievement of at least one optimization criterion for one or more of the remaining, room areas and / or seats can be carried out, was (explicitly) determined and / or determined or assumed with a certain probability that at least one there "Speaker" and / or at least one "listener" and / or at least one "speaker and listener" stop.
Im Ergebnis erfolgt abhängig von den ermittelten Informationen beispielsweise ein Bestimmen bzw. Anpassen eines oder mehrerer Parameter des auszugebenden Audiosignals und/oder der zumindest einer auditiven Meldung, der oder die kennzeichnend sind für die räumliche Aufteilung der entsprechenden akustischen Schallwellen die im Zusammenhang mit den entsprechenden Inhalten des auszugebenden Audiosignals und/oder der zumindest einer auditiven Meldung im Wohnraum erzeugt werden. Auch können dabei ein oder mehrere auszugebenden unterschiedliche (von bestimmten Kriterien gekennzeichnete) Abschnitte eines oder mehrerer Audiosignale und/oder der einen oder mehreren auditiven Meldungen unterschiedlich (ggf. entsprechend unterschiedlicher Varianten) angepasst werden, wobei eine angepasste, insbesondere zu zumindest einem geltenden oder gewählten Optimierungskriterium passende, Steuerung, insbesondere Regelung, der entsprechenden akustischen Schallwellen bzw. eines oder mehrerer Schallwellenmuster im Wohnraum ausgeführt wird.As a result, depending on the determined information, for example, determining or adapting one or more parameters of the audio signal to be output and / or the at least one auditory message, which are indicative of the spatial distribution of the corresponding acoustic sound waves in connection with the corresponding content the audio signal to be output and / or the at least one auditory message are generated in the living space. Also, one or more different sections (of particular criteria) of one or more audio signals and / or the one or more auditory messages to be output may be adapted differently (possibly according to different variants), whereby an adapted, in particular at least one valid or selected one Optimization criterion suitable, control, in particular control, the corresponding acoustic sound waves or one or more sound wave pattern is executed in the living room.
Die Ausgabe zumindest eines (bestimmten) Abschnitts oder mehrerer bestimmter (unterschiedlicher) Abschnitte des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung von denen es nicht nur eine, sondern auch mehrere gegeben kann, wird in einem stark vereinfachten Fall durch die Auswahl der Lautsprecher, Auswahl eine Kombination von Lautsprechern und/oder einer Anpassung der Balance und/oder einer Zeitverzögerung (von einigen Millisekunden) zwischen den Ausgaben aus den zumindest zwei im Wohnraum vorhandenen oder virtuell erzeugten Lautsprechern, erfolgen.The output of at least one (certain) section or several specific (different) sections of the audio signal to be output and / or the at least one auditory message, of which not only one but also several can be given, is in a greatly simplified case by the selection of the loudspeakers , Selecting a combination of loudspeakers and / or an adjustment of the balance and / or a time delay (of a few milliseconds) between the outputs from the at least two loudspeakers present or virtually generated in the living space.
Weiterhin können alternativ oder zusätzlich Phasenparameter zumindest einer Signalkomponente zu einem Abschnitt des Audiosignals entsprechenden bzw. mit diesem korrespondierenden Audiosignals derart angepasst werden, dass, bei zumindest einer Person im Wohnraum die Wahrnehmung erzeugt wird, dass sich eine Klangquelle aus der ein bestimmter Abschnitt des auszugebenden Audiosignals und/oder der zumindest einen bestimmten auditiven Meldung ausgegeben wird, in einer bestimmen Position und/oder in einer bestimmten Richtung und/oder in einer bestimmten Entfernung befindet. Es können auch derartige (virtuelle) Klangquellen erzeugt werden, die sich (in der subjektiven Wahrnehmung zumindest einer Person im Wohnraum) außerhalb des Wohnraums, z.B. hinter einer Wand, befinden.Furthermore, as an alternative or in addition, phase parameters of at least one signal component can be adapted to a section of the audio signal corresponding to that of the audio signal generating at least one person in the living room that a sound source is from a certain section of the audio signal to be output and / or the at least one particular auditory message is issued, in a given position and / or in a particular direction and / or at a certain distance. It is also possible to generate such (virtual) sound sources which are located (in the subjective perception of at least one person in the living space) outside the living space, e.g. behind a wall.
Beispielsweise kann sich die Klangquelle aus der zumindest ein (nach bestimmten Kriterien gewählter) Abschnitt des Audiosignals und/oder eine (nach bestimmten Kriterien gewählte) auditive Meldung bzw. ein Abschnitt der auditiven Meldung ausgegeben wird, abhängig von einem Richtungsparameter der besagten Kommunikation zwischen zumindest zwei Personen virtuell verschoben, entfernt, näher gebracht oder bewegt werden. Dabei kann zumindest eine körperliche Haltung und/oder eine Geste zumindest einer Person im Wohnraum mit einem Sensor, z.B. mit einer Kamera erkannt und berücksichtigt werden. Z.B. kann eine Zuwendung des Kopfes einer Person oder eine Körperdrehung und/oder ein Augenkontakt zu einer anderen Person erkannt und, z.B. beim Erzeugen einer Klangquelle zur Ausgabe zumindest einer auditiven Meldung, berücksichtigt werden. Dabei kann der eine oder mehrere Parameter der zumindest einer (von zumindest zwei im Wohnraum erzeugten) Klangquellen abhängig von zumindest einem Parameter kennzeichnend eine relativen körperliche Haltung, Pose, Kopfposition(en) von zumindest einer Person (zu zumindest einer Person oder Raumbereich), gewählt werden. Bevorzugt werden die Parameter kennzeichnend eine relativen körperliche Haltung, Pose, Kopfposition(en) von zumindest zwei anwesenden, insbesondere kommunizierenden, Personen in Relation zueinander oder zu den jeweiligen Raumbereichen berücksichtigt.For example, the sound source may be composed of the at least one (according to certain criteria selected portion of the audio signal and / or an auditory message (selected according to certain criteria), depending on a directional parameter of said communication, between at least two persons, virtually moved, removed, brought closer or moved. In this case, at least one physical posture and / or one gesture of at least one person in the living space can be recognized and taken into account with a sensor, eg with a camera. For example, a donation of a person's head or body rotation and / or eye contact to another person may be recognized and taken into account, eg, when generating a sound source for outputting at least one auditory message. In this case, the one or more parameters of the at least one sound source (of at least two sound sources generated in the living space) may be selected by at least one person (to at least one person or room area) as a function of at least one parameter characterizing a relative physical posture, pose, head position (s) become. Preferably, the parameters are characteristically taken into account relative to each other or to the respective spatial regions of a relative physical posture, pose, head position (s) of at least two present, in particular communicating, persons.
Auch kann im Verfahren abhängig von zumindest einem Parameter der besagten Kommunikation und/oder einem Parameter kennzeichnend für eine erfasste, insbesondere erkannte Szene, Bewegung, Aktion ein wahrnehmbarer Eindruck für eine Bewegung zumindest einer Klangquelle erzeugt werden. Beispielsweise kann für zumindest eine (sensorisch erfasste, erkannte oder angenommene Person) der Eindruck der Bewegung durch eine schrittweise Veränderung der Entfernung und/oder Richtung bzw. einer Position in der eine Klangquelle (zu den aufeinanderfolgenden Zeitintervallen) erzeugt werden.Also, depending on at least one parameter of said communication and / or one parameter indicative of a detected, especially recognized scene, movement, action, a perceptible impression for a movement of at least one sound source can be generated in the method. For example, for at least one (sensory detected, recognized or assumed person) the impression of movement may be generated by a stepwise change of the distance and / or direction or position in the one sound source (at the successive time intervals).
Darüber hinaus kann das Bestimmen bzw. Anpassen eines Raumklangparameters auch abhängig von einer ermittelten, aktuellen oder prädizierten oder mit einer gewissen Wahrscheinlichkeit eingeschätzter Position und/oder Ausrichtung und/oder Pose, und/oder Kopfausrichtung einer oder mehrerer Person im Wohnraum erfolgen. Beispielsweise können daraufhin eine oder mehrere virtuellen Klangquellen platziert und/oder bewegt werden und/oder ein akustischer Parameter zumindest einer virtuellen Klangquelle angepasst wird. Bevorzugt kann dabei eine (insgesamt bzw. kumuliert betrachtet) verbesserte Raumklangwahrnehmung abhängig von Position und/oder Ausrichtung und/oder Pose, und/oder Kopfausrichtung zumindest einer Person und/oder einer erkannten Szene, bevorzugt zumindest zwei Personen im Wohnraum erzeugt werden.In addition, the determination or adaptation of a surround sound parameter can also take place depending on a determined, current or predicted or with a certain probability estimated position and / or orientation and / or pose, and / or head orientation of one or more persons in the living space. For example, then one or more virtual sound sources can be placed and / or moved and / or an acoustic parameter of at least one virtual sound source is adjusted. In this case, an improved spatial sound perception (overall or cumulatively considered) can preferably be generated in the living space depending on the position and / or orientation and / or pose, and / or head orientation of at least one person and / or one recognized scene, preferably at least two persons.
Im Verfahren können zwei unterschiedliche Abschnitte oder Kanäle eines auszugebenden Audiosignals oder weiterverarbeitete Audiosignale auf Basis zumindest eines Audiosignals auch als auszugebende Audiosignale behandelt werden. Insbesondere können diese unterschiedlich angepasst werden. Die Parameter der zumindest zwei Audiosignale können derart angepasst werden, dass sich eine zweckmäßige Verteilung akustischer Schallwellen innerhalb des Wohnraums, insbesondere in bestimmten Raumbereichen, ergibt. Insbesondere kann dabei von einer, beispielsweise in einem als Raumklangsignal vorliegenden Audiosignal möglicherweise vorgesehenen (z.B. in dem Raumklangsignal kodierten) räumlichen Verteilung der entsprechenden akustischen Schallwellen abgewichen werden.In the method, two different sections or channels of an audio signal to be output or further processed audio signals based on at least one audio signal can also be treated as audio signals to be output. In particular, these can be adapted differently. The parameters of the at least two audio signals can be adapted such that an expedient distribution of acoustic sound waves results within the living space, in particular in certain spatial areas. In particular, it is possible to deviate from a spatial distribution of the corresponding acoustic sound waves which may be provided, for example in an audio signal which is provided as a surround sound signal (for example encoded in the surround sound signal).
Mit anderen Worten kann eine bestimmte Verteilung, eine Umverteilung, bzw. nach vorausbestimmten Kriterien veränderbare Verteilung eines ausgegebenen, durch das Audiosignal repräsentierten Inhalts zwischen zumindest zwei zumindest teilweise unterschiedlichen Raumbereichen bzw. Richtungen im Koordinatensystem des Wohnraums abhängig von den besagten Parametern der besagten Kommunikation ausgeführt werden. Beispielsweise kann dabei eine Verteilung entsprechender akustischer Schallwellen oder bestimmter Schallwellenmuster auf zumindest zwei Raumbereiche des Wohnraums ausgeführt werden, in welchen sich Personen, bestimmte Personen, Personen aus bestimmten Personengruppen, an der besagten Kommunikation beteiligte und/oder unbeteiligte Personen, zumindest mit einer gewissen Wahrscheinlichkeit, aufhalten.In other words, a certain distribution, a redistribution, or a distribution of an output signal represented by the audio signal between at least two at least partially different spatial regions or directions in the coordinate system of the living space can be carried out depending on said parameters of the said communication , For example, a distribution of corresponding acoustic sound waves or specific sound wave patterns can be carried out on at least two spatial areas of the living space in which persons, certain persons, persons from certain groups of persons, participating in said communication and / or uninvolved persons, at least with a certain probability, stop them.
Beispielsweise kann im Verfahren eine Kommunikation einer Person die in der Küche steht und sich an eine andere Person, die sich auf einem Fernsehsofa oder im Wintergarten befindet wendet, dadurch verbessert werden, dass zumindest ein Kanal des Audiosignals, der maßgeblich zur Beschallung des Raumbereich des Fernsehsofas bzw. des Wintergartens ist, für ein passendes Zeitintervall wesentlich abgeschwächt und/oder mit zweckmäßig angepassten Parametern ausgegeben wird. Die Beschallung eines dazwischenliegenden Raumbereichs kann dabei unverändert bleiben oder derart verändert, dass die dort ankommende Schallwellen (hinsichtlich kumulierter akustischer Werte) im Wesentlichen aufrechterhalten werden.For example, in the process, a communication of a person standing in the kitchen and turning to another person who is on a TV set or in the winter garden, be improved by at least one channel of the audio signal, which is crucial to the sound of the room area of the TV or the conservatory is significantly attenuated for a suitable time interval and / or output with appropriately adjusted parameters. The sonication of an intermediate spatial region can remain unchanged or changed in such a way that the sound waves arriving there (with respect to accumulated acoustic values) are essentially maintained.
Dabei können z.B. auch Klangquellen die mit unterschiedlichen Audio-Inhalten und/oder Kanälen eines Audiosignals bzw. Signalquellen korrespondieren, abhängig von dem zumindest einen im Verfahren ermittelten Parameter der Kommunikation gesteuert, insbesondere geregelt, werden.Thereby, e.g. Also sound sources that correspond to different audio content and / or channels of an audio signal or signal sources, depending on the at least one determined in the method parameters of communication controlled, in particular regulated, are.
Insbesondere kann eine sich über die Zeit verändernde räumliche Verteilung der Schallwellen, die mit bestimmten Abschnitten des Audiosignals bzw. auditiver Meldungen korrespondieren, abhängig von einer zeitlichen Veränderung eines ermittelten Parameters der Kommunikation adaptiv gesteuert. Das Anpassen der räumlichen Verteilung eines oder mehrerer Audio-Inhalte, z.B. auf zumindest zwei Raumbereiche des Wohnraums oder hörbar aus zumindest zwei Raumbereiche des Wohnraums, kann abhängig von einer erkannten Veränderung des zumindest einen Parameters der Kommunikation gesteuert, insbesondere geregelt werden. In diesem Fall kann der Parameter der sprachlichen Kommunikation eine (bestimmte) Veränderung zumindest eines Parameters, z.B. eines akustischen Parameters oder eines Kommunikationsvorhabens repräsentieren.In particular, a time-varying spatial distribution of the sound waves, which correspond to certain sections of the audio signal or auditory messages, depending on a temporal change of a determined parameter of the communication adaptively controlled. The adaptation of the spatial distribution of one or more audio contents, for example to at least two spatial regions of the living space or audibly from at least two spatial regions of the living space, can be controlled, in particular regulated, depending on a detected change in the at least one parameter of the communication. In this case, the parameter of the linguistic communication can represent a (specific) change of at least one parameter, eg an acoustic parameter or a communication project.
Bevorzugt wird alternativ oder zusätzlich ein derartiges Anpassen des zumindest eines Parameters des Audiosignals ausgeführt, bei dem in zumindest einem Raumbereich bzw. bei einem, in einem Raumbereich oder an einer Sitzposition potentiell befindlichen, Person ein subjektiver Eindruck erzeugt wird, dass ein oder mehrere Kanäle des Audiosignals oder im Audiosignal repräsentierte (unterschiedliche, bestimmte) Audio-Inhalte oder Audio-Inhalte bestimmter Arten aus einer bestimmten, (im Verfahren ermittelten, optimierten), Richtungen oder Positionen kommen.Preferably, alternatively or additionally, such an adaptation of the at least one parameter of the audio signal is carried out, in which a subjective impression is created in at least one spatial area or in a person potentially located in a room area or sitting position that one or more channels of the Audio signal or audio content (s) or audio content of certain types represented in the audio signal come from a particular (direction-determined, optimized), directions or positions.
Insbesondere wird im Verfahren eine subjektiv empfundene Richtung und/oder Entfernung und/oder einer einem bestimmten Inhalt des Audiosignals entsprechenden Klangquelle (als ein subjektiv empfundener Ort, an dem der betreffende Inhalt durch die menschliche akustische Wahrnehmung empfunden wird), angepasst. Dabei können ein oder mehrere Phasenparameter, insbesondere ein Phasenparameter zumindest einer Signalkomponente eines Teils des auszugebenden Audiosignals, z.B. ein Phasenversatz zu einer weiteren Signalkomponente, die aus zumindest zwei unterschiedlichen im Wohnraum angeordneten oder ausgerichteten Lautsprechern oder virtuell gebildeten Klangquellen ausgegeben wird, angepasst werden.In particular, in the method, a subjectively perceived direction and / or distance and / or a sound source corresponding to a specific content of the audio signal (as a subjectively perceived location at which the content in question is perceived by human acoustic perception) are adapted. In this case, one or more phase parameters, in particular a phase parameter of at least one signal component of a part of the audio signal to be output, e.g. a phase offset to a further signal component, which is output from at least two different arranged in the living room or aligned speakers or virtually formed sound sources, adapted.
Die von einer bestimmten Person, insbesondere in einem bestimmten Raumbereich und/oder auf einem bestimmten Sitzplatz im Wohnraum wahrnehmbare Klangquelle, die zumindest einem Teil des Audiosignals bzw. der auditiven Meldung entspricht, kann dynamisch abhängig von dem zumindest einen Richtungsparameter der sprachlichen Kommunikation platziert, verlagert oder bewegt werden. Dies erfolgt beispielsweise in Kombination mit dem Variieren der Amplitude und/oder der Frequenzparameter der entsprechenden Schallwellen. Die Teile des Audiosignals können beispielsweise den in unterschiedlichen Kanälen eines Raumklangsignals, z.B. in einem Heimkino-Format, kodierten Inhalten (eine Stimme des Sprechers einer Sendung oder Unterhaltungsprogramms, Hintergrundmusik, sogenannte Atmosphärengeräusche, etc.) entsprechen. Beispielsweise kann auch eine Gewichtung und/oder eine räumliche Verlagerung und/oder Bewegung einzelner Teile bzw. bestimmter, ausgewählter Inhalte des Audiosignals, die unterschiedlichen Kanälen eines Raumklangsignals entsprechen, abhängig von der besagten Kommunikation zwischen zumindest zwei Personen verändert oder angepasst werden.The sound source perceptible by a specific person, in particular in a certain room area and / or on a certain seat in the living space, which corresponds to at least a part of the audio signal or the auditory message, can be dynamically shifted depending on the at least one directional parameter of the speech communication or be moved. This is done, for example, in combination with varying the amplitude and / or the frequency parameters of the corresponding sound waves. The parts of the audio signal may, for example, be stored in different channels of a surround sound signal, e.g. in a home theater format, encoded contents (a voice of the speaker of a program or entertainment program, background music, so-called atmospheric sounds, etc.). For example, a weighting and / or a spatial displacement and / or movement of individual parts or specific, selected contents of the audio signal corresponding to the different channels of a surround sound signal, depending on said communication between at least two people changed or adapted.
Beispielsweise falls die Person „Mutter“ sich vom Fernsehsofa aus an die auf dem Teppich oder ein einer Spielecke spielende Personen „Kinder“ wendet, dann wird ein Multimediainhalt im Bereich des Teppichs bzw. der Spielecke mit derart angepassten Parametern ausgegeben, dass eine hinreichende Hörbarkeit der vorliegenden Kommunikation, insbesondere der bestimmten sprachlichen Botschaft, gewährleistet wird.For example, if the person "mother" turns from the TV sofa to the person playing on the carpet or a play corner "children", then a multimedia content in the area of the carpet or the play area is issued with such adjusted parameters that a sufficient audibility of the communication, in particular the specific linguistic message.
Als zwei Raumbereiche können dabei zwei zumindest teilweise akustisch abgetrennte und/oder zumindest teilweise verbundene Zimmer eines Hauses verstanden werden.Two room areas can be understood as two rooms of a house that are at least partially acoustically separated and / or at least partially connected.
Darüber hinaus kann eine inhaltliche Verteilung von zwei oder mehrerer auditiver Inhalte auf Lautsprecher oder Klangquellen erzeugt werden, wobei eine gegenseitige Maskierung zumindest eines Abschnitts der besagten Kommunikation und zumindest eines Abschnitts des Audiosignals verringert und/oder eine verbesserte akustische Wahrnehmbarkeit und/oder Verständlichkeit durch zumindest eine Person im Wohnraum, z.B. durch zumindest einen (zumindest wahrscheinlichen) Zuhörer, ermöglicht.Moreover, a content distribution of two or more auditory contents to loudspeakers or sound sources may be generated, wherein mutual masking of at least a portion of said communication and at least a portion of the audio signal is reduced and / or improved acoustical perceptibility and / or intelligibility by at least one Person in the living room, eg by at least one (at least likely) listener.
Beispielsweise kann durch das Bestimmen eines Parameters (auch) ein Zuordnen, Verteilen oder Umverteilen eines zu der zumindest eines auditiven Inhalts korrespondierenden Audiosignals auf unterschiedliche Kanäle eines Raumklangsignals, z.B. in einem Heimkino-Format, veranlasst werden. Beispielsweise kann die zumindest eine auditive Meldung oder können zumindest zwei auditive Meldungen oder zumindest zwei Inhalte von zumindest zwei auditiver Meldungen oder eine auditive Meldung und ein Abschnitt eines weiteren Audiosignals auf unterschiedliche Kanäle eines im Wohnraum auszugebenden Raumklangsignals, in Abhängigkeit von vorausbestimmten Bedingungen verteilt werden. Auch kann die zumindest eine auditive Meldung zu den zumindest zwei bestimmten (jeweils ausgewählten) Kanälen eines, z.B. über das Audiosystem auszugebenden Audiosignals (in der nach vorausbestimmten Bedingungen zu erfolgender Weise) beigemischt werden.For example, by determining a parameter, (also) associating, distributing or redistributing an audio signal corresponding to the at least one auditory content to different channels of a surround sound signal, e.g. in a home theater format. For example, the at least one auditory message or at least two auditory messages or at least two contents of at least two auditory messages or an auditory message and a portion of another audio signal may be distributed to different channels of a surround sound signal to be outputted in the living space, depending on predetermined conditions. Also, the at least one auditory message may be sent to the at least two particular (respectively selected) channels of, e.g. be added via the audio system to be output (in the manner to be carried out according to predetermined conditions).
Gemäß einer zweckmäßigen Ausgestaltung erfolgt die Ausgabe zumindest eines Abschnitts oder zwei Abschnitten zumindest eines auszugebenden Audiosignals und/oder das Erzeugen von zumindest einer oder zumindest zwei unterschiedlichen auditiven Meldungen oder der zumindest zwei zumindest teilweise unterschiedlicher Abschnitte der zumindest einen auditiven Meldung abhängig von dem Richtungsparameter der besagten Kommunikation für einen (bestimmten) Raumbereich (von zumindest zwei unterschiedlichen Raumbereichen) und/oder mit zwei oder mehreren Klangquellen. Dabei kann es sich um zwei unterschiedliche Abschnitte einer auditiven Meldung oder ein oder mehrere weiterverarbeitete Audiosignale auf Basis zumindest einer auditiven Meldung handeln. Die Parameter der zumindest zwei auditiven Meldungen können derart angepasst werden, dass sich eine zweckmäßige Verteilung akustischer Schallwellen, insbesondere bestimmter Schallwellenmuster innerhalb des Wohnraums, insbesondere in bestimmten Raumbereichen, ergibt.According to an expedient embodiment, the output of at least one section or two sections of at least one audio signal to be output and / or the generation of at least two or at least partially different sections of the at least one auditory message depending on the directional parameter of said communication for a (specific) space area (of at least two different room areas) and / or with two or more sound sources. These may be two different sections of an auditory message or one or more further processed audio signals based on at least one auditory message. The parameters of the at least two auditory messages can be adapted in such a way that there is an expedient distribution of acoustic sound waves, in particular specific sound wave patterns within the living space, in particular in certain spatial areas.
Gemäß einer zweckmäßigen Ausgestaltung erfolgt eine Ausgabe von zumindest einem Abschnitt des weiteren Audiosignals oder eines oder mehrerer (bestimmter) Kanäle eines weiteren Audiosignals auf zumindest zwei Raumbereiche und/oder Klangquellen abhängig von einem ermittelten Richtungsparameter der besagten Kommunikation und/oder von den Parametern der zumindest einen (auszugebenen) auditiven Meldung. Insbesondere kann dabei von einer, beispielsweise in einem Raumklangsystem des Wohnraums oder in einem mehrkanaligen Audiosignal möglicherweise vorgesehenen Verteilungsvorschrift bzw. Raumklangkodierung abgewichen werden. Mit anderen Worten kann eine bestimmte Verteilung, bzw. nach vorausbestimmten Kriterien veränderbare Verteilung eines ausgegebenen, durch das auszugebende Audiosignal repräsentierten Inhalts zwischen zumindest zwei zumindest teilweise unterschiedlichen Raumbereichen bzw. Richtungen (im Koordinatensystem des Wohnraums) abhängig von einem oder mehreren Parametern der besagten Kommunikation ausgeführt werden.According to an expedient embodiment, at least a portion of the further audio signal or one or more (specific) channels of a further audio signal is output to at least two spatial regions and / or sound sources depending on a determined directional parameter of said communication and / or of the parameters of the at least one (to spend) auditory report. In particular, it is possible to deviate from a distribution rule or surround sound coding possibly provided, for example, in a surround sound system of the living space or in a multi-channel audio signal. In other words, a certain distribution or predefined variable distribution of an output content represented by the audio signal to be output between at least two at least partially different spatial regions or directions (in the coordinate system of the living space) may be performed depending on one or more parameters of said communication become.
Bevorzugt kann eine Verteilung oder eine Umverteilung der zumindest einen auditiven Meldungen, und einem Abschnitt des auszugebenden Audiosignals, oder zumindest zwei Abschnitten eines oder mehrerer auszugebenden Audiosignale entsprechender Schallwellen oder mit diesen korrespondierenden Schallwellenmuster auf zumindest zwei (bestimmte) Raumbereiche des Wohnraums ausgeführt werden. Dabei können die besagten zumindest zwei Raumbereiche bestimmt werden abhängig davon, ob und welche Personen, bestimmte Personen oder Personen zugehörig zu bestimmten Personengruppen sich dort zumindest mit einer erhöhten Wahrscheinlichkeit aufhalten.Preferably, a distribution or redistribution of the at least one auditory messages, and a portion of the audio signal to be output, or at least two sections of one or more audio signals corresponding sound waves or with corresponding sound wave pattern can be performed on at least two (certain) space areas of the living space. In this case, the said at least two spatial regions can be determined depending on whether and which persons, certain persons or persons belonging to certain groups of people are there at least with an increased probability.
Auch können Klangquellen oder Schallwellenmuster die mit unterschiedlichen auditiven Meldungen oder auditiven Meldungen aus unterschiedlichen Quellen oder Inhalten korrespondieren, abhängig von dem zumindest einen im Verfahren ermittelten Parameter der Kommunikation gesteuert, insbesondere geregelt, werden.Sound sources or sound wave patterns which correspond to different auditory messages or auditory messages from different sources or contents can also be controlled, in particular regulated, as a function of the at least one parameter of the communication determined in the method.
Das Anpassen der räumlichen Verteilung eines oder mehrerer Inhalte, z.B. auf zumindest zwei Raumbereiche des Wohnraums oder hörbar aus zumindest zwei Raumbereichen des Wohnraums, kann abhängig von einer erkannten Veränderung des zumindest einen Parameters der Kommunikation gesteuert werden. In diesem Fall kann der zumindest ein Parameter der Kommunikation eine, insbesondere eine bestimmte, Veränderung zumindest eines Parameters, z.B. eines aktuellen oder für eine nahe Zukunft prädizierten, z.B. akustischen Parameters der Kommunikation repräsentieren. Beispielsweise kann eine sich über die Zeit verändernde räumliche Verteilung der Schallwellen oder ein oder mehrere bestimmte Schallwellenmuster die mit bestimmten Abschnitten des Audiosignals und/oder mit zumindest einer auditiven Meldung korrespondieren, abhängig von einer zeitlichen Veränderung eines ermittelten Parameters der Kommunikation gesteuert werden.Adapting the spatial distribution of one or more contents, e.g. At least two spatial regions of the living space or audibly from at least two spatial regions of the living space can be controlled as a function of a recognized change in the at least one parameter of the communication. In this case, the at least one parameter of the communication can be one, in particular a specific, change of at least one parameter, e.g. of a current or predicted for a near future, e.g. represent the acoustic parameter of the communication. For example, a time-varying spatial distribution of the sound waves or one or more specific sound wave patterns corresponding to certain portions of the audio signal and / or at least one auditory message may be controlled depending on a time variation of a determined parameter of the communication.
Insbesondere wird im Verfahren eine subjektiv empfundene Richtung und/oder Entfernung und/oder einer einem bestimmten Inhalt eines auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung entsprechenden Klangquelle (als ein subjektiv empfundener Ort, an dem der betreffende Inhalt durch die menschliche akustische Wahrnehmung empfunden wird oder empfunden werden kann), angepasst. Dabei können ein oder mehrere Phasenparameter, insbesondere ein Phasenparameter zumindest einer Signalkomponente eines Teils eines Audiosignals auf Basis der auditiven Meldung, z.B. ein Phasenversatz zu einer weiteren Signalkomponente, die aus zumindest zwei unterschiedlichen im Wohnraum angeordneten physikalischen oder virtuell gebildeten Lautsprechern oder erzeugten Klangquellen ausgegeben wird, bestimmt oder angepasst werden.In particular, in the method, a subjectively perceived direction and / or distance and / or a sound source corresponding to a specific content of an audio signal to be output and / or the at least one auditory message (as a subjectively perceived location where the content in question is perceived by human acoustic perception will or can be felt), adapted. In this case, one or more phase parameters, in particular a phase parameter of at least one signal component of a part of an audio signal on the basis of the auditory message, e.g. determining or adjusting a phase offset to a further signal component output from at least two different physically or virtually formed loudspeakers or generated sound sources arranged in the living space.
Die von einer bestimmten Person, insbesondere in einem bestimmten Raumbereich und/oder auf einem bestimmten Sitzplatz im Wohnraum wahrnehmbare Klangquelle, die zumindest einem Teil der auditiven Meldung entspricht, kann dynamisch abhängig von dem zumindest einen Richtungsparameter der besagten Kommunikation platziert, verlagert oder bewegt werden. Dies erfolgt beispielsweise in Kombination mit dem Variieren der Amplitude und/oder der Frequenzparameter der entsprechenden Schallwellen. Die Teile des mit der auditiven Meldung korrespondierenden Audiosignals können beispielsweise abhängig von einem oder mehreren Parametern der besagten Kommunikation an einen oder mehrere unterschiedliche Kanäle eines Raumklangsignals verteilt werden, welches z.B. in einem Heimkino-Format vorliegt und ggf. weitere Inhalte (eine Stimme des Sprechers einer Sendung oder Unterhaltungsprogramms, Hintergrundmusik, sogenannte Atmosphärengeräusche, etc.) trägt. Dabei können bestimmte Inhalte der zumindest einen auditiven Meldung mittels eines kontrollierten Beimischens des entsprechenden Audiosignals zum Audiosignal eines Audiosystems des Wohnraums ausgegeben werden.The sound source perceivable by a particular person, particularly in a particular room area and / or seat in the living space, which corresponds to at least a portion of the auditory message may be dynamically placed, relocated or moved depending on the at least one directional parameter of said communication. This is done, for example, in combination with varying the amplitude and / or the frequency parameters of the corresponding sound waves. The parts of the audio signal corresponding to the auditory message can, for example, be sent to one or more different channels of one of these parameters depending on one or more parameters of said communication Ambient sound signal are distributed, which is eg in a home theater format and possibly further content (a voice of the speaker of a program or entertainment program, background music, so-called atmospheric noise, etc.) carries. In this case, certain contents of the at least one auditory message can be output by means of a controlled admixing of the corresponding audio signal to the audio signal of an audio system of the living space.
Alternativ oder zusätzlich kann eine Verteilung eines der auditiven Meldung korrespondierenden Audiosignals auf unterschiedliche Kanäle eines, z.B. in einem Heimkino-Format vorliegenden oder ermittelten Raumklangsignals, veranlasst werden. Auch können zumindest zwei auditive Meldungen oder zumindest zwei Inhalte zumindest zwei auditiver Meldungen auf unterschiedliche Kanäle eines im Wohnraum auszugebenden Raumklangsignals nach vorausbestimmten Bedingungen verteilt werden.Alternatively or additionally, a distribution of an audio signal corresponding to the auditory message to different channels of a, e.g. in a home theater format present or determined surround sound signal, be prompted. Also, at least two auditory messages or at least two contents of at least two auditory messages can be distributed to different channels of a room sound signal to be output in the living room according to predetermined conditions.
Beispielsweise kann auch eine Gewichtung und/oder eine teilweise räumliche Verlagerung und/oder Bewegung einzelner Bestandteile bzw. Inhalte des Audiosignals, die unterschiedlichen Kanälen eines Raumklangsignals entsprechen, abhängig von den Parametern der besagten Kommunikation zwischen zumindest zwei Personen verändert werden.For example, a weighting and / or a partial spatial displacement and / or movement of individual components or contents of the audio signal corresponding to different channels of a surround sound signal, depending on the parameters of said communication between at least two people can be changed.
Darüber hinaus kann eine inhaltliche Verteilung einer auditiven Meldung und/oder eines Abschnitts des weiteren auszugebenden Audiosignals auf Lautsprecher oder Klangquellen derart erzeugt werden, dass eine gegenseitige Störung oder Maskierung zumindest eines Abschnitts der Kommunikation und zumindest eines der auditiven Meldung verringert und/oder eine verbesserte akustische Wahrnehmbarkeit und/oder Verständlichkeit durch zumindest eine Person im Wohnraum, z.B. durch zumindest einen (zumindest wahrscheinlichen) Zuhörer, angestrebt wird.In addition, a content distribution of an auditory message and / or a portion of the further audio signal to be output to loudspeakers or sound sources can be generated such that mutual interference or masking of at least a portion of the communication and at least one of the auditory messages is reduced and / or improved acoustic Perceptibility and / or comprehensibility by at least one person in the living room, eg by at least one (at least likely) listener, is sought.
Gemäß einer zweckmäßigen Ausgestaltung umfasst das Verfahren eine Auswertung, insbesondere Analyse der besagten Kommunikation auf das Vorhandensein eines Satzfragments einer vorgegebenen Art, z.B. eines vorgegebenen Satzfragments, insbesondere repräsentierend eine Frage und/oder eine (daraufhin) in der Zukunft erwarteten Antwort. Im positiven Fall wird ein, insbesondere vorausschauendes, Anpassen der bislang verarbeiteten Richtungsparameter der besagten Kommunikation durchgeführt. Insbesondere erfolgt eine Umkehrung des zumindest einen bisher ermittelten bzw. verarbeiteten Richtungsparameters der Kommunikation. Bei der Umkehrung des Richtungsparameters kann z.B. ein bisher als ein „Zuhörer“ repräsentierter Raumbereich (nachfolgend) als „Sprecher“ kennzeichnet werden und/oder ein bisher als „Sprecher“ repräsentierter Raumbereich (nachfolgend) als ein „Zuhörer“ gekennzeichnet werden. Konkret kann ein solcher Satzfragment als eine Transaktion einer bestimmten Art bzw. Kategorie erkannt werden und mit oder ohne eine Erkennung eines Personennamens, Spitznamens, Rufnamens, einer sonstigen Bezeichnung der Person und mit oder ohne eine Erkennung einer fragenden Intonation, berücksichtigt werden.According to an expedient embodiment, the method comprises an evaluation, in particular analysis of the said communication for the presence of a sentence fragment of a predetermined type, e.g. a predetermined sentence fragment, in particular representing a question and / or a (subsequently) expected in the future answer. In the positive case, a, in particular anticipatory, adaptation of the previously processed directional parameters of the said communication is carried out. In particular, there is a reversal of the at least one previously determined or processed direction parameter of the communication. In reversing the directional parameter, e.g. a space area previously represented as a "listener" (hereafter) will be identified as a "speaker" and / or a space area previously represented as a "speaker" (hereafter) will be identified as a "listener". Specifically, such a sentence fragment may be recognized as a transaction of a particular type and category, with or without recognition of a personal name, nickname, nickname, other name of the person, and with or without recognition of a questioning intonation.
Dabei kann die erwartete Richtung der weiteren, bzw. einer nachfolgenden Kommunikation, beispielsweise zumindest in Bezug auf eine der nachfolgenden Transaktionen, prädiziert und berücksichtigt werden. Wenn z.B. ermittelt wird, dass eine Frage von einer bestimmten Person oder Person aus einem bestimmten Raumbereich an eine andere (bestimmte) Person oder Person aus einem anderen Raumbereich gerichtet ist, und daraufhin nach dem Beenden der Frage von einer entsprechenden Veränderung, insbesondere Umkehrung des Richtungsparameters der Kommunikation ausgegangen. Fragen innerhalb der sprachlichen Kommunikation können (je nach benutzter, eingestellten Sprache) anhand der für Fragen typischen Reihenfolge der Wörter und/oder einer für Fragen typischen Intonation, z.B. in Verbindung mit der Nennung des Namens einer Person, erkannt werden. Darüber hinaus kann der Empfänger der Frage abhängig von einem Parameter der Szene, Aktion, seiner körperlichen Reaktion auf eine Transaktion, z.B. Transaktion einer bestimmten Art und/oder einer körperlichen Zuwendung bestimmt werden.In this case, the expected direction of the further, or a subsequent communication, for example, at least with respect to one of the subsequent transactions, predicted and taken into account. If e.g. determining that a question from a particular person or person from a particular room area is directed to another (specific) person or person from another room area, and then after completing the question of a corresponding change, in particular reversing the directional parameter of the communication went out. Questions within the linguistic communication may (depending on the language used) be based on the order of words typical of questions and / or a questioning intonation, e.g. in connection with the naming of a person's name. In addition, the recipient of the question may depend on a parameter of the scene, action, his physical response to a transaction, e.g. Transaction of a particular type and / or a physical affection.
Ferner können im Verfahren auch Eigenschaften der Ausbreitung, Dämpfung, Reflektion akustischer Schallwellen im Wohnraum, insbesondere der Schallwellen aus mehreren unterschiedlichen Frequenzbereichen, berücksichtigt werden. Dabei können die entsprechenden Parameter, z.B. ein Datensatz repräsentierend ein akustisches Modell des Wohnraums ermittelt, eingelesen und/oder beim Bestimmen oder Anpassen eines oder mehrerer Parameter der besagten Auditiven Meldung und/oder eines Abschnitts des weiteren auszugebenden Audiosignals berücksichtigt werden. Beispielsweise können die Parameter repräsentierend eine akustische Trennung (Dämpfung, Reflektion, Phasenverschiebung) zwischen zumindest teilweise akustisch getrennten Teilen des Wohnraums, z.B. zwischen benachbarten Zimmern, Zimmer und ein angeschlossener Gang, etc. berücksichtigt werden. In einem vereinfachten Fall können z.B. Daten auf Basis einer sogenannten YPAO - Einmessung oder einer erweiterten Messung etwa nach dem Prinzip von YPAO berücksichtigt werden.Furthermore, properties of propagation, attenuation, reflection of acoustic sound waves in the living space, in particular of the sound waves from a plurality of different frequency ranges, can also be taken into account in the method. The corresponding parameters, e.g. a record representative of an acoustic model of the living space is determined, read and / or taken into account in determining or adjusting one or more parameters of said auditory message and / or a portion of the further audio signal to be output. For example, the parameters may represent an acoustic separation (attenuation, reflection, phase shift) between at least partially acoustically separated parts of the living space, e.g. between adjacent rooms, rooms and a connected corridor, etc. are taken into account. In a simplified case, e.g. Data based on a so-called YPAO - measurement or an extended measurement, for example, according to the principle of YPAO be considered.
Gemäß einer zweckmäßigen Ausgestaltung wird abhängig von einem oder mehreren Parametern der besagten Kommunikation eine Ausgabe einer mit einem Abschnitt eines (etwa im selben Zeitintervall auszugebenden) Audiosignals zusammenhängenden, insbesondere den Abschnitt des Audiosignals begleitenden Information gesteuert. Insbesondere handelt es sich bei der mit dem Audiosignal zusammenhängenden, insbesondere den Abschnitt des Audiosignals begleitenden, Information um eine Text-, Bild- oder Videoinformation. Bevorzugt wird ein Parameter zur Ausgabe einer mit einem Abschnitt des Audiosignals zusammenhängenden, insbesondere einen Abschnitt des Audiosignals begleitenden Information, insbesondere ein einer Text-, Bild- oder Videoausgabe, abhängig von dem ermittelten Parameter der Kommunikation im Wohnraum gesteuert.According to an expedient embodiment, depending on one or more parameters of the said communication, an output of an audio signal to be outputted (approximately in the same time interval) is output related, in particular the portion of the audio signal accompanying information controlled. In particular, the information associated with the audio signal, in particular accompanying the section of the audio signal, is text, image or video information. Preferably, a parameter for outputting an associated with a portion of the audio signal, in particular a portion of the audio signal accompanying information, in particular a text, image or video output, depending on the determined parameter of communication in the living room controlled.
Ferner kann die besagte zugeordnete oder begleitende Information auch einem Teil des Inhalts des Audiosignals bzw. des Abschnitts des Audiosignals (in einer veränderten Form) entsprechen. Eine solche den Abschnitt des auszugebenden Audiosignals begleitende Information kann auch einen Inhalt eines betreffenden Abschnitts des Audiosignals, in einer anderen oder alternativen Form zumindest sinngemäß entsprechen, oder eine solche Information umfassen.Furthermore, the said associated or accompanying information may also correspond to a part of the content of the audio signal or the portion of the audio signal (in an altered form). Such information accompanying the section of the audio signal to be output can also correspond to a content of a relevant section of the audio signal, at least correspondingly in another or alternative form, or comprise such information.
Beispielsweise kann zusammen mit einem Abschnitt des auszugebenden Audiosignals oder alternativ zu einem Abschnitt des Audiosignals eine begleitende Information erzeugt bzw. ausgegeben werden, die z.B. eine dem Abschnitt des Audiosignals mehr oder minder entsprechende oder mit dem Abschnitt des Audiosignals mehr oder minder korrespondierende Information ausgegeben werden, wobei die Ausgabe beispielsweise eine Darstellung in einer visuellen Form oder in einer textuellen Form (als eine Art eingelesener oder im Verfahren, z.B. mittels einer Interpretation erzeugter „Untertitel“ oder eine „Textspur“) umfasst. Ein Parameter zum Erzeugen bzw. Ausgabe einer solchen Information kann abhängig von dem Parameter der besagten Kommunikation gesteuert werden.For example, along with a portion of the audio signal to be output, or alternatively to a portion of the audio signal, accompanying information may be generated, e.g. an information more or less corresponding to the portion of the audio signal or more or less corresponding to the portion of the audio signal is output, the output being for example a representation in a visual form or in a textual form (as a type read in or in the method, eg by means of a Interpretation of generated "subtitles" or a "text track"). A parameter for generating or outputting such information may be controlled depending on the parameter of said communication.
Alternativ oder zusätzlich kann im Verfahren eine Information, bevorzugt ein von dem Inhalt des Abschnitts des Audiosignals bzw. von der auditiven Meldung abhängige Information ersatzweise auf ein mobiles Anwendergerät einer Person übermittelt werden und/oder über ein vernetztes mobiles Anwendergerät einer Person im Wohnraum ausgegeben werden. Beispielsweise wenn im Wohnraum eine Kommunikation mit bestimmten oder bestimmte Grenzwerte übersteigenden Parametern läuft oder prädiziert wurde, kann ein Abschnitt des Audiosignals bzw. eine auditive Meldung mittels eines mobilen Anwendergeräts einer Person im Wohnraum ausgegeben werden.Alternatively or additionally, in the method, information, preferably an information dependent on the content of the section of the audio signal or on the auditory message, may alternatively be transmitted to a mobile user device of a person and / or output via a networked mobile user device of a person in the living space. For example, if in the living space communication with certain or certain limit exceeding parameters is running or predicted, a portion of the audio signal or an auditory message can be issued by a mobile user device of a person in the living room.
Falls ein betreffender Abschnitt des Audiosignals ein Teil eines Multimediainhalts, z.B. einer Videosequenz, eines Films, eines Videospiels oder einer TV-sendung oder eines Videostreams ist, kann eine Ausgabe eines dem Abschnitt des Audiosignals entsprechenden bzw. zum Abschnitt des Audiosignals zugeordneten Videoinhalts ebenfalls angepasst werden. In einem vereinfachten Fall kann ein Parameter eines auszugebenden Videoinhalts auf dieselbe, sinngemäß analoge oder nach einem vorausbestimmten Kriterium zusammenhängender Weise bestimmt, angepasst, gesteuert werden wie ein oder mehrere, insbesondere sinngemäß entsprechende Parameter eines mit dem besagten Videoinhalt korrespondierenden Audiosignals.If a relevant portion of the audio signal is part of a multimedia content, e.g. a video sequence, a movie, a video game or a TV broadcast or a video stream, an output of a video content corresponding to the portion of the audio signal or associated with the portion of the audio signal can also be adapted. In a simplified case, a parameter of a video content to be output can be determined, adapted, controlled in the same manner analogously or according to a predetermined criterion, such as one or more, in particular mutatis mutandis, corresponding parameters of an audio signal corresponding to the said video content.
Im Verfahren kann ein Erzeugen bzw. die Ausgabe weiterer Multimediadaten in einer analogen bzw. sinngemäß entsprechenden Weise wie das Anpassen des Audiosignals gesteuert werden. Beispielsweise kann ein Parameter einer Videoausgabe abhängig von dem zumindest einen Parameter der besagten Kommunikation variiert werden. Bevorzugt können Parameter weiterer, den besagten auszugebenden Abschnitt des Audiosignals begleitender oder nach einer vorausbestimmten Vorschrift zu dem Audiosignal zugeordneter oder innerhalb eines vordefinierten Zeitintervalls mit dem Abschnitt des Audiosignals eingelesener oder auszugebender Daten nach vorgegebenen Kriterien angepasst werden. Beispielsweise können abhängig von einem Parameter der besagten Kommunikation und/oder abhängig von einem Parameter eines weiteren akustischen Inhalts im Wohnraum, die Untertitel eines Film- bzw. Videoprogramms (für ein betreffendes Zeitintervall) gesteuert, z.B. eingeschaltet und/oder ausgeschaltet und/oder durch eine weitere vernetzte Vorrichtung, z.B. ein mobiles Anwendergerät einer Person ausgebeben werden.In the method, generating or outputting further multimedia data can be controlled in an analogous manner, such as adjusting the audio signal. For example, a parameter of a video output may be varied depending on the at least one parameter of said communication. Preferably, parameters of further data accompanying the said portion of the audio signal to be output or assigned to the audio signal according to a predetermined rule or read in or output within a predefined time interval with the portion of the audio signal may be adjusted according to predetermined criteria. For example, depending on a parameter of said communication and / or depending on a parameter of another acoustic content in the living space, the subtitles of a movie program (for a respective time interval) may be controlled, e.g. switched on and / or off and / or by another networked device, e.g. a mobile user device of a person be bounced.
In einem optionalen Beispiel wird ein Zusammenhang zwischen einem auszugebenden Abschnitt des Audiosignals und einem weiteren Multimediainhalt, z.B. einem Abschnitt der Videosequenz ermittelt. Beispielsweise kann ein Maß einer zulässigen zeitlichen Toleranz zwischen der Ausgabe eines Bildes bzw. eines Abschnitts des Videosignals und eines bestimmten Abschnitts des Audiosignals ermittelt werden. Das Maß der zulässigen zeitlichen Toleranz kann beispielsweise aus dem inhaltlichen Merkmal des Abschnitts der Videosequenz und/oder der Audiosequenz und/oder aus den das Multimediasignal begleitenden Daten oder durch eine inhaltliche Auswertung des Multimediasignals ermittelt, insbesondere geschätzt werden.In an optional example, a relationship between a portion of the audio signal to be output and another multimedia content, e.g. a section of the video sequence determined. For example, a measure of a permissible temporal tolerance between the output of an image or a section of the video signal and a specific section of the audio signal can be determined. The extent of the permissible temporal tolerance can be determined, for example, from the content-related feature of the section of the video sequence and / or the audio sequence and / or from the data accompanying the multimedia signal or through a content evaluation of the multimedia signal.
Falls festgestellt wird, dass ein mehr oder minder fester (zeitlicher, inhaltlicher, kausaler) Zusammenhang zwischen einer Ausgabe eines Abschnitts des auszugebenen Audiosignals einerseits und eines Abschnitts einer begleitenden Information, z.B. einer Videosequenz, eines Abschnitts der Untertitel oder Dergleichen andererseits, notwendig bzw. zweckmäßig ist, kann auf das Vorliegen zumindest einer vorausbestimmten Bedingung im Zusammenhang mit der besagten Kommunikation ein Parameter eines auszugebenden Abschnitts des Audiosignals und ein entsprechender auszugebender Abschnitt einer begleitenden Information, z.B. der Videoausgabe oder der Untertitel angepasst werden. Falls festgestellt wird, dass kein oder kein fester zeitlicher Zusammenhang notwendig ist oder der zeitlicher Zusammenhang eine niedrige, untergeordnete Priorität hat, kann nur oder vorwiegend der Abschnitt des Audiosignals verändert werden, während der entsprechende Videoabschnitt nicht verändert wird oder nach weiteren, insbesondere abweichenden, Kriterien verändert wird.If it is determined that a more or less firm (temporal, contentual, causal) connection between an output of a section of the audio signal to be output on the one hand and a section of accompanying information, eg a video sequence, a section of the subtitles or the like, on the other hand is necessary is, can be present on that at least one predetermined condition associated with said communication, a parameter of a portion of the audio signal to be output and a corresponding portion of accompanying information to be output, eg, the video output or the subtitles, are adjusted. If it is determined that no or no fixed temporal relationship is necessary or the temporal relationship has a low, subordinate priority, only or predominantly the portion of the audio signal can be changed while the corresponding video portion is not changed or according to further, especially different, criteria is changed.
Gemäß einer zweckmäßigen Ausgestaltung wird ein oder mehrere Parameter zur Ausgabe zumindest einer auditiven Meldung abhängig von einem oder mehreren Parametern der besagten Kommunikation bestimmt oder angepasst, wobei die zumindest eine auditive Meldung sich von dem auszugebenden Audiosignal unterscheidet und insbesondere zumindest teilweise im selben gewissen Zeitintervall wie zumindest ein Abschnitt des Audiosignals auszugegeben ist, z.B. im selben gewissen Zeitintervall von ca. 5, 15, 30, 60 Sekunden, zur Ausgabe bestimmt ist. Dabei können diverse in diesem Dokument beschriebene Parameter der zumindest einen auditiven Meldung abhängig von diversen ermittelten bzw. prädizierten Parametern der besagten Kommunikation, sowie von den weiteren Parametern z.B. der Szene, Körpersprache, etc. gesteuert werden.According to an expedient embodiment, one or more parameters for outputting at least one auditory message depending on one or more parameters of said communication is determined or adjusted, wherein the at least one auditory message differs from the audio signal to be output, and in particular at least partially in the same certain time interval as at least a portion of the audio signal is output, eg in the same certain time interval of about 5, 15, 30, 60 seconds, intended for output. Various parameters described in this document can be used for the at least one auditory message depending on various determined or predicated parameters of said communication, as well as on the other parameters, e.g. the scene, body language, etc. are controlled.
Auch kann ein Parameter zur Ausgabe einer, einen Abschnitt der zumindest einer auditiven Meldung begleitenden Information, insbesondere ein Parameter einer Text-, Bild- oder Videoausgabe, abhängig von dem ermittelten Parameter der besagten Kommunikation und/oder abhängig von dem zumindest einen Parameter des Abschnitts des auszugebenden Audiosignals gesteuert werden. Beispielsweise, wenn ermittelt oder prädiziert wird, dass aktuell oder in einem vorausliegenden Zeitintervall bestimmte akustischen Grenzwerte (z.B. wegen einem Abschnitt des auszugebenden Audiosignals), insbesondere betreffend einen bestimmten Raumbereich, überschritten werden, dann kann die zumindest eine auditive Meldung ersatzweise in Form einer Text-, Bild- oder Videoausgabe ausgegeben werden. Auch kann die zumindest eine auditive Meldung ersatzweise mit Mitteln einer alternativen Ausgabevorrichtung ausgegeben werden, beispielsweise kann die die zumindest eine auditive Meldung oder einer alternativen Information ersatzweise an einem mobilen Anwendergerät zumindest einer (betreffenden) Person im Wohnraum ausgegeben werden.Also, a parameter for outputting an information accompanying a portion of the at least one auditory message, in particular a parameter of a text, image or video output, depending on the determined parameter of said communication and / or depending on the at least one parameter of the section of be output to be output audio signal. For example, if it is determined or predicted that certain acoustic limit values (for example because of a section of the audio signal to be output), especially regarding a certain spatial area, are exceeded, then the at least one auditory message can be substituted in the form of a textual message. , Video or video output. The at least one auditory message may alternatively be output by means of an alternative output device, for example, the at least one auditory message or alternative information may alternatively be output to a mobile user device of at least one person in the living space.
Gemäß einer zweckmäßigen Ausgestaltung wird ein oder mehrere Parameter repräsentierend eine spektrale Eigenschaft, insbesondere ein Frequenzdichtespektrum zumindest eines Abschnitts des auszugebenden Audiosignals oder eine Wellenlängeneigenschaft der mit zumindest einem Abschnitt des Audiosignals korrespondierenden Schallwellen oder Schallwellenmuster, abhängig von dem zumindest einen Parameter der Kommunikation bestimmt oder angepasst.According to an expedient embodiment, one or more parameters representing a spectral property, in particular a frequency density spectrum of at least a portion of the audio signal to be output or a wavelength characteristic of the sound waves or sound wave patterns corresponding to at least a portion of the audio signal, are determined or adjusted depending on the at least one parameter of the communication.
Auch kann abhängig oder unabhängig davon ein Frequenzdichtespektrum eines der zumindest einen auditiven Meldung entsprechenden (auf Basis der auditiven Meldung erzeugten) Audiosignals oder eine Wellenlängeneigenschaft der mit zumindest einem Abschnitt der auditiven Meldung korrespondierenden Schallwellen oder Schallwellenmuster, abhängig von dem zumindest einen Parameter der besagten Kommunikation bestimmt oder angepasst. Dabei kann eine spektrale Eigenschaft, insbesondere ein Frequenzdichtespektrum eines Abschnitts der zumindest einen auditiven Meldung entsprechenden (auf Basis der auditiven Meldung erzeugten) Audiosignals und die spektrale Eigenschaft, insbesondere ein Frequenzdichtespektrum zumindest des auszugebenden Audiosignals, jeweils unterschiedlich bzw. auf eine unterschiedliche Weise bestimmt oder angepasst werden. Bzw. kann eine spektrale Eigenschaft, insbesondere ein oder mehrere Wellenlängenbereiche der Schallwellen die mit der zumindest einen auditiven Meldung korrespondieren (auf Basis der auditiven Meldung erzeugt werden) und die spektrale Eigenschaft, insbesondere ein oder mehrere Wellenlängenbereiche der Schallwellen die mit einem Abschnitt des auszugebenden Audiosignals korrespondieren (auf Basis des Abschnitts des weiteren Audiosignals erzeugt sind) unterschiedlich bzw. auf eine unterschiedliche Weise bestimmt oder angepasst werden. Beispielsweise kann die spektrale Eigenschaft, insbesondere ein Frequenzdichtespektrum eines der zumindest einen auditiven Meldung entsprechenden (auf Basis der auditiven Meldung erzeugten) Audiosignals bzw. der entsprechenden in einem Raumbereich erzeugter Schallwellen derart angepasst werden, dass eine (vergrößerte) Trennung zwischen den (im gleichen Zeitintervall auszugebenden) Frequenzparametern bzw. Wellenlängenparametern eines Abschnitts des auszugebenden Audiosignals, bewirkt wird. Mit anderen Worten kann sozusagen ein zueinander komplementäres Anpassen der entsprechenden Parameter der zumindest einer auditiven Meldung und/oder des Abschnitts des auszugebenden Audiosignals ausgeführt werden.Also, depending on or independently of this, a frequency density spectrum of an audio signal corresponding to at least one auditory message (generated based on the auditory message) or a wavelength characteristic of the sound waves or sound wave patterns corresponding to at least a portion of the auditory message may be determined depending on the at least one parameter of said communication or adjusted. In this case, a spectral property, in particular a frequency density spectrum of a portion of the audio signal corresponding to at least one auditory message (generated on the basis of the auditory message) and the spectral property, in particular a frequency density spectrum of at least the audio signal to be output, can be determined or adapted differently or in a different manner become. Respectively. a spectral property, in particular one or more wavelength ranges of the sound waves which correspond to the at least one auditory message (generated on the basis of the auditory message) and the spectral property, in particular one or more wavelength ranges of the sound waves which correspond to a portion of the audio signal to be output ( generated on the basis of the portion of the further audio signal) are determined differently or in a different way or adapted. For example, the spectral property, in particular a frequency density spectrum of an audio signal corresponding to the at least one auditory message (generated on the basis of the auditory message) or the corresponding sound waves generated in a spatial area, can be adjusted such that an (enlarged) separation between the (in the same time interval output) frequency parameters or wavelength parameters of a portion of the audio signal to be output, is effected. In other words, a complementary adaptation of the corresponding parameters of the at least one auditory message and / or the section of the audio signal to be output can be carried out, as it were.
Beispielsweise erfolgt ein derartiges Erzeugen oder eine derartige Abwandlung des Audiosignals , dass Signalkomponenten des Audiosignals die eine (hohe) Überdeckung mit dem Frequenzbereich einer menschlicher Stimme, insbesondere mit der zumindest einer Stimme innerhalb der besagten Kommunikation aufweisen, in Frequenzkomponenten, die eine geringere Überdeckung mit dem Frequenzbereich einen menschlicher Stimme, insbesondere mit der zumindest einen Stimme innerhalb der besagten Kommunikation aufweisen, abgewandelt werden.By way of example, such generation or modification of the audio signal occurs that signal components of the audio signal which have a (high) coverage with the frequency range of a human voice, in particular with the at least one voice within said communication, into frequency components which have less coverage with the audio signal Frequency range a human voice, in particular with the at least one voice within the said communication, modified.
Bevorzugt können dabei die Frequenzkomponenten des auszugebenden Audiosignals, die eine Überdeckung mit dem Frequenzbereich einer menschlichen Stimme, insbesondere mit der Stimme des Sprechers innerhalb der besagten Kommunikation, aufweisen, hinsichtlich ihrer Frequenzparameter verändert werden. Diese können einer Frequenzbandanpassung oder einer zweckmäßigen Frequenzbandkompression unterzogen werden. Dabei können die besagten Frequenzkomponenten des Audiosignals, die eine (hohe oder besonders hohe) Überdeckung mit dem Frequenzbereich einer menschlichen Stimme, insbesondere mit der (bestimmten bzw. im betreffenden Zeitintervall klingenden) Stimme zumindest eines Sprechers innerhalb der besagten Kommunikation, aufweisen, in Frequenzkomponenten umgewandelt werden, die eine geringere Überdeckung mit dem Frequenzbereich der zumindest einen menschlichen Stimme, insbesondere der Stimme des Sprechers innerhalb der besagten Kommunikation aufweisen.Preferably, the frequency components of the audio signal to be output, which have an overlap with the frequency range of a human voice, in particular with the voice of the speaker within the said communication, can be changed with respect to their frequency parameters. These may be subjected to frequency band adjustment or convenient frequency band compression. In this case, the said frequency components of the audio signal, which have a (high or very high) coverage with the frequency range of a human voice, in particular with the (specific or in the relevant time interval sounding) voice of at least one speaker within the said communication, converted into frequency components which have less coverage with the frequency range of the at least one human voice, in particular the voice of the speaker within the said communication.
Beispielsweise können ein oder mehrere Parameter zumindest eines Abschnitts des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung derart bestimmt oder angepasst werden, dass ein Teil der Signalkomponenten des Abschnitts des Audiosignals, der den Frequenzbereich der menschlichen Sprache, insbesondere die (aktuell oder in der Vergangenheit erfasste) Stimme des Sprechers wesentlich betrifft, derart abgewandelt wird, dass ein Teil der entsprechenden Signalenergie zumindest teilweise reduziert und/oder auf einen oder mehrere Frequenzbereiche verteilt wird, die den Frequenzbereich der menschlichen Stimme, insbesondere der Stimme des Sprechers, nicht oder in einem geringeren Maße betrifft bzw. betreffen.For example, one or more parameters of at least a portion of the audio signal to be output and / or the at least one auditory message may be determined or adjusted such that a portion of the signal components of the portion of the audio signal containing the frequency range of human speech, in particular the (current or in the Is substantially modified, such that part of the corresponding signal energy is at least partially reduced and / or distributed to one or more frequency ranges that do not or in one frequency range of the human voice, in particular the voice of the speaker concerns smaller extent or concern.
Es kann eine Transformation der Signalkomponenten im Frequenzbereich, z.B. als eine Anpassung des Frequenzdichtespektrums ausgeführt werden, wobei die Signalkomponenten des auszugebenden Audiosignals im Frequenzbereich, die einen wesentlichen Teil ihrer Signalenergie innerhalb des Frequenzbereichs der menschlichen Sprache, insbesondere innerhalb der Stimme des Sprechers aufweisen, in einen oder mehrere Frequenzbereiche transformiert („verschoben“) werden, der oder die den Frequenzbereich der menschlichen Sprache nicht oder weniger betreffen. Dabei können ein oder mehrere erste Frequenzbänder bzw. Wellenlängenbereiche gebildet werden, in die ein Inhalt des zumindest eines ersten Abschnitts (z.B. des einen ersten Audiosignals oder einer ersten auditiven Meldung) transformiert wird und ein oder mehrere akustische Frequenzbänder gebildet werden, in die ein Inhalt des zumindest eines zweiten Abschnitts (z.B. eines zweiten Audiosignals oder einer zweiten auditiven Meldung) transformiert wird.There may be a transformation of the signal components in the frequency domain, e.g. are performed as an adjustment of the frequency density spectrum, wherein the signal components of the audio signal to be output in the frequency domain, which have a substantial part of their signal energy within the frequency range of human speech, in particular within the voice of the speaker, are transformed ("shifted") into one or more frequency ranges that does not affect or less the frequency range of human speech. In this case, one or more first frequency bands or wavelength ranges can be formed into which a content of the at least one first section (eg of the first audio signal or a first auditory message) is transformed and one or more acoustic frequency bands are formed into which a content of the at least a second portion (eg a second audio signal or a second auditory message) is transformed.
Alternativ oder zusätzlich können Töne, Sequenzen von Tönen, Melodien, Geräusche der zumindest einen auditiven Meldung angepasst werden. Dabei kann auch der annähernd derselbe oder entsprechende Inhalt der zumindest einen auditiven Meldung (dieselbe Information, Informationsinhalt), z.B. eine Information im Zusammenhang mit der Bedienung eines im Haus betriebener Vorrichtung, mit anderen, angepassten Tönen, Sequenzen von Tönen, Melodien oder Geräuschen ausgegeben werden.Alternatively or additionally, tones, sequences of tones, melodies, sounds of the at least one auditory message can be adapted. In this case, also the approximately the same or corresponding content of the at least one auditory message (the same information, information content), e.g. information related to the operation of an in-house device may be outputted with other adapted tones, sequences of tones, melodies or sounds.
Beispielsweise kann zumindest ein erstes Merkmal der zumindest einen auditiven Meldung, welches kennzeichnend ist für eine auditive Meldung einer bestimmten Art, oder kennzeichnend ist für den Bezug der auditiven Meldung zu einer bestimmten Vorrichtung im Haus oder zu einer weiteren Information oder zu einem Event, oder kennzeichnend ist für ein Prioritätsmaß der besagten auditiven Meldung, angepasst werden, während zumindest ein zweites Merkmal das kennzeichnend ist für zumindest ein inhaltliches Merkmal der auditiven Meldung, beispielsweise eine mit der auditiven Meldung zu übermittelnde Information, insbesondere eine textuelle bzw. faktische Information, im Wesentlichen unverändert oder betont bzw. hervorgehoben werden kann.For example, at least a first feature may be indicative of, or indicative of, the at least one auditory message indicative of an auditory message of a particular type or indicative of the auditory message to a particular device in the home or other information or event is for a priority measure of said auditory reporting, adapted, while at least a second feature that is indicative of at least one substantive feature of the auditory reporting, for example, to be transmitted with the auditory message information, in particular a textual or factual information, essentially unchanged or can be emphasized or highlighted.
Beispielsweise kann eine oder mehrere Frequenzen und/oder Amplituden, in welchen die Töne ausgegeben werden, angepasst werden, während eine Tonsequenz im Wesentlichen konstant bleibt. Somit ist die auditive Meldung durch die menschliche Wahrnehmung immer noch hinreichend wiedererkennbar bzw. interpretierbar.For example, one or more frequencies and / or amplitudes in which the tones are output may be adjusted while a tone sequence remains substantially constant. Thus, the auditory message through human perception is still sufficiently recognizable or interpretable.
Alternativ oder zusätzlich kann ein Parameter des Frequenzspektrums bzw. des Wellenlängenbereichs eines Abschnitts des weiteren Audiosignals abhängig von einem oder mehreren Parametern der besagten Kommunikation und/oder von einem oder mehreren Parameter der zumindest einen (im selben Zeitintervall auszugebenden) auditiven Meldung bestimmt werden. Beispielsweise kann ein Frequenzparameter, z.B. Parameter des Frequenzspektrums eines Abschnitts des weiteren Audiosignals bestimmt oder angepasst werden, abhängig von dem ermittelten oder prädizierten Parameter der besagten Kommunikation und/oder einem Parameter der im selben gewissen Zeitintervall auszugebenden auditiven Meldung.Alternatively or additionally, a parameter of the frequency spectrum or of the wavelength range of a section of the further audio signal can be determined depending on one or more parameters of said communication and / or on one or more parameters of the at least one audible message (to be output in the same time interval). For example, a frequency parameter, e.g. Parameters of the frequency spectrum of a portion of the further audio signal can be determined or adjusted, depending on the determined or predicted parameter of the said communication and / or a parameter of the output in the same certain time interval auditory message.
Gemäß einer zweckmäßigen Ausgestaltung, werden auf Basis eines Abschnitts des Audiosignals und/oder einer auditiven Meldung zu erzeugenden Schallwellen bzw. Schallwellenmuster die sich, zumindest statistisch, hinsichtlich ihrer Frequenzen bzw. Frequenzbereiche mit den (ermittelten oder prädizierten) akustischen Schallwellen des Sprechers überlagern bzw. wahrscheinlich überlagern werden, ersatzweise in einem veränderten oder angepassten Frequenzbereich und/oder in einem zumindest teilweise abweichenden Raumbereich des Wohnraums erzeugt.According to an expedient refinement, sound waves or sound wave patterns to be generated on the basis of a section of the audio signal and / or an auditory message are at least statistically, in terms of their frequencies or frequency ranges with the (determined or predicted) acoustic sound waves of the speaker superimpose or probably overlap, alternatively produced in a modified or adjusted frequency range and / or in an at least partially divergent space area of the living space.
Bevorzugt werden die besagten Schallwellen auf Basis des Abschnitts des auszugebenden Audiosignals bzw. auf Basis der zumindest einer auditiven Meldung zumindest teilweise von einer ersten Raumrichtung, in der sich der zumindest ein Sprecher befindet, zu einer zweiten Raumrichtung verlagert (d.h. ersatzweise aus einer zweiten Richtung ausgegeben), die abweichend von der ersten Richtung ist.Preferably, said sound waves are at least partially displaced from a first spatial direction in which the at least one speaker is located to a second spatial direction based on the portion of the audio signal to be outputted or based on the at least one auditory message (ie, issued as a substitute from a second direction ), which is different from the first direction.
Mit anderen Worten kann eine zumindest teilweise Veränderung der auf Basis eines Abschnitts des auszugebenden Audiosignals oder der zumindest einen auditiven Meldung innerhalb eines oder mehrerer bestimmten Wellenlängenbereiche zu erzeugenden Schallwellen, die sich (im betreffenden Zeitintervall oder zumindest statistisch) mit den Wellenlängenbereichen des akustischen Sprachsignals des Sprechers überlagern bzw. wahrscheinlich überlagern werden, veranlasst werden. Dabei können die auf Basis eines Abschnitts des Audiosignals oder der zumindest einer auditiven Meldung akustische Schallwellen ersatzweise in veränderten, abweichenden Wellenlängenbereichen erzeugt werden, die eine geringere Überschneidung (im betreffenden Zeitintervall oder zumindest statistisch) mit den (aktiv genutzten) Wellenlängenbereichen des akustischen Sprachsignals des Sprechers und/oder eines weiteren im Wohnraum hörbaren akustischen Inhalts, überlagern bzw. wahrscheinlich überlagern werden.In other words, an at least partial change in the sound waves to be generated based on a portion of the audio signal to be output or the at least one auditory message within one or more particular wavelength ranges, which (at the relevant time interval or at least statistically) with the wavelength ranges of the acoustic speech signal of the speaker superimpose or are likely to be superimposed. In this case, based on a portion of the audio signal or the at least one auditory message, acoustic sound waves may alternatively be generated in altered, deviating wavelength ranges, which have less overlap (in the relevant time interval or at least statistically) with the (actively used) wavelength ranges of the speaker's acoustic speech signal and / or another audible content audible in the living space, superimpose or are likely to overlap.
Bevorzugt werden die besagten Schallwellen betreffend einen bestimmten Schallwellenbereich in dem zumindest eine gegenseitige Störung zumindest eines Abschnitts des Audiosignals, der zumindest einer auditiven Meldung, und/oder eines Abschnitts der besagten Kommunikation von einer ersten Raumrichtung, in der sich der zumindest ein Sprecher und/oder Zuhörer befindet, zu einer zweiten Raumrichtung verlagert, die abweichend von der ersten Richtung angeordnet ist. Dabei können ein oder mehrere Parameter des Audiosignals derart gesteuert werden, dass die, z.B. durch die entsprechenden Lausprecher oder Klangquellen ausgegebenen Schallwellen, die durch die besagten Frequenzen gekennzeichnet sind, in einer anderen, insbesondere zweckmäßig verlagerten, Raumrichtung, z.B. in einem anderen Raumbereich ausgegeben werden. Insbesondere kann eine spektrale Eigenschaft, insbesondere ein Frequenzdichtespektrum zusammen, insbesondere in einer zweckmäßigen Kombination, mit einer entsprechenden Veränderung des zumindest einen Raumklangparameters verändert oder angepasst werden.The said sound waves relating to a specific sound wave range are preferred in the at least one interference of at least a portion of the audio signal, the at least one auditory message, and / or a portion of said communication from a first spatial direction in which the at least one speaker and / or Listener is moved to a second spatial direction, which is arranged differently from the first direction. In this case, one or more parameters of the audio signal may be controlled such that the, e.g. sound waves emitted by the corresponding loudspeakers or sound sources, characterized by said frequencies, in another, particularly suitably displaced, spatial direction, e.g. be spent in another room area. In particular, a spectral property, in particular a frequency density spectrum together, in particular in a suitable combination, can be changed or adapted with a corresponding change of the at least one surround sound parameter.
Beispielsweise kann ein Abschnitt des auszugebenden Audiosignals der in etwa aus der Richtung des Sprechers (der im selben Zeitintervall sprechender Person) oder im Raumbereich des Sprechers auszugeben ist und den Frequenzbereich, z.B. von 120 - 6000 Hz, insbesondere von 350 - 3000 Hz wesentlich betrifft, hinsichtlich seiner Amplitude reduziert wird und/oder zumindest teilweise aus einer anderen Richtung als der Richtung des Sprechers oder in einem Raumbereich als der Raumbereich des Sprechers ausgegeben werden.For example, a portion of the audio signal to be outputted may be outputted from the direction of the speaker (who is speaking in the same time interval) or in the speaker's spatial area and the frequency range, e.g. from 120 to 6000 Hz, in particular from 350 to 3000 Hz, is reduced in amplitude and / or at least partially output from a direction other than the direction of the speaker or in a spatial region as the speaker's spatial region.
Auch können die Signalkomponenten, die aus einer anderen Richtung als der Richtung des Sprechers oder in einem Raumbereich als der Raumbereich des Sprechers ausgegeben werden und den Frequenzbereich von 120 - 6000 Hz, insbesondere 350 - 3000 Hz betreffen, verstärkt werden.Also, the signal components output from a direction other than the speaker's direction or in a space area than the speaker's room area and affecting the frequency range of 120-6000 Hz, particularly 350-3000 Hz can be amplified.
Beispielsweise umfasst das Verändern oder Anpassen des Parameters des auszugebenden Audiosignals eine zumindest teilweise Verlagerung der Schallwellen auf Basis des Audiosignals, die zumindest kumuliert oder statistisch, den Frequenzen bzw. der Schallwellenlängen (eines ermittelten oder prädizierten) akustischen Sprachsignals des Sprechers entsprechen, insbesondere eine hohe Überdeckung mit dem Frequenzkomponenten bzw. der Schallwellenlängen des akustischen Sprachsignals des Sprechers aufweisen bzw. voraussichtlich aufweisen werden, von einer ersten Raumrichtung, in der sich der Sprecher befindet, zu einer zweiten Raumrichtung, die abweichend von der ersten Raumrichtung, insbesondere im Wesentlichen entgegengesetzt zu der ersten Raumrichtung, angeordnet ist, und/oder von einem ersten Raumbereich wo sich der zumindest eine Zuhörer befindet zu einem zweiten Raumbereich der abweichend von dem ersten Raumbereich ist.For example, changing or adjusting the parameter of the audio signal to be output comprises at least partially shifting the sound waves based on the audio signal, which at least cumulatively or statistically correspond to the frequencies or sound wavelengths (of a determined or predicted) acoustic speech signal of the speaker, in particular high coverage with the frequency components or the sound wavelengths of the acoustic speech signal of the speaker or are likely to have, from a first spatial direction in which the speaker is located to a second spatial direction, which deviates from the first spatial direction, in particular substantially opposite to the first Direction is arranged, and / or from a first space area where the at least one listener is located to a second space area which is different from the first space area.
Im Verfahren kann eine räumliche Verlagerung der auf Basis der zumindest einen auditiven Meldung und/oder des auszugebenden Audiosignals erzeugten akustischen Schallwellen oder Schallwellenmuster erfolgen, wobei die akustischen Schallwellen mit bestimmten Wellenlängen (z.B. innerhalb eines oder mehrerer bestimmter Wellenlängenbereiche bzw. entsprechend zu einem oder mehreren akustischen Frequenzbändern) derart räumlich verlagert werden, dass eine oder mehrere (insgesamt, in Summe) bei einem bestimmten, wahrscheinlichen oder angenommenen Zuhörer ankommende Proportion zwischen mehreren Wellenlängenbereichen der Schallwellen bzw. der Frequenzbändern auf Basis eines Abschnitts des auszugebenden Audiosignals im Wesentlichen unverändert bleibt, oder relativ geringfügig ausfällt.In the method, a spatial displacement of the acoustic sound waves or sound wave patterns generated on the basis of the at least one auditory message and / or the audio signal to be output can take place, the acoustic sound waves having specific wavelengths (eg within one or more specific wavelength ranges or corresponding to one or more acoustic waves Frequency bands) are spatially relocated such that one or more (in total) of a given, probable or assumed listener incoming proportion between a plurality of wavelength ranges of the sound waves or the frequency bands based on a portion of the output audio signal substantially unchanged, or relatively slightly fails.
Beispielsweise kann zumindest ein Parameter, insbesondere kennzeichnend eine spektrale Eigenschaft, eines Abschnitts des auszugebenden Audiosignals derart verändert werden, dass sich dabei eine oder mehrere Proportionen zwischen zwei oder mehreren Parameterwerten in zwei oder mehreren unterschiedlichen Wellenlängenbereichen des Abschnitts des Audiosignals nicht oder vergleichsweise geringfügig verändert werden. Mit anderen Worten kann oder können im Verfahren eine oder mehrere besagten Proportionen zwischen zumindest zwei zu bestimmenden oder anzupassenden Parametern, die für ein menschliches (psychoakustisches) Wahrnehmen relevant sind, im Wesentlichen aufrechterhalten werden. Auf diese Art und Weise können auch (objektiv oder subjektiv) für das Wahrnehmen der musikalischen Eigenschaften eines Audiosignals relevante Proportionen aufrechterhalten bzw. nicht in nachteilhafter Weise beeinflusst werden. For example, at least one parameter, in particular a spectral property, of a section of the audio signal to be output may be changed in such a way that one or more proportions between two or more parameter values in two or more different wavelength ranges of the section of the audio signal are not changed or are comparatively slightly changed. In other words, in the method, one or more of said proportions may be substantially maintained between at least two parameters to be determined or adapted that are relevant to human (psychoacoustic) sensing. In this way, (objective or subjective) relevant proportions for the perception of the musical properties of an audio signal can be maintained or not adversely affected.
Dabei kann ein derartiges Anpassen des jeweiligen Audiosignals ausgeführt werden, dass die entsprechende Veränderung, insbesondere für eine bestimmte, wahrscheinlich anwesende oder in einem Raumbereich angenommene Person, geringfügig, wesentlich weniger oder weniger nachteilhaft bzw. störend wahrnehmbar ist, als etwa eine Verringerung der Amplituden der Schallwellen in den besagten Wellenlängenbereichen. Ein solches Anpassen kann abhängig von dem Raumbereich des Sprechers und/oder von dem Raumbereich des Zuhörers erfolgen. Beispielsweise wird vorwiegend die spektrale Eigenschaft der Schallwellen angepasst, die aus der Richtung ausgegeben oder wahrnehmbar gemacht werden, in der sich der Sprecher befindet. Somit kann die Wahrnehmbarkeit des entsprechenden Abschnitts der Kommunikation für den Zuhörer verbessert.In this case, such an adaptation of the respective audio signal can be carried out such that the corresponding change, in particular for a specific person, probably present or assumed in a spatial area, is slightly, significantly less or less disadvantageous or annoying than, for example, a reduction in the amplitudes of Sound waves in the said wavelength ranges. Such adaptation may be done depending on the speaker's room area and / or the listener's room area. For example, it mainly adjusts the spectral property of the sound waves emitted or made perceptible from the direction in which the speaker is located. Thus, the perceivability of the corresponding portion of the communication for the listener can be improved.
Unterschiedliche weitere Audiosignale und/oder unterschiedliche Abschnitte oder Kanäle eines mehrkanaligen Audiosignals können unterschiedlich verändert, insbesondere angepasst werden. Diese können in jeweils bestimmter Art und Weise, z.B. zu Erreichung eines bestimmten, durch ein oder mehrere Optimierungskriterium angestrebten Zwecks bzw. Ziels, angepasst werden. Bevorzugt können für die (überwiegend) Sprachanteile umfassenden Audiosignale, bzw. Abschnitte oder Kanäle eines Audiosignals, z.B. Radiosendungen, andere Maßnahmen angewandt, insbesondere eine stärkere Anpassung oder Anpassung anderer Art der Parameter vorgenommen werden, als für die (überwiegend) Musikanteile repräsentierende Audiosignale, bzw. Abschnitte oder Kanäle eines Audiosignal.Different further audio signals and / or different sections or channels of a multi-channel audio signal can be changed differently, in particular adapted. These may each be determined in a particular manner, e.g. to achieve a particular purpose or goal sought by one or more optimization criteria. Preferably, audio signals, sections or channels of an audio signal, e.g. Radio broadcasts, other measures applied, in particular a greater adaptation or adaptation of other type of parameters are made as for the (predominantly) music components representing audio signals, or sections or channels of an audio signal.
Das Verfahren kann einen Schritt zur Auswertung zumindest eines Abschnitts des auszugebenden Audiosignals umfassen, wobei ein Indikator für die Zusammensetzung des Inhalts des Audiosignals, z.B. Anteile von Sprache, Gesang, Musikhintergrund, szenische Hintergrundgeräusche, ermittelt und berücksichtigt wird. Beispielsweise kann ein solcher Indikator für die Zusammensetzung des Audiosignals aus einer Auswertung des Signalinhalts (Frequenzbereiche, Amplitudenverlauf, etc.) oder aus den das Audiosignal begleitenden Daten ermittelt werden.The method may comprise a step of evaluating at least a portion of the audio signal to be output, wherein an indicator of the composition of the content of the audio signal, e.g. Shares of speech, song, music background, scenic background noise, determined and taken into account. For example, such an indicator for the composition of the audio signal can be determined from an evaluation of the signal content (frequency ranges, amplitude variation, etc.) or from the data accompanying the audio signal.
Gemäß einer zweckmäßigen Ausgestaltung umfasst das Verfahren ein Einlernen einer bestimmten Stimme und/oder einer bestimmten körperlichen Regung einer Person (eines Sprechers, der sprechenden Person) zu einem oder mehreren Zeitintervallen und daraufhin, bei einer Wiedererkennung der bestimmten Stimme und/oder der bestimmten körperlichen Regung der Person in einem oder mehreren späteren Zeitintervallen, eine Anwendung eines (für diesen Fall) optimierten oder vorgespeicherten Anpassens der Parameter eines Abschnitts des auszugebenden Audiosignals und/oder der zumindest einer auditiven Meldung. Dabei kann das Anpassen abhängig von den z.B. akustischen Parametern der Stimme der Person und/oder vom den Erkennungsdaten zu einer bestimmten Stimme erfolgen. Beispielsweise kann auch folgende Abhängigkeit festgelegt werden:
- - Wenn eine körperliche Regung, z.B. ein bestimmtes Lippenbewegungsmuster, erkannt wird, bei einer Person, die bisher im Wohnraum immer leise und/oder undeutlich gesprochen hat, dann wird ein Parameter der zumindest einen auditiven Meldung und/oder ein Abschnitt des weiteren Audiosignals vergleichsweise stark verändert, und/oder abhängig von den akustischen Parametern der Stimme des Sprechers, insbesondere einer aktiv genutzten Amplitude und/oder Frequenzbandbreite angepasst.
- - Wenn eine körperliche Regung, z.B. ein bestimmtes Lippenbewegungsmuster erkannt wird, bei einer Person, die bisher im Wohnraum immer laut und/oder deutlich gesprochen hat, dann wird ein Parameter der zumindest einen auditiven Meldung und/oder ein Abschnitt des weiteren Audiosignals vergleichsweise stark verändert, und/oder abhängig von den akustischen Parametern der Stimme des Sprechers, insbesondere einer aktiv genutzten Amplitude und/oder Frequenzbandbreite angepasst.
- If a physical sensation, eg a specific lip movement pattern, is recognized by a person who has always spoken quietly and / or indistinctly in the living space, then a parameter of the at least one auditory message and / or a portion of the further audio signal becomes comparatively strong changed, and / or adjusted depending on the acoustic parameters of the voice of the speaker, in particular an actively used amplitude and / or frequency bandwidth.
- If a physical sensation, eg a specific lip movement pattern, is recognized by a person who has always spoken loudly and / or clearly in the living space, then a parameter of the at least one auditory message and / or a portion of the further audio signal is changed comparatively strongly , and / or adjusted depending on the acoustic parameters of the voice of the speaker, in particular an actively used amplitude and / or frequency bandwidth.
Beispielsweise umfasst das Verfahren ein Einlernen einer oder mehrerer bestimmten körperlichen Regungen, die in einer sprachlichen Kommunikation, insbesondere bei einer bestimmten Person oder Person zugehörig zu einer Personengruppe, dem Sprechen vorausgeht, zu einem oder mehreren Zeitintervallen und daraufhin bei einer (späteren) Wiedererkennung der körperlichen Regung, insbesondere auch beim Wiedererkennen einer auditiven Kommunikation der Person oder einer Person zugehörig zu der Personengruppe, eine Anwendung einer veränderten Logik und/oder vorgegebener Parameter oder eines speziell optimierten Anpassens. Beispielsweise wenn eine für die zumindest eine (im Wohnraum kommunizierende) Person aus mehreren Zeitintervallen statistisch häufig vorkommende, ermittelte, eingelernte körperliche Regung erkannt bzw. wiedererkannt wird, erfolgt ein (verbessertes, vorausbestimmtes, für diesen Fall zugeordnetes) Bestimmen oder Anpassen der Parameter eines Abschnitts des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung, oder eine für bzw. auf die Stimme bzw. weitere Eigenschaften der Person zugeordnete bzw. optimierte Variante des Bestimmens oder Anpassens der Parameter ausgeführt werden.By way of example, the method comprises training one or more specific physical impulses, which in a linguistic communication, in particular in a specific person or person preceding a group of persons, precedes the speaking at one or more time intervals and subsequently at a (later) recognition of the physical Stir, especially when recognizing an auditory Communication of the person or a person belonging to the group of people, an application of a changed logic and / or given parameters or a specially optimized adaptation. For example, if a person statistically frequently occurring, ascertained, learned physical impulse is recognized or recognized for the at least one person (communicating in the living space), an (improved, predetermined, assigned for this case) determination or adaptation of the parameters of a section takes place of the audio signal to be outputted and / or the at least one auditory message, or a variant of the determination or adaptation of the parameters associated with or optimized for the voice or further characteristics of the person.
Ein Erkennen bestimmter körperlicher Regungen bzw. bestimmter Arten körperlicher Regungen kann basierend auf entsprechenden aus der Wissenschaft abgeleiteten Gesetzmäßigkeiten, und/oder dem Expertenwissen bzw. Beobachtungen, und/oder basierend auf Nutzereinstellungen und/oder bevorzugt basierend auf die durch ein maschinelles Lernverfahren gewonnenen Lerndaten erfolgen. Recognition of certain bodily movements may be based on appropriate science-derived laws, and / or expert observations, and / or based on user preferences, and / or preferably based on the learning data obtained by a machine learning method ,
Bevorzugt kann hierbei auch eine einer bestimmten Stimmlage bzw. einem Sprachton vorausgehende körperliche Regung als solche erkannt werden und/oder als eine einem Muster entsprechende körperliche Regung klassifiziert werden und daraufhin eine (noch viel präzisere) Anpassung des auszugebenden Audiosignals erfolgen.In this case, it is also possible to recognize a physical impulse preceding a certain vocal range or a speech tone as such and / or to classify it as a physical impulse corresponding to a pattern and then to carry out a (much more precise) adaptation of the audio signal to be output.
Das Bestimmen oder Anpassen eines oder mehrerer Parameter des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung kann im Verfahren nach vorausbestimmten, durch Nutzer einstellbaren, veränderbaren und/oder im Verfahren lernbaren Kriterien erfolgen. Diese können z.B. Optimierungskriterien sein, die jeweils einem Ziel, Zweck bzw. Optimierungszweck dienen. Das Wort „Optimierung“ oder „optimiert“ bedeutet dabei nicht, dass ein absolutes Optimum erreicht werden soll. Vielmehr ist es als das Anstreben der Verbesserung und eine gewisse Annäherung an ein bestimmtes denkbares Optimum zu verstehen. Beispielsweise können die vorausbestimmten Optimierungskriterien als ein objektives Maß für die Zweckmäßigkeit dienen.The determination or adaptation of one or more parameters of the audio signal to be output and / or of the at least one auditory message can take place in the method according to predetermined, user-adjustable, changeable and / or method-learnable criteria. These may e.g. Optimization criteria, each serving a purpose, purpose or purpose of optimization. The word "optimization" or "optimized" does not mean that an absolute optimum should be achieved. Rather, it is to be understood as the pursuit of improvement and a certain approximation to a certain conceivable optimum. For example, the predetermined optimization criteria may serve as an objective measure of convenience.
Beispielsweise kann nach einem Optimierungskriterium eine Verringerung einer zeitlichen Überschneidung zwischen einem oder mehreren Abschnitten der besagten Kommunikation und der Ausgabe eines Abschnitts oder mehrerer Abschnitte zumindest eines auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung ausgeführt werden.For example, according to an optimization criterion, a reduction of a temporal overlap between one or more sections of the said communication and the output of a section or several sections of at least one audio signal to be output and / or the at least one auditory message can be carried out.
in weiteres Optimierungskriterium kann zumindest eine Nutzereinstellung oder Nutzereingabe sein, wobei mit der Nutzereinstellung oder Nutzereingabe ein oder mehrere Raumbereiche z.B. ein oder mehrere Sitzplätze oder Schlafplätze innerhalb des Wohnraums gewählt werden, wobei die Parameter und/oder Logik, nach welchen das Bestimmen oder Anpassen der Parameter der zumindest einen auditiven Meldung und/oder des weiteren Audiosignals für den zumindest einen bestimmten (gewählten) Raumbereich, Sitzplatz, Schlafplatz ausgeführt wird, gesondert gewählt oder durch die Nutzereingabe eingestellt werden kann. Beispielsweise können ein oder mehrere bestimmte Raumbereiche definiert werden, in welchen zu bestimmten Uhrzeiten bestimmte akustische Grenzwerte (möglichst unabhängig von möglichen akustischen Grenzwerten in anderen, benachbarten Raumbereichen) eingehalten werden sollen. Beispielsweise können sich die besagten akustischen Grenzwerte auf kumulierte (insgesamt ankommende) akustische Schallwellen oder Schallwellenmuster beziehen, die in einem betreffenden Raumbereich ankommen (sich dort insgesamt ergeben) sollen. Dabei können für zumindest einen oder mehrere bestimmte (gewählte) Raumbereiche bevorzugt, bestimmte Varianten des Bestimmens oder Anpassens der Parameter gewählt werden.in another optimization criterion can be at least one user setting or user input, with the user setting or user input one or more spatial areas, e.g. one or more seats or beds within the living space are selected, the parameters and / or logic according to which the determining or adjusting the parameters of the at least one auditory message and / or the further audio signal for the at least one particular (selected) room area, seat , Sleeping place is running, can be selected separately or adjusted by the user input. For example, one or more specific areas of the room may be defined in which certain acoustic limits (as independent as possible of possible acoustic limits in other adjacent room areas) should be maintained at certain times. For example, the said acoustic limit values may relate to cumulative (total incoming) acoustic sound waves or sound wave patterns arriving in a respective spatial area (resulting there as a whole). In this case, certain variants of determining or adapting the parameters may be selected for at least one or more specific (selected) spatial regions.
Ein weiteres Optimierungskriterium kann beispielsweise bestimmte Richtungen und/oder bestimmte Raumbereiche hinsichtlich des Prioritätsmaßes der Kommunikation und/oder hinsichtlich des Prioritätsmaßes zumindest eines Abschnitts des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung (insbesondere jeweils unterschiedlicher Art und/oder zu Events unterschiedlicher Art oder mit unterschiedlichen Inhalten) kennzeichnen, beispielsweise hervorheben. Beispielsweise können einstellbare, typische oder im Verfahren gelernte Aufenthaltsorte bestimmter Personen oder Personen aus bestimmten Personengruppen unterschiedlich behandelt werden. Beispielsweise wird das Verfahren für die statistisch berücksichtigten Aufenthaltsorte der Personen aus einer ersten Personengruppe (hier: „Eltern“) und für die (statistisch berücksichtigte) Aufenthaltsorte der Personen aus einer zweiten Personengruppe (hier: „Kinder“) oder aus einer dritten Personengruppe (hier: „Großeltern“), unterschiedlich ausgeführt.A further optimization criterion can be, for example, certain directions and / or specific areas of space with regard to the priority measure of the communication and / or with regard to the priority measure of at least a portion of the audio signal to be output and / or the at least one auditory message (in particular of different types and / or events of different types or types) with different contents) mark, for example highlight. For example, adjustable, typical or learned in the process whereabouts of certain people or people from certain groups of people can be treated differently. For example, the procedure for the statistically considered whereabouts of persons from a first group of people (here: "parents") and for the (statistically considered) whereabouts of persons from a second group of people (here: "children") or from a third group of people (here : "Grandparents"), executed differently.
Ein weiteres Optimierungskriterium kann bestimmte, z.B. von statistischen Werten abweichende (auf besondere Weise ausgeprägte), Wahrnehmungseigenschaften zumindest einer bestimmten Person, Person zugehörig zu einer Personengruppe, betreffen. Beispielsweise kann ein solches Optimierungskriterium die Berücksichtigung der Parameter der Stimmeneigenschaften und/oder ein Audiogramm zumindest einer Person oder Personen aus einer bestimmten Personengruppe repräsentieren. Dabei kann das Verfahren unter Berücksichtigung der (bestimmten) von der Norm abweichenden Eigenschaften der Personen in einer vorausbestimmten, passenden Weise, insbesondere speziell für den Raumbereich in dem sich die Person zumindest wahrscheinlich aufhält, angewandt werden.A further optimization criterion may relate to specific, eg statistical values deviating (in a particular way pronounced) perception properties of at least one particular person, person belonging to a group of persons. For example, such an optimization criterion may include the consideration of the parameters of the voice characteristics and / or an audiogram of at least one person or persons from a certain group of persons represent. In this case, the method can be applied taking into account the (non-standard) characteristics of the persons in a predetermined, appropriate manner, in particular especially for the area in which the person is at least likely to be present.
Die besagten Optimierungskriterien können im Verfahren in einer mannigfaltigen Weise kombiniert werden. Auch kann im Verfahren eine mathematische Funktion zur Findung eines oder mehreren Maxima bzw. Optima zum Annähern an ein oder mehrere geltende Optimierungskriterien ausgeführt werden. Beispielsweise kann eine solche mathematische Funktion eine sogenannte Kostenfunktion sein. Abhängig von der Findung eines oder mehreren Maxima oder Optima kann eine Variante des Bestimmens oder Anpassens der besagten Parameter des auszugebenden Audiosignals und/oder der zumindest einer auditiven Meldung ausgewählt werden.The said optimization criteria can be combined in the method in a varied manner. Also, in the method, a mathematical function for finding one or more maxima or optima for approximating one or more valid optimization criteria can be performed. For example, such a mathematical function may be a so-called cost function. Depending on the finding of one or more maxima or optima, a variant of the determination or adaptation of the said parameters of the audio signal to be output and / or the at least one auditory message can be selected.
Insbesondere kann im Verfahren eine Steuerung, bevorzugt Regelung, eines Parameters des auszugebenden Audiosignals und/oder der zumindest einen auditiven Meldung, insbesondere einer sogenannten Umhüllenden („Envelope“) oder eines zeitlichen Verlaufs eines Parameterwertes abhängig vom dem zumindest einem Parameter, z.B. Richtungsparameter einer aktuellen oder prädizierten Kommunikation ausgeführt werden. Beispielsweise kann ein anzupassender Parameter des auszugebenden Audiosignals kennzeichnend sein für die Amplitudendynamik und/oder Frequenzdynamik, sein. Dabei kann, z.B. eine von den ermittelten Parametern der besagten Kommunikation abhängige, Dynamikkompression, Dynamikspreizung, Frequenzbandkompression, Frequenzbandspreizung zumindest einer auditiven Meldung oder des Abschnitts des auszugebenen Audiosignals ausgeführt bzw. angepasst werden. Auch kann eine Steuerung, insbesondere Regelung der Parameter der entsprechenden, zu zumindest einem Teil der besagten auditiven Meldung und/oder dem weiteren Audiosignal korrespondierender Schallwellen oder Schallwellenmuster im Wohnraum ausgeführt werden.In particular, in the method, a control, preferably regulation, of a parameter of the audio signal to be output and / or the at least one auditory message, in particular a so-called envelope or a time profile of a parameter value depending on the at least one parameter, e.g. Directional parameters of a current or predicated communication are executed. For example, a parameter to be adjusted of the audio signal to be output may be indicative of the amplitude dynamics and / or frequency dynamics. Thereby, e.g. one of the determined parameters of said communication dependent, dynamic compression, dynamic spread, frequency band compression, frequency band spreading at least one auditory message or the portion of the output audio signal to be executed or adapted. It is also possible to carry out a control, in particular regulation of the parameters of the corresponding sound waves or sound wave patterns in the living space corresponding to at least part of the said auditory message and / or the further audio signal.
Bevorzugt wird eine Steuerung, insbesondere Regelung eines oder mehrerer besagten Parameter des auszugebenden Audiosignals ausgeführt, wobei ein Sollwert der Regelung abhängig von einer vorgegebenen Hörbarkeit und/oder akustischen Wahrnehmbarkeit des auszugebenden Audiosignals und/oder der zumindest einer auditiven Meldung und/oder des zumindest einen Abschnitts der besagten Kommunikation, bzw. der Kommunikation mit einem bestimmten Richtungsparameter, gewählt werden. Der besagte Sollwert der Regelung kann auch, insbesondere adaptiv, angepasst werden. Als ein Sollwert, Bezugsgröße bzw. die Regelgröße können dabei die entsprechenden Parameter der Schallwellen bzw. Schallwellenmuster auf Basis des auszugebenden Audiosignals und/oder der zumindest einer auditiven Meldung, insbesondere in einem oder mehreren bestimmten Raumbereichen des Wohnraums dienen.Preferably, a control, in particular control of one or more of said parameters of the audio signal to be output is carried out, wherein a target value of the control depends on a given audibility and / or acoustic perceptibility of the output audio signal and / or the at least one auditory message and / or the at least one section the said communication, or the communication with a certain directional parameter, are selected. The said nominal value of the control can also be adapted, in particular adaptively. The corresponding parameters of the sound waves or sound wave patterns on the basis of the audio signal to be output and / or the at least one auditory message, in particular in one or more specific spatial areas of the living space, can serve as a desired value, reference variable or controlled variable.
Das Bestimmen oder Anpassen eines oder mehrerer Parameter des zumindest einen Abschnitts des auszugebenden Audiosignals und der zumindest einer auditiven Meldung kann bevorzugt abhängig voneinander, insbesondere entsprechend einer gewählten Variante oder einer Kombination von jeweils anzuwendenden Varianten, erfolgen. Dabei kann ein mathematischer Zusammenhang gewählt oder ermittelt werden, nach dem die Abhängigkeit zwischen dem Bestimmen bzw. Anpassen der Parameter zum Erzeugen einer auditiven Meldung und dem Anpassen zumindest eines Abschnitts des auszugebenden Audiosignals sichergestellt wird. Auch kann Parameter, z.B. ein Zeitparameter, z.B. ein Zeitpunkt zum Anpassen (Pausieren, Unterbrechen, Verändern) zumindest eines Parameters des auszugebenden Audiosignal bestimmt werden, wobei das Anpassen zur Ausgabe der zumindest einer auditiven Meldung bestimmt wird.The determination or adaptation of one or more parameters of the at least one section of the audio signal to be output and of the at least one auditory message may preferably be dependent on one another, in particular in accordance with a selected variant or a combination of respectively applicable variants. In this case, a mathematical relationship can be selected or determined according to which the dependence between the determination or adaptation of the parameters for generating an auditory message and the adaptation of at least one section of the audio signal to be output is ensured. Also, parameters, e.g. a time parameter, e.g. a timing for adjusting (pausing, pausing, changing) at least one parameter of the audio signal to be output is determined, wherein the adjusting is determined to output the at least one auditory message.
Insbesondere können ein oder mehrere Parameter des (auszugebenden) Audiosignals und zumindest einer auditiven Meldung zum Anstreben zumindest eines gemeinsamen Optimierungskriteriums angepasst werden.In particular, one or more parameters of the (to be outputted) audio signal and at least one auditory message may be adapted to target at least one common optimization criterion.
Das Verfahren kann bei einer typischen privaten Kommunikation in einem Haus, insbesondere im Falle einer Großfamilie und bei Vorhandensein mehrerer laufenden bzw. zuschaltbarer Multimediainhalte sehr hilfreich sein. Beispielsweise kann das Verfahren oder ein Modus des Verfahrens zu bestimmten Uhrzeiten oder ab einer bestimmten Anzahl von Personen im Wohnraum, oder ab einer gewissen akustischen Lautstärke innerhalb des Wohnraums automatisch aktiviert werden. Bei einem spontanen Kommunikationsbedarf muss der Sprecher ein laufendes Audio- bzw. Multimedia-Programm nicht mit einer gesonderten Handlung abschalten oder mit seiner Stimme übertönen.The method can be very helpful in a typical private communication in a house, especially in the case of a large family and in the presence of multiple running or switchable multimedia content. For example, the method or a mode of the method can be automatically activated at certain times or from a certain number of people in the living room, or from a certain acoustic volume within the living space. In the case of a spontaneous need for communication, the speaker does not have to switch off a running audio or multimedia program with a separate action or drown out his voice.
Zugleich kann mit dem Verfahren eine Beeinflussung bzw. Lenkung der Aufmerksamkeit eines oder mehrerer (zumindest potentieller, bestimmter, gewählten) Zuhörer auf einen Abschnitt der besagten Kommunikation, z.B. auf eine (bestimmte) sprachliche Botschaft innerhalb der Kommunikation bewirkt werden. Der Zuhörer muss sich weniger anstrengen, um die sprachliche Botschaft wahrzunehmen und richtig zu interpretieren. Das Audiosignal bzw. ein Multimediainhalt der mit dem ein Abschnitt des auszugebenden Audiosignals zusammenhängt, kann pausiert werden und besonders wichtige Abschnitte des Audiosignals bzw. des mit dem Audiosignal zusammenhängenden Multimediainhalts werden nach dem Abschluss des Abschnitts der auditiven Kommunikation wiederholt. Der Zuhörer muss daher nicht das Gefühl haben, dass er einen wichtigen Abschnitt des Audiosignals verpasst. Somit kann eine Kommunikation innerhalb eines häuslichen Bereichs effektiver und entspannter ablaufen. Weder der Sprecher noch der Zuhörer müssen auf die Wahrnehmung eines Audio-Programms bzw. die entsprechenden Multimediainhalte oder Sprachmitteilungen (eines Smart-Home-Computers, einer Sprachsteuerungsapplikation oder einer virtuellen Persönlichkeit) verzichten, um nebenbei eine eigene sprachliche Konversation untereinander zu führen.At the same time, the method can influence or direct the attention of one or more (at least potential, particular, selected) listeners to a section of the said communication, eg to a (specific) linguistic message within the communication. The listener has to make less effort to perceive the linguistic message and to interpret it correctly. The audio signal or a multimedia content which is associated with the one section of the audio signal to be output can be paused and particularly important sections of the audio signal or of the audio signal related multimedia content will be repeated after the end of the auditory communication section. The listener therefore does not have to feel that he misses an important portion of the audio signal. Thus, communication within a home area can be more effective and relaxed. Neither the speaker nor the listener must forego the perception of an audio program or the corresponding multimedia content or voice messages (a smart home computer, a voice control application or a virtual personality), in addition to conduct their own linguistic conversation with each other.
Je nach Ausgestaltung bzw. Konfiguration des Verfahrens kann auch ein hoher interaktiver und spielerischer Wert erreicht werden. Beispielsweise ist das Verfahren zur Generierung zahlreicher spielerischer bzw. der Unterhaltung dienender Effekte im Wohnraum geeignet. Das Verfahren kann nach den Wünschen der Nutzer konfiguriert werden. Beispielsweise kann abhängig von den Nutzereingaben oder einer automatischer Interpretation der Wünsche oder Bedürfnisse der im Wohnraum anwesender Personen eine Veränderung der in diesem Dokument beschriebenen Zusammenhänge erfolgen, z.B. der Veränderung der Logik mit der das Anpassen des Audiosignals und/oder der zumindest einer auditiven Meldung ausgeführt werden soll. Beispielsweise kann das Verfahren auch derart konfiguriert werden, dass es bestimmte, z.B. für bestimmte Personen oder Personengruppen typische Kommunikationsmuster berücksichtigt und/oder zur Auflösung bzw. einer (gezielten) Veränderung der Kommunikationsmuster konfiguriert ist. Z.B. kann ein bestimmter (z.B. aus der Historie oder Statistik erfasster) Parameter repräsentierend ein Verhalten einer bestimmten Personen bei einer Kommunikation berücksichtigt werden und/oder durch eine Auswahl einer zweckmäßigen Logik (gezielt bzw. auf eine bestimmte Weise) beeinflusst, z.B. verändert werden.Depending on the configuration of the method and a high interactive and playful value can be achieved. For example, the method is suitable for generating numerous playful or entertaining effects in the living space. The procedure can be configured according to the wishes of the users. For example, depending on the user inputs or an automatic interpretation of the desires or needs of the persons present in the living space, a change in the relationships described in this document may occur, e.g. the change in the logic with which the adjustment of the audio signal and / or the at least one auditory message is to be executed. For example, the method may also be configured to have certain, e.g. is taken into account for certain persons or groups of typical communication patterns and / or configured for the resolution or a (targeted) change of the communication pattern. For example, For example, a certain parameter (e.g., detected from history or statistics) representing a behavior of a particular person in a communication may be considered and / or influenced by a selection of appropriate logic (targeted or in a particular manner), e.g. to be changed.
Mit dem Verfahren kann ein positives emotionales Erlebnis beim Sprecher, beim Zuhörer oder bei weiteren Personen im Wohnraum bewirkt werden. Auch kann mit dem Verfahren ein antizipatives oder empathisches Verhalten des Audiosystems bzw. einer Sprachsteuerungsapplikation erreicht werden.With the method, a positive emotional experience in the speaker, the listener or other people in the living room can be effected. Also, with the method, an anticipatory or empathic behavior of the audio system or a voice control application can be achieved.
Gemäß eines zweiten Aspekts zeichnet sich die Erfindung aus durch ein System zum Erzeugen eines in einem stationären Wohnraum auszugebenden Audiosignals. Das System ist ausgestaltet zur Ausführung des Verfahrens nach dem ersten Aspekt in einem stationären Wohnraum.According to a second aspect, the invention is characterized by a system for generating an audio signal to be output in a stationary living space. The system is designed to carry out the method according to the first aspect in a stationary living space.
Das System ist ausgestaltet zum Ermitteln, insbesondere Prädizieren eines Parameters einer Kommunikation von zumindest zwei Personen innerhalb eines stationären Wohnraums, und zum Verändern, insbesondere Anpassen zumindest eines Parameters des im stationären Wohnraum auszugebenden Audiosignals, abhängig von dem ermittelten, insbesondere prädizierten Parameter der Kommunikation. Ferner kann das System zur Ausführung des Verfahrens nach weiteren zweckmäßigen und/oder optionalen in diesem Dokument beschriebenen Merkmalen ausgestaltet sein. Dabei weist das System die geleichen oder entsprechenden Merkmale sowie die entsprechenden Vorteile wie das Verfahren aus. Alternativ, bevorzugt zusätzlich ist das System ausgestaltet zum Bestimmen oder Anpassen eines Parameter der zumindest einen auditiven Meldung im stationären Wohnraum, wobei es sich bei der auditive Meldung, insbesondere um zumindest eine auditive Meldung handelt, die im selben gewissen (kurzen) Zeitintervall wie das besagte auszugebende Audiosignal auszugeben ist, d.h. ausgegeben werden kann oder soll.The system is designed to determine, in particular, to predict a parameter of a communication of at least two persons within a stationary living space, and to modify, in particular to adapt at least one parameter of the audio signal to be output in the stationary living space, depending on the determined, in particular predicated, parameter of the communication. Furthermore, the system for carrying out the method may be designed according to further expedient and / or optional features described in this document. In this case, the system has the same or similar features and the corresponding advantages as the method. Alternatively, preferably in addition, the system is designed to determine or adapt a parameter of the at least one auditory message in the inpatient housing, wherein the auditory message, in particular at least one auditory message, in the same certain (short) time interval as said output to be output audio signal, ie can or should be issued.
Bei dem System kann es sich um ein sogenanntes verteiltes elektronisches System handeln. Insbesondere umfasst das System ein im stationären Wohnraum betreibbares Audiosystem. Das Audiosystem kann auch ein Teil eines Multimediasystems, z.B. eines Heimkinosystems, einer HiFi-Anlage sein. Auch kann das Audiosystem ein Multimediasystem umfassen oder es kann über eine zweckmäßige Datenschnittstelle zur Ausführung des Verfahrens, z.B. zum Austausch der Steuerungsdaten, mit einem Multimediasystem verfügen. Ferner kann das System weitere im Haus verbaute oder angeordnete oder am Körper der Personen tragbaren Sensoren, Geräte, z.B. Haushaltsgeräte oder Systeme des Hauses, z.B. einem Energieversorgungsystem, Heizungssystem, Brandschutzsystem, umfassen. Ferner kann das System auch zumindest eine beabstandet angeordnete Recheneinheit, z.B. ein Server oder ein entsprechend eingerichtetes Internetportal oder einen entsprechenden Cloud-Dient zur Ausführung des Verfahrens umfassen. Die beabstandet angeordnete Recheneinheit kann mit Mitteln einer künstlichen Intelligenz, maschinelles Lernens, sowie einer Datenaggregation von Daten aus einer Vielzahl der Wohnräume ausgestaltet sein. Das System kann zur Ausführung des Verfahrens nach sämtlichen in diesem Dokument beschriebenen Merkmalen in diversen Kombinationen ausgestaltet sein. Ein entsprechendes, den Wohnraum umfassendes Haus, Immobilie und/oder ein entsprechender Cloud-Dienst zur Ausführung des Verfahrens kann als ein Teil des Systems angesehen werden und gehört ebenfalls zur Erfindung.The system may be a so-called distributed electronic system. In particular, the system comprises an audio system operable in the stationary living space. The audio system may also be part of a multimedia system, e.g. a home theater system, a hi-fi system. Also, the audio system may comprise a multimedia system or may be provided via a convenient data interface for carrying out the method, e.g. to exchange the control data, with a multimedia system. Further, the system may include other sensors, devices, e.g. Household appliances or systems of the house, e.g. a power supply system, heating system, fire protection system. Further, the system may also include at least one spaced-apart computing unit, e.g. a server or a correspondingly set up Internet portal or a corresponding cloud service to carry out the method include. The computing unit arranged at a distance may be designed with artificial intelligence, machine learning, and data aggregation of data from a plurality of living spaces. The system may be configured in various combinations for carrying out the method according to all features described in this document. A corresponding home, real estate and / or cloud service for performing the method comprising the living space may be considered part of the system and is also part of the invention.
Gemäß eines dritten Aspekts zeichnet sich die Erfindung aus durch ein Anwendergerät, insbesondere ein mobiles Anwendergerät, das eingerichtet ist, das Verfahren, insbesondere zusammen mit einem stationären Wohnraum betriebenen Audiosystem und/oder einem im Haus bzw. Wohnraum verbauten Sensor und/oder einer weiteren Recheneinheit das Verfahren auszuführen. Das Anwendungsgerät kann im Rahmen dieser Beschreibung ein Smartphone, Tablet, Smart-Watch, Smart-Closes, insbesondere ein Kleidungsstück mit einer in das Kleidungsstück integrierter elektronischer Vorrichtung, eine Datenbrille, eine Vorrichtung zum Erzeugen oder Ausgabe bzw. Darstellung von VR (= Virtual Reality), oder eine sinngemäße Weiterbildung solcher Vorrichtungen sein. Insbesondere kann das mobile Anwendergerät an dem Audiosystem, Multimediasystem oder einer geeigneten Stelle im stationären Wohnraum, z.B. mittels einer speziellen Halterung mit oder ohne einer Datenschnittstelle platzierbar sein. Ferner kann das mobile Anwendergerät auch als ein Teil des erfindungsgemäßen Systems angesehen werden. Das mobile Anwendungsgerät kann hierzu eine drahtgebundene oder drahtlose Schnittstelle aufweisen die zur Ausführung des Verfahrens eingerichtet ist. Vorteilhafterweise kann alternativ oder zusätzlich ein Sendeteil und/oder ein Sensor und/oder Rechenressourcen und/oder eine Sende-Empfangseinheit und/oder Authentisierungsverfahren des Anwendergeräts im Verfahren verwendet oder mitverwendet werden. Beispielsweise können die besagten eingelernten Daten mit dem mobilen Anwendergerät verwaltet werden. Auch kann ein Teil der Auswertung der besagten Kommunikation mit Mitteln des Anwendergeräts erfolgen.According to a third aspect, the invention is characterized by a user device, in particular a mobile user device, which is configured to operate the method, in particular together with a stationary housing Audio system and / or built in the house or living room sensor and / or another computing unit to perform the method. In the context of this description, the application device can be a smartphone, tablet, smart watch, smart closes, in particular a garment with an electronic device integrated in the garment, data glasses, a device for generating or outputting VR (= Virtual Reality ), or be an appropriate development of such devices. In particular, the mobile user device can be placed on the audio system, multimedia system or a suitable location in the stationary living room, for example by means of a special holder with or without a data interface. Furthermore, the mobile user device can also be regarded as part of the system according to the invention. For this purpose, the mobile application device can have a wired or wireless interface which is set up to carry out the method. Advantageously, alternatively or additionally, a transmission part and / or a sensor and / or computing resources and / or a transceiver unit and / or authentication method of the user equipment can be used or used in the method. For example, the said taught-in data can be managed with the mobile user device. Also, a part of the evaluation of the said communication can take place with means of the user equipment.
Gemäß eines vierten Aspekts zeichnet sich die Erfindung aus durch ein Computerprogramm, insbesondere ein Computerprogrammprodukt umfassend das Computerprogramm, wobei das Computerprogramm ausgebildet ist, bei seiner Ausführung auf einer in einem stationären Wohnraum betreibbaren Recheneinheit zumindest einen wesentlichen Teil des erfindungsgemäßen Verfahrens oder eine vorteilhafte Ausgestaltung des Verfahrens gemäß einem oder mehrerer weiterer Merkmale des Verfahrens auszuführen. Insbesondere handelt es sich bei dem Computerprogramm um ein Computerprogramm, welches beispielsweise als eine App (= „Applikation“) auf einer in einem stationären Wohnraum betreibbaren Recheneinheit lauffähig ist.According to a fourth aspect, the invention is characterized by a computer program, in particular a computer program product comprising the computer program, wherein the computer program is designed to execute at least a substantial part of the method according to the invention or an advantageous embodiment of the method on a computing unit which can be operated in a stationary housing perform according to one or more further features of the method. In particular, the computer program is a computer program which, for example, can run as an app (= "application") on a computing unit that can be operated in a stationary housing.
Das Computerprogramm bzw. Computerprogrammprodukt umfasst dabei einen ausführbaren Programmcode, der bei einer Ausführung mittels einer Recheneinheit oder mehreren verteilten Recheneinheiten, zumindest einen Teil des Verfahrens gemäß dem ersten Aspekt oder eine vorteilhafte Ausgestaltung des Verfahrens nach einem oder mehreren weiteren in diesem Dokument beschriebenen Merkmalen ausführt. Das Computerprogrammprodukt kann dabei als ein Update eines bisherigen Computerprogramms oder eines Betriebssystems ausgebildet sein, welches beispielsweise im Rahmen einer Funktionserweiterung, die betreffenden Teile Computerprogramms bzw. des entsprechenden Programmcode umfasst der auf zumindest einer besagten Recheneinheit ausführbar ist.In this case, the computer program or computer program product comprises executable program code which, when executed by means of one or more distributed computing units, performs at least part of the method according to the first aspect or an advantageous embodiment of the method according to one or more other features described in this document. The computer program product can be embodied as an update of a previous computer program or of an operating system which, for example, within the framework of a functional extension, comprises the relevant parts of the computer program or the corresponding program code that can be executed on at least one said arithmetic unit.
Die in diesem Dokument beschriebenen Merkmale sind beliebig miteinander kombinierbar. Dabei ergeben sich explizit beschriebene sowie weitere durch einen Fachmann unschwer nachvollziehbare Vorteile. Der Anmelder behält sich das Recht vor, die in diesem Dokument beschriebenen Merkmale, auch unabhängig von dem ursprünglichen Wortlaut der unabhängigen Ansprüche, einzeln oder in diversen Kombinationen, zum Gegenstand eines weiteren unabhängigen Anspruchs, einer Teilungsanmeldung oder einer Nachanmeldung zu machen, unter der Voraussetzung, dass zumindest ein Parameter in einem stationären Wohnraum (gehörend zu einer Immobilie) ermittelt wird und daraufhin zumindest ein Audiosignal, eine auditive Meldung oder eine Sprachsteuerungsapplikation in einem stationären Wohnraum
Ausführungsbeispiele der Erfindung sind im Folgenden, ohne Einschränkung der Allgemeinheit, auch anhand der schematischen Zeichnungen näher erläutert. Es zeigen:
Die 1 zeigt ein Ablaufdiagramm des Verfahrens bzw. des entsprechen Computerprogramms bzw. des Softwareprodukts.Die 2 zeigt einen Wohnraum1 , hier in Form von einem Grundriss einer Wohnung1 in der die Erfindung entstand und ausgeführt wird. Ferner wird eine selbsterklärende beispielhafte Einrichtung des Wohnraums1 sowie unterschiedliche beispielhaft definierte RaumbereicheRB1 , ...RB6 dargestellt.Die 3 zeigt denselben Wohnraum1 mit schematisch dargestellten KommunikationenK-a ,K-b ,K-c ,K-a' , zwischen bestimmten RaumbereichenRB1 , ...RB6 bzw. mit unterschiedlichen Richtungsparametern. Es handelt sich beispielsweise um mehrere zeitlich teilweise überlappend geführte KommunikationenK-a ,K-b ,K-c ,K-a' .
- The
1 shows a flowchart of the method or the corresponding computer program or the software product. - The
2 shows aliving room 1 , here in the form of a floor plan of anapartment 1 in which the invention was made and executed. Furthermore, a self-explanatory exemplary device of theliving space 1 as well as different exemplarily defined spatial areasRB1 , ...RB6 shown. - The
3 shows thesame living space 1 with schematically represented communicationska .kb .kc .K-a ' , between certain room areasRB1 , ...RB6 or with different directional parameters. These are, for example, a plurality of temporally partially overlapping guided communicationska .kb .kc .K-a ' ,
Auch die nachfolgend beschriebenen Beispiele der Erfindung beziehen sich auf die Nutzung im Zusammenhang mit einem oder mehreren stationären, d.h. an einen festen Standort gebundenen Wohnräumen bzw. Immobilien. Der Begriff „Wohnraum“ ist im Rahmen des vorliegenden Dokuments als ein stationärer Wohnraum zu verstehen. Die nachfolgend beschriebenen Beispiele 1 - 7 veranschaulichen jeweils unterschiedliche Aspekte der Erfindung. Diese sind beliebig miteinander kombinierbar und in diversen Kombinationen vorteilhaft.Also, the examples of the invention described below relate to use in conjunction with one or more stationary, i. Residential areas or real estate linked to a fixed location. The term "living space" in the context of this document is to be understood as a stationary living space. The examples 1-7 described below each illustrate different aspects of the invention. These are arbitrarily combinable and advantageous in various combinations.
Zur Vereinfachung wird das zumindest ein auszugebendes Audiosignal
BEISPIEL 1 (Beschreibt die Vision des Erfinders)EXAMPLE 1 (Describes the vision of the inventor)
In der Vision des Erfinders wird die Erfindung in einem vernetzten Haus mit dem Wohnraum
Zur Ausführung der Erfindung, insbesondere zum Ermitteln des zumindest einen Parameters (
Diverse Mitglieder der im Wohnraum
Wenn eine Person etwas an eine oder mehrere Personen im Wohnraum
Der Begriff „Kommunikation“ bezieht sich im Verfahren auf eine Kommunikation
Beispielsweise erfolgt ein Anpassen eines, insbesondere Sprachanteile bzw. Personenstimmen umfassenden, Abschnitts des auszugebenden Audiosignals
Auch werden größtenteils Sprachanteile umfassende akustische Inhalte oder Audiosignale anders als keine oder wenige Sprachanteile umfassenden akustischen Inhalte oder Audiosignale verarbeitet. Dabei wird berücksichtigt, dass eine Kommunikation
Je nach Art des Audiosignals
Wenn ein Abschnitt des Audiosignals
Beispielsweise wird eine Ausgabe eines (nächsten) Abschnitts des Audiosignals
Im Verfahren wird eine räumliche Position des „Sprechers“ und/oder zumindest eines tatsächlich erkannten, vermuteten oder möglichen „Zuhörers“ und/oder zumindest eines tatsächlich erkannten, vermuteten oder möglichen „Sprechers und Zuhörers“, und/oder eine mehr oder minder wahrscheinliche Richtung der Kommunikation
Die im Rahmen der besagten Kommunikation
In diesem Beispiel wird auch ein Parameter (
Dabei kann ein Parameter (
Abhängig von der erkannten Szene
Alternativ oder zusätzlich zu weiteren Merkmalen erfolgt eine Auswahl eines auszugebenden Abschnitts des Audiosignals
Bevorzugt wird ein Prioritätsmaß bei einer Auswahl von einem oder mehreren Abschnitten der Multimediainhalte, z.B. ein Abspielen von relativ kurzen Audio- oder Videosequenzen aus einem Internetportal, abhängig von dem ermittelten Parameter (
Wird beispielsweise innerhalb einer Szene
Beispielsweise kann eine räumliche Verteilung bzw. Umverteilung von den auf Basis des Audiosignals
In diesem Beispiel wird auch erkannt und berücksichtigt, wer von den Personen (bzw. Personen von welchem Raumbereich
In einem Beispiel wird ein oder mehrere Parameter (
Beispielsweise kann abhängig von einem Parameter
Ein prädizierter Parameter (
Das besagte Zeitintervall (t3' - t4') kann sich dabei zumindest teilweise mit dem Zeitintervall (t3 - t4) überlappen oder diesem entsprechen. Auch kann das zweite Zeitintervall (t3 - t4) und/oder das dritte Zeitintervall (t3' - t4') jeweils ein im Vergleich zu dem besagten ersten Zeitintervall (t1, - t2), z.B. ca. 1, 3, 5, 15, 30, 60 Sekunden später liegendes, z.B. eines nachfolgendes, Zeitintervall sein.The said time interval (t3 '- t4') may at least partially overlap or correspond to the time interval (t3 - t4). Also, the second time interval (t3-t4) and / or the third time interval (t3 '-t4') may each be one compared to the said first time interval (t1, t2), e.g. about 1, 3, 5, 15, 30, 60 seconds later, e.g. a subsequent, time interval.
In einem Beispiel kann eine Kommunikation
Abhängig von den ermittelten Parametern (
Auch kann ein Videoinhalt
Beispielsweise wird bei einer Übertragung eines Sportmatches, wenn der Zuschauer kurz z.B. in die Küche herausgeht oder sich vom Bildschirm abwendet, adaptiv eine entsprechende Hörversion mit einer auditiven Beschreibung der Ereignisse (des Sportmatches) zugeschaltet. Dabei kann das, bei der bestimmten Art der Inhalte möglicherweise unerwünschtes Pausieren vermieden werden und der Inhalt kann trotz Ablenkung der visuellen Wahrnehmung weiterhin in Echtzeit („live“) ausgegeben werden.For example, in a transmission of a sports match, if the viewer briefly walks out of the kitchen, for example, or turns away from the screen, an appropriate listening version with an auditory description of the events (of the sports match) is adaptively switched on. This can be avoided in the particular type of content possibly unwanted pauses and the Content can still be displayed in real-time ("live") despite the distraction of visual perception.
Ferner kann als ein Parameter (
Zweckmäßigerweise wird durch das Anpassen eines Abschnitts des auszugebenden Audiosignals
Beispielsweise kann ein von einem auszugebenden Audiosignal
Unterschiedliche Abschnitte der Schallwellen werden im Verfahren unterschiedlich behandelt:Different sections of the sound waves are treated differently in the process:
Beispielsweise wird ermittelt, dass es sich bei einem Abschnitt akustischer Schallwellen, z.B. aus einem bestimmten Raumbereich
- - eine Spracheingabe
SE1 ,SE2 in die SprachsteuerungsapplikationSSA1 ,SSA2 , und/oder - - einen Sprachbefehl
SB1 ,SB2 für die SprachsteuerungsapplikationSSA1 ,SSA2 , und/oder - - eine Frage
FR1 ,FR2 an die SprachsteuerungsapplikationSSA1 ,SSA2 handelt.
- - a voice input
SE1 .SE2 into the voice control applicationSSA1 .SSA2 , and or - - a voice command
SB1 .SB2 for the voice control applicationSSA1 .SSA2 , and or - - a question
FR1 .FR2 to the voice control applicationSSA1 .SSA2 is.
Daraufhin kann zumindest eine erste Maßnahme oder eine erste Variante (
Ferner kann bei der Ausgabe einer auf die Spracheingabe
Beispielsweise wird ermittelt, dass es sich bei einem Abschnitt akustischer Schallwellen (aus einem bestimmten Raumbereich
Falls dabei, insbesondere nach oder während der Ausgabe der zumindest einer auditiven Meldung
Unterschiedliche weitere, etwa im selben Zeitintervall mit der auditiven Meldung
Auch kann das Verfahren für unterschiedliche Nutzer unterschiedlich ausgeführt werden. Als Nutzer kann dabei ein bestimmter, zugeordneter bzw. aktuell automatisch erkannter oder eingeloggter Nutzer, z.B. mit einem bestimmten Benutzerkonto angenommen werden. Ein „Nutzer“ kann auch einer Personengruppe entsprechen, bzw. die Personengruppe des Nutzers kann abhängig von dem erkannten bzw. angemeldeten Nutzer bestimmt werden oder umgekehrt. Insbesondere kann der Nutzer auch der „Hauptnutzer“, „Master“ oder einer von mehreren möglichen Nutzern sein, der das System auf eine bestimmte Art und Weise und/oder besonders intensiv nutzt. Ein derartiger Nutzer kann im Verfahren als eine Person zugehörig zu einer bestimmten Personengruppe (hier: „Eltern“) gehandhabt werden. Z.B. kann ein bestimmter Nutzer hinsichtlich der Veränderung des Parameters (
Auch kann ein Prioritätsmaß bestimmter Abschnitte des Audiosignals
Im Verfahren kann eine (physikalische oder virtuelle) Klangquelle, aus der ein Abschnitt des auszugebenen Audiosignals
Es kann eine Verteilung bzw. eine dynamische Umverteilung von zumindest zwei unterschiedlichen Audioinhalten
Je nach Art, oder entsprechend dem Prioritätsmaß zumindest eines Abschnitts des auszugebenden Audiosignals
Auch können zwei oder mehrere unterschiedliche auditive Meldungen
Bei Bedarf wird auf einen Abschnitt des Audiosignals
Alternativ oder zusätzlich kann, abhängig von einem ermittelten Parameter (
Ein oder mehrere Parameter (
In einer Variante der Erfindung ist vorgesehen, dass abhängig von dem erkannten inhaltlichen Merkmal (
Beispielsweise kann, wenn im Wohnraum
Das Verfahren wird auf eine natürliche, nicht genormte Kommunikation
Im Ergebnis kann beispielsweise ein automatisierter, eventgesteuerter, insbesondere betriebenes Ermitteln, Parametrieren und Kombinieren der Abschnitte der Audioinhalte und Videoinhalte, eine Art von Audio- und/oder Videoschnitt in Bezug auf diverse (Informations- und/oder Multimedia-) Inhalte ausgeführt werden, wobei das Ergebnis in Form der Schallwellen, Schallwellenmuster und/oder Vodeoausgaben im Wohnraum
Der Begriff „auditive Meldung“
Bevorzugt umfasst die auditive Meldung
Alternativ oder zusätzlich kann die auditive Meldung
Alternativ oder zusätzlich kann ein Abschnitt eines zweiten Audiosignals (abweichend von dem Audiosignal
Ein oder mehrere Abschnitte einer auditiven Meldung
Insbesondere zeichnet sich die zumindest eine auditive Meldung
Die zumindest eine (auszugebende) auditive Meldung
Das Bestimmen, insbesondere Anpassen eines Parameters (
Bevorzugt wird im Verfahren zumindest ein Abschnitt eines akustischen Inhalts
Beispielsweise kann ein sich stets in einer ähnlicher Form wiederholendes Geräusch
Auch kann ein (für zumindest eine Person relevanter oder gewünschter) akustischer Inhalt
Die besagten Erkennungsdaten zu zumindest einem ermittelten akustischen Inhalt
Alternativ oder zusätzlich kann als eine besagte Maßnahme eine Ausgabe eines (bestimmten oder von bestimmten Merkmalen gekennzeichneten) Schallwellenmusters veranlasst werden. Beispielsweise kann die Ausgabe eines den zumindest einen Abschnitt des akustischen Inhalts
Wird beispielsweise erkannt, dass ein bestimmter erkannter, prädizierter oder wiedererkannter akustisches Inhalt
Die Erkennungsdaten zu zumindest einem akustischen Inhalt
BEISPIEL 2 (Beispielhafte Zusammenfassung zum Ablauf des Verfahrens)EXAMPLE 2 (Exemplary summary of the procedure)
Das Verfahren kann in Form folgender frei kombinierbarer Verfahrensschritte (
=> Schritt umfassend den Start des Verfahrens=> Step comprising the start of the procedure
Das Verfahren wird gestartet. Die Daten zur Ausführung des Verfahrens werden eingelesen. In diesem Beispiel erfolgt eine Aktivierung des Verfahrens einhergehend mit oder abhängig von einem Einschalten des Audiosystems ASYS oder der Sprachsteuerungsapplikation
Zumindest zwei oder mehrere Arten der Audiosignale
Das auszugebende Audiosignal
Zumindest zwei oder mehrere Arten der auditiven Meldungen
=> Schritt mit dem Ermitteln der Information über die anwesende Personen, Szene, etc.=> Step by determining the information about the persons present, scene, etc.
In einem optionalen Schritt erfolgt ein Erkennen zumindest einer Person, bzw. eines bestimmten mit einer Person belegten Raumbereichs
In einem vereinfachten Fall kann eine menschliche Stimme, insbesondere eine bestimmte Stimme erkannt werden und eine Anwesenheit einer (weiteren) Person im Wohnraum
Optional wird eine Bewegung, bevorzugt eine prädizierte Bewegung der Personen im Wohnraum
In diesem Beispiel wird auch eine Kennung der Personengruppe, insbesondere des besagten Kommunikationstyps der zumindest einen Person im Wohnraum
Unterschiedlichen Personen bzw. Personengruppen oder Personen, die sich in unterschiedlichen Raumbereichen
In diesem Beispiel wird ferner auch eine aktuelle oder eine der besagten Kommunikation
Auch quantitative Parameter (
Bevorzugt wird jeweils eine zweckmäßig gewählte Kombination der genannten Parameter (
=> Schritt mit dem Ermitteln der Parameter der Kommunikation=> Step with determining the parameters of the communication
Ein Parameter (
Insbesondere ist die besagte Kommunikation
Dabei werden ein oder mehrere Parameter, jeweils als Parameterwerte zu folgenden unterschiedlichen Arten von Parametern (
- (
PK1 ), einen Richtungsparameter, kennzeichnend eine oder mehrere Richtungen zumindest eines Abschnitts der besagten KommunikationK-a ,K-b ,K-c ,K-a' , z.B. einer Transaktion, einer Kommunikationsbotschaft; - (
PK2 ), einen akustischen Parameter, z.B. eine räumliche Verteilung der akustischen Schallwellen der Sprache, ein oder mehrere Phasenparameter, z.B. Phasenverschiebungsparameter, Dynamik einer oder mehrerer Amplituden und/oder Frequenzen, einen Amplitudenverlauf, eine zeitliche Amplitudenveränderung, eine Veränderung des Frequenzspektrums bzw. des Energiedichtespektrums der Schallwellen eines Abschnitts der besagten KommunikationK-a ,K-b ,K-c ,K-a' im Wohnraum 1 ; - (
PK3 ), einen oder mehrere Stimmenparameter einer oder mehrerer (auditiv kommunizierender)Personen im Wohnraum 1 , eine oder mehrere Frequenzparameter oder Parametermuster einer Stimme, Erkennungsdaten kennzeichnend eine oder mehrere bereits eingelernte oder einzulernende, bzw. erkannte oder wiedererkannten Stimmen; - (
PK4 ), einen zeitlicher Parameter eines Abschnitts der KommunikationK-a ,K-b ,K-c ,K-a' , z.B. repräsentierend einen oder mehrere Zeitwerte im Zusammenhang mit zumindest einem Abschnitt der KommunikationK-a ,K-b ,K-c ,K-a' , z.B. mit dem Beginn oder dem Ende eines Satzes, einer Transaktion, einer linguistischen Struktur, eines Gesprächs, etc.; - (
PK5 ), ein inhaltliches Merkmal eines Abschnitts bzw. zumindest einer Transaktion innerhalb der KommunikationK-a ,K-b ,K-c ,K-a' . Das inhaltliche Merkmal kann sich auf einen hinreichend großen Abschnitt der KommunikationK-a ,K-b ,K-c ,K-a' bzw. auf eine oder mehrere Kommunikationsbotschaften beziehen. Hier werden mehrere Parameterwerte bzw. Maße, Kennungen zu einem oder mehreren inhaltlichen Merkmalen des zumindest einen Abschnitt der KommunikationK-a ,K-b ,K-c ,K-a' erfasst, ohne dabei den besagten Inhalt wiederzugeben; - (
PK6 ), einen Parameter des aktuellen oder erwarteten Kommunikationsverhaltens oder des Kommunikationsstils zumindest einer Person im Rahmen der besagten KommunikationK-a ,K-b ,K-c ,K-a' ; - (
PK7 ), einen linguistischen Parameter der KommunikationK-a ,K-b ,K-c ,K-a' , der z.B. bestimmte in der KommunikationK-a ,K-b ,K-c ,K-a' vorkommende linguistische Strukturen bzw. Konstrukte kennzeichnet; - (
PK8 ), einen oder mehrere Parameter der besagten KommunikationK-a ,K-b ,K-c ,K-a' , der oder die unmittelbar oder mittelbar repräsentieren:- - Phonologische Parameter (z.B. betreffend Phoneme, Silben);
- - Morphologische Parameter (z.B. betreffend Bestandteile einer Sprache (Morpheme), deren Kombination, Verhältnis zueinander, etc.);
- - Syntaktische Parameter (z.B. zur Form und der Struktur von Wortkombinationen, Satzgrammatik);
- - Lexikologische Parameter (z.B. betreffend Nutzung bestimmter Wörter innerhalb der Kommunikation);
- - Semantische Parameter (z.B. die Bedeutung von Wörtern in Bezug auf bestimmte Gegebenheiten);
- - Satzsemantische Parameter (z.B. betreffend logische Bedeutung von Sätzen);
- - Textsemantische Parameter (z.B. betreffend Bezüge auf erkannte Gegebenheiten oder Szene
S1 , ...S8 ).
- (
PK1 ), a directional parameter indicative of one or more directions of at least a portion of said communicationka .kb .kc .K-a ' , eg a transaction, a communication message; - (
PK2 ), an acoustic parameter, eg a spatial distribution of the acoustic sound waves of the speech, one or more phase parameters, eg phase shift parameters, dynamics of one or more amplitudes and / or frequencies, an amplitude curve, a temporal amplitude change, a change of the frequency spectrum or the energy density spectrum of the Sound waves of a section of said communicationka .kb .kc .K-a ' in theliving room 1 ; - (
PK3 ), one or more voice parameters of one or more (auditory communicating) persons in theliving space 1 , one or more frequency parameters or parameter patterns of a voice, identifying identification data one or more voices already learned or einzulernende, or recognized or recognized; - (
PK4 ), a temporal parameter of a section of the communicationka .kb .kc .K-a ' , eg, representing one or more time values associated with at least a portion of the communicationka .kb .kc .K-a ' eg with the beginning or the end of a sentence, a transaction, a linguistic structure, a conversation, etc .; - (
PK5 ), a content-related feature of a section or at least one transaction within the communicationka .kb .kc .K-a ' , The content feature can affect a sufficiently large section of the communicationka .kb .kc .K-a ' or to one or more communication messages. Here, a plurality of parameter values or measures, identifiers for one or more content-related features of the at least one section of the communicationka .kb .kc .K-a ' recorded without reproducing the said content; - (
PK6 ), a parameter of the current or expected communication behavior or the communication style of at least one person in the context of said communicationka .kb .kc .K-a ' ; - (
PK7 ), a linguistic parameter of communicationka .kb .kc .K-a ' For example, the particular in communicationka .kb .kc .K-a ' characterizes existing linguistic structures or constructs; - (
PK8 ), one or more parameters of said communicationka .kb .kc .K-a ' which directly or indirectly represent:- - Phonological parameters (eg concerning phonemes, syllables);
- - Morphological parameters (eg concerning components of a language (morphemes), their combination, relationship to each other, etc.);
- - Syntactic parameters (eg on the form and structure of word combinations, sentence grammar);
- - lexicological parameters (eg regarding the use of certain words within the communication);
- - semantic parameters (eg the meaning of words in relation to specific circumstances);
- - sentence-semantic parameters (eg regarding the logical meaning of sentences);
- - Text-semantic parameters (eg regarding references to recognized conditions or scene
S1 , ...S8 ).
Zumindest ein Parameter (
Bevorzugt werden zwei oder mehrere Parameter oder zwei unterschiedliche Arten der Parameter (
Auch wird im Verfahren zumindest ein Parameter einer körperlichen Regung (
Zu der zumindest einen körperlichen Regung gehören dabei auch eine oder mehrere (bestimmte) Gesten, Mimiken, Augenbewegungen, Körperausrichtungen oder daraus bestehende Kombinationen. In diesem Beispiel wird abhängig von einer (z.B. mit einer Kamera erfassten) körperlichen Haltung und/oder einer bewussten oder unbewussten körperlichen Regung, und/oder von bestimmten erkannten Gesten zumindest einer an der besagten Kommunikation
Alle besagten Parameter (
In diesem Beispiel beziehen sich die ermittelten Parameter (
Es können Parameter (
Auch wird zwischen einem akustischen Inhalt aus dem Audiosystem ASYS und aus einem weiteren mit dem Audiosystem ASYS bzw. mit dem erfindungsgemäßen System vernetzten oder nicht vernetzten Gerät
Eine im Wohnraum
In einem optionalen Beispiel wird auch ein (naturwissenschaftlicher, mathematischer, zeitlicher, kausaler) Zusammenhang zwischen einem Parameter (
In diesem Beispiel werden die Daten auf Basis mehrerer zeitlicher Zusammenhänge und/oder eines Zusammenhangs zwischen den entsprechenden Parametern der körperlichen Regung, Gestik, Mimik, Augenbewegung, Lippenbewegung oder der entsprechenden Muster mit einem Parameter einer etwa im selben Zeitintervall stattfindenden sprachlichen Kommunikation
Eine Prädiktion eines Zeitwerts, nach welchem (mit einem gewissen Wahrscheinlichkeitsmaß) eine sprachliche Kommunikation
Beispielsweise wird ein besagter zeitlicher Zusammenhang und/oder ein Zusammenhang zwischen den Parametern (
Alternativ oder zusätzlich zu weiteren Merkmalen des Verfahrens kann daraufhin (hier: auf das Erkennen bzw. Wiedererkennen eines Musters der körperlichen Regung, einer Auswahl eines passenden mathematischen Zusammenhangs, einer Belegung mit bestimmten Parameterwerten und der Prädiktion eines Parameters im Zusammenhang mit einem darauffolgenden Ereignis) eine weitere Maßnahme ausgeführt werden. In diesem Beispiel wird z.B. vorausschauend ein Multimediainhalt für das Kind ausgegeben welches einer Beruhigung des Kindes dient oder eine (für diesen Fall) vordefinierte Maßnahme ausgeführt werden. Beispielsweise kann eine oder eine von mehrere vordefinierten Melodien, Tonsequenzen, oder Audio- und/oder Videoaufnahmen ausgegeben und/oder ein oder mehrere vordefinierte Reize ausgegeben werden. Bevorzugt wird auf das Ermitteln eines oder mehreren derartiger Erkennungsmuster, insbesondere unter Berücksichtigung eines ermittelten Parameters eines Kommunikationslauts des Kindes eine Aufnahme mit einer Stimme und/oder Bild bzw. Videosequenz eines Elternteils bzw. Erziehers ausgegeben. Auch kann das Kind beispielsweise durch Ansteuerung eines Aktors geschaukelt bzw. gestreichelt werden.As an alternative or in addition to further features of the method, a recognizing or recognizing a pattern of the physical impulse, a selection of a suitable mathematical relationship, an occupancy with certain parameter values and the prediction of a parameter in connection with a subsequent event can then be followed be carried out further action. In this example, e.g. anticipating a multimedia content for the child spent which is used to calm the child or a (for this case) predefined action are executed. For example, one or more predefined tunes, sound sequences, or audio and / or video recordings may be output and / or one or more predefined stimuli may be output. A recording with a voice and / or image or video sequence of a parent or educator is preferably output upon the determination of one or more such detection patterns, in particular taking into account a determined parameter of a communication sound of the child. Also, the child can be rocked or petted, for example, by controlling an actuator.
Alternativ oder zusätzlich kann auf das Ermitteln eines besagten Zusammenhangs in Bezug auf eine Person bei einer oder mehreren Ausführungen des Verfahrens in einem Wohnraum
Alternativ, bevorzugt zusätzlich, zum Ermitteln des zumindest einen Parameters (
=> Schritt mit dem Erkennung einer Emotion und/oder Absicht => Step with the recognition of an emotion and / or intention
In einem optionalen Schritt wird eine Erkennung einer Emotion und/oder eine Erkennung einer Absicht einer Person, insbesondere einer an der besagten Kommunikation
Beispielsweise kann beim Erkennen einer bestimmten Klasse (
Die Erkennung der Emotion und/oder Absicht kann insbesondere mit Mitteln einer Kamera, insbesondere einer Kamera der Sensorvorrichtung
=> Schritt mit dem Ermitteln eines Prioritätsmaßes eines Kommunikationsabschnitts=> Step with determining a priority measure of a communication section
In einem optionalen Schritt wird die Art eines Abschnitts der besagten Kommunikation
In diesem Beispiel wird das Prioritätsmaß zweidimensional, insbesondere mit zumindest zwei mehr oder minder voneinander unabhängigen Indikatoren ermittelt. Es wird ein erster Prioritätsindikator zumindest eines Abschnitts der Kommunikation
Nach diesem Prinzip definierte Prioritätsindikatoren sind für eine spätere Verarbeitung der Prioritätsmaße im Verfahren sehr förderlich. Beispielsweise wird auch in Bezug auf zumindest einen Abschnitt des Audiosignals
=> Schritt mit dem Ermitteln eines Maßes für die Erfolgswahrscheinlichkeit=> Step with determining a measure of the probability of success
In einem optionalen Schritt des Verfahrens werden ein oder mehrere Maße für die Erfolgswahrscheinlichkeit ermittelt, dass ein (bestimmter) Abschnitt eines im Wohnraum
Bevorzugt kann sich ein solches Maß der Erfolgswahrscheinlichkeit auf eine nahe Zukunft bzw. auf ein (zumindest teilweise) bevorstehendes Zeitintervall beziehen. Ein oder mehrere Maße für die Erfolgswahrscheinlichkeit, z.B. für unterschiedliche Zeitintervalle oder unterschiedliche Abschnitte eines oder mehrerer auszugebenden Audiosignale
Bevorzugt erfolgt eine Auswahl einer zweckmäßigen (Maßnahmen-)Variante (
Falls beispielsweise das Maß der Erfolgswahrscheinlichkeit einen bestimmten Grenzwert unterschreitet bzw. überschreitet, kann daraufhin eine Auswahl einer Maßnahme in Bezug auf das Audiosignal
=> Schritt mit dem Ermitteln eines Prioritätsmaßes eines Abschnitts des Audiosignals=> Step of determining a priority measure of a portion of the audio signal
In einem optionalen Schritt wird die vorliegende Art zumindest eines Abschnitts des auszugebenden Audiosignals
In diesem Beispiel wird das Prioritätsmaß zweidimensional, insbesondere mit zumindest zwei mehr oder minder voneinander unabhängigen Indikatoren ermittelt. Es wird ein erster Prioritätsindikator zumindest eines auszugebenden Abschnitts des Audiosignals
Die Prioritätsindikatoren des zumindest eines Abschnitts des Audiosignals
=> Schritt mit der Erfassung weiterer optional zu berücksichtigender Größen=> Step with the capture of further optional variables
In einem optionalen Schritt wird ein Parameter (
Auch kann der besagte weitere im Wohnraum
=> Schritt mit dem Einlesen bzw. Ermitteln von anzuwendenden Optimierungskriterien=> Step with the reading in or determination of optimization criteria to be applied
In einem optionalen Schritt wird ein oder mehrere vorgegebene oder ermittelte Optimierungskriterien (
Abhängig von zumindest einem Optimierungskriterium (
Die Kombination und ggf. eine jeweils unterschiedliche Gewichtung der zu berücksichtigenden Parameter (
=> Schritt mit dem Bestimmen oder Anpassen der Parameter des AS und/oder AM=> Step with determining or adjusting the parameters of the AS and / or AM
Abhängig, insbesondere auf Basis von den ermittelten oder prädizierten Parametern (
Im Ergebnis hängt ein Parameter (
Die besagte auditive Meldung
Ausnahmsweise kann zumindest eine erzeugte auditive Meldung
Alternativ oder zusätzlich kann eine bestimmte Bedienhandlung oder ein Auslösekriterium dafür vorgesehen werden, eine auditive Meldung
Beispielsweise kann abhängig von einem oder mehreren Kommunikationen
Das Bestimmen oder Anpassen eines oder mehrerer (zweckmäßig gewählter) Parameter (
Das Bestimmen oder Anpassen eines oder mehrerer Parameter (
- (
PAM1 ) bzw. (PAS1 ), einen oder mehrere akustische Parameter zumindest eines Abschnitts des AudiosignalsAS1 ,AS2 bzw. der zumindest einen auditiven MeldungAM1 ,AM2 ,AM3 insbesondere kennzeichnend eine Amplitude, Lautstärke, sogenannte Lautheit, Frequenzbereich, Phase des entsprechenden ausgegebenen Audiosignals. Alternativ oder zusätzlich bestimmtPAM1 bzw.PAS1 die akustischen Parameter der entsprechenden, auf Basis des AudiosignalsAS1 ,AS2 bzw. der auditiven MeldungAM1 ,AM2 ,AM3 erzeugten Schallwellen, eines oder mehrerer bestimmten (zu erzeugende) Schallwellenmuster bzw. Schallwellenfronten, insbesondere in einem bestimmten RaumbereichRB1 , ...RB6 . Der zumindest ein Parameter bzw. ParameterwertPAM1 bzw.PAS1 , kann auf zumindest einen oder mehrere RaumbereicheRB1 , ...RB6 oder Richtungen bezogen werden. - (
PAM2 ) bzw. (PAS2 ), einen oder mehrere Zeitparameter zur Ausgabe zumindest eines Abschnitts des AudiosignalsAS1 ,AS2 bzw. der zumindest einen auditiven MeldungAM1 ,AM2 ,AM3 insbesondere kennzeichnend ein Zeitintervall oder ein Event in Abhängigkeit von dem die Ausgabe zumindest eines Abschnitts des AudiosignalsAS1 ,AS2 und/oder der zumindest einen auditiven MeldungAM1 ,AM2 ,AM3 erfolgen soll. Diese Art der Parameter betrifft insbesondere eine zeitliche Planung bzw. ein Anpassen einer oder mehrerer Ausgaben eines oder mehrerer Abschnitte des AudiosignalsAS1 ,AS2 und/oder der auditiven MeldungAM1 ,AM2 ,AM3 auf der Zeitachse; - (
PAM3 ) bzw. (PAS3 ), eine Aufteilung der Ausgabe des AudiosignalsAS1 ,AS2 , bzw. einzelner Kanäle eines AudiosignalsAS1 ,AS2 bzw. der zumindest einer auditiven Meldung auf unterschiedliche RaumbereicheRB1 , ...RB6 , z.B. auch auf nur teilweise akustisch verbundene oder getrennte RaumbereicheRB1 , ...RB6 des Wohnraums 1 . Alternativ oder zusätzlich wird durchPAM3 bzw.PAS3 eine räumliche Aufteilung, Ausbreitung der entsprechenden, auf Basis des AudiosignalsAS1 ,AS2 und/oder der zumindest einer auditiven MeldungAM1 ,AM2 ,AM3 erzeugten Schallwellen, ein oder mehrere bestimmte (zu erzeugende) Schallwellenmuster, insbesondere in einem oder mehreren bestimmten RaumbereichenRB1 , ...RB6 , eine Zuordnung zumindest eines aktuellen bzw. bestimmten Abschnitts des AudiosignalsAS1 ,AS2 bzw. der auditiven MeldungAM1 ,AM2 ,AM3 zu einer oder mehreren bestimmten, z.B. virtuellen, Klangquellen, insbesondere synthetisierter Schallquellen; - (
PAM4 ) bzw. (PAS4 ), einen Raumklangparameter. In einem vereinfachten Fall kann ein Raumklangparameter etwa einem aus dem Bereich von Raumklang- bzw. Sourroundsystemen bekannter Art der Raumklangparameter entsprechen. Durch das Bestimmen oder Anpassen des zumindest einen Raumklangparameters können bestimmte, zweckmäßige Raumklangeffekte veranlasst werden, die sich auf die Ausgabe bestimmte Abschnitte des AudiosignalsAS1 ,AS2 und/oder die zumindest eine auditive MeldungAM1 ,AM2 ,AM3 auswirken. Beispielsweise kennzeichnet ein RaumklangparameterPAM4 bzw.PAS4 aus welcher Richtung und/oder in welche Richtung die auf Basis des AudiosignalsAS1 ,AS2 bzw. auf Basis der zumindest einen auditiven MeldungAM1 ,AM2 ,AM3 erzeugten Schallwellen ausgegeben oder wahrnehmbar gemacht werden sollen. Auch kann der RaumklangparameterPAM4 bzw.PAS4 kennzeichnend für die Parameter zumindest einer Klangquelle, insbesondere einer mittels der Wellenfeldsynthese erzeugten Schallquelle sein, beispielsweise kennzeichnend für eine wahrnehmbare Entfernung, Richtung in der diese, insbesondere aus einem bestimmten RaumbereichRB1 , ...RB6 , wahrnehmbar gemacht werden soll. Beispielsweise wird abhängig von dem ermittelten ParameterPAM4 bzw.PAM4 eine Wellenfeldsynthese imWohnraum 1 ausgeführt; - (
PAM5 ) bzw. (PAS5 ), eine Umhüllende der Amplitude und/oder des Frequenzdichtespektrums bzw. Umhüllenden des Frequenzdichtespektrums, bzw. der entsprechender Parameter der Schallwellen auf Basis der zumindest einen auditiven MeldungAM1 ,AM2 ,AM3 bzw. des AudiosignalsAS1 ,AS2 . Insbesondere bestimmt derPAM5 bzw.PAS5 eine Steuerung der Amplitudendynamik bzw. Dynamikkompression der zumindest einen auditiven MeldungAM1 ,AM2 ,AM3 bzw. des AudiosignalsAS1 ,AS2 .; - (
PAM6 ) bzw. (PAS6 ), die Kennwerte eines spektralen Parameters, bzw. Kennwerte zur Abwandlung, insbesondere Verschiebung oder Komprimierung eines oder mehrerer spektralen Parameter, eines Frequenzdichtespektrums, bzw. eines oder mehrerer Wellenlängenparameter der auf Basis der zumindest einen auditiven MeldungAM1 ,AM2 ,AM3 bzw. des AudiosignalsAS1 ,AS2 zu erzeugenden Schallwellen; - (
PAM7 ) bzw. (PAS7 ), einen inhaltlichen Parameter bzw. Kennwerte zum Bestimmen oder Anpassen eines inhaltlichen Parameters, betreffend eine in einem Abschnitt des AudiosignalsAS1 ,AS2 und/oder der zumindest einen auditiven MeldungAM1 ,AM2 , AM repräsentierten Inhalt bzw. InformationIAS1 ,IAS2 ,IAM1 ,IAM2 ,IAM3 ; - (
PAM8 ), eine Auswahl oder Anpassung der Töne, Tonsequenzen, Melodien oder Geräusche für die zumindest eine auditive MeldungAM1 ,AM2 ,AM3 ; - (
PAS8 ), eine Auswahl zumindest des AudiosignalsAS1 ,AS2 , beispielsweise kennzeichnend dafür ob ein AudiosignalS1 überwiegend mit Sprachanteilen oder ein AudiosignalAS2 überwiegend mit Musikanteilen auszuwählen, z.B. aktuell oder für ein bestimmtes Zeitintervall, vorzuziehen ist. Auch kann dieser Auswahlparameter kennzeichnend sein dafür, ob ein AudiosignalsAS1 ,AS2 mit einem oder ohne einen entsprechenden (abhängigen, zugeordneten) VideoinhaltVI1 ,VI2 bzw. Textinhalt, z.B. für ein aktuelles oder ein bestimmtes Zeitintervall auszuwählen oder vorzuziehen ist. Auch kann dabei die Auswahl oder ein Vorziehen eines von zumindest zwei alternativen Sprachkanälen des AudiosignalsAS1 ,AS2 gekennzeichnet sein, der z.B. aktuell oder für ein bestimmtes Zeitintervall auszuwählen oder vorzuziehen ist. - (
PAM9 ), einen stilistischen Parameter bzw. das Variieren eines stilistischen Parameters der auditiven MeldungAM1 ,AM2 ,AM3 , z.B. betreffend die Wortwahl, Stil, Intonation, Kommunikationsverhalten einer generierten Sprachmitteilung. Ferner kann ein Verändern, Bestimmen oder Anpassen eines Parameters der Sprachgenerierung (PSG1 ,PSG2 , ...) abhängig von dem ermittelten ParameterPAM9 veranlasst werden; - (
PAS9 ), eine Auswahl bzw. ein Vorziehen hinsichtlich einer Art, eines Genres oder Stils in Bezug auf zumindest ein AudiosignalAS1 ,AS2 oder einen Abschnitt eines AudiosignalsAS1 ,AS2 ; - (
PAM10 ) eine Kennung einer auditiven MeldungAM1 oder eines Abschnitts der auditiven MeldungAM1 , die anzeigt, ob die auditive MeldungAM1 bzw. ein Abschnitt der auditiven MeldungAM1 (in einem Zeitintervall) allein ausgegeben werden soll oder eine, insbesondere eine bestimmte weitere Ausgabe einer weiteren auditiven MeldungAM2 ,AM3 und/oder eines AudiosignalsAS1 ,AS2 zulässig, erwünscht wird bzw. anzustreben ist. Insbesondere kennzeichnet (PAS10 ), einen Parameter (PAS1 ',PAS2 ', ...) und/oder (PAM1 ',PAM2 ', ...), insbesondere einen oder mehrere Grenzwerte (PAM2min, PAM2max; ...), (PAS1min, PAS1max; PAS2min, PAS2max; ...) eines weiteren (auditiv) auszugebenden Inhalts der zusammen mit dem AudiosignalAS1 ,AS2 ausgegeben werden kann. - (
PAS10 ) eine Kennung eines AudiosignalsAS1 oder eines Abschnitts des AudiosignalsAS1 , die anzeigt, ob das AudiosignalAS1 , oder ein Abschnitt des AudiosignalsAS1 , (in einem Zeitintervall) allein ausgegeben werden soll oder eine, insbesondere eine bestimmte weitere Ausgabe eines AudiosignalsAS2 und/oder einer auditiven MeldungAM1 ,AM2 ,AM3 zulässig, erwünscht wird bzw. anzustreben ist. Insbesondere kennzeichnet (PAM10 ), einen Parameter (PAM1' ,PAM2' , ...) und/oder (PAS1' ,PAS2' , ...), insbesondere einen oder mehrere Grenzwerte (PAM1min, PAM1max; PAM2min, PAM2max; ...), (PAS2min, PAS2max; ...) eines weiteren (auditiv) auszugebenden Inhalts der zusammen mit der auditiven MeldungAM1 ausgegeben werden kann.
- (
PAM1 ) respectively. (PAS1 ), one or more acoustic parameters of at least a portion of the audio signalAS1 .AS2 or the at least one auditory messageAM1 .ON 2AT 3 particularly characterizing an amplitude, volume, so-called loudness, frequency range, phase of the corresponding output audio signal. Alternatively or additionally determinedPAM1 respectively.PAS1 the acoustic parameters of the corresponding, based on the audio signalAS1 .AS2 or the auditory messageAM1 .ON 2AT 3 generated sound waves, one or more specific (to be generated) sound wave pattern or sound wave fronts, especially in a certain space areaRB1 , ...RB6 , The at least one parameter or parameter valuePAM1 respectively.PAS1 , can cover at least one or more room areasRB1 , ...RB6 or directions. - (
PAM2 ) respectively. (PAS2 ), one or more timing parameters for outputting at least a portion of the audio signalAS1 .AS2 or the at least one auditory messageAM1 .ON 2AT 3 in particular, a time interval or an event depending on the output of at least a portion of the audio signalAS1 .AS2 and / or the at least one auditory messageAM1 .ON 2AT 3 should be done. In particular, this type of parameter relates to scheduling or adjusting one or more outputs of one or more portions of the audio signalAS1 .AS2 and/ or the auditory messageAM1 .ON 2AT 3 on the time axis; - (
pAM3 ) respectively. (PAS3 ), a division of the output of the audio signalAS1 .AS2 , or individual channels of an audio signalAS1 .AS2 or the at least one auditory message on different spatial areasRB1 , ...RB6 , For example, on only partially acoustically connected or separate space areasRB1 , ...RB6 of theliving space 1 , Alternatively or additionally is bypAM3 respectively.PAS3 a spatial division, propagation of the corresponding, based on the audio signalAS1 .AS2 and / or the at least one auditory messageAM1 .ON 2AT 3 generated sound waves, one or more specific (to be generated) sound wave pattern, especially in one or more specific space areasRB1 , ...RB6 , an assignment of at least one current or specific section of the audio signalAS1 .AS2 or the auditory messageAM1 .ON 2AT 3 to one or more specific, eg virtual, sound sources, in particular synthesized sound sources; - (
PAM4 ) respectively. (PAS4 ), a surround sound parameter. In a simplified case, a surround sound parameter may correspond to, for example, one of the surround sound parameters known in the field of surround sound systems. By determining or adapting the at least one surround sound parameter, certain expedient spatial sound effects can be induced which relate to the output of certain sections of the audio signalAS1 .AS2 and / or the at least one auditory messageAM1 .ON 2AT 3 impact. For example, a surround sound parameter indicatesPAM4 respectively.PAS4 from which direction and / or in which direction the on the basis of the audio signalAS1 .AS2 or on the basis of at least one auditory reportAM1 .ON 2AT 3 generated sound waves to be made or made perceptible. Also, the surround sound parameterPAM4 respectively.PAS4 indicative of the parameters of at least one sound source, in particular a sound source generated by means of wave field synthesis, for example, a characteristic of a perceivable distance, direction in which these, in particular from a certain area of spaceRB1 , ...RB6 to be made perceptible. For example, depends on the parameter determinedPAM4 respectively.PAM4 a wave field synthesis in theliving space 1 performed; - (
PAM5 ) respectively. (pAS5 ), an envelope of the amplitude and / or the frequency density spectrum or envelopes of the frequency density spectrum, or of the corresponding parameters of the sound waves on the basis of the at least one auditory messageAM1 .ON 2AT 3 or the audio signalAS1 .AS2 , In particular, determines thePAM5 respectively.pAS5 a control of the amplitude dynamics or dynamic compression of the at least one auditory messageAM1 .ON 2AT 3 or the audio signalAS1 .AS2 . - (
pAM6 ) respectively. (PAS6 ), the characteristic values of a spectral parameter, or characteristics for the modification, in particular displacement or compression of one or more spectral parameters, of a frequency density spectrum, or one or more wavelength parameters, based on the at least one auditory messageAM1 .ON 2AT 3 or the audio signalAS1 .AS2 sound waves to be generated; - (
PAM7 ) respectively. (pAS7 ), a content parameter for determining or adjusting a content parameter relating to one in a portion of the audio signalAS1 .AS2 and / or the at least one auditory messageAM1 .ON 2 , AM represented content or informationIAS1 .IAS2 .IAM1 .IAM2 .IAM3 ; - (
PAM8 ), a selection or adaptation of the tones, sound sequences, melodies or sounds for the at least one auditory messageAM1 .ON 2AT 3 ; - (
PAS8 ), a selection of at least the audio signalAS1 .AS2 , for example, whether an audio signalS1 predominantly with voice portions or an audio signalAS2 predominantly with music parts to select, eg current or for a certain time interval, is preferable. Also, this selection parameter may be indicative of whether an audio signalAS1 .AS2 with or without a corresponding (dependent, assigned) video contentVI1 .VI2 or text content, eg for a current or a specific time interval to select or preferable. It is also possible to select or prefer one of at least two alternative voice channels of the audio signalAS1 .AS2 be selected, for example, currently or for a particular time interval or preferable. - (
PAM9 ), a stylistic parameter or varying a stylistic parameter of the auditory messageAM1 .ON 2AT 3 , eg regarding the choice of words, style, intonation, communication behavior of a generated voice message. Furthermore, changing, determining or adapting a parameter of the speech generation (PSG1 .PSG2 , ...) depending on the determined parameterPAM9 be initiated; - (
pAS9 ), a choice or a preference in terms of a type, a genre or style in Reference to at least one audio signalAS1 .AS2 or a section of an audio signalAS1 .AS2 ; - (
PAM10 ) an identifier of an auditory reportAM1 or a portion of the auditory messageAM1 indicating if the auditory messageAM1 or a section of the auditory messageAM1 (in a time interval) should be output alone or one, in particular a specific further output of another auditory messageON 2 .AT 3 and / or an audio signalAS1 .AS2 permissible, desirable or desirable. In particular, marks (PAS10 ), a parameter (PAS1 'PAS2 ', ...) and or (PAM1 'PAM2 ', ...), in particular one or more limit values (PAM2min, PAM2max; ...), (PAS1min, PAS1max, PAS2min, PAS2max; ...) of another (auditory) content to be output together with the audio signalAS1 .AS2 can be issued. - (
PAS10 ) an identifier of an audio signalAS1 or a portion of the audio signalAS1 indicating whether the audio signalAS1 , or a section of the audio signalAS1 , (in a time interval) is to be output alone or one, in particular a certain further output of an audio signalAS2 and / or an auditory messageAM1 .ON 2AT 3 permissible, desirable or desirable. In particular, marks (PAM10 ), a parameter (PAM1 ' .PAM2 ' , ...) and or (PAS1 ' .PAS2 ' , ...), in particular one or more limit values (PAM1min, PAM1max, PAM2min, PAM2max; ...), (PAS2min, PAS2max, ...) of another (auditory) content to be output together with the auditory messageAM1 can be issued.
Alle besagten Parameter (
Dabei erfolgt im Verfahren ein, insbesondere laufend, bzw. zyklisch ausgeführtes, Bestimmen oder Anpassen eines oder mehrerer Parameters (
Das Bestimmen bzw. Anpassen der Parameter (
Es folgt eine beispielhafte Beschreibung der Varianten des Bestimmens bzw. Anpassens eines oder mehrerer Parameter (
Es folgt Beschreibung der Variante
Beispielsweise wird ein Zeitparameter (
Ein solches Aufteilen, eine spätere Wiedergabe und/oder ein späteres Zusammenfügen, z.B. mit zumindest einem weiteren Abschnitt kann dabei auch abhängig von dem prädizierten inhaltlichen Merkmal
Beispielsweise betrifft das Bestimmen oder Anpassen eines Parameters eine Auswahl, insbesondere das Anpassen eines Zeitintervalls für die Ausgabe zumindest eines Abschnitts des Audiosignals
Ferner erfolgt ein Ermitteln einer geeigneten Stelle zum Pausieren, Aufteilen und/oder Zusammenfügen eines Abschnitts des Audiosignals
In diesem Beispiel werden auch zeitliche Intervalle ermittelt, die beispielsweise Pausen innerhalb einer sprachlichen Kommunikation
In diesem Beispiel wird eine Reihenfolge zumindest zweier auszugebender, z.B. sich in einer Warteschlange befindlicher, auditiver Meldungen
Es folgt Beschreibung der Variante
Falls im Verfahren zumindest ein Richtungsparameter (
Dabei wird zumindest ein Parameter (
Dabei kann auch eine bestimmte zweckmäßige Verteilung akustischer Schallwellen auf Basis des Audiosignals
Es folgt Beschreibung der Variante
Falls im Verfahren ein Prioritätsmaß eines Abschnitts der besagten Kommunikation
Es folgt Beschreibung der Variante
Falls im Verfahren ein inhaltliches Merkmal (
Es folgt Beschreibung der Variante
Es erfolgt eine Bildung bzw. Platzierung einer oder mehreren virtueller Klangquellen, insbesondere Schallquellen derart, dass zwei, z.B. Sprache umfassende, auszugebende Inhalte, wobei zumindest ein der zumindest zwei auszugebenden Inhalte auf Basis des auszugerbenden Audiosignals
Beispielsweise kann ein auf Basis eines Abschnitts des Audiosignals
Beispielsweise kann ein auf Basis der zumindest einer auditiven Meldung
Es folgt Beschreibung der Variante
Falls im Verfahren ein Parameter (
Bevorzugt wird im Verfahren ein (naturwissenschaftlicher, mathematischer, zeitlicher, kausaler) Zusammenhang zwischen einem erkannten und ggf. klassifizierten Mustern einer körperlichen Regung, Gestik, Mimik, Augenbewegung, Lippenbewegung und einer in einem Zusammenhang mit diesem stehende auditive, sprachliche Kommunikation ermittelt und berücksichtigt. Insbesondere kann abhängig von dem besagten Zusammenhang ein Zeitparameter (
Es kann eine (für zumindest eine Person selbst mehr oder minder bewusste oder intuitiv oder reflexartig ausgeführte) körperliche Regung ermittelt und verarbeitet, insbesondere interpretiert werden. Dabei kann auch die Absicht bzw. den Wunsch zumindest einer Person erkannt werden, in eine bestimmte Richtung (und somit ggf. einem bestimmten Inhalt) zuzuhören. Daraufhin kann ein Parameter des aus der betreffenden Richtung mit einem ersten Inhalt und/oder aus der zumindest einer alternativen Richtung mit einem zweiten Inhalt angepasst werden. Beispielsweise kann die Lautstärke der Schallwellen die aus einer betreffenden, bestimmten Richtung bzw. Klangquelle ausgegeben werden, erhöht werden, und/oder die Laustärke des jeweils weiteren Inhalts zeitweise reduziert werden.It can be a (for at least one person even more or less conscious or intuitive or knee-jerk executed running) determined and processed, in particular interpreted. At the same time, the intention or the wish of at least one person to be recognized in a certain direction (and thus, if necessary, a certain content) can be recognized. Thereupon, a parameter of the direction concerned can be adapted with a first content and / or from the at least one alternative direction with a second content. For example, the volume of the sound waves output from a particular, specific direction or sound source can be increased, and / or the volume of the respective further content can be temporarily reduced.
Auch kann ein Einlernen einer bestimmten körperlichen Regung als ein bestimmtes (durch bestimmte Merkmale gekennzeichnetes) Muster erfolgen, wobei die körperliche Regung bzw. das Muster bei einem nicht hinreichenden Hören bzw. Verstehen, insbesondere für eine bestimmte im Wohnraum
Auch können ein auf die nahe Vergangenheit bezogener Parameter (
Es folgt Beschreibung der Variante
In einer Variante kann auf das Ermitteln, insbesondere Prädizieren eines Parameters (
Beispielsweise kann es sich dabei um eine, insbesondere fließende Umschaltung bzw. Umwandlung zwischen zumindest zwei Parameter-Datensätzen repräsentierend bzw. entsprechen zu unterschiedlichen Einstellungen des Raumklangs etwa umfassend eine Nachbildung bestimmter akustischer Raumeigenschaften, z.B. ein (bestimmter) „Konzertsaal“, „Jazz-Club“, „Science-Fiction“, „Kino“, „Gaming“, etc. „Nachrichten“, handeln. Dabei kann abhängig von dem erfassten Parameter (
Ferner können Einstellungen des Raumklangs und/oder weitere Einstellungen jeweils im Zusammenhang mit einem Erkennen eines Parameters (
Es folgt Beschreibung der Variante
Optional kann vorgesehen werden, dass für einen bestimmten, z.B. seitens eines Nutzers wählbaren, Raumbereich
Bevorzugt wird auf die Erkennung einer bestimmten Person, einer Person zugehörig zu einer bestimmten Personengruppe und/oder unter Berücksichtigung eines oder mehrerer wählbaren Raumbereiche
Im Ergebnis kann beispielsweise eine mehr oder minder lokale Zone in der Umgebung einer Person, bzw. einer Person zugehörig zu einer bestimmten Personengruppe geschaffen werden, in der ein oder mehrere bestimmte Grenzwerte, z.B. Höchstwerte und/oder Mindestwerte, eingehalten werden. Das zumindest eine auszugebende Audiosignals
Es kann ein mathematischer Zusammenhang zwischen einem Parameter (
Es folgt Beschreibung der Variante
Abhängig von einem oder mehreren ermittelten, insbesondere prädizierten Parameter (
Ein oder mehrere Parameter der Sprachgenerierung (
- - Morphologische Parameter (z.B. betreffend Bestandteile einer Sprache (Morpheme), deren Kombination, Verhältnis zueinander, etc.);
- - Syntaktische Parameter (z.B. zur Form und der Struktur von Wortkombinationen, Satzgrammatik);
- - Lexikologische Parameter (z.B. betreffend Wortwahl);
- - Semantische Parameter (z.B. die Bedeutung von Wörtern in Bezug auf erkannte Gegebenheiten);
- - Satzsemantische Parameter (z.B. betreffend logische Bedeutung von Sätzen);
- - Textsemantische Parameter (z.B. betreffend Bezüge auf erkannte Gegebenheiten, und/oder auf einen Parameter einer erkannten oder prädizierten Szene
S1 , ...S8 im Wohnraum1 ).
- - Morphological parameters (eg concerning components of a language (morphemes), their combination, relationship to each other, etc.);
- - Syntactic parameters (eg on the form and structure of word combinations, sentence grammar);
- - lexicological parameters (eg regarding word choice);
- - semantic parameters (eg the meaning of words in terms of recognized facts);
- - sentence-semantic parameters (eg regarding the logical meaning of sentences);
- - Text-semantic parameters (eg regarding references to recognized facts, and / or to a parameter of a recognized or predicted scene
S1 , ...S8 in the living room1 ).
Es folgt Beschreibung der Variante
Falls der betreffende Abschnitt des Audiosignals
Wenn ermittelt, wird, dass eine Person einen Raumbereich
Bevorzugt kann abhängig von einem oder mehreren Parametern (
Im Ergebnis kann eine Vielzahl diverser Abschnitte (z.B. Datenabschnitte, die den Abschnitten eines auszugebenden Audiosignals
Die jeweilige Trennung und/oder das Zusammenfügen der Abschnitte erfolgt bevorzugt an den, insbesondere im Verfahren ermittelten, geeigneten Stellen. Beispielsweise kann die Stimme eines Nachrichtenmoderators an einer Stelle unterbrochen und/oder an einer Stelle ausgegeben und/oder mit einem weiteren Abschnitt zusammengefügt werden, die etwa einem Übergang zwischen zwei unterschiedlichen Themen oder Inhalten entspricht. Beispielsweise können die besagten geeigneten Stellen ermittelt werden, die jeweils zumindest zwei mehr oder minder zu den Themenkriterien passen, die abhängig von der besagten Kommunikation
Dabei kann beispielsweise ein Abschnitt des Audiosignals
In diesem Beispiel kann die Bildung der Sequenz aus den ermittelten Abschnitten adaptiv, abhängig von den im Verfahren eingelesenen, erfassten, ermittelten Informationen gesteuert werden. Bevorzugt erfolgt die Bildung der Sequenz aus den mehreren ermittelten Abschnitten derart, dass ein Kontextbezug und/oder ermittelte, hinterlegte, bevorzugte Assoziationsverbindungen zu zumindest einer erkannten Szene
Optional umfasst das Verfahren eine Speicherung, insbesondere Zwischenspeicherung bestimmter, mit der besagten Kommunikation
=> Schritt mit einem Ermitteln oder Bewerten eines Erfolgsmaßes=> Step with a determination or evaluation of a measure of success
In einer optionalen Variante des Verfahrens wird der (aktuelle oder voraussichtliche) Erfolg der Ausgabe zumindest eines Abschnitts des Audiosignals
Ferner kann eine Zugehörigkeit einer Person zu einer Personengruppe, z.B. einem von mehreren vorausbestimmten Wahrnehmungstypen, Kommunikationstypen, ... etc. bei einem oder mehreren Ausführungen des Verfahrens bestimmt, insbesondere gelernt und für weitere Zwecke bereitgestellt werden.Furthermore, an affiliation of a person to a group of persons, e.g. one of a plurality of predetermined types of perception, types of communication, ... etc. in one or more embodiments of the method, in particular learned and provided for further purposes.
In einer Variante des Verfahrens kann auch eine Ausgabe von Daten auf Basis eines vorher erfassten bzw. zwischengespeicherten Abschnitts der Kommunikation
Dabei kann für den jeweilige Sprecher erkannt, ob seine Botschaft hinreichend oder nicht hinreichend gehört werden konnte. Beispielsweise kann ein oder mehrere von einem niedrigen Erfolgsmaß betroffene Abschnitte des Audiosignals
In einem vereinfachten Fall kann es sich dabei um eine Wiedergabe eines vorher erfassten, z.B. in einem Ringspeicher gespeicherten, Abschnitts der Kommunikation
Auch kann ein (vorher erfasster) Abschnitt der Kommunikation
Falls beispielsweise eine körperliche Regung oder ein Muster einer körperlichen Regung erkannt wird, die oder das auf ein nicht hinreichendes Verständnis deutet, kann eine automatische Übersetzung eines vorab erfassten Abschnitts der Kommunikation
Beispielsweise kann eine (Zwischen-)Speicherung der Daten oder Inhalte
Bevorzugt wird eine Ausgabe einer Information
- - ein ermitteltes, insbesondere prädiziertes Erfolgsmaß eine vorausbestimmte Schwelle überschreitet, und/oder
- - ein oder mehrere akustische Parameter, insbesondere in dem Raumbereich wo sich der Adressat des Abschnitts der Kommunikation
K-a ,K-b ,K-c , K-a' (zumindest wahrscheinlich) befindet, z.B. eine Schwelle unterschreiten, und/oder - - wenn der Adressat des Abschnitts der Kommunikation
K-a ,K-b ,K-c , K-a' seine räumliche Position derart verändert, z.B. derart, dass das Erfolgsmaß hinreichend anteigt.
- a determined, in particular predicted measure of success exceeds a predetermined threshold, and / or
- one or more acoustic parameters, in particular in the spatial area where the addressee of the communication section
ka .kb .kc 'Ka' (at least likely), eg below a threshold, and / or - - if the addressee of the section of communication
ka .kb .kc 'Ka' changes its spatial position in such a way, eg in such a way that the measure of success rises sufficiently.
=> Schritt mit der Handhabung der Daten oder dem Beenden des Verfahrens=> Step to handle the data or stop the procedure
Ausgewählte Daten im Zusammenhang mit der Ausführung des Verfahrens werden gespeichert. In diesem Beispiel werden Statistikdaten, Daten repräsentierend einen oder mehrere Erfolgsmaße, ermittelte oder aktualisierte mathematische Zusammenhänge, eingelernte Daten (Lerndaten) bzw. auf Basis der besagten Daten ermittelte Datensätze, die letztgültigen oder von einem Nutzer bevorzugten Einstellungen in einem nichtflüchtigen Speicher gespeichert. In diesem Beispiel erfolgt auch ein Zuordnen zwischen einer oder mehreren Nutzereinstellungen und einer oder mehreren im Verfahren erkannten Parameter (
Die Speicherung erfolgt innerhalb des Hauses z.B. in der Recheneinheit
In einem Beispiel wird ein mathematischer Zusammenhang zwischen einem oder mehreren Parametern (
Ferner kann eine zumindest statistische Korrelation zwischen einem oder mehreren Werten oder Mustern zumindest eines oder mehrerer Parametern (
Beispielsweise kann auf Basis eines veränderten, wesentlich überdurchschnittlich gehäuften und/oder unterdurchschnittlich seltenen Auftreten der (bestimmten) Laute, Szenen, Aktionen, (Parameter-) Muster, z.B. in Bezug auf Haustiere, bzw. Haustiere einer bestimmten Art in einer Vielzahl der Wohnräume
Dabei kann eine Vielzahl solcher oder derartigen Daten auf Basis mehrerer Wohnräume
Auch bestimmte (über Vielzahl der Wohnräume
Die Erfindung kann mit einem System aus zwei oder mehreren Vorrichtungen realisiert bzw. betrieben werden. Bei zumindest einer der zur Ausführung des Verfahrens eingerichteten Vorrichtungen handelt es sich um eine im Wohnraum
Beispielsweise kann das Bestimmen oder Anpassen zumindest eines Parameters (
Das Verfahren kann auf zwei oder mehrere gleichzeitig bzw. sich zeitlich überlappend und/oder räumlich überschneidend ablaufenden Kommunikationen
Auch kann ein oder mehrere Erfolgsmaße im Zusammenhang mit einer oder mehreren Ausführungen des Verfahrens (unter bestimmten Voraussetzungen, bei bestimmten Parametern (
Das „Anpassen“ bedeutet im Verfahren ein zweckmäßiges Verändern, welches beispielsweise zur Erreichung eines oder mehreren vorausbestimmter Ziele, beispielsweise entsprechend einem oder mehreren vorausbestimmten Logiken und/oder mathematischen Zusammenhängen, und/oder zumindest einem Optimierungskriterium (
Dabei kann im Verfahren eine gezielte Verbesserung der Hörbarkeit bestimmter Inhalte oder bestimmter Teile, insbesondere Kanäle eines Raumklangsignals bzw. eines eine Raumklangvorschrift oder Raumklangdaten umfassenden Audiosignals
Im Verfahren kann ein zweckmäßiges oder vorgegebenes Maß der Hörbarkeit und/oder Verständlichkeit der besagten Kommunikation
In einem bevorzugten Beispiel erfolgt ein Ermitteln, insbesondere Prädizieren eines Parameters (
In einem weiterführenden Beispiel des Verfahrens ist der Wohnraum
Im Ergebnis werden auch Parameter der Schallwellen die für auf Basis eines oder mehrerer auszugebenden Audiosignale
Aus den vorstehenden Ausführungen ergibt sich eine Vielzahl von Merkmalen der Erfindung die sowohl einzeln als auch in diversen Kombinationen vorteilhaft sind.From the foregoing, there are a variety of features of the invention which are advantageous both individually and in various combinations.
Mit dem Verfahren wird eine verbesserte, insbesondere effizientere Kommunikation
BEISPIEL 3 (Anpassen weiterer Audio-Inhalte, von weiteren Geräten im Wohnraum)EXAMPLE 3 (Adjusting other audio content, from other devices in the living room)
Alternativ oder zusätzlich zum Anpassen eines Audiosignals
In diesem Beispiel kann ein Verändern oder Anpassen eines oder mehrerer Parameter einer Soundemission (
Beispielsweise kann das Bestimmen oder Anpassen abhängig von dem zumindest einen ermittelten, insbesondere prädizierten Parameter der Kommunikation
Beispielsweise kann auf diese Weise ein, bevorzugt vorausschauende, Verändern oder Anpassen eines oder mehrerer im Wohnraum
Falls beispielsweise ermittelt wird, dass im Wohnraum
BEISPIEL
Optional kann ein Parameter der Kommunikation (
Optional kann das Verfahren umfassen, dass ein Parameter (
Beispielsweise kann eine im Wohnraum
In einem besonderen Beispiel des Verfahrens wird erkannt, dass ein Zuhörer, insbesondere der Zuhörer (Adressat) der sprachlichen Botschaft innerhalb der besagten Kommunikation
In einem besonderen Beispiel des Verfahrens kann ein inhaltliches Merkmal (
Beispielsweise kann daraufhin eine scherzhafte und/oder ironische Sprachmitteilung erzeugt werden.For example, a jocular and / or ironic voice message may then be generated.
BEISPIEL 5 (Berücksichtigung der Körpersprache)Example 5 (consideration of body language)
Es kann eine Auswertung eines Parameters (
Es kann, z.B. aus einem zeitlichen Zusammenhang zwischen einem Parameter Kommunikationsbotschaft (
Im Gegensatz etwa zu einer Eingabe eines Steuerungsbefehls
Daraufhin kann ein oder können mehrere Parameter (
Alternativ oder zusätzlich kann abhängig von den Daten einer im Wohnraum
Ein ermittelter Parameter (
Dabei können auf Basis von einem oder mehreren naturwissenschaftlich beschreibbaren, in Bezug auf Kommunikation
Ferner kann im Verfahren ein Ermitteln und Berücksichtigen eines mathematischen Zusammenhangs zwischen einem Parameter (
BEISPIEL 6 („Handhabung der Klangquellen auf Basis eines oder mehrerer Inhalte“)EXAMPLE 6 ("Handling Sound Sources Based on One or More Contents")
In einem weiterführenden Beispiel ist das Verfahren derart ausgestaltet, dass zumindest zwei der akustisch auszugebenden Inhalte
In diesem Beispiel kann das Erzeugen oder Platzieren der Klangquellen mittels Ansteuerung von zwei beabstandet (im Abstand von 50 cm, 150 cm, 2 Meter, 4 Meter angeordneten Audioausgabevorrichtungen, z.B. Lautsprechern oder vorwiegend der Hochton-Lautsprecher erfolgen. Alternativ oder zusätzlich kann das Erzeugen oder Platzieren der Klangquellen mittels Ansteuerung der zumindest zwei, in zumindest 3 -12 unterschiedliche Raumrichtungen bzw. Winkelbereiche ausgerichteten Hochton-Lautsprechern die im selben Gebilde verbaut sind, z.B. hinter einer umhüllenden Fläche befinden, erfolgen. In diesem Beispiel können auch Schallwellenmuster auch mittels der von Wänden und/oder Einrichtung des Wohnraums reflektierter Schallwellen erzeugt werden. Beispielsweise können Klangquellen auf Basis der ersten, direkt zu einem bestimmten Raumbereich abgestrahlter Schallwellen oder der (größtenteils) von einer ersten Fläche im Wohnraum reflektierter Schallwellen und/oder der zweiten, nach zumindest einer Reflektion von zumindest einer Fläche im Wohnraum reflektierter Schallwellen erfolgen. Dabei kann ein oder mehrere Parameter der zumindest einen auditiven Meldung und/oder des weiteren Audiosignals derart bestimmt werden, dass eine (zweckmäßige) Überlagerung, insbesondere Interferenz der ersten Schallwellen und der zweiten Schallwellen, insbesondere in einem bestimmten Raumbereich und/oder zu einem bestimmten Zeitpunkt, erfolgt. Zum Erzeugen bzw. Platzieren der zumindest zwei Klangquellen können technische Merkmale einer sogenannten Wellenfeldsynthese angewandt werden, wobei ein oder mehrere Parameter der Wellenfeldsynthese
In einem Beispiel wird werden abhängig von einem oder mehreren Parametern (
Bevorzugt wird in diesem Beispiel ein zweites Audiosignal
Ferner kann ein Parameter einer (bestimmten) körperlichen Regung, insbesondere eine bestimmte Geste einer Person beispielsweise mittels einer im Wohnraum
Beispielsweise werden zwei akustisch auszugebende Inhalte (aus einer Audiosignalquelle oder aus verschiedenen Audiosignalquellen), die insbesondere unterschiedliche Informationsinhalte bzw. Sprache umfassende Inhalte repräsentieren, insbesondere nach einer vorausbestimmter Vorschrift, auf zwei virtuelle Klangquellen, bzw. synthetisierten Schallquellen zugeordnet, insbesondere verteilt. Dabei können die zumindest zwei Inhalte aus zumindest zwei Richtungen wahrnehmbar (zumindest potentiell bzw. für potentiell im Wohnraum anwesende Personen hörbar) gemacht. Die zumindest zwei Richtungen können, z.B. in einem Richtungsunterschied von ca. 90° - 120° oder 120° - 180 ° zueinander und/oder in Richtung von +/- 45° - 60° zu der Kopfrichtung (Blickrichtung) der Person platziert werden.For example, two acoustically outputting contents (from an audio signal source or from different audio signal sources), which in particular represent contents comprising different information content or language, in particular according to a predetermined rule, are allocated, in particular distributed, to two virtual sound sources or synthesized sound sources. In this case, the at least two contents can be made perceptible from at least two directions (audible at least potentially or for persons potentially present in the living space). The at least two directions can, for example, in a directional difference of about 90 ° - 120 ° or 120 ° - 180 ° to each other and / or in the direction of +/- 45 ° - 60 ° to the head direction (line of sight) of the person.
Ferner kann abhängig von einer Handbewegung der Person, z.B. einer Bewegung der Hand der Person in Richtung einer Klangquelle und/oder zu dem rechten Ohr oder linken Ohr, ein Parameter des zumindest eines Abschnitts des Audiosignals mit dem entsprechenden Inhalt, z.B. aus der Klangquelle rechts oder links ausgegebenen Inhalt variiert werden. Beispielsweise kann eine Person mit ihrer Hand auf eine Klangquelle, z.B. auf die Richtung und/oder Entfernung, weisen und anschließend die Hand in einem gegebenen Maße nach oben heben oder senken und/oder die Handfläche nach oben oder nach unten halten bzw. richten. Daraufhin kann ein Parameter des Audiosignals aus der betreffenden Klangquelle (in einem vereinfachten Fall die Lautstärke) erhöht oder gesenkt werden.Further, depending on a hand movement of the person, e.g. a movement of the person's hand towards a sound source and / or to the right ear or left ear, a parameter of the at least one portion of the audio signal with the corresponding content, e.g. from the sound source right or left output content can be varied. For example, a person may place their hand on a sound source, e.g. pointing and / or removing, pointing and then raising or lowering the hand to a given degree and / or holding the palm up or down. Thereupon, a parameter of the audio signal from the respective sound source (in a simplified case, the volume) can be increased or decreased.
Beispielsweise kann auch eine zu der Raumrichtung und/oder Position der besagten Klangquellen korrespondierende, insbesondere eine der Raumrichtung und/oder Position räumlich entsprechende, Visualisierung erzeugt werden. Bevorzugt wird die Visualisierung in Form einer Lichtprojektion, einer holografischen Abbildung im Wohnraum, einer Augmentation oder einer VR-Anzeige (= Virtual-Reality), erfolgen. Eine solche Visualisierung kann ferner eine (symbolische, textuelle, grafische, fotografische, fotorealistische) Information umfassen die kennzeichnend sind zu der Quelle, Inhalt, Absender, Thema, Genre, Bezugsperson, eine Steuerungs- oder Bedienmöglichkeit, etc. eines Abschnitts des entsprechenden Audiosignals. Beispielsweise kann dabei ein Abschnitt eines Multimediasignals, eines Telekommunikationsinhalts oder einer auditiven Meldung, beispielsweise symbolhaft oder durch Farbgebung als solche gekennzeichnet werden. Eine solche Visualisierung kann beispielweise in einer sogenannten Datenbrille, auf Basis der eingelesenen Daten zu zumindest einem besagten Inhalt erfolgen.For example, a visualization corresponding to the spatial direction and / or position of said sound sources, in particular spatially corresponding to one of the spatial direction and / or position, can also be generated. The visualization is preferably carried out in the form of a light projection, a holographic image in the living space, an augmentation or a VR display (= virtual reality). Such visualization may further include (symbolic, textual, graphical, photographic, photorealistic) information indicative of the source, content, sender, subject, genre, caregiver, control or operation, etc. of a portion of the corresponding audio signal. By way of example, a section of a multimedia signal, of a telecommunications content or of an auditory message, for example symbolically or by coloration, can be identified as such. Such a visualization can be done, for example, in a so-called data glasses, based on the read data for at least one content.
Beispielsweise kann die Person eine, insbesondere von ihr wahrgenommene, Position der Klangquelle mittels einer körperlichen Geste verändern. Beispielsweise kann die Person eine Klangquelle „mit der Hand greifen“ oder „mit der Hand markieren“, wobei eine nachfolgende Bedienaktion sich auf eine markierte Klangquelle bezieht. Auch kann die Richtung und/oder Entfernung einer bestimmten, insbesondere vorher ausgewählten, Klangquelle (eine Richtung, in der die Klangquelle wahrgenommen wird) auf ein Erkennen einer bestimmten Geste oder eines Musters einer körperlichen Regung verändert werden. Beispielsweise kann eine Klangquelle, respektive ein zu der Klangquelle zugewiesener oder der Klangquelle entsprechender Inhalt, mittels einer Geste „weggeschoben“ oder mit der Hand an einer, mit einer bestimmten Geste zugewiesenen Stelle platziert, quasi „fixiert“ werden. In diesem Fall können weitere, aktive Klangquellen ihre Position beibehalten, oder nach vorausbestimmten Bedingungen oder in einem vorausbestimmten Maß verschoben werden, z.B. um einen freigewordenen Raumbereich bzw. Winkelbereich einzunehmen. Dabei kann im Verfahren erreicht werden, dass eine Person die Inhalte nach ihrem Ermessen räumlich ordnen („sortieren“) kann. Insbesondere können die entsprechenden Inhalte bzw. die Audioinhalte aus denselben Quellen oder derselben Art, im weiteren Betrieb des Verfahrens oder beim nächsten Start des Verfahrens, wieder an den zugewiesenen Richtungen und/oder Entfernungen erzeugt werden.For example, the person can change a position of the sound source, in particular perceived by her, by means of a physical gesture. For example, the person may "hand-pick" or "hand-mark" a sound source with a subsequent operation action relating to a marked sound source. Also, the direction and / or distance of a particular, in particular preselected, sound source (a direction in which the sound source is perceived) may be changed to a recognition of a particular gesture or pattern of physical motion. For example, a sound source, or a content corresponding to the sound source or corresponding to the sound source, can be "pushed away" by means of a gesture or placed by hand at a location assigned with a certain gesture, so to speak, "fixed". In this case, further, active sound sources may maintain their position, or be shifted according to predetermined conditions or to a predetermined extent, e.g. to occupy a vacant space or angle range. It can be achieved in the process that a person can organize the content in their discretion spatially ("sort"). In particular, the corresponding contents or the audio contents can be generated from the same sources or the same type, in the further operation of the method or at the next start of the method, again at the assigned directions and / or distances.
Bevorzugt wird die besagte Visualisierung bei einer ersten Erscheinung, bzw. Zuschaltung oder Veränderung einer Klangquelle und/oder bei einer Erkennung einer vom Nutzer (von den Adressaten des ausgegebenen Inhalts) gewünschten, oder erforderlichen Bedienhandlung (für ein bestimmtes Zeitintervall) erzeugt. Dabei kann bei einer Veränderung einer oder mehreren Klangquelle, z.B. mittels einer körperlichen Geste die entsprechende Visualisierung, bevorzugt in einer korrespondierenden Weise verändert werden. Dabei kann ein sehr hohes Maß an Interaktivität und Übersichtlichkeit erreicht werden.The said visualization is preferably generated in the case of a first appearance, or connection or modification of a sound source and / or recognition of a user action (desired by the addressees of the output content) or required operator action (for a specific time interval). In the case of a change, one or more sound sources, e.g. by means of a physical gesture, the corresponding visualization, preferably be changed in a corresponding manner. A very high degree of interactivity and clarity can be achieved.
Die in der
Die Sensorvorrichtung
In diesem Beispiel ist die Sensorvorrichtung
Ferner ist die Sensorvorrichtung
Die Sensorvorrichtung
In einem (denkbaren) Querschnitt entspricht diese einem Polygon mit 4-12, insbesondere mit abgerundeten Ecken. Die Seiten des Polygons oder die (abgerundeten) Ecken entsprechen im etwa den durch die Sensorvorrichtung
Die Sensorvorrichtung
Die zumindest eine Sprachsteuerungsapplikationen
In diesem Beispiel werden zwei, insbesondere vernetzte Sprachsteuerungsapplikationen
Die Sensorvorrichtung
Ein oder mehrere Parameter (
Ein Teil der Daten zum Bestimmen oder Anpassen zumindest eines Parameters (
Innerhalb des Wohnraums
Das Erfassen, Ermitteln der Parameter (
Für die Raumbereiche
Die
Eine Kommunikation
Beispielsweise kann auf das Sprechen oder ein erkanntes Kommunikationsvorhaben einer ersten Person, je nachdem, in welchem Raumbereich
Bei dem Bestimmen eines oder mehrerer Parameter bzw. Parameterwerte können im Verfahren bestimmte frei kombinierbaren Logiken, Formeln, Kennlinien oder Varianten des Bestimmens eines Parameters (
Bei dem Anpassen eines Parameters kann im Verfahren ein bisheriger bzw. ein sonst gültiger Wert des Parameters (mit) berücksichtigt werden. Bevorzugt kann ein betreffender neuer Parameterwert mittels eines, z.B. für eine bestimmte (ausgewählte) Variante vorgesehenen multiplikativen, additiven, logarithmischen Faktors X, und/oder eines zeitlichen Parameters T angepasst werden. Ein angepasster Parameterwert kann in diesem Falle z.B. (
Auch sind in der
Die Erfindung kann umfassen: Ermitteln, insbesondere Prädizieren, eines Parameters (
BezugszeichenlisteLIST OF REFERENCE NUMBERS
- 11
- stationärer Wohnraum, ein Teil einer Immobilie;stationary housing, part of a property;
- 1', 1",..1 ', 1 ", ..
- Weitere Wohnräume;Other living spaces;
- PB1, ..., RB6PB1, ..., RB6
-
Raumbereiche innerhalb des Wohnraums
1 ,1' ,1" ;Spaces within theliving space 1 .1' .1" ; - K-a, K-b, K-c, K-a'K-a, K-b, K-c, K-a '
- die besagten Kommunikation, unterschiedliche Abschnitte der besagten Kommunikation;the said communication, different sections of said communication;
- (PK1, PK2, ... PK8)(PK1, PK2, ... PK8)
- Parameter bzw. Parameterwerte der besagten Kommunikation, insbesondere zumindest eines Abschnitts oder mehrerer Abschnitte der besagten Kommunikation;Parameters or parameter values of said communication, in particular at least one or more sections of said communication;
- AAV1center, AAV1r, AAV1l, AAV1hr, AAV1hl, AAV2r, AAV2l, AAV3r, AAV3l,AAV1center, AAV1r, AAV1l, AAV1hr, AAV1hl, AAV2r, AAV2l, AAV3r, AAV3l,
- Audioausgabevorrichtungen, die z.B. zusammen mit dem Audiosystem ASYS betrieben werden;Audio output devices, e.g. operated together with the audio system ASYS;
- AAV-SSA1, AAV-SSA2AAV-SSA1, AAV-SSA2
-
Audioausgabevorrichtungen der Sprachsteuerungsapplikation
SSA1 ,SSA2 ;Audio output devices of the voice control applicationSSA1 .SSA2 ; - AS1, AS2AS1, AS2
-
das im Wohnraum
1 auszugendende Audiosignal, bzw. ein Abschnitt eines solchen Audiosignals;that in theliving room 1 an output audio signal, or a section of such an audio signal; - ISA1, IAS2ISA1, IAS2
-
ein mit dem Audiosignal
AS1 ,AS2 , bzw. einem Abschnitt des AudiosignalsAS1 ,AS2 übermittelter bzw. zu übermittelnder Inhalt;one with the audio signalAS1 .AS2 , or a section of the audio signalAS1 .AS2 transmitted or to be transmitted content; - AM1, AM2, AM3AM1, AM2, AM3
-
die im stationären Wohnraum
1 ,1' ,1" auszugebende auditive Meldung, Sprachmitteilung;in thestationary living room 1 .1' .1" auditory message to be issued, voice message; - IAM1, IAM2, IAM3IAM1, IAM2, IAM3
-
ein mit der auditiven Meldung bzw. Sprachmitteilung
AM1 ,AM2 ,AM3 übermittelter oder zu übermittelnder Inhalt;one with the auditory message or voice messageAM1 .ON 2AT 3 transmitted or to be transmitted content; - IV1, IV2IV1, IV2
- Ein Inhalt eines Videobilds bzw. einer Videosequenz;A content of a video picture or a video sequence;
- AI-a, AI-bAI-a, AI-b
-
ein von außerhalb des Wohnraums
1 kommender hörbarer akustischer Inhalt;one from outside the livingspace 1 incoming audible acoustic content; - AI-a, AI-bAI-a, AI-b
-
ein von innerhalb des Wohnraums
1 bzw. Hauses erzeugter akustischer Inhalt;one from within theliving space 1 or home-generated acoustic content; - (PAI1, PAI2, ...)(PAI1, PAI2, ...)
-
Parameter eines entsprechenden akustischen Inhalts
AI-a ,AI-b ,AI-c ,AI-d ;Parameters of a corresponding acoustic contentAI-a .AI-b .AI-c .AI-d ; - S1, ... S8S1, ... S8
-
Eine Szene innerhalb eines stationären Wohnraums
1 ,1' ,1" A scene inside astationary living room 1 .1' .1" - (PS1, PS2, ...)(PS1, PS2, ...)
- Parameter, insbesondere kennzeichnend einen Merkmal oder Klasse einer Szene bzw. ein entsprechender Codewert.Parameter, in particular characterizing a feature or class of a scene or a corresponding code value.
- (PBL1, PBL2, ...)(PBL1, PBL2, ...)
-
Parameter einer körperlichen Regung oder ein Muster der Parameter einer körperlichen Regung oder ein Parameter der Körpersprache zumindest einer Person. Insbesondere ein Parameter einer mit der Körpersprache ausgedrückten Kommunikationsbotschaft oder der Körpersprache die einen Abschnitt der Kommunikation
K-a ,K-b ,K-c ,K-a' begleitet.Parameters of a physical impulse or a pattern of the parameters of a physical impulse or a parameter of the body language of at least one person. In particular, a parameter of a body language communication message or body language is a portion of the communicationka .kb .kc .K-a ' accompanied.
Claims (19)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102017117569.5A DE102017117569A1 (en) | 2017-08-02 | 2017-08-02 | Method, system, user device and a computer program for generating an output in a stationary housing audio signal |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102017117569.5A DE102017117569A1 (en) | 2017-08-02 | 2017-08-02 | Method, system, user device and a computer program for generating an output in a stationary housing audio signal |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102017117569A1 true DE102017117569A1 (en) | 2019-02-07 |
Family
ID=65019682
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102017117569.5A Pending DE102017117569A1 (en) | 2017-08-02 | 2017-08-02 | Method, system, user device and a computer program for generating an output in a stationary housing audio signal |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102017117569A1 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113965842A (en) * | 2021-12-01 | 2022-01-21 | 费迪曼逊多媒体科技(上海)有限公司 | Variable acoustic home theater sound system based on WFS wave field synthesis technology |
AT525364B1 (en) * | 2022-03-22 | 2023-03-15 | Oliver Odysseus Schuster | audio system |
DE102021103310B4 (en) | 2021-02-12 | 2024-01-04 | Dr. Ing. H.C. F. Porsche Aktiengesellschaft | METHOD AND DEVICE FOR IMPROVING SPEECH UNDERSTANDABILITY IN A ROOM |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090055190A1 (en) * | 2007-04-26 | 2009-02-26 | Ford Global Technologies, Llc | Emotive engine and method for generating a simulated emotion for an information system |
US20090097671A1 (en) * | 2006-10-17 | 2009-04-16 | Massachusetts Institute Of Technology | Distributed Acoustic Conversation Shielding System |
US20140126758A1 (en) * | 2011-06-24 | 2014-05-08 | Bright Minds Holding B.V. | Method and device for processing sound data |
US20150149177A1 (en) * | 2013-11-27 | 2015-05-28 | Sri International | Sharing Intents to Provide Virtual Assistance in a Multi-Person Dialog |
-
2017
- 2017-08-02 DE DE102017117569.5A patent/DE102017117569A1/en active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090097671A1 (en) * | 2006-10-17 | 2009-04-16 | Massachusetts Institute Of Technology | Distributed Acoustic Conversation Shielding System |
US20090055190A1 (en) * | 2007-04-26 | 2009-02-26 | Ford Global Technologies, Llc | Emotive engine and method for generating a simulated emotion for an information system |
US20140126758A1 (en) * | 2011-06-24 | 2014-05-08 | Bright Minds Holding B.V. | Method and device for processing sound data |
US20150149177A1 (en) * | 2013-11-27 | 2015-05-28 | Sri International | Sharing Intents to Provide Virtual Assistance in a Multi-Person Dialog |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102021103310B4 (en) | 2021-02-12 | 2024-01-04 | Dr. Ing. H.C. F. Porsche Aktiengesellschaft | METHOD AND DEVICE FOR IMPROVING SPEECH UNDERSTANDABILITY IN A ROOM |
CN113965842A (en) * | 2021-12-01 | 2022-01-21 | 费迪曼逊多媒体科技(上海)有限公司 | Variable acoustic home theater sound system based on WFS wave field synthesis technology |
AT525364B1 (en) * | 2022-03-22 | 2023-03-15 | Oliver Odysseus Schuster | audio system |
AT525364A4 (en) * | 2022-03-22 | 2023-03-15 | Oliver Odysseus Schuster | audio system |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Zacharov | Sensory evaluation of sound | |
Dynel | Revisiting Goffman’s postulates on participant statuses in verbal interaction | |
JP7342862B2 (en) | Information processing device, information processing method, and information processing system | |
DE102011107992A1 (en) | System and method for logging to events based on keywords | |
EP3661797B1 (en) | Method, device, mobile user apparatus and computer program for controlling an audio system of a vehicle | |
Lopez et al. | Seeing films through sound: Sound design, spatial audio, and accessibility for visually impaired audiences | |
DE102017117569A1 (en) | Method, system, user device and a computer program for generating an output in a stationary housing audio signal | |
DE102017122216A1 (en) | Multi-user personalization on a voice interface device | |
Smyrnova et al. | Determination of perceptual auditory attributes for the auralization of urban soundscapes | |
Lopez et al. | Enhancing audio description: inclusive cinematic experiences through sound design | |
DE102020112476A1 (en) | Method, system, user device and computer program for operating a virtual personality | |
Lundgaard et al. | Personalised Soundscapes in Homes. | |
WO2020221865A1 (en) | Method, computer program product, system and device for modifying acoustic interaction signals, which are produced by at least one interaction partner, in respect of an interaction target | |
Ghozi et al. | Occupancy-based analysis and interpretation of soundscape auditory complexity: Case of a campus restaurant | |
Johansen et al. | Personalised Soundscapes in Homes | |
Soltani | Radio/body: Phenomenology and dramaturgies of radio | |
DE102017117570A1 (en) | Method, system, user device and computer program for generating an auditory message in a stationary home | |
Ward | Improving broadcast accessibility for hard of hearing individuals: using object-based audio personalisation and narrative importance | |
Levy et al. | Resounding news: The acoustic conventions of Israeli newscasts | |
WO2020066154A1 (en) | Information processing device, information processing method, computer program, and dialogue system | |
Shrader | A comparison of audience response to live and recorded theatre performances | |
DE102021112060A1 (en) | Method, system, user device and computer program for generating a media output on a user device | |
Losiak et al. | Listening to the First Lockdown: The Auditory Experience of Wrocław's Inhabitants 1 | |
Nooshin | Affective listening, sonic intimacy and the power of quiet voices in Rakhshan Banietemad’s the May Lady: Towards a cinema of empathy | |
DE102023112019A1 (en) | Method, system, personality model, avatar, user device, computer program and a neural network to support interpersonal communication |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R086 | Non-binding declaration of licensing interest | ||
R012 | Request for examination validly filed | ||
R079 | Amendment of ipc main class |
Free format text: PREVIOUS MAIN CLASS: G10L0015000000 Ipc: G10L0025480000 |
|
R016 | Response to examination communication | ||
R016 | Response to examination communication | ||
R016 | Response to examination communication |