CN117351992A - 情感关怀设备及其方法 - Google Patents
情感关怀设备及其方法 Download PDFInfo
- Publication number
- CN117351992A CN117351992A CN202211482458.6A CN202211482458A CN117351992A CN 117351992 A CN117351992 A CN 117351992A CN 202211482458 A CN202211482458 A CN 202211482458A CN 117351992 A CN117351992 A CN 117351992A
- Authority
- CN
- China
- Prior art keywords
- emotion
- sound
- processor
- sound source
- vibration signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000008451 emotion Effects 0.000 title claims abstract description 134
- 238000000034 method Methods 0.000 title claims abstract description 25
- 230000002996 emotional effect Effects 0.000 claims description 13
- 238000007726 management method Methods 0.000 claims description 9
- 238000004891 communication Methods 0.000 claims description 7
- 230000002194 synthesizing effect Effects 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 16
- 238000004422 calculation algorithm Methods 0.000 description 11
- 238000012545 processing Methods 0.000 description 9
- 230000000694 effects Effects 0.000 description 7
- 230000005284 excitation Effects 0.000 description 6
- 230000035876 healing Effects 0.000 description 6
- 238000009527 percussion Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000001514 detection method Methods 0.000 description 5
- 238000001914 filtration Methods 0.000 description 4
- 238000012549 training Methods 0.000 description 4
- 238000013473 artificial intelligence Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 3
- ZYXYTGQFPZEUFX-UHFFFAOYSA-N benzpyrimoxan Chemical compound O1C(OCCC1)C=1C(=NC=NC=1)OCC1=CC=C(C=C1)C(F)(F)F ZYXYTGQFPZEUFX-UHFFFAOYSA-N 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000007635 classification algorithm Methods 0.000 description 3
- 239000002131 composite material Substances 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 230000008447 perception Effects 0.000 description 3
- 210000000689 upper leg Anatomy 0.000 description 3
- 238000012795 verification Methods 0.000 description 3
- 230000007613 environmental effect Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 235000014676 Phragmites communis Nutrition 0.000 description 1
- 230000037007 arousal Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 238000013401 experimental design Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 210000002414 leg Anatomy 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 208000024891 symptom Diseases 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
- A61M21/02—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis for inducing sleep or relaxation, e.g. by direct nerve stimulation, hypnosis, analgesia
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/06—Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
- G10L21/16—Transforming into a non-visible representation
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/70—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mental therapies, e.g. psychological therapy or autogenous training
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W50/16—Tactile feedback to the driver, e.g. vibration or force feedback to the driver on the steering wheel or the accelerator pedal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B7/00—Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L13/00—Speech synthesis; Text to speech systems
- G10L13/02—Methods for producing synthetic speech; Speech synthesisers
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0272—Voice signal separating
- G10L21/028—Voice signal separating using properties of sound source
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
- G10L25/63—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for estimating an emotional state
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/02—Casings; Cabinets ; Supports therefor; Mountings therein
- H04R1/025—Arrangements for fixing loudspeaker transducers, e.g. in a box, furniture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/22—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired frequency characteristic only
- H04R1/26—Spatial arrangements of separate transducers responsive to two or more frequency ranges
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/22—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired frequency characteristic only
- H04R1/28—Transducer mountings or enclosures modified by provision of mechanical or acoustic impedances, e.g. resonator, damping means
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
- H04R1/403—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers loud-speakers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/12—Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R9/00—Transducers of moving-coil, moving-strip, or moving-wire type
- H04R9/02—Details
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
- A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
- A61M2021/0022—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the tactile sense, e.g. vibrations
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
- A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
- A61M2021/0027—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the hearing sense
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
- A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
- A61M2021/0027—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the hearing sense
- A61M2021/0033—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the hearing sense subsonic
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2540/00—Input parameters relating to occupants
- B60W2540/22—Psychological state; Stress level or workload
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2400/00—Loudspeakers
- H04R2400/03—Transducers capable of generating both sound as well as tactile vibration, e.g. as used in cellular phones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2430/00—Signal processing covered by H04R, not provided for in its groups
- H04R2430/01—Aspects of volume control, not necessarily automatic, in sound systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
- H04R2499/10—General applications
- H04R2499/13—Acoustic transducers and sound field adaptation in vehicles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/02—Spatial or constructional arrangements of loudspeakers
- H04R5/023—Spatial or constructional arrangements of loudspeakers in a chair, pillow
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- General Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Otolaryngology (AREA)
- Multimedia (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Theoretical Computer Science (AREA)
- Anesthesiology (AREA)
- Psychology (AREA)
- General Physics & Mathematics (AREA)
- Public Health (AREA)
- Automation & Control Theory (AREA)
- Computational Linguistics (AREA)
- Hematology (AREA)
- Biomedical Technology (AREA)
- Animal Behavior & Ethology (AREA)
- General Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Heart & Thoracic Surgery (AREA)
- Veterinary Medicine (AREA)
- Child & Adolescent Psychology (AREA)
- Pain & Pain Management (AREA)
- Hospice & Palliative Care (AREA)
- Psychiatry (AREA)
- Quality & Reliability (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Medical Informatics (AREA)
- Primary Health Care (AREA)
- Epidemiology (AREA)
- Social Psychology (AREA)
- Developmental Disabilities (AREA)
- Data Mining & Analysis (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
Abstract
提供了一种基于声音的情感关怀设备及其方法。情感关怀设备包括将声音输出到扬声器的声音输出装置和与声音输出装置电连接的处理器。处理器选择情感关怀模式,基于情感关怀模式从音乐内容分离每一乐器的声源,将每一乐器的声源分布给扬声器,并控制声音输出装置播放每一乐器的声源并将其输出到所分布的扬声器。
Description
相关申请
本申请要求于2022年7月5日提交给韩国知识产权局的韩国专利申请第10-2022-0082545号的权益,通过引用将其全部内容结合在此。
技术领域
本公开涉及基于声音的情感关怀设备及其方法。
背景技术
现代人在他们的日常生活中受到很多压力。当这样的压力积累时,它可以表现为身体的心理或生理症状。因此,对用于适当地管理日常生活中的压力的管理方法存在日益增长的兴趣。因此,对于能够帮助人们管理他们的压力的内容的需求已经增加。
发明内容
已经做出本公开以解决在相关技术中出现的上述问题,同时保持由相关技术实现的优点不受影响。
本公开的一方面提供一种情感关怀设备及其方法,该情感关怀设备用于在车辆中播放音乐内容时基于乘客情绪来分离针对每个乐器的声源,并且将针对每个乐器的分离的声源分布给扬声器以播放针对每个乐器的声源。
本公开的另一方面提供一种情感关怀设备及其方法,该情感关怀设备用于基于每个乐器的声源来激励振动座椅,该声源与在车辆中正在播放的音乐内容分离。
本公开所解决的技术问题不限于上述问题,并且本公开所属领域的技术人员将从以下描述中清楚地理解本文中未提及的任何其他技术问题。
根据本公开的一方面,一种情感关怀设备可包括:声音输出装置,被配置为选择性地将声音输出到多个扬声器;以及处理器,与声音输出装置通信。处理器可选择情感关怀模式,可基于情感关怀模式将包括多个乐器声音的声源从音乐内容分离,可将声源和分离的乐器声音分布到多个扬声器中的至少一个分布式扬声器,并可控制声音输出装置播放声源和分离的乐器声音并将声源和分离的乐器声音输出到至少一个分布式扬声器。
处理器可基于车辆中的乘客的位置将声源和分离的乐器声音分布至多个扬声器。
处理器可基于多个乐器声音中的每一乐器声音的频率将声源及分离的乐器声音分布到多个扬声器。
处理器可根据情感关怀模式来校正声源和分离的乐器声音的音量等级。
处理器可根据情感关怀模式来调制声源和分离的乐器声音的波形。
处理器可以基于多个乐器声音中的每个乐器声音的声源生成情感振动信号,并且可以基于情感振动信号控制要激励的振动座椅。
处理器可将声源和分离的乐器声音转换为经转换的振动信号,可将具有经转换的振动信号的主振动信号和次振动信号的调制信号合成为经合成的振动信号,并可校正经合成的振动信号以产生情感振动信号。
主振动信号可以是正弦波。次振动信号可以为方波、三角波或锯齿波。
处理器可以基于主振动信号在座椅靠背的第一点处产生第一振动,并且可以基于次振动信号在与座椅靠背和座垫相邻的第二点处产生第二振动。
处理器可基于从用户接口接收的用户输入、车辆环境和/或乘客情感状态中的至少一者来确定情感关怀模式。
根据本公开的另一方面,情感关怀方法可包括:由处理器选择情感关怀模式;由处理器基于情感关怀模式将包括多个乐器声音的声源从音乐内容中分离为分离的乐器声音;由处理器将声源和分离的乐器声音分布到车辆中的多个扬声器中的至少一个分布式扬声器;以及由处理器控制声音输出装置将声源和分离的乐器声音输出到至少一个分布式扬声器。
将声源和分离的乐器声音分布至车辆中的多个扬声器可包括:基于车辆中的乘客的位置将声源和分离的乐器声音分布至多个扬声器。
将声源和分离的乐器声音分布到车辆中的多个扬声器可包括:基于多个乐器声音中的每个乐器声音的频率,将多个乐器声音中的每个乐器声音的声源分布到扬声器。
将声源和分离的乐器声音分布至车辆中的多个扬声器可包括:根据情感关怀模式,校正声源和分离的乐器声音的音量等级。
将声源和分离的乐器声音分布至车辆中的多个扬声器可包括:根据情感关怀模式,调制声源和分离的乐器声音的波形。
情感关怀方法可进一步包括基于多个乐器声音中的每个乐器声音的声源产生情感振动信号,并基于情感振动信号控制振动座椅被激励。
情感振动信号的产生可包括将声源和分离的乐器声音转换为转换的振动信号,将主振动信号和次振动信号的调制信号与转换的振动信号合成为合成振动信号,并校正合成振动信号以产生情感振动信号。
控制被激励的振动座椅可包括:基于主振动信号在座椅靠背的第一点处产生第一振动,并且基于次振动信号在与座椅靠背和座垫相邻的第二点处产生第二振动。
情感关怀模式的选择可包括基于以下中的至少一个确定情感关怀模式:用户输入、车辆环境和/或从用户接口接收的乘客情感状态。
附图说明
从以下结合附图的详细描述中,本公开的上述和其他目的、特征以及优点将变得更加显而易见:
图1是示出根据本公开的实施方式的情感关怀设备的配置的框图;
图2是示出根据本公开的实施方式的布置扬声器的实例的示图;
图3是示出了根据本公开实施方式的在车辆座椅中安装振动发生器的实例的示图;
图4是用于描述根据本公开的实施方式的每个扬声器声源分布算法的示图;
图5是示出根据本公开的实施方式的虚拟环境声音调谐模拟器的配置的示图;
图6是示出根据本公开的实施方式的根据乘客位置形成声音区域的实例的示图;
图7是示出了根据本公开的实施方式的根据乘客位置形成声音区域的另一实例的示图;
图8是示出根据本公开的实施方式的情感关怀方法的流程图;
图9是用于描述根据本公开的实施方式的基于声音的振动分类算法的示图;
图10是示出根据本公开的实施方式的用于实现情感振动的方法的流程图;以及
图11是示出根据本公开的实施方式的用于确定振动模式和激振力的方法的流程图。
具体实施方式
在下文中,将参照示例性附图详细描述本公开的一些实施方式。在附图中,相同的参考标号在全文中用于指代相同或等同的元件。此外,将排除对公知特征或功能的详细描述,以免不必要地模糊本公开的主旨。
在描述根据本公开的实施方式的部件时,可以使用诸如第一、第二、“A”、“B”、(a)、(b)等的术语。这些术语仅用于将一个元件与另一个元件区分离,而不限制相应的元件,而与相应的元件的顺序或优先级无关。此外,除非另外定义,否则在此使用的包括技术术语和科学术语的所有术语将被解释为本披露所属领域的惯用术语。如在通常使用的词典中定义的那些术语应被解释为具有与相关领域中的上下文含义相等的含义,并且不应被解释为具有理想的或过于正式的含义,除非在本申请中明确定义为具有理想的或过于正式的含义。
本公开的实施方式可基于车辆中的驾驶员情感建模在播放音乐内容时将每个乐器的声源与音乐内容分离,可将每个乐器的分离的声源分布给扬声器以播放每个乐器的声源,并可基于每个乐器的分离的声源控制振动座椅被激励以帮助车辆乘客缓解自身疲劳。
本公开的实施方式可基于三个概念来提供情感关怀解决方案。为此,本公开的实施方式使用三维(3D)情绪分析(即,愉快、唤起和优势维度的情绪分析)建立驾驶员情绪类别。驾驶员情绪类别可被分类为安全人物、有趣人物或健康人物。
此外,为了根据情感关怀解决方案(或驾驶员情感建模或情绪)基于每个乐器的声源在振动座椅中生成激励,本公开的实施方式可借助于对基于声音的振动和触觉相关性的研究得出基于声音的振动的多重感官刺激,并且可借助于基于驾驶员情感建模的音乐情绪定义组成乐器,并且可得出每个情形的关键字。
图1是示出根据本公开的实施方式的情感关怀设备的配置的框图。
参考图1,情感关怀设备100可包括通信装置110、检测装置120、存储器130、声音输出装置140、座椅驱动装置150和处理器160。
通信装置110可辅助情感关怀设备100执行与位于车辆内部和/或外部的电子装置(例如,智能电话、电子控制单元(ECU)、平板电脑、个人计算机等)的有线通信(例如,以太网、局域网(LAN)、控制器局域网(CAN)等)和/或无线通信(例如,无线保真(Wi-Fi)、蓝牙、长期演进(LTE)等)。通信装置110可包括使用至少一个天线发射和/或接收信号(或数据)的收发器。
检测装置120可检测车辆信息(例如,行驶信息和/或车辆环境信息)、驾驶员信息、乘客信息等。检测装置120可使用安装在车辆上的至少一个传感器和/或至少一个ECU来检测车辆信息,诸如,车辆速度、座椅信息、电机每分钟转数(RPM)、加速器踏板开度、节气门开度、车辆内部温度、和/或车辆外部温度。加速器位置传感器(APS)、节气门位置传感器、全球定位系统(GPS)传感器、轮速传感器、温度传感器、麦克风、图像传感器、高级驾驶员辅助系统(ADAS)传感器、3轴加速计、惯性测量单元(IMU)等可被用作至少一个传感器。至少一个ECU可以是电机控制单元(MCU)、车辆控制单元(VCU)等。检测装置120可使用压力传感器、超声波传感器、雷达、图像传感器、麦克风、驾驶员监视系统(DMS)等来检测驾驶员信息和乘客信息。
存储器130可存储用于每个扬声器的声源分布算法、基于声音的振动分类算法等。存储器130可存储声音(或声源),诸如音乐声音(或音乐内容)、虚拟声音和/或行驶声音。可基于驾驶员情感建模(或服务概念)根据关于音乐特征(例如,音乐结构、音乐表示、音调等)的指南和关于每个人物的特征的指南来创建音乐内容。
可以在存储器130中构建通过基于人工智能的情感振动算法的预训练数据库。通过基于人工智能的情感振动算法构建预训练数据库,可以识别每个乐器的声源样本是否类似于在概念阶段中要诱发的情绪。预训练数据库的构建可通过以下过程来完成。首先,处理器160可基于驾驶员情感建模为每个乐器播放声源,并可基于播放的声源的波形对用于产生振动的声源进行分类。换言之,处理器160可基于声源回放时间、乐器组、音高等分析每个声源的音轨,以确定声源是否包括用于产生振动的音轨。相关等式t=(60/BPM)*5(拍子数),其中BPM是每分钟拍子。接下来,处理器160可将被分类为用于产生振动的声源的声源音轨映射到振动致动器(即,振动发生器)。处理器160可分析在前奏之后呈现的主歌部分(verse part)的前4个小节(bar)以分析每个情绪的模式相关性。处理器160可执行针对每个音轨保持声源的波形并使用递归线性滤波器去除不必要的频带的预处理(即,滤波)。处理器160可将每一音轨的经预处理声源与用于每一情感关怀模式的波形合成。换言之,当情感关怀模式是冥想模式时,处理器160可将正弦波与每个音轨的预处理声源合成,当情感关怀模式是压力释放模式时,处理器160可将三角波与每个音轨的预处理声源合成,当情感关怀模式是治愈模式时,处理器160可将方波与每个音轨的预处理声源合成,以产生情感振动。此后,处理器160可以设置回归模型设计和假设,并且可以分析音频数据。处理器160可以生成实验工具,例如,问卷、实验方法、详细设置等,并且可以通过建立实验设计来构建预训练数据库。
存储器130可以是存储由处理器160执行的指令的非暂时性存储介质。存储器130可包括存储介质中的至少一个,诸如,随机存取存储器(RAM)、静态RAM(SRAM)、只读存储器(ROM)、可编程ROM(PROM)、电可擦除可编程ROM(EEPROM)、可擦除可编程ROM(EPROM)、硬盘驱动器(HDD)、固态盘(SSD)、嵌入式多媒体卡(eMMC)、通用闪存(UFS)或网络存储器。
声音输出装置140可以播放并输出预先存储或实时流式地声源至外部。声音输出装置140可以包括放大器、扬声器(例如,高音扬声器、低音扬声器、亚低音扬声器等)等。放大器可放大从声音输出装置140播放的声音的电信号。多个扬声器可安装在车辆内部和/或外部的不同位置处。扬声器可将由放大器放大的电信号转换为声波。
声音输出装置140可在处理器160的指令下将音乐内容、每个乐器的声源、虚拟声音和/或治愈声音播放并输出到车辆的内部和外部。声音输出装置140可以包括数字信号处理器(DSP)、微处理器等。声音输出装置140可以向装载到车辆中的扬声器(例如,3路扬声器和5路扬声器)输出音乐内容、每个乐器的声源、虚拟声音和/或治愈声音。此外,声音输出装置140可以将虚拟声音和/或治愈声音输出至安装在车辆外部的扬声器(或外部放大器)。
座椅驱动装置150可控制安装在车辆座椅上的至少一个振动发生器以产生振动(或振动信号)。座椅驱动装置150可调节振动模式、振动强度、振动频率等。至少一个振动发生器可安装在车辆座椅的特定位置,例如,座椅靠背、座垫、搁腿架等。振动发生器可控制至少一个振动以执行车辆座椅激励。
处理器160可与各个部件110至150电连接。处理器160可控制各个部件110至150的操作。处理器160可包括诸如专用集成电路(ASIC)、数字信号处理器(DSP)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、中央处理单元(CPU)、微控制器或微处理器等处理设备中的至少一个。
处理器160可基于从用户接口传输的用户输入来确定驾驶员情感建模(即,情感关怀模式或情绪等)。处理器160可确定关于车辆环境的驾驶员情感建模和/或乘客的情感状态。
处理器160可基于驾驶员情感建模播放音乐内容。处理器160可将每个乐器的声源与播放的音乐内容分离。此时,处理器160可基于与驾驶员情感建模匹配的乐器组合,将每个乐器的声源与音乐内容分离。当设计作为情感内容的音乐内容时使用的乐器可为钢琴、半音阶打击乐器、吉他、贝司、弦乐器(独奏、合奏)、管乐器(黄管乐器、簧片乐器、管乐器)、合成效果(Fx)、打击乐器(例如,鼓)、铺底乐器(pad)等。基于驾驶员情感建模的乐器组成如下。
压力缓解:钢琴、吉他、贝斯、弦、弦乐器、管乐器、打击乐器
冥想:钢琴,打击乐器,铺底乐器
治愈:半音阶打击乐器、吉他、合成效应、打击乐器、铺底乐器
处理器160可将用于每一乐器的经分离声源分布到扬声器。处理器160可使用每扬声器的声源分布算法将每一乐器的声源分布到扬声器。换言之,处理器160可基于驾驶员情感建模为每个乐器分布声源。根据实施方式,由于基于每个频率的声音特征和驾驶员情感建模来分离每个乐器的声源,并使用用于每个情绪的扬声器播放每个乐器的声源,处理器160可利用管弦乐队的感觉来促进情感关怀。
处理器160可根据车辆中的乘客的位置控制声音图像。例如,当仅车辆中的驾驶员座椅上存在乘客(即,驾驶员)时,处理器160可控制相位图像位于车辆前部的中心部分。作为另一示例,当车辆中的驾驶员座椅和后VIP座椅上有乘客时,处理器160可调整相位图像的位置,使得声音广泛地分布到中控台的后部的中心。因而,本公开的实施方式可通过声音图像控制防止由于双耳效应、哈斯效应等导致的声音图像扭曲的现象。
处理器160可根据情感关怀模式基于针对每个乐器的声源产生振动。处理器160可根据情感关怀模式基于针对每个乐器的声源产生主振动信号。处理器160可根据情感关怀模式来调制次振动信号的波形。处理器160可将主振动信号与调制的次振动信号进行合成。处理器160可控制座椅驱动装置150基于主振动信号来激励座椅靠背,并基于次振动信号来激励座椅腰部和大腿。例如,当情感关怀模式是冥想模式时,处理器160可在座椅靠背位置中产生钢琴情感的主振动,并可在座椅腰部和大腿位置中产生次振动。
图2是示出根据本公开的实施方式的布置扬声器的实例的示图。
参考图2,扬声器系统200可应用于车辆内部并且可实施为5路系统。扬声器系统200可包括低音扬声器210、高音扬声器220、亚低音扬声器230、第一中间范围扬声器240和第二中间范围扬声器250。每个低音扬声器210可以是用于高频(100Hz至300Hz)的扬声器。每个高音扬声器220可以是中频(3KHz至20KHz)的扬声器。亚低音扬声器230可以是用于低频(20Hz至100Hz)的扬声器。第一中间范围扬声器240可安装在车辆的后部的两侧。第一中间范围扬声器240中的每一者可为用于中频(300Hz到3KHz)的扬声器。第二中间范围扬声器250可安装在车辆的前方中央并且可以是用于中频的扬声器。
图3是示出了根据本公开实施方式的在车辆座椅中安装振动发生器的实例的示图。
参照图3,第一振动发生器310至第三振动发生器330可安装在车辆座椅300中的预定位置处。第一振动发生器310至第三振动发生器330中的每一个可被实现为触觉换能器(TTD)。第一振动发生器310、第二振动发生器320和第三振动发生器330可安装在车辆座椅300的不同位置处。第一振动发生器310可产生高频振动。第二振动发生器320可产生中频振动。第三振动发生器330可产生低频振动。
第一振动发生器310可基于主振动信号激励车辆座椅300中的振动。第二振动发生器320和第三振动发生器330可基于次振动信号或调制的次振动信号来激励车辆座椅300中的振动。例如,第一振动发生器310可产生与音乐内容的旋律相应的正弦波的振动,第二振动发生器320可产生与音乐内容的和声相应的方波或正弦波的振动,第三振动发生器330可产生与音乐内容的低音相应的三角波或锯齿波的振动。
图4是用于描述根据本公开的实施方式的每个扬声器声源分布算法的示图。
图1的处理器160可基于每个扬声器的声源分布算法通过距离感知(即,室内管弦乐队效果)实现真实感。每个扬声器的声源分布算法可以包括每个乐器的频率分布模块410、音量校正模块420和波形调制模块430。
每个乐器的频率分布模块410可根据情感关怀模式来分布每个乐器的频率。换言之,每个乐器的频率分布模块410可以基于每个乐器的声源的频率(或声音的音高)来分布频率。
音量校正模块420可根据情感关怀模式来校正每个乐器的声源的音量以引起情感变化。
波形调制模块430可根据每个乐器的声源的音调(即,波形的时间变化)改变差。换言之,波形调制模块430可以改变每个乐器的声源的振幅和周期。
图5是示出根据本公开的实施方式的虚拟环境声音调谐模拟器的配置的示图。
虚拟环境声音调谐模拟器500可使用环路仿真中的ASD硬件(HiLS)执行虚拟环境声音调谐。虚拟环境声音调谐模拟器500可包括CAN接口510、AMP 520、声音调谐程序530和控制器540。
CAN接口510可以在各个装置之间记录、播放、生成、或者发送和接收实际车辆行驶信息。换言之,CAN接口510可以用作CAN信号收发器,该CAN信号收发器利用AMP 520和控制器540发送和接收在实际车辆中收集的CAN信号。CAN接口510可产生包括由虚拟环境声音调谐模拟器500计算的参数的CAN信号,并可将产生的CAN信号发送到AMP520。
CAN接口510可以包括控制器局域网络开放环境(CANoe)511和CAN播放器512,CAN播放器512可以播放与车辆相同的信号或者可以使用在车辆中获得的CAN信号来操纵获得的信号并且可以在AMP 520与控制器540之间发送和接收CAN信号。
AMP 520可接收声音调谐程序530的调谐参数。AMP 520可根据调谐参数和CAN信号计算输出值。
控制器540可执行虚拟环境声音调谐模拟器500的整体操作,可存储并管理通过记录实际车辆的噪声、振动、声振粗糙度(NVH)声音而产生的默认内部声音数据,可存储并管理从实际车辆中的声源(例如,扬声器)到人的耳朵的声场特征信息(例如,双耳车辆脉冲响应(BVIR)),并可产生、收集和处理能够识别车辆的操作状态的CAN信号。
控制器540可以基于由AMP 520计算的输出值(或输出信号)播放ASD声音。控制器540可以将记录在实际车辆中的声音(例如,背景噪声)与播放的ASD声音合成以生成复合声音。此外,控制器540可在产生的复合声音中反映实际车辆声音空间特性(即,BVIR信息),以产生最终复合声音。
控制器540可包括声音重放控制器。声音重放控制器可输出最终合成声音。换言之,声音重放控制器可在虚拟环境中执行最终合成声音的声音调谐。
控制器540可允许用户使用模拟虚拟驾驶环境的VR模拟器收听调谐的声音并且可通过关于调谐的声音的收听体验反馈执行验证程序。控制器540可重复地执行调谐的声音的验证和基于验证结果的声音调谐以提供实际车辆水平的听觉体验。
图6是示出根据本公开的实施方式的根据乘客位置形成声音区域的实例的示图。图7是示出了根据本公开的实施方式的根据乘客位置形成声音区域的另一实例的示图。
参考图6,当仅驾驶员乘坐车辆时,图1的处理器160可控制声音图像位于车辆的前部中心。由于声音图像位于前方中心,所以声音区域也可形成在车辆的前方。
参考图7,当乘客存在于车辆中的驾驶员座椅和后VIP座椅中时,处理器160可将声音图像从车辆的前方中心移动到车辆的中央控制台的后面。随着声音图像移动至中央控制台的后部,声音区域可形成在车辆中的整个区域中。
图8是示出根据本公开的实施方式的情感关怀方法的流程图。
参考图8,在S110中,图1的处理器160可选择情感关怀模式。情感关怀模式可为基于驾驶员情感建模的情感关怀解决方案,其可分为压力缓解模式(或安全驾驶)、冥想模式(或健康驾驶)和治愈模式(或有趣驾驶)。处理器160可基于用户输入、驾驶环境或乘客状态中的至少一者来选择情感关怀模式。
在S110中,处理器160可基于作为每个乐器的声源在车辆中播放的情感关怀解决方案来分布音乐内容。换言之,处理器160可从音乐内容中提取(或分离)每个乐器的声源。
在S120中,处理器160可将每个乐器的声源分布给扬声器系统。处理器160可使用每个扬声器的声源分布算法将每个乐器的声源分布给扬声器系统。此时,每个扬声器的声源分布算法可基于驾驶员情感建模(即,情感关怀模式)分布每个乐器的频率(或声音的音调),可通过校正音量(或声音的强度)来诱发情感变化,并可由于波形(或声音的音调)的时间变化的差异来实现室内管弦乐效果(即,通过距离感知的真实感)。
在S130中,处理器160可执行基于声音的振动和/或触觉激励。当情感关怀模式是压力释放模式时,处理器160可选择三角波作为主要振动,当情感关怀模式是冥想模式时,处理器160可选择正弦波作为主要振动,当情感关怀模式是治愈模式时,处理器160可选择方波作为主要振动。作为次振动可以使用锯齿波。可以分配次振动来提高主振动以外的区间的空余度。处理器160可使用脉冲幅度调制(PAM)、脉冲宽度调制(PWM)和/或脉冲位置调制(PPM)来调制次振动。处理器160可针对每个乐器的声源波形的时间变化的差,对次振动的原始波形的脉冲振幅、脉冲宽度、脉冲位置进行调制。
图9是用于描述根据本公开的实施方式的基于声音的振动分类算法的示图。
在S200中,图1的处理器160可将每个乐器的声源转换成多模式的振动信号。多模式可分为四种类型,即,节拍机、简单节拍、自然节拍和实况声音。节拍机可应用于K-pop、hip-hop等。简单节拍可应用于所有音乐。自然节拍可应用于古典音乐。现场声音可应用于布鲁斯、爵士乐等。
在S210中,处理器160可对转换的振动信号执行特定频率滤波处理。处理器160可执行滤波以防止由于高音调的过度振动激励而引起的差异的感觉。处理器160可针对使用低音调滤波器的每个乐器的情感振动而不同地将振动分布给座椅靠背(或上端)和座垫(或下端)。
在S220中,处理器160可执行用于对经滤波处理的振动信号实现情感振动的后处理。由于使用攻击、延迟、释放、维持(ADSR)曲线来调整振动量,处理器160可在情绪上更传递振动。处理器160可确定在接收到振动信号时如何产生、减小、汲取和去除振动。当过度地接收负载时,压缩器和限制器可限制输入。当超过特定信号的信号被过度地接收时,压缩器可减小并以特定速率产生所述信号。当接收到硬件提供的输入信号的信号时,或者当发生可能伤害人体的振动时,限制器可限制没有发生超过某个信号的振动。门和扩展器可以将小的振动分布给空的间隔。门具有以下方案:当产生超过特定信号的信号时产生信号,而当振动信号很小时不产生振动信号。扩展器具有如下方案:当接收到超过特定信号的信号时,放大超过特定信号的信号以产生预先输入的振动量。
图10是示出根据本公开的实施方式的用于实现情感振动的方法的流程图。
在S300中,图1的处理器160可选择情感关怀模式。处理器160可根据用户输入来确定情感关怀模式。处理器160可基于车辆环境和/或乘客的情感状态来确定情感关怀模式。处理器160可通过基于人工智能的情感振动算法的预训练数据库来选择情感关怀模式。情感关怀模式可分为冥想模式、压力缓解模式和治愈模式。
在S310中,处理器160可将声音信号转换为振动信号。处理器160可基于声音实现振动多模式。振动多模式可以包括节拍机、简单节拍、自然节拍、现场声音等。
在S320中,处理器160可将主振动和次振动的调制数据与调制的振动信号合成。主振动可以是正弦波,次振动可以是方波、三角波和/或锯齿波。处理器160可使用主振动和次振动的脉冲振幅、脉冲宽度或脉冲位置中的至少一个的调制方案来执行调制。
在S330中,处理器160可校正合成的振动信号以产生情感振动信号。处理器160可在合成的振动信号中确定适合于背部和大腿的频率值。处理器160可基于合成的振动信号来确定各个致动器的水平、时间或最佳模式值。处理器160可根据坐姿或行驶声音模式来校正激振力。
在S340中,处理器160可基于情感振动信号来控制车辆座椅。处理器160可控制图1的座椅驱动装置150以激励车辆座椅中的振动。
图11是示出根据本公开的实施方式的用于确定振动模式和激振力的方法的流程图。
图1的处理器160可将输入到其的声音处理为振动。处理器160可接收(或感应)由图1的声音输出装置140播放的声源(或音乐)的声音。
在S400中,处理器160可使用图1的检测装置120检测车辆外部和内部的环境信息(或车辆环境信息)。车辆环境信息可包括诸如座椅环境、驾驶环境、播放音乐的声音、或者周围图像(或者周围情况)等多条信息中的至少一条。
在S410中,处理器160可确定是否使用低通滤波器。处理器160可确定是否使用接收到的声音中的任何频带的声音来实现振动。
当确定使用低通滤波器时,在S420中,处理器160可对低频带进行滤波。处理器160可从播放的音乐提取低音高的声音。
在S430中,处理器160可确定是否对滤波的声音执行包络振动处理。处理器160可确定是否对低音高的声音执行包络振动处理。
当确定不使用低通滤波器时,在S440中,处理器160可对声音中的预定频带(例如,高频带或高音高部分)进行滤波。例如,当处理器160想要将音乐中的语音实现为振动时,可确定不使用低通滤波器。当不使用低通滤波器时,处理器160可从音乐中提取预定特定频带的声音。
当在S430中确定对低通滤波的声音执行包络振动处理时,在S450中,处理器160可执行包络振动处理。
当在S430中确定不执行用于低通滤波的声音的包络振动处理时,或在执行S450中的包络振动处理之后,在S460中,处理器160可执行振动后处理。包络振动处理可为用于产生与输入波形的量值一样多的特定频率的逻辑,其可产生低音高频率,尽管存在高频波形。例如,当仅滤波高频的语音区域以执行包络振动处理时,可发生与语音相同的振动。
在S470,处理器160可使用低通滤波信号和/或包络振动处理信号进行振动校正以确定振动模式和激励力。处理器160可基于诸如座椅环境、驾驶环境、播放音乐声音和/或周围图像的信息来实现座椅振动。
此后,处理器160可基于确定的振动模式和确定的激振力控制图1的座椅驱动装置150。座椅驱动装置150可在处理器160的控制下基于所确定的振动模式和所确定的激振力来产生座椅振动。
本公开的实施方式可基于当在车辆中播放音乐内容时的乘客情感来分离用于每个乐器的声源,并可将用于每个乐器的分离的声源分布给扬声器以播放用于每个乐器的声源,从而提供室内管弦乐团的声音。
此外,本公开的实施方式可关于车辆环境和驾驶员情感基于与车辆中正在播放的音乐内容分离的每个乐器的声源来激励振动座椅,从而进一步帮助乘客缓解疲劳。
在上文中,虽然已经参考示例性实施方式和附图描述了本公开,但是本公开不限于此,而是在不背离在所附权利要求中要求保护的本公开的精神和范围的情况下,可由本公开所属领域的技术人员进行各种修改和改变。因此,本公开的实施方式并非旨在限制本公开的技术精神,而是仅出于说明性目的而提供。本公开的范围应基于所附权利要求来解释,并且与权利要求等同的范围内的所有技术构思应包括在本公开的范围内。
Claims (20)
1.一种情感关怀设备,包括:
声音输出装置,被配置为选择性地将声音输出至多个扬声器;以及
处理器,与所述声音输出装置通信,
其中,所述处理器被配置为:
选择情感关怀模式;
基于所述情感关怀模式,将包括多个乐器声音的声源分离为分离的乐器声音;
将所述声源和分离的乐器声音分配给所述多个扬声器中的至少一个分布式扬声器;以及
控制所述声音输出装置将所述声源和分离的乐器声音输出到所述至少一个分布式扬声器。
2.如权利要求1所述的情感关怀设备,其中,所述处理器进一步被配置为基于车辆中的乘客的位置将所述声源和分离的乐器声音分配至所述多个扬声器。
3.如权利要求1所述的情感关怀设备,其中,所述处理器进一步被配置为基于所述多个乐器声音中的每个乐器声音的频率将所述声源和分离的乐器声音分配到所述多个扬声器。
4.如权利要求1所述的情感关怀设备,其中,所述处理器被进一步配置为根据所述情感关怀模式校正所述声源和分离的乐器声音的音量水平。
5.如权利要求1所述的情感关怀设备,其中,所述处理器被进一步配置为根据所述情感关怀模式调制所述声源和分离的乐器声音的波形。
6.如权利要求1所述的情感关怀设备,其中,所述处理器进一步被配置为:
基于针对所述多个乐器声音中的每个乐器声音的所述声源,生成情感振动信号;以及
基于所述情感振动信号控制待激励的振动座椅。
7.如权利要求6所述的情感关怀设备,其中,所述处理器进一步被配置为:
将所述声源和分离的乐器声音转换为经转换的振动信号;
将主振动信号和次振动信号的调制信号与所述经转换的振动信号合成为经合成的振动信号;以及
校正所述经合成的振动信号以生成所述情感振动信号。
8.如权利要求7所述的情感关怀设备,其中,所述主振动信号是正弦波,并且
其中,所述次振动信号为方波、三角波或锯齿波。
9.如权利要求7所述的情感关怀设备,其中,所述处理器进一步被配置为:
基于所述主振动信号在座椅靠背的第一点处产生第一振动;以及
基于所述次振动信号在邻近所述座椅靠背和座垫的第二点处产生第二振动。
10.如权利要求1所述的情感关怀设备,其中,所述处理器进一步配置成基于用户输入、车辆环境、和/或从用户接口接收的乘客情感状态中的至少一者确定所述情感关怀模式。
11.一种情感关怀方法,其特征在于,包括以下步骤:
由处理器选择情感关怀模式;
由所述处理器基于所述情感关怀模式,将包括多个乐器声音的声源分离为分离的乐器声音;
由所述处理器将所述声源和分离的乐器声音分配给车辆中的多个扬声器中的至少一个分布式扬声器;以及
由所述处理器控制声音输出装置将所述声源和分离的乐器声音输出到所述至少一个分布式扬声器。
12.如权利要求11所述的情感关怀方法,其中,分配所述声源和分离的乐器声音的步骤还包括:
基于所述车辆中的乘客的位置将所述声源和分离的乐器声音分配至所述多个扬声器。
13.如权利要求11所述的情感关怀方法,其中,分配所述声源和分离的乐器声音的步骤还包括:
基于所述多个乐器声音中的每个乐器声音的频率将所述声源和分离的乐器声音分配到所述多个扬声器。
14.如权利要求11所述的情感关怀方法,其中,分配所述声源和分离的乐器声音的步骤还包括:
根据所述情感关怀模式校正所述声源和分离的乐器声音的音量水平。
15.如权利要求11所述的情感关怀方法,其中,分配所述声源和分离的乐器声音的步骤还包括:
根据所述情感关怀模式调制所述声源和分离的乐器声音的波形。
16.权利要求11所述的情感关怀方法,进一步包括以下步骤:
基于针对所述多个乐器声音中的每个乐器声音的所述声源,生成情感振动信号;以及
基于所述情感振动信号控制待激励的振动座椅。
17.如权利要求16所述的情感关怀方法,其中,生成情感振动信号的步骤进一步包括:
将所述声源和分离的乐器声音转换为经转换的振动信号;
将主振动信号和次振动信号的调制信号与所述经转换的振动信号合成为经合成的振动信号;以及
校正所述经合成的振动信号以生成所述情感振动信号。
18.如权利要求17所述的情感关怀方法,其中,所述主振动信号是正弦波,并且
其中,所述次振动信号为方波、三角波或锯齿波。
19.如权利要求17所述的情感关怀方法,其中,控制待激励的振动座椅的步骤还包括:
基于所述主振动信号在座椅靠背的第一点处产生第一振动;以及
基于所述次振动信号在邻近所述座椅靠背和座垫的第二点处产生第二振动。
20.如权利要求11所述的情感关怀方法,其中,选择情感关怀模式的步骤还包括:
基于用户输入、车辆环境、和/或从用户接口接收的乘客情感状态中的至少一者确定所述情感关怀模式。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2022-0082545 | 2022-07-05 | ||
KR1020220082545A KR20240005445A (ko) | 2022-07-05 | 2022-07-05 | 감성 케어 장치 및 방법 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117351992A true CN117351992A (zh) | 2024-01-05 |
Family
ID=89367955
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211482458.6A Pending CN117351992A (zh) | 2022-07-05 | 2022-11-24 | 情感关怀设备及其方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20240009421A1 (zh) |
KR (1) | KR20240005445A (zh) |
CN (1) | CN117351992A (zh) |
DE (1) | DE102022212194A1 (zh) |
-
2022
- 2022-07-05 KR KR1020220082545A patent/KR20240005445A/ko unknown
- 2022-11-05 US US17/981,400 patent/US20240009421A1/en active Pending
- 2022-11-16 DE DE102022212194.5A patent/DE102022212194A1/de active Pending
- 2022-11-24 CN CN202211482458.6A patent/CN117351992A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
US20240009421A1 (en) | 2024-01-11 |
DE102022212194A1 (de) | 2024-01-11 |
KR20240005445A (ko) | 2024-01-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11340704B2 (en) | Tactile audio enhancement | |
US20170245070A1 (en) | Vibration signal generation apparatus and vibration signal generation method | |
KR20120126446A (ko) | 입력된 오디오 신호로부터 진동 피드백을 생성하기 위한 장치 | |
WO2018038235A1 (ja) | 聴覚トレーニング装置、聴覚トレーニング方法、およびプログラム | |
JPWO2019211990A1 (ja) | 振動制御装置 | |
JP2023060333A (ja) | 振動制御装置、振動制御方法、振動制御プログラム、及び記憶媒体 | |
JP7454119B2 (ja) | 車両用音生成装置 | |
Case et al. | Designing with sound: fundamentals for products and services | |
CN117351992A (zh) | 情感关怀设备及其方法 | |
KR20150080740A (ko) | 오디오 신호 및 오디오 신호를 기반으로 한 진동 신호를 생성하는 방법 및 장치 | |
US20170229113A1 (en) | Environmental sound generating apparatus, environmental sound generating system using the apparatus, environmental sound generating program, sound environment forming method and storage medium | |
US7834261B2 (en) | Music composition reproducing device and music composition reproducing method | |
JP2020057954A (ja) | 振動制御装置、振動制御方法、振動制御プログラム、及び記憶媒体 | |
JP2020057955A (ja) | 振動制御装置、振動制御方法、振動制御プログラム、及び記憶媒体 | |
JP2020056932A (ja) | データ構造、記憶媒体、記憶装置、及び振動制御装置 | |
JP7456110B2 (ja) | 楽器用椅子、駆動信号生成方法、プログラム | |
JP2020056933A (ja) | データ構造、記憶媒体、及び記憶装置 | |
JP2008292738A (ja) | 電子鍵盤楽器 | |
WO2023189193A1 (ja) | 復号装置、復号方法および復号プログラム | |
WO2023189973A1 (ja) | 変換装置、変換方法および変換プログラム | |
US20240107211A1 (en) | Loudspeaker system and seat | |
JP4887988B2 (ja) | エンジン音加工装置 | |
WO2012124043A1 (ja) | 振動信号生成装置及び方法、コンピュータプログラム、並びに体感音響システム | |
RU2284584C1 (ru) | Способ передачи слушателю акустического сигнала и устройство для его осуществления | |
KR20240005444A (ko) | 멀티센서리 인덱스 시스템 및 그 작동 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication |