CN112514414B - 对话支持系统、其方法以及记录介质 - Google Patents
对话支持系统、其方法以及记录介质 Download PDFInfo
- Publication number
- CN112514414B CN112514414B CN201980050857.5A CN201980050857A CN112514414B CN 112514414 B CN112514414 B CN 112514414B CN 201980050857 A CN201980050857 A CN 201980050857A CN 112514414 B CN112514414 B CN 112514414B
- Authority
- CN
- China
- Prior art keywords
- sound
- passenger
- conversation
- seat
- support system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 28
- 230000003321 amplification Effects 0.000 claims abstract description 37
- 238000003199 nucleic acid amplification method Methods 0.000 claims abstract description 37
- 238000012546 transfer Methods 0.000 claims description 18
- 230000002787 reinforcement Effects 0.000 claims description 11
- 238000012545 processing Methods 0.000 description 31
- 230000003044 adaptive effect Effects 0.000 description 18
- 238000010586 diagram Methods 0.000 description 17
- 230000006870 function Effects 0.000 description 13
- 238000004891 communication Methods 0.000 description 8
- 230000005540 biological transmission Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 230000005236 sound signal Effects 0.000 description 6
- 230000008859 change Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 238000001914 filtration Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 238000003825 pressing Methods 0.000 description 3
- 230000001629 suppression Effects 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 239000000872 buffer Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R27/00—Public address systems
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60N—SEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
- B60N2/00—Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles
- B60N2/90—Details or parts not otherwise provided for
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L21/0232—Processing in the frequency domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
- H04R1/403—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers loud-speakers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
- H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/02—Circuits for transducers, loudspeakers or microphones for preventing acoustic reaction, i.e. acoustic oscillatory feedback
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/12—Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L2021/02082—Noise filtering the noise being echo, reverberation of the speech
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L2021/02161—Number of inputs available containing the signal or the noise to be suppressed
- G10L2021/02166—Microphone arrays; Beamforming
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2205/00—Details of stereophonic arrangements covered by H04R5/00 but not provided for in any of its subgroups
- H04R2205/024—Positioning of loudspeaker enclosures for spatial sound reproduction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2227/00—Details of public address [PA] systems covered by H04R27/00 but not provided for in any of its subgroups
- H04R2227/009—Signal processing in [PA] systems to enhance the speech intelligibility
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2430/00—Signal processing covered by H04R, not provided for in its groups
- H04R2430/20—Processing of the output signals of the acoustic transducers of an array for obtaining a desired directivity characteristic
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
- H04R2499/10—General applications
- H04R2499/13—Acoustic transducers and sound field adaptation in vehicles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/02—Spatial or constructional arrangements of loudspeakers
- H04R5/023—Spatial or constructional arrangements of loudspeakers in a chair, pillow
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/15—Aspects of sound capture and related signal processing for recording or reproduction
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Otolaryngology (AREA)
- General Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Mechanical Engineering (AREA)
- Transportation (AREA)
- Aviation & Aerospace Engineering (AREA)
- Quality & Reliability (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
本发明提供了对话支持系统、其方法以及程序。对话支持系统支持汽车中的搭乘者的对话。汽车至少配置有两排以上的座位,对话支持系统具有:声音分配控制部,基于坐在第一座位的第一搭乘者的指定,指定期望的拾音扩声区域;第一目标声音强调部,将强调了从所指定的或拾音扩声区域发出的声音的信号向第一座位对应的扬声器输出;以及第二目标声音强调部,将第一座位对应的麦克风所采集的、强调了从第一座位发出的声音的信号向拾音扩声区域对应的扬声器输出。
Description
技术领域
本发明涉及使用麦克风和扬声器顺利地进行车辆内的会话的拾音扩声技术。
背景技术
在汽车中搭载有被称为车内通信、对话辅助的功能(参照非专利文献1)。这是通过采集乘坐于前座的人的声音并在后座再生,从而轻松地进行对话的技术。也有采集后座的声音在前座再生的技术。
先行技术文献
非专利文献
非专利文献1:"“智能麦克风for car”的技术",[online],2018年,日本电信电话株式会社,[平成30年5月24日],因特网<URL:http://www.ntt.co.jp/news2018/1802/pdf/180219c.pdf>
发明内容
发明要解决的课题
在车内通信中,辅助前排和后排的对话的系统是主流,其不能对三排座车中第二排的搭乘者的对话带来效果(参照图1)。但是,即便是第一排与第二排也有可能容易产生难以听到对话的状况。例如,可以想到特别是汽车音响等响起的情况。因此,发明要解决的技术问题是不限定于座位的位置、在任意的座位上均可以利用扩声功能。
此外,车内通信功能具有如下所述的性质:无需一直动作、仅在希望进行对话时与希望对话的对方进行即可。因此,应该可以在任意座位的搭乘者希望进行对话、或者想要结束对话时变更动作。
发明内容
本发明的目的在于提供不限定于座位或排的位置,可以在任意座位的搭乘者希望进行对话、或者想要结束对话时变更动作的对话支持系统、其方法以及程序。
用于解决课题的手段
为了解决上述的技术问题,根据本发明的一个方式,对话支持系统支持汽车中的搭乘者的对话。汽车至少配置有两排以上的座位,对话支持系统具有:声音分配控制部,基于坐在第一座位的第一搭乘者的指定,指定期望的拾音扩声对象或拾音扩声区域;第一目标声音强调部,将强调了从所指定的拾音扩声对象或拾音扩声区域发出的声音的信号,向与第一座位对应的扬声器输出;以及第二目标声音强调部,将第一座位对应的麦克风所采集的、强调了从第一座位发出的声音的信号,向与拾音扩声对象或拾音扩声区域对应的扬声器输出。
发明效果
根据本发明,实现了不限定于座位或排的位置,可以在任意座位的搭乘者希望进行对话、或者想要结束对话时变更动作的效果。
附图说明
图1是用于说明车内通信的图。
图2是第一实施方式所涉及的对话支持系统的功能框图。
图3是示出第一实施方式所涉及的对话支持系统的处理流程的例子的图。
图4是用于说明搭载有第一实施方式所涉及的对话支持系统的车辆的构造的图。
图5是用于说明搭载有第一实施方式所涉及的对话支持系统的车辆的构造的图。
图6是第一实施方式所涉及的目标声音强调部的功能框图。
图7是第一实施方式所涉及的声音分配部的功能框图。
图8是第一实施方式所涉及的声音分配控制部的功能框图。
图9是示出第一实施方式所涉及的显示部的显示例的图。
图10是示出第一实施方式所涉及的显示部的显示例的图。
图11是第一实施方式所涉及的回声消除器的功能框图。
具体实施方式
以下,对本发明的实施方式进行说明。此外,在使用于以下的说明的附图中,对具有相同的功能的构成部、进行相同的处理的步骤记载相同的附图标记,省略重复说明。在以下的说明中,除非另有说明,设定按矢量、矩阵的各要素单位进行的处理应用于该矢量、该矩阵的全部要素。
<第一实施方式的发明点>
对应于三排座位的扩声扬声器的音响路径,准备对应于各扩声扬声器的滤波器系数,通过与车内通信的动作联动来进行动作,从而来实现稳定的扩声对话。需要指出,这里所说的音响路径是指根据与希望进行车内通信的辅助的两排(例如前排和后排)分别对应的麦克风和扩声扬声器的收音和放音的关系所确定的声音的路径。
<第一实施方式>
图2是第一实施方式所涉及的对话支持系统的功能框图,图3示出其处理流程。
对话支持系统包括六个目标声音强调部110-X、声音分配部120、声音分配控制部130、以及三个加法运算部140-p。但是,设为X=A、B、C、D、E、F,p=1、2、3。需要指出,A、B、C、D、E、F分别是表示各座位的标引,分别是相对于汽车的行进方向的第一排右侧、第一排左侧、第二排右侧、第二排左侧、第三排右侧、第三排左侧的座位的标引。P是表示座位的排的标引。
在本实施方式中,搭载有对话支持系统的车辆是图4、图5所示的构造,具备三排座位。而且,本实施方式的车辆在各排的左右分别具有一个座位,具备主要采集第一排的说话者的声音的麦克风91F、主要采集第二排的说话者的声音的麦克风91S、主要采集第三排的说话者的声音的麦克风91R。麦克风(mike)91F、91S、91R分别由M个麦克风(micro phone)构成。需要指出,F、S、R分别是表示车辆的第一排、第二排、第三排的标引。而且,本实施方式的车辆在各座位的左右分别具有一个扬声器。将第一排的说话者作为对象进行放音的扬声器设为92F,将第二排的说话者作为对象进行放音的扬声器设为92S,将第三排的说话者作为对象进行放音的扬声器设为92R。
对话支持系统将三个麦克风91F、91S、麦克风91R的拾音信号y1=[y1,1、y1,2、…、y1,M]、y2=[y2,1、y2,2、…、y2,M]、y3=[y3,1、y3,2、…、y3,M]、以及通过车载用音响装置(例如,汽车音频等)的扬声器92M1、92M2再生的再生信号(例如,音频信号)ml、mr作为输入,强调从指定的区域(下面,也称为拾音扩声区域)发出的声音,并向某座位对应的扬声器输出,并且,从该座位对应的麦克风所采集的声音中强调从该座位发出的声音,并向拾音扩声区域对应的扬声器输出,从而来支持汽车中的搭乘者的对话。需要指出,构成麦克风91F、91S、91R的麦克风对应于每个拾音扩声区域至少有一个即可。
对话支持系统例如是特别的程序被读入到具有中央运算处理装置(CPU:CentralProcessing Unit:中央处理单元)、主存储装置(RAM:Random Access Memory:随机存储器)等的公知或专用的计算机中所构成的特别的装置。对话支持系统例如根据中央运算处理装置的控制来执行各处理。输入到对话支持系统的数据、通过各处理获得的数据例如被保存于主存储装置,保存于主存储装置的数据根据需要向中央运算处理装置读出并用于其它的处理。对话支持系统的各处理部也可以是至少一部分由集成电路等的硬件构成。对话支持系统具备的各存储部可以通过例如RAM(Random Access Memory)等的主存储装置、或者关系型数据库、键值存储器(key-value store)等的中间件构成。但是,各存储部不一定具备在拾音扩音装置其内部,也可以通过硬盘、光盘或闪存(Flash Memory)这样的半导体存储元件所构成的補助存储装置来构成,成为对话支持系统的外部具备的构成。
下面,关于各部进行说明。
<目标声音强调部110-X>
第p排的目标声音强调部110-X将M个拾音信号ypm(从第p排的第m个麦克风获得的信号)、参照信号sq、sr、车载用音响装置的扬声器92M1、92M2再生的再生信号ml、mr、以及声音分配控制值c作为输入,根据M个拾音信号ypm求得并输出强调了目标声音(从座位X发出的声音)的强调信号zX。但是,如前所述,X=A、B、C、D、E、F,A、B是第一排,C、D是第二排,E、F是第三排。p=1、2、3,q=1、2、3,r=1、2、3,q≠p、r≠p、q≠r。参照信号s1、s2、s3分别是强调了第一、第二、第三排的说话者的声音的信号(各排的说话者的强调信号的和)。
图6示出目标声音强调部110-X的功能框图。
目标声音强调部110-X包括定向性拾音部110-X-1、回声消除器部110-X-2、以及啸声抑制部110-X-3。下面,关于各部进行说明。
(定向性拾音部110-X-1)
定向性拾音部110-X-1将M个拾音信号ypm作为输入,根据M个拾音信号ypm求得(S110-X-1)并输出强调了目标声音(从座位X发出的声音)的强调信号y'x。
需要指出,可以通过任何方法来求得强调信号。例如,可以采用特开2004-078021号公报的强调技术。
(回声消除器部110-X-2)
回声消除器部110-X-2将强调信号y'x、参照信号sq、sr、车载用音响装置的扬声器92M1、92M2再生的再生信号ml、mr、以及声音分配控制值c作为输入,消除强调信号y'x所包含的第q、r排的扬声器(92F、92S、92R的任一个)分别再生的声音成分、扬声器92M1、92M2再生的声音成分,求得(S110-X-2)并输出消除了回声成分的强调信号y"x。关于回声消除器部110-X-2的处理内容,将在说明了如何获取参照信号s1、s2、s3之后进行详细说明。
(啸声抑制部110-X-3)
啸声抑制部110-X-3将强调信号y"x作为输入,对啸声成分进行抑制(S110-X-3),将抑制啸声成分后的信号作为强调信号zx进行输出。
需要指出,可以通过任何方法来抑制啸声成分。例如,可以采用特开2007-221219号公报的啸声抑制技术。
<声音分配部120>
声音分配部120将六个强调信号zx、以及声音分配控制值c=(c12、c23、c31)作为输入。c12、c23、c31分别取0或1,例如,如果c12=1,则意指第一排和第二排在通话中,如果c12=0,则意指第一排和第二排不是通话中。
声音分配部120基于声音分配控制值c,合成强调信号zx(S120),求得再生信号z12、z13、z21、z23、z31、z32,将再生信号zpq、zpr向加法运算部140-p输出。再生信号zpq、zpr分别是与从第q、r排的搭乘者向第p排的搭乘者的发声对应的信号。
此外,声音分配部120合成强调了第p排的说话者的声音的强调信号zx,求得参照信号sp,向与第p排的座位对应的目标声音强调部110-X之外的目标声音强调部输出参照信号sp。例如,向与第一排对应的目标声音强调部输入参照信号s2和参照信号s3。
图7示出声音分配部120的功能框图。
声音分配部120包括三个加法运算部121-p和三个声音切换部122-p。
如果cqr的值为1,则声音切换部122-p使来自于双方向的信号zqr、zrq通过,如果cqr的值为0,则不使其通过。
加法运算部121-p将与第p排的座位对应的强调信号zx相加,求得并输出再生信号zqp、zrp。
因此,再生信号可以写为:
[数式1]
此外,声音分配部120向声音分配控制部130输出强调信号zx。
而且,加法运算部121-p将与第p排的座位对应的强调信号zx相加,求得参照信号sp,向与第p排的座位对应的目标声音强调部110-X之外的目标声音强调部输出参照信号sp。因此,参照信号可以写为:
[数式2]
s1=zA+zB
s2=zG+zD
s3=zE+zF
需要指出,如果cpq的值为1,则参照信号sp与再生信号zqp一致。也就是说,再生信号是仅在第p排的座位为通话中时、将与第p排的座位对应的强调信号zx相加后的信号,但是,参照信号是不论是否为通话中、将与第p排的座位对应的强调信号zx相加后的信号。这是因为关于非输出对象的排的目标声音强调部也会对从其它排的扬声器输出的声音进行适当的处理,因此,需要输入参照信号。例如,即便是在第二排与第三排中设定了路径的情况下(通话中的情况),第一排(非输出对象的排)的麦克风所采集的声音中也会包含从第二排的扬声器放音的第三排的声音、从第三排的扬声器放音的第二排的声音,因此,在与第一排对应的目标声音强调部110-A、110-B的回声消除器部110-A-2、110-B-2中,需要将这些声音作为参照信号(输入),从第一排的麦克风所采集的声音中消除。
<声音分配控制部130>
声音分配控制部130基于坐在某个座位的搭乘者的指定,指定期望的拾音扩声区域(S130),求得并输出表示期望的拾音扩声区域与坐在某个座位的搭乘者是否为通话中的声音分配控制值c。如果是通话中,则在期望的拾音扩声区域与坐在某个座位的搭乘者之间连接路径(pass),如果不是通话中,则不连接路径,因此,也可以说声音分配控制值c控制着声音的分配。
在该例子中,采用识别坐在某个座位的搭乘者发出的声音的结果,通过设置于汽车的开关来指定期望的拾音扩声区域。在这种情况下,声音分配控制部130将六个强调声音zx作为输入,采用六个强调声音zx获取搭乘者的指定内容,指定期望的拾音扩声区域,求得声音分配控制值c。
图8是声音分配控制部130的功能框图。
声音分配控制部130包括六个声音识别部131-X、以及通话判定部132。
声音识别部131-X将强调声音zx作为输入,对强调声音zx进行声音识别,当识别为发出了特定的声音时,输出对应的判定值fx。例如,判定值fx取0、1、2、3中的任一个值。判定值fx的x表示发声者(搭乘者),判定值fx自身表示通话目的地。例如,当相当于拾音扩声区域的通话目的地的排、以及表示开始对话的单词包含于一次发声所对应的声音识别结果中时,设定表示开始发声者与通话目的地的排的对话的判定值fx。例如,声音分配控制部130在强调声音zx的声音识别的结果是“与第一排对话”时设定为fx=1,在声音识别的结果是“与第二排对话”时设定为fx=2,声音识别的结果是“与第三排对话”时设定为fx=3,并进行输出。
通话判定部132将六个判定值fx作为输入,基于六个判定值fx,作为
[数式3]
来求得并输出分配控制值c=(c12、c23、c31)。
例如,也可以是关于所有的fx,将初始值设为0,在一旦变为0之外的值之后,则进行拾音扩声处理直至对话结束。例如,当表示结束对话的单词包含于一次发声所对应的声音识别结果中时,设定表示结束发声者与通话目的地的排的对话的判定值fx。例如,当强调声音zx的声音识别的结果是“对话结束”时,设定为fx=0并进行输出。
需要指出,作为更加简单的方法,也可以不使用声音识别,而是采用通过各座位的物理的开关等来确定声音分配控制值c的方法。在该例子中,将看到能够显示多个拾音扩声区域的显示部的搭乘者所指定的拾音扩声区域指定为期望的拾音扩声区域(通话的开始)。此外,被指定为拾音扩声区域的拾音扩声区域被看到显示部的搭乘者取消指定(通话的结束)。在这种情况下,声音分配控制部130基于通过开关等输入的值来求得并输出声音分配控制值c。例如,将图9所示的开关(相当于上述的显示部)、显示图10所示的图的触摸面板(相当于上述的显示部)设置于各座位。需要指出,图10记载了对应于每排来控制通话的开始/结束的情况,但是,也可以对应于每个座位来进行控制。在图8中,虚线所示的输入部133对应于开关、触摸面板。
当某个座位的搭乘者按下(开关时)、或触摸(触摸面板时)表示其它的座位的部分时,通话判定部132作为输入获得表示搭乘者的座位、以及被执行了按下等操作的座位的信号。将该输入的信号用作表示开始该搭乘者与对话目的地的排的对话的判定值fx。例如,当对表示第一排的座位A、B的部分进行了按下等操作时,将fx=1作为输入而获得,当对表示第二排的座位C、D的部分进行了按下等操作时,将fx=2作为输入而获得,当对表示第三排的座位E、F的部分进行了按下等操作时,将fx=3作为输入而获得,当未进行按下表示任何座位的部分的操作等时、或在拾音扩声处理中对表示拾音扩声处理对象的座位的部分再次进行按下等操作时,将fx=0作为输入而获得。需要指出,fx的x表示设置有被执行了按下等操作的开关等的座位。和根据六个判定值fx来求得声音分配控制值c=(c12、c23、c31)的方法利用了声音识别时是同样的情况。
<加法运算部140-p>
加法运算部140-p将再生信号zpq、zpr作为输入,将两个再生信号相加(S140),将和作为再生信号kp输出。将再生信号k1、k2、k3分别向扬声器92F、92S、92R输出。
通过这样的构成,加法运算部140-p将强调了从被指定的拾音扩声区域发出的声音的信号向指定的搭乘者的座位所对应的扬声器输出,加法运算部140-p’将强调了指定的搭乘者的座位所对应的麦克风采集的、从指定的搭乘者的座位发出的声音的信号向拾音扩声区域对应的扬声器输出。需要指出,p'是表示被指定的拾音扩声区域的标引,p≠p'。
此外,通过基于声音分配控制值c的控制,能够以不向期望的拾音扩声区域对应的扬声器输出指定的搭乘者的座位以外的座位对应的麦克风所采集的声音的方式,来进行控制。
(回声消除器部110-X-2的详细)
对第p排的回声消除器部110-X-2的详细情况进行说明。
图11是回声消除器部110-X-2的功能框图。回声消除器部110-X-2包括自适应滤波器部110-X-2-1、110-X-2-2、110-X-2-3、110-X-2-4、加法运算部110-X-2-5、110-X-2-6、减法运算部110-X-2-7、110-X-2-8、滤波器保持部110-X-2-9。
首先,关于作为回声消除器部110-X-2的输入信号的强调信号y'x进行说明。如果采用接收到的声音分配控制值c来表示输入第p排的回声消除器部110-X-2的强调信号y'x,则如下所示。其中,各信号设定各个信号的某频率成分的复素数表示。
[数式4]
这里,wxm是为了强调第x个座位的声音而用于和拾音信号ypm相乘的滤波器系数。作为滤波器系数的确定方法,例如有延迟和波束形成器等的确定方法。此外,hppm、hqpm、hrpm分别表示从第p排、第q排,第r排的扬声器到第p排的第m个麦克风的空间传输特性。h'qp、h'rp、h'pp分别是将前式的滤波器系数与空间传输特性的乘积和
[数式5]
替换为其他的字符而得到的。
需要指出,sp所涉及的项是应该采集的声音,基于避免由于使回声消除器进行动作而将希望采集的声音也消除的目的,考虑了从回声消除器部110-X-2的消除对象中去除sq,sr所涉及的项。从式中可以读出对应于这些信号的传输函数的项能够根据声音分配控制值c的值、传输函数(0的情况除外)以三种方式进行变化。于是,在滤波器保持部110-X-2-9中,以例如采用参照信号sq关于第q排所对应的自适应滤波器部110-X-2-1的滤波器系数进行更新的滤波器为
[数式6]
cpq=1,cqr=1时、为的方式准备三种缓冲器,根据声音分配控制值c的值实施加载/存储滤波器。例如从cpq=1、cqr=0变为cpq=1、cqr=1时,将原来时刻的滤波器系数h^q作为h^q,2保存于滤波器保持部110-X-9,相反,将滤波器系数所采用的值h^q替换为滤波器保持部110-X-9中的h^q,3,再次开始伪回波信号的生成、更新。此时,第q排的自适应滤波器基于第p排的座位的搭乘者所对应的扬声器与采集第p排的座位的搭乘者的声音的M个的麦克风之间的传输函数(对应于h'pp的传输特性)、第r排的座位的搭乘者所对应的扬声器与M个的麦克风之间的传输函数(对应于h'rp的传输特性)、以及将这两者相加后的传输函数(对应于h'pp+h'rp的传输特性)而被更新。下面,对各部的处理进行说明。
第p排的滤波器保持部110-X-9保持用于自适应滤波器部110-X-2-1的滤波器h^q,1、h^q,2、h^q,3、以及用于自适应滤波器部110-X-2-2的滤波器h^r,1、h^r,2、h^r,3。当接收了声音分配控制值c=(cpq、cqr、crp)时,第p排的滤波器保持部110-X-9输出所保持的声音分配控制值c对应的滤波器h^q、h^r,接收并保持直到此时为止所使用的滤波器h^q、h^r。对应关系如下。
[数式7]
需要指出,也可以适当设定接收声音分配控制值c的定时。例如,也可以在每次变更声音分配控制值c时接收。
总之,当坐在第q排的座位的搭乘者仅与坐在第p排的座位的搭乘者对话时、坐在第q排的座位的搭乘者仅与坐在第r排的座位的搭乘者对话时、以及坐在第q排的座位的搭乘者与坐在第p排的座位的搭乘者和坐在第r排的座位的搭乘者双方对话时,第p排的滤波器保持部110-X-9使用于消除回声的自适应滤波器不同。其意图在于,例如虽然也可以认为车内是相同声场,但实际上根据座位、排所采集的声音不同。例如即便是以易于采集第一排的搭乘者的声音的方式而设置的麦克风,也由于放出声音的扬声器的位置(即、音响路径)的不同而导致所采集的声音的特性不同。因此,即便是相同的信号,也会由于“是从哪个扬声器再生的”,而存在通过相同的回声消除器则会残留回声的情况,因此,需要根据音响路径来进行滤波器的切换。
自适应滤波器部110-X-2-1、110-X-2-2分别接收滤波器h^q、h^r,并将其预先设定为用于滤波的滤波器。
自适应滤波器部110-X-2-1、110-X-2-2分别将参照信号sq、sr作为输入,分别采用自适应滤波器h^q、h^r对参照信号sq、sr进行滤波,生成并输出伪回波Yq,1、Yr,1。
加法运算部110-X-2-5将伪回波Yq,1、Yr,1作为输入,将这些值的和作为伪回波Y1进行输出。
减法运算部110-X-2-7将强调信号y'x和伪回波Y1作为输入,从强调信号y'x减去伪回波Y1,求得并输出强调信号y'x,1。
自适应滤波器部110-X-2-3、110-X-2-4分别将再生信号ml、mr作为输入,分别采用自适应滤波器对再生信号ml、mr进行滤波,生成并输出伪回波Y1,2、Yr,2。
加法运算部110-X-2-5将伪回波Y1,2、Yr,2作为输入,将这些值的和作为伪回波Y2进行输出。
减法运算部110-X-2-7将强调信号y'x、1和伪回波Y2作为输入,从强调信号y'x、1减去伪回波Y2,求得并输出强调信号y"x。
而且,自适应滤波器部110-X-2-1、110-X-2-2、110-X-2-3、110-X-2-4将消除了回声成分的强调信号y"x(相当于误差信号)作为输入,分别采用参照信号sq、sr、再生信号ml、mr以及强调信号y"x来更新自适应滤波器。需要指出,在自适应滤波器部110-X-2-1、110-X-2-2中更新的自适应滤波器并非滤波器保持部110-X-2-9所保持的自适应滤波器,而是获得强调信号y"x时所利用的自适应滤波器。
作为自适应滤波器的更新方法,有各种方法。例如,可以采用参考文献1记载的NLMS算法等来进行滤波器更新。
(参考文献1)大贺寿郎、山崎芳男、金田丰、“音响系统和数字处理”、电子信息通信学会编、科罗娜出版公司、1995年、p140、141
<效果>
根据以上的构成,可以不限定于座位、排的位置,在任意座位的搭乘者希望进行对话、或者想要结束对话时变更动作,可以适当地执行回声消除等的处理。
<变形例>
在本实施方式中,将车载用音响装置的扬声器所再生的再生信号设为双信道的信号,但是,也可以对应于车载用音响装置的扬声器设为单声道或三声道以上的信号。
在本实施方式中,具备定向性拾音部110-X-1,但是,只要是例如采用针对拾音对象的座位具有定向性的定向性麦克风能够获得强调了从座位发出的目标声音的强调信号,也可以不采用定向性拾音部110-X-1而将定向性麦克风的输出值向回声消除器部110-X-2输出。
在本实施方式中,将三排座位的汽车设为对象,但是并不限定于三排座位,在具备两排座位、四排座位以上的车辆中也可以适用本实施方式。总之,在车辆内的共用的声场中,处于行驶音、汽车音响的再生音、其它的车外噪音等导致如果是一般对话时的音量则难以听到相互声音的位置关系的情况下适用即可。
此外,在本实施方式中,对汽车内的座位的排之间的控制进行了说明,但是,在汽车内的座位之间也可以进行同样的控制。在这种情况下,期望的拾音扩声区域并不是期望的排,而是意指期望的座位。
此外,在本实施方式中,将期望的拾音扩声区域设为车内的某排的座位,但是,也可以是车外的区域。例如,当与车外的电话进行免提通话时,也可以将通话目的地的扬声器和麦克风所规定的区域作为期望的拾音扩声区域。此外,当通话的另一方把耳朵放在听筒上进行通话时,也将该通话的另一方称为拾音扩声对象。
在本实施方式中,通过声音分配控制部130内的六个声音识别部131-X进行声音识别处理,但是,也可以构成为向设置于对话支持系统的外部的声音识别部发送强调声音zx,通过外部的声音识别部进行声音识别处理,由对话支持系统接收识别结果。在这种情况下,在六个的声音识别部131-X中,采用声音识别结果求得并输出判定值fx。
在本实施方式中,在声音分配部120内的声音切换部122-p中,进行如下所述的控制:如果cqr的值是1,则是来自于双方向的信号zqr、zrq通过,如果是0,则不使其通过,但是,也可以不设置声音切换部122-p而总是使信号zqr、zrq通过,在目标声音强调部110-X中作为参考信号使用,紧接在加法运算部140-p之前基于声音分配控制值c,控制是否作为加法运算部140-p中的加法运算对象。
<其它的变形例>
本发明并不限定于上述的实施方式及变形例。例如,上述的各种处理不仅可以根据记载按照时间顺序执行,也可以根据执行处理的装置的处理能力或需要并行或者单独地执行。此外,能够在不脱离本发明的宗旨的范围内适当变更。
<程序及记录介质>
另外,可以通过计算机来实现在上述的实施方式以及变形例中所说明的各装置中的各种处理功能。该情况下,通过程序描述各装置应具有的功能的处理内容。而且,通过由计算机执行该程序,从而由计算机上实现上述各装置中的各种处理功能。
描述该处理内容的程序能够记录于计算机可读取的记录介质。作为计算机可读取的记录介质,例如可以是磁记录装置、光盘、光磁记录介质、半导体存储器等任何的介质。
另外,该程序的流通例如通过对记录了该程序的DVD、CD-ROM等可移动记录介质进行销售、转让、出借等来进行。进而,也可以通过将该程序储存至服务器计算机的存储装置,经由网络从服务器计算机向其它计算机转发该程序,从而使该程序流通。
执行这样的程序的计算机例如首先将在可移动记录介质中记录的程序或者从服务器计算机转发的程序暂时储存至自己的存储装置。而且,在执行处理时,该计算机读取在自己的存储部中储存的程序,执行按照所读取到的程序的处理。另外,作为该程序的其它执行方式,也可以是计算机从可移动记录介质直接读取程序,执行按照该程序的处理。进而,也可以设为在每次从服务器计算机向该计算机转发程序,逐次执行按照所获取的程序的处理。另外,也可以设为不进行从服务器计算机向该计算机转发程序,而是通过仅由该执行指示和结果获取来实现处理功能的所谓ASP(Application Service Provider:应用服务提供商)型的服务,执行上述的处理的结构。此外,程序包括以供电子计算机的处理用的信息亦即按照程序的信息(并不是对计算机的直接指令但具有规定计算机的处理的性质的数据等)。
通过在计算机上执行规定的程序来构成各装置,但也可以以硬件的方式实现这些处理内容的至少一部分。
Claims (15)
1.一种对话支持系统,其支持汽车中的搭乘者的对话,
所述汽车至少配置有两排以上的座位,
所述对话支持系统具有:
声音分配控制部,基于坐在第一座位的第一搭乘者的指定,指定期望的拾音扩声对象或拾音扩声区域;
第一目标声音强调部,将对从所指定的所述拾音扩声对象或所述拾音扩声区域发出的声音进行了强调的信号,向与所述第一座位对应的扬声器输出;以及
第二目标声音强调部,将对与所述第一座位对应的麦克风所采集的从所述第一座位发出的声音进行了强调的信号,向与所述拾音扩声对象或所述拾音扩声区域对应的扬声器输出,
在所述声音分配控制部中,
采用识别所述第一搭乘者发出的声音而得的结果,通过设置于所述汽车的开关来指定所述拾音扩声对象或所述拾音扩声区域,
所述对话支持系统还具有回声消除部,
在第二搭乘者仅与所述第一搭乘者对话的情况、
在所述第二搭乘者仅与所述第一搭乘者之外的第三搭乘者对话的情况、
在所述第二搭乘者与所述第一搭乘者和所述第三搭乘者双方进行对话的情况、
的各个情况下,为了消除回声而更新不同的滤波器,
所述滤波器基于与所述第一搭乘者对应的扬声器和采集所述第一搭乘者的声音的麦克风之间的传输函数、与所述第三搭乘者对应的扬声器和所述麦克风之间的传输函数、以及将该双方相加而得的传输函数而被更新。
2.根据权利要求1所述的对话支持系统,其中,
所述第二目标声音强调部不向与所述期望的拾音扩声对象或拾音扩声区域对应的扬声器输出与所述第一座位之外的座位对应的麦克风所采集的声音。
3.根据权利要求1或2所述的对话支持系统,其中,
在进行会话的搭乘者的座位间连接路径,根据路径切换滤波器。
4.根据权利要求1或2所述的对话支持系统,其中,
为了对应基于路径的被采集的声音的特性的差异,而切换滤波器。
5.根据权利要求4所述的对话支持系统,其中,
为了根据所述差异来推定回声,而切换所述滤波器。
6.根据权利要求5所述的对话支持系统,其中,
所述差异是被放音的扬声器与对回声消除对象的声音进行收音的麦克风之间的空间传输特性的差异。
7.一种对话支持系统,其支持汽车中的搭乘者的对话,
所述汽车至少配置有两排以上的座位,
所述对话支持系统具有:
声音分配控制部,基于坐在第一座位的第一搭乘者的指定,指定期望的拾音扩声对象或拾音扩声区域;
第一目标声音强调部,将对从所指定的所述拾音扩声对象或所述拾音扩声区域发出的声音进行了强调的信号,向与所述第一座位对应的扬声器输出;以及
第二目标声音强调部,将对与所述第一座位对应的麦克风所采集的从所述第一座位发出的声音进行了强调的信号,向与所述拾音扩声对象或所述拾音扩声区域对应的扬声器输出,
在所述声音分配控制部中,
通过看到能够显示多个拾音扩声对象或拾音扩声区域的显示部的所述第一搭乘者来指定所述拾音扩声对象或所述拾音扩声区域,
被指定为期望的拾音扩声对象或拾音扩声区域的拾音扩声对象或拾音扩声区域,通过看到所述显示部的所述第一搭乘者来解除指定,
所述显示部显示在所述汽车的座位或排之间连接的路径,所述拾音扩声对象或所述拾音扩声区域通过显示于所述路径的附近的按钮,被进行指定或者解除指定,
所述对话支持系统还具有回声消除部,
在第二搭乘者仅与所述第一搭乘者对话的情况、
在所述第二搭乘者仅与所述第一搭乘者之外的第三搭乘者对话的情况、
在所述第二搭乘者与所述第一搭乘者和所述第三搭乘者双方进行对话的情况、
的各个情况下,为了消除回声而更新不同的滤波器,
所述滤波器基于与所述第一搭乘者对应的扬声器和采集所述第一搭乘者的声音的麦克风之间的传输函数、与所述第三搭乘者对应的扬声器和所述麦克风之间的传输函数、以及将该双方相加而得的传输函数而被更新。
8.根据权利要求7所述的对话支持系统,其中,
所述第二目标声音强调部不向与所述期望的拾音扩声对象或拾音扩声区域对应的扬声器输出与所述第一座位之外的座位对应的麦克风所采集的声音。
9.根据权利要求7或8所述的对话支持系统,其中,
在进行会话的搭乘者的座位间连接路径,根据路径切换滤波器。
10.根据权利要求7或8所述的对话支持系统,其中,
为了对应基于路径的被采集的声音的特性的差异,而切换滤波器。
11.根据权利要求10所述的对话支持系统,其中,
为了根据所述差异来推定回声,而切换所述滤波器。
12.根据权利要求11所述的对话支持系统,其中,
所述差异是被放音的扬声器与对回声消除对象的声音进行采集的麦克风之间的空间传输特性的差异。
13.一种采用了支持汽车中的搭乘者的对话的对话支持系统的对话支持方法,
所述汽车至少配置有两排以上的座位,
所述对话支持方法具有:
声音分配控制步骤,所述对话支持系统基于坐在第一座位的第一搭乘者的指定,指定期望的拾音扩声区域;
第一目标声音强调步骤,所述对话支持系统将对从所指定的所述拾音扩声区域发出的声音进行了强调的信号,向与所述第一座位对应的扬声器输出;以及
第二目标声音强调步骤,所述对话支持系统将对与所述第一座位对应的麦克风所采集的从所述第一座位发出的声音进行了强调的信号,向与所述拾音扩声区域对应的扬声器输出,
在所述声音分配控制步骤中,
采用识别所述第一搭乘者发出的声音而得的结果,通过设置于所述汽车的开关来指定所述拾音扩声区域,
还具有回声消除步骤,
在第二搭乘者仅与所述第一搭乘者对话的情况、
在所述第二搭乘者仅与所述第一搭乘者之外的第三搭乘者对话的情况、
在所述第二搭乘者与所述第一搭乘者和所述第三搭乘者双方进行对话的情况、
的各个情况下,为了消除回声而更新不同的滤波器,
所述滤波器基于与所述第一搭乘者对应的扬声器和采集所述第一搭乘者的声音的麦克风之间的传输函数、与所述第三搭乘者对应的扬声器和所述麦克风之间的传输函数、以及将该双方相加而得的传输函数而被更新。
14.一种采用了支持汽车中的搭乘者的对话的对话支持系统的对话支持方法,
所述汽车至少配置有两排以上的座位,
所述对话支持方法具有:
声音分配控制步骤,所述对话支持系统基于坐在第一座位的第一搭乘者的指定,指定期望的拾音扩声区域;
第一目标声音强调步骤,所述对话支持系统将对从所指定的所述拾音扩声区域发出的声音进行了强调的信号,向与所述第一座位对应的扬声器输出;以及
第二目标声音强调步骤,所述对话支持系统将对与所述第一座位对应的麦克风所采集的从所述第一座位发出的声音进行了强调的信号,向与所述拾音扩声区域对应的扬声器输出,
在所述声音分配控制步骤中,
通过看到能够显示多个拾音扩声对象或拾音扩声区域的显示部的所述第一搭乘者来指定所述拾音扩声对象或所述拾音扩声区域,
被指定为期望的拾音扩声对象或拾音扩声区域的拾音扩声对象或拾音扩声区域,通过看到所述显示部的所述第一搭乘者来解除指定,
所述显示部显示在所述汽车的座位或排之间连接的路径,所述拾音扩声对象或所述拾音扩声区域通过显示于所述路径的附近的按钮,被进行指定或者解除指定,
还具有回声消除步骤,
在第二搭乘者仅与所述第一搭乘者对话的情况、
在所述第二搭乘者仅与所述第一搭乘者之外的第三搭乘者对话的情况、
在所述第二搭乘者与所述第一搭乘者和所述第三搭乘者双方进行对话的情况、
的各个情况下,为了消除回声而更新不同的滤波器,
所述滤波器基于与所述第一搭乘者对应的扬声器和采集所述第一搭乘者的声音的麦克风之间的传输函数、与所述第三搭乘者对应的扬声器和所述麦克风之间的传输函数、以及将该双方相加而得的传输函数而被更新。
15.一种计算机可读取的记录介质,记录用于使计算机作为权利要求1至权利要求12中任一项的对话支持系统而发挥功能的程序。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018145951 | 2018-08-02 | ||
JP2018-145951 | 2018-08-02 | ||
PCT/JP2019/029685 WO2020027061A1 (ja) | 2018-08-02 | 2019-07-29 | 会話サポートシステム、その方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112514414A CN112514414A (zh) | 2021-03-16 |
CN112514414B true CN112514414B (zh) | 2022-10-28 |
Family
ID=69232246
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201980050857.5A Active CN112514414B (zh) | 2018-08-02 | 2019-07-29 | 对话支持系统、其方法以及记录介质 |
Country Status (6)
Country | Link |
---|---|
US (1) | US11425517B2 (zh) |
EP (1) | EP3833045B1 (zh) |
JP (1) | JP7020554B2 (zh) |
CN (1) | CN112514414B (zh) |
ES (1) | ES2966500T3 (zh) |
WO (1) | WO2020027061A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20230121586A1 (en) | 2020-03-25 | 2023-04-20 | Nissan Motor Co., Ltd. | Sound data processing device and sound data processing method |
US20230122420A1 (en) * | 2021-10-15 | 2023-04-20 | Gulfstream Aerospace Corporation | Directional array intercom for internal communication on aircraft |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005161873A (ja) * | 2003-11-28 | 2005-06-23 | Denso Corp | 車室内音場制御システム |
US10002601B2 (en) * | 2015-12-30 | 2018-06-19 | Qualcomm Incorporated | In-vehicle communication signal processing |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11342799A (ja) | 1998-06-03 | 1999-12-14 | Mazda Motor Corp | 車両用会話支援装置 |
DE19938158C1 (de) * | 1999-08-16 | 2001-01-11 | Daimler Chrysler Ag | Verfahren und Vorrichtung sowie ihre Verwendung zur Kompensation von Verlusten eines akustischen Signals |
DE19958836A1 (de) * | 1999-11-29 | 2001-05-31 | Deutsche Telekom Ag | Verfahren und Anordnung zur Verbesserung der Kommunikation in einem Fahrzeug |
JP3878892B2 (ja) | 2002-08-21 | 2007-02-07 | 日本電信電話株式会社 | 収音方法、収音装置、および収音プログラム |
JP4383416B2 (ja) | 2006-02-14 | 2009-12-16 | 日本電信電話株式会社 | ハウリング防止方法、装置、プログラム、及びこのプログラムを記録した記録媒体 |
EP2211564B1 (en) * | 2009-01-23 | 2014-09-10 | Harman Becker Automotive Systems GmbH | Passenger compartment communication system |
DE102010009888A1 (de) * | 2010-03-02 | 2011-09-08 | GM Global Technology Operations LLC , (n. d. Ges. d. Staates Delaware) | Kommunikationsverbesserung in Fahrzeugen |
WO2014002128A1 (ja) * | 2012-06-25 | 2014-01-03 | 三菱電機株式会社 | 車載情報装置 |
US9800983B2 (en) * | 2014-07-24 | 2017-10-24 | Magna Electronics Inc. | Vehicle in cabin sound processing system |
US9672805B2 (en) * | 2014-12-12 | 2017-06-06 | Qualcomm Incorporated | Feedback cancelation for enhanced conversational communications in shared acoustic space |
US9743213B2 (en) * | 2014-12-12 | 2017-08-22 | Qualcomm Incorporated | Enhanced auditory experience in shared acoustic space |
JP2018170534A (ja) * | 2015-08-28 | 2018-11-01 | 旭化成株式会社 | 伝達装置、伝達システム、伝達方法、およびプログラム |
US10542154B2 (en) | 2015-10-16 | 2020-01-21 | Panasonic Intellectual Property Management Co., Ltd. | Device for assisting two-way conversation and method for assisting two-way conversation |
JP2017083600A (ja) * | 2015-10-27 | 2017-05-18 | パナソニックIpマネジメント株式会社 | 車載収音装置及び収音方法 |
US10390136B2 (en) * | 2016-12-13 | 2019-08-20 | Yamaha Corporation | Howling suppression device and howling suppression method |
US9881632B1 (en) | 2017-01-04 | 2018-01-30 | 2236008 Ontario Inc. | System and method for echo suppression for in-car communications |
JP2018116130A (ja) | 2017-01-18 | 2018-07-26 | アルパイン株式会社 | 車内音声処理装置および車内音声処理方法 |
-
2019
- 2019-07-29 ES ES19844912T patent/ES2966500T3/es active Active
- 2019-07-29 WO PCT/JP2019/029685 patent/WO2020027061A1/ja unknown
- 2019-07-29 CN CN201980050857.5A patent/CN112514414B/zh active Active
- 2019-07-29 EP EP19844912.6A patent/EP3833045B1/en active Active
- 2019-07-29 JP JP2020533542A patent/JP7020554B2/ja active Active
- 2019-07-29 US US17/264,174 patent/US11425517B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005161873A (ja) * | 2003-11-28 | 2005-06-23 | Denso Corp | 車室内音場制御システム |
US10002601B2 (en) * | 2015-12-30 | 2018-06-19 | Qualcomm Incorporated | In-vehicle communication signal processing |
Also Published As
Publication number | Publication date |
---|---|
US11425517B2 (en) | 2022-08-23 |
EP3833045A4 (en) | 2022-04-20 |
ES2966500T3 (es) | 2024-04-22 |
EP3833045B1 (en) | 2023-10-25 |
JPWO2020027061A1 (ja) | 2021-08-10 |
JP7020554B2 (ja) | 2022-02-16 |
CN112514414A (zh) | 2021-03-16 |
WO2020027061A1 (ja) | 2020-02-06 |
US20210314714A1 (en) | 2021-10-07 |
EP3833045A1 (en) | 2021-06-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8189765B2 (en) | Multichannel echo canceller | |
JP6311136B2 (ja) | 双方向会話補助装置及び双方向会話補助方法 | |
JP2018164310A (ja) | 車両の音声プラットホームにおける電話および娯楽オーディオの管理 | |
WO2003007500A1 (en) | Multi-channel echo cancel method, multi-channel sound transfer method, stereo echo canceller, stereo sound transfer apparatus, and transfer function calculation apparatus | |
JP2002335194A (ja) | 2チャンネルエコーキャンセル用フィルタのインパルス応答設定方法および2チャンネルエコーキャンセラ並びに双方向2チャンネル音声伝送装置 | |
CN112514414B (zh) | 对话支持系统、其方法以及记录介质 | |
US11678114B2 (en) | Sound collection loudspeaker apparatus, method and program for the same | |
JP2009141560A (ja) | 音声信号処理装置、音声信号処理方法 | |
JP3625325B2 (ja) | 拡声通話装置およびエコーキャンセラ | |
JP4920511B2 (ja) | マルチチャンネルエコーキャンセラ | |
CN112514416B (zh) | 拾音扩音装置、其方法以及记录介质 | |
CN114402630B (zh) | 声音处理系统和声音处理装置 | |
CN112544088B (zh) | 拾音扩音装置、其方法以及记录介质 | |
US12039965B2 (en) | Audio processing system and audio processing device | |
US11729550B2 (en) | Echo cancelation method, apparatus, program and recording medium | |
JP4425114B2 (ja) | 反響消去方法、反響消去装置、反響消去プログラム、及びこれを記録した記録媒体 | |
US11894013B2 (en) | Sound collection loudspeaker apparatus, method and program for the same | |
KR20230057333A (ko) | 휴대용 노래방을 위한 저복잡도 하울링 억제 | |
JP2021135310A (ja) | 音声処理装置および音声処理方法 | |
CN114257908A (zh) | 耳机的通话降噪方法及装置、计算机可读存储介质及耳机 | |
JP2019165276A (ja) | エコーキャンセル装置、エコーキャンセル方法およびエコーキャンセルプログラム | |
JPH09247054A (ja) | 多チャンネル音声通信会議用反響消去方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |