CN113163299A - 声音信号控制装置、声音信号控制系统以及计算机可读取的记录介质 - Google Patents

声音信号控制装置、声音信号控制系统以及计算机可读取的记录介质 Download PDF

Info

Publication number
CN113163299A
CN113163299A CN202011226822.3A CN202011226822A CN113163299A CN 113163299 A CN113163299 A CN 113163299A CN 202011226822 A CN202011226822 A CN 202011226822A CN 113163299 A CN113163299 A CN 113163299A
Authority
CN
China
Prior art keywords
sound
sound signal
processor
signal control
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011226822.3A
Other languages
English (en)
Inventor
山本克彦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of CN113163299A publication Critical patent/CN113163299A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/28—Constructional details of speech recognition systems
    • G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/12—Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0316—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03G—CONTROL OF AMPLIFICATION
    • H03G3/00—Gain control in amplifiers or frequency changers
    • H03G3/20—Automatic control
    • H03G3/30—Automatic control in amplifiers having semiconductor devices
    • H03G3/3005—Automatic control in amplifiers having semiconductor devices in amplifiers suitable for low-frequencies, e.g. audio amplifiers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/10—Details of earpieces, attachments therefor, earphones or monophonic headphones covered by H04R1/10 but not provided for in any of its subgroups
    • H04R2201/107—Monophonic and stereophonic headphones with microphone for two-way hands free communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00—Details of connection covered by H04R, not provided for in its groups
    • H04R2420/07—Applications of wireless loudspeakers or wireless microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/55—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception using an external connection, either wireless or wired
    • H04R25/554—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception using an external connection, either wireless or wired using a wireless connection, e.g. between microphone and amplifier or using Tcoils

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Otolaryngology (AREA)
  • Quality & Reliability (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Interconnected Communication Systems, Intercoms, And Interphones (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

本公开涉及声音信号控制装置、声音信号控制系统以及计算机可读取的记录介质。本公开的声音信号控制装置具备具有硬件的处理器，处理器根据输出声音信号的声音处理装置中的声音输出的设定信息来处理由生成声音信号的声音信号生成装置生成的声音信号，使所述声音处理装置输出与处理后的声音信号相应的声音。

Description

声音信号控制装置、声音信号控制系统以及计算机可读取的 记录介质
技术领域
本公开涉及声音信号控制装置、声音信号控制系统以及声音信号控制程序。
背景技术
作为车内通信技术，例如已知有为了将声音从前方座位的乘坐者传递给后方座位的乘坐者而从相对于发声声源的位置相隔预定的距离的扬声器输出声音的技术(例如，参照日本特开2016-63439)。
发明内容
然而，作为车内通信技术，要求能够将声音传递给在车厢内佩戴助听器、耳机等声音处理装置的乘坐者的技术。
本公开是鉴于上述问题而完成的，其目的在于提供能够将声音传递给在车厢内佩戴声音处理装置的乘坐者的声音信号控制装置、声音信号控制系统以及声音信号控制程序。
本公开的声音信号控制装置具备具有硬件的处理器，所述处理器根据输出声音信号的声音处理装置中的声音输出的设定信息来处理由生成声音信号的声音信号生成装置生成的声音信号，使所述声音处理装置输出与处理后的声音信号相应的声音。
另外，本公开的声音信号控制系统具备：第一装置，具备具有硬件的第一处理器；第二装置，具备具有硬件的第二处理器；以及第三装置，具备具有硬件的第三处理器，所述第一处理器根据收集到的声音来生成声音信号，并发送到外部，所述第二处理器输出基于所述声音信号的声音，所述第三处理器根据所述第二装置中的声音输出的设定信息来处理由所述第一处理器生成的声音信号，使所述第二装置输出与处理后的声音信号相应的声音。
另外，本公开的声音信号控制程序使具有硬件的处理器执行如下处理：根据输出声音信号的所述声音处理装置中的声音输出的设定信息来处理由生成声音信号的声音信号生成装置生成的声音信号，使所述声音处理装置输出与处理后的声音信号相应的声音。
根据本公开，起到能够将声音传递给在车厢内佩戴声音处理装置的乘坐者的效果。
附图说明
下面将参照附图说明本发明的示例性实施例的特征、优点以及技术和工业上的意义，其中相同的符号表示相同的元件，其中：
图1是示出具备本公开的实施方式1的声音信号控制装置的声音信号控制系统的概略图。
图2是概略地示出本公开的实施方式1的声音信号控制系统的结构的框图。
图3是说明本公开的实施方式1的声音信号控制系统中的声音信号控制的流程的图。
图4是概略地示出本公开的实施方式2的声音信号控制系统的结构的框图。
图5是示出具备本公开的实施方式3的声音信号控制装置的声音信号控制系统的概略图。
图6是说明本公开的实施方式3的声音信号控制系统中的声音信号控制的图。
图7是概略地示出本公开的实施方式4的声音信号控制系统的结构的框图。
具体实施方式
以下，参照附图，说明本公开的一个实施方式。此外，在以下的一个实施方式的所有图中，对相同或者对应的部分附加相同的符号。另外，本公开并不限定于以下说明的一个实施方式。
(实施方式1)
首先，说明具备本公开的实施方式1的声音信号控制装置的声音信号控制系统。图1是示出具备本公开的实施方式1的声音信号控制装置的声音信号控制系统的概略图。图1所示的声音信号控制系统1设置于车辆，对例如驾驶员或者车内引导广播与乘坐者之间的声音输出进行控制。
声音信号控制系统1具备车辆10、声音信号控制装置20、车载麦克风30(以下，称为车载麦克30)、乘坐者H1佩戴的助听器40以及驾驶员H0佩戴的头戴式耳机50。车载麦克30以及头戴式耳机50相当于声音信号生成装置。
图2是概略地示出声音信号控制系统的结构的框图。如图2所示，声音信号控制装置20具备声音信号输入部21、无线通信部22、连接设定部23、放大处理部24、控制部25、存储部26。
声音信号输入部21被输入基于输入到车载麦克30的发声而产生的声音信号。
无线通信部22在与助听器40或者头戴式耳机50之间进行无线通信。
连接设定部23进行与乘坐车辆10且佩戴声音处理装置的乘坐者的声音处理装置(例如，乘坐者H1的助听器40)的连接设定。作为连接设定部23进行的连接设定，有作为通信对象的声音处理装置的设定、该装置的固有信息的获取(登记)等。连接设定部23使用CPU(Central Processing Unit，中央处理单元)、DSP(Digital Signal Processor，数字信号处理器)、FPGA(Field－Programmable Gate Array，现场可编程门阵列)等处理器而构成。
放大处理部24对输入到声音信号输入部21的声音信号实施放大处理。通过该放大处理，信号的振幅被放大，从声音处理装置输出的声音变大。放大处理部24使用放大器等来构成。
控制部25综合地控制搭载于声音信号控制装置20的各种构成要素的动作。控制部25具体而言具备CPU、DSP、FPGA等处理器、以及RAM(Random Access Memory，随机存取存储器)、ROM(Read Only Memory，只读存储器)等主存储部。控制部25将保存于存储部26的程序装载到作业区域来执行，通过程序的执行来控制各结构部等。
存储部26将与乘坐者能够佩戴的助听器、耳机(音频播放器)等声音处理装置有关的信息、例如每个机型的编解码信息以能够更新的方式保存。存储部26在物理上包括从RAM等易失性存储器、ROM等非易失性存储器、EPROM(Erasable Programmable ROM，可擦可编程只读存储器)、硬盘驱动器(HDD、Hard Disk Drive)以及可移动介质等选择出的存储介质。存储部26包括从硬盘驱动器(HDD，Hard Disk Drive)以及可移动介质等选择出的存储介质。此外，可移动介质例如为USB(Universal Serial Bus，通用串行总线)存储器、或者如CD(Compact Disc，压缩光盘)、DVD(Digital Versatile Disc，数字通用光盘)或者BD(Blu－ray(日本注册商标)Disc，蓝光光盘)那样的光盘记录介质。另外，也可以使用能够从外部佩戴的存储卡等计算机能够读取的记录介质来构成存储部26。在存储部26中，能够存储用于执行驾驶支援处理的动作的操作系统(Operating System：OS)、各种程序、各种表格、各种数据库等。在各种程序中，还包含本实施方式的模型更新处理程序。这些各种程序还能够记录于硬盘、闪存存储器、CD－ROM、DVD－ROM、柔性光盘等计算机能够读取的记录介质而广泛地流通。
另外，车辆10设置有能够与声音处理装置(助听器40)进行通信的传感器部11。传感器部11设置于车辆10的入口，如果例如为巴士，则设置于出入口。传感器部11将通过通信获取到的与声音处理装置有关的信息作为检测信号而输出到控制部25。
车载麦克30将收集声音而生成的声音信号输入到声音信号控制装置20(声音信号输入部21)。
助听器40具有无线通信部41、扬声器42以及模式设定部43。无线通信部41在与传感器部11之间或者与无线通信部22之间进行无线通信。
扬声器42将助听器40收集到的声音进行放大而输出。
模式设定部43根据从声音信号控制装置20接收的控制信号，将输出声音的模式的设定进行变更。在本实施方式1中，模式设定部43设定将收集到的声音进行放大并使扬声器42输出的通常输出模式、以及等待从声音信号控制装置20发送的声音信号的输入并输出与所输入的声音信号相应的声音的等待模式中的任意模式。在此，在等待模式下，将收集到的周围的声音的音量的放大率调低或者关闭。
助听器40存储自身的机型信息(个体编号)、声音信号的放大率、与编解码有关的信息等固有信息。此外，也可以不是声音信号的放大率，而使收听困难的程度、设定音量等能够计算应放大的程度的信息。
头戴式耳机50具有无线通信部51、扬声器52以及麦克风53(以下，简称为“麦克53”)。
无线通信部51在与无线通信部22之间进行无线通信。
传感器部11、无线通信部22、41、51使用NFC(Near Field Communication，近场通信)设备等来构成。
接着，参照图3，说明声音信号控制装置20进行的声音信号处理。图3是说明本公开的实施方式1的声音信号控制系统中的声音信号控制的流程的图。此外，在图3所示的处理中，将在车辆10中驾驶员向乘客(乘坐者)播报目的地、下一站的情况举为例子。
在步骤S101中，控制部25判断从传感器部11是否有与声音处理装置有关的检测信号的输入。控制部25在判断为从传感器部11没有检测信号的输入的情况(步骤S101：否)下，重复检测信号的确认处理。另一方面，控制部25在判断为从传感器部11有检测信号的输入的情况(步骤S101：是)下，转移到步骤S102。
在步骤S102中，连接设定部23根据检测信号，进行与声音处理装置(在此，为助听器40)的连接设定，开始该助听器40与声音信号控制装置20的通信。连接设定部23设定助听器40作为通信对象。此时，声音信号控制装置20在首次与该助听器40的通信的情况下，也可以执行助听器40的认证处理，执行从助听器40获取固有信息的初始登记处理。声音信号控制装置20在连接设定或者认证处理完成后，发送完成通知信号，使助听器40输出完成通知声音。以下，说明声音处理装置为助听器40的例子。
在步骤S103中，控制部25判断在声音信号输入部21或者无线通信部22中是否有声音信号的输入。在此，控制部25在判断为有声音信号的输入的情况(步骤S103：是)下，转移到步骤S104。控制部25在判断为没有声音信号的输入的情况(步骤S103：否)下，转移到步骤S109。
在步骤S104中，控制部25将使声音输出的模式变更的控制信号发送到助听器40。接收到该控制信号的助听器40将设定模式从通常输出模式变更到等待模式。
在步骤S105中，放大处理部24将所输入的声音信号的振幅进行放大。放大处理部24根据从助听器40获取的听力信息、或者与放大率有关的信息等的、助听器40单独具有的个人信息，将信号进行放大。
在步骤S106中，控制部25将引导开始声音信号的发送的发声开始信号发送到助听器40。助听器40当接收到发声开始信号时，使扬声器42输出之后接收的声音信号。
此外，关于步骤S105以及S106的处理，既可以先执行步骤S106的处理，也可以同时执行。
在步骤S107中，控制部25经由无线通信部22将放大后的声音信号发送到助听器40。在助听器40中，从扬声器42输出与接收到的声音信号相应的声音。在车辆10为巴士的情况下，例如，经由助听器40被播报下一站、直至该站为止的所需时间、当前地点，终点站等。
在步骤S108中，当驾驶员的发声结束时，控制部25将引导发声结束的发声结束信号发送到助听器40。助听器40当接收到发声结束信号时，使基于扬声器42发出的声音输出停止。
此外，由驾驶员进行的发声的开始以设置于驾驶员的周围、例如转向装置的发声按钮的按下、识别发声开始的词汇的声音输入等动作作为触发。另外，由驾驶员进行的发声的结束以设置于驾驶员的周围的发声结束按钮的按下、识别发声结束的词汇的声音输入等动作、或者从最终发声起的经过时间作为触发。除此之外，也可以在驾驶员的周围设置通话按钮，设定成在按压通话按钮的期间，声音输入成为有效。在设置通话按钮的情况下，在按下按钮后发送发声开始信号，当按钮的按下被解除时，发送发声结束信号。
在步骤S109中，控制部25判断是否结束与助听器40的通信。控制部25在判断为不结束与助听器40的通信而继续的情况下，返回到步骤S103。相对于此，控制部25在判断为结束与助听器40的通信的情况下，转移到步骤S110。
控制部25例如在通信开始后使声音信号控制装置20和助听器40定期地实施小容量的数据通信，在通信终断而数据未从助听器40到来的情况下，判断为结束通信。当乘坐者下车而该乘坐者在物理上远离车辆10时，与声音信号控制装置20之间的数据通信终断。控制部25根据该数据通信的状态，判断是否需要通信结束。
在步骤S110中，连接设定部23通过解除助听器40的连接设定，从而结束与助听器40的通信，结束处理。此时，在助听器40中，也与步骤S109同样地判断是否需要结束通信，在结束通信的情况下，模式设定部43将声音输出模式设定为通常输出模式。此外，助听器40也可以当在步骤S108中接收到发声结束信号之后，从等待模式切换到通常输出模式。
在以上说明的实施方式1中，构成为在乘坐者佩戴的声音处理装置与声音信号控制装置20之间进行通信，使作为通信对象的声音处理装置的扬声器输出由麦克风收集到的声音。根据本实施方式1，乘坐者佩戴的装置输出被输出到车厢内的声音，所以能够将声音传递给在车厢内佩戴声音处理装置的乘坐者。
(实施方式2)
接下来，参照图4，说明实施方式2。图4是概略地示出本公开的实施方式2的声音信号控制系统的结构的框图。此外，对与上述实施方式1的声音信号控制系统相同的结构附加相同的符号。
声音信号控制系统具备车辆10、声音信号控制装置20A、车载麦克30、乘坐者H1佩戴的助听器40以及驾驶员H0佩戴的头戴式耳机50。实施方式2的车辆10为巴士、出租车或者共享车辆中的任意车辆。
声音信号控制装置20A具备声音信号输入部21、无线通信部22、连接设定部23、放大处理部24、控制部25、存储部26A。存储部26A具有路径信息存储部261。例如、在车辆为巴士的情况下，在路径信息存储部261中预先保存有该巴士的行驶路径以及车站。
在此，基本的声音信号处理的流程遵循图3所示的流程图。在实施方式2中，步骤S107中的声音信号不是驾驶员的发声，而是存储于路径信息存储部261的路径信息。在步骤S107中，与车辆10的位置相应的路径的信息每次都被发送到声音处理装置，然后在声音处理装置中被输出。实施方式2中的发声开始信号以及发声结束信号在路径信息的声音信号的发送前后被发送。此外，在驾驶员有意地变更路径的情况下，与在实施方式1中说明的流程同样地，能够通过发声来播报。
在以上说明的实施方式2中，与实施方式1同样地，构成为在乘坐者佩戴的声音处理装置与声音信号控制装置20之间进行通信，使作为通信对象的声音处理装置的扬声器输出预先存储的路径信息。根据本实施方式2，乘坐者佩戴的装置输出被输出到车厢内的声音，所以能够将声音传递给在车厢内佩戴声音处理装置的乘坐者。
(实施方式3)
接下来，参照图5以及图6，说明实施方式3。图5是示出具备本公开的实施方式3的声音信号控制装置的声音信号控制系统的概略图。此外，对与上述实施方式1的声音信号控制系统相同的结构附加相同的符号。
图5所示的声音信号控制系统1A具备车辆10、声音信号控制装置20、车载麦克30、乘坐者H1佩戴的助听器40、驾驶员H0佩戴的头戴式耳机50以及服务器60。声音信号控制装置20和服务器60经由网络N收发信号。
服务器60根据来自声音信号控制装置20的请求，输出各种信息。在本实施方式3中，说明佩戴声音处理装置(在此为助听器40)的乘坐者的语言与驾驶员发声的语言不同的例子。此外，基本的声音信号处理的流程遵循图3所示的流程图。此外，在声音信号控制装置20中，登记有驾驶员发声的语言。
声音信号控制装置20在与助听器40进行通信时，从助听器40获取该助听器40的固有信息(固有编号)，发送到服务器60。服务器60从接收到的固有信息读取放大率、使用语言的信息。此时，服务器60在助听器40的佩戴者的使用语言与驾驶员发声的语言不同的情况下，将声音所表达的语言进行变换。在服务器60中，根据接收到的声音信号和使用语言的信息，将声音所表达的语言进行变换，将变换后的声音信号发送到声音信号控制装置20。即，在声音信号控制装置20中，当在声音信号输入部21或者无线通信部22中有来自驾驶员的发声声音的输入时，使服务器60变换语言，将变换后的声音信号进行放大而输出给助听器40。此时，声音信号控制装置20从服务器60获取与放大率有关的信息(听力信息或者放大率)。此外，如果通过初始登记而登记了放大率以及使用语言，则无需每次都获取固有信息。
另外，声音信号控制装置20当从服务器60接收到变换后的声音信号时，将发声开始信号发送给助听器40，将变换后的声音信号依次发送给助听器40。之后，声音信号控制装置20当判断为驾驶员的发声结束时，将发声结束信号发送给助听器40。
图6是说明本公开的实施方式3的声音信号控制系统中的声音信号控制的图。例如，在佩戴助听器40的乘坐者H1的使用语言为英语，驾驶员H0对麦克53发声“こんにちは。(你好。)”的情况下，由服务器60变换后的“Hello.(你好。)”这样的声音被输出到助听器40。
在以上说明的实施方式3中，与实施方式1同样地，构成为在乘坐者佩戴的声音处理装置与声音信号控制装置20之间进行通信，使作为通信对象的声音处理装置的扬声器输出由麦克风收集到的声音。根据本实施方式3，乘坐者佩戴的装置输出被输出到车厢内的声音，所以能够将声音传递给在车厢内佩戴声音处理装置的乘坐者。
进而，在实施方式3中，即使在发声方与听取方的语言不同的情况下，由服务器60变换语言，在助听器40等声音处理装置中通过变换后的语言来输出播报，所以也能够适当地传递发声。
此外，在实施方式3中，也可以在声音信号控制装置20进行助听器40的连接设定时，从固有信息参照使用语言的信息。此时，在使用语言与驾驶员发声的语言不同的情况下，控制部25将声音信号发送到服务器60，请求变换声音所表达的语言。在服务器60中，根据接收到的声音信号、以及语言信息，变换声音的语言，将变换后的声音信号发送到声音信号控制装置20。
另外，在实施方式3中，只要声音信号控制装置20具有语言变换的功能，就即使不访问服务器60来委托变换，也能够在声音信号控制装置20、助听器40以及头戴式耳机50之间，实施上述处理。
另外，在实施方式3中，能够利用从服务器60提供的信息来实施在实施方式2中说明的路径的引导。
另外，也可以将连接设定部23的功能设置于服务器60，通过服务器60的控制来中继声音信号控制装置20与助听器40之间的通信。
(实施方式4)
接下来，参照图7，说明实施方式4。图7是概略地示出本公开的实施方式4的声音信号控制系统的结构的框图。此外，对与上述实施方式1的声音信号控制系统相同的结构附加相同的符号。
图7所示的声音信号控制系统1B具备车辆10、声音信号控制装置20、车载麦克30、乘坐者H1佩戴的助听器40、驾驶员H0佩戴的头戴式耳机50、服务器60以及用户终端70。声音信号控制装置20、服务器60以及用户终端70经由网络N收发信号。在本实施方式4中，说明助听器40的佩戴者使用用户终端70的应用来利用共享车辆的例子。
用户终端70为用户所使用的计算机终端。作为用户终端70，例如可举出用户所拥有的智能手机、便携电话、平板终端、可穿戴式计算机等。用户终端70只要能够与服务器60交换信息，就可以为任意的终端。
以下，说明用户使用用户终端70来利用共享车辆的例子。用户(乘坐者H1)利用用户终端70的应用程序来委托调配车辆。此时，登记自身佩戴助听器40这一情况。此外，也可以通过助听器40与用户终端70的通信来检测佩戴助听器40的意思。由此，自身的调配车辆委托的信息与为助听器用户的意思的信息关联起来。进而，还能够登记助听器的制造商、型号、通信方式、或者登记针对驾驶员的要求。向驾驶员的要求能够通过向预先设定的项目的选中、或者用户的写入来登记。另外，在用户终端70中，还能够参照过去的调配车辆信息，从其一系列的信息制作本次的委托信息。
共享车辆的驾驶员在确认调配车辆信息时，识别助听器用户乘坐的情况。
在乘坐前的车辆等待的期间，将文本数据从服务器60发送到用户终端70，通过字符显示车辆的位置、直至抵达为止的时间、停车/出发时间等信息。这样，在用户为助听器40的佩戴者的情况下，不优先地发送声音，而优先地发送字符信息等视觉信息。
用户乘坐后的车辆10内的基本的声音信号处理的流程遵循图3所示的流程图。此外，在步骤S106中，也可以在将声音信号从声音信号控制装置20发送到助听器40时，与声音信号同时地，将与声音信号的内容相应的文本数据发送到用户终端70。利用字符信息等显示于用户终端70，从而能够更可靠地传递播报。此外，也可以从用户终端70发送文本数据，在设置于车辆10的导航系统等的显示画面显示与文本数据对应的信息。
另外，能够经由用户终端70将指示、要求从乘坐者传递给驾驶员。例如，经由服务器60将基于乘坐者输入到用户终端70的声音的声音信号发送到驾驶员佩戴的头戴式耳机50。头戴式耳机50使扬声器52输出基于接收到的声音信号的声音。作为指示或者要求，有“请求停车”、“变更行驶目的地”、“空调的调整”、“停在便利店”等。
在以上说明的实施方式4中，与实施方式1同样地，构成为在乘坐者佩戴的声音处理装置与声音信号控制装置20之间进行通信，使作为通信对象的声音处理装置的扬声器输出由麦克风收集到的声音。根据本实施方式4，乘坐者佩戴的装置输出被输出到车厢内的声音，所以能够将声音传递给在车厢内佩戴声音处理装置的乘坐者。
另外，在实施方式4中，驾驶员能够根据共享车辆的委托信息，事先掌握在乘坐者之中有佩戴助听器的用户，所以能够准备针对助听器用户的应对。其结果，驾驶员能够适当地将播报传递给乘坐者等，根据乘坐者来实施适当的应对。
此外，在实施方式1～4中，作为声音信号的发送目的地，以佩戴助听器40的乘坐者为例而进行了说明，但不限于助听器，还能够应用于与媒体播放器连接而输出声音的耳机、头戴式受话器等声音处理装置。
进一步的效果、变形例对于本领域技术人员而言能够容易地导出。本发明的更广泛的方式并不限定于如上那样表示且记述的特定的详细内容以及代表性的实施方式。因而，能够不超出由所附的权利要求书及其等同物定义的汇总的发明的概念精神或者范围，而进行各种变更。

Claims (20)

1.一种声音信号控制装置，其中，
所述声音信号控制装置具备具有硬件的处理器，
所述处理器根据输出声音信号的声音处理装置中的声音输出的设定信息来处理由生成声音信号的声音信号生成装置生成的声音信号，使所述声音处理装置输出与处理后的声音信号相应的声音。
2.根据权利要求1所述的声音信号控制装置，其中，
所述处理器将由所述声音信号生成装置生成的声音信号进行放大，
使所述声音处理装置输出与放大后的声音信号相应的声音。
3.根据权利要求1或者2所述的声音信号控制装置，其中，
所述处理器使所述声音处理装置输出将输入到所述声音信号生成装置的声音所表达的语言变换为在所述声音处理装置中设定的语言后的声音。
4.根据权利要求1～3中的任意一项所述的声音信号控制装置，其中，
所述处理器在从所述声音信号生成装置有声音信号的输入的情况下，将所述声音处理装置中的声音输出的模式设定为等待输入从该声音信号控制装置发送的声音信号的等待模式。
5.根据权利要求4所述的声音信号控制装置，其中，
在所述声音处理装置设定为所述等待模式的状态下，所述处理器将引导开始声音信号的发送的发声开始信号发送到所述声音处理装置，
所述处理器在判断为由所述声音信号生成装置进行的声音信号的生成结束的情况下，将发声结束信号发送到所述声音处理装置。
6.根据权利要求1～5中的任意一项所述的声音信号控制装置，其中，
在与所述声音处理装置的通信开始后，在该声音信号控制装置与所述声音处理装置之间进行通信，
所述处理器根据与所述声音处理装置之间的通信状态判断是否结束与所述声音处理装置的通信。
7.一种声音信号控制系统，具备：
第一装置，具备具有硬件的第一处理器；
第二装置，具备具有硬件的第二处理器；以及
第三装置，具备具有硬件的第三处理器，
所述第一处理器根据收集到的声音来生成声音信号，并发送到外部，
所述第二处理器输出基于所述声音信号的声音，
所述第三处理器根据所述第二装置中的声音输出的设定信息来处理由所述第一处理器生成的声音信号，使所述第二装置输出与处理后的声音信号相应的声音。
8.根据权利要求7所述的声音信号控制系统，其中，
所述第三处理器根据在所述第二装置中设定的放大率将由所述第一装置生成的声音信号进行放大，使所述第二装置输出与放大后的声音信号相应的声音。
9.根据权利要求7或者8所述的声音信号控制系统，其中，
所述第三处理器使所述第二装置输出将输入到所述第一装置的声音所表达的语言变换为在所述第二装置中设定的语言后的声音。
10.根据权利要求7～9中的任意一项所述的声音信号控制系统，其中，
所述第三处理器在从所述第一装置有声音信号的输入的情况下，将所述第二装置中的声音输出的模式设定为等待输入从第三装置发送的声音信号的等待模式。
11.根据权利要求10所述的声音信号控制系统，其中，
在所述第二装置设定为所述等待模式的状态下，所述第三处理器将引导开始声音信号的发送的发声开始信号发送到所述第二装置，
所述第三处理器在判断为由所述第一装置进行的声音信号的生成结束的情况下，将发声结束信号发送到所述第二装置。
12.根据权利要求7～11中的任意一项所述的声音信号控制系统，其中，
所述第二处理器以及所述第三处理器在所述第二装置与所述第三装置之间进行数据通信，
所述第三处理器根据与所述第二装置之间的数据通信的状态来判断是否结束通信。
13.根据权利要求10所述的声音信号控制系统，其中，
所述第二装置为助听器，
所述第二处理器设定所述等待模式和将收集到的声音进行放大而输出的通常输出模式中的任意模式。
14.根据权利要求13所述的声音信号控制系统，其中，
所述等待模式调低收集到的声音的放大率、或者关闭收集到的声音的输出。
15.一种存储有声音信号控制程序的计算机可读取的存储介质，其中，
所述声音信号控制程序使具有硬件的处理器执行如下处理：
根据输出声音信号的声音处理装置中的声音输出的设定信息来处理由生成声音信号的声音信号生成装置生成的声音信号，使所述声音处理装置输出与处理后的声音信号相应的声音。
16.根据权利要求15所述的存储有声音信号控制程序的计算机可读取的存储介质，其中，
所述声音信号控制程序使所述处理器执行如下处理：
将由生成声音信号的声音信号生成装置生成的声音信号进行放大，
使所述声音处理装置输出与放大后的声音信号相应的声音。
17.根据权利要求15或者16所述的存储有声音信号控制程序的计算机可读取的存储介质，其中，
所述声音信号控制程序使所述处理器执行如下处理：
使所述声音处理装置输出将输入到所述声音信号生成装置的声音所表达的语言变换为在所述声音处理装置中设定的语言后的声音。
18.根据权利要求15～17中的任意一项所述的存储有声音信号控制程序的计算机可读取的存储介质，其中，
所述声音信号控制程序使所述处理器执行如下处理：
在从所述声音信号生成装置有声音信号的输入的情况下，将所述声音处理装置中的声音输出的模式设定为等待从具有该处理器的声音信号控制装置发送的声音信号的输入的等待模式。
19.根据权利要求18所述的存储有声音信号控制程序的计算机可读取的存储介质，其中，
所述声音信号控制程序使所述处理器执行如下处理：
在所述声音处理装置设定为所述等待模式的状态下，将引导开始声音信号的发送的发声开始信号发送到所述声音处理装置，
在判断为由所述声音信号生成装置进行的声音信号的生成结束的情况下，将发声结束信号发送到所述声音处理装置。
20.根据权利要求15～19中的任意一项所述的存储有声音信号控制程序的计算机可读取的存储介质，其中，
所述声音信号控制程序使所述处理器执行如下处理：
在与所述声音处理装置的通信开始后，在具有该处理器的声音信号控制装置与所述声音处理装置之间进行通信，
根据与所述声音处理装置之间的通信状态来判断是否结束与所述声音处理装置的通信。
CN202011226822.3A 2020-01-23 2020-11-06 声音信号控制装置、声音信号控制系统以及计算机可读取的记录介质 Pending CN113163299A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020-009262 2020-01-23
JP2020009262A JP7338489B2 (ja) 2020-01-23 2020-01-23 音声信号制御装置、音声信号制御システム及び音声信号制御プログラム

Publications (1)

Publication Number Publication Date
CN113163299A true CN113163299A (zh) 2021-07-23

Family

ID=76882339

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011226822.3A Pending CN113163299A (zh) 2020-01-23 2020-11-06 声音信号控制装置、声音信号控制系统以及计算机可读取的记录介质

Country Status (3)

Country Link
US (1) US11501775B2 (zh)
JP (1) JP7338489B2 (zh)
CN (1) CN113163299A (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7338489B2 (ja) * 2020-01-23 2023-09-05 トヨタ自動車株式会社 音声信号制御装置、音声信号制御システム及び音声信号制御プログラム
WO2024075434A1 (ja) * 2022-10-07 2024-04-11 ソニーグループ株式会社 情報処理システム、デバイス、情報処理方法及びプログラム

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140324421A1 (en) * 2013-04-25 2014-10-30 Samsung Electronics Co., Ltd. Voice processing apparatus and voice processing method
CN104662874A (zh) * 2013-05-29 2015-05-27 旭化成微电子株式会社 控制装置、控制方法以及程序
CN105047005A (zh) * 2015-06-24 2015-11-11 无锡市崇安区科技创业服务中心 一种公交车自动报站装置
JP2015226090A (ja) * 2014-05-26 2015-12-14 東芝テック株式会社 難聴者支援装置、磁気ループコントローラ、および対面業務装置
JP2016063439A (ja) * 2014-09-19 2016-04-25 日産自動車株式会社 車室内会話装置
CN107333200A (zh) * 2017-07-24 2017-11-07 歌尔科技有限公司 一种翻译耳机收纳盒、无线翻译耳机和无线翻译系统
CN206932441U (zh) * 2017-06-22 2018-01-26 中车唐山机车车辆有限公司 照明系统和列车照明系统
US20180068672A1 (en) * 2016-09-08 2018-03-08 Continental Automotive Systems, Inc. In-car communication howling prevention
CN109389852A (zh) * 2017-08-08 2019-02-26 南京海印通信设备有限公司 一种盲人乘坐公交车的车内报站辅助装置
CN109614628A (zh) * 2018-11-16 2019-04-12 广州市讯飞樽鸿信息技术有限公司 一种基于智能硬件的翻译方法与翻译系统
US20190228770A1 (en) * 2016-08-24 2019-07-25 Zte Corporation Voice control method, device, and computer storage medium
CN110073678A (zh) * 2016-12-19 2019-07-30 三星电子株式会社 用于控制扬声器的电子设备及其操作方法

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10228157B3 (de) * 2002-06-24 2004-01-08 Siemens Audiologische Technik Gmbh Hörgerätesystem mit einem Hörgerät und einer externen Prozessoreinheit
US7257372B2 (en) * 2003-09-30 2007-08-14 Sony Ericsson Mobile Communications Ab Bluetooth enabled hearing aid
JP2006115368A (ja) * 2004-10-18 2006-04-27 Clarion Co Ltd 車載装置、車載装置の制御方法及び制御プログラム
JP2008077601A (ja) * 2006-09-25 2008-04-03 Toshiba Corp 機械翻訳装置、機械翻訳方法および機械翻訳プログラム
KR102052153B1 (ko) * 2013-02-15 2019-12-17 삼성전자주식회사 보청기를 제어하는 휴대 단말 및 방법
US10271265B2 (en) * 2013-05-08 2019-04-23 Cellcontrol, Inc. Detecting mobile devices within a vehicle based on cellular data detected within the vehicle
US10805861B2 (en) * 2013-05-08 2020-10-13 Cellcontrol, Inc. Context-aware mobile device management
US10652673B2 (en) * 2013-05-15 2020-05-12 Gn Hearing A/S Hearing instrument with an authentication protocol
US9386381B2 (en) * 2014-06-11 2016-07-05 GM Global Technology Operations LLC Vehicle communication with a hearing aid device
KR102582600B1 (ko) * 2015-12-07 2023-09-25 삼성전자주식회사 전자 장치 및 그의 동작 방법
KR102448786B1 (ko) * 2016-03-10 2022-09-30 삼성전자주식회사 전자 장치 및 그의 동작 방법
WO2018061956A1 (ja) * 2016-09-30 2018-04-05 ヤマハ株式会社 会話アシスト装置および会話アシスト方法
WO2018099677A1 (en) * 2016-11-29 2018-06-07 Jaguar Land Rover Limited Improvements relating to hearing assistance in vehicles
KR102443079B1 (ko) * 2017-12-06 2022-09-14 삼성전자주식회사 전자 장치 및 그의 제어 방법
JP2020044879A (ja) * 2018-09-14 2020-03-26 トヨタ自動車株式会社 車両用音入出力装置
CN112397062B (zh) * 2019-08-15 2024-10-18 华为技术有限公司 语音交互方法、装置、终端及存储介质
JP7338489B2 (ja) * 2020-01-23 2023-09-05 トヨタ自動車株式会社 音声信号制御装置、音声信号制御システム及び音声信号制御プログラム

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140324421A1 (en) * 2013-04-25 2014-10-30 Samsung Electronics Co., Ltd. Voice processing apparatus and voice processing method
CN104662874A (zh) * 2013-05-29 2015-05-27 旭化成微电子株式会社 控制装置、控制方法以及程序
JP2015226090A (ja) * 2014-05-26 2015-12-14 東芝テック株式会社 難聴者支援装置、磁気ループコントローラ、および対面業務装置
JP2016063439A (ja) * 2014-09-19 2016-04-25 日産自動車株式会社 車室内会話装置
CN105047005A (zh) * 2015-06-24 2015-11-11 无锡市崇安区科技创业服务中心 一种公交车自动报站装置
US20190228770A1 (en) * 2016-08-24 2019-07-25 Zte Corporation Voice control method, device, and computer storage medium
US20180068672A1 (en) * 2016-09-08 2018-03-08 Continental Automotive Systems, Inc. In-car communication howling prevention
CN110073678A (zh) * 2016-12-19 2019-07-30 三星电子株式会社 用于控制扬声器的电子设备及其操作方法
CN206932441U (zh) * 2017-06-22 2018-01-26 中车唐山机车车辆有限公司 照明系统和列车照明系统
CN107333200A (zh) * 2017-07-24 2017-11-07 歌尔科技有限公司 一种翻译耳机收纳盒、无线翻译耳机和无线翻译系统
CN109389852A (zh) * 2017-08-08 2019-02-26 南京海印通信设备有限公司 一种盲人乘坐公交车的车内报站辅助装置
CN109614628A (zh) * 2018-11-16 2019-04-12 广州市讯飞樽鸿信息技术有限公司 一种基于智能硬件的翻译方法与翻译系统

Also Published As

Publication number Publication date
US11501775B2 (en) 2022-11-15
JP7338489B2 (ja) 2023-09-05
US20210233526A1 (en) 2021-07-29
JP2021118396A (ja) 2021-08-10

Similar Documents

Publication Publication Date Title
EP1901282B1 (en) Speech communications system for a vehicle
US9489966B1 (en) Discreet emergency response
US20180204570A1 (en) Adaptive infotainment system based on vehicle surrounding and driver mood and/or behavior
JP2019193262A (ja) 音声入力装置
JP5413321B2 (ja) 通信システム、車載端末、および携帯端末
CN113163299A (zh) 声音信号控制装置、声音信号控制系统以及计算机可读取的记录介质
CN102308182A (zh) 用于个人导航装置的车基系统接口
JP7458013B2 (ja) 音声処理装置、音声処理方法および音声処理システム
JP2010130223A (ja) 音声操作システムおよび音声操作方法
CN102906811B (zh) 用于调节包括扬声器和麦克风的语音识别系统的方法及语音识别系统
CN113273223A (zh) 基于混合车载扬声器和耳机的声学增强现实系统
JP2001013994A (ja) 複数搭乗者機器用音声制御装置、複数搭乗者機器用音声制御方法及び車両
US11974103B2 (en) In-car headphone acoustical augmented reality system
JP2018087871A (ja) 音声出力装置
JP2016225764A (ja) 車載システム
JP5037041B2 (ja) 車載用音声認識装置及び音声コマンド登録方法
KR101579530B1 (ko) 자동차, 자동차의 음성 인식 제어 장치 및 방법
US20170286060A1 (en) Method for song suggestion sharing
KR20160069244A (ko) 마이크로폰을 구비하는 차량
US20230318727A1 (en) Vehicle and method of controlling the same
CN116110406A (zh) 车内车外沟通方法、系统、装置及车辆
WO2018047294A1 (ja) 車両音声録音制御装置および車両音声録音制御システム
JP2020039048A (ja) 音声収集装置および音声収集方法
KR20220060055A (ko) 차량 및 차량의 음성 명령 제어 방법
CN118636815A (zh) 一种车内最佳听音位控制方法及相关装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210723

RJ01 Rejection of invention patent application after publication