CN111199736A - 语音识别辅助装置以及语音识别辅助程序 - Google Patents

语音识别辅助装置以及语音识别辅助程序 Download PDF

Info

Publication number
CN111199736A
CN111199736A CN201911080965.5A CN201911080965A CN111199736A CN 111199736 A CN111199736 A CN 111199736A CN 201911080965 A CN201911080965 A CN 201911080965A CN 111199736 A CN111199736 A CN 111199736A
Authority
CN
China
Prior art keywords
voice
state
light emission
speech recognition
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911080965.5A
Other languages
English (en)
Inventor
铃木惠子
相原圣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of CN111199736A publication Critical patent/CN111199736A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/20—Speech recognition techniques specially adapted for robustness in adverse environments, e.g. in noise, of stress induced speech
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/78—Detection of presence or absence of voice signals
    • G10L25/84—Detection of presence or absence of voice signals for discriminating voice from noise
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B45/00—Circuit arrangements for operating light-emitting diodes [LED]
    • H05B45/20—Controlling the colour of the light
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10—Controlling the light source
    • H05B47/105—Controlling the light source in response to determined parameters
    • H05B47/115—Controlling the light source in response to determined parameters by determining the presence or movement of objects or living beings
    • H05B47/12—Controlling the light source in response to determined parameters by determining the presence or movement of objects or living beings by detecting audible sound
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B60R16/0373—Voice control
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Abstract

本公开涉及语音识别辅助装置以及语音识别辅助程序。语音识别辅助装置(100‑1)具备发光部(4)、声音检测部(1)以及发光控制部(3‑1)，所述发光控制部(3‑1)基于语音等级、噪声等级和阈值，判定声音检测部的周围环境是否处于适合语音的识别的状态，在判定为声音检测部的周围环境处于适合语音的识别的状态的情况下，使发光部(4)的发光状态成为第1状态，在判定为声音检测部的周围环境并非处于适合语音的识别的状态的情况下，使发光部(4)的发光状态变化为与第1状态不同的第2状态。

Description

语音识别辅助装置以及语音识别辅助程序
技术领域
本发明涉及辅助(支援)基于语音识别装置的语音识别功能的语音识别辅助装置以及语音识别辅助程序。
背景技术
日本特开2014-178339中公开了如下技术：当开关在说话者希望与外部对话的定时(timing)被按下时，与该开关的操作联动地进行噪声压制(降噪)的处理，并且使通知能说话这一情况的灯点亮。开关是使噪声压制电路启动的启动单元。
发明内容
然而，日本特开2014-178339所公开的技术无法将是否是由于噪声等级(level)相对高于语音等级而不适合语音识别的环境通知给说话者，所以即使在不适合语音识别的环境下，开关被按下时，也会向说话者通知是能说话的状态。存在如下问题：在那样的环境下说话(发出声音)，很可能不能准确地识别出语音，因此需要重复发声。
本发明是鉴于上述之处而做出的，其目的在于使发声主体掌握是否是适合语音识别的环境。
为了解决上述问题，本发明的实施方式涉及的语音识别辅助装置具备：发光部；声音检测部；以及发光控制部，其基于表示由所述声音检测部检测出的人的语音的等级的语音等级、表示由所述声音检测部检测出的噪声的等级的噪声等级、和判定所述声音检测部的周围环境处于适合所述语音的识别的状态这一情况的阈值，判定所述声音检测部的周围环境是否处于适合所述语音的识别的状态，在判定为所述声音检测部的周围环境处于适合所述语音的识别的状态的情况下，使所述发光部的发光状态成为第1状态，在判定为所述声音检测部的周围环境并非处于适合所述语音的识别的状态的情况下，使所述发光部的发光状态变化为与所述第1状态不同的第2状态。
根据本实施方式，能够让人根据发光部的发光状态来掌握是否是适合语音识别的环境。另外，由于能够让人掌握是否是适合语音识别的环境，因而能够抑制人的认知负荷的增加。
另外，在本实施方式中，也可以构成为，所述发光控制部除了所述语音等级和所述噪声等级之外还基于从车辆获得的车辆信息，判定所述车辆内的环境是否处于适合所述语音的识别的状态。
根据本实施方式，即使在噪声等级高的情况下，也能够使语音识别的精度提高，提供有效利用了语音识别装置的舒适的驾驶环境。
另外，在本实施方式中，也可以构成为，所述发光控制部在基于所述车辆信息判定为所述车辆并非在行驶期间时，判定为所述车辆内的环境处于适合所述语音的识别的状态。
根据本实施方式，搭乘者能够无需在意发光部的发光状态地利用语音识别装置。
另外，在本实施方式中，也可以构成为，所述发光控制部在判定为所述车辆并非在行驶期间时，使所述发光部熄灭。
根据本实施方式，能够抑制发光部的发光所需的功耗。
本发明的其他实施方式能够作为语音识别辅助程序来实现。
根据本发明，实现能够使发声主体掌握是否是适合语音识别的环境这一效果。
附图说明
以下，参照附图对本发明的示例性实施方式的特征、优点以及技术和产业意义进行说明，在附图中相同的附图标记表示相同的要素，并且其中：
图1是表示本发明的实施方式1涉及的语音识别辅助装置的构成例的图。
图2是用于对本发明的实施方式1涉及的语音识别辅助装置的工作进行说明的时序图。
图3是用于对本发明的实施方式1涉及的语音识别辅助装置的工作进行说明的流程图。
图4是表示发光状态对应表的第1例的图。
图5是表示发光状态对应表的第2例的图。
图6是表示用于实现本发明的实施方式1涉及的语音识别辅助装置的硬件结构例的图。
图7是表示本发明的实施方式2涉及的语音识别辅助装置的构成例的图。
图8是用于对本发明的实施方式2涉及的语音识别辅助装置的工作进行说明的时序图。
图9是用于对本发明的实施方式2涉及的语音识别辅助装置的工作进行说明的流程图。
图10是表示用于实现本发明的实施方式2涉及的语音识别辅助装置的硬件结构例的图。
具体实施方式
以下，参照附图，对具体实施方式进行说明。
实施方式1.
图1是表示本发明的实施方式1涉及的语音识别辅助装置的构成例的图。“语音(音声)”是“人所发出的声音”(《广辞苑》第六版)。语音识别辅助装置100-1是辅助基于语音识别装置200的语音识别功能的装置。语音识别装置200是识别车辆1000内存在的人所发出的语音并进行特定的工作的装置。特定的工作例如是导航装置的语音操作、向电话机的自动呼叫发起等。为了使语音识别装置200正确地识别语音，需要是语音等级高于噪声等级的环境。“噪声”是语音以外的声音，例如是由行驶中的车辆1000的轮胎与路面的摩擦引起而发出的路面噪声、在行驶中的车辆1000上产生的风噪、雨落在车辆1000的挡风玻璃等上而发出的声音、从车辆1000内的音响设备发出的音乐等。噪声等级是表示噪声的大小的指标，是以[dB](分贝)为单位所表示的噪声的声压级(level)。语音等级是表示语音的大小的指标，是以[dB]为单位所表示的语音的声压级。以下，为了简化说明，有时将“车辆1000”简称为“车辆”。
相对于语音等级，噪声等级变得越高，语音识别装置200越难以识别语音，或者将语音内容误识别的可能性越高。由语音识别装置200对语音的识别根据相对于噪声等级的语音等级的比率(信噪比(S/N比))而变化。例如，在车辆的速度处于低速域(例如时速30km/h以下)的情况下，噪声等级抑制于车辆内的搭乘者、即驾驶员、同乘者不感觉刺耳(不适)的等级。因此，在这种环境下，即使用较小的声音发声的情况下，语音识别装置200能够进行语音识别的可能性也会升高。另一方面，在车辆的速度处于高速域(例如时速80km/h以上)的情况下，噪声等级达到搭乘者感觉刺耳的等级。因此，在这种环境下，即使用较大的声音发声的情况下，语音识别装置200能够进行语音识别的可能性也会下降。如此，根据车辆内的信噪比，语音识别的识别率发生变化。因此，为了使语音识别装置200的语音识别功能正常发挥，向搭乘者通知是否是不会受噪声的影响而能够进行语音识别的环境是有效的。
在日本特开2014-178339所公开的技术中，能够与开关的操作联动地进行噪声压制的处理，并且使通知能说话这一情况的灯点亮。然而，在日本特开2014-178339所公开的技术中，无法将是否是不适合语音识别的环境通知给说话者。在作为另一文献的日本特开平11-316598中，公开了如下技术：为了让人判断是否是不会受噪声的影响而能够进行语音识别的环境，将噪声值、信噪比(signal-to-noise ratio)等显示于显示部。根据该技术，能够将噪声等级、信噪比等的数值可视化地提供给作为语音的发声主体的人。然而，难以让人直观地掌握所显示的数值是否是适合语音识别的值。另外，在作为另一文献的日本特开2006-227499中，公开了将说话音量和噪声音量双方进行对比并进行图表显示的技术。根据该技术，能够使发声主体的人掌握以什么程度的音量说话为好。然而，在相对于所显示的噪声音量，说话音量较小的情况下，人不得不调整说话音量以使说话音量超过噪声音量。因此，人在要掌握所显示的说话音量等方面的认知负荷趋于增加。此处的认知负荷指的是，人在认知所显示的说话音量以及噪声音量时的负担。另外，在作为另一文献的日本专利第5075664中，公开了基于利用者的语音强度等级来推定从麦克风到利用者的距离并将推定出的推定距离提示给利用者的技术。根据该技术，能够将从麦克风到利用者的距离是否是能够进行语音识别的距离提供给利用者。然而，在该技术中，无法掌握从人到麦克风的实际距离与推定距离之差，因而人总是需要一边确认推定距离一边调整与麦克风的距离。因此，人的对于推定距离的得知的认知负荷趋于增加。
鉴于这种问题，语音识别辅助装置100-1构成为能够抑制人的认知负荷的增加并且能够让人掌握是否是适合语音识别的环境。以下，说明语音识别辅助装置100-1的构成例，之后依次对语音识别辅助装置100-1的工作进行说明。
回到图1，语音识别辅助装置100-1具备声音检测部1、声音等级算出部2以及发光控制部3-1。声音检测部1具备语音检测部11以及噪声检测部12。语音检测部11是语音检测用麦克风，其将车辆内的搭乘者所发出语音作为振动波形进行检测，并将表示检测到的振动波形的信号作为语音信息输出。噪声检测部12是噪声检测用麦克风，其将车辆内的噪声作为振动波形进行检测，并将表示检测到的振动波形的信号作为噪声信息输出。此外，虽然在语音识别辅助装置100-1中利用了语音检测部11以及噪声检测部12，但是声音检测部1也可以由一个麦克风构成。在该情况下，声音检测部1将由一个麦克风检测出的声音的振动波形的频率分量例如用高速傅立叶变换、带通滤波器等进行频带分割，输出语音信号和噪声信号的各自的信息。解析由一个麦克风检测出的声音的技术例如像日本特开2016-174376、日本特开2013-169221等所公开的那样是公知技术，因此省略其详细的说明。
声音等级算出部2具备语音等级算出部21以及噪声等级算出部22。语音等级算出部21基于从语音检测部11输出的语音信息，算出语音的振动波形级，将算出的振动波形级作为语音等级信息进行输出。振动波形级的单位是[dB]。噪声等级算出部22基于从噪声检测部12输出的噪声信息，算出噪声的振动波形级，将算出的振动波形级作为噪声等级信息进行输出。算出声音等级的技术例如像日本特开2015-114270、日本特开2010-103853等所公开的那样是公知技术，因此省略其详细的说明。
发光控制部3-1具备阈值生成部31、环境判定部32以及发光状态变更部33。阈值生成部31基于从语音识别装置200输出的信噪比信息201，生成用于判定车辆内的环境处于适合语音的识别的状态这一情况的阈值。信噪比表示相对于噪声等级的语音等级的比率。信噪比信息201是用于判定语音识别装置200所取得的语音等级是否是能够语音识别的等级的信息。
环境判定部32基于在阈值生成部31中生成的阈值、和在噪声等级算出部22中算出的噪声等级信息，判定车辆内的环境是否处于适合语音的识别的状态，并将表示判定结果的判定结果信息输出。判定结果信息是表示车辆内的环境处于适合语音的识别的状态的信息、或者表示车辆内的环境并非处于适合语音的识别的状态的信息。
发光状态变更部33基于从语音等级算出部21输出的语音等级信息和从环境判定部32输出的判定结果信息，例如输出用于使发光部4的发光状态变化的调光信息。调光信息例如是：指定发光部4的光的强度等级的信息；指定发光部4的色温的信息；使发光部4成为点亮状态、闪烁状态或者熄灭状态的指令信息等。
发光部4是能够基于从发光状态变更部输出的调光信息来调节色温和亮度中的至少一方的发光二极管。此外，发光部4不限定于发光二极管，例如也可以为有机电致发光元件、激光二极管元件、小型白炽灯泡等。发光部4例如设置在车辆内的搭乘者可见的位置。车辆内的搭乘者可见的位置例如为驾驶席前的仪表盘、仪表板(dashboard)、门、转向器、座椅等。此外，发光部4不限定于为了通知车辆内的环境是否处于适合语音的识别的状态而专门设置的发光单元，也可以应用车辆内的现有的照明单元。现有的照明单元例如是装饰光用灯、室内灯、脚底灯、门灯、顶灯等。通过应用现有的照明单元，相比于设置专用的照明单元的情况，车辆的设计较容易，另外也不需要进行与发光单元连接的配线的引绕。因此，能够降低车辆的制造成本。
接着，使用图2至图5来说明语音识别辅助装置100-1的工作。图2是用于对本发明的实施方式1涉及的语音识别辅助装置的工作进行说明的时序图。图3是用于对本发明的实施方式1涉及的语音识别辅助装置的工作进行说明的流程图。在语音等级算出部21中，基于语音信息，算出语音等级信息(步骤S1)，在噪声等级算出部22中，基于噪声信息，算出噪声等级信息(步骤S2)。向发光状态变更部33输入语音等级信息，另外向环境判定部32输入噪声等级信息。
环境判定部32基于噪声等级信息和阈值信息，判定噪声等级是否超过了阈值(步骤S3)。在判定的结果为噪声等级没有超过阈值的情况下(步骤S3：否)，环境判定部32将表示车辆内的环境处于适合语音的识别的状态的判定结果信息向发光状态变更部33进行输出。被输入了该判定结果信息的发光状态变更部33基于判定结果信息以及语音等级信息，判定车辆内的搭乘者是否正在说话(步骤S4)。例如，在语音等级低于特定的等级因而等于没有检测到语音的状态时，发光状态变更部33判定为车辆内的搭乘者没在说话(步骤S4：否)。
在该情况下，发光状态变更部33判定为车辆内的环境适合语音识别、且在进一步等待发声(步骤S5)。这样进行了判定的发光状态变更部33为了将能够语音识别因而正在等待发声这一情况通知给搭乘者，例如使用发光状态对应表，输出调光信息。此处的调光信息是控制发光部4的发光状态以使得发光部4的状态成为“发光状态A”的信息(步骤S6)。关于发光状态对应表的详情，会在后面进行说明。
回到步骤S4，例如在语音等级大于等于特定的等级因而是检测到了语音的状态时，发光状态变更部33判定为车辆内的搭乘者正在说话(步骤S4：是)。
在该情况下，发光状态变更部33判定为在车辆内适合语音识别的环境下语音识别装置200正在识别语音(步骤S7)。这样进行了判定的发光状态变更部33为了将语音识别装置200正在进行语音识别这一情况通知给搭乘者，使用前述的发光状态对应表，输出调光信息。此处的调光信息是控制发光部4的发光状态以使得发光部4的状态成为“发光状态B”的信息(步骤S8)。
回到步骤S3，在噪声等级超过了阈值的情况下(步骤S3：是)，环境判定部32将表示车辆内的环境并非处于适合语音的识别的状态的判定结果信息向发光状态变更部33进行输出。被输入了该判定结果信息的发光状态变更部33判定为由于车辆内的环境并非处于适合语音的识别的状态因而需要促使搭乘者抑制(停止、避免)发声(步骤S9)。这样进行了判定的发光状态变更部33为了促使人抑制发声，使用前述的发光状态对应表，输出调光信息。此处的调光信息是控制发光部4的发光状态以使得发光部4的状态成为“发光状态C”的信息(步骤S10)。
图4是表示发光状态对应表的第1例的图。在图4所示的发光状态对应表33A中，关联有多个发光状态变更部33的判定结果和发光部4的发光状态。判定结果为“发声等待中”时，与其对应的发光状态为“蓝色”(发光状态A)。发光状态对应表33A的发光状态A为第1状态。判定结果为“语音检测中”时，与其对应的发光状态为“绿色”(发光状态B)。判定结果为“发声抑制中”时，与其对应的发光状态为“红色”(发光状态C)。发光状态对应表33A的发光状态C为第2状态。此外，这些发光状态所对应的颜色是一例，只要是能够将车辆内的环境是否处于适合语音的识别的状态通知给搭乘者的颜色即可，不限定于这些。
在此虽然说明了使发光颜色变化的例子，但只要能成为至少让搭乘者能够判别是“发声等待中”、“语音检测中”、“发声抑制中”中的某一方那样的发光状态即可，因此，如图5所示，也可以构成为使发光部4的点亮状态变化。图5是表示发光状态对应表的第2例的图。与图4所示的发光状态对应表33A的不同之处在于，在图5所示的发光状态对应表33B中，与“发声等待中”对应的发光状态成为“点亮”(发光状态A)，与“语音检测中”对应的发光状态成为“闪烁”(发光状态B)，与“发声抑制中”对应的发光状态成为“熄灭”(发光状态C)。发光状态对应表33B的发光状态A为第1状态。发光状态对应表33B的发光状态C为第2状态。
此外，发光状态变更部33也可以除了发光状态对应表33A以及发光状态对应表33B之外，例如还预先存储针对车辆内的环境是否处于适合语音的识别的状态的判定结果来按各发光状态换算发光颜色、发光强度等的对应关系的换算式，使用与判定结果对应的换算式，变更发光状态。
图6是表示用于实现本发明的实施方式1涉及的语音识别辅助装置的硬件结构例的图。语音识别辅助装置100-1能够通过CPU(Central Processing Unit)、系统LSI(LargeScale Integration)等处理器41-1；由RAM(Random Access Memory)、ROM(Read OnlyMemory)等构成的存储器42-1；以及输入输出接口43-1来实现。此外，处理器41-1也可以是微型计算机、DSP(Digital Signal Processor)这样的运算单元。处理器41-1、存储器42-1以及输入输出接口43-1连接于总线44-1，能够经由总线44-1相互进行信息的递送。输入输出接口43-1在语音识别辅助装置100-1与语音识别装置200及发光部4之间进行信息的收发(接收、发送)。在实现语音识别辅助装置100-1的情况下，预先将语音识别辅助装置100-1用的程序存储于存储器42-1，由处理器41-1执行该程序，由此，声音等级算出部2以及发光控制部3-1得以实现。语音识别辅助装置100-1用的程序是使计算机执行判定步骤和发光控制步骤的语音识别辅助程序。判定步骤是如下处理：基于表示在车辆内检测出的人的语音的等级的语音等级、表示在车辆内检测出的噪声的等级的噪声等级、和判定车辆内的环境处于适合语音的识别的状态这一情况的阈值，判定车辆内的环境是否处于适合语音的识别的状态。发光控制步骤是如下处理：在通过判定步骤判定为车辆内的环境处于适合语音的识别的状态的情况下，使设置在车辆内的发光部的发光状态成为第1状态，在通过判定步骤判定为车辆内的环境并非处于适合语音的识别的状态的情况下，使发光部的发光状态变化为与第1状态不同的第2状态。
如以上说明的那样，实施方式1涉及的语音识别辅助装置100-1具备发光控制部，该发光控制部在判定为车辆内的环境处于适合语音的识别的状态的情况下，使发光部的发光状态成为第1状态，在判定为车辆内的环境并非处于适合语音的识别的状态的情况下，使发光部的发光状态变化为与第1状态不同的第2状态。根据该构成，车辆的搭乘者能够根据发光部的发光状态掌握是否是适合语音识别的环境。另外，由于能够掌握是否是适合语音识别的环境，因此与前述的现有技术相比，能够抑制人的认知负荷的增加。
实施方式2.
图7是表示本发明的实施方式2涉及的语音识别辅助装置的构成例的图。与实施方式1涉及的语音识别辅助装置100-1的不同之处在于，在实施方式2涉及的语音识别辅助装置100-2中，取代发光控制部3-1而设置有发光控制部3-2，在发光控制部3-2中，除了阈值生成部31、环境判定部32以及发光状态变更部33之外还设置有驾驶状态判定部35。驾驶状态判定部35基于从车辆获得的车辆信息1001，判定是否最好抑制发声，并将判定的结果作为表示驾驶状态的驾驶状态信息进行输出。
接着，使用图8以及图9来说明语音识别辅助装置100-2的工作。图8是用于对本发明的实施方式2涉及的语音识别辅助装置的工作进行说明的时序图。图9是用于对本发明的实施方式2涉及的语音识别辅助装置的工作进行说明的流程图。在图8所示的时序图中，与图2所示的时序图的不同之处在于，追加了驾驶状态判定部35，且对环境判定部32输入了从驾驶状态判定部35输出的驾驶状态信息。在图9所示的流程图中，与图3所示的流程图的不同之处在于，在步骤S3与步骤S4之间追加了步骤S31的处理，且追加了步骤S32以及步骤S33的处理。除了步骤S31、步骤S32以及步骤S32以外的处理与图3所示的各步骤的处理是同样的，因此省略说明。
在步骤S3中，在噪声等级没有超过阈值的情况下(步骤S3：否)，执行步骤S31的处理。在步骤S31中，驾驶状态判定部35基于从车辆获得的车辆信息1001，判定驾驶员的驾驶状态是否是适合发声的状态。车辆信息1001例如是表示车辆的行驶速度的信息、表示转向装置的转向状态的信息、表示制动器操作状态的信息、从先进驾驶辅助系统(Advanceddriver-assistance systems：ADAS)取得的信息等。ADAS是为了使道路交通的便利性提高而对驾驶员的驾驶操作进行辅助的系统。
例如，在车辆信息1001是表示转向状态的信息的情况下，驾驶状态判定部35通过解析该车辆信息1001，能够判别车辆正行驶于直行道路还是行驶于弯道。另外，在车辆信息1001是表示行驶速度的信息的情况下，驾驶状态判定部35通过解析该车辆信息1001，能够判别车辆是在低速行驶还是在高速行驶。例如，在车辆以100km/h的时速行驶于高速路的弯道时的语音操作会导致驾驶员的注意力降低的可能性高。因此，驾驶状态判定部35判定为最好抑制发声。另一方面，例如在车辆以30km/h的时速行驶于一般道路的直行道时的语音操作会导致驾驶员的注意力降低的可能性低。因此，在那样的状况下，驾驶状态判定部35判定为无需抑制发声。
如此，驾驶状态判定部35基于车辆信息1001，判定是否最好抑制发声。在最好抑制发声的情况下(步骤S31：是)，驾驶状态判定部35将表示处于最好抑制发声的驾驶状态的驾驶状态信息输出到环境判定部32。被输入了该驾驶状态信息的环境判定部32判定为由于车辆内的环境并非处于适合语音的识别的状态因而需要促使搭乘者抑制发声(步骤S32)。被输入了该判定结果信息的发光状态变更部33为了促使人抑制发声，使用前述的发光状态对应表，输出调光信息。此处的调光信息是控制发光部4的发光状态以使得发光部4的状态成为“发光状态C”的信息(步骤S33)。
回到步骤S31，在不希望抑制发声的情况下(步骤S31：否)，驾驶状态判定部35将表示处于不希望抑制发声的驾驶状态的驾驶状态信息输出到环境判定部32。被输入了该驾驶状态信息的环境判定部32执行步骤S4的处理。
图10是表示用于实现本发明的实施方式2涉及的语音识别辅助装置的硬件结构例的图。语音识别辅助装置100-2能够通过CPU、系统LSI等处理器41-2；由RAM、ROM等构成的存储器42-2；以及输入输出接口43-2来实现。此外，处理器41-2也可以是微型计算机、DSP这样的运算单元。处理器41-2、存储器42-2以及输入输出接口43-2连接于总线44-2，能够经由总线44-2相互进行信息的递送。输入输出接口43-2在语音识别辅助装置100-2与语音识别装置200及发光部4之间进行信息的收发。在实现语音识别辅助装置100-2的情况下，预先将语音识别辅助装置100-2用的程序存储于存储器42-2，由处理器41-2执行该程序，由此，声音等级算出部2以及发光控制部3-2得以实现。
如以上说明的那样，实施方式2涉及的语音识别辅助装置100-2构成为除了语音等级以及噪声等级之外还基于从车辆获得的车辆信息，判定车辆内的环境是否处于适合语音的识别的状态。根据该构成，能够提供抑制了导致驾驶员的注意力降低的可能性高的驾驶状态下的发声并且有效地利用了语音识别装置200的舒适的驾驶环境。
此外，实施方式2的发光控制部3-2也可以构成为，在车辆信息例如为车速信息、且基于该车速信息判定为车辆并非在行驶期间的情况下，判定为车辆内的环境处于适合语音的识别的状态。通过这样构成，搭乘者能够无需在意发光部4的发光状态地利用语音识别装置200。另外，实施方式2的发光控制部3-2也可以构成为，在车辆信息例如为车速信息、且基于该车速信息判定为车辆并非在行驶期间的情况下，使发光部4熄灭。通过这样构成，能够抑制发光部4的发光所需的功耗。
另外，实施方式2的发光控制部3-2也可以构成为，例如根据车速、方向盘的转向角等，使正在等待发声的发光部4的发光量阶段式地或者连续地变化。具体而言，等待说话期间的发光量根据第1速度域(时速0km/h～10km/h)、第2速度域(时速11km/h～20km/h)、第3速度域(时速21km/h～30km/h)等的速度划分来调整。例如按第1速度域、第2速度域、第3速度域的顺序，等待说话期间的发光量下降。另外，等待说话期间的发光量根据方向盘的转向角为小(10度以下)、中(11度～90度)、大(91度以上)等的角度划分来调整。具体而言，按转向角为小、中、大的顺序，等待说话期间的发光量下降。根据该构成，与等待说话期间的发光量固定的情况相比，较接近说话抑制的状态，能够防止驾驶员的注意力降低。
另外，实施方式2的发光控制部3-2也可以构成为，例如根据车速、方向盘的转向角等，使语音识别期间的发光部4的闪烁周期连续发生变化。例如，语音识别期间的闪烁周期根据前述的速度划分来调整。具体而言，按第1速度域、第2速度域、第3速度域的顺序，闪烁周期缩短。另外，语音识别期间的闪烁周期根据方向盘的转向角为前述的角度划分来调整。具体而言，按转向角为小、中、大的顺序，闪烁周期缩短。根据该构成，能够使闪烁周期具有变化，因而相比于语音识别期间的闪烁周期固定的情况，即使是在关注于驾驶的状况下，其意识根据驾驶状况而变化的情况下，也不容易看漏发光部4的点亮状态。因此，能够提供有效利用了语音识别装置200的更加舒适的驾驶环境。
此外，在实施方式1、2中，对语音识别辅助装置设置于车辆的构成例进行了说明，但实施方式1、2的各自的语音识别辅助装置也能够应用于所有利用了语音识别的装置或者设备(例如对话式机器人、铁路车辆、航空器等)。

Claims (5)

1.一种语音识别辅助装置，具备：
发光部；
声音检测部；以及
发光控制部，其基于表示由所述声音检测部检测出的人的语音的等级的语音等级、表示由所述声音检测部检测出的噪声的等级的噪声等级、和判定所述声音检测部的周围环境处于适合所述语音的识别的状态这一情况的阈值，判定所述声音检测部的周围环境是否处于适合所述语音的识别的状态，在判定为所述声音检测部的周围环境处于适合所述语音的识别的状态的情况下，使所述发光部的发光状态成为第1状态，在判定为所述声音检测部的周围环境并非处于适合所述语音的识别的状态的情况下，使所述发光部的发光状态变化为与所述第1状态不同的第2状态。
2.根据权利要求1所述的语音识别辅助装置，
所述发光控制部除了所述语音等级和所述噪声等级之外还基于从车辆获得的车辆信息，判定所述车辆内的环境是否处于适合所述语音的识别的状态。
3.根据权利要求2所述的语音识别辅助装置，
所述发光控制部在基于所述车辆信息判定为所述车辆并非在行驶期间时，判定为所述车辆内的环境处于适合所述语音的识别的状态。
4.根据权利要求3所述的语音识别辅助装置，
所述发光控制部在判定为所述车辆并非在行驶期间时，使所述发光部熄灭。
5.一种语音识别辅助程序，使计算机执行：
判定步骤，基于表示由声音检测部检测出的人的语音的等级的语音等级、表示由所述声音检测部检测出的噪声的等级的噪声等级、和判定所述声音检测部的周围环境处于适合所述语音的识别的状态这一情况的阈值，判定所述声音检测部的周围环境是否处于适合所述语音的识别的状态；
发光控制步骤，在通过所述判定步骤判定为所述声音检测部的周围环境处于适合所述语音的识别的状态的情况下，使发光部的发光状态成为第1状态，在通过所述判定步骤判定为所述声音检测部的周围环境并非处于适合所述语音的识别的状态的情况下，使所述发光部的发光状态变化为与所述第1状态不同的第2状态。
CN201911080965.5A 2018-11-16 2019-11-07 语音识别辅助装置以及语音识别辅助程序 Pending CN111199736A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-215240 2018-11-16
JP2018215240A JP2020085953A (ja) 2018-11-16 2018-11-16 音声認識支援装置及び音声認識支援プログラム

Publications (1)

Publication Number Publication Date
CN111199736A true CN111199736A (zh) 2020-05-26

Family

ID=70726700

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911080965.5A Pending CN111199736A (zh) 2018-11-16 2019-11-07 语音识别辅助装置以及语音识别辅助程序

Country Status (3)

Country Link
US (1) US20200160854A1 (zh)
JP (1) JP2020085953A (zh)
CN (1) CN111199736A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112856727A (zh) * 2021-01-21 2021-05-28 广州三星通信技术研究有限公司 用于控制电子装置的方法和设备

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0675588A (ja) * 1992-08-27 1994-03-18 Fujitsu Ltd 音声認識装置
JPH10240291A (ja) * 1996-12-26 1998-09-11 Seiko Epson Corp 音声認識装置における音声入力可能状態報知方法及びその装置
JP2005263155A (ja) * 2004-03-22 2005-09-29 Clarion Co Ltd 車載用電子機器、その制御方法、制御プログラム及び記録媒体
CN103403798A (zh) * 2011-04-08 2013-11-20 三菱电机株式会社 声音识别装置及导航装置
CN104335263A (zh) * 2012-05-25 2015-02-04 丰田自动车株式会社 接近车辆检测装置及驾驶辅助系统
US20160241555A1 (en) * 2015-02-12 2016-08-18 United Services Automobile Association (Usaa) Toggling biometric authentication
CN107833578A (zh) * 2016-09-15 2018-03-23 东芝泰格有限公司 声音识别装置、声音识别方法及计算机可读存储介质
CN108122556A (zh) * 2017-08-08 2018-06-05 问众智能信息科技（北京）有限公司 减少驾驶人语音唤醒指令词误触发的方法及装置
US20180275951A1 (en) * 2017-03-21 2018-09-27 Kabushiki Kaisha Toshiba Speech recognition device, speech recognition method and storage medium

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0675588A (ja) * 1992-08-27 1994-03-18 Fujitsu Ltd 音声認識装置
JPH10240291A (ja) * 1996-12-26 1998-09-11 Seiko Epson Corp 音声認識装置における音声入力可能状態報知方法及びその装置
JP2005263155A (ja) * 2004-03-22 2005-09-29 Clarion Co Ltd 車載用電子機器、その制御方法、制御プログラム及び記録媒体
CN103403798A (zh) * 2011-04-08 2013-11-20 三菱电机株式会社 声音识别装置及导航装置
CN104335263A (zh) * 2012-05-25 2015-02-04 丰田自动车株式会社 接近车辆检测装置及驾驶辅助系统
US20160241555A1 (en) * 2015-02-12 2016-08-18 United Services Automobile Association (Usaa) Toggling biometric authentication
CN107833578A (zh) * 2016-09-15 2018-03-23 东芝泰格有限公司 声音识别装置、声音识别方法及计算机可读存储介质
US20180275951A1 (en) * 2017-03-21 2018-09-27 Kabushiki Kaisha Toshiba Speech recognition device, speech recognition method and storage medium
CN108122556A (zh) * 2017-08-08 2018-06-05 问众智能信息科技（北京）有限公司 减少驾驶人语音唤醒指令词误触发的方法及装置

Also Published As

Publication number Publication date
US20200160854A1 (en) 2020-05-21
JP2020085953A (ja) 2020-06-04

Similar Documents

Publication Publication Date Title
US7317386B2 (en) Method and apparatus for the output of music information to an operator
US10170111B2 (en) Adaptive infotainment system based on vehicle surrounding and driver mood and/or behavior
US9230538B2 (en) Voice recognition device and navigation device
US9395702B2 (en) Safety critical apparatus and method for controlling distraction of an operator of a safety critical apparatus
CN105383377B (zh) 行人警示装置和车辆
JP6075577B2 (ja) 運転支援装置
US20180170242A1 (en) Bluetooth-enabled vehicle lighting control hub
JP6472169B2 (ja) 移動体機器制御装置、携帯端末、移動体機器制御システムおよび移動体機器制御方法
CN111199736A (zh) 语音识别辅助装置以及语音识别辅助程序
CN110525450B (zh) 一种调节车载语音灵敏度的方法及系统
JP2016203815A (ja) 車載機器の動作制御装置
US20180015826A1 (en) Vehicle Interior Lighting Systems And Methods
WO2017012685A1 (en) Method for operating an output device for a motor vehicle, output device and motor vehicle with such an output device
US11827210B2 (en) Setting change assist apparatus
US20160214528A1 (en) Vehicular braking indicator system and method for displaying magnitude of brake engagement
IT202000016741A1 (it) Assistenza ad un conducente di un mezzo per mobilita' per l'apprendimento di caratteristiche del mezzo per mobilita'
CN115709679A (zh) 一种方向盘氛围灯控制方法、相关组件及方向盘
CN112040619A (zh) 一种车辆氛围灯控制系统及其控制方法
CN205059411U (zh) 基于监测驾驶行为变换仪表背景光的控制装置
JP2014240239A (ja) 擬似エンジン音制御装置と、これを用いた擬似エンジン音制御システム、および移動体装置、ならびに擬似エンジン音制御方法
JP2008260507A (ja) 緊急ブレーキシステム
ITUB20152855A1 (it) Dispositivo per segnalare il sopraggiungere di veicoli di emergenza.
KR101091829B1 (ko) 가변식 브레이크등
US20230174077A1 (en) Method for operating a driving dynamics system facility of a motor vehicle while driving with the motor vehicle, control device, and motor vehicle
JP2018176977A (ja) 足位置表示装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20200526

WD01 Invention patent application deemed withdrawn after publication