JPH1165587A - Vehicular voice input device - Google Patents
Vehicular voice input deviceInfo
- Publication number
- JPH1165587A JPH1165587A JP9235467A JP23546797A JPH1165587A JP H1165587 A JPH1165587 A JP H1165587A JP 9235467 A JP9235467 A JP 9235467A JP 23546797 A JP23546797 A JP 23546797A JP H1165587 A JPH1165587 A JP H1165587A
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- voice
- seat
- content
- specified
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Abstract
Description
【0001】[0001]
【発明の属する技術分野】本発明は、車両の乗員が発声
する音声の内容を認識し、車載機器に対して制御信号を
入力するための車両用音声入力装置に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a vehicle voice input device for recognizing the content of voice uttered by a vehicle occupant and inputting a control signal to on-vehicle equipment.
【0002】[0002]
【従来の技術】車両の乗員が通信装置により通話を行う
場合、マイクロホンを手に持って音声を入力すると、運
転操作がし難くなるといった問題を解決するために、乗
員が発する音声を電気信号(音声信号)に変換するマイ
クロホンを、ショルダベルト部(シートベルトの一部を
構成し、乗員の胸部を拘束するベルト)上の、乗員の胸
元に対応する位置に設け、そのマイクロホンからの音声
信号を通信装置に入力するようにした音声入力装置が従
来より知られている。2. Description of the Related Art When an occupant of a vehicle makes a call using a communication device, a voice input by a occupant is converted to an electric signal (e.g. A microphone that converts the sound signal from the microphone into a sound signal is provided on the shoulder belt (a belt that forms part of the seat belt and restrains the chest of the occupant) at a position corresponding to the chest of the occupant. 2. Description of the Related Art A voice input device adapted to input to a communication device is conventionally known.
【0003】[0003]
【発明が解決しようとする課題】しかしながら、車両の
乗員が発声する音声の内容を認識し、音声による車載装
置の操作を行う場合に、上記従来の装置のように運転席
にマイクロホンを設けると、車両の運転者は音声による
車載装置の操作が可能であるが、例えば助手席側の乗員
が音声により車載装置の操作を行うことは困難である。
また、単純に助手席側にマイクロホンを設置しただけで
は、運転者による操作か、助手席の乗員による操作かが
明確でないため、不適切な操作が行われる可能性があっ
た。However, when the occupant of the vehicle recognizes the content of the voice uttered and operates the vehicle-mounted device by voice, if a microphone is provided in the driver's seat as in the above-described conventional device, Although the driver of the vehicle can operate the in-vehicle device by voice, it is difficult for an occupant on the passenger side to operate the in-vehicle device by voice, for example.
In addition, simply installing a microphone on the passenger seat side does not make it clear whether the operation is performed by the driver or by the occupant in the passenger seat, and thus an inappropriate operation may be performed.
【0004】本発明はこの点に着目してなされたもので
あり、車両に複数の乗員が乗車している場合でも、それ
ぞれの乗員が音声による車載装置の操作を適切に行うこ
とができる車両用音声入力装置を提供することを目的と
する。The present invention has been made in view of this point, and is intended for a vehicle in which each occupant can appropriately operate a vehicle-mounted device by voice even when a plurality of occupants are in the vehicle. It is an object to provide a voice input device.
【0005】[0005]
【課題を解決するための手段】上記目的を達成するため
請求項1に記載の発明は、車両の乗員が発声する音声の
内容を認識し、車載機器に対して制御信号を入力するた
めの車両用音声入力装置において、前記車両の複数の座
席に対応して配置された複数のマイクロホンと、前記複
数のマイクロホンから入力される音声信号に基づいて発
声者が着座している座席を特定する発声者特定手段と、
前記発声者特定手段により特定された座席に対応するマ
イクロホンから入力される音声信号の内容を認識する音
声認識手段とを備え、前記音声認識手段は、認識した音
声信号の内容から、前記特定された座席の乗員によって
指定された車載機器及びその操作内容を判別し、前記判
別された車載機器に対する前記判別された操作が、前記
特定された座席の乗員に許可されているとき、前記判別
された車載機器に対して、前記判別した操作に対応する
制御信号を出力すること特徴とする。According to the first aspect of the present invention, there is provided a vehicle for recognizing the content of a voice uttered by a vehicle occupant and inputting a control signal to an on-vehicle device. A plurality of microphones arranged corresponding to a plurality of seats of the vehicle, and a speaker specifying a seat on which the speaker is seated based on audio signals input from the plurality of microphones. Identification means,
Voice recognition means for recognizing the content of the voice signal input from the microphone corresponding to the seat specified by the speaker specifying means, wherein the voice recognition means, from the content of the recognized voice signal, the specified The in-vehicle device specified by the occupant of the seat and the operation content thereof are determined. When the determined operation on the determined in-vehicle device is permitted to the occupant of the specified seat, the determined in-vehicle device is determined. A control signal corresponding to the determined operation is output to the device.
【0006】この構成によれば、複数のマイクロホンか
ら入力される音声信号に基づいて発声者が着座している
座席が特定され、特定された座席に対応するマイクロホ
ンから入力される音声信号の内容が認識され、認識され
た音声信号の内容から、特定された座席の乗員によって
指定された車載機器及びその操作内容が判別され、判別
された車載機器に対する判別された操作が、特定された
座席の乗員に許可されているとき、前記車載機器に対し
て、前記操作に対応する制御信号が出力される。その結
果、車両に複数の乗員が乗車している場合でも、それぞ
れの乗員が音声による車載装置の操作を適切に行うこと
ができる。According to this configuration, the seat on which the speaker is seated is specified based on the audio signals input from the plurality of microphones, and the content of the audio signal input from the microphone corresponding to the specified seat is determined. The in-vehicle device specified by the occupant of the identified seat and the operation content thereof are determined from the content of the recognized and recognized voice signal, and the determined operation for the identified in-vehicle device is determined by the occupant of the identified seat. And a control signal corresponding to the operation is output to the in-vehicle device. As a result, even when a plurality of occupants are in the vehicle, each occupant can appropriately operate the in-vehicle device by voice.
【0007】請求項2に記載の発明は、車両の乗員が発
声する音声の内容を認識し、車載機器に対して制御信号
を入力するための車両用音声入力装置において、前記車
両の複数の座席に対応して配置された複数のマイクロホ
ンと、前記複数のマイクロホンから入力される音声信号
に基づいて発声者が着座している座席を特定する発声者
特定手段と、前記発声者特定手段により特定された座席
に対応するマイクロホンから入力される音声信号の内容
を認識する音声認識手段とを備え、前記音声認識手段
は、認識した音声信号の内容から、前記特定された座席
の乗員によって指定された車載機器及びその操作内容を
判別し、前記特定された座席に応じて、前記判別された
車載機器に対する制御内容を決定し、該決定した制御内
容に対応する制御信号を出力すること特徴とする。According to a second aspect of the present invention, there is provided a voice input device for a vehicle for recognizing the content of voice uttered by a vehicle occupant and inputting a control signal to an on-vehicle device. A plurality of microphones arranged corresponding to, a speaker specifying means for specifying a seat where a speaker is seated based on audio signals input from the plurality of microphones, and a plurality of microphones specified by the speaker specifying means. Voice recognition means for recognizing the content of the voice signal input from the microphone corresponding to the seat, wherein the voice recognition means determines the on-board A device and its operation contents are determined, control contents for the determined in-vehicle device are determined according to the specified seat, and a control signal corresponding to the determined control contents is determined. And characterized in that the output.
【0008】この構成によれば、複数のマイクロホンか
ら入力される音声信号に基づいて発声者が着座している
座席が特定され、特定された座席に対応するマイクロホ
ンから入力される音声信号の内容が認識され、認識され
た音声信号の内容から、特定された座席の乗員によって
指定された車載機器及びその操作内容が判別され、特定
された座席に応じて、前記車載機器に対する制御の内容
が決定され、該決定された制御内容に対応する制御信号
が出力される。その結果、車両に複数の乗員が乗車して
いる場合でも、それぞれの乗員が音声による車載装置の
操作を適切に行うことができる。According to this configuration, the seat on which the speaker is seated is specified based on the audio signals input from the plurality of microphones, and the content of the audio signal input from the microphone corresponding to the specified seat is determined. The in-vehicle device specified by the occupant of the identified seat and the operation content thereof are determined from the content of the recognized and recognized voice signal, and the control content for the in-vehicle device is determined according to the identified seat. , A control signal corresponding to the determined control content is output. As a result, even when a plurality of occupants are in the vehicle, each occupant can appropriately operate the in-vehicle device by voice.
【0009】請求項3に記載の発明は、請求項1に記載
の車両用音声入力装置において、前記音声認識手段は、
前記特定された座席が運転席であるときは、当該車両の
運転操作に関連する車載装置の操作の実行を許可し、前
記特定された座席が運転席以外の座席であるときは、当
該車両の運転操作に関連する車載装置の操作を実行不可
とすることを特徴とする。According to a third aspect of the present invention, in the vehicle voice input device according to the first aspect, the voice recognition means includes:
When the specified seat is the driver's seat, execution of the operation of the in-vehicle device related to the driving operation of the vehicle is permitted, and when the specified seat is a seat other than the driver's seat, The operation of the in-vehicle device related to the driving operation is not executable.
【0010】この構成によれば、特定された座席が運転
席であるときは、当該車両の運転操作に関連する車載装
置の操作の実行が許可され、特定された座席が運転席以
外の座席であるときは、当該車両の運転操作に関連する
車載装置の操作が実行不可とされる。その結果、運転操
作に関連する車載機器が運転者の意に反して操作される
ことを防止することができる。According to this configuration, when the specified seat is the driver's seat, execution of the operation of the on-vehicle device related to the driving operation of the vehicle is permitted, and the specified seat is a seat other than the driver's seat. In some cases, the operation of the in-vehicle device related to the driving operation of the vehicle is disabled. As a result, it is possible to prevent the in-vehicle device related to the driving operation from being operated against the driver's intention.
【0011】請求項4に記載の発明は、請求項2に記載
の車両用音声入力装置において、前記音声認識手段は、
前記特定された座席に応じて、その座席に対応する車載
機器を動作させる制御信号を出力することを特徴とす
る。According to a fourth aspect of the present invention, in the vehicle voice input device according to the second aspect, the voice recognition means comprises:
According to the specified seat, a control signal for operating an in-vehicle device corresponding to the seat is output.
【0012】この構成によれば、特定された座席に応じ
て、その座席に対応する車載機器を動作させる制御信号
が出力される。その結果、音声による操作指示を行った
乗員に応じたより適切な制御を行うことができる。According to this configuration, a control signal for operating the vehicle-mounted device corresponding to the specified seat is output according to the specified seat. As a result, more appropriate control can be performed according to the occupant who has given the operation instruction by voice.
【0013】[0013]
【発明の実施の形態】以下本発明の実施の形態を図面を
参照して説明する。Embodiments of the present invention will be described below with reference to the drawings.
【0014】図1は本発明の第1の実施形態にかかる車
両用音声入力装置の要部の構成を示すブロック図であ
る。この装置は、図4に示すように乗員保護のためのシ
ートベルトのうち、装着時に運転席及び助手席の乗員の
胸部を拘束するショルダベルト部10に配置されたドラ
イバ側マイクロホン1A及びアシスタント側マイクロホ
ン1Bと、マイクロホン1A、1Bから入力される音声
信号から、発声者が着座している座席を特定し、該特定
した座席に対応するマイクロホンからの音声信号SOU
Tと、特定した座席を示す発声者情報SPKとを出力す
る音声信号調整部2と、音声信号SOUTの内容を認識
し、発声者情報SPKに応じて車載機器に制御信号CT
Lを出力する音声認識部3とを備えている。音声による
操作の対象となる車載装置としては、例えばランプ、ワ
イパ、ミラー、パワーウインドウ、エアコン、カーオー
ディオ、ナビゲーション装置、オートクルーズ装置など
がある。本実施形態では、マイクロホン1A及び1Bの
特性(感度、指向性)がほぼ同一となるように構成され
ている。FIG. 1 is a block diagram showing a configuration of a main part of a vehicle voice input device according to a first embodiment of the present invention. As shown in FIG. 4, this device includes a driver-side microphone 1A and an assistant-side microphone arranged on a shoulder belt portion 10 that restrains the occupant's chest in a driver's seat and a passenger's seat when wearing the seat belt for protecting the occupant. 1B and an audio signal input from the microphones 1A and 1B, a seat in which the speaker is seated is specified, and an audio signal SOU from the microphone corresponding to the specified seat is specified.
T, and an audio signal adjustment unit 2 that outputs speaker information SPK indicating the specified seat. The audio signal adjusting unit 2 recognizes the content of the audio signal SOUT, and sends a control signal CT to the in-vehicle device according to the speaker information SPK.
And a voice recognition unit 3 for outputting L. Examples of in-vehicle devices to be operated by voice include a lamp, a wiper, a mirror, a power window, an air conditioner, a car audio, a navigation device, an auto cruise device, and the like. In the present embodiment, the microphones 1A and 1B are configured so that their characteristics (sensitivity and directivity) are substantially the same.
【0015】音声調整部2は、図2に示すような処理を
実行し、出力信号SOUT及び発声者情報SPKを出力
する。ステップS1では、マイクロホン1Aから、運転
者が発声した音声に対応する音声信号が入力されたか否
かを判別し、マイクロホン1Aからの音声入力が無いと
きは待機し、有るときは、マイクロホン1Bから助手席
に着座している乗員(以下「アシスタント」という)が
発声した音声に対応する音声信号が入力されたか否かを
判別する(ステップS2)。ステップS1、S2の判別
は、例えば以下のようにして行う。The voice adjusting unit 2 executes a process as shown in FIG. 2, and outputs an output signal SOUT and speaker information SPK. In step S1, it is determined whether or not a voice signal corresponding to the voice uttered by the driver has been input from the microphone 1A. If there is no voice input from the microphone 1A, the process waits. If there is, the assistant from the microphone 1B. It is determined whether or not a voice signal corresponding to a voice uttered by an occupant sitting in the seat (hereinafter referred to as “assistant”) has been input (step S2). The determination in steps S1 and S2 is performed, for example, as follows.
【0016】マイクロホン1A,1Bからの入力信号S
IN1,SIN2のレベルを、LSIN1、LSIN2
とすると、レベルLSIN1及びLSIN2の過去30
秒間の移動平均値LAVE1,LAVE2を算出し、入
力信号SIN1の閾値TH1及び入力信号SIN2の閾
値TH2を下記式により算出する。Input signals S from the microphones 1A and 1B
The levels of IN1 and SIN2 are set to LSIN1 and LSIN2.
Then, the past 30 of the levels LSIN1 and LSIN2
Second moving average values LAVE1 and LAVE2 are calculated, and a threshold TH1 of the input signal SIN1 and a threshold TH2 of the input signal SIN2 are calculated by the following equations.
【0017】 TH1=LAVE1+ΔL1 TH2=LAVE2+ΔL2 ここで、ΔL1、ΔL2は、それぞれ移動平均値LAV
E1,LAVE2の5%程度の値に設定される加算項で
ある。TH1 = LAVE1 + ΔL1 TH2 = LAVE2 + ΔL2 Here, ΔL1 and ΔL2 are moving average values LAV, respectively.
This is an addition term set to a value of about 5% of E1 and LAVE2.
【0018】そして、LSIN1>TH1が成立すると
き、ドライバ側音声入力(マイクロホン1Aからの入
力)ありと判別し、LSIN2>TH2が成立すると
き、アシスタント側音声入力(マイクロホン1Bからの
入力)ありと判別する。これにより、定常的に入力され
る音声信号、例えばロードノイズなどからなる背景ノイ
ズのみが入力されている状態では、音声入力なしと判別
される。When LSIN1> TH1 is satisfied, it is determined that there is a driver-side voice input (input from the microphone 1A). When LSIN2> TH2 is satisfied, there is a assistant-side voice input (input from the microphone 1B). Determine. As a result, in a state where only a normally input audio signal, for example, background noise such as road noise is input, it is determined that there is no audio input.
【0019】ステップS1の答が肯定(YES)で、ス
テップS2の答が否定(NO)、すなわちマイクロホン
1Aからの音声入力のみがなされたときは、発声者は運
転者(発声者は運転席に着座している乗員)と判定し、
発声者情報SPKを「1」に設定する(ステップS4)
とともに、マイクロホン1Aからの音声信号を出力信号
SOUTとし(ステップS5)、出力信号SOUT及び
発声者情報SPKを音声認識部3に出力してステップS
1に戻る。When the answer in step S1 is affirmative (YES) and the answer in step S2 is negative (NO), that is, when only the voice input from the microphone 1A is made, the speaker is the driver (the speaker is in the driver's seat). Seated occupant)
The speaker information SPK is set to "1" (step S4).
At the same time, the audio signal from the microphone 1A is set as the output signal SOUT (step S5), and the output signal SOUT and the speaker information SPK are output to the voice recognition unit 3 to perform step S5.
Return to 1.
【0020】一方ステップS1及びS2の答がともに肯
定(YES)、すなわちマイクロホン1A及び1Bの両
方から音声入力がなされたときは、マイクロホン1Aか
らの入力信号SIN1のレベルLSIN1が、マイクロ
ホン1Bからの入力信号SIN2のレベルLSIN2に
所定値ΔL3を加算した値より大きいか否かを判別し
(ステップS3)、LSIN1>LSIN2+ΔL3で
あるときは、発声者は運転者と判定して前記ステップS
4に進む。また、LSIN1≦LSIN2+ΔL3であ
るときは、レベルLSIN2がレベルLSIN1に所定
値ΔL3を加算した値より大きいか否かを判別し(ステ
ップS6)、LSIN2>LSIN2+ΔL3であると
きは、発声者はアシスタントと判定し、発声者情報SP
Kを「2」に設定する(ステップS7)とともに、マイ
クロホン1Bからの音声信号を出力信号SOUTとし
(ステップS8)、前記ステップS9に進む。On the other hand, if the answers of steps S1 and S2 are both affirmative (YES), that is, if voice input is made from both microphones 1A and 1B, the level LSIN1 of input signal SIN1 from microphone 1A is changed to the input level from microphone 1B. It is determined whether or not the value is greater than a value obtained by adding a predetermined value ΔL3 to the level LSIN2 of the signal SIN2 (step S3). If LSIN1> LSIN2 + ΔL3, the utterer is determined to be a driver, and the process proceeds to the step S
Proceed to 4. When LSIN1 ≦ LSIN2 + ΔL3, it is determined whether or not the level LSIN2 is greater than a value obtained by adding a predetermined value ΔL3 to the level LSIN1 (step S6). And speaker information SP
K is set to "2" (step S7), and an audio signal from the microphone 1B is set as an output signal SOUT (step S8), and the process proceeds to step S9.
【0021】ステップS3及びS6の答が共に否定(N
O)であって、レベルLSIN1,LSIN2がほぼ同
程度であるときは、運転者及びアシスタントが同程度の
大きさで発声した場合か、外部から突発的に音声が入力
された場合であって、発声者を特定できないので、直ち
にステップS1に戻り、出力信号SOUT及び発声者情
報の出力は行わない。If the answers of steps S3 and S6 are both negative (N
O), when the levels LSIN1 and LSIN2 are almost the same, it means that the driver and the assistant have uttered the same volume, or that the voice has been suddenly input from the outside, Since the speaker cannot be specified, the process immediately returns to step S1, and the output signal SOUT and the speaker information are not output.
【0022】なお、上記所定値ΔL3は、例えば発声時
の平均的な音声信号レベルの5%程度の値に設定する。The predetermined value ΔL3 is set to, for example, a value of about 5% of an average audio signal level at the time of utterance.
【0023】図3は、音声認識部3における処理のフロ
ーチャートであり、この処理は、音声調整部2から信号
SOUTが入力されると実行される。FIG. 3 is a flowchart of a process in the voice recognition unit 3. This process is executed when the signal SOUT is input from the voice adjustment unit 2.
【0024】先ず信号SOUTに基づいて発声された音
声の内容を認識し(ステップS11)、次いで発声者が
操作の対象とする車載機器及び操作内容を特定する。例
えばランプ、ワイパー、ミラー、オートクルーズ装置な
どの運転操作に関連する車載装置に対して、ランプのオ
ンオフ、ワイパーのオンオフ、フェンダーミラーの移動
(駐車時の収容位置と、使用時の起立位置との間の移
動)操作、オートクルーズのオンオフなど操作内容を特
定する。また、その他の車載装置であるエアコンのオン
オフ若しくは温度調節、パワーウインドウの開閉操作、
ナビゲーション装置の表示部の表示画面の変更指示など
を特定する。First, the contents of the uttered voice are recognized based on the signal SOUT (step S11), and then the in-vehicle device to be operated by the speaker and the operation contents are specified. For example, on-vehicle devices related to driving operations such as lamps, wipers, mirrors, and auto cruise devices, turn on / off the lamps, turn on / off the wipers, and move the fender mirrors (the position between the parking position and the standing position during use). Operation), the operation details such as turning on / off the auto cruise. In addition, turning on / off or controlling the temperature of the air conditioner that is another in-vehicle device, opening and closing the power window,
An instruction to change the display screen of the display unit of the navigation device is specified.
【0025】そして、ステップS12で特定した対象機
器及び操作が、発声者に許可されているか否かを判別す
る(ステップS13)。この判別は、予めメモリに格納
された操作許可テーブルと、検出した対象機器及び操作
とを対照することにより、行う。操作許可テーブルは、
例えば以下のように設定される。Then, it is determined whether or not the target device and the operation specified in step S12 are permitted by the speaker (step S13). This determination is made by comparing the operation permission table stored in the memory in advance with the detected target device and operation. The operation permission table is
For example, it is set as follows.
【0026】1)運転操作に関連する車載機器に対する
操作は、発声者が運転者のときのみ許可する。1) Operations on on-vehicle devices related to driving operations are permitted only when the speaker is a driver.
【0027】2)ナビゲーション装置を対象機器とし、
その表示部の表示画面を変更する操作は、車両走行中の
ときは発声者がアシスタントのときのみ許可する。これ
は、運転者が運転中に表示画面を変更可能とすると、画
面に気を取られ、前方に対する注意力が低下する可能性
があることを考慮したからである。2) The navigation device is a target device,
The operation of changing the display screen of the display unit is permitted only when the speaker is an assistant while the vehicle is running. This is because, when the driver can change the display screen during driving, the user is distracted by the screen, and the driver's attention to the front may be reduced.
【0028】ステップS13の答が否定(NO)のとき
は、対象機器を操作するための制御信号CTLを出力す
ることなく処理を終了する。If the answer to step S13 is negative (NO), the process ends without outputting the control signal CTL for operating the target device.
【0029】一方ステップS13の答が肯定(YES)
のときは、発声者がいずれであるかに応じて制御の内容
を決定し、その制御内容に応じた制御信号CTLを生成
する。例えば、地図表示部としてインパネ中央部または
コンソールに配置された本体表示部と、運転者前方のフ
ロントガラスに投影するヘッドアップディスプレイとを
有するナビゲーション装置を制御対象とする場合、「地
図表示」という指令を運転者が発声したときは、本体表
示部及びヘッドアップディスプレイを共に作動させる制
御信号を生成し、同じ指令をアシスタントが発声したと
きは、本体表示部のみ作動させる制御信号を生成する。
さらに、パワーウインドウの開閉は、発声者が運転者の
ときは、運転席側のウインドウのみ開閉作動させ、発声
者がアシスタントのときは、助手席側のウインドウのみ
開閉作動させるようにしたり、あるいは、カーオーディ
オのボリュームを発声者の座席の近傍に設けられたスピ
ーカから出力される信号についてのみ変更するといった
制御内容の詳細を決定し、それに対応した制御信号CT
Lを生成する。また、ライトのオンオフ、エアコンのオ
ンオフなどの単純な操作については、単にその操作に対
応した制御信号CTLを生成する。On the other hand, the answer to step S13 is affirmative (YES).
In the case of, the control content is determined according to the speaker, and a control signal CTL corresponding to the control content is generated. For example, when a navigation device having a main body display unit disposed in the center of an instrument panel or a console as a map display unit and a head-up display projecting on a windshield in front of the driver is to be controlled, a command "map display" is issued. When the driver speaks, a control signal for operating both the main body display unit and the head-up display is generated, and when the same command is issued by the assistant, a control signal for operating only the main body display unit is generated.
Furthermore, opening and closing of the power window is such that when the speaker is a driver, only the driver side window is opened and closed, and when the speaker is an assistant, only the passenger side window is opened and closed, or The details of control such as changing the volume of the car audio only for the signal output from the speaker provided near the speaker's seat are determined, and the corresponding control signal CT is determined.
Generate L. For simple operations such as turning on / off the light and turning on / off the air conditioner, the control signal CTL corresponding to the operation is simply generated.
【0030】次いで、制御信号CTLを対象機器に対し
て出力し、処理を終了する。Next, the control signal CTL is output to the target device, and the process ends.
【0031】以上のように本実施形態では、マイクロホ
ン1A,1Bから入力される音声信号に基づいて発声者
が着座している座席、すなわち発声者が運転者か、アシ
スタントかを特定し、発声者が特定された音声信号の内
容を認識するとともに、認識した音声信号の内容から、
発声者によって指定された車載機器及びその操作内容を
判別し、判別された車載機器に対して判別された操作が
発声者に許可されているとき、その車載機器に対して対
応する制御信号を出力するようにしたので、運転者の他
にアシスタントが乗車している場合でも、それぞれが音
声による車載装置の操作を適切に行うことができる。As described above, in the present embodiment, the seat on which the speaker is seated, that is, whether the speaker is a driver or an assistant is specified based on the audio signals input from the microphones 1A and 1B, and the speaker is identified. Recognizes the content of the identified audio signal, and from the content of the recognized audio signal,
Determines the in-vehicle device specified by the speaker and the contents of the operation, and outputs a corresponding control signal to the in-vehicle device when the determined operation is permitted for the identified in-vehicle device. Therefore, even when the assistant is riding in addition to the driver, each of them can appropriately operate the in-vehicle device by voice.
【0032】また、発声者の座席に応じて制御内容の詳
細を決定するようにしたので、例えばウインドウの開閉
やスピーカの音量調整などを、より適切に行うことがで
きる。Further, since the details of the control contents are determined according to the speaker's seat, for example, opening and closing of a window and volume adjustment of a speaker can be performed more appropriately.
【0033】さらに、運転操作に関連する車載機器に対
する操作は、運転者が発声したときのみ許可するように
したので、アシスタントの音声による指示で運転操作に
関連する車載機器が運転者の意に反して操作されること
を防止することができる。Further, since the operation on the on-vehicle device related to the driving operation is permitted only when the driver utters, the in-vehicle device related to the driving operation is inconsistent with the driver's intention by the voice instruction of the assistant. Operation can be prevented.
【0034】本実施形態では、音声信号調整部2が発声
者特定手段に相当し、音声認識部3が音声認識手段に相
当する。In the present embodiment, the voice signal adjusting unit 2 corresponds to a speaker specifying unit, and the voice recognizing unit 3 corresponds to a voice recognizing unit.
【0035】なお本発明は上述した実施形態に限るもの
ではなく、種々の変形が可能である。例えば、マイクロ
ホンは、2個に限るものではなく、例えば後部座席に対
応して配置し、3個以上としてもよい。また、マイクロ
ホンの設置場所は、ショルダベルト部に限らず、例えば
ヘッドレストから着座した乗員の口の近傍に延びるアー
ムを設けて、そのアームに配置するようにしてもよい。The present invention is not limited to the embodiment described above, and various modifications are possible. For example, the number of microphones is not limited to two. For example, three or more microphones may be arranged corresponding to a rear seat. The microphone is not limited to be installed at the shoulder belt portion. For example, an arm extending from the headrest near the mouth of the occupant seated on the headrest may be provided and arranged on the arm.
【0036】[0036]
【発明の効果】以上詳述したように、請求項1または2
に記載の発明によれば、複数のマイクロホンから入力さ
れる音声信号に基づいて発声者が着座している座席が特
定され、特定された座席に対応するマイクロホンから入
力される音声信号の内容が認識され、認識された音声信
号の内容から、特定された座席の乗員によって指定され
た車載機器及びその操作内容が判別され、特定された座
席、操作対象機器及び操作内容に応じた制御信号の出力
が行われるので、車両に複数の乗員が乗車している場合
でも、それぞれの乗員が音声による車載装置の操作を適
切に行うことができる。As described in detail above, claim 1 or 2
According to the invention described in the above, the seat on which the speaker is seated is specified based on the audio signals input from the plurality of microphones, and the content of the audio signal input from the microphone corresponding to the specified seat is recognized. Then, from the content of the recognized voice signal, the in-vehicle device specified by the occupant of the specified seat and the operation content thereof are determined, and the control signal corresponding to the specified seat, the operation target device, and the operation content is output. Therefore, even when a plurality of occupants are in the vehicle, each occupant can appropriately operate the in-vehicle device by voice.
【図1】本発明の一実施形態にかかる車両用音声入力装
置の構成を示すブロック図である。FIG. 1 is a block diagram showing a configuration of a vehicle voice input device according to an embodiment of the present invention.
【図2】図1の音声信号調整部における処理を示すフロ
ーチャートである。FIG. 2 is a flowchart showing a process in an audio signal adjustment unit in FIG. 1;
【図3】図1の音声認識部における処理を示すフローチ
ャートである。FIG. 3 is a flowchart illustrating a process in a voice recognition unit in FIG. 1;
【図4】マイクロホンの配置を説明するため図である。FIG. 4 is a diagram for explaining the arrangement of microphones.
1A、1B マイクロホン 2 音声信号調整部(発声者特定手段) 3 音声認識部(音声認識手段) 1A, 1B microphone 2 Voice signal adjustment unit (speaker identification unit) 3 Voice recognition unit (voice recognition unit)
Claims (4)
し、車載機器に対して制御信号を入力するための車両用
音声入力装置において、 前記車両の複数の座席に対応して配置された複数のマイ
クロホンと、 前記複数のマイクロホンから入力される音声信号に基づ
いて発声者が着座している座席を特定する発声者特定手
段と、 前記発声者特定手段により特定された座席に対応するマ
イクロホンから入力される音声信号の内容を認識する音
声認識手段とを備え、 前記音声認識手段は、認識した音声信号の内容から、前
記特定された座席の乗員によって指定された車載機器及
びその操作内容を判別し、前記判別された車載機器に対
する前記判別された操作が、前記特定された座席の乗員
に許可されているとき、前記判別された車載機器に対し
て、前記判別した操作に対応する制御信号を出力するこ
と特徴とする車両用音声入力装置。1. A vehicular voice input device for recognizing voice content uttered by an occupant of a vehicle and inputting a control signal to an on-vehicle device, wherein the voice input device is arranged corresponding to a plurality of seats of the vehicle. A plurality of microphones, a speaker identification unit that identifies a seat where the speaker is seated based on audio signals input from the plurality of microphones, and a microphone corresponding to the seat identified by the speaker identification unit. Voice recognition means for recognizing the content of the input voice signal, wherein the voice recognition means determines on-board equipment specified by the occupant of the specified seat and its operation content from the content of the recognized voice signal. Then, when the determined operation on the determined in-vehicle device is permitted to the occupant of the specified seat, the determined in-vehicle device is Vehicle voice input device comprising outputting a control signal corresponding to the serial was determined operation.
し、車載機器に対して制御信号を入力するための車両用
音声入力装置において、 前記車両の複数の座席に対応して配置された複数のマイ
クロホンと、 前記複数のマイクロホンから入力される音声信号に基づ
いて発声者が着座している座席を特定する発声者特定手
段と、 前記発声者特定手段により特定された座席に対応するマ
イクロホンから入力される音声信号の内容を認識する音
声認識手段とを備え、 前記音声認識手段は、認識した音声信号の内容から、前
記特定された座席の乗員によって指定された車載機器及
びその操作内容を判別し、前記特定された座席に応じ
て、前記判別された車載機器に対する制御内容を決定
し、該決定した制御内容に対応する制御信号を出力する
こと特徴とする車両用音声入力装置。2. A vehicle voice input device for recognizing the content of voice uttered by an occupant of a vehicle and inputting a control signal to on-vehicle equipment, wherein the voice input device is arranged corresponding to a plurality of seats of the vehicle. A plurality of microphones, a speaker identification unit that identifies a seat where the speaker is seated based on audio signals input from the plurality of microphones, and a microphone corresponding to the seat identified by the speaker identification unit. Voice recognition means for recognizing the content of the input voice signal, wherein the voice recognition means determines on-board equipment specified by the occupant of the specified seat and its operation content from the content of the recognized voice signal. And determining a control content for the determined in-vehicle device according to the specified seat, and outputting a control signal corresponding to the determined control content. Vehicle for the voice input device to be.
席が運転席であるときは、当該車両の運転操作に関連す
る車載装置の操作の実行を許可し、前記特定された座席
が運転席以外の座席であるときは、当該車両の運転操作
に関連する車載装置の操作を実行不可とすることを特徴
とする請求項1に記載の車両用音声入力装置。3. The voice recognition means, when the specified seat is a driver's seat, permits execution of an operation of an in-vehicle device related to a driving operation of the vehicle, and the specified seat is a driver's seat. 2. The vehicle voice input device according to claim 1, wherein when the seat is a seat other than the vehicle, the operation of the in-vehicle device related to the driving operation of the vehicle is disabled. 3.
席に応じて、その座席に対応する車載機器を動作させる
制御信号を出力することを特徴とする請求項2に記載の
車両用音声入力装置。4. The vehicle voice input according to claim 2, wherein the voice recognition unit outputs a control signal for operating an on-vehicle device corresponding to the specified seat according to the specified seat. apparatus.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP23546797A JP3446805B2 (en) | 1997-08-18 | 1997-08-18 | Voice input device for vehicles |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP23546797A JP3446805B2 (en) | 1997-08-18 | 1997-08-18 | Voice input device for vehicles |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH1165587A true JPH1165587A (en) | 1999-03-09 |
JP3446805B2 JP3446805B2 (en) | 2003-09-16 |
Family
ID=16986528
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP23546797A Expired - Fee Related JP3446805B2 (en) | 1997-08-18 | 1997-08-18 | Voice input device for vehicles |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3446805B2 (en) |
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001222291A (en) * | 2000-02-08 | 2001-08-17 | Kenwood Corp | Controller using voice recognition device |
KR20030005457A (en) * | 2001-07-09 | 2003-01-23 | 현대자동차주식회사 | Automatic control system for driving position using speaker recognition |
JP2003345389A (en) * | 2002-05-22 | 2003-12-03 | Nissan Motor Co Ltd | Voice recognition device |
WO2004091977A1 (en) * | 2003-04-14 | 2004-10-28 | Fujitsu Limited | Vehicle information processor |
JP2005350018A (en) * | 2004-06-14 | 2005-12-22 | Honda Motor Co Ltd | On-vehicle electronic control device |
US7120261B1 (en) | 1999-11-19 | 2006-10-10 | Gentex Corporation | Vehicle accessory microphone |
JP2007057805A (en) * | 2005-08-24 | 2007-03-08 | Denso Corp | Information processing apparatus for vehicle |
JP2008001247A (en) * | 2006-06-23 | 2008-01-10 | Kenwood Corp | Agent device, program, and character display method in agent device |
JP2009104020A (en) * | 2007-10-25 | 2009-05-14 | Panasonic Electric Works Co Ltd | Voice recognition device |
JP2012063582A (en) * | 2010-09-16 | 2012-03-29 | Denso Corp | In-vehicle speech recognition device |
JP2013116668A (en) * | 2011-12-02 | 2013-06-13 | Denso Corp | Vehicle device, vehicle communication system, and mobile terminal |
JP2016161754A (en) * | 2015-03-02 | 2016-09-05 | クラリオン株式会社 | Vehicle-mounted device |
JP2019120904A (en) * | 2018-01-11 | 2019-07-22 | トヨタ自動車株式会社 | Information processor, method, and program |
CN111660773A (en) * | 2020-05-29 | 2020-09-15 | 奇瑞汽车股份有限公司 | Sound control window method and system applied to automobile |
CN111824174A (en) * | 2019-03-26 | 2020-10-27 | 本田技研工业株式会社 | Agent device, control method for agent device, and storage medium |
US20210094492A1 (en) * | 2019-09-30 | 2021-04-01 | Cerence Operating Company | Multi-modal keyless multi-seat in-car personalization |
CN113689852A (en) * | 2021-08-09 | 2021-11-23 | 东风汽车集团股份有限公司 | Vehicle-mounted voice control method and system based on sound source positioning |
-
1997
- 1997-08-18 JP JP23546797A patent/JP3446805B2/en not_active Expired - Fee Related
Cited By (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7120261B1 (en) | 1999-11-19 | 2006-10-10 | Gentex Corporation | Vehicle accessory microphone |
US7443988B2 (en) | 1999-11-19 | 2008-10-28 | Gentex Corporation | Vehicle accessory microphone |
JP2001222291A (en) * | 2000-02-08 | 2001-08-17 | Kenwood Corp | Controller using voice recognition device |
KR20030005457A (en) * | 2001-07-09 | 2003-01-23 | 현대자동차주식회사 | Automatic control system for driving position using speaker recognition |
JP2003345389A (en) * | 2002-05-22 | 2003-12-03 | Nissan Motor Co Ltd | Voice recognition device |
WO2004091977A1 (en) * | 2003-04-14 | 2004-10-28 | Fujitsu Limited | Vehicle information processor |
JP2005350018A (en) * | 2004-06-14 | 2005-12-22 | Honda Motor Co Ltd | On-vehicle electronic control device |
US7428454B2 (en) | 2004-06-14 | 2008-09-23 | Honda Motor Co., Ltd. | Electronic control system built into vehicle |
JP2007057805A (en) * | 2005-08-24 | 2007-03-08 | Denso Corp | Information processing apparatus for vehicle |
JP2008001247A (en) * | 2006-06-23 | 2008-01-10 | Kenwood Corp | Agent device, program, and character display method in agent device |
JP2009104020A (en) * | 2007-10-25 | 2009-05-14 | Panasonic Electric Works Co Ltd | Voice recognition device |
JP2012063582A (en) * | 2010-09-16 | 2012-03-29 | Denso Corp | In-vehicle speech recognition device |
JP2013116668A (en) * | 2011-12-02 | 2013-06-13 | Denso Corp | Vehicle device, vehicle communication system, and mobile terminal |
JP2016161754A (en) * | 2015-03-02 | 2016-09-05 | クラリオン株式会社 | Vehicle-mounted device |
JP2019120904A (en) * | 2018-01-11 | 2019-07-22 | トヨタ自動車株式会社 | Information processor, method, and program |
CN111824174A (en) * | 2019-03-26 | 2020-10-27 | 本田技研工业株式会社 | Agent device, control method for agent device, and storage medium |
US20210094492A1 (en) * | 2019-09-30 | 2021-04-01 | Cerence Operating Company | Multi-modal keyless multi-seat in-car personalization |
CN111660773A (en) * | 2020-05-29 | 2020-09-15 | 奇瑞汽车股份有限公司 | Sound control window method and system applied to automobile |
CN113689852A (en) * | 2021-08-09 | 2021-11-23 | 东风汽车集团股份有限公司 | Vehicle-mounted voice control method and system based on sound source positioning |
CN113689852B (en) * | 2021-08-09 | 2023-11-10 | 东风汽车集团股份有限公司 | Vehicle-mounted voice control method and system based on sound source localization |
Also Published As
Publication number | Publication date |
---|---|
JP3446805B2 (en) | 2003-09-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3446805B2 (en) | Voice input device for vehicles | |
US6230138B1 (en) | Method and apparatus for controlling multiple speech engines in an in-vehicle speech recognition system | |
US6587824B1 (en) | Selective speaker adaptation for an in-vehicle speech recognition system | |
EP1695873B1 (en) | Vehicle speech recognition system | |
EP1908640B1 (en) | Voice control of vehicular elements from outside a vehicular cabin | |
US6889189B2 (en) | Speech recognizer performance in car and home applications utilizing novel multiple microphone configurations | |
WO2017081960A1 (en) | Voice recognition control system | |
CN108885868B (en) | Vehicle effect sound generating device | |
CN108885866B (en) | Vehicle effect sound generating device | |
CN109074801B (en) | Vehicle effect sound generating device | |
JPH11219193A (en) | On-vehicle voice recognizing device | |
CN113157080A (en) | Instruction input method for vehicle, storage medium, system and vehicle | |
CN108885867B (en) | Vehicular effect sound generating device | |
CN111724798B (en) | Vehicle-mounted device control system, vehicle-mounted device control apparatus, vehicle-mounted device control method, and storage medium | |
JP2020144285A (en) | Agent system, information processing device, control method for mobile body mounted apparatus, and program | |
CN114194122B (en) | Safety prompt system and automobile | |
JP7392827B2 (en) | Speech recognition device and speech recognition method | |
CN114475425A (en) | Driver assistance system and vehicle having the same | |
JP2002171587A (en) | Sound volume regulator for on-vehicle acoustic device and sound recognition device using it | |
JPH07146698A (en) | Voice recognizing device for vehicle | |
JP2014181015A (en) | In-cabin conversation support device | |
CN108885865B (en) | Vehicle effect sound generating device | |
JP2017044852A (en) | Vocalization direction specification device | |
JP2024128800A (en) | Speech recognition method and speech recognition device | |
JP3679617B2 (en) | Audio transmission method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080704 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090704 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100704 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100704 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110704 Year of fee payment: 8 |
|
LAPS | Cancellation because of no payment of annual fees |