JP2018005163A - 運転支援装置および運転支援方法 - Google Patents

Abstract

【課題】運転者の応答が無くても、運転者の異常を検出することができる運転支援装置および運転支援方法を提供する。
【解決手段】音声取得部１１は、車両の運転者が発する言語および言語でない非言語を含む音声を表す音声情報を取得する。特徴量抽出部１２は、音声取得部１１で取得された音声情報から特徴量を抽出し、抽出した特徴量が非言語の特徴量であるか否かを判断する。抽出された特徴量が非言語の特徴量でないと判断された場合、音声認識部１３は、特徴量抽出部１２で抽出された特徴量に基づいて、音声を認識する。判断部１４は、特徴量抽出部で抽出された特徴量、または音声認識部で認識された音声を表す認識音声情報に基づいて、運転者に異常が発生しているか否かを判断する。運転者に異常が発生していると判断された場合、運転制御部１６は、車両の運転を制御する。
【選択図】図１

Description

本発明は、車両の運転を支援する運転支援装置および運転支援方法に関する。

運転者が運転操作を行うことなく、車両の運転を行う自動運転の機能を備える車両が普及してきている。自動運転中の死亡事故を防ぐために、自動運転中の運転者に異常があるか否かを確認する必要がある。特に、自動運転から手動運転に切り替わるときには、運転者が運転操作を行うことができる状態であるか否かを確認する必要がある。

自動運転を想定したものではないが、運転者の居眠りを検知し、運転者が運転操作を行うことができる状態であるか否かを検知する技術がある（たとえば、特許文献１〜３参照）。

特許文献１，２に開示される技術では、運転者に応答を促すような音声、たとえば運転者に呼びかける呼びかけ音声を出力し、運転者からの応答を音声として検出することによって、運転者が運転操作を行うことができる状態であるか否かを判断する。特許文献２に開示される技術では、呼びかけに対して応答が返ってこない回数をカウントし、一定回数の呼びかけに運転者が応答しない場合、居眠りとして検出する。

特許文献３に開示される技術では、運転者への呼びかけを行うことに加えて、運転者が居眠りしやすい状態になっているか否かを、タイマーまたは温度センサを利用して検出することによって、居眠りしているか否かを判断する。

特開２０００−１１８２６０号公報 特開２０１３−０３７０９７号公報 特開２００１−１６３０８０号公報

前述の特許文献１〜３に開示される技術では、運転者が呼びかけに対して応答する必要があるので、運転者にとって煩わしいという問題がある。また、運転者の応答があった場合でも、運転者に異常が生じていることがあり、運転者に異常が生じているか否かを正しく判断することができないという問題がある。

前述の特許文献３に開示される技術では、運転者が居眠りしやすい状態を検出するために、温度センサなどの、音声以外を検出する手段が必要になるという問題がある。

本発明の目的は、運転者の応答が無くても、運転者の異常を検出することができる運転支援装置および運転支援方法を提供することである。

本発明の運転支援装置は、車両の運転者が発する言語および言語でない非言語を含む音声を表す音声情報を取得する音声取得部と、音声取得部によって取得された音声情報から、音声情報が表す音声の特徴を表す特徴量を抽出し、抽出した特徴量が、非言語の音声を表す非言語音声情報の特徴量であるか否かを判断する特徴量抽出部と、特徴量抽出部によって抽出された特徴量が非言語音声情報の特徴量でないと判断された場合、特徴量抽出部によって抽出された特徴量に基づいて、音声を認識する音声認識部と、特徴量抽出部によって抽出された特徴量、または音声認識部によって認識された音声を表す認識音声情報に基づいて、運転者に異常が発生しているか否かを判断する判断部と、判断部によって運転者に異常が発生していると判断された場合、車両の運転を制御する運転制御部とを備えることを特徴とする。

また本発明の運転支援装置は、車両の運転者が発する言語および言語でない非言語を含む音声を表す音声情報を取得する音声取得部と、音声取得部によって取得された音声情報から、音声情報が表す音声の特徴を表す特徴量を抽出する特徴量抽出部と、特徴量抽出部によって抽出された特徴量と、運転者の平常時の音声の特徴を表す特徴量との比較結果に基づいて、運転者に異常が発生しているか否かを判断する判断部と、判断部によって運転者に異常が発生していると判断された場合、車両の運転を制御する運転制御部とを備えることを特徴とする。

本発明の運転支援方法は、車両の運転者が発する言語および言語でない非言語を含む音声を表す音声情報を取得し、取得した音声情報から、音声情報が表す音声の特徴を表す特徴量を抽出し、抽出した特徴量が、非言語の音声を表す非言語音声情報の特徴量であるか否かを判断し、抽出した特徴量が非言語音声情報の特徴量でないと判断した場合、抽出した特徴量に基づいて、音声を認識し、抽出した特徴量、または認識された音声を表す認識音声情報に基づいて、運転者に異常が発生しているか否かを判断し、運転者に異常が発生していると判断した場合、車両の運転を制御することを特徴とする。

また本発明の運転支援方法は、車両の運転者が発する言語および言語でない非言語を含む音声を表す音声情報を取得し、取得した音声情報から、音声情報が表す音声の特徴を表す特徴量を抽出し、抽出した特徴量と、運転者の平常時の音声の特徴を表す特徴量との比較結果に基づいて、運転者に異常が発生しているか否かを判断し、運転者に異常が発生していると判断した場合、車両の運転を制御することを特徴とする。

本発明の運転支援装置によれば、車両の運転者が発する言語および非言語を含む音声を表す音声情報が、音声取得部によって取得される。音声取得部によって取得された音声情報から、音声情報が表す音声の特徴を表す特徴量が、特徴量抽出部によって抽出され、抽出された特徴量が、非言語の音声を表す非言語音声情報の特徴量であるか否かが判断される。特徴量抽出部によって抽出された特徴量が非言語音声情報の特徴量でないと判断された場合、特徴量抽出部によって抽出された特徴量に基づいて、音声認識部によって音声が認識される。特徴量抽出部によって抽出された特徴量、または音声認識部によって認識された音声を表す認識音声情報に基づいて、運転者に異常が発生しているか否かが、判断部によって判断される。運転者に異常が発生していると判断部によって判断された場合、車両の運転が運転制御部によって制御される。これによって、運転者の応答が無くても、運転者の異常を検出することができる。

また本発明の運転支援装置によれば、車両の運転者が発する言語および非言語を含む音声を表す音声情報が、音声取得部によって取得される。音声取得部によって取得された音声情報から、音声情報が表す音声の特徴を表す特徴量が、特徴量抽出部によって抽出される。特徴量抽出部によって抽出された特徴量と、運転者の平常時の音声の特徴を表す特徴量との比較結果に基づいて、運転者に異常が発生しているか否かが、判断部によって判断される。運転者に異常が発生していると判断部によって判断された場合、車両の運転が運転制御部によって制御される。これによって、運転者の応答が無くても、運転者の異常を検出することができる。

本発明の運転支援方法によれば、車両の運転者が発する言語および非言語を含む音声を表す音声情報が取得される。取得された音声情報から、音声情報が表す音声の特徴を表す特徴量が抽出される。抽出された特徴量が、非言語の音声を表す非言語音声情報の特徴量であるか否かが判断される。抽出された特徴量が非言語音声情報の特徴量でないと判断された場合、抽出された特徴量に基づいて、音声が認識される。抽出された特徴量、または認識された音声を表す認識音声情報に基づいて、運転者に異常が発生しているか否かが判断される。運転者に異常が発生していると判断された場合、車両の運転が制御される。これによって、運転者の応答が無くても、運転者の異常を検出することができる。

また本発明の運転支援方法によれば、車両の運転者が発する言語および非言語を含む音声を表す音声情報が取得される。取得された音声情報から、音声情報が表す音声の特徴を表す特徴量が抽出される。抽出された特徴量と、運転者の平常時の音声の特徴を表す特徴量との比較結果に基づいて、運転者に異常が発生しているか否かが判断される。運転者に異常が発生していると判断された場合、車両の運転が制御される。これによって、運転者の応答が無くても、運転者の異常を検出することができる。

本発明の第１の実施の形態における運転支援装置１を含む車載装置１０の構成を示すブロック図である。 本発明の第１の実施の形態における運転支援装置１のハードウェア構成を示すブロック図である。 本発明の第１の実施の形態の運転支援装置１における異常確認処理に関する処理手順を示すフローチャートである。 本発明の第２の実施の形態における運転支援装置２を含む車載装置４０の構成を示すブロック図である。 本発明の第２の実施の形態の運転支援装置２における異常確認処理に関する処理手順を示すフローチャートである。 本発明の第３の実施の形態における運転支援装置３を含む車載装置５０の構成を示すブロック図である。 本発明の第３の実施の形態の運転支援装置３における異常確認処理に関する処理手順を示すフローチャートである。 本発明の第３の実施の形態の運転支援装置３における異常確認処理に関する処理手順の他の例を示すフローチャートである。 本発明の第４の実施の形態における運転支援装置４の構成を示すブロック図である。 本発明の第５の実施の形態における運転支援装置５の構成を示すブロック図である。

＜第１の実施の形態＞
図１は、本発明の第１の実施の形態における運転支援装置１を含む車載装置１０の構成を示すブロック図である。車載装置１０は、運転支援装置１、音声入力部２１、非言語認識データベース２２、言語認識データベース２３および音声出力部２４を備えて構成される。運転支援装置１は、音声取得部１１、特徴量抽出部１２、音声認識部１３、判断部１４、主制御部１５、運転制御部１６、音声出力制御部１７および通信部１８を備えて構成される。

車載装置１０は、車両、たとえば自動車に搭載可能に構成される。本実施の形態では、車載装置１０は、経路を案内するナビゲーション機能を有するナビゲーション装置によって実現される。本発明の他の実施の形態である運転支援方法は、本実施の形態の運転支援装置１によって実行される。

音声入力部２１は、マイクロフォンによって実現される。音声入力部２１には、車内の音声が入力される。たとえば、音声入力部２１には、運転者の音声が入力される。音声は、言語、および言語でない非言語を含む。音声入力部２１は、音声取得部１１に接続される。音声入力部２１は、入力された音声を表す音声情報を音声取得部１１に与える。

音声取得部１１は、音声入力部２１から与えられる音声情報を取得する。音声取得部１１は、取得した音声情報がアナログ信号である場合は、アナログ／ディジタル（Ａ／Ｄ）変換を行い、ＰＣＭ（Pulse Code Modulation）形式などのディジタル形式の信号に変換する。音声取得部１１は、音声認識部１３による音声の認識率を向上させるために、ノイズリダクションおよびビームフォーミングなどの処理を行ってもよい。音声取得部１１は、Ａ／Ｄ変換などの処理を施した音声情報を特徴量抽出部１２に与える。

特徴量抽出部１２は、非言語認識データベース２２に接続される。非言語認識データベース２２は、たとえばハードディスクドライブ（Hard Disk Drive；略称：ＨＤＤ）装置、または半導体メモリなどの記憶装置によって実現される。非言語認識データベース２２は、運転支援装置１の利用者、たとえば車両の運転者が発する、うめき声、いびき、叫び声などの非言語の音声を認識するための非言語認識情報を記憶する。

特徴量抽出部１２は、音声取得部１１から与えられる音声情報から、音声情報が表す音声の特徴を表す特徴量（以下「音声情報の特徴量」という場合がある）を抽出する。具体的には、特徴量抽出部１２は、音声取得部１１から与えられる音声情報から、運転支援装置１の利用者、たとえば運転者の発話などの内容に該当する音声区間を検出し、検出した音声区間の音声情報の特徴量を抽出する。音声情報の特徴量は、たとえば言語を話す速さ（以下「話速」という場合がある）、声の高さ、声の大きさである。

特徴量抽出部１２は、非言語認識データベース２２に記憶される非言語認識情報を用いて、抽出した特徴量が、非言語の音声を表す非言語音声情報の特徴量であるか否かを判断する。特徴量抽出部１２は、抽出した特徴量が非言語音声情報の特徴量であると判断した場合、抽出した特徴量を判断部１４に与える。特徴量抽出部１２は、抽出した特徴量が非言語音声情報の特徴量でないと判断した場合は、抽出した特徴量を音声認識部１３に与える。

音声認識部１３は、言語認識データベース２３に接続される。言語認識データベース２３は、たとえばＨＤＤ装置、または半導体メモリなどの記憶装置によって実現される。言語認識データベース２３は、言語を認識するための言語認識情報を記憶する。

音声認識部１３は、言語認識データベース２３に記憶される言語認識情報を用いて、特徴量抽出部１２から与えられる音声情報の特徴量に基づいて、音声を認識する。音声認識部１３は、認識した音声を表す認識音声情報を判断部１４に与える。

判断部１４は、特徴量抽出部１２から与えられる音声情報の特徴量、または音声認識部１３から与えられる認識音声情報に基づいて、運転者に異常が発生しているか否かを判断する。判断部１４は、運転者に異常が発生しているか否かの判断結果を主制御部１５に与える。

具体的には、判断部１４は、特徴量抽出部１２から音声情報の特徴量が与えられる場合、与えられる音声情報の特徴量に基づいて、運転者に異常が発生しているか否かを判断する。

判断部１４は、音声認識部１３から認識音声情報が与えられる場合、与えられる認識音声情報に基づいて、運転者に異常が発生しているか否かを判断する。

この場合、判断部１４は、与えられる認識音声情報に基づいて、認識された音声が、運転者の異常を表す音声であるか否かを判断する。判断部１４は、認識された音声が、運転者の異常を表す音声であると判断した場合、運転者に異常が発生していると判断する。判断部１４は、認識された音声が、運転者の異常を表す音声でないと判断した場合、運転者に異常が発生していないと判断する。

主制御部１５は、判断部１４から与えられる判断結果に基づいて、運転制御部１６、音声出力制御部１７および通信部１８を制御する。たとえば、判断部１４から運転者に異常が発生しているという判断結果が与えられた場合、主制御部１５は、車両を路肩などに停車させる運転制御を行うように、運転制御部１６に指示を与える。また主制御部１５は、運転者の安否を確認する音声を音声出力部２４から出力させる制御を行うように、音声出力制御部１７に指示を与える。また主制御部１５は、車両の外部と通信を行うように、通信部１８に指示を与える。

運転制御部１６は、主制御部１５から与えられる指示に基づいて、車両の運転に関する制御を行う。たとえば主制御部１５から、車両を路肩などに停車させる運転制御を行うように指示が与えられた場合、運転制御部１６は、不図示のフットブレーキ、サイドブレーキ、方向変更装置などを制御して、車両を路肩などに停車させる。

音声出力制御部１７は、主制御部１５から与えられる指示に基づいて、音声出力部２４から音声を出力させる。具体的には、音声出力制御部１７は、運転者の安否を確認する音声などを、音声出力部２４で取り扱い可能な音声信号に変換して、音声出力部２４に与える。

音声出力部２４は、音声出力制御部１７から与えられる音声信号が表す音声を出力する。音声出力部２４は、スピーカによって実現される。

通信部１８は、主制御部１５から与えられる指示に基づいて、車両の外部と通信を行う。通信部１８は、たとえば、運転者に異常が発生した場合の連絡先として予め定める連絡先と通信を行い、運転者に異常が発生したことを知らせる。

図２は、本発明の第１の実施の形態における運転支援装置１のハードウェア構成を示すブロック図である。運転支援装置１は、プロセッサ３１およびメモリ３２を含んで構成される。

運転支援装置１における音声取得部１１、特徴量抽出部１２、音声認識部１３、判断部１４、主制御部１５、運転制御部１６、音声出力制御部１７および通信部１８の各機能は、処理回路によって実現される。すなわち、処理回路は、音声取得部１１、特徴量抽出部１２、音声認識部１３、判断部１４、主制御部１５、運転制御部１６、音声出力制御部１７および通信部１８を備える。

処理回路には、専用のハードウェアが適用されてもよいし、メモリに記憶されるプログラムを実行するプロセッサが適用されてもよい。プロセッサは、たとえば中央処理装置、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、ＤＳＰ（Digital Signal Processor）などである。

処理回路が専用のハードウェアである場合、処理回路は、たとえば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field-Programmable Gate Array）、またはこれらを組み合わせたものが該当する。音声取得部１１、特徴量抽出部１２、音声認識部１３、判断部１４、主制御部１５、運転制御部１６、音声出力制御部１７および通信部１８の各機能は、それぞれ、複数の処理回路で実現されてもよいし、各部の機能をまとめて一つの処理回路で実現されてもよい。

処理回路がプロセッサである場合、音声取得部１１、特徴量抽出部１２、音声認識部１３、判断部１４、主制御部１５、運転制御部１６、音声出力制御部１７および通信部１８の各機能は、ソフトウェア、ファームウェア、またはソフトウェアとファームウェアとの組み合わせによって実現される。ソフトウェアおよびファームウェアは、プログラムとして記述され、メモリに記憶される。

図２に示すように、処理回路に適用されるプロセッサ３１は、メモリ３２に記憶されたプログラムを読み出して実行することによって、各部の機能を実現する。すなわち、運転支援装置１は、処理回路によって実行されるときに、車両の運転者が発する言語および言語でない非言語を含む音声を表す音声情報を取得するステップと、取得した音声情報から、音声情報が表す音声の特徴を表す特徴量を抽出するステップと、抽出した特徴量が、非言語の音声を表す非言語音声情報の特徴量であるか否かを判断するステップと、抽出した特徴量が非言語音声情報の特徴量でないと判断した場合、抽出した特徴量に基づいて、音声を認識するステップと、抽出した特徴量、または認識された音声を表す認識音声情報に基づいて、運転者に異常が発生しているか否かを判断するステップと、運転者に異常が発生していると判断した場合、車両の運転を制御するステップと、が結果的に実行されることになるプログラムを記憶するためのメモリ３２を備える。

また、これらのプログラムは、音声取得部１１、特徴量抽出部１２、音声認識部１３、判断部１４、主制御部１５、運転制御部１６、音声出力制御部１７および通信部１８が行う処理の手順および方法をコンピュータに実行させるものであるともいえる。

ここで、メモリ３２には、たとえば、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、フラッシュメモリ、ＥＰＲＯＭ（Electrically Programmable Read Only Memory）、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read Only Memory）などの、不揮発性または揮発性の半導体メモリ、ならびに磁気ディスク、フレキシブルディスク、光ディスク、コンパクトディスク、ミニディスク、ＤＶＤ（Digital Versatile Disk）およびそのドライブ装置の少なくともいずれか１つが含まれる。

以上のように、本実施の形態では、音声取得部１１、特徴量抽出部１２、音声認識部１３、判断部１４、主制御部１５、運転制御部１６、音声出力制御部１７および通信部１８の各機能は、ハードウェアおよびソフトウェアなどのいずれか一方で実現される構成について説明した。しかし、これらの構成に限られるものではなく、音声取得部１１、特徴量抽出部１２、音声認識部１３、判断部１４、主制御部１５、運転制御部１６、音声出力制御部１７および通信部１８の一部を専用のハードウェアで実現し、別の一部をソフトウェアなどで実現する構成であってもよい。たとえば、主制御部１５については専用のハードウェアとしての処理回路でその機能を実現し、それ以外についてはプロセッサとしての処理回路がメモリ３２に記憶されたプログラムを読み出して実行することによって、その機能を実現することが可能である。

以上のように、処理回路は、ハードウェア、ソフトウェアなど、またはこれらの組み合わせによって、前述の各機能を実現することができる。

図３は、本発明の第１の実施の形態の運転支援装置１における異常確認処理に関する処理手順を示すフローチャートである。図３に示すフローチャートの各ステップは、運転支援装置１を構成する音声取得部１１、特徴量抽出部１２、音声認識部１３、判断部１４、主制御部１５、運転制御部１６および通信部１８によって実行される。図３に示すフローチャートの処理は、運転支援装置１の電源が投入されると開始され、ステップａ１に移行する。図３に示すフローチャートは、予め定める異常確認周期毎に繰り返し実行される。異常確認周期は、運転者に異常が発生しているか否かを確認する周期であり、たとえば、３０分、１時間などである。異常確認周期は、利用者が任意に設定可能に構成される。

ステップａ１において、音声取得部１１は、車内の音声情報を取得する。ステップａ１の処理が終了すると、ステップａ２に移行する。

ステップａ２において、特徴量抽出部１２は、音声取得部１１によって取得された音声情報から特徴量を抽出する。ステップａ２の処理が終了すると、ステップａ３に移行する。

ステップａ３において、特徴量抽出部１２は、非言語認識データベース２２に記憶される非言語認識情報を用いて、抽出した特徴量が、非言語の音声を表す非言語音声情報の特徴量であるか否かを判断する。特徴量抽出部１２は、抽出した特徴量が非言語音声情報の特徴量であると判断した場合は、抽出した特徴量を判断部１４に与えて、ステップａ５に移行する。特徴量抽出部１２は、抽出した特徴量が非言語音声情報の特徴量でないと判断した場合は、抽出した特徴量を音声認識部１３に与えて、ステップａ４に移行する。

ステップａ４において、音声認識部１３は、特徴量抽出部１２によって抽出された特徴量に基づいて、音声を認識する。音声認識部１３は、認識した音声を表す認識音声情報を判断部１４に与える。ステップａ４の処理が終了すると、ステップａ５に移行する。

ステップａ５において、判断部１４は、ステップａ３で与えられた音声情報の特徴量、またはステップａ４で与えられた認識音声情報に基づいて、運転者に異常が発生しているか否かを判断する。

具体的には、ステップａ４からステップａ５に移行した場合、ステップａ５において、判断部１４は、ステップａ４で与えられた認識音声情報に基づいて、音声認識部１３によって認識された音声が、運転者の異常を表す音声であるか否かを判断する。判断部１４は、運転者の異常を表す音声であると判断すると、運転者に異常が発生していると判断して、ステップａ６に移行する。判断部１４は、運転者の異常を表す音声でないと判断すると、運転者に異常は発生していないと判断し、全ての処理手順を終了する。

ステップａ３からステップａ５に移行した場合、ステップａ５において、判断部１４は、特徴量抽出部１２から与えられた音声情報の特徴量に基づいて、運転者に異常が発生しているか否かを判断する。運転者に異常が発生していると判断された場合は、ステップａ６に移行し、運転者に異常が発生していないと判断された場合は、全ての処理手順を終了する。

ステップａ６において、主制御部１５は、運転者の安否を確認する音声を音声出力部２４から出力するように、音声出力制御部１７を制御する。ステップａ６の処理が終了すると、ステップａ７に移行する。

ステップａ７において、主制御部１５は、運転者の安全が確認されたか否かを判断する。運転者の安全が確認されたと判断された場合は、全ての処理手順を終了し、運転者の安全が確認されていないと判断された場合は、ステップａ８に移行する。

ステップａ８において、主制御部１５は、車両を路肩に停車するように、運転制御部１６を制御する。これによって運転制御部１６は、車両を路肩に停車するように、車両の各部を制御する。ステップａ８の処理が終了すると、ステップａ９に移行する。

ステップａ９において、通信部１８は、主制御部１５からの指示に従って、車両の外部と通信を行う。ステップａ９の処理が終了すると、全ての処理手順を終了する。

以上のように本実施の形態によれば、車両の運転者が発する言語および非言語を含む音声を表す音声情報が、音声取得部１１によって取得される。音声取得部１１によって取得された音声情報から、音声情報の特徴量が、特徴量抽出部１２によって抽出される。抽出された特徴量が非言語音声情報の特徴量であるか否かが判断される。特徴量抽出部１２によって抽出された特徴量が非言語音声情報の特徴量でないと判断された場合、特徴量抽出部１２によって抽出された特徴量に基づいて、音声認識部１３によって音声が認識される。特徴量抽出部１２によって抽出された特徴量、または音声認識部１３によって認識された音声を表す認識音声情報に基づいて、運転者に異常が発生しているか否かが、判断部１４によって判断される。運転者に異常が発生していると判断部１４によって判断された場合、車両の運転が運転制御部１６によって制御される。これによって、運転者の応答が無くても、運転者の異常を検出することができる。

＜第２の実施の形態＞
図４は、本発明の第２の実施の形態における運転支援装置２を含む車載装置４０の構成を示すブロック図である。車載装置４０は、運転支援装置２、音声入力部２１、非言語認識データベース２２、言語認識データベース２３、音声出力部２４および構文解析データベース４２を備えて構成される。運転支援装置２は、第１の実施の形態の運転支援装置１の構成に、さらに構文解析部４１を備えて構成される。すなわち、運転支援装置２は、音声取得部１１、特徴量抽出部１２、音声認識部１３、判断部１４、主制御部１５、運転制御部１６、音声出力制御部１７、通信部１８および構文解析部４１を備えて構成される。

車載装置４０は、車両、たとえば自動車に搭載可能に構成される。本実施の形態では、車載装置４０は、経路を案内するナビゲーション機能を有するナビゲーション装置によって実現される。本発明の他の実施の形態である運転支援方法は、本実施の形態の運転支援装置２によって実行される。

本実施の形態の運転支援装置２は、第１の実施の形態の運転支援装置１と同一の構成を含んでいるので、同一の構成については同一の参照符号を付して、共通する説明を省略する。本実施の形態では、音声認識部１３は、認識した音声を表す認識音声情報を構文解析部４１に与える。

構文解析部４１は、構文解析データベース４２に接続される。構文解析データベース４２は、たとえばＨＤＤ装置、または半導体メモリなどの記憶装置によって実現される。構文解析データベース４２は、音声認識部１３で認識された音声に含まれる構文を解析するための構文解析情報を記憶する。構文解析情報は、たとえば、構文解析辞書を含む。構文解析辞書は、たとえば、主語となる文言、述語となる文言、および目的語となる文言の具体例、ならびに運転者が発すると予測される構文の具体例を含む。

構文解析部４１は、構文解析データベース４２に記憶される構文解析情報を用いて、音声認識部１３から与えられる認識音声情報に基づいて、音声認識部１３で認識された音声の構文を解析し、運転者が発した音声の主語、述語および目的語などを同定する。構文解析部４１は、構文の解析結果を判断部１４に与える。

判断部１４は、構文解析部４１から与えられる構文の解析結果に基づいて、音声認識部１３で認識された音声が、運転者の異常を表す音声か否かを判断する。判断部１４に特徴量抽出部１２から音声情報の特徴量が与えられる場合の判断部１４の動作は、第１の実施の形態と同様である。

図５は、本発明の第２の実施の形態の運転支援装置２における異常確認処理に関する処理手順を示すフローチャートである。図５に示すフローチャートの各ステップは、運転支援装置２を構成する音声取得部１１、特徴量抽出部１２、音声認識部１３、判断部１４、主制御部１５、運転制御部１６、通信部１８および構文解析部４１によって実行される。図５に示すフローチャートは、図３に示すフローチャートと同一のステップを含んでいるので、同一のステップには同一のステップ番号を付して、共通する説明を省略する。

図５に示すフローチャートの処理は、運転支援装置２の電源が投入されると開始され、ステップａ１に移行する。図５に示すフローチャートは、予め定める異常確認周期毎に繰り返し実行される。異常確認周期は、運転者に異常が発生しているか否かを確認する周期であり、たとえば、３０分、１時間などである。異常確認周期は、利用者が任意に設定可能に構成される。

ステップａ１およびステップａ２の処理が行われると、ステップａ３に移行する。

ステップａ３において、抽出した特徴量が非言語音声情報の特徴量であると判断された場合は、特徴量抽出部１２は、抽出した特徴量を判断部１４に与えて、ステップａ５に移行する。抽出した特徴量が非言語音声情報の特徴量でないと判断された場合は、特徴量抽出部１２は、抽出した特徴量を音声認識部１３に与えて、ステップａ４に移行する。

ステップａ４の処理が終了すると、ステップｂ１に移行する。ステップｂ１において、構文解析部４１は、構文解析データベース４２に記憶される構文解析情報を用いて、音声認識部１３から与えられた音声情報に基づいて、音声認識部１３で認識された音声の構文を解析する。構文解析部４１は、構文の解析結果を判断部１４に与える。ステップｂ１の処理が終了すると、ステップａ５に移行する。

ステップｂ１で構文解析部４１から構文の解析結果が与えられた場合、ステップａ５において、判断部１４は、ステップｂ１で与えられた構文の解析結果に基づいて、音声認識部１３によって認識された音声が、運転者の異常を表す音声であるか否かを判断する。運転者の異常を表す音声であると判断された場合は、ステップａ６に移行し、運転者の異常を表す音声でないと判断された場合は、全ての処理手順を終了する。

ステップａ３からステップａ５に移行した場合は、ステップａ５において、判断部１４は、第１の実施の形態と同様の処理を行う。その後、ステップａ６〜ステップａ９の処理を行う。

以上のように本実施の形態によれば、音声認識部１３から与えられる認識音声情報に基づいて、音声認識部１３によって認識された音声の構文が、構文解析部４１によって解析される。判断部１４は、認識音声情報に基づいて運転者に異常が発生しているか否かを判断する場合、構文解析部４１による構文の解析結果に基づいて、運転者に異常が発生しているか否かを判断する。これによって、運転者の発話の意味を解析することができるので、運転者の異常を検出する精度を向上させることができる。

たとえば、本実施の形態とは異なり、「苦しい」などの単語のみを認識する場合、「家計が苦しい」などの、運転者が異常を発する発話でない場合にも運転者の異常と誤って検出されるおそれがある。本実施の形態では、前述のように構文解析部４１によって音声の構文が解析され、その解析結果に基づいて、運転者に異常が発生しているか否かが判断部１４によって判断される。したがって、前述のような誤検出を防ぐことができるので、前述のように運転者の異常を検出する精度を向上させることができる。

＜第３の実施の形態＞
図６は、本発明の第３の実施の形態における運転支援装置３を含む車載装置５０の構成を示すブロック図である。車載装置５０は、運転支援装置３、音声入力部２１、非言語認識データベース２２、言語認識データベース２３、音声出力部２４および音声特徴量データベース５１を備えて構成される。運転支援装置３は、第１の実施の形態の運転支援装置１と同様に構成される。すなわち、運転支援装置３は、音声取得部１１、特徴量抽出部１２、音声認識部１３、判断部１４、主制御部１５、運転制御部１６、音声出力制御部１７および通信部１８を備えて構成される。

車載装置５０は、車両、たとえば自動車に搭載可能に構成される。本実施の形態では、車載装置５０は、経路を案内するナビゲーション機能を有するナビゲーション装置によって実現される。本発明の他の実施の形態である運転支援方法は、本実施の形態の運転支援装置３によって実行される。

本実施の形態の運転支援装置２は、第１の実施の形態の運転支援装置１と同一の構成を含んでいるので、同一の構成については同一の参照符号を付して、共通する説明を省略する。

本実施の形態では、特徴量抽出部１２は、非言語認識データベース２２および音声特徴量データベース５１に接続される。音声特徴量データベース５１は、たとえばＨＤＤ装置、または半導体メモリなどの記憶装置によって実現される。

音声特徴量データベース５１は、運転者の平常時の音声の特徴を表す特徴量（以下「平常時の特徴量」という場合がある）を記憶する。平常時の特徴量は、たとえば、運転者が日常で話すときの音声の特徴量、具体的には話速、声の高さ、声の大きさなどである。

特徴量抽出部１２は、第１の実施の形態と同様に、音声取得部１１から与えられる音声情報から、音声情報の特徴量を抽出する。特徴量抽出部１２は、第１の実施の形態と同様に、非言語認識データベース２２に記憶される非言語認識情報を用いて、抽出した特徴量が、非言語の音声を表す非言語音声情報の特徴量であるか否かを判断する。特徴量抽出部１２は、抽出した特徴量が非言語音声情報の特徴量であると判断した場合、抽出した特徴量を判断部１４に与える。特徴量抽出部１２は、抽出した特徴量が非言語音声情報の特徴量でないと判断した場合、抽出した特徴量を音声認識部１３に与える。

本実施の形態では、特徴量抽出部１２は、抽出した特徴量と、音声特徴量データベースに記憶される平常時の特徴量とを比較する。特徴量抽出部１２は、特徴量の比較結果を判断部１４に与える。

判断部１４は、特徴量抽出部１２から与えられる特徴量の比較結果に基づいて、運転者に異常が発生しているか否かを判断する。判断部１４は、たとえば、特徴量抽出部１２で抽出された特徴量と、平常時の特徴量とが、予め定める値以上離れている場合、運転者に異常が発生していると判断する。すなわち、判断部１４は、特徴量抽出部１２で抽出された特徴量と、平常時の特徴量との差が、予め定める値以上である場合、運転者に異常が発生していると判断する。判断部１４は、特徴量抽出部１２で抽出された特徴量と、平常時の特徴量との差が、予め定める値未満である場合、運転者に異常が発生していないと判断する。判断部１４は、判断結果を主制御部１５に与える。

図７は、本発明の第３の実施の形態の運転支援装置３における異常確認処理に関する処理手順を示すフローチャートである。図７に示すフローチャートの各ステップは、運転支援装置３を構成する音声取得部１１、特徴量抽出部１２、音声認識部１３、判断部１４、主制御部１５、運転制御部１６および通信部１８によって実行される。図７に示すフローチャートは、図３に示すフローチャートと同一のステップを含んでいるので、同一のステップには同一のステップ番号を付して、共通する説明を省略する。

図７に示すフローチャートの処理は、運転支援装置３の電源が投入されると開始され、ステップａ１に移行する。図７に示すフローチャートは、予め定める異常確認周期毎に繰り返し実行される。異常確認周期は、運転者に異常が発生しているか否かを確認する周期であり、たとえば、３０分、１時間などである。異常確認周期は、利用者が任意に設定可能に構成される。

本実施の形態では、ステップａ１およびステップａ２の処理が行われると、ステップｃ１に移行する。ステップｃ１において、特徴量抽出部１２は、抽出された特徴量と、平常時の特徴量とを比較する。特徴量抽出部１２は、特徴量の比較結果を判断部１４に与える。ステップｃ１の処理が終了すると、ステップａ５に移行する。

ステップａ５において、判断部１４は、特徴量抽出部１２から与えられた特徴量の比較結果に基づいて、運転者に異常が発生しているか否かを判断する。運転者に異常が発生していると判断された場合は、ステップａ６に移行し、運転者に異常が発生していないと判断された場合は、全ての処理手順を終了する。ステップａ６〜ステップａ９の処理は、第１の実施の形態と同様に行われる。

以上に述べたように本実施の形態によれば、車両の運転者が発する言語および非言語を含む音声を表す音声情報が、音声取得部１１によって取得される。音声取得部１１によって取得された音声情報から、音声情報の特徴量が、特徴量抽出部１２によって抽出される。特徴量抽出部１２によって抽出された特徴量と、運転者の平常時の音声の特徴を表す特徴量との比較結果に基づいて、運転者に異常が発生しているか否かが、判断部１４によって判断される。運転者に異常が発生していると判断部１３によって判断された場合、車両の運転が運転制御部１６によって制御される。これによって、運転者の応答が無くても、運転者の異常を検出することができる。

特に本実施の形態では、判断部１４は、抽出された特徴量と、平常時の特徴量との比較結果に基づいて、運転者に異常が発生しているか否かを判断するので、運転者の異常を検出する精度を向上させることができる。

本実施の形態は、前述の第１の実施の形態および第２の実施の形態のいずれか、または両方と組合せてもよい。たとえば、本実施の形態と前述の第１の実施の形態とを組合せる場合、判断部１４は、特徴量抽出部１２から与えられる特徴量の比較結果と、特徴量抽出部１２から与えられる音声情報の特徴量、または音声認識部１３から与えられる認識音声情報とに基づいて、運転者に異常が発生しているか否かを判断する。

図８は、本発明の第３の実施の形態の運転支援装置３における異常確認処理に関する処理手順の他の例を示すフローチャートである。本実施の形態と前述の第１の実施の形態とが組合せられる場合、図８に示すように、前述の図７に示すフローチャートのステップａ２とステップｃ１との間に、前述の図３に示すフローチャートのステップａ３およびステップａ４が設けられる。ステップａ３およびステップａ４の処理は、第１の実施の形態と同様に行われる。

この場合、ステップａ５において、判断部１４は、ステップｃ１の特徴量抽出部１２による特徴量の比較結果と、ステップａ２で特徴量抽出部１２によって抽出される音声情報の特徴量、またはステップａ４で音声認識部１３から与えられる認識音声情報とに基づいて、運転者に異常が発生しているか否かを判断する。

このように本実施の形態と前述の第１の実施の形態とを組合せても、本実施の形態と同様に、運転者の応答が無くても、運転者の異常を検出することができる。また、運転者の異常を検出する精度を向上させることができる。

本実施の形態と前述の第１および第２の実施の形態とを組合せた場合には、特徴量の比較結果と、音声認識結果で得られた運転者の発話内容とに基づいて、運転者に異常が発生しているか否かを判断することができるので、運転者の異常を検出する精度を更に向上させることができる。

このように本実施の形態と前述の第１および第２の実施の形態とを組合せる場合には、図８のフローチャートのステップａ４とステップｃ１との間に、前述の図５に示すフローチャートのステップｂ１を設ければよい。

以上に述べたように、本実施の形態の運転支援装置３では、音声特徴量データベース５１に、運転者の平常時の音声の特徴を表す特徴量を記憶しておき、抽出された特徴量と、平常時の特徴量とを比較して、その比較結果に基づいて、判断部１４によって運転者に異常が発生しているか否かを判断する。運転支援装置３の構成は、これに限定されない。

たとえば、音声特徴量データベース５１には、運転者の呼吸のピッチを記憶しておいてもよい。この場合、特徴量抽出部１２は、特徴量として運転者の呼吸のピッチを抽出し、抽出した呼吸のピッチと、音声特徴量データベース５１に記憶される呼吸のピッチとを比較する。判断部１４は、比較結果に基づいて、運転者に異常が発生しているか否かを判断する。たとえば、特徴量として抽出された呼吸のピッチが、音声特徴量データベース５１に記憶される呼吸のピッチと、予め定める値以上の差があった場合、判断部１４は、運転者に異常が発生していると判断する。呼吸のピッチは、たとえば、１分間の呼吸音の回数で表される。

以上に述べた本実施の形態の運転支援装置１〜３は、車両に搭載可能なナビゲーション装置だけでなく、通信端末装置、およびサーバ装置などを適宜に組み合わせてシステムとして構築される駐車支援システムに適用することができる。通信端末装置は、たとえばサーバ装置と通信を行う機能を有するＰＮＤ（Portable Navigation Device）および携帯通信装置である。携帯通信装置は、たとえば携帯電話機、スマートフォンおよびタブレット型端末装置である。

前述のようにナビゲーション装置と通信端末装置とサーバ装置とを適宜に組み合わせてシステムが構築される場合、本実施の形態の運転支援装置の各構成要素は、前記システムを構築する各装置に分散して配置されてもよいし、いずれかの装置に集中して配置されてもよい。

たとえば、運転支援装置に備えられる特徴量抽出部１２、音声認識部１３および判断部１４は、サーバ装置に配置されてもよいし、携帯通信装置などの通信端末装置に配置されてもよい。

前述の運転支援装置１に備えられる特徴量抽出部１２、音声認識部１３および判断部１４がサーバ装置に配置される場合の運転支援装置は、たとえば、以下の第４の実施の形態に示す構成を有する。また、前述の運転支援装置１に備えられる特徴量抽出部１２、音声認識部１３および判断部１４が携帯通信装置に配置される場合の運転支援装置は、たとえば、以下の第５の実施の形態に示す構成を有する。

＜第４の実施の形態＞
図９は、本発明の第４の実施の形態における運転支援装置４の構成を示すブロック図である。車載装置６０は、音声入力部２１、音声出力部２４および車載装置本体６１を備えて構成される。車載装置本体６１は、音声取得部１１、運転制御部１６、音声出力制御部１７、車載側制御部６２および車載側通信部６３を備える。

サーバ装置７０は、非言語認識データベース２２、言語認識データベース２３およびサーバ装置本体７１を備えて構成される。サーバ装置本体７１は、特徴量抽出部１２、音声認識部１３、判断部１４、サーバ側制御部７２およびサーバ側通信部７３を備える。

本実施の形態の運転支援装置４は、車載装置本体６１と、サーバ装置本体７１とを備えて構成される。

車載装置６０は、車両、たとえば自動車に搭載可能に構成される。本実施の形態では、車載装置６０は、経路を案内するナビゲーション機能を有するナビゲーション装置によって実現される。本発明の他の実施の形態である運転支援方法は、本実施の形態の運転支援装置４によって実行される。

本実施の形態における車載装置６０およびサーバ装置７０は、前述の第１の実施の形態の運転支援装置１と同一の構成を含んでいるので、同一の構成については同一の参照符号を付して、共通する説明を省略する。

車載側制御部６２は、たとえばＣＰＵ（Central Processing Unit）と、書き込み可能なＲＡＭなどのメモリとによって構成される。メモリは、制御プログラムを記憶する。ＣＰＵが、メモリに記憶されている制御プログラムを実行することによって、運転制御部１６、音声出力制御部１７および車載側通信部６３を統括的に制御する。

車載側通信部６３は、サーバ装置７０と通信を行う。車載側通信部６３は、たとえばインターネットなどの通信網を介して、サーバ装置７０と通信可能に構成される。

車載側制御部６２は、音声取得部１１によって取得された音声情報を、車載側通信部６３を介して、サーバ装置７０に送信する。

サーバ側通信部７３は、車載装置６０と通信を行う。サーバ側通信部７３は、たとえばインターネットなどの通信網を介して、車載装置６０と通信可能に構成される。

サーバ側制御部７２は、たとえばＣＰＵと、書き込み可能なＲＡＭなどのメモリとによって構成される。メモリは、制御プログラムを記憶する。ＣＰＵが、メモリに記憶されている制御プログラムを実行することによって、サーバ側通信部７３を制御する。

サーバ側通信部７３は、車載側通信部６３を介して車載装置６０から送信された音声情報を受信すると、サーバ側制御部７２からの指示に基づいて、受信した音声情報を特徴量抽出部１２に与える。

判断部１４は、運転者に異常が発生しているか否かの判断結果をサーバ側制御部７２に与える。サーバ側制御部７２は、判断部１４から与えられた、運転者に異常が発生しているか否かの判断結果を、サーバ側通信部７３を介して、車載装置６０に送信する。

車載側通信部６３は、サーバ側通信部７３を介してサーバ装置７０から送信された、運転者に異常が発生しているか否かの判断結果を受信すると、受信した判断結果を車載側制御部６２に与える。

車載側制御部６２は、車載側通信部６３から与えられた判断結果に基づいて、運転制御部１６および音声出力制御部１７を制御する。

以上のように本実施の形態では、特徴量抽出部１２、音声認識部１３及び判断部１４は、サーバ装置７０に配置される。このように配置される場合でも、前述の第１の実施の形態と同様の効果を得ることができる。

＜第５の実施の形態＞
図１０は、本発明の第５の実施の形態における運転支援装置５の構成を示すブロック図である。車載装置６０は、図９と同様に、音声入力部２１、音声出力部２４および車載装置本体６１を備えて構成される。車載装置本体６１は、図９と同様に、音声取得部１１、運転制御部１６、音声出力制御部１７、車載側制御部６２および車載側通信部６３を備える。

携帯通信装置８０は、特徴量抽出部１２、音声認識部１３、判断部１４、携帯側制御部８１および携帯側通信部８２を備えて構成される。サーバ装置９０は、非言語認識データベース２２、言語認識データベース２３、サーバ側制御部９１およびサーバ側通信部９２を備えて構成される。

本実施の形態の運転支援装置５は、車載装置本体６１と、携帯通信装置８０とを備えて構成される。

本発明の他の実施の形態である運転支援方法は、本実施の形態の運転支援装置５によって実行される。

本実施の形態における車載装置６０、携帯通信装置８０およびサーバ装置９０は、前述の第１の実施の形態の運転支援装置１と同一の構成を含んでいるので、同一の構成については同一の参照符号を付して、共通する説明を省略する。

車載側制御部６２は、音声取得部１１によって取得された音声情報を、車載側通信部６３を介して、携帯通信装置８０に送信する。

携帯通信装置８０は、たとえば携帯電話機、スマートフォンまたはタブレット型端末装置によって実現される。携帯側通信部８２は、車載装置６０およびサーバ装置９０と通信を行う。携帯側通信部８２は、たとえばインターネットなどの通信網を介して、車載装置６０およびサーバ装置９０と通信可能に構成される。

携帯側通信部８２は、車載装置６０と通信を行う場合、たとえば、近距離無線通信規格であるブルートゥース（Bluetooth（登録商標））または無線ＬＡＮ（Local Area Network）などの無線によって、車載装置６０と通信可能に構成されてもよい。また、携帯側通信部８２は、ＵＳＢ（Universal Serial Bus）ケーブルまたはＬＡＮケーブルなどの有線によって、車載装置６０と通信可能に構成されてもよい。

携帯側制御部８１は、たとえばＣＰＵと、書き込み可能なＲＡＭなどのメモリとによって構成される。メモリは、制御プログラムを記憶する。ＣＰＵが、メモリに記憶されている制御プログラムを実行することによって、携帯側通信部８２を制御する。

携帯側通信部８２は、車載側通信部６３を介して車載装置６０から送信された音声情報を受信すると、携帯側制御部８１からの指示に基づいて、受信した音声情報を特徴量抽出部１２に与える。

また携帯側通信部８２は、携帯側制御部８１からの指示に基づいて、サーバ装置９０に備えられる非言語認識データベース２２に記憶される非言語認識情報、および言語認識データベース２３に記憶される言語認識情報の送信要求をサーバ装置９０に送信する。

サーバ側通信部９２は、携帯側通信部８２を介して携帯通信装置８０から送信された非言語認識情報および言語認識情報の送信要求を受信すると、サーバ側制御部９１を介して、非言語認識データベース２２および言語認識データベース２３から、非言語認識情報および言語認識情報を取得する。

サーバ側通信部９２は、非言語認識情報および言語認識情報を取得すると、取得した非言語認識情報および言語認識情報を、携帯通信装置８０に送信する。

携帯側通信部８２は、サーバ装置９０から送信された非言語認識情報および言語認識情報を受信すると、非言語認識情報を特徴量抽出部１２に与えるとともに、言語認識情報を音声認識部１３に与える。

判断部１４は、運転者に異常が発生しているか否かの判断結果を携帯側制御部８１に与える。携帯側制御部８１は、判断部１４から与えられた、運転者に異常が発生しているか否かの判断結果を、携帯側通信部８２を介して、車載装置６０に送信する。

車載側通信部６３は、携帯側通信部８２を介して携帯通信装置８０から送信された、運転者に異常が発生しているか否かの判断結果を受信すると、受信した判断結果を車載側制御部６２に与える。

車載側制御部６２は、車載側通信部６３から与えられた判断結果に基づいて、運転制御部１６および音声出力制御部１７を制御する。

以上のように本実施の形態では、特徴量抽出部１２、音声認識部１３および判断部１４は、携帯通信装置８０に配置される。このように配置される場合でも、前述の第１の実施の形態と同様の効果を得ることができる。

前述の第４の実施の形態では、第１の実施の形態の運転支援装置１に備えられる特徴量抽出部１２、音声認識部１３および判断部１４がサーバ装置に配置される場合の運転支援装置の構成を説明したが、このような構成に限られるものではない。たとえば、第２の実施の形態の運転支援装置２に備えられる特徴量抽出部１２、音声認識部１３、判断部１４および構文解析部４１がサーバ装置に配置される場合でも、前述の第２の実施の形態と同様の効果を得ることができる。また、たとえば、第３の実施の形態の運転支援装置３に備えられる特徴量抽出部１２、音声認識部１３および判断部１４がサーバ装置に配置される場合でも、前述の第３の実施の形態と同様の効果を得ることができる。

また前述の第５の実施の形態では、第１の実施の形態の運転支援装置１に備えられる特徴量抽出部１２、音声認識部１３および判断部１４が携帯通信装置に配置される場合の運転支援装置の構成を説明したが、このような構成に限られるものではない。たとえば、第２の実施の形態の運転支援装置２に備えられる特徴量抽出部１２、音声認識部１３、判断部１４および構文解析部４１が携帯通信装置に配置される場合でも、前述の第２の実施の形態と同様の効果を得ることができる。また、たとえば、第３の実施の形態の運転支援装置３に備えられる特徴量抽出部１２、音声認識部１３および判断部１４が携帯通信装置に配置される場合でも、前述の第３の実施の形態と同様の効果を得ることができる。

なお、本発明は、その発明の範囲内において、各実施の形態を自由に組み合わせることが可能である。また、各実施の形態の任意の構成要素を適宜、変更または省略することが可能である。

１，２，３，４，５ 運転支援装置、１０，４０，５０，６０ 車載装置、１１ 音声取得部、１２ 特徴量抽出部、１３ 音声認識部、１４ 判断部、１５ 主制御部、１６ 運転制御部、１７ 音声出力制御部、１８ 通信部、２１ 音声入力部、２２ 非言語認識データベース、２３ 言語認識データベース、２４ 音声出力部、３１ プロセッサ、３２ メモリ、４１ 構文解析部、４２ 構文解析データベース、５１ 音声特徴量データベース、６１ 車載装置本体、６２ 車載側制御部、６３ 車載側通信部、７０，９０ サーバ装置、７１ サーバ装置本体、７２，９１ サーバ側制御部、７３，９２ サーバ側通信部、８０ 携帯通信装置、８１ 携帯側制御部、８２ 携帯側通信部。

Claims (6)

1. 車両の運転者が発する言語および言語でない非言語を含む音声を表す音声情報を取得する音声取得部と、
   前記音声取得部によって取得された音声情報から、前記音声情報が表す音声の特徴を表す特徴量を抽出し、抽出した前記特徴量が、前記非言語の音声を表す非言語音声情報の特徴量であるか否かを判断する特徴量抽出部と、
   前記特徴量抽出部によって抽出された前記特徴量が前記非言語音声情報の特徴量でないと判断された場合、前記特徴量抽出部によって抽出された前記特徴量に基づいて、前記音声を認識する音声認識部と、
   前記特徴量抽出部によって抽出された前記特徴量、または前記音声認識部によって認識された音声を表す認識音声情報に基づいて、前記運転者に異常が発生しているか否かを判断する判断部と、
   前記判断部によって前記運転者に異常が発生していると判断された場合、前記車両の運転を制御する運転制御部とを備えることを特徴とする運転支援装置。
2. 前記認識音声情報に基づいて、前記音声認識部によって認識された音声の構文を解析する構文解析部を備え、
   前記判断部は、前記認識音声情報に基づいて前記運転者に異常が発生しているか否かを判断する場合、前記構文解析部による前記構文の解析結果に基づいて、前記運転者に異常が発生しているか否かを判断することを特徴とする請求項１に記載の運転支援装置。
3. 前記判断部は、前記特徴量抽出部によって抽出された前記特徴量と、前記運転者の平常時の音声の特徴を表す特徴量との比較結果に基づいて、前記運転者に異常が発生しているか否かを判断することを特徴とする請求項１または２に記載の運転支援装置。
4. 車両の運転者が発する言語および言語でない非言語を含む音声を表す音声情報を取得する音声取得部と、
   前記音声取得部によって取得された音声情報から、前記音声情報が表す音声の特徴を表す特徴量を抽出する特徴量抽出部と、
   前記特徴量抽出部によって抽出された前記特徴量と、前記運転者の平常時の音声の特徴を表す特徴量との比較結果に基づいて、前記運転者に異常が発生しているか否かを判断する判断部と、
   前記判断部によって前記運転者に異常が発生していると判断された場合、前記車両の運転を制御する運転制御部とを備えることを特徴とする運転支援装置。
5. 車両の運転者が発する言語および言語でない非言語を含む音声を表す音声情報を取得し、
   取得した音声情報から、前記音声情報が表す音声の特徴を表す特徴量を抽出し、
   抽出した前記特徴量が、前記非言語の音声を表す非言語音声情報の特徴量であるか否かを判断し、
   抽出した前記特徴量が前記非言語音声情報の特徴量でないと判断した場合、抽出した前記特徴量に基づいて、前記音声を認識し、
   抽出した前記特徴量、または認識された音声を表す認識音声情報に基づいて、前記運転者に異常が発生しているか否かを判断し、
   前記運転者に異常が発生していると判断した場合、前記車両の運転を制御することを特徴とする運転支援方法。
6. 車両の運転者が発する言語および言語でない非言語を含む音声を表す音声情報を取得し、
   取得した音声情報から、前記音声情報が表す音声の特徴を表す特徴量を抽出し、
   抽出した前記特徴量と、前記運転者の平常時の音声の特徴を表す特徴量との比較結果に基づいて、前記運転者に異常が発生しているか否かを判断し、
   前記運転者に異常が発生していると判断した場合、前記車両の運転を制御することを特徴とする運転支援方法。

Images