JPWO2014103015A1

JPWO2014103015A1 - 携帯端末装置、車載器、情報提示方法及び情報提示プログラム

Info

Publication number: JPWO2014103015A1
Application number: JP2013524276A
Authority: JP
Inventors: 俊一郎長尾; 紘史下川
Original assignee: Pioneer Corp
Current assignee: Pioneer Corp
Priority date: 2012-12-28
Filing date: 2012-12-28
Publication date: 2017-01-12
Anticipated expiration: 2032-12-28
Also published as: WO2014103015A1; JP5350567B1

Abstract

携帯端末装置は、有線又は無線の接続手段により車載器と通信可能に接続される。携帯端末装置の典型例はスマートフォンであり、車載器の典型例はナビゲーション装置や車載用オーディオ装置である。携帯端末装置と車載器とが通信可能に接続されると、制御手段は、携帯側音声入力手段と車載器側音声入力手段のいずれかを使用して入力された音声に基づいてアプリケーションの動作を制御する。この際、提示手段は、使用する方の音声入力手段を示す有効入力手段情報をユーザに提示する。これにより、ユーザは、携帯側音声入力手段と車載器側音声入力手段のうちのいずれが現在有効となっているかを容易に知ることができる。

Description

本発明は、携帯端末と車載器とを接続した際の制御に関する。

近年、スマートフォンが普及している。スマートフォンの音声認識機能は日々進化しており、様々なアプリケーションで音声認識が可能となっている。音声認識は、画面を操作する必要がないため、車内での携帯電話の利用や、携帯電話と連携する車載器での利用に適している。

しかし、音声認識を利用するためには、携帯電話をドライバーの音声が届くところに設置する必要がある。また、携帯電話のマイクは電話として使用する用途に最適化されているため、自動車内のような環境音が多い場所では雑音を拾いやすいという問題があり、これが音声認識率の低下につながっている。このため、車内では携帯電話のマイクを使うのではなく、特定の場所に設置した車載器のマイクを使うことが望まれている。

特許文献１は、車載器のマイクを利用して携帯電話の音声入力を行う方法を記載している。特許文献１では、クレードルに携帯電話が接続されると、クレードル経由で車載器と携帯電話との間でデータの通信が可能となる。また、車載器とクレードルが接続されると、携帯電話自体の機能が車載器モードに切り替えられる。車載器モードでは、携帯電話の画面が車載器に表示され、車載器の表示部のタッチパネルに対する操作により、携帯電話側の動作が切り替えられる。よって、車載器のマイク経由で携帯電話での音声通話や音声入力操作が可能となり、車載器のスピーカから携帯電話の音声を出力可能となる。

特開２００８−７８６９６号公報

しかし、特許文献１の方法では、車載器と携帯電話とが接続されると、音声入力は車載器のマイクからの入力に固定される。このため、携帯電話が車載器と正常にデータの通信を行えない場合には音声認識が不可能となる。また、例えば車両の都合により車載器にマイクが接続できないなど、車載器側に問題がある場合にも音声認識が利用できない。さらには、車内で音声認識を行う際、携帯電話が車載器と接続されている場合と接続されていない場合とで使用するマイクが異なるので、ユーザはどちらのマイクに対して発話すれば良いかわからなくなることもある。

また、車両の助手席や後部座席に着座したユーザの保有する携帯電話と無線で接続された場合に、当該車両側のマイクからの入力に固定されてしまうと、当該助手席や後部座席に着座したユーザから当該マイクが遠くなり、利用しずらい又は利用できなくなるという不具合が生じることもある。

本発明が解決しようとする課題としては、上記のものが例として挙げられる。本発明は、携帯電話と車載器とが接続されている場合に、ユーザが迷うことなく、有効となっているマイクに対して音声を入力できるようにすることを目的とする。

請求項１に記載の発明は、各種のアプリケーションを動作させる携帯端末装置であって、入力された音声を受け付ける携帯側音声入力手段と、車載器と通信可能に接続する接続手段と、前記接続手段により接続された車載器の車載器側音声入力手段と、前記携帯側音声入力手段のうち、いずれかを使用して入力された音声に基づいてアプリケーションの動作を制御する制御手段と、音声によりアプリケーションの動作を制御する際に、前記携帯側音声入力手段と前記車載器側音声入力手段のうちのどちらを使用するかを示す有効入力手段情報をユーザに提示する提示手段と、を備えることを特徴とする。

請求項５に記載の発明は、入力された音声を受け付ける携帯側音声入力手段と、車載器と通信可能に接続する接続手段とを備え、各種のアプリケーションを動作させる携帯端末装置によって実行される情報提示方法であって、前記接続手段により接続された車載器の車載器側音声入力手段と、前記携帯側音声入力手段のうち、いずれかを使用して入力された音声に基づいてアプリケーションの動作を制御する制御工程と、音声によりアプリケーションの動作を制御する際に、前記携帯側音声入力手段と前記車載器側音声入力手段のうちのどちらを使用するかを示す有効入力手段情報をユーザに提示する提示工程と、を有することを特徴とする。

請求項６に記載の発明は、入力された音声を受け付ける携帯側音声入力手段と、車載器と通信可能に接続する接続手段とを備え、各種のアプリケーションを動作させる携帯端末装置によって実行される情報提示プログラムであって、前記接続手段により接続された車載器の車載器側音声入力手段と、前記携帯側音声入力手段のうち、いずれかを使用して入力された音声に基づいてアプリケーションの動作を制御する制御工程と、音声によりアプリケーションの動作を制御する際に、前記携帯側音声入力手段と前記車載器側音声入力手段のうちのどちらを使用するかを示す有効入力手段情報をユーザに提示する提示工程と、を前記携帯端末装置に実行させることを特徴とする。

請求項７に記載の発明は、車載器であって、入力された音声を受け付ける車載器側音声入力手段と、各種のアプリケーションを動作させる携帯端末装置と通信可能に接続する接続手段と、前記携帯端末装置が音声によりアプリケーションの動作を制御する際に、前記接続手段により接続された携帯端末装置の携帯側音声入力手段と、前記車載器側音声入力手段のうち、どちらを使用するかを決定する決定手段と、前記携帯側音声入力手段と前記車載器側音声入力手段のどちらを使用するかを示す有効入力手段情報をユーザに提示する提示手段と、を備えることを特徴とする。

請求項８に記載の発明は、入力された音声を受け付ける車載器側音声入力手段と、各種のアプリケーションを動作させる携帯端末装置と通信可能に接続する接続手段とを備える車載器により実行される情報提示方法であって、前記携帯端末装置が音声によりアプリケーションの動作を制御する際に、前記接続手段により接続された携帯端末装置の携帯側音声入力手段と、前記車載器側音声入力手段のうち、どちらを使用するかを決定する決定工程と、前記携帯側音声入力手段と前記車載器側音声入力手段のどちらを使用するかを示す有効入力手段情報をユーザに提示する提示工程と、を有することを特徴とする。

請求項９に記載の発明は、入力された音声を受け付ける車載器側音声入力手段と、各種のアプリケーションを動作させる携帯端末装置と通信可能に接続する接続手段とを備える車載器により実行される情報提示プログラムであって、前記携帯端末装置が音声によりアプリケーションの動作を制御する際に、前記接続手段により接続された携帯端末装置の携帯側音声入力手段と、前記車載器側音声入力手段のうち、どちらを使用するかを決定する決定工程と、前記携帯側音声入力手段と前記車載器側音声入力手段のどちらを使用するかを示す有効入力手段情報をユーザに提示する提示工程と、を前記車載器に実行させることを特徴とする。

実施例に係る車載器システムの概略構成を示すブロック図である。マイク切替処理のフローチャートである。機種情報ファイルの例を示す。有効入力手段情報の表示例を示す。

本発明の１つの好適な実施形態では、各種のアプリケーションを動作させる携帯端末装置は、入力された音声を受け付ける携帯側音声入力手段と、車載器と通信可能に接続する接続手段と、前記接続手段により接続された車載器の車載器側音声入力手段と、前記携帯側音声入力手段のうち、いずれかを使用して入力された音声に基づいてアプリケーションの動作を制御する制御手段と、音声によりアプリケーションの動作を制御する際に、前記携帯側音声入力手段と前記車載器側音声入力手段のうちのどちらを使用するかを示す有効入力手段情報をユーザに提示する提示手段と、を備える。

上記の携帯端末装置は、有線又は無線の接続手段により車載器と通信可能に接続される。携帯端末装置の典型例はスマートフォンであり、車載器の典型例はナビゲーション装置や車載用オーディオ装置である。携帯端末装置と車載器とが通信可能に接続されると、制御手段は、携帯側音声入力手段と車載器側音声入力手段のいずれかを使用して入力された音声に基づいてアプリケーションの動作を制御する。この際、提示手段は、使用する方の音声入力手段を示す有効入力手段情報をユーザに提示する。これにより、ユーザは、携帯側音声入力手段と車載器側音声入力手段のうちのいずれが現在有効となっているかを容易に知ることができる。

上記の携帯端末装置の一態様では、前記携帯端末装置が前記携帯側音声入力手段以外からの音声入力を受け付け可能であり、かつ、前記携帯端末装置と前記車載器とが前記接続手段により通信可能に接続されている場合、前記提示手段は、前記車載器側音声入力手段を使用することを示す有効入力手段情報を提示する。これにより、ドライバーは運転席近傍に設けられた車載器側音声入力手段を用いて音声入力を行うことができる。好適な例では、前記制御手段は、前記携帯端末装置の機種情報に基づいて、当該携帯端末装置が外部からの音声入力を受け付け可能であるか否かを判定する。

上記の携帯端末装置の他の一態様では、前記提示手段は、前記有効入力手段情報を前記車載器に送信し、前記車載器によってユーザに提示させる。これにより、有効入力手段情報は、ドライバーが見やすい車載器の表示部に表示されることになる。

本発明の他の好適な実施形態では、入力された音声を受け付ける携帯側音声入力手段と、車載器と通信可能に接続する接続手段とを備え、各種のアプリケーションを動作させる携帯端末装置によって実行される情報提示方法は、前記接続手段により接続された車載器の車載器側音声入力手段と、前記携帯側音声入力手段のうち、いずれかを使用して入力された音声に基づいてアプリケーションの動作を制御する制御工程と、音声によりアプリケーションの動作を制御する際に、前記携帯側音声入力手段と前記車載器側音声入力手段のうちのどちらを使用するかを示す有効入力手段情報をユーザに提示する提示工程と、を有する。

この方法によっても、ユーザは、携帯側音声入力手段と車載器側音声入力手段のうちのいずれが現在有効となっているかを容易に知ることができる。

本発明の他の好適な実施形態では、入力された音声を受け付ける携帯側音声入力手段と、車載器と通信可能に接続する接続手段とを備え、各種のアプリケーションを動作させる携帯端末装置によって実行される情報提示プログラムは、前記接続手段により接続された車載器の車載器側音声入力手段と、前記携帯側音声入力手段のうち、いずれかを使用して入力された音声に基づいてアプリケーションの動作を制御する制御工程と、音声によりアプリケーションの動作を制御する際に、前記携帯側音声入力手段と前記車載器側音声入力手段のうちのどちらを使用するかを示す有効入力手段情報をユーザに提示する提示工程と、を前記携帯端末装置に実行させる。

このプログラムを携帯端末装置上で実行することにより、ユーザは、携帯側音声入力手段と車載器側音声入力手段のうちのいずれが現在有効となっているかを容易に知ることができる。

本発明の他の好適な実施形態では、車載器は、入力された音声を受け付ける車載器側音声入力手段と、各種のアプリケーションを動作させる携帯端末装置と通信可能に接続する接続手段と、前記携帯端末装置が音声によりアプリケーションの動作を制御する際に、前記接続手段により接続された携帯端末装置の携帯側音声入力手段と、前記車載器側音声入力手段のうち、どちらを使用するかを決定する決定手段と、前記携帯側音声入力手段と前記車載器側音声入力手段のどちらを使用するかを示す有効入力手段情報をユーザに提示する提示手段と、を備える。

上記の車載器は、有線又は無線の接続手段により携帯端末装置と通信可能に接続される。携帯端末装置の典型例はスマートフォンであり、車載器の典型例はナビゲーション装置や車載用オーディオ装置である。携帯端末装置と車載器とが通信可能に接続されると、決定手段は、前記携帯端末装置が音声によりアプリケーションの動作を制御する際に、前記接続手段により接続された携帯端末装置の携帯側音声入力手段と、前記車載器側音声入力手段のうち、どちらを使用するかを決定する。そして、提示手段は、使用する方の音声入力手段を示す有効入力手段情報をユーザに提示する。これにより、ユーザは、携帯側音声入力手段と車載器側音声入力手段のうちのいずれが現在有効となっているかを容易に知ることができる。

本発明の他の好適な実施形態では、入力された音声を受け付ける車載器側音声入力手段と、各種のアプリケーションを動作させる携帯端末装置と通信可能に接続する接続手段とを備える車載器により実行される情報提示方法は、前記携帯端末装置が音声によりアプリケーションの動作を制御する際に、前記接続手段により接続された携帯端末装置の携帯側音声入力手段と、前記車載器側音声入力手段のうち、どちらを使用するかを決定する決定工程と、前記携帯側音声入力手段と前記車載器側音声入力手段のどちらを使用するかを示す有効入力手段情報をユーザに提示する提示工程と、を有する。

本発明の他の好適な実施形態では、入力された音声を受け付ける車載器側音声入力手段と、各種のアプリケーションを動作させる携帯端末装置と通信可能に接続する接続手段とを備える車載器により実行される情報提示プログラムは、前記携帯端末装置が音声によりアプリケーションの動作を制御する際に、前記接続手段により接続された携帯端末装置の携帯側音声入力手段と、前記車載器側音声入力手段のうち、どちらを使用するかを決定する決定工程と、前記携帯側音声入力手段と前記車載器側音声入力手段のどちらを使用するかを示す有効入力手段情報をユーザに提示する提示工程と、を前記車載器に実行させる。

このプログラムを車載器上で実行することにより、ユーザは、携帯側音声入力手段と車載器側音声入力手段のうちのいずれが現在有効となっているかを容易に知ることができる。

以下、図面を参照して本発明の好適な実施例について説明する。

［システム構成］
図１は、本発明の実施例に係る車載器システムの概略構成を示す。車載器システムは、携帯電話１０と、車載器２０とにより構成される。携帯電話１０は、ネットワークを介してサーバ５に接続可能である。

サーバ５は、携帯電話１０に関連する情報を保持しており、具体的には携帯電話の機種情報ファイルが蓄積された機種情報データベース（ＤＢ）６を備える。機種情報ファイルの詳細については後述する。

携帯電話１０は、好適にはスマートフォンであり、本実施例ではユーザが車内に持ち込んだものを想定している。車載器２０は、車両に搭載されている装置であり、好適にはナビゲーション装置、車載用のＡＶ機器などである。携帯電話１０と車載器２０とは、通信手段４１、４２により接続され、相互にデータの通信が可能となる。なお、図１においては、説明の便宜上２つの通信手段４１、４２を示しているが、単一の通信手段で構わない。通信手段は、例えばＢｌｕｅｔｏｏｔｈ（登録商標）などの無線通信手段であってもよく、携帯電話設置用のクレードルと接続ケーブルのような有線通信手段であってもよい。

携帯電話１０は、通信部１１と、制御部１２と、情報通信部１３と、音声制御部１４と、音声通信部１５と、スピーカ１６と、マイク１７とを備える。

通信部１１は、無線通信によりサーバ５へ接続するためのものである。制御部１２は、携帯電話１０の全体を制御するものであり、具体的には、車載器２０との接続処理や、後述のマイク切替処理などを行う。情報通信部１３は、通信手段４１を通じて車載器２０との間で制御データ、画像データなどの送受信を行う。

音声制御部１４は、スピーカ１６及びマイク１７と接続されており、ユーザによりマイク１７に入力された音声、及び、スピーカ１６から外部へ出力する音声の入出力を制御する。音声通信部１５は、通信手段４２を通じて車載器２０との間で音声信号の送受信を行う。

なお、制御部１２と音声制御部１４は、ＣＰＵなどのコンピュータが、予め用意されたプログラムを実行することにより実現される。

車載器２０は、情報通信部２１と、制御部２２と、タッチパネル２３と、音声通信部２４と、音声制御部２５と、スピーカ２６と、マイク２７とを備える。

情報通信部２１は、通信手段４１を通じて携帯電話１０の情報通信部１３との間で、制御データ、画像データなどを送受信する。制御部２２は、車載器２０全体を制御する。具体的には、制御部２２は、携帯電話との接続処理、後述のマイク切替処理などを実行する。タッチパネル２３は、ユーザに対して情報を表示する機能と、ユーザからの操作入力を受け取る機能とを有する。

音声通信部２４は、通信手段４２を通じて携帯電話１０の音声通信部１５との間で音声信号の送受信を行う。音声制御部２５は、スピーカ２６及びマイク２７と接続されており、ユーザによりマイク２７に入力された音声、及び、スピーカ２６から外部へ出力する音声の入出力を制御する。なお、スピーカ２６は、車載器２０の専用スピーカであってもよく、車載器２０と接続された車両のスピーカであってもよい。また、マイク２７は、車載器２０に対する音声入力用のマイクであり、通常は、ドライバーが運転中に音声入力できるように運転席の周辺に設置される。

上記の構成において、携帯電話１０の制御部１２は本発明の制御手段に相当し、携帯電話１０のマイク１７は携帯側音声入力手段に相当し、通信手段４１、４２は接続手段に相当する。また、車載器２０の制御部２２は本発明の決定手段に相当し、車載器２０のマイク２７は車載器側音声入力手段に相当し、タッチパネル２３は提示手段に相当する。

［携帯電話と車載器の接続処理］
携帯電話１０と車載器２０とが接続されると、携帯電話１０の制御部１２及び車載器２０の制御部２２は接続処理を行う。なお、前述のように、通信手段４１、４２は無線通信手段であってもよく、有線通信手段であってもよい。携帯電話１０と車載器２０が接続されるとは、無線通信の場合には例えばＢｌｕｅｔｏｏｔｈのＳＰＰ（ＳｅｒｉａｌＰｏｒｔＰｒｏｆｉｌｅ）やＨＦＰ（ＨａｎｄｓＦｒｅｅＰｒｏｔｏｃｏｌ）によって通信可能となる場合をいい、有線通信の場合は例えばクレードルやケーブルを接続することにより通信可能となる場合をいう。

携帯電話１０と車載器２０とが接続されると、携帯電話１０の制御部１２は、情報通信部１３及び通信手段４１を通じて、携帯電話１０の表示画像を車載器２０へ送信する。車載器２０の制御部２２は、情報通信部２１を通じて受信した表示画像をタッチパネル２３に表示する。また、車載器２０の制御部２２は、タッチパネル２３に対するユーザの操作入力を検出し、情報通信部２１及び通信手段４１を通じて、携帯電話１０へ送信する。携帯電話１０の制御部１２は、情報通信部１３を通じて受信した操作入力に対応する処理、動作を行う。これにより、携帯電話１０と車載器２０とが接続されている状態では、ユーザは、車載器２０のタッチパネル２３をインタフェースとして使用して、携帯電話１０を操作することができる。

［マイク切替処理］
携帯電話１０と車載器２０とが接続されている状態では、車載器２０の制御部２２は、音声制御部２５を制御し、音声通信部２４及び通信手段４２を通じて、マイク２７に対するユーザの音声入力を携帯電話１０へ送信することができる。携帯電話１０の制御部１２は、音声通信部１５を通じて受信したユーザの音声入力に対応する処理、動作を実行することができる。即ち、携帯電話１０と車載器２０とが接続されている状態では、ユーザは、車載器２０のマイク２７を音声入力手段として使用して、携帯電話１０に対する音声入力を行うことができる。このように、車載器２０のマイクを音声入力手段として使用可能とする処理をマイク切替処理と呼ぶ。

（マイク切替処理の実施例）
図２は、マイク切替処理のフローチャートである。この処理は、主として携帯電話１０の制御部１２が予め用意されたプログラムを実行することにより行われる。また、このマイク切替処理は、基本的には携帯電話１０と車載器２０とが通信手段４１、４２を通じて接続されたときに実行される。

まず、制御部１２は、機種情報ファイルを取得する（ステップＳ１０）。機種情報ファイルとは、携帯電話１０の機種毎に用意され、その携帯電話の属性を示すファイルである。本実施例では、機種情報ファイルは、複数の携帯電話についての情報を１つのファイルとして有しているものとする。

機種情報ファイルの例を図３に示す。図示のように、機種情報ファイルは、携帯電話の機種名と、音声認識対応属性と、ＯＳバージョンと、更新日とを含む。機種名は各携帯電話の機種名である。音声認識対応属性は、各携帯電話が音声認識に対応しているか否かを示す。ＯＳバージョンは、各携帯電話が搭載しているＯＳのバージョンを示す。更新日は、各機種情報ファイルの更新日を示す。機種情報ファイルは定期的に内容が更新され、最新の更新日が機種情報ファイル内に含められている。

機種情報ファイルは、サーバ５の機種情報ＤＢ６内に保存されている。制御部１２は、基本的には通信部１１を介してサーバ５に接続し、機種情報ＤＢ６から機種情報ファイルをダウンロードし、携帯電話１０内部に保存する。

なお、ステップＳ１０の実行の際に、その携帯電話１０の機種情報ファイルが携帯電話１０内に既に保存されている場合には、制御部１２はその保存されている機種情報ファイルを使用することとしてもよい。但し、携帯電話１０がサーバ５に接続可能な状態においては、制御部１２はサーバ５に接続して機種情報ファイルの更新日を確認し、サーバ５に保存されている機種情報ファイルが既に携帯電話１０内に保存されている機種情報ファイルよりも新しいものであれば、サーバ５に保存されている機種情報ファイルを取得して使用することが好ましい。例えば、制御部１２は、サーバ５に保存されている機種情報ファイルに含まれる最新の更新日と、携帯電話１０内に保存されている機種情報ファイルに含まれる最新の更新日とを比較することにより、いずれの機種情報ファイルが新しいかを判定することができる。

こうして、機種情報ファイルを取得すると、制御部１２は、取得した機種情報ファイルに、その携帯電話１０の機種が含まれているかを判定する（ステップＳ１１）。その携帯電話１０の機種が含まれていない場合（ステップＳ１１：Ｎｏ）、処理はステップＳ１９へ進む。

一方、その携帯電話１０の機種が含まれている場合（ステップＳ１１：Ｙｅｓ）、制御部１２は、機種情報ファイル内の音声認識対応属性を参照して、その携帯電話１０が音声認識に対応しているか否かを判定する（ステップＳ１２）。その携帯電話１０が音声認識に対応していない場合（ステップＳ１２：Ｎｏ）、処理はステップＳ１９へ進む。

一方、その携帯電話１０が音声認識に対応している場合（ステップＳ１２：Ｙｅｓ）、制御部１２は、機種情報ファイル内のＯＳバージョンを参照して、その携帯電話１０が外部マイクからの音声入力に対応しているか否かを判定する（ステップＳ１３）。例えば、ＯＳバージョン４．０以上が外部マイクからの音声入力に対応している場合、制御部１２は、機種情報ファイルを参照して、その携帯電話１０のＯＳバージョンが４．０以上である場合に、その携帯電話１０が外部マイクからの音声入力に対応していると判定する。その携帯電話１０が外部マイクからの音声入力に対応していない場合（ステップＳ１３：Ｎｏ）、処理はステップＳ１９へ進む。

一方、その携帯電話１０が外部マイクからの音声入力に対応している場合（ステップＳ１３：Ｙｅｓ）、制御部１２は、車載器２０が車載器側のマイク２７に切り替え可能であるか否かを判定する（ステップＳ１４）。この判定は、車載器２０側の処理に基づいて行われる。即ち、制御部１２は、車載器２０の制御部２２に対して、マイク２７が使用可能な状態にあるか否かを問い合わせる。車載器２０の制御部２２は、車載器２０側のマイク２７の接続状態などを確認し、マイク２７が使用可能であるか否かを携帯電話１０へ回答する。携帯電話１０の制御部１２は、この回答に基づいて、車載器２０のマイク２７への切り替えが可能か否かを決定する。車載器２０のマイク２７に切り替え可能でない場合（ステップＳ１４：Ｎｏ）、処理はステップＳ１９へ進む。

一方、車載器２０のマイク２７に切り替え可能である場合（ステップＳ１４：Ｙｅｓ）、制御部１２は、携帯電話１０と車載器２０との間でＢｌｕｅｔｏｏｔｈのＨＦＰ接続が確立しているか否かを判定する（ステップＳ１５）。なお、本例ではＢｌｕｅｔｏｏｔｈによる無線通信を前提としているが、ケーブルなどを用いた有線通信を使用する場合には、通信試験などによりケーブルによる接続が行われているか否かを判定すればよい。ＨＦＰ接続が確立していない場合（ステップＳ１５：Ｎｏ）、処理はステップＳ１９へ進む。

一方、ＨＦＰ接続が確立している場合（ステップＳ１５：Ｙｅｓ）、制御部１２は車載器２０に対してマイク切替要求を行い、車載器２０から応答が得られたか否かを判定する（ステップＳ１６）。車載器２０からＯＫの応答が得られない場合（ステップＳ１６：Ｎｏ）、処理はステップＳ１９へ進む。

一方、車載器２０側でマイク切替の準備ができており、車載器２０からＯＫの応答が得られた場合（ステップＳ１６：Ｙｅｓ）、制御部１２は、図４（Ａ）に例示するように、ユーザの音声入力について車載器２０のマイク２７を使用することを示す情報をユーザに表示する（ステップＳ１７）。図４（Ａ）の例は、車両のステアリング近傍にあるマイクに対して音声入力することを示す画像となっている。

そして、制御部１２は、車載器２０と連携して車載器２０のマイク２７を有効とし、マイク２７に対するユーザの音声入力を取得して音声認識の処理を行う（ステップＳ１８）。具体的には、携帯電話１０の制御部１２は、車載器２０のマイク２７に入力された音声を車載器２０から受け取り、携帯電話１０内の音声認識アプリケーションにより音声認識処理を実行する。音声認識処理中に音声によるアナウンスが必要な場合には、そのアナウンスの音声は、携帯電話１０から車載器２０へ送信され、車載器２０のスピーカ２６から出力される。よって、ユーザは、車載器２０のマイク２７とスピーカ２６とをインタフェースとして使用して音声認識を行うことになる。

一方、ステップＳ１１〜Ｓ１６のいずれかの判定がＮｏとなった場合、制御部１２は車載器２０のマイク２７を使用できる状態に無いと判定し、図４（Ｂ）に例示するように、携帯電話１０のマイク１７を使用して音声入力を行うことを示す表示を行う（ステップＳ１９）。図４（Ｂ）の例は、携帯電話のマイクに対して音声入力することを示す画像となっている。

そして、制御部１２は、通常のように携帯電話１０のマイク１７に対するユーザの音声入力を取得して音声認識の処理を行う（ステップＳ２０）。

なお、図４（Ａ）、（Ｂ）に示す表示画像は、携帯電話１０からその画像データ自体を車載器２０へ送信して表示させてもよい。その代わりに、画像データ自体は車載器２０側で所持しておき、いずれのマイクが有効であるかを示す情報のみを携帯電話１０から車載器２０へ送信し、車載器２０側で対応する画像を表示するようにしてもよい。図４（Ａ）、４（Ｂ）の表示例は、いずれのマイクが有効であるかを示すものであり、本発明の有効入力手段情報に相当する。

以上のように、本実施例では、携帯電話１０と車載器２０とが通信可能に接続されており、車載器２０のマイク２７への音声入力を携帯電話１０へ送信できる場合には、ユーザの音声入力に車載器２０のマイク２７を使用する。通常、車載器２０のマイク２７は運転席近傍に設置されており、運転中のドライバーが無理なく使用することができるので、運転に影響を与えることなく音声入力が可能となる。また、本実施例では、図４（Ａ）、（Ｂ）に例示するように、携帯電話１０のマイク１７と車載器２０のマイク２７のいずれが有効となっているかを画像表示などによりユーザに告知するので、ユーザは現在有効となっているマイクを迷うことなく使用することができる。

なお、本実施例では、ステップＳ１１〜Ｓ１６の６つの条件を判定することにより車載器２０のマイク２７への切り替えが可能か否かを判定しているが、これらは例示にすぎない。例えば、ステップＳ１２における判定は、機種情報ファイル中の音声認識対応属性に基づいて行っているが、その代わりに、携帯電話１０内に音声認識処理を行うためのアプリケーションがインストールされているか否かに基づいて判定を行ってもよい。

基本的には、携帯電話１０と車載器２０が相互に通信して必要な情報及びユーザの音声入力データを送受信できる機能を有し、かつ、実際に携帯電話１０と車載器２０との間が通信可能な状態になっている場合には、車載器２０のマイク２７を有効とするように制御することができる。

（マイク切替処理の他の実施例）
上記の実施例では、図２を参照して説明したマイク切替処理を主として携帯電話１０側で行っているが、その代わりに車載器２０側で行うこともできる。この場合、基本的な判定項目や処理の流れは携帯電話１０側で行う場合と同様である。

具体的には、まず車載器２０の制御部２２は、携帯電話１０の機種情報と、携帯電話１０がステップＳ１０で取得した機種情報ファイルとを携帯電話１０から受け取り、ステップＳ１１〜Ｓ１３の処理を行う。次に、制御部２２は、車載器２０のマイク２７の状態を検出してステップＳ１４の判定を行い、携帯電話１０との接続状態を検出してステップＳ１５の判定を行う。

次に、制御部２２は、ステップＳ１６に対応する処理として、携帯電話１０へマイク切替要求を発し、携帯電話１０から準備ＯＫの応答を待つ。準備ＯＫの応答を得たら、制御部２２は、ステップＳ１７で図４（Ａ）の如き表示を行い、ステップＳ１８で車載器２０のマイク２７への切り替えを行う。一方、準備ＯＫの応答がない場合、制御部２２はステップＳ１９で図４（Ｂ）の如き表示を行い、ステップＳ２０に対応する処理として、携帯電話１０側のマイクを使用すべき旨を携帯電話１０に告知すればよい。

[変形例]
図２のフローチャートのステップＳ１５においては、ＢｌｕｅｔｏｏｔｈのＨＦＰ接続が確立していない場合には携帯電話１０のマイク１７を使用することにしている。しかし、ＨＦＰ接続のエラーが出る状況としては、携帯電話１０のハンズフリー通話中であることが考えられる。よって、そのような場合には、制御部１２は、いったんハンズフリー通話を中止することをユーザに提案する画像などを表示し、再度ステップＳ１１からの処理をやり直すようにしてもよい。

ステップＳ１６において車載器２０から応答がない又は応答結果がＮＧの場合は、車載器２０側の何らかの不具合の他に、車載器２０でオーディオなどの他のソースが動作中である場合が考えられる。よって、そのような場合には、制御部１２は、いったん他のソースの動作を中止することをユーザに提案する画像などを表示し、再度ステップＳ１１からの処理をやり直すようにしてもよい。

上記の実施例では、図４（Ａ）、（Ｂ）に例示する有効入力手段情報を車載器２０側に表示しているが、さらに携帯電話１０の表示部にも表示することとしてもよい。これにより、車内にいるドライバー以外の同乗者が携帯電話１０の表示部を見ることにより、携帯電話１０と車載器２０のどちらのマイクが有効となっているかを知ることが可能となる。

上記の例では、有効入力手段情報を図４（Ａ）、（Ｂ）に例示するように車載器２０への画像表示により行っているが、その代わりに又はそれに加えて、音声によるアナウンスやＬＥＤの色による表示などにより有効入力手段情報ユーザに提示することとしてもよい。

上記のマイク切替処理は、携帯電話１０が車載器２０と接続されたときに実行され、携帯電話１０と車載器２０とが通信可能な状態であれば自動的に車載器２０のマイク２７が有効とされる。しかし、携帯電話１０と車載器２０とが通信可能であっても、携帯電話１０のマイク１７を有効としたい場合もある。例えば、車内において後部座席の同乗者などが音声入力を行いたい場合には、携帯電話１０を使用する方が便利である。このような場合には、ユーザの設定により携帯電話１０のマイク１７を優先的に有効とすることもできる。即ち、ユーザが携帯電話１０又は車載器２０を操作してマイク切替機能を使用しないように設定しておけば、携帯電話１０と車載器２０とが接続された場合でもマイク切替処理は行われず、携帯電話１０のマイク１７を有効とすることができる。また、いったん車載器２０のマイク２７が有効とされた後でも、ユーザの操作により携帯電話１０のマイク１７を有効とする変更ができるようにしてもよい。

[音声認識を行うにあたっての車載器との連携]
音声認識を行う場合、周囲の音が大きいと認識率が低下する。そこで、携帯電話から車載器へ音声認識開始通知を送り、車載器はその通知に応じて車両のスピーカをミュートさせるとよい。逆に、オーディオなどの車載器側のソース音声を優先させたい場合には、音声認識処理が実行不可であることを車載器から携帯電話へ通知するようにしてもよい。

通常のＨＦＰなどで音声通話を行う場合、車載器側では相手が聞き取り易いように音声のノイズを軽減させる処理が行われている。しかし、音声認識自体はユーザの生の音声を使用した方が認識率が向上する。よって、携帯電話から音声認識開始通知を受け取ったら車載器はノイズ軽減処理を一時的にキャンセルすることが好ましい。

ＨＦＰの音質を上げるために、通信帯域を一般的な８ｋＨｚの周波数から、その２倍の１６ｋＨＺの周波数に上げるワイドバンドスピーチ（ＷｉｄｅＢａｎｄＳｐｅｅｃｈ）を採用する手法がある。しかし、これは帯域を多く占有してしまうというデメリットもある。このワイドバンドスピーチを音声認識の際に認識率を上げるために使用することも可能である。具体的には、携帯電話から音声認識開始通知を受け取ると、車載器は一時的にワイドバンドスピーチに切り替え、音声認識終了通知を受け取ったらワイドバンドピーチを解除すればよい。

音声認識結果の意味を解釈することにより、テキスト入力の補助だけでなく、その意味に対応した操作（音声操作）を行うことができる。音声操作としては、ソースの切り替え、オーディオ制御（Ｐｌａｙ/Ｐａｕｓｅ、ＶｏｌｕｍｅＵｐ／Ｄｏｗｎなど）、画面の切り替えなどが考えられる。意味の解釈は、携帯電話内で行ってもよいし、音声認識結果をサーバにアップロードして結果を返してもらう形で行ってもよい。

携帯電話がサーバを介して音声認識・操作を行い、その結果をナビゲーション装置を有する車載器にフィードバックすることにより、高精度な音声操作が可能となる。サーバを介して並列に音声認識処理を行うことにより、高精度な結果を迅速に取得可能となる。

上記の各手法は車載器のマイクを使用する場合のみ車載器と連携しているが、携帯電話のマイクを使用する場合にも連携してもよい。特に、車両のスピーカをミュートする手法は効果的である。

音声認識開始の指示は、携帯電話側のソフトウェア（Ｓ／Ｗ）ボタンの押下により可能であるが、車載器との連携中は車載器の画面の操作又は車載器のハードウェア（Ｈ／Ｗ）キーの操作によっても可能である。

音声認識の音声入力について車載器のマイクを使用する場合には、携帯電話のマイクで環境音を取り込み、それをノイズキャンセルのために利用することも可能である。

音声認識結果は複数取得することが可能であるが、走行中にその結果の中から該当する項目を選択することは、画面を注視することとなり、運転に影響を与える可能性がある。一方で、携帯電話が車載器と連携する場合、車載器から走行情報を取得することができる。そのため、音声認識結果を取得した後は、以下のように走行状態によって動作を変更することも可能である。
（１）走行中の場合：取得した結果の候補として一番信頼できる結果を自動で選択する。
（２）停車中の場合：取得した結果の一覧をリストで表示し、ユーザに選択させる。

なお、一番信頼できる結果としては、例えば、取得した結果のうちの先頭（１番目）の候補、認識率が最も高い候補、などを使用する方法がある。

本発明は、相互に通信可能な携帯端末及び車載器に利用することができる。

５サーバ
６機種情報ＤＢ
１０携帯電話
１２、２２制御部
１３、２１情報通信部
１４、２５音声制御部
１５、２４音声通信部
１６、２６スピーカ
１７、２７マイク
２０車載器
２３タッチパネル

Claims

各種のアプリケーションを動作させる携帯端末装置であって、
入力された音声を受け付ける携帯側音声入力手段と、
車載器と通信可能に接続する接続手段と、
前記接続手段により接続された車載器の車載器側音声入力手段と、前記携帯側音声入力手段のうち、いずれかを使用して入力された音声に基づいてアプリケーションの動作を制御する制御手段と、
音声によりアプリケーションの動作を制御する際に、前記携帯側音声入力手段と前記車載器側音声入力手段のうちのどちらを使用するかを示す有効入力手段情報をユーザに提示する提示手段と、
を備えることを特徴とする携帯端末装置。
前記携帯端末装置が前記携帯側音声入力手段以外からの音声入力を受け付け可能であり、かつ、前記携帯端末装置と前記車載器とが前記接続手段により通信可能に接続されている場合、前記提示手段は、前記車載器側音声入力手段を使用することを示す有効入力手段情報を提示することを特徴とする請求項１に記載の携帯端末装置。
前記制御手段は、前記携帯端末装置の機種情報に基づいて、当該携帯端末装置が外部からの音声入力を受け付け可能であるか否かを判定することを特徴とする請求項２に記載の携帯端末装置。
前記提示手段は、前記有効入力手段情報を前記車載器に送信し、前記車載器によってユーザに提示させることを特徴とする請求項１乃至３のいずれか一項に記載の携帯端末装置。
入力された音声を受け付ける携帯側音声入力手段と、車載器と通信可能に接続する接続手段とを備え、各種のアプリケーションを動作させる携帯端末装置によって実行される情報提示方法であって、
前記接続手段により接続された車載器の車載器側音声入力手段と、前記携帯側音声入力手段のうち、いずれかを使用して入力された音声に基づいてアプリケーションの動作を制御する制御工程と、
音声によりアプリケーションの動作を制御する際に、前記携帯側音声入力手段と前記車載器側音声入力手段のうちのどちらを使用するかを示す有効入力手段情報をユーザに提示する提示工程と、
を有することを特徴とする情報提示方法。
入力された音声を受け付ける携帯側音声入力手段と、車載器と通信可能に接続する接続手段とを備え、各種のアプリケーションを動作させる携帯端末装置によって実行される情報提示プログラムであって、
前記接続手段により接続された車載器の車載器側音声入力手段と、前記携帯側音声入力手段のうち、いずれかを使用して入力された音声に基づいてアプリケーションの動作を制御する制御工程と、
音声によりアプリケーションの動作を制御する際に、前記携帯側音声入力手段と前記車載器側音声入力手段のうちのどちらを使用するかを示す有効入力手段情報をユーザに提示する提示工程と、
を前記携帯端末装置に実行させることを特徴とする情報提示プログラム。
入力された音声を受け付ける車載器側音声入力手段と、
各種のアプリケーションを動作させる携帯端末装置と通信可能に接続する接続手段と、
前記携帯端末装置が音声によりアプリケーションの動作を制御する際に、前記接続手段により接続された携帯端末装置の携帯側音声入力手段と、前記車載器側音声入力手段のうち、どちらを使用するかを決定する決定手段と、
前記携帯側音声入力手段と前記車載器側音声入力手段のどちらを使用するかを示す有効入力手段情報をユーザに提示する提示手段と、
を備えることを特徴とする車載器。
入力された音声を受け付ける車載器側音声入力手段と、各種のアプリケーションを動作させる携帯端末装置と通信可能に接続する接続手段とを備える車載器により実行される情報提示方法であって、
前記携帯端末装置が音声によりアプリケーションの動作を制御する際に、前記接続手段により接続された携帯端末装置の携帯側音声入力手段と、前記車載器側音声入力手段のうち、どちらを使用するかを決定する決定工程と、
前記携帯側音声入力手段と前記車載器側音声入力手段のどちらを使用するかを示す有効入力手段情報をユーザに提示する提示工程と、
を有することを特徴とする情報提示方法。
入力された音声を受け付ける車載器側音声入力手段と、各種のアプリケーションを動作させる携帯端末装置と通信可能に接続する接続手段とを備える車載器により実行される情報提示プログラムであって、
前記携帯端末装置が音声によりアプリケーションの動作を制御する際に、前記接続手段により接続された携帯端末装置の携帯側音声入力手段と、前記車載器側音声入力手段のうち、どちらを使用するかを決定する決定工程と、
前記携帯側音声入力手段と前記車載器側音声入力手段のどちらを使用するかを示す有効入力手段情報をユーザに提示する提示工程と、
を前記車載器に実行させることを特徴とする情報提示プログラム。
請求項６又は９に記載の情報提示プログラムを記憶したことを特徴とする記憶媒体。