JP6678382B2 - 車両用の携帯端末操作システム - Google Patents

Description

本発明は、車内に存在する携帯端末を操作するための車両用の携帯端末操作システムに関する。

近年、例えば目的地の検索や経路案内等、車両で利用する際の利便性が高いアプリケーションを実行可能なスマートホンのような携帯端末が普及している。このような携帯端末は、ユーザが手に持って使用することを前提としており、その操作にはある程度画面を注視する必要があった。しかし、運転中に携帯端末を操作すると運転を阻害するおそれがあるため、運転中の操作は望ましくない。そのため、例えば特許文献１には、携帯端末の画面を撮像する撮像手段を備え、車両用装置側にて携帯端末の画面を再現するとともに、車両用装置に入力された操作を携帯端末にフィードバックすることが記載されている。

特開２０１２−３３７４号公報

しかしながら、上記した特許文献１のような構成では、車両用装置が撮像手段を備えている必要があり、携帯端末の操作に利用することができる車両用装置が予め限定されていた。また、携帯端末側においても、それぞれの車両用装置毎に対応が必要となっていた。また、そもそも、タッチパネルといったある程度画面を注視する必要がある操作を車両で行わせることは、危険性が高く、安全性の観点から好ましくない。
本発明は上記事情に鑑みてなされたものであり、その目的は、車内で携帯端末を操作する際に運転を阻害するおそれを低減することができる車両用の携帯端末操作システムを提供することにある。

請求項１記載の発明では、車両用の携帯端末操作システムは、携帯端末（２）と、ユーザが操作を入力する操作装置（３、４ｂ、５０、５１、５２）と、前記操作装置（３、４ｂ、５０、５１、５２）に対して入力された操作を示す操作情報を前記携帯端末（２）に対して通知する通知手段（２３、３０）と、を備え、前記携帯端末（２）は、自身の端末側操作部（２ｂ）に対して行われた操作に応じて単独で動作する場合に自身の端末側表示部（２ａ）に表示するユーザインターフェースを有する一方、自身の前記端末側操作部（２ｂ）とは操作態様が異なる前記操作装置（３、４ｂ、５０、５１、５２）に対して行われた操作に応じて動作する場合には、単独で動作する場合とは異なるユーザインターフェースを前記端末側表示部（２ａ）に表示することを特徴とする。
これにより、タッチパネルからの入力が前提となっているようなアプリケーションであっても、画面を注視することなく操作することができる。したがって、車内で携帯端末を操作する際に運転を阻害するおそれを低減することができる。

第１実施形態の車両用の携帯端末操作システムの構成および利用形態を模式的に示す図 第１実施形態の車両用の携帯端末操作システムの電気的構成を模式的に示す図 第１実施形態の携帯端末および車両用装置の画面表示および操作態様の一例を示す図 第１実施形態の車両用の携帯端末操作システムにおけるアプリケーションの動作の流れを模式的に示す図 第２実施形態の車両用の携帯端末操作システムの電気的構成を模式的に示す図 第２実施形態の操作装置の外観を模式的に示す図 第２実施形態の車両用の携帯端末操作システムにおけるアプリケーションの動作の流れを模式的に示す図

以下、本発明の複数の実施形態について、図面を参照しながら説明する。なお、各実施形態において実質的に共通する部位には同一の符号を付して説明する。
（第１実施形態）
以下、第１実施形態について、図１から図４を参照しながら説明する。
以下、本発明の一実施形態について、図１から図４を参照しながら説明する。
図１（Ａ）に示すように、本実施形態の携帯端末操作システム１は、携帯端末２、操作装置としてのコントローラ３、および車両用装置４から構成されている。携帯端末２は、端末側表示部２ａと、端末側表示部２ａに対応して設けられているタッチパネル（図示省略）および操作スイッチ等で構成された端末側操作部２ｂを備えている。本実施形態では、携帯端末２として、いわゆるスマートホンと呼ばれる高機能携帯電話を想定している。この携帯端末２は、図１（Ｂ）に示すように、車両５内のダッシュボード上等に載置される。ただし、本実施形態の場合、携帯端末２は、車両用装置４と通信可能に接続された状態では端末側操作部２ｂへの操作入力が禁止される。そのため、携帯端末２は、必ずしもダッシュボード上に載置されていなくてもよく、例えばユーザの胸ポケットやカバン等に入っていてもよい。

携帯端末２は、図示は省略するがＣＰＵで構成された制御部やフラッシュメモリなどで構成された記憶部等を備えており、端末側操作部２ｂに対して行われた操作に応じて動作する。この携帯端末２には、タッチパネルに対してタッチ操作、フリック動作、スワイプ動作、ドラッグ操作のような物理法則に則ったユーザの操作が行われる。これらの操作によって携帯端末２を直感的に操作することが可能となる一方、ユーザは、操作が完了するまで端末側表示部２ａを注視したり、指を継続的に接触し続けたりする必要がある。

この携帯端末２には、図２に示すように、オペレーティングシステム１０の管理下に、ＢＬＥ通信部１１および外部通信部１２が設けられている。ＢＬＥ通信部１１は、コントローラ３との間でＢｌｕｅｔｏｏｔｈ（登録商標） Ｌｏｗ Ｅｎｅｒｇｙにより通信を行うためのものであり、第１の端末側通信部に相当する。外部通信部１２は、車両用装置４とｗｉｆｉにより通信を行うためのものであり、第２の端末側通信部に相当する。以下、ＢｌｕｅｔｏｏｔｈをＢＴと称し、Ｂｌｕｅｔｏｏｔｈ Ｌｏｗ ＥｎｅｒｇｙをＢＬＥと称する。

また、携帯端末２は、各種のアプリケーションを一覧表示する等、ユーザインターフェースを提供するためのランチャープログラム１３を備えている。このランチャープログラム１３によって、携帯端末２に予め搭載されているアプリケーション（以下、ランチャーアプリ１４と称する）や、ユーザがダウンロードしたアプリケーション（以下、連携アプリ１５と称する）が起動される。ランチャーアプリ１４および連携アプリ１５は、アプリケーションの機能を実現するプログラムであるアプリ本体１６と、コントローラ３からの操作を受け付けるためのプログラムであるライブラリ１７とで構成されている。

ライブラリ１７は、コントローラ３から通知された操作情報をアプリ本体１６にて受け付け可能な情報に変換する変換プログラムに相当する。このライブラリ１７は、本実施形態ではコントローラ３を製造するメーカーから提供されている。このため、アプリケーションの作成者は、コントローラ３との間の通信や操作情報の変換等を考慮しなくとも、ライブラリ１７を実装するだけでコントローラ３からの操作を受け付ける機能を実現することができる。なお、ランチャーアプリ１４および連携アプリ１５は、それぞれ複数であっても構わない。

この携帯端末２には、コントローラ３が通信可能に接続されている。このコントローラ３は、携帯端末２を操作するための専用の装置である。コントローラ３は、図１（Ａ）に示すように、ユーザが操作するための操作ノブ３ａと、操作ノブ３ａを車内に固定するためのベース部３ｂとを備えている。操作ノブ３ａは、概ね円柱状に形成されており、運転者が手のひらに収めて、あるいは、指で挟んで操作可能な大きさになっている。ベース部３ｂは、例えば磁力等によって車内に固定される。なお、固定方法としては、磁力に限らず専用のホルダを設ける等であってもよい。

コントローラ３は、図１（Ｂ）に示すように、例えば車両５内の運転席と助手席との間のセンターコンソール等、運転者が操作しやすい位置に設置される。この場合、コントローラ３を車両５の特定の位置に固定的に設けてもよいが、本実施形態では、運転者が任意の位置に設置可能であり、且つ、その位置から取り外し可能となっている。
このコントローラ３は、バッテリ２４により駆動される構成となっており、使用時に電源ケーブル等が不要となっている。このため、コントローラ３を車外に持ち出すことも可能となっている。また、コントローラ３には、電源をＯＮ／ＯＦＦするための電源スイッチが設けられている。

このコントローラ３は、図２に示すように、プッシュ操作検知部２０、ロータリ操作検知部２１および二軸操作検知部２２を備えている。そして、コントローラ３は、操作ノブ３ａをベース部３ｂ側に向かって押し込むプッシュ操作、操作ノブ３ａをベース部３ｂに対して相対的に回転させるロータリ操作、および、ベース部３ｂを中心として直交する二軸方向のいずれかへ操作ノブ３ａを傾動する二軸操作が入力可能となっている。つまり、コントローラ３は、携帯端末２に設けられているタッチパネルを操作する場合に比べて、単純化された操作を入力可能に構成されている。このため、コントローラ３は、タッチパネルをなぞるような連続的な動作を必要とせず、いわばスイッチを操作するときのような断続的な動作にて操作を入力することができる。このように、コントローラ３と携帯端末２の端末側操作部２ｂとは、その操作態様が異なっている。

コントローラ３に入力された操作は、ＢＬＥ通信部２３を介して操作情報として携帯端末２に送信される（図１（Ａ）参照）。このＢＬＥ通信部２３は、操作側通信部に相当する。また、コントローラ３は、ＢＬＥ通信部２３を介してペアリングを行う。ペアリングを行う際の暗証番号等のペアリング情報は、コントローラ３に固定的に設定されている。このため、携帯端末２の近傍でコントローラ３の電源を入れることによってペアリングは自動的に行われる。

車両用装置４は、図１（Ａ）に示すように、車両側表示部４ａおよび車両側操作部４ｂを備えている。このうち、車両側表示部４ａは、図１（Ｂ）に示すように、車両５のダッシュボード等、ユーザが視認可能な位置に取り付けられている。この車両用装置４は、図２に示すように、車両側通信部３０を備えている。この車両側通信部３０は、携帯端末２との間で例えばｗｉｆｉ（登録商標）やＢｌｕｅｔｏｏｔｈ（登録商標。以下、ＢＴと称する）などの無線通信方式、ＨＤＭＩ（High-Definition Multimedia Interface（登録商標））やＵＳＢ（Universal Serial Bus）などの有線通信方式により通信を行うためのものである。本実施形態では、通信方式としてＷｉｆｉを採用している。

車両用装置４には、図１（Ａ）にも示すように、携帯端末２の画面を代理で車両側表示部４ａに表示するための表示情報を受け付けるとともに、および音声を車両用装置４のスピーカ３１（図２参照）から出力するための音声情報を受け付ける。そして、車両用装置４は、表示情報に基づいて携帯端末２の動作画面を車両側表示部４ａに表示する。この車両側表示部４ａは、運転中でも見やすいように、運転者の視野内に設けられているとともに、比較的大きな画面を備えている。

また、車両用装置４は、コントローラ３に入力された操作に応じたアプリケーションの動作状態をスピーカ３１から音声にてトークバックする。このとき、トークバックされる動作状態には、アプリケーションを選択する際の動作状態も含まれる。このスピーカ３１は、音声出力装置に相当する。なお、本実施形態では、アプリケーションの実行自体は携帯端末２で行われており、車両用装置４は、携帯端末２で実行されているアプリケーションの動作画面等を表示する表示端末として機能している。

また、車両用装置４は、図２に示すように、マイク３２にも接続されている。車両用装置４は、マイク３２からの音声を利用して、携帯端末２と接続された際のハンズフリー通話や音声認識が可能となっている。また、車両用装置４は、例えばＣＡＮ（Controller Area Network）用のインターフェースとなるＣＡＮ接続部３３を介して、車両５に搭載されている各種のＥＣＵ４０（electronic control unit）にも接続されている。このＥＣＵ４０は、車両５の走行状態を検知する各種のセンサ等を備えている。このため、車両５の位置や姿勢あるいは加速度といった情報を車両用装置４にて取得したり、携帯端末２に送信したりすることも可能となっている。

このような構成の携帯端末２操作システムでは、携帯端末２は、単独で動作する場合と、車両用装置４に画面出力する場合とで、操作態様の違いに応じて異なるユーザインターフェースを提供する。具体的には、携帯端末２は、単独で動作する場合、ランチャープログラム１３にてアプリケーションをアイコン表示し、アプリケーションの数が多い場合にはスワイプ動作を行わせたり、表示する情報量が多い場合には図３（Ａ）に示すようなスクロールバーＭ１を操作させたりするようなユーザインターフェースを提供する。

この図３（Ａ）のようにランチャーアプリ１４ａ〜１４ｃの３つのアプリケーションがアイコン表示され、現時点でのフォーカスがランチャーアプリ１４ａにある場合、ユーザは、例えばランチャーアプリ１４ａがフォーカスされている状態において、画面から外れているランチャーアプリ１４ｃを起動したい場合には、指でスクロールバーＭ１を操作し、さらにランチャーアプリ１４ｃをタッチ操作する必要がある。つまり、ユーザは、上記したようにある程度画面を注視し続ける必要がある。なお、図３では、フォーカスされているアプリケーションをハッチングにて模式的に示している。

これに対して、携帯端末２は、コントローラ３および車両用装置４と接続された場合には、図３（Ｂ）に示すように、ランチャープにてアプリケーションをアイコン表示する。この図３（Ｂ）は、ランチャーアプリ１４ａ〜１４ｄと、連携アプリ１５ａ〜１５ｂの６個のアプリケーションがアイコン表示され、ランチャーの画面を切り替えるための前へボタンＭ２および次へボタンＭ３が表示されている状態を模式的に示している。これにより、比較単純な動作で操作入力が行われるコントローラ３を用いて、携帯端末２を操作することが可能となる。

この場合、携帯端末２は、コントローラ３からロータリ操作が入力されると、フォーカスを移動させることによって、選択されるアプリケーションを変更する。このとき、携帯端末２は、例えばアプリケーションの数が１画面に入りきらない場合には、画面を切り替えるために前へボタンＭ２や次へボタンＭ３を表示するようなユーザインターフェースを提供する。そして、携帯端末２は、アイコンが選択された状態でプッシュ操作が行われることで、選択されたアプリケーションを起動させる。

なお、図３（Ｂ）はコントローラ３からの操作に対応させたユーザインターフェースの一例を示すものであり、ユーザインターフェースは上記したものに限定されない。例えば、前へボタンＭ２や次へボタンＭ３を表示する代わりに、二軸操作を画面の切り替えに対応させる構成であってもよい。

そして、携帯端末２は、コントローラ３および車両用装置４と接続された場合には、アイコンの選択状態を音声にて通知する。例えば、ランチャーアプリ１４ａの名称が「ナビゲーション」であった場合、携帯端末２は、コントローラ３からの操作によってランチャーアプリ１４ａが選択されると、本実施形態ではスピーカ３１から「ナビゲーション」という音声を出力する。このようなユーザインターフェースを提供することで、ユーザは、コントローラ３を用いて携帯端末２を操作することができる。

このようなユーザインターフェースを提供することで、ユーザは、画面を注視し続けなくても、アプリケーションの選択および実行が可能となる。
次に、図４を参照しながら、携帯端末操作システム１におけるアプリケーションの動作について説明する。なお、携帯端末２と車両用装置４との間の接続は既に行われており、車両用装置４には、上記した図３（Ｂ）のようにアイコン等が表示されたランチャープログラム１３の動作画面（ランチャー画面）が表示されているものとする。また、本実施形態では、ランチャープログラム１３は、携帯端末２に登録されているアプリケーションのうち、ライブラリ１７が実装されているアプリケーションだけを表示する。

コントローラ３は、電源がＯＮされると、まず、ＢＴ４．０アドバタイズ処理を実行する。この処理は、ＢＴ４．０の仕様に基づくものであり、自身の周囲に存在するＢＴ接続可能な他の機器を検索するための処理である。ＢＴ４．０アドバタイズ処理にて他の機器（本実施形態では、携帯端末２）が検索されると、コントローラ３と携帯端末２との間でペアリングが実行される。このペアリングは、ランチャーアプリ１４のライブラリ１７によって行われる。なお、ペアリング自体はランチャープログラム１３により行ってもよい。ペアリングが完了すると、コントローラ３を用いた携帯端末２の操作が可能となる。

ペアリング後にユーザ操作がコントローラ３を操作すると、コントローラ３は、携帯端末２に対して操作情報を送信する。この操作情報によって、例えばユーザがロータリ操作を行った場合にはロータリ操作が行われた旨が携帯端末２に通知される。そして、通知を受けたランチャーアプリ１４は、ライブラリ１７において、操作情報により特定されるコントローラ３に入力されたユーザの操作を、アプリ本体１６を動作させるための動作情報に変換して、アプリ本体１６に受け渡す。そして、アプリ本体１６は、コントローラ３からの操作に応じて動作する。

このとき、アプリケーションの動作に応じて変化する画面表示は、画面情報として車両用装置４に送信されて、車両側表示部４ａにて表示される（図４には、アプリ表示を示す）。また、アプリケーションの選択操作が行われているときには、上記したようにトークバックによる音声出力が行われる。また、アプリケーションの動作中に発生する音声は、音声情報として車両用装置４に送信され、車両用のスピーカ３１から出力される。このため、ユーザは、携帯端末２を注視しなくても、また、携帯側操作部のタッチパネルを操作する際に比べて短い時間だけコントローラ３を操作することで、携帯端末２の操作が可能となる。

さて、ユーザが連携アプリ１５を起動する操作を入力した場合、コントローラ３から操作情報が送信され、連携アプリ１５が起動される。このとき、ＢＬＥではコントローラ３とのペアリングをアプリケーション毎に行うことができるため、コントローラ３を連携アプリ１５との間でペアリングを行う必要がある。ただし、再度ペアリングを実行すると待ち時間が必要になることから、本実施形態では、既にペアリングが完了している場合には、ペアリングに関する情報が引き継ぎ情報として連携アプリ１５に引き継がれ、その引き継ぎ情報に基づいてコントローラ３との間でペアリングが行われる。

そして、ペアリングが完了すると、連携アプリ１５にもライブラリ１７が実装されていることから、コントローラ３から通知された操作情報に基づいて動作情報への変換が行われ、連携アプリ１５がコントローラ３からの操作に応じて動作する。つまり、コントローラ３によって、携帯端末２の操作が可能となる。このとき、連携アプリ１５が動作しているときの動作画面や音声も、車両用装置４の車両側表示部４ａに表示される。

このように、携帯端末操作システム１では、車内で携帯端末２を操作するための専用のコントローラ３によって携帯端末２の操作が行われている。
以上説明した本実施形態によれば、次のような効果を得ることができる。

携帯端末操作システム１では、携帯端末２を操作するとき、専用のコントローラ３を用いている。このコントローラ３は、プッシュ操作、ロータリ操作および二軸操作という、携帯端末２に設けられているタッチパネルを操作する場合に比べて単純化された操作入力が可能となっている。そして、このようなコントローラ３を用いることで、単純化された操作を入力することで携帯端末２の操作が可能となる。これにより、タッチパネルからの入力が前提となっているようなアプリケーションであっても、画面を注視することなく操作することができる。したがって、車内で携帯端末２を操作する際に運転を阻害するおそれを低減することができる。

携帯端末操作システム１では、携帯端末２は、車両用装置４との間で通信を行う第２の端末側通信部を有し、車両用装置４と接続されている場合には、自身の動作状態を車両用装置４の車両側表示部４ａに表示する。車両用装置４の車両側表示部４ａは、運転中でも見やすいように、運転者の視野内に設けられているとともに、比較的大きな画面を備えている。このため、車両側表示部４ａは、一般的なスマートホンよりも大きな画面であることが多い。そのため、車両側表示部４ａに携帯端末２の画面を表示することで、ユーザは、視野を前方から大きく逸らせることなく、また、携帯端末２よりも見やすい大きさでアプリケーションの動作状態等を把握することができる。したがって、運転を阻害するおそれがより低減され、車内で携帯端末２を操作する際における安全性をより高めることができる。

携帯端末操作システム１では、携帯端末２は、車両用装置４と接続された際、自身の端末側操作部２ｂに対する操作を禁止、つまり、受付不可とする。これにより、運転中に携帯端末２を直接的に操作することを防止できる。
携帯端末操作システム１では、携帯端末２は、車両用装置４と接続された際、操作態様の違いに応じて、図３に示したような異なるユーザインターフェースを提供する。これにより、比較単純な動作で操作入力が行われるコントローラ３を用いて、携帯端末２を操作することが可能となる。

携帯端末操作システム１では、スピーカ３１等の音声出力装置を備え、コントローラ３に入力された操作に応じたアプリケーションの動作状態を音声にてトークバックする。これにより、画面を見なくてもアプリケーションの選択状態等を把握することができる。したがって、運転を阻害するおそれをさらに低減することができる。

携帯端末操作システム１では、ライブラリ１７は、携帯端末２にて実行される複数のアプリケーションのそれぞれに実装されている。そして、コントローラ３から通知された操作情報は、各アプリケーションにて動作情報に変換される。また、ライブラリ１７は、コントローラ３のメーカーから提供される。これにより、アプリケーションの作成者は、コントローラ３との間のインターフェースを設計する等の作業を行わなくても、コントローラ３を用いて操作されるアプリケーションを提供することができる。

携帯端末操作システム１では、携帯端末２に登録されているアプリケーションのうち、ライブラリ１７が実装されたアプリケーションを抽出して表示する。これにより、携帯端末２が車両用装置４に接続された状態では、コントローラ３での操作に対応しないアプリケーション、すなわち、操作時に画面を注視する必要があるアプリケーションがそもそも表示されなくなる。したがって、運転を阻害するおそれを低減することができる。

携帯端末操作システム１では、携帯端末２とコントローラ３との間は、ＢＬＥにより接続されている。ＢＬＥは、比較的小型でバッテリ２４を使用する機器等においてＢＴ通信を行うための仕様である。そのため、ＢＬＥにより通信を行う構成とすることで、省電力動作が可能となり、バッテリ２４の持ちを長くすることができる。また、ハンズフリー通話を行うためのＢＴ通信（例えば、ＢＴ２．０での通信）等と同時に利用することができる。

このとき、携帯端末操作システム１では、コントローラ３の電源がＯＮされると自動でペアリングを行っている。これにより、接続する際のユーザの操作が不要となり、利便性を高めることができる。
携帯端末操作システム１では、携帯端末２とコントローラ３との間のペアリング情報を、携帯端末２に登録されている複数のアプリケーション間で引き継ぐ情報として共用する。これにより、異なるアプリケーションを実行する際の再ペアリングが不要となり、利便性を向上させることができる。

（第２実施形態）
以下、第２実施形態について、図５から図７を参照しながら説明する。第２実施形態では、操作装置として、車両に予め搭載されている車載資源を利用している点において、第１実施形態と異なっている。
本実施形態の携帯端末操作システム１では、操作装置としてタッチパネル４ｂ、ステアリングスイッチ５０、ハプティック装置５１および後席リモコン５２を想定している。ただし、これら全てを備えている必要は必ずしもなく、１つまたは２つが設けられた構成であってもよい。以下、タッチパネル４ｂ、ステアリングスイッチ５０、ハプティック装置５１および後席リモコン５２を便宜的に車載コントローラとも称し、車載コントローラや車両用装置４も含めて車両に予め搭載されている機器を便宜的に車両用資源とも称して説明する。なお、第１実施形態で説明したコントローラ３を備えていてもよい。

ステアリングスイッチ５０は、図６（Ａ）に示すようにステアリングに取り付けられており、ステアリングから手を離さなくても指で操作することができる複数のスイッチを備えている。本実施形態では、ステアリングスイッチ５０は、上方向キー５０ａ、下方向キー５０ｂ、左方向キー５０ｃ、右方向キー５０ｄ、バックキー５０ｅ、および、決定キーと兼用されるダイアルキー５０ｆを備えている。

ハプティック装置５１は、例えばセンターコンソール等に設置されており、ユーザが手を添えて操作する複数のスイッチを備えている。本実施形態では、ハプティック装置５１は、シーソーキー５１ａ、決定キー５１ｂ、バックキー５１ｃ、第１サイドキー５１ｄ、第２サイドキー５１ｅを備えている。
後席リモコン５２は、図示は省略するが、ステアリングスイッチ５０やハプティック装置５１と同様の操作を後席から入力可能とするものである。

タッチパネル４ｂは、本実施形態では、携帯端末２を操作するときのような画面を注視しながら操作する態様ではなく、上下方向や左右方向を示すシンプルな操作ボタンが複数表示され、単純なスイッチ代わりに使用する態様を想定している。
このとき、複数の操作装置が存在していることから、それらには優先順位を設定している。本実施形態では、操作装置の優先順位は、コントローラ３が最も高く、続いてステアリングスイッチ５０、ハプティック装置５１、タッチパネル４ｄ、後席リモコン５２の順に設定されている。

車両用装置４は、図５に示すように、第１実施形態とほぼ共通する構成となっている。ただし、本実施形態では車両側通信部３０は通信方式としてＢＴおよびＢＬＥを採用している。このため、車両用装置４と携帯端末２との間は、ＢＴおよびＢＬＥによって通信可能となっている。また、車両用装置は、Ｎａｔｉｖｅアプリ５３、操作切替アプリ５４、および通知アプリ５５を実行可能に構成されている。

Ｎａｔｉｖｅアプリ５３は、エアコンやオーディオ機器等、予め車両に搭載されている各種の車載機器を制御するためのアプリケーションである。車両用装置４は、Ｎａｔｉｖｅアプリ５３を実行することにより、常には車載コントローラから入力された操作に応じて、車載機器を制御する。具体的には、図７に示すように、車載コントローラに対してユーザ操作が行われると、その操作を示す操作情報に基づいて、オーディオの制御やエアコンの調整等を行うＮａｔｉｖｅ機能を実行し、操作応答を車載コントローラに返すとともに、実行結果を例えば車両側表示部４ａに表示する。

操作切替アプリ５４は、車載コントローラに対して行われたユーザの操作を、車両側資源に対して通知するか、携帯端末２に対して通知するかを切り替える。本実施形態の場合、車両用装置４は、携帯端末２と通信可能な状態になったとき、車載コントローラからの要求に応じて携帯端末２に対して通知するように切り替える。なお、本実施形態では、携帯端末２が車両に持ち込まれ、車両用装置４の電源がＯＮされた時点でＢＴによるペアリングが自動で行われ、ＢＴによる通信が可能な状態になる。

これにより、車載コントローラによる携帯端末２の操作が可能となる。具体的には、図７に示すように、車両用装置４は、車載コントローラに対してモード切替操作が入力されると（切替要求が行われると）、通知モードに切り替わる。この通知モードは、車載コントローラに対して行われた操作を示す操作情報を、車載機器ではなく携帯端末２に対してＢＬＥで通知する動作モードである。車両用装置４は、この通知モードに切り替わると、ＢＬＥでの通信が可能となり、車載コントローラに対して行われた操作を示す操作情報に基づいて入力デバイスを判定し、入力情報のマッピング（判定した車載コントローラのスイッチと携帯端末２に通知する操作情報との対応付け）をした後、操作情報を携帯端末２側に通知する。

操作情報の通知を受けた携帯端末２は、第１実施形態と同様に、連携アプリ１５において操作情報を自身が動作可能な動作情報に変換し、変換した動作情報に基づいて自身のアプリを実行等の動作を行う。このとき、携帯端末２は、上記した操作装置の優先順位に基づいて、優先する操作情報を選択して動作する。また、携帯端末２は、第１実施形態と同様に、アプリの動作画面を車両側表示部４ａに表示する。これにより、携帯端末２の動作状態を車両側表示部４ａにて確認することができる。
このように、本実施形態では、車両に予め搭載されている車両用資源を用いて、携帯端末２の操作が行われる。

以上説明した本実施形態によれば、次のような効果を得ることができる。
携帯端末操作システム１では、ユーザが操作を入力する操作装置（４ｂ、５０、５１、５２）と、入力された操作を示す操作情報を携帯端末２に対して通知する通知手段としての車両側通信部３０とを備え、携帯端末２は、自身の端末側操作部２ｂに対して行われた操作に応じて動作する一方、操作装置（４ｂ、５０、５１、５２）側から通知された操作情報に基づいて、自身の端末側操作部２ｂとは操作態様が異なる操作装置（４ｂ、５０、５１、５２）に対して行われた操作に応じて動作する。これにより、タッチパネルからの入力が前提となっているようなアプリケーションであっても、画面を注視することなく操作することができる。したがって、車内で携帯端末２を操作する際に運転を阻害するおそれを低減することができる。

ユーザが操作を入力する操作装置として、車両に搭載されている機器類である車載機器を操作するために予め車両に設けられているタッチパネル４ｂ、ステアリングスイッチ５０、ハプティック装置５１および後席リモコン５２等の車両用資源を利用している。これにより、携帯端末２を操作するための専用の操作装置を設けなくてもよくなる。
複数の操作装置に対して優先順位を設定してあるので、操作装置からの操作情報が重複した場合であっても、優先順位に基づいて動作することで、正確な動作を行うことができる。

車両用装置４の電源がＯＮされると自動で携帯端末２とペアリングを行って通信可能状態となるので、接続するための操作が不要となり、利便性を高めることができる。そして、ユーザによるモード切替操作に応じて通知モードに切り替えるので、ユーザが意図していないのに通知モードに切り替わってしまい車載機器の制御ができなくなることを防止できる。このとき、ＢＬＥにより操作情報の通信を行うので、第１実施形態と同様に、省電力動作が可能となる。

車両側表示部４ａに携帯端末２の画面を表示するので、ユーザは、視野を前方から大きく逸らせることなく、また、携帯端末２よりも見やすい状態で動作を把握することができる。したがって、運転を阻害するおそれがより低減され、車内で携帯端末２を操作する際における安全性をより高めることができる。

本実施形態の携帯端末操作システム１に、第１実施形態で説明した構成を適用してもよい。これにより、第１実施形態と同様の効果を得ることができる。例えば、車両用装置４と接続された際に端末側操作部２ｂに対する操作を禁止することで、運転中に携帯端末２を直接的に操作することを防止できる。また、車両用装置４と接続された際に操作態様の違いに応じて異なるユーザインターフェースを提供することで、比較単純な動作で操作入力が行われる車載コントローラを用いて携帯端末２を操作することが可能となる。また、入力された操作に応じて動作状態を音声にてトークバックすることで、画面を見なくてもアプリケーションの選択状態等を把握することができ、運転を阻害するおそれをさらに低減することができる。また、携帯端末２と車載コントローラとの間のペアリング情報を、携帯端末２に登録されている複数のアプリケーション間で引き継ぐ情報として共用することで、異なるアプリケーションを実行する際の再ペアリングが不要となり、利便性を向上させることができる。

（その他の実施形態）
本発明は、上記した各実施形態にて例示したものに限定されることなく、その範囲を逸脱しない範囲で任意に変形あるいは拡張することができる。
実施形態では車両用装置４に接続される例を示したが、本発明においては、車両用装置４は必ずしも必須ではない。つまり、端末側表示部２ａを視認可能な状態で携帯端末２をダッシュボード上等に載置し、コントローラ３を用いてその携帯端末２を操作する構成であってもよい。これにより、車両用装置４を備えていない場合においても、運転を阻害するおそれを低減しつつ携帯端末２を利用することができる。

操作ノブ３ａを操作する際の動作抵抗をバッテリ２４の残量に基づいて変更してもよい。例えば、コントローラ３のバッテリ２４の残量が少なくなったときにロータリ操作が重くなるように抵抗負荷を変更することで、ユーザにバッテリ２４の残量を警告することができる。そして、バッテリ２４の残量を警告することで、いきなりコントローラ３が操作不能になる等の不利益をユーザに与えるおそれを低減することができる。

コントローラ３に加速度を検知する加速度検知手段を設け、加速度検知手段により検知した加速度に基づいて、コントローラ３の向き、つまり、操作装置に対して行われた操作方向を検知する構成としてもよい。また、第２実施形態のような構成では、例えばＥＣＵ４０等から車両制御に用いられる加速度センサから加速度を検知するようにしてもよい。例えばコントローラ３を操作する際の前後左右の向きが画面表示における上下左右の向きとずれている場合、操作がしづらくなるおそれがある。また、コントローラ３の向きを調整するためにコントローラ３を注視してしまうような状況が発生することは好ましくない。そのため、加速度に基づいて車両５の進行方向を判定するようにし、例えば二軸操作やロータリ操作を行う際の向きに対応させることで、操作しづらくなることを防止できる。

この場合、コントローラ３の向きに応じたユーザインターフェースを提供する構成としてもよい。具体的には、携帯端末２にてコントローラ３の向きを補正し、ユーザの操作と画面表示の上下方向との対応関係を補正するようにしてもよい。

コントローラ３の操作を、携帯端末２に設けられている機械的なスイッチに対応付けてもよい。例えば、Ａｎｄｒｏｉｄ（登録商標）上で動作するアプリケーションの場合、ホームボタンがあることを前提としているものもある。そのため、コントローラ３の操作を機械的なスイッチに対応させたり、ユーザインターフェースとしてホームボタンに対応したアイコンを設ける等により、Ａｎｄｒｏｉｄ（登録商標）上で動作するアプリケーションを利用することができる。
コントローラ３を着脱可能にしているので、助手席側や後部座席側等であってもコントローラ３を用いて携帯端末２を操作することができる。
０、ハプティック装置５１および後席リモコン５２等の車両用資源を利用している。これにより、携帯端末２を操作するための専用の操作装置を設けなくてもよくなる。

車載コントローラについて、個別に通知モードを設定する構成としてもよい。例えば、ステアリングスイッチ５０に対する操作のみを携帯端末２に通知し、ハプティック装置５１や後席リモコン５２に対する操作は通常通り車載機器に通知するようにしてもよい。

図面中、１は車両用の携帯端末操作システム、２は携帯端末、２ａは端末側表示部、２ｂ端末側操作部、３はコントローラ（操作装置）、３ａは操作ノブ、４は車両用装置、４ａは車両側表示部、４ｂは車両側操作部（操作装置）、５は車両、１１はＢＬＥ通信部（第１の端末側通信部）、１２は外部通信部（第２の端末側通信部）、１３はランチャープログラム（アプリケーション）、１４、１４ａ〜１４ｄはランチャーアプリ（アプリケーション）、１５、１５ａ〜１５ｂは連携アプリ（アプリケーション）、１６はアプリ本体（アプリケーション）、１７はライブラリ（変換プログラム）、２０はプッシュ操作検知部、２１はロータリ操作検知部、２２は二軸操作検知部、２３はＢＬＥ通信部（装置側通信部、通知手段）、３０は車両側通信部（通知手段）、３１はスピーカ（音声出力装置）、５０はステアリングスイッチ（操作装置）、５１はハプティック装置（操作装置）、５２は後席リモコン（操作装置）、５４は操作切替アプリ（切替プログラム）を示す。

Claims (13)

1. 車両に持ち込まれた携帯端末を操作するための車両用の携帯端末操作システムであって、
   携帯端末と、
   ユーザが操作を入力する操作装置と、
   前記操作装置に対して入力された操作を示す操作情報を前記携帯端末に対して通知する通知手段と、を備え、
   前記携帯端末は、自身の端末側操作部に対して行われた操作に応じて単独で動作する場合に自身の端末側表示部に表示する操作用のユーザインターフェースを有する一方、自身の前記端末側操作部とは操作態様が異なる操作に応じて動作する場合には、単独で動作する場合とは異なる操作用のユーザインターフェースを前記端末側表示部に表示するとともに、通知された操作情報を該携帯端末が実行するアプリケーションにて受け付け可能な情報に変換する変換プログラムを実行することで、自身の前記端末側操作部とは操作態様が異なる操作に応じて動作し、
   前記操作装置は、前記端末側操作部とは操作態様が異なる操作ノブを有し、前記操作ノブを押し込むプッシュ操作、前記操作ノブを回転させるロータリ操作、および前記操作ノブを二軸方向のいずれかへ傾動する二軸操作を入力可能であるとともに、前記操作ノブに対して行われた操作を示す操作情報を携帯端末との間で通信する前記通知手段としての操作側通信部を有し、
   前記携帯端末は、前記端末側表示部、前記端末側表示部に対応して設けられているタッチパネルを含む端末側操作部、および前記通知手段との間で通信する第１の端末側通信部を備えており、
   前記変換プログラムは、前記携帯端末にて実行される複数のアプリケーションのそれぞれに実装されており、
   前記携帯端末は、登録されているアプリケーションのうち、前記変換プログラムが実装されたアプリケーションを抽出して前記端末側表示部に表示する車両用の携帯端末操作システム。
2. 車両に持ち込まれた携帯端末を操作するための車両用の携帯端末操作システムであって、
   携帯端末と、
   ユーザが操作を入力する操作装置と、
   前記操作装置に対して入力された操作を示す操作情報を前記携帯端末に対して通知する通知手段と、
   車両側表示部、当該車両側表示部に対応して設けられている車両側操作部、および前記携帯端末との間で通信を行う車両側通信部を有する車両用装置と、を備え、
   前記携帯端末は、自身の端末側操作部に対して行われた操作に応じて単独で動作する場合には、自身の端末側表示部に表示する操作用のユーザインターフェースを有する一方、前記車両用装置に接続された場合には、単独で動作する場合とは異なる操作用のユーザインターフェースであって、通知された操作情報を該携帯端末が実行するアプリケーションにて受け付け可能な情報に変換する変換プログラムを実行することで、自身の前記端末側操作部とは操作態様が異なる操作に応じて動作するとともに、当該操作に応じて変化する画面表示を画面情報として前記車両用装置に送信し、
   前記操作装置は、前記端末側操作部とは操作態様が異なる操作ノブを有し、前記操作ノブを押し込むプッシュ操作、前記操作ノブを回転させるロータリ操作、および前記操作ノブを二軸方向のいずれかへ傾動する二軸操作を入力可能であるとともに、前記操作ノブに対して行われた操作を示す操作情報を携帯端末との間で通信する前記通知手段としての操作側通信部を有し、
   前記携帯端末は、前記端末側表示部、前記端末側表示部に対応して設けられているタッチパネルを含む前記端末側操作部、前記通知手段との間で通信する第１の端末側通信部、および前記車両側通信部との間で通信する第２の端末側通信部を備えており、
   前記変換プログラムは、前記携帯端末にて実行される複数のアプリケーションのそれぞれに実装されており、
   前記携帯端末は、登録されているアプリケーションのうち、前記変換プログラムが実装されたアプリケーションを抽出した画面表示を画面情報として前記車両側通信部に送信し、当該画面表示を前記車両側表示部に表示させる車両用の携帯端末操作システム。
3. 車両側表示部、当該車両側表示部に対応して設けられていて前記端末側操作部とは操作態様が異なる車両側操作部、および前記携帯端末との間で通信を行う車両側通信部を有する車両用装置を備え、
   前記携帯端末は、前記車両用装置との間で通信する第２の端末側通信部を有し、
   前記車両用装置は、前記車両側操作部に対して行われた操作を前記車載機器または前記携帯端末のいずれに通知するかを切り替える切替プログラムを実行し、前記携帯端末に通知する側に切り替えられたとき、前記車両側通信部を介して前記車両側操作部に対して行われた操作を示す操作情報を前記携帯端末に通知する請求項１記載の車両用の携帯端末操作システム。
4. 前記車両側操作部は、前記端末側操作部とは操作態様が異なるものであり、
   前記車両用装置は、前記車両側操作部に対して行われた操作を前記車載機器または前記携帯端末のいずれに通知するかを切り替える切替プログラムを実行し、前記携帯端末に通知する側に切り替えられたとき、前記車両側通信部を介して前記車両側操作部に対して行われた操作を示す操作情報を前記携帯端末に通知する請求項２記載の車両用の携帯端末操作システム。
5. 車両に搭載されている機器類である車載機器を操作するために予め車両に設けられた状態で前記車両用装置に接続されていて前記端末側操作部とは操作態様が異なる車両用資源を備え、
   前記車両用装置は、前記車両用資源に対して行われた操作を前記車載機器または前記携帯端末のいずれに通知するかを切り替える切替プログラムを実行し、前記携帯端末に通知する側に切り替えられたとき、前記車両用資源に対して行われた操作を示す操作情報を、前記車両側通信部を介して前記携帯端末に通知する請求項２から４のいずれか一項記載の車両用の携帯端末操作システム。
6. 前記携帯端末は、前記第２の端末側通信部を介して前記車両側表示部に自身の動作状態を表示する請求項２から５のいずれか一項記載の車両用の携帯端末操作システム。
7. 前記携帯端末は、前記車両用装置と接続された際、前記端末側操作部に対する操作の入力の一部または全部を受付不可とする請求項２から６のいずれか一項記載の車両用の携帯端末操作システム。
8. 前記携帯端末は、前記車両用装置と接続された際、操作態様の違いに応じて異なるユーザインターフェースを提供する請求項２から７のいずれか一項記載の車両用の携帯端末操作システム。
9. 音声出力装置を備え、
   前記操作装置に入力された操作に応じたアプリケーションの動作状態を前記音声出力装置から音声にてトークバックする請求項１から８のいずれか一項記載の車両用の携帯端末操作システム。
10. 前記携帯端末に対する操作情報の通知を、Ｂｌｕｅｔｏｏｔｈ（登録商標） Ｌｏｗ Ｅｎｅｒｇｙにより行う請求項１から９のいずれか一項記載の車両用の携帯端末操作システム。
11. 前記携帯端末との間のペアリング情報を、前記携帯端末に登録されている複数のアプリケーション間で共用する請求項１０記載の車両用の携帯端末操作システム。
12. 前記操作装置は、バッテリにより駆動されるものであり、前記操作ノブを操作する際の動作抵抗を前記バッテリの残量に基づいて変更する請求項１から１１のいずれか一項記載の車両用の携帯端末操作システム。
13. 加速度を検知する加速度検知手段を設け、前記加速度検知手段により検知した加速度に基づいて、前記操作装置の向きを検知する請求項１から１２のいずれか一項記載の車両用の携帯端末操作システム。

Images