JP2019197575A - 一つの制御装置及び触覚効果を利用可能なユーザインターフェースを使用して複数のディスプレイを制御するシステム並びに方法 - Google Patents

Abstract

【課題】一つの制御装置及び触覚効果を利用可能なユーザインターフェースを使用して、複数のディスプレイを制御するシステム並びに方法を提供する。【解決手段】方法は、第１ディスプレイを介して情報を表示する段階と、第２ディスプレイを介して情報を表示する段階と、第１ディスプレイ及び第２ディスプレイを介して表示される情報を制御装置を使用して制御する段階と、ユーザインターフェースを介してユーザから第１の入力を受信する段階とを備える。第１の入力は、第１ディスプレイ若しくは第２ディスプレイの設定を変更するコマンド、及び／又は、第１ディスプレイ又は第２ディスプレイによって表示される情報を変更するコマンドを含む。方法はまた、第１の入力を受信したことを確認させる第１触覚効果を生成する段階を備える。【選択図】なし

Description

本発明は、一つの制御装置、及び、触覚効果を利用可能なユーザインターフェースを使用して、複数のディスプレイを制御するシステム並びに方法に関する。

市場で見られる多くの種類の車両は、複数のディスプレイを様々な位置に備えている。例えば、一のディスプレイがセンタースタックに位置して、別のディスプレイがダッシュボード又は計器類に位置してもよく、更には、ヘッドアップディスプレイ（ＨＵＤ）が設けられて運転者の周辺視野内のフロントガラス部分に画像が表示される場合がある。現在、これら複数のディスプレイは、それぞれ専用の制御装置を有する、又は、ディスプレイをＯＮ及びＯＦＦするのみといった場合のように制御装置を有さない。一つの制御装置及び一つのユーザインターフェースを使用して、複数のディスプレイの全ての制御並びにやり取りを行うことができれば、ディスプレイの操作性を向上させることができると同時に、コスト及びスペースを削減することができ、また、様々な種類のディスプレイの全てを使用する新規のグラフィックユーザインターフェースを実現できる可能性がある

車両において、複数のディスプレイの全てを制御可能な一つの制御装置を備えることが望ましい。また、異なる複数のディスプレイの間でアクティブ制御を切り替えるべく、車両の運転者が制御装置を操作した時に触覚フィードバックが当該運転者に提供されることが望ましく、この場合、運転者は制御装置に入力を行う時に道路から目を離す必要がなくなる。

本発明の一側面によれば、第１ディスプレイを介して情報を表示する段階と、第２ディスプレイを介して情報を表示する段階と、前記第１ディスプレイ及び前記第２ディスプレイを介して表示される前記情報を制御装置を使用して制御する段階と、第１の入力をユーザインターフェースを介してユーザから受信する段階と、前記第１の入力を受信したことを確認させる第１触覚効果を生成する段階とを備える方法が提供される。前記第１の入力は、前記第１ディスプレイ若しくは前記第２ディスプレイの設定を変更するコマンド、及び/又は、前記第１ディスプレイ若しくは前記第２ディスプレイによって表示される前記
情報を変更するコマンドを含む。

一実施形態において、方法は更に、前記第１ディスプレイ及び前記第２ディスプレイのうちの何れかが前記ユーザによって制御されるかを選択するべく、ディスプレイ制御セレクタを介して、前記ユーザから第２の入力を受信する段階と、前記ユーザインターフェースを介して前記ユーザから受信した前記第１の入力と、前記ディスプレイ選択装置を介して前記ユーザが選択した前記第１ディスプレイ又は前記第２ディスプレイとを関連付ける段階と、を備える。一実施形態において、前記ユーザによる前記第１ディスプレイ及び前記第２ディスプレイのうちの何れかが制御される選択に基づいて、前記触覚効果を変える段階を更に備える。

一実施形態において、前記第１の入力を受信する前に、前記ユーザインターフェースにおいて第２触覚効果を生成する段階を更に備え、前記第２触覚効果は、前記第１の入力が、前記第１ディスプレイ及び前記第２ディスプレイのうちの何れかに宛てたものかを前記
ユーザに示す。一実施形態におて、前記第１触覚効果は振動触覚効果であり、前記第２触覚効果は摩擦効果である。

本発明の別の側面によれば、第１ディスプレイと、第２ディスプレイと、前記第１ディスプレイ及び前記第２ディスプレイと通信接続される制御装置とを備えるシステムが提供される。前記制御装置は、前記第１ディスプレイ及び前記第２ディスプレイの出力を制御するように構成される。システムは更に、前記制御装置に通信接続されたユーザインタフェースを備える。前記ユーザインタフェースは、前記システムのユーザから第１の入力を受信し、当該第１の入力に基づいて、前記第１ディスプレイ及び前記第２ディスプレイの設定並びに／又は前記出力を変更するべく前記制御装置へと制御コマンドを出力するように構成された入力装置と、前記第１の入力が受信されたことを前記ユーザに確認させるべく、触覚効果を前記ユーザに対して出力するように構成された触覚出力装置を有する。

一実施形態において、触覚出力装置は、アクチュエータを有し、前記触覚効果は、振動触覚フィードバックを含む。一実施形態において、アクチュエータとしては、圧電アクチュエータ、ボイスコイル、磁気アクチュエータ、空気圧式アクチュエータ、超音波エネルギーアクチュエータ、偏心質量体アクチュエータ、電気活性ポリマーアクチュエータ、又は、形状記憶合金が含まれる。

一実施形態において、システムは、前記第１ディスプレイ及び前記第２ディスプレイのうちの何れかが前記ユーザによって制御されるかを選択するべく、前記ユーザから第２の入力を受信するように構成されたディスプレイ制御セレクタを更に備える。一実施形態において、前記触覚出力装置は、前記ユーザによって前記第１ディスプレイ及び前記第２ディスプレイのうちの何れかが制御されるかの前記選択に基づいて、前記触覚効果を変える。

一実施形態において、前記第１ディスプレイは表示画面を含み、前記第２ディスプレイは表示画面を含む。一実施形態において、前記第１ディスプレイはヘッドアップディスプレイを含み、前記第２ディスプレイは表示画面を含む。

一実施形態において、前記入力装置は、タッチ入力装置を含む。一実施形態において、前記触覚出力装置は静電デバイスを含み、前記触覚効果は摩擦効果を含む。一実施形態において、前記タッチ入力装置は、タッチパッドを含む。一実施形態において、前記タッチ入力装置は、タッチスクリーンを含む。

一実施形態において、前記入力装置は、ジョイスティックを含む。一実施形態において、前記入力装置は、回転つまみを含む。

本発明の別の側面によれば、上記したシステムの実施形態を備える自動車が提供される。

本発明の上記及び上記以外の目的、特徴、及び性質、並びに、関連する構成要素の動作方法及び機能、そして製造における各部分の組み合わせと経済性については、添付図面を参照しつつ以下の詳細な説明と添付の特許請求の範囲を検討することによってさらに明らかになる。これらはいずれも本明細書の一部を構成する。添付図面は例示及び説明のためのものであり、本発明の発明特定事項の定義として用いることは意図されていない。本明細書及び特許請求の範囲における用法によれば、単数形の「ａ」、「ａｎ」及び「ｔｈｅ」には複数のものへの言及が含まれる。ただし、文脈によって別に解すべきことが明白な場合はこの限りでない。

以下の図面の構成要素は、本開示の一般的な原理を強調するように描写されており、必ずしも寸法通りには記載されていない。一貫性及び明瞭性を確保するために、対応する構成要素を指し示す参照番号は、必要に応じ、複数の図面にわたって繰り返し用いられる。

本発明の実施形態にかかるシステムを模式的に示す。

図１のシステムを備える車両の内部を模式的に示す。

一の制御装置及び一のユーザインターフェースを有する図１のシステムの一部を模式的に示す。

図１〜３の制御装置の一実施形態を模式的に示す。

図１は、本発明の一実施形態にかかるシステム１００を模式的に示している。図に示すように、システム１００は、第１ディスプレイ１１０、第２ディスプレイ１２０及び第３ディスプレイ１３０を備え、これらディスプレイは全て、一つの制御装置１４０と通信接続されている。システム１００はまた、ユーザインターフェース１５０及びディスプレイ制御セレクタ１６０を備え、これらはそれぞれ図１に示すように、制御装置１４０と通信接続されている。システム１００は、図示した３つのディスプレイ１１０、１２０、１３０よりも少ない数の又は多い数のディスプレイを備えてもよい。例えば、一実施形態では、システム１００はディスプレイを２つのみ備えてもよく、別の実施形態では、システム１００はディスプレイを３つよりも多く備えてもよい。図示した実施形態は、限定することを意図していない。

図２は、車両２００における図１のシステム１００を示している。図に示すように、車両２００は、ダッシュボードＤＢから延出するハンドルＳＷ、ダッシュボードＤＢの上方に位置するフロントガラスＷＳ、フロントガラスの上部中央付近に位置するバックミラーＲＶＭ、ダッシュボードの中央に位置するセンタースタックＣＳ、２つの座席（図示せず）の間に位置するセンターコンソールＣＣ、及び、センターコンソールＣＣから延出する変速レバーＧＳを備える。図２には、更に、車両２００の運転者がフロントガラス（ＷＳ）の正面を見る時に視野内のフロントガラスＷＳに画像を投影するように構成されるヘッドアップディスプレイである第１ディスプレイ１１０が示されている。第２ディスプレイ１２０は、運転者の位置を基準としてハンドルの後ろ側のダッシュボードＤＢに位置する計器パネルである。第２ディスプレイ１２０は、車両の速度、走行距離、冷却水温度のような車両のエンジンの状態、燃料残量、気温のような外部環境状態等に関する情報を表示するように構成される。第３ディスプレイ１３０はセンタースタックＣＳに位置し、グローバル・ポジショニング・システム（ＧＰＳ）の一部としてマップを表示すると共に、車両のステレオシステム（図示せず）に関する情報を表示するように構成されてもよい。ステレオシステムに関する情報としては、聞いているラジオ局の情報、ステレオシステムで現在再生されている曲の情報等が挙げられる。車両に関するその他の情報、例えば、車両の内部の温度設定等を、センタースタックＣＳの第３ディスプレイ１３０に表示させてもよい。図では、制御装置１４０がセンタースタックＣＳに位置するように示されているが、制御装置１４０は車両２００内のどこに位置してもよい。図示した実施形態は、限定することを意図していない。制御装置１４０の詳細については後述する。

図２に更に示すように、ユーザインターフェース１５０が、センターコンソールＣＣの変速レバーＧＳ近くに配置されている。ユーザインターフェース１５０は、車両２００の運転を邪魔しないユーザが操作するのに都合のよい別の位置に配置されてもよい。例えば
、ユーザインターフェース１５０は、運転者が腕を伸ばさなくても容易に届くような位置に配置されてもよい。一実施形態では、ユーザインターフェース１５０又はユーザインターフェース１５０の一部分は、ハンドルＳＷ、ダッシュボードＤＢ、センタースタックＣＳ、運転席側のドア、運転席等に配置されてもよい。図示の実施形態は、いかなる限定をも意図するものではない。ユーザインターフェース１５０は、少なくとも一つのユーザ入力装置１５２を有し、これについては以下に詳細に説明する。

図２では、ディスプレイ制御セレクタ１６０は、ダッシュボードＤＢに位置するように示されているが、ディプレイ制御セレクタ１６０は、ユーザが、ユーザ入力１５２を介してどのディスプレイを制御したいかを示すべく、制御装置に信号を送信する入力を供給可能であるような車両２００内の任意の位置に配置されてもよい。例えば、ディスプレイ制御セレクタ１６０は、センターコンソールＣＣに位置するユーザインターフェース１５０の一部であってもよいし、ハンドルＳＷに配置されてもよい。図示した実施形態は、限定することを意図していない。

一実施形態において、ディスプレイ制御セレクタ１６０は、機械的なボタン、ダイヤル、スライド式スイッチ、又は、ユーザ入力装置１５２を介してディスプレイ１１０、１２０、１３０の何れかを切り替えるべくユーザが物理的に係合するその他の任意の要素であってもよい。一実施形態において、ディスプレイ制御セレクタ１６０は、ユーザからの音声コマンドを受信するように構成されてもよい。例えば、ディスプレイ制御セレクタ１６０は、ユーザからの音声コマンドを受信して、制御装置１４０の一部であるプロセッサへと音声コマンド信号を伝達するマイクを有してもよい。音声コマンド信号は、ディスプレイ１１０、１２０、１３０及び／又はユーザインターフェース１５０のうちの何れか一つと通信を行うための、制御装置１４０のコマンドへと変換されてもよい。例えば、ユーザは、制御装置１４０に命令を出して、アクティブ制御を一のディスプレイから別のディスプレイへと切り替えて、ユーザがユーザインターフェース１５０を使用して、現在はアクティブでないディスプレイ１１０、１２０、１３０のうちの一つの設定を変更できるようにしてもよい。

一実施形態において、ディスプレイ制御セレクタ１６０は、車両２００の運転者の目の視線を検出するように構成されてもよく、視線を検出するのに使用される任意の検出手段を備えてもよい。例えば、ディスプレイ制御セレクタ１６０は、ドライバの視線を検出するように構成された視線検出装置を備えてもよく、当該視線検出装置は、車両２００の運転者の目の画像を撮像するカメラ、及び、カメラが撮像した画像に基づいて視線の方向を判定するプロセッサを有してもよい。一実施形態において、前記プロセッサは、制御装置１４０の一部分であってもよい。視線の方向を判定する画像処理技術は文献により公知であり、本明細書においては詳述しない。

一実施形態において、ディスプレイ制御セレクタ１６０は、車両２００の運転者の目の付近の筋肉の動きを監視するように構成されたセンサと、監視された動きに基づいて視線の方向を判定するように構成されたプロセッサとを備えてもよい。一実施形態において、センサは、目を動かす筋肉の電気的な活動を測定するように構成されてもよい。一実施形態において、前記プロセッサは、制御装置１４０の一部分であってもよい。一実施形態において、運転者の視線の方向は運転者の体や頭部の姿勢を分析することによって推定される。

一実施形態において、ディスプレイ制御セレクタ１６０は、運転者の現在の視線方向の焦点がどこにあるかを判定してもよく、例えば、図ではＥＧＡと示されている第１ディスプレイ１１０の方向、又は、ＥＧＢと示されている第３ディスプレイ１３０の方向といったように判定をおこなってもよい。これを実現するために、運転者の目の虹彩の位置と形
状を判定するための画像処理技術を、標準的な又は記憶された虹彩の基準画像と組み合わせて用いてもよい。一実施形態において、運転者の視線の方向は、各々の目についてピッチ角及び偏揺角として記憶されてもよい。この情報を用いて、運転者の現在の視線の被写界深度を判定してもよい。一実施形態において、ディスプレイ制御セレクタ１６０に加えて、典型的には機能的磁気共鳴画像法（ｆＭＲＩ）又は脳波図（ＥＥＧ）に関連するセンサなどの他のセンサを用いて、ユーザの意図や意思をより精度良く判定してもよい。

その他のスマート・コンテキストアウェアネス技術を利用して、ユーザインターフェース１５０が、以下に詳細に説明するように所望のディスプレイ１１０、１２０、１３０を制御できるようにしてもよい。本明細書で説明される実施形態は、いかなる限定をも意味するものではない。

図３は、プロセッサ１５０の一実施形態をより詳細に示す。図に示すように、ユーザインターフェース１５０は、バス３１０を介して制御装置１４０と相互接続されてもよく、ユーザインターフェース１５０は、制御装置１４０と信号通信可能に接続される。バス３１０としては、有線通信リンク、無線通信リンク、及び／又は、制御装置１４０とユーザインターフェース１５０との間の通信リンクを含み得る。ユーザインターフェース１５０から制御装置１４０へと信号が出力されてもよく、また、制御装置１４０からユーザインターフェース１５０へと信号が出力されてもよい。ユーザインターフェース１５０は、システム１００のユーザからの入力を受信するように構成された少なくとも一つのユーザ入力装置１５２を有してもよい。一実施形態において、ユーザ入力装置１５２は、ユーザからの入力を検出するように構成されたタッチセンサ１５４を備えるタッチパッドの形態であってもよい。タッチセンサ１５４は、タッチセンサ１５４の表面をタップする、スライドする、擦る又は押すといったユーザからのジェスチャを検出するように構成されてもよい。このような目的で幾つかの技術を利用することができ、例えば、静電容量検出又は抵抗検出、力覚抵抗器又は光学スイッチを利用してもよい。一実施形態において、タッチセンサ１５４は、ディスプレイ制御セレクタ１６０の一部分であってもよく、第１ディスプレイ１１０、第２ディスプレイ１２０又は第３ディスプレイ１３０のそれぞれが制御されるか否かに応じて、ユーザの特定のジェスチャ、例えば、１本指、２本指又は３本指でのスワイプが、タッチセンサ１５４に提供されてもよい。

一実施形態において、ユーザ入力装置１５２は、例えば、タッチスクリーンのように、タッチセンサ１５４とディスプレイ１５５との組み合わせを有してもよい。一実施形態において、ユーザインターフェース１５０は、必要に応じて、視覚信号をユーザに提供するように構成されたディスプレイ１５５を備えてもよい。一実施形態において、タッチセンサ１５４及びディスプレイ１５５は、タッチスクリーンとして組み合わせられ得る。ユーザインターフェース１５０は、音声フィードバックを運転者に供給するように構成された、例えば、スピーカのような、音声出力装置を備えてもよい。スピーカは、ユーザインターフェース１５０の一部であってもよいし、車両２００のサウンドシステムの一部であってもよい。

一実施形態において、ユーザ入力装置１５２は、ユーザがシステム１００に入力を供給するためにユーザが操作し得る回転つまみ１５６又はジョイスティック１５７を有してもよい。回転つまみ及びジョイスティックは、現在、様々な車両においてユーザ入力装置として使用されており、このような装置の実装については、当業者には周知である。したがって、このような入力装置の詳細について本明細書では説明しない。

ユーザインターフェース１５０はまた、入力が受信されたことを確認させるべく、及び／又は、ディスプレイ１１０、１２０、１３０のうちの一つに関する機能を実行した時にユーザにガイダンスを提供するべく、触覚効果又は触覚フィードバックを提供するように
構成された触覚出力装置１５８を備えてもよい。触覚フィードバックは、振動、変形、運動感覚、静電摩擦又は超音波摩擦等の触覚効果を生成する任意の方法によって生成され得る。触覚出力装置１５８は、１つ又は複数のアクチュエータ、駆動回路及びアクチュエータの駆動信号を生成する触覚エンジンを有し得る。触覚出力装置１５８は、様々な表面触覚技術を利用することができ、例えば、摩擦ディスプレイ、振動触覚アクチュエータ及び／又は電気触覚アレイ等を利用し得る。

一実施形態において、触覚出力装置１５８が含み得るアクチュエータは、例えば、偏心質量体がモータにより動かされる偏心回転質量体（「ＥＲＭ」）などの電磁アクチュエータ、ばねに取り付けられた質量体が前後に駆動されるリニア共振アクチュエータ（「ＬＲＡ」）、又は圧電材料、電気活性ポリマー、もしくは形状記憶合金などの「スマートマテリアル」、マクロ複合繊維アクチュエータ、静電気アクチュエータ、電気触感アクチュエータ、及び／又は触覚（例えば、振動触知）フィードバックなどの物理的フィードバックを提供する他の種類のアクチュエータ、である。触覚出力装置１５８は、非機械的又は非振動装置、例えば、静電摩擦（「ＥＳＦ」）や超音波表面摩擦（「ＵＳＦ」）を用いる装置、超音波触覚トランスデューサを用いて音響放射圧力を生じさせる装置、触覚基板及び可撓性もしくは変形可能な表面を用いる装置、又はエアジェットを用いた空気の吹きかけなどの発射型の触覚出力を提供する装置などを含んでもよい。触覚出力装置のこのような実施形態は通常の技能を有する当業者に知られており、本明細書ではこれ以上議論しない。

触覚出力装置１５６は、タッチセンサ１５４と一体化されてもよいし、タッチセンサ１５４とは別個に設けられてもよい。一実施形態において、タッチセンサ１５４はまた、指がタッチセンサ１５４上をスライドすると、摩擦効果の変調が提供されるといったように、触覚出力装置１５８による触覚効果のレンダリングをサポートするように構成され得る。一実施形態において、異なる触覚効果を生成するために、複数の触覚出力装置を用い得る。

一実施形態において、触覚出力装置１５８は、システム１００のユーザがシステム１００の少なくとも一部に接触している間に、当該ユーザに触覚フィードバックを提供するように構成され得る。例えば、触覚出力装置１５８は、ユーザが、ユーザインターフェース１５０及び／又はシステム１００別の部分、例えば、システム１００が車両２００に実装されている場合のハンドルＳＷ及び／又は運転席のような部分に接触した時に、触覚効果を与えるべく、ユーザインターフェース１５０自体に触覚フィードバックを提供してもよい。

図３に示すように、メモリデバイス３２０を、制御装置１４０と相互接続してもよく、また、バス３１０を介して、ユーザインターフェース１５０と接続してもよい。メモリデバイス３２０としては、内部に固定された１つ又は複数の記憶ユニット、リムーバブル記憶ユニット及び／又はリモート・アクセスが可能な記憶ユニットを含む。これら様々な記憶ユニットは、揮発性メモリと不揮発性メモリとのいかなる組合せをも含み得る。記憶ユニットは、情報、データ、命令、ソフトウェア・コードなどのいかなる組合せをも記憶し得るように構成されている。より具体的には、記憶装置は、触覚効果のプロフィール、ユーザインターフェース１５０の触覚出力装置１５８がいかにして駆動されるかを指示する命令、又は触覚効果を生成するためのその他の情報を含む。

ユーザインターフェース１５０に加えて、システム１００は、更なる入力装置及び出力装置を備えてもよい。例えば、更なるユーザ入力装置１５２を、車両２００のハンドルＳＷ、ダッシュボードＤＢ、センタースタックＣＳ、センターコンソールＣＣ及び／又はドア若しくは座席に配置してもよい。更なる出力装置、例えば、更なる触覚出力装置１５８
を、例えば、ハンドルＳＷ及び／又は車両の運転手の座席に設けてもよい。

制御装置１４０は、汎用若しくは特殊用途プロセッサ、又は、システム１００の動作及び機能を管理若しくは制御するマイクロ・コントローラである。例えば、制御装置１４０は、視覚情報を提供するべくディスプレイ１１０、１２０、１３０への出力信号を制御し、触覚出力装置１５８への信号を制御して触覚効果を提供する、特定用途向け集積回路（ａｐｐｌｉｃａｔｉｏｎ−ｓｐｅｃｉｆｉｃ ｉｎｔｅｇｒａｔｅｄ ｃｉｒｃｕｉｔ：「ＡＳＩＣ」）として、特に設計されてもよい。制御装置１４０は、どのような種類の触覚効果が生成され、当該触覚効果がどのような順序で生成され、及び／又はどの程度の大きさ、頻度、持続時間、及び／又はその他のパラメータを触覚効果が有するかを、所定の因子に基づいて決定するように構成されてもよい。また、制御装置１４０は、特定の触覚効果を提供するために触覚出力装置１５８を駆動するのに使用することができるストリーミング・コマンドを提供するように構成されてもよい。ある実施形態では、制御装置１４０は複数のプロセッサを含み、当該プロセッサの各々がシステム１００の内部で特定の機能を果たすように構成されている。

図４は、本発明の一実施形態にかかる制御装置１４０をより詳細に示している。制御装置１４０は、一又は複数のコンピュータ・プログラム・モジュールを実行するように構成されてもよい。一又は複数のコンピュータ・プログラム・モジュールは、コンテンツ提供モジュール１４２、ディスプレイ制御判定モジュール１４４、触覚効果決定モジュール１４６、触覚出力装置制御モジュール１４８、及び／又はこれら以外のモジュールの一又は複数を備えてもよい。制御装置１４０は、モジュール１４２、１４４、１４６及び／又は１４８を実行する際に、ソフトウェア、ハードウェア、ファームウェア、及び／又は、ソフトウェア、ハードウェア及び／又はファームウェアの任意の組み合わせを用いてもよい、及び／又は制御装置１４０の処理能力を構成する他の機構を用いてもよい。

図４においてモジュール１４２、１４４、１４６及び１４８は単一の処理装置内の同じ位置に配置されるものとして示されるが、制御装置１４０が複数の処理装置を含む実施形態においては、モジュール１４２、１４４、１４６及び／又は１４８のうちの一又は複数が他のモジュールから離れて配置されてもよい。例えば、ディスプレイ制御判定モジュール１４４は上述のディスプレイ制御セレクタ１６０のプロセッサに配置されてもよい。以下の異なるモジュール１４２、１４４、１４６、及び／又は１４８によって提供される機能の記述は説明のためのものであり、限定を意図したものではない。モジュール１４２、１４４、１４６、及び／又は１４８はいずれも記述されるよりも多くの、又は少ない機能を提供してもよい。例えば、モジュール１４２、１４４、１４６、及び／又は１４８のうちの一又は複数を取り除き、その機能の一部又はすべてを、モジュール１４２、１４４、１４６、及び／又は１４８のうちの他のモジュールで提供してもよい。他の例として、以下でモジュール１４２、１４４、１４６、及び／又は１４８のうちの１つに帰せられる機能の一部又はすべてを実行する１つ又は複数の追加的なモジュールを実行するように、制御装置１４０が構成されてもよい。

コンテンツ提供モジュール１４２は、第１ディスプレイ１１０、第２ディスプレイ１２０、第３ディスプレイ１３０を介して、システム１００のユーザへのコンテンツの提供を制御するように構成される。コンテンツが、コンピュータ生成画像を含む場合には、コンテンツ提供モジュール１４２は、ディスプレイ１１０、１２０、１３０を介してユーザに表示する画像及び／又はビューを生成するように構成される。コンテンツ又はそのコンテンツの発生元である情報は、コンテンツ提供モジュール１４２によって、電子記憶装置１４９から取得されてもよい。この電子記憶装置１４９は、図４に示すように制御装置１４０の一部であってもよい若しくは制御装置１４０とは別体であってもよく、又は、図３に示すように、メモリデバイス３２０の一部であってもよい。

ディスプレイ制御判定モジュール１４４は、どのディスプレイをユーザが制御しているか又は制御しようとしているのかを、ディスプレイ制御セレクタ１６０が生成する出力信号からの情報に基づいて判定するように構成されてもよい。例えば、ディスプレイ制御セレクタ１６０が視線検出装置である実施形態では、ディスプレイ制御判定モジュール１４４によって判定されるユーザの視線の方向に関する情報は、絶対座標系における他のオブジェクトに対するベクトルとして、及び／又は他のコンテキストで、その方向を記述してもよい。そのような情報には、座標及び／又は例えば上述のピッチ角及び偏揺角などの角度関係が含まれてもよいが、これらには限定されない。ユーザが第２ディスプレイ１２０の方向を見ていると判定された場合には、ディスプレイ制御判定モジュール１４４は、第２ディスプレイ１２０を制御するべくユーザ入力装置１５２を切り替える信号を出力して、ユーザによる次の入力が第２ディスプレイ１２０に向かうようにしてもよい。

一実施形態では、ディスプレイ制御判定モジュール１４４は、コンテンツ提供モジュール１４２からの出力を利用して、ディスプレイ１１０、１２０、１３０のうちの何れかに対してユーザが次の入力を行うかを、ディスプレイ１１０、１２０、１３０に表示されているコンテンツに基づいて判定してもよい。例えば、第１ディスプレイ１１０が、現在選択されている案内ルート及び代替ルートにおける次の段階を表示するヘッドアップディスプレイである場合には、ディスプレイ制御判定モジュール１４４は、表示されているコンテキスト（すなわち、２つのルートの選択）を利用して、ユーザ入力装置１５２を介してユーザによって提供される次の入力が、第１ディスプレイ１１０を意図している可能性が高いと判定し、第１ディスプレイ１１０を制御するべくユーザ入力装置１５２を切り替える信号を出力して、ユーザによる次の入力が第１ディスプレイ１１０に向かうようにしてもよい。

触覚効果決定モジュール１４６は、触覚出力装置１５８によって生成されるべき触覚効果又は感覚を決定し、当該触覚効果又は感覚が、システム１００のユーザに出力されるように構成される。例えば、触覚効果は、ディスプレイ制御セレクタ１６０及び上記したように、ユーザ入力装置１５２を使用してディスプレイ１１０、１２０、１３０のうちの何れかを制御するべく当該ディスプレイに関してのユーザの意図又は意思を判定するように構成されたその他のセンサから受信した情報に基づいてもよい。触覚効果を決定することは、触覚効果の種類及び触覚効果の一又は複数のパラメータを決定することを含み、例えば、大きさ、頻度、継続時間等を決定する。

例えば、触覚効果決定モジュール１４６によって決定される触覚効果の一種類は、ユーザによってシステム１００に提供される入力の確認をユーザに提供してもよい。このような触覚効果は、例えば、上記で説明したようなアクチュエータを使用して生成された振動触覚効果であってもよい。触覚効果決定モジュール１４６によって決定される別の種類の触覚効果によって、現在、どのディスプレイ１１０、１２０、１３０が制御装置１４０によるアクティブ制御状態であるかについての情報がユーザに提供されてもよく、それにより、ユーザは、ディスプレイ１１０、１２０、１３０のうちの一つの設定を変更してもよい、又は、ディスプレイ１１０、１２０、１３０のうちの一つによってその情報が表示されてもよい。このような触覚効果として、タッチセンサ１５４及び触覚出力装置１５８を備えるタッチパッドをユーザが指でスライドすると、摩擦効果が生成されてもよい。

一実施形態では、異なる触覚効果のテーマが、異なるディスプレイ１１０、１２０、１３０と関連付けられてもよく、ディスプレイ１１０、１２０、１３０の何れかが現在ユーザによってユーザ入力装置１５２を介して制御されているかを示す又は強調するように触覚効果が設計されてもよい。触覚効果決定モジュール１４６によって決定された触覚効果は、ディスプレイ１１０、１２０、１３０のうちの一つによって表示される情報に関する
一の又は複数の設定をユーザが調整するのを補助するように構成されてもよい。例えば、ユーザが設定を大きくすると、触覚効果の大きさ及び／又は頻度が大きくなるようにしてもよい。触覚効果決定モジュール１４６によって決定される別の種類の触覚効果により、ユーザ入力装置１５２を介したディスプレイ１１０、１２０、１３０のうちの一つの制御が、ディスプレイ１１０、１２０、１３０のうちの別のものに移ったことをユーザが確認できるようにしてもよい。

触覚出力装置制御モジュール１４８は、触覚出力装置１５８を制御して触覚効果決定モジュール１４６が決定した触覚効果を生成するように構成される。これは、制御装置１４０によって生成されるべき触覚出力信号をバス３１０を介して触覚出力装置１５８に伝達することを含む。一実施形態において、触覚出力装置制御モジュール１４８に帰せられる機能の少なくとも一部は、触覚出力装置１５８によって担持されるプロセッサ内に配置されてもよい。

本発明の実施形態によれば、システム１００の触覚出力装置１５８によって出力される触覚出力は、ユーザがユーザ入力装置１５２に供給した入力が受信されたことを示す確認通知として提供さてもよく、制御装置１４０によって関連する動作が実行されてもよい。このような触覚効果としては、ユーザが振動として感じる単一パルス又は連続したパルスが含まれ得る。

本発明の実施形態によれば、システム１００の触覚出力装置１５８によって出力される触覚出力は、ユーザが、ディスプレイ１１０、１２０、１３０のうちの一つから、ディスプレイ１１０、１２０、１３０のうちの別のものに移動した場合の遷移を含む。例えば、制御装置１４０が現在、第３ディスプレイ１３０の出力を制御しており、ユーザが提供する入力は、第３ディスプレイ１３０の設定又は第３ディスプレイ１３０が出力する情報に向けられているとする。ユーザが制御を、例えば、第２ディスプレイ１２０である別のディスプレイに切り替えると決めて、この切り替えをディスプレイ制御セレクタ１６０に通知すると、触覚出力装置１５８は、例えば、ユーザの座席に振動を生成させて遷移効果を再生してもよく、それにより、ユーザは今、ユーザ入力装置１５２を使用して第２ディスプレイ１２０を制御していることを知ることができる。

本発明の実施形態によれば、ユーザ入力装置１５２において触覚出力装置１５８によって出力される触覚効果は、ディスプレイ１１０、１２０、１３０のうちの一つのテーマと関連付けられてもよく、ユーザが制御することを意図したディスプレイを今制御していることを確信できるようにしてもよい。例えば、ユーザ入力装置１５２を使用してユーザが現在第３ディスプレイ１３０を制御しているが、ディスプレイ制御セレクタ１６０を介してユーザが第２ディスプレイを制御したいことを示した場合には、第２ディスプレイ１２０へと制御が切り替わる時に触覚出力装置１５８によって出力される触覚効果は、上記の場合の触覚効果とは明確に異なってもよく、それにより、ユーザは、制御が正しく切り替えられたことが分かり、第２ディスプレイ１２０を今度は制御していることを確認することができる。何らかの理由で、ディスプレイ制御セレクタ１６０が、第３ディスプレイ１３０から第２ディスプレイ１２０への制御の切り替えのためのユーザの入力を受信しなかった場合、又は、ユーザが第３ディスプレイの代わりに第２ディスプレイ１２０を制御することを示したこと又は望んでいることが制御装置１４０に伝わらない場合には、触覚出力装置１５８は、第３ディスプレイ１３０のテーマと関連付けられた触覚効果を出力し続けてもよく、それにより、ユーザは、依然として第３ディスプレイを制御していることを知ることができる。

一実施形態において、システム１００は、一のメインディスプレイと、当該メインディスプレイよりも使用頻度が低い二次ディスプレイとを備えてもよい。システム１００は、
ユーザが二次ディスプレイへと移ると、触覚出力装置１５８が組み込まれたタッチパッドのようなユーザ入力装置１５２で暗振動が再生されるように構成されてもよく、それにより、ユーザに、ユーザが今、二次ディスプレイに入力を行っていることを知らせてもよい。しばらく後にユーザがタッチパッドに戻った時に暗振動を感じない場合には、ユーザは、ユーザ入力装置１５２でのメインディスプレイの制御に戻ったことをすぐに知ることができる。

当業者であれば、本開示の全般的な原理を読み理解することにより、本発明のその他の実装形態、特徴及び利点が明らかとなるであろう。これら他の実装形態、特徴及び利点も、本発明に含まれるものとする。

本明細書に記載された実施形態は、実施可能な実装例及び実施例であるが、本発明を特定の実施形態に制限することを必ずしも意図するものではない。むしろ、これらの実施形態には、当該技術分野における当業者に理解できるような変更を加えることができる。このような変更が加えられた態様も本発明の要旨及び範囲に含まれ、そして以下の請求項によって保護されるべきものである。

Claims (19)

1. 第１ディスプレイを介して情報を表示する段階と、
   第２ディスプレイを介して情報を表示する段階と、
   前記第１ディスプレイ及び前記第２ディスプレイを介して表示される前記情報を制御装置を使用して制御する段階と、
   第１の入力をユーザインターフェースを介してユーザから受信する段階と、
   前記第１の入力を受信したことを確認させる第１触覚効果を生成する段階と、を備え、
   前記第１の入力は、前記第１ディスプレイ若しくは前記第２ディスプレイの設定を変更するコマンド、及び/又は、前記第１ディスプレイ若しくは前記第２ディスプレイによっ
   て表示される前記情報を変更するコマンドを含む、方法。
2. 前記第１ディスプレイ及び前記第２ディスプレイのうちの何れかが前記ユーザによって制御されるかを選択するべく、ディスプレイ制御セレクタを介して、前記ユーザから第２の入力を受信する段階と、
   前記ユーザインターフェースを介して前記ユーザから受信した前記第１の入力と、前記ディスプレイ選択装置を介して前記ユーザが選択した前記第１ディスプレイ又は前記第２ディスプレイとを関連付ける段階と、を更に備える請求項１に記載の方法。
3. 前記ユーザにより前記第１ディスプレイ及び前記第２ディスプレイのうちの何れかが制御される選択に基づいて、前記触覚効果を変える段階を更に備える、請求項２に記載の方法。
4. 前記第１の入力を受信する前に、前記ユーザインターフェースにおいて第２触覚効果を生成する段階を更に備え、
   前記第２触覚効果は、前記第１の入力が、前記第１ディスプレイ及び前記第２ディスプレイのうちの何れかに宛てたものかを前記ユーザに示す、請求項１に記載の方法。
5. 前記第１触覚効果は振動触覚効果であり、前記第２触覚効果は摩擦効果である、請求項４に記載の方法。
6. 第１ディスプレイと、
   第２ディスプレイと、
   前記第１ディスプレイ及び前記第２ディスプレイと通信接続され、前記第１ディスプレイ及び前記第２ディスプレイの出力を制御するように構成された制御装置と、
   前記制御装置に通信接続されたユーザインタフェースと、を備え、
   前記ユーザインタフェースは、
   前記システムのユーザから第１の入力を受信し、当該第１の入力に基づいて、前記第１ディスプレイ及び前記第２ディスプレイの設定並びに／又は前記出力を変更するべく前記制御装置へと制御コマンドを出力するように構成された入力装置と、
   前記第１の入力が受信されたことを前記ユーザに確認させるべく、触覚効果を前記ユーザに対して出力するように構成された触覚出力装置とを有する、システム。
7. 前記触覚出力装置は、アクチュエータを有し、
   前記触覚効果は、振動触覚フィードバックを含む、請求項６に記載のシステム。
8. 前記アクチュエータは、圧電アクチュエータ、ボイスコイル、磁気アクチュエータ、空気圧式アクチュエータ、超音波エネルギーアクチュエータ、偏心質量体アクチュエータ、電気活性ポリマーアクチュエータ、又は、形状記憶合金を含む、請求項７に記載のシステム。
9. 前記第１ディスプレイ及び前記第２ディスプレイのうちの何れかが前記ユーザによって制御されるかを選択するべく、前記ユーザから第２の入力を受信するように構成されたディスプレイ制御セレクタを更に備える、請求項６に記載のシステム。
10. 前記触覚出力装置は、前記ユーザによって前記第１ディスプレイ及び前記第２ディスプレイのうちの何れかが制御されるかの前記選択に基づいて、前記触覚効果を変える、請求項９に記載のシステム。
11. 前記第１ディスプレイは表示画面を含み、前記第２ディスプレイは表示画面を含む、請求項６に記載のシステム。
12. 前記第１ディスプレイはヘッドアップディスプレイを含み、前記第２ディスプレイは表示画面を含む、請求項６に記載のシステム。
13. 前記入力装置は、タッチ入力装置を含む、請求項６に記載のシステム。
14. 前記触覚出力装置は静電デバイスを含み、
    前記触覚効果は摩擦効果を含む、請求項１３に記載のシステム。
15. 前記タッチ入力装置は、タッチパッドを含む、請求項１３に記載のシステム。
16. 前記タッチ入力装置は、タッチスクリーンを含む、請求項１３に記載のシステム。
17. 前記入力装置は、ジョイスティックを含む、請求項６に記載のシステム。
18. 前記入力装置は、回転つまみを含む、請求項６に記載のシステム。
19. 請求項６に記載のシステムを備える自動車。