JP2016126791A - 感覚フィードバックを備えた追跡のシステム及び方法 - Google Patents

Abstract

【課題】関連する感覚フィードバックを有する追跡システム、並びに構成要素を起動し、追跡システムを有する車両内の操作の構成要素のモードを調節するための方法を提供する。【解決手段】本発明は、感覚フィードバックが、追跡システムによって検出されるユーザの注視若しくは入力に基づいて、及び／又は構成要素の操作モードにおける変化に応答して、提供され、さらに、ジェスチャーに基づく制御を通じて構成要素を制御及び調節する能力を含む。【選択図】図１

Description

本発明は、関連する感覚フィードバックを有する追跡のシステム及び方法に関する。
［関連出願相互参照］
本特許出願は、２０１４年１２月３０日に出願され、現在係属中の「ＳＹＳＴＥＭ ＡＮＤ ＭＥＴＨＯＤ ＯＦ ＴＲＡＣＫＩＮＧ ＷＩＴＨ ＡＳＳＯＣＩＡＴＥＤ ＳＥＮＳＯＲＹ ＦＥＥＤＢＡＣＫ」と題される米国仮出願第６２／０９８，１２６号の優先権を主張する。本特許出願は、米国仮特許出願第６２／０９８，１２６号の全体を包含する。

車両内の異なる構成要素は、特定の機能、スイッチ、ボタン、タッチスクリーン、ジェスチャー制御システム、又は頭部追跡システムによって制御及び調節される。例えば、いくつかの入力及びシステムは、ユーザが、複数のグラフィックインターフェースをスクロールして特定の構成要素を選択し、その構成要素を調節するように要求する。いくつかの車両は、調節する構成要素を選択することに応答して、また構成要素を調節した後に、関連する対話式フィードバックを提供しない入力及びシステムを有する。他の入力及びシステムは、スクリーン上又は構成要素が調節される位置とは別の領域に、ユーザフィードバックを提供する。あるいは、入力及びシステムは、かなりの時間が経過した後にユーザフィードバックを提供し、そのため、ユーザは、構成要素が有効に調節されたかどうかを知ることができない、又は構成要素の調節中に間違いを起こしたかどうかを知ることができない。言い換えると、構成要素の入力及びシステムは、いずれのフィードバックとも切り離されているか、又は分かれており、そのため、各入力／システムとフィードバックとが、途切れなく一緒に動作することがない。

したがって、構成要素及び／又は操作モードの簡単な調節を提供し、選択、操作モードの変更、又は間違いについてユーザに警告する、調節された構成要素と関連するフィードバックを提供するシステム及び方法が、望ましい。

車両に設置された追跡デバイスにより感覚フィードバックを提供するためのシステムが、本明細書に提供される。本システムは、ユーザの動作を追跡するように構成される追跡モジュール（ユーザの動作は、車両の構成要素を制御するために用いられる入力による物理的接触を行うことから独立している）と、追跡モジュールが車両の構成要素とのユーザの関与（ｅｎｇａｇｅｍｅｎｔ）を追跡することに応答して、感覚フィードバックを提供するように構成される感覚フィードバックモジュールと、を含む。

他の例において、追跡モジュールは、さらに、視線追跡器を備え、視線追跡器が構成要素に向かって配向されたユーザの眼を検出することに応答して、感覚フィードバックモジュールが感覚フィードバックを提供するように促す。

他の例において、感覚フィードバックは、触覚応答である。

他の例において、感覚フィードバックは、音声応答である。

他の例において、感覚フィードバックは、視覚応答である。

他の例において、視覚応答は、構成要素の周囲の点灯要素である。

他の例において、車両は、該構成要素に追加で提供される複数の構成要素を含み、追跡モジュールが第１の構成要素から第２の構成要素への注意の変化を検出することに応答して、感覚フィードバックモジュールがさらに感覚フィードバックを提供するように構成される。

構成要素インターフェースもまた、本明細書に記載される。構成要素インターフェースは、車両内にあり、追跡デバイスを有する電子制御ユニット（ＥＣＵ）に連結される。構成要素インターフェースは、ＥＣＵに電気的に連結される電子制御部分（ＥＣＵは、インターフェースデバイスから構成要素の制御を指示するように構成される）と、追跡デバイスが構成要素とのユーザの関与を検出すること（ユーザの関与は、構成要素の物理的接触から独立している）に応答して、感覚フィードバックを提供するように構成される感覚フィードバックデバイスとを含む。

他の例において、構成要素インターフェースは、車両のダッシュボードに設置される。

他の例において、構成要素インターフェースは、通信システム、全地球測位衛星デバイス、娯楽ディスプレイ、及び高電圧空調ユニットのうちの１つである。

他の例において、インターフェースデバイスは、電子ディスプレイである。

他の例において、感覚フィードバックは、触覚応答である。

他の例において、感覚フィードバックは、音声応答である。

他の例において、点灯パネルは、構成要素インターフェースがユーザに可視である表面上に提供され、感覚フィードバックは、点灯パネル上に提供される視覚応答である。

車両内に提供される電子ディスプレイデバイスもまた、本明細書に記載される。電子ディスプレイは、車両内の構成要素を制御するように構成されるインターフェースデバイスと、電子ディスプレイを追跡デバイス及び構成要素に電気的に連結させるように構成される連結論理回路と、を含み、追跡デバイスが、ユーザが非物理的様式で構成要素と関与していることを知らせることに応答して、インターフェースデバイスは、その構成要素だけと電気的に関与するように命令される。

本発明の他の利点は、添付の図面と関連して熟考すると、以下の詳細な説明を参照することによって、より良好に理解されるようになるため、容易に理解されるであろう。

本発明の一実施形態による、構成要素を起動し、構成要素の操作モードを調節するための、関連する感覚フィードバックを有する追跡システムのブロック図である。 本発明の一実施形態による、構成要素を起動し、構成要素の操作モードを調節するための、関連する感覚フィードバックを有する追跡システムを有する車両運転席の図である。 本発明の一実施形態による追跡システムを通じて選択される構成要素例の図である。 本発明の一実施形態による関連する感覚フィードバックを有する追跡システムを通じて選択される構成要素例の図である。 本発明の一実施形態による関連する感覚フィードバックを有する追跡システムを通じて構成要素を起動し、構成要素の操作モードを調節する方法のフローチャートである。

本発明の詳細な例が本明細書に提供されるが、しかしながら、開示される例は、単なる例示であり、様々な代替的な形態で具現化されることを理解されたい。これらの例が本発明のすべての可能性のある形態を例示及び説明することが意図されるわけではない。むしろ、本明細書に使用される言葉は、制限というよりは説明の言葉であり、種々の変更が、本発明の精神及び範囲から逸脱することなくなされることを理解されたい。当業者であれば、図面のいずれかを参照して例示され、説明される、本発明の種々の構成要素が、明示的に例示又は説明されていない本発明の実施例をもたらす１つ以上の他の図面に例示される構成要素と組み合わされてもよいことを理解するであろう。例示される構成要素の組み合わせは、典型的な適用の代表的な例を提供する。しかしながら、本発明の教示と一致する構成要素の種々の組み合わせ及び変化形が、特定の用途及び実装に望ましい場合がある。

本発明の態様は、関連する感覚フィードバックを有する追跡システム、並びに関連する感覚フィードバックを有する追跡システムを通じて、構成要素を起動し、構成要素の操作モードを調節若しくは変更するための方法を提供する。追跡システムには、追跡モジュール、感覚フィードバックモジュール、ジェスチャー制御モジュール、及び構成要素モジュールが含まれる。追跡システムは、三次元空間でユーザの眼の位置を追跡し、ユーザが焦点を当てている構成要素を選択又は起動するように構成される。ユーザは、次いで、ジェスチャー制御モジュールによるジェスチャー検出を通じて、構成要素の操作モードを制御し、それを修正又は調節することができる。追跡システムはまた、選択又は起動された構成要素に応答して、感覚フィードバックをユーザに提供するようにも構成される。追跡システムはさらに、構成要素の操作モードの変更に応答して、又は構成要素の操作モードの変更の試行若しくは失敗に応答して、ユーザに感覚フィードバックを提供することができる。

追跡システムは、様々な利点を有する。まず、追跡システムは、このシステム内の三次元注視追跡検出とジェスチャーに基づく制御との関連付けを可能にする。追跡システムはまた、構成要素の操作モードの変更又は修正のための簡単な手段をユーザに与える。追跡システムはさらに、ユーザの視線方向、構成要素の操作モードの変更、又は構成要素の操作モードの変更のための試行の失敗に応答して、ユーザフィードバックを提供する。

図１は、本発明の一実施形態による、構成要素を起動し、構成要素の操作モードを調節するための、感覚フィードバックを有する追跡システム１０のブロック図である。追跡システム１０は、ユーザが焦点を当てた構成要素を検出し、ユーザの注視に応答して構成要素を起動し、起動された構成要素と関連する感覚フィードバックをユーザに提供するように構成される。感覚フィードバックは、視覚的、聴覚的、又は触覚的である。センサフィードバックは、また、構成要素の状態に関連する応答でもある。追跡システム１０はまた、構成要素の操作モードを変更又は調節するためにジェスチャーに基づく制御を利用するように構成され、操作モードの変更と関連する感覚フィードバックを提供する。

追跡システム１０には、ユーザの注視を検出するように構成され、かつ、ユーザの注視を検出することを補助するために１つ以上のゾーンを１つ以上の構成要素と関連付けるようにも構成される、検出モジュール１２が含まれる。ユーザの注視は、三次元空間におけるユーザの眼の位置、視線、頭部位置、又はこれらの組み合わせによって決定される。言い換えると、ユーザの注視は、ＸＹＺ平面で検出されて、構成要素を選択又は起動する。例えば、ユーザが、第１のゾーン内に位置するＨＶＡＣ通気口に焦点を当てると、追跡モジュール１２は、ＸＹＺ平面又はゾーンに対するユーザの眼の位置、視線、又は頭部位置を考慮して、ＨＶＡＣユニットへのユーザの注視を決定することができる。追跡モジュール１２には、ユーザの注視を検出するための１つ以上のカメラ及びセンサといった追跡デバイスが含まれる。例えば、カメラは、ユーザの眼、視線、又は頭部位置を検出するように構成される任意のカメラである。変形例として、センサは、ユーザの眼、視線、又は頭部位置を検出するように構成される赤外線センサ又は任意の位置センサでもよい。

他の態様において、追跡モジュール１２は、ユーザの注視を検出するために１つ以上のカメラ及びセンサの組み合わせを含む。追跡デバイス１２は、車両のハンドル内、ハンドルに隣接したパネル内、又はハンドルの上に配置される。追跡デバイス１２はさらに、自動で調節可能に構成されるか、又はユーザの注視を検出することに応答して車両の運転席の任意の領域内で回転する。追跡モジュール１２は、車両の追跡ブロックとインターフェース接続し、これが、次いで車両の電子制御ユニットと通信する。変形例として、追跡モジュール１２は、ユーザの眼又は頭部の位置を表すデータを車両ブロックに送信するように構成される送信器を含み、これは、データを受信及び処理し、ユーザの注視によって選択された構成要素を起動して、その構成要素の操作モードを制御及び調節する。

追跡システム１０は、また、ジェスチャー制御モジュール１６、感覚フィードバックモジュール１８、及び構成要素モジュール２０も含む。それぞれが互いに通信状態にあり、また追跡モジュール１２との通信状態にもある。それぞれが、ジェスチャー制御ブロック、感覚フィードバックブロック、及び構成要素ブロックといった対応する車両ブロックとインターフェース接続するか、又は１つ以上の送信器及び受信器を通じて電子制御ユニットと直接インターフェース接続する。

ジェスチャー制御モジュール１６は、ユーザが行ったジェスチャーを検出して、構成要素の操作モードを制御及び／又は調節するように構成される。ジェスチャー制御モジュール１６には、１つ以上のカメラ、センサ、又はそれらの組み合わせといった、ジェスチャー検出デバイスが含まる。ジェスチャーは、製造業者又はユーザによってプログラム又は設定される。さらに、特定のジェスチャーは、ある特定の特徴部と関連付けられる。例えば、ユーザは、回転つまみを回しているように手を回して、車両の温度を調節することができる。ジェスチャー制御モジュール１６は、ジェスチャーと１つ以上の構成要素の特定の操作モードとを関連付けるための検索テーブルを利用及び保存する。

感覚フィードバックモジュール１８は、ユーザの注視によって選択又は起動された構成要素に応答して、感覚フィードバックをユーザに提供するように構成される。感覚フィードバックモジュール１８はまた、構成要素の操作モードの変更に応答して、又は構成要素の操作モードの変更の失敗に応答して、感覚フィードバックをユーザに提供する。変更の失敗は、ジェスチャー制御モジュール１６が認識しないジェスチャー、ユーザが正しく行わなかったジェスチャー、又はユーザの間違い／エラーである。感覚フィードバックには、周囲光の色彩強度の変化、触覚フィードバック、音声応答、音、チャイム、音楽、又は他の視覚フィードバック、例えば、表示テキスト若しくはグラフィックの変化が挙げられるが、限定されない。例えば、図４に示されるように、ＨＶＡＣユニットの周囲の領域は、ＨＶＡＣユニットで検出されたユーザの注視に応答して光る。感覚フィードバックモジュールはまた、検索テーブルを通じて、ある特定の構成要素を感覚フィードバックの種類と関連付ける。

構成要素モジュール２０には、追跡モジュール１２によって選択及び起動され、ジェスチャー制御モジュール１６によって制御される、１つ以上の構成要素が含まれる。構成要素には、ＨＶＡＣディスプレイ及びユニット、娯楽ディスプレイ、全地球測位システム（ＧＰＳ）ディスプレイ、窓制御システム、ミラー制御システム、及びワイパーシステムが挙げられるが、これらに限定されない。構成要素はさらに、注視検出を補助する１つ以上のゾーンと関連付けられる。

操作中、追跡システム１０は、車両の運転席の電子制御ユニットとインターフェース接続し、構成要素を調節する。追跡デバイスは、三次元注視検出を用いて、ユーザの眼の位置、視線、又は頭部位置をゾーンで決定することができる。特に、追跡デバイスは、構成要素と関連付けられた三次元ゾーンに向けられたユーザの注視を検出する。追跡デバイスは、ユーザの注視を示す信号を車両の電子制御ユニットに送信して、構成要素モジュールを通じて構成要素を起動する。感覚フィードバックは、構成要素の起動に応答してユーザに提供される。感覚フィードバックは、一般に構成要素と関連するフィードバックである。例えば、ユーザの注視が第２のゾーン内のディスプレイで検出されると、ディスプレイが明るくなる。ユーザは、次いで、構成要素の操作状態を調節又は変更するジェスチャーを行う。特定のジェスチャーは、構成要素と関連する。例えば、ユーザが、ラジオの音量の調節を所望する場合、ユーザは、手を上下に動かして、ラジオの音量を上下に調整することができる。感覚フィードバックまた、構成要素の操作モードに変更があったことをユーザに警告するために提供される。

図２は、本発明の一実施形態による、構成要素を起動し、構成要素の操作モードを調節するための、関連する感覚フィードバックを有する追跡システム１０を有する車両の運転席３０の図である。車両運転席３０は、ユーザの注視によって起動され、ユーザのジェスチャーで制御及び調節される、１つ上の構成要素３２を有する。構成要素モジュール２０は、暖房及び空調を提供するためのＨＶＡＣディスプレイ及びユニット３８、ユーザにメディアコンテンツを提供するための娯楽ディスプレイ３６、ユーザに車両の位置関連サービスを提供するためのＧＰＳディスプレイ、車両の窓を制御するための窓制御システム４０、車両と関連する１つ以上のミラーを制御するためのミラー制御システム、天候システム４２、並びにワイパーを操作するためのワイパーシステム４４を含むがこれらに限定されない、１つ以上の構成要素を含む。構成要素３２は、また、車両の運転席３０のゾーンと関連付けられる。例えば、ＨＶＡＣユニット３８等の第１の構成要素は、第１のゾーンと関連付けられ、窓制御ユニット等の第２の構成要素は、第２のゾーンと関連付けられる。ゾーンは、破線「Ａ」で示される。ゾーンは、ユーザの注視を検出することを補助し、三次元空間である。特に、ユーザの注視は、ＸＹＺ平面で検出されて、構成要素を選択又は起動する。

図２はまた、ユーザの注視を検出して、関連ゾーン「Ａ」内の構成要素３２を起動するための追跡デバイス３４を有する追跡モジュール１２を示す。追跡デバイス３４は、ユーザの注視を追跡するためにハンドルに隣接する領域に配置される。追跡デバイス３４は、１つ以上のカメラ、センサ、又はこれらの組み合わせを含む。構成要素３２が起動されると、起動された構成要素３２に関してユーザに警告し、起動された構成要素３２を調節できることをユーザに警告するために感覚フィードバックがユーザに提供される。

システム１０はさらに、ジェスチャー制御モジュール１８を含む。ジェスチャー制御モジュール１８は、１つ以上のカメラ、センサ、又はそれらの組み合わせといった、ジェスチャー検出デバイス４６を含む。ジェスチャー制御モジュール１８はまた、構成要素の物理的調節を可能にするための入力デバイス４８を含む。入力デバイス４８は、１つ以上のスイッチ、トグル、ボタン、キーボード、又はタッチスクリーンを含む。入力デバイス５０は、車両運転席３０のセンターコンソール５０内に位置する。入力デバイス４８はまた、車両運転席３０の他の領域に位置してもよい。例えば、入力デバイス４８は、ハンドル上に位置してもよい。ジェスチャー検出デバイス４６はまた、センターコンソール５０内に位置してもよく、入力デバイス４８に隣接してもよい。さらに、ジェスチャー制御モジュール１８は、ジェスチャー検出デイバス４６によってユーザが行ったジェスチャーを検出するように構成される。ジェスチャーは、選択された構成要素３２の操作モードを調節又は変更するために用いられる。ジェスチャーは、製造業者によって事前にプログラムされるか、又はユーザによって事前に選択される。

感覚フィードバックは、操作モードの変更に応じて、又はユーザによる間違いを示すために、提供される。例えば、ユーザがＨＶＡＣ温度の変更と関連するジェスチャーを行うと、ＨＶＡＣディスプレイ３８の周囲の赤色光の強度が、温度が上昇するにつれて増加するか、又はＨＶＡＣディスプレイ３８の周囲の青色光の強度が、温度が減少するにつれて増加する。他の例において、ユーザは、ジェスチャー制御モジュール１８が認識しないジェスチャーに応答して、音声応答を受信する。音声応答は、構成要素の状態又は操作モードに関連する応答である。例えば、音声応答は、ユーザが車両に入った後に「ブルブル（ｂｒｒｒｒ）」と知らせ、車両が冷えており、車両の温度を調節する必要があることをユーザに警告する。

図３は、本発明の一実施形態による追跡システム１０を通じて選択された構成要素３２の例の図である。構成要素３２は、グラフィカルディスプレイ６０を含む。グラフィカルディスプレイ６０は、娯楽ディスプレイ３６、ＧＰＳディスプレイ３７、ＨＶＡＣユニット３８、及び通信システム６４といった、複数の構成要素ディスプレイ６２を含むように分割される。追跡デバイスが、ユーザ５２が娯楽ディスプレイ３６等の構成要素ディスプレイ６２のうちの１つに焦点を当てていることを検出すると、グラフィカルディスプレイ６０は、特定の構成要素を制御するための制御インターフェースを表示するか、又は選択された構成要素ディスプレイ６２（すなわち、娯楽ディスプレイ３６）の拡張ビューを表示す。ユーザ５２は、次いで、ジェスチャー（複数可）（示されない）によって、又は入力デバイス（示されない）を通じて、選択された構成要素ディスプレイ６２の操作モードを制御及び調節することができる。

図４に関して、関連する感覚フィードバックを有する追跡システム１０を通じて選択される構成要素３２の例の図が、本発明の一実施形態により示される。特に、図４は、ＨＶＡＣディスプレイ及びユニット３８、並びに特にＨＶＡＣ通気口５４上で、ユーザ５２の注視を検出する追跡デバイス３４を示す。ユーザの注視に応答して、ＨＶＡＣ通気口５４の周囲の領域５６は、「Ｂ」によって示されるように光る。

図５は、本発明の一実施形態による、関連する感覚フィードバックを有する追跡システムを通じて構成要素を起動し、構成要素の操作モードを調節するための方法のフローチャートである。追跡システムには、図１に記載されるように、追跡モジュール、ジェスチャー制御モジュール、感覚フィードバックモジュール、及び構成要素モジュールが含まれる。追跡モジュールは、三次元ゾーン内の構成要素へのユーザの注視を検出して、追跡デバイスを通じて構成要素を起動する（１００）。本方法は、また、構成要素での注視検出を示す信号を追跡モジュールから車両ブロックに送信すること（１０２）を含み、ユーザの注視によって起動される（１０４）。感覚フィードバックが、構成要素が感覚フィードバックモジュールを通じて起動されたことを警告するために提供される（１０６）。構成要素が起動されると（１０４）、構成要素の操作モードの変更又は調節を示すジェスチャーが、検出される（１０８）。構成要素は、次いで、第１の操作モードから第２の操作モードに変更するように調節される（１１０）。感覚フィードバックが、操作モードの変更又は変更の失敗を示すために提供される（１１２）。追跡デバイスは、次いで、第２の構成要素等へのユーザの注視を検出する（１１４）。あるいは、感覚フィードバックは、調節される必要のある構成要素についてユーザに警告するために、構成要素を起動する前にユーザに提供される。

図示されるデバイスのうちのある特定のものは、コンピューティングシステムを含む。コンピューティングシステムは、プロセッサ（ＣＰＵ）、並びに読み出し専用メモリ（ＲＯＭ）及びランダムアクセスメモリ（ＲＡＭ）等のシステムメモリを含む種々のシステム構成要素をプロセッサに連結させる、システムバスを含む。他のシステムメモリも同様に使用が可能である。コンピューティングシステムには、より優れた処理能力を提供するために、１つを上回るプロセッサ又は一緒にネットワーク接続されたコンピューティングシステムの群若しくはクラスタが含まれる。システムバスは、種々のバスアーキテクチャのうちのいずれかを使用したメモリバス若しくはメモリコントローラ、周辺機器バス、及びローカルバスを含む、数種類のバス構造のうちのいずれかである。ＲＯＭに記憶された基本入力／出力（ＢＩＯＳ）等は、起動の際等、コンピューティングシステム内の要素間で情報を移行させるのを補助する基本ルーチンを提供する。コンピューティングシステムは、既知のデータベース管理システムに従ってデータベースを維持するデータストアをさらに含む。データストアは、ハードディスクドライブ、磁気ディスクドライブ、光ディスクドライブ、テープドライブ、又はプロセッサによってアクセス可能なデータを記憶することができる他の種類のコンピュータ可読媒体、例えば、磁気カセット、フラッシュメモリカード、デジタル多用途ディスク、カートリッジ、ランダムアクセスメモリ（ＲＡＭ）、及び読み出し専用メモリ（ＲＯＭ）といった、多数の形態で具現化される。データストアは、ドライブインターフェースによってシステムバスに接続される。データストアは、コンピュータ可読命令、データ構造、プログラムモジュール、及びコンピューティングシステムのための他のデータの不揮発性記憶装置を提供する。

人間（及びいくつかの事例では、機械）のユーザとのやりとりを可能にするために、コンピューティングシステムは、発話及び音声のためのマイクロホン、ジェスチャー若しくはグラフィック入力のためのタッチセンサスクリーン、キーボード、マウス、動作入力等の入力デバイスを含む。出力デバイスは、多数の出力機序のうちの１つ以上を含む。いくつかの事例において、多モードのシステムは、ユーザが、コンピューティングシステムと通信するために複数の種類の入力を提供することを可能にしている。通信インターフェースは、一般に、コンピューティングデバイスシステムが、種々の通信及びネットワークプロトコルを使用して、１つ以上の他のコンピューティングデバイスと通信することを可能にする。

先行する開示は、図６及び図７に示される実施形態を図示するために、いくつかのフローチャート及び添付の説明を参照する。開示されるデバイス、構成要素、及びシステムは、これらの図に図示されるステップを行うための任意の好適な技法を使用するか、又は実装することを企図する。したがって、図６及び７は例示目的に過ぎず、記載されるステップ又は同様のステップが、同時、別個、又は組み合わせてを含む、任意の適切な時点で行われる。加えて、これらのフローチャート内のステップの多くは、表示及び記載されるものと同時及び／又は異なる順序で行われてもよい。さらに、開示されるシステムは、追加の、より少ない、及び／又は異なるステップを有するプロセス及び方法を使用する。

本明細書に開示される実施形態は、本明細書に開示される構造及びそれらの同等物を含む、デジタル電子回路において、又はコンピュータソフトウェア、ファームウェア、若しくはハードウェアにおいて、実装される。いくつかの実施形態は、１つ以上のプロセッサによる実行のために実体のあるコンピュータ記憶媒体上で符号化される、１つ以上のコンピュータプログラムとして、すなわち、コンピュータプログラム命令の１つ以上のモジュールとして、実装される。コンピュータ記憶媒体は、コンピュータ可読記憶デバイス、コンピュータ可読記憶基板（ｃｏｍｐｕｔｅｒ−ｒｅａｄａｂｌｅ ｓｔｏｒａｇｅ ｓｕｂｓｔｒａｔｅ）、又はランダム若しくはシリアルアクセスメモリであるか、又はそれらに含まれる。コンピュータ記憶媒体はまた、複数のＣＤ、ディスク、又は他の記憶デバイスといった、１つ以上の別個の実体のある構成要素又は媒体であるか、又はそれらに含まれる。コンピュータ記憶媒体には、一過性信号は含まれない。

本明細書に使用される際、プロセッサという用語は、データを処理するためのあらゆる種類の装置、デバイス、及び機械を包含し、例としては、プログラム可能なプロセッサ、コンピュータ、システムオンチップ、又は前述のものうちの複数のもの、又はそれらの組み合わせが挙げられる。プロセッサには、特殊目的論理回路、例えば、ＦＰＧＡ（フィールドプログラム可能ゲートアレイ）又はＡＳＩＣ（特定用途向け集積回路）が含まれる。プロセッサにはまた、ハードウェアに加えて、問題のコンピュータプログラムの実行環境を作り出すコード、例えば、プロセッサファームウェアを構築するコード、プロトコルスタック、データベース管理システム、オペレーティングシステム、複数プラットフォームの実行時環境、仮想マシン、又はそれらのうちの１つ以上の組み合わせが含まれる。

コンピュータプログラム（プログラム、モジュール、エンジン、ソフトウェア、ソフトウェアアプリケーション、スクリプト、又はコードとしても知られる）は、コンパイラ型若しくはインタープリタ型言語、宣言型若しくは手続き型言語を含む、任意の形態のプログラミング言語で記述され、プログラムは、独立型プログラムとしてか、又はモジュール、構成要素、サブルーチン、オブジェクト、若しくはコンピューティング環境での使用に好適な他のユニットとしてを含む、任意の形態で展開される。コンピュータプログラムは、ファイルシステムにおけるファイルに対応するが、必ずしもそうである必要はない。プログラムは、他のプログラム又はデータ（例えば、マークアップ言語文書内に記憶された１つ以上のスクリプト）を保持するファイルの一部分に、問題のプログラム専用の単一のファイルに、又は複数の連携ファイル（例えば、１つ以上のモジュール、サブプログラム、若しくはコードの部分を記憶するファイル）に記憶される。コンピュータプログラムは、１つのコンピュータでか、又は１つのサイトに位置するか、若しくは複数のサイトにわたって分配され、通信ネットワークによって相互接続される、複数のコンピュータ上で実行されるように展開される。

個人とのやりとりを提供するために、本明細書に開示される実施形態は、グラフィカルインターフェース（ＧＵＩ）等の対話式ディスプレイを使用して実装される。このようなＧＵＩには、ポップアップ若しくはプルダウンメニュー若しくはリスト、選択タブ、スキャン可能な特徴部、及び人間の入力を受信することができる他の特徴部が含まれる。

本明細書に開示されるコンピューティングシステムは、クライアント及びサーバを含む。クライアント及びサーバは、一般に、互いに遠隔であり、典型的には、通信ネットワークを通じてやりとりする。クライアントとサーバとの関係は、それぞれのコンピュータで動作し、互いにクライアント−サーバの関係を有する、コンピュータプログラムによって発生する。いくつかの実施形態において、サーバは、データ（例えば、ＨＴＭＬページ）を、（例えば、データを表示し、クライアントデバイスとやりとりするユーザからのユーザ入力を受信する目的で）クライアントデバイスに送信する。クライアントデバイスで生成されたデータ（例えば、ユーザのやりとりの結果）は、サーバでクライアントデバイスから受信される。

当業者であれば、種々の修正及び変更が、本発明の精神又は範囲から逸脱することなく、本発明になされることを理解するであろう。したがって、本発明は、添付の特許請求の範囲及びそれらの同等物の範囲内にある限り、本発明の修正及び変更を範囲に含むことが、意図される。

Claims (15)

1. 車両に設置された追跡デバイスにより感覚フィードバックを提供するためのシステムであって、
   ユーザの動作を追跡するように構成される追跡モジュールであって、上記ユーザの動作は、上記ユーザが上記車両の構成要素を制御するために用いられる入力による物理的接触を行うことから独立している上記追跡モジュールと、
   上記車両の構成要素との上記ユーザの関与を追跡する上記追跡モジュールに応答して、感覚フィードバックを提供するように構成される感覚フィードバックモジュールと、
   を有することを特徴とするシステム。
2. 上記追跡モジュールは、さらに、視線追跡器又は頭部追跡器を有し、上記視線追跡器が上記構成要素に向かって配向された上記ユーザの眼を検出すること又は上記頭部追跡器が上記ユーザの頭部の移動を検出することに応答して、上記感覚フィードバックモジュールが感覚フィードバックを提供するように促す請求項１記載のシステム。
3. 上記感覚フィードバックは、触覚応答である請求項２記載のシステム。
4. 上記感覚フィードバックは、音声応答である請求項２記載のシステム。
5. 上記感覚フィードバックは、視覚応答である請求項２記載のシステム。
6. 上記視覚応答は、上記構成要素の周囲の点灯要素である請求項５記載のシステム。
7. 上記車両は、上記構成要素に追加で提供される複数の構成要素を含み、上記追跡モジュールは、第１の構成要素から第２の構成要素への注意の変化を検出することに応答して、上記感覚フィードバックモジュールがさらに感覚フィードバックを提供するように構成される請求項１記載のシステム。
8. 車両に提供される構成要素インターフェースであって、
   その構成要素は、追跡デバイスを有する電子制御ユニット（ＥＣＵ）に連結され、
   上記ＥＣＵに電気的に連結される電子制御部分であって、上記ＥＣＵが、インターフェースデバイスから上記構成要素の制御を指示するように構成される電子制御部分と、
   上記追跡デバイスが上記構成要素とのユーザの関与を検出することに応答して、感覚フィードバックを提供するように構成される感覚フィードバックデバイスであって、上記ユーザの関与は、上記構成要素の物理的接触から独立している上記感覚フィードバックデバイスと、
   を有することを特徴とする構成要素インターフェース。
9. 上記構成要素インターフェースは、上記車両のダッシュボードに設置される請求項８記載の構成要素インターフェース。
10. 上記構成要素インターフェースは、通信システム、全地球測位衛星デバイス、娯楽ディスプレイ、及び高電圧空調ユニットのうちの１つである請求項８記載の構成要素インターフェース。
11. 上記インターフェースデバイスは、電子ディスプレイである請求項８記載の構成要素インターフェース。
12. 上記感覚フィードバックは、触覚応答である請求項８記載の構成要素インターフェース。
13. 上記感覚フィードバックは、音声応答である請求項８記載の構成要素インターフェース。
14. さらに、ユーザに対して可視である表面上に提供される点灯パネルを有し、上記感覚フィードバックは、上記点灯パネル上に提供される視覚応答である請求項８記載の構成要素インターフェース。
15. 車両に提供される電子ディスプレイデバイスであって、
    上記車両内の構成要素を制御するように構成されるインターフェースデバイスと、
    上記電子ディスプレイを追跡デバイス及び上記構成要素に電気的に連結させるように構成される連結論理回路と、を有し、
    上記追跡デバイスは、ユーザが非物理的様式で上記構成要素と関与していることを知らせることに応答して、上記インターフェースデバイスは、上記構成要素だけと電気的に関与するように命令されることを特徴とする電子ディスプレイデバイス。

Images