JP2016184238A - 操作システム - Google Patents

Abstract

【課題】操作デバイスと視線検知を連携させた操作システムの、操作性向上を図る。
【解決手段】操作システムは、操作デバイス２０と、制御手段９１０と、接触検知手段９１ｃとを備える。操作デバイス２０はユーザにより手動操作される。制御手段９１０は、視線検知センサ３０により検知されたユーザの視線方向、および操作デバイス２０の操作内容に基づき、ナビ装置５１、空調装置５２、右側電子ミラー５３および左側電子ミラー５４等の機器の作動を制御する。接触検知手段９１ｃは、操作デバイス２０にユーザが触れていることを検知する。制御手段９１０は、接触検知手段９１ｃにより接触検知されていることを条件として、視線検知センサ３０により検知された視線方向を有効にし、機器の制御に反映させる。
【選択図】図３

Description

本発明は、操作デバイスと視線検知を連携させた操作システムに関する。

近年では、ユーザの視線方向を検知する視線検知センサの開発が進んできている（特許文献１、２参照）。これによれば、所望する内容で機器を作動させたい場合に、視線を移動させるだけで上記内容を機器に指令できる。

例えば特許文献１に記載の操作システムでは、車両のルームミラー（機器）およびサイドミラー（機器）の角度を調整する操作キーと、視線検知センサと、トリガスイッチとを備える。トリガスイッチをユーザがオン操作している時に、視線検知センサによる視線検知が有効になるように設定されており、検知された視線方向に位置する機器が、操作キーにより制御可能となる。

特許第５５８８７６４号公報 特開２０１４−１７４５９８号公報

しかしながら、特許文献１に記載の操作システムでは、視線を動かして操作キーを操作することに加え、トリガスイッチをオン操作することを要するので、その手間が煩わしい。

本発明は、上記問題を鑑みてなされたもので、その目的は、操作デバイスと視線検知を連携させた操作システムであって、操作性の向上を図った操作システムを提供することにある。

ここに開示される発明は上記目的を達成するために以下の技術的手段を採用する。なお、特許請求の範囲およびこの項に記載した括弧内の符号は、後述する実施形態に記載の具体的手段との対応関係を示すものであって、発明の技術的範囲を限定するものではない。

開示される発明のひとつは、ユーザにより手動操作される操作デバイス（２０）と、視線検知センサ（３０）により検知されたユーザの視線方向、および操作デバイスの操作内容に基づき、機器（５１、５２、５３、５４）の作動を制御する制御手段（９１０）と、操作デバイスにユーザが触れていることを検知する接触検知手段（９１ｃ）と、を備え、制御手段は、接触検知手段により接触検知されていることを条件として、視線検知センサにより検知された視線方向を有効にし、制御に反映させることを特徴とする。

さて、ユーザが機器へ指令する意思が有る場合には、ユーザは操作デバイスに触れる筈である。この点に着目した上記発明によれば、操作デバイスにユーザが触れるだけで、視線検知が有効になり、視線方向を制御に反映させるようにできるので、特許文献１に係るトリガスイッチの操作を不要にでき、操作性の向上を図ることができる。それでいて、操作デバイスにユーザが触れていない時、つまりユーザが機器へ指令する意思が無い場合には、視線検知センサにより検知される視線方向が制御に反映されるといった煩わしさを回避できる。

本発明の第１実施形態において、操作デバイスおよび視線検知センサの車両搭載位置を示す斜視図。 図１に示す表示装置の表示内容とユーザの視線方向との関係を示す図。 図１に示す操作デバイス、近接センサ、視線検知センサおよび表示装置等を示す制御ブロック図。 図３のマイコンによる制御の手順を示すフローチャート。 本発明の第２実施形態に係る制御ブロック図。 本発明の第３実施形態において、操作デバイスおよび視線検知センサの車両搭載位置を示す斜視図。

以下、図面を参照しながら発明を実施するための複数の形態を説明する。各形態において、先行する形態で説明した事項に対応する部分には同一の参照符号を付して重複する説明を省略する場合がある。各形態において、構成の一部のみを説明している場合は、構成の他の部分については先行して説明した他の形態を参照し適用することができる。

（第１実施形態）
図１は、車両１０の室内から車両前方側を見た斜視図である。図示されるように、車室内のうちフロントウインドシールド１１の下方には、樹脂製のインストルメントパネル１２が設置されている。インストルメントパネル１２は、水平方向に拡がる水平部１２ａと、水平部１２ａから上方に突出する突出部１２ｂと、水平部１２ａから車両後方側に延びる延出部１２ｃと、を備える。突出部１２ｂは、車両後方側に向けて開口する開口部を有する形状であり、その開口部には、複数（図１の例では４つ）の表示装置４１、４２、４３、４４が配置されている。これらの表示装置４１、４２、４３、４４は、車両１０の左右方向（図１の左右方向）に１列に並べて配置されている。

表示装置４１、４２、４３、４４は、液晶パネルおよびバックライトを備えて構成されており、複数の表示装置４１、４２、４３、４４は同一の形状および大きさである。各々の液晶パネルの表示面が車両左右方向に連続して視認されるように、つまり左右方向に延びる１つの表示面として視認されるように、複数の表示装置４１、４２、４３、４４は隣接して配置されている。インストルメントパネル１２の正面視において、中央右側に配置された表示装置を第１表示装置４１、中央左側に配置された表示装置を第２表示装置４２、右端に配置された表示装置を第３表示装置４３、左端に配置された表示装置を第４表示装置４４と呼ぶ。

図２に示すように、表示装置４１、４２、４３、４４の液晶パネルには、後述する各種の機器（図３参照）の作動内容に応じた情報を表示する表示領域が設定されている。この表示領域は、機器に関連付けて設定された視線領域４１ａ、４２ａ、４３ａ、４４ａとして、予め設定されている。

図３に示すように、車両１０にはナビ装置５１、空調装置５２、右側電子ミラー５３、左側電子ミラー５４、図示しないオーディオ装置等の機器が搭載されている。ナビ装置５１は、車両１０の走行をナビゲートする装置である。空調装置５２は車室内の空調を制御する装置である。右側電子ミラー５３は、車両１０の右側に位置する他車両や歩行者等、車外の物体を撮影するカメラと、カメラの撮影向きを制御するアクチュエータとを備える。左側電子ミラー５４は、車両１０の左側に位置する車外の物体を撮影するカメラと、そのカメラの撮影向きを制御するアクチュエータとを備える。

第１表示装置４１の視線領域４１ａには、ナビ装置５１の作動内容に応じた情報が表示される。例えば、地図情報、車両１０の現在位置情報、目的地の位置情報、走行経路情報等が表示される。さらに、第１表示装置４１のうち視線領域４１ａ以外の領域である枠領域４１ｂには、強調表示枠が表示される。枠領域４１ｂは、視線領域４１ａを取り囲む環状に設定されている。

第２表示装置４２の視線領域４２ａには、空調装置５２の作動内容に応じた情報が表示される。例えば、空調風の温度、風量、吹出口等の情報が表示される。さらに、第２表示装置４２のうち視線領域４２ａ以外の領域であるメータ領域４２ｂ、４２ｃには、車速計およびバッテリ電力残量計が表示される。これらのメータ領域４２ｂ、４２ｃおよび視線領域４２ａは、車両左右方向に１列に並べて配置されており、２つのメータ領域４２ｂ、４２ｃの間に視線領域４２ａは配置されている。

第３表示装置４３の視線領域４３ａには、右側電子ミラー５３の作動内容に応じた情報、つまりアクチュエータで制御された向きのカメラで撮影された映像が表示される。さらに、第３表示装置４３のうち視線領域４３ａ以外の領域である他領域４３ｂ、４３ｃには、カメラで撮影された映像とは異なる画像（例えば黒塗り画像）を表示させる。第１表示装置４１の視線領域４１ａ、第３表示装置４３の視線領域４３ａおよび他領域４３ｂは、車両左右方向に１列に並べて配置されており、２つの視線領域４１ａ、４３ａの間に他領域４３ｂが配置されている。これにより、２つの視線領域４１ａ、４３ａは、車両左右方向において所定間隔以上互いに離間して配置されることとなる。

第４表示装置４４の視線領域４４ａには、左側電子ミラー５４の作動内容に応じた情報、つまりアクチュエータで制御された向きのカメラで撮影された映像が表示される。さらに、第４表示装置４４のうち視線領域４４ａ以外の領域である他領域４４ｂ、４４ｃには、カメラで撮影された映像とは異なる画像（例えば黒塗り画像）を表示させる。第２表示装置４２の視線領域４２ａ、第４表示装置４４の他領域４４ｂおよび視線領域４４ａは、車両左右方向に１列に並べて配置されており、２つの視線領域４１ａ、４４ａの間に他領域４４ｂが配置されている。これにより、２つの視線領域４１ａ、４４ａは、車両左右方向において所定間隔以上互いに離間して配置されることとなる。

車両１０には、表示装置４１、４２、４３、４４および各種機器の他にも、以下に説明する電子制御装置（ＥＣＵ９０）、操作デバイス２０および視線検知センサ３０が搭載されている。本実施形態に係る操作システムは、操作デバイス２０、複数の表示装置４１〜４４、およびＥＣＵ９０を備える。操作デバイス２０は、ユーザにより手動操作され、複数の機器のうち選択された制御対象機器に対して作動内容を指令する。この選択は、視線検知センサ３０およびＥＣＵ９０により為される。

視線領域４１ａ、４２ａ、４３ａ、４４ａは、機器の各々に関連付けて設定されている。具体的には、第１表示装置４１の視線領域４１ａにはナビ装置５１が関連付けて設定されている。第２表示装置４２の視線領域４２ａには空調装置５２が関連付けて設定されている。第３表示装置４３の視線領域４３ａには右側電子ミラー５３が関連付けて設定されている。第４表示装置４４の視線領域４４ａには左側電子ミラー５４が関連付けて設定されている。視線検知センサ３０により検知された視線方向がいずれかの視線領域にある場合、該当する視線領域に関連付けられた機器が選択される。

操作デバイス２０は、延出部１２ｃに配置されており、かつ、車両１０の運転者（ユーザ）が運転席に座ったままの状態で手が届く位置に配置されている。図１の例では、車両１０の走行方向を操作するハンドル１３が、車両左右方向の左側に配置されており、操作デバイス２０は、ハンドル１３に対してその反対側（右側）に配置されている。詳細には、操作デバイス２０は、車室内のうち車両左右方向の中央に配置されている。操作デバイス２０は、ユーザによりｘ軸方向、ｙ軸方向およびｚ軸方向の３方向に操作される。ｘ軸方向は車両左右方向、ｙ軸方向は車両前後方向、ｚ軸方向は上下方向である。つまり、ｘ軸方向およびｙ軸方向への傾倒操作と、ｚ軸方向への押動操作が可能である。

例えば、図２に示す表示態様では、ナビ装置５１が制御対象機器として選択された状態である。この状態で操作デバイス２０をｘ軸方向またはｙ軸方向に傾倒操作すると、第１表示装置４１の視線領域４１ａに表示されている地図が左右方向または上下方向にスクロール表示される（図２中の矢印参照）。或いは、視線領域４１ａに表示されている複数のアイコンのうち選択されているアイコンが切り替わる。そして、操作デバイス２０をｚ軸方向へ押動操作すると、選択されているアイコンに確定され、そのアイコンに関連付けられた指定がナビ装置５１へ出力される。ナビ装置５１は、その指令にしたがって作動し、その作動内容が視線領域４１ａに表示される。

要するに、操作デバイス２０の手動操作には、複数の指令から所望の指令を選択する選択操作、および選択した指令を確定する確定操作が含まれている。そして、図２に示す例では、傾倒操作が選択操作に相当し、押動操作が確定操作に相当する。

インストルメントパネル１２の延出部１２ｃには、近接センサ２１が取り付けられている。近接センサ２１は、検出対象の接近に伴い出力信号を変化させる。ＥＣＵ９０のマイコン９１は、近接センサ２１から出力された信号の変化に基づき、操作デバイス２０にユーザが手を置いた状態であることを検知する。該検知を実行している時のマイコン９１は、特許請求の範囲に記載の「接触検知手段９１ｃ」に相当する。なお、近接センサ２１は、検出対象が所定範囲内に接近した場合にオン信号を出力するものであってもよい。この場合の接触検知手段９１ｃは、オン信号を取得した場合に、操作デバイス２０にユーザが手を置いた状態であることを検知する。

視線検知センサ３０は、インストルメントパネル１２のうち運転者の正面に位置する部分に取り付けられた赤外線カメラ、および映像解析用のマイコンを有する。赤外線カメラは運転者の左右の眼球を撮影し、その撮影画像をマイコンが画像解析して運転者の視線方向を演算する。この画像解析は、ＥＣＵ９０が有するマイクロコンピュータ（マイコン９１）が実行してもよい。

ＥＣＵ９０のマイコン９１は、視線検知センサ３０により検知されたユーザの視線方向、および操作デバイス２０の操作内容に基づき、機器の作動を制御する。このように制御しているマイコン９１は、特許請求の範囲に記載の「制御手段９１０」に相当する。

さらにマイコン９１は、視線検知センサ３０により検知されたユーザの視線方向に基づき、視線方向にある視線領域に対応する機器を制御対象機器として選択する。このように制御対象機器を選択しているマイコン９１は、特許請求の範囲に記載の「選択手段９１ａ」に相当する。例えば、図２に示すように視線方向にある視線領域が第１表示装置４１の視線領域４１ａである場合には、その視線領域４１ａに対応するナビ装置５１が制御対象機器として選択手段９１ａにより選択される。

但し、接触検知手段９１ｃにより操作デバイス２０にユーザが手を置いた状態であることが検知されている期間に、視線検知センサ３０による視線検知を有効にして、選択手段９１ａは上記選択を実行する。また、いずれかの機器が制御対象機器として選択されている状態で、複数の視線領域４１ａ、４２ａ、４３ａ、４４ａのいずれからも外れた位置に視線方向が変化した場合であっても、マイコン９１は現状の選択を維持させる。このように機能して選択を維持させているマイコン９１は、特許請求の範囲に記載の「選択維持手段９１ｂ」に相当する。換言すれば、制御手段９１０は、接触検知手段９１ｃにより接触検知されていることを条件として、視線検知センサ３０により検知された視線方向を有効にし、機器の制御に反映させる。

マイコン９１は、制御対象機器に対応する視線領域から視線が外れている場合に、操作デバイス２０による指令を制限する。このように制限している時のマイコン９１は特許請求の範囲に記載の「制限手段９１ｄ」に相当する。例えば、制限手段９１ｄは、操作デバイス２０の傾倒操作（選択操作）による指令を有効にさせつつ、押動操作（確定操作）による指令を無効にする。さらに制限手段９１ｄは、制御対象機器に対応する視線領域から所定時間以上視線が外れている場合に、操作デバイス２０による指令を無効にする。つまり、選択操作および確定操作のいずれについても無効にする。

図３に示す振動デバイス８１（報知装置）は、ステアリングや運転席等に取り付けられてユーザに振動を感じさせる。スピーカ８２（報知装置）は、警告音や音声等を出力する。例えば、上述した選択が確定された場合や選択が変更された場合等の各種状態を、振動や警告音、音声等によりユーザに報知する。

マイコン９１は、制限手段９１ｄにより指令が制限されている場合に、その制限している旨をユーザに報知するように振動デバイス８１（報知装置）やスピーカ８２（報知装置）の作動を制御する。このように制御している時のマイコン９１は「報知制御手段９１ｅ」を提供する。例えば、制限手段９１ｄにより制限されている場合に、運転席やステアリング等に取り付けられた振動デバイス８１を作動させたり、上記制限の旨をスピーカ８２で音声案内したりする。

図４は、マイコン９１により所定の演算周期で繰返し実行される処理の手順を示すフローチャートである。先ずステップＳ１０において、近接センサ２１による接触検知の有無を判定する。接触検知が有ると判定された場合、操作デバイス２０にユーザが手を置いていると推定し、ユーザが操作デバイス２０による機器の指令の意思があるとみなして次のステップＳ１１に進む。ステップＳ１１では、複数の視線領域のいずれかをユーザが見ているか否か、つまり視線検知センサ３０により検知された視線方向に視線領域が有るか否かを判定する。具体的には、複数の視線領域４１ａ、４２ａ、４３ａ、４４ａのいずれかが視線方向に位置しているか否かを判定する。

視線領域への視線が有ると判定された場合、視線の変更が有るか否かを判定する。具体的には、現在の視線が有る視線領域が、現在選択されている機器に対応する視線領域とは異なる場合に、視線変更有りと判定する。なお、現在、いずれの機器も選択されていない場合には、視線変更なしと判定する。

視線変更有りと判定した場合、続くステップＳ１３において、視線変更されている時間が所定時間以上経過したか否かを判定する。ステップＳ１３にて所定時間以上経過したと判定した場合、或いはステップＳ１２にて視線変更なしと判定した場合には、次のステップＳ１４に進む。ステップＳ１４では、視線方向にある視線領域に対応する機器を、制御対象機器として選択する。

ステップＳ１３にて所定時間以上経過していないと判定されれば、ステップＳ１４による選択を実行することなく処理を終了してステップＳ１０に戻る。また、ステップＳ１１において、複数の視線領域のいずれをもユーザが見ていないと判定された場合、ステップＳ１５において、現在選択されている機器の選択を維持させる。例えば、制御対象機器に対応する視線領域から目を離して、フロントウインドシールド１１を介して車両１０の前方に視線を移した場合には、機器の選択が維持される。

続くステップＳ１６では、複数の視線領域のいずれからも外れた位置に視線方向が所定時間以上あるか否かを判定する。所定時間経過したと判定された場合、続くステップＳ１７において、操作デバイス２０の全ての操作を無効にする。具体的には、傾倒操作（選択操作）および押動操作（確定操作）のいずれによる指令をも無効にする。ステップＳ１６にて所定時間経過していないと判定された場合、続くステップＳ１８において、操作デバイス２０の一部の操作を無効にする。具体的には、傾倒操作（選択操作）による指令を有効にしつつ、押動操作（確定操作）による指令を無効にする。

続くステップＳ１９では、ステップＳ１７またはステップＳ１８にて指令を無効にしている旨をユーザに報知するように、振動デバイス８１およびスピーカ８２の少なくとも一方を作動させる。

以上により、本実施形態によれば、ユーザにより手動操作される操作デバイス２０に加えて、制御手段９１０および接触検知手段９１ｃを備える。制御手段９１０は、視線検知センサ３０により検知されたユーザの視線方向、および操作デバイス２０の操作内容に基づき、機器の作動を制御する。接触検知手段９１ｃは、操作デバイス２０にユーザが触れていることを検知する。そして、制御手段９１０は、接触検知手段９１ｃにより接触検知されていることを条件として、視線検知センサ３０により検知された視線方向を有効にし、機器の制御に反映させる。

これによれば、操作デバイス２０にユーザが触れるだけで、視線検知が有効になり、視線方向を制御に反映させるようにできるので、先述した特許文献１に係るトリガスイッチの操作を不要にでき、操作性の向上を図ることができる。それでいて、操作デバイス２０にユーザが触れていない時、つまりユーザが機器へ指令する意思が無い場合には、視線検知センサ３０により検知される視線方向が制御に反映されるといった煩わしさを回避できる。

さらに本実施形態では、機器の各々に関連付けて設定された複数の視線領域および視線検知センサ３０により検知された視線方向に基づき、視線方向にある視線領域に関連付けられた機器を制御対象機器として選択する選択手段９１ａを備える。そして制御手段９１０は、操作デバイス２０の操作内容に基づき制御対象機器の作動を制御する。これによれば、制御対象機器の選択といった簡単な指令については視線検知センサ３０を用いて実現させ、作動内容の設定といった複雑な指令については操作デバイス２０を用いて実現させる。したがって、複数の機器の作動内容を共通の操作デバイス２０で指令することを実現させつつ、機器に対する指令の容易性向上を図ることができる。

さらに本実施形態では、制御対象機器が選択されている状態で、複数の視線領域のいずれからも外れた位置に視線方向が変化した場合であっても、選択を維持させる選択維持手段９１ｂを備える。これによれば、選択されている制御対象機器に関連付けられた視線領域から視線を外す毎に、その選択が解除されることを回避できる。例えば、第１表示装置４１の視線領域４１ａを見てナビ装置５１を選択した状態において、その視線領域４１ａから目を離して、フロントウインドシールド１１越しに車両前方に視線を移した場合であっても、ナビ装置５１の選択が維持される。よって、視線を外す毎に視線領域４１ａに再び視線を合わせてナビ装置５１を選択するといった手間が生じる機会を減らすことができ、さらに、視線領域４１ａから視線を外した状態で操作デバイス２０を操作して指令することも可能になる。

さらに本実施形態では、複数の視線領域のうち制御対象機器に関連付けられた視線領域とは異なる視線領域への視線移動が視線検知センサ３０により検知された場合に、その視線移動が所定時間未満であれば、制御対象機器の選択を維持させる。これによれば、他の視線領域を短時間見るだけであれば選択が変更されなくなるので、制御対象機器の選択を変更させることなく他の視線領域を見られるようになる。

さらに本実施形態では、制御対象機器が選択されている状態で、複数の視線領域４１ａ、４２ａ、４３ａ、４４ａのいずれからも外れた位置に視線方向が変化した場合に、操作デバイス２０による指令を制限する制限手段９１ｄを備える。これによれば、視線領域４１ａ、４２ａ、４３ａ、４４ａから目を離すと、選択は維持されつつも操作デバイス２０による指令が制限される。そのため、例えば、作動内容に応じた情報が視線領域４１ａ、４２ａ、４３ａ、４４ａに表示されている場合において、その表示を見ていないことに起因して誤操作した場合であっても、制限手段９１ｄにより指令が制限される。よって、誤操作により機器が意図に反した作動をすることを抑制できる。

さらに本実施形態では、制限手段９１ｄは、操作デバイス２０の選択操作による指令を有効にさせつつ確定操作による指令を無効にする。これによれば、視線領域４１ａ、４２ａ、４３ａ、４４ａから目を離しても、選択は維持され、かつ、選択操作による指令が可能になる。よって、例えば、作動内容に応じた情報が視線領域４１ａ、４２ａ、４３ａ、４４ａに表示されている場合において、その表示を見ない状態でのブラインド操作を可能にして操作性を向上できる。それでいて、確定操作による指令については無効にするので、誤操作により機器が意図に反した作動をすることを抑制できる。

さらに本実施形態では、制御対象機器が選択されている状態で、複数の視線領域４１ａ、４２ａ、４３ａ、４４ａのいずれからも外れた位置に視線方向が所定時間以上ある場合に、選択操作および確定操作による指令を無効にする。ここで、ユーザが視線領域４１ａ、４２ａ、４３ａ、４４ａを所定時間以上見ていない場合には、操作デバイス２０を操作して機器を指令する意思が無い可能性が高い。よって、このような場合に、選択操作および確定操作による指令を無効にする本実施形態によれば、誤操作により機器が意図に反した作動をすることを、より一層抑制できる。

さらに本実施形態では、制限手段９１ｄにより指令が制限されている場合に、その制限している旨をユーザに報知するように振動デバイス８１やスピーカ８２の作動を制御する、報知制御手段９１ｅを備える。これによれば、指令が制限されていることに気付いたユーザに操作システムの故障と誤解されるおそれを低減できる。

さらに本実施形態では、視線領域４１ａ、４２ａ、４３ａ、４４ａは、機器の各々に設けられ、作動内容に応じた情報を表示する表示領域に設定されている。これによれば、視線領域に表示される作動内容に応じた情報を見ながら操作デバイス２０を手動操作することで、その作動内容の変更等を指令できる。例えば、図２の例ではナビ装置５１が制御対象機器として選択されており、視線領域４１ａに表示されている地図情報を見ながら、操作デバイス２０を手動操作して地図情報をスクロールできる。よって、複雑な作動内容の指令を要する機器であっても容易に指令できる。

それでいて、複数の機器のいずれを制御対象機器にするかの選択については、所望する機器に対応する視線領域を見つめるだけで選択できる。例えば、ナビ装置５１が制御対象機器として選択された図２の状態で、第２表示装置４２の視線領域４２ａへ視線を移すと、第２表示装置４２に対応する機器（空調装置５２）が制御対象機器として選択される。要するに、制御対象機器の選択といった簡単な指令については視線検知センサ３０を用いて実現させ、作動内容の設定といった複雑な指令については操作デバイス２０を用いて実現させる。

さらに本実施形態では、制御対象機器に対応する視線領域が選択手段９１ａにより選択されている旨を報知する枠領域４１ｂ（選択報知表示部）を備える。これによれば、現在選択されている制御対象機器がいずれであるのかをユーザが認識しやすくなるので、機器に対する指令の容易性をより一層向上できる。

（第２実施形態）
上記第１実施形態では、車両１０の運転席の乗員（運転者）が操作デバイス２０を操作することを想定しており、運転者の視線を検知するために、運転席の正面に視線検知センサ３０を配置している。これに対し、本実施形態では、車両１０の助手席の乗員（助手席乗員）および運転者のいずれもが操作デバイス２０を操作することを想定している。そして、運転席の正面に配置された視線検知センサ３０の他に、助手席の正面に配置された助手席用視線検知センサ３１を備える（図５参照）。

マイコン９１は、操作デバイス２０を操作するユーザが運転者および助手席乗員のいずれであるかを判別する。例えば、延出部１２ｃのうち助手席側と運転席側のそれぞれに近接センサ２１を配置する。接触検知手段９１ｃは、各々の近接センサ２１の出力信号について接触有無を判定する。マイコン９１は、助手席側の近接センサ２１で接触が検知され、運転席側の近接センサ２１では接触検知されていない場合、操作デバイス２０のユーザが助手席乗員であると判別する。その逆の検知結果の場合、操作デバイス２０のユーザが運転者であると判別する。該判別を実行している時のマイコン９１は、特許請求の範囲に記載の「ユーザ判別手段９１ｆ」に相当する。

操作デバイス２０のユーザが運転者であると判別された場合、選択手段９１ａは、視線検知センサ３０により検知された視線方向に基づき制御対象機器を選択する。助手席乗員であると判別された場合、選択手段９１ａは、助手席用視線検知センサ３１により検知された視線方向に基づき制御対象機器を選択する。

制限手段７１ｄは、ユーザ判別手段９１ｆによる判別結果に応じて制限の内容を変更させる。例えば、車両走行時において、ユーザが運転者であると判別された場合には、ナビ装置５１に対する文字入力を禁止するように制限する。一方、車両走行時において、ユーザが助手席乗員であると判別された場合には、上記文字入力を許可する。

以上により、本実施形態では、操作デバイス２０に触れているユーザが車両１０の運転席の乗員および助手席の乗員のいずれであるかを判別するユーザ判別手段９１ｆを備える。また、車両１０の走行時には、制御手段９１０による制御の内容を制限する制限手段９１ｄを備える。そして制限手段９１ｄは、ユーザ判別手段９１ｆによる判別結果に応じて制限の内容を変更させる。そのため、助手席乗員も、操作デバイス２０と視線検知を連携させた操作システムを使用できる。また、車両走行時に操作を制限するにあたり、ユーザに適した制限をかけることができる。

（第３実施形態）
上記第１実施形態では、各々の表示装置４１、４２、４３、４４の表示領域が、機器と関連付けられた視線領域４１ａ、４２ａ、４３ａ、４４ａとして設定されている。これに対し本実施形態では、以下に説明する操作パネルの位置が、機器と関連付けられた視線領域６２、６３、６４（図６参照）として、予め設定されている。

第１操作パネル、第２操作パネルおよび第３操作パネルは、インストルメントパネル１２のうち表示装置４１、４２、４３、４４の下方部分に配置されている。第１操作パネルは、空調装置５２に関連付けられた視線領域として設定されており、空調装置５２の作動内容を指令するスイッチやダイヤル等の操作部材６２ａを備える。第２操作パネルは、右側電子ミラー５３に関連付けられた視線領域として設定されており、右側電子ミラー５３の作動内容を指令するスイッチ等の操作部材６３ａを備える。第３操作パネルは、左側電子ミラー５４に関連付けられた視線領域として設定されており、左側電子ミラー５４の作動内容を指令するスイッチ等の操作部材６４ａを備える。これらの操作部材６２ａ、６３ａ、６４ａは、ユーザにより手動操作されるものである。

各々の機器は、操作部材６２ａ、６３ａ、６４ａの操作に基づき作動する。また、選択手段９１ａにより選択された機器については、操作デバイス２０の操作に基づき作動する。そして、本実施形態においても、上記第１実施形態と同様にして図３に示す構成を備え、上記第１実施形態と同様にして図４の処理を実行する。このように、視線領域４１ａ、４２ａ、４３ａ、４４ａが表示装置の表示領域でない場合であっても、本発明に係る操作システムを適用できる。

（他の実施形態）
以上、発明の好ましい実施形態について説明したが、発明は上述した実施形態に何ら制限されることなく、以下に例示するように種々変形して実施することが可能である。各実施形態で具体的に組合せが可能であることを明示している部分同士の組合せばかりではなく、特に組合せに支障が生じなければ、明示してなくとも実施形態同士を部分的に組み合せることも可能である。

図１および図２に示す近接センサ２１は、非接触式および接触式のいずれであってもよい。また、磁場の変化を検出する方式のセンサでもよいし、静電容量の変化を検出する方式のセンサでもよい。近接センサ２１の取り付け位置は延出部１２ｃに限らず、例えば操作デバイス２０に近接センサ２１を取り付けてもよい。

上記第１実施形態に係る接触検知手段９１ｃは、近接センサ２１の検知に基づき操作デバイス２０にユーザが触れていることを検知する。これに対し、接触検知手段９１ｃは、操作デバイス２０が操作されて操作信号を出力していることに基づき、操作デバイス２０にユーザが触れていることを検知してもよい。例えば、近接センサ２１を廃止して、操作デバイス２０が操作されることにより生じる入力信号が出力されている場合に、接触検知手段９１ｃは接触していると検知してもよい。具体的には、操作デバイス２０の傾倒操作または押動操作が為されていることに基づいて、接触検知手段９１ｃは、操作デバイス２０にユーザが手を置いた状態であると検知してもよい。

図１に示す実施形態では、表示装置４１、４２、４３、４４が、インストルメントパネル１２の開口部に配置されている。これに対し、本発明はこのような配置に限定されるものではなく、例えば、ダッシュボード上に表示装置が配置されていてもよい。

図１に示す実施形態では、複数の表示装置４１、４２、４３、４４が車両左右方向に１列に並べて配置されている。これに対し、本発明はこのような配置に限定されるものではなく、例えば、上下方向にずれた位置に複数の表示装置が配置されていてもよい。

図１に示す実施形態では、操作デバイス２０がインストルメントパネル１２に配置されている。これに対し、本発明はこのような配置に限定されるものではなく、例えば、操作デバイス２０がハンドル１３に配置されていてもよい。

ＥＣＵ９０（制御装置）が提供する手段および／または機能は、実体的な記憶媒体に記録されたソフトウェアおよびそれを実行するコンピュータ、ソフトウェアのみ、ハードウェアのみ、あるいはそれらの組合せによって提供することができる。例えば、制御装置がハードウェアである回路によって提供される場合、それは多数の論理回路を含むデジタル回路、またはアナログ回路によって提供することができる。

２０…操作デバイス、３０…視線検知センサ、５１…ナビ装置（機器）、５２…空調装置（機器）、５３…右側電子ミラー（機器）、５４…左側電子ミラー（機器）、９１ｃ…接触検知手段、９１０…制御手段。

Claims (6)

1. ユーザにより手動操作される操作デバイス（２０）と、
   視線検知センサ（３０）により検知されたユーザの視線方向、および前記操作デバイスの操作内容に基づき、機器（５１、５２、５３、５４）の作動を制御する制御手段（９１０）と、
   前記操作デバイスにユーザが触れていることを検知する接触検知手段（９１ｃ）と、
   を備え、
   前記制御手段は、前記接触検知手段により接触検知されていることを条件として、前記視線検知センサにより検知された視線方向を有効にし、前記制御に反映させることを特徴とする操作システム。
2. 前記機器の各々に関連付けて設定された複数の視線領域（４１ａ、４２ａ、４３ａ、４４ａ、６２、６３、６４）、および前記視線検知センサにより検知された視線方向に基づき、前記視線方向にある前記視線領域に関連付けられた前記機器を制御対象機器として選択する選択手段（９１ａ）を備え、
   前記制御手段は、前記操作デバイスの操作内容に基づき前記制御対象機器の作動を制御することを特徴とする請求項１に記載の操作システム。
3. 前記制御対象機器が選択されている状態で、複数の前記視線領域のいずれからも外れた位置に前記視線方向が変化した場合であっても、前記選択を維持させる選択維持手段（９１ｂ）を備えることを特徴とする請求項２に記載の操作システム。
4. 複数の前記視線領域のうち前記制御対象機器に関連付けられた視線領域とは異なる視線領域への視線移動が前記視線検知センサにより検知された場合に、その視線移動が所定時間未満であれば、前記制御対象機器の選択を維持させることを特徴とする請求項２または３に記載の操作システム。
5. 車両（１０）に搭載された操作システムにおいて、
   前記操作デバイスに触れているユーザが前記車両の運転席の乗員および助手席の乗員のいずれであるかを判別するユーザ判別手段（３１）と、
   前記車両の走行時には、前記制御手段による制御の内容を制限する制限手段（９１ｄ）と、
   を備え、
   前記制限手段は、前記ユーザ判別手段による判別結果に応じて前記制限の内容を変更させることを特徴とする請求項１〜４のいずれか１つに記載の操作システム。
6. 前記接触検知手段は、前記操作デバイスが操作されて操作信号を出力していることに基づき、前記操作デバイスにユーザが触れていることを検知することを特徴とする請求項１〜５のいずれか１つに記載の操作システム。

Images