WO2024257618A1

WO2024257618A1 - 操作装置

Info

Publication number: WO2024257618A1
Application number: PCT/JP2024/019847
Authority: WO
Inventors: 将之青山
Original assignee: Tokai Rika Co Ltd
Current assignee: Tokai Rika Co Ltd
Priority date: 2023-06-13
Filing date: 2024-05-30
Publication date: 2024-12-19
Anticipated expiration: 2025-12-13
Also published as: JP2024178830A; CN121311854A

Abstract

操作装置１は、車両８に配置され、第１の操作を受け付ける操作部２と、車両８の乗員９の視線４０を検出する視線検出部４と、操作部２が第１の操作を受け付け、かつ画像を表示する複数の表示領域のうち、乗員９の視線４０が位置する視線位置表示領域４１の存在が判定された場合、操作部２を介した視線位置表示領域４１に対する操作のみを可能とする制御部６と、を有する。

Description

操作装置

関連出願の相互参照

本出願は、２０２３年６月１３日に出願された日本国特許出願２０２３－０９７２７２号の優先権を主張するものであり、日本国特許出願２０２３－０９７２７２号の全内容を本出願に参照により援用する。

本発明は、操作装置に関する。

表示領域に表示を行う表示部と、表示部によって表示領域に表示を行わせる表示制御部と、を備えた表示装置が知られている（例えば、特許文献１参照。）。

この表示装置の表示制御部は、表示したシンボルの表示態様を、ユーザの視線に対応して拡大させることができる。このシンボルは、表示装置を操作するための操作用のアイコンである。

特開２０２２－１４８０２４号公報

表示領域が複数存在する場合、複数の表示領域の全体は、個々の表示領域よりも大きくなる。従来の表示装置は、例えば、複数の表示領域の全体を操作対象とする場合、ユーザが注視したアイコンを拡大したとしても複数の表示領域の全体が大きいため、当該アイコンの操作性が向上するとは限らない。

本発明の目的は、操作性を向上させることができる操作装置を提供することにある。

本発明の一実施形態による操作装置は、車両に配置され、第１の操作を受け付ける操作部と、車両の乗員の視線を検出する視線検出部と、操作部が第１の操作を受け付け、かつ画像を表示する複数の表示領域のうち、乗員の視線が位置する視線位置表示領域の存在を判定した場合、操作部を介した視線位置表示領域に対する操作のみを可能とする制御部と、を有する。

本発明の一実施形態によれば、操作性を向上させる操作装置を提供することができる。

図１Ａは、実施の形態に係る操作装置が配置された車両を示す説明図である。図１Ｂは、実施の形態に係る操作装置が配置されたステアリングを示す説明図である。図２Ａは、実施の形態に係る操作装置のブロック図である。図２Ｂは、実施の形態に係る操作装置を含む車両制御システムのブロック図である。図３Ａは、実施の形態に係る操作装置の視線検出部による視線の検出について説明するための図である。図３Ｂは、表示装置を示す説明図である。図３Ｃは、表示装置を示す説明図である。図４Ａは、実施の形態に係る操作装置における第１の操作について説明するための図である。図４Ｂは、視線が検出された表示領域を示す説明図である。図４Ｃは、視線位置表示領域を示す説明図である。図５Ａは、レイアウトを変更する操作を示す説明図である。図５Ｂは、視線が検出された表示領域を示す説明図である。図５Ｃは、レイアウトの変更を示す説明図である。図６Ａは、表示領域を入れ替える操作を示す説明図である。図６Ｂは、視線が検出された表示領域を示す説明図である。図６Ｃは、表示領域の入れ替えを示す説明図である。図７は、所望の表示領域を操作可能とする動作を示すフローチャートである。図８は、表示領域のレイアウトを変更する動作を示すフローチャートである。図９は、表示領域を入れ替える動作を示すフローチャートである。

（実施の形態の要約）
実施の形態に係る操作装置は、車両に配置され、第１の操作を受け付ける操作部と、車両の乗員の視線を検出する視線検出部と、操作部が第１の操作を受け付け、かつ画像を表示する複数の表示領域のうち、乗員の視線が位置する視線位置表示領域の存在を判定した場合、操作部を介した視線位置表示領域に対する操作のみを可能とする制御部と、を有する。

この操作装置は、複数の表示領域のうち、乗員が視線を送った視線位置表示領域の操作のみを可能とするので、複数の表示領域の全体を操作対象とする場合と比べて、操作が可能な領域が限定され、操作性が向上する。

[実施の形態]
（操作装置１の概要）
図１Ａは、実施の形態に係る操作装置が配置された車両を示す説明図であり、図１Ｂは、実施の形態に係る操作装置が配置されたステアリングを示す説明図である。図２Ａは、実施の形態に係る操作装置のブロック図であり、図２Ｂは、操作装置を含む車両制御システムのブロック図である。図３Ａは、実施の形態に係る操作装置の視線検出部による視線の検出について説明するための図であり、図３Ｂ及び図３Ｃは、表示装置を示す図である。

なお以下に記載する実施の形態に係る各図において、図形間の比率や形状は、実際の比率や形状とは異なる場合がある。また図２Ａ及び図２Ｂでは、主な信号や情報の流れを矢印で示している。

操作装置１は、図１Ａ、図２Ａ、図２Ｂ、及び図３Ａに示すように、車両８に配置され、第１の操作を受け付ける操作部２と、車両８の乗員９の視線４０を検出する視線検出部４と、操作部２が第１の操作を受け付け、かつ画像を表示する複数の表示領域のうち、乗員９の視線４０が位置する視線位置表示領域４１の存在が判定された場合、操作部２を介した視線位置表示領域４１に対する操作のみを可能とする制御部６と、を有する。

制御部６は、視線位置表示領域４１に対する操作部２を介した操作のみを可能とすると共に、操作部２を介して操作可能なポインタ４１０を視線位置表示領域４１に表示させるように構成されている。

また操作部２は、車両８のステアリング８１の左右に配置された左側操作部及び右側操作部を有している。制御部６は、左側操作部及び右側操作部に対してなされた、少なくとも一部の期間が重なる操作を第１の操作とする。この少なくとも一部の期間が重なる操作とは、左側操作部になされた操作の期間と右側操作部に対してなされた操作の期間の少なくとも一部が重なっていることを示している。

この操作部２は、左側操作部及び右側操作部がタッチ操作を受け付けるタッチパッドである。以下では、一例として、左側操作部を左タッチパッド２０、及び右側操作部を右タッチパッド２１とする。なお左側操作部及び右側操作部は、タッチパッドに限定されず、ジョイステックや中央にプッシュボタンが配置された十字キーなどであっても良い。

制御部６は、左タッチパッド２０及び右タッチパッド２１に対してなされた、少なくとも一部の期間が重なるタッチ操作を受け付け、かつ視線位置表示領域４１の存在を判定した場合、視線位置表示領域４１に対する操作のみを可能とする。第１の操作は、一例として、左タッチパッド２０及び右タッチパッド２１に対してなされた、少なくとも一部の期間が重なるタッチ操作である。

このタッチ操作は、後述する図４Ａに示すように、左タッチパッド２０の操作面２００に対する左手９１の左側操作指９１０の接触、及び右タッチパッド２１の操作面２１０に対する右手９２の右側操作指９２０の接触を示している。なお左側操作指９１０及び右側操作指９２０は、一例として、親指であるがこれに限定されず、一方が親指で他方が他の指であっても良いし、どちらも親指以外の指であっても良い。

操作部２は、さらに第２の操作を受け付ける。制御部６は、視線位置表示領域４１に対する操作のみを可能としたのち、操作部２へ第２の操作がなされ、さらに第３の操作がなされた場合、視線位置表示領域４１を移動させて複数の表示領域のレイアウトを変更するように構成されている。

従って操作部２は、車両８のステアリング８１の左右に配置された左タッチパッド２０及び右タッチパッド２１と、左タッチパッド２０及び右タッチパッド２１の少なくとも一方に隣接して設けられると共に第２の操作を受け付ける特定操作部と、を有している。

本実施の形態の特定操作部は、一例として、左タッチパッド２０に隣接して配置された左操作バー２２、及び右タッチパッド２１に隣接して配置された右操作バー２３である。この左操作バー２２及び右操作バー２３は、プッシュスイッチであるがこれに限定されず、静電容量方式のタッチセンサであっても良い。

第２の操作は、一例として、左操作バー２２及び右操作バー２３の少なくとも一方になされた長押し操作であるがこれに限定されず、左タッチパッド２０及び右タッチパッド２１の少なくとも一方になされた特定の位置における長押し操作、タッチ操作やタップ操作などであっても良い。

第３の操作は、一例として、左タッチパッド２０及び右タッチパッド２１の一方になされたドラッグアンドドロップ操作、又は乗員９の視線変更による移動先の表示領域の選択操作と第２の操作の解除とを含む操作であるがこれに限定されず、左タッチパッド２０及び右タッチパッド２１の一方になされたフリック操作やなぞり操作であっても良い。フリック操作やなぞり操作の場合は、操作の終了位置に応じた位置に所望の表示領域が移動しても良いし、第２の操作が解除されるまで複数回フリック操作やなぞり操作を繰り返し、第２の操作を解除することで所望の表示領域の位置を変更するようにしても良い。本実施の形態の第３の操作は、一例として、ドラッグアンドドロップ操作によるレイアウト変更と、視線移動によるレイアウト変更と、を可能とする操作である。

乗員９は、左タッチパッド２０及び右タッチパッド２１に対してタッチ操作を行うと共に、操作したい表示領域に視線４０を向けることで、所望の表示領域をアクティブにする、つまり所望の表示領域を選択して操作可能な状態とすることができる。

本実施の形態の乗員９は、一例として、運転席８００に着座する運転者であるがこれに限定されず、助手席８０１に着座する乗員であっても良い。この場合、助手席８０１に着座する乗員９は、一例として、フロアコンソール８０２に配置されたタッチパッド装置８６に対して第１の操作を行い、所望の表示領域に視線４０を送ることで所望の表示領域のみを操作可能な状態にすることができる。また助手席８０１に着座する乗員９は、タッチパッド装置８６の近傍に配置されたスイッチなどと操作を組み合わせて、上述した複数の表示領域のレイアウトを変更したり、表示位置を入れ替えたりすることもできる。

車両８は、図１Ａに示すように、運転席８００の前方から助手席８０１の前方に渡る大型の表示画面８４０を有する表示装置８４が配置されている。この表示画面８４０は、図１Ａに示すように、インストルメントパネル８０３の左右方向の大部分を覆うほど大型の画面となっている。しかしステアリング８１に配置されるため、左タッチパッド２０の操作面２００、及び右タッチパッド２１の操作面２１０は、大型の表示画面８４０に比べてはるかに小型である。乗員９は、操作面２００及び操作面２１０を操作することで、表示画面８４０の全体を操作することは困難である。本実施の形態の操作装置１は、表示画面８４０の全体ではなく、表示領域単位で操作可能とすることで、比率の差からくる困難性を低下するように構成されている。

なお表示領域は、一例として、表示画面８４０を上下方向に仕切った領域となっているがこれに限定されず、上下方向に表示領域の少なくとも一部が重なる形状であっても良い。

操作装置１は、一例として、図２Ｂに示すように、表示装置８４と共に車両制御システム８２を構成している。この車両制御システム８２は、一例として、車両制御装置８３、表示装置８４、ミラー装置８５、タッチパッド装置８６、車載装置８７及び車両ＬＡＮ８８（Local Area Network）を備えて構成されている。

車両制御装置８３は、車両８を総合的に制御するマイクロコンピュータであり、駆動装置の制御、自動運転制御及び運転支援制御などを行うように構成されている。この車両制御装置８３は、一例として、表示装置８４を制御する。

表示装置８４は、一例として、有機ＥＬ（Electro-Luminescence）ディスプレイ、ミニＬＥＤ（Light Emitting Diode）及びマイクロＬＥＤディスプレイなどである。表示装置８４は、一例として、車両８の左右方向に長い表示画面８４０を有している。そして表示画面８４０は、複数の表示領域に分割されている。

なお複数の表示領域は、複数のディスプレイから構成されても良い。つまり表示装置８４は、複数のディスプレイから構成されても良い。また変形例として表示装置８４は、フロントウインドウ８０４に画像を投影するヘッドアップディスプレイで構成されても良いし、ヘッドアップディスプレイを含んで構成されても良い。

図３Ｂは、表示画面８４０が第１の表示領域８４１～第４の表示領域８４４に４分割された一例を示している。第１の表示領域８４１～第４の表示領域８４４は、領域の形状が同じであっても良いし、異なっていても良い。第１の表示領域８４１は、一例として、空調装置の複数の機能に関する表示画像８４１ａが表示されている。第２の表示領域８４２は、一例として、ナビゲーション装置の地図画像に関する表示画像８４２ａが表示されている。第３の表示領域８４３は、一例として、速度や方向指示などに関する表示画像８４３ａが表示されている。第４の表示領域８４４は、一例として、燃料計や水温計などに関する表示画像８４４ａが表示されている。

図３Ｃは、表示画面８４０が第１の表示領域８４１～第３の表示領域８４３に３分割された一例を示している。第１の表示領域８４１は、一例として、ミラー装置８５の調整機能に関する表示画像８４１ａが表示されている。第２の表示領域８４２は、一例として、シート装置に関する表示画像８４２ａが表示されている。第３の表示領域８４３は、一例として、速度や方向指示などに関する表示画像８４３ａが表示されている。

ここで制御部６は、複数の表示領域のうち、少なくとも車両８の速度を表示する表示領域を乗員９の正面に保ち、当該表示領域のレイアウトの変更、及び当該表示領域の表示位置の入れ替えを規制するように構成されている。図３Ｂの第３の表示領域８４３、及び図３Ｃの第３の表示領域８４３は、速度を表示する表示領域である。この速度を表示する表示領域は、一例として、法規的に運転者が視認し易い正面に表示することが必要となる。従って制御部６は、速度を表示する表示領域の表示位置を保ち、この表示領域を含むレイアウトの変更や表示位置の入れ替えを行わないように構成されている。

ミラー装置８５は、車両８の後方を確認するためのものであり、物理ミラーでも良いし、電子ミラーでも良い。ミラー装置８５は、物理ミラーの場合、図３Ｃの第１の表示領域８４１に示すように、ミラー部分の角度を変えられるように構成されている。またミラー装置８５は、電子ミラーの場合、カメラを備えて構成され、後方を撮像した画像の拡大、縮小、輝度の調整、他の車両の接近の警告などを表示領域に表示するように構成されている。表示装置８４は、ミラー装置８５が電子ミラーである場合、左右の端部に位置する表示領域に左右の後方の画像を表示する。そして乗員９は、助手席８０１側の画像が見難い場合、表示領域のレイアウトを変更することにより、自身の近くに表示させることができる。

タッチパッド装置８６は、図１Ａに示すように、運転席８００と助手席８０１の間のフロアコンソール８０２に配置されている。このタッチパッド装置８６は、左タッチパッド２０及び右タッチパッド２１と同様に静電容量方式のタッチパッドであり、タッチ操作などを検出するように構成されている。

車載装置８７は、一例として、車室内の温度を調整する空調装置、現在地の地図や目的地までの誘導を行うナビゲーション装置、シートの位置や傾きなどを制御するシート装置、音楽や映像を再生する音楽及び映像再生装置などである。表示装置８４は、これらの車載装置８７に関する情報を表示すると共に、調整や機能のオン、オフなどが割り当てられた画像を表示するように構成されている。

この車両制御システム８２は、車両ＬＡＮ８８を介して操作装置１、車両制御装置８３及び表示装置８４などが接続されている。この車両ＬＡＮ８８は、例えば、有線及び無線によって相互に信号や情報などの交換を可能とするＣＡＮ（Controller Area Network）やＬＩＮ（Local Interconnect Network）といった車両用ネットワークである。

操作部２は、上述のように、左タッチパッド２０と、右タッチパッド２１と、左操作バー２２と、右操作バー２３と、を備えて構成されている。

左タッチパッド２０及び右タッチパッド２１は、一例として、静電容量方式のタッチパッドであるがこれに限定されず、感圧方式のタッチパッドなどであっても良い。左タッチパッド２０及び右タッチパッド２１は、一例として、タッチ操作、タップ操作、ダブルタップ操作、なぞり操作、ドラッグアンドドロップ操作、フリック操作、ピンチアウト（ピンチオープン）操作及びピンチイン（ピンチクローズ）操作などが可能である。これらの操作は、左タッチパッド２０及び右タッチパッド２１ごとに行われても良いし、別々に行われても良い。

ここでタッチ操作は、タップ操作と区別するため、瞬間的に操作面に接触する操作ではなく、継続して接触する操作や操作面を長押しする操作を示すものとする。

操作部２が配置されるステアリング８１は、図１Ａに示すように、上部がなく、表示装置８４が見易くされた異形ステアリングとなっている。左タッチパッド２０は、ステアリング８１の左把持部８１０の先端側に配置されている。また右タッチパッド２１は、右把持部８１１の先端側に配置されている。左タッチパッド２０の操作面２００、及び右タッチパッド２１の操作面２１０は、矩形状を有し、１つの角が上方に向いている。

左操作バー２２は、左タッチパッド２０の操作面２００の上辺に沿って配置されている。また右操作バー２３は、右タッチパッド２１の操作面２１０の上辺に沿って配置されている。

左タッチパッド２０及び右タッチパッド２１は、なされた操作に関する情報である左タッチパッド操作情報Ｓ_１及び右タッチパッド操作情報Ｓ_２を制御部６に出力する。また左操作バー２２及び右操作バー２３は、なされたプッシュ操作や長押し操作に基づいて左操作情報Ｓ_３及び右操作情報Ｓ_４を制御部６に出力する。

（視線検出部４の構成）
視線検出部４は、一例として、カメラ３と電気的に接続されている。このカメラ３は、図１Ａ及び図３Ａに示すように、運転席８００に着座する乗員９の顔９０が撮像範囲３０に入るように配置されている。カメラ３は、一例として、乗員９の正面のインストルメントパネル８０３に配置されている。

カメラ３は、一例として、赤外線を用いて撮像範囲３０を撮像し、撮像した画像の情報である画像情報Ｓ_５を視線検出部４に出力する。なおカメラ３は、車載装置８７として配置され、車両ＬＡＮ８８を介して視線検出部４と接続されても良い。

視線検出部４は、カメラ３から取得した画像情報Ｓ_５に基づいて乗員９の視線４０を検出する。視線４０の検出方法は、一例として、乗員９の眼の動かない部分（基準点）と、動く部分（動点）と、の位置関係から視線４０を検出する方法であるがこれに限定されない。

視線検出部４は、一例として、表示画面８４０に設定された座標系における視線４０の座標の情報である視線情報Ｓ_６を制御部６に出力する。つまり視線検出部４は、視線４０と表示画面８４０が交差する座標を算出し、視線情報Ｓ_６として出力する。

（通信部５の構成）
通信部５は、車両ＬＡＮ８８を介して、操作装置１と、車両制御装置８３、表示装置８４などと、が情報や信号を交換するように構成されている。

（制御部６の構成）
制御部６は、例えば、記憶されたプログラムに従って、取得したデータに演算、加工などを行うＣＰＵ（Central Processing Unit）、半導体メモリであるＲＡＭ（Random Access Memory）及びＲＯＭ（Read Only Memory）などから構成されるマイクロコンピュータである。このＲＯＭには、例えば、制御部６が動作するためのプログラムが格納されている。ＲＡＭは、例えば、一時的に演算結果などを格納する記憶領域として用いられる。また制御部６は、その内部にクロック信号を生成する手段を有し、このクロック信号に基づいて動作を行う。

制御部６は、一例として、図２Ａに示すように、操作パターン情報６０を有している。この操作パターン情報６０は、所望の表示領域を操作可能とする操作パターンに関する情報、視線位置表示領域４１のレイアウトを変更するための操作パターンに関する情報、及び表示領域を入れ替えるための操作パターンに関する情報を含んでいる。なお操作パターンは、一例として、乗員９が設定可能である。つまり後述するように、レイアウトを変更する際、乗員９は、右操作バー２３を長押し操作するが左操作バー２２を長押し操作するように定めても良い。

制御部６は、一例として、図２Ｂに示すように、車両制御装置８３から表示領域に関する表示領域情報Ｓ_９を取得する。なお表示領域情報Ｓ_９は、車両制御装置８３に限定されず、車両制御装置８３以外に表示装置８４を制御する制御装置がある場合、この制御装置から取得しても良い。

表示領域情報Ｓ_９は、例えば、表示画面８４０に対する表示領域の範囲を指定する情報である。制御部６は、視線検出部４から取得した視線情報Ｓ_６と、車両制御装置８３から取得した表示領域情報Ｓ_９と、に基づいて視線４０がどの表示領域に位置するのか、つまり視線位置表示領域４１を判定する。

制御部６は、視線位置表示領域４１に関する表示指示情報Ｓ_７を、車両ＬＡＮ８８を介して車両制御装置８３に出力する。また制御部６は、操作部２になされた操作に基づいて操作部操作情報Ｓ_８を生成し、車両ＬＡＮ８８を介して車両制御装置８３に出力する。なお表示指示情報Ｓ_７は、表示領域のレイアウトの変更に関する情報、及び表示領域の表示位置の入れ替えに関する情報を含んでいる。また制御部６は、操作部操作情報Ｓ_８を視線位置表示領域４１に対応する車載装置８７などに送信するように構成されても良い。

車両制御装置８３は、取得した表示指示情報Ｓ_７に基づいて表示装置８４の表示を制御する表示制御情報Ｓ_１０を出力する。この表示制御情報Ｓ_１０は、表示装置８４に表示させる車載装置８７に関連した画像の情報、及び当該画像をどの表示領域に表示させるかの情報を少なくとも含んでいる。

車両制御装置８３は、例えば、図３Ｂに示すように、表示装置８４が表示画面８４０を第１の表示領域８４１～第４の表示領域８４４に分割して表示画像８４１ａ～表示画像８４４ａを表示させる場合、表示画像８４１ａ～表示画像８４４ａに関する情報を関連する車載装置８７などから取得し、表示画面８４０に表示させる。そして車両制御装置８３は、操作装置１から操作部操作情報Ｓ_８を取得すると、操作可能となっている表示領域に表示されたポインタ４１０を移動させたり、メーニューなどをスクロールさせたりする。

また車両制御装置８３は、表示指示情報Ｓ_７を取得した場合、視線位置表示領域４１をアクティブにしたり、レイアウトを変えたり、表示位置を入れ替えたりする。

以下では、所望の表示領域を操作可能とする操作、表示領域のレイアウトを変更する操作、及び表示領域を入れ替える操作の一例について説明する。

・所望の表示領域を操作可能とする操作について
図４Ａは、実施の形態に係る操作装置の第１の操作の一例について説明するための図であり、図４Ｂは、視線が検出された表示領域の一例を示す図であり、図４Ｃは、操作可能となった視線位置表示領域の一例を示す図である。図４Ｂは、複数の表示領域として、「Ａ」の表示画像８４１ａを表示する第１の表示領域８４１、「Ｂ」の表示画像８４２ａを表示する第２の表示領域８４２、「Ｃ」の表示画像８４３ａを表示する第３の表示領域８４３、及び「Ｄ」の表示画像８４４ａを表示する第４の表示領域８４４が表示画面８４０に表示されている。図４Ｃでは、操作可能となった視線位置表示領域４１を斜線で示している。後述する図５Ａ～図５Ｃ、及び図６Ａ～図６Ｃは、図４Ａ～図４Ｃに基づいて表示領域や表示画像などが図示されている。

乗員９は、所望の表示領域を操作するため、第１の操作を操作部２に行ったあと、所望の表示領域に視線４０を向ける。図４Ｂでは、第２の表示領域８４２に視線４０を送った場合を示している。つまり乗員９の所望の表示領域は、第２の表示領域８４２である。

この第１の操作は、一例として、図４Ａに示すように、左手９１の左側操作指９１０で左タッチパッド２０の操作面２００に対して長押し操作すると共に、右手９２の右側操作指９２０で右タッチパッド２１の操作面２１０を長押しする操作であり、長押しする期間が少なくとも一部重なっている。

制御部６は、左タッチパッド２０から出力された左タッチパッド操作情報Ｓ_１、及び右タッチパッド２１から出力された右タッチパッド操作情報Ｓ_２と、操作パターン情報６０と、に基づいて第１の操作がなされたと判定した場合、視線検出部４を制御して視線４０を確認する。なお制御部６は、視線４０が表示画面８４０上に位置すると判定したのち、操作を確認するように構成されても良い。

制御部６は、左タッチパッド２０及び右タッチパッド２１に対する長押し操作が継続している間に、視線４０が複数の表示領域のいずれかの表示領域に検出された場合、視線４０が検出された表示領域を視線位置表示領域４１とする表示指示情報Ｓ_７を出力する。図４Ｂでは、視線４０が検出された表示領域が、第２の表示領域８４２であるので、制御部６は、第２の表示領域８４２が視線位置表示領域４１であり、乗員９の所望の表示領域であるとしてポインタ４１０を第２の表示領域８４２に表示させる表示指示情報Ｓ_７を出力する。

乗員９は、第２の表示領域８４２以外の表示領域を操作したい場合、左タッチパッド２０及び右タッチパッド２１に対する長押し操作を行い、所望の表示領域に視線４０を送ることでポインタ４１０を移動させ、操作が可能となる。

・表示領域のレイアウトを変更する操作について
図５Ａは、実施の形態に係る操作装置によるレイアウトを変更する操作の一例を示す図であり、図５Ｂは、視線が検出された表示領域の一例を示す図であり、図５Ｃは、レイアウトの変更の一例を示す図である。

所望の表示領域のレイアウトを変更する場合、まず乗員９は、変更したい表示領域を操作可能とするため、第１の操作を行い、さらに所望の表示領域に視線４０を送る。図５Ｂでは、第１の表示領域８４１に視線４０を送った場合を示している。なお変更したい表示領域が既にアクティブであった場合は、第１の操作を行わなくても良い。

続いて乗員９は、第１の表示領域８４１にポインタ４１０が移動したのち、図５Ａに示すように、第２の操作として右操作バー２３に対して長押し操作を行いつつ第３の操作として左タッチパッド２０の操作面２００に対してドラッグアンドドロップ操作を行う。なお乗員９は、左操作バー２２に対して長押し操作を行いつつ右タッチパッド２１の操作面２１０に対してドラッグアンドドロップ操作を行っても良い。

乗員９は、第１の表示領域８４１を第３の表示領域８４３の位置に表示させたい場合、図５Ｃに示すように、操作面２００に対して左から右にドラッグ操作を行い、第１の表示領域８４１が所望の位置に来ると、ドロップ操作、つまり操作面２００から左側操作指９１０を離す。

制御部６は、第２の操作がなされて右操作バー２３から出力された右操作情報Ｓ_４と、第３の操作がなされて左タッチパッド２０から出力された左タッチパッド操作情報Ｓ_１と、操作パターン情報６０と、に基づいて第１の表示領域８４１に対しドラッグアンドドロップ操作が行われていると判定する。制御部６は、第１の表示領域８４１をアクティブにした状態で第１の表示領域８４１～第４の表示領域８４４のレイアウトを変更することを示す表示指示情報Ｓ_７を出力する。

・表示領域を入れ替える操作について
図６Ａは、実施の形態に係る操作装置になされた表示領域を入れ替える操作の一例を示す図であり、図６Ｂは、視線が検出された表示領域の一例を示す図であり、図６Ｃは、表示領域の入れ替えの一例を示す図である。

所望の表示領域の表示位置を入れ替える場合、まず乗員９は、入れ替えたい表示領域を視線位置表示領域４１とするため、第１の操作を行い、さらに所望の表示領域に視線４０を送る。図６Ｂでは、第１の表示領域８４１が視線位置表示領域４１とされた場合を示している。なお所望の表示領域が既にアクティブであった場合は、第１の操作を行わなくても良い。

続いて乗員９は、図６Ａに示すように、第２の操作として右操作バー２３に対して長押し操作を行い、視線位置表示領域４１と入れ替えたい表示領域に視線４０を送る。図６Ｂは、第４の表示領域８４４に視線４０を送った場合を示している。

続いて乗員９は、図６Ａ～図６Ｃに示すように、第２の操作として右操作バー２３を長押し操作した状態で第４の表示領域８４４に視線４０を送ったのち、右側操作指９２０を右操作バー２３から離すことで表示領域を入れ替えることができる。第３の操作は、一例として、第４の表示領域８４４に視線４０を送る操作と、右側操作指９２０を右操作バー２３から離す操作と、を含んだ操作である。なお乗員９は、左操作バー２２に長押し操作を行い、長押し操作した状態で視線４０を送っても良い。

制御部６は、視線検出部４から出力された視線情報Ｓ_６と、右操作バー２３から出力された右操作情報Ｓ_４と、操作パターン情報６０と、に基づいて入れ替えのため、右操作バー２３の長押し操作が解除されたと判定する。制御部６は、第１の表示領域８４１をアクティブにした状態で第１の表示領域８４１と第４の表示領域８４４の表示位置を入れ替えることを示す表示指示情報Ｓ_７を出力する。

（動作）
以下に、本実施の形態の操作装置１の動作の一例について図７～図９のフローチャートに従って説明する。

・所望の表示領域を操作可能とする動作
操作装置１の制御部６は、操作部２に対して第１の操作がなされるか監視する。制御部６は、ステップ１の「Ｙｅｓ」が成立する、つまり左タッチパッド２０及び右タッチパッド２１に、期間の少なくとも一部が重なるタッチ操作、つまり第１の操作が検出された場合（Ｓｔｅｐ１：Ｙｅｓ）、視線検出部４を制御して乗員９の視線４０の検出を開始させる（Ｓｔｅｐ２）。

制御部６は、左タッチパッド２０及び右タッチパッド２１に対するタッチ操作、つまり第１の操作が継続し、かつ複数の表示領域のうち、いずれかの表示領域に視線４０が検出された場合（Ｓｔｅｐ３：Ｙｅｓ）、検出された視線４０が位置する表示領域をアクティブ、つまり操作可能とする表示指示情報Ｓ_７を出力する（Ｓｔｅｐ４）。

ここでステップ３において制御部６は、第１の操作が継続し、かつ複数の表示領域のうち、いずれかの表示領域に視線４０が検出されなかった場合（Ｓｔｅｐ３：Ｎｏ）、ステップ１に処理を進める。

・表示領域のレイアウトを変更する動作
制御部６は、ステップ１０の「Ｙｅｓ」が成立する、つまりアクティブになっている表示領域があり（Ｓｔｅｐ１０：Ｙｅｓ）、操作バーに長押し操作、つまり第２の操作がなされ（Ｓｔｅｐ１１：Ｙｅｓ）、第２の操作中に第３の操作としてドラッグアンドドロップ操作がなされた場合（Ｓｔｅｐ１２：Ｙｅｓ）、なされたドラッグアンドドロップ操作に基づいて表示領域のレイアウトを変更するため（Ｓｔｅｐ１３）、表示領域のレイアウトを変更させる表示指示情報Ｓ_７を出力する。

ここでステップ１１において制御部６は、第２の操作がなされていない場合（Ｓｔｅｐ１１：Ｎｏ）、ステップ１０に処理を進める。

またステップ１２において制御部６は、第２の操作中に第３の操作がなされない場合（Ｓｔｅｐ１２：Ｎｏ）、ステップ１０に処理を進める。

・表示領域を入れ替える動作
制御部６は、ステップ２０の「Ｙｅｓ」が成立する、つまりアクティブになっている表示領域があり（Ｓｔｅｐ２０：Ｙｅｓ）、操作バーに長押し操作、つまり第２の操作がなされた場合（Ｓｔｅｐ２１：Ｙｅｓ）、視線検出部４を制御して乗員９の視線４０の検出を開始させる（Ｓｔｅｐ２２）。

制御部６は、第２の操作が解除された際、視線４０がいずれかの表示領域に位置する第３の操作を検出した場合（Ｓｔｅｐ２３：Ｙｅｓ）、アクティブな表示領域と視線４０が検出された表示領域とを入れ替えるため（Ｓｔｅｐ２４）、これらの表示領域を入れ替えさせる表示指示情報Ｓ_７を出力する。

ここでステップ２１において制御部６は、第２の操作がなされていない場合（Ｓｔｅｐ２１：Ｎｏ）、ステップ２０に処理を進める。

またステップ２３において制御部６は、第３の操作が検出されない場合（Ｓｔｅｐ２３：Ｎｏ）、ステップ２０に処理を進める。

（実施の形態の効果）
本実施の形態に係る操作装置１は、操作性を向上させることができる。具体的には、操作装置１は、操作部２に対する第１の操作と、視線４０の位置と、に基づいて所望の表示領域のみを操作可能とすることができる。従って操作装置１は、複数の表示領域を操作対象とする場合と比べて、表示領域単位で操作可能とすることで、比率の差からくる困難性を低下させ、操作性を向上させることができる。

操作装置１は、操作部２に対する第１の操作と、視線４０の位置と、の組み合わせにより、所望の表示領域のみを操作可能としてポインタ４１０を表示させることができるので、この構成を採用しない場合と比べて、ポインタ４１０の起点を容易に変更することができる。

操作装置１は、ステアリング８１に配置された面積の小さい操作面２００及び操作面２１０を有する左タッチパッド２０及び右タッチパッド２１によって大型の表示画面８４０表示されたポインタ４１０などの操作を行うことができるので、表示画面全体を操作対象とする場合と比べて、操作に費やす時間を短縮することができる。

操作装置１は、操作部２に対する操作と、視線４０の位置と、に基づいて表示領域のレイアウトや入れ替えを容易に行うことができるので、この構成を採用しない場合と比べて、乗員９に近い位置に操作したい表示領域を移動させることができ、操作性がより向上する。

操作装置１は、視線位置表示領域４１にはポインタ４１０の表示や他の表示領域との表示の色、輝度の差があるので、この構成を採用しない場合と比べて、アクティブになった表示領域がわかり易い。

操作装置１は、操作可能な表示領域を限定することで左タッチパッド２０及び右タッチパッド２１により、多機能携帯電話やタブレット端末などのような操作方法で操作することができるので、表示画面８４０が大型であっても操作し易い。

上述の実施の形態及び変形例に係る操作装置１は、例えば、用途に応じて、その一部が、コンピュータが実行するプログラム、ＡＳＩＣ（Application Specific Integrated Circuit）及びＦＰＧＡ（Field Programmable Gate Array）などによって実現されても良い。

以上、本発明のいくつかの実施の形態及び変形例を説明したが、これらの実施の形態及び変形例は、一例に過ぎず、請求の範囲に係る発明を限定するものではない。これら新規な実施の形態及び変形例は、その他の様々な形態で実施されることが可能であり、本発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更などを行うことができる。また、これら実施の形態及び変形例の中で説明した特徴の組合せの全てが発明の課題を解決するための手段に必須であるとは限らない。さらに、これら実施の形態及び変形例は、発明の範囲及び要旨に含まれると共に、請求の範囲に記載された発明とその均等の範囲に含まれる。

１操作装置
２操作部
４視線検出部
６制御部
８車両
９乗員
２０左タッチパッド
２１右タッチパッド
２２左操作バー
２３右操作バー
４０視線
４１視線位置表示領域
８１ステアリング
８４表示装置
４１０ポインタ
８４０表示画面
８４１～８４４第１の表示領域～第４の表示領域

Claims

車両に配置され、第１の操作を受け付ける操作部と、
前記車両の乗員の視線を検出する視線検出部と、
前記操作部が前記第１の操作を受け付け、かつ画像を表示する複数の表示領域のうち、前記乗員の視線が位置する視線位置表示領域の存在を判定した場合、前記操作部を介した前記視線位置表示領域に対する操作のみを可能とする制御部と、
を備えた操作装置。
前記制御部は、前記視線位置表示領域に対する前記操作部を介した操作のみを可能とすると共に、前記操作部を介して操作可能なポインタを前記視線位置表示領域に表示させる、
請求項１に記載の操作装置。
前記操作部は、前記車両のステアリングの左右に配置された左側操作部及び右側操作部を有し、
前記制御部は、前記左側操作部及び前記右側操作部に対してなされた、少なくとも一部の期間が重なる操作を前記第１の操作とする、
請求項１に記載の操作装置。
前記操作部は、さらに第２の操作を受け付け、
前記制御部は、前記視線位置表示領域に対する操作のみを可能としたのち、前記操作部へ前記第２の操作がなされ、さらに第３の操作がなされた場合、前記視線位置表示領域を移動させて前記複数の表示領域のレイアウトを変更する、
請求項１に記載の操作装置。
前記操作部は、前記車両のステアリングの左右に配置された左側操作部及び右側操作部と、前記左側操作部及び前記右側操作部の少なくとも一方に隣接して設けられると共に前記第２の操作を受け付ける特定操作部と、を有する、
請求項４に記載の操作装置。
前記制御部は、前記左側操作部及び前記右側操作部の一方に対してなされた操作、又は前記乗員の視線変更による移動先の表示領域の選択操作と前記第２の操作の解除とを含む操作を前記第３の操作とする、
請求項４に記載の操作装置。
前記制御部は、前記複数の表示領域のうち、少なくとも前記車両の速度を表示する表示領域を前記乗員の正面に保ち、当該表示領域のレイアウトの変更、及び当該表示領域の表示位置の入れ替えを規制する、
請求項６に記載の操作装置。
前記制御部は、所望の表示領域を操作可能とする操作パターンに関する情報、前記視線位置表示領域のレイアウトを変更するための操作パターンに関する情報、及び前記複数の表示領域を入れ替えるための操作パターンに関する情報を含む、操作パターン情報を有する、
請求項７に記載の操作装置。
前記左側操作部及び前記右側操作部が、タッチ操作を受け付ける、静電容量方式のタッチパッドであり、
前記特定操作部が、プッシュスイッチ、又は静電容量方式のタッチセンサである、
請求項５に記載の操作装置。
前記視線検出部は、前記乗員の顔が撮像範囲に入るように配置されたカメラと接続され、当該カメラから出力される画像情報に基づいて前記乗員の視線を検出する、
請求項１に記載の操作装置。