JP2017219957A

JP2017219957A - 操作予測装置

Info

Publication number: JP2017219957A
Application number: JP2016112620A
Authority: JP
Inventors: 亮橋本; Akira Hashimoto
Original assignee: Tokai Rika Co Ltd
Current assignee: Tokai Rika Co Ltd
Priority date: 2016-06-06
Filing date: 2016-06-06
Publication date: 2017-12-14

Abstract

【課題】操作性を向上させることができる操作予測装置を提供する。【解決手段】操作予測装置１は、複数のスイッチのうち操作対象となるスイッチを操作するために移動する操作指９０に関する操作指情報１００を測定する測定部１０と、測定開始から測定終了までの操作指情報１００と操作されたスイッチと当該スイッチが操作された頻度とを関連付けた蓄積情報１４０を生成する蓄積情報生成部１４と、移動中に測定された操作指情報１００と過去に生成された蓄積情報１４０とを比較して操作がなされるスイッチを予測し、予測された操作がなされるスイッチに割り当てられた機能に関する画像を第１の表示状態から第２の表示状態に変えて表示装置に表示させる制御部１６と、を備えて概略構成されている。【選択図】図５

Description

本発明は、操作予測装置に関する。

従来の技術として、ステアリングに設けられる複数のステアリングスイッチと、各ステアリングスイッチと同様の配置で、各ステアリングスイッチの機能を表す機能表示を配置した案内表示部と、ステアリングスイッチに対する指の接触又は接近を検出する接触検出手段と、を備える操作装置が知られている（例えば、特許文献１参照。）。

この操作装置は、一のステアリングスイッチに対する指の接触又は接近が接触検出手段により検出された場合に、該一のステアリングスイッチに係る機能表示を強調する。

特開２００７−２９０５６２号公報

しかし従来の操作装置は、所望のステアリングスイッチを操作する過程において接触又は接近した他のステアリングスイッチの機能表示が強調して表示され、却って操作したい機能を特定し難くなって操作性が低下する可能性がある。

従って本発明の目的は、操作性を向上させることができる操作予測装置を提供することにある。

本発明の一態様は、複数のスイッチのうち操作対象となるスイッチを操作するために移動する操作指に関する操作指情報を測定する測定部と、測定開始から測定終了までの操作指情報と操作されたスイッチと当該スイッチが操作された頻度とを関連付けた蓄積情報を生成する蓄積情報生成部と、移動中に測定された操作指情報と過去に生成された蓄積情報とを比較して操作がなされるスイッチを予測し、予測された操作がなされるスイッチに割り当てられた機能に関する画像を第１の表示状態から第２の表示状態に変えて表示装置に表示させる操作予測部と、を備えた操作予測装置を提供する。

本発明によれば、操作性を向上させることができる。

図１（ａ）は、実施の形態に係る操作予測装置の一例が搭載された車両内部の概略図であり、図１（ｂ）は、操作予測装置のカメラの配置の一例を説明するための車両内部の概略図である。図２（ａ）は、実施の形態に係る操作予測装置の一例を示すブロック図であり、図２（ｂ）は、操作予測装置が含まれる操作予測システムの一例を示すブロック図である。図３（ａ）及び図３（ｂ）は、実施の形態に係る操作予測装置が検出する軌跡の一例について説明するための概略図である。図４（ａ）は、実施の形態に係る操作予測装置が予測したスイッチを強調表示させるサブモニタの一例を示す概略図であり、図４（ｂ）は、サブモニタに表示させる機能画像の一例を説明するための概略図である。図５は、実施の形態に係る操作予測装置の動作の一例を示すフローチャートである。

（実施の形態の要約）
実施の形態に係る操作予測装置は、複数のスイッチのうち操作対象となるスイッチを操作するために移動する操作指に関する操作指情報を測定する測定部と、測定開始から測定終了までの操作指情報と操作されたスイッチと当該スイッチが操作された頻度とを関連付けた蓄積情報を生成する蓄積情報生成部と、移動中に測定された操作指情報と過去に生成された蓄積情報とを比較して操作がなされるスイッチを予測し、予測された操作がなされるスイッチに割り当てられた機能に関する画像を第１の表示状態から第２の表示状態に変えて表示装置に表示させる操作予測部と、を備えて概略構成されている。

操作予測装置は、過去の蓄積情報から操作がなされるスイッチを予測して対応する機能に関する画像の表示状態を変えるので、予測しない場合と比べて、操作の軌跡上に位置する複数のスイッチの機能に関する画像の表示状態を変えるようなことが抑制され、操作性を向上させることができる。

[実施の形態]
（操作予測装置１の概要）
図１（ａ）は、実施の形態に係る操作予測装置の一例が搭載された車両内部の概略図であり、図１（ｂ）は、操作予測装置のカメラの配置の一例を説明するための車両内部の概略図である。図２（ａ）は、実施の形態に係る操作予測装置の一例を示すブロック図であり、図２（ｂ）は、操作予測装置が含まれる操作予測システムの一例を示すブロック図である。図３（ａ）及び図３（ｂ）は、実施の形態に係る操作予測装置が検出する軌跡の一例について説明するための概略図である。

なお、以下に記載する実施の形態に係る各図において、図形間の比率は、実際の比率とは異なる場合がある。また図２（ａ）及び図２（ｂ）では、主な信号や情報の流れを矢印で示している。

図１（ａ）及び図１（ｂ）に示すように、ステアリング８０に配置されたステアリングスイッチ１２は、例えば、車両８に搭載された電子機器の音量などを調整するように構成されている。運転者９がこのステアリングスイッチ１２を操作する場合、運転者９の視線９１の移動が少ない方が良い。そのため、この車両８は、例えば、視線９１の移動が少ないメータパネル８５に、車両８に関する画像を表示するサブモニタ８６を配置している。

このサブモニタ８６には、車両８に関する画像の一例として、運転者９の操作指９０が接近又は接触したスイッチが他のスイッチより強調して表示されるように構成されている。運転者９は、サブモニタ８６を見ることで、前方を見ている際の視線９１から大きく外れる手元を見ることなく、所望のスイッチを操作することが可能となる。なお以下では、操作指９０は、図３（ａ）及び図３（ｂ）に示すように、親指とするが親指に限定されない。

本実施の形態の操作予測装置１は、操作対象のスイッチに接近又は接触する前に、操作されると予測されるスイッチをサブモニタ８６などに強調して表示するように構成されている。

この操作予測装置１は、図１（ａ）〜図２（ｂ）に示すように、複数のスイッチのうち操作対象となるスイッチを操作するために移動する操作指９０に関する操作指情報１００を測定する測定部１０と、測定開始から測定終了までの操作指情報１００と操作されたスイッチと当該スイッチが操作された頻度とを関連付けた蓄積情報１４０を生成する蓄積情報生成部１４と、移動中に測定された操作指情報１００と過去に生成された蓄積情報１４０とを比較して操作がなされるスイッチを予測し、予測された操作がなされるスイッチに割り当てられた機能に関する画像を第１の表示状態から第２の表示状態に変えて表示装置に表示させる操作予測部としての制御部１６と、を備えて概略構成されている。

本実施の形態の操作指情報１００は、例えば、操作指９０の速度、軌跡及び位置の情報を含んで構成されている。なお操作指情報１００は、操作指９０の速度、軌跡、位置、加速度、スイッチから操作指９０までの距離、操作指９０の種類などを組み合わせて構成されても良い。

本実施の形態の複数のスイッチは、タッチパッドとして構成されたステアリングスイッチ１２の操作面１２ａが分割されて形成されるスイッチ領域であるがこれに限定されず、フロアコンソールに並んで配置されたタッチスイッチや機械式スイッチなどであっても良い。また複数のスイッチは、タッチパッドに限定されず、タッチスイッチや機械式スイッチであっても良い。

本実施の形態の第１の表示状態は、ステアリングスイッチ１２を模した後述する機能画像８６０がサブモニタ８６に表示された状態である。そして第２の表示状態は、機能画像８６０の一部の画像が第１の表示状態より強調された表示状態である。

また本実施の形態の表示装置は、メータパネル８５内のサブモニタ８６であるがこれに限定されず、フロントウインドウ８８に投影されるヘッドアップディスプレイなどであっても良い。ヘッドアップディスプレイに表示された場合、視線９１の移動がより抑制される。なお機能画像８６０は、サブモニタ８６と共にフロアコンソールに配置されるメインモニタ８４に表示されても良い。

この操作予測装置１は、図２（ｂ）に示すように、操作予測システム８２の一部を構成している。この操作予測システム８２は、一例として、操作予測装置１と、車両制御部８３と、メインモニタ８４と、サブモニタ８６と、電子機器８７と、車両ＬＡＮ（Local Area Network）８２０と、を備えて概略構成されている。

（測定部１０の構成）
測定部１０は、図２（ａ）、図３（ａ）及び図３（ｂ）に示すように、操作指９０の速度１０１及び軌跡１０２を測定する撮像部１１と、操作指９０の位置１０３を測定するタッチスイッチからなるステアリングスイッチ１２と、を備えて概略構成されている。

この撮像部１１は、図２（ａ）に示すように、カメラ１１０と、算出部１１１と、を備えて概略構成されている。

カメラ１１０は、例えば、図１（ｂ）に示すように、車両８の天井８１に配置されている。このカメラ１１０は、例えば、ＣＣＤイメージセンサ（Charge Coupled Device Image Sensor）、ＣＭＯＳイメージセンサ（Complementary Metal Oxide Semiconductor Image Sensor）などの固体撮像素子を備えている。

このカメラ１１０は、例えば、図１（ｂ）に示すように、ステアリングスイッチ１２を含む撮像範囲１１０ａを周期的に撮像する。カメラ１１０は、撮像した画像の情報を撮像情報Ｓ_１として周期的に算出部１１１に出力する。なお算出部１１１は、例えば、バッファを有する。このバッファは、周期的に取得する撮像情報Ｓ_１が時系列的にかつ一時的に蓄積されると共に演算の過程や結果などを一時的に記憶する。

算出部１１１は、図３（ａ）及び図３（ｂ）に示すように、撮像情報Ｓ_１に基づいて操作指９０の速度１０１及び軌跡１０２を算出する。そして算出部１１１は、算出した速度１０１及び軌跡１０２の情報である速度軌跡情報１１２を生成して制御部１６に出力する。

具体的には、算出部１１１は、例えば、取得した撮像情報Ｓ_１に基づいて背景となる背景画像を作成し、この背景画像と撮像された画像との差分画像から操作指９０の速度１０１及び軌跡１０２を求める。この背景画像は、例えば、ステアリング８０のみの画像、ステアリング８０を把持している画像などを用いることができる。背景画像は、例えば、車両８のイグニッションスイッチがオンされた後に撮像される。なお背景画像及び撮像された画像は、例えば、二値化されている。

算出部１１１は、この差分画像から操作指９０を抽出する。そして算出部１１１は、少なくとも２枚の差分画像から操作指９０の速度１０１及び軌跡１０２を算出する。

ステアリングスイッチ１２は、図１（ａ）に示すように、ステアリング８０の右側のスポーク８００に配置されている。このステアリングスイッチ１２は、運転者９の右手で操作される。なおステアリングスイッチ１２は、左側のスポーク８００に配置されても良いし、両方のスポーク８００に配置されても良い。

ステアリングスイッチ１２は、例えば、タッチパッドを複数のタッチスイッチ（タッチ領域）に分割し、いずれかのタッチスイッチにおいて操作指９０による操作が検出されると、当該タッチスイッチが操作されたとするスイッチ信号Ｓ_２を出力するように構成されている。またタッチパッドは、例えば、複数の電極が交差するように配置され、タッチパッドの操作面１２ａに設定された二次元座標系における位置を検出するように構成されている。

ステアリングスイッチ１２は、一例として、図３（ａ）及び図３（ｂ）に示すように、操作面１２ａが分割されて第１のスイッチ群１２１〜第３のスイッチ群１２３が形成されている。この第１のスイッチ群１２１〜第３のスイッチ群１２３は、割り当てられた機能の２つの状態を指示可能に構成されている。

具体的には第１のスイッチ群１２１は、例えば、電気的に接続された電子機器としての携帯電話や多機能携帯電話などの通話開始と通話終了を指示する操作に使用される。この第１のスイッチ群１２１は、例えば、図３（ａ）の紙面上側がスイッチ１２１ａ、下側がスイッチ１２１ｂとなっている。通話開始は、上側のスイッチ１２１ａに対するタッチ操作により指示される。また通話終了は、下側のスイッチ１２１ｂに対するタッチ操作により指示される。

第２のスイッチ群１２２は、例えば、電気的に接続された電子機器としての音楽再生装置やテレビジョン受像機などのリストやチャンネルを選ぶ操作に使用される。この第２のスイッチ群１２２は、例えば、図３（ａ）の紙面上側がスイッチ１２２ａ、下側がスイッチ１２２ｂとなっている。リストやチャンネルを１つずつ上げる指示は、上側のスイッチ１２２ａに対するタッチ操作により行われる。またリストやチャンネルを１つずつ下げる指示は、下側のスイッチ１２２ｂに対するタッチ操作により行われる。

第３のスイッチ群１２３は、例えば、電気的に接続された上述の電子機器などの音量を調整する操作に使用される。この第３のスイッチ群１２３は、例えば、図３（ａ）の紙面上側がスイッチ１２３ａ、下側がスイッチ１２３ｂとなっている。音量を上げる指示は、上側のスイッチ１２３ａに対するタッチ操作により行われる。また音量を下げる指示は、下側のスイッチ１２３ｂに対するタッチ操作により行われる。

第１のスイッチ群１２１〜第３のスイッチ群１２３は、図２（ａ）に示すように、操作を検出したことを示すスイッチ信号Ｓ_２を制御部１６に出力する。制御部１６は、取得したスイッチ信号Ｓ_２に基づいて操作されたスイッチの情報である操作情報Ｓ_４を生成して接続された電子機器に出力する。

ステアリングスイッチ１２は、操作指９０の位置１０３を周期的に測定するように構成されている。この位置１０３は、操作面１２ａに設定された二次元座標系における座標である。ステアリングスイッチ１２は、測定された操作指９０の位置１０３に基づく位置情報１２５を生成して制御部１６に出力する。

制御部１６は、測定部１０から取得した速度軌跡情報１１２及び位置情報１２５に基づいて操作指９０の速度１０１、軌跡１０２及び位置１０３の情報を含む操作指情報１００を生成して蓄積情報生成部１４に出力する。

なお変形例として測定部１０は、タッチパッドによって速度１０１、軌跡１０２及び位置１０３を測定するように構成されても良い。また測定部１０は、カメラ１１０及び算出部１１１によって速度１０１、軌跡１０２及び位置１０３を測定するように構成されても良い。

（蓄積情報生成部１４の構成）
蓄積情報生成部１４は、測定開始から測定終了までの操作指情報１００と操作されたスイッチと当該スイッチが操作された頻度とを関連付けた蓄積情報１４０を生成する。蓄積情報生成部１４は、例えば、図３（ａ）及び図３（ｂ）に示すように、ステアリングスイッチ１２によって操作指９０が検出されたときを測定開始とする。また蓄積情報生成部１４は、例えば、第１のスイッチ群１２１〜第３のスイッチ群１２３のいずれかのスイッチが操作されたときを測定終了とする。

この操作指情報１００は、撮像部１１から出力される速度軌跡情報１１２とステアリングスイッチ１２から出力される位置情報１２５とを合わせた操作の履歴情報である。つまり操作指情報１００は、速度１０１、軌跡１０２及び位置１０３の情報から構成されている。測定部１０は、この操作指情報１００を周期的に出力する。そして制御部１６は、最後に操作されたスイッチをスイッチ信号Ｓ_２から判定し、操作されたスイッチの情報であるスイッチ情報１６０を蓄積情報生成部１４に出力する。蓄積情報生成部１４は、操作開始から操作終了までに取得した複数の操作指情報１００とスイッチ情報１６０とに基づいてスイッチの頻度を＋１とした蓄積情報１４０を生成する。

この蓄積情報１４０は、操作がなされる度に更新される。従って蓄積情報生成部１４は、例えば、測定開始から測定終了まで測定された速度１０１、軌跡１０２及び位置１０３が過去に生成された蓄積情報１４０と予め定められた範囲内で一致し、かつ操作されたスイッチが一致する場合、当該スイッチの頻度を＋１増加させて蓄積情報１４０を更新する。

なお蓄積情報１４０は、操作者ごとに生成されても良い。蓄積情報生成部１４は、一例として、操作予測システム８２の車両制御部８３から識別情報を取得し、この識別情報ごとに蓄積情報１４０を生成する。この識別情報は、一例として、個人を識別可能な電子キーの認証時やスタートスイッチの操作による生体認証時などに基づいて生成される。従って制御部１６は、電子キーやスタートスイッチの操作後に出力された識別情報に基づいて当該識別情報に対応する蓄積情報１４０を取得して操作がなされるスイッチを予測する。

（制御部１６の構成）
図４（ａ）は、実施の形態に係る操作予測装置が予測したスイッチを強調表示させるサブモニタの一例を示す概略図であり、図４（ｂ）は、サブモニタに表示させる機能画像の一例を説明するための概略図である。

制御部１６は、例えば、記憶されたプログラムに従って、取得したデータに演算、加工などを行うＣＰＵ（Central Processing Unit）、半導体メモリであるＲＡＭ（Random Access Memory）及びＲＯＭ（Read Only Memory）などから構成されるマイクロコンピュータである。このＲＯＭには、例えば、制御部１６が動作するためのプログラムが格納されている。ＲＡＭは、例えば、一時的に演算結果などを格納する記憶領域として用いられる。

制御部１６は、測定部１０から取得した速度軌跡情報１１２及び位置情報１２５を操作指情報１００として蓄積情報生成部１４に周期的に出力する。この周期は、一例として、ステアリングスイッチ１２の操作面１２ａを走査する周期の自然数倍となる。

また制御部１６は、取得した操作指情報１００と蓄積された蓄積情報１４０とを比較して操作がなされるスイッチを予測するように構成されている。なおこの予測は、操作指情報１００を取得する度に行われても良いし、予め定められた周期で行っても良い。

さらに制御部１６は、比較により操作がなされるスイッチの複数の候補が抽出された場合、抽出された複数の候補において最も操作された頻度が高いスイッチを操作がなされるスイッチと予測する。

具体的には、まず制御部１６は、測定開始時に取得した操作指情報１００の位置１０３における速度１０１を確認し、当該位置１０３及び当該速度１０１の組み合わせにおいてスイッチが操作されたことがあるか、蓄積情報１４０と比較して確認する。この位置１０３と速度１０１の確認は、予め定められた範囲内に収まる位置１０３及び速度１０１の組み合わせが蓄積情報１４０に存在するか否かによって行われる。

制御部１６は、組み合わせが蓄積情報１４０に存在する場合、さらに操作指９０の移動に伴って測定される位置１０３における速度１０１及び軌跡１０２と予め定められた範囲内に収まる位置１０３、速度１０１及び軌跡１０２の組み合わせから操作が予測されるスイッチの候補を抽出する。そして制御部１６は、複数のスイッチの候補が抽出された場合、それぞれのスイッチの頻度を確認し、操作がなされた頻度が一番大きいスイッチを操作が予測されるスイッチと判定する。

例えば、図３（ａ）において、測定部１０は、スイッチ１２３ａにおいて操作指９０を検出すると、操作指情報１００の測定を開始する（測定開始）。制御部１６は、この測定開始時の位置１０３及び速度１０１と蓄積情報生成部１４から取得した蓄積情報１４０とを比較し、この組み合わせで過去にスイッチが操作されたか否かを確認する。

制御部１６は、測定開始時の位置１０３と速度１０１の組み合わせで、過去にスイッチが操作されたことがある場合、その後に取得される速度軌跡情報１１２及び位置情報１２５、つまり操作指情報１００と蓄積情報１４０とを比較して操作がなされるスイッチの候補を抽出する。

一例として、図３（ａ）に示すように、操作指９０がスイッチ１２３ａからスイッチ１２３ｂに移動する過程において周期的に測定された速度１０１、軌跡１０２及び速度１０１の組み合わせで操作されたスイッチがスイッチ１２３ｂ、スイッチ１２２ｂ及びスイッチ１２１ｂであった場合、それぞれのスイッチが操作された頻度を確認する。一例として、スイッチ１２１ｂが操作された頻度が最も高い場合、制御部１６は、スイッチ１２１ｂが操作されると予測して表示信号Ｓ_３を生成して出力する。サブモニタ８６は、図４（ａ）及び図４（ｂ）に示すように、車両ＬＡＮ８２０を介して取得した表示信号Ｓ_３に基づいてスイッチ１２１ｂに対応する画像（スイッチ画像８６１ｂ）を強調表示させる。

そして蓄積情報生成部１４は、スイッチを予測したことから候補から選ばれたスイッチの頻度を＋１に更新する。なお蓄積情報生成部１４は、スイッチの候補がなかった場合、つまり過去にない軌跡１０２や速度１０１で操作された場合、取得した複数の操作指情報１００とスイッチ情報１６０とに基づいて蓄積情報１４０を更新する。

また例えば、図３（ｂ）において、測定部１０は、スイッチ１２３ａにおいて操作指９０を検出すると、操作指情報１００の測定を開始する（測定開始）。制御部１６は、この測定開始時の位置１０３及び速度１０１と蓄積情報生成部１４から取得した蓄積情報１４０とを比較し、この組み合わせで過去にスイッチが操作されたか否かを確認する。

一例として、図３（ｂ）に示すように、操作指９０がスイッチ１２３ａからスイッチ１２２ａに移動する過程において周期的に測定された速度１０１、軌跡１０２及び速度１０１の組み合わせで操作されたスイッチがスイッチ１２３ａ、スイッチ１２２ａ及びスイッチ１２１ａであった場合、それぞれのスイッチが操作された頻度を確認する。一例として、スイッチ１２２ａが操作された頻度が最も高い場合、制御部１６は、スイッチ１２２ａが操作されると予測して表示信号Ｓ_３を生成して出力する。サブモニタ８６は、図４（ａ）及び図４（ｂ）に示すように、車両ＬＡＮ８２０を介して取得した表示信号Ｓ_３に基づいてスイッチ１２２ａに対応する画像（スイッチ画像８６２ｂ）を強調表示させる。

なお制御部１６は、一例として、操作指情報１００の軌跡１０２と蓄積情報１４０の軌跡１０２とが一致するか否かの判定方法としてパターンマッチング法を用いるものとする。なお判定方法は、パターンマッチング法に限定されない。

（操作予測システム８２の構成）
操作予測システム８２の車両制御部８３は、例えば、この操作予測システム８２を制御するマイクロコンピュータである。メインモニタ８４は、液晶ディスプレイであり、電子機器としてのナビゲーション装置や音楽再生装置などの表示部として機能する。

サブモニタ８６は、図４（ａ）に示すように、メータパネル８５に配置された速度計などの計器８５０の間に配置されている。このサブモニタ８６は、例えば、液晶ディスプレイである。このサブモニタ８６には、例えば、走行距離、各種警告、機能画像８６０などが表示される。

機能画像８６０は、ステアリングスイッチ１２を模した画像である。機能画像８６０は、図４（ｂ）に示すように、ステアリングスイッチ１２の第１のスイッチ群１２１〜第３のスイッチ群１２３に対応した第１のスイッチ画像８６１〜第３のスイッチ画像８６３を有している。

第１のスイッチ群１２１のスイッチ１２１ａ及びスイッチ１２１ｂは、第１のスイッチ画像８６１を分割したスイッチ画像８６１ａ及びスイッチ画像８６１ｂに対応している。

第２のスイッチ群１２２のスイッチ１２２ａ及びスイッチ１２２ｂは、第２のスイッチ画像８６２を分割したスイッチ画像８６２ａ及びスイッチ画像８６２ｂに対応している。

第３のスイッチ群１２３のスイッチ１２３ａ及びスイッチ１２３ｂは、第３のスイッチ画像８６３を分割したスイッチ画像８６３ａ及びスイッチ画像８６３ｂに対応している。

図４（ｂ）に示すように、斜線がないスイッチ画像（スイッチ画像８６１ａ、スイッチ画像８６２ａ〜スイッチ画像８６３ｂ）が第１の表示状態であり、斜線があるスイッチ画像８６１ｂが第２の表示状態である。

なお変形例として第２の表示状態は、周期的に強弱を付けて他の表示と異なる表示としても良い。またサブモニタ８６が複数の色を表示できる場合、第１の表示状態と第２の表示状態で異なる色としても良い。

電子機器８７は、例えば、ナビゲーション装置、音楽再生装置、映像再生装置、接続された携帯電話及び多機能携帯電話などである。

車両ＬＡＮ８２０は、一例として、ＣＡＮ（Controller Area Network）及びＬＩＮ（Local Interconnect Network）などの規格を用いた相互の通信を可能とするものである。

以下に、本実施の形態の操作予測装置１の動作の一例について説明する。

（動作）
操作予測装置１の測定部１０は、車両８の電源が投入されると、カメラ１１０で撮像範囲１１０ａを撮像して速度軌跡情報１１２を生成すると共にステアリングスイッチ１２の操作面１２ａを走査して位置情報１２５及びスイッチ信号Ｓ_２を出力する。

制御部１６は、取得した位置情報１２５に基づいてステアリングスイッチ１２が操作指９０の位置１０３の測定を開始すると（Ｓｔｅｐ１）、測定を開始した際の位置１０３とその速度１０１の組み合わせが蓄積情報１４０に存在するか確認する。

制御部１６は、組み合わせが蓄積情報１４０に存在する、つまり過去にこの組み合わせで操作がなされていた場合（Ｓｔｅｐ２：Ｙｅｓ）、さらに取得した操作指情報１００と蓄積情報１４０に基づいて操作が予測されるスイッチの候補を抽出する（Ｓｔｅｐ３）。

制御部１６は、抽出したスイッチの候補が複数であった場合（Ｓｔｅｐ４：Ｙｅｓ）、それらのスイッチの頻度を確認し、頻度の最も高いスイッチを操作が予測されるスイッチと判定する（Ｓｔｅｐ５）。

制御部１６は、予測したスイッチに対応するスイッチ画像を強調表示させる表示信号Ｓ_３を出力すると共に頻度を＋１とするように蓄積情報１４０を更新させ（Ｓｔｅｐ６）、操作予測動作を終了する。

ここでステップ２において制御部１６は、組み合わせが過去にない場合（Ｓｔｅｐ２）、測定開始から測定終了までの操作指情報１００とスイッチ情報１６０を蓄積情報生成部１４に出力し、過去にない操作として蓄積情報１４０を更新させる（Ｓｔｅｐ７）。蓄積情報生成部１４は、この操作指情報１００とスイッチ情報１６０に基づいて蓄積情報１４０を更新して操作予測動作を終了する。

またステップ４において制御部１６は、抽出したスイッチの候補が１つであった場合（Ｓｔｅｐ４：Ｎｏ）、このスイッチに対応するスイッチ画像を強調表示させる表示信号Ｓ_３を出力すると共に頻度を＋１とするように蓄積情報１４０を更新させる（Ｓｔｅｐ６）。

（実施の形態の効果）
本実施の形態に係る操作予測装置１は、操作性を向上させることができる。具体的には操作予測装置１は、過去の操作の履歴である蓄積情報１４０から操作がなされるスイッチを予測してスイッチ画像の表示状態を変えるので、予測しない場合と比べて、操作の軌跡１０２上に位置する複数のスイッチのスイッチ画像の表示状態を変えるようなことが抑制され、操作性を向上させることができる。

操作予測装置１は、操作がなされる度に蓄積情報１４０が更新されるので、この構成を採用しない場合と比べて、運転者９の操作のくせなどを学習して確度の高い予測を行うことができる。

上述の実施の形態及び変形例に係る操作予測装置１は、例えば、用途に応じて、その一部が、コンピュータが実行するプログラム、ＡＳＩＣ（Application Specific Integrated Circuit）及びＦＰＧＡ（Field Programmable Gate Array）などによって実現されても良い。

以上、本発明のいくつかの実施の形態及び変形例を説明したが、これらの実施の形態及び変形例は、一例に過ぎず、特許請求の範囲に係る発明を限定するものではない。これら新規な実施の形態及び変形例は、その他の様々な形態で実施されることが可能であり、本発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更などを行うことができる。また、これら実施の形態及び変形例の中で説明した特徴の組合せの全てが発明の課題を解決するための手段に必須であるとは限らない。さらに、これら実施の形態及び変形例は、発明の範囲及び要旨に含まれると共に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１…操作予測装置、８…車両、９…運転者、１０…測定部、１１…撮像部、１２…ステアリングスイッチ、１２ａ…操作面、１４…蓄積情報生成部、１６…制御部、８０…ステアリング、８１…天井、８２…操作予測システム、８３…車両制御部、８４…メインモニタ、８５…メータパネル、８６…サブモニタ、８７…電子機器、８８…フロントウインドウ、９０…操作指、９１…視線、１００…操作指情報、１０１…速度、１０２…軌跡、１０３…位置、１１０…カメラ、１１０ａ…撮像範囲、１１１…算出部、１１２…速度軌跡情報、１２１〜１２３…第１のスイッチ群〜第３のスイッチ群、１２１ａ，１２１ｂ，１２２ａ，１２２ｂ，１２３ａ，１２３ｂ…スイッチ、１２５…位置情報、１４０…蓄積情報、１６０…スイッチ情報、８００…スポーク、８５０…計器、８６０…機能画像、８６１〜８６３…第１のスイッチ画像〜第３のスイッチ画像、８６１ａ，８６１ｂ，８６２ａ，８６２ｂ，８６３ａ，８６３ｂ…スイッチ画像

Claims

複数のスイッチのうち操作対象となるスイッチを操作するために移動する操作指に関する操作指情報を測定する測定部と、
測定開始から測定終了までの前記操作指情報と操作されたスイッチと当該スイッチが操作された頻度とを関連付けた蓄積情報を生成する蓄積情報生成部と、
移動中に測定された前記操作指情報と過去に生成された前記蓄積情報とを比較して操作がなされるスイッチを予測し、予測された前記操作がなされるスイッチに割り当てられた機能に関する画像を第１の表示状態から第２の表示状態に変えて表示装置に表示させる操作予測部と、
を備えた操作予測装置。
前記操作予測部は、比較により前記操作がなされるスイッチの複数の候補が抽出された場合、抽出された前記複数の候補において最も操作された頻度が高いスイッチを前記操作がなされるスイッチと予測する、
請求項１に記載の操作予測装置。
前記操作指情報は、操作指の速度、軌跡及び位置の情報を含んで構成され、
前記測定部は、操作指の前記速度及び前記軌跡を測定する撮像部と、操作指の前記位置を測定するタッチパッドである前記複数のスイッチと、を備える、
請求項１又は２に記載の操作予測装置。