JP2014170339A - 情報表示制御装置、情報表示装置および情報表示制御方法 - Google Patents

情報表示制御装置、情報表示装置および情報表示制御方法 Download PDF

Info

Publication number
JP2014170339A
JP2014170339A JP2013041399A JP2013041399A JP2014170339A JP 2014170339 A JP2014170339 A JP 2014170339A JP 2013041399 A JP2013041399 A JP 2013041399A JP 2013041399 A JP2013041399 A JP 2013041399A JP 2014170339 A JP2014170339 A JP 2014170339A
Authority
JP
Japan
Prior art keywords
prompt
expression
information
input
distance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013041399A
Other languages
English (en)
Other versions
JP6041708B2 (ja
Inventor
Hidekazu Arita
英一 有田
Mitsuo Shitaya
光生 下谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2013041399A priority Critical patent/JP6041708B2/ja
Publication of JP2014170339A publication Critical patent/JP2014170339A/ja
Application granted granted Critical
Publication of JP6041708B2 publication Critical patent/JP6041708B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

【課題】指示物の3次元位置情報を使って画面表示を工夫することにより、操作性の向上等を図る。
【解決手段】制御部は、指示物の3次元位置情報に基づき、入力装置の入力面のうちで入力面の法線に沿った指示物の直下位置にあたる入力面内位置を、表示装置の表示面内位置に変換する(2次元位置変換処理)。制御部は、3次元位置情報に基づき、入力面から入力面の法線に沿った指示物までの距離が、予め定められた複数の距離レベルのうちのいずれに該当するかを判別する(距離レベル判別処理)。制御部は、距離レベル判別処理で判別した距離レベルに応じて、表示装置の表示面に表示するプロンプト31の表現を変化させる(プロンプト表現設定処理)。制御部は、プロンプト31を、2次元位置変換処理で得られた表示面内位置に、プロンプト表現設定処理で設定された表現で、表示させるための表示画像データを生成する。
【選択図】図4

Description

本発明は、情報表示制御装置、情報表示装置および情報表示制御方法に関する。
下記特許文献1には、プロンプター方式と称される遠隔操作技術を採用したカーナビゲーション装置が紹介されている。このカーナビゲーション装置では、表示装置が車両のセンターコンソールの上部に取り付けられ、タッチパネルが該センターコンソールの下部に取り付けられている。さらに、タッチパネル上を移動する手を撮影するためのカメラが設けられている。タッチパネルの表面に指を当てて上下左右に移動させると、カメラが、操作する手を含むタッチパネルの表面を撮影する。撮影映像から手の画像が抽出され、その手画像がメインの画像に重畳される。タッチパネル上での指の移動に併せて、表示画面上を手画像が移動するので、あたかもタッチパネル付き画面を操作しているような感覚が得られる。
下記特許文献2には、パーソナルコンピュータの使用環境において、タブレット上にペンで筆記することによって入力操作を行う技術が紹介されている。特にペンの3次元位置を検出する種々の技術が紹介されている。また、画面上のカーソルに影を付け、その影を、タブレット上方のペンの高さに応じて変化させることにより、手元を見なくても実際のペンが置かれている空間位置を把握できるとしている。
特許第4915503号公報 特開平9−305306号公報
特許文献1の技術では、カメラで撮影した画像は平面画像であるので、手の位置はその平面画像における2次元位置でしか識別できない。また、カメラによる撮影は、指がタッチパネルに接触している時に限られている。すなわち、手の2次元位置情報しか利用されない。
他方、特許文献2の技術では、ペンの3次元位置を検出することができ、ペンの高さをカーソルの影に反映させることによって画面上でペンの高さを把握できる。しかし、特許文献2の技術はパーソナルコンピュータの使用環境が前提であるので、特許文献2の技術をそのまま他の使用環境で採用すると不便が生じる可能性がある。
本発明は、指示物の3次元位置情報を使って画面表示を工夫することにより、操作性の向上等を図ることを目的とする。
本発明の一形態に係る情報表示制御装置は、表示装置用接続部と、入力装置用接続部と、制御部とを含む。表示装置用接続部は、表示面を有する表示装置が接続される。入力装置用接続部は、入力面上の空間に存在する指示物の3次元位置を検出する入力装置が接続され、入力装置から検出結果に関する3次元位置情報が入力される。制御部は、2次元位置変換処理と、距離レベル判別処理と、プロンプト表現設定処理と、表示画像データ生成処理とを行う。2次元位置変換処理では、制御部は、3次元位置情報に基づき、入力面のうちで入力面の法線に沿った指示物の直下位置にあたる入力面内位置を、表示装置の表示面内位置に変換する。距離レベル判別処理では、制御部は、3次元位置情報に基づき、入力面から入力面の法線に沿った指示物までの距離が、予め定められた複数の距離レベルのうちのいずれに該当するかを判別する。プロンプト表現設定処理では、制御部は、距離レベル判別処理で判別した距離レベルに応じて、表示面に表示するプロンプトの表現を変化させる。表示画像データ生成処理では、制御部は、プロンプトを、2次元位置変換処理で得られた表示面内位置に、プロンプト表現設定処理で設定された表現で、表示させるための表示画像データを生成する。
上記一形態によれば、プロンプトの表現が指示物の距離に応じて変化する。このため、ユーザは、入力面に向けた手元を見なくても、表示面を通じて、入力面までの距離を把握することができる。それにより、視線移動が減り、操作性が向上する。プロンプトの表現は、指示物の距離レベルごとに変化する。このため、プロンプトの大きさ等が連続的に変化する場合に比べて、プロンプトの変化に気付きやすい。また、例えば揺れが生じる環境下においても、プロンプトの表現が安定し、快適な操作性を提供可能である。
本発明の目的、特徴および利点は、以下の詳細な説明と添付図面とによって、より明白となる。
情報表示装置を例示するブロック図である。 表示面と入力面の配置位置を例示する図である。 情報表示制御装置を例示するブロック図である。 プロンプトの表現を例示する図である。 情報表示装置の動作を例示するフローチャートである。 2次元位置変換処理を説明する図である。 プロンプトの表現の変化を例示する図である。 プロンプトの表現を例示する図である。 距離情報の変化を例示する図である。 距離情報の変化を例示する図である。 距離情報の変化を例示する図である。 情報表示装置の動作を例示するフローチャートである(付加情報ありの場合)。 距離情報の第2例を示す図である。 距離情報の第3例を示す図である。 プロンプトの表現を例示する図である(プロンプトをナビゲーション関連のアイコン上に表示する場合)。 プロンプトの表現を例示する図である(プロンプトをAV関連のアイコン上に表示する場合)。 プロンプトの表現を例示する図である(プロンプトをアイコン領域に表示する場合)。 プロンプトの表現を例示する図である(プロンプトを画面操作領域に表示する場合)。 プロンプトの表現を例示する図である(プロンプトを操作不許可アイコン上に表示する場合)。 プロンプトの表現を例示する図である(プロンプトを操作許可アイコン上に表示する場合)。 プロンプトの表現を例示する図である(プロンプトを操作不許可領域に表示する場合)。 プロンプトの表現を例示する図である(プロンプトを操作許可領域に表示する場合)。 プロンプトの表現を例示する図である(操作不許可領域から操作許可領域への進入方向が複数存在しうる場合)。 プロンプトおよび面内状態情報の表現を例示する図である(面内状態連動条件)。 プロンプトの表現を例示する図である(ジェスチャ操作と関連付けた場合)。 プロンプトの表現を例示する図である(スタイラスペンの場合)。 情報表示制御装置を例示するブロック図である(スタイラスペンを利用する場合)。 複数の入力装置を利用する場合の構成を例示するブロック図である。 複数のプロンプトが表示された画面を例示する図である(非分割画面の場合)。 複数のプロンプトが表示された画面を例示する図である(分割画面の場合)。 複数のプロンプトが表示された画面を例示する図である(スプリットビュー画面の場合)。
<全体構成の概略>
図1に、実施の形態に係る情報表示装置1のブロック図を例示する。図1では情報表示装置1が、移動体の一例である自動車に搭載される場合を例示しており、そのような使用環境下で情報表示装置1に接続される種々の装置も例示している。なお、情報表示装置1は、自動車以外の車両(例えば鉄道車両)に搭載されてもよいし、車両以外の移動体(例えば飛行機、船)に搭載されてもよい。
図1の例によれば、情報表示装置1は表示装置2と情報表示制御装置3とに大別され、情報表示制御装置3に入力装置4と、スピーカ5と、AV(Audio-Visual)機器6と、現在位置検出装置7とが接続されている。なお、スピーカ5の接続は任意であり、AV機器6と現在位置検出装置7のそれぞれも同様である。
表示装置2は、各種情報を表示する。表示装置2は、例えば、複数の画素がマトリクス状に配置されることによって構成された表示面2aと、情報表示制御装置3から取得した表示画像データに基づいて各画素を駆動する(換言すれば、各画素の表示状態を制御する)駆動装置と、を含んでいる。なお、表示画像データは、予め定められた信号フォーマットの映像信号(デジタル信号でもアナログ信号でもよい)として、情報表示制御装置3から表示装置2に供給される。表示装置2で表示する画像は、静止画像の場合もあるし、動画像の場合もあるし、さらには静止画像と動画像の組み合わせの場合もある。
表示装置2は、例えば液晶表示装置によって構成可能である。この例によれば、表示パネル(ここでは液晶パネル)の表示領域が表示面2aに対応し、表示パネルに外付けされた駆動回路が上記駆動装置に対応する。なお、駆動回路の一部が表示パネルに内蔵される場合もある。液晶表示装置の他に、エレクトロルミネセンス(EL)表示装置、プラズマディスプレイ装置、等によって、表示装置2を構成することも可能である。
情報表示制御装置3は、各種の処理を行う。具体的には、情報表示制御装置3は、表示装置2およびスピーカ5に供給する信号を生成する。また、情報表示制御装置3は、入力装置4から入力される情報(指示を含む)を解析し、解析結果に応じた各種処理(例えば表示装置2の制御)を行う。また、情報表示制御装置3は、AV機器6から入力されるAV信号を表示装置2およびスピーカ5向けに加工する。また、情報表示制御装置3は、ユーザ指示に応じてAV機器6を制御する。また、情報表示制御装置3は、現在位置検出装置7から入力される情報を使って、ナビゲーション機能等を実現する。
入力装置4は、ユーザから情報(指示を含む)を受け付ける。入力装置4は、例えば、ユーザが入力のために用いる指示物を検出する検出部と、検出部によって検出された結果を検出信号として情報表示制御装置3へ出力する検出信号出力部と、を含んでいる。
特に、入力装置4は、入力面4aを有し、入力面4a上の空間に存在する指示物の3次元位置を検出し、検出結果に関する3次元位置情報を出力する。ここでは、そのような3次元位置検出機能を有する入力装置4として、非接触型(3次元(3D)型とも称される)のタッチパネルを例示する。非接触型タッチパネルとして種々の方式が開発されているが、例えば、静電容量方式の一つである投影容量方式が知られている。以下では入力装置4をタッチパネル4と称する場合がある。なお、タッチパネルはタッチパッドと称される場合もある。
タッチパネル4の入力面4aにはセンサが設けられており、各センサの出力信号の状態から、入力面4a上および入力面4a上方における指示物の3次元位置を特定可能である。特定された3次元位置は例えば、入力面4aに予め設定された3次元座標上の座標データによって表現される。この場合、入力面4a上で指示物を移動させると指示物の位置を示す座標データが変化するので、連続的に取得される一連の座標データによって指示物の移動を検出可能である。なお、座標以外の手法によって指示物の3次元位置情報を表現してもよい。
タッチパネル4は、指示物の3次元位置の検出だけでなく、入力面4aに対する指示物の押圧力を検出可能な構成を採用してもよい。
タッチパネル4は情報表示装置1専用であってもよいし、あるいは、汎用の情報端末機に搭載されているタッチパネルをタッチパネル4として利用してもよい。
なお、入力に用いる上記指示物が、ユーザの指(より具体的には、指先)である場合を例示する。但し、例えばスタイラスペン(タッチペンとも称される)等の道具を指示物として利用してもよい。
スピーカ5は、聴覚的情報を出力する。例えば、CD等の音声、操作音、通知音、効果音、ガイダンス音声、等がスピーカ5から出力される。AV機器6は例えば、CD、DVD、SDメモリカード等のメディアに記録されているAVデータを再生する。
現在位置検出装置7は、自動車の現在位置を検出する。現在位置検出装置7は、例えば、GPS(Global Positioning System)受信装置である。GPS受信装置は、GPS受信用のアンテナを介してGPS衛星から受信した情報に基づいて自車位置の現在位置を取得する。なお、GPSに代えて、加速度センサ、ジャイロまたは車速検出器によって、現在位置検出装置7を構成してもよい。あるいは、それらの組み合わせによって、現在位置検出装置7を構成してもよい。
ここで、図2に、表示装置2の表示面2aとタッチパネル4の入力面4aの配置位置を例示する。図2の例では、表示装置2は統合インストルメントパネルを構成し、表示面2aは運転席正面に配置されている。
統合インストルメントパネルとは、例えば、メータ(車速計、回転計、等)、各種警報、ナビゲーション画像、各種装置(AV機器6等)の動作状況、車載カメラによる撮影映像を、統合的に表示可能な表示盤である。統合インストルメントパネルによれば、1種類または複数種類の情報がレイアウト表示され、また、表示する情報を切り替え可能である。情報のレイアウトおよび切り替えはユーザが操作可能であってもよい。なお、統合インストルメントパネルは、統合ダッシュボード、メータクラスタ、等とも称される。
なお、図2に2点鎖線で示すように、表示面2aはダッシュボード中央、すなわち運転席正面と助手席正面の間に配置されてもよい。
他方、タッチパネル4の入力面4aは、表示面2aとは別の場所に配置されている。図2の例では、入力面4aは、運転席横(助手席側)に、天井に向く姿勢で配置されている。なお、図2に2点鎖線で示すように、入力面4aはダッシュボードに、運転席後方に向く姿勢で配置されてもよい。入力面4aの配置場所は上記に限るものではない。
いずれの配置例においても、ユーザ(運転手)は、表示面2aと入力面4aとを同時に視界に入れるのが難しい。このため、従来であれば、入力操作時に表示面と入力面とを交互に見ることになるであろう。さらに、運転中は、車両前方を特に注視する必要がある。このような環境下においても情報表示装置1によれば、後述のように、操作性の向上等を図ることができる。
なお、情報表示装置1の利用環境は自動車等の移動体内に限定されるものではない。例えば、表示面2aおよび入力面4aは卓上に配置されてもよいし、あるいは、表示面2aを室内壁面に配置してもよい。すなわち、表示面2aと入力面4aとが離れるほど、表示面2aと入力面4aを同時に視界に入れるのが難しくなる。また、表示面2aが大きくなるほど、同様の傾向が生じる。
図3に、情報表示制御装置3のブロック図を例示する。図3の例によれば、情報表示制御装置3は、制御部11と、記憶部12と、接続部22,24,25,26,27とを含んでいる。
制御部11は、情報表示制御装置3における(換言すれば、情報表示装置1における)各種の処理を行う。例えば、制御部11は、タッチパネル4(図1参照)から入力された情報を解析し、その解析結果に応じた画像データを生成し、その画像データを表示装置2へ出力する。
ここでは、制御部11が中央演算処理部(例えば1つまたは複数のマイクロプロセッサで構成される)と主記憶部(例えばROM、RAM、フラッシュメモリ等の1つまたは複数の記憶装置で構成される)とによって構成される場合を例示する。この例によれば、主記憶部に格納された各種プログラム(換言すれば、アプリケーション)を中央演算処理部が実行することによって(換言すれば、ソフトウェアによって)、各種処理が実行される。各種処理は並列的に実行させることも可能である。なお、各種処理によって、それに対応した各種機能が実現される。
制御部11が実行するプログラムとして、入力解析、画像生成、ナビゲーション、AV再生、等のプログラムが挙げられる。
制御部11が実行するプログラムは、予め制御部11の主記憶部に格納されていてもよいし、あるいは、実行時に記憶部12から読み出されて主記憶部に格納されてもよい。主記憶部は、プログラムだけでなく各種データの格納にも利用される。また、主記憶部は、中央演算処理部がプログラムを実行する際の作業領域を提供する。また、主記憶部は、表示装置2に表示する画像を書き込むため画像保持部を提供する。画像保持部はビデオメモリまたはグラフィックメモリと称される場合もある。
なお、制御部11が行う処理の全部又は一部が、ハードウェア(例えば、特定の演算を行うように構成された演算回路等)として構成されていてもよい。
記憶部12は、各種情報を格納する。ここでは、記憶部12は、制御部11が利用する補助記憶部として設けられている。記憶部12は、例えば、ハードディスク装置、光ディスク、書き換え可能かつ不揮発性の半導体メモリ、等の記憶装置の1つ以上を利用して構成可能である。
記憶部12に格納される情報として、画像データ(アイコン、プロンプト、地図、等)、音声データ(操作音、通知音、効果音、ガイダンス音声、等)、AVデータ、等が挙げられる。
接続部22は、表示装置2用に設けられ、表示装置2と制御部11とを信号伝送可能に接続する。なお、表示装置2と制御部11との間の信号伝送は、有線、無線、またはそれらの組み合わせのいずれであってもよい。
接続部22は例えば配線である。また、接続部22は例えば配線接続用のコネクタを含んでもよく、この場合、表示装置2は接続相手となるコネクタを有する。
また、接続部22は例えば、制御部11から表示装置2へ伝送する信号を生成する信号生成回路を含んでもよい。具体的に、その信号生成回路は、制御部11で生成されたデジタル信号(制御指示、画像データ、等)を伝送するためのアナログ伝送信号を生成する。この場合、表示装置2は、接続部22の信号生成回路に対応した信号生成回路を有する。なお、表示装置2が制御部11へ向けて信号を伝送可能である場合、接続部22の信号生成回路は、表示装置2から送られてきたアナログ伝送信号から、制御部11が取り扱い可能なデジタル信号を生成する。
また、接続部22および表示装置2の信号生成回路は、上記アナログ伝送信号として無線信号を生成する構成であってもよい。この場合、接続部22および表示装置2はアンテナも含むことになる。
接続部24はタッチパネル4用に設けられ、接続部25はスピーカ5用に設けられ、接続部26はAV機器6用に設けられ、接続部27は現在位置検出装置7用に設けられている。これらの接続部24,25,26,27も、表示装置2用の接続部22と同様に構成可能である。
なお、スピーカ5用の接続部25の搭載は任意である。また、スピーカ5用の接続部25を搭載していても、スピーカ5を接続しない構成を採用してもよい。AV機器6用の接続部26と現在位置検出装置7の接続部27のそれぞれも同様である。
<プロンプト>
情報表示装置1では、表示面2aに表示するプロンプトに種々の工夫を施している。それを、図4を参照して説明する。なお、プロンプトは、指示物の入力面4a上の位置情報を表示面2aにおいて表現する描画要素であり、カーソル、ポインタ、等と称される場合もある。
図4の例によれば、タッチパネル4の入力面4aから指示物(ここでは指先)までの距離z0に対して、3つの閾値zth1,zth2,zth3が予め設定されている。但し、閾値の数は3つに限定されるものではない。なお、指示物の距離z0は、入力面4aの法線に沿った距離のことであり、指示物の高さz0と表現してもよい。
ここではzth1<zth2<zth3であり、例えば、zth1=1cm、zth2=2cm、zth3=3cmである。なお、zth1,zth2,zth3は不等間隔に設定してもよい。
3つの閾値zth1,zth2,zth3によって、指示物の距離z0に対して、5つの距離レベル(換言すれば、高さレベル)zlvl0,zlvl1,zlvl2,zlvl3,zlvl4が予め設定されている。すなわち、距離レベルzlvl0はz0=0に対応し、距離レベルzlvl1は0<z0<zth1に対応し、距離レベルzlvl2はzth1<z0<zth2に対応し、距離レベルzlvl3はzth2<z0<zth3に対応し、距離レベルzlvl4はzth3<z0に対応する。なお、z0=zth1を距離レベルzlvl1,zlvl2のいずれに含めるかは予め規定しておけばよい。z0=zth2およびz0=zth3も同様である。なお、図4の例では、z0=0に対して距離レベルzlvl0を割り当てているが、z0=0を距離レベルzlvl1に含めてもよい。
図4に示すように、各距離レベルzlvl0,zlvl1,zlvl2,zlvl3に対して、表現(換言すれば、見た目)の異なるプロンプト31が予め設定されている。図4の例では、距離レベルzlvl3,zlvl2には、写実的に描画された指先の画像(写真でもよい)が、プロンプト31の画像として割り当てられている。但し、距離レベルzlvl3のプロンプト31は、距離レベルzlvl2のプロンプト31よりも小さい。また、距離レベルzlvl1には、物を指し示す際に一般に行われる人差し指を突き出した状態の手を、線図で簡略化した手画像が、割り当てられている。また、距離レベルzlvl0には、距離レベルzlvl1の簡略化された手画像に背景枠を追加した画像が、割り当てられている。なお、図4の例では、指示物の距離z0が距離レベルzlvl4に該当する場合には、プロンプト31を表示しない。
このように、距離レベルzlvl0,zlvl1,zlvl2,zlvl3ごとに、プロンプト31の表現が異なっている。表現の相違は、表現要素が少なくとも1つが異なることによって、生じる。表現要素は例えば、大きさ、形状、色、模様、アニメーション表示である。このため、大きさと、形状と、色と、アニメーション表示とのうちの少なくとも1つの表現要素を、距離レベルzlvl0,zlvl1,zlvl2,zlvl3で変化させればよい。
図5に、プロンプト31の表現を指示物の距離z0に応じて変化させる処理S10のフローチャートを例示する。
図5の例によれば、ステップS11において、タッチパネル4(図1参照)が入力面4a上の空間に存在する指示物を検出し、制御部11(図1参照)がその検出結果である3次元位置情報を、接続部24(図1参照)を介してタッチパネル4から取得する。
そして、制御部11は、ステップS12において、3次元位置情報に基づき、指示物の入力面内位置を、表示装置2の表示面内位置に変換する(2次元位置変換処理)。ここで、図6に2次元位置変換処理の説明図を示す。
図6に示すように、入力面内位置は、入力面4aのうちで入力面4aの法線(図6ではz軸に平行な線である)に沿った指示物の直下位置のことである。換言すれば、指示物から入力面4aへ下ろした垂線と、入力面4aとの交点が、指示物の入力面内位置である。より具体的には図6の左部に示すように、指示物の位置の座標が(x0,y0,z0)である場合、入力面内位置の座標は(x0,y0,0)、換言すれば(x0,y0)である。
得られた入力面内位置(x0,y0)は、例えば予め規定された変換規則によって、表示装置2の表示面内位置(X0,Y0)に変換される。変換規則は変換式、変換テーブル、等によって具現化可能である。例えば入力面4aと表示面2aとが相似形(相似比をrとする)である場合、変換式はX0=x0×r、Y0=y0×rで与えられる。変換式を一般化すれば、X0=fx(x0,y0)、Y0=fy(x0,y0)で与えられる。また、表示面2aが曲面にデザインされている場合でも、その曲面デザインに応じて適切な変換式を規定することは可能である。
なお、図6では、入力面4aの左上頂点を仮想的なxyz座標系の原点に選び、入力面4aの横方向および縦方向にx軸およびy軸にそれぞれ設定し、入力面4aの法線方向にz軸を設定している。但し、座標系の設定はこれに限定されるものではない。例えば、入力面4aの中心に原点を設定してもよいし、あるいは、原点を入力面4aの上方に設定してもよい。しかし、どのような座標系も(直交座標系以外も含む)、図6に例示したxyz座標系に変換可能である。すなわち、図6の例示したxyz座標系であっても、一般性を失うことはない。また、図6では表示面2aに対しても同様にして、仮想的なXY座標を設定している。
制御部11は、ステップS13(図5参照)において、3次元位置情報に基づき、入力面4aと指示物との間の距離z0が、距離レベルzlvl0,zlvl1,zlvl2,zlvl3,zlvl4(図4参照)のいずれに該当するかを判別する(距離レベル判別処理)。
次に、制御部11は、ステップS14において、プロンプト31の表現を設定する(プロンプト表現設定処理)。特に、制御部11は、ステップS13で判別した距離レベルzlvl0,zlvl1,zlvl2,zlvl3,zlvl4を、予め定められた規則(図4参照)に照合することによって、プロンプト31の画像を選択する。これにより、指示物の距離レベルzlvl0,zlvl1,zlvl2,zlvl3,zlvl4に応じて、プロンプト31の表現を変化させることができる。
その後、制御部11は、ステップS15において、プロンプト31が、ステップS12で得られた表示面内位置に、ステップS14で設定された表現で以て表示されるように、表示画像データを生成する(表示画像データ生成処理)。例えば、プロンプト用のレイヤ(換言すれば、画像保持部)にプロンプト31の画像データを書き込み、そのプロンプト用レイヤと他のレイヤ(例えば地図画像データが書き込まれたレイヤ)とを合成することによって、表示画像データが生成される。その表示画像データは、表示装置2へ伝送され、表示装置2によって表示面2aに表示される。
そして、制御部11は、後続の検出タイミングで得られた3次元位置情報に対して、処理S10を繰り返す。
図7に、プロンプト31の表現の変化を例示する。図7から分かるように、指示物の距離z0が減少するに従って、すなわち指示物が入力面4aに近づくに従って、プロンプト31の表現が変化する。また、指示物の距離z0が増大する場合にも、すなわち指示物が入力面4aから遠ざかる場合にも、プロンプト31の表現が変化する。
なお、2次元位置変換ステップS12は、距離レベル判別ステップS13またはプロンプト表現設定ステップS14よりも後で実行してもよい。
また、図4の例によれば、指示物の距離z0が距離レベルzlvl4に該当する場合にはプロンプト31を表示しない。このため、3次元位置情報取得ステップS11の直後に距離レベル判別ステップS13を実行し、指示物の距離z0が距離レベルzlvl4に該当することが判別されたならば、その3次元位置情報については、残りのステップS12,S14,S15を実行しないようにしてもよい。
このようにプロンプト31の表現が指示物の距離z0に応じて変化するので、ユーザ(ここでは運転手)は、タッチパネル4に向けた手元を見なくても、表示面2aを通じて、タッチパネル4までの距離z0を把握することができる。このため、視線移動が減り、操作性が向上する。この点は、表示面2aと入力面4aとを同時に視界に入れるのが難しい環境下において、特に好適である。また、運転中に視線を車両前方から大きくそらすのを回避可能である。
また、プロンプト31の表現は、指示物の距離レベルごとに変化する。このため、プロンプトの大きさ等が連続的に変化する場合に比べて、プロンプト31の変化に気付きやすい。換言すれば、認知性に優れる。
また、プロンプトの大きさ等が連続的に変化する場合には、指示物の若干の揺れが、プロンプトの変化に過敏に反映されてしまう。しかし、プロンプト31のように指示物の距離レベルごとの変化であれば、そのような過敏な変化を抑制できる。このため、例えば車中のように揺れが生じる環境下においても、プロンプト31の表現が安定し、快適な操作性を提供可能である。
ここで、図4および図7の例では、各距離レベルzlvl1,zlvl2,zlvl3,zlvl4内においてプロンプト31の表現が変化しないものとした。これに対し、指示物の距離z0が或る距離レベルに属している間に、プロンプト31の表現を、指示物の距離z0に応じて変化させてもよい。図8にそのような例の説明図を示す。
図8の例では、距離レベルzlvl3において、プロンプト31の大きさを指示物の距離z0に応じて連続的に(換言すれば、無段階に)変化させる連続的変化を実行する。より具体的には、距離z0が連続的に小さくなるのに従って、プロンプト31を連続的に大きくする。逆に、距離z0が連続的に大きくなるのに従って、プロンプト31を連続的に小さくする。また、距離レベルzlvl2においても、距離レベルzlvl3と同様に、プロンプト31の大きさについて連続的変化を実行する。なお、距離レベルzlvl2,zlvl3間でプロンプト31の大きさが連続していてもよいし、あるいは、そのような連続性が無くてもよい。
また、図8の例では、距離z0が距離レベルzlvl3から距離レベルzlvl2に変化するのに伴って、および、距離z0が距離レベルzlvl2から距離レベルzlvl3に変化するのに伴って、プロンプト31の色を変化させる。
すなわち、距離レベルzlvl3では、距離レベルの変化に伴って変化させる表現要素とは異なる表現要素を、指示物の距離z0に応じて連続的に変化させる。距離レベルzlvl2においても同様である。このような連続的変化によれば、単一の距離レベル内においても指示物の距離z0の変化を把握しやすくなる。
また、上記のように、かかる連続的変化において変化させる表現要素を、距離レベルの変化に伴って変化させる表現要素とは異ならせている。このため、距離レベル単位でプロンプト31の表現を変化させることに起因した上記効果を損なうものではない。
図8の例では距離レベルzlvl1ではプロンプト31の大きさを変化させないものとしているが、距離レベルzlvl1内でプロンプト31の大きさを連続的に変化させてもよい。すなわち、距離レベルzlvl1,zlvl2,zlvl3のうちの一部または全部の距離レベルにおいて連続的変化を採用可能である。特に一部の距離レベルで連続的変化を採用した場合、全ての距離レベルで連続的変化を採用する場合に比べて、プロンプト31の描画処理にかかる負荷を軽減できる。
なお、図8の例とは異なり、大きさに代えてまたは加えて、他の表現要素を連続的に変化させてもよい。
<プロンプトの付加情報>
プロンプト31に付加情報を追加してもよい。付加情報の一例である距離情報について、図9を参照して説明する。図9の例では、指示物の距離z0が距離レベルzlvl1である場合に、距離情報32をプロンプト31に付加する。但し、他の距離レベルzlvl0,zlvl2,zlvl3において距離情報32を付加してもよい。
図9に例示の距離情報32は、帯状の図形であり、指示物の距離z0に応じて長さ(ここでは縦寸法)が変化する。かかる帯状の図形は、プロンプト31の背景として追加される。
帯状図形による距離情報32は、指示物の距離z0が小さいほど(すなわち、指示物が入力面4aに近いほど)、長くなる。例えば、図10に示すように、帯状図形の長さa(z0)はzth1/sを最大寸法とし、a(z0)=zth1/s−z0/sという式で与えられる。sは、距離z0と表示時の大きさとの変換係数である。なお、z0=zth1の際にも長さを有するように(図9参照)、オフセットを与えてもよい。また、ここでは幅(ここでは横寸法)は固定とするが、幅も距離z0に連動させてもよい。
図11に、距離情報32の変化を例示する。図11から分かるように、指示物の距離z0が減少するに従って、距離情報32である帯状図形が長くなる。逆に、指示物の距離z0が増大するに従って、帯状図形は短くなる。
図12に、距離情報32を追加する場合のフローチャートを例示する。図12の処理S20は、図5の処理S10にステップS21(付加情報設定処理)が追加されている。ステップS21では、制御部11は、指示物の距離z0に応じて、距離情報32である帯状図形の長さを設定する。そして、制御部11は、ステップS15において、距離情報32付きのプロンプト31を含んだ表示画像のデータを生成し、その表示画像が表示されるように表示装置2を制御する。
図13および図14に、距離情報32の他の例を示す。図13の例では、距離情報32は、矢印状の図形であり、矢印の長さが指示物の距離z0に応じて変化する。図14の例では、距離情報32は、指示物の距離z0に対応する数値である。なお、当該数値は、距離z0の絶対的な数値でなくてもよく、例えば、距離z0を、予め定められた規則で変換した相対的な数値であってもよい。また、図形表示と数値表示とを組み合わせて、距離情報32を構成してもよい。
距離情報32によれば、表示面2aを通じて、指示物の距離z0を、さらに把握しやすくなる。また、距離情報32を、入力面4aに最も近い距離レベルzlvl1において表示し、他の距離レベルzlvl0,zlvl2,zlvl3では表示しない場合(図9参照)、指示物が入力面4aに近いことに気付きやすくなる。このため、指示物の入力面4aへの接触をスムーズに行うことができる。
<プロンプト等の他の例>
以下に、プロンプト31等の他の例を説明する。なお、以下の例示は、それぞれを単独で採用してもよいし、種々に組み合わせることも可能である。
プロンプト表現設定処理S14(図5および図12を参照)において、プロンプト31の表現をプロンプト31の表示位置に応じて変化させるという位置連動条件を適用してもよい。例えば、次の第1〜第4の位置連動条件が挙げられる。
第1の位置連動条件は、プロンプト31を機能アイコン上に表示する場合、その機能アイコンに関連付けられている機能の種類に応じて、プロンプト31の表現を変化させる、という条件である。例えば、図15に示すように、プロンプト31がナビゲーション関連のアイコンと重なる場合は、指形状の表現を用いる。これに対し、図16に例示するように、プロンプト31がAV関連のアイコンと重なる場合は、音符形状の表現を用いる。
第2の位置連動条件は、プロンプト31をアイコン領域上に表示する場合と、プロンプト31を画面操作領域上に表示する場合とで、プロンプト31の表現を変化させる、という条件である。ここで、アイコン領域とは1つまたは複数のアイコンが配置された領域であり、図17および図18の画面例では、AV関連およびナビゲーション関連のアイコンが配置された画面右側の領域が、アイコン領域である。また、画面操作領域とはユーザが画面(換言すれば、表示内容)を操作可能な領域であり、表示内容操作領域と称してもよい。図17および図18の画面例では、中央部および左部からなる領域にスクロール等の操作が可能な地図画像が表示されており、この地図画像の領域が画面操作領域にあたる。第2の位置連動条件によれば、例えば、図17に示すようにプロンプト31をアイコン領域に表示する場合には線図の指画像を用い、図18に示すようにプロンプト31を画面操作領域に表示する場合は写実的な手画像を用いる。
第3の位置連動条件は、プロンプト31を操作許可アイコン(ユーザによる操作が許可されたアイコン)上に表示する場合と、プロンプト31を操作不許可アイコン(ユーザによる操作が許可されていないアイコン)上に表示する場合とで、プロンプト31の表現を変化させる、という条件である。例えば、多くの手順が予想される操作(例えば50音検索)を走行中に行うのは好ましくないので、そのような操作は、走行中は操作不許可に設定される。この場合、図19に例示するように、50音検索アイコンの位置にプロンプト31が存在する場合、そのプロンプト31は、通常よりも小さく、且つ、透明度を上げて、表示される。これに対し、図20に例示するように、停車中は50音検索アイコンは操作許可に設定され、当該アイコン上であってもプロンプト31を通常表現で表示する。
第4の位置連動条件は、プロンプト31を操作許可領域(ユーザによる操作が許可された領域)上に表示する場合と、プロンプト31を操作不許可領域(ユーザによる操作が許可されていない領域)上に表示する場合とで、プロンプト31の表現を変化させる、という条件である。例えば、図21に示すように、表示面2aにメータが表示されている場合、その表示領域は操作不許可領域に設定される。この場合、図21の例では、操作不許可領域においてプロンプト31は、指画像および手画像ではなく、十字印を丸で囲んだ形状で表示される。これに対し、図22に例示するように、操作許可領域では、プロンプト31を通常表現で表示する。なお、図22では、操作許可領域として、スクロール等の操作が可能な地図画像が表示された画面操作領域を例示しているが、操作許可領域は例えばアイコン領域であってもよい。
ここで、図23に例示するように、操作不許可領域から操作許可領域への進入方向が複数存在しうる場合、その進入方向に応じて、操作許可領域内でのプロンプト31の表現を設定してもよい(移動方向連動条件)。
位置連動条件を適用することにより、操作の確認に役立つ。なお、第1〜第4の位置連動条件のうちの1つだけを採用してもよいし、あるいは、第1〜第4の位置連動条件のうちの2つ以上を採用してもよい。
また、第1〜第4の位置連動条件は、指示物の距離z0に関わらず、適用可能である。換言すれば、z0=0の場合のみならずz0≠0の場合(指示物が入力面4aの上方に存在する場合)にも、第1〜第4の位置連動条件を適用することにより、指示物が入力面4aに接触する前に操作確認をすることができる。
また、プロンプト表現設定処理S14(図5および図12を参照)において、プロンプト31の表現を、指示物の入力面内位置の状態に応じて変化させるという面内状態連動条件を適用してもよい。具体的に図24の例では、入力面内位置が静止している場合には、通常の手画像のプロンプト31を表示し、これに対し、入力面内位置が移動している場合には、十字印を丸で囲んだ形状のプロンプト31を表示する。これによれば、表示面2aを通しての操作状況確認を容易化できる。
プロンプト31の画像は図24の例に限定されるものではない。但し、図24の例のように、指示物の入力面内位置が移動状態である場合に簡略な画像を採用することにより、プロンプト31の描画処理にかかる負荷を軽減できる。
面内状態連動条件は、指示物の距離z0に関わらず、適用可能である。特にz0=0の場合における適用は、指示物によって入力されるジェスチャ操作(スクロール操作、拡大縮小操作、回転操作、等)の開始および終了に伴って、プロンプト31の表現を変化させることが可能である。具体的には、図25の例では、スクロール操作の開始に伴ってプロンプト31の表現を変化させ、スクロール操作の終了に伴ってプロンプト31の表現を戻している。なお、図25では、z0=0の場合の距離情報32として、楕円図形を例示している。このように、プロンプト31の表現変化と入力面4a上でのジェスチャ操作とを関連させることにより、ジェスチャ操作の実行状況が確認しやすくなる。
図24に戻り、面内状態連動条件は、プロンプト31の付加情報にも適用可能である。すなわち、付加情報の他の例として、指示物の入力面内位置の状態を示す面内状態情報33がある。制御部11は、付加情報設定処理S21(図12参照)において、指示物の入力面内位置が移動している場合と静止している場合とで、面内状態情報33の表現を変化させる。図24には面内状態情報33として、指示物の移動方向を示す矢印状の図形と、背景枠とが例示されている。矢印状図形の長さは、固定であってもよいし、指示物の面内位置の移動量に応じて変化させてもよい。入力面内位置が静止している場合には面内状態情報33を付加せず、これに対し、入力面内位置が移動している場合には面内状態情報33をプロンプト31に付加する。これによれば、表示面2aを通しての操作状況確認を容易化できる。
図4および図9では指示物が指である場合に例示したが、指示物がスタイラスペンの場合におけるプロンプトの表現を、図26に例示する。なお、図26の例に、距離情報32(図9参照)と面内状態情報33(図24参照)の一方または両方を付加してもよい。
プロンプト表現設定処理S14(図5および図12を参照)において、指示物の種類に応じてプロンプト31の表現を変化させることにより、複数種類の指示物を使い分けることができ、便利である。例えば、ペン用プロンプト31によって指示できる粒度(換言すれば、分解能)を指用プロンプト31よりも小さく設定すれば、スタイラスペンを選択することにより、精細な画面に対しても操作性が向上する。また、指とスタイラスペンとの使い分けによって、動作モードが切り替わるようにしてもよい。例えば、指利用時には相対座標入力モードが設定され、ペン利用時には絶対座標入力モードが設定されてもよい。
図27に、スタイラスペンを利用する場合について、情報表示制御装置3のブロック図を例示する。図27の例によれば、図3の構成例に、ペン用の接続部28が追加されている。具体的には、スタイラスペンに固有の識別情報を組み込んでおき、その識別情報が接続部28を介して制御部11へ伝送される。これによれば、制御部11は、識別情報の入力がある場合には、スタイラスペンが利用されていることを判別可能である。他方、識別情報の入力がなければ場合には、指が利用されていることを判別可能である。また、識別情報自体を判別することによって、複数のスタイラスペンを判別することも可能である。
スタイラスペンへの識別情報の付与、および、接続部28による識別情報の取得は、例えば、無線タグ技術を応用することによって、実現可能である。
ここで、図28に、2つのタッチパネル4を情報表示装置1に接続した例を示す。この場合、タッチパネル4ごとに指示物が用いられる。すなわち、2つの指示物によって、情報表示装置1への入力操作が行われる。入力装置用接続部24には、2つの指示物のそれぞれの3次元位置情報が、各指示物用のタッチパネル4から入力される。なお、2つの入力装置4の一方または両方がタッチパネル以外の装置であってもよい。
なお、それぞれのタッチパネル4に接続部(接続部24に相当)が設けられる場合、それらの接続部を総称が上記の入力装置用接続部24にあたる。また、例えば2つのタッチパネル4が共に無線通信で情報表示装置1に接続される場合、入力装置用接続部24を1つの無線通信用信号生成回路で構成することも可能である。すなわち、2つのタッチパネル4に対して、接続部24は種々の構成を採りうる。
制御部11は、指示物ごとの3次元位置情報を取得し、2つの指示物のうちの少なくとも1つについて、上記のプロンプト表現設定処理S14(図5および図12を参照)を実行する。図29には、2つの指示物が同時に利用され、両方のプロンプト31にプロンプト表現設定処理S14が適用された場合の画面を例示する。また、2つの指示物のうちの少なくとも1つに対して、付加情報設定処理S21(図12参照)を実行してもよい。
同様にして3つ以上のタッチパネル4を接続して、3つ以上の指示物を利用することも可能である。なお、複数の指示物は同じ種類である必要はない。
ここで、図30に、表示面2aを2つの領域に分割し、一方のタッチパネル4を左画面用入力装置として利用し、他方のタッチパネル4を右画面用入力装置として利用する例を示す。また、図31に、いわゆるスプリットビュー画面の説明図を示す。スプリットビュー画面では、表示面2aを見る方向によって、見える画面が異なる。このため、例えば、一方のタッチパネル4は右側(ここでは運転席側)から見た画面用の入力装置として利用し、他方のタッチパネル4は左側(ここでは助手席側)から見た画面用の入力装置として利用することが可能である。
図31には、右側から見た画面ではプロンプト31の指画像を左向き(手首が右側に在り、人差し指が左側に在る)で表示し、左側から見た画面ではプロンプト31の指画像を右向き(手首が左側に在り、人差し指が右側に在る)で表示する例を図示している。これに対し、両方の指画像を同じ方向に向けてもよい。但し、図31の例によれば、指の向きが、表示面2aと座席との位置関係を反映しているので、プロンプト31を直感的に認識しやすい。図31における2つの指画像の向きは図29および図30の例にも応用可能である。
また、制御部11は、指示物の距離z0に応じて画面全体の色相を変化させてもよい(画面色相制御処理)。これによれば、プロンプト31を注視しなくても距離z0の変化を判別可能であり、それによりプロンプト31を探す時間を減らすことができる。このため、例えば、運転中に視線を長い時間、車両前方からそらすのを回避可能である。
また、制御部11は、指示物が入力面4aに接触した場合(すなわち距離z0=0になった場合)に、入力面4aを振動させる指示を、接続部24を介してタッチパネル4に与えてもよい。タッチパネル4は、入力面4aを振動させる機能を有している場合、その指示に従って入力面4aを振動させる。また、制御部11は、入力面4aを盛り上げる指示をタッチパネル4に与えてもよい。タッチパネル4は、入力面4aを盛り上げる機能を有している場合、その指示に従って入力面4aを盛り上げる。また、制御部11は通知音を、スピーカ5からまたはタッチパネル4のスピーカから、発生させてもよい。これらによれば、入力面4aを見なくても、さらには表示面2aを見なくても、入力面4aに接触したことが分かる。なお、上記3つの処理例を種々に組み合わせてもよい。
ここで、入力面4aの振動は、圧電素子等の振動素子を利用すれば実現可能である。また、入力面4aの盛り上げは、例えば、膨張素子を利用すれば実現可能である。膨張素子は、例えば、電解液の封止構造を有した素子によって実現可能である。具体的には、その電解液に電気を供給すると、素子内部に気体が発生し、それにより膨張する。なお、入力面4aの振動は、入力面4aの全体に発生させてもよいし、あるいは、指示物が接触した箇所を含む一部分に選択的に発生させてもよい。かかる点は入力面4aの盛り上げについても同様である。
なお、上記では入力装置4として静電容量方式の3Dタッチパネルを例示した。しかし、入力面4a上の空間に存在する指示物の3次元位置を検出する機能を有した装置であれば、検出方式、名称等に関わらず、入力装置4として採用可能である。
また、上記では表示装置2の表示面2aと入力装置4の入力面4aとが別の場所に配置される例を挙げた。しかし、入力面4aが表示面2a上に重ねられた構造にも、上記の各種工夫を採用可能である。
なお、本発明は、その発明の範囲内において、実施の形態を適宜、変形、省略することが可能である。
1 情報表示装置、2 表示装置、2a 表示面、3 情報表示制御装置、4 入力装置、4a 入力面、11 制御部、22 表示装置用接続部、24 入力装置用接続部、31 プロンプト、32 距離情報(付加情報)、33 面内状態情報(付加情報)、S11 3次元位置情報取得処理、S12 2次元位置変換処理、S13 距離レベル判別処理、S14 プロンプト表現設定処理、S15 表示画像データ生成処理、S21 付加情報設定処理、zlvl0,zlvl1,zlvl2,zlvl3,zlvl4 距離レベル。

Claims (18)

  1. 表示面を有する表示装置が接続される表示装置用接続部と、
    入力面上の空間に存在する指示物の3次元位置を検出する入力装置が接続され、前記入力装置から検出結果に関する3次元位置情報が入力される、入力装置用接続部と、
    前記3次元位置情報に基づき、前記入力面のうちで前記入力面の法線に沿った前記指示物の直下位置にあたる入力面内位置を、前記表示装置の表示面内位置に変換する2次元位置変換処理と、前記3次元位置情報に基づき、前記入力面から前記入力面の前記法線に沿った前記指示物までの距離が、予め定められた複数の距離レベルのうちのいずれに該当するかを判別する距離レベル判別処理と、前記距離レベル判別処理で判別した距離レベルに応じて、前記表示面に表示するプロンプトの表現を変化させるプロンプト表現設定処理と、前記プロンプトを、前記2次元位置変換処理で得られた前記表示面内位置に、前記プロンプト表現設定処理で設定された表現で、表示させるための表示画像データを生成する表示画像データ生成処理と、を行う制御部と
    を備える情報表示制御装置。
  2. 前記制御部は、前記プロンプト表現設定処理では、前記距離レベルの変化に伴って変化させる表現要素とは異なる表現要素を前記指示物の前記距離に応じて連続的に変化させる連続的変化を、前記複数の距離レベルのうちの少なくとも1つで実行する、請求項1に記載の情報表示制御装置。
  3. 前記制御部は、前記指示物の前記距離に応じて大きさが変化する図形と、前記指示物の前記距離に対応する数値と、のうちの少なくとも一方を距離情報として、前記プロンプトに付加する、請求項1または請求項2に記載の情報表示制御装置。
  4. 前記制御部は、前記プロンプトの表現を前記プロンプトの表示位置に応じて変化させるという位置連動条件を、前記プロンプト表現設定処理で適用する、請求項1〜請求項3のうちのいずれか1項に記載の情報表示制御装置。
  5. 前記位置連動条件は、
    前記プロンプトを機能アイコン上に表示する場合、前記機能アイコンに関連付けられている機能の種類に応じて、前記プロンプトの表現を変化させる、という第1の位置連動条件と、
    前記プロンプトをアイコン領域上に表示する場合と、前記プロンプトを画面操作領域上に表示する場合とで、前記プロンプトの表現を変化させる、という第2の位置連動条件と、
    前記プロンプトを操作許可アイコン上に表示する場合と、前記プロンプトを操作不許可アイコン上に表示する場合とで、前記プロンプトの表現を変化させる、という第3の位置連動条件と、
    前記プロンプトを操作許可領域上に表示する場合と、前記プロンプトを操作不許可領域上に表示する場合とで、前記プロンプトの表現を変化させる、という第4の位置連動条件と
    のうちの少なくとも1つを含む、請求項4に記載の情報表示制御装置。
  6. 前記制御部は、前記位置連動条件を前記指示物の前記距離に関わらず適用する、請求項4または請求項5に記載の情報表示制御装置。
  7. 前記第4の位置連動条件は、前記プロンプトの表現を、前記操作不許可領域から前記操作許可領域への進入方向に応じて変化させる、という移動方向連動条件を含む、請求項5または請求項6に記載の情報表示制御装置。
  8. 前記制御部は、前記プロンプト表現設定処理では、前記プロンプトの表現を前記指示物の種類に応じて変化させる、請求項1〜請求項7のうちのいずれか1項に記載の情報表示制御装置。
  9. 前記入力装置用接続部には、複数の指示物のそれぞれの前記3次元位置情報が各指示物用の入力装置から入力され、
    前記制御部は、前記複数の指示物のうちの少なくとも1つに対して前記プロンプト表現設定処理を行う、
    請求項1〜請求項8のうちのいずれか1項に記載の情報表示制御装置。
  10. 前記制御部は、前記プロンプト表現設定処理では、前記指示物の前記入力面内位置が移動している場合と、前記指示物の前記入力面内位置が静止している場合とで、前記プロンプトの表現を変化させる、請求項1〜請求項9のうちのいずれか1項に記載の情報表示制御装置。
  11. 前記制御部は、前記プロンプト表現設定処理では、前記指示物によって入力されるジェスチャ操作の開始および終了に伴って、前記プロンプトの表現を変化させる、請求項10に記載の情報表示制御装置。
  12. 前記制御部は、前記指示物の前記入力面内位置が移動している場合と、前記指示物の前記入力面内位置が静止している場合とで、前記入力面内位置の状態を示す情報であって前記プロンプトに付加する面内状態情報の表現を変化させる、請求項1〜請求項11のうちのいずれか1項に記載の情報表示制御装置。
  13. 前記制御部は、前記指示物の前記距離に応じて画面全体の色相を変化させる画面色相制御処理を行う、請求項1〜請求項12のうちのいずれか1項に記載の情報表示制御装置。
  14. 前記制御部は、前記指示物が前記入力面に接触した場合に、前記入力面を盛り上げる指示を前記入力装置に与える第1の処理と、前記入力面を振動させる指示を前記入力装置に与える第2の処理と、通知音を発生させる第3の処理とのうちの少なくとも1つを行う、請求項1〜請求項13のうちのいずれか1項に記載の情報表示制御装置。
  15. 前記表示面は前記入力面とは別の場所に配置されている、請求項1〜請求項14のうちのいずれか1項に記載の情報表示制御装置。
  16. 前記表示装置は移動体の統合インストルメントパネルである、請求項15に記載の情報表示制御装置。
  17. 請求項1〜請求項16のうちのいずれか1項に記載の情報表示制御装置と、
    前記情報表示制御装置の前記表示装置用接続部に接続された表示装置と
    を備える情報表示装置。
  18. (a)入力装置の入力面上の空間に存在する指示物の3次元位置情報を取得するステップと、
    (b)前記3次元位置情報に基づき、前記入力面のうちで前記入力面の法線に沿った前記指示物の直下位置にあたる入力面内位置を、表示装置の表示面内位置に変換するステップと、
    (c)前記3次元位置情報に基づき、前記入力面から前記入力面の前記法線に沿った前記指示物までの距離が、予め定められた複数の距離レベルのうちのいずれに該当するかを判別するステップと、
    (d)前記ステップ(c)で判別した距離レベルに応じて、前記表示装置の表示面に表示するプロンプトの表現を変化させるステップと、
    (e)前記プロンプトを、前記ステップ(b)で得られた前記表示面内位置に、前記ステップ(d)で設定された表現で、表示させるための表示画像データを生成するステップと
    を備える情報表示制御方法。
JP2013041399A 2013-03-04 2013-03-04 車載用情報表示制御装置、車載用情報表示装置および情報表示制御方法 Active JP6041708B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013041399A JP6041708B2 (ja) 2013-03-04 2013-03-04 車載用情報表示制御装置、車載用情報表示装置および情報表示制御方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013041399A JP6041708B2 (ja) 2013-03-04 2013-03-04 車載用情報表示制御装置、車載用情報表示装置および情報表示制御方法

Publications (2)

Publication Number Publication Date
JP2014170339A true JP2014170339A (ja) 2014-09-18
JP6041708B2 JP6041708B2 (ja) 2016-12-14

Family

ID=51692701

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013041399A Active JP6041708B2 (ja) 2013-03-04 2013-03-04 車載用情報表示制御装置、車載用情報表示装置および情報表示制御方法

Country Status (1)

Country Link
JP (1) JP6041708B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021068000A (ja) * 2019-10-18 2021-04-30 株式会社東海理化電機製作所 制御装置、プログラム、及びシステム

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07271501A (ja) * 1994-03-31 1995-10-20 Wacom Co Ltd 表示画面における表示物の表示方法
JPH0962479A (ja) * 1995-08-22 1997-03-07 Nissin Electric Co Ltd 監視制御装置
JPH10207441A (ja) * 1997-01-24 1998-08-07 Japan Radio Co Ltd カーソル表示制御装置
JPH10274539A (ja) * 1997-03-31 1998-10-13 Fujitsu Ten Ltd ナビゲーション装置
JP2004013314A (ja) * 2002-06-04 2004-01-15 Fuji Xerox Co Ltd 位置測定用入力支援装置
JP2007114035A (ja) * 2005-10-20 2007-05-10 Denso Corp 車両用表示装置
JP2010061224A (ja) * 2008-09-01 2010-03-18 Honda Motor Co Ltd 自動車用入出力装置
JP2010181978A (ja) * 2009-02-03 2010-08-19 Seiko Epson Corp 共同作業装置及び共同作業の制御方法
JP2010205223A (ja) * 2009-03-06 2010-09-16 Seiko Epson Corp 仮想対象に対するジェスチャーに従う制御を行うシステム及び装置
JP2012033060A (ja) * 2010-07-30 2012-02-16 Sony Corp 情報処理装置、表示制御方法及び表示制御プログラム
JP2012194843A (ja) * 2011-03-17 2012-10-11 Sony Corp 電子機器、情報処理方法、プログラム、及び電子機器システム
WO2012164988A1 (ja) * 2011-05-30 2012-12-06 本田技研工業株式会社 入力装置

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07271501A (ja) * 1994-03-31 1995-10-20 Wacom Co Ltd 表示画面における表示物の表示方法
JPH0962479A (ja) * 1995-08-22 1997-03-07 Nissin Electric Co Ltd 監視制御装置
JPH10207441A (ja) * 1997-01-24 1998-08-07 Japan Radio Co Ltd カーソル表示制御装置
JPH10274539A (ja) * 1997-03-31 1998-10-13 Fujitsu Ten Ltd ナビゲーション装置
JP2004013314A (ja) * 2002-06-04 2004-01-15 Fuji Xerox Co Ltd 位置測定用入力支援装置
JP2007114035A (ja) * 2005-10-20 2007-05-10 Denso Corp 車両用表示装置
JP2010061224A (ja) * 2008-09-01 2010-03-18 Honda Motor Co Ltd 自動車用入出力装置
JP2010181978A (ja) * 2009-02-03 2010-08-19 Seiko Epson Corp 共同作業装置及び共同作業の制御方法
JP2010205223A (ja) * 2009-03-06 2010-09-16 Seiko Epson Corp 仮想対象に対するジェスチャーに従う制御を行うシステム及び装置
JP2012033060A (ja) * 2010-07-30 2012-02-16 Sony Corp 情報処理装置、表示制御方法及び表示制御プログラム
JP2012194843A (ja) * 2011-03-17 2012-10-11 Sony Corp 電子機器、情報処理方法、プログラム、及び電子機器システム
US20120281018A1 (en) * 2011-03-17 2012-11-08 Kazuyuki Yamamoto Electronic device, information processing method, program, and electronic device system
WO2012164988A1 (ja) * 2011-05-30 2012-12-06 本田技研工業株式会社 入力装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021068000A (ja) * 2019-10-18 2021-04-30 株式会社東海理化電機製作所 制御装置、プログラム、及びシステム

Also Published As

Publication number Publication date
JP6041708B2 (ja) 2016-12-14

Similar Documents

Publication Publication Date Title
JP5430782B2 (ja) 表示入力装置および車載情報機器
JP5312655B2 (ja) 表示入力装置および車載情報装置
JP5355683B2 (ja) 表示入力装置および車載情報機器
JP5777745B2 (ja) 表示入力装置及びナビゲーションシステム
JP5704408B2 (ja) 操作入力システム
JP5561092B2 (ja) 入力装置、入力制御システム、情報処理方法及びプログラム
JPWO2010064389A1 (ja) 表示入力装置
JP2019175449A (ja) 情報処理装置、情報処理システム、移動体、情報処理方法、及びプログラム
US20150009136A1 (en) Operation input device and input operation processing method
JP5933468B2 (ja) 情報表示制御装置、情報表示装置および情報表示制御方法
JP6041708B2 (ja) 車載用情報表示制御装置、車載用情報表示装置および情報表示制御方法
JP6147357B2 (ja) 表示制御装置及び表示制御方法
JP5889230B2 (ja) 情報表示制御装置、情報表示装置および情報表示制御方法
JP5984718B2 (ja) 車載情報表示制御装置、車載情報表示装置および車載表示装置の情報表示制御方法
JP5950851B2 (ja) 情報表示制御装置、情報表示装置および情報表示制御方法
JP6180306B2 (ja) 表示制御装置及び表示制御方法
JP2014052817A (ja) 画像表示方法および画像表示装置
JP2018063521A (ja) 表示制御システムおよび表示制御プログラム
JP5423279B2 (ja) ユーザインタフェース装置
JP2013134717A (ja) 操作入力システム
KR20140135081A (ko) 이기종 플랫폼에서 활용 가능한 전자해도 뷰어 컴포넌트를 이용한 휴대용 전자해도 표시 시스템 및 그 전자해도 표시 방법
WO2017168988A1 (ja) 表示処理装置、及び表示処理プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150205

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20151216

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160202

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160330

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160628

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160818

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161011

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161108

R150 Certificate of patent or registration of utility model

Ref document number: 6041708

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250