JP6041708B2 - In-vehicle information display control device, in-vehicle information display device, and information display control method - Google Patents
In-vehicle information display control device, in-vehicle information display device, and information display control method Download PDFInfo
- Publication number
- JP6041708B2 JP6041708B2 JP2013041399A JP2013041399A JP6041708B2 JP 6041708 B2 JP6041708 B2 JP 6041708B2 JP 2013041399 A JP2013041399 A JP 2013041399A JP 2013041399 A JP2013041399 A JP 2013041399A JP 6041708 B2 JP6041708 B2 JP 6041708B2
- Authority
- JP
- Japan
- Prior art keywords
- prompt
- display
- expression
- input
- distance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 66
- 230000014509 gene expression Effects 0.000 claims description 104
- 230000008569 process Effects 0.000 claims description 52
- 230000008859 change Effects 0.000 claims description 27
- 238000006243 chemical reaction Methods 0.000 claims description 20
- 238000001514 detection method Methods 0.000 claims description 19
- 238000012545 processing Methods 0.000 claims description 19
- 238000013459 approach Methods 0.000 claims description 3
- 238000009434 installation Methods 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 9
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 7
- 241001422033 Thestylus Species 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 238000012790 confirmation Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 230000008054 signal transmission Effects 0.000 description 2
- 210000000707 wrist Anatomy 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000019771 cognition Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 239000003792 electrolyte Substances 0.000 description 1
- 239000008151 electrolyte solution Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000007789 sealing Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Description
本発明は、車載用情報表示制御装置、車載用情報表示装置および情報表示制御方法に関する。 The present invention relates to an in- vehicle information display control device, an in- vehicle information display device, and an information display control method.
下記特許文献１には、プロンプター方式と称される遠隔操作技術を採用したカーナビゲーション装置が紹介されている。このカーナビゲーション装置では、表示装置が車両のセンターコンソールの上部に取り付けられ、タッチパネルが該センターコンソールの下部に取り付けられている。さらに、タッチパネル上を移動する手を撮影するためのカメラが設けられている。タッチパネルの表面に指を当てて上下左右に移動させると、カメラが、操作する手を含むタッチパネルの表面を撮影する。撮影映像から手の画像が抽出され、その手画像がメインの画像に重畳される。タッチパネル上での指の移動に併せて、表示画面上を手画像が移動するので、あたかもタッチパネル付き画面を操作しているような感覚が得られる。
The following
下記特許文献２には、パーソナルコンピュータの使用環境において、タブレット上にペンで筆記することによって入力操作を行う技術が紹介されている。特にペンの３次元位置を検出する種々の技術が紹介されている。また、画面上のカーソルに影を付け、その影を、タブレット上方のペンの高さに応じて変化させることにより、手元を見なくても実際のペンが置かれている空間位置を把握できるとしている。 Patent Document 2 below introduces a technique for performing an input operation by writing with a pen on a tablet in a use environment of a personal computer. In particular, various techniques for detecting the three-dimensional position of the pen have been introduced. In addition, by adding a shadow to the cursor on the screen and changing the shadow according to the height of the pen above the tablet, it is possible to grasp the spatial position where the actual pen is placed without looking at the hand Yes.
特許文献１の技術では、カメラで撮影した画像は平面画像であるので、手の位置はその平面画像における２次元位置でしか識別できない。また、カメラによる撮影は、指がタッチパネルに接触している時に限られている。すなわち、手の２次元位置情報しか利用されない。
In the technique of
他方、特許文献２の技術では、ペンの３次元位置を検出することができ、ペンの高さをカーソルの影に反映させることによって画面上でペンの高さを把握できる。しかし、特許文献２の技術はパーソナルコンピュータの使用環境が前提であるので、特許文献２の技術をそのまま他の使用環境で採用すると不便が生じる可能性がある。 On the other hand, in the technique of Patent Document 2, the three-dimensional position of the pen can be detected, and the height of the pen can be grasped on the screen by reflecting the height of the pen on the shadow of the cursor. However, since the technique of Patent Document 2 is premised on the use environment of a personal computer, there is a possibility that inconvenience may occur if the technique of Patent Document 2 is directly adopted in another use environment.
本発明は、指示物の３次元位置情報を使って画面表示を工夫することにより、操作性の向上等を図ることを目的とする。 An object of the present invention is to improve operability by devising a screen display using the three-dimensional position information of an indicator.
本発明の一形態に係る車載用情報表示制御装置は、表示装置用接続部と、入力装置用接続部と、制御部とを含む。表示装置用接続部は、車両内に配置され表示面を有する表示装置が接続される。入力装置用接続部は、車両内で表示面とは別の場所に配置されている入力面上の空間に存在する指示物の３次元位置を検出する入力装置が接続され、入力装置から検出結果に関する３次元位置情報が入力される。制御部は、２次元位置変換処理と、距離レベル判別処理と、プロンプト表現設定処理と、表示画像データ生成処理とを行う。２次元位置変換処理では、制御部は、３次元位置情報に基づき、入力面のうちで入力面の法線に沿った指示物の直下位置にあたる入力面内位置を、表示装置の表示面内位置に変換する。距離レベル判別処理では、制御部は、３次元位置情報に基づき、入力面から入力面の法線に沿った指示物までの距離が、予め定められた複数の距離レベルのうちのいずれに該当するかを判別する。プロンプト表現設定処理では、制御部は、距離レベル判別処理で判別した距離レベルに応じて、表示面に表示するプロンプトの表現を変化させる。表示画像データ生成処理では、制御部は、プロンプトを、２次元位置変換処理で得られた表示面内位置に、プロンプト表現設定処理で設定された表現で、表示させるための表示画像データを生成する。制御部は、プロンプトの表現をプロンプトの表示位置に応じて変化させるという位置連動条件を、プロンプト表現設定処理で適用する。位置連動条件は、プロンプトを操作許可領域上に表示する場合と、プロンプトを操作不許可領域上に表示する場合とで、プロンプトの表現を変化させる、という条件を含む。表示装置はメータ表示が可能な統合インストルメントパネルであり、メータが表示されている領域を操作不許可領域とする。 An in-vehicle information display control device according to an aspect of the present invention includes a display device connection unit, an input device connection unit, and a control unit. The display device connecting portion is connected to a display device disposed in the vehicle and having a display surface. The input device connection unit is connected to an input device that detects a three-dimensional position of an indicator existing in a space on the input surface that is arranged at a location different from the display surface in the vehicle. 3D position information is input. The control unit performs a two-dimensional position conversion process, a distance level determination process, a prompt expression setting process, and a display image data generation process. In the two-dimensional position conversion process, the control unit calculates the position in the input surface corresponding to the position directly below the indicator along the normal of the input surface on the input surface based on the three-dimensional position information. Convert to In the distance level determination process, the control unit corresponds to any of a plurality of predetermined distance levels, based on the three-dimensional position information, the distance from the input surface to the indicator along the normal line of the input surface. Is determined. In the prompt expression setting process, the control unit changes the expression of the prompt displayed on the display surface according to the distance level determined in the distance level determination process. In the display image data generation process, the control unit generates display image data for displaying the prompt at the position in the display surface obtained by the two-dimensional position conversion process with the expression set in the prompt expression setting process. . The control unit applies a position interlocking condition for changing the prompt expression according to the display position of the prompt in the prompt expression setting process. The position interlocking condition includes a condition that the expression of the prompt is changed depending on whether the prompt is displayed on the operation permission area or the prompt is displayed on the operation disapproval area. The display device is an integrated instrument panel that can display a meter, and an area in which the meter is displayed is an operation non-permitted area.
上記一形態によれば、プロンプトの表現が指示物の距離に応じて変化する。このため、ユーザは、入力面に向けた手元を見なくても、表示面を通じて、入力面までの距離を把握することができる。それにより、視線移動が減り、操作性が向上する。プロンプトの表現は、指示物の距離レベルごとに変化する。このため、プロンプトの大きさ等が連続的に変化する場合に比べて、プロンプトの変化に気付きやすい。また、例えば揺れが生じる環境下においても、プロンプトの表現が安定し、快適な操作性を提供可能である。また、位置連動条件の適用によって、操作の確認に役立つ。
According to the above aspect, the prompt expression changes according to the distance of the indicator. For this reason, the user can grasp the distance to the input surface through the display surface without looking at the hand toward the input surface. Thereby, line-of-sight movement is reduced and operability is improved. The expression of the prompt changes with the distance level of the indicator. For this reason, it is easier to notice changes in the prompt than when the size of the prompt changes continuously. In addition, for example, even in an environment in which shaking occurs, the prompt expression is stable and comfortable operability can be provided. In addition, application of position interlocking conditions helps to confirm the operation.
本発明の目的、特徴および利点は、以下の詳細な説明と添付図面とによって、より明白となる。 The objects, features and advantages of the present invention will become more apparent from the following detailed description and the accompanying drawings.
＜全体構成の概略＞
図１に、実施の形態に係る情報表示装置１のブロック図を例示する。図１では情報表示装置１が、移動体の一例である自動車に搭載される場合を例示しており、そのような使用環境下で情報表示装置１に接続される種々の装置も例示している。なお、情報表示装置１は、自動車以外の車両（例えば鉄道車両）に搭載されてもよいし、車両以外の移動体（例えば飛行機、船）に搭載されてもよい。
<Overview of overall configuration>
FIG. 1 illustrates a block diagram of an
図１の例によれば、情報表示装置１は表示装置２と情報表示制御装置３とに大別され、情報表示制御装置３に入力装置４と、スピーカ５と、ＡＶ（Audio-Visual）機器６と、現在位置検出装置７とが接続されている。なお、スピーカ５の接続は任意であり、ＡＶ機器６と現在位置検出装置７のそれぞれも同様である。
According to the example of FIG. 1, the
表示装置２は、各種情報を表示する。表示装置２は、例えば、複数の画素がマトリクス状に配置されることによって構成された表示面２ａと、情報表示制御装置３から取得した表示画像データに基づいて各画素を駆動する（換言すれば、各画素の表示状態を制御する）駆動装置と、を含んでいる。なお、表示画像データは、予め定められた信号フォーマットの映像信号（デジタル信号でもアナログ信号でもよい）として、情報表示制御装置３から表示装置２に供給される。表示装置２で表示する画像は、静止画像の場合もあるし、動画像の場合もあるし、さらには静止画像と動画像の組み合わせの場合もある。
The display device 2 displays various information. The display device 2 drives each pixel based on, for example, a
表示装置２は、例えば液晶表示装置によって構成可能である。この例によれば、表示パネル（ここでは液晶パネル）の表示領域が表示面２ａに対応し、表示パネルに外付けされた駆動回路が上記駆動装置に対応する。なお、駆動回路の一部が表示パネルに内蔵される場合もある。液晶表示装置の他に、エレクトロルミネセンス（ＥＬ）表示装置、プラズマディスプレイ装置、等によって、表示装置２を構成することも可能である。
The display device 2 can be configured by a liquid crystal display device, for example. According to this example, the display area of the display panel (here, the liquid crystal panel) corresponds to the
情報表示制御装置３は、各種の処理を行う。具体的には、情報表示制御装置３は、表示装置２およびスピーカ５に供給する信号を生成する。また、情報表示制御装置３は、入力装置４から入力される情報（指示を含む）を解析し、解析結果に応じた各種処理（例えば表示装置２の制御）を行う。また、情報表示制御装置３は、ＡＶ機器６から入力されるＡＶ信号を表示装置２およびスピーカ５向けに加工する。また、情報表示制御装置３は、ユーザ指示に応じてＡＶ機器６を制御する。また、情報表示制御装置３は、現在位置検出装置７から入力される情報を使って、ナビゲーション機能等を実現する。
The information
入力装置４は、ユーザから情報（指示を含む）を受け付ける。入力装置４は、例えば、ユーザが入力のために用いる指示物を検出する検出部と、検出部によって検出された結果を検出信号として情報表示制御装置３へ出力する検出信号出力部と、を含んでいる。
The
特に、入力装置４は、入力面４ａを有し、入力面４ａ上の空間に存在する指示物の３次元位置を検出し、検出結果に関する３次元位置情報を出力する。ここでは、そのような３次元位置検出機能を有する入力装置４として、非接触型（３次元（３Ｄ）型とも称される）のタッチパネルを例示する。非接触型タッチパネルとして種々の方式が開発されているが、例えば、静電容量方式の一つである投影容量方式が知られている。以下では入力装置４をタッチパネル４と称する場合がある。なお、タッチパネルはタッチパッドと称される場合もある。
In particular, the
タッチパネル４の入力面４ａにはセンサが設けられており、各センサの出力信号の状態から、入力面４ａ上および入力面４ａ上方における指示物の３次元位置を特定可能である。特定された３次元位置は例えば、入力面４ａに予め設定された３次元座標上の座標データによって表現される。この場合、入力面４ａ上で指示物を移動させると指示物の位置を示す座標データが変化するので、連続的に取得される一連の座標データによって指示物の移動を検出可能である。なお、座標以外の手法によって指示物の３次元位置情報を表現してもよい。
A sensor is provided on the
タッチパネル４は、指示物の３次元位置の検出だけでなく、入力面４ａに対する指示物の押圧力を検出可能な構成を採用してもよい。
The
タッチパネル４は情報表示装置１専用であってもよいし、あるいは、汎用の情報端末機に搭載されているタッチパネルをタッチパネル４として利用してもよい。
The
なお、入力に用いる上記指示物が、ユーザの指（より具体的には、指先）である場合を例示する。但し、例えばスタイラスペン（タッチペンとも称される）等の道具を指示物として利用してもよい。 In addition, the case where the said instruction | indication used for input is a user's finger | toe (specifically fingertip) is illustrated. However, a tool such as a stylus pen (also referred to as a touch pen) may be used as an indicator.
スピーカ５は、聴覚的情報を出力する。例えば、ＣＤ等の音声、操作音、通知音、効果音、ガイダンス音声、等がスピーカ５から出力される。ＡＶ機器６は例えば、ＣＤ、ＤＶＤ、ＳＤメモリカード等のメディアに記録されているＡＶデータを再生する。
The
現在位置検出装置７は、自動車の現在位置を検出する。現在位置検出装置７は、例えば、ＧＰＳ（Global Positioning System）受信装置である。ＧＰＳ受信装置は、ＧＰＳ受信用のアンテナを介してＧＰＳ衛星から受信した情報に基づいて自車位置の現在位置を取得する。なお、ＧＰＳに代えて、加速度センサ、ジャイロまたは車速検出器によって、現在位置検出装置７を構成してもよい。あるいは、それらの組み合わせによって、現在位置検出装置７を構成してもよい。
The current
ここで、図２に、表示装置２の表示面２ａとタッチパネル４の入力面４ａの配置位置を例示する。図２の例では、表示装置２は統合インストルメントパネルを構成し、表示面２ａは運転席正面に配置されている。
Here, FIG. 2 illustrates the arrangement positions of the
統合インストルメントパネルとは、例えば、メータ（車速計、回転計、等）、各種警報、ナビゲーション画像、各種装置（ＡＶ機器６等）の動作状況、車載カメラによる撮影映像を、統合的に表示可能な表示盤である。統合インストルメントパネルによれば、１種類または複数種類の情報がレイアウト表示され、また、表示する情報を切り替え可能である。情報のレイアウトおよび切り替えはユーザが操作可能であってもよい。なお、統合インストルメントパネルは、統合ダッシュボード、メータクラスタ、等とも称される。
The integrated instrument panel can, for example, display meters (vehicle speedometers, tachometers, etc.), various alarms, navigation images, operating status of various devices (
なお、図２に２点鎖線で示すように、表示面２ａはダッシュボード中央、すなわち運転席正面と助手席正面の間に配置されてもよい。
2, the
他方、タッチパネル４の入力面４ａは、表示面２ａとは別の場所に配置されている。図２の例では、入力面４ａは、運転席横（助手席側）に、天井に向く姿勢で配置されている。なお、図２に２点鎖線で示すように、入力面４ａはダッシュボードに、運転席後方に向く姿勢で配置されてもよい。入力面４ａの配置場所は上記に限るものではない。
On the other hand, the
いずれの配置例においても、ユーザ（運転手）は、表示面２ａと入力面４ａとを同時に視界に入れるのが難しい。このため、従来であれば、入力操作時に表示面と入力面とを交互に見ることになるであろう。さらに、運転中は、車両前方を特に注視する必要がある。このような環境下においても情報表示装置１によれば、後述のように、操作性の向上等を図ることができる。
In any arrangement example, it is difficult for the user (driver) to put the
なお、情報表示装置１の利用環境は自動車等の移動体内に限定されるものではない。例えば、表示面２ａおよび入力面４ａは卓上に配置されてもよいし、あるいは、表示面２ａを室内壁面に配置してもよい。すなわち、表示面２ａと入力面４ａとが離れるほど、表示面２ａと入力面４ａを同時に視界に入れるのが難しくなる。また、表示面２ａが大きくなるほど、同様の傾向が生じる。
The usage environment of the
図３に、情報表示制御装置３のブロック図を例示する。図３の例によれば、情報表示制御装置３は、制御部１１と、記憶部１２と、接続部２２，２４，２５，２６，２７とを含んでいる。
FIG. 3 illustrates a block diagram of the information
制御部１１は、情報表示制御装置３における（換言すれば、情報表示装置１における）各種の処理を行う。例えば、制御部１１は、タッチパネル４（図１参照）から入力された情報を解析し、その解析結果に応じた画像データを生成し、その画像データを表示装置２へ出力する。
The
ここでは、制御部１１が中央演算処理部（例えば１つまたは複数のマイクロプロセッサで構成される）と主記憶部（例えばＲＯＭ、ＲＡＭ、フラッシュメモリ等の１つまたは複数の記憶装置で構成される）とによって構成される場合を例示する。この例によれば、主記憶部に格納された各種プログラム（換言すれば、アプリケーション）を中央演算処理部が実行することによって（換言すれば、ソフトウェアによって）、各種処理が実行される。各種処理は並列的に実行させることも可能である。なお、各種処理によって、それに対応した各種機能が実現される。
Here, the
制御部１１が実行するプログラムとして、入力解析、画像生成、ナビゲーション、ＡＶ再生、等のプログラムが挙げられる。
Examples of programs executed by the
制御部１１が実行するプログラムは、予め制御部１１の主記憶部に格納されていてもよいし、あるいは、実行時に記憶部１２から読み出されて主記憶部に格納されてもよい。主記憶部は、プログラムだけでなく各種データの格納にも利用される。また、主記憶部は、中央演算処理部がプログラムを実行する際の作業領域を提供する。また、主記憶部は、表示装置２に表示する画像を書き込むため画像保持部を提供する。画像保持部はビデオメモリまたはグラフィックメモリと称される場合もある。
The program executed by the
なお、制御部１１が行う処理の全部又は一部が、ハードウェア（例えば、特定の演算を行うように構成された演算回路等）として構成されていてもよい。
Note that all or part of the processing performed by the
記憶部１２は、各種情報を格納する。ここでは、記憶部１２は、制御部１１が利用する補助記憶部として設けられている。記憶部１２は、例えば、ハードディスク装置、光ディスク、書き換え可能かつ不揮発性の半導体メモリ、等の記憶装置の１つ以上を利用して構成可能である。
The
記憶部１２に格納される情報として、画像データ（アイコン、プロンプト、地図、等）、音声データ（操作音、通知音、効果音、ガイダンス音声、等）、ＡＶデータ、等が挙げられる。
Examples of information stored in the
接続部２２は、表示装置２用に設けられ、表示装置２と制御部１１とを信号伝送可能に接続する。なお、表示装置２と制御部１１との間の信号伝送は、有線、無線、またはそれらの組み合わせのいずれであってもよい。
The
接続部２２は例えば配線である。また、接続部２２は例えば配線接続用のコネクタを含んでもよく、この場合、表示装置２は接続相手となるコネクタを有する。
The
また、接続部２２は例えば、制御部１１から表示装置２へ伝送する信号を生成する信号生成回路を含んでもよい。具体的に、その信号生成回路は、制御部１１で生成されたデジタル信号（制御指示、画像データ、等）を伝送するためのアナログ伝送信号を生成する。この場合、表示装置２は、接続部２２の信号生成回路に対応した信号生成回路を有する。なお、表示装置２が制御部１１へ向けて信号を伝送可能である場合、接続部２２の信号生成回路は、表示装置２から送られてきたアナログ伝送信号から、制御部１１が取り扱い可能なデジタル信号を生成する。
The
また、接続部２２および表示装置２の信号生成回路は、上記アナログ伝送信号として無線信号を生成する構成であってもよい。この場合、接続部２２および表示装置２はアンテナも含むことになる。
Further, the
接続部２４はタッチパネル４用に設けられ、接続部２５はスピーカ５用に設けられ、接続部２６はＡＶ機器６用に設けられ、接続部２７は現在位置検出装置７用に設けられている。これらの接続部２４，２５，２６，２７も、表示装置２用の接続部２２と同様に構成可能である。
The
なお、スピーカ５用の接続部２５の搭載は任意である。また、スピーカ５用の接続部２５を搭載していても、スピーカ５を接続しない構成を採用してもよい。ＡＶ機器６用の接続部２６と現在位置検出装置７の接続部２７のそれぞれも同様である。
In addition, mounting of the
＜プロンプト＞
情報表示装置１では、表示面２ａに表示するプロンプトに種々の工夫を施している。それを、図４を参照して説明する。なお、プロンプトは、指示物の入力面４ａ上の位置情報を表示面２ａにおいて表現する描画要素であり、カーソル、ポインタ、等と称される場合もある。
<Prompt>
In the
図４の例によれば、タッチパネル４の入力面４ａから指示物（ここでは指先）までの距離ｚ０に対して、３つの閾値ｚｔｈ１，ｚｔｈ２，ｚｔｈ３が予め設定されている。但し、閾値の数は３つに限定されるものではない。なお、指示物の距離ｚ０は、入力面４ａの法線に沿った距離のことであり、指示物の高さｚ０と表現してもよい。
According to the example of FIG. 4, three threshold values zth1, zth2, and zth3 are set in advance for the distance z0 from the
ここではｚｔｈ１＜ｚｔｈ２＜ｚｔｈ３であり、例えば、ｚｔｈ１＝１ｃｍ、ｚｔｈ２＝２ｃｍ、ｚｔｈ３＝３ｃｍである。なお、ｚｔｈ１，ｚｔｈ２，ｚｔｈ３は不等間隔に設定してもよい。 Here, zth1 <zth2 <zth3, for example, zth1 = 1 cm, zth2 = 2 cm, and zth3 = 3 cm. Note that zth1, zth2, and zth3 may be set at unequal intervals.
３つの閾値ｚｔｈ１，ｚｔｈ２，ｚｔｈ３によって、指示物の距離ｚ０に対して、５つの距離レベル（換言すれば、高さレベル）ｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３，ｚｌｖｌ４が予め設定されている。すなわち、距離レベルｚｌｖｌ０はｚ０＝０に対応し、距離レベルｚｌｖｌ１は０＜ｚ０＜ｚｔｈ１に対応し、距離レベルｚｌｖｌ２はｚｔｈ１＜ｚ０＜ｚｔｈ２に対応し、距離レベルｚｌｖｌ３はｚｔｈ２＜ｚ０＜ｚｔｈ３に対応し、距離レベルｚｌｖｌ４はｚｔｈ３＜ｚ０に対応する。なお、ｚ０＝ｚｔｈ１を距離レベルｚｌｖｌ１，ｚｌｖｌ２のいずれに含めるかは予め規定しておけばよい。ｚ０＝ｚｔｈ２およびｚ０＝ｚｔｈ３も同様である。なお、図４の例では、ｚ０＝０に対して距離レベルｚｌｖｌ０を割り当てているが、ｚ０＝０を距離レベルｚｌｖｌ１に含めてもよい。 Five distance levels (in other words, height levels) zlvl0, zlvl1, zlvl2, zlvl3, and zlvl4 are set in advance with respect to the distance z0 of the indicator by the three threshold values zth1, zth2, and zth3. That is, the distance level zlvl0 corresponds to z0 = 0, the distance level zlvl1 corresponds to 0 <z0 <zth1, the distance level zlvl2 corresponds to zth1 <z0 <zth2, and the distance level zlvl3 corresponds to zth2 <z0 <zth3. The distance level zlvl4 corresponds to zth3 <z0. It should be specified in advance whether z0 = zth1 is included in the distance levels zlvl1 and zlvl2. The same applies to z0 = zth2 and z0 = zth3. In the example of FIG. 4, the distance level zlvl0 is assigned to z0 = 0, but z0 = 0 may be included in the distance level zlvl1.
図４に示すように、各距離レベルｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３に対して、表現（換言すれば、見た目）の異なるプロンプト３１が予め設定されている。図４の例では、距離レベルｚｌｖｌ３，ｚｌｖｌ２には、写実的に描画された指先の画像（写真でもよい）が、プロンプト３１の画像として割り当てられている。但し、距離レベルｚｌｖｌ３のプロンプト３１は、距離レベルｚｌｖｌ２のプロンプト３１よりも小さい。また、距離レベルｚｌｖｌ１には、物を指し示す際に一般に行われる人差し指を突き出した状態の手を、線図で簡略化した手画像が、割り当てられている。また、距離レベルｚｌｖｌ０には、距離レベルｚｌｖｌ１の簡略化された手画像に背景枠を追加した画像が、割り当てられている。なお、図４の例では、指示物の距離ｚ０が距離レベルｚｌｖｌ４に該当する場合には、プロンプト３１を表示しない。 As shown in FIG. 4, prompts 31 having different expressions (in other words, appearance) are set in advance for each of the distance levels zlvl0, zlvl1, zlvl2, and zlvl3. In the example of FIG. 4, a realistically drawn image of a fingertip (may be a photograph) is assigned as an image of the prompt 31 to the distance levels zlvl3 and zlvl2. However, the prompt 31 of the distance level zlvl3 is smaller than the prompt 31 of the distance level zlvl2. Further, a hand image obtained by simplifying a hand in a state in which an index finger is protruded, which is generally performed when pointing to an object, with a diagram is assigned to the distance level zlvl1. Further, an image obtained by adding a background frame to a simplified hand image of the distance level zlvl1 is assigned to the distance level zlvl0. In the example of FIG. 4, the prompt 31 is not displayed when the distance z0 of the indicator corresponds to the distance level zlvl4.
このように、距離レベルｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３ごとに、プロンプト３１の表現が異なっている。表現の相違は、表現要素が少なくとも１つが異なることによって、生じる。表現要素は例えば、大きさ、形状、色、模様、アニメーション表示である。このため、大きさと、形状と、色と、アニメーション表示とのうちの少なくとも１つの表現要素を、距離レベルｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３で変化させればよい。 Thus, the expression of the prompt 31 is different for each of the distance levels zlvl0, zlvl1, zlvl2, and zlvl3. Differences in expression occur due to differences in at least one expression element. The expression elements are, for example, size, shape, color, pattern, and animation display. For this reason, it is only necessary to change at least one expression element among the size, shape, color, and animation display at the distance levels zlvl0, zlvl1, zlvl2, and zlvl3.
図５に、プロンプト３１の表現を指示物の距離ｚ０に応じて変化させる処理Ｓ１０のフローチャートを例示する。 FIG. 5 illustrates a flowchart of the process S10 in which the expression of the prompt 31 is changed according to the distance z0 of the indicator.
図５の例によれば、ステップＳ１１において、タッチパネル４（図１参照）が入力面４ａ上の空間に存在する指示物を検出し、制御部１１（図１参照）がその検出結果である３次元位置情報を、接続部２４（図１参照）を介してタッチパネル４から取得する。
According to the example of FIG. 5, in step S11, the touch panel 4 (see FIG. 1) detects an indicator existing in the space on the
そして、制御部１１は、ステップＳ１２において、３次元位置情報に基づき、指示物の入力面内位置を、表示装置２の表示面内位置に変換する（２次元位置変換処理）。ここで、図６に２次元位置変換処理の説明図を示す。
In step S12, the
図６に示すように、入力面内位置は、入力面４ａのうちで入力面４ａの法線（図６ではｚ軸に平行な線である）に沿った指示物の直下位置のことである。換言すれば、指示物から入力面４ａへ下ろした垂線と、入力面４ａとの交点が、指示物の入力面内位置である。より具体的には図６の左部に示すように、指示物の位置の座標が（ｘ０，ｙ０，ｚ０）である場合、入力面内位置の座標は（ｘ０，ｙ０，０）、換言すれば（ｘ０，ｙ０）である。
As shown in FIG. 6, the position within the input surface is a position directly below the indicator along the normal of the
得られた入力面内位置（ｘ０，ｙ０）は、例えば予め規定された変換規則によって、表示装置２の表示面内位置（Ｘ０，Ｙ０）に変換される。変換規則は変換式、変換テーブル、等によって具現化可能である。例えば入力面４ａと表示面２ａとが相似形（相似比をｒとする）である場合、変換式はＸ０＝ｘ０×ｒ、Ｙ０＝ｙ０×ｒで与えられる。変換式を一般化すれば、Ｘ０＝ｆｘ（ｘ０，ｙ０）、Ｙ０＝ｆｙ（ｘ０，ｙ０）で与えられる。また、表示面２ａが曲面にデザインされている場合でも、その曲面デザインに応じて適切な変換式を規定することは可能である。
The obtained input in-plane position (x0, y0) is converted into the display in-plane position (X0, Y0) of the display device 2 by, for example, a predetermined conversion rule. The conversion rule can be embodied by a conversion formula, a conversion table, or the like. For example, when the
なお、図６では、入力面４ａの左上頂点を仮想的なｘｙｚ座標系の原点に選び、入力面４ａの横方向および縦方向にｘ軸およびｙ軸にそれぞれ設定し、入力面４ａの法線方向にｚ軸を設定している。但し、座標系の設定はこれに限定されるものではない。例えば、入力面４ａの中心に原点を設定してもよいし、あるいは、原点を入力面４ａの上方に設定してもよい。しかし、どのような座標系も（直交座標系以外も含む）、図６に例示したｘｙｚ座標系に変換可能である。すなわち、図６の例示したｘｙｚ座標系であっても、一般性を失うことはない。また、図６では表示面２ａに対しても同様にして、仮想的なＸＹ座標を設定している。
In FIG. 6, the upper left vertex of the
制御部１１は、ステップＳ１３（図５参照）において、３次元位置情報に基づき、入力面４ａと指示物との間の距離ｚ０が、距離レベルｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３，ｚｌｖｌ４（図４参照）のいずれに該当するかを判別する（距離レベル判別処理）。
In step S13 (see FIG. 5), the
次に、制御部１１は、ステップＳ１４において、プロンプト３１の表現を設定する（プロンプト表現設定処理）。特に、制御部１１は、ステップＳ１３で判別した距離レベルｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３，ｚｌｖｌ４を、予め定められた規則（図４参照）に照合することによって、プロンプト３１の画像を選択する。これにより、指示物の距離レベルｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３，ｚｌｖｌ４に応じて、プロンプト３１の表現を変化させることができる。
Next, the
その後、制御部１１は、ステップＳ１５において、プロンプト３１が、ステップＳ１２で得られた表示面内位置に、ステップＳ１４で設定された表現で以て表示されるように、表示画像データを生成する（表示画像データ生成処理）。例えば、プロンプト用のレイヤ（換言すれば、画像保持部）にプロンプト３１の画像データを書き込み、そのプロンプト用レイヤと他のレイヤ（例えば地図画像データが書き込まれたレイヤ）とを合成することによって、表示画像データが生成される。その表示画像データは、表示装置２へ伝送され、表示装置２によって表示面２ａに表示される。
Thereafter, in step S15, the
そして、制御部１１は、後続の検出タイミングで得られた３次元位置情報に対して、処理Ｓ１０を繰り返す。
And the
図７に、プロンプト３１の表現の変化を例示する。図７から分かるように、指示物の距離ｚ０が減少するに従って、すなわち指示物が入力面４ａに近づくに従って、プロンプト３１の表現が変化する。また、指示物の距離ｚ０が増大する場合にも、すなわち指示物が入力面４ａから遠ざかる場合にも、プロンプト３１の表現が変化する。
FIG. 7 illustrates a change in the expression of the prompt 31. As can be seen from FIG. 7, the expression of the prompt 31 changes as the indicator distance z0 decreases, that is, as the indicator approaches the
なお、２次元位置変換ステップＳ１２は、距離レベル判別ステップＳ１３またはプロンプト表現設定ステップＳ１４よりも後で実行してもよい。 The two-dimensional position conversion step S12 may be executed after the distance level determination step S13 or the prompt expression setting step S14.
また、図４の例によれば、指示物の距離ｚ０が距離レベルｚｌｖｌ４に該当する場合にはプロンプト３１を表示しない。このため、３次元位置情報取得ステップＳ１１の直後に距離レベル判別ステップＳ１３を実行し、指示物の距離ｚ０が距離レベルｚｌｖｌ４に該当することが判別されたならば、その３次元位置情報については、残りのステップＳ１２，Ｓ１４，Ｓ１５を実行しないようにしてもよい。 Further, according to the example of FIG. 4, the prompt 31 is not displayed when the distance z0 of the indicator corresponds to the distance level zlvl4. Therefore, if the distance level determination step S13 is executed immediately after the three-dimensional position information acquisition step S11 and it is determined that the distance z0 of the indicator corresponds to the distance level zlvl4, The remaining steps S12, S14, and S15 may not be executed.
このようにプロンプト３１の表現が指示物の距離ｚ０に応じて変化するので、ユーザ（ここでは運転手）は、タッチパネル４に向けた手元を見なくても、表示面２ａを通じて、タッチパネル４までの距離ｚ０を把握することができる。このため、視線移動が減り、操作性が向上する。この点は、表示面２ａと入力面４ａとを同時に視界に入れるのが難しい環境下において、特に好適である。また、運転中に視線を車両前方から大きくそらすのを回避可能である。
Thus, since the expression of the prompt 31 changes according to the distance z0 of the indicator, the user (here, the driver) can reach the
また、プロンプト３１の表現は、指示物の距離レベルごとに変化する。このため、プロンプトの大きさ等が連続的に変化する場合に比べて、プロンプト３１の変化に気付きやすい。換言すれば、認知性に優れる。 The expression of the prompt 31 changes for each distance level of the indicator. For this reason, it is easier to notice the change of the prompt 31 than when the size of the prompt changes continuously. In other words, it has excellent cognition.
また、プロンプトの大きさ等が連続的に変化する場合には、指示物の若干の揺れが、プロンプトの変化に過敏に反映されてしまう。しかし、プロンプト３１のように指示物の距離レベルごとの変化であれば、そのような過敏な変化を抑制できる。このため、例えば車中のように揺れが生じる環境下においても、プロンプト３１の表現が安定し、快適な操作性を提供可能である。 In addition, when the size of the prompt or the like changes continuously, a slight shaking of the indicator is reflected on the prompt change. However, if it is a change for each distance level of the indicator as in the prompt 31, such a sensitive change can be suppressed. For this reason, even in an environment in which shaking occurs, for example, in a vehicle, the expression of the prompt 31 is stable and comfortable operability can be provided.
ここで、図４および図７の例では、各距離レベルｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３，ｚｌｖｌ４内においてプロンプト３１の表現が変化しないものとした。これに対し、指示物の距離ｚ０が或る距離レベルに属している間に、プロンプト３１の表現を、指示物の距離ｚ０に応じて変化させてもよい。図８にそのような例の説明図を示す。 Here, in the example of FIGS. 4 and 7, the expression of the prompt 31 does not change in each distance level zlvl1, zlvl2, zlvl3, zlvl4. On the other hand, while the distance z0 of the indicator belongs to a certain distance level, the expression of the prompt 31 may be changed according to the distance z0 of the indicator. FIG. 8 is an explanatory diagram of such an example.
図８の例では、距離レベルｚｌｖｌ３において、プロンプト３１の大きさを指示物の距離ｚ０に応じて連続的に（換言すれば、無段階に）変化させる連続的変化を実行する。より具体的には、距離ｚ０が連続的に小さくなるのに従って、プロンプト３１を連続的に大きくする。逆に、距離ｚ０が連続的に大きくなるのに従って、プロンプト３１を連続的に小さくする。また、距離レベルｚｌｖｌ２においても、距離レベルｚｌｖｌ３と同様に、プロンプト３１の大きさについて連続的変化を実行する。なお、距離レベルｚｌｖｌ２，ｚｌｖｌ３間でプロンプト３１の大きさが連続していてもよいし、あるいは、そのような連続性が無くてもよい。 In the example of FIG. 8, at the distance level zlvl3, a continuous change is performed in which the size of the prompt 31 is changed continuously (in other words, steplessly) according to the distance z0 of the indicator. More specifically, the prompt 31 is continuously increased as the distance z0 is continuously reduced. Conversely, the prompt 31 is continuously reduced as the distance z0 is continuously increased. Also, at the distance level zlvl2, the size of the prompt 31 is continuously changed in the same manner as the distance level zlvl3. Note that the size of the prompt 31 may be continuous between the distance levels zlvl2 and zlvl3, or such continuity may not be present.
また、図８の例では、距離ｚ０が距離レベルｚｌｖｌ３から距離レベルｚｌｖｌ２に変化するのに伴って、および、距離ｚ０が距離レベルｚｌｖｌ２から距離レベルｚｌｖｌ３に変化するのに伴って、プロンプト３１の色を変化させる。 Further, in the example of FIG. 8, the color of the prompt 31 as the distance z0 changes from the distance level zlvl3 to the distance level zlvl2 and as the distance z0 changes from the distance level zlvl2 to the distance level zlvl3. To change.
すなわち、距離レベルｚｌｖｌ３では、距離レベルの変化に伴って変化させる表現要素とは異なる表現要素を、指示物の距離ｚ０に応じて連続的に変化させる。距離レベルｚｌｖｌ２においても同様である。このような連続的変化によれば、単一の距離レベル内においても指示物の距離ｚ０の変化を把握しやすくなる。 That is, at the distance level zlvl3, an expression element different from the expression element that is changed with the change in the distance level is continuously changed according to the distance z0 of the indicator. The same applies to the distance level zlvl2. Such a continuous change makes it easy to grasp the change in the distance z0 of the indicator within a single distance level.
また、上記のように、かかる連続的変化において変化させる表現要素を、距離レベルの変化に伴って変化させる表現要素とは異ならせている。このため、距離レベル単位でプロンプト３１の表現を変化させることに起因した上記効果を損なうものではない。 Further, as described above, the expression element that is changed in the continuous change is different from the expression element that is changed in accordance with the change in the distance level. For this reason, the said effect resulting from changing the expression of the prompt 31 per distance level is not impaired.
図８の例では距離レベルｚｌｖｌ１ではプロンプト３１の大きさを変化させないものとしているが、距離レベルｚｌｖｌ１内でプロンプト３１の大きさを連続的に変化させてもよい。すなわち、距離レベルｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３のうちの一部または全部の距離レベルにおいて連続的変化を採用可能である。特に一部の距離レベルで連続的変化を採用した場合、全ての距離レベルで連続的変化を採用する場合に比べて、プロンプト３１の描画処理にかかる負荷を軽減できる。 In the example of FIG. 8, it is assumed that the size of the prompt 31 is not changed at the distance level zlvv1, but the size of the prompt 31 may be continuously changed within the distance level zlvv1. That is, it is possible to employ a continuous change at some or all of the distance levels zlvl1, zlvl2, and zlvl3. In particular, when continuous changes are adopted at some distance levels, the load on the drawing process of the prompt 31 can be reduced as compared with the case where continuous changes are adopted at all distance levels.
なお、図８の例とは異なり、大きさに代えてまたは加えて、他の表現要素を連続的に変化させてもよい。 Unlike the example of FIG. 8, other expression elements may be continuously changed instead of or in addition to the size.
＜プロンプトの付加情報＞
プロンプト３１に付加情報を追加してもよい。付加情報の一例である距離情報について、図９を参照して説明する。図９の例では、指示物の距離ｚ０が距離レベルｚｌｖｌ１である場合に、距離情報３２をプロンプト３１に付加する。但し、他の距離レベルｚｌｖｌ０，ｚｌｖｌ２，ｚｌｖｌ３において距離情報３２を付加してもよい。
<Prompt additional information>
Additional information may be added to the prompt 31. The distance information that is an example of the additional information will be described with reference to FIG. In the example of FIG. 9, the
図９に例示の距離情報３２は、帯状の図形であり、指示物の距離ｚ０に応じて長さ（ここでは縦寸法）が変化する。かかる帯状の図形は、プロンプト３１の背景として追加される。
The
帯状図形による距離情報３２は、指示物の距離ｚ０が小さいほど（すなわち、指示物が入力面４ａに近いほど）、長くなる。例えば、図１０に示すように、帯状図形の長さａ（ｚ０）はｚｔｈ１／ｓを最大寸法とし、ａ（ｚ０）＝ｚｔｈ１／ｓ−ｚ０／ｓという式で与えられる。ｓは、距離ｚ０と表示時の大きさとの変換係数である。なお、ｚ０＝ｚｔｈ１の際にも長さを有するように（図９参照）、オフセットを与えてもよい。また、ここでは幅（ここでは横寸法）は固定とするが、幅も距離ｚ０に連動させてもよい。
The
図１１に、距離情報３２の変化を例示する。図１１から分かるように、指示物の距離ｚ０が減少するに従って、距離情報３２である帯状図形が長くなる。逆に、指示物の距離ｚ０が増大するに従って、帯状図形は短くなる。
FIG. 11 illustrates changes in the
図１２に、距離情報３２を追加する場合のフローチャートを例示する。図１２の処理Ｓ２０は、図５の処理Ｓ１０にステップＳ２１（付加情報設定処理）が追加されている。ステップＳ２１では、制御部１１は、指示物の距離ｚ０に応じて、距離情報３２である帯状図形の長さを設定する。そして、制御部１１は、ステップＳ１５において、距離情報３２付きのプロンプト３１を含んだ表示画像のデータを生成し、その表示画像が表示されるように表示装置２を制御する。
FIG. 12 illustrates a flowchart when adding the
図１３および図１４に、距離情報３２の他の例を示す。図１３の例では、距離情報３２は、矢印状の図形であり、矢印の長さが指示物の距離ｚ０に応じて変化する。図１４の例では、距離情報３２は、指示物の距離ｚ０に対応する数値である。なお、当該数値は、距離ｚ０の絶対的な数値でなくてもよく、例えば、距離ｚ０を、予め定められた規則で変換した相対的な数値であってもよい。また、図形表示と数値表示とを組み合わせて、距離情報３２を構成してもよい。
13 and 14 show other examples of the
距離情報３２によれば、表示面２ａを通じて、指示物の距離ｚ０を、さらに把握しやすくなる。また、距離情報３２を、入力面４ａに最も近い距離レベルｚｌｖｌ１において表示し、他の距離レベルｚｌｖｌ０，ｚｌｖｌ２，ｚｌｖｌ３では表示しない場合（図９参照）、指示物が入力面４ａに近いことに気付きやすくなる。このため、指示物の入力面４ａへの接触をスムーズに行うことができる。
According to the
＜プロンプト等の他の例＞
以下に、プロンプト３１等の他の例を説明する。なお、以下の例示は、それぞれを単独で採用してもよいし、種々に組み合わせることも可能である。
<Other examples of prompts>
Other examples of the prompt 31 and the like will be described below. In addition, each of the following illustrations may be adopted alone or in various combinations.
プロンプト表現設定処理Ｓ１４（図５および図１２を参照）において、プロンプト３１の表現をプロンプト３１の表示位置に応じて変化させるという位置連動条件を適用してもよい。例えば、次の第１〜第４の位置連動条件が挙げられる。 In the prompt expression setting process S14 (see FIGS. 5 and 12), a position interlocking condition that the expression of the prompt 31 is changed according to the display position of the prompt 31 may be applied. For example, the following first to fourth position interlocking conditions can be mentioned.
第１の位置連動条件は、プロンプト３１を機能アイコン上に表示する場合、その機能アイコンに関連付けられている機能の種類に応じて、プロンプト３１の表現を変化させる、という条件である。例えば、図１５に示すように、プロンプト３１がナビゲーション関連のアイコンと重なる場合は、指形状の表現を用いる。これに対し、図１６に例示するように、プロンプト３１がＡＶ関連のアイコンと重なる場合は、音符形状の表現を用いる。 The first position interlocking condition is a condition that when the prompt 31 is displayed on the function icon, the expression of the prompt 31 is changed according to the type of the function associated with the function icon. For example, as shown in FIG. 15, when the prompt 31 overlaps with a navigation-related icon, a finger-shaped expression is used. On the other hand, as illustrated in FIG. 16, when the prompt 31 overlaps with an AV-related icon, a note-shaped expression is used.
第２の位置連動条件は、プロンプト３１をアイコン領域上に表示する場合と、プロンプト３１を画面操作領域上に表示する場合とで、プロンプト３１の表現を変化させる、という条件である。ここで、アイコン領域とは１つまたは複数のアイコンが配置された領域であり、図１７および図１８の画面例では、ＡＶ関連およびナビゲーション関連のアイコンが配置された画面右側の領域が、アイコン領域である。また、画面操作領域とはユーザが画面（換言すれば、表示内容）を操作可能な領域であり、表示内容操作領域と称してもよい。図１７および図１８の画面例では、中央部および左部からなる領域にスクロール等の操作が可能な地図画像が表示されており、この地図画像の領域が画面操作領域にあたる。第２の位置連動条件によれば、例えば、図１７に示すようにプロンプト３１をアイコン領域に表示する場合には線図の指画像を用い、図１８に示すようにプロンプト３１を画面操作領域に表示する場合は写実的な手画像を用いる。 The second position interlocking condition is a condition that the expression of the prompt 31 is changed between when the prompt 31 is displayed on the icon area and when the prompt 31 is displayed on the screen operation area. Here, the icon area is an area in which one or more icons are arranged. In the screen examples of FIGS. 17 and 18, an area on the right side of the screen in which AV-related and navigation-related icons are arranged is an icon area. It is. The screen operation area is an area where the user can operate the screen (in other words, display content), and may be referred to as a display content operation area. In the screen examples of FIGS. 17 and 18, a map image capable of operations such as scrolling is displayed in an area composed of the center part and the left part, and this map image area corresponds to the screen operation area. According to the second position interlocking condition, for example, when the prompt 31 is displayed in the icon area as shown in FIG. 17, a finger image of a diagram is used, and the prompt 31 is set in the screen operation area as shown in FIG. For display, a realistic hand image is used.
第３の位置連動条件は、プロンプト３１を操作許可アイコン（ユーザによる操作が許可されたアイコン）上に表示する場合と、プロンプト３１を操作不許可アイコン（ユーザによる操作が許可されていないアイコン）上に表示する場合とで、プロンプト３１の表現を変化させる、という条件である。例えば、多くの手順が予想される操作（例えば５０音検索）を走行中に行うのは好ましくないので、そのような操作は、走行中は操作不許可に設定される。この場合、図１９に例示するように、５０音検索アイコンの位置にプロンプト３１が存在する場合、そのプロンプト３１は、通常よりも小さく、且つ、透明度を上げて、表示される。これに対し、図２０に例示するように、停車中は５０音検索アイコンは操作許可に設定され、当該アイコン上であってもプロンプト３１を通常表現で表示する。 The third position interlocking condition includes a case where the prompt 31 is displayed on an operation permission icon (an icon permitted by the user), and a case where the prompt 31 is displayed on the operation disapproved icon (an icon which is not permitted by the user). And the display of the prompt 31 is changed. For example, since it is not preferable to perform an operation in which many procedures are expected (for example, a 50-sound search) during traveling, such an operation is set to disallow operation during traveling. In this case, as illustrated in FIG. 19, when the prompt 31 exists at the position of the 50-sound search icon, the prompt 31 is displayed smaller than usual and with increased transparency. On the other hand, as illustrated in FIG. 20, the 50-sound search icon is set to allow operation while the vehicle is stopped, and the prompt 31 is displayed in the normal expression even on the icon.
第４の位置連動条件は、プロンプト３１を操作許可領域（ユーザによる操作が許可された領域）上に表示する場合と、プロンプト３１を操作不許可領域（ユーザによる操作が許可されていない領域）上に表示する場合とで、プロンプト３１の表現を変化させる、という条件である。例えば、図２１に示すように、表示面２ａにメータが表示されている場合、その表示領域は操作不許可領域に設定される。この場合、図２１の例では、操作不許可領域においてプロンプト３１は、指画像および手画像ではなく、十字印を丸で囲んだ形状で表示される。これに対し、図２２に例示するように、操作許可領域では、プロンプト３１を通常表現で表示する。なお、図２２では、操作許可領域として、スクロール等の操作が可能な地図画像が表示された画面操作領域を例示しているが、操作許可領域は例えばアイコン領域であってもよい。
The fourth position interlocking condition includes the case where the prompt 31 is displayed on the operation permission area (area where the operation by the user is permitted) and the case where the prompt 31 is displayed on the area where the operation is not permitted (area where the operation by the user is not permitted). And the display of the prompt 31 is changed. For example, as shown in FIG. 21, when a meter is displayed on the
ここで、図２３に例示するように、操作不許可領域から操作許可領域への進入方向が複数存在しうる場合、その進入方向に応じて、操作許可領域内でのプロンプト３１の表現を設定してもよい（移動方向連動条件）。 Here, as illustrated in FIG. 23, when there are a plurality of entry directions from the operation disallowance area to the operation permission area, the expression of the prompt 31 in the operation permission area is set according to the entry direction. (Movement direction interlocking condition).
位置連動条件を適用することにより、操作の確認に役立つ。なお、第１〜第４の位置連動条件のうちの１つだけを採用してもよいし、あるいは、第１〜第４の位置連動条件のうちの２つ以上を採用してもよい。 By applying the position interlock condition, it helps to confirm the operation. Note that only one of the first to fourth position interlocking conditions may be employed, or two or more of the first to fourth position interlocking conditions may be employed.
また、第１〜第４の位置連動条件は、指示物の距離ｚ０に関わらず、適用可能である。換言すれば、ｚ０＝０の場合のみならずｚ０≠０の場合（指示物が入力面４ａの上方に存在する場合）にも、第１〜第４の位置連動条件を適用することにより、指示物が入力面４ａに接触する前に操作確認をすることができる。
The first to fourth position interlocking conditions can be applied regardless of the distance z0 of the indicator. In other words, not only in the case of z0 = 0 but also in the case of z0 ≠ 0 (when the indicator exists above the
また、プロンプト表現設定処理Ｓ１４（図５および図１２を参照）において、プロンプト３１の表現を、指示物の入力面内位置の状態に応じて変化させるという面内状態連動条件を適用してもよい。具体的に図２４の例では、入力面内位置が静止している場合には、通常の手画像のプロンプト３１を表示し、これに対し、入力面内位置が移動している場合には、十字印を丸で囲んだ形状のプロンプト３１を表示する。これによれば、表示面２ａを通しての操作状況確認を容易化できる。
Further, in the prompt expression setting processing S14 (see FIGS. 5 and 12), an in-plane state interlocking condition in which the expression of the prompt 31 is changed according to the state of the input in-plane position of the indicator may be applied. . Specifically, in the example of FIG. 24, when the position in the input plane is stationary, a normal hand image prompt 31 is displayed, whereas when the position in the input plane is moving, A prompt 31 having a shape in which a cross mark is circled is displayed. According to this, the operation status confirmation through the
プロンプト３１の画像は図２４の例に限定されるものではない。但し、図２４の例のように、指示物の入力面内位置が移動状態である場合に簡略な画像を採用することにより、プロンプト３１の描画処理にかかる負荷を軽減できる。 The image of the prompt 31 is not limited to the example of FIG. However, as in the example of FIG. 24, the load on the prompt 31 drawing process can be reduced by adopting a simple image when the position of the input object in the input surface is in a moving state.
面内状態連動条件は、指示物の距離ｚ０に関わらず、適用可能である。特にｚ０＝０の場合における適用は、指示物によって入力されるジェスチャ操作（スクロール操作、拡大縮小操作、回転操作、等）の開始および終了に伴って、プロンプト３１の表現を変化させることが可能である。具体的には、図２５の例では、スクロール操作の開始に伴ってプロンプト３１の表現を変化させ、スクロール操作の終了に伴ってプロンプト３１の表現を戻している。なお、図２５では、ｚ０＝０の場合の距離情報３２として、楕円図形を例示している。このように、プロンプト３１の表現変化と入力面４ａ上でのジェスチャ操作とを関連させることにより、ジェスチャ操作の実行状況が確認しやすくなる。
The in-plane state interlocking condition can be applied regardless of the distance z0 of the indicator. In particular, the application in the case of z0 = 0 can change the expression of the prompt 31 with the start and end of a gesture operation (scroll operation, enlargement / reduction operation, rotation operation, etc.) input by an indicator. is there. Specifically, in the example of FIG. 25, the expression of the prompt 31 is changed with the start of the scroll operation, and the expression of the prompt 31 is returned with the end of the scroll operation. In addition, in FIG. 25, the ellipse figure is illustrated as the
図２４に戻り、面内状態連動条件は、プロンプト３１の付加情報にも適用可能である。すなわち、付加情報の他の例として、指示物の入力面内位置の状態を示す面内状態情報３３がある。制御部１１は、付加情報設定処理Ｓ２１（図１２参照）において、指示物の入力面内位置が移動している場合と静止している場合とで、面内状態情報３３の表現を変化させる。図２４には面内状態情報３３として、指示物の移動方向を示す矢印状の図形と、背景枠とが例示されている。矢印状図形の長さは、固定であってもよいし、指示物の面内位置の移動量に応じて変化させてもよい。入力面内位置が静止している場合には面内状態情報３３を付加せず、これに対し、入力面内位置が移動している場合には面内状態情報３３をプロンプト３１に付加する。これによれば、表示面２ａを通しての操作状況確認を容易化できる。
Returning to FIG. 24, the in-plane state interlocking condition can also be applied to the additional information of the prompt 31. That is, as another example of the additional information, there is in-
図４および図９では指示物が指である場合に例示したが、指示物がスタイラスペンの場合におけるプロンプトの表現を、図２６に例示する。なお、図２６の例に、距離情報３２（図９参照）と面内状態情報３３（図２４参照）の一方または両方を付加してもよい。 Although FIG. 4 and FIG. 9 illustrate the case where the indicator is a finger, FIG. 26 illustrates a prompt expression when the indicator is a stylus pen. Note that one or both of the distance information 32 (see FIG. 9) and the in-plane state information 33 (see FIG. 24) may be added to the example of FIG.
プロンプト表現設定処理Ｓ１４（図５および図１２を参照）において、指示物の種類に応じてプロンプト３１の表現を変化させることにより、複数種類の指示物を使い分けることができ、便利である。例えば、ペン用プロンプト３１によって指示できる粒度（換言すれば、分解能）を指用プロンプト３１よりも小さく設定すれば、スタイラスペンを選択することにより、精細な画面に対しても操作性が向上する。また、指とスタイラスペンとの使い分けによって、動作モードが切り替わるようにしてもよい。例えば、指利用時には相対座標入力モードが設定され、ペン利用時には絶対座標入力モードが設定されてもよい。
In the prompt expression setting process S14 (see FIG. 5 and FIG. 12), by changing the expression of the prompt 31 according to the type of the instruction, a plurality of types of instructions can be used properly, which is convenient. For example, if the granularity (in other words, resolution) that can be instructed by the
図２７に、スタイラスペンを利用する場合について、情報表示制御装置３のブロック図を例示する。図２７の例によれば、図３の構成例に、ペン用の接続部２８が追加されている。具体的には、スタイラスペンに固有の識別情報を組み込んでおき、その識別情報が接続部２８を介して制御部１１へ伝送される。これによれば、制御部１１は、識別情報の入力がある場合には、スタイラスペンが利用されていることを判別可能である。他方、識別情報の入力がなければ場合には、指が利用されていることを判別可能である。また、識別情報自体を判別することによって、複数のスタイラスペンを判別することも可能である。
FIG. 27 illustrates a block diagram of the information
スタイラスペンへの識別情報の付与、および、接続部２８による識別情報の取得は、例えば、無線タグ技術を応用することによって、実現可能である。
The assignment of the identification information to the stylus pen and the acquisition of the identification information by the
ここで、図２８に、２つのタッチパネル４を情報表示装置１に接続した例を示す。この場合、タッチパネル４ごとに指示物が用いられる。すなわち、２つの指示物によって、情報表示装置１への入力操作が行われる。入力装置用接続部２４には、２つの指示物のそれぞれの３次元位置情報が、各指示物用のタッチパネル４から入力される。なお、２つの入力装置４の一方または両方がタッチパネル以外の装置であってもよい。
Here, FIG. 28 shows an example in which two
なお、それぞれのタッチパネル４に接続部（接続部２４に相当）が設けられる場合、それらの接続部を総称が上記の入力装置用接続部２４にあたる。また、例えば２つのタッチパネル４が共に無線通信で情報表示装置１に接続される場合、入力装置用接続部２４を１つの無線通信用信号生成回路で構成することも可能である。すなわち、２つのタッチパネル４に対して、接続部２４は種々の構成を採りうる。
In addition, when a connection part (equivalent to the connection part 24) is provided in each
制御部１１は、指示物ごとの３次元位置情報を取得し、２つの指示物のうちの少なくとも１つについて、上記のプロンプト表現設定処理Ｓ１４（図５および図１２を参照）を実行する。図２９には、２つの指示物が同時に利用され、両方のプロンプト３１にプロンプト表現設定処理Ｓ１４が適用された場合の画面を例示する。また、２つの指示物のうちの少なくとも１つに対して、付加情報設定処理Ｓ２１（図１２参照）を実行してもよい。
The
同様にして３つ以上のタッチパネル４を接続して、３つ以上の指示物を利用することも可能である。なお、複数の指示物は同じ種類である必要はない。
Similarly, it is also possible to connect three or
ここで、図３０に、表示面２ａを２つの領域に分割し、一方のタッチパネル４を左画面用入力装置として利用し、他方のタッチパネル４を右画面用入力装置として利用する例を示す。また、図３１に、いわゆるスプリットビュー画面の説明図を示す。スプリットビュー画面では、表示面２ａを見る方向によって、見える画面が異なる。このため、例えば、一方のタッチパネル４は右側（ここでは運転席側）から見た画面用の入力装置として利用し、他方のタッチパネル４は左側（ここでは助手席側）から見た画面用の入力装置として利用することが可能である。
Here, FIG. 30 shows an example in which the
図３１には、右側から見た画面ではプロンプト３１の指画像を左向き（手首が右側に在り、人差し指が左側に在る）で表示し、左側から見た画面ではプロンプト３１の指画像を右向き（手首が左側に在り、人差し指が右側に在る）で表示する例を図示している。これに対し、両方の指画像を同じ方向に向けてもよい。但し、図３１の例によれば、指の向きが、表示面２ａと座席との位置関係を反映しているので、プロンプト３１を直感的に認識しやすい。図３１における２つの指画像の向きは図２９および図３０の例にも応用可能である。
In FIG. 31, the finger image of the prompt 31 is displayed leftward (the wrist is on the right side and the index finger is on the left side) on the screen viewed from the right side, and the finger image of the prompt 31 is directed rightward (on the screen viewed from the left side). The wrist is on the left side and the index finger is on the right side). On the other hand, both finger images may be directed in the same direction. However, according to the example of FIG. 31, the direction of the finger reflects the positional relationship between the
また、制御部１１は、指示物の距離ｚ０に応じて画面全体の色相を変化させてもよい（画面色相制御処理）。これによれば、プロンプト３１を注視しなくても距離ｚ０の変化を判別可能であり、それによりプロンプト３１を探す時間を減らすことができる。このため、例えば、運転中に視線を長い時間、車両前方からそらすのを回避可能である。
Further, the
また、制御部１１は、指示物が入力面４ａに接触した場合（すなわち距離ｚ０＝０になった場合）に、入力面４ａを振動させる指示を、接続部２４を介してタッチパネル４に与えてもよい。タッチパネル４は、入力面４ａを振動させる機能を有している場合、その指示に従って入力面４ａを振動させる。また、制御部１１は、入力面４ａを盛り上げる指示をタッチパネル４に与えてもよい。タッチパネル４は、入力面４ａを盛り上げる機能を有している場合、その指示に従って入力面４ａを盛り上げる。また、制御部１１は通知音を、スピーカ５からまたはタッチパネル４のスピーカから、発生させてもよい。これらによれば、入力面４ａを見なくても、さらには表示面２ａを見なくても、入力面４ａに接触したことが分かる。なお、上記３つの処理例を種々に組み合わせてもよい。
Further, the
ここで、入力面４ａの振動は、圧電素子等の振動素子を利用すれば実現可能である。また、入力面４ａの盛り上げは、例えば、膨張素子を利用すれば実現可能である。膨張素子は、例えば、電解液の封止構造を有した素子によって実現可能である。具体的には、その電解液に電気を供給すると、素子内部に気体が発生し、それにより膨張する。なお、入力面４ａの振動は、入力面４ａの全体に発生させてもよいし、あるいは、指示物が接触した箇所を含む一部分に選択的に発生させてもよい。かかる点は入力面４ａの盛り上げについても同様である。
Here, the vibration of the
なお、上記では入力装置４として静電容量方式の３Ｄタッチパネルを例示した。しかし、入力面４ａ上の空間に存在する指示物の３次元位置を検出する機能を有した装置であれば、検出方式、名称等に関わらず、入力装置４として採用可能である。
In the above description, a capacitive 3D touch panel is illustrated as the
また、上記では表示装置２の表示面２ａと入力装置４の入力面４ａとが別の場所に配置される例を挙げた。しかし、入力面４ａが表示面２ａ上に重ねられた構造にも、上記の各種工夫を採用可能である。
In the above description, the
なお、本発明は、その発明の範囲内において、実施の形態を適宜、変形、省略することが可能である。 In the present invention, the embodiments can be appropriately modified and omitted within the scope of the invention.
１ 情報表示装置、２ 表示装置、２ａ 表示面、３ 情報表示制御装置、４ 入力装置、４ａ 入力面、１１ 制御部、２２ 表示装置用接続部、２４ 入力装置用接続部、３１ プロンプト、３２ 距離情報（付加情報）、３３ 面内状態情報（付加情報）、Ｓ１１ ３次元位置情報取得処理、Ｓ１２ ２次元位置変換処理、Ｓ１３ 距離レベル判別処理、Ｓ１４ プロンプト表現設定処理、Ｓ１５ 表示画像データ生成処理、Ｓ２１ 付加情報設定処理、ｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３，ｚｌｖｌ４ 距離レベル。 1 information display device, 2 display device, 2a display surface, 3 information display control device, 4 input device, 4a input surface, 11 control unit, 22 display device connection unit, 24 input device connection unit, 31 prompt, 32 distance Information (additional information), 33 in-plane state information (additional information), S11 three-dimensional position information acquisition processing, S12 two-dimensional position conversion processing, S13 distance level determination processing, S14 prompt expression setting processing, S15 display image data generation processing, S21 Additional information setting process, zlvl0, zlvl1, zlvl2, zlvl3, zlvl4 distance level.
Claims (16)
前記車両内で前記表示面とは別の場所に配置されている入力面上の空間に存在する指示物の３次元位置を検出する入力装置が接続され、前記入力装置から検出結果に関する３次元位置情報が入力される、入力装置用接続部と、
前記３次元位置情報に基づき、前記入力面のうちで前記入力面の法線に沿った前記指示物の直下位置にあたる入力面内位置を、前記表示装置の表示面内位置に変換する２次元位置変換処理と、前記３次元位置情報に基づき、前記入力面から前記入力面の前記法線に沿った前記指示物までの距離が、予め定められた複数の距離レベルのうちのいずれに該当するかを判別する距離レベル判別処理と、前記距離レベル判別処理で判別した距離レベルに応じて、前記表示面に表示するプロンプトの表現を変化させるプロンプト表現設定処理と、前記プロンプトを、前記２次元位置変換処理で得られた前記表示面内位置に、前記プロンプト表現設定処理で設定された表現で、表示させるための表示画像データを生成する表示画像データ生成処理と、を行う制御部と
を備え、
前記制御部は、前記プロンプトの表現を前記プロンプトの表示位置に応じて変化させるという位置連動条件を、前記プロンプト表現設定処理で適用し、
前記位置連動条件は、前記プロンプトを操作許可領域上に表示する場合と、前記プロンプトを操作不許可領域上に表示する場合とで、前記プロンプトの表現を変化させる、という条件を含み、
前記表示装置はメータ表示が可能な統合インストルメントパネルであり、メータが表示されている領域を前記操作不許可領域とする、
車載用情報表示制御装置。 A connecting portion for a display device to which a display device arranged in a vehicle and having a display surface is connected;
An input device for detecting a three-dimensional position of an indicator existing in a space on an input surface arranged at a location different from the display surface in the vehicle is connected, and a three-dimensional position relating to a detection result from the input device. An input device connection for inputting information; and
Based on the three-dimensional position information, a two-dimensional position that converts a position in the input surface corresponding to a position directly below the indicator along the normal line of the input surface to a position in the display surface of the display device. Based on the conversion process and the three-dimensional position information, whether the distance from the input surface to the indicator along the normal of the input surface corresponds to one of a plurality of predetermined distance levels A distance level determination process for determining the prompt, a prompt expression setting process for changing the expression of the prompt displayed on the display surface in accordance with the distance level determined in the distance level determination process, and the prompt to the two-dimensional position conversion Display image data generation processing for generating display image data to be displayed at the position in the display surface obtained by the processing with the expression set in the prompt expression setting processing. And a control unit,
The control unit applies a position interlocking condition for changing the expression of the prompt according to the display position of the prompt in the prompt expression setting process,
The position interlocking condition, the case of displaying the prompt operation permission region, in a case of displaying the prompt operation disallowed region, to change the representation of the prompt seen including a condition that,
The display device is an integrated instrument panel capable of meter display, and the area where the meter is displayed is the operation disallowed area,
In-vehicle information display control device.
前記車両内で前記表示面とは別の場所に配置されている入力面上の空間に存在する指示物の３次元位置を検出する入力装置が接続され、前記入力装置から検出結果に関する３次元位置情報が入力される、入力装置用接続部と、
前記３次元位置情報に基づき、前記入力面のうちで前記入力面の法線に沿った前記指示物の直下位置にあたる入力面内位置を、前記表示装置の表示面内位置に変換する２次元位置変換処理と、前記３次元位置情報に基づき、前記入力面から前記入力面の前記法線に沿った前記指示物までの距離が、予め定められた複数の距離レベルのうちのいずれに該当するかを判別する距離レベル判別処理と、前記距離レベル判別処理で判別した距離レベルに応じて、前記表示面に表示するプロンプトの表現を変化させるプロンプト表現設定処理と、前記プロンプトを、前記２次元位置変換処理で得られた前記表示面内位置に、前記プロンプト表現設定処理で設定された表現で、表示させるための表示画像データを生成する表示画像データ生成処理と、を行う制御部と
を備え、
前記制御部は、前記プロンプトの表現を前記プロンプトの表示位置に応じて変化させるという位置連動条件を、前記プロンプト表現設定処理で適用し、
前記位置連動条件は、前記プロンプトを機能アイコン上に表示する場合、前記機能アイコンに関連付けられている機能の種類に応じて、前記プロンプトの表現を変化させる、という条件を含む、
車載用情報表示制御装置。 A connecting portion for a display device to which a display device arranged in a vehicle and having a display surface is connected;
An input device for detecting a three-dimensional position of an indicator existing in a space on an input surface arranged at a location different from the display surface in the vehicle is connected, and a three-dimensional position relating to a detection result from the input device. An input device connection for inputting information; and
Based on the three-dimensional position information, a two-dimensional position that converts a position in the input surface corresponding to a position directly below the indicator along the normal line of the input surface to a position in the display surface of the display device. Based on the conversion process and the three-dimensional position information, whether the distance from the input surface to the indicator along the normal of the input surface corresponds to one of a plurality of predetermined distance levels A distance level determination process for determining the prompt, a prompt expression setting process for changing the expression of the prompt displayed on the display surface in accordance with the distance level determined in the distance level determination process, and the prompt to the two-dimensional position conversion Display image data generation processing for generating display image data to be displayed at the position in the display surface obtained by the processing with the expression set in the prompt expression setting processing. And a control unit,
The control unit applies a position interlocking condition for changing the expression of the prompt according to the display position of the prompt in the prompt expression setting process,
The position interlocking condition includes a condition that when the prompt is displayed on a function icon, the expression of the prompt is changed according to the type of the function associated with the function icon.
In-vehicle information display control device.
前記車載用情報表示制御装置の前記表示装置用接続部に接続された表示装置と
を備える車載用情報表示装置。 The in-vehicle information display control device according to any one of claims 1 to 13 ,
A vehicle information display device comprising: a display device connected to the display device connection portion of the vehicle information display control device.
（ｂ）前記３次元位置情報に基づき、前記入力面のうちで前記入力面の法線に沿った前記指示物の直下位置にあたる入力面内位置を、前記車両内で前記入力面とは別の場所に表示面が配置されている表示装置の表示面内位置に変換するステップと、
（ｃ）前記３次元位置情報に基づき、前記入力面から前記入力面の前記法線に沿った前記指示物までの距離が、予め定められた複数の距離レベルのうちのいずれに該当するかを判別するステップと、
（ｄ）前記ステップ（ｃ）で判別した距離レベルに応じて、前記表示装置の前記表示面に表示するプロンプトの表現を変化させるステップと、
（ｅ）前記プロンプトを、前記ステップ（ｂ）で得られた前記表示面内位置に、前記ステップ（ｄ）で設定された表現で、表示させるための表示画像データを生成するステップと
を備え、
前記ステップ（ｄ）では、前記プロンプトの表現を前記プロンプトの表示位置に応じて変化させるという位置連動条件を適用し、
前記位置連動条件は、前記プロンプトを操作許可領域上に表示する場合と、前記プロンプトを操作不許可領域上に表示する場合とで、前記プロンプトの表現を変化させる、という条件を含み、
前記表示装置はメータ表示が可能な統合インストルメントパネルであり、メータが表示されている領域を前記操作不許可領域とする、
情報表示制御方法。 (A) acquiring three-dimensional position information of an indicator existing in a space on an input surface of an input device disposed in a vehicle;
(B) Based on the three-dimensional position information, an input in-plane position corresponding to a position directly below the indicator along the normal of the input surface among the input surfaces is different from the input surface in the vehicle. Converting the display surface to a position within the display surface of the display device in which the display surface is arranged at the place;
(C) Based on the three-dimensional position information, which of a plurality of predetermined distance levels corresponds to a distance from the input surface to the indicator along the normal of the input surface A step of determining;
(D) changing an expression of a prompt displayed on the display surface of the display device according to the distance level determined in the step (c);
(E) generating display image data for displaying the prompt at the position in the display surface obtained in the step (b) with the expression set in the step (d),
In the step (d), a position interlocking condition is applied in which the expression of the prompt is changed according to the display position of the prompt,
The position interlocking condition, the case of displaying the prompt operation permission region, in a case of displaying the prompt operation disallowed region, to change the representation of the prompt seen including a condition that,
The display device is an integrated instrument panel capable of meter display, and the area where the meter is displayed is the operation disallowed area,
Information display control method.
（ｂ）前記３次元位置情報に基づき、前記入力面のうちで前記入力面の法線に沿った前記指示物の直下位置にあたる入力面内位置を、前記車両内で前記入力面とは別の場所に表示面が配置されている表示装置の表示面内位置に変換するステップと、
（ｃ）前記３次元位置情報に基づき、前記入力面から前記入力面の前記法線に沿った前記指示物までの距離が、予め定められた複数の距離レベルのうちのいずれに該当するかを判別するステップと、
（ｄ）前記ステップ（ｃ）で判別した距離レベルに応じて、前記表示装置の前記表示面に表示するプロンプトの表現を変化させるステップと、
（ｅ）前記プロンプトを、前記ステップ（ｂ）で得られた前記表示面内位置に、前記ステップ（ｄ）で設定された表現で、表示させるための表示画像データを生成するステップと
を備え、
前記ステップ（ｄ）では、前記プロンプトの表現を前記プロンプトの表示位置に応じて変化させるという位置連動条件を適用し、
前記位置連動条件は、前記プロンプトを機能アイコン上に表示する場合、前記機能アイコンに関連付けられている機能の種類に応じて、前記プロンプトの表現を変化させる、という条件を含む、
情報表示制御方法。 (A) acquiring three-dimensional position information of an indicator existing in a space on an input surface of an input device disposed in a vehicle;
(B) Based on the three-dimensional position information, an input in-plane position corresponding to a position directly below the indicator along the normal of the input surface among the input surfaces is different from the input surface in the vehicle. Converting the display surface to a position within the display surface of the display device in which the display surface is arranged at the place;
(C) Based on the three-dimensional position information, which of a plurality of predetermined distance levels corresponds to a distance from the input surface to the indicator along the normal of the input surface A step of determining;
(D) changing an expression of a prompt displayed on the display surface of the display device according to the distance level determined in the step (c);
(E) generating display image data for displaying the prompt at the position in the display surface obtained in the step (b) with the expression set in the step (d),
In the step (d), a position interlocking condition is applied in which the expression of the prompt is changed according to the display position of the prompt,
The position interlocking condition includes a condition that when the prompt is displayed on a function icon, the expression of the prompt is changed according to the type of the function associated with the function icon.
Information display control method.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013041399A JP6041708B2 (en) | 2013-03-04 | 2013-03-04 | In-vehicle information display control device, in-vehicle information display device, and information display control method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013041399A JP6041708B2 (en) | 2013-03-04 | 2013-03-04 | In-vehicle information display control device, in-vehicle information display device, and information display control method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2014170339A JP2014170339A (en) | 2014-09-18 |
| JP6041708B2 true JP6041708B2 (en) | 2016-12-14 |
Family
ID=51692701
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2013041399A Expired - Fee Related JP6041708B2 (en) | 2013-03-04 | 2013-03-04 | In-vehicle information display control device, in-vehicle information display device, and information display control method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6041708B2 (en) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2021068000A (en) * | 2019-10-18 | 2021-04-30 | 株式会社東海理化電機製作所 | Control device, program, and system |
Family Cites Families (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH07271501A (en) * | 1994-03-31 | 1995-10-20 | Wacom Co Ltd | Display method for object on display screen |
| JPH0962479A (en) * | 1995-08-22 | 1997-03-07 | Nissin Electric Co Ltd | Supervisory control equipment |
| JPH10207441A (en) * | 1997-01-24 | 1998-08-07 | Japan Radio Co Ltd | Cursor display controller |
| JP3545902B2 (en) * | 1997-03-31 | 2004-07-21 | 富士通テン株式会社 | Navigation device |
| JP2004013314A (en) * | 2002-06-04 | 2004-01-15 | Fuji Xerox Co Ltd | Position measuring input support device |
| JP4539527B2 (en) * | 2005-10-20 | 2010-09-08 | 株式会社デンソー | Vehicle display device |
| JP5124397B2 (en) * | 2008-09-01 | 2013-01-23 | 本田技研工業株式会社 | I / O devices for automobiles |
| JP2010181978A (en) * | 2009-02-03 | 2010-08-19 | Seiko Epson Corp | Collaborative work apparatus and method of controlling collaborative work |
| JP2010205223A (en) * | 2009-03-06 | 2010-09-16 | Seiko Epson Corp | System and device for control following gesture for virtual object |
| JP5552947B2 (en) * | 2010-07-30 | 2014-07-16 | ソニー株式会社 | Information processing apparatus, display control method, and display control program |
| JP5708083B2 (en) * | 2011-03-17 | 2015-04-30 | ソニー株式会社 | Electronic device, information processing method, program, and electronic device system |
| EP2717142A4 (en) * | 2011-05-30 | 2015-01-07 | Honda Motor Co Ltd | Input device |
-
2013
- 2013-03-04 JP JP2013041399A patent/JP6041708B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2014170339A (en) | 2014-09-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5349493B2 (en) | Display input device and in-vehicle information device | |
| JP5430782B2 (en) | Display input device and in-vehicle information device | |
| JP5355683B2 (en) | Display input device and in-vehicle information device | |
| JP5052677B2 (en) | Display input device | |
| JP5704408B2 (en) | Operation input system | |
| CN108431757B (en) | Vehicle-mounted device, display area segmentation method and computer-readable storage medium | |
| JP5561092B2 (en) | INPUT DEVICE, INPUT CONTROL SYSTEM, INFORMATION PROCESSING METHOD, AND PROGRAM | |
| JPWO2010064387A1 (en) | Display input device | |
| JP2019175449A (en) | Information processing apparatus, information processing system, movable body, information processing method, and program | |
| JP5933468B2 (en) | Information display control device, information display device, and information display control method | |
| WO2015083267A1 (en) | Display control device, and display control method | |
| JP6041708B2 (en) | In-vehicle information display control device, in-vehicle information display device, and information display control method | |
| JP5889230B2 (en) | Information display control device, information display device, and information display control method | |
| JP5984718B2 (en) | In-vehicle information display control device, in-vehicle information display device, and information display control method for in-vehicle display device | |
| JP6147357B2 (en) | Display control apparatus and display control method | |
| JP5950851B2 (en) | Information display control device, information display device, and information display control method | |
| JP2000029382A (en) | Map display device, map display method and recording medium of map display program | |
| JP6180306B2 (en) | Display control apparatus and display control method | |
| JP2013134722A (en) | Operation input system | |
| JP5423279B2 (en) | User interface device | |
| JP2018063521A (en) | Display control system and display control program | |
| KR20140135081A (en) | Potable electronic chart display and information system using electronic navigational chart viewer component available on multiple platforms, and potable electronic chart display method thereof | |
| JP2017182260A (en) | Display processing apparatus and display processing program | |
| JP2015108984A (en) | Display controller and display control method | |
| JP2005156238A (en) | Vehicle-mounted picture display control device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150205 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151216 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160202 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160330 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160628 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160818 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20161011 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161108 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6041708 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |