JP2014170344A - Information display control device, information display device, and information display control method - Google Patents
Information display control device, information display device, and information display control method Download PDFInfo
- Publication number
- JP2014170344A JP2014170344A JP2013041429A JP2013041429A JP2014170344A JP 2014170344 A JP2014170344 A JP 2014170344A JP 2013041429 A JP2013041429 A JP 2013041429A JP 2013041429 A JP2013041429 A JP 2013041429A JP 2014170344 A JP2014170344 A JP 2014170344A
- Authority
- JP
- Japan
- Prior art keywords
- display
- prompt
- input
- input surface
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
Description
本発明は、情報表示制御装置、情報表示装置および情報表示制御方法に関する。 The present invention relates to an information display control device, an information display device, and an information display control method.
下記特許文献１には、プロンプター方式と称される遠隔操作技術を採用したカーナビゲーション装置が紹介されている。このカーナビゲーション装置では、表示装置が車両のセンターコンソールの上部に取り付けられ、タッチパネルが該センターコンソールの下部に取り付けられている。さらに、タッチパネル上を移動する手を撮影するためのカメラが設けられている。タッチパネルの表面に指を当てて上下左右に移動させると、カメラが、操作する手を含むタッチパネルの表面を撮影する。撮影映像から手の画像が抽出され、その手画像がメインの画像に重畳される。タッチパネル上での指の移動に併せて、表示画面上を手画像が移動するので、あたかもタッチパネル付き画面を操作しているような感覚が得られる。
The following
下記特許文献２には、パーソナルコンピュータの使用環境において、タブレット上にペンで筆記することによって入力操作を行う技術が紹介されている。特にペンの３次元位置を検出する種々の技術が紹介されている。また、画面上のカーソルに影を付け、その影を、タブレット上方のペンの高さに応じて変化させることにより、手元を見なくても実際のペンが置かれている空間位置を把握できるとしている。 Patent Document 2 below introduces a technique for performing an input operation by writing with a pen on a tablet in a use environment of a personal computer. In particular, various techniques for detecting the three-dimensional position of the pen have been introduced. In addition, by adding a shadow to the cursor on the screen and changing the shadow according to the height of the pen above the tablet, it is possible to grasp the spatial position where the actual pen is placed without looking at the hand Yes.
特許文献１の技術では、タッチパネルの表示面の全面が、入力面になっている。また、特許文献２の技術では、タブレットの入力面の全面が、表示面の全面に対応している。すなわち、従来技術では、入力面の全面が表示面の全面に対応付けられており、しかもその対応付けは固定されている。
In the technique of
したがって、入力面と表示面とを相似形にする必要がある。例えば、表示面の形状が先に設計される場合、それと相似形の入力面を有した入力装置を調達しなければならない。逆の状況も起こりうる。すなわち、入力面と表示面とを相似形にしなければならないという制約は、製品開発（仕様設計、デザイン設計、等）の自由度を狭めてしまう。また、その結果、例えば、製品の操作性が低くなってしまうことも考えられる。 Therefore, it is necessary to make the input surface and the display surface similar. For example, when the shape of the display surface is designed first, an input device having an input surface similar to that must be procured. The reverse situation can also occur. That is, the restriction that the input surface and the display surface must be similar reduces the degree of freedom in product development (specification design, design design, etc.). As a result, for example, the operability of the product may be lowered.
本発明は、上記制約を不要にしうる技術を提供することを目的とする。 An object of this invention is to provide the technique which can make the said restrictions unnecessary.
本発明の一形態に係る情報表示制御装置は、表示装置用接続部と、入力装置用接続部と、制御部とを含む。表示装置用接続部は、表示面を有する表示装置が接続される。入力装置用接続部は、入力面上における指示物の位置である入力面内位置を検出する入力装置が接続され、入力装置から検出結果に関する位置情報が入力される。制御部は、プロンプト表示領域設定処理と、２次元位置変換処理と、表示画像データ生成処理とを行う。プロンプト表示領域設定処理では、制御部は、表示面にプロンプト表示領域を設定する。２次元位置変換処理では、制御部は、入力面内位置を、プロンプト表示領域内の対応位置である表示面内位置に、入力面と入力面内位置との位置関係がプロンプト表示領域と表示面内位置との位置関係に保持されるように規定された変換規則に従って、変換する。表示画像データ生成処理では、制御部は、２次元位置変換処理で得られた表示面内位置にプロンプトを表示させるための表示画像データを生成する。 An information display control device according to an aspect of the present invention includes a display device connection unit, an input device connection unit, and a control unit. The display device connection section is connected to a display device having a display surface. The input device connection unit is connected to an input device that detects the position in the input surface, which is the position of the indicator on the input surface, and position information related to the detection result is input from the input device. The control unit performs prompt display area setting processing, two-dimensional position conversion processing, and display image data generation processing. In the prompt display area setting process, the control unit sets a prompt display area on the display surface. In the two-dimensional position conversion process, the control unit sets the input surface position to the display surface position corresponding to the prompt display region, and the positional relationship between the input surface and the input surface position is the prompt display region and the display surface. Conversion is performed according to a conversion rule defined so as to be held in a positional relationship with the internal position. In the display image data generation process, the control unit generates display image data for displaying a prompt at a position on the display surface obtained by the two-dimensional position conversion process.
上記一形態によれば、表示面にプロンプト表示領域が設定され、入力面と入力面内位置との位置関係がプロンプト表示領域と表示面内位置との位置関係に保持されるように、入力面内位置から表示面内位置への変換が行われる。このため、入力面と表示面とが相似形である必要はないし、さらに入力面とプロンプト表示領域とが相似形である必要もない。このため、製品開発（仕様設計、デザイン設計、等）に高い自由度を与えることができる。それにより、例えば、製品の操作性の向上に貢献する。 According to the above aspect, the prompt display area is set on the display surface, and the positional relationship between the input surface and the input surface position is maintained in the positional relationship between the prompt display region and the display surface position. Conversion from the internal position to the display surface position is performed. For this reason, the input surface and the display surface do not need to be similar, and the input surface and the prompt display area do not need to be similar. For this reason, a high degree of freedom can be given to product development (specification design, design design, etc.). Thereby, for example, it contributes to the improvement of the operability of the product.
本発明の目的、特徴および利点は、以下の詳細な説明と添付図面とによって、より明白となる。 The objects, features and advantages of the present invention will become more apparent from the following detailed description and the accompanying drawings.
＜実施の形態１＞
＜全体構成の概略＞
図１に、実施の形態１に係る情報表示装置１のブロック図を例示する。図１では情報表示装置１が、移動体の一例である自動車に搭載される場合を例示しており、そのような使用環境下で情報表示装置１に接続される種々の装置も例示している。なお、情報表示装置１は、自動車以外の車両（例えば鉄道車両）に搭載されてもよいし、車両以外の移動体（例えば飛行機、船）に搭載されてもよい。
<
<Overview of overall configuration>
FIG. 1 illustrates a block diagram of the
図１の例によれば、情報表示装置１は表示装置２と情報表示制御装置３とに大別され、情報表示制御装置３に入力装置４と、スピーカ５と、ＡＶ（Audio-Visual）機器６と、現在位置検出装置７とが接続されている。なお、スピーカ５の接続は任意であり、ＡＶ機器６と現在位置検出装置７のそれぞれも同様である。
According to the example of FIG. 1, the
表示装置２は、各種情報を表示する。表示装置２は、例えば、複数の画素がマトリクス状に配置されることによって構成された表示面２ａと、情報表示制御装置３から取得した表示画像データに基づいて各画素を駆動する（換言すれば、各画素の表示状態を制御する）駆動装置と、を含んでいる。なお、表示画像データは、予め定められた信号フォーマットの映像信号（デジタル信号でもアナログ信号でもよい）として、情報表示制御装置３から表示装置２に供給される。表示装置２で表示する画像は、静止画像の場合もあるし、動画像の場合もあるし、さらには静止画像と動画像の組み合わせの場合もある。
The display device 2 displays various information. The display device 2 drives each pixel based on, for example, a
表示装置２は、例えば液晶表示装置によって構成可能である。この例によれば、表示パネル（ここでは液晶パネル）の表示領域が表示面２ａに対応し、表示パネルに外付けされた駆動回路が上記駆動装置に対応する。なお、駆動回路の一部が表示パネルに内蔵される場合もある。液晶表示装置の他に、エレクトロルミネセンス（ＥＬ）表示装置、プラズマディスプレイ装置、等によって、表示装置２を構成することも可能である。
The display device 2 can be configured by a liquid crystal display device, for example. According to this example, the display area of the display panel (here, the liquid crystal panel) corresponds to the
情報表示制御装置３は、各種の処理を行う。具体的には、情報表示制御装置３は、表示装置２およびスピーカ５に供給する信号を生成する。また、情報表示制御装置３は、入力装置４から入力される情報（指示を含む）を解析し、解析結果に応じた各種処理（例えば表示装置２の制御）を行う。また、情報表示制御装置３は、ＡＶ機器６から入力されるＡＶ信号を表示装置２およびスピーカ５向けに加工する。また、情報表示制御装置３は、ユーザ指示に応じてＡＶ機器６を制御する。また、情報表示制御装置３は、現在位置検出装置７から入力される情報を使って、ナビゲーション機能等を実現する。
The information
入力装置４は、ユーザから情報（指示を含む）を受け付ける。入力装置４は、例えば、ユーザが入力のために用いる指示物を検出する検出部と、検出部によって検出された結果を検出信号として情報表示制御装置３へ出力する検出信号出力部と、を含んでいる。
The
特に、入力装置４は、入力面４ａを有し、入力面４ａ上の空間に存在する指示物の３次元位置を検出し、検出結果に関する３次元位置情報を出力する。ここでは、そのような３次元位置検出機能を有する入力装置４として、非接触型（３次元（３Ｄ）型とも称される）のタッチパネルを例示する。非接触型タッチパネルとして種々の方式が開発されているが、例えば、静電容量方式の一つである投影容量方式が知られている。以下では入力装置４をタッチパネル４と称する場合がある。なお、タッチパネルはタッチパッドと称される場合もある。
In particular, the
但し、実施の形態１では、入力装置４は接触型（２次元（２Ｄ）型とも称される）であってもよい。接触型では、入力面４ａ上方の指示物は検出されず、指示物が入力面４ａに接触している状態において入力面４ａ上における指示物の２次元位置が検出される。
However, in the first embodiment, the
タッチパネル４の入力面４ａにはセンサが設けられており、各センサの出力信号の状態から、入力面４ａ上および入力面４ａ上方における指示物の３次元位置を特定可能である。特定された３次元位置は例えば、入力面４ａに予め設定された３次元座標上の座標データによって表現される。この場合、入力面４ａ上で指示物を移動させると指示物の位置を示す座標データが変化するので、連続的に取得される一連の座標データによって指示物の移動を検出可能である。なお、座標以外の手法によって指示物の３次元位置情報を表現してもよい。
A sensor is provided on the
タッチパネル４は、指示物の３次元位置の検出だけでなく、入力面４ａに対する指示物の押圧力を検出可能な構成を採用してもよい。
The
タッチパネル４は情報表示装置１専用であってもよいし、あるいは、汎用の情報端末機に搭載されているタッチパネルをタッチパネル４として利用してもよい。
The
なお、入力に用いる上記指示物が、ユーザの指（より具体的には、指先）である場合を例示する。但し、例えばスタイラスペン（タッチペンとも称される）等の道具を指示物として利用してもよい。 In addition, the case where the said instruction | indication used for input is a user's finger | toe (specifically fingertip) is illustrated. However, a tool such as a stylus pen (also referred to as a touch pen) may be used as an indicator.
スピーカ５は、聴覚的情報を出力する。例えば、ＣＤ等の音声、操作音、通知音、効果音、ガイダンス音声、等がスピーカ５から出力される。ＡＶ機器６は例えば、ＣＤ、ＤＶＤ、ＳＤメモリカード等のメディアに記録されているＡＶデータを再生する。
The
現在位置検出装置７は、自動車の現在位置を検出する。現在位置検出装置７は、例えば、ＧＰＳ（Global Positioning System）受信装置である。ＧＰＳ受信装置は、ＧＰＳ受信用のアンテナを介してＧＰＳ衛星から受信した情報に基づいて自車位置の現在位置を取得する。なお、ＧＰＳに代えて、加速度センサ、ジャイロまたは車速検出器によって、現在位置検出装置７を構成してもよい。あるいは、それらの組み合わせによって、現在位置検出装置７を構成してもよい。
The current
ここで、図２に、表示装置２の表示面２ａとタッチパネル４の入力面４ａの配置位置を例示する。図２の例では、表示装置２は統合インストルメントパネルを構成し、表示面２ａは運転席正面に配置されている。
Here, FIG. 2 illustrates the arrangement positions of the
統合インストルメントパネルとは、例えば、メータ（車速計、回転計、等）、各種警報、ナビゲーション画像、各種装置（ＡＶ機器６等）の動作状況、車載カメラによる撮影映像を、統合的に表示可能な表示盤である。統合インストルメントパネルによれば、１種類または複数種類の情報がレイアウト表示され、また、表示する情報を切り替え可能である。情報のレイアウトおよび切り替えはユーザが操作可能であってもよい。なお、統合インストルメントパネルは、統合ダッシュボード、メータクラスタ、等とも称される。
The integrated instrument panel can, for example, display meters (vehicle speedometers, tachometers, etc.), various alarms, navigation images, operating status of various devices (
なお、図２に２点鎖線で示すように、表示面２ａはダッシュボード中央、すなわち運転席正面と助手席正面の間に配置されてもよい。
2, the
他方、タッチパネル４の入力面４ａは、表示面２ａとは別の場所に配置されている。図２の例では、入力面４ａは、運転席横（助手席側）に、天井に向く姿勢で配置されている。なお、図２に２点鎖線で示すように、入力面４ａはダッシュボードに、運転席後方に向く姿勢で配置されてもよい。入力面４ａの配置場所は上記に限るものではない。
On the other hand, the
いずれの配置例においても、ユーザ（運転手）は、表示面２ａと入力面４ａとを同時に視界に入れるのが難しい。このため、従来であれば、入力操作時に表示面と入力面とを交互に見ることになるであろう。さらに、運転中は、車両前方を特に注視する必要がある。このような環境下においても情報表示装置１によれば、後述のように、操作性の向上等を図ることができる。
In any arrangement example, it is difficult for the user (driver) to put the
なお、情報表示装置１の利用環境は自動車等の移動体内に限定されるものではない。例えば、表示面２ａおよび入力面４ａは卓上に配置されてもよいし、あるいは、表示面２ａを室内壁面に配置してもよい。すなわち、表示面２ａと入力面４ａとが離れるほど、表示面２ａと入力面４ａを同時に視界に入れるのが難しくなる。また、表示面２ａが大きくなるほど、同様の傾向が生じる。
The usage environment of the
図３に、情報表示制御装置３のブロック図を例示する。図３の例によれば、情報表示制御装置３は、制御部１１と、記憶部１２と、接続部２２，２４，２５，２６，２７とを含んでいる。
FIG. 3 illustrates a block diagram of the information
制御部１１は、情報表示制御装置３における（換言すれば、情報表示装置１における）各種の処理を行う。例えば、制御部１１は、タッチパネル４（図１参照）から入力された情報を解析し、その解析結果に応じた画像データを生成し、その画像データを表示装置２へ出力する。
The
ここでは、制御部１１が中央演算処理部（例えば１つまたは複数のマイクロプロセッサで構成される）と主記憶部（例えばＲＯＭ、ＲＡＭ、フラッシュメモリ等の１つまたは複数の記憶装置で構成される）とによって構成される場合を例示する。この例によれば、主記憶部に格納された各種プログラム（換言すれば、アプリケーション）を中央演算処理部が実行することによって（換言すれば、ソフトウェアによって）、各種処理が実行される。各種処理は並列的に実行させることも可能である。なお、各種処理によって、それに対応した各種機能が実現される。
Here, the
制御部１１が実行するプログラムとして、入力解析、画像生成、ナビゲーション、ＡＶ再生、等のプログラムが挙げられる。
Examples of programs executed by the
制御部１１が実行するプログラムは、予め制御部１１の主記憶部に格納されていてもよいし、あるいは、実行時に記憶部１２から読み出されて主記憶部に格納されてもよい。主記憶部は、プログラムだけでなく各種データの格納にも利用される。また、主記憶部は、中央演算処理部がプログラムを実行する際の作業領域を提供する。また、主記憶部は、表示装置２に表示する画像を書き込むため画像保持部を提供する。画像保持部はビデオメモリまたはグラフィックメモリと称される場合もある。
The program executed by the
なお、制御部１１が行う処理の全部又は一部が、ハードウェア（例えば、特定の演算を行うように構成された演算回路等）として構成されていてもよい。
Note that all or part of the processing performed by the
記憶部１２は、各種情報を格納する。ここでは、記憶部１２は、制御部１１が利用する補助記憶部として設けられている。記憶部１２は、例えば、ハードディスク装置、光ディスク、書き換え可能かつ不揮発性の半導体メモリ、等の記憶装置の１つ以上を利用して構成可能である。
The
記憶部１２に格納される情報として、画像データ（アイコン、プロンプト、地図、等）、音声データ（操作音、通知音、効果音、ガイダンス音声、等）、ＡＶデータ、等が挙げられる。
Examples of information stored in the
接続部２２は、表示装置２用に設けられ、表示装置２と制御部１１とを信号伝送可能に接続する。なお、表示装置２と制御部１１との間の信号伝送は、有線、無線、またはそれらの組み合わせのいずれであってもよい。
The
接続部２２は例えば配線である。また、接続部２２は例えば配線接続用のコネクタを含んでもよく、この場合、表示装置２は接続相手となるコネクタを有する。
The
また、接続部２２は例えば、制御部１１から表示装置２へ伝送する信号を生成する信号生成回路を含んでもよい。具体的に、その信号生成回路は、制御部１１で生成されたデジタル信号（制御指示、画像データ、等）を伝送するためのアナログ伝送信号を生成する。この場合、表示装置２は、接続部２２の信号生成回路に対応した信号生成回路を有する。なお、表示装置２が制御部１１へ向けて信号を伝送可能である場合、接続部２２の信号生成回路は、表示装置２から送られてきたアナログ伝送信号から、制御部１１が取り扱い可能なデジタル信号を生成する。
The
また、接続部２２および表示装置２の信号生成回路は、上記アナログ伝送信号として無線信号を生成する構成であってもよい。この場合、接続部２２および表示装置２はアンテナも含むことになる。
Further, the
接続部２４はタッチパネル４用に設けられ、接続部２５はスピーカ５用に設けられ、接続部２６はＡＶ機器６用に設けられ、接続部２７は現在位置検出装置７用に設けられている。これらの接続部２４，２５，２６，２７も、表示装置２用の接続部２２と同様に構成可能である。
The
なお、スピーカ５用の接続部２５の搭載は任意である。また、スピーカ５用の接続部２５を搭載していても、スピーカ５を接続しない構成を採用してもよい。ＡＶ機器６用の接続部２６と現在位置検出装置７の接続部２７のそれぞれも同様である。
In addition, mounting of the
＜動作例＞
図４に、実施の形態１に係る動作例のフローチャートを示す。
<Operation example>
FIG. 4 shows a flowchart of an operation example according to the first embodiment.
＜プロンプト表示領域設定処理＞
図４に例示の処理Ｓ１０によれば、ステップＳ１１において制御部１１は、表示面２ａのうちでプロンプトを表示する領域であるプロンプト表示領域を、表示面２ａに設定する（プロンプト表示領域設定処理）。プロンプト表示領域は、表示面２ａのうちでプロンプトが移動可能な領域であるプロンプト可動領域と称してもよい。なお、プロンプトは、指示物の入力面４ａ上の位置情報を表示面２ａにおいて表現する描画要素であり、カーソル、ポインタ、等と称される場合もある。
<Prompt display area setting process>
According to the process S10 illustrated in FIG. 4, in step S11, the
ステップＳ１１では、例えば、表示面２ａにおける表示情報のレイアウトに応じて、プロンプト表示領域の形状、大きさ、配置位置、等が設定される。すなわち、プロンプト表示領域の形状、大きさ、配置位置、等は可変である。図５にプロンプト表示領域２ｂの一例を示す。図５の例では、統合インストルメントパネルを提供する表示面２ａのうちで、メータが表示されているメータ領域以外に、プロンプト表示領域２ｂが設定されている。例えば、プロンプト表示領域２ｂには制御アイコン、地図画像等が表示され、ユーザはプロンプト３１を使って制御アイコン、地図画像等を操作可能である。
In step S11, for example, the shape, size, arrangement position, etc. of the prompt display area are set according to the layout of the display information on the
なお、表示面２ａのうちでプロンプト表示領域２ｂ以外の領域（図５の例ではメータ領域）を、プロンプト非表示領域２ｃと称することにする。図５および後出の図面では、図面を見やすくするために、プロンプト表示領域２ｂに砂状ハッチングを施しているが、当該ハッチングはプロンプト表示領域２ｂの色等を限定するものではない。
In the
図６に、プロンプト表示領域２ｂの他の例を示す。なお、図６には説明のために入力面４ａも図示しているが、図６は入力面４ａと表示面２ａとの実寸法比を限定するものではない。図６の例では、プロンプト表示領域２ｂは入力面４ａと同様に四角形をしているが、プロンプト表示領域２ｂと入力面４ａとは相似形ではない。また、プロンプト表示領域２ｂは、表示面２ａの一部に設定されている。
FIG. 6 shows another example of the
なお、図６では、入力面４ａの左下頂点を仮想的なｘｙｚ座標系の原点に選び、入力面４ａの横方向および縦方向にｘ軸およびｙ軸にそれぞれ設定し、入力面４ａの法線方向にｚ軸を設定している。但し、座標系の設定はこれに限定されるものではない。例えば、入力面４ａの中心に原点を設定してもよいし、あるいは、原点を入力面４ａの上方に設定してもよい。しかし、どのような座標系も（直交座標系以外も含む）、図６に例示したｘｙｚ座標系に変換可能である。すなわち、図６の例示したｘｙｚ座標系であっても、一般性を失うことはない。また、図６では表示面２ａに対しても同様にして、仮想的なＸＹ座標を設定している。
In FIG. 6, the lower left vertex of the
＜位置情報取得処理＞
ステップＳ１２では、タッチパネル４が入力面４ａ上の空間に存在する指示物を検出し、制御部１１がその検出結果である３次元位置情報を、接続部２４を介してタッチパネル４から取得する（位置情報取得処理）。
<Location information acquisition processing>
In step S12, the
＜２次元位置変換処理＞
そして、制御部１１は、ステップＳ１３において、３次元位置情報に基づき、指示物の入力面内位置を、表示装置２の表示面内位置に変換する（２次元位置変換処理）。特に、表示面内位置はプロンプト３１（図６参照）を配置する位置であり、このため表示面内位置はプロンプト表示領域２ｂ内に設定される。ここで、図７に２次元位置変換処理の説明図を示す。
<Two-dimensional position conversion processing>
In step S13, the
図７に示すように、入力面内位置は、入力面４ａのうちで入力面４ａの法線（図７ではｚ軸に平行な線である）に沿った指示物の直下位置のことである。換言すれば、指示物から入力面４ａへ下ろした垂線と、入力面４ａとの交点が、指示物の入力面内位置である。より具体的には図７の左部に示すように、指示物の位置の座標が（ｘ０，ｙ０，ｚ０）である場合、入力面内位置の座標は（ｘ０，ｙ０，０）、換言すれば（ｘ０，ｙ０）である。
As shown in FIG. 7, the position within the input surface is a position directly below the indicator along the normal line of the
得られた入力面内位置（ｘ０，ｙ０）は、例えば予め規定された変換規則によって、表示装置２の表示面内位置（Ｘ０，Ｙ０）に変換される。変換規則は変換式、変換テーブル、等によって具現化可能である。変換式を一般化すれば、Ｘ０＝ｆｘ（ｘ０，ｙ０）、Ｙ０＝ｆｙ（ｘ０，ｙ０）で与えられる。また、表示面２ａが曲面にデザインされている場合でも、その曲面デザインに応じて適切な変換式を規定することは可能である。
The obtained input in-plane position (x0, y0) is converted into the display in-plane position (X0, Y0) of the display device 2 by, for example, a predetermined conversion rule. The conversion rule can be embodied by a conversion formula, a conversion table, or the like. If the conversion formula is generalized, X0 = fx (x0, y0) and Y0 = fy (x0, y0) are given. Even when the
ここで、表示面内位置は、上記のように、プロンプト３１の配置位置として、プロンプト表示領域２ｂ内に設定される。このため、指示物が移動するのに応じて、プロンプト３１もプロンプト表示領域２ｂ内で同様に移動する必要がある。すなわち、入力面内位置が移動するのに応じて、表示面内位置もプロンプト表示領域２ｂ内で同様に移動するように、入力面内位置と表示面内位置とが対応付けられる。そのような対応付けは、入力面４ａと入力面内位置（ｘ０，ｙ０）との位置関係が、プロンプト表示領域２ｂと表示面内位置（Ｘ０，Ｙ０）との位置関係においても保持されるように、変換規則を規定すればよい。
Here, the position in the display surface is set in the
図６の例を使って、より具体的に説明する。図６に示すように、入力面４ａの横寸法および縦寸法をｐおよびｑとし、プロンプト表示領域２ｂの横寸法および縦寸法をＰおよびＱとする。また、プロンプト表示領域２ｂの基点の座標を（Ｘａ，Ｙａ）とする。この場合、Ｘ０＝Ｘａ＋ｘ０×（Ｐ÷ｐ）およびＹ０＝Ｙａ＋ｙ０×（Ｑ÷ｑ）という変換式（換言すれば、変換規則）を採用することによって、入力面４ａと入力面内位置（ｘ０，ｙ０）との位置関係が、プロンプト表示領域２ｂと表示面内位置（Ｘ０，Ｙ０）との位置関係において保持可能である。なお、図６では基点（Ｘａ，Ｙａ）としてプロンプト表示領域２ｂの左下頂点（換言すれば、ＸＹ座標の原点に最も近い頂点）を選んでいるが、他の位置に基点（Ｘａ，Ｙａ）を選んでも同様にして変換式を求められる。
A more specific description will be given using the example of FIG. As shown in FIG. 6, let the horizontal dimension and the vertical dimension of the
また、図８に、別の形状のプロンプト表示領域２ｂを例示する。図８の例では、プロンプト表示領域２ｂは、四角形の上に半楕円形を載せた形状をしている。そのような形状のプロンプト表示領域２ｂにおいて表示面内位置（Ｘ０，Ｙ０）は次のようにして求められる。
FIG. 8 illustrates another shape of the
制御部１１は、プロンプト表示領域２ｂの全体を内包し且つ大きさが最小の四角形２ｄを仮想的に設定する。図８では、その仮想四角形２ｄの左下頂点がプロンプト表示領域２ｂの基点（Ｘａ，Ｙａ）に設定されている。また、仮想四角形２ｄの横寸法および縦寸法が、プロンプト表示領域２ｂの横寸法Ｐおよび縦寸法Ｑとされている。
The
制御部１１は、入力面内位置（ｘ０，ｙ０）から、入力面内位置（ｘ０，ｙ０）の角度θを算出する。当該角度θは、入力面４ａのｘｙ座標において、入力面内位置（ｘ０，ｙ０）と原点とを通る仮想直線４ｅが、ｘ軸と成す角度である。また、制御部１１は、原点から、仮想直線４ｅと入力面４ａの外形線との交点までの距離ｌｅｎ１を算出する。また、制御部１１は、原点から入力面内位置（ｘ０，ｙ０）までの距離ｌｅｎ２を算出する。
The
また、制御部１１は、表示面２ａのＸＹ座標において、基点（Ｘａ，Ｙａ）を通りＸ軸に対して角度θを成す仮想直線２ｅを求める。次に、制御部１１は、基点（Ｘａ，Ｙａ）から、仮想直線２ｅとプロンプト表示領域２ｂとの交点までの距離ＬＥＮ１を算出する。その後、制御部１１は、ＬＥＮ２＝ＬＥＮ１×（ｌｅｎ２÷ｌｅｎ１）という関係式を使って、距離ＬＥＮ２を算出する。そして、制御部１１は、仮想線２ｅ上において基点（Ｘａ，Ｙａ）から距離ＬＥＮ２だけ離れた位置を、表示面内位置（Ｘ０，Ｙ０）として求める。
Moreover, the
すなわち、図８に例示した形状のプロンプト表示領域２ｂに対する変換規則は、例えば上記処理手順によって、規定可能である。ここで、上記処理手順は、図６に例示した四角形のプロンプト表示領域２ｂにも利用可能である。このため、上記処理手順は、一般化された変換規則の一例を提供するものである。
That is, the conversion rule for the
＜表示画像データ生成処理＞
図４に戻り、制御部１１は、ステップＳ１４において、表示画像データを生成する（表示画像データ生成処理）。例えば、プロンプト用のレイヤ（換言すれば、画像保持部）にプロンプト３１の画像データを書き込み、アイコン用のレイヤにアイコンの画像データを書き込み、それらのレイヤと他のレイヤ（例えば地図画像データが書き込まれたレイヤ）とを合成することによって、表示画像データが生成される。ここで、プロンプト３１は、ステップＳ１３で得られた表示面内位置に表示されるように、表示画像データが生成される。ステップＳ１４で生成された表示画像データは、表示装置２へ伝送され、表示装置２によって表示面２ａに表示される。
<Display image data generation processing>
Returning to FIG. 4, in step S <b> 14, the
そして、制御部１１は、後続の検出タイミングで得られた３次元位置情報に対して、ステップＳ１２〜Ｓ１４を繰り返す。なお、制御部１１は、例えばプロンプト表示領域２ｂの形状等を変更した場合、処理Ｓ１０をステップＳ１１から実行する。
Then, the
このように、表示面２ａにプロンプト表示領域２ｂが設定され、入力面４ａと入力面内位置（ｘ０，ｙ０）との位置関係が、プロンプト表示領域２ｂと表示面内位置（Ｘ０，Ｙ０）との位置関係に保持されるように、入力面内位置（ｘ０，ｙ０）から表示面内位置（Ｘ０，Ｙ０）への変換が行われる。このため、入力面４ａと表示面２ａとが相似形である必要はないし、さらに入力面４ａとプロンプト表示領域２ｂとが相似形である必要もない。このため、製品開発（仕様設計、デザイン設計、等）に高い自由度を与えることができる。それにより、例えば、製品の操作性の向上に貢献する。
In this way, the
ここで、情報表示制御装置３では、プロンプト表示領域設定処理（ステップＳ１１参照）を採用しているので、プロンプト表示領域２ｂの形状、大きさ、配置位置、等が可変である。これに対し、従来技術（例えば特許文献１，２の技術）では、入力面の全面が表示面の全面に対応付けられており、しかもその対応付けは固定されている。つまり、従来技術では、入力面と表示面との対応付けが固定されているので、そもそもプロンプト表示領域設定処理を有していない。このため、構成および効果において、情報表示制御装置３は従来技術と相違する。
Here, since the information
また、プロンプト表示領域２ｂを表示面２ａの一部に対して設定する場合、従来技術に比べて高い操作性が得られる。すなわち、従来技術では入力面の全面が表示面の全面に対応付けられているので、表示面の一部においてプロンプトを操作する場合、入力面の一部（表示面の一部に対応する部分）において指示物を操作しなければならない。これに対し、情報表示制御装置３によれば、入力面４ａをより広く使って（ここでは入力面４ａの全面を使って）、プロンプト表示領域２ｂ（ここでは表示面２ａの一部に対して設定されている）内のプロンプト３１を操作可能である。このため、プロンプト３１の精細な操作が容易化され、例えば誤操作を低減できる。つまり、高い操作性が得られる。
Further, when the
なお、プロンプト表示領域設定処理の採用は、プロンプト表示領域２ｂを表示面２ａの全面に設定すること、および、プロンプト表示領域２ｂを入力面４ａと相似形に設定すること、を禁止するものではない。すなわち、プロンプト表示領域設定処理を採用しているからこそ、それらの設定も選択可能なのである。
The adoption of the prompt display area setting process does not prohibit setting the
ところで、入力面内位置（ｘ０，ｙ０）から表示面内位置（Ｘ０，Ｙ０）への変換規則（図６および図８参照）は、プロンプト表示領域２ｂが表示面２ａの一部に固定的に予め設定されている場合に対しても、適用可能である。なお、この場合、プロンプト表示領域２ｂは入力面４ａと相似形であってもよいし、相似形でなくてもよい。この例のフローチャートを図９に示す。図９に例示の処理Ｓ２０は、図４の処理Ｓ１０からプロンプト表示領域設定ステップＳ１１を省略したフローになっている。かかる処理Ｓ２０が、各検出タイミングで３次元位置情報が得られる度に、実行される。
By the way, according to the conversion rule (see FIGS. 6 and 8) from the position (x0, y0) in the input plane to the position (X0, Y0) in the display plane, the
このような適用例によっても、上記で説明した効果が得られる。また、当該適用例も、入力面の全面が表示面の全面に対応付けられ且つその対応付けが固定されている従来技術に対して、構成および効果において相違する。 The effects described above can also be obtained by such an application example. The application example also differs in configuration and effect from the related art in which the entire input surface is associated with the entire display surface and the association is fixed.
＜実施の形態２＞
実施の形態１では、入力面４ａの全面を利用する例を説明した。実施の形態２では、入力面４ａにプロンプト表示領域２ｂの形状に応じた領域を設定し、その領域を、入力を受付ける領域（以下、入力受付領域と称する）として利用する例を説明する。
<Embodiment 2>
In the first embodiment, the example in which the
図１０に、表示面２ａのプロンプト表示領域２ｂと、入力面４ａの入力受付領域４ｂとの関係を例示する。図１０では、図面を見やすくするために、入力受付領域４ｂに斜め交差状のハッチングを施しているが、当該ハッチングは入力受付領域４ｂの色等を限定するものではない。また、図１０では図８と同じ形状のプロンプト表示領域２ｂを例示しているが、プロンプト表示領域２ｂは他の形状であってもよい。なお、入力面４ａのうちで入力受付領域４ｂ以外の領域を、入力非受付領域４ｃと称することにする。
FIG. 10 illustrates the relationship between the
図１０に示すように、入力面４ａの入力受付領域４ｂは、プロンプト表示領域２ｂと相似形に設定される。かかる形状の入力受付領域４ｂ内に、指示物の入力面内位置（ｘ０，ｙ０）が存在する場合には、プロンプト表示領域２ｂ内の表示面内位置（Ｘ０，Ｙ０）にプロンプト３１を表示する。
As shown in FIG. 10, the
この際、入力受付領域４ｂとプロンプト表示領域２ｂとは相似形であるので、相似比をｒとして、Ｘ０＝ｘ０×ｒ＋Ｘａ、Ｙ０＝ｙ０×ｒ＋Ｙａという変換式（換言すれば、変換規則）によって、入力面内位置（ｘ０，ｙ０）を表示面内位置（Ｘ０，Ｙ０）に変換できる。すなわち、相似比ｒによる相似変換と、基点（Ｘａ，Ｙａ）分の平行移動とを利用して、位置変換を実行可能である。
At this time, since the
なお、図１０の例では入力受付領域４ｂの基点の座標を（ｘａ，ｙａ）をｘｙ座標の原点に設定しているが、（ｘａ，ｙａ）≠（０，０）であってもよい。（ｘａ，ｙａ）≠（０，０）の場合も、上記と同様にして変換式を規定可能である。
In the example of FIG. 10, the coordinates of the base point of the
他方、入力受付領域４ｂ内に指示物の入力面内位置（ｘ０，ｙ０）が存在しない場合、プロンプト３１を表示しない。
On the other hand, the prompt 31 is not displayed when the position (x0, y0) of the input object does not exist in the
図１１に、実施の形態２に係る動作例のフローチャートを示す。図１１に例示の処理Ｓ３０は、図４の処理Ｓ１０においてステップＳ１１，Ｓ１２の間に、入力受付領域４ｂを設定するステップＳ３１が追加されている。当該ステップＳ３１では、制御部１１が、上記のように入力面４ａに対してプロンプト表示領域２ｂと相似形の入力受付領域４ｂを設定する入力受付領域設定処理を、実行する。
FIG. 11 shows a flowchart of an operation example according to the second embodiment. In the process S30 illustrated in FIG. 11, a step S31 for setting the
他のステップＳ１１〜Ｓ１４は基本的に処理Ｓ１０の場合と同様であるが、２次元位置変換処理ステップＳ１３は、入力面内位置が入力受付領域４ｂ内に存在することを条件にして、実行される点が異なる。すなわち、処理Ｓ３０における２次元位置変換処理は、入力面内位置が入力受付領域４ｂ内に存在するか否かの判別処理も含んでいる。
The other steps S11 to S14 are basically the same as in the case of the process S10. However, the two-dimensional position conversion process step S13 is executed on the condition that the input in-plane position exists in the
処理Ｓ３０は、各検出タイミングで３次元位置情報が得られる度に、実行される。 Process S30 is executed each time three-dimensional position information is obtained at each detection timing.
実施の形態２によれば、入力受付領域４ｂがプロンプト表示領域２ｂと相似形であるので、指示物の移動量（換言すれば、入力面内位置の移動量）とプロンプト３１の移動量とが比例関係になる。このため、直感的な操作が確保される。また、指示物の入力面内位置（ｘ０，ｙ０）が入力受付領域４ｂ内に存在しない場合にはプロンプト３１を表示しないので、指示物がそのような状況にあることを表示面２ａを通して把握できる。
According to the second embodiment, since the
入力受付領域４ｂは入力面４ａにおいて最大の大きさで設定されるのが好ましい。これによれば、入力面４ａをより広く使って、プロンプト表示領域２ｂ内のプロンプト３１を操作可能である。このため、プロンプト３１の精細な操作が容易化され、例えば誤操作を低減できる。つまり、高い操作性が得られる。
The
また、制御部１１は、入力受付領域設定処理において、入力面４ａのうちで入力受付領域４ｂまたは入力非受付領域４ｃを選択的に盛り上げる指示を、タッチパネル４に与えてもよい。タッチパネル４が入力面４ａを部分的に盛り上げる機能を有している場合、タッチパネル４は制御部１１からの上記指示に従って該当する領域を盛り上げる。これによれば、ユーザは、その盛り上がりの境界を指示物を介して認識でき、それにより入力受付領域４ｂの範囲を入力面４ａを見なくても判別できる。このため、操作性が向上する。
Moreover, the
入力面４ａの盛り上げは、例えば、膨張素子を利用すれば実現可能である。膨張素子は、例えば、電解液の封止構造を有した素子によって実現可能である。具体的には、その電解液に電気を供給すると、素子内部に気体が発生し、それにより膨張する。
The raising of the
ここで、図１１の処理Ｓ３０では、ステップＳ１１においてプロンプト表示領域設定処理を実行する。このため、プロンプト表示領域２ｂは可変であり、プロンプト表示領域２ｂを表示面２ａの一部または全部に対して設定可能である。これに対し、プロンプト表示領域２ｂが表示面２ａの一部に固定的に予め設定されている場合に対しても、処理Ｓ３０を応用可能である。すなわち、処理Ｓ３０からステップＳ１１を省略してもよい。
Here, in process S30 of FIG. 11, a prompt display area setting process is executed in step S11. For this reason, the
なお、実施の形態２では、タッチパネル４は非接触型（３Ｄ型）と接触型（２Ｄ型）のいずれでもよい。
In the second embodiment, the
＜実施の形態３＞
ここで、特許文献１の技術では、カメラで撮影した画像は平面画像であるので、手の位置はその平面画像における２次元位置でしか識別できない。また、カメラによる撮影は、指がタッチパネルに接触している時に限られている。すなわち、手の２次元位置情報しか利用されない。
<
Here, in the technique of
他方、特許文献２の技術では、ペンの３次元位置を検出することができ、ペンの高さをカーソルの影に反映させることによって画面上でペンの高さを把握できる。しかし、特許文献２の技術はパーソナルコンピュータの使用環境が前提であるので、特許文献２の技術をそのまま他の使用環境で採用すると不便が生じる可能性がある。 On the other hand, in the technique of Patent Document 2, the three-dimensional position of the pen can be detected, and the height of the pen can be grasped on the screen by reflecting the height of the pen on the shadow of the cursor. However, since the technique of Patent Document 2 is premised on the use environment of a personal computer, there is a possibility that inconvenience may occur if the technique of Patent Document 2 is directly adopted in another use environment.
これに対し、実施の形態３および後述の実施の形態４，５では、指示物の３次元位置情報を使って、プロンプト表示領域２ｂにおける画面表示を工夫することにより、操作性の向上等を図る。さらに、後述の実施の形態５では、種々の使用環境においても、ユーザの操作感覚に配慮した快適な操作環境を提供する。
On the other hand, in
なお、実施の形態３〜５は実施の形態１を基礎として説明するが、実施の形態２を基礎にして実施の形態３〜５を構築することも可能である。以下に、まず、実施の形態３を説明する。
In addition, although Embodiment 3-5 demonstrates based on
＜プロンプト＞
実施の形態３では、プロンプト表示領域２ｂに表示するプロンプト３１に種々の工夫を施している。それを、図１２を参照して説明する。
<Prompt>
In the third embodiment, various ideas are applied to the prompt 31 displayed in the
図１２の例によれば、タッチパネル４の入力面４ａから指示物（ここでは指先）までの距離ｚ０に対して、３つの閾値ｚｔｈ１，ｚｔｈ２，ｚｔｈ３が予め設定されている。但し、閾値の数は３つに限定されるものではない。なお、指示物の距離ｚ０は、入力面４ａの法線に沿った距離のことであり、指示物の高さｚ０と表現してもよい。
According to the example of FIG. 12, three threshold values zth1, zth2, and zth3 are set in advance with respect to the distance z0 from the
ここではｚｔｈ１＜ｚｔｈ２＜ｚｔｈ３であり、例えば、ｚｔｈ１＝１ｃｍ、ｚｔｈ２＝２ｃｍ、ｚｔｈ３＝３ｃｍである。なお、ｚｔｈ１，ｚｔｈ２，ｚｔｈ３は不等間隔に設定してもよい。 Here, zth1 <zth2 <zth3, for example, zth1 = 1 cm, zth2 = 2 cm, and zth3 = 3 cm. Note that zth1, zth2, and zth3 may be set at unequal intervals.
３つの閾値ｚｔｈ１，ｚｔｈ２，ｚｔｈ３によって、指示物の距離ｚ０に対して、５つの距離レベル（換言すれば、高さレベル）ｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３，ｚｌｖｌ４が予め設定されている。すなわち、距離レベルｚｌｖｌ０はｚ０＝０に対応し、距離レベルｚｌｖｌ１は０＜ｚ０＜ｚｔｈ１に対応し、距離レベルｚｌｖｌ２はｚｔｈ１＜ｚ０＜ｚｔｈ２に対応し、距離レベルｚｌｖｌ３はｚｔｈ２＜ｚ０＜ｚｔｈ３に対応し、距離レベルｚｌｖｌ４はｚｔｈ３＜ｚ０に対応する。なお、ｚ０＝ｚｔｈ１を距離レベルｚｌｖｌ１，ｚｌｖｌ２のいずれに含めるかは予め規定しておけばよい。ｚ０＝ｚｔｈ２およびｚ０＝ｚｔｈ３も同様である。なお、図１２の例では、ｚ０＝０に対して距離レベルｚｌｖｌ０を割り当てているが、ｚ０＝０を距離レベルｚｌｖｌ１に含めてもよい。 Five distance levels (in other words, height levels) zlvl0, zlvl1, zlvl2, zlvl3, and zlvl4 are set in advance with respect to the distance z0 of the indicator by the three threshold values zth1, zth2, and zth3. That is, the distance level zlvl0 corresponds to z0 = 0, the distance level zlvl1 corresponds to 0 <z0 <zth1, the distance level zlvl2 corresponds to zth1 <z0 <zth2, and the distance level zlvl3 corresponds to zth2 <z0 <zth3. The distance level zlvl4 corresponds to zth3 <z0. It should be specified in advance whether z0 = zth1 is included in the distance levels zlvl1 and zlvl2. The same applies to z0 = zth2 and z0 = zth3. In the example of FIG. 12, the distance level zlvl0 is assigned to z0 = 0, but z0 = 0 may be included in the distance level zlvl1.
図１２に示すように、各距離レベルｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３に対して、表現（換言すれば、見た目）の異なるプロンプト３１が予め設定されている。図１２の例では、距離レベルｚｌｖｌ３，ｚｌｖｌ２には、写実的に描画された指先の画像（写真でもよい）が、プロンプト３１の画像として割り当てられている。但し、距離レベルｚｌｖｌ３のプロンプト３１は、距離レベルｚｌｖｌ２のプロンプト３１よりも小さい。また、距離レベルｚｌｖｌ１には、物を指し示す際に一般に行われる人差し指を突き出した状態の手を、線図で簡略化した手画像が、割り当てられている。また、距離レベルｚｌｖｌ０には、距離レベルｚｌｖｌ１の簡略化された手画像に背景枠を追加した画像が、割り当てられている。なお、図１２の例では、指示物の距離ｚ０が距離レベルｚｌｖｌ４に該当する場合には、プロンプト３１を表示しない。 As shown in FIG. 12, prompts 31 having different expressions (in other words, appearance) are set in advance for each of the distance levels zlvl0, zlvl1, zlvl2, and zlvl3. In the example of FIG. 12, a realistically drawn image of a fingertip (may be a photograph) is assigned as an image of the prompt 31 to the distance levels zlvl3 and zlvl2. However, the prompt 31 of the distance level zlvl3 is smaller than the prompt 31 of the distance level zlvl2. Further, a hand image obtained by simplifying a hand in a state in which an index finger is protruded, which is generally performed when pointing to an object, with a diagram is assigned to the distance level zlvl1. Further, an image obtained by adding a background frame to a simplified hand image of the distance level zlvl1 is assigned to the distance level zlvl0. In the example of FIG. 12, when the distance z0 of the indicator corresponds to the distance level zlvl4, the prompt 31 is not displayed.
このように、距離レベルｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３ごとに、プロンプト３１の表現が異なっている。表現の相違は、表現要素が少なくとも１つが異なることによって、生じる。表現要素は例えば、大きさ、形状、色、模様、アニメーション表示である。このため、大きさと、形状と、色と、アニメーション表示とのうちの少なくとも１つの表現要素を、距離レベルｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３で変化させればよい。 Thus, the expression of the prompt 31 is different for each of the distance levels zlvl0, zlvl1, zlvl2, and zlvl3. Differences in expression occur due to differences in at least one expression element. The expression elements are, for example, size, shape, color, pattern, and animation display. For this reason, it is only necessary to change at least one expression element among the size, shape, color, and animation display at the distance levels zlvl0, zlvl1, zlvl2, and zlvl3.
図１３に、プロンプト３１の表現を指示物の距離ｚ０に応じて変化させる処理Ｓ４０のフローチャートを例示する。処理Ｓ４０は基本的には処理Ｓ１０（図４参照）と同様であるが、表示画像データ生成処理ステップＳ１４が、距離レベル判別処理ステップＳ１４ａと、プロンプト表現設定処理ステップＳ１４ｂとを含んでいる。 FIG. 13 illustrates a flowchart of the process S40 in which the expression of the prompt 31 is changed according to the distance z0 of the indicator. The process S40 is basically the same as the process S10 (see FIG. 4), but the display image data generation process step S14 includes a distance level determination process step S14a and a prompt expression setting process step S14b.
ステップＳ１４ａでは、制御部１１は、ステップＳ１２で取得した指示物の３次元位置情報に基づいて、指示物の距離ｚ０が、距離レベルｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３，ｚｌｖｌ４（図１２参照）のいずれに該当するかを判別する（距離レベル判別処理）。
In step S14a, based on the three-dimensional position information of the indicator acquired in step S12, the
次に、制御部１１は、ステップＳ１４ｂにおいて、プロンプト３１の表現を設定する（プロンプト表現設定処理）。特に、制御部１１は、ステップＳ１４ａで判別した距離レベルｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３，ｚｌｖｌ４を、予め定められた規則（図１２参照）に照合することによって、プロンプト３１の画像を選択する。これにより、指示物の距離レベルｚｌｖｌ０，ｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３，ｚｌｖｌ４に応じて、プロンプト３１の表現を変化させることができる。
Next, the
その後、制御部１１は、プロンプト３１が、ステップＳ１３で得られた表示面内位置に、ステップＳ１４ｂで設定された表現で以て表示されるように、表示画像データを生成する（表示画像データ生成処理）。
Thereafter, the
図１４に、プロンプト３１の表現の変化を例示する。なお、図１４では、紙面の大きさの都合で、プロンプト表示領域２ｂのみを図示している。また、プロンプト表示領域２ｂが四角形の場合を例示している。
FIG. 14 illustrates a change in the expression of the prompt 31. In FIG. 14, only the
図１４から分かるように、指示物の距離ｚ０が減少するに従って、すなわち指示物が入力面４ａに近づくに従って、プロンプト３１の表現が変化する。また、指示物の距離ｚ０が増大する場合にも、すなわち指示物が入力面４ａから遠ざかる場合にも、プロンプト３１の表現が変化する。
As can be seen from FIG. 14, the expression of the prompt 31 changes as the indicator distance z0 decreases, that is, as the indicator approaches the
なお、２次元位置変換ステップＳ１３は、距離レベル判別ステップＳ１４ａまたはプロンプト表現設定ステップＳ１４ｂよりも後で実行してもよい。 Note that the two-dimensional position conversion step S13 may be executed after the distance level determination step S14a or the prompt expression setting step S14b.
また、図１２の例によれば、指示物の距離ｚ０が距離レベルｚｌｖｌ４に該当する場合にはプロンプト３１を表示しない。このため、３次元位置情報取得ステップＳ１２の直後に距離レベル判別ステップＳ１４ａを実行し、指示物の距離ｚ０が距離レベルｚｌｖｌ４に該当することが判別されたならば、その３次元位置情報については、残りのステップＳ１３，Ｓ１４ｂを実行しないようにしてもよい。 Further, according to the example of FIG. 12, the prompt 31 is not displayed when the distance z0 of the indicator corresponds to the distance level zlvl4. Therefore, if the distance level determination step S14a is performed immediately after the three-dimensional position information acquisition step S12 and it is determined that the distance z0 of the indicator corresponds to the distance level zlvl4, The remaining steps S13 and S14b may not be executed.
このようにプロンプト３１の表現が指示物の距離ｚ０に応じて変化するので、ユーザ（ここでは運転手）は、タッチパネル４に向けた手元を見なくても、表示面２ａ（特にプロンプト表示領域２ｂ）を通じて、タッチパネル４までの距離ｚ０を把握することができる。このため、視線移動が減り、操作性が向上する。この点は、表示面２ａと入力面４ａとを同時に視界に入れるのが難しい環境下において、特に好適である。また、運転中に視線を車両前方から大きくそらすのを回避可能である。
Thus, since the expression of the prompt 31 changes according to the distance z0 of the indicator, the user (here, the driver) can display the
また、プロンプト３１の表現は、指示物の距離レベルごとに変化する。このため、プロンプトの大きさ等が連続的に変化する場合に比べて、プロンプト３１の変化に気付きやすい。換言すれば、認知性に優れる。 The expression of the prompt 31 changes for each distance level of the indicator. For this reason, it is easier to notice the change of the prompt 31 than when the size of the prompt changes continuously. In other words, it has excellent cognition.
また、プロンプトの大きさ等が連続的に変化する場合には、指示物の若干の揺れが、プロンプトの変化に過敏に反映されてしまう。しかし、プロンプト３１のように指示物の距離レベルごとの変化であれば、そのような過敏な変化を抑制できる。このため、例えば車中のように揺れが生じる環境下においても、プロンプト３１の表現が安定し、快適な操作性を提供可能である。 In addition, when the size of the prompt or the like changes continuously, a slight shaking of the indicator is reflected on the prompt change. However, if it is a change for each distance level of the indicator as in the prompt 31, such a sensitive change can be suppressed. For this reason, even in an environment in which shaking occurs, for example, in a vehicle, the expression of the prompt 31 is stable and comfortable operability can be provided.
ここで、図１２および図１４の例では、各距離レベルｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３，ｚｌｖｌ４内においてプロンプト３１の表現が変化しないものとした。これに対し、指示物の距離ｚ０が或る距離レベルに属している間に、プロンプト３１の表現を、指示物の距離ｚ０に応じて変化させてもよい。図１５にそのような例の説明図を示す。 Here, in the examples of FIGS. 12 and 14, the expression of the prompt 31 does not change in each distance level zlvl1, zlvl2, zlvl3, zlvl4. On the other hand, while the distance z0 of the indicator belongs to a certain distance level, the expression of the prompt 31 may be changed according to the distance z0 of the indicator. FIG. 15 shows an explanatory diagram of such an example.
図１５の例では、距離レベルｚｌｖｌ３において、プロンプト３１の大きさを指示物の距離ｚ０に応じて連続的に（換言すれば、無段階に）変化させる連続的変化を実行する。より具体的には、距離ｚ０が連続的に小さくなるのに従って、プロンプト３１を連続的に大きくする。逆に、距離ｚ０が連続的に大きくなるのに従って、プロンプト３１を連続的に小さくする。また、距離レベルｚｌｖｌ２においても、距離レベルｚｌｖｌ３と同様に、プロンプト３１の大きさについて連続的変化を実行する。なお、距離レベルｚｌｖｌ２，ｚｌｖｌ３間でプロンプト３１の大きさが連続していてもよいし、あるいは、そのような連続性が無くてもよい。 In the example of FIG. 15, at the distance level zlvl3, a continuous change is performed in which the size of the prompt 31 is changed continuously (in other words, steplessly) according to the distance z0 of the indicator. More specifically, the prompt 31 is continuously increased as the distance z0 is continuously reduced. Conversely, the prompt 31 is continuously reduced as the distance z0 is continuously increased. Also, at the distance level zlvl2, the size of the prompt 31 is continuously changed in the same manner as the distance level zlvl3. Note that the size of the prompt 31 may be continuous between the distance levels zlvl2 and zlvl3, or such continuity may not be present.
また、図１５の例では、距離ｚ０が距離レベルｚｌｖｌ３から距離レベルｚｌｖｌ２に変化するのに伴って、および、距離ｚ０が距離レベルｚｌｖｌ２から距離レベルｚｌｖｌ３に変化するのに伴って、プロンプト３１の色を変化させる。 In the example of FIG. 15, the color of the prompt 31 changes as the distance z0 changes from the distance level zlvl3 to the distance level zlvl2 and as the distance z0 changes from the distance level zlvl2 to the distance level zlvl3. To change.
すなわち、距離レベルｚｌｖｌ３では、距離レベルの変化に伴って変化させる表現要素とは異なる表現要素を、指示物の距離ｚ０に応じて連続的に変化させる。距離レベルｚｌｖｌ２においても同様である。このような連続的変化によれば、単一の距離レベル内においても指示物の距離ｚ０の変化を把握しやすくなる。 That is, at the distance level zlvl3, an expression element different from the expression element that is changed with the change in the distance level is continuously changed according to the distance z0 of the indicator. The same applies to the distance level zlvl2. Such a continuous change makes it easy to grasp the change in the distance z0 of the indicator within a single distance level.
また、上記のように、かかる連続的変化において変化させる表現要素を、距離レベルの変化に伴って変化させる表現要素とは異ならせている。このため、距離レベル単位でプロンプト３１の表現を変化させることに起因した上記効果を損なうものではない。 Further, as described above, the expression element that is changed in the continuous change is different from the expression element that is changed in accordance with the change in the distance level. For this reason, the said effect resulting from changing the expression of the prompt 31 per distance level is not impaired.
図１５の例では距離レベルｚｌｖｌ１ではプロンプト３１の大きさを変化させないものとしているが、距離レベルｚｌｖｌ１内でプロンプト３１の大きさを連続的に変化させてもよい。すなわち、距離レベルｚｌｖｌ１，ｚｌｖｌ２，ｚｌｖｌ３のうちの一部または全部の距離レベルにおいて連続的変化を採用可能である。特に一部の距離レベルで連続的変化を採用した場合、全ての距離レベルで連続的変化を採用する場合に比べて、プロンプト３１の描画処理にかかる負荷を軽減できる。 In the example of FIG. 15, it is assumed that the size of the prompt 31 is not changed at the distance level zlvv1, but the size of the prompt 31 may be continuously changed within the distance level zlvv1. That is, it is possible to employ a continuous change at some or all of the distance levels zlvl1, zlvl2, and zlvl3. In particular, when continuous changes are adopted at some distance levels, the load on the drawing process of the prompt 31 can be reduced as compared with the case where continuous changes are adopted at all distance levels.
なお、図１５の例とは異なり、大きさに代えてまたは加えて、他の表現要素を連続的に変化させてもよい。 Unlike the example of FIG. 15, other expression elements may be continuously changed instead of or in addition to the size.
＜プロンプトの付加情報＞
プロンプト３１に付加情報を追加してもよい。付加情報の一例である距離情報について、図１６を参照して説明する。図１６の例では、指示物の距離ｚ０が距離レベルｚｌｖｌ１である場合に、距離情報３２をプロンプト３１に付加する。但し、他の距離レベルｚｌｖｌ０，ｚｌｖｌ２，ｚｌｖｌ３において距離情報３２を付加してもよい。
<Prompt additional information>
Additional information may be added to the prompt 31. The distance information that is an example of the additional information will be described with reference to FIG. In the example of FIG. 16, the
図１６に例示の距離情報３２は、帯状の図形であり、指示物の距離ｚ０に応じて長さ（ここでは縦寸法）が変化する。かかる帯状の図形は、プロンプト３１の背景として追加される。
The
帯状図形による距離情報３２は、指示物の距離ｚ０が小さいほど（すなわち、指示物が入力面４ａに近いほど）、長くなる。例えば、図１７に示すように、帯状図形の長さａ（ｚ０）はｚｔｈ１／ｓを最大寸法とし、ａ（ｚ０）＝ｚｔｈ１／ｓ−ｚ０／ｓという式で与えられる。ｓは、距離ｚ０と表示時の大きさとの変換係数である。なお、ｚ０＝ｚｔｈ１の際にも長さを有するように（図１６参照）、オフセットを与えてもよい。また、ここでは幅（ここでは横寸法）は固定とするが、幅も距離ｚ０に連動させてもよい。
The
図１８に、距離情報３２の変化を例示する。図１８から分かるように、指示物の距離ｚ０が減少するに従って、距離情報３２である帯状図形が長くなる。逆に、指示物の距離ｚ０が増大するに従って、帯状図形は短くなる。
FIG. 18 illustrates changes in the
図１９に、距離情報３２を追加する場合のフローチャートを例示する。図１９の処理Ｓ５０は、図１３の処理Ｓ４０のステップＳ１４にステップＳ１４ｃ（付加情報設定処理）が追加されている。ステップＳ１４ｃでは、制御部１１は、指示物の距離ｚ０に応じて、距離情報３２である帯状図形の長さを設定する。そして、制御部１１は、距離情報３２付きのプロンプト３１を含んだ表示画像のデータを生成し、その表示画像が表示されるように表示装置２を制御する。
FIG. 19 illustrates a flowchart in the case of adding
図２０および図２１に、距離情報３２の他の例を示す。図２０の例では、距離情報３２は、矢印状の図形であり、矢印の長さが指示物の距離ｚ０に応じて変化する。図２１の例では、距離情報３２は、指示物の距離ｚ０に対応する数値である。なお、当該数値は、距離ｚ０の絶対的な数値でなくてもよく、例えば、距離ｚ０を、予め定められた規則で変換した相対的な数値であってもよい。また、図形表示と数値表示とを組み合わせて、距離情報３２を構成してもよい。
20 and 21 show other examples of the
距離情報３２によれば、表示面２ａを通じて、指示物の距離ｚ０を、さらに把握しやすくなる。また、距離情報３２を、入力面４ａに最も近い距離レベルｚｌｖｌ１において表示し、他の距離レベルｚｌｖｌ０，ｚｌｖｌ２，ｚｌｖｌ３では表示しない場合（図１６参照）、指示物が入力面４ａに近いことに気付きやすくなる。このため、指示物の入力面４ａへの接触をスムーズに行うことができる。
According to the
＜プロンプト等の他の例＞
以下に、プロンプト３１等の他の例を説明する。なお、以下の例示は、それぞれを単独で採用してもよいし、種々に組み合わせることも可能である。
<Other examples of prompts>
Other examples of the prompt 31 and the like will be described below. In addition, each of the following illustrations may be adopted alone or in various combinations.
プロンプト表現設定処理Ｓ１４ｂ（図１３および図１９を参照）において、プロンプト３１の表現をプロンプト３１の表示位置に応じて変化させるという位置連動条件を適用してもよい。例えば、次の第１〜第４の位置連動条件が挙げられる。 In the prompt expression setting process S <b> 14 b (see FIGS. 13 and 19), a position interlock condition that changes the expression of the prompt 31 according to the display position of the prompt 31 may be applied. For example, the following first to fourth position interlocking conditions can be mentioned.
第１の位置連動条件は、プロンプト３１を機能アイコン上に表示する場合、その機能アイコンに関連付けられている機能の種類に応じて、プロンプト３１の表現を変化させる、という条件である。例えば、図２２に示すように、プロンプト３１がナビゲーション関連のアイコンと重なる場合は、指形状の表現を用いる。これに対し、図２３に例示するように、プロンプト３１がＡＶ関連のアイコンと重なる場合は、音符形状の表現を用いる。 The first position interlocking condition is a condition that when the prompt 31 is displayed on the function icon, the expression of the prompt 31 is changed according to the type of the function associated with the function icon. For example, as shown in FIG. 22, when the prompt 31 overlaps with a navigation-related icon, a finger-shaped expression is used. On the other hand, as illustrated in FIG. 23, when the prompt 31 overlaps with an AV-related icon, a note-shaped expression is used.
第２の位置連動条件は、プロンプト３１をアイコン領域上に表示する場合と、プロンプト３１を画面操作領域上に表示する場合とで、プロンプト３１の表現を変化させる、という条件である。ここで、アイコン領域とは１つまたは複数のアイコンが配置された領域であり、図２４および図２５の画面例では、ＡＶ関連およびナビゲーション関連のアイコンが配置された画面右側の領域が、アイコン領域である。また、画面操作領域とはユーザが画面（換言すれば、表示内容）を操作可能な領域であり、表示内容操作領域と称してもよい。図２４および図２５の画面例では、中央部および左部からなる領域にスクロール等の操作が可能な地図画像が表示されており、この地図画像の領域が画面操作領域にあたる。第２の位置連動条件によれば、例えば、図２４に示すようにプロンプト３１をアイコン領域に表示する場合には線図の指画像を用い、図２５に示すようにプロンプト３１を画面操作領域に表示する場合は写実的な手画像を用いる。 The second position interlocking condition is a condition that the expression of the prompt 31 is changed between when the prompt 31 is displayed on the icon area and when the prompt 31 is displayed on the screen operation area. Here, the icon area is an area where one or more icons are arranged. In the screen examples of FIGS. 24 and 25, the area on the right side of the screen where the AV-related and navigation-related icons are arranged is the icon area. It is. The screen operation area is an area where the user can operate the screen (in other words, display content), and may be referred to as a display content operation area. In the screen examples of FIGS. 24 and 25, a map image that can be scrolled or the like is displayed in an area composed of the center part and the left part, and this map image area corresponds to the screen operation area. According to the second position interlocking condition, for example, when the prompt 31 is displayed in the icon area as shown in FIG. 24, a finger image of a diagram is used, and the prompt 31 is set in the screen operation area as shown in FIG. For display, a realistic hand image is used.
第３の位置連動条件は、プロンプト３１を操作許可アイコン（ユーザによる操作が許可されたアイコン）上に表示する場合と、プロンプト３１を操作不許可アイコン（ユーザによる操作が許可されていないアイコン）上に表示する場合とで、プロンプト３１の表現を変化させる、という条件である。例えば、多くの手順が予想される操作（例えば５０音検索）を走行中に行うのは好ましくないので、そのような操作は、走行中は操作不許可に設定される。この場合、図２６に例示するように、５０音検索アイコンの位置にプロンプト３１が存在する場合、そのプロンプト３１は、通常よりも小さく、且つ、透明度を上げて、表示される。これに対し、図２７に例示するように、停車中は５０音検索アイコンは操作許可に設定され、当該アイコン上であってもプロンプト３１を通常表現で表示する。 The third position interlocking condition includes a case where the prompt 31 is displayed on an operation permission icon (an icon permitted by the user), and a case where the prompt 31 is displayed on the operation disapproved icon (an icon which is not permitted by the user). And the display of the prompt 31 is changed. For example, since it is not preferable to perform an operation in which many procedures are expected (for example, a 50-sound search) during traveling, such an operation is set to disallow operation during traveling. In this case, as illustrated in FIG. 26, when the prompt 31 exists at the position of the 50-sound search icon, the prompt 31 is displayed smaller than usual and with increased transparency. On the other hand, as illustrated in FIG. 27, the 50-sound search icon is set to allow operation while the vehicle is stopped, and the prompt 31 is displayed in the normal expression even on the icon.
第４の位置連動条件は、プロンプト３１を操作許可領域（ユーザによる操作が許可された領域）上に表示する場合と、プロンプト３１を操作不許可領域（ユーザによる操作が許可されていない領域）上に表示する場合とで、プロンプト３１の表現を変化させる、という条件である。例えば、図２８に示すように、表示面２ａにメータが表示されている場合、その表示領域は操作不許可領域に設定される。この場合、図２８の例では、操作不許可領域においてプロンプト３１は、指画像および手画像ではなく、十字印を丸で囲んだ形状で表示される。これに対し、図２９に例示するように、操作許可領域では、プロンプト３１を通常表現で表示する。なお、図２９では、操作許可領域として、スクロール等の操作が可能な地図画像が表示された画面操作領域を例示しているが、操作許可領域は例えばアイコン領域であってもよい。
The fourth position interlocking condition includes the case where the prompt 31 is displayed on the operation permission area (area where the operation by the user is permitted) and the case where the prompt 31 is displayed on the area where the operation is not permitted (area where the operation by the user is not permitted). And the display of the prompt 31 is changed. For example, as shown in FIG. 28, when a meter is displayed on the
ここで、図３０に例示するように、操作不許可領域から操作許可領域への進入方向が複数存在しうる場合、その進入方向に応じて、操作許可領域内でのプロンプト３１の表現を設定してもよい（移動方向連動条件）。 Here, as illustrated in FIG. 30, when there are a plurality of entry directions from the operation disallowance area to the operation permission area, the expression of the prompt 31 in the operation permission area is set according to the entry direction. (Movement direction interlocking condition).
位置連動条件を適用することにより、操作の確認に役立つ。なお、第１〜第４の位置連動条件のうちの１つだけを採用してもよいし、あるいは、第１〜第４の位置連動条件のうちの２つ以上を採用してもよい。 By applying the position interlock condition, it helps to confirm the operation. Note that only one of the first to fourth position interlocking conditions may be employed, or two or more of the first to fourth position interlocking conditions may be employed.
また、第１〜第４の位置連動条件は、指示物の距離ｚ０に関わらず、適用可能である。換言すれば、ｚ０＝０の場合のみならずｚ０≠０の場合（指示物が入力面４ａの上方に存在する場合）にも、第１〜第４の位置連動条件を適用することにより、指示物が入力面４ａに接触する前に操作確認をすることができる。
The first to fourth position interlocking conditions can be applied regardless of the distance z0 of the indicator. In other words, not only in the case of z0 = 0 but also in the case of z0 ≠ 0 (when the indicator exists above the
また、プロンプト表現設定処理Ｓ１４ｂ（図１３および図１９を参照）において、プロンプト３１の表現を、指示物の入力面内位置の状態に応じて変化させるという面内状態連動条件を適用してもよい。具体的に図３１の例では、入力面内位置が静止している場合には、通常の手画像のプロンプト３１を表示し、これに対し、入力面内位置が移動している場合には、十字印を丸で囲んだ形状のプロンプト３１を表示する。これによれば、表示面２ａを通しての操作状況確認を容易化できる。
In the prompt expression setting process S14b (see FIGS. 13 and 19), an in-plane state interlocking condition in which the expression of the prompt 31 is changed according to the state of the input in-plane position of the indicator may be applied. . Specifically, in the example of FIG. 31, when the position in the input plane is stationary, a normal hand image prompt 31 is displayed, whereas when the position in the input plane is moving, A prompt 31 having a shape in which a cross mark is circled is displayed. According to this, the operation status confirmation through the
プロンプト３１の画像は図３１の例に限定されるものではない。但し、図３１の例のように、指示物の入力面内位置が移動状態である場合に簡略な画像を採用することにより、プロンプト３１の描画処理にかかる負荷を軽減できる。 The image of the prompt 31 is not limited to the example of FIG. However, as in the example of FIG. 31, the load applied to the drawing process of the prompt 31 can be reduced by adopting a simple image when the position within the input surface of the indicator is in a moving state.
面内状態連動条件は、指示物の距離ｚ０に関わらず、適用可能である。特にｚ０＝０の場合における適用は、指示物によって入力されるジェスチャ操作（スクロール操作、拡大縮小操作、回転操作、等）の開始および終了に伴って、プロンプト３１の表現を変化させることが可能である。具体的には、図３２の例では、スクロール操作の開始に伴ってプロンプト３１の表現を変化させ、スクロール操作の終了に伴ってプロンプト３１の表現を戻している。なお、図３２では、ｚ０＝０の場合の距離情報３２として、楕円図形を例示している。このように、プロンプト３１の表現変化と入力面４ａ上でのジェスチャ操作とを関連させることにより、ジェスチャ操作の実行状況が確認しやすくなる。
The in-plane state interlocking condition can be applied regardless of the distance z0 of the indicator. In particular, the application in the case of z0 = 0 can change the expression of the prompt 31 with the start and end of a gesture operation (scroll operation, enlargement / reduction operation, rotation operation, etc.) input by an indicator. is there. Specifically, in the example of FIG. 32, the expression of the prompt 31 is changed with the start of the scroll operation, and the expression of the prompt 31 is returned with the end of the scroll operation. In FIG. 32, an elliptical figure is illustrated as the
図３１に戻り、面内状態連動条件は、プロンプト３１の付加情報にも適用可能である。すなわち、付加情報の他の例として、指示物の入力面内位置の状態を示す面内状態情報３３がある。制御部１１は、付加情報設定処理Ｓ１４ｃ（図１９参照）において、指示物の入力面内位置が移動している場合と静止している場合とで、面内状態情報３３の表現を変化させる。図３１には面内状態情報３３として、指示物の移動方向を示す矢印状の図形と、背景枠とが例示されている。矢印状図形の長さは、固定であってもよいし、指示物の面内位置の移動量に応じて変化させてもよい。入力面内位置が静止している場合には面内状態情報３３を付加せず、これに対し、入力面内位置が移動している場合には面内状態情報３３をプロンプト３１に付加する。これによれば、表示面２ａを通しての操作状況確認を容易化できる。
Returning to FIG. 31, the in-plane state interlocking condition can also be applied to the additional information of the prompt 31. That is, as another example of the additional information, there is in-
図１２および図１６では指示物が指である場合に例示したが、指示物がスタイラスペンの場合におけるプロンプトの表現を、図３３に例示する。なお、図３３の例に、距離情報３２（図１６参照）と面内状態情報３３（図３１参照）の一方または両方を付加してもよい。 Although FIG. 12 and FIG. 16 illustrate the case where the indicator is a finger, FIG. 33 illustrates a prompt expression when the indicator is a stylus pen. Note that one or both of the distance information 32 (see FIG. 16) and the in-plane state information 33 (see FIG. 31) may be added to the example of FIG.
プロンプト表現設定処理Ｓ１４ｂ（図１３および図１９を参照）において、指示物の種類に応じてプロンプト３１の表現を変化させることにより、複数種類の指示物を使い分けることができ、便利である。例えば、ペン用プロンプト３１によって指示できる粒度（換言すれば、分解能）を指用プロンプト３１よりも小さく設定すれば、スタイラスペンを選択することにより、精細な画面に対しても操作性が向上する。また、指とスタイラスペンとの使い分けによって、動作モードが切り替わるようにしてもよい。例えば、指利用時には相対座標入力モードが設定され、ペン利用時には絶対座標入力モードが設定されてもよい。
In the prompt expression setting process S14b (see FIG. 13 and FIG. 19), by changing the expression of the prompt 31 according to the type of the instruction object, a plurality of types of instruction objects can be used properly, which is convenient. For example, if the granularity (in other words, resolution) that can be instructed by the
図３４に、スタイラスペンを利用する場合について、情報表示制御装置３のブロック図を例示する。図３４の例によれば、図３の構成例に、ペン用の接続部２８が追加されている。具体的には、スタイラスペンに固有の識別情報を組み込んでおき、その識別情報が接続部２８を介して制御部１１へ伝送される。これによれば、制御部１１は、識別情報の入力がある場合には、スタイラスペンが利用されていることを判別可能である。他方、識別情報の入力がなければ場合には、指が利用されていることを判別可能である。また、識別情報自体を判別することによって、複数のスタイラスペンを判別することも可能である。
FIG. 34 illustrates a block diagram of the information
スタイラスペンへの識別情報の付与、および、接続部２８による識別情報の取得は、例えば、無線タグ技術を応用することによって、実現可能である。
The assignment of the identification information to the stylus pen and the acquisition of the identification information by the
ここで、図３５に、２つのタッチパネル４を情報表示装置１に接続した例を示す。この場合、タッチパネル４ごとに指示物が用いられる。すなわち、２つの指示物によって、情報表示装置１への入力操作が行われる。入力装置用接続部２４には、２つの指示物のそれぞれの３次元位置情報が、各指示物用のタッチパネル４から入力される。なお、２つの入力装置４の一方または両方がタッチパネル以外の装置であってもよい。
Here, FIG. 35 shows an example in which two
なお、それぞれのタッチパネル４に接続部（接続部２４に相当）が設けられる場合、それらの接続部を総称が上記の入力装置用接続部２４にあたる。また、例えば２つのタッチパネル４が共に無線通信で情報表示装置１に接続される場合、入力装置用接続部２４を１つの無線通信用信号生成回路で構成することも可能である。すなわち、２つのタッチパネル４に対して、接続部２４は種々の構成を採りうる。
In addition, when a connection part (equivalent to the connection part 24) is provided in each
制御部１１は、指示物ごとの３次元位置情報を取得し、２つの指示物のうちの少なくとも１つについて、上記のプロンプト表現設定処理Ｓ１４ｂ（図１３および図１９を参照）を実行する。図３６には、２つの指示物が同時に利用され、両方のプロンプト３１にプロンプト表現設定処理Ｓ１４ｂが適用された場合の画面を例示する。また、２つの指示物のうちの少なくとも１つに対して、付加情報設定処理Ｓ１４ｃ（図１９参照）を実行してもよい。
The
同様にして３つ以上のタッチパネル４を接続して、３つ以上の指示物を利用することも可能である。なお、複数の指示物は同じ種類である必要はない。
Similarly, it is also possible to connect three or
ここで、図３７に、表示面２ａを２つの領域に分割し、一方のタッチパネル４を左画面用入力装置として利用し、他方のタッチパネル４を右画面用入力装置として利用する例を示す。また、図３８に、いわゆるスプリットビュー画面の説明図を示す。スプリットビュー画面では、表示面２ａを見る方向によって、見える画面が異なる。このため、例えば、一方のタッチパネル４は右側（ここでは運転席側）から見た画面用の入力装置として利用し、他方のタッチパネル４は左側（ここでは助手席側）から見た画面用の入力装置として利用することが可能である。
Here, FIG. 37 shows an example in which the
図３８には、右側から見た画面ではプロンプト３１の指画像を左向き（手首が右側に在り、人差し指が左側に在る）で表示し、左側から見た画面ではプロンプト３１の指画像を右向き（手首が左側に在り、人差し指が右側に在る）で表示する例を図示している。これに対し、両方の指画像を同じ方向に向けてもよい。但し、図３８の例によれば、指の向きが、表示面２ａと座席との位置関係を反映しているので、プロンプト３１を直感的に認識しやすい。図３８における２つの指画像の向きは図３６および図３７の例にも応用可能である。
In FIG. 38, the finger image of the prompt 31 is displayed leftward (the wrist is on the right side and the index finger is on the left side) on the screen viewed from the right side, and the finger image of the prompt 31 is directed rightward ( The wrist is on the left side and the index finger is on the right side). On the other hand, both finger images may be directed in the same direction. However, according to the example of FIG. 38, the direction of the finger reflects the positional relationship between the
また、制御部１１は、指示物の距離ｚ０に応じて画面全体の色相を変化させてもよい（画面色相制御処理）。これによれば、プロンプト３１を注視しなくても距離ｚ０の変化を判別可能であり、それによりプロンプト３１を探す時間を減らすことができる。このため、例えば、運転中に視線を長い時間、車両前方からそらすのを回避可能である。
Further, the
また、制御部１１は、指示物が入力面４ａに接触した場合（すなわち距離ｚ０＝０になった場合）に、入力面４ａを振動させる指示を、接続部２４を介してタッチパネル４に与えてもよい。タッチパネル４は、入力面４ａを振動させる機能を有している場合、その指示に従って入力面４ａを振動させる。また、制御部１１は、入力面４ａを盛り上げる指示をタッチパネル４に与えてもよい。タッチパネル４は、入力面４ａを盛り上げる機能を有している場合、その指示に従って入力面４ａを盛り上げる。また、制御部１１は通知音を、スピーカ５からまたはタッチパネル４のスピーカから、発生させてもよい。これらによれば、入力面４ａを見なくても、さらには表示面２ａを見なくても、入力面４ａに接触したことが分かる。なお、上記３つの処理例を種々に組み合わせてもよい。
Further, the
ここで、入力面４ａの振動は、圧電素子等の振動素子を利用すれば実現可能である。また、入力面４ａの盛り上げは、実施の形態１で例示したように、膨張素子を利用すれば実現可能である。なお、入力面４ａの振動は、入力面４ａの全体に発生させてもよいし、あるいは、指示物が接触した箇所を含む一部分に選択的に発生させてもよい。かかる点は入力面４ａの盛り上げについても同様である。
Here, the vibration of the
＜実施の形態４＞
実施の形態４では、プロンプト３１が指し示す第１オブジェクトと、他のオブジェクトである第２オブジェクトとの視認性の差を調整する。以下ではまず、第１オブジェクトがアイコンであり、そのアイコンの視認性を上げる例を説明する。
<
In the fourth embodiment, the difference in visibility between the first object pointed to by the prompt 31 and the second object that is another object is adjusted. Below, the 1st object is an icon first and the example which raises the visibility of the icon is demonstrated.
図３９に、アイコン４０の視認性の調整を説明する図を示す。図３９の例によれば、タッチパネル４の入力面４ａから指示物（ここでは指先）までの距離ｚ０に対して、２つの閾値ｚｔｈａ，ｚｔｈｂが予め設定されている。但し、閾値の数は２つに限定されるものではない。
FIG. 39 is a diagram for explaining the adjustment of the visibility of the
ここではｚｔｈａ＜ｚｔｈｂであり、例えば、ｚｔｈａ＝１ｃｍ、ｚｔｈｂ＝２ｃｍである。なお、ｚｔｈａ，ｚｔｈｂは不等間隔に設定してもよい。 Here, ztha <zthb, for example, ztha = 1 cm and zthb = 2 cm. Note that ztha and zthb may be set at unequal intervals.
２つの閾値ｚｔｈａ，ｚｔｈｂによって、指示物の距離ｚ０に対して、４つの距離レベル（換言すれば、高さレベル）ｚｌｖｌ０，ｚｌｖｌａ，ｚｌｖｌｂ，ｚｌｖｌｃが予め設定されている。すなわち、距離レベルｚｌｖｌ０はｚ０＝０に対応し、距離レベルｚｌｖｌａは０＜ｚ０＜ｚｔｈａに対応し、距離レベルｚｌｖｌｂはｚｔｈａ＜ｚ０＜ｚｔｈｂに対応し、距離レベルｚｌｖｌｃはｚｔｈｂ＜ｚ０に対応する。なお、ｚ０＝ｚｔｈａを距離レベルｚｌｖｌａ，ｚｌｖｌｂのいずれに含めるかは予め規定しておけばよい。ｚ０＝ｚｔｈｂも同様である。なお、図３９の例では、ｚ０＝０に対して距離レベルｚｌｖｌ０を割り当てているが、ｚ０＝０を距離レベルｚｌｖｌａに含めてもよい。 With the two thresholds ztha and zthb, four distance levels (in other words, height levels) zlvl0, zlvla, zlvlv, and zlvlc are preset with respect to the distance z0 of the indicator. That is, the distance level zlvlv corresponds to z0 = 0, the distance level zlvla corresponds to 0 <z0 <ztha, the distance level zlvlv corresponds to ztha <z0 <zthb, and the distance level zlvlc corresponds to zthb <z0. Note that it may be specified in advance whether to include z0 = ztha in the distance level zlvla or zlvlv. The same applies to z0 = zthb. In the example of FIG. 39, the distance level zlvl0 is assigned to z0 = 0, but z0 = 0 may be included in the distance level zlvla.
また、図３９の例では、入力面４ａの押下された状態に、距離レベルｚｌｖｌ００が設定されている。入力面４ａの押下は、タッチパネル４が、入力面４ａに対する押圧力がｚ０＝０の場合よりも強いことを検出することによって、判別可能である。入力面４ａが押下されたか否かの情報は、タッチパネル４が出力する３次元位置情報に含まれるものとする。なお、入力面４ａの押下を便宜的にｚ０＜０と表現する場合もある。
In the example of FIG. 39, the distance level zlvl00 is set in a state where the
なお、距離レベルｚｌｖｌ００を採用可能である場合、すなわちタッチパネル４が入力面４ａに対する押下を検出可能である場合、例えば、距離レベルｚｌｖｌ０（ｚ０＝０）によって、アイコン４０の選択が決定され、距離レベルｚｌｖｌ００（ｚ０＜０）によって、アイコン４０に関連付けられている機能が実行される、という使い分けが可能である。逆に、距離レベルｚｌｖｌ００を採用できないまたは採用しない場合、距離レベルｚｌｖｌ０（ｚ０＝０）に、アイコン４０の選択決定と機能実行の両方が割り当てられる。
When the distance level zlvl00 can be adopted, that is, when the
図３９に示すように、各距離レベルｚｌｖｌｃ，ｚｌｖｌｂ，ｚｌｖｌａ，ｚｌｖｌ０，ｚｌｖｌ００に対して、表現（換言すれば、見た目）の異なるアイコン４０が予め設定されている。図３９の例では、距離レベルｚｌｖｌｃに割り当てられたアイコン４０は、平面状の四角形であり、当該四角形は単色で塗りつぶされている。距離レベルｚｌｖｌｂに割り当てられたアイコン４０は、距離レベルｚｌｖｌｃのアイコン４０において上記四角形の中に影を模した模様が付加されている。距離レベルｚｌｖｌａに割り当てられたアイコン４０は、距離レベルｚｌｖｌｂのアイコン４０が手前に飛び出した立体形状をしている。距離レベルｚｌｖｌ０に割り当てられたアイコン４０は、距離レベルｚｌｖｌａのアイコン４０と同じ立体形状をしているが、影模様を有さず、距離レベルｚｌｖｌａのアイコン４０とは異なる色（特に、赤色等の強調色）に着色されている。
As shown in FIG. 39,
また、距離レベルｚｌｖｌ００に割り当てられたアイコン４０は、距離レベルｚｌｖｌ０の立体形状において手前の面を奥へ押し込んだ状態を模した形状をしている。但し、タッチパネル４が入力面４ａに対する押圧力を検出可能な構成を有していない場合、押下時用のアイコン４０は省略してもよい。あるいは、押下時用のアイコン４０を、距離レベルｚｌｖｌ０のアイコン４０の代わりに採用してもよい。
The
このように、距離レベルｚｌｖｌ００，ｚｌｖｌ０，ｚｌｖｌａ，ｚｌｖｌｂ，ｚｌｖｌｃごとに、アイコン４０の表現が異なっている。表現の相違は、表現要素が少なくとも１つが異なることによって、生じる。表現要素は例えば、大きさ、形状、色、模様、アニメーション表示（例えば回転、揺動）である。このため、大きさと、形状と、色と、アニメーション表示とのうちの少なくとも１つの表現要素を、距離レベルｚｌｖｌ００，ｚｌｖｌ０，ｚｌｖｌａ，ｚｌｖｌｂ，ｚｌｖｌｃで変化させればよい。
As described above, the expression of the
特に図３９の例によれば、指示物の距離ｚ０が小さいほど、アイコン４０に対する注目度が増すように、アイコン４０の表現が設定されている。すなわち、指示物の距離ｚ０が小さいほど、アイコン４０の視認性が上がる。
In particular, according to the example of FIG. 39, the expression of the
図４０に、アイコン４０の表現を指示物の距離ｚ０に応じて変化させる処理Ｓ６０のフローチャートを例示する。図４０の処理Ｓ６０は、図４の処理Ｓ１０と基本的には同じであるが、画像データ生成処理ステップＳ１４の詳細が異なる。すなわち、処理Ｓ６０のステップＳ１４は、距離レベル判別処理ステップＳ１４ａと、視認性調整処理ステップＳ１４ｄとを含んでいる。
FIG. 40 illustrates a flowchart of the process S60 in which the expression of the
ステップＳ１４ａは基本的には実施の形態３のステップＳ１４ａ（図１３参照）と同様であるが、図３９の距離レベル判別基準に従う。すなわち、ステップＳ１４ａでは、制御部１１は、３次元位置情報に基づき、入力面４ａと指示物との間の距離ｚ０が、距離レベルｚｌｖｌ００，ｚｌｖｌ０，ｚｌｖｌａ，ｚｌｖｌｂ，ｚｌｖｌｃ（図３９参照）のいずれに該当するかを判別する（距離レベル判別処理）。
Step S14a is basically the same as step S14a (see FIG. 13) of the third embodiment, but according to the distance level determination criterion of FIG. That is, in step S14a, the
次に、制御部１１は、ステップＳ１４ｄにおいて、プロンプト３１が指し示す第１オブジェクト（ここではアイコン４０）と、他のオブジェクトである第２オブジェクトとの視認性の差を調整する（視認性調整処理）。より具体的には、制御部１１は、ステップＳ１４ａで判別した距離レベルｚｌｖｌ００，ｚｌｖｌ０，ｚｌｖｌａ，ｚｌｖｌｂ，ｚｌｖｌｃを、予め定められた規則（図３９参照）に照合することによって、アイコン４０の画像を選択する。これにより、指示物の距離レベルｚｌｖｌ００，ｚｌｖｌ０，ｚｌｖｌａ，ｚｌｖｌｂ，ｚｌｖｌｃに応じて、プロンプトが指し示すアイコン４０の視認性を変化させることができる。
Next, in step S14d, the
なお、プロンプト３１が指し示すアイコン４０は、例えば、アイコン４０の画像がプロンプト３１の画像と重なりを有することによって特定可能である。また、例えば、プロンプト３１の表示位置からその指し示す方向にプロンプト指示範囲（その大きさは予め設定すればよい）を設定し、そのプロンプト指示範囲に重なるアイコン４０を、プロンプト３１が指し示すアイコン４０として特定可能である。
Note that the
そして、制御部１１は、例えば、プロンプト用のレイヤ（換言すれば、画像保持部）にプロンプト３１の画像データを書き込み、アイコン用のレイヤにアイコン４０の画像データを書き込み、それらのレイヤと他のレイヤ（例えば地図画像データが書き込まれたレイヤ）とを合成することによって、表示画像データを生成する（表示画像データ生成処理）。ここで、プロンプト３１は、ステップＳ１２で得られた表示面内位置に表示されるように、表示画像データが生成される。
Then, for example, the
なお、２次元位置変換ステップＳ１２は、距離レベル判別ステップＳ１４ａよりも後で実行してもよい。 Note that the two-dimensional position conversion step S12 may be executed after the distance level determination step S14a.
図４１および図４２に、アイコン４０の表現の変化、すなわちアイコン４０の視認性の変化を例示する。なお、図４１および図４２では、紙面の大きさの都合で、プロンプト表示領域２ｂのみを図示している。また、プロンプト表示領域２ｂが四角形の場合を例示している。
41 and 42 illustrate changes in the expression of the
図４１および図４２から分かるように、指示物の距離ｚ０が減少するに従って、すなわち指示物が入力面４ａに近づくに従って、アイコン４０の視認性が上がるようにその表現が変化する。逆に、指示物の距離ｚ０が増大するに従って、アイコン４０の表現は標準設定に近づき、アイコン４０の視認性が下がる。なお、図４１および図４２の例では、アイコン以外のオブジェクトである地図画像の視認性は、変化しないものとしている。
As can be seen from FIGS. 41 and 42, as the distance z0 of the indicator decreases, that is, as the indicator approaches the
このように指示物の距離ｚ０が小さいほど、アイコン４０の視認性が上がり、アイコン４０と他のオブジェクト（図４１および図４２の例では地図画像）との視認性の差が拡大する。このため、ユーザ（ここでは運転手）は、入力面４ａに向けた手元を見なくても、表示面２ａ（特にプロンプト表示領域２ｂ）を通じて、指示物の位置および入力面４ａまでの距離を把握することができる。それにより、視線移動が減り、操作性が向上する。この点は、表示面２ａと入力面４ａとを同時に視界に入れるのが難しい環境下において、特に好適である。また、運転中に視線を車両前方から大きくそらすのを回避可能である。
Thus, the smaller the distance z0 of the indicator, the higher the visibility of the
ここで、図３９、図４１および図４２の例では、各距離レベルｚｌｖｌａ，ｚｌｖｌｂ，ｚｌｖｌｃ内においてアイコン４０の表現が変化しないものとした。これに対し、指示物の距離ｚ０が或る距離レベルに属している間に、アイコン４０の表現を、指示物の距離ｚ０に応じて連続的に（換言すれば、無段階に）変化させる連続的変化を採用してもよい。なお、距離レベルｚｌｖｌｃ，ｚｌｖｌｂ間でアイコン４０の表現が連続していてもよいし、あるいは、そのような連続性が無くてもよい。距離レベルｚｌｖｌｂ，ｚｌｖｌａ間での連続性についても同様である。また、距離レベルｚｌｖｌａ，ｚｌｖｌｂ，ｚｌｖｌｃのうちの一部の距離レベルだけで、アイコン４０の連続的変化を採用してもよい。それによれば、全ての距離レベルで連続的変化を採用する場合に比べて、アイコン４０の描画処理にかかる負荷を軽減できる。
Here, in the examples of FIGS. 39, 41, and 42, it is assumed that the expression of the
これに対し、図３９、図４１および図４２の例のようにアイコン４０の表現が指示物の距離レベルごとに変化することによって、アイコン４０が連続的に変化する場合に比べて、アイコン４０の変化に気付きやすい。換言すれば、認知性に優れる。
On the other hand, as shown in the examples of FIGS. 39, 41 and 42, the expression of the
また、アイコン４０が連続的に変化する場合には、指示物の若干の揺れが、アイコン４０の変化に過敏に反映されてしまう。しかし、指示物の距離レベルごとの変化であれば、そのような過敏な変化を抑制できる。このため、例えば車中のように揺れが生じる環境下においても、アイコン４０の表現が安定し、快適な操作性を提供可能である。
In addition, when the
また、例えば車中のように揺れが生じる環境下では、入力面４ａへの接触（ｚ０＝０）ではなく、入力面４ａの押下（ｚ０＜０）によって、アイコン４０に関連付けられている機能（図４２の例ではＣＤの再生）が実行されるように処理設計をしておけば、誤操作を減らせる。これに関連して、図３９および図４２の例では接触（ｚ０＝０）と押下（ｚ０＜０）とでアイコン４０の表現を異ならせているので、ユーザは、接触と押下との違いを、入力面４ａに向けた手元を見なくても、表示面２ａを通じて確認することができる。かかる点からも、快適な操作性を提供可能である。
For example, in an environment where shaking occurs, such as in a car, the function associated with the
上記では、プロンプト３１が指し示す第１オブジェクトが１つのアイコン４０である場合を例示した。これに対して、第１オブジェクトは複数のアイコン４０であってもよい。総じて言うならば、第１オブジェクトは、１つまたは複数のアイコンが配置されたアイコン領域であってもよい。例えば図４３に示すように、距離レベルｚｌｖｌｂでは、アイコン領域に在る全てのアイコン４０の視認性を上げる。
In the above, the case where the first object indicated by the prompt 31 is one
また、図４３の例によれば、距離レベルｚｌｖｌａ，ｚｌｖｌ０では、プロンプト３１の直近に在るアイコン４０についてのみ視認性を上げ、他のアイコン４０は距離レベルｚｌｖｌｂと同じ表現に設定されている。これに対し、例えば、他のアイコン４０は、距離レベルｚｌｖｌｃ（図３９参照）の表現に設定してもよい。いずれに例にしても、プロンプト３１の直近に在るアイコン４０に比べて、他のアイコン４０は視認性が低い状態になる。すなわち、指示物の距離ｚ０の変化の途中で、視認性を上げる第１オブジェクトの範囲を変更しても構わない。
Further, according to the example of FIG. 43, at the distance levels zlvla and zlvv0, only the
なお、図４３では、紙面の大きさの都合により、距離レベルｚｌｖｌｃ，ｚｌｖｌ００での画面表示は省略している。 In FIG. 43, screen display at the distance levels zlvlc and zlvl00 is omitted due to the size of the page.
ところで、上記では、プロンプト３１が指し示す第１オブジェクト自体の視認性を上げる例を説明した。これに対し、第１オブジェクト以外の他のオブジェクトである第２オブジェクトの視認性を下げることによって、第１オブジェクトの視認性を相対的に上げることも可能である。そのような例を図４４および図４５を参照して説明する。 By the way, the example which raises the visibility of 1st object itself which the prompt 31 points to was demonstrated above. On the other hand, it is also possible to relatively increase the visibility of the first object by reducing the visibility of the second object, which is an object other than the first object. Such an example will be described with reference to FIGS. 44 and 45. FIG.
図４４の例によれば、タッチパネル４の入力面４ａから指示物（ここでは指先）までの距離ｚ０に対して、２つの閾値ｚｔｈｈ，ｚｔｈｉが予め設定されている。但し、閾値の数は２つに限定されるものではない。
According to the example of FIG. 44, two threshold values zthh and zthi are preset for the distance z0 from the
ここではｚｔｈｈ＜ｚｔｈｉであり、例えば、ｚｔｈｈ＝１ｃｍ、ｚｔｈｉ＝２ｃｍである。なお、ｚｔｈｈ，ｚｔｈｉは不等間隔に設定してもよい。また、ｚｔｈｈは、ｚｔｈａまたはｚｔｈｂ（図３９参照）と同じ値であってもよいし、あるいは、ｚｔｈａおよびｚｔｈｂのいずれとも異なる値であってもよい。ｚｔｈｉについても同様である。 Here, zthh <zthi, for example, zthh = 1 cm and zthi = 2 cm. Note that zthh and zthi may be set at unequal intervals. Further, zthh may be the same value as ztha or zthb (see FIG. 39), or may be a value different from both ztha and zthb. The same applies to zthi.
２つの閾値ｚｔｈｈ，ｚｔｈｉによって、指示物の距離ｚ０に対して、３つの距離レベル（換言すれば、高さレベル）ｚｌｖｌｈ，ｚｌｖｌｉ，ｚｌｖｌｊが予め設定されている。すなわち、距離レベルｚｌｖｌｈは０≦ｚ０＜ｚｔｈｈに対応し、距離レベルｚｌｖｌｉはｚｔｈｈ＜ｚ０＜ｚｔｈｉに対応し、距離レベルｚｌｖｌｊはｚｔｈｉ＜ｚ０に対応する。なお、ｚ０＝ｚｔｈｈを距離レベルｚｌｖｌｈ，ｚｌｖｌｉのいずれに含めるかは予め規定しておけばよい。ｚ０＝ｚｔｈｉも同様である。なお、図４４の例では、ｚ０＝０を距離レベルｚｌｖｌｈを含めているが、図３９の例と同様にｚ０＝０に距離レベルｚｌｖｌ０を割り当ててもよい。 With the two threshold values zthh and zthi, three distance levels (in other words, height levels) zlvlh, zlvli, and zlvlj are preset with respect to the distance z0 of the indicator. That is, the distance level zlvlh corresponds to 0 ≦ z0 <zthh, the distance level zlvli corresponds to zthh <z0 <zthi, and the distance level zlvlj corresponds to zthi <z0. It should be specified in advance whether z0 = zthh is included in the distance level zlvlh or zlvli. The same applies to z0 = zthi. In the example of FIG. 44, z0 = 0 includes the distance level zlvlh, but the distance level zlvl0 may be assigned to z0 = 0 as in the example of FIG.
図４４に示すように、各距離レベルｚｌｖｌｈ，ｚｌｖｌｉ，ｚｌｖｌｊに対して、表示画像に含める地図要素が予め設定されている。図４４の例では、距離レベルｚｌｖｌｊでは、地図要素の全て（ここでは主要道路と細い道路と建物とが例示される）が表示される（図４５の上段の表示画像を参照）。また、距離レベルｚｌｖｌｉでは、主要道路と細い道路とは表示されるが、建物は省略される（図４５の中段の表示画像を参照）。また、距離レベルｚｌｖｌｈでは、主要道路のみが表示される（図４５の下段の表示画像を参照）。 As shown in FIG. 44, map elements to be included in the display image are set in advance for each distance level zlvlh, zlvli, and zlvlj. In the example of FIG. 44, all the map elements (here, main roads, narrow roads, and buildings are exemplified) are displayed at the distance level zlvlj (see the display image in the upper part of FIG. 45). In the distance level zlvli, the main road and the narrow road are displayed, but the building is omitted (see the display image in the middle of FIG. 45). At the distance level zlvlh, only the main road is displayed (see the display image in the lower part of FIG. 45).
このように、距離レベルｚｌｖｌｈ，ｚｌｖｌｉ，ｚｌｖｌｊごとに、地図画像の情報量が異なっている。このため、指示物の距離ｚ０が減少するに従って、すなわち指示物が入力面４ａに近づくに従って、地図要素が間引かれ、それにより地図画像の情報量が減少する。その結果、地図画像の視認性を下げることができる。逆に、指示物の距離ｚ０が増大するに従って、地図画像の情報量が増大し、それにより地図画像の視認性が上がる。
Thus, the information amount of the map image is different for each of the distance levels zlvlh, zlvli, and zlvlj. For this reason, as the distance z0 of the indicator decreases, that is, as the indicator approaches the
なお、図４５の例では、距離レベルｚｌｖｌｉでは方向と縮尺の表示を、距離レベルｚｌｖｌｊに比べて、くすんだ表現に設定している。また、距離レベルｚｌｖｌｈでは方向と縮尺を表示しない。かかる表現設定も地図画像の情報量の調整に貢献している。 In the example of FIG. 45, the direction and scale display are set to be duller than the distance level zlvlj at the distance level zlvli. Also, the direction and scale are not displayed at the distance level zlvlh. Such expression setting also contributes to the adjustment of the information amount of the map image.
図４４および図４５の例によれば、視認性調整処理Ｓ１４ｄ（図４０参照）において、第２オブジェクトとしての地図画像の視認性を調整することにより、第１オブジェクトと第２オブジェクトとの視認性の差を調整することができる。 44 and 45, in the visibility adjustment process S14d (see FIG. 40), the visibility of the first object and the second object is adjusted by adjusting the visibility of the map image as the second object. The difference between can be adjusted.
ここで、図４５に対応する図４６に例示するように、第２オブジェクトである地図画像だけでなく、第１オブジェクトであるアイコン４０も同時に、視認性を調整してもよい。図４６では、ｚｌｖｌｊ＝ｚｌｖｌｃ、ｚｌｖｌｉ＝ｚｌｖｌｂ、ｚｌｖｌｈ＝ｚｌｖｌａとした場合を例示している。これによれば、指示物の距離ｚ０が減少するに従って、アイコン４０の視認性が上がると共に、地図画像の視認性が下がる。このため、ｚ０の減少に伴う視認性の差の拡大が、より分かりやすくなり、操作性がさらに向上する。
Here, as illustrated in FIG. 46 corresponding to FIG. 45, not only the map image that is the second object but also the
なお、くすみ、透明度、鮮鋭性等を調整することによっても、地図画像の視認性を調整可能である。その際、連続的変化も適用可能である。また、くすみ、透明度、鮮鋭性等の調整は、地図画像だけでなく、ＡＶ再生画像等の他の画像、アイコン等にも適用可能である。例えばくすみの調整によってアイコン４０の視認性を調整する例を図４７に示す。
The visibility of the map image can also be adjusted by adjusting dullness, transparency, sharpness, and the like. In that case, continuous changes are also applicable. Further, adjustments such as dullness, transparency, and sharpness can be applied not only to map images but also to other images such as AV playback images, icons, and the like. For example, FIG. 47 shows an example of adjusting the visibility of the
図４７には、アイコン４０が第２オブジェクトであり、指示物の距離ｚ０の減少に伴ってアイコン４０の視認性を下げる例が示されている。図４７の例によれば、タッチパネル４の入力面４ａから指示物（ここでは指先）までの距離ｚ０に対して、２つの閾値ｚｔｈｐ，ｚｔｈｑが予め設定されている。但し、閾値の数は２つに限定されるものではない。
FIG. 47 shows an example in which the
ここではｚｔｈｐ＜ｚｔｈｑであり、例えば、ｚｔｈｐ＝１ｃｍ、ｚｔｈｑ＝２ｃｍである。なお、ｚｔｈｐ，ｚｔｈｑは不等間隔に設定してもよい。また、ｚｔｈｐは、ｚｔｈｈまたはｚｔｈｉ（図４４参照）と同じ値であってもよいし、あるいは、ｚｔｈｈおよびｚｔｈｉのいずれとも異なる値であってもよい。ｚｔｈｑについても同様である。 Here, zthp <zthq, for example, zthp = 1 cm and zthq = 2 cm. Note that zthp and zthq may be set at unequal intervals. Further, zthp may be the same value as zthh or zthi (see FIG. 44), or may be a value different from both zthh and zthi. The same applies to zthq.
２つの閾値ｚｔｈｐ，ｚｔｈｑによって、指示物の距離ｚ０に対して、３つの距離レベル（換言すれば、高さレベル）ｚｌｖｌｐ，ｚｌｖｌｑ，ｚｌｖｌｒが予め設定されている。すなわち、距離レベルｚｌｖｌｐは０≦ｚ０＜ｚｔｈｐに対応し、距離レベルｚｌｖｌｑはｚｔｈｐ＜ｚ０＜ｚｔｈｑに対応し、距離レベルｚｌｖｌｒはｚｔｈｑ＜ｚ０に対応する。なお、ｚ０＝ｚｔｈｐを距離レベルｚｌｖｌｐ，ｚｌｖｌｑのいずれに含めるかは予め規定しておけばよい。ｚ０＝ｚｔｈｑも同様である。なお、図４７の例では、ｚ０＝０を距離レベルｚｌｖｌｐを含めているが、図３９の例と同様にｚ０＝０に距離レベルｚｌｖｌ０を割り当ててもよい。 With the two threshold values zthp and zthq, three distance levels (in other words, height levels) zlvlp, zlvlq and zlvlr are preset with respect to the distance z0 of the indicator. That is, the distance level zlvlp corresponds to 0 ≦ z0 <zthp, the distance level zlvlq corresponds to zthp <z0 <zthq, and the distance level zlvlvr corresponds to zthq <z0. Note that it may be determined in advance whether to include z0 = zthp in the distance levels zlvlp and zlvlv. The same applies to z0 = zthq. In the example of FIG. 47, z0 = 0 includes the distance level zlvlp, but the distance level zlvl0 may be assigned to z0 = 0 as in the example of FIG.
図４７の例では、距離レベルｚｌｖｌｒでは、第２オブジェクトとしてのアイコン４０を、標準設定に従って表示する。また、距離レベルｚｌｖｌｑでは、標準設定よりも、くすんだ表現で、第２オブジェクトとしてのアイコン４０を表示する。また、距離レベルｚｌｖｌｐでは、第２オブジェクトとしてのアイコン４０を表示しない。このため、指示物の距離ｚ０が減少するに従って、すなわち指示物が入力面４ａに近づくに従って、アイコン４０の視認性を下げることができる。その結果、第１オブジェクト（例えば地図画像）の視認性を相対的に上げることができる。
In the example of FIG. 47, at the distance level zlvlr, the
ここで、図４８の処理Ｓ７０に示すように、表示画像データ生成処理ステップＳ１４に、プロンプト表現設定処理ステップＳ１４ｂを追加してもよい。ステップＳ１４がステップＳ１４ｂ，Ｓ１４ｄの両方を含む場合の表示画像の変化を、図４９に例示する。なお、ｚｔｈ１は、ｚｔｈａ、ｚｔｈｂ、ｚｔｈｈ、ｚｔｈｉ、ｚｔｈｐまたはｚｔｈｑ（図３９、図４４および図４７参照）と同じ値であってもよいし、あるいは、ｚｔｈａ、ｚｔｈｂ、ｚｔｈｈ、ｚｔｈｉ、ｚｔｈｐおよびｚｔｈｑのいずれとも異なる値であってもよい。ｚｔｈ２およびｚｔｈ３についても同様である。 Here, as shown in the process S70 of FIG. 48, a prompt expression setting process step S14b may be added to the display image data generation process step S14. FIG. 49 illustrates the change in the display image when step S14 includes both steps S14b and S14d. Note that zth1 may be the same value as ztha, zthb, zthh, zthi, zthp or zthq (see FIGS. 39, 44 and 47), or ztha, zthb, zthh, zthi, zthp and zthq. It may be a value different from any of the above. The same applies to zth2 and zth3.
また、図４８の表示画像データ生成処理ステップＳ１４に、さらに、付加情報設定処理ステップＳ１４ｃ（図１９参照）を追加してもよい。 Further, an additional information setting process step S14c (see FIG. 19) may be added to the display image data generation process step S14 of FIG.
＜実施の形態５＞
実施の形態５では、入力面４ａから指示物までの距離ｚ０の値を補正して利用する例を説明する。
<
In the fifth embodiment, an example in which the value of the distance z0 from the
図５０に、実施の形態５に係る動作例のフローチャートを示す。図５０に例示の処理Ｓ８０は、図１３の処理Ｓ４０においてステップＳ１３，Ｓ１４の間に、距離値補正処理を行うステップＳ８１が追加されている。 FIG. 50 shows a flowchart of an operation example according to the fifth embodiment. In the process S80 illustrated in FIG. 50, a step S81 for performing a distance value correction process is added between the steps S13 and S14 in the process S40 of FIG.
制御部１１は、ステップＳ８１において、タッチパネル４の入力面４ａから指示物までの距離ｚ０の値を、補正する（距離値補正処理）。図５１の斜視図および図５２の側面図を参照しつつ、距離値補正処理を説明する。
In step S81, the
タッチパネル４によって取得された３次元位置情報によれば、指示物（ここでは指先）と入力面４ａとの間の距離ｚ０は、図５１および図５２に示すように、入力面４ａから入力面４ａの法線（図５１および図５２ではｚ軸に平行な線である）に沿った指示物までの距離である。
According to the three-dimensional position information acquired by the
しかし、指示物は入力面４ａのｚ軸に平行に移動するとは限らず、図５１および図５２に示すようにｚ軸に対して斜め方向に移動する場合がある。特に図２に例示したように入力面４ａが運転席の横に配置されている場合、ユーザ（ここでは運転手）の指は図５１および図５２に示すように入力面４ａに対して斜め方向に移動することが多いと考えられる。このため、ユーザの感覚からすれば、指先と入力面４ａまでの距離は、入力面４ａの法線に沿った距離ｚ０ではなく、指先の移動経路５１に沿った距離ｚｚであると感じる。
However, the indicator does not necessarily move parallel to the z axis of the
そこで、距離値補正処理ステップＳ８１では、タッチパネル４の検出結果から得られる距離ｚ０の値を、指示物の移動経路５１に沿った距離ｚｚの値に補正する。なお、以下、距離ｚ０の値にも便宜的に符号ｚ０を用い、距離値ｚ０という表記を用いる場合がある。同様に、距離ｚｚの値を、距離値ｚｚと表記する場合がある。また、距離値ｚｚを補正距離値ｚｚと称する場合もある。
Therefore, in the distance value correction processing step S81, the value of the distance z0 obtained from the detection result of the
具体的には、指示物の移動経路５１は、入力面４ａとユーザとの位置関係から予め想定することが可能である。図５１おおび図５２に例示の移動経路５１は、入力面４ａに対して角度θ１（但しθ１≠９０°とする）を形成する直線経路として想定されている。この場合、ｚｚ＝ｚ０／ｓｉｎθ１という関係が成り立つ。すなわち、直線経路として想定された移動経路５１に基づいて、ｚｚ＝ｚ０／ｓｉｎθ１という距離値補正規則を予め規定可能である。なお、距離値補正規則は、演算式、変換テーブル等によって具現化可能である。つまり、制御部１１は、距離値補正規則に従って、入力面４ａの法線に沿った距離値ｚ０を、移動経路５１に沿った距離値ｚｚに補正する。
Specifically, the moving
次に、制御部１１は、ステップＳ１４において、距離値ｚ０の代わりに、補正距離値ｚｚを使って、表示画像データを生成する（表示画像データ生成処理）。図５０の例では、距離レベル判別処理のステップＳ１４ａおよびプロンプト表現設定処理のステップＳ１４ｂにおいて、補正距離値ｚｚに応じてプロンプト３１の表現が設定される。
Next, in step S14, the
このように補正距離値ｚｚを用いることにより、補正前の距離値ｚ０に基づいてプロンプト３１の表現を変化させる場合に比べて、ユーザの距離感に合った操作性を提供できる。例えば、指示物の移動に伴ってユーザ自身が感じる距離感と、表示面２ａを介して得られる距離感とのずれが低減されるので、そのずれから生じる操作上の混乱を低減できる。
By using the corrected distance value zz in this way, it is possible to provide operability that matches the sense of distance of the user as compared to the case where the expression of the prompt 31 is changed based on the uncorrected distance value z0. For example, since the deviation between the sense of distance felt by the user with the movement of the pointing object and the sense of distance obtained via the
より具体的には、ユーザにとっては入力面４ａにまだ到達しないと思っていたのに、実際には指先が入力面４ａに接触してしまい誤操作を生じる、といった事態を低減できる。また、ユーザにとっては入力面４ａに接触しているはずなのに、接触した感覚が得られず、入力面４ａに視線を向ける、といった事態を低減できる。
More specifically, although it was thought that the user did not reach the
このように、ユーザの操作感覚に配慮した快適な操作環境を提供することができる。また、既述のように情報表示装置１の利用環境は自動車内に限定されるものではないので、種々の使用環境において同様の効果が得られる。
In this way, it is possible to provide a comfortable operating environment in consideration of the user's operational feeling. Further, as described above, the usage environment of the
図５１では運転席側から指示物が入力面４ａに向かう移動経路５１を例示したが、図５３に例示するように指示物が助手席側から入力面４ａに向かう移動経路５２も想定可能である。図５３によれば、助手席側からの移動経路５２は、入力面４ａに対して角度θ２（但しθ２≠９０°とする）を形成する直線経路として想定されている。この場合、ｚｚ＝ｚ０／ｓｉｎθ２という関係の距離値補正規則が予め規定される。
In FIG. 51, the
制御部１１は、指示物の移動方向、具体的には入力面内位置（ｘ０，ｙ０）の移動方向から、指示物が運転席側から到来したのか、助手席側から到来したのかを判別可能である。よって、制御部１１は、運転席側用の距離値補正規則（ｚｚ＝ｚ０／ｓｉｎθ１）と、助手席側用の距離値補正規則（ｚｚ＝ｚ０／ｓｉｎθ２）とのいずれを選択すればよいのかを判別可能である。
The
一般化するならば、運転席と助手席の一方を第１座席とし、運転席と助手席の他方を第２座席とした場合、第１座席と入力面４ａとの間に想定された第１移動経路用に規定された第１距離値補正規則と、第２座席と入力面４ａとの間に想定された第２移動経路用に規定された第２距離値補正規則とは、指示物の移動状況に基づいて適切に選択可能である。なお、第１座席および第２座席は運転席と助手席の組み合わせでなくてもよい。また、３席以上の場合については、当該３席のうちの任意の２席について上記説明が当てはまる。つまり、３席以上の場合についても、各座席用の距離値補正規則を適切に選択可能である。
In generalization, when one of the driver seat and the passenger seat is the first seat and the other of the driver seat and the passenger seat is the second seat, the first seat assumed between the first seat and the
また、図５１および図５２には指示物の移動経路５１が直線経路である場合を例示したが、図５４の側面図に例示するように移動経路５１は曲線経路であってもよい。また、移動経路５１は直線経路と曲線経路との組み合わせであってもよい。なお、直線経路と曲線経路とは連続していてもよいし、不連続であってもよい。一般化するならば、補正距離値ｚｚは、入力装置４の検出結果から得られる距離ｚ０と、想定した移動経路５１が入力面４ａと成す角度θ１との関数として、例えばｚｚ＝ｆ（ｚ０，θ１）と表される。すなわち、距離値補正規則はｚｚ＝ｆ（ｚ０，θ１）で与えられる。なお、直線経路に対してθ１は一定値である一方、曲線経路に対しては、θ１は距離ｚ０の関数として、例えばθ１＝ｇ（ｚ０）と表される。これらの点は、助手席側からの移動経路５２についても同様である。
51 and 52 illustrate the case where the
また、上記では移動経路５１（換言すれば、距離値補正規則）は予め想定され制御部１１に与えられるものとしたが、制御部１１は移動経路５１を更新してもよい。例えば、指示物の各回の移動履歴は、指示物の位置（ｘ０，ｙ０，ｚ０）（図７参照）の軌跡として取得可能である。このため、例えば、予め与えられた移動経路５１と、複数の移動履歴とを平均して平均的な経路を求め、その平均的な経路を、更新後の移動経路５１としてもよい。また、移動経路５１が予め与えられない場合であっても、複数の移動履歴から平均的な経路を求め、その平均的な経路を、当初のまたは更新後の移動経路５１としてもよい。すなわち、制御部１１は、指示物の複数の移動履歴から移動経路５１を学習可能である。移動経路５１の学習により、補正精度を向上させることが可能である。これらの点は、助手席側からの移動経路５２についても同様である。
In the above description, the movement route 51 (in other words, the distance value correction rule) is assumed in advance and is given to the
なお、図５０では表示画像データ生成処理のステップＳ１４がステップＳ１４ａ，Ｓ１４ｂを含む例を挙げたが、ステップＳ１４は例えばステップＳ１４ａ〜Ｓ１４ｄを種々に組み合わせて構成可能である。 In FIG. 50, step S14 of the display image data generation process includes steps S14a and S14b. However, step S14 can be configured by variously combining steps S14a to S14d, for example.
＜変形例＞
上記では、表示装置２の表示面２ａと入力装置４の入力面４ａとが別の場所に配置される例を挙げた。しかし、入力面４ａが表示面２ａ上に重ねられた構造にも、上記の各種工夫を採用可能である。
<Modification>
In the above example, the
なお、本発明は、その発明の範囲内において、各実施の形態を自由に組み合わせたり、各実施の形態を適宜、変形、省略することが可能である。 It should be noted that the present invention can be freely combined with each other within the scope of the invention, and each embodiment can be appropriately modified or omitted.
１ 情報表示装置、２ 表示装置、２ａ 表示面、２ｂ プロンプト表示領域、３ 情報表示制御装置、４ 入力装置、４ａ 入力面、４ｂ 入力受付領域、１１ 制御部、２２ 表示装置用接続部、２４ 入力装置用接続部、３１ プロンプト、４０ アイコン、５１，５２ 指示物の移動経路、Ｓ１１ プロンプト表示領域設定処理、Ｓ１２ 位置情報取得処理、Ｓ１３ ２次元位置変換処理、Ｓ１４ 表示画像データ生成処理、Ｓ１４ａ 距離レベル判別処理、Ｓ１４ｂ プロンプト表現設定処理、Ｓ１４ｃ 付加情報設定処理、Ｓ１４ｄ 視認性調整処理、Ｓ８１ 距離値補正処理、ｚ０ 入力面の法線に沿った距離値、ｚｚ 補正距離値。
DESCRIPTION OF
Claims (18)
入力面上における指示物の位置である入力面内位置を検出する入力装置が接続され、前記入力装置から検出結果に関する位置情報が入力される、入力装置用接続部と、
前記表示面にプロンプト表示領域を設定するプロンプト表示領域設定処理と、前記入力面内位置を、前記プロンプト表示領域内の対応位置である表示面内位置に、前記入力面と前記入力面内位置との位置関係が前記プロンプト表示領域と前記表示面内位置との位置関係に保持されるように規定された変換規則に従って、変換する２次元位置変換処理と、前記２次元位置変換処理で得られた前記表示面内位置にプロンプトを表示させるための表示画像データを生成する表示画像データ生成処理とを行う、制御部と
を備える情報表示制御装置。 A display device connecting portion to which a display device having a display surface is connected;
An input device connecting unit that is connected to an input device that detects a position within the input surface, which is the position of an indicator on the input surface, and that receives position information related to a detection result from the input device; and
Prompt display area setting processing for setting a prompt display area on the display surface, and the input surface position to the display surface position corresponding to the prompt display region, the input surface and the input surface position Obtained by the two-dimensional position conversion process and the two-dimensional position conversion process for conversion in accordance with a conversion rule defined so that the positional relation between the prompt display area and the position in the display surface is maintained. An information display control device comprising: a control unit that performs display image data generation processing for generating display image data for displaying a prompt at a position in the display surface.
入力面上における指示物の位置である入力面内位置を検出する入力装置が接続され、前記入力装置から検出結果に関する位置情報が入力される、入力装置用接続部と、
前記入力面内位置を、前記表示面の一部に予め設定されたプロンプト表示領域内の対応位置である表示面内位置に、前記入力面と前記入力面内位置との位置関係が前記プロンプト表示領域と前記表示面内位置との位置関係に保持されるように規定された変換規則に従って、変換する２次元位置変換処理と、前記２次元位置変換処理で得られた前記表示面内位置にプロンプトを表示させるための表示画像データを生成する表示画像データ生成処理とを行う、制御部と
を備える情報表示制御装置。 A display device connecting portion to which a display device having a display surface is connected;
An input device connecting unit that is connected to an input device that detects a position within the input surface, which is the position of an indicator on the input surface, and that receives position information related to a detection result from the input device; and
The positional relationship between the input surface and the input surface position is the prompt display, and the input surface position is set to a display surface position that is a corresponding position in a prompt display area preset in a part of the display surface. A two-dimensional position conversion process to be converted in accordance with a conversion rule defined so as to be held in a positional relationship between the region and the position in the display surface, and a prompt to the position in the display surface obtained by the two-dimensional position conversion process An information display control device comprising: a control unit that performs display image data generation processing for generating display image data for displaying the image.
入力面上における指示物の位置である入力面内位置を検出する入力装置が接続され、前記入力装置から検出結果に関する位置情報が入力される、入力装置用接続部と、
前記入力面に対して前記表示面内のプロンプト表示領域と相似形の入力受付領域を設定する入力受付領域設定処理と、前記入力面内位置が前記入力受付領域内に存在することを条件にして、前記入力面内位置を、前記プロンプト表示領域内の対応位置である表示面内位置に、相似変換を利用して変換する２次元位置変換処理と、前記２次元位置変換処理で得られた前記表示面内位置にプロンプトを表示させるための表示画像データを生成する表示画像データ生成処理とを行う、制御部と
を備える情報表示制御装置。 A display device connecting portion to which a display device having a display surface is connected;
An input device connecting unit that is connected to an input device that detects a position within the input surface, which is the position of an indicator on the input surface, and that receives position information related to a detection result from the input device; and
An input reception area setting process for setting an input reception area similar to the prompt display area in the display surface for the input surface, and on the condition that the position in the input surface exists in the input reception area The input surface position is converted into a display surface position corresponding to the prompt display area by using similarity conversion, and the two-dimensional position conversion process obtains the two-dimensional position conversion process. An information display control device comprising: a control unit that performs display image data generation processing for generating display image data for displaying a prompt at a position in the display surface.
前記制御部は、前記３次元位置情報に基づき、前記入力面のうちで前記入力面の法線に沿った前記指示物の直下位置を前記入力面内位置として、前記２次元位置変換処理を実行する、
請求項１〜請求項１０のうちのいずれか１項に記載の情報表示制御装置。 The input device also detects the position of the indicator above the input surface, and three-dimensional position information related to the detection result is input to the input device connection unit,
The control unit executes the two-dimensional position conversion process based on the three-dimensional position information, with the position immediately below the indicator along the normal of the input surface as the position within the input surface. To
The information display control apparatus according to any one of claims 1 to 10.
前記情報表示制御装置の前記表示装置用接続部に接続された表示装置と
を備える情報表示装置。 The information display control device according to any one of claims 1 to 14,
An information display device comprising: a display device connected to the display device connection portion of the information display control device.
（ｂ）表示装置の表示面にプロンプト表示領域を設定するステップと、
（ｃ）前記入力面内位置を、前記プロンプト表示領域内の対応位置である表示面内位置に、前記入力面と前記入力面内位置との位置関係が前記プロンプト表示領域と前記表示面内位置との位置関係に保持されるように規定された変換規則に従って、変換するステップと、
（ｄ）前記ステップ（ｃ）で得られた前記表示面内位置にプロンプトを表示させるための表示画像データを生成するステップと
を備える情報表示制御方法。 (A) obtaining an input in-plane position that is a position of an indicator on the input surface of the input device;
(B) setting a prompt display area on the display surface of the display device;
(C) The position in the input plane is set to a position in the display plane that is a corresponding position in the prompt display area, and the positional relationship between the input plane and the position in the input plane is the position in the prompt display area and the position in the display plane. Converting according to a conversion rule defined to be held in a positional relationship with
(D) An information display control method comprising: generating display image data for displaying a prompt at the position in the display surface obtained in the step (c).
（ｆ）前記入力面内位置を、前記表示面の一部に予め設定されたプロンプト表示領域内の対応位置である表示面内位置に、前記入力面と前記入力面内位置との位置関係が前記プロンプト表示領域と前記表示面内位置との位置関係に保持されるように規定された変換規則に従って、変換するステップと、
（ｇ）前記ステップ（ｆ）で得られた前記表示面内位置に前記プロンプトを表示させるための表示画像データを生成するステップと
を備える情報表示制御方法。 (E) obtaining an in-input surface position that is a position of an indicator on the input surface of the input device;
(F) The positional relationship between the input surface and the position within the input surface is the same as the position within the display surface that is a corresponding position in the prompt display area that is preset in a part of the display surface. Converting according to a conversion rule defined to be held in a positional relationship between the prompt display area and the display surface position;
And (g) generating display image data for displaying the prompt at the position on the display surface obtained in the step (f).
（ｉ）前記入力面に対して前記表示面内のプロンプト表示領域と相似形の入力受付領域を設定するステップと、
（ｊ）前記入力面内位置が前記入力受付領域内に存在することを条件にして、前記入力面内位置を、前記プロンプト表示領域内の対応位置である表示面内位置に、相似変換を利用して変換するステップと、
（ｋ）前記ステップ（ｊ）で得られた前記表示面内位置に前記プロンプトを表示させるための表示画像データを生成するステップと
を備える情報表示制御方法。 (H) obtaining an input in-plane position that is a position of an indicator on the input surface of the input device;
(I) setting an input receiving area similar to a prompt display area in the display surface for the input surface;
(J) Using similarity transformation to convert the input surface position into a display surface position corresponding to the prompt display area, provided that the input surface position exists in the input reception area. Step to convert and
(K) An information display control method comprising: generating display image data for displaying the prompt at the position in the display surface obtained in the step (j).
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013041429A JP5984718B2 (en) | 2013-03-04 | 2013-03-04 | In-vehicle information display control device, in-vehicle information display device, and information display control method for in-vehicle display device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013041429A JP5984718B2 (en) | 2013-03-04 | 2013-03-04 | In-vehicle information display control device, in-vehicle information display device, and information display control method for in-vehicle display device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2014170344A true JP2014170344A (en) | 2014-09-18 |
| JP5984718B2 JP5984718B2 (en) | 2016-09-06 |
Family
ID=51692704
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2013041429A Active JP5984718B2 (en) | 2013-03-04 | 2013-03-04 | In-vehicle information display control device, in-vehicle information display device, and information display control method for in-vehicle display device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5984718B2 (en) |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH04119418A (en) * | 1990-09-10 | 1992-04-20 | Hitachi Ltd | Pointing device and its coordinate transforming method |
| JPH07104914A (en) * | 1993-09-30 | 1995-04-21 | Toshiba Corp | Touch input device |
| JP2003348371A (en) * | 2002-05-27 | 2003-12-05 | Canon Inc | Remote control apparatus and operation control system |
| JP2007114035A (en) * | 2005-10-20 | 2007-05-10 | Denso Corp | Display device for vehicle |
| JP2008059430A (en) * | 2006-09-01 | 2008-03-13 | Alpine Electronics Inc | User interface device |
| JP2009098899A (en) * | 2007-10-16 | 2009-05-07 | Toyota Motor Corp | Information presentation device |
| JP2009259110A (en) * | 2008-04-18 | 2009-11-05 | Toshiba Corp | Display object control device, display object control program, and display device |
| JP2010061224A (en) * | 2008-09-01 | 2010-03-18 | Honda Motor Co Ltd | Input/output device for automobile |
| WO2010113397A1 (en) * | 2009-03-31 | 2010-10-07 | 三菱電機株式会社 | Display input device |
| JP2011118857A (en) * | 2009-12-02 | 2011-06-16 | Hyundai Motor Co Ltd | User interface device for operations of multimedia system for vehicle |
-
2013
- 2013-03-04 JP JP2013041429A patent/JP5984718B2/en active Active
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH04119418A (en) * | 1990-09-10 | 1992-04-20 | Hitachi Ltd | Pointing device and its coordinate transforming method |
| JPH07104914A (en) * | 1993-09-30 | 1995-04-21 | Toshiba Corp | Touch input device |
| JP2003348371A (en) * | 2002-05-27 | 2003-12-05 | Canon Inc | Remote control apparatus and operation control system |
| JP2007114035A (en) * | 2005-10-20 | 2007-05-10 | Denso Corp | Display device for vehicle |
| JP2008059430A (en) * | 2006-09-01 | 2008-03-13 | Alpine Electronics Inc | User interface device |
| JP2009098899A (en) * | 2007-10-16 | 2009-05-07 | Toyota Motor Corp | Information presentation device |
| JP2009259110A (en) * | 2008-04-18 | 2009-11-05 | Toshiba Corp | Display object control device, display object control program, and display device |
| JP2010061224A (en) * | 2008-09-01 | 2010-03-18 | Honda Motor Co Ltd | Input/output device for automobile |
| WO2010113397A1 (en) * | 2009-03-31 | 2010-10-07 | 三菱電機株式会社 | Display input device |
| JP2011118857A (en) * | 2009-12-02 | 2011-06-16 | Hyundai Motor Co Ltd | User interface device for operations of multimedia system for vehicle |
Also Published As
| Publication number | Publication date |
|---|---|
| JP5984718B2 (en) | 2016-09-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5355683B2 (en) | Display input device and in-vehicle information device | |
| JP5430782B2 (en) | Display input device and in-vehicle information device | |
| JP5052677B2 (en) | Display input device | |
| US8963849B2 (en) | Display input device | |
| JP5704408B2 (en) | Operation input system | |
| JP5561092B2 (en) | INPUT DEVICE, INPUT CONTROL SYSTEM, INFORMATION PROCESSING METHOD, AND PROGRAM | |
| US9110571B2 (en) | Operation input system | |
| JP5700254B2 (en) | Operation input system | |
| JP6033465B2 (en) | Display control device | |
| JP5933468B2 (en) | Information display control device, information display device, and information display control method | |
| JP6041708B2 (en) | In-vehicle information display control device, in-vehicle information display device, and information display control method | |
| JP5984718B2 (en) | In-vehicle information display control device, in-vehicle information display device, and information display control method for in-vehicle display device | |
| WO2015083264A1 (en) | Display control device, and display control method | |
| JP5889230B2 (en) | Information display control device, information display device, and information display control method | |
| JP5950851B2 (en) | Information display control device, information display device, and information display control method | |
| JP6180306B2 (en) | Display control apparatus and display control method | |
| JP2014052817A (en) | Image display method and image display device | |
| JP2013134722A (en) | Operation input system | |
| JP2018063521A (en) | Display control system and display control program | |
| JP2011065589A (en) | User interface device | |
| KR20140135081A (en) | Potable electronic chart display and information system using electronic navigational chart viewer component available on multiple platforms, and potable electronic chart display method thereof | |
| JP2013152688A (en) | Operation input system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150204 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151228 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160112 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160307 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160517 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160608 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160705 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160802 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 5984718 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |