JP5127547B2

JP5127547B2 - Display object control device, display object control program, and display device

Info

Publication number: JP5127547B2
Application number: JP2008109415A
Authority: JP
Inventors: 圭二石森
Original assignee: Toshiba Corp; Toshiba Solutions Corp
Current assignee: Toshiba Corp; Toshiba Digital Solutions Corp
Priority date: 2008-04-18
Filing date: 2008-04-18
Publication date: 2013-01-23
Anticipated expiration: 2028-04-18
Also published as: JP2009259110A

Description

本発明は、接触した位置を検出するタッチパネル式の表示装置に、アプリケーションプログラムによって表示される、オブジェクトを制御する表示オブジェクト制御装置、表示オブジェクト制御プログラムおよび表示装置に関する。 The present invention relates to a display object control device, a display object control program, and a display device that control an object displayed by an application program on a touch panel display device that detects a touched position.

近年の情報端末の発達に伴い、タッチパネル式の表示装置が普及している。このタッチパネル式の表示装置は、指やスタイラスなどのタッチ部材で画面を押下することにより、表示装置に接続された情報端末を操作することができる。タッチパネル式の表示装置を使用することにより、マウス等の特別な装置を操作することなく、同様の操作をすることが可能である。従って、タッチパネル式の表示装置のユーザは、直感的に情報端末を操作することができるので、誰にでも扱いやすく、情報端末の操作に不慣れな人たちにも馴染みやすいメリットがある。このタッチパネル式の表示装置は、銀行のＡＴＭ、カーナビゲーションシステム、切符等の自動販売機、コピー機等に使用されている。 With the development of information terminals in recent years, touch panel type display devices have become widespread. This touch panel display device can operate an information terminal connected to the display device by pressing the screen with a touch member such as a finger or a stylus. By using a touch panel display device, the same operation can be performed without operating a special device such as a mouse. Accordingly, since the user of the touch panel display device can intuitively operate the information terminal, it is easy for anyone to handle and has the advantage of being familiar with people who are unfamiliar with the operation of the information terminal. This touch panel type display device is used in ATMs of banks, car navigation systems, vending machines such as tickets, copy machines and the like.

これらの装置は一般の人々に広く使用されるので、誰でも容易に扱えることが要求されている。例えば、操作者の指先が接近したことを検出し、操作者の指先が目指す領域を特定して画面の表示を変更する表示装置がある（例えば特許文献１参照）。この特許文献１に記載の表示装置では、特許文献１の図３および図４に示されるように、接近した部分を拡大表示するとともに、より詳細な情報を表示することにより、操作者の選択領域を絞り込むことができる。 Since these devices are widely used by the general public, it is required that anyone can easily handle them. For example, there is a display device that detects that the fingertip of the operator has approached, identifies a region that the operator's fingertip aims at, and changes the display on the screen (see, for example, Patent Document 1). In the display device described in Patent Document 1, as shown in FIG. 3 and FIG. 4 of Patent Document 1, an enlarged portion of an approached portion is displayed, and more detailed information is displayed, so that an operator's selection area is displayed. Can be narrowed down.

また、手が侵入してきたことを検知すると、指が存在するゾーンを判定し、指が存在するゾーンに位置する操作スイッチ表示部を拡大して表示する情報表示装置がある（例えば特許文献２参照）。この特許文献２に記載の情報表示装置では、複数の赤外線センサーからの信号により指が存在するゾーンを検出し、そのゾーンに位置する操作スイッチ表示部を拡大する。
特開２００３−４４２２３号公報特開２００６−１０３３６３号公報 Also, there is an information display device that, when detecting that a hand has entered, determines a zone where a finger is present and displays an enlarged operation switch display unit located in the zone where the finger is present (see, for example, Patent Document 2). ). In the information display device described in Patent Document 2, a zone where a finger is present is detected by signals from a plurality of infrared sensors, and an operation switch display unit located in the zone is enlarged.
JP 2003-44223 A JP 2006-103363 A

しかしながら、上述したような公知技術においては、ユーザが押下しているオブジェクトを適切に選択できるものではないと考えられる。 However, in the known technology as described above, it is considered that the object pressed by the user cannot be appropriately selected.

一般的なタッチパネル式の表示装置においては、スタイラスなどの尖端を持つツールで押下することにより、対象物が小さくても確実に押下できるが、スタイラスなどのツールを取り出すのが煩わしい場合がある。特に指などで押下する際、尖端でないので、目的とするオブジェクトを適切に選択しづらい問題がある。 In a general touch panel display device, pressing with a tool having a sharp tip such as a stylus can surely press the object even if the object is small, but it may be troublesome to take out a tool such as a stylus. In particular, when pressing with a finger or the like, there is a problem that it is difficult to select a target object appropriately because it is not a tip.

また、特許文献１に記載の表示装置においては、操作者の選択領域を絞り込むことができるものの、最初に表示された画面では、全ての情報を表示できない問題がある。具体的には、所定量の情報の全てを表示画面に全て表示しようとすると、文字が小さくなってしまう問題がある。一方、操作者が見やすい文字の大きさにすると、全ての情報量を表示しきれず、表示画面に表示する情報量を、制限せざるを得ない問題がある。さらに、特許文献２に記載の方法では、指と表示画面との距離が所定値以下になると、スイッチが拡大されるので、そのスイッチが目的のスイッチである場合は良いが、スイッチが拡大された後に他のスイッチを押下する場合のユーザの処理が煩雑になってしまう問題がある。具体的には、所定のスイッチが拡大されることにより、他のスイッチを選択できない。従って、ユーザが他のスイッチを押下する場合、目的のスイッチが拡大されるまで、指を表示画面に近づけたり離したりを繰り返す必要がある。 Further, in the display device described in Patent Document 1, although the operator's selection area can be narrowed down, there is a problem that not all information can be displayed on the screen displayed first. Specifically, when all the predetermined amount of information is to be displayed on the display screen, there is a problem that the characters become small. On the other hand, if the size of the characters is easy for the operator to see, there is a problem that the entire information amount cannot be displayed and the amount of information displayed on the display screen must be limited. Furthermore, in the method described in Patent Document 2, when the distance between the finger and the display screen is equal to or less than a predetermined value, the switch is expanded. Therefore, the switch may be the target switch, but the switch is expanded. There is a problem that the user's processing becomes complicated when the other switch is pressed later. Specifically, when a predetermined switch is enlarged, another switch cannot be selected. Therefore, when the user presses another switch, it is necessary to repeatedly move the finger closer to or away from the display screen until the target switch is enlarged.

このように、従来な方法では、特殊な装置を用いることなく指だけでボタンを押すことが難しい場合があった。また特許文献１および特許文献２に記載されるように、指でボタンを押下することができても、画面に表示する情報量が制約される場合や、押下の操作が煩雑になる場合があった。そこで、画面に表示する情報を制約することなく、画面上のオブジェクトをユーザが操作をしやすいように支援する技術が期待されている。 As described above, in the conventional method, it is sometimes difficult to press the button with only a finger without using a special device. In addition, as described in Patent Document 1 and Patent Document 2, even if the button can be pressed with a finger, the amount of information displayed on the screen may be limited, or the pressing operation may be complicated. It was. Therefore, there is a demand for a technique that supports a user to easily operate an object on the screen without restricting information displayed on the screen.

従って本発明の目的は、タッチパネル式の表示装置に表示されるオブジェクトを、ユーザが適切に選択できる表示オブジェクト制御装置、表示オブジェクト制御プログラムおよび表示装置を提供することである。 Accordingly, an object of the present invention is to provide a display object control device, a display object control program, and a display device that allow a user to appropriately select an object displayed on a touch panel display device.

上記課題を解決するために、本発明の第１の特徴は、タッチパネル式の表示装置に、アプリケーションプログラムによって表示されるオブジェクトを制御する表示オブジェクト制御装置に関する。即ち本発明の第１の特徴に係る表示オブジェクト制御装置は、オブジェクトの識別子と、オブジェクトの位置データとを関連づけて、オブジェクト位置データ記憶装置に記憶するオブジェクト位置データ記憶手段と、タッチ部材が表示装置の表示画面に接近すると、表示画面におけるタッチ部材の位置座標と、タッチ部材と表示画面との距離と、を逐次取得する接近操作検出手段と、オブジェクト位置データ記憶装置を読み出して、接近操作検出手段によって取得された位置座標に対応するオブジェクトの識別子を取得するオブジェクト取得手段と、オブジェクト取得手段で取得されたオブジェクトについて、接近操作検出手段によって逐次取得された距離に対応する位置データを算出して、該オブジェクトの位置データを算出された新たな位置データに逐次変更するプロパティ変更手段と、プロパティ変更手段によって新たな位置データが逐次変更される度に、新たな位置データに基づいてオブジェクトを表示する画面表示手段とを備える。 In order to solve the above-described problem, a first feature of the present invention relates to a display object control device that controls an object displayed by an application program on a touch panel display device. That is, the display object control device according to the first feature of the present invention includes an object position data storage means for associating an object identifier and object position data and storing them in the object position data storage device, and the touch member as a display device. When approaching the display screen, the approach operation detecting means for sequentially acquiring the position coordinates of the touch member on the display screen and the distance between the touch member and the display screen, the object position data storage device is read, and the approach operation detecting means Calculating the position data corresponding to the distance sequentially acquired by the approaching operation detecting means for the object acquired by the object acquiring means, the object acquiring means for acquiring the identifier of the object corresponding to the position coordinates acquired by The new position data of the object is calculated Comprises a property changing means for sequentially changing the location data, every time a new location data is sequentially changed by the property changing means, and a screen display means for displaying the object based on the new position data.

ここで、接近操作検出手段は、タッチ部材の表示装置の表示画面への接近を感知する接近感知装置を介して、表示画面におけるタッチ部材の位置座標と、タッチ部材と表示画面との距離と、を取得しても良い。 Here, the approaching operation detection means, through the proximity sensing device for sensing the approach of the touch member to the display screen, the position coordinates of the touch member on the display screen, the distance between the touch member and the display screen, You may get

プロパティ変更手段は、さらに、オブジェクト取得手段で取得されたオブジェクトを、他のオブジェクトより前面に表示するようにプロパティを変更しても良い。
また、オブジェクト位置データは、オブジェクトの識別子にさらに、タッチ部材と表示画面との距離に応じて当該オブジェクトの大きさを決めるための増減値および単位が対応づけられても良い。この場合プロパティ変更手段は、タッチ部材と表示画面との距離が、単位の数値だけ小さくなると、当該オブジェクトの大きさを、増減値の数値だけ大きくするとともに、単位の数値だけ大きくなると、当該オブジェクトの大きさを、増減値の数値だけ小さくする。
さらにプロパティ変更手段は、タッチ部材と表示画面との距離が、所定の閾値以下になるとオブジェクトの大きさを変更するとともに、タッチ部材と前記表示画面との距離が大きくなっても、表示画面に最初に表示された当該オブジェクトの大きさより小さくならないように、当該オブジェクトの位置データを算出しても良い。 The property changing unit may further change the property so that the object acquired by the object acquiring unit is displayed in front of other objects.
Further, in the object position data, an increase / decrease value and a unit for determining the size of the object according to the distance between the touch member and the display screen may be associated with the identifier of the object. In this case, when the distance between the touch member and the display screen is decreased by the numerical value of the unit, the property changing unit increases the size of the object by the numerical value of the increase / decrease value, and when the distance of the unit is increased by the numerical value of the unit. Decrease the size by the increment / decrement value.
Further, the property changing means changes the size of the object when the distance between the touch member and the display screen is equal to or less than a predetermined threshold value, and even if the distance between the touch member and the display screen increases, The position data of the object may be calculated so as not to be smaller than the size of the object displayed on the screen.

本発明の第２の特徴は、タッチパネル式の表示装置に、アプリケーションプログラムによって表示されるオブジェクトを制御する表示オブジェクト制御プログラムに関する。本発明の第２の特徴に係る表示オブジェクト制御プログラムは、コンピュータを、オブジェクトの識別子と、オブジェクトの位置データとを関連づけて、オブジェクト位置データ記憶装置に記憶するオブジェクト位置データ記憶手段と、タッチ部材が表示装置の表示画面に接近すると、表示画面におけるタッチ部材の位置座標と、タッチ部材と表示画面との距離と、を逐次取得する接近操作検出手段と、オブジェクト位置データ記憶装置を読み出して、接近操作検出手段によって取得された位置座標に対応するオブジェクトの識別子を取得するオブジェクト取得手段と、オブジェクト取得手段で取得されたオブジェクトについて、接近操作検出手段によって逐次取得された距離に対応する位置データを算出して、該オブジェクトの位置データを算出された新たな位置データに逐次変更するプロパティ変更手段と、プロパティ変更手段によって新たな位置データが逐次変更される度に、新たな位置データに基づいてオブジェクトを表示する画面表示手段として機能させる。 The second feature of the present invention relates to a display object control program for controlling an object displayed by an application program on a touch panel display device. Display object control program according to the second aspect of the present invention, the computer, the identifier of the object, in association with the position data of the object, and the object position data storage means for storing the object position data storage device, a touch member When approaching the display screen of the display device, the approach operation detecting means for sequentially acquiring the position coordinates of the touch member on the display screen and the distance between the touch member and the display screen, and the object position data storage device are read out to perform the approach operation. Object acquisition means for acquiring an identifier of an object corresponding to the position coordinate acquired by the detection means, and position data corresponding to the distance sequentially acquired by the approach operation detection means for the object acquired by the object acquisition means. The position data of the object And property changing means for sequentially changing the calculated new position data, every time a new location data is sequentially changed by the property changing means, to function as a screen display means for displaying the object based on the new position data.

本発明によれば、タッチパネル式の表示装置に表示されるオブジェクトを、ユーザが適切に選択できる表示オブジェクト制御装置、表示オブジェクト制御プログラムおよび表示装置を提供することができる。 According to the present invention, it is possible to provide a display object control device, a display object control program, and a display device that allow a user to appropriately select an object displayed on a touch panel display device.

次に、図面を参照して、本発明の実施の形態を説明する。以下の図面の記載において、同一又は類似の部分には同一又は類似の符号を付している。 Next, embodiments of the present invention will be described with reference to the drawings. In the following description of the drawings, the same or similar parts are denoted by the same or similar reference numerals.

（最良の実施の形態）
本発明の最良の実施の形態に係る表示オブジェクト制御装置１は、図１に示すように、接触した位置を検出するタッチパネル式の表示装置１０５を備えており、表示装置１０５に、アプリケーションプログラムによって表示されるオブジェクトを制御する装置である。図１に示す例では、表示オブジェクト制御装置１が表示装置１０５を備えている場合について説明する。ここで、表示オブジェクト制御装置１が、複数の表示装置１０５に接続され、その複数の表示装置１０５において表示されるオブジェクトを、制御しても良い。本発明の最良の実施の形態において「オブジェクト」とは、表示画面１０５ａに表示されるボタン、リストボックス、テキストボックスなどの画面表示に用いられるオブジェクトであって、特にユーザによる選択の対象となるオブジェクトである。 (Best Embodiment)
As shown in FIG. 1, the display object control device 1 according to the best embodiment of the present invention includes a touch panel display device 105 that detects a touched position, and is displayed on the display device 105 by an application program. It is a device that controls the object to be processed. In the example illustrated in FIG. 1, a case where the display object control device 1 includes the display device 105 will be described. Here, the display object control device 1 may be connected to a plurality of display devices 105 and control objects displayed on the plurality of display devices 105. In the best mode of the present invention, the “object” is an object used for screen display such as a button, list box, and text box displayed on the display screen 105a, and is an object to be selected by the user. It is.

ここで、図２を参照して本発明の最良の実施の形態に係る表示オブジェクト制御装置１による動作を説明する。図２（ａ）（ｃ）および（ｅ）は、表示装置１０５の表示画面１０５ａとタッチ部材１３０を示す図である。図２（ｂ）（ｄ）および（ｆ）は、表示画面１０５ａを横方向から見た図で、タッチ部材１３０と表示装置１０５の表示画面１０５ａとの距離を示す図である。図２においては、ユーザが指で、「さ」のボタンを押下しようとしている場合について説明する。 Here, the operation of the display object control apparatus 1 according to the preferred embodiment of the present invention will be described with reference to FIG. FIGS. 2A, 2 </ b> C, and 2 </ b> E are diagrams showing the display screen 105 a and the touch member 130 of the display device 105. FIGS. 2B, 2D, and 2F are views of the display screen 105a viewed from the horizontal direction, and are diagrams illustrating the distance between the touch member 130 and the display screen 105a of the display device 105. FIG. In FIG. 2, a case where the user tries to press the “sa” button with a finger will be described.

図２（ｂ）に示すように指と表示画面１０５ａとの距離が所定値より大きい時、図２（ａ）に示すように、「さ」のボタンは通常通りの大きさである。図２（ｄ）に示すように指と表示画面１０５ａとの距離が所定値より小さくなると、図２（ｃ）に示すように、「さ」のボタンは少し大きくなる。図２（ｆ）に示すように指と表示画面１０５ａとの距離がさらに小さくなると、指と表示画面１０５ａとの距離に応じて、図２（ｅ）に示すように、「さ」のボタンはさらに大きくなる。ここで、所定値とは、本願の最良の実施の形態に係る表示オブジェクト制御装置１が、タッチ部材１３０と表示画面１０５ａとの距離であって、オブジェクトを大きくする距離の閾値である。 When the distance between the finger and the display screen 105a is larger than a predetermined value as shown in FIG. 2B, the “sa” button has a normal size as shown in FIG. When the distance between the finger and the display screen 105a becomes smaller than a predetermined value as shown in FIG. 2D, the “sa” button becomes slightly larger as shown in FIG. When the distance between the finger and the display screen 105a is further reduced as shown in FIG. 2F, the “sa” button is changed according to the distance between the finger and the display screen 105a as shown in FIG. It gets bigger. Here, the predetermined value is a distance between the touch member 130 and the display screen 105a by the display object control apparatus 1 according to the best embodiment of the present application, and is a threshold value for increasing the object.

このように、本発明の最良の実施の形態においては、指と表示画面１０５ａとの距離が小さくなるに従って、ユーザが目的のボタンを押下しやすいように、目的のボタンが大きくなる。このように、ユーザが押下の対象とするオブジェクトのみの視認性を向上させることにより、ユーザによる誤操作を防ぐことができる。 Thus, in the preferred embodiment of the present invention, as the distance between the finger and the display screen 105a decreases, the target button increases so that the user can easily press the target button. In this way, by improving the visibility of only the objects that are to be pressed by the user, erroneous operations by the user can be prevented.

図３に示すように、本発明の最良の実施の形態に係る表示オブジェクト制御装置１は、中央処理制御装置１０１、ＲＯＭ（Read Only Memory）１０２、ＲＡＭ（Random Access Memory）１０３および入出力インタフェース１０９が、バス１１０を介して接続されている。入出力インタフェース１０９には、入力装置１０４、表示装置１０５、通信制御装置１０６、記憶装置１０７およびリムーバブルディスク１０８が接続されている。 As shown in FIG. 3, the display object control device 1 according to the preferred embodiment of the present invention includes a central processing control device 101, a ROM (Read Only Memory) 102, a RAM (Random Access Memory) 103, and an input / output interface 109. Are connected via the bus 110. An input device 104, a display device 105, a communication control device 106, a storage device 107, and a removable disk 108 are connected to the input / output interface 109.

中央処理制御装置１０１は、入力装置１０４からの入力信号に基づいてＲＯＭ１０２から表示オブジェクト制御装置１を起動するためのブートプログラムを読み出して実行し、さらに記憶装置１０７に記憶されたオペレーティングシステムを読み出す。さらに中央処理制御装置１０１は、入力装置１０４や通信制御装置１０６などの入力信号に基づいて、各種装置の制御を行ったり、ＲＡＭ１０３や記憶装置１０７などに記憶されたプログラムおよびデータを読み出してＲＡＭ１０３にロードするとともに、ＲＡＭ１０３から読み出されたプログラムのコマンドに基づいて、データの計算又は加工など、後述する一連の処理を実現する処理装置である。 The central processing control device 101 reads out and executes a boot program for starting the display object control device 1 from the ROM 102 based on an input signal from the input device 104, and further reads an operating system stored in the storage device 107. Further, the central processing control device 101 controls various devices based on input signals from the input device 104, the communication control device 106, etc., and reads programs and data stored in the RAM 103, the storage device 107, etc. into the RAM 103. A processing device that loads and implements a series of processes to be described later, such as data calculation or processing, based on a program command read from the RAM 103.

入力装置１０４は、操作者が各種の操作を入力するキーボード、マウスなどの入力デバイスにより構成されており、操作者の操作に基づいて入力信号を作成し、入出力インタフェース１０９およびバス１１０を介して中央処理制御装置１０１に送信される。表示装置１０５は、液晶ディスプレイなどの表示装置である。中央処理制御装置１０１からバス１１０および入出力インタフェース１０９を介して表示装置１０５において表示させる出力信号を受信し、例えば中央処理制御装置１０１の処理結果などを表示する装置である。 The input device 104 includes input devices such as a keyboard and a mouse through which an operator inputs various operations. The input device 104 generates an input signal based on the operation of the operator, and inputs via the input / output interface 109 and the bus 110. It is transmitted to the central processing control apparatus 101. The display device 105 is a display device such as a liquid crystal display. This is a device that receives an output signal to be displayed on the display device 105 from the central processing control device 101 via the bus 110 and the input / output interface 109 and displays the processing result of the central processing control device 101, for example.

ここで、本発明の最良の実施の形態に係る表示装置１０５は、タッチパネル式の表示装置である。表示装置１０５は、指やスタイラス等のタッチ部材１３０で表示画面１０５ａ上での接触を感知すると、その接触した位置の情報を取得する。さらに表示装置１０５は、取得した位置を、入出力インタフェース１０９およびバス１１０を介して中央処理制御装置１０１に伝達する。これにより、表示装置１０５は、マウス等の他のポインタを使わなくとも、ポインタと同様の情報を取得できる。画面への接触を感知する方法としては、圧力の変化を感知する感圧式と、静電気による電気信号を感知する静電式等があるが、本発明の最良の実施の形態においては、どちらの方式についても適用することができる。 Here, the display device 105 according to the preferred embodiment of the present invention is a touch panel type display device. When the touch device 130 such as a finger or a stylus senses contact on the display screen 105a, the display device 105 acquires information on the touched position. Further, the display device 105 transmits the acquired position to the central processing control device 101 via the input / output interface 109 and the bus 110. Accordingly, the display device 105 can acquire the same information as the pointer without using another pointer such as a mouse. As a method for detecting contact with the screen, there are a pressure-sensitive type for detecting a change in pressure and an electrostatic type for detecting an electric signal due to static electricity. In the best mode of the present invention, either method is used. Can also be applied.

通信制御装置１０６は、ＬＡＮカードやモデムなどの装置であり、表示オブジェクト制御装置１をインターネットやＬＡＮなどの通信ネットワークに接続する装置である。通信制御装置１０６を介して通信ネットワークと送受信したデータは入力信号又は出力信号として、入出力インタフェース１０９およびバス１１０を介して中央処理制御装置１０１に送受信される。 The communication control device 106 is a device such as a LAN card or a modem, and is a device that connects the display object control device 1 to a communication network such as the Internet or a LAN. Data transmitted / received to / from the communication network via the communication control device 106 is transmitted / received to / from the central processing control device 101 via the input / output interface 109 and the bus 110 as an input signal or an output signal.

記憶装置１０７は半導体記憶装置や磁気ディスク装置であって、中央処理制御装置１０１で実行されるプログラムやデータが記憶されている。リムーバブルディスク１０８は、光ディスクやフレキシブルディスクのことであり、ディスクドライブによって読み書きされた信号は、入出力インタフェース１０９およびバス１１０を介して中央処理制御装置１０１に送受信される。 The storage device 107 is a semiconductor storage device or a magnetic disk device, and stores programs and data executed by the central processing control device 101. The removable disk 108 is an optical disk or a flexible disk, and signals read / written by the disk drive are transmitted / received to / from the central processing control apparatus 101 via the input / output interface 109 and the bus 110.

本発明の最良の実施の形態に係る表示オブジェクト制御装置１の記憶装置１０７には、アプリケーションプログラムおよび表示オブジェクト制御プログラムが記憶されるとともに、オブジェクト位置データ２１が記憶される。また、アプリケーションプログラムが表示オブジェクト制御装置１の中央処理制御装置１０１に読み込まれ実行されることによって、アプリケーション実行手段１１、画面表示手段１２およびタッチ操作制御手段１３等が表示オブジェクト制御装置１に実装される。表示オブジェクト制御プログラムが表示オブジェクト制御装置１の中央処理制御装置１０１に読み込まれ実行されることによって、接近操作検出手段１４、オブジェクト取得手段１５およびプロパティ変更手段１６が表示オブジェクト制御装置１に実装される。 The storage device 107 of the display object control device 1 according to the best mode of the present invention stores an application program and a display object control program, and also stores object position data 21. In addition, the application execution means 11, the screen display means 12, the touch operation control means 13, and the like are mounted on the display object control apparatus 1 by the application program being read and executed by the central processing control apparatus 101 of the display object control apparatus 1. The When the display object control program is read and executed by the central processing control device 101 of the display object control device 1, the approach operation detection means 14, the object acquisition means 15, and the property change means 16 are mounted on the display object control device 1. .

オブジェクト位置データ２１は、アプリケーション実行手段１１によって表示される画面表示データのオブジェクトのプロパティに関するデータである。例えば、オブジェクト位置データ２１には、オブジェクトの識別子と、オブジェクトの位置データとが関連づけて記憶されている。オブジェクト位置データ２１は、オブジェクト位置データ記憶手段によって記憶装置１０７に記憶される。アプリケーション実行手段１１が、画面表示する度に、画面表示する画面データに基づいて、オブジェクト位置データ記憶手段は、この画面データに含まれる各オブジェクトの位置データを、オブジェクト位置データ２１に記憶しても良い。 The object position data 21 is data relating to the object property of the screen display data displayed by the application execution means 11. For example, the object position data 21 stores an object identifier and object position data in association with each other. The object position data 21 is stored in the storage device 107 by the object position data storage means. Each time the application execution unit 11 displays the screen, the object position data storage unit stores the position data of each object included in the screen data in the object position data 21 based on the screen data displayed on the screen. good.

本発明の最良の実施の形態に係るオブジェクト位置データ２１は、図４に示すデータ構造とデータの一例を備える。具体的には、オブジェクト位置データ２１は、オブジェクトＩＤをキーとして、表示位置Ｙ、表示位置Ｘ、高さ、幅、増減値および単位が関連づけられている。図５に示すように、「表示位置Ｙ」は、表示画面１０５ａにおいて表示されるオブジェクトの中心の縦方向（Ｙ方向）の座標位置である。「表示位置Ｘ」は、表示画面１０５ａにおいて表示されるオブジェクトの中心の横方向（Ｘ方向）の座標位置である。「高さ」は、オブジェクトの縦方向（Ｙ方向）の長さで、「幅」は、オブジェクトの横方向（Ｘ方向）の長さである。 The object position data 21 according to the preferred embodiment of the present invention has an example of the data structure and data shown in FIG. Specifically, the object position data 21 is associated with a display position Y, a display position X, a height, a width, an increase / decrease value, and a unit using the object ID as a key. As shown in FIG. 5, the “display position Y” is a coordinate position in the vertical direction (Y direction) of the center of the object displayed on the display screen 105a. “Display position X” is a coordinate position in the horizontal direction (X direction) of the center of the object displayed on the display screen 105a. “Height” is the length in the vertical direction (Y direction) of the object, and “width” is the length in the horizontal direction (X direction) of the object.

「増減値」および「単位」は、タッチ部材１３０と表示画面１０５ａとの距離に応じて、オブジェクトの大きさを決めるパラメータである。本発明の最良の実施の形態においては、タッチ部材１３０と表示画面１０５ａとの距離が、「単位」の数値だけ変化すると、オブジェクトの大きさを「増減値」の数値だけ変化する。具体的には、タッチ部材１３０と表示画面１０５ａとの距離が３ｍｍだけ近くなると、オブジェクトの高さおよび幅のそれぞれの大きさを２ピクセルだけ大きくする。逆に、タッチ部材１３０と表示画面１０５ａとの距離が３ｍｍだけ遠くなると、オブジェクトの高さおよび幅のそれぞれの大きさを２ピクセルだけ小さくする。ただし、アプリケーション実行手段１１によって最初に登録されたオブジェクトの大きさよりも小さくならないように制御されることが好ましい。 The “increase / decrease value” and “unit” are parameters that determine the size of the object according to the distance between the touch member 130 and the display screen 105a. In the preferred embodiment of the present invention, when the distance between the touch member 130 and the display screen 105a changes by a numerical value of “unit”, the size of the object changes by a numerical value of “increase / decrease value”. Specifically, when the distance between the touch member 130 and the display screen 105a is reduced by 3 mm, the height and width of the object are increased by 2 pixels. Conversely, when the distance between the touch member 130 and the display screen 105a increases by 3 mm, the height and width of the object are reduced by 2 pixels. However, it is preferable that the application execution unit 11 controls the size so as not to be smaller than the size of the object registered first.

オブジェクト位置データ２１は、さらに、オブジェクトのサイズを変更するための、タッチ部材１３０と表示画面１０５ａとの距離の閾値データを備えても良い。タッチ部材１３０と表示画面１０５ａとの距離が、この閾値データ以下になった場合のみ、表示オブジェクト制御装置１が、オブジェクトのサイズを変更することが好ましい。 The object position data 21 may further include threshold value data of the distance between the touch member 130 and the display screen 105a for changing the size of the object. It is preferable that the display object control device 1 changes the size of the object only when the distance between the touch member 130 and the display screen 105a is equal to or smaller than the threshold data.

本願の最良の実施の形態においては、「増減値」および「単位」を設定することにより、タッチ部材１３０と表示画面１０５ａとの距離の変化量に応じて、オブジェクトの大きさを決める場合について説明したが、この方法には限られない。例えば、タッチ部材１３０と表示画面１０５ａとの距離からオブジェクトの大きさが算出されても良い。また、図４においては、「増減値」および「単位」は、オブジェクト毎に設定される場合について説明したが、全てのオブジェクトに共通して「増減値」および「単位」を算出しても良い。このように、タッチ部材１３０と表示画面１０５ａとの距離に応じて、オブジェクトの大きさを決める方法としては様々な方法が考えられる。 In the best embodiment of the present application, the case where the size of an object is determined according to the amount of change in the distance between the touch member 130 and the display screen 105a by setting “increase / decrease value” and “unit” will be described. However, it is not limited to this method. For example, the size of the object may be calculated from the distance between the touch member 130 and the display screen 105a. In FIG. 4, the case where “increase / decrease value” and “unit” are set for each object has been described, but “increase / decrease value” and “unit” may be calculated in common for all objects. . As described above, various methods can be considered as a method for determining the size of the object in accordance with the distance between the touch member 130 and the display screen 105a.

アプリケーション実行手段１１は、一般的なアプリケーションを実行する手段である。このアプリケーションは、タッチパネル式の表示装置１０５を介して、ユーザが表示装置１０５の表示画面１０５ａを接触することにより、ユーザによる操作指示を受け、その操作指示に基づいてアプリケーションを実行する。例えば表示装置１０５が銀行ＡＴＭの表示装置である場合、アプリケーション実行手段１１は、ユーザの指定したメニューに従って、「引き出し」、「残高照会」等のアプリケーションを実行する。また、表示装置１０５が交通機関の券売機の表示装置である場合、アプリケーション実行手段１１は、ユーザの指定したメニューに従って、「切符購入」、「定期券購入」等のアプリケーションを実行する。 The application execution means 11 is a means for executing a general application. This application receives an operation instruction from the user when the user touches the display screen 105a of the display device 105 via the touch panel display device 105, and executes the application based on the operation instruction. For example, when the display device 105 is a bank ATM display device, the application execution means 11 executes applications such as “withdrawal” and “balance inquiry” according to the menu specified by the user. Further, when the display device 105 is a display device of a ticket vending machine for transportation facilities, the application execution means 11 executes applications such as “buy ticket” and “buy commuter pass” according to the menu specified by the user.

画面表示手段１２は、アプリケーション実行手段１１によって実行された結果等を、アプリケーション実行手段１１の指示に基づいて、表示装置１０５の表示画面１０５ａに表示する。画面表示手段１２はさらに、プロパティ変更手段１５によってオブジェクトのプロパティが変更される度に画面の表示を行うことが好ましい。表示装置１０５が銀行ＡＴＭの表示装置である場合、例えば画面表示手段１２は、「引き出し」、「残高照会」のメニュー等を表示装置１０５に表示する。表示装置１０５が交通機関の券売機の表示装置である場合、例えば画面表示手段１２は、「切符購入」、「定期券購入」のメニュー等を表示装置１０５に表示する。このとき画面表示手段１２は、後述するプロパティ変更手段１５によって変更されたオブジェクトのプロパティに従って構成された画面データを表示装置１０５に送信して、表示装置１０５に表示する。 The screen display unit 12 displays a result or the like executed by the application execution unit 11 on the display screen 105 a of the display device 105 based on an instruction from the application execution unit 11. It is preferable that the screen display means 12 further displays the screen every time the property of the object is changed by the property change means 15. When the display device 105 is a bank ATM display device, for example, the screen display means 12 displays a menu of “withdrawal”, “balance inquiry”, etc. on the display device 105. When the display device 105 is a display device of a transport ticket vending machine, for example, the screen display means 12 displays a menu such as “buy ticket” and “buy commuter pass” on the display device 105. At this time, the screen display unit 12 transmits the screen data configured according to the property of the object changed by the property changing unit 15 described later to the display device 105 and displays it on the display device 105.

タッチ操作検出手段１３は、表示装置１０５の表示画面１０５ａに対するタッチ部材１３０の接触を感知すると、接触を感知したことおよびその感知した位置情報をアプリケーション実行手段１１に伝達する。アプリケーション実行手段１１は、タッチ部材の接触を感知した位置情報に従って、アプリケーションを実行する。 When the touch operation detection unit 13 detects the touch of the touch member 130 on the display screen 105 a of the display device 105, the touch operation detection unit 13 transmits the detection of the contact and the detected position information to the application execution unit 11. The application execution unit 11 executes the application according to the position information where the touch of the touch member is detected.

接近操作検出手段１４は、タッチ部材１３０が表示装置１０５の表示画面１０５ａに接近すると、表示画面１０５ａにおけるタッチ部材１３０の位置座標と、タッチ部材１３０と表示画面との距離と、を取得する。ここでタッチ部材１３０とは、ユーザの指やスタイラス等で、ユーザの操作によって、表示画面１０５に接触するものである。最良の実施の形態においては、タッチ部材１３０の大きさは特に問うものではない。表示画面に表示されるオブジェクトよりも大きいタッチ部材１３０でも良い。 When the touch member 130 approaches the display screen 105a of the display device 105, the approaching operation detection unit 14 acquires the position coordinates of the touch member 130 on the display screen 105a and the distance between the touch member 130 and the display screen. Here, the touch member 130 is a member that touches the display screen 105 by a user operation with a user's finger, stylus, or the like. In the best embodiment, the size of the touch member 130 is not particularly limited. The touch member 130 larger than the object displayed on the display screen may be used.

接近操作検出手段１４は、断続的にタッチ部材１３０の表示画面１０５ａへの接近を検出し、タッチ部材１３０と表示画面１０５ａの距離についても逐次取得することが好ましい。また、接近操作検出手段１４は、表示画面１０５ａにおけるタッチ部材１３０の位置座標と、タッチ部材１３０と表示画面１０５ａとの距離を取得できればどのようなものでも良い。 It is preferable that the approach operation detection unit 14 intermittently detects the approach of the touch member 130 to the display screen 105a and sequentially acquires the distance between the touch member 130 and the display screen 105a. Further, the approach operation detection unit 14 may be any device as long as it can acquire the position coordinates of the touch member 130 on the display screen 105a and the distance between the touch member 130 and the display screen 105a.

オブジェクト取得手段１５は、記憶装置１０７からオブジェクト位置データ２１を読み出して、接近操作検出手段１４によって取得された位置座標に対応するオブジェクトの識別子を取得する。オブジェクト取得手段１５は、ユーザが接触しようとしているオブジェクトの識別子を取得する。具体的にはオブジェクト取得手段１５は、接近操作検出手段１４によって取得された位置座標を含むオブジェクトの識別子を取得する。位置座標を含むオブジェクトがない場合、オブジェクト取得手段１５は、その取得された位置座標に一番近いオブジェクトの識別子を取得しても良い。 The object acquisition unit 15 reads the object position data 21 from the storage device 107 and acquires the identifier of the object corresponding to the position coordinate acquired by the approaching operation detection unit 14. The object acquisition means 15 acquires the identifier of the object that the user is trying to contact. Specifically, the object acquisition unit 15 acquires the identifier of the object including the position coordinates acquired by the approach operation detection unit 14. When there is no object including the position coordinates, the object acquisition unit 15 may acquire the identifier of the object closest to the acquired position coordinates.

プロパティ変更手段１６は、接近操作検出手段１４によって取得された距離に応じて、オブジェクト取得手段１５で取得されたオブジェクトの新たな位置データを算出して、オブジェクトの位置データを新たな位置データに変更する。ここで、プロパティ変更手段１６は、さらに、オブジェクト取得手段１５で取得されたオブジェクトを、他のオブジェクトより前面に表示するようにプロパティを変更しても良い。 The property changing unit 16 calculates new position data of the object acquired by the object acquiring unit 15 according to the distance acquired by the approaching operation detecting unit 14, and changes the position data of the object to new position data. To do. Here, the property changing unit 16 may further change the property so that the object acquired by the object acquiring unit 15 is displayed in front of other objects.

プロパティ変更手段１６によって変更されたプロパティに基づいて、画面表示手段１２は、表示装置１０５に画面を再表示する。具体的には、画面表示手段１２は、表示装置１０５に、ユーザが押下しようとしているオブジェクトを拡大表示したり、最前面に表示したりして、ユーザがオブジェクトを操作しやすいように表示する。 Based on the property changed by the property changing unit 16, the screen display unit 12 redisplays the screen on the display device 105. Specifically, the screen display unit 12 displays the object that the user is trying to press on the display device 105 in an enlarged manner or on the foreground so that the user can easily operate the object.

ここで、接近操作手段１４による処理を詳述する。接近操作検出手段１４において、表示画面１０５ａにおけるタッチ部材１３０の位置座標と、タッチ部材１３０と表示画面１０５ａとの距離を取得するための装置としては様々なものが考えられる。例えば、表示画面１０５ａの近傍にカメラを設けて、カメラで撮影された画像データからタッチ部材１３０を検出する方法、接近感知装置を用いて検出する方法、表示画面１０５ａに並行してＣＣＤ素子を配置する方法などが考えられる。 Here, the process by the approach operation means 14 is explained in full detail. Various devices can be considered as devices for obtaining the position coordinates of the touch member 130 on the display screen 105a and the distance between the touch member 130 and the display screen 105a in the approaching operation detecting means 14. For example, a camera is provided in the vicinity of the display screen 105a, a method of detecting the touch member 130 from image data captured by the camera, a method of detecting using the proximity sensing device, and a CCD element arranged in parallel with the display screen 105a Possible ways to do this.

表示画面１０５ａの近傍にカメラを設ける方法では、例えば、図６に参照するように、表示画面１０５ａにタッチ部材１３０が接近した状態が撮影できる位置にカメラを設置する。さらに、接近操作手段１４は、このカメラで取得した画像データに基づいて、画像データにおけるタッチ部材１３０の大きさおよび位置から、表示画面１０５ａにおけるタッチ部材１３０の位置座標と、タッチ部材１３０と表示画面１０５ａとの距離と、を取得する。この方法においては、予め、一定距離離れた位置でのタッチ部材１３０の基準画像データを取得する。この基準画像データは、タッチ部材１３０との距離や、タッチ部材１３０で押下しようとしている表示画面１０５ａ上の位置に応じて、複数のデータがあっても良い。タッチ部材１３０で表示画面１０５ａが押下しようと、カメラ１２０で撮影可能な範囲にタッチ部材１３０が侵入すると、カメラ１２０でその画像データを取得する。接近操作検出手段１４は、基準画像データのタッチ部材１３０の大きさと、取得した画像データでのタッチ部材１３０の大きさとを比較して、カメラ１２０とタッチ部材１３０との距離を算出する。さらに、図７に示すように、接近操作検出手段１４は、カメラ１２０とタッチ部材１３０との距離と、取得した画像データにおけるタッチ部材１３０の位置とから、三角関数を用いて、表示画面１０５ａにおけるタッチ部材１３０の位置座標を取得するとともに、表示画面１０５ａとタッチ部材１３０との距離を取得する。 In the method of providing a camera in the vicinity of the display screen 105a, for example, as shown in FIG. 6, the camera is installed at a position where the touch member 130 can approach the display screen 105a. Further, the approach operation means 14 determines the position coordinates of the touch member 130 on the display screen 105a, the touch member 130 and the display screen from the size and position of the touch member 130 in the image data based on the image data acquired by the camera. And the distance to 105a. In this method, reference image data of the touch member 130 at a position away from a certain distance is acquired in advance. The reference image data may include a plurality of data depending on the distance from the touch member 130 and the position on the display screen 105a that is to be pressed by the touch member 130. If the touch member 130 enters the range that can be photographed by the camera 120 to press the display screen 105a with the touch member 130, the camera 120 acquires the image data. The approaching operation detection unit 14 calculates the distance between the camera 120 and the touch member 130 by comparing the size of the touch member 130 in the reference image data with the size of the touch member 130 in the acquired image data. Further, as shown in FIG. 7, the approaching operation detecting unit 14 uses a trigonometric function to calculate the approaching operation detection unit 14 from the distance between the camera 120 and the touch member 130 and the position of the touch member 130 in the acquired image data. The position coordinate of the touch member 130 is acquired, and the distance between the display screen 105a and the touch member 130 is acquired.

また、接近感知装置を用いる方法では、例えば、表示画面１０５ａにタッチ部材１３０が接近した状態を検知できるように接近感知装置を設置する。接近感知装置は、例えば、センサーである。接近操作手段１４は、この接近感知装置を介して、表示画面１０５ａにおけるタッチ部材１３０の位置座標と、タッチ部材１３０と表示画面１５０ａとの距離と、を取得する。この方法においては、表示画面１０５ａにおけるタッチ部材１３０の位置座標と、タッチ部材１３０と表示画面１０５ａとの距離とを取得するために、複数の接近感知装置が設けられても良い。 Further, in the method using the proximity sensing device, for example, the proximity sensing device is installed so that the state where the touch member 130 approaches the display screen 105a can be detected. The proximity sensing device is, for example, a sensor. The approach operation means 14 acquires the position coordinates of the touch member 130 on the display screen 105a and the distance between the touch member 130 and the display screen 150a via this approach sensing device. In this method, in order to acquire the position coordinates of the touch member 130 on the display screen 105a and the distance between the touch member 130 and the display screen 105a, a plurality of proximity sensing devices may be provided.

表示画面１０５ａに並行してＣＣＤ素子を配置する方法では、ＣＣＤ素子によって生成された画像データから、タッチ部材１３０で押下しようとしている表示画面１０５ａ上の位置を取得する。さらに、画像データのタッチ部材１３０の大きさから、表示画面１０５ａとタッチ部材１３０との距離を算出する。この方法においても、カメラを設置する場合と同様に、タッチ部材１３０と表示画面１０５ａとの距離を取得するために、予め基準となる基準画像データを用意しても良い。この基準画像データは、タッチ部材１３０と表示画面１０５ａとの距離毎に用意されるのが好ましい。各基準画像データにおいては、距離に応じて、タッチ部材１３０の大きさが変わる。また、基準画像データを用意する代わりに、各基準画像データから算出されたタッチ部材１３０の大きさと、タッチ部材１３０と表示画面１０５ａとの距離を対応づけたテーブルを備えていても良い。 In the method of arranging the CCD elements in parallel with the display screen 105a, the position on the display screen 105a to be pressed by the touch member 130 is acquired from the image data generated by the CCD elements. Further, the distance between the display screen 105a and the touch member 130 is calculated from the size of the touch member 130 in the image data. Also in this method, as in the case of installing a camera, reference image data serving as a reference may be prepared in advance in order to acquire the distance between the touch member 130 and the display screen 105a. This reference image data is preferably prepared for each distance between the touch member 130 and the display screen 105a. In each reference image data, the size of the touch member 130 changes according to the distance. Instead of preparing the reference image data, a table in which the size of the touch member 130 calculated from each reference image data and the distance between the touch member 130 and the display screen 105a are associated may be provided.

図６を参照して、本発明の最良の実施の形態に係る表示オブジェクト制御装置１の表示装置１０５の動作について詳述する。図６においては、表示画面１０５ａの近傍にカメラを設けて、表示画面１０５ａにおけるタッチ部材１３０の位置座標と、タッチ部材１３０と表示画面１０５ａとの距離を取得する場合を説明する。 With reference to FIG. 6, the operation of the display device 105 of the display object control device 1 according to the preferred embodiment of the present invention will be described in detail. In FIG. 6, a case will be described in which a camera is provided in the vicinity of the display screen 105a and the position coordinates of the touch member 130 on the display screen 105a and the distance between the touch member 130 and the display screen 105a are acquired.

中央処理制御装置１０１は、入出力インタフェース１０９およびバス１１０を介して、表示装置１０５と接続している。表示装置１０５は、表示装置制御手段１０５ｂを備えている。表示装置制御手段１０５ｂは、中央処理制御装置１０１の画面表示手段１２等からの表示指示に従って表示画面１０５ｂに画面表示する。さらに表示装置制御手段１０５ｂは、表示画面１０５ａにおいてタッチ部材１３０による接触を検知すると、その情報を、タッチ操作検出手段１３に出力する。 The central processing control device 101 is connected to the display device 105 via the input / output interface 109 and the bus 110. The display device 105 includes display device control means 105b. The display device control unit 105b displays a screen on the display screen 105b in accordance with a display instruction from the screen display unit 12 or the like of the central processing control device 101. Further, when the display device control unit 105b detects contact by the touch member 130 on the display screen 105a, the display device control unit 105b outputs the information to the touch operation detection unit 13.

図６においては、表示画面１０５ａの近傍に、カメラ１２０が設けられている。このカメラ１２０は、表示画面１０５ａ上のオブジェクトを押下しようとしているタッチ部材１３０を撮影し、撮影した画像データを、接近操作検出手段１４に送信する。接近操作検出手段１４は、撮影した画像データから、表示画面１０５ａにおけるタッチ部材１３０の位置座標と、タッチ部材１３０と表示画面１０５ａとの距離を算出する。接近操作検出手段１４が算出する位置座標は、表示画面１０５ａにおける縦方向の座標位置Ｘと、横方向の座標位置Ｙを含む。具体的には、図８に示すように接近操作検出手段１４が、表示画面１０５ａにおけるタッチ部材１３０の位置座標（Ｘ、Ｙ）と、タッチ部材１３０と表示画面１０５ａとの距離（Ｈ）を取得する。接近操作検出手段１４は、表示画面１０５ａにおけるタッチ部材１３０の位置座標（ＸおよびＹ）を、オブジェクト取得手段１５に入力するとともに、タッチ部材１３０と表示画面１０５ａとの距離（Ｈ）をプロパティ変更手段１６に入力する。 In FIG. 6, a camera 120 is provided in the vicinity of the display screen 105a. The camera 120 captures the touch member 130 that is about to press the object on the display screen 105 a and transmits the captured image data to the approaching operation detection unit 14. The approach operation detection unit 14 calculates the position coordinates of the touch member 130 on the display screen 105a and the distance between the touch member 130 and the display screen 105a from the captured image data. The position coordinates calculated by the approaching operation detection means 14 include a vertical coordinate position X and a horizontal coordinate position Y on the display screen 105a. Specifically, as shown in FIG. 8, the approaching operation detection unit 14 acquires the position coordinates (X, Y) of the touch member 130 on the display screen 105a and the distance (H) between the touch member 130 and the display screen 105a. To do. The approach operation detection unit 14 inputs the position coordinates (X and Y) of the touch member 130 on the display screen 105a to the object acquisition unit 15, and sets the distance (H) between the touch member 130 and the display screen 105a as property change unit. 16

図９を参照して、本発明の最良の実施の形態に係る表示オブジェクトを制御する処理を説明する。 With reference to FIG. 9, processing for controlling a display object according to the preferred embodiment of the present invention will be described.

まず、ステップＳ１０１において、アプリケーション実行手段１１がアプリケーションを実行するのを待機する。アプリケーションの実行が開始されると、ステップＳ１０２において、アプリケーション実行手段１１は、画面表示に用いられるオブジェクトの位置データを、オブジェクト位置データ２１に登録する。画面表示手段１２は、ステップＳ１０３において、アプリケーション実行手段１１の画面表示指示に基づいて、表示装置１０５に画面表示する。アプリケーションによって画面表示される度に、既に登録されたオブジェクト位置データ２１を削除して、新たに表示されるオブジェクトに基づいて、オブジェクト位置データ２１の登録処理が実行されるのが好ましい。また、ステップＳ１０２において、ユーザの操作対象となるオブジェクトについてのみ、オブジェクトの位置データをオブジェクト位置データ２１に登録するのが好ましい。 First, in step S101, it waits for the application execution means 11 to execute an application. When the execution of the application is started, the application execution unit 11 registers the position data of the object used for screen display in the object position data 21 in step S102. In step S <b> 103, the screen display unit 12 displays the screen on the display device 105 based on the screen display instruction from the application execution unit 11. It is preferable that the registered object position data 21 is deleted each time the application displays the screen, and the registration process of the object position data 21 is executed based on the newly displayed object. In step S102, it is preferable to register the object position data in the object position data 21 only for the object to be operated by the user.

ステップＳ１０４において、接近操作検出手段１４が、タッチ部材１３０の表示画面１０５ａへの接近を取得すると、ステップＳ１０５に進む。ステップＳ１０５において、接近操作検出手段１４は、タッチ部材１３０と表示画面１０５ａとの距離を取得するとともに、ステップＳ１０６において、表示画面１０５ａにおけるタッチ部材１３０の位置座標を算出する。ステップＳ１０５およびステップＳ１０６の処理は、上述した様に、どのような方法で算出されても良い。算出方法によっては、ステップＳ１０５およびステップＳ１０６の処理が逆になる場合もあるのは勿論である。 In step S104, when the approaching operation detecting unit 14 acquires the approach of the touch member 130 to the display screen 105a, the process proceeds to step S105. In step S105, the approach operation detection unit 14 acquires the distance between the touch member 130 and the display screen 105a, and calculates the position coordinates of the touch member 130 on the display screen 105a in step S106. The processes in steps S105 and S106 may be calculated by any method as described above. Of course, depending on the calculation method, the processing of step S105 and step S106 may be reversed.

次に、ステップＳ１０７において、オブジェクト取得手段１５は、ステップＳ１０６において取得したタッチ部材の位置座標に基づいて、ユーザがタッチしようとしているオブジェクトの識別子を取得する。このとき、ステップＳ１０６において取得したタッチ部材１３０の位置座標に含まれるオブジェクトを検索し、オブジェクトが見つからない場合は、タッチ部材の位置座標に最も近いオブジェクトを検索することが好ましい。 Next, in step S107, the object acquisition unit 15 acquires the identifier of the object that the user is trying to touch based on the position coordinates of the touch member acquired in step S106. At this time, it is preferable to search for an object included in the position coordinates of the touch member 130 acquired in step S106, and to search for an object closest to the position coordinates of the touch member if no object is found.

ステップＳ１０７において、ユーザがタッチしようとしているオブジェクトの識別子を特定すると、ステップＳ１０８において、プロパティ変更手段１６は、そのオブジェクトのプロパティを変更する。具体的には、ステップＳ１０５で算出したタッチ部材１３０と表示画面１０５ａとの距離に基づいて、オブジェクトのサイズを変更をしたり、ユーザがタッチしようとしているオブジェクトを最前面に表示するために、当該オブジェクトのプロパティを変更する。このとき、プロパティ変更手段１６は、オブジェクト位置データ２１に記憶されたパラメータを参照して、オブジェクトの新たなサイズ等を算出しても良い。また、プログラムに記憶された所定の算出方法で、オブジェクトの新たなサイズ等を算出しても良い。 In step S107, when the identifier of the object that the user is trying to touch is specified, the property changing unit 16 changes the property of the object in step S108. Specifically, in order to change the size of the object based on the distance between the touch member 130 calculated in step S105 and the display screen 105a or to display the object that the user is trying to touch on the foreground, Change object properties. At this time, the property changing unit 16 may calculate a new size of the object with reference to the parameters stored in the object position data 21. Also, a new size of the object may be calculated by a predetermined calculation method stored in the program.

さらにステップＳ１０９において、画面表示手段１２は、ステップＳ１０８において変更されたプロパティに従って、表示装置１０５に画面を表示して、ステップＳ１０４に戻り、タッチ部材１３０の接近を待機する。ステップＳ１０４ないしステップＳ１０９の処理は、タッチ部材１３０が表示画面１０５ａに接近するたびに、実行される。 In step S109, the screen display unit 12 displays a screen on the display device 105 according to the property changed in step S108, returns to step S104, and waits for the touch member 130 to approach. The processing from step S104 to step S109 is executed every time the touch member 130 approaches the display screen 105a.

ステップＳ１０４において、タッチ操作検出手段１３が、タッチ部材１３０が表示装置１０５の表示画面１０５ａに接触したことを取得すると、ステップＳ１１０に進む。ステップＳ１１０において、ユーザのタッチ操作により、アプリケーションの処理を終了する指示を受信した場合は、アプリケーションの実行を終了する。処理を終了しない場合、ステップＳ１１１に進み、タッチ操作検出手段１３は、ユーザのタッチ操作した情報に基づいて、アプリケーションを実行し、ステップＳ１０２に戻る。ステップＳ１０２においては、ステップＳ１１０のアプリケーションの実行に基づいて、新たに画面表示する際、画面表示される各オブジェクトの情報を、オブジェクト位置データ２１に登録する。 In step S104, when the touch operation detection unit 13 acquires that the touch member 130 has touched the display screen 105a of the display device 105, the process proceeds to step S110. In step S110, when an instruction to end the processing of the application is received by the user's touch operation, the execution of the application is ended. If the process is not terminated, the process proceeds to step S111, and the touch operation detection unit 13 executes the application based on the information on the touch operation by the user, and returns to step S102. In step S102, information about each object displayed on the screen is registered in the object position data 21 when a new screen is displayed based on the execution of the application in step S110.

このように、本発明の最良の実施の形態においては、タッチ部材１３０と表示画面１０５ａとの距離が小さくなるにつれ、ユーザが目的のボタンを押下しやすいように、目的のボタンが大きくなる。このように、オブジェクトの視認性を向上させることにより、ユーザによる誤動作を防ぐことができる。 Thus, in the preferred embodiment of the present invention, as the distance between the touch member 130 and the display screen 105a decreases, the target button increases so that the user can easily press the target button. Thus, the malfunction by the user can be prevented by improving the visibility of the object.

また、表示画面との距離が近くなるとオブジェクトが大きくなる。これにより、表示画面との距離を保ったままタッチ部材を並行に移動させることにより、各オブジェクトを大きい状態で、選択することができる。また、オブジェクトの大きさは、表示画面との距離に応じて決定される。これにより、ユーザは、隣り合うオブジェクトが被らない程度にオブジェクトの大きさを保った状態で、表示画面との距離を保ったままタッチ部材を並行に移動させることができるので、容易に隣り合うオブジェクトを選択することができる。 Further, the object becomes larger as the distance from the display screen becomes shorter. Thereby, each object can be selected in a large state by moving the touch member in parallel while maintaining the distance from the display screen. The size of the object is determined according to the distance from the display screen. Accordingly, the user can move the touch member in parallel while maintaining the distance from the display screen while keeping the size of the object so as not to cover the adjacent object. You can select an object.

本発明の最良の実施の形態においてタッチ部材１３０は、指でも良いしスタイラスでも良いが、大きさについては特に指定しない。また、タッチ部材１３０の種類によって表示画面１０５ａにおけるタッチ部材１３０の位置座標と、タッチ部材１３０と表示画面１０５ａとの距離を取得する手法が異なっても良い。この場合、接近操作検出手段１４は、タッチ部材１３０の種類を特定し、その種別に応じて位置座標や距離を取得することが好ましい。 In the preferred embodiment of the present invention, the touch member 130 may be a finger or a stylus, but the size is not particularly specified. Further, the position coordinate of the touch member 130 on the display screen 105a and the method for obtaining the distance between the touch member 130 and the display screen 105a may be different depending on the type of the touch member 130. In this case, it is preferable that the approach operation detection unit 14 specifies the type of the touch member 130 and acquires the position coordinates and the distance according to the type.

（変形例）
本発明の最良の実施の形態においては、表示オブジェクト制御装置１に表示装置１０５が備えられている場合について説明したが、他の変形例も考えられる。 (Modification)
In the best embodiment of the present invention, the case where the display object control device 1 is provided with the display device 105 has been described, but other modified examples are also conceivable.

具体的には、接触した位置を検出するタッチパネル式の表示装置において、本発明の最良の実施の形態に係る表示オブジェクト制御装置１と同等の処理回路を備えさせても良い。具体的には、変形例に係る表示装置は、通常のタッチパネル式の機能を実現する手段を備えるとともに、オブジェクトの識別子と、オブジェクトの位置データとを関連づけて、オブジェクト位置データ記憶装置に記憶するオブジェクト位置データ記憶手段と、タッチ部材が表示画面に接近すると、表示画面におけるタッチ部材の位置座標と、タッチ部材と表示画面との距離と、を取得する接近操作検出手段と、オブジェクト位置データ記憶装置を読み出して、接近操作検出手段によって取得された位置座標に対応するオブジェクトの識別子を取得するオブジェクト取得手段と、接近操作検出手段によって取得された距離に応じて、オブジェクト取得手段で取得されたオブジェクトの新たな位置データを算出して、該オブジェクトの位置データを新たな位置データに変更するプロパティ変更手段と、プロパティ変更手段によって変更されたプロパティに基づいて、オブジェクトを画面に表示する画面表示手段とを備えても良い。 Specifically, a touch panel display device that detects the touched position may be provided with a processing circuit equivalent to the display object control device 1 according to the best mode of the present invention. Specifically, the display device according to the modification includes means for realizing a normal touch panel type function, and associates an object identifier with the object position data and stores the object in the object position data storage device. A position data storage means; an approach operation detection means for acquiring a position coordinate of the touch member on the display screen and a distance between the touch member and the display screen when the touch member approaches the display screen; and an object position data storage device. An object acquisition unit that reads and acquires an identifier of an object corresponding to the position coordinate acquired by the approach operation detection unit, and a new object acquired by the object acquisition unit according to the distance acquired by the approach operation detection unit Position data of the object And property changing means for changing to a new position data, based on the changed property by property changing means may comprise a screen display means for displaying the object on the screen.

また、最良の実施の形態と同様に、表示装置の表示画面の近辺に設置されたカメラをさらに備えても良い。この場合、接近操作検出手段は、カメラで取得した画像データに基づいて、画像データにおけるタッチ部材の大きさおよび位置から、表示画面におけるタッチ部材の位置座標と、タッチ部材と表示画面との距離と、を取得する。また、タッチ部材の表示画面への接近を感知する接近感知装置をさらに備えても良い。この場合、接近操作検出手段は、接近感知装置を介して、表示画面におけるタッチ部材の位置座標と、タッチ部材と表示画面との距離と、を取得する。 Further, similarly to the best embodiment, a camera installed in the vicinity of the display screen of the display device may be further provided. In this case, the approaching operation detecting means, based on the image data acquired by the camera, from the size and position of the touch member in the image data, the position coordinates of the touch member on the display screen, the distance between the touch member and the display screen, , Get. Moreover, you may further provide the approach detection apparatus which detects the approach to the display screen of a touch member. In this case, the approaching operation detection unit acquires the position coordinates of the touch member on the display screen and the distance between the touch member and the display screen via the approach sensing device.

（その他の実施の形態）
上記のように、本発明の最良の実施の形態とその変形例によって記載したが、この開示の一部をなす論述および図面はこの発明を限定するものであると理解すべきではない。この開示から当業者には様々な代替実施の形態、実施例および運用技術が明らかとなる。 (Other embodiments)
As described above, the best mode for carrying out the invention and the modifications thereof have been described. However, it should not be understood that the description and drawings constituting a part of this disclosure limit the present invention. From this disclosure, various alternative embodiments, examples, and operational techniques will be apparent to those skilled in the art.

例えば、本発明の最良の実施の形態に記載した表示オブジェクト制御装置は、図１に示すように一つのハードウェア上に構成されても良いし、その機能や処理数に応じて複数のハードウェア上に構成されても良い。また、既存の情報処理システム上に実現されても良い。 For example, the display object control apparatus described in the best embodiment of the present invention may be configured on a single piece of hardware as shown in FIG. 1, or a plurality of pieces of hardware depending on the functions and the number of processes. It may be configured above. Moreover, you may implement | achieve on the existing information processing system.

本発明はここでは記載していない様々な実施の形態等を含むことは勿論である。従って、本発明の技術的範囲は上記の説明から妥当な特許請求の範囲に係る発明特定事項によってのみ定められるものである。 It goes without saying that the present invention includes various embodiments not described herein. Therefore, the technical scope of the present invention is defined only by the invention specifying matters according to the scope of claims reasonable from the above description.

本発明の最良の実施の形態に係る表示オブジェクト制御装置の機能ブロックを説明する図である。It is a figure explaining the functional block of the display object control apparatus which concerns on the best embodiment of this invention. 本発明の最良の実施の形態に係る表示オブジェクト制御装置の処理の概要を説明する図である。It is a figure explaining the outline | summary of a process of the display object control apparatus which concerns on the best embodiment of this invention. 本発明の最良の実施の形態に係る表示オブジェクト制御装置のハードウェア構成を説明する図である。It is a figure explaining the hardware constitutions of the display object control apparatus which concerns on the best embodiment of this invention. 本発明の最良の実施の形態に係る表示オブジェクト制御装置のオブジェクト位置データのデータ構造とデータの一例を説明する図である。It is a figure explaining an example of the data structure and data of the object position data of the display object control apparatus which concerns on the best embodiment of this invention. 本発明の最良の実施の形態に係る表示オブジェクト制御装置のオブジェクト位置データの項目を説明する図である。It is a figure explaining the item of the object position data of the display object control apparatus which concerns on the best embodiment of this invention. 本発明の最良の実施の形態に係る表示オブジェクト制御装置において、表示装置と中央処理制御装置との処理を説明する図である。It is a figure explaining the process of a display apparatus and a central processing control apparatus in the display object control apparatus which concerns on the best embodiment of this invention. 本発明の最良の実施の形態に係る表示オブジェクト制御装置において、カメラを用いて表示画面におけるタッチ部材の位置座標と、タッチ部材と表示画面との距離を算出する方法を説明する図である。In the display object control apparatus which concerns on the best embodiment of this invention, it is a figure explaining the method of calculating the position coordinate of the touch member in a display screen, and the distance of a touch member and a display screen using a camera. 本発明の最良の実施の形態に係る表示オブジェクト制御装置において、表示画面におけるタッチ部材の位置座標と、タッチ部材と表示画面との距離を算出する方法を説明する図である。In the display object control apparatus according to the preferred embodiment of the present invention, it is a diagram illustrating a method for calculating the position coordinates of the touch member on the display screen and the distance between the touch member and the display screen. 本発明の最良の実施の形態に係る表示オブジェクト制御装置における処理を説明するフローチャートである。It is a flowchart explaining the process in the display object control apparatus which concerns on the best embodiment of this invention.

Explanation of symbols

１表示オブジェクト制御装置
１１アプリケーション実行手段
１２画面表示手段
１３タッチ操作検出手段
１４接近操作検出手段
１５オブジェクト取得手段
１６プロパティ変更手段
２１オブジェクト位置データ
１０１中央処理制御装置
１０２ＲＯＭ
１０３ＲＡＭ
１０４入力装置
１０５表示装置
１０６通信制御装置
１０７記憶装置
１０８リムーバブルディスク
１０９入出力インタフェース
１１０バス DESCRIPTION OF SYMBOLS 1 Display object control apparatus 11 Application execution means 12 Screen display means 13 Touch operation detection means 14 Approach operation detection means 15 Object acquisition means 16 Property change means 21 Object position data 101 Central processing control apparatus 102 ROM
103 RAM
104 Input Device 105 Display Device 106 Communication Control Device 107 Storage Device 108 Removable Disk 109 Input / Output Interface 110 Bus

Claims

A display object control device for controlling an object displayed by an application program on a touch panel display device,
Object position data storage means for associating the identifier of the object with the position data of the object and storing it in an object position data storage device;
When the touch member approaches the display screen of the display device, the approach operation detecting means for sequentially acquiring the position coordinates of the touch member on the display screen and the distance between the touch member and the display screen;
An object acquisition unit that reads the object position data storage device and acquires an identifier of the object corresponding to the position coordinate acquired by the approaching operation detection unit;
For the object acquired by the object acquisition means, position data corresponding to the distance sequentially acquired by the approaching operation detection means is calculated, and the position data of the object is sequentially changed to the calculated new position data. Property change means ,
A display object control device, comprising: screen display means for displaying the object based on new position data each time new position data is sequentially changed by the property changing means .

The approaching operation detecting means includes a position coordinate of the touch member on the display screen, the touch member and the display screen via an approach sensing device that senses the approach of the touch member to the display screen of the display device. The display object control apparatus according to claim 1, wherein the distance is acquired.

The property change means further display object control device according to the object acquired by the object obtaining means, to claim 1 or 2, characterized in that to change the properties so as to appear in front of other objects .

  The object position data is further associated with an identifier of the object, an increase / decrease value and a unit for determining the size of the object according to the distance between the touch member and the display screen,
  When the distance between the touch member and the display screen decreases by the numerical value of the unit, the property changing unit increases the size of the object by the numerical value of the increase / decrease value and increases by the numerical value of the unit. , Decrease the size of the object by the value of the increase / decrease value
  The display object control apparatus according to claim 1, wherein the display object control apparatus is a display object control apparatus.

The property changing means changes the size of the object when the distance between the touch member and the display screen is a predetermined threshold value or less, and even if the distance between the touch member and the display screen increases, The position data of the object is calculated so as not to be smaller than the size of the object initially displayed on the display screen.
The display object control apparatus according to claim 4, wherein the display object control apparatus is a display object control apparatus.

A display object control program for controlling an object displayed by an application program on a touch panel display device,
The computer,
Object position data storage means for associating the identifier of the object with the position data of the object and storing it in an object position data storage device;
When the touch member approaches the display screen of the display device, the approach operation detecting means for sequentially acquiring the position coordinates of the touch member on the display screen and the distance between the touch member and the display screen;
An object acquisition unit that reads the object position data storage device and acquires an identifier of the object corresponding to the position coordinate acquired by the approaching operation detection unit;
For the object acquired by the object acquisition means, position data corresponding to the distance sequentially acquired by the approaching operation detection means is calculated, and the position data of the object is sequentially changed to the calculated new position data. Property change means ,
A display object control program for causing a function to function as screen display means for displaying the object based on new position data each time new position data is sequentially changed by the property changing means .