JP2011053928A

JP2011053928A - Display control device, selection support device and program

Info

Publication number: JP2011053928A
Application number: JP2009202454A
Authority: JP
Inventors: Kohei Tanaka; 耕平田中
Original assignee: Fuji Xerox Co Ltd
Current assignee: Fujifilm Business Innovation Corp
Priority date: 2009-09-02
Filing date: 2009-09-02
Publication date: 2011-03-17
Anticipated expiration: 2029-09-02
Also published as: JP5446617B2

Abstract

<P>PROBLEM TO BE SOLVED: To reduce a movement distance of a pointing means when selecting a UI (User Interface) component by a pointer displayed on position of a display which corresponds to a pointed position on a position detection sheet. <P>SOLUTION: In a pointer display control part 26, a signal discrimination part 31 discriminates which operation has been performed, pointing operation for pointing the position detection sheet, a move operation for moving a pointing means in a state wherein the position detection sheet is pointed, or release operation for releasing the state wherein the position detection sheet is pointed, a pointer position determination part 34 newly generates a pointer position in the point operation, updates the pointer position in the move operation and deletes the pointer position in the release operation, a pointer position output part 35 outputs a pointer display instruction in the pointing operation, a pointer move instruction in the move operation, a pointer erase instruction in the release operation to an operation panel 15, and a selected position output part 36 outputs a position on which the pointer is displayed in the release operation to a selected component determination part 27. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、表示制御装置、選択支援装置、プログラムに関する。 The present invention relates to a display control device, a selection support device, and a program.

入力装置の近接配置された小さなアイコンを指にて操作する場合に、所望のアイコンが指にて隠れてしまい、所望のアイコンとは異なる隣接するアイコンを操作してしまうという誤操作が生じさせないことを目的とした技術が知られている（例えば、特許文献１参照）。この特許文献１の技術では、カーソルを移動させるための操作部がポインティング表示部内のカーソルの近傍に設けられ、操作部をポインティング表示部の表示面に沿って摺動操作することによって操作部の近傍に設けられたカーソルが操作部に追従して共に移動され、操作部を押圧操作することによってカーソルと対向するアイコンが操作されるようにしている。 When operating a small icon placed close to the input device with a finger, the desired icon is hidden by the finger, and an erroneous operation of operating an adjacent icon different from the desired icon does not occur. The intended technique is known (see, for example, Patent Document 1). In the technique of this Patent Document 1, an operation unit for moving the cursor is provided in the vicinity of the cursor in the pointing display unit, and by sliding the operation unit along the display surface of the pointing display unit, the vicinity of the operation unit The cursor provided on the icon is moved together following the operation unit, and the icon facing the cursor is operated by pressing the operation unit.

特開２００２−１２３３６７号公報JP 2002-123367 A

本発明の目的は、画面を被覆する指示位置検出部材上の指示手段で指示された位置に対応する画面上の位置に表示された特定表示要素によって選択対象表示要素を選択する際に、指示手段の移動量が少なくなる可能性を高めることにある。 An object of the present invention is to provide an instruction means when selecting a selection target display element by a specific display element displayed at a position on the screen corresponding to the position indicated by the indication means on the indication position detection member covering the screen. This is to increase the possibility that the amount of movement will be reduced.

請求項１に記載の発明は、画面を被覆する指示位置検出部材を指示手段で指示する指示操作、当該指示位置検出部材を当該指示手段で指示した状態で当該指示手段を移動させる移動操作、及び、当該指示位置検出部材を当該指示手段で指示した状態を解除する解除操作を検出する検出手段と、前記検出手段による前記指示操作の検出に応じて、前記指示手段で指示された前記指示位置検出部材上の位置に対応する前記画面上の位置に、予め定めた形状の特定表示要素が出現するように制御する第１の制御手段と、前記検出手段による前記移動操作の検出に応じて、前記指示手段が移動する前記指示位置検出部材上の方向に対応する前記画面上の方向に、前記特定表示要素が移動するように制御する第２の制御手段と、前記検出手段による前記解除操作の検出に応じて、前記画面に表示された複数の選択対象表示要素のうち、前記特定表示要素が表示された位置に表示された選択対象表示要素が選択されるように、当該位置を示す情報を出力する出力手段とを備えたことを特徴とする表示制御装置である。
請求項２に記載の発明は、前記検出手段による前記解除操作の検出に応じて、前記特定表示要素が消滅するように制御する第３の制御手段を更に備えたことを特徴とする請求項１に記載の表示制御装置である。
請求項３に記載の発明は、前記第３の制御手段は、前記第２の制御手段の制御により前記特定表示要素が移動した後、初めて前記検出手段が前記解除操作を検出した場合には、当該特定表示要素が消滅しないように制御し、その後、前記検出手段が前記指示操作を検出し、続けて前記解除操作を検出した場合には、当該特定表示要素が消滅するように制御することを特徴とする請求項２に記載の表示制御装置である。
請求項４に記載の発明は、画面を被覆する指示位置検出部材を指示手段で指示する指示操作、当該指示位置検出部材を当該指示手段で指示した状態で当該指示手段を移動させる移動操作、及び、当該指示位置検出部材を当該指示手段で指示した状態を解除する解除操作を検出する検出手段と、前記画面に複数の選択対象表示要素を表示し、予め定めた形状の特定表示要素を、前記検出手段による前記指示操作の検出に応じて、前記指示手段で指示された前記指示位置検出部材上の位置に対応する前記画面上の位置に当該特定表示要素が出現するように、かつ、前記検出手段による前記移動操作の検出に応じて、前記指示手段が移動する前記指示位置検出部材上の方向に対応する前記画面上の方向に当該特定表示要素が移動するように、表示する表示手段と、前記検出手段による前記解除操作の検出に応じて、前記表示手段に表示された前記複数の選択対象表示要素のうち、前記特定表示要素が表示された位置に表示された選択対象表示要素が選択されたことを決定する決定手段とを備えたことを特徴とする選択支援装置である。
請求項５に記載の発明は、前記表示手段は、前記検出手段による前記解除操作の検出に応じて、前記特定表示要素を消滅させることを特徴とする請求項４に記載の選択支援装置である。
請求項６に記載の発明は、前記表示手段は、前記特定表示要素が移動した後、初めて前記検出手段が前記解除操作を検出した場合には、当該特定表示要素を消滅させず、その後、前記検出手段が前記指示操作を検出し、続けて前記解除操作を検出した場合には、当該特定表示要素を消滅させることを特徴とする請求項５に記載の選択支援装置である。
請求項７に記載の発明は、前記決定手段は、通常の手順で自装置が起動された場合には、前記検出手段による前記指示操作の検出に応じて、前記指示手段で指示された前記指示位置検出部材上の位置に対応する前記画面上の位置に表示された前記選択対象表示要素が選択されたことを決定し、前記通常の手順とは異なる特定の手順で自装置が起動された場合には、前記検出手段による前記解除操作の検出に応じて、前記特定表示要素が表示された位置に表示された前記選択対象表示要素が選択されたことを決定することを特徴とする請求項４乃至６の何れかに記載の選択支援装置である。
請求項８に記載の発明は、前記表示手段は、前記特定の手順で自装置が起動された場合に、前記指示操作において前記指示手段で指示された前記指示位置検出部材上の位置と、当該指示操作に応じて前記特定表示要素が表示された前記画面上の位置とのずれを補正するために選択される前記選択対象表示要素を初期表示することを特徴とする請求項７に記載の選択支援装置である。
請求項９に記載の発明は、コンピュータに、画面を被覆する指示位置検出部材を指示手段で指示する指示操作、当該指示位置検出部材を当該指示手段で指示した状態で当該指示手段を移動させる移動操作、及び、当該指示位置検出部材を当該指示手段で指示した状態を解除する解除操作を検出する機能と、前記指示操作の検出に応じて、前記指示手段で指示された前記指示位置検出部材上の位置に対応する前記画面上の位置に、予め定めた形状の特定表示要素が出現するように制御する機能と、前記移動操作の検出に応じて、前記指示手段が移動する前記指示位置検出部材上の方向に対応する前記画面上の方向に、前記特定表示要素が移動するように制御する機能と、前記解除操作の検出に応じて、前記画面に表示された複数の選択対象表示要素のうち、前記特定表示要素が表示された位置に表示された選択対象表示要素が選択されるように、当該位置を示す情報を出力する機能とを実現させるためのプログラムである。 According to the first aspect of the present invention, there is provided an instruction operation for instructing an instruction position detection member covering the screen by the instruction means, a moving operation for moving the instruction means in a state in which the instruction position detection member is indicated by the instruction means, and Detection means for detecting a release operation for releasing the state instructed by the instruction means, and detection of the indicated position instructed by the instruction means in response to detection of the instruction operation by the detection means. In response to detection of the moving operation by the detection means, a first control means for controlling the specific display element having a predetermined shape to appear at a position on the screen corresponding to the position on the member, Second control means for controlling the specific display element to move in a direction on the screen corresponding to a direction on the indicated position detection member to which the instruction means moves, and the detection means by the detection means In response to detection of the removal operation, the selection target display element displayed at the position at which the specific display element is displayed is selected from the plurality of selection target display elements displayed on the screen. An output means for outputting information to be displayed is provided.
The invention according to claim 2 further includes third control means for controlling the specific display element to disappear in response to detection of the release operation by the detection means. It is a display control apparatus as described in above.
According to a third aspect of the present invention, in the case where the detection unit detects the release operation for the first time after the specific display element has moved under the control of the second control unit, Controlling so that the specific display element does not disappear, and then, when the detecting means detects the instruction operation and subsequently detects the release operation, the specific display element is controlled to disappear. The display control apparatus according to claim 2, wherein the display control apparatus is a display control device.
According to a fourth aspect of the present invention, there is provided an instruction operation for instructing an instruction position detection member covering the screen by an instruction means, a moving operation for moving the instruction means in a state in which the instruction position detection member is indicated by the instruction means, and A detection means for detecting a release operation for releasing the state instructed by the instruction means, and a plurality of selection target display elements on the screen, and a specific display element having a predetermined shape, In response to detection of the pointing operation by the detecting unit, the specific display element appears at a position on the screen corresponding to the position on the pointing position detecting member instructed by the pointing unit, and the detection In response to detection of the movement operation by the means, the specific display element is displayed so as to move in the direction on the screen corresponding to the direction on the designated position detection member to which the indication means moves. A selection target display displayed at a position where the specific display element is displayed among the plurality of selection target display elements displayed on the display unit in response to detection of the release operation by the display unit and the detection unit A selection support apparatus comprising: a determination unit that determines that an element has been selected.
The invention according to claim 5 is the selection support apparatus according to claim 4, wherein the display unit causes the specific display element to disappear in response to detection of the release operation by the detection unit. .
In the invention according to claim 6, when the detection unit detects the release operation for the first time after the specific display element has moved, the display unit does not extinguish the specific display element. 6. The selection support apparatus according to claim 5, wherein when the detection unit detects the instruction operation and subsequently detects the release operation, the specific display element is extinguished.
According to a seventh aspect of the present invention, in the case where the determination unit is activated by a normal procedure, the instruction instructed by the instruction unit in response to detection of the instruction operation by the detection unit. When it is determined that the selection target display element displayed at the position on the screen corresponding to the position on the position detection member has been selected, and the apparatus is activated in a specific procedure different from the normal procedure 5. The method according to claim 4, wherein the selection target display element displayed at the position where the specific display element is displayed is selected in response to detection of the release operation by the detection unit. The selection support apparatus according to any one of Items 6 to 6.
According to an eighth aspect of the present invention, when the display unit is activated by the specific procedure, the display unit includes a position on the pointing position detection member indicated by the pointing unit in the pointing operation, 8. The selection according to claim 7, wherein the selection target display element selected for correcting a deviation from a position on the screen where the specific display element is displayed in accordance with an instruction operation is initially displayed. It is a support device.
According to the ninth aspect of the invention, an instruction operation for instructing an instruction position detection member covering the screen by the instruction means to the computer, and a movement for moving the instruction means in a state in which the instruction position detection member is indicated by the instruction means A function of detecting an operation and a release operation for releasing the state instructed by the instruction means, and a position on the instruction position detection member instructed by the instruction means in response to detection of the instruction operation. A function for controlling a specific display element having a predetermined shape to appear at a position on the screen corresponding to the position of the position, and the pointing position detection member to which the pointing means moves in response to detection of the moving operation A function for controlling the specific display element to move in the direction on the screen corresponding to the upper direction, and a plurality of selection target displays displayed on the screen in response to detection of the release operation Of Motono, as the specific display element displayed on the displayed selection target display element position is selected, a program for realizing the function of outputting information indicating the position.

請求項１の発明によれば、画面を被覆する指示位置検出部材上の指示手段で指示された位置に対応する画面上の位置に表示された特定表示要素によって選択対象表示要素を選択する際に、本構成を有していない場合に比較して、指示手段の移動量が少なくなる可能性が高まる。
請求項２の発明によれば、本構成を有していない場合に比較して、選択対象表示要素を選択してから指示位置検出部材上の位置を指示手段で指示するまでの時間が短くなる可能性が高まる。
請求項３の発明によれば、本構成を有していない場合に比較して、目的の選択対象表示要素が表示された位置を指示手段で正確に指示できる可能性が高まる。
請求項４の発明によれば、画面を被覆する指示位置検出部材上の指示手段で指示された位置に対応する画面上の位置に表示された特定表示要素によって選択対象表示要素を選択する際に、本構成を有していない場合に比較して、指示手段の移動量が少なくなる可能性が高まる。
請求項５の発明によれば、本構成を有していない場合に比較して、選択対象表示要素を選択してから指示位置検出部材上の位置を指示手段で指示するまでの時間が短くなる可能性が高まる。
請求項６の発明によれば、本構成を有していない場合に比較して、目的の選択対象表示要素が表示された位置を指示手段で正確に指示できる可能性が高まる。
請求項７の発明によれば、特定の手順で起動された場合に、画面を被覆する指示位置検出部材上の指示手段で指示された位置に対応する画面上の位置に表示された特定表示要素によって選択対象表示要素を選択することができる。
請求項８の発明によれば、特定の手順で起動された場合に、画面を被覆する指示位置検出部材上の指示手段で指示された位置に対応する画面上の位置に表示された特定表示要素によって、指示手段で指示された位置と特定表示要素が表示された位置とのずれの補正を指示することができる。
請求項９の発明によれば、画面を被覆する指示位置検出部材上の指示手段で指示された位置に対応する画面上の位置に表示された特定表示要素によって選択対象表示要素を選択する際に、本構成を有していない場合に比較して、指示手段の移動量が少なくなる可能性が高まる。 According to the first aspect of the present invention, when the selection target display element is selected by the specific display element displayed at the position on the screen corresponding to the position indicated by the indication means on the indication position detection member covering the screen. As compared with a case where the present configuration is not provided, there is an increased possibility that the moving amount of the instruction unit is reduced.
According to the second aspect of the present invention, the time from when the selection target display element is selected until the position on the pointing position detection member is pointed by the pointing means is shorter than when the present configuration is not provided. The possibility increases.
According to the invention of claim 3, as compared with the case where the present configuration is not provided, there is an increased possibility that the position where the target selection target display element is displayed can be accurately indicated by the instruction means.
According to the fourth aspect of the present invention, when the selection target display element is selected by the specific display element displayed at the position on the screen corresponding to the position indicated by the indication means on the indication position detection member covering the screen. As compared with a case where the present configuration is not provided, there is an increased possibility that the moving amount of the instruction unit is reduced.
According to the fifth aspect of the present invention, the time from when the selection target display element is selected until the position on the pointing position detection member is pointed by the pointing unit is shorter than when the configuration is not provided. The possibility increases.
According to the sixth aspect of the present invention, compared to the case where the present configuration is not provided, there is a higher possibility that the position where the target selection target display element is displayed can be accurately indicated by the instruction means.
According to the seventh aspect of the present invention, the specific display element displayed at the position on the screen corresponding to the position designated by the pointing means on the pointing position detection member covering the screen when activated by a specific procedure The selection target display element can be selected by.
According to the invention of claim 8, the specific display element displayed at the position on the screen corresponding to the position indicated by the indication means on the indication position detection member covering the screen when activated by a specific procedure Thus, it is possible to instruct correction of a deviation between the position instructed by the instruction unit and the position at which the specific display element is displayed.
According to the ninth aspect of the present invention, when the selection target display element is selected by the specific display element displayed at the position on the screen corresponding to the position indicated by the indication means on the indication position detection member covering the screen. As compared with a case where the present configuration is not provided, there is an increased possibility that the moving amount of the instruction unit is reduced.

本発明の実施の形態が適用される画像処理装置のハードウェア構成例を示した図である。It is the figure which showed the hardware structural example of the image processing apparatus with which embodiment of this invention is applied. 本発明の実施の形態における選択支援装置の機能構成例を示したブロック図である。It is the block diagram which showed the function structural example of the selection assistance apparatus in embodiment of this invention. 本発明の実施の形態における選択支援装置の動作例を示したフローチャートである。It is the flowchart which showed the operation example of the selection assistance apparatus in embodiment of this invention. 本発明の実施の形態において操作パネルに表示される特殊メニューの例を示した図である。It is the figure which showed the example of the special menu displayed on the operation panel in embodiment of this invention. 本発明の実施の形態において操作パネルに表示される特殊メニュー上の操作の例を示した図である。It is the figure which showed the example of operation on the special menu displayed on the operation panel in embodiment of this invention. 本発明の実施の形態において操作パネルに表示される特殊メニュー上の操作の例を示した図である。It is the figure which showed the example of operation on the special menu displayed on the operation panel in embodiment of this invention. 本発明の実施の形態におけるポインタ表示制御部の機能構成例を示したブロック図である。It is the block diagram which showed the function structural example of the pointer display control part in embodiment of this invention. 本発明の実施の形態におけるポインタ表示制御部の動作例を示したフローチャートである。It is the flowchart which showed the operation example of the pointer display control part in embodiment of this invention. 本発明の実施の形態を実現可能なコンピュータのハードウェア構成図である。It is a hardware block diagram of the computer which can implement | achieve embodiment of this invention.

以下、添付図面を参照して、本発明の実施の形態について詳細に説明する。
図１は、本実施の形態が適用される画像処理装置１０のハードウェア構成例を示した図である。
図示するように、画像処理装置１０は、ＣＰＵ（Central Processing Unit）１１と、ＲＡＭ（Random Access Memory）１２と、ＲＯＭ（Read Only Memory）１３と、ＨＤＤ（Hard Disk Drive）１４と、操作パネル１５と、画像読取部１６と、画像形成部１７と、通信インターフェースコントローラ（以下、「通信Ｉ／Ｆコントローラ」と表記する）１８とを備える。 Embodiments of the present invention will be described below in detail with reference to the accompanying drawings.
FIG. 1 is a diagram illustrating a hardware configuration example of an image processing apparatus 10 to which the exemplary embodiment is applied.
As illustrated, the image processing apparatus 10 includes a CPU (Central Processing Unit) 11, a RAM (Random Access Memory) 12, a ROM (Read Only Memory) 13, an HDD (Hard Disk Drive) 14, and an operation panel 15. An image reading unit 16, an image forming unit 17, and a communication interface controller (hereinafter referred to as “communication I / F controller”) 18.

ＣＰＵ１１は、ＲＯＭ１３等に記憶された各種プログラムをＲＡＭ１２にロードして実行することにより、後述する各機能を実現する。
ＲＡＭ１２は、ＣＰＵ１１の作業用メモリ等として用いられるメモリである。
ＲＯＭ１３は、ＣＰＵ１１が実行する各種プログラム等を記憶するメモリである。
ＨＤＤ１４は、画像読取部１６が読み取った画像データや画像形成部１７における画像形成にて用いる画像データ等を記憶する例えば磁気ディスク装置である。
操作パネル１５は、各種情報の表示やユーザからの操作入力の受付を行うタッチパネルである。ここで、操作パネル１５は、各種情報を表示する表示手段の一例であるディスプレイと、指やスタイラスペン等の指示手段で指示された位置を検出する指示位置検出部材の一例である位置検出シートとからなる。 The CPU 11 implements each function described later by loading various programs stored in the ROM 13 and the like into the RAM 12 and executing them.
The RAM 12 is a memory used as a working memory for the CPU 11.
The ROM 13 is a memory that stores various programs executed by the CPU 11.
The HDD 14 is, for example, a magnetic disk device that stores image data read by the image reading unit 16 and image data used for image formation in the image forming unit 17.
The operation panel 15 is a touch panel that displays various types of information and receives operation inputs from the user. Here, the operation panel 15 includes a display that is an example of a display unit that displays various types of information, and a position detection sheet that is an example of an indicated position detection member that detects a position indicated by an instruction unit such as a finger or a stylus pen. Consists of.

画像読取部１６は、紙等の記録媒体に記録された画像を読み取る。ここで、画像読取部１６は、例えばスキャナであり、光源から原稿に照射した光に対する反射光をレンズで縮小してＣＣＤ(Charge Coupled Devices)で受光するＣＣＤ方式や、ＬＥＤ光源から原稿に順に照射した光に対する反射光をＣＩＳ(Contact Image Sensor)で受光するＣＩＳ方式のものを用いるとよい。 The image reading unit 16 reads an image recorded on a recording medium such as paper. Here, the image reading unit 16 is, for example, a scanner, and a CCD method in which reflected light with respect to light irradiated from a light source to a document is reduced by a lens and received by a CCD (Charge Coupled Devices), or an LED light source is sequentially irradiated to a document. It is preferable to use a CIS system that receives reflected light with respect to the received light with a CIS (Contact Image Sensor).

画像形成部１７は、紙等の記録媒体に画像を形成する。ここで、画像形成部１７は、例えばプリンタであり、感光体に付着させたトナーを記録媒体に転写して像を形成する電子写真方式や、インクを記録媒体上に吐出して像を形成するインクジェット方式のものを用いるとよい。
通信Ｉ／Ｆコントローラ１８は、ネットワークを介して他の装置との間で各種情報の送受信を行う。 The image forming unit 17 forms an image on a recording medium such as paper. Here, the image forming unit 17 is, for example, a printer, and forms an image by transferring the toner attached to the photosensitive member to a recording medium to form an image, or ejecting ink onto the recording medium. An ink jet type may be used.
The communication I / F controller 18 transmits / receives various information to / from other devices via the network.

ところで、上記の操作パネル１５を操作する前に、位置検出シート上のタッチ位置とディスプレイに表示されたＵＩ（User Interface）部品の実際の反応位置とを一致させる調整（以下、「ＵＩアライメント調整」という）を行う画像処理装置１０がある。このような画像処理装置１０では、通常の起動（通常ブート）以外の特殊な手順での起動（特殊ブート）を行った際にＵＩアライメント調整のための画面（ＵＩアライメント調整画面）を表示し、この画面上の数点をタップする操作によってＵＩアライメント調整を行うことが多い。 By the way, before operating the above-described operation panel 15, an adjustment for matching the touch position on the position detection sheet with the actual reaction position of a UI (User Interface) component displayed on the display (hereinafter referred to as “UI alignment adjustment”). There is an image processing apparatus 10 for performing Such an image processing apparatus 10 displays a screen for UI alignment adjustment (UI alignment adjustment screen) when starting (special boot) in a special procedure other than normal startup (normal boot), In many cases, the UI alignment is adjusted by tapping several points on the screen.

しかしながら、ＵＩアライメント調整が必要なほどタッチ位置と反応位置がずれていることは非常に稀であり、特殊ブート時には、主として、ＵＩアライメント調整以外のメンテナンス処理が行われる。従って、特殊ブートを行う都度、ＵＩアライメント調整画面を表示したのでは、この画面をタップする操作を必ず行わなければならず、操作性が低下する。
とは言え、タッチ位置と反応位置が本当にずれている場合は、ＵＩアライメント調整を行わなければ目的のＵＩ部品を選択することができない。 However, it is very rare for the touch position and the reaction position to deviate so that UI alignment adjustment is necessary, and maintenance processing other than UI alignment adjustment is mainly performed during special boot. Accordingly, when the UI alignment adjustment screen is displayed each time a special boot is performed, an operation of tapping this screen must be performed without fail, and the operability is degraded.
However, if the touch position and the reaction position are really deviated, the target UI component cannot be selected without performing UI alignment adjustment.

そこで、本実施の形態では、通常ブートを行った場合は、操作パネル１５を通常のタッチパネルとして操作できるようにし、特殊ブートを行った場合は、操作パネル１５をタッチパッド方式で操作できるようにする。ここで、タッチパッド方式とは、操作パネル１５に指を置くとマウスポインタ（以下、単に「ポインタ」という）が表示され、指を動かすことでそのポインタを動かすことができ、任意の場所をタップするとポインタの位置に表示されたＵＩ部品を選択できる方式のことをいう。つまり、本実施の形態は、位置検出シート上のタッチ位置とディスプレイにおける反応位置とがずれている場合にも目的のＵＩ部品を選択することができ、かつ、ＵＩアライメント調整のためのタップを行う手数を削減して操作性を向上させる手法を提案する。 Therefore, in the present embodiment, when the normal boot is performed, the operation panel 15 can be operated as a normal touch panel, and when the special boot is performed, the operation panel 15 can be operated by a touch pad method. . Here, with the touch pad method, when a finger is placed on the operation panel 15, a mouse pointer (hereinafter simply referred to as "pointer") is displayed, and the pointer can be moved by moving the finger, and an arbitrary place is tapped. In this case, the UI component displayed at the position of the pointer can be selected. That is, according to the present embodiment, a target UI component can be selected even when the touch position on the position detection sheet is shifted from the reaction position on the display, and taps for UI alignment adjustment are performed. We propose a method to improve the operability by reducing the number of steps.

次に、このような手法を実現する選択支援装置２０について説明する。
図２は、選択支援装置２０の機能構成を示したブロック図である。この選択支援装置２０は、画像処理装置１０内で操作パネル１５におけるＵＩ部品の選択を支援する装置であり、ＣＰＵ１１がＨＤＤ１４に記憶された選択支援プログラムをＲＡＭ１２に読み込んで実行することにより実現される。
図示するように、選択支援装置２０は、ブート判定部２１と、ドライバ記憶部２２と、ドライバ読込部２３と、メニュー記憶部２４と、メニュー表示制御部２５と、ポインタ表示制御部２６と、選択部品判定部２７と、ＵＩアライメント調整部２８とを備える。 Next, the selection support apparatus 20 that realizes such a method will be described.
FIG. 2 is a block diagram showing a functional configuration of the selection support apparatus 20. The selection support device 20 is a device that supports selection of UI parts on the operation panel 15 in the image processing apparatus 10 and is realized by the CPU 11 reading the selection support program stored in the HDD 14 into the RAM 12 and executing it. .
As illustrated, the selection support device 20 includes a boot determination unit 21, a driver storage unit 22, a driver reading unit 23, a menu storage unit 24, a menu display control unit 25, a pointer display control unit 26, and a selection. A component determination unit 27 and a UI alignment adjustment unit 28 are provided.

ブート判定部２１は、画像処理装置１０の起動時に、通常ブートであるか特殊ブートであるかを判定する。
ドライバ記憶部２２は、操作パネル１５を通常のタッチパネルとして操作するためのタッチパネルドライバである通常ドライバと、操作パネル１５をタッチパッド方式で操作するためのタッチパネルドライバである特殊ドライバとを記憶する。
ドライバ読込部２３は、ブート判定部２１の判定結果に応じて、ドライバ記憶部２２に記憶された通常ドライバ又は特殊ドライバを読み込む。
メニュー記憶部２４は、通常ブート時に操作パネル１５に表示する通常メニューと、特殊ブート時に操作パネル１５に表示する特殊メニューとを記憶する。
メニュー表示制御部２５は、ブート判定部２１の判定結果に応じて、メニュー記憶部２４に記憶された通常メニュー又は特殊メニューの操作パネル１５への表示を制御する。 The boot determination unit 21 determines whether the boot is a normal boot or a special boot when the image processing apparatus 10 is activated.
The driver storage unit 22 stores a normal driver that is a touch panel driver for operating the operation panel 15 as a normal touch panel, and a special driver that is a touch panel driver for operating the operation panel 15 by a touch pad method.
The driver reading unit 23 reads a normal driver or a special driver stored in the driver storage unit 22 according to the determination result of the boot determination unit 21.
The menu storage unit 24 stores a normal menu displayed on the operation panel 15 during normal boot and a special menu displayed on the operation panel 15 during special boot.
The menu display control unit 25 controls the display of the normal menu or special menu stored in the menu storage unit 24 on the operation panel 15 according to the determination result of the boot determination unit 21.

ポインタ表示制御部２６は、ドライバ読込部２３が読み込んだ特殊ドライバによって実現され、ポインタの操作パネル１５への表示を制御する。また、操作パネル１５上のポインタによって選択された位置（選択位置）を出力する。
選択部品判定部２７は、ポインタ表示制御部２６から出力された選択位置と、メニュー表示制御部２５で管理されるメニュー内のＵＩ部品の表示位置とを比較して、選択されたＵＩ部品を判定する。
ＵＩアライメント調整部２８は、メニュー表示制御部２５で管理されるメニュー内のＵＩ部品のうち、ＵＩアライメント調整を指示するＵＩ部品が選択された場合に、ＵＩアライメント調整を行い、その結果を、ドライバ記憶部２２に記憶された通常ドライバ及び特殊ドライバが保持する補正値に反映させる。 The pointer display control unit 26 is realized by a special driver read by the driver reading unit 23 and controls the display of the pointer on the operation panel 15. In addition, the position selected by the pointer on the operation panel 15 (selected position) is output.
The selected component determination unit 27 compares the selection position output from the pointer display control unit 26 with the display position of the UI component in the menu managed by the menu display control unit 25 to determine the selected UI component. To do.
The UI alignment adjustment unit 28 performs UI alignment adjustment when a UI component instructing UI alignment adjustment is selected from the UI components in the menu managed by the menu display control unit 25, and the result is sent to the driver. This is reflected in the correction value held by the normal driver and special driver stored in the storage unit 22.

次いで、本実施の形態における選択支援装置２０の動作について説明する。
図３は、選択支援装置２０の動作例を示したフローチャートである。
本実施の形態における画像処理装置１０では、上述したように、電源を投入するといった通常の手順で起動する通常ブート以外に、カスタマエンジニア等の作業者が故障診断やメンテナンスを目的として特定の手順で起動する特殊ブートを設けている。ここで、特定の手順とは、例えば操作パネル１５の任意の点を押下しながら電源を投入するような手順である。そこで、まず、ブート判定部２１が、画像処理装置１０が起動された際に、通常ブートであるか特殊ブートであるかを判定する（ステップ２０１）。 Next, the operation of the selection support apparatus 20 in the present embodiment will be described.
FIG. 3 is a flowchart showing an operation example of the selection support apparatus 20.
In the image processing apparatus 10 according to the present embodiment, as described above, an operator such as a customer engineer performs a specific procedure for fault diagnosis and maintenance in addition to a normal boot that is activated by a normal procedure such as turning on the power. There is a special boot to start. Here, the specific procedure is, for example, a procedure of turning on the power while pressing an arbitrary point on the operation panel 15. Therefore, first, the boot determination unit 21 determines whether the boot is a normal boot or a special boot when the image processing apparatus 10 is activated (step 201).

その結果、通常ブートであると判定されれば、ドライバ読込部２３がドライバ記憶部２２から通常ドライバを選択して読み込む（ステップ２０２）。そして、ブート判定部２１から通常ブートである旨がメニュー表示制御部２５に伝えられ、メニュー表示制御部２５が、メニュー記憶部２４に記憶されたメニューのうち通常メニューを操作パネル１５に表示するように制御する（ステップ２０３）。以降は、通常の画像処理が行われる（ステップ２０４）。 As a result, if it is determined that the boot is normal, the driver reading unit 23 selects and reads the normal driver from the driver storage unit 22 (step 202). Then, the boot determination unit 21 notifies the menu display control unit 25 that the boot is normal, and the menu display control unit 25 displays the normal menu among the menus stored in the menu storage unit 24 on the operation panel 15. (Step 203). Thereafter, normal image processing is performed (step 204).

一方、特殊ブートであると判定されれば、ドライバ読込部２３がドライバ記憶部２２から特殊ドライバを選択して読み込む（ステップ２０５）。そして、ブート判定部２１から特殊ブートである旨がメニュー表示制御部２５に伝えられ、メニュー表示制御部２５が、メニュー記憶部２４に記憶されたメニューのうち特殊メニューを操作パネル１５に表示するように制御する（ステップ２０６）。ここで、特殊メニューとは、ＵＩアライメント調整に加え、診断、ＨＤＤ初期化、アップデート等のメンテナンス処理を指示するためのＵＩ部品（ボタン等）が配置されたメニューである。このとき、ポインタは表示されていないが、操作パネル１５に指を置くと、ポインタ表示制御部２６が、ポインタを操作パネル１５に表示するように制御し、任意の場所がタップされると、操作パネル１５上のポインタの位置が選択されたものとして、選択位置を求める（ステップ２０７）。 On the other hand, if it is determined that the boot is a special boot, the driver reading unit 23 selects and reads a special driver from the driver storage unit 22 (step 205). The boot determination unit 21 notifies the menu display control unit 25 that the boot is a special boot, and the menu display control unit 25 displays a special menu among the menus stored in the menu storage unit 24 on the operation panel 15. (Step 206). Here, the special menu is a menu in which UI parts (buttons and the like) for instructing maintenance processing such as diagnosis, HDD initialization, and update in addition to UI alignment adjustment are arranged. At this time, although the pointer is not displayed, when the finger is placed on the operation panel 15, the pointer display control unit 26 controls to display the pointer on the operation panel 15, and when an arbitrary place is tapped, the operation is performed. Assuming that the position of the pointer on the panel 15 is selected, the selected position is obtained (step 207).

これにより、選択部品判定部２７は、ステップ２０６で表示された特殊メニューにおける各ＵＩ部品の表示位置と、ステップ２０７で求められた選択位置とを比較して、ＵＩアライメント調整を行うためのＵＩ部品が選択されたかどうかを判定する（ステップ２０８）。 Accordingly, the selected component determination unit 27 compares the display position of each UI component in the special menu displayed in step 206 with the selected position obtained in step 207, and performs the UI alignment adjustment. Is selected (step 208).

その結果、ＵＩアライメント調整を行うためのＵＩ部品が選択されなかったと判定された場合を考える。つまり、ＵＩ部品が表示されていない位置が選択位置となることはないものとすると、ＵＩアライメント調整以外の診断、ＨＤＤ初期化、アップデート等のメンテナンス処理を行うためのＵＩ部品が選択された場合である。この場合、ＵＩアライメント調整以外の指定されたメンテナンス処理が実行され（ステップ２０９）、リブートされる（ステップ２１１）。 As a result, let us consider a case where it is determined that a UI component for performing UI alignment adjustment has not been selected. In other words, assuming that a position where no UI component is displayed is not a selected position, a UI component for performing maintenance processing such as diagnosis, HDD initialization, and update other than UI alignment adjustment is selected. is there. In this case, designated maintenance processing other than UI alignment adjustment is executed (step 209) and rebooted (step 211).

一方、ＵＩアライメント調整を行うためのＵＩ部品が選択されたと判定された場合、ＵＩアライメント調整部２８は、ＵＩアライメント調整画面を表示し、複数点をタップさせることで補正値を求め、補正値を格納し（ステップ２１０）、リブートする（ステップ２１１）。すると、格納した補正値がドライバ記憶部２２に記憶された通常ドライバ及び特殊ドライバに組み込まれる。 On the other hand, when it is determined that a UI component for performing UI alignment adjustment is selected, the UI alignment adjustment unit 28 displays a UI alignment adjustment screen, obtains a correction value by tapping a plurality of points, and calculates the correction value. Store (step 210) and reboot (step 211). Then, the stored correction value is incorporated into the normal driver and special driver stored in the driver storage unit 22.

ここで、ステップ２０７〜２０８での操作パネル１５の操作について説明する。
まず、その前提として、ステップ２０６で表示される特殊メニューについて示す。
図４は、特殊メニューの一例を示した図である。
図示するように、特殊メニューは、ＵＩアライメント調整を指示する際に操作されるボタン４１と、画像処理装置１０の診断を指示する際に操作されるボタン４２と、ＨＤＤ１４の初期化を指示する際に操作されるボタン４３と、画像処理装置１０に組み込まれたソフトウェアのアップデートを指示する際に操作されるボタン４４とを含んでいる。 Here, the operation of the operation panel 15 in steps 207 to 208 will be described.
First, as a premise, the special menu displayed in step 206 will be described.
FIG. 4 is a diagram showing an example of the special menu.
As illustrated, the special menu includes a button 41 that is operated when instructing UI alignment adjustment, a button 42 that is operated when instructing diagnosis of the image processing apparatus 10, and an instruction to initialize the HDD 14. And a button 44 that is operated when an instruction to update the software incorporated in the image processing apparatus 10 is given.

次に、このような特殊メニュー上での操作について説明する。
この特殊メニューにおいて操作者が選択したい処理に対応するボタン上に指を置くと、ポインタ表示制御部２６は、現在の補正値で求められる位置にポインタを表示する。
図５は、タッチ位置と反応位置がずれていない場合の図である。
この場合は、まず、（ａ）に示すように、操作者の指のところにポインタが表示される。ここでは、ボタン４３上に指を置いているので、ポインタもボタン４３上に表示されている。
そして、操作者が操作パネル１５上に指を置いたまま動かすと、（ｂ）に示すように、ポインタもこれに追随して移動する。但し、ここでは、補正値の関係で、ポインタは、指の移動に完全には追随していない。
しかしながら、（ｃ）に示すように、指を静止させたときには、操作者の指のところにポインタが表示される。ここでは、ボタン４４まで指を動かして静止させているので、ポインタもボタン４４上に表示されている。
この状態で指を離すと、ポインタ表示制御部２６は、（ｄ）に示すように、ポインタと同じ位置に表示されたボタンが押されたと認識する。ここでは、太枠で囲んで示したように、ボタン４４が押されたと認識している。そして、ポインタは操作パネル１５上から消えている。 Next, operations on such a special menu will be described.
When the operator places his / her finger on the button corresponding to the process desired to be selected in the special menu, the pointer display control unit 26 displays the pointer at the position determined by the current correction value.
FIG. 5 is a diagram when the touch position and the reaction position are not shifted.
In this case, first, as shown in (a), a pointer is displayed at the finger of the operator. Here, since the finger is placed on the button 43, the pointer is also displayed on the button 43.
When the operator moves his / her finger on the operation panel 15, the pointer moves following the pointer as shown in FIG. However, here, the pointer does not completely follow the movement of the finger because of the correction value.
However, as shown in (c), when the finger is stopped, the pointer is displayed at the finger of the operator. Here, since the finger is moved to the button 44 to be stationary, the pointer is also displayed on the button 44.
When the finger is released in this state, the pointer display control unit 26 recognizes that the button displayed at the same position as the pointer is pressed, as shown in (d). Here, it is recognized that the button 44 has been pressed, as indicated by a thick frame. The pointer disappears from the operation panel 15.

図６は、タッチ位置と反応位置がずれている場合の図である。
この場合は、まず、（ａ）に示すように、操作者の指から離れた位置にポインタが表示され、操作者は操作パネル１５上に指を置いたまま動かす。ここでは、最初、ボタン４３とボタン４４の間にポインタが表示されているが、指の動きに沿って、ポインタはボタン４２まで移動している。
そして、指が離された場合は、ポインタの位置はそのままにし、再度指が置かれ、指が移動した際には移動したベクトルに合わせて、ポインタの位置を移動させる。その後、（ｂ）に示すように、再度指が置かれ、指が移動することなく離されたとする。ここでは、ポインタはボタン４２上に表示され、ボタン４３上に再度指を置いて離している。
すると、ポインタ表示制御部２６は、（ｃ）に示すように、ポインタと同じ位置に表示されたボタンが押されたと認識する。ここでは、太枠で囲んで示したように、ボタン４２が押されたと認識している。そして、ポインタは操作パネル１５上から消えている。 FIG. 6 is a diagram when the touch position and the reaction position are shifted.
In this case, first, as shown in (a), a pointer is displayed at a position away from the operator's finger, and the operator moves the finger with the finger placed on the operation panel 15. Here, a pointer is initially displayed between the button 43 and the button 44, but the pointer moves to the button 42 along with the movement of the finger.
When the finger is released, the position of the pointer is left as it is, and the finger is placed again. When the finger moves, the position of the pointer is moved according to the moved vector. Then, as shown in (b), it is assumed that the finger is placed again and released without moving. Here, the pointer is displayed on the button 42, and the finger is again placed on the button 43 and released.
Then, the pointer display control unit 26 recognizes that the button displayed at the same position as the pointer has been pressed, as shown in (c). Here, it is recognized that the button 42 has been pressed, as indicated by a thick frame. The pointer disappears from the operation panel 15.

次に、このようなポインタの表示制御を行うポインタ表示制御部２６について説明する。
図７は、ポインタ表示制御部２６の機能構成例を示したブロック図である。
図示するように、ポインタ表示制御部２６は、信号判別部３１と、ポインタ位置記憶部３２と、補正値記憶部３３と、ポインタ位置決定部３４と、ポインタ位置出力部３５と、選択位置出力部３６とを備える。 Next, the pointer display control unit 26 that performs such pointer display control will be described.
FIG. 7 is a block diagram illustrating a functional configuration example of the pointer display control unit 26.
As illustrated, the pointer display control unit 26 includes a signal determination unit 31, a pointer position storage unit 32, a correction value storage unit 33, a pointer position determination unit 34, a pointer position output unit 35, and a selection position output unit. 36.

信号判別部３１は、位置検出シートからの信号が、位置検出シート上に指を置く操作（タッチＯＮ操作）が行われたことを示すタッチＯＮ信号、位置検出シート上から指を離す操作（タッチＯＦＦ操作）が行われたことを示すタッチＯＦＦ信号、位置検出シート上に指を置いたまま指を動かす操作（ドラッグ操作）が行われたことを示すドラッグ信号の何れであるかを判別する。また、ドラッグ信号を蓄積しておき、この蓄積したドラッグ信号に基づいて、タッチＯＦＦ操作の直前にドラッグ操作が行われたかどうかの判定も行う。尚、少なくともタッチＯＮ信号やドラッグ信号には、そのときの位置検出シート上のタッチ位置の情報が含まれているものとする。本実施の形態では、指示操作の一例として、タッチＯＮ操作を、移動操作の一例として、ドラッグ操作を、解除操作の一例として、タッチＯＦＦ操作を、それぞれ、用いている。また、指示操作、移動操作、解除操作の何れかを検出する検出手段の一例として、信号判別部３１を設けている。 The signal discriminating unit 31 receives a touch ON signal indicating that an operation of placing a finger on the position detection sheet (touch ON operation) is performed, and an operation of releasing the finger from the position detection sheet (touch). It is determined whether the signal is a touch OFF signal indicating that an OFF operation has been performed, or a drag signal indicating that an operation of moving a finger (drag operation) with the finger placed on the position detection sheet is performed. In addition, a drag signal is accumulated, and based on the accumulated drag signal, it is also determined whether or not the drag operation is performed immediately before the touch-off operation. Note that at least the touch ON signal and the drag signal include information on the touch position on the position detection sheet at that time. In this embodiment, a touch-on operation is used as an example of the instruction operation, a drag operation is used as an example of the movement operation, and a touch-off operation is used as an example of the release operation. Moreover, the signal discrimination | determination part 31 is provided as an example of the detection means which detects any of instruction | indication operation, movement operation, and cancellation | release operation.

ポインタ位置記憶部３２は、操作パネル１５上にポインタが表示されている場合に、ポインタの位置を示す情報を記憶する。
補正値記憶部３３は、位置検出シート上のタッチ位置とディスプレイにおけるポインタの表示位置とのずれを少なくするための補正値を記憶する。
ポインタ位置決定部３４は、操作パネル１５上にポインタが表示されていない状態で信号判別部３１がタッチＯＮ信号を判別した場合や、信号判別部３１がドラッグ信号を判別した場合に、信号に含まれるタッチ位置と、補正値記憶部３３に記憶された補正値とに基づいて、ディスプレイにおけるポインタの表示位置（以下、「ポインタ位置」という）を求め、ポインタ位置の情報をポインタ位置記憶部３２に記憶する。また、ドラッグ操作の直後以外で信号判別部３１がタッチＯＦＦ信号を判別した場合は、ポインタを消去することとし、ポインタ位置記憶部３２に記憶されたポインタ位置の情報を削除する。 The pointer position storage unit 32 stores information indicating the position of the pointer when the pointer is displayed on the operation panel 15.
The correction value storage unit 33 stores a correction value for reducing a deviation between the touch position on the position detection sheet and the display position of the pointer on the display.
The pointer position determination unit 34 is included in the signal when the signal determination unit 31 determines the touch-on signal when the pointer is not displayed on the operation panel 15 or when the signal determination unit 31 determines the drag signal. The pointer display position (hereinafter referred to as “pointer position”) on the display is obtained based on the touched position and the correction value stored in the correction value storage unit 33, and information on the pointer position is stored in the pointer position storage unit 32. Remember. When the signal determination unit 31 determines a touch-off signal other than immediately after the drag operation, the pointer is deleted, and the pointer position information stored in the pointer position storage unit 32 is deleted.

ポインタ位置出力部３５は、ポインタ位置決定部３４が決定したポインタ位置の情報をポインタ表示指示及びポインタ移動指示として操作パネル１５に出力する。また、ポインタ位置決定部３４がポインタを消去すべきことを決定した場合は、ポインタ消去指示を操作パネル１５に出力する。本実施の形態では、予め定めた形状の特定表示要素の一例として、矢印の形状のポインタを用いている。また、指示操作の検出に応じて特定表示要素が出現するように制御する第１の制御手段の一例として、移動操作の検出に応じて特定表示要素が移動するように制御する第２の制御手段の一例として、解除操作の検出に応じて特定表示要素が消滅するように制御する第３の制御手段の一例として、ポインタ位置出力部３５を設けている。
選択位置出力部３６は、ドラッグ操作の直後以外で信号判別部３１がタッチＯＦＦ信号を判別した場合に、その時点でのポインタ位置の情報を選択位置の情報として選択部品判定部２７に出力する。本実施の形態では、特定表示要素が表示された位置に表示された選択対象表示要素が選択されるように、その位置を示す情報を出力する出力手段の一例として、選択位置出力部３６を設けている。 The pointer position output unit 35 outputs information on the pointer position determined by the pointer position determination unit 34 to the operation panel 15 as a pointer display instruction and a pointer movement instruction. When the pointer position determination unit 34 determines that the pointer should be deleted, a pointer deletion instruction is output to the operation panel 15. In the present embodiment, an arrow-shaped pointer is used as an example of a specific display element having a predetermined shape. In addition, as an example of a first control unit that controls the specific display element to appear in response to the detection of the pointing operation, a second control unit that controls the specific display element to move in response to the detection of the moving operation. As an example, a pointer position output unit 35 is provided as an example of third control means for controlling the specific display element to disappear in response to detection of the release operation.
When the signal determination unit 31 determines a touch-off signal other than immediately after the drag operation, the selection position output unit 36 outputs information on the pointer position at that time to the selected component determination unit 27 as selection position information. In the present embodiment, a selection position output unit 36 is provided as an example of output means for outputting information indicating the position so that the selection target display element displayed at the position where the specific display element is displayed is selected. ing.

次いで、ポインタ表示制御部２６の動作について説明する。
図８は、ポインタ表示制御部２６の動作例について示したフローチャートである。
ポインタ表示制御部２６では、信号判別部３１が、操作パネル１５から受けた信号が、タッチＯＮ信号、タッチＯＦＦ信号、ドラッグ信号の何れであるかを判別する（ステップ３０１）。尚、タッチＯＮ信号には指が置かれた位置の情報が、ドラッグ信号には指が通過した位置の情報が、それぞれ含まれているものとする。 Next, the operation of the pointer display control unit 26 will be described.
FIG. 8 is a flowchart illustrating an operation example of the pointer display control unit 26.
In the pointer display control unit 26, the signal determination unit 31 determines whether the signal received from the operation panel 15 is a touch ON signal, a touch OFF signal, or a drag signal (step 301). It is assumed that the touch ON signal includes information on the position where the finger is placed, and the drag signal includes information on the position where the finger passes.

まず、信号判別部３１がタッチＯＮ信号であると判別した場合について説明する。
この場合、タッチＯＮ信号は、ポインタ位置決定部３４に伝えられ、ポインタ位置決定部３４が、ポインタ位置記憶部３２にポインタ位置が記憶されているかどうかに基づいて、操作パネル１５にポインタが表示されているかどうかを判定する（ステップ３０２）。
その結果、ポインタ位置記憶部３２にポインタ位置が記憶されていると判定されれば、つまり、操作パネル１５にポインタが表示されていれば、そのまま処理を終了する。
一方、ポインタ位置記憶部３２にポインタ位置が記憶されていないと判定されれば、つまり、操作パネル１５にポインタが表示されていなければ、タッチＯＮ信号に含まれるタッチ位置と、補正値記憶部３３に記憶された補正値とに基づいて、ポインタ位置を求める（ステップ３０３）。そして、このポインタ位置をポインタ位置記憶部３２に新規登録する（ステップ３０４）。また、ポインタ位置はポインタ位置出力部３５に渡され、ポインタ位置出力部３５が、このポインタ位置にポインタを表示させるポインタ表示指示を操作パネル１５に出力する（ステップ３０５）。 First, a case where the signal determining unit 31 determines that it is a touch ON signal will be described.
In this case, the touch ON signal is transmitted to the pointer position determination unit 34, and the pointer position determination unit 34 displays the pointer on the operation panel 15 based on whether the pointer position is stored in the pointer position storage unit 32. (Step 302).
As a result, if it is determined that the pointer position is stored in the pointer position storage unit 32, that is, if the pointer is displayed on the operation panel 15, the process is ended as it is.
On the other hand, if it is determined that the pointer position is not stored in the pointer position storage unit 32, that is, if the pointer is not displayed on the operation panel 15, the touch position included in the touch ON signal and the correction value storage unit 33 are displayed. The pointer position is obtained based on the correction value stored in (Step 303). Then, this pointer position is newly registered in the pointer position storage unit 32 (step 304). Further, the pointer position is transferred to the pointer position output unit 35, and the pointer position output unit 35 outputs a pointer display instruction for displaying the pointer at the pointer position to the operation panel 15 (step 305).

また、信号判別部３１がドラッグ信号であると判別した場合について説明する。
この場合、ドラッグ信号は、ポインタ位置決定部３４に伝えられ、ポインタ位置決定部３４が、ドラッグ信号に含まれるタッチ位置と、補正値記憶部３３に記憶された補正値とに基づいて、ポインタ位置を求める（ステップ３０６）。そして、ポインタ位置記憶部３２に既に記憶されたポインタ位置を、ここで求めたポインタ位置によって更新する（ステップ３０７）。また、ポインタ位置はポインタ位置出力部３５に渡され、ポインタ位置出力部３５が、このポインタ位置にポインタを移動させるポインタ移動指示を操作パネル１５に出力する（ステップ３０８）。 A case where the signal determining unit 31 determines that the signal is a drag signal will be described.
In this case, the drag signal is transmitted to the pointer position determination unit 34, and the pointer position determination unit 34 determines the pointer position based on the touch position included in the drag signal and the correction value stored in the correction value storage unit 33. Is obtained (step 306). Then, the pointer position already stored in the pointer position storage unit 32 is updated with the pointer position obtained here (step 307). The pointer position is transferred to the pointer position output unit 35, and the pointer position output unit 35 outputs a pointer movement instruction for moving the pointer to the pointer position to the operation panel 15 (step 308).

更に、信号判別部３１がタッチＯＦＦ信号であると判別した場合について説明する。
この場合、信号判別部３１は、タッチＯＦＦ操作の直前にドラッグ操作が行われたかどうかを判定する（ステップ３０９）。
その結果、直前にドラッグ操作が行われなかったと判定された場合は、つまり、操作パネル１５上に指を置いて移動させずに離す操作が行われた場合は、タッチＯＦＦ信号がポインタ位置決定部３４に伝えられ、ポインタ位置決定部３４が、ポインタ位置記憶部３２から現在のポインタ位置を取得する（ステップ３１０）。これにより、現在のポインタ位置は、選択位置出力部３６に渡され、選択位置出力部３６が、渡されたポインタ位置を選択位置として選択部品判定部２７に出力する（ステップ３１１）。そして、ポインタ位置決定部３４は、ポインタを消去することとし、ポインタ位置記憶部３２に記憶されたポインタ位置を削除する（ステップ３１２）。また、ポインタを消去すべき旨はポインタ位置出力部３５に渡され、ポインタ位置出力部３５が、ポインタを消去させるポインタ消去指示を操作パネル１５に出力する（ステップ３１３）。
一方、直前にドラッグ操作が行われたと判定された場合は、そのまま処理を終了する。 Further, a case where the signal determination unit 31 determines that it is a touch-off signal will be described.
In this case, the signal determination unit 31 determines whether a drag operation has been performed immediately before the touch-off operation (step 309).
As a result, when it is determined that the drag operation has not been performed immediately before, that is, when an operation of placing the finger on the operation panel 15 and releasing it without moving is performed, the touch OFF signal is transmitted to the pointer position determination unit. 34, the pointer position determination unit 34 acquires the current pointer position from the pointer position storage unit 32 (step 310). As a result, the current pointer position is transferred to the selection position output unit 36, and the selection position output unit 36 outputs the received pointer position to the selected component determination unit 27 as the selection position (step 311). Then, the pointer position determination unit 34 deletes the pointer, and deletes the pointer position stored in the pointer position storage unit 32 (step 312). Further, the fact that the pointer should be erased is passed to the pointer position output unit 35, and the pointer position output unit 35 outputs a pointer erase instruction to erase the pointer to the operation panel 15 (step 313).
On the other hand, if it is determined that a drag operation has been performed immediately before, the process is terminated.

尚、本実施の形態では、操作パネル１５上での指示を、指を指示手段として用いて行うようにしたが、例えば、スタイラスペン等の指示手段を用いて行うようにしてもよい。
また、本実施の形態では、ＵＩ部品が選択された時点でポインタを消去するようにしたが、これには限らない。例えば、ＵＩ部品が選択されても暫くはポインタを消去せず、予め定めた時間が経過した時点で消去するようにしてもよい。 In the present embodiment, the instruction on the operation panel 15 is performed using a finger as an instruction unit, but may be performed using an instruction unit such as a stylus pen.
In this embodiment, the pointer is deleted when the UI component is selected. However, the present invention is not limited to this. For example, the pointer may not be erased for a while even if a UI component is selected, but may be erased when a predetermined time has elapsed.

更に、本実施の形態では、特殊ブート時にのみタッチパッド方式のドライバを用いるようにしたが、通常ブート時にもタッチパッド方式のドライバを用いてよい。その場合、新たな選択を行う際にポインタを消去するキャンセル操作を、短時間に２回タップする操作（ダブルクリック）等と関連付ける。これは、新たな選択を行うために一旦指を置いて指を動かし選択を取りやめる操作を行わない限り、ポインタが表示されたままとなり、次に選択したい位置をタップしても、その位置が選択できないためである。 Further, in the present embodiment, the touch pad type driver is used only during the special boot, but the touch pad type driver may be used during the normal boot. In this case, the cancel operation for deleting the pointer when making a new selection is associated with an operation of tapping twice in a short time (double click) or the like. This means that the pointer remains displayed unless you place your finger once and move your finger to cancel the selection to make a new selection. This is because it cannot be done.

また、本実施の形態において、移動したベクトルに合わせてポインタを移動させる際に、実際の動きよりも少ない距離を移動させることで、小さい対象を選択できるようにしてもよい。
更に、表示されている選択対象の密度や大きさによって、移動させる距離を調整するようにしてもよい。 Further, in the present embodiment, when moving the pointer according to the moved vector, it may be possible to select a small object by moving a distance smaller than the actual movement.
Furthermore, the distance to be moved may be adjusted according to the density and size of the displayed selection target.

ところで、本実施の形態では、画像処理装置１０が有する操作パネル１５を前提として説明した。しかしながら、画像処理装置１０以外の機器におけるタッチパネルにおいて同様の構成を採用してもよい。
以下、このような一般的な機器をコンピュータ９０として、そのハードウェア構成について説明する。 By the way, in the present embodiment, the description has been made on the assumption that the operation panel 15 of the image processing apparatus 10 is provided. However, the same configuration may be adopted in a touch panel in a device other than the image processing apparatus 10.
Hereinafter, the hardware configuration of such a general device as a computer 90 will be described.

図９は、コンピュータ９０のハードウェア構成を示した図である。
図示するように、コンピュータ９０は、演算手段であるＣＰＵ（Central Processing Unit）９１と、記憶手段であるメインメモリ９２及び磁気ディスク装置（ＨＤＤ：Hard Disk Drive）９３とを備える。ここで、ＣＰＵ９１は、ＯＳ（Operating System）やアプリケーション等の各種ソフトウェアを実行し、上述した各機能を実現する。また、メインメモリ９２は、各種ソフトウェアやその実行に用いるデータ等を記憶する記憶領域であり、磁気ディスク装置９３は、各種ソフトウェアに対する入力データや各種ソフトウェアからの出力データ等を記憶する記憶領域である。
更に、コンピュータ９０は、外部との通信を行うための通信Ｉ／Ｆ９４と、ビデオメモリやディスプレイ等からなる表示機構９５と、キーボードやマウス等の入力デバイス９６とを備える。 FIG. 9 is a diagram illustrating a hardware configuration of the computer 90.
As shown in the figure, the computer 90 includes a CPU (Central Processing Unit) 91 as a calculation means, a main memory 92 as a storage means, and a magnetic disk device (HDD: Hard Disk Drive) 93. Here, the CPU 91 executes various types of software such as an OS (Operating System) and applications to realize the above-described functions. The main memory 92 is a storage area for storing various software and data used for execution thereof, and the magnetic disk device 93 is a storage area for storing input data for various software, output data from various software, and the like. .
Further, the computer 90 includes a communication I / F 94 for performing communication with the outside, a display mechanism 95 including a video memory and a display, and an input device 96 such as a keyboard and a mouse.

尚、本実施の形態を実現するプログラムは、通信手段により提供することはもちろん、ＣＤ−ＲＯＭ等の記録媒体に格納して提供することも可能である。 The program for realizing this embodiment can be provided not only by communication means but also by storing it in a recording medium such as a CD-ROM.

２０…選択支援装置、２１…ブート判定部、２２…ドライバ記憶部、２３…ドライバ読込部、２４…メニュー記憶部、２５…メニュー表示制御部、２６…ポインタ表示制御部、２７…選択部品判定部、２８…ＵＩアライメント調整部、３１…信号判別部、３２…ポインタ位置記憶部、３３…補正値記憶部、３４…ポインタ位置決定部、３５…ポインタ位置出力部、３６…選択位置出力部 DESCRIPTION OF SYMBOLS 20 ... Selection support apparatus, 21 ... Boot determination part, 22 ... Driver memory | storage part, 23 ... Driver reading part, 24 ... Menu memory | storage part, 25 ... Menu display control part, 26 ... Pointer display control part, 27 ... Selected part determination part , 28 ... UI alignment adjustment part, 31 ... Signal discrimination part, 32 ... Pointer position storage part, 33 ... Correction value storage part, 34 ... Pointer position determination part, 35 ... Pointer position output part, 36 ... Selection position output part

Claims

An instruction operation for instructing the instruction position detection member covering the screen by the instruction means, a moving operation for moving the instruction means in a state where the instruction position detection member is instructed by the instruction means, and the instruction for the instruction position detection member Detecting means for detecting a release operation for releasing the state instructed by the means;
A specific display element having a predetermined shape appears at a position on the screen corresponding to the position on the indicated position detection member indicated by the indication means in response to detection of the indication operation by the detection means. First control means for controlling
In response to detection of the movement operation by the detection means, second control is performed so that the specific display element moves in a direction on the screen corresponding to a direction on the indicated position detection member in which the indication means moves. Control means,
The selection target display element displayed at the position where the specific display element is displayed is selected from the plurality of selection target display elements displayed on the screen in response to detection of the release operation by the detection unit. The display control apparatus further comprises output means for outputting information indicating the position.

The display control apparatus according to claim 1, further comprising third control means for controlling the specific display element to disappear in response to detection of the release operation by the detection means.

The third control means prevents the specific display element from disappearing when the detection means detects the release operation for the first time after the specific display element is moved by the control of the second control means. 3. The control according to claim 2, wherein when the detection unit detects the instruction operation and then detects the release operation, the specific display element is controlled to disappear. Display control device.

An instruction operation for instructing the instruction position detection member covering the screen by the instruction means, a moving operation for moving the instruction means in a state where the instruction position detection member is instructed by the instruction means, and the instruction for the instruction position detection member Detecting means for detecting a release operation for releasing the state instructed by the means;
A plurality of selection target display elements are displayed on the screen, and a specific display element having a predetermined shape is displayed on the indication position detection member indicated by the indication means in response to detection of the indication operation by the detection means. The specific display element appears in a position on the screen corresponding to the position, and in accordance with detection of the movement operation by the detection means, in a direction on the indicated position detection member in which the indication means moves. Display means for displaying such that the specific display element moves in a corresponding direction on the screen;
In response to detection of the release operation by the detection unit, a selection target display element displayed at a position where the specific display element is displayed is selected from the plurality of selection target display elements displayed on the display unit. A selection support apparatus, comprising: a determination unit that determines the fact.

The selection support apparatus according to claim 4, wherein the display unit causes the specific display element to disappear in response to detection of the release operation by the detection unit.

When the detection means detects the release operation for the first time after the specific display element has moved, the display means does not erase the specific display element, and then the detection means detects the instruction operation. The selection support apparatus according to claim 5, wherein when the release operation is detected subsequently, the specific display element is extinguished.

The determining means includes
When the own apparatus is activated by a normal procedure, the position on the screen corresponding to the position on the indicated position detection member instructed by the instruction unit in response to detection of the instruction operation by the detection unit Determining that the selection target display element displayed in is selected,
When the device is activated in a specific procedure different from the normal procedure, the selection target displayed at the position where the specific display element is displayed in response to detection of the release operation by the detection unit 7. The selection support apparatus according to claim 4, wherein it is determined that a display element has been selected.

When the display device is activated in the specific procedure, the position on the indicated position detection member instructed by the instruction unit in the instruction operation and the specific display element according to the instruction operation The selection support apparatus according to claim 7, wherein the selection target display element selected to correct a deviation from the position on the screen on which the character is displayed is initially displayed.

On the computer,
An instruction operation for instructing the instruction position detection member covering the screen by the instruction means, a moving operation for moving the instruction means in a state where the instruction position detection member is instructed by the instruction means, and the instruction for the instruction position detection member A function for detecting a release operation for releasing the state instructed by means;
A function of controlling a specific display element having a predetermined shape to appear at a position on the screen corresponding to a position on the designated position detection member designated by the designation unit in response to detection of the designation operation. When,
A function of controlling the specific display element to move in a direction on the screen corresponding to a direction on the pointing position detection member on which the pointing unit moves in response to detection of the moving operation;
In response to detection of the release operation, the selection target display element displayed at the position where the specific display element is displayed is selected from the plurality of selection target display elements displayed on the screen. For realizing the function of outputting information indicating