JP2013200712A - Operation display device - Google Patents

Operation display device Download PDF

Info

Publication number
JP2013200712A
JP2013200712A JP2012068693A JP2012068693A JP2013200712A JP 2013200712 A JP2013200712 A JP 2013200712A JP 2012068693 A JP2012068693 A JP 2012068693A JP 2012068693 A JP2012068693 A JP 2012068693A JP 2013200712 A JP2013200712 A JP 2013200712A
Authority
JP
Japan
Prior art keywords
area
user
type
unit
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012068693A
Other languages
Japanese (ja)
Other versions
JP5945926B2 (en
Inventor
Masao Akimoto
正男 秋元
Yoshihiko Fukuo
兆彦 福王
Yasuaki Sugimoto
泰明 杉本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Inc
Original Assignee
Konica Minolta Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Inc filed Critical Konica Minolta Inc
Priority to JP2012068693A priority Critical patent/JP5945926B2/en
Publication of JP2013200712A publication Critical patent/JP2013200712A/en
Application granted granted Critical
Publication of JP5945926B2 publication Critical patent/JP5945926B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide an operation display device capable of reducing erroneous determination of an operation received from a user.SOLUTION: An index value (for instance, travel distance from a touch to a release) to determine a type of received operation is obtained from detection information of a touch panel part. If the index value is within a select determination region, it is determined that a select operation is received, and if the index value is within a flick determination region, it is determined that a flick operation is received. If the index value is within a determination difficult region between the select determination region and the flick determination region, a user is notified of the difficulty to determine the type of the operation. Thereafter, the type of the operation is designated by the user or the operation is reentered.

Description

本発明は、タッチパネルにて複数種類の操作を受ける操作表示装置に関する。   The present invention relates to an operation display device that receives a plurality of types of operations on a touch panel.

ユーザの指先やペンなどでタッチされた位置を検出するタッチパネルを用いた操作表示装置では、操作ボタンを選択する選択(セレクト)操作のほか、指先やペンをタッチさせたまま移動させるフリック操作やドラッグ操作など各種の操作を受けることができる。   In an operation display device using a touch panel that detects a position touched by a user's fingertip or pen, in addition to a selection operation for selecting an operation button, a flick operation or dragging that moves while the fingertip or pen is touched. Various operations such as operations can be received.

このようなタッチパネル式の操作表示装置では、ユーザから受けた操作の種類をより正確に判定するための各種技術が提案されている。   In such a touch panel type operation display device, various techniques have been proposed for more accurately determining the type of operation received from the user.

たとえば、選択操作中に操作位置の微妙なズレが生じ得ることを考慮し、操作された位置の周囲エリアを検出エリアに設定し、この検出エリア内における操作位置の平均値を、最終的な操作位置に決定する技術がある(特許文献1参照)。   For example, in consideration of the possibility of subtle deviations in the operation position during the selection operation, the area around the operated position is set as the detection area, and the average value of the operation positions in this detection area is determined as the final operation. There is a technique for determining the position (see Patent Document 1).

また、タッチ位置から指を離したアンタッチ位置までの移動量に応じて、その操作が選択操作であるかフリック操作などのジェスチャー操作であるかの判定を行う技術がある(特許文献2参照)。   There is also a technique for determining whether the operation is a selection operation or a gesture operation such as a flick operation according to the amount of movement from the touch position to the untouch position (see Patent Document 2).

特開2009−244967号公報JP 2009-244967 A 特開2009−151691号公報JP 2009-151691 A

選択操作やフリック操作などの操作中における押圧力、タッチ後の移動距離や移動速度などは操作者により様々に異なるため、ユーザから受けた操作を、一律の判定基準で、ユーザの意図した種類の操作として誤判定なく識別することは難しい。   The pressing force during the operation such as the selection operation and the flick operation, the moving distance and moving speed after the touch, etc. vary depending on the operator. It is difficult to identify an operation without erroneous determination.

たとえば、選択操作において指をタッチパネルから離す際に、上下左右のいずれかの方向に指が移動してしまうと、フリック操作と誤判定されることがある。また、抵抗膜式のタッチパネルでは適度な押圧が無ければ指がタッチパネルに触れていると認識されないので、軽い押圧力で行われたフリック操作を、選択操作として誤判定することがある。   For example, when the finger is moved away from the touch panel in the selection operation, the finger may be erroneously determined as a flick operation if the finger moves in any of the up, down, left, and right directions. In addition, since a resistive touch panel does not recognize that a finger is touching the touch panel unless there is an appropriate pressure, a flick operation performed with a light pressing force may be erroneously determined as a selection operation.

このようにユーザの操作を誤判定した場合、ユーザの意図しない操作に対応した処理が実行されるため、ユーザは、その処理をキャンセルした後、本来意図している操作を、今度は、誤判定されないように気をつけて行わなければならず不便であった。   If the user's operation is erroneously determined in this way, the process corresponding to the operation not intended by the user is executed. Therefore, after canceling the process, the user erroneously determines the originally intended operation. It was inconvenient that you had to do it carefully.

本発明は、上記の問題を解決しようとするものであり、ユーザから受けた操作の誤判定を少なく抑えることのできる操作表示装置の提供を目的としている。   The present invention is intended to solve the above problem, and an object of the present invention is to provide an operation display device that can suppress erroneous determination of an operation received from a user.

かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。   The gist of the present invention for achieving the object lies in the inventions of the following items.

[1]タッチの有無およびタッチされている位置を検出するタッチパネル部と、
表示部と、
前記タッチパネル部の検出情報から前記タッチパネル部が受けた操作の種類を判定するための所定の指標に係る値を求め、前記値が第1の領域にある場合は第1操作を受けたと判定し、前記値が第2の領域にある場合は第2操作を受けたと判定し、前記値が前記第1領域と前記第2領域との間の第3の領域にある場合は操作の種類を判定できなかったことを前記表示部に表示する判定部と、
を有する
ことを特徴とする操作表示装置。
[1] A touch panel unit for detecting presence / absence of touch and a touched position;
A display unit;
A value related to a predetermined index for determining the type of operation received by the touch panel unit from the detection information of the touch panel unit is obtained, and when the value is in the first region, it is determined that the first operation has been received, When the value is in the second area, it can be determined that the second operation has been received, and when the value is in the third area between the first area and the second area, the type of operation can be determined. A determination unit for displaying on the display unit that there was no,
An operation display device characterized by comprising:

上記発明では、操作の種類を判定するための所定の指標(たとえば、移動距離やタッチ継続時間など)の値が第1の領域にある場合は第1操作と判定し、第2の領域にある場合は第2操作と判定し、第1の領域と第2の領域の間の第3の領域にある場合は、操作の種類の判定が困難であると判定し、その旨をユーザに報知する。これにより、第1操作か第2操作かが紛らわしい操作をユーザから受けた場合に、操作の種類を誤判定して、ユーザの意図しない操作に対応する処理が実行されることが防止される。また、操作の種類を判定できなかったことを表示することで、どのような操作が紛らわしい操作であるかをユーザに学習させ、的確な操作を行うようにユーザを促すことができる。   In the above invention, when the value of a predetermined index for determining the type of operation (for example, movement distance, touch duration, etc.) is in the first area, it is determined as the first operation and is in the second area. In the case, it is determined as the second operation, and when it is in the third region between the first region and the second region, it is determined that it is difficult to determine the type of the operation, and the user is notified accordingly. . As a result, when an operation in which the first operation or the second operation is confused is received from the user, the type of operation is erroneously determined, and processing corresponding to an operation not intended by the user is prevented from being executed. Further, by displaying that the type of operation could not be determined, the user can learn what operation is misleading and can prompt the user to perform an appropriate operation.

[2]前記判定部は、前記値が前記第3の領域にある場合は、操作の種類の選択をユーザから受け付け、前記値が、前記選択された種類の操作に対応する領域に入るように領域の範囲を変更する
ことを特徴とする[1]に記載の操作表示装置。
[2] When the value is in the third area, the determination unit receives a selection of an operation type from the user, and the value enters an area corresponding to the selected type of operation. The operation display device according to [1], wherein the range of the area is changed.

上記発明では、ユーザの意図していた操作の種類をユーザに特定させ、判定困難とされた操作における指標の値が、その特定された種類の操作に判定されるように、領域の範囲を変更する。これにより、次回、同じような操作を受けた場合に、その操作をユーザの意図した種類の操作として判定することができる。   In the above invention, the range of the region is changed so that the user specifies the type of operation intended by the user, and the index value in the operation that is difficult to determine is determined as the specified type of operation. To do. Accordingly, when the same operation is received next time, the operation can be determined as the type of operation intended by the user.

[3]前記判定部は、前記値が前記第3の領域にある場合は、前記第1の操作および第2の操作の少なくとも一方の操作を、操作の種類を特定した上で受け付け、その操作における前記指標の値を求め、該値が前記特定した種類の操作に対応する領域に入るように領域の範囲を変更する
ことを特徴とする[1]に記載の操作表示装置。
[3] When the value is in the third area, the determination unit receives at least one of the first operation and the second operation after specifying the type of operation, and the operation The operation display device according to [1], wherein a value of the index is obtained, and a range of the region is changed so that the value falls within a region corresponding to the specified type of operation.

上記発明では、ユーザの操作を学習して領域の範囲が変更される。   In the said invention, the range of an area | region is changed by learning a user's operation.

[4]前記判定部は、前記値が前記第3の領域にある場合は、再操作の要求を前記表示部に表示する
ことを特徴とする[1]に記載の操作表示装置。
[4] The operation display device according to [1], wherein the determination unit displays a request for re-operation on the display unit when the value is in the third region.

上記発明では、判定困難の場合にその旨を通知すると共に、ユーザに再操作を求める。   In the above-described invention, when it is difficult to determine, the fact is notified and the user is requested to perform the operation again.

[5]操作するユーザを認証するユーザ認証部と、
前記第1から第3の領域を示す領域情報をユーザ別に記憶する記憶部と、
をさらに備え、
前記判定部は、前記ユーザ認証部で認証されたユーザに対応付けて前記記憶部に記憶されている前記領域情報を用いて、前記認証されたユーザから受ける操作の種類を判定する
ことを特徴とする[1]乃至[4]のいずれか1項に記載の操作表示装置。
[5] A user authentication unit that authenticates a user to be operated;
A storage unit that stores area information indicating the first to third areas for each user;
Further comprising
The determination unit determines the type of operation received from the authenticated user using the area information stored in the storage unit in association with the user authenticated by the user authentication unit. The operation display device according to any one of [1] to [4].

上記発明では、判定の領域はユーザ別に記憶され、ユーザ認証されたユーザに対応する領域の情報が、該ユーザから受けた操作の種類の判定に使用される。   In the above invention, the determination area is stored for each user, and information on the area corresponding to the user authenticated by the user is used for determining the type of operation received from the user.

[6]第1の操作はフリック操作であり、第2の操作はセレクト操作である
ことを特徴とする[1]乃至[5]のいずれか1項に記載の操作表示装置。
[6] The operation display device according to any one of [1] to [5], wherein the first operation is a flick operation and the second operation is a select operation.

[7]前記指標は、タッチからリリースまでの移動距離、もしくは、タッチからリリースまでの移動距離と時間の長さとの組み合わせである
ことを特徴とする[6]に記載の操作表示装置。
[7] The operation display device according to [6], wherein the index is a movement distance from touch to release, or a combination of a movement distance from touch to release and a length of time.

本発明に係る操作表示装置によれば、タッチパネルにてユーザから受けた操作の種類の誤判定を少なく抑えることができる。   According to the operation display device of the present invention, it is possible to suppress erroneous determination of the type of operation received from the user on the touch panel.

本発明の実施の形態に係る操作表示装置を含む複合機の概略構成を示すブロック図である。1 is a block diagram showing a schematic configuration of a multifunction machine including an operation display device according to an embodiment of the present invention. 第1方法によりセレクト操作とフリック操作とを判定する場合の各判定領域を示す図である。It is a figure which shows each determination area | region in the case of determining selection operation and flick operation by the 1st method. 第2方法によりセレクト操作と長押しのセレクト操作とフリック操作とドラッグ操作とを判定する場合の各判定領域を示す図である。It is a figure which shows each determination area | region in the case of determining selection operation, long press selection operation, flick operation, and drag operation by the 2nd method. 複合機が操作表示部の表示部に表示するファイル選択画面の一例を示す図である。6 is a diagram illustrating an example of a file selection screen displayed on the display unit of the operation display unit by the multifunction peripheral. FIG. 図4に示すファイル選択画面のリスト表示領域においてフリック操作を行う様子を示す説明図である。FIG. 5 is an explanatory diagram illustrating a state in which a flick operation is performed in the list display area of the file selection screen illustrated in FIG. 4. 動作例1の場合の表示例を示す図である。10 is a diagram illustrating a display example in the case of an operation example 1. FIG. 判定領域の更新を示す説明図である。It is explanatory drawing which shows the update of a determination area | region. 動作例2の場合の表示例を示す図である。12 is a diagram illustrating a display example in the case of an operation example 2. FIG. 動作例3の場合の表示例を示す図である。12 is a diagram illustrating a display example in the case of an operation example 3. FIG. 複合機が行う操作の判定に係る処理であって、動作例1または動作例2に対応する場合の処理を示す流れ図である。10 is a flowchart illustrating processing related to determination of an operation performed by the multifunction machine when corresponding to the operation example 1 or the operation example 2; 複合機が行う操作の判定に係る処理であって、動作例3に対応する場合の処理を示す流れ図である。10 is a flowchart illustrating processing related to determination of an operation performed by the multifunction machine and corresponding to operation example 3;

以下、図面に基づき本発明の実施の形態を説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

図1は、本発明の実施の形態に係る操作表示装置を含む複合機10の概略構成を示すブロック図である。複合機10は、原稿を光学的に読み取ってその複製画像を印刷出力するコピー機能、外部端末などから受信される印刷データに基づいて印刷するプリント機能、原稿を光学的に読み取って得た画像を保存等するスキャン機能、ファクシミリ機能などを備えた装置である。   FIG. 1 is a block diagram showing a schematic configuration of a multifunction machine 10 including an operation display device according to an embodiment of the present invention. The multi-function device 10 has a copy function for optically reading a document and printing out the duplicate image, a print function for printing based on print data received from an external terminal, and an image obtained by optically reading the document. This is a device equipped with a scanning function for storing data, a facsimile function, and the like.

複合機10は、当該複合機10の動作を統括的に制御するCPU(Central Processing Unit)11を有している。CPU11にはバスを通じてROM(Read Only Memory)12と、RAM(Random Access Memory)13と、画像読取部14と、プリンタ部15と、画像処理部16と、不揮発メモリ17と、ファクシミリ通信部18と、ネットワーク通信部19と、認証部21と、操作表示部30とが接続されている。   The multifunction machine 10 has a CPU (Central Processing Unit) 11 that controls the operation of the multifunction machine 10 in an integrated manner. The CPU 11 has a ROM (Read Only Memory) 12, a RAM (Random Access Memory) 13, an image reading unit 14, a printer unit 15, an image processing unit 16, a nonvolatile memory 17, and a facsimile communication unit 18 through a bus. The network communication unit 19, the authentication unit 21, and the operation display unit 30 are connected.

CPU11は、OS(Operating System)プログラムをベースとし、その上で、ミドルウェアやアプリケーションプログラムなどを実行する。また、CPU11は、本発明に係る操作表示装置としての操作表示部30の動作を制御する機能も果たす。   The CPU 11 is based on an OS (Operating System) program, and executes middleware, application programs, and the like. The CPU 11 also functions to control the operation of the operation display unit 30 as the operation display device according to the present invention.

ROM12には、各種のプログラムが格納されており、これらのプログラムに従ってCPU11が各種処理を実行することで複合機10の各機能が実現される。   Various programs are stored in the ROM 12, and each function of the multifunction machine 10 is realized by the CPU 11 executing various processes according to these programs.

RAM13は、CPU11がプログラムに基づいて処理を実行する際に各種のデータを一時的に格納するワークメモリや画像データを格納する画像メモリなどとして使用される。   The RAM 13 is used as a work memory for temporarily storing various data when the CPU 11 executes processing based on a program, an image memory for storing image data, and the like.

画像読取部14は、原稿を光学的に読み取って画像データを取得する機能を果たす。画像読取部14は、例えば、原稿に光を照射する光源と、その反射光を受けて原稿を幅方向に1ライン分読み取るラインイメージセンサと、ライン単位の読取位置を原稿の長さ方向に順次移動させる移動ユニットと、原稿からの反射光をラインイメージセンサに導いて結像させるレンズやミラーなどからなる光学経路と、ラインイメージセンサの出力するアナログ画像信号をデジタルの画像データに変換する変換部などを備えて構成される。   The image reading unit 14 functions to optically read a document and acquire image data. The image reading unit 14 sequentially, for example, a light source that irradiates light on a document, a line image sensor that receives the reflected light and reads the document for one line in the width direction, and sequentially reads the reading position in line units in the length direction of the document. An optical path composed of a moving unit for moving, a lens, a mirror, and the like for guiding reflected light from the document to the line image sensor to form an image, and a conversion unit for converting an analog image signal output from the line image sensor into digital image data And so on.

プリンタ部15は、画像データに応じた画像を記録紙上に画像形成する機能を果たす。ここでは、記録紙の搬送装置と、感光体ドラムと、帯電装置と、レーザーユニットと、現像装置と、転写分離装置と、クリーニング装置と、定着装置とを有し、電子写真プロセスによって画像形成を行う、所謂、レーザープリンタのエンジン部として構成されている。画像形成は他の方式でもかまわない。   The printer unit 15 functions to form an image corresponding to the image data on a recording sheet. Here, it has a recording paper transport device, a photosensitive drum, a charging device, a laser unit, a developing device, a transfer separation device, a cleaning device, and a fixing device, and forms an image by an electrophotographic process. It is configured as a so-called laser printer engine unit. Other methods may be used for image formation.

画像処理部16は、画像の拡大縮小、回転などの処理のほか、印刷データをイメージデータに変換するラスタライズ処理、画像データの圧縮、伸張処理などを行う。   The image processing unit 16 performs processing such as image enlargement / reduction, rotation, rasterization processing for converting print data into image data, image data compression / decompression processing, and the like.

不揮発メモリ17は、電源をオフにしても記憶内容が破壊されないメモリ(フラッシュメモリ)であり、各種設定情報の保存などに使用される。不揮発メモリ17には、ユーザ認証するための認証情報や操作の種類の判定に使用される後述する判定領域の情報がユーザ毎に記憶される。   The nonvolatile memory 17 is a memory (flash memory) whose stored contents are not destroyed even when the power is turned off, and is used for storing various setting information. The non-volatile memory 17 stores authentication information for user authentication and information of a determination area, which will be described later, used for determining the type of operation for each user.

ファクシミリ通信部18は、ファクシミリ機能を備えた外部装置と公衆回線を通じて画像データを送受信する機能を果たす。   The facsimile communication unit 18 performs a function of transmitting / receiving image data to / from an external device having a facsimile function through a public line.

ネットワーク通信部19は、LAN(Local Area Network)などのネットワークを通じて端末装置やその他の外部装置との間でデータを通信する機能を果たす。   The network communication unit 19 performs a function of communicating data with a terminal device or other external devices through a network such as a LAN (Local Area Network).

認証部21は、複合機10を操作するユーザを特定するユーザ認証機能を果たす。認証方法は、ICカードなどのトークンデバイスを利用したユーザ認証、指紋などの生体情報を利用したユーザ認証など任意の個人認証方法でよい。   The authentication unit 21 performs a user authentication function that identifies a user who operates the multifunction machine 10. The authentication method may be any personal authentication method such as user authentication using a token device such as an IC card or user authentication using biometric information such as a fingerprint.

操作表示部30は、表示部31と、操作部32とを備えている。このうち操作部32は、スタートボタンなどのスイッチ部33とタッチパネル部34とを備えている。表示部31は、液晶ディスプレイ(LCD…Liquid Crystal Display)などで構成され、各種の操作画面、設定画面などを表示する機能を果たす。   The operation display unit 30 includes a display unit 31 and an operation unit 32. Among these, the operation unit 32 includes a switch unit 33 such as a start button and a touch panel unit 34. The display unit 31 is composed of a liquid crystal display (LCD) and the like, and has a function of displaying various operation screens, setting screens, and the like.

タッチパネル部34は、表示部31の表示面上に設けられている。ここでは抵抗膜式のタッチパネルを使用する。なお、静電容量式やその他の方式でもかまわない。タッチパネル部34は、タッチペンや指先などで表示面(実際には表示面上のタッチパネルであるが、表示面と表記する)が押下されたこと、および押下された位置を検出して、その検出結果を出力する。位置は表示部31の表示面上の所定の位置を原点とした座標情報で示される。   The touch panel unit 34 is provided on the display surface of the display unit 31. Here, a resistive film type touch panel is used. An electrostatic capacitance method or other methods may be used. The touch panel unit 34 detects that the display surface (actually it is a touch panel on the display surface but is expressed as a display surface) with a touch pen or a fingertip, and detects the pressed position, and the detection result. Is output. The position is indicated by coordinate information with a predetermined position on the display surface of the display unit 31 as the origin.

指先などで表示面に触れる行為をタッチ、指先などを表示面から離す行為をリリースと呼ぶことにする。また、以後、指先で表示面に触れるものとして説明する。   The action of touching the display surface with a fingertip or the like is referred to as touch, and the action of moving the fingertip or the like away from the display surface is referred to as release. In the following description, it is assumed that the fingertip touches the display surface.

複合機10の操作表示部30は、タッチパネル部34への操作として、選択操作、フリック操作、ドラッグ操作など複数種類の操作を受け付ける。   The operation display unit 30 of the multifunction machine 10 accepts a plurality of types of operations such as a selection operation, a flick operation, and a drag operation as operations on the touch panel unit 34.

選択(セレクト)操作は、指先で表示面にタッチした後、そのタッチした箇所から指先を移動させずに、もしくはほとんど移動させずに表示面からリリースする動作である。フリック操作は、指先などで表示面をタッチした後、その指を払うように移動させて表示面からリリースする操作である。ドラッグ操作は、指先などで表示面をタッチした後、タッチした状態のまま指先を目的の場所まで移動させ、移動をほぼ停止させた状態で表示面から指先をリリースする動作である。   The selection operation is an operation of releasing from the display surface without touching or moving the fingertip from the touched position after touching the display surface with the fingertip. The flick operation is an operation of touching the display surface with a fingertip or the like and then moving the finger so as to pay off and releasing from the display surface. The drag operation is an operation in which, after touching the display surface with a fingertip or the like, the fingertip is moved to a target location while being touched, and the fingertip is released from the display surface with the movement substantially stopped.

複合機10の操作表示部30は、ユーザから何らかの操作を受けたとき、その操作の種類を判定する。判定対象とする操作の種類には、前述した、セレクト操作、フリック操作、ドラッグ操作などがある。また、装置の判定した操作の種類とユーザの意図した操作の種類との食い違いが生じやすい操作、たとえば、セレクト操作であるかフリック操作であるかが紛らわしい操作を受けたとき、判定の難しい操作を受けたことを表示し、装置側で一方的に操作の種類を決定しないようになっている。   When receiving an operation from the user, the operation display unit 30 of the multifunction machine 10 determines the type of operation. The types of operations to be determined include the select operation, flick operation, and drag operation described above. Also, when an operation that tends to cause a discrepancy between the type of operation determined by the device and the type of operation intended by the user, such as a select operation or a flick operation, is received, an operation that is difficult to determine The received information is displayed, and the type of operation is not unilaterally determined on the device side.

操作の種類の判定方法について説明する。   A method for determining the type of operation will be described.

(第1方法)
第1方法は、タッチからリリースまでの指の移動距離を指標として操作の種類を判定する。図2は、第1方法により選択(セレクト)操作とフリック操作とを判定する場合の各判定領域を例示している。図2のチャートの横軸はタッチからリリースまでの移動距離を示す。
(First method)
In the first method, the type of operation is determined using the movement distance of the finger from touch to release as an index. FIG. 2 exemplifies each determination area when a selection operation and a flick operation are determined by the first method. The horizontal axis of the chart in FIG. 2 indicates the moving distance from touch to release.

移動距離が第1閾値L1未満の領域はセレクト操作と判定するセレクト判定領域41、移動距離が第2閾値L2以上の領域はフリック操作と判定するフリック判定領域42、移動距離が第1閾値L1以上かつ第2閾値L2未満の領域(図中、斜線を施した領域)はセレクト操作とフリック操作との判定が難しい判定困難領域43に設定されている。すなわち、セレクト判定領域41とフリック判定領域42との間の領域が判定困難領域43となっている。   A selection determination area 41 for determining that the movement distance is less than the first threshold L1 is a selection operation, a flick determination area 42 for determining that a movement distance is the second threshold L2 or more is a flick operation, and a movement distance is the first threshold L1 or more. In addition, a region less than the second threshold L2 (a hatched region in the figure) is set as a difficult-to-determine region 43 where it is difficult to determine a selection operation and a flick operation. That is, the region between the select determination region 41 and the flick determination region 42 is a difficult determination region 43.

移動距離は、タッチが検出された位置の座標と、リリースが検出された位置の座標とからそれらを結ぶ直線距離として求める。なお、タッチからリリースまでの間の指の位置を追跡しその軌跡の長さを移動距離として求めてもよい。また、移動距離は、スクロール表示する方向における距離として求めてもよい。たとえば、上下方向にスクロール表示可能な表示エリアで受けた操作については、上下方向の成分における移動距離を求める。   The movement distance is obtained as a linear distance connecting the coordinates of the position where the touch is detected and the coordinates of the position where the release is detected. Note that the position of the finger from the touch to the release may be tracked, and the length of the trajectory may be obtained as the movement distance. Further, the movement distance may be obtained as a distance in the scroll display direction. For example, for the operation received in the display area that can be scrolled in the vertical direction, the movement distance in the vertical component is obtained.

(第2方法)
第2方法は、タッチからリリースまでの指の移動距離とタッチからリリースまでの時間(ON時間とする)の2要素の組み合わせを指標として操作の種類を判定する。移動距離は第1の方法と同じ方法で求める。図3は、第2方法によりセレクト操作と長押しのセレクト操作とフリック操作とドラッグ操作とを判定対象とする場合の各判定領域を例示している。図3のチャートの横軸は移動距離を、縦軸はON時間を示す。
(Second method)
In the second method, the type of operation is determined by using as an index a combination of two elements of a finger movement distance from touch to release and a time from touch to release (referred to as ON time). The moving distance is obtained by the same method as the first method. FIG. 3 exemplifies each determination area when a selection operation, a long-press selection operation, a flick operation, and a drag operation are determined by the second method. The horizontal axis of the chart in FIG. 3 indicates the movement distance, and the vertical axis indicates the ON time.

移動距離が第1閾値L1未満かつON時間がT1以上でT2未満の領域はセレクト判定領域41、移動距離が第1閾値L1未満かつON時間がT2以上の領域は長押しのセレクト操作と判定する長押しセレクト判定領域44になっている。   An area where the movement distance is less than the first threshold L1 and the ON time is T1 or more and less than T2 is determined as the selection determination area 41, and an area where the movement distance is less than the first threshold L1 and the ON time is T2 or more is determined as a long press selection operation. This is a long press select determination area 44.

移動距離が第2閾値L2以上かつON時間がT1以上T3未満の領域はフリック判定領域42、移動距離が第2閾値L2以上かつON時間がT4以上の領域はドラッグ操作と判定するドラッグ判定領域45になっている。   A region where the moving distance is equal to or greater than the second threshold L2 and the ON time is equal to or greater than T1 and less than T3 is a flick determination region 42, and a region where the movement distance is equal to or greater than the second threshold L2 and the ON time is equal to or greater than T4 It has become.

上記4つの判定領域(セレクト判定領域41、長押しセレクト判定領域44、フリック判定領域42、ドラッグ判定領域45)以外の領域(図中、斜線を施した領域)は操作の種類を明確に特定できない判定困難領域43に設定されている。   The type of operation cannot be clearly specified for areas other than the above four determination areas (select determination area 41, long press selection determination area 44, flick determination area 42, drag determination area 45). It is set in the difficult determination area 43.

なお、図3の例では、セレクト判定領域41と長押しセレクト判定領域44との間に判定困難領域43を設定していないが、ユーザによって長押しに対する時間の感覚が異なることが想定される場合は、セレクト判定領域41と長押しセレクト判定領域44との間に判定困難領域43を設定してもよい。各領域の範囲は、たとえば、管理者等により任意に設定変更可能になっている。   In the example of FIG. 3, the determination difficulty region 43 is not set between the selection determination region 41 and the long press selection determination region 44, but it is assumed that the sense of time for the long press differs depending on the user. May determine a difficult-to-determine area 43 between the select determination area 41 and the long-press selection determination area 44. The range of each area can be arbitrarily changed by, for example, an administrator.

図4は、複合機10が操作表示部30の表示部31に表示する操作画面の一例を示している。この画面は、処理対象のファイルを選択するためのファイル選択画面50である。ファイル選択画面50には、リスト表示領域51が設けてある。リスト表示領域51には選択候補のファイル名の一覧(リスト)が表示される。   FIG. 4 shows an example of an operation screen displayed on the display unit 31 of the operation display unit 30 by the multifunction machine 10. This screen is a file selection screen 50 for selecting a file to be processed. A list display area 51 is provided on the file selection screen 50. The list display area 51 displays a list of file names of selection candidates.

リスト表示領域51に表示可能なファイル名の数は限られており、この数より選択候補のファイル数が多い場合は、リスト表示領域51に表示されるリストをスクロールさせて表示することが可能になる。   The number of file names that can be displayed in the list display area 51 is limited, and when the number of selection candidates is larger than this number, the list displayed in the list display area 51 can be scrolled and displayed. Become.

スクロール可能な状態では、リスト表示領域51の右端にスクロールバー52が表示される。スクロールバー52の途中にはノブ53が、両端には矢印54が表示される。ノブ53は、リスト表示領域51に表示されている部分の、リスト全体に占める割合や位置を表す。矢印54は、ここをクリックするとその矢印の示す方向へリストが一定量スクロールするように制御される操作ボタンである。   In a scrollable state, a scroll bar 52 is displayed at the right end of the list display area 51. A knob 53 is displayed in the middle of the scroll bar 52, and arrows 54 are displayed at both ends. The knob 53 represents the ratio and position of the portion displayed in the list display area 51 in the entire list. An arrow 54 is an operation button that is controlled so that when the user clicks here, the list is scrolled by a certain amount in the direction indicated by the arrow.

リスト表示領域51に表示されたリストをスクロールさせる方法は、スクロールバー52のノブ53や矢印54を操作する方法のほか、リスト表示領域51内でフリック操作を行う方法がある。   As a method of scrolling the list displayed in the list display area 51, there is a method of performing a flick operation in the list display area 51 in addition to a method of operating the knob 53 or the arrow 54 of the scroll bar 52.

図4のファイル選択画面50のリスト表示領域51では表示されるリストを上下にスクロール表示させることが可能になっている。ユーザは上下いずれかの方向へフリック操作することでリスト表示領域51内のリストをスクロールさせることができる。   In the list display area 51 of the file selection screen 50 of FIG. 4, the displayed list can be scrolled up and down. The user can scroll the list in the list display area 51 by flicking up or down.

また、リスト表示領域51に表示されているリスト内のいずれかのファイル名の表示箇所に対してセレクト操作を行うことで、そのファイル名のファイルが処理対象に選択される。   Further, by performing a select operation on the display location of any file name in the list displayed in the list display area 51, the file with that file name is selected as a processing target.

図5は、図4に示すファイル選択画面50のリスト表示領域51においてフリック操作を行う様子を示している。図5では、下から上に向かってフリック操作を行った例を示している。   FIG. 5 shows a state where a flick operation is performed in the list display area 51 of the file selection screen 50 shown in FIG. FIG. 5 shows an example in which a flick operation is performed from the bottom to the top.

次に、図4、図5に示すファイル選択画面50のリスト表示領域51において操作の種類の判定が困難な操作を受けた場合の動作例1〜3を説明する。操作の種類の判定が困難な操作とは、操作の種類を判定するための所定の指標の値が判定困難領域43に入る操作である。   Next, operation examples 1 to 3 in the case where an operation that makes it difficult to determine the operation type in the list display area 51 of the file selection screen 50 shown in FIGS. 4 and 5 will be described. The operation whose operation type is difficult to determine is an operation in which the value of a predetermined index for determining the operation type enters the determination difficult region 43.

なお、ここでは、リスト表示領域51にて受け得る操作の種類は、フリック操作とセレクト操作のみとする。また、複合機10の使用開始時点で認証部21にてユーザ認証が行われ、操作するユーザが特定されるものとする。複合機10の操作表示部30は、図2や図3に示す領域の情報をユーザ毎に不揮発メモリ17に保持しており、認証部21にてユーザ認証されたユーザに対応付けて記憶されている領域の情報に基づいて、操作の種類を判定する。   Here, the types of operations that can be received in the list display area 51 are only flick operations and select operations. In addition, it is assumed that user authentication is performed by the authentication unit 21 at the time of starting use of the multifunction machine 10 and the user to be operated is specified. The operation display unit 30 of the multifunction machine 10 holds the information of the area shown in FIGS. 2 and 3 in the nonvolatile memory 17 for each user, and is stored in association with the user authenticated by the authentication unit 21. The type of operation is determined based on the information of the area that is present.

<動作例1>
操作の種類を判定できなかった旨を表示すると共に、操作の種類の選択をユーザから受け付ける。
<Operation example 1>
The fact that the type of operation could not be determined is displayed, and selection of the type of operation is accepted from the user.

図6は動作例1の場合の表示例を示している。複合機10の操作表示部30は、ファイル選択画面50のリスト表示領域51においてフリック操作であるかセレクト操作であるかの判定の難しい操作を受けると、ファイル選択画面50内に操作選択ウィンドウ61をポップアップ表示する。   FIG. 6 shows a display example in the case of the first operation example. When the operation display unit 30 of the MFP 10 receives an operation that is difficult to determine whether the operation is a flick operation or a select operation in the list display area 51 of the file selection screen 50, the operation selection window 61 is displayed in the file selection screen 50. Pop-up display.

操作選択ウィンドウ61には、操作の種類を判定できなかった旨、およびユーザの意図した操作の種類に対応する選択釦の押下を求める旨のメッセージ62が表示される。また、操作選択ウィンドウ61には、ユーザから操作の種類の選択を受けるための選択釦が表示される。ここでは、セレクト操作に対応したセレクト釦63と、フリック操作に対応したフリック釦64が表示される。   The operation selection window 61 displays a message 62 indicating that the type of operation could not be determined and requesting the user to press the selection button corresponding to the type of operation intended by the user. The operation selection window 61 displays a selection button for receiving a selection of an operation type from the user. Here, a select button 63 corresponding to the select operation and a flick button 64 corresponding to the flick operation are displayed.

ユーザから自分の行った操作に対応する選択釦63、64の押下操作を受けると、操作の種類を判定できなかった先ほどの操作は、押下された選択釦63、64に対応する操作であったとしてその操作に対応する処理を行う。たとえば、セレクト釦63が選択された場合、操作位置にあったファイル名のファイルを処理対象に設定する。フリック釦64が選択された場合はリストをスクロール表示する。   When the user presses the selection button 63 or 64 corresponding to the operation performed by the user, the previous operation for which the type of operation could not be determined was the operation corresponding to the pressed selection button 63 or 64. The processing corresponding to the operation is performed. For example, when the select button 63 is selected, the file having the file name at the operation position is set as the processing target. When the flick button 64 is selected, the list is scrolled.

また、認証されたユーザに対応付けて不揮発メモリ17に記憶されている領域の情報を変更する。すなわち、先ほど操作の種類を判定できなかった操作が、選択釦63、64によって指定された種類の操作に判定されるように、各領域の設定を変更する。   Further, the information of the area stored in the nonvolatile memory 17 is changed in association with the authenticated user. That is, the setting of each area is changed so that the operation whose operation type could not be determined earlier is determined as the operation of the type specified by the selection buttons 63 and 64.

たとえば、図7(a)に示すような領域の設定状態で、操作の種類を判定できなかった操作における指標値(この例では移動距離)がMであって、操作選択ウィンドウ61においてフリック釦64が選択された場合、同図(b)に示すように、指標値Mがフリック判定領域に含まれるように各領域の範囲を変更する。このとき、指標値Mからフリック判定領域42と判定困難領域43との境界までの間に、ある程度の余裕が生じるように各領域の範囲を変更することが望ましい。この例では、セレクト判定領域41と判定困難領域43との境界についても移動させたが、この境界は移動させなくてもかまわない。   For example, in the setting state of the region as shown in FIG. 7A, the index value (movement distance in this example) in the operation whose operation type could not be determined is M, and the flick button 64 in the operation selection window 61 is displayed. Is selected, the range of each region is changed so that the index value M is included in the flick determination region, as shown in FIG. At this time, it is desirable to change the range of each region so that a certain margin is generated between the index value M and the boundary between the flick determination region 42 and the difficult determination region 43. In this example, the boundary between the select determination area 41 and the difficult determination area 43 is also moved, but this boundary may not be moved.

<動作例2>
操作の種類を判定できなかった旨を表示すると共に、操作の学習モードに入る。
<Operation example 2>
A message indicating that the type of operation could not be determined is displayed, and an operation learning mode is entered.

図8は動作例2の場合の表示例を示している。複合機10はファイル選択画面50のリスト表示領域51においてフリック操作であるかセレクト操作であるかの判定の難しい操作を受けると、その操作に係る指標値を一時記憶すると共に、ファイル選択画面50内に操作学習ウィンドウ71をポップアップ表示する。   FIG. 8 shows a display example in the case of the operation example 2. When the multifunction device 10 receives an operation that is difficult to determine whether the operation is a flick operation or a select operation in the list display area 51 of the file selection screen 50, the MFP 10 temporarily stores an index value related to the operation and also stores the index value in the file selection screen 50. The operation learning window 71 is pop-up displayed.

操作学習ウィンドウ71には、操作の種類を判定できなかった旨、および操作の学習モードに入る旨を示すメッセージ72が表示される。また、操作学習ウィンドウ71には、学習対象の操作を受け付けるための操作入力欄73および、指定した種類の操作を操作入力欄73にて行うようにユーザに要求するメッセージ74が表示される。   The operation learning window 71 displays a message 72 indicating that the type of operation could not be determined and entering the operation learning mode. The operation learning window 71 also displays an operation input field 73 for accepting an operation to be learned and a message 74 that requests the user to perform a specified type of operation in the operation input field 73.

ユーザは、指定された種類の操作を操作入力欄73にて行い、OK釦75を押下する。複合機10のCPU11は、操作入力欄73にて受け付けた操作から該操作の指標値を求める。そして、この指標値が、指定した種類の操作の判定領域に入るように、認証されたユーザに対応付けて不揮発メモリ17に記憶されている領域の情報を変更する。   The user performs the specified type of operation in the operation input field 73 and presses the OK button 75. The CPU 11 of the multifunction machine 10 obtains an index value of the operation from the operation received in the operation input field 73. Then, the information of the area stored in the nonvolatile memory 17 is changed in association with the authenticated user so that the index value enters the determination area for the designated type of operation.

さらに、先ほど一時記憶しておいた、操作の種類を判定できなかったときの操作に対応する指標値を読み出し、この指標値がどの領域に属するかを、変更後の領域に基づいて判定し直し、その判定結果の示す操作に対応する処理を行う。   Furthermore, the index value corresponding to the operation when the type of operation could not be determined, which was temporarily stored earlier, is read out, and the area to which the index value belongs is re-determined based on the changed area. Then, processing corresponding to the operation indicated by the determination result is performed.

図8の例では、学習対象の操作としてフリック操作が指定(特定)されており、操作入力欄73にてユーザからフリック操作を受け付け、このフリック操作に対応する指標値(たとえば、移動距離)を求め、この指標値がフリック判定領域42に入るように当該ユーザに対応する領域を変更する。   In the example of FIG. 8, a flick operation is specified (specified) as an operation to be learned, and a flick operation is accepted from the user in the operation input field 73, and an index value (for example, a movement distance) corresponding to the flick operation is set. Then, the area corresponding to the user is changed so that the index value enters the flick determination area 42.

なお、学習する操作は、フリック操作のみでなく、セレクト操作とフリック操作の双方でもよく、それぞれ、操作の種類を特定した上でその操作をユーザから受け付ければよい。たとえば、1回目にフリック操作を行い、2回目にセレクト操作を行うように指示したメッセージを表示し、それぞれの操作を受け付けるようにしてもよい。   Note that the learning operation is not limited to the flick operation, but may be both a select operation and a flick operation. Each type of operation may be specified and received from the user. For example, a message instructing to perform a flick operation for the first time and a select operation for the second time may be displayed, and each operation may be accepted.

<動作例3>
操作の種類を判定できなかった旨およびもう一度操作を行う旨を報知して、再操作を受ける。
<Operation example 3>
Notify that the type of operation could not be determined and that the operation is to be performed again, and receive a re-operation.

図9は動作例3の場合の表示例を示している。複合機10はファイル選択画面50のリスト表示領域51においてフリック操作であるかセレクト操作であるかの判定の難しい操作を受けると、ファイル選択画面50内に再操作依頼ウィンドウ81をポップアップ表示する。   FIG. 9 shows a display example in the case of the operation example 3. When the multifunction device 10 receives an operation that is difficult to determine whether it is a flick operation or a select operation in the list display area 51 of the file selection screen 50, the multifunction device 10 pops up a re-operation request window 81 in the file selection screen 50.

再操作依頼ウィンドウ81には、操作の種類を判定できなかった旨、およびもう一度操作を行うように要求するメッセージ82およびOK釦83が表示される。   The re-operation request window 81 displays a message 82 and an OK button 83 requesting that the operation type cannot be determined, and to perform the operation again.

OK釦83が押下されると、複合機10は、判定の難しい操作を受ける前の状態に戻って、改めて操作を受け付ける。   When the OK button 83 is pressed, the multifunction machine 10 returns to the state before receiving the operation that is difficult to determine, and accepts the operation again.

図10は、操作の判定に係る複合機10の動作であって、動作例1または動作例2に対応する処理の流れを示している。複合機10は、ユーザによる使用の開始時にまずユーザ認証を行ってそのユーザを特定する(ステップS101)。ユーザ認証によって特定されたユーザに対応付けて不揮発メモリ17に記憶されている領域の情報を読み出し、これを、所定のメモリ領域にロードする(ステップS102)。操作中はこのメモリ領域に格納された領域の情報が参照される。   FIG. 10 shows the flow of processing corresponding to the operation example 1 or the operation example 2, which is an operation of the multifunction peripheral 10 related to the operation determination. The multifunction device 10 first performs user authentication at the start of use by the user to identify the user (step S101). Information on the area stored in the nonvolatile memory 17 in association with the user specified by the user authentication is read and loaded into a predetermined memory area (step S102). During operation, information on the area stored in this memory area is referred to.

その後、操作表示部30のタッチパネル部34にてユーザの指などによるタッチが検出されると(ステップS103;Yes)、タッチパネル部34から検出結果として出力されるそのタッチされた位置の座標を一時記憶する(ステップS104)。その後、リリースが検出されると(ステップS105;Yes)、タッチパネル部34から検出結果として出力されるそのリリースされた位置の座標を検出する(ステップS106)。   Thereafter, when a touch with a user's finger or the like is detected on the touch panel unit 34 of the operation display unit 30 (step S103; Yes), the coordinates of the touched position output as a detection result from the touch panel unit 34 are temporarily stored. (Step S104). Thereafter, when a release is detected (step S105; Yes), the coordinates of the released position output as a detection result from the touch panel unit 34 are detected (step S106).

タッチされた位置の座標とリリースされた位置の座標とからタッチからリリースまでの指の移動距離を、操作の種類を判別するための指標値として求める(ステップS107)。そして、ステップS102でロードした領域の情報を参照して、この移動距離の含まれる領域を判定する(ステップS108)。ステップS106で求めた移動距離がフリック判定領域42に含まれる場合は(ステップS108;フリック領域)、フリック操作に対応する処理を行って(ステップS109)本処理を終了する。   The movement distance of the finger from the touch to the release based on the coordinates of the touched position and the released position is obtained as an index value for determining the type of operation (step S107). Then, with reference to the information of the area loaded in step S102, the area including this movement distance is determined (step S108). When the movement distance obtained in step S106 is included in the flick determination area 42 (step S108; flick area), a process corresponding to the flick operation is performed (step S109), and this process is terminated.

ステップS106で求めた移動距離がセレクト判定領域41に含まれる場合は(ステップS108;セレクト領域)、セレクト操作に対応する処理を行って(ステップS110)本処理を終了する。   When the movement distance obtained in step S106 is included in the selection determination area 41 (step S108; selection area), a process corresponding to the selection operation is performed (step S110), and this process ends.

ステップS106で求めた移動距離が判定困難領域43に含まれる場合は(ステップS108;判定困難領域)、動作例1、または動作例2で示した操作選択ウィンドウ61もしくは操作学習ウィンドウ71を表示し、今回受けた操作が判定困難であった旨を報知する(ステップS111)。そして、動作例1で示したように操作の種類の指定をセレクト釦63またはフリック釦64で受け、もしくは動作例2で示したように学習モードに入って操作を受けて、当該ユーザの領域の情報を更新する。ここでは、操作中に参照される領域の情報および不揮発メモリ17に格納されている当該ユーザに対応する領域の情報の双方を更新する。そして、判定困難であった操作の種類を決定し、その操作に対応した処理を行って(ステップS112)、本処理を終了する。   When the movement distance obtained in step S106 is included in the difficult-to-determine region 43 (step S108; difficult-to-determine region), the operation selection window 61 or the operation learning window 71 shown in the operation example 1 or the operation example 2 is displayed. The fact that the operation received this time was difficult to determine is notified (step S111). Then, the operation type designation is received by the select button 63 or the flick button 64 as shown in the operation example 1, or the learning mode is entered and the operation is received as shown in the operation example 2, so that Update information. Here, both the information on the area referred to during the operation and the information on the area corresponding to the user stored in the nonvolatile memory 17 are updated. Then, the type of operation that has been difficult to determine is determined, a process corresponding to the operation is performed (step S112), and this process ends.

なお、次の操作をさらに受ける場合は、ステップS109、S110、S112の後、ステップS103に戻って処理を継続する。   In addition, when receiving the next operation further, after steps S109, S110, and S112, the process returns to step S103 to continue the process.

図11は、操作の判定に係る複合機10の動作であって動作例3に対応する処理の流れを示している。図10の処理と同一部分には同一のステップ番号を付してあり、それらの説明は適宜省略する。   FIG. 11 shows a flow of processing corresponding to the operation example 3, which is an operation of the multifunction peripheral 10 related to the determination of the operation. The same steps as those in FIG. 10 are denoted by the same step numbers, and description thereof will be omitted as appropriate.

ステップS101からステップS110までの処理は図10と同一である。ステップS106で求めた移動距離が判定困難領域43に含まれる場合は(ステップS108;判定困難領域)、動作例3で示した再操作依頼ウィンドウ81を表示し、今回受けた操作が判定困難であった旨を報知する(ステップS121)。そして、ステップS103に戻って処理を継続する。これにより、ユーザは再操作を行う。   The processing from step S101 to step S110 is the same as that in FIG. When the movement distance obtained in step S106 is included in the difficult-to-determine area 43 (step S108; difficult-to-determine area), the re-operation request window 81 shown in the operation example 3 is displayed, and the operation received this time is difficult to determine. A notification is made (step S121). And it returns to step S103 and continues a process. Thereby, the user performs a re-operation.

以上のように、タッチパネル部34の検出情報から該タッチパネル部34で受けた操作の種類を判定するための所定の指標値を求め、該指標値がセレクト判定領域41にある場合はセレクト操作を受けたと判定し、指標値がフリック判定領域42にある場合はフリック操作を受けたと判定し、指標値がセレクト判定領域41とフリック判定領域42との間の判定困難領域43にある場合は操作の種類を判定できなかったことを表示部31に表示してユーザに報知するので、どのような操作が紛らわしい操作であるかをユーザに学習させ、的確な操作を行うようにユーザを促すことができる。   As described above, a predetermined index value for determining the type of operation received by the touch panel unit 34 is obtained from the detection information of the touch panel unit 34. If the index value is in the selection determination area 41, the selection operation is received. If the index value is in the flick determination area 42, it is determined that a flick operation has been received. If the index value is in the determination difficulty area 43 between the select determination area 41 and the flick determination area 42, the type of operation is determined. Is displayed on the display unit 31 to notify the user, so that the user can learn what operation is confusing and can prompt the user to perform an accurate operation.

また、判定が困難な場合に、その操作の種類をユーザに指定させたり、ユーザの操作の特徴を学習したりするので、ユーザの操作の特徴を反映した判定が行える領域に修正することができ、その後は、ユーザの意図したように操作の種類を判定することができる。   In addition, when it is difficult to make a decision, the user can specify the type of operation or learn the characteristics of the user's operation. Therefore, the area can be corrected to reflect the characteristics of the user's operation. Thereafter, the type of operation can be determined as intended by the user.

また、ユーザ毎にそのユーザに対応した領域を使用して判定し、またその領域を更新するので、ユーザ毎に操作の癖が様々であっても、それぞれのユーザから受ける操作の種類を的確に判定することができる。   In addition, since the determination is made for each user using the area corresponding to the user and the area is updated, the type of operation received from each user can be accurately determined even if the operation habits vary for each user. Can be determined.

以上、本発明の実施の形態を図面によって説明してきたが、具体的な構成は実施の形態に示したものに限られるものではなく、本発明の要旨を逸脱しない範囲における変更や追加があっても本発明に含まれる。   The embodiment of the present invention has been described with reference to the drawings. However, the specific configuration is not limited to that shown in the embodiment, and there are changes and additions within the scope of the present invention. Are also included in the present invention.

実施の形態では、複合機10に設けられた操作表示部30を例に説明したが、本発明に係る操作表示装置は、他の装置に設けられてもよく、また、装置本体と別体の操作表示装置として構成されてもよい。   In the embodiment, the operation display unit 30 provided in the multifunction machine 10 has been described as an example. However, the operation display device according to the present invention may be provided in another device, and may be provided separately from the device main body. It may be configured as an operation display device.

実施の形態では、操作の種類を判定するための指標として、移動距離、もしくは移動距離とON時間との組み合わせを用いる場合を示したが、指標はこれに限定されるものではない。たとえば、移動距離に、移動の加速度、ON時圧力などを組み合わせたものを指標として操作の種類を判定してもよい。   In the embodiment, the case where the movement distance or the combination of the movement distance and the ON time is used as an index for determining the type of operation is shown, but the index is not limited to this. For example, the type of operation may be determined using as an index a combination of the movement distance, the acceleration of movement, the ON pressure, and the like.

実施の形態では、セレクト操作、フリック操作等を判定対象の操作としたが、タッチパネル部に対してユーザが行う操作であれば、これらに限定されるものではない。たとえば、第1操作は円を描く操作とし、第2操作は四角形を描く操作としてもよい。この場合、これらを識別するための所定の指標(角らしき部分の有無や規制の直線性などを数値化した指標)を設定し、この指標の値に対して円であると判定する領域、四角であると判定する領域、これらの間の判定困難領域とを設定する、といった態様でもかまわない。   In the embodiment, the selection operation, the flick operation, and the like are operations to be determined, but the operation is not limited to these as long as the operation is performed by the user on the touch panel unit. For example, the first operation may be an operation for drawing a circle, and the second operation may be an operation for drawing a rectangle. In this case, a predetermined index for identifying these is set (an index in which the presence or absence of a corner-like portion or the linearity of regulation is quantified), and an area, a square, or the like determined to be a circle with respect to the value of this index It is also possible to set an area for determining that the area is difficult and a difficult-to-determine area between them.

10…複合機
11…CPU
12…ROM
13…RAM
14…画像読取部
15…プリンタ部
16…画像処理部
17…不揮発メモリ
18…ファクシミリ通信部
19…ネットワーク通信部
21…認証部
30…操作表示部
31…表示部
32…操作部
33…スイッチ部
34…タッチパネル部
41…セレクト判定領域
42…フリック判定領域
43…判定困難領域
44…長押しセレクト判定領域
45…ドラッグ判定領域
50…ファイル選択画面
51…リスト表示領域
52…スクロールバー
53…ノブ
54…矢印
61…操作選択ウィンドウ
62…メッセージ
63…セレクト釦
64…フリック釦
71…操作学習ウィンドウ
72…メッセージ
73…操作入力欄
74…メッセージ
75…OK釦
81…再操作依頼ウィンドウ
82…メッセージ
83…OK釦
L1…第1閾値
L2…第2閾値
T1〜T4…ON時間
M…指標値
10 ... Machine 11 ... CPU
12 ... ROM
13 ... RAM
DESCRIPTION OF SYMBOLS 14 ... Image reading part 15 ... Printer part 16 ... Image processing part 17 ... Non-volatile memory 18 ... Facsimile communication part 19 ... Network communication part 21 ... Authentication part 30 ... Operation display part 31 ... Display part 32 ... Operation part 33 ... Switch part 34 ... Touch panel section 41 ... Select determination area 42 ... Flick determination area 43 ... Determination difficult area 44 ... Long press selection determination area 45 ... Drag determination area 50 ... File selection screen 51 ... List display area 52 ... Scroll bar 53 ... Knob 54 ... Arrow 61 ... Operation selection window 62 ... Message 63 ... Select button 64 ... Flick button 71 ... Operation learning window 72 ... Message 73 ... Operation input field 74 ... Message 75 ... OK button 81 ... Re-operation request window 82 ... Message 83 ... OK button L1 ... 1st threshold value L2 ... 2nd threshold value T1-T ... ON time M ... the index value

Claims (7)

タッチの有無およびタッチされている位置を検出するタッチパネル部と、
表示部と、
前記タッチパネル部の検出情報から前記タッチパネル部が受けた操作の種類を判定するための所定の指標に係る値を求め、前記値が第1の領域にある場合は第1操作を受けたと判定し、前記値が第2の領域にある場合は第2操作を受けたと判定し、前記値が前記第1領域と前記第2領域との間の第3の領域にある場合は操作の種類を判定できなかったことを前記表示部に表示する判定部と、
を有する
ことを特徴とする操作表示装置。
A touch panel unit for detecting presence / absence of touch and a touched position;
A display unit;
A value related to a predetermined index for determining the type of operation received by the touch panel unit from the detection information of the touch panel unit is obtained, and when the value is in the first region, it is determined that the first operation has been received, When the value is in the second area, it can be determined that the second operation has been received, and when the value is in the third area between the first area and the second area, the type of operation can be determined. A determination unit for displaying on the display unit that there was no,
An operation display device characterized by comprising:
前記判定部は、前記値が前記第3の領域にある場合は、操作の種類の選択をユーザから受け付け、前記値が、前記選択された種類の操作に対応する領域に入るように領域の範囲を変更する
ことを特徴とする請求項1に記載の操作表示装置。
When the value is in the third area, the determination unit receives a selection of an operation type from the user, and the range of the area is set so that the value falls in an area corresponding to the selected type of operation. The operation display device according to claim 1, wherein the operation display device is changed.
前記判定部は、前記値が前記第3の領域にある場合は、前記第1の操作および第2の操作の少なくとも一方の操作を、操作の種類を特定した上で受け付け、その操作における前記指標の値を求め、該値が前記特定した種類の操作に対応する領域に入るように領域の範囲を変更する
ことを特徴とする請求項1に記載の操作表示装置。
When the value is in the third region, the determination unit receives at least one of the first operation and the second operation after specifying the type of operation, and the index in the operation The operation display device according to claim 1, wherein the range of the region is changed so that the value of the region falls within the region corresponding to the specified type of operation.
前記判定部は、前記値が前記第3の領域にある場合は、再操作の要求を前記表示部に表示する
ことを特徴とする請求項1に記載の操作表示装置。
The operation display device according to claim 1, wherein the determination unit displays a request for re-operation on the display unit when the value is in the third region.
操作するユーザを認証するユーザ認証部と、
前記第1から第3の領域を示す領域情報をユーザ別に記憶する記憶部と、
をさらに備え、
前記判定部は、前記ユーザ認証部で認証されたユーザに対応付けて前記記憶部に記憶されている前記領域情報を用いて、前記認証されたユーザから受ける操作の種類を判定する
ことを特徴とする請求項1乃至4のいずれか1項に記載の操作表示装置。
A user authentication unit for authenticating a user to be operated;
A storage unit that stores area information indicating the first to third areas for each user;
Further comprising
The determination unit determines the type of operation received from the authenticated user using the area information stored in the storage unit in association with the user authenticated by the user authentication unit. The operation display device according to any one of claims 1 to 4.
第1の操作はフリック操作であり、第2の操作はセレクト操作である
ことを特徴とする請求項1乃至5のいずれか1項に記載の操作表示装置。
The operation display device according to any one of claims 1 to 5, wherein the first operation is a flick operation and the second operation is a select operation.
前記指標は、タッチからリリースまでの移動距離、もしくは、タッチからリリースまでの移動距離と時間の長さとの組み合わせである
ことを特徴とする請求項6に記載の操作表示装置。
The operation display device according to claim 6, wherein the index is a movement distance from touch to release, or a combination of a movement distance from touch to release and a length of time.
JP2012068693A 2012-03-26 2012-03-26 Operation display device Active JP5945926B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012068693A JP5945926B2 (en) 2012-03-26 2012-03-26 Operation display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012068693A JP5945926B2 (en) 2012-03-26 2012-03-26 Operation display device

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2016000064A Division JP6179785B2 (en) 2016-01-04 2016-01-04 Operation display program

Publications (2)

Publication Number Publication Date
JP2013200712A true JP2013200712A (en) 2013-10-03
JP5945926B2 JP5945926B2 (en) 2016-07-05

Family

ID=49520908

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012068693A Active JP5945926B2 (en) 2012-03-26 2012-03-26 Operation display device

Country Status (1)

Country Link
JP (1) JP5945926B2 (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015063901A1 (en) * 2013-10-30 2015-05-07 株式会社東芝 Electronic device, operation control method, and program
JP2015114947A (en) * 2013-12-13 2015-06-22 シャープ株式会社 User interface-related information learning device, learning method of user interface-related information learning device, and program for learning
JP2016502723A (en) * 2013-11-05 2016-01-28 小米科技有限▲責▼任公司Xiaomi Inc. Method of controlling terminal with earphone cable, apparatus, device, program and recording medium for controlling terminal with earphone cable
JP2016122354A (en) * 2014-12-25 2016-07-07 セイコーソリューションズ株式会社 Numerical value input device, numerical value input method, and numerical value input program
JP2018028933A (en) * 2017-10-19 2018-02-22 華為技術有限公司Huawei Technologies Co.,Ltd. Method, device, and electronic device for displaying application interface
JP2020009372A (en) * 2018-07-12 2020-01-16 キヤノン株式会社 Image processing apparatus, control method of image processing apparatus and program
US11294560B2 (en) 2014-06-20 2022-04-05 Huawei Technologies Co., Ltd. Method and apparatus for changing the ratio between interfaces

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002189567A (en) * 2000-11-10 2002-07-05 Microsoft Corp Highlevel active pen matrix
US20030004714A1 (en) * 1999-10-28 2003-01-02 Dimitri Kanevsky System and method for resolving decoding ambiguity via dialog
JP2004355426A (en) * 2003-05-30 2004-12-16 Hitachi Ltd Software for enhancing operability of touch panel and terminal
US20040263487A1 (en) * 2003-06-30 2004-12-30 Eddy Mayoraz Application-independent text entry for touch-sensitive display
US20050251746A1 (en) * 2004-05-04 2005-11-10 International Business Machines Corporation Method and program product for resolving ambiguities through fading marks in a user interface
JP2007093967A (en) * 2005-09-28 2007-04-12 Fujifilm Corp Photographing apparatus
JP2009151691A (en) * 2007-12-21 2009-07-09 Sony Corp Information processor, and touch operation recognition method
JP2010113608A (en) * 2008-11-07 2010-05-20 Sharp Corp Operation reception device and computer program
JP2011134212A (en) * 2009-12-25 2011-07-07 Canon Inc Input device, control method of input device, program, and storage medium
JP2011138457A (en) * 2010-01-04 2011-07-14 Sony Corp Manipulation direction judgment device, remote manipulation system, manipulation direction judgment method and program

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030004714A1 (en) * 1999-10-28 2003-01-02 Dimitri Kanevsky System and method for resolving decoding ambiguity via dialog
JP2002189567A (en) * 2000-11-10 2002-07-05 Microsoft Corp Highlevel active pen matrix
JP2004355426A (en) * 2003-05-30 2004-12-16 Hitachi Ltd Software for enhancing operability of touch panel and terminal
US20040263487A1 (en) * 2003-06-30 2004-12-30 Eddy Mayoraz Application-independent text entry for touch-sensitive display
US20050251746A1 (en) * 2004-05-04 2005-11-10 International Business Machines Corporation Method and program product for resolving ambiguities through fading marks in a user interface
JP2007093967A (en) * 2005-09-28 2007-04-12 Fujifilm Corp Photographing apparatus
JP2009151691A (en) * 2007-12-21 2009-07-09 Sony Corp Information processor, and touch operation recognition method
JP2010113608A (en) * 2008-11-07 2010-05-20 Sharp Corp Operation reception device and computer program
JP2011134212A (en) * 2009-12-25 2011-07-07 Canon Inc Input device, control method of input device, program, and storage medium
JP2011138457A (en) * 2010-01-04 2011-07-14 Sony Corp Manipulation direction judgment device, remote manipulation system, manipulation direction judgment method and program

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015063901A1 (en) * 2013-10-30 2015-05-07 株式会社東芝 Electronic device, operation control method, and program
JPWO2015063901A1 (en) * 2013-10-30 2017-03-09 株式会社東芝 Electronic device, operation control method and program
JP2016502723A (en) * 2013-11-05 2016-01-28 小米科技有限▲責▼任公司Xiaomi Inc. Method of controlling terminal with earphone cable, apparatus, device, program and recording medium for controlling terminal with earphone cable
US9703386B2 (en) 2013-11-05 2017-07-11 Xiaomi Inc. Method for controlling terminal device by using headset wire and the terminal device thereof
JP2015114947A (en) * 2013-12-13 2015-06-22 シャープ株式会社 User interface-related information learning device, learning method of user interface-related information learning device, and program for learning
US11294560B2 (en) 2014-06-20 2022-04-05 Huawei Technologies Co., Ltd. Method and apparatus for changing the ratio between interfaces
JP2016122354A (en) * 2014-12-25 2016-07-07 セイコーソリューションズ株式会社 Numerical value input device, numerical value input method, and numerical value input program
JP2018028933A (en) * 2017-10-19 2018-02-22 華為技術有限公司Huawei Technologies Co.,Ltd. Method, device, and electronic device for displaying application interface
JP2020009372A (en) * 2018-07-12 2020-01-16 キヤノン株式会社 Image processing apparatus, control method of image processing apparatus and program
JP7195794B2 (en) 2018-07-12 2022-12-26 キヤノン株式会社 IMAGE PROCESSING DEVICE, CONTROL METHOD FOR IMAGE PROCESSING DEVICE, AND PROGRAM

Also Published As

Publication number Publication date
JP5945926B2 (en) 2016-07-05

Similar Documents

Publication Publication Date Title
JP5945926B2 (en) Operation display device
JP5761526B2 (en) Operation display device
US10277757B2 (en) Electronic device and image forming apparatus
US9001368B2 (en) Image processing apparatus, operation standardization method, and non-transitory computer-readable recording medium encoded with operation standardization program with an application program that supports both a touch panel capable of detecting only one position and a touch panel capable of detecting a plurality of positions simultaneously
JP5991509B2 (en) Information processing apparatus and program
US9648181B2 (en) Touch panel device and image processing apparatus
JP5153173B2 (en) Display device and image forming apparatus having the same
EP2833251B1 (en) Numerical value inputting device and electronic equipment
US10681229B2 (en) Image processing apparatus for controlling display of a condition when the displayed condition is obscured by a hand of a user and method and non-transitory recording medium storing computer readable program
US9069464B2 (en) Data processing apparatus, operation accepting method, and non-transitory computer-readable recording medium encoded with browsing program
JP6024319B2 (en) Control device, image forming apparatus, control program, and program
US8643862B2 (en) Determining between a handwriting and a soft key input mode for an image forming apparatus
JP5831715B2 (en) Operating device and image processing device
JP6179785B2 (en) Operation display program
JP6304071B2 (en) Image processing device
JP6217508B2 (en) Display input device and display input control program
JP2015028733A (en) Operation device and image processing apparatus
JP5991558B2 (en) Operation display device and program
JP6213581B2 (en) Information processing apparatus and control program for information processing apparatus
JP6014558B2 (en) Display device
JP6221622B2 (en) Touch panel device and image forming apparatus
US20220303402A1 (en) Information processing apparatus and non-transitory computer readable medium storing program
JP2011175516A (en) Input device and input control program
JP6809209B2 (en) Display device and program
JP6190925B2 (en) Display device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140908

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150421

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150422

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150619

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20151104

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160506

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160519

R150 Certificate of patent or registration of utility model

Ref document number: 5945926

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150