JP2010067178A - Input device for input of multiple points, and input method by input of multiple points - Google Patents

Input device for input of multiple points, and input method by input of multiple points Download PDF

Info

Publication number
JP2010067178A
JP2010067178A JP2008235133A JP2008235133A JP2010067178A JP 2010067178 A JP2010067178 A JP 2010067178A JP 2008235133 A JP2008235133 A JP 2008235133A JP 2008235133 A JP2008235133 A JP 2008235133A JP 2010067178 A JP2010067178 A JP 2010067178A
Authority
JP
Japan
Prior art keywords
sensing point
input
point signal
display
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2008235133A
Other languages
Japanese (ja)
Inventor
Toshiharu Yamanaka
俊治 山中
Hisato Ogata
壽人 緒方
Takayuki Yoshihara
隆幸 吉原
Ryuji Nagata
隆二 永田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Docomo Inc
Leading Edge Design Corp
Original Assignee
NTT Docomo Inc
Leading Edge Design Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NTT Docomo Inc, Leading Edge Design Corp filed Critical NTT Docomo Inc
Priority to JP2008235133A priority Critical patent/JP2010067178A/en
Publication of JP2010067178A publication Critical patent/JP2010067178A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide multiple point sensing input having high ease of operation for a user. <P>SOLUTION: A touch sensor 350 generates the first sensed point signal, when touching a touch panel 340 with a finger continuously for the first prescribed time or more and when released therefrom, stores the first sensed point signal into a memory 610, and displays a mark indicating a position corresponding to the first sensed point signal on a display 30. The sensor 350 transmits the second sensed point signal indicating a touched position to a control part 720, when touching the touch panel 340 within the second prescribed time, and the control part 720 stores the second sensed point signal into the memory 610 together with the first sensed point signal. The third sensed point signal indicating a position separating the finger from the touch panel 340 thereafter is transmitted to the control part 720, and the control part 720 stores the third sensed point signal into the memory 610 together with the first sensed point signal and the second sensed point signal. The first input is generated using the first sensed point signal as an origin, and the second input is generated based on either of the second sensed point signal or the third sensed point signal. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、入力装置に関し、より詳細には、マウスやタッチパネルによる入力が可能な携帯端末装置等の入力装置に関する。   The present invention relates to an input device, and more particularly, to an input device such as a portable terminal device capable of input using a mouse or a touch panel.

従来、携帯電話などをはじめとする携帯端末装置に文字を入力したり、携帯端末装置に地図などの画像を映すことがなされている。この際、キーボードやキーパッドなどによるキー入力の代わりに若しくはキー入力に加えて、携帯端末装置のスクリーンをタッチパネルとして、タッチパネルによる入力が可能なものが知られている。タッチパネル入力とすることにより、携帯端末装置の操作をユーザにとってより直感的に分かりやいものとすることができる。   2. Description of the Related Art Conventionally, characters are input to a mobile terminal device such as a mobile phone or an image such as a map is projected on the mobile terminal device. At this time, instead of or in addition to key input using a keyboard, a keypad, or the like, a screen that can be input by a touch panel using a screen of a mobile terminal device as a touch panel is known. By using the touch panel input, it is possible to make the operation of the mobile terminal device more intuitive for the user.

タッチパネル端末としては、入力点を1点のみを感知するものが主であるが、携帯端末装置の機能が多様化するにつれ、より複雑な入力が可能となることが望まれるようになった。これに伴い、2点感知が可能なタッチパネル端末も知られるようになった。例えば、特許文献1、特許文献2は、タッチパネル上の2点における入力操作を検出し、2点の入力操作の操作方向と操作量に基づいて表示の縮尺を変えるナビゲーション等表示装置を開示している。   As a touch panel terminal, a terminal that detects only one input point is mainly used. However, as the functions of the mobile terminal device are diversified, it is desired that more complicated input is possible. Along with this, touch panel terminals capable of two-point sensing are also known. For example, Patent Document 1 and Patent Document 2 disclose a display device such as navigation that detects an input operation at two points on a touch panel and changes a display scale based on an operation direction and an operation amount of the two input operations. Yes.

また特許文献3は、タッチパネル上の2点の指示位置を検出し、2点間の距離及び角度の変化量を算出し、その変化量に基づいてキャラクタの移動速度や旋回速度のような動作パラメータを設定するゲームプログラムを開示している。   Patent Document 3 detects two designated positions on a touch panel, calculates a change amount of a distance and an angle between the two points, and based on the change amount, motion parameters such as a character moving speed and a turning speed. A game program for setting up is disclosed.

また特許文献4は、両手で用いる入力装置において、1点入力と2点入力とを正確に判別する技術に関し、2つの入力操作の間にユーザの手がタッチパネルから離されているか否かによって、1点入力か2点入力かを判別する構成を開示している。   Patent Document 4 relates to a technique for accurately discriminating one-point input and two-point input in an input device used with both hands, depending on whether the user's hand is separated from the touch panel between two input operations. A configuration for discriminating between one-point input and two-point input is disclosed.

また特許文献5は、親指と人差し指とをタッチパネルに接触させることにより、その2点間で指定される領域内に表示された表示物を操作対象として認識させ、さらに、指を離さずタッチパネル上で動かすことによって該操作対象に対して操作を行うことができる装置を開示している。   Further, in Patent Document 5, a display object displayed in an area designated between two points is recognized as an operation target by bringing a thumb and an index finger into contact with the touch panel, and further, on the touch panel without releasing the finger. An apparatus capable of performing an operation on the operation target by moving it is disclosed.

特開2003-344059号公報(要約、段落[0017]から[0022])JP 2003-344059 (abstract, paragraphs [0017] to [0022]) 特開2007-241410号公報(要約)JP 2007-241410 A (summary) 特願2006−34754号公報(要約、請求項1)Japanese Patent Application No. 2006-34754 (Summary, Claim 1) 特開2005-309987号公報(要約、段落[0062]から[0071])JP 2005-309987 A (summary, paragraphs [0062] to [0071]) 特開2002-304256号公報(要約、段落[0017]、[0032]から[0036])JP 2002-304256 (Abstract, paragraphs [0017], [0032] to [0036])

しかしながら、携帯電話端末のような小型端末装置の場合、ユーザは片手で端末装置を持ち、端末装置を持つのと同じ手の指(例えば親指)で端末装置の操作を行うため、複数の指、複数の手による操作を行うことは困難であるという問題があった。   However, in the case of a small terminal device such as a mobile phone terminal, the user holds the terminal device with one hand, and operates the terminal device with the finger of the same hand (for example, the thumb) as holding the terminal device. There is a problem that it is difficult to perform operations with a plurality of hands.

また、携帯電話端末のようにディスプレイの小さい端末装置では、ディスプレイ上の位置を指定する際に細かい入力操作が要求される。したがって、複数の位置を指定して行う画像やテキストの編集操作では、指定された位置を明確に表示して行うと操作性が向上する。   Further, in a terminal device having a small display such as a mobile phone terminal, a fine input operation is required when specifying a position on the display. Therefore, in an image or text editing operation performed by designating a plurality of positions, the operability is improved if the designated positions are clearly displayed.

本発明は、このような問題に鑑みてなされたもので、その目的とするところは、ユーザにとっての操作性を向上した入力機能つき入力装置及び入力方法を提供することにある。   The present invention has been made in view of such a problem, and an object of the present invention is to provide an input device with an input function and an input method that have improved operability for a user.

本発明は、このような目的を達成するために、本発明に係る入力装置は、ディスプレイと、前記ディスプレイ上の位置を指定する位置指定手段と、前記位置指定手段による位置指定を検出する位置指定検出手段と、前記位置指定検出手段が前記ディスプレイ上で指定された位置を感知することによって生成する感知点信号を元に入力信号を生成する制御手段と、前記制御手段に接続されたメモリとを有する入力装置であって、前記位置指定手段により第1の所定の時間以上前記ディスプレイ上の位置を指定し続けると、前記位置指定検出手段は第1感知点信号を生成して前記制御手段に送り、前記制御手段は前記第1感知点信号を前記メモリに記憶し、前記第1感知点信号生成から第2の所定の時間以内に前記位置指定手段により前記ディスプレイ上の新たな位置を指定すると、前記位置指定検出手段は新たに指定した位置を示す第2感知点信号を前記制御手段に送り、前記制御手段は前記第1感知点信号と共に前記第2感知点信号を前記メモリに記憶し、その後前記位置指定を解除するまでの位置を示す第3感知点信号を前記制御手段に送り、前記制御手段は前記第1感知点信号及び第2感知点信号と共に前記第3感知点信号を前記メモリに記憶し、前記制御手段は、前記第1感知点信号を元に第1入力信号を生成し、前記第2及び第3感知点信号のいずれか一方を元に第2入力信号を生成する。   In order to achieve the above object, according to the present invention, an input device according to the present invention includes a display, position specifying means for specifying a position on the display, and position specification for detecting position specification by the position specifying means. Detection means; control means for generating an input signal based on a sensing point signal generated by the position designation detection means sensing a position designated on the display; and a memory connected to the control means. When the position designation means continues to designate a position on the display for a first predetermined time or more, the position designation detection means generates a first sensing point signal and sends it to the control means. The control means stores the first sensing point signal in the memory, and the position designating means within the second predetermined time from the generation of the first sensing point signal. When a new position on the ray is designated, the position designation detection means sends a second sensing point signal indicating the newly designated position to the control means, and the control means together with the first sensing point signal sends the second sensing point signal. A point signal is stored in the memory, and then a third sensing point signal indicating a position until the position designation is canceled is sent to the control means, and the control means together with the first sensing point signal and the second sensing point signal The third sensing point signal is stored in the memory, and the control unit generates a first input signal based on the first sensing point signal, and based on one of the second and third sensing point signals. The second input signal is generated.

ここで、前記制御手段は、前記第1感知点信号を前記メモリに記憶するとともに、前記ディスプレイに前記第1感知点信号に対応する位置を示す印を表示するものとすることができる。   Here, the control means may store the first sensing point signal in the memory and display a mark indicating a position corresponding to the first sensing point signal on the display.

また、前記位置指定手段はタッチ操作可能なタッチパネルとすることができる。   The position specifying means may be a touch panel capable of touch operation.

また、前記位置指定検出手段は、前記位置指定手段が前記第1の所定の時間以上、ほぼ移動することなく前記位置指定を続けその後位置指定が解除されたとき、前記第1感知点信号を生成して前記制御手段に送るものとすることができる。   The position designation detecting means generates the first sensing point signal when the position designation means continues the position designation without moving substantially for the first predetermined time or more and then the position designation is released. Then, it can be sent to the control means.

また、前記制御手段は、前記第2及び第3感知点信号のいずれか他方を元に第3入力信号を生成するものとすることができる。   The control means may generate a third input signal based on the other of the second and third sensing point signals.

ここで、前記制御手段は、前記第1、第2、第3入力信号に基づき、前記第1入力信号に対応する感知点及び前記第2入力信号に対応する感知点のなす線分と、前記第1入力信号に対応する感知点及び前記第3入力信号に対応する感知点のなす線分とを元に、前記ディスプレイに表示する画像を制御するものとすることができる。   Here, the control means is based on the first, second and third input signals, and a line segment formed by a sensing point corresponding to the first input signal and a sensing point corresponding to the second input signal; An image to be displayed on the display may be controlled based on a sensing point corresponding to the first input signal and a line segment formed by the sensing point corresponding to the third input signal.

また、前記制御手段は、前記第1、第2入力信号に基づき、前記第1入力信号に対応する位置及び前記第2入力信号に対応する位置との間の、前記ディスプレイに表示された文字列を選択するものとすることができる。   Further, the control means is configured to display a character string displayed on the display between a position corresponding to the first input signal and a position corresponding to the second input signal based on the first and second input signals. Can be selected.

本発明の別の態様によれば、本発明に係る入力装置は、ディスプレイと、前記ディスプレイ上の位置を指定する位置指定手段と、前記位置指定手段による位置指定を検出する位置指定検出手段と、前記位置指定検出手段が前記ディスプレイ上で指定された位置を感知することによって生成する感知点信号を元に入力信号を生成する制御手段と、前記制御手段に接続されたメモリとを有する入力装置に入力をする方法であって、前記位置指定手段により第1の所定の時間以上前記ディスプレイ上の位置を指定し続け、その後に位置指定を解除したことを前記位置指定検出手段が感知し第1感知点信号を生成するステップと、前記制御手段が、前記第1感知点信号を前記位置指定検出手段から受け取るステップと、前記制御手段が、受け取った前記第1感知点信号を前記メモリに記憶させるステップと、前記第1感知点信号生成から第2の所定の時間以内に前記位置指定手段により前記ディスプレイ上の新たな位置を指定すると、前記位置指定検出手段が検出した位置を示す第2感知点信号を前記制御手段に送るステップと、前記制御手段が前記第1感知点信号と共に前記第2感知点信号を前記メモリに記憶するステップと、その後前記位置指定を解除するまでの位置を示す第3感知点信号を前記タッチ検出手段が前記制御手段に送るステップと、前記制御手段が前記第1感知点信号及び第2感知点信号と共に前記第3感知点信号を前記メモリに記憶するステップと、前記制御手段が、前記第1感知点信号を元に第1入力信号を生成し、前記第2及び第3感知点信号のいずれか一方を元に第2入力信号を生成するステップとを有する。   According to another aspect of the present invention, an input device according to the present invention includes a display, a position designation unit that designates a position on the display, a position designation detection unit that detects a position designation by the position designation unit, An input device comprising: control means for generating an input signal based on a sensing point signal generated by the position designation detecting means sensing a position designated on the display; and a memory connected to the control means. A method of inputting, wherein the position designation detecting means senses that the position designation is continuously designated by the position designation means for a first predetermined time or more and then the position designation is released. Generating a point signal; wherein the control means receives the first sensing point signal from the position detection means; and before the control means has received the point signal. Storing the first sensing point signal in the memory; and designating a new position on the display by the position designating means within a second predetermined time from the generation of the first sensing point signal; Sending a second sensing point signal indicating the position detected by the means to the control means; storing the second sensing point signal in the memory together with the first sensing point signal; and then the position A step in which the touch detection means sends a third sensing point signal indicating a position until the designation is released to the control means; and the control means has the third sensing point signal together with the first sensing point signal and the second sensing point signal. Storing a signal in the memory; and the control means generates a first input signal based on the first sensing point signal and generates one of the second and third sensing point signals. And generating a second input signal.

ここで、前記制御手段が、前記ディスプレイに前記第1感知点信号に対応する位置を示す印を表示するステップをさらに有するものとすることができる。   Here, the control means may further include a step of displaying a mark indicating a position corresponding to the first sensing point signal on the display.

また、前記位置指定手段としてタッチ操作可能なタッチパネルを使用するものとすることができる。   Further, a touch panel capable of touch operation can be used as the position specifying means.

また、前記第1感知点信号を生成するステップにおいて、前記位置指定検出手段は、前記第1の所定の時間以上、ほぼ移動することなく前記位置指定が継続しその後解除されたとき、前記第1感知点信号を生成して前記制御手段に送るものとすることができる。   Further, in the step of generating the first sensing point signal, the position designation detecting means is configured to perform the first designation when the position designation is continued and released without moving substantially for the first predetermined time or longer. A sensing point signal can be generated and sent to the control means.

また、前記制御手段が前記第2及び第3感知点信号のいずれか他方を元に第3入力信号を生成するステップをさらに有するものとすることができる。   The control unit may further include a step of generating a third input signal based on one of the second and third sensing point signals.

本発明により、ユーザにとって操作性の高い携帯端末装置を提供することが可能となる。   According to the present invention, it is possible to provide a mobile terminal device with high operability for the user.

以下、図面を参照しながら本発明の実施形態について詳細に説明する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

(第1実施形態)
本発明の第1実施形態に係る入力装置は、ディスプレイ上の位置を指定するためにユーザが一つの指でタッチパネルに触れる時間やタイミングによって、1点感知により入力信号を1つとするか、2点以上感知による複数の入力信号を生成する構成とするかを調節することができるようにするものである。このため、2点感知により2つの入力信号を要する複雑な操作を行うときでも、ユーザは入力装置を持つのと同じ手のみで全ての操作を行うことができる。
(First embodiment)
In the input device according to the first embodiment of the present invention, one input signal is detected by one point detection according to time and timing when the user touches the touch panel with one finger to specify a position on the display, or two points. Thus, it is possible to adjust whether or not the configuration is to generate a plurality of input signals by sensing. For this reason, even when performing a complicated operation requiring two input signals by two-point sensing, the user can perform all the operations with the same hand as holding the input device.

以下、タッチパネルを使用してディスプレイ上の位置指定を行う本発明の第1実施形態について説明する。   Hereinafter, a first embodiment of the present invention in which a position on a display is designated using a touch panel will be described.

図1は本実施形態に係る文字入力のプログラムを有する携帯電話(入力装置の一例)1000の例である。携帯電話1000は、筐体15と、筐体15の表面に設置されたディスプレイ30と、筐体15に内蔵されたアンテナ50とメモリ60とCPU70とベースバンドLSI80と無線回路90と電池100とマイク20とを備えている。ディスプレイ30とアンテナ50とメモリ60とCPU70とベースバンドLSI80と無線回路90とは、CPU70に機能的に接続され、メモリ60に格納されたプログラムを元に音声及びデータ通信を行う。ベースバンドLSI80と無線回路90と電池100とマイク20とは、公知のものを用いることができ、携帯電話1000の機能や構造に応じてどのようなものが用いられるかは、当業者には明らかである。   FIG. 1 shows an example of a mobile phone (an example of an input device) 1000 having a character input program according to this embodiment. The cellular phone 1000 includes a housing 15, a display 30 installed on the surface of the housing 15, an antenna 50, a memory 60, a CPU 70, a baseband LSI 80, a wireless circuit 90, a battery 100, and a microphone built in the housing 15. 20. The display 30, the antenna 50, the memory 60, the CPU 70, the baseband LSI 80, and the wireless circuit 90 are functionally connected to the CPU 70 and perform voice and data communication based on a program stored in the memory 60. As the baseband LSI 80, the radio circuit 90, the battery 100, and the microphone 20, known ones can be used, and it is obvious to those skilled in the art what is used according to the function and structure of the mobile phone 1000. It is.

本実施形態に係る携帯電話1000以外にも、筐体のディスプレイ設置部が入力キー部設置部上をスライドするタイプの携帯電話2000(図12)においても、本発明は適用可能である。   In addition to the mobile phone 1000 according to the present embodiment, the present invention can also be applied to a mobile phone 2000 (FIG. 12) in which the display installation portion of the housing slides on the input key portion installation portion.

図2は、携帯電話1000の入力機能に関する機能構成図である。図2に示すとおり、ディスプレイ30は、タッチパネル340(位置指定手段)と、ユーザによるタッチパネル340上のタッチを検出するタッチセンサ(位置指定検出手段)350とを有している。タッチパネル340としては、抵抗膜などを備えたものを用いることができるが、マトリクススイッチ、静電容量スイッチ、表面弾性波式スイッチなど、他のタイプのタッチパネルを用いてもよい。ディスプレイ30はさらに、タッチパネル340に文字、画像や後述するゴースト等を表示する表示手段330を有する。   FIG. 2 is a functional configuration diagram related to the input function of the mobile phone 1000. As shown in FIG. 2, the display 30 includes a touch panel 340 (position designation unit) and a touch sensor (position designation detection unit) 350 that detects a touch on the touch panel 340 by the user. As the touch panel 340, a touch panel provided with a resistance film or the like can be used, but other types of touch panels such as a matrix switch, a capacitance switch, and a surface acoustic wave switch may be used. The display 30 further includes display means 330 that displays characters, images, ghosts described later, and the like on the touch panel 340.

携帯電話1000のCPU70は、表示手段330による表示を制御する制御部720と、ユーザのタッチの移動量等を計算する移動算出手段710とを備えている。メモリ60は、本実施形態に係る入力方法をプログラムとして格納し、さらに制御部720が生成する入力信号によって操作されるアプリケーションを格納するメモリ部610と、文字に関する情報を格納する辞書データベース620とを有する。   The CPU 70 of the mobile phone 1000 includes a control unit 720 that controls display by the display unit 330 and a movement calculation unit 710 that calculates a movement amount of a user's touch and the like. The memory 60 stores the input method according to the present embodiment as a program, and further includes a memory unit 610 that stores an application operated by an input signal generated by the control unit 720, and a dictionary database 620 that stores information about characters. Have.

タッチセンサ350は、タッチパネル340へのタッチによる位置指定を感知すると、感知点信号を生成して制御部720に送る。制御部720は、受け取った感知点信号を元に入力信号を生成することにより、携帯電話1000中のアプリケーションを操作する。ユーザがタッチパネル340の一点感知により入力信号を一つずつ携帯電話1000に入力する場合は、一旦タッチパネル340をタッチして生成し制御部720に送られた感知点信号は、その感知点信号を元に入力信号が生成されるとメモリ610から削除される。携帯電話1000に、2点感知による2つの信号を入力する場合、本実施形態では、以下のように時間差でのタッチによる2点感知から入力信号を生成する。   When the touch sensor 350 senses position designation by touching the touch panel 340, the touch sensor 350 generates a sensing point signal and sends it to the control unit 720. The control unit 720 operates an application in the mobile phone 1000 by generating an input signal based on the received sensing point signal. When the user inputs input signals to the mobile phone 1000 one by one by sensing one point of the touch panel 340, the sense point signal generated by touching the touch panel 340 once and sent to the control unit 720 is based on the sense point signal. When the input signal is generated, the memory 610 is deleted. In the case where two signals by two-point detection are input to the mobile phone 1000, in the present embodiment, an input signal is generated from two-point detection by touch with a time difference as follows.

図3は、本実施形態に係る携帯電話1000におけるユーザ操作によって、ゴーストによって第1感知点の位置を表示するステップを示すフローチャートである。このフローチャートに示す操作により、図4に示すゴースト表示・位置固定操作が為される。後述のように、本実施形態におけるゴーストとは、携帯電話1000において2点を感知させる際に、1点目の感知点の位置を携帯電話1000に認識・記憶させ、1点目の感知点の位置を記憶させたままで2点目の感知点の指定操作を行うことにより、経時的に2点を感知させることを可能としたものである。これにより、ユーザは指一本でタッチパネル340上の2点を選択することができる。後述のように、本実施形態では、指を移動させることなく一定時間(t1)以上タッチパネル340上に触れることによって、ゴーストが表示されるよう設定されている。   FIG. 3 is a flowchart showing steps of displaying the position of the first sensing point by ghost by a user operation on the mobile phone 1000 according to the present embodiment. By the operation shown in this flowchart, the ghost display / position fixing operation shown in FIG. 4 is performed. As will be described later, the ghost in this embodiment means that when the mobile phone 1000 senses two points, the mobile phone 1000 recognizes and stores the position of the first sensing point, and the first sensing point. By designating the second sensing point with the position being memorized, it is possible to sense two points over time. Thereby, the user can select two points on the touch panel 340 with one finger. As will be described later, in the present embodiment, the ghost is displayed by touching the touch panel 340 for a certain time (t1) or longer without moving the finger.

図3のステップS10において、携帯電話1000のタッチ検出手段350は、ユーザによるタッチパネル340のタッチを感知する。タッチが感知されると制御部720は、タイマT1を開始し(ステップS20)、ユーザが指を動かすことなくタッチパネル340をタッチしている時間が所定時間t1を超えるか否かを計測する(ステップS30)。タイマT1による計測中、タッチパネルセンサ350は、ユーザが指を離してタッチを解除したかを検知し(ステップS40)、もしタッチが解除されていれば、ステップS45でタイマT1を停止してゴーストGを表示しないこととする。即ちこの場合、通常の一点感知による入力となる。タッチ解除時にタッチが指示していたタッチパネル340上の位置の情報は、タッチ解除後メモリ部620のキャッシュに一時的に保存され、ユーザのその後の携帯電話1000操作に用いることができる。キャッシュに一時的に保存された位置情報は、その後ユーザが再びタッチパネル340に触れることにより削除される。   In step S10 of FIG. 3, the touch detection unit 350 of the mobile phone 1000 senses a touch on the touch panel 340 by the user. When a touch is detected, the control unit 720 starts a timer T1 (step S20) and measures whether or not the time during which the user touches the touch panel 340 without moving a finger exceeds a predetermined time t1 (step S20). S30). During the measurement by the timer T1, the touch panel sensor 350 detects whether the user releases the touch by releasing the finger (step S40). If the touch is released, the touch panel sensor 350 stops the timer T1 in step S45 and the ghost G Is not displayed. That is, in this case, the input is based on normal one-point detection. Information on the position on the touch panel 340 that the touch has instructed when the touch is released is temporarily stored in the cache of the memory unit 620 after the touch is released, and can be used for the subsequent operation of the mobile phone 1000 by the user. The position information temporarily stored in the cache is deleted when the user touches the touch panel 340 again thereafter.

ステップS40において、もしユーザが指をタッチパネル340から離しておらずタッチが継続されていれば、制御部720は次にタッチ位置が移動したかを検知する(ステップS50)。タッチ位置の移動が感知されると、タイマT1が解除される。その後、再びタイマT1が開始され、ステップS20以降のステップが繰り返される。即ち本実施形態では、ユーザの指が動かずタッチパネル340を所定期間t1にわたって触れていたときにゴーストが表示されるようになっているため、ユーザの指の移動が感知されると、タイマT1を起動しなおすようになっている。   In step S40, if the user does not remove his / her finger from touch panel 340 and the touch continues, control unit 720 detects whether the touch position has moved next (step S50). When the movement of the touch position is detected, the timer T1 is released. Thereafter, the timer T1 is started again, and the steps after step S20 are repeated. That is, in this embodiment, since the ghost is displayed when the user's finger does not move and touches the touch panel 340 for a predetermined period t1, the timer T1 is set when the movement of the user's finger is detected. It is supposed to restart.

ユーザの指が動くことなくタッチパネル340の一箇所に所定時間t1以上触れていると、制御部720はその箇所にゴーストG(第1感知点信号に対応する位置を示す印の例)を表示する(ステップS35)。その様子を図式化した例が図4の(1)、(2)である。   When the user's finger does not move and touches a part of the touch panel 340 for a predetermined time t1 or more, the control unit 720 displays a ghost G (an example of a mark indicating a position corresponding to the first sensing point signal) at that part. (Step S35). Examples of this situation are shown in FIG. 4 (1) and (2).

図4の本実施形態では、ゴーストGは人差し指の影の形をしているが、ゴーストの形状はこのような特定のものに限られず、第1感知点としてメモリ部610のキャッシュに保存された位置情報を示すことのできる印であれば、絵、記号、図形等を問わず、何でもよい。   In the present embodiment of FIG. 4, the ghost G is in the shape of a forefinger shadow, but the ghost shape is not limited to such a specific one, and is stored in the cache of the memory unit 610 as the first sensing point. Any mark may be used as long as it can indicate position information, regardless of a picture, a symbol, a figure, or the like.

ステップS35においてゴーストが表示されて以降のステップS60からS90は、ゴーストの位置を決定するための操作である。基本的に、ゴーストGが表示された後にユーザが指をタッチパネル340から離した時点におけるゴーストGの位置が、該ゴーストが示す位置情報としてメモリ610に保存される。より詳細には、制御部720はステップS60においてユーザによるタッチが解除されたか否かを判断する。タッチ解除が検知されれば、タッチ解除時におけるゴーストGの位置でゴーストを固定し、その位置情報をメモリ610に第1感知点P1の位置として保存する(ステップS90)。後述する以降の操作において、第1感知点P1の位置を用いる場合は、ステップS90で決定されキャッシュに保存されている位置情報が用いられる。   Steps S60 to S90 after the display of the ghost in step S35 are operations for determining the position of the ghost. Basically, the position of the ghost G when the user releases his / her finger from the touch panel 340 after the ghost G is displayed is stored in the memory 610 as position information indicated by the ghost. More specifically, the control unit 720 determines whether or not the touch by the user is released in step S60. If the touch release is detected, the ghost is fixed at the position of the ghost G at the time of the touch release, and the position information is stored in the memory 610 as the position of the first sensing point P1 (step S90). In the subsequent operations to be described later, when the position of the first sensing point P1 is used, the position information determined in step S90 and stored in the cache is used.

ステップS60でタッチ解除が検知されなかった場合、制御部720はさらにタッチの移動があるか否かを検知する(ステップS70)。タッチの移動が検知された場合は、ゴーストGの表示をタッチと共に移動する(ステップS80)。移動先においてユーザがタッチパネル340から指を離しタッチを解除すると、この移動先の位置において、第1感知点P1を示すゴーストが固定され、第1感知点P1の位置情報がメモリ610に一時保存される。この様子が、図4の(3)及び(4)に図示されている。   When the touch release is not detected in step S60, the control unit 720 further detects whether or not there is a touch movement (step S70). When the movement of the touch is detected, the display of the ghost G is moved together with the touch (step S80). When the user releases his / her touch from the touch panel 340 at the destination, the ghost indicating the first sensing point P1 is fixed at the position of the destination, and the position information of the first sensing point P1 is temporarily stored in the memory 610. The This is illustrated in (3) and (4) of FIG.

次に、ゴーストGが表示された後の、第2及び第3感知点の感知について図5を参照しつつ説明する。   Next, sensing of the second and third sensing points after the ghost G is displayed will be described with reference to FIG.

一旦ゴーストGが表示されると、制御部720はタイマT2を開始する(ステップS110)。タイマT2の計測時間を所定時間t2と比較し(ステップS120)、タイマT2が所定時間t2を越えるまでの間にユーザによる次のタッチが感知されない場合、ゴーストGの表示は解除される(ステップS130)。これにより、キャッシュに保存されていた第1感知点の位置情報も削除される。また、第1感知点を用いるコマンド以外の操作のためのタッチパネル340へのタッチ(例えば、ゴーストを用いるアプリケーションとは関係のないメニューの操作など)が行われたことが検知されると、その時点でゴーストは非表示となり、キャッシュに保存された第1感知点の位置情報も削除される。   Once ghost G is displayed, control unit 720 starts timer T2 (step S110). The measurement time of the timer T2 is compared with the predetermined time t2 (step S120), and if the next touch by the user is not detected before the timer T2 exceeds the predetermined time t2, the display of the ghost G is canceled (step S130). ). Thereby, the position information of the first sensing point stored in the cache is also deleted. When it is detected that a touch on the touch panel 340 for an operation other than the command using the first sensing point (for example, a menu operation unrelated to the application using the ghost) is performed, Thus, the ghost is hidden and the position information of the first sensing point stored in the cache is also deleted.

タイマT2がt2に達する前にタッチセンサ350がユーザによるタッチを感知すると(ステップS140)、制御部720はその点を第2感知点として認識する(ステップS150)。第2感知点の位置情報は、キャッシュに保存されかつゴーストが示す第1感知点と共に、入力信号として様々な操作に用いられることができる。   If the touch sensor 350 senses a touch by the user before the timer T2 reaches t2 (step S140), the control unit 720 recognizes that point as a second sensing point (step S150). The position information of the second sensing point is stored in the cache and can be used for various operations as an input signal together with the first sensing point indicated by the ghost.

その後、ゴーストGが固定されている第1感知点(P1)とユーザがゴーストG表示後にタッチした点である第2感知点(P2)とがほぼ同じ位置にあるかどうかをさらに判断する(ステップS160)。   Thereafter, it is further determined whether or not the first sensing point (P1) where the ghost G is fixed and the second sensing point (P2) which is a point touched after the ghost G is displayed are substantially at the same position (Step S1). S160).

ここで、第1感知点と第2感知点とがほぼ同じ位置であるかどうかの判断は、第2感知点が第1感知点から一定の距離内に位置しているかどうかを判断することにより行うこととしてもよい。   Here, whether the first sensing point and the second sensing point are substantially the same position is determined by determining whether the second sensing point is located within a certain distance from the first sensing point. It may be done.

また、第1感知点から一定の距離にある領域を、図4のP1に示すようにゴーストに重ねて「●」印等で表示することとしてもよい。さらに、この「●」印のサイズはユーザによって任意に変更可能とすることとすることとしてもよい。この場合、携帯電話1000は「●」印のサイズの設定値をメモリ610に記憶しておく。ステップS160において、制御部720は、メモリ610から設定値を読み出して、第2感知点(P2)が「●」印内に位置しているかどうかを判断する。このような処理を行うと、第1感知点と第2感知点の比較を詳細に実施したり、あるいは粗く実施したりすることが可能となる。   In addition, an area at a certain distance from the first sensing point may be displayed with a “●” mark or the like superimposed on the ghost as indicated by P1 in FIG. Furthermore, the size of the “●” mark may be arbitrarily changed by the user. In this case, the mobile phone 1000 stores the set value of the size of “●” in the memory 610. In step S160, the control unit 720 reads the set value from the memory 610, and determines whether or not the second sensing point (P2) is located within the “●” mark. When such processing is performed, the comparison between the first sensing point and the second sensing point can be performed in detail or roughly.

もし第1感知点と第2感知点とが同じ位置であれば、ステップS200に進み、タッチの移動があるか判断する。タッチの移動がなければ、ステップS180において、制御部720はユーザによるタッチが解除されたか否かを判断する(ステップS180)。もしタッチが解除されていれば、2回目のタッチはダブルクリックであったと判断する(ステップS190)。これにより、ゴーストGの表示は解除され、またタイマT2も解除される。尚、ステップS180における判断には、上記した感知点の位置の比較に加えて、ゴーストGが表示された時間と、ステップS140において第2のタッチが感知された時間との差に基づく判断をし、連続的にクリックがされた場合のみ(つまり2回のタッチ間の時間間隔が短いもののみ)についてダブルクリックと判断するようにしてもよい。   If the first sensing point and the second sensing point are the same position, the process proceeds to step S200 to determine whether there is a touch movement. If there is no touch movement, in step S180, the control unit 720 determines whether or not the touch by the user is released (step S180). If the touch is released, it is determined that the second touch is a double click (step S190). Thereby, the display of the ghost G is canceled, and the timer T2 is also canceled. The determination in step S180 is based on the difference between the time when the ghost G is displayed and the time when the second touch is detected in step S140, in addition to the comparison of the positions of the sensing points described above. Only when the click is continuously performed (that is, only when the time interval between two touches is short) may be determined as a double click.

もしステップS200でユーザの指がタッチ中に移動したと判断されれば、制御部720は移動中の指の感知点を第3感知点(P2’)としてメモリ610に記憶する(ステップS210)。   If it is determined in step S200 that the user's finger has moved during the touch, the control unit 720 stores the sensing point of the moving finger as a third sensing point (P2 ') in the memory 610 (step S210).

その後、制御部720は、第1感知点P1及び第3感知点P2'を用いて、ディスプレイ内の範囲選択を行う(ステップS220)。この範囲選択は、タッチしている指を移動して、第1感知点P1と第3感知点P2'をそれぞれ対角の頂点とする長方形のサイズを変更することにより行うことができる。   Thereafter, the controller 720 selects a range in the display using the first sensing point P1 and the third sensing point P2 ′ (step S220). This range selection can be performed by moving the touching finger and changing the size of a rectangle having the first sensing point P1 and the third sensing point P2 ′ as diagonal vertices.

第3感知点の認識及び範囲選択は、指によるタッチが解除されるまで続けられ(ステップS230)、タッチが解除されると選択範囲が確定する。   The recognition of the third sensing point and the range selection are continued until the touch with the finger is released (step S230), and the selection range is determined when the touch is released.

一方、ステップS160において、第1感知点と第2感知点とが異なる場合はステップS230に進み、制御部720は移動中の指の感知点を第3感知点(P2’)としてメモリ610に記憶する(ステップS240)。その後、制御部720は、ユーザの操作に応じて、第1乃至第3感知点P1, P2, P2'を用いて携帯電話1000の制御を行う(ステップS250)。第3感知点の認識及び携帯電話1000の制御は、指によるタッチが解除されるまで続けられ(ステップS260)、タッチが解除されると処理が終了する。   On the other hand, if the first sensing point is different from the second sensing point in step S160, the process proceeds to step S230, and the control unit 720 stores the sensing point of the moving finger in the memory 610 as the third sensing point (P2 ′). (Step S240). Thereafter, the control unit 720 controls the mobile phone 1000 using the first to third sensing points P1, P2, and P2 ′ in accordance with a user operation (step S250). The recognition of the third sensing point and the control of the mobile phone 1000 are continued until the touch with the finger is released (step S260), and the process ends when the touch is released.

尚、上述の例ではタイマT2を使用した判断処理について説明したが、タイマT2は必ずしも必要なく、第2感知点を感知するまでゴーストを表示し続けることとしてもよい。   In the above example, the determination process using the timer T2 has been described. However, the timer T2 is not always necessary, and the ghost may be continuously displayed until the second sensing point is sensed.

また、上述の例では2回目のタッチが移動している間第3感知点の認識を続けているが、タッチを移動させて行う範囲選択や編集処理は、タッチが解除されて始めて確定される。そこで、2回目のタッチが解除されるまでは、選択範囲や編集途中の画像を破線等で動的に表示し、タッチが解除された時点で確定後の選択範囲や編集された画像を表示させることとしてもよい。また、タッチが解除されるまでは選択範囲や編集途中の画像を表示しないこととしてもよい。   In the above example, the third sensing point is continuously recognized while the second touch is moving. However, the range selection and editing processing performed by moving the touch is determined only after the touch is released. . Therefore, until the second touch is released, the selection range and the image being edited are dynamically displayed with a broken line, etc., and the selected range and the edited image are displayed when the touch is released. It is good as well. Further, the selection range and the image being edited may not be displayed until the touch is released.

図6乃至8は、本実施形態に係るゴーストを利用した画像表示処理の例を図示している。   6 to 8 illustrate an example of image display processing using a ghost according to the present embodiment.

図6は、第1乃至第3感知点P1, P2, P2'を用いて画像を拡大表示する操作を示している。第1感知点P1は、ゴーストGが表示する位置に固定されている。ここで、ユーザがディスプレイ30をタッチすると、タッチ点P2が第2感知点として認識・記憶される。ユーザが指をP1から遠ざかる方向に動かすと、タッチ位置が第3感知点P2'として認識・記憶される。また、図6のP2'においてディスプレイ30から離す。このとき、タッチを解除した時点におけるタッチ位置が第3感知点P2'として認識・記憶される。   FIG. 6 shows an operation for enlarging and displaying an image using the first to third sensing points P1, P2, P2 ′. The first sensing point P1 is fixed at a position where the ghost G is displayed. Here, when the user touches the display 30, the touch point P2 is recognized and stored as the second sensing point. When the user moves the finger away from P1, the touch position is recognized and stored as the third sensing point P2 ′. Further, it is separated from the display 30 at P2 ′ in FIG. At this time, the touch position when the touch is released is recognized and stored as the third sensing point P2 ′.

これにより、ディスプレイ30上の画面は、P1・P2間の距離とP1・P2'間の距離との比率に比例して拡大表示される。   Thereby, the screen on the display 30 is enlarged and displayed in proportion to the ratio between the distance between P1 and P2 and the distance between P1 and P2 ′.

図7は、第1乃至第3感知点P1, P2, P2'を用いて画像を縮小表示する操作を示している。第1感知点P1、第2感知点は、上述の図6の例と同様に認識・記憶される。図7の例では、ユーザがタッチパネル340にタッチしてから、指をP1に近づく方向に動かすと、タッチ位置が第3感知点P2'として認識・記憶される。また、図7のP2'においてディスプレイ30から離す。このとき、タッチを解除した時点におけるタッチ位置が第3感知点P2'として認識・記憶される。   FIG. 7 shows an operation of reducing and displaying an image using the first to third sensing points P1, P2, P2 ′. The first sensing point P1 and the second sensing point are recognized and stored in the same manner as in the example of FIG. In the example of FIG. 7, when the user touches the touch panel 340 and moves the finger in a direction approaching P1, the touch position is recognized and stored as the third sensing point P2 ′. Further, it is separated from the display 30 at P2 ′ in FIG. At this time, the touch position when the touch is released is recognized and stored as the third sensing point P2 ′.

これにより、ディスプレイ30上の画面は、P1・P2間の距離とP1・P2'間の距離との比率に比例して縮小表示される。   Thereby, the screen on the display 30 is reduced and displayed in proportion to the ratio of the distance between P1 and P2 and the distance between P1 and P2 ′.

図8は、第1乃至第3感知点P1, P2, P2'を用いて画像を回転表示する操作を示している。第1感知点P1、第2感知点は、上述の図6、7の例と同様に認識・記憶される。図8の例では、ユーザがタッチパネル340にタッチしてから、指をP1を中心とする円弧状に動かすと、タッチを解除した時点におけるタッチ位置が第3感知点P2'として認識・記憶される。また、図8のP2'においてディスプレイ30から離す。このとき、タッチを解除した時点におけるタッチ位置が第3感知点P2'として認識・記憶される。   FIG. 8 shows an operation of rotating and displaying an image using the first to third sensing points P1, P2, P2 ′. The first sensing point P1 and the second sensing point are recognized and stored in the same manner as in the examples of FIGS. In the example of FIG. 8, when the user touches the touch panel 340 and then moves the finger in an arc shape centered on P1, the touch position at the time when the touch is released is recognized and stored as the third sensing point P2 ′. . Further, it is separated from the display 30 at P2 ′ in FIG. At this time, the touch position when the touch is released is recognized and stored as the third sensing point P2 ′.

これにより、ディスプレイ30上の画面は、P1・P2のなす線分と、P1・P2'のなす線分との間の角度に比例した角度分、回転表示される。   Thereby, the screen on the display 30 is rotated and displayed by an angle proportional to the angle between the line segment formed by P1 and P2 and the line segment formed by P1 and P2 ′.

なお、図6乃至8を参照して拡大操作、縮小操作及び回転操作を個別に説明したが、制御部720は2回目のタッチが継続している間これらの操作を個別に実行してもよく、また拡大操作と回転操作、縮小操作と回転操作を同時に実行してもよい。   Although the enlargement operation, the reduction operation, and the rotation operation have been described individually with reference to FIGS. 6 to 8, the control unit 720 may execute these operations individually while the second touch is continued. Further, the enlargement operation and the rotation operation, and the reduction operation and the rotation operation may be executed simultaneously.

図9は、本実施形態に係る、ゴーストを利用して設定した第1乃至第3感知点P1, P2, P2'を用いた別の処理の例を図示している。本実施形態では、テキスト入力アプリケーションを例として説明している。   FIG. 9 illustrates an example of another process using the first to third sensing points P1, P2, P2 ′ set using a ghost according to the present embodiment. In the present embodiment, a text input application is described as an example.

図9は、テキスト入力アプリケーション中で、入力したテキストの選択範囲を指定する操作の流れを図示したものである。図9(1)では、テキストの表示を移動させて選択したい範囲の始点もしくは終点がディスプレイ30上に表示されるようにする。その後、選択範囲の始点または終点(図9の例では始点)に指を触れ、一定時間(図3のS30のt1に相当する時間)その位置で指のタッチパネル340への接触を維持することにより、ゴーストGを表示させる(図9(3))。ゴーストGはユーザがタッチパネル340から指を離した後も表示され続ける(図9(4))。   FIG. 9 illustrates a flow of operations for designating a selection range of input text in the text input application. In FIG. 9 (1), the text display is moved so that the start point or end point of the range to be selected is displayed on the display 30. Thereafter, by touching the start point or end point (start point in the example of FIG. 9) of the selection range with a finger and maintaining contact of the finger with the touch panel 340 at that position for a certain period of time (a time corresponding to t1 of S30 in FIG. 3). Then, the ghost G is displayed (FIG. 9 (3)). Ghost G continues to be displayed even after the user lifts his / her finger from touch panel 340 (FIG. 9 (4)).

その後、ユーザが所定時間(図5ステップS120のt2に相当)内にタッチパネル340を再びタッチすると、タッチ点が第2感知点として認識、記憶される(図5ステップS150)。これにより、ゴーストGの指す第1感知点から第2感知点までの間に対応する文字列が選択される(図9(5))。ユーザがそのまま指をタッチパネル340から離すことなく指を動かすと、タッチ点が第3感知点と認識され、選択範囲がそれに応じて変更される(図9(6))。ユーザがタッチパネル340から指を離すと(図5ステップS230)、タッチ解除時点でのタッチ点が第3感知点と認識され、第1感知点と第3感知点との間に対応する文字列が最終的な選択範囲として指定される(図9(7))。   Thereafter, when the user touches the touch panel 340 again within a predetermined time (corresponding to t2 in FIG. 5 Step S120), the touch point is recognized and stored as the second sensing point (Step S150 in FIG. 5). Thereby, the character string corresponding to the period from the first sensing point to the second sensing point indicated by the ghost G is selected (FIG. 9 (5)). When the user moves the finger without releasing the finger from the touch panel 340, the touch point is recognized as the third sensing point, and the selection range is changed accordingly (FIG. 9 (6)). When the user lifts his / her finger from touch panel 340 (step S230 in FIG. 5), the touch point at the time of touch release is recognized as the third sensing point, and the corresponding character string is between the first sensing point and the third sensing point. The final selection range is designated (FIG. 9 (7)).

上記のようにして指定された文字列の選択範囲は、例えばその後、クリップボード領域にコピーするなどして利用することができる。図10は本実施形態に係る操作で指定した選択範囲をクリップボードにコピーする操作を図示したものである。図10の例においては、テキスト入力の最中であるので、ディスプレイ30がキーボード部分501と、クリップボード部分502と、テキスト入力部分503に分かれている。   The selection range of the character string designated as described above can be used by, for example, copying it to the clipboard area thereafter. FIG. 10 illustrates an operation of copying the selection range designated by the operation according to the present embodiment to the clipboard. In the example of FIG. 10, since text input is in progress, the display 30 is divided into a keyboard portion 501, a clipboard portion 502, and a text input portion 503.

図10において、テキスト入力部分503中に選択範囲504が指定された後、ユーザが選択範囲504を再びタッチし、そのまま指とタッチパネル340との接触を維持しつつ指をクリップボード部分502に移動させる。これにより、選択範囲504が指の移動につれてドラッグされ、クリップボードにコピーされる。クリップボードにコピーされた選択範囲の文字列は、図10(3)に示すように、クリップボード部分502において強調表示されてもよい。また、図11に示す例のように、キーボード部分501とクリップボード部分503とを重なりあうように表示した構成(図11(1))において、クリップボード部分502を手前に表示させ(図11(2))、クリップボード内に保存された文字列を指でドラッグすることによりテキスト入力部分503のテキストにペーストすることもできる(図11(3)、(4))。   In FIG. 10, after the selection range 504 is designated in the text input portion 503, the user touches the selection range 504 again and moves the finger to the clipboard portion 502 while maintaining the contact between the finger and the touch panel 340. Thereby, the selection range 504 is dragged as the finger moves and copied to the clipboard. The character string of the selected range copied to the clipboard may be highlighted in the clipboard portion 502 as shown in FIG. Further, as in the example shown in FIG. 11, in the configuration in which the keyboard portion 501 and the clipboard portion 503 are displayed so as to overlap each other (FIG. 11 (1)), the clipboard portion 502 is displayed in front (FIG. 11 (2)). ) The character string stored in the clipboard can be pasted into the text of the text input portion 503 by dragging with a finger (FIGS. 11 (3) and 11 (4)).

上記実施形態では、ゴーストが1つのみしか表示さていないが、2つ以上のゴースト乃至は他の印が同時に表示され得る構成とすることもできる。この場合携帯端末装置は、印が示す感知点を元に入力信号を生成し、携帯端末装置のアプリケーション(例えば3D画像の操作などが挙げられるが、これに限定されない)に用いることができる。   In the above embodiment, only one ghost is displayed. However, two or more ghosts or other marks may be displayed at the same time. In this case, the mobile terminal device generates an input signal based on the sensing point indicated by the mark, and can be used for an application of the mobile terminal device (for example, but not limited to a 3D image operation).

また、本発明に係る複数点感知による入力方法のほかに、携帯端末装置は、2点を同時にタッチして2つの感知点信号を生成することによって2つの入力信号を生成する機能を備えていてもよい。   In addition to the input method based on multi-point sensing according to the present invention, the mobile terminal device has a function of generating two input signals by simultaneously touching two points to generate two sensing point signals. Also good.

また、第1感知点をディスプレイ30に表示せずに、メモリ610上にのみ記憶させることとしてもよい。このような処理により、ユーザの見た目上はゴーストを表示させないで操作させることが可能となる。   Further, the first sensing point may be stored only on the memory 610 without being displayed on the display 30. By such processing, it is possible to operate the user without displaying a ghost.

さらに、ゴーストの表示/非表示/図形の変更をユーザが設定することを可能としてもよい。この場合、携帯電話1000はゴーストの表示/非表示/図形の設定値をメモリ610に記憶しておく。制御部720は、メモリ610から当該設定値を読み出して、ゴーストの表示/非表示/図形の変更を判断し、判断の結果に応じた表示処理を行う。   Furthermore, it may be possible for the user to set display / non-display of ghost / change of figure. In this case, the cellular phone 1000 stores the display / non-display / graphic setting values of the ghost in the memory 610. The control unit 720 reads the setting value from the memory 610, determines whether to display / hide / change a ghost, and performs display processing according to the determination result.

本実施形態によれば、ユーザはタッチパネルを1点感知とするか、2点以上感知とするかを、指一本の操作で調節することができる。これにより、ユーザにとっての携帯端末装置の操作性が高まる。   According to the present embodiment, the user can adjust the touch panel to detect one point or two or more points with a single finger operation. Thereby, the operativity of the portable terminal device for a user increases.

(第2実施形態)
以下では、マウスを使用してディスプレイ上の位置指定を行う本発明の第2実施形態について説明する。
(Second Embodiment)
Below, 2nd Embodiment of this invention which performs the position designation | designated on a display using a mouse | mouth is described.

図13は、本実施形態に係る携帯端末装置1300の入力機能に関する機能構成図である。図13に示す携帯端末装置1300は図2の携帯電話1000とほぼ同様の構成であるが、ディスプレイ1330が表示手段330のみを含んでいる点、並びに入力インタフェース1340及び位置指定検出部1350を含んでいる点で異なっている。   FIG. 13 is a functional configuration diagram relating to the input function of the mobile terminal device 1300 according to the present embodiment. A mobile terminal device 1300 shown in FIG. 13 has substantially the same configuration as the mobile phone 1000 shown in FIG. 2, but includes a display 1330 that includes only the display means 330, and includes an input interface 1340 and a position designation detection unit 1350. Is different.

位置指定検出部1350は、入力インタフェース1340を介してマウス1360と接続されている。このような構成により、位置指定検出部1350は、ユーザによるマウス1360の操作による位置指定を感知すると、ディスプレイ1330上で指定された位置を示す感知点信号を生成して制御部720に送る。制御部720は、受け取った感知点信号を元に入力信号を生成することにより、携帯端末装置1300中のアプリケーションを操作する。ユーザがマウス1360の操作により入力信号を一つずつ携帯端末装置1300に入力する場合は、一旦マウス1360を操作して生成し制御部720に送られた感知点信号は、その感知点信号を元に入力信号が生成されるとメモリ610から削除される。携帯端末装置1300に、2点感知による2つの信号を入力する場合、本実施形態では、以下のように時間差でのタッチによる2点感知から入力信号を生成する。   The position designation detection unit 1350 is connected to the mouse 1360 via the input interface 1340. With such a configuration, when the position designation detection unit 1350 senses the position designation by the operation of the mouse 1360 by the user, the position designation detection unit 1350 generates a sensing point signal indicating the position designated on the display 1330 and sends it to the control unit 720. The control unit 720 operates an application in the mobile terminal device 1300 by generating an input signal based on the received sensing point signal. When the user inputs input signals to the mobile terminal device 1300 one by one by operating the mouse 1360, the sensing point signal generated once by operating the mouse 1360 and sent to the control unit 720 is based on the sensing point signal. When the input signal is generated, the memory 610 is deleted. In the case where two signals by two-point sensing are input to the mobile terminal device 1300, in the present embodiment, an input signal is generated from two-point sensing by touching with a time difference as follows.

図14は、本実施形態に係る携帯端末装置1300におけるユーザ操作によって、ゴーストによって第1感知点の位置を表示するステップを示すフローチャートである。   FIG. 14 is a flowchart illustrating steps of displaying the position of the first sensing point by ghost by a user operation in the mobile terminal device 1300 according to the present embodiment.

図14のステップS1410において、携帯端末装置1300のタッチ検出手段350は、マウス1360の操作による位置指定を感知する。位置指定が感知されると制御部720は、タイマT1を開始し(ステップS1420)、ユーザがマウス1360を動かすことなくマウス1360のボタンを押下している時間が所定時間t1を超えるか否かを計測する(ステップS1430)。タイマT1による計測中、位置指定検出部1350は、位置指定が解除したかを検知し(ステップS1440)、もし位置指定が解除されていれば、ステップS1445でタイマT1を停止してゴーストGを表示しないこととする。即ちこの場合、通常の一点感知による入力となる。位置指定解除時に位置指定が指示していたディスプレイ1330上の位置の情報は、位置指定解除後メモリ部620のキャッシュに一時的に保存され、ユーザのその後の携帯端末装置1300操作に用いることができる。キャッシュに一時的に保存された位置情報は、その後ユーザが再びマウス1360を操作して位置指定を行うことにより削除される。   In step S1410 of FIG. 14, the touch detection unit 350 of the portable terminal device 1300 senses position designation by operating the mouse 1360. When the position designation is detected, the control unit 720 starts a timer T1 (step S1420), and determines whether or not the time during which the user presses the button of the mouse 1360 without moving the mouse 1360 exceeds a predetermined time t1. Measurement is performed (step S1430). During the measurement by the timer T1, the position designation detection unit 1350 detects whether the position designation has been released (step S1440). If the position designation has been released, the timer T1 is stopped and the ghost G is displayed in step S1445. Do not do. That is, in this case, the input is based on normal one-point detection. The position information on the display 1330 designated by the position designation at the time of the position designation cancellation is temporarily stored in the cache of the memory unit 620 after the position designation cancellation, and can be used for the subsequent operation of the mobile terminal device 1300 by the user. . The position information temporarily stored in the cache is deleted when the user designates the position by operating the mouse 1360 again.

ステップS1440において、もしユーザがマウス1360のボタンを離しておらず位置指定が継続されていれば、制御部720は次にディスプレイ1330上のカーソル(指定位置)が移動したかを検知する(ステップS1450)。カーソルの移動が感知されると、タイマT1が解除される。その後、再びタイマT1が開始され、ステップS1420以降のステップが繰り返される。即ち本実施形態では、マウス1360のボタンを所定期間t1にわたって押下していたときにゴーストが表示されるようになっているため、カーソルの移動が感知されると、タイマT1を起動しなおすようになっている。   In step S1440, if the user has not released the button of mouse 1360 and the position designation is continued, control unit 720 next detects whether the cursor (designated position) on display 1330 has moved (step S1450). ). When the movement of the cursor is detected, the timer T1 is released. Thereafter, the timer T1 is started again, and the steps after step S1420 are repeated. That is, in this embodiment, since the ghost is displayed when the button of the mouse 1360 is pressed for a predetermined period t1, the timer T1 is restarted when the movement of the cursor is detected. It has become.

マウス1360が動くことなくディスプレイ1330上の一箇所に所定時間t1以上カーソルが留まっていると、制御部720はその箇所にゴーストG(第1感知点信号に対応する位置を示す印の例)を表示する(ステップS1435)。その様子を図式化した例が図4の(1)、(2)である。   If the cursor stays at one place on the display 1330 without moving the mouse 1360 for a predetermined time t1 or longer, the control unit 720 displays a ghost G (an example of a mark indicating a position corresponding to the first sensing point signal) at that place. It is displayed (step S1435). Examples of this situation are shown in FIG. 4 (1) and (2).

ステップS1435においてゴーストが表示されて以降のステップS1460からS1490は、ゴーストの位置を決定するための操作である。基本的に、ゴーストGが表示された後にマウス1360のボタンを離した時点におけるゴーストGの位置が、該ゴーストが示す位置情報としてメモリ610に保存される。より詳細には、制御部720はステップS1460においてユーザによる位置指定が解除されたか否かを判断する。位置指定解除が検知されれば、位置指定解除時におけるゴーストGの位置でゴーストを固定し、その位置情報をメモリ610に第1感知点P1の位置として保存する(ステップS1490)。後述する以降の操作において、第1感知点P1の位置を用いる場合は、ステップS1490で決定されキャッシュに保存されている位置情報が用いられる。   Steps S1460 to S1490 after the ghost is displayed in step S1435 are operations for determining the position of the ghost. Basically, the position of the ghost G when the button of the mouse 1360 is released after the ghost G is displayed is stored in the memory 610 as position information indicated by the ghost. More specifically, control unit 720 determines whether or not the position designation by the user has been canceled in step S1460. If the position designation release is detected, the ghost is fixed at the position of the ghost G at the time of the position designation release, and the position information is stored in the memory 610 as the position of the first sensing point P1 (step S1490). In the subsequent operations to be described later, when the position of the first sensing point P1 is used, the position information determined in step S1490 and stored in the cache is used.

ステップS1460で位置指定解除が検知されなかった場合、制御部720はさらにカーソルの移動があるか否かを検知する(ステップS1470)。カーソルの移動が検知された場合は、ゴーストGの表示をカーソルと共に移動する(ステップS1480)。移動先においてマウス1360のボタンを離し位置指定を解除すると、この移動先の位置において、第1感知点P1を示すゴーストが固定され、第1感知点P1の位置情報がメモリ610に一時保存される。この様子が、図4の(3)及び(4)に図示されている。   When the position designation release is not detected in step S1460, the control unit 720 further detects whether or not there is a cursor movement (step S1470). When the movement of the cursor is detected, the display of the ghost G is moved together with the cursor (step S1480). When the mouse 1360 button is released at the movement destination and the position designation is released, the ghost indicating the first sensing point P1 is fixed at the movement destination position, and the position information of the first sensing point P1 is temporarily stored in the memory 610. . This is illustrated in (3) and (4) of FIG.

次に、ゴーストGが表示された後の、第2及び第3感知点の感知について図15を参照しつつ説明する。   Next, detection of the second and third detection points after the ghost G is displayed will be described with reference to FIG.

一旦ゴーストGが表示されると、制御部720はタイマT2を開始する(ステップS15110)。タイマT2の計測時間を所定時間t2と比較し(ステップS15120)、タイマT2が所定時間t2を越えるまでの間に次の位置指定が感知されない場合、ゴーストGの表示は解除される(ステップS15130)。これにより、キャッシュに保存されていた第1感知点の位置情報も削除される。また、第1感知点を用いるコマンド以外の操作のためのマウス1360等の操作(例えば、ゴーストを用いるアプリケーションとは関係のないメニューの操作など)が行われたことが検知されると、その時点でゴーストは非表示となり、キャッシュに保存された第1感知点の位置情報も削除される。   Once ghost G is displayed, control unit 720 starts timer T2 (step S15110). The measurement time of the timer T2 is compared with the predetermined time t2 (step S15120), and if the next position designation is not detected before the timer T2 exceeds the predetermined time t2, the display of the ghost G is canceled (step S15130). . Thereby, the position information of the first sensing point stored in the cache is also deleted. Further, when it is detected that an operation of the mouse 1360 or the like for an operation other than the command using the first sensing point (for example, a menu operation unrelated to the application using the ghost) is performed, Thus, the ghost is hidden and the position information of the first sensing point stored in the cache is also deleted.

タイマT2がt2に達する前に位置指定検出部1350がマウス1360による位置指定を感知すると(ステップS15140)、制御部720はその点を第2感知点として認識する(ステップS15150)。第2感知点の位置情報は、キャッシュに保存されかつゴーストが示す第1感知点と共に、入力信号として様々な操作に用いられることができる。   If the position designation detection unit 1350 senses the position designation by the mouse 1360 before the timer T2 reaches t2 (step S15140), the control unit 720 recognizes that point as the second sensing point (step S15150). The position information of the second sensing point is stored in the cache and can be used for various operations as an input signal together with the first sensing point indicated by the ghost.

その後、ゴーストGが固定されている第1感知点(P1)とユーザがゴーストG表示後に指定した位置である第2感知点(P2)とがほぼ同じ位置にあるかどうかをさらに判断する(ステップS15160)。   Thereafter, it is further determined whether or not the first sensing point (P1) where the ghost G is fixed and the second sensing point (P2), which is a position designated by the user after the ghost G is displayed, are substantially at the same position (step S15160).

ここで、第1感知点と第2感知点とがほぼ同じ位置であるかどうかの判断は、第2感知点が第1感知点から一定の距離内に位置しているかどうかを判断することにより行うこととしてもよい。   Here, whether the first sensing point and the second sensing point are substantially the same position is determined by determining whether the second sensing point is located within a certain distance from the first sensing point. It may be done.

もし第1感知点と第2感知点とが同じ位置であれば、ステップS15200に進み、カーソルの移動があるか判断する。カーソルの移動がなければ、ステップS15180において、制御部720は位置指定が解除されたか否かを判断する(ステップS15180)。もし位置指定が解除されていれば、2回目の位置指定はダブルクリックであったと判断する(ステップS15190)。これにより、ゴーストGの表示は解除され、またタイマT2も解除される。尚、ステップS180における判断には、上記に記載した感知点の位置の比較に加えて、ゴーストGが表示された時間と、ステップS140において第2の位置指定が感知された時間との差に基づく判断をし、連続的にクリックがされた場合のみ(つまり2回の位置指定の時間間隔が短いもののみ)についてダブルクリックと判断するようにしてもよい。   If the first sensing point and the second sensing point are the same position, the process proceeds to step S15200, and it is determined whether there is a cursor movement. If there is no movement of the cursor, in step S15180, control unit 720 determines whether or not the position designation has been canceled (step S15180). If the position designation is cancelled, it is determined that the second position designation is a double click (step S15190). Thereby, the display of the ghost G is canceled, and the timer T2 is also canceled. The determination in step S180 is based on the difference between the time when the ghost G is displayed and the time when the second position designation is detected in step S140, in addition to the comparison of the positions of the sensing points described above. A determination may be made and it may be determined that a double-click is made only when clicks are made continuously (that is, only when the time interval between two position designations is short).

もしステップS200でカーソルが移動したと判断されれば、制御部720は移動中の指定位置を第3感知点(P2’)としてメモリ610に記憶する(ステップS15210)。   If it is determined in step S200 that the cursor has moved, the control unit 720 stores the specified position being moved in the memory 610 as the third sensing point (P2 ') (step S15210).

その後、制御部720は、第1感知点P1及び第3感知点P2'を用いて、ディスプレイ内の範囲選択を行う(ステップS15220)。この範囲選択は、カーソルを移動して、第1感知点P1と第3感知点P2'をそれぞれ対角の頂点とする長方形のサイズを変更することにより行うことができる。   Thereafter, the controller 720 selects a range in the display using the first sensing point P1 and the third sensing point P2 ′ (step S15220). This range selection can be performed by moving the cursor and changing the size of the rectangle having the first sensing point P1 and the third sensing point P2 ′ as diagonal vertices.

第3感知点の認識及び範囲選択は、位置指定が解除されるまで続けられ(ステップS230)、位置指定が解除されると選択範囲が確定する。   The recognition of the third sensing point and the range selection are continued until the position designation is released (step S230), and when the position designation is released, the selection range is determined.

一方、ステップS160において、第1感知点と第2感知点とが異なる場合はステップS230に進み、制御部720は移動中のカーソルの位置を第3感知点(P2’)としてメモリ610に記憶する(ステップS15240)。その後、制御部720は、ユーザの操作に応じて、第1乃至第3感知点P1, P2, P2'を用いて携帯端末装置1300の制御を行う(ステップS15250)。第3感知点の認識及び携帯端末装置1300の制御は、位置指定が解除されるまで続けられ(ステップS15260)、位置指定が解除されると処理が終了する。   On the other hand, if the first sensing point is different from the second sensing point in step S160, the process proceeds to step S230, and the control unit 720 stores the position of the moving cursor as the third sensing point (P2 ′) in the memory 610. (Step S15240). Thereafter, the control unit 720 controls the mobile terminal device 1300 using the first to third sensing points P1, P2, P2 ′ in accordance with a user operation (step S15250). The recognition of the third sensing point and the control of the mobile terminal device 1300 are continued until the position designation is released (step S15260), and the process ends when the position designation is released.

尚、上述の例ではタイマT2を使用した判断処理について説明したが、タイマT2は必ずしも必要なく、第2感知点を感知するまでゴーストを表示し続けることとしてもよい。   In the above example, the determination process using the timer T2 has been described. However, the timer T2 is not always necessary, and the ghost may be continuously displayed until the second sensing point is sensed.

また、上述の例では2回目のカーソルが移動している間第3感知点の認識を続けているが、カーソルを移動させて行う範囲選択や編集処理は、位置指定が解除されて始めて確定される。そこで、2回目のカーソルが解除されるまでは、選択範囲や編集途中の画像を破線等で動的に表示し、カーソルが解除された時点で確定後の選択範囲や編集された画像を表示させることとしてもよい。また、カーソルが解除されるまでは選択範囲や編集途中の画像を表示しないこととしてもよい。   In the above example, the third sensing point is continuously recognized while the cursor is moved for the second time. However, the range selection and editing processing performed by moving the cursor is determined only after the position designation is canceled. The Therefore, until the second cursor is released, the selection range and the image being edited are dynamically displayed with broken lines, etc., and the selected range and the edited image are displayed when the cursor is released. It is good as well. Further, the selection range and the image being edited may not be displayed until the cursor is released.

本発明の一実施形態にかかる入力装置の一例である携帯電話の一例を示す構成図である。It is a block diagram which shows an example of the mobile telephone which is an example of the input device concerning one Embodiment of this invention. 本発明の一実施形態にかかる入力装置の機能構成図である。It is a functional block diagram of the input device concerning one Embodiment of this invention. 本発明の実施形態にかかる、ゴースト表示操作の流れを示すフローチャートである。It is a flowchart which shows the flow of ghost display operation concerning embodiment of this invention. 本発明の実施形態にかかる、ゴースト表示操作の流れを示す説明図である。It is explanatory drawing which shows the flow of ghost display operation concerning embodiment of this invention. 本発明の実施形態にかかる、ゴースト表示後のタッチ操作によるタッチ感知の流れを示すフローチャートである。It is a flowchart which shows the flow of the touch detection by the touch operation after the ghost display concerning embodiment of this invention. 本発明の実施形態にかかる、ゴースト表示による2点入力機能を利用した例としての、画面拡大操作の流れを示す説明図である。It is explanatory drawing which shows the flow of screen expansion operation as an example using the two-point input function by the ghost display concerning embodiment of this invention. 本発明の実施形態にかかる、ゴースト表示による2点入力機能を利用した例としての、画面縮小操作の流れを示す説明図である。It is explanatory drawing which shows the flow of screen reduction operation as an example using the two-point input function by the ghost display concerning embodiment of this invention. 本発明の実施形態にかかる、ゴースト表示による2点入力機能を利用した例としての、画面回転操作の流れを示す説明図である。It is explanatory drawing which shows the flow of screen rotation operation as an example using the 2 point | piece input function by the ghost display concerning embodiment of this invention. 本発明の実施形態にかかる、ゴースト表示による2点入力機能を利用した例としての、文字列選択範囲指定操作の流れを示す説明図である。It is explanatory drawing which shows the flow of the character string selection range designation | designated operation as an example using the 2 point | piece input function by the ghost display concerning embodiment of this invention. 図9の操作例を用いて、文字列選択範囲をクリップボードにコピーする操作の流れを示す説明図である。It is explanatory drawing which shows the flow of operation which copies a character string selection range to a clipboard using the operation example of FIG. 図9、10の操作例を用いて、クリップボードにコピーした文字列選択範囲を用いて編集を行う操作の流れを示す説明図である。It is explanatory drawing which shows the flow of operation which edits using the character string selection range copied to the clipboard using the example of operation of FIG. 本発明の実施形態にかかる入力装置の一例である携帯電話のもう一つの例を示す構成図である。It is a block diagram which shows another example of the mobile telephone which is an example of the input device concerning embodiment of this invention. 本発明の一実施形態にかかる入力装置の機能構成図である。It is a functional block diagram of the input device concerning one Embodiment of this invention. 本発明の実施形態にかかる、ゴースト表示操作の流れを示すフローチャートである。It is a flowchart which shows the flow of ghost display operation concerning embodiment of this invention. 本発明の実施形態にかかる、ゴースト表示後の操作による位置指定感知の流れを示すフローチャートである。It is a flowchart which shows the flow of the position designation sensing by operation after the ghost display concerning embodiment of this invention.

符号の説明Explanation of symbols

15 筐体
20 マイク
30 ディスプレイ
40 スピーカ
50 アンテナ
60 メモリ
70 CPU
720 制御部
330 表示手段
340 タッチパネル
350 タッチ検出手段
1000 携帯電話
1330 ディスプレイ
1340 入力インタフェース
1350 位置指定検出部
1360 マウス
1300 携帯端末装置
15 Housing 20 Microphone 30 Display 40 Speaker 50 Antenna 60 Memory 70 CPU
720 Control unit 330 Display unit 340 Touch panel 350 Touch detection unit 1000 Mobile phone 1330 Display 1340 Input interface 1350 Position designation detection unit 1360 Mouse 1300 Mobile terminal device

Claims (12)

ディスプレイと、前記ディスプレイ上の位置を指定する位置指定手段と、前記位置指定手段による位置指定を検出する位置指定検出手段と、前記位置指定検出手段が前記ディスプレイ上で指定された位置を感知することによって生成する感知点信号を元に入力信号を生成する制御手段と、前記制御手段に接続されたメモリとを有する入力装置であって、
前記位置指定手段により第1の所定の時間以上前記ディスプレイ上の位置を指定し続けると、前記位置指定検出手段は第1感知点信号を生成して前記制御手段に送り、前記制御手段は前記第1感知点信号を前記メモリに記憶し、
前記第1感知点信号生成から第2の所定の時間以内に前記位置指定手段により前記ディスプレイ上の新たな位置を指定すると、前記位置指定検出手段は新たに指定した位置を示す第2感知点信号を前記制御手段に送り、前記制御手段は前記第1感知点信号と共に前記第2感知点信号を前記メモリに記憶し、
その後前記位置指定を解除するまでの位置を示す第3感知点信号を前記制御手段に送り、前記制御手段は前記第1感知点信号及び第2感知点信号と共に前記第3感知点信号を前記メモリに記憶し、
前記制御手段は、前記第1感知点信号を元に第1入力信号を生成し、前記第2及び第3感知点信号のいずれか一方を元に第2入力信号を生成することを特徴とする入力装置。
A display, position specifying means for specifying a position on the display, position specification detecting means for detecting position specification by the position specifying means, and the position specification detecting means for sensing a position specified on the display. An input device having control means for generating an input signal based on a sensing point signal generated by the memory and a memory connected to the control means,
When the position designation means continues to designate the position on the display for a first predetermined time or more, the position designation detection means generates a first sensing point signal and sends it to the control means, and the control means 1 sensing point signal is stored in the memory,
When a new position on the display is designated by the position designation means within a second predetermined time from the generation of the first sense point signal, the position designation detection means displays a second sense point signal indicating the newly designated position. To the control means, which stores the second sensing point signal in the memory together with the first sensing point signal,
Thereafter, a third sensing point signal indicating a position until the position designation is canceled is sent to the control means, and the control means stores the third sensing point signal together with the first sensing point signal and the second sensing point signal in the memory. Remember
The control unit generates a first input signal based on the first sensing point signal, and generates a second input signal based on one of the second and third sensing point signals. Input device.
前記制御手段は、前記第1感知点信号を前記メモリに記憶するとともに、前記ディスプレイに前記第1感知点信号に対応する位置を示す印を表示することを特徴とする請求項1に記載の入力装置。   2. The input according to claim 1, wherein the control unit stores the first sensing point signal in the memory and displays a mark indicating a position corresponding to the first sensing point signal on the display. apparatus. 前記位置指定手段はタッチ操作可能なタッチパネルであることを特徴とする請求項1または2に記載の入力装置。   The input device according to claim 1, wherein the position specifying unit is a touch panel that can be touch-operated. 前記位置指定検出手段は、前記位置指定手段が前記第1の所定の時間以上、ほぼ移動することなく前記位置指定を続けその後位置指定が解除されたとき、前記第1感知点信号を生成して前記制御手段に送ることを特徴とする請求項1ないし3のいずれかに記載の入力装置。   The position designation detecting means generates the first sensing point signal when the position designation means continues the position designation without moving substantially for the first predetermined time or more and then the position designation is released. The input device according to claim 1, wherein the input device is sent to the control means. 前記制御手段は、前記第2及び第3感知点信号のいずれか他方を元に第3入力信号を生成することを特徴とする請求項1ないし4のいずれかに記載の入力装置。   5. The input device according to claim 1, wherein the control unit generates a third input signal based on one of the second and third sensing point signals. 前記制御手段は、前記第1、第2、第3入力信号に基づき、前記第1入力信号に対応する感知点及び前記第2入力信号に対応する感知点のなす線分と、前記第1入力信号に対応する感知点及び前記第3入力信号に対応する感知点のなす線分とを元に、前記ディスプレイに表示する画像を制御することを特徴とする請求項5に記載の入力装置。   The control means is based on the first, second, and third input signals, a line formed by a sensing point corresponding to the first input signal and a sensing point corresponding to the second input signal, and the first input. 6. The input device according to claim 5, wherein an image to be displayed on the display is controlled based on a sensing point corresponding to the signal and a line segment formed by the sensing point corresponding to the third input signal. 前記制御手段は、前記第1、第2入力信号に基づき、前記第1入力信号に対応する位置及び前記第2入力信号に対応する位置との間の、前記ディスプレイに表示された文字列を選択することを特徴とする請求項1ないし4のいずれかに記載の入力装置。   The control means selects a character string displayed on the display between a position corresponding to the first input signal and a position corresponding to the second input signal based on the first and second input signals. The input device according to claim 1, wherein the input device is an input device. ディスプレイと、前記ディスプレイ上の位置を指定する位置指定手段と、前記位置指定手段による位置指定を検出する位置指定検出手段と、前記位置指定検出手段が前記ディスプレイ上で指定された位置を感知することによって生成する感知点信号を元に入力信号を生成する制御手段と、前記制御手段に接続されたメモリとを有する入力装置に入力をする方法であって、
前記位置指定手段により第1の所定の時間以上前記ディスプレイ上の位置を指定し続け、その後に位置指定を解除したことを前記位置指定検出手段が感知し第1感知点信号を生成するステップと、
前記制御手段が、前記第1感知点信号を前記位置指定検出手段から受け取るステップと、
前記制御手段が、受け取った前記第1感知点信号を前記メモリに記憶させるステップと、
前記第1感知点信号生成から第2の所定の時間以内に前記位置指定手段により前記ディスプレイ上の新たな位置を指定すると、前記位置指定検出手段が検出した位置を示す第2感知点信号を前記制御手段に送るステップと、
前記制御手段が前記第1感知点信号と共に前記第2感知点信号を前記メモリに記憶するステップと、
その後前記位置指定を解除するまでの位置を示す第3感知点信号を前記タッチ検出手段が前記制御手段に送るステップと、
前記制御手段が前記第1感知点信号及び第2感知点信号と共に前記第3感知点信号を前記メモリに記憶するステップと、
前記制御手段が、前記第1感知点信号を元に第1入力信号を生成し、前記第2及び第3感知点信号のいずれか一方を元に第2入力信号を生成するステップと
を有することを特徴とする入力方法。
A display, position specifying means for specifying a position on the display, position specification detecting means for detecting position specification by the position specifying means, and the position specification detecting means for sensing a position specified on the display. A method for inputting to an input device having a control means for generating an input signal based on a sensing point signal generated by the memory and a memory connected to the control means,
Continuing to designate a position on the display for a first predetermined time or more by the position designation means, and then detecting that the position designation is released and generating a first sensing point signal;
The control means receiving the first sensing point signal from the position designation detection means;
The control means storing the received first sensing point signal in the memory;
When a new position on the display is designated by the position designation means within a second predetermined time from the generation of the first sense point signal, a second sense point signal indicating the position detected by the position designation detection means is obtained. Sending to the control means;
The control means storing the second sensing point signal in the memory together with the first sensing point signal;
A step in which the touch detection means sends a third sensing point signal indicating a position until the position designation is canceled to the control means;
The control means storing the third sensing point signal in the memory together with the first sensing point signal and the second sensing point signal;
And a step of generating a first input signal based on the first sensing point signal and generating a second input signal based on one of the second and third sensing point signals. An input method characterized by
前記制御手段が、前記ディスプレイに前記第1感知点信号に対応する位置を示す印を表示するステップをさらに有することを特徴とする請求項8に記載の入力方法。   9. The input method according to claim 8, further comprising a step of displaying a mark indicating a position corresponding to the first sensing point signal on the display. 前記位置指定手段としてタッチ操作可能なタッチパネルを使用することを特徴とする請求項8または9に記載の入力方法。   The input method according to claim 8 or 9, wherein a touch panel capable of touch operation is used as the position specifying means. 前記第1感知点信号を生成するステップにおいて、前記位置指定検出手段は、前記第1の所定の時間以上、ほぼ移動することなく前記位置指定が継続しその後解除されたとき、前記第1感知点信号を生成して前記制御手段に送ることを特徴とする請求項8ないし10のいずれかに記載の入力方法。   In the step of generating the first sensing point signal, the position designation detecting means detects the first sensing point when the position designation continues without being moved substantially for the first predetermined time or more and then released. 11. The input method according to claim 8, wherein a signal is generated and sent to the control means. 前記制御手段が前記第2及び第3感知点信号のいずれか他方を元に第3入力信号を生成するステップをさらに有することを特徴とする請求項8ないし11のいずれかに記載の入力方法。   12. The input method according to claim 8, further comprising the step of generating a third input signal based on one of the second and third sensing point signals by the control means.
JP2008235133A 2008-09-12 2008-09-12 Input device for input of multiple points, and input method by input of multiple points Pending JP2010067178A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008235133A JP2010067178A (en) 2008-09-12 2008-09-12 Input device for input of multiple points, and input method by input of multiple points

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008235133A JP2010067178A (en) 2008-09-12 2008-09-12 Input device for input of multiple points, and input method by input of multiple points

Publications (1)

Publication Number Publication Date
JP2010067178A true JP2010067178A (en) 2010-03-25

Family

ID=42192686

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008235133A Pending JP2010067178A (en) 2008-09-12 2008-09-12 Input device for input of multiple points, and input method by input of multiple points

Country Status (1)

Country Link
JP (1) JP2010067178A (en)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS58103744A (en) * 1981-12-16 1983-06-20 Hitachi Ltd Manufacturing method for fluorescent lamp
JP2011034451A (en) * 2009-08-04 2011-02-17 Fujitsu Component Ltd Touch panel device, method, program, and recording medium
JP2012194915A (en) * 2011-03-17 2012-10-11 Seiko Epson Corp Image display system
JP2013504794A (en) * 2008-09-09 2013-02-07 マイクロソフト コーポレーション Time separation touch input
WO2013077359A1 (en) * 2011-11-25 2013-05-30 シャープ株式会社 Electronic device, method of operating electronic device, and program
JP2013143129A (en) * 2012-01-11 2013-07-22 Samsung Electronics Co Ltd Screen enlargement device and method in electronic apparatus having touch screen
JP2014010777A (en) * 2012-07-02 2014-01-20 Fujitsu Ltd Display program, display method, and information processing device
WO2014112029A1 (en) * 2013-01-15 2014-07-24 日立マクセル株式会社 Information processing device, information processing method, and program
JP2014182420A (en) * 2013-03-18 2014-09-29 Casio Comput Co Ltd Image processing apparatus and program
JP2014209334A (en) * 2013-03-26 2014-11-06 株式会社Nttドコモ Information terminal, display control method, and display control program
JP2014235524A (en) * 2013-05-31 2014-12-15 グリー株式会社 Information processing method, information processing system and program
JP2016024580A (en) * 2014-07-18 2016-02-08 富士通株式会社 Information processing apparatus, input control method, and input control program
JP2016099944A (en) * 2014-11-26 2016-05-30 京セラ株式会社 Electronic apparatus
JP2017004565A (en) * 2016-09-29 2017-01-05 グリー株式会社 Information processing method, information processing system and program
JP2017016711A (en) * 2016-10-26 2017-01-19 富士通株式会社 Display program
JP2020039958A (en) * 2018-07-03 2020-03-19 グリー株式会社 Game processing program, game processing method, and game processing system
JP2020116425A (en) * 2014-04-04 2020-08-06 株式会社コロプラ User interface program and game program

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS58103744A (en) * 1981-12-16 1983-06-20 Hitachi Ltd Manufacturing method for fluorescent lamp
JP2013504794A (en) * 2008-09-09 2013-02-07 マイクロソフト コーポレーション Time separation touch input
JP2011034451A (en) * 2009-08-04 2011-02-17 Fujitsu Component Ltd Touch panel device, method, program, and recording medium
JP2012194915A (en) * 2011-03-17 2012-10-11 Seiko Epson Corp Image display system
WO2013077359A1 (en) * 2011-11-25 2013-05-30 シャープ株式会社 Electronic device, method of operating electronic device, and program
JP2013143129A (en) * 2012-01-11 2013-07-22 Samsung Electronics Co Ltd Screen enlargement device and method in electronic apparatus having touch screen
JP2014010777A (en) * 2012-07-02 2014-01-20 Fujitsu Ltd Display program, display method, and information processing device
JPWO2014112029A1 (en) * 2013-01-15 2017-01-19 日立マクセル株式会社 Information processing apparatus, information processing method, and program
CN104838347A (en) * 2013-01-15 2015-08-12 日立麦克赛尔株式会社 Information processing device, information processing method, and program
WO2014112029A1 (en) * 2013-01-15 2014-07-24 日立マクセル株式会社 Information processing device, information processing method, and program
JP2014182420A (en) * 2013-03-18 2014-09-29 Casio Comput Co Ltd Image processing apparatus and program
JP2014209334A (en) * 2013-03-26 2014-11-06 株式会社Nttドコモ Information terminal, display control method, and display control program
JP2014235524A (en) * 2013-05-31 2014-12-15 グリー株式会社 Information processing method, information processing system and program
JP2020116425A (en) * 2014-04-04 2020-08-06 株式会社コロプラ User interface program and game program
JP7174820B2 (en) 2014-04-04 2022-11-17 株式会社コロプラ User interface programs and game programs
JP2022000769A (en) * 2014-04-04 2022-01-04 株式会社コロプラ User interface program and game program
JP2016024580A (en) * 2014-07-18 2016-02-08 富士通株式会社 Information processing apparatus, input control method, and input control program
JP2016099944A (en) * 2014-11-26 2016-05-30 京セラ株式会社 Electronic apparatus
JP2017004565A (en) * 2016-09-29 2017-01-05 グリー株式会社 Information processing method, information processing system and program
JP2017016711A (en) * 2016-10-26 2017-01-19 富士通株式会社 Display program
JP2020039958A (en) * 2018-07-03 2020-03-19 グリー株式会社 Game processing program, game processing method, and game processing system

Similar Documents

Publication Publication Date Title
JP2010067178A (en) Input device for input of multiple points, and input method by input of multiple points
JP5295328B2 (en) User interface device capable of input by screen pad, input processing method and program
JP4518955B2 (en) User interface using moved representation of contact area
JP4734435B2 (en) Portable game device with touch panel display
US9400567B2 (en) Explicit touch selection and cursor placement
KR101185634B1 (en) Terminal device, link selection method, and computer-readable recording medium stored thereon display program
EP2290506B1 (en) Information processing apparatus, information processing method, and program
JP6062548B2 (en) Device, method and graphical user interface for entering characters
KR100278359B1 (en) Computer device having screen magnification point input function and its control method
US20140059475A1 (en) Electronic document reproduction apparatus and reproducing method thereof
WO2015061761A1 (en) User interface for text input and virtual keyboard manipulation
US11822780B2 (en) Devices, methods, and systems for performing content manipulation operations
US11669243B2 (en) Systems and methods for activating and using a trackpad at an electronic device with a touch-sensitive display and no force sensors
JP2010108118A (en) Mobile terminal and character display program
JP2014157578A (en) Touch panel device, control method of touch panel device, and program
JP5512379B2 (en) Input device, input method, and input program
JPH11305933A (en) Input device and input method
JP5437899B2 (en) Input device, input method, and input program
KR20090089707A (en) Method and apparatus for zoom in/out using touch-screen
JP2018023792A (en) Game device and program
JP5769841B2 (en) Portable game device with touch panel display
JP2001195170A (en) Portable electronic equipment, input controller and storage medium
JP2014153833A (en) Electronic apparatus, character string operation method, and program
AU2019100594B4 (en) Systems and methods for activating and using a trackpad at an electronic device with a touch sensitive display and no force sensors
JP2015187866A (en) Portable game device including touch panel display and game program