WO2014203799A1 - 情報処理装置および制御プログラム - Google Patents

情報処理装置および制御プログラム Download PDF

Info

Publication number
WO2014203799A1
WO2014203799A1 PCT/JP2014/065590 JP2014065590W WO2014203799A1 WO 2014203799 A1 WO2014203799 A1 WO 2014203799A1 JP 2014065590 W JP2014065590 W JP 2014065590W WO 2014203799 A1 WO2014203799 A1 WO 2014203799A1
Authority
WO
WIPO (PCT)
Prior art keywords
range
area
information processing
selection operation
processing apparatus
Prior art date
Application number
PCT/JP2014/065590
Other languages
English (en)
French (fr)
Inventor
健文 大塚
祐一 矢吹
和典 森下
岸本　達雄
Original Assignee
シャープ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by シャープ株式会社 filed Critical シャープ株式会社
Publication of WO2014203799A1 publication Critical patent/WO2014203799A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop

Definitions

  • the present invention relates to a user interface of an information processing apparatus.
  • Patent Document 1 describes a portable terminal that displays a plurality of function screens respectively corresponding to a plurality of functions and that can execute processing such as search and copy between the function screens.
  • an operation for first specifying a target range such as copying or moving is received, and then an operation for selecting the specified range.
  • an operation for designating the copy (move) destination of the last selected range is accepted.
  • specify the range of the character string you want to copy by dragging, touch and select the next specified character string, and drag and drop the last selected character string to the position you want to copy
  • the one that can be copied by the procedure of is generally used.
  • the present invention has been made in view of the above problems, and an object thereof is to provide an information processing apparatus and a control program that facilitate selection of a specified range.
  • an information processing device performs a range specifying operation for specifying a range from a displayed image, performs a selection operation for selecting the range, and performs the selection.
  • An information processing apparatus that executes processing according to a predetermined operation when a predetermined operation is performed on the range in which the operation has been performed, and after the range specifying operation is performed, the image Region determination for determining whether the position where the selection operation is performed is included in the region where the range specifying operation is performed among a plurality of regions constituting the image when the selection operation is performed on And an operation determination unit that determines that the selection operation is a selection operation for selecting the range when it is determined that the region determination unit is included.
  • a control program performs a range designation operation for designating a range from a displayed image, performs a selection operation for selecting the range,
  • a control program for causing a computer to function as an information processing apparatus that executes processing according to a predetermined operation when a predetermined operation is performed on the range in which a selection operation has been performed, After the designation operation is performed, when the selection operation is performed on the image, the range designation operation is performed on the position where the selection operation is performed among a plurality of areas constituting the image.
  • FIG. 1 is a block diagram illustrating a main configuration of the information processing apparatus 1.
  • the information processing apparatus 1 is an apparatus that employs a graphical user interface (GUI).
  • GUI graphical user interface
  • the information processing apparatus 1 may be a separate display device such as a stationary personal computer.
  • a touch panel such as a mouse may be used.
  • the information processing apparatus 1 includes a control unit 10 that controls and controls its functions, a storage unit 20 that stores various data used in the information processing apparatus 1, and a touch panel 30.
  • the touch panel 30 includes an operation receiving unit 31 that receives a user operation and transmits it to the control unit 10, and a display unit 32 that displays an image according to the control of the control unit 10.
  • the display surface of the display unit 32 and the operation reception surface in the operation reception unit 31 are integrated.
  • the configuration that is not related to the feature point of the invention is not shown.
  • the control unit 10 includes an operation determination unit (operation determination unit) 11, an application execution unit 12, an application display management unit 13, an area determination unit (area determination unit) 14, and a copy processing unit 15.
  • the storage unit 20 stores display management information 21.
  • the operation determination unit 11 determines what operation the user has performed based on the data indicating the contents of the user operation received from the operation reception unit 31, and determines predetermined operations to each unit of the control unit 10 according to the determination result Execute the process.
  • the application execution unit 12 executes application software (hereinafter referred to as an application). In addition, the application execution unit 12 that has executed the application notifies the application display management unit 13 to that effect, and assigns a display area to the executed application.
  • application to be executed is not particularly limited, an example will be described in which an application having an electronic mail (hereinafter simply referred to as mail) transmission function and an application having a function of displaying a received mail text are executed.
  • the application display management unit 13 manages screen display by the executed application. Specifically, the application display management unit 13 determines the display area allocation for each application being executed, and records the determined allocation in the display management information 21. And the application execution part 12 displays the application currently performed according to the allocation recorded on the display management information 21, and a some application is displayed simultaneously.
  • the area determination unit 14 specifies an area where a range specifying operation, which is an operation for specifying a range to be copied, is performed, and the position where the selection operation is performed after the range specifying operation is in the specified area. Determine if it is included.
  • a range specifying operation which is an operation for specifying a range to be copied
  • the copy processing unit 15 performs a process of copying the character string in the specified range to the specified position in accordance with the notification from the operation determining unit 11. Further, when the designated range is selected, the copy processing unit 15 displays a copy object that includes the character string of the designated range and is movable on the display screen. In addition, the display position of the copy object is made to follow the position of the finger of the user who performs the drag operation on the display surface, and when the user performs a drop operation (operation to release the finger from the display surface), the copy object immediately before the finger is released. The touch position is identified as the copy destination position. Then, the application execution unit 12 is notified of the character string to be copied and the specified copy destination position, and the character string is copied.
  • the designation of the copy destination position is not limited to the drag-and-drop operation, and may be performed by, for example, a flick operation toward the copy destination position.
  • a copyable position on the trajectory of the flick operation or on the extension line may be set as the copy destination position.
  • the display management information 21 is information indicating allocation of an area for displaying an image for each application being executed.
  • the display management information 21 may be, for example, information that associates information (ID or the like) that identifies an application with an area (coordinate range) on the display screen.
  • FIG. 2 shows an outline of operation when copying is performed
  • FIG. 3 shows an outline of operation when copying is not performed after canceling the range designation.
  • an image including the first application display area 50 and the second application display area 60 is displayed on the display surface of the information processing apparatus 1.
  • the first application display area 50 an image generated when the application execution unit 12 executes an application that realizes the mail transmission function is displayed.
  • the second application display area 60 an image generated by the application executing unit 12 executing an application that realizes a received mail text display function is displayed.
  • the range of these display areas and the application for displaying an image in each display area are defined by the display management information 21.
  • a text box for inputting the body of an email in addition to a send button for sending an email, A soft key 52 used for character input is displayed. Further, a cursor 51 indicating the position where characters are input is displayed in the text box for inputting the mail body.
  • the text of the received mail is displayed, and a part of the character string of the mail text is specified as a range.
  • a marking 61 is displayed to indicate that the state has been reached.
  • the range designation method is not particularly limited. For example, when an operation of continuously touching a character string for a predetermined time is accepted, the range designation mode may be entered. In the range specification mode, when an operation for specifying the start position and the end position of the range is received, it is determined that the character string included in the range from the specified start position to the end position is specified. Also good.
  • (b) of FIG. 2 shows a state in which the selection operation is performed at the position P1 on the second application display area 60 in a state where the range of the character string is designated.
  • the selection operation is an operation (touch down operation) in which a finger touches a point on the display surface and the finger touches the display surface, and this state is maintained (touch down operation).
  • the selection operation may be a tap operation (an operation that touches the display surface for a short time).
  • the position P1 is a position where the marking 61 is not displayed, and is a position on the second application display area 60 where the range is specified, although it is outside the specified range.
  • the information processing apparatus 1 determines that the selection operation for the position P1 is a selection operation for selecting a designated range (a character string on which the marking 61 is displayed).
  • the copy object 70 including the character string of the selected range is displayed, and the user can move the copy object 70 by dragging on the display surface. . Further, the display of the marking 61 is ended.
  • the copy object 70 is dragged and dropped to the text box (text box for inputting the mail body) where the cursor 51 of the first application display area 50 is displayed.
  • the character string within the specified range is copied into the text box where the cursor 51 is displayed.
  • FIG. 3 shows an outline of the operation when the range designation is canceled and copying is not performed.
  • 3A shows the same state as FIG. 2A (a state in which the range is specified on the second application display area 60), and therefore the description thereof is omitted here.
  • the selection operation is performed at the position P ⁇ b> 2 on the first application display area 50 in a state where the character string is designated as a range. .
  • the position P2 where the selection operation is performed is outside the second application display area 60 where the range is specified.
  • the information processing apparatus 1 determines that the selection operation for the position P2 is an operation for canceling the selection range, and ends the display of the marking 61 as shown in FIG.
  • FIG. 4 is a flowchart illustrating an example of processing executed by the information processing apparatus 1.
  • the operation determination unit 11 determines that a range designation operation has been performed based on the information transmitted from the operation reception unit 31 (S1)
  • the operation determination unit 11 notifies the copy processing unit 15 of information indicating the range designated by the operation.
  • the copy processing unit 15 temporarily stores the character string in the notified range.
  • the operation determination unit 11 notifies the region determination unit 14 of information indicating the position on the display surface where the range specification operation has been performed, and the region determination unit 14 refers to the display management information 21 and performs the range specification operation.
  • the area where the process is performed is specified (S2).
  • the operation determination unit 11 determines that a selection operation (for example, an operation of touching the display surface with a finger) has been performed based on information transmitted from the operation reception unit 31 (S3), the position where the operation has been performed Is sent to the area determination unit 14. Then, the area determination unit 14 determines whether the position indicated by the notified information is in the area specified in S2, that is, whether the range designation operation and the selection operation are performed in the same area (S4, area determination). Step), and notifies the operation determination unit 11 of the determination result.
  • a selection operation for example, an operation of touching the display surface with a finger
  • the operation determination unit 11 cancels the range specification (S5) and ends the process.
  • the operation determination unit 11 performs a selection operation for selecting the specified range specified in the range specifying operation in S1. Determination (S6, operation determination step), and notifies the copy processing unit 15 to that effect. Thereby, the copy processing unit 15 generates a copy object including the stored character string and displays it at the position where the selection operation has been performed.
  • the operation processing unit 11 determines that a movement operation (for example, a drag operation) has been performed (S7), the operation processing unit 11 notifies the copy processing unit 15 of information indicating the position of the movement destination.
  • the display position is updated to the notified position.
  • the operation determination unit 11 determines that a copy destination position determination operation (for example, an operation of releasing a finger from the display surface) has been performed (S8), the operation determination unit 11 notifies the copy processing unit 15 of information indicating the determined position.
  • the copy processing unit 15 copies the stored character string to the notified position (S9), and ends the process.
  • a selection operation for selecting a designated range is performed for the display area for each application (first application display area 50 / second application display area 60 in FIGS. 2 and 3).
  • An example is shown in which “region” is used as a reference for determining whether or not the image has been received.
  • the “area” may be an area set by dividing one screen, and is not limited to this example.
  • each display screen may be the above-mentioned “area”.
  • each “area” does not have to be in a window format like the second application display area 60 of FIGS. 2 and 3.
  • the image displayed in each “area” may be based on an application, or may be based on other software or the like, and is not particularly limited.
  • a range of a plurality of icons (files) displayed in one “area” may be specified, or a part of an image displayed in one “area” may be specified.
  • a range may be designated as a processing target.
  • the above processing may be data movement, data import or export, data compression or decompression, and is not particularly limited.
  • the control block (especially the control unit 10) of the information processing apparatus 1 may be realized by a logic circuit (hardware) formed in an integrated circuit (IC chip) or the like, or software using a CPU (Central Processing Unit). It may be realized by.
  • the information processing apparatus 1 includes a CPU that executes instructions of a program that is software that realizes each function, and a ROM (Read Only Memory) in which the program and various data are recorded so as to be readable by a computer (or CPU).
  • a storage device (these are referred to as “recording media”), a RAM (Random Access Memory) for expanding the program, and the like are provided.
  • the objective of this invention is achieved when a computer (or CPU) reads the said program from the said recording medium and runs it.
  • a “non-temporary tangible medium” such as a tape, a disk, a card, a semiconductor memory, a programmable logic circuit, or the like can be used.
  • the program may be supplied to the computer via an arbitrary transmission medium (such as a communication network or a broadcast wave) that can transmit the program.
  • a transmission medium such as a communication network or a broadcast wave
  • the present invention can also be realized in the form of a data signal embedded in a carrier wave in which the program is embodied by electronic transmission.
  • the information processing apparatus 1 performs a range designation operation for designating a range from a displayed image, performs a selection operation for selecting the range, and enters the range in which the selection operation is performed.
  • An information processing apparatus that executes processing according to a predetermined operation when a predetermined operation is performed on the image, and the selection operation is performed on the image after the range specifying operation is performed.
  • Region determining means for determining whether the position where the selection operation is performed is included in the region where the range specifying operation is performed among a plurality of regions constituting the image; And an operation determination unit (operation determination unit 11) that determines that the selection operation is a selection operation for selecting the range when it is determined that the region determination unit is included.
  • the selection operation is a selection operation for selecting the specified range.
  • the above configuration is effective when the information processing apparatus is a mobile device with a small screen, when the specified range is small, or when the user is in an unstable state such as in a car while walking or running. is there. Further, according to the above configuration, since the range designation and selection of the range are completed within one region, a smooth operation is realized.
  • the information processing apparatus 1 according to aspect 2 of the present invention is the information processing apparatus 1 according to aspect 1, wherein the operation determination unit is configured such that the region determination unit places the position where the selection operation is performed in the region where the range designation operation is performed.
  • the configuration may be such that, when it is determined that it is not included, it is determined that an operation for canceling the specification of the range has been performed.
  • the information processing apparatus 1 according to the aspect 3 of the present invention is the information processing apparatus 1 according to the aspect 1 or 2, wherein the area determination unit is one application being executed by the information processing apparatus among the plurality of areas constituting the image.
  • the position where the selection operation is performed is It may be configured to determine whether it is included in the application display area.
  • the user can select a specified range by performing a range specifying operation and a selection operation in an application display area where an image is displayed based on one application software being executed.
  • an image displayed based on one application software can be recognized as one grouped area, and processing related to the application software is usually performed in the area. . Therefore, the above-described configuration that enables the selection range to be selected by performing the range specification operation and the selection operation in the application display area realizes an operation method that is easy for the user to understand and easy to accept without any sense of incongruity. It can be said.
  • control program performs a range designation operation for designating a range from the displayed image, performs a selection operation for selecting the range, and performs the selection operation on the range in which the selection operation is performed.
  • An area for determining whether the position where the selection operation is performed is included in the area where the range specifying operation is performed among a plurality of areas constituting the image when the selection operation is performed on the image
  • a control program for realizing an information processing apparatus according to each aspect of the present invention by a computer is an information processing apparatus for realizing the information processing apparatus by a computer by causing the computer to operate as each unit included in the information processing apparatus. It can also be expressed as a control program. Further, a computer-readable recording medium that records the control program or the control program of the above aspect 4 also falls within the scope of the present invention.
  • the present invention can be used for an information processing apparatus operated by a user according to a user interface such as a personal computer, a tablet terminal, and a smartphone.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

　情報処理装置（１）は、選択操作が行われたときに、表示部に表示されている画像を構成する複数の領域（５０，６０）のうち、該選択操作（Ｐ１）が行われた領域と範囲指定操作（６１）が行われた領域とが一致するか判断する領域判断部と、領域判断部が一致すると判断した場合に、指定範囲に対して選択操作が行われたと判定する操作判定部とを備えている。

Description

情報処理装置および制御プログラム
　本発明は、情報処理装置のユーザインタフェースに関する。
　従来から、情報処理装置のユーザインタフェースをより利便性の高いものとするための技術の開発が進められている。例えば、下記の特許文献１には、複数の機能にそれぞれ対応する複数の機能画面を表示し、その機能画面間で検索、コピー等の処理を実行可能とした携帯端末が記載されている。
　ここで、文字列のコピーや移動等を行うための従来の一般的なユーザインタフェースでは、まずコピーや移動等の対象とする範囲を指定する操作を受け付け、次に指定された範囲を選択する操作を受け付け、最後に選択された範囲のコピー（移動）先を指定する操作を受け付けるようになっている。例えば、タッチパネル用のユーザインタフェースでは、コピーしたい文字列の範囲をドラッグ操作で指定し、次に指定した文字列にタッチして選択し、最後に選択した文字列をコピーしたい位置までドラッグしてドロップするという手順でコピーを行うことができるようにしたものが一般的に使用されている。
日本国公開特許公報「特表２０１２－５２１５９５号」（２０１２年９月１３日公表）
　しかしながら、上述のような従来技術では、範囲指定する操作を行った後、指定した範囲を選択するときに、誤って指定範囲から外れた位置を選択してしまうことがあった。指定範囲から外れた位置を選択すると、範囲指定が解除されるので、指定範囲に関する処理を実行させるために、ユーザは再度範囲指定操作からやり直すことになる。これは、特許文献１のような複数の機能画面間での処理に限られず、１つの機能に基づいて表示される画面内での処理においても同様に生じる問題点である。また、これはタッチパネルを用いる場合に限られず、マウス等の入力デバイスを用いる場合にも同様に生じる問題点である。
　本発明は、上記の問題点に鑑みてなされたものであり、その目的は、指定範囲の選択を容易にする情報処理装置および制御プログラムを提供することにある。
　上記の課題を解決するために、本発明の一態様に係る情報処理装置は、表示された画像から範囲を指定する範囲指定操作が行われ、該範囲を選択する選択操作が行われ、該選択操作が行われた上記範囲に対して所定の操作が行われた場合に、該所定の操作に応じた処理を実行する情報処理装置であって、上記範囲指定操作が行われた後、上記画像に対して選択操作が行われたときに、該選択操作の行われた位置が、該画像を構成する複数の領域のうち、上記範囲指定操作が行われた領域に含まれるか判断する領域判断手段と、上記領域判断手段が含まれると判断した場合に、当該選択操作が上記範囲を選択する選択操作であると判定する操作判定手段とを備えていることを特徴としている。
　また、本発明の一態様に係る制御プログラムは、上記の課題を解決するために、表示された画像から範囲を指定する範囲指定操作が行われ、該範囲を選択する選択操作が行われ、該選択操作が行われた上記範囲に対して所定の操作が行われた場合に、該所定の操作に応じた処理を実行する情報処理装置としてコンピュータを機能させるための制御プログラムであって、上記範囲指定操作が行われた後、上記画像に対して選択操作が行われたときに、該選択操作の行われた位置が、該画像を構成する複数の領域のうち、上記範囲指定操作が行われた領域に含まれるか判断する領域判断ステップと、上記領域判断ステップにて含まれると判断した場合に、当該選択操作が上記範囲を選択する選択操作であると判定する操作判定ステップとをコンピュータに実行させることを特徴としている。
　本発明の一態様によれば、指定範囲の選択を容易にすることができるという効果を奏する。
本発明の一実施形態に係る情報処理装置の要部構成を示すブロック図である。 コピーを行った場合の上記情報処理装置の動作概要を示す図である。 範囲指定をキャンセルしてコピーを行わなかった場合の上記情報処理装置の動作概要を示す図である。 上記情報処理装置が実行する処理の一例を示すフローチャートである。
　〔実施形態１〕
　〔装置構成〕以下、本発明の一実施形態について、図１から図４に基づいて詳細に説明する。まず、本実施形態に係る情報処理装置１の構成を図１に基づいて説明する。図１は、情報処理装置１の要部構成を示すブロック図である。
　情報処理装置１は、グラフィカルユーザインタフェース（ＧＵＩ）を採用した装置である。ここでは、情報処理装置１がスマートフォンである例を説明するがこの例に限られず、例えば据え置き型のパーソナルコンピュータのように、表示装置が別体となったものであってもよく、入力デバイスがマウス等のようなタッチパネル以外のものであってもよい。
　図示のように、情報処理装置１は、その機能を統括して制御する制御部１０、情報処理装置１において使用する各種データを格納する記憶部２０、およびタッチパネル３０を備えている。また、タッチパネル３０は、ユーザ操作を受け付けて制御部１０に伝達する操作受付部３１と、制御部１０の制御に従って画像を表示する表示部３２とを含む。表示部３２の表示面と、操作受付部３１における操作受付面とは一体となっている。なお、ここではタッチパネル３０（操作受付部３１）に対する操作を指で行う例を説明するが、スタイラス等の入力操作用のツールを用いて操作を行ってもよい。また、発明の特徴点と関連性の低い構成は図示を省略している。
　制御部１０は、操作判定部（操作判定手段）１１、アプリ実行部１２、アプリ表示管理部１３、領域判断部（領域判断手段）１４、およびコピー処理部１５を含む。また、記憶部２０には、表示管理情報２１が格納されている。
　操作判定部１１は、操作受付部３１から受信するユーザ操作の内容を示すデータに基づいて、ユーザがどのような操作を行ったかを判定し、この判定結果に応じて制御部１０の各部に所定の処理を実行させる。
　アプリ実行部１２は、アプリケーションソフトウェア（以下、アプリと呼ぶ）を実行する。また、アプリを実行したアプリ実行部１２は、その旨をアプリ表示管理部１３に通知して、実行したアプリに対する表示領域の割り当てを行わせる。実行するアプリは特に限定されないが、ここでは電子メール（以下、単にメールと呼ぶ）の送信機能を有するアプリと、受信メールの本文を表示させる機能を有するアプリとを実行する例を説明する。
　アプリ表示管理部１３は、実行されたアプリによる画面表示を管理する。具体的には、アプリ表示管理部１３は、実行中の各アプリに対して表示領域の割り当てを決定し、決定した割り当てを表示管理情報２１に記録する。そして、アプリ実行部１２が、表示管理情報２１に記録された割り当てに従って実行中のアプリを表示させることにより、複数のアプリが同時に表示される。
　領域判断部１４は、コピー対象とする範囲の指定を行うための操作である範囲指定操作が行われた領域を特定し、範囲指定操作後に選択操作が行われた位置が、特定した上記領域に含まれるか判定する。なお、以下では、範囲指定操作によって指定された範囲を指定範囲と呼ぶ。
　コピー処理部１５は、操作判定部１１からの通知に従って、指定範囲の文字列を指定された位置にコピーする処理を行う。また、コピー処理部１５は、指定範囲が選択されたときに、指定範囲の文字列を含み、表示画面上で移動可能なコピーオブジェクトを表示させる。また、コピーオブジェクトの表示位置を、表示面上でドラッグ操作を行うユーザの指の位置に追従させ、ユーザがドロップ操作（表示面から指を離す操作）を行ったときに、指が離れる直前のタッチ位置をコピー先の位置と特定する。そして、コピー対象の文字列と、特定したコピー先の位置とをアプリ実行部１２に通知して、当該文字列のコピーを実行させる。なお、コピー先の位置の指定はドラッグアンドドロップ操作に限られず、例えばコピー先の位置に向かうフリック操作によって行ってもよい。この場合、フリック操作の軌跡上、またはその延長線上にあるコピー可能な位置をコピー先の位置とすればよい。
　表示管理情報２１は、上述のように、実行中の各アプリに対する画像を表示する領域の割り当てを示す情報である。表示管理情報２１は、例えば、アプリを特定する情報（ＩＤ等）と、表示画面上の領域（座標範囲）とを対応付けた情報であってもよい。
　〔動作概要〕次に、情報処理装置１の動作概要を図２および図３に基づいて説明する。図２は、コピーを行った場合の動作概要を示し、図３は、範囲指定をキャンセルしてコピーを行わなかった場合の動作概要を示している。
　〔コピーが行われる場合〕図２の例では、第１アプリ表示領域５０と、第２アプリ表示領域６０とを含む画像が情報処理装置１の表示面に表示されている。第１アプリ表示領域５０には、アプリ実行部１２がメール送信機能を実現するアプリを実行することによって生成された画像が表示されている。また、第２アプリ表示領域６０には、アプリ実行部１２が受信メールの本文表示機能を実現するアプリを実行することによって生成された画像が表示されている。上述のように、これらの表示領域の範囲、および各表示領域に画像を表示させるアプリは、表示管理情報２１で規定されている。
　図２の（ａ）の第１アプリ表示領域５０には、差出人を入力するためのテキストボックスと、メールを送信するための送信ボタンに加えて、メールの本文を入力するためのテキストボックスと、文字入力に使用するソフトキー５２が表示されている。また、メールの本文を入力するためのテキストボックスには、文字入力がなされる位置を示すカーソル５１が表示されている。
　一方、図２の（ａ）の第２アプリ表示領域６０には、受信したメールの本文が表示されていると共に、メール本文の文字列の一部に、その一部の文字列が範囲指定された状態となっていることを示すマーキング６１が表示されている。なお、範囲指定の方法は特に限定されないが、例えば文字列に所定時間以上触れ続ける操作を受け付けたときに、範囲指定モードに遷移してもよい。そして、範囲指定モードにおいて、範囲の先頭位置と末尾位置とをそれぞれ指定する操作を受け付けたときに、指定された先頭位置から末尾位置までの範囲に含まれる文字列が範囲指定されたと判断してもよい。
　次に、図２の（ｂ）は、文字列が範囲指定された状態において、第２アプリ表示領域６０上の位置Ｐ１で選択操作が行われた状態を示している。なお、同図では、選択操作が、表示面の一点に触れて指と表示面とを接触した状態とし、この状態を維持する操作（タッチダウン操作）である例を示しているが、選択操作はこの例に限られない。例えば、選択操作をタップ操作（表示面に短時間触れる操作）としてもよい。
　ここで、位置Ｐ１は、マーキング６１が表示されていない位置であり、指定範囲外であるが、範囲指定の行われた第２アプリ表示領域６０上の位置である。このように、選択操作が行われた位置が範囲指定の行われた領域内である場合には、その選択操作は、指定範囲を選択するために行われた可能性が高いと考えられる。このため、情報処理装置１は、位置Ｐ１に対する選択操作を、指定範囲（マーキング６１が表示された文字列）を選択する選択操作であると判断する。
　これにより、図２の（ｃ）に示すように、選択範囲の文字列を含むコピーオブジェクト７０が表示され、ユーザはこのコピーオブジェクト７０を表示面上でドラッグして移動させることができるようになる。また、マーキング６１の表示が終了される。
　この後、第１アプリ表示領域５０のカーソル５１が表示されているテキストボックス（メールの本文を入力するためのテキストボックス）までコピーオブジェクト７０をドラッグしてドロップする。これにより、図２の（ｄ）に示すように、カーソル５１が表示されているテキストボックス内に、指定範囲内の文字列がコピーされる。
　〔範囲選択がキャンセルされる場合〕一方、図３は、範囲指定をキャンセルしてコピーを行わなかった場合の動作概要を示している。なお、図３の（ａ）は、図２の（ａ）と同じ状態（第２アプリ表示領域６０上で範囲指定された状態）を示しているから、ここでは説明を省略する。
　図３の（ｂ）に示すように、図３の例では、文字列が範囲指定された状態において、第１アプリ表示領域５０上の位置Ｐ２で選択操作が行われたことを想定している。この場合、選択操作が行われた位置Ｐ２は、範囲指定の行われた第２アプリ表示領域６０の外である。
　このように、選択操作が行われた位置が、範囲指定の行われた領域外である場合には、その選択操作は、指定範囲の選択を目的としていない可能性が高いと考えられる。このため、情報処理装置１は、位置Ｐ２に対する選択操作を、選択範囲をキャンセルするための操作であると判断し、図３の（ｃ）に示すように、マーキング６１の表示を終了する。
　〔処理の流れ〕続いて、情報処理装置１が実行する処理の流れを図４に基づいて説明する。図４は、情報処理装置１が実行する処理の一例を示すフローチャートである。
　まず、操作判定部１１は、操作受付部３１から送信される情報に基づき、範囲指定操作が行われたと判定すると（Ｓ１）、該操作で指定された範囲を示す情報をコピー処理部１５に通知し、コピー処理部１５は、通知された範囲の文字列を一時的に記憶する。また、操作判定部１１は、範囲指定操作が行われた表示面上の位置を示す情報を領域判断部１４に通知し、領域判断部１４は、表示管理情報２１を参照して、範囲指定操作が行われた領域を特定する（Ｓ２）。
　続いて、操作判定部１１は、操作受付部３１から送信される情報に基づき、選択操作（例えば表示面に指を触れる操作）が行われたと判定すると（Ｓ３）、該操作が行われた位置を示す情報を領域判断部１４に通知する。そして、領域判断部１４は、通知された情報の示す位置がＳ２で特定した領域内にあるか、すなわち範囲指定操作と選択操作とが同じ領域内で行われたかを判断し（Ｓ４、領域判断ステップ）、判断結果を操作判定部１１に通知する。
　ここで、同じ領域内で行われていないことを示す判定結果を受信した場合（Ｓ４でＮＯ）、操作判定部１１は、範囲指定をキャンセルし（Ｓ５）、処理を終了する。一方、同じ領域内で行われたことを示す判定結果を受信した場合（Ｓ４でＹＥＳ）、操作判定部１１は、Ｓ１の範囲指定操作で指定された指定範囲を選択する選択操作が行われたと判定し（Ｓ６、操作判定ステップ）、その旨をコピー処理部１５に通知する。これにより、コピー処理部１５は、記憶している文字列を含むコピーオブジェクトを生成して、選択操作が行われた位置に表示させる。
　続いて、操作判定部１１は、移動操作（例えばドラッグ操作）が行われたと判定すると（Ｓ７）、移動先の位置を示す情報をコピー処理部１５に通知し、コピー処理部１５はコピーオブジェクトの表示位置を通知された位置に更新する。
　そして、操作判定部１１は、コピー先の位置確定操作（例えば表示面から指を離す操作）が行われたと判定すると（Ｓ８）、確定された位置を示す情報をコピー処理部１５に通知し、コピー処理部１５は、記憶している文字列を通知された位置にコピーし（Ｓ９）、処理を終了する。
　〔実施形態２〕
　〔「領域」のバリエーション〕上記実施形態では、アプリごとの表示領域（図２および図３の第１アプリ表示領域５０／第２アプリ表示領域６０）を、指定範囲を選択する選択操作が行われたか否かの判断の基準となる「領域」とする例を示した。しかしながら、この「領域」は、１つの画面を区分することによって設定された領域であればよく、この例に限られない。
　例えば、メールの送受信機能を備えた１つのアプリによって、メールの作成画面と、受信メールの表示画面とを同時に表示させる場合、各表示画面の表示領域を上記の「領域」としてもよい。また、各「領域」は、図２および図３の第２アプリ表示領域６０のようなウインドウ形式である必要はない。そして、各「領域」に表示される画像は、アプリに基づくものであってもよいし、それ以外のソフトウェア等に基づくものであってもよく、特に限定されない。
　〔指定範囲に関する処理のバリエーション〕上記実施形態では、指定範囲内の文字列をコピーする処理を実行する例を説明したが、範囲指定の対象は文字列に限られず、また指定範囲に関する処理もコピーに限られない。
　例えば、１つの「領域」に表示されている複数のアイコン（ファイル）のうち、処理の対象とするものを範囲指定してもよいし、１つの「領域」に表示されている画像の一部分を処理の対象として範囲指定してもよい。また、上記の処理は、データの移動であってもよいし、データのインポートやエクスポートであってもよいし、データ圧縮や解凍であってもよく、特に限定されない。
　〔実施形態３：ソフトウェアによる実現例〕
　情報処理装置１の制御ブロック（特に制御部１０）は、集積回路（ＩＣチップ）等に形成された論理回路（ハードウェア）によって実現してもよいし、ＣＰＵ（Central Processing Unit）を用いてソフトウェアによって実現してもよい。
　後者の場合、情報処理装置１は、各機能を実現するソフトウェアであるプログラムの命令を実行するＣＰＵ、上記プログラムおよび各種データがコンピュータ（またはＣＰＵ）で読み取り可能に記録されたＲＯＭ（Read Only Memory）または記憶装置（これらを「記録媒体」と称する）、上記プログラムを展開するＲＡＭ（Random Access Memory）などを備えている。そして、コンピュータ（またはＣＰＵ）が上記プログラムを上記記録媒体から読み取って実行することにより、本発明の目的が達成される。上記記録媒体としては、「一時的でない有形の媒体」、例えば、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路などを用いることができる。また、上記プログラムは、該プログラムを伝送可能な任意の伝送媒体（通信ネットワークや放送波等）を介して上記コンピュータに供給されてもよい。なお、本発明は、上記プログラムが電子的な伝送によって具現化された、搬送波に埋め込まれたデータ信号の形態でも実現され得る。
　〔まとめ〕
　本発明の態様１に係る情報処理装置１は、表示された画像から範囲を指定する範囲指定操作が行われ、該範囲を選択する選択操作が行われ、該選択操作が行われた上記範囲に対して所定の操作が行われた場合に、該所定の操作に応じた処理を実行する情報処理装置であって、上記範囲指定操作が行われた後、上記画像に対して選択操作が行われたときに、該選択操作の行われた位置が、該画像を構成する複数の領域のうち、上記範囲指定操作が行われた領域に含まれるか判断する領域判断手段（領域判断部１４）と、上記領域判断手段が含まれると判断した場合に、当該選択操作が上記範囲を選択する選択操作であると判定する操作判定手段（操作判定部１１）とを備えている。
　上記の構成によれば、選択操作の行われた位置が、範囲指定操作が行われた領域に含まれると判断した場合に、その選択操作が指定範囲を選択する選択操作であると判定する。これにより、上記情報処理装置のユーザが誤って指定範囲から外れた位置に対して選択操作を行った場合であっても、その位置が範囲指定操作を行った領域内であれば、ユーザの意図通り、指定範囲に対する選択操作が行われたと判定する。
　よって、上記の構成によれば、指定範囲の選択を容易にすることができる。また、範囲を選択する選択操作を受け付ける領域を無暗に広げるのではなく、範囲指定操作が行われた領域で指定範囲を選択する選択操作を受け付けるようにしたことにより、ユーザの意図に沿った選択操作の解釈が可能になる。これは、選択操作の位置がずれて、意図せずに指定範囲外となることはあっても、その指定範囲を含む領域の外までずれることは生じ難いためである。特に、情報処理装置が画面の小さいモバイル機器である場合、指定範囲が小さい場合、あるいはユーザが歩行中や走行中の車内のような不安定な状態にある場合等に、上記の構成は有効である。また、上記の構成によれば、１つの領域内で範囲指定とその範囲の選択とが完結するため、スムーズな操作が実現される。
　そして、本発明の態様２に係る情報処理装置１は、上記態様１において、上記操作判定手段は、上記領域判断手段が、選択操作の行われた位置が上記範囲指定操作の行われた領域に含まれないと判断した場合に、上記範囲の指定をキャンセルする操作が行われたと判定する構成であってもよい。
　上記の構成によれば、選択操作の行われた位置は範囲指定操作の行われた領域に含まれないと判断した場合に、範囲の指定をキャンセルする操作が行われたと判定する。よって、ユーザは、範囲指定操作の行われた領域外に選択操作を行うという直感的な操作により、範囲の指定をキャンセルすることができる。
　また、本発明の態様３に係る情報処理装置１は、上記態様１または２において、上記領域判断手段は、上記画像を構成する複数の領域のうち、上記情報処理装置で実行中の１つのアプリケーションソフトウェアに基づいて画像が表示される領域であるアプリ表示領域において上記範囲指定操作が行われた後、上記画像に対して選択操作が行われたときに、該選択操作の行われた位置が、上記アプリ表示領域に含まれるか判断する構成であってもよい。
　上記の構成によれば、ユーザは、実行中の１つのアプリケーションソフトウェアに基づいて画像が表示されるアプリ表示領域において、範囲指定操作および選択操作を行うことによって、指定範囲の選択を行うことができる。ここで、一般に、１つのアプリケーションソフトウェアに基づいて表示される画像は、１つのまとまりのある領域として認識できるようになっており、またそのアプリケーションソフトウェアに関する処理はその領域内で行うことが通常である。よって、アプリ表示領域において範囲指定操作および選択操作を行うことによって指定範囲の選択を行うことができるようにした上記構成は、ユーザに分かりやすく、また違和感なく受け入れられやすい操作方法を実現していると言える。
　また、本発明の態様４に係る制御プログラムは、表示された画像から範囲を指定する範囲指定操作が行われ、該範囲を選択する選択操作が行われ、該選択操作が行われた上記範囲に対して所定の操作が行われた場合に、該所定の操作に応じた処理を実行する情報処理装置としてコンピュータを機能させるための制御プログラムであって、上記範囲指定操作が行われた後、上記画像に対して選択操作が行われたときに、該選択操作の行われた位置が、該画像を構成する複数の領域のうち、上記範囲指定操作が行われた領域に含まれるか判断する領域判断ステップと、上記領域判断ステップにて含まれると判断した場合に、当該選択操作が上記範囲を選択する選択操作であると判定する操作判定ステップとをコンピュータに実行させることを特徴としている。この構成によれば、態様１の情報処理装置と同様の効果を奏する。
　本発明の各態様に係る情報処理装置をコンピュータによって実現するための制御プログラムは、コンピュータを上記情報処理装置が備える各手段として動作させることにより上記情報処理装置をコンピュータにて実現させる情報処理装置の制御プログラムと表現することもできる。また、当該制御プログラムまたは上記態様４の制御プログラムを記録したコンピュータ読み取り可能な記録媒体も、本発明の範疇に入る。
　本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。さらに、各実施形態にそれぞれ開示された技術的手段を組み合わせることにより、新しい技術的特徴を形成することができる。
　本発明は、パーソナルコンピュータ、タブレット端末、スマートフォン等のユーザインタフェースに従ってユーザが操作する情報処理装置に利用することができる。
　１　情報処理装置
１１　操作判定部（操作判定手段）
１４　領域判断部（領域判断手段）

Claims (4)

  1. 　表示された画像から範囲を指定する範囲指定操作が行われ、該範囲を選択する選択操作が行われ、該選択操作が行われた上記範囲に対して所定の操作が行われた場合に、該所定の操作に応じた処理を実行する情報処理装置であって、
    　上記範囲指定操作が行われた後、上記画像に対して選択操作が行われたときに、該選択操作の行われた位置が、該画像を構成する複数の領域のうち、上記範囲指定操作が行われた領域に含まれるか判断する領域判断手段と、
    　上記領域判断手段が含まれると判断した場合に、当該選択操作が上記範囲を選択する選択操作であると判定する操作判定手段とを備えていることを特徴とする情報処理装置。
  2. 　上記操作判定手段は、上記領域判断手段が、選択操作の行われた位置が上記範囲指定操作の行われた領域に含まれないと判断した場合に、上記範囲の指定をキャンセルする操作が行われたと判定することを特徴とする請求項１に記載の情報処理装置。
  3. 　上記領域判断手段は、上記画像を構成する複数の領域のうち、上記情報処理装置で実行中の１つのアプリケーションソフトウェアに基づいて画像が表示される領域であるアプリ表示領域において上記範囲指定操作が行われた後、上記画像に対して選択操作が行われたときに、該選択操作の行われた位置が、上記アプリ表示領域に含まれるか判断することを特徴とする請求項１または２に記載の情報処理装置。
  4. 　表示された画像から範囲を指定する範囲指定操作が行われ、該範囲を選択する選択操作が行われ、該選択操作が行われた上記範囲に対して所定の操作が行われた場合に、該所定の操作に応じた処理を実行する情報処理装置としてコンピュータを機能させるための制御プログラムであって、
    　上記範囲指定操作が行われた後、上記画像に対して選択操作が行われたときに、該選択操作の行われた位置が、該画像を構成する複数の領域のうち、上記範囲指定操作が行われた領域に含まれるか判断する領域判断ステップと、
    　上記領域判断ステップにて含まれると判断した場合に、当該選択操作が上記範囲を選択する選択操作であると判定する操作判定ステップとをコンピュータに実行させることを特徴とする制御プログラム。
PCT/JP2014/065590 2013-06-19 2014-06-12 情報処理装置および制御プログラム WO2014203799A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013-128717 2013-06-19
JP2013128717A JP6029545B2 (ja) 2013-06-19 2013-06-19 情報処理装置および制御プログラム

Publications (1)

Publication Number Publication Date
WO2014203799A1 true WO2014203799A1 (ja) 2014-12-24

Family

ID=52104535

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/065590 WO2014203799A1 (ja) 2013-06-19 2014-06-12 情報処理装置および制御プログラム

Country Status (2)

Country Link
JP (1) JP6029545B2 (ja)
WO (1) WO2014203799A1 (ja)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000311040A (ja) * 1998-10-19 2000-11-07 Toshihiko Okabe データ引き渡し装置、データ引き渡し方法、及びデータ引き渡しプログラムを記録した記録媒体
JP2009294688A (ja) * 2008-04-28 2009-12-17 Toshiba Corp 情報処理装置、制御方法およびプログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000311040A (ja) * 1998-10-19 2000-11-07 Toshihiko Okabe データ引き渡し装置、データ引き渡し方法、及びデータ引き渡しプログラムを記録した記録媒体
JP2009294688A (ja) * 2008-04-28 2009-12-17 Toshiba Corp 情報処理装置、制御方法およびプログラム

Also Published As

Publication number Publication date
JP2015005046A (ja) 2015-01-08
JP6029545B2 (ja) 2016-11-24

Similar Documents

Publication Publication Date Title
US11301126B2 (en) Icon control method and terminal
JP6364893B2 (ja) 端末装置、電子ホワイトボードシステム、電子ホワイトボードの入力支援方法、及びプログラム
JP5728562B2 (ja) アプリケーションの保安性管理方法及びその電子装置
JP6559403B2 (ja) コンテンツ表示装置、コンテンツ表示方法及びプログラム
US20170364166A1 (en) User terminal device and method for controlling the user terminal device thereof
US9030436B2 (en) Information processing apparatus, information processing method, and program for providing specific function based on rate of change of touch pressure intensity
EP2290506B1 (en) Information processing apparatus, information processing method, and program
US9811349B2 (en) Displaying operations performed by multiple users
US20140082489A1 (en) Mobile device and method for controlling the same
KR20130080179A (ko) 휴대용 단말기에서 아이콘 관리 방법 및 장치
JP2022140510A (ja) 画像処理装置、画像処理装置の制御方法及びプログラム
JP6059114B2 (ja) 携帯端末、結合制御プログラムおよび結合制御方法
JP2008293361A (ja) 画面表示システム、その制御方法、プログラム及び記録媒体
US10496242B2 (en) Operation screen display device and recording medium recorded with display program
WO2014132863A1 (ja) 情報端末および制御プログラム
JP2016170613A (ja) 会議支援装置、会議支援システム、会議支援プログラム、及び会議支援方法
EP2955616A1 (en) Electronic device and method of editing icon in electronic device
US10755461B2 (en) Display device, display method, and recording medium
US20140165011A1 (en) Information processing apparatus
JP6209868B2 (ja) 情報端末、情報処理プログラム、情報処理システム、及び情報処理方法
US20220197501A1 (en) Information processing apparatus and non-transitory computer readable medium storing information processing program
JP6029545B2 (ja) 情報処理装置および制御プログラム
JP6773977B2 (ja) 端末装置及び操作制御プログラム
JP2011243061A (ja) 情報処理装置、情報処理装置の制御方法、制御プログラム、及び記録媒体
JP6720387B2 (ja) コンテンツ表示装置、コンテンツ表示方法及びプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14814338

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 14814338

Country of ref document: EP

Kind code of ref document: A1