JP2012505466A - タッチスクリーンを利用したオブジェクト管理方法及び装置 - Google Patents

タッチスクリーンを利用したオブジェクト管理方法及び装置 Download PDF

Info

Publication number
JP2012505466A
JP2012505466A JP2011530957A JP2011530957A JP2012505466A JP 2012505466 A JP2012505466 A JP 2012505466A JP 2011530957 A JP2011530957 A JP 2011530957A JP 2011530957 A JP2011530957 A JP 2011530957A JP 2012505466 A JP2012505466 A JP 2012505466A
Authority
JP
Japan
Prior art keywords
touch
input
screen
picked
touch input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011530957A
Other languages
English (en)
Other versions
JP5731979B2 (ja
Inventor
チュ，ヒョンウック
ヤン，ソンオク
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of JP2012505466A publication Critical patent/JP2012505466A/ja
Application granted granted Critical
Publication of JP5731979B2 publication Critical patent/JP5731979B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

【課題】タッチスクリーンでマルチフィンガー基盤のマルチタッチを利用してスクリーン上のオブジェクトを直観的で且つ便利に管理することができるマルチタッチを利用したオブジェクト管理方法及び装置に関する。
【解決手段】タッチスクリーン基盤のデバイスでオブジェクト管理方法において、第１マルチタッチ入力に対応する任意のオブジェクトをピックアップする過程と、第２マルチタッチ入力に対応して前記ピックアップされた前記オブジェクトをリリースする過程とを有する。
【選択図】図１

Description

本発明は、タッチスクリーンを有するデバイスに関し、特にスクリーン上に表示された複数のオブジェクト（ｏｂｊｅｃｔｓ）を操作（ｈａｎｄｌｉｎｇ）することができるタッチスクリーンを有するデバイスのためのオブジェクト管理方法及び装置に関する。
最近、タッチスクリーンは、携帯電話／ノートパソコン市場でタッチパネル搭載率が徐々に増加していて、大部分のスマートフォンにおいてタッチスクリーンパネルの採用が一般化されると見込まれ、携帯機器用タッチスクリーンが急成長する見込みである。また、家電部門でもタッチスクリーンパネルの採用が一般化していて、携帯機器に次いで、今後タッチスクリーンパネル採用分野として高い比重を占めるものと予想される。
最近、人間とタッチスクリーン間の自然な相互作用のために、視覚情報を基盤としたユーザ意図及び行為認識に対する研究が活発に進行している。例えば、指／ペンなどの入力ジェスチャーを認識し、ユーザフレンドリーなユーザインターフェースを具現している。また、現在では、タッチスクリーン上にシングルフィンガー（Ｓｉｎｇｌｅ−Ｆｉｎｇｅｒ）基盤のシングルタッチ（Ｓｉｎｇｌｅ−Ｔｏｕｃｈ）入力による動作を処理するユーザインターフェースにおいて、マルチフィンガー（Ｍｕｌｔｉ−Ｆｉｎｇｅｒ）基盤のマルチタッチ（Ｍｕｌｔｉ−Ｔｏｕｃｈ）入力による動作を処理するユーザインターフェースが具現されている。
一方、タッチスクリーンは、入力センシングをする表面と出力ディスプレイ役目をする表面が重なり合った構造を有する。したがって、前記タッチスクリーンでは、マルチタッチに基づいて入力されるユーザ意図を分析及び認知し、それによる結果を出力することができる。特に、マルチタッチ基盤のユーザインターフェースでは、タッチスクリーンと関連したハードウェア（Ｈ／Ｗ）及びソフトウェア（Ｓ／Ｗ）、そしてセンシング技術の発達に伴い、マルチタッチを支援する協力的な相互作用及び作業にその応用が拡大されている。これより、ユーザは、タッチスクリーン上で手のジェスチャーを直接使用して制御命令をデバイスに伝達し、デバイスは、手のジェスチャーによる入力センシングを通じてユーザ意図を分析及び認知し、それによる動作を処理した後、タッチスクリーンを通じてその結果を出力することができる。
以上のように、タッチスクリーンとは、ユーザが指やペン形状のタッチペン（ｔｏｕｃｈ ｐｅｎ）を利用してタッチスクリーン上でジェスチャーを発生すれば、デバイスがタッチスクリーン上に接触が起きた部分を分析及び認知し、当該命令を実行するように設計されたディスプレイ装置を言う。
前記タッチスクリーンが作動する原理は、スクリーン表面に加えられる圧力に反応する減圧式、喪失した電荷を感知し、タッチがなされる箇所を把握する静電式、赤外線が遮断されることを感知し、タッチ位置を把握する赤外線式など多様である。
一方、タッチスクリーンを備えたデバイスでは、タッチスクリーン上で発生するユーザの入力ジェスチャーをボタンの代わりに使用するので、ユーザインターフェースの便宜性が多く改善されているが、直観的な面においてまだ改善すべき部分が多く存在するのが実情である。このような背景から、タッチスクリーンを備えたデバイスにおいて、一層便利なユーザインターフェース及び付加機能を提供するための研究が活発に進行中にある。
本発明の目的は、タッチスクリーン上にマルチタッチ入力による直観的な出力を提供することができるタッチスクリーンを利用したオブジェクト管理方法及び装置を提供することにある。
本発明の他の目的は、タッチスクリーンでマルチタッチ入力に対応してスクリーン上にオブジェクトを直観的にハンドリングすることができるタッチスクリーンを利用したオブジェクト管理方法及び装置を提供することにある。
本発明のさらに他の目的は、ユーザのマルチタッチ入力によりタッチスクリーン上に表示中のオブジェクトに対するピックアップまたはリリース（ｒｅｌｅａｓｅ）具現が可能なユーザインターフェースを提供することにある。
本発明のさらに他の目的は、マルチタッチによるジェスチャーを利用して画面上に存在するオブジェクトのピックアップ及びリリースが可能なユーザインターフェースを通じて、直観的で且つ便利にオブジェクトを管理することができるタッチスクリーンを利用したオブジェクト管理方法及び装置を提供することにある。
上記目的を達成するために、本発明の一実施形態による方法は、タッチスクリーン基盤のデバイスでオブジェクト管理方法において、第１マルチタッチ入力に対応する任意のオブジェクトをピックアップする過程と、第２マルチタッチ入力に対応して前記ピックアップされた前記オブジェクトをリリースする過程と、を有する。
また、本発明の他の実施形態による装置は、タッチスクリーン基盤のデバイスにおいて、少なくとも１つのオブジェクトで構成された待機画面を表示し、マルチフィンガー基盤のマルチタッチを入力される表示部と、マルチフィンガー基盤のマルチタッチと関連した設定情報を保存し、第１マルチタッチによってピックアップされるオブジェクトまたは前記オブジェクトに対するマクロ情報を保存し、第２マルチタッチに応答して以前にピックアップされて保存されたオブジェクトを提供する保存部と、マルチフィンガー基盤のマルチタッチの種類を区分し、第１マルチタッチによって待機画面上の特定オブジェクトに対するピックアップを制御し、第２マルチタッチを感知する時、前記第１マルチタッチによってピックアップされて保存された少なくとも１つのオブジェクトに対するリリースを制御する制御部と、を有する。
前述したように、本発明で提案するマルチタッチを利用したオブジェクト管理方法及び装置によれば、タッチスクリーンデバイス上でマルチフィンガー基盤の多様なタッチ入力により効率的で且つ直観的にオブジェクト管理が可能である。画面上に存在するオブジェクトを、指による直観的なマルチタッチを利用してピックアップすることや、リリースする実生活のジェスチャーを具現することができる。これにより、タッチスクリーン基盤のデバイスを利用するユーザの便宜性と楽しさを加えた使用性を増大させることができる効果がある。
本発明によれば、直観的で且つ便利なマルチタッチの使用性を具現し、ユーザがデバイスを運用するにあたって、革新的な環境を提供することができる。また、本発明によれば、テレビ、モバイル製品、パソコン、プリンタ、オーディオ機器、白色家電などすべてのデバイスに適用して差別化を図ることができる。
本発明の実施形態によるマルチタッチを利用したオブジェクト制御動作を示す図である。 本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の画面例を示す図である。 本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の画面例を示す図である。 本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の画面例を示す図である。 本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の画面例を示す図である。 図２〜図５のピックアップ手続によってオブジェクトを保存する過程の例を示す図である。 本発明の実施形態によるマルチタッチ入力時に提供される付加機能の画面例を示す図である。 本発明の実施形態によるマルチタッチ入力時に提供される付加機能の画面例を示す図である。 本発明の実施形態によるマルチタッチ入力時に提供される付加機能の画面例を示す図である。 本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の画面例を示す図である。 本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の画面例を示す図である。 本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の画面例を示す図である。 本発明の実施形態による第２マルチタッチ入力によりオブジェクトをごみ箱機能のアイテムにリリースする過程の画面例を示す図である。 本発明の実施形態による第２マルチタッチ入力によりオブジェクトをごみ箱機能のアイテムにリリースする過程の画面例を示す図である。 本発明の実施形態による第２マルチタッチ入力によりオブジェクトをごみ箱機能のアイテムにリリースする過程の画面例を示す図である。 本発明の実施形態による第２マルチタッチ入力によりオブジェクトをごみ箱機能のアイテムにリリースする過程の画面例を示す図である。 本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。 本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。 本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。 本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。 本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。 本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の他の画面例を示す図である。 本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の他の画面例を示す図である。 本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の他の画面例を示す図である。 本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の他の画面例を示す図である。 本発明の実施形態による第１マルチタッチの連続入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。 本発明の実施形態による第１マルチタッチの連続入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。 本発明の実施形態による第１マルチタッチの連続入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。 本発明の実施形態による第１マルチタッチの連続入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。 本発明の実施形態による第１マルチタッチの連続入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。 本発明の実施形態による第１マルチタッチの連続入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。 本発明の実施形態による第１マルチタッチの連続入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。 本発明の実施形態による第１マルチタッチの連続入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。 本発明の実施形態による第１マルチタッチの連続入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。 本発明の実施形態による第２マルチタッチの連続入力によりオブジェクトをリリースする過程の他の例を示す図である。 本発明の実施形態による第２マルチタッチの連続入力によりオブジェクトをリリースする過程の他の例を示す図である。 本発明の実施形態による第２マルチタッチの連続入力によりオブジェクトをリリースする過程の他の例を示す図である。 本発明の実施形態による第２マルチタッチの連続入力によりオブジェクトをリリースする過程の他の例を示す図である。 本発明の実施形態による第２マルチタッチの連続入力によりオブジェクトをリリースする過程の他の例を示す図である。 本発明の実施形態による第２マルチタッチの連続入力によりオブジェクトをリリースする過程の他の例を示す図である。 本発明の実施形態による第２マルチタッチの連続入力によりオブジェクトをリリースする過程の他の例を示す図である。 本発明の実施形態によるマルチタッチ入力を利用してイメージを編集する過程の画面例を示す図である。 本発明の実施形態によるマルチタッチ入力を利用してイメージを編集する過程の画面例を示す図である。 本発明の実施形態によるマルチタッチ入力を利用してイメージを編集する過程の画面例を示す図である。 本発明の実施形態によるマルチタッチ入力を利用してイメージを編集する過程の画面例を示す図である。 本発明の実施形態によるマルチタッチを利用したオブジェクトの詳細制御動作を示す図である。 本発明の実施形態によるマルチタッチを利用したオブジェクトの詳細制御動作を示す図である。 本発明の実施形態によるマルチタッチを判別する方法を示す図である。 本発明の実施形態よって前記マルチタッチを判別する動作例を示す図である。 本発明の実施形態よって前記マルチタッチを判別する動作例を示す図である。 本発明に実施形態による第１マルチタッチ及び第２マルチタッチを入力する動作の例を示す図である。 本発明に実施形態による第１マルチタッチ及び第２マルチタッチを入力する動作の例を示す図である。 本発明の実施形態による第１マルチタッチを利用してオブジェクトを選択する方法を示す図である。 本発明の実施形態による第１マルチタッチを利用してオブジェクトを選択する方法を示す図である。 本発明の実施形態による第１マルチタッチを利用してオブジェクトを選択する他の方法を示す図である。 本発明の実施形態による第１マルチタッチを利用してオブジェクトを選択する他の方法を示す図である。 本発明の実施形態による第１マルチタッチを利用してオブジェクトを選択する他の方法を示す図である。 本発明の実施形態による第１マルチタッチ時にオブジェクトを認識する方法を示す図である。 本発明の実施形態による第１マルチタッチ時にオブジェクトを認識する方法を示す図である。 本発明の実施形態による第１マルチタッチ時にオブジェクトを認識する方法を示す図である。 本発明の実施形態による第１マルチタッチ入力後にこれを解除する動作例を示す図である。 本発明の実施形態による第１マルチタッチ入力後にこれを解除する動作例を示す図である。 本発明の実施形態による第１マルチタッチをゲームに応用する場合の例を示す図である。 本発明の実施形態による第１マルチタッチをゲームに応用する場合の例を示す図である。 本発明の実施形態による第１マルチタッチをゲームに応用する場合の例を示す図である。 本発明の実施形態によるマルチタッチを利用してデバイス間にオブジェクトを移動する動作例を示す図である。 図６６の実施形態によってデバイス間にオブジェクトを移動する動作例を示す図である。 図６６の実施形態によってデバイス間にオブジェクトを移動する動作例を示す図である。 図６６の実施形態によってデバイス間にオブジェクトを移動する動作例を示す図である。 図６６の実施形態によってデバイス間にオブジェクトを移動する動作例を示す図である。 図６６の実施形態によってデバイス間にオブジェクトを移動する動作例を示す図である。 本発明の実施形態によるデバイスのブロック構成を概略的に示す図である。
以下、添付の図面を参照して本発明の好ましい実施形態を詳しく説明する。なお、図面において同一の構成要素は、できるだけ同一の符号で示している。また、本発明の要旨を不明瞭にすることができる公知機能及び構成に対する詳細な説明は省略する。
本発明は、タッチスクリーンでマルチタッチ入力方法と、前記マルチタッチ入力によりスクリーン上のオブジェクトに対する移動、除去、コピー及び編集などの処理を直観的で且つ便利に提供することができる方法及びデバイスに関する。すなわち、本発明のマルチフィンガー（Ｍｕｌｔｉ−Ｆｉｎｇｅｒ）基盤のマルチタッチを利用してオブジェクトを直観的で且つ便利に管理することができるようにする方法及び装置に関する。
本発明の実施形態においては、基本的に２ポイント（ｐｏｉｎｔ）以上のタッチ入力をセンシングして動作することを基盤とする。本発明の実施形態においては、マルチフィンガーを入力によりピックアップ（Ｐｉｃｋｕｐ）及びリリース（Ｒｅｌｅａｓｅ）するジェスチャー（ｇｅｓｔｕｒｅ）を基盤にして様々な応用アルゴリズムが展開できる。特に、本発明の実施形態によれば、前記ピックアップジェスチャー（第１マルチタッチ入力）によってユーザがスクリーン上のオブジェクトを実際フィンガーでピックアップする効果を提供し、前記リリースジェスチャー（第２マルチタッチ入力）によってユーザが前記ピックアップジェスチャーによりピックアップしたオブジェクトを実際フィンガーでリリースする効果を提供する。
したがって、本発明のデバイスは、前記ユーザのピックアップジェスチャー（第１マルチタッチ入力）を認識し、スクリーン上にあるオブジェクトを仮想にピックアップする動作をする。また、前記デバイスは、前記ユーザのリリースジェスチャー（第２マルチタッチ入力）を認識し、前記ピックアップしたオブジェクトをスクリーン上に仮想にリリースする動作をする。このように、前記ピックアップジェスチャー及びリリースジェスチャーによって、ユーザは、デバイスのオブジェクトに対する移動、除去、コピーまたは編集などをより直観的で且つ便利に利用することができる。
本発明の実施形態において“シングルタッチ”は、タッチスクリーン上にシングルフィンガー基盤の１つのポイントがタッチされることを示すことができる。また、本発明の実施形態において“マルチタッチ”は、タッチスクリーン上にマルチフィンガー基盤の少なくとも２個のポイントがタッチされることを示すことができる。前記マルチタッチは、同時に発生するか、または１つのポイントに対するタッチが発生した後、他のポイントに対するタッチが発生するまで所要される時間があらかじめ設定された時間内に存在すれば、これをマルチタッチとして判断することができる。
このような本発明の動作は、大きく、スクリーン上の任意のオブジェクトを、第１マルチタッチ入力を通じてピックアップした後、第２マルチタッチ入力を通じてピックアップされたオブジェクトを対象に設定された方式の第２動作を行う。ここで、前記第２動作は、前記第２マルチタッチ入力により行われるピックアップされたオブジェクトの移動、削除、コピー及び編集などのような結果を示す。
以下、図面を参照して本発明の実施形態によるマルチタッチ入力方法及び前記マルチタッチを利用したオブジェクト管理方法について記述する。
図１は、本発明の実施形態によるタッチスクリーン上のマルチタッチ入力によるオブジェクト制御動作を示す図である。
図１を参照すれば、まず、デバイスは、待機画面表示中に（１０１段階）、ユーザの第１マルチタッチ入力を感知すれば（１０３段階）、前記第１マルチタッチ入力が感知される位置のオブジェクトをピックアップする（１０５段階）。ここで、前記待機画面は、特定オブジェクトを表示中の画面であることができ、またはいずれのオブジェクトをも含まない一般的な背景画面を表示する画面であることができる。前記オブジェクトは、デバイスの特定機能を行うためのアプリケーションのアイコン、メニューリスト、メニューリストの特定項目、メニューアイコン、イメージ、テキスト、背景画面など、タッチスクリーン上に表示されるすべての形態のデータ要素を含むことができる。
また、前記第１マルチタッチは、本発明の実施形態においてオブジェクトのピックアップ処理のためにあらかじめ設定された方式によって入力されるマルチフィンガー基盤の入力イベントを示す。前記第１マルチタッチ及びそれによる入力方法については後述する。この時、前記デバイスは、前記第１マルチタッチが前記待機画面上の特定オブジェクトに発生する時、前記特定オブジェクトに対するピックアップ処理を行うことができる。もし、前記待機画面上にいずれのオブジェクトをも存在しない時、前記デバイスは、前記第１マルチタッチに対応して前記待機画面の背景画面に対するピックアップ処理を行うことができる。すなわち、背景画面を１つのオブジェクトとして認識して前記ピックアップ処理を行うことができる。このような動作例については後述する。
次に、前記デバイスは、前記第１マルチタッチ入力に対応して特定オブジェクトをピックアップする時、前記オブジェクトを前記待機画面上で除去する（１０７段階）。この時、前記オブジェクトを待機画面上で除去する時、後述するように、前記オブジェクト（または前記オブジェクトを呼び出すことができるマクロ情報）は、保存部の特定領域に保存される。
前記保存は、スタック形態に保存され、前記保存するオブジェクトを呼び出すイベント発生時まで保存することができる。前記呼び出すイベントは、本発明の実施形態において前記保存されたオブジェクトの呼び出しのための第２マルチタッチ入力、または設定方式によって前記第１マルチタッチ入力による動作を取り消すなどの入力イベントを含むことができる。
次に、前記デバイスは、上記のように、オブジェクトが除去された待機画面表示中に第２マルチタッチ入力を感知することができる（１０９段階）。前記第２マルチタッチは、本発明の実施形態において第１マルチタッチによってピックアップされたオブジェクトのリリース（ｒｅｌｅａｓｅ）処理のためにあらかじめ設定された方式によって入力されるマルチフィンガー基盤の入力イベントを示す。すなわち、前記第２マルチタッチは、前記第１マルチタッチによってピックアップされた後、保存部に保存されたオブジェクトを呼び出し、前記第２マルチタッチが発生する位置にリリース処理のために入力される入力イベントを示す。前記第２マルチタッチによって呼び出すオブジェクトは、設定方式によって、最後にピックアップされた１つのオブジェクトまたは以前にピックアップされて保存されたすべてのオブジェクトを呼び出すことができる。前記第２マルチタッチ及びそれによる入力方法については後述する。
次に、前記デバイスは、前記第２マルチタッチ入力を感知すれば（１０９段階）、前記第２マルチタッチ入力が感知される位置に前記第１マルチタッチ入力によりピックアップされたオブジェクトをリリースする（１１１段階）。次に、前記デバイスは、前記待機画面上に前記オブジェクトを含んで表示する（１１３段階）。この時、前記第２マルチタッチがごみ箱機能を提供するアイコンに発生する時、前記オブジェクトは、待機画面上の表示ではない、前記デバイスで削除することができる。このような詳細動作については後述する。
前述した図１では、本発明のマルチタッチ入力によるオブジェクタのピックアップ／リリースを処理する概略的な動作を説明した。次に、以下では、前述したような本発明のマルチタッチ入力によるオブジェクトをピックアップまたはリリースする詳細動作の実施形態について記述する。
図２〜図５は、本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の画面例を示す図であり、図６は、図２〜図５のオブジェクトピックアップ手続を通じてピックアップされるオブジェクトの保存過程の例を示す図である。
図２〜図５を参照すれば、まず、図２に示したように、デバイスは、ユーザ要請による待機画面１００を表示することができる。この時、前記待機画面１００は、複数のオブジェクト２００が配置されて表示されることができる。前記オブジェクト２００は、デバイスで提供する機能実行のためのアイコン、特定ミニアプリケーションのようなウィジェットまたはウィジェットアイコン、特定イメージ、写真ファイルリストのサムネイルイメージなどを含むことができる。
次に、図３及び図４に示したように、ユーザは、前記待機画面１００でユーザが希望する特定オブジェクト２５０に対してマルチタッチ入力を発生することができる。例えば、本発明の実施形態においてマニラファイルフォルダ（ｍａｎｉｌａ ｆｉｌｅ ｆｏｌｄｅｒ）のように見えるアイコンをピックアップすることができる。前記マルチタッチ入力は、前述したように、ユーザのピックアップジェスチャーに対応する前記第１マルチタッチ入力であることができる。すなわち、ユーザは、前記第１マルチタッチ入力を通じて前記複数のオブジェクト２００のうちユーザ自分が希望する特定オブジェクト２５０に対する第１マルチタッチ入力を発生することができる。すると、デバイスは、前記第１マルチタッチ入力に対応して前記特定オブジェクト２５０にピックアップ効果を適用する。
前記ピックアップ効果は、図４に示したように、前記第１マルチタッチ入力によりユーザが待機画面１００上の前記特定オブジェクト２５０を実際フィンガーでピックアップするようなビジュアル効果を示す。例えば、前記ピックアップ効果は、前記第１マルチタッチ入力によるピックアップジェスチャーに対応して前記特定オブジェクト２５０の形状が順次に消えるビジュアル効果でありうる。
これを詳しく説明すれば、まず、第１マルチタッチ入力が発生すれば、デバイスは、本発明の機能活性化信号として認知することができる。次に、図３に示したように、前記第１マルチタッチによる初期２個のポイントから前記オブジェクト２５０の中心にドラッグ入力が発生すれば、前記デバイスは、前記オブジェクト２５０を選択する。すなわち、前記オブジェクトをピック（ｐｉｃｋ）状態で処理する。
前記ドラッグ入力は、前記オブジェクト２５０選択のために設定されたジェスチャーであって、設定された臨界距離以上の２つのポイントにマルチタッチ後、前記２つのポイントの内側方向にドラッグが発生すれば、前記デバイスは、前記ドラッグをオブジェクト２５０選択のための信号として認知することができる。この時、前記オブジェクト２５０が選択されれば、前記デバイスは、前記オブジェクト２５０が選択されることを別に表示することができる。例えば、選択されるオブジェクト２５０に設定されたエフェクトを適用してハイライト表示するか、または別途の他の形態に変更して提供することができる。
次に、前記オブジェクト２５０が選択された状態で、図４に示したように、ユーザが待機画面１００上のマルチフィンガータッチ状態を終了すれば、すなわち、マルチフィンガーをタッチスクリーン上で取り外すアップ（Ｕｐ）ジェスチャーをすれば、デバイスは、前記オブジェクト２５０をアップ（Ｕｐ）状態で処理する。言い換えれば、前記Ｕｐジェスチャーは、前記オブジェクト２５０の選択が完了し、前記待機画面１００上で除去のための設定されたジェスチャーであることができる。
したがって、前記デバイスは、タッチされたマルチフィンガーのＵｐジェスチャーによる命令を認知し、それに応答して前記オブジェクト２５０をＵｐ状態によるエフェクトを処理する。例えば、前記オブジェクト２５０がユーザのＵｐジェスチャーに対応してピックアップされる形態のビジュアル効果を提供することができる。この時、前記待機画面１００上の前記オブジェクト２５０は、漸次に消える形態のビジュアル効果などを提供することができる。
一方、上記のように、本発明の第１マルチタッチ入力は、オブジェクトをピックする動作と前記ピックされるオブジェクトをアップ（Ｕｐ）する動作とに区分されることができる。
次に、図２〜図４で説明したように、前記第１マルチタッチ入力に対応して前記オブジェクト２５０に対するピックアップ過程を完了する時、デバイスは、図５に示したように、前記オブジェクト２５０を前記待機画面１００上で除去して表示する。また、前記デバイスは、前記オブジェクト２５０または前記オブジェクト２５０を呼び出すことができる前記オブジェクト２５０に対するマクロ情報を保存部に保存することができる。この時、前記オブジェクト２５０が保存される形態を記述すれば、図６のように示すことができる。
図６を参照すれば、前述したように、前記第１マルチタッチ入力により前記待機画面１００で消える前記オブジェクト２５０は、保存部の特定領域に保存される。この時、前記オブジェクト２５０は、前記保存部にスタック方式で保存される。例えば、ユーザが複数のオブジェクトを連続してピックアップする場合、前記保存部は、オブジェクトのピックアップされる手順に対応して順次に保存することができる。しかし、本発明が前記保存方式に限定されるものではない。
図６は、３個のオブジェクトがピックアップされた場合の例を示す図であり、オブジェクト２、オブジェクト４及びオブジェクト１の順に保存された場合を示している。すなわち、ユーザがオブジェクト２、オブジェクト４及びオブジェクト１に対して続いてピックアップジェスチャーを行った場合の保存部のオブジェクト保存状態例を示すものである。このような場合、本発明の実施形態によってリリースを命令する第２マルチタッチが発生する時、前記保存部のオブジェクト２、オブジェクト４及びオブジェクト１が一度に出力されることもでき、またはスタック方式に対応して最後にピックアップされ、最後に保存されたオブジェクト１から第２マルチタッチに対応して出力されることができる。また、連続される第２マルチタッチ入力に対応してオブジェクト１、オブジェクト４及びオブジェクト２が順次に出力されることもできる。
図７〜図９は、本発明の実施形態によるマルチタッチ入力時に提供される付加機能の画面例を示す図である。
図７〜図９に示したように、図７は、前述の第１マルチタッチ入力により特定オブジェクト２５０がピックアップされる時、ユーザのピックアップジェスチャーによるオブジェクトがピックアップされることを通知するアイテム３００を提供する場合の画面例を示すものである。図８は、前述の第１マルチタッチ入力によりピックアップされる特定オブジェクト２５０をデバイスで除去することができるごみ箱機能のアイテム４００を提供する場合の画面例を示すものである。図９は、ピックアップ状態を通知する前記アイテム３００とごみ箱機能の前記アイテム４００を同時に提供する場合の画面例を示すものである。
前記各アイテム３００、４００は、前述の特定オブジェクトの１つになることができる。すなわち、前記アイテム３００は、第１マルチタッチ入力によりピックアップされて保存部に保存されたオブジェクトの状態を表示するデータベースＤＢ形態のオブジェクトであることができ、前記アイテム４００は、第１マルチタッチ入力によりピックアップされて保存されたオブジェクトをデバイスで除去するためのごみ箱形態のオブジェクトであることができる。本発明の実施形態においては、前記各アイテム３００、４００をマルチタッチ入力に対応して自動で提供するか、またはユーザの呼び出しによって前記各アイテム３００、４００を提供することができる。
図７を参照すれば、前述したように、第１マルチタッチ入力に対応して保存部に少なくとも１つのオブジェクトが積層される時、デバイスは、それによる結果を前記アイテム３００を通じて待機画面１００に表示することができる。前記アイテム３００は、ユーザの第１マルチタッチによってピックアップされたオブジェクトがあることを通知するためのもので、データベース形態で各スタックが順次に積もる形態のビジュアル効果で提供することができる。すなわち、デバイスは、ユーザの第１マルチタッチ入力に対応して当該オブジェクトに対するピックアップ処理時、待機画面１００の特定領域に保存部にスタックされる状態の少なくとも１つのオブジェクトを、前記アイテム３００を通じてビジュアルに表示することができる。
このようなアイテム３００は、ユーザの選択によって提供するか、または設定方式によって第１マルチタッチ入力発生時に自動で提供されることができる。また、ユーザの選択によって提供される時、前記アイテム３００は、ユーザの特定メニュー選択を通じて呼び出されるか、または設定されたキーまたはタッチ入力により提供されることができる。
図８を参照すれば、本発明が前述したようにごみ箱機能を提供する時、第１マルチタッチによってピックアップするオブジェクトをごみ箱機能が付与された前記アイテム４００を通じて削除することができる。前記アイテム４００は、ユーザの第１マルチタッチによってピックアップされたオブジェクトをデバイスで削除することができる機能を提供するためのもので、ごみ箱形態をビジュアルに提供することができる。したがって、デバイスは、ユーザの第１マルチタッチ入力に対応して当該オブジェクトが保存された後、ごみ箱機能の前記アイテム４００を呼び出して前記オブジェクトを前記アイテム４００を通じて削除することができる。前記アイテム４００を利用した動作に関する詳細説明は、後述する。
このようなアイテム４００は、ユーザの選択によって提供されるか、設定方式によって第１マルチタッチ入力発生時に自動で提供されることができる。また、ユーザの選択によって提供される時、前記アイテム４００は、ユーザの特定メニュー選択を通じて呼び出されるか、設定されたキーまたはタッチ入力により提供されることができる。
図９を参照すれば、図７及び図８のように提供される各アイテム３００、４００は、一緒に表示されることもできる。これは、前述したように、ユーザ選択または設定方式によって自動で提供されることができる。
一方、以上では、図２〜図５、図６、図７〜図９を参照してユーザの第１マルチタッチ入力により特定オブジェクト２５０をピックアップし、ピックアップされたオブジェクトが保存部にスタックされた動作について説明した。次に、以下では、第１マルチタッチによってスタックされる特定オブジェクト２５０を第２マルチタッチ入力により呼び出してリリースする動作について図１０〜図１２及び図１３〜図１６を参照して記述する。
図１０〜図１２は、本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の画面例を示す図である。
図１０〜図１２は、図２〜図５に対応する動作でピックアップされて保存された特定オブジェクト２５０を待機画面１００の特定領域にリリースする動作の画面例を示すものである。
まず、図１０は、図２〜図５のような手続によって特定オブジェクト２５０がピックアップされた状態の画面例を示すものである。この時、前述の図７のように、特定オブジェクトに対するピックアップ状態を通知する当該アイテム３００を待機画面１００の特定領域に示すこともできることは勿論である。
次に、ユーザは、以前にピックアップされたオブジェクト２５０を待機画面２００の特定領域に移動して示すことができる。すなわち、ユーザは、図１１に示したように、待機画面２００の特定領域にマルチタッチ入力を発生することができる。前記マルチタッチ入力は、前述の図１で第２マルチタッチ入力に対応し、デバイスは、前記第２マルチタッチ入力に対応して特定オブジェクト２５０を呼び出してリリース効果を適用する。前記リリース効果は、図１１及び図１２に示したように、ユーザのマルチフィンガーによるタッチ入力によるリリースジェスチャーに対応して特定オブジェクト２５０の形状が順次に現われる効果であることができる。
これを詳しく説明すれば、まず、図１１に示したように、マルチタッチ入力、すなわちタッチスクリーン上の特定領域にマルチフィンガー基盤の第２マルチタッチ入力が発生すれば、デバイスは、本発明の機能活性化信号として認知することができる。次に、前記第２マルチタッチによる初期２個のポイントから外側にドラッグ入力が発生すれば、前記デバイスは、以前にピックアップされたオブジェクト２５０を保存部から抽出し、当該オブジェクト２５０を第２マルチタッチが発生する位置にリリースする効果をビジュアルに提供することができる。
前記ドラッグ入力は、前記オブジェクト２５０のリリースのための設定されたジェスチャーであって、設定された臨界距離未満の２つのポイントにマルチタッチ後、前記２つのポインタの外側方向にドラッグが発生すれば、前記デバイスは、前記ドラッグをオブジェクト２５０リリースのための信号として認知することができる。この時、前記オブジェクト２５０が抽出されれば、前記デバイスは、前記オブジェクト２５０が抽出されることを別に表示することができる。例えば、抽出するオブジェクト２５０の形状が待機画面１００に徐々に出力されるビジュアル効果を提供することができる。
すなわち、前記待機画面１００の特定領域に前記オブジェクト２５０が割り当てられるビジュアル効果を提供することができる。前記デバイスは、前記特定領域に第２マルチタッチが発生することによって、図２〜図５で以前にピックアップされたオブジェクト２５０を保存部から抽出し、抽出されたオブジェクト２５０が徐々に現われるエフェクトを適用してビジュアルに提供する。
次に、上記のような手続が完了する時、前記待機画面１００に前記第２マルチタッチ入力に対応してリリースされたオブジェクト２５０が追加された待機画面を提供することができる。この時、前述したように、ピックアップされたオブジェクトのスタック状態を示すアイテム３００が存在する時、前記手続によって保存部に保存されたオブジェクトが除去されることによって、前記アイテム３００は、スタックされるオブジェクトが消えた形態をビジュアルに提供することができる。
図１３〜図１６は、本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の画面例を示す図である。
図１３〜図１６は、図２ａ〜図２ｄに対応する動作でピックアップされて保存された特定オブジェクト２５０をごみ箱機能によってデバイスで提供する動作の画面例を示すものである。すなわち、本発明のごみ箱機能によって、図２〜図５を通じてピックアップするオブジェクト２５０をごみ箱機能が付与された当該アイテム４００にリリースする動作例を示すものである。
まず、図１３は、特定オブジェクト２５０がピックアップされた状態の画面例を示すものである。この時、前述の図８のように、特定オブジェクトを除去することができる当該アイテム４００を待機画面１００の特定領域に示すこともできることは勿論である。図１３〜図１６では、ユーザ選択によって前記アイテム４００を呼び出す動作として説明する。
次に、ユーザは、以前にピックアップされたオブジェクト２５０をデバイスで除去するためにごみ箱機能のアイテム４００に廃棄動作を行うことができる。このために、ユーザは、図１４に示したように、待機画面１００の特定領域にタッチ入力を発生することができる。ここで、前記タッチ入力は、シングルフィンガー基盤のタッチであることができ、特に本発明の実施形態において前記特定領域にロングプレス（ｌｏｎｇ ｐｒｅｓｓ）によるタッチ入力を代表的な例として説明する。したがって、デバイスは、前記特定領域に前記タッチ入力を感知すれば、ごみ箱機能の前記アイテム４００を呼び出して表示することができる。この時、前記アイテム４００の呼び出しは、前記タッチ入力を通じて呼び出すものと説明するが、設定されたメニュー操作を通じて呼び出すか、または設定された特定キー入力を通じて呼び出すこともできることは勿論である。
次に、ユーザは、図１５に示したように、待機画面１００の前記アイテム４００にマルチタッチ入力を発生することができる。前記マルチタッチ入力は、前述の図１で第２マルチタッチ入力に対応し、デバイスは、前記第２マルチタッチ入力に対応して特定オブジェクト２５０を呼び出してリリース効果を適用する。前記リリース効果は、ユーザのマルチフィンガー基盤のタッチ入力によるリリースジェスチャーに対応して以前にピックアップされた特定オブジェクト２５０が前記アイテム４００に徐々に消える効果であることができる。
これを詳しく説明すれば、まず、マルチタッチ入力、すなわち前記ごみ箱機能のアイテム４００にマルチフィンガー基盤の第２マルチタッチ入力が発生すれば、デバイスは、本発明の機能活性化信号として認知することができる。次に、図１５及び図１６に示したように、前記第２マルチタッチによる初期２個のポイントから外側にドラッグ入力が発生すれば、前記デバイスは、以前にピックアップされたオブジェクト２５０を保存部から抽出し、当該オブジェクト２５０を第２マルチタッチが発生する位置、すなわち前記アイテム４００にリリースする効果をビジュアルに提供することができる。
この時、前記ごみ箱機能によって前記オブジェクト２５０をデバイスで除去する場合を仮定することによって、前記オブジェクト２５０が前記アイテム４００に割り当てられるビジュアル効果を提供することができる。例えば、前記アイテム４００が蓋体付きごみ箱形態を有する場合、ごみ箱の蓋体が開かれながら前記オブジェクト２５０が捨てられるビジュアル効果を提供することができる。
すなわち、デバイスは、前記ごみ箱機能のアイテム４００に第２マルチタッチが発生することによって、図２〜図５でピックアップされたオブジェクト２５０を保存部から抽出する。また、抽出するオブジェクト２５０が存在する時、図１５及び図１６に示したように、抽出するオブジェクト２５０を示すと共に、前記アイテム４００に対応するエフェクトが適用されたビジュアル効果を一緒に提供する。すなわち、前記抽出するオブジェクト２５０が前記アイテム４００に捨てられるアニメーション形態のビジュアル効果を提供することができる。これにより、ユーザは、自分が選択したオブジェクトがごみ箱に捨てられるビジュアル効果を通じて直観的に認知することができる。
次に、上記のような手続が完了する時、前記第２マルチタッチ入力が発生する前の待機画面１００を提供することができる。この時、前述したように、もしピックアップされたオブジェクトのスタック状態を示すアイテム３００が待機画面１００上に存在する時、前記手続によって保存部に保存されたオブジェクトの除去によって、前記アイテム３００は、スタックされるオブジェクトが消えた形態のビジュアル効果を提供することができる。
図１７〜図２１は、本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。
図１７〜図２１を参照すれば、まず、図１７に示したように、デバイスは、ユーザ要請によるメニューリストを表示する待機画面１００を提供することができる。前記特定メニューリストは、前記特定メニューリストを構成する少なくとも１つの項目よりなることができる。前記特定メニューリスト及び前記特定メニューリストを構成する各項目は、本発明の実施形態においてオブジェクトに対応する。しかし、図１７〜図２１では、前記各項目をオブジェクトと命名して説明する。
次に、ユーザは、図１８〜図２０に示したように、前記待機画面１００の特定メニューリストでユーザが希望する特定オブジェクト３５０に対してマルチタッチ入力を発生することができる。前記マルチタッチ入力は、前述したように、ユーザのピックアップジェスチャーに対応する前記第１マルチタッチ入力であることができる。すなわち、ユーザは、前記第１マルチタッチ入力を通じて前記メニューリストを構成する複数のオブジェクトのうちユーザ自分が希望する特定オブジェクト３５０に対する第１マルチタッチ入力を発生することができる。すると、デバイスは、前記第１マルチタッチ入力に対応して前記特定オブジェクト３５０にピックアップ効果を適用する。
前記ピックアップ効果は、前記第１マルチタッチ入力によりユーザが待機画面１００上のメニューリストのうち前記特定オブジェクト３５０を実際フィンガーでピックアップするようなビジュアル効果を示す。例えば、前記ピックアップ効果は、前記第１マルチタッチ入力によるピックアップジェスチャーに対応して前記特定オブジェクト３５０の幅が徐々に小さくなりながら消えるビジュアル的な効果であることができる。
これを詳しく説明すれば、まず、図１８〜図２０に示したように、第１マルチタッチ入力が発生すれば、デバイスは、本発明の機能活性化信号として認知することができる。次に、前記第１マルチタッチによる初期２個のポイントから前記オブジェクト３５０の中心にドラッグ入力が発生すれば、前記デバイスは、前記オブジェクト３５０を選択する。すなわち、前記オブジェクトをピック状態で処理する。
前記ドラッグ入力は、前記オブジェクト３５０選択のための設定されたジェスチャーであって、前述の説明のように、デバイスは、前記ドラッグ入力が発生する時、前記オブジェクト３５０選択のための信号として認知することができる。この時、前記オブジェクト３５０が選択されれば、前記デバイスは、前記オブジェクト３５０が選択されることを別に表示することができる。例えば、選択されるオブジェクト３５０に設定されたエフェクトを適用してハイライト表示するか、または別途の他の形態に変更して提供することができる。
次に、前記オブジェクト３５０が選択された状態で、ユーザが待機画面１００上のマルチフィンガータッチ状態を終了すれば、すなわちマルチフィンガーをタッチスクリーン上で取り外すＵｐジェスチャーをすれば、デバイスは、前記オブジェクト３５０をＵｐ状態で処理する。言い換えれば、前記Ｕｐジェスチャーは、前記オブジェクト３５０の選択が完了し、前記待機画面１００上で除去のための設定されたジェスチャーであることができる。
したがって、前記デバイスは、タッチされたマルチフィンガーのＵｐジェスチャーによる命令を認知し、それに応答して前記オブジェクト３５０をＵｐ状態によるエフェクトを処理する。例えば、前記オブジェクト３５０がユーザのＵｐジェスチャーに対応してピックアップされる形態のビジュアル効果を提供することができる。この時、前記待機画面１００上の前記オブジェクト３５０は、漸次に消える形態のビジュアル効果などを提供することができる。また、前記オブジェクト３５０の消えるビジュアル効果に対応して、前記特定オブジェクト３５０が占めた位置に、前記特定オブジェクト３５０の上位及び／または下位のオブジェクトが移動しながら満たされるビジュアル効果を提供することができる。
次に、図１８〜図２０で説明したように、前記第１マルチタッチ入力に対応して前記オブジェクト３５０に対するピックアップ過程を完了する時、デバイスは、図２１に示したように前記オブジェクト３５０を前記メニューリスト上で除去する。また、前記オブジェクト３５０が消えることによって発生する空の空間を残りの他のオブジェクトによって満たし、メニューリストを整列して表示する。
例えば、図１７〜図２１を参照すれば、前記第１マルチタッチ入力による動作実行によって図１７のメニューリストで”ＤＤＤ”オブジェクトが図２１のように除去されて表示される。この時、前記“ＤＤＤ”オブジェクトの除去に対応して、前記“ＤＤＤ”オブジェクトの上側オブジェクトＣＣＣ及び／または下側オブジェクトＥＥＥが前記”ＤＤＤ”オブジェクトの空の空間を満たす、すなわち空の空間にシフトされ、“ＨＨＨ”オプゼックトが前記メニューリスト上に現われる整列過程をさらに行うことができる。
また、前記デバイスは、前記オブジェクト３５０または前記オブジェクト３５０を呼び出すことができる前記オブジェクト３５０に対するマクロ情報を保存部に保存することができる。この時、前記オブジェクト３５０が保存される形態は、図６を参照した説明部分で説明したものに対応する。
一方、図１７〜図２１を参照した説明部分では省略したが、上記のように、メニューリストで第１マルチタッチ入力による動作を行う場合にも、図７〜図９を参照した説明部分で説明したもののような付加機能を提供することもできることは勿論である。
以上では、図１７〜図２１を参照してユーザの第１マルチタッチ入力によりメニューリストの特定オブジェクト３５０をピックアップし、ピックアップされたオブジェクトが保存部にスタックされる動作について説明した。次に、以下では、図１７〜図２１のように、第１マルチタッチによってスタックされる特定オブジェクト３５０を第２マルチタッチ入力により呼び出してリリースする動作について図２２〜図２５を参照して記述する。
図２２〜図２５は、本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の他の画面例を示す図である。
図２２〜図２５は、図１７〜図２０に対応する動作でピックアップされて保存された特定オブジェクト３５０を待機画面１００に表示中のメニューリストの特定位置にリリースする動作の画面例を示すものである。
まず、図２２は、図１７〜図２０と同様の手続によって特定オブジェクト３５０がピックアップされた状態の画面例を示すものである。この時、前述の図７のように、特定オブジェクトに対するピックアップ状態を通知する当該アイテム３００を待機画面１００の特定領域に示すこともできることは勿論である。
次に、ユーザは、以前にピックアップされたオブジェクト３５０を呼び出してメニューリストの特定位置に移動して示すことができる。すなわち、ユーザは、図２３に示したように、メニューリストの特定位置にマルチタッチ入力を発生することができる。前記マルチタッチ入力は、前述の図１で第２マルチタッチ入力に対応し、デバイスは、前記第２マルチタッチ入力に対応して特定オブジェクト３５０を呼び出してリリース効果を適用する。前記リリース効果は、ユーザのマルチフィンガーによるタッチ入力によるリリースジェスチャーに対応してピックアップされた特定オブジェクト３５０の形状が順次に現われる効果であることができる。
これを詳しく説明すれば、まず、図２３に示したように、マルチタッチ入力、すなわちタッチスクリーン上の特定領域にマルチフィンガー基盤の第２マルチタッチ入力が発生すれば、デバイスは、本発明の機能活性化信号として認知することができる。次に、図２３〜図２５に示したように、前記第２マルチタッチによる初期２個のポイントから外側にドラッグ入力が発生すれば、前記デバイスは、以前にピックアップされたオブジェクト３５０を保存部から抽出し、当該オブジェクト３５０を第２マルチタッチが発生する位置にリリースする効果をビジュアルに提供することができる。
前記ドラッグ入力は、前記オブジェクト３５０のリリースのための設定されたジェスチャーであって、前述の説明のように、デバイスは、前記ドラッグ入力が発生する時、前記オブジェクト３５０のリリースのための信号として認知することができる。この時、前記オブジェクト３５０が抽出されれば、前記デバイスは、前記オブジェクト３５０が抽出されることを別に表示することができる。例えば、抽出するオブジェクト３５０の形状がメニューリストの特定位置に徐々に出力されるビジュアル効果を提供することができる。
この時、図２４及び図２５では、前記オブジェクト３５０がメニューリスト内の特定位置の特定オブジェクトの間に前記オブジェクト３５０が割り当てられるビジュアル効果を提供することができる。例えば、特定位置の上位のオブジェクトＦＦＦと下位のオブジェクトＧＧＧの間隔が徐々に広くなりながらそれらの間に前記オブジェクト３５０が漸次に空間を占めることによって現われるビジュアル効果を提供することができる。
すなわち前記デバイスは、前記特定位置に第２マルチタッチが発生することによって、以前にピックアップされたオブジェクト３５０を保存部から抽出する。また、抽出するオブジェクトが存在する時、図２４及び図２５に示したように、抽出されたオブジェクト３５０が徐々に現われるエフェクトを適用してビジュアル効果を提供する。
次に、上記のような手続が完了する時、前記メニューリストで前記第２マルチタッチ入力に対応してリリースされたオブジェクト３５０が追加された待機画面１００を提供することができる。この時、前述したように、ピックアップされたオブジェクトのスタック状態を示すアイテム３００（図７）が存在する時、前記手続によって保存部に保存されたオブジェクトが除去されることによって、前記アイテム３００は、スタックされたオブジェクトが消えた形態のビジュアル効果を提供することができる。
一方、図２２〜図２５を参照した説明部分では省略したが、上記のように、メニューリストで第２マルチタッチ入力による動作を行う場合にも、図１３〜図１６を参照した説明部分で説明したような付加機能を利用したリリース動作を提供することもできることは勿論である。
図２６〜図３４は、本発明の実施形態による第１マルチタッチ入力によりオブジェクトをピックアップする過程の他の画面例を示す図である。特に、図２６〜図３４は、本発明の実施形態による第１マルチタッチの繰り返し入力により複数のオブジェクト各々を連続してピックアップする過程の例を示す図である。
図２６〜図３４を参照すれば、まず、図２６に示したように、デバイスは、ユーザ要請によるイメージを表示する待機画面１００を提供することができる。この時、前記イメージは、前記イメージを構成する少なくとも１つのサブイメージを備えてなることができる。前記イメージ及びイメージを構成するサブイメージは、本発明の実施形態においてオブジェクトに対応する。しかし、図２６〜図３４では、前記サブイメージをオブジェクトと命名して説明する。
次に、図２６のような状態で、ユーザは、図２７〜図２９に示したように、前記待機画面１００のイメージでユーザが希望する第１オブジェクト４５０に対してマルチタッチ入力を発生することができる。前記マルチタッチ入力は、前述したように、ユーザのピックアップジェスチャーに対応する前記第１マルチタッチ入力であることができる。すなわち、ユーザは、前記第１マルチタッチ入力を通じて前記イメージを構成する複数のオブジェクト４５０、５５０、６５０のうちユーザ自分が希望する前記第１オブジェクト４５０に対する第１マルチタッチ入力を発生することができる。すると、デバイスは、前記第１マルチタッチ入力に対応して前記第１オブジェクト４５０にピックアップ効果を適用する。
前記ピックアップ効果は、図２７〜図２９に示したように、前記第１マルチタッチ入力によりユーザが前記第１オブジェクト４５０を実際フィンガーでピックアップするようなビジュアル効果を示す。例えば、前記ピックアップ効果は、前記第１マルチタッチ入力によるピックアップジェスチャーに対応して前記第１オブジェクト４５０の大きさが徐々に小さくなりながら消えるビジュアル的な効果であることができる。
すなわち、前記デバイスは、前記第１マルチタッチ入力が発生すれば、本発明の機能活性化信号として認知することができる。次に、前記第１マルチタッチによる初期２個のポイント（図２７）から前記第１オブジェクト４５０の中心にドラッグ入力（図２８）が発生すれば、前記デバイスは、前記第１オブジェクト４５０を選択する（図２９）。すなわち、ピック状態で処理する。次に、前記第１オブジェクト４５０が選択された状態で、ユーザが前記待機画面１００上のマルチフィンガータッチ状態を終了すれば、すなわち、マルチフィンガーをタッチスクリーン上で取り外すＵｐジェスチャーをすれば、デバイスは、前記第１オブジェクト４５０をＵｐ状態で処理する。すなわち、前記Ｕｐジェスチャーは、前記第１オブジェクト４５０の選択が完了し、前記待機画面１００上で除去のための設定されたジェスチャーであることができる。
したがって、前記デバイスは、タッチされたマルチフィンガーのＵｐジェスチャーによる命令を認知し、それに応答して前記第１オブジェクト４５０をＵｐ状態によるエフェクトを処理する。例えば、前記第１オブジェクト４５０がユーザのＵｐジェスチャーに対応してピックアップされる形態のビジュアル効果を提供することができる。この時、前記待機画面１００上の前記第１オブジェクト４５０は、漸次に消える形態のビジュアル効果などを提供することができる。
次に、図２７〜図２９で説明したように、前記第１マルチタッチ入力に対応して前記第１オブジェクト４５０に対するピックアップ過程を完了する時、デバイスは、図３０に示したように、前記第１オブジェクト４５０を前記待機画面１００のイメージ上で除去して表示する。また、前記デバイスは、前記第１オブジェクト４５０または前記第１オブジェクト４５０を呼び出すことができる前記第１オブジェクト４５０に対するマクロ情報を保存部に保存することができる。
次に、図３０のような状態で、ユーザは、図３１〜図３４に示したように、前述の過程に対応するピックアップ動作を通じて第２オブジェクト５５０及び第３オブジェクト６５０に対しても前記イメージ上で除去することができる。この時、前記デバイスは、前記第２オブジェクト５５０及び第３オブジェクト６５０を呼び出すことができる各々のマクロ情報を保存部にピックアップされる手順によって保存することができる。この時、前記第１〜第３オブジェクト４５０、５５０、６５０が保存される形態は、図６を参照した説明部分で説明したものに対応する。
以上のように、本発明の実施形態によれば、複数のオブジェクトよりなるイメージを、第１マルチタッチの繰り返し入力に対応して連続してピックアップされるオブジェクトをピックアップ手順によって保存部に保存することができる。すなわち、デバイスは、第１マルチタッチ入力に対応して選択される第１オブジェクト４５０をピックアップして保存し、前記第１マルチタッチ入力の連続動作によって第２オブジェクト５５０及び第３オブジェクト６５０をもピックアップして保存することができる。
一方、前記第１〜第３オブジェクト４５０、５５０、６５０をピックアップして保存することだけで説明したが、もし前記イメージを構成するオブジェクトをピックアップした後、前記イメージ自体に対して第１マルチタッチによるピックアップジェスチャーが発生する時、それに応答して前記イメージ自体をピックアップして保存部に保存することもできる。すなわち、本発明の実施形態によれば、背景画面（イメージ）やブランク画面をオブジェクトとして認識してピックアップすることもできる。
このような例を記述すれば、背景画面（イメージ）が表示された状態で前記背景画面自体が第１マルチタッチによってピックアップされる時、前記背景画面が巻かれるか折れ上がりながら前記ブランク画面に転換されるビジュアル効果を提供することができる。反対に、前記ブランク画面が表示された状態で前記ブランク画面自体が第１マルチタッチによってピックアップされる時、前記ブランク画面が巻かれるか折れ上がりながら設定された背景画面イメージに転換されるビジュアル効果を提供することができる。
また、図２６〜図３４を参照した説明部分では省略したが、上記のように、メニューリストで第１マルチタッチ入力による動作を行う場合にも、図７〜図９を参照した説明部分で説明したような付加機能を提供することもできることは勿論である。
以上では、図２６〜図３４を参照してユーザの第１マルチタッチ入力によりイメージを構成する複数のオブジェクト４５０、５５０、６５０を連続してピックアップし、ピックアップされたオブジェクトが所定の手順によって保存部にスタックされる動作について説明した。次に、以下では、図２６〜図３４のように、第１マルチタッチによってスタックされる複数のオブジェクト４５０、５５０、６５０を第２マルチタッチ入力により呼び出してリリースする動作について図３５〜図４１を参照して記述する。
図３５〜図４１は、本発明の実施形態による第２マルチタッチ入力によりオブジェクトをリリースする過程の他の例を示す図である。
特に、図３５〜図４１は、本発明の実施形態による第２マルチタッチの繰り返し入力により複数のオブジェクト各々を保存された手順の逆順によって連続してリリースする過程の例を示す図である。
図３５〜図４１は、図２６〜図３４に対応する動作にピックアップされて保存された複数のオブジェクト４５０、５５０、６５０を待機画面１００に表示中のイメージの特定領域にリリースする動作の画面例を示すものである。
まず、図３５は、前記複数のオブジェクト４５０、５５０、６５０がピックアップされた状態の画面例を示すものである。この時、前述の図７のように、特定オブジェクトに対するピックアップ状態を通知する当該アイテム３００を待機画面１００の特定領域に示すこともできることは勿論である。
次に、ユーザは、以前にピックアップされたオブジェクト４５０、５５０、６５０を保存された手順の逆順に呼び出し、前記イメージのユーザが希望する特定領域に移動して示すことができる。
すなわち、ユーザは、図３６及び図３７に示したように、イメージの特定領域にマルチタッチ入力を発生することができる。前記マルチタッチ入力は、前述したように、ユーザのリリースジェスチャーに対応する前記第２マルチタッチ入力であることができる。デバイスは、前記第２マルチタッチ入力に対応して前記イメージを構成する複数のオブジェクト４５０、５５０、６５０のうち保存手順の逆順によって第３オブジェクト６５０を呼び出してリリース効果を適用する。前記リリース効果は、ユーザのマルチフィンガーによるタッチ入力によるリリースジェスチャーに対応して図３２〜図３４で最後にピックアップされて保存された第３オブジェクト６５０の形状が順次に現われる効果であることができる。
これを詳しく説明すれば、もし、タッチスクリーン上の特定領域にマルチフィンガー基盤の第２マルチタッチ入力が発生すれば、デバイスは、本発明の機能活性化信号として認知することができる。次に、前記第２マルチタッチによる初期２個のポイントから外側にドラッグ入力が発生すれば、前記デバイスは、以前に保存された手順の逆順による第３オブジェクト６５０を保存部から抽出し、抽出された前記第３オブジェクト６５０を第２マルチタッチが発生する位置にリリースする効果をビジュアルに提供することができる。
前記ドラッグ入力は、前記第３オブジェクト６５０のリリースのための設定されたジェスチャーであって、前述の説明のように、デバイスは、前記ドラッグ入力が発生する時、前記第３オブジェクト６５０のリリースのための信号として認知することができる。この時、前記第３オブジェクト６５０が抽出されれば、前記デバイスは、前記第３オブジェクト６５０が抽出されることを別に表示することができる。例えば、抽出する第３オブジェクト６５０の形状がイメージの当該位置に徐々に出力されるビジュアル効果を提供することができる。
次に、上記のような手続が完了する時、前記イメージで前記第２マルチタッチ入力に対応してリリースされた第３オブジェクト６５０が追加された待機画面１００を提供することができる。この時、前述したように、ピックアップされたオブジェクトのスタック状態を示すアイテム３００が存在する時、前記手続によって保存部に保存された第３オブジェクト６５０が除去されることによって、前記アイテム３００は、スタックされたオブジェクト４５０、５５０、６５０のうち前記第３オブジェクト６５０が消えた形態のビジュアル効果を提供することができる．
次に、図３７のような状態で、ユーザは、図３８〜図４１に示したように、前述の過程に対応するリリース動作を通じて第２オブジェクト５５０及び第１オブジェクト４５０に対しても前記イメージ上に示すことができる。この時、前記第２オブジェクト５５０及び第１オブジェクト４５０が保存部に保存された手順の逆順によって呼び出して示すことができる。
以上のように、本発明の実施形態によれば、第２マルチタッチの繰り返し入力に対応して以前に連続してピックアップされて保存された複数のオブジェクトを保存された手順の逆順によって呼び出して示すことができる。すなわち、デバイスは、第２マルチタッチ入力に対応して第３オブジェクト６５０をリリースして表示し、前記第２マルチタッチ入力の連続動作によって第２オブジェクト５５０及び第１オブジェクト４５０をもリリースして示すことができる。
一方、図３５〜図４１を参照した説明部分では省略したが、上記のように、イメージで第２マルチタッチ入力による動作を行う場合にも、図１３〜図１６を参照した説明部分で説明したような付加機能を利用したリリース動作を提供することもできることは勿論である。例えば、前記第２オブジェクト５５０を除去しようとする時、デバイスは、ユーザ要請に応答して前記第３オブジェクト６５０に対するリリースを行う。その後、前記デバイスは、ユーザ要請に応答して前述の図１４〜図１６のように、ごみ箱機能をアイテム４００を呼び出し、前記アイテム４００に発生する第２マルチタッチによって前記第２オブジェクト５５０を除去する。次に、前記デバイスは、ユーザ要請に応答して前記第１オブジェクト４５０に対するリリースを行う。このような場合、最終表示されるイメージは、第１オブジェクト４５０及び第３オブジェクト６５０のみを含んで示す。
以上で説明したように、本発明の実施形態によれば、各々のオブジェクトよりなるイメージをマルチタッチによるピックアップ及びリリースジェスチャーを通じてさらに簡便に編集を行うことができる。
図４２〜図４５は、本発明の実施形態によるマルチタッチ入力を利用してイメージを編集する過程の画面例を示す図である。特に、図１１ａ〜図１１ｄでは、本発明の第１マルチタッチを利用してイメージ編集のためのオブジェクトをピックアップし、第２マルチタッチによるオブジェクトのピックアップ及びリリースを通じてイメージを編集する過程の画面例を示す図である。
図４２〜図４５を参照すれば、まず、図４２に示したように、デバイスは、ユーザ要請によるイメージを表示する待機画面１００を提供することができる。次に、図４３に示したように、ユーザは、イメージ編集のための編集ツール５００を呼び出すことができる。前記編集ツール５００の呼び出しは、設定されたタッチ入力を通じて呼び出すか、または設定されたメニュー操作を通じて呼び出すか、または設定された特定キー入力を通じて呼び出すことができる。
次に、ユーザは、図４３に示した前記編集ツール５００で前記イメージに追加しようとする特定オブジェクト７５０を選択することができる。すなわち、ユーザは、前記編集ツール５００の前記特定オブジェクト７５０に第１マルチタッチ入力を通じて前記特定オブジェクト７５０をピックアップすることができる。すると、デバイスは、前記第１マルチタッチ入力に対応して前記特定オブジェクト５００にピックアップ効果を適用する。
このようなピックアップ効果は、前述のものに対応することができる。但し、前記編集ツール５００に対する第１マルチタッチ入力時、当該オブジェクトを編集ツール５００で除去することなく、当該オブジェクトのピックアップに対応して保存部に保存のみを行うことができる。すなわち、イメージ編集のための編集ツール５００で当該オブジェクトの繰り返し使用のために第１マルチタッチ入力によるエフェクトを付与しても、実際編集ツール５００では除去しない。
次に、前記第１マルチタッチ入力に対応して前記特定オブジェクト７５０に対するピックアップ過程を完了する時、デバイスは、前記第１オブジェクト７５０または前記特定オブジェクト７５０を呼び出すことができる前記特定オブジェクト７５０に対するマクロ情報を保存部に保存することができる。
次に、ユーザは、ピックアップされて保存された前記特定オブジェクト７５０のリリースのための第２マルチタッチ入力を発生することができる。すると、前記デバイスは、前記第２マルチタッチ入力に応答して前記特定オブジェクト７５０を呼び出し、前記第２マルチタッチが発生する当該位置にリリース効果を適用する。前記リリース効果は、前述のものに対応することができる。
次に、前記のような手続が完了する時、前記イメージで前記第１マルチタッチ及び第２マルチタッチによってピックアップされてリリースされた前記特定オブジェクト７５０が追加されたイメージの待機画面１００を提供することができる。
一方、図４４で、前記第２マルチタッチのための動作時に、前記編集ツール５００を維持した状態で前記第２マルチタッチを発生することもできる。すなわち、前記編集ツール５００は、前記第１及び第２マルチタッチする時、ユーザ要請に対応して続いて維持するか、またはオープン／クローズを繰り返して示すこともできる。
図４６及び図４７は、本発明の実施形態によるマルチタッチを利用したオブジェクト制御動作を示す図である。
図４６及び図４７を参照すれば、まず、デバイスは、待機画面表示中に（１２０１段階）、ユーザのタッチ入力を感知すれば（１２０３段階）、前記タッチの種類を判別する（１２０５段階）。この時、図４６で、前記タッチの種類判別結果、第１マルチタッチでなければ、前記１２０１段階に進行し、待機画面を表示するものと示したが、前記第１マルチタッチではない時、前記デバイスは、前記タッチの種類が第２マルチタッチに対応するものであるかを判別することもできる。また、前記第２マルチタッチとして判断する時、以前にピックアップされて保存されたオブジェクトがないから、エラーを出力する動作をさらに行うこともできる。このようなタッチ種類を判別する詳細動作については、図面を参照して後述する。
一方、前記タッチの種類が第１マルチタッチなら、前記デバイスは、前記第１マルチタッチが感知される位置の当該オブジェクトをピックアップして保存する（１２０７段階）。また、前記デバイスは、前記第１マルチタッチによって前記オブジェクトをピックアップして保存する時、前記オブジェクトのピックアップによる当該動作を処理することができる（１２０９段階）。すなわち、前述の第１マルチタッチと関連して説明された当該動作を処理することができる。また、前記デバイスは、前記第１マルチタッチによって前記オブジェクトを保存する時、前記オブジェクトを前記待機画面上で除去することができる（１２１１段階）。
一方、前記１２０７段階〜前記１２１１段階は、説明の便宜のために順次に示すものであるが、本発明が必ず前記手続に基づいて動作するものではない。したがって、前記１２０７段階〜前記１２１１段階のうちいずれかの段階を先に実行してもよく、また、前記デバイスは、前記１２０７段階〜前記１２１１段階を一度に処理してもよいは勿論である。
次に、上記のように、第１マルチタッチ入力に対応して前記オブジェクトをピックアップして保存した状態で、前記デバイスは、新しいタッチ入力を感知することができる（１２１３段階）。次に、前記デバイスは、前記タッチ入力を感知する時、前記タッチの種類を判別する（１２１５段階）。
図４７を参照すれば、前記１２１５段階の判別結果、タッチの種類が第２マルチタッチなら、前記デバイスは、前記１２０７段階で保存された前記オブジェクトを抽出する（１２１７段階）。次に、前記デバイスは、前記第２マルチタッチによる設定されたリリース方式が順次リリース方式であるか、全体リリース方式であるかを判別する（１２１９段階）。
もし、１２１９段階で順次リリース方式の場合、前記デバイスは、保存部の上位に保存された１つのオブジェクトを呼び出し、リリースによる当該動作を処理することができる（１２２１段階）。すなわち、前述の第２マルチタッチと関連して説明された当該動作を処理することができる。この時、前記１つのオブジェクト呼び出しは、前記保存部にオブジェクトが保存された手順の逆順によって呼び出すことができる。また、前記デバイスは、前記第２マルチタッチによって前記オブジェクトをリリースする時、保存部で前記オブジェクトを除去することができる（１２２３段階）。
一方、全体リリース方式の場合、前記デバイスは、保存部に保存されたすべてのオブジェクトを呼び出し、リリースによる当該動作を処理することができる（１２２５段階）。すなわち、前述の説明部分で、第２マルチタッチと関連して説明された当該動作を処理することができる。この時、前記呼び出しは、前記保存部に保存されるオブジェクト手順に関係なく、保存されたすべてのオブジェクトを一度に呼び出すことができる。また、前記デバイスは、前記第２マルチタッチによってすべてのオブジェクトをリリースする時、保存部で前記すべてのオブジェクトを除去することができる（１２２７段階）。
一方、前記１２１５段階の判別結果、タッチの種類が第２マルチタッチではなければ、前記デバイスは、前記タッチの種類が新しい第１マルチタッチであるかを判別することができる（１２２９段階）。この時、前記新しい第１マルチタッチなら、前記デバイスは、前述の１２０７段階に進行し、前述の動作を行うことができる。この時、前記保存部に保存されるオブジェクトは、前記１２０７段階で保存されたオブジェクトに積層されて保存される。
一方、前記タッチの種類が前記新しい第１マルチタッチではなければ、前記デバイスは、前記１２０５段階で判別する前記第１マルチタッチの入力取消であるかを判別することができる（１２３１段階）。前記入力取消は、ユーザ要請による取消であることができる。
前記タッチの種類が前記第１マルチタッチの入力取消である時、前記デバイスは、前記保存部に保存されたオブジェクトを除去することができる（１２３５段階）。ここで、前記除去は、前記保存部に保存されたオブジェクトが複数個である時、設定方式によって上位にある１つのオブジェクトを除去し、また、連続される取消入力により保存された手順の逆順によって除去することができる。または前記除去は、設定方式によって前記保存部に保存されたすべてのオブジェクトを一度に除去することもできる。
次に、前記デバイスは、前記除去する当該オブジェクトを復元することができる（１２３７段階）。ここで、前記オブジェクト復元は、前記オブジェクトがピックアップされて保存される以前の元々の状態に戻ることを意味することができる。
前記タッチの種類が前記第１マルチタッチの入力取消ではない時、前記デバイスは、ユーザ要請に対応する当該動作を行うことができる（１２３３段階）。例えば、第１マルチタッチまたは第２マルチタッチ入力を待機するか、または前述の動作を終了するなどの動作を行うことができる。この時、前述の動作を終了する時、以前にピックアップされて保存されているオブジェクトは復元されることができる。
次に、以下では、本発明のマルチタッチ入力によるピックアップ命令またはリリース命令を認知する方法について記述する。
図４８は、本発明の実施形態によるマルチタッチを判別する方法を示す図であり、図４９及び図５０は、本発明の実施形態によって前記マルチタッチを判別する動作例を示す図である。
図４８、図４９及び図５０を参照すれば、まず、デバイスは、マルチタッチ入力を感知する時（１３０１段階）、前記マルチタッチ入力による各ポイントを認識する（１３０３段階）。すなわち、図４９及び図５０に示したように、前記マルチタッチによる２個のポイントの各座標を認識する。次に、前記デバイスは、前記２個のポイント間の距離値Ｌを算出する（１３０５段階）。前記距離値Ｌの算出は、前記各ポイントの座標間の距離を計算することによって算出することができる。
次に、前記デバイスは、前記算出する距離値Ｌとあらかじめ設定された臨界値Ｔｈとを比較する（１３０７段階）。すなわち、前記デバイスは、前記距離値Ｌと前記臨界値Ｔｈの比較に基づいて前記マルチタッチの種類を判別することができる。
前記デバイスは、図４９に示したように前記距離値Ｌが前記臨界値Ｔｈより大きいか、または同一であれば（１３０７段階）、前記マルチタッチを第１マルチタッチとして認知し、前記第１マルチタッチによる機能を活性化することができる（１３０９段階）。この時、前記第１マルチタッチによる機能活性化に対応して、前記デバイスは、前記第１マルチタッチによる領域設定及び設定する領域内のオブジェクトを認知することができる（１３１１段階）。前記１３１１段階の領域設定及び領域内のオブジェクトを認知する方法については、図面を参照して後述する。また、前記１３１１段階は、本発明の実施形態において必ず実行すべき過程ではなく、機能具現上、省略することもできることは勿論である。
次に、前記デバイスは、マルチドラッグの入力可否をチェックすることができる（１３１３段階）。すなわち、前記デバイスは、図４９に示したように、初期２個のポイントからオブジェクトの中心にドラッグ入力があるか否かをチェックすることができる。もし、マルチドラッグ入力があれば、前記デバイスは、当該オブジェクトに対するピックアップ処理を行うことができる（１３１５段階）。ここで、前記第１マルチタッチ認知後、前記マルチドラッグが初期２個のポイントからオブジェクトの外側に移動するドラッグ入力である時、エラーとして判断することができる。
もし、１３１３段階で、前記マルチドラッグ入力がなければ、前記デバイスは、入力を待機し（１３１７段階）、その後、ユーザ要請による当該動作を行うことができる（１３１９段階）。例えば、前記第１マルチタッチ入力を取り消すなどの動作を行うことができる。
以上のように、本発明の実施形態による第１マルチタッチは、初期の２個のポイントからオブジェクトの中心に前記２個のポイント間の距離を狭めた後にリフトするジェスチャーによってオブジェクトに対するピックアップ処理を行うことができる。
一方、前記１３０７段階の比較結果、前記距離値Ｌが前記臨界値Ｔｈより小さければ、前記デバイスは、前記マルチタッチを第２マルチタッチとして認知し、前記第２マルチタッチによる機能を活性化することができる（１３２１段階）。この時、前記第２マルチタッチによる機能活性化に対応して、前記デバイスは、以前に第１マルチタッチによってピックアップされて保存されたオブジェクトを抽出することができる（１３２３段階）。
次に、前記デバイスは、マルチドラッグの入力可否をチェックすることができる（１３２５段階）。すなわち、前記デバイスは、図５０に示したように、初期２個のポイントからオブジェクトの外側にドラッグ入力があるか否かをチェックすることができる。
もし、マルチドラッグ入力があれば、前記デバイスは、前記抽出するオブジェクトに対するリリース処理を行うことができる（１３２７段階）。ここで、前記第２マルチタッチの認知後、前記マルチドラッグが初期２個のポイントからオブジェクトの中心に移動するドラッグ入力である時、エラーとして判断することができる。
もし、１３２５段階で、前記マルチドラッグ入力がなければ、前記デバイスは、入力を待機し（１３１７段階）、その後、ユーザ要請による当該動作を行うことができる（１３１９段階）。例えば、前記第２マルチタッチ入力を取り消すか、または前記第２マルチタッチ取消した後、新しい第１マルチタッチ入力により新しいオブジェクトをピックアップするなどの動作を行うことができる。
以上のように、本発明の実施形態による第２マルチタッチは、初期の２個のポイントからオブジェクトの外側に前記２個のポイント間の距離を広げた後にリリースするジェスチャーによってオブジェクトに対するリリース処理を行うことができる。
図５１及び図５２は、本発明に実施形態による第１マルチタッチ及び第２マルチタッチを入力する動作の例を示す図である。
図５１は、本発明の第１マルチタッチを入力する動作の例を示すものである。本発明の前記第１マルチタッチは、２個のポイントが垂直ポジション（ｐｏｓｉｔｉｏｎ）、水平ポジション及び左右対角ポジションのうちいずれか１つのポジションに入力されることができる。また、前記のようなポジションからオブジェクト中心にドラッグが発生する時、本発明の実施形態によるピックアップ処理を行うようになる。この時、ピックアップされるオブジェクトのビジュアル効果は、第１マルチタッチによる前記のような初期ポジションで動く方向に表現されることができる。
図５２は、本発明の第２マルチタッチを入力する動作の例を示すものである。本発明の前記第２マルチタッチは、２個のポイントが垂直ポジション、水平ポジション及び左右対角ポジションのうちいずれか１つのポジションに入力されることができる。また、前記のようなポジションからオブジェクト外側にドラッグが発生する時、本発明の実施形態によるリリース処理を行うようになる。この時、リリースされるオブジェクトのビジュアル効果は、第２マルチタッチによる前記のような初期ポジションで動く方向に表現されることができる。
図５３及び図５４は、本発明の実施形態による第１マルチタッチを利用したオブジェクト選択方法の例を示す図である。図５５〜図５７は、本発明の実施形態による第１マルチタッチを利用してオブジェクトを選択する他の方法の例を示す図である。
本発明の実施形態において前記第１マルチタッチによるピックアップジェスチャーは、設定方式によって１つのオブジェクトを選択するか、または複数のオブジェクトを選択することができる。すなわち、本発明の実施形態によれば、第１マルチタッチ後、ピックアップジェスチャーによる２個のポイント間の間隔調節を通じてオブジェクトの量を決定して選択することができる。例えば、電子本（ｅ−ｂｏｏｋ）のようなオブジェクトの場合、ユーザがめくりたいページ量を決定し、第１マルチタッチを利用したページめくりが可能である。
図５３に示したように、デバイスは、第１マルチタッチによる初期２個のポイントからオブジェクト中心にドラッグが発生した時、前記ドラッグ後の距離値Ｌ１とあらかじめ設定された第２臨界値Ｔｈ２とを比較することができる。この時、前記ドラッグ後の距離値Ｌ１が前記第２臨界値より小さければ、デバイスは、前記ドラッグ後の最終２個のポイント内に存在する１つのオブジェクトを選択することができる。
図５４に示したように、デバイスは、第１マルチタッチによる初期２個のポイントからオブジェクト中心にドラッグが発生した時、前記ドラッグ後の距離値Ｌ２とあらかじめ設定された第２臨界値Ｔｈ２とを比較することができる。この時、前記ドラッグ後の距離値Ｌ２が前記第２臨界値より大きければ、デバイスは、前記ドラッグ後の最終２個のポイント内に存在する複数のオブジェクトを選択することができる。すなわち、前記２個のポイント間の距離値Ｌ２内に存在するすべてのオブジェクトを選択することができる。
図５５〜図５７は、複数のアイテム（オブジェクト）のメニューリストでピックアップジェスチャーを利用して複数のオブジェクトを選択する動作を示している。
図５５は、２個のポイントのドラッグ後の距離値Ｌ１が設定された前記第２臨界値Ｔｈ２より小さい時、最終２個のポイント内に属する１つのオブジェクトＥＥＥを選択することができる。
これとは異なって、設定方式によって初期２個のポイントを認知し、そのポイント内に属するすべてのオブジェクトＣＣＣ、ＥＥＥ、ＦＦＦを選択することもでき、このような例が図５６に示している。
図５６に示したように、２個ポイントの距離値に関係なく、第１マルチタッチによる初期２個のポイントを認知し、前記２個のポイントから内側にドラッグが発生した時、前記認知する２個のポイント内に存在する複数のオブジェクトＣＣＣ、ＥＥＥ、ＦＦＦを一度に選択することができる。
図５７は、２個のポイントのドラッグ後の距離値Ｌ２が設定された前記第２臨界値Ｔｈ２より大きい時、最終２個のポイントが位置する箇所のオブジェクトＣＣＣ、ＦＦＦと前記最終２個ポイント内に存在するすべてのオブジェクトＥＥＥを選択することができる。
図５８〜図６０は、本発明の実施形態による第１マルチタッチ時オブジェクトを認識する方法を示す図である。この時、２個のフィンガータッチポイントによってマルチタッチが行われる場合を仮定して説明する。
図５８〜図６０を参照すれば、マルチフィンガーによるマルチタッチが行われる場合、デバイスは、初期２個のポイント（初期ポイント）からピックアップジェスチャーによるドラッグ後に発生する２個のポイント（ドラッグポイント）６００を認知し、前記ドラッグポイント６００を投影（ｓｈａｄｏｗ）し、仮想の２個ポイント（仮想ポイント）７００を生成することができる。
次に、前記デバイスは、前記ドラッグポイント６００と前記仮想ポイント７００による４個のポイント６００、７００を連結し、四角領域８００を生成する。その後、前記デバイスは、前記四角領域８００内に含まれる少なくとも１つのオブジェクトを第１マルチタッチによって選択するオブジェクトとして認知することができる。
この時、図６０は、オブジェクトが４個のポイント６００、７００を連結して生成する前記四角領域８００を脱する場合の例を示すものである。すなわち、本発明の実施形態においては、前記四角領域８００の内部に存在するオブジェクトと前記四角領域８００にかけられるオブジェクトの両方を認知することができる。
図６１及び図６２は、本発明の実施形態による第１マルチタッチ入力後にこれを解除する動作例を示す図である。
図６１及び図６２に示したように、デバイスは、初期２個のポイント（初期ポイント）からピックアップジェスチャーによるドラッグ後に発生する２個のポイント（ドラッグポイント）６００を認知する。その後、デバイスは、第１マルチタッチの入力が終了すれば、前述したように、当該オブジェクトをピックアップ処理することができる。
一方、前記ドラッグポイント６００からさらに前記初期ポイント方向のように外側方向に移動するリリースジェスチャーに対応するドラッグが発生する時、前記デバイスは、前記第１マルチタッチの入力取消として判断することができる。すなわち、第１マルチタッチ入力によるピックアップジェスチャーによる動作を認知した後、引き続いてリリースジェスチャーによる動作を認知する時、前記デバイスは、前記入力する第１マルチタッチの取消として判断することができる。
この時、前記デバイスは、前記第１マルチタッチ取消時、すなわち前記ピックアップジェスチャーに引き続くリリースジェスチャーを認知する時、当該オブジェクトが選択されてから取消されることを通知するエフェクトを適用することができる。例えば、前記リリースジェスチャーを認知する時、振動フィードバックを付与することができる。また、前記振動フィードバックと共に、前述のようなピックアップ効果を適用する逆順によって当該オブジェクトを原位置に復元するビジュアル効果を提供することもできる。
以上では、本発明の実施形態による第１マルチタッチ及び第２マルチタッチによる動作実施形態と、それを利用したオブジェクト管理方法について記述した。次に、以下では、上記のような第１マルチタッチ及び第２マルチタッチを利用する実施形態について記述する。
図６３〜図６５は、本発明の実施形態による第１マルチタッチをゲームに応用する場合の例を示す図である。
図６３〜図６５を参照すれば、まず、図６３に示したように、デバイスは、ユーザ要請によるゲーム待機画面１００を表示することができる。この時、前記待機画面１００は、図６３〜図６５に示したように、複数のオブジェクトが当該ゲームの設定された方式によって多様な方向に各々動く形状の例を示すものである。また、図６３〜図６５では省略したが、前記待機画面１００は、前記ゲームに対応する設定されたユーザインターフェースをさらに提供することができる。例えば、前記ゲーム進行による時間情報、前記ゲーム進行による点数情報、前記ゲーム進行後の結果を示すランキング情報などのユーザインターフェースをさらに提供することもできる。
次に、ユーザは、前記待機画面１００の動的オブジェクトのうちユーザがゲーム進行によって選択しようとする特定オブジェクト８５０に対して第１マルチタッチ入力を発生することができる。すなわち、図６４に示したように、ユーザは、前記第１マルチタッチ入力を通じて前記動的オブジェクトのうちユーザが希望する特定オブジェクト８５０をピックアップすることができる。すると、デバイスは、前記第１マルチタッチ入力に対応して前記特定オブジェクト８５０に前述のようなピックアップ効果を適用する。
次に、前記デバイスは、前記特定オブジェクト８５０に対するピックアップ効果処理後、図６５に示したように、前記特定オブジェクト８５０を前記待機画面１００上で除去して表示する。
もし、前記ゲームが制限された時間内に前記待機画面１００の動的オブジェクトを除去するものである場合、前記デバイスは、制限された時間をカウントするユーザインターフェースを表示することができる。また、前述の図７に示したように、前記第１マルチタッチによってオブジェクトがピックアップされることを通知するアイテム３００を前記待機画面１００の特定領域に表示することができる。この時、前記アイテム３００は、ユーザの上記のような動作によるゲーム進行に対応して、ピックアップされるオブジェクトを順次に積層して表示することができる。このような表示は、第１マルチタッチ入力に対応してピックアップされるオブジェクト発生時、それに対応してリアルタイムで適用して表示することができる。また、前記デバイスは、前記アイテム３００にオブジェクトを累積する時、設定された計算方式によってピックアップされた個数に対応する点数を算出し、待機画面１００の特定領域に提供することもできる。
その後、制限された時間が満了する時、前記デバイスは、前記ゲーム進行による待機画面１００を終了し、点数情報、ランキング情報などのような設定されたユーザインターフェースの待機画面１００を提供することができる。前述したように、ユーザは、前述の第１マルチタッチ入力を利用して前記待機画面１００上の動的オブジェクトを除去するゲームを行うことができる。
次に、以下では、第１マルチタッチ及び第２マルチタッチを利用する他の実施形態について記述する。特に、図６６と図６７〜図７１を参照して、第１デバイスで第１マルチタッチによってピックアップするオブジェクトを第２デバイスで第２マルチタッチによってリリースする実施形態について記述する。この時、前記第１デバイスの特定オブジェクトを前記第２デバイスに移動する動作の例を説明するが、本発明がこれに限定されるものではない。したがって、設定方式または設定されたキー入力の組合によって前記第１デバイスの特定オブジェクトを前記第２デバイスにコピーすることも可能であることは勿論である。
図６６は、本発明の実施形態によるマルチタッチを利用してデバイス間にオブジェクトを移動する動作例を示す図である。また、図６７〜図７１は、図６６の実施形態によってデバイス間にオブジェクトを移動する画面例を示す図である。
図６６と図６７〜図７１を参照すれば、まず、第１デバイス２０００と第２デバイス３０００は、支援する通信方式による手続によって相互間の連結を設定することができる（２１０１段階）。この時、前記連結設定時、各デバイス２０００、３０００は、本発明の実施形態による機能を活性化することができる（２１０１段階）。すなわち、前記各デバイス２０００、３０００は、図６７に示したように、ユーザ要請による待機画面１００、１０５を各々表示することができる。この時、参照符号９００は、前記第１デバイス２０００の待機画面１００の例を示すものであり、参照符号１０００は、前記第２デバイス３０００の待機画面１０５の例を示すものである。この時、前記各デバイス２０００、３０００の待機画面１００、１０５各々は、複数のオブジェクトが配置されて表示されることができる。
一方、本発明の実施形態において、前記デバイス２０００、３０００間の連結は、ブルートゥース通信のような近距離無線通信による連結及びデータケーブルなどを利用した有線通信による連結が可能である。したがって、前記通信方式は、前記連結によって無線通信方式または有線通信方式のうちいずれか１つの通信方式であることができる。この時、図６６と図６７〜図７１では、無線通信を利用する場合を例にして説明する。
また、本発明の実施形態において適用される前記無線通信は、 ブルートゥース通信、赤外線通信、ジグビー（Ｚｉｇｂｅｅ）通信及びその他の近距離で通信チャネルを形成し、信号を送受信することができる多様な無線通信の適用が可能であることは勿論である。
次に、ユーザは、前記第１デバイス２０００の待機画面１００でユーザが希望する特定オブジェクト９５０に対して第１マルチタッチ入力を発生することができる。すると、前記第１デバイス２０００は、前記第１マルチタッチ入力に対応して前記特定オブジェクト９５０をピックアップ処理する（２１０３段階）。
次に、前記第１デバイス２０００は、前記第１マルチタッチによってピックアップする前記特定オブジェクト９５０を前記待機画面１００上で除去して表示する。また、前記第１デバイス２０００は、前記特定オブジェクト９５０または前記特定オブジェクト９５０を呼び出すことができる前記特定オブジェクト９５０に対するマクロ情報を保存する（２１０７段階）。前記２１０３段階と２１０５段階による画面の例を図６８及び図６９に示す。
この時、前記第１デバイス２０００の動作は、前述したものに対応するので、それに対する説明を省略する。但し、図６９に示したように、前記特定オブジェクト９５０に対するピックアップ状態を通知する図７に示したようなアイテム３００を待機画面１００の特定領域に示すことができる。
前記第１デバイス２０００は、前記第１マルチタッチによる前記特定オブジェクト９５０を保存した後（２１０５段階）、前記特定オブジェクト９５０に対する情報メッセージを生成し（２１０７段階）、前記第２デバイス３０００に伝送する（２１０９段階）。ここで、前記情報メッセージは、前記特定オブジェクト９５０がピックアップされて伝送されるので、前記特定オブジェクト９５０を受信することができる受信モードを活性化すべきことを前記第２デバイス３０００に要請するメッセージであることができる。すなわち、前記情報メッセージは、前記第２デバイス３０００の受信モード活性化のための制御命令であることができる。
この時、図６６では省略したが、前記第１デバイス２０００は、前記情報メッセージを生成する前に、前記第２デバイス３０００との連結状態をチェックする過程をさらに行うこともできる。
次に、前記第２デバイス３０００は、前記第１デバイス２０００から前記情報メッセージを受信すれば（２１１１段階）、それに応答して前記情報メッセージをパーシングし、前記情報メッセージによってオブジェクト受信のための受信モードを活性化する（２１１３段階）。ここで、前記受信モードは、第２マルチタッチ入力が発生する時、前記第１デバイス２０００から伝達されるオブジェクトを受信して表示することができるモードを示すことができる。この時、前記デバイスは、前記情報メッセージ受信及び受信モード活性化のうち少なくともいずれか１つの動作時、ユーザにアラームを発生することができる。
次に、ユーザは、前記第２デバイス３０００が受信モード活性化に対応して、前記第２デバイス３０００の待機画面１０５でユーザが希望する特定領域に第２マルチタッチ入力を発生することができる。すなわち、前記特定オブジェクト９５０をリリースするための第２マルチタッチによるリリースジェスチャーを行うことができる。すると、前記第２デバイス３０００は、前記第２マルチタッチ入力に対応して前記特定オブジェクト９５０をリリースするためのプロセッシングを行う（２１１５段階）。
すなわち、前記第２デバイス３０００は、前記第２マルチタッチ入力を感知する時、要請メッセージを生成し（２１１７段階）、前記第１デバイス２０００に伝送する（２１１９段階）。ここで、前記要請メッセージは、前記受信モードで第２マルチタッチ入力に対応して前記第１デバイス２０００でピックアップされて保存された前記特定オブジェクト９５０の送信を要請するメッセージであることができる。すなわち、前記要請メッセージは、前記第１デバイス２０００にオブジェクト伝送を要請する制御命令であることができる。
次に、前記第１デバイス２０００は、前記第２デバイス３０００から前記要請メッセージを受信すれば（２１２１段階）、それに応答して前記要請メッセージをパーシングし、前記要請メッセージによって以前にピックアップされて保存された前記特定オブジェクト９５０を呼び出す（２１２３段階）。次に、前記第１デバイス２０００は、前記呼び出す特定オブジェクト９５０を前記第２デバイス３０００に伝送する（２１２５段階）。
次に、前記第２デバイス３０００は、前記第１デバイス２０００から前記特定オブジェクト９５０を受信すれば（２１２７段階）、前記特定オブジェクト９５０を前記待機画面１０５上で前記第２マルチタッチが発生する当該位置に表示する（２１２９段階）。この時、前記第２デバイスは、前記特定オブジェクト９５０を表示する時、前記第２マルチタッチが発生する位置に前述のようなリリース効果をビジュアルに提供しながら表示することができる。図６６の２１１５段階〜２１２９段階による画面例を図７０及び図７１に示す。この時、図７０及び図７１による動作説明は、前述したものに対応するので、それに対する説明を省略する。
次に、前記第２デバイス３０００は、前記第２マルチタッチによる前記特定オブジェクト９５０に対するリリース処理後、それによる結果メッセージを生成し（２１３１段階）、前記第１デバイス２０００に伝送することができる（２１３３段階）。ここで、前記結果メッセージは、前記特定オブジェクト９５０のリリース処理による結果すなわち、成功／失敗可否に対する情報を含むメッセージであることができる。
次に、前記第１デバイス２０００は、前記第２デバイス３０００から前記結果メッセージを受信すれば（２１３５段階）、それに応答して前記結果メッセージをパーシングし、前記結果メッセージによって以前にピックアップされて保存部に保存された前記特定オブジェクト９５０を前記第１デバイス２０００から削除する（２１３７段階）。この時、図６６では、設定された“移動方式”で前記手続によって前記特定オブジェクト９５０を前記第１デバイス２０００で削除する場合の例を説明した。しかし、もし設定された方式が“コピー方式”の場合、前記第１デバイス２０００は、前記結果メッセージを受信する時、前記保存部に保存された前記特定オブジェクト９５０を元々の位置に復元して示すこともできる。
以上、図６６と図６７〜図７１を参照して記述したように、本発明の実施形態による第１デバイス２０００で第１マルチタッチを利用して特定オブジェクトをピックアップして、第２デバイス３０００で第２マルチタッチを利用して前記特定オブジェクトをリリースすることができる。これにより、デバイス２０００、３０００間にオブジェクトの移動またはコピーによる管理をさらに簡便に行うことができる。
以上では、本発明の実施形態によるマルチタッチを利用したオブジェクト管理による全般的な動作及びそれを利用した多様な実施形態について記述した。以下では、前述のような本発明の動作を行う前記制御手段及びこのような制御手段を含むデバイスの構成について記述する。しかし、本発明が下記に記述する内容に限定されるものではないので、下記の実施形態に基づいて多様な実施形態に適用することができる。
一方、以上で記述したような本発明の前記デバイスの例として、ＰＤＡ（ＰｅｒｓｏｎａｌＤｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）、ＰＭＰ（Ｐｏｒｔａｂｌｅ Ｍｕｌｔｉｍｅｄｉａ Ｐｌａｙｅｒ）、ＭＰ３プレーヤー、デジタル放送プレーヤー、ノートパソコン、パソコン及び移動通信端末（ｍｏｂｉｌｅ ｃｏｍｍｕｎｉｃａｔｉｏｎ ｔｅｒｍｉｎａｌ）などのような情報通信機器とマルチメディア機器及びそれに対応する多様な応用機器を含むことができる。
しかし、本発明のデバイスは前記デバイスに限定されるものではなく、本発明の実施形態よってマルチフィンガー基盤のマルチタッチ入力が可能なディスプレイデバイスを含むすべての形態の中大型ディスプレイデバイスを含むことができる。例えば、前記デバイスは、ユーザの入力に対応する出力を提供するディスプレイユニットを含むすべての形態のデバイスを含むことができる。すなわち、本発明は、テレビ（Ｔｅｌｅｖｉｓｉｏｎ）、ＬＦＤ（Ｌａｒｇｅ Ｆｏｒｍａｔ Ｄｉｓｐｌａｙ）、ＤＳ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｇｅ）、メディアポール（ｍｅｄｉａ ｐｏｌｅ）などの中大型デバイスに適用されることもできる。また、本発明では、タッチスクリーンを利用するものを例示した。しかし、本発明がこれに限定されるものではなく、ユーザ入力に応答して出力を支援するすべてのタイプのディスプレイユニットを含むことができる。
以下では、本発明の前記デバイスに対する概略的な構造を、図７２を参照しながら説明する。
図７２は、本発明の実施形態によるデバイスのブロック構成を概略的に示す図である。
図７２を参照すれば、本発明の実施形態によるデバイスは、近距離通信モジュール２３１０と、入力部２３２０と、表示部２３３０と、保存部２３４０及び制御部２３５０などを含む。
前記近距離通信モジュール２３１０は、前記デバイスの近距離無線通信を行う。前記近距離通信モジュール２３１０は、任意の他のデバイスと設定された方式の通信チャネルを形成し、データ信号の送受信を行う。前記近距離通信モジュール２３１０は、ブルートゥース通信、インフラレッド通信、ジグビー通信など前記デバイスで支援する少なくとも１つの無線通信を利用することができ、また、その他、近距離で通信チャネルを形成して信号を送受信することができる多様な無線通信モジュールの適用も可能であることは勿論である。本発明の実施形態においては、前記近距離通信モジュール２３１０がブルートゥースモジュールであることを代表的な例として説明する。
したがって、前記近距離通信モジュール２３１０は、アンテナ（例えば、ブルートゥースアンテナなど）を通じて他のブルートゥース装置（例えば、第２デバイス３０００）とブルートゥースプロトコルによってブルートゥース通信を行うことができる。これにより、前記デバイスは、本発明の機能実行による前記ブルートゥース通信のような近距離無線通信を利用して他の外部デバイスと連結設定することができる。その後、前記デバイスは、本発明の実施形態によってピックアップする特定オブジェクトを無線通信で他の外部デバイスに伝送することができる。
前記入力部２３２０は、多様な文字情報を入力され、各種機能の設定及び前記デバイスの機能制御と関連して入力される信号を前記制御部２３５０に伝達する。特に、前記入力部２３２０は、前記デバイスの提供形態によってタッチパッドを別に含むか、または前記タッチパッドで形成されることができる。また、前記入力部２３２０は、前記デバイスの提供形態によって前記タッチパッド、タッチスクリーン、一般的なキー配列のキーパッド、クォティ方式のキーパッド及び特定機能を行うように設定された機能キーなどのような入力手段のうちいずれか１つまたはこれらの組合で形成することができる。本発明のデバイスがタッチスクリーンだけによって動作するデバイスの場合、前記入力部２３２０の構成は省略することができる。
前記表示部２３３０は、前記デバイスの機能実行中に発生する画面データを表示し、ユーザの入力イベント、操作及びキー操作などの状態情報を表示し、また前記デバイスの機能設定情報などを表示する。前記表示部２３３０は、前記制御部２３５０から出力される様々な信号と色情報を視覚的なエフェクトを適用して表示する。前記表示部２３３０は、液晶ディスプレイ（ＬＣＤ、Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）を使用することができ、このような場合、前記表示部２３３０は、ＬＣＤ制御部、映像を保存することができるメモリ及びＬＣＤ表示素子などを備えることができる。しかし、本発明がＬＣＤに限定されるものではなく、前記表示部２３３０は、発光ダイオード（ＬＥＤ、Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）、有機発光ダイオード（ＯＬＥＤ、Ｏｒｇａｎｉｃ ＬＥＤ）、能動型ＯＬＥＤ（ＡＭＯＬＥＤ、Ａｃｔｉｖｅ Ｍａｔｒｉｘ ＯＬＥＤ）などのような他の表示装置が使用されることもできる。
前記表示部２３３０は、本発明の実施形態によってタッチスクリーンで形成することができる。前記タッチスクリーンは、ユーザが指やペンなどの物体で入力イベント（タッチ、マルチタッチ、ドラッグ、タップ、フリックなどのイベント）を発生すれば、当該位置を入力されるようにする特殊な入力装置を装着したスクリーンを示す。すなわち、デバイスでキーパッドを使用せずにスクリーンに現われたオブジェクトやユーザインターフェースの特定位置などにユーザの入力イベントが発生すれば、当該位置を把握し、保存されたソフトウェアによって特定処理を行うことができるようにする。前記タッチスクリーンは、スクリーンで直接入力情報を入力されることができるようにする表示装置を示す。
前記タッチスクリーンは、前記デバイスの表示部２３３０にタッチパネルという装置を付加して機能を発揮するもので、前記タッチパネルは、上下左右に目に見えない赤外線が流れるようにして、画面に複数の四角形格子が生ずるようにして、ユーザの手先やその他の物体で前記格子に前記入力イベントを発生すれば、当該位置を把握することができるようにする機能を有している。したがって、前記タッチパネルを装着したスクリーンにあらかじめ現われたデータ（ウィジェット、ウィジェットアイコン、ウィジェットセットアイコン、映像、ユーザインターフェースなどのオブジェクト）に入力イベントが発生すれば、前記制御部２３５０は、前記入力イベントが発生するスクリーンの位置によってユーザが選択した事項が何であるかを把握し、これに対応する命令を処理するようにする。これにより、ユーザが非常に容易に自分が希望する情報を得ることができる。
例えば、ユーザがマルチフィンガーを利用してスクリーン上の特定領域に前記入力イベントを発生すれば、これによる位置情報を前記制御部２３５０が認識する。また、前記制御部２３５０は、前記入力イベントに対応してスクリーン上に表示されるオブジェクトを、前記入力イベントによるエフェクトを適用してスクリーン上で除去する機能を処理することができる。また、前記制御部２３５０は、前記入力イベントに対応して呼び出される特定オブジェクトを、前記入力イベントによるエフェクトを適用してスクリーン上に示す機能を処理することができる。
すなわち、前記表示部２３３０は、前記タッチスクリーンを通じて本発明の機能実行による制御信号を入力されて前記制御部２３５０に伝達する。このようなタッチスクリーンを利用した前記表示部２３３０の構成及び動作は、前述の図１〜図７１に対応する。
前記保存部２３４０は、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）とＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などで構成されることができる。前記保存部２３４０は、前記デバイスで生成及び活用される多様なデータなどを保存することができる。前記多様なデータは、デバイスのアプリケーション実行によって発生するデータ及び前記デバイスを利用して生成するか、外部から受信して保存可能なすべての形態のユーザデータなどを含む。特に、前記多様なデータは、本発明で定義するウィジェット、ウィジェットアイコン、アイコン、メニュー、メニューリスト、イメージ、背景画面などのオブジェクトを含むことができる。また、前記多様なデータは、前記デバイスで提供されるユーザインターフェース及び前記デバイス利用による様々な設定情報などを含むことができる。
特に、前記保存部２３４０は、本発明の実施形態によるマルチフィンガー基盤のマルチタッチ入力と関連した設定情報を保存することができる。このような設定情報は、マルチタッチ入力によるジェスチャー情報、マルチタッチ入力に対応して適用されるエフェクト情報、マルチタッチ入力に対応して提供する付加機能情報などであることができ、このような設定情報は、設定情報保存領域２３４１に保存することができる。また、前記保存部２３４０は、マルチタッチ入力によりピックアップされるオブジェクトを保存するオブジェクト保存領域２３４３を含むことができる。すなわち、オブジェクト保存領域２３４３は、図６を参照した説明部分で説明したように、本発明の第１マルチタッチ入力によりピックアップされる少なくとも１つのオブジェクトを保存することができる。
前記保存部２３４０は、前記デバイスの一般的な動作を制御するためのアプリケーション及び本発明のマルチタッチ入力による動作を制御するためのアプリケーションを保存することができる。このようなアプリケーションは、前述の図１〜図７１で説明したような本発明の動作に対応するアプリケーションであることができる。このようなアプリケーションは、前記保存部２３４０のアプリケーション保存領域（図示せず）に保存することができる。
また、前記保存部２３４０は、前述のアプリケーション実行中に発生するデータを一時保存する１つ以上のバッファーを含むことができる。また前記保存部２３４０は、前記デバイスの内部に構成されることができ、またスマートカードなどのように外部に構成されることができ、内部／外部のすべての保存媒体を含むことができることは勿論である。
前記制御部２３５０は、前記デバイスに対する全般的な制御機能を実行し、前記デバイス内の前記ブロック間の信号流れを制御する。前記制御部２３５０は、前記近距離通信モジュール２３１０と、前記入力部２３２０と、前記表示部２３３０及び前記保存部２３４０などのような各構成間の信号流れを制御する。
前記制御部２３５０は、前記デバイスが移動通信端末の場合、移動通信サービスのためのコーデック（ＣＯＤＥＣ）及び少なくとも１つのモデム（ＭＯＤＥＭ）よりなるデータ処理部を含むこともできる。この時、上記のように、前記デバイスが移動通信サービスを支援する時、前記デバイスは、無線周波数（ＲＦ、Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ）信号処理のためのＲＦ通信モジュールをさらに含むことができる。
特に、前記制御部２３５０は、本発明の実施形態によるマルチフィンガー基盤のマルチタッチ入力を感知し、前記マルチタッチの種類によって待機画面上の特定オブジェクトに対するピックアップ及びリリースのうちいずれか１つの動作を制御する。また、前記制御部２３５０は、前記特定オブジェクトのピックアップまたはリリース制御時、入力されるマルチタッチに対応するエフェクトを適用してオブジェクトの出力または除去を制御する。また、前記制御部２３５０は、外部デバイスとの有線または無線連結設定時、入力されるマルチタッチに対応してオブジェクトの前記外部デバイスへの移動またはコピーを制御する。
このような制御部２３５０は、前述の図１〜図７１を参照した説明部分で説明したような本発明の動作を制御することができる。前記制御部２３５０の前述の機能制御は、ソフトウェアで具現され、本発明の動作を処理することもできる。以下、前記制御部２３５０の制御動作を区分して記述する。
すなわち、前記制御部２３５０は、タッチ信号感知部２３５１と、マルチタッチ判断部２３５３と、オブジェクト管理部２３５５及び同期処理部２３５７などを含むことができる。
前記タッチ信号感知部２３５１は、前記表示部２３３０のタッチスクリーンを通じて入力されるユーザのタッチ信号を感知する。この時、前記タッチ信号感知部２３５１は、シングルフィンガー基盤のシングルタッチとマルチフィンガー基盤のマルチタッチを感知することができる。前記タッチ信号感知部２３５１は、マルチタッチを感知する時、それによる情報を前記マルチタッチ判断部２３５３に伝達することができる。
前記マルチタッチ判断部２３５３は、前記タッチ信号感知部２３５１から前記マルチタッチによる情報を受信する時、前記マルチタッチの種類を判別することができる。すなわち、前記マルチタッチ判断部２３５３は、前記マルチタッチが本発明の実施形態による第１マルチタッチであるかまたは第２マルチタッチであるかを区分する。すなわち、前記マルチタッチ判断部２３５３は、前記マルチタッチによる２個のポイント間の距離値Ｌとあらかじめ設定された臨界値Ｔｈの比較に基づいて前記マルチタッチの種類を判別することができる。また、前記マルチタッチ判断部２３５３は、前記マルチタッチ後に発生するドラッグ信号を識別する。すなわち、前記マルチタッチ判断部２３５３は、マルチタッチ後に入力されるドラッグ信号の識別によってピックアップジェスチャーまたはリリースジェスチャーを判断する。このようなマルチタッチの種類判別及びドラッグ信号識別は、前述の図４８、図４９及び図５０を参照した説明部分で説明したものに対応する。
前記オブジェクト管理部２３５５は、前記マルチタッチ判断部２３５３で判断する結果に対応して特定オブジェクトに対するピックアップまたはリリース動作を処理する。前記オブジェクト管理部２３５５は、第１マルチタッチ及びピックアップジェスチャーによるマルチドラッグ信号によって待機画面の特定オブジェクトに設定されたエフェクトを付与し、前記エフェクトによるピックアップ及び待機画面上での除去を処理する。前記オブジェクト管理部２３５５は、ピックアップされるオブジェクトの保存を管理する。また、前記オブジェクト管理部２３５５は、第２マルチタッチ及びリリースジェスチャーによるマルチドラッグ信号によって保存されたオブジェクトを呼び出し、呼び出すオブジェクトに設定されたエフェクトを付与し、前記エフェクトによるリリース及び待機画面上に表示を処理する。前記オブジェクト管理部２３５５は、第２マルチタッチ及びリリースジェスチャーによるマルチドラッグ信号によってピックアップされて保存されたオブジェクトの削除を処理する。また、前記オブジェクト管理部２３５５は、第２マルチタッチ及びリリースジェスチャーによるマルチドラッグ信号によって外部の他のデバイスから有線通信または無線通信で伝達されるオブジェクトのリリース動作を処理する。このようなオブジェクト管理部２３５５の動作は、前述の図１〜図７１を参照した説明部分で前記記述された関連動作を説明した部分に対応することができる。
前記同期処理部２３５７は、前記デバイスと外部の他のデバイスとの有線または無線方式による連結設定を処理する。特に、前記同期処理部２３５７は、有線及び無線方式のうちいずれか１つの方式によって連結が設定される時、入力されるマルチタッチに対応するメッセージ送受信を処理する。
すなわち、前記同期処理部２３５７は、外部デバイスと連結が設定され、前記デバイスが送信側動作を行う時、第１マルチタッチによって生成する情報メッセージの送信を処理する。前記同期処理部２３５７は、前記情報メッセージ送信に応答してピックアップされるオブジェクトを要請する要請メッセージを受信する時、ピックアップされて保存されたオブジェクトを前記外部デバイスに伝送する。また、前記同期処理部２３５７は、前記オブジェクト伝送に対応して伝送される結果メッセージが受信される時、前記結果メッセージを前記オブジェクト管理部２３５５に伝達することができる。すると、前記オブジェクト管理部２３５５は、前記結果メッセージに対応してピックアップされて保存されたオブジェクトに対する除去または復元などの動作を処理する。
前記同期処理部２３５７は、前記デバイスが受信側動作を実行することによって外部デバイスから情報メッセージが受信される時、第２マルチタッチによって生成する要請メッセージの送信を処理する。前記同期処理部２３５７は、前記要請メッセージ送信に応答して伝送されるオブジェクトを受信する。また、前記同期処理部２３５７は、受信するオブジェクトの処理結果による結果メッセージを前記外部デバイスに伝送する。
このような前記同期処理部２３５７の動作は、前述の図６６と図６７〜図７１を参照した説明部分で説明したものに対応する。
一方、図２３では、説明の便宜のために前記デバイスの概略的な構成例を図示した。しかし、本発明の前記デバイスが必ず前記構成に限定されない。
したがって、本発明の前記デバイスは、その提供形態によってデジタル放送受信モジュール、インターネット通信モジュール、カメラモジュール、オーディオ処理モジュール及び有線通信モジュール（有線連結のためのインターフェース）などのように上記で言及しない構成を追加的にさらに含むことができる。また、本発明の前記デバイスが移動通信サービスを支援する時、前記デバイスの前記移動通信サービスを支援するためのＲＦ通信モジュール及びデータ処理モジュールを含むことができる。前記データ処理部は、コーデック（ＣＯＤＥＣ）及びモデム（ＭＯＤＥＭ）を含むことができる。また、本発明の前記デバイスは、その提供形態によって前記構成で特定のブロックが除外されるか、他のブロックに代替されることもできることは勿論である。これは、本技術分野における通常の知識を有する者なら容易に理解することができる。
例えば、本発明のデバイスがインターネット網を利用した通信を支援する時、このためのインターネットモジュールを含むことができ、前記インターネットモジュールは、前記制御部２３５０の制御によってインターネット網を通じて他のデバイス及びネットワークと無線通信を行うことができる。また、本発明のデバイスがデジタル放送と関連した機能を提供する時、このための放送受信モジュールを含むことができる。
本明細書と図面に開示された本発明の実施例は、本発明の技術内容を容易に説明し、本発明の理解を助けるために特定例を提示したものに過ぎず、本発明の範囲を限定しようとするものではない。ここに開示された実施例以外にも、本発明の技術的思想に基づく他の変形例が実施可能であることは、本発明の属する技術分野における通常の知識を有する者に自明である。
１００ 待機画面
２００ オブジェクト
２５０ オブジェクト
３００ アイテム
３５０ 特定オブジェクト
４００ アイテム
４５０ 第１オブジェクト
５００ 編集ツール
５５０ 第２オブジェクト
６５０ 第３オブジェクト
７５０ 特定オブジェクト
２３１０ 近距離通信モジュール
２３２０ 入力部
２３３０ 表示部
２３４０ 保存部
２３４１ 設定情報保存領域
２３４３ オブジェクト保存領域
２３５０ 制御部
２３５１ タッチ信号感知部
２３５３ マルチタッチ判断部
２３５５ オブジェクト管理部
２３５７ 同期処理部

Claims (15)

  1. タッチスクリーン基盤のデバイスにおけるオブジェクト管理方法において、
    第１マルチタッチ入力に対応する任意のオブジェクトをピックアップする過程と、
    第２マルチタッチ入力に対応して前記ピックアップされた前記オブジェクトをリリースする過程と、を有することを特徴とするタッチスクリーンを利用したオブジェクト管理方法。
  2. 前記ピックアップする過程は、
    待機画面上に発生するタッチ信号を感知する過程と、
    前記タッチ信号がオブジェクトピックアップのために設定された方式で入力される前記第１マルチタッチ信号である時、前記オブジェクトをピックアップする過程と、
    前記ピックアップするオブジェクトが前記待機画面上で消えるビジュアルエフェクトを提供する過程と、
    前記ピックアップするオブジェクトを保存する過程と、
    前記第１マルチタッチの入力取消時、前記保存する前記オブジェクトを復元する過程と、を含むことを特徴とする請求項１に記載のタッチスクリーンを利用したオブジェクト管理方法。
  3. 前記リリースする過程は、
    前記待機画面上に発生するタッチ信号を感知する過程と、
    前記タッチ信号がオブジェクトリリースのために設定された方式で入力される前記第２マルチタッチ信号である時、前記ピックアップに応答して保存された前記オブジェクトを呼び出す過程と、
    前記呼び出す前記オブジェクトを前記待機画面で前記第２マルチタッチが発生する特定領域にリリースする過程と、
    前記リリース時、前記オブジェクトを移動、削除、コピー及び編集のうちいずれか１つの動作を処理する過程と、を含むことを特徴とする請求項２に記載のタッチスクリーンを利用したオブジェクト管理方法。
  4. 前記第１マルチタッチが複数のオブジェクトの各々に対して連続して発生する時、前記複数の各オブジェクトがピックアップされる手順に対応して順次に保存する過程と、
    前記第２マルチタッチが繰り返して発生する時、前記複数のオブジェクトが保存された手順の逆順によってオブジェクトを順次に呼び出してリリースする過程と、を含むことを特徴とする請求項２に記載のタッチスクリーンを利用したオブジェクト管理方法。
  5. マルチタッチ入力を感知する時、前記マルチタッチによるポイント間の距離値を算出する過程と、
    前記距離値が設定された臨界値より大きいかまたは同一であれば、前記マルチタッチを前記第１マルチタッチとして認知する過程と、
    前記距離値が設定された臨界値より小さければ、前記マルチタッチを前記第２マルチタッチとして認知する過程と、を含むことを特徴とする請求項２に記載のタッチスクリーンを利用したオブジェクト管理方法。
  6. 前記第１マルチタッチ後、ピックアップジェスチャーによる２個のポイント間の間隔調節を通じてオブジェクトの量を決定して選択する過程を含むことを特徴とする請求項５に記載のタッチスクリーンを利用したオブジェクト管理方法。
  7. 前記デバイスと外部デバイス間の連結が設定された状態で、
    前記デバイスで発生する第１マルチタッチによって任意のオブジェクトを保存する過程と、
    前記外部デバイスで発生する第２マルチタッチによって前記デバイスで第１マルチタッチによってピックアップされた前記オブジェクトを前記外部デバイスにリリースする過程と、
    前記デバイスが前記外部デバイスから前記オブジェクト伝送に対する結果メッセージを受信する時、前記保存するオブジェクトを設定方式によって除去するかまたは復元する過程と、を含むことを特徴とする請求項１に記載のタッチスクリーンを利用したオブジェクト管理方法。
  8. タッチスクリーン基盤のデバイスにおいて、
    少なくとも１つのオブジェクトで構成された待機画面を表示し、マルチタッチを入力される表示部と、
    マルチタッチと関連した設定情報を保存し、第１マルチタッチによってピックアップされるオブジェクトまたは前記オブジェクトに対するマクロ情報を保存し、第２マルチタッチに応答して以前にピックアップされて保存されたオブジェクトを提供する保存部と、
    マルチタッチの種類を区分し、第１マルチタッチによって待機画面上の特定オブジェクトに対するピックアップを制御し、第２マルチタッチを感知する時、前記第１マルチタッチによってピックアップされて保存された少なくとも１つのオブジェクトに対するリリースを制御する制御部と、を有することを特徴とするタッチスクリーンを利用したオブジェクト管理装置。
  9. 前記制御部は、
    前記第１マルチタッチによってピックアップする前記特定オブジェクトを前記保存部に保存し、前記表示部の待機画面上に存在する前記特定オブジェクトに消えるビジュアルエフェクト付与を制御し、前記第１マルチタッチの入力取消を感知する時、前記保存するオブジェクトの復元を制御し、
    前記第２マルチタッチを感知する時、前記第１マルチタッチによって以前にピックアップされて保存された前記オブジェクトを呼び出し、前記呼び出すオブジェクトの移動、削除、コピー及び編集のうちいずれか１つのリリース動作を制御することを特徴とする請求項８に記載のタッチスクリーンを利用したオブジェクト管理装置。。
  10. 前記制御部は、
    前記第１マルチタッチが複数のオブジェクトの各々に対して連続して発生する時、前記複数の各オブジェクトがピックアップされる手順に対応して順次に保存し、
    前記第２マルチタッチが繰り返して発生する時、前記複数のオブジェクトが保存された逆順によってオブジェクトを順次に呼び出してリリースすることを特徴とする請求項９に記載のタッチスクリーンを利用したオブジェクト管理装置。
  11. 前記制御部は、
    マルチタッチ入力を感知する時、前記マルチタッチによるポイント間の距離値を算出し、前記距離値と設定された臨界値の比較によって前記第１マルチタッチ及び前記第２マルチタッチを区分し、
    前記第１マルチタッチ後、ピックアップジェスチャーによる２個のポイント間の間隔調節を通じてオブジェクトの量を決定して選択することを特徴とする請求項９に記載のタッチスクリーンを利用したオブジェクト管理装置。
  12. 前記制御部は、
    他の外部デバイスと連結が設定された状態で入力されるマルチタッチの種類によってピックアップするオブジェクトの移動またはコピーを制御することを特徴とする請求項９に記載のタッチスクリーンを利用したオブジェクト管理装置。
  13. 前記制御部は、
    前記デバイスと前記外部デバイスとの連結が設定された状態で、
    前記デバイス上の第１マルチタッチによって任意のオブジェクトをピックアップし、前記外部デバイス上の第２マルチタッチによって前記第１マルチタッチによってピックアップされた前記オブジェクトを前記外部デバイスにリリースすることを特徴とする請求項１２に記載のタッチスクリーンを利用したオブジェクト管理装置。
  14. 前記制御部は、
    前記表示部のタッチスクリーンを通じて入力されるユーザのタッチ信号を感知し、シングルフィンガー基盤のシングルタッチとマルチフィンガー基盤のマルチタッチを区分するタッチ信号感知部と、
    前記タッチ信号感知部から前記マルチタッチによる情報を受信する時、前記マルチタッチによる２個のポイント間の距離値とあらかじめ設定された臨界値の比較に基づいて前記マルチタッチの種類が第１マルチタッチであるかまたは第２マルチタッチであるかを区分し、前記マルチタッチ後に入力されるドラッグ信号識別によってピックアップジェスチャーまたはリリースジェスチャーを判断するマルチタッチ判断部と、
    前記第１マルチタッチ及びピックアップジェスチャーによるマルチドラッグ信号によって待機画面の特定オブジェクトに対するピックアップを処理し、前記第２マルチタッチ及びリリースジェスチャーによるマルチドラッグ信号によって保存されたオブジェクトを呼び出し、リリースを処理するオブジェクト管理部と、を含むことを特徴とする請求項９に記載のタッチスクリーンを利用したオブジェクト管理装置。
  15. 前記制御部は、
    外部デバイスとの有線または無線方式による連結設定を処理し、前記外部デバイスとの連結が設定される時、第１マルチタッチによってピックアップされるオブジェクトの伝送及びマルチタッチ種類に対応するメッセージ送受信を処理する同期処理部を含むことを特徴とする請求項１４に記載のタッチスクリーンを利用したオブジェクト管理装置。
JP2011530957A 2008-10-13 2009-10-12 タッチスクリーンを利用したオブジェクト管理方法及び装置 Active JP5731979B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020080100119A KR101503835B1 (ko) 2008-10-13 2008-10-13 멀티터치를 이용한 오브젝트 관리 방법 및 장치
KR10-2008-0100119 2008-10-13
PCT/KR2009/005835 WO2010044576A2 (en) 2008-10-13 2009-10-12 Object management method and apparatus using touchscreen

Publications (2)

Publication Number Publication Date
JP2012505466A true JP2012505466A (ja) 2012-03-01
JP5731979B2 JP5731979B2 (ja) 2015-06-10

Family

ID=42098422

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011530957A Active JP5731979B2 (ja) 2008-10-13 2009-10-12 タッチスクリーンを利用したオブジェクト管理方法及び装置

Country Status (6)

Country Link
US (1) US20100090971A1 (ja)
EP (1) EP2338101B1 (ja)
JP (1) JP5731979B2 (ja)
KR (1) KR101503835B1 (ja)
CN (1) CN102187303B (ja)
WO (1) WO2010044576A2 (ja)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012079156A (ja) * 2010-10-04 2012-04-19 Sony Corp 情報処理装置、情報処理方法、及びプログラム
JP2012174252A (ja) * 2011-02-24 2012-09-10 Kyocera Corp 電子機器、接触操作制御プログラムおよび接触操作制御方法
JP2012174246A (ja) * 2011-02-24 2012-09-10 Kyocera Corp 携帯電子機器、接触操作制御方法および接触操作制御プログラム
JP2013033329A (ja) * 2011-08-01 2013-02-14 Sony Corp 情報処理装置、情報処理方法およびプログラム
JP2013065288A (ja) * 2011-08-29 2013-04-11 Kyocera Corp 装置、方法、及びプログラム
JP2013218521A (ja) * 2012-04-09 2013-10-24 Kyocera Document Solutions Inc 表示入力装置及びこれを備えた画像形成装置
JP2013222247A (ja) * 2012-04-13 2013-10-28 Kyocera Document Solutions Inc 表示入力装置および画像形成装置
JP2013228900A (ja) * 2012-04-26 2013-11-07 Kyocera Document Solutions Inc 表示入力装置および画像形成装置
JP2013250784A (ja) * 2012-05-31 2013-12-12 Kyocera Document Solutions Inc 表示装置、画像形成装置、表示制御方法及びプログラム
JP2014222433A (ja) * 2013-05-14 2014-11-27 コニカミノルタ株式会社 情報処理装置、情報処理システム、表示方法、および制御プログラム
JP2014241143A (ja) * 2014-07-17 2014-12-25 京セラドキュメントソリューションズ株式会社 表示入力装置及びこれを備えた画像形成装置
WO2016042834A1 (ja) * 2014-09-16 2016-03-24 日本電気株式会社 分割画面内のコンテンツの拡大方法、情報処理装置およびその制御方法と制御プログラム
JP2016062155A (ja) * 2014-09-16 2016-04-25 京セラドキュメントソリューションズ株式会社 電子機器、及び、タッチパネルの操作方法
JP2016528600A (ja) * 2013-06-28 2016-09-15 オランジュ グラフィカルユーザインターフェースの一部分の選択方法
JP2017033116A (ja) * 2015-07-30 2017-02-09 レノボ・シンガポール・プライベート・リミテッド 複数の使用モードを備える電子機器、制御方法およびコンピュータ・プログラム
WO2020059528A1 (ja) * 2018-09-19 2020-03-26 富士フイルム株式会社 タッチパネルディスプレイ付きデバイス及びその制御方法、並びにプログラム

Families Citing this family (181)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8018440B2 (en) 2005-12-30 2011-09-13 Microsoft Corporation Unintentional touch rejection
JP2008275565A (ja) * 2007-05-07 2008-11-13 Toyota Motor Corp ナビゲーション装置
US8295879B2 (en) * 2008-05-30 2012-10-23 Motorola Mobility Llc Devices and methods for initiating functions based on movement characteristics relative to a reference
US9002416B2 (en) 2008-12-22 2015-04-07 Google Technology Holdings LLC Wireless communication device responsive to orientation and movement
TW201040823A (en) * 2009-05-11 2010-11-16 Au Optronics Corp Multi-touch method for resistive touch panel
US8836648B2 (en) 2009-05-27 2014-09-16 Microsoft Corporation Touch pull-in gesture
KR101608770B1 (ko) * 2009-08-03 2016-04-04 엘지전자 주식회사 이동단말기 및 그 제어방법
EP2480957B1 (en) 2009-09-22 2017-08-09 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
US8780069B2 (en) 2009-09-25 2014-07-15 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
US8766928B2 (en) * 2009-09-25 2014-07-01 Apple Inc. Device, method, and graphical user interface for manipulating user interface objects
US8832585B2 (en) 2009-09-25 2014-09-09 Apple Inc. Device, method, and graphical user interface for manipulating workspace views
US8799826B2 (en) * 2009-09-25 2014-08-05 Apple Inc. Device, method, and graphical user interface for moving a calendar entry in a calendar application
TWI405104B (zh) * 2009-11-16 2013-08-11 Quanta Comp Inc 利用觸碰感測輸入裝置來翻轉三維圖形物件之方法
US20110119589A1 (en) * 2009-11-19 2011-05-19 Motorola, Inc. Navigable User Interface for Electronic Handset
EP2333651B1 (en) * 2009-12-11 2016-07-20 Dassault Systèmes Method and system for duplicating an object using a touch-sensitive display
JP5750875B2 (ja) * 2010-12-01 2015-07-22 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
US8612884B2 (en) 2010-01-26 2013-12-17 Apple Inc. Device, method, and graphical user interface for resizing objects
US8239785B2 (en) * 2010-01-27 2012-08-07 Microsoft Corporation Edge gestures
US9411504B2 (en) * 2010-01-28 2016-08-09 Microsoft Technology Licensing, Llc Copy and staple gestures
US20110185299A1 (en) * 2010-01-28 2011-07-28 Microsoft Corporation Stamp Gestures
US8261213B2 (en) * 2010-01-28 2012-09-04 Microsoft Corporation Brush, carbon-copy, and fill gestures
US20110185320A1 (en) * 2010-01-28 2011-07-28 Microsoft Corporation Cross-reference Gestures
US20110191719A1 (en) * 2010-02-04 2011-08-04 Microsoft Corporation Cut, Punch-Out, and Rip Gestures
US20110191704A1 (en) * 2010-02-04 2011-08-04 Microsoft Corporation Contextual multiplexing gestures
US9519356B2 (en) * 2010-02-04 2016-12-13 Microsoft Technology Licensing, Llc Link gestures
US20110193785A1 (en) * 2010-02-08 2011-08-11 Russell Deborah C Intuitive Grouping and Viewing of Grouped Objects Using Touch
US9310994B2 (en) * 2010-02-19 2016-04-12 Microsoft Technology Licensing, Llc Use of bezel as an input mechanism
US20110209098A1 (en) * 2010-02-19 2011-08-25 Hinckley Kenneth P On and Off-Screen Gesture Combinations
US9274682B2 (en) * 2010-02-19 2016-03-01 Microsoft Technology Licensing, Llc Off-screen gestures to create on-screen input
US9965165B2 (en) * 2010-02-19 2018-05-08 Microsoft Technology Licensing, Llc Multi-finger gestures
US9367205B2 (en) 2010-02-19 2016-06-14 Microsoft Technolgoy Licensing, Llc Radial menus with bezel gestures
US8799827B2 (en) * 2010-02-19 2014-08-05 Microsoft Corporation Page manipulations using on and off-screen gestures
US8707174B2 (en) * 2010-02-25 2014-04-22 Microsoft Corporation Multi-screen hold and page-flip gesture
US20110209058A1 (en) * 2010-02-25 2011-08-25 Microsoft Corporation Multi-screen hold and tap gesture
US9075522B2 (en) * 2010-02-25 2015-07-07 Microsoft Technology Licensing, Llc Multi-screen bookmark hold gesture
US8751970B2 (en) * 2010-02-25 2014-06-10 Microsoft Corporation Multi-screen synchronous slide gesture
US8539384B2 (en) * 2010-02-25 2013-09-17 Microsoft Corporation Multi-screen pinch and expand gestures
US8473870B2 (en) 2010-02-25 2013-06-25 Microsoft Corporation Multi-screen hold and drag gesture
US9454304B2 (en) * 2010-02-25 2016-09-27 Microsoft Technology Licensing, Llc Multi-screen dual tap gesture
US20110225524A1 (en) * 2010-03-10 2011-09-15 Cifra Christopher G Multi-Touch Editing in a Graphical Programming Language
EP2369443B1 (en) * 2010-03-25 2017-01-11 BlackBerry Limited System and method for gesture detection and feedback
JP5589549B2 (ja) * 2010-05-14 2014-09-17 ソニー株式会社 情報処理装置及び情報処理装置の操作方法
EP2393000B1 (en) * 2010-06-04 2019-08-07 Lg Electronics Inc. Mobile terminal capable of providing multiplayer game and method of controlling operation of the mobile terminal
KR101102326B1 (ko) * 2010-06-11 2012-01-05 한국과학기술원 터치스크린 제어장치, 방법, 이를 포함하는 전자 기기 및 이를 위한 기록매체
CN105892924A (zh) * 2010-07-01 2016-08-24 上海本星电子科技有限公司 基于触摸手势的数据自动传输方法
US8972879B2 (en) 2010-07-30 2015-03-03 Apple Inc. Device, method, and graphical user interface for reordering the front-to-back positions of objects
US9081494B2 (en) 2010-07-30 2015-07-14 Apple Inc. Device, method, and graphical user interface for copying formatting attributes
US9098182B2 (en) 2010-07-30 2015-08-04 Apple Inc. Device, method, and graphical user interface for copying user interface objects between content regions
KR101660746B1 (ko) * 2010-08-24 2016-10-10 엘지전자 주식회사 이동 단말기 및 이것의 애플리케이션 지시자 설정 방법
KR101780440B1 (ko) * 2010-08-30 2017-09-22 삼성전자 주식회사 멀티 터치에 따른 리스트 데이터 출력 제어 방법 및 이를 지원하는 휴대 단말기
CN101943995A (zh) * 2010-09-01 2011-01-12 惠州Tcl移动通信有限公司 一种移动终端及其触摸屏的显示信息处理方法和装置
EP2431895B1 (en) * 2010-09-16 2017-07-26 LG Electronics Inc. Transparent display device and method for providing information using the same
EP2624111A4 (en) * 2010-09-29 2014-10-08 Nec Casio Mobile Comm Ltd INFORMATION PROCESSING DEVICE, CONTROL METHOD FOR THE DEVICE, AND SOFTWARE
EP2625577B1 (en) 2010-10-08 2019-06-26 Terumo BCT, Inc. Customizable methods and systems of growing and harvesting cells in a hollow fiber bioreactor system
KR101915615B1 (ko) 2010-10-14 2019-01-07 삼성전자주식회사 모션 기반 사용자 인터페이스 제어 장치 및 방법
US20120102400A1 (en) * 2010-10-22 2012-04-26 Microsoft Corporation Touch Gesture Notification Dismissal Techniques
KR20120064756A (ko) * 2010-12-10 2012-06-20 삼성전자주식회사 터치스크린을 구비한 휴대 단말기의 화면 표시 방법 및 장치
US20120159395A1 (en) 2010-12-20 2012-06-21 Microsoft Corporation Application-launching interface for multiple modes
US8612874B2 (en) 2010-12-23 2013-12-17 Microsoft Corporation Presenting an application change through a tile
US8689123B2 (en) 2010-12-23 2014-04-01 Microsoft Corporation Application reporting in an application-selectable user interface
KR102033599B1 (ko) 2010-12-28 2019-10-17 삼성전자주식회사 페이지간 오브젝트 이동 방법 및 인터페이스 장치
KR101977613B1 (ko) 2011-01-05 2019-05-14 삼성전자주식회사 입력 장치의 입력 오류를 정정하기 위한 방법 및 장치
CN102591549B (zh) * 2011-01-06 2016-03-09 海尔集团公司 触控删除处理系统及方法
JP5338821B2 (ja) * 2011-01-25 2013-11-13 コニカミノルタ株式会社 画像形成装置、端末装置、画像形成システム、および制御プログラム
KR101802522B1 (ko) * 2011-02-10 2017-11-29 삼성전자주식회사 복수의 터치스크린을 가지는 장치 및 복수의 터치스크린을 가지는 장치의 화면변경방법
JP5353922B2 (ja) * 2011-02-10 2013-11-27 コニカミノルタ株式会社 画像形成装置、端末装置、画像形成システム、および制御プログラム
EP2490113B1 (en) * 2011-02-15 2016-11-23 Lg Electronics Inc. Display device and method of controlling operation thereof
JP6016275B2 (ja) * 2011-02-21 2016-10-26 日本電気株式会社 表示装置、表示制御方法およびプログラム
KR101864333B1 (ko) 2011-03-21 2018-07-05 삼성전자 주식회사 아이콘 변경 기능 지원 방법 및 이를 지원하는 휴대 단말기
TWI515603B (zh) * 2011-03-28 2016-01-01 緯創資通股份有限公司 觸控反饋裝置、觸控反饋方法及觸控顯示裝置
US9239672B2 (en) * 2011-04-20 2016-01-19 Mellmo Inc. User interface for data comparison
US9329773B2 (en) * 2011-05-19 2016-05-03 International Business Machines Corporation Scalable gesture-based device control
WO2012159430A1 (zh) * 2011-05-23 2012-11-29 中兴通讯股份有限公司 一种背景视效处理的方法和装置
US9104440B2 (en) 2011-05-27 2015-08-11 Microsoft Technology Licensing, Llc Multi-application environment
US8893033B2 (en) 2011-05-27 2014-11-18 Microsoft Corporation Application notifications
US9658766B2 (en) 2011-05-27 2017-05-23 Microsoft Technology Licensing, Llc Edge gesture
US9158445B2 (en) 2011-05-27 2015-10-13 Microsoft Technology Licensing, Llc Managing an immersive interface in a multi-application immersive environment
US9104307B2 (en) 2011-05-27 2015-08-11 Microsoft Technology Licensing, Llc Multi-application environment
EP2530571A1 (en) * 2011-05-31 2012-12-05 Sony Ericsson Mobile Communications AB User equipment and method therein for moving an item on an interactive display
US9547369B1 (en) * 2011-06-19 2017-01-17 Mr. Buzz, Inc. Dynamic sorting and inference using gesture based machine learning
JP5868044B2 (ja) * 2011-07-11 2016-02-24 キヤノン株式会社 情報処理装置及びその制御方法、プログラム、コンピュータが読み取り可能なプログラム記憶媒体
JP5849490B2 (ja) * 2011-07-21 2016-01-27 ブラザー工業株式会社 データ入力装置、データ入力装置の制御方法およびプログラム
JP5573793B2 (ja) * 2011-07-26 2014-08-20 コニカミノルタ株式会社 画像処理装置、制御方法、および制御プログラム
US8782525B2 (en) 2011-07-28 2014-07-15 National Insturments Corporation Displaying physical signal routing in a diagram of a system
US9047007B2 (en) 2011-07-28 2015-06-02 National Instruments Corporation Semantic zoom within a diagram of a system
US8713482B2 (en) 2011-07-28 2014-04-29 National Instruments Corporation Gestures for presentation of different views of a system diagram
US9256361B2 (en) * 2011-08-03 2016-02-09 Ebay Inc. Control of search results with multipoint pinch gestures
US8971572B1 (en) 2011-08-12 2015-03-03 The Research Foundation For The State University Of New York Hand pointing estimation for human computer interaction
KR101351162B1 (ko) * 2011-08-30 2014-01-14 주식회사 팬택 플리킹을 이용한 리스트 선택 지원 단말 장치 및 방법
KR101962445B1 (ko) * 2011-08-30 2019-03-26 삼성전자 주식회사 터치 스크린을 갖는 휴대 단말기 및 그의 사용자 인터페이스 제공 방법
JP4943553B1 (ja) 2011-08-31 2012-05-30 楽天株式会社 情報処理装置、情報処理装置の制御方法、プログラム、及び情報記憶媒体
US20130057587A1 (en) 2011-09-01 2013-03-07 Microsoft Corporation Arranging tiles
KR101864618B1 (ko) * 2011-09-06 2018-06-07 엘지전자 주식회사 이동 단말기 및 그것의 사용자 인터페이스 제공 방법
US9146670B2 (en) 2011-09-10 2015-09-29 Microsoft Technology Licensing, Llc Progressively indicating new content in an application-selectable user interface
US20130067392A1 (en) * 2011-09-12 2013-03-14 Microsoft Corporation Multi-Input Rearrange
CN103092487A (zh) * 2011-10-27 2013-05-08 腾讯科技（深圳）有限公司 上传和下载文件的方法及装置
TW201319921A (zh) * 2011-11-07 2013-05-16 Benq Corp 觸控螢幕畫面控制方法及觸控螢幕畫面顯示方法
US9823837B2 (en) * 2011-11-29 2017-11-21 Panasonic Intellectual Property Management Co., Ltd. Display control device, display control method, and display control program
US9395868B2 (en) * 2011-12-06 2016-07-19 Google Inc. Graphical user interface window spacing mechanisms
KR101978760B1 (ko) * 2011-12-13 2019-05-16 삼성전자 주식회사 3차원 이미지의 표시 기능을 구비한 단말기에서 사용자 인터페이스 방법 및 장치
US9400600B2 (en) * 2011-12-16 2016-07-26 Samsung Electronics Co., Ltd. Method, apparatus, and graphical user interface for providing visual effects on a touchscreen display
KR101710418B1 (ko) * 2011-12-19 2017-02-28 삼성전자주식회사 휴대 단말기의 멀티 터치 인터렉션 제공 방법 및 장치
KR102013239B1 (ko) * 2011-12-23 2019-08-23 삼성전자주식회사 디지털 영상 처리장치, 및 그 제어방법
US10191641B2 (en) 2011-12-29 2019-01-29 Apple Inc. Device, method, and graphical user interface for navigation of information in a map-based interface
KR20130080179A (ko) * 2012-01-04 2013-07-12 삼성전자주식회사 휴대용 단말기에서 아이콘 관리 방법 및 장치
WO2013115775A1 (en) 2012-01-30 2013-08-08 Intel Corporation One-click tagging user interface
KR20130095970A (ko) * 2012-02-21 2013-08-29 삼성전자주식회사 터치 스크린을 구비하는 기기에서 객체를 제어하기 위한 장치 및 방법
JP5663519B2 (ja) * 2012-04-10 2015-02-04 京セラドキュメントソリューションズ株式会社 表示入力装置および画像形成装置
US8671361B2 (en) * 2012-05-24 2014-03-11 Blackberry Limited Presentation of image on display screen with combination crop and rotation and with auto-resizing of crop field
US9225810B2 (en) * 2012-07-03 2015-12-29 Sony Corporation Terminal device, information processing method, program, and storage medium
US10158898B2 (en) 2012-07-26 2018-12-18 Comcast Cable Communications, Llc Customized options for consumption of content
KR101952177B1 (ko) * 2012-07-30 2019-02-26 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
KR20140026843A (ko) * 2012-08-23 2014-03-06 삼성전자주식회사 통신 링크 형성 방법 및 이를 위한 디스플레이 장치
RU2644145C2 (ru) * 2012-08-23 2018-02-07 Самсунг Электроникс Ко., Лтд. Способ и система передачи информации, соответствующее устройство и компьютерно-читаемый носитель записи
US9081542B2 (en) * 2012-08-28 2015-07-14 Google Technology Holdings LLC Systems and methods for a wearable touch-sensitive device
TWI456458B (zh) * 2012-09-03 2014-10-11 Acer Inc 電子裝置以及相關之控制方法
KR102096581B1 (ko) * 2012-09-14 2020-05-29 삼성전자주식회사 표시 정보를 편집하기 위한 방법 및 그 전자 장치
EP2722746A1 (en) * 2012-10-17 2014-04-23 BlackBerry Limited Electronic device including touch-sensitive display and method of controlling same
US9098127B2 (en) 2012-10-17 2015-08-04 Blackberry Limited Electronic device including touch-sensitive display and method of controlling same
CN102929550B (zh) * 2012-10-24 2016-05-11 惠州Tcl移动通信有限公司 一种基于移动终端的拍照删除方法及移动终端
JP5735472B2 (ja) * 2012-10-26 2015-06-17 株式会社 ディー・エヌ・エー ゲーム提供装置
US9582122B2 (en) 2012-11-12 2017-02-28 Microsoft Technology Licensing, Llc Touch-sensitive bezel techniques
KR101990039B1 (ko) * 2012-11-30 2019-06-18 엘지전자 주식회사 이동 단말기 및 이의 제어방법
KR20140070040A (ko) * 2012-11-30 2014-06-10 삼성전자주식회사 터치스크린 상에 표시되는 복수의 객체들을 관리하는 장치 및 방법
KR102057284B1 (ko) * 2013-01-23 2020-01-22 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법
KR20140097820A (ko) * 2013-01-30 2014-08-07 삼성전자주식회사 전자장치에서 웹페이지 내의 특정 객체의 속성을 조절하기 위한 방법 및 장치
US20140215409A1 (en) * 2013-01-31 2014-07-31 Wal-Mart Stores, Inc. Animated delete apparatus and method
CN103135930B (zh) * 2013-02-05 2017-04-05 深圳市金立通信设备有限公司 一种触摸屏控制方法及设备
JP6117562B2 (ja) * 2013-02-13 2017-04-19 ソニー株式会社 情報処理装置、情報処理方法および情報処理システム
KR102144587B1 (ko) * 2013-02-21 2020-08-13 삼성전자주식회사 전자 장치에서 표시 정보를 편집하기 위한 장치 및 방법
KR102104910B1 (ko) * 2013-02-28 2020-04-27 삼성전자주식회사 입력 유닛에 촉각 피드백을 제공하는 휴대 장치 및 그 방법
CN103150113B (zh) * 2013-02-28 2016-09-14 小米科技有限责任公司 一种用于触摸屏的显示内容选择方法和装置
KR20140111497A (ko) * 2013-03-11 2014-09-19 삼성전자주식회사 터치 스크린의 화면에 표시된 아이템을 삭제하는 방법, 저장 매체 및 휴대 단말
KR102091028B1 (ko) 2013-03-14 2020-04-14 삼성전자 주식회사 사용자 기기의 오브젝트 운용 방법 및 장치
KR101501028B1 (ko) * 2013-04-04 2015-03-12 박정환 개체가 삽입된 이미지를 생성하고 편집하는 방법 및 그 장치
US10824313B2 (en) * 2013-04-04 2020-11-03 P.J. Factory Co., Ltd. Method and device for creating and editing object-inserted images
EP2793115A1 (en) * 2013-04-18 2014-10-22 Océ-Technologies B.V. Method of animating changes in a list
KR20140144056A (ko) 2013-06-10 2014-12-18 삼성전자주식회사 객체 편집 방법 및 그 전자 장치
JP2015007949A (ja) * 2013-06-26 2015-01-15 ソニー株式会社 表示装置、表示制御方法及びコンピュータプログラム
US20160180813A1 (en) * 2013-07-25 2016-06-23 Wei Zhou Method and device for displaying objects
US10320730B2 (en) 2013-09-10 2019-06-11 Xiaomi Inc. Method and device for displaying message
KR101531169B1 (ko) * 2013-09-23 2015-06-24 삼성전자주식회사 사용자 단말에서 3차원 객체를 그리는 방법 및 이를 수행하는 사용자 단말
CN104516666B (zh) * 2013-09-30 2020-02-07 腾讯科技（深圳）有限公司 一种智能终端中的通知删除方法、装置及智能终端
WO2015106399A1 (zh) * 2014-01-15 2015-07-23 宇龙计算机通信科技(深圳)有限公司 终端操作装置和终端操作方法
CN106068672A (zh) * 2014-01-24 2016-11-02 宇龙计算机通信科技(深圳)有限公司 批量操作方法和批量操作装置
USD757768S1 (en) * 2014-02-21 2016-05-31 Titus Inc. Display screen with graphical user interface
US9477337B2 (en) 2014-03-14 2016-10-25 Microsoft Technology Licensing, Llc Conductive trace routing for display and bezel sensors
US10795567B2 (en) * 2014-08-22 2020-10-06 Zoho Corporation Private Limited Multimedia applications and user interfaces
US10656788B1 (en) * 2014-08-29 2020-05-19 Open Invention Network Llc Dynamic document updating application interface and corresponding control functions
KR20160033951A (ko) * 2014-09-19 2016-03-29 삼성전자주식회사 디스플레이 장치 및 이의 제어 방법
CN106715676A (zh) 2014-09-26 2017-05-24 泰尔茂比司特公司 按计划供养
USD781904S1 (en) * 2015-04-12 2017-03-21 Adp, Llc Display screen with animated graphical user interface
USD781915S1 (en) * 2015-04-12 2017-03-21 Adp, Llc Display screen with animated graphical user interface
USD765118S1 (en) * 2015-04-13 2016-08-30 Apple Inc. Display screen or portion thereof with graphical user interface
US9652125B2 (en) 2015-06-18 2017-05-16 Apple Inc. Device, method, and graphical user interface for navigating media content
US10303345B2 (en) * 2015-08-28 2019-05-28 Google Llc Transferring notifications between devices
US9928029B2 (en) 2015-09-08 2018-03-27 Apple Inc. Device, method, and graphical user interface for providing audiovisual feedback
US9990113B2 (en) 2015-09-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for moving a current focus using a touch-sensitive remote control
JP5977415B2 (ja) * 2015-09-24 2016-08-24 京セラ株式会社 電子機器、制御方法および制御プログラム
CN113138701A (zh) * 2015-11-05 2021-07-20 小米科技有限责任公司 图标位置互换方法及装置
JP6172251B2 (ja) * 2015-12-04 2017-08-02 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
CN105357451B (zh) * 2015-12-04 2019-11-29 Tcl集团股份有限公司 基于滤镜特效的图像处理方法及装置
USD797133S1 (en) * 2016-01-07 2017-09-12 Invisalert Solutions, LLC Display screen with graphical user interface
US10345997B2 (en) 2016-05-19 2019-07-09 Microsoft Technology Licensing, Llc Gesture-controlled piling of displayed data
JP7034949B2 (ja) 2016-05-25 2022-03-14 テルモ ビーシーティー、インコーポレーテッド 細胞の増殖
CN109195676B (zh) * 2016-06-29 2022-06-14 郑相文 在移动设备实时模拟游戏中的触摸操作方式
AU2017326335B2 (en) 2016-09-14 2022-03-10 Invisalert Solutions, LLC Tamper resistant clasp and wristband apparatus and associated patient monitoring system and method of use
CN106896998B (zh) * 2016-09-21 2020-06-02 阿里巴巴集团控股有限公司 一种操作对象的处理方法及装置
CN106790980A (zh) * 2016-11-15 2017-05-31 深圳市金立通信设备有限公司 一种信息处理方法及终端
US11624046B2 (en) 2017-03-31 2023-04-11 Terumo Bct, Inc. Cell expansion
WO2018184028A2 (en) 2017-03-31 2018-10-04 Terumo Bct, Inc. Cell expansion
US20190324621A1 (en) * 2018-04-23 2019-10-24 Qualcomm Incorporated System and Methods for Utilizing Multi-Finger Touch Capability to Efficiently Perform Content Editing on a Computing Device
US11922006B2 (en) 2018-06-03 2024-03-05 Apple Inc. Media control for screensavers on an electronic device
USD875743S1 (en) 2018-06-04 2020-02-18 Apple Inc. Display screen or portion thereof with graphical user interface
USD906359S1 (en) 2018-07-05 2020-12-29 Invisalert Solutions, Inc. Display screen with graphical user interface
US10901529B2 (en) * 2018-07-19 2021-01-26 Stmicroelectronics S.R.L. Double-tap event detection device, system and method
USD902947S1 (en) 2019-03-25 2020-11-24 Apple Inc. Electronic device with graphical user interface
USD926781S1 (en) 2019-05-28 2021-08-03 Apple Inc. Display screen or portion thereof with graphical user interface
CN110417640A (zh) * 2019-07-22 2019-11-05 北京达佳互联信息技术有限公司 消息发送和接收方法、装置、电子设备及存储介质
WO2021050988A1 (en) 2019-09-11 2021-03-18 Invisalert Solutions, Inc. Wireless patient monitoring compliance system
CN112486360B (zh) * 2020-12-17 2022-11-04 电子科技大学 热释电传感结构、手势识别装置、显示装置及传感方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0612211A (ja) * 1990-10-31 1994-01-21 Hewlett Packard Co <Hp> マン−マシン・インタフェース表示方法
JPH0757103A (ja) * 1993-08-23 1995-03-03 Toshiba Corp 情報処理装置
JPH1153236A (ja) * 1997-07-30 1999-02-26 Sony Corp データ送信／受信／送受信装置、データ伝送システム、データ送信／受信／送受信／伝送方法、及び、データ送信／受信／送受信プログラム格納媒体
JP2001228971A (ja) * 2000-02-15 2001-08-24 Newcom:Kk 複数の指示部位で操作可能なタッチパネルシステム
JP2001356878A (ja) * 2000-06-14 2001-12-26 Hitachi Ltd アイコン制御方法
JP2004030284A (ja) * 2002-06-26 2004-01-29 Takenaka Komuten Co Ltd シームレスポインティングシステム

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2597802B2 (ja) * 1992-08-04 1997-04-09 インターナショナル・ビジネス・マシーンズ・コーポレイション イメージ・キャプチャ装置を制御するための方法、イメージ・キャプチャ装置及びユーザ・インターフェース
JPH06282375A (ja) 1993-03-29 1994-10-07 Casio Comput Co Ltd 情報処理装置及び電子ペン
US6262732B1 (en) * 1993-10-25 2001-07-17 Scansoft, Inc. Method and apparatus for managing and navigating within stacks of document pages
US5943050A (en) * 1994-04-07 1999-08-24 International Business Machines Corporation Digital image capture control
US9292111B2 (en) * 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
US6331840B1 (en) * 1998-03-27 2001-12-18 Kevin W. Nielson Object-drag continuity between discontinuous touch screens of a single virtual desktop
US6545669B1 (en) * 1999-03-26 2003-04-08 Husam Kinawi Object-drag continuity between discontinuous touch-screens
US7158479B1 (en) * 1999-09-30 2007-01-02 Data Expedition, Inc. Method and apparatus for non contiguous sliding window
US7030861B1 (en) * 2001-02-10 2006-04-18 Wayne Carl Westerman System and method for packing multi-touch gestures onto a hand
EP1599834A1 (en) * 2003-02-28 2005-11-30 Cedara Software Corp. Image region segmentation system and method
CN1582030A (zh) * 2003-08-04 2005-02-16 英华达（南京）科技有限公司 具有编辑图片功能的移动通讯装置和处理方法以及储存媒体
US20060001656A1 (en) * 2004-07-02 2006-01-05 Laviola Joseph J Jr Electronic ink system
US7653883B2 (en) * 2004-07-30 2010-01-26 Apple Inc. Proximity detector in handheld device
CN2816919Y (zh) * 2005-08-23 2006-09-13 康佳集团股份有限公司 一种智能终端的笔式控制系统
CN102841713A (zh) * 2005-09-15 2012-12-26 苹果公司 处理跟踪板装置的原始数据的系统和方法
US7612786B2 (en) * 2006-02-10 2009-11-03 Microsoft Corporation Variable orientation input mode
KR100790896B1 (ko) * 2006-11-17 2008-01-03 삼성전자주식회사 촬상부의 움직임을 이용한 어플리케이션의 제어 방법 및장치
US8074172B2 (en) 2007-01-05 2011-12-06 Apple Inc. Method, system, and graphical user interface for providing word recommendations
US7924271B2 (en) * 2007-01-05 2011-04-12 Apple Inc. Detecting gestures on multi-event sensitive devices
US7956847B2 (en) * 2007-01-05 2011-06-07 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
US8745513B2 (en) * 2007-11-29 2014-06-03 Sony Corporation Method and apparatus for use in accessing content
US8209628B1 (en) * 2008-04-11 2012-06-26 Perceptive Pixel, Inc. Pressure-sensitive manipulation of displayed objects
US20090282332A1 (en) * 2008-05-12 2009-11-12 Nokia Corporation Apparatus, method and computer program product for selecting multiple items using multi-touch

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0612211A (ja) * 1990-10-31 1994-01-21 Hewlett Packard Co <Hp> マン−マシン・インタフェース表示方法
JPH0757103A (ja) * 1993-08-23 1995-03-03 Toshiba Corp 情報処理装置
JPH1153236A (ja) * 1997-07-30 1999-02-26 Sony Corp データ送信／受信／送受信装置、データ伝送システム、データ送信／受信／送受信／伝送方法、及び、データ送信／受信／送受信プログラム格納媒体
JP2001228971A (ja) * 2000-02-15 2001-08-24 Newcom:Kk 複数の指示部位で操作可能なタッチパネルシステム
JP2001356878A (ja) * 2000-06-14 2001-12-26 Hitachi Ltd アイコン制御方法
JP2004030284A (ja) * 2002-06-26 2004-01-29 Takenaka Komuten Co Ltd シームレスポインティングシステム

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012079156A (ja) * 2010-10-04 2012-04-19 Sony Corp 情報処理装置、情報処理方法、及びプログラム
JP2012174252A (ja) * 2011-02-24 2012-09-10 Kyocera Corp 電子機器、接触操作制御プログラムおよび接触操作制御方法
JP2012174246A (ja) * 2011-02-24 2012-09-10 Kyocera Corp 携帯電子機器、接触操作制御方法および接触操作制御プログラム
US10768806B2 (en) 2011-08-01 2020-09-08 Sony Corporation Information processing device, information processing method, and program for displaying list items and changing hierarchical level of display
JP2013033329A (ja) * 2011-08-01 2013-02-14 Sony Corp 情報処理装置、情報処理方法およびプログラム
US10025493B2 (en) 2011-08-01 2018-07-17 Sony Corporation Information processing device, information processing method, and program for displaying list items and changing hierarchical level of display
JP2013065288A (ja) * 2011-08-29 2013-04-11 Kyocera Corp 装置、方法、及びプログラム
JP2013218521A (ja) * 2012-04-09 2013-10-24 Kyocera Document Solutions Inc 表示入力装置及びこれを備えた画像形成装置
US8964252B2 (en) 2012-04-09 2015-02-24 Kyocera Document Solutions Inc. Display input device and image forming apparatus having touch panel
JP2013222247A (ja) * 2012-04-13 2013-10-28 Kyocera Document Solutions Inc 表示入力装置および画像形成装置
US9317148B2 (en) 2012-04-13 2016-04-19 Kyocera Document Solutions Inc. Display input device, and image forming apparatus including touch panel portion
JP2013228900A (ja) * 2012-04-26 2013-11-07 Kyocera Document Solutions Inc 表示入力装置および画像形成装置
JP2013250784A (ja) * 2012-05-31 2013-12-12 Kyocera Document Solutions Inc 表示装置、画像形成装置、表示制御方法及びプログラム
JP2014222433A (ja) * 2013-05-14 2014-11-27 コニカミノルタ株式会社 情報処理装置、情報処理システム、表示方法、および制御プログラム
US10474346B2 (en) 2013-06-28 2019-11-12 Orange Method of selection of a portion of a graphical user interface
JP2016528600A (ja) * 2013-06-28 2016-09-15 オランジュ グラフィカルユーザインターフェースの一部分の選択方法
JP2014241143A (ja) * 2014-07-17 2014-12-25 京セラドキュメントソリューションズ株式会社 表示入力装置及びこれを備えた画像形成装置
JP2016062155A (ja) * 2014-09-16 2016-04-25 京セラドキュメントソリューションズ株式会社 電子機器、及び、タッチパネルの操作方法
WO2016042834A1 (ja) * 2014-09-16 2016-03-24 日本電気株式会社 分割画面内のコンテンツの拡大方法、情報処理装置およびその制御方法と制御プログラム
JP2017033116A (ja) * 2015-07-30 2017-02-09 レノボ・シンガポール・プライベート・リミテッド 複数の使用モードを備える電子機器、制御方法およびコンピュータ・プログラム
WO2020059528A1 (ja) * 2018-09-19 2020-03-26 富士フイルム株式会社 タッチパネルディスプレイ付きデバイス及びその制御方法、並びにプログラム
JPWO2020059528A1 (ja) * 2018-09-19 2021-08-30 富士フイルム株式会社 タッチパネルディスプレイ付きデバイス及びその制御方法、並びにプログラム
US11416133B2 (en) 2018-09-19 2022-08-16 Fujifilm Corporation Device with touch panel display, control method of device with touch panel display, and program
JP7349441B2 (ja) 2018-09-19 2023-09-22 富士フイルム株式会社 タッチパネルディスプレイ付きデバイス及びその制御方法、並びにプログラム

Also Published As

Publication number Publication date
KR101503835B1 (ko) 2015-03-18
JP5731979B2 (ja) 2015-06-10
WO2010044576A2 (en) 2010-04-22
CN102187303A (zh) 2011-09-14
KR20100041107A (ko) 2010-04-22
EP2338101A4 (en) 2013-07-31
WO2010044576A3 (en) 2010-07-29
EP2338101B1 (en) 2019-12-04
CN102187303B (zh) 2014-11-19
US20100090971A1 (en) 2010-04-15
EP2338101A2 (en) 2011-06-29

Similar Documents

Publication Publication Date Title
JP5731979B2 (ja) タッチスクリーンを利用したオブジェクト管理方法及び装置
JP7186231B2 (ja) アイコン管理方法及び装置
US11144177B2 (en) Application execution method by display device and display device thereof
US11054988B2 (en) Graphical user interface display method and electronic device
US20190258379A1 (en) Method of adjusting an ui and user terminal using the same
JP6328947B2 (ja) マルチタスキング運用のための画面表示方法及びこれをサポートする端末機
EP3917091B1 (en) Message sending method and mobile terminal
US9635267B2 (en) Method and mobile terminal for implementing preview control
EP2626779B1 (en) Tablet having user interface
US9898111B2 (en) Touch sensitive device and method of touch-based manipulation for contents
CN108536365A (zh) 一种图像分享方法及终端
CN103795948B (zh) 显示设备及其控制方法
KR102027879B1 (ko) 미디어 기기의 메뉴 제어 방법 및 장치와 그 방법에 대한 프로그램 소스를 저장한 기록 매체
CN110069179A (zh) 图标控制方法及终端设备
CN111142769A (zh) 分屏显示方法及电子设备
CN107992263A (zh) 一种信息分享方法及移动终端
CN110008011A (zh) 一种任务切换方法及终端设备
CN110456949A (zh) 用于在用户界面之间进行导航和显示任务栏的设备、方法和图形用户界面
CN109358784A (zh) 一种整理图标的方法、终端设备及存储介质
CN108920069A (zh) 一种触控操作方法、装置、移动终端和存储介质
CN107908330A (zh) 应用图标的管理方法和移动终端
WO2021169885A1 (zh) 显示方法及电子设备
CN108469940A (zh) 一种截图方法及终端
CN105867726B (zh) 显示设备和方法
CN109725789A (zh) 一种应用图标归档方法及终端设备

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120914

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131203

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140303

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20140513

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140916

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20140924

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20141125

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150218

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150317

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150410

R150 Certificate of patent or registration of utility model

Ref document number: 5731979

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250