JP2013218689A - ディスプレイ上のオブジェクトを実行する方法及びそのデバイス - Google Patents

ディスプレイ上のオブジェクトを実行する方法及びそのデバイス Download PDF

Info

Publication number
JP2013218689A
JP2013218689A JP2013079341A JP2013079341A JP2013218689A JP 2013218689 A JP2013218689 A JP 2013218689A JP 2013079341 A JP2013079341 A JP 2013079341A JP 2013079341 A JP2013079341 A JP 2013079341A JP 2013218689 A JP2013218689 A JP 2013218689A
Authority
JP
Japan
Prior art keywords
enlarged
application
displayed
displaying
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013079341A
Other languages
English (en)
Other versions
JP6286134B2 (ja
Inventor
Se-Hee Han
世熙 韓
Jun-Hyeong Kim
俊亨 金
Jong-Hyun Ryu
種鉉 柳
Jong-Hyo Lee
鍾孝 李
Shuretsu Ri
周烈 李
Ji-Hye Lee
知惠 李
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020130031704A external-priority patent/KR102072732B1/ko
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of JP2013218689A publication Critical patent/JP2013218689A/ja
Application granted granted Critical
Publication of JP6286134B2 publication Critical patent/JP6286134B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486Drag-and-drop
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B1/00Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40Circuits
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04806Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Abstract

【課題】ディスプレイ上のオブジェクトを実行する方法及びそのデバイスを提供する。
【解決手段】ディスプレイ上のオブジェクトを実行する方法及びそのデバイスに係り、該オブジェクト実行方法は、ディスプレイ上に表示されたオブジェクトに係わるユーザ入力を受信する段階と、オブジェクトを漸次拡大させて表示する段階と、オブジェクトが拡大されるにつれて、オブジェクトに対応するアプリケーションを実行する段階と、を含む。
【選択図】図1

Description

本発明は、ユーザ入力に基づいてディスプレイ上に表示されたオブジェクトを実行する方法及びそのデバイスに関する。
デバイスは、移動可能いかんによって、移動型デバイス(mobile/portable device)及び固定型デバイス(stationary device)に分けられる。また、移動型デバイスは、ユーザの直接携帯可能いかんによって、携帯(型)デバイス(handheld device)及び据え置き型デバイス(vehicle mount device)に分けられる。
このようなデバイスは、機能が多様化されるにつれて、例えば、写真や動画の撮影、音楽や動画ファイルの再生、ゲーム、放送の受信などの複合的な機能を備えたマルチメディア機器(multimedia player)形態で具現されている。このようなデバイスの機能を支援するために、デバイスの構造的な部分及びソフトウェア的な部分を改良することが考慮される。
最近、デバイスのシンプルなデザインを具現し、便利なユーザ・インターフェースを提供するために、タッチスクリーン、タッチパッドなどのタッチ入力に係わる技術がデバイスに適用されている。これによって、タッチ入力技術を利用して、さらに便利なユーザ・インターフェース環境を具現するための多様な試みがなされている。
本発明の一実施形態は、ディスプレイ上のオブジェクトに係わるユーザ入力に基づいて、オブジェクトと係わる複数の実行モードのうち一つによって、オブジェクトについての動作を実行させることができる、ディスプレイ上のオブジェクトを実行する方法及びそのデバイスを提供することができる。
また、本発明の一実施形態は、ディスプレイ上のオブジェクトを拡大させるユーザ入力に基づいて、オブジェクトに対応するアプリケーションを実行することができる、ディスプレイ上のオブジェクトを実行する方法及びそのデバイスを提供することができる。
また、本発明の一実施形態は、ディスプレイ上のオブジェクトと係わるお知らせメッセージを効果的に表示することができる方法及びそのデバイスを提供することができる。
前述の技術的課題を達成するための技術的手段として、本発明の第1側面は、ディスプレイ上に表示されたオブジェクトに係わるユーザ入力を受信する段階と、前記ユーザ入力に基づいて、前記オブジェクトに係わる複数の実行モードのうち一つを決定する段階と、前記決定された実行モードに基づいて、前記オブジェクトに対応するアプリケーションを実行する段階と、を含む、オブジェクト実行方法を提供することができる。
また、前記複数の実行モードは、前記ディスプレイ上に表示されたオブジェクトの大きさを漸次に拡大して表示し、前記オブジェクトに対応するアプリケーションを実行するモードを含んでもよい。
また、前記方法は、前記拡大されたオブジェクトの領域に、前記オブジェクトに対応するアプリケーションの実行結果を表示する段階をさらに含んでもよい。
また、前記方法は、前記拡大されたオブジェクトの大きさを確認する段階をさらに含み、前記アプリケーション実行結果を表示する段階は、前記確認された大きさが第1臨界値以上である場合、前記拡大されたオブジェクトの領域に、前記オブジェクトに対応するアプリケーションの実行結果を表示することができる。
また、前記アプリケーションの実行結果を表示する段階は、前記オブジェクトが拡大されるにつれて、前記アプリケーション実行結果を漸次拡大させて表示することができる。
また、前記アプリケーション実行結果を表示する段階は、前記アプリケーション実行画面の一部を表示し、前記オブジェクトの領域が拡大されるにつれて、前記アプリケーションの実行画面の残り部分を表示することができる。
また、前記アプリケーション実行結果を表示する段階は、前記確認された大きさが、前記第1臨界値以上であって第2臨界値以下である場合、前記アプリケーションの実行結果についての要約情報を表示することができる。
また、前記アプリケーション実行結果を表示する段階は、前記確認された大きさが、前記第2臨界値以上である場合、前記アプリケーションの実行結果についての詳細情報を表示することができる。
また、前記方法は、前記アプリケーションの実行結果が表示されることにより、既設定のパターンの振動を発生させる段階をさらに含んでもよい。
また、前記アプリケーションは、動画を再生するアプリケーションであり、前記アプリケーション実行結果を表示する段階は、前記確認された大きさが第1臨界値以上である場合、前記拡大されたオブジェクトの領域に、前記動画のプレビュー映像を表示することができる。
また、前記アプリケーション実行結果を表示する段階は、前記確認された大きさが、前記第1臨界値以上であって第2臨界値以下である場合、前記動画の再生映像を、前記拡大されたオブジェクトの領域に表示することができる。
また、前記アプリケーションは、カレンダー(calendar)アプリケーションであり、前記アプリケーション実行結果を表示する段階は、前記確認された大きさによって、日単位、週単位及び月単位のうち少なくとも1つのカレンダーイメージを、前記拡大されたオブジェクトの領域に変更して表示することができる。
また、前記アプリケーションは、音楽を再生するアプリケーションであり、前記方法は、前記確認された大きさが、前記第1臨界値以上である場合、前記音楽のプレリスニング・サウンドを出力する段階をさらに含んでもよい。
また、前記アプリケーション実行結果を表示する段階は、前記確認された大きさが、前記第1臨界値以上である場合、前記音楽についての要約情報を、前記拡大されたオブジェクトの領域に表示することができる。
また、前記方法は、前記確認された大きさが、前記第1臨界値以上であって第2臨界値以下である場合、前記音楽の全体サウンドを出力する段階をさらに含んでもよい。
また、前記アプリケーション実行結果を表示する段階は、前記確認された大きさが、前記第1臨界値以上であって第2臨界値以下である場合、前記音楽の再生を制御するための制御画面を、前記拡大されたオブジェクトの領域に表示することができる。
また、前記ユーザ入力は、前記オブジェクトをタッチしてドラッグする入力であってもよい。
また、前記方法は、前記ドラッグ以後に既設定の時間以内、前記タッチがドロップされることにより、前記拡大されたオブジェクトを、前記タッチ以前の大きさに縮小して表示する段階をさらに含んでもよい。
また、前記方法は、前記ドラッグ以後に、前記タッチが、前記オブジェクトが拡大される以前の方向にフリックされることにより、前記拡大されたオブジェクトを、前記タッチ以前の大きさに縮小して表示する段階をさらに含んでもよい。
また、前記方法は、前記ドラッグ以後、既設定の時間以上、前記タッチがホールドされることにより、前記拡大されたオブジェクトを固定させて表示する段階をさらに含んでもよい。
また、前記方法は、前記タッチによって、前記ディスプレイに加えられる圧力を感知する段階と、前記ドラッグ以後、前記タッチによって、既設定の強度以上の圧力が前記ディスプレイに加えられることにより、前記拡大されたオブジェクトを固定させて表示する段階をさらに含んでもよい。
また、本発明の第2側面は、ディスプレイ上に表示されたオブジェクトに係わるユーザ入力を受信する段階と、前記ユーザ入力が、前記オブジェクトを拡大させるための入力であるか否かを判断する段階と、前記判断に基づいて、前記オブジェクトを漸次拡大させて表示する段階と、前記オブジェクトが拡大されるにつれて、前記オブジェクトに対応するアプリケーションを実行する段階と、を含むアプリケーション実行方法を提供することができる。
また、前記方法は、前記拡大されたオブジェクトの領域に、前記オブジェクトに対応するアプリケーションの実行結果を表示する段階をさらに含んでもよい。
また、前記方法は、前記拡大されたオブジェクトの大きさを確認する段階をさらに含み、前記アプリケーション実行結果を表示する段階は、前記確認された大きさが第1臨界値以上である場合、前記拡大されたオブジェクトの領域に、前記オブジェクトに対応するアプリケーションの実行結果を表示することができる。
また、前記アプリケーションの実行結果を表示する段階は、前記オブジェクトが拡大されるにつれて、前記アプリケーション実行結果を漸次拡大させて表示することができる。
また、前記アプリケーション実行結果を表示する段階は、前記アプリケーション実行画面の一部を表示し、前記オブジェクトの領域が拡大されるにつれて、前記アプリケーションの実行画面の残り部分を表示することができる。
また、前記アプリケーション実行結果を表示する段階は、前記確認された大きさが、前記第1臨界値以上であって第2臨界値以下である場合、前記アプリケーションの実行結果についての要約情報を表示することができる。
また、前記アプリケーション実行結果を表示する段階は、前記確認された大きさが、前記第2臨界値以上である場合、前記アプリケーションの実行結果についての詳細情報を表示することができる。
また、前記方法は、前記アプリケーションの実行結果が表示されることにより、既設定のパターンの振動を発生させる段階をさらに含んでもよい。
また、前記アプリケーションは、動画を再生するアプリケーションであり、前記アプリケーション実行結果を表示する段階は、前記確認された大きさが第1臨界値以上である場合、前記拡大されたオブジェクトの領域に、前記動画のプレビュー映像を表示することができる。
また、前記アプリケーション実行結果を表示する段階は、前記確認された大きさが、前記第1臨界値以上であって第2臨界値以下である場合、前記動画の再生映像を、前記拡大されたオブジェクトの領域に表示することができる。
また、前記アプリケーションは、カレンダー・アプリケーションであり、前記アプリケーション実行結果を表示する段階は、前記確認された大きさによって、日単位、週単位及び月単位のうち少なくとも1つのカレンダーイメージを、前記拡大されたオブジェクトの領域に変更して表示することができる。
また、前記アプリケーションは、音楽を再生するアプリケーションであり、前記方法は、前記確認された大きさが、前記第1臨界値以上である場合、前記音楽のプレリスニング・サウンドを出力する段階をさらに含んでもよい。
また、前記アプリケーション実行結果を表示する段階は、前記確認された大きさが、前記第1臨界値以上である場合、前記音楽についての要約情報を、前記拡大されたオブジェクトの領域に表示することができる。
また、前記方法は、前記確認された大きさが、前記第1臨界値以上であって第2臨界値以下である場合、前記音楽の再生サウンドを出力する段階をさらに含んでもよい。
また、前記方法は、前記アプリケーション実行結果を表示する段階は、前記確認された大きさが、前記第1臨界値以上であって第2臨界値以下である場合、前記音楽の再生を制御するための制御画面を、前記拡大されたオブジェクトの領域に表示することができる。
また、前記ユーザ入力は、前記オブジェクトをタッチしてドラッグする入力であってもよい。
また、前記方法は、前記ドラッグ以後に既設定の時間以内、前記タッチがドロップされることにより、前記拡大されたオブジェクトを、前記タッチ以前の大きさに縮小して表示する段階をさらに含んでもよい。
また、前記方法は、前記ドラッグ以後に、前記タッチが、前記オブジェクトが拡大される以前の方向にフリックされることにより、前記拡大されたオブジェクトを、前記タッチ以前の大きさに縮小して表示する段階をさらに含んでもよい。
また、前記方法は、前記ドラッグ以後、既設定の時間以上、前記タッチがホールドされることにより、前記拡大されたオブジェクトを固定させて表示する段階をさらに含んでもよい。
また、前記方法は、前記タッチによって、前記ディスプレイに加えられる圧力を感知する段階と、前記ドラッグ以後、前記タッチによって、既設定の強度以上の圧力が前記ディスプレイに加えられることにより、前記拡大されたオブジェクトを固定させて表示する段階と、をさらに含んでもよい。
また、本発明の第3側面は、少なくとも1つのプログラムが保存されるメモリと、前記少なくとも1つのプログラムを実行することにより、ディスプレイ上のオブジェクトを実行するプロセッサと、を含み、前記少なくとも1つのプログラムは、ディスプレイ上に表示されたオブジェクトに係わるユーザ入力を受信する段階と、前記ユーザ入力に基づいて、前記オブジェクトに係わる複数の実行モードのうち一つを決定する段階と、前記決定された実行モードに基づいて、前記オブジェクトに対応するアプリケーションを実行する段階と、を実行する命令語を含むことを特徴とする携帯端末装置を提供することができる。
また、本発明の第4側面は、少なくとも1つのプログラムが保存されるメモリと、前記少なくとも1つのプログラムを実行することにより、ディスプレイ上のオブジェクトを実行するプロセッサと、を含み、前記少なくとも1つのプログラムは、ディスプレイ上に表示されたオブジェクトに係わるユーザ入力を受信する段階と、前記ユーザ入力が、前記オブジェクトを拡大させるための入力であるか否かを判断する段階と、前記判断に基づいて、前記オブジェクトを漸次拡大させて表示する段階と、前記オブジェクトが拡大されるにつれて、前記オブジェクトに対応するアプリケーションを実行する段階と、を実行する命令語を含むことを特徴とする携帯端末装置を提供することができる。
また、本発明の第5側面は、ディスプレイ上に表示されたオブジェクトに係わるユーザ入力を受信する段階と、前記ユーザ入力が受信されることにより、前記オブジェクトの周辺に、前記オブジェクトに係わるメッセージ表示窓を表示する段階と、前記メッセージ表示窓に、前記オブジェクトに係わるお知らせメッセージを表示する段階と、を含む、オブジェクトに係わるお知らせメッセージを表示する方法を提供することができる。
また、前記ユーザ入力を受信する段階は、前記オブジェクトをタッチし、既設定の方向にドラッグするユーザ入力を受信することができる。
また、前記ユーザ入力が受信されることにより、前記オブジェクトが表示された領域のうち一部分にのみ、前記オブジェクトのイメージの一部分が表示される。
また、前記メッセージ表示窓は、スピーチバブル状に表示され、前記メッセージ表示窓の一部分は、前記オブジェクトの一部分上にオーバーラップされる。
また、前記メッセージ表示窓は、前記オブジェクトの下部にスライディングされて表示される。
また、前記メッセージ表示窓は、前記オブジェクトの下部に断続的に拡張されて表示される。
また、前記お知らせメッセージは、前記オブジェクトに係わるプッシュ・メッセージであってもよい。
本発明の一実施形態によるオブジェクト実行方法によって、デバイスのディスプレイ上でオブジェクトが実行される一例を図示した図面である。 本発明の一実施形態によるオブジェクト実行方法のフローチャートである。 本発明の一実施形態による第2実行モードによるオブジェクトの実行結果を表示する方法のフローチャートである。 本発明の一実施形態による、オブジェクトが拡大されるにつれて、オブジェクトに対応するアプリケーションを実行し、アプリケーションの実行画面を表示する方法の詳細フローチャートである。 本発明の一実施形態による、オブジェクトが拡大されるにつれて、オブジェクトに対応するアプリケーションを実行し、アプリケーションの実行結果についての要約情報及び詳細情報を表示する方法の詳細フローチャートである。 本発明の一実施形態による、オブジェクトに対応する動画アプリケーションを実行し、実行結果を表示する方法の詳細フローチャートである。 本発明の一実施形態による、オブジェクトに対応するカレンダー・アプリケーションを実行し、実行結果を表示する方法の詳細フローチャートである。 本発明の一実施形態による、オブジェクトに対応する音楽再生アプリケーションを実行し、実行結果を出力する方法の詳細フローチャートである。 本発明の一実施形態による、オブジェクトが拡大されるにつれて、デバイスがサーバから、オブジェクトに係わる付加情報及びオブジェクトについてのコンテンツを受信して表示する方法を図示した図面である。 本発明の一実施形態による、オブジェクトに対応するアプリケーションを実行させるユーザ入力の一例を図示した図面である。 本発明の一実施形態による、拡大されたオブジェクトが縮小される一例を図示した図面である。 本発明の一実施形態による、オブジェクトが固定されて表示される一例を図示した図面である。 本発明の一実施形態による、オブジェクトが段階的に拡大されるにつれて、オブジェクトに対応するアプリケーションの実行結果が画面に表示される一例を図示した図面である。 本発明の他の実施形態による、オブジェクトが段階的に拡大されるにつれて、オブジェクトに対応するアプリケーションの実行画面の一部または全部が画面に表示される一例を図示した図面である。 本発明の一実施形態による、オブジェクトに対応するアプリケーションが、カレンダー・アプリケーションである場合、オブジェクトが拡大されるにつれて、カレンダーのイメージが段階的に変換されて表示される一例を図示した図面である。 本発明の一実施形態による、オブジェクトに対応するアプリケーションが動画アプリケーションである場合、オブジェクトが拡大されるにつれて、動画のプレビュー映像及び動画の再生映像が表示される一例を図示した図面である。 本発明の一実施形態による、オブジェクトに対応するアプリケーションが音楽再生アプリケーションである場合、オブジェクトが拡大されるにつれて、アプリケーションの実行結果が段階的に変換されて表示される一例を図示した図面である。 本発明の一実施形態による、オブジェクトに対応するアプリケーションがインターネット・ブラウザ実行アプリケーションである場合、オブジェクトが拡大されるにつれて、アプリケーションの実行結果が段階的に変換されて表示される一例を図示した図面である。 本発明の一実施形態による、オブジェクトが拡大されるにつれて、ディスプレイ上のオブジェクト中で、拡大されたオブジェクト以外の他のオブジェクトの位置及び配列が調節される一例を図示した図面である。 本発明の一実施形態による、オブジェクトが拡大されるにつれて、拡大されたオブジェクトの透明度が調節されて表示される一例を図示した図面である。 本発明の一実施形態による、拡大されたオブジェクトに含まれたオブジェクトが、ユーザ入力に基づいて、拡大されて表示される一例を図示した図面である。 本発明の一実施形態によるメッセージお知らせ窓が拡大されるにつれて、メッセージについての情報が表示される一例を図示した図面である。 本発明の一実施形態による、デバイスの画面上に表示された複数のウィジェット窓のうち一部が拡大されて表示される一例を図示した図面である。 本発明の一実施形態による、デバイスの画面上で、複数の拡大されたオブジェクトの領域が固定された一例を図示した図面である。 本発明の一実施形態による、音楽ファイルアイコンに拡大されるにつれて、デバイスが音楽ファイルをサーバから受信し、拡大された音楽ファイルアイコンの領域に、音楽ファイルについての情報が表示される一例を図示した図面である。 本発明の一実施形態による、デバイスが動画ファイルを再生することができない場合、拡大された動画ファイルのアイコンの領域に、動画ファイルについての情報が表示される一例を図示した図面である。 本発明の一実施形態による、オブジェクトに係わるユーザ入力が受信されることにより、スピーチバブル状のメッセージ表示窓を介して、オブジェクトに係わるお知らせメッセージが表示される一例を図示した図面である。 本発明の一実施形態による、オブジェクトに係わるユーザ入力に基づいて、オブジェクトの下部に表示されるメッセージ表示窓を介して、オブジェクトに係わるお知らせメッセージが表示される一例を図示した図面である。 本発明の一実施形態による、ディスプレイ上のオブジェクトを実行するデバイスの構造を示した図面である。
以下、添付した図面を参照しつつ、本発明が属する技術分野で当業者が容易に実施することができるように、本発明の実施形態について詳細に説明する。しかし、本発明は、さまざまな異なる形態に具現され、ここで説明する実施形態に限定されるものではない。そして、図面で、本発明について明確に説明するために、説明と関連性のない部分は、省略し、明細書全体を通じて、類似した部分については、類似した図面符号を付した。
明細書全体で、ある部分が、他の部分と「連結」されているとするとき、それは、「直接的に連結」されている場合だけではなく、その中間に、他の素子を間に置いて「電気的に連結」されている場合も含む。また、ある部分がある構成要素を「含む」とするとき、それは、特別に制限する記載がない限り、他の構成要素を除外するものではなく、他の構成要素をさらに含んでもよいということを意味する。
また、本明細書で、デバイスは、スマトーホン、携帯電話、PDA(personal digital assistant)、ラップトップ、メディアプレイヤ、GPS(global positioning system)装置、及びその他のモバイルまたは非モバイルのコンピュータ装置でもあるが、それらに制限されるものではない。また、デバイスは、電子黒板、タッチテーブルのように、タッチ入力を受信することができる多様な装置を含んでもよい。
また、本明細書で、オブジェクトは、ユーザ入力によって選択される対象を意味する。オブジェクトは、イメージ、テキスト及び動画を含み、例えば、アイコン、インデックス項目、リンク情報、コンテンツの再生画面などを含む。
また、本明細書で、タップ(tap)は、ユーザが、指やタッチツール(stylus)を利用して、画面を非常に早くタッチする動作を示す。すなわち、指やタッチツールが画面に触れる時点であるタッチイン時点と、指やタッチツールが画面から離れる時点であるタッチアウト時点との時間差が臨界時間以下と非常に短い場合を意味する。
また、タッチ&ホールド(touch & hold)は、ユーザが指やタッチツール(stylus)を利用して画面をタッチした後、臨界時間以上タッチ入力を維持する動作を示す。すなわち、タッチイン時点とタッチアウト時点との時間差が臨界時間以上である場合を意味する。タッチ入力がタップであるか、あるいはタッチ&ホールドであるかをユーザに認識させるために、タッチ入力が臨界時間以上維持されれば、視覚的または聴覚的にフィードバック信号が提供されもする。
また、ダブルタップ(double tap)は、ユーザが指やタッチツール(stylus)を利用して、画面を早く2回タッチする動作を意味する。
また、ドラッグは、ユーザが指やタッチツールを画面にタッチした後、タッチを維持した状態で指やタッチツールを画面内の他の位置に移動させる動作を示す。
フリック(flick)は、ユーザが指やタッチツールを利用して、非常に早くドラッグする動作を示す。指やタッチツールの移動速度が臨界速度以上であるか否かということに基づいて、ドラッグとフリックとが区別される。
ピンチ(pinch)は、ユーザが複数本の指やタッチツールを画面にタッチした後、指またはタッチツールの間の間隔を広げたり狭める動作を示す。ユーザが2本以上の指を画面に接触させた後、それらの間の間隔を広げる動作をアンピンチング(unpinching)といい、それらの間の間隔を狭める動作をピンチング(pinching)という。ピンチを活用した一例として、アンピンチング入力によって、ページがズームイン(zoom in)され、ピンチング入力によって、ページがズームアウト(zoom out)される。
また、本明細書で、実行モードは、例えば、第1実行モード、第2実行モード及び第3実行モードを含んでもよい。
第1実行モードは、ディスプレイ上のオブジェクトを管理するための動作を実行するモードであってもよい。また、第1実行モードでは、ディスプレイ上のオブジェクトの選択、コピー、カット及び移動のうち、少なくとも1つの動作を実行することができる選択リストが表示され、ユーザは、選択リストに表示された動作のうち一つを選択することにより、ディスプレイ上のオブジェクトを管理することができる。
また、第2実行モードは、オブジェクトを拡大させながら、オブジェクトに対応するアプリケーションを実行するための実行モードであってもよい。第2実行モードでは、オブジェクトに対応するアプリケーションを実行し、オブジェクトが拡大されるにつれて、拡大されたオブジェクトの領域に、アプリケーションの実行結果を漸次拡大させて表示することができる。
また、第3実行モードは、オブジェクトに対応するアプリケーションについての実行結果を、別途の窓に表示するモードであってもよい。第3実行モードでは、オブジェクトに対応するアプリケーションの実行結果が、別途のポップアップ窓にディスプレイされる。
以下、添付された図面を参照しつつ、本発明について詳細に説明する。
図1は、本発明の一実施形態によるオブジェクト実行方法によって、デバイスのディスプレイ上でオブジェクトが実行される一例を図示した図面である。
図1に図示されたように、本発明の一実施形態によるデバイスの画面には、所定のオブジェクトが表示され、ユーザのタッチによって、オブジェクトが選択される。オブジェクトは、ユーザ入力によって選択される対象を意味する。オブジェクトは、イメージ、テキスト及び動画を含み、例えば、アイコン、インデックス項目、リンク情報、コンテンツの再生画面などを含む。例えば、デバイスの画面に表示されたオブジェクトは、動画ファイルのアイコン、音楽ファイルのアイコン、動画再生アプリケーションのアイコン、音楽再生アプリケーションのアイコン、天気情報提供ウィジェット及びカレンダーウィジェットを含んでもよいが、それらに制限されるものではない。
また、オブジェクトを選択するユーザ入力によって、既設定の複数の実行モードのうち一つが決定され、決定された実行モードによって、オブジェクトに対応するデバイスの動作が実行される。また、ユーザ入力によって、オブジェクトが拡大されるにつれて、拡大されたオブジェクトの領域には、オブジェクトに対応するアプリケーションの実行結果が漸次拡大されて表示される。
図2は、本発明の一実施形態によるオブジェクト実行方法のフローチャートである。
段階S200でデバイスは、オブジェクトに係わるユーザ入力を受信する。段階S200でデバイスは、タッチスクリーンを介してユーザ入力を受信することができる。ここでのタッチ入力は、タッチ、ホールド、タップ、ドラッグ、フリック、ピンチング及びアンピンチングのうち、少なくとも1つのジェスチャにもよる。ユーザ入力は、タッチを介した入力に制限されるものではなく、音声入力、デバイスを動かすジェスチャを含んでもよい。
段階S210でデバイスは、ユーザ入力に基づいて、複数の実行モードのうち一つを決定する。デバイスは、オブジェクトに係わるユーザ入力によって、オブジェクトに係わって、異なる動作を遂行する複数の実行モードが設定される。
複数の実行モードは、第1実行モード、第2実行モード及び第3実行モードのうち少なくとも一つを含んでもよいが、それらに制限されるものではない。
第1実行モードは、ディスプレイ上のオブジェクトを管理するための動作を実行するモードである。例えば、第1実行モードでは、ディスプレイ上のオブジェクトの選択、コピー、カット及び移動のうち、少なくとも1つの動作が実行される。
また、第2実行モードは、オブジェクトを拡大させてオブジェクトに対応するアプリケーションを実行するための実行モードである。例えば、第2実行モードでは、オブジェクトに対応するアプリケーションを実行し、オブジェクトが拡大されるにつれて、拡大されたオブジェクトの領域に、アプリケーションの実行結果を漸次拡大させて表示することができる。
また、第3実行モードは、オブジェクトに対応するアプリケーションについての実行結果を、別途の窓に表示するモードである。例えば、第3実行モードでは、オブジェクトに対応するアプリケーションの実行結果が、別途のポップアップ窓にディスプレイされる。
また、ユーザ入力別に実行モードがマッチングされる。例えば、オブジェクトを既設定の時間以上タッチするユーザ入力は、第1実行モードにマッチングされる。
また、例えば、オブジェクトを既設定の時間以内タッチしてドラッグするユーザ入力は、第2実行モードにマッチングされる。その場合、オブジェクトのワク部分がタッチされてドラッグされることにより、第2実行モードによって、オブジェクトに対応するアプリケーションが実行される。また、例えば、オブジェクトをピンチングするユーザ入力が、第2実行モードにマッチングされもする。また、例えば、オブジェクトを、既設定の時間以内既設定の回数タッチするユーザ入力は、第3実行モードにマッチングされる。しかし、それらに制限されるものではない。
段階S220でデバイスは、決定された実行モードに基づいて、オブジェクトに対応するアプリケーションを実行する。段階S220でデバイスは、ユーザ入力にマッチングされる実行モードによって、オブジェクトに対応する動作を実行することができる。例えば、オブジェクトが天気アプリケーションの実行アイコンであるならば、デバイスは、天気アプリケーションを実行することができる。また、例えば、オブジェクトが所定のサイトに接続するためのリンク項目である場合、デバイスは、インターネット・ブラウザを実行させることができる。
段階S230でデバイスは、ユーザ入力に基づいて、オブジェクトに対応する動作の実行を終了する。段階S230でデバイスは、オブジェクトがタッチされてドラッグされた後、既設定の時間以内タッチがドロップされることにより、オブジェクトに対応する動作の実行を終了することができる。また、デバイスは、オブジェクトがタッチされてドラッグされた後、タッチが維持された状態で、オブジェクトが拡大される以前の方向へのフリック入力(または、ドラッグ入力)が受信されることにより、オブジェクトに対応する動作の実行を終了することができる。また、デバイスは、動作を終了しながら、拡大されたオブジェクトを、タッチ以前の大きさに縮小させて表示することができる。
また、拡大されたオブジェクトは、所定のユーザ入力によって縮小される。例えば、ユーザが、拡大されたオブジェクトの領域に表示された窓閉じアイコンを選択すれば、拡大されたオブジェクトが縮小される。また、例えば、ユーザが、拡大されたオブジェクトを既設定の時間以上タッチし、タッチされたオブジェクトを、ドラッグを介して所定の領域(例えば、ゴミ箱アイコンが表示された領域)に移動させてドロップすれば、オブジェクトが原状態に復帰される。また、例えば、ユーザが、拡大されたオブジェクトをアンピンチングすれば、拡大されたオブジェクトが縮小される。また、例えば、拡大されたオブジェクトの頂点を、既設定の時間の間タッチし、対角線方向にドラッグまたはフリックすれば、拡大されたオブジェクトが縮小される。また、例えば、ユーザが拡大されたオブジェクト及び壁紙を共に擦れば、拡大されたオブジェクトが縮小される。
図3は、本発明の一実施形態による第2実行モードによるオブジェクトの実行結果を表示する方法のフローチャートである。
段階S300でデバイスは、ユーザ入力によって、オブジェクトを拡大させる。段階S300でデバイスは、オブジェクトを既設定の時間以内タッチしてドラッグするユーザ入力に応答し、オブジェクトを拡大させることができる。例えば、オブジェクトのワク部分がタッチされてドラッグされることにより、オブジェクトが拡大される。その場合にデバイスは、タッチされた位置とドラッグされた位置との間の距離に基づいて、オブジェクトをどれほど拡大させるかということを決定することができる。また、例えば、オブジェクトをピンチングするユーザ入力によって、オブジェクトが拡大されもする。
また、デバイスは、2段階のユーザ入力に基づいて、オブジェクトを拡大させることもできる。デバイスは、ユーザ入力に基づいて、オブジェクトの拡大機能を活性化することを決定することができ、オブジェクトの拡大機能が活性化された後、ユーザの入力を受信することにより、オブジェクトを拡大させることもできる。
例えば、デバイスは、オブジェクトがタッチされて所定時間以上ホールドされる場合、オブジェクトの拡大機能を活性化することができる。また、例えば、デバイスは、所定の音声が入力されることにより、オブジェクトの拡大機能を活性化することができる。その場合、オブジェクトの拡大サイズ及び拡大されたオブジェクトに表示される情報があらかじめ決定され、決定された大きさのオブジェクトの領域に、決定された情報が表示される。
また、例えば、デバイスは、オブジェクトがマルチタッチされる場合、オブジェクトの拡大機能を活性化することができる。また、オブジェクトがタッチされ、所定のパターン(例えば、円、ジグザグなど)にドラッグされれば、デバイスは、オブジェクトの拡大機能を活性化することができる。また、デバイスは、オブジェクトに係わるタッチ圧力が、既設定の強度以上である場合、オブジェクトの拡大機能を活性化することもできる。
また、オブジェクトの拡大機能が活性化されることをユーザに知らせるための効果が、ディスプレイに表示される。例えば、オブジェクトの拡大機能が活性化されるとき、オブジェクトの頂点に所定の動作(例えば、オブジェクトの拡大)のためのUI(user interface)が表示される。また、オブジェクトの拡大機能が活性化されるとき、ディスプレイ上のオブジェクトが揺れたり、あるいはオブジェクトの大きさが拡大されることもある。また、オブジェクトの拡大機能が活性化されるとき、オブジェクトが立体的に表示されもする。例えば、オブジェクトのワク厚が厚く表示されたり、あるいはオブジェクトの領域がディスプレイの下端に陥没されたように表示されもする。
また、オブジェクトの拡大機能が活性化されることにより、ユーザ入力に基づいて、大きさを拡大させることができる別途のオブジェクトを生成してディスプレイすることもできる。例えば、第1アイコンをタッチして所定時間以上ホールドする場合、第1アイコンに対応するアプリケーションを実行するための第2アイコンを生成し、ディスプレイすることができる。また、第2アイコンは、オブジェクトの拡大機能が活性化されているアイコンであってもよい。
また、デバイスは、拡大機能が活性化されたオブジェクトに係わるユーザ入力に基づいて、オブジェクトを拡大させることができる。例えば、デバイスは、拡大機能が活性化されたオブジェクトに係わるピンチング入力に基づいて、オブジェクトを拡大させることができる。オブジェクトに、少なくとも1つの指がタッチされてアンピンチングされる場合、オブジェクトが拡大される。また、ディスプレイ上のオブジェクトが位置していない領域をタッチしてアンピンチングするユーザ入力によって、オブジェクトが拡大されもする。
また、例えば、拡大機能が活性化されたオブジェクトをタッチしてドラッグするユーザ入力に基づいて、オブジェクトを拡大させることもできる。また、例えば、拡大機能が活性化されたオブジェクトを複数回タッチするユーザ入力に基づいて、オブジェクトを拡大させることができる。その場合、オブジェクトは、既設定の大きさに拡大されもする。
また、例えば、大きさを拡大させることができる別途のオブジェクトが生成されて表示された場合には、別途に生成されたオブジェクトをタッチすることにより、別途に生成されたオブジェクトの大きさを既設定のサイズに拡大させることもできる。
段階S310でデバイスは、アプリケーションの実行結果を表示する。段階S310でデバイスは、拡大されたオブジェクトの領域に、アプリケーションの実行結果を表示することができる。例えば、デバイスは、オブジェクトを拡大させながら、拡大されたオブジェクトの領域に、オブジェクトに対応するアプリケーションの実行結果をディスプレイすることができる。その場合、アプリケーションの実行結果は、オブジェクトが拡大されるにつれて、漸次拡大されて表示される。また、オブジェクトが拡大されるにつれて、アプリケーションの機能のうち、一部機能だけが実行されもする。
例えば、タッチ&ドラッグによって、オブジェクトが拡大される場合、ドラッグ入力の受信が始まるとき、アプリケーションの実行結果が表示される。また、ドラッグ入力が受信された後、既設定の距離以上タッチがドラッグされるとき、アプリケーションの実行結果が表示されもする。
また、アプリケーションの実行結果として表示される情報は、デバイスに設置されたアプリケーションから獲得されるが、それらに制限されるものではない。デバイスは、アプリケーションの実行についての情報を別途のサーバから受信し、受信された情報を表示することもできる。その場合にデバイスは、別途のサーバをデバイスに連結し、連結された別途のサーバから、アプリケーションの実行についての情報を受信することができる。また、デバイスは、別途のサーバに、アプリケーションの実行についての情報の要請をプッシュ(push)することもできる。もし、ネットワーキング環境が不安定であり、デバイスがサーバからのデータ受信が遅延される場合には、デバイスは、以前に使用されたアプリケーションの実行画面として、あらかじめキャプチャされた画面をアプリケーションの実行結果として表示することもできる。
また、オブジェクトが拡大されるにつれて、デバイスがサーバから、オブジェクトに係わる付加情報、及びオブジェクトについてのコンテンツを受信して表示する方法については、図9でさらに詳細に説明する。
また、デバイスは、アプリケーションの実行についての情報を、他のデバイス(図示せず)から受信し、受信された情報を表示することもできる。具体的には、デバイスに表示された所定のオブジェクトが拡大されるにつれて、デバイスは、他のデバイス(図示せず)とペアリングされ、オブジェクトの拡大された領域の大きさによって、オブジェクトと係わるコンテンツの一部情報及び詳細情報を段階的に受信することができる。例えば、デバイスの画面上に、他のデバイスのファイルを探索するためのオブジェクトが表示され、オブジェクトが第1臨界値以上拡大されれば、デバイスは、他のデバイス(図示せず)から、他のデバイス(図示せず)に保存されたファイルの要約情報を受信して表示することができる。また、オブジェクトが、第2臨界値以上拡大されれば、デバイスは、デバイス(図示せず)から、他のデバイス(図示せず)に保存されたファイルの詳細情報を受信して表示することができる。
また、デバイスは、拡大されたオブジェクトの領域に、アプリケーションの実行結果と共にオブジェクトを表示することができるが、これに制限されるものではない。
また、デバイスは、拡大されたオブジェクト領域の大きさによって、アプリケーションの実行結果の一部または全部を、オブジェクトの領域に表示することができる。また、アプリケーションの実行結果を示す画面は、複数に生成され、デバイスは、拡大されたオブジェクト領域の大きさによって、複数の画面がそれぞれ表示される。
また、アプリケーションの実行結果が表示されることにより、デバイスで既設定のパターンの振動が発生する。また、アプリケーションの実行結果が、オブジェクトの領域に表示されるとき、既設定の時間の間アプリケーションの実行結果が強調されて表示されもする。例えば、アプリケーションの実行結果が表示される場合、オブジェクト領域のワクが、既設定の時間の間、既設定の色相で複数回点滅する。また、例えば、アプリケーションの実行結果が表示される場合、デバイスで、既設定のサウンドが出力される。また、例えば、アプリケーションの実行結果が表示される場合、デバイスで、既設定の香りが発生する。また、例えば、アプリケーションの実行結果が表示される場合、デバイスの表面が変形され、ユーザは手の触覚を介して、デバイスの表面変化を感じる。その場合、デバイスの表面の一部が突出または陥没されるが、それらに制限されるものではない。
また、デバイスは、ユーザ入力に基づいて、オブジェクトの領域を固定させることができ、固定されたオブジェクトの領域に、オブジェクトに対応する動作の実行結果を表示することができる。例えば、オブジェクトがタッチされてドラッグされた後、既設定の時間以上、前記タッチがホールドされることにより、デバイスは、拡大されたオブジェクトの大きさを固定させ、固定された領域に、オブジェクトに対応する動作の実行結果を表示することができる。また、例えば、デバイスは、オブジェクトがタッチされてドラッグされた後、タッチによって、ディスプレイに加えられる圧力を感知することができ、感知された圧力の大きさが既設定の数値以上である場合、拡大されたオブジェクトの大きさを固定させることもできる。
一方、オブジェクトが所定のコンテンツファイルを実行するためのアイコンである場合、コンテンツファイルの種類によって、アプリケーションの実行結果に含まれる情報が異なる。
例えば、コンテンツファイルが写真ファイルである場合、写真イメージ、写真撮影時間、写真撮影位置及び写真イメージの解像度についての情報が写真ファイルに対応するアプリケーションの実行結果に含まれる。
また、例えば、コンテンツファイルが動画ファイルである 場合、エンコード方式、プレイタイム、動画解像度についての情報が動画ファイルに対応するアプリケーションの実行結果に含まれる。
また、例えば、コンテンツファイルが音楽ファイルである場合、エンコード方式、プレイタイム、アルバム情報が音楽ファイルに対応するアプリケーションの実行結果に含まれる。
また、例えば、コンテンツファイルがアプリケーション設置パッケージファイルである場合、設置が可能なプラットホームの種類、アプリケーション情報、アプリケーションに係わるユーザ評価情報がアプリケーション設置パッケージファイルに対応するアプリケーションの実行結果に含まれる。
また、オブジェクトがフォルダアイコンである場合、フォルダに含まれたファイルのアイコン及びフォルダ情報が、フォルダアイコンに対応するアプリケーションの実行結果に含まれる。
一方、オブジェクトが拡大されるにつれて、ディスプレイ上のオブジェクト中で、拡大されたオブジェクト以外の他のオブジェクトの位置及び配列が調節される。拡大されたオブジェクト以外の他のオブジェクトは、ディスプレイ上で拡大されたオブジェクトの領域外に配置される。しかし、それらに制限されるものではなく、拡大されたオブジェクトが他のオブジェクトの上にオーバレイされて表示されもする。その場合、オーバレイされたオブジェクトの領域の透明度が調節され、半透明に表示される。また、ディスプレイ画面の大きさ及びディスプレイ上のオブジェクトの個数によって、拡大されたオブジェクトが他のオブジェクトの上にオーバレイされるか、他のオブジェクトが再配置されるかが多様に決定される。
オブジェクトが拡大されるにつれて、アプリケーションの実行結果が表示される方法については、図13ないし図18で例を挙げて説明する。
図4は、本発明の一実施形態による、オブジェクトが拡大されるにつれて、オブジェクトに対応するアプリケーションを実行し、アプリケーションの実行画面を表示する方法の詳細フローチャートである。
段階S400でデバイスは、オブジェクトに係わるユーザ入力を受信する。段階S400でデバイスは、オブジェクトを既設定の時間以内タッチしてドラッグするユーザ入力を受信することができる。また、デバイスは、オブジェクトのワク部分をタッチしてドラッグするユーザ入力を受信することができる。また、デバイスは、オブジェクトをピンチングするユーザ入力を受信することができる。しかし、デバイスが受信するユーザ入力の種類は、それに制限されるものではない。
段階S410でデバイスは、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるか否かを判断する。段階S410でデバイスは、オブジェクトのワク部分がタッチされてドラッグされることにより、オブジェクトを拡大させることができる。また、デバイスは、タッチされた位置とドラッグされた位置との間の距離に基づいて、拡大されたオブジェクトの領域サイズを獲得することができる。また、段階S410でデバイスは、オブジェクトがピンチングされることにより、オブジェクトを拡大させることができる。また、デバイスは、ピンチングに利用されたタッチ間の距離に基づいて、拡大されたオブジェクトの領域サイズを獲得することができる。
また、拡大されたオブジェクトの領域サイズは、タッチされた地点及びドラッグが終わった地点の位置に基づいて獲得される。例えば、タッチされた地点及びドラッグが終わった地点を連結する線を対角線にする四角形の面積に基づいて、拡大されたオブジェクトの領域サイズが決定される。また、例えば、タッチされた地点及びドラッグが終わった地点を連結する線を直径とする円の面積に基づいて、拡大されたオブジェクトの領域サイズが決定される。また、例えば、タッチされた地点及びドラッグが終わった地点を連結する線を対角線にする四角形の横長または縦長に基づいて、拡大されたオブジェクトの領域サイズが決定される。
また、第1臨界値はあらかじめ設定され、デバイスは、獲得されたサイズ値を、第1臨界値と比較することにより、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるか否かを判断することができる。
段階S410での判断結果、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるならば、段階S420でデバイスは、オブジェクトに対応するアプリケーションを実行する。オブジェクトに対応するアプリケーションは、例えば、天気アプリケーション、電卓アプリケーション、ニュースアプリケーション、証券アプリケーション、カレンダー・アプリケーション、動画再生アプリケーション、音楽再生アプリケーションを含むが、それらに制限されるものではない。また、オブジェクトが拡大されるにつれて、アプリケーションの機能のうち一部機能だけが実行されもする。
段階S430でデバイスは、拡大されたオブジェクトの領域に、アプリケーションの実行画面の一部を表示する。段階S430でデバイスは、アプリケーションの実行画面の一部分を切り取り、切り取った画面を、拡大されたオブジェクトの領域に表示することができる。また、デバイスは、オブジェクトが拡大されるにつれて、アプリケーションの実行画面のうち、切り取った部分以外の画面を漸次追加して表示することにより、オブジェクトの領域にアプリケーションの実行画面を一部から全部に漸次確張して表示することができる。
段階S440でデバイスは、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるか否かを判断する。段階S440でデバイスは、オブジェクトのワク部分がタッチされてドラッグされることにより、タッチされた位置とドラッグされた位置との間の距離に基づいて、拡大されたオブジェクトの領域サイズを獲得することができる。また、段階S440でデバイスは、オブジェクトがピンチングされることにより、ピンチングに利用されたタッチ間の距離に基づいて、拡大されたオブジェクトの領域サイズを獲得することができる。
また、デバイスは、獲得されたサイズ値を第2臨界値と比較することにより、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるか否かを判断することができる。
また、第2臨界値は、オブジェクトに対応するアプリケーションの種類によって設定される。また、第2臨界値は、アプリケーションの実行結果を示す画面に含まれる構成要素の個数及び大きさに基づいて設定される。しかし、それらに制限されるものではない。
段階S440での判断結果、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるならば、段階S450でデバイスは、拡大されたオブジェクトの領域に、アプリケーションの実行画面の全体を表示する。また、デバイスは、オブジェクトが拡大されるにつれて、アプリケーションの実行画面を漸次拡大させて表示することができる。
また、オブジェクトの領域サイズが臨界値を超えるとき、多種のハイライト効果がデバイスで出力される。例えば、オブジェクトをタッチしてドラッグすることにより、オブジェクトの領域サイズが、第1臨界値を超えるとき、デバイスで所定の振動及びサウンドのうち少なくとも一つが出力される。また、オブジェクトをタッチしてドラッグすることにより、オブジェクトの領域サイズが、第1臨界値を超えるとき、例えば、色相及び明るさのうち少なくとも一つが差別化されるようにオブジェクトが表示されたり、あるいはオブジェクトが立体感をもって表示されもする。また、例えば、アプリケーションの実行結果が表示される場合、デバイスから既設定の香りが発せられる。また、例えば、アプリケーションの実行結果が表示される場合、デバイスの表面が変形され、ユーザは、手の触覚を介して、デバイスの表面変化を感じることができる。その場合、デバイスの表面の一部が突出または陥没されるが、それらに制限されるものではない。また、オブジェクトの領域サイズが臨界値を超えるとき、臨界値の種類によって、ハイライト効果がデバイスで差別化されるように出力される。
オブジェクトに対応するアプリケーションの実行画面の一部または全部が表示される一例については、図14で詳細に説明する。
図5は、本発明の一実施形態による、オブジェクトが拡大されるにつれて、オブジェクトに対応するアプリケーションを実行し、アプリケーションの実行結果についての要約情報及び詳細情報を表示する方法の詳細フローチャートである。
図5の段階S500ないし段階S550でオブジェクトは、ユーザ入力に基づいて、継続的または断続的に拡大する。
段階S500でデバイスは、オブジェクトに係わるユーザ入力を受信する。段階S500でデバイスは、オブジェクトを既設定の時間以内タッチしてドラッグするユーザ入力を受信することができる。また、デバイスは、オブジェクトのワク部分をタッチしてドラッグするユーザ入力を受信することができる。また、デバイスは、オブジェクトをピンチングするユーザ入力を受信することができる。しかし、デバイスが受信するユーザ入力の種類は、それらに制限されるものではない。
段階S510でデバイスは、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるか否かを判断する。デバイスは、拡大されたオブジェクトの領域サイズを獲得し、獲得されたサイズ値を第1臨界値と比較することにより、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるか否かを判断することができる。
段階S510での判断結果、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるならば、段階S520でデバイスは、オブジェクトに対応するアプリケーションを実行する。また、段階S510での判断結果、拡大されたオブジェクトの領域サイズが、第1臨界値以下であるならば、デバイスは、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるか否かをさらに判断する。その場合、オブジェクトは、ユーザ入力に基づいて、継続的または断続的に拡大中であってもよい。
段階S530でデバイスは、拡大されたオブジェクトの領域に、アプリケーションの実行結果の要約情報を表示する。段階S530でデバイスは、アプリケーションの実行結果についての要約情報を生成し、生成された要約情報を、拡大されたオブジェクトの領域に表示することができる。また、デバイスは、オブジェクトが拡大されるにつれて、表示される要約情報の量を増やすことができる。
段階S540でデバイスは、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるか否かを判断する。デバイスは、拡大されたオブジェクトの領域サイズを獲得し、獲得されたサイズ値を第2臨界値と比較することにより、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるか否かを判断することができる。
第2臨界値は、オブジェクトに対応するアプリケーションの種類によって設定される。また、第2臨界値は、アプリケーションの実行結果を示す画面に含まれる構成要素の個数及び大きさに基づいて設定される。しかし、それに制限されるものではない。
段階S540での判断結果、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるならば、段階S550でデバイスは、拡大されたオブジェクトの領域に、アプリケーションの実行結果の詳細情報を表示する。また、デバイスは、オブジェクトが拡大されるにつれて、アプリケーションの実行結果の詳細情報を含む画面を漸次拡大させて表示することができる。
また、段階S540での判断結果、拡大されたオブジェクトの領域サイズが、第2臨界値以下であるならば、デバイスは、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるか否かをさらに判断する。その場合、オブジェクトは、ユーザ入力に基づいて、継続的または断続的に拡大中であってもよい。
オブジェクトに対応するアプリケーションの実行結果に係わる要約情報及び詳細情報が表示される一例については、図17で詳細に説明する。
図6は、本発明の一実施形態による、オブジェクトに対応する動画アプリケーションを実行し、実行結果を表示する方法の詳細フローチャートである。
図6の段階S600ないし段階S650でオブジェクトは、ユーザ入力に基づいて、継続的または断続的に拡大してもよい。
段階S600でデバイスは、オブジェクトに係わるユーザ入力を受信する。段階S600でデバイスは、オブジェクトを既設定の時間以内タッチしてドラッグするユーザ入力を受信することができる。また、デバイスは、オブジェクトのワク部分をタッチしてドラッグするユーザ入力を受信することができる。また、デバイスは、オブジェクトをピンチングするユーザ入力を受信することができる。しかし、デバイスが受信するユーザ入力の種類は、それらに制限されるものではない。
段階S610でデバイスは、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるか否かを判断する。デバイスは、拡大されたオブジェクトの領域サイズを獲得し、獲得されたサイズ値を第1臨界値と比較することにより、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるか否かを判断することができる。また、段階S610での判断結果、拡大されたオブジェクトの領域サイズが、第1臨界値以下であるならば、デバイスは、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるか否かをさらに判断する。その場合、オブジェクトは、ユーザ入力に基づいて、継続的または断続的に拡大中であってもよい。
段階S610での判断結果、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるならば、段階S620でデバイスは、オブジェクトに対応する動画アプリケーションを実行する。
段階S630でデバイスは、拡大されたオブジェクトの領域に、動画のプレビュー映像を表示する。デバイスは、動画再生アプリケーションを介して再生される動画に係わるプレビュー映像を生成することができる。また、デバイスは、動画再生アプリケーションを介して再生される動画のプレビュー映像を、別途のサーバ(図示せず)から受信することもできる。デバイスがプレビュー映像をサーバ(図示せず)から受信する場合には、デバイスの仕様についての情報、及び再生される動画の識別値をサーバ(図示せず)に提供し、デバイスの性能に適するフォーマットにエンコードされたプレビュー映像を受信することができる。また、デバイスは、オブジェクトが拡大されるにつれて、プレビュー映像の画面サイズを漸次拡大させて表示することができる。
段階S640でデバイスは、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるか否かを判断する。デバイスは、拡大されたオブジェクトの領域サイズを獲得し、獲得されたサイズ値を第2臨界値と比較することにより、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるか否かを判断することができる。
第2臨界値は、オブジェクトに対応するアプリケーションの種類によって設定される。また、第2臨界値は、アプリケーションの実行結果を示す画面に含まれる構成要素の個数及び大きさに基づいて設定される。しかし、それに制限されるものではない。
段階S640での判断結果、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるならば、段階S650でデバイスは、拡大されたオブジェクトの領域に、動画の再生映像を表示する。段階S650でデバイスは、動画の原本ファイルを再生し、原本ファイルの再生映像をディスプレイすることができる。その場合、動画の再生を制御することができるUI(user interface)を共に表示することができる。
また、段階S640での判断結果、拡大されたオブジェクトの領域サイズが、第2臨界値以下であるならば、デバイスは、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるか否かをさらに判断する。その場合、オブジェクトは、ユーザ入力に基づいて、継続的または断続的に拡大中であってもよい。
また、デバイスは、オブジェクトが拡大されるにつれて、動画の再生画面を漸次拡大させて表示することができる。
動画のプレビュー映像及び動画の再生映像が表示される一例については、図16で詳細に説明する。
図7は、本発明の一実施形態による、オブジェクトに対応するカレンダー・アプリケーションを実行し、実行結果を表示する方法の詳細フローチャートである。
図7の段階S700ないし段階S770でオブジェクトは、ユーザ入力に基づいて、継続的または断続的に拡大してもよい。
段階S700でデバイスは、オブジェクトに係わるユーザ入力を受信する。段階S700でデバイスは、オブジェクトを既設定の時間以内タッチしてドラッグするユーザ入力を受信することができる。また、デバイスは、オブジェクトのワク部分をタッチしてドラッグするユーザ入力を受信することができる。また、デバイスは、オブジェクトをピンチングするユーザ入力を受信することができる。しかし、デバイスが受信するユーザ入力の種類は、それらに制限されるものではない。
段階S710でデバイスは、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるか否かを判断する。デバイスは、拡大されたオブジェクトの領域サイズを獲得し、獲得されたサイズ値を第1臨界値と比較することにより、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるか否かを判断することができる。
段階S710での判断結果、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるならば、段階S720でデバイスは、オブジェクトに対応するカレンダー・アプリケーションを実行する。また、段階S710での判断結果、拡大されたオブジェクトの領域サイズが、第1臨界値以下であるならば、デバイスは、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるか否かをさらに判断する。その場合、オブジェクトは、ユーザ入力に基づいて、継続的または断続的に拡大中であってもよい。
段階S730でデバイスは、拡大されたオブジェクトの領域に、カレンダー・アプリケーションの日単位イメージを表示する。カレンダー・アプリケーションの日単位イメージは、特定日付、及び特定日付に係わるメモを記録することができるフィールドを含んでもよい。また、デバイスは、オブジェクトが拡大されるにつれて、カレンダー・アプリケーションの日単位イメージを漸次拡大させて表示することができる。
段階S740でデバイスは、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるか否かを判断する。デバイスは、拡大されたオブジェクトの領域サイズを獲得し、獲得されたサイズ値を第2臨界値と比較することにより、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるか否かを判断することができる。
段階S740での判断結果、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるならば、段階S750でデバイスは、拡大されたオブジェクトの領域に、カレンダー・アプリケーションの週単位イメージを表示する。カレンダー・アプリケーションの週単位イメージは、特定週に含まれた日付、及びそれぞれの日付に係わるメモを記録することができる複数のフィールドを含んでもよい。また、デバイスは、オブジェクトが拡大されるにつれて、カレンダー・アプリケーションの週単位イメージを漸次拡大させて表示することができる。
また、段階S740での判断結果、拡大されたオブジェクトの領域サイズが、第2臨界値以下であるならば、デバイスは、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるか否かをさらに判断する。その場合、オブジェクトは、ユーザ入力に基づいて、継続的または断続的に拡大中であってもよい。
段階S760でデバイスは、拡大されたオブジェクトの領域サイズが、第3臨界値以上であるか否かを判断する。デバイスは、拡大されたオブジェクトの領域サイズを獲得し、獲得されたサイズ値を第3臨界値と比較することにより、拡大されたオブジェクトの領域サイズが、第3臨界値以上であるか否かを判断することができる。
段階S760での判断結果、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるならば、段階S770でデバイスは、拡大されたオブジェクトの領域に、カレンダー・アプリケーションの月単位イメージを表示する。カレンダー・アプリケーションの月単位イメージは、特定月に含まれた日付、及びそれぞれの日付に係わるメモを記録することができる複数のフィールドを含んでもよい。また、デバイスは、オブジェクトが拡大されるにつれて、カレンダー・アプリケーションの月単位イメージを漸次拡大させて表示することができる。
また、段階S760での判断結果、拡大されたオブジェクトの領域サイズが、第3臨界値以下であるならば、デバイスは、拡大されたオブジェクトの領域サイズが、第3臨界値以上であるか否かをさらに判断する。その場合、オブジェクトは、ユーザ入力に基づいて、継続的または断続的に拡大中であってもよい。
カレンダー・アプリケーションが拡大されたオブジェクトの領域に表示される一例については、図15で詳細に説明する。
図8は、本発明の一実施形態による、オブジェクトに対応する音楽再生アプリケーションを実行し、実行結果を出力する方法の詳細フローチャートである。
図8の段階S800ないし段階S870でオブジェクトは、ユーザ入力に基づいて、継続的または断続的に拡大してもよい。
段階S800でデバイスは、オブジェクトに係わるユーザ入力を受信する。段階S800でデバイスは、オブジェクトを既設定の時間以内タッチしてドラッグするユーザ入力を受信することができる。また、デバイスは、オブジェクトのワク部分をタッチしてドラッグするユーザ入力を受信することができる。また、デバイスは、オブジェクトをピンチングするユーザ入力を受信することができる。しかし、デバイスが受信するユーザ入力の種類は、それらに制限されるものではない。
段階S810でデバイスは、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるか否かを判断する。デバイスは、拡大されたオブジェクトの領域サイズを獲得し、獲得されたサイズ値を第1臨界値と比較することにより、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるか否かを判断することができる。
段階S810での判断結果、拡大されたオブジェクトの領域サイズが、第1臨界値以下であるならば、デバイスは、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるか否かをさらに判断する。その場合、オブジェクトは、ユーザ入力に基づいて、継続的または断続的に拡大中であってもよい。
また、段階S810での判断結果、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるならば、段階S820でデバイスは、オブジェクトに対応する音楽再生アプリケーションを実行する。
また、段階S830でデバイスは、音楽のプレリスニング・サウンドを出力する。
デバイスは、音楽再生アプリケーションを介して再生される音楽に係わるプレリスニング・サウンドを生成することができる。また、デバイスは、音楽再生アプリケーションを介して再生される音楽に係わるプレリスニング・サウンドを別途のサーバ(図示せず)から受信することもできる。デバイスがプレビューサウンドをサーバ(図示せず)から受信する場合には、デバイスの仕様についての情報、及び再生される音楽の識別値をサーバ(図示せず)に提供し、デバイスの性能に適するフォーマットにエンコードされたプレリスニング・サウンドを受信することができる。
段階S840でデバイスは、拡大されたオブジェクトの領域に、音楽についての要約情報を表示する。段階S530でデバイスは、音楽についての要約情報を生成し、生成された要約情報を、拡大されたオブジェクトの領域に表示することができる。また、デバイスは、オブジェクトが拡大されるにつれて、表示される要約情報の量を増やすことができる。
段階S850でデバイスは、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるか否かを判断する。デバイスは、拡大されたオブジェクトの領域サイズを獲得し、獲得されたサイズ値を第2臨界値と比較することにより、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるか否かを判断することができる。
段階S850での判断結果、拡大されたオブジェクトの領域サイズが、第2臨界値以下であるならば、デバイスは、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるか否かをさらに判断する。その場合、オブジェクトは、ユーザ入力に基づいて、継続的または断続的に拡大中であってもよい。
また、段階S850での判断結果、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるならば、段階S860でデバイスは、音楽の全体サウンドを出力する。
段階S870でデバイスは、拡大されたオブジェクトの領域に、音楽の再生を制御するための制御画面を表示する。デバイスは、音楽の再生を制御することができるUI(user interface)、及び音楽に係わる詳細情報を共に表示することができる。また、デバイスは、オブジェクトが拡大されるにつれて、音楽の制御画面を漸次拡大させて表示することができる。
音楽再生アプリケーションの実行結果が表示される一例については、図17で詳細に説明する。
図9は、本発明の一実施形態による、オブジェクトが拡大されるにつれて、デバイスがサーバから、オブジェクトに係わる付加情報、及びオブジェクトについてのコンテンツを受信して表示する方法を図示した図面である。
図9の段階S900ないし段階S980でオブジェクトは、ユーザ入力に基づいて、継続的または断続的に拡大してもよい。
段階S900でデバイスは、オブジェクトに係わるユーザ入力を受信する。段階S900でデバイスは、オブジェクトを既設定の時間以内タッチしてドラッグするユーザ入力を受信することができる。また、デバイスは、オブジェクトのワク部分をタッチしてドラッグするユーザ入力を受信することができる。また、デバイスは、オブジェクトをピンチングするユーザ入力を受信することができる。しかし、デバイスが受信するユーザ入力の種類は、それらに制限されるものではない。
段階S910でデバイスは、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるか否かを判断する。デバイスは、拡大されたオブジェクトの領域サイズを獲得し、獲得されたサイズ値を第1臨界値と比較することにより、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるか否かを判断することができる。
段階S910での判断結果、拡大されたオブジェクトの領域サイズが、第1臨界値以下であるならば、デバイスは、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるか否かをさらに判断する。その場合、オブジェクトは、ユーザ入力に基づいて、継続的または断続的に拡大中であってもよい。
また、段階S910での判断結果、拡大されたオブジェクトの領域サイズが、第1臨界値以上であるならば、段階S920でデバイスは、オブジェクトについての付加情報をサーバに要請する。例えば、オブジェクトが動画を実行させるためのアイコンである場合、デバイスは、動画についての付加情報をサーバに要請することができる。動画の付加情報は、例えば、動画ファイルの種類、題目、容量、著作者、ランニングタイム及びユーザ評価についての情報のうち少なくとも一つを含んでもよい。
段階S930でデバイスは、要請された付加情報をサーバから受信する。サーバは、付加情報の要請に応答し、オブジェクトについての付加情報を獲得してデバイスに提供することができる。サーバは、他のサーバから付加情報を収集したり、あるいはサーバに含まれたDB(database)から付加情報を抽出することができる。
段階S940でデバイスは、拡大されたオブジェクトの領域に、付加情報を表示する。付加情報は、拡大されたオブジェクトの領域サイズによって差別化されるように表示される。例えば、拡大されたオブジェクトの領域サイズによって、付加情報の種類が区別されるように表示される。
段階S950でデバイスは、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるか否かを判断する。デバイスは、拡大されたオブジェクトの領域サイズを獲得し、獲得されたサイズ値を第2臨界値と比較することにより、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるか否かを判断することができる。
段階S950での判断結果、拡大されたオブジェクトの領域サイズが、第2臨界値以下であるならば、デバイスは、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるか否かをさらに判断する。その場合、オブジェクトは、ユーザ入力に基づいて、継続的または断続的に拡大中であってもよい。
段階S950での判断結果、拡大されたオブジェクトの領域サイズが、第2臨界値以上であるならば、段階S960でデバイスは、オブジェクトについてのコンテンツをサーバに要請する。例えば、オブジェクトが動画を実行させるためのアイコンである場合、デバイスは、動画コンテンツをサーバに要請することができる。
段階S960でデバイスは、要請されたコンテンツをサーバから受信する。サーバは、コンテンツの要請に応答し、オブジェクトについてのコンテンツを獲得してデバイスに提供することができる。サーバは、他のサーバからオブジェクトについてのコンテンツを収集したり、あるいはサーバに含まれたDBからオブジェクトについてのコンテンツを抽出することができる。また、オブジェクトについてのコンテンツは、ダウンローディング方式またはストリーミング方式で、デバイスに提供される。
段階S970でデバイスは、受信されたコンテンツの再生画面を表示する。デバイスは、オブジェクトの領域サイズが拡大されるにつれて、コンテンツの再生画面を拡大させて表示することができるが、それに制限されるものではない。
図9でオブジェクトについてのコンテンツは、例えば、動画、イメージ及び文書を含んでもよいが、それに制限されるものではない。
図10は、本発明の一実施形態による、オブジェクトに対応するアプリケーションを実行させるユーザ入力の一例を図示した図面である。
図10を参照すれば、ユーザが、オブジェクトの一例として、天気アイコン10のワク部分11をタッチしてドラッグ(12)する場合、デバイスは、オブジェクトに係わる複数の実行モードのうち、第2実行モードを選択することができる。また、第2実行モードによって、天気アイコン10に対応する天気アプリケーションを実行することができる。また、天気アイコン10が拡大されるにつれて、拡大されたオブジェクトの領域に、天気アプリケーションの実行結果が漸次拡大されて表示される。
また、天気アイコン10の領域の一部分(例えば、オブジェクトの一部領域、オブジェクトに含まれた所定の文言)をタッチしてドラッグする場合、デバイスは、オブジェクトに係わる複数の実行モードのうち、第2実行モードを選択することができる。
図11は、本発明の一実施形態による、拡大されたオブジェクトが縮小される一例を図示した図面である。
図11を参照すれば、デバイスは、天気アイコン10がタッチされてドラッグ(12)された後、タッチが維持された状態で、タッチを天気アイコン10が拡大される以前の方向にフリック(13)する入力を受信することができる。また、デバイスは、タッチ&ドラッグ&フリックの入力が受信されることにより、拡大された天気アイコン10をタッチ以前の大きさに縮小して表示することができる。その場合にデバイスは、天気アイコン10に対応する天気アプリケーションの実行を終了することができる。
また、天気アイコン10がタッチされてドラッグ(12)されることにより、天気アイコン10の領域が拡大され、天気アイコン10の領域が所定のユーザ入力によって固定された後、天気アイコン10の領域の一部分がタッチされ、天気アイコン10が拡大される以前の位置に向けてドラッグされる場合、拡大された天気アイコン10の領域が縮小される。
また、天気アイコン10がタッチされてドラッグ(12)されることにより、天気アイコン10の領域が拡大され、天気アイコン10の領域が所定のユーザ入力によって固定された後、天気アイコン10の領域の一部分(例えば、拡大された領域を復帰させるためのアイコンが表示された領域)がタッチされることにより、拡大された天気アイコン10の領域が縮小される。
一方、天気アイコン10がタッチされてドラッグ(12)された後、既設定の時間内にタッチが終わることにより、拡大された天気アイコン10の領域が縮小されもする。
図12は、本発明の一実施形態による、オブジェクトが固定されて表示される一例を図示した図面である。
図12を参照すれば、天気アイコン10がタッチされてドラッグ(12)された後、既設定の時間以上タッチがホールドされることにより、デバイスは、拡大された天気アイコン10の領域サイズを固定させることができる。
また、天気アイコン10がタッチされてドラッグ(12)された後、タッチによって、ディスプレイに加えられる圧力の大きさが、既設定の数値以上である場合、デバイスは、拡大された天気アイコン10の領域サイズを固定させることもできる。
また、大きさが固定された天気アイコン10の領域の右側上端には、天気アイコン10の領域サイズが固定されたことを示す所定のアイコン14が表示される。また、天気アイコン10の領域サイズが固定されるとき、天気アイコン10の領域のワク15が所定の色相で複数回点滅する。また、天気アイコン10の領域サイズが固定されるとき、デバイスで、所定パターンの振動が発生することもある。また、天気アイコン10の領域サイズが固定されたことを知らせる視覚的効果、聴覚的効果、触覚的効果のうち、二つ以上が結合された効果がデバイスによって出力される。
また、例えば、オブジェクトがタッチされてドラッグされた後、オブジェクトの所定位置がタップされることにより、拡大されたオブジェクトの大きさが固定されもする。オブジェクトがタッチされてドラッグされた後、オブジェクトの頂点に、ピン(pin)状のアイコンが所定時間の間表示され、ユーザがピン状のアイコンをタップすれば、拡大されたオブジェクトの大きさが固定される。もし所定時間内にピン状のアイコンがタップされなければ、拡大されたオブジェクトは、本来の大きさに縮小される。
また、例えば、ユーザがオブジェクトを2本の指でタッチし、そのうち1本の指でドラッグした後、ドラッグした指をオブジェクトから離し、再びオブジェクトをタッチすれば、オブジェクトの大きさが固定されもする。
また、例えば、ユーザがオブジェクトをタッチしてドラッグした後に指を擦れば、オブジェクトの大きさが固定される。
また、例えば、ユーザがオブジェクトをタッチしてドラッグした後、既設定の音声をデバイスに入力すれば、オブジェクトの大きさが固定される。
図13は、本発明の一実施形態による、オブジェクトが段階的に拡大されるにつれて、オブジェクトに対応するアプリケーションの実行結果が画面に表示される一例を図示した図面である。
図13に図示されたように、天気アイコン10が拡大されるにつれて、拡大された天気アイコン10の領域から、天気アイコン10は消えるか、あるいは天気アイコン10にオーバーラップされて天気アプリケーションの実行画面16がディスプレイされる。また、拡大された領域が漸次拡張されることにより、天気アプリケーションの実行画面16が漸次拡大されて表示される。他の場合、天気アイコン10は、アプリケーションの実行画面16と共にディスプレイされる。
図14は、本発明の他の実施形態による、オブジェクトが段階的に拡大されるにつれて、オブジェクトに対応するアプリケーションの実行画面の一部または全部が画面に表示される一例を図示した図面である。
図14に図示されたように、天気アイコン10が段階的に拡大されるにつれて、天気アイコン10の領域に、天気アプリケーションの実行画面の一部18または全部16がディスプレイされる。具体的には、天気アイコン10の領域サイズが、第1臨界値以上であって第2臨界値以下である場合には、図14(b)及び図14(c)でのように、天気アプリケーションの実行画面の一部が漸次拡張されて表示される。
また、天気アイコン10の領域サイズが、第2臨界値以上である場合には、図14(c)及び図14(d)でのように、天気アプリケーションの実行画面の全部が漸次拡張されて表示される。
また、天気アイコン10の領域サイズが、第1臨界値以上であって第2臨界値以下である場合には、特定日の天気についての情報が表示され、天気アイコン10の領域サイズが、第2臨界値以上である場合、は特定週の天気についての情報が表示されもする。例えば、天気アプリケーションの実行されたときが月曜日であり、天気アイコン10の領域サイズが、第1臨界値以上であって第2臨界値以下である場合には、月曜日の天気情報が画面に表示される。また、天気アイコン10の領域サイズが、第1臨界値以上であって第2臨界値以下であり、天気アイコン10の領域サイズが拡大されるにつれて、月曜日及び火曜日の天気情報が表示される。また、天気アイコン10の領域サイズが、第2臨界値以上である場合には、月曜日ないし日曜日の天気情報が表示される。
図15は、本発明の一実施形態による、オブジェクトに対応するアプリケーションがカレンダー・アプリケーションである場合、オブジェクトが拡大されるにつれて、カレンダーのイメージが段階的に変換されて表示される一例を図示した図面である。
図15を参照すれば、カレンダーアイコン30が段階的に拡大されるにつれて、カレンダーアイコン30の領域に、カレンダー・アプリケーションの実行結果が段階的にディスプレイされる。具体的には、カレンダーアイコン30の領域サイズが、第1臨界値以上であって第2臨界値以下である場合には、図15(b)でのように、カレンダー・アプリケーションの日単位イメージ32が表示される。また、カレンダーアイコン30の領域サイズが、第2臨界値以上であって第3臨界値以下である場合には、図15(c)でのように、カレンダー・アプリケーションの週単位イメージ34が表示される。また、カレンダーアイコン30の領域サイズが、第3臨界値以上である場合には、図15(d)でのように、カレンダー・アプリケーションの月単位イメージ36が表示される。また、カレンダーアイコン30の領域サイズが拡大されるにつれて、カレンダー・アプリケーションの日単位、週単位及び日単位のイメージは、漸次拡大されて表示される。
図16は、本発明の一実施形態による、オブジェクトに対応するアプリケーションが動画アプリケーションである場合、オブジェクトが拡大されるにつれて、動画のプレビュー映像及び動画の再生映像が表示される一例を図示した図面である。
図16を参照すれば、動画アイコン40が段階的に拡大されるにつれて、動画アイコン40の領域に、動画のプレビュー映像42、及び動画の再生映像44が段階的にディスプレイされる。具体的には、動画アイコン40の領域サイズが、第1臨界値以上であって第2臨界値以下である場合には、図16(b)でのように、動画のプレビュー映像42がディスプレイされる。また、動画アイコン40の領域サイズが、第2臨界値以上である場合には、図16(c)でのように、動画の再生映像44がディスプレイされる。また、動画の再生映像44には、動画の再生を制御することができる複数のアイコンが含まれる。
図17は、本発明の一実施形態による、オブジェクトに対応するアプリケーションが音楽再生アプリケーションである場合、オブジェクトが拡大されるにつれて、アプリケーションの実行結果が段階的に変換されて表示される一例を図示した図面である。
図17を参照すれば、音楽アイコン50が段階的に拡大されるにつれて、音楽アイコン50の領域に、当該音楽に係わる要約情報52、及び当該音楽の再生を制御するための画面54が段階的にディスプレイされる。具体的には、音楽アイコン50の領域サイズが、第1臨界値以上であって第2臨界値以下である場合には、図17(b)でのように、音楽に係わる要約情報52がディスプレイされる。また、これと共に、当該音楽についてのプレリスニング・サウンドがデバイスに出力される。
また、音楽アイコン50の領域サイズが、第2臨界値以上である場合には、図17(c)でのように、音楽の再生を制御するための画面54がディスプレイされる。また、これと共に、当該音楽の再生サウンドがデバイスに出力される。
図18は、本発明の一実施形態による、オブジェクトに対応するアプリケーションがインターネット・ブラウザ実行アプリケーションである場合、オブジェクトが拡大されるにつれて、アプリケーションの実行結果が段階的に変換されて表示される一例を図示した図面である。
図18を参照すれば、インターネット・ブラウザアイコン60が段階的に拡大されるにつれて、インターネット・ブラウザアイコン60の領域に、モバイル用ブラウザ62及びPC(personal computer)用ブラウザ64が段階的にディスプレイされる。具体的には、インターネット・ブラウザアイコン60の領域サイズが、第1臨界値以上であって第2臨界値以下である場合には、図18(b)でのように、モバイル用ブラウザ62がディスプレイされる。
また、インターネット・ブラウザアイコン60の領域サイズが、第2臨界値以上である場合には、図18(c)でのように、PC用ブラウザ64がディスプレイされる。
図19は、本発明の一実施形態による、オブジェクトが拡大されるにつれて、ディスプレイ上のオブジェクトにおいて、拡大されたオブジェクト以外の他のオブジェクトの位置及び配列が調節される一例を図示した図面である。
図19を参照すれば、オブジェクト3000が拡大されれば、ディスプレイ上のオブジェクトにおいて、拡大されたオブジェクト3000以外の他のオブジェクトは、拡大されたオブジェクト3000と重ならないように、位置及び配列が変更される。
図20は、本発明の一実施形態による、オブジェクトが拡大されるにつれて、拡大されたオブジェクトの透明度が調節されて表示される一例を図示した図面である。
図20を参照すれば、オブジェクトが拡大されれば、拡大されたオブジェクト3010が、他のオブジェクト上にオーバーラップされて表示される。また、拡大されたオブジェクト3010の透明度が調節されて半透明に表示される。
図21は、本発明の一実施形態による、拡大されたオブジェクトに含まれたオブジェクトが、ユーザ入力に基づいて、拡大されて表示される一例を図示した図面である。
図21を参照すれば、デバイス画面上の第1オブジェクトが拡大されるにつれて、拡大された第1オブジェクトの領域には、第1オブジェクトと係わる複数のオブジェクトが表示される。その後、所定のユーザ入力によって、拡大された第1オブジェクトが固定される。その後、他の複数のオブジェクトのうち、第2オブジェクトがタッチされてドラッグされることにより、第2オブジェクトが拡大される。
例えば、デバイス、他のデバイスまたはサーバに保存されたファイルを見るためのアイコン3030が拡大されるにつれて、デバイス、他のデバイスまたはサーバに保存されたファイルが、拡大されたアイコン3030の領域に表示され、表示されたファイルのうち1つのファイル3040が拡大されるにつれて、拡大されたファイル3040の領域には、ファイル3040についての付加情報、またはファイル3040の実行結果が表示される。
図22は、本発明の一実施形態による、メッセージお知らせ窓が拡大されるにつれて、メッセージについての情報が表示される一例を図示した図面である。
図22を参照すれば、デバイスがメッセージを受信した場合、デバイスの画面には、メッセージお知らせ窓3050が表示される。このとき、メッセージお知らせ窓3050には、受信されたメッセージについての要約情報が表示される。例えば、「OOOのメッセージ到着」という文言が、メッセージお知らせ窓3050に表示される。
その後、ユーザ入力に基づいて、メッセージお知らせ窓3050が拡大されれば、拡大されたメッセージお知らせ窓3050には、メッセージの詳細情報が表示される。例えば、メッセージのタイトル及びメッセージの内容が、拡大されたメッセージお知らせ窓3050に表示される。
また、メッセージお知らせ窓3050は、デバイスのロッキング(locking)を解除するボタンが表示された画面、及び背景画面のうち少なくとも一つに表示されるが、それらに制限されるものではない。
図23は、本発明の一実施形態による、デバイスの画面上に表示された複数のウィジェット(widget)窓のうち、一部が拡大されて表示される一例を図示した図面である。
図23を参照すれば、デバイスの画面上には、複数のウィジェット窓が表示され、複数のウィジェット窓のうち、1つのウィジェット窓3060が拡大される。また、拡大されたウィジェット窓3060は、他のウィジェット窓上にオーバーラップされて表示され、拡大されたウィジェット窓3060の領域には、ウィジェット窓に対応するコンテンツの詳細情報が表示される。
図24は、本発明の一実施形態による、デバイスの画面上で、複数の拡大されたオブジェクトの領域が固定された一例を図示した図面である。
図24を参照すれば、デバイスの画面上には、天気についての第1オブジェクト3070が拡大され、拡大された第1オブジェクト3070の領域が固定され、固定された第1オブジェクト3070の領域には、天気情報が表示される。また、デバイスの画面上には、カレンダーについての第2オブジェクト3080が拡大され、拡大された第2オブジェクト3080の領域が固定され、固定された第2オブジェクト3080の領域には、カレンダー情報が表示される。また、拡大された第1オブジェクト3070の領域及び拡大された第2オブジェクト3080の領域は、デバイスの画面に共に表示される。
図25は、本発明の一実施形態による、音楽ファイルアイコンが拡大されるにつれて、デバイスが音楽ファイルをサーバから受信し、拡大された音楽ファイルアイコンの領域に、音楽ファイルについての情報が表示される一例を図示した図面である。
図25を参照すれば、音楽ファイルアイコンが、第1臨界値以上拡大されるにつれて、拡大された音楽ファイルアイコンの領域には、音楽ファイルについての付加情報が表示される。このとき、デバイスは、音楽ファイルについての付加情報は、サーバから受信することができるが、これに制限されるものではない。
その後、音楽ファイルアイコンが、第2臨界値以上拡大されれば、デバイスは、音楽ファイルをサーバからダウンロードする。このとき、拡大された音楽ファイルアイコンの領域には、音楽ファイルのダウンロード程度を示す情報が表示される。
その後、ダウンロードが完了すれば、拡大された音楽ファイルのアイコンの領域には、音楽ファイルの制御画面が表示される。
図26は、本発明の一実施形態による、デバイスが、動画ファイルを再生することができない場合、拡大された動画ファイルのアイコンの領域に、動画ファイルについての情報が表示される一例を図示した図面である。
図26を参照すれば、動画ファイルアイコンが、第1臨界値以上拡大されるにつれて、拡大された動画ファイルアイコンの領域には、動画ファイルについての付加情報が表示される。このとき、デバイスは、動画ファイルについての付加情報は、サーバから受信することができるが、これに制限されるものではない。
その後、動画ファイルアイコンが、第2臨界値以上拡大されれば、デバイスは、動画ファイルをサーバからダウンロードする。このとき、拡大された動画ファイルアイコンの領域には、動画ファイルのダウンロード程度を示す情報が表示される。
その後、デバイスがダウンロードされた動画を再生することができない場合、動画再生が可能ではないということを知らせるためのお知らせ情報が、拡大された動画ファイルのアイコンの領域に表示される。また、動画を再生させるための情報を受信することができるように、別途のリンク情報が表示される。例えば、デバイスに動画を再生するコーデックまたはアプリケーションが設置されていない場合、コーデックまたはアプリケーションをダウンロードすることができるリンク情報が画面に表示される。
以下では、図27及び図28を参照し、本発明の一実施形態による、オブジェクトに係わるユーザ入力に基づいて、オブジェクトに係わるお知らせメッセージが表示される一例について説明する。図27及び図28でオブジェクトは、アプリケーションのアイコンであってもよい。
図27は、本発明の一実施形態による、オブジェクトに係わるユーザ入力が受信されることにより、スピーチバブル状のメッセージ表示窓を介して、オブジェクトに係わるお知らせメッセージが表示される一例を図示した図面である。
図27(a)を参照すれば、アプリケーションに係わるお知らせメッセージが受信されれば、アプリケーションのアイコン270上には、お知らせメッセージの個数を示すアイコン272が、アイコン270上にオーバーラップされる。アプリケーションに係わるお知らせメッセージは、アプリケーションについてのプッシュ・メッセージであり、例えば、アプリケーションのアップデートを知らせるためのメッセージ、アプリケーションについての広告メッセージを含んでもよいが、それらに制限されるものではない。
また、ユーザがアプリケーションのアイコン270をタッチし、アイコン270の下側にドラッグすれば、図27(b)及び図27(c)でのように、アプリケーションのアイコン270の周辺に、メッセージ表示窓276,280が表示される。例えば、ユーザが、アプリケーションのアイコン270を既設定の時間以上タッチしてドラッグすることにより、メッセージ表示窓276,280が表示されるが、それに制限されるものではない。また、メッセージ表示窓276,280は、スピーチバブル状でもあり、お知らせメッセージ表示窓276,280の一部分が、アイコン270の一部分上にオーバーラップされる。
また、メッセージ表示窓276,280には、オブジェクトに関連したお知らせメッセージが表示される。もしオブジェクトに係わるお知らせメッセージが複数である場合、既設定の順に、お知らせメッセージが表示される。例えば、複数のお知らせメッセージは、受信された順序によって表示される。また、例えば、複数のお知らせメッセージのうち、アップデートを知らせるためのお知らせメッセージが先に表示され、広告メッセージが後に表示される。しかし、それらに制限されるものではない。
また、図27(b)を参照すれば、アイコン270がタッチされてドラッグされることにより、アイコン270が表示された領域のうち一部分に、アイコン270の一部分278だけが表示される。その場合、アイコン270のイメージが、アイコン270が表示された領域から下側にスライディングされながら、アイコン270の一部分278だけが表示される。
また、図27(c)を参照すれば、アイコン270がタッチされてドラッグされることにより、アイコン270は、書類ファイルが開かれているように表示されるが、それに制限されるものではない。
図28は、本発明の一実施形態による、オブジェクトに係わるユーザ入力に基づいて、オブジェクトの下部に表示されるメッセージ表示窓を介して、オブジェクトに係わるお知らせメッセージが表示される一例を図示した図面である。
図28(a)を参照すれば、アプリケーションに係わるお知らせメッセージが受信されれば、アプリケーションのアイコン270上には、お知らせメッセージの個数を示すアイコン272が、アイコン270上にオーバーラップされる。アプリケーションに係わるお知らせメッセージは、アプリケーションについてのプッシュ・メッセージであり、例えば、アプリケーションのアップデートを知らせるためのメッセージ、アプリケーションについての広告メッセージを含んでもよいが、それらに制限されるものではない。
また、ユーザがアプリケーションのアイコン270をタッチし、アイコン270の下側にドラッグすれば、図28(b)及び図28(c)でのように、アプリケーションのアイコン270の下に、メッセージ表示窓282,284が表示される。例えば、ユーザがアプリケーションのアイコン270を、既設定の時間以上タッチしてドラッグすることにより、メッセージ表示窓282,284が表示されるが、それに制限されるものではない。
また、図28(b)を参照すれば、アイコン270がタッチされてドラッグされることにより、アイコン270の下側に、メッセージ表示窓282がスライディングされながら示される。
また、図28(c)を参照すれば、アイコン270がタッチされてドラッグされることにより、アイコン270の下側に、メッセージ表示窓284が、折り畳まれた紙が開かれるように表示される。また、メッセージ表示窓284は、断続的に拡張されて表示される。例えば、メッセージ表示窓284は、複数回折り畳まれた紙が段階的に開かれるように表示される。しかし、それに制限されるものではない。
図29は、本発明の一実施形態による、ディスプレイ上のオブジェクトを実行するデバイスの構造を示した図面である。
移動通信部1001は、3G/4Gのようなセルラネットワークを介して、基地局とのコール(call)設定、データ通信などを遂行する。サブ通信部1002は、ブルートゥースやNFC(near field communication)のような近距離通信のための機能を遂行する。放送部1003は、DMB(digital multimedia broadcasting)放送信号を受信する。
カメラ部1004は、写真や動画を撮影するためのレンズ及び光学素子を含む。
センサ部1005は、デバイスの動きを感知する重力センサ、光の明度を感知する照度センサ、人の近接度を感知する近接センサ、人の動きを感知するモーションセンサなどを含んでもよい。
GPS(global positioning system)受信部1006は、人工衛星からGPS信号を受信する。かようなGPS信号を利用して、多様なサービスがユーザに提供される。
入出力部1010は、外部機器や人とのインターフェースを提供し、ボタン1011、マイク1012、スピーカ1013、振動モータ1014、コネクタ1015、キーパッド1016を含む。
タッチスクリーン1018は、ユーザのタッチ入力を受信する。また、タッチスクリーン・コントローラ1017は、タッチスクリーン1018を介して入力されたタッチ入力を制御部1050に伝達する。電源供給部1019は、デバイスに必要な電力を供給するために、バッテリまたは外部電源ソースと連結される。
制御部1050は、メモリ1060に保存されたプログラムを実行することにより、本発明によって、ディスプレイ上のオブジェクトを実行し、実行結果を画面に表示する。
メモリ1060に保存されたプログラムは、その機能によって、複数個のモジュールに分類されるが、移動通信モジュール1061、Wi−Fiモジュール1062、ブルートゥース・モジュール1063、DMBモジュール1062、カメラ・モジュール1065、センサ・モジュール1066、GPSモジュール1067、動画再生モジュール1068、オーディオ再生モジュール1069、電源モジュール1070、タッチスクリーン・モジュール1071、UIモジュール1072、アプリケーション・モジュール1073などに分類される。
例えば、移動通信モジュール1061、Wi−Fiモジュール1062、ブルートゥース・モジュール1063は、移動通信部1001、サブ通信部1002及び放送受信部1003のうち少なくとも一つを利用して、他のデバイスまたはサーバから、オブジェクトについての情報を受信することができる。
また、例えば、タッチスクリーン・モジュール1070は、デバイスの画面を介したユーザのタッチ入力を受信することができる。
また、例えば、アプリケーション・モジュール1073は、ユーザのタッチ入力の種類を判断し、ユーザのタッチ入力によって、オブジェクトを拡大させるか否かを決定することができる。また、例えば、アプリケーション・モジュール1073は、拡大されたオブジェクトの領域サイズが、所定の臨界値以上であるか否かを判断することができ、拡大されたオブジェクトの領域に、いかなる情報を表示するかを決定することができる。また、例えば、アプリケーション・モジュール1073は、オブジェクトの領域が拡大されるにつれて、ディスプレイ画面を、いかように処理するかを決定することができる。
また、例えば、アプリケーション・モジュール1073は、ユーザのタッチ入力に基づいて、オブジェクトに係わるお知らせメッセージを、いかように表示するかを決定することができる。
また、例えば、UIモジュール1072は、アプリケーション・モジュール1073の決定に基づいて、デバイスの画面上に、オブジェクトを拡大させて表示し、拡大されたオブジェクトの領域に、所定の情報を表示することができる。また、例えば、UIモジュール1072は、アプリケーション・モジュール1073の決定に基づいて、拡大されたオブジェクトの領域を固定させて表示したり、あるいは拡大されたオブジェクトを縮小させることができる。
また、例えば、UIモジュール1072は、アプリケーション・モジュール1073の決定に基づいて、オブジェクトと別途に表示されるメッセージ表示窓に、オブジェクトと係わるお知らせメッセージを表示することができる。
各モジュールの機能は、その名称から、当業者が直観的に推論することができ、それぞれのモジュールは、図1ないし図28で説明した一つ以上の機能を遂行するための命令語の集合(combination)に対応することができる。
命令語は、別個のソフトウェア・プログラム、手続きまたはモジュールで実行される必要はない。メモリ1060は、さらなる命令語、またはさらに少ない命令語を含んでもよい。さらに、デバイスの多様な機能が、一つ以上の信号プロセッシング及び/またはアプリケーション特定集積回路を含むハードウェア及び/またはソフトウェアで実行される。
本明細書で説明した発明の実施形態及び全ての機能動作は、デジタル電子回路内、または本明細書で開示された構造、及びそれらの均等構造を含むコンピュータ・ソフトウェア、ファームウエアまたはハードウェアの内部、またはそれらの1以上の組み合わせの内部で実施される。
コンピュータ可読媒体は、コンピュータによってアクセスされる任意の可用媒体であり、揮発性及び不揮発性の媒体、分離型及び非分離型の媒体をいずれも含む。また、コンピュータ可読媒体は、コンピュータの記録媒体及び通信媒体をいずれも含んでもよい。コンピュータ記録媒体は、コンピュータ可読命令語、データ構造、プログラム・モジュール、またはその他のデータのような情報保存のための任意の方法、または技術で具現された揮発性及び不揮発性、分離型及び非分離型の媒体をいずれも含む。通信媒体は、典型的に、コンピュータ可読命令語、データ構造、プログラムモジュール、または搬送波のような変調されたデータ信号のその他データ、またはその他の送信メカニズムを含み、任意の情報伝達媒体を含む。
前述の本発明の説明は、例示のためのものであり、本発明が属する技術分野の当業者であるならば、本発明の技術的思想や必須な特徴を変更せずにも、他の具体的な形態に容易に変形が可能であるということを理解することができるであろう。従って、以上で記述した実施形態は、全ての面で例示的なものであり、限定的ではないということを理解しなければならない。
本発明の範囲は、前記詳細な説明よりも、特許請求の範囲によって示され、特許請求の範囲の意味及び範囲、そしてその均等概念から導き出される全ての変更または変形された形態が、本発明の範囲に含まれるものであると解釈されなければならない。
本発明のディスプレイ上のオブジェクトを実行する方法及びそのデバイスは、例えば、マルチメディア機器関連の技術分野に効果的に適用可能である。
10 天気アイコン
30 カレンダー・アイコン
40 動画アイコン
50 音楽アイコン
60 ブラウザ・アイコン
270 アプリケーションのアイコン
272 メッセージ数を示すアイコン
276,280,282,284 メッセージ表示窓
1001 移動通信部
1002 サブ通信部
1003 放送受信部
1004 カメラ部
1005 センサ部
1006 GPS受信部
1010 入出力部
1011 ボタン
1012 マイク
1013 スピーカ
1014 振動モータ
1015 コネクタ
1016 キーパッド
1017 タッチスクリーン・コントローラ
1018 タッチスクリーン
1019 電源供給部
1060 メモリ
1061 移動通信モジュール
1062 Wi−Fiモジュール
1063 ブルートゥース・モジュール
1064 DMBモジュール
1065 カメラ・モジュール
1066 センサ・モジュール
1067 GPSモジュール
1068 動画再生モジュール
1069 オーディオ再生モジュール
1070 電源モジュール
1071 タッチスクリーン・モジュール
1072 UIモジュール
1073 アプリケーション・モジュール
3000 オブジェクト
3010 拡大されたオブジェクト
3030 拡大されたアイコン
3040 1つのファイル
3050 メッセージお知らせ窓
3060 ウィジェット窓
3070 第1オブジェクト
3080 第2オブジェクト

Claims (15)

  1. ディスプレイ上に表示されたオブジェクトに係わるユーザ入力を受信する段階と、
    前記オブジェクトを漸次拡大させて表示する段階と、
    前記オブジェクトが拡大されるにつれて、前記オブジェクトに対応するアプリケーションを実行する段階と、を含むアプリケーション実行方法。
  2. 前記拡大されたオブジェクトの領域に、前記オブジェクトに対応するアプリケーションの実行結果を表示する段階をさらに含むことを特徴とする請求項1に記載のアプリケーション実行方法。
  3. 前記拡大されたオブジェクトの大きさを確認する段階をさらに含み、
    前記アプリケーション実行結果を表示する段階は、前記確認された大きさが、第1臨界値以上である場合、前記拡大されたオブジェクトの領域に、前記オブジェクトに対応するアプリケーションの実行結果を表示することを特徴とする請求項2に記載のアプリケーション実行方法。
  4. 前記アプリケーションの実行結果を表示する段階は、前記オブジェクトが拡大されるにつれて、前記アプリケーション実行結果を漸次拡大させて表示することを特徴とする請求項2に記載のアプリケーション実行方法。
  5. 前記アプリケーション実行結果を表示する段階は、前記アプリケーション実行画面の一部を表示し、前記オブジェクトの領域が拡大されるにつれて、前記アプリケーションの実行画面の残り部分を表示することを特徴とする請求項2に記載のアプリケーション実行方法。
  6. 前記アプリケーション実行結果を表示する段階は、前記確認された大きさが、前記第1臨界値以上であって第2臨界値以下である場合、前記アプリケーションの実行結果についての要約情報を表示することを特徴とする請求項2に記載のアプリケーション実行方法。
  7. 前記アプリケーション実行結果を表示する段階は、前記確認された大きさが、前記第2臨界値以上である場合、前記アプリケーションの実行結果についての詳細情報を表示することを特徴とする請求項6に記載のアプリケーション実行方法。
  8. 前記アプリケーションの実行結果が表示されることにより、既設定のパターンの振動を発生させる段階をさらに含むことを特徴とする請求項2に記載のアプリケーション実行方法。
  9. 前記ユーザ入力は、前記オブジェクトをタッチしてドラッグする入力であることを特徴とする請求項1に記載のアプリケーション実行方法。
  10. 前記ドラッグ後、既設定の時間以内、前記タッチがドロップされることにより、前記拡大されたオブジェクトを、前記タッチ以前の大きさに縮小して表示する段階をさらに含むことを特徴とする請求項9に記載のアプリケーション実行方法。
  11. 前記ドラッグ後、前記タッチが、前記オブジェクトが拡大される以前の方向にフリックされることにより、前記拡大されたオブジェクトを、前記タッチ以前の大きさに縮小して表示する段階をさらに含むことを特徴とする請求項9に記載のアプリケーション実行方法。
  12. 前記ドラッグ後、既設定の時間以上、前記タッチがホールドされることにより、前記拡大されたオブジェクトを固定させて表示する段階をさらに含むことを特徴とする請求項9に記載のアプリケーション実行方法。
  13. 前記タッチによって、前記ディスプレイに加えられる圧力を感知する段階と、
    前記ドラッグ後、前記タッチによって、既設定の強度以上の圧力が、前記ディスプレイに加えられることにより、前記拡大されたオブジェクトを固定させて表示する段階と、をさらに含むことを特徴とする請求項9に記載のアプリケーション実行方法。
  14. 少なくとも1つのプログラムが保存されるメモリと、
    前記少なくとも1つのプログラムを実行することにより、ディスプレイ上のオブジェクトを実行するプロセッサと、を含み、
    前記少なくとも1つのプログラムは、
    ディスプレイ上に表示されたオブジェクトに係わるユーザ入力を受信する段階と、
    前記オブジェクトを漸次拡大させて表示する段階と、
    前記オブジェクトが拡大されるにつれて、前記オブジェクトに対応するアプリケーションを実行する段階と、を実行する命令語を含むことを特徴とする携帯端末装置。
  15. 前記少なくとも1つのプログラムは、
    前記拡大されたオブジェクトの領域に、前記オブジェクトに対応するアプリケーションの実行結果を表示する段階を実行する命令語をさらに含むことを特徴とする請求項14に記載の携帯端末装置。
JP2013079341A 2012-04-06 2013-04-05 ディスプレイ上のオブジェクトを実行する方法及びそのデバイス Active JP6286134B2 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR20120036245 2012-04-06
KR10-2012-0036245 2012-04-06
KR1020130031704A KR102072732B1 (ko) 2012-04-06 2013-03-25 디스플레이 상의 오브젝트를 실행하는 방법 및 디바이스
KR10-2013-0031704 2013-03-25

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2018018067A Division JP6550484B2 (ja) 2012-04-06 2018-02-05 ディスプレイ上のオブジェクトを実行する方法及びそのデバイス

Publications (2)

Publication Number Publication Date
JP2013218689A true JP2013218689A (ja) 2013-10-24
JP6286134B2 JP6286134B2 (ja) 2018-02-28

Family

ID=48082958

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013079341A Active JP6286134B2 (ja) 2012-04-06 2013-04-05 ディスプレイ上のオブジェクトを実行する方法及びそのデバイス

Country Status (5)

Country Link
EP (2) EP2648087A3 (ja)
JP (1) JP6286134B2 (ja)
CN (4) CN108052275B (ja)
AU (1) AU2013203015B2 (ja)
WO (1) WO2013151322A1 (ja)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014142791A (ja) * 2013-01-23 2014-08-07 Kddi Corp 端末装置及び表示プログラム
JP2016076203A (ja) * 2014-10-02 2016-05-12 エルジー エレクトロニクス インコーポレイティド 移動端末機及びその制御方法
JP2016157346A (ja) * 2015-02-25 2016-09-01 京セラ株式会社 電子機器、制御方法、及び制御プログラム
JP2017501496A (ja) * 2013-12-20 2017-01-12 華為技術有限公司Huawei Technologies Co.,Ltd. フォルダ内のファイルを開くための方法および端末
JP2018067018A (ja) * 2018-01-22 2018-04-26 株式会社リコー 電子黒板、画像処理方法、画像処理プログラム、及び画像処理システム
JP2019049973A (ja) * 2015-08-10 2019-03-28 アップル インコーポレイテッドApple Inc. 視覚フィードバック及び/又は触覚フィードバックを用いてユーザインターフェースオブジェクトを操作するためのデバイス、方法及びグラフィカルユーザインターフェース
JP2019533234A (ja) * 2016-11-24 2019-11-14 株式会社 ハイディープHiDeep Inc. ユーザインタフェース提供のためのタッチ入力方法及び装置
WO2019225151A1 (ja) * 2018-05-23 2019-11-28 株式会社デンソー 電子機器

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10139990B2 (en) 2014-01-13 2018-11-27 Lg Electronics Inc. Display apparatus for content from multiple users
KR102326200B1 (ko) * 2014-08-29 2021-11-15 삼성전자 주식회사 전자 장치 및 전자 장치의 알림 제공 방법
CN104270514A (zh) * 2014-09-22 2015-01-07 北京金山安全软件有限公司 信息的展现方法、装置和移动终端
CN105808128A (zh) * 2014-12-30 2016-07-27 深圳富泰宏精密工业有限公司 信息查看系统及方法
US10459887B1 (en) * 2015-05-12 2019-10-29 Apple Inc. Predictive application pre-launch
KR20170088229A (ko) * 2016-01-22 2017-08-01 삼성전자주식회사 사용자단말기 및 그 제어방법
JP6705206B2 (ja) * 2016-02-25 2020-06-03 セイコーエプソン株式会社 電子機器の制御装置および電子機器の制御プログラム
CN110362250B (zh) * 2018-04-09 2021-03-23 杭州海康威视数字技术股份有限公司 一种图像局部放大的方法、装置和显示设备
CN111602107B (zh) * 2018-04-19 2022-02-11 华为技术有限公司 一种应用退出时的显示方法及终端
US20220030299A1 (en) * 2020-07-23 2022-01-27 Rovi Guides, Inc. Systems and methods for simultaneous content presentation
CN112148181B (zh) * 2020-09-30 2022-08-30 维沃移动通信有限公司 菜单显示方法、装置、电子设备及存储介质
KR20220064024A (ko) * 2020-11-11 2022-05-18 삼성전자주식회사 표시 영역이 가변되는 디스플레이를 포함하는 전자 장치 및 앱 아이콘을 이용하여 화면 비율을 가변적으로 운용하는 방법
CN115268735A (zh) * 2021-04-30 2022-11-01 华为技术有限公司 显示方法及其设备

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11345233A (ja) * 1998-04-02 1999-12-14 Sony Corp 文書処理方法および装置ならびに記録媒体
JP2001069223A (ja) * 1999-08-27 2001-03-16 Matsushita Electric Ind Co Ltd 通信装置
JP2002207562A (ja) * 2001-01-05 2002-07-26 Sony Corp 情報処理装置および方法、並びに記録媒体
JP2006085724A (ja) * 1999-02-02 2006-03-30 Casio Comput Co Ltd ウインドウ表示制御装置およびそのプログラム記録媒体
JP2006185195A (ja) * 2004-12-27 2006-07-13 Toshiba Corp グラフィカルユーザインタフェース装置および方法
JP2010217938A (ja) * 2009-03-13 2010-09-30 Nikon Corp データ通信システム
JP2010239206A (ja) * 2009-03-30 2010-10-21 Sony Corp 電子機器、表示制御方法およびプログラム
JP2011053832A (ja) * 2009-08-31 2011-03-17 Sony Corp 情報処理装置、情報処理方法およびプログラム
JP2011154613A (ja) * 2010-01-28 2011-08-11 Mitsubishi Electric Corp プログラマブル表示器及びその表示方法
US20110279388A1 (en) * 2010-05-14 2011-11-17 Jung Jongcheol Mobile terminal and operating method thereof
JP2012048279A (ja) * 2010-08-24 2012-03-08 Panasonic Corp 入力装置
US20120071208A1 (en) * 2010-09-17 2012-03-22 Lg Electronics Inc. Mobile terminal and control method thereof

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005038414A (ja) * 2003-06-30 2005-02-10 Fuji Photo Film Co Ltd ファイル管理プログラム、ファイル管理方法、ファイル管理装置、撮像装置及び記録媒体
KR20070120368A (ko) * 2006-06-19 2007-12-24 엘지전자 주식회사 사용자인터페이스 기반의 메뉴 아이콘 제어방법 및 장치
CN101236477A (zh) * 2008-02-19 2008-08-06 倚天资讯股份有限公司 显示窗口变化过程的方法及其电子装置
JP4533943B2 (ja) * 2008-04-28 2010-09-01 株式会社東芝 情報処理装置、表示制御方法およびプログラム
US9030418B2 (en) * 2008-06-24 2015-05-12 Lg Electronics Inc. Mobile terminal capable of sensing proximity touch
US20100031202A1 (en) * 2008-08-04 2010-02-04 Microsoft Corporation User-defined gesture set for surface computing
KR101569176B1 (ko) * 2008-10-30 2015-11-20 삼성전자주식회사 오브젝트 실행 방법 및 장치
KR101743713B1 (ko) * 2010-09-17 2017-06-05 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
US20120069055A1 (en) * 2010-09-22 2012-03-22 Nikon Corporation Image display apparatus
KR101650376B1 (ko) * 2010-09-30 2016-09-06 삼성전자주식회사 사용자 단말 장치 및 그 서비스 제공 방법
CN102110148B (zh) * 2011-02-17 2014-09-17 宇龙计算机通信科技(深圳)有限公司 文件夹内容的展现方法和终端
KR101864333B1 (ko) * 2011-03-21 2018-07-05 삼성전자 주식회사 아이콘 변경 기능 지원 방법 및 이를 지원하는 휴대 단말기

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11345233A (ja) * 1998-04-02 1999-12-14 Sony Corp 文書処理方法および装置ならびに記録媒体
JP2006085724A (ja) * 1999-02-02 2006-03-30 Casio Comput Co Ltd ウインドウ表示制御装置およびそのプログラム記録媒体
JP2001069223A (ja) * 1999-08-27 2001-03-16 Matsushita Electric Ind Co Ltd 通信装置
JP2002207562A (ja) * 2001-01-05 2002-07-26 Sony Corp 情報処理装置および方法、並びに記録媒体
JP2006185195A (ja) * 2004-12-27 2006-07-13 Toshiba Corp グラフィカルユーザインタフェース装置および方法
JP2010217938A (ja) * 2009-03-13 2010-09-30 Nikon Corp データ通信システム
JP2010239206A (ja) * 2009-03-30 2010-10-21 Sony Corp 電子機器、表示制御方法およびプログラム
JP2011053832A (ja) * 2009-08-31 2011-03-17 Sony Corp 情報処理装置、情報処理方法およびプログラム
JP2011154613A (ja) * 2010-01-28 2011-08-11 Mitsubishi Electric Corp プログラマブル表示器及びその表示方法
US20110279388A1 (en) * 2010-05-14 2011-11-17 Jung Jongcheol Mobile terminal and operating method thereof
JP2012048279A (ja) * 2010-08-24 2012-03-08 Panasonic Corp 入力装置
US20120071208A1 (en) * 2010-09-17 2012-03-22 Lg Electronics Inc. Mobile terminal and control method thereof

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014142791A (ja) * 2013-01-23 2014-08-07 Kddi Corp 端末装置及び表示プログラム
JP2017501496A (ja) * 2013-12-20 2017-01-12 華為技術有限公司Huawei Technologies Co.,Ltd. フォルダ内のファイルを開くための方法および端末
US10430020B2 (en) 2013-12-20 2019-10-01 Huawei Technologies Co., Ltd. Method for opening file in folder and terminal
JP2016076203A (ja) * 2014-10-02 2016-05-12 エルジー エレクトロニクス インコーポレイティド 移動端末機及びその制御方法
JP2016157346A (ja) * 2015-02-25 2016-09-01 京セラ株式会社 電子機器、制御方法、及び制御プログラム
JP2019049973A (ja) * 2015-08-10 2019-03-28 アップル インコーポレイテッドApple Inc. 視覚フィードバック及び/又は触覚フィードバックを用いてユーザインターフェースオブジェクトを操作するためのデバイス、方法及びグラフィカルユーザインターフェース
JP2019533234A (ja) * 2016-11-24 2019-11-14 株式会社 ハイディープHiDeep Inc. ユーザインタフェース提供のためのタッチ入力方法及び装置
JP2018067018A (ja) * 2018-01-22 2018-04-26 株式会社リコー 電子黒板、画像処理方法、画像処理プログラム、及び画像処理システム
WO2019225151A1 (ja) * 2018-05-23 2019-11-28 株式会社デンソー 電子機器
JP2019204272A (ja) * 2018-05-23 2019-11-28 株式会社デンソー 電子機器
US11276377B2 (en) 2018-05-23 2022-03-15 Denso Corporation Electronic apparatus

Also Published As

Publication number Publication date
EP3770745A1 (en) 2021-01-27
JP6286134B2 (ja) 2018-02-28
CN108052273B (zh) 2021-02-02
EP2648087A2 (en) 2013-10-09
CN103365592A (zh) 2013-10-23
RU2018141399A (ru) 2020-05-26
EP3770745B1 (en) 2022-12-21
AU2013203015B2 (en) 2015-09-24
WO2013151322A1 (en) 2013-10-10
AU2013203015A1 (en) 2013-10-24
CN108052274A (zh) 2018-05-18
CN108052273A (zh) 2018-05-18
CN108052275A (zh) 2018-05-18
CN108052274B (zh) 2021-02-02
CN103365592B (zh) 2018-02-02
EP2648087A3 (en) 2017-08-23
RU2018141399A3 (ja) 2022-02-25
CN108052275B (zh) 2021-02-02

Similar Documents

Publication Publication Date Title
KR102104501B1 (ko) 디스플레이 상의 오브젝트를 실행하는 방법 및 디바이스
JP6286134B2 (ja) ディスプレイ上のオブジェクトを実行する方法及びそのデバイス
US10649639B2 (en) Method and device for executing object on display
AU2018267682B2 (en) Method and device for executing object on display
RU2791980C2 (ru) Способ и устройство для исполнения объекта на дисплее

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20141226

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160324

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170117

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170206

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170508

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170814

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171114

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180105

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180205

R150 Certificate of patent or registration of utility model

Ref document number: 6286134

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250