CN105453017B - 提供图形用户界面的方法和装置 - Google Patents

提供图形用户界面的方法和装置 Download PDF

Info

Publication number
CN105453017B
CN105453017B CN201480042000.6A CN201480042000A CN105453017B CN 105453017 B CN105453017 B CN 105453017B CN 201480042000 A CN201480042000 A CN 201480042000A CN 105453017 B CN105453017 B CN 105453017B
Authority
CN
China
Prior art keywords
application
gui
image
list
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201480042000.6A
Other languages
English (en)
Other versions
CN105453017A (zh
Inventor
郑湖永
金徒显
金智勋
李东昌
李东爀
李载雄
张原硕
黄星泽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority to CN201910202043.0A priority Critical patent/CN110069203B/zh
Publication of CN105453017A publication Critical patent/CN105453017A/zh
Application granted granted Critical
Publication of CN105453017B publication Critical patent/CN105453017B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/17—Image acquisition using hand-held instruments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/445—Program loading or initiating

Abstract

提供了一种提供图形用户界面(GUI)的方法。所述方法包括：接收要针对GUI使用的图像；以及从所述图像选择要针对GUI使用的一个或更多个对象区域；设置与所选对象区域相对应的GUI图标；以及在终端的显示器上输出所设置的GUI，作为用于执行至少一个应用的主页屏幕。

Description

提供图形用户界面的方法和装置
技术领域
本公开涉及图形用户界面。更具体地，本公开设计一种用于产生和使用图形用户界面的方法和装置。
背景技术
近来，由终端装置(具体地，移动终端装置)提供的各种服务和附加功能在不断扩展。为了提高终端装置的有效价值并满足用户需求，开发了可由终端装置可执行的各种应用。
终端装置可以存储并执行由终端装置的制造商制造的并安装在该终端装置中的基础应用，以及通过互联网从销售应用的网站下载的附加应用。可以由普通开发者来开发附加应用，并将附加应用登记在销售应用的网站中。因此，任何人可以通过销售应用的网站自由地向终端装置的用户销售应用。因此，目前成千上万的应用免费地或收费地提供给终端装置。
终端装置通过使用图形用户界面(GUI)提供终端装置的用户便利性。终端装置可以使用在制造终端装置的过程期间提供的GUI，或由销售应用的网站提供的GUI封装。然而，为了修改并使用以这种方式提供的GUI，用户通过改变背景图像、在预先提供的图标图像中改变GUI中使用的图标图像、或改变图标的位置，来设置并使用该GUI。
发明内容
【技术问题】
如上所述，即使用户改变GUI，GUI仍被配置为在预先提供的背景图像或图标图像的范围内进行改变，使得在改变GUI的过程中存在许多限制。此外，由于图标图像以预定矩阵尺寸形成，用户无法将图标图像设置或布置为具有用户需要的尺寸。由于对设置GUI的限制，无法满足使用更富创造性和个性化GUI的用户要求。
以上信息仅被呈现为背景信息以帮助理解本公开。对于上述任何内容是否可作为关于本公开的现有技术没有任何判定也没有任何断言。
【技术方案】
本公开的各方面是为了至少解决上述问题和/或缺陷，并且至少提供以下描述的优势。因此，本公开的一个方面在于提供一种在对图标的尺寸或布局无任何限制的情况下配置和使用图形用户界面(GUI)的方法和装置。
本公开的另一方面在于提供一种通过由用户直接配置的GUI来改善终端装置的可用性的方法和装置。
根据本公开的一方面，提供了一种终端提供GUI的方法。所述方法包括：接收要针对GUI使用的图像；以及从所述图像选择要针对GUI使用的一个或更多个对象区域；设置与所选对象区域相对应的GUI图标；以及在终端的显示器上输出所设置的GUI，作为用于执行至少一个应用的主页屏幕。
根据本公开的另一方面，提供了一种终端装置。所述终端包括：触摸屏，显示信息并检测由用户输入的触摸输入事件；一个或更多个控制器；以及存储器，存储一个或更多个输入图像并存储一个或更多个程序，其中所述至少一个或更多个程序被配置为由所述控制器来执行，并包括如下命令：接收要针对图形用户界面(GUI)使用的图像，从所述图像选择要针对GUI使用的一个或更多个对象区域，并设置与所选对象区域相对应的GUI图标，以及在终端的显示器上输出所设置的GUI，作为用于执行至少一个应用的主页屏幕。
以下详细描述结合附图公开了本公开的示例实施例，通过以下详细描述，本领域技术人员将更清楚本公开的其他方面、优点和突出的特征。
【有利效果】
本公开的各方面具有以下效果。
首先，能够通过经由用户自由绘制的图像来配置GUI，提高用户便利性。
其次，能够通过在包括背景图像和图标图像的GUI图像上配置图标，来多样化地配置和使用GUI，而不限制图标的排列或尺寸。
第三，能够通过在显示图标的状态下直接执行书写输入或手势输入来实现GUI图像，在执行与所述图标相对应的应用时提供反映书写输入或手势输入的结果。
附图说明
根据以下结合附图的具体实施方式，本公开某些实施例的上述及其他方面、特征和优点将变得更为清楚，在附图中：
图1A是示意性示出了根据本公开实施例的终端装置的配置的框图，其中向所述终端装置应用图形用户界面(GUI)提供方法；
图1B和1C是根据本公开实施例的终端装置的正视图，其中向所述终端装置应用GUI提供方法；
图2是示出了根据本公开实施例的GUI提供方法的操作顺序的流程图；
图3示出了根据本公开实施例的基于GUI提供方法提供的GUI的示例；
图4是示出了根据本公开实施例的GUI提供方法中包括的设置GUI过程的具体顺序的流程图；
图5A、5B和5C示出了根据本公开实施例的针对GUI提供方法使用的GUI编辑程序的示例；
图6示出了根据本公开实施例的针对GUI提供方法使用的要应用于GUI的图像的示例；
图7A、7B、7C和7D示出了根据本公开实施例的GUI提供方法中选择对象区域的操作的示例；
图8A、8B和8C示出了根据本公开实施例的GUI提供方法中选择与对象区域相连的应用的操作的示例；
图9A、9B、9C和9D示出了根据本公开实施例的针对GUI提供方法使用的GUI数据的示例；
图10是示出根据本公开实施例的GUI提供方法的另一实施例的流程图；
图11示出了根据本公开实施例的针对GUI提供方法使用的用于设置小窗口部件数据区域的操作的示例；
图12是示出了根据本公开实施例的通过使用向GUI提供方法提供的GUI来执行应用的过程的另一示例的流程图；以及
图13A和13B示出了根据本公开实施例的经由向GUI提供方法提供的GUI使用进行书写输入来执行应用的操作的示例。
贯穿附图，应注意，相同的附图标记用于描述相同或相似的元件、特征和结构。
具体实施方式
提供以下参照附图的描述以帮助对由权利要求及其等同物限定的本公开的各实施例的全面理解。所述描述包括各种特定细节以辅助理解，但是仅将这些特定细节看作是示例性的。因此，本领域技术人员应认识到，在不背离本公开的范围和精神的前提下，可以对本文所述多个实施例进行各种改变和修改。另外，为了清楚和简洁起见，可以省略已知功能和结构的描述。
在以下描述以及权利要求中使用的术语和词语并不限于字面意义，而是仅由发明人用来实现对本公开的清楚和一致的理解。因此，本领域技术人员应清楚，以下对本公开多种示例实施例的描述仅用于说明目的，而不是要限制由所附权利要求及其等同物限定的本公开。
应理解，除非文中明确说明，否则单数形式的“一”、“一个”和“该”包括复数的指代对象。因此，例如对”一个组件表面”的引用包括对一个或多个这样的表面的引用。
尽管包括序号的术语(诸如，“第一”和“第二”等)可以被用于描述各种组件，然而以上术语不限制这种组件。所述术语仅用于将一个元件与其它元件进行区分。例如，在不脱离本公开的范围的情况下，第一元件可以被称为第二元件，类似地，第二元件也可以被称为第一元件。本申请所用术语仅用于描述具体实施例，而不是为了限制本公开。如文中所用，除非上下文明确指示，否则单数形式也意在包括复数形式。
图1A是示意性示出了根据本公开实施例的应用图形用户界面(GUI)提供方法的终端装置的配置的框图。
参考图1，终端装置100包括控制器110、通信模块120、输入/输出模块130、存储单元150、电源160、触摸屏171和触摸屏控制器172。
控制器110可以包括CPU 111、存储用于控制终端装置100的控制程序的只读存储器(ROM)112、以及用作用于存储从终端装置100的外部输入的信号或数据或者针对终端装置100中执行的操作的存储区的随机存取存储器(RAM)113。CPU 111、ROM 112和RAM 113可以通过内部总线彼此相互连接。控制器110可以控制通信模块120、输入/输出模块130、存储单元150、电源160、触摸屏171和触摸屏控制器172。此外，控制器110可以具有单核或多核(例如，双核、三核、或四核)。核的数目可以根据终端的特性或设计而改变。
控制器100接收图像(包括由用户绘制的绘图或用户拍摄的图片)，并将一个或更多个应用连接到图像中包括的一个或更多个对象区域，以便将所述一个或更多个对象区域配置为GUI的图标。当通过由用户进行的触摸输入选择所配置的GUI的图标时，控制器110执行与所选图标相对应的应用的操作。
通信模块120可以包括蜂窝模块、无线LAN模块和短距离通信模块中的至少一个。
根据控制器110的控制，蜂窝模块使得终端装置100能够通过移动通信经由一个天线或多个天线与外部设备相连。蜂窝模块向移动电话(未示出)、智能电话(未示出)、平板个人计算机(PC)或电话号被输入至终端装置100的其它设备(未示出)发送/从其接收用于语音呼叫、视频呼叫、短消息服务(SMS)、或多媒体消息服务(MMS)的无线信号。
无线LAN模块可以根据控制器110的控制，在安装无线接入点(AP)(未示出)的位置中接入互联网。无线LAN模块支持电气和电子工程师(IEEE)学会的无线LAN标准(IEEE802.11x)。无线LAN模块可以驱动Wi-Fi定位系统(WPS)，WPS通过使用由与无线LAN模块无线连接的无线AP提供的位置信息，来识别包括无线LAN模块的终端的位置信息。
短距离通信模块与根据控制器110的控制来无线处理与终端装置100的短距离通信的模块相对应，并可以基于蓝牙、红外数据协会(IrDA)通信、WiFi直连通信、或短距离通信方案(诸如，近场通信(NFC))来处理通信。
输入/输出模块130可以包括按钮131、扬声器132、振动电机133、键区134和触控笔135中的至少一个。
按钮131可以形成于终端装置100外壳的正面、侧面或背面，并且可以包括电源/锁定按钮(未示出)、音量按钮(未示出)、菜单按钮、主页按钮、返回按钮和搜索按钮中的至少一个。
扬声器132可以根据控制器110的控制，向终端装置100的外部输出与蜂窝模块、无线LAN模块和短距离通信模块的各种信号(例如，无线信号、广播信号等)相对应的声音。一个扬声器132或多个扬声器132可以形成在终端装置100的外壳的一个或多个适当位置上。
振动电机133可以根据控制器110的控制，将电信号转换成机械振动。一个振动电机133或多个振动电机133可以形成在终端装置100的外壳中。
扬声器132和振动电机133可以根据终端装置100的音量操作模块的设置状态来进行操作。例如，终端装置100的音量操作模式可以包括声音模式、振动模式、声音/振动模式和静音模式，且可以被设置为一个这种模式。控制器110可以基于音量操作模式的设置模式，来输出信号，所述信号命令扬声器132或振动电机133根据由终端装置100执行的功能来执行其操作。
键区134可以从用户接收键输入，以控制便终端装置100。键区134包括形成在终端装置100上的物理键区(未示出)或者在触摸屏171上显示的虚拟键区(未示出)。根据终端装置100的性能、设计或结构，可以省略在终端装置100中形成的物理键区(未示出)。
触控笔135实现为提供能够检测触摸屏171的触摸输入的信号。当触控笔135接近或接触触摸屏171时，触摸屏171可以检测由触控笔135提供的信号。
存储单元150可以根据控制器110的控制，存储输入/输出信号，或与通信模块120、输入/输出模块130和触摸屏171的操作相对应的数据。存储单元150可以存储用于控制终端装置100或控制器110的控制程序和应用。
术语“存储单元”包括控制器110内的存储单元150、ROM 112和RAM 113或者安装在终端装置100上的存储卡(未示出)(例如，SD卡或记忆棒)。存储单元可以包括非易失性存储器、易失性存储器、硬盘驱动器(HDD)或固态驱动器(SSD)。
根据控制器110的控制，电源160可以向布置于终端装置100处的一个电池或多个电池(未示出)供应电力。所述一个或多个电池(未示出)向终端装置100供应电力。此外，电源160可以通过与终端装置中包括的连接器相连的有线线缆，将从外部电源(未示出)输入的电力提供给终端装置100。此外，电源160可以向终端装置100供应通过无线充电技术从外部电源无线输入的电力。
触摸屏171可以基于终端的操作系统(OS)，向用户显示与各种服务(例如，呼叫、数据传输等)相对应的用户界面。触摸屏171可以向触摸屏控制器172发送与输入至用户界面的至少一个触摸相对应的模拟信号。触摸屏171可以接收通过用户身体(例如，包括拇指的手指)或可触摸输入装置(例如，触控笔)的至少一个触摸。
触摸屏171可以实现为电阻型、电容型、红外型或声波型。
触摸屏控制器175控制触摸屏171的输出值，使得由控制器110提供的显示数据显示在触摸屏171上。触摸屏控制器172将从触摸屏171接收的模拟信号转换为数字信号(例如，X和Y坐标)，并向控制器110发送经转换的数字信号。控制器110可以利用从触摸屏控制器172接收的数字信号来控制触摸屏171。例如，控制器110可以响应于触摸事件或悬停事件，允许选择触摸屏171上显示的快捷图标(未示出)或执行快捷图标(未示出)。此外，触摸屏控制器172可以包括在控制器110中。
图1B和1C是根据本公开实施例的应用GUI提供方法的终端装置的正视图。
参考图1B和1C，触摸屏171被布置在终端装置100前表面100a的中心。触摸屏171可以具有较大尺寸以便占据终端装置100的大部分前表面100a。图1B示出了在触摸屏171上显示锁定屏幕170a的示例。锁定屏幕170a是当开启终端装置100时显示在触摸屏171上的第一屏幕，并提供用户可以输入用户设置的安全信息(例如，口令、安全图案等)以访问终端装置的环境。因此，控制器110识别用户输入的安全信息(例如，口令、安全图案等)的有效性，然后释放锁定屏幕以便执行切换到图1C的主页屏幕170b的操作。
锁定屏幕170a可以配置为接收口令或安全图案。当用户不设置单独的安全信息时，终端装置可以被配置为通过用户的触摸输入或拖动输入切换到主页屏幕，而无需输入口令或安全图案。
主页屏幕170b可以包括若干页的不同主页屏幕，所述若干不同页的主页屏幕中的第一主页屏幕可以是首要主页屏幕。可以将用于执行频繁使用的应用的快捷图标171a、171b和171c、主菜单切换键171d、时间和天气显示在主页屏幕170b上。主菜单切换键171d在触摸屏171上显示菜单屏幕。可以在触摸屏171的上端部处形成显示终端装置100状态(例如，电池充电状态、接收信号强度、当前时间以及音量操作模式)的状态条172。
根据本公开实施例，主页屏幕170b可以包括含有连接到应用的图标的GUI，以便执行所述应用。此外，当在显示主页屏幕所包括的GUI的同时选择了包括在所述GUI中的图标时，控制器110可以控制执行相应应用。
主页按钮131a、菜单按钮131b、以及返回按钮131c可以形成在触摸屏171下方。
主页按钮131a在触摸屏171上显示首要主页屏幕。例如，当在触摸屏171上显示与首要主页屏幕或菜单屏幕不同的主页屏幕的同时触摸了主页按钮131a时，可以在触摸屏171上显示首要主页屏幕。当在触摸屏171上执行应用的同时触摸了主页按钮171a时，可以在触摸屏171上显示图1所示的首要主页屏幕。此外，主页按钮131a可以用于在触摸屏171上显示最近使用的应用或任务管理器。
菜单按钮131b提供可以在触摸屏171上使用的连接菜单。连接菜单包括小窗口部件添加菜单、背景改变菜单、搜索菜单、编辑菜单、环境设置菜单等。
返回按钮161c可以显示紧接在当前执行屏幕之前执行的屏幕，或结束最近使用的应用。
扬声器132可以布置在终端装置100的前表面100a的上方中心部。可以将电源/复位按钮131d、音量按钮131e等布置在终端装置100的侧表面100b处。
可以以程序命令的类型实现根据本公开各种实施例的方法，其中所述程序命令可以是通过各种计算机装置执行的并被记录在计算机可读介质中。计算机可读介质可以包括单独的程序命令、数据文件和数据结构或其组合。所述记录在介质中的程序命令可以是为本公开专门设计和配置的，或可以是计算机软件领域的技术人员所熟知和使用的。
此外，可以以程序命令的类型来实现本公开各种实施例，并将其存储在终端装置150的存储单元150中，且所述程序命令可以临时存储在控制器110所包括的RAM 113中，以便执行根据本公开各种实施例的方法。因此，控制器110可以根据基于根据本公开各种实施例的方法的程序命令，控制终端装置100所包括的硬件组件，在存储单元150中临时地或持久地存储当执行根据本公开各种实施例的方法时产生的数据，并向触摸屏控制器172提供执行根据本公开各种实施例的方法所需的UI。
将根据本公开实施例的GUI提供方法提供给终端装置100，并因此执行其操作。然而，本公开不限于此，可以将根据本公开实施例的GUI提供方法提供给具有提供GUI的环境的各种终端，诸如，PC、膝上型计算机和平板PC。
图2是示出了根据本公开实施例的GUI提供方法的操作顺序的流程图。图3示出了根据本公开实施例的基于GUI提供方法提供的GUI的不例。
参考图2和3，根据本公开实施例的GUI提供方法可以包括使用图像来设置GUI的操作210以及使用所述GUI来执行应用的操作220到240。
在操作210，控制器110接收来自用户的图像。例如，从用户接收的图像可以是由用户绘制的绘图或由用户拍摄的图片。此外，控制器110可以将一个或更多个应用连接到图像所包括的一个或更多个对象所在的区域(“对象区域”)，以便将一个或更多个对象区域配置为GUI的图标。可以分别向图像所包括的一个或更多个对象区域分配一个或更多个执行命令。所述一个或更多个执行命令可以包括：执行一个应用的命令、包括一个或更多个应用执行因素的执行命令、或多个应用的执行命令。当所述一个或更多个执行命令包括多个应用的执行命令时，可以以宏形式来处理与图像包括的一个或更多个对象区域相连的多个应用的执行命令，因此，还可以设置宏信息。
对象区域可以被配置为窗口小部件的形式，并可以显示反映了预定数据的一个或更多个对象区域。
如上所述，当在终端装置100的主页屏幕上显示通过操作210设置的GUI的同时产生了用户输入事件(例如，由用户进行的触摸输入)时，控制器110在操作220识别产生用户的触摸输入的区域。在操作230，控制器110识别与产生触摸输入的区域相对应的图标，并执行与所述图标相对应的应用的操作。控制器110重复执行操作230，直到在操作240与所述图标相对应的应用的执行结束。
在操作220，控制器110可以检测由用户进行的触摸输入(诸如，悬停)，并响应于所述由用户进行的触摸输入(诸如，悬停)，提供图3的图像301(例如，相应应用的图标图像)，所述图像指示与位于相应区域处的图标相对应的应用。当向图像分配多个应用的执行命令时，控制器100可以显示与多个应用相对应的多个图标图像，其中所述多个应用与当用户进行触摸输入(诸如，悬停)时位于相应区域处的图标相对应。
当在操作220用户没有进行触摸输入时，控制器110等待用户触摸输入的产生。
控制器110重复执行操作220到240，直到在操作350终端装置结束该方法。
图4是示出了根据本公开实施例的GUI提供方法中包括的设置GUI的过程的具体顺序的流程图。图5A、5B和5C示出了根据本公开实施例的针对GUI提供方法使用的GUI编辑程序的示例。图7A、7B、7C和7D示出了根据本公开实施例的GUI提供方法中选择对象区域的操作的示例。图8A、8B和8C示出了根据本公开实施例的GUI提供方法中选择与对象区域相连的应用的操作的示例。图9A、9B、9C和9D示出了根据本公开实施例的针对GUI提供方法使用的GUI数据的示例。
参考图4和图5A-9D，在操作211，设置GUI的处理可以通过执行终端所包括的GUI编辑程序以编辑GUI，来开始操作。例如，可以在主页屏幕170b上显示与GUI编辑程序相对应的图标并且用户选择与GUI编辑程序相对应的图标时，执行GUI编辑程序。GUI编辑程序500(如图5A所示)可以提供绘图工具501，用户可以通过所述绘图工具501自由地产生新的图像。GUI编辑程序500可以提供绘图窗口502，在所述绘图窗口502上，用户可以使用绘图工具501来自由地绘制新的图像。
绘图窗口502可以产生多个层并将其相结合，以便允许用户更容易地绘制新的图像。例如，通过绘图窗口502，用户可以产生一个或更多个层，并可以通过选择性地将所产生的一个或更多个层相结合来产生图像。此外，绘图窗口502可以通过加载存储在存储单元150中的图像，产生一个或更多个层。例如，如图5B所示，GUI编辑程序500可以通过加载存储单元150中的图像来形成一个第一层503，并形成第二层504，其中第二层504与第一层503相交叠，且在第二层504中产生由用户绘制的图像。此外，GUI编辑程序500可以形成包括第一层503和第二层504二者的图像，或选择性地形成仅包括第二层504的图像。因此，用户可以通过使用第一层503中包括的图像，来更容易地绘制所需图像。
备选地，即使用户不直接绘制图像，GUI编辑程序500还可以通过向存储在存储单元150中的图像应用预定图像处理效果(或滤波)505(如图5C所示)，来配置图像。
如上所述，当用户使用由GUI编辑程序500提供的绘制工具501、绘制窗口502以及图像处理效果505来配置要针对GUI使用的图像时，在操作212，控制器110将要针对GUI使用的由用户配置的图像存储在存储单元150中。在操作212，控制器110设置要针对GUI使用的图像600(如图6所示)。
在操作213，控制器110在针对GUI使用的图像中设置要针对GUI使用的对象区域。可以基于由用户输入的区域，来设置要针对GUI使用的对象区域。例如，GUI编辑程序500可以提供能够由用户设置对象区域的对象设置功能。对象设置功能通过将经由用户进行的触摸或拖动输入的区域配置为四边形，来设置对象区域701(如图7A所示)。备选地，对象设置功能可以通过配置经由自由连接用户的触摸输入或拖动输入而输入的区域所产生的封闭图，来设置对象区域702(如图7B所示)。因此，控制器110可以通过经由GUI编辑功能500提供的对象设置功能从用户接收对象区域，来设置对象区域。
备选地，对象设置功能可以通过向要针对GUI使用的图像应用图像处理算法，来自动地配置对象区域。例如，如图7C所示，在应用了用于从要针对GUI使用的图像检测边缘区域的图像处理算法之后，检测到该图像所包括的对象703的边缘704，并基于检测到的边缘，设置对象区域705(如图7D所示)。因此，控制器110可以经由GUI编辑功能500提供的对象设置功能从要针对GUI使用的图像自动检测对象区域，来设置对象区域。
在操作214，控制器110将应用与要针对GUI使用的对象区域相连，以便将该对象区域设置为用作图标。例如，控制器100在触摸屏171上显示应用列表801(如图8A所示)，所述应用列表801包括在终端装置中存储的一个或更多个应用的列表。控制器110从用户接收在应用列表801中与要针对GUI使用的对象区域相连的应用。因此，控制器110将接收到的应用与要针对GUI使用的对象区域相连，以便设置相应图标。
应用列表可以包括存储在终端装置中的一个或更多个应用，控制器110可以考虑到使用频率、应用容量的大小以及字符排列顺序(例如，韩语字母顺序、英语字母顺序或适用于终端装置使用的语言/区域的顺序)，布置并显示所述一个或更多个应用。在布置一个或更多个应用的过程中，优选的是控制器110可以首先布置与要针对GUI使用的对象区域具有相对较高相似度的应用，以便更容易地选择要与所述对象区域相连的应用。例如，在剪切对象区域中包括的图像之后，控制器100可以基于图像搜索算法，搜索与所剪切图像802相对应的图标图像803-1、803-2和803-3(如图8B所示)；并首先布置找到的应用，如附图标记804所示。例如，控制器110可以加载API，所述API获取在终端装置中存储的一个或更多个应用的列表，识别在终端装置中存储的一个或更多个应用，并在所识别出的一个或更多个应用的图标图像中搜索与剪切图像802相对应的图标图像803-1、803-2和803-3(参见图8B)。
备选地，如图8C所示，控制器110可以从用户接收通过书写输入805或字符输入的用户输入，基于字符搜索算法来搜索与用户输入相对应的应用文件名称(应用名称或应用类型)，然后首先布置找到的应用806。例如，控制器110可以加载API，所述API获取在终端装置中存储的一个或更多个应用的列表，识别在终端装置中存储的一个或更多个应用，并在所识别出的一个或更多个应用的文件名(应用名称或应用类型)中搜索与书写输入805或字符输入相对应的应用。在操作215，控制器确定是否设置GUI；如果没有完整地设置GUI，则重复操作213-215。
控制器110还可以执行存储通过上述过程配置的数据(例如，GUI数据)的操作216。参考图9A到9C，GUI数据可以包括GUI图像信息910和对象信息920。GUI图像信息910包括关于用户输入的图像的信息，例如，GUI图像标识符911和包括图像值的GUI图像数据912，输入以便被用作GUI。对象信息920可以包括用于识别GUI图像所包括的一个或更多个对象区域的对象标识符921、指示对象区域的对象区域数据922(例如，对象区域所在的位置或对象区域所在的区域范围)、以及连接到对象区域的应用标识符923。此外，由于一个或更多个对象区域可以被包括在GUI图像中，显而易见的是对象区域920可以包括与GUI图像所包括的对象区域数目相对应的对象标识符921、对象区域数据922和应用标识符923。
图10是示出根据本公开实施例的GUI提供方法的另一实施例的流程图。图11示出了根据本公开实施例的用于设置针对GUI提供方法使用的小窗口部件数据区域的操作的示例。
参考图10和11，在操作1001，控制器110确定操作213中所选的对象区域是否与支持窗口小部件功能的应用相对应。控制器110首先剪切对象区域中包括的图像，然后基于图像搜索算法，搜索与剪切图像1101和1103相对应的应用图像。此外，控制器110可以确定与所找到的应用图像相对应的应用是否支持窗口小部件功能，以便确定所选的对象区域是否与提供窗口小部件功能的应用相对应。可以在存储应用的过程期间将关于该应用是否支持窗口小部件功能的信息存储在终端装置中，且可以将提供窗口小部件的应用配置为检测并提供用于窗口小部件功能的数据。
在操作1001搜索应用图像的过程中，控制器110可以在应用图标的图像以及在执行所述应用期间使用的图像中，搜索应用图像。在搜索应用图像的过程中，控制器110还可以使用剪切图像1101和1103以及找到的应用图像之间的相似度。例如，当剪切图像1101和1103与找到的应用图像之间的相似度超过预定阈值时，则控制器110可以确定找到了应用图像。当相似度等于或小于预定阈值时，控制器110可以确定没有找到应用图像。
支持窗口小部件功能的应用可以：检测与时间相关的数据；检测与“手表应用”的调度相关的数据，所述手表应用通过窗口小部件的预定区域来提供检测数据；并且支持窗口小部件功能的应用可以包括通过窗口小部件的预定区域提供检测数据的“日历应用”。尽管考虑到本公开实施例被配置为将用户输入的图像用作GUI这一情况，将可以通过窗口小部件提供相对简单数据的“手表应用”和“日历应用”描述为示例，然而本公开不限于上述实施例，可以多样化地修改或应用支持窗口小部件功能的应用。
当所选对象区域与支持窗口小部件的应用相对应时，控制器110检测到区域1102和1104，通过所述区域1102和1104，提供来自包括在该对象区域中的图像1101和1103的窗口小部件数据，以便在该对象区域中实现窗口小部件功能。例如，当在操作1001中所选的对象区域与“手表应用”相对应时，控制器110从该对象区域所包括的图像1103中检测其中插入与时间相关的数据的区域1104。在操作1003，控制器110可以显示反映了与时间相关的数据(例如，当前日期、当前时间等)的检测区域。
当所选的对象区域不与支持窗口小部件功能的应用相对应时，在操作1004，控制器110在触摸屏171上显示应用列表801(如图8A所示)，其中应用列表801包括在终端装置中存储的一个或更多个应用的列表。应用列表可以包括存储在终端装置中的一个或更多个应用，控制器110可以考虑到使用频率、应用容量的大小以及字符排列顺序(例如，韩语字母顺序或英语字母顺序)，布置并显示所述一个或更多个应用。在布置一个或更多个应用的过程中，控制器100可以首先布置与要针对GUI使用的对象区域具有相对较高相似度的应用，以便更容易地选择要与所述对象区域相连的应用。例如，在剪切对象区域所包括的图像之后，控制器100可以基于图像搜索算法，搜索与所剪切图像802相对应的图标图像803-1、803-2和803-3(如图8B所示)；并首先布置所找到的应用。备选地，控制器110可以从用户接收通过书写输入805(如图8C所示)或字符输入的用户输入，基于字符搜索算法来搜索与用户输入相对应的应用文件名称(应用名称或应用类型)，然后首先布置找到的应用806(如图8C所示)。
在操作1005，控制器110从用户接收与要针对GUI使用的对象区域相连的应用。因此，在操作1006，控制器110将接收到的应用与要针对GUI使用的对象区域相连，以便设置相应图标。
如上所述，根据参照图10描述的图4的操作214的另一实施例，可以根据所选对象区域是否与支持窗口小部件功能的应用相对应，来有区别地配置GUI数据。因此，控制器110可以根据操作214的另一实施例，有区别地配置在操作216构造的GUI数据。
参考图9D，控制器110可以允许GUI数据900中包括的对象信息920进一步包括指示应用类型的应用类型信息924连同对象标识符921、对象区域数据922和应用标识符923。应用类型信息924可以包括指示对象区域是否与支持窗口小部件功能的应用相对应的信息。此外，当存储在应用类型信息924中的数据表示该对象区域与不支持窗口小部件功能的应用相对应时，不要求单独地存储与窗口小部件功能相关的数据。当存储在应用类型信息924中的数据表示该对象区域与支持窗口小部件功能的应用相对应时，控制器110可以将对象信息920配置为还包括与窗口小部件功能相关的数据。因此，当存储在应用类型信息924中的数据表示该对象区域与支持窗口小部件功能的应用相对应时，控制器110可以将对象信息920配置为还包括关于对象区域内应用窗口小部件功能的区域的信息，诸如，窗口小部件数据区域信息925和窗口小部件数据926。窗口小部件数据区域信息925可以包括指示窗口小部件数据区域的范围的信息。此外，窗口小部件数据926可以直接存储由窗口小部件功能提供的数据，或包括关于链接的信息，通过该链接连接到由窗口小部件功能提供的数据。
图12是示出了根据本公开实施例的通过使用向GUI提供方法提供的GUI来执行应用的过程的另一示例的流程图。图13A和13B示出了根据本公开实施例的经由向GUI提供方法提供的GUI，使用书写输入执行应用的操作的示例。
参考图2、12和13A-13B，当在操作220发生用户输入事件时，在操作1201，控制器110确定用户输入事件是否是书写输入。当在操作1201用户输入事件不是书写输入时，在操作1202，控制器110执行与在操作220中确定的区域内存在的图标相对应的应用。
当在操作1201用户输入事件是书写输入时，在操作1203，控制器110执行检测书写输入的值的操作。在操作1204，控制器110优先地加载与在操作220中确定的区域内存在的图标相对应的应用，并反映书写输入的值以便处理相应应用的操作。
例如，当相应应用是“web搜索应用”时，控制器110可以执行web搜索，其中将书写输入值作为关键词。当相应应用是“联系人号码应用1301”(如图13A所示)时，控制器110执行联系人号码搜索，其中将书写输入值作为关键词。当相应应用是“呼叫应用”时，控制器110可以尝试呼叫与作为关键词的书写输入值相对应的联系人号码。当相应应用是“信使应用”时，控制器110可以产生配置为向相应用户发送消息的信使窗口，使得将该消息发送到与作为关键词的书写输入值相对应的联系人号码。当相应应用是“日历应用1302”(如图13B所示)时，控制器110可以基于作为关键词的书写输入值，搜索日程计划；或基于作为关键词的书写输入值，执行产生日程计划的操作。当相应应用是“手表应用”时，控制器110可以针对与书写输入值相对应的时间设置提醒。当相应应用是“音乐播放应用”时，控制器110可以基于作为关键词的书写输入值，搜索或再现音乐。
在另一实例中，控制器110可以基于书写输入值，执行下表1所示的操作。
【表1】
尽管本公开实施例描述了基于书写输入值来处理相应应用的操作，然而本公开不限于此，应清楚的是本领域技术人员可以进行各种修改和应用。
此外，尽管将书写输入值描述为示例，然而应清楚的是可以将各种用户手势输入用作书写输入值的替代。例如，在操作1101，控制器110确定用户输入事件是否是手势输入。当在操作1101用户输入事件是手势输入时，在操作1103，控制器110执行检测手势输入值的操作。在操作S1104，控制器110优先地加载与在操作220中确定的区域内存在的图标相对应的应用，并反映书写输入的值以便处理相应应用的操作。例如，当相应应用是“日历应用”时，控制器110可以基于手势输入，执行显示在当前时间之前或之后设置的日程计划的操作。当相应应用是“音乐播放应用”时，控制器110可以再现列表上在当前播放音乐之前或之后列出的音乐。
将要理解的是，本公开的各实施例可实现为硬件、软件或者硬件和软件的组合的形式。例如，可以将这种软件存储在易失性或非易失性存储设备(例如ROM等)、存储器(例如，RAM、存储器芯片、存储器设备或存储器集成电路)、或可记录的光学或磁性介质(例如，CD、DVD、磁盘、或磁带)中，而无论其可擦除的能力或其重新记录的能力。本公开的web窗口小部件制作方法由计算机或包括控制器和存储器的便携式终端来实现，且应理解存储器对应于适于存储程序或多个程序并是机器可读的存储介质的示例，所述程序包括指令，通过所述指令实现本公开各种实施例。因此，本公开包括针对实现说明书所附权利要求所述的装置和方法的代码的程序，以及用于存储所述程序的机器(计算机等)可读存储介质。
此外，上述移动终端可以接收来自以有线或无线方式连接的程序提供设备的程序，并存储该程序。
程序提供装置可以包括：含有用于执行预设的内容保护方法的指令的程序；用于存储内容保护方法所需的信息的存储器；用于执行有线或无线通信的通信单元；以及用于控制程序传输的控制器。当从便携式终端接收到针对提供程序的请求时，程序提供装置可以有线地或无线地向便携式终端提供所述程序。此外，即使在没有来自便携式终端的针对提供程序的请求的情况下，例如，当便携式终端位于特定地点内时，程序提供装置也可以有线地或无线地向便携式终端提供程序。
尽管参考本公开各种实施例示出并描述了本公开，然而本领域技术人员应理解，可以在不脱离由所附权利要求及其等同物限定的本公开的精神和范围的前提下，对其进行形式和细节上的多种修改。

Claims (15)

1.一种通过终端提供图形用户界面(GUI)的方法，所述方法包括：
接收要针对所述GUI用作主页屏幕的图像；
在所述终端的显示器上显示包括至少一个对象的所述图像；
基于用于选择与所述至少一个对象中的对象相对应的对象区域的输入，在所述图像中选择所述对象区域；
设置所选对象区域作为用于执行存储在所述终端中的应用的GUI图标；以及
在所述显示器上显示包括被设置为所述GUI图标的所选对象区域在内的图像作为主页屏幕，
其中响应于针对被设置为所述GUI图标的所选对象区域的输入，执行所述应用。
2.根据权利要求1所述的方法，其中所述图像包括基于用户输入形成的绘制图像。
3.根据权利要求1所述的方法，其中设置所选对象区域作为所述GUI图标包括：
提供应用列表，所述应用列表包括在终端中执行的至少一个应用；以及
从应用列表选择至少一个应用以链接到GUI图标。
4.根据权利要求3所述的方法，其中所述提供应用列表包括：显示包括终端中存储的至少一个应用的应用列表。
5.根据权利要求3所述的方法，其中所述提供应用列表包括：提供应用列表，所述应用列表包括与要针对所述GUI使用的图像相对应的至少一个应用。
6.根据权利要求5所述的方法，其中所述提供应用列表包括：显示包括终端中存储的至少一个应用的应用列表，使得按照降序显示与要针对所述GUI使用的图像具有高相似度的至少一个应用。
7.根据权利要求3所述的方法，其中所述提供应用列表包括：
从用户输入接收字符；以及
提供应用列表，所述应用列表包括与接收到的字符相对应的至少一个应用。
8.根据权利要求7所述的方法，其中所述提供应用列表包括：显示包括终端中存储的至少一个应用的应用列表，使得按照降序显示与接收到的字符具有高相似度的至少一个应用。
9.根据权利要求1所述的方法，其中设置所选对象区域作为所述GUI图标包括：将所述对象区域设置为应用执行区域。
10.根据权利要求1所述的方法，其中设置所选对象区域作为所述GUI图标包括：将由用户输入设置的对象区域设置为应用执行区域。
11.根据权利要求1所述的方法，还包括：
接收用于选择GUI图标的用户输入；以及
响应于所述用户输入执行与所述GUI图标相对应的应用。
12.根据权利要求11所述的方法，还包括：
在对象区域中接收用户输入；以及
基于所述用户输入，执行与所述对象区域相对应的应用。
13.一种终端装置，包括：
触摸屏；
存储器；以及
一个或更多个控制器；被配置为：
接收要针对图形用户界面GUI使用的图像，
在所述触摸屏上显示包括至少一个对象的所述图像，
基于用于选择与所述至少一个对象中的对象相对应的对象区域的输入，在所述图像中选择所述对象区域，
设置所选对象区域作为用于执行存储在所述存储器中的应用的GUI图标，以及
在所述触摸屏上显示包括被设置为所述GUI图标的所选对象区域在内的图像作为主页屏幕，
其中响应于针对被设置为所述GUI图标的所选对象区域的输入，执行所述应用。
14.根据权利要求13所述的终端装置，其中所述图像包括基于用户输入形成的绘制图像。
15.根据权利要求13所述的终端装置，其中所述至少一个处理器还被配置为：提供应用列表并从应用列表选择要链接到GUI图标的至少一个应用，其中所述应用列表包括在终端中执行的至少一个应用。
CN201480042000.6A 2013-07-26 2014-07-28 提供图形用户界面的方法和装置 Expired - Fee Related CN105453017B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910202043.0A CN110069203B (zh) 2013-07-26 2014-07-28 电子设备和操作电子设备的方法

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2013-0089014 2013-07-26
KR1020130089014A KR102207443B1 (ko) 2013-07-26 2013-07-26 그래픽 유저 인터페이스 제공 방법 및 장치
PCT/KR2014/006900 WO2015012669A1 (en) 2013-07-26 2014-07-28 Method and apparatus for providing graphic user interface

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201910202043.0A Division CN110069203B (zh) 2013-07-26 2014-07-28 电子设备和操作电子设备的方法

Publications (2)

Publication Number Publication Date
CN105453017A CN105453017A (zh) 2016-03-30
CN105453017B true CN105453017B (zh) 2019-04-05

Family

ID=52391587

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201480042000.6A Expired - Fee Related CN105453017B (zh) 2013-07-26 2014-07-28 提供图形用户界面的方法和装置
CN201910202043.0A Active CN110069203B (zh) 2013-07-26 2014-07-28 电子设备和操作电子设备的方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201910202043.0A Active CN110069203B (zh) 2013-07-26 2014-07-28 电子设备和操作电子设备的方法

Country Status (7)

Country Link
US (2) US10216350B2 (zh)
EP (1) EP3008559B1 (zh)
KR (1) KR102207443B1 (zh)
CN (2) CN105453017B (zh)
AU (1) AU2014293763B2 (zh)
RU (2) RU2677393C2 (zh)
WO (1) WO2015012669A1 (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102207443B1 (ko) * 2013-07-26 2021-01-26 삼성전자주식회사 그래픽 유저 인터페이스 제공 방법 및 장치
USD745893S1 (en) * 2013-09-03 2015-12-22 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
AU353073S (en) * 2013-09-03 2013-12-23 Samsung Electronics Co Ltd Display screen with icon for an electronic device
USD777739S1 (en) * 2014-02-21 2017-01-31 Lenovo (Beijing) Co., Ltd. Display screen or portion thereof with graphical user interface
USD784373S1 (en) * 2014-02-21 2017-04-18 Lenovo (Beijing) Co., Ltd. Display screen or portion thereof with graphical user interface
USD766318S1 (en) 2014-03-07 2016-09-13 Apple Inc. Display screen or portion thereof with animated graphical user interface
USD760740S1 (en) * 2015-01-23 2016-07-05 Your Voice Usa Corp. Display screen with icon
JP6728590B2 (ja) * 2015-08-06 2020-07-22 株式会社リコー 機器、情報処理システム、情報処理方法、及びプログラム
CN107015721A (zh) 2016-10-20 2017-08-04 阿里巴巴集团控股有限公司 一种应用界面的管理方法和装置
KR20200102838A (ko) * 2019-02-22 2020-09-01 삼성전자주식회사 이미지를 이용하여 콘텐트를 검색하기 위한 장치 및 그 제어 방법
USD946018S1 (en) 2020-06-18 2022-03-15 Apple Inc. Display screen or portion thereof with graphical user interface
US20220283694A1 (en) * 2021-03-08 2022-09-08 Samsung Electronics Co., Ltd. Enhanced user interface (ui) button control for mobile applications
US20230350941A1 (en) * 2022-04-29 2023-11-02 Apple Inc. Contextual text lookup for images

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6476834B1 (en) * 1999-05-28 2002-11-05 International Business Machines Corporation Dynamic creation of selectable items on surfaces
CN101872285A (zh) * 2010-06-13 2010-10-27 中兴通讯股份有限公司 一种实现桌面系统的方法及装置
CN102664991A (zh) * 2012-03-29 2012-09-12 上海华勤通讯技术有限公司 移动终端及其功能图标的设置方法
CN103064691A (zh) * 2013-01-30 2013-04-24 广东欧珀移动通信有限公司 制作电子设备桌面图标的方法和装置
CN103150083A (zh) * 2013-03-14 2013-06-12 北京小米科技有限责任公司 一种自定义桌面图标的显示方法及装置

Family Cites Families (66)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6275611B1 (en) * 1996-10-17 2001-08-14 Motorola, Inc. Handwriting recognition device, method and alphabet, with strokes grouped into stroke sub-structures
US6018710A (en) * 1996-12-13 2000-01-25 Siemens Corporate Research, Inc. Web-based interactive radio environment: WIRE
US6377288B1 (en) * 1998-01-12 2002-04-23 Xerox Corporation Domain objects having computed attribute values for use in a freeform graphics system
US7176896B1 (en) * 1999-08-30 2007-02-13 Anoto Ab Position code bearing notepad employing activation icons
IL132929A (en) * 1999-11-14 2004-09-27 Ycd Multimedia Dynamic user interface
WO2001050411A1 (en) * 2000-01-06 2001-07-12 Zen Optical Technology Llc Pen-based handwritten character recognition and storage system
US6956562B1 (en) * 2000-05-16 2005-10-18 Palmsource, Inc. Method for controlling a handheld computer by entering commands onto a displayed feature of the handheld computer
US7913185B1 (en) * 2001-10-25 2011-03-22 Adobe Systems Incorporated Graphical insertion of JavaScript pop-up menus
US6938221B2 (en) * 2001-11-30 2005-08-30 Microsoft Corporation User interface for stylus-based user input
JP2006527439A (ja) * 2003-06-13 2006-11-30 ユニヴァーシティ オブ ランカスター ユーザインタフェース
US7324691B2 (en) 2003-09-24 2008-01-29 Microsoft Corporation System and method for shape recognition of hand-drawn objects
US20050084082A1 (en) 2003-10-15 2005-04-21 Microsoft Corporation Designs, interfaces, and policies for systems that enhance communication and minimize disruption by encoding preferences and situations
US7298904B2 (en) * 2004-01-14 2007-11-20 International Business Machines Corporation Method and apparatus for scaling handwritten character input for handwriting recognition
US8448083B1 (en) * 2004-04-16 2013-05-21 Apple Inc. Gesture control of multimedia editing applications
US20070016861A1 (en) 2005-07-15 2007-01-18 Nokia Corporation Apparatus and methods for implementing modular, context-aware active graphical user interface objects
US20070106931A1 (en) * 2005-11-08 2007-05-10 Nokia Corporation Active notes application
KR20070120368A (ko) * 2006-06-19 2007-12-24 엘지전자 주식회사 사용자인터페이스 기반의 메뉴 아이콘 제어방법 및 장치
EP1947562A3 (en) * 2007-01-19 2013-04-03 LG Electronics Inc. Inputting information through touch input device
CN101477432B (zh) * 2008-01-04 2012-02-08 宏达国际电子股份有限公司 电子装置及其打开应用程序方法与功能图像显示方法
US8607161B2 (en) 2008-05-09 2013-12-10 Blackberry Limited Configurable icon sizing and placement for wireless and other devices
KR101509245B1 (ko) * 2008-07-31 2015-04-08 삼성전자주식회사 휴대용 단말기에서 패턴 인식을 이용한 사용자 인터페이스장치 및 방법
KR101609162B1 (ko) * 2008-11-13 2016-04-05 엘지전자 주식회사 터치 스크린을 구비한 이동 단말기 및 이를 이용한 데이터 처리 방법
US8423916B2 (en) * 2008-11-20 2013-04-16 Canon Kabushiki Kaisha Information processing apparatus, processing method thereof, and computer-readable storage medium
GB0823706D0 (en) * 2008-12-31 2009-02-04 Symbian Software Ltd Fast data entry
US20100281435A1 (en) * 2009-04-30 2010-11-04 At&T Intellectual Property I, L.P. System and method for multimodal interaction using robust gesture processing
KR101071843B1 (ko) * 2009-06-12 2011-10-11 엘지전자 주식회사 이동단말기 및 그 제어방법
KR20110040188A (ko) * 2009-10-13 2011-04-20 삼성전자주식회사 기능에 대한 아이콘을 표시하는 화상형성장치 및 그 아이콘 표시 방법
WO2011060382A1 (en) * 2009-11-13 2011-05-19 Google Inc. Live wallpaper
KR101722616B1 (ko) * 2009-12-24 2017-04-19 삼성전자주식회사 터치 기반의 입력 인터페이스를 가지는 터치 디바이스의 어플리케이션 운용 방법 및 장치
KR20110077231A (ko) 2009-12-30 2011-07-07 주식회사 아이리버 사용자 맞춤 ｕｉ를 제공할 수 있는 모바일 디바이스 및 그 방법
WO2011099808A2 (en) * 2010-02-12 2011-08-18 Samsung Electronics Co., Ltd. Method and apparatus for providing a user interface
US20110202864A1 (en) * 2010-02-15 2011-08-18 Hirsch Michael B Apparatus and methods of receiving and acting on user-entered information
US20110258581A1 (en) 2010-04-14 2011-10-20 Wei-Han Hu Method for adjusting size of an icon and related handheld device
KR101660746B1 (ko) * 2010-08-24 2016-10-10 엘지전자 주식회사 이동 단말기 및 이것의 애플리케이션 지시자 설정 방법
JP5748436B2 (ja) 2010-09-10 2015-07-15 キヤノン株式会社 撮像装置及びその制御方法
EP2431870B1 (en) * 2010-09-17 2019-11-27 LG Electronics Inc. Mobile terminal and control method thereof
US9021402B1 (en) * 2010-09-24 2015-04-28 Google Inc. Operation of mobile device interface using gestures
US9521244B2 (en) * 2010-10-13 2016-12-13 Lg Electronics Inc. Mobile terminal displaying application execution icon groups for corresponding predetermined events
KR101728703B1 (ko) * 2010-11-24 2017-04-21 삼성전자 주식회사 휴대 단말기 및 그 휴대 단말기에서 배경 이미지 활용 방법
KR101172663B1 (ko) 2010-12-31 2012-08-08 엘지전자 주식회사 이동 단말기 및 그 애플리케이션 그룹화 방법
KR101781852B1 (ko) 2011-01-04 2017-09-26 엘지전자 주식회사 이동단말기 및 그 제어방법
US20120216152A1 (en) * 2011-02-23 2012-08-23 Google Inc. Touch gestures for remote control operations
EP2523433B1 (en) 2011-05-09 2015-11-25 BlackBerry Limited Systems and methods for facilitating an input to an electronic device
US8819576B2 (en) * 2011-05-09 2014-08-26 Blackberry Limited Systems and methods for facilitating an input to an electronic device
US20130036374A1 (en) * 2011-08-03 2013-02-07 Melamed Ofer Method and apparatus for providing a banner on a website
KR20130052753A (ko) 2011-08-16 2013-05-23 삼성전자주식회사 터치스크린을 이용한 어플리케이션 실행 방법 및 이를 지원하는 단말기
CN102298533B (zh) * 2011-09-20 2015-05-13 宇龙计算机通信科技(深圳)有限公司 激活应用程序的方法及终端设备
US9619139B2 (en) * 2011-10-03 2017-04-11 Kyocera Corporation Device, method, and storage medium storing program
US9292195B2 (en) * 2011-12-29 2016-03-22 Apple Inc. Device, method, and graphical user interface for configuring and implementing restricted interactions for applications
KR101315957B1 (ko) * 2012-05-21 2013-10-08 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR101929301B1 (ko) * 2012-08-20 2019-03-12 삼성전자 주식회사 필기 제스처 인식을 통한 휴대단말의 기능 실행 제어 방법 및 장치
KR102150289B1 (ko) * 2012-08-30 2020-09-01 삼성전자주식회사 사용자 단말에서 사용자 인터페이스 장치 및 이를 지원하는 방법
KR102059800B1 (ko) * 2012-08-30 2019-12-27 삼성전자주식회사 사용자 단말에서 사용자 인터페이스 장치 및 이를 지원하는 방법
CN103019821B (zh) * 2012-12-07 2016-09-28 中兴通讯股份有限公司 一种终端应用的实现方法及终端
WO2014089763A1 (en) * 2012-12-12 2014-06-19 Intel Corporation Single- gesture device unlock and application launch
US20140320391A1 (en) * 2012-12-28 2014-10-30 Gaurav BAZAZ Methods for improvements in mobile electronic devices
US8943092B2 (en) * 2013-03-04 2015-01-27 Microsoft Corporation Digital ink based contextual search
US9461882B1 (en) * 2013-04-02 2016-10-04 Western Digital Technologies, Inc. Gesture-based network configuration
KR102203885B1 (ko) * 2013-04-26 2021-01-15 삼성전자주식회사 사용자 단말 장치 및 그 제어 방법
KR102207443B1 (ko) * 2013-07-26 2021-01-26 삼성전자주식회사 그래픽 유저 인터페이스 제공 방법 및 장치
US20150049009A1 (en) * 2013-08-13 2015-02-19 Lenovo (Singapore) Pte. Ltd. System-wide handwritten notes
KR20150025214A (ko) * 2013-08-28 2015-03-10 삼성전자주식회사 동영상에 비주얼 객체를 중첩 표시하는 방법, 저장 매체 및 전자 장치
KR20150037209A (ko) * 2013-09-30 2015-04-08 삼성전자주식회사 위젯을 표시하는 방법, 전자 장치 저장 매체 및 전자 장치
KR20150126494A (ko) * 2014-05-02 2015-11-12 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US20160154555A1 (en) * 2014-12-02 2016-06-02 Lenovo (Singapore) Pte. Ltd. Initiating application and performing function based on input
US9530318B1 (en) * 2015-07-28 2016-12-27 Honeywell International Inc. Touchscreen-enabled electronic devices, methods, and program products providing pilot handwriting interface for flight deck systems

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6476834B1 (en) * 1999-05-28 2002-11-05 International Business Machines Corporation Dynamic creation of selectable items on surfaces
CN101872285A (zh) * 2010-06-13 2010-10-27 中兴通讯股份有限公司 一种实现桌面系统的方法及装置
CN102664991A (zh) * 2012-03-29 2012-09-12 上海华勤通讯技术有限公司 移动终端及其功能图标的设置方法
CN103064691A (zh) * 2013-01-30 2013-04-24 广东欧珀移动通信有限公司 制作电子设备桌面图标的方法和装置
CN103150083A (zh) * 2013-03-14 2013-06-12 北京小米科技有限责任公司 一种自定义桌面图标的显示方法及装置

Also Published As

Publication number Publication date
CN110069203B (zh) 2022-04-05
US10216350B2 (en) 2019-02-26
KR102207443B1 (ko) 2021-01-26
EP3008559B1 (en) 2020-05-06
RU2677393C2 (ru) 2019-01-16
CN110069203A (zh) 2019-07-30
EP3008559A1 (en) 2016-04-20
US20190121496A1 (en) 2019-04-25
US20150033164A1 (en) 2015-01-29
RU2018146477A3 (zh) 2019-09-09
AU2014293763A1 (en) 2015-12-24
AU2014293763B2 (en) 2019-07-04
KR20150012889A (ko) 2015-02-04
RU2016106288A3 (zh) 2018-06-07
CN105453017A (zh) 2016-03-30
EP3008559A4 (en) 2017-05-03
RU2018146477A (ru) 2019-02-18
US11314371B2 (en) 2022-04-26
RU2016106288A (ru) 2017-08-29
RU2706951C2 (ru) 2019-11-22
WO2015012669A1 (en) 2015-01-29

Similar Documents

Publication Publication Date Title
CN105453017B (zh) 提供图形用户界面的方法和装置
CN106030487B (zh) 用于控制屏幕的组成的方法及其电子设备
KR102162836B1 (ko) 필드 속성을 이용한 컨텐트를 제공하는 전자 장치 및 방법
CN104049732B (zh) 多输入控制方法和系统和支持该方法和系统的电子装置
CN103370684B (zh) 电子设备、显示方法以及非瞬变存储介质
KR101546782B1 (ko) 휴대단말의 대기화면 구성 방법 및 장치
US9219812B2 (en) Mobile terminal
US9141406B2 (en) Method and system to provide a user interface with respect to a plurality of applications
CN105683894A (zh) 显示设备的应用执行方法及其显示设备
CN103229141A (zh) 管理用户界面中的工作空间
CN102210134A (zh) 智能输入设备锁定
CN102298490A (zh) 移动终端和在其中控制组操作的方法
KR20160005609A (ko) 그래픽 사용자 인터페이스를 표시하는 방법 및 이를 지원하는 전자장치
KR20110088783A (ko) 이동 단말기 및 이동 단말기를 이용한 정보 표시 방법
CN103581427A (zh) 移动终端及其控制方法
CN108027695A (zh) 基于体验模式转换的应用用户接口重新配置
CN110083486A (zh) 与外部终端交互的方法、装置和记录介质
CN107943359A (zh) 一种应用程序的控制的方法、终端及计算机可读介质
KR20120033789A (ko) 애플리케이션 실행 방법 및 이를 이용하는 이동 단말기
CN105227628A (zh) 终端执行的应用的消息通知方法和应用的消息通知装置
CN107562314A (zh) 卷轴式应用图标显示方法及系统
CN109669595A (zh) 触摸屏的控制方法及系统
KR20130091182A (ko) 이동 단말기 및 그것의 제어 방법
KR102117259B1 (ko) 전자토큰 제어 방법 및 장치
CN106066861A (zh) 文件扫描装置及方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190405

Termination date: 20200728