CN105849683A - 用于处理通过显示器提供的对象的方法和设备 - Google Patents

用于处理通过显示器提供的对象的方法和设备 Download PDF

Info

Publication number
CN105849683A
CN105849683A CN201480070621.5A CN201480070621A CN105849683A CN 105849683 A CN105849683 A CN 105849683A CN 201480070621 A CN201480070621 A CN 201480070621A CN 105849683 A CN105849683 A CN 105849683A
Authority
CN
China
Prior art keywords
input
processor
display
touch
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201480070621.5A
Other languages
English (en)
Inventor
裵慧林
金庚泰
左昌协
金良昱
李善基
姜斗锡
李昌浩
林洒美
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN105849683A publication Critical patent/CN105849683A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text

Abstract

提供了一种响应于通过用户在触摸屏上的触摸输入而运行功能的方法以及实现该方法的电子装置。通过电子装置处理对象的方法包括通过功能上连接至电子装置的显示器显示多个对象。通过电子装置处理对象的方法还包括获得对应于多个对象之中的第一对象的输入。通过电子装置处理对象的方法进一步包括确定多个对象之中与输入相关的第二对象。通过电子装置处理对象的方法包括通过显示器显示对应于第一对象的功能的运行信息以及与第二对象相关的对象信息。

Description

用于处理通过显示器提供的对象的方法和设备
技术领域
本公开总体上涉及对象处理方法，更具体地说，涉及用于处理通过显示器提供的对象的方法和设备。
背景技术
电子装置是输入手段，且可包括例如安装在屏幕中的触摸面板。进一步地，电子装置检测由用户通过触摸屏(例如，配备有触摸面板的屏幕)的触摸输入，并识别对应于触摸输入的、触摸屏上的位置。电子装置处理在识别的位置上离开的对象，并运行例如对应于对象的功能(例如，电子装置的功能或应用功能)。
发明内容
技术问题
在电子装置中运行的功能可能不是用户期望的功能。例如，超链接对象可集中并显示在网页上。此时，非本意的对象被选择并运行链接到非本意的对象的网页(例如，通过触摸屏显示)。在防止这样的运行错误的方法中，电子装置放大并显示其至少一部分包括在以触摸位置(例如，对应于触摸输入的触摸屏的坐标)为中心的预设半径内的对象。电子装置运行对应于由用户从放大的对象中选择的对象的、电子装置的功能。然而，这样的方案导致不便利，其原因是即使用户期望的对象被选择，用户也将要再次选择相同的对象。
为了解决上面讨论的缺陷，主要目的在于提供用于处理对象的方法和设备，其中，用户在对象中运行期望功能(例如，电子装置的功能或应用功能)。
技术方案
在第一示例中，提供了通过电子装置处理对象的方法。方法包括通过功能上连接至电子装置的显示器显示多个对象。方法还包括获得对应于多个对象之中的第一对象的输入。方法进一步包括确定多个对象之中与输入相关的第二对象。方法包括通过显示器显示对应于第一对象的功能的运行信息以及与第二对象相关的对象信息。
在第二示例中，提供了通过电子装置处理对象的方法。方法包括通过用户获得输入。方法还包括通过功能上连接至电子装置的显示器显示对应于获得的输入的功能的运行信息以及与除了获得的输入之外的一个或多个输入相关的输入信息。
在第三示例中，提供了电子装置。电子装置包括显示模块。显示模块包括具有触摸面板的触摸屏。显示模块配置为显示多个对象。电子装置还包括处理器。处理器配置为通过触摸面板获得对应于多个对象之中的第一对象的输入。处理器还配置为确定多个对象之中与输入相关的第二对象。处理器进一步配置为控制显示模块显示对应于第一对象的功能的运行信息以及与第二对象相关的对象信息。
在第四示例中，提供了电子装置。电子装置包括显示模块和处理器。显示模块包括具有触摸面板的触摸屏。处理器配置为通过触摸面板获得用户的输入，控制显示模块显示对应于获得的输入的功能的运行信息以及与除了获得的输入之外的一个或多个第二输入相关的输入信息。
发明的有益效果
本公开的各实施方式可提供其中用户可运行期望的功能的方法，以及实现该方法的电子装置。本公开的各实施方式可提供其中用户可撤销运行的功能并通过由显示器显示的对象信息来运行另一功能的方法，以及实现该方法的电子装置。本公开的各实施方式可提供其中用户可撤销运行的功能并通过由显示器显示的输入信息来运行另一功能的方法，以及实现该方法的电子装置。
在下面着手于“具体实施方式”之前，阐述贯穿本专利文件使用的某些词语和短语的定义，可能是有利的：术语“包括(include)”和“包括(comprise)”及其派生词的意思是包括但不限制；术语“或”是包括性的，意思是和/或；短语“与......相关”和“与之相关”及其派生词的意思可以是包括、包括在......内、与......互连、包含、包含在.......内、连接至或与......连接、耦接至或与......耦接、可与......通信、与......协作、交错、并列、接近于、结合至或与......结合、具有、具有......的性质等；以及术语“控制器”的意思是控制至少一个操作的任何装置、系统或其部件，这样的装置可实现为硬件、固件或软件，或者它们中的至少两个的某种组合。应该注意的是，与任何具体控制器相关的功能可集中或分布开，无论在本地或远程地。贯穿本专利文件提供对某些词语和短语的定义，本领域普通技术人员应该理解的是，在很多情况下，即使不是大多数情况，这样的定义应用于这样定义的词语和短语的之前的以及将来的使用。
附图说明
为了更完全地理解本公开及其优点，现在参照以下结合附图进行的详细描述，在附图中相同的参考数字表示相同的部件：公开
图1是根据本公开的电子装置的示例性框图；
图2是根据本公开的硬件的示例性框图；
图3是根据本公开的编程模块的示例性框图；
图4A、4B、4C和4D是根据本公开公开的描述显示网页的过程的示例性网络浏览器屏幕；
图5A和5B是根据本公开的用于描述确定由用户从触摸屏上显示的对象中选择的对象和相邻的候选对象的示例性过程的概念图；
图6A、6B和6C是根据本公开的用于描述再现视频的过程的示例性再现屏幕；
图7A、7B、7C、7D、7E、7F和7G示出了可根据触摸输入选择的各个示例性对象；
图8A、8B和8C是根据本公开的用于描述重新配置光标的位置的过程的示例性文本输入框；
图9A、9B、9C和9D是根据本公开的用于描述显示网页的过程的示例性网络浏览器屏幕；
图10示出了根据本公开的可由处理器识别的各种手势的示例；
图11A、11B、11C、11D、11E、11F和11G是根据本公开的描述布置候选物的方法的示例性视图；
图12、13A、13B和13C是根据本公开的描述以各种形式显示候选对象的方法的示例性视图；
图14是根据本公开的描述操作候选列表的方法的示例的视图；
图15A、15B和15C是根据本公开的用于描述显示网页的过程的示例性网络浏览器屏幕；
图16A、16B和16C是根据本公开的用于描述显示网页的过程的示例性网络浏览器屏幕；
图17A和17B是根据本公开的描述将候选对象的列表置于屏幕上的示例性方法的视图；
图18A、18B和18C是根据本公开的描述配置是否操作候选列表的示例性方法的视图；以及
图19是示出根据本公开的运行电子装置的功能的示例性方法的流程图。
具体实施方式
下面讨论的图1至19以及在本专利文件中用于描述本公开的原理的各个实施方式仅仅是说明性的方式，且不应该以任何方式解释为限制本公开的范围。本领域技术人员将理解的是，本公开的原理可在任何合适地布置的电子装置中实现。提供以下参照附图的描述，以帮助全面地理解如由权利要求及其等同物限定的本公开的各个实施方式。它包括各种具体细节以帮助理解，但是这些被认为仅仅是示例性的。因此，本领域普通技术人员将认识到的是，在不背离本公开的范围和精神的情况下，可以作出本文描述的各个实施方式的各种改变和修改。另外，为了清楚和简明，可省略对公知功能和构造的描述。
根据本公开的电子设备是具有通信功能的设备。例如，电子装置是以下至少之一：智能手机、平板电脑(PC)、移动电话、视频电话、电子书(e-book)阅读器、台式PC、膝上型PC、上网本、个人数字助理(PDA)、便携式多媒体播放器(PMP)、MP3播放器、移动医疗器械、电子手镯、电子项链、电子附件、相机、可穿戴装置、电子时钟、腕表、家用电器，例如冰箱、空调、吸尘器、烤炉、微波炉、洗衣机、空气净化器等、人工智能机器人、电视机、数字视频盘(DVD)播放器、音频播放器、各种医疗器械，例如磁共振血管造影(MRA)装置、磁共振成像(MRI)装置、计算机断层扫描(CT)装置、超声检查装置等、导航装置、全球定位系统(GPS)接收器、事件数据记录仪(EDR)、飞行数据记录仪(FDR)、机顶盒、电视(TV)盒，例如三星电子公司的HomeSyncTM、苹果公司的Apple TVTM以及谷歌公司的Google TVTM、电子词典、车用娱乐资讯装置、船用电子设备，例如导航装置、回转罗盘等、航电装置、安全装置、电子衣服、电子钥匙、摄像机、游戏主机、头戴式显示器(HMD)单元、平板显示装置、电子相框、电子相册、具有通信功能的一块家具和/或建筑物/结构的一部分、电子板、电子签名接收装置以及保护器。对于本领域技术人员显而易见的是，根据本公开的电子装置不限于上面提到的装置。
图1是根据本公开的示例性电子设备的框图。
参照图1，电子设备100包括总线110、处理器120、存储器130、用户输入模块140、显示模块150以及通信模块160。
总线110是用于使上述元件互连且用于允许通信(例如通过在上述元件之间传递控制消息)的电路。
处理器120通过例如总线110从上面提到的其他元件(例如存储器130、用户输入模块140、显示模块150以及通信模块160)接收命令，解读接收的命令，以及根据解读的命令执行操作和/或数据处理。
存储器130存储从处理器120和/或其他元件(例如用户输入模块140、显示模块150以及通信模块160)接收的命令，和/或由处理器120和/或其他元件生成的命令和/或数据。存储器130包括编程模块例如内核131、中间件132、应用程序接口(API)133以及应用134。上述编程模块中的每个可由软件、固件、硬件和/或它们中的两个或更多个的组合来配置。
内核131控制和/或管理用于运行在其他编程模块(例如中间件132、API 133和/或应用134)中实现的操作和/或功能的系统资源(例如总线110、处理器120或存储器130)。进一步地，内核131提供中间件132、API 133和/或应用134可访问所通过的接口，然后控制和/或管理电子设备100的独立的元件。
中间件132执行允许API 133和/或应用134与内核131通信和交换数据的中继功能。进一步地，关于从应用134中的至少一个接收的操作请求，中间件132通过例如向应用134中的至少一个之中的至少一个应用给予使用电子设备100的系统资源(例如总线110、处理器120和/或存储器130)的优先级来执行关于操作请求的负载平衡。
API 133是应用134控制由内核131和/或中间件132提供的功能所通过的接口，且可包括例如用于文件控制、窗口控制、图像处理和/或字符控制的至少一个接口或功能。
用户输入模块140从用户接收例如命令和/或数据，以及通过总线110向处理器120和/或存储器130传递接收的命令和/或数据。显示模块150向用户显示图像、视频和/或数据。
通信模块160在电子设备100和另一电子设备102和104和/或服务器164之间建立通信。通信模块160支持短距离通信协议(例如无线保真(WiFi)协议、蓝牙(BT)协议以及近场通信(NFC)协议)，通信网络(例如互联网、局域网(LAN)、有线局域网(WAN)、电信网络、蜂窝网络以及卫星网络)，或普通老式电话服务(POTS)，或任何其他类似的和/或合适的通信网络例如网络162等。电子装置102和104中的每个可以是相同类型和/或不同类型的电子设备。
图2是示出根据本公开的示例性硬件的框图。
硬件200可以是例如图1中示出的电子设备100。参照图2，硬件200包括至少一个处理器210、用户识别模块(SIM)卡214、存储器220、通信模块230、传感器模块240、用户输入模块250、显示模块260、接口270、音频编解码器280、相机模块291、电力管理模块295、电池296、指示器297以及马达298。
处理器210包括至少一个应用处理器(AP)211和/或至少一个通信处理器(CP)213。处理器210可以例如类似于如图1所示的处理器120。虽然图2示出了AP 211和CP 213包括在处理器210中，但是AP 211和CP 213可分别包括在不同的集成电路(IC)封装中。根据实施方式，AP 211和CP 213可包括在单个IC封装中。
AP 211运行OS或应用程序以控制连接至AP 211的多个硬件和/或软件元件，并执行包括多媒体数据的各种数据的处理和计算。AP 211可通过例如片上系统(SoC)实现。根据实施方式，处理器210可进一步包括图形处理单元(GPU)。
CP 213执行以下功能：管理数据链和/或转换电子设备(例如包括硬件200的电子设备100)和/或通过网络连接到该电子设备的另一电子设备之间的通信中的通信协议。CP 213可通过例如SoC实现。根据实施方式，CP 213执行多媒体控制功能中的至少一部分。CP 213通过使用例如用户识别模块(例如SIM卡214)执行通信网络中的终端的识别和认证。进一步地，CP 213向用户提供服务，例如语音通信服务、视频通信服务、短消息服务以及包数据服务。
进一步地，CP 213控制通信模块230的数据传输和/或接收。虽然包括CP 213、电力管理模块295和存储器220的元件在图2中示出为与AP 211分开，但是根据实施方式，AP 211可实现为包括上面提到的元件中的至少一些例如CP 213。
根据实施方式，AP 211或CP 213加载从非易失性存储器和/或易失性存储器中与之连接的其他元件中的至少一个接收的命令和/或数据，然后处理该命令和/或数据。进一步地，AP 211或CP 213存储从非易失性存储器中的其他元件中的至少一个接收的和/或产生的数据。
SIM卡214是实现SIM的卡，且插入形成在电子设备的特定位置的槽中。SIM卡214可包括特定识别信息，例如集成电路卡识别码(ICCID)，和/或用户信息例如国际移动用户识别码(IMSI)。
存储器220包括内部存储器222和/或外部存储器224。存储器220可以例如类似于如图1所示的存储器130。内部存储器222包括以下至少之一：易失性存储器例如诸如动态随机存取存储器(DRAM)、静态RAM(SRAM)、同步动态RAM(SDRAM)等，和/或非易失性存储器例如诸如一次性可编程只读存储器(OTPROM)、可编程ROM(PROM)、可擦除可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)、掩膜ROM、闪速ROM、NAND闪存、NOR闪存等。根据实施方式，内部存储器222可具有固态驱动器(SSD)的形式。外部存储器224可进一步包括闪速驱动器，例如紧凑式闪存(CF)驱动器、安全数字(SD)驱动器、微型安全数字(Micro-SD)驱动器、迷你安全数字(Mini-SD)驱动器、极速数字(xD)驱动器、存储棒等。
通信模块230包括无线通信模块231和/或射频(RF)模块234。通信模块230可以例如类似于如图1所示的通信模块160。无线通信模块231可包括例如WiFi模块233、BT模块235、GPS接收模块237和/或NFC模块239。例如，无线通信模块231通过使用无线频率提供无线通信功能。另外或可选地，无线通信模块231可包括网络接口例如诸如LAN卡，和/或用于将硬件200与网络(例如，互联网、LAN、WAN、电信网络、蜂窝网络、卫星网络、普通老式电话服务(POTS)等连接的调制解调器。NFC模块239包括用于连接至NFC天线的连接节点。
RF模块234执行数据传输/接收，例如RF信号和/或分页电子信号的传输和/或接收。RF模块234包括例如收发器、功率放大器模块(PAM)、频率过滤器、低噪声放大器(LNA)等。进一步地，RF模块234可进一步包括用于以无线和/或有线通信传输和/或接收自由空间中的电磁波的部件，例如导体、导线等。
传感器模块240包括例如以下至少之一：手势传感器240A、陀螺仪传感器240B、大气压力传感器240C、磁传感器240D、加速度传感器240E、抓握传感器240F、接近传感器240G、红绿蓝(RGB)传感器240H、生物物理传感器240I、温度/湿度传感器240J、照度传感器240K以及紫外线(UV)传感器240M。传感器模块240测量物理性质和/或检测电子设备的操作状态，以及将测量的和/或检测的信息转换成电信号。另外/可选地，传感器模块240包括例如嗅觉传感器例如电子鼻传感器、肌电图(EMG)传感器、脑电图(EEG)传感器、心电图(ECG)传感器、指纹传感器等。传感器模块240可进一步包括用于控制包括在传感器模块240中的至少一个传感器的控制电路。
用户输入模块250包括触摸面板252、可以是数字笔传感器254的笔传感器254、键256以及超声输入装置258。用户输入模块250可以是例如如图1所示的用户输入模块140。触摸面板252检测例如电容方案、电阻方案、红外方案以及声波方案之中的至少一种方案下的触摸输入。进一步地，触摸面板252可进一步包括控制器。在电容方案的情况下，触摸面板识别间接触摸以及直接触摸。直接触摸方案指的是以下方案，其中导电对象例如手指或手写笔与触摸屏直接接触。根据实施方式，间接触摸方案指的是以下方案，其中由不导电材料缠绕的导电材料例如带着手套的手指接近触摸屏，和/或不导电材料例如手指所带的手套接触触摸屏。根据实施方式，间接触摸方案指的是以下方案，其中手指触摸不导电材料，例如与触摸屏的上表面接触的用于保护触摸屏的盖。根据实施方式，间接触摸方案指的是通常称为悬停的以下方案，其中当手指接近触摸屏至预定距离内但不与触摸屏接触时生成事件。触摸面板252可进一步包括触觉层。在该事件中，触摸面板252向用户提供触觉反应。触摸面板252设置在显示模块260的屏幕例如触摸屏处。触摸面板252实现为其中触摸面板位于触摸屏上的扩展型，和/或其中触摸面板插入显示模块260中的On-Cell型和/或In-Cell型。
笔传感器254可例如以与接收用户的触摸输入的方法相同的和/或相似的方法实现，和/或通过使用用于识别的单独板实现。例如，键盘和/或触摸键可用作键256。超声输入装置258是以下装置，该装置通过生成超声波信号的笔由检测从终端到麦克风例如麦克风288的声波来识别数据，以及可实现无线识别。根据实施方式，硬件200通过使用通信模块230从外部装置(例如诸如与通信模块230连接的网络、计算机和/或服务器)接收用户输入。
显示模块260可包括面板262和/或全息元件264。显示模块260可以例如类似于如图1所示的显示模块150。例如，面板262可以是液晶显示器(LCD)和/或有源矩阵有机发光二极管(AM-OLED)。面板262可实现为例如柔性的、透明的和/或可穿戴的。面板262可通过触摸面板252和一个模块配置。全息元件264可通过使用光的干涉在空气中显示三维图像。根据实施方式，显示模块260可进一步包括用于控制面板262和/或全息元件264的控制电路。
接口270包括例如高清晰度多媒体接口(HDMI)272、通用串行总线(USB)274、投影仪276以及D-超小型件(D-sub)278。另外或可选地，接口270可包括例如SD驱动器、多媒体卡(MMC)和/或红外数据组织(IrDA)接口。
音频编解码器280将语音和电信号彼此双向转换。音频编解码器280通过例如扬声器282、接收器284、耳机286和/或麦克风288转换语音信息输入和/或输出。
根据实施方式，相机模块291是能够拍摄静止图像和运动图像的装置，且可包括至少一个图像传感器(例如诸如前镜头和/或后镜头)、图像信号处理器(ISP)和/或闪光LED。
电力管理模块295管理硬件200的电力。电力管理模块295可包括例如电力管理IC(PMIC)、充电器IC和/或电池计量器。
PMIC可安装在例如IC和/或SoC半导体中。充电方法分类成有线充电方法和无线充电方法。充电器IC给电池充电并防止来自充电器的过电压和/或过电流的引入。根据实施方式，充电器IC包括用于有线充电方法和无线充电方法中的至少一个的充电器IC。磁谐振方案、磁感应方案和/或电磁方案可举例作为无线充电方法，以及可增加用于无线充电的另外的电路，例如线圈环电路、谐振电路、整流器电路等。
电池计量器测量例如在充电期间电池296的剩余量、电压、电流和/或温度。电池296通过生成电来供电，且可以是例如可再充电电池。
指示器297显示硬件200和/或硬件的一部分例如AP 211的特定状态，例如启动状态、消息状态和/或充电状态。马达298将电信号转换成机械振动。
硬件200包括处理单元，例如用于支持移动TV的GPU。用于支持移动TV的处理单元根据数字多媒体广播(DMB)、数字视频广播(DVB)、媒体流等的标准来处理媒体数据。硬件的每个元件可通过根据电子设备的类型可具有不同名称的一个或多个部件配置。硬件可包括上面提到的元件中的至少一个，和/或可进一步包括其他附加元件，和/或可省略上面提到的元件中的一些。进一步地，根据本公开的硬件的一些元件可组合成一个实体，其可执行与组合之前的元件的功能相同的功能。
在本公开中使用的术语“模块”指的是例如包括硬件、软件和固件的至少一个组合的单元。“模块”能够与术语例如单元、逻辑、逻辑块、部件和/或电路可互换地使用。“模块”可以是一体配置的物件和/或其部件的最小单元。“模块”可以是执行至少一个功能和/或其一部分的最小单元。“模块”可以机械地和/或电子地实现。例如，“模块”可包括以下至少之一：专用IC(ASIC)芯片、现场可编程门阵列(FPGA)以及用于执行已知的和/或以后将开发的操作的可编程逻辑装置。
图3是示出根据本公开的示例性编程模块300的框图。
参照图3，编程模块300可被包括(例如被存储)在如图1所示的电子设备100例如存储器130中。编程模块300的至少一部分可通过软件、固件、硬件和/或它们中的两个或更多个的组合配置。编程模块300包括在硬件例如硬件200中实现的OS，以控制与电子装置例如电子装置100相关的资源和/或在OS上被驱动的各个应用例如应用370。例如，OS可以是安卓(Android)、iOS、Windows、塞班(Symbian)、Tizen、Bada等。参照图3，编程模块300包括内核310、中间件330、API 360以及应用370。
可以如同内核131的内核310包括系统资源管理器311和/或装置驱动器312。系统资源管理器311可包括例如进程管理器、存储器管理器以及文件系统管理器。系统资源管理器311可控制、分配和/或收集系统资源。装置驱动器312可包括例如显示器驱动器、相机驱动器、蓝牙驱动器、共享存储器驱动器、USB驱动器、键盘驱动器、WiFi驱动器以及音频驱动器。进一步地，根据实施方式，装置驱动器312可包括进程间通信(IPC)驱动器(未示出)。
中间件330包括预先实现为提供由应用370共同使用的功能的多个模块。进一步地，中间件330通过API 360提供功能，使得应用370可有效地使用电子设备内有限的系统资源。例如，如图3所示，中间件330包括以下至少之一：运行时间库335、应用管理器341、窗口管理器342、多媒体管理器343、资源管理器344、电力管理器345、数据库管理器346、数据包管理器347、连接管理器348、通知管理器349、位置管理器350、图形管理器351以及安全管理器352。
运行时间库335可包括库模块，编译器使用该库模块以在应用370中的一个运行时通过编程语言增加新的功能。根据实施方式，运行时间库335执行输入/输出、存储器管理和/或用于算术函数的功能。
应用管理器341管理应用370中的至少一个的生命周期。窗口管理器342管理由屏幕使用的图形用户界面(GUI)资源。多媒体管理器343检测用于各种媒体文件的再现的格式，并通过使用适合于对应格式的编解码器执行媒体文件的编码和/或解码。资源管理器344管理资源，例如应用370中的至少一个的源代码、存储器以及存储空间。
电力管理器345在与基本输入/输出系统(BIOS)一起操作时管理电池和/或电力，并提供用于操作的电力信息。数据库管理器346管理待由应用370中的至少一个使用的数据库的生成、搜索和/或改变。数据包管理器347管理以数据包文件的形式分布的应用的安装和/或更新。
例如，连接管理器348管理无线连接例如WiFi或蓝牙。通知管理器349以不打扰用户这样的方式显示和/或通知事件，例如到达消息、承诺、接近通知等。位置管理器350管理电子设备的位置信息。图形管理器351管理将向用户提供的图形效果和/或与图像效果相关的用户界面。安全管理器352提供用于系统安全和/或用户认证的所有安全功能。根据实施方式，当电子设备例如电子设备100具有电话呼叫功能时，中间件330进一步包括用于管理电子设备的语音和/或视频通信功能的电话管理器。
中间件330通过前面提到的内部元件模块的各种功能组合而生成并使用新的中间件模块。中间件330提供根据OS的类型定制的模块以提供差异化的功能。进一步地，中间件330动态地去除一些现有的元件和/或增加新的元件。因此，中间件330排除了本文描述的一些元件，进一步包括其他元件，和/或将这些元件替换为具有不同名称且执行类似功能的元件。
可类似于API 133的API 360是一组API编程功能，且可根据OS设置有不同的配置。例如，在安卓或iOS的情况下，为每个平台提供一个API组，以及在Tizen的情况下，提供两个或更多个API组。
应用370可包括例如预加载的应用和/或第三方应用。
编程模块300的至少一部分可通过存储在计算机可读的存储介质中的命令实现。当由至少一个处理器例如处理器210执行命令时，至少一个处理器执行对应于命令的功能。计算机可读的存储介质可以是例如存储器204。编程模块300的至少一部分可通过例如处理器210实现(例如运行)。编程模块300的至少一部分可包括例如用于执行至少一个功能的模块、程序、例程、一组指令和/或进程。
诸如编程模块300的编程模块的上面提到的元件的称谓可根据OS的类型改变。根据本公开的编程模块可包括上面提到的元件中的至少一个，和/或可进一步包括其他附加元件，和/或可省略上面提到的元件中的一些。通过编程模块和/或根据本公开的其他元件执行的操作可通过顺序的、并行的、重复的和/或启发式的方法处理，以及可省略一些操作和/或可增加其他操作。
图4A、4B、4C和4D是根据本公开的用于描述显示网页的过程的网络浏览器屏幕。
参照图4A，电子装置400(例如，电子装置200)的进程(例如，进程211)控制显示器(例如，显示模块260)显示网页410。屏幕是应用运行屏幕(例如，网络浏览器屏幕)，且可以是对应的电子装置的整个屏幕或仅仅是该屏幕的一部分。用户可通过在电子装置400的屏幕上显示的网页410上使用手指420来作出手势(例如，触摸然后在特定时间内释放触摸，例如敲击)。电子装置400的触摸面板(例如，触摸面板252)识别敲击，且向处理器传输关于识别的敲击的信息。
处理器(例如，处理器211)分析关于敲击的信息以确定触摸位置(例如，触摸坐标)。处理器识别网页410的对象之中对应于触摸位置的对象。例如，处理器基于例如区分符(例如，定界符或帧)、类型(例如，图标、图像或文本)或超链接来区分网页410的对象。定界符可以是例如箭头、图或呼叫符号，以及帧可以是例如文本或框之间的线。
进一步地，处理器可将其他对象之中位于对应于触摸坐标的区域(例如，最接近触摸坐标的区域)中的对象确定为对应于触摸位置的对象。处理器运行对应于确定的对象的功能(例如，电子装置的功能或应用功能)。例如，确定的对象可链接到内容(例如，下载的之前的网页或还未下载的新的网页)。根据实施方式，处理器可参考与对应的网页相关的信息(例如，地址信息或参考字段)，而确定识别的对象是之前的网页还是新的网页。
根据实施方式，当识别的对象是之前的网页时，处理器访问存储器(例如，存储器204)以读取之前的网页。当识别的对象是新的网页时，处理器控制通信模块(例如，通信模块230)下载新的网页。根据实施方式，在加载网页所持续的时间(例如，读取时间或下载时间)期间，处理器控制显示模块260显示为加载引导指定的信息(例如，白图像)。根据实施方式，加载引导信息可以不显示。例如，待显示的目标可从网页410改变至另一网页，而不显示加载引导信息。
根据任何实施方式，处理器控制显示器显示候选列表持续指定的时间(例如，加载时间)。根据实施方式，候选列表可包括接近识别的对象的一个或多个对象。例如，处理器将基于触摸坐标配置的区域确定为用于确定候选列表的区域(在下文中，为了便于描述称为“触摸区域”)。进一步地，处理器可将存在于触摸区域内的对象(例如，对象的至少一部分存在于触摸区域内或者对象完全包括在触摸区域内的情况)确定为将包括在候选列表中的候选物。
参照图4B，处理器(例如，处理器211)控制显示器(例如，显示模块260)在屏幕上显示候选列表430。根据实施方式，处理器通过显示器在另一网页440的至少一部分上显示候选列表430。网页440可以是例如对应于由用户输入选择的对象的功能的运行信息。运行信息可以是在通过处理器运行对应于对象的功能(例如，网页440)时，通过显示器提供给用户作为用户接口的信息。根据任何实施方式，显示器可将候选列表430连同加载引导信息(例如在白图像上)一起显示。根据实施方式，候选列表430可包括候选对象(例如，对象432、433、434、435和436)以及通过输入识别的对象431(例如，对应于当前运行的网页440的对象)。
根据实施方式，候选列表430可与对应于识别的对象431的运行信息(例如，通过显示器显示的网页440)一起显示。例如，候选列表430可从运行信息显示在显示器上的时间点起与运行信息一起显示。可选地，无论对应于识别的对象431的运行信息是否显示，都可显示候选列表430。例如，候选列表430可在运行信息显示之前预先显示。可选地，运行信息可以首先显示，以及候选列表430可基于新的输入(例如，指定的触摸输入或悬停输入)而显示。
根据实施方式，显示器可突出显示识别的对象431，以使识别的对象431与其他对象(例如，如所示出的深背景色和处于粗体类型的对应的文本)区分开。进一步地，显示器可在放大对象使之比以前大之后显示候选列表430的对象。进一步地，显示器可显示候选列表430的对象，使得对象之间的间隔比以前进一步彼此远离。用户420可在候选列表430的候选对象中的至少一个(例如，候选对象432)上执行触摸输入。然后，处理器可识别候选对象432、433、434、435和436之中对应于触摸输入的候选对象432。
参照图4C，处理器控制显示器例如突出显示识别的候选对象432，以使识别的候选对象432与其他对象区分开。根据实施方式，处理器运行对应于新识别的候选对象432的功能(例如，电子装置的功能或应用功能)。例如，处理器控制显示模块260在屏幕上(例如，在候选列表430后面)显示链接到选择的候选对象432的网页450。根据实施方式，为了运行对应于新识别的候选对象432的功能，处理器连续运行之前选择的对象的功能(例如，将之前选择的对象的功能连同对应于新选择的对象的功能一起运行)。可选地，处理器可停止运行之前选择的对象的功能并运行新选择的对象的功能。
参照图4C和4D，处理器(例如，处理器211)终止候选列表430的显示。例如，当在候选列表430中(例如，通过用户)选择终止按钮433时，处理器终止候选列表430的显示并控制为仅显示网页450。处理器在加载网页450时将候选列表430连同网页450一起显示。当网页450的加载完成时，处理器终止候选列表430的显示。可选地，处理器可响应于与终止按钮433相关的用户输入，立即终止候选列表430的显示。
根据任何实施方式，当在显示候选列表430的状态下对于指定的时间(例如，加载时间)未识别用户输入时，处理器可控制为终止候选列表430的显示且仅显示网页450。图4D示出了在完全终止候选列表430的显示之后显示网页450的示例。
根据实施方式，终止按钮433可基于候选列表430的显示插入候选列表430中，且与候选列表430一起提供给用户。根据另一实施方式，终止按钮433可以不显示在候选列表430中，然后当获得新的用户输入(例如，触摸候选列表430的输入或者与候选列表430相关的悬停输入)时，可基于新的用户输入而显示在候选列表430中。
图5A和5B是根据本公开的用于描述确定由用户从触摸屏上显示的对象中选择的对象和相邻的候选对象的过程示例的概念图。
参照图5A，处理器(例如，处理器211)分析触摸输入以确定触摸区域510。处理器将触摸区域510的中心点确定为触摸位置511。处理器通过使用触摸位置511改变触摸区域。例如，处理器将使得线512作为其对角线的正方形区域520确定为改变的触摸区域，线512以触摸位置511作为中心。改变的触摸区域可具有不同的形式，而非正方形。处理器211将其他对象之中最接近触摸位置511的对象(例如对象530)确定为由用户选择的对象。此外，处理器211将其至少一部分包括在触摸区域510或触摸区域520内的对象(例如对象540)确定为候选对象。可能不存在其至少一部分包括在触摸区域510或触摸区域520内的对象。然后，例如，处理器211可省略候选列表的显示。根据任何实施方式，无论对象的至少一部分是否包括在触摸区域510或触摸区域520内，可显示候选列表。例如，处理器211将接近由用户选择的对象(例如，对象530)的对象(例如，对象540)确定为候选对象。
返回参照图5A，处理器211通过使用例如已知的校正技术(例如插值算法或噪声去除算法)而将触摸位置511改变至触摸位置551。处理器211通过使用触摸位置551将触摸区域510重新配置为触摸区域550。处理器211将对象之中包括触摸位置551的对象530确定为由用户选择的对象。进一步地，处理器211将其至少一部分包括在重新配置的触摸区域550内的对象540确定为候选对象。
参照图5A和5B，处理器211将包括触摸区域510和触摸区域550的区域560重新配置为触摸区域。处理器211将其至少一部分包括在重新配置的触摸区域560内的对象(例如，对象530和540)之中，使得其本身的最大部分位于重新配置的触摸区域560中的对象(例如，对象530)确定为由用户选择的对象。进一步地，处理器211将剩余的对象(例如，对象540)确定为候选对象。
图6A、6B和6C是根据本公开的用于描述再现视频的示例性过程的再现屏幕。
参照图6A，处理器(例如，处理器211)控制显示模块(例如，显示模块260)在屏幕上显示播放器运行图像610。播放器运行图像610包括再现帧611和再现进度条612。进一步地，播放器运行图像610进一步包括各种功能图标或按钮。例如，播放器运行图像610可进一步包括倒回按钮613、播放/暂停按钮614、快进按钮615、音量控制按钮616以及当前显示的帧(例如，再现帧611)的时间点/对应视频617的总时间(例如，0:01/2:21)。用户可在再现进度条612上执行触摸输入(例如，直接触摸、悬停等)。响应于触摸输入，处理器211可确定触摸区域620。触摸区域620可包括再现进度条612的至少一部分和音量控制按钮616。处理器211可将再现进度条612确定为由用户选择的对象，以及将音量控制按钮616确定为候选对象。当再现进度条612确定为由用户选择的对象时，处理器211可将最接近触摸区域620的中心点的再现进度条612的位置确定为对应于新的再现时间点的位置。
参照图6B，处理器211从新的再现时间点开始再现视频。例如，处理器211作出控制以显示对应于45秒的再现时间点的再现帧618。当音量控制按钮616确定为候选对象时，处理器211作出控制以显示再现帧619上的对应音量控制条619。用户在音量控制条619上执行触摸输入。响应于触摸输入，处理器211确定触摸位置630。处理器211将最接近触摸位置630的中心点的音量控制条619的位置确定为音量控制位置。处理器211控制音频处理模块(例如，音频编解码器280)以对应于确定的音量控制位置的音量输出视频的音频信号。
参照图6C，在音量控制之后(或者在音量控制的同时，处理器211使再现时间点回到之前的时间点(例如，1秒)。显示模块260在处理器211的控制下显示对应于1秒的再现时间点的再现帧611。
图7A、7B、7C、7D、7E、7F和7G示出了可根据触摸输入选择的各个对象。
参照图7A，处理器(例如，处理器211)控制显示器(例如，显示模块260)显示列表710。如图7A所示，对象选择列表710包括彼此接近的对象。当用户在列表710上执行触摸输入时，可能选择用户不是本意选择的对象。例如，处理器211识别是否选择对象711。然后，处理器211终止列表710的显示并控制显示模块260在输入窗口中显示对象711。进一步地，处理器211控制显示模块260将包括位于对象711上方的至少一个对象(例如，对象712)和位于对象711下方的至少一个对象(例如，对象713)的候选列表连同输入窗口一起显示。例如，当在从识别对象711的选择的时间点起经过指定的时间之前，从候选列表中选择至少一个对象时，处理器211终止候选列表的显示，且控制显示模块260显示从候选列表中选择的对象，而非对象711。当等到指定的时间经过而没有选择时，处理器211终止候选列表的显示且保持在输入窗口中显示对象711。
参照图7B，处理器211控制显示模块260显示多个输入窗口，例如文本输入窗口721、电子邮件(Email)输入窗口722、URL输入窗口723、电话(Telephone)号码输入窗口724以及文本区域(Textarea)输入窗口725。当识别到由用户从各个输入窗口中选择一个输入窗口(例如，文本输入窗口721)时，处理器211控制显示模块260在文本输入窗口721内显示光标726。进一步地，处理器211将电子邮件输入窗口722确定为候选对象，且控制显示模块260显示指示电子邮件输入窗口722的图标。当选择图标时，处理器211终止图标的显示，且控制显示模块260在电子邮件输入窗口722中显示光标726。
根据任何实施方式，对象可以是图7C中示出的文本输入框730、图7D中示出的水平滚动条741和竖直滚动条742、图7E中示出的按钮721、752和753、图7F中示出的检查框(Checkbox)761、762、763和764、以及图7G中示出的链接地址771、772和773。当用户在按钮752上执行触摸输入时，处理器211控制显示模块260作出显示，使得候选列表与按钮752重叠。显示的候选列表包括按钮752和按钮751。
图8A、8B和8C是根据本公开的用于描述重新配置光标的位置的过程的文本输入框。
参照图8A，处理器(例如，处理器211)控制显示器(例如，显示模块260)显示文本输入框810。文本输入框810包括字符。用户在文本输入框810上执行触摸输入。响应于触摸输入，处理器211确定触摸区域820，并将触摸区域820的中心点确定为触摸位置。处理器211基于触摸位置确定光标的显示位置。例如，处理器211将其至少一部分包括在触摸区域820内的字符(例如，“i”，“j”和“k”)之中，最接近触摸位置的字符(例如，“j”)之前(即，“i”和“j”之间)的位置确定为光标的显示位置。在另一示例中，处理器211将“j”之后(即，“j”和“k”之间)的位置确定为光标的显示位置。处理器211控制显示模块260在确定的显示位置上显示光标。
参照图8B，处理器211控制显示模块260显示弹出窗口830。弹出窗口830指示文本输入框810的部分区域，且处理器211基于在文本输入框810中显示的光标的位置确定该部分区域。例如，处理器211控制显示模块260显示“弹出窗口830包括位于光标之前的一个或多个字符(例如，“i”)、光标、以及位于光标之后的一个或多个字符(例如，“j”和“k”)”。在处理器211的控制下，显示模块260显示与在文本输入框810中的i│(光标)j k相比放大的i│(光标)j k。进一步地，显示模块260显示它们之间的间隔进一步分开的i│(光标)j k。用户在弹出窗口830上执行触摸输入。响应于触摸输入，处理器211确定触摸区域840，且将触摸区域840的中心点确定为触摸位置。
参照图8C，处理器211基于弹出窗口830的触摸位置改变光标的显示位置。例如，当弹出窗口830中的字符之中最接近触摸位置的字符是“i”时，处理器211将光标的显示位置从“在j之前”改变到“在i之前”。
图9A、9B、9C和9D是根据本公开的用于描述显示网页的过程的网络浏览器屏幕。图10示出了可由处理器识别的各种手势。
参照图9A，处理器(例如，处理器211)控制显示器(例如，显示模块260)在屏幕上显示网页910的一部分(例如，上部)。用户在网页910的上部上作出各种手势。例如用户作出横摇920。然而，触摸面板(例如，触摸面板252)可将其识别为例如敲击而非横摇920，并将对应于敲击的事件传输至处理器211。这样的错误识别可在下面的表1中示出的情况下产生。
表1
在表1中，手指向下可以是其中对象(例如，手指)接触触摸屏的手势，运动可以是其中在对象接触触摸屏的状态下对象运动的手势，以及手指向上可以是其中从触摸屏解除对象的接触的手势。可选地，在表1中，手指向下可以是其中对象接近触摸屏至预设距离内的手势，运动可以是其中在对象接近触摸屏至预设距离内的状态下对象运动的手势，以及手指向上可以是其中对象离开触摸屏达预设距离的手势。
参照图9B，处理器211可识别对应于敲击的对象，且运行对应于识别的对象的功能。例如，处理器211控制显示模块260显示链接至对象的网页930。进一步地，处理器211控制显示模块260在网页930上显示候选列表940。候选列表940可包括指示与识别的手势相关的候选手势的图标(例如，横摇(Panning)图标941和放大(Zoom in)图标942)。进一步地，候选列表940可包括候选对象。可以不显示候选对象。例如，存储器204存储与网页的显示相关的环境设置信息，环境设置信息可包括指示候选对象的显示配置为打开还是关闭的值。进一步地，环境设置信息可包括指示候选手势的显示配置为打开还是关闭的值。当候选对象的显示配置为关闭且候选手势的显示配置为打开时，处理器211控制显示模块260仅显示图标。当候选对象的显示配置为打开且候选手势的显示配置为打开时，处理器211控制显示模块260显示候选对象和图标。环境设置信息可以是可由用户改变的信息。例如，处理器211响应于用户输入(例如，触摸输入、键入或语音输入)改变与网页的显示相关的环境设置信息。当不存在候选对象时，无论环境设置信息如何，处理器211都控制为仅显示指示候选手势的信息。
参照图9C和9D，用户可通过使用手指触摸横摇图标941。响应于触摸，处理器211终止候选列表940的显示。进一步地，处理器211控制显示模块260在网页910上显示候选列表920。
存在可由处理器221识别的各种用户手势。例如，参照图10，可由处理器221识别的用户手势可包括一个手指拖曳、单手拖曳、一个手指敲击、媒体拖曳(本文中的媒体对应于例如候选列表)、两个手指缩小、双手缩小、一个手指双敲击、媒体收缩、两个手指放大、双手放大、两个手指敲击、媒体扩展、两个手指旋转、双手旋转、两个手指双敲击、媒体旋转、锁定两个+1个手指纵摇、锁定两个+1个手指横摇、媒体关闭、三个手指纵摇、三个手指横摇、三个手指轻拂、信息隐藏、两个手指竖直滚动、两个手指水平滚动、两个手指轻拂、信息显示等。图10中示出的手势可以是在用户使对象(例如，手指)与触摸屏接触的状态下作出的2D手势或者在用户使对象(例如，手指)运动到距触摸屏预定距离内的状态下作出的3D手势。
根据本公开，当电子装置识别其他对象之中由用户选择的对象时，电子装置运行识别的对象的功能且显示候选列表。候选列表可包括未被选择的所有对象。进一步地，电子装置可将未被选择的对象中的仅仅一些确定为候选物且显示确定的对象。
根据本公开，电子装置识别用户手势，运行识别的手势的功能，以及显示指示候选手势的信息(例如，图标)。电子装置可将在待显示的目标(例如，网页)中可识别的所有手势确定为候选物。可选地，电子装置可将所有手势之中与识别的手势相关的手势确定为候选物。
处理器(例如，处理器211)基于在下面的表2中示出的触摸位置、历史信息，灵敏度以及频率中的至少一个，从其他对象中选择候选对象且从手势中选择候选手势。
表2
图11A、11B、11C、11D、11E、11F和11G是描述布置候选物的示例性方法的视图。
参照图11A、11B、11C和11D，显示器(例如，显示模块260)在中央显示候选物之中具有最高优先级的候选物1(例如，对象或手势)，且以围绕候选物1的圆的形式显示候选物2至9。当电子装置200是例如智能手机时，处理器211通过使用由传感器模块240(例如，抓握传感器240F)测量或检测的信息来确定用户是否抓握电子装置200。当用户抓握电子装置200时，处理器211确定电子装置200由左手还是右手抓握。当确定手是左手时，处理器211将具有更高的优先级的候选物布置在具有相对较低的优先级的候选物的左侧，以使在用户用左手抓握电子装置200的状态下，用户可通过使用左手的手指(例如，拇指)更加容易地选择具有更高的优先级的候选物。例如，显示模块260在处理器211的控制下在左侧显示候选物2(见图11A和11B)。在任何实施方式中，当确定手是右手时，处理器211可将具有更高的优先级的候选物布置在具有相对较低的优先级的候选物的右侧。参照图11C和11D，可在右侧显示候选物2。
参照图11E和11F，候选物布置在屏幕的各个区域中的一个中。例如，处理器211可将具有最高的优先级的候选物1布置在屏幕的预定位置(例如，屏幕的中央)，且基于候选物1布置的位置将屏幕划分成象限A、B、C和D。当确定手是右手时，处理器211将具有之后的优先级的候选物(例如，候选物2，3和4)布置在象限A中。当确定手是右手时，处理器211将候选物2，3和4布置在象限D中。
参照图11G，处理器211将具有最高的优先级的候选物1布置在屏幕的一个位置(例如，屏幕的中央)。进一步地，处理器211可以以螺旋形式顺序地布置具有之后的优先级的候选物(例如，候选物2，3，4，5，6，7，8和9)。
图12和图13A、13B和13C是描述以各种形式显示候选物的示例性方法的视图。
参照图12，显示器(例如，显示模块260)在处理器(例如，处理器211)的控制下以文本形式显示候选对象1210，以使用户可容易地识别对应的对象。显示模块260以缩略图形式显示候选对象1220。进一步地，显示模块260以从对应手势的图像生成的图标形式显示候选手势1230，1240，1250和1260。
参照图13A，处理器从触摸面板252接收与网页1310上手指1320的敲击1330相关的事件，且确定敲击1330的触摸位置。处理器211基于触摸位置识别由用户选择的对象。进一步地，处理器211基于触摸位置、历史信息、灵敏度以及频率中的至少一个，从除了网页1310中选择的对象之外的剩余对象中选择候选对象。例如，处理器211将距触摸位置预设半径内的区域确定为中心，且将其至少一部分包括在触摸区域内的对象确定为候选物。当每个确定的候选物是图像时，处理器211控制显示模块260以缩略图形式显示候选物(例如，候选物1341、1342、1343和1344)。
参照图13B和13C，当候选物是图像1350时，处理器将图像1350减小成缩略图，且控制为显示缩略图。可选地，处理器211可从图像1350提取一部分(例如，主要内容1351)，将提取的主要内容1351减小成缩略图，以及控制为显示缩略图。处理器211可使用标记在图像1350上的标签信息以提取主要内容1351。标签信息指的是与图像相关的附加信息，文件格式是例如可交换图像文件格式(Exif)。例如，标签信息可包括对象(例如，主要内容1351)的位置信息和对象的身份信息(例如，人名、地址、电话号码以及对象名称)。当不存在标签信息时，处理器211可基于已知的各种图像识别方案来提取主要内容1351。
图14是根据本公开的描述操作候选列表的方法的示例的视图。
参照图14，处理器(例如，处理器211)控制显示器(例如，显示模块260)显示候选列表1410。候选列表1410可包括用于最小化候选列表1410的按钮1411、用于最大化候选列表1410的按钮1412、以及用于终止候选列表1410的显示的按钮1413。当用户选择最小化按钮1411时，处理器211控制显示模块260显示对应于候选列表1410的信息(例如，图标)。当用户选择最大化按钮1412时，处理器211控制显示模块260全屏显示候选列表1410。当用户选择终止按钮1413时，处理器211终止候选列表1410的显示。
图15A、15B和15C是根据本公开的用于描述显示网页的过程的网络浏览器屏幕。
参照图15A，处理器(例如，处理器211)控制显示器(例如，显示模块260)显示网页1510。处理器211从触摸面板252接收与网页1510)中的触摸输入(例如，敲击1520)相关的事件。
参照图15B，处理器211识别对应于敲击1520的对象并加载对应于识别的对象的网页(例如，从存储器读取网页或通过通信模块230从外部装置下载网页)。在网页的加载期间，处理器211控制显示模块260显示加载引导图像1530。进一步地，处理器211生成候选列表1540且控制显示模块260在加载引导图像1530上显示候选列表1540。用户可从候选列表1540中选择候选对象1541。
参照图15C，响应于候选对象1541的选择，处理器211撤销加载，加载对应于候选对象1541的网页1550，以及控制显示模块260显示网页1550。
图16A、16B和16C是根据本公开的用于描述显示网页的过程的网络浏览器屏幕。
参照图16A，处理器(例如，处理器211)控制显示器(例如，显示模块260)显示网页1610。处理器211从触摸面板252接收与网页1610中的触摸输入(例如，敲击1620)相关的事件。
参照图16B，处理器211识别对应于敲击1620的对象并加载对应于识别的对象的网页。在网页的加载期间，处理器211控制显示模块260显示引导图像1630。进一步地，处理器211控制显示模块260在加载引导图像1630上显示候选对象(例如，输入窗口1640)。用户选择输入窗口1640。
参照图16C，响应于输入窗口1640的选择，处理器211撤销加载且再次控制显示模块260显示网页1610。另外，响应于输入窗口1640的选择，处理器211控制显示模块260在网页1610上显示键盘1650。
图17A和17B是根据本公开的描述将候选对象的列表置于屏幕上的示例性方法的视图。
参照图17A，处理器(例如，处理器211)控制显示器(例如，显示模块260)显示网页1710。进一步地，处理器211控制显示模块260在网页1710上显示候选列表1720。
参照图17B，处理器211将屏幕分成例如两个区域，且控制显示模块260在屏幕的上部区域上显示网页1710以及在屏幕的下部区域上显示候选列表1720。
图18A、18B和18C是根据本公开的描述配置是否操作候选列表的示例性方法的视图。
参照图18A，处理器(例如，处理器211)控制显示器(例如，显示模块260)显示环境设置信息1810。用户在环境设置信息1810中的桌面视图项1811上执行触摸输入(例如，敲击)。参照图18B，响应于项1811的选择，处理器211控制显示模块260显示项1811的设置信息1820。用户可在设置信息1820中的“建议的操作按钮激活(recommended operation button activation)”项1821上执行触摸输入(例如，敲击)。参照图18C，响应于项1821的选择，处理器211可控制显示模块260显示项1821的设置信息1830。当用户选择设置信息1830中的开启(ON)时，处理器211执行确定候选物(例如，候选对象或候选手势)的功能以显示确定的候选物。当用户选择关闭(OFF)时，不执行以上功能。
图19是示出根据本公开的运行功能的示例性方法的流程图。
参照图19，在操作1910中，电子装置(例如，电子装置200)在触摸屏上显示对象(例如，包括在第一网页中的图像、文本等)。在操作1920中，电子装置200识别在触摸屏上执行的用户的第一手势。在操作1930中，电子装置200确定对象之中对应于第一手势的第一对象。在操作1940中，电子装置200运行对应于第一对象的第一功能。进一步地，在操作1940中，电子装置200将除了第一对象之外的对象中的至少一个确定为候选物，且显示包括候选对象的候选列表。另外，在操作1940中，电子装置200将除了第一手势之外的手势中的至少一个确定为候选物，将关于确定的候选手势的信息插入候选列表中，以及显示候选列表。在操作1950中，电子装置200识别对关于候选列表中的第二手势或第二对象的信息的选择。响应于对关于第二手势或第二对象的信息的选择，在操作1960中，电子装置200撤销第一功能的运行且运行对应于第二手势或第二对象的第二功能。
在实施方式中，方法包括通过功能上连接至电子装置的显示器显示多个对象。方法还包括获得对应于多个对象之中的第一对象的输入。方法进一步包括确定多个对象之中与输入相关的第二对象。方法包括通过显示器显示对应于第一对象的功能的运行信息以及与第二对象相关的对象信息。
第二对象的确定可包括确定与输入相关的触摸区域，以及选择其至少一部分显示在触摸区域中的对象作为第二对象。
运行信息和对象信息的显示可包括同时显示运行信息和对象信息。可选地，运行信息和对象信息的显示可包括显示运行信息。方法还可包括获得与显示器相关的指定的用户输入。方法可进一步包括基于指定的用户输入显示对象信息。可选地，运行信息和对象信息的显示可包括显示与第一对象相关的对象信息。
方法可进一步包括响应于对应于与第二对象相关的对象信息的输入，撤销对应于第一对象的功能的运行。
方法可进一步包括获得对应于与第二对象相关的对象信息的第二输入，以及显示与对应于第二输入的功能相关的运行信息。
方法可进一步包括当经过预设时间时终止对象信息的显示。预设时间可包括用于功能的运行的数据被加载所持续的加载时间。加载时间可包括从存储器中读取数据所持续的时间或者从外部装置下载数据所持续的时间。当加载数据时，用于加载引导的指定的信息与对象信息一起被显示。
运行信息和对象信息的显示可包括将来自多个对象的除了第一对象之外的一个或多个对象确定为候选对象，将除了输入之外的一个或多个第二输入确定为候选输入，以及显示与候选输入相关的输入信息和候选对象。候选输入的确定可包括基于输入的子输入将与输入相关的一个或多个输入确定为候选输入。
第二对象的确定可包括确定对应于输入的、触摸屏的触摸位置。方法还可包括将以触摸位置为中心的预设区域确定为触摸区域。方法可进一步包括将其至少一部分存在于触摸区域内的对象确定为候选对象。
在实施方式中，方法可包括通过用户获得输入。方法还可包括通过功能上连接至电子装置的显示器，显示对应于获得的输入的功能的运行信息以及与除了获得的输入之外的一个或多个输入相关的输入信息。
在实施方式中，电子装置可包括显示多个对象的显示模块。电子装置还可包括安装在显示模块的触摸屏中的触摸面板。电子装置可进一步包括处理器。处理器通过触摸面板获得对应于多个对象之中的第一对象的输入，确定多个对象之中与输入相关的第二对象，以及控制显示模块显示对应于第一对象的功能的运行信息和与第二对象相关的对象信息。
处理器可确定与输入相关的触摸区域，以及选择其至少一部分显示在触摸区域中的对象作为第二对象。
处理器可响应于对应于与第二对象相关的对象信息的输入，撤销对应于第一对象的功能的运行。
处理器可获得对应于与第二对象相关的对象信息的第二输入，以及控制显示模块显示对应于第二输入的功能的运行信息。
在实施方式中，电子装置可包括显示模块，显示模块包括具有触摸面的触摸屏。电子装置还可包括处理器，处理器配置为通过触摸面板获得用户的输入，以及控制显示模块显示对应于获得的输入的功能的运行信息和与除了获得的输入之外的一个或多个输入相关的输入信息。
根据如上所述的本公开的方法可实现为可通过各种计算机运行的程序命令并记录在计算机可读的记录介质中。记录介质可包括程序命令，数据文件以及数据结构。进一步地，程序命令可专门设计和配置以用于本公开，或者可在对于计算机软件领域的技术人员来说是已知的之后使用。记录介质可包括磁介质例如硬盘、软盘和磁带，光学介质例如紧凑盘只读存储器(CD-ROM)和数字通用光盘(DVD)，磁-光学介质例如软光盘，以及硬件装置例如只读存储器(ROM)、随机存取存储器以及闪速存储器。另外，程序指令可包括可在计算机中通过使用解释器运行的高级语言代码以及由编译器生成的机器代码。
虽然已经通过示例性实施方式描述了本公开，但是可使本领域技术人员想到各种改变和修改。意图在于，本公开包括这样的改变和修改，如果其落入所附权利要求的范围内。

Claims (15)

1.一种通过电子装置处理对象的方法，所述方法包括：
通过功能上连接至所述电子装置的显示器显示多个对象；
获得对应于所述多个对象之中的第一对象的输入；
确定所述多个对象之中与所述输入相关的第二对象；以及
通过所述显示器显示对应于所述第一对象的功能的运行信息以及与所述第二对象相关的对象信息。
2.根据权利要求1所述的方法，其中确定所述第二对象包括：
确定与所述输入相关的触摸区域；以及
选择其至少一部分显示在所述触摸区域中的对象作为所述第二对象。
3.根据权利要求1所述的方法，其中显示所述运行信息和所述对象信息包括：
显示所述运行信息；
获得与所述显示器相关的指定的用户输入；以及
基于所述指定的用户输入显示所述对象信息。
4.根据权利要求1所述的方法，其中显示所述运行信息和所述对象信息包括：显示与所述第一对象相关的对象信息。
5.根据权利要求1所述的方法，进一步包括：响应于对应于与所述第二对象相关的所述对象信息的输入，撤销对应于所述第一对象的功能的运行。
6.根据权利要求1所述的方法，进一步包括：
获得对应于与所述第二对象相关的所述对象信息的第二输入；以及
显示与对应于所述第二输入的功能相关的运行信息。
7.根据权利要求1所述的方法，进一步包括：当经过预设时间时终止所述对象信息的显示，
其中所述预设时间包括用于所述功能的运行的数据被加载所持续的加载时间。
8.根据权利要求1所述的方法，其中显示所述运行信息和所述对象信息包括：
将来自所述多个对象的除了所述第一对象之外的一个或多个对象确定为候选对象，将除了所述输入之外的一个或多个第二输入确定为候选输入；以及
显示与所述候选输入相关的输入信息和所述候选对象。
9.根据权利要求8所述的方法，其中确定所述候选输入包括：基于所述输入的子输入将与所述输入相关的一个或多个输入确定为所述候选输入。
10.根据权利要求1所述的方法，其中确定所述第二对象包括：
确定对应于所述输入的、触摸屏的触摸位置；
将以所述触摸位置为中心的预设区域确定为所述触摸区域；以及
将其至少一部分存在于所述触摸区域内的对象确定为候选对象。
11.一种电子装置，包括：
显示模块，配置为显示多个对象，其中所述显示模块包括具有触摸面板的触摸屏；以及
处理器，配置为通过所述触摸面板获得对应于所述多个对象之中的第一对象的输入，确定所述多个对象之中与所述输入相关的第二对象，以及控制所述显示模块显示对应于所述第一对象的功能的运行信息和与所述第二对象相关的对象信息。
12.根据权利要求11所述的电子装置，其中所述处理器配置为确定与所述输入相关的触摸区域，以及选择其至少一部分显示在所述触摸区域中的对象作为所述第二对象。
13.根据权利要求11所述的电子装置，其中所述处理器配置为响应于对应于与所述第二对象相关的所述对象信息的输入，撤销对应于所述第一对象的功能的运行。
14.根据权利要求11所述的电子装置，其中所述处理器配置为获得对应于与所述第二对象相关的所述对象信息的第二输入，以及控制所述显示模块显示对应于所述第二输入的功能的运行信息。
15.一种电子装置，包括：
显示模块，其中所述显示模块包括具有触摸面板的触摸屏；以及
处理器，配置为通过所述触摸面板获得用户的输入，以及控制所述显示模块显示对应于获得的输入的功能的运行信息和与除了所获得的输入之外的一个或多个输入相关的输入信息。
CN201480070621.5A 2013-12-23 2014-11-26 用于处理通过显示器提供的对象的方法和设备 Withdrawn CN105849683A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2013-0160954 2013-12-23
KR1020130160954A KR20150073354A (ko) 2013-12-23 2013-12-23 디스플레이를 통하여 제공되는 오브젝트 처리 방법 및 장치
PCT/KR2014/011436 WO2015099300A1 (en) 2013-12-23 2014-11-26 Method and apparatus for processing object provided through display

Publications (1)

Publication Number Publication Date
CN105849683A true CN105849683A (zh) 2016-08-10

Family

ID=53400038

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480070621.5A Withdrawn CN105849683A (zh) 2013-12-23 2014-11-26 用于处理通过显示器提供的对象的方法和设备

Country Status (5)

Country Link
US (1) US20150177957A1 (zh)
EP (1) EP3087463A4 (zh)
KR (1) KR20150073354A (zh)
CN (1) CN105849683A (zh)
WO (1) WO2015099300A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108021280A (zh) * 2016-11-03 2018-05-11 禾瑞亚科技股份有限公司 触控面板、触控荧幕与电子系统

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9720504B2 (en) * 2013-02-05 2017-08-01 Qualcomm Incorporated Methods for system engagement via 3D object detection
USD762225S1 (en) * 2014-06-17 2016-07-26 Beijing Qihoo Technology Co., Ltd Display screen or portion thereof with a graphical user interface
USD822060S1 (en) * 2014-09-04 2018-07-03 Rockwell Collins, Inc. Avionics display with icon
US10156908B2 (en) * 2015-04-15 2018-12-18 Sony Interactive Entertainment Inc. Pinch and hold gesture navigation on a head-mounted display
CN105930079A (zh) * 2016-04-15 2016-09-07 上海逗屋网络科技有限公司 用于在多点触摸终端上执行用户操作的方法及设备
KR20180021515A (ko) * 2016-08-22 2018-03-05 삼성전자주식회사 영상 표시 장치 및 영상 표시 장치의 동작 방법
CN109213413A (zh) * 2017-07-07 2019-01-15 阿里巴巴集团控股有限公司 一种推荐方法、装置、设备和存储介质
CN109271088A (zh) * 2018-09-13 2019-01-25 广东小天才科技有限公司 电子设备的操作响应方法、电子设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0822529A1 (en) * 1996-07-31 1998-02-04 Aisin Aw Co., Ltd. Information display system with touch panel
GB2434286A (en) * 2006-01-12 2007-07-18 Motorola Inc A touch screen user interface incorporating a "helper screen"
CN101673181A (zh) * 2002-11-29 2010-03-17 皇家飞利浦电子股份有限公司 具有触摸区域的移动表示的用户界面
CN103098004A (zh) * 2010-07-30 2013-05-08 捷豹汽车有限公司 具有改进的功能选择的计算装置和方法
US20130305174A1 (en) * 2012-05-11 2013-11-14 Empire Technology Development Llc Input error remediation

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI328185B (en) * 2006-04-19 2010-08-01 Lg Electronics Inc Touch screen device for potable terminal and method of displaying and selecting menus thereon
KR101592296B1 (ko) * 2008-09-03 2016-02-05 엘지전자 주식회사 이동 단말기 및 그의 객체 선택과 실행 방법
KR101645291B1 (ko) * 2009-12-21 2016-08-03 삼성전자주식회사 터치스크린을 구비한 화상형성장치 및 그 장치에서 입력 문자의 편집 방법
US9891818B2 (en) * 2010-12-30 2018-02-13 International Business Machines Corporation Adaptive touch-sensitive displays and methods
US8548263B2 (en) * 2011-01-19 2013-10-01 Microsoft Corporation Delayed image decoding

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0822529A1 (en) * 1996-07-31 1998-02-04 Aisin Aw Co., Ltd. Information display system with touch panel
CN101673181A (zh) * 2002-11-29 2010-03-17 皇家飞利浦电子股份有限公司 具有触摸区域的移动表示的用户界面
GB2434286A (en) * 2006-01-12 2007-07-18 Motorola Inc A touch screen user interface incorporating a "helper screen"
CN103098004A (zh) * 2010-07-30 2013-05-08 捷豹汽车有限公司 具有改进的功能选择的计算装置和方法
US20130305174A1 (en) * 2012-05-11 2013-11-14 Empire Technology Development Llc Input error remediation

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108021280A (zh) * 2016-11-03 2018-05-11 禾瑞亚科技股份有限公司 触控面板、触控荧幕与电子系统

Also Published As

Publication number Publication date
EP3087463A4 (en) 2017-07-26
KR20150073354A (ko) 2015-07-01
WO2015099300A1 (en) 2015-07-02
EP3087463A1 (en) 2016-11-02
US20150177957A1 (en) 2015-06-25

Similar Documents

Publication Publication Date Title
EP2854013B1 (en) Method for displaying in electronic device and electronic device thereof
CN105849683A (zh) 用于处理通过显示器提供的对象的方法和设备
CN107015777B (zh) 具有弯曲显示器的电子设备及其控制方法
CN104424359B (zh) 用于根据字段属性来提供内容的电子设备和方法
KR102311221B1 (ko) 오브젝트 운용 방법 및 이를 지원하는 전자 장치
KR102199786B1 (ko) 콘텐트를 기반으로 하는 정보 제공 방법 및 장치
KR102240279B1 (ko) 컨텐트 처리 방법 및 그 전자 장치
CN107402667A (zh) 包含显示器的电子设备
KR20150146236A (ko) 지문 처리 방법 및 그 전자 장치
EP2869253A1 (en) Method for operating message application and electronic device implementing the same
CN110476189A (zh) 用于在电子装置中提供增强现实功能的方法和设备
CN108463799A (zh) 电子设备的柔性显示器及其操作方法
KR102250780B1 (ko) 보안을 제어하기 위한 방법 및 그 전자 장치
CN105446611B (zh) 用于对触摸输入进行处理的装置及其方法
KR102206053B1 (ko) 입력 도구에 따라 입력 모드를 변경하는 전자 장치 및 방법
US20150286328A1 (en) User interface method and apparatus of electronic device for receiving user input
CN107835969A (zh) 对电子设备的触摸感测模块进行控制的方法、电子设备、对设置在电子设备中的触摸感测模块进行操作的方法以及触摸感测模块
KR102215178B1 (ko) 전자장치에서 사용자 입력 방법 및 장치
KR102274944B1 (ko) 오브젝트를 식별하는 전자 장치 및 방법
CN107015752A (zh) 用于处理视图层上的输入的电子设备和方法
CN104423837A (zh) 用于显示控制的方法及其电子设备
CN109416615A (zh) 处理触摸事件的方法和适用于该方法的电子装置
CN106575197A (zh) 用于处理拖动和放置的装置和方法
US10055092B2 (en) Electronic device and method of displaying object
KR102636153B1 (ko) 터치의 압력 입력에 응답하여 정보를 제공하는 전자 장치 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20160810

WW01 Invention patent application withdrawn after publication