CN106201452A - 呈现窗口的装置,呈现用户界面的方法和装置 - Google Patents
呈现窗口的装置,呈现用户界面的方法和装置 Download PDFInfo
- Publication number
- CN106201452A CN106201452A CN201510364363.8A CN201510364363A CN106201452A CN 106201452 A CN106201452 A CN 106201452A CN 201510364363 A CN201510364363 A CN 201510364363A CN 106201452 A CN106201452 A CN 106201452A
- Authority
- CN
- China
- Prior art keywords
- input
- control display
- touch control
- window
- presenting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
- G06F3/03545—Pens or stylus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
- G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
提供一种用于呈现窗口的装置,一种用于呈现用户界面的方法和一种用于呈现用户界面的装置。在一个方面中,一种用于呈现窗口的装置包括触控显示器;以及控制模块,与所述触控显示器耦合且用于:在所述触控显示器的第一位置处接收来自用户的身体部分的第一输入;在所述触控显示器的第二位置处接收来自触控笔的第二输入,所述第二输入被识别为在所述触控显示器上呈现窗口的请求;以及至少部分基于所述第一位置和所述第二位置,在所述触控显示器上的第三位置处在所述触控显示器上呈现窗口,所述第三位置不同于所述第一位置和所述第二位置。
Description
技术领域
本申请总地涉及基于从人的身体部分对触控显示器(touch-enableddisplay)的输入的位置在触控显示器上呈现用户界面。
背景技术
对装置的显示器进行的用于在显示器上呈现信息的输入的位置有时候用于确定实际呈现信息的位置。然而,当呈现这样的信息时,这样的信息仍可能由于其他物体阻挡而不能观看。针对上述情况,目前还没有适当的和/或有成本效益的解决方案。
发明内容
因此,在一个方面中,一种用于呈现窗口的装置包括触控显示器、处理器和处理器可访问的存储器。存储器具有处理器可执行的指令以在触控显示器的第一位置处接收来自用户的身体部分的第一输入,并且在触控显示器的第二位置处接收来自触控笔(stylus)的第二输入,其中,第二输入被识别为在触控显示器上呈现窗口的请求。还可执行指令以至少部分基于第一位置和第二位置来在触控显示器上的第三位置处在触控显示器上呈现窗口,其中,第三位置不同于第一位置和第二位置。
在另一方面中,一种用于呈现用户界面的方法包括在装置的触控显示器处接收来自人的身体部分的第一收入和来自输入装置的第二输入。该方法还包括至少响应于第二输入,在至少不同于第二位置的接收第一输入的第一位置处在触控显示器上呈现用户界面(UI)。
在又一方面,一种用于呈现用户界面的装置包括第一处理器、网络适配器和具有第二处理器可执行的指令的存储器,第二处理器可执行指令以在触控显示器的第一位置处接收来自用户的身体部分的第一输入,在触控显示器的第二位置处接收第二输入以在触控显示器上呈现用户界面(UI),以及在触控显示器上的不同于第一位置的第三位置处在触控显示器上呈现UI。第一处理器经由网络适配器在网络上传送指令。
在一个方面中,提供一种用于呈现窗口的装置,包括:触控显示器;以及控制模块,与所述触控显示器耦合且被配置用于:在所述触控显示器的第一位置处接收来自用户的身体部分的第一输入;在所述触控显示器的第二位置处接收来自触控笔的第二输入,所述第二输入被识别为在所述触控显示器上呈现窗口的请求;以及至少部分基于所述第一位置和所述第二位置,在所述触控显示器上的第三位置处在所述触控显示器上呈现窗口,所述第三位置不同于所述第一位置和所述第二位置。
在一方面中,一种用于呈现窗口的装置,包括:用于在触控显示器的第一位置处接收来自用户的身体部分的第一输入的部件;用于在所述触控显示器的第二位置处接收来自触控笔的第二输入的部件,所述第二输入被识别为在所述触控显示器上呈现窗口的请求;以及用于至少部分基于所述第一位置和所述第二位置,在所述触控显示器上的第三位置处在所述触控显示器上呈现窗口的部件,所述第三位置不同于所述第一位置和所述第二位置。
在一方面中,一种用于呈现用户界面的装置,包括:网络适配器;第一处理器,用于经由所述网络适配器在网络上传送指令;控制模块,执行所述指令,从而:在触控显示器的第一位置处接收来自用户的身体部分的第一输入;在所述触控显示器的第二位置处接收第二输入以在所述触控显示器上呈现用户界面(UI);以及在所述触控显示器上的不同于所述第一位置的第三位置处在所述触控显示器上呈现所述UI。
附图说明
参考附图可以最好地理解本原理在结构和操作方面的细节,在附图中相同的附图标记表示相同的部件,其中:
图1是根据本原理的示例系统的框图;
图2是根据本原理的装置的网络的框图;
图3、4和6是示出了根据本原理的示例算法的流程图;
图5是根据本原理的示例数据表;以及
图7-9是根据本原理的示例说明。
具体实施方式
本公开总体上涉及基于装置的信息。对于本文讨论的任何计算机系统,系统可以包括经由网络连接的服务器组件和客户端组件、使得数据可以在客户端组件和服务器组件之间交换。客户端组件可以包括一个或更多个计算装置,包括电视(例如,智能TV、互联网TV),计算机诸如桌上型计算机、膝上型计算机和平板计算机,所谓的可转换装置(例如,具有平板配置和膝上型配置)以及包含智能电话的其他移动装置。作为非限制性示例,这些客户端装置可以利用来自Apple、Google或Microsoft的操作系统。可以使用Unix或类似操作系统诸如Linux操作系统。这些操作系统可以执行一个或更多个浏览器,诸如由Microsoft、Google或Mozilla制作的浏览器,或者其他浏览器程序,其可以在诸如因特网、局域网或虚拟专用网络的网络上访问由因特网服务器管理的网页(Web)应用。
正如本文所使用的,指令指用于处理系统中信息的计算机实施的步骤。可以在软件、固件或硬件中实施指令;因此,在功能性方面阐述示例性组件、块、模块、电路和步骤。
处理器可以是能够借助各种线诸如地址线、数据线和控制线以及寄存器和移位寄存器执行逻辑的任何常规通用的单芯片或多芯片处理器。此外,除了通用处理器之外,可以在用于执行本文描述功能的数字信号处理器(DSP)、现场可编程门阵列(FPGA)或其他可编程逻辑装置诸如专用集成电路(ASIC)、分立门或晶体管逻辑、分立硬件组件或它们的任何组合中或者可以通过以上,实施或执行本文描述的任何逻辑块、模块和电路。处理器可以通过控制器或状态机或计算装置的组合来实现。在一个实例中,处理器可以是控制模块的形式。
本文中通过流程图和/或用户界面描述的任何软件和/或应用可以包括各种子程序、程序等。应当理解,被泄漏为由例如模块执行的逻辑可以被重新分配给其他软件模块和/或在单个模块中组合在一起和/或在共享库中可用。
当在软件中实施逻辑时,逻辑可以以适当的语言诸如但不限于C#或C++来写,并且可以被存储在计算机可读存储介质(例如,可以不是载波)上,诸如随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、光盘只读存储器(CD-ROM)或其他光盘存储器诸如数字通用光盘(DVD)、磁盘存储器或包括移动U盘的其他磁存储装置等,或者通过上述计算机可读存储介质来传送。连接可以建立计算机可读介质。这样的连接可以包括例如包含光纤、同轴线和双绞线的硬线缆。这样的连接可以包括包含红外和无线电的无线通信连接。
在示例中,处理器可以在其输入线上从数据存储器诸如计算机可读存储介质访问信息,和/或处理器可以通过激活无线收发器发送和接收数据来从因特网服务器无线地访问信息。通常,当被接收时,数据通过天线和处理器的寄存器之间的电路被从模拟信号转换成数字信号,当被发射时从数字转换成模拟。处理器随后通过其移位寄存器处理数据,以在输出线上输出计算的数据,用于在装置上呈现计算的数据。
在一个实施方式中的组件可以以任何适当的组合在其他实施方式中被使用。例如,附图中描绘的和/或本文描述的各种组件中任何组件可以被组合、互换或从其他实施方式排除。
“具有A、B和C中至少一个的系统”(同样地,“具有A、B或C中至少一个的系统”和“具有A、B、C中至少一个的系统”)包括仅具有A、仅具有B、仅具有C、具有A和B一起、A和C一起、B和C一起和/或A、B和C一起等的系统。
“具有A、B和C中一个或更多个的系统”(同样地,“具有A、B或C中一个或更多个的系统”和“具有A、B、C中一个或更多个的系统”)包括仅具有A、仅具有B、仅具有C、具有A和B一起、A和C一起、B和C一起和/或A、B和C一起等的系统。
在发明内容、具体实施方式和/或权利要求中使用术语“电路”或“电路系统”。正如本领域众所周知的是,术语“电路系统”包括所有水平的可用集成,例如从分立逻辑电路到最高水平的电路集成诸如VLSI,并且包括被编程以执行实施方式的功能的可编程逻辑组件以及编程有用于执行那些功能的指令的通用或专用处理器。
现在具体地参照图1,图1示出了信息处理系统和/或计算机系统100的示例框图。注意,在一些实施方式中,系统100可以是诸如由Morrisville,NC的Lenovo(US)销售的或系列个人计算机之一的桌上型计算机系统,或者是诸如由Morrisville,NC的Lenovo(US)销售的的工作站计算机;然而,正如从本文的描述明显的是,根据本原理的客户端装置、服务器或其他机器可以包括系统100的仅一些特征或其他特征。此外,系统100可以例如是诸如或的游戏控制台。
如图1所示,系统100包括所谓的芯片组110。芯片组指被设计成一起工作的一组集成电路或芯片。芯片组通常作为单个产品在市场上交易(例如,考虑品牌等在市场上交易的芯片组)。
在图1的示例中,芯片组110具有特定架构,其可以根据品牌或制造商在一定程度上变化。芯片组110的架构包括核和存储器控制组120以及I/O控制器集线器150,其经由例如直接管理接口或直接媒体接口(directmedia interface,DMI)142或链路控制器144交换信息(例如,数据、信号、命令等)。在图1的示例中,DMI 142是芯片到芯片接口(有时候称为“北桥”和“南桥”之间的链路)。
核和存储器控制组120包括经由前端总线(front side bus,FSB)124交换信息的一个或更多个处理器122(例如,单核或多核等)以及存储器控制器集线器126。正如本文所描述的,核和存储器控制组120的各种组件可以集成到单处理器模上、例如从而形成代替传统“北桥”型架构的芯片。
存储器控制器集线器126与存储器140接口。例如,存储器控制器集线器126可以为DDR SDRAM存储器(例如,DDR、DDR2、DDR3等)提供支持。通常,存储器140是随机存取存储器(RAM)类型。其经常被称为“系统存储器”。
存储器控制器集线器126还包括低压差分信号接口(low-voltagedifferential signaling interface,LVDS)132。LVDS 132可以是用于支持显示器装置192(例如,CRT、平板、投影仪、触控显示器等)的所谓的LVDS显示接口(LVDS Display Interface,LDI)。块138包括可以经由LVDS接口132(例如,串行数字视频、HDMI/DVI、显示端口)支持的一些技术的示例。存储器控制器集线器126还包括例如用于支持独立显卡136的一个或更多个PCI-express接口(PCI-E)134。使用PCI-E接口的独立显卡已经成为加速图形端口(accelerated graphics port,AGP)的可替代方式。例如,存储器控制器集线器126针对基于PCI-E的外部显卡(包括例如一个或更多个GPU)可以包括16通道(x16)PCI-E端口。示例系统可以包括用于支持图形的AGP或PCI-E。
I/O集线器控制器150包括各种接口。图1的示例包括SATA接口151、一个或更多个PCI-E接口152(可选地,一个或更多个传统PCI接口)、一个或更多个USB接口153、LAN接口154(更一般地,用于在至少一个网络诸如因特网、WAN、LAN等上在处理器122指导下通信的网络接口)、通用I/O接口(general purpose I/O interface,GPIO)155、低引脚计数(low-pin count,LPC)接口170、功率管理接口161、时钟发生器接口162、音频接口163(例如,用于扬声器194输出音频)、运营总成本(total cost of operation,TCO)接口164、系统管理总线接口(例如,多主控串行计算机总线接口)165以及串行外围闪存/控制器接口(SPI闪存)166,在图1的示例中,串行外围闪存/控制器接口166包括BIOS 168和启动代码190。关于网络连接,I/O集线器控制器150可以包括与PCI-E接口端口复用的集成千兆以太网控制器线。其他网络特征可以独立于PCI-E接口运行。
I/O集线器控制器150的接口提供与各种装置、网络等的通信。例如,SATA接口151提供在一个或更多个驱动180诸如HDD、SDD或它们的组合上进行读、写或者读和写信息,但在任何情况下,驱动180应理解为例如可以不是载波的有形计算机可读存储介质。I/O集线器控制器150还可以包括高级主机控制器接口(advanced host controller interface,AHCI)以支持一个或更多个驱动180。PCI-E接口152允许到装置、网络等的无线连接182。USB接口153提供输入装置184诸如键盘(KB)、鼠标和各种其他装置(例如,相机、电话、存储器、媒体播放器等)。
在图1的示例中,LPC接口170提供对一个或更多个ASIC 171、可信平台模块(trusted platform module,TPM)172、超级I/O 173、固件集线器174、BIOS支持175以及各种存储器176诸如ROM 177、闪存178和非易失性RAM(NVRAM)179的使用。关于TPM 172,该模块可以是可以用于认证软件和硬件装置的芯片形式。例如,TPM能够执行平台认证,并且可以用于验证寻求访问的系统是期望的系统。
系统100在通电时可以被配置成执行BIOS 168的存储在SPI闪存166内的启动代码190,然后,在一个或更多个操作系统和应用软件(例如,存储在系统存储器140中)的控制下处理数据。操作系统可以存储在各个位置的任意位置中并且可以例如根据BIOS 168的指令来访问。
图1还示出了用于收集一个或更多个图像并且将相关的输入提供给处理器122(例如,悬停在触控显示器192上的人的身体部分的图像)的相机196。相机可以是例如热成像相机、数字相机诸如网络摄影机、和/或集成到系统100中且可由处理器122控制以收集图片/图像和/或视频的相机。
此外,虽然现在出于清楚起见未示出,但在一些实施方式中,系统100可以包括例如用于感测和/或测量系统100的方向并且将相关的输入提供给处理器122的陀螺仪、用于例如感测系统100的加速度和/或运动并且将相关输入提供给处理器122的加速计、以及例如基于用户将音频输入提供给麦克风而将输入提供给处理器122的音频接收器/麦克风。此外,同样出于清楚起见未示出的是,系统100可以包括GPS收发器,GPS收发器被配置成例如接收来自至少一个卫星的地理位置信息并且将该信息提供给处理器122。然而,应当理解,可以根据本原理使用与GPS接收器不同的另一个适当的位置接收器以例如确定系统100的位置。
在移到图2之前,应当理解,示例客户端装置或其他机器/计算机可以包括比图1的系统100上所示的更少或更多的特征。在任何情况下,至少基于上述说明,应当理解,系统100被配置成实践本原理。
现在转到图2,图2示出了根据本原理的在诸如因特网的网络200上进行通信的示例装置。应当理解,例如,参照图2描述的每个装置可以包括上述系统100的特征、组件和/或元件中的至少一些。在任何情况下,图2示出了笔记本计算机202、桌上型计算机204、可穿戴装置206诸如智能手表、智能电视(TV)208、智能电话210、平板计算机212、至少一个输入装置216(例如,被配置用于将输入(例如,触摸和/或悬停输入)提供给触控显示器和/或触控板的触控笔和/或电子笔、用于将输入(例如,触摸和/或悬停输入)提供给触控显示器和/或触控板的可穿戴装置(例如,与用户的手指接合的输入装置)等),以及诸如因特网服务器的、可以例如提供装置202-212和216可访问的云存储的服务器214。此外,应当理解,装置202-216被配置成在网络200上彼此通信以实践本原理。
参照图3,图3示出了根据本原理的可以由诸如系统100的装置(以下称为“本装置”)采用的示例逻辑。从块300开始,逻辑在本装置处执行一个或更多个功能,例如运行一个或更多个应用,例如用于接收来自用户的手写的触控笔输入以及在本装置的触控显示器上的窗口中呈现手写输入的记笔记应用。可以在本装置执行的一个或更多个功能的另一示例包括例如运行一个或更多个后台处理,和/或用于实践本原理的任何软件和/或逻辑。
在任何情况下,在块300之后,逻辑继续进行到块302,在块302中,逻辑在触控显示器上的第一位置处接收来自用户的身体部分的第一输入,例如被识别为接触触控显示器的身体部分的输入和/或被识别为悬停在触控显示器上的身体部分的输入(例如在触控显示器上使用悬停识别软件和/或原理和/或传感器识别,以及例如使用采集用于检测和识别悬停的图像的相机识别)。在块302之后,逻辑进行到块304,在块304中,逻辑可以可选地在触控显示器的一个或更多个附加位置处(例如,而非在要被简要描述的第二位置处)接收来自一个或更多个用户的一个或更多个身体部分的附加输入,例如附加的悬停输入。
逻辑从块304继续到块306,在306中,逻辑在触控显示器的第二位置处接收例如来自诸如触控笔的输入装置和/或用户的身体部分的第二输入。此后,逻辑进行到判断菱形块308,在判断菱形块308中,逻辑确定第二输入是否是在触控显示器上呈现用户界面(UI)和/或窗口的输入(例如,请求)。菱形块308处的否定判断使逻辑移回到块300并且从块300继续,当菱形块308处是肯定判断时,则使逻辑移到块310。
在块310中,逻辑在触控显示器上的至少与第一位置不同的第三位置处(以及例如,在块304中在第二位置之外接收附加的身体部分输入的位置)在触控显示器上呈现UI。在一些实施方式中,UI还可以被呈现在不仅与第一位置不同、还与第二位置不同的第三位置处,而在其他实施方式中,UI可以被呈现在与第一位置不同、但包括第二位置的第三位置处,使得UI例如至少部分地在接收第二输入的位置处被呈现。
此外,在一些实施方式中,在块310中,UI可以被呈现在例如距第一位置的至少阈值距离处(例如,在一些实施方式中,阈值距离可以由用户通过操纵用于确立该阈值和/或本文描述的任何其他阈值,以及例如用于确立是否与参照图4下面进一步说明的手指输入不同地处理手掌输入的UI设置来限定),和/或可以被呈现在距第二位置的阈值距离内。因此,例如,UI可以被呈现在第二位置处或第二位置附近,但离第一位置一定距离处,使得观看UI不被在第一位置处提供了或正在提供第一输入的身体部分阻挡。
参照图4继续详细的描述,图4示出了根据本原理的诸如系统100的装置(下面称为“本装置”)例如结合图3的逻辑可以采用的示例逻辑。在块400中开始,逻辑接收来自一个或更多个用户的一个或更多个身体部分的、指向本装置的触控显示器和/或在本装置的触控显示器处接收的输入。逻辑随后进行到块402,在块402中,逻辑识别有关于接收输入的触控显示器的区域的数据,包括例如区域的尺寸和/或区域的大小。然后,逻辑进行到判断菱形块404,在判断菱形块404中,逻辑确定识别的区域是处于阈值面积量还是多于阈值面积量(例如,通过访问存储在本装置的存储介质上的阈值面积量并且将其与识别的面积进行比较)。在一些实施方式中,该阈值量可以由用户限定,但是在任何情况下,该阈值量可以例如由用户确立为比通过使用用户的任何手指的指尖的输入限定的面积更大(例如,使用诸如上面描述的UI设置、以使用每个手指将输入提供给预定区域,从而相应地校准本装置)。菱形块404中的否定判断使逻辑进行到块406,在块406中,逻辑至少部分地基于该判断将块400中接收的输入识别为来自用户的手指的输入,从而和/或如本文描述地那样处理输入。
然而,菱形块404中的肯定判断使逻辑进行到块408,在块408中,逻辑至少部分地基于该判断将块400中接收的输入识别为来自用户的手掌(和/或用户的手的一侧)的至少一部分的输入。从块408,逻辑进行到块410,在块410中,逻辑确定触控显示器上用于呈现UI的位置(例如,根据请求,例如基于上面描述的图3的块306中接收的第二输入),呈现UI的位置基于与识别的面积的大小相关的距离而距手掌输入一定距离,和/或距识别的区域阈值距离(例如,与识别的区域的大小相关的距手掌输入的距离和阈值距离都可以由用户通过操纵用于确立这两者的设置UI来限定)。此外,注意,与识别的区域的大小相关的距手掌输入的距离可以由逻辑通过例如访问将面积量与距离相关联的数据表来确定,下面将参照图5描述数据表的示例。
然而,仍参照图4,注意,在块410之后,逻辑进行到块412。在块412中,逻辑在块410中确定的位置处呈现UI。
现在参照前述图5,图5示出了示例数据表500,数据表500包括第一列502和第二列504,第一列502包含由触控显示器检测的身体部分输入的各种尺寸的面积的条目(例如,分别大于上面参照图4描述的面积阈值),第二列504包含针对各个条目的各个面积大小、呈现UI的各种距离(例如,最接近其边界)的条目。因此,在所示的示例中,1.27平方厘米的面积大小与0.5厘米的距离相关,2.54平方厘米的面积大小与2厘米的距离相关,5.08平方厘米的面积大小与6厘米的距离相关。现在可以理解,在块410中,例如采用图4的逻辑的装置可以访问数据表500,并且将识别的面积与列502中的一个或更多个条目进行比较、直到识别到匹配,随后针对匹配的条目访问列504中的对应距离,从而识别和使用本文描述的该距离。
在继续移到图6的描述之前,应当理解,数据表500是示例,在这样的数据表中可以包含更多或更少的条目,包括例如针对与所示不同的面积大小的条目。此外,在一些实施方式中,列502可以包含尺寸范围而不是每个条目一个尺寸。因此,例如,从0.5平方厘米到1.27平方厘米的面积可以与0.5厘米的距离相关。此外,注意,在一些实施方式中,这样的数据表可以由用户配置,使得例如用户可以限定分别与这样的面积大小和/或范围相对应的面积大小和/或范围和距离。此外,基于图5的示例,可以理解相关不一定是线性的,例如对于更大的面积,相应的距离可以指数地增加。
进一步地,在继续移到图6的描述之前,应当理解,除了或代替使用面积大小来确定触控显示器处接收的输入是否是来自用户的手的手掌和/或一侧,还可以例如基于用户先前配置装置以辨认特定用户的特定手和皮肤图案、使用可辨认的和/或可识别的手和皮肤图案(例如,和/或缺乏这些,诸如缺乏可识别的指纹)来进行该确定。此外,除了或代替上述情况,输入面积的形状和/或大小还可以用于这样的确定,使得例如由装置识别的、靠着触控显示器的相对新月形形状的输入区域可以被识别为用户的相对于手指的手掌或手的一侧(例如,具体地可以更圆或椭圆的指尖)。
现在参照图6,图6示出了根据本原理的诸如系统100的装置(下面称为“本装置”)例如结合图3和图4的逻辑可以采用的示例逻辑。从块600开始,逻辑接收指向本装置的触控显示器的一个或更多个输入,包括例如上面参照图3描述的、例如根据本原理被识别为呈现UI和/或窗口的请求的第二输入。逻辑随后移到块602,在块602中,逻辑识别触控显示器的一个或更多个边界(例如,基于与这样的边界有关的数据被存储在本装置可访问的位置处)。
逻辑随后进行到判断菱形块604,在判断菱形块604中,逻辑确定接收第二输入的位置是否在距至少一个边界的(例如,用户限定的)阈值距离之内。菱形604中的肯定判断使逻辑进行到块606,在块606中,逻辑至少基于一个或更多个输入(例如,上面参照图3描述的第一和附加输入)的接收位置确定呈现UI的位置(例如,上面参照图3描述的第三位置),以及确定该位置为距每个相应边界至少阈值距离。此外,在块606中,逻辑在确定的位置处呈现UI。
回到参照菱形块604,假设在菱形块604中作出否定判断,则逻辑进行到判断菱形块608。在菱形块608中,逻辑确定在一位置、比如可以至少部分地在请求UI的第二输入的位置处呈现UI的实施方式中参照图3公开的第三位置处和/或参照图3公开的第二位置处,UI是否完全可呈现(例如,不必从其默认尺寸重新定UI形状,不必调节其内容的呈现的默认配置,和/或没有出现UI延伸出屏幕使得由于触控显示器的边界而仅呈现其一部分)。
菱形块608中的肯定判断使逻辑进行到块610,在块610中,逻辑在例如第二位置处以默认尺寸和/或其他默认配置完全呈现UI(例如,其内容的呈现的默认配置)。然而,菱形块608中的否定判断使逻辑进行到块612,在块612中,逻辑重新定形UI和/或重新定格式UI的内容(例如,使得在符合上面讨论的阈值(例如,距每个相应边界阈值距离和/或在距请求呈现UI的输入的位置的阈值距离内)的同时,可以在接收呈现UI的请求的位置近邻或该位置处的边界附近呈现UI)并且根据重新定形和/或重新定格式呈现UI。
例如,假设针对这样UI的默认尺寸是矩形的,矩形的宽度大于高度。如果要呈现矩形UI的位置根据其默认在该位置处不能完全呈现,则装置可以尽量多地识别UI并且可以将UI仍重新定形成矩形,然而例如该矩形的高度大于宽度。此外,在这样的示例中,如果例如在以默认尺寸呈现UI时,在UI中存在三列内容,则可以将内容重新定格式(例如不修剪或移除任何内容)成例如呈现在宽度相对较小的重新定形的UI中的一个或两个列中。在这方面,例如,这样的UI内的内容可以被考虑为动态可呈现的。
此外,注意,根据本原理的UI的重新定形可以包括从第一形状重新定形为不同于第一形状的第二形状,例如将UI从圆形重新定形为矩形,反之亦然。
参照图7继续详细描述,图7示出了本原理的示例图示700。图示700示出了触控显示器702,连同表示由触控显示器702检测到笔(例如,电子笔)输入的位置的阴影704,以及表示由触控显示器702检测到手掌输入的位置的阴影706。基于由阴影704和706表示的位置,呈现UI 708以将手写输入提供给使用UI 708的装置(例如,响应于接收到阴影704表示的输入,其中该输入被识别为请求呈现UI 708的输入)。
因此,基于以上对图7的描述,应当理解图示700可以针对如下情况:例如用户在将其手掌或手的另一部分置于触控显示器702上的同时持笔。比如弹出笔记窗口这样的UI因此可以例如呈现在距阴影704表示的位置的阈值距离内,同时也不呈现在被用户的手掌覆盖的位置处和/或被用户的手掌阻挡观看的位置处。
现在参照图8,图8示出了本原理的示例图示800。图示800示出了触控显示器802,连同表示由触控显示器802检测到使用身体部分的触摸输入的位置的阴影804,以及表示触控显示器802检测到使用身体部分的触摸输入的位置的阴影806。基于由阴影804和806表示的位置,呈现上下文UI 808以从其选择一个或更多个选项(例如,响应于接收到阴影804表示的被识别为请求呈现UI 808的输入的输入,而呈现UI 808)。因此,注意,在本示例中由阴影804表示的输入可以被识别为例如所谓的“右键点击”输入以在显示器上呈现UI和/或上下文菜单,用于采取动作诸如剪切、复制或粘贴动作,以及用于在由阴影804表示的位置处创建新的文件夹、检索有关由阴影804表示的位置处呈现的项目的信息、和/或改变背景图像(例如,当在由阴影804表示的位置处不呈现这样的项目,而仅呈现背景和/或桌面图像时)。
因此,基于以上对图8的描述,应理解图示800可以针对如下情况:例如用户在由阴影806表示的位置处至少部分地使用接触显示器802的手指持有装置,同时导航显示器802上呈现的内容和/或在由阴影804表示的位置处使用接触显示器802的手指向显示器802提供命令和/或请求。因此,上下文UI 808呈现在由阴影804表示的位置处或附近而不呈现在由用于保持装置的手指覆盖的位置处和/或被手指阻挡观看。
描述图9,图9示出了本原理的图示900。图示900示出了触控显示器902,连同表示由触控显示器902检测到笔(例如,电子笔)输入的位置的阴影904,表示由触控显示器902检测到手掌输入的位置的阴影906,以及表示由触控显示器902检测到手指输入的位置的阴影908。基于由阴影904、906和908表示的位置,呈现上下文UI 910以从其选择一个或更多个选项(例如,响应于接收到由阴影904表示的被识别为请求呈现UI910的输入的输入,而呈现UI 910)。因此,注意,在本示例中由阴影904表示的输入可以被识别为例如所谓的“右键点击”输入以在显示器上呈现UI和/或上下文菜单,用于采取动作诸如选择动作,以及用于在由阴影904表示的位置处创建新的文件夹、检索有关由阴影904表示的位置处呈现的项目的信息、和/或改变背景图像(例如,当在由阴影904表示的位置处不呈现这样的项目,而仅呈现背景和/或桌面图像时)。
此外,应当理解,在图9所示的示例中,上下文UI 910可以是参照图8讨论的上下文UI 808的重新定形并且重新定格式版本,根据本原理、由于其接近显示器边缘912而被重新定形和重新定格式,其中例如UI 808表示上下文UI的默认尺寸和默认内容配置。因此,注意,图9中所示的上下文UI已经被重新定形成比图8中所示的上下文UI相对更宽和更短,此外,其内容已经被改变成包括一些与图8中所示的上下文UI相同的选择元素,然而复制、剪切和粘贴选择元素被单选选择元素代替,这是因为例如装置具有有限量的显示空间来在距阴影904表示的位置的阈值距离内呈现UI910,同时不因用户手掌(和/或检测的臂的其他部分)和手指(虽然由各个阴影906和908表示,仍可以存在并且接触和/或在显示器902上悬停)的位置而被阻挡,且虽然在边界912附近然而完全被呈现。
因此,基于以上对图9的描述,应当理解图示900可以是针对如下情况:例如用户正将其手掌的至少一部分和/或手的一侧悬停在显示器902之上可检测距离处并且使用另一只手来保持其装置,同时还提供笔输入以呈现由阴影904表示的UI,其中,另一只手的手指还接触阴影908表示的显示器902。上下文UI 910呈现在由阴影904表示的位置处或附近,而不呈现在用于保持装置的手指和置于装置上的手掌覆盖的位置处和/或被手指和手掌阻挡观看的位置处。
在不参照任何特定附图的情况下,应当理解,除了针对用于在边界处或附近呈现UI的参数(例如,阈值)的以上描述,还需注意,如果由于边界而没有足够的空间可用于例如在控制点左侧(例如,接收输入比如呈现UI的输入的位置)呈现UI,根据本原理的装置可以将UI呈现到控制点的右侧(或者另一侧,例如如果在控制点之上呈现UI,由于缺乏所需的空间,UI可以呈现在控制点之下)。
现在可以理解,本原理提供使用例如多点触摸技术和/或原理来检测用户的手掌接触位置、手指接触位置以及触控笔接触位置,并且识别检测到输入的显示器的相应区域。因此,弹出窗口可以基于这样的控制点来被动态地控制,从而根据多个控制点和它们的(例如,彼此之间的)相对关系以及根据显示区域和/或显示边界来布置和布局弹出窗口。
在总结之前,应当理解,虽然例如用于实践本原理的软件应用可以随诸如系统100的装置出售,本原理在如下情况中适用:这样的应用例如通过诸如因特网的网络从服务器下载到装置。此外,本原理在如下情况中适用:例如,这样的应用被包括在出售的和/或提供的计算机可读存储介质上,其中计算机可读存储介质不是载波和/或信号本身。
虽然本文示出并且详细描述了特定的“基于来自身体部分的输入的位置呈现用户界面”,但应当理解,本申请包括的主题仅由权利要求限定。
Claims (21)
1.一种用于呈现窗口的装置,包括:
触控显示器;以及
控制模块,与所述触控显示器耦合且被配置用于:
在所述触控显示器的第一位置处接收来自用户的身体部分的第一输入;
在所述触控显示器的第二位置处接收来自触控笔的第二输入,所述第二输入被识别为在所述触控显示器上呈现窗口的请求;以及
至少部分基于所述第一位置和所述第二位置,在所述触控显示器上的第三位置处在所述触控显示器上呈现窗口,所述第三位置不同于所述第一位置和所述第二位置。
2.根据权利要求1所述的用于呈现窗口的装置,其中,所述第一输入被识别为来自用户的手的手掌的输入。
3.根据权利要求2所述的用于呈现窗口的装置,其中,所述控制模块被配置用于至少部分基于接收所述第一输入的所述触控显示器的总面积满足面积阈值,将所述第一输入识别为来自用户的手的手掌的输入。
4.根据权利要求1所述的用于呈现窗口的装置,其中,所述控制模块被配置用于:
在所述触控显示器的第一位置处接收所述第一输入,且在所述触控显示器的第四位置处接收第三输入,所述第一位置不同于所述第四位置,所述第一输入和第三输入都被识别为来自一个或更多个用户的一个或更多个身体部分的输入;
在所述触控显示器的第二位置处接收所述第二输入,所述第二输入被识别为来自触控笔的输入,所述第二输入还被识别为在所述触控显示器上呈现窗口的请求;以及
至少部分基于所述第一位置、所述第二位置和所述第四位置,在所述第三位置处在所述触控显示器上呈现所述窗口,所述第三位置不同于所述第一位置、第二位置和第四位置。
5.根据权利要求4所述的用于呈现窗口的装置,其中,所述控制模块被配置用于:
将所述第一输入识别为来自用户的手的手掌的输入,并且将所述第三输入识别为来自用户的手指的输入;以及
响应于所述第一输入被识别为来自用户的手的手掌的输入,在距所述第一位置阈值距离处呈现所述窗口。
6.根据权利要求4所述的用于呈现窗口的装置,其中,所述第三位置被所述装置确定为在距所述第一位置、第二位置和第四位置的阈值距离之内,但不在所述第一位置、第二位置和第四位置的任一位置处。
7.根据权利要求1所述的用于呈现窗口的装置,其中,所述第一输入被识别为来自悬停在所述触控显示器上的身体部分的输入。
8.根据权利要求1所述的用于呈现窗口的装置,其中,所述窗口是上下文菜单。
9.根据权利要求1所述的用于呈现窗口的装置,其中,所述窗口是用于将手写输入提供给所述装置的窗口。
10.根据权利要求1所述的用于呈现窗口的装置,其中,所述控制模块被配置用于:
将所述触控显示器的边界识别为在距所述第二位置的阈值距离之内;
至少部分基于所述第一位置和第二位置,并且基于距所述边界的阈值距离,确定所述第三位置;以及
在所述第三位置处呈现所述窗口,所述第三位置距所述边界至少阈值距离。
11.根据权利要求1所述的用于呈现窗口的装置,其中,所述控制模块被配置用于:
确定所述窗口在所述第三位置处是否能够以默认尺寸完全呈现;以及
响应于在所述第三位置处不能以默认尺寸完全呈现所述窗口的确定,将所述窗口重新定形成具有不同于所述默认尺寸的第一尺寸,并且在所述第三位置处以所述第一尺寸呈现所述窗口。
12.根据权利要求1所述的用于呈现窗口的装置,其中,所述控制模块被配置用于确定所述第三位置距所述第一位置大于阈值距离。
13.一种用于呈现窗口的装置,包括:
用于在触控显示器的第一位置处接收来自用户的身体部分的第一输入的部件;
用于在所述触控显示器的第二位置处接收来自触控笔的第二输入的部件,所述第二输入被识别为在所述触控显示器上呈现窗口的请求;以及
用于至少部分基于所述第一位置和所述第二位置,在所述触控显示器上的第三位置处在所述触控显示器上呈现窗口的部件,所述第三位置不同于所述第一位置和所述第二位置。
14.一种用于呈现用户界面的方法,包括:
在装置的触控显示器处,接收来自人的身体部分的第一输入和来自输入装置的第二输入;以及
响应于至少所述第二输入,在至少不同于第二位置的、接收所述第一输入的第一位置处在所述触控显示器上呈现用户界面UI。
15.根据权利要求14所述的用于呈现用户界面的方法,其中,所述第一位置至少包括接收所述第二输入的所述触控显示器的第三位置。
16.根据权利要求14所述的用于呈现用户界面的方法,其中,所述第一位置不包括接收所述第二输入的所述触控显示器的第三位置。
17.根据权利要求14所述的用于呈现用户界面的方法,其中,所述第一输入被识别为悬停输入,其中身体部分提供输入但不接触所述触控显示器。
18.根据权利要求14所述的用于呈现用户界面的方法,其中,所述UI是上下文菜单。
19.一种用于呈现用户界面的装置,包括:
网络适配器;
第一处理器,用于经由所述网络适配器在网络上传送指令;
控制模块,执行所述指令,从而:
在触控显示器的第一位置处接收来自用户的身体部分的第一输入;
在所述触控显示器的第二位置处接收第二输入以在所述触控显示器上呈现用户界面(UI);以及
在所述触控显示器上的不同于所述第一位置的第三位置处在所述触控显示器上呈现所述UI。
20.根据权利要求19所述的用于呈现用户界面的装置,其中,所述控制模块还被配置用于:
识别接收所述第一输入的所述触控显示器的面积;以及
基于所述面积的大小,在距所述第一位置一定距离处呈现所述UI。
21.根据权利要求19所述的用于呈现用户界面的装置,其中,所述控制模块被配置用于将第一输入识别为来自悬停在所述触控显示器上的用户的身体部分的输入,并且其中将所述第二输入识别为来自接触所述触控显示器的人的身体部分的输入。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/463,318 | 2014-08-19 | ||
US14/463,318 US9817490B2 (en) | 2014-08-19 | 2014-08-19 | Presenting user interface based on location of input from body part |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106201452A true CN106201452A (zh) | 2016-12-07 |
CN106201452B CN106201452B (zh) | 2019-10-29 |
Family
ID=55274046
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510364363.8A Active CN106201452B (zh) | 2014-08-19 | 2015-06-26 | 呈现窗口的装置,呈现用户界面的方法和装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9817490B2 (zh) |
CN (1) | CN106201452B (zh) |
DE (1) | DE102015113580A1 (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10963159B2 (en) * | 2016-01-26 | 2021-03-30 | Lenovo (Singapore) Pte. Ltd. | Virtual interface offset |
KR102647885B1 (ko) * | 2016-10-10 | 2024-03-15 | 삼성전자주식회사 | 전자 장치와 그 제어 방법 및 디스플레이 장치 |
US10338762B2 (en) * | 2016-12-22 | 2019-07-02 | Atlassian Pty Ltd | Environmental pertinence interface |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080012835A1 (en) * | 2006-07-12 | 2008-01-17 | N-Trig Ltd. | Hover and touch detection for digitizer |
CN102968440A (zh) * | 2006-07-18 | 2013-03-13 | 索尼株式会社 | 信息呈现方法和信息呈现设备 |
US20140210797A1 (en) * | 2013-01-31 | 2014-07-31 | Research In Motion Limited | Dynamic stylus palette |
US8797280B2 (en) * | 2010-05-26 | 2014-08-05 | Atmel Corporation | Systems and methods for improved touch screen response |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW528981B (en) * | 2001-10-25 | 2003-04-21 | Compal Electronics Inc | Portable computer and related method for preventing input interruption by write-tracking input region |
US8826181B2 (en) * | 2008-06-28 | 2014-09-02 | Apple Inc. | Moving radial menus |
JP5423686B2 (ja) * | 2008-12-25 | 2014-02-19 | 富士通株式会社 | コンピュータプログラム、入力装置及び入力方法 |
US20100192101A1 (en) * | 2009-01-29 | 2010-07-29 | International Business Machines Corporation | Displaying radial menus in a graphics container |
KR101780020B1 (ko) * | 2010-09-02 | 2017-09-19 | 삼성전자주식회사 | 인터페이스 방법 및 장치 |
US20120169611A1 (en) * | 2010-12-30 | 2012-07-05 | Hanxiang Chen | Smart touch screen keyboard |
KR20120082577A (ko) * | 2011-01-14 | 2012-07-24 | 삼성전자주식회사 | 디바이스에서 펜 터치 인식 방법 및 장치 |
TWI447630B (zh) * | 2011-11-25 | 2014-08-01 | Wistron Corp | 觸控信號之處理方法及其計算機裝置 |
KR20130123691A (ko) * | 2012-05-03 | 2013-11-13 | 삼성전자주식회사 | 터치 입력 방법 및 이를 적용한 터치 디스플레이 장치 |
US9483146B2 (en) * | 2012-10-17 | 2016-11-01 | Perceptive Pixel, Inc. | Input classification for multi-touch systems |
KR102069863B1 (ko) * | 2012-11-12 | 2020-01-23 | 삼성전자주식회사 | 입력 수단의 결제 기능을 제어하는 전자 장치 및 방법 |
US10073493B2 (en) * | 2014-03-19 | 2018-09-11 | Sony Corporation | Device and method for controlling a display panel |
-
2014
- 2014-08-19 US US14/463,318 patent/US9817490B2/en active Active
-
2015
- 2015-06-26 CN CN201510364363.8A patent/CN106201452B/zh active Active
- 2015-08-17 DE DE102015113580.9A patent/DE102015113580A1/de active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080012835A1 (en) * | 2006-07-12 | 2008-01-17 | N-Trig Ltd. | Hover and touch detection for digitizer |
CN102968440A (zh) * | 2006-07-18 | 2013-03-13 | 索尼株式会社 | 信息呈现方法和信息呈现设备 |
US8797280B2 (en) * | 2010-05-26 | 2014-08-05 | Atmel Corporation | Systems and methods for improved touch screen response |
US20140210797A1 (en) * | 2013-01-31 | 2014-07-31 | Research In Motion Limited | Dynamic stylus palette |
Also Published As
Publication number | Publication date |
---|---|
CN106201452B (zh) | 2019-10-29 |
US9817490B2 (en) | 2017-11-14 |
US20160054818A1 (en) | 2016-02-25 |
DE102015113580A1 (de) | 2016-02-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8595012B2 (en) | Systems and methods for input device audio feedback | |
US8686958B2 (en) | Apparatus and method for gesture input in a dynamically zoned environment | |
CN105138247B (zh) | 检测到第二设备接近第一设备而在第一设备呈现用户界面 | |
US20150199101A1 (en) | Increasing touch and/or hover accuracy on a touch-enabled device | |
CN104731316A (zh) | 基于眼睛跟踪在设备上呈现信息的系统及方法 | |
CN104915163B (zh) | 基于设备的配置呈现元素 | |
US20150370350A1 (en) | Determining a stylus orientation to provide input to a touch enabled device | |
US20160154555A1 (en) | Initiating application and performing function based on input | |
US9471143B2 (en) | Using haptic feedback on a touch device to provide element location indications | |
US10403238B2 (en) | Presentation of representations of input with contours having a width based on the size of the input | |
US10515270B2 (en) | Systems and methods to enable and disable scrolling using camera input | |
US20150347364A1 (en) | Highlighting input area based on user input | |
CN106201452A (zh) | 呈现窗口的装置,呈现用户界面的方法和装置 | |
US20150169214A1 (en) | Graphical input-friendly function selection | |
US10146424B2 (en) | Display of objects on a touch screen and their selection | |
US20120112998A1 (en) | Sensor Control | |
US20150205360A1 (en) | Table top gestures for mimicking mouse control | |
CN104898967A (zh) | 在可触控板上呈现至可触控板的输入的指示的装置及方法 | |
US20210096737A1 (en) | Use of hover height for controlling device | |
CN106406720B (zh) | 信息处理方法和信息处理装置 | |
US20150370345A1 (en) | Identifying one or more words for alteration of user input of one or more characters | |
US10684688B2 (en) | Actuating haptic element on a touch-sensitive device | |
US20180349691A1 (en) | Systems and methods for presentation of handwriting input | |
US20210255719A1 (en) | Systems and methods to cache data based on hover above touch-enabled display | |
US9182904B2 (en) | Cues based on location and context for touch interface |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |