CN111226191A - 管理和映射多侧触摸 - Google Patents

管理和映射多侧触摸 Download PDF

Info

Publication number
CN111226191A
CN111226191A CN201880066579.8A CN201880066579A CN111226191A CN 111226191 A CN111226191 A CN 111226191A CN 201880066579 A CN201880066579 A CN 201880066579A CN 111226191 A CN111226191 A CN 111226191A
Authority
CN
China
Prior art keywords
sensor
computing device
sensor input
mobile computing
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201880066579.8A
Other languages
English (en)
Inventor
R·T·奥利弗
R·塔兹
D·布雷姆斯
S·亚利尔
J·基斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN111226191A publication Critical patent/CN111226191A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206Monitoring of events, devices or parameters that trigger a change in power modality
    • G06F1/3231Monitoring the presence, absence or movement of users
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547Touch pads, in which fingers can move on a surface
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • G06F3/04166Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03KPULSE TECHNIQUE
    • H03K17/00Electronic switching or gating, i.e. not by contact-making and –breaking
    • H03K17/94Electronic switching or gating, i.e. not by contact-making and –breaking characterised by the way in which the control signals are generated
    • H03K17/96Touch switches
    • H03K17/962Capacitive touch switches
    • H03K17/9622Capacitive touch switches using a plurality of detectors, e.g. keyboard
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04106Multi-sensing digitiser, i.e. digitiser using at least two different sensing technologies simultaneously or alternatively, e.g. for detecting pen and finger, for saving power or for improving position detection
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Abstract

各种实施例包含用于管理移动计算装置上的多传感器输入的处理装置和方法。各种实施例可包含接收来自多个触摸传感器的多个输入,从所述多个输入标识与所述触摸传感器的用户交互类型,标识多传感器输入数据结构中的与所述类型的用户交互对应的传感器输入数据,并确定所述多个输入是否组合为所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述传感器输入数据的条目中的多传感器输入。各种实施例可包含检测对多传感器输入模式的触发,响应于检测到所述触发而进入所述多传感器输入模式,并启用对来自触摸传感器的输入的处理。

Description

管理和映射多侧触摸
相关申请案
本申请案主张以下申请案的优先权益:2017年10月14申请的标题为“管理和映射多侧触摸(Managing And Mapping Multi-Sided Touch)”的序列号为62/572,453的美国临时专利申请案、2017年10月14日申请的标题为“用于整合后表面/侧表面和前部显示器上的多触摸的方法(Methods For Integrating Multi-Touch Across Rear/Side SurfacesAnd A Front Display)”的序列号为62/572,465的美国临时专利申请案、2017年10月14日申请的标题为“多层用户界面的直接操控的方法”的序列号为62/572,455的美国临时专利申请案、2017年10月14日申请的标题为“用于检测装置情境以便更改触摸电容的方法(Methods For Detecting Device Context In Order To Alter Touch Capacitance)”的序列号为62/572,460的美国临时专利申请案,以及2017年10月14日申请的标题为“适应无线充电和背部触摸感测两者的方法和设备(Method And Apparatus To Accommodate BothWireless Charging And Back Touch Sensing)”的序列号为62/572,471的美国临时专利申请案。这些文献的内容以引用的方式并入本文中。
背景技术
移动计算装置可使用多种输入方法。除了按钮和其它物理输入装置之外,移动计算装置通常还包含能够检测显示区域(即,“触摸屏”)内的触摸的存在和方位的电子显示器。用于移动计算装置的众多软件应用程序使用触摸屏输入,且因此触摸屏已极大地扩展了与移动计算装置的可能的用户交互的类型和范围。
然而,触摸屏交互要求用户集中注意力去看要触摸的目标(例如,图标、文本等)或对输入的响应。此外,可能难以通过与触摸屏的交互来控制更加复杂的软件应用程序或或特征或者实施起来可能非常麻烦。此外,与移动计算装置的多个交互具有对触摸屏的受限存取或要求一只手持握移动计算装置,使得另一只手的手指可与触摸屏交互。
发明内容
各种实施例包含用于管理移动计算装置的多传感器输入的设备和方法。各种实施例可包含从第一触摸传感器接收第一输入;从所述第一输入标识与所述第一触摸传感器的第一类型的用户交互;标识多传感器输入数据结构中的与所述第一类型的用户交互对应的第一传感器输入数据;从第二触摸传感器接收第二输入;从所述第二输入标识与所述第二触摸传感器的第二类型的用户交互;标识所述多传感器输入数据结构中的与所述第二类型的用户交互对应的第二传感器输入数据;和确定所述第一输入和所述第二输入是否组合为所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据和所述第二传感器输入数据的条目中的多传感器输入。
各种实施例可另外包含确定在从接收到所述第一输入起的多传感器输入序列持续时间期间是否接收到所述第二输入,其中如下操作都可响应于确定在从接收到所述第一输入起的所述多传感器输入序列持续时间期间接收到所述第二输入而发生:从所述第二输入标识与所述第二触摸传感器的第二类型的用户交互;标识所述多传感器输入数据结构中的与所述第二类型的用户交互对应的第二传感器输入数据;和确定所述第一输入和所述第二输入是否组合为所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据和所述第二传感器输入数据的条目中的多传感器输入。
在一些实施例中,从第一触摸传感器接收第一输入和从第二触摸传感器接收第二输入可包含并行地接收所述第一输入和所述第二输入。
在一些实施例中,从所述第一输入标识与所述第一触摸传感器的第一类型的用户交互可包含标识包括所述第一输入的多个所接收的输入的第一质量;和标识具有包括所述第一输入的所述多个所接收的输入的所述第一质量的所述第一类型的用户交互。
在一些实施例中,从所述第一输入标识与所述第一触摸传感器的第一类型的用户交互可包含标识包括所述第一输入的多个所接收的输入的第一质量;从所述多个所接收的输入的所述第一质量导出第二质量;和标识具有所述第二质量的所述第一类型的用户交互。
在一些实施例中,标识多传感器输入数据结构中的与所述第一类型的用户交互对应的第一传感器输入数据可包含将所述第一类型的用户交互和与所述第一触摸传感器相关联的多个传感器输入数据进行比较;和从与所述第一触摸传感器相关联的所述多个传感器输入数据中标识匹配所述第一类型的用户交互的所述第一传感器输入数据。
一些实施例可另外包含响应于确定所述第一输入和所述第二输入组合为所述多传感器输入数据结构中的具有与所述多传感器输入响应有关的所述第一传感器输入数据和所述第二传感器输入数据的所述条目中的所述多传感器输入,执行所述多传感器输入响应。
各种实施例可包含启用对来自第一触摸传感器的第一输入的处理;检测对多传感器输入模式的触发;响应于检测到所述触发而进入所述多传感器输入模式;和启用对来自第二触摸传感器的第二输入的处理。
在一些实施例中,检测对多传感器输入模式的触发可包含检测并非来自所述第二触摸传感器的输入的装置参数。
在一些实施例中,检测对多传感器输入模式的触发可包含检测来自所述第二触摸传感器的第三输入。
在一些实施例中,检测对多传感器输入模式的触发可包含执行被配置成触发进入所述多传感器输入模式的应用程序的指令。
一些实施例可另外包含确定与所述触发相关联的多传感器输入数据结构;和加载所述多传感器输入数据结构。
一些实施例可另外包含从所述第二触摸传感器接收所述第二输入;从所述第二输入标识与所述第二触摸传感器的第一类型的用户交互;标识所述多传感器输入数据结构中的与所述第一类型的用户交互对应的第一传感器输入数据;和标识所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据的条目中的多传感器输入。
在一些实施例中,标识所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据的条目中的多传感器输入可包含标识所述多传感器输入数据结构中的具有与所述多传感器输入响应有关的所述第一传感器输入数据和装置参数数据的所述条目中的所述多传感器输入。
在一些实施例中,标识所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据的条目中的多传感器输入可包含标识所述多传感器输入数据结构中的具有与所述多传感器输入响应有关的所述第一传感器输入数据和应用程序数据的所述条目中的所述多传感器输入。
各种实施例可包含用于整合移动计算装置的多个相异表面上的多触摸输入的方设备和方法。各种实施例可实施于移动计算装置的处理器中并且包含接收来自所述移动计算装置上的不同于所述移动计算装置的触摸屏的至少一个触摸传感器的第一多传感器输入;使用情境感知数据确定所述移动计算装置的操作情境;确定与所述所接收的第一多传感器输入和所述所确定的操作情境相关联的第一功能;和执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作。
在一些实施例中,所述所接收的第一多传感器输入可表示在所述至少一个触摸传感器中的第一触摸传感器上检测到的第一触摸移动,且执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作可包含执行被配置成致使所述移动计算装置执行所述移动计算装置的所述触摸屏上的作用中元素的第一虚拟移动的所述第一操作,所述第一虚拟移动类似于所述第一触摸移动。
一些实施例可另外包含接收表示在所述至少一个触摸传感器中的第二触摸传感器上检测到的第二触摸移动的第二多传感器输入;确定与在所述所确定的操作情境期间接收到所述所接收的第二多传感器输入相关联的第二功能;和执行被配置成致使所述移动计算装置执行所述所确定的第二功能的第二操作,其中所述所确定的第二功能可包含执行所述移动计算装置的所述触摸屏上的所述作用中元素的第二虚拟移动,所述第二虚拟移动类似于所述第二触摸移动且在尺寸上不同于所述第一虚拟移动。
在一些实施例中,执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作可包含执行被配置成致使所述移动计算装置相对于所述第一触摸移动按比例调整所述第一虚拟移动的所述第一操作。
在一些实施例中,执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作可包含执行被配置成致使所述移动计算装置基于所述第一触摸移动的速度而相对于所述第一触摸移动按比例调整所述第一虚拟移动的所述第一操作。
在一些实施例中,所述所接收的第一多传感器输入可表示在所述至少一个触摸传感器中的第一触摸传感器上检测到的第一触摸移动,且执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作可包含执行被配置成致使所述移动计算装置更改所述触摸屏的主动显示上的图像的背景和前景中的至少一个的所述第一操作。
在一些实施例中,执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作可包含执行被配置成致使所述移动计算装置控制不同于处于作用中的应用程序的后台应用程序的所述第一操作,所述处于作用中的应用程序充当对所述触摸屏的主动显示的主要控制。
在一些实施例中,所述至少一个触摸传感器可安置于以下各项中的至少一个上:所述移动计算装置的所述触摸屏所在的前表面、所述移动计算装置的在所述触摸屏后面的背表面、所述移动计算装置的处于所述前表面和背表面之间的底表面、所述移动计算装置的处于所述前表面和背表面之间并且与所述底表面相对的顶表面,或所述移动计算装置的处于所述前表面和背表面之间并且处于所述顶表面和底表面之间的侧表面。
在一些实施例中,所述情境感知数据可包含选自由以下组成的群组的状态信息的至少一个元素:所述移动计算装置上的处于作用中的应用程序和所述移动计算装置的组件。
在一些实施例中,确定与所述所接收的第一多传感器输入相关联的所述第一功能可包含确定适用于所述所接收的第一多传感器输入和所述所确定的操作情境的选择多传感器转译表,其中所述所确定的第一功能可基于在所述选择多传感器转译表上对所述所接收的第一多传感器输入的查找。
各种实施例可另外包含具有多个触摸传感器和处理器的移动计算装置,所述多个触摸传感器可包含第一触摸传感器和第二触摸传感器,所述处理器被配置成执行上文概括的方法中的任一种的操作。各种实施例可包含具有用于执行上文概括的方法中的任一种的功能的装置的移动计算装置。各种实施例可包含上面存储有处理器可执行指令的非暂时性处理器可读存储媒体,所述处理器可执行指令被配置成致使计算装置的处理器执行上文概括方法中的任一种的操作。
附图说明
附图并入本文中并且构成本说明书的一部分,其说明本发明的示范性实施例,并且与给出的一般描述和详细描述一起用来解释本文中的特征。
图1A是与具有触摸传感器的移动计算装置的用户交互的透视图。
图1B是与具有触摸传感器的移动计算装置的用户交互的透视图。
图2是适用于实施各种实施例的移动通信装置的组件框图。
图3是说明根据各种实施例的管理多传感器输入的方法的过程流程图。
图4是说明根据各种实施例的启用用于管理多传感器输入的多传感器输入模式的方法的过程流程图。
图5是说明适用于实施各种实施例的用于将触摸传感器读数映射到移动计算装置的应用程序功能的实施例方法的过程流程图。
图6是说明根据各种实施例的管理依序接收到的多传感器输入的方法的过程流程图。
图7是说明根据各种实施例的管理同时接收到的多传感器输入的方法的过程流程图。
图8是说明根据各种实施例的确定接收到的输入是否是多传感器输入的方法的过程流程图。
图9是说明根据各种实施例的管理在多传感器输入模式中接收到的多传感器输入的方法的过程流程图。
图10是说明根据各种实施例的整合移动计算装置的多个相异表面上的多触摸输入的方法的过程流程图。
图11是与各种实施例一起使用的多传感器输入转译表的表图。
图12是适用于实施各种实施例的接收来自各种来源的输入的推理引擎的示意性框图。
图13是适用于实施各种实施例的用户将移动计算装置放在前裤袋中的示意图。
图14A-14D是使用触摸传感器可检测到的用户可抓握移动计算装置的各种方式的示意图。
图15是根据各种实施例的用户做出可致使移动计算装置执行预先确定的功能的手势的示意图。
图16A和16B是根据各种实施例的用户做出可致使移动计算装置执行预先确定的功能的手势的示意图。
图17是根据各种实施例的用户做出可致使移动计算装置执行预先确定的功能的手势的示意图。
图18是根据各种实施例的用户做出可致使移动计算装置执行预先确定的功能的手势的示意图。
图19A和19B是用户用一只手持握移动计算装置,同时用另一只手的手指在移动计算装置的背表面上执行手势的示意图。
图20A和20B是用户用一只手持握移动计算装置,同时用另一只手的手指在移动计算装置的背表面上执行手势的示意图。
图21A和21B是用户单手持握移动计算装置,同时点击背面板以激活处于作用中的应用程序的功能的平面视图。
图22A和22B是用户在移动计算装置的背部执行点击手势以激活另一处于作用中的应用程序的功能的平面视图。
图23A和23B是用户在移动计算装置的背部执行点击手势以激活另一处于作用中的应用程序的又一功能的平面视图。
图24A和24B是用户在移动计算装置的背部执行点击手势以激活移动计算装置的通用功能的平面视图。
图25A和25B是用户在移动计算装置的背部执行点击手势以激活移动计算装置的通用功能的平面视图。
图26A和26B是用户在移动计算装置的背部执行点击手势以激活移动计算装置的处于作用中的应用程序的功能的平面视图。
图27A和27B是用户在移动计算装置的侧面板上执行另一手势以控制移动计算装置的应用程序特征或通用功能的平面视图。
图28A和28B是用户执行手势组合的平面视图,一个手势是在背面板上且另一手势是在移动计算装置的触摸屏上以执行某些功能,如用于复制/粘帖的文本选择或精确光标调整。
图29A和29B是用户执行另一手势组合的平面视图,一个手势是在背面板上且另一手势是在移动计算装置的触摸屏上以执行某些功能。
图30A和30B是用户执行另一手势组合的平面视图,一个手势是在背面板上且另一手势是在移动计算装置的触摸屏上以执行某些功能。
图31A和31B是用户抓握移动计算装置会自动激活某些特征的平面视图。
图32A和32B是用户以自动激活某些特征的方式抓握移动计算装置的平面视图。
图33A和33B是适合与各种实施例一起使用的实例移动计算装置的组件图。
具体实施方式
将参考随附图式详细描述各种实施例。在可能的情况下,将在整个图式中使用相同参考编号来指代相同或相似部分。对特定实例和实施方案进行的参考是用于说明性目的,且不希望限制本发明或权利要求书的范围。
术语“移动计算装置”在本文中用以指多种小型计算装置中的任何一者或全部,尤其是包含以下各项的计算装置:触摸传感器(例如,电容传感器、压力触摸传感器、触摸屏显示器,和其它合适的被配置成检测和定位装置的表面上的用户触摸的传感器)、可编程处理器和存储器和用于接收用户输入的电路。各种实施例特别适用的计算装置的实例包含智能手机、被配置成用户持握边缘的平板计算装置、可穿戴计算装置、其它类似计算平台,以及其它类似装置。
术语“多传感器输入”在本文中用以指从移动计算装置上的不同于移动计算装置的触摸屏的至少一个触摸传感器接收的信息。多传感器输入可反映至少一个触摸传感器检测到的各种类型的输入的特性,包含接触的持续时间、接触点的数目、接触点的大小、接触的序列或连续系列、同时接触的模式,以及在接触期间施加的压力或力水平。
术语“操作情境”在本文中用以指影响移动计算装置上的应用程序的操作的外部环境。移动计算装置的硬件和软件环境定义操作情境。
术语“数据”在本文中用于可互换地指代单数数据和/或多个数据。术语“数据”的这类使用的实例包含但不限于术语“数据”、“传感器输入数据”、“装置参数数据”、“方位数据”、“全球定位系统(GPS)数据”、“无线连接数据”、“外围装置连接数据”、“移动计算装置状态数据”、“应用程序数据”、“动作数据”、“情境感知数据”和“传感器数据”。
移动计算装置通常配置有触摸屏,其充当用于一或多个处于作用中的应用程序的显示器,同时还为用户提供交互式输入表面。触摸屏技术使得用户能够在其移动计算装置(例如智能电话)上实现多个任务,通过触摸触摸屏上的显示器与应用程序交互以提供简易性和便利性。对增加移动计算装置的实用性的消费者需求似乎与这些装置的小尺寸形成竞争,且用户希望仅用几个手指或甚至仅用一只手简易操作装置。触摸屏交互要求用户集中注意力去看要触摸的目标(例如,图标、文本等)或对输入的响应。此外,可能难以通过与触摸屏的交互来控制更加复杂的软件应用程序或者实施起来可能非常麻烦。此外,与移动计算装置的多个交互要求一只手持握移动计算装置,使得另一只手的手指可与触摸屏交互。为解决这些问题,各种实施例在移动计算装置上提供不同于其触摸屏的额外触摸传感器。
各种实施例包含在多个表面(例如后部或背部、侧部、顶部和底部表面)上具有触敏式输入传感器的移动计算装置,以及用于解译这类表面上的触摸以提供额外用户输入功能性的方法。
各种实施例实现除了触摸屏显示器之外还在表面上包含多个触敏式输入传感器的移动计算装置的广泛范围的功能性和操作控制,所述触敏式输入传感器例如定位于装置的背部区域、侧部、顶部边缘和底部边缘上的触摸传感器。通过使在移动计算装置触敏式输入传感器中的两个或更多个上检测到的触摸和或手势以及正在执行的应用程序和/或装置的操作状态或条件相关,各种实施例实现可以各种应用程序予以实施的更大功能性和更广范围的用户输入控制。
可使用如下基于规则的系统实施各种实施例:协调用从移动计算装置上的不同于其触摸屏或连同其触摸屏的一或多个触摸传感器接收的输入来控制在移动计算装置上运行的应用程序的方式和/或与在移动计算装置上运行的应用程序交互的方式。举例来说,从一或多个触摸传感器接收到的输入可映射到处于作用中的应用程序并且与所述处于作用中的应用程序交互,在触摸屏上显示所述处于作用中的应用程序的元素。举例来说,从安置于移动计算装置的背部和/或侧部上的触摸传感器接收到的输入可控制表示和/或操控触摸屏上的显示器中的内容的方式。另外或替代地,从一或多个触摸传感器接收到的输入可控制不同于主导和/或控制触摸屏上的显示器的处于作用中的应用程序的后台应用程序。
在各种实施例中,当接收到作为输入的多个触摸传感器读数时,移动计算装置的处理器可将用户的意图消除歧义。举例来说,当用户用一只手或两只手抓握移动通信装置和/或另外用一或多个手指接触移动通信装置的单独部分时,处理器可确定可忽略抓握接触,但可即可使手指接触起作用。
在各种实施例中,包含多个触摸传感器的移动计算装置的处理器可监测触摸传感器测量值并且基于所述触摸传感器测量值产生触摸分布曲线。作为实例,移动计算装置的处理器可基于来自除触摸屏以外或连同触摸屏的一或多个触摸传感器的输入,产生触摸分布曲线。产生的触摸分布曲线可反映各种类型的输入的特性,包含接触的持续时间、接触点的数目、接触点的大小、接触的序列或连续系列、同时接触的模式,以及在接触期间施加的压力或力水平。另外,产生的触摸分布曲线可反映可忽略哪些接收到的输入(例如,常态抓握模式)和/或可使哪些即可起作用(例如,有意触摸)。处理器还可使用情境感知数据以便确定移动计算装置的操作情境,所述操作情境可规定通过所产生的触摸分布曲线如何做或做些什么。情境感知数据可反映来自移动计算装置的处于作用中的应用程序和/或资源的设置/参数和移动计算装置的处于作用中的应用程序和/或资源的状态信息。以此方式,移动计算装置的操作情境可用于确定基于所产生的触摸分布曲线执行什么操作。
各种实施例的计算装置和方法解决响应于移动计算装置的多个触摸传感器的激活而破解移动计算装置的用户的意图的问题。各种实施例使得配置有多个触摸传感器的移动计算装置能够通过处理来自多个触摸传感器的信号来区分多个触摸传感器的正确输入和错误输入。
各种实施例可实施于多种移动计算装置内,在图1A和1B说明所述多种移动计算装置的实例。参考图1A和1B,移动计算装置100可包含主体110,其具有前部区域112、后部区域114、前部区域112和后部区域114之间的两个侧部116a、116b,以及前部区域112和后部区域114之间的顶部区域118。前部区域112可包含可并入于呈触摸屏显示器形式的显示器内的触摸传感器102。后部区域114可包含触摸传感器104。侧部116a、116b中的一个或两个可包含触摸传感器106。顶部区域118可包含触摸传感器108。因此,移动计算装置100的主体110可在前部区域112、后部区域114、一或多个侧部116a、116b和顶部区域118上包含一或多个触摸传感器。触摸传感器102、104、106、108可被配置成接收来自用户手指120、128的输入124、132和/或来自用户的拇指122、130的输入126、134。
触摸传感器102、104、106、108被配置成在对象(特定地,用户的手、拇指或手指)触摸(或近乎触摸)传感器的方位处,检测触摸传感器状态(例如电容或压力的测量值)的改变。虽然在图1A和1B中说明触摸传感器102、104、106、108上的手指和拇指触摸输入124、126、132、134,但触摸传感器102、104、106、108可从与用户的身体的任何接触(例如与用户的手掌或面部的接触、触控笔或另一类似输入装置进行的触摸等等)检测触摸传感器状态的改变。在一些实施例中,触摸传感器102、104、106、108可检测两个或更多个接触方位(例如,多触摸传感器)。在一些实施例中,触摸传感器102、104、106、108可检测一或多个接触的压力。来自各种触摸传感器102、104、106、108的输出可提供给处理器(例如,包含于触摸传感器102、104、106、108内或与之耦合的处理器),所述处理器被配置成确定可被处理为移动计算装置100的用户输入的触摸的方位。
在一些实施例中,移动计算装置100的处理器和/或触摸传感器102、104、106、108的处理器可确定一或多个接触具有小于、等于或大于阈值时间段的持续时间。在一些实施例中,这类处理器可确定触摸传感器102、104、106、108中的一或多个上的一或多个接触的特性。举例来说,接触特性可包含接触的持续时间、接触点的数目、接触点的大小、接触的序列或连续系列、同时接触的模式,以及在接触期间施加的压力或力水平。可从各种输入确定与用户抓握移动计算装置相关联的接触,包含触摸传感器102、104、106、108的多个方位处的并发接触的组合,其可在至少一最小持续时间内为永久性的。在一些实施例中,移动计算装置的处理器可区分点击、双击、长按、滑移或滑动、拖动、包含多个触摸和/或压力输入的预定义手势、抓握、其它接触,或其任何组合。预定义的手势可为通过触摸传感器102、104、106、108的一或多个接触的集合或序列。预定义的手势可由用户配置、由移动计算装置上的应用程序建立,或可提供为工厂安装的默认手势。在一些实施例中,触摸传感器102、104、106、108可被配置成检测在物理接触之前或无物理接触的情况下用户手指或拇指的接近度或近乎接触(例如,“悬空”)。
虽然本文大体就基于电容改变检测触摸的触摸传感器来论述触摸传感器102、104、106、108,但这类传感器仅用作适合与各种实施例一起使用的一种类型的输入传感器的实例。可在各种实施例中使用其它类型的输入传感器,例如电阻感测输入传感器、红外感测输入传感器、阻力传感器等。
图2是适用于实施各种实施例的实例移动计算装置200的功能框图。参考图1A-2,移动计算装置200可类似于移动计算装置100。举例来说,移动计算装置200可为多SIM计算装置,例如多SIM多待机(MSMS)计算装置。移动计算装置200可包含至少一个订户身份模块(SIM)接口202,其可接收与第一预订相关联的第一SIM(“SIM-1”)204a。在一些实施例中,至少一个SIM接口202可实施为多SIM接口202,其可接收与至少一第二预订相关联的至少一第二SIM。
各种实施例中的SIM可为配置有SIM和/或通用SIM(USIM)应用程序的通用集成电路卡(UICC),从而能够接入多种不同网络。UICC还可为电话簿和其它应用程序提供存储。替代地,在码分多址接入(CDMA)网络中,SIM可为卡上的UICC可移除用户身份模块(R-UIM)或CDMA订户身份模块(CSIM)。
每一SIM 204a可具有CPU、ROM、RAM、EEPROM和I/O电路。各种实施例中使用的第一SIM 204a和任何额外SIM中的一或多个可含有用户帐户信息、国际移动站标识(IMSI)、SIM应用程序工具包(SAT)命令的集合和用于电话簿联系人的存储空间。第一SIM 204a和任何额外SIM中的一或多个可另外存储归属标识符(例如,系统标识号(SID)/网络标识号(NID)对、归属PLMN(HPLMN)码等)以指示SIM网路运营提供商。集成电路卡身份(ICCID)SIM序列号可打印在一或多个SIM 204a上以供标识。在一些实施例中,可提供额外SIM以供在移动计算装置200上通过虚拟SIM(VSIM)应用程序(未示出)使用。举例来说,VSIM应用程序可通过配给对应SIM配置文件来实施移动计算装置200上的远程SIM。
移动计算装置200可包含可耦合到译码器/解码器(编解码器)208的至少一个控制器,例如通用处理器206。编解码器208又可耦合到扬声器210和麦克风212。通用处理器206也可耦合到至少一个存储器214。存储器214可以是存储处理器可执行指令的非暂时性有形计算机可读存储媒体。举例来说,指令可包含通过对应基带-RF资源链的发射链和接收链而路由与预订有关的通信数据。存储器214可存储操作系统(OS)以及用户应用软件和可执行指令。通用处理器206和存储器214可各自耦合到至少一个基带调制解调器处理器216。移动计算装置200中的每一SIM 204a可与包含至少一个基带调制解调器处理器216和至少一个射频(RF)资源218的基带-RF资源链相关联。
RF资源218可包含接收器和发射器电路,其耦合到至少一个天线220且被配置成执行用于与计算装置200的每一SIM 204a相关联的无线服务的发射/接收功能。RF资源218可实施单独的发射和接收功能性,或可包含组合发射器和接收器功能的收发器。RF资源218可被配置成支持根据不同无线通信协议操作的多个无线电接入技术/无线网络。RF资源218可包含或提供到放大器、数/模转换器、模/数转换器、滤波器、压控振荡器等的不同集合的连接。多个天线220和/或接收块可耦合到RF资源218以有助于与天线和接收器/发射器频率和协议(例如,LTE、WiFi、蓝牙等等)的各种组合的多模通信。
移动计算装置200的基带调制解调器处理器216可被配置成执行包含与至少一个SIM相关联的至少一个调制解调器堆栈的软件。SIM和相关联的调制解调器堆栈可被配置成支持满足不同用户要求的各种通信服务。另外,可为特定SIM供应信息以执行不同信令程序,以用于接入与这些服务相关联的核心网络的域且用于处理其数据。
在一些实施例中,通用处理器206、存储器214、基带调制解调器处理器216和RF资源218可包含在芯片上系统装置222中。SIM 204a和其对应接口202可在芯片上系统装置222外部。此外,各种输入和输出装置可耦合到芯片上系统装置222的组件,例如接口或控制器。适合在移动计算装置200中使用的实例用户输入组件可包含但不限于小键盘224、触摸屏226(例如倾斜边缘触摸屏)和一或多个触摸传感器227。一或多个触摸传感器227可类似于参考图1A和1B描述的触摸传感器102、104、106、108。
在各种实施例中,一或多个触摸传感器227可连接到一或多个微控制器228,且微控制器228可连接到通用处理器206。在各种实施例中,微控制器228可配置有微控制器可执行指令以执行确定是否在一或多个触摸传感器227上正在发生接触的操作。在各种实施例中,微控制器228可配置有微控制器可执行指令以执行确定接触的方位的操作。在各种实施例中,微控制器228可配置有微控制器可执行指令以执行将包含接触参数信息的接触的指示发送到通用处理器206的操作。在各种实施例中,通用处理器206可接收来自微控制器228的接触指示。
图3说明根据各种实施例的管理多传感器输入的方法。参考图1A-3,方法300可实施于移动计算装置(例如,图1A-2中的100、200)的硬件组件和/或软件组件中,其操作可受移动计算装置的一或多个处理器(例如,通用处理器206)控制。为了涵盖在各种实施例中实现的替代性配置,实施方法300的硬件在本文中被称作“处理装置”。
在框302中,处理装置可从第一触摸传感器(例如,图1A-2中的触摸传感器102、104、106、108、227)接收第一输入。在一些实施例中,用户可与移动计算装置的具有触摸传感器的表面或区域(例如,图1A和1B中的前部区域112、后部区域114、侧部116a、116b,和顶部区域118)交互。与第一触摸传感器的用户交互可触发与第一触摸传感器相关联的处理装置或微控制器(例如,图2中的微控制器228)作出的响应。所述响应可包含被配置成指示与第一触摸传感器的用户交互的质量的信号或数据,例如与触摸传感器的交互的方位、区域、持续时间、方向、速度、压力、数目、频率或顺序。在一些实施例中,如在本文中参考图8中的方法800进一步描述,处理装置可被配置成从与第一触摸传感器的用户交互的其它质量导出与第一触摸传感器的用户交互的一些这类质量。处理装置可接收被配置成指示与第一触摸传感器的用户交互的质量的信号或数据。
在框304中,处理装置可从第一输入标识与第一触摸传感器的第一类型的用户交互。基于接收到的第一输入的分析,处理装置可标识与第一触摸传感器的用户交互的特性,所述特性可指示与第一触摸传感器的用户交互的类型和/或质量。可使用各种技术、算法或启发式导出与第一触摸传感器的用户交互的类型和/或质量。举例来说,从第一输入标识与第一触摸传感器的第一类型的用户交互可包含标识包含第一输入的多个所接收的输入的第一质量,并且标识具有包含第一输入的多个所接收的输入的第一质量的第一类型的用户交互。作为另一实例,从第一输入标识与第一触摸传感器的第一类型的用户交互可包含标识包含第一输入的多个所接收的输入的第一质量,从多个所接收的输入的第一质量导出第二质量,并且标识具有第二质量的第一类型的用户交互。在本文中参考图8中示出的方法800的框802另外描述可执行的对接收到的第一输入的分析的这些和另外实例。
处理装置可标识的与第一触摸传感器的用户交互的类型和/或质量的多个非穷尽性或非限制实例包含:点击;强点击;快速点击;多次点击;点击的方位;按压;按压的持续时间;按压的压力;按压的方位;滑移;单个手指滑移;多个手指滑移;滑移的速度、滑移的长度、滑移的方位;手势;手势的形状;悬停;悬停的高度;悬停的持续时间;悬停的方位;抓持;抓持的偏手性、用于抓持的手部或手指的数目、抓持的方位;抓持的压力;或抓持的区域;用以进行交互的身体或对象的部分。
在框306中,处理装置可标识多传感器输入数据结构中的与第一类型的用户交互对应的第一传感器输入数据。如在本文中进一步描述,移动计算装置可包含多传感器输入数据结构(例如,图11的多传感器输入转译表1100),其被配置成使与触摸传感器的用户交互的组合和多传感器输入响应(例如,图11的列1116、1118中的动作数据)相关。多传感器输入数据结构可包含可表示与触摸传感器的交互的传感器输入数据(例如,图11的列1102、1104、1106中的传感器输入数据),其包含与触摸传感器的交互的质量和/或类型。举例来说,为标识多传感器输入数据结构中的与第一类型的用户交互对应的第一传感器输入数据,处理装置可将第一类型的用户交互和与第一触摸传感器相关联的多个传感器输入数据进行比较,并且可从与第一触摸传感器相关联的多个传感器输入数据标识匹配第一类型的用户交互的第一传感器输入数据。为确定接收到的第一输入是否匹配多传感器输入的第一传感器输入数据,处理装置可将与接收到第一输入的第一触摸传感器的用户交互的质量和/或类型和多传感器输入数据结构中的传感器输入数据进行比较。处理装置可确定与接收到第一输入的第一触摸传感器的用户交互的质量和/或类型是否匹配传感器输入数据中的任一个。
在框308中,处理装置可从第二触摸传感器(例如,图1A-2中的触摸传感器102、104、106、108、227)接收第二输入。在一些实施例中,用户可与移动计算装置的具有第二触摸传感器的表面或区域(例如,图1A和1B中的前部区域112、后部区域114、侧部116a、116b和顶部区域118)交互。与第二触摸传感器的用户交互可触发与第二触摸传感器相关联的处理装置或微控制器(例如,图2中的微控制器228)作出的响应。所述响应可包含被配置成指示与第二触摸传感器的用户交互的质量的信号或数据,例如与触摸传感器的交互的方位、区域、持续时间、方向、速度、压力、数目、频率或顺序。在一些实施例中,如在本文中参考图8中的方法800进一步描述,处理装置可被配置成从与第二触摸传感器的用户交互的其它质量导出与第二触摸传感器的用户交互的一些这类质量。处理装置可接收被配置成指示与第二触摸传感器的用户交互的质量的信号或数据。在一些实施例和情境中,在框302中从第一触摸传感器接收第一输入和在框308中从第二触摸传感器接收第二输入可包含并行地接收第一输入和第二输入。
在框310中,处理装置可从第二输入标识与第二触摸传感器的第二类型的用户交互。基于对接收到的第二输入的分析,处理装置可标识与第二触摸传感器的用户交互的特性,所述特性可指示与第二触摸传感器的用户交互的类型和/或质量。可使用各种技术、算法或启发式导出与第二触摸传感器的用户交互的类型和/或质量。如在本文中参考图8中的方法800的框802进一步描述,可执行对接收到的第二输入的分析。
处理装置可标识的与第二触摸传感器的用户交互的类型和/或质量的多个非穷尽性或非限制实例包含:点击;强点击;快速点击;多次点击;点击的方位;按压;按压的持续时间;按压的压力;按压的方位;滑移;单个手指滑移;多个手指滑移;滑移的速度、滑移的长度、滑移的方位;手势;手势的形状;悬停;悬停的高度;悬停的持续时间;悬停的方位;抓持;抓持的偏手性、用于抓持的手部或手指的数目、抓持的方位;抓持的压力;或抓持的区域;以及用以进行交互的身体或对象的部分。
在框312中,处理装置可标识多传感器输入数据结构中的与第二类型的用户交互对应的第二传感器输入数据。如在本文中进一步描述,移动计算装置可包含多传感器输入数据结构(例如,图11的多传感器输入转译表1100),其被配置成使与触摸传感器的用户交互的组合和多传感器输入响应(例如,图11的列1116、1118中的动作数据)相关。多传感器输入数据结构可包含可表示与触摸传感器的交互的传感器输入数据(例如,图11的列1102、1104、1106中的传感器输入数据),其包含与触摸传感器的交互的质量和/或类型。为确定所接收的第二输入是否匹配多传感器输入的第二传感器输入数据,处理装置可将与所接收的第二输入的第二触摸传感器的用户交互的质量和/或类型与多传感器输入数据结构中的传感器输入数据进行比较。处理装置可确定与所接收的第二输入的第二触摸传感器的用户交互的质量和/或类型是否匹配传感器输入数据中的任一个。
在框314中,处理装置可确定第一输入和第二输入是否组合为多传感器输入数据结构中的具有与多传感器输入响应有关的第一传感器输入数据和第二传感器输入数据的条目中的多传感器输入。从使接收到的第一和第二输入与多传感器输入数据结构中的第一和第二传感器输入数据匹配,处理装置可标识多传感器输入数据结构中的具有用于接收到的第一和第二输入的第一和第二传感器输入数据的条目。具有用于所接收的第一和第二输入的第一和第二传感器输入数据的条目可对应于由所述条目的第一和第二传感器输入数据定义的多传感器输入。处理装置接着可响应于确定第一输入和第二输入组合为多传感器输入数据结构中的具有与多传感器输入响应有关的第一传感器输入数据和第二传感器输入数据的条目中的多传感器输入,执行多传感器输入响应。
在一些实施例中,处理装置可在框308中确定在从接收到第一输入起的多传感器输入序列持续时间期间是否接收到第二输入,并且响应于确定在从接收到第一输入起的多传感器输入序列持续时间期间接收到第二输入,执行如上文所描述的框310-314中的操作。
图4说明根据各种实施例的启用用于管理多传感器输入的多传感器输入模式的方法。参考图1A-4,方法400可实施于移动计算装置(例如,图1A-2中的100、200)的硬件组件和/或软件组件中,其操作可受移动计算装置的一或多个处理器(例如,通用处理器206)控制。为了涵盖在各种实施例中实现的替代性配置,实施方法400的硬件在本文中被称作“处理装置”。
在各种实施例中,在移动计算装置上,例如在被配置成处理来自一组最频繁使用的触摸传感器(例如触摸屏(例如,图1A中的触摸传感器102、图2中的触摸屏226)的输入的普通输入模式中,可启用对来自第一触摸传感器的第一输入的处理。
在框402中,处理装置可检测对多传感器输入模式的触发。多传感器输入模式可被配置成启用对与触摸传感器(例如,图1A-2中的触摸传感器102、104、106、108、227)的用户交互的处理,所述触摸传感器在其它情况下可能并不被启用以检测一些或任何用户交互。这类触摸传感器可包含移动计算装置的并非移动计算装置的前部或触摸屏的表面或区域(例如,图1A和1B中的前部区域112、后部区域114、侧部116a、116b和顶部区域118)的电容输入传感器。
在一些实施例中,触发可为从与触摸传感器的用户交互接收到的输入,所述触摸传感器包含被配置成检测特定用户交互以触发多传感器输入模式但在其它情况下可能并不被启用以检测一些或任何其它用户交互的触摸传感器。举例来说,独特抓握如用户将中指和食指放置成靠近在一起,这并非持握移动计算装置的常态方式。在另一实例中,独特点击或背部/侧部手势可触发侦听其它背部/侧部手势。换句话说,处理装置可能仅注意硬背部点击,这一般不与标准握持相关联。一旦标识此独特点击,处理装置便可开始侦听其它类别的背部/侧部触摸。
在一些实施例中,触发可为由处理装置接收的表示装置参数的信号或数据,其可以被称作装置参数数据。装置参数数据可表示除与触摸传感器的交互以外的任何数目和组合的移动计算装置参数。举例来说,装置参数数据可包含来自移动计算装置的其它传感器(例如光传感器、加速度计、陀螺仪、温度传感器、电压和/或电流传感器、红外传感器等)的读数或信号。装置参数数据可包含移动计算装置的方位数据,例如全球定位系统(GPS)数据。装置参数数据可包含移动计算装置的有线或无线连接数据,例如蜂窝、Wi-Fi、蓝牙、近场通信(NFC)等,或有线外围装置连接数据,包含移动计算装置连接到的装置的连接状态或标识。装置参数数据可包含移动计算装置状态数据,例如移动计算装置的电力状态(例如,全满、低、充电、特定电池充电或电量等)或活动状态(例如,处于作用中、睡眠、休眠等)。
在一些实施例中,触发可包含作为在移动计算装置上执行的应用程序的实施方案的部分由处理装置处理的信号或指令。在一些实施例中,触发可为数个接收到的输入、装置参数或应用程序相关信号或指令或其组合。
在框404中,处理装置可响应于检测到触发而进入多传感器输入模式。处理装置可确定并且加载被配置成解释与移动计算装置的多个触摸传感器输入的用户交互的多传感器输入数据结构(例如,图11的多传感器输入转译表1100)。
在一些实施例中,处理装置可取决于接收到的触发出于不同目的进入多传感器输入模式,这可提示处理装置确定和加载与特定目的相关联的多传感器输入数据结构。举例来说,移动计算装置在一表面上前部朝下结合与移动计算装置的背部上的触摸传感器的不同用户交互可出于不同目的触发多传感器输入模式。触摸传感器上的点击可激活家庭助手应用程序,而沿着触摸传感器的竖直轴线的滑移可调整移动计算装置的扬声器的音量。在另一实例中,如果环境亮度非常高并且不同于最近一次设置显示器亮度时的环境亮度,那么与触摸传感器的用户交互可调整显示器亮度级。
在框406中,处理装置可启用对来自第二触摸传感器的第二输入的处理。处理装置可启用第二触摸传感器以检测其先前可能检测不到的输入和/或启用处理装置以处理来自所述处理装置先前处理输入不针对的第二触摸传感器的输入。在一些实施例中,触摸传感器可被激活、被更频繁地监测、被启用以将输入发送到处理装置,或增加敏感性,其中的任一个可包含启用微控制器(例如,图2中的微控制器228)或与第二触摸传感器相关联的微控制器的特征。在一些实施例中,处理装置可启用自身处理从第二触摸传感器接收的全部或更多输入,或监测或增加对触摸传感器的监测。
在启用第二触摸传感器以检测其先前可能检测不到的输入和/或启用处理装置以处理来自所述处理装置先前处理输入不针对的触摸传感器的输入之后,如参考图6中的方法600或图9中的方法900的类似编号框所描述,处理装置可在框602中接收来自第一触摸传感器的第一输入。替代地,如参考图7中的方法700所描述,处理装置可在框702中接收来自第一触摸传感器的第一输入和来自第二触摸传感器的第二输入。
图5说明根据各种实施例的整合移动计算装置的多个相异表面上的多触摸输入的方法500。参考图1A-5,方法500的操作可实施于移动计算装置(例如,100、200)的硬件组件和/或软件组件中,其操作可受移动计算装置的一或多个处理器(例如,通用处理器206和/或微控制器228)控制。
在框510中,处理器可接收来自移动计算装置上的不同于移动计算装置的触摸屏的至少一个触摸传感器的多传感器输入。举例来说,用户触摸移动计算装置上的触摸传感器可致使通过触摸传感器所测量的触摸传感器状态(例如电容)的改变。
处理器可接收所测量的触摸传感器状态改变作为多传感器输入。所接收的测量值可反映各种类型的输入的特性,包含接触的持续时间、接触点的数目、接触点的大小、接触的序列或连续系列、同时接触的模式,以及在接触期间施加的压力或力水平。举例来说,作为抓握移动计算装置的部分,用户触摸位于移动计算装置的背壳(例如,后部区域114)上的背面板触摸传感器可致使与抓握事件相关联的可辨识的触摸传感器状态改变。作为另一个实例,用户在背面板触摸传感器上做出手势,如跨背壳的一部分曲线滑移,可致使与所述手势相关联的可辨识的不同触摸传感器状态改变。
在框520中,处理器可使用情境感知数据确定移动计算装置的操作情境。情境感知数据可包含来自各种来源的有助于定义形成其中接收到多传感器输入的场景(即,操作情境)的情形的信息。
用户可意图多传感器输入用于执行第一操作情境中的第一操作,但在第二操作情境中,不执行第一操作和/或执行第二操作。举例来说,处理器可利用来自情境感知数据的线索触发用于多表面触摸的更全面检测模式。
多表面触摸可包含与移动计算装置的不同侧部上的触摸传感器的接触。举例来说,触摸屏的显示器上的目前处于作用中的应用程序产生可用的额外功能或改变移动计算装置的触摸传感器检测模式。
同样地,移动计算装置的位置、定向和/或移动可提供对产生可用的额外功能或改变移动计算装置的触摸传感器检测模式的触发。举例来说,将移动计算装置平放在桌子上可触发用于多表面触摸的检测模式或触发检测模式的改变。而且,摇动移动计算装置可触发允许用户使用多表面触摸执行功能的模式。作为另一个实例,处理器可利用环境特性触发多表面触摸的特定检测模式。举例来说,如果环境亮度非常高并且不同于最近一次设置显示器亮度时的环境亮度,那么在背部触摸传感器上检测到的触摸或移动可转译为亮度级的调整。
在框530中,处理器可确定与在框510中接收到的多传感器输入和在框520中确定的操作情境相关联的功能(例如,第一功能)。框530中的确定可涉及标识或选择适合于用于所确定的操作情境的特定多传感器输入转译表或表集。适当的多传感器输入转译表可提供从一或多个触摸传感器接收的多传感器输入与处理器可执行或致使移动计算装置的另一组件执行的功能之间的相关性。处理器可从存储器(例如,图2中的214)获得特定转译表。替代地或另外,框530中的确定可涉及将所确定的操作情境和所接收的多传感器输入应用于确定功能的级联规则集和/或参数方法。
在框540中,处理器可执行被配置成致使移动计算装置执行框530中确定的功能的操作。执行的操作可改变控制触摸传感器的设置,改变使用哪个多传感器输入转译表,或改变与触摸传感器相关联的功能。举例来说,当用户执行移动计算装置的背部上的被处理器辨识的第一“触发”手势时,在预定时段内,处理器可接收快捷手势,所述快捷手势被配置成在接下来的几秒钟内启动移动计算装置上的特定应用程序。另外或替代地,执行的操作可改变移动计算装置的其它设置。此外,执行的操作可将消息和/或指令发射到另一组件以用于执行所确定的功能。举例来说,执行通常与移动计算装置和/或与移动计算装置上的处于作用中的应用程序相关联的操作。
在一些实施例中,处理器可重复方法500的操作以将另外的触摸传感器读数映射到移动计算装置的应用程序功能。执行方法500的操作可改变操作情境,因此改变或产生与接收到的多传感器输入相关联的可用的额外功能。举例来说,在框510中接收到的多传感器输入可表示移动计算装置上的独特抓握,如用户将中指和食指放置成靠近在一起,这并非持握移动计算装置的常态方式。
另外,移动计算装置的操作情境可包含其中多表面接触不被辨识为输入功能(即,多表面控制断开)的状态。以此方式,当多表面控制断开时接收到对应于独特抓握的多传感器输入可触发框540中的将多表面控制接通的操作。
作为另一实例,在框510中接收到的多传感器输入可表示被配置成解锁其它背部/侧部手势的独特点击或背部/侧部手势。以此方式,装置可被配置成监测硬背部点击(其一般不与标准握持相关联)。一旦标识这类硬背部点击,处理器便可监测触发最近不可用的功能的其它类别的背部/侧部触摸。类似地,独特点击或背部/侧部手势可触发处理器侦听其它后续背部/侧部手势。举例来说,处理器可始终监测特定触摸分布曲线,如来自移动计算装置的背部上的硬点击的特定触摸分布曲线,所述硬点击一般不与装置上的标准抓握相关联。一旦检测到所述特定触摸分布曲线,处理器便可开始监测其它类别的触摸分布曲线。
处理器可响应于在框510中接收到额外多传感器输入而重复方法500的操作。作为另一实例,处理器可重复方法500的操作达预定义的重复数或持续在与移动计算装置上的处于作用中的应用程序相关联的参数中指示的预定义时段。
在各种实施例中,本文中参考图6-9中的方法600、700、800、900的描述提供参考图3和4描述的方法300、400的和/或与之有关的另外描述、特征和实施例。
图6说明根据各种实施例的管理依序接收到的多传感器输入的方法。参考图1A-6,方法600可实施于移动计算装置(例如,图1A-2中的100、200)的硬件组件和/或软件组件中,其操作可受移动计算装置的一或多个处理器(例如,通用处理器206)控制。为了涵盖在各种实施例中实现的替代性配置,实施方法600的硬件在本文中被称作“处理装置”。
在框602中,处理装置可从第一触摸传感器(例如,图1A-2中的触摸传感器102、104、106、108、227)接收第一输入。在一些实施例中,用户可与移动计算装置的具有触摸传感器的表面或区域(例如,图1A和1B中的前部区域112、后部区域114、侧部116a、116b,和顶部区域118)交互。与第一触摸传感器的用户交互可触发与触摸传感器相关联的处理装置或微控制器(例如,图2中的微控制器228)作出的响应。所述响应可包含被配置成指示与触摸传感器的用户交互的质量的信号或数据,例如与触摸传感器的交互的方位、区域、持续时间、方向、速度、压力、数目、频率或顺序。在一些实施例中,如在本文中参考图8中的方法800进一步描述,处理装置可被配置成从与触摸传感器的用户交互的其它质量导出与触摸传感器的交互的一些这类质量。处理装置可接收被配置成指示与触摸传感器的交互的质量的信号或数据。
在确定框604中,处理装置可确定来自第一触摸传感器的第一输入是否是多传感器输入的潜在部分。在一些实施例中,多传感器输入可为与第一触摸传感器的用户交互和与第二触摸传感器的用户交互的组合。与第一触摸传感器的用户交互和与第二触摸传感器的用户交互的特定组合可通过与对多传感器输入的多传感器输入响应相关联来定义多传感器输入。
在一些实施例中,多传感器输入的定义可存储于移动计算装置上,移动计算装置的存储器(例如,图2的存储器214)中。举例来说,多传感器输入的定义可存储于多传感器输入数据结构(例如,图11的多传感器输入转译表1100)中,所述多传感器输入数据结构被配置成使与第一触摸传感器的用户交互和与第二触摸传感器的用户交互的组合与多传感器输入响应相关。
为在确定框604中确定第一输入是否是多传感器输入的潜在部分,处理装置可将第一输入与多传感器输入数据结构中的与第一触摸传感器相关联的数据(例如,图11的列1102、1104、1106中的传感器数据)进行比较。有可能的是可将第一输入确定为任何数目个多传感器输入的部分,但来自第二触摸传感器的后续第二输入可能不符合与第一输入组合的多传感器输入的定义。因此,可将第一输入确定为多传感器输入的潜在部分,这是因为可能不确定多传感器输入的第二输入将接续第一输入。在这类情形中,如本文中参考框612另外描述,第一输入可能并不与第二输入组合来触发多传感器输入响应。
响应于确定来自第一触摸传感器的第一输入不是多传感器输入的潜在部分(即,确定框604=“否”),处理装置可在框612中确定第一输入是单传感器输入。处理装置可能不在确定框604中标识多传感器输入的定义中的第一输入。因而,可能没有任何必要继续确定来自第二触摸传感器的后续第二输入结合第一输入是否组合形成多传感器输入。因此,处理装置可将第一输入分类为单传感器输入并且终止通过在框602中接收来自第一触摸传感器的第一输入触发的方法600的例子。
响应于确定来自第一触摸传感器的第一输入是多传感器输入的潜在部分(即,确定框604=“是”),处理装置可在框608中等待来自第二触摸传感器的第二输入。在一些情况下,多传感器输入可为在多传感器输入序列持续时间内的序列中与第一触摸传感器的第一用户交互和与第二触摸传感器的第二用户交互的组合。多传感器输入序列持续时间可表示从接收第一输入起经标示的时段,例如时间、晶体管触发等,在接收第一输入期间,处理装置可接收第二输入。处理装置可在对第一输入作出响应之前等待多传感器输入序列持续时间,以允许用户有机会与第二触摸传感器交互,从而将多传感器输入实施为第一和第二触摸传感器上的输入序列。
在确定框610中,处理装置可确定是否在多传感器输入序列持续时间期间接收到来自第二触摸传感器的第二输入。在一些实施例中,处理装置可在多传感器输入序列持续时间期间接收到第二输入,且在一些实施例中,多传感器输入序列持续时间可在处理装置接收到第二输入之前到期。
在多传感器输入序列持续时间之后接收到的输入可处理为新的第一输入。因此,响应于确定在多传感器输入序列持续时间期间未接收到来自第二触摸传感器的第二输入(即,确定框610=“否”),如本文中所描述,处理装置可在框612中确定第一输入是单传感器输入。
在一些实施例中,处理装置可在框602中接收到来自第一触摸传感器的第一输入之后且在确定框610中确定在多传感器输入序列持续时间期间未接收到来自第二触摸传感器的第二输入之前的任何时间,在框606中,接收来自第二触摸传感器(例如,图1A-2中的触摸传感器102、104、106、108、227)的第二输入。在一些实施例中,用户可与移动计算装置的具有第二触摸传感器的第二表面或第二区域(例如,图1A和1B中的前部区域112、后部区域114、侧部116a、116b和顶部区域118)交互。与第二触摸传感器的用户交互可以与参考框602所描述的方式相同的方式触发响应。
在一些实施例中,处理装置可并行地运行方法600的多个例子,且在方法600的其它情况下,在框606中接收到的第二输入可为在框602中接收到的第一例子。
在框606中接收到来自第二触摸传感器的第二输入之后并且响应于确定在多传感器输入序列持续时间期间接收到来自第二触摸传感器的第二输入(即,确定框610=“是”),处理装置可在确定框614中确定来自第一触摸传感器的第一输入和来自第二触摸传感器的第二输入是否组合为多传感器输入。类似于在确定框604中确定第一输入是否是多传感器输入的潜在部分,处理装置可使用多传感器输入数据结构来确定第二输入是否与第一输入组合为多传感器输入,所述多传感器输入数据结构被配置成使与第一触摸传感器和第二触摸传感器的用户交互的组合与多传感器输入响应相关。在一些实施例中,处理装置可将第二输入与多传感器输入数据结构中的数据(例如,图11的列1102、1104、1106中的传感器输入数据)进行比较,以确定第二输入是否匹配多传感器输入数据结构的任何条目,并且将所述条目与匹配在确定框604中标识的第一输入的条目进行比较。在一些实施例中,处理装置可将第二输入与多传感器输入数据结构的匹配在确定框604中标识的第一输入的条目中的数据进行比较。匹配第一输入和第二输入的条目或匹配第一输入的条目中的第二输入的数据可指示第一输入和第二输入定义多传感器输入数据结构中的多传感器输入。不匹配第一输入和第二输入的条目或不匹配第一输入的条目中的第二输入的数据可指示第一输入和第二输入不定义多传感器输入数据结构中的多传感器输入。
响应于确定来自第一触摸传感器的第一输入和来自第二触摸传感器的第二输入不组合为多传感器输入(即,确定框614=“否”),处理装置可在框616中确定第一输入和第二输入是单传感器输入。类似于在框612中确定第一输入是单传感器输入,处理装置可能不在确定框614中标识多传感器输入的定义中的第一输入和第二输入的组合。因而,可能没有任何必要继续实施用于第一输入和第二输入的组合的方法600。因此,处理装置可将第一输入和第二输入分类为单传感器输入并且终止通过在框602中接收来自第一触摸传感器的第一输入触发的方法600的例子。
响应于确定来自第一触摸传感器的第一输入和来自第二触摸传感器的第二输入确实组合为多传感器输入(即,确定框614=“是”),处理装置可在框618中执行多传感器输入响应。如本文所描述,多传感器输入数据结构可使多传感器输入和多传感器输入响应相关。处理装置可执行来自多传感器输入数据结构或参考来自多传感器输入数据结构(例如,图11中的列1116、1118中的动作数据)的多传感器输入响应的代码(例如,图11中的列1116、1118中的动作数据)。
图7说明根据各种实施例的管理同时接收到的多传感器输入的方法。参考图1A-7,方法700可实施于移动计算装置(例如,图1A-2中的100、200)的硬件组件和/或软件组件中,其操作可受移动计算装置的一或多个处理器(例如,通用处理器206)控制。为了涵盖在各种实施例中实现的替代性配置,实施方法700的硬件在本文中被称作“处理装置”。
在一些实施例中,框616和618可以类似于针对参考图6中的方法600的类似编号框描述的方式的方式实施。
在框702中,处理装置可接收来自第一触摸传感器(例如,图1A-2中的触摸传感器102、104、106、108、227)的第一输入和来自第二触摸传感器(例如,图1A-2中的触摸传感器102、104、106、108、227)的第二输入。在一些实施例中,用户可与移动计算装置的具有触摸传感器的多个表面或区域(例如,图1A和1B中前部区域112、后部区域114、侧部116a、116b和顶部区域118)交互。与触摸传感器的用户交互可触发与触摸传感器相关联的处理装置或微控制器(例如,图2中的微控制器228)作出的响应。所述响应可包含被配置成指示与触摸传感器的交互的质量的信号或数据,例如与触摸传感器的交互的方位、区域、持续时间、方向、速度、压力、数目、频率或顺序。在一些实施例中,如在本文中参考图8中的方法800进一步描述,处理装置可被配置成从与触摸传感器的交互的其它质量导出与触摸传感器的交互的一些这类质量。处理装置可接收被配置成指示与触摸传感器的交互的质量的信号或数据。在一些实施例中,与触摸传感器的用户交互可同时或并行地发生。类似地,处理装置可同时或并行地接收第一输入和第二输入。
在确定框704中,处理装置可确定来自第一触摸传感器的第一输入和来自第二触摸传感器的第二输入是否组合为多传感器输入。在一些实施例中,多传感器输入可为与第一触摸传感器的用户交互和与第二触摸传感器的用户交互的组合。与第一触摸传感器的用户交互和与第二触摸传感器的用户交互的特定组合可通过与对多传感器输入的多传感器输入响应相关联来定义多传感器输入。在一些实施例中,多传感器输入的定义可存储于移动计算装置上,移动计算装置的存储器(例如,图2的存储器214)中。举例来说,多传感器输入的定义可存储于多传感器输入数据结构(例如,图11的多传感器输入转译表1100)中,所述多传感器输入数据结构被配置成使与第一触摸传感器的用户交互和与第二触摸传感器的用户交互的组合与多传感器输入响应相关。为确定第一输入和第二输入是否组合为多传感器输入,处理装置可将第一输入与多传感器输入数据结构中的与第一触摸传感器相关联的数据(例如,图11的列1102、1104、1106中的传感器输入数据)进行比较并且将第二输入与多传感器输入数据结构中的与第二触摸传感器相关联的数据(例如,图11的列1102、1104、1106中的传感器输入数据)进行比较。在一些实施例中,处理装置可将第一输入和第二输入与多传感器输入数据结构的数据进行比较以确定第一输入和第二输入是否匹配多传感器输入数据结构的任何条目,并且将第一输入的条目和第二输入的条目与彼此进行比较以找到匹配条目。在一些实施例中,处理装置可将第二输入与多传感器输入数据结构的匹配第一输入的条目中的数据进行比较。匹配第一输入和第二输入的条目或匹配第一输入的条目中的第二输入的数据可指示第一输入和第二输入定义多传感器输入数据结构中的多传感器输入。有可能的是第一输入和/或第二输入可被标识为任何数目个多传感器输入的部分,而非用于组合中的多传感器输入的相同定义。不匹配第一输入和第二输入的条目或不匹配第一输入的条目中的第二输入的数据可指示第一输入和第二输入不定义多传感器输入数据结构中的多传感器输入。
响应于确定来自第一触摸传感器的第一输入和来自第二触摸传感器的第二输入不组合为多传感器输入(即,确定框704=“否”),处理装置可在框616中确定第一输入和第二输入是单传感器输入。
响应于确定来自第一触摸传感器的第一输入和来自第二触摸传感器的第二输入确实组合为多传感器输入(即,确定框704=“是”),处理装置可在框618中执行多传感器输入响应。
图8说明根据各种实施例的确定接收到的输入是否是多传感器输入的方法。参考图1A-8,方法800可实施于移动计算装置(例如,图1A-2中的100、200)的硬件组件和/或软件组件中,其操作可受移动计算装置的一或多个处理器(例如,通用处理器206)控制。为了涵盖在各种实施例中实现的替代性配置,实施方法800的硬件在本文中被称作“处理装置”。
在框802中,处理装置可分析从触摸传感器(例如,图1A-2中的触摸传感器102、104、106、108、227)接收到的输入。所接收的输入可以是如本文中参考图6和7中的方法600和700的框602、604和702所描述从第一触摸传感器接收到的第一输入和从第二触摸传感器接收到的第二输入中的任一个。所接收的输入可包含接收到的多个输入,所述多个输入组合形成与触摸传感器的单个用户交互。如本文所描述,所接收的输入可包含被配置成指示与触摸传感器的交互的质量的信号或数据,例如与触摸传感器的交互的方位、区域、持续时间、方向、速度、压力、数目、频率或顺序。处理装置可从所接收的输入标识由所接收的输入指示的质量中的任一个。处理装置还可从所接收的输入的经标识质量导出所接收的输入的质量。举例来说,所接收的输入的经标识质量可仅包含与触摸传感器的用户交互的方位,其可指示触摸传感器阵列中的触摸传感器或触摸传感器上的方位。多个方位可包含在所接收的输入中。
处理装置可确定所接收的输入的方位相对于时间的改变。从所接收的输入的方位相对于时间的改变,处理装置可确定所接收的输入的质量。
如下是多个非穷尽性或非限制性实例。处理装置可基于记录方位持续的时间,确定所接收的输入的持续时间。处理装置可基于方位改变,确定所接收的输入的方向。处理装置可基于方位相对于时间的改变,确定所接收的输入的速度。处理装置可基于记录的方位,确定被所接收的输入覆盖的区域。处理装置可基于参考时间记录的方位的模式,确定所接收的输入的方位处的压力。处理装置可基于方位的模式和所记录的方位的缺失,确定与所接收的输入的触摸传感器的交互的数目。处理装置可基于方位的模式和参考时间记录的方位的缺失,确定与所接收的输入的触摸传感器的交互的频率。处理装置可基于方位的模式和参考时间记录的方位和其它接收到的或导出的质量的缺失,确定与所接收的输入的触摸传感器的交互的顺序。可使用各种技术、算法或启发式导出所接收的输入的质量。
在框804中,处理装置可标识与触摸传感器的交互的类型和/或质量。基于所接收的输入的分析,处理装置可标识与触摸传感器的交互的特性,所述特性可指示与触摸传感器的交互的类型和/或质量。可使用各种技术、算法或启发式导出与触摸传感器的交互的质量和/或类型。
处理装置可标识的与触摸传感器的交互的类型和/或质量的多个非穷尽性或非限制实例包含:点击;强点击;快速点击;多次点击;点击的方位;按压;按压的持续时间;按压的压力;按压的方位;滑移;单个手指滑移;多个手指滑移;滑移的速度、滑移的长度、滑移的方位;手势;手势的形状;悬停;悬停的高度;悬停的持续时间;悬停的方位;抓持;抓持的偏手性、用于抓持的手部或手指的数目、抓持的方位;抓持的压力;或抓持的区域;以及用以进行交互的身体或对象的部分。
在确定框806中,处理装置可确定所接收的输入是否匹配多传感器输入的传感器输入数据。如本文所描述,移动计算装置可包含多传感器输入数据结构(例如,图11的多传感器输入转译表1100),其被配置成使与触摸传感器的用户交互的组合和多传感器输入响应(例如,图11的列1116、1118中的动作数据)相关。多传感器输入数据结构可包含可表示与触摸传感器的交互的传感器输入数据(例如,图11的列1102、1104、1106中的传感器数据),包含与触摸传感器的交互的质量和/或类型。为确定所接收的输入是否匹配多传感器输入的传感器输入数据,处理装置可将与所接收的输入的触摸传感器的交互的质量和/或类型与多传感器输入数据结构中的传感器输入数据进行比较。处理装置可确定与所接收的输入的触摸传感器的交互的质量和/或类型是否匹配传感器输入数据中的任一个。
响应于确定所接收的输入不匹配多传感器输入的任何传感器输入数据(即,确定框806=“否”),如针对参考图6中的方法600的类似编号框所描述,处理装置可在框612中确定所接收的输入是单传感器输入,或如针对参考图6中的方法600或图7中的方法700的类似编号框所描述,处理装置可在框616中确定接收到的多个输入是单传感器输入。
响应于确定所接收的输入确实匹配多传感器输入的传感器输入数据(即,确定框806=“是”),处理装置可在框808中标识具有传感器输入数据的多传感器输入。如本文所描述,多传感器输入数据结构可包含使传感器输入数据与多传感器输入响应相关的条目(例如,图11的行1120、1122、1124、1126、1128、1130)。从使所接收的输入与传感器输入数据匹配,处理装置可标识多传感器输入数据结构中的具有传感器输入数据的条目。在一些实施例中,可在标识多传感器输入时考虑另外的因素,包含移动计算装置或在移动计算装置上运行的应用程序(例如,图11的列1112、1114中的应用程序数据)的装置参数(例如,图11的列1108、1110中的装置参数数据)。
在一些实施例中,装置参数或应用程序可为用于多传感器输入数据结构的条目中的匹配以标识多传感器输入的额外因素。在一些实施例中,装置参数或应用程序可代替来自第二触摸传感器的第二输入使用,且所述匹配可基于单个输入和装置参数或应用程序。条目可对应于由条目的传感器输入数据定义的多传感器输入。
在其中仅接收到一个输入的一些实施例中,如本文中参考图6中的方法600所描述,处理装置可在框608中等待来自第二触摸传感器的第二输入。
在其中接收到多个输入的一些实施例中,处理装置可在确定框812中确定接收到的多个输入是否匹配条目的传感器输入数据。从使所接收的输入与传感器输入数据匹配,处理装置可标识多传感器输入数据结构中的具有用于多个接收到的输入的传感器输入数据的条目。具有用于多个接收到的输入的传感器输入数据的条目可对应于由所述条目的传感器输入数据定义的多传感器输入。
响应于确定接收到的多个输入匹配条目的传感器输入数据(即,确定框812=“是”),如针对参考图6的方法600或参考图7的方法700的类似编号框所描述,处理装置可在框618中执行多传感器输入响应。
响应于确定接收到的多个输入不匹配条目的传感器输入数据(即,确定框812=“否”),如针对参考图6的方法600或参考图7的方法700的类似编号框所描述,处理装置可在框616中确定接收到的多个输入是单传感器输入。
图9说明根据各种实施例的管理在多传感器输入模式中接收到的多传感器输入的方法。参考图1A-9,方法900可实施于移动计算装置(例如,图1A-2中的100、200)的硬件组件和/或软件组件中,其操作可受移动计算装置的一或多个处理器(例如,通用处理器206)控制。为了涵盖在各种实施例中实现的替代性配置,实施方法900的硬件在本文中被称作“处理装置”。
在一些实施例中,框602、618可以类似于针对参考图6中的方法600的类似编号框描述的方式的方式实施,且框802、804、808可以类似于针对参考图8中的方法800的类似编号框描述的方式的方式实施。
在框602中,处理装置可接收来自第一触摸传感器(例如,图1A-2中的触摸传感器102、104、106、108、227)的第一输入。在框802中,处理装置可分析从触摸传感器接收到的输入。在框804中,处理装置可标识与触摸传感器的交互的类型和/或质量。
在框902中,处理装置可标识匹配接收到的输入的多传感器输入的传感器输入数据(例如,图11的列1102、1104、1106中的传感器数据)。如本文所描述,移动计算装置可包含多传感器输入数据结构(例如,图11的多传感器输入转译表1100),其被配置成使与触摸传感器的用户交互和多传感器输入响应(例如,图11的列1116、1118中的动作数据)相关。多传感器输入数据结构可包含可表示与触摸传感器的交互的传感器输入数据,包含与触摸传感器的交互的质量和/或类型。为标识匹配多传感器输入的传感器输入数据的所接收的输入,处理装置可将与所接收的输入的触摸传感器的交互的质量和/或类型与多传感器输入数据结构中的传感器输入数据进行比较。处理装置可确定与所接收的输入的触摸传感器的交互的质量和/或类型是否匹配传感器输入数据中的任一个。
在框808中,处理装置可标识具有传感器输入数据的多传感器输入。在框618中,处理装置可执行多传感器输入响应。
在各种实施例中,图10中的方法1000的描述提供参考图5所描述的方法500的和/或与之有关的另外描述、特征和实施例。
图10说明根据各种实施例的整合移动计算装置的多个相异表面上的多触摸输入的方法。参考图1A-10,方法1000可实施于移动计算装置(例如,图1A-2中的100、200)的硬件组件和/或软件组件中,其操作可受移动计算装置的一或多个处理器(例如,通用处理器206)控制。为了涵盖在各个实施例中实现的替代配置,实施方法1000的硬件在本文中被称作“处理装置”。
在一些实施例中,可如针对参考图6的方法600的类似编号框所描述地实施框602,且可如针对参考图8的方法800的类似编号框所描述地实施框802、804。
在框602中,处理装置可接收至少来自第一触摸传感器(例如,图1A-2中的触摸传感器102、104、106、108、227)的第一多传感器输入。在各种实施例中,第一触摸传感器可以是不同于移动计算装置的触摸屏(例如,图2的触摸屏226)的任何触摸传感器。
在框802中,处理装置可分析至少从第一触摸传感器接收到的第一多传感器输入。
在框804中,处理装置可标识至少与触摸传感器的交互的类型和/或质量。
在框1002中,处理装置可通过使用情境感知数据确定移动计算装置的操作情境。可通过推理引擎组合或融合多个数据来确定移动计算装置的操作情境。这类数据可包含与至少从第一触摸传感器接收到的第一多传感器输入相关联的数据、来自一或多个处于作用中的应用程序的参数、和/或来自与移动通信装置相关联的一或多个组件的状态信息,例如与接收到多传感器输入所处的条件相关的众多不同类型的数据。
在一些实施例中,处理装置可组合或融合与接收到多传感器输入所处的条件相关联的实时和非实时情境感知数据两者,以便确定操作情境。情境感知数据可包含与移动计算装置相关联的任何合适的类型的实时和/或非实时数据。如在本文中参考图12进一步描述,这类情境感知数据的实例可包含触摸屏处于作用中的应用程序参数1210、后台处于作用中的应用程序参数1220、触摸屏状态1230、其它机载组件状态1240、外围组件状态1250、多传感器输入细节1260、其它传感器输入1270,以及任何其它合适的情境感知数据,和/或其任何组合。
在框1004中,处理装置可确定适用于至少从第一触摸传感器接收到的第一多传感器输入和所确定的操作情境的选择多传感器转译表(例如,图11的多传感器输入转译表1100)。移动计算装置可存储任何数目个多传感器转译表。在各种实施例中,多传感器转译表中的不同者可与多传感器输入相关联,所述多传感器输入包含与至少触摸传感器和/或与移动计算装置的操作情境的交互的类型和/或质量。处理装置可确定所存储的多传感器转译表中的哪些多传感器转译表与至少从第一触摸传感器接收到的第一多传感器输入以及所确定的操作情境相关联。
在框1006中,处理装置可确定与至少从第一触摸传感器接收到的第一多传感器输入和所确定的操作情境相关联的第一功能。处理装置可在所确定的操作情境中考虑至少从第一触摸传感器接收到的第一多传感器输入以确定要执行的特定功能。
在一些实施例中,所确定的第一功能可基于在选择多传感器转译表上对至少从第一触摸传感器接收到的第一多传感器输入的查找。处理装置可确定至少从第一触摸传感器接收到的第一多传感器输入是否匹配多传感器输入的传感器输入数据。如本文所描述,多传感器输入转译表被配置成使与触摸传感器的用户交互的组合和功能或多传感器输入响应(例如,图11的列1116、1118中的动作数据,并且本文中参考图9-30B所描述的另外实例)相关。多传感器输入转译表可包含可表示与触摸传感器的交互的传感器输入数据(例如,图11的列1102、104、1106中的传感器输入数据),包含与触摸传感器的交互的质量和/或类型。
为确定至少从第一触摸传感器接收到的第一多传感器输入是否匹配多传感器输入的传感器输入数据,处理装置可将与接收到的第一多传感器输入的触摸传感器的交互的质量和/或类型和多传感器输入数据结构中的传感器输入数据进行比较。处理装置可确定与至少从第一触摸传感器接收到的第一多传感器输入的触摸传感器的交互的质量和/或类型是否匹配传感器输入数据中的任一个。处理装置可将第一功能确定为与选择多传感器转译表中的匹配的传感器输入数据相关联的功能。
在框1008中,处理装置可执行被配置成致使移动计算装置执行所确定的第一功能的第一操作。在一些实施例中,至少从第一触摸传感器接收到的第一多传感器输入可表示在至少所述第一触摸传感器中的第一触摸传感器上检测到的第一触摸移动。在一些实施例中,处理装置可执行被配置成致使移动计算装置执行移动计算装置的触摸屏上的作用中元素的第一虚拟移动的第一操作,所述第一虚拟移动类似于第一触摸移动。所确定的第一功能可相对于第一触摸移动按比例调整第一虚拟移动。所确定的第一功能可相对于第一触摸移动按比例调整第一虚拟移动的操作可基于第一触摸移动的速度。
在一些实施例中,处理装置可执行被配置成致使移动计算装置更改触摸屏的主动显示上的图像的背景和前景中的至少一个的第一操作。在一些实施例中,处理装置可执行被配置成致使移动计算装置控制不同于处于作用中的应用程序的后台应用程序的第一操作,所述处于作用中的应用程序充当对触摸屏的主动显示的主要控制。
在框602中,处理装置可至少从第二触摸传感器(例如,图1A-2中的触摸传感器102、104、106、108、227)接收第二多传感器输入。在一些实施例中,第二触摸传感器可为组成第一触摸传感器的多个触摸传感器中的一个的触摸传感器,且可与接收到的第一多传感器输入所来自的多个触摸传感器中的任一个相同或不同。处理装置可实施用于接收到的第二多传感器输入的框802、804、1002、1004。
在框1006中,处理装置可确定与接收到的第二多传感器输入和所确定的操作情境相关联的第二功能。在一些实施例中,所述所确定的操作情境可与所确定的与所确定的第一功能相关联的操作情境相同或不同。
在框1008中,处理装置可执行被配置成致使移动计算装置执行所确定的第二功能的第二操作。在一些实施例中,接收到的第二多传感器输入可表示在第二触摸传感器上检测到的第二触摸移动。在一些实施例中,处理装置可执行被配置成致使移动计算装置执行移动计算装置的触摸屏上的作用中元素的第二虚拟移动的第二操作,所述第二虚拟移动类似于第二触摸移动且在尺寸上不同于第一虚拟移动。
图11说明适用于实施各种实施例的实例多传感器输入转译表1100。图11仅提供为可用以取决于计算装置状态和/或正在执行的应用程序,使来自前部、背部、侧部、顶部和/或底部传感器的传感器输入的各种组合与特定动作或功能性有关的任何数目个数据结构的一个实例。此外,取决于装置状态和正在执行的应用程序使传感器输入的各种组合与特定功能性有关的其它形式可用于实施各种实施例,例如实施于软件、硬件或软件和硬件的组合中的级联决策树。因此,多传感器输入转译表1100既定作为各种实施例的数据结构类型实施方案的非限制性实例。
在使用转译表实施方案的实施例中,多传感器输入转译表1100可包含多种类型的数据,包含任何数目或组合的传感器输入、装置参数、应用程序和/或动作。在图11中说明的实例中,多传感器输入转译表1100包含对应于数据类型的数个列1102、1104、1106、1108、1110、1112、1114、1116、1118。实例数据列包含:传感器1输入对应的列1103;传感器2输入对应的列1104;传感器N输入对应的列1106;装置参数1对应的列1108;装置参数N对应的列1110;应用程序1对应的列1112;应用程序N对应的列1114;动作1对应的列1116;和动作N对应的列1118。多传感器输入转译表1100可被配置成使各种数据类型的数据有关,包含来自列1102、1104、1106的至少一个传感器输入和来自列1116、1118的至少一个动作。可在多传感器输入转译表1100中通过行1120、1122、1124、1126、1128、1130表示各种数据类型的数据之间的关系。
多传感器输入转译表1100可包含传感器输入数据类型的数据,其可以被称作传感器输入数据。传感器输入数据可表示与数个触摸传感器(例如,图1A-2中的触摸传感器102、104、106、108、227)的交互。各种触摸传感器可认识到的传感器交互的非限制性实例包含抓持、点击、按压、滑移、手势、松开或悬停,和与触摸传感器的并发、同时或顺序的交互的任何组合。传感器输入数据可表示与触摸传感器的交互的质量,例如与触摸传感器的交互的方位、区域、持续时间、方向、速度、压力、数目、频率或顺序。
多传感器输入转译表1100中的对应于传感器输入数据类型的每一列1102、1104、1106可与触摸传感器相关联。对应于传感器输入数据类型的列1102、1104、1106的数目可取决于触摸传感器的数目,高达N个触摸传感器。举例来说,列1102可对应于移动计算装置100的背部的触摸传感器,列1104可对应于移动计算装置100的前部的触摸传感器,且列1106可对应于移动计算装置100的任何数目个侧部的任何数目个触摸传感器。在一些实施例中,不同列可用于移动计算装置100的每一侧上的触摸传感器(例如,传感器106)。
多传感器输入转译表1100可包含装置参数数据类型的数据,其可以被称作装置参数数据。装置参数数据可表示除与触摸传感器的交互以外的任何数目和组合的移动计算装置参数。举例来说,装置参数数据可包含来自移动计算装置的其它传感器(例如光传感器、加速度计、陀螺仪、温度传感器、电压和/或电流传感器、红外传感器等)的读数或信号。装置参数数据可包含移动计算装置的方位数据,例如全球定位系统(GPS)数据。装置参数数据可包含移动计算装置的有线或无线连接数据,例如蜂窝、Wi-Fi、蓝牙、近场通信(NFC)等,或有线外围装置连接数据,包含移动计算装置连接到的装置的连接状态或标识。装置参数数据可包含移动计算装置状态数据,例如移动计算装置的电力状态(例如,全满、低、充电、特定电池充电或电量等)或活动状态(例如,处于作用中、睡眠、休眠等)。对应于装置参数数据类型的每一列1108、1110可与装置参数数据相关联。对应于装置参数数据类型的列1108、1110的数目可取决于装置参数数据的数目,高达N个装置参数数据。装置参数数据的数目可取决于与多传感器输入转译表1100的行1120、1122、1124、1126、1128、1130中的传感器输入数据的组合相关联的装置参数数据的数目。
多传感器输入转译表1100可包含应用程序数据类型的数据,其可以被称作应用程序数据。应用程序数据可表示移动计算装置上的任何数目和组合的应用程序的标识。移动计算装置上的应用程序可包含操作系统(OS)用户界面(UI)、集成到操作系统中以实施移动计算装置的固有功能的应用程序,或通过操作系统开发者或移动计算装置制造者、经销商、卖家或用户加载到移动计算装置的应用程序。借助于实例,应用程序可包含电话应用程序、相机或视频应用程序、相册应用程序、图像编辑应用程序、媒体播放器应用程序、文字处理应用程序、日历应用程序、地图应用程序、显示控制应用程序、消息接发应用程序、电子邮件应用程序、游戏应用程序、家庭助手应用程序(例如,谷歌家庭(Google Home)、亚马逊回声(Amazon Echo)、苹果音箱(Apple HomePod))、网页浏览器应用程序、时钟应用程序、键盘、警报管理器应用程序、移动计算装置预置文件管理器应用程序、隐私应用程序、应用程序启动器或切换器等。对应于装置参数数据类型的每一列1108、1110可与装置参数数据相关联。对应于应用程序数据类型的列1112、1114的数目可取决于应用程序数据的数目,高达N个应用程序数据。应用程序数据的数目可取决于与多传感器输入转译表1100的行1120、1122、1124、1126、1128、1130中的传感器输入数据的组合相关联的应用程序数据的数目。
多传感器输入转译表1100可包含动作数据类型的数据,其可以被称作动作数据。动作数据可表示响应于传感器输入数据、装置参数数据或应用程序数据的组合的任何组合而实施于移动计算装置上的任何数目和组合的动作。
动作数据可包含用于实施移动计算装置上的动作的代码或触发值、实施移动计算装置上的动作的标识符、或对用于实施移动计算装置上的动作的代码的参考。动作可包含移动计算装置上的操作系统或应用程序的任何数目或组合的功能。借助于实例,动作可包含:拍摄照片;开始、停止或暂停视频或声音的录制;改变图像或视频的背景图像;调整不同焦距处的图像或视频的焦点;调整图像或视频的背景模糊或其它细分效应的程度;调整图像或视频的面部美化效果;在前向相机和后向相机之间切换;调整可上叠于图像、视频或地图上的扩展现实(ER)特征;调整显示器上的其它扩展现实内容,例如增加图像、视频或地图中的图形的亮度;将边界框放置于图像、视频或地图中的个人或关注对象上;移动在图像、视频或地图中的数个人物或对象当中的选择;选择展示有关图像、视频或地图中的目标的额外信息;显示具有关于目标图像、视频或地图的信息的图形方框;放大/缩小图像、视频或地图;放大地图中的特定锚点;显示图像图库或视频图库中的缩略图像网格;突出显示图像图库、视频图库或音频库中的图像或录制片;预览图像图库、视频图库、音频库、消息收件箱、电子邮件收件箱、联系人列表或约会日历中的条项;或在图像图库、视频录像或视频图库、音频录音或音频库、消息收件箱、电子邮件收件箱、联系人列表、约会日历中或之间向前或向后移动。扩展现实可包含虚拟现实(VR)、扩增现实(AR)、混合现实(MR),以及信息和/或图像的其它类似呈现。扩展现实是指一系列数字输出(其可包含图像、文本、声音、触觉输出,以及可用其它传感器检测到的输出),其包含完全数字输出以及数字信息与真实环境的整合。
动作的其它实例包含:关断响铃;双态切换安静或振动模式;增加或减小响铃音量;停用或启用警报灯光;接通或关断屏幕;增加或减小屏幕亮度;读出当前时间;或调换移动计算装置的模式,例如将移动计算装置置于隐私模式中,在所述隐私模式中,将所展示的内容过滤为适合于其他人(例如,仅某些类型的照片可出现在图库中,可能不呈现一些文字,可能不呈现一些应用程序等)。动作的其它实例包含:接听、保留、返回到或终止电话或经由因特网协议的语音(VOIP)呼叫;将电话或VOIP呼叫静音或解除静音;或增加或减小电话或VOIP呼叫的音量。动作的其它实例包含鼠标类型动作,例如:放置光标、调整光标的位置、触发文本选择、复制或粘贴;滚动;或右按钮点击类型动作,例如打开应用程序内的更深特征/动作、触发菜单。动作的其它实例包含通过经由不同键盘或选择不同键盘的双态切换来改变键盘(例如,从文本键盘到标点或表情符号键盘);或校正用户的文本发送偏移(即,目标键和实际触摸方位之间的差异)。动作的其它实例包含:自动启动应用程序;打开应用程序切换器;切换到堆叠中的前一或下一应用程序;切换回到当前应用程序;滚动通过应用程序切换器;将后台应用程序提前;将应用程序发送到后台;控制后台应用程序;或显示主屏幕。动作的其它实例包含提示特定界面进行单手触摸。动作的其它实例包含将移动计算装置变换到家庭助手(例如,谷歌家庭、亚马逊回声、苹果音箱)中。动作的其它实例包含将移动计算装置移动到就绪状态中以将传感器输入数据或装置参数数据解释为相异命令。动作的其它实例包含控制与连接的计算装置的交互,例如展示或隐藏、移动等扩展现实内容。动作的其它实例包含增加或减小触摸传感器的敏感性。
对应于装置参数数据类型的每一列1108、1110可与装置参数数据相关联。对应于动作数据类型的列1116、1118的数目可取决于动作数据的数目,高达N个动作数据。动作数据的数目可取决于与多传感器输入转译表1100的行1120、1122、1124、1126、1128、1130中的传感器输入数据的组合相关联的应用程序数据或装置参数数据的数目。
多传感器输入转译表1100的行1120、1122、1124、1126、1128、1130可使列1102、1104、1106、1108、1110、1112、1114、1116、1118的数据相关联。处理器(例如,图2的通用处理器206)可存取多传感器输入转译表1100的行1120、1122、1124、1126、1128、1130,所述多传感器输入转译表1100在对应于移动计算装置经由触摸传感器的组合接收到的传感器输入数据的列1102、1104、1106的组合中具有感测输入数据的组合。处理器可基于行1120、1122、1124、1126、1128、1130的列1108、1110、1112、1114、1116、1118的任何组合中的装置参数数据、应用程序数据或动作数据的任何组合,确定从行1120、1122、1124、1126、1128、1130的列1116、1118中的动作数据执行的动作。
在一些实施例中,与多传感器输入转译表1100的行1120、1122、1124、1126、1128、1130中的传感器输入数据的组合相关联的应用程序数据可通过额外列1112、1114被添加或被覆写。举例来说,正在运行的应用程序可与响应于传感器输入数据的组合的动作相关联。正在运行的应用程序的应用程序数据可通过添加列1112、1114,添加到具有传感器输入数据的组合的多传感器输入转译表1100的行1120、1122、1124、1126、1128、1130。在另一实例中,正在运行的应用程序可抢先进行响应于用于其它应用程序的传感器输入数据的组合的动作,且多传感器输入转译表1100的行1120、1122、1124、1126、1128、1130中的传感器输入数据的组合可与正在运行的应用程序相关联;且通过用正在运行的应用程序的应用程序数据覆写其它应用程序的应用程序数据,以此与另一应用程序解除关联。换句话说,正在运行的应用程序可通过将多传感器输入转译表1100中的其它应用程序的应用程序数据替换为正在运行的应用程序的应用程序数据,抢先进行响应于另一应用程序的传感器输入数据与多传感器输入转译表1100中的应用程序数据的组合的动作。
在一些实施例中,与多传感器输入转译表1100的行1120、1122、1124、1126、1128、1130中的传感器输入数据的组合相关联的装置参数数据或动作数据可用额外列1108、1110、1116、1118扩展或基于行1120、1122、1124、1126、1128、1130中的应用程序数据被覆写。类似于应用程序数据添加实例,相关联的装置参数数据或动作数据可与多传感器输入转译表1100的行1120、1122、1124、1126、1128、1130中的传感器输入数据和应用程序数据的组合相关联。与正在运行的应用程序相关联的装置参数数据或动作数据可通过添加列1108、1110、1116、1118而添加到具有传感器输入数据和应用程序数据的组合的多传感器输入转译表1100的行1120、1122、1124、1126、1128、1130。
在其中正在运行的应用程序抢先进行用于其它应用程序的动作的实施例中,正在运行的应用程序的装置参数数据或动作数据可与行1120、1122、1124、1126、1128、1130中的传感器输入数据和正在运行的应用程序数据的组合相关联;且其它应用程序的装置参数数据或动作数据可通过用正在运行的应用程序的装置参数数据或动作数据覆写所述装置参数数据或所述动作数据,以此与行1120、1122、1124、1126、1128、1130中的传感器输入数据和正在运行的应用程序数据的组合解除关联。
在各种实施例中,与已经含有应用程序数据、装置参数数据或动作数据的行1120,1122,1124,1126,1128,1130中的传感器输入数据的组合相关联的新应用程序数据、装置参数数据或动作数据可通过添加使传感器输入数据的组合与新应用程序数据、装置参数数据或动作数据相关联的新行,以此添加到多传感器输入转译表1100。在一些实施例中,可实施用于来自触摸传感器的组合的各种输入、装置参数集、应用程序或动作集的多个多传感器输入转译表1100。在一些实施例中,多传感器输入转译表1100可通过处理器存储于移动计算装置的存储器(例如,图2的存储器214)、加载到所述存储器或从所述存储器存取,这类存储器包含非易失性存储存储器、易失性主存储器,例如随机存取存储器(RAM),和/或易失性高速缓冲存储器。
在各种实施例中,可使用情境感知数据确定移动计算装置的操作情境。处理器可考虑所确定的操作情境中的所接收的多传感器输入来确定要执行的特定功能。在图12中示出使用情境感知数据确定移动计算装置的操作情境的实例。可通过推理引擎1201组合或融合与接收到的输入相关联的多个数据、来自一或多个处于作用中的应用程序的参数、和/或来自与移动通信装置相关联的一或多个组件的状态信息(例如与接收到多传感器输入所处的条件相关的众多不同类型的数据),以此来确定移动计算装置的操作情境。在一些实施例中,推理引擎1201可组合或融合与接收到多传感器输入所处的条件相关联的实时和非实时情境感知数据两者,以便确定操作情境。
情境感知数据可包含与移动计算装置相关联的任何合适的类型的实时和/或非实时数据,例如,触摸屏处于作用中的应用程序参数1210、后台处于作用中的应用程序参数1220、触摸屏状态1230、其它机载组件状态1240、外围组件状态1250、多传感器输入细节1260、其它传感器输入1270,以及任何其它合适的情境感知数据,和/或其任何组合。触摸屏处于作用中的应用程序参数1210可包含主动地控制触摸屏上的全部或部分显示的应用程序的可用的或目前准许的输入的列表,所述显示可作为多传感器输入被接收。举例来说,在阅读电子邮件(即,处于作用中的应用程序)时,如果用户将移动计算装置转向侧面并且用两个拇指在前部握住移动计算装置并在移动计算装置背部作支撑,那么触摸屏可立即改变到横向键盘并且提供接收输入的用户界面,所述输入可用于答复所述电子邮件。作为另一实例,前部和背部触摸可用于补充彼此略微不同的可供性(affordances)。举例来说,在文本消息中,用户点击触摸屏可将光标置于用户点击的特定词语显示处。用户接着可触摸移动计算装置的背表面以更精细地将光标定位于词语或字母之间。这会利用每一侧的相对优点:使用前部和侧部触摸输入的组合可适用于允许用户找到触摸目标并且接着直接触摸所述触摸目标。背部触摸可使得用户能够以细粒度方式移动选择器或光标,而不是将手指一直放在前部。类似地,在相册应用程序处于作用中的情况下,向后面向触摸传感器滑移可将突出显示的帧在照片网格当中移动。此后,点击手势可选择或展示上下文菜单。
后台处于作用中的应用程序参数1220可包含在移动计算装置上主动地运行(而非主动地控制触摸屏上的可作为多传感器输入被接收到的全部或部分显示)的应用程序的可用的或目前准许的输入的列表。
触摸屏状态1230可提供关于触摸屏是否接通、断开、调暗或处于某一其它状态中的信息。举例来说,在触摸屏处于断开状态中的情况下,接收到的多传感器输入可旨在用于特定后台应用程序。类似地,其它机载组件状态1230,如移动计算装置的电池中的剩余电量或移动计算装置是否处于节电模式中,可提供关于是否应忽略多传感器输入或是否应关断除触摸屏以外的触摸传感器的信息。
外围组件状态1250可提供关于多传感器输入是否可意图控制所述外围组件的信息。举例来说,如果虚拟现实护目镜或音频头戴装置可操作地耦合到移动计算装置,那么接收到的多传感器输入可用于控制这类外围组件。
多传感器输入细节1260可包含与多传感器输入相关联的触摸分布曲线并且标识哪些触摸传感器或一或多个特定触摸传感器的哪个部分检测到触摸传感器状态改变。
其它传感器输入1270可提供来自移动通信装置的其它传感器的可用于确定移动计算装置的操作情境的信息。举例来说,接近度、定向和/或运动传感器可用于辨识移动计算装置面朝下、在口袋中、正在移动、静止,或处于可通知移动计算装置的当前操作情境的某一其它情境中。
在一些实施例中,除了使用情境感知数据之外,推理引擎1201还可使用不仅与多传感器输入相关联还确定操作情境的相关数据(例如,实时、非实时或其组合)。举例来说,推理引擎1201可使用一天中的实时时间、日期、方位和其它可有助于确定移动计算装置的当前操作情境的类似信息。
所有此信息可供推理引擎1201用于确定当前操作情境。举例来说,推理引擎1201可产生对应于所确定的操作情境的情境评估。所述情境评估接着可用于确定通过接收到的多传感器输入执行什么操作。
在一些实施例中,推理引擎1201可利用状态机(例如,确定性规则库和/或统计状态机)分析数据,例如来自例如1210、1220、1230、1240、1250、1260、1270的可用资源的数据,并且推断对操作情境的决策。可离线、在线或部分地离线和在线训练推断引擎1201的规则库和统计状态机。另外,推理引擎1201还可在确定操作情境时,与知识支持系统或其它远程数据源交换信息。
图13-14D说明根据各种实施例的使用情境感知数据改变移动计算装置100的操作模式和/或设置的一些实例。
图13说明用户将移动计算装置放在前裤袋中。在各种实施例中,移动计算装置的处理器可使用情境感知数据,例如来自移动计算装置的传感器的输入,确定操作情境。举例来说,处理器可确定其它传感器输入(例如,图9中的970)是否指示移动计算装置处于收起(put-away)状态(即,操作情境)。其它传感器的输出中的一或多个可以单一或组合方式与一或多个阈值进行比较,且输出中的所述一个或多个高于或低于阈值可指示移动计算装置处于收起状态。作为一特定实例,相机在一时间段内在检测到加速度计移动的同时感测到黑暗的阈值水平可指示移动计算装置处于闭合包袋或口袋中。作为另一具体实例,麦克风输出与口袋或包袋中典型的拖步声和声音压低一致可指示移动计算装置处于口袋或包袋中。
在一些实施例中,移动计算装置的处理器可被配置成例如通过校准或配准过程学习各种用户指定的收起状态,在所述校准或配准过程中,用户将移动计算装置置于特定收起状态长达足以使得处理器能够收集与特定收起状态相关的各种传感器数据。这类传感器数据可存储于存储器中并且随后用作用于确定移动计算装置何时处于收起状态的阈值。
响应于确定移动计算装置处于收起状态,处理器可提升触摸传感器的电容,从而增加触摸传感器通过裤子的面料或其它阻挡元素检测到来自用户的手指的触摸输入的可能性。
图14A-14D说明可使用触摸传感器检测到的抓握移动计算装置的各种方式。在各种实施例中,特定类型的抓握或移动计算装置定向可用作用于确定操作情境的情境感知数据。
图14A说明双手抓握。可从与两个手掌接合移动计算装置100的相对外侧,同时手指放在移动计算装置的背部一致的触摸分布曲线,检测到此双手抓握。
图14B说明单手抓握,可从与仅一个手掌接合移动计算装置100的外侧,同时所述手掌的手指放在移动计算装置100的背部一致的触摸分布曲线,检测到所述单手抓握。
图14C说明另一种双手抓握,其中移动计算装置100保持侧立。可从表征为手指持握移动计算装置100的三个或更多个拐角的触摸分布曲线,检测到此具有横向定向的双手抓握。
图14D说明另一种单手抓握,其中移动计算装置100保持侧立。可从与仅一个手掌接合移动计算装置100的底侧或顶侧,同时所述手掌的手指放在移动计算装置的背部一致的触摸分布曲线,检测到此具有横向定向的单手抓握。
图15-18说明根据各种实施例的可作为多传感器输入被检测到并且用以致使移动计算装置(例如,图1A和1B中的移动计算装置100)执行预先确定的功能的各种手势的一些实例
图15说明用户在移动计算装置的背部执行圆圈手势的平面视图。移动计算装置的背部上的如圆形或拱形手势的手势可提供启动移动计算装置的如音频录制的应用程序的方式。用户可用手指或触控笔画圆圈类型形状以开始录制。使用此类型的手势可适用于录制课堂授课、企业会议和社会事件。此手势还为离散的且不显眼。而且,可使用其它后续手势,如点击,在录制和暂停之间双态切换。类似地,随后在移动计算装置的背部画方块可停止录制。移动计算装置可振动,或提供其它视觉或触觉信号,以让用户知道录制已开始、暂停或停止。而且,当录制暂停或停止时,移动计算装置可振动两次。
图16A和16B说明用户在移动计算装置的背部执行另一圆圈手势以用于启动应用程序的平面视图。举例来说,在用户使因特网浏览器应用程序在触摸屏的显示器上处于作用中时,用户可通过使用预先确定的手势直接跳转到另一应用程序,如相机。字母可与应用程序的姓名相关联,如画“C”来启动相机应用程序。替代地或另外,用户可在装置的背部执行中间手势(即,“触发”手势),当所述中间手势被辨识时,使一或多个快捷手势可用于启动应用程序。在各种实施例中,触发手势可仅持续很短时段,如几秒钟,之后所述快捷手势不再可用。
图17说明用户在移动计算装置的背部执行点击或其它手势以控制处于作用中的应用程序但不在触摸屏上显示的侧透视图。当音乐播放器应用程序处于作用中(即,正在播放),且移动计算装置面朝下放置时,显示器可关闭以节省电池。在一些实施例中,用户可使用移动计算装置的背部上的一或多个手势控制音乐播放器应用程序。举例来说,点击可在播放和暂停之间双态切换;向左和/或向右滑动可改变到下一或前一歌曲;向上和/或向下滑动可改变音量等。以此方式,不必为了控制应用程序(即,提供音乐控制)而必须激活显示器。
图18说明用户将手指静置(即,非移动手势)在移动计算装置的背部来控制不处于作用中的应用程序的侧透视图。可使用静置手指、点击或其它手势启动另一应用程序,如语音助手。处理器可使用指示器,如移动计算装置的背部上的闪光灯应用程序(或彩色LED灯),通过使其闪烁,展示语音助手正在收听。此后,用户可问语音助手问题或提供命令,如“天气如何”;“呼叫大卫(David)”;“我的下一次会议是什么时候?”;和“播放我的迈尔斯·戴维斯(Miles Davis)播放列表”。
各种实施例可使用额外手势或触摸组合激活移动计算装置上的特征或功能。以下列表提供主要仅使用背部/侧部提供独特但有用的触摸交互的应用程序的一些实例:
·针对如触发、捕获和选择的动作挤压边缘。举例来说,挤压以拍摄照片或发送消息或内容。
·向下滑移以放大(即,将内容拉近给用户)且反之亦然
·从手机的背部,突出显示前部显示器上的“美颜(beautify)”图标,并且将所述图标拖到取景器中以施加效果。针对其它相机效果做出类似动作。
·向下滑移以减小响度级和亮度,且反之亦然
·水平滑移以更换背景图像(发现此专题的原始文档中的其它实例)
·协调侧部和背部触摸:当滚动文本或在文本条目中滚动时,左侧/右侧面板可以与手指的方向一致的方式将光标向上/向下移动。但背部滚动(即使成角度地)将逐页(或水平地)向下移动。
·在处于2手持握位置(例如输入文本)时,在侧部向下滑移以切换文本输入键盘。
·抓握位置和手部(左手或右手)启动1手模式,所述1手模式可在左边或右边(取决于哪只手调用所述1手模式)并且可根据调用所述1手模式的手部的大小来设定所述1手模式的大小,且可根据用户抓握方位将所述1手模式竖直定位于显示器上(高抓握将1手模式定位成较容易触及低处;低抓握将1手模式定位成较容易触及高处)。
·当存在多个正在运行的应用程序时,点击装置的背部可使一应用程序升到前景:这是向前推送内容的自然方式并且可适用于播放列表中的音乐曲目和图库文件夹中的图像。用户可继续点击背部以将堆叠中的下一应用程序带到前景。点击前部,同时可在应用程序切换器中执行相反内容(将顶部应用程序推到背景中)
·主按键(home key)替换:点击背部以模拟主按键,使得可去除物理主按键。这可为用于与错误触发区分开来的特定类别的点击(例如,强点击、双击、两个手指点击、两个手指按时间顺序点击)。
·在背部/侧部滑移以使突出显示的帧在照片网格当中移动,接着点击选择或展示上下文菜单。任选地,从背部将突出显示的项按住不放以打开所述项,或呈现上下文菜单。可从前部选择上下文菜单上的项。
·将装置的背部上的较小可滚动空间映射到显示器的前部上的较大区。可基于手部大小和手指触及范围(reach)来设定此区的大小。
图19A-27B说明根据各种实施例的可用于致使移动计算装置(例如,图1A和1B中的移动计算装置100)执行预先确定的功能的额外手势的一些实例。通过在移动计算装置的除安置触摸屏的前部以外的一或多个表面上提供和使用触摸传感器,触摸屏上的显示器可保持不被用户的手指或手部阻挡或较少被遮挡。
图19A和19B说明用户一只手持握移动计算装置,同时用那只手的手指在移动计算装置的背表面执行手势。在图19A和19B中,相册是处于作用中的应用程序,其正在触摸屏上显示照片。用户单手抓握和移动计算装置上的处于作用中的相册应用程序可定义与那些条件相关联的操作情境。在图19A中,用户一只手(即,左手)持握移动计算装置,用食指接合移动计算装置的背面板。此后,通过沿着背面板向右滑动食指(在图19A和19B中示出的定向中),从相册显示的照片改变。基于所确定的操作情境,可使用特定多传感器转译表将紧贴背面板的滑动运动的特性转换成改变相册中的照片的操作。以此方式,在浏览相册时,使照片保持不受阻挡。另外或任选地,使用手势或与触摸屏的接触可在图像之间移动,同时使用背面板上的手势或接触提供不同功能,如放大相片。
图20A和20B说明用户一只手持握移动计算装置,同时用那只手的手指在移动计算装置的背表面执行手势。根据各种实施例,通过在移动计算装置的除安置触摸屏的前部以外的一或多个表面上提供和使用触摸传感器,触摸屏上的显示器可保持不被用户的手指或手部阻挡或较少被遮挡。在图20A和20B中,电子邮件应用程序处于作用中的应用程序,其正在触摸屏上显示文本。用户单手抓握和移动计算装置上的处于作用中的电子邮件应用程序可定义与那些条件相关联的操作情境。在图20A中,用户一只手(即,左手)持握移动计算装置,用食指接合移动计算装置的背面板。此后,通过沿着背面板向右滑动食指(在图20A和20B中示出的定向中),显示的电子邮件前进到另一电子邮件。基于所确定的操作情境,可使用特定多传感器转译表将紧贴背面板的滑动运动的特性转换成一个电子邮件改变到另一电子邮件的操作。以此方式,在浏览电子邮件时,使每一电子邮件的文本保持不受阻挡。类似地,对于其它应用程序,如日历,在移动计算装置的背面板上向左和/或向右滑动可移动到下一/前一天、月或年。另外,在背面板上向下滑动可接入其它特征,如安卓通知抽屉(notification drawer)或IOS通知列表。背面板上的滑移无需在移动计算装置(如触摸屏的顶部)的顶部开始,当单手持握装置时可能难以触及所述顶部。
图21A和21B说明用户单手持握移动计算装置,同时点击背面板以激活处于作用中的应用程序的功能。举例来说,背面板上的点击可拍摄照片。替代地,另一手势(如挤压或夹捏手势)可拍摄照片。在一方向上的滑动可进行放大/缩小,从而允许单手使用相机,这是主要优点。另外,滑移手势可用于调整不同焦距处的焦点,调整背景模糊或其它细分效果的程度,添加或调整面部美化效果,和/或更换背景图像。
图22A和22B说明用户在移动计算装置的背部执行点击手势以激活另一处于作用中的应用程序的功能。在观看相册中的缩略图时,用户可将食指放在特定缩略图后面并且点击背面板,这可向前弹出缩略图或使缩略图突出,如相对于其它缩略图放大。替代地,背面板上的初始触摸可突出显示对应缩略图或以其它方式为用户提供对用户的手指在背面板上的所在位置处的视觉指示,之后进行点击以放大或缩略图或将缩略图提前。任选地,将手指保持在所述方位处可触发用于呈现所述照片的高级选项菜单。用户可通过前部触摸选择所述选项中的一个。同样的原理可用于“预览”视频或其它内容。用户可通过使用前部手指(例如,拇指)触摸触摸屏来选择预览的视频,以此打开预览的视频。
图23A和23B说明用户在移动计算装置的背部执行点击手势以激活另一处于作用中的应用程序的又一功能。用户可将食指放在电子邮件消息后面(即,背面板上),从背部按住不放,并且可弹出所述消息的选项菜单。用户可使用前部手指选择所述选项中的一个。可为联系人列表上的接触或来自音乐播放器的歌曲提供类似特征。
图24A和24B说明用户在移动计算装置的背部执行点击手势以激活移动计算装置的通用功能。举例来说,在不具有“主按键”的移动计算装置上,背面板上的简单独特点击可激活装置的主屏幕。类似地,背部上的简单独特点击可引出任务切换器菜单,其可允许用户使用背部滑动在应用程序之间滚动选择。而且,背部上的简单独特点击可捕获自拍或普通相片。
图25A和25B说明用户在移动计算装置的背部执行点击手势以激活移动计算装置上的处于作用中的应用程序的功能。举例来说,呼叫特征,如背部上的简单独特点击可将呼叫静音/不静音或切换呼叫。背部上的向上/向下滑移可增加/降低音量。背部上的单个手指向上/向下滑移可以正常速度滚动浏览内容(或菜单),而两个手指向上/向下滑移可更快速地推进。独特点击之后从顶部向下滑移(或至少沿向下方向)可下拉通知托盘/列表。
图26A和26B说明用户在移动计算装置的背部执行点击手势以激活移动计算装置上的处于作用中的应用程序的功能。在地图应用程序处于作用中时,拇指在移动计算装置的显示器上与地图的触摸点提供锚点。接着,用食指在背面板上滑移可放大和/或缩小锚点。类似地,可提供图库缩放功能以用于放大和缩小图库中的图像。
图27A和27B说明用户在移动计算装置的侧面板上执行另一手势以控制移动计算装置的应用程序特征或通用功能。举例来说,当触摸屏上的显示器关断时,可记录显示屏亮度。当触摸屏再次接通时,处理器可检查大的显示屏亮度改变。如果检测到大的改变,那么移动计算装置可允许用户通过在侧部上下滑动手指来调整亮度。当显示器重新接通时,移动计算装置可在极短时段(几秒钟)内支持此类型的控制。
图28A-30B说明根据各种实施例的触摸前部和背部/侧表面以致使移动计算装置(例如,图1A和1B中的移动计算装置100)执行预先确定的功能的组合手势的一些实例。各种实施例使用背部和侧部输入结合前部输入引起装置动作。具体地,(在装置的不同部分上)的触摸组合可约束触摸的意义。这可包含同时使用发到移动计算装置的前部与侧部/背部的输入以及连续使用发到移动计算装置的前部与侧部/背部的输入,其中移动计算装置的行为取决于这些触摸组合。
各种实施例可包含如下配置:装置的背面板或侧部上的交互充当永久性“模式变换器”,使得当在装置的背部发生所述触摸时,从由于对手机的前部的某些(或全部)触摸类型而发生的手机行为的常见响应来更改所述行为。例如:
·仅当两个手指平放在屏幕的背部上时,相邻并侧向触摸彼此可强点击装置的前部,这可解释为进入应用程序内的更深功能性的意图。
·仅当两个手指平放在屏幕的背部上时,相邻并侧向触摸彼此可激活发在装置的前部上的手势(例如,以形状“C”滑移),这可解释为对特定特征的触发(例如,启动例如联系人的应用程序的快捷方式)而非解释为普通滑移。
·仅当两个手指平放在屏幕的背部上时,相邻并侧向触摸彼此将使装置处于隐私模式中。在此模式中,从视图中隐藏私密应用程序,可隐藏来自特定用户的内容并且隐藏某些类别的照片。举例来说,当处于此隐私模式中(由于对装置的背部的永久性触摸样式)时,对图库图标的触摸将产生不同于原本发生的缩略图外观的外观(这是因为将在隐私模式中筛选图像)。
各种实施例可包含如下配置:背面板(或装置的侧部)上的交互在某一短暂的时间段内充当“模式变换器”。此时间段可直到在装置的前部上执行特定触摸为止或其可在预先指定的时间段内。例如:
·强点击手机的背部可产生打开的全部应用程序的缩略图样式照片。随后,用户可选择任何想要通过触摸来关闭的应用程序。强点击装置的前部接着可引起离开此删除模式(仅留下堆叠中的未被选择的应用程序保持打开)且屏幕返回到强点击的应用程序的全屏幕视图。在此情况下,强点击屏幕的前部会结束通过强点击屏幕的背部打开的模式。
·强点击装置的背部将手机置于临时模式中,在所述临时模式中,使所有警报和呼叫静音直到你的GPS位置移动到高于某一阈值。在你的手机移动到不同区(如由GPS运动确定)之前或在再次点击手机背部之前,继续使所有警报和呼叫静音。这可适用于将手机刚好在会议期间或刚好在看电影时静音而不必刻意记得稍后将音量调大。
·强点击装置的背部会触发手机监测在手机的前部长达10秒的激活手势。举例来说,在强点击手机的背部之后,用户接着可以弧形滑移并且接着以朝向手部的直线滑移以触发闪光灯打开。手机的前部的此手势将不在正常情形下触发闪光灯,仅当最近从装置的前部接收到强点击时触发闪光灯。如果在强点击之后的10秒钟窗口内未接收到手势,那么装置停止监测此(或任何其它)特定手势。
·强点击装置的前部使得光标出现,且现在用户可使用装置的背部上的手指移动来控制光标的位置。
各种实施例可包含如下配置:前部/背部和侧部的任何组合上的同时(或接近同时)触摸产生来自装置的不同于仅对分量触摸中的任一个的响应的特定反应。例如:
·以将两个手指平放在屏幕的背部并侧向触摸彼此且拇指平放在装置的前部的方式持握手机可触发单手模式。
·以将拇指放在整个屏幕前部且食指紧贴装置的背部勾起(ball up)的方式持握手机可触发屏幕拆分,使得可立即利用两个应用程序。
以上各种实施例还可包含提供用于解释经组合触摸指示的不同情境的方面。例如:
·在阅读电子邮件时,如果用户将移动计算装置转向侧面并且用两个拇指在前部握住移动计算装置并在移动计算装置背部作支撑,那么屏幕可立即改变到横向键盘并且用户界面可答复所述电子邮件。
·使用前部和背部触摸补充彼此略微不同的可供性(affordances)。举例来说,在产生文本输入时,用户可点击显示器的前部以将光标置于特定词语处。接着使用背部触摸将光标精细定位于词语内的两个字母之间。这利用每一侧的相对优点,如前侧触摸是有用的,这是因为其允许用户找到触摸目标并且接着直接触摸所述触摸目标。背部触摸允许用户在前部没有手指遮挡的情况下以细粒度方式移动选择器或光标。
·当相册应用程序处于作用中时,在背面板上的滑移可使突出显示的帧在照片网格当中移动,接着点击可选择或展示上下文菜单。
图28A和28B说明用户执行手势组合,一个手势是在背面板上且另一手势是在移动计算装置的触摸屏上以执行某些功能,如用于复制/粘帖的文本选择或精确光标调整。用户可在屏幕的前部通过手指点击做出初始选择,接着在背面板(或侧部)滑动另一手指以调整最终选择。背部触摸可允许用户在前部没有手指阻挡用户的视野的情况下以细粒度方式移动光标。替代地,触摸屏上的触摸可初始地放置光标,接着使用背面板可激活如支持较小尺寸光标移动的鼠标垫功能。在各种实施例中,装置的背部上的较小可滚动空间对应于前部上的较大移动区(即,经缩放移动)。这类经缩放移动可改进移动计算装置上的特征的单手触及范围。
图29A和29B说明用户执行另一手势组合,一个手势是在背面板上且另一手势是在移动计算装置的触摸屏上以执行某些功能。举例来说,背面板上的强点击可用于复制选择的文本,接着屏幕的前部上的强点击可粘贴复制的文本。替代地,双手文本输入手势可包含在侧部向下滑移以切换文本输入键盘;两个拇指点击手机的侧部以在表情符列表和小键盘/键盘之间双态切换;或沿着侧部用两个拇指点击以及点击的高度将确定进入前景的表情符号小键盘。
图30A和30B说明用户执行另一手势组合,一个手势是在背面板上且另一手势是在移动计算装置的触摸屏上以执行某些功能。举例来说,强点击移动计算装置的背面板可将先前打开的应用程序带到前景。任选地,可在视觉上展示前一应用程序以如任务切换器,用动画方式在主屏幕上向前移动。接着,前部上的强点击可将当前应用程序发送到背景。
图31A-32B说明根据各种实施例,可检测到用户抓握以致使移动计算装置(例如,图1A和1B中的移动计算装置100)执行预先确定的功能的一些实例。各种实施例从背部或侧部上的有意触摸和手势检测正常握持模式(当用户恰好持握装置时)。各种实施例的特定方面和变体包含:
·检测触发用于背部/侧部触摸的检测模式的独特抓握。举例来说,用户可将中间和食指放置成靠近在一起,这并非持握装置的常态方式。
·检测独特点击或背部/侧部手势以侦听其它背部/侧部手势。换句话说,装置可仅(始终)留意硬背部点击(其一般不与标准握抓)相关联。一旦标识此硬背部点击,便可开始侦听其它类别的背部/侧部触摸。
·利用情境线索触发用于背部/侧部触摸的检测模式。举例来说,目前显示的应用程序可提供触发。同样地,装置位置可提供触发(平放在桌子上可允许背部/侧部触摸)或利用环境特性触发用于背部/侧部触摸的检测模式。举例来说,如果环境亮度非常高并且不同于最近一次设置的显示器亮度时的环境亮度,那么允许背部触摸调整亮度级。
·检测到抓握和情境的组合可触发功能。
·抓握和/或情境还可使得能够执行不同的背部/侧部触摸集合。
·摇动手机是触发允许用户使用背部/侧部触摸的模式的另一方式。
在一些实施例中,一旦检测到特定抓握(例如,单手抓握),便可改变将被辨识的或用于触发其它功能的经由触摸传感器的某些手势或特定触摸输入所需的阈值。此类型的特征可允许用户较不准确地输入某些触摸图案或手势。举例来说,当在单手模式中抓握移动计算装置时,与其它模式相比,供处理器用于使接收到的输入模式与存储的可辨识手势模式匹配的分类器可能要求较不完整匹配。另外,此特征可通过限制对用户与其移动通信装置交互所借助的某些抓握或情形的激活,限制特定动作(例如单手模式)的意外错误触发。
图31A和31B说明用户抓握移动计算装置会自动激活某些特征。可通过触摸传感器检测到用户的抓握方法。因此,这类情境感知数据可用于提供触摸屏上的目标位置和实现触摸的实际位置之间的偏移。处理器可检测所述类型的抓握并且相应地调整预期偏移以改进触摸板准确度和性能。以此方式可适应单手右手抓握、单手左手抓握和双手抓握。
图32A和32B说明用户抓握移动计算装置会自动激活某些特征。移动计算装置的处理器可对检测到的抓握进行分类并且接着优化用于所检测到的抓握的用户界面。举例来说,当用户改变抓握时,用户界面可在单手模式(即,图32A)和双手模式(即,图32B)之间自动双态切换。另外,用户界面可自动展示单手用户界面偏移到一侧;朝向抓握手掌的侧部。而且,移动计算装置的处理器可检测手部的大小和沿着显示器的竖直方位,以优化单手用户界面。这可允许用户通过背部触摸向上滚动,并且接达在前向手指/拇指的触及范围之外的内容。
各种实施例可实施多种移动计算装置中的一或多个,在图33A和33B中说明其呈智能电话形式的实例。参考图1A-33B,移动计算装置100可包含用于装纳各种组件中的全部或一些的外壳主体110,其由塑料、金属、陶瓷、玻璃或这类材料的组合的构造而成。移动计算装置100可包含耦合到各种系统和组件的处理器3302。特定来说,处理器3302可耦合到内部存储器3306、触摸屏控制器3304、输入传感器控制器3305、无线电通信元件、扬声器3314和麦克风3315。处理器3302可为标示为用于一般或专有处理任务的单核或多核处理器。内部存储器3306可以是易失性或非易失性存储器,并且还可为安全和/或经加密的存储器,或不安全和/或未加密的存储器,或其任何组合。
触摸屏控制器3304可耦合到触摸屏显示器3312,例如电阻感测触摸屏、电容感测触摸屏、红外感测触摸屏等。使用触摸感测的触摸屏显示器3312可包含一或多个触摸传感器(例如,102)。触摸传感器控制器3305和处理器3302可耦合到一或多个多触摸传感器3332,例如触摸传感器(例如,102、104、106)。一或多个触摸传感器3332可位于移动计算装置100的背面板(例如,后部区域114)、侧部(例如,116a、116b)、顶部和/或底部上。
移动计算装置100可包含耦合到天线3310以用于发送和接收通信的一或多个无线电信号收发器3308(例如,花生(Peanut)、蓝牙(Bluetooth)、蓝牙LE(Bluetooth LE)、紫蜂(ZigBee)、
Figure BDA0002446340870000441
射频(RF)无线电等)。一或多个无线电信号收发器3308可彼此耦合和/或耦合到处理器3302。无线电信号收发器3308可实施各种无线传输协议堆栈和接口。举例来说,移动计算装置100可包含耦合到处理器以启用经由蜂窝式网络的通信的蜂窝式网络无线调制解调器芯片3316。
移动计算装置100可包含耦合到处理器3302的外围装置连接接口3318。外围装置连接接口3318可被配置成接受一或多种类型的共同或专属物理和通信连接,例如USB、火线(FireWire)、雷电(Thunderbolt)或PCIe。外围装置连接接口3318也可耦合到类似地配置的外围装置连接端口(未示出)。
移动计算装置100可包含耦合到处理器3302的电源3322(例如,电池),例如一次性或可再充电电池。可再充电电池也可耦合到外围装置连接端口以从移动计算装置100外部的来源接收充电电流。另外或替代地,可通过无线充电,例如通过无线充电天线3342,为可再充电电池带电。无线充电控制器3344可耦合到充电天线3342和电源3322且被配置成基于电源3322的电荷状态、如无线充电天线3342感测的无线充电的可用性和/或从处理器3302接收的控制信号,调节电源3322的充电/再充电。无线充电控制器3344可根据各种实施例被配置成将位于背面板(例如,114)上一或多个触摸传感器3332断开连接或以其它方式进行控制以使对充电的干扰降到最低表情避免由无线充电所导致的杂散输入。
在各种实施例中,移动计算装置100可包含一或多个麦克风3315。举例来说,移动计算装置可具有常规用于在呼叫期间从用户接收语音或其它音频频率能量的麦克风3315。移动计算装置100还可包含用于提供音频输出的扬声器3314。移动计算装置100还可包含用于接收用户输入的一或多个物理按钮3324、3326。
本文中所描述的各种实施例中的处理器可为任何可编程微处理器、微型计算机或多处理器芯片或可以由软件指令(应用程序)配置以执行各种功能(包含上文描述的各种实施例的功能)的芯片。在一些装置中,可以提供多个处理器,例如,一个处理器专用于无线通信功能,且一个处理器专用于运行其它应用程序。通常,软件应用程序在被接入和加载到处理器中之前可存储于内部存储器中。处理器可包含足以存储应用程序软件指令的内部存储器。在许多装置中,内部存储器可以是易失性或非易失性存储器,例如快闪存储器,或这两种存储器的混合。出于此描述的目的,一般提到存储器是指可由处理器存取的存储器,其包含内部存储器或插入到装置中的可装卸式存储器以及处理器自身内的存储器。
所说明和描述的各种实例仅作为实例提供来说明所附权利要求书的各个特征。然而,相对于任何给定实施例示出和描述的特征未必受限于相关联的实施例并且可与其它示出和描述的实施例一起使用或组合。此外,权利要求书并不意图受任何一个实例实施例限制。举例来说,方法300、400、500、600、700、800、900和1000的操作中的一或多个可取代方法300、400、500、600、700、800、900和1000的一或多个操作或与之组合,且反之亦然。
前述方法描述和过程流程图仅仅是作为说明性实例提供,且并不意图要求或暗示各种实施例的操作必须以所呈现的次序执行。如所属领域的技术人员将了解,可以任何次序执行前述实施例中的操作的次序。如“其后”、“随后”、“接下来”等词语并不希望限制操作的次序;这些词语仅用以引导读者浏览方法的描述。此外,举例来说,使用冠词“一”、“一个”或“所述”对单数形式的权利要求要素的任何参考不应解释为将所述要素限制为单数。
结合本文中所公开的实施例描述的各种说明性逻辑块、模块、电路和算法操作可实施为电子硬件、计算机软件,或两者的组合。为清晰地说明硬件与软件的这种可互换性,上文已大体就其功能性来描述各种说明性组件、块、模块、电路和操作。这类功能性是以硬件来实施还是以软件来实施取决于特定应用和强加于整个系统的设计约束。所属领域的技术人员可针对每一特定应用以不同方式实施所描述的功能性,但此类实施例决策不应被解释为造成对权利要求书的范围的脱离。
以实施结合本文中所公开的实施例而描述的各种说明性逻辑、逻辑块、模块和电路的硬件可用以下各项来实施或执行:通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或经设计以执行本文中所描述的功能的其它可编程逻辑装置、离散门或晶体管逻辑、离散硬件组件,或其任何组合。通用处理器可为微处理器,但在替代方案中,处理器可为任何常规处理器、控制器、微控制器或状态机。处理器还可实施为接收器智能对象的组合,例如DSP与微处理器的组合、多个微处理器、一或多个微处理器与DSP核心结合,或任何其它此类配置。替代地,可通过特定地针对给定功能的电路来执行一些操作或方法。
在一或多个实施例中,所描述的功能可实施在硬件、软件、固件或其任何组合中。如果以软件实施,那么所述功能可作为一或多个指令或代码存储在非暂时性计算机可读存储媒体或非暂时性处理器可读存储媒体上。本文中所公开的方法或算法的操作可体现在处理器可执行软件模块或处理器可执行指令中,所述软件模块或处理器可执行指令可驻存于非暂时性计算机可读或处理器可读存储媒体上。非暂时性计算机可读或处理器可读存储媒体可为可由计算机或处理器存取的任何存储媒体。举例来说但非限制,此类非暂时性计算机可读或处理器可读存储媒体可包含RAM、ROM、EEPROM、快闪存储器、CD-ROM或其它光盘存储装置、磁盘存储装置或其它磁性存储装置智能物件,或可用于以指令或数据结构的形式存储所要的程序代码且可由计算机存取的任何其它媒体。如本文所使用的磁盘和光盘包含压缩光盘(CD)、激光光盘、光学光盘、数字多功能光盘(DVD)、软盘和蓝光光盘,其中磁盘通常是以磁性方式再现数据,而光盘是用激光以光学方式再现数据。以上各项的组合也包含在非暂时性计算机可读和处理器可读媒体的范围内。另外,一种方法或算法的操作可作为代码和/或指令的一个或任何组合或集合而驻存在非暂时性处理器可读存储媒体和/或计算机可读存储媒体上,所述媒体可并入到计算机程序产品中。
提供对所公开的实施例的前述描述以使所属领域的技术人员能够制作或使用所附权利要求书。所属领域的技术人员将容易了解对这些实施例的各种修改,且可在不脱离所附权利要求书的精神或范围的情况下将本文中定义的一般原理应用于其它实施例。因此,本公开并不意图限于本文中所展示的实施例,而应被赋予与所附权利要求书和本文中所公开的原理和新颖特征相一致的最广泛范围。

Claims (99)

1.一种管理移动计算装置的多传感器输入的方法,其包括:
从第一触摸传感器接收第一输入;
从所述第一输入标识与所述第一触摸传感器的第一类型的用户交互;
标识多传感器输入数据结构中的与所述第一类型的用户交互对应的第一传感器输入数据;
从第二触摸传感器接收第二输入;
从所述第二输入标识与所述第二触摸传感器的第二类型的用户交互;
标识所述多传感器输入数据结构中的与所述第二类型的用户交互对应的第二传感器输入数据;和
确定所述第一输入和所述第二输入是否组合为所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据和所述第二传感器输入数据的条目中的多传感器输入。
2.根据权利要求1所述的方法,其另外包括确定在从接收到所述第一输入起的多传感器输入序列持续时间期间是否接收到所述第二输入,
其中如下操作都是响应于确定在从接收到所述第一输入起的所述多传感器输入序列持续时间期间接收到所述第二输入而发生:从所述第二输入标识与所述第二触摸传感器的第二类型的用户交互;标识所述多传感器输入数据结构中的与所述第二类型的用户交互对应的第二传感器输入数据;和确定所述第一输入和所述第二输入是否组合为所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据和所述第二传感器输入数据的条目中的多传感器输入。
3.根据权利要求1所述的方法,其中从第一触摸传感器接收第一输入和从第二触摸传感器接收第二输入包括并行地接收所述第一输入和所述第二输入。
4.根据权利要求1所述的方法,其中从所述第一输入标识与所述第一触摸传感器的第一类型的用户交互包括:
标识包括所述第一输入的多个所接收的输入的第一质量;和
标识具有包括所述第一输入的所述多个所接收的输入的所述第一质量的所述第一类型的用户交互。
5.根据权利要求1所述的方法,其中从所述第一输入标识与所述第一触摸传感器的第一类型的用户交互包括:
标识包括所述第一输入的多个所接收的输入的第一质量;
从所述多个所接收的输入的所述第一质量导出第二质量;和
标识具有所述第二质量的所述第一类型的用户交互。
6.根据权利要求1所述的方法,其中标识多传感器输入数据结构中的与所述第一类型的用户交互对应的第一传感器输入数据包括:
将所述第一类型的用户交互和与所述第一触摸传感器相关联的多个传感器输入数据进行比较;和
从与所述第一触摸传感器相关联的所述多个传感器输入数据中标识匹配所述第一类型的用户交互的所述第一传感器输入数据。
7.根据权利要求1所述的方法,其另外包括响应于确定所述第一输入和所述第二输入组合为所述多传感器输入数据结构中的具有与所述多传感器输入响应有关的所述第一传感器输入数据和所述第二传感器输入数据的所述条目中的所述多传感器输入,执行所述多传感器输入响应。
8.一种移动计算装置,其包括:
第一触摸传感器;
第二触摸传感器;和
处理器,其以通信方式连接到所述第一触摸传感器,以通信方式连接到所述第二触摸传感器,并且配置有致使所述处理器执行包括以下操作的操作的处理器可执行指令:
从所述第一触摸传感器接收第一输入;
从所述第一输入标识与所述第一触摸传感器的第一类型的用户交互;
标识多传感器输入数据结构中的与所述第一类型的用户交互对应的第一传感器输入数据;
从所述第二触摸传感器接收第二输入;
从所述第二输入标识与所述第二触摸传感器的第二类型的用户交互;
标识所述多传感器输入数据结构中的与所述第二类型的用户交互对应的第二传感器输入数据;和
确定所述第一输入和所述第二输入是否组合为所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据和所述第二传感器输入数据的条目中的多传感器输入。
9.根据权利要求8所述的移动计算装置,其中所述处理器配置有处理器可执行指令以执行另外包括确定在从接收到所述第一输入起的多传感器输入序列持续时间期间是否接收到所述第二输入的操作,
其中所述处理器配置有处理器可执行指令以执行操作,使得如下操作都是响应于确定在从接收到所述第一输入起的所述多传感器输入序列持续时间期间接收到所述第二输入而发生:从所述第二输入标识与所述第二触摸传感器的第二类型的用户交互;标识所述多传感器输入数据结构中的与所述第二类型的用户交互对应的第二传感器输入数据;和确定所述第一输入和所述第二输入是否组合为所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据和所述第二传感器输入数据的条目中的多传感器输入。
10.根据权利要求8所述的移动计算装置,其中所述处理器配置有处理器可执行指令以执行操作,使得从第一触摸传感器接收第一输入和从第二触摸传感器接收第二输入包括并行地接收所述第一输入和所述第二输入。
11.根据权利要求8所述的移动计算装置,其中所述处理器配置有处理器可执行指令以执行操作,使得从所述第一输入标识与所述第一触摸传感器的第一类型的用户交互包括:
标识包括所述第一输入的多个所接收的输入的第一质量;和
标识具有包括所述第一输入的所述多个所接收的输入的所述第一质量的所述第一类型的用户交互。
12.根据权利要求8所述的移动计算装置,其中所述处理器配置有处理器可执行指令以执行操作,使得从所述第一输入标识与所述第一触摸传感器的第一类型的用户交互包括:
标识包括所述第一输入的多个所接收的输入的第一质量;
从所述多个所接收的输入的所述第一质量导出第二质量;和
标识具有所述第二质量的所述第一类型的用户交互。
13.根据权利要求8所述的移动计算装置,其中所述处理器配置有处理器可执行指令以执行操作,使得标识多传感器输入数据结构中的与所述第一类型的用户交互对应的第一传感器输入数据包括:
将所述第一类型的用户交互和与所述第一触摸传感器相关联的多个传感器输入数据进行比较;和
从与所述第一触摸传感器相关联的所述多个传感器输入数据中标识匹配所述第一类型的用户交互的所述第一传感器输入数据。
14.根据权利要求8所述的移动计算装置,其中所述处理器配置有处理器可执行指令以执行另外包括以下操作的操作:响应于确定所述第一输入和所述第二输入组合为所述多传感器输入数据结构中的具有与所述多传感器输入响应有关的所述第一传感器输入数据和所述第二传感器输入数据的所述条目中的所述多传感器输入,执行所述多传感器输入响应。
15.一种移动计算装置,其包括:
用于从第一触摸传感器接收第一输入的装置;
用于从所述第一输入标识与所述第一触摸传感器的第一类型的用户交互的装置;
用于标识多传感器输入数据结构中的与所述第一类型的用户交互对应的第一传感器输入数据的装置;
用于从第二触摸传感器接收第二输入的装置;
用于从所述第二输入标识与所述第二触摸传感器的第二类型的用户交互的装置;
用于标识所述多传感器输入数据结构中的与所述第二类型的用户交互对应的第二传感器输入数据的装置;和
用于确定所述第一输入和所述第二输入是否组合为所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据和所述第二传感器输入数据的条目中的多传感器输入的装置。
16.根据权利要求15所述的移动计算装置,其另外包括用于确定在从接收到所述第一输入起的多传感器输入序列持续时间期间是否接收到所述第二输入的装置,
其中如下装置都是响应于确定在从接收到所述第一输入起的所述多传感器输入序列持续时间期间接收到所述第二输入而执行:用于从所述第二输入标识与所述第二触摸传感器的第二类型的用户交互的装置;用于标识所述多传感器输入数据结构中的与所述第二类型的用户交互对应的第二传感器输入数据的装置;和用于确定所述第一输入和所述第二输入是否组合为所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据和所述第二传感器输入数据的条目中的多传感器输入的装置。
17.根据权利要求15所述的移动计算装置,其中用于从第一触摸传感器接收第一输入的装置和用于从第二触摸传感器接收第二输入的装置包括用于并行地接收所述第一输入和所述第二输入的装置。
18.根据权利要求15所述的移动计算装置,其中用于从所述第一输入标识与所述第一触摸传感器的第一类型的用户交互的装置包括:
用于标识包括所述第一输入的多个所接收的输入的第一质量的装置;和
用于标识具有包括所述第一输入的所述多个所接收的输入的所述第一质量的所述第一类型的用户交互的装置。
19.根据权利要求15所述的移动计算装置,其中用于从所述第一输入标识与所述第一触摸传感器的第一类型的用户交互的装置包括:
用于标识包括所述第一输入的多个所接收的输入的第一质量的装置;
用于从所述多个所接收的输入的所述第一质量导出第二质量的装置;和
用于标识具有所述第二质量的所述第一类型的用户交互的装置。
20.根据权利要求15所述的移动计算装置,其中用于标识多传感器输入数据结构中的与所述第一类型的用户交互对应的第一传感器输入数据的装置包括:
用于将所述第一类型的用户交互和与所述第一触摸传感器相关联的多个传感器输入数据进行比较的装置;和
用于从与所述第一触摸传感器相关联的所述多个传感器输入数据中标识匹配所述第一类型的用户交互的所述第一传感器输入数据的装置。
21.根据权利要求15所述的移动计算装置,其另外包括用于响应于确定所述第一输入和所述第二输入组合为所述多传感器输入数据结构中的具有与所述多传感器输入响应有关的所述第一传感器输入数据和所述第二传感器输入数据的所述条目中的所述多传感器输入,执行所述多传感器输入响应的装置。
22.一种上面存储有处理器可执行指令的非暂时性处理器可读存储媒体,所述处理器可执行指令被配置成致使计算装置的处理器执行包括以下操作的操作:
从第一触摸传感器接收第一输入;
从所述第一输入标识与所述第一触摸传感器的第一类型的用户交互;
标识多传感器输入数据结构中的与所述第一类型的用户交互对应的第一传感器输入数据;
从第二触摸传感器接收第二输入;
从所述第二输入标识与所述第二触摸传感器的第二类型的用户交互;
标识所述多传感器输入数据结构中的与所述第二类型的用户交互对应的第二传感器输入数据;和
确定所述第一输入和所述第二输入是否组合为所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据和所述第二传感器输入数据的条目中的多传感器输入。
23.根据权利要求22所述的非暂时性处理器可读存储媒体,其中所述所存储的处理器可执行指令被配置成致使所述计算装置的所述处理器执行另外包括确定在从接收到所述第一输入起的多传感器输入序列持续时间期间是否接收到所述第二输入的操作,
其中如下操作都是响应于确定在从接收到所述第一输入起的所述多传感器输入序列持续时间期间接收到所述第二输入而发生:从所述第二输入标识与所述第二触摸传感器的第二类型的用户交互;标识所述多传感器输入数据结构中的与所述第二类型的用户交互对应的第二传感器输入数据;和确定所述第一输入和所述第二输入是否组合为所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据和所述第二传感器输入数据的条目中的多传感器输入。
24.根据权利要求22所述的非暂时性处理器可读存储媒体,其中所述所存储的处理器可执行指令被配置成致使所述计算装置的所述处理器执行操作,使得从第一触摸传感器接收第一输入和从第二触摸传感器接收第二输入包括并行地接收所述第一输入和所述第二输入。
25.根据权利要求22所述的非暂时性处理器可读存储媒体,其中所述所存储的处理器可执行指令被配置成致使所述计算装置的所述处理器执行操作,使得从所述第一输入标识与所述第一触摸传感器的第一类型的用户交互包括:
标识包括所述第一输入的多个所接收的输入的第一质量;和
标识具有包括所述第一输入的所述多个所接收的输入的所述第一质量的所述第一类型的用户交互。
26.根据权利要求22所述的非暂时性处理器可读存储媒体,其中所述所存储的处理器可执行指令被配置成致使所述计算装置的所述处理器执行操作,使得从所述第一输入标识与所述第一触摸传感器的第一类型的用户交互包括:
标识包括所述第一输入的多个所接收的输入的第一质量;
从所述多个所接收的输入的所述第一质量导出第二质量;和
标识具有所述第二质量的所述第一类型的用户交互。
27.根据权利要求22所述的非暂时性处理器可读存储媒体,其中所述所存储的处理器可执行指令被配置成致使所述计算装置的所述处理器执行操作,使得标识多传感器输入数据结构中的与所述第一类型的用户交互对应的第一传感器输入数据包括:
将所述第一类型的用户交互和与所述第一触摸传感器相关联的多个传感器输入数据进行比较;和
从与所述第一触摸传感器相关联的所述多个传感器输入数据中标识匹配所述第一类型的用户交互的所述第一传感器输入数据。
28.根据权利要求22所述的非暂时性处理器可读存储媒体,其中所述所存储的处理器可执行指令被配置成致使所述计算装置的所述处理器执行另外包括以下操作的操作:响应于确定所述第一输入和所述第二输入组合为所述多传感器输入数据结构中的具有与所述多传感器输入响应有关的所述第一传感器输入数据和所述第二传感器输入数据的所述条目中的所述多传感器输入,执行所述多传感器输入响应。
29.一种管理移动计算装置的多传感器输入的方法,其中启用对来自第一触摸传感器的第一输入的处理,所述方法包括:
检测对多传感器输入模式的触发;
响应于检测到所述触发而进入所述多传感器输入模式;和
启用对来自第二触摸传感器的第二输入的处理。
30.根据权利要求29所述的方法,其中检测对多传感器输入模式的触发包括检测并非来自所述第二触摸传感器的输入的装置参数。
31.根据权利要求29所述的方法,其中检测对多传感器输入模式的触发包括检测来自所述第二触摸传感器的第三输入。
32.根据权利要求29所述的方法,其中检测对多传感器输入模式的触发包括执行被配置成触发进入所述多传感器输入模式的应用程序的指令。
33.根据权利要求29所述的方法,其另外包括:
确定与所述触发相关联的多传感器输入数据结构;和
加载所述多传感器输入数据结构。
34.根据权利要求33所述的方法,其另外包括:
从所述第二触摸传感器接收所述第二输入;
从所述第二输入标识与所述第二触摸传感器的第一类型的用户交互;
标识所述多传感器输入数据结构中的与所述第一类型的用户交互对应的第一传感器输入数据;和
标识所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据的条目中的多传感器输入。
35.根据权利要求34所述的方法,其中标识所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据的条目中的多传感器输入包括标识所述多传感器输入数据结构中的具有与所述多传感器输入响应有关的所述第一传感器输入数据和装置参数数据的所述条目中的所述多传感器输入。
36.根据权利要求34所述的方法,其中标识所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据的条目中的多传感器输入包括标识所述多传感器输入数据结构中的具有与所述多传感器输入响应有关的所述第一传感器输入数据和应用程序数据的所述条目中的所述多传感器输入。
37.一种移动计算装置,其中启用对来自第一触摸传感器的第一输入的处理,所述移动计算装置包括:
所述第一触摸传感器;
第二触摸传感器;和
处理器,其以通信方式连接到所述第一触摸传感器,以通信方式连接到所述第二触摸传感器,并且配置有致使所述处理器执行包括以下操作的操作的处理器可执行指令:
检测对多传感器输入模式的触发;
响应于检测到所述触发而进入所述多传感器输入模式;和
启用对来自所述第二触摸传感器的第二输入的处理。
38.根据权利要求37所述的移动计算装置,其中所述处理器配置有处理器可执行指令以执行操作,使得检测对多传感器输入模式的触发包括检测并非来自所述第二触摸传感器的输入的装置参数。
39.根据权利要求37所述的移动计算装置,其中所述处理器配置有处理器可执行指令以执行操作,使得检测对多传感器输入模式的触发包括检测来自所述第二触摸传感器的第三输入。
40.根据权利要求37所述的移动计算装置,其中所述处理器配置有处理器可执行指令以执行操作,使得检测对多传感器输入模式的触发包括执行被配置成触发进入所述多传感器输入模式的应用程序的指令。
41.根据权利要求37所述的移动计算装置,其中所述处理器配置有处理器可执行指令以执行另外包括以下操作的操作:
确定与所述触发相关联的多传感器输入数据结构;和
加载所述多传感器输入数据结构。
42.根据权利要求41所述的移动计算装置,其中所述处理器配置有处理器可执行指令以执行另外包括以下操作的操作:
从所述第二触摸传感器接收所述第二输入;
从所述第二输入标识与所述第二触摸传感器的第一类型的用户交互;
标识所述多传感器输入数据结构中的与所述第一类型的用户交互对应的第一传感器输入数据;和
标识所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据的条目中的多传感器输入。
43.根据权利要求42所述的移动计算装置,其中所述处理器配置有处理器可执行指令以执行操作,使得标识所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据的条目中的多传感器输入包括标识所述多传感器输入数据结构中的具有与所述多传感器输入响应有关的所述第一传感器输入数据和装置参数数据的所述条目中的所述多传感器输入。
44.根据权利要求42所述的移动计算装置,其中所述处理器配置有处理器可执行指令以执行操作,使得标识所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据的条目中的多传感器输入包括标识所述多传感器输入数据结构中的具有与所述多传感器输入响应有关的所述第一传感器输入数据和应用程序数据的所述条目中的所述多传感器输入。
45.一种移动计算装置,其中启用对来自第一触摸传感器的第一输入的处理,所述移动计算装置包括:
用于检测对多传感器输入模式的触发的装置;
用于响应于检测到所述触发而进入所述多传感器输入模式的装置;和
用于启用对来自第二触摸传感器的第二输入的处理的装置。
46.根据权利要求45所述的移动计算装置,其中用于检测对多传感器输入模式的触发的装置包括用于检测并非来自所述第二触摸传感器的输入的装置参数的装置。
47.根据权利要求45所述的移动计算装置,其中用于检测对多传感器输入模式的触发的装置包括用于检测来自所述第二触摸传感器的第三输入的装置。
48.根据权利要求45所述的移动计算装置,其中用于检测对多传感器输入模式的触发的装置包括用于执行被配置成触发进入所述多传感器输入模式的应用程序的指令的装置。
49.根据权利要求45所述的移动计算装置,其另外包括:
用于确定与所述触发相关联的多传感器输入数据结构的装置;和
用于加载所述多传感器输入数据结构的装置。
50.根据权利要求49所述的移动计算装置,其另外包括:
用于从所述第二触摸传感器接收所述第二输入的装置;
用于从所述第二输入标识与所述第二触摸传感器的第一类型的用户交互的装置;
用于标识所述多传感器输入数据结构中的与所述第一类型的用户交互对应的第一传感器输入数据的装置;和
用于标识所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据的条目中的多传感器输入的装置。
51.根据权利要求50所述的移动计算装置,其中用于标识所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据的条目中的多传感器输入的装置包括用于标识所述多传感器输入数据结构中的具有与所述多传感器输入响应有关的所述第一传感器输入数据和装置参数数据的所述条目中的所述多传感器输入的装置。
52.根据权利要求50所述的移动计算装置,其中用于标识所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据的条目中的多传感器输入的装置包括用于标识所述多传感器输入数据结构中的具有与所述多传感器输入响应有关的所述第一传感器输入数据和应用程序数据的所述条目中的所述多传感器输入的装置。
53.一种非暂时性处理器可读存储媒体,其中启用对来自第一触摸传感器的第一输入的处理,且在所述非暂时性处理器可读存储媒体上存储有被配置成致使计算装置的处理器执行包括以下操作的操作的处理器可执行指令:
检测对多传感器输入模式的触发;
响应于检测到所述触发而进入所述多传感器输入模式;和
启用对来自第二触摸传感器的第二输入的处理。
54.根据权利要求53所述的非暂时性处理器可读存储媒体,其中所述所存储的处理器可执行指令被配置成致使所述计算装置的所述处理器执行操作,使得检测对多传感器输入模式的触发包括检测并非来自所述第二触摸传感器的输入的装置参数。
55.根据权利要求53所述的非暂时性处理器可读存储媒体,其中所述所存储的处理器可执行指令被配置成致使所述计算装置的所述处理器执行操作,使得检测对多传感器输入模式的触发包括检测来自所述第二触摸传感器的第三输入。
56.根据权利要求53所述的非暂时性处理器可读存储媒体,其中所述所存储的处理器可执行指令被配置成致使所述计算装置的所述处理器执行操作,使得检测对多传感器输入模式的触发包括执行被配置成触发进入所述多传感器输入模式的应用程序的指令。
57.根据权利要求53所述的非暂时性处理器可读存储媒体,其中所述所存储的处理器可执行指令被配置成致使所述计算装置的所述处理器以执行另外包括以下操作的操作:
确定与所述触发相关联的多传感器输入数据结构;和
加载所述多传感器输入数据结构。
58.根据权利要求57所述的非暂时性处理器可读存储媒体,其中所述所存储的处理器可执行指令被配置成致使所述计算装置的所述处理器以执行另外包括以下操作的操作:操作的操作:
从所述第二触摸传感器接收所述第二输入;
从所述第二输入标识与所述第二触摸传感器的第一类型的用户交互;
标识所述多传感器输入数据结构中的与所述第一类型的用户交互对应的第一传感器输入数据;和
标识所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据的条目中的多传感器输入。
59.根据权利要求58所述的非暂时性处理器可读存储媒体,其中所述所存储的处理器可执行指令被配置成致使所述计算装置的所述处理器执行操作,使得标识所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据的条目中的多传感器输入包括标识所述多传感器输入数据结构中的具有与所述多传感器输入响应有关的所述第一传感器输入数据和装置参数数据的所述条目中的所述多传感器输入。
60.根据权利要求58所述的非暂时性处理器可读存储媒体,其中所述所存储的处理器可执行指令被配置成致使所述计算装置的所述处理器执行操作,使得标识所述多传感器输入数据结构中的具有与多传感器输入响应有关的所述第一传感器输入数据的条目中的多传感器输入包括标识所述多传感器输入数据结构中的具有与所述多传感器输入响应有关的所述第一传感器输入数据和应用程序数据的所述条目中的所述多传感器输入。
61.一种整合移动计算装置的多个相异表面上的多触摸输入的方法,所述方法包括:
在所述移动计算装置的处理器中,接收来自所述移动计算装置上的不同于所述移动计算装置的触摸屏的至少一个触摸传感器的第一多传感器输入;
通过所述处理器,使用情境感知数据确定所述移动计算装置的操作情境;
通过所述处理器,确定与所述所接收的第一多传感器输入和所述所确定的操作情境相关联的第一功能;和
执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作。
62.根据权利要求61所述的方法,其中:
所述所接收的第一多传感器输入表示在所述至少一个触摸传感器中的第一触摸传感器上检测到的第一触摸移动,
执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作包括执行被配置成致使所述移动计算装置执行所述移动计算装置的所述触摸屏上的作用中元素的第一虚拟移动的所述第一操作,所述第一虚拟移动类似于所述第一触摸移动。
63.根据权利要求62所述的方法,其另外包括:
通过所述处理器,接收表示在所述至少一个触摸传感器中的第二触摸传感器上检测到的第二触摸移动的第二多传感器输入;
通过所述处理器,确定与在所述所确定的操作情境期间接收到所述所接收的第二多传感器输入相关联的第二功能;和
执行被配置成致使所述移动计算装置执行所述所确定的第二功能的第二操作,其中所述所确定的第二功能包括执行所述移动计算装置的所述触摸屏上的所述作用中元素的第二虚拟移动,所述第二虚拟移动类似于所述第二触摸移动且在尺寸上不同于所述第一虚拟移动。
64.根据权利要求62所述的方法,其中执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作包括执行被配置成致使所述移动计算装置相对于所述第一触摸移动按比例调整所述第一虚拟移动的所述第一操作。
65.根据权利要求62所述的方法,其中执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作包括执行被配置成致使所述移动计算装置基于所述第一触摸移动的速度而相对于所述第一触摸移动按比例调整所述第一虚拟移动的所述第一操作。
66.根据权利要求61所述的方法,其中:
所述所接收的第一多传感器输入表示在所述至少一个触摸传感器中的第一触摸传感器上检测到的第一触摸移动,
执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作包括执行被配置成致使所述移动计算装置更改所述触摸屏的主动显示上的图像的背景和前景中的至少一个的所述第一操作。
67.根据权利要求61所述的方法,其中执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作包括执行被配置成致使所述移动计算装置控制不同于处于作用中的应用程序的后台应用程序的所述第一操作,所述处于作用中的应用程序充当对所述触摸屏的主动显示的主要控制。
68.根据权利要求61所述的方法,其中所述至少一个触摸传感器安置于以下各项中的至少一个上:所述移动计算装置的所述触摸屏所在的前表面、所述移动计算装置的在所述触摸屏后面的背表面、所述移动计算装置的处于所述前表面和背表面之间的底表面、所述移动计算装置的处于所述前表面和背表面之间并且与所述底表面相对的顶表面,或所述移动计算装置的处于所述前表面和背表面之间并且处于所述顶表面和底表面之间的侧表面。
69.根据权利要求61所述的方法,其中所述情境感知数据包含选自由以下组成的群组的状态信息的至少一个元素:所述移动计算装置上的处于作用中的应用程序和所述移动计算装置的组件。
70.根据权利要求61所述的方法,其中确定与所述所接收的第一多传感器输入相关联的所述第一功能包含确定适用于所述所接收的第一多传感器输入和所述所确定的操作情境的选择多传感器转译表,其中所述所确定的第一功能是基于在所述选择多传感器转译表上对所述所接收的第一多传感器输入的查找。
71.一种移动计算装置,其包括:
多个触摸传感器,其中所述多个触摸传感器包含安置于所述移动计算装置的前表面上的触摸屏和沿着以下各项中的至少一个安置的至少一个其它触摸传感器:所述前表面、所述移动计算装置的在所述触摸屏后面的背表面,以及所述移动计算装置的处于所述前表面和背表面之间的一或多个侧部;和
处理器,其耦合到所述多个触摸传感器,其中所述处理器配置有处理器可执行指令以致使所述处理器执行包括以下操作的操作:
从所述多个触摸传感器中的不同于所述触摸屏的至少一个触摸传感器接收第一多传感器输入;
使用情境感知数据确定所述移动计算装置的操作情境;
确定与所述所接收的第一多传感器输入和所述所确定的操作情境相关联的第一功能;和
执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作。
72.根据权利要求71所述的移动计算装置,其中:
所述所接收的第一多传感器输入表示在所述多个触摸传感器中的所述至少一个触摸传感器中的第一触摸传感器上检测到的第一触摸移动,
所述处理器配置有处理器可执行指令以执行操作,使得执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作包括执行被配置成致使所述移动计算装置执行所述移动计算装置的所述触摸屏上的作用中元素的第一虚拟移动的所述第一操作,所述第一虚拟移动类似于所述第一触摸移动。
73.根据权利要求72所述的移动计算装置,其中所述处理器配置有处理器可执行指令以执行另外包括以下操作的操作:
接收表示在所述多个触摸传感器中的所述至少一个触摸传感器中的第二触摸传感器上检测到的第二触摸移动的第二多传感器输入;
确定与在所述所确定的操作情境期间接收到所述所接收的第二多传感器输入相关联的第二功能;和
执行被配置成致使所述移动计算装置执行所述所确定的第二功能的第二操作,其中所述所确定的第二功能包括执行所述移动计算装置的所述触摸屏上的所述作用中元素的第二虚拟移动,所述第二虚拟移动类似于所述第二触摸移动且在尺寸上不同于所述第一虚拟移动。
74.根据权利要求72所述的移动计算装置,其中所述处理器配置有处理器可执行指令以执行操作,使得执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作包括执行被配置成致使所述移动计算装置相对于所述第一触摸移动按比例调整所述第一虚拟移动的所述第一操作。
75.根据权利要求72所述的移动计算装置,其中所述处理器配置有处理器可执行指令以执行操作,使得执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作包括执行被配置成致使所述移动计算装置基于所述第一触摸移动的速度而相对于所述第一触摸移动按比例调整所述第一虚拟移动的所述第一操作。
76.根据权利要求71所述的移动计算装置,其中:
所述所接收的第一多传感器输入表示在所述多个触摸传感器中的所述至少一个触摸传感器中的第一触摸传感器上检测到的第一触摸移动,
所述处理器配置有处理器可执行指令以执行操作,使得执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作包括执行被配置成致使所述移动计算装置更改所述触摸屏的主动显示上的图像的背景和前景中的至少一个的所述第一操作。
77.根据权利要求71所述的移动计算装置,其中所述处理器配置有处理器可执行指令以执行操作,使得执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作包括执行被配置成致使所述移动计算装置控制不同于处于作用中的应用程序的后台应用程序的所述第一操作,所述处于作用中的应用程序充当对所述触摸屏的主动显示的主要控制。
78.根据权利要求71所述的移动计算装置,其中所述情境感知数据包含选自由以下组成的群组的状态信息的至少一个元素:所述移动计算装置上的处于作用中的应用程序和所述移动计算装置的组件。
79.根据权利要求71所述的移动计算装置,其中所述处理器配置有处理器可执行指令以执行操作,使得确定与所述所接收的第一多传感器输入相关联的所述第一功能包含确定适用于所述所接收的第一多传感器输入和所述所确定的操作情境的选择多传感器转译表,其中所述所确定的第一功能是基于在所述选择多传感器转译表上对所述所接收的第一多传感器输入的查找。
80.一种移动计算装置,其包括:
用于接收来自所述移动计算装置上的不同于所述移动计算装置的触摸屏的至少一个触摸传感器的第一多传感器输入的装置;
用于使用情境感知数据确定所述移动计算装置的操作情境的装置;
用于确定与所述所接收的第一多传感器输入和所述所确定的操作情境相关联的第一功能的装置;和
用于执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作的装置。
81.根据权利要求80所述的移动计算装置,其中:
所述所接收的第一多传感器输入表示在所述至少一个触摸传感器中的第一触摸传感器上检测到的第一触摸移动,
用于执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作的装置包括用于执行被配置成致使所述移动计算装置执行所述移动计算装置的所述触摸屏上的作用中元素的第一虚拟移动的所述第一操作的装置,所述第一虚拟移动类似于所述第一触摸移动。
82.根据权利要求81所述的移动计算装置,其另外包括:
用于接收表示在所述至少一个触摸传感器中的第二触摸传感器上检测到的第二触摸移动的第二多传感器输入的装置;
用于确定与在所述所确定的操作情境期间接收到所述所接收的第二多传感器输入相关联的第二功能的装置;和
用于执行被配置成致使所述移动计算装置执行所述所确定的第二功能的第二操作的装置,其中所述所确定的第二功能包括执行所述移动计算装置的所述触摸屏上的所述作用中元素的第二虚拟移动,所述第二虚拟移动类似于所述第二触摸移动且在尺寸上不同于所述第一虚拟移动。
83.根据权利要求81所述的移动计算装置,其中用于执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作的装置包括用于执行被配置成致使所述移动计算装置相对于所述第一触摸移动按比例调整所述第一虚拟移动的所述第一操作的装置。
84.根据权利要求81所述的移动计算装置,其中用于执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作的装置包括用于执行被配置成致使所述移动计算装置基于所述第一触摸移动的速度而相对于所述第一触摸移动按比例调整所述第一虚拟移动的所述第一操作的装置。
85.根据权利要求80所述的移动计算装置,其中:
所述所接收的第一多传感器输入表示在所述至少一个触摸传感器中的第一触摸传感器上检测到的第一触摸移动,
用于执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作的装置包括用于执行被配置成致使所述移动计算装置更改所述触摸屏的主动显示上的图像的背景和前景中的至少一个的所述第一操作的装置。
86.根据权利要求80所述的移动计算装置,其中用于执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作的装置包括用于执行被配置成致使所述移动计算装置控制不同于处于作用中的应用程序的后台应用程序的所述第一操作的装置,所述处于作用中的应用程序充当对所述触摸屏的主动显示的主要控制。
87.根据权利要求80所述的移动计算装置,其中所述至少一个触摸传感器安置于以下各项中的至少一个上:所述移动计算装置的所述触摸屏所在的前表面、所述移动计算装置的在所述触摸屏后面的背表面、所述移动计算装置的处于所述前表面和背表面之间的底表面、所述移动计算装置的处于所述前表面和背表面之间并且与所述底表面相对的顶表面,或所述移动计算装置的处于所述前表面和背表面之间并且处于所述顶表面和底表面之间的侧表面。
88.根据权利要求80所述的移动计算装置,其中所述情境感知数据包含选自由以下组成的群组的状态信息的至少一个元素:所述移动计算装置上的处于作用中的应用程序和所述移动计算装置的组件。
89.根据权利要求80所述的移动计算装置,其中用于确定与所述所接收的第一多传感器输入相关联的所述第一功能的装置包含用于确定适用于所述所接收的第一多传感器输入和所述所确定的操作情境的选择多传感器转译表的装置,其中所述所确定的第一功能是基于在所述选择多传感器转译表上对所述所接收的第一多传感器输入的查找。
90.一种上面存储有处理器可执行指令的非暂时性处理器可读存储媒体,所述处理器可执行指令被配置成致使移动计算装置的处理器执行包括以下操作的操作:
接收来自所述移动计算装置上的不同于所述移动计算装置的触摸屏的至少一个触摸传感器的第一多传感器输入;
使用情境感知数据确定所述移动计算装置的操作情境;
确定与所述所接收的第一多传感器输入和所述所确定的操作情境相关联的第一功能;和
执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作。
91.根据权利要求90所述的非暂时性处理器可读存储媒体,其中:
所述所接收的第一多传感器输入表示在所述至少一个触摸传感器中的第一触摸传感器上检测到的第一触摸移动,
所述所存储的处理器可执行指令被配置成致使所述移动计算装置的所述处理器执行操作,使得执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作包括执行被配置成致使所述移动计算装置执行所述移动计算装置的所述触摸屏上的作用中元素的第一虚拟移动的所述第一操作,所述第一虚拟移动类似于所述第一触摸移动。
92.根据权利要求91所述的非暂时性处理器可读存储媒体,其中所述所存储的处理器可执行指令被配置成致使所述移动计算装置的所述处理器执行另外包括以下操作的操作:
接收表示在所述至少一个触摸传感器中的第二触摸传感器上检测到的第二触摸移动的第二多传感器输入;
确定与在所述所确定的操作情境期间接收到所述所接收的第二多传感器输入相关联的第二功能;和
执行被配置成致使所述移动计算装置执行所述所确定的第二功能的第二操作,其中所述所确定的第二功能包括执行所述移动计算装置的所述触摸屏上的所述作用中元素的第二虚拟移动,所述第二虚拟移动类似于所述第二触摸移动且在尺寸上不同于所述第一虚拟移动。
93.根据权利要求91所述的非暂时性处理器可读存储媒体,其中所述所存储的处理器可执行指令被配置成致使所述移动计算装置的所述处理器执行操作,使得执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作包括执行被配置成致使所述移动计算装置相对于所述第一触摸移动按比例调整所述第一虚拟移动的所述第一操作。
94.根据权利要求91所述的非暂时性处理器可读存储媒体,其中所述所存储的处理器可执行指令被配置成致使所述移动计算装置的所述处理器执行操作,使得执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作包括执行被配置成致使所述移动计算装置基于所述第一触摸移动的速度而相对于所述第一触摸移动按比例调整所述第一虚拟移动的所述第一操作。
95.根据权利要求90所述的非暂时性处理器可读存储媒体,其中:
所述所接收的第一多传感器输入表示在所述至少一个触摸传感器中的第一触摸传感器上检测到的第一触摸移动,
所述所存储的处理器可执行指令被配置成致使所述移动计算装置的所述处理器执行操作,使得执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作包括执行被配置成致使所述移动计算装置更改所述触摸屏的主动显示上的图像的背景和前景中的至少一个的所述第一操作。
96.根据权利要求90所述的非暂时性处理器可读存储媒体,其中所述所存储的处理器可执行指令被配置成致使所述移动计算装置的所述处理器执行操作,使得执行被配置成致使所述移动计算装置执行所述所确定的第一功能的第一操作包括执行被配置成致使所述移动计算装置控制不同于处于作用中的应用程序的后台应用程序的所述第一操作,所述处于作用中的应用程序充当对所述触摸屏的主动显示的主要控制。
97.根据权利要求90所述的非暂时性处理器可读存储媒体,其中所述至少一个触摸传感器安置于以下各项中的至少一个上:所述移动计算装置的所述触摸屏所在的前表面、所述移动计算装置的在所述触摸屏后面的背表面、所述移动计算装置的处于所述前表面和背表面之间的底表面、所述移动计算装置的处于所述前表面和背表面之间并且与所述底表面相对的顶表面,或所述移动计算装置的处于所述前表面和背表面之间并且处于所述顶表面和底表面之间的侧表面。
98.根据权利要求90所述的非暂时性处理器可读存储媒体,其中所述情境感知数据包含选自由以下组成的群组的状态信息的至少一个元素:所述移动计算装置上的处于作用中的应用程序和所述移动计算装置的组件。
99.根据权利要求90所述的非暂时性处理器可读存储媒体,其中所述所存储的处理器可执行指令被配置成致使所述移动计算装置的所述处理器执行操作,使得确定与所述所接收的第一多传感器输入相关联的所述第一功能包含确定适用于所述所接收的第一多传感器输入和所述所确定的操作情境的选择多传感器转译表,其中所述所确定的第一功能是基于在所述选择多传感器转译表上对所述所接收的第一多传感器输入的查找。
CN201880066579.8A 2017-10-14 2018-07-20 管理和映射多侧触摸 Pending CN111226191A (zh)

Applications Claiming Priority (13)

Application Number Priority Date Filing Date Title
US201762572455P 2017-10-14 2017-10-14
US201762572453P 2017-10-14 2017-10-14
US201762572471P 2017-10-14 2017-10-14
US201762572460P 2017-10-14 2017-10-14
US201762572465P 2017-10-14 2017-10-14
US62/572,460 2017-10-14
US62/572,465 2017-10-14
US62/572,455 2017-10-14
US62/572,453 2017-10-14
US62/572,471 2017-10-14
US16/003,487 US11126258B2 (en) 2017-10-14 2018-06-08 Managing and mapping multi-sided touch
US16/003,487 2018-06-08
PCT/US2018/043017 WO2019074567A1 (en) 2017-10-14 2018-07-20 MULTI-FACE TOUCH MANAGEMENT AND MAPPING

Publications (1)

Publication Number Publication Date
CN111226191A true CN111226191A (zh) 2020-06-02

Family

ID=66096392

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201880066579.8A Pending CN111226191A (zh) 2017-10-14 2018-07-20 管理和映射多侧触摸
CN201880065792.7A Active CN111194436B (zh) 2017-10-14 2018-08-14 多层用户界面的直接操控的方法
CN201880066442.2A Pending CN111201505A (zh) 2017-10-14 2018-08-14 用于检测装置上下文以便改变触摸电容的方法

Family Applications After (2)

Application Number Title Priority Date Filing Date
CN201880065792.7A Active CN111194436B (zh) 2017-10-14 2018-08-14 多层用户界面的直接操控的方法
CN201880066442.2A Pending CN111201505A (zh) 2017-10-14 2018-08-14 用于检测装置上下文以便改变触摸电容的方法

Country Status (6)

Country Link
US (7) US11126258B2 (zh)
EP (3) EP3695300B1 (zh)
CN (3) CN111226191A (zh)
SG (2) SG11202001955TA (zh)
TW (3) TW201915702A (zh)
WO (3) WO2019074567A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111596858A (zh) * 2020-05-15 2020-08-28 李小东 手持电子设备操控方法及手持电子设备

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11126258B2 (en) 2017-10-14 2021-09-21 Qualcomm Incorporated Managing and mapping multi-sided touch
CN108279805B (zh) * 2018-01-31 2022-03-25 北京小米移动软件有限公司 保护膜检测方法、装置及存储介质
US10845921B2 (en) * 2018-05-21 2020-11-24 Motorola Mobility Llc Methods and systems for augmenting images in an electronic device
KR102519800B1 (ko) * 2018-07-17 2023-04-10 삼성디스플레이 주식회사 전자 장치
CN110912960B (zh) * 2018-09-18 2023-04-28 斑马智行网络(香港)有限公司 一种数据处理方法、装置和机器可读介质
US11157094B2 (en) * 2018-12-12 2021-10-26 Dell Products, L.P. Touch input switching for multi-form factor information handling system (IHS)
EP3903500A4 (en) * 2018-12-26 2022-10-19 Snap Inc. CREATION AND USER INTERACTIONS WITH THREE-DIMENSIONAL WALLPAPER ON COMPUTER DEVICES
US11853533B1 (en) * 2019-01-31 2023-12-26 Splunk Inc. Data visualization workspace in an extended reality environment
US11644940B1 (en) 2019-01-31 2023-05-09 Splunk Inc. Data visualization in an extended reality environment
US11450044B2 (en) * 2019-03-20 2022-09-20 Kt Corporation Creating and displaying multi-layered augemented reality
EP3928182A1 (en) 2019-05-20 2021-12-29 Google LLC Mobile device-based radar system for providing a multi-mode interface and method therefor
JP7197007B2 (ja) * 2019-06-12 2022-12-27 日本電信電話株式会社 タッチパネル型情報端末装置およびその情報入力処理方法
EP3928181A1 (en) * 2019-06-17 2021-12-29 Google LLC Mobile device-based radar system for applying different power modes to a multi-mode interface
US10852842B1 (en) * 2019-07-29 2020-12-01 Cirque Corporation, Inc. Keyboard capacitive backup
US11194429B2 (en) * 2019-09-05 2021-12-07 Panasonic Intellectual Property Management Co., Ltd. Information display terminal
TWI779310B (zh) * 2019-09-26 2022-10-01 華碩電腦股份有限公司 電子裝置之控制方法
US11256367B2 (en) 2019-09-27 2022-02-22 Apple Inc. Techniques for handling unintentional touch inputs on a touch-sensitive surface
KR20210048941A (ko) 2019-10-24 2021-05-04 삼성전자주식회사 전자 장치 및 그의 디스플레이 동작 제어 방법
CN113138690A (zh) * 2020-01-20 2021-07-20 北京小米移动软件有限公司 触控屏、移动终端、控制方法、装置及存储介质
US20210258350A1 (en) * 2020-02-19 2021-08-19 Lookout, Inc. Privacy preservation in network connections
US11089196B1 (en) * 2020-04-22 2021-08-10 Dell Products L.P. Capacitive switch for controlling a camera module for an information handling system
US11715327B2 (en) * 2020-06-22 2023-08-01 Motorola Mobility Llc Electronic devices and methods for selecting display locations for content presentation
CN117354773A (zh) * 2020-06-30 2024-01-05 荣耀终端有限公司 交互控制方法、装置、终端和存储介质
EP3945402B1 (en) * 2020-07-29 2024-03-27 Tata Consultancy Services Limited Method and device providing multimodal input mechanism
US11249314B1 (en) * 2020-08-04 2022-02-15 Htc Corporation Method for switching input devices, head-mounted display and computer readable storage medium
US11782149B2 (en) * 2021-01-08 2023-10-10 Google Llc Systems and methods for managing motion detection of an electronic device, and associated electronic devices
US11740726B2 (en) * 2021-03-08 2023-08-29 International Business Machines Corporation Touch sensitivity management
US20220334578A1 (en) * 2021-04-14 2022-10-20 Ford Global Technologies, Llc Remote Control System For A Vehicle And Trailer
JP2023020731A (ja) * 2021-07-30 2023-02-09 富士フイルムビジネスイノベーション株式会社 装置およびプログラム
CN113342247B (zh) * 2021-08-04 2021-11-02 北京达佳互联信息技术有限公司 素材处理方法、装置、电子设备及存储介质
US20230170976A1 (en) * 2021-11-30 2023-06-01 Qualcomm Incorporated Beam selection and codebook learning based on xr perception
US20240077868A1 (en) * 2022-09-07 2024-03-07 Schweitzer Engineering Laboratories, Inc. Configurable multi-sensor input

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060197750A1 (en) * 2005-03-04 2006-09-07 Apple Computer, Inc. Hand held electronic device with multiple touch sensing devices
US20110053641A1 (en) * 2008-11-10 2011-03-03 Samsung Electronics Co., Ltd. Motion input device for portable terminal and operation method using the same
CN102687100A (zh) * 2010-01-06 2012-09-19 高通股份有限公司 用于提供力敏感输入的用户接口方法和系统
CN103534674A (zh) * 2011-02-08 2014-01-22 海沃氏公司 多模态触摸屏交互装置、方法和系统
US20140078086A1 (en) * 2012-09-20 2014-03-20 Marvell World Trade Ltd. Augmented touch control for hand-held devices
US20150363035A1 (en) * 2014-06-12 2015-12-17 Microsoft Corporation Sensor correlation for pen and touch-sensitive computing device interaction
CN105324736A (zh) * 2013-07-23 2016-02-10 英特尔公司 触摸式和非触摸式用户交互输入的技术

Family Cites Families (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8144129B2 (en) 2007-01-05 2012-03-27 Apple Inc. Flexible touch sensing circuits
US20090107737A1 (en) 2007-10-28 2009-04-30 Joesph K Reynolds Multiple-sensor-electrode capacitive button
US8854320B2 (en) 2008-07-16 2014-10-07 Sony Corporation Mobile type image display device, method for controlling the same and information memory medium
JP5363259B2 (ja) * 2009-09-29 2013-12-11 富士フイルム株式会社 画像表示装置、画像表示方法およびプログラム
US20110087963A1 (en) 2009-10-09 2011-04-14 At&T Mobility Ii Llc User Interface Control with Edge Finger and Motion Sensing
US8988356B2 (en) 2009-12-31 2015-03-24 Google Inc. Touch sensor and touchscreen user input combination
KR20110081040A (ko) 2010-01-06 2011-07-13 삼성전자주식회사 투명 디스플레이를 구비한 휴대단말에서 컨텐츠 운용 방법 및 장치
US9519356B2 (en) * 2010-02-04 2016-12-13 Microsoft Technology Licensing, Llc Link gestures
TW201220152A (en) 2010-11-11 2012-05-16 Wistron Corp Touch control device and touch control method with multi-touch function
US8797283B2 (en) * 2010-11-22 2014-08-05 Sony Computer Entertainment America Llc Method and apparatus for performing user-defined macros
US10969833B2 (en) 2011-04-19 2021-04-06 Nokia Technologies Oy Method and apparatus for providing a three-dimensional data navigation and manipulation interface
US20120268411A1 (en) 2011-04-19 2012-10-25 Symbol Technologies, Inc. Multi-modal capacitive touchscreen interface
US20130159939A1 (en) * 2011-10-12 2013-06-20 Qualcomm Incorporated Authenticated gesture recognition
US20130106710A1 (en) 2011-10-31 2013-05-02 Nokia Corporation Methods, apparatuses, and computer program products for adjusting touchscreen sensitivity
KR101869083B1 (ko) * 2011-12-01 2018-06-19 현대모비스 주식회사 정전 용량식 터치 스크린의 터치 감도 제어방법 및 이를 이용한 디스플레이 장치
US9257098B2 (en) * 2011-12-23 2016-02-09 Nokia Technologies Oy Apparatus and methods for displaying second content in response to user inputs
US20130194235A1 (en) * 2012-02-01 2013-08-01 Logitec Europe S.A. Multi-sensor input device
US20130257746A1 (en) * 2012-03-29 2013-10-03 Dmitriy Sergeyevich Cherkasov Input Module for First Input and Second Input
US20130265276A1 (en) 2012-04-09 2013-10-10 Amazon Technologies, Inc. Multiple touch sensing modes
JP6271858B2 (ja) 2012-07-04 2018-01-31 キヤノン株式会社 表示装置及びその制御方法
US9557846B2 (en) 2012-10-04 2017-01-31 Corning Incorporated Pressure-sensing touch system utilizing optical and capacitive systems
US20150212647A1 (en) * 2012-10-10 2015-07-30 Samsung Electronics Co., Ltd. Head mounted display apparatus and method for displaying a content
US9152247B2 (en) 2012-10-24 2015-10-06 Google Inc. Computing device with force-triggered non-visual responses
US9477313B2 (en) * 2012-11-20 2016-10-25 Samsung Electronics Co., Ltd. User gesture input to wearable electronic device involving outward-facing sensor of device
US9152271B2 (en) 2013-02-06 2015-10-06 Honeywell International Inc. Automatic and dynamic sensitivity control of projected capacitive touch sensitive detection systems
KR102120099B1 (ko) * 2013-02-06 2020-06-09 엘지전자 주식회사 양면 터치 인식 가능한 디지털 디바이스 및 제어 방법
US20140292636A1 (en) * 2013-03-29 2014-10-02 Plantronics, Inc. Head-Worn Infrared-Based Mobile User-Interface
US9772764B2 (en) 2013-06-06 2017-09-26 Microsoft Technology Licensing, Llc Accommodating sensors and touch in a unified experience
KR20150007910A (ko) 2013-07-11 2015-01-21 삼성전자주식회사 사용자 인터렉션을 제공하는 사용자 단말 장치 및 그 방법
KR20150019165A (ko) 2013-08-12 2015-02-25 엘지전자 주식회사 이동 단말기 및 이의 제어방법
KR102097639B1 (ko) 2013-11-05 2020-04-06 엘지전자 주식회사 이동 단말기 및 이의 제어방법
US20150177945A1 (en) 2013-12-23 2015-06-25 Uttam K. Sengupta Adapting interface based on usage context
US9389830B2 (en) * 2013-12-24 2016-07-12 Arthur Tan-Chi Yuan Combined multi-source input interface
US10831318B2 (en) 2013-12-24 2020-11-10 Intel Corporation Adaptive enclosure for a mobile computing device
US20150227166A1 (en) 2014-02-13 2015-08-13 Samsung Electronics Co., Ltd. User terminal device and displaying method thereof
US10042547B2 (en) * 2014-06-17 2018-08-07 Vmware, Inc. User interface control based on pinch gestures
US9304643B2 (en) 2014-06-24 2016-04-05 Synaptics Incorporated Classifying input objects interacting with a capacitive button
US20160004384A1 (en) * 2014-07-03 2016-01-07 Hisashi Sato Method of universal multi-touch input
US20160026309A1 (en) * 2014-07-25 2016-01-28 Hannstar Display (Nanjing) Corporation Controller
US10306174B1 (en) * 2014-09-15 2019-05-28 Google Llc Multi sensory input to improve hands-free actions of an electronic device
US10345967B2 (en) * 2014-09-17 2019-07-09 Red Hat, Inc. User interface for a device
KR101594946B1 (ko) * 2014-11-21 2016-02-17 스튜디오씨드코리아 주식회사 프로토타이핑 툴을 제공하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
US9788277B2 (en) 2015-01-15 2017-10-10 Mediatek Inc. Power saving mechanism for in-pocket detection
KR20160101580A (ko) 2015-02-17 2016-08-25 삼성전자주식회사 터치 스크린 패널의 활성화 영역 제어 방법 및 그 전자 장치
US9983747B2 (en) 2015-03-26 2018-05-29 Google Llc Two-layer interactive textiles
US20170115782A1 (en) 2015-10-23 2017-04-27 Microsoft Technology Licensing, Llc Combined grip and mobility sensing
US10768804B2 (en) 2016-09-06 2020-09-08 Microsoft Technology Licensing, Llc Gesture language for a device with multiple touch surfaces
US11126258B2 (en) 2017-10-14 2021-09-21 Qualcomm Incorporated Managing and mapping multi-sided touch

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060197750A1 (en) * 2005-03-04 2006-09-07 Apple Computer, Inc. Hand held electronic device with multiple touch sensing devices
US20110053641A1 (en) * 2008-11-10 2011-03-03 Samsung Electronics Co., Ltd. Motion input device for portable terminal and operation method using the same
CN102687100A (zh) * 2010-01-06 2012-09-19 高通股份有限公司 用于提供力敏感输入的用户接口方法和系统
CN103534674A (zh) * 2011-02-08 2014-01-22 海沃氏公司 多模态触摸屏交互装置、方法和系统
US20140078086A1 (en) * 2012-09-20 2014-03-20 Marvell World Trade Ltd. Augmented touch control for hand-held devices
CN105324736A (zh) * 2013-07-23 2016-02-10 英特尔公司 触摸式和非触摸式用户交互输入的技术
US20150363035A1 (en) * 2014-06-12 2015-12-17 Microsoft Corporation Sensor correlation for pen and touch-sensitive computing device interaction

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111596858A (zh) * 2020-05-15 2020-08-28 李小东 手持电子设备操控方法及手持电子设备

Also Published As

Publication number Publication date
CN111201505A (zh) 2020-05-26
TW201923528A (zh) 2019-06-16
WO2019074578A1 (en) 2019-04-18
US10901606B2 (en) 2021-01-26
TW201923522A (zh) 2019-06-16
US11635810B2 (en) 2023-04-25
US11126258B2 (en) 2021-09-21
US20190113995A1 (en) 2019-04-18
US20210278897A1 (en) 2021-09-09
US20190114021A1 (en) 2019-04-18
US11740694B2 (en) 2023-08-29
EP3695301A1 (en) 2020-08-19
US10551984B2 (en) 2020-02-04
US11460918B2 (en) 2022-10-04
EP3695300A1 (en) 2020-08-19
US20190114005A1 (en) 2019-04-18
US20210278896A1 (en) 2021-09-09
CN111194436A (zh) 2020-05-22
TW201915702A (zh) 2019-04-16
EP3695300B1 (en) 2024-04-24
US11353956B2 (en) 2022-06-07
CN111194436B (zh) 2024-03-19
SG11202001955TA (en) 2020-04-29
US20210382550A1 (en) 2021-12-09
WO2019074567A1 (en) 2019-04-18
SG11202001957YA (en) 2020-04-29
WO2019074577A1 (en) 2019-04-18
US20210109611A1 (en) 2021-04-15
EP3695302A1 (en) 2020-08-19

Similar Documents

Publication Publication Date Title
US11740694B2 (en) Managing and mapping multi-sided touch
KR102041332B1 (ko) 모바일 운영 시스템
EP2689318B1 (en) Method and apparatus for providing sight independent activity reports responsive to a touch gesture
JP6321296B2 (ja) テキスト入力方法、装置、プログラム及び記録媒体
US20140007019A1 (en) Method and apparatus for related user inputs
US20110126094A1 (en) Method of modifying commands on a touch screen user interface
KR101962774B1 (ko) 애플리케이션과 연관된 신규 메시지를 처리하기 위한 방법 및 장치
CN103210366A (zh) 用于基于邻近的输入的装置和方法
US20210165670A1 (en) Method, apparatus for adding shortcut plug-in, and intelligent device
CN107422977A (zh) 触发操作处理方法、装置以及计算机可读存储介质
CN107870712A (zh) 一种截图处理方法及装置
CN110275653A (zh) 页面显示方法、装置、终端及存储介质
KR20150051292A (ko) 컨텐츠 공유 방법 및 그 전자 장치
CN106095236A (zh) 整理桌面图标的方法及装置
CN104951194B (zh) 拍照操作菜单的显示方法及装置
JP6612351B2 (ja) アプリケーション・インタフェース要素を移動させるために使用されるデバイス、方法およびグラフィック・ユーザ・インタフェース
CN104536640B (zh) 背景图片查看方法及装置
CN114647623A (zh) 文件夹处理方法、智能终端及存储介质
CN109976549B (zh) 数据处理方法、装置和机器可读介质
KR102386100B1 (ko) 리스트 표시 방법 및 장치
KR102158293B1 (ko) 이미지 촬영 방법 및 그 전자 장치
JP7419458B2 (ja) メディアを管理するためのユーザインタフェース
JP7002512B2 (ja) アプリケーション・インタフェース要素を移動させるために使用されるデバイス、方法およびグラフィック・ユーザ・インタフェース

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40023331

Country of ref document: HK