CN102763074B - 自动键盘布局确定 - Google Patents

自动键盘布局确定 Download PDF

Info

Publication number
CN102763074B
CN102763074B CN201080064126.5A CN201080064126A CN102763074B CN 102763074 B CN102763074 B CN 102763074B CN 201080064126 A CN201080064126 A CN 201080064126A CN 102763074 B CN102763074 B CN 102763074B
Authority
CN
China
Prior art keywords
language
keyboard
positional information
electronic installation
software
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201080064126.5A
Other languages
English (en)
Other versions
CN102763074A (zh
Inventor
布拉德福德·艾伦·穆尔
斯蒂芬·W·斯维尔斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Publication of CN102763074A publication Critical patent/CN102763074A/zh
Application granted granted Critical
Publication of CN102763074B publication Critical patent/CN102763074B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G06F3/0237—Character input methods using prediction or retrieval techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G06F9/454—Multi-language systems; Localisation; Internationalisation

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明提供一种用于在无用户介入的情况下配置硬件键盘的方法。获得来自与所述电子装置相关联的一个或一个以上硬件及软件信息源的语言信息及位置信息中的至少一者。基于所述硬件及软件信息的相关联语言及位置信息的可靠性而排定所述硬件及软件信息的优先次序。基于从具有最高相对优先级的所述信息源所获得的所述语言信息及位置信息而确定所述硬件键盘的键盘语言及布局。配置所述电子装置以基于所述所确定的键盘语言及键盘布局而解译来自所述硬件键盘的按键输入信号。

Description

自动键盘布局确定
技术领域
所揭示的实施例大体来说涉及具有触敏表面的电子装置，且更确切地说，涉及具有经配置以接受来自硬件键盘的输入的触敏表面的电子装置。
背景技术
近年来，将触敏表面作为计算机及其它电子计算装置的输入装置的使用已显著增加。示范性触敏表面包括触摸板及触摸屏显示器。这些表面广泛用以操控显示器上的用户接口对象。
用于确定键盘布局的现有方法麻烦且效率低。当前，不存在普遍使用的键盘语言及键盘布局。通常，用户必须指定键盘布局或回答一系列键盘配置问题。
发明内容
因此，计算装置需要具有用于自动确定键盘的布局且配置键盘的更快、更高效的方法及接口。这些方法及接口可补充或取代用于自动确定键盘布局且配置键盘的常规方法。这些方法及接口减少用户的认知负担且产生更高效的人机接口。对于电池操作的计算装置，这些方法及接口节省电力且增加电池充电之间的时间。
通过所揭示的装置而减少或消除与用于具有触敏表面的计算装置的用户接口相关联的上述缺点及其它问题。在一些实施例中，所述装置是桌上型计算机。在一些实施例中，所述装置是便携式的(例如，笔记本计算机、平板计算机或手持式装置)。在一些实施例中，所述装置具有触摸板。在一些实施例中，所述装置具有触敏显示器(还称为“触摸屏”或“触摸屏显示器”)。在一些实施例中，所述装置具有图形用户接口(GUI)、一个或一个以上处理器、存储器及存储于存储器中的用于执行多个功能的一个或一个以上模块、程序或指令集。在一些实施例中，用户主要经由触敏表面上的手指接触及手势来与GUI交互。在一些实施例中，所述功能可包括图像编辑、绘图、呈现、文字处理、网站创建、磁盘创作、电子表格制作、玩游戏、打电话、视频会议、发电子邮件、即时消息接发、锻炼支持、数字拍照、数字视频、网络浏览、数字音乐播放，及/或数字视频播放。用于执行这些功能的可执行指令可包括于计算机可读存储媒体或经配置以用于供一个或一个以上处理器执行的其它计算机程序产品中。
根据一些实施例，提供一种用以自动确定键盘布局且相应地配置所述键盘的方法，包括无用户介入。从多个硬件及软件源获得语言信息及位置信息。基于由相应源所提供的语言信息及位置信息的可靠性而排定硬件及软件源的优先次序。将来自具有最高优先级的源的语言信息及位置信息映射成硬件及/或屏幕上键盘的键盘布局。以多种方式使用所述键盘布局。举例来说，在一些实施例中，使用所述键盘布局以基于由所述多个硬件及软件源所提供的语言信息及位置信息而配置硬件键盘来反映用户很可能偏好的键入语言及键盘格式。此使得所述装置能够基于所确定的键盘布局而解译来自所述硬件键盘的按键输入信号，而无需用户在单独键盘配置过程中输入键盘配置信息。
根据一些实施例，在包括一个或一个以上处理器、存储器及一显示器的电子装置处执行一种方法。所述方法包括从与所述电子装置相关联的一个或一个以上硬件及软件信息源获得语言信息及位置信息中的至少一者。所述方法还包括基于所述硬件及软件信息源的相关联语言及位置信息的可靠性而排定所述硬件及软件信息源的优先次序。所述方法进一步包括基于从具有最高相对优先级的信息源所获得的语言信息及位置信息而确定硬件键盘的键盘语言及键盘布局。所述方法进一步包括配置所述电子装置以基于所确定的键盘语言及所确定的键盘布局而解译来自所述硬件键盘的按键输入信号。在一些实施例中，可自动地(意味着无用户介入)进行所述配置。
根据一些实施例，在包括一个或一个以上处理器、存储器及一显示器的电子装置处执行一种方法。所述方法包括从与所述电子装置相关联的一个或一个以上信息源获得语言信息及位置信息中的至少一者。所述方法还包括基于所述信息源的相关联语言及位置信息的可靠性而排定所述信息源的优先次序。所述方法进一步包括基于从具有最高相对优先级的信息源所获得的语言信息及位置信息而确定键盘的键盘语言及键盘布局。所述方法进一步包括配置所述电子装置以基于所确定的键盘语言及所确定的键盘布局而解译来自所述键盘的输入信号。
根据一些实施例，一种电子装置包括触敏显示器、一个或一个以上处理器、存储器，及一个或一个以上程序；所述一个或一个以上程序存储于所述存储器中且经配置以由所述一个或一个以上处理器执行，且所述一个或一个以上程序包括用于执行上文所描述的方法中的任一者的操作的指令。根据一些实施例，在具有显示器、存储器及用以执行存储于所述存储器中的一个或一个以上程序的一个或一个以上处理器的电子装置上的图形用户接口包括在上文所描述的方法中的任一者中所显示的元件中的一者或一者以上，响应于输入而更新所述元件，如在上述方法的任一者中所描述。根据一些实施例，一种计算机可读存储媒体中存储有指令，所述指令在由具有触敏显示器的电子装置执行时使所述装置执行上文所描述的方法中的任一者的操作。根据一些实施例，一种电子装置包括：显示器；及用于执行上文所描述的方法中的任一者的操作的装置。根据一些实施例，用于具有显示器的电子装置中的信息处理设备包括用于执行上文所描述的方法中的任一者的操作的装置。
根据一些实施例，一种电子装置包括处理单元及耦合到所述处理单元的显示单元。所述处理单元经配置以进行以下操作：从与所述电子装置相关联的一个或一个以上硬件及软件信息源获得语言信息及位置信息中的至少一者；基于所述硬件及软件信息源的相关联语言及位置信息的可靠性而排定所述硬件及软件信息源的优先次序；基于从具有最高相对优先级的信息源所获得的语言信息及位置信息而确定硬件键盘的键盘语言及键盘布局；及配置所述电子装置以基于所确定的键盘语言及所确定的键盘布局而解译来自所述硬件键盘的按键输入信号。所述显示单元经配置以显示与经解译的按键输入信号相关联的信息。
根据一些实施例，一种电子装置包括处理单元及耦合到所述处理单元的显示单元。所述处理单元经配置以进行以下操作：从与所述电子装置相关联的一个或一个以上信息源获得语言信息及位置信息中的至少一者；基于所述信息源的相关联语言信息及位置信息的可靠性而排定所述信息源的优先次序；基于从具有最高相对优先级的信息源所获得的语言信息及位置信息而确定键盘的键盘语言及键盘布局；及配置所述电子装置以基于所确定的键盘语言及所确定的键盘布局而解译来自所述键盘的输入信号。所述显示单元经配置以显示与经解译的按键输入信号相关联的信息。
因此，向具有显示器的电子装置提供用于自动确定键盘布局且配置键盘的更快、更高效的方法及接口，借此增加在使用这些装置的情况下的有效性、效率及用户满意度。这些方法及接口可补充或取代用于确定键盘布局且配置键盘的常规方法。
附图说明
为了更好地理解本发明的前述实施例以及其额外实施例，应结合下图参考以下具体实施方式，在图中，所有图中相同的参考数字指代对应部分。
图1A及1B为说明根据一些实施例的具有触敏显示器的便携式多功能装置的框图。
图1C为说明根据一些实施例的用于事件处置的示范性组件的框图。
图2说明根据一些实施例的具有触摸屏的便携式多功能装置。
图3为根据一些实施例的具有显示器及触敏表面的示范性多功能装置的框图。
图4A及4B说明根据一些实施例的便携式多功能装置上的应用程序的菜单的示范性用户接口。
图4C说明根据一些实施例的具有与显示器分离的触敏表面的多功能装置的示范性用户接口。
图5为可与多功能装置交互以获得键盘布局、语言及位置信息的源的框图。
图6A、6B、6C及6D为展示多功能装置上的硬件键盘输入的框图。
图7A及7B为说明根据一些实施例的自动确定键盘布局的方法的流程图。
图8为根据一些实施例的电子装置的功能框图。
具体实施方式
现在将详细参考实施例，在附图中说明所述实施例的实例。在以下详细描述中，陈述众多具体细节以便提供对本发明的透彻理解。然而，所属领域的技术人员将明白，可在没有这些具体细节的情况下实践本发明。在其它例子中，未详细描述众所周知的方法、程序、组件、电路及网络，以便不会不必要地混淆实施例的各方面。
还将理解，虽然术语“第一”、“第二”等可在本文中用于描述各种元件，但这些元件不应受这些术语限制。这些术语仅用于将一个元件与另一元件区分开来。举例来说，在不脱离本发明的范围的情况下，可将第一接触称为第二接触，且类似地，可将第二接触称为第一接触。第一接触及第二接触两者均是接触，但不是相同的接触。
本文中用于本发明的描述中的术语仅是出于描述特定实施例的目的且无意限制本发明。如本发明及所附权利要求书的描述中所使用，单数形式“一”及“所述”意在也包括复数形式，除非上下文另有清楚指示。还将理解，如本文中所使用的术语“及/或”指代且涵盖相关联的所列项目中的一者或一者以上的任何及所有可能的组合。将进一步理解，术语“包括”及/或“包含”当用于本说明书中时指定所述特征、整体、步骤、操作、元件及/或组件的存在，而不排除一个或一个以上其它特征、整体、步骤、操作、元件、组件及/或其群组的存在或添加。
如本文中所使用，视上下文而定，术语“如果”可解释为是指“当……时”或“在……后即刻”或“响应于确定”或“响应于检测到”。类似地，视上下文而定，短语“如果确定”或“如果检测到【规定条件或事件】”可解释为是指“在确定后即刻”或“响应于确定”或“在检测到【规定条件或事件】后即刻”或“响应于检测到【规定条件或事件】”。
描述了计算装置、用于这些装置的用户接口及用于使用这些装置的相关联的过程的实施例。在一些实施例中，计算装置是便携式通信装置，例如移动电话，其还含有其它功能，例如PDA及/或音乐播放器功能。便携式多功能装置的示范性实施例包括(不限于)来自加利福尼亚州库比迪诺的苹果公司的及iPod装置。还可使用其它便携式装置，例如具有触敏表面(例如，触摸屏显示器及/或触摸板)的膝上型或平板计算机。还应理解，在一些实施例中，所述装置不是便携式通信装置，而是具有触敏表面(例如，触摸屏显示器及/或触摸板)的桌上型计算机。
在以下论述中，描述包括显示器及触敏表面的计算装置。然而，应理解，所述计算装置可包括一个或一个以上其它物理用户接口装置，例如物理键盘、鼠标及/或操纵杆。
所述装置支持多种应用程序，例如以下各者中的一者或一者以上：绘图应用程序、呈现应用程序、文字处理应用程序、网站创建应用程序、磁盘创作应用程序、电子表格应用程序、游戏应用程序、电话应用程序、视频会议应用程序、电子邮件应用程序、即时消息接发应用程序、锻炼支持应用程序、照片管理应用程序、数码相机应用程序、数字视频相机应用程序、网络浏览应用程序、数字音乐播放器应用程序，及/或数字视频播放器应用程序。
可在所述装置上执行的各种应用程序可使用至少一个共同物理用户接口装置，例如触敏表面。触敏表面的一个或一个以上功能以及所述装置上所显示的对应信息可在不同应用程序中及/或在相应应用程序内受到调整及/或变化。以此方式，所述装置的共同物理架构(例如，触敏表面)可用直观且透明的用户接口来支持多种应用程序。
所述用户接口可包括一个或一个以上软键盘或屏幕上键盘实施例。软键盘实施例可包括在键盘的所显示图标上的标准(QWERTY、AZERTY、Dvorak)及/或非标准的符号配置，例如2006年7月24日申请的美国专利申请案11/459,606“用于便携式电子装置的键盘(KeyboardsForPortableElectronicDevices)”、2006年7月24日申请的美国专利申请案11/459,615“用于便携式电子装置的触摸屏键盘(TouchScreenKeyboardsForPortableElectronicDevices)”以及2009年3月16日申请的美国专利申请案61/210,331“用于具有触摸屏显示器的多功能装置的智能键盘管理(SmartKeyboardManagementforaMultifunctionDevicewithaTouchScreenDisplay)”中描述的那些，其全部内容在此以引用的方式并入。软键盘可采用任何语言。键盘实施例可包括相对于现有物理键盘(例如，打字机的键盘)中的键数目而数目减少的图标(或软键)。此可使得用户更容易地选择键盘中的一个或一个以上图标，且因此，选择一个或一个以上对应符号。所述键盘实施例可为自适应的。举例来说，可根据用户动作(例如，选择一个或一个以上图标及/或一个或一个以上对应符号)来修改所显示的图标。所述装置上的一个或一个以上应用程序可利用共同及/或不同的键盘实施例。因此，可根据所述应用程序中的至少一些应用程序来修整所使用的键盘实施例。在一些实施例中，可根据相应用户来修整一个或一个以上键盘实施例。举例来说，可基于相应用户的文字使用历史(词典编纂、俚语、个性使用)来根据相应用户修整一个或一个以上键盘实施例。在使用软键盘实施例时，可调整键盘实施例中的一些以降低当选择一个或一个以上图标时(以及因此，在选择一个或一个以上符号时)用户发生错误的概率。
现在将注意力导向具有触敏显示器的便携式装置的实施例。图1A及1B是说明根据一些实施例的具有触敏显示器112的便携式多功能装置100的框图。出于便利起见，触敏显示器112有时被称为“触摸屏”，且还可被称作或称为触敏显示器系统。装置100可包括存储器102(其可包括一个或一个以上计算机可读存储媒体)、存储器控制器122、一个或一个以上处理单元(CPU)120、外围设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子系统106、其它输入或控制装置116及外部端口124。装置100可包括一个或一个以上光学传感器164。这些组件可经由一个或一个以上通信总线或信号线103进行通信。
应了解，装置100仅为便携式多功能装置的一个实例，且装置100可具有比所展示的组件多或少的组件，可组合两个或两个以上组件，或可具有组件的不同配置或布置。图1A及1B中所示的各种组件可以硬件、软件或硬件及软件两者的组合来实施，包括一个或一个以上信号处理及/或专用集成电路。
存储器102可包括高速随机存取存储器且还可包括非易失性存储器，例如一个或一个以上磁盘存储装置、快闪存储器装置，或其它非易失性固态存储器装置。可通过存储器控制器122来控制装置100的其它组件(例如，CPU120及外围设备接口118)对存储器102的存取。
外围设备接口118可用于将装置的输入及输出外围设备耦合到CPU120及存储器102。一个或一个以上处理器120运行或执行存储于存储器102中的各种软件程序及/或指令集以执行装置100的各种功能并处理数据。
在一些实施例中，外围设备接口118、CPU120及存储器控制器122可实施于例如芯片104等单一芯片上。在一些其它实施例中，其可实施于分开的芯片上。
RF(射频)电路108接收并发送RF信号(还称为电磁信号)。RF电路108将电信号转换为电磁信号/将电磁信号转换为电信号，且经由电磁信号与通信网络及其它通信装置通信。RF电路108可包括用于执行这些功能的众所周知的电路，包括(但不限于)天线系统、RF收发器、一个或一个以上放大器、调谐器、一个或一个以上振荡器、数字信号处理器、编解码器芯片组、订户身份模块(SIM)卡、存储器等。RF电路108可通过无线通信与网络(例如因特网(还称作万维网(WWW))、内联网及/或例如蜂窝式电话网络、无线局域网(LAN)及/或城域网(MAN)等无线网络)以及其它装置通信。无线通信可使用多种通信标准、协议及技术中的任一者，包括(但不限于)全球移动通信系统(GSM)、增强型数据GSM环境(EDGE)、高速下行链路包接入(HSDPA)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、无线保真(Wi-Fi)(例如，IEEE802.11a、IEEE802.11b、IEEE802.11g及/或IEEE802.11n)、因特网语音协议(VoIP)、Wi-MAX、电子邮件协议(例如，因特网消息接入协议(IMAP)及/或邮局协议(POP))、即时消息接发(例如，可扩展消息接发及呈现协议(XMPP)、即时消息接发及呈现利用扩展的会话起始协议(SIMPLE)、即时消息接发及呈现服务(IMPS))，及/或短消息服务(SMS)，或任何其它合适的通信协议，包括到本文献的申请日为止尚未开发出的通信协议。
音频电路110、扬声器111及麦克风113提供用户与装置100之间的音频接口。音频电路110从外围设备接口118接收音频数据，将所述音频数据转换为电信号，且将所述电信号传输到扬声器111。扬声器111将电信号转换为人可听的声波。音频电路110还接收由麦克风113从声波转换的电信号。音频电路110将电信号转换为音频数据且将音频数据传输到外围设备接口118以进行处理。可从存储器102检索音频数据且/或通过外围设备接口118将音频数据传输到存储器102及/或RF电路108。在一些实施例中，音频电路110还包括耳机插孔(例如，212，图2)。耳机插孔提供音频电路110与可移除音频输入/输出外围设备(例如，只有输出的头戴式耳机或具有输出(例如，用于一个或两个耳朵的头戴式耳机)及输入(例如，麦克风)两者的耳机)之间的接口。
I/O子系统106将装置100上的输入/输出外围设备(例如，触摸屏112及其它输入控制装置116)耦合到外围设备接口118。I/O子系统106可包括显示器控制器156及用于其它输入或控制装置的一个或一个以上输入控制器160。一个或一个以上输入控制器160从其它输入或控制装置116接收电信号/将电信号发送到其它输入或控制装置116。所述其它输入控制装置116可包括物理按钮(例如，按钮、摇杆按钮等)、拨号盘、滑块开关、操纵杆、点击转盘等。在一些替代实施例中，输入控制器160可耦合到以下各者中的任一者(或不耦合到以下各者)：键盘、红外端口、USB端口及例如鼠标等指针装置。所述一个或一个以上按钮(例如，208，图2)可包括用于扬声器111及/或麦克风113的音量控制的升高/降低按钮。所述一个或一个以上按钮可包括按钮(例如，206，图2)。对按钮的快速按压可解开对触摸屏112的锁定或开始在触摸屏上使用手势来将装置解锁的过程，如2005年12月23日申请的美国专利申请案11/322,549“通过在解锁图像上执行手势来将装置解锁(UnlockingaDevicebyPerformingGesturesonanUnlockImage)”中所描述，所述申请案在此以全文引用的方式并入。对按钮(例如，206)的更长时间的按压可使装置100通电或断电。用户可能够自定义所述按钮中的一者或一者以上的功能性。触摸屏112用于实施虚拟或软按钮及一个或一个以上软键盘。
触敏显示器112提供装置与用户之间的输入接口及输出接口。显示器控制器156从触摸屏112接收电信号及/或将电信号发送到触摸屏112。触摸屏112将视觉输出显示给用户。视觉输出可包括图形、文本、图标、视频及其任何组合(统称为“图形”)。在一些实施例中，所述视觉输出中的一些或全部可对应于用户接口对象。
触摸屏112具有触敏表面、基于触觉及/或触觉接触而从用户接受输入的传感器或传感器组。触摸屏112及显示器控制器156(以及存储器102中的任何相关联的模块及/或指令集)检测触摸屏112上的接触(及接触的任何移动或中断)，且将所检测的接触转换为与显示于触摸屏112上的用户接口对象(例如，一个或一个以上软键、图标、网页或图像)的交互。在一示范性实施例中，触摸屏112与用户之间的接触点对应于用户的手指。
触摸屏112可使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术，或LED(发光二极管)技术，但在其它实施例中可使用其它显示器技术。触摸屏112及显示器控制器156可使用现在已知或稍后开发的多个触摸感测技术中的任一者来检测接触及其任何移动或中断，所述技术包括(但不限于)电容性、电阻性、红外及表面声波技术，以及用于确定与触摸屏112的一个或一个以上接触点的其它接近度传感器阵列或其它元件。在一示范性实施例中，使用投影互电容感测技术，例如来自加利福尼亚州库比迪诺(Cupertino,California)的苹果公司的及iPod中出现的技术。
触摸屏112的一些实施例中的触敏显示器可类似于以下美国专利中所描述的多点触敏触摸板：6,323,846(维斯特曼等人)、6,570,557(维斯特曼等人)及/或6,677,932(维斯特曼)及/或美国专利公开案2002/0015024A1，其中的每一者在此以全文引用的方式并入。然而，触摸屏112显示来自便携式装置100的视觉输出，而触敏触摸板不提供视觉输出。
触摸屏112的一些实施例中的触敏显示器可如以下申请案中所描述：(1)2006年5月2日申请的第11/381,313号美国专利申请案“多点触摸表面控制器(MultipointTouchSurfaceController)”；(2)2004年5月6日申请的第10/840,862号美国专利申请案“多点触摸屏(MultipointTouchscreen)”；(3)2004年7月30日申请的第10/903,964号美国专利申请案“用于触敏输入装置的手势(GesturesForTouchSensitiveInputDevices)”；(4)2005年1月31日申请的第11/048,264号美国专利申请案“用于触敏输入装置的手势(GesturesForTouchSensitiveInputDevices)”；(5)2005年1月18日申请的第11/038,590号美国专利申请案“用于触敏输入装置的基于模式的图形用户接口(Mode-BasedGraphicalUserInterfacesForTouchSensitiveInputDevices)”；(6)2005年9月16日申请的第11/228,758号美国专利申请案“触摸屏用户接口上的虚拟输入装置放置(VirtualInputDevicePlacementOnATouchScreenUserInterface)”；(7)2005年9月16日申请的第11/228,700号美国专利申请案“具有触摸屏接口的计算机的操作(OperationOfAComputerWithATouchScreenInterface)”；(8)2005年9月16日申请的第11/228,737号美国专利申请案“激活触摸屏虚拟键盘的虚拟按键(ActivatingVirtualKeysOfATouch-ScreenVirtualKeyboard)”；以及(9)2006年3月3日申请的第11/367,749号美国专利申请案“多功能手持式装置(Multi-FunctionalHand-HeldDevice)”。这些申请案全部以全文引用的方式并入本文中。
触摸屏112可具有超过100dpi的分辨率。在一些实施例中，所述触摸屏具有约160dpi的分辨率。用户可使用任何合适的物体或附属物(例如，触控笔、手指等)来接触触摸屏112。在一些实施例中，用户接口经设计以主要用基于手指的接触及手势来工作，由于手指在触摸屏上的较大接触区域，这可能没有基于触控笔的输入精确。在一些实施例中，所述装置将粗糙的基于手指的输入翻译为精确的指针/光标位置或命令以用于执行用户所需的动作。
在一些实施例中，除了触摸屏之外，装置100可包括用于激活或去激活特定功能的触摸板(未图示)。在一些实施例中，触摸板是装置的触敏区域；不同于触摸屏，触摸板不显示视觉输出。触摸板可为与触摸屏112分开的触敏表面或由触摸屏形成的触敏表面的延伸部分。
在一些实施例中，装置100可包括物理或虚拟转盘(例如，点击转盘)以作为输入控制装置116。用户可通过旋转所述点击转盘或通过移动与点击转盘的接触点(例如，其中接触点的移动量是由其相对于点击转盘的中心点的角位移来测量)而在触摸屏112中所显示的一个或一个以上图形对象(例如，图标)中导航及与所述图形对象交互。所述点击转盘还可用于选择所显示图标中的一者或一者以上。举例来说，所述用户可压下所述点击转盘的至少一部分或相关联的按钮。由用户经由点击转盘提供的用户命令及导航命令可由输入控制器160以及存储器102中的模块及/或指令集中的一者或一者以上处理。对于虚拟点击转盘，所述点击转盘及点击转盘控制器可分别为触摸屏112及显示器控制器156的部分。对于虚拟点击转盘，所述点击转盘可为不透明或半透明对象，其响应于用户与所述装置的交互而在触摸屏显示器上出现及消失。在一些实施例中，虚拟点击转盘显示于便携式多功能装置的触摸屏上且通过用户与触摸屏的接触来操作。
装置100还包括用于向各种组件供电的电力系统162。电力系统162可包括电力管理系统、一个或一个以上电源(例如，电池、交变电流(AC))、再充电系统、电力故障检测电路、电力转换器或反相器、电力状态指示器(例如，发光二极管(LED))及与便携式装置中的电力的产生、管理及分布相关联的任何其它组件。
装置100还可包括一个或一个以上光学传感器164。图1A及1B展示耦合到I/O子系统106中的光学传感器控制器158的光学传感器。光学传感器164可包括电荷耦合装置(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。光学传感器164从环境接收光，经由一个或一个以上透镜投射，且将所述光转换为表示图像的数据。结合成像模块143(还称为相机模块)，光学传感器164可俘获静态图像或视频。在一些实施例中，光学传感器位于装置100的背部上，与装置的前部上的触摸屏显示器112相反，使得可将触摸屏显示器用作静态及/或视频图像获取的取景器。在一些实施例中，光学传感器位于装置的前部上，使得在用户在触摸屏显示器上查看其它视频会议参与者时可获得用户的用于视频会议的图像。在一些实施例中，光学传感器164的位置可由用户改变(例如，通过旋转装置外壳中的透镜及传感器)，以使得可使用单一光学传感器164以及触摸屏显示器来用于视频会议与静态及/或视频图像获取两者。
装置100还可包括一个或一个以上接近度传感器166。图1A及1B展示耦合到外围设备接口118的接近度传感器166。或者，接近度传感器166可耦合到I/O子系统106中的输入控制器160。接近度传感器166可如以下美国专利申请案中所描述而执行：第11/241,839号美国专利申请案，“手持式装置中的接近度检测器(ProximityDetectorInHandheldDevice)”；第11/240,788号美国专利申请案，“手持式装置中的接近度检测器(ProximityDetectorInHandheldDevice)”；第11/620,702号美国专利申请案，“使用环境光传感器来扩增接近度传感器输出(UsingAmbientLightSensorToAugmentProximitySensorOutput)”；第11/586,862号美国专利申请案，“对便携式装置中的用户活动的自动化响应及感测(AutomatedResponseToAndSensingOfUserActivityInPortableDevices)”；以及第11/638,251号美国专利申请案，“用于外围设备的自动配置的方法及系统(MethodsAndSystemsForAutomaticConfigurationOfPeripherals)”，其全文在此以引用的方式并入。在一些实施例中，接近度传感器在多功能装置被放置在用户耳朵附近时(例如，当用户正进行电话呼叫时)关闭并停用触摸屏112。
装置100还可包括一个或一个以上加速计168。图1A及1B展示耦合到外围设备接口118的加速计168。或者，加速计168可耦合到I/O子系统106中的输入控制器160。加速计168可如以下美国专利公开案中所描述而工作：第20050190059号美国专利公开案，“用于便携式电子装置的基于加速度的盗窃检测系统(Acceleration-basedTheftDetectionSystemforPortableElectronicDevices)”；以及第20060017692号美国专利公开案，“用于基于加速计来操作便携式装置的方法及设备(MethodsAndApparatusesForOperatingAPortableDeviceBasedOnAnAccelerometer)”，所述两个公开案以全文引用的方式并入本文中。在一些实施例中，基于对从一个或一个以上加速计接收的数据的分析而以纵向视图或横向视图在触摸屏显示器上显示信息。装置100任选地包括(除了加速计168之外)磁力计(未图示)及GPS(或格洛纳斯(GLONASS)或其它全球导航系统)接收器(未图示)，以用于获得关于装置100的位置及定向(例如，纵向或横向)的信息。
在一些实施例中，存储于存储器102中的软件组件包括操作系统126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块(或指令集)132、文本输入模块(或指令集)134、全球定位系统(GPS)模块(或指令集)135，及应用程序(或指令集)136。此外，在一些实施例中，存储器102存储装置/全局内部状态157，如图1A、1B及3中所示。装置/全局内部状态157包括以下各者中的一者或一者以上：活动应用程序状态，其指示哪些应用程序(如果有)当前是活动的；显示状态，其指示哪些应用程序、视图或其它信息占据触摸屏显示器112的各个区；传感器状态，其包括从装置的各种传感器及输入控制装置116获得的信息；以及位置信息，其涉及装置的位置及/或空间方位角(attitude)。
操作系统126(例如，Darwin、RTXC、LINUX、UNIX、OSX、WINDOWS或例如VxWorks等嵌入式操作系统)包括用于控制及管理一般系统任务(例如，存储器管理、存储装置控制、电力管理等)的各种软件组件及/或驱动器，且促进各种硬件与软件组件之间的通信。
通信模块128促进经由一个或一个以上外部端口124与其它装置的通信，且还包括用于处置由RF电路108及/或外部端口124接收的数据的各种软件组件。外部端口124(例如，通用串行总线(USB)、FIREWIRE等)适于直接耦合到其它装置或间接经由网络(例如，因特网、无线LAN等)耦合到其它装置。在一些实施例中，外部端口是多引脚(例如，30个引脚)的连接器，其与iPod(苹果公司的商标)装置上所使用的30引脚连接器相同或类似及/或兼容。
接触/运动模块130可检测与触摸屏112(结合显示器控制器156)及其它触敏装置(例如，触摸板或物理点击转盘)的接触。接触/运动模块130包括用于执行与接触的检测相关的各种操作的各种软件组件，所述操作例如为确定是否已发生接触(例如，检测手指向下事件)、确定是否存在接触的移动且跟踪跨越触敏表面的移动(例如，检测一个或一个以上手指拖动事件)，以及确定接触是否已停止(例如，检测手指向上事件或接触的中断)。接触/运动模块130从触敏表面接收接触数据。确定接触点的移动(其由一系列接触数据表示)可包括确定接触点的速率(量值)、速度(量值及方向)，及/或加速度(量值及/或方向上的改变)。可将这些操作应用于单一接触(例如，一根手指接触)或多个同时接触(例如，“多点触摸”/多根手指接触)。在一些实施例中，接触/运动模块130及显示器控制器156检测触摸板上的接触。在一些实施例中，接触/运动模块130及控制器160检测点击转盘上的接触。
接触/运动模块130可检测用户的手势输入。触敏表面上的不同手势具有不同接触模式。因此，可通过检测特定接触模式来检测手势。举例来说，检测手指点按手势包括检测手指向下事件，接着检测在与手指向下事件(例如，在图标的位置处)相同的位置(或大体上相同的位置)处的手指向上(提离)事件。作为另一实例，检测触敏表面上的手指轻扫手势包括检测手指向下事件，接着检测一个或一个以上手指拖动事件，且随后检测手指向上(提离)事件。
图形模块132包括用于在触摸屏112或其它显示器上再现及显示图形的各种已知软件组件，包括用于改变所显示的图形的亮度的组件。如本文中所使用，术语“图形”包括可向用户显示的任何对象，包括(不限于)文本、网页、图标(例如，包括软键的用户接口对象)、数字图像、视频、动画等。
在一些实施例中，图形模块132存储表示将使用的图形的数据。可向每一图形指派一对应的代码。图形模块132从应用程序等接收指定将显示的图形的一个或一个以上代码以及(在需要时)坐标数据及其它图形特性数据，且随后产生屏幕图像数据以输出到显示器控制器156。
可作为图形模块132的组件的文本输入模块134提供软键盘，以用于在各种应用程序(例如，联系人137、电子邮件140、IM141、浏览器147及需要文本输入的任何其它应用程序)中键入文本。
GPS模块135确定装置的位置且提供此信息以供在各种应用程序中使用(例如，提供给电话138以供在基于位置的拨号中使用，提供给相机143以作为图片/视频元数据，且提供给提供基于位置的服务的应用程序(例如，天气小窗口部件、本地黄页小窗口部件及地图/导航小窗口部件))。
应用程序136可包括以下模块(或指令集)，或其子集或超集：
·联系人模块137(有时称为地址簿或联系人列表)；
·电话模块138；
·视频会议模块139；
·电子邮件客户端模块140；
·即时消息接发(IM)模块141；
·锻炼支持模块；
·用于静态及/或视频图像的相机模块143；
·图像管理模块144；
·视频播放器模块145；
·音乐播放器模块146；
·浏览器模块147；
·日历模块148；
·小窗口部件模块149，其可包括天气小窗口部件、股票小窗口部件149-2、计算器小窗口部件149-3、闹钟小窗口部件149-4、字典小窗口部件149-5及用户所获得的其它小窗口部件，以及用户创建的小窗口部件149-6；
·用于形成用户创建的小窗口部件149-6的小窗口部件创建器模块；
·搜索模块151；
·视频及音乐播放器模块152，其合并视频播放器模块145及音乐播放器模块146；
·便笺模块153；
·地图模块154；
·在线视频模块155；及/或
·键盘配置模块160。
可存储于存储器102中的其它应用程序136的实例包括其它文字处理应用程序、其它图像编辑应用程序、绘图应用程序、呈现应用程序、具备JAVA功能的应用程序、加密、数字版权管理、语音辨识及语音复制。
结合触摸屏112、显示器控制器156、接触模块130、图形模块132及文本输入模块134，可将联系人模块137用于管理地址簿或联系人列表(例如，存储于存储器102或存储器370中的联系人模块137的应用程序内部状态192中)，包括：将姓名添加到地址簿；从地址簿删除姓名；使电话号码、电子邮件地址、物理地址或其它信息与姓名相关联；使图像与姓名相关联；将姓名分类及排序；提供电话号码或电子邮件地址以起始及/或促进通过电话138、视频会议139、电子邮件140或IM141进行的通信；等等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示器控制器156、接触模块130、图形模块132及文本输入模块134，电话模块138可用以键入对应于电话号码的字符序列，存取地址簿137中的一个或一个以上电话号码，修改已键入的电话号码，拨打相应电话号码，进行交谈，且在交谈完成时断开或挂断。如上文所提及，无线通信可使用多个通信标准、协议及技术中的任一者。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示器控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132、文本输入模块134、联系人列表137及电话模块138，视频会议模块139包括可执行指令以根据用户指令而起始、进行及终止用户与一个或一个以上其他参与者之间的视频会议。
结合RF电路108、触摸屏112、显示器控制器156、接触模块130、图形模块132及文本输入模块134，电子邮件客户端模块140包括可执行指令以响应于用户指令而建立、发送、接收及管理电子邮件。结合图像管理模块144，电子邮件客户端模块140使得极容易创建及发送具有使用相机模块143所拍摄的静态或视频图像的电子邮件。
结合RF电路108、触摸屏112、显示器控制器156、接触模块130、图形模块132及文本输入模块134，即时消息接发模块141包括可执行指令以键入对应于即时消息的字符序列，修改先前所键入的字符，传输相应即时消息(例如，针对基于电话的即时消息使用短消息服务(SMS)或多媒体消息服务(MMS)协议或针对基于网络网络的即时消息使用XMPP、SIMPLE或IMPS)，接收即时消息且查看所接收的即时消息。在一些实施例中，所传输及/或接收的即时消息可包括图形、照片、音频文件及/或如MMS及/或增强型消息接发服务(EMS)中所支持的其它附件。如本文中所使用，“即时消息接发”指代基于电话的消息(例如，使用SMS或MMS所发送的消息)与基于因特网的消息(例如，使用XMPP、SIMPLE或IMPS所发送的消息)两者。
结合RF电路108、触摸屏112、显示器控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154及音乐播放器模块146，锻炼支持模块142包括可执行指令以创建锻炼(例如，针对时间、距离及/或卡路里燃烧目标)；与锻炼传感器(运动装置)通信；接收锻炼传感器数据；校准用以监视锻炼的传感器；选择并播放用于锻炼的音乐；且显示、存储并传输锻炼数据。
结合触摸屏112、显示器控制器156、(多个)光学传感器164、光学传感器控制器158、接触模块130、图形模块132及图像管理模块144，相机模块143包括可执行指令以俘获静态图像或视频(包括视频串流)并将其存储于存储器102中，修改静态图像或视频的特性，或从存储器102删除静态图像或视频。
结合触摸屏112、显示器控制器156、接触模块130、图形模块132、文本输入模块134及相机模块143时，图像管理模块144包括可执行指令以布置、修改(例如，编辑)或以其它方式操控、标记、删除、呈现(例如，在数字幻灯片或相册中)及存储静态及/或视频图像。
结合触摸屏112、显示器控制器156、接触模块130、图形模块132、音频电路110及扬声器111，视频播放器模块145包括可执行指令以显示、呈现或以其它方式回放视频(例如，在触摸屏112上或在外部的经由外部端口124连接的显示器上)。
结合触摸屏112、显示器系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108及浏览器模块147，音乐播放器模块146包括可执行指令，所述可执行指令允许用户下载及回放以一个或一个以上文件格式存储的所记录的音乐及其它声音文件(例如，MP3或AAC文件)。在一些实施例中，装置100可包括MP3播放器(例如，iPod(苹果公司的商标))的功能性。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132及文本输入模块134，浏览器模块147包括可执行指令以根据用户指令浏览因特网，包括搜索、链接到、接收及显示网页或其部分，以及链接到网页的附件及其它文件。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132、文本输入模块134，电子邮件客户端模块140及浏览器模块147，日历模块148包括用以进行以下操作的可执行指令：根据用户指令而创建、显示、修改及存储日历及与日历相关联的数据(例如，日历条目、待办事项列表等)。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132、文本输入模块134及浏览器模块147，小窗口部件模块149是可由用户下载及使用的小型应用程序(例如，天气小窗口部件149-1、股票小窗口部件149-2、计算器小窗口部件149-3、闹钟小窗口部件149-4及字典小窗口部件149-5)或由用户创建的小型应用程序(例如，用户创建的小窗口部件149-6)。在一些实施例中，小窗口部件包括HTML(超文本标记语言)文件、CSS(层叠样式表)文件及JavaScript文件。在一些实施例中，小窗口部件包括XML(可扩展标记语言)文件及JavaScript文件(例如，Yahoo!小窗口部件)。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132、文本输入模块134及浏览器模块147，小窗口部件创建器模块150可由用户使用以创建小窗口部件(例如，将网页的用户指定的部分转变为小窗口部件)。
结合触摸屏112、显示器系统控制器156、接触模块130、图形模块132及文本输入模块134，搜索模块151包括用以进行以下操作的可执行指令：根据用户指令而在存储器102中搜索与一个或一个以上搜索准则(例如，一个或一个以上用户指定的搜索项)匹配的文本、音乐、声音、图像、视频及/或其它文件。
结合触摸屏112、显示器控制器156、接触模块130、图形模块132及文本输入模块134，便笺模块153包括用以进行以下操作的可执行指令：根据用户指令而创建及管理便笺、待办事项列表等。
结合RF电路108、触摸屏112、显示器系统控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135及浏览器模块147，地图模块154可用于根据用户指令而接收、显示、修改及存储地图以及与地图相关联的数据(例如，行驶方向；关于特定位置处或附近的商店及其它关注点的数据；以及其它基于位置的数据)。
结合触摸屏112、显示器系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140及浏览器模块147，在线视频模块155包括允许用户进行以下操作的指令：存取、浏览、接收(例如，通过串流传输及/或下载)、回放(例如，在触摸屏上或在外部的经由外部端口124连接的显示器上)、发送具有到特定在线视频的链接的电子邮件，以及以其它方式管理呈一种或一种以上文件格式(例如H.264)的在线视频。在一些实施例中，将即时消息接发模块141(而不是电子邮件客户端模块140)用于发送到特定在线视频的链接。在线视频应用的额外描述可在以下文献中找到：2007年6月20日申请的第60/936,562号美国临时专利申请案“用于播放在线视频的便携式多功能装置、方法及图形用户接口(PortableMultifunctionDevice,Method,andGraphicalUserInterfaceforPlayingOnlineVideos)”，及2007年12月31日申请的第11/968,067号美国专利申请案“用于播放在线视频的便携式多功能装置、方法及图形用户接口(PortableMultifunctionDevice,Method,andGraphicalUserInterfaceforPlayingOnlineVideos)”，所述申请案的内容在此以全文引用的方式并入。
如在图3的论述中进一步论述，键盘配置模块160根据与装置100相关联的硬件及软件源来确定键盘布局。
上文所识别的模块及应用程序中的每一者对应于用于执行上文所描述的一个或一个以上功能以及本申请案中所描述的方法(例如，计算机实施的方法及本文中所描述的其它信息处理方法)的可执行指令集。这些模块(即，指令集)无需实施为分离的软件程序、过程或模块，且因此，在各种实施例中，这些模块的各种子集可经组合或另外重新布置。举例来说，视频播放器模块145可与音乐播放器模块146组合为单一模块(例如，视频及音乐播放器模块152，图1B)。在一些实施例中，存储器102可存储上文所识别的模块及数据结构的子集。此外，存储器102可存储未在上文描述的额外模块及数据结构。
在一些实施例中，装置100为经由触摸屏112及/或物理键盘而执行装置上的预定义功能集合的操作的装置。举例来说，可经由屏幕上键盘或经由物理键盘而进行文本键入。通过将触摸屏及/或物理键盘用作装置100的操作的输入控制装置，用户具有关于输入方法的更多灵活性。
图1C是说明根据一些实施例的用于事件处置的示范性组件的框图。在一些实施例中，存储器102(图1A及1B中)或370(图3)包括事件分类器170(例如，在操作系统126中)及相应的应用程序136-1(例如，前述应用程序137到151、155、380到390中的任一者)。
事件分类器170接收事件信息且确定将所述事件信息递送到的应用程序136-1及应用程序136-1的应用程序视图191。事件分类器170包括事件监视器171及事件分派器模块174。在一些实施例中，应用程序136-1包括应用程序内部状态192，当所述应用程序是活动的或正执行时，应用程序内部状态192指示在触敏显示器112上所显示的当前应用程序视图。在一些实施例中，装置/全局内部状态157由事件分类器170用来确定哪一(些)应用程序当前是活动的，且应用程序内部状态192由事件分类器170用来确定将事件信息递送到的应用程序视图191。
在一些实施例中，应用程序内部状态192包括额外信息，例如以下各者中的一者或一者以上：在应用程序136-1重新开始执行时将使用的重新开始信息、指示正由应用程序136-1显示的信息或所述信息准备好由应用程序136-1显示的用户接口状态信息、使得用户能够回到应用程序136-1的先前状态或视图的状态队列，以及对由用户进行的先前动作的重做/撤消队列。
事件监视器171从外围设备接口118接收事件信息。事件信息包括关于子事件(例如，触敏显示器112上的作为多点触摸手势的部分的用户触摸)的信息。外围设备接口118传输其从I/O子系统106或传感器(例如，接近度传感器166、加速计168及/或麦克风113(经由音频电路110))接收的信息。外围设备接口118从I/O子系统106接收的信息包括来自触敏显示器112或触敏表面的信息。
在一些实施例中，事件监视器171以预定间隔将请求发送到外围设备接口118。作为响应，外围设备接口118传输事件信息。在其它实施例中，外围设备接口118仅在存在重大事件(例如，接收到高于预定噪声阈值的输入及/或在多于预定持续时间的时间内接收到输入)时才传输事件信息。
在一些实施例中，事件分类器170还包括命中视图确定模块172及/或活动事件辨识器确定模块173。
命中视图确定模块172在触敏显示器112显示一个以上视图时提供用于确定子事件已在一个或一个以上视图内的何处发生的软件过程。视图由用户可在显示器上看到的控件及其它元件组成。
与应用程序相关联的用户接口的另一方面是视图集合，在本文中有时称为应用程序视图或用户接口窗口，在其中显示信息且发生基于触摸的手势。在其中检测到触摸的(相应应用程序的)应用程序视图可对应于应用程序的编程或视图体系内的编程层级。举例来说，在其中检测到触摸的最低层级视图可称为命中视图，且可至少部分基于开始基于触摸的手势的初始触摸的命中视图来确定被辨识为合适输入的事件集合。
命中视图确定模块172接收与基于触摸的手势的子事件相关的信息。当应用程序具有按体系组织的多个视图时，命中视图确定模块172将命中视图识别为体系中的应处置子事件的最低视图。在大多数情形中，命中视图是其中发生起始子事件的最低层级视图(即，形成事件或潜在事件的子事件的序列中的第一子事件)。一旦由命中视图确定模块识别出命中视图，命中视图通常接收与其被识别为命中视图所关于的相同触摸或输入源相关的所有子事件。
活动事件辨识器确定模块173确定视图体系内的哪一或哪些视图应接收子事件的特定序列。在一些实施例中，活动事件辨识器确定模块173确定仅命中视图应接收子事件的特定序列。在其它实施例中，活动事件辨识器确定模块173确定包括子事件的物理位置的所有视图均是有效涉及的视图，且因此确定所有有效涉及的视图应接收子事件的特定序列。在其它实施例中，即使触摸子事件被完全限于与一个特定视图相关联的区域，体系中更高的视图将仍保持为有效涉及的视图。
事件分派器模块174将事件信息分派给事件辨识器(例如，事件辨识器180)。在包括活动事件辨识器确定模块173的实施例中，事件分派器模块174将事件信息递送到由活动事件辨识器确定模块173确定的事件辨识器。在一些实施例中，事件分派器模块174将事件信息存储于事件队列中，由相应的事件接收器模块182来检索所述事件信息。
在一些实施例中，操作系统126包括事件分类器170。或者，应用程序136-1包括事件分类器170。在又其它实施例中，事件分类器170是独立模块，或存储于存储器102中的另一模块的一部分，例如接触/运动模块130。
在一些实施例中，应用程序136-1包括多个事件处置器190及一个或一个以上应用程序视图191，事件处置器中的每一者包括用于处置在应用程序的用户接口的相应视图内发生的触摸事件的指令。应用程序136-1的每一应用程序视图191包括一个或一个以上事件辨识器180。通常，相应的应用程序视图191包括多个事件辨识器180。在其它实施例中，事件辨识器180中的一者或一者以上是单独模块(例如，用户接口套件(未图示))或应用程序136-1从其继承方法及其它特性的更高层级对象的部分。在一些实施例中，相应的事件处置器190包括以下各者中的一者或一者以上：数据更新器176、对象更新器177、GUI更新器178，及/或从事件分类器170接收的事件数据179。事件处置器190可利用或调用数据更新器176、对象更新器177或GUI更新器178以更新应用程序内部状态192。或者，应用程序视图191中的一者或一者以上包括一个或一个以上相应的事件处置器190。而且，在一些实施例中，一个或一个以上数据更新器176、对象更新器177及GUI更新器178包括于相应的应用程序视图191中。
相应的事件辨识器180从事件分类器170接收事件信息(例如，事件数据179)，且根据所述事件信息识别事件。事件辨识器180包括事件接收器182及事件比较器184。在一些实施例中，事件辨识器180还包括以下各者的至少一子集：元数据183及事件递送指令188(其可包括子事件递送指令)。
事件接收器182从事件分类器170接收事件信息。事件信息包括关于例如触摸或触摸移动的子事件的信息。取决于子事件，所述事件信息还包括额外信息，例如子事件的位置。当子事件涉及触摸的运动时，事件信息还可包括子事件的速率及方向。在一些实施例中，事件包括装置从一个定向旋转到另一定向(例如，从纵向定向到横向定向，或反之亦然)，且事件信息包括关于装置的当前定向(也称为装置空间方位角)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较，且基于所述比较而确定事件或子事件，或者确定或更新事件或子事件的状态。在一些实施例中，事件比较器184包括事件定义186。事件定义186含有事件的定义(例如，子事件的预定义的序列)，例如事件1(187-1)、事件2(187-2)，及其它。在一些实施例中，事件187中的子事件包括(例如)触摸开始、触摸结束、触摸移动、触摸取消及多点触摸。在一个实例中，事件1(187-1)的定义为所显示对象上的双击。所述双击(例如)包含在预定阶段内在所显示对象上的第一触摸(触摸开始)、在预定阶段内的第一提离(触摸结束)、在预定阶段内在所显示对象上的第二触摸(触摸开始)，以及在预定阶段内的第二提离(触摸结束)。在另一实例中，事件2(187-2)的定义为所显示对象上的拖动。所述拖动(例如)包含在预定阶段内在所显示对象上的触摸(或接触)、触摸的跨越触敏显示器112的移动，以及触摸的提离(触摸结束)。在一些实施例中，事件还包括用于一个或一个以上相关联的事件处置器190的信息。
在一些实施例中，事件定义187包括用于相应的用户接口对象的事件的定义。在一些实施例中，事件比较器184执行命中测试以确定哪一用户接口对象与子事件相关联。举例来说，在其中三个用户接口对象显示于触敏显示器112上的应用程序视图中，当在触敏显示器112上检测到触摸时，事件比较器184执行命中测试以确定三个用户接口对象中的哪一者与触摸(子事件)相关联。如果每一所显示的对象均与相应的事件处置器190相关联，则事件比较器使用命中测试的结果来确定应激活哪一事件处置器190。举例来说，事件比较器184选择与触发命中测试的子事件及对象相关联的事件处置器。
在一些实施例中，相应的事件187的定义还包括被延迟的动作，其延迟事件信息的递送，直到已确定子事件的序列是对应于还是不对应于事件辨识器的事件类型之后为止。
当相应的事件辨识器180确定子事件系列不与事件定义186中的事件中的任一者匹配时，相应的事件辨识器180进入事件不可能、事件失败，或事件结束状态，其后，其忽视所述基于触摸的手势的后续子事件。在此情况下，对于所述命中视图来说仍保持活动的其它事件辨识器(如果有的话)继续跟踪并处理正在进行中的基于触摸的手势的子事件。
在一些实施例中，相应的事件辨识器180包括元数据183，元数据183具有可配置特性、旗标及/或列表，所述可配置特性、旗标及/或列表指示事件递送系统应如何执行向有效涉及的事件辨识器的子事件递送。在一些实施例中，元数据183包括指示事件辨识器可如何彼此交互的可配置特性、旗标及/或列表。在一些实施例中，元数据183包括指示是否将子事件递送到视图或编程体系中的不同层级的可配置特性、旗标及/或列表。
在一些实施例中，当辨识出事件的一个或一个以上特定子事件时，相应的事件辨识器180激活与事件相关联的事件处置器190。在一些实施例中，相应的事件辨识器180将与所述事件相关联的事件信息递送到事件处置器190。激活事件处置器190不同于将子事件发送(及延期发送)到相应的命中视图。在一些实施例中，事件辨识器180引发与所辨识的事件相关联的旗标，且与所述旗标相关联的事件处置器190捕获所述旗标且执行预定义的过程。
在一些实施例中，事件递送指令188包括子事件递送指令，所述子事件递送指令递送关于子事件的事件信息而不激活事件处置器。而是，所述子事件递送指令将事件信息递送到与子事件系列相关联的事件处置器或递送到有效涉及的视图。与子事件系列或与有效涉及的视图相关联的事件处置器接收事件信息且执行预定过程。
在一些实施例中，数据更新器176创建且更新用于应用程序136-1中的数据。举例来说，数据更新器176更新用于联系人模块137中的电话号码，或存储用于视频播放器模块145中的视频文件。在一些实施例中，对象更新器177创建且更新用于应用程序136-1中的对象。举例来说，对象更新器176创建新的用户接口对象或更新用户接口对象的位置。GUI更新器178更新GUI。举例来说，GUI更新器178准备好显示信息且将其发送到图形模块132以供在触敏显示器上显示。
在一些实施例中，事件处置器190包括数据更新器176、对象更新器177及GUI更新器178，或具有对数据更新器176、对象更新器177及GUI更新器178的存取权。在一些实施例中，数据更新器176、对象更新器177及GUI更新器178包括于相应的应用程序136-1或应用程序视图191的单一模块中。在其它实施例中，其包括于两个或两个以上软件模块中。
应理解，关于对触敏显示器上的用户触摸的事件处置的前文论述还适用于用以通过输入装置操作多功能装置100的其它形式的用户输入，所述输入并非全部均在触摸屏上起始，例如，在有或没有单一或多个键盘按压或保持的情况下的协调的鼠标移动及鼠标按钮按压、触摸板上的用户移动点按、拖动、滚动等、触控笔输入、装置的移动、口头指令、检测到的眼睛移动、生物识别输入，及/或其任何组合，其可用作对应于定义将要辨识的事件的子事件的输入。
图2说明根据一些实施例的具有触摸屏112的便携式多功能装置100。触摸屏可显示用户接口(UI)200内的一个或一个以上图形。在此实施例以及下文所描述的其它实施例中，用户可通过(例如)用一根或一根以上手指202(在图中未按比例绘制)或一个或一个以上触控笔203(在图中未按比例绘制)来接触或触摸图形而选择图形中的一者或一者以上。在一些实施例中，当用户中断与一个或一个以上图形的接触时，发生对一个或一个以上图形的选择。在一些实施例中，所述接触可包括手势(例如，一个或一个以上点按、一个或一个以上轻扫(从左到右、从右到左、向上及/或向下))及/或已接触装置100的手指的滚转(从右到左、从左到右、向上及/或向下)。在一些实施例中，与图形的无意接触可不选择所述图形。举例来说，当对应于选择的手势是点按时，扫掠过应用程序图标的轻扫手势可不选择对应的应用程序。
装置100还可包括一个或一个以上物理按钮，例如“主页”或菜单按钮204。如先前所描述，菜单按钮204可用于导航到可在装置100上执行的应用程序集合中的任何应用程序136。或者，在一些实施例中，将菜单按钮实施为在触摸屏112上显示的GUI中的软键。
在一个实施例中，装置100包括触摸屏112、菜单按钮204、用于将装置通电/断电及锁定装置的按钮206、音量调节按钮208、订户身份模块(SIM)卡槽210、耳机插孔212及对接/充电外部端口124。按钮206可用于：通过压下按钮并使所述按钮保持于压下状态并持续预定义的时间间隔而对装置通电/断电；通过压下按钮并在预定义的时间间隔已逝去之前释放所述按钮而锁定装置；及/或将所述装置解锁或起始解锁过程。在替代性实施例中，装置100还可经由麦克风113接受口头输入以用于激活或去激活一些功能。
图2说明根据一些实施例的具有触摸屏112及硬件键盘250的便携式多功能装置100。在一些实施例中，所述触摸屏可显示来自硬件键盘250的输入。所述触摸屏可在用户接口(UI)200内显示一个或一个以上图形。在此实施例中以及下文所描述的其它实施例中，用户可通过(例如)使用一个或一个以上手指202(在所述图中未按比例绘制)或一个或一个以上触控笔203(在所述图中未按比例绘制)接触或触摸图形而选择所述图形中的一者或一者以上。在一些实施例中，当用户中断与一个或一个以上图形的接触时，发生对所述一个或一个以上图形的选择。在一些实施例中，所述接触可包括手势(例如，一个或一个以上点按、一个或一个以上轻扫(从左到右、从右到左、向上及/或向下))及/或已接触装置100的手指的滚转(从右到左、从左到右、向上及/或向下)。在一些实施例中，与图形的无意接触可不选择所述图形。举例来说，当对应于选择的手势是点按时，扫掠过应用程序图标的轻扫手势可不选择对应的应用程序。
装置100还可包括一个或一个以上物理按钮，例如“主页”或菜单按钮204。如先前所描述，菜单按钮204可用于导航到可在装置100上执行的应用程序集合中的任何应用程序136。或者，在一些实施例中，将菜单按钮实施为触摸屏112中的GUI中的软键。
在一个实施例中，装置100包括触摸屏112、菜单按钮204、用于将装置通电/断电及锁定装置的按钮206、音量调节按钮208、订户身份模块(SIM)卡槽210、耳机插孔212及对接/充电外部端口124。按钮206可用于：通过压下按钮并使所述按钮保持于压下状态并持续预定义的时间间隔而对装置通电/断电；通过压下按钮并在预定义的时间间隔已逝去之前释放所述按钮而锁定装置；及/或将所述装置解锁或起始解锁过程。在替代性实施例中，装置100还可经由麦克风113接受口头输入以用于激活或去激活一些功能。
硬件键盘250的按键可采用任何布局或语言，例如，QWERTY、AZERTY及Dvorak，包括针对不同国家的变体(例如，法国及比利时AZERTY键盘布局)。便携式多功能装置100经配置以接受来自硬件键盘250的对应于硬件键盘的布局及语言的输入。
图3是根据一些实施例的具有显示器及触敏表面的示范性多功能装置的框图。装置300无需是便携式的。在一些实施例中，装置300是膝上型计算机、桌上型计算机、平板计算机、多媒体播放器装置、导航装置、教育装置(例如，儿童的学习玩具)、游戏系统或控制装置(例如，家用或工业用控制器)。装置300通常包括一个或一个以上处理单元(CPU)310、一个或一个以上网络或其它通信接口360、存储器370，及用于将这些组件互连的一个或一个以上通信总线320。通信总线320可包括将系统组件互连并控制系统组件之间的通信的电路(有时称为芯片组)。装置300包括输入/输出(I/O)接口330，I/O接口330包含显示器340，显示器340通常为触摸屏显示器。I/O接口330还可包括键盘250、鼠标(或其它指向装置)350及触摸板355。键盘经由有线或无线连接(例如，蓝牙)连接到装置300。有线连接可经由对接台而进行。存储器370包括高速随机存取存储器，例如DRAM、SRAM、DDRRAM或其它随机存取固态存储器装置；且可包括非易失性存储器，例如一个或一个以上磁盘存储装置、光盘存储装置、快闪存储器装置，或其它非易失性固态存储装置。存储器370可任选地包括与CPU310相距遥远的一个或一个以上存储装置。在一些实施例中，存储器370存储类似于便携式多功能装置100(图1)的存储器102中的程序、模块及数据结构的程序、模块及数据结构，或其子集。在一些实施例中，存储器370或存储器370的计算机可读存储媒体存储以下程序、模块及数据结构或其子集，包括：操作系统126、通信模块128、GPS模块135、文本输入模块134、视频播放器模块145、音乐播放器模块146、键盘配置模块160及配置数据库370。
操作系统126包括用于处置各种基本系统服务且用于执行硬件相依任务的过程。
通信模块128促进经由一个或一个以上通信网络接口360(有线或无线的)及一个或一个以上通信网络(例如，因特网、其它广域网、局域网、城域网、蜂窝式网络等)的与其它装置的通信。在一些实施例中，通信模块128包括运营商配置文件(carrierbundle)数据129。在一些实施例中，运营商配置文件数据由通信模块128经由与蜂窝式网络通信而获得。在一些实施例中，从网络接口135获得运营商配置文件数据129。运营商配置文件数据包括移动国家码192、移动网络码193及接入点名称194，在图5的论述中进一步详细论述移动国家码192、移动网络码193及接入点名称194。
GPS模块135确定装置的位置，且提供此信息以供用于各种应用程序中。GPS模块135包括GPS数据175。GPS数据包括装置300的位置。
文本输入模块134提供软键盘或屏幕上键盘以用于将文本键入到各种应用程序(例如，联系人137、电子邮件140、IM141、浏览器147，及需要文本输入的任何其它应用程序)中。
视频播放器模块145播放视频文件。视频播放器模块145包括装置300的用户的语言及位置数据176。用户的语言及位置信息可能在视频播放器模块145的偏好中或在与模块145相关联的用户账户中。在一些实施例中，用户键入语言及位置数据176。
音乐播放器模块146播放音乐文件。音乐播放器模块146包括与装置300的用户相关联的语言及位置数据177。用户的语言及位置信息可能在音乐播放器模块146的偏好中或在与模块146相关联的用户账户中。在一些实施例中，用户键入语言及位置数据177。
键盘配置模块160确定键盘布局。在一些实施例中，键盘配置模块160包括从与装置300相关联的硬件及软件源所获得的语言及位置数据161。键盘配置模块160基于源的可靠性而排定一个或一个以上源的优先次序。来自最高评级或最可靠源的语言及位置数据用以确定键盘布局。在一些实施例中，键盘配置模块160使用存储于配置数据库370中的配置映射372以确定键盘布局。配置映射372将语言及位置信息映射成键盘布局。举例来说，映射374-1可将语言英语及位置美国映射成QWERTY键盘布局。
在一些实施例中，键盘配置模块160配置装置300以根据所确定的布局而解译来自硬件键盘250的信号。在一些实施例中，配置模块160从配置数据库370检索硬件键盘布局配置372，且使用所述配置372以配置硬件键盘250。
在一些实施例中，键盘配置模块160根据所确定的布局来配置屏幕上键盘的布局。在一些实施例中，配置模块160从配置数据库370检索屏幕上键盘布局配置376，且使用所述配置以配置屏幕上键盘的布局。
配置数据库370存储配置映射372、屏幕上键盘布局配置376及硬件键盘布局配置197。配置映射372包括语言及位置信息到键盘布局的所有可能映射。举例来说，映射374-1可将语言英语及位置美国映射成QWERTY键盘布局。在另一实例中，映射可将语言法语及位置加拿大映射成加拿大多语言标准或加拿大法语键盘布局。应注意，配置数据库370、配置映射372、屏幕上键盘布局配置376及硬件键盘布局配置380可存储于位于装置300远端的服务器上。
屏幕上键盘布局配置376包括针对屏幕上键盘的键盘布局配置196。键盘布局配置196对应于任何语言及布局。举例来说，配置378-1可对应于QWERTY键盘布局。在一些实施例中，屏幕上键盘布局配置376包括默认布局配置。在一些实施例中，屏幕上键盘布局配置376包括用户创建的布局。在一些实施例中，配置376包括指示相应配置是已由用户选择、从语言及位置信息推断出还是为默认布局的旗标。
硬件键盘布局配置380包括所有可能的硬件键盘布局配置380。硬件键盘布局配置380对应于任何语言及布局。举例来说，配置382-2可对应于AZERTY键盘布局。在一些实施例中，硬件键盘布局配置380包括默认布局。在一些实施例中，硬件键盘布局配置380包括用户创建的布局。在一些实施例中，配置382包括指示相应配置382是已由用户选择、从语言及位置信息推断出还是为默认布局的旗标。
图3中的上文所识别的元件中的每一者可存储于先前所提及的存储器装置中的一者或一者以上中。上文所识别的模块中的每一者对应于用于执行上文所描述的功能的指令集。上文所识别的模块或程序(即，指令集)无需实施为单独软件程序、过程或模块，且因此在各种实施例中可组合或以其它方式重新布置这些模块的各种子集。在一些实施例中，存储器370可存储上文所识别的模块及数据结构的子集。此外，存储器370可存储上文未描述的额外模块及数据结构。
现在将注意力导向可在便携式多功能装置100上实施的用户接口(“UI”)的实施例。
图4A及4B说明根据一些实施例的便携式多功能装置100上的应用程序的菜单的示范性用户接口及硬件键盘250。类似用户接口可实施于装置300上。在一些实施例中，用户接口400A包括以下元件，或其子集或超集：
·用于例如蜂窝式及Wi-Fi信号等无线通信的信号强度指示器402；
·时间404；
·蓝牙指示器405；
·电池状态指示器406；
·具有频繁使用的应用程序的图标的任务栏(tray)408，例如：
o电话138，其可包括未接电话或语音邮件消息的数目的指示器414；
o电子邮件客户端140，其可包括未读电子邮件的数目的指示器410；
o浏览器147；以及
o音乐播放器146；以及
·用于其它应用程序的图标，例如：
oIM141；
o图像管理144；
o相机143；
o视频播放器145；
o天气149-1；
o股票149-2；
o锻炼支持142；
o日历148；
o计算器149-3；
o闹钟149-4；
o字典149-5；以及
o用户创建的小窗口部件149-6。
在一些实施例中，用户接口400B包括以下元件，或其子集或超集：
·402、404、405、406、141、148、144、143、149-3、149-2、149-1、149-4、410、414、138、140及147，如上文所描述；
·地图154；
·便笺153；
·设定412，其提供对装置100及其各种应用程序136的设定的存取，如下文进一步所描述；
·视频及音乐播放器模块152，也称作iPod(苹果公司的商标)模块152；以及
·在线视频模块155，也称作YouTube(谷歌公司的商标)模块155。
图4C说明具有与显示器450(例如，触摸屏显示器112)分开的触敏表面451(例如，平板或触摸板355，图3)的装置(例如，装置300，图3)上的示范性用户接口。虽然将参考触摸屏显示器112(其中触敏表面及显示器经组合)上的输入来给出以下许多实例，但在一些实施例中，所述装置检测与显示器分开的触敏表面上的输入，如图4C中所示。在一些实施例中，触敏表面(例如，图4C中的451)具有对应于显示器(例如，450)上的主轴线(例如，图4C中的453)的主轴线(例如，图4C中的452)。根据这些实施例，所述装置在对应于显示器上的相应位置的位置(例如，在图4C中，460对应于468且462对应于470)处检测与触敏表面451的接触(例如，图4C中的460及462)。以此方式，当触敏表面与显示器分开时，触敏表面(例如，图4C中的451)上的由装置检测到的用户输入(例如，接触460及462)由所述装置用以操纵多功能装置的显示器(例如，图4C中的450)上的用户接口。应理解，类似方法可用于本文中所描述的其它用户接口。
现在将注意力导向图5，其说明根据一些实施例的便携式多功能装置100(具有任选的屏幕上键盘506)以及语言及位置信息源的框图。语言信息指代书面语或口语，例如，英语、德语或法语。位置指代地理位置且包括城市、州、地区及国家。取决于所述源，位置信息可针对装置，针对与装置相关联的用户，或针对装置的预期位置。语言及位置信息源包括位于便携式多功能装置远端的软件510、运营商配置文件512、GPS135、软件516及硬件键盘250。如下文更详细描述，根据来自所述源中的一者或一者以上的语言及位置信息来确定键盘布局。
从硬件键盘250所获得的信息可被视为最可靠的以用于确定硬件键盘250的布局，这是因为所述信息提供用户的所偏好键盘布局的最强指示。举例来说，如果用户使用QWERTY键盘，则可推断出，用户偏好用英语输入文本，且偏好QWERTY键盘布局。在一些实施例中，硬件键盘250包括键盘布局信息504。键盘布局信息504包括按键的语言及物理布局。换言之，键盘布局信息504包括键盘的视觉外观及每一按键的功能含义。举例来说，键盘布局信息504可规定硬件键盘250为英语QWERTY键盘。在一些实施例中，硬件键盘250仅包括语言及/或位置信息502。举例来说，语言可为法语，且位置可为加拿大。许多硬件键盘并不提供完整配置信息，因此在许多情形下，有必要关于用以确定键盘布局的装置位置及语言来向其它硬件及软件信息源进行咨询。
在一些实施例中，从一个或一个以上软件模块516及510获得与便携式多功能装置100的用户相关联的语言信息及位置信息502。所述软件模块提供关于用户的位置及所偏好语言的线索。在一些实施例中，一个或一个以上软件模块516位于便携式多功能装置100上。在一些实施例中，一个或一个以上软件模块510位于远离便携式多功能装置100处。在一些实施例中，软件516包括例如iTunes518等媒体播放器软件。从用户在与软件模块516及510相关联的偏好、设定、选项、账户及设定档中键入的信息获得语言及位置信息。举例来说，可从位于远离便携式多功能装置100处的服务器上的用户的iTunes设定档/账户获得用户的位置及语言信息。
在一些实施例中，从便携式多功能装置100的运营商配置文件512获得或导出与便携式多功能装置100的用户相关联的语言及位置信息502。运营商配置文件512包括便携式多功能装置100与蜂窝式电话网络的连接的设定及信息。在一些实施例中，运营商配置文件512包括移动国家码513、移动网络码514及接入点名称515。接入点名称515识别便携式多功能装置100所连接到的包数据网络。包数据网络负责提供到移动装置的数据连接性。在一些实施例中，从接入点名称515或通过经由接入点名称515接入一个或一个以上资源而导出语言及位置信息502。在一些实施例中，从移动国家码513导出语言及位置信息502。举例来说，移动国家码“466”对应于台湾。在一些实施例中，与移动国家码结合的移动网络码514识别移动电话操作商/运营商。举例来说，与移动网络码“01”结合的移动国家码“505”标识澳大利亚的运营商Telstra。
在一些实施例中，从GPS模块135获得用户或便携式多功能装置100的语言及位置信息502。
图6A到6D说明根据一些实施例的显示于便携式多功能装置100上的硬件键盘输入。
图6A说明经错误配置而用于解译来自QWERTY键盘610的输入的便携式多功能装置602。便携式多功能装置100经配置以接受来自Dvorak键盘的输入，而硬件键盘610具有QWERTY布局。结果，显示于显示装置112上的输出630“h>nnr”与对应于“hello”的用户QWERTY键盘输入序列(即，620、622、623、623及624)匹配。
图6B说明经适当配置以用于解译来自QWERTY键盘610的输入的便携式多功能装置604。如图6B中所展示，显示于显示装置112上的输出631与对应于“hello”的QWERTY键盘输入序列(即，620、622、623、623及624)匹配。
图6C说明经配置以解译来自希腊语键盘611的输入的便携式多功能装置606。如图6C中所展示，显示于显示装置112上的文本输出632对应于希腊语键盘611上的按下的按键625。
图6D说明经配置以显示在视觉上对应于QWERTY键盘的屏幕上键盘114的便携式多功能装置606。在一些实施例中，装置606经配置以接受来自屏幕上键盘114及硬件键盘610两者的输入。在一些实施例中，装置606经配置以仅接受来自屏幕上键盘114或硬件键盘610的输入。在一些实施例中，当在QWERTY键盘610上已按下对应按键时，屏幕上键盘高亮或提供屏幕上按键已被按下的视觉指示。
图7A及7B为说明根据一些实施例的自动确定键盘语言及布局的方法700的流程图。在具有显示器及触敏表面的多功能装置(例如，图3的装置300，或图1的便携式多功能装置100)处执行所述方法700。在一些实施例中，显示器为触摸屏显示器，且触敏表面在显示器上。在一些实施例中，显示器与触敏表面分离。可组合方法700中的一些操作，及/或可改变一些操作的次序。
在一些实施例中，从存储于装置上或与装置相关联的次要源推断硬件键盘的键盘布局，所述次要源例如为以下各者中的一者或一者以上：用于与装置相关联的移动通信服务的运营商配置文件、数字媒体预订信息(例如，可从iTunes(R)软件获得)、来自GPS装置的位置信息，及关于屏幕上键盘的配置数据。当装置的用户希望使用具有不提供相关联键盘语言及布局信息的硬件键盘的装置时，此途径为有用的。在此情形下，在无用户介入的情况下，装置自动实施一个或一个以上方法以基于装置上可获得的与信息很可能由用户键入所用的语言有关及装置当前使用位置有关的信息而推断键盘的适当语言及布局(例如，QWERY、AZERTY或Dvorak)，且基于所推断的信息配置装置及键盘以一起工作，而非要求用户回答若干键盘配置问题。在一些实施例中，排定这些次要源的优先次序，以使得首先使用来自较可靠源的信息来推断键盘的配置。在一些实施例中，屏幕上键盘经配置以与硬件键盘的推断出的语言及布局匹配。
现在将注意力导向图7A，其说明根据一些实施例的自动确定键盘语言及布局的方法700。在一些实施例中，从与电子装置相关联的一个或一个以上硬件及软件信息源获得语言信息及位置信息中的至少一者(702)。如本文中所使用，硬件及软件信息源也将被称作“次要源”。所述一个或一个以上硬件及软件源位于电子装置上或可经由有线或无线连接而由电子装置存取。可从所获得的语言及位置信息导出键盘布局及键盘语言。所述一个或一个以上硬件及软件信息源包括运营商配置文件、硬件键盘、一个或一个以上软件模块、移动通信能力及GPS服务中的一者或一者以上(704)。所述一个或一个以上软件模块包括媒体播放器软件及个人信息管理软件(706)。在一些实施例中，一个或一个以上软件模块位于电子装置的远端(707)。语言信息指代书面语或口语，例如，英语、德语或法语。位置信息包括国家、地区、州及城市信息中的至少一者(708)。在一些实施例中，周期性地获得语言信息及位置信息。在一些实施例中，响应于硬件键盘连接到电子装置而获得语言信息及位置信息。在一些实施例中，响应于对需要文本输入的输入字段的用户选择而获得语言信息及位置信息。在一些实施例中，通过键盘配置模块160收集语言及位置信息。
基于硬件及软件源或次要源的可靠性而排定硬件及软件源或次要源的优先次序/对硬件及软件源或次要源评级。应注意，本申请案中描述的信息源的优先级/评级为示范性的，且可基于装置的特性及装置的可获得的或与装置相关联的定位信息而变化。还应注意，在一些实施例中，所使用的次要源可包括所描述源的子集或超集。
在一些实施例中，基于硬件及软件信息源的相关联语言及位置信息的可靠性而排定硬件及软件信息源的优先次序(710)。排定优先次序包括在硬件键盘提供语言及位置信息中的至少一者时将最高优先级指派给相应所提供的语言及位置信息(712)。硬件键盘提供硬件键盘的布局的最强指示。许多硬件键盘提供与硬件键盘的布局有关的一些信息。在一些实施例中，硬件键盘提供配置装置以正确地接受来自硬件键盘的输入所必需的全键盘布局信息。键盘布局信息包括关于硬件键盘上的按键的语言及布局的用以配置装置以接受来自硬件键盘的输入的信息。换言之，键盘布局信息包括关于键盘上的按键的放置及对应于键盘的按键上所出现的视觉标记的语言的信息。举例来说，语言信息可指定按键上的标记为英语、日语或希腊语。在一些实施例中，如果硬件键盘提供键盘布局信息，则并不从其它硬件及软件源获得语言及位置信息。在一些实施例中，硬件键盘提供语言及/或位置信息，而非键盘布局信息。位置信息提供键盘的预期位置。举例来说，硬件键盘可指定，所述键盘既定用于某国家。
排定优先次序还包括在电子装置包括提供与所述装置的用户相关联的语言及位置信息中的至少一者的软件模块时将第二高优先级指派给相应所提供的语言及位置信息(712)。从软件模块所获得的语言及位置信息可被视为第二可靠的，这是因为其是由用户键入。在一些实施例中，所述信息提供关于用户认为硬件键盘的布局为何的指示。在一些实施例中，所述信息提供由用户使用的语言及用户的位置，可根据所述语言及位置来确定或推断键盘布局。在一些实施例中，可从电子装置上的一个或一个以上软件模块获得语言及位置信息。举例来说，可从电子装置上的偏好、选项及设定档获得语言及位置。在一些实施例中，从位于电子装置远端的一个或一个以上软件模块获得语言及位置信息。举例来说，可从位于电子装置远端的服务器上的用户的iTunes设定档获得用户的相关联语言及位置信息。在一些实施例中，语言信息指定相应软件模块的语言。在一些实施例中，位置信息指定用户的位置。在一些实施例中，与其它软件模块相比，可向一些软件模块指派较高优先级。举例来说，与用户的天气小窗口部件相比，可向用户的iTunes设定档指派较高优先级。
排定优先次序进一步包括将第三高优先级指派给从运营商配置文件所获得的语言信息及位置信息(712)。由运营商所提供的语言及位置信息提供用户的位置的强指示。与来自硬件键盘或软件模块的信息相比，此信息被视为较不可靠的，这是因为用户的物理位置未必映射成键盘布局。举例来说，用户可能正在行进。在一些实施例中，运营商配置文件包括移动国家码、移动网络码，及接入点名称。接入点名称标识移动装置连接到的包数据网络。包数据网络负责提供到移动装置的数据连接性。在一些实施例中，从接入点名称或通过经由接入点名称存取一个或一个以上资源而导出语言及位置信息502。举例来说，可将一个或一个以上指令发送到接入点名称以获取IP地址、移动国家码及移动网络码。在一些实施例中，从移动国家码导出语言及位置信息。举例来说，移动国家码“466”对应于台湾。在一些实施例中，与移动国家码结合的移动网络码标识移动电话操作商/运营商。举例来说，与移动网络码“01”结合的移动国家码“505”标识澳大利亚的运营商Telstra。
此外，排定优先次序包括在电子装置包括GPS服务时将第四高优先级指派给从GPS能力所获得的语言信息及位置信息(712)。如上文所论述，与从硬件键盘及软件模块所获得的信息相比，用户物理位置为较不可靠的。在一些实施例中，通过键盘配置模块160排定次要源的优先次序。
基于从具有最高相对优先级的信息源所获得的语言信息及位置信息而确定硬件键盘的键盘语言及键盘布局(714)。所确定的键盘布局包括所确定的键盘语言中的字符到硬件键盘的按键的指派，及选自QWERTY、AZERTY及Dvorak格式的格式(716)。如果硬件键盘提供键盘布局信息，则所确定的键盘语言及键盘布局对应于由硬件键盘所提供的键盘布局信息。当仅可获得语言及/或位置信息时，将语言及/或位置信息映射成键盘语言及布局。换言之，在使用所获得的语言及/或位置信息的情况下，可确定或推测键盘语言及布局。举例来说，如果所获得的语言信息为英语且所获得的位置为美国，则键盘布局最有可能为QWERTY。在另一实例中，如果所获得的语言为法语且位置为法国，则键盘布局最有可能为AZERTY。在又一实例中，如果所获得的语言为法语且所获得的位置为加拿大，则键盘布局可为加拿大多语言标准或加拿大法语。在一些实施例中，仅根据位置信息确定键盘语言及布局。在一些实施例中，仅根据所获得的语言信息确定键盘语言及布局。在一些实施例中，通过键盘配置模块160确定键盘布局。
配置电子装置以基于所确定的键盘语言及键盘布局而解译来自硬件键盘的按键输入信号(718)。在配置之后，当用户按下硬件键盘上的按键时，屏幕上输入应展示对应于用户的选择的符号。举例来说，如图6B中所展示，所显示的输入631对应于按键按下的序列(即，620、622、623及624)。自动地且在无任何用户动作的情况下配置电子装置。在一些实施例中，在不需要用户确认配置的情况下配置键盘(720)。在一些实施例中，响应于硬件键盘连接到电子装置的指示而配置电子装置。在一些实施例中，键盘配置模块160配置装置。
在一些实施例中，配置呈现于显示器上的屏幕上键盘以在视觉上对应于所确定的键盘语言及所确定的键盘布局(722)。如图6D中所展示，屏幕上键盘114可对应于硬件键盘610的布局。在一些实施例中，装置经配置以接受来自屏幕上键盘或硬件键盘的输入。在一些实施例中，屏幕上键盘为停用的，而硬件键盘为活动的，或硬件键盘为停用的，而屏幕上键盘为活动的。
在一些实施例中，所确定的键盘布局为用户的所偏好键盘布局。甚至在不存在硬件键盘时，也使用类似方法来确定屏幕上键盘的语言及布局。如果硬件键盘连接到装置，则所述硬件键盘提供用户的所偏好屏幕上键盘布局的最可靠来源。可推断出，如果用户选择使用特定硬件键盘，则所述用户具有关于键盘布局的对应于所选择的硬件键盘的偏好。
在一些实施例中，将用以查看一个或一个以上键盘配置的选项呈现给用户(724)。举例来说，用户可能能够选择QWERTY、AZERTY或Dvorak键盘的图形键盘表示。用户还可指定位置及/或语言信息，且可将一个或一个以上匹配键盘布局呈现给用户。检测与触敏显示器的对应于相应键盘配置的接触，且响应于所检测的接触而配置电子装置以基于相应键盘配置而解译来自硬件键盘的按键输入信号(724)。
根据一些实施例，图8展示根据如上文所描述的本发明的原理而配置的电子装置800的功能框图。所述装置的功能块可由硬件、软件或硬件与软件的组合来实施以实行本发明的原理。所属领域的技术人员应理解，可组合图8中所描述的功能块或将其分离成子块来实施如上文所描述的本发明的原理。因此，本文中的描述可支持本文中所描述的功能块的任何可能的组合或分离或其它定义。
如图8中所展示，电子装置800包括处理单元804及耦合到所述处理单元804的显示单元802。在一些实施例中，处理单元804包括获得单元806、排定优先次序单元808、确定单元810、配置单元812、呈现单元814，及检测单元816。
在一些实施例中，处理单元804经配置以进行以下操作：从与电子装置800相关联的一个或一个以上硬件及软件信息源获得语言信息及位置信息中的至少一者(例如，通过获得单元806)；基于硬件及软件信息源的相关联语言及位置信息的可靠性而排定硬件及软件信息源的优先次序(例如，通过排定优先次序单元808)；基于从具有最高相对优先级的信息源所获得的语言信息及位置信息而确定硬件键盘900的键盘语言及键盘布局(例如，通过确定单元810)；及配置电子装置800以基于所确定的键盘语言及键盘布局而解译来自硬件键盘900的按键输入信号(例如，通过配置单元812)。显示单元802经配置以显示与经解译的按键输入信号相关联的信息。
在一些实施例中，显示单元802为触敏显示器，且处理单元804经进一步配置以配置呈现于显示单元802上的屏幕上键盘以在视觉上对应于所确定的键盘语言及所确定的键盘布局(例如，通过配置单元812)。
在一些实施例中，所述一个或一个以上硬件及软件信息源包括运营商配置文件、硬件键盘900、一个或一个以上软件模块、移动通信能力及GPS服务中的一者或一者以上。
在一些实施例中，位置信息包括国家、地区、州及城市信息中的至少一者。
在一些实施例中，所确定的键盘布局包括所确定的键盘语言中的字符到硬件键盘900的按键的指派，及选自QWERTY、AZERTY及Dvorak格式的格式。
在一些实施例中，排定优先次序包括：在硬件键盘900提供语言及位置信息中的至少一者时，将最高优先级指派给相应所提供的语言及位置信息；在电子装置800包括提供与所述装置的用户相关联的语言及位置信息中的至少一者的软件模块时，将第二高优先级指派给相应所提供的语言及位置信息；在电子装置800包括运营商配置文件时，将第三高优先级指派给从所述运营商配置文件所获得的语言信息及位置信息；及在电子装置800包括GPS服务时，将第四高优先级指派给从GPS能力所获得的语言信息及位置信息。
在一些实施例中，一个或一个以上软件模块位于电子装置800的远端。
在一些实施例中，一个或一个以上软件模块包括媒体播放器软件及个人信息管理软件。
在一些实施例中，处理单元804经进一步配置以进行以下操作：将用以查看一个或一个以上键盘配置的选项呈现给用户(例如，通过呈现单元814)；检测与触敏显示器的对应于相应键盘配置的接触(例如，通过检测单元816)；及响应于所述所检测的接触，配置电子装置800以基于相应键盘配置而解译来自硬件键盘900的按键输入信号(例如，通过配置单元812)。
在一些实施例中，在不需要用户确认配置的情况下配置硬件键盘900。
在一些实施例中，在无用户介入的情况下配置硬件键盘900。
在一些实施例中，处理单元804经配置以进行以下操作：从与电子装置800相关联的一个或一个以上信息源获得语言信息及位置信息中的至少一者(例如，通过获得单元806)；基于信息源的相关联语言及位置信息的可靠性而排定信息源的优先次序(例如，通过排定优先次序单元808)；基于从具有最高相对优先级的信息源所获得的语言信息及位置信息而确定键盘的键盘语言及键盘布局(例如，通过确定单元810)；及配置电子装置800以基于所确定的键盘语言及键盘布局而解译来自键盘的输入信号(例如，通过配置单元812)。显示单元802经配置以显示与经解译的按键输入信号相关联的信息。
在一些实施例中，显示单元802为触敏显示器，且键盘为屏幕上键盘。
在一些实施例中，键盘为硬件键盘900。
上文所描述的信息处理方法中的步骤可通过运行信息处理设备中的一个或一个以上功能模块(例如，通用处理器或专用芯片)来实施。这些模块、这些模块的组合及/或其与一般硬件的组合(例如，如上文关于图1A、1B及3所描述)均包括于本发明的保护范围内。
出于阐释的目的，已参考特定实施例描述了前述描述。然而，以上说明性论述无意为详尽的或将本发明限于所揭示的精确形式。鉴于以上教示，许多修改及变化均是可能的。所述实施例经挑选及描述以便最佳地阐释本发明的原理及其实际应用，进而使得所属领域的技术人员能够最佳地利用本发明及具有适合于所预期的特定用途的各种修改的各种实施例。

Claims (24)

1.一种电子装置，其包含：
处理单元，其经配置以进行以下操作：
从与所述电子装置相关联的多个硬件及软件信息源获得语言信息及位置信息中的至少一者，其中所述多个硬件及软件信息源包括运营商配置文件、单一硬件键盘、位于所述电子装置的远端的一个或一个以上软件模块、移动通信能力及GPS服务中的两者或两者以上；
基于所述硬件及软件信息源的相关联语言及位置信息的可靠性而排定所述硬件及软件信息源的优先次序；
基于从具有最高相对优先级的所述信息源所获得的所述语言信息及位置信息而确定单一硬件键盘的键盘语言及键盘布局；及
配置所述电子装置以基于所述所确定的键盘语言及键盘布局而解译来自所述单一硬件键盘的按键输入信号；及
显示单元，其耦合到所述处理单元且经配置以显示与所述所解译的按键输入信号相关联的信息。
2.根据权利要求1所述的装置，其中所述显示单元为触敏显示器，所述处理单元经进一步配置以配置呈现于所述显示单元上的屏幕上键盘以在视觉上对应于所述所确定的键盘语言及所述所确定的键盘布局。
3.根据权利要求1所述的装置，其中所述所确定的键盘布局包括：所述所确定的键盘语言中的字符到所述单一硬件键盘的按键的指派；及选自QWERTY、AZERTY及Dvorak格式的一格式。
4.根据权利要求1所述的装置，其中所述排定优先次序包括：
在所述单一硬件键盘提供语言及位置信息中的至少一者时，将最高优先级指派给所提供的相应的所述语言及位置信息；
在所述电子装置包括提供与所述装置的用户相关联的语言及位置信息中的至少一者的软件模块时，将第二高优先级指派给所提供的相应的所述语言及位置信息；
在所述电子装置包括所述运营商配置文件时，将第三高优先级指派给从所述运营商配置文件所获得的所述语言信息及位置信息；及
在所述电子装置包括GPS服务时，将第四高优先级指派给从GPS能力所获得的所述语言信息及位置信息。
5.根据权利要求1所述的装置，其中所述一个或一个以上软件模块包括媒体播放器软件及个人信息管理软件。
6.根据权利要求1所述的装置，其中所述处理单元经进一步配置以进行以下操作：
将用以查看一个或一个以上键盘配置的选项呈现给用户；
检测与触敏显示器的对应于相应键盘配置的接触；及
响应于所述所检测的接触，配置所述电子装置以基于所述相应键盘配置而解译来自所述单一硬件键盘的按键输入信号。
7.根据权利要求1所述的装置，其中所述单一硬件键盘是在不需要用户确认所述配置的情况下加以配置。
8.根据权利要求1所述的装置，其中所述单一硬件键盘是在无用户介入的情况下加以配置。
9.一种用于配置电子装置以解译来自硬件键盘的信号的方法，其包含：
从与电子装置相关联的多个硬件及软件信息源获得语言信息及位置信息中的至少一者，所述电子装置包括一个或一个以上处理器、存储器、单一硬件键盘以及显示器，其中所述多个硬件及软件信息源包括运营商配置文件、所述单一硬件键盘、位于所述电子装置的远端的一个或一个以上软件模块、移动通信能力及GPS服务中的两者或两者以上；
基于所述硬件及软件信息源的相关联语言及位置信息的可靠性而排定所述硬件及软件信息源的优先次序；
基于从具有最高相对优先级的所述信息源所获得的所述语言信息及位置信息而确定所述单一硬件键盘的键盘语言及键盘布局；及
配置所述电子装置以基于所述所确定的键盘语言及键盘布局而解译来自所述单一硬件键盘的按键输入信号。
10.根据权利要求9所述的方法，其中所述显示器为触敏显示器，所述方法进一步包含配置呈现于所述显示器上的屏幕上键盘以在视觉上对应于所述所确定的键盘语言及所述所确定的键盘布局。
11.根据权利要求9所述的方法，其中所述所确定的键盘布局包括：所述所确定的键盘语言中的字符到所述单一硬件键盘的按键的指派；及选自QWERTY、AZERTY及Dvorak格式的一格式。
12.根据权利要求9所述的方法，其中所述排定优先次序包括：
在所述单一硬件键盘提供语言及位置信息中的至少一者时，将最高优先级指派给所提供的相应的所述语言及位置信息；
在所述电子装置包括提供与所述装置的用户相关联的语言及位置信息中的至少一者的软件模块时，将第二高优先级指派给所提供的相应的所述语言及位置信息；
在所述电子装置包括所述运营商配置文件时，将第三高优先级指派给从所述运营商配置文件所获得的所述语言信息及位置信息；及
在所述电子装置包括GPS服务时，将第四高优先级指派给从GPS能力所获得的所述语言信息及位置信息。
13.根据权利要求9所述的方法，其中所述一个或一个以上软件模块包括媒体播放器软件及个人信息管理软件。
14.根据权利要求9所述的方法，其包括：
将用以查看一个或一个以上键盘配置的选项呈现给用户；
检测与触敏显示器的对应于相应键盘配置的接触；及
响应于所述所检测的接触，配置所述电子装置以基于所述相应键盘配置而解译来自所述单一硬件键盘的按键输入信号。
15.根据权利要求9所述的方法，其中所述单一硬件键盘是在不需要用户确认所述配置的情况下加以配置。
16.根据权利要求9所述的方法，其中所述单一硬件键盘是在无用户介入的情况下加以配置。
17.一种用于配置电子装置以解译来自硬件键盘的信号的设备，其包含：
用于从与电子装置相关联的多个硬件及软件信息源获得语言信息及位置信息中的至少一者的构件，所述电子装置包括一个或一个以上处理器、存储器、单一硬件键盘以及显示器，其中所述多个硬件及软件信息源包括运营商配置文件、所述单一硬件键盘、位于所述电子装置的远端的一个或一个以上软件模块、移动通信能力及GPS服务中的两者或两者以上；
用于基于所述硬件及软件信息源的相关联语言及位置信息的可靠性而排定所述硬件及软件信息源的优先次序的构件；
用于基于从具有最高相对优先级的所述信息源所获得的所述语言信息及位置信息而确定所述单一硬件键盘的键盘语言及键盘布局的构件；及
用于配置所述电子装置以基于所述所确定的键盘语言及键盘布局而解译来自所述单一硬件键盘的按键输入信号的构件。
18.根据权利要求17所述的设备，其中所述显示器为触敏显示器，所述设备进一步包含用于配置呈现于所述显示器上的屏幕上键盘以在视觉上对应于所述所确定的键盘语言及所述所确定的键盘布局的构件。
19.根据权利要求17所述的设备，其中所述所确定的键盘布局包括：所述所确定的键盘语言中的字符到所述单一硬件键盘的按键的指派；及选自QWERTY、AZERTY及Dvorak格式的一格式。
20.根据权利要求17所述的设备，其中所述排定优先次序包括：
在所述单一硬件键盘提供语言及位置信息中的至少一者时，将最高优先级指派给所提供的相应的所述语言及位置信息；
在所述电子装置包括提供与所述装置的用户相关联的语言及位置信息中的至少一者的软件模块时，将第二高优先级指派给所提供的相应的所述语言及位置信息；
在所述电子装置包括所述运营商配置文件时，将第三高优先级指派给从所述运营商配置文件所获得的所述语言信息及位置信息；及
在所述电子装置包括GPS服务时，将第四高优先级指派给从GPS能力所获得的所述语言信息及位置信息。
21.根据权利要求17所述的设备，其中所述一个或一个以上软件模块包括媒体播放器软件及个人信息管理软件。
22.根据权利要求17所述的设备，其包括：
用于将用以查看一个或一个以上键盘配置的选项呈现给用户的构件；
用于检测与触敏显示器的对应于相应键盘配置的接触的构件；及
用于响应于所述所检测的接触而配置所述电子装置以基于所述相应键盘配置而解译来自所述单一硬件键盘的按键输入信号的构件。
23.根据权利要求17所述的设备，其中所述单一硬件键盘是在不需要用户确认所述配置的情况下加以配置。
24.根据权利要求17所述的设备，其中所述单一硬件键盘是在无用户介入的情况下加以配置。
CN201080064126.5A 2010-01-15 2010-12-29 自动键盘布局确定 Active CN102763074B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US29567410P 2010-01-15 2010-01-15
US61/295,674 2010-01-15
US12/789,658 US20110179372A1 (en) 2010-01-15 2010-05-28 Automatic Keyboard Layout Determination
US12/789,658 2010-05-28
PCT/US2010/062320 WO2011087880A1 (en) 2010-01-15 2010-12-29 Automatic keyboard layout determination

Publications (2)

Publication Number Publication Date
CN102763074A CN102763074A (zh) 2012-10-31
CN102763074B true CN102763074B (zh) 2015-11-25

Family

ID=44278469

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201080064126.5A Active CN102763074B (zh) 2010-01-15 2010-12-29 自动键盘布局确定

Country Status (6)

Country Link
US (1) US20110179372A1 (zh)
EP (1) EP2354929B1 (zh)
CN (1) CN102763074B (zh)
HK (1) HK1160954A1 (zh)
TW (1) TWI503737B (zh)
WO (1) WO2011087880A1 (zh)

Families Citing this family (236)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
TWI360762B (en) * 2008-09-05 2012-03-21 Mitake Information Corp On-screen virtual keyboard system
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
WO2010067118A1 (en) 2008-12-11 2010-06-17 Novauris Technologies Limited Speech recognition involving a mobile device
US10255566B2 (en) 2011-06-03 2019-04-09 Apple Inc. Generating and processing task items that represent tasks to perform
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US20120005592A1 (en) * 2010-06-30 2012-01-05 Joshi Shrinivas B Method and Apparatus for Providing Metadata-Based User Interfaces
US8335596B2 (en) * 2010-07-16 2012-12-18 Verizon Patent And Licensing Inc. Remote energy management using persistent smart grid network context
US8812973B1 (en) 2010-12-07 2014-08-19 Google Inc. Mobile device text-formatting
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
JP2012146268A (ja) * 2011-01-14 2012-08-02 Kyocera Corp 携帯電子機器、制御方法及び制御プログラム
CN102622156B (zh) * 2011-01-26 2016-08-03 腾讯科技（深圳）有限公司 获取虚拟键盘的方法、装置和系统
EP2487577A3 (en) * 2011-02-11 2017-10-11 BlackBerry Limited Presenting buttons for controlling an application
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US20120266079A1 (en) * 2011-04-18 2012-10-18 Mark Lee Usability of cross-device user interfaces
US9229489B2 (en) * 2011-05-03 2016-01-05 Facebook, Inc. Adjusting mobile device state based on user intentions and/or identity
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US9021245B2 (en) * 2011-07-15 2015-04-28 International Business Machines Corporation Applying settings in a cloud computing environment based on geographical region
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US9218129B2 (en) * 2011-08-29 2015-12-22 Ncr Corporation User interface
KR101859102B1 (ko) 2011-09-16 2018-05-17 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
US20130086504A1 (en) * 2011-09-29 2013-04-04 Infosys Limited Systems and methods for facilitating navigation in a virtual input device
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
KR20130123251A (ko) * 2012-05-02 2013-11-12 삼성전자주식회사 웹 브라우저를 위한 키 보드 구성 방법 및 장치와 그 방법에 대한 프로그램 소스를 저장한 기록 매체
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
KR101431581B1 (ko) * 2012-06-22 2014-09-23 성균관대학교산학협력단 모바일 단말기를 기반으로 한 가상 게임 컨트롤러 장치 및 이를 이용한 원격 컨트롤 시스템
US9146622B2 (en) 2012-06-25 2015-09-29 International Business Machines Corporation Dynamically updating a smart physical keyboard
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9548012B1 (en) * 2012-08-29 2017-01-17 Amazon Technologies, Inc. Adaptive ergonomic keyboard
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
CN103853443B (zh) * 2012-12-03 2018-04-27 联想(北京)有限公司 一种输入界面切换方法及装置、电子设备
KR101480516B1 (ko) * 2013-01-31 2015-01-08 삼성전자주식회사 디스플레이 장치 및 그의 메뉴 디스플레이 방법
US20140215348A1 (en) * 2013-01-31 2014-07-31 Samsung Electronics Co., Ltd. Display apparatus and menu displaying method thereof
KR20150104615A (ko) 2013-02-07 2015-09-15 애플 인크. 디지털 어시스턴트를 위한 음성 트리거
JP6387022B2 (ja) * 2013-02-28 2018-09-05 ヘルトアイス，クリストフ 入力設定器のアクティブ入力エレメントの決定方法、及び入力設定器
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
KR101759009B1 (ko) 2013-03-15 2017-07-17 애플 인크. 적어도 부분적인 보이스 커맨드 시스템을 트레이닝시키는 것
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
CN105264524B (zh) 2013-06-09 2019-08-02 苹果公司 用于实现跨数字助理的两个或更多个实例的会话持续性的设备、方法、和图形用户界面
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
CN105265005B (zh) 2013-06-13 2019-09-17 苹果公司 用于由语音命令发起的紧急呼叫的系统和方法
CN105453026A (zh) 2013-08-06 2016-03-30 苹果公司 基于来自远程设备的活动自动激活智能响应
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US20150177847A1 (en) * 2013-12-23 2015-06-25 Google Inc. Techniques for resolving keyboard and input method ambiguity on computing devices
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
EP3149728B1 (en) 2014-05-30 2019-01-16 Apple Inc. Multi-command single utterance input method
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
KR20230042141A (ko) 2014-08-02 2023-03-27 애플 인크. 상황 특정 사용자 인터페이스
US10452253B2 (en) 2014-08-15 2019-10-22 Apple Inc. Weather user interface
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
EP4235387A3 (en) 2014-09-02 2023-09-06 Apple Inc. User interface for receiving user input
WO2016036481A1 (en) 2014-09-02 2016-03-10 Apple Inc. Reduced-size user interfaces for dynamically updated application overviews
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US9606986B2 (en) 2014-09-29 2017-03-28 Apple Inc. Integrated word N-gram and class M-gram language models
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US10055121B2 (en) 2015-03-07 2018-08-21 Apple Inc. Activity based thresholds and feedbacks
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
WO2016144385A1 (en) 2015-03-08 2016-09-15 Apple Inc. Sharing user-configurable graphical constructs
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US20160277868A1 (en) * 2015-03-16 2016-09-22 James E. Niles Method and System for Changing Language on a Smart Device From a Personal Electronic Device
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US9916075B2 (en) 2015-06-05 2018-03-13 Apple Inc. Formatting content for a reduced-size user interface
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
JP2017010428A (ja) * 2015-06-25 2017-01-12 京セラドキュメントソリューションズ株式会社 電子機器およびアプリケーションプログラム
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
EP4321088A3 (en) 2015-08-20 2024-04-24 Apple Inc. Exercise-based watch face
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
JP6214618B2 (ja) * 2015-11-25 2017-10-18 レノボ・シンガポール・プライベート・リミテッド 情報処理装置、ソフトウェアキーボード表示方法、及びプログラム
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US20170160818A1 (en) * 2015-12-04 2017-06-08 Synerdyne Corporation Reprogramable multi-host, multi-character set keyboard
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179309B1 (en) 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
DK179412B1 (en) 2017-05-12 2018-06-06 Apple Inc Context-Specific User Interfaces
DK201770429A1 (en) 2017-05-12 2018-12-14 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
DK179549B1 (en) 2017-05-16 2019-02-12 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
CN110442405A (zh) * 2018-05-02 2019-11-12 深圳Tcl数字技术有限公司 一种浏览器自动匹配软键盘的方法、存储介质及智能终端
US11327650B2 (en) 2018-05-07 2022-05-10 Apple Inc. User interfaces having a collection of complications
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US10504518B1 (en) 2018-06-03 2019-12-10 Apple Inc. Accelerated task performance
CN110580636B (zh) * 2018-06-11 2022-10-18 佛山市顺德区美的电热电器制造有限公司 基于用户行为分析的按键设置方法、智能电器及服务器
KR102592044B1 (ko) * 2018-06-29 2023-10-23 삼성전자 주식회사 전자 장치에서 물리적 키보드의 레이아웃 설정 방법 및 장치
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
KR102653267B1 (ko) 2018-11-28 2024-04-02 삼성전자 주식회사 전자 장치의 키 입력 방법 및 이를 사용하는 전자 장치
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
CN109658758A (zh) * 2019-02-18 2019-04-19 西安科技大学 一种计算机会计教学仿真系统
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11960701B2 (en) 2019-05-06 2024-04-16 Apple Inc. Using an illustration to show the passing of time
CN112805671A (zh) 2019-05-06 2021-05-14 苹果公司 电子设备的受限操作
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11131967B2 (en) 2019-05-06 2021-09-28 Apple Inc. Clock faces for an electronic device
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
DK180684B1 (en) 2019-09-09 2021-11-25 Apple Inc Techniques for managing display usage
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators
US11183193B1 (en) 2020-05-11 2021-11-23 Apple Inc. Digital assistant hardware abstraction
EP4133371A1 (en) 2020-05-11 2023-02-15 Apple Inc. User interfaces for managing user interface sharing
US11372659B2 (en) 2020-05-11 2022-06-28 Apple Inc. User interfaces for managing user interface sharing
DK202070625A1 (en) 2020-05-11 2022-01-04 Apple Inc User interfaces related to time
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
US11694590B2 (en) 2020-12-21 2023-07-04 Apple Inc. Dynamic user interface with time indicator
US11720239B2 (en) 2021-01-07 2023-08-08 Apple Inc. Techniques for user interfaces related to an event
US11921992B2 (en) 2021-05-14 2024-03-05 Apple Inc. User interfaces related to time
US11630559B2 (en) 2021-06-06 2023-04-18 Apple Inc. User interfaces for managing weather information
CN113505777B (zh) * 2021-07-20 2023-05-02 深圳市拓普泰克技术股份有限公司 键盘布局版本检测方法、装置、设备和存储介质
CN113535025A (zh) * 2021-07-28 2021-10-22 中国工商银行股份有限公司 多语言页面布局方法、装置、设备、介质及程序产品
CN114327732B (zh) * 2021-12-31 2024-04-19 北京五八信息技术有限公司 页面配置方法、装置、电子设备和计算机可读介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1043649A2 (en) * 1999-04-09 2000-10-11 Sun Microsystems, Inc. Method and apparatus for dynamically configuring device using device code
CN101206659A (zh) * 2006-12-15 2008-06-25 谷歌股份有限公司 自动搜索查询校正

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3859005A (en) 1973-08-13 1975-01-07 Albert L Huebner Erosion reduction in wet turbines
US4459581A (en) * 1981-07-22 1984-07-10 Data General Corporation Alphanumeric keyboard having identification capability
US4826405A (en) 1985-10-15 1989-05-02 Aeroquip Corporation Fan blade fabrication system
JP3311133B2 (ja) * 1994-02-16 2002-08-05 株式会社東芝 出力回路
US6323846B1 (en) 1998-01-26 2001-11-27 University Of Delaware Method and apparatus for integrating manual input
US6615287B1 (en) * 2000-05-23 2003-09-02 International Business Machines Corporation Means for flexible keyboard auto-ID implementation
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US7218226B2 (en) 2004-03-01 2007-05-15 Apple Inc. Acceleration-based theft detection system for portable electronic devices
KR100726582B1 (ko) * 2000-10-25 2007-06-11 주식회사 케이티 무선통신 단말기의 위치 확인에 의한 다국 문자 자판의제공 방법
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
TWI235942B (en) * 2001-10-29 2005-07-11 Oqo Inc Keyboard with variable-sized key
US6830396B2 (en) * 2003-03-31 2004-12-14 Francis N. Kurriss Keyboard configuration system
FR2891928B1 (fr) * 2005-10-11 2008-12-19 Abderrahim Ennadi Clavier a ecran tactile universel multilingue et multifonction
JP2007156548A (ja) * 2005-11-30 2007-06-21 Toshiba Corp 情報処理装置および切り替え方法
US7602378B2 (en) * 2006-10-26 2009-10-13 Apple Inc. Method, system, and graphical user interface for selecting a soft keyboard
KR20080095661A (ko) * 2007-04-25 2008-10-29 삼성전자주식회사 휴대용컴퓨터 및 그 제어방법
US8090885B2 (en) * 2008-01-14 2012-01-03 Microsoft Corporation Automatically configuring computer devices wherein customization parameters of the computer devices are adjusted based on detected removable key-pad input devices
US8122170B2 (en) * 2009-06-11 2012-02-21 Microsoft Corporation Adaptive keyboard layout mapping

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1043649A2 (en) * 1999-04-09 2000-10-11 Sun Microsystems, Inc. Method and apparatus for dynamically configuring device using device code
CN101206659A (zh) * 2006-12-15 2008-06-25 谷歌股份有限公司 自动搜索查询校正

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
A method of providing country keyboard support, used by IBM TouchBoardTM, a Softkeyboard application;international business machines corporation;《RESEARCH DISCLOSURE》;MASON PUBLICATIONS;20020601;第458卷(第125期);全文 *

Also Published As

Publication number Publication date
EP2354929A1 (en) 2011-08-10
EP2354929B1 (en) 2015-04-22
CN102763074A (zh) 2012-10-31
US20110179372A1 (en) 2011-07-21
HK1160954A1 (zh) 2012-08-17
TWI503737B (zh) 2015-10-11
TW201145149A (en) 2011-12-16
WO2011087880A1 (en) 2011-07-21

Similar Documents

Publication Publication Date Title
CN102763074B (zh) 自动键盘布局确定
CN103052935B (zh) 用于对对象的前后位置进行重新排序的装置、方法和图形用户接口
CN102763079B (zh) 用自定义控件取代键盘的应用程序编程接口(api)
CN102754071B (zh) 具有包含具有另一设备的显示分辨率的模式的多个应用程序显示模式的设备和方法
CN102763066B (zh) 用于导航经过一范围的值的装置、方法和图形用户接口
CN102754062B (zh) 具有内容显示模式和显示旋转启发的装置、方法和图形用户接口
CN102763073B (zh) 具有交互式弹出视图的装置和方法
CN102063253B (zh) 用于管理并行打开的软件应用的方法和相关设备
CN102955653B (zh) 用于导览和预览内容项目的装置、方法和图形用户接口
CN102763058B (zh) 用于存取可选键的装置、方法和图形用户接口
CN102033698B (zh) 滚动多节文档的方法和装置及多功能设备
CN102414755B (zh) 用于编辑电子消息中的音频或视频附件的设备、方法和图形用户界面
CN102033710B (zh) 用于管理文件夹的方法和相关设备
CN102265586B (zh) 使用表情字符的便携式触摸屏设备、方法和图形用户界面
CN102763077A (zh) 自动显示及隐藏屏幕上键盘
CN102216897B (zh) 有条件激活或禁用软按钮的设备和方法
CN102754061A (zh) 用于改变电子文档中的页的装置、方法和图形用户接口
CN102763128A (zh) 用于附件查看和编辑的装置、方法和图形用户接口
CN105144037A (zh) 用于输入字符的设备、方法和图形用户界面
CN103218148A (zh) 用于配置与用户接口的受约束的交互的装置、方法和图形用户接口
CN102822788A (zh) 用于对象的精确定位的装置、方法和图形用户接口
CN103186343A (zh) 用于调整内容查看和文本输入接口的大小的装置、方法和图形用户接口
CN102763065A (zh) 用于导航经过多个查看区域的装置、方法和图形用户接口
CN103186318A (zh) 用于使用单点触摸输入提供多点触摸输入和基于硬件的特征的装置、方法和图形用户接口
CN103069378A (zh) 用于用户接口屏幕导航的装置、方法和图形用户接口

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant