CN105144067B - 用于调节控件的外观的设备、方法和图形用户界面 - Google Patents

用于调节控件的外观的设备、方法和图形用户界面 Download PDF

Info

Publication number
CN105144067B
CN105144067B CN201480023948.7A CN201480023948A CN105144067B CN 105144067 B CN105144067 B CN 105144067B CN 201480023948 A CN201480023948 A CN 201480023948A CN 105144067 B CN105144067 B CN 105144067B
Authority
CN
China
Prior art keywords
content
control
group
value
appearance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480023948.7A
Other languages
English (en)
Other versions
CN105144067A (zh
Inventor
K·柯西恩达
T·S·乔恩
C·G·卡鲁纳穆尼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Priority to CN201811582526.XA priority Critical patent/CN110096206B/zh
Priority to CN201811583828.9A priority patent/CN110096186B/zh
Publication of CN105144067A publication Critical patent/CN105144067A/zh
Application granted granted Critical
Publication of CN105144067B publication Critical patent/CN105144067B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/001—Texturing; Colouring; Generation of texture or colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04804—Transparency, e.g. transparent or translucent windows

Abstract

本发明公开了一种在显示器上显示用户界面的具有显示器的电子设备。设备确定与显示器的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值。设备基于第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值。设备在显示器的相应区域中显示控件，其中控件的外观基于第一内容和第一组控件外观值来确定。

Description

用于调节控件的外观的设备、方法和图形用户界面
技术领域
本公开整体涉及具有显示器的电子设备，包括但不限于在其显示器上显示软键盘和其他虚拟控件的电子设备。
背景技术
电子计算设备常常在其显示器上显示虚拟控件。例如，在使用便携式电子设备(例如智能电话、平板电脑、或笔记本电脑)上的应用程序时，键盘、菜单、对话框、提示、和其他控件可能出现和消失。
虚拟控件的初始显示可能使用户分心，使得用户短暂地失去其在应用程序中的位置。此外，显示在应用程序用户界面中的其他元件顶部的虚拟控件遮掩或遮蔽那些元件，这也使得用户更难保持应用程序中的上下文。这对于具有小显示器的便携式设备尤其如此，其中虚拟控件(例如键盘)可能占据显示器的很大部分。
发明内容
因此，需要具有有助于保持应用程序中的上下文的更少使人分心的虚拟控件的电子设备。这就需要用于调节虚拟控件的外观的新的方法和界面。此类设备、方法和界面减小了对用户所造成的认知负担并产生了更有效的人机界面。
通过所公开的设备减少或消除了与用于具有显示器的电子设备的用户界面相关联的上述缺陷和其他问题。在一些实施例中，该设备是台式计算机。在一些实施例中，设备是便携式的(例如，笔记本电脑、平板电脑或手持设备)。在一些实施例中，设备具有触摸板。在一些实施例中，该设备具有触敏显示器(又称为“触摸屏”或“触摸屏显示器”)。在一些实施例中，设备具有图形用户界面(GUI)、一个或多个处理器、存储器、以及存储在存储器中以用于执行多个功能的一个或多个模块、程序或指令集。在一些实施例中，用户主要通过触敏表面上的手指接触和手势来与GUI进行交互。在一些实施例中，这些功能任选地包括图像编辑、绘图、呈现、文字处理、网站创建、盘编辑、电子表格制作、玩游戏、接打电话、视频会议、收发电子邮件、即时消息发送、健身支持、数字摄影、数字视频记录、网络浏览、数字音乐播放、和/或数字视频播放。用于执行这些功能的可执行指令任选地被包括在被配置用于由一个或多个处理器执行的非暂态计算机可读存储介质或其他计算机程序产品中。
根据一些实施例，在具有显示器的电子设备处执行一种方法。该方法包括：在显示器上显示用户界面；确定与显示器的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值；基于第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值；以及在显示器的相应区域中显示控件，其中控件的外观基于第一内容和第一组控件外观值来确定。
根据一些实施例，电子设备包括被配置为显示用户界面的显示单元和耦接到显示单元的处理单元。该处理单元被配置为：确定与显示器的相应区域的对应第一内容的一个或多个内容显示属性的第一组内容显示值；基于第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值；以及启用对显示器的相应区域中的控件的显示，其中控件的外观基于第一内容和第一组控件外观值来确定。
根据一些实施例，电子设备包括显示器、任选的触敏表面、任选的用于检测与触敏表面的接触的强度的一个或多个传感器、一个或多个处理器、存储器、和一个或多个程序；所述一个或多个程序被存储在存储器中并被配置为由一个或多个处理器执行，并且所述一个或多个程序包括用于执行上述方法的操作的指令。根据一些实施例，如上述方法中所描述的，电子设备上的图形用户界面包括在上述方法中显示的一个或多个元件，所述一个或多个元件响应于输入进行更新，该电子设备具有显示器、任选的触敏表面、任选的用于检测与触敏表面的接触的强度的一个或多个传感器、存储器、和用于执行存储在存储器中的一个或多个程序的一个或多个处理器。根据一些实施例，计算机可读存储介质在其中存储有指令，所述指令当由具有显示器、任选的触敏表面、和任选的用于检测与触敏表面的接触的强度的一个或多个传感器的电子设备执行时使得该设备执行上述方法的操作。根据一些实施例，电子设备包括：显示器、任选的触敏表面、和任选的用于检测与触敏表面的接触的强度的一个或多个传感器；以及用于执行上述方法的操作的装置。根据一些实施例，在具有显示器、任选的触敏表面、和任选的用于检测与触敏表面的接触的强度的一个或多个传感器的电子设备中使用的信息处理装置包括用于执行上述方法的操作的装置。
因此，为具有显示器的电子设备提供更少地使人分心同时仍然是用户容易看到和易于交互的虚拟控件，从而提高有效性、效率、以及用户对此类设备的满意度。
附图说明
为了更好地理解各种所述实施例，应该结合以下附图并且参考下方的具体实施方式，在所有附图中，类似的附图标号指示对应的部件。
图1A是示出了根据一些实施例的具有触敏显示器的便携式多功能设备的框图。
图1B是示出了根据一些实施例的用于事件处理的示例性部件的框图。
图2示出了根据一些实施例的具有触摸屏的便携式多功能设备。
图3是根据一些实施例的具有显示器和触敏表面的示例性多功能设备的框图。
图4A示出了根据一些实施例的便携式多功能设备上的应用程序的菜单的示例性用户界面。
图4B示出了根据一些实施例的用于具有与显示器分开的触敏表面的多功能设备的示例性用户界面。
图5A-5K根据一些实施例示出了用于调节控件的外观的示例性假想用户界面。
图6根据一些实施例示例性地示出了针对显示控件的区域中的内容所确定的假想的示例性的一组内容显示属性值。
图7是根据一些实施例的已被分配给可被用于经由插补法确定内容外观值的对应的预定组的控件外观值的假想的预定组的内容显示值的示意图。
图8根据一些实施例示例性地示出了控件的假想的示例性的一组控件外观参数值。
图9A-9G是示出根据一些实施例的一种调节控件的外观的方法的流程图。
图10为根据一些实施例的电子设备的功能框图。
具体实施方式
在使用设备上的应用程序时，电子设备常常显示出现和消失的虚拟控件。
如上所述，虚拟控件的初始显示可能使用户分心，从而使得用户短暂地失去其在应用程序中的位置。此外，显示在应用程序用户界面中的其他元件顶部的虚拟控件遮掩或遮蔽那些元件，这也使得用户更难保持应用程序中的上下文。这对于具有小显示器的便携式设备尤其如此，其中虚拟控件(例如键盘)可能占据显示器的很大部分。
这里，公开了具有半透明虚拟控件的电子设备，半透明虚拟控件的外观自动地调节，使得控件更少使人分心，同时用户仍然容易看到并易于交互。
给定的半透明控件被显示在显示器的特定区域中的内容上方。设备确定所述特定区域中的各个内容显示属性的值(例如控件下方的内容的色调、饱和度、亮度、和/或对比度的值)。继而，设备基于所确定的内容显示属性值来确定各个控件外观参数的一组值(例如模糊半径、饱和度调节、白色叠层的不透明度、黑色叠层的不透明度、控件中用户界面元件的不透明度、和/或控件中的文本颜色的值)。半透明控件的外观然后基于控件下方的内容和所确定的控件外观参数值。内容显示属性值、控件外观参数值、并且因此还有控件的外观随着控件下方的内容改变而自动地动态更新。
这些调节产生外观比不透明控件或简单地以固定方式模糊下方内容的半透明控件更少地使人分心的半透明控件。同时，这些调节产生容易看到且易于交互的半透明控件。总体而言，这些调节提供了减小对用户所造成的认知负担并生成更有效的人机界面的半透明控件。
需注意，本文所述的对半透明控件的调节也可应用于其他类型的半透明用户界面元件(例如任务栏、托盘、和状态栏)。
下方，图1A-1B、图2和图3提供了对示例性设备的描述。图4A-4B和5A-5K示出了用于调节控件的外观的示例性用户界面。图9A-9G是示出一种调节控件的外观的方法的流程图。图5A-5K中的用户界面被用于阐释图9A-9G中的过程。
示例性设备
现在将详细地参考实施例，这些实施例的实例在附图中被示出。在下方的详细描述中给出了许多具体细节，以便提供对各种所述实施例的充分理解。但是，对本领域的普通技术人员将显而易见的是，各种所述实施例可在没有这些具体细节的情况下被实践。在其他情况下，没有详细描述熟知的方法、过程、部件、电路、和网络，以便不会不必要地模糊实施例的各个方面。
还将理解的是，虽然术语“第一”、“第二”等在本文中在一些情况下被用于描述各种元素，但是这些元素不应受到这些术语的限制。这些术语只是用来将一个元素与另一元素区分开。例如，第一接触可以被命名为第二接触，并且类似地，第二接触可以被命名为第一接触，而不脱离各种所述实施例的范围。第一接触和第二接触均为接触，但它们不是同一个接触。
在本文中对各种所述实施例的描述中所使用的术语只是为了描述特定实施例，而并非旨在进行限制。如在对各种所述实施例的描述和所附权利要求书中所使用的那样，单数形式“一个”(“a”,“an”)和“该”旨在也包括复数形式，除非上下文明确地另外指出。还将理解的是，本文中所使用的术语“和/或”是指并且涵盖相关联的所列出的项目中的一个或多个项目的任何和全部可能的组合。还将理解的是，术语“包括”(“includes”“including”“comprises”和/或“comprising”)当在本说明书中使用时是指定存在所陈述的特征、整数、步骤、操作、元件和/或部件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、部件和/或其分组。
根据上下文，如本文所用，术语“如果”任选地被解释为意为“当……时”(“when”或“upon”)或“响应于确定”或“响应于检测到”。类似地，根据上下文，短语“如果确定……”或“如果检测到[所陈述的条件或事件]”任选地被解释为意指“当确定……时”或“响应于确定……”或“当检测到[所陈述的条件或事件]时”或“响应于检测到[所陈述的条件或事件]”。
描述了电子设备、用于此类设备的用户界面和用于使用此类设备的相关联过程的实施例。在一些实施例中，该设备是还包含其他功能(诸如PDA和/或音乐播放器功能)的便携式通信设备诸如移动电话。便携式多功能设备的示例性实施例包括但不限于来自AppleInc(Cupertino,California)的iPod和设备。任选地使用其他便携式电子设备诸如具有触敏表面(例如，触摸屏显示器和/或触摸板)的膝上型电脑或平板电脑。还应当理解的是，在一些实施例中，设备不是便携式通信设备，而是具有触敏表面(例如，触摸屏显示器和/或触摸板)的台式计算机。
在下方的讨论中，描述了一种包括显示器和触敏表面的电子设备。然而，应当理解，电子设备任选地包括一个或多个其他物理用户接口设备，诸如物理键盘、鼠标和/或操纵杆。
设备通常支持多种应用程序，诸如以下各项中的一者或多者：绘图应用程序、呈现应用程序、文字处理应用程序、网站创建应用程序、盘编辑应用程序、电子表格应用程序、游戏应用程序、电话应用程序、视频会议应用程序、电子邮件应用程序、即时消息应用程序、健身支持应用程序、照片管理应用程序、数字相机应用程序、数字视频相机应用程序、web浏览应用程序、数字音乐播放器应用程序、和/或数字视频播放器应用程序。
在设备上执行的各种应用程序任选地使用至少一个共用的物理用户接口设备诸如触敏表面。触敏表面的一种或多种功能以及显示在设备上的对应信息任选地从一种应用程序调整和/或变化至下一种应用程序和/或在相应应用程序内被调整和/或变化。这样，设备的共用物理架构(诸如触敏表面)任选地利用对于用户而言直观且清楚的用户界面来支持各种应用程序。
注意力现在被引向具有触敏显示器的便携式设备的实施例。图1A是示出了根据一些实施例的具有触敏显示器112的便携式多功能设备100的框图。触敏显示器112有时为了方便被叫做“触摸屏”，并且有时被称为或被叫做触敏显示器系统。设备100包括存储器102(其任选地包括一个或多个计算机可读存储介质)、存储器控制器122、一个或多个处理单元(CPU)120、外围设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子系统106、其他输入或控制设备116、和外部端口124。设备100任选地包括一个或多个光学传感器164。设备100任选地包括用于检测设备100上的接触的强度的一个或多个强度传感器165(例如，触敏表面，诸如设备100的触敏显示器系统112)。设备100任选地包括用于在设备100上生成触觉输出的一个或多个触觉输出发生器167(例如，在触敏表面诸如设备100的触敏显示器系统112或设备300的触摸板355上生成触觉输出)。这些部件任选地通过一条或多条通信总线或信号线103进行通信。
如在本说明书和权利要求书中所使用的，术语触敏表面上的接触的“强度”是指触敏表面上的接触(例如，手指接触)的力或压力(每单位面积的力)，或者是指触敏表面上的接触的力或压力的替代物(代用物)。接触的强度具有值范围，该值范围包括至少四个不同的值并且更典型地包括上百个不同的值(例如，至少256个)。接触的强度任选地使用各种方法和各种传感器或传感器组合来确定(或测量)。例如，在触敏表面下方或相邻于触敏表面的一个或多个力传感器任选地用于测量触敏表面上的各个点处的力。在一些实施例中，来自多个力传感器的力测量被合并(例如，加权平均)以确定所估计的接触力。类似地，触笔的压敏顶端任选地用于确定触笔在触敏表面上的压力。可替代地，在触敏表面上所检测到的接触面积的大小和/或其变化、邻近接触的触敏表面的电容和/或其变化、和/或邻近接触的触敏表面的电阻和/或其变化任选地被用作触敏表面上的接触的力或压力的替代物。在一些具体实施中，接触力或压力的替代物测量直接用于确定是否已超过强度阈值(例如，强度阈值是以对应于替代物测量的单位来描述)。在一些实施例中，接触力或压力的替代物测量被转换成所估计的力或压力，并且所估计的力或压力用于确定是否已超过强度阈值(例如，强度阈值是以压力的单位所测量的压力阈值)。
如本说明书和权利要求书中所使用的，术语“触觉输出”是指将由用户利用用户的触摸感所检测到的设备相对于设备的先前位置的物理位移、设备的部件(例如，触敏表面)相对于设备的另一个部件(例如，外壳)的物理位移、或部件相对于设备的质心的位移。例如，在设备或设备的部件与用户对触摸敏感的表面(例如，手指、手掌或用户的手部的其他部分)接触的情况下，通过物理位移生成的触觉输出将被用户解读为与设备或设备部件的物理特性上的所感知到的变化对应的触感。例如，触敏表面(例如，触敏显示器或触控板)的移动任选地被用户解读为是对物理致动按钮的“按下点击”或“松开点击”。在一些情况下，用户将感觉到触感，诸如“按下点击”或“松开点击”，即使在通过用户的移动而物理地被按压(例如，被移位)的与触敏表面相关联的物理致动按钮没有移动时也是如此。又如，触敏表面的移动任选地被用户解读为或感测为触敏表面的“粗糙度”，即使在触敏表面的光滑度无变化时也是如此。虽然用户对触摸的此类解读将受到用户的个体化感官知觉限制，但是有触摸的许多感官知觉是大多数用户共有的。因此，当触觉输出被描述为对应于用户的特定感官知觉(例如，“松开点击”、“按下点击”、“粗糙度”)时，除非另外陈述，否则所生成的触觉输出对应于设备或其部件的物理位移，该物理位移将会生成典型(或普通)用户的所描述的感官知觉。
应当理解，设备100只是便携式多功能设备的实例，并且设备100任选地具有比所示出的更多或更少的部件，任选地组合两个或更多个部件，或者任选地具有这些部件的不同配置或布置。图1A中所示的各种部件以硬件、软件、或硬件与软件两者的组合来实现，其包括一个或多个信号处理电路和/或专用集成电路。
存储器102任选地包括高速随机存取存储器，并且还任选地包括非易失性存储器诸如一个或多个磁盘存储设备、闪存存储器设备、或其他非易失性固态存储器设备。设备100的其他部件(诸如CPU 120和外围设备接口118)对存储器102的访问任选地由存储器控制器122来控制。
外围设备接口118可被用于将设备的输入和输出外围设备耦接到CPU 120和存储器102。所述一个或多个处理器120运行或执行存储在存储器102中的各种软件程序和/或指令集以执行设备100的各种功能并处理数据。
在一些实施例中，外围设备接口118、CPU 120、和存储器控制器122任选地在单个芯片诸如芯片104上实现。在一些其他实施例中，它们任选地在独立的芯片上实现。
RF(射频)电路108接收和发送也被叫做电磁信号的RF信号。RF电路108将电信号转换为电磁信号/将电磁信号转换为电信号，并且经由电磁信号与通信网络及其他通信设备进行通信。RF电路108任选地包括用于执行这些功能的熟知的电路，包括但不限于天线系统、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。RF电路108任选地通过无线通信与网络以及其他设备进行通信，该网络诸如互联网(也被称为万维网(WWW))、内联网和/或无线网络(诸如蜂窝电话网络、无线局域网(LAN)和/或城域网(MAN))。无线通信任选地使用多种通信标准、协议和技术中的任一者，包括但不限于全球移动通信系统(GSM)、增强数据GSM环境(EDGE)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、演进、纯数据(EV-DO)、HSPA、HSPA+、双小区HSPA(DC-HSPDA)、长期演进(LTE)、近场通信(NFC)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、无线保真(Wi-Fi)(例如，IEEE 802.11a、IEEE 802.11b、IEEE 802.11g和/或IEEE 802.11n)、互联网语音协议(VoiP)、Wi-MAX、电子邮件协议(例如，互联网消息访问协议(IMAP)和/或邮局协议(POP))、即时消息(例如，可扩展消息和存在协议(XMPP)、用于即时消息和存在利用扩展的会话发起协议(SIMPLE)、即时消息和存在服务(IMPS))、和/或短消息服务(SMS)、或包括在本文档提交日期还未开发出的通信协议的任何其他合适的通信协议。
音频电路110、扬声器111和麦克风113提供用户和设备100之间的音频接口。音频电路110从外围设备接口118接收音频数据，将音频数据转换为电信号，并将电信号传输到扬声器111。扬声器111将电信号转换为人可听到的声波。音频电路110还接收由麦克风113根据声波转换的电信号。音频电路110将电信号转换为音频数据，并将音频数据传输到外围设备接口118以用于处理。音频数据任选地由外围设备接口118从存储器102和/或RF电路108进行检索并且/或者被传输至存储器102和/或RF电路108。在一些实施例中，音频电路110还包括耳麦接口(例如，图2中的212)。耳麦接口提供音频电路110和可移除的音频输入/输出外围设备之间的接口，该外围设备诸如仅输出的耳机或者具有输出(例如，单耳耳机或双耳耳机)和输入(例如，麦克风)两者的耳麦。
I/O子系统106将设备100上的输入/输出外围设备诸如触摸屏112和其他输入控制设备116耦接到外围设备接口118。I/O子系统106任选地包括显示控制器156、光学传感器控制器158、强度传感器控制器159、触觉反馈控制器161、和用于其他输入或控制设备的一个或多个输入控制器160。该一个或多个输入控制器160从其他输入或控制设备116接收电信号/将电信号发送至其他输入或控制设备116。其他输入控制设备116任选地包括物理按钮(例如，下压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击式转盘等等。在一些另选实施例中，一个或多个输入控制器160任选地耦接(或不耦接)到以下各项中的任一者：键盘、红外端口、USB端口、和指向设备诸如鼠标。所述一个或多个按钮(例如，图2中的208)任选地包括用于扬声器111和/或麦克风113的音量控制的增大/减小按钮。一个或多个按钮任选地包括下压按钮(例如，图2中的206)。
触敏显示器112提供设备和用户之间的输入接口和输出接口。显示控制器156从触摸屏112接收电信号和/或将电信号发送至触摸屏112。触摸屏112向用户显示视觉输出。视觉输出任选地包括图形、文本、图标、视频和它们的任何组合(统称为“图形”)。在一些实施例中，一些视觉输出或全部的视觉输出对应于用户界面对象。
触摸屏112具有基于触感和/或触觉接触接受来自用户的输入的触敏表面、传感器或传感器组。触摸屏112和显示控制器156(与存储器102中的任何相关联的模块和/或指令集一起)检测触摸屏112上的接触(和该接触的任何移动或中断)，并且将所检测到的接触转换为与显示在触摸屏112上的用户界面对象(例如，一个或多个软键、图标、网页或图像)的交互。在一个示例性实施例中，触摸屏112和用户之间的接触点对应于用户的手指。
触摸屏112任选地使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术、或LED(发光二极管)技术，但是在其他实施例中使用其他显示技术。触摸屏112和显示控制器156任选地使用现在已知的或以后将开发出的多种触摸感测技术中的任何触摸感测技术以及其他接近传感器阵列或用于确定与触摸屏112接触的一个或多个点的其他元件来检测接触及其任何移动或中断，该多种触摸感测技术包括但不限于电容性技术、电阻性技术、红外技术、和表面声波技术。在一个示例性实施例中，使用投射式互电容感测技术，诸如从AppleInc.(Cupertino,California)的iPod和发现的技术。
触摸屏112任选地具有超过100dpi的视频分辨率。在一些实施例中，触摸屏具有约160dpi的视频分辨率。用户任选地使用任何合适的物体或附加物诸如触笔、手指等来与触摸屏112接触。在一些实施例中，将用户界面设计为主要与基于手指的接触和手势工作，由于手指在触摸屏上的较大接触区域，这可能不如基于触笔的输入精确。在一些实施例中，设备将基于手指的粗略输入翻译为精确的指针/光标位置或用于执行用户所期望的动作的命令。
在一些实施例中，除了触摸屏之外，设备100任选地包括用于激活或去激活特定功能的触摸板(未示出)。在一些实施例中，触摸板是设备的触敏区域，该触敏区域与触摸屏不同，其不显示视觉输出。触摸板任选地是与触摸屏112分开的触敏表面，或者是由触摸屏形成的触敏表面的延伸部分。
设备100还包括用于为各种部件供电的电力系统162。电力系统162任选地包括电力管理系统、一个或多个电源(例如，电池、交流电(AC))、再充电系统、电力故障检测电路、功率转换器或逆变器、电力状态指示器(例如，发光二极管(LED))和与便携式设备中电力的生成、管理和分配相关联的任何其他部件。
设备100还任选地包括一个或多个光学传感器164。图1A示出了耦接到I/O子系统106中的光学传感器控制器158的光学传感器。光学传感器164任选地包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。光学传感器164从环境接收通过一个或多个透镜而投射的光，并且将光转换为表示图像的数据。结合成像模块143(也叫做相机模块)，光学传感器164任选地捕获静态图像或视频。在一些实施例中，光学传感器位于设备100的后部，与设备前部上的触摸屏显示器112相背对，使得触摸屏显示器能够用作用于静态图像和/或视频图像采集的取景器。在一些实施例中，另一个光学传感器位于设备的前部，使得在用户在触摸屏显示器上查看其他视频会议参与者时任选地获取用户的图像以用于视频会议。
设备100还任选地包括一个或多个接触强度传感器165。图1A示出了耦接到I/O子系统106中的强度传感器控制器159的接触强度传感器。接触强度传感器165任选地包括一个或多个压阻应变计、电容式力传感器、电力传感器、压电力传感器、光学力传感器、电容式触敏表面或其他强度传感器(例如，用于测量触敏表面上的接触的力(或压力)的传感器)。接触强度传感器165从环境接收接触强度信息(例如，压力信息或压力信息的代用物)。在一些实施例中，至少一个接触强度传感器与触敏表面(例如，触敏显示器系统112)并置排列或邻近。在一些实施例中，至少一个接触强度传感器位于设备100的后部，与位于设备100的前部的触摸屏显示器112相背对。
设备100还任选地包括一个或多个接近传感器166。图1A示出了耦接到外围设备接口118的接近传感器166。作为另外一种选择，接近传感器166耦接到I/O子系统106中的输入控制器160。在一些实施例中，当多功能设备被放置在用户耳朵附近时(例如，当用户打电话时)，该接近传感器关闭并禁用触摸屏112。
设备100还任选地包括一个或多个触觉输出发生器167。图1A示出了耦接到I/O子系统106中的触觉反馈控制器161的触觉输出发生器。触觉输出发生器167任选地包括一个或多个电声设备诸如扬声器或其他音频部件；和/或将能量转换成线性运动的机电设备，诸如电机、螺线管、电活性聚合物、压电致动器、静电致动器或其他触觉输出生成部件(例如，将电信号转换成设备上的触觉输出的部件)。接触强度传感器165从触觉反馈模块133接收触觉反馈生成指令，并且在设备100上生成能够由设备100的用户感测到的触觉输出。在一些实施例中，至少一个触觉输出发生器与触敏表面(例如，触敏显示器系统112)并置排列或邻近，并且任选地通过竖直地(例如，向设备100的表面之内/之外)或侧向地(例如，在与设备100的表面相同的平面中向前和向后)移动触敏表面来生成触觉输出。在一些实施例中，至少一个触觉输出发生器传感器位于设备100的后部，与位于设备100的前部的触摸屏显示器112相背对。
设备100还任选地包括一个或多个加速度计168。图1A示出了耦接到外围设备接口118的加速度计168。作为另外一种选择，加速度计168任选地耦接到I/O子系统106中的输入控制器160。在一些实施例中，信息基于对从一个或多个加速度计所接收的数据的分析来在触摸屏显示器上以纵向视图或横向视图被显示。除了一个或多个加速度计168之外，设备100还任选地包括磁力仪(未示出)和GPS(或GLONASS或其他全球导航系统)接收器(未示出)，以用于获取关于设备100的位置和取向(例如，纵向或横向)的信息。
在一些实施例中，存储在存储器102中的软件部件包括操作系统126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块(或指令集)132、文本输入模块(或指令集)134、全球定位系统(GPS)模块(或指令集)135以及应用程序(或指令集)136。此外，在一些实施例中，存储器102存储设备/全局内部状态157，如图1A和3中所示的。设备/全局内部状态157包括以下各项中的一者或多者：活动应用程序状态，该活动应用程序状态用于指示哪些应用程序(如果有的话)当前是活动的；显示状态，该显示状态用于指示什么应用程序、视图或其他信息占据触摸屏显示器112的各个区域；传感器状态，该传感器状态包括从设备的各个传感器和输入控制设备116获取的信息；和关于设备的位置和/或姿态的位置信息。
操作系统126(例如，Darwin、RTXC、LINUX、UNIX、OS X、WINDOWS、或嵌入式操作系统诸如VxWorks)包括用于控制和管理一般系统任务(例如，存储器管理、存储设备控制、电力管理等)并且有利于各种硬件部件和软件部件之间的通信的各种软件部件和/或驱动器。
通信模块128有利于通过一个或多个外部端口124与其他设备进行通信，并且还包括用于处理由RF电路108和/或外部端口124所接收的数据的各种软件部件。外部端口124(例如，通用串行总线(USB)、火线等)适于直接耦接到其他设备或者间接地通过网络(例如，互联网、无线LAN等)来耦接。在一些实施例中，外部端口是与iPod(Apple Inc.的商标)设备上所使用的30针连接器相同的或类似的和/或与其兼容的多针(例如，30针)连接器。
接触/运动模块130任选地检测与触摸屏112(结合显示控制器156)和其他触敏设备(例如，触摸板或物理点击式转盘)的接触。接触/运动模块130包括各种软件部件以用于执行与接触的检测相关的各种操作，诸如确定是否已发生接触(例如，检测手指按下事件)、确定接触的强度(例如，接触的力或压力，或接触的力或压力的替代物)、确定是否存在接触的移动并且在整个触敏表面上跟踪该移动(例如，检测一个或多个手指拖动事件)、以及确定接触是否已停止(例如，检测手指抬起事件或者接触中断)。接触/运动模块130从触敏表面接收接触数据。确定接触点的移动任选地包括确定接触点的速率(量值)、速度(量值和方向)、和/或加速度(量值和/或方向的改变)，该接触点的移动由一系列接触数据来表示。这些操作任选地被应用于单个接触(例如，一个手指接触)或多个同时接触(例如，“多触摸”/多个手指接触)。在一些实施例中，接触/运动模块130和显示控制器156检测触摸板上的接触。
在一些实施例中，接触/运动模块130使用一组一个或多个强度阈值来确定用户是否已执行操作(例如，确定用户是否已“点击”图标)。在一些实施例中，根据软件参数来确定强度阈值的至少一个子集(例如，强度阈值不是由特定物理致动器的激活阈值来确定的，并且可在不改变设备100的物理硬件的情况下被调整)。例如，在不改变触控板或触摸屏显示器硬件的情况下，触控板或触摸屏显示器的鼠标“点击”阈值可被设定成大量预定义的阈值中的任一个预定义的阈值。另外，在一些具体实施中，为设备的用户提供用于(例如，通过调节各个强度阈值和/或通过利用系统级点击“强度”参数来一次调节多个强度阈值)调节这组强度阈值中的一个或多个强度阈值的软件设置。
接触/运动模块130任选地检测用户的手势输入。触敏表面上的不同手势具有不同的接触图案(例如，所检测到的接触的不同运动、时序和/或强度)。因此，任选地通过检测具体接触图案来检测手势。例如，检测单指轻击手势包括检测手指按下事件，然后在与手指按下事件相同的位置(或基本上相同的位置)处(例如，在图标的位置处)检测手指抬起(抬离)事件。又如，在触敏表面上检测手指轻扫手势包括检测手指按下事件，然后检测一个或多个手指拖动事件，并且随后检测手指抬起(抬离)事件。
图形模块132包括用于在触摸屏112或其他显示器上渲染和显示图形的各种已知软件部件，包括用于改变所显示的图形的视觉效果(例如，亮度、透明度、饱和度、对比度或其他视觉属性)的部件。如本文所用，术语“图形”包括可被显示给用户的任何对象，非限制性地包括文本、网页、图标(诸如包括软键的用户界面对象)、数字图像、视频、动画等等。
在一些实施例中，图形模块132存储待使用的表示图形的数据。每个图形任选地被分配有对应的代码。图形模块132从应用程序等接收指定待显示的图形的一个或多个代码，在必要的情况下还一起接收坐标数据和其他图形属性数据，然后生成屏幕图像数据以输出至显示控制器156。
触觉反馈模块133包括用于生成指令的各种软件部件，这些指令由一个或多个触觉输出发生器167使用以响应于用户与设备100的交互而在设备100上的一个或多个位置处产生触觉输出。
任选地为图形模块132的部件的文本输入模块134提供用于在各种应用程序(例如，联系人137、电子邮件140、IM 141、浏览器147和需要文本输入的任何其他应用程序)中输入文本的软键盘。
GPS模块135确定设备的位置并提供该信息以用于在各种应用程序中使用(例如，提供给电话138以用于在基于位置的拨号中使用，提供给相机143作为图片/视频元数据，以及提供给提供基于位置的服务的应用程序，诸如天气桌面小程序、当地黄页桌面小程序和地图/导航桌面小程序)。
应用程序136任选地包括以下模块(或指令集)或者其子组或超集：
·联系人模块137(有时叫做通讯录或联系人列表)；
·电话模块138；
·视频会议模块139；
·电子邮件客户端模块140；
·即时消息(IM)模块141；
·健身支持模块142；
·用于静态图像和/或视频图像的相机模块143；
·图像管理模块144；
·浏览器模块147；
·日历模块148；
·桌面小程序模块149，其任选地包括以下各项中的一者或多者：天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4、词典桌面小程序149-5和由用户获取的其他桌面小程序以及用户创建的桌面小程序149-6；
·用于形成用户创建的桌面小程序149-6的桌面小程序创建器模块150；
·搜索模块151；
·视频和音乐播放器模块152，其任选地由视频播放器模块和音乐播放器模块构成；
·记事本模块153；
·地图模块154；和/或
·在线视频模块155。
任选地被存储在存储器102中的其他应用程序136的实例包括其他文字处理应用程序、其他图像编辑应用程序、绘图应用程序、呈现应用程序、支持JAVA的应用程序、加密、数字权益管理、声音识别、和声音复制。
结合触摸屏112、显示控制器156、接触模块130、图形模块132、和文本输入模块134，联系人模块137任选地被用于管理通讯录或联系人列表(例如存储在存储器102或存储器370中的联系人模块137的应用程序内部状态192中)，包括：将一个或多个姓名添加到通讯录；从通讯录删除一个或多个姓名；使一个或多个电话号码、一个或多个电子邮件地址、一个或多个物理地址或其他信息与姓名相关联；使图像与姓名相关联；对姓名进行归类和分类；提供电话号码或电子邮件地址以发起和/或促成通过电话138、视频会议139、电子邮件140、或IM 141的通信；等等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、接触模块130、图形模块132、和文本输入模块134，电话模块138任选地被用于输入与电话号码对应的字符序列、访问通讯录137中的一个或多个电话号码、修改已输入的电话号码、拨打相应的电话号码、进行会话以及当会话完成时断开或挂断。如上所述，无线通信任选地使用多种通信标准、协议和技术中的任一者。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触模块130、图形模块132、文本输入模块134、联系人列表137和电话模块138，视频会议模块139包括用于根据用户指令发起、进行和终止用户和一个或多个其他参与方之间的视频会议的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134，电子邮件客户端模块140包括用于响应于用户指令来创建、发送、接收和管理电子邮件的可执行指令。结合图像管理模块144，电子邮件客户端模块140使得非常容易创建和发送具有由相机模块143拍摄的静态图像或视频图像的电子邮件。
结合RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134，即时消息模块141包括用于以下操作的可执行指令：输入与即时消息对应的字符序列、修改先前输入的字符、传输相应即时消息(例如，使用短消息服务(SMS)或多媒体消息服务(MMS)协议以用于基于电话的即时消息或者使用XMPP、SIMPLE、或IMPS以用于基于互联网的即时消息)、接收即时消息以及查看所接收的即时消息。在一些实施例中，所传输和/或所接收的即时消息任选地包括图形、照片、音频文件、视频文件和/或MMS和/或增强消息服务(EMS)中所支持的其他附件。如本文所用，“即时消息”是指基于电话的消息(例如，使用SMS或MMS发送的消息)和基于互联网的消息(例如，使用XMPP、SIMPLE、或IMPS发送的消息)两者。
结合RF电路108、触摸屏112、显示控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154、和音乐播放器模块146，健身支持模块142包括用于以下操作的可执行指令：(例如以时间、距离、和/或卡路里燃烧目标)创建健身；与健身传感器(运动设备)进行通信；接收健身传感器数据；校准用于监测健身的传感器；为健身选择和播放音乐；以及显示、存储和传输健身数据。
结合触摸屏112、显示控制器156、一个或多个光学传感器164、光学传感器控制器158、接触模块130、图形模块132、和图像管理模块144，相机模块143包括用于以下操作的可执行指令：捕获静态图像或视频(包括视频流)并且将它们存储到存储器102中、修改静态图像或视频的特性、或从存储器102删除静态图像或视频。
结合触摸屏112、显示控制器156、接触模块130、图形模块132、文本输入模块134、和相机模块143，图像管理模块144包括用于以下操作的可执行指令：排列、修改(例如，编辑)、或以其他方式操控、加标签、删除、呈现(例如，在数字幻灯片或相册中)、以及存储静态图像和/或视频图像。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、和文本输入模块134，浏览器模块147包括用于根据用户指令浏览互联网(包括搜索、链接到、接收、和显示网页或其部分、以及链接到网页的附件和其他文件)的可执行指令。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、电子邮件客户端模块140和浏览器模块147，日历模块148包括用于根据用户指令来创建、显示、修改和存储日历以及与日历相关联的数据(例如，日历条目、待办事项等)的可执行指令。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、和浏览器模块147，桌面小程序模块149是任选地由用户下载和使用的微型应用程序(例如，天气桌面小程序149-1、股市桌面小程序149-2、计算器桌面小程序149-3、闹钟桌面小程序149-4、和词典桌面小程序149-5)或由用户创建的微型应用程序(例如，用户创建的桌面小程序149-6)。在一些实施例中，桌面小程序包括HTML(超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在一些实施例中，桌面小程序包括XML(可扩展标记语言)文件和JavaScript文件(例如，Yahoo！桌面小程序)。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134和浏览器模块147，桌面小程序创建器模块150任选地被用户用于创建桌面小程序(例如，将网页的用户指定的部分调谐到桌面小程序中)。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132和文本输入模块134，搜索模块151包括根据用户指令来搜索匹配一个或多个搜索标准(例如，一个或多个用户指定的搜索词)的存储器102中的文本、音乐、声音、图像、视频和/或其他文件的可执行指令。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、和浏览器模块147，视频和音乐播放器模块152包括允许用户下载和回放以一种或多种文件格式(诸如MP3或AAC文件)存储的所记录的音乐和其他声音文件的可执行指令，以及用于显示、呈现或以其他方式回放视频(例如，在触摸屏112上或在经由外部端口124连接的外部显示器上)的可执行指令。在一些实施例中，设备100任选地包括MP3播放器诸如iPod(Apple Inc.的商标)的功能。
结合触摸屏112、显示控制器156、接触模块130、图形模块132和文本输入模块134，记事本模块153包括用于根据用户指令来创建和管理记事本、待办事项等的可执行指令。
结合RF电路108、触摸屏112、显示系统控制器156、接触模块130、图形模块132、文本输入模块134、GPS模块135、和浏览器模块147，地图模块154任选地用于根据用户指令来接收、显示、修改、和存储地图以及与地图相关联的数据(例如，驾车路线；特定位置处或附近的商家和其他兴趣点的数据；和其他基于位置的数据)。
结合触摸屏112、显示系统控制器156、接触模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147，在线视频模块155包括用于以下操作的指令：允许用户访问、浏览、接收(例如，通过流式传输和/或下载)、回放(例如在触摸屏上或者在经由外部端口124所连接的外部显示器上)、发送具有至特定在线视频的链接的电子邮件，以及以其他方式管理一种或多种文件格式(诸如H.264)的在线视频。在一些实施例中，即时消息模块141而不是电子邮件客户端模块140被用于发送至特定在线视频的链接。
上述每个所识别的模块和应用程序对应于用于执行上述一种或多种功能以及在本专利申请中所描述的方法(例如，本文中所描述的计算机实现的方法和其他信息处理方法)的一组可执行指令。这些模块(即指令集)不必被实现为单独的软件程序、过程或模块，因此这些模块的各种子组任选地在各种实施例中被组合或以其他方式重新布置。在一些实施例中，存储器102任选地存储上述模块和数据结构的子组。此外，存储器102任选地存储上面未描述的另外的模块和数据结构。
在一些实施例中，设备100是该设备上的预定义的一组功能的操作唯一地通过触摸屏和/或触摸板来执行的设备。通过使用触摸屏和/或触摸板作为用于设备100的操作的主要输入控制设备，任选地减少了设备100上的物理输入控制设备(诸如下压按钮、拨号盘等等)的数量。
唯一地通过触摸屏和/或触摸板执行的预定义的一组功能任选地包括在用户界面之间进行导航。在一些实施例中，触摸板在被用户触摸时将设备100从显示在设备100上的任何用户界面导航到主菜单、home菜单或根菜单。在此类实施例中，使用触摸板来实现“菜单按钮”。在一些其他实施例中，菜单按钮是物理下压按钮或者其他物理输入控制设备，而不是触摸板。
图1B是示出了根据一些实施例的用于事件处理的示例性部件的框图。在一些实施例中，存储器102(图1A中)或存储器370(图3)包括事件分类器170(例如，在操作系统126中)以及相应的应用程序136-1(例如，前述应用程序137-13、155、380-390中的任何应用程序)。
事件分类器170接收事件信息并确定待将事件信息递送到的应用程序136-1和应用程序136-1的应用程序视图191。事件分类器170包括事件监视器171和事件分配器模块174。在一些实施例中，应用程序136-1包括应用程序内部状态192，该应用程序内部状态192指示当应用程序是活动的或正在执行时显示在触敏显示器112上的一个或多个当前应用程序视图。在一些实施例中，设备/全局内部状态157被事件分类器170用于确定哪个(哪些)应用程序当前是活动的，并且应用程序内部状态192被事件分类器170用于确定待将事件信息递送到的应用程序视图191。
在一些实施例中，应用程序内部状态192包括附加信息，诸如以下各项中的一者或多者：当应用程序136-1恢复执行时将被使用的恢复信息、指示正被应用程序136-1显示的信息或准备好用于被应用程序136-1显示的信息的用户界面状态信息、用于使得用户能够返回到应用程序136-1的前一状态或视图的状态队列、以及用户采取的先前动作的重复/撤销队列。
事件监视器171从外围设备接口118接收事件信息。事件信息包括关于子事件(例如，作为多点触摸手势的一部分的触敏显示器112上的用户触摸)的信息。外围设备接口118传输其从I/O子系统106或传感器(诸如接近传感器166)、一个或多个加速度计168和/或麦克风113(通过音频电路110)所接收的信息。外围设备接口118从I/O子系统106所接收的信息包括来自触敏显示器112或触敏表面的信息。
在一些实施例中，事件监视器171以预先确定的间隔将请求发送至外围设备接口118。作为响应，外围设备接口118传输事件信息。在其他实施例中，外围设备接口118仅当存在显著事件(例如，接收到高于预先确定的噪声阈值的输入和/或接收到超过预先确定的持续时间的输入)时才传输事件信息。
在一些实施例中，事件分类器170还包括命中视图确定模块172和/或活动事件识别器确定模块173。
当触敏显示器112显示多于一个视图时，命中视图确定模块172提供用于确定子事件已在一个或多个视图内的什么地方发生的软件过程。视图由用户能在显示器上看到的控件和其他元件构成。
与应用程序相关联的用户界面的另一方面是一组视图，本文中有时也称为应用程序视图或用户界面窗口，在其中显示信息并且发生基于触摸的手势。在其中检测到触摸的(相应应用程序的)应用程序视图任选地对应于在应用程序的程序化或视图分级结构内的程序化水平。例如，在其中检测到触摸的最低水平视图任选地被叫做命中视图，并且被识别为正确输入的那组事件任选地至少部分地基于开始基于触摸的手势的初始触摸的命中视图来确定。
命中视图确定模块172接收与基于触摸的手势的子事件相关的信息。当应用程序具有以分级结构组织的多个视图时，命中视图确定模块172将命中视图识别为该分级结构中的应当处理该子事件的最低视图。在大多数情况下，命中视图是发起子事件(即形成事件或潜在事件的子事件序列中的第一子事件)在其中发生的最低水平视图。一旦命中视图被命中视图确定模块所识别，命中视图通常接收与其被识别为命中视图所针对的同一触摸或输入源相关的所有子事件。
活动事件识别器确定模块173确定在视图分级结构内的哪个视图或哪些视图应接收特定的子事件序列。在一些实施例中，活动事件识别器确定模块173确定仅命中视图应当接收特定的子事件序列。在其他实施例中，活动事件识别器确定模块173确定包括子事件的物理位置的所有视图是活跃参与的视图，并且因此确定所有活跃参与的视图应接收特定的子事件序列。在其他实施例中，即使触摸子事件完全被局限到与一个特定视图相关联的区域，但是分级结构中更高的视图将仍然保持为活跃参与的视图。
事件分配器模块174将事件信息分配给事件识别器(例如，事件识别器180)。在包括活动事件识别器确定模块173的实施例中，事件分配器模块174将事件信息递送到由活动事件识别器确定模块173确定的事件识别器。在一些实施例中，事件分配器模块174在事件队列中存储事件信息，该事件信息由相应事件接收器模块182进行检索。
在一些实施例中，操作系统126包括事件分类器170。另选地，应用程序136-1包括事件分类器170。在另一个实施例中，事件分类器170是独立的模块，或者是存储在存储器102中的另一个模块(诸如接触/运动模块130)的一部分。
在一些实施例中，应用程序136-1包括多个事件处理程序190和一个或多个应用程序视图191，其中每个应用程序视图包括用于处理发生在应用程序的用户界面的相应视图内的触摸事件的指令。应用程序136-1的每个应用程序视图191包括一个或多个事件识别器180。通常，相应应用程序视图191包括多个事件识别器180。在其他实施例中，事件识别器180中的一个或多个应用程序视图是独立模块的一部分，该独立模块诸如用户界面工具包(未示出)或应用程序136-1从中继承方法和其他属性的更高水平的对象。在一些实施例中，相应事件处理程序190包括以下各项中的一个或多个：数据更新器176、对象更新器177、GUI更新器178、和/或从事件分类器170所接收的事件数据179。事件处理程序190任选地利用或调用数据更新器176、对象更新器177或GUI更新器178以更新应用程序内部状态192。或者，应用程序视图191中的一个或多个应用程序视图包括一个或多个相应事件处理程序190。另外，在一些实施例中，数据更新器176、对象更新器177和GUI更新器178中的一者或多者被包括在相应应用程序视图191中。
相应的事件识别器180从事件分类器170接收事件信息(例如，事件数据179)，并且从事件信息识别事件。事件识别器180包括事件接收器182和事件比较器184。在一些实施例中，事件识别器180还至少包括以下各项的子组：元数据183、和事件递送指令188(其任选地包括子事件递送指令)。
事件接收器182接收来自事件分类器170的事件信息。事件信息包括关于子事件的信息，例如触摸或触摸移动。根据子事件，事件信息还包括附加信息，诸如子事件的位置。当子事件涉及触摸的运动时，事件信息还任选地包括子事件的速率和方向。在一些实施例中，事件包括设备从一个取向旋转到另一个取向(例如，从纵向取向旋转到横向取向，或反之亦然)，并且事件信息包括关于设备的当前取向(也被称为设备姿态)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较，并基于比较来确定事件或子事件，或确定或更新事件或子事件的状态。在一些实施例中，事件比较器184包括事件定义186。事件定义186包含事件的定义(例如，预定义的子事件序列)，例如事件1(187-1)、事件2(187-2)以及其他事件。在一些实施例中，事件187中的子事件例如包括触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。在一个实例中，事件1(187-1)的定义是在被显示对象上的双击。例如，双击包括被显示对象上的预先确定时长的第一次触摸(触摸开始)、预先确定时长的第一次抬起(触摸结束)、被显示对象上的预先确定时长的第二次触摸(触摸开始)以及预先确定时长的第二次抬起(触摸结束)。在另一个实例中，事件2(187-2)的定义是被显示对象上的拖动。例如，拖动包括被显示对象上的预先确定时长的触摸(或接触)、触摸在触敏显示器112上的运动、以及触摸的抬起(触摸结束)。在一些实施例中，事件还包括用于一个或多个相关联的事件处理程序190的信息。
在一些实施例中，事件定义187包括用于相应的用户界面对象的事件的定义。在一些实施例中，事件比较器184执行命中测试以确定哪个用户界面对象与子事件相关联。例如，在其中在触敏显示器112上显示三个用户界面对象的应用程序视图中，当在触敏显示器112上检测到触摸时，事件比较器184执行命中测试以确定这三个用户界面对象中的哪个用户界面对象与该触摸(子事件)相关联。如果每个所显示的对象与相应的事件处理程序190相关联，则事件比较器使用该命中测试的结果来确定哪个事件处理程序190应当被激活。例如，事件比较器184选择与子事件和触发该命中测试的对象相关联的事件处理程序。
在一些实施例中，相应事件187的定义还包括延迟动作，该延迟动作延迟事件信息的递送，直到已确定子事件序列是否确实对应于或不对应于事件识别器的事件类型之后。
当相应事件识别器180确定子事件串不与事件定义186中的任何事件匹配时，该相应事件识别器180进入事件不可能、事件失败或事件结束状态，在此之后不理会基于触摸的手势的后续子事件。在这种情况下，对于命中视图保持活动的其他事件识别器(如果有的话)继续跟踪和处理持续的基于触摸的手势的子事件。
在一些实施例中，相应事件识别器180包括具有指示事件递送系统应该如何执行对活跃参与的事件识别器的子事件递送的可配置的属性、标记和/或列表的元数据183。在一些实施例中，元数据183包括指示事件识别器彼此如何交互或如何能够进行交互的可配置的属性、标志和/或列表。在一些实施例中，元数据183包括指示子事件是否被递送到视图或程序化分级结构中的变化的水平的可配置的属性、标记和/或列表。
在一些实施例中，当事件的一个或多个特定子事件被识别时，相应事件识别器180激活与事件相关联的事件处理程序190。在一些实施例中，相应事件识别器180将与该事件相关联的事件信息递送到事件处理程序190。激活事件处理程序190不同于将子事件发送(和延期发送)到相应的命中视图。在一些实施例中，事件识别器180抛出与所识别的事件相关联的标记，并且与该标记相关联的事件处理程序190获取该标记并执行预定义的过程。
在一些实施例中，事件递送指令188包括递送关于子事件的事件信息而不激活事件处理程序的子事件递送指令。相反，子事件递送指令将事件信息递送到与子事件串相关联的事件处理程序或者递送到活跃参与的视图。与子事件串或与活跃参与的视图相关联的事件处理程序接收事件信息并执行预先确定的过程。
在一些实施例中，数据更新器176创建和更新在应用程序136-1中使用的数据。例如，数据更新器176对联系人模块137中所使用的电话号码进行更新，或者对视频播放器模块145中所使用的视频文件进行存储。在一些实施例中，对象更新器177创建和更新在应用程序136-1中所使用的对象。例如，对象更新器176创建新的用户界面对象或更新用户界面对象的位置。GUI更新器178更新GUI。例如，GUI更新器178准备显示信息，并将其发送到图形模块132以用于显示在触敏显示器上。
在一些实施例中，一个或多个事件处理程序190包括数据更新器176、对象更新器177和GUI更新器178或者具有对数据更新器176、对象更新器177和GUI更新器178的访问权限。在一些实施例中，数据更新器176、对象更新器177和GUI更新器178被包括在相应应用程序136-1或应用程序视图191的单个模块中。在其他实施例中，它们被包括在两个或更多个软件模块中。
应当理解，关于触敏显示器上的用户触摸的事件处理的上述讨论也适用于利用输入设备操作多功能设备100的其他形式的用户输入，并不是所有用户输入都是在触摸屏上发起的。例如，任选地与单个或多个键盘按下或保持协作的鼠标移动和鼠标按钮按下；触摸板上的接触移动(诸如点击、拖动、滚动等)；触笔输入；设备的移动；口头指令；所检测到的眼睛移动；生物特征输入；和/或其任意组合任选地被用作与定义要被识别的事件的子事件对应的输入。
图2根据一些实施例示出了具有触摸屏112的便携式多功能设备100。触摸屏任选地在用户界面(UI)200内显示一个或多个图形。在该实施例中，以及在下文中描述的其他实施例中，用户能够通过例如利用一根或多根手指202(在附图中没有按比例绘制)或者利用一个或多个触笔203(在附图中没有按比例绘制)在图形上作出手势来选择这些图形中的一个或多个图形。在一些实施例中，当用户中断与一个或多个图形的接触时，发生对这一个或多个图形的选择。在一些实施例中，手势任选地包括一次或多次轻击、一次或多次轻扫(从左向右、从右向左、向上和/或向下)和/或已与设备100发生接触的手指的滚动(从右向左、从左向右、向上和/或向下)。在一些具体实施中或在一些情况下，不经意地与图形接触不会选择图形。例如，当对应于选择的手势是轻击时，在应用程序图标上方扫动的轻扫手势任选地不会选择对应的应用程序。
设备100还任选地包括一个或多个物理按钮，诸如“home”按钮或菜单按钮204。如前所述，菜单按钮204任选地用于导航到任选地在设备100上被执行的一组应用程序中的任何应用程序136。另选地，在一些实施例中，菜单按钮被实现为显示在触摸屏112上的GUI中的软键。
在一个实施例中，设备100包括触摸屏112、菜单按钮204、用于对设备开关机供电并用于锁定设备的下压按钮206、一个或多个音量调节按钮208、用户身份模块(SIM)卡槽210、耳麦接口212、和对接/充电外部端口124。下压按钮206任选地被用于通过按下该按钮并将该按钮保持在按下状态预定义的时间间隔来对设备开关机；通过按下该按钮并在经过了预定义的时间间隔之前释放该按钮来锁定设备；和/或对设备进行解锁或发起解锁过程。在一个另选的实施例中，设备100还通过麦克风113接受用于激活或去激活某些功能的言语输入。设备100还任选地包括用于检测触摸屏112上的接触的强度的一个或多个接触强度传感器165、和/或用于为设备100的用户生成触觉输出的一个或多个触觉输出发生器167。
图3是根据一些实施例的具有显示器和触敏表面的示例性多功能设备的框图。设备300不必是便携式的。在一些实施例中，设备300是膝上型计算机、台式计算机、平板电脑、多媒体播放器设备、导航设备、教育设备(诸如儿童学习玩具)、游戏系统或控制设备(例如，家用或工业用控制器)。设备300通常包括一个或多个处理单元(CPU)310、一个或多个网络或其他通信接口360、存储器370、和用于使这些部件互连的一条或多条通信总线320。通信总线320任选地包括使系统部件互连并且控制系统部件之间的通信的电路(有时叫做芯片组)。设备300包括具有显示器340的输入/输出(I/O)接口330，该显示器通常是触摸屏显示器。I/O接口330还任选地包括键盘和/或鼠标(或其他指向设备)350和触摸板355、用于在设备300上生成触觉输出的触觉输出发生器357(例如，类似于以上参考图1A所述的一个或多个触觉输出发生器167)、传感器359(例如，光学传感器、加速度传感器、接近传感器、触敏传感器、和/或类似于以上参考图1A所述的一个或多个接触强度传感器165的接触强度传感器)。存储器370包括高速随机存取存储器，诸如DRAM、SRAM、DDR RAM或其他随机存取固态存储器设备；并且任选地包括非易失性存储器，诸如一个或多个磁盘存储设备、光盘存储设备、闪存存储器设备或其他非易失性固态存储设备。存储器370任选地包括远离一个或多个CPU 310定位的一个或多个存储设备。在一些实施例中，存储器370存储与便携式多功能设备100(图1A)的存储器102中所存储的程序、模块和数据结构类似的程序、模块、和数据结构，或它们的子组。此外，存储器370任选地存储在便携式多功能设备100的存储器102中不存在的另外的程序、模块、和数据结构。例如，设备300的存储器370任选地存储绘图模块380、呈现模块382、文字处理模块384、网站创建模块386、盘编辑模块388、和/或电子表格模块390，而便携式多功能设备100(图1A)的存储器102任选地不存储这些模块。
图3中的上述所识别的元件中的每一个元件任选地存储在一个或多个先前提到的存储器设备中。上述模块中的每个模块对应于用于执行上述功能的一组指令。上述模块或程序(即，指令集)不必被实现为单独的软件程序、过程或模块，并且因此这些模块的各种子组任选地在各种实施例中被组合或以其他方式重新布置。在一些实施例中，存储器370任选地存储上述模块和数据结构的子组。此外，存储器370任选地存储上面未描述的另外的模块和数据结构。
现在将注意力转到任选地在便携式多功能设备100上实现的用户界面(“UI”)的实施例。
图4A根据一些实施例示出了便携式多功能设备100上的用于应用程序的菜单的示例性用户界面。类似的用户界面任选地在设备300上实现。在一些实施例中，用户界面400包括以下元素或者其子集或超集：
●具有状态图标的状态条401，诸如：
○一个或多个无线通信(诸如蜂窝信号和Wi-Fi信号)的信号强度指示符402；
○时间404；
○蓝牙指示符405；
○电池状态指示符406；
●具有常用应用程序的图标的托盘408，常用应用程序的图标诸如：
○标记为“电话”的用于电话模块138的图标416，该图标416任选地包括未接来电或语音留言的数量的指示符414；
○标记为“邮件”的用于电子邮件客户端模块140的图标418，该图标418任选地包括未读电子邮件的数量的指示符410；
○标记为“浏览器”的用于浏览器模块147的图标420；和
○标记为“iPod”的用于视频和音乐播放器模块152(也叫做iPod(Apple Inc.的商标)模块152)的图标422；以及
●其他应用程序图标，诸如：
○标记为“消息”的用于IM模块141的图标424；
○标记为“日历”的用于日历模块148的图标426；
○标记为“照片”的用于图像管理模块144的图标428；
○标记为“相机”的用于相机模块143的图标430；
○标记为“在线视频”的用于在线视频模块155的图标432；
○标记为“股市”的用于股市桌面小程序149-2的图标434；
○标记为“地图”的用于地图模块154的图标436；
○标记为“天气”的用于天气桌面小程序149-1的图标438；
○标记为“时钟”的用于闹钟桌面小程序149-4的图标440；
○标记为“健身支持”的用于健身支持模块142的图标442；
○标记为“记事本”的用于记事本模块153的图标444；和
○设置应用程序或模块的图标446，该图标446提供对设备100及其各种应用程序136的设置的访问。
应当指出的是，图4A中示出的图标标签仅仅是示例性的。例如，视频和音乐播放器模块152的图标422被标记为“音乐”或“音乐播放器”。其他标签任选地用于各种应用程序图标。在一些实施例中，相应应用程序图标的标签包括与该相应应用程序图标对应的应用程序的名称。在一些实施例中，特定应用程序图标的标签不同于与该特定应用程序图标对应的应用程序的名称。
图4B示出了具有与显示器450(例如，触摸屏显示器112)分开的触敏表面451(例如，图3中的平板电脑或触摸板355)的设备(例如，图3中的设备300)上的示例性用户界面。设备300任选地也包括用于检测触敏表面451上的接触的强度的一个或多个接触强度传感器(例如，传感器357中的一个或多个传感器)、和/或用于为设备300的用户生成触觉输出的一个或多个触觉输出发生器359。
尽管将参考触摸屏显示器112(其中组合了触敏表面和显示器)上的输入给出随后的实例中的一些实例，但在一些实施例中，设备检测与显示器分开的触敏表面上的输入，如图4B中所示。在一些实施例中，触敏表面(例如，图4B中的451)具有与显示器(例如，450)上的主轴线(例如，图4B中的453)对应的主轴线(例如，图4B中的452)。根据这些实施例，设备检测在与显示器上的相应位置对应的位置(例如，在图4B中，460对应于468并且462对应于470)处与触敏表面451的接触(例如，图4B中的460和462)。这样，在触敏表面(例如，图4B中的451)与多功能设备的显示器(例如，图4B中的450)分开时，由设备在触敏表面上检测到的用户输入(例如，接触460和462以及它们的移动)被该设备用于操纵显示器上的用户界面。应当理解，类似的方法任选地用于本文所述的其他用户界面。
另外，虽然主要参考手指输入(例如，手指接触、手指轻击手势、手指轻扫手势)来给出下面的实例，但应当理解，在一些实施例中，这些手指输入中的一个或多个手指输入由来自另一输入设备的输入(例如，基于鼠标的输入或触笔输入)替代。例如，轻扫手势任选地由鼠标点击(例如，而不是接触)然后由光标沿着轻扫的路径移动(例如，而不是接触的移动)替代。又如，轻击手势任选地由在光标位于轻击手势的位置上方时的鼠标点击(例如，而不是检测到接触，之后终止检测接触)替代。类似地，当同时检测到多个用户输入时，应当理解，多个计算机鼠标任选地被同时使用，或一个鼠标和多个手指接触任选地被同时使用。
用户界面和相关联的过程
现在将注意力转到可在具有显示器和触敏表面的电子设备(诸如设备300或便携式多功能设备100)上实现的用户界面(“UI”)及相关联的过程的实施例。
图5A-5K根据一些实施例示出了用于调节控件的外观的假想的示例性用户界面。这些附图中的用户界面被用于示出下文描述的过程，包括图9A-图9B中的过程。
图5A示出了在触摸屏112上显示的示例性用户界面502。用户界面502包括内容(例如数字图像和/或其他图形)。半透明键盘518被显示在显示器的预定义区域504中。
图5B示出了与预定区域504对应的第一内容506。设备确定第一内容506的内容显示属性。
图6根据一些实施例示例性地示出了为控件被显示在其中的区域中的内容确定的假想的示例性的一组内容显示属性值。例如，设备确定与区域504对应的第一内容506的色调、饱和度、亮度、和对比度的值。
设备基于所确定的第一内容506的内容显示属性值来确定键盘518的控件外观参数值。为清楚起见，如在本说明书和权利要求书中所使用的，“基于...”意思是“至少部分地基于...”。例如，设备至少部分地基于控件被显示在上方的显示器区域中的内容的所确定的内容显示属性值来确定该控件的控件外观参数值。除了控件被显示在上方的显示器区域中的内容的所确定的内容显示属性值之外，所确定的控件的控件外观参数值任选地还基于附加因素。
图7是根据一些实施例的已被分配给可被用于经由插补法确定控件外观值的对应的预定组的控件外观值的假想的预定组的内容显示值的示意图。
图8根据一些实施例示例性地示出了控件的假想的示例性的一组控件外观参数值。
在一些实施例中，设备使用内容显示值(例如图7)与控件外观值的先前映射来确定以下各项的值：模糊半径、饱和度调节、白色叠层的不透明度、黑色叠层的不透明度、键盘518中的用户界面元件的不透明度、和/或键盘518中的文本的颜色(例如图8)。
图5A中的键盘518的外观基于第一内容506和用于模糊半径、饱和度调节、白色叠层的不透明度、黑色叠层的不透明度、键盘518中的用户界面元件的不透明度、和/或键盘518中的文本的颜色的所确定的第一组控件外观值。例如，在图5A中，区域504中的第一内容506已根据模糊半径值被模糊(如通过比较图5A和图5B看到的那样)，文本颜色是白色等等。在一些实施例中，区域504中的第一内容506的模糊由可重入窗管理器来执行，如于2012年2月3日提交的标题为“Reentrant Window Manager”的美国临时专利申请No.13/366,181中所述的，该美国临时专利申请全文以引用方式并入本文。
图5A还示出了两个不同手势510和512，其中每个手势都使得图5A中的数字图像能够平移，使得数字图像的新部分被显示在用户界面502中。轻扫手势510将数字图像平移到图5C中所示的数字图像的那个部分。轻扫手势512将数字图像平移到图5D-5F中所示的数字图像的那个部分。
在图5C中，与区域504(键盘518位于那里)对应的内容已从第一内容506变为第二内容508-1。设备检测到内容的这个变化，并确定用于第二内容508-1的第二组内容显示值。继而，设备确定第二组控件外观值，并根据第二内容508-1和第二组控件外观值来改变键盘518的外观。在该实例中，键盘518仍然在键盘上显示白色文本，但第二内容508-1(与第一内容506相比)较不模糊，因为模糊半径的值更小。
图5D示出了与控件外观值改变相比，内容任选地移动得更快。在图5D中，与区域504(键盘518位于那里)对应的内容刚刚从第一内容506变为第二内容508-2。键盘518的外观已改变，因为与区域504对应的内容从第一内容506变为第二内容508-2。然而在该实例中，设备还没有确定或应用第二组控件外观值，使得相反第一组控件外观值被应用。
图5A、5E、和5F示出了从具有白色按键的键盘518(图5A)到具有黑色按键的键盘518(图5F)的改变任选地经由具有白色按键和基于内容508-2的内容显示值的经更新的一组控件外观值的中间键盘518(图5E)来进行。在图5E中，与区域504(键盘518位于那里)对应的内容已从第一内容506变为第二内容508-2。设备检测到内容的这个变化，并确定用于第二内容508-2的第二组内容显示值。继而，设备确定相应的经更新的一组控件外观值，并根据第二内容508-1和经更新的这组控件外观值来改变键盘518的外观。在该实例中，键盘518(在切换为显示图5F中的按键上的黑色文本之前)仍然显示图5E中的按键上的白色文本，但图5E中的键盘的外观不同于图5D中的键盘518的外观。图5E中的键盘使用基于内容508-2的内容显示值的经更新的一组控件外观值(图5E)，而图5D中的键盘使用第一组控件外观值。使用经更新的这组控件外观值使得图5E中的键盘518比图5D中的键盘更清晰。
在图5F中，与区域504(键盘518位于那里)对应的内容已从第一内容506变为第二内容508-2。设备检测到内容的这个变化，并确定用于第二内容508-2的第二组内容显示值。继而，设备确定第二组控件外观值，并根据第二内容508-2和第二组控件外观值来改变键盘518的外观。在该实例中，键盘518在按键上显示黑色文本(例如由于508-2中更亮的内容)，其他控件外观值也已从图5A中的键盘的那些外观改变。
在显示具有黑色按键的键盘之前基于相应的经更新的一组控件外观值来显示具有白色按键的中间键盘的实施例中(例如当图5E中的键盘在图5F中的键盘之前被显示时)，第二组控件外观值(用于图5F中的具有黑色文本的键盘)将通常包含与经更新的那组控件外观值(用于图5E中的具有白色文本的键盘)不同的控件外观值，而不是仅仅将字母颜色值从白色改为黑色。换句话讲，对于相同的一组内容显示值，具有黑色文本的键盘的控件外观值通常将不同于具有白色文本的键盘的控件外观值，因为为了使具有黑色文本的键盘容易看到和易于使用所需的模糊、饱和度调节、不透明度等的量通常不同于为了使具有白色文本的键盘容易看到和易于使用所需的模糊、饱和度调节、不透明度等的量。在一些实施例中，针对具有黑色文本的键盘所调节的一组控件外观参数不同于针对具有白色文本的键盘所调节的一组控件外观参数。
在一些实施例中，针对暗的控件所调节的一组控件外观参数不同于针对亮的控件所调节的一组控件外观参数。
在一些实施例中，暗的控件是通过在第一内容顶部堆叠(复合)多个层(包括控件元件叠层和黑色叠层)来生成。黑色叠层遮掩第一内容，并具有高的不透明度(例如RGBA＝10-40,10-40,10-40,60-80)。第一内容被模糊(例如模糊半径＝10pts-30pts)，并且其饱和度增大(例如增大20％-40％)。在一些实施例中，暗的控件的控件外观值不依赖于第一内容的内容显示值。
在一些实施例中，亮的控件是通过在第一内容顶部堆叠(复合)多个层(包括控件元件叠层、白色叠层、和彩色叠层)来生成。白色叠层任选地具有高的白电平(例如90％-100％)和低的不透明度(例如20％-40％)。彩色叠层任选地具有基于第一内容的内容显示值的颜色。例如，彩色叠层的色调是第一内容的平均色调，如下文中参考操作923A更一般所述的；彩色叠层的饱和度是内容的平均饱和度的一定的百分比(例如70％-90％)，如下文中参考操作923B更一般所述的；并且亮度低(例如20％-40％)。彩色叠层具有非常低的不透明度(例如5％-15％)。第一内容被模糊(例如模糊半径＝20pts-40pts)，并且其饱和度显著增大(例如增大50％-90％)。
在一些实施例中，特别亮的控件是通过在第一内容顶部堆叠(复合)多个层(包括控件元件叠层和白色叠层，而没有彩色叠层)来生成。白色叠层任选地具有高的白电平(例如90％-100％)以及取决于第一内容的内容显示值的不透明度。例如，不透明度具有默认值(例如在70％-90％之间)，但不透明度值在以下情况下被增大最高至最大值(例如在90％-100％之间)：(1)第一内容的平均亮度增大到高于阈值(例如对于第一内容的平均亮度高于86％的每个百分比添加1％-2％)，如下文中参考操作923C更一般所述的；(2)第一内容的平均亮度降低到低于阈值(例如对于第一内容的平均亮度低于20％的每个百分比添加1％-2％)，如下文中参考操作923C更一般所述的；或(3)第一内容的平均饱和度增大到高于阈值(例如对于第一内容的平均饱和度高于70％的每个百分比添加1％-2％)，如下文中参考操作923D更一般所述的。第一内容被模糊(例如模糊半径＝10pts-40pts)，并且其饱和度显著增大(例如增大50％-90％)。
在一些实施例中，彩色控件通过在第一内容上面堆叠多个层(包括控件元件叠层、白色叠层、和彩色叠层)来生成。彩色叠层可以是任何颜色，并且具有相当大的不透明度(例如70％-90％)。白色叠层具有高的白电平(例如90％-100％)以及取决于第一内容的内容显示值的不透明度。例如，添加1％-2％的不透明度：(1)对于第一内容的平均亮度低于阈值(例如在40％-60％之间)的每个百分比，如下文中参考操作923C更一般所述的；和(2)对于第一内容的平均饱和度高于阈值(例如在60％-80％之间)的每个百分比，如下文中参考操作923D更一般所述的。第一内容被模糊(例如模糊半径＝10pts-30pts)，并且其饱和度显著增大(例如增大50％-100％)。
图5F还示出了捏合手势514，该捏合手势使得设备缩小图5F中的数字图像，使得数字图像的新部分被显示在用户界面502中，如图5G中所示的。
在图5G中，与区域504(键盘518位于那里)对应的内容已从第二内容508-2变为内容516。设备检测到内容的这个变化，并确定内容516的新的一组内容显示值。继而，设备确定新的一组控件外观值，并根据内容516和新的一组控件外观值来改变键盘518的外观。在该实例中，键盘518从显示黑色文本变为显示白色文本(例如由于516中更暗的内容)，并且其他控件外观值也改变。
在一些实施例中，半透明的控件和其他类型的半透明的用户界面元件被堆叠在彼此上方。例如，在图5H中，当按钮208被按下时，半透明的铃声音量调节指示符520出现在半透明的键盘518顶部。在一些实施例中，底部半透明元件中的控件元件不被显示在顶部半透明元件下方，这降低了视觉杂乱并使顶部半透明元件更容易查看。例如，在图5H中，键盘518的在半透明铃声音量调节指示符520下方的部分中的按键不被显示。相反，只是显示半透明铃声音量调节指示符520下方的模糊内容(其对应于半透明铃声音量调节指示符520的第一内容)。
在一些实施例中，控件被显示在包括背景和一个或多个高对比度元件(例如文本、滑块、按钮或其他控件元件)的“底部”半透明元件上方，并且底部半透明元件中的高对比度元件在控件下方不被显示(例如控件的外观是基于下方的第一内容，并且任选地还基于控件元件的背景，同时忽略底部半透明元件中的高对比度元件。在一些实施例中，在控件被显示时，“顶部”半透明元件被显示在控件上方，并且控件中的高对比度元件在顶部半透明元件下方不被显示。在一些实施例中，在显示器的相应区域中显示控件包括：确定显示器的相应区域是否包括控件将被显示在其上方的相应半透明控件，根据确定显示器的相应区域包括控件将被显示在其上方的相应半透明元件，调节第一组控件外观值中的一个或多个控件外观值以降低相应半透明元件的高对比度元件透过控件的可视性；以及根据确定显示器的相应区域不包括控件将被显示在其上方的相应半透明元件，不调节第一组控件外观值中的一个或多个控件外观值。
在一些实施例中，当控件或其他半透明的用户界面元件最初被显示时，模糊动画被显示。例如，响应于激活个人数字助理(例如通过按下图5I中的按钮204)，动画被显示，其使得图5J中的内容看起来随着用于个人数字助理的用户界面元件(例如图5J中的文本“我能帮您做什么？”、声音波形、和“？”图标)被显示而回退到显示器112中(或者缩小)并变得模糊，如图5J中所示的。在一些实施例中，这个效应类似于图5J中的内容向后移出镜头的焦平面(例如内容在显示器中回退并随着其回退而逐渐离焦)。在一些实施例中，如果内容没有大到足以缩小内容以使得内容看起来向后回退，则内容通过将预定义数量的像素(例如5个像素、10个像素、15个像素或20个像素)从内容的边缘朝着显示器的边缘反射，使得在内容的边缘和显示器的边缘之间没有间隙来在边缘处延伸。一种示例性个人数字助理是来自Apple Inc.(Cupertino,California)的Siri。
在一些实施例中，控件内的第一内容的一些部分可被显示而没有模糊。在一些实施例中，控件包括预定义控件区域和一个或多个元件；并且在显示器的相应区域中显示控件包括：通过根据第一组控件外观值向控件区域中的第一内容应用一组一个或多个变换(例如模糊、饱和度变化、色移)来指示预定义控件区域的范围；以及通过在相应可激活元件的位置处(并且以相应可激活元件的形状)不应用该组一个或多个变换中的相应变换来指示控件中的相应元件的位置。例如，在图5K中，设备在被模糊和去饱和的预定义区域中显示滑块控件522，并且在滑块控件内有未被模糊、去饱和或以其他方式变换的切口子区域524。在图5K中，切口子区域对应于预定义路径，拇指图标526被配置为(例如响应于用户输入，诸如开始于拇指图标526上的轻击和拖动手势)沿该预定义路径移动。因此，对于在相应半透明控件下方显示控件的经变换的型式的相应半透明控件(或其他半透明元件)，一种将相应半透明控件的相应区域(例如包括按钮、滑块、文本输入字段等的区域)与相应半透明控件的其他区域区分开的方式是使相应半透明控件的相应区域透明(例如通过不应用在控件的其他区域中应用的变换以生成在控件下方显示的内容的经变换的型式)，使得相应区域看起来穿过控件。显示具有透明区域的半透明控件在用户正在查看内容(例如图片、视频、文本)时特别有用，因为控件的透明和半透明部分仍然允许用户看到控件下方的内容，从而使得用户能够更快且更高效地操作设备。
图9A-9G是示出了根据一些实施例的调节控件的外观的方法900的流程图。方法900是在具有显示器并且任选地具有触敏表面的电子设备(例如，图3中的设备300；或图1A中的便携式多功能设备100)处执行。在一些实施例中，显示器是触摸屏显示器，并且触敏表面在显示器上。在一些实施例中，显示器与触敏表面是分开的。方法900中的一些操作任选地被组合，和/或一些操作的顺序任选地被改变。
如下文中所述，方法900提供外观比不透明控件或比简单地以固定方式模糊下方的内容的半透明控件更少地使人分心的半透明控件。同时，方法900提供了容易看到且易于交互的半透明控件。总体而言，方法900提供了减小对用户所造成的认知负担并生成更有效的人机界面的半透明控件。
设备在显示器上显示(902)用户界面(例如，图5A中的用户界面502)。
设备(例如通过检索或计算)确定(904)与显示器的相应区域对应的第一内容的一个或多个内容显示属性(例如色调、饱和度、亮度、对比度)的第一组内容显示值。在一些实施例中，第一内容是键盘其他控件在其上方显示(例如在显示器的预先确定或预定义的区域中)的网页或图像的一部分。例如，设备确定与显示器112的区域504对应的第一内容506的色调、饱和度、亮度、和对比度的第一组内容显示值(例如图6)，如图5B中所示。
在一些实施例中，相应区域中的内容的相应内容显示值对应于(906)相应区域的相应视觉属性的统计测量(例如平均或标准偏差)。例如，设备可确定区域504中的第一内容506的色调、饱和度、亮度、和/或对比度的平均值。在一些实施例中，为了减少开销和提高计算效率，统计测量包括只对相应区域中的像素的子集采样并且确定经采样的像素的统计测量。例如，设备可对控件506中的像素进行采样。在一些实施例中，设备在内容506上方两次经过，第一经过对每第43个像素进行采样，并且第二经过对每第51个像素进行采样。
在一些实施例中，内容显示属性包括(908)以下各项中的一者或多者：颜色、色调、饱和度、亮度、和对比度。在一些实施例中，对比度基于对多个经采样的像素的亮度的标准偏差的测量。
设备基于第一组内容显示值来确定(910)(例如通过选择或计算)一个或多个控件外观参数的第一组控件外观值，如图6-8中示意性示出的。
在一些实施例中，相应控件外观值的变化对应于(912)相应变换的量值的变化，该相应变换被应用于控件下方的内容以生成控件的外观。例如，模糊半径的变化对应于被应用于内容506(图5B)以生成键盘518的外观(图5A)的模糊变换的量值的变化。
在一些实施例中，控件外观参数包括(914)以下各项中的一者或多者：模糊半径(例如应用于相应区域中的内容的模糊操作的半径)、饱和度调节(例如改变相应区域中的内容的饱和度)、白色叠层的不透明度(例如相应区域中的内容与控件的可选部分(诸如按键的键帽)之间的白色层的不透明度)、黑色叠层的不透明度(例如相应区域中的内容与控件的可选部分(诸如按键的键帽)之间的黑色层的不透明度)、控件的一个或多个可选部分的不透明度(例如虚拟键盘的键帽或通知中的按钮的不透明度)、和控件中的文本的颜色(例如键盘上的字母或下拉菜单中的字词的颜色，诸如黑色或白色)。
在一些实施例中，确定第一组控件外观值包括(916)：存储与相应的预定义组的控件外观对应值的多个相应的预定义组的内容显示值；将接近第一组内容显示值的一个或多个预定义组的内容显示值识别为邻近组的内容显示值(例如识别M维空间中最接近的N组预定义的控件外观值，其中M是由每组内容显示值表示的内容显示属性的数量)；以及基于与所述一个或多个邻近组的内容显示值对应的一个或多个预定义组的控件外观值来确定第一组控件外观值。在一些实施例中，第一组控件外观值是所述预定义组的控件外观值中的一个控件外观值。在一些实施例中，第一组控件外观值是预定义的两组或更多组的控件外观值之间的插补。在一些实施例中，预定义组的控件外观值是由人类设计师/艺术家基于具有对应一组预定义内容显示值的样本内容所确定/所选择的值，以使得半透明性最大化，同时保持在相应内容上方所显示的控件的可识别性。
在一些实施例中，确定第一组内容显示值包括(918)将第一组内容显示值用作算法的输入，该算法生成控件外观值作为输出。
设备在显示器的相应区域中显示(920)控件(例如在第一内容前面显示半透明的键盘、工具栏、提示消息、或菜单诸如设置菜单和文件菜单，因为控件在用户界面中的对象的z轴次序(从前到后的次序)中在第一内容上方)，其中控件的外观是基于第一内容和第一组控件外观值来确定。例如，在图5A中，设备在显示器112的区域504中显示键盘518。图5A中键盘518的外观基于第一内容506和第一组控件外观值(例如图8)来确定。
在一些实施例中，控件包括(922)半透明部分，并且显示控件包括在控件的半透明部分中显示第一内容的与控件半透明部分对应的一部分的表示，其中第一内容的表示根据第一组控件外观值来变换(例如从第一内容的未遮掩渲染变换为被控件的半透明部分遮掩的第一内容的渲染)。例如，在图5A中，键盘518包括半透明部分，并且显示键盘518包括在键盘518的半透明部分中显示第一内容506的与键盘518的半透明部分对应的一部分的表示。第一内容506的表示根据第一组控件外观值从第一内容的未遮掩渲染(图5B)变换为被控件的半透明部分遮掩的第一内容506的渲染(图5A)。
在一些实施例中，控件的颜色基于下面内容的颜色来调节。在一些实施例中，第一组内容显示值包括与显示器的相应区域对应的第一内容的内容颜色值(例如相应区域中的第一内容的平均颜色)；第一组控件外观值包括基于第一内容的内容颜色(色调)值选择的控件颜色值；并且显示控件包括(923A)：向第一内容应用模糊操作以生成第一模糊内容；以及在第一模糊内容上方覆盖半透明彩色层，其中：半透明彩色层具有由控件颜色值所指定的颜色(例如色调值、一组RGB值、一组CMYK值或者所限定的另一种颜色)；透过半透明彩色层能看到第一模糊内容；并且第一模糊内容的透过半透明彩色层的外观取决于半透明彩色层的颜色。在一些实施例中，当与显示器的相应区域对应的内容改变使得相应区域中的内容的平均内容颜色值变为经更新的平均内容颜色值时，设备基于经更新的平均内容颜色值针对半透明彩色层选择不同的控件颜色值。
在一些实施例中，控件的饱和度基于下面的内容的饱和度来调节。在一些实施例中，第一组内容显示值包括与显示器的相应区域对应的第一内容的内容饱和度值(例如相应区域中的第一内容的平均饱和度)；第一组控件外观值包括基于第一内容的内容饱和度值所选择的控件饱和度值；并且显示控件包括(923B)：向第一内容应用模糊操作以生成第一模糊内容；以及在第一模糊内容上方覆盖半透明彩色层，其中：半透明彩色层具有由控件饱和度值所指定的饱和度(例如饱和度水平或饱和度程度)；透过半透明彩色层能看到第一模糊内容；并且第一模糊内容的透过半透明彩色层的外观取决于半透明彩色层的饱和度。在一些实施例中，当与显示器的相应区域对应的内容改变使得相应区域中的内容的平均内容饱和度值变为经更新的平均内容饱和度值时，设备基于经更新的平均内容饱和度值针对半透明彩色层选择不同的控件饱和度值。
在一些实施例中，控件的不透明度基于下面的内容的亮度来调节。在一些实施例中，第一组内容显示值包括与显示器的相应区域对应的第一内容的内容亮度值(例如相应区域中的第一内容的平均亮度)；第一组控件外观值包括基于第一内容的内容亮度值所选择的控件不透明度值；并且显示控件包括(923C)：向第一内容应用模糊操作以生成第一模糊内容；以及在第一模糊内容上方覆盖半透明层，其中：半透明层具有由控件不透明度值所指定的不透明度(例如不透明度水平或不透明度程度)；透过半透明层能看到第一模糊内容；并且第一模糊内容的透过半透明层的外观取决于半透明层的不透明度。在一些实施例中，当与显示器的相应区域对应的内容改变使得相应区域中的内容的平均内容亮度值变为经更新的平均内容亮度值时，设备基于经更新的平均内容亮度值针对半透明层选择不同的控件不透明度值。
在一些实施例中，控件的不透明度基于下面的内容的饱和度来调节。在一些实施例中，第一组内容显示值包括与显示器的相应区域对应的第一内容的内容饱和度值(例如相应区域中的第一内容的平均饱和度)；第一组控件外观值包括基于第一内容的内容饱和度值所选择的控件不透明度值；并且显示控件包括(923D)：向第一内容应用模糊操作以生成第一模糊内容；以及在第一模糊内容上方覆盖半透明层，其中：半透明层具有由控件颜色值所指定的不透明度(例如不透明度水平或不透明度程度)；透过半透明层能看到第一模糊内容；并且第一模糊内容的透过半透明层的外观取决于半透明层的不透明度。在一些实施例中，当与显示器的相应区域对应的内容改变使得相应区域中的内容的平均内容饱和度值变为经更新的平均内容饱和度值时，设备基于经更新的平均内容饱和度值针对半透明层选择不同的控件不透明度值。
在一些实施例中，在显示显示器的相应区域中的控件(924)时：设备检测到与显示器的相应区域对应的内容的从第一内容到不同于第一内容的第二内容的变化(例如响应于手势而滚动网页或照片或者加载新内容，使得控件后面的显示器的相应区域中的内容改变)；确定第二内容的一个或多个内容显示属性(例如色调、饱和度、亮度、和/或对比度)的与第一组内容显示值不同的第二组内容显示值；基于第二组内容显示值来确定一个或多个控件外观参数的第二组控件外观值，其中第二组控件外观值不同于第一组控件外观值；并且响应于检测到内容改变，根据第二内容和第二组控件外观值来改变控件的外观。在一些实施例中，设备以预定间隔(例如每秒钟四次)检查半透明控件后面的内容的变化。在一些实施例中，设备响应于检测到与内容调节对应的手势(例如与平移或滚动内容相关联的轻扫手势、与调整内容大小相关联的捏合或扩拨手势、或与加载内容相关联的轻击手势)来检查内容的变化。在一些实施例中，设备响应于接收到来自应用程序的关于新内容正被加载的报告(例如响应于接收到来自web浏览器的关于新图像已被加载在键盘下方的框架中的报告)来检查内容的变化。
在一些实施例中，改变控件的外观包括改变(926)控件中的文本的颜色(例如从图5F中的黑色字母改为图5G中的白色字母)。
在一些实施例中，控件包括(928)半透明部分，并且根据第二组控件外观值改变控件的外观包括在控件的半透明部分中显示第二内容的与控件半透明部分对应的一部分的表示，其中第二内容的表示根据第二组控件外观值来变换(例如从第二内容的未遮掩渲染变换为被控件的半透明部分遮掩的第二内容的渲染)。例如，在图5F中，键盘518包括半透明部分，并且显示键盘518包括在键盘518的半透明部分中显示第二内容508-2的与键盘518的半透明部分对应的一部分的表示。第二内容508-2的表示根据第二组控件外观值从第二内容508-2的未遮掩渲染(未示出，但类似于图5B中的用于第一内容506的未遮掩渲染)变换为被控件的半透明部分遮掩的第二内容508-2的渲染(图5F)。
在一些实施例中，第一组控件外观值是(930)第一组控件外观参数(例如白色键盘控件外观参数)的值，并且第二组控件外观值是第一组控件外观参数(例如白色键盘控件外观参数)的值。例如，图5A中的键盘的第一组控件外观值针对第一组控件外观参数(例如图8)，并且图5C中的键盘的第二组控件外观值针对同样的第一组控件外观参数(例如图8)。
在一些实施例中，第一组控件外观值是(932)第一组控件外观参数(例如白色键盘控件外观参数)的值，并且第二组控件外观值是不同于第一组控件外观参数的第二组控件外观参数(例如黑色键盘控件外观参数)的值。例如，亮的控件(例如半透明的白色键盘)任选地具有与暗的控件(例如半透明的黑色键盘)不同的一组控件外观参数。
在一些实施例中，在检测到与显示器的相应区域对应的内容从第一内容到第二内容的变化之后并且在根据第二组控件显示值改变控件的外观(934)之前(例如在显示图5F中的用于第二内容508-2的黑色键盘之前)：设备基于第二组内容显示值来确定第一组控件外观参数的与第一组控件外观值不同的相应的一组控件外观值，其中该相应的一组控件外观值不同于第一组控件外观值和第二组控件外观值；并且根据第二内容和该相应的一组控件外观值来改变控件的外观。例如，如上所述，图5A、5E、和5F示出了从具有白色按键(图5A)的键盘518到具有黑色按键(图5F)的键盘518的变化任选地经由具有白色按键和基于内容508-2(图5E)的内容显示值的经更新的一组控件外观值的中间键盘518来进行。在一些实施例中，设备显示图5E中的具有白色按键的键盘518和图5F中的具有黑色按键的键盘518之间的预定动画过渡。
在一些实施例中，控件包括(936)半透明部分；内容的相应部分(例如控件后面的相应区域中的内容)对应于控件的半透明部分的位置；并且根据相应的一组控件调节值来显示控件包括在控件的半透明部分中显示内容的相应部分的表示，其中内容的相应部分的表示根据该相应的一组控件外观值来变换(例如从内容的相应部分的未遮掩渲染变换为被控件半透明部分遮掩的内容的相应部分的渲染)。例如，在图5A中，键盘518包括半透明部分，并且显示键盘518包括在键盘518的半透明部分中显示第一内容506的与键盘518的半透明部分对应的一部分的表示。第一内容506的表示根据第一组控件外观值从第一内容的未遮掩渲染(图5B)变换为被控件的半透明部分遮掩的第一内容506的渲染(图5A)。
在一些实施例中，在检测到内容从第一内容到第二内容的变化之后并且在根据第二组控件外观值改变控件的外观之前(例如在确定第二组控件外观值之前或在应用第二组控件外观值之前)，设备根据第二内容和第一组控件外观值来改变(938)控件的外观。例如，如上面参考图5D所述的，控件移动得任选地比控件外观值的变化更快。在一些实施例中，控件下方的内容以高的帧速率(例如60fps)移动被以动画方式显示，并且控件外观值以低的帧速率(例如4fps)更新。以高的帧速率更新控件下方的内容的移动使设备感觉是灵敏的，而以低的帧速率更新控件外观值降低了计算需求，而没有显著降低灵敏度。
应当理解，对图9A-9G中的操作进行描述的具体顺序仅仅是示例性的，并非旨在指示所述顺序是这些操作可被执行的唯一顺序。本领域的普通技术人员会想到多种方式来对本文所述的操作进行重新排序。
根据一些实施例，图10示出了根据各种所述实施例的原理进行配置的电子设备1000的功能框图。该设备的功能块任选地由执行各种所述实施例的原理的硬件、软件、或硬件和软件的组合来实现。本领域的技术人员应当理解，图10中所述的功能块任选地被组合或被分离为子块，以便实现各种所述实施例的原理。因此，本文的描述任选地支持本文所述的功能块的任何可能的组合或分割或进一步限定。
如图10所示，电子设备1000包括被配置为显示用户界面的显示单元1002和耦接到显示单元1002的处理单元1006。在一些实施例中，处理单元1006包括确定单元1008、显示启用单元1010、检测单元1012、和改变单元1014。
处理单元1006被配置为：确定与显示单元1002的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值(例如利用确定单元1008)；基于第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值(例如利用确定单元1008)；以及启用对显示单元1002的相应区域中的控件的显示(例如利用显示启用单元1010)，其中控件的外观基于第一内容和第一组控件外观值来确定。
在一些实施例中，相应区域中的内容的相应内容显示值对应于相应区域的相应视觉属性的统计测量。
在一些实施例中，内容显示属性包括以下各项中的一者或多者：颜色、色调、饱和度、亮度、和对比度。
在一些实施例中，相应控件外观值的变化对应于相应变换的量值的变化，该相应变换被应用于控件下方的内容以生成控件外观。
在一些实施例中，控件外观参数包括以下各项中的一者或多者：模糊半径、饱和度调节、白色叠层的不透明度、黑色叠层的不透明度、控件的一个或多个可选部分的不透明度、和控件中的文本的颜色。
在一些实施例中，确定第一组控件外观值包括：存储与相应的预定义组的控件外观值对应的多个相应的预定义组的内容显示值；将接近第一组内容显示值的一个或多个预定义组的内容显示值识别为邻近组的内容显示值；以及基于与所述一个或多个邻近组的内容显示值对应的一个或多个预定义组的控件外观值来确定第一组控件外观值。
在一些实施例中，确定第一组内容显示值包括将第一组内容显示值用作算法的输入，该算法生成控件外观值作为输出。
在一些实施例中，控件包括半透明部分，并且启用对控件的显示包括在控件的半透明部分中启用对第一内容的与控件半透明部分对应的一部分的表示的显示，其中第一内容的表示根据第一组控件外观值来变换。
在一些实施例中，处理单元1006被进一步配置为在启用对显示单元1002的相应区域中的控件的显示时：检测到与显示单元的相应区域对应的内容的从第一内容到不同于第一内容的第二内容的变化(例如利用检测单元1012)；确定第二内容的一个或多个内容显示属性的与第一组内容显示值不同的第二组内容显示值(例如利用确定单元1008)；基于第二组内容显示值来确定一个或多个控件外观参数的第二组控件外观值(例如利用确定单元1008)，其中第二组控件外观值不同于第一组控件外观值；以及响应于检测到内容变换，根据第二内容和第二组控件外观值来改变控件的外观(例如利用改变单元1014)。
在一些实施例中，改变控件的外观包括改变控件中的文本的颜色。
在一些实施例中，控件包括半透明部分，并且根据第二组控件外观值来改变的控件外观包括在控件的半透明部分中显示第二内容的与控件半透明部分对应的一部分的表示，其中第二内容的表示根据第二组控件外观值来变换。
在一些实施例中，第一组控件外观值是第一组控件外观参数的值，并且第二组控件外观值是第一组控件外观参数的值。
在一些实施例中，第一组控件外观值是第一组控件外观参数的值，并且第二组控件外观值是与第一组控件外观参数不同的第二组控件外观参数的值。
在一些实施例中，处理单元1006被进一步配置为：在检测到与显示单元1002的相应区域对应的内容的从第一内容到第二内容的变化之后并且在根据第二组控件显示值来改变控件的外观之前：基于第二组内容显示值来确定第一组控件外观参数的与第一组控件外观值不同的相应的一组控件外观值(例如利用确定单元1008)，其中该相应的一组控件外观值不同于第一组控件外观值和第二组控件外观值；并且根据第二内容和该相应的一组控件外观值来改变控件的外观(例如利用改变单元1014)。
在一些实施例中，控件包括半透明部分；内容的相应部分对应于控件的半透明部分的位置；并且根据相应的一组控件调节值启用对控件的显示包括在控件的半透明部分中启用对内容的相应部分的表示的显示，其中内容的相应部分的表示根据相应的一组控件外观值来变换。
在一些实施例中，处理单元1006被进一步配置为在检测到内容从第一内容到第二内容的变化之后并且在根据第二组控件外观值来改变控件的外观之前，根据第二内容和第一组控件外观值来改变控件的外观(例如利用改变单元1014)。
在一些实施例中，第一组内容显示值包括与显示器的相应区域对应的第一内容的内容颜色值；第一组控件外观值包括基于第一内容的内容颜色值所选择的控件颜色值；并且显示控件包括：向第一内容应用模糊操作以生成第一模糊内容；以及在第一模糊内容上方覆盖半透明彩色层，其中：半透明彩色层具有由控件颜色值所指定的颜色；透过半透明彩色层能看到第一模糊内容；并且第一模糊内容的透过半透明彩色层的外观取决于半透明彩色层的颜色。
在一些实施例中，第一组内容显示值包括与显示器的相应区域对应的第一内容的内容饱和度值；第一组控件外观值包括基于第一内容的内容饱和度值所选择的控件饱和度值；并且显示控件包括：向第一内容应用模糊操作以生成第一模糊内容；以及在第一模糊内容上方覆盖半透明彩色层，其中：半透明彩色层具有由控件饱和度值所指定的饱和度；透过半透明彩色层能看到第一模糊内容；并且第一模糊内容的透过半透明彩色层的外观取决于半透明彩色层的饱和度。
在一些实施例中，第一组内容显示值包括与显示器的相应区域对应的第一内容的内容亮度值；第一组控件外观值包括基于第一内容的内容亮度值所选择的控件不透明度值；并且显示控件包括：向第一内容应用模糊操作以生成第一模糊内容；以及在第一模糊内容上方覆盖半透明层，其中：半透明层具有由控件不透明度值所指定的不透明度；透过半透明层能看到第一模糊内容；并且第一模糊内容的透过半透明层的外观取决于半透明层的不透明度。
在一些实施例中，第一组内容显示值包括与显示器的相应区域对应的第一内容的内容饱和度值；第一组控件外观值包括基于第一内容的内容饱和度值所选择的控件不透明度值；并且显示控件包括：向第一内容应用模糊操作以生成第一模糊内容；以及在第一模糊内容上方覆盖半透明层，其中：半透明层具有由控件颜色值所指定的不透明度；透过半透明层能看到第一模糊内容；并且第一模糊内容的透过半透明层的外观取决于半透明层的不透明度。
上述信息处理方法中的操作任选地通过运行信息处理装置中的一个或多个功能模块来实现，该信息处理装置诸如通用处理器(例如，如以上相对于图1A和图3所述的)或特定于应用的芯片。
以上参考图9A-图9G所述的操作任选地由图1A-图1B或图10中所描绘的部件来实现。例如，检测操作924任选地由事件分类器170、事件识别器180和事件处理程序190来实施。事件分类器170中的事件监视器171检测触敏显示器112上的接触，并且事件分配器模块174将事件信息递送到应用程序136-1。应用程序136-1的相应事件识别器180将事件信息与相应事件定义186进行比较，并且确定触敏表面上的第一位置处的第一接触是否(或该设备的旋转是否)对应于预定义的事件或子事件，诸如对用户界面上的对象的选择、或该设备从一个取向到另一个取向的旋转。当检测到相应的预定义的事件或子事件时，事件识别器180激活与对该事件或子事件的检测相关联的事件处理程序190。事件处理程序190任选地使用或调用数据更新器176或对象更新器177以更新应用程序内部状态192。在一些实施例中，事件处理程序190访问相应GUI更新器178以更新由应用程序所显示的内容。类似地，本领域技术人员会清楚地认识到基于在图1A-1B中所示的部件可如何实现其他过程。
为了进行解释，前面的描述是通过参考具体实施例来进行描述的。然而，上面的示例性的讨论并非旨在是穷尽的，或将本发明限制为所公开的精确形式。根据以上教导内容，很多修改形式和变型形式都是可能的。选择和描述实施例是为了充分地阐明本发明的原理及其实际应用，以由此使得本领域的其他技术人员能够利用适合于所构想的具体用途的各种修改来充分地使用本发明以及各种所述实施例。

Claims (57)

1.一种用于调整控件的外观的方法，包括：
在电子设备的显示器上显示用户界面；
确定与所述显示器的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值；
基于所述第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值；以及
在所述显示器的所述相应区域中显示控件，其中所述控件的外观基于以下各项来确定：
所述第一内容；和
所述第一组控件外观值，
其中所述控件包括半透明部分；并且
显示所述控件包括在所述控件的所述半透明部分中显示所述第一内容的与所述控件的所述半透明部分对应的一部分的表示，其中所述第一内容的所述表示根据所述第一组控件外观值来变换。
2.根据权利要求1所述的方法，其中所述相应区域中的内容的相应内容显示值对应于所述相应区域的相应视觉属性的统计测量。
3.根据权利要求1所述的方法，其中所述内容显示属性包括以下各项中的一者或多者：颜色、色调、饱和度、亮度和对比度。
4.根据权利要求1所述的方法，其中相应控件外观值的变化对应于相应变换的量值的变化，所述相应变换被应用于所述控件下方的内容以生成所述控件的外观。
5.根据权利要求1所述的方法，其中所述控件外观参数包括以下各项中的一者或多者：模糊半径、饱和度调节、白色叠层的不透明度、黑色叠层的不透明度、所述控件的一个或多个可选部分的不透明度、和所述控件中的文本的颜色。
6.根据权利要求1所述的方法，其中确定所述第一组控件外观值包括：
存储与相应的预定义组的控件外观值对应的多个相应的预定义组的内容显示值；
将接近所述第一组内容显示值的一个或多个预定义组的内容显示值识别为邻近组的内容显示值；以及
基于与所述一个或多个邻近组的内容显示值对应的一个或多个预定义组的控件外观值来确定所述第一组控件外观值。
7.根据权利要求1所述的方法，其中确定所述第一组内容显示值包括将所述第一组内容显示值用作算法的输入，所述算法生成控件外观值作为输出。
8.根据权利要求1至7中任一项所述的方法，包括当在所述显示器的所述相应区域中显示所述控件时：
检测到与所述显示器的所述相应区域对应的内容的从所述第一内容到与所述第一内容不同的第二内容的变化；
确定所述第二内容的一个或多个内容显示属性的与所述第一组内容显示值不同的第二组内容显示值；
基于所述第二组内容显示值来确定一个或多个控件外观参数的第二组控件外观值，其中所述第二组控件外观值与所述第一组控件外观值不同；以及
响应于检测到所述内容的所述变化，根据以下各项来改变所述控件的所述外观：
所述第二内容；和
所述第二组控件外观值。
9.根据权利要求8所述的方法，其中改变所述控件的所述外观包括改变所述控件中的文本的颜色。
10.根据权利要求8所述的方法，其中：
所述第一组控件外观值是第一组控件外观参数的值；并且
所述第二组控件外观值是所述第一组控件外观参数的值。
11.根据权利要求8所述的方法，其中：
所述第一组控件外观值是第一组控件外观参数的值；并且
所述第二组控件外观值是与所述第一组控件外观参数不同的第二组控件外观参数的值。
12.根据权利要求11所述的方法，包括在检测到与所述显示器的所述相应区域对应的内容的从所述第一内容到所述第二内容的变化之后并且在根据所述第二组控件显示值来改变所述控件的所述外观之前：
基于所述第二组内容显示值来确定所述第一组控件外观参数的与所述第一组控件外观值不同的相应的一组控件外观值，其中所述相应的一组控件外观值与所述第一组控件外观值和所述第二组控件外观值不同；以及
根据以下各项来改变所述控件的所述外观：
所述第二内容；和
所述相应的一组控件外观值。
13.根据权利要求8所述的方法，包括在检测到内容的从所述第一内容到所述第二内容的变化之后并且在根据所述第二组控件外观值来改变所述控件的所述外观之前，根据以下各项来改变所述控件的所述外观：
所述第二内容；和
所述第一组控件外观值。
14.根据权利要求1至7中任一项所述的方法，其中：
所述第一组内容显示值包括与所述显示器的所述相应区域对应的所述第一内容的内容饱和度值；
所述第一组控件外观值包括基于所述第一内容的所述内容饱和度值所选择的控件不透明度值；并且
显示所述控件包括：
向所述第一内容应用模糊操作以生成第一模糊内容；以及
在所述第一模糊内容上方覆盖半透明层，其中：
所述半透明层具有由所述控件不透明度值所指定的不透明度；
透过所述半透明层能看到所述第一模糊内容；并且
所述第一模糊内容的透过所述半透明层的外观取决于所述半透明层的所述不透明度。
15.一种用于调整控件的外观的方法，包括：
在电子设备的显示器上显示用户界面；
确定与所述显示器的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值；
基于所述第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值；以及
在所述显示器的所述相应区域中显示控件，其中所述控件的外观基于以下各项来确定：
所述第一内容；和
所述第一组控件外观值，
所述方法包括当在所述显示器的所述相应区域中显示所述控件时：
检测到与所述显示器的所述相应区域对应的内容的从所述第一内容到与所述第一内容不同的第二内容的变化；
确定所述第二内容的一个或多个内容显示属性的与所述第一组内容显示值不同的第二组内容显示值；
基于所述第二组内容显示值来确定一个或多个控件外观参数的第二组控件外观值，其中所述第二组控件外观值与所述第一组控件外观值不同；以及
响应于检测到所述内容的所述变化，根据以下各项来改变所述控件的所述外观：
所述第二内容；和
所述第二组控件外观值
其中所述控件包括半透明部分；并且
根据所述第二组控件外观值来改变所述控件的所述外观包括在所述控件的所述半透明部分中显示所述第二内容的与所述控件的所述半透明部分对应的一部分的表示，其中所述第二内容的所述表示根据所述第二组控件外观值来变换。
16.一种用于调整控件的外观的方法，包括：
在电子设备的显示器上显示用户界面；
确定与所述显示器的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值；
基于所述第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值；以及
在所述显示器的所述相应区域中显示控件，其中所述控件的外观基于以下各项来确定：
所述第一内容；和
所述第一组控件外观值，
其中所述控件包括半透明部分；
内容的相应部分对应于所述控件的所述半透明部分的位置；并且
根据相应的一组控件调节值来显示所述控件包括在所述控件的所述半透明部分中显示内容的所述相应部分的表示，其中内容的所述相应部分的所述表示根据所述相应的一组控件外观值来变换。
17.一种用于调整控件的外观的方法，包括：
在电子设备的显示器上显示用户界面；
确定与所述显示器的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值；
基于所述第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值；以及
在所述显示器的所述相应区域中显示控件，其中所述控件的外观基于以下各项来确定：
所述第一内容；和
所述第一组控件外观值，
其中所述第一组内容显示值包括与所述显示器的所述相应区域对应的所述第一内容的内容颜色值；
所述第一组控件外观值包括基于所述第一内容的所述内容颜色值所选择的控件颜色值；并且
显示所述控件包括：
向所述第一内容应用模糊操作以生成第一模糊内容；以及
在所述第一模糊内容上方覆盖半透明彩色层，其中：
所述半透明彩色层具有由所述控件颜色值所指定的颜色；
透过所述半透明彩色层能看到所述第一模糊内容；并且
所述第一模糊内容的透过所述半透明彩色层的外观取决于所述半透明彩色层的所述颜色。
18.一种用于调整控件的外观的方法，包括：
在电子设备的显示器上显示用户界面；
确定与所述显示器的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值；
基于所述第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值；以及
在所述显示器的所述相应区域中显示控件，其中所述控件的外观基于以下各项来确定：
所述第一内容；和
所述第一组控件外观值，
其中所述第一组内容显示值包括与所述显示器的所述相应区域对应的所述第一内容的内容饱和度值；
所述第一组控件外观值包括基于所述第一内容的所述内容饱和度值所选择的控件饱和度值；并且
显示所述控件包括：
向所述第一内容应用模糊操作以生成第一模糊内容；以及
在所述第一模糊内容上方覆盖半透明彩色层，其中：
所述半透明彩色层具有由所述控件饱和度值所指定的饱和度；
透过所述半透明彩色层能看到所述第一模糊内容；并且
所述第一模糊内容的透过所述半透明彩色层的外观取决于所述半透明彩色层的所述饱和度。
19.一种用于调整控件的外观的方法，包括：
在电子设备的显示器上显示用户界面；
确定与所述显示器的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值；
基于所述第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值；以及
在所述显示器的所述相应区域中显示控件，其中所述控件的外观基于以下各项来确定：
所述第一内容；和
所述第一组控件外观值，
其中所述第一组内容显示值包括与所述显示器的所述相应区域对应的所述第一内容的内容亮度值；
所述第一组控件外观值包括基于所述第一内容的所述内容亮度值所选择的控件不透明度值；并且
显示所述控件包括：
向所述第一内容应用模糊操作以生成第一模糊内容；以及
在所述第一模糊内容上方覆盖半透明层，其中：
所述半透明层具有由所述控件不透明度值所指定的不透明度；
透过所述半透明层能看到所述第一模糊内容；并且
所述第一模糊内容的透过所述半透明层的外观取决于所述半透明层的所述不透明度。
20.一种电子设备，包括：
被配置为显示用户界面的显示单元；和
耦接到所述显示单元的处理单元，所述处理单元被配置为：
确定与所述显示单元的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值；
基于所述第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值；以及
启用对所述显示单元的所述相应区域中的控件的显示，其中所述控件的外观基于以下各项来确定：
所述第一内容；和
所述第一组控件外观值，
其中所述控件包括半透明部分；并且
启用对所述控件的显示包括在所述控件的所述半透明部分中启用对所述第一内容的与所述控件的所述半透明部分对应的一部分的表示的显示，其中所述第一内容的所述表示根据所述第一组控件外观值来变换。
21.根据权利要求20所述的电子设备，其中所述相应区域中的内容的相应内容显示值对应于所述相应区域的相应视觉属性的统计测量。
22.根据权利要求20所述的电子设备，其中所述内容显示属性包括以下各项中的一者或多者：颜色、色调、饱和度、亮度、和对比度。
23.根据权利要求20所述的电子设备，其中相应控件外观值的变化对应于相应变换的量值的变化，所述相应变换被应用于所述控件下方的内容以生成所述控件的外观。
24.根据权利要求20所述的电子设备，其中所述控件外观参数包括以下各项中的一者或多者：模糊半径、饱和度调节、白色叠层的不透明度、黑色叠层的不透明度、所述控件的一个或多个可选部分的不透明度、和所述控件中的文本的颜色。
25.根据权利要求20所述的电子设备，其中确定所述第一组控件外观值包括：
存储与相应的预定义组的控件外观值对应的多个相应的预定义组的内容显示值；
将接近所述第一组内容显示值的一个或多个预定义组的内容显示值识别为邻近组的内容显示值；以及
基于与所述一个或多个邻近组的内容显示值对应的一个或多个预定义组的控件外观值来确定所述第一组控件外观值。
26.根据权利要求20所述的电子设备，其中确定所述第一组内容显示值包括将所述第一组内容显示值用作算法的输入，所述算法生成控件外观值作为输出。
27.根据权利要求20至26中任一项所述的电子设备，其中所述处理单元被进一步配置为在启用对所述显示单元的所述相应区域中的所述控件的显示时：
检测到与所述显示单元的所述相应区域对应的内容的从所述第一内容到与所述第一内容不同的第二内容的变化；
确定所述第二内容的所述一个或多个内容显示属性的与所述第一组内容显示值不同的第二组内容显示值；
基于所述第二组内容显示值来确定一个或多个控件外观参数的第二组控件外观值，其中所述第二组控件外观值与所述第一组控件外观值不同；以及
响应于检测到所述内容的所述变化，根据以下各项来改变所述控件的所述外观：
所述第二内容；和
所述第二组控件外观值。
28.根据权利要求27所述的电子设备，其中改变所述控件的所述外观包括改变所述控件中的文本的颜色。
29.根据权利要求27所述的电子设备，其中：
所述第一组控件外观值是第一组控件外观参数的值；并且
所述第二组控件外观值是所述第一组控件外观参数的值。
30.根据权利要求27所述的电子设备，其中：
所述第一组控件外观值是第一组控件外观参数的值；并且
所述第二组控件外观值是与所述第一组控件外观参数不同的第二组控件外观参数的值。
31.根据权利要求30所述的电子设备，其中所述处理单元被进一步配置为，在检测到与所述显示单元的所述相应区域对应的内容的从所述第一内容到所述第二内容的变化之后并且在根据所述第二组控件显示值来改变所述控件的所述外观之前：
基于所述第二组内容显示值来确定所述第一组控件外观参数的与所述第一组控件外观值不同的相应的一组控件外观值，其中所述相应的一组控件外观值与所述第一组控件外观值和所述第二组控件外观值不同；以及
根据以下各项来改变所述控件的所述外观：
所述第二内容；和
所述相应的一组控件外观值。
32.根据权利要求27所述的电子设备，其中所述处理单元被进一步配置为，在检测到内容的从所述第一内容到所述第二内容的变化之后并且在根据所述第二组控件外观值来改变所述控件的所述外观之前，根据以下各项来改变所述控件的所述外观：
所述第二内容；和
所述第一组控件外观值。
33.根据权利要求20至26中任一项所述的电子设备，其中：
所述第一组内容显示值包括与所述显示单元的所述相应区域对应的所述第一内容的内容饱和度值；
所述第一组控件外观值包括基于所述第一内容的所述内容饱和度值所选择的控件不透明度值；并且
显示所述控件包括：
向所述第一内容应用模糊操作以生成第一模糊内容；以及
在所述第一模糊内容上方覆盖半透明层，其中：
所述半透明层具有由所述控件不透明度值所指定的不透明度；
透过所述半透明层能看到所述第一模糊内容；并且
所述第一模糊内容的透过所述半透明层的外观取决于所述半透明层的所述不透明度。
34.一种电子设备，包括：
被配置为显示用户界面的显示单元；和
耦接到所述显示单元的处理单元，所述处理单元被配置为：
确定与所述显示单元的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值；
基于所述第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值；以及
启用对所述显示单元的所述相应区域中的控件的显示，其中所述控件的外观基于以下各项来确定：
所述第一内容；和
所述第一组控件外观值，
其中所述处理单元被进一步配置为在启用对所述显示单元的所述相应区域中的所述控件的显示时：
检测到与所述显示单元的所述相应区域对应的内容的从所述第一内容到与所述第一内容不同的第二内容的变化；
确定所述第二内容的所述一个或多个内容显示属性的与所述第一组内容显示值不同的第二组内容显示值；
基于所述第二组内容显示值来确定一个或多个控件外观参数的第二组控件外观值，其中所述第二组控件外观值与所述第一组控件外观值不同；以及
响应于检测到所述内容的所述变化，根据以下各项来改变所述控件的所述外观：
所述第二内容；和
所述第二组控件外观值，
其中所述控件包括半透明部分；并且
根据所述第二组控件外观值来改变所述控件的所述外观包括在所述控件的所述半透明部分中显示所述第二内容的与所述控件的所述半透明部分对应的一部分的表示，其中所述第二内容的所述表示根据所述第二组控件外观值来变换。
35.一种电子设备，包括：
被配置为显示用户界面的显示单元；和
耦接到所述显示单元的处理单元，所述处理单元被配置为：
确定与所述显示单元的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值；
基于所述第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值；以及
启用对所述显示单元的所述相应区域中的控件的显示，其中所述控件的外观基于以下各项来确定：
所述第一内容；和
所述第一组控件外观值，
其中所述控件包括半透明部分；
内容的相应部分对应于所述控件的所述半透明部分的位置；并且
根据相应的一组控件调节值启用对所述控件的显示包括启用在所述控件的所述半透明部分中对内容的所述相应部分的表示的显示，其中内容的所述相应部分的所述表示根据所述相应的一组控件外观值来变换。
36.一种电子设备，包括：
被配置为显示用户界面的显示单元；和
耦接到所述显示单元的处理单元，所述处理单元被配置为：
确定与所述显示单元的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值；
基于所述第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值；以及
启用对所述显示单元的所述相应区域中的控件的显示，其中所述控件的外观基于以下各项来确定：
所述第一内容；和
所述第一组控件外观值，
其中所述第一组内容显示值包括与所述显示单元的所述相应区域对应的所述第一内容的内容颜色值；
所述第一组控件外观值包括基于所述第一内容的所述内容颜色值所选择的控件颜色值；并且
显示所述控件包括：
向所述第一内容应用模糊操作以生成第一模糊内容；
以及
在所述第一模糊内容上方覆盖半透明彩色层，其中：
所述半透明彩色层具有由所述控件颜色值所指定的颜色；
透过所述半透明彩色层能看到所述第一模糊内容；并且
所述第一模糊内容的透过所述半透明彩色层的外观取决于所述半透明彩色层的所述颜色。
37.一种电子设备，包括：
被配置为显示用户界面的显示单元；和
耦接到所述显示单元的处理单元，所述处理单元被配置为：
确定与所述显示单元的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值；
基于所述第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值；以及
启用对所述显示单元的所述相应区域中的控件的显示，其中所述控件的外观基于以下各项来确定：
所述第一内容；和
所述第一组控件外观值，
其中所述第一组内容显示值包括与所述显示单元的所述相应区域对应的所述第一内容的内容饱和度值；
所述第一组控件外观值包括基于所述第一内容的所述内容饱和度值所选择的控件饱和度值；并且
显示所述控件包括：
向所述第一内容应用模糊操作以生成第一模糊内容；
以及
在所述第一模糊内容上方覆盖半透明彩色层，其中：
所述半透明彩色层具有由所述控件饱和度值所指定的饱和度；
透过所述半透明彩色层能看到所述第一模糊内容；并且
所述第一模糊内容的透过所述半透明彩色层的外观取决于所述半透明彩色层的所述饱和度。
38.一种电子设备，包括：
被配置为显示用户界面的显示单元；和
耦接到所述显示单元的处理单元，所述处理单元被配置为：
确定与所述显示单元的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值；
基于所述第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值；以及
启用对所述显示单元的所述相应区域中的控件的显示，其中所述控件的外观基于以下各项来确定：
所述第一内容；和
所述第一组控件外观值，
其中所述第一组内容显示值包括与所述显示单元的所述相应区域对应的所述第一内容的内容亮度值；
所述第一组控件外观值包括基于所述第一内容的所述内容亮度值所选择的控件不透明度值；并且
显示所述控件包括：
向所述第一内容应用模糊操作以生成第一模糊内容；
以及
在所述第一模糊内容上方覆盖半透明层，其中：
所述半透明层具有由所述控件不透明度值所指定的不透明度；
透过所述半透明层能看到所述第一模糊内容；
并且
所述第一模糊内容的透过所述半透明层的外观取决于所述半透明层的所述不透明度。
39.一种用于调整控件的外观的设备，包括：
用于在电子设备的显示器上显示用户界面的装置；
用于确定与所述显示器的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值的装置；
用于基于所述第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值的装置；以及
用于在所述显示器的所述相应区域中显示控件的装置，其中所述控件的外观基于以下各项来确定：
所述第一内容；和
所述第一组控件外观值，
其中所述控件包括半透明部分；并且
用于显示所述控件的所述装置包括用于在所述控件的所述半透明部分中显示所述第一内容的与所述控件的所述半透明部分对应的一部分的表示的装置，其中所述第一内容的所述表示根据所述第一组控件外观值来变换。
40.根据权利要求39所述的设备，其中所述相应区域中的内容的相应内容显示值对应于所述相应区域的相应视觉属性的统计测量。
41.根据权利要求39所述的设备，其中所述内容显示属性包括以下各项中的一者或多者：颜色、色调、饱和度、亮度和对比度。
42.根据权利要求39所述的设备，其中相应控件外观值的变化对应于相应变换的量值的变化，所述相应变换被应用于所述控件下方的内容以生成所述控件的外观。
43.根据权利要求39所述的设备，其中所述控件外观参数包括以下各项中的一者或多者：模糊半径、饱和度调节、白色叠层的不透明度、黑色叠层的不透明度、所述控件的一个或多个可选部分的不透明度、和所述控件中的文本的颜色。
44.根据权利要求39所述的设备，其中用于确定所述第一组控件外观值的所述装置包括：
用于存储与相应的预定义组的控件外观值对应的多个相应的预定义组的内容显示值的装置；
用于将接近所述第一组内容显示值的一个或多个预定义组的内容显示值识别为邻近组的内容显示值的装置；以及
用于基于与所述一个或多个邻近组的内容显示值对应的一个或多个预定义组的控件外观值来确定所述第一组控件外观值的装置。
45.根据权利要求39所述的设备，其中用于确定所述第一组内容显示值的所述装置包括用于将所述第一组内容显示值用作算法的输入的装置，所述算法生成控件外观值作为输出。
46.根据权利要求39至45中任一项所述的设备，包括当在所述显示器的所述相应区域中显示所述控件时：
用于检测到与所述显示器的所述相应区域对应的内容的从所述第一内容到与所述第一内容不同的第二内容的变化的装置；
用于确定所述第二内容的一个或多个内容显示属性的与所述第一组内容显示值不同的第二组内容显示值的装置；
用于基于所述第二组内容显示值来确定一个或多个控件外观参数的第二组控件外观值的装置，其中所述第二组控件外观值与所述第一组控件外观值不同；以及
用于响应于检测到所述内容的所述变化，根据以下各项来改变所述控件的所述外观的装置：
所述第二内容；和
所述第二组控件外观值。
47.根据权利要求46所述的设备，其中用于改变所述控件的所述外观的所述装置包括用于改变所述控件中的文本的颜色的装置。
48.根据权利要求46所述的设备，其中：
所述第一组控件外观值是第一组控件外观参数的值；并且
所述第二组控件外观值是所述第一组控件外观参数的值。
49.根据权利要求46所述的设备，其中：
所述第一组控件外观值是第一组控件外观参数的值；并且
所述第二组控件外观值是与所述第一组控件外观参数不同的第二组控件外观参数的值。
50.根据权利要求49所述的设备，包括在检测到与所述显示器的所述相应区域对应的内容的从所述第一内容到所述第二内容的变化之后并且在根据所述第二组控件显示值来改变所述控件的所述外观之前：
用于基于所述第二组内容显示值来确定所述第一组控件外观参数的与所述第一组控件外观值不同的相应的一组控件外观值的装置，其中所述相应的一组控件外观值与所述第一组控件外观值和所述第二组控件外观值不同；以及
用于根据以下各项来改变所述控件的所述外观的装置：
所述第二内容；和
所述相应的一组控件外观值。
51.根据权利要求46所述的设备，包括在检测到内容的从所述第一内容到所述第二内容的变化之后并且在根据所述第二组控件外观值来改变所述控件的所述外观之前，用于根据以下各项来改变所述控件的所述外观的装置：
所述第二内容；和
所述第一组控件外观值。
52.根据权利要求39至45中任一项所述的设备，其中：
所述第一组内容显示值包括与所述显示器的所述相应区域对应的所述第一内容的内容饱和度值；
所述第一组控件外观值包括基于所述第一内容的所述内容饱和度值所选择的控件不透明度值；并且
用于显示所述控件的所述装置包括：
用于向所述第一内容应用模糊操作以生成第一模糊内容的装置；以及
用于在所述第一模糊内容上方覆盖半透明层的装置，其中：
所述半透明层具有由所述控件不透明度值所指定的不透明度；
透过所述半透明层能看到所述第一模糊内容；并且
所述第一模糊内容的透过所述半透明层的外观取决于所述半透明层的所述不透明度。
53.一种用于调整控件的外观的设备，包括：
用于在电子设备的显示器上显示用户界面的装置；
用于确定与所述显示器的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值的装置；
用于基于所述第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值的装置；以及
用于在所述显示器的所述相应区域中显示控件的装置，其中所述控件的外观基于以下各项来确定：
所述第一内容；和
所述第一组控件外观值，
所述设备包括当在所述显示器的所述相应区域中显示所述控件时：
用于检测到与所述显示器的所述相应区域对应的内容的从所述第一内容到与所述第一内容不同的第二内容的变化的装置；
用于确定所述第二内容的一个或多个内容显示属性的与所述第一组内容显示值不同的第二组内容显示值的装置；
用于基于所述第二组内容显示值来确定一个或多个控件外观参数的第二组控件外观值的装置，其中所述第二组控件外观值与所述第一组控件外观值不同；以及
用于响应于检测到所述内容的所述变化，根据以下各项来改变所述控件的所述外观的装置：
所述第二内容；和
所述第二组控件外观值，
其中所述控件包括半透明部分；并且
用于根据所述第二组控件外观值来改变所述控件的所述外观的所述装置包括用于在所述控件的所述半透明部分中显示所述第二内容的与所述控件的所述半透明部分对应的一部分的表示的装置，其中所述第二内容的所述表示根据所述第二组控件外观值来变换。
54.一种用于调整控件的外观的设备，包括：
用于在电子设备的显示器上显示用户界面的装置；
用于确定与所述显示器的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值的装置；
用于基于所述第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值的装置；以及
用于在所述显示器的所述相应区域中显示控件的装置，其中所述控件的外观基于以下各项来确定：
所述第一内容；和
所述第一组控件外观值，
其中所述控件包括半透明部分；
内容的相应部分对应于所述控件的所述半透明部分的位置；并且
用于根据相应的一组控件调节值来显示所述控件的所述装置包括用于在所述控件的所述半透明部分中显示内容的所述相应部分的表示的装置，其中内容的所述相应部分的所述表示根据所述相应的一组控件外观值来变换。
55.一种用于调整控件的外观的设备，包括：
用于在电子设备的显示器上显示用户界面的装置；
用于确定与所述显示器的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值的装置；
用于基于所述第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值的装置；以及
用于在所述显示器的所述相应区域中显示控件的装置，其中所述控件的外观基于以下各项来确定：
所述第一内容；和
所述第一组控件外观值，
其中所述第一组内容显示值包括与所述显示器的所述相应区域对应的所述第一内容的内容颜色值；
所述第一组控件外观值包括基于所述第一内容的所述内容颜色值所选择的控件颜色值；并且
用于显示所述控件的所述装置包括：
用于向所述第一内容应用模糊操作以生成第一模糊内容的装置；以及
用于在所述第一模糊内容上方覆盖半透明彩色层的装置，其中：
所述半透明彩色层具有由所述控件颜色值所指定的颜色；
透过所述半透明彩色层能看到所述第一模糊内容；并且
所述第一模糊内容的透过所述半透明彩色层的外观取决于所述半透明彩色层的所述颜色。
56.一种用于调整控件的外观的设备，包括：
用于在电子设备的显示器上显示用户界面的装置；
用于确定与所述显示器的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值的装置；
用于基于所述第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值的装置；以及
用于在所述显示器的所述相应区域中显示控件的装置，其中所述控件的外观基于以下各项来确定：
所述第一内容；和
所述第一组控件外观值，
其中所述第一组内容显示值包括与所述显示器的所述相应区域对应的所述第一内容的内容饱和度值；
所述第一组控件外观值包括基于所述第一内容的所述内容饱和度值所选择的控件饱和度值；并且
用于显示所述控件的所述装置包括：
用于向所述第一内容应用模糊操作以生成第一模糊内容的装置；以及
用于在所述第一模糊内容上方覆盖半透明彩色层的装置，其中：
所述半透明彩色层具有由所述控件饱和度值所指定的饱和度；
透过所述半透明彩色层能看到所述第一模糊内容；并且
所述第一模糊内容的透过所述半透明彩色层的外观取决于所述半透明彩色层的所述饱和度。
57.一种用于调整控件的外观的设备，包括：
用于在电子设备的显示器上显示用户界面的装置；
用于确定与所述显示器的相应区域对应的第一内容的一个或多个内容显示属性的第一组内容显示值的装置；
用于基于所述第一组内容显示值来确定一个或多个控件外观参数的第一组控件外观值的装置；以及
用于在所述显示器的所述相应区域中显示控件的装置，其中所述控件的外观基于以下各项来确定：
所述第一内容；和
所述第一组控件外观值，
其中所述第一组内容显示值包括与所述显示器的所述相应区域对应的所述第一内容的内容亮度值；
所述第一组控件外观值包括基于所述第一内容的所述内容亮度值所选择的控件不透明度值；并且
用于显示所述控件的所述装置包括：
用于向所述第一内容应用模糊操作以生成第一模糊内容的装置；以及
用于在所述第一模糊内容上方覆盖半透明层的装置，其中：
所述半透明层具有由所述控件不透明度值所指定的不透明度；
透过所述半透明层能看到所述第一模糊内容；并且
所述第一模糊内容的透过所述半透明层的外观取决于所述半透明层的所述不透明度。
CN201480023948.7A 2013-03-15 2014-02-26 用于调节控件的外观的设备、方法和图形用户界面 Active CN105144067B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201811582526.XA CN110096206B (zh) 2013-03-15 2014-02-26 用于调节控件的外观的设备、方法和图形用户界面
CN201811583828.9A CN110096186B (zh) 2013-03-15 2014-02-26 用于调节控件的外观的设备、方法和图形用户界面

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
US201361801988P 2013-03-15 2013-03-15
US61/801,988 2013-03-15
US201361832952P 2013-06-09 2013-06-09
US61/832,952 2013-06-09
US14/183,383 US9305374B2 (en) 2013-03-15 2014-02-18 Device, method, and graphical user interface for adjusting the appearance of a control
US14/183,369 2014-02-18
US14/183,369 US9355472B2 (en) 2013-03-15 2014-02-18 Device, method, and graphical user interface for adjusting the appearance of a control
US14/183,383 2014-02-18
PCT/US2014/018728 WO2014149474A1 (en) 2013-03-15 2014-02-26 Device, method, and graphical user interface for adjusting the appearance of a control

Related Child Applications (2)

Application Number Title Priority Date Filing Date
CN201811582526.XA Division CN110096206B (zh) 2013-03-15 2014-02-26 用于调节控件的外观的设备、方法和图形用户界面
CN201811583828.9A Division CN110096186B (zh) 2013-03-15 2014-02-26 用于调节控件的外观的设备、方法和图形用户界面

Publications (2)

Publication Number Publication Date
CN105144067A CN105144067A (zh) 2015-12-09
CN105144067B true CN105144067B (zh) 2018-12-25

Family

ID=51525446

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201811582526.XA Active CN110096206B (zh) 2013-03-15 2014-02-26 用于调节控件的外观的设备、方法和图形用户界面
CN201811583828.9A Active CN110096186B (zh) 2013-03-15 2014-02-26 用于调节控件的外观的设备、方法和图形用户界面
CN201480023948.7A Active CN105144067B (zh) 2013-03-15 2014-02-26 用于调节控件的外观的设备、方法和图形用户界面

Family Applications Before (2)

Application Number Title Priority Date Filing Date
CN201811582526.XA Active CN110096206B (zh) 2013-03-15 2014-02-26 用于调节控件的外观的设备、方法和图形用户界面
CN201811583828.9A Active CN110096186B (zh) 2013-03-15 2014-02-26 用于调节控件的外观的设备、方法和图形用户界面

Country Status (9)

Country Link
US (4) US9355472B2 (zh)
EP (2) EP2972732B1 (zh)
JP (3) JP6155379B2 (zh)
KR (2) KR101885629B1 (zh)
CN (3) CN110096206B (zh)
AU (3) AU2014238102B2 (zh)
HK (1) HK1215092A1 (zh)
TW (1) TWI545496B (zh)
WO (1) WO2014149474A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110096186A (zh) * 2013-03-15 2019-08-06 苹果公司 用于调节控件的外观的设备、方法和图形用户界面

Families Citing this family (139)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
US9823831B2 (en) 2010-04-07 2017-11-21 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
US9052926B2 (en) 2010-04-07 2015-06-09 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
US20130238747A1 (en) 2012-03-06 2013-09-12 Apple Inc. Image beaming for a media editing application
US9131192B2 (en) 2012-03-06 2015-09-08 Apple Inc. Unified slider control for modifying multiple image properties
US9202433B2 (en) 2012-03-06 2015-12-01 Apple Inc. Multi operation slider
US9041727B2 (en) 2012-03-06 2015-05-26 Apple Inc. User interface tools for selectively applying effects to image
JP6182207B2 (ja) 2012-05-09 2017-08-16 アップル インコーポレイテッド ユーザインタフェースオブジェクトのアクティブ化状態を変更するためのフィードバックを提供するためのデバイス、方法、及びグラフィカルユーザインタフェース
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
WO2013169877A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting user interface objects
WO2013169851A2 (en) * 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
JP2015519656A (ja) 2012-05-09 2015-07-09 アップル インコーポレイテッド ユーザインタフェースオブジェクトを移動し、ドロップするためのデバイス、方法及びグラフィカルユーザインタフェース
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
JP6002836B2 (ja) 2012-05-09 2016-10-05 アップル インコーポレイテッド ジェスチャに応答して表示状態間を遷移するためのデバイス、方法、及びグラフィカルユーザインタフェース
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
DE112013002409T5 (de) 2012-05-09 2015-02-26 Apple Inc. Vorrichtung, Verfahren und grafische Benutzeroberfläche für die Anzeige zusätzlicher Informationen in Reaktion auf einen Benutzerkontakt
CN108287651B (zh) 2012-05-09 2021-04-13 苹果公司 用于针对在用户界面中执行的操作提供触觉反馈的方法和装置
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
JP6097843B2 (ja) 2012-12-29 2017-03-15 アップル インコーポレイテッド コンテンツをスクロールするか選択するかを判定するためのデバイス、方法、及びグラフィカルユーザインタフェース
CN105144057B (zh) 2012-12-29 2019-05-17 苹果公司 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
EP2939098B1 (en) 2012-12-29 2018-10-10 Apple Inc. Device, method, and graphical user interface for transitioning between touch input to display output relationships
EP2912542B1 (en) 2012-12-29 2022-07-13 Apple Inc. Device and method for forgoing generation of tactile output for a multi-contact gesture
EP3467634B1 (en) 2012-12-29 2020-09-23 Apple Inc. Device, method, and graphical user interface for navigating user interface hierarchies
EP2954514B1 (en) 2013-02-07 2021-03-31 Apple Inc. Voice trigger for a digital assistant
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
US9658740B2 (en) 2013-03-15 2017-05-23 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
US9298361B2 (en) 2013-03-15 2016-03-29 Apple Inc. Analyzing applications for different access modes
US9477404B2 (en) 2013-03-15 2016-10-25 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
US9542907B2 (en) 2013-06-09 2017-01-10 Apple Inc. Content adjustment in graphical user interface based on background content
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
JP6102602B2 (ja) * 2013-07-23 2017-03-29 ソニー株式会社 画像処理装置、画像処理方法、画像処理プログラムおよび撮像装置
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US20150346952A1 (en) * 2014-05-30 2015-12-03 Apple Inc. Control center refinements
AU2015266863B2 (en) 2014-05-30 2018-03-15 Apple Inc. Multi-command single utterance input method
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10445314B1 (en) * 2014-09-15 2019-10-15 Amazon Technologies, Inc. Instant unified search
US10908760B2 (en) 2014-10-15 2021-02-02 Liveperson, Inc. System and method for interactive application preview
US10341276B2 (en) * 2014-12-11 2019-07-02 Facebook, Inc. Systems and methods for providing communications with obscured media content backgrounds
US20160246466A1 (en) * 2015-02-23 2016-08-25 Nuance Communications, Inc. Transparent full-screen text entry interface
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9632664B2 (en) * 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
CN106155454B (zh) * 2015-03-30 2020-06-16 阿里巴巴集团控股有限公司 一种界面显示方法、装置及电子设备
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US10067653B2 (en) 2015-04-01 2018-09-04 Apple Inc. Devices and methods for processing touch inputs based on their intensities
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US10345991B2 (en) * 2015-06-16 2019-07-09 International Business Machines Corporation Adjusting appearance of icons in an electronic device
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
EP3403196A4 (en) * 2016-01-15 2019-10-30 Microsoft Technology Licensing, LLC DETERMINATION OF THE APPEARANCE OF ELEMENTS DISPLAYED ON THE USER INTERFACE
US11010542B2 (en) * 2016-02-03 2021-05-18 Ricoh Company, Ltd. Interactive electronic whiteboard appliance with adaptive application management
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179034B1 (en) * 2016-06-12 2017-09-04 Apple Inc Devices, methods, and graphical user interfaces for dynamically adjusting presentation of audio outputs
WO2017218069A1 (en) * 2016-06-12 2017-12-21 Apple Inc. Devices, methods, and graphical user interfaces for processing intensity information associated with touch inputs
CN106648579A (zh) * 2016-09-12 2017-05-10 北京量科邦信息技术有限公司 一种原生app切换夜间和日间模式的方法及系统
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US11142442B2 (en) 2017-02-10 2021-10-12 Arrow Acquisition, Llc System and method for dynamically controlling the stability of an industrial vehicle
JP2018081664A (ja) * 2017-02-10 2018-05-24 株式会社ＦｉＮＣ コンピュータ実装方法
TWI645328B (zh) * 2017-03-24 2018-12-21 華碩電腦股份有限公司 動態桌布的顯示方法、電子裝置及非暫態電腦可讀取記錄媒體
KR102388539B1 (ko) 2017-04-30 2022-04-20 삼성전자주식회사 사용자 발화를 처리하는 전자 장치
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US11928483B2 (en) * 2017-05-16 2024-03-12 Apple Inc. Devices, methods, and graphical user interfaces for seamless transition of user interface behaviors
US10956033B2 (en) * 2017-07-13 2021-03-23 Hand Held Products, Inc. System and method for generating a virtual keyboard with a highlighted area of interest
CN107463307A (zh) * 2017-07-31 2017-12-12 北京京东尚科信息技术有限公司 文档显示方法和装置
USD908728S1 (en) * 2017-08-22 2021-01-26 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
DK179931B1 (en) * 2017-09-09 2019-10-11 Apple Inc. DEVICES, METHODS AND GRAPHICAL USER INTERFACES FOR DISPLAYING AN AFFORDANCE ON A BACKGROUND
KR102440651B1 (ko) 2017-09-19 2022-09-06 삼성전자주식회사 자연어 표현 제공 방법 및 이를 지원하는 전자 장치
USD841668S1 (en) * 2018-01-31 2019-02-26 Salesforce.Com, Inc. Display screen or portion thereof with animated graphical user interface
KR102558472B1 (ko) 2018-02-07 2023-07-25 삼성전자주식회사 밝기 정보에 기반하여 콘텐트의 표시를 제어하는 전자 장치 및 그의 동작 방법
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
JP2020034991A (ja) * 2018-08-27 2020-03-05 オムロン株式会社 入力デバイス、携帯端末、入力デバイス制御方法、および入力デバイス制御プログラム
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
CN109471586B (zh) * 2018-10-26 2020-05-05 麒麟合盛网络技术股份有限公司 一种键帽配色方法、装置和终端设备
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11227599B2 (en) 2019-06-01 2022-01-18 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators
CN111338525A (zh) * 2020-02-21 2020-06-26 维沃移动通信有限公司 一种电子设备的控制方法及电子设备
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11038934B1 (en) 2020-05-11 2021-06-15 Apple Inc. Digital assistant hardware abstraction
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
TWI751653B (zh) * 2020-08-14 2022-01-01 博橡科技股份有限公司 人機介面開發方法、人機介面裝置以及電腦程式產品
CN112558785A (zh) * 2020-12-24 2021-03-26 上海二三四五网络科技有限公司 一种调整文字显示颜色的控制方法及装置
CN115408084A (zh) * 2021-05-28 2022-11-29 富泰华工业（深圳）有限公司 屏幕信息显示方法、装置及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1805459A (zh) * 2005-01-14 2006-07-19 Lg电子株式会社 用于移动通信终端的信息显示单元和信息显示方法
KR100618816B1 (ko) * 2003-12-10 2006-08-31 삼성전자주식회사 서브 메모리를 구비한 이동 통신 단말기의 디스플레이 장치
CN101706718A (zh) * 2009-11-05 2010-05-12 中兴通讯股份有限公司 一种自动改变桌面文字颜色的方法及其装置
CN101916168A (zh) * 2010-08-31 2010-12-15 宇龙计算机通信科技(深圳)有限公司 一种应用图标的显示方法、系统及移动终端

Family Cites Families (57)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5831615A (en) 1994-09-30 1998-11-03 Intel Corporation Method and apparatus for redrawing transparent windows
JPH0973353A (ja) * 1995-09-04 1997-03-18 Matsushita Electric Ind Co Ltd ソフトウェアキーボード
US5805163A (en) 1996-04-22 1998-09-08 Ncr Corporation Darkened transparent window overlapping an opaque window
US6151030A (en) 1998-05-27 2000-11-21 Intel Corporation Method of creating transparent graphics
JP4264573B2 (ja) * 1999-06-07 2009-05-20 ソニー株式会社 画像処理装置および方法、並びに記録媒体
US6809741B1 (en) * 1999-06-09 2004-10-26 International Business Machines Corporation Automatic color contrast adjuster
US20050091576A1 (en) * 2003-10-24 2005-04-28 Microsoft Corporation Programming interface for a computer platform
US7016869B1 (en) * 2000-04-28 2006-03-21 Shutterfly, Inc. System and method of changing attributes of an image-based product
US20060129933A1 (en) * 2000-12-19 2006-06-15 Sparkpoint Software, Inc. System and method for multimedia authoring and playback
JP2003085424A (ja) * 2001-09-13 2003-03-20 Hitachi Ltd 予約支援・情報提供装置及びこれに用いた端末
US20030112253A1 (en) 2001-12-17 2003-06-19 Robert Cazier Method and apparatus for active graphical controls
US6954905B2 (en) 2002-01-28 2005-10-11 International Business Machines Corporation Displaying transparency characteristic aids
JP3654265B2 (ja) * 2002-06-21 2005-06-02 三菱電機株式会社 設定表示装置
US7343566B1 (en) * 2002-07-10 2008-03-11 Apple Inc. Method and apparatus for displaying a window for a user interface
KR100663409B1 (ko) * 2002-10-17 2007-01-02 삼성전자주식회사 펜 컴퓨팅 시스템에서의 레이어 편집 방법 및 장치
US8659615B2 (en) 2003-01-31 2014-02-25 Nvidia Corporation System and method for providing transparent windows of a display
CN103398719B (zh) * 2004-03-23 2017-04-12 咕果公司 数字地图描绘系统
KR100661544B1 (ko) 2004-06-18 2006-12-27 엘지전자 주식회사 이동단말기의 배경화면에 따른 소프트메뉴바의 색상 설정방법
JP4438602B2 (ja) * 2004-10-28 2010-03-24 株式会社デンソー 操作装置
US20060248557A1 (en) * 2005-04-01 2006-11-02 Vulcan Inc. Interface for controlling device groups
JP2007115293A (ja) * 2005-10-17 2007-05-10 Toshiba Corp 情報記憶媒体、プログラム、情報再生方法、情報再生装置、データ転送方法、及びデータ処理方法
US7412663B2 (en) 2005-11-30 2008-08-12 Microsoft Corporation Dynamic reflective highlighting of a glass appearance window frame
US7418668B2 (en) 2005-11-30 2008-08-26 Microsoft Corporation Glass appearance window frame colorization
KR20070059810A (ko) 2005-12-06 2007-06-12 정해인 모형장기
US20070192718A1 (en) 2006-02-10 2007-08-16 Freedom Scientific, Inc. Graphic User Interface Control Object Stylization
KR100765781B1 (ko) * 2006-04-13 2007-10-12 삼성전자주식회사 Ｘｈｔｍｌ 데이터 생성 방법 및 장치
US7783983B1 (en) * 2006-04-13 2010-08-24 Emc Corporation User interface for controls
US20090175411A1 (en) * 2006-07-20 2009-07-09 Dan Gudmundson Methods and systems for use in security screening, with parallel processing capability
US7739613B2 (en) 2006-11-10 2010-06-15 Microsoft Corporation Graphics tiering strategy incorporating bitmaps and window geometries
US8091038B1 (en) 2006-11-29 2012-01-03 Adobe Systems Incorporated Adaptive graphical interface
US8519963B2 (en) * 2007-01-07 2013-08-27 Apple Inc. Portable multifunction device, method, and graphical user interface for interpreting a finger gesture on a touch screen display
US8191003B2 (en) 2007-02-14 2012-05-29 International Business Machines Corporation Managing transparent windows
US8339413B2 (en) 2007-05-17 2012-12-25 Adobe Systems Incorporated Multiplied occluding transparency graphics processing
EP2165326A2 (en) 2007-05-31 2010-03-24 Visan Industries Systems and methods for rendering media
US9052817B2 (en) * 2007-06-13 2015-06-09 Apple Inc. Mode sensitive processing of touch data
US7956869B1 (en) 2007-07-13 2011-06-07 Adobe Systems Incorporated Proximity based transparency of windows aiding in obscured window selection
JP2009157777A (ja) 2007-12-27 2009-07-16 Toshiba Corp 電子機器及び画像表示プログラム
JP5324143B2 (ja) * 2008-07-01 2013-10-23 キヤノン株式会社 表示制御装置、及び表示制御方法
US20100177035A1 (en) 2008-10-10 2010-07-15 Schowengerdt Brian T Mobile Computing Device With A Virtual Keyboard
JP5350862B2 (ja) 2009-04-03 2013-11-27 株式会社ソニー・コンピュータエンタテインメント 携帯型情報端末および情報入力方法
US20100253697A1 (en) 2009-04-06 2010-10-07 Juan Rivera Methods and systems for remotely displaying alpha blended images
WO2010132718A2 (en) * 2009-05-13 2010-11-18 Coincident.Tv , Inc. Playing and editing linked and annotated audiovisual works
US8264499B1 (en) 2009-06-02 2012-09-11 Sprint Communications Company L.P. Enhancing viewability of information presented on a mobile device
US8019390B2 (en) 2009-06-17 2011-09-13 Pradeep Sindhu Statically oriented on-screen transluscent keyboard
CN202142005U (zh) 2009-07-22 2012-02-08 罗技欧洲公司 用于远程、虚拟屏幕输入的系统
US20110163966A1 (en) * 2010-01-06 2011-07-07 Imran Chaudhri Apparatus and Method Having Multiple Application Display Modes Including Mode with Display Resolution of Another Apparatus
US8793611B2 (en) * 2010-01-06 2014-07-29 Apple Inc. Device, method, and graphical user interface for manipulating selectable user interface objects
JP2011214868A (ja) * 2010-03-31 2011-10-27 Aisin Aw Co Ltd 表示制御装置、方法およびプログラム
US8587596B2 (en) 2010-06-28 2013-11-19 International Business Machines Corporation Multithreaded software rendering pipeline with dynamic performance-based reallocation of raster threads
US20120127198A1 (en) * 2010-11-22 2012-05-24 Microsoft Corporation Selection of foreground characteristics based on background
JP5655550B2 (ja) * 2010-12-22 2015-01-21 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
JP5683292B2 (ja) 2011-01-26 2015-03-11 株式会社ソニー・コンピュータエンタテインメント 携帯端末、表示方法及びコンピュータプログラム
US10152192B2 (en) 2011-02-21 2018-12-11 Apple Inc. Scaling application windows in one or more workspaces in a user interface
US9536564B2 (en) * 2011-09-20 2017-01-03 Apple Inc. Role-facilitated editing operations
CN102331910A (zh) * 2011-10-08 2012-01-25 宇龙计算机通信科技(深圳)有限公司 一种对触控显示屏的显示控制方法及装置
US9355472B2 (en) 2013-03-15 2016-05-31 Apple Inc. Device, method, and graphical user interface for adjusting the appearance of a control
US9542907B2 (en) 2013-06-09 2017-01-10 Apple Inc. Content adjustment in graphical user interface based on background content

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100618816B1 (ko) * 2003-12-10 2006-08-31 삼성전자주식회사 서브 메모리를 구비한 이동 통신 단말기의 디스플레이 장치
CN1805459A (zh) * 2005-01-14 2006-07-19 Lg电子株式会社 用于移动通信终端的信息显示单元和信息显示方法
CN101706718A (zh) * 2009-11-05 2010-05-12 中兴通讯股份有限公司 一种自动改变桌面文字颜色的方法及其装置
CN101916168A (zh) * 2010-08-31 2010-12-15 宇龙计算机通信科技(深圳)有限公司 一种应用图标的显示方法、系统及移动终端

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110096186A (zh) * 2013-03-15 2019-08-06 苹果公司 用于调节控件的外观的设备、方法和图形用户界面

Also Published As

Publication number Publication date
TW201447740A (zh) 2014-12-16
CN110096186A (zh) 2019-08-06
KR20170091763A (ko) 2017-08-09
AU2017208225B2 (en) 2023-02-02
CN110096206A (zh) 2019-08-06
KR101764646B1 (ko) 2017-08-03
US10599316B2 (en) 2020-03-24
JP2016517072A (ja) 2016-06-09
US9355472B2 (en) 2016-05-31
WO2014149474A1 (en) 2014-09-25
JP6816188B2 (ja) 2021-01-20
US20140267362A1 (en) 2014-09-18
US20140267363A1 (en) 2014-09-18
JP6155379B2 (ja) 2017-06-28
EP2972732A1 (en) 2016-01-20
US10175871B2 (en) 2019-01-08
CN110096206B (zh) 2022-02-01
US9305374B2 (en) 2016-04-05
HK1215092A1 (zh) 2016-08-12
AU2014238102A1 (en) 2015-10-08
AU2021201419A1 (en) 2021-03-25
EP2972732B1 (en) 2019-10-30
TWI545496B (zh) 2016-08-11
EP3594796A1 (en) 2020-01-15
JP2017224289A (ja) 2017-12-21
AU2021201419B2 (en) 2022-12-08
KR101885629B1 (ko) 2018-08-07
JP2019135657A (ja) 2019-08-15
JP6516790B2 (ja) 2019-05-22
AU2017208225A1 (en) 2017-08-10
CN105144067A (zh) 2015-12-09
KR20150127254A (ko) 2015-11-16
CN110096186B (zh) 2022-05-17
US20190212906A1 (en) 2019-07-11
AU2014238102B2 (en) 2017-08-03
US20160291858A1 (en) 2016-10-06

Similar Documents

Publication Publication Date Title
CN105144067B (zh) 用于调节控件的外观的设备、方法和图形用户界面
CN108351750B (zh) 用于处理与触摸输入相关联的强度信息的设备、方法、以及图形用户界面
CN104903834B (zh) 用于在触摸输入到显示输出关系之间过渡的设备、方法和图形用户界面
CN108353126B (zh) 处理相机的内容的方法、电子设备和计算机可读存储介质
CN105144057B (zh) 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
CN105264479B (zh) 用于对用户界面分级结构进行导航的设备、方法和图形用户界面
CN106605196B (zh) 远程相机用户界面
CN105955641B (zh) 用于与对象交互的设备、方法和图形用户界面
CN104903835B (zh) 用于针对多接触手势而放弃生成触觉输出的设备、方法和图形用户界面
CN106462283B (zh) 计算设备上的字符识别
CN104471521B (zh) 用于针对改变用户界面对象的激活状态来提供反馈的设备、方法和图形用户界面
CN105264480B (zh) 用于在相机界面之间进行切换的设备、方法和图形用户界面
CN105264477B (zh) 用于移动用户界面对象的设备、方法和图形用户界面
CN104885050B (zh) 用于确定是滚动还是选择内容的设备、方法和图形用户界面
CN108140361A (zh) 观影模式
CN109690445A (zh) 特殊锁定模式用户界面
CN107491186A (zh) 用于屏幕的手写键盘
CN109844711A (zh) 用于向设备上显示的内容加注释的统一注释层的设备、方法和图形用户界面
CN107430488A (zh) 基于活动的阈值和反馈
CN107683458A (zh) 用于操纵相关应用程序窗口的设备、方法和图形用户界面
CN107408012A (zh) 使用可旋转输入机构来控制系统缩放放大率
CN107690619A (zh) 用于处理触敏表面多个区域上触摸输入的设备和方法
CN107683470A (zh) 用于web浏览器的音频控制
CN109062488A (zh) 用于选择用户界面对象的设备、方法和图形用户界面
CN107710131A (zh) 内容浏览用户界面

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1215092

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant