CN110637280A - 图形图标的操纵 - Google Patents

图形图标的操纵 Download PDF

Info

Publication number
CN110637280A
CN110637280A CN201880032376.7A CN201880032376A CN110637280A CN 110637280 A CN110637280 A CN 110637280A CN 201880032376 A CN201880032376 A CN 201880032376A CN 110637280 A CN110637280 A CN 110637280A
Authority
CN
China
Prior art keywords
graphical
icon
application
graphical item
selection input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201880032376.7A
Other languages
English (en)
Inventor
D.J.墨菲
A.L.加德纳三世
A.B.萨赫特-泽尔特泽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN110637280A publication Critical patent/CN110637280A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

用于图形图标操纵的方法、系统和装置，这些方法、系统和装置包括编码在计算机存储介质上的计算机程序。在一个方面，方法包括接收对应于对位于图形界面的第一部分中的图形项的选择的用户输入的动作。这些动作进一步包括接收对应于图形项的拖动的移动输入。这些动作进一步包括确定选择输入的位置在图形界面的第二部分中。这些动作进一步包括通过基于被放置在第二部分中的图形项提供对图形项的改变的表示来代替图形项从而更新图形项。这些动作进一步包括确定选择输入已经停止。这些动作进一步包括提供对图形项的改变以便于输出。

Description

图形图标的操纵
技术领域
本说明书总体上涉及图形用户界面。
背景技术
图形用户界面(graphical user interface，GUI)是用户界面的允许用户通过图形图标和可视化指示器而不是基于文本的用户界面(诸如键入的命令)与电子设备交互的类型。用户通过直接操纵图形图标和可视化元件来执行动作。
发明内容
用户可以通过将图标从一个位置拖动到另一位置来围绕GUI移动图标。典型地，操作系统可以提供关于用户的动作是否将导致图标及其底层文件或者其他类型的数据的剪切和粘贴、图标及其底层文件的复制、或者底层文件的快捷方式的创建的指示。例如，在底层文件将被复制到用户放下图标的位置的情况下，操作系统可以用加号来增强图标。
为了向用户提供对在应用之间移动图标及其底层文件的含义的更好的理解，在用户将图标悬停在目的地应用上方的同时，操作系统可以调整图标。调整可以包括改变图标以显示如果用户将图标放入到目的地应用中，则目的地应用将显示什么的表示。例如，用户可以将对应于照片的图标移动到照片编辑器中。用户将图标拖动到该照片编辑器应用中。在图标跨越照片编辑器被显示在其上的屏幕的图形边界时，操作系统转换图标以显示底层照片的图像的内容。用户仍然能够如通常在拖动操作期间那样移动图标。在这种情况下，用户能够在实际将图标放入到照片编辑器中之前查看将图标放入到照片编辑器中的含义。
在用户不清楚图标及其底层文件将如何与目的地应用交互的情况下，预览拖动操作和放下操作的含义可能会有所帮助。例如，用户可以将专辑图标拖动到照片编辑器中。专辑图标可以对应于几首音乐曲目和专辑封面图像。当用户将专辑图标拖动到照片编辑器上时，操作系统可以转换专辑图标以显示专辑封面图像的内容。如果用户不想编辑专辑封面的图像，则用户可以在照片编辑器不打开专辑封面图像的情况下将专辑图标从照片编辑器的图形边界中拖出。
通过提供拖动操作和放下操作的含义的预览，操作系统可以通过限制有权访问用户文件的应用来提供改进的安全性和/或保护用户的隐私。在用户将图标悬停在目的地应用上方的同时，目的地应用可能无法访问底层文件。相反，目的地应用向操作系统提供用于再现(rendering)底层文件的指令。因此，用户可以预览拖动操作和放下操作的含义，并决定在目的地应用没有加载底层文件的情况下不将图标拖动到目的地应用中。
根据本申请中描述的主题的创新方面，用于图形图标操纵的方法包括以下动作：通过图形界面接收对应于位于图形界面的第一部分中的图形项的选择的用户输入；在接收选择输入的同时，通过图形界面接收对应于图形项的拖动的移动输入；在接收选择输入和移动输入的同时，确定选择输入的位置在图形界面的第二部分中；基于确定选择输入的位置在图形界面的第二部分中并且在接收选择输入的同时，通过基于放置在第二部分中的图形项来提供对图形项的改变的表示来代替图形项，从而更新图形项；确定选择输入已经停止；并且基于确定选择输入已经停止，提供对图形项的改变以便输出。
这些和其他实施方式可以各自可选地包括以下特征中的一个或多个。这些动作进一步包括，基于确定选择输入已经停止，停止在不改变图形项的情况下提供图形项以便于输出。图形界面的第一部分对应于第一应用，并且图形界面的第二部分对应于不同的第二应用。这些动作进一步包括，响应于通过图形界面接收对应于图形项的拖动的移动输入，访问由图形项表示的对象；从第一应用接收用于在接收选择输入的同时再现对象的第一指令；以及在接收选择输入和移动输入的同时，根据第一指令再现该对象。
这些动作进一步包括，响应于确定选择输入的位置在图形界面的第二部分中，从第二应用接收用于在接收选择输入的同时再现对象的第二指令。基于第二指令更新图形项。这些动作进一步包括确定第二应用被配置为提供对图形项的多个改变；以及从对图形项的多个改变当中选择对图形项的改变。基于用户输入选择对图形项的多个改变当中的对图形项的改变。图形界面的第一部分对应于应用的第一部分，并且图形界面的第二部分对应于应用的不同的第二部分。用户输入可以包括表示图形项的持续移动和/或将图形项改变到图形用户界面的第二部分的不同区域的表示的输入。第二部分的不同区域可以表示第二应用的不同功能区域。
这个方面的其他实施例包括相应系统、装置和记录在计算机存储设备上的计算机程序，这些系统、装置和计算机程序被配置为执行这些方法的操作。
本申请中所描述的主题可以具有以下优点中的一个或多个。该系统能够向用户提供在用户将图标放在应用中而用户实际没有将图标放入应用中的情况下将发生什么的预览。以这种方式，系统提供持续的反馈，以引导更准确和高效的人机交互。例如，通过提供预览，该系统通过帮助用户避免将图标放到不正确或不期望的应用中来实现更准确的人机交互。进一步，通过提高准确性，用户可能不必对不期望的放下执行撤销操作，这导致任务效率的提高和计算资源的使用的提高两者。将内容加载到应用和撤消操作可能在计算方面是昂贵的，并且使用附加的计算资源。例如，当内容被加载到应用中时，内容中的至少一些可以从存储装置中提取并被加载到存储器中，即，这是需要CPU时钟周期、总线带宽和存储器中的空间的操作。相反，根据本文描述的至少一些方面，用户可以查看图标变化并决定是否放下图标。进一步，当在应用内打开内容时，应用可以对该内容执行处理。在打开是无意的或不期望的情况下，应用处理内容的能力可能会带来安全性问题。在本文描述的至少一些方面，系统可以在显示预览时限制应用对图标链接到的任何数据的访问。限制对数据的访问可以提高安全性和/或保护用户的隐私。
本说明书中描述的主题的一个或多个实施例的细节在附图和以下描述中阐述。从描述、附图和权利要求书中，主题的其他特征、方面和优点将变得显而易见。
附图说明
图1A至图1E和图2A至图2F示出了图形图标操作的示例界面。
图3示出了图形图标操作的泳道图。
图4示出了图形图标操纵的示例过程。
图5示出了计算设备和移动计算设备的示例。
在附图中，相同的附图标记始终代表相对应的部分。
具体实施方式
图1A至图1E示出了图形图标操纵的示例界面。简而言之并且如下文更详细描述的那样，用户在具有触摸屏显示器104的移动设备102的GUI上选择图标110。图标110链接到可以由一个或多个应用以一种或多种方式解释的结构化数据。用户选择位于源应用106内的图标110，并且创建临时图标，该临时图标可以链接到所选择的图标110并且具有与所选择的图标110匹配的外观。如果用户将这个临时图标拖动到目的地应用108中，则临时图标基于链接到所选择的图标110的并且目的地应用108识别到的数据来改变外观。用户将临时图标放入到目的地应用108中，并且在目的地应用108中创建新的图像或图标，该图像或图标链接到所选择的图标110链接到的数据中的一些或全部的副本。在这个和其他示例中，图标可以指对象或想法的图像或图形表示。图标也可以指的是更复杂的小部件，诸如由多个视图、文本小部件或任何类似小部件组成的音乐专辑。
图1A示出了具有显示GUI的触摸屏显示器104的示例移动设备102。在图1A的示例中，移动设备102运行两个或多个应用，以分屏布局在触摸屏显示器104的GUI上同时显示这些应用中的至少两个(源应用106和目的地应用108)。尽管在移动设备102的触摸屏显示器104上示出了所显示的GUI，但是它可以在被配置为显示两个或更多应用的(具有或不具有触摸屏显示器的)任何计算设备上被查看。
在图1A的示例中，源应用106是包含多个可选图标110、112、114和116的音乐库应用。具体而言，图标110、112、114和116表示音乐专辑并链接到各种类型的数据，包括例如图像数据和音乐数据。在这个示例中，图像数据是相应专辑封面的表示，并且音乐数据是相应专辑上的一首或多首歌曲。
图标110标识专辑并包括专辑布局，该专辑布局包括图片区域118和标题区域120。图片区域118显示图像数据，例如相应专辑的封面。标题区域120可以被留为空白，或者可以显示与相应专辑相关的信息，例如相应专辑的名称、制作相应专辑的乐队或音乐家的名称、或者相应专辑上的歌曲中的一首或多首的名称。在图1A的示例中，由于对图标110的大小和尺寸的限制以及对图片区域118的相对应的限制，图片区域118可以显示专辑封面的一部分。
如图1A所示，图标110、112、114和116可视化地表示在源应用106的显示区域内的触摸屏显示器104上。在图1A的示例中，图标110、112、114和116具有相似的大小和尺寸。所显示的应用中的图标，例如图标110、112、114和116，可以具有相对的或固定的大小和尺寸。在一些实施方式中，图标的大小可以取决于在相应的应用中显示的其他图标的数量，使得在给定应用中显示的图标越多，每个图标的大小越小。例如，如果源应用106显示一个图标，那么与图标110、112、114和116(其各自占据源应用106的显示区域的大约四分之一)相比，该图标可以占据源应用106的大部分显示区域。类似地，图标的大小也可以，或者可替换地，取决于分配给相应应用(例如，在其中找到图标的源应用106)的显示区域的大小。由于多种原因，给定应用的显示区域可以更大或更小，这些原因包括例如分屏模式下的应用的数量、计算设备的显示屏的大小、以及用户对这个特定应用的显示区域重新确定大小。
在图1A的示例中，目的地应用108是图像编辑器应用，并且不包含图标。在一些实施方式中，目的地应用108可能已经包含与源应用106中的图标110、112、114和116相似的一个或多个图标。因为目的地应用108是图像编辑器，所以这些图标可以链接到图像数据而不是另一类型的数据。
图1B示出了移动设备102的用户使用手指124在触摸屏显示器104上提交触摸输入122。触摸输入122选择源应用106中的图标110。在一些实施方式中，触摸输入122通过用户利用触笔而不是手指124来触摸触摸屏显示器104来进行。可替换地，用户可以通过将光标放置在图标上或者通过使用键盘高亮显示图标，并点击按钮来选择图标110，而无需触摸输入122。例如，用户可以利用鼠标将光标移动到图标110上，并点击鼠标左键来选择图标。
通过用户的触摸输入122选择图标110创建了链接到图标110的概念性图标110A。如图1B所示，概念性图标110A具有专辑布局，该专辑布局具有图片区域118A和标题区域120A，该图片区域显示如图1A所示被显示在所选择的图标110的图片区域118中的相同图像数据，该标题区域可以被留为空白或可以显示如图1A所示可以被显示在所选择的图标110的标题区域120中的相同数据。因此，在图1B的示例中，概念性图标110A具有与如图1A所示的所选择的图标110的外观相匹配的外观。在一些实施方式中，概念性图标110A一旦被创建就可以被强调(emphasized)。例如，概念性图标110A可以利用围绕它的边框高亮显示，或者源应用106的显示区域内除概念性图标110A之外的其他部分可以变暗。在一些实施方式中，在用户在源应用106的区域周围移动概念性图标110a时，图标110可以保留在显示器104上。
图1C示出了用户已经在概念性图标110A上开始拖动运动。用户可以将概念性图标朝向目的地应用108拖动。用户通过从用户执行触摸输入122的时间起保持与触摸屏显示器104的接触，并且将用户的手指124从用户执行触摸输入的点移动到不同的位置，来执行这个拖动运动。在用户在触摸屏显示器104上拖动手指124时，概念性图标110A随着用户的手指124移动。在一些实施方式中，这种拖动运动由用户使用触笔而不是他们的手指124来执行。替换性地，当用户选择图标110而没有触摸输入122时，拖动运动可以通过用户按住被点击的鼠标按钮来选择图标并移动鼠标或按箭头键来移动所创建的概念性图标110A来执行。在一些实施方式中，如上所讨论的那样，在拖动运动期间，概念性图标110A可以继续被强调。
图1D示出了用户已经继续将概念性图标110B拖动到目的地应用108中。概念性图标110B跨越进入目的地应用108的边界中，并且概念性图标110B的外观改变。概念性图标110B的外观方面的变化反映了链接到目的地应用108能够识别的所选择的图标110的数据。在这个示例中，因为目的地应用108是图像编辑器，所以目的地应用108能够识别链接到所选择的图标110的图像数据。在图1D的示例中，这个图像数据是来自音乐专辑的专辑封面的表示，所选图标110表示该专辑封面。
一旦概念性图标110B跨越进入目的地应用108的边界中，概念性图标110B就将布局从描绘所选择的图标110的外观的专辑布局改变为描绘与所选择的图标110链接的图像数据的图像布局。图标布局方面的这种变化对应于从概念性图标110B移除如图1C所示的标题区域120A。由此，在这个示例中，概念性图标110B现在具有单个区域，即图片区域118B。图片区域118B用于显示链接到所选择的图标110的图像数据。在一些实施方式中，概念性图标110B的外观方面的变化可以导致概念性图标110B的大小和/或尺寸的变化。在一些实施方式中，概念性图标110B的外观方面的变化可能不会导致概念性图标110B的大小或尺寸的变化，但是确实导致图片区域118B在尺寸方面增加。在这样的实施方式中，图片区域118B的大小方面的增加等于如图1C所示的先前存在的标题区域120A的大小。图片区域118B的增加的大小可以使得图标110B能够显示链接到所选择的图标110的图像数据的更大部分，如果不是全部的话。例如，与在触摸屏显示器104上概念性图标110A的图片区域118A中显示的专辑封面的部分(如图1C所示)相比，专辑封面的更大部分显示在触摸屏显示器104上概念性图标110B的图片区域118B中(如图1D所示)。源应用106可以在图标110中使用专辑封面的裁剪版本，并且设备102可以在概念性图标110B中显示完整的专辑封面。
在一些实施方式中，一旦概念性图标110B被带入目的地应用108的边界中，概念性图标110B可以继续被强调。例如，概念性图标110B可以继续利用其周围的边框高亮显示，或者除了概念性图标110B之外的任何东西可以在目的地应用108的显示区域内变暗。在一些实施方式中，如果通过将源应用106的周围显示区域变暗来强调概念性图标110B，一旦概念性图标110B被带入目的地应用108的边界内，源应用106的周围显示区域的变暗可以以目的地应用108的周围显示区域的变暗开始而结束。在一些实施方式中，一旦概念性图标110A(如图1C所示)被带到源应用106的边界之外，或者基本上在源应用106的边界之外，则源应用106的周围显示区域的变暗可以结束。
通过将概念性图标的显示从概念性图标110A改变为概念性图标110B，则设备102向用户提供在用户将概念性图标110B放入目的地应用108B中的情况下设备102可以执行的动作的预览。在图1D的示例中，在用户将图标110A拖动到目的地应用108B中时，设备102将显示音乐专辑封面的裁剪版本的图标110改变为专辑封面图像的完整版本。
应当理解的是，虽然拖动操作常规地涉及与触摸屏显示器的持续接触或按住鼠标按钮，但是其他实施方式也是可能的。例如，概念性图标的选择可以被切换(例如，通过选择上下文菜单中的选项或选择键盘键)，使得一旦切换，继续选择不需要持续的用户输入。类似地，虽然概念性图标到第二应用的移动可以由用户在显示器上拖动他们的手指或拖动鼠标来指示，但是应当理解的是，其他实施方式也是可能的。例如，在切换概念性图标的选择的情况下，概念性图标到目的地应用的移动可以通过目的地应用中的用户输入来指示。例如，可以在显示源应用的同时切换概念性图标的选择，随后可以使得目的地应用被显示(例如，借助于任务转换工具)。目的地应用的显示本身可以提供将概念性图标拖动到目的地应用的表示。可替换地，另外的用户输入(例如，轻按显示器或鼠标点击)可以提供将概念性图标拖动到目的地应用的表示。应当理解的是，可以提供用于表示将概念性图标从源应用拖动到目的地应用的其他用户输入。
图1E示出了用户已经通过结束概念性对象110B(如图1D所示)在目的地应用108的边界内的拖动运动来执行放下操作，并且已经将手指124从触摸屏显示器104提起。当用户将手指124从触摸屏显示器104提起时，如图1D所示，概念性图标110B在目的地应用108中被转换成新图像126。在一些实施方式中，新图像126可以通过用户将触笔从触摸屏显示器104提起而不是提起手指124来创建。可替换地，通过用户放开用户点击以选择图标110的按钮，可以在不使用触摸屏显示器的情况下实行新图像126的创建。例如，一旦概念性图标110B已经被拖动到目的地应用108的边界中，已经利用鼠标通过点击鼠标左键使用了所选择的图标110的用户可以通过释放鼠标左键来创建新图像126。
在图1E的示例中，新图像126可以是与所选择的图标110链接的相同图像数据的副本。在一些实施方式中，如图1D所示，新图像126具有与概念性图标110B不同的大小和/或尺寸。新图像126可以大于概念性图标110B。在一些实施方式中，新图像126在其创建时自动填充目的地应用108的大部分显示区域。在一些实施方式中，新图像126可以具有与如图1D所示的概念性图标110B的尺寸成比例的尺寸。
在一些实施方式中，在强调如图1D所示的概念性图标110B的情况下，无论是通过高亮显示概念性图标110B还是通过使目的地应用108的周围显示区域变暗，当概念性图标110B被转换成新图像126时，所述强调结束。在一些实施方式中，其他图标已经存在于目的地应用108内，并且新图像126的创建可以导致重组和/或重新确定现有图标的大小。这种重组和/或重新确定大小将在下面结合图2更详细地讨论。在一些实施方式中，目的地应用108内已经存在的其他图标的数量可以确定新图像126的大小和/或尺寸。
在一些实施方式中，用户手柄在概念性图标110B上的位置可以帮助确定在目的地应用108中显示概念性图标110B的什么图标布局。这个手柄位置也可以帮助确定新图像126将是什么。概念性图标110B上的手柄位置由用户输入触摸输入122的位置确定。在一些实施方式中，手柄位置是用户将光标放置在可选择的图标(例如图标110)上方并点击按钮的位置。特别地，当目的地应用108可以识别链接到所选择的图标110的多种类型的数据时，采用这个特征。例如，如果所选择的图标110表示专辑，并且目的地应用108是能够组织音乐数据(诸如歌曲)和图像数据(例如图片)的库应用，则必须确定概念性图标110B具有图像布局(如图1D所示)还是具有音乐布局(将在下面结合图2更详细地讨论)。另外，必须确定新图像126将链接到音乐数据(其中图像126不再是图像)还是链接到所选择的图标110链接到的图像数据。概念性图标110B上的手柄位置可以帮助进行这些确定。
概念性图标110A可以被分成不同的部分(诸如左部分或右部分)或者被分成多个象限。在一些实施方式中，直到概念性图标110A跨越进入目的地应用108的边界中并成为概念性图标110B，才创建这些部分。在一些实施方式中，目的地应用108能够识别的链接到所选择的图标110的数据类型的数量，所述数据类型的数量可以确定概念性图标110B被分成的部分的数量。例如，如果目的地应用108能够识别链接到所选择的图标110的两种不同的数据类型，诸如如果目的地应用108是库应用，则概念性图标110B被分成两个部分，例如左部分和右部分。因此，如果用户在所选择的图标110的右侧上进行触摸输入122，则一旦概念性图标110B被带入目的地应用108的边界内，这可能导致概念性图标110B从如图1C所示的专辑布局改变到如图1D所示的图像布局。在手柄位置在概念性图标110B的右侧上的情况下，当用户将手指124从触摸屏显示器104提起时，则创建链接到所选择的图标110被链接到的相同图像数据的新图像126。
在以上示例的继续中，如果用户替代性地在所选择的图标110的左侧上进行触摸输入122，则一旦图标被带入目的地应用108的边界中，这可能导致概念性图标110B从如图1C所示的专辑布局变化到下面结合图2讨论的音乐布局。在手柄位置在概念性图标110B的左侧上的情况下，当用户将手指124从触摸屏显示器104提起时，则创建链接到所选择的图标110被链接到的相同音乐数据的一个或多个新图像。在这个示例中，因为所选择的图标110表示专辑，并且可能包含不止一首歌曲的音乐数据，因此一旦在概念性图标110B的左侧上具有手柄位置的用户将手指124从触摸屏显示器104上提起，就可以在目的地应用108中创建多个新图标，每个图标表示来自由所选择的图标110表示的专辑的单个歌曲。
图2A至图2F示出了图形图标操纵的示例界面。简而言之并且如下文更详细描述的那样，用户在具有触摸屏显示器204的移动设备202的GUI上选择图标210。图标210链接到一种或多种类型的数据。用户选择位于源应用206内的图标210，并且创建临时图标，该临时图标链接到所选择的图标210并且具有与所选择的图标210匹配的外观。如果用户将这个临时图标拖动到目的地应用208中，则临时图标基于链接到所选择的图标210的并且目的地应用208识别到的数据的类型来改变外观。用户将临时图标拖动到目的地应用208的图标区域中，并且临时图标可以第二次改变外观，以描绘链接到所选择的图标210的、属于目的地应用208识别到的数据类型的数据。用户将临时图标放入目的地应用208中，并且可以在目的地应用108中创建一个或多个新图标，该一个或多个新图标链接到所选择的图标210链接到的数据中的一些或全部的副本。
图2A示出了具有类似于上面关于图1A所描述的触摸屏显示器的触摸屏显示器204的示例移动设备202。移动设备202运行两个或多个应用，同时显示这些应用中的至少两个，即源应用206和目的地应用208。尽管在移动设备202的触摸屏显示器204上示出了这个示例，但是其他示例可以示出在被配置为显示两个或更多应用的(具有或不具有触摸屏显示器的)任何计算设备上。
在图2A的示例中，源应用206是包含多个可选图标210、212、214和216的音乐库应用。这个源应用206可以类似于如图1A所示的源应用106。具体而言，图标210、212、214和216表示音乐专辑并链接到各种类型的数据，包括例如图像数据和音乐数据。在一些实施方式中，图像数据是相应专辑的封面的表示，并且音乐数据是相应专辑的一首或多首歌曲。
类似于上面参考图1A讨论的图标110，图标210表示专辑，并且因此具有专辑布局，该专辑布局包括图片区域218和标题区域220。图像区域218可以类似于如图1A所示的图像区域118。标题区域220可以类似于如图1A所示的标题区域120。
如图2A所示，图标210、212、214和216可视化地表示在源应用206的显示区域内的触摸屏显示器204上。图标210、212、214和216可以类似于如上所讨论并如图1A所示的图标110、112、114和116。
在图2A的示例中，目的地应用208是包含在列表中竖直排列的图标228、230、232和234的播放列表应用。图标228、230、232和234中的每一个表示歌曲，并链接到相应歌曲的音乐数据。另外，图标228、230、232和234具有歌曲布局，该歌曲布局具有显示歌曲名称和对应于目的地应用208的图标的列表中图标顺序的数字的文本区域(例如文本区域236)。
图2B示出了移动设备202的用户使用手指224在触摸屏显示器204上提供触摸输入222。触摸输入222用于选择源应用206中的图标210。在一些实施方式中，触摸输入222由用户利用触笔而不是手指224触摸触摸屏显示器204来进行。可替换地，用户可以以类似于上面参考图1B讨论的方式的方式，在没有触摸输入222的情况下选择图标，例如图标210。
通过用户的触摸输入222选择图标210创建了链接到图标210的概念性图标210A。如图2B所示，概念性图标210A具有专辑布局，该专辑布局具有图片区域218A和标题区域220A，该图片区域显示被显示在所选择的图标210的图片区域218中的相同图像数据，该标题区域可以被留为空白或可以显示被显示在所选择的图标210的标题区域220中的相同数据。概念性图标210A可以具有与所选择的图标210的外观相匹配的外观，如图2A所示。
图2C示出了用户已经在概念性图标210A上开始拖动运动。用户可以将概念性图标210A朝向目的地应用108拖动。利用用户的手指224以类似于上面参考图1C讨论的方式的方式来执行这种拖动运动。在一些实施方式中，这种拖动运动由用户使用触笔而不是他们的手指224来执行。可替换地，可以以与上面参考图1C讨论的方式类似的方式的方式，在没有触摸输入222的情况下执行这种拖动运动。
图2D示出了用户已经继续将概念性图标210B拖动到目的地应用208中。在概念性图标210B跨越进入目的地应用208的边界中时，概念性图标210B的外观改变。当概念性图标210B的大部分跨越进入目的地应用208的边界时，或者当概念性图标210B的手柄位置(例如，图标210上用户发起触摸输入222的位置)跨越进入目的地应用208的边界时，概念性图标210B跨越进入目的地应用208的边界。上面参照图1B至图1E更详细地讨论了手柄位置。在一些实施方式中，概念性图标210B不改变布局，直到图标被完全带入目的地应用208的边界中。
在图2D的示例中，在跨越进入目的地应用208的边界时概念性图标210B的外观方面的变化反映了链接到所选择的图标210的、目的地应用208能够识别的数据的类型。特别地，因为目的地应用208是播放列表应用，所以它能够识别到所选择的图标210被链接到音乐数据。因为播放列表应用能够识别到所选择的图标210被链接到音乐数据，所以概念性图标210B从如图2C所示的专辑布局改变到显示歌曲列表的可视化表示的音乐布局。歌曲列表可以是标有项目符号的(如图2D所示)，或者可以是编号的。在一些实施方式中，概念性图标210B显示不反映所选择的图标210被链接到的任何实际数据的通用音乐布局的默认图像。这与如图1D所示的概念性图标110B(其显示所选择的图标110被链接到的实际图像数据)形成对比。可替换地，概念性图标210B可以描绘被链接到所选择的图标210的实际音乐数据，并且当概念性图标210B被带入目的地应用208的边界中时，显示由所选择的图标210表示的相应专辑的歌曲的歌曲名称中的一些或全部。
概念性图标210B跨越目的地应用208的边界，并且概念性图标210B将布局从描绘所选择的图标210的外观的专辑布局改变为描绘歌曲列表的可视化表示的音乐布局。图标布局方面的这种变化对应于图片区域218A和标题区域220A两者被单个歌曲列表区域238代替。在图2D的示例中，概念性图标210B的外观方面的变化可以导致概念性图标210B的大小或尺寸的变化。由此，歌曲列表区域238在尺寸方面可以大于，或者在尺寸方面小于如图2C所示的图片区域218A和标题区域220A的组合。在一些实施方式中，歌曲列表区域238在大小方面可以等于如图2C所示的图片区域218A和标题区域220A的组合。在一些实施方式中，在概念性图标210B包含被链接到所选择的图标210的实际音乐数据的情况下，概念性图标210B的大小和/或尺寸可以基于由所选择的图标210表示的相应专辑中的歌曲数量，在基本上被拖入目的地应用208的边界时改变。
图2E示出了用户已经在目的地应用208内继续概念性图标210C的拖动运动。在一些实施方式中，当概念性图标210C被带到目的地应用208内的图标(例如，如图2D所示的图标228、230、232和234)附近时，概念性图标210C可以第二次改变外观。尽管概念性图标210C保持音乐布局，但是其大小和比例可以改变，并且概念性图标210C现在通过显示与由所选择的图标210表示的相应专辑相关联的歌曲的歌曲名称中的一些或全部来描绘被链接到所选择的图标210的音乐数据。在一些实施方式中，概念性图标210C已经加宽到目的地应用208的显示区域的宽度。在一些实施方式中，在概念性图标210B包含被链接到所选择的图标210的实际音乐数据的情况下，概念性图标方面的第二次改变(例如，如概念性图标210C所示)可能不会发生。
概念性图标210C的大小和/或尺寸可以取决于与由所选择的图标210表示的相应专辑相关联的歌曲的数量。例如，在有与相应专辑相关联的更多的歌曲的情况下概念性图标210C可以更大，或者在有与相应专辑相关联的更少的歌曲的情况下概念性图标210C可以更小。在一些实施方式中，概念性图标210C可以显示相应专辑的歌曲的最大数量的歌曲名称。例如，概念性图标210C可以被限制为仅显示三首歌曲的名称，尽管所选择的图标210表示具有多于三首歌曲的专辑。当概念性图标210C没有显示相应专辑的歌曲的所有歌曲名称时，概念性图标210C还可以包括符号，诸如竖直省略号，以发信号通知概念性图标210C表示比正在显示的更多的歌曲。
当概念性图标210C被带到目的地应用208内的图标(例如图2D所示的图标228、230、232和234)附近时，它被放置成与那些图标对齐。这可以与概念性图标的先前表现形成对比，例如，如图2B至图2C所示的概念性图标210A和210B，它们悬停在图标上方。当概念性图标210C被放置为与目的地应用208内的图标对齐时，它可以迫使图标中的一个或多个改变位置。在图2E的示例中，图标234可以被移出目的地应用208的显示区域，并且图标232可以被重新定位在目的地应用208的显示区域的底部附近。此外，在概念性图标210C被带到目的地应用208内的图标附近时，概念性图标210C的上边界和下边界可以从实线变为虚线，以表示概念性图标210C已经被放置为与目的地应用208内的图标对齐。在一些实施方式中，代替如图2D所示的图标234被挤出目的地应用208的显示区域，图标228、230、232和234在尺寸方面可以缩小使得它们全部在目的地应用208的显示区域内保持可见，尽管概念性图标210C被放置为与它们对齐。
图2F示出了用户已经通过结束概念性对象210C在目的地应用208的边界内的拖动运动来执行放下操作，并且已经将手指224从触摸屏显示器204提起。用户将他们的手指224从触摸屏显示器204提起，并且概念性图标210C被转换成三个新图标，即，表示“歌曲X”的图标240、表示“歌曲Y”的图标242，以及表示当前未在目的地应用208的显示区域中示出的“歌曲Z”的图标。这三个图标各自表示和与所选择的图标210相关联的相应专辑相关联的歌曲中的一首。在图2F的示例中，由所选择的图标210表示的专辑包含三首歌曲，其中新图标240、242和表示“歌曲Z”的图标各自表示这三首歌曲中的一首。新图标240、242和表示“歌曲Z”的图标各自具有带有文本区域(例如文本区域236)的歌曲布局，该文本区域显示相应歌曲的名称和对应于目的地应用208的图标的列表内的图标顺序的数字。在一些实施方式中，新图标240、242和表示“歌曲Z”的图标可以由用户从触摸屏显示器204上提起触笔而不是提起他们的手指224来创建。可替换地，新图标240、242和表示“歌曲Z”的图标的创建可以以类似于上面参考图1E讨论的方式的方式在不使用触摸屏显示器的情况下实行。
新图标240、242和表示“歌曲Z”的图标可以以对应于如图2E所示的概念性图标210C的对齐位置的顺序被放置在目的地应用208内的图标列表中。在图2F的示例中，当概念性对象210C在图标230和图标232之间时，用户对如图2E所示的概念对象210C执行放下操作。由此，当用户执行放下操作时，新图标240、242和表示“歌曲Z”的图标被放置在图标230下方和图标232上方的目的地应用208的图标列表中。在一些实施方式中，在创建新图标240、242和表示“歌曲Z”的图标时，目的地应用208内的被如图2E所示的概念性图标210C挤出目的地应用208的显示区域的任何图标可以不继续显示。另外，在图2F的示例中，不是所有的新图标都可以显示。例如，在一些实施方式中，目的地应用208可以具有其可以在其显示区域内显示最大数量的图标，诸如四个图标。在这个示例中，因为表示“歌曲Z”的图标将是第五个图标，所以它与图标232和234一起被移出目的地应用208的显示区域。在一些实施方式中，如果概念性图标210C的对齐放置和/或新图标240、242以及表示“歌曲Z”的图标的创建导致目的地应用内的任何图标被移出目的地应用208的显示区域，则可以显示诸如竖直省略号的符号图标246，以传达一些图标已经从显示器中省略。在一些实施方式中，符号图标246可以是可选的。在符号图标246是可选择的情况下并且如果用户点击符号图标，目的地应用208内的先前没有显示的图标现在将显示在目的地应用208的显示区域内。
在图2F的示例中，新图标240、242和表示“歌曲Z”的图标各自表示歌曲并链接到与所选择的图标210链接的音乐数据的一部分的副本。在一些实施方式中，新图标240、242和表示“歌曲Z”的图标共同具有与如图2E所示的概念性图标210C不同的大小和/或具有不同的尺寸。在一些实施方式中，新图标240、242和表示“歌曲Z”的图标的整体大小可以具有类似于如图2E所示的概念性图标210C的整体大小和尺寸。然而，在新图标240、242和表示“歌曲Z”的图标共同地大于或小于如图2E所示的概念性图标210C的实施方式中，可以取决于目的地应用208中已经存在的图标的数量。例如，如果在创建新图标240、242和表示“歌曲Z”的图标之前，目的地应用208中不存在图标，则新图标240、242和表示“歌曲Z”的图标可以具有比如图2E所示的概念性图标210C更大的整体大小，以便尝试填充目的地应用208的空白空间。然而，如果在创建新图标240、242和表示“歌曲Z”的图标之前，一个或多个图标已经存在于目的地应用208中，例如图2A所示的图标228、230、232和234，则新图标240、242和表示“歌曲Z”的图标可以具有比如图2E所示的概念性图标210C更小的整体大小，以便尝试在目的地应用208内显示所有图标。
在一些实施方式中，概念性图标210A、210B或210C可以在创建中每个图标时、在源应用206中拖动每个图标时、在每个图标基本上被拖动到目的地应用208中时、和/或在每个图标被放置为与目的地应用208中的图标对齐时高亮显示。概念性图标210A、210B或210C的高亮显示可以以类似于上面参考图1B至图1D讨论的概念性图标110A和110B的方式的方式完成。
图3示出了图形图标操作的泳道图300。通常，泳道图300示出了源应用和目的地应用与移动设备或其他计算设备的操作系统通信的示例过程。这个过程包括用户选择图形项，在源应用中拖动图形项的表示，将图形项的表示拖动到目的地应用中，以及将图形项的表示拖放到目的地应用内。将经常参考图1A至图1E和图2A至图2F来解释这个过程。
在图3的示例中，泳道图300中示出的过程可以使用具有程序代码的计算机可读存储介质来实施，该程序代码由移动设备、计算设备或任何指令执行系统使用或与其结合使用。另外，这个过程可以在图1A至图1E和图2A至图2F的示例截屏中实施。例如，如图3中所描绘，“源应用”可以指如图1A所示的源应用106或如图2A所示的源应用206；“目的地应用”可以指如图1A所示的目的地应用108，或者如图2A所示的目的地应用208；“操作系统”可以指移动设备的操作系统，诸如图1A所示的移动设备102，或者图2A所示的移动设备202；“图形项”可以指如图1A所示的图标110，或者如图2A所示的图标210；“图形项的表示”可以指如图1A至图1D所示的概念性图标110A和110B，或者如图2A至图2E所示的概念性图标210A、210B或210C。
泳道图300所示的过程可以从阶段302开始，在阶段302，移动设备(例如，如图1A所示的移动设备102)的操作系统接收由用户进行的选择输入。用户可以以多种方式进行选择输入，诸如通过利用手指(例如图1B所示的手指124)或者利用触笔进行触摸输入，例如图1B所示的触摸输入122。用户也可以在没有触摸输入的情况下进行选择输入，如上面参考图1B更详细讨论的那样。选择输入是在源应用内的图形项(例如图1A所示的图标110)上进行的。操作系统接收选择输入，并向源应用指示用户已经在特定位置在源应用上执行了手势，并请求到所选择的图形项的链接(304)。
响应于操作系统对到图形项的链接的请求(304)，源应用向操作系统发送到用户在其处执行选择输入的图形项的链接(306)。除了向操作系统发送到图形项的链接之外，源应用还发送用于再现图形项的表示的操作系统指令(308)。操作系统接收图形项的链接和用于再现其表示的指令，并根据来自源应用的指令再现图形项的表示(310)。在一些实施方式中，操作系统还可以再现图形项的表示的强调。上面参考图1B至图1D更详细地讨论了图形项的表示(例如，图1C所示的概念性图标110A)的强调。
在一些实施方式中，源应用可以执行图形项的表示的再现。在一些实施方式中，操作系统在接收到图形项的链接时，可以将该链接发送到查找系统，以找到用于帮助再现图形项的表示的应用。在这种场景下，查找系统可能选择源应用作为用于帮助再现图形项的表示的应用。在一些实施方式中，其中操作系统本地识别如何再现图形项的表示，操作系统可以处理图形项的表示的再现，而无需将到图形项的链接发送到查找系统，和/或使用用于再现由源应用发送到操作系统的图形项的表示的指令。
通过泳道图300示出的过程的阶段302至310，移动设备的GUI可以经历一些改变。这些潜在变化的示例由图1A至图1C和图2A至图2C提供，其中在选择图形项(例如，如图1A所示的图标110)时，创建图形项的表示(例如，如图1B所示的概念性图标110A)，这可以由用户在源应用(例如，如图1A所示的源应用106)的边界内和边界外操纵。
用户将图形项的表示拖动到目的地应用的边界内，或者基本上拖动到目的地应用的边界内，并且图形项的链接被发送到目的地应用，例如，如图1A所示的目的地应用108。上面参考图2C更详细地讨论了将图形项的表示(例如概念性图标210B)基本上拖动到目的地应用(例如目的地应用208)的边界中。一旦从操作系统接收到图形项的链接(312)，目的地应用确定如何再现图形项的新表示(314)。目的地应用通过标识它所识别的、链接到图形项的数据类型来进行这个确定。基于这个识别，目的地应用向操作系统发送用于再现图形项的新表示的指令(316)。一旦接收到用于再现图形项的新表示的指令，操作系统根据源应用(例如图1A所示的源应用106)，再现图形项的新表示(例如图1B所示的概念性图标110B)(318)。在一些实施方式中，操作系统还可以有助于在图形项的表示的再现和图形项的新表示的再现之间提供动画。在一些实施方式中，操作系统还可以继续再现图形项的表示(例如，如图1D所示的概念性图标110B)的强调，如上面参考图1B至图1D更详细讨论的那样。
在一些实施方式中，操作系统在阶段312向目的地应用提供到图形项的、与到操作系统在阶段306中接收的图形项的链接不同的链接。操作系统可以提供到图形项的链接(该链接被设计成保护底层数据)，同时还向目的地应用提供足够的信息来确定如何再现图形项。限制底层数据暴露的操作系统可以保护文件免受不必要地暴露于附加应用，并通过限制有权访问底层数据的应用来保护用户的隐私。
在一些实施方式中，目的地应用可以执行图形项的表示的再现。在一些实施方式中，在目的地应用不识别被链接到图形项的数据的类型的情况下，目的地应用可以向操作系统指示它不知道如何再现图形项的新表示。目的地应用可以通过不向操作系统提供用于再现图形项的任何指令、通过请求操作系统执行查找和/或向操作系统提供用于执行查找的指令来做出这个指示。在查找期间，操作系统可以将图形项的链接发送到查找系统，以找到用于帮助再现图形项的新表示的应用。在这种场景下，查找系统可以继续使用源应用作为用于帮助再现图形项的表示的应用。在一些实施方式中，在操作系统本地识别如何再现图形项的表示的情况下，它可以处理图形项本身的新表示的再现，而无需将到图形项的链接发送到查找系统。在一些实施方式中，在目的地应用不识别链接到图形项的数据类型的情况下，操作系统可以为图形项的新表示再现默认图形图像，以指示目的地应用不识别如何再现图形项的表示，并且图形项的表示不能被放在目的地应用的边界内。
通过泳道图300示出的过程的阶段312至318，移动设备的GUI可以经历一些改变。这些潜在变化的示例由图1C至图1D和图2C至图2E提供，其中在将图形项的表示(例如，如图1C所示的概念性图标110A)拖动到目的地应用的边界中时，图形项的表示改变，例如，如图1D所示的概念性图标110B。
在阶段320，在用户将图形项的新表示放在目的地应用的边界内时，目的地应用再现图形项的全部或一部分的新副本。如上面参考图1E和图2F所讨论的那样，用户通过结束他们的选择输入(例如图1B所示的触摸输入122)，通过将他们的手指或触笔从移动设备的触摸屏显示器上提起，或者放开他们点击以选择图形项的键，来防放下图形项的表示(例如图1D所示的概念性图标110B)。如以上图1E和图2F的示例所示，图形项的新副本可能看起来类似于图形项的新表示的副本。图形项的新副本的创建也可以创建图形项链接到的数据的全部或一部分的副本。在一些实施方式中，仅复制属于目的地应用从图形项识别到的数据的类型的数据。图形项的新副本链接到数据的新副本。
在一些实施方式中，在目的地应用不识别被链接到图形项的数据的类型的情况下，可以防止用户将图形项的新表示放在目的地应用的边界内。试图通过结束他们的选择输入来对目的地应用的边界内的图形项的新表示执行放下操作的用户可能导致图形项的新副本没有被创建。在一些实施方式中，在用户试图执行这样的放下操作的情况下，图形项的表示可能会消失，因为操作系统将停止再现它。在这种场景下，用户可以对图形项执行新的选择输入，以重新创建图形项的表示。
通过泳道图300示出的过程的阶段320，移动设备的GUI可以经历一些改变。这些潜在变化的示例由图1D至图1E和图2E至图2F提供，其中在将图形项的表示(例如，如图1D所示的概念性图标110B)放在目的地应用的边界内时，新图标(例如，如图1E所示的图像126)被创建。
图4示出了图形图标操纵的示例过程400。通常，过程400从用户接收被显示在图形界面上的图形项的拖动输入。用户将图形项拖动到图形界面的不同部分，并且过程400更新图形项以示出如果用户将图形项放在不同部分中，图形项将对图形界面的不同部分造成的改变。过程400将被描述为由包括一个或多个计算机的计算机系统执行，例如，图1所示的计算设备100或如图2所示的计算设备200。
该系统通过图形界面接收被解释为对位于图形界面的第一部分中的图形项的选择的选择输入(410)。在一些实施方式中，图形是表示文件(诸如照片、歌曲、专辑、播放列表、文本文件、电子表格文件等)的图标。在一些实施方式中，选择输入是触摸屏显示器上的触摸输入。在一些实施方式中，选择输入是鼠标点击。在一些实施方式中，选择输入是语音输入。例如，用户可以说，“选择并拖动摇滚专辑”。在一些实施方式中，选择输入是切换输入，诸如在基于虚拟现实的指向式用户界面中。例如，用户可以在照片组织应用中选择多个照片。这组照片能够通过作为切换而不是连续输入的选择输入被集体拖动。在一些实施方式中，图形界面的第一部分是应用，例如音乐应用的窗口。在一些实施方式中，图形界面的第一部分是文件浏览器。在一些实施方式中，图形界面的第一部分是应用的特定区域。例如，第一部分是照片编辑器应用中的图像的列表。
系统在接收选择输入的同时，通过图形界面接收移动输入，该移动输入被解释为图形项的拖动(420)。例如，用户在显示器上移动用户的手指，同时保持与显示器的接触。作为另一示例，用户在图形界面上移动鼠标光标，同时保持鼠标处于点击状态。这些动作在图形界面上移动图形项。
系统在接收选择输入和移动输入的同时，确定选择输入的位置在图形界面的第二部分中(430)。在一些实施方式中，图形界面的第二部分是不同于图形项最初所在的应用的第二应用。在一些实施方式中，第二部分对应于应用的不同部分。例如，应用可以是照片编辑器，在边框中具有图像的列表并且在照片编辑器的中心具有主照片编辑空间。边框可以是第一部分，并且主照片编辑空间可以是第二部分。在一些实施方式中，第一和第二部分可以不同时显示。第一和第二部分可以被显示在显示器的相同坐标处。
在一些实施方式中，系统从对应于第一部分的应用接收用于再现图形项的指令。在用户在图形界面的第一部分周围拖动图形项的同时，系统可以使用指令来再现图形项。例如，用户可以从文件浏览器窗口从文件中选择播放列表图标。在用户在文件浏览器周围拖动播放列表图标的同时，系统可以根据来自文件浏览器的指令再现播放列表图标。在一些实施方式中，指令可以用于在图形项出现在第一部分中时再现图形项。在播放列表示例的情况下，在用户选择播放列表图标之前，系统可以在播放列表图标出现在第一部分中时，再现播放列表图标。在这种情况下，用户似乎正在图形界面周围移动播放列表图标，同时拖动播放列表图标。
该系统基于确定选择输入的位置在图形界面的第二部分中并且在接收选择输入的同时，来通过基于被放置在第二部分中的图形项提供对图形项的改变的表示来代替图形项从而更新图形项(440)。在一些实施方式中，系统从第二部分的应用接收用于当图形项跨越进入第二部分时再现图形项的指令。应用可以接收图形项指向的对象，并且应用可以提供用于再现该对象的指令。可替换地或附加地，应用可以接收指向对象的链接、引用或指针。再现对应于当用户停止提供选择输入时对象将如何出现在第二部分中。例如，用户可以从文件浏览器中选择专辑。专辑可以由音乐音符的图标来表示。用户将专辑图标拖动到照片编辑器中。专辑图标跨越照片编辑器的边界，并且照片编辑器提供了用于再现专辑图标的指令。如果用户将专辑图标放入照片编辑器，指令对应于照片编辑器将显示的内容。在这种情况下，照片编辑器可以显示专辑封面。因此，系统基于照片编辑器提供的指令将图标改变为专辑封面。这允许用户预览在用户将专辑图标放入照片编辑器的情况下专辑图标将会发生什么。
在一些实施方式中，第二部分的接收应用可以能够以多于一种方式显示图形项。例如，专辑图标可以链接到具有曲目列表和专辑封面的专辑。用户可以将专辑图标拖动到呈现应用(presentation application)。用户将专辑图标拖动穿过呈现应用的边界。呈现应用分析专辑图标链接到的数据。数据包括曲目列表、音乐文件和专辑封面。如果用户要将专辑图标放入呈现应用中，则呈现应用确定它能够显示曲目列表或专辑封面。在一个实例中，呈现应用可以通知系统呈现应用可以以两种不同的方式再现专辑图标。系统可以向用户呈现两种不同的方式，并且用户可以选择一种。如果用户选择曲目列表，则在用户将专辑图标悬停在呈现应用上方的同时，系统将专辑图标改变为曲目列表的表示。如果用户选择专辑封面，则在用户将专辑图标悬停在呈现应用上方的同时，系统将专辑图标改变为专辑封面艺术的表示。
在另一实例中，呈现应用可以选择如何再现专辑图标。呈现应用可以基于呈现应用的能力和特征来选择选项。呈现应用可能更常用于显示图像而不是文本。在这种情况下，呈现应用可以向系统提供指令，以将专辑图标再现为专辑封面。在一些实施方式中，呈现应用可以提供将专辑图标再现为专辑封面或曲目列表的选项。系统可以基于呈现应用的特征进行选择。系统也可以基于系统上的负载进行选择。例如，系统可以使用较少的计算资源(例如存储器或处理能力或两者)，来再现曲目列表的表示，而不是专辑封面艺术。在这种情况下，系统可以选择曲目列表再现选项。
系统确定选择输入已经停止(450)。在这种情况下，用户已经将图形图标放入第二部分中。例如，用户可以将专辑图标放入呈现应用中或照片编辑器中。
该系统基于确定选择输入已经停止，提供对图形项的改变以便于输出(460)。例如，照片编辑器应用可以打开专辑封面进行编辑。专辑封面艺术可以是与用于以图标显示专辑封面的文件分离的文件。作为另一示例，呈现应用可以显示专辑中曲目列表的可编辑副本。呈现应用可替换地显示专辑封面艺术的可编辑副本。在接收应用被配置为显示图标的不同表示的情况下，接收应用可以显示对应于当图标跨越接收应用的边界时图标如何改变的表示。在一些实施方式中，接收应用可以提示用户接收应用应该如何显示底层数据。
在一些实施方式中，当图形项被放入接收应用中时，接收应用可能不会导致对图形项的可视化改变。在接收应用是音乐播放器应用的示例中，音乐播放器应用可以播放用户放入音乐播放器中的音频文件。在这种情况下，用户可以将标识音频文件的图标悬停在音乐播放器应用上方。标识音频文件的图标可以转换成音乐音符图标，以向用户指示音乐播放器应用将播放音频文件。图标可以被动画化以指示音乐播放。可替换地或附加地，在用户将图标悬停在音乐播放应用上方的同时，系统可以通过扬声器输出音频文件的一部分。代替音频文件的一部分，输出的音频可以是通用音频文件。通过播放通用音频文件，音乐播放器应用可能不访问底层音频文件，同时仍然向用户提供如果用户放下图标则音乐播放器应用将播放音频文件的指示。
图5示出了可以用于实施本文描述的技术的计算设备500和移动计算设备550的示例。计算设备500旨在表示各种形式的数字计算机，诸如膝上型计算机、台式计算机、工作站、个人数字助理、服务器、刀片式服务器、大型机和其他合适的计算机。移动计算设备550旨在表示各种形式的移动设备，诸如个人数字助理、蜂窝电话、智能电话和其他类似的计算设备。这里示出的组件、它们的连接和关系以及它们的功能仅是示例，而不是限制性的。
计算设备500包括处理器502、存储器504、存储设备506、连接到存储器504和多个高速扩展端口510的高速接口508、以及连接到低速扩展端口514和存储设备506的低速接口512。处理器502、存储器504、存储设备506、高速接口508、高速扩展端口510和低速接口512中的每一个都使用各种总线互连，并且可以安装在公共主板上或者以其他适当的方式安装。处理器502可以处理用于在计算设备500内执行的指令(包括存储在存储器504中或存储设备506上的指令)，以在外部输入/输出设备(诸如耦合到高速接口508的显示器516)上显示用于GUI的图形信息。在其他实施方式中，可以适当地使用多个处理器和/或多个总线，以及多个存储器和多种类型的存储器。而且，可以连接多个计算设备，其中每个设备(例如，作为服务器组、刀片式服务器群组或多处理器系统)提供必要操作的一部分。
存储器504将信息存储在计算设备500内。在一些实施方式中，存储器504是一个或多个易失性存储单元。在一些实施方式中，存储器504是一个或多个非易失性存储单元。存储器504也可以是另一形式的计算机可读介质，注入后磁盘或光盘。
存储设备506能够为计算设备500提供大容量存储。在一些实施方式中，存储设备506可以是或包含计算机可读介质，诸如软盘设备、硬盘设备、光盘设备或磁带设备、闪存或其他类似的固态存储器设备、或者包括存储区域网络中的设备或其他配置的设备阵列。指令可以存储在信息载体中。当由一个或多个处理设备(例如，处理器502)执行时，这些指令执行一个或多个方法，诸如以上描述的那些方法。指令也可以由一个或多个存储设备存储，诸如计算机或机器可读介质(例如，存储器504、存储设备506或处理器502上的存储器)。
高速接口508管理计算设备500的带宽密集型操作，而低速接口512管理较低带宽密集型操作。这种功能分配仅是示例。在一些实施方式中，高速接口508耦合到存储器504、显示器516(例如，通过图形处理器或加速器)，并且耦合到可以接受各种扩展卡的高速扩展端口510。在实施方式中，低速接口512耦合到存储设备506和低速扩展端口514。可以包括各种通信端口(例如，USB、蓝牙、以太网、无线以太网)的低速扩展端口514可以例如通过网络适配器耦合到一个或多个输入/输出设备，诸如键盘、定点设备、扫描仪或诸如交换机或路由器的联网设备。
如图所示，计算设备500可以以多种不同的形式实施。例如，它可以实施为标准服务器520，或者在一组这样的服务器中实施多次。此外，它可以在诸如膝上型计算机522的个人计算机中实施。它也可以被实施为机架式服务器系统524的一部分。可替换地，来自计算设备500的组件可以与诸如移动计算设备550的移动设备中的其他组件相结合。这样的设备中的每一个可以包含计算设备500和移动计算设备550中的一个或多个，并且整个系统可以由彼此通信的多个计算设备构成。
移动计算设备550包括处理器552、存储器564、诸如显示器554的输入/输出设备、通信接口566和收发器568以及其他组件。移动计算设备550还可以被提供为具有存储设备(诸如微驱动器或其他设备)以提供附加的存储。处理器552、存储器564、显示器554、通信接口566和收发器568中的每一个都使用各种总线互连，并且组件中几个可以安装在公共主板上或者以其他适当的方式安装。
处理器552可以执行移动计算设备550内的指令，包括存储在存储器564中的指令。处理器552可以被实施为芯片组芯片，这些芯片包括分离的多个模拟和数字处理器。处理器552可以提供例如移动计算设备550的其他组件的协调，诸如用户界面的控制、移动计算设备550运行的应用以及移动计算设备550的无线通信。
处理器552可以通过耦合到显示器554的控制接口558和显示接口556与用户通信。显示器554可以是例如TFT(薄膜晶体管液晶显示器)显示器或OLED(Organic LightEmitting Diode，有机发光二极管)显示器，或其他合适的显示技术。显示接口556可以包括用于驱动显示器554以向用户呈现图形信息和其他信息的适当电路系统。控制接口558可以从用户接收命令，并将它们转换以提交给处理器552。此外，外部接口562可以提供与处理器552的通信，以便使得移动计算设备550能够与其他设备进行近区域通信。外部接口562可以例如在一些实施方式中提供有线通信，或者在其他实施方式中提供无线通信，并且也可以使用多个接口。
存储器564在移动计算设备550内存储信息。存储器564可以被实施为一种或多种计算机可读介质、一个或多个易失性存储单元或一个或多个非易失性存储单元中的一个或多个。扩展存储器574还可以被提供并通过扩展接口572连接到移动计算设备550，该扩展接口可以包括例如SIMM(Single In Line Memory Module，单列直插式存储器模块)卡接口。扩展存储器574可以为移动计算设备550提供额外的存储空间，或者也可以为移动计算设备550存储应用或其他信息。具体而言，扩展存储器574可以包括执行或补充上述过程的指令，并且还可以包括安全信息。因此，例如，扩展存储器574可以被提供为移动计算设备550的安全模块，并且可以利用允许安全使用移动计算设备550的指令来编程。此外，可经由SIMM卡提供安全应用以及附加信息，诸如以不可破解的方式在SIMM卡上放置标识信息。
如下所讨论的那样，存储器可以包括例如闪存和/或NVRAM存储器(非易失性随机存取存储器)。在一些实施方式中，指令存储在信息载体中。当由一个或多个处理设备(例如，处理器552)执行时，这些指令执行一个或多个方法，诸如以上描述的那些方法。指令也可以由一个或多个存储设备存储，诸如一个或多个计算机或机器可读介质(例如，存储器564、扩展存储器574或处理器552上的存储器)。在一些实施方式中，指令可以例如通过收发器568或外部接口562以传播信号的形式被接收。
移动计算设备550可以通过通信接口566无线通信，该通信接口566在必要的情况下可以包括数字信号处理电路系统。通信接口566可以提供各种模式或协议下的通信，诸如GSM语音呼叫(Global System for Mobile communication，全球移动通信系统)、SMS(Short Message Service，短消息服务)、EMS(Enhanced Messaging Service，增强型消息收发服务)或MMS消息收发(多媒体消息服务)、CDMA(code division multiple access，码分多址)、TDMA(time division multiple access，时分多址)、PDC(Personal DigitalCellular，个人数字蜂窝)、WCDMA(Wideband Code Division Multiple Access，宽带码分多址)、CDMA2000或GPRS(General Packet Radio Service，通用分组无线服务)等。这种通信可以例如通过使用射频的收发器568发生。此外，可能会发生短程通信，诸如使用蓝牙、WiFi或其他这样的收发器。此外，GPS(Global Positioning System，全球定位系统)接收器模块570可以向移动计算设备550提供附加的导航和位置相关无线数据，这些数据可以被在移动计算设备550上运行的应用适当地使用。
移动计算设备550还可以使用音频编解码器560可听见地通信，该音频编解码器560可以从用户接收口头信息并将其转换成可用的数字信息。音频编解码器560同样地可以(诸如通过扬声器)为用户生成可听声音，例如在移动计算设备550的手机中。这种声音可以包括来自语音电话呼叫的声音，可以包括记录的声音(例如，语音消息、音乐文件等)并且还可以包括由在移动计算设备550上操作的应用生成的声音。
如图所示，移动计算设备550可以以许多不同的形式实施。例如，它可以被实施为蜂窝电话580。它也可以被实施为智能电话582、个人数字助理或其他类似移动设备的一部分。
这里描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、专门设计的ASIC(application specific integrated circuit，专用集成电路)、计算机硬件、固件、软件和/或他们组合中实现。这些不同的实施方式可以包括在可编程系统上可执行和/或可解释的一个或多个计算机程序中的实施方式，该可编程系统包括至少一个可编程处理器，该可编程处理器(其可以是专用的或通用的)耦合成从存储系统、至少一个输入设备和至少一个输出设备接收数据和指令，以及向存储系统、至少一个输入设备和至少一个输出设备发送数据和指令。
这些计算机程序(也称为程序、软件、软件应用或代码)包括用于可编程处理器的机器指令，并且可以以高级过程和/或面向对象的编程语言和/或以汇编/机器语言来实施。如本文所使用的，术语机器可读介质和计算机可读介质指的是用于向可编程处理器提供机器指令和/或数据的任何计算机程序产品、装置和/或设备(例如，磁盘、光盘、存储器、可编程逻辑设备(Programmable Logic Devices，PLD))，包括接收机器指令作为机器可读信号的机器可读介质。术语机器可读信号指的是用于向可编程处理器提供机器指令和/或数据的任何信号。
为了提供与用户的交互，这里描述的系统和技术可以在计算机上实施，该计算机具有用于向用户显示信息的显示设备(例如CRT(cathode ray tube，阴极射线管)或LCD(liquid crystal display，液晶显示器)以及用户可以通过其向计算机提供输入的键盘和指示设备(例如鼠标或轨迹球)。其他类型的设备也可以被用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的感官反馈，例如视觉反馈、听觉反馈或触觉反馈；并且可以以任何形式接收来自用户的输入，包括声学输入、语音输入或触觉输入。
这里描述的系统和技术可以在计算系统中实施，该计算系统包括后端组件(例如，作为数据服务器)，或者包括中间件组件(例如，应用服务器)，或者包括前端组件(例如，具有图形用户界面或网络浏览器的客户端计算机，用户可以通过该图形用户界面或网络浏览器与这里描述的系统和技术的实施方式进行交互)，或者这种后端、中间件或前端组件的任意组合。系统的组件可以通过任何形式或介质的数字数据通信(例如通信网络)互连。通信网络的示例包括局域网(local area network，LAN)、广域网(wide area network，WAN)和因特网。
计算系统可以包括客户端和服务器。客户端和服务器通常彼此远离，并且通常通过通信网络进行交互。客户端和服务器的关系由于在各个计算机上运行并且彼此具有的客户端-服务器关系的计算机程序而产生。
尽管上面已经详细描述了几个实施方式，但是其他修改也是可能的。例如，虽然客户端应用被描述为访问(多个)代理，但是在其他实施方式中，(多个)代理可以被由一个或多个处理器实施的其他应用(诸如在一个或多个服务器上执行的应用)使用。此外，图中描绘的逻辑流程不要求所示的特殊的顺序或顺次的顺序来实现期望的结果。此外，可以从所描述的流程中提供其他动作或消除动作，并且可以向所描述的系统添加其他组件或从所描述的系统中移除其他组件。因此，其他实施方式也在以下权利要求的范围内。

Claims (22)

1.一种计算机实施的方法，包括：
通过图形界面接收对应于对位于图形界面的第一部分中的图形项的选择的用户输入；
在接收所述选择输入的同时，通过图形界面接收对应于图形项在图形界面的第二部分中的放置的移动输入；
在接收所述选择输入的同时，确定所述选择输入的位置在图形界面的第二部分中；
基于确定所述选择输入的位置在图形界面的第二部分中并且在接收所述选择输入的同时，通过提供对图形项的改变的表示来代替图形项从而更新所述图形项；
确定所述选择输入已经停止；并且
基于确定所述选择输入已经停止，提供对图形项的改变以便于输出。
2.如权利要求1所述的方法，包括：
基于确定所述选择输入已经停止，在不改变图形项的情况下，停止提供图形项以便于输出。
3.如权利要求1或2所述的方法，其中，所述图形界面的第一部分对应于第一应用，并且所述图形界面的第二部分对应于不同的第二应用。
4.如权利要求3所述的方法，包括：
响应于通过图形界面接收表示图形项的移动的移动输入，访问由图形项表示的对象；
从第一应用接收用于在接收所述选择输入的同时再现对象的第一指令；并且
在接收所述选择输入的同时并且在确定所述选择输入的位置在图形界面的第二部分中之前，根据第一指令再现所述对象。
5.如权利要求3或4所述的方法，包括：
响应于确定所述选择输入的位置在图形界面的第二部分中，从第二应用接收用于在接收所述选择输入的同时再现对象的第二指令，
其中基于第二指令更新图形项。
6.如权利要求3、4或5所述的方法，包括：
确定第二应用被配置为提供对所述图形项的多个改变；并且
从对所述图形项的多个改变当中选择对所述图形项的改变。
7.如权利要求6所述的方法，其中，基于用户输入从对所述图形项的多个改变当中选择对所述图形项的改变。
8.如权利要求7所述的方法，其中，所述用户输入包括表示图形项的持续移动和/或将图形项改变到图形用户界面的第二部分的不同区域的表示的输入。
9.如从属于权利要求3的权利要求8所述的方法，其中，第二部分的不同区域表示第二应用的不同功能区域。
10.如任一前述权利要求所述的方法，其中，所述图形界面的第一部分对应于应用的第一部分，并且所述图形界面的第二部分对应于所述应用的不同的第二部分。
11.一种系统，包括：
一个或多个计算机和存储指令的一个或多个存储设备，所述指令在由所述一个或多个计算机执行时，可操作为使所述一个或多个计算机执行包括以下项的操作：
通过图形界面接收对应于对位于图形界面的第一部分中的图形项的选择的用户输入；
在接收所述选择输入的同时，通过图形界面接收对应于图形项在图形界面的第二部分中的放置的移动输入；
在接收所述选择输入的同时，确定所述选择输入的位置在图形界面的第二部分中；
基于确定所述选择输入的位置在图形界面的第二部分中并且在接收所述选择输入的同时，通过提供对图形项的改变的表示来代替图形项从而更新所述图形项；
确定所述选择输入已经停止；并且
基于确定所述选择输入已经停止，提供对图形项的改变以便于输出。
12.如权利要求11所述的系统，其中，所述操作进一步包括：
基于确定所述选择输入已经停止，在不改变图形项的情况下，停止提供图形项以便于输出。
13.如权利要求11或12所述的系统，其中，所述图形界面的第一部分对应于第一应用，并且所述图形界面的第二部分对应于不同的第二应用。
14.如权利要求13所述的系统，其中，所述操作进一步包括：
响应于通过图形界面接收对应于图形项的拖动的移动输入，访问由图形项表示的对象；
从第一应用接收用于在接收所述选择输入的同时再现对象的第一指令；并且
在接收选择输入和移动输入的同时，根据第一指令再现所述对象。
15.如权利要求13或14所述的系统，其中所述操作进一步包括：
响应于确定所述选择输入的位置在图形界面的第二部分中，从第二应用接收用于在接收所述选择输入的同时再现对象的第二指令，
其中基于第二指令更新图形项。
16.如权利要求13、14或15所述的系统，其中所述操作进一步包括：
确定第二应用被配置为提供对所述图形项的多个改变；并且
从对所述图形项的多个改变当中选择对所述图形项的改变。
17.如权利要求16所述的系统，其中，基于用户输入从对所述图形项的多个改变当中选择对所述图形项的改变。
18.如权利要求11至17中任一项所述的系统，其中，所述图形界面的第一部分对应于应用的第一部分，并且所述图形界面的第二部分对应于所述应用的不同的第二部分。
19.一种存储软件的非暂时性计算机可读介质，所述软件包括可由一个或多个计算机执行的指令，所述指令在这样执行时使得所述一个或多个计算机执行包括以下项的操作：
通过图形界面接收对应于对位于图形界面的第一部分中的图形项的选择的用户输入；
在接收所述选择输入的同时，通过图形界面接收对应于图形项在图形界面的第二部分中的放置的移动输入；
在接收所述选择输入的同时，确定所述选择输入的位置在图形界面的第二部分中；
基于确定所述选择输入的位置在图形界面的第二部分中并且在接收所述选择输入的同时，通过提供对图形项的改变的表示来代替图形项从而更新所述图形项；
确定所述选择输入已经停止；并且
基于确定所述选择输入已经停止，提供对图形项的改变以用于输出。
20.如权利要求19所述的介质，其中，所述操作进一步包括：
基于确定所述选择输入已经停止，在不改变图形项的情况下，停止提供图形项以便于输出。
21.如权利要求19或20所述的介质，其中，所述图形界面的第一部分对应于第一应用，并且所述图形界面的第二部分对应于不同的第二应用。
22.如权利要求19、20或21所述的介质，其中，所述图形界面的第一部分对应于应用的第一部分，并且所述图形界面的第二部分对应于所述应用的不同的第二部分。
CN201880032376.7A 2017-07-18 2018-07-17 图形图标的操纵 Pending CN110637280A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/652,492 2017-07-18
US15/652,492 US10444975B2 (en) 2017-07-18 2017-07-18 Graphical icon manipulation
PCT/US2018/042381 WO2019018336A1 (en) 2017-07-18 2018-07-17 GRAPHIC ICON HANDLING

Publications (1)

Publication Number Publication Date
CN110637280A true CN110637280A (zh) 2019-12-31

Family

ID=63104062

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880032376.7A Pending CN110637280A (zh) 2017-07-18 2018-07-17 图形图标的操纵

Country Status (4)

Country Link
US (2) US10444975B2 (zh)
EP (1) EP3602264A1 (zh)
CN (1) CN110637280A (zh)
WO (1) WO2019018336A1 (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018204419A1 (en) 2017-05-01 2018-11-08 Magic Leap, Inc. Matching content to a spatial 3d environment
US10891800B1 (en) 2017-09-29 2021-01-12 Apple Inc. Providing features of an electronic product in an augmented reality environment
JP7196179B2 (ja) 2017-12-22 2022-12-26 マジック リープ， インコーポレイテッド 複合現実システムにおいて仮想コンテンツを管理および表示する方法およびシステム
US20190250877A1 (en) * 2018-02-15 2019-08-15 Sriram Varadhan LetzRock An app designed to eliminate manually skipping of the songs
EP4213104A1 (en) 2018-02-22 2023-07-19 Magic Leap, Inc. Browser for mixed reality systems
WO2019165044A1 (en) * 2018-02-22 2019-08-29 Magic Leap, Inc. Object creation with physical manipulation
EP3948747A4 (en) 2019-04-03 2022-07-20 Magic Leap, Inc. MANAGEMENT AND DISPLAY OF WEB PAGES IN A VIRTUAL THREE-DIMENSIONAL SPACE USING A MIXED REALITY SYSTEM
US11984048B2 (en) * 2019-09-20 2024-05-14 Martin Thomas Horstman, III System for interactive visual education
US11301125B2 (en) * 2020-04-24 2022-04-12 Adobe Inc. Vector object interaction
CN113805737B (zh) * 2020-06-12 2023-11-14 深圳市万普拉斯科技有限公司 文件传输方法、装置、计算机设备和存储介质
US11281371B1 (en) * 2020-10-19 2022-03-22 Gopro, Inc. Interface for presenting media collections
CN112269508B (zh) * 2020-10-27 2022-07-29 维沃移动通信有限公司 显示方法、装置和电子设备
US12001642B2 (en) 2021-04-19 2024-06-04 Apple Inc. User interfaces for managing visual content in media
US11902651B2 (en) 2021-04-19 2024-02-13 Apple Inc. User interfaces for managing visual content in media
US11696017B2 (en) * 2021-05-19 2023-07-04 Apple Inc. User interface for managing audible descriptions for visual media
JP7483775B2 (ja) * 2022-03-08 2024-05-15 本田技研工業株式会社 アプリケーションプログラム、端末装置の制御方法、コンテンツ提供装置、およびコンテンツ提供方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101676058A (zh) * 2008-09-16 2010-03-24 东莞市粤铭激光技术有限公司 一种激光作业方法及其装置
US20120084689A1 (en) * 2010-09-30 2012-04-05 Raleigh Joseph Ledet Managing Items in a User Interface
WO2015195191A1 (en) * 2014-06-20 2015-12-23 Apple Inc. Graphical representation generation for multiple points of interest
CN105183442A (zh) * 2014-05-31 2015-12-23 苹果公司 用于媒体和位置内容的捕获和传输的消息用户界面
CN105229740A (zh) * 2013-03-15 2016-01-06 搜诺思公司 具有多个图形界面的媒体回放系统控制器
CN106227374A (zh) * 2015-06-07 2016-12-14 苹果公司 用于在用户界面之间导航的设备和方法
CN106445370A (zh) * 2015-06-07 2017-02-22 苹果公司 用于在用户界面之间导航的设备和方法
CN106502520A (zh) * 2015-09-08 2017-03-15 苹果公司 用于导航和播放内容的用户界面

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5414809A (en) 1993-04-30 1995-05-09 Texas Instruments Incorporated Graphical display of data
US6025844A (en) 1997-06-12 2000-02-15 Netscape Communications Corporation Method and system for creating dynamic link views
GB2340361B (en) * 1998-07-31 2002-11-06 Sony Uk Ltd Digital video processing
GB2340362B (en) * 1998-07-31 2002-11-06 Sony Uk Ltd Digital video processing
US6167823B1 (en) * 1999-07-21 2001-01-02 Buzz Tools, Inc. Method and system for computer aided embroidery
US8108241B2 (en) 2001-07-11 2012-01-31 Shabina Shukoor System and method for promoting action on visualized changes to information
US7316000B2 (en) * 2001-08-27 2008-01-01 International Business Machines Corporation Interactive agent for a topological multi-tier business application composer
WO2003050674A1 (en) 2001-12-07 2003-06-19 Dbase, Inc. Drag-and-drop dynamic distributed object model
US7607102B2 (en) 2002-03-14 2009-10-20 Apple Inc. Dynamically changing appearances for user interface elements during drag-and-drop operations
US7650575B2 (en) * 2003-03-27 2010-01-19 Microsoft Corporation Rich drag drop user interface
US7437358B2 (en) * 2004-06-25 2008-10-14 Apple Inc. Methods and systems for managing data
US8156123B2 (en) * 2004-06-25 2012-04-10 Apple Inc. Method and apparatus for processing metadata
US20090106011A1 (en) * 2007-10-22 2009-04-23 International Business Machines Corporation System and method for developing and deploying sensor and actuator applications over distributed computing infrastructure
US8965787B2 (en) 2007-12-17 2015-02-24 Smooth Productions Inc. Communications system and method for serving electronic content
US8751965B2 (en) * 2009-03-21 2014-06-10 Google Inc. Interface for toggling objects
US8448136B2 (en) * 2009-06-25 2013-05-21 Intuit Inc. Creating a composite program module in a computing ecosystem
US8239781B2 (en) 2009-06-30 2012-08-07 Sap Ag Drag and drop of an application component to desktop
US10048854B2 (en) * 2011-01-31 2018-08-14 Oracle International Corporation Drag and drop interaction between components of a web application
US9052810B2 (en) 2011-09-28 2015-06-09 Sonos, Inc. Methods and apparatus to manage zones of a multi-zone media playback system
US9367230B2 (en) * 2011-11-08 2016-06-14 Microsoft Technology Licensing, Llc Interaction models for indirect interaction devices
EP2610726B1 (en) * 2011-12-29 2018-08-29 Orange Drag and drop operation in a graphical user interface with highlight of target objects
US8656296B1 (en) * 2012-09-27 2014-02-18 Google Inc. Selection of characters in a string of characters
US9150147B2 (en) * 2013-03-08 2015-10-06 Caterpillar Inc. System and method for controlling features
US9773264B2 (en) * 2013-03-26 2017-09-26 Blackberry Limited Method for providing composite user interface controls and an online storefront for same
CN110946651A (zh) * 2013-08-13 2020-04-03 波士顿科学国际有限公司 解剖项的计算机可视化
US9880735B2 (en) * 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
DK201670728A1 (en) * 2016-09-06 2018-03-19 Apple Inc Devices, Methods, and Graphical User Interfaces for Providing Feedback During Interaction with an Intensity-Sensitive Button

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101676058A (zh) * 2008-09-16 2010-03-24 东莞市粤铭激光技术有限公司 一种激光作业方法及其装置
US20120084689A1 (en) * 2010-09-30 2012-04-05 Raleigh Joseph Ledet Managing Items in a User Interface
CN105229740A (zh) * 2013-03-15 2016-01-06 搜诺思公司 具有多个图形界面的媒体回放系统控制器
CN105183442A (zh) * 2014-05-31 2015-12-23 苹果公司 用于媒体和位置内容的捕获和传输的消息用户界面
WO2015195191A1 (en) * 2014-06-20 2015-12-23 Apple Inc. Graphical representation generation for multiple points of interest
CN106227374A (zh) * 2015-06-07 2016-12-14 苹果公司 用于在用户界面之间导航的设备和方法
CN106445370A (zh) * 2015-06-07 2017-02-22 苹果公司 用于在用户界面之间导航的设备和方法
CN106502520A (zh) * 2015-09-08 2017-03-15 苹果公司 用于导航和播放内容的用户界面

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
喻纯等: "基于自适应光标的图形用户界面输入效率优化", 《软件学报》 *

Also Published As

Publication number Publication date
US20190025999A1 (en) 2019-01-24
US10444975B2 (en) 2019-10-15
EP3602264A1 (en) 2020-02-05
US20190369826A1 (en) 2019-12-05
WO2019018336A1 (en) 2019-01-24

Similar Documents

Publication Publication Date Title
US10444975B2 (en) Graphical icon manipulation
JP7469396B2 (ja) 同時にオープンしているソフトウェアアプリケーションを管理するためのジェスチャグラフィカルユーザインタフェース
US11675391B2 (en) User terminal device for displaying contents and methods thereof
JP7197543B2 (ja) アプリケーションに対応するユーザインタフェースオブジェクトと対話するためのデバイス、方法、及びグラフィカルユーザインタフェース
US20230152940A1 (en) Device, method, and graphical user interface for managing folders
CN110851068B (zh) 用于管理用户界面的方法和电子设备
US10248305B2 (en) Manipulating documents in touch screen file management applications
KR101487632B1 (ko) 사용자 인터페이스에서의 항목 관리
EP2455858B1 (en) Grouping and browsing open windows
US9983771B2 (en) Provision of an open instance of an application
CN108319491B (zh) 管理用户界面中的工作空间
EP3113003B1 (en) Device, method, and graphical user interface for resizing objects
US7962862B2 (en) Method and data processing system for providing an improved graphics design tool
US20150339050A1 (en) Ink for Interaction
CN105393201B (zh) 用于管理同时打开的软件应用的设备、方法和图形用户界面
EP4180923A1 (en) Method for adding annotations, electronic device and related apparatus

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination