CN110419023A - 拖放插入控制对象 - Google Patents

拖放插入控制对象 Download PDF

Info

Publication number
CN110419023A
CN110419023A CN201880017610.9A CN201880017610A CN110419023A CN 110419023 A CN110419023 A CN 110419023A CN 201880017610 A CN201880017610 A CN 201880017610A CN 110419023 A CN110419023 A CN 110419023A
Authority
CN
China
Prior art keywords
control object
project
user
response
equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201880017610.9A
Other languages
English (en)
Other versions
CN110419023B (zh
Inventor
C·A·容格
E·基金吉尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN110419023A publication Critical patent/CN110419023A/zh
Application granted granted Critical
Publication of CN110419023B publication Critical patent/CN110419023B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本文一般性地讨论了用于插入和/或修改控制对象的设备、系统和方法。一种用于使用计算设备的用户界面(UI)的方法可以包括：通过使用用户输入设备，使用所述UI来选择控制对象并且释放控制对象；选择第一对象以插入到所述UI上示出的一个或多个项目下方，其中，所述第一对象是响应于释放所述控制对象而在所述UI上示出的第一组对象中的一个对象；选择所述控制对象并且将所述控制对象拖动到所述UI上的项目中的两个项目之间的位置；在所述位置处释放所述控制对象；以及选择第二对象以插入到所述项目之间的位置处，其中，所述第二对象是响应于释放所述控制对象而在所述UI上示出的第一组对象中的一个对象。

Description

拖放插入控制对象
背景技术
当诸如在用户界面(UI)上利用对象的列表或其他组来呈现时，可能难以在组内或组周围插入对象。可能更加难以将对象插入到UI上的可预测位置中而不会以每个对象周围的入口点堵塞界面。对于较小的屏幕(诸如移动电话、平板计算机的触摸屏或其他屏幕)，这可能尤其麻烦。
发明内容
提供本发明内容部分是为了以简化的形式来介绍实施例的各方面，其中，在下文的详细描述中进一步解释了实施例。该发明内容部分并不旨在标识所要求保护的主题的必要或必需特征，并且本发明内容部分中列出的元件的特定组合和次序并不旨在提供对所要求保护的主题的元素的限制。
一种用于使用计算设备的用户界面(UI)的方法，包括：通过使用用户输入设备，使用UI来选择控制对象并且释放控制对象；选择第一对象以插入到UI上示出的一个或多个项目下方，其中，所述第一对象是响应于释放所述控制对象而在UI上示出的第一组对象中的一个对象；选择所述控制对象并且将所述控制对象拖动到UI上的项目中的两个项目之间的位置；在所述位置处释放所述控制对象；以及选择第二对象以插入在所述项目之间的位置处，其中，所述第二对象是响应于释放所述控制对象而在UI上示出的第一组对象中的一个对象。
至少一种机器可读存储介质，包括用于由机器运行以执行操作的指令。所述操作包括：响应于从用户输入设备接收到指示插入控制对象在显示设备上被拖动的数据，而确定所述插入控制对象是被拖动到所述显示设备上的一个或多个项目的两个项目之间的位置、是被拖动到所述显示设备上的一个或多个项目上方的位置、还是被拖动到所述显示设备上的一个或多个项目下方的位置，以向所述显示设备提供使所述显示设备示出位置指示符对象的信号，所述位置指示符对象指示当使用所述插入控制对象插入时将显示项目的位置，响应于接收到指示所述插入控制对象被释放的数据，提供使所述显示设备示出用于在由位置指示符对象所指示的位置处插入的对象列表的信号，并且响应于接收到对所述对象中的对象的选择，提供使所述显示设备在由所述位置指示符对象指示的位置处示出所选择的对象的信号。
一种系统，包括：显示设备；处理电路；包含指令的存储器，所述指令当由所述处理电路运行时使所述处理电路执行操作。所述操作可以包括：提供使所述显示设备在所述显示设备上示出控制对象的信号；响应于从用户输入设备接收到一个或多个信号，而确定用户已经将所述控制对象拖动到所述显示设备上示出的项目之间的间隙的阈值数量的像素内，并且提供使所述显示设备在所述间隙处示出位置指示符的信号，所述位置指示符指示用户在所述位置处释放所述控制对象的情况下将插入项目的位置；响应于接收到指示用户已经在所述位置处释放所述控制对象的一个或多个信号，提供使所述显示设备示出用于在由所述位置指示符指示的位置处插入的对象列表的信号；以及响应于接收到指示用户已经从所述对象列表中选择了对象的一个或多个信号，提供使所述显示设备将所选择的对象示出为在由所述位置指示符指示的位置处的项目的信号。
附图说明
图1通过示例图示了包括插入/修改控制对象的用户界面(UI)的实施例的透视图。
图2通过示例图示了UI的实施例的透视图。
图3通过示例图示了UI的实施例的透视图。
图4通过示例图示了UI的实施例的透视图。
图5通过示例图示了UI的实施例的透视图。
图6通过示例图示了UI的实施例的透视图。
图7通过示例图示了UI的实施例的透视图。
图8通过示例图示了UI的实施例的透视图。
图9通过示例图示了UI的实施例的透视图。
图10通过示例图示了UI的实施例的透视图。
图11通过示例图示了UI的实施例的透视图。
图12通过示例图示了UI的实施例的透视图。
图13通过示例图示了UI的实施例的透视图。
图14通过示例图示了UI的实施例的透视图。
图15通过示例图示了UI的实施例的透视图。
图16通过示例图示了UI的实施例的透视图。
图17通过示例图示了另一UI的实施例的透视图。
图18通过示例图示了系统的实施例的逻辑框图。
图19通过示例图示了方法的实施例的流程图。
图20是根据示例性实施例的用于实施UI的机器(例如，计算机系统)的示意性框图。
具体实施方式
在以下描述中，参考形成其一部分的附图，并且其中通过图示的方式示出了可以实践的具体实施例。足够详细地描述了这些实施例，以使得本领域技术人员能够实践所述实施例。应当理解，可以利用其他实施例，并且可以在不背离实施例的范围的情况下进行结构、逻辑和/或电变化。因此，以下对实施例的描述不应当被视为限制性的意义，并且实施例的范围由所附的权利要求限定。
在一些实施例中，在本文中所描述的操作、功能或算法可以以软件来实施。所述软件可以包括存储在计算机或其他机器可读介质或存储设备上的计算机可执行指令，所述存储设备诸如是本地或联网的一个或多个非瞬态存储器或者基于其他类型的硬件的存储设备。此外，这样的功能可以对应于子系统，所述子系统可以是软件、硬件、固件或者其组合。可以根据需要在一个或多个子系统中执行多个功能，并且所描述的实施例仅仅是示例。所述软件可以在数字信号处理器、ASIC、微处理器、中央处理单元(CPU)、图形处理单元(GPU)、现场可编程门阵列(FPGA)上执行，或者在计算机系统(诸如个人计算机、服务器或其他计算机系统)上操作的其他类型的处理器上执行以将这样的计算机系统转变为专门编程的机器。可以使用处理电路来实施功能或算法，诸如可以包括电和/或电子部件(例如，一个或多个晶体管、电阻器、电容器、电感器、放大器、调制器、解调器、天线、无线电、调节器、二极管、振荡器、复用器、逻辑门、缓冲器、高速缓存、存储器、逻辑门等)，其被配置为执行一个或多个操作。
在克服关于当前图形或其他图像对象修改和/或插入工具的一个或多个问题时，修改和/或插入控制对象可以被实例化并且可见以用于选择、重新定位和/或其他用途。所述控制对象可以更清楚地指示待修改的对象、可用于给定对象的修改选项、对象的插入点和/或可以在给定位置处插入的对象。所述控制对象的尺寸可以很小，从而不会使用户正在通过其查看用户界面(UI)并且与用户界面交互的显示混乱。
在本文中所讨论的是可以包括控制对象的实施例，所述控制对象可以被激活、拖动、放下和/或以其他方式置于UI的对象之间。可以在控制对象驻留在UI上的位置处致动所述控制对象(例如，在触摸屏的情况下轻敲，或者使用鼠标、触摸板、轨迹板、笔(例如，触控笔)和/或视觉辅助(例如，HoloLens)利用光标来选择，诸如通过按下和释放鼠标或触摸板的按钮，诸如有时称为“右点击”或“左点击”等)。这样的致动可以导致可以插入在UI的顶部、底部或任一侧的边缘处或边缘附近的对象列表。可以将所述控制对象拖动到项目之间的位置并且释放(例如，通过将手指抬离触摸屏，或者在鼠标或触摸板的情况下释放按钮)。这样的拖放动作可以导致可以插入所述控制对象的位置处的对象列表。可以在UI上的项目上拖动和释放所述控制对象。这样的拖放动作可以导致可以应用于要在显示器上提供的项目的可能修改的列表。所述修改可以用于在所述控制对象被释放时所述控制对象位于其上方的项目。
图1通过示例图示了包括插入/修改控制对象140的UI 100的实施例的透视图。如所图示的，UI 100包括在其上显示的多个项目120A、120B和120C。间隙130A和130B可以分别显示在直接相邻的项目120A-B和120B-C之间。间隙130A的尺度由箭头135来指示。UI 100可以通过台式计算机、电视、膝上型/笔记本计算机、智能电话、平板计算机等的显示器对用户可见。项目120A-C可以包括以下中的一项或多项：文本、图像、视频、音频、其组合、其他项目等，下面将讨论它们中的每一项。
文本项目可以包括纯文本、富文本等。所述文本对象可以包括正文文本和/或标题。标题文本可能包括比正文文本更大的字体。标题文本可以包括与正文文本不同的字体样式。标题通常分隔文档的各部分并且指示后续部分的内容。正文文本可以形成该部分的一部分。
图像项目可以包括以图像格式编码的对象，诸如联合图像专家组(JPEG)、可交换图像文件格式(Exif)、标记图像文件格式(TIFF)、图形交换格式(GIF)、位图(BMP)、便携式网络图形(PNG)、便携式像素图(PPM)、便携式灰度图(PGM)、便携式位图(PBM)、便携式任何图(PNM)、WebP、高动态范围(HDR)、高效图像文件格式(HEIF)、更好的便携式图形(BPG)、计算机图形元文件(CGM)、Gerber、可缩放矢量图形(SVG)、三维图像格式等。存在许多其他图像格式，并且这样的格式并不在本文中所讨论的实施例的范围之外。在示例中，所述图像对象可以包括在时间上顺序的图像对象的集合，有时被称为幻灯片。
音频项目包括指向提供使扬声器产生声音(诸如能够包括语音、音乐或其他声音)的数据的项目的指针或项目的图形表示。用于音频数据的一些典型的编码包括无损音频编码(FLAC)、运动图像专家组(MPEG)音频层III(MP3)和Windows媒体音频(WMA)。存在许多其他音频编码格式，并且这样的格式并不在本文中所讨论的实施例的范围之外。
视频项目可以包括与一个或多个图像对象同步的一个或多个音频对象的组合。视频对象通常包括一系列图像(例如，帧)，其可以以每分钟或每秒的指定帧数来播放。用于视频项目的一些典型编码包括MPEG、高效视频编码(HEVC)、Theora、RealVideo、音频视频交织(AVI)、MPEG-4部分14(MP4)、闪存视频(FLV)等。存在许多其他视频编码格式，并且这样的格式并不在本文中所讨论的实施例的范围之外。
在一个或多个实施例中，UI 100可以响应于确定控制对象140的一个或多个中心像素在来自间隙130A或者处在间隙130A内的指定数量的像素内，而将项目120A-B之间的空间(间隙130A)增加指定数量的像素。像素的指定数量可以取决于呈现UI的显示器的像素的总数量。例如，对于较大的显示屏幕或者以较高分辨率生成的显示，像素的指定数量可能较大；而对于较小的显示屏幕或以较低分辨率生成的显示，像素的指定数量可能较小。
在一个或多个实施例中，如果控制对象140被显示在UI 100上的一行或一列项目的端部上的项目的边缘附近(例如，在UI 100的示例中项目120C在一行项目的端部处)，则当在行或列的端部上的项目下方添加项目时，将存在间隙130C，UI 100可以使显示器示出间隙130C(参见图2)。图2通过示例图示了UI 200的实施例的透视图。UI 200包括间隙130C，以响应于检测到控制对象140处在来自项目120C的指定数量的像素之内。
确定所述控制对象相对于UI上的项目的位置可以包括：将与控制对象140的一个或多个中心像素(例如，中心像素)相关联的位置与UI上的项目的边缘的x位置和/或y位置进行比较。在UI 100和200的示例中，控制对象140的位置的仅一个维度(在图1和图2的情况下的y维度)可能足以确定所述控制对象相对于UI 100的一个或多个项目120A-C的位置。例如，可以将项目120A-C中的每个项目的上边缘和下边缘的y维度与控制对象140的(一个或多个)中心像素的位置进行比较。所述比较可以确定控制对象140是否处在距项目120A-C的边缘的指定数量的像素之内。在图2的示例中，控制对象140由处理电路或其他处理单元(参见图18和/或图20)确定为处在项目120C的下边缘的指定数量的像素之内。
在图2的实施例中，用户可能已经诸如通过将手指触摸在触摸屏上的控制对象140或者在光标处于控制对象140上方时保持住鼠标的鼠标按钮选择了控制对象140。图3通过示例图示了UI 300的实施例的透视图。响应于用户将控制对象140(例如，将他们的手指从鼠标按钮移除或者释放鼠标按钮)拖动到图2中所示的控制对象140的位置处或附近，可以在显示器上示出UI 300。
UI 300包括可以被插入在间隙130C上方或下方位置的对象类型350A、350B、350C和350D的列表。UI 300包括选定对象类型的对象类别360A、360B、360C和360D。在UI 300的实施例中，对象类型350A是由下划线380指示的选定对象类型。如所图示的，UI 300包括位置指示符对象370A，位置指示符对象370A指示将在其处、上方或下方插入选定对象的位置。插入的对象成为UI上所显示的项目。可以在UI上的一个或多个项目附近(上方、下方、旁边或者其组合)插入对象。
响应于当控制对象140处于默认位置时用户致动(选择和释放)控制对象140，位置指示符对象370A可以出现在UI上所显示的项目的结尾或开始处或者在项目列表的结尾或开始处。图1中提供了控制对象140的示例性默认位置。
对象类型350A-D可以包括视频、图像、文本、链接、社交媒体、多个图像、多个视频、多个文本、多个链接、多个帖子、流行类型、最近使用的类型、其组合等。例如，对象类型350A可以指示流行对象类型或最近使用的对象类型，对象类型350B可以指示文本类型对象，对象类型350C可以指示图像类型对象，并且对象类型350D可以指示社交媒体类型对象。
在对象类型350A是流行对象类型的实施例中，对象类别360A-D可以包括用户在指定时间段(例如，小时、天、周、月、年、终身等)中最多选择的类别。在对象类型350A是最近使用的对象类型的实施例中，对象类别360A-D可以包括用户最近选择的类别，诸如当选择新类别时移除最旧的类别和/或响应于用户选择列表中已有的对象类别而改变的类别的次序。例如，对象类别360A可以指示最近选择的类别，对象类别360B可以指示紧接在类别360A之前选择的类别，对象类别360C可以指示紧接在类别360B之前选择的类别，等等。如果用户随后选择对象类别360B，则可以图示出对象类型360A-D，其中，在图3所示的位置中利用对象类别360B代替对象类别360A，并且利用对象类别360A代替对象类别360B。因此，对象类别360A-D相对于彼此的位置可以表示最后选择对象类别的流行度或相对时间范围。例如，在UI 300上进一步向左、向右、更靠近顶部和/或更靠近底部显示的对象类别可以指示自上次选择对象类别以来更大或更少流行度或更大或更少的时间。
响应于用户选择图像类型，对象类别360A-D可以包括以下中的一项或多项：对存储在设备上或者以其他方式对设备可用的一个或多个图像的链接，对存储在设备上或者以其他方式对设备可用的一个或多个视频的链接，等等。响应于用户选择文本类型，对象类别360A-D可以包括以下中的一项或多项：一般文本类别、块文本类别和/或标题类别。响应于用户选择社交媒体类型类别，类别360A-D可以包括对登录到设备的用户的社交媒体帐户的一个或多个链接。响应于用户选择链接类型，对象类别360A-D可以包括一个或多个统一资源定位符(URL)，其可以被提供作为用户选择和访问URL的内容的项目。响应于用户选择多个图像类型，类别360A-D可以包括待在通常由单个项目120A-C占据的区域中呈现的多个图像、视频、文本、URL、社交媒体项目等的布局选项。例如，可以在项目120A-C占据的空间中并排地提供两个或更多个图像、文本块、视频、社交媒体项目等的网格，以顺序次序呈现两个或更多个图像、文本块、视频、社交媒体项目等的幻灯片，诸如在用户与项目交互或不交互(例如，在呈现幻灯片中的下一项目之前经过的指定时间量或者用户选择幻灯片的项目以使幻灯片中的下一项目呈现在用于查看项目120A-C的空间中)的情况下。
响应于用户释放控制对象140，控制对象140或者其上的标记可以从视图中消失。在图3的示例中，响应于用户释放控制对象140，不再显示控制对象140上的“+”标记。位置指示符对象370A可以持久存在(全方位存在)，至少直到用户选择待插入到由位置指示符对象370A指示的位置处或附近时为止。响应于用户选择待插入的项目，可以在默认位置处呈现控制对象140。例如，控制对象140可以通过用户滚动而保持在默认位置。控制对象140可以“浮置”在UI上的其他项目上，以便在显示UI上的其他项目的层顶部上的层处示出。在一个或多个实施例中，控制对象140可以全方位并且浮置地一直显示。
图4通过示例图示了UI 400的实施例的透视图。如所图示的，UI 400包括在控制对象140已经被移动到两个项目120B-C之间的位置、诸如被移动到间隙130B上方之后的视图。提供位置指示符对象370B以向用户指示可以插入项目的位置。响应于用户释放控制对象140，可以在由位置指示符对象370B指示的位置处插入项目菜单和/或控制对象140可以消失或者被改变以指示控制对象140的功能已经改变。所述项目菜单可以包括对象类型350A-D(如关于图3所讨论的)和用于默认对象类型或用户选择的对象类型的对象类别360E-J。响应于用户将控制对象140移动远离间隙130C超过指定数量的像素，间隙130C和/或位置指示符对象370A可以消失，诸如不在间隙130C内释放控制对象140(例如，在间隙内和/或在距离间隙130C指定数量的像素内)的情况下。
图5通过示例图示了UI 500的实施例的透视图。如所图示的，UI 500包括在控制对象140已经移动到UI 400上的最顶部项目之上、诸如在项目120A之上的位置之后的视图。如果用户在示出位置指示符对象370C时释放控制对象140，则提供位置指示符对象370C以向用户指示可以插入项目的位置。响应于用户释放控制对象140，可以插入到由位置指示符对象370B和/或控制对象140指示的位置处的项目菜单可以消失或者被改变以指示控制对象140的功能已经改变。所述项目菜单可以包括对象类型350A-D(如关于图3所讨论的)以及用于默认对象类型或者由用户选择的对象类型的对象类别360L-N。
图6通过示例图示了UI 600的实施例的透视图。UI 600包括控制对象140在被释放之后的视图，同时位置指示符对象370C被示出并且被移动到对象菜单。改变控制对象140(已移除“+”标记)以指示控制对象140的功能已经改变。在UI上释放控制对象140之后，控制对象140可以用作类似于光标的选择工具。
控制对象140可以被用于在UI上滚动。响应于控制对象140位于距UI的边缘的阈值数量的像素之内，UI可以更新所显示的内容。
图7通过示例图示了UI 700的实施例的透视图。UI 700包括当控制对象140被选择时用户正在执行滑动动作时的控制对象140的视图。箭头710指示滑动的方向。注意，在图7中选择了对象类型350B。可以在用户选择和释放控制对象140之后进入视野的UI 700的区域中执行滑动运动。在到目前为止讨论的实施例中，该区域处在虚线框720内。当在虚线框720外部执行时，在图7中所指示的滑动运动可能没有效果。当在虚线框720内执行时，滑动运动(例如，在这种情况下为向左滑动)可以使所选择的对象类型被改变为紧接当前所选对象类型350B的右侧的对象类型(如果有的话)。图7的示例中的对象类型右侧的对象类型是对象类型350C。图8通过示例图示了UI 800的实施例的透视图。UI 800是在关于图7所讨论的滑动运动完成之后的视图。对象类型350C在图8中加下划线以指示其现在是所选择的对象类型。
图9通过示例图示了UI 900的实施例的透视图。UI 900包括当控制对象140被选择时用户正在执行滑动动作时的控制对象140的视图。箭头910指示滑动的方向。注意，在图9中选择了对象类型350B。可以在用户选择和释放控制对象140之后进入视野的UI 700的区域中执行滑动运动。在到目前为止讨论的实施例中，该区域处在虚线框720内。当在虚线框720外部执行时，在图7中所指示的滑动运动可能没有效果。当在虚线框720内执行时，滑动运动(例如，在这种情况下为向右滑动)可以使所选择的对象类型被改变为紧接当前所选对象类型350B的左侧的对象类型(如果有的话)。图9的示例中的对象类型左侧的对象类型是对象类型350A。图10通过示例图示了UI 1000的实施例的透视图。UI 1000是在关于图9讨论的滑动运动完成之后的视图。对象类型350A在图10中加下划线以指示其现在是所选择的对象类型。
图11通过示例图示了UI 1100的实施例的透视图。UI 1100包括在从对象菜单中选择了对象并且将其作为在UI 1100上可见的项目120D插入之后的视图。项目120D被插入在由图5-10的位置指示符对象370C所指示的位置。项目120D下方的项目120A-C中的每个项目的视图在UI 1100上向下移动以容纳项目120D(例如，项目120A-C中的每个项目的位置通过项目120D的大小以及在项目120D与项目120A之间的对应间隙130D来调节)。响应于用户选择成为可见项目120D的对象，控制对象140被返回到其默认位置的视野中。
图12通过示例图示了UI 1200的实施例的透视图。UI 1200类似于UI1100，其中，UI1200包括在项目120B与项目120C之间(例如，在图4中由位置指示符对象370B所指示的位置处)插入的项目120D。项目120A-B保持在相同位置，并且项目120C在UI 1200上向下移动以容纳项目120D。
图13通过示例图示了UI 1300的实施例的透视图。UI 1300类似于UI1300，其中，UI1300包括在项目120C之后插入的项目120D(例如，在由位置指示符对象370A指示的位置中)。项目120A-C中的项目都没有改变位置，但是间隙130C和项目120D被添加到UI 1300。
图14通过示例图示了UI 1400的实施例的透视图。UI 1400包括取消区域对象1450的视图。取消区域对象1450可以出现在控制对象140的默认位置。响应于控制对象140被选择并且被拖离控制对象140的默认位置，取消区域对象1450可以出现。用户可以通过(在控制对象140被选择时)将控制对象140拖动到取消区域对象1450而取消插入和/或修改操作。响应于用户释放控制对象140，同时控制对象140的至少一部分处在取消区域对象1450的周界内(或者在周界的阈值数量的像素之内)或者控制对象140的一个或多个中心像素在取消区域对象1450的周界内(或者在周界的阈值数量的像素之内)，控制对象140可以被示出在默认位置。在一个或多个实施例中，响应于用户在远离UI上的项目的阈值数量的像素的区域中释放控制对象140，可以取消插入(或修改)操作。例如，如果用户将控制对象140释放到图2中的间隙130C下方，则可以取消修改或插入操作，并且控制对象140可以被返回到默认位置。
在一个或多个实施例中，控制对象140可以由用户用于选择待修改的对象。当控制对象140被显示在项目120A-D上时，释放控制对象140的用户可以选择对象。在图14的示例中，可以出现修改菜单(类似于对象菜单，但是具有修改选项而不是待插入的对象的选项)，诸如在虚线框720所指示的区域中，针对项目120B的指示的修改选项(在用户在图14中所图示的位置处释放控制对象140的情况下)。所述修改可以包括：文本编辑选项，添加到照片或视频的过滤器，字体大小，字体，改变图表类型(例如，饼图、条形图等)，将表格改变为图表，改变文本样式或处理，改变组类型，改变图像表示的网格，改变文本和图像关系(例如，图像下方、图像上方、图像上、图像两侧等的文本)，其他修改等。
在一个或多个实施例中，可以修改UI上的项目120B的视图(包括与被改变的项目120B的呈现版本相关联的像素值，以便指示突出、概述等)以指示用户可以通过将控制对象140在其当前位置释放来修改项目。对于不同的对象类型和/或类别，修改选项可以是不同的。
图15通过示例图示了UI 1500的实施例的透视图。UI 1500包括项目120B的视图，其中，像素值被修改以指示可以响应于用户释放控制对象140而修改项目120B。
图16通过示例图示了UI 1600的实施例的透视图。UI 1600包括多个项目120E、120F、120G和120H以及在项目130F、130G、130H、130I和130J之间的对应间隙。UI 1600是在已经添加了项目120E-H并且用户已经向下滚动(例如，通过向上或向下滑动或者激活鼠标按钮并且在按钮被激活时移动鼠标，移动鼠标上的滚动按钮，选择UI 1600上的滚动对象、轨迹板、键盘、触摸板输入等)之后的UI 1300的视图。当用户在UI上滚动时，即使当项目在UI上移动时，控制对象140也可以保持于显示器上在控制对象140下方滚动的项目上方的默认位置。因此，控制对象140可以保持在项目120A-H和/或间隙130C和130F-J中的一个或多个上方的视野中。
到目前为止所图示的实施例中的每个实施例都涉及列表中的项目，其中，项目彼此堆叠并且没有项目并排放置在显示器上(即使一个项目可以包括并排的多个图像，所述项目可以在逻辑上被视为存储器中的单个项目)。在这些实施例中，在确定控制对象140相对于UI上的(一个或多个)项目的位置时，仅保持跟踪显示器上项目和控制对象的y位置可能就足够了。然而，存在一些实施例，在所述实施例中，项目可以并排放置，而不是仅仅严格地在彼此上方或下方。在这样的实施例中，在确定控制对象140相对于UI上的(一个或多个)项目的位置时，仅保持跟踪显示器上项目和控制对象的x位置可能就足够了。此外，存在许多实施例，在所述实施例中，项目可以在UI上并排放置并且在彼此上方和下方。在这样的实施例中，在确定控制对象140相对于UI上的(一个或多个)项目的位置时，可以跟踪显示器上项目和控制对象的x位置和y位置。
图17通过示例图示了UI 1700的实施例的透视图。UI 1700包括位于彼此上方和/或下方的项目120A-C以及与项目120A-C并排放置的项目120D。UI 1700包括位于项目120A-C与项目120D之间的间隙130K中的位置指示符对象370E。响应于在间隙130K处或附近释放控制对象140，位置指示符对象370E出现在项目120A-C与项目120D之间。在位置指示符对象370E处在视野内时，选定的对象将出现在项目120A-C与项目120D之间。
图18通过示例图示了系统1800的实施例的逻辑框图。系统1800可以向用户提供对控制对象140的访问，诸如用于在显示器1804上看到的用户界面上插入或修改项目。如所图示的，系统1800包括存储器1802、显示器1804、用户输入设备1806和处理电路1808。
存储器1802可以包含数据，所述数据包括在UI上示出的项目1810中的每个项目以及在UI上的项目1810中的每个项目的位置1812。项目1810可以包括项目120、间隙130和控制对象140。位置1812可以形成UI上的项目的位置图。图18中所图示的位置1812假设除了控制对象140之外的项目1810中的每个项目都是矩形或其他四边形多边形。位置1812包括用于处理电路1808的足够数据，以推断或者以其他方式确定由项目1810中的每个项目(控制对象140除外)占据的像素的完整范围。
显示器1804可以包括LED、LCD、触摸屏或者用户可以诸如直接地或者使用用户输入设备1806与之进行交互的其他显示器。用户输入设备1806是可选的，并且可以包括键盘、鼠标或者用户可以用于导航和/或向UI提供输入的其他设备。在显示器1804是触摸屏的实施例中，用户输入设备1806不是必需的。
处理电路1808可以包括处理设备(例如，CPU、GPU、FPGA、ASIC等)或者电气和/或电子部件(例如，一个或多个晶体管、电阻器、电容器、电感器、放大器、调制器、解调器、天线、无线电、调节器、二极管、振荡器、复用器、逻辑门、缓冲器、高速缓存、存储器、逻辑门等)，其被配置为执行处理电路1808的操作。处理电路1808从显示器1804和/或用户输入设备1806接收数据，并且响应于接收到的数据来更新项目1810和/或位置1812。例如，处理电路1808可以执行以下操作中的一个或多个：(1)将所述控制对象的位置与其他项目的位置(如在存储器1802中所指示的)进行比较，并且响应于确定出控制对象140处于距间隙的阈值数量的像素中或内，而使所述显示器在间隙中示出位置指示符；(2)将所述控制对象的位置与其他项目的位置(如在存储器1802中所指示的)进行比较，并且响应于确定出所述控制对象超过显示器上的项目的阈值数量的像素或者在显示器上的项目的阈值数量的像素之内，而使所述显示器示出突出的或者以其他方式修改项目；(3)响应于确定出所述控制对象已经从默认位置移动，而使显示器1804示出取消区域对象；(4)接收来自用户输入设备1806的输入，并且基于接收到的输入来更新项目1810和/或控制对象140的位置；(5)接收来自显示器1804的输入，并且基于接收到的输入来更新项目1810和/或控制对象140的位置；(6)接收来自用户输入设备1806或显示器1804的输入，并且使显示器1804示出处在由位置指示符对象指示的位置中的另一项目；以及(7)将所述控制对象的位置与其他项目的位置(如在存储器1802中所指示的)进行比较，并且响应于确定出控制对象140处在距UI上的边缘最低、最高或最近项目的阈值数量的像素中或内，而使显示器示出间隙和/或间隙中的位置指示符。
图19通过示例图示了方法1900的实施例的流程图。如所图示的，方法1900包括在操作1910处使用UI来选择和释放控制对象；在操作1920处，选择第一对象以插入到UI上示出的两个或更多个项目下方；在操作1930处，选择所述控制对象并且将所述控制对象拖动到UI上的两个项目之间的位置；在操作1940处，在所述位置处释放所述控制对象；以及在操作1950处，选择第二对象以插入在项目之间的位置处。方法1900的任何操作可以由用户使用用户输入设备来执行。第一对象可以是响应于释放所述控制对象而在UI上示出的第一组对象中的一个对象。第二对象是响应于释放所述控制对象而在UI上示出的第一组对象中的一个对象。
方法1900还可以包括在示出第一组对象时在UI上向左或向右滑动，其中，响应于所述滑动，第二组对象出现以代替第一组对象。方法1900还可以包括在选择所述控制对象并且将所述控制对象拖动远离默认位置之后，将所述控制对象拖动到UI上的取消区域对象的阈值数量的像素内，以使得插入操作被取消。方法1900还可以包括在(例如，响应于)选择所述控制对象并且将所述控制对象拖动远离默认位置之后，将所述控制对象拖动到远离UI上示出的所有项目超过阈值数量的像素的位置以使得插入操作被取消。
方法1900还可以包括选择所述控制对象并且将所述控制对象拖动到UI上的第三项目上方，当所述控制对象在所述第三项目上方时释放所述控制对象，并且选择应用于第三项目的修改选项，响应于在第三项目上方释放所述控制对象而在UI上示出修改选项。所述第三项目可以包括图像，并且其中，所述修改选项包括被应用于图像的过滤器。第一组对象包括用户最近选择的项目以及用户选择次数最多的项目。
图20是根据示例实施例的用于实施在本文中所讨论的一个或多个UI的机器2000(例如，计算机系统)的示意性框图。一个示例性机器2000(以计算机的形式)可以包括处理单元2002、存储器2003、可移除存储装置2010和不可移除存储装置2012。尽管示例性计算设备被图示并且被描述为机器2000，但是计算设备在不同的实施例中可以采用不同的形式。例如，计算设备可以替代地是智能电话、平板计算机、智能手表或者包括与关于图20所图示和描述的相同或相似元件的其他计算设备。诸如智能电话、平板计算机和智能手表之类的设备通常被统称为移动设备。此外，尽管各种数据存储元件被图示为机器2000的一部分，但是存储装置还可以是或者可选地包括能经由诸如互联网的网络访问的基于云的存储装置。
存储器2003可以包括易失性存储器2014和非易失性存储器2008。机器2000可以包括多个计算机可读介质，或者可以访问包括多个计算机可读介质的计算环境，所述计算机可读介质诸如是易失性存储器2014和非易失性存储器2008、可移除存储装置2010和不可移除存储装置2012。计算机存储装置包括：随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编程只读存储器(EPROM)和电可擦除可编程只读存储器(EEPROM)，闪存或其他存储器技术，光盘只读存储器(CD ROM)，数字通用盘(DVD)或其他光盘存储装置，磁带盒，磁带，磁盘存储装置或者能够存储用于运行以执行在本文中所描述的功能的计算机可读指令的其他磁存储设备。
机器2000可以包括输入2006、输出2004和通信连接2016，或者可以访问包括输入2006、输出2004和通信连接2016的计算环境。输出2004可以包括诸如触摸屏的显示设备，其也可以用作输入设备。输入2006可以包括以下部件中的一个或多个：触摸屏、触摸板、鼠标、键盘、相机、一个或多个设备专用按钮、集成在机器2000内或者经由有线或无线数据连接耦合到机器2000的一个或多个传感器，以及其他输入设备。计算机可以使用通信连接在联网环境中操作以连接到一个或多个远程计算机，诸如数据库服务器，包括基于云的服务器和存储装置。远程计算机可以包括个人计算机(PC)、服务器、路由器、网络PC、对等设备或其他公共网络节点等。通信连接可以包括局域网(LAN)、广域网(WAN)、蜂窝、电气和电子工程师协会(IEEE)802.11(Wi-Fi)、蓝牙或其他网络。
存储在计算机可读存储设备上的计算机可读指令能由机器2000的处理单元2002执行。硬盘驱动器、CD-ROM和RAM是包括非瞬态计算机可读介质(诸如存储设备)的物品的一些示例。例如，计算机程序2018可以被用于使处理单元2002执行在本文中所描述的一种或多种方法或算法。
附加说明和示例：
示例1包括一种用于使用计算设备的用户界面(UI)的方法，所述方法包括：通过使用用户输入设备，使用所述UI来选择控制对象并且释放控制对象；选择第一对象以插入到所述UI上示出的一个或多个项目下方，其中，所述第一对象是响应于释放所述控制对象而在UI上示出的第一组对象中的一个对象；选择所述控制对象并且将所述控制对象拖动到所述UI上的项目中的两个项目之间的位置；在所述位置处释放所述控制对象；以及选择第二对象以插入在项目之间的位置处，其中，所述第二对象是响应于释放所述控制对象而在UI上示出的第一组对象中的一个对象。
在示例2中，示例1还可以包括：在示出所述第一组对象时在所述UI上向左滑动或向右滑动，其中，响应于所述滑动，第二组对象出现以代替所述第一组对象。
在示例3中，示例1-2中的至少一项还可以包括：在选择所述控制对象并且将所述控制对象拖动远离默认位置之后，将所述控制对象拖动到所述UI上的取消区域对象的阈值数量的像素内，以使插入操作被取消。
在示例4中，示例1-3中的至少一项还可以包括：在选择所述控制对象并且将所述控制对象拖动远离默认位置之后，将所述控制对象拖动到远离所述UI上示出的所有项目超过阈值数量的像素的位置，以使插入操作被取消。
在示例5中，示例1-4中的至少一项还可以包括：选择所述控制对象并且将所述控制对象拖动到所述UI上的第三项目上方；当所述控制对象在所述第三项目上方时释放所述控制对象；以及选择修改选项以应用于所述第三项目，响应于在所述第三项目上方释放所述控制对象而在所述UI上示出所述修改选项。
在示例6中，示例5还可以包括：其中，所述第三项目包括图像，并且其中，所述修改选项包括待应用于所述图像的过滤器。
在示例7中，示例1-6中的至少一项还可以包括：其中，所述第一组对象包括用户最近选择的项目和所述用户选择次数最多的项目。
示例8包括一种系统，其包括：显示设备；处理电路；包含指令的存储器，所述指令当由所述处理电路运行时使所述处理电路执行包括以下项的操作：提供使所述显示设备在所述显示设备上示出控制对象的信号；响应于从用户输入设备接收到一个或多个信号，而确定用户已经将所述控制对象拖动到所述显示设备上示出的项目之间的间隙的阈值数量的像素内，并且提供使所述显示设备在所述间隙处示出位置指示符的信号，所述位置指示符指示位置，其中如果用户在所述位置处释放所述控制对象则项目将被插入到所述位置；响应于接收到指示用户已经在所述位置处释放了所述控制对象的一个或多个信号，而提供使所述显示设备示出用于在由所述位置指示符指示的位置处插入对象列表的信号；以及响应于接收到指示用户已经从所述对象列表中选择了对象的一个或多个信号，提供使所述显示设备将所选对象示出为在由所述位置指示符指示的位置处的项目的信号。
在示例9中，示例8还可以包括：其中，所述显示设备是触摸屏，并且所述用户输入设备是所述触摸屏。
在示例10中，示例8-9中的至少一项还可以包括：其中，所述系统还包括耦合到所述显示设备的所述用户输入设备，并且其中，所述用户输入设备包括鼠标和键盘中的至少一个。
在示例11中，示例8-10中的至少一项还可以包括：其中，所述存储器还包括存储在其上的数据，所述数据定义所述显示设备上示出的项目的位置和范围以及所述项目之间的间隙以及所述控制对象的一个或多个中心像素的位置，并且其中，确定用户已经将所述控制对象拖动到所述显示设备上示出的项目之间的间隙的阈值数量的像素内包括将所述一个或多个中心像素的位置与项目的位置和范围以及项目之间的间隙进行比较。
在示例12中，示例8-11中的至少一项还可以包括：其中，所述操作还包括：提供使所述显示设备在所述显示设备上的默认位置示出所述控制对象的信号，直到从所述用户输入设备接收到指示用户已经选择并且拖动或者已经选择并且释放所述控制对象的信号。
在示例13中，示例8-12中的至少一项还可以包括：其中，所述操作还包括：响应于从所述用户输入设备接收到指示用户已经选择所述控制对象并且将所述控制对象拖动远离所述控制对象的默认位置的信号，提供使所述显示设备在所述控制对象的默认位置示出取消区域对象的信号。
在示例14中，示例13还可以包括：其中，所述操作还包括：响应于基于存储器中的位置数据确定用户已经将所述控制对象拖动到取消区域对象、并且在所述控制对象的一个或多个中心像素处在距取消区域对象的阈值数量的像素内时基于来自用户输入设备的信号释放了所述控制对象，而提供使所述显示设备在所述默认位置示出所述控制对象的信号。
示例15包括至少一种非瞬态机器可读介质，其包含指令，所述指令当由机器运行时使机器执行包括以下项的操作：响应于从用户输入设备接收到指示插入控制对象在显示设备上被拖动的数据，确定所述插入控制对象是被拖动到所述显示设备上的一个或多个项目的两个项目之间的位置、是被拖动到所述显示设备上的一个或多个项目上方的位置、还是被拖动到所述显示设备上的一个或多个项目下方的位置，而向所述显示设备提供使所述显示设备示出位置指示符对象的信号，所述位置指示符对象指示将显示当使用所述插入控制对象插入时项目的位置，响应于接收到指示所述插入控制对象被释放的数据，提供使所述显示设备示出用于在由位置指示符对象指示的位置处插入对象列表的信号，并且响应于接收到对所述对象中的对象选择，提供使所述显示设备示出在由所述位置指示符对象指示的位置处的所选择的对象的信号。
在示例16中，示例15还可以包括：其中，所述至少一种非瞬态机器可读介质还包括存储在其上的数据，所述数据定义所述显示设备上示出的一个或多个项目的位置和范围以及所述插入控制对象的一个或多个中心像素的位置，并且其中，确定已经将所述插入控制对象拖动到所述显示设备上示出的两个项目之间的位置包括将所述一个或多个中心像素的位置与项目的位置和范围进行比较。
在示例17中，示例15-16中的至少一项还可以包括，其中，所述操作还包括提供使所述显示设备在所述显示设备上的默认位置处示出所述插入控制对象的信号，直到从所述用户输入设备接收到指示已经选择并且拖动所述插入控制对象信号或者已经选择并且释放所述插入控制对象为止。
在示例18中，示例15-17中的至少一项还可以包括：其中，所述操作还包括：响应于从所述用户输入设备接收到指示已经选择了所述插入控制对象并且已经将所述插入控制对象拖动远离所述插入控制对象的默认位置的信号，而提供使所述显示设备在所述插入控制对象的默认位置示出取消区域对象的信号。
在示例19中，示例15-18中的至少一项还可以包括：响应于基于在所述至少一种非瞬态机器可读介质中的位置数据来确定已经将所述插入控制对象拖动到所述取消区域对象，并且在所述插入控制对象的一个或多个中心像素处在距所述取消区域对象的阈值数量的像素内时基于来自所述用户输入设备的信号释放了所述插入控制对象，而提供使所述显示设备在所述默认位置示出所述插入控制对象的信号。
在示例20中，示例15-19中的至少一项还可以包括：响应于基于在所述至少一种非瞬态机器可读介质中的位置数据来确定已经将所述插入控制对象拖动远离默认位置，并且被拖动到远离所述UI上的所有一个或多个项目超过阈值数量的像素的位置，使插入操作被取消。
尽管上文已经详细描述了一些实施例，但是其他修改也是可能的。例如，图中所描绘的逻辑流程不需要所示的特定次序或顺序次序来实现期望的结果。可以从所描述的流程中提供其他步骤或者可以消除步骤，并且可以向所描述的系统添加或移除其他部件。其他实施例可以在以下权利要求的范围内。

Claims (14)

1.一种用于使用计算设备的用户界面(UI)的方法，所述方法包括：
通过使用用户输入设备，使用所述UI来选择控制对象并且释放控制对象；
选择第一对象以插入到所述UI上示出的一个或多个项目附近，其中，所述第一对象是响应于释放所述控制对象而在所述UI上示出的第一组对象中的一个对象；
选择所述控制对象并且将所述控制对象拖动到所述UI上的所述项目中的两个项目之间的位置；
在所述位置处释放所述控制对象；以及
选择第二对象以插入到所述项目之间的所述位置处，其中，所述第二对象是响应于释放所述控制对象而在所述UI上示出的所述第一组对象中的一个对象。
2.根据权利要求1所述的方法，还包括：
在示出所述第一组对象时在所述UI上向左滑动或向右滑动，其中，响应于所述滑动，第二组对象出现以代替所述第一组对象。
3.根据权利要求1所述的方法，还包括：
在选择所述控制对象并且将所述控制对象拖动远离默认位置之后，将所述控制对象拖动到所述UI上的取消区域对象的阈值数量的像素内，以使插入操作被取消。
4.根据权利要求1所述的方法，还包括：
在选择所述控制对象并且将所述控制对象拖动远离默认位置之后，将所述控制对象拖动到远离所述UI上示出的所有项目超过阈值数量的像素的位置，以使插入操作被取消。
5.根据权利要求1所述的方法，还包括：
选择所述控制对象并且将所述控制对象拖动到所述UI上的第三项目上方；
当所述控制对象处在所述第三项目上方时释放所述控制对象；以及
选择修改选项以应用于所述第三项目，响应于在所述第三项目上方释放所述控制对象而在所述UI上示出所述修改选项。
6.根据权利要求5所述的方法，其中，所述第三项目包括图像，并且其中，所述修改选项包括：待应用于所述图像的过滤器，改变图表类型，将表格改变为图表，改变文本样式，或者改变组类型，相对于图像改变文本。
7.根据权利要求1所述的方法，其中，所述第一组对象包括用户最近选择的项目以及所述用户选择次数最多的项目。
8.一种系统，包括：
显示设备；
处理电路；
包含指令的存储器，所述指令当由所述处理电路运行时使所述处理电路执行包括以下项的操作：
提供使所述显示设备在所述显示设备上示出控制对象的信号；
响应于从用户输入设备接收到一个或多个信号，确定用户已经将所述控制对象拖动到所述显示设备上示出的项目之间的间隙的阈值数量的像素内，并且提供使所述显示设备在所述间隙处示出位置指示符的信号，所述位置指示符指示位置，其中如果所述用户在所述位置处释放所述控制对象则项目将被插入到所述位置；
响应于接收到指示所述用户已经在所述位置处释放了所述控制对象的一个或多个信号，提供使所述显示设备示出用于在由所述位置指示符指示的所述位置处插入的对象列表的信号；以及
响应于接收到指示所述用户已经从所述对象列表中选择了对象的一个或多个信号，提供使所述显示设备将所选择的对象示出为由所述位置指示符指示的所述位置处的项目的信号。
9.根据权利要求8所述的系统，其中，所述显示设备是触摸屏，并且所述用户输入设备是所述触摸屏。
10.根据权利要求8所述的系统，其中，所述系统还包括被耦合到所述显示设备的所述用户输入设备，并且其中，所述用户输入设备包括以下中的至少一种：鼠标、键盘、笔和视觉辅助。
11.根据权利要求8所述的系统，其中，所述存储器还包含存储在其上的数据，所述数据定义所述显示设备上示出的项目的位置和范围以及所述项目之间的间隙、以及所述控制对象的一个或多个中心像素的位置，并且其中，确定所述用户已经将所述控制对象拖动到所述显示设备上示出的项目之间的间隙的阈值数量的像素内包括将所述一个或多个中心像素的所述位置与项目的所述位置和范围以及所述项目之间的间隙进行比较。
12.根据权利要求8所述的系统，其中，所述操作还包括：
提供使所述显示设备在所述显示设备上的默认位置处示出所述控制对象的信号，直到从所述用户输入设备接收到指示所述用户已经选择并且拖动或者已经选择并且释放所述控制对象的信号。
13.根据权利要求8所述的系统，其中，所述操作还包括：
响应于从所述用户输入设备接收到指示所述用户已经选择所述控制对象并且将所述控制对象拖动远离所述控制对象的默认位置的信号，提供使所述显示设备在所述控制对象的所述默认位置中示出取消区域对象的信号。
14.根据权利要求13所述的系统，其中，所述操作还包括：
响应于基于所述存储器中的位置数据确定所述用户已经将所述控制对象拖动到所述取消区域对象、并且在所述控制对象的一个或多个中心像素处在距所述取消区域对象的阈值数量的像素内时基于来自所述用户输入设备的信号而释放了所述控制对象，而提供使所述显示设备在所述默认位置处示出所述控制对象的信号。
CN201880017610.9A 2017-03-13 2018-03-06 拖放插入控制对象 Active CN110419023B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/457,757 2017-03-13
US15/457,757 US10599319B2 (en) 2017-03-13 2017-03-13 Drag and drop insertion control object
PCT/US2018/020997 WO2018169718A1 (en) 2017-03-13 2018-03-06 Drag and drop insertion control object

Publications (2)

Publication Number Publication Date
CN110419023A true CN110419023A (zh) 2019-11-05
CN110419023B CN110419023B (zh) 2023-02-28

Family

ID=61768458

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880017610.9A Active CN110419023B (zh) 2017-03-13 2018-03-06 拖放插入控制对象

Country Status (4)

Country Link
US (1) US10599319B2 (zh)
EP (1) EP3596590A1 (zh)
CN (1) CN110419023B (zh)
WO (1) WO2018169718A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10900794B2 (en) * 2017-08-22 2021-01-26 Honda Motor Co., Ltd. System and methods for modifying route navigation with waypoints
JP7246855B2 (ja) * 2018-02-16 2023-03-28 キヤノン株式会社 撮像装置、記録装置及び表示制御装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100122192A1 (en) * 2008-11-13 2010-05-13 Todd Hanna Dynamic data object insertion
CN103365890A (zh) * 2012-03-31 2013-10-23 腾讯科技（深圳）有限公司 在页面中添加项目的方法和移动终端
CN104135564A (zh) * 2014-07-14 2014-11-05 掌赢信息科技（上海）有限公司 即时通讯程序的多模式输入切换方法、显示界面及其装置
CN106126138A (zh) * 2015-05-07 2016-11-16 富士施乐株式会社 屏幕显示设备和屏幕显示方法

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5644739A (en) 1995-01-27 1997-07-01 Microsoft Corporation Method and system for adding buttons to a toolbar
US6002402A (en) 1997-04-09 1999-12-14 Symantec Corporation System and method for producing a drag-and-drop object from a popup menu item
US6057844A (en) * 1997-04-28 2000-05-02 Adobe Systems Incorporated Drag operation gesture controller
US6621532B1 (en) 1998-01-09 2003-09-16 International Business Machines Corporation Easy method of dragging pull-down menu items onto a toolbar
US6677965B1 (en) 2000-07-13 2004-01-13 International Business Machines Corporation Rubber band graphical user interface control
US7818672B2 (en) 2004-12-30 2010-10-19 Microsoft Corporation Floating action buttons
US7958456B2 (en) 2005-12-23 2011-06-07 Apple Inc. Scrolling list with floating adjacent index symbols
KR101320919B1 (ko) * 2008-01-29 2013-10-21 삼성전자주식회사 분할 화면을 통한 ｇｕｉ 제공방법 및 이를 적용한멀티미디어 기기
KR101012300B1 (ko) 2008-03-07 2011-02-08 삼성전자주식회사 터치스크린을 구비한 휴대 단말기의 사용자 인터페이스장치 및 그 방법
US8127240B2 (en) * 2008-04-09 2012-02-28 International Business Machines Corporation Seamless drag and drop operation with multiple event handlers
KR101948645B1 (ko) 2011-07-11 2019-02-18 삼성전자 주식회사 그래픽 오브젝트를 이용한 컨텐츠 제어 방법 및 장치
US20130019175A1 (en) * 2011-07-14 2013-01-17 Microsoft Corporation Submenus for context based menu system
KR20130107974A (ko) 2012-03-23 2013-10-02 삼성전자주식회사 플로팅 사용자 인터페이스 제공 장치 및 방법
US11079895B2 (en) 2014-10-15 2021-08-03 Samsung Electronics Co., Ltd. Method and apparatus for providing user interface
US9606716B2 (en) 2014-10-24 2017-03-28 Google Inc. Drag-and-drop on a mobile device
US10095371B2 (en) * 2015-12-11 2018-10-09 Sap Se Floating toolbar
US10419601B2 (en) * 2015-12-28 2019-09-17 Verizon Patent And Licensing Inc. Methods and systems for managing multiple communication sessions from a single on-screen user interface
US10055895B2 (en) * 2016-01-29 2018-08-21 Snap Inc. Local augmented reality persistent sticker objects
US10402470B2 (en) * 2016-02-12 2019-09-03 Microsoft Technology Licensing, Llc Effecting multi-step operations in an application in response to direct manipulation of a selected object

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100122192A1 (en) * 2008-11-13 2010-05-13 Todd Hanna Dynamic data object insertion
CN103365890A (zh) * 2012-03-31 2013-10-23 腾讯科技（深圳）有限公司 在页面中添加项目的方法和移动终端
CN104135564A (zh) * 2014-07-14 2014-11-05 掌赢信息科技（上海）有限公司 即时通讯程序的多模式输入切换方法、显示界面及其装置
CN106126138A (zh) * 2015-05-07 2016-11-16 富士施乐株式会社 屏幕显示设备和屏幕显示方法

Also Published As

Publication number Publication date
WO2018169718A1 (en) 2018-09-20
CN110419023B (zh) 2023-02-28
US20180260091A1 (en) 2018-09-13
US10599319B2 (en) 2020-03-24
EP3596590A1 (en) 2020-01-22

Similar Documents

Publication Publication Date Title
JP7026183B2 (ja) アプリケーションに対応するユーザインタフェースオブジェクトと対話するためのデバイス、方法、及びグラフィカルユーザインタフェース
JP5908130B2 (ja) ジャーナルを生成するためのアプリケーション
US10474320B2 (en) Document channel selection for document viewing application
KR102042169B1 (ko) 컨텐츠를 표시하는 사용자 단말 장치 및 그 방법
US9304668B2 (en) Method and apparatus for customizing a display screen of a user interface
US9779097B2 (en) Platform agnostic UI/UX and human interaction paradigm
CN112181226B (zh) 用于提供内容的方法和装置
CN105307000A (zh) 显示设备及其方法
US10108643B2 (en) Graphical interface device, graphical interface method and medium
CN102622168A (zh) 信息处理设备、信息处理方法和信息处理程序
CN102681837A (zh) 提供用户界面特征以编辑多层电子内容的系统和方法
US20190250790A1 (en) Managing content displayed on a touch screen enabled device
JP6090173B2 (ja) 情報処理装置、情報処理方法、及びプログラム
CN103299264A (zh) 显示装置、用户接口方法以及程序
CN100444096C (zh) 用于进行内容导航的系统和方法
CN104615764B (zh) 一种显示方法及电子设备
CN103677491A (zh) 一种用于渲染网页的方法和装置
US10304493B2 (en) Cartoon content editing method and cartoon content editing apparatus
CN110419023A (zh) 拖放插入控制对象
US20160196049A1 (en) Information processing device, control method for information processing device, and recording medium
CN109324733A (zh) 在终端的内容处理方法和设备
JP6405143B2 (ja) コンテンツ表示装置及び表示方法
US20150088873A1 (en) Method and apparatus for searching for content
KR20160071937A (ko) 타임바를 이용하여 컨텐츠 검색기간을 설정하는 방법, 사용자 단말, 컴퓨터 판독가능 기록매체 및 컴퓨터 프로그램

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant