CN104205047A - 用于提供远程用户交互的装置和方法 - Google Patents

用于提供远程用户交互的装置和方法 Download PDF

Info

Publication number
CN104205047A
CN104205047A CN201380018976.5A CN201380018976A CN104205047A CN 104205047 A CN104205047 A CN 104205047A CN 201380018976 A CN201380018976 A CN 201380018976A CN 104205047 A CN104205047 A CN 104205047A
Authority
CN
China
Prior art keywords
viewing area
repetition
borderline region
enlivening
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201380018976.5A
Other languages
English (en)
Other versions
CN104205047B (zh
Inventor
J·布拉肯塞克
R·伯斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nokia Technologies Oy
Original Assignee
Nokia Oyj
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nokia Oyj filed Critical Nokia Oyj
Publication of CN104205047A publication Critical patent/CN104205047A/zh
Application granted granted Critical
Publication of CN104205047B publication Critical patent/CN104205047B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • G06F9/452Remote windowing, e.g. X-Window System, desktop virtualisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00Digital computers in general; Data processing equipment in general
    • G06F15/16Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Abstract

描述一种装置、方法和计算机程序产品,该装置、方法和计算机程序产品提供重复的用户界面,该重复的用户界面包括重复的活跃显示区域和重复的边界区域,从而重复的用户界面可以识别远程用户界面所识别的相同类型的用户输入,可以在接收到这样的输入时执行相同操作。该装置可以建立与远程用户界面的通信链路并且确定远程用户界面是否被配置为检测在远程用户界面的活跃显示区域以外的边界区域中至少部分地接收的用户输入。然后可以响应于确定远程用户界面被配置为检测在远程用户界面的边界区域中至少部分地接收的用户输入来提供重复的活跃显示区域和重复的边界区域。

Description

用于提供远程用户交互的装置和方法
技术领域
本发明的实施方式主要地涉及通过提供用于接收用户输入的重复的活跃显示区域和重复的边界区域来提供实现用户与远程用户界面交互的用户界面。
背景技术
移动设备、比如蜂窝电话和便携式数字助理(PDA)已经变得越来越受用户欢迎并且正在变成许多用户的日常生活的必需部分。在许多情况下,移动设备具有与其它电子设备无线地通信以例如交换信息的能力。
用户经常对他们自己的移动设备很熟悉并且在考虑到偏好时将宁愿与他们自己的设备所提供的用户界面而不是与不同设备(移动或者固定)的不熟悉用户界面交互。例如,许多用户偏好于与他们自己的移动设备交互以买票,也不愿与电影院的售票信息亭所提供的用户界面交互以实现相同任务。然而在其它情形中,用户可能希望与他熟悉的、但是在更大显示器(比如远程设备的显示器)上呈现的用户界面交互。
因而可能希望提供一种用于在特定设备上提供与远程设备的用户界面基本上相同的外观和功能的用户界面的改进机制。
发明内容
因而,描述一种能够提供重复的用户界面的装置、方法和计算机程序产品的实施方式。具体而言,一种用于提供重复的用户界面的装置的实施方式可以包括至少一个处理器和包括计算机程序代码的至少一个存储器。至少一个存储器和计算机程序代码可以被配置为与处理器一起使该装置至少建立与远程用户界面的通信链路;确定远程用户界面是否被配置为检测在远程用户界面的活跃显示区域以外的边界区域中至少部分地接收的用户输入;并且响应于确定远程用户界面被配置为检测在远程用户界面的边界区域中至少部分地接收的用户输入来提供重复的活跃显示区域和重复的边界区域。就这一点而言,在重复的边界区域中至少部分地接收并且在重复的活跃显示区域中至少部分地接收的用户输入可以引起预定操作的执行。
在一些情况下,至少一个存储器和计算机程序代码还可以被配置为与处理器一起使该装置通过配置现有活跃显示区域的一部分以用作重复的活跃显示区域并且配置现有活跃显示区域的另一部分以用作重复的边界区域来提供重复的活跃显示区域。备选地,至少一个存储器和计算机程序代码还可以被配置为与处理器一起使该装置通过配置现有活跃显示区域以用作重复的活跃显示区域并且提供至少部分包围重复的活跃显示区域的重复的边界区域来提供重复的活跃显示区域。重复的活跃显示区域可以被配置为显示内容,并且重复的边界区域可以被配置为不显示内容。
在一些情况下,包括在重复的边界区域中至少部分地发起的触摸分量并且包括在重复的活跃显示区域中至少部分地接收的移动分量的用户输入可以引起预定操作的执行。预定操作可以包括从包括第一交互内容的第一屏幕转换到包括第二交互内容的第二屏幕。作为另一示例,预定操作可以包括关闭在重复的活跃显示区域中显示的程序。
在其它实施方式中,描述一种用于通过以下操作来提供重复的用户界面的方法和计算机程序产品:建立与远程用户界面的通信链路;确定远程用户界面是否被配置为检测在远程用户界面的活跃显示区域以外的边界区域中至少部分地接收的用户输入;并且响应于确定远程用户界面被配置为检测在远程用户界面的边界区域中至少部分地接收的用户输入来提供重复的活跃显示区域和重复的边界区域,其中在重复的边界区域中至少部分地接收并且在重复的活跃显示区域中至少部分地接收的用户输入引起预定操作的执行。
在一些情况下,提供重复的活跃显示区域可以包括配置现有活跃显示区域的一部分以用作重复的活跃显示区域并且配置现有活跃显示区域的另一部分以用作重复的边界区域。在其它情况下,提供重复的活跃显示区域可以包括配置现有活跃显示区域以用作重复的活跃显示区域并且提供至少部分地包围重复的活跃显示区域的重复的边界区域。另外,重复的活跃显示区域可以被配置为显示内容,并且重复的边界区域可以被配置为不显示内容。
包括在重复的边界区域中至少部分地发起的触摸分量并且包括在重复的活跃显示区域中至少部分地接收的移动分量的用户输入可以在一些情况下引起预定操作的执行。预定操作可以包括从包括第一交互内容的第一屏幕转换到包括第二交互内容的第二屏幕和/或预定操作可以包括关闭在重复的活跃显示区域中显示的程序。
在更多其它实施方式中,描述一种用于提供重复的用户界面的设备。该设备可以包括用于建立与远程用户界面的通信链路的装置;用于确定远程用户界面是否被配置为检测在远程用户界面的活跃显示区域以外的边界区域中至少部分地接收的用户输入的装置;以及用于响应于确定远程用户界面被配置为检测在远程用户界面的边界区域中至少部分地接收的用户输入来提供重复的活跃显示区域和重复的边界区域的装置,其中在重复的边界区域中至少部分地接收并且在重复的活跃显示区域中至少部分地接收的用户输入引起预定操作的执行。
附图说明
已经这样用一般措词描述了本发明,现在将参照附图,这些附图未必按比例绘制,并且在这些附图中:
图1图示根据本发明的一个示例实施方式的通信系统的一个示例;
图2图示根据本发明的一个示例实施方式的用于提供重复的用户界面的装置的示意性框图;
图3图示根据本发明的一个示例实施方式的被配置为提供活跃显示区域和边界区域的设备;
图4图示根据本发明的一个示例实施方式的包括移动分量的划动手势;
图5图示根据本发明的一个示例实施方式的与远程用户界面通信以用于提供重复的用户界面的装置;
图6图示根据本发明的一个示例实施方式的应用于远程用户界面的各种“挥动”手势;
图7A-7D图示根据本发明的一个示例实施方式的代表各种类型的交互内容的屏幕;
图8A图示根据本发明的一个示例实施方式的装置,对于该装置,现有活跃显示区域的一部分被配置为用作重复的活跃显示区域,并且现有活跃显示区域的另一部分被配置为用作重复的边界区域;
图8B图示根据本发明的一个示例实施方式的装置,对于该装置,现有活跃显示区域被配置为用作重复的活跃显示区域,并且提供重复的边界区域至少部分包围重复的活跃显示区域;以及
图9图示根据本发明的另一示例实施方式的用于提供重复的用户界面的方法的流程图。
具体实施方式
下文将参照附图更完全地描述本发明的一些实施方式,在附图中示出本发明的一些、但是并非所有实施方式。实际上,本发明的各种实施方式可以用许多不同形式来体现而不应被解释为限于这里阐述的实施方式;实际上,提供这些实施方式使得本公开内容将满足适用法律要求。相似标号全篇指代相似单元。如这里所用,术语“数据”、“内容”、“信息”和相似术语可以可互换地用来指代能够根据本发明的实施方式发送、接收和/或存储的数据。因此,使用任何这样的术语不应被解读为限制本发明的实施方式的精神实质和范围。
此外,如这里所用,术语‘电路装置’指代(a)仅硬件的电路实现方式(例如在模拟电路装置和/或数字电路装置中的实现方式);(b)电路与计算机程序产品的组合,该计算机程序产品包括在一个或者多个计算机可读存储器上存储的软件和/或固件指令,这些电路和计算机程序产品一起工作以使装置执行这里描述的一个或者多个功能;以及(c)如下电路、如比如微处理器或者微处理器的部分,即使软件或者固件在物理上不存在,这些电路仍然需要该软件或者固件用于操作。‘电路装置’的这一定义适用于这里、包括在任何权利要求中对这一术语的所有使用。作为又一示例,如这里所用,术语‘电路装置’也包括如下实现方式,该实现方式包括一个或者多个处理器和/或其部分以及附带软件和/或固件。作为另一示例,术语‘电路装置’如这里所用也例如包括用于移动电话的基带集成电路或者应用处理器集成电路或者在服务器、蜂窝网络设备、其它网络设备和/或其它计算设备中的相似集成电路。
如这里定义的那样,指代物理存储介质(例如易失性或者非易失性存储器设备)的“计算机可读存储介质”可以区别于指代电磁信号的“计算机可读传输介质”。
如以上指出的那样,许多用户偏好于与他们熟悉的用户界面、比如他们的移动终端(例如用户设备、比如便携式数字助理(PDA)和蜂窝电话)所提供的用户界面交互。除了熟悉用户界面的外观、比如知道何处应用用户输入以引起特定操作的执行之外,用户也可能乐于知道他的用户界面的各种功能。
例如关于触摸屏显示器,用户设备100可以如在图3中描绘的那样提供活跃显示区域110和在活跃显示区域以外的边界区域120。活跃显示区域110可以在一些情况下是触摸屏显示器的被配置为向用户呈现图像的部分,而边界区域120可以是其中不呈现图像的、但是能够接收触摸输入的、包围活跃显示区域的暗化或者“死亡(dead)”区域。然而在其它情况下,可以在活跃显示区域和边界区域二者内呈现图像。
用户设备可以被配置为基于在触摸屏显示器上何处和如何接收某些用户输入来识别输入为引起特定操作的执行。例如,可以识别“向内挥动(swipe-in)”触摸手势,其中用户在触摸屏显示器的边缘(例如在边界区域120中)发起输入并且朝着显示器的中心(例如向活跃显示区域110中)移动他的手指。“向内挥动”手势可以例如使设备在不同交互内容屏幕之间转换、比如从显示特定应用切换成显示设备的起始屏幕。因此,为了识别输入,比如“向内挥动”手势,在活跃显示区域110和边界区域120二者中提供触摸传感器。
然而在另一设备与该用户设备通信以在另一设备的显示器上呈现用户的移动设备的相同用户界面时,可能出现的一个问题是另一设备可能在它自己的硬件中缺乏用以检测如下手势的支持,这些手势依赖于在边界区域和活跃显示区域二者中的检测。换而言之,另一设备的触摸屏显示器可能不能检测“向内挥动”手势,因为设备可能未被配置为呈现可以在其中发起“向内挥动”手势的边界区域,并且可以代之以将用户对于输入“向内挥动”手势的尝试解释为引起不同的、非既定操作(比如平移操作)的不同手势。
因而,本发明的实施方式提供重复的用户界面,该重复的用户界面包括重复的活跃显示区域和重复的边界区域,从而设备的用户界面可以能够识别远程用户界面所识别的相同类型的用户输入,并且可以在接收这样的输入时执行相同操作。就这一点而言,如这里所用的术语“远程用户界面”是指其用户界面正在被模拟的设备。因此,在用户的移动设备正在与另一设备、比如信息亭或者某个其它固定终端通信并且用户的移动设备正在提供用户界面、该用户界面重复固定终端的用户界面的情况下,固定终端将是远程用户界面。备选地,在固定终端正在与用户的移动设备通信以便提供在固定终端的显示器上显示用户的移动设备的用户界面的情况下,用户的移动设备将是远程用户界面。
因此,如以下更具体描述的那样,本发明的实施方式建立与远程用户界面的通信链路并且确定远程用户界面是否被配置为检测在远程用户界面的活跃显示区域以外的边界区域中至少部分地接收的用户输入。然后可以响应于确定远程用户界面被配置为检测在远程用户界面的边界区域中至少部分地接收的用户输入来提供重复的活跃显示区域和重复的边界区域,其中在重复的边界区域中至少部分地接收并且在重复的活跃显示区域中至少部分地接收的用户输入引起预定操作的执行。以这一方式,即使缺乏直接支持这样的功能的硬件,仍然可以提供具有与远程用户界面基本上相同的、用于在接收到用户输入时进行识别和动作的能力的、模拟的用户界面。
提供一个示例实施方式的图1图示了将从本发明的实施方式受益的移动终端10的框图。然而应当理解如图所示和下文描述的移动终端10仅举例说明可以从本发明的实施方式受益的一个设备类型、因此不应视为限制本发明的实施方式的范围。这样,虽然许多类型的移动终端、比如便携式数字助理(PDA)、移动电话、寻呼机、移动电视、游戏设备、膝上型计算机、相机、平板计算机、触摸表面、可佩戴设备、视频记录器、音频/视频播放器、无线电、电子书、定位设备(例如全球定位系统(GPS)设备)或者前述各项的任何组合以及其它类型的语音和文本通信系统可以容易运用本发明的实施方式,但是包括固定(非移动)电子设备的其它设备也可以运用一些示例实施方式。
移动终端10可以包括与发送器14和接收器16可操作通信的一个天线12(或者多个天线)。移动终端10还可以包括控制分别向发送器14提供信号和从接收器16接收信号的装置、比如处理器20或者其它处理设备(例如图2的处理器70)。信号可以包括如以下描述的邻近分量和/或定向分量。信号还可以包括根据适用蜂窝系统的空中接口标准的信令信息并且也可以包括用户话音、接收的数据和/或用户生成的数据。就这一点而言,移动终端10可以能够用一个或者多个空中接口标准、通信协议、调制类型和接入类型操作。举例而言,移动终端10可以能够根据多个第一代、第二代、第三代和/或第四代通信协议等中的任何通信协议操作。例如移动终端10可以能够根据第二代(2G)无线通信协议IS-136(时分多址(TDMA))、GSM(全球移动通信系统)和IS-95(码分多址(CDMA))或者根据第三代(3G)无线通信标准、比如通用移动电信系统(UMTS)、CDMA2000、宽带CDMA(WCDMA)和时分同步CDMA(TD-SCDMA)、根据3.9G无线通信协议、比如演进型UMTS地面无线电接入网络(E-UTRAN)、根据第四代(4G)无线通信协议(例如长期演进(LTE)或者LTE-高级(LTE-A))等操作。作为备选方案(或者附加地),移动终端10可以能够根据非蜂窝通信机制操作。例如移动终端10可以能够在无线局域网(WLAN)或者其它通信网络中通信。
在一些实施方式中,处理器20可以包括为了实施移动终端10的音频和逻辑功能而希望的电路装置。例如,处理器20可以由数字信号处理器设备、微处理器设备以及各种模数转换器、数模转换器和其它支持电路组成。在这些设备之间根据它们的相应能力分配移动终端10的控制和信号处理功能。处理器20因此也可以包括用于在调制和传输之前对消息和数据卷积地进行编码和交织的功能。处理器20还可以包括内部音码器并且可以包括内部数据调制解调器。另外,处理器20可以包括用于操作可以在存储器中存储的一个或者多个软件程序的功能。例如处理器20可以能够操作连通程序、比如常规Web浏览器。连通程序然后可以允许移动终端10例如根据无线应用协议(WAP)、超文本传送协议(HTTP)等发送和接收Web内容、比如基于位置的内容和/或其它网页内容。
移动终端10也可以包括用户界面,该用户界面包括输出设备、比如常规耳机或者扬声器24、振铃器22、麦克风26、显示器28以及用户输入接口,以上各项均耦合到处理器20。允许移动终端10接收数据的用户输入接口可以包括允许移动终端10接收数据的多个设备中的任何设备、比如键区30、触摸屏显示器(显示器28提供这样的触摸屏显示器的示例)或者其它输入设备。在包括键区30的实施方式中,键区30可以包括常规键(0-9)和有关键(#、*)以及用于操作移动终端100的其它硬键和软键。备选地或者附加地,键区30可以包括常规QWERTY键区布置。键区30也可以包括具有关联功能的各种软键。附加地或者备选地,移动终端10可以包括接口设备、比如操纵杆或者其它用户输入接口。如以下进一步描述的运用触摸屏显示器的一些实施方式可以完全省略键区30以及省略扬声器24、振铃器22和麦克风26中的任何或者所有部件。移动终端10还包括电池34、比如振动电池包,该电池用于向为了操作移动终端10而需要的各种电路供电以及可选地提供机械振动作为可检测输出。
移动终端10还可以包括用户标识模块(UIM)38。UIM 38通常是具有内置处理器的存储器设备。UIM 38可以例如包括用户标识模块(SIM)、通用集成电路卡(UICC)、通用用户标识模块(USIM)、可拆卸用户标识模块(R-UIM)等。UIM 38通常存储与移动用户有关的信元。除了UIM 38之外,移动终端10还可以配备有存储器。例如移动终端10可以包括易失性存储器40、比如易失性随机存取存储器(RAM),该易失性存储器包括用于暂时存储数据的高速缓存区域。移动终端10也可以包括可以被嵌入和/或可以可拆卸的其它非易失性存储器42。存储器可以存储移动终端10用来实施移动终端10的功能的多条信息和数据中的任一条信息和数据。
在一些实施方式中,移动终端10也可以包括相机或者其它媒体捕获单元32以便捕获与移动终端10的用户邻近的对象、人和地点的图像或者视频。移动终端10(或者甚至某个其它固定终端)也可以结合别处产生或者生成的、但是可用于在移动终端10(或者固定终端)消费的图像或者视频内容(以及其它类型的内容)实现示例实施方式。
现在将参照图2描述本发明的一个示例实施方式,该图描绘用于提供重复的用户界面的装置50的某些单元。图2的装置50可以例如与图1的移动终端10结合运用。然而应当注意图2的装置50也可以与多种其它移动和固定设备结合运用,因此本发明的实施方式不应限于在设备、比如图1的移动终端10上应用。例如,可以在个人计算机、平板计算机、移动电话或者其它用户终端上运用装置50。另外,在一些情况下,装置50可以在固定设备、比如服务器或者其它服务平台上,并且可以基于在固定设备出现的处理在远程设备、比如用户终端(例如移动终端)上呈现(例如经由服务器/客户端关系)呈现内容。
也应当注意,尽管图2图示了用于提供重复的用户界面的装置的配置的一个示例,但是许多其它配置也可以用来实施本发明的实施方式。这样,在一些实施方式中,虽然示出设备或者单元为相互通信,但是下文应当认为这样的设备或者单元能够被体现于相同设备或者单元内,因此应当理解被示出通信的设备或者单元备选地是相同设备或者单元的部分。
现在参照图2,用于提供重复的用户界面的装置50可以包括处理器70、用户界面收发器72、通信接口74和存储器设备76或者以别的方式与它们通信。在一些实施方式中,处理器70(和/或辅助处理器70或者以别的方式与处理器70关联的协同处理器或者任何其它处理电路装置)可以经由用于在装置50的部件之中传递信息的总线与存储器设备76通信。存储器设备76可以例如包括一个或者多个易失性和/或非易失性存储器。换而言之,例如存储器设备76可以是包括门的电子存储设备(例如计算机可读存储介质),这些门被配置为存储机器(例如计算设备、比如处理器70)可取回的数据(比特)。存储器设备76可以被配置为存储用于使该装置能够根据本发明的一个示例实施方式执行各种功能的信息、数据、内容、应用、指令等。例如,存储器设备76可以被配置为缓冲用于由处理器70处理的输入数据。附加地或者备选地,存储器设备76可以被配置为存储用于由处理器70执行的指令。
装置50可以在一些实施方式中是被配置为运用本发明的一个示例实施方式的移动终端(例如移动终端10)或者固定通信设备或者计算设备。然而在一些实施方式中,装置50可以体现为芯片或者芯片组。换而言之,装置50可以包括一个或者多个物理封装(例如芯片),该一个或者多个物理封装包括结构组件(例如基板)上的材料、部件和/或接线。结构组件可以提供用于在其上包括的部件电路装置的物理强度、尺寸节约和/或电互作用限制。装置50因此可以在一些情况下被配置为在单个芯片上或者作为单个“片上系统”实施本发明的一个实施方式。这样,在一些情况下,芯片或者芯片组可以构成用于执行一个或者多个操作的单元,该一个或者多个操作用于提供这里描述的功能。
可以用多个不同方式体现处理器70。例如,可以体现处理器70为各种硬件处理装置、比如协同处理器、微处理器、控制器、数字信号处理器(DSP)、有或者无附带DSP的处理单元或者各种其它处理电路装置中的一个或者多个硬件处理单元,这些其它处理电路单元包括集成电路、如比如ASIC(专用集成电路)、FPGA(现场可编程门阵列)、微控制器单元(MCU)、硬件加速器、专用计算机芯片等。这样,在一些实施方式中,处理器70可以包括被配置为独立执行的一个或者多个处理核。多核处理器可以在单个物理封装内实现多处理。附加地或者备选地,处理器70可以包括经由总线被串接配置为实现独立执行指令、流水线化和/或多线程化的一个或者多个处理器。
在一个示例实施方式中,处理器70可以被配置为执行在存储器设备76中存储的或者处理器70以别的方式可访问的指令。备选地或者附加地,处理器70可以被配置为执行硬编码的功能。这样,无论是通过硬件还是软件方法或者通过其组合来配置,处理器70可以代表能够在被相应地配置之时根据本发明的一个实施方式执行操作的(例如在电路装置中物理地体现的)实体。因此例如在体现处理器70为ASIC、FPGA等时,处理器70可以是用于进行这里描述的操作的、具体地配置的硬件。备选地,作为另一示例,在体现处理器70为软件指令的执行器时,指令可以具体地配置处理器70以在执行指令时执行这里描述的算法和/或操作。然而在一些情况下,处理器70可以是具体设备(例如移动终端或者网络设备)的处理器,该设备被适配用于通过如下指令进一步配置处理器70来运用本发明的一个实施方式,这些指令用于执行这里描述的算法和/或操作。处理器70可以包括被配置为支持处理器70的操作的时钟、算术逻辑单元(ALU)和逻辑门以及其它部件。
同时,通信接口74可以是在硬件或者硬件与软件的组合中体现的任何如下单元、比如设备或者电路装置,该单元被配置为从/向与装置50通信的网络和/或任何其它设备或者模块接收和/或发送数据。就这一点而言,通信接口74可以例如包括用于实现与无线通信网络通信的一个天线(或者多个天线)以及支持硬件和/或软件。附加地或者备选地,通信接口74可以包括用于与天线交互以引起信号经由天线的发送或者操纵经由天线接收的信号的接收的电路装置。在一些环境中,通信接口74可以备选地支持或者也支持有线通信。这样,例如通信接口74可以包括用于支持经由线缆、数字用户线(DSL)、通用串行总线(USB)或者其它机制的通信调制解调器和/或其它硬件/软件。
用户界面收发器72可以与处理器70通信以接收用户输入的指示和/或引起向用户提供可听、可视、机械或者其它输出。这样,用户界面收发器72可以例如包括键盘、鼠标、操纵杆、显示器、触摸屏、触摸区域、软键、麦克风、扬声器或者其它输入/输出机制。附加地或者备选地,处理器70可以包括被配置为控制一个或者多个用户界面单元、如比如扬声器、振铃器、麦克风、显示器等的至少一些功能的用户界面电路装置。处理器70和/或包括处理器70的用户界面电路装置可以被配置为通过在处理器70可访问的存储器(例如存储器设备76等)上存储的计算机程序指令(例如软件和/或固件)控制一个或者多个用户界面单元的一个或者多个功能。
在一个示例实施方式中,装置50可以包括触摸屏显示器68(例如显示器28)或者以别的方式与触摸屏显示器68通信。在不同示例情况下,触摸屏显示器68可以是二维(2D)或者三维(3D)显示器。可以体现触摸屏显示器68为任何已知的触摸屏显示器。因此,例如触摸屏显示器68可以被配置为通过任何适当技术、比如电阻、电容、红外线、应变计、表面波、光成像、分散信号技术、声脉冲识别和/或其它技术实现触摸识别。用户界面收发器72可以与触摸屏显示器68通信以接收在触摸屏显示器68处的触摸输入并且分析这样的指示和/或基于可以响应于触摸输入而推断或者以别的方式确定的对应用户动作修改对这样的指示的响应。
继续参照图2,在一个示例实施方式中,装置50可以包括触摸屏接口80。触摸屏接口80可以在一些实例中是用户界面收发器72的一部分。然而在一些示例实施方式中,触摸屏接口80可以被体现为处理器70或者可以是由处理器70控制的分离实体。这样,在一些实施方式中,处理器70可以视为引起、指引或者控制执行或者出现如这里描述的归于触摸屏接口80(和触摸屏接口80的任何部件)的各种功能。触摸屏接口80可以是任何如下单元、比如设备或者电路装置,该单元、比如设备或者电路装置根据软件操作或者以别的方式在硬件或者硬件与软件的组合中被体现(例如处理器70在软件控制之下操作、处理器70被体现为具体配置为执行这里描述的操作的ASIC或者FPGA或者其组合)、由此配置该设备或者电路装置以执行如这里描述的触摸屏接口80的对应功能。因此,在其中运用软件的示例中,执行软件的设备或者电路装置(例如在一个示例中的处理器70)形成与这样的单元关联的结构。
触摸屏接口80可以被配置为接收具有在触摸屏显示器68处的触摸事件的形式的输入。这样,触摸屏接口80可以与触摸屏显示器68通信以接收在触摸屏显示器68处的用户输入并且基于可以响应于这样的输入而推断或者以别的方式确定的对应用户动作修改对输入的响应。在识别触摸事件之后,触摸屏接口80可以在一些情形中被配置为确定触摸事件的分类并且基于触摸事件提供对应功能。
在一些实施方式中,触摸屏接口80可以包括检测器82、显示管理器84和手势分类器86。检测器82、显示管理器84和手势分类器86中的每个部件可以是配置为执行如这里描述的分别与检测器82、显示管理器84和手势分类器86关联的对应功能的、在硬件或者硬件与软件的组合中体现的任何设备或者单元。在一个示例实施方式中,检测器82、显示管理器84和手势分类器86中的每个部件可以由处理器70控制或者以别的方式被体现为处理器70。
检测器82可以与触摸屏显示器68通信以接收用户输入,以便基于在检测器82处接收的每个输入来识别和/或确定触摸事件。可以定义触摸事件为检测到对象、比如触笔、手指、硬笔、铅笔、蜂窝电话、数字相机或者任何其它移动设备(包括图1中所示移动终端10)或者对象以足以注册(register)为触摸的方式与触摸屏显示器的部分发生接触。就这一点而言,例如触摸事件可以是在触摸屏显示器69的屏幕上在给定的区域之上检测到在特定压力门限以上的压力。在每个触摸事件之后,检测器82还可以被配置为向手势分类器86传递与触摸事件对应的数据(例如触摸位置、触摸长度、对象触摸数目、触摸压力、触摸区域、移动速度、移动方向、延迟长度、触摸频率等)以用于手势分类。这样,检测器82可以包括作为示例配置为测量作为触摸事件的结果而应用的触摸压力(例如在给定的区域之上的力)数量的一个或者多个力传感器或者与该一个或者多个力传感器通信。
手势分类器86可以被配置为识别和/或确定触摸事件的对应分类。换而言之,手势分类器86可以被配置为执行手势分类以将触摸事件分类为多个可能手势中的任何一种。可识别手势的一些示例可以包括触摸、多触摸、划动(stroke)、字符、符号、形状、夹捏事件(例如向内夹捏或者向外夹捏)等。
触摸可以被定义为撞击单个区域(在触摸屏显示器68的表面上无移动或者有最小移动)、然后被移开的触摸事件。多触摸可以被定义为并行地(或者接近并行地)感测的多个触摸事件。划动可以被定义为如下触摸事件,该触摸事件紧接地跟随有在发起该触摸事件的对象在保持与触摸屏显示器68相接触的同时该对象的运动。换而言之,划动可以由如下运动定义,该运动跟随触摸事件,由此形成连续的移动触摸事件,该移动触摸事件定义瞬时触摸定位的移动系列(例如如同拖动操作或者如同轻弹操作)。这样,划动130(图4中所示)可以包括接触分量A(例如与触摸显示器68的初始接触)、移动分量B(例如在接触触摸屏显示器的对象保持接触的同时该对象的运动,该运动由箭头130代表),而移动分量的方向是对象跨越触摸屏显示器的运动的方向。在一些情况下,该方向可以是如图4中经由虚线箭头135所示的、与移动分量的方向不相同的标称方向(例如如下方向,该方向不是对象跨越触摸屏显示器68移动的实际或者瞬时方向)。划动的示例包括如以下更具体描述的“向内挥动”手势、“向外挥动”手势、“向上挥动”手势和“向下挥动”手势。多划动和/或多触摸可以用来定义特定形状或者形状序列以定义字符或者符号。
可以将夹捏事件分类为向外夹捏或者向内夹捏(下文简称为夹捏)。可以定义夹捏为多触摸,其中引起多触摸的夹捏事件被间隔开。在初始出现涉及到至少两个对象的多触摸事件之后,对象中的一个或者多个对象可以基本上朝着彼此移动以模拟夹捏。同时,可以定义向外夹捏为多触摸,其中引起多触摸的触摸事件在彼此相对靠近、跟随有发起该多触摸的对象的基本上相互背离的移动。在一些情况下,在向外夹捏时的对象也可以初始地彼此靠近而使得它们可以被解释为单触摸而不是多触摸,该单触摸然后通过两个对象相互背离的移动来修改。
手势分类器86也可以被配置为向显示管理器84传达关于触摸事件的识别、检测和/或分类的检测信息。显示管理器84可以被配置为根据为手势分类器86所确定的每个相应手势分类和实施特性而规定的响应,基于从检测器82接收的检测信息和手势分类器86所提供的手势分类来提供对向在触摸屏显示器68上显示的内容进行的修改的控制。换而言之,显示管理器84可以根据为可以在显示器检测的给定的触摸事件而确定的手势分类和实施特性分类来配置显示器(例如关于显示的内容和/或相对于显示的内容而呈现的用户界面效果)。
现在转向图5,一般而言,提供装置50、比如由图1的移动终端10(例如蜂窝电话)体现的装置,该装置具有触摸屏显示器68或者以别的方式与触摸屏显示器68关联。如以上描述的那样,装置50可以包括至少一个处理器(例如图2的处理器70)和包括计算机程序代码的至少一个存储器(例如图2的存储器设备76)。至少一个存储器和计算机程序代码可以被配置为与处理器使装置50至少例如经由图2的通信接口74建立与远程用户界面150的通信链路。例如如以上指出的那样,装置50可以由用户的移动设备、比如用户的蜂窝电话体现,并且远程用户界面150可以是固定终端、比如在电影院的售票信息亭的用户界面。然而也如以上指出的那样,术语“远程用户界面”是相对术语,因为由另一设备正在重复的任何用户界面将这里出于说明的目的而被称为远程用户界面。
在一些情况下,远程用户界面150可以包括活跃显示区域110和在该活跃显示区域以外的边界区域120。活跃显示区域110可以例如是显示器的其中向用户显示内容的居中定位的部分。边界区域120可以与活跃显示区域110相邻并且包围活跃显示区域110。在一些情况下,边界区域120可以在视觉上不同于活跃显示区域110。例如,边界区域120可以被配置使得在边界区域中不显示内容,并且因此可以表现为“暗淡”或者“死亡”。然而在其它情况下,在边界区域120中显示的内容可以具有与在活跃显示区域110中显示的内容不同的外观。例如,在边界区域120中显示的内容可以表现为消退或者部分遮蔽。在一些情况下,边界区域120可以使用色带或者其它指示来显示“简单”信息、比如存在通信连接。
在任何情况下,可以使装置50确定远程用户界面150是否被配置为检测在远程用户界面的边界显示区域110以外的边界区域120中至少部分地接收的用户输入。虽然在各图中描绘和在这里的示例中使用的实施方式涉及被配置为接收触摸输入的触摸屏显示器68,但是可以向非触摸显示器和/或经由非触摸用户输入设备、比如键区或者鼠标提供输入。就这一点而言,非触摸输入的接收定位可以是指在非触摸显示器上的与应用输入的位置对应的位置(例如指示符、比如鼠标指针的定位),并且输入的移动分量可以是指示符在非触摸显示器上的运动,该运动例如是鼠标在水平表面上的对应运动的结果,而移动分量的方向是指示符跨越非触摸显示器的运动的方向。
响应于确定远程用户界面150被配置为检测在远程用户界面的边界区域120中至少部分地接收的用户输入,可以使装置50提供重复的活跃显示器区域111和重复的边界区域121。以这一方式,在重复的边界区域111中至少部分地接收并且在重复的活跃显示区域121中至少部分地接收的用户输入、比如划动130(图4)可以引起预定操作的执行。
例如参照图6,在一些情况下,远程用户界面150可以被配置为响应于用户输入、比如划动130来接收和执行某些操作,该用户输入包括在边界区域120中至少部分地发起的触摸分量A并且包括在活跃显示区域110中至少部分地接收的移动分量B。划动130可以根据边界区域120的哪个边缘140接收初始触摸分量A和移动分量B的方向而例如是“向内挥动”手势132、“向上挥动”手势136或者“向下挥动”手势138。在其它情况下,远程用户界面150可以被配置为响应于用户输入来接收和执行某些操作,该用户输入包括在活跃显示区域110内至少部分地发起的触摸分量A并且包括在边界区域120中至少部分地接收的移动分量B、比如“向外挥动”手势134。
就这一点而言,“向内挥动”手势132可以引起预定操作的执行、比如从包括第一交互内容的第一屏幕转换到包括第二交互内容的第二屏幕。第一屏幕可以例如是锁定屏幕、比如在图7A中描绘的屏幕。“向内挥动”手势132的接收可以引起从图7A的锁定屏幕转换到如图7B中所示的起始屏幕,用户可以通过选择对应程序图标从该起始屏幕起动多个程序中的任何程序。相似地,“向外挥动”手势134的接收可以引起不同预定操作的执行。例如,如果在用户让特定程序打开和显示于活跃显示区域中(比如如图7C中所示显示用户的联系人的程序)之时接收“向外挥动”手势134,则“向外挥动”手势可以用于关闭程序并且从显示程序转换到显示图7B的起始屏幕。作为附加示例,“向上挥动”手势136可以引起从第一交互内容屏幕、比如图7B的起始屏幕转换到来自特定程序的屏幕、比如图7C的联系人屏幕,并且“向下挥动”手势138可以使某些内容被显示覆盖在先前显示的内容的至少一部分上面、比如使用户的提醒或者约会的列表显示于显示器的至少一部分上从而至少部分遮蔽先前显示的无论任何内容。
因此,如以上指出并且通过示例描述的那样,在边界区域120和/或活跃显示区域110的某些区域中接收用户输入可以引起从代表第一交互内容的屏幕转换到代表第二交互内容的屏幕。如这里所用,术语“交互内容”是指经由显示器68(图2)或者显示器28(图1)向用户呈现的图形(比如使用图标、相片、插图等)信息或者文本信息,用户可以出于特定目的而以特定方式与该信息交互。例如,如在图7A中描绘的示例所示,第一交互内容可以包括作为空闲或者锁定屏幕的一部分而向用户呈现的信息,比如当前时间、星期几、日期和背景图像。第一交互内容可以被配置使得用户仅能以很有限方式、比如通过使用“向内挥动”手势向一侧上移内容来与内容交互以将装置的状态从空闲改变成活跃(以例如访问起始屏幕)。因此,第一交互内容的目的可以是向用户提供某些信息(例如向用户提供时间和日期信息)并且防范比如通过用户与显示器偶然和无意接触来意外录入用户输入。
继续本例,第二交互内容可以包括数据,比如联系人列表或者用户可以起动的程序的列表(例如图7B中所示的起始屏幕)。第二交互内容可以被配置为使得用户可以与内容更完全地交互,比如通过选择用于起动程序的图标、扩展显示的项目以访问细节或者更多信息、修改设备设置等。因此,第二交互内容在这一情况下的目的可以是从用户接收输入并且基于接收的输入来执行某些操作。
因而,在一些情况下,第一交互内容可以包括与第二交互内容不同的信息。第二交互内容可以例如包括与第一交互内容比较的附加信息、比如用于启动用于播放音乐的程序的图标、电池寿命的指示和当前天气的指示等。
备选地或者附加地,第一交互内容可以被配置为允许用户根据第一规则集与第一交互内容交互,并且第二交互内容可以被配置为允许用户根据第二规则集与第二交互内容交互。例如参照图7A的锁定屏幕,第一屏幕可以被配置为使得仅“向内挥动”手势被注册为使第二屏幕被访问和显示的输入。未满足这些标准的其它输入、比如简单触摸、多触摸、夹捏、敲击、按压或者长按压(以及其它输入)不会被识别为输入并且将被装置忽略。相似地,第二屏幕(例如图7B的屏幕)可以被配置为使得仅在触摸屏显示器的某些位置(例如对应于特定程序图标的位置)接收的触摸事件被注册为输入。另外,在接收到输入后执行的操作可以依赖于接收触摸事件的位置(例如打开哪个程序)。因此,在屏幕的例如其中未显示图标的空白区域中的触摸事件可以不使任何操作被执行。
如以上描述和在各图中描绘的那样,交互内容(无论是相同还是不同的交互内容)的特定布置和呈现在这里被描绘为经由在装置的显示器68上向用户显示的“屏幕”而被提供。换而言之,每个屏幕向用户呈现组成相应交互内容的内容元素的汇集。例如在图7A中,显示的时间(10:49)是显示的屏幕的内容元素并且是代表的交互内容的一部分。
虽然以上描述的示例参照从第一交互内容的第一屏幕转换到第二交互内容的第二屏幕,但是在一些情况下,根据用户输入可以访问第二屏幕,该第二屏幕未包含相对于第一屏幕的不同交互内容。例如在活跃显示区域110内完全接收的用户输入可以引起在显示用户的联系人列表的屏幕(比如图7C中所示)与显示特定联系人的细节的屏幕(比如图7D中所示)之间的转换。在这一示例中,该转换将是在显示第一交互内容的第一屏幕到显示与第一交互内容有关的内容的第二屏幕之间,因为来自两个屏幕的内容例如由相同程序(例如联系人应用)生成。
再次转向图5和图6,在如以上描述的装置50确定远程用户界面150被配置为检测在远程用户界面的边界区域120中至少部分地接收的用户输入的情况下,可以使该装置提供重复的活跃显示区域111和重复的边界区域121,从而在重复的边界区域中至少部分地接收并且在重复的活跃显示区域中至少部分地接收的用户输入引起预定操作的执行,从而允许该装置执行与能够由远程用户界面执行的操作相同或者相似的操作。因此,用户输入——包括在重复的边界区域111中至少部分地发起的触摸分量A并且包括在重复的活跃显示区域121中至少部分地接收的移动分量——可以引起预定操作(例如已经经由在远程用户界面150上应用相同用户输入而引起的预定操作)的执行。因而,在一些情况下,预定操作可以包括从包括第一交互内容的第一屏幕转换到包括第二交互内容的第二屏幕,而在其它情况下,预定操作可以包括关闭在重复的活跃显示区域111中显示的程序或者如以上关于远程用户界面150描述的某个其它操作。
如以上描述的那样,在一些实施方式中,远程用户界面150可以被配置为使得活跃显示区域110显示内容,并且边界区域120不显示内容(例如表现为暗淡)。装置50可以类似地被配置为使得重复的活跃显示区域111被配置为显示内容,并且重复的边界区域121被配置为不显示内容、由此模拟远程用户界面150的活跃显示区域110和边界区域120的配置。然而在一些情况下,重复的活跃显示区域111和重复的边界区域121可以被配置为无论远程用户界面150的对应区域的配置如何都至少在某个程度上显示内容。
根据该装置(图2)的显示器68的配置和功能,可以使该装置以多种方式重复远程用户界面150。例如至少一个存储器和计算机程序代码可以被配置为与处理器一起使该装置通过配置(装置50的)现有活跃显示区域的一部分以用作重复的活跃显示区域并且配置现有活跃显示区域的另一部分以用作重复的边界区域121来提供重复的活跃显示区域111。换而言之,如图8A中所示,装置50的现有活跃显示区域115的在面积上比整个现有活跃区域更小的部分可以被配置为用作重复的活跃显示区域111,并且现有活跃显示区域的其余部分(或者其余部分的至少部分)可以被配置为用作重复的边界区域121。
然而在其它情况下,至少一个存储器和计算机程序代码可以被配置为与处理器一起使该装置如图8B中所示那样通过配置现有活跃显示区域115以用作重复的活跃显示区域来提供重复的活跃显示区域111并且提供至少部分包围重复的活跃显示区域的重复的边界区域121。因此,在图8B的示例中,该装置的显示器68的未作为重复的活跃显示区域115而使用的区域被配置为用作重复的边界区域121。
图9图示根据本发明的示例实施方式的系统、方法和计算机程序产品的流程图。将理解,流程图的每个块和在流程图中的块组合可以由与执行包括一个或者多个计算机程序指令的软件关联的各种单元、比如硬件、固件、处理器、电路装置和/或其它设备实施。例如以上描述的过程中的一个或者多个过程可以由计算机程序指令体现。就这一点而言,体现以上描述的过程的计算机程序指令可以由体现本发明的一个实施方式的装置的存储器设备存储并且由在该装置中的处理器执行。如将认识的那样,任何这样的计算机程序产品可以被加载到计算机或者其它可编程装置(例如硬件)上以产生机器,从而所得计算机或者其它可编程装置实施在流程图的块中指定的功能。也可以在计算机可读存储器中存储这些计算机程序指令,该计算机可读存储器可以指引计算机或者其它可编程装置以特定方式工作,从而在计算机可读存储器中存储的指令产生制造品,执行该制造品实施在流程图的块中指定的功能。计算机程序指令也可以被加载到计算机或者其它可编程装置上以使系列操作在计算机或者其它可编程装置上被执行以产生计算机实施的过程,从而在计算机或者其它可编程装置上执行的指令提供用于实施在流程图的块中指定的功能的操作。
因而,流程图的块支持用于执行指定的功能的装置的组合、用于执行指定的功能的操作的组合和用于执行指定的功能的程序指令装置。也将理解,流程图的一个或者多个块和在流程图中的块的组合可以由执行指定的功能的基于专用硬件的计算机系统实施或者由专用硬件与计算机指令的组合实施。
就这一点而言,如图9中所示的用于提供重复的用户界面的方法的一个实施方式包括在块200建立与远程用户界面的通信链路、在块210确定远程用户界面是否被配置为检测在远程用户界面的活跃显示区域以外的边界区域中至少部分地接收的用户输入并且在块220响应于确定远程用户界面被配置为检测在远程用户界面的边界区域中至少部分地接收的用户输入来提供重复的活跃显示区域和重复的边界区域。如以上描述的那样,在重复的边界区域中至少部分地接收并且在重复的活跃显示区域中至少部分地接收的用户输入可以引起预定操作的执行。
在一些情况下,提供重复的活跃显示区域可以包括在块230配置现有活跃显示区域的一部分以用作重复的活跃显示区域并且配置现有活跃显示区域的另一部分以用作重复的边界区域。备选地,提供重复的活跃显示区域可以包括在块240配置现有活跃显示区域以用作重复的活跃显示区域并且提供至少部分地包围重复的活跃显示区域的重复的边界区域。
如以上指出的那样,重复的活跃显示区域可以被配置为显示内容,并且重复的边界区域可以被配置为不显示内容。另外,用户输入——包括在重复的边界区域中至少部分地发起的触摸分量并且包括在重复的活跃显示区域中至少部分地接收的移动分量,可以引起预定操作的执行。就这一点而言,预定操作可以包括从包括第一交互内容的第一屏幕转换到包括第二交互内容的第二屏幕,或者预定操作可以包括关闭在重复的活跃显示区域中显示的程序以及如以上描述的许多其它类型的操作。
在一些实施方式中,可以如以下描述的那样修改或者进一步扩充操作中的某些操作。另外,在一些实施方式中,可以包括附加可选操作,在图9中用虚线示出这些附加可选操作的一些示例。可以按照任何顺序和在任何组合中执行对以上操作的修改、添加或者扩充。
在一个示例实施方式中,一种用于执行以上图9的方法的装置可以包括被配置为执行以上描述的操作(200-240)中的一些或者每个操作的处理器(例如图2的处理器70)。该处理器可以例如被配置为通过执行硬件实施的逻辑功能、执行存储的指令或者执行算法来执行操作(200-240),这些逻辑功能、指令或者算法用于执行操作中的每个操作。备选地,该装置可以包括用于执行以上描述的操作中的每个操作的单元。就这一点而言,根据一个示例实施方式,用于执行操作200的至少一部分的单元的示例可以例如包括通信接口74、处理器70、存储器设备76和/或用于执行指令或者执行算法的设备或者电路,这些指令或者该算法用于如以上描述的那样处理信息。用于执行操作210的单元的示例可以例如包括处理器70、存储器设备76和/或用于执行指令或者执行算法的设备或者电路,这些指令或者该算法用于如以上描述的那样处理信息。用于执行操作220、230和240的单元的示例可以例如包括用户界面收发器72、处理器70、存储器设备76和/或用于执行指令或者执行算法的设备或者电路,这些指令或者该算法用于如以上描述的那样处理信息。
从在前文描述和关联附图中呈现的教导中受益的、这里阐述的本发明涉及的领域中的技术人员将想到发明的许多修改和其它实施方式。因此将理解本发明将不限于公开的具体实施方式并且修改和其它实施方式旨在于被包含于所附权利要求的范围内。另外,虽然前文描述和关联附图在单元和/或功能的某些示例组合的情境中描述示例实施方式,但是应当认识备选实施方式可以提供单元和/或功能的不同组合而未脱离所附权利要求的范围。就这一点而言,例如也如可以在所附权利要求中的一些权利要求阐述的那样设想与以上明确地描述的单元和/或功能组合不同的单元和/或功能组合。虽然这里运用具体术语,但是仅在通用和描述意义上而并非出于限制的目的来使用它们。

Claims (20)

1.一种装置,包括至少一个处理器和包括计算机程序代码的至少一个存储器,所述至少一个存储器和所述计算机程序代码被配置为与所述处理器一起,使所述装置至少:
建立与远程用户界面的通信链路;
确定所述远程用户界面是否被配置为检测在所述远程用户界面的活跃显示区域以外的边界区域中至少部分地接收的用户输入;以及
响应于确定所述远程用户界面被配置为检测在所述远程用户界面的所述边界区域中至少部分地接收的用户输入来提供重复的活跃显示区域和重复的边界区域,
其中在所述重复的边界区域中至少部分地接收的并且在所述重复的活跃显示区域中至少部分地接收的用户输入引起预定操作的执行。
2.根据权利要求1所述的装置,其中所述至少一个存储器和所述计算机程序代码还被配置为与所述处理器一起,使所述装置通过配置现有活跃显示区域的一部分以用作所述重复的活跃显示区域并且通过配置所述现有活跃显示区域的另一部分以用作所述重复的边界区域来提供所述重复的活跃显示区域。
3.根据权利要求1所述的装置,其中所述至少一个存储器和所述计算机程序代码还被配置为与所述处理器一起,使所述装置通过配置现有活跃显示区域以用作所述重复的活跃显示区域并且提供至少部分地包围所述重复的活跃显示区域的所述重复的边界区域来提供所述重复的活跃显示区域。
4.根据权利要求1所述的装置,其中所述重复的活跃显示区域被配置为显示内容,并且所述重复的边界区域被配置为不显示内容。
5.根据权利要求1所述的装置,其中包括在所述重复的边界区域中至少部分地发起的触摸分量并且包括在所述重复的活跃显示区域中至少部分地接收的移动分量的用户输入引起所述预定操作的执行。
6.根据权利要求5所述的装置,其中所述预定操作包括从第一屏幕到第二屏幕的转换,所述第一屏幕包括第一交互内容,所述第二屏幕包括第二交互内容。
7.根据权利要求5所述的装置,其中所述预定操作包括关闭在所述重复的活跃显示区域中显示的程序。
8.一种方法,包括:
建立与远程用户界面的通信链路;
确定所述远程用户界面是否被配置为检测在所述远程用户界面的活跃显示区域以外的边界区域中至少部分地接收的用户输入;以及
响应于确定所述远程用户界面被配置为检测在所述远程用户界面的所述边界区域中至少部分地接收的用户输入来提供重复的活跃显示区域和重复的边界区域,
其中在所述重复的边界区域中至少部分地接收的并且在所述重复的活跃显示区域中至少部分地接收的用户输入引起预定操作的执行。
9.根据权利要求8所述的方法,其中提供所述重复的活跃显示区域包括配置现有活跃显示区域的一部分以用作所述重复的活跃显示区域并且配置所述现有活跃显示区域的另一部分以用作所述重复的边界区域。
10.根据权利要求8所述的方法,其中提供所述重复的活跃显示区域包括配置现有活跃显示区域以用作所述重复的活跃显示区域并且提供至少部分地包围所述重复的活跃显示区域的所述重复的边界区域。
11.根据权利要求8所述的方法,其中所述重复的活跃显示区域被配置为显示内容,并且所述重复的边界区域被配置为不显示内容。
12.根据权利要求8所述的方法,其中包括在所述重复的边界区域中至少部分地发起的触摸分量并且包括在所述重复的活跃显示区域中至少部分地接收的移动分量的用户输入引起所述预定操作的执行。
13.根据权利要求12所述的方法,其中所述预定操作包括从第一屏幕到第二屏幕的转换,所述第一屏幕包括第一交互内容,所述第二屏幕包括第二交互内容。
14.根据权利要求12所述的方法,其中所述预定操作包括关闭在所述重复的活跃显示区域中显示的程序。
15.一种计算机程序产品,包括至少一个计算机可读存储介质,所述至少一个计算机可读存储介质具有在其中存储的计算机可执行程序代码部分,所述计算机可执行程序代码部分包括用于以下的程序代码指令:
建立与远程用户界面的通信链路;
确定所述远程用户界面是否被配置为检测在所述远程用户界面的活跃显示区域以外的边界区域中至少部分地接收的用户输入;以及
响应于确定所述远程用户界面被配置为检测在所述远程用户界面的所述边界区域中至少部分地接收的用户输入来提供重复的活跃显示区域和重复的边界区域,
其中在所述重复的边界区域中至少部分地接收的并且在所述重复的活跃显示区域中至少部分地接收的用户输入引起预定操作的执行。
16.根据权利要求15所述的计算机程序产品,其中提供所述重复的活跃显示区域包括配置现有活跃显示区域的一部分以用作所述重复的活跃显示区域并且配置所述现有活跃显示区域的另一部分以用作所述重复的边界区域。
17.根据权利要求15所述的计算机程序产品,其中提供所述重复的活跃显示区域包括配置现有活跃显示区域以用作所述重复的活跃显示区域并且提供至少部分地包围所述重复的活跃显示区域的所述重复的边界区域。
18.根据权利要求15所述的计算机程序产品,其中所述重复的活跃显示区域被配置为显示内容,并且所述重复的边界区域被配置为不显示内容。
19.根据权利要求15所述的计算机程序产品,其中包括在所述重复的边界区域中至少部分地发起的触摸分量并且包括在所述重复的活跃显示区域中至少部分地接收的移动分量的用户输入引起所述预定操作的执行。
20.根据权利要求18所述的计算机程序产品,其中所述预定操作包括从第一屏幕到第二屏幕的转换或者关闭在所述重复的活跃显示区域中显示的程序,所述第一屏幕包括第一交互内容,所述第二屏幕包括第二交互内容。
CN201380018976.5A 2012-02-10 2013-01-28 用于提供远程用户交互的装置和方法 Active CN104205047B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/370,992 2012-02-10
US13/370,992 US9164779B2 (en) 2012-02-10 2012-02-10 Apparatus and method for providing for remote user interaction
PCT/FI2013/050087 WO2013117804A1 (en) 2012-02-10 2013-01-28 Apparatus and method for providing for remote user interaction

Publications (2)

Publication Number Publication Date
CN104205047A true CN104205047A (zh) 2014-12-10
CN104205047B CN104205047B (zh) 2017-04-19

Family

ID=47740989

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380018976.5A Active CN104205047B (zh) 2012-02-10 2013-01-28 用于提供远程用户交互的装置和方法

Country Status (5)

Country Link
US (1) US9164779B2 (zh)
EP (1) EP2812796B1 (zh)
JP (1) JP5923184B2 (zh)
CN (1) CN104205047B (zh)
WO (1) WO2013117804A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107835970A (zh) * 2015-06-02 2018-03-23 大众汽车有限公司 行进器、用户接口和用于在与用户接口相互作用时辅助使用者的方法
CN110337798A (zh) * 2017-02-28 2019-10-15 安玛尔·拉萨姆 与远程装置进行自适应交互的方法和设备

Families Citing this family (71)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101666831B1 (ko) 2008-11-26 2016-10-17 캘거리 싸이언티픽 인코포레이티드 애플리케이션 프로그램의 상태에 대한 원격 액세스를 제공하기 위한 방법 및 시스템
US10055105B2 (en) 2009-02-03 2018-08-21 Calgary Scientific Inc. Method and system for enabling interaction with a plurality of applications using a single user interface
US9823831B2 (en) 2010-04-07 2017-11-21 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
US20110252357A1 (en) 2010-04-07 2011-10-13 Imran Chaudhri Device, Method, and Graphical User Interface for Managing Concurrently Open Software Applications
US9741084B2 (en) 2011-01-04 2017-08-22 Calgary Scientific Inc. Method and system for providing remote access to data for display on a mobile device
CA2734860A1 (en) 2011-03-21 2012-09-21 Calgary Scientific Inc. Method and system for providing a state model of an application program
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
SG10201606764XA (en) * 2011-08-15 2016-10-28 Calgary Scient Inc Non-invasive remote access to an application program
CN103959708B (zh) 2011-09-30 2017-10-17 卡尔加里科学公司 包括用于协作远程应用共享和注释的交互式数字表层的非耦合应用扩展
CA2856658A1 (en) 2011-11-23 2013-05-30 Calgary Scientific Inc. Methods and systems for collaborative remote application sharing and conferencing
US20130212517A1 (en) * 2012-02-13 2013-08-15 Lenovo (Beijing) Co., Ltd. Electronic Device and Display Processing Method
US9354748B2 (en) 2012-02-13 2016-05-31 Microsoft Technology Licensing, Llc Optical stylus interaction
US9075566B2 (en) 2012-03-02 2015-07-07 Microsoft Technoogy Licensing, LLC Flexible hinge spine
US9064654B2 (en) 2012-03-02 2015-06-23 Microsoft Technology Licensing, Llc Method of manufacturing an input device
US9426905B2 (en) 2012-03-02 2016-08-23 Microsoft Technology Licensing, Llc Connection device for computing devices
USRE48963E1 (en) 2012-03-02 2022-03-08 Microsoft Technology Licensing, Llc Connection device for computing devices
US9298236B2 (en) 2012-03-02 2016-03-29 Microsoft Technology Licensing, Llc Multi-stage power adapter configured to provide a first power level upon initial connection of the power adapter to the host device and a second power level thereafter upon notification from the host device to the power adapter
US9134807B2 (en) 2012-03-02 2015-09-15 Microsoft Technology Licensing, Llc Pressure sensitive key normalization
US9360893B2 (en) 2012-03-02 2016-06-07 Microsoft Technology Licensing, Llc Input device writing surface
US9870066B2 (en) 2012-03-02 2018-01-16 Microsoft Technology Licensing, Llc Method of manufacturing an input device
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
CN104487928B (zh) 2012-05-09 2018-07-06 苹果公司 用于响应于手势而在显示状态之间进行过渡的设备、方法和图形用户界面
WO2013169846A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying additional information in response to a user contact
CN104471521B (zh) 2012-05-09 2018-10-23 苹果公司 用于针对改变用户界面对象的激活状态来提供反馈的设备、方法和图形用户界面
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
EP3096218B1 (en) 2012-05-09 2018-12-26 Apple Inc. Device, method, and graphical user interface for selecting user interface objects
EP3185116B1 (en) 2012-05-09 2019-09-11 Apple Inc. Device, method and graphical user interface for providing tactile feedback for operations performed in a user interface
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
JP2015519656A (ja) 2012-05-09 2015-07-09 アップル インコーポレイテッド ユーザインタフェースオブジェクトを移動し、ドロップするためのデバイス、方法及びグラフィカルユーザインタフェース
US20130300590A1 (en) 2012-05-14 2013-11-14 Paul Henry Dietz Audio Feedback
US10031556B2 (en) 2012-06-08 2018-07-24 Microsoft Technology Licensing, Llc User experience adaptation
US9256089B2 (en) 2012-06-15 2016-02-09 Microsoft Technology Licensing, Llc Object-detecting backlight unit
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
KR102000253B1 (ko) 2012-12-29 2019-07-16 애플 인크. 사용자 인터페이스 계층을 내비게이션하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
AU2013368441B2 (en) 2012-12-29 2016-04-14 Apple Inc. Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture
CN107831991B (zh) 2012-12-29 2020-11-27 苹果公司 用于确定是滚动还是选择内容的设备、方法和图形用户界面
EP2939098B1 (en) 2012-12-29 2018-10-10 Apple Inc. Device, method, and graphical user interface for transitioning between touch input to display output relationships
CN105144057B (zh) 2012-12-29 2019-05-17 苹果公司 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
US9477404B2 (en) 2013-03-15 2016-10-25 Apple Inc. Device, method, and graphical user interface for managing concurrently open software applications
US9304549B2 (en) 2013-03-28 2016-04-05 Microsoft Technology Licensing, Llc Hinge mechanism for rotatable component attachment
KR101641091B1 (ko) * 2013-09-23 2016-07-20 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 모션 인식방법
CA2931762C (en) 2013-11-29 2020-09-22 Calgary Scientific Inc. Method for providing a connection of a client to an unmanaged service in a client-server remote access system
KR20160027775A (ko) * 2014-09-02 2016-03-10 삼성전자주식회사 터치 입력 처리 방법 및 그 장치
KR20160099397A (ko) * 2015-02-12 2016-08-22 삼성전자주식회사 제한된 실행 환경에서 결제 기능을 수행하기 위한 방법 및 장치
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US10152208B2 (en) 2015-04-01 2018-12-11 Apple Inc. Devices and methods for processing touch inputs based on their intensities
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US11423369B2 (en) * 2016-12-20 2022-08-23 BillGO, Inc. Customer-merchant intermediary
US10203866B2 (en) * 2017-05-16 2019-02-12 Apple Inc. Devices, methods, and graphical user interfaces for navigating between user interfaces and interacting with control objects
US20190188660A1 (en) * 2017-12-19 2019-06-20 Mastercard International Incorporated Payment apparatus and method for enabling a payment device for remotely accessing a transaction
US11194468B2 (en) 2020-05-11 2021-12-07 Aron Ezra Systems and methods for non-contacting interaction with user terminals
CN117093165A (zh) * 2020-12-24 2023-11-21 华为技术有限公司 设备控制方法和终端设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100269039A1 (en) * 2009-04-15 2010-10-21 Wyse Technology Inc. Custom pointer features for touch-screen on remote client devices
CN102238281A (zh) * 2010-05-06 2011-11-09 Lg电子株式会社 移动终端和控制移动终端的方法
CN102667885A (zh) * 2009-09-30 2012-09-12 法国电信 通过UPnP服务远程控制的方法和设备
CN102918490A (zh) * 2010-04-01 2013-02-06 思杰系统有限公司 与在平板计算装置的虚拟桌面内显示的远程应用交互

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030156131A1 (en) * 2002-02-21 2003-08-21 Samir Khazaka Method and apparatus for emulating a mobile device
JP2006146556A (ja) * 2004-11-19 2006-06-08 Nintendo Co Ltd 画像表示処理プログラムおよび画像表示処理装置
US7889175B2 (en) 2007-06-28 2011-02-15 Panasonic Corporation Touchpad-enabled remote controller and user interaction methods
US9261979B2 (en) 2007-08-20 2016-02-16 Qualcomm Incorporated Gesture-based mobile interaction
JP4908360B2 (ja) * 2007-09-19 2012-04-04 株式会社東芝 携帯情報端末連係システムおよび連係処理プログラム並びに連係処理装置
US20090153289A1 (en) 2007-12-12 2009-06-18 Eric James Hope Handheld electronic devices with bimodal remote control functionality
US9311115B2 (en) 2008-05-13 2016-04-12 Apple Inc. Pushing a graphical user interface to a remote device with display rules provided by the remote device
DE602008006738D1 (de) * 2008-10-29 2011-06-16 Giga Byte Comm Inc Verfahren und Vorrichtung zum Umschalten eines Touchscreens einer tragbaren elektronischen Vorrichtung
JP5146396B2 (ja) * 2009-04-21 2013-02-20 三菱電機株式会社 遠隔操作システム
US8239785B2 (en) 2010-01-27 2012-08-07 Microsoft Corporation Edge gestures

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100269039A1 (en) * 2009-04-15 2010-10-21 Wyse Technology Inc. Custom pointer features for touch-screen on remote client devices
CN102667885A (zh) * 2009-09-30 2012-09-12 法国电信 通过UPnP服务远程控制的方法和设备
CN102918490A (zh) * 2010-04-01 2013-02-06 思杰系统有限公司 与在平板计算装置的虚拟桌面内显示的远程应用交互
CN102238281A (zh) * 2010-05-06 2011-11-09 Lg电子株式会社 移动终端和控制移动终端的方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107835970A (zh) * 2015-06-02 2018-03-23 大众汽车有限公司 行进器、用户接口和用于在与用户接口相互作用时辅助使用者的方法
CN110337798A (zh) * 2017-02-28 2019-10-15 安玛尔·拉萨姆 与远程装置进行自适应交互的方法和设备

Also Published As

Publication number Publication date
JP2015508203A (ja) 2015-03-16
EP2812796A1 (en) 2014-12-17
US9164779B2 (en) 2015-10-20
WO2013117804A1 (en) 2013-08-15
EP2812796B1 (en) 2018-08-29
JP5923184B2 (ja) 2016-05-24
US20130212483A1 (en) 2013-08-15
CN104205047B (zh) 2017-04-19

Similar Documents

Publication Publication Date Title
CN104205047A (zh) 用于提供远程用户交互的装置和方法
US10382606B2 (en) Mobile terminal and method for controlling the same
CN103339592B (zh) 用于提供基于触摸手势启动的多阶段设备转换机制的方法和装置
RU2582854C2 (ru) Способ и устройство для обеспечения быстрого доступа к функциям устройства
CN109062479B (zh) 分屏应用切换方法、装置、存储介质和电子设备
CN103649892B (zh) 用于提供从锁定的屏幕快速访问媒体功能的方法和装置
US20140152585A1 (en) Scroll jump interface for touchscreen input/output device
CN104049744B (zh) 用于操作具有盖子的电子装置的方法和设备
US8893054B2 (en) Devices, systems, and methods for conveying gesture commands
EP2817704B1 (en) Apparatus and method for determining the position of a user input
CN105630327B (zh) 便携式电子设备和控制可选元素的显示的方法
US20130120271A1 (en) Data input method and apparatus for mobile terminal having touchscreen
WO2013128074A1 (en) Method and apparatus for determining recipients of a sharing operation based on an indication associated with a tangible object
CN102326139A (zh) 用于使得显示光标的方法和装置
US9229615B2 (en) Method and apparatus for displaying additional information items
CN104461348B (zh) 信息选取方法及装置
EP3113007B1 (en) Electronic device for displaying keypad and keypad displaying method thereof
CN106708382A (zh) 一种终端快速调用控制装置及其方法
CN107357515A (zh) 多应用程序画面同时呈现的方法及其系统
CN110865765A (zh) 终端及地图控制方法
CN113741708A (zh) 一种输入方法及电子设备
US10001906B2 (en) Apparatus and method for providing a visual indication of an operation
KR20130038753A (ko) 이동 단말기 및 그것의 사용자 인터페이스 제공 방법
CN109189515A (zh) 一种应用启动方法、终端及计算机可读存储介质
EP2741194A1 (en) Scroll jump interface for touchscreen input/output device

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20160118

Address after: Espoo, Finland

Applicant after: Technology Co., Ltd. of Nokia

Address before: Espoo, Finland

Applicant before: Nokia Oyj

GR01 Patent grant
GR01 Patent grant