CN104094199A - 输入映射区域 - Google Patents

输入映射区域 Download PDF

Info

Publication number
CN104094199A
CN104094199A CN201280055852.XA CN201280055852A CN104094199A CN 104094199 A CN104094199 A CN 104094199A CN 201280055852 A CN201280055852 A CN 201280055852A CN 104094199 A CN104094199 A CN 104094199A
Authority
CN
China
Prior art keywords
input
application
touch screen
client
calculation element
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201280055852.XA
Other languages
English (en)
Inventor
A.J.奥弗顿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Amazon Technologies Inc
Original Assignee
Amazon Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Amazon Technologies Inc filed Critical Amazon Technologies Inc
Publication of CN104094199A publication Critical patent/CN104094199A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M11/00Telephonic communication systems specially adapted for combination with other electrical systems
    • H04M11/02Telephonic communication systems specially adapted for combination with other electrical systems with bell or annunciator systems
    • H04M11/025Door telephones

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

所公开的是用于实施触摸感应装置上的各种形式的用户动作的各种实施方案。在触摸屏幕显示装置上产生的触摸输入被转换成图形用户界面事件。至少部分基于来自一个或多个客户端的输入将一个或多个触摸输入事件提供给所述媒体应用。从所述客户端接收的所述触摸输入被映射至对应的用户动作。所述媒体应用执行所述用户动作、获得所述输出数据并且发送所述应用流至所述客户端中的每个。

Description

输入映射区域
本申请要求2011年11月14日提交的标题为″INPUT MAPPINGREGIONS″的分配的序列号13/295,133的共同待决的美国非临时申请的优先权,所述非临时申请的整体在此通过引用并入本文。
背景
与浏览器或移动应用用户界面的交互可包括使用诸如例如键盘、鼠标、轨迹球、操纵杆、触摸屏幕或其它输入装置的多种输入装置的输入。输入机制在能够被传递的事件的数量和类型中变化。另外,可用的输入装置的范围正随着技术的发展而扩展。
附图简述
参考下列的附图可以更好地理解本公开的许多方面。在附图中的部件不一定按照比例绘制,而是将重点放在清楚地说明本公开的原理。此外,在附图中,类似的附图标记标示全部几个视图中的对应的零件。
图1是根据本公开的各种实施方案的网络化环境的图。
图2是根据本公开的各种实施方案的由图1的网络化环境中的客户端呈现的用户界面的实例的图。
图3是根据本公开的各种实施方案的说明作为在图1的网络化环境中的计算装置中执行的输入映射应用的部分实施的功能性的一个实例的流程图。
图4是根据本公开的各种实施方案的提供在图1的网络化环境中采用的计算装置的一个实例说明的示意框图。
具体实施方式
本公开涉及在触摸感应客户端装置上实施多种用户动作用于媒体应用。本公开的各种实施方案促进从触摸感应客户端装置接收的触摸事件至可由媒体应用识别的对应的输入的翻译。例如,在一些实施方案中,媒体应用可由诸如服务器的计算装置执行。媒体应用产生最终以在触摸感应客户端装置上的用户界面的形式呈现的视频传递。来自客户端装置的输入可由输入映射应用通过网络接收并且随后被翻译成由媒体应用识别的对应的输入。媒体应用执行合适的用户动作并且在给视频传递的输出中做出合适的改变作为响应,所述视频传递通过网络被传递给触摸感应客户端装置。在下列论述中,提供了系统及其部件的一般描述,接着是所述系统及其部件的操作的论述。
参考图1,示出了根据各种实施方案的网络化环境100。网络化环境100包括计算装置103、一个或多个客户端装置106和网络109。网络109包括,例如互联网、内联网、外联网、广域网(WAN)、局域网(LAN)、有线网络、无线网络或其它合适的网络等,或者两个或多个此类网络的任何组合。
计算装置103可包括,例如服务器计算机或提供计算能力的任何其它系统。或者,可采用布置在例如一个或多个服务器组或计算机组或其它布置中的多个计算装置103。例如,多个计算装置103一起可包括云计算资源、网格计算资源和/或任何其它分布式的计算布置。此类计算装置103可位于单个安装中或可分布在许多不同的地理位置中。为了简便的目的,计算装置103在本文中指代单数。即使计算装置指代单数,要理解的是可在如上文所述的各种布置中采用多个计算装置103。
各种应用和/或其它功能性可根据各种实施方案在计算装置103中执行。此外,各种数据存储在计算装置103可访问的数据存储113中。可以了解的是数据存储113可表示多个数据存储113。存储在数据存储113中的数据,例如,与下文所述的各种应用和/或功能实体的操作关联。
在计算装置103上执行的部件,例如,包括媒体应用116、输入映射应用119和没有在本文中详细论述的其它应用、服务、过程、系统、引擎或功能性。媒体应用116被执行以提供或流式传送由应用产生的视频和/或其它媒体给可包括例如触摸屏幕显示装置146的客户端106。为此,媒体应用116可产生各种流或除此之外的所传递的内容,诸如例如游戏、模拟、地图、电影、视频和/或其它多媒体文件。
媒体应用116可通过各种协议,诸如例如超文本传输协议(HTTP)、简单对象访问协议(SOAP)、实时传输协议(RTP)、实时流式传送协议(RTSP)、实时消息传送协议(RTMP)、用户数据报协议(UDP)、传输控制协议(TCP)和/或用于通过网络109通信数据的其它协议,与客户端106通信。输入映射应用119被执行以促进从客户端106接受各种用户输入,其包括例如悬停、选择、滚动、缩放和/或其它操作。
存储在数据存储113中的数据包括例如触摸屏幕模型123、用户账户126和可能地其它数据。触摸屏幕模型123中的每个包括与对应的移动装置关联的各种数据,所述数据包括例如技术规格129、输入映射区域133和/或其它信息。另外,与触摸屏幕模型123中的每个关联的技术规格129可包括各种数据,其包括尺寸、大小、结构、形状、响应时间和/或其它数据。输入映射区域133被限定在触摸屏幕显示装置146中,在媒体应用116中的特定功能被分配至所述输入映射区域。发生在此类区域中的触摸事件被翻译成由媒体应用116识别的对应的输入。触摸事件表示与触摸屏幕显示装置146接触的点以及那些点相对于触摸屏幕显示装置146的改变。触摸事件可包括例如轻敲事件、和拖动事件、收缩(pinch)事件、鼠标上移事件、鼠标下移事件、鼠标移动事件和/或与触摸屏幕显示装置146接触的其它点。由媒体应用116识别的输入可包括例如将要描述的滚动命令、悬停命令、缩放命令或其它命令。
每个用户账户126包括与使用客户端106的用户关联的各种数据以与媒体应用116交互。每个用户账户126可包括用户信息136,诸如用户名、密码、安全凭证、授权的应用和/或其它数据。客制化数据139包括由使用客户端106的用户做出的规定输入映射区域133的默认版本的用户客制化或替代的设置。另外,客制化数据139可包括用户的查看环境的其它各种方面。当使用客户端106的用户客制化输入映射区域133时,计算装置103将限定输入映射区域133的客制化版本的客制化数据139保持在数据存储113中用于如同在客户端106上所呈现的与媒体应用116交互。客制化数据139可对应于与通常由媒体应用116保存的输入映射区域133关联的数据或可对应于可在任何时间重新开始的媒体应用116的记忆图像。
客户端106代表可耦接至网络109的多个客户端装置。客户端106可包括例如诸如计算机系统的基于处理器的系统。此类计算机系统可以台式计算机、膝上型计算机、个人数字助理、蜂窝电话、音乐播放器、联网板(web pad)、平板计算机系统、游戏控制台、触摸屏幕监视器、平板计算机、智能电话或有类似能力的其它装置的形式而实施。
客户端106可包括触摸屏幕显示装置146并且可包括一个或多个其它输入装置。此类输入装置可包括例如诸如键盘、鼠标、操纵杆、加速计、光笔、游戏控制器、触摸板、触摸杆、按钮、光学传感器、麦克风、网络摄像头和/或可以提供用户输入的任何其它装置的装置。
客户端106可被配置成执行各种应用,诸如客户端侧应用143和/或其它应用。客户端侧应用143被执行以允许用户开始、参与并且除此之外与在计算装置103中执行的媒体应用116交互。为此,客户端侧应用143被配置成接收由用户通过触摸屏幕显示装置146和/或其它输入装置提供的输入并且通过网络109发送该输入至计算装置103作为输入数据。客户端侧应用143还被配置成通过网络109从计算装置103获得输出视频、音频和/或其它数据并且在触摸屏幕显示装置146上呈现媒体应用116的视图。为此,客户端侧应用143可包括一个或多个视频和音频播放器以播放由媒体应用116产生的媒体流。在一个实施方案中,客户端侧应用143包括在浏览器应用之内的插件程序。例如,客户端侧应用143可在客户端106中执行以访问和呈现诸如网页的网络页面或由计算装置103和/或其它服务器提供的其它网络内容。为此,客户端侧应用143在触摸屏幕显示装置146上以用户界面149的形式呈现流式传送的或用其它方式传递的内容。客户端106可被配置成执行超出客户端侧应用143的应用,诸如例如浏览器应用、邮件应用、即时消息应用和/或其它应用。
接下来,提供了网络化环境100的各种部件的操作的一般描述。首先,在客户端106的用户发送请求至计算装置103以开始媒体应用116。计算装置103响应于合适的用户输入来执行媒体应用116。在第一次访问时,媒体应用116可能查询客户端106以便确定客户端106的触摸屏幕模型123的类型。在一个实施方案中,作为初始设置,媒体应用116可基于触摸屏幕模型123的类型确定用于在客户端106上的各种输入的输入映射区域133。在另一个实施方案中,作为初始设置,媒体应用116可基于媒体应用116的类型确定用于在客户端106上的各种输入的输入映射区域133。输入映射区域133可基于不同类型的应用、应用的级别、不同类型的客户端、不同级别的客户端和/或其它考虑来变化。
另外,如果还没有建立用户账户126,那么媒体应用116可通过提供用于建立用户账户126的一个或多个用户界面149来促进用户账户126的创建。例如,媒体应用116可提示用户指示用于用户账户126的名称、用于用户账户126的密码和/或用于建立用户账户126的任何其它参数或用户信息136。在另一个实施方案中,如果使用客户端106的用户希望客制化输入映射区域133,那么媒体应用116有助于与输入映射区域133关联的客制化数据139的说明。因此,媒体应用116可基于此类客制化来调整一个或多个输入映射区域133的区域,其中此类改变被存储为客制化数据139。
在一个实施方案中,使用客户端106的用户使用手指、触控笔和/或其它装置触摸所述触摸屏幕显示装置146。对应于触摸事件的坐标输入由客户端侧应用143产生并且发送至输入映射应用119。输入映射应用119确定触摸事件是否发生在输入映射区域133中的一个之内。当输入一股脑蛇应用119确定触摸事件发生在输入映射区域133中的一个之内时,输入映射应用119将客户端侧应用149中接收的触摸事件翻译成由媒体应用识别的对应的输入,诸如例如悬停、选择、滚动、缩放和/或其它动作。然后,输入映射应用119发送对应的输入至媒体应用116。
媒体应用116进行合适的用户动作并且修改在视频传递中的图形输出。媒体应用119通过网络109不断地传递视频传输至客户端侧应用143作为输出数据。最终,由客户端106的用户进行的触摸事件的效果可在客户端侧应用143中反映作为对应的用户动作诸如例如悬停、选择、滚动、缩放和/或其它动作。此外,可将在客户端106产生的触摸事件映射为由另一个类型的输入装置产生的其它类型的输入。例如,收缩手势对应于两个手指在触摸屏幕上一起移动用于启用如同滚动轮缩放动作一样的由媒体应哟给你116识别的缩放。
如非限制性实例的,当与滚动动作相关的触摸事件在输入一个蛇区域133中的一个中被接收时,输入映射应用119映射触摸事件至滚动输入并且发送滚动输入至媒体应用116。媒体应用116以与相应的输入映射区域133关联的预定的方向滚动视频传递的视图。滚动视频传递由媒体应用116通过网络109传递至客户端106作为输出数据。客户端侧应用143获得输出数据并且呈现滚动视频传递的视图在触摸屏幕显示装置146上。
接下来参考图2,其示出客户端106的一个实例,在所述客户端106上由客户端侧应用143(图1)呈现用户界面149。用户界面149呈现在网络化环境100(图1)中的客户端106的触摸屏幕显示装置146上。具体来说,图2描绘实施用户界面149的视频传递的一个实例,所述用户界面149作为由媒体应用116(图1)产生的映射而描绘并且被编码成视频传递、通过网络109(图1)发送并且由在触摸屏幕显示装置146上的客户端侧应用143呈现用于显示。
虽然映射的实例在图2中使用,但是要理解的是可在本公开的实施方案中采用其它类型的用户界面149。如在图2中所示出的,在用户界面149中的各种元件的布局仅仅作为实例提供,并且不意欲限制。其它类型的用户界面149可被采用,诸如例如游戏、模拟、文件查看器、电影、视频和/或其它类型的用户界面149。如所示出的,视图描绘用户界面149、多个输入映射区域133、输入映射区域133的外边界203和输入映射区域133的内边界206。
输入映射区域133与触摸屏幕显示装置146的坐标平面相关。输入映射区域133可包括按钮激活区域、选择区域、滚动区域和/或与一个或多个用户动作关联的其它区域。在一个实施方案中,输入映射区域133中的每个具有与触摸屏幕显示装置146的查看区域的边缘对齐的外边界203,其中此类输入映射区域133用于产生滚动输入。在一个实施方案中,滚动动作的速度被确定与相对于在输入映射区域133的相应的一个的外边界203与内边界206之间的总距离的在外边界203与触摸事件的坐标输入之间的距离成比例。在另一个实施方案中,滚动动作的速度被确定与相对于在输入映射区域133的相应的一个的外边界203与内边界206之间的总距离的在内边界206与触摸事件的坐标输入之间的距离成比例。
图形部件,诸如输入映射区域133,包括在图2中示出的信息仅仅是可用于完成所提及的具体功能的各种类型的特征的实例。因为客户端106)从媒体应用116的硬件要求中去耦接,所以媒体应用116可由多种客户端106(能够通过网络109用可接受的带宽和潜伏期传递视频)使用。根据本公开的各种实施方案,与客户端106关联的视图被呈现在触摸屏幕显示装置146上。
在另一个实施方案中,图2可被视作根据本公开的各种实施方案描绘客户端侧应用143的显示输出。媒体应用116产生视频传递并且通过网络109发送视频传递至客户端106用于在触摸屏幕显示装置146的查看区域中显示。为了说明,用户客户端106开始媒体应用116,诸如2010年7月27日发布的由Blizzard娱乐研发和发布的星际争霸II-军事科幻即时战略视频游戏。使用客户端106的用户可在与触摸事件关联的坐标被定位在多个输入映射区域133中的一个中时开始滚动动作。
因此,星际争霸II媒体应用116可期望来自鼠标滚动轮的输入、来自拖动滚动条的输入、来自键盘箭头键的输入和/或其它滚动输入装置。本公开的各种实施方案使输入映射应用119能够映射触摸事件成合适的输入,诸如由媒体应用116识别的滚动输入,并且发送该输入至星际争霸II媒体应用116。星际争霸II媒体应用116根据输入滚动视频传递的视图或采取其它合适动作。在滚动的情况下,滚动方向可与相应的输入映射区域133的位置的方向相同。然而,要提及的是在一些客户端106中的滚动可以与相应的输入映射区域133的位置相对的方向发生。触摸屏幕显示装置146的查看区域还可包括各种用户界面部件用于控制媒体应用116、退出媒体应用116、与其它用户通信、控制视频和/或其它部件。
接下来参考图3,其示出了根据各种实施方案提供输入映射应用119(图1)的部分的操作的一个实例的流程图。要理解的是图3的流程图仅仅提供可用于实施如本文所述的输入映射应用119的操作的许多不同类型的功能布置的实例。或者,图3的流程图可被视作根据一个或多个实施方案描绘在计算装置103(图1)中实施的方法的步骤的实例。
该流程图阐述输入映射应用119的特别涉及滚动的来自客户端106的翻译触摸事件、触摸事件的组合和/或其它触摸手势的功能性的实例。在论述滚动时,要理解的是这仅仅是可借助于使用输入映射区域133的许多不同类型的输入的实例。具体来说,触摸事件包括指示触摸的坐标的消息或触摸屏幕显示装置(图1)的其它操作。另外,图3的流程图提供输入映射应用119在与鼠标事件关联的至少一个坐标输入已经在将鼠标事件译作由媒体应用116识别的对应的滚动输入的输入映射区域133中被接收时如何处理各种鼠标事件的一个实例。要理解的是根据具体的情况流程可能不同。此外,要理解的是可采用不同于本文所述的那些的其它流程和用户动作。
起始于块303,当使用客户端106(图1)的用户希望滚动在触摸屏幕显示装置146(图1)的查看区域中显示的媒体应用116(图1)的视频传递的视图时,输入映射应用119确定与鼠标事件关联的坐标输入是否被定位在对应于滚动动作的多个输入映射区域133(图2)中的一个中。如果坐标输入确实对应于输入映射区域133中的一个,那么输入映射应用119移动至块316。如果坐标输入不对应于对应于滚动动作的输入映射区域133中的一个,那么输入映射应用119移动至块306并且确定先前开始的滚动功能是否正在进行。假定没有正在进行的先前滚动,输入映射应用119结束。如果有正在进行的先前滚动,那么输入映射应用119移动至块309并且发送命令至媒体应用116以终止先前开始的功能。此后,输入映射应用119(图1)结束。
如果坐标输入对应于对应于在块303中的滚动动作的输入映射区域133中的一个,那么输入映射应用119移动至块316并且确定坐标输入是否与鼠标下移事件关联。假定坐标输入不对应于鼠标下移事件,输入映射应用119移动至块321。如果坐标输入鼠标下移事件关联,那么输入映射应用119继续进行至块319。在块319,输入映射应用119基于与输入映射区域133中的相应的一个关联的预定的方向来确定滚动动作的方向。此类方向可能是垂直的、水平的、斜线的和/或其它方向。
接下来,输入映射应用119继续进行至块323并且确定滚动动作的速度。如实例的,输入映射应用119(图1)可确定滚动的速度与相对于在相应的输入映射区域133的外边界203与内边界206之间的总距离的在鼠标事件的坐标与外边界203(图2)之间的距离成比例。如另一个实例的,输入映射应用119(图1)可确定滚动的速度与相对于在相应的输入映射区域133的外边界203与内边界206之间的总距离的在鼠标事件的坐标与内边界206(图2)之间的距离成比例。然后,输入映射应用119继续进行至块326,在块326中输入映射应用119发送滚动命令至媒体应用116以与鼠标事件的坐标关联的速度和方向上滚动视图。此后,输入映射应用119结束。
假定鼠标事件不是如在块316中所确定的鼠标下移事件,输入映射应用119继续进行至块321。在块321,输入映射应用119确定坐标输入是否与从位于输入映射区域133的外面的触摸屏幕显示装置146上的位置至输入映射区域133中的一个中的拖动动作关联。如实例的,使用客户端106的用户可开始提供触摸输入至输入映射区域133(图2)的外面的触摸屏幕显示装置146。然后,使用客户端的用户可拖动其手指、触控笔和/或其它实施以移动至输入映射区域133中的一个中。为此,鼠标事件从在触摸屏幕显示装置146上的另一个位置移动至输入映射区域133中的一个中。具体来说,可在移动期间周期地产生鼠标位置事件,这指示在任何给定时间的鼠标的位置。如果鼠标事件指示输入映射区域133中的相应的一个中的移动,那么输入映射应用119继续进行至块319以确定如上文所述的滚动动作的方向。此后,输入映射应用119结束。
如果坐标输入不与如由块321确定的输入映射区域133中的一个中的拖动动作关联,那么输入映射应用119继续进行至块333。在块333,输入映射应用119确定坐标输入是否与在输入映射区域133中的一个之内的拖动动作关联。如果坐标输入与在输入映射区域133中的一个之内的拖动动作关联,那么输入映射应用119移动至块323以确定如上文所述的滚动速度的改变是否是必要的。或者,输入映射应用119继续进行至块336并且发送命令至媒体应用116以终止滚动动作。此后,输入映射应用119结束。
参考图4,其示出了根据本公开的实施方案的计算装置103的示意框图。计算装置103包括至少一个处理器电路,例如具有都耦接至本地界面409的处理器406和存储器403。为此,计算装置103可包括例如至少一个服务器计算机或类似装置。本地界面409可包括例如可以了解的有随附的地址/控制总线或其它总线结构的数据总线。
存储在存储器403中的是由处理器406执行的数据和几个部件。具体而言,存储在存储器403中的并且由处理器406执行的是媒体应用116、输入映射应用119和可能地其它应用。存储在存储器403中的还可是数据存储113和其它数据。另外,操作系统可存储在存储器403中并且由处理器406执行。
要理解的是如可以了解的可存在存储在存储器403中并且由处理器406执行的其它应用。其中本文论述的任何部件以软件的形式而实施,可采用许多编程语言中的任何一个,诸如例如C、C++、C#、Objective C、Java、Javascript、Perl、PHP、Visual Basic、Python、Ruby、Delphi、Flash或其它编程语言。
许多软件部件存储在存储器403中并且由处理器406执行。在这方面,术语“可执行的”(executable)意指呈可以最终由处理器406运行的形式的程序文件。可执行的程序的实例可能是例如编译的程序,所述编译的程序可以翻译成可以加载至存储器403的随机访问部分并且由处理器406运行的格式的机器代码;源代码,其可以诸如能够被加载至存储器403的随机访问部分并且由处理器406执行的目标代码的合适的格式被表示;或源代码,其可由另一个可执行的程序解释以在存储器403的随机访问部分中产生指令来由处理器406执行等。可执行的程序可存储在存储器403的任何部分或部件中,包括例如随机访问存储器(RAM)、只读存储器(ROM)、硬盘驱动器、固态驱动器、USB闪存驱动器、存储卡、诸如压缩盘(CD)或数字化通用盘(DVD)的光盘、软盘、磁带或其它存储器部件。
存储器403在本文中被限定为包括易失性的和非易失性的存储器以及数据存储部件。易失性的部件是在失去电源时不保留数据值的那些。非易失性的部件是在失去电源时保留数据值的那些。因此,存储器403可包括例如经由存储卡读卡器访问的随机访问存储器(RAM)、只读存储器(ROM)、硬盘驱动器、固态驱动器、USB闪存驱动器、存储卡,经由关联的软盘驱动器访问的软盘,经由光盘驱动器访问的光盘,经由合适的磁带驱动器访问的磁带和/或其它存储器部件,或者这些存储器部件中的任何两个或多个的组合。另外,RAM可包括例如静态随机访问存储器(SRAM)、动态随机访问存储器(DRAM)或磁随机访问存储器(MRAM)和其它此类装置。ROM可包括例如可编程的只读存储器(PROM)、可擦可编程只读存储器(EPROM)、电可擦可编程只读存储器(EEPROM)或其它类似存储器装置。
此外,处理器406可表示多个处理器406并且存储器403可表示多个存储器403,所述多个处理器406和多个存储器403都分别在平行处理电路中操作。在此类情况下,本地界面409可为促进在多个处理器406中的任何两个之间、在任何处理器406与任何存储器403之间或在存储器403的任何两个之间等等的通信的合适的网络109(图1)。该本地界面409可包括被设计来协同该通信包括例如进行负载平衡的额外的系统。处理器406可为电或一些其它可用的结构。
虽然本文所述的媒体应用116、输入映射应用119和其它各种系统可以由如上文所述的通用硬件执行的软件或代码实施,但是作为替代还可在专用硬件或软件/通用硬件和专用硬件的组合中实施。如果在专用硬件中实施,那么每个可以作为采用许多技术中的任何一个或组合的电路或状态机器来实施。这些技术可包括但不受限于具有用于在一个或多个数据信号的应用上实施各种逻辑功能的逻辑门的离散逻辑电路、具有合适的逻辑门的专用集成电路或其它部件等。此类技术一般被本领域的那些技术人员所熟知并且因此本文不再详细描述。
图3的流程图示出包括输入映射应用119的媒体应用116的部分的实施的功能性和操作。如果在软件中实施,那么每个块可表示代码的模块、片段或部分,所述代码包括程序指令以实施特定的逻辑功能。程序指令可以包括以编程语言或机器代码写的人类可读语句的源代码的形式实施,所述编程语言或机器代码包括由诸如在计算机系统或其它系统中的处理器406的合适的执行系统识别的数字指令。机器代码可转换自源代码等。如果在硬件中实施,每个块可表示电路或许多互连的电路以实施特定的逻辑功能。
虽然图3的流程图示出执行的具体顺序,但是要理解的是执行的顺序可不同于所描绘的。例如,两个或多个块的执行的顺序可相对于所示出的顺序打乱。此外,在图3中示出的连续的两个或多个块可可被同时或部分同时地执行。此外,在一些实施方案中,可跳过或省略在图3中示出的块中的一个或多个。另外,可增加任何数量的计数器、状态变量、警告信号或消息至本文所述的逻辑流用于增强的实用性、会计、性能测量或提供故障排除的援助等的目的。要理解的是所有此类变化在本公开的范围之内。
此外,本文所述的包括媒体应用116和输入映射应用119的任何逻辑或应用包括可以在由诸如例如在计算机系统或其它系统中的处理器406的指令执行系统使用或与其连接使用的任何非瞬时性计算机可读介质中实施的软件或代码。在该情况下,逻辑可包括例如包括可以从计算机可读介质取得并且由指令执行系统执行的指令和声明的语句。在本公开的上下文中,″计算机可读介质″可以是可以包含、存储或保持逻辑或应用的本文所述的由指令执行系统使用或与其连接使用的任何介质。计算机可读介质可以包括诸如例如磁、光火半导体媒体的许多物理媒体中的任何一个。合适的计算机可读介质的更多具体的实例包括但不受限于磁带、磁软盘、磁硬盘驱动器、存储卡、固态驱动器、USB闪存驱动器或光盘。此外,计算机可读介质可为随机访问存储器(RAM),其包括例如固态随机访问存储器(SRAM)和动态随机访问存储器(DRAM)或磁随机访问存储器(MRAM)。另外,计算机可读介质可为只读存储器(ROM)、可编程的只读存储器(PROM)、可擦可编程只读存储器(EPROM)、电可擦可编程只读存储器(EEPROM)或其它类型的存储器装置。
条款
1.一种非瞬时性计算机可读介质,其实施可在计算装置中执行的程序,所述程序包括:
游戏应用,其产生媒体流用于呈现在触摸屏幕客户端装置上,其中所述产生的媒体流的显示区域延伸超出所述触摸屏幕客户端装置的视图;
代码,其获得与所述触摸屏幕客户端装置的查看区域相关的坐标平面关联的至少一个坐标输入;
代码,其确定所述至少一个坐标输入是否位于相对于所述触摸屏幕客户端装置的所述坐标平面中限定的多个输入映射区中的至少一个之内;
代码,其响应于从实施所述触摸屏幕客户端装置的客户端接收的用户输入来促进所述输入映射区中的每个的区域的调整;
代码,其将所述至少一个坐标输入译为由所述游戏应用识别的对应的输入;
代码,其提供所述对应的输入给所述游戏应用;
代码,其响应于所述对应的输入来执行至少一个游戏应用功能;以及
代码,其通过网络发送所述媒体流至所述客户端。
2.根据条款1所述的非瞬时性计算机可读介质,其还包括在所述至少一个游戏应用功能对应于滚动动作时在所述触摸屏幕客户端装置上开始呈现所述媒体流的不同部分的代码。
3.根据条款2所述的非瞬时性计算机可读介质,其还包括确定所述滚动动作的速度与在所述至少一个坐标输入与所述输入映射区中的至少一个的边缘之间的距离成比例的代码。
4.一种系统,其包括:
至少一个计算装置;以及
输入映射应用,其可在所述至少一个计算装置中执行,所述输入映射应用包括:
逻辑,其通过网络从客户端接收与触摸屏幕显示装置的查看区域相关的坐标平面关联的至少一组坐标;
逻辑,其确定所述至少一组坐标是否被定位在所述坐标平面中限定的多个输入区域中的至少一个之内;
逻辑,其将所述至少一组坐标译成由媒体应用识别的输入;以及
逻辑,其发送所述输入至所述媒体应用。
5.根据条款4所述的系统,其中所述坐标平面是二维的。
6.根据条款4所述的系统,其中所述媒体应用产生呈视频传递的形式的呈现用于在触摸屏幕显示装置的查看区域中显示的视频输出。
7.根据条款6所述的系统,其中所述视频传递的视图延伸超出所述触摸屏幕显示装置的所述查看区域。
8.根据条款7所述的系统,其中所述媒体应用还包括编码所述视频传递用于以所述用户界面的形式呈现在所述触摸屏幕显示装置上的逻辑。
9.根据条款6所述的系统,其还包括调整相对于所述客户端的对应于来自所述客户端的用户输入的所述输入区域中的每个的区域的逻辑。
10.根据条款4所述的系统,其中所述输入区域中的每个的区域至少部分基于与所述视频传递关联的媒体应用的类型来确定。
11.根据条款4所述的系统,其中所述输入区域中的每个的区域至少部分基于与所述触摸屏幕显示装置关联的客户端的类型来确定。
12.根据条款4所述的系统,其中所述输入区域专属于所述媒体应用。
13.根据条款4所述的系统,其中所述媒体应用响应于由所述输入映射应用提供的所述输入来执行至少一个媒体应用功能。
14.一种方法,其包括下列步骤:
在计算装置中产生多媒体应用的视频传递;
在所述计算装置中接收与触摸屏幕显示装置的查看区域相关的触摸事件;
在所述计算装置中确定所述触摸事件是否被定位在限定所述触摸屏幕显示装置的坐标平面的多个输入区域中的至少一个中;
在所述计算装置中,将与所述输入区域中的每个关联的所述触摸事件译为由所述媒体应用识别的对应的滚动输入;
在所述计算装置中发送所述滚动输入至所述媒体应用,
在所述计算装置中执行以与所述输入区域中的所述至少一个关联的预定的方向滚动所述视频传递的视图的滚动动作;并且
在所述计算装置中发送延伸超出所述触摸屏幕显示装置的所述查看区域的所述视频传递的所呈现的版本至所述客户端。
15.根据条款14所述的方法,其还包括在所述计算装置中至少部分基于来自客户端的用户输入来改变输入区域中的每个的区域的所述步骤。
16.根据条款14所述的方法,其中所述预定的方向选自由水平方向、垂直方向和斜线方向组成的组。
17.根据条款14所述的方法,其中所述输入区域中的每个具有与所述查看区域的边缘对齐的外边界。
18.根据条款14所述的方法,其中所述滚动动作的速度与在所述外边界与所述触摸事件的位置之间的距离成比例。
19.根据条款14所述的方法,其中所述输入区域中的每个具有内边界。
20.根据条款14所述的方法,其中所述滚动动作的所述速度与在所述内边界与所述触摸事件的位置之间的所述距离成比例。
应强调的是本公开的上文所述的实施方案仅仅是阐述用来清楚理解本公开的原理的实施的可能的实例。可在基本上不脱离本公开的精神和原理的条件下对上文所述的实施方案做出许多改变和修改。所有此类修改和改变意欲在此包括在该公开的范围之内并且由下列权利要求保护。

Claims (15)

1.一种非瞬时性计算机可读介质,其包含可在计算装置中执行的程序,所述程序包括:
游戏应用,其产生媒体流用于呈现在触摸屏幕客户端装置上,其中所述产生的媒体流的显示区域延伸超出所述触摸屏幕客户端装置的视图;
代码,其获得与和所述触摸屏幕客户端装置的查看区域相关的坐标平面关联的至少一个坐标输入;
代码,其确定所述至少一个坐标输入是否位于在关于所述触摸屏幕客户端装置的所述坐标平面中限定的多个输入映射区中的至少一个之内;
代码,其响应于从包含所述触摸屏幕客户端装置的客户端接收的用户输入来促进所述输入映射区中的每个的区域的调整;
代码,其将所述至少一个坐标输入译为由所述游戏应用识别的对应的输入;
代码,其提供所述对应的输入给所述游戏应用;
代码,其响应于所述对应的输入来执行至少一个游戏应用功能;以及
代码,其通过网络发送所述媒体流至所述客户端。
2.一种系统,其包括:
至少一个计算装置;以及
输入映射应用,其可在所述至少一个计算装置中执行,所述输入映射应用包括:
逻辑,其通过网络从客户端接收与和触摸屏幕显示装置的查看区域相关的坐标平面关联的至少一组坐标;
逻辑,其确定所述至少一组坐标是否被定位在所述坐标平面中限定的多个输入区域中的至少一个之内;
逻辑,其将所述至少一组坐标译成由媒体应用识别的输入;以及
逻辑,其发送所述输入至所述媒体应用。
3.根据权利要求2所述的系统,其中所述媒体应用产生呈视频传递的形式的视频输出,其被呈现以用于在触摸屏幕显示装置的查看区域中显示。
4.根据权利要求3所述的系统,其中所述视频传递的视图延伸超出所述触摸屏幕显示装置的所述查看区域。
5.根据权利要求4所述的系统,其中所述媒体应用还包括编码所述视频传递以用于以用户界面的形式呈现在所述触摸屏幕显示装置上的逻辑。
6.根据权利要求3所述的系统,其还包括调整相对于所述客户端的对应于来自所述客户端的用户输入的所述输入区域中的每个的区域的逻辑。
7.根据权利要求2所述的系统,其中所述输入区域专属于所述媒体应用。
8.根据权利要求2所述的系统,其中所述媒体应用响应于由所述输入映射应用提供的所述输入来执行至少一个媒体应用功能。
9.一种方法,其包括下列步骤:
在计算装置中产生多媒体应用的视频传递;
在所述计算装置中接收与触摸屏幕显示装置的查看区域相关的触摸事件;
在所述计算装置中确定所述触摸事件是否被定位在限定所述触摸屏幕显示装置的坐标平面的多个输入区域中的至少一个中;
在所述计算装置中,将与所述输入区域中的每个关联的所述触摸事件译为由所述媒体应用识别的对应的滚动输入;
在所述计算装置中发送所述滚动输入至所述媒体应用,
在所述计算装置中执行在与所述输入区域中的所述至少一个关联的预定的方向上滚动所述视频传递的视图的滚动动作;并且
在所述计算装置中发送延伸超出所述触摸屏幕显示装置的所述查看区域的所述视频传递的所呈现的版本至所述客户端。
10.根据权利要求9所述的方法,其还包括在所述计算装置中至少部分基于来自客户端的用户输入来改变输入区域中的每个的区域的步骤。
11.根据权利要求9所述的方法,其中所述预定的方向选自包含水平方向、垂直方向和斜线方向的组。
12.根据权利要求9所述的方法,其中所述输入区域中的每个具有与所述查看区域的边缘对齐的外边界。
13.根据权利要求9所述的方法,其中所述滚动动作的速度与在所述外边界与所述触摸事件的位置之间的距离成比例。
14.根据权利要求9所述的方法,其中所述输入区域中的每个具有内边界。
15.根据权利要求9所述的方法,其中所述滚动动作的所述速度与在所述内边界与所述触摸事件的位置之间的所述距离成比例。
CN201280055852.XA 2011-11-14 2012-11-09 输入映射区域 Pending CN104094199A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/295133 2011-11-14
US13/295,133 US20130143657A1 (en) 2011-11-14 2011-11-14 Input Mapping Regions
PCT/US2012/064329 WO2013074398A1 (en) 2011-11-14 2012-11-09 Input mapping regions

Publications (1)

Publication Number Publication Date
CN104094199A true CN104094199A (zh) 2014-10-08

Family

ID=48430059

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280055852.XA Pending CN104094199A (zh) 2011-11-14 2012-11-09 输入映射区域

Country Status (9)

Country Link
US (1) US20130143657A1 (zh)
EP (1) EP2780784A4 (zh)
JP (1) JP2015504199A (zh)
KR (1) KR20140092908A (zh)
CN (1) CN104094199A (zh)
AU (1) AU2012339880A1 (zh)
CA (1) CA2854006A1 (zh)
SG (1) SG2014014393A (zh)
WO (1) WO2013074398A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8994755B2 (en) * 2011-12-20 2015-03-31 Alcatel Lucent Servers, display devices, scrolling methods and methods of generating heatmaps
JP2014194747A (ja) * 2013-02-28 2014-10-09 Canon Inc 情報処理装置、情報処理方法及びコンピュータプログラム
TWI486775B (zh) * 2013-09-18 2015-06-01 Dexin Corp 輸入裝置及其資料傳輸方法
US20150121314A1 (en) * 2013-10-24 2015-04-30 Jens Bombolowsky Two-finger gestures
CN104298427B (zh) * 2014-09-24 2016-05-04 腾讯科技(深圳)有限公司 结果界面显示方法和装置
US20160209968A1 (en) * 2015-01-16 2016-07-21 Microsoft Technology Licensing, Llc Mapping touch inputs to a user input module
WO2016201485A1 (en) * 2015-06-15 2016-12-22 Cana Technologies Pty Ltd A computer implemented method, client computing device and computer readable storage medium for data presentation

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040100492A1 (en) * 2002-11-22 2004-05-27 Mercs James S. Ubiquitous companion agent
US20070209017A1 (en) * 2006-03-01 2007-09-06 Microsoft Corporation Controlling Scroll Speed To Improve Readability
CN101689092A (zh) * 2007-06-27 2010-03-31 诺基亚公司 提供用于触摸屏设备的滚动机构的方法、装置和计算机程序产品
US20100107116A1 (en) * 2008-10-27 2010-04-29 Nokia Corporation Input on touch user interfaces
CN102117178A (zh) * 2009-12-30 2011-07-06 Lg电子株式会社 移动终端的显示装置和控制该显示装置的方法

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6570594B1 (en) * 1998-06-30 2003-05-27 Sun Microsystems, Inc. User interface with non-intrusive display element
US7495659B2 (en) * 2003-11-25 2009-02-24 Apple Inc. Touch pad for handheld device
US7434173B2 (en) * 2004-08-30 2008-10-07 Microsoft Corporation Scrolling web pages using direct interaction
JP3734820B1 (ja) * 2004-09-03 2006-01-11 任天堂株式会社 ゲームプログラム、ゲーム装置、および入力装置
US20070061126A1 (en) * 2005-09-01 2007-03-15 Anthony Russo System for and method of emulating electronic input devices
US9395905B2 (en) * 2006-04-05 2016-07-19 Synaptics Incorporated Graphical scroll wheel
US7877696B2 (en) * 2007-01-05 2011-01-25 Eastman Kodak Company Multi-frame display system with semantic image arrangement
US8238662B2 (en) * 2007-07-17 2012-08-07 Smart Technologies Ulc Method for manipulating regions of a digital image
TWI505096B (zh) * 2007-10-23 2015-10-21 Viaclix Inc 用於多媒體管理、廣告、內容及服務系統之方法
JP5252879B2 (ja) * 2007-10-25 2013-07-31 株式会社カプコン 操作制御装置、及び、この操作制御装置を実現するためのプログラム
TWI421759B (zh) * 2007-12-21 2014-01-01 Elan Microelectronics Corp 在觸控板上控制卷軸捲動的方法
JP5424173B2 (ja) * 2008-01-31 2014-02-26 BizMobile株式会社 携帯サービスの提供システム及び提供方法
US8356258B2 (en) * 2008-02-01 2013-01-15 Microsoft Corporation Arranging display areas utilizing enhanced window states
KR101534789B1 (ko) * 2008-05-28 2015-07-07 구글 인코포레이티드 모바일 컴퓨팅 디바이스에서의 모션-컨트롤 뷰
KR101446521B1 (ko) * 2008-08-12 2014-11-03 삼성전자주식회사 터치 스크린의 정보 스크롤 제어 방법 및 장치
ATE554001T1 (de) * 2008-09-08 2012-05-15 Thales Avionics Inc System und verfahren zur bereitstellung einer live-kartenanzeige in einem fahrzeug
JP5089658B2 (ja) * 2009-07-16 2012-12-05 株式会社Gnzo 送信装置及び送信方法
KR20110034858A (ko) * 2009-09-29 2011-04-06 주식회사 넥슨모바일 게임 운영을 제어하기 위한 사용자 인터페이스 제공 방법
US8313377B2 (en) * 2009-10-14 2012-11-20 Sony Computer Entertainment America Llc Playing browser based games with alternative controls and interfaces
US8392497B2 (en) * 2009-11-25 2013-03-05 Framehawk, LLC Systems and algorithm for interfacing with a virtualized computing service over a network using a lightweight client
US8382591B2 (en) * 2010-06-03 2013-02-26 Ol2, Inc. Graphical user interface, system and method for implementing a game controller on a touch-screen device
US8539039B2 (en) * 2010-06-22 2013-09-17 Splashtop Inc. Remote server environment
US20120102400A1 (en) * 2010-10-22 2012-04-26 Microsoft Corporation Touch Gesture Notification Dismissal Techniques

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040100492A1 (en) * 2002-11-22 2004-05-27 Mercs James S. Ubiquitous companion agent
US20070209017A1 (en) * 2006-03-01 2007-09-06 Microsoft Corporation Controlling Scroll Speed To Improve Readability
CN101689092A (zh) * 2007-06-27 2010-03-31 诺基亚公司 提供用于触摸屏设备的滚动机构的方法、装置和计算机程序产品
US20100107116A1 (en) * 2008-10-27 2010-04-29 Nokia Corporation Input on touch user interfaces
CN102117178A (zh) * 2009-12-30 2011-07-06 Lg电子株式会社 移动终端的显示装置和控制该显示装置的方法

Also Published As

Publication number Publication date
CA2854006A1 (en) 2013-05-23
WO2013074398A1 (en) 2013-05-23
US20130143657A1 (en) 2013-06-06
EP2780784A1 (en) 2014-09-24
JP2015504199A (ja) 2015-02-05
EP2780784A4 (en) 2015-07-08
KR20140092908A (ko) 2014-07-24
SG2014014393A (en) 2014-05-29
AU2012339880A1 (en) 2014-05-22

Similar Documents

Publication Publication Date Title
CN104094199A (zh) 输入映射区域
JP6111440B2 (ja) ユーザインターフェースを符号化する方法
US10825256B2 (en) Generation of user interaction based data by three dimensional assets in a virtual environment
US9361625B2 (en) Game navigation interface for electronic content
US20140115506A1 (en) Systems And Methods For Measurement Of User Interface Actions
US20240144628A1 (en) Methods and systems for generating digital objects for collecting data in a three-dimensional environment
CN104885107A (zh) 经由应用捕获并共享视觉内容
CN107748740A (zh) 电子表格对象的无代码共享
JP6127241B2 (ja) デバイスへのアプリケーションのフルフィルメント
AU2022218465B2 (en) Methods and systems for displaying digital smart objects in a three dimensional environment
US20130031225A1 (en) Remotely preconfiguring a computing device
CN102520862B (zh) 基于声明性映射的用户输入的响应
CN113891140A (zh) 一种素材编辑方法、装置、设备及存储介质
CN113867874A (zh) 页面编辑及显示方法、装置、设备、计算机可读存储介质
CN115623270A (zh) 互动信息处理方法、装置、电子设备以及存储介质
KR20240132544A (ko) 가상 아바타 및 가상 환경 서비스 구독 모델 제공 방법
CN118444811A (zh) 信息展示方法、装置及存储介质
CN113867872A (zh) 一种项目编辑方法、装置、设备及存储介质
CN116594724A (zh) 内容呈现方法、装置、设备和存储介质
COMPARI Culture on the go

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20141008

WD01 Invention patent application deemed withdrawn after publication