CN105706023A - 与不支持的输入设备的通信 - Google Patents

与不支持的输入设备的通信 Download PDF

Info

Publication number
CN105706023A
CN105706023A CN201380080768.8A CN201380080768A CN105706023A CN 105706023 A CN105706023 A CN 105706023A CN 201380080768 A CN201380080768 A CN 201380080768A CN 105706023 A CN105706023 A CN 105706023A
Authority
CN
China
Prior art keywords
application
supported
input
equipment
subscribed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201380080768.8A
Other languages
English (en)
Other versions
CN105706023B (zh
Inventor
卡西克·贾亚拉曼
莫利·乔伊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hewlett Packard Development Co LP
Original Assignee
Hewlett Packard Development Co LP
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hewlett Packard Development Co LP filed Critical Hewlett Packard Development Co LP
Publication of CN105706023A publication Critical patent/CN105706023A/zh
Application granted granted Critical
Publication of CN105706023B publication Critical patent/CN105706023B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/0227—Cooperation and interconnection of the input arrangement with other functional units of a computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0238—Programmable keyboards
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

在本文描述了与不支持的输入设备通信以使应用与不支持的输入设备交互的系统和方法。该方法包括，对于待被订阅到不支持的输入设备的应用，获得多个热键中的每个与在应用中执行的对应功能的映射。该方法还包括取回通用标识符的列表，其中通用标识符中的每个与不支持的输入设备的不支持的输入对应。此外，通用标识符中的每个被标记有响应于对应的不支持的输入而在应用中执行的功能。该方法还包括为应用生成配置映射。配置映射包括来自所述通用标识符的列表当中的至少一个通用标识符与多个热键中的至少一个的映射。

Description

与不支持的输入设备的通信
背景技术
计算设备例如膝上型计算机、桌上型计算机和工作站可执行各种应用。计算设备可包括或连接到输入设备例如键盘、鼠标、触控笔和袖珍键盘，以允许用户与应用通信。不同的计算设备支持不同类型的输入设备。例如，计算设备可支持鼠标或键盘，并可接受通过这些输入设备提供的用户输入。另一计算设备可接受语音命令作为用户输入。因此，用户通过由计算设备支持的输入设备与在计算设备上执行的应用通信。
附图说明
参考附图描述了具体实施方式。在附图中，参考号码的最左边的数字标识参考号码首次出现的附图。相同的号码在全部附图中用于指相似的特征和组件：
图1示出了根据本主题的示例的、用于将应用订阅到不支持的输入设备的方法。
图2示出了根据本主题的另一示例的、用于与不支持的输入设备通信的方法。
图3示意性地示出了根据本主题的示例的、不支持的输入通信系统。
图4示意性地示出了根据本主题的示例的、执行与不支持的输入设备交互的已订阅应用的用户设备。
图5示意性示出了根据本主题的另一示例的、用于与不支持的输入设备通信的系统。
图6示出了根据本主题的示例的、存储用于使已订阅应用与不支持的输入设备交互的指令的计算机可读介质。
具体实施方式
在设备例如通信设备和计算设备的操作系统(OS)上执行的各种应用支持不同的用户输入。例如，文本编辑器可支持通过鼠标或键盘提供的用户输入。相应地，文本编辑器可读懂鼠标事件或键盘事件，例如鼠标的点击或滚动事件或键盘的按键触发事件。在另一示例中，即时通讯可支持通过麦克风提供的用户输入，并可相应地对语音命令例如“发送图片”和“打开文件”作出反应。
一般，在设备的OS上运行的应用可支持一组输入设备，并可接受通过这种支持的输入设备提供的用户输入。然而，这种应用可能不支持其它输入设备。例如，浏览器可支持键盘作为输入设备，并因此通过一触发退格键就移动到前一页来对键盘事件作出反应。浏览器可能不支持通过被用作输入设备的摄像机的摄像模块提供的手势输入，并可能未能响应于从右向左的手部运动而移动到前一页。另一方面，在设备上运行并支持摄像模块的游戏应用可响应于通过摄像模块提供的手势输入而执行特定的任务。
使应用支持没有被该应用最初开发来支持的输入设备，涉及大规模的应用再开发或大量的编码。参考前一示例，为了使浏览器支持摄像机，进行附加的编码。编码需要技能并且也消耗大量的资源，例如工时和资金。此外，如果编码由应用的原始开发者以外的任何人执行，则源代码的不可用性和应用的特定知识的缺乏可引起更多的困难。
上面的技术挑战可能进一步加重沙箱化的应用。沙箱化应用可以不使用它们可运行于其上的设备的OS的所有功能。沙箱化应用声明了沙箱化应用为它们的操作使用的OS的功能。因此，沙箱化应用被赋予所声明的功能，且没有附加功能可被赋予它们。例如，如果沙箱化应用声明检测到触控板事件，即通过触控板接收的输入，则沙箱化应用可以不被赋予检测手势事件的功能，即通过摄像机的摄像模块接收的输入。因此，沙箱化应用虽然附加编码但可以不支持沙箱化应用没有声明支持的输入设备。
在这里描述了与不支持的输入设备通信以使应用能够支持不支持的输入设备的系统和方法。键盘作为基本输入模式被大部分应用支持。不支持较新且更高级的输入模式，例如3D运动输入或借助于眼球的运动的输入，的应用一般支持键盘事件。为了本讨论的目的，不支持输入设备的应用然而被考虑为支持键盘。
为了与在设备的OS上运行的给定应用交互，设备键盘的一个或多个键被触发。该应用响应于键盘的一个或多个键的触发而执行特定的功能。例如，响应于向后箭头键的触发，图片查看器可上传前一图像，而响应于向上箭头键，文字处理器可向上滚动页。触发功能的键盘的一个或多个键可称作那个功能的热键。热键与由热键执行的对应功能的映射对于每个应用是可用的。在一种情形下，对于应用，热键与由热键执行的对应功能的映射可通过应用的开发者变得可用。例如，热键与对应功能的映射可被公布在互联网上或可通过应用的帮助菜单变得可用。
在当前主题的一个实施例中，热键与对应功能的映射用于使应用与不支持的输入设备交互。考虑一个示例，其中本机浏览器变得能够支持摄像机的摄像模块，使得本机浏览器可读懂手势事件，例如从右向左的手部运动、从左向右的手部运动和从顶到底的手部运动。在本示例中，用户可能想要本机浏览器在他一执行从右向左的手部运动就移动到前一页。从热键与对应功能的映射识别出与将本机浏览器移动到前一页的功能对应的热键。为了响应于从右向左的手部运动而将本机浏览器移动到前一页，对于应用，当用户执行从右向左的手部运动时，在OS内模拟与将本机浏览器移动到前一页的功能对应的热键。
因此，当用于执行功能的不支持的输入用于与应用通信时，与该功能对应的热键被模拟以使应用能够执行该功能。因此，应用可与不支持的输入设备交互而不需要为应用写入的任何附加代码或不需要应用的再开发。结果，即使是技能相当少的用户，利用较少的时间和资源且在不了解应用的源代码的情况下，也能够使应用与来自不支持的输入设备的不支持的输入交互。
此外，如上面提到的，应用可能不支持输入设备，因为应用可能是没有声明关于输入设备的功能的沙箱化应用。然而，在接收热键的基础上与OS交互的功能一般由沙箱化应用声明；因此，热键能轻易被沙箱化应用接受。因此，沙箱化应用虽然不支持输入设备但可变得能够支持来自不支持的输入设备的输入。
如在本文所述的，可在各种市场上可买到的计算系统和通信系统例如个人计算机、网络服务器和服务器中实现用于使应用与各种不支持的输入设备交互的方法和系统。在一个实现中，应用可包括本机桌面应用，例如GoogleChromeTM浏览器、浏览器、Internet浏览器和沙箱化应用例如windows商店应用。
在本主题的一个实施例中，为了使应用与不支持的输入设备交互，应用首先被订阅到不支持的输入设备。在一个示例中，不支持的输入设备可以是三维(3D)运动感测控制器。此外，与3D运动感测控制器对应的不支持的输入可以是手势事件，例如3D运动或借助于眼球的运动的输入。例如，3D运动可以是手部运动、面部运动等。根据示例，3D运动感测控制器可以是leapmotionTM传感器。leapmotionTM传感器可跟踪手部和手指的空中运动。
为了将应用订阅到不支持的输入设备，获得与不支持的输入设备对应的各种不支持的输入的列表。例如，在不支持的输入设备是3D运动感测控制器的情况下，对应的不支持的输入是手势事件，例如3D运动。相应地，获得各种不支持的输入的列表，其在这种情况下包括各种手势事件，例如从右向左的手部运动、从左向右的手部运动、从顶到底的手部运动、从底到顶的手部运动或任何定制开发的3D手势事件。这些不支持的输入中的每个具有被分配给它们的通用标识符。通用标识符是不支持的输入的清楚地可识别的名称。
在一个示例中，通用标识符可以是手势事件的名称。例如，从左向右的手部运动可具有与它相关的通用标识符“LEFT-TO-RIGHTSWIPE”。
在一个实现中，通用标识符可由用户分配给不支持的输入。一旦将通用标识符分配给不支持的输入中的每个，每个不支持的输入预期在应用中执行的功能也就被标记有通用标识符。例如，对于不支持的输入，从左向右的手部运动，通用标识符“LEFT-TO-RIGHTSWIPE”可被分配，且不支持的输入可预期在已订阅应用中执行的移动到下一页的功能可被标记。
基于被标记有通用标识符的功能，执行在应用中的功能的热键被映射到对应的通用标识符。如前面所提到的，应用响应于键盘的一个或多个键的触发而执行特定的功能。例如，在应用中，功能“移动到下一页”可被标记有通用标识符“LEFT-TO-RIGHTSWIPE”。然后，在应用中用于移动到下一页的热键可以是键盘的右箭头键。相应地，右箭头键被映射到通用标识符“LEFT-TO-RIGHTSWIPE”。
通用标识符到应用的对应热键的映射被称为“配置映射”。虽然描述了配置映射为单个应用而创建，但是配置映射可针对多个应用而创建，使得一个配置映射针对多个应用中的每个而创建。在一个实现中，多个应用的配置映射可存在于配置文件中。相应地，配置文件可包括几个应用的通用标识符和对应热键的映射。
还可提到，从可在设备上执行的几个应用当中，用户可选择变得能够支持不支持的输入设备的一个或多个应用。例如，基于由用户做出的选择，可在设备上执行的五个应用中的三个可在配置文件中被订阅，且相应地，这三个应用可支持它们已经被订阅的不支持的输入设备。针对不支持的输入设备已经被订阅的应用可被称作已订阅应用。
一旦包括几个已订阅应用的配置映射的配置文件对执行已订阅应用的设备是可用的，配置文件就可用于使已订阅应用与不支持的输入设备例如可联接到执行已订阅应用的设备的3D运动感测控制器交互。
例如，在已订阅应用中的一个应用中，热键“右箭头键”可执行移动到下一页的功能。在已订阅应用的配置映射中，这个热键可被映射到与用户的从左向右的手部运动的手势事件对应的通用标识符“LEFT-TO-RIGHTSWIPE”。相应地，当用户从左向右移动他的手时，3D运动感测控制器捕获手势事件和与这个手势事件关联的通用标识符，即在本示例中“RIGHT-TO-LEFTSWIPE”由设备确定。因此，配置文件被访问。在配置文件具有几个已订阅应用的配置映射的情况下，从几个已订阅应用的配置映射当中识别用户正在与其交互的当前已订阅应用的配置映射。从本应用的配置映射识别被映射到所确定的通用标识符的热键。在本示例中，被映射到通用标识符“LEFT-TO-RIGHTSWIPE”的热键是右箭头键。
所识别的热键由设备的OS模拟并被发送到用户正在与其交互的已订阅应用以执行与热键关联的功能，该热键在这种情况下用于移动到下一页。因此实际上，已订阅应用响应于由用户执行的从右向左的手部运动而被移动到新的页面。各种不支持的输入相应地可被传递到已订阅应用。
此外，因为用户有一定的灵活性为其订阅的每个应用标记功能和不支持的输入，他可基于其偏好定制应用。例如，用户可以用通用标识符“LEFT-TO-RIGHTSWIPE”标记功能“移动到下一页”并用通用标识符“TOP-TO-BOTTOMSWIPE”标记功能“向下滚动页”。此外，用户可针对不同的应用不同地标记功能和不支持的输入。例如，用户可针对一个应用将功能“向下滚动页”标记到通用标识符“TOP-TO-BOTTOMSWIPE”，然而他可针对另一应用将功能“移动到前一页”标记到通用标识符“TOP-TO-BOTTOMSWIPE”。因此，用户可基于其偏好来标记功能和不支持的输入。
结合下面的附图进一步描述上面的系统和方法。应注意，描述和附图仅仅示出了本主题的原理。此外，可设计各种布置，其虽然没有在本文被明确地描述或示出，但体现本主题的原理并被包括在其精神和范围内。
关于图1到图6详细解释用于使应用与各种不支持的输入设备交互的系统和方法的方式。虽然可在任何数量的不同计算系统、环境和/或实现中能够实现用于与各种不支持的输入设备通信的所述系统和方法的方面，但在下面的系统的上下文中描述示例和实现。
图1示出了根据本主题的示例的、用于将应用订阅到不支持的输入设备的方法100，而图2示出了根据本主题的示例的、用于与不支持的输入设备通信的方法200。方法100和200被描述的顺序并不旨在被解释为限制，且所描述的方法块中的一些可以用不同的顺序组合以实现方法100和200或可选的方法。此外，可从方法100和200删除单独的块而不偏离本文所述的主题的精神和范围。此外，可在任何适当的硬件、计算机可读指令或其组合中实现方法100和200。
方法100和200的步骤可由根据存储在计算机可读介质上的机器可执行指令的指示的计算设备执行，或由专用硬件电路、微控制器或逻辑电路执行。在本文中，一些示例也旨在涵盖计算机可读介质，例如数字数据存储介质，其是机器或计算机可读的并对机器可执行或计算机可执行指令编码，其中所述指令执行所描述方法100和方法200的步骤中的一些或全部。
参考图1，描述用于将应用订阅到不支持的输入设备的方法100。
在块102，获得待订阅应用的热键与由应用中每个热键执行的各自的功能的映射。如前面所解释的，热键与其对应功能的映射可由应用的开发者变得可用。热键与对应功能的映射的一个示例包括热键，例如设备键盘的“右箭头键”被映射到移动到下一页的功能。类似地，热键，键盘的“向下箭头键”可被映射到向下滚动页的功能。热键可以是应用特定的。例如，对于一个应用，用于移动到下一页的热键可以是键盘的“右箭头键”，然而对于另一应用，用于移动到下一页的热键可以是键盘的“CTRL+右箭头键”。
在一个示例中，用户，例如可将应用订阅到不支持的输入的开发者或程序员，可在被称为不支持的输入通信系统的计算系统中执行方法100。用户可向不支持的输入通信系统提供热键与对应功能的映射。
如在块104所示的，取回通用标识符的列表，其中通用标识符中的每个与不支持的输入设备的不支持的输入对应，并且其中通用标识符中的每个被标记有响应于对应的不支持的输入而在应用中执行的功能。
在一个示例中，不支持的输入设备可包括三维(3D)运动感测控制器。此外，与3D运动感测控制器对应的不支持的输入可以是手势事件，例如3D运动或借助于眼球的运动的输入。例如，3D运动可以是手部运动，例如从左向右的手部运动、从右向左的手部运动和定制开发的3D手势事件。根据示例，3D运动感测控制器可以是leapmotionTM传感器。leapmotionTM传感器可跟踪手部和手指的空中运动。这样的手势事件中的每个，即手部和手指的空中运动被称为不支持的输入。
通用标识符可与手势事件中的每个对应，即每个不支持的输入。通用标识符是手势事件的清楚地可识别的名称。在上面的示例中，对应的通用标识符“LEFT-TO-RIGHTSWIPE”可被分配给不支持的输入，从左向右的手部运动。类似地，如果不支持的输入是从顶到底的手部运动，则所分配的通用标识符可以是“TOP-TO-BOTTOMSWIPE”。
在一个实现中，通用标识符的列表可由用户在不支持的输入通信系统中定义。例如，用户可登记可从不支持的设备接收的各种不支持的输入，并将通用标识符分配给不支持的输入中的每个。在另一实现中，可在不支持的输入通信系统中从外部源接收通用标识符的列表，例如可取回预先存在的列表。
此外，在一个实现中，通用标识符中的每个可被标记有各自的功能。在一个示例中，用户可用他希望响应于与通用标识符对应的不支持的输入而在应用中执行的功能标记通用标识符中的每个。在一个实现中，用户可在不支持的输入通信系统中用各自的功能标记通用标识符。例如，用户可将功能“移动到下一页”标记到通用标识符“LEFT-TO-RIGHTSWIPE”以允许与通用标识符“从左向右的手部运动”对应的不支持的输入将应用移动到下一页。类似地，用户可将功能“向下滚动页”标记到通用标识符“TOP-TO-BOTTOMSWIPE”从而用户一执行从顶到底的手部运动就向下滚动页。
如前面所提到的，用户有基于他的偏好针对每个应用标记功能和不支持的输入的灵活性。相应地，可按照用户的偏好定制每个应用。
如在块106中所示的，为应用生成配置映射。配置映射包括通用标识符与热键的映射。映射使得通用标识符被映射到执行被标记有通用标识符的功能的热键。考虑一个示例，其中功能“移动到下一页”被标记有与不支持的输入“从左向右的手部运动”对应的通用标识符“LEFT-TO-RIGHTSWIPE”，且用于移动到下一页的热键是键盘的右箭头键。相应地，通用标识符“LEFT-TO-RIGHTSWIPE”可被映射到键盘的右箭头键。类似地，在另一示例中，被标记有通用标识符“TOP-TO-BOTTOMSWIPE”的功能“向下滚动页”可被映射到键盘的向下箭头键，向下箭头键是在应用中用于向下滚动页的热键。
在一个实现中，用户在不支持的输入通信系统中将通用标识符与应用的热键映射以在不支持的输入通信系统中为应用创建配置映射。
在一个实现中，可访问不支持的输入通信系统的OS的编辑器用于生成配置映射。在一个示例中，编辑器可以是文本编辑器。用户将一个或多个通用标识符与在编辑器中用于应用的多个热键中的至少一个映射。
一旦为应用创建了配置映射，应用就被订阅到不支持的输入设备。此外，可不时地更新配置映射。例如，可将新的通用标识符及其对应的热键添加到配置映射，可修改现有的通用标识符及其对应的热键，或可将无用的通用标识符及其对应的热键从配置映射删除。
在下文中，为已订阅应用创建的配置映射可被提供到用户设备以允许基于配置映射执行已订阅应用。用户设备可基于配置映射执行已订阅应用，用于使已订阅应用与不支持的输入设备交互。在一个示例中，配置映射可由执行已订阅应用的用户设备的OS的后台服务使用，用于使已订阅应用与不支持的输入设备交互。在一个实现中，用户设备可通信地联接到不支持的输入通信系统以访问配置映射。在一个实现中，基于由用户在不支持的输入通信系统中创建的配置映射，已订阅应用的执行可以在不支持的输入通信系统本身上。
虽然在方法100中描述了来自多个应用当中的一个应用被订阅到不支持的输入设备，但不止一个应用可使用上述方法块被订阅到不支持的输入设备。在这样的情形中，方法块102、104和106可重复，用于将每个应用订阅到不支持的输入设备。
图2示出了用于与不支持的输入设备通信的方法200。根据本主题的示例的方法200提供用于使已订阅应用与不支持的输入设备交互。根据实现，已订阅应用可以是被订阅到不支持的输入设备的本机桌面应用和沙箱化应用中的一个。
在一个实现中，可在被称为用户设备的设备的操作系统(OS)上执行已订阅应用。在一个实现中，可将已订阅应用预先安装在用户设备中。在另一实现中，可通过从外部源例如互联网下载来安装已订阅应用。用户设备可被理解为可包括已订阅应用的配置映射以允许已订阅应用与不支持的输入设备交互的任何计算设备。此外，用户设备可联接到不支持的输入设备。
参考图2所描绘的方法200，在块202从不支持的输入设备为已订阅应用接收不支持的输入。不支持的输入用于在已订阅应用中执行功能。如前面所提到的，不支持的输入设备可以是3D运动感测控制器，而不支持的输入可以是手势事件。
在一个示例中，可在执行已订阅应用的用户设备中实现方法200，用于使已订阅应用与不支持的输入设备交互。对于已订阅应用，可由用户设备从联接到用户设备的不支持的输入设备接收不支持的输入。
在块204，确定与不支持的输入对应的已标记通用标识符。如前所述，来自不支持的输入设备的每个不支持的输入被分配通用标识符。此外，不支持的输入在已订阅应用中预期执行的功能被标记有通用标识符。这样被标记有相关的不支持的输入的预期功能的通用标识符被称为已标记通用标识符。
例如，不支持的输入——从左向右的手部运动可由用户设备从联接到用户设备的不支持的输入设备接收。与不支持的输入对应的已标记通用标识符“LEFT-TO-RIGHTSWIPE”可由用户设备确定。
参考图2所描绘的块206，访问已订阅应用的配置映射，其中配置映射包括通用标识符与已订阅应用的对应热键的映射。可根据方法100预先生成已订阅应用的配置映射并将其提供到用户设备，用于使用户设备基于配置映射来执行已订阅应用。
在一个实现中，可从在配置文件中的多个已订阅应用的配置映射当中识别已订阅应用的配置映射。在所述实现中，可基于已订阅应用的应用名称从配置文件识别已订阅应用的配置映射。例如，对于windows商店应用，存在于包清单文件中的包显示名称是windows商店应用的应用名称。
如在块208中所示的，从已订阅应用的配置映射确定被映射到已标记通用标识符的热键。如上面所提到的，不支持的输入可预期执行在已订阅应用中的功能。配置映射包括已标记通用标识符与负责在已订阅应用中执行预期功能的热键的映射。
例如，在一个实现中，对于已标记通用标识符“LEFT-TO-RIGHTSWIPE”，用户设备可基于已订阅应用的配置映射确定热键“右箭头键”。
如在块210中描绘的，模拟所确定的热键以执行与热键关联的功能。一旦所确定的热键被模拟，它就可被提供到与用户交互的已订阅应用，以执行不支持的输入预期在已订阅功能中执行的功能。
在一个示例中，所确定的热键可由用户设备在用户设备的OS内模拟以执行与已订阅应用的热键关联的功能。例如，对于已订阅应用，可在OS内模拟热键“右箭头键”。因此，与热键关联的功能，例如新页面的打开可在已订阅应用中被执行。
图3示意性示出了根据本主题的示例的、不支持的输入通信系统302。不支持的输入通信系统302可以是任何通信或计算设备，例如膝上型计算机、桌上型计算机、工作站或服务器。
在一个实现中，不支持的输入通信系统302包括处理器304和联接到处理器304的存储器306。处理器304可被实现为一个或多个微处理器、微型计算机、微控制器、数字信号处理器、中央处理单元、状态机、逻辑电路和/或基于操作指令来操纵信号的任何设备。在其它功能当中，处理器304可被配置成取出并执行存储在存储器306中的计算机可读指令。存储器306可包括本领域中已知的任何计算机可读介质，包括例如易失性存储器，例如静态随机存取存储器(SRAM)和动态随机存取存储器(DRAM)；和/或非易失性存储器，例如只读存储器(ROM)、可擦除可编程ROM和闪速存储器。
存储器306还可包括配置映射308以将应用订阅到不支持的输入设备。在一个示例中，所述应用可以是本机桌面应用或沙箱化应用。在一个实现中，所述不支持的输入设备可以是3D运动感测控制器，例如leapmotionTM传感器。
已订阅应用可被理解为变得支持不支持的输入设备的应用，使得已订阅应用可读懂由不支持的输入设备产生的不支持的输入。
在一个示例中，可在不支持的输入通信系统302的编辑器例如文本编辑器中创建已订阅应用的配置映射308。配置映射308的生成基于订阅应用的热键到与不支持的输入关联的通用标识符的映射，如图1的描述中所解释的。
虽然描绘了存储器306包括单个已订阅应用的配置映射308，多个配置映射308(每个与不同的应用对应)可存在于存储器306中。为多个应用创建的配置映射308可存在于配置文件中。相应地，对于多个应用包括通用标识符和对应热键的映射的配置文件可存储在存储器306中。
根据实现，为已订阅应用创建的配置映射308可由用户设备用来基于配置映射308执行已订阅应用，用于允许已订阅应用与不支持的输入设备交互。在一个实现中，不支持的输入通信系统302可通信地联接到用户设备以向用户设备提供已订阅应用的配置映射308，用于已订阅应用的执行。
图4示意性示出了根据当前主题的示例的、执行与不支持的输入设备交互的已订阅应用404的用户设备402。用户设备402可以是任何通信或计算设备，例如膝上型计算机、桌上型计算机、工作站和智能手机。
在一个实现中，用户设备402例如通过用户设备402的处理器406执行已订阅应用404。已订阅应用404可以是本机桌面应用或沙箱式应用。此外，用户设备402包括联接到处理器406的确定模块408、决定引擎410和模拟模块412。处理器406可被实现为一个或多个微处理器、微型计算机、微控制器、数字信号处理器、中央处理单元、状态机、逻辑电路和/或基于操作指令来操纵信号的任何设备。除了其它能力以外，处理器406可被配置成取出并执行存储在用户设备402的存储器中的计算机可读指令。
确定模块408、决定引擎410和模拟模块412，其它事物之中，还包括执行特定的任务或实现特定的抽象数据类型的例行程序、程序、对象、组件和数据结构。确定模块408、决定引擎410和模拟模块412还可被实现为信号处理器、状态机、逻辑电路和/或基于操作指令来操纵信号的任何设备。此外，确定模块408、决定引擎410和模拟模块412可由硬件、由处理单元执行的计算机可读指令或由其组合实现。用户设备402还可包括联接到处理器406(图4未示出)的其它模块。其它模块可包括由用户设备402执行的补充应用或功能的程序或编码指令。
用户设备402可联接到不支持的输入设备。在一个实现中，不支持的输入设备例如leapmotionTM传感器可联接到用户设备402。
多个应用可在用户设备402上运行。这些应用中的一些可订阅到联接到用户设备402的不支持的输入设备。用户设备402可包括配置文件，该配置文件包括用户设备402的已订阅应用404中的每个的配置映射。
已订阅应用404的配置映射可包括通用标识符和对应热键的映射。在配置映射中，通用标识符可被映射到执行被标记有通用标识符的功能的热键。在一个实现中，具有已订阅应用404的配置映射的配置文件可预先安装在用户设备402中。在另一实现中，用户设备402可通信地联接到不支持的输入通信系统302以访问已订阅应用404的配置映射。
根据实现，用户可能希望通过不支持的输入设备例如联接到用户设备402的3D运动感测控制器与在用户设备402上运行的已订阅应用404交互。例如，用户可能想要已订阅应用404移动到下一页。相应地，用户可向用户设备402提供不支持的输入，例如与移动到下一页的功能对应的从左向右的手部运动。当用户从左向右移动他的手时，不支持的输入设备捕获不支持的输入，从左向右的手部运动，并将其提供到用户设备402。不支持的输入用于执行在已订阅应用404中的功能。
在一个实现中，对于已订阅应用404，确定模块408可确定与所捕获的不支持的输入对应的已标记通用标识符。采用上面的示例，其中不支持的输入是从左向右的手部运动，与从左向右的手部运动对应的已标记通用标识符可以是“LEFT-TORIGHTSWIPE”。
当确定通用标识符时，决定引擎410可基于已订阅应用404的配置映射来识别被映射到已标记通用标识符的热键。热键可被理解为在已订阅应用中触发功能的键盘的键或键的组合。根据实现，为了识别与已标记通用标识符对应的热键，决定引擎410可访问包括已订阅应用404的配置映射的配置文件。
配置文件可包括已订阅应用404的配置映射连同在用户设备402的操作系统(OS)上运行的几个其它已订阅应用的配置映射。在这样的情形下，决定引擎410可基于已订阅应用的应用名称从配置文件识别用户希望通信的已订阅应用的配置映射。例如，对于沙箱化应用，例如windows商店应用，存在于包清单文件中的包显示名称是windows商店应用的应用名称。
决定引擎410基于已订阅应用404的配置映射来确定被映射到已标记通用标识符的热键。与所确定的热键关联的功能是由不支持的输入预期执行的功能。在本示例中，通用标识符“LEFT-TORIGHTSWIPE”与预期执行功能“移动到下一页”的从左向右的手部运动关联。相应地，决定引擎410识别与移动到下一页的功能关联的热键。在一个示例中，联接到用户设备402的键盘的“右箭头键”可以是与移动到下一页的功能相关的热键。因此，决定引擎410可将“右箭头键”识别为热键。
一旦与通用标识符对应的热键由决定引擎410确定，模拟模块412就可模拟所确定的热键以在已订阅应用404中执行预期的功能。再次参考前一示例，对于通用标识符“LEFT-TORIGHTSWIPE”，对已订阅应用404，在用户设备402的OS内模拟所确定的热键“右箭头键”。
一旦在OS中为已订阅应用404模拟了所确定的热键，已订阅应用404就执行与热键关联的功能。相应地，在本示例中，当所确定的热键“右箭头键”被模拟时，已订阅应用404移动到下一页。因此，响应于由用户执行的从左向右的手部运动，已订阅应用404移动到下一页。因此基于已订阅应用404的配置映射来执行在不支持的输入设备和已订阅应用404之间的交互。
图5示意性示出了根据本主题的示例的、用于与不支持的输入设备通信的系统500。系统500允许应用订阅到不支持的输入设备并进一步提供用于应用与这样的不支持的输入设备交互。
系统500包括通过通信网络502通信地联接到不支持的输入通信系统302的用户设备402。通信网络502可包括全球移动通信系统(GSM)网络、通用移动通信系统(UMTS)网络或使用任一常用的协议的任何其它通信网络，例如超文本传输协议(HTTP)和传输控制协议/互联网协议(TCP/IP)。
在一个实现中，用户设备402可通信地联接到不支持的输入设备504。在一个实现中，不支持的输入设备504可以是三维(3D)运动感测控制器，例如leapmotionTM传感器。
不支持的输入通信系统302可包括具有被创建以将应用订阅到不支持的输入设备504的配置映射508的配置文件506。配置映射508可变成对用户设备402可访问的。基于配置映射508，在用户设备402上执行的一个或多个应用可被订阅到不支持的输入设备504。已订阅应用可被理解为变得支持不支持的输入设备504的应用，使得已订阅应用可读懂由不支持的输入设备504产生的不支持的输入。
在实现中，如前面所述的，用户设备402包括处理器406和连接到处理器406的存储器512。用户设备402还包括接口514。接口514可包括各种市场上可买到的接口，例如外围设备(例如被称为I/O设备的数据输入输出设备、存储设备、网络设备)接口。I/O设备可包括通用串行总线(USB)端口、以太网端口、主机总线适配器及其对应的设备驱动器。接口514便于用户设备402与各种通信和计算设备以及各种通信网络例如使用各种协议例如超文本传输协议(HTTP)和传输控制协议/互联网协议(TCP/IP)的网络通信。在一个实现中，接口514将不支持的输入设备504联接到用户设备402。
用户设备402还可包括操作系统516。操作系统516可执行多个应用。从多个应用当中，被称为已订阅应用518的一个或多个应用可被订阅到不支持的输入设备504。其它模块520也可在操作系统516上执行。操作系统516的其它模块520可包括由用户设备402执行的补充应用或功能的程序或编码指令。
此外，操作系统516还可执行后台服务522，可在用户设备402的操作系统516的后台运行的服务。后台服务522包括模块524和数据526。此外，模块524可包括监听器模块528、确定模块408、决定引擎410和模拟模块412。数据526可包括文件数据530和其它数据532。文件数据530可存储从不支持的输入通信系统302访问的配置映射508。其它数据532可包括由模块524生成并保存的数据，用于提供用户设备402的各种功能。
根据实现，用户可基于具有配置映射508的配置文件506通过不支持的输入设备504与已订阅应用518中的至少一个交互。在一个实现中，为了允许通过不支持的输入设备504与已订阅应用通信，用户设备402可通过通信网络502访问来自不支持的输入通信系统302的配置文件506并存储在文件数据530中。在另一实现中，用户设备402可实时地访问来自不支持的输入通信系统302的配置文件506以使在用户设备402上执行的已订阅应用518能够与不支持的输入设备504交互。
配置文件506可包括用于已订阅应用518中的每个的通用标识符和对应热键的映射。映射使得通用标识符映射到执行被标记有通用标识符的功能的热键。此外，被标记有通用标识符的功能是响应于来自不支持的输入设备504的不支持的输入而在已订阅应用中执行的功能。
在前一示例中所述的不支持的输入设备504是3D运动感测控制器。相应地，不支持的输入可以是手势事件，例如从右向左的手部运动、从左向右的手部运动、从底到顶的手部运动、从顶到底的手部运动和定制开发的3D手势事件。
在操作中，当不支持的输入例如从顶到底的手部运动由用户执行以与至少一个已订阅应用518交互时，3D运动感测控制器捕获手部运动。监听器模块528可接收来自不支持的输入设备504的不支持的输入。确定模块408可接着识别与不支持的输入(即在这种情况下从顶到底的手部运动)对应的通用标识符。通用标识符可被理解为被分配给不支持的输入的清楚地可识别的名称。在本示例中，与从顶到底的手部运动对应的通用标识符可以是“TOP-TO-BOTTOMSWIPE”。
此外，通用标识符可被标记有对应于不支持的输入响应于不支持的输入而在已订阅应用518中预期执行的功能。例如，如果已订阅应用预期响应于从顶到底的手部运动而向下滚动页，则通用标识符“TOP-TO-BOTTOMSWIPE”可被分配给不支持的输入，且向下滚动页的功能可被标记有这个通用标识符。
一旦识别到与不支持的输入对应的通用标识符，决定引擎410可基于已订阅应用518的应用名称来识别用户正在与其交互的已订阅应用518的、来自配置文件506的配置映射。
决定引擎410可接着基于已订阅应用518的配置映射508确定被映射到通用标识符的热键。如前面所解释的，在配置映射中，通用标识符被映射到执行被标记有通用标识符的功能的热键。例如，如果通用标识符是“TOP-TO-BOTTOMSWIPE”且它预期执行向下滚动页的功能，则与功能“向下滚动页”关联的热键被映射到通用标识符。相应地，对于通用标识符“TOP-TO-BOTTOMSWIPE”，可从识别出的配置映射确定与向下滚动页的功能关联的热键“向下箭头键”。
在从配置映射508确定了与通用标识符对应的热键之后，模拟模块412可模拟所确定的热键以在已订阅应用518中执行与热键关联的功能。例如，如果所确定的热键是“向下箭头键”，则向下箭头键在用户设备402的操作系统516内被模拟。一旦所确定的热键被模拟，则模拟模块412就将所模拟的热键发送到已订阅应用518。已订阅应用518可接着将所模拟的热键转换成在已订阅应用518中与那个热键关联的功能。因此实际上，在前述示例中，已订阅应用518响应于通过3D运动感测控制器提供的从顶到底的手部运动的不支持的输入而滚动页面。
虽然关于3D运动感测控制器描述了图5，然而，描述可扩展到任何不支持的输入设备。
根据本主题，应用可基于关联热键的模拟与不支持的输入设备通信。与不支持的输入设备通信的系统和方法不涉及针对应用编码的额外代码。此外，不涉及应用的再开发。而且，根据本系统和方法，甚至沙箱化应用也能与不支持的输入设备通信。与不支持的输入设备通信的系统和方法允许应用基于用户偏好被定制。
图6示出了根据本主题的示例的存储用于使已订阅应用与不支持的输入设备交互的指令的计算机可读介质600。在一个示例中，计算机可读介质600通过通信链路604通信地联接到处理单元602。
例如，处理单元602可以是计算设备，例如服务器、膝上型计算机、桌上型计算机、移动设备，等等。计算机可读介质600可以是例如内部存储器设备或外部存储器设备或任何市场上可买到的非临时性计算机可读介质。在一个实现中，通信链路604可以是直接通信链路，例如任何存储器读/写接口。在另一实现中，通信链路604可以是间接通信链路，例如网络接口。在这样的情况下，处理单元602可通过网络访问计算机可读介质600。处理单元602和计算机可读介质600还可通过网络通信地联接到数据源606。数据源606可包括例如数据库和计算设备。数据源606可由请求者和代理用来与处理单元602通信。
在一个实现中，计算机可读介质600包括一组计算机可读指令，例如具有已订阅应用的配置映射508的配置文件506。这组计算机可读指令可由处理单元602通过通信链路604访问并随后被执行以实施不支持的输入通信的动作。
在由处理单元602执行时，存在于配置映射508中的通用标识符和对应热键的映射可用于执行已订阅应用以与不支持的输入设备交互。
虽然以结构特征和/或方法特有的语言描述了用于与不支持的输入设备通信的实现，应理解，所附权利要求并不一定限于特定的特征或所述方法。更确切地，特定的特征和方法被公开为用于与不支持的输入设备通信的系统和方法的示例。

Claims (15)

1.一种用于将应用订阅到不支持的输入设备的方法，所述方法包括：
对于待被订阅到所述不支持的输入设备的所述应用，获得多个热键中的每个与在所述应用中执行的对应功能的映射；
取回通用标识符的列表，其中所述通用标识符中的每个与所述不支持的输入设备的不支持的输入对应，并且其中所述通用标识符中的每个被标记有响应于对应的不支持的输入而在所述应用中执行的功能；以及
为所述应用生成配置映射，其中所述配置映射包括来自所述通用标识符的列表当中的至少一个通用标识符与所述多个热键中的至少一个的映射，使得所述至少一个通用标识符被映射到执行被标记有所述至少一个通用标识符的功能的热键。
2.如权利要求1所述的方法，还包括向执行所述应用的用户设备提供所述配置映射。
3.如权利要求1所述的方法，还包括用响应于所述对应的不支持的输入而执行的功能标记所述通用标识符中的每个。
4.如权利要求1所述的方法，其中所述配置映射在不支持的输入通信系统的编辑器中生成。
5.如权利要求1所述的方法，其中所述应用是本机桌面应用和沙箱化应用中的一个。
6.如权利要求1所述的方法，其中所述不支持的输入设备是三维(3D)运动感测控制器。
7.一种用户设备，包括：
处理器；
确定模块，联接到所述处理器，用于对于至少一个已订阅应用，确定与从不支持的输入设备接收的不支持的输入对应的已标记通用标识符，其中所述不支持的输入用于执行在所述至少一个已订阅应用中的功能；
决定引擎，联接到所述处理器，用于对于所述至少一个已订阅应用，确定映射到所述已标记通用标识符的热键，其中所述热键与所述功能关联；以及
模拟模块，联接到所述处理器，用于模拟所确定的热键以执行在所述至少一个已订阅应用中的所述功能。
8.如权利要求7所述的用户设备，其中所述用户设备联接到所述不支持的输入设备。
9.如权利要求7所述的用户设备，其中所述不支持的输入是手势事件。
10.如权利要求7所述的用户设备，还包括监听器模块，所述监听器模块联接到所述处理器，用于对于所述至少一个已订阅应用，接收来自所述不支持的输入设备的所述不支持的输入。
11.如权利要求7所述的用户设备，其中所述决定引擎基于配置映射来识别被映射到所述已标记通用标识符的所述热键，所述配置映射包括通用标识符与所述至少一个已订阅应用的对应热键的映射，使得通用标识符被映射到执行被标记有所述通用标识符的功能的热键。
12.如权利要求7所述的用户设备，还包括联接到所述处理器的文件数据，其中所述文件数据包括配置文件，所述配置文件包括订阅到所述不支持的输入设备的所述用户设备的应用的配置映射。
13.如权利要求12所述的用户设备，其中所述不支持的输入设备是leapmotionTM传感器。
14.如权利要求7所述的用户设备，其中所述至少一个已订阅应用是订阅到所述不支持的输入设备的本机桌面应用和沙箱式应用中的一个。
15.一种具有一组计算机可读指令的非临时性计算机可读介质，所述非临时性计算机可读指令在被执行时使用户设备：
对于至少一个已订阅应用，接收来自不支持的输入设备的不支持的输入，其中所述不支持的输入用于执行在所述至少一个已订阅应用中的功能；
对于至少一个已订阅应用，识别与所述不支持的输入对应的已标记通用标识符；
确定被映射到所述已标记通用标识符的所述至少一个已订阅应用的热键，其中所述热键与所述功能关联；并且
模拟所确定的热键以执行在所述至少一个已订阅应用中的所述功能。
CN201380080768.8A 2013-10-31 2013-10-31 与不支持的输入设备的通信 Expired - Fee Related CN105706023B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/IN2013/000675 WO2015063782A1 (en) 2013-10-31 2013-10-31 Communicating with unsupported input device

Publications (2)

Publication Number Publication Date
CN105706023A true CN105706023A (zh) 2016-06-22
CN105706023B CN105706023B (zh) 2019-01-15

Family

ID=53003460

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380080768.8A Expired - Fee Related CN105706023B (zh) 2013-10-31 2013-10-31 与不支持的输入设备的通信

Country Status (3)

Country Link
US (1) US10289219B2 (zh)
CN (1) CN105706023B (zh)
WO (1) WO2015063782A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109117001A (zh) * 2018-07-10 2019-01-01 安徽畅感网络科技有限公司 一种安卓系统陀螺仪事件的转换方法及装置

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170177203A1 (en) * 2015-12-18 2017-06-22 Facebook, Inc. Systems and methods for identifying dominant hands for users based on usage patterns
CN106873999A (zh) * 2017-02-16 2017-06-20 济南浪潮高新科技投资发展有限公司 一种快捷键的设置方法及装置
WO2019033236A1 (zh) * 2017-08-14 2019-02-21 深圳市汇顶科技股份有限公司 终端设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6057845A (en) * 1997-11-14 2000-05-02 Sensiva, Inc. System, method, and apparatus for generation and recognizing universal commands
US7631124B2 (en) * 2007-04-06 2009-12-08 Microsoft Corporation Application-specific mapping of input device elements
CN101644989B (zh) * 2009-09-08 2011-12-21 南京师范大学 基于数字头盔的通用三维虚拟场景实时交互方法
CN102487457A (zh) * 2009-10-26 2012-06-06 中国电信股份有限公司 一种键值映射方法和iptv终端
CN102637116A (zh) * 2012-03-20 2012-08-15 Tcl集团股份有限公司 3d场景交互方法、装置及碰撞检测方法、装置

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6535931B1 (en) * 1999-12-13 2003-03-18 International Business Machines Corp. Extended keyboard support in a run time environment for keys not recognizable on standard or non-standard keyboards
US7603484B2 (en) * 2005-04-21 2009-10-13 Microsoft Corporation Protocol for communication with a user-mode device driver
US8866750B2 (en) 2006-04-10 2014-10-21 Microsoft Corporation Universal user interface device
KR101232059B1 (ko) * 2006-07-27 2013-02-12 삼성디스플레이 주식회사 양면 프리즘 시트 및 이를 가지는 백라이트 어셈블리
US7802082B2 (en) * 2006-08-31 2010-09-21 Intel Corporation Methods and systems to dynamically configure computing apparatuses
US8462109B2 (en) 2007-01-05 2013-06-11 Invensense, Inc. Controlling and accessing content using motion processing on mobile devices
US8554924B2 (en) * 2009-03-16 2013-10-08 Apple Inc. Connection to multiple accessories with multiple accessory-specific protocols
EP2427812A4 (en) 2009-05-08 2016-06-08 Kopin Corp REMOTE CONTROL OF A HOST APPLICATION THROUGH MOTION AND LANGUAGE COMMANDS
US9210213B2 (en) 2011-03-03 2015-12-08 Citrix Systems, Inc. Reverse seamless integration between local and remote computing environments
US10063430B2 (en) 2011-09-09 2018-08-28 Cloudon Ltd. Systems and methods for workspace interaction with cloud-based applications
US20140195582A1 (en) * 2013-01-10 2014-07-10 Packetvideo Corporation System and method for providing an inter-application communication framework
JP5507773B1 (ja) * 2012-07-13 2014-05-28 太郎 諌山 要素選択装置、要素選択方法、および、プログラム
US9539650B2 (en) * 2013-07-08 2017-01-10 John Reid Frick System for positioning and drilling in cabinet, drawer and shelf hardware

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6057845A (en) * 1997-11-14 2000-05-02 Sensiva, Inc. System, method, and apparatus for generation and recognizing universal commands
US7631124B2 (en) * 2007-04-06 2009-12-08 Microsoft Corporation Application-specific mapping of input device elements
CN101644989B (zh) * 2009-09-08 2011-12-21 南京师范大学 基于数字头盔的通用三维虚拟场景实时交互方法
CN102487457A (zh) * 2009-10-26 2012-06-06 中国电信股份有限公司 一种键值映射方法和iptv终端
CN102637116A (zh) * 2012-03-20 2012-08-15 Tcl集团股份有限公司 3d场景交互方法、装置及碰撞检测方法、装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109117001A (zh) * 2018-07-10 2019-01-01 安徽畅感网络科技有限公司 一种安卓系统陀螺仪事件的转换方法及装置
CN109117001B (zh) * 2018-07-10 2024-03-26 安徽畅感网络科技有限公司 一种安卓系统陀螺仪事件的转换方法及装置

Also Published As

Publication number Publication date
CN105706023B (zh) 2019-01-15
US10289219B2 (en) 2019-05-14
US20160252974A1 (en) 2016-09-01
WO2015063782A1 (en) 2015-05-07

Similar Documents

Publication Publication Date Title
KR102078786B1 (ko) 모바일 디바이스 상에서 시뮬레이트된 하이퍼링크들
CN108139849B (zh) 针对用户选择内容的动作建议
EP3129871B1 (en) Generating a screenshot
CA2915619C (en) Method and apparatus for customized software development kit (sdk) generation
TWI671677B (zh) 交互處理方法及裝置
US9342237B2 (en) Automated testing of gesture-based applications
Charkaoui et al. Cross-platform mobile development approaches
CN100430940C (zh) 编程门户应用程序的方法和系统
CN109446570B (zh) 业务流程展示方法、装置、计算机设备以及存储介质
CN106569900A (zh) 应用程序处理方法和装置
CN103777967B (zh) 页面返回方法、页面生成方法和装置
US8949858B2 (en) Augmenting user interface elements with information
CN107229760B (zh) 存储介质、电子装置、网页内容的显示方法和装置
CN109997111A (zh) 跨应用的内容处理
KR20210010521A (ko) 개인 정보를 공유하는 방법, 장치, 단말기기 및 저장 매체
CN105706023A (zh) 与不支持的输入设备的通信
Del Sole Microsoft computer vision apis distilled
CN106775608A (zh) 独立系统进程的实现方法和装置
KR101987183B1 (ko) 프론트-앤드 개발을 지원하는 앱 저작 장치, 앱 저작 도구를 사용한 앱 저작 방법 및 앱 개발 서버
Barsotti et al. A web framework for cross-device gestures between personal devices and public displays
JP6174706B2 (ja) 装置上のフォルダの内容を動的に更新するシステム及び方法
Guo et al. Research on Key Techniques for Enginery Teaching Platform Based on Computer Dynamic Simulation Technique.
CN105630149A (zh) 用于提供包含手语的用户界面的技术
US11573625B2 (en) Pictograms as digitally recognizable tangible controls
Ding et al. Creating multiplatform user interfaces by annotation and adaptation

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190115

CF01 Termination of patent right due to non-payment of annual fee