CN103929464A - 用于检测三维手势以发起和完成联网设备间应用数据传送的系统和方法 - Google Patents

用于检测三维手势以发起和完成联网设备间应用数据传送的系统和方法 Download PDF

Info

Publication number
CN103929464A
CN103929464A CN201310750472.4A CN201310750472A CN103929464A CN 103929464 A CN103929464 A CN 103929464A CN 201310750472 A CN201310750472 A CN 201310750472A CN 103929464 A CN103929464 A CN 103929464A
Authority
CN
China
Prior art keywords
equipment
gesture
network
data
hardware
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310750472.4A
Other languages
English (en)
Other versions
CN103929464B (zh
Inventor
伊凡·埃兹吉雷
卢克·哈维
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN103929464A publication Critical patent/CN103929464A/zh
Application granted granted Critical
Publication of CN103929464B publication Critical patent/CN103929464B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38Information transfer, e.g. on bus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

提供了用于检测三维手势的装置和方法。所述方法包括:由嵌入在具有多个互连硬件的网络中的至少一个三维运动感测输入设备检测用户的三维手势;基于所检测手势选择与网络中的第一设备上被执行、存储或显示的应用相对应的应用数据,以发送给网络中的第二设备;向与第二设备相关联的硬件和软件发送所选应用数据;以及在第二设备上实施所选应用数据的执行、存储或显示中的至少一个,其中所述至少一个三维运动感测输入设备包括手势检测硬件和软件。

Description

用于检测三维手势以发起和完成联网设备间应用数据传送的系统和方法
技术领域
本发明涉及用于检测手势以发起设备间数据传送的系统以及控制所述系统的方法。更具体地,本发明涉及一种装置和方法,用于检测三维手势以发起和完成在联网设备间传送应用数据。
背景技术
移动设备发展为在用户之间提供无线通信。随着技术的进步,除了简单电话会话之外,移动终端现在还提供许多其它功能。例如,移动终端现在能够提供其他功能,例如,报警、短消息服务(SMS)、多媒体消息服务(MMS)、电子邮件、游戏、短程通信的遥控、使用所安装数字摄像机的图像捕获功能、用于提供音频和视频内容的多媒体功能、日程安排功能以及许多其它功能。由于现在提供多个功能,移动终端实际上已成为日常生活的必需品。
移动设备通常合并在多种类型的计算机和通信网络中。例如,众所周知,传统网络是通过允许共享资源和信息的通信信道互连的硬件设备的集合。在传统网络中,一个设备中的进程通常能够向驻留于远程设备中的至少一个进程或至少一个硬件发送数据以及从其接收数据。存在若干类型的网络,且可基于用于传输数据的介质、使用的通信协议、网络的规模或范围等中的任何一个来对其进行分类。
网格的类型可以包括局域网(LAN)、城域网(MAN)、广域网(WAN)、全球区域网(GAN)、工作组网络、客户-服务器网络、内联网、外联网等中的任何一种。
目前,存在用基于触摸的接口在两个设备之间发起文件传送的系统和方法。然而,这种方法需要物理地触摸发送设备。该方法的第二个缺点是只能够传送文件;不考虑在多种操作状态下的应用,例如,开启的窗口以及涉及易失性存储器的其它应用状态。
图1A和1B是示出了根据相关技术,用基于触摸的接口在两个设备之间发起文件传送的方法的图。
参考图1A和1B,示出了移动设备的触摸屏100上的轻拂手势的开始图像和结束图像。图1A示出了触摸屏100,在其上用户手指110触摸显示器以选取与特定数据文件相关联的图形元素120。用户110将显示器指向用户110希望向其成送文件的目标设备的方向。假定目标设备刚好在触摸屏100的指向边缘140旁。接下来,如图1B所示,用户手指110执行快速拖曳手指的轻拂手势。在轻拂手势期间,用户手指110保持与触摸屏显示器100的接触。
此外,使用预定手势来提供在多触摸设备之间传送对象的直观方式的系统是公知的。在这些系统中,例如捏拢(pinch)动作等第一手势用于选择对象以便从源设备进行发送。例如张开(de-pinch)手势等第二手势用于在第二设备上指定该对象的目的地。可以使用与发送的发起方相关联的数据,例如,代表指纹扫描的数据,以便将源设备与目的地设备进行匹配。然而,该方法也需要物理地触摸设备以便发起文件传送。
图2是示出了根据相关技术,使用预定手势以便在多触摸设备之间传送对象的方法的流程图。
参考图2,流程图示出了用户使用源多触摸设备传送对象的过程200。在步骤210,设备检测它表面上的预定手势。在步骤220,根据预定手势确定用户界面上的位置。在步骤230,识别用户。例如,可以通过在用户触摸设备时识别用户指纹来识别用户。在步骤240,从潜在的目的地设备接收广播信号。在步骤250,将用户数据发送给潜在的目的地设备。在步骤260,从请求所述对象的目的地设备接收信号。在步骤270,传送该对象。
此外,已知基于三维运动对单个设备上的图形对象进行多种修改的方法。然而,该方法的缺点包括它局限于单个设备上的对象操控,且不涉及向多个设备传送应用数据或应用状态信息。
图3是示出了根据相关技术,基于三维运动对单个设备上的图形对象进行修改的方法的图。
参考图3,用户通过在触摸屏310上拖曳例如手指来绘制闭合曲线,来在移动终端300的触摸屏310上设置编辑区域320。在设置编辑区域320之后,如果用户在与编辑区域320的边界的垂直上方区域相对应的位置处捏拢两个手指而不触摸触摸屏310,则移动终端300的3D接近传感器识别该手势,控制器识别出捏拢了编辑区域320。此后,如果用户在触摸屏310的水平方向上移动手指,则编辑区域320可以在触摸屏310的水平方向上扩展。该方法的缺点是它局限于单个设备,不涉及向其它设备传送数据。
目前,不存在允许用户使用手势在设备之间更方便地传送应用和相关数据的技术。
因此,需要使用三维手势来在设备之间传送应用和相关数据的系统和方法。具体地,需要通过检测和识别三维空间中的常见或预定手势,来发起和完成在联网设备之间传送应用数据的更直观系统和方法。
以上信息作为背景信息提供,仅帮助本公开的理解。对于上述任何内容是否可作为关于本发明的现有技术没有任何判定也没有任何断言。
发明内容
本发明的方面在于解决至少上述问题和/或缺点,并至少提供下述优点。因此,本发明的一个方面在于提供一种装置和方法,用于检测三维手势以发起并完成联网设备间的应用数据传送。
根据本发明的一个方面,提供了一种检测三维手势的方法。所述方法包括:由嵌入在具有多个互连硬件的网络中的至少一个三维运动感测输入设备检测用户的三维手势;基于所检测手势,选择与网络中的第一设备上被执行、存储或显示的应用相对应的应用数据,以便发送给网络中的第二设备;向与第二设备相关联的硬件和软件发送所选应用数据;以及在第二设备上实施所选应用数据的执行、存储或显示中的至少一个,其中所述至少一个三维运动感测输入设备包括手势检测硬件和软件。
根据本发明的另一方面,提供了一种网络。所述网络包括:多个互连硬件;三维运动感测输入设备,包括用于检测三维手势的手势检测硬件和软件;选择单元,用于基于所检测手势选择与网络中的第一设备上被执行、存储或显示的应用相对应的应用数据,以便发送给网络中的第二设备;以及发送单元,向与第二设备相关联的硬件和软件发送所选应用数据;其中至少一个互连硬件在第二设备上实施所选应用数据的执行、存储或显示中的至少一个。
以下详细描述结合附图公开了本发明的示例实施例,通过以下详细描述,本领域技术人员将更清楚本发明的其他方面、优点和突出特征。
附图说明
结合附图,根据以下详细描述,本发明的特定示例实施例的上述和其他方面、特征以及优点将更清楚,附图中:
图1A和1B是示出了根据相关技术,用基于触摸的接口在两个设备之间发起文件传送的方法的图;
图2是示出了根据相关技术,使用预定手势在多触摸设备之间传送对象的方法的流程图;
图3是示出了根据相关技术,基于三维运动对单个设备上的图形对象进行修改的方法的图;
图4是示出了根据本发明示例实施例,检测三维手势以发起和完成在联网设备之间传送应用数据的流程图;
图5是示出了根据本发明示例实施例,检测三维手势以发起和完成在联网设备之间传送应用数据的图;
图6是示意性地示出了根据本发明示例实施例的通信网络的配置的框图;以及
图7是示意性地示出了根据本发明示例实施例的移动终端的配置框图。
贯穿附图,应注意相似的附图标记用于表示相同或相似的元素、特征和结构。
具体实施方式
提供了参照附图的以下描述来帮助全面理解权利要求及其等同物定义的本发明的示例实施例。以下描述包括多种特定细节来帮助理解,但是这些特定细节应仅视为示例性的。因此,本领域一般技术人员将认识到可以在不背离本发明范围和精神的前提下对这里所述示例进行多种改变和修改。此外,为了清楚和简要的目的,省略对公知功能和结构的描述。
以下描述和权利要求中使用的术语和词语不限于字面含义,而是发明人仅用于达到对本发明的清楚和一致理解。因此,本领域技术人员应清楚,提供了本发明示例实施例的以下描述仅用于说明目的,而不是要限制权利要求及其等同物限定的本发明。
应该理解,除非文中明确指出,否则单数形式的“一”、“一种”和“该”还旨在包括复数形式。因此,例如,对于“一个组件表面”的引述包括对于一个或多个这种组件表面的引述。
术语“实质上”的含义是不需要确切地达到所述特性、参数或值,而是在不妨碍特性要提供的效果的范围内可以出现偏离或变化,例如包括本领域技术人员熟知的容限、测量误差、测量精度限制和其他因素。
本发明示例实施例包括一种系统和方法,用于检测三维手势以以发起和完成在联网设备之间传送应用数据。例如,应用数据可以是文件系统上存储的非易失性数据和/或易失性数据,例如关于存储器和/或视频、音频或其它缓冲中存储应用的状态的数据。应用数据不限于这里所述,且可以与网络内的一个或多个互连硬件上执行、存储或显示的应用相对应。例如,用户可以与当前运行在窗口中并显示在网络内的第一固定设备或第一移动设备的显示器上的软件应用进行交互,并希望向网络内的第二设备发送或复制图像和/或与第一设备上正显示的软件应用相关联的有关应用数据。也就是说,例如用户可以在相对第一设备的显示器位于预定位置处且离第一设备的显示器预定距离内的空间中做出预定或直观手势,由合并到系统中的三维检测传感器检测该手势。三维检测传感器可以将手势解释为指示选择第一设备显示器上显示的打开的程序或应用(或其窗口)。用户在相对第一或第二设备的显示器(或其它指定特征)位于预定位置处并离第一或第二设备显示器预定距离内的空间中进行另一预定或直观手势。该手势识别所需第二(目标)设备并完成从第一设备向所需第二设备发送或复制所选图像和/或有关应用数据,并可以在所需第二设备上显示所选图像和/或有关应用数据。
图4是示出了根据本发明示例实施例,检测三维手势以发起和完成在联网设备之间传送应用数据的流程图。
参考图4,描述了本发明示例实施例的过程400,其中,在步骤410,用户可以首先对网络进行校准,以便可以准确识别和认识用户手势,或推算网络组件和/或设备相对于彼此和/或相对于用户的方向、朝向、距离等。在一些示例中,校准不是必要的。例如,用户可以决定使用系统已经能够识别的预定手势,或用户可以使用其中获取和使用了来自先前校准的校准信息的预定设置。
在步骤420,用户可以打开应用,或确定存在打开的应用或在第一设备上显示的其它数据。应用或其它数据不限于这里所述,且可以是例如文件系统上存储的非易失性数据和/或易失性数据,例如关于存储器和/或视频、音频或其它缓冲中存储的应用的状态的数据。应用数据可以与网络内的一个或多个互连硬件上被执行、存储或显示的应用相对应。例如,用户可以在窗口中打开软件应用,或选择当前运行的并显示在第一设备显示器上的打开的软件应用。备选地,用户可以选择与应用及其相关联数据和文件有关的图标。识别和选择的应用及有关数据或文件的类型不限于这里所述。
在步骤430,用户执行第一手势,以便选择和令系统识别用户希望选择的所需应用数据或文件,并发起所选数据获文件的传送以向目标设备传送或复制所选数据或文件。在步骤440,用户执行第二手势,以便识别所需的第二(目标)设备,并完成从第一设备向所需第二设备传送或复制所选图像和/或有关应用数据。
图5是示出了根据本发明示例实施例,检测三维手势以发起和完成在联网设备之间传送应用数据的图。
参考图5,示出了计算机网络500。网络内有分别由设备1510和设备2520表示的第一设备和第二设备,以及三维运动感测输入设备530。在相对指定的网络组件的预定空间位于中的用户540执行对选择设备1512显示器570上显示的应用560加以指示的第一手势550。三维运动感测输入设备530检测该手势并在显示器560上指示所选项目。用户540在执行第一手势540的时间点后的预定时间段内执行第二手势580,这在相对于设备显示器570(或其它指定特征)位于预定位置出且离设备显示器570(或其它指定特征)预定距离内的空间中执行。所检测的手势识别所需目标设备(设备2)520,并发起从设备1510向设备2520传送或复制所选图像和/或有关应用数据560。
设备1510和设备2520可以都是移动终端、个人计算设备、媒体播放器、电视、立体声、数码相框、和/或配置为在网络内并以相关格式发送应用和数据文件以及接收对应用和数据文件的发送的任何其它设备。
三维运动感测输入设备530可以是商用三维运动感测输入设备530,例如,由Leap Motion提供的三维运动感测通用串行总线(USB)配件,设计为允许用户使用简单的手部和手指手势来控制个人计算机。另一合适且商用的运动和手势识别设备是Microsoft的Kinect。
在本发明示例实施例中,不限制第一手势和第二手势,且可以都是任意手势,例如,预定手势或直观手势。作为预定手势的手势可以或可以不是直观手势,且反之亦然。在示例实施例中,合适手势可以或可以不是任意的。
在示例实施例中,第一手势和第二手势可以是抓握手势或投掷手势。抓握手势可以是用于抓握对象的任何预定或直观手势,例如,握拳手势。类似地,投掷手势可以是用于投掷对象的任何预定或直观手势,例如,高手(overhand)投掷动作,开始时用户手臂弯曲且用户拳头为紧握手势,结束时用户手臂向设备2伸展且用户手部为张开手势。
然而,不限制示例实施例的合适手势,且合适手势也可以是例如捏拢手势、戳插(poke)手势、敲击手势、画圆手势、挑拣(pick)手势、紧握手势、或隐含或旨在引起对设备上执行、存储或显示的项目、文件或应用和/或有关数据的选择和/或传输的任何其它手势中的任何一个。类似地,合适手势可以是例如反手投掷或撞击(strike)手势、击打(punch)手势、抛掷手势、喷洒(spritz)手势、轻弹手势、或隐含或旨在引起对设备上显示的或安装的项目、文件或应用和/或有关数据的选择和/或传输的任何其它手势中的任意一个。多种其它合适手势包括,例如,挥击(swipe)手势、画圈手势、手语手势或任何其它手势。
在本发明示例实施例中,可以在相对于任意网络组件(包括任何虚拟组件或云资源)成任意指定朝向的方向上执行第一手势和第二手势。例如,可以在与设备1、设备2或三维运动感测输入设备中的任何一个成正交或基本正交的方向上执行第一手势和第二手势。此外,可以在垂直于任意网络组件(例如,设备1、设备2或三维运动感测输入设备)或相对于任意网络组件成任意其它方向性的朝向上执行第一手势和第二手势。也可以在与任意网络设备位置无关的指定方向上执行第一手势和第二手势。
本发明示例实施例的三维运动感测输入设备可以是任何传统的三维运动感测输入设备,能够检测用户的直观或预定手势,并能够识别手势是例如选择手势、抓握手势、投掷手势等。当前可用的合适三维感测输入设备的示例是Microsoft Kinect和Leap Motion三维输入感测设备。
在本发明示例实施例中,三维运动感测输入设备可以合并到其它网络组件中,例如,移动设备或个人计算机,或可以是网络内的独立设备,例如,壁挂式、台式或独立式设备。此外,网络可以包括多于一个的三维运动感测输入设备。每个三维运动感测输入设备可以具有自己的指定检测区域,或可以配置为与一个或多个其它三维运动感测输入设备检测相同的手势。此外,三维运动感测输入设备可以距用户、用户手势或任何网络组件(包括虚拟组件或云资源)任何合适距离,且可以相对于用户、用户手势或任何网络组件(包括虚拟组件或云资源)成任何朝向。合适距离可以包括小距离,例如毫米,或大距离,例如三维运动感测输入设备能够准确获取足够手势信息的任意距离。合适朝向可以包括任意朝向,例如,正交朝向、垂直朝向、空中(aerial)朝向或任何其它朝向。
在本发明示例实施例中,三维运动感测输入设备可以配置为识别作为多部分手势的手势或具有部分时间延迟的手势。例如,当抓握手势与投掷手势在时间上分离且早于投掷手势一段时间来执行时,三维运动感测输入设备可以识别抓握和投掷手势。
在示例实施例中,可以在使用之前对系统校准,以便系统可以准确检测特定手势或特定用户。系统校准也可以帮助系统推断网络设备和组件相对彼此和/或用户的朝向、距离和/或方向。
图6是示意性地示出了根据本发明示例实施例的通信网络的配置的框图。
参考图6,根据本发明示例实施例示出了通信网络600。网络包括路由器610、服务器620、独立三维运动感测输入设备630、交换机640、个人计算机650、移动设备660和包括三维运动感测输入设备的个人计算机670。
路由器610是将网络600与互联网相连接的传统路由器。服务器620可以是传统局域网(LAN)服务器,例如,具有一个或多个处理器、RAM和存储装置(例如,硬盘阵列)。服务器的处理性能和存储器配置为同时运行若干应用。独立三维运动感测检测单元630可以是任何商用三维运动感测检测单元。交换机640可以是传统交换机,并用作能够使联网设备高效通信、共享并分配资源的控制器。个人计算机650和移动设备660可以分别是例如任何类型的手持、平板、台式类型或其它类型的通信或计算设备,其中许多在本领域使用广泛并且是公知的。个人计算机670可以在机身上合并任何商用三维运动感测检测单元。三维运动感测检测单元可以与独立三维运动感测检测单元650相同或不同。
本发明的网络不限于这里所述实施例,且可以包括例如使得第一设备的用户可以从多个可能目标设备中选择目标设备的任何架构和相关计算基础设施。在示例实施例中,网络知道每个联网设备的相对位置。因此,一旦进行了选择,可以通过网络从第一设备向目标设备传输所需数据文件。因此,应该认为在本发明示例实施例中包括特定硬件和软件,例如,使得希望从第一设备向第二设备发送应用数据的用户可以识别并选择联网环境中的目标电子设备的硬件和软件、及使得从第一设备向所选第二设备通信数据的硬件和软件。多种架构可以是合适的且在本领域中公知的。例如,U.S专利申请公开No.2006/0241864和2006/0256008各自描述了有关系统架构,本文可以多样化地并可选择地包括这些系统架构的元件。
在示例实施例中,网络组件和设备的数量不限。例如,除了图6所示组件和设备之外,网络还可以包括多个组件和设备,且所述组件和设备可以在用户的本地环境中或可以不在用户的本地环境中。网络的其它设备和组件可以是移动终端、个人计算设备、网络服务器或打印机、媒体播放器、电视、立体声、数码相框和/或配置为在网络内并接受从第一设备发送相关格式的应用和数据文件的其它任何设备中的任何一个。
在本发明示例实施例中,第一设备可以在距目标设备预定距离之内和/或相对于目标设备的预定位置处,以进行对应用数据或文件的发送。因此,可以由用户或由网络组件至少部分地基于哪个设备最接近第一设备、哪个设备满足所发送的应用或数据的处理、存储或其它要求等,来选择第二设备。因此,多种措施可用于允许或帮助网络组件或设备(例如,移动终端)的用户选择最优选的目标设备。
本发明中合适的网络类型不限于这里所述示例实施例,且可以包括局域网(LAN)、城域网(MAN)、广域网(WAN)、全球区域网(GAN)、个域网(PAN)、工作组网络、客户-服务器网络、内联网、外联网等中的任何一种。LAN可以是通常在单个建筑物中设置的较小计算机网络。MAN可以是覆盖城镇或自治区的网络。WAN可以是覆盖较大地理区域(例如,国家或洲)的网络。PAN可以是单人的网络。全球区域网(GAN)可以是全球覆盖的网络。工作组网络可以包括可彼此互连的台式计算机的集合,而没有专门强调具体计算机或硬件。任何前述网络也可以使用不同技术(例如,卫星通信、蓝牙、Wi-Fi、无线宽带(Wi-Bro)等)的组合。
图7是示意性地示出了根据本发明示例实施例的移动终端的配置框图。
参考图7,移动终端700包括控制器710、存储单元720、显示单元730、输入单元740、近场通信(NFC)单元750、通信单元760和三维运动感测输入设备770。
根据本发明示例实施例,移动终端700可以配置为通过图6的网络向至少一个设备(例如,移动终端)发送数据。根据本发明示例实施例,移动终端700可以配置为选择(例如,能够使用户选择)数据以便向其它设备发送。例如,移动终端700可以配置为识别并拷贝数据以便发送到剪切板,该剪切板聚集用于发送的数据并将每个数据(例如,每个项目)与被授权粘贴或下载该数据的设备相关联。根据本发明示例实施例,移动终端700可以配置为与至少一个服务器(例如,基于云的服务器)通信,以便通过服务器(例如,通过云)向目标设备发送数据。当在至少一个服务器中登记了移动终端700时,可以从该服务器向移动终端700分配标识符。其它设备可以使用与移动终端700相关联的标识符来定位移动终端700的位置或在服务器上定位由移动终端700上传的数据。
根据本发明示例实施例,存储单元720可以存储用户数据等,以及执行操作功能的程序。例如,存储单元720可以存储用于控制移动终端700的普通操作的程序、引导移动终端700的操作系统(OS)、以及用于执行其它可选功能(例如,摄像机功能、声音回放功能、图像或视频回放功能、NFC功能、三维运动感测输入设备770)的应用程序等。
此外,存储单元720可以存储根据移动终端的用户产生的用户数据,例如,文本消息、游戏文件、音乐文件、电影文件等。具体地,根据本发明示例实施例的存储单元720可以存储表格,表格存储了所发送数据与该数据可以发送到的设备的映射。例如,存储单元720可以存储至少一个数据项目与该数据可以发送到或请求发送该数据的设备之间的关联。
NFC单元750可以配置为通过NFC与其它设备通信。根据本发明示例实施例,NFC单元750可以配置为自动与其它设备配对。例如,当将移动终端700置于接近其它支持NFC的设备时,NFC单元750可以将移动设备700与其它支持NFC的设备配对。在配对过程中,NFC单元750与其它支持NFC的设备通信连接数据。NFC配对可以与图6的网络分开使用或与图6的网络结合使用,以便在彼此知道的设备之间通信连接信息。根据本发明示例实施例,NFC单元750可以在接收方移动终端确认数据传送之前,向接收方移动终端发送一些数据,例如,元数据。可以在接收方移动终端确认数据传送之前发送的数据可以包括,例如,文件名称、文本的前几个词、文件或数据大小、源设备名称等。
通信单元760配置为与其它设备通信。例如,通信单元760可以配置为通过图6的网络进行通信。根据本发明示例实施例,在网络内登记或识别移动终端700之后,移动终端700可以经由通信单元760通过网络向其他设备发送数据。根据本发明示例实施例,在第二(目标)网络组件或设备确认数据传送之前,通信单元760可以向第二(目标)网络组件或设备发送一些数据,例如,应用数据、元数据或其它数据。可以在第二(目标)网络组件或设备确认数据传送之前发送的数据可以包括例如,文件名称、文本的前几个词、文件或数据大小、源设备名称等
输入单元740可以包括用于接收用户输入的输入键以及功能键。例如,输入单元740可以包括输入键和功能键,用于接收数字或多组字母信息的输入,设置多种功能并控制移动终端700的功能。例如,输入单元740可以包括用于请求语音呼叫的呼叫键、用于请求视频呼叫的视频呼叫请求键、用于请求结束语音呼叫或视频呼叫的结束键、用于调整音频信号输出音量的音量键、方向键等。具体地,根据本发明示例实施例的输入单元740可以向控制器710发送与要发送数据的选择和/或该数据要发送到的设备的选择有关的信号。这种输入单元740可以由一个输入装置或输入装置的组合构成,例如,触摸板、触摸屏、按钮型键盘、操控杆、转轮键等。
显示单元730显示由用户输入的信息或向用户提供的信息,以及移动终端700的多种菜单。例如,显示单元730可以根据移动终端700的用户提供多种屏幕,例如,待机屏幕、消息写入屏幕、呼叫屏幕等。具体地,根据本发明示例实施例的显示单元730可以显示菜单。菜单可以包括关于设备间数据传送功能的列表。例如,菜单可以包括包含了与向设备拷贝数据、从设备粘贴数据、剪切数据并向设备粘贴该数据等相对应的功能的列表。可以显示菜单以便用户能够选择要发送的数据和/或选择该数据要发送到的设备。例如,显示单元530可以显示用户可操控的或通过触摸屏进行输入的界面,以便键入对要发送数据的选择或对该数据要发送到的设备的选择。显示单元730可以由液晶显示器(LCD)、有机发光二极管(OLED)、有源矩阵有机发光二极管(AMOLED)等构成。然而,本发明不限于这些示例。此外,如果显示单元730构成为触摸屏,则显示单元730可以执行输入单元740的功能。
根据本发明示例实施例,移动终端包括至少一个控制器710。该至少一个控制器710可以配置为在操作上控制移动终端700。例如,控制器710可以控制操作移动终端700包括的多个组件或单元的操作。控制器710可以向移动终端700包括的多个组件发送信号,并控制移动终端700内部块之间的信号流。具体地,根据本发明示例实施例的控制器710可以控制:选择要发送的数据;选择该数据要发送到的至少一个设备;从该数据要发送到的设备接收对发送的指示;接收向其他设备发送数据的确认;将所发送数据与该数据要发送到的设备相联系;将数据拷贝到用于聚集所发送数据的剪切板;在移动终端700确认完成或停止(例如,由第一移动终端700或其它移动终端的用户明确指示,或通过超时)向其他移动终端粘贴数据之后删除与剪切功能相关联的数据;以及将向剪切板拷贝的数据与该数据要发送到的对应设备相关联的标识符一起登记。根据本发明示例实施例,控制器710可以配置为控制在接收方移动终端确认数据传送之前,向接收方移动终端发送一些数据,例如,元数据。可以在接收方移动终端确认数据传送之前发送的数据可以包括,例如,文件名称、文本的前几个词、文件或数据大小、源设备名称等。接收方移动终端的用户可以至少部分基于在确认数据传送之前发送的数据,查看并选择哪个数据来发送。例如,在确认数据传送之前发送的数据可以用于使用户做出关于向接收方设备粘贴哪个数据的更明达的决定。
根据本发明示例实施例,移动终端可以可选择地包括至少一个三维运动感测输入设备770。所述至少一个三维运动感测输入设备770可以配置为根据本领域公知的配置和方法结合至少一个控制器710来进行操作,这里所述配置和方法通过引述合并与此。
尽管参考本发明的特定示例实施例示出并描述了本发明,然而本领域技术人员将理解,在不脱离由所附权利要求及其等同物限定的本发明的精神和范围的前提下,可以在其中进行形式和细节上的多种改变。

Claims (15)

1.一种用于检测三维手势的方法,所述方法包括:
由嵌入在具有多个互连硬件的网络中的至少一个三维运动感测输入设备检测用户的三维手势;
基于所检测的手势,选择与网络中的第一设备上被执行、存储或显示的应用相对应的应用数据,以发送给网络中的第二设备;
向与第二设备相关联的硬件和软件发送所选应用数据;以及
在第二设备上实施所选应用数据的执行、存储或显示中的至少一个,
其中所述至少一个三维运动感测输入设备包括手势检测硬件和软件。
2.根据权利要求1所述的方法,其中所述至少一个三维运动感测输入设备以包括在另一硬件中的方式嵌入在网络内,或作为独立设备嵌入在网络内。
3.根据权利要求1所述的方法,其中所述至少一个三维运动感测输入设备包括在移动设备中。
4.根据权利要求1所述的方法,其中所检测的手势包括用户执行的抓握手势和投掷手势。
5.根据权利要求4所述的方法,其中所述抓握手势发生在离第一设备预定距离内且与第一设备成正交朝向,所述投掷手势发生在离第二设备预定距离内且与第二设备成正交朝向。
6.根据权利要求4所述的方法,其中所述抓握手势包括握拳动作,所述投掷手势包括反手挥动动作。
7.根据权利要求4所述的方法,其中所述抓握手势包括捏拢手势或敲击手势,所述投掷手势包括高手投掷手势。
8.根据权利要求1所述的方法,还包括:基于投掷手势相对于第二设备的方向和距离,确定第二设备。
9.根据权利要求1所述的方法,其中所述应用数据包括第一设备显示的打开的软件应用。
10.根据权利要求1所述的方法,其中与第一设备相关联的硬件是个人计算机、网络服务器或移动设备,与第二设备相关联的硬件是个人计算机、网络服务器或移动设备。
11.一种网络系统,包括:
多个互连硬件;
三维运动感测输入设备,包括用于检测三维手势的手势检测硬件和软件;
选择单元,用于基于所检测的手势选择与网络中的第一设备上被执行、存储或显示的应用相对应的应用数据,以发送给网络中的第二设备;以及
发送单元,向与第二设备相关联的硬件和软件发送所选应用数据,其中至少一个互连硬件在第二设备上实施所选应用数据的执行、存储或显示中的至少一个。
12.根据权利要求11所述的系统,还包括:
至少一个硬件,合并有至少一个三维运动感测输入设备。
13.根据权利要求11所述的系统,其中至少一个三维运动感测输入设备作为独立设备嵌入在网络内。
14.根据权利要求12所述的系统,其中至少一个三维运动感测输入设备合并在移动设备中。
15.根据权利要求11所述的系统,其中由至少一个三维运动感测输入设备检测的手势包括用户执行的抓握手势和投掷手势。
CN201310750472.4A 2013-01-11 2013-12-31 用于检测三维手势以发起和完成联网设备间应用数据传送的系统和方法 Expired - Fee Related CN103929464B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/739,934 2013-01-11
US13/739,934 US9910499B2 (en) 2013-01-11 2013-01-11 System and method for detecting three dimensional gestures to initiate and complete the transfer of application data between networked devices

Publications (2)

Publication Number Publication Date
CN103929464A true CN103929464A (zh) 2014-07-16
CN103929464B CN103929464B (zh) 2019-02-19

Family

ID=49683573

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310750472.4A Expired - Fee Related CN103929464B (zh) 2013-01-11 2013-12-31 用于检测三维手势以发起和完成联网设备间应用数据传送的系统和方法

Country Status (5)

Country Link
US (1) US9910499B2 (zh)
EP (1) EP2755111A3 (zh)
KR (1) KR102135052B1 (zh)
CN (1) CN103929464B (zh)
AU (1) AU2013260700A1 (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104182052A (zh) * 2014-09-05 2014-12-03 苏州触达信息技术有限公司 多媒体设备有效空间范围内快速交互方法
CN104244055A (zh) * 2014-08-29 2014-12-24 苏州触达信息技术有限公司 多媒体设备有效空间范围内实时交互方法
CN104536576A (zh) * 2015-01-12 2015-04-22 苏州触达信息技术有限公司 基于超声波的同一平面内多媒体设备间手势交互方法
CN104571503A (zh) * 2014-12-22 2015-04-29 苏州触达信息技术有限公司 空间内多媒体设备群的交互控制方法
CN105786388A (zh) * 2016-03-02 2016-07-20 惠州Tcl移动通信有限公司 一种基于近距离感应的应用控制方法、系统及移动终端
CN109413257A (zh) * 2016-12-20 2019-03-01 国基电子(上海)有限公司 电子装置及其数据分享方法
CN110168489A (zh) * 2017-01-12 2019-08-23 微软技术许可有限责任公司 使用取向感测的悬停交互
CN111656303A (zh) * 2017-12-20 2020-09-11 诺基亚技术有限公司 数据处理装置的手势控制
CN112272191A (zh) * 2020-11-16 2021-01-26 Oppo广东移动通信有限公司 数据转移方法及相关装置

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5768347B2 (ja) 2010-09-07 2015-08-26 ソニー株式会社 情報処理装置、情報処理方法およびコンピュータプログラム
US8171137B1 (en) 2011-05-09 2012-05-01 Google Inc. Transferring application state across devices
US10404615B2 (en) 2012-02-14 2019-09-03 Airwatch, Llc Controlling distribution of resources on a network
US9680763B2 (en) 2012-02-14 2017-06-13 Airwatch, Llc Controlling distribution of resources in a network
US20140280955A1 (en) 2013-03-14 2014-09-18 Sky Socket, Llc Controlling Electronically Communicated Resources
US9526120B2 (en) * 2013-03-15 2016-12-20 Google Inc. Techniques for context-based application invocation for short-range wireless communication interactions
US9401915B2 (en) * 2013-03-15 2016-07-26 Airwatch Llc Secondary device as key for authorizing access to resources
US9417704B1 (en) * 2014-03-18 2016-08-16 Google Inc. Gesture onset detection on multiple devices
US10782657B2 (en) * 2014-05-27 2020-09-22 Ultrahaptics IP Two Limited Systems and methods of gestural interaction in a pervasive computing environment
EP2961209A1 (en) * 2014-06-25 2015-12-30 Thomson Licensing Method and device for pairing devices
US9584964B2 (en) 2014-12-22 2017-02-28 Airwatch Llc Enforcement of proximity based policies
US9672418B2 (en) 2015-02-06 2017-06-06 King Fahd University Of Petroleum And Minerals Arabic sign language recognition using multi-sensor data fusion
US10534852B2 (en) * 2015-09-30 2020-01-14 Samsung Display Co., Ltd. Display system and virtual web device in the cloud
US20170164162A1 (en) * 2015-12-08 2017-06-08 Nissim Zur LumenGlow™ virtual switch
US11188143B2 (en) * 2016-01-04 2021-11-30 Microsoft Technology Licensing, Llc Three-dimensional object tracking to augment display area
JP6360112B2 (ja) 2016-07-27 2018-07-18 京セラ株式会社 電子機器
JP2018018549A (ja) * 2017-11-01 2018-02-01 京セラ株式会社 電子機器
CN113762667B (zh) * 2020-08-13 2024-07-19 北京京东振世信息技术有限公司 一种车辆调度方法和装置
US12032736B2 (en) * 2022-02-23 2024-07-09 International Business Machines Corporation Gaze based text manipulation
WO2023211844A1 (en) * 2022-04-25 2023-11-02 Apple Inc. Content transfer between devices
US20240171535A1 (en) 2022-11-23 2024-05-23 Music Makes Us Feels, Llc Multimedia messaging apparatuses and methods for sending multimedia messages

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020120728A1 (en) * 2000-12-22 2002-08-29 Jason Braatz Method and apparatus for network-enablement of devices using device intelligence and network architecture
US20120038550A1 (en) * 2010-08-13 2012-02-16 Net Power And Light, Inc. System architecture and methods for distributed multi-sensor gesture processing
CN102387131A (zh) * 2011-08-24 2012-03-21 厦门市鼎朔信息技术有限公司 一种基于无线网络和云数据中心的处理系统

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7330974B1 (en) * 1999-05-25 2008-02-12 Silverbrook Research Pty Ltd Method and system for delivery of a secure document
US20060256008A1 (en) 2005-05-13 2006-11-16 Outland Research, Llc Pointing interface for person-to-person information exchange
US8659546B2 (en) 2005-04-21 2014-02-25 Oracle America, Inc. Method and apparatus for transferring digital content
US20060241864A1 (en) 2005-04-22 2006-10-26 Outland Research, Llc Method and apparatus for point-and-send data transfer within an ubiquitous computing environment
DE102006037156A1 (de) 2006-03-22 2007-09-27 Volkswagen Ag Interaktive Bedienvorrichtung und Verfahren zum Betreiben der interaktiven Bedienvorrichtung
US7725547B2 (en) * 2006-09-06 2010-05-25 International Business Machines Corporation Informing a user of gestures made by others out of the user's line of sight
KR20100041006A (ko) 2008-10-13 2010-04-22 엘지전자 주식회사 3차원 멀티 터치를 이용한 사용자 인터페이스 제어방법
US8312392B2 (en) * 2009-10-02 2012-11-13 Qualcomm Incorporated User interface gestures and methods for providing file sharing functionality
US8756532B2 (en) 2010-01-21 2014-06-17 Cisco Technology, Inc. Using a gesture to transfer an object across multiple multi-touch devices
US8593398B2 (en) * 2010-06-25 2013-11-26 Nokia Corporation Apparatus and method for proximity based input
KR101690117B1 (ko) 2011-01-19 2016-12-27 휴렛-팩커드 디벨롭먼트 컴퍼니, 엘.피. 멀티모달 및 제스처 제어를 위한 방법 및 시스템
US20120198353A1 (en) 2011-01-28 2012-08-02 Microsoft Corporation Transferring data using a physical gesture
JP5408188B2 (ja) 2011-05-19 2014-02-05 コニカミノルタ株式会社 会議システム、会議管理装置、会議管理方法およびプログラム
US9557819B2 (en) * 2011-11-23 2017-01-31 Intel Corporation Gesture input with multiple views, displays and physics
US20130219278A1 (en) * 2012-02-20 2013-08-22 Jonathan Rosenberg Transferring of Communication Event
US9086732B2 (en) * 2012-05-03 2015-07-21 Wms Gaming Inc. Gesture fusion
US20140188989A1 (en) * 2012-12-27 2014-07-03 Google Inc. Exchanging content across multiple devices

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020120728A1 (en) * 2000-12-22 2002-08-29 Jason Braatz Method and apparatus for network-enablement of devices using device intelligence and network architecture
US20120038550A1 (en) * 2010-08-13 2012-02-16 Net Power And Light, Inc. System architecture and methods for distributed multi-sensor gesture processing
CN102387131A (zh) * 2011-08-24 2012-03-21 厦门市鼎朔信息技术有限公司 一种基于无线网络和云数据中心的处理系统

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104244055A (zh) * 2014-08-29 2014-12-24 苏州触达信息技术有限公司 多媒体设备有效空间范围内实时交互方法
CN104244055B (zh) * 2014-08-29 2018-08-21 苏州触达信息技术有限公司 多媒体设备有效空间范围内实时交互方法
CN104182052A (zh) * 2014-09-05 2014-12-03 苏州触达信息技术有限公司 多媒体设备有效空间范围内快速交互方法
CN104571503B (zh) * 2014-12-22 2018-01-05 苏州触达信息技术有限公司 空间内多媒体设备群的交互控制方法
CN104571503A (zh) * 2014-12-22 2015-04-29 苏州触达信息技术有限公司 空间内多媒体设备群的交互控制方法
CN104536576B (zh) * 2015-01-12 2017-05-31 苏州触达信息技术有限公司 基于超声波的同一平面内多媒体设备间手势交互方法
CN104536576A (zh) * 2015-01-12 2015-04-22 苏州触达信息技术有限公司 基于超声波的同一平面内多媒体设备间手势交互方法
CN105786388A (zh) * 2016-03-02 2016-07-20 惠州Tcl移动通信有限公司 一种基于近距离感应的应用控制方法、系统及移动终端
CN109413257A (zh) * 2016-12-20 2019-03-01 国基电子(上海)有限公司 电子装置及其数据分享方法
CN110168489A (zh) * 2017-01-12 2019-08-23 微软技术许可有限责任公司 使用取向感测的悬停交互
CN111656303A (zh) * 2017-12-20 2020-09-11 诺基亚技术有限公司 数据处理装置的手势控制
CN112272191A (zh) * 2020-11-16 2021-01-26 Oppo广东移动通信有限公司 数据转移方法及相关装置
CN112272191B (zh) * 2020-11-16 2022-07-12 Oppo广东移动通信有限公司 数据转移方法及相关装置

Also Published As

Publication number Publication date
KR102135052B1 (ko) 2020-07-17
KR20140091439A (ko) 2014-07-21
AU2013260700A1 (en) 2014-07-31
CN103929464B (zh) 2019-02-19
EP2755111A3 (en) 2016-10-19
US20140198024A1 (en) 2014-07-17
EP2755111A2 (en) 2014-07-16
US9910499B2 (en) 2018-03-06

Similar Documents

Publication Publication Date Title
CN103929464A (zh) 用于检测三维手势以发起和完成联网设备间应用数据传送的系统和方法
CN105378624B (zh) 在交互出现于白板上时显示交互
AU2013306539B2 (en) Information transmission method and system, device, and computer readable recording medium thereof
US20190215285A1 (en) Interface for managing messages in a mobile terminal
US9161166B2 (en) Method and apparatus for interconnected devices
CN101876881B (zh) 发送设备和方法、接收设备和方法以及发送/接收系统
US20160139748A1 (en) Mobile terminal, memory, and folder control method
KR102184269B1 (ko) 디스플레이장치, 휴대장치 및 그 화면 표시방법
CN105183408A (zh) 信息处理系统和显示控制方法
WO2021180074A1 (zh) 信息提醒方法及电子设备
CN103455270A (zh) 视频文件传输方法及视频文件传输系统
CN110168487A (zh) 一种触摸控制方法及装置
CN104798362A (zh) 用户终端、外部装置、数据收发系统和数据收发方法
CN104272709A (zh) 推断的上下文的日程表匹配和标签传播
KR20130070045A (ko) 메시지 관리 방법 및 장치
EP2849125A1 (en) Rearranging chat messages
KR102037415B1 (ko) 디스플레이 디바이스 제어 방법 및 시스템과 기록 매체
CN105530607A (zh) 用户推荐方法、装置和系统
KR20170003991A (ko) 협력적 상호작용을 제공하는 시스템 및 방법
CN104395877A (zh) 执行内容自动命名的方法和装置及计算机可读记录介质
CN104937524A (zh) 高级的内嵌式触控光学笔
CN110286836A (zh) 用于移动应用接口元素的设备、方法和图形用户界面
CN103947153A (zh) 搜索网络中的对象的方法和系统
CN102222008A (zh) 界面管理系统及其方法
CA2806804C (en) Method and apparatus for interconnected devices

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190219

Termination date: 20211231