CN105027175A - 基于各设备之间的距离修改功能 - Google Patents

基于各设备之间的距离修改功能 Download PDF

Info

Publication number
CN105027175A
CN105027175A CN201480012152.1A CN201480012152A CN105027175A CN 105027175 A CN105027175 A CN 105027175A CN 201480012152 A CN201480012152 A CN 201480012152A CN 105027175 A CN105027175 A CN 105027175A
Authority
CN
China
Prior art keywords
distance
shared device
pattern
user
computing equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480012152.1A
Other languages
English (en)
Other versions
CN105027175B (zh
Inventor
M·帕赫德
K·P·欣克利
W·A·S·巴克斯顿
G·D·维诺利亚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of CN105027175A publication Critical patent/CN105027175A/zh
Application granted granted Critical
Publication of CN105027175B publication Critical patent/CN105027175B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/10—Program control for peripheral devices
    • G06F13/102—Program control for peripheral devices where the programme performs an interfacing function, e.g. device driver
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00—Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38—Information transfer, e.g. on bus
    • G06F13/382—Information transfer, e.g. on bus using universal interface adapter
    • G06F13/385—Information transfer, e.g. on bus using universal interface adapter for adaptation of a particular data processing system to different peripheral devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/4401—Bootstrapping
    • G06F9/4411—Configuring for operating with peripheral devices; Loading of device drivers
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/90—Additional features
    • G08C2201/91—Remote control based on location and proximity
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/90—Additional features
    • G08C2201/93—Remote control using other portable devices, e.g. mobile phone, PDA, laptop

Abstract

在此描述了允许基于共享设备(例如，共享显示器等)和个体设备(例如，移动计算设备等)之间的距离来修改功能的技术和系统。共享设备和个体设备可建立通信以允许数据交换。在某些实施例中，共享设备或个体设备可测量共享设备和个体设备之间的距离。基于该距离，个体设备可以不同模式操作。在某些实例中，共享设备可接着指令个体设备修改对应于该模式的功能。

Description

基于各设备之间的距离修改功能
背景
在如今的社会中，计算设备随处可见。许多人拥有可加载应用或软件来执行非常具体的操作的计算设备。这些设备，在加载了合适的软件时，可被用来控制设备，诸如电视机、灯、门锁、和其它类型的设备。通常，当计算设备被用来执行现有设备(例如，遥控器等)的功能时，软件设计者为与传统设备具有相同或非常类似的功能的计算设备创建软件。尽管这可允许用户用该计算设备来执行期望的操作，这类设计可能不能够利用因计算设备的使用而可用的性能机会，诸如使用全球定位信息、网络访问、和/或包括在计算设备中的其它功能或硬件。
概述
在此描述了允许基于共享设备(例如，共享显示器等)和个体设备(例如，移动计算设备等)之间的距离和/或基于共享设备和操作个体设备的用户之间的相对朝向来修改功能的方法和系统。
在某些实施例中，共享设备可以与个体设备进行通信。共享设备可接着测量共享设备和个体设备之间的距离。共享设备可将该距离转换成操作模式。共享设备可接着将该操作模式和/或所测量的距离传送到个体设备。该个体设备，在接收到操作模式(或有可能所测量的距离)之后，可接着诸如通过提供对应于从共享设备接收到的操作模式或所测量的距离的用户界面的显示来修改个体设备的功能。在某些实施例中，个体设备可测量共享设备和个体设备之间的距离。
在各种实施例中，共享设备可跟踪与多个个体设备相关联的距离。共享设备可标识各个体设备中的一个并向该个体设备提供诸如距离信息和/或操作模式信息之类的信息，而向各个体设备中的另一个提供不同的距离信息和/或操作模式信息。
提供本概述以便以简化形式介绍将在以下详细描述中进一步描述的一些概念。本发明内容并不旨在标识所要求保护主题的关键特征或必要特征，也不旨在用于限制所要求保护主题的范围。
附图简述
参考附图来描述详细描述。在附图中，附图标记最左边的数字标识该附图标记首次出现的附图。不同附图中的相同附图标记指示相似或相同的项目。
图1示出了用于基于共享设备和个体设备之间的距离来修改功能的示例计算环境。
图2示出图1中所示出的共享设备的示例体系结构。
图3示出图1中所示出的个体设备的示例体系结构。
图4示出了基于各设备之间的距离来修改功能的示例过程。
图5示出了基于各设备之间的距离来修改功能的示例过程，其中共享设备测量距离。
图6示出了基于各设备之间的距离来修改功能的示例过程，其中个体设备测量距离。
图7示出了基于多个设备之间的距离来修改功能的示例过程。
详细描述
概览
本公开部分涉及用于基于个体设备和共享设备(例如，共享显示器等)之间的距离来修改个体设备(例如，移动计算设备等)的功能的系统和技术。例如，由移动计算设备实现的用户界面可基于移动计算设备和共享显示器之间的距离来被自动确定和/或修改。
在各种实施例中，共享设备可通过执行连接协议(诸如握手或信息配对)来与个体设备连接。在连接后，共享设备可测量共享设备和个体设备之间的距离。基于该距离，共享设备可确定要由个体设备实现的操作模式。在某些实施例中，共享设备可基于操作个体设备的用户相对于共享设备的朝向和/或与用户相关联的绝对朝向来确定操作模式。共享设备可接着指令个体设备基于该操作模式执行功能和/或修改功能。例如，共享设备可将操作模式传送给个体设备。个体设备可基于该操作模式确定功能并接着执行该功能。在一些实例中，共享设备可响应于用户的移动来检测距离的改变。共享设备可更新对应于经改变的距离的模式，并指令个体设备修改对应于经更新的模式的功能。在某些实施例中，共享设备可以将距离信息传送给个体设备。个体设备可接着基于该距离信息来改变操作模式(例如，基于不同距离范围提供不同用户界面等)。
在某些实施例中，个体设备可测量共享设备和个体设备之间的距离，和/或更新距离信息。例如，个体设备可检测与共享设备相关联的显示器，并测量该显示器和个体设备之间的距离。基于该距离，个体设备可确定和/或更新与用户界面相关联的操作模式并执行对应于该操作模式的功能。
在各种实施例中，共享设备可跟踪与多个个体设备相关联的距离。共享设备可标识个体设备之一并向那个个体设备提供诸如距离信息和/或操作模式信息之类的信息，而向个体设备中的另一个提供不同的距离信息和/或操作模式信息。
说明性环境
图1示出了用于基于共享设备和个体设备之间的距离来修改功能的示例计算环境100。环境100可包括配置有显示器104的共享设备102。共享设备102可以是通用计算机、一个或多个服务器、机顶盒、游戏控制台、或能够与另一设备(例如，移动电话)交换数据并产生输出(例如，可视表示)的任何其它计算设备。在某些实施例中，显示器104可与共享设备102集成，而在其它实施例中共享设备102可连接到显示器104，但是分开的设备。为此讨论的目的，共享设备102作为与显示器104集成来讨论。共享设备102可与传感设备106进行通信。例如，共享设备102可从传感设备106接收输入，并产生视觉表示，该视觉表示被显露在界面108中并示于显示器104上。在某些实施例中，共享设备102和传感设备106可被集成在一起。
共享设备102可以与个体设备110进行通信。在个体设备110，可以是移动计算机、移动电话(例如，智能电话)、个人计算机、膝上计算机、便携数字助理(PDA)、游戏控制台、个人媒体播放器(PMP)、数码相机、数码摄像机、个人导航设备、或能够与另一设备(例如，传感设备)交换数据并产生可与各种设备(例如，显示器)联用的输出(例如，可视表示)的任何其它计算设备。在某些实施例中，共享设备102可以与多个个体设备进行通信。例如，共享设备102可从多个个体设备接收信息，并产生被显露在界面108中并示于显示器104上的一个或多个视觉表示。
共享设备102可通过通信过程(诸如握手、配对、凭证交换、和/或通过使用任何其它过程)来建立与个体设备110的连接。在某些实例中，当个体设备110接近共享设备102、显示器104、和/或传感设备106时，共享设备102可建立该连接。在某些实施例中，该连接可由共享设备102或个体设备110初始化。在某些实施例中，连接可经由一个或多个网络112建立。网络112可包括多种不同类型的网络中的任一个或其组合，诸如电缆网络、因特网、和无线网络(例如，蓝牙、Wi-Fi、移动电话网络等)。例如，个体设备110可使用共享设备102的硬件地址(在通信过程期间交换)来与共享设备102进行通信。
在各种实施例中，共享设备102可检测操作个体设备110的用户114并使用传感设备106跟踪该用户114在特定范围内的移动。共享设备102还可使用传感设备106来测量用户114和共享设备102之间的距离116。基于该距离116，共享设备102可确定与个体设备110相关联的模式。例如，共享设备102可通过使用多个模式和距离之间的预定的关系(其可被分组和/排序到共享设备102可访问的表中)来确定模式。共享设备102可传送与该模式相关联的信息，以指令个体设备110来执行对应于该模式的功能。
在某些实施例中，共享设备102可基于物理距离(例如，传感设备106和个体设备110之间的线性距离)和/或社交距离(例如，用户114相对于传感器106的朝向)来确定与个体设备110相关联的模式。例如，当检测到用户114站在位置118并面向传感设备106和/或显示器104时，共享设备102可指令个体设备110执行一功能。然而，当检测到用户114站在位置118但不面向传感设备106和/或显示器104时，共享设备102可指令个体设备110执行另一功能。
共享设备102可检测用户114的移动。例如，用户114可从位置118移到位置120，如图1中灰色箭头指示的。响应于用户114的移动，共享设备102可测量距离122。基于该距离122，共享设备102可接着确定与个体设备110相关联的模式。如果距离122对应于不同模式，则共享设备可更新模式，并指令个体设备110修改与个体设备110相关联的当前功能，诸如执行对应于经更新的模式的功能。
例如，距离116可小于用户114可触及的距离。换言之，用户114可以直接与显示114(例如，触摸屏)进行交互。假设菜单模式对应于距离116。结果，共享设备102可在显示器104上示出白板，并指令个体设备110执行第一菜单功能。例如，个体设备可在用户界面124上呈现调色盘，使得用户114可在显示器104上绘图同时通过个体设备110来控制颜色。
在某些实施例中，用户114的移动可包括用户114相对于传感设备106和/或显示器104的朝向的改变。共享设备102可接着基于距离和/或朝向的改变来确定与个体设备110相关联的模式。例如，如果改变了的距离/或朝向对应于不同模式，共享设备可更新模式，并指令个体设备110修改与个体设备110相关联的当前功能。
此外，当共享设备102检测到用户114从位置118移动到位置120时，共享设备102可传送命令来修改个体设备110的功能。在某些实施例中，共享设备可测量距离122并确定距离122大于可触及的距离。换言之，用户114在位置120比在位置118距显示器104更远。假设第二菜单功能(诸如遥控功能)对应于距离122。结果，共享设备102可指令个体设备110执行遥控功能。例如，个体设备110可用作远程输入设备(例如，虚拟定点设备和虚拟键盘)使得用户114可在位于距显示器104距离122处时通过个体设备110远程控制显示器104。
在各种实施例中，共享设备102可以将距离信息提供给个体设备110。个体设备110可接着基于接收到的距离操作来确定操作模式。
在某些实施例中，个体设备110可测量距离116，并基于距离116确定模式。因此，个体设备110可执行对应于该模式的功能。例如，基于多个模式和距离之间的预定关系，个体设备110可确定对应于距离116的与用户界面相关联的模式，并接着执行对应于该模式的功能。
在某些实施例中，与个体设备110相关联的模式可基于距离和上下文来确定。上下文可以是用户114、共享设备102、和/或个体设备110正在执行的任务。因此，当用户114在距离显示器104相同距离内时，个体设备110可响应于共享设备102操作的不同任务进而基于共享设备102的操作的上下文来执行不同功能。例如，当用户114使用绘图应用在显示器104上绘图时(一示例上下文)，个体设备110可用作调色盘，而当用户114使用演示软件在显示器104上作演示时(另一示例上下文)个体设备110可用作虚拟键盘。在这些实例中，用户114和共享设备102之间的距离是相同的，但是共享设备102的操作的上下文不同。在某些实施例中，上下文可包括与个体设备110和/或共享设备102相关联的朝向信息。例如，上下文可以以经个体设备110和/或共享设备102的纵向或横向朝向来被查看。
在某些实施例中，共享设备102可通过传感设备106跟踪操作多个个体设备的多个用户。在某些实例中，共享设备102可通过标识诸个体用户的特征来跟踪多个用户，并将诸个体用户与诸个体用户正在操作的一个或多个个体设备相关联。例如，共享设备102可基于用户特征(例如，声音、面部特征和/或身体特征等)和/或基于和个体用户相关联的其它跟踪信息(例如，设备标识符、标记标识符、自身注册等)来标识个体用户。作为进一步的示例，使用传感设备106，共享设备102可跟踪多个用户，并测量个体用户和显示器104之间的距离。因此，基于该距离，共享设备102可确定一个或多个模式，并指令多个个体设备执行对应于个体模式的相应功能。
在某些实施例中，共享设备102可测量多个用户和显示器104之间的距离。基于该距离，共享设备102可向多个用户分配与涉及此多个用户的任务相关联的不同模式、权力和/或许可。例如，共享设备104可向在离显示器104特定距离内的特定用户分配较高的权力。在这些实例中，这些特定用户可具有修改文档的许可而其它用户可能仅具有访问文档的许可。在某些实施例中，多个个体设备可彼此通信。使用这个通信，与多个个体设备相关联的多个用户可对共享设备102和/或多个个体设备正在操作的任务进行协作。例如，个体设备110(例如，移动电话)可以与另一个个体设备(例如，指示笔)进行通信，以允许多个用户用他们自己的调色盘并肩协作，而白板被显示在显示器104(例如，感知像素显示器)上，而全局唯一标识符(GUID)被分配给各指示笔。
在某些实施例中，环境100还可包括与服务提供者130相关联的服务器128，服务提供者120向共享设备102和/或个体设备110提供服务(例如，云存储、外部内容等)。在某些实例中，在与共享设备102交互时，个体设备110可通过网络112访问服务提供者130的服务。例如，用户114可请求来自服务提供者130的映射服务。共享设备102可接收映射信息(例如，映射)并将该映射信息提供在显示器104上。一些映射信息还可被提供给个体设备110，但是该映射信息可不同于提供给共享设备102的映射信息。
此外，共享设备102可使用指示关于如何显示可视呈现的信息的显示参数，在显示器104上呈现所请求的视觉表示(例如，图像、文本等)。示例显示参数可以是被显示的文本的字体或被共享设备102显示的图像的大小。在这些实例中，响应于用户114和显示器104之间的距离的改变，显示参数可改变(例如，增加或减小字体大小、图像大小等)。例如，当检测到用户114移向显示器104时，个体设备110可减少文本的字体大小或图像的大小。另一方面，当检测到用户114移离显示器104时，个体设备110可增加字体大小或图像的大小。
在另一示例中，使用另一个操作上下文，用户114(或个体设备110)和共享设备102之间的距离可被用来控制由共享设备102显示的图像的缩放。例如，随着用户114移向共享设备102，界面108上的图像可示出更详细的视图，但是更少的信息，以便促成对图上的一个位置的放大。相反，检测到的用户移离共享设备的移动可导致共享设备显示包括另外的图像的缩小的显示(但是以更小的比例)。因此，距离信息和/或操作模式可被共享设备用来更新与界面108的交互(可能基于共享设备102的操作的上下文)。
说明性体系结构
图2示出图1中所示出的共享设备102的示例体系结构200。图2所示的共享设备102和个体设备110只是计算设备的示例，且并非旨在对计算设备和网络体系结构的使用范围或功能提出任何限制。共享设备102和个体设备110也不应被解释成对于在该示例计算设备中所示出的任一组件或其组合有任何依赖或要求。
作为替代或补充，在此关于共享设备102和个体设备110所描述的功能可至少部分地由一个或多个硬件逻辑组件来执行。例如，但非限制，可被使用的硬件逻辑组件的说明性类型包括现场可编程门阵列(FPGA)、程序专用的集成电路(ASIC)、程序专用的标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑器件(CPLD)等。
在某些实施例中，共享设备102可以包括至少一个处理单元202和系统存储器204。取决于计算设备的确切配置和类型，系统存储器204可以是易失性的(诸如RAM)、非易失性的(诸如ROM、闪存等)或是两者的某种组合。
系统存储器204可包括操作系统206、一个或多个程序模块208，且可包括程序数据210以及设备数据212。在某些实例中，设备数据212可存储与已连接到和/或要连接到共享设备102的设备(例如，个体设备110)相关联的信息。程序模块208可包括通信模块214、传感模块216、功能模块218、显示模块202、和/或上下文模块222，按顺序讨论每个模块。
通信模块214可被配置来与诸如个体设备110和/或服务器128之类的设备进行通信。在某些实施例中，通信模块214可通过执行连接协议(诸如握手、信息配对、凭证交换，和/或通过使用其它连接协议)来与个体设备110进行连接。例如，共享设备102和个体设备110可以是有蓝牙能力的设备。此外，可在共享设备102和个体设备110之间创建个域网(PAN)。
传感模块216可被配置来检测用户114并测量显示器104和用户114之间的距离(距离116)或显示器104和个体设备110之间的距离。例如，与传感设备106组合，传感模块216可执行部分或全部身体的三维运动捕捉、面部识别和/或声音识别。在某些实施例中，传感模块216可跟踪用户114和/或个体设备110的移动，并更新距离信息(例如，距离116或122)。
基于该距离信息，功能模块218可确定要由个体设备110执行的操作模式。例如，功能模块218可使用在下面表1(可被实现为查找表)中列出的多个模式和距离之间的说明性的预定的对应关系来确定模式。在某些实施例中，可有用于模式间转换的距离阈值。在这些实例中，距离阈值可在一个方向上与另一个方向上不同以在状态改变之间提供滞后作用。例如，滞后作用可避免归因于与用户114的移动相关联的噪声的或在用户114碰巧站在距离阈值之一处时的不希望的错误转换。在某些实施例中，每个模式可以与多个变型(例如，“近”和“远”变型)相关联，其可能需要一个基于距离的模式的视觉和/或功能到另一个的混合或缓动。
表1
距离 模式
0～40英寸 模式1
41～65英寸 模式2
66～120英寸 模式3
121～180英寸 模式4
在模式确定之后，连接模块214可传送命令来指令个体设备110执行对应于所确定模式的功能。
在某些实施例中，预定对应关系还可包括对应于距离和模式的功能，其被列在说明性表2中，并可被实现为查找表。在某些实施例中，显示模块220可显示对应于个体设备110执行的功能的界面108。例如，当用户114在离显示器104可触及的距离内时，显示模块220可显示白板，且个体设备110用作调色盘。
表2
距离 模式 个体设备110的功能
0～40英寸 模式1 调色盘
41～65英寸 模式2 虚拟键盘
66～120英寸 模式3 扬声器
121～180英寸 模式4 录音机
在某些实例中，程序模块208还可包括上下文模块222，其被配置用于确定上下文，诸如在共享设备102和/或个体设备110上操作的任务。在这些实例中，功能模块218可基于距离和/或上下文来确定模式。例如，距离和模式之间的预定对应关系可以是上下文专用的，其在下面被列在说明性表3中，并可被实现为查找表。
表3
距离和任务(演示) 距离和任务(绘图) 模式
0～60英寸 0～40英寸 模式1
61～120英寸 41～65英寸 模式2
121～180英寸 66～120英寸 模式3
181～240英寸 121～180英寸 模式4
在某些实施例中，操作系统206包括基于组件的框架，该框架支持组件(包括属性和事件)、对象、继承、多态性、反射，且操作系统206可提供面向对象的基于组件的应用程序编程接口(API)。再次，终端可具有更少的组件但将与可具有这样基本配置的计算设备交互。
共享设备102可具有附加特征或功能。例如，共享设备102还可包括附加数据存储设备(可移动和/或不可移动)，诸如例如磁盘、光盘或磁带。在图1中通过可移动存储224和不可移动存储226例示出这样的附加存储。
计算机可读介质可包括至少两种类型的计算机可读介质，即计算机存储介质和通信介质。计算机存储介质可包括以用于存储诸如计算机可读指令、数据结构、程序模块或其他数据等信息的任何方法或技术来实现的易失性和非易失性、可移动和不可移动介质。系统存储器204、可移动存储224和不可移动存储226都是计算机存储介质的示例。计算机存储介质包括RAM、ROM、EEPROM、闪存或其他存储器技术、CD-ROM、数字多功能盘(DVD)或其他光盘存储、磁带盒、磁带、磁盘存储或其他磁性存储设备、或能用于存储所需信息且可以由共享设备102访问的任何其他介质。任何这样的计算机存储介质都可以是共享设备102的一部分。而且，计算机可读介质可包括在由处理单元202执行时使共享设备102执行此处所描述的各种功能和/或操作的计算机可执行指令。
作为对比，通信介质可用诸如载波或其他传输机制等已调制数据信号来体现计算机可读指令、数据结构、程序模块或其他数据。如本文所定义的，计算机存储介质不包括通信介质。
共享设备102还可具有输入设备228，如键盘、语音输入设备、触摸输入设备(例如，指示笔、笔等)、触摸屏设备、导航设备(例如，跟踪垫、鼠标等)等等。在某些实施例中，输入方法可经自然用户界面(NUI)来实现。NUI可包括使得用户能够以自然摂方式与设备交互而无需由诸如鼠标、键盘、遥控等强加的人为约束的任何接口技术。NUI方法的示例可包括依赖于语音识别、触摸和指示笔识别、屏幕上和屏幕附近的姿势识别、空中姿势、头部和眼睛跟踪、话音和语音、视觉、触摸、姿势、以及机器智能的那些方法。NUI技术的类别可包括触敏显示、话音和语音识别、意图和目的理解、使用深度相机(如立体相机系统、红外相机系统、RGB相机系统、以及这些的组合)的运动姿势检测、使用加速度计/陀螺仪的运动姿势检测、面部识别、3D显示、头部、眼睛和注视跟踪、浸入式增强现实和虚拟现实系统，所有这些都提供更自然的接口，以及用于使用电场传感电极(EEG和相关方法)的传感大脑活动的技术。
在一些实施例中，共享设备102可包括接收通过诸如NUI之类的方法生成的输入信号和/或对其作出响应的传感设备106。例如，传感设备106可以是接收用于部分或全部身体三维运动捕捉、面部识别和声音识别的信号和/或对其作出响应的运动传感输入设备。在某些实例中，传感设备106可在各种条件下(例如，完全黑暗)通过跟踪用户身体(例如骨架和肢体)来跟踪一个或多个用户。肢体可包括用户的手臂、腿和头。
共享设备102还可包括输出设备230，诸如显示器(例如显示器104)、扬声器、打印机等。共享设备102还可包含允许该设备诸如通过网络(诸如网络112)来与其他计算设备(例如，个体设备110)进行通信的通信连接232。
图3示出图1中所示出的个体设备110的示例体系结构300。在所示实施例中，个体设备110可以包括至少一个处理单元302和系统存储器304。取决于计算设备的确切配置和类型，系统存储器304可以是易失性的(诸如RAM)、非易失性的(诸如ROM、闪存等)或是两者的某种组合。个体设备110还可包括另外的数据存储设备，诸如可移动存储306和不可移动存储308。系统存储器304、可移动存储306和不可移动存储308都是计算机存储介质的示例。
系统存储器304通常包括操作系统310、一个或多个程序模块312，且可以包括程序数据314以及设备数据316。在某些实例中，设备数据316可存储与已连接到和/或要连接到个体设备110的设备(例如，共享设备102)相关联的信息。程序模块312可包括通信模块318、传感模块320、功能模块322、和/或上下文模块324，按顺序讨论每个模块。
通信模块318被配置来与诸如共享设备102和/或服务器128之类的设备进行通信。在某些实施例中，通信模块318可通过例如，蓝牙连接、网络112、或其它连接协议来初始化并建立与共享设备102的连接。
传感模块320被配置来测量显示器104和个体设备110之间的距离。在某些实施例中，传感模块320可检测显示器104并使用距离测量设备或与个体设备110相关联的其它输入设备(诸如相机)来测量显示器104和个体设备110之间的距离。例如，当与来自相机的图像组合时，传感模块320可检测和/或识别显示器104的参考特征，诸如显示器104的一帧或位于或接近显示器的其它对象/图像，并接着基于依据来自相机的图像或其它数据传感的显示器104的参考特征的大小的改变来测量(或近似)个体设备110和显示器104之间的距离。传感模块320可响应于个体设备110的移动，以任何不同间隔(周期、在检测到移动之后、随机等)来更新距离信息。
基于该距离信息，功能模块322可确定与个体设备110相关联的模式。例如，功能模块322可使用多个模式和距离之间的预定的对应关系来确定模式。在某些实施例中，程序模块208可包括上下文模块324，该上下文模块被配置用于确定上下文，诸如在共享设备102和/或个体设备110上操作的任务。在这些实例中，功能模块322可基于距离和/或上下文来确定模式。
个体设备110也可具有输入设备326，诸如触摸屏设备、物理按钮(菜单按钮、键盘等)、触摸输入设备(指示笔、笔等)、语音输入设备、相机、光传感器、话筒等。在某些实施例中，输入方法可经NUI来实现。在某些实施例中，输入设备326可包括能够测量显示器104和个体设备之间的距离的距离测量设备328。例如，距离测量设备可以是与个体设备110相关联的相机。在某些实例中，输入设备326还可包括能够检测个体设备110的移动的传感器330，诸如全球定位系统(GPS)设备、运动检测器、深度传感相机、通过信号强度的三角测量、红外范围检测等等。
在某些实施例中，个体设备110包括输出设备332，诸如显示器、扬声器等。个体设备110还可包含允许该设备诸如通过网络(诸如网络112)来与其他计算设备(例如，共享设备102)进行通信的通信连接334。
说明性操作：
图4示出了基于各设备之间的距离来修改功能的示例过程40。过程400和贯穿本公开内容所描述的其他过程(包括过程500和600)被示为逻辑流程图中的框的集合，这表示可用硬件、软件或其组合实现的操作的序列。在软件的上下文中，各个框表示当由一个或多个处理器执行时使一个或多个处理器执行既定操作的计算机可执行指令。一般而言，计算机可执行指令包括执行特定功能或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等。描述操作的次序并不旨在被解释为限制，并且任何数量的所述框可以按任何次序和/或并行地组合以实现该过程。
在402，共享设备102和个体设备110可建立连接以允许在共享设备102和个体设备110之间的通信。例如，共享设备可通过执行连接协议(诸如握手、信息配对、凭证交换等)来建立与个体设备的连接。连接可由任一设备发起。在某些实施例中，在设备在彼此的预定距离内、彼此触碰等时，设备可发起连接。
在404，共享设备102和用户114和/或个体设备110之间的距离被测量。距离可由共享设备102、个体设备110、或两者来测量。例如，共享设备102可使用传感设备106来确定用户114或个体设备110相对于传感设备106、显示器104、或另一位置的距离。个体设备110可基于来自距离测量设备328(其可基于如上面讨论的参考特征的大小来测量或近似个体设备110和显示器102之间的距离)的信息来确定距离。
在406，基于从操作404测得的距离，要由个体设备100实现的模式可被确定。可使用多个距离和模式之间预定的对应关系(诸如那些在说明性表1中示出的那些关系)来确定模式。在某些实施例中，模式可基于距离和/或上下文(诸如个体设备110和/或共享设备102正在操作的任务)来确定。
操作404和406可以循环执行，其可在需要时持续更新距离测量和对应模式。在某些实例中，距离可以以预定间隔、随机间隔、响应于触发事件等来更新。例如，响应于用户114和/或个体设备110的移动来更新距离。共享设备102可检测用户114的移动，并在通过操作404测量用户114和显示器104之间的距离后接着更新距离信息。基于经更新的距离，共享设备102可通过操作406来更新模式，并传送命令以指令个体设备执行对应于更新模式的新功能。
图5示出了基于共享设备102和个体设备110之间的距离来修改功能的示例过程500，其中共享设备102测量共享设备和用户114(或用户握住的个体设备110)之间的距离。
在502和504，共享设备102和个体设备110可建立连接以允许在共享设备102和个体设备110之间的通信。例如，共享设备102可通过执行连接协议(诸如握手、信息配对、凭证交换等)来建立与个体设备的连接。连接可由任一设备发起。在某些实施例中，在设备在彼此的预定距离内、彼此触碰等时，设备可发起连接。
在506，共享设备102可测量共享设备102和用户114或个体设备110之间的距离。例如，共享设备102可使用传感设备106来确定用户114或个体设备110相对于传感设备106、显示器104、或另一位置的距离。
在508，共享设备102可基于在操作506确定的距离来确定模式。例如，操作508可基于诸如说明性表1的查看表来确定模式。在某些实施例中，模式可基于共享设备的操作的上下文。在这样的实例中，在操作508上下文可连同距离信息一起用于确定模式。
在510，共享设备102可传送命令以将模式信息提供给个体设备110。个体设备110还在512接收命令，并接着在514执行对应于模式信息的功能。在某些实施例中，个体设备110可通过执行对应于经更新的模式信息的功能来修改功能。
在516，在操作510之后，共享设备102可诸如通过发起循环过程来确定是否更新信息，诸如距离信息和/或模式信息。当共享设备102确定执行更新(在判定操作516的“是”线路后面)时，那么过程500可前进到操作506。然而，当共享设备102确定不执行更新(在判定操作516的“否”线路后面)时，那么过程500可在518进入延迟，并接着返回判定操作516。经更新的确定可基于逝去的时间量，用户114和/或个体设备110的移动的量，和/或其它触发事件。
图6示出了示例过程600，以基于共享设备102和个体设备110之间的距离来修改功能，其中个体设备110测量共享设备和用户114(或用户握住的个体设备110)之间的距离。
在502和504，共享设备102和个体设备110可建立连接以允许在共享设备102和个体设备110之间的通信。例如，共享设备102可通过执行连接协议(诸如握手、信息配对、凭证交换等)来建立与个体设备的连接。连接可由任一设备发起。在某些实施例中，在设备在彼此的预定距离内、彼此触碰等时，设备可发起连接。
在606，个体设备110可测量共享设备102和个体设备110之间的距离。例如，个体设备110可使用传感器330来确定个体设备110相对于传感设备106、显示器104、或另一位置的距离。
在608，个体设备110可基于在606确定的距离来确定模式。例如，操作608可基于诸如说明性表1的查找表来确定模式。在某些实施例中，模式可基于个体设备110和/或共享设备102的操作上下文。在这样的实例中，在操作608上下文可连同距离信息一起用于确定模式。
在610，个体设备110可执行对应于在608的模式信息的功能。在某些实施例中，个体设备110可通过执行对应于经更新的模式信息的功能来修改功能。
在612，跟随操作610，个体设备110可诸如通过发起循环过程来确定是否更新信息，诸如距离信息和/或模式信息。当个体设备110确定执行更新(在判定操作612的“是”线路后面)时，那么过程600可前进到操作606。然而，当个体设备110确定不执行更新(在判定操作612的“否”线路后面)时，那么过程600可在614进入延迟，并接着返回判定操作612。经更新的确定可基于逝去的时间量，用户114和/或个体设备110的移动的量，和/或其它触发事件。
图7示出了基于多个设备之间的距离来修改功能的示例过程700。
在702，共享设备102和个体设备110可建立连接以允许在共享设备102和个体设备110之间的通信。操作702可以按与操作402相同或类似的方式被执行。
在704，共享设备102可标识或确定与每个个体设备相关联的用户。例如，共享设备102可通过注册过程来注册用户。注册过程可在操作702之前、期间、或之后发生。在一个示例中，注册可在操作702之后发生，其中共享设备102基于用户的外观、与用户相关联的设备(例如，射频标识符、带有标识符的指示笔)来标识与共享设备相关联的用户。共享设备102可接着创建在(在操作702连接的)个体设备和从操作704确定的用户之间的关联。
在706，共享设备可测量共享设备102和特定用户和/或特定个体设备之间的距离。操作706可以按与操作404相同或类似的方式来执行。
在708，确定要通过共享设备基于来自操作706的一个或多个距离、在操作704标识的特定用户、和/或共享设备102的操作的上下文选择的模式。例如，在确定与特定用户相关联的特定个体设备的操作模式时，共享设备102可向每个用户和相关联的个体设备提供不同控制，并因此可基于关于其它个体设备的操作的信息来确定模式。
操作706和708可以循环执行，其可根据需要持续更新距离测量和对应模式。在某些实例总，距离可以以预定间隔、随机间隔、响应于触发事件等来更新。例如，响应于用户和/或个体设备的移动来更新距离。
结语
尽管用结构特征和/或方法动作专用的语言描述了本主题，但可以理解，所附权利要求书中定义的主题不必限于上述具体特征或动作。相反，这些具体特征和动作是作为实现权利要求的示例形式而公开的。

Claims (10)

1.一种用于共享对象的计算机实现的方法，其特征在于，所述方法包括：
由共享设备建立与计算设备的连接；
测量所述共享设备和所述计算设备或操作所述计算设备的用户之间的距离；
基于所述距离确定模式；以及
指令所述计算设备执行对应于所述模式的功能。
2.如权利要求1所述的计算机实现的方法，其特征在于，进一步包括：
检测所述用户的移动；以及
响应于所述移动更新所述距离和所述模式。
3.如权利要求1所述的计算机实现的方法，其特征在于，指令所述计算设备执行对应于所述模式的功能包括：
基于所述模式生成或更新与所述共享设备相关联的用户界面；以及
将所述界面扩展到所述计算设备。
4.如权利要求1所述的计算机实现的方法，其特征在于，测量所述共享设备和所述计算设备或操作所述计算设备的所述用户之间的距离由所述共享设备的一个或多个相机执行。
5.存储计算机可执行指令的一个或多个计算机可读介质，所述计算机可执行指令当在一个或多个处理器上被执行时导致所述一个或多个处理器执行以下动作，包括：
建立与共享设备的连接；
测量所述共享设备和计算设备之间的距离；
基于所述距离或所述用户相对于所述共享设备的显示器的朝向来确定与用户界面相关联的模式；以及
执行对应于所述模式的功能。
6.如权利要求5所述的一个或多个计算机可读介质，其特征在于，所述动作还包括：
检测所述计算设备的移动或所述用户相对于所述显示器的朝向的改变；以及
响应于所述计算设备的移动或所述用户相对于所述显示器的朝向的改变来更新所述距离。
7.如权利要求5所述的一个或多个计算机可读介质，其特征在于，所述模式还基于在所述共享设备上执行的任务的上下文来确定。
8.一种用于共享对象的计算设备，包括：
一个或多个处理器；以及
存储器，所述存储器维持可由所述一个或多个处理器执行的多个组件，所述多个组件包括：
与移动设备交换数据的通信模块，
测量所述计算设备和所述移动设备之间的距离的传感模块；以及
执行以下的功能模块：
基于所述距离确定模式，以及
将所述模式传送到所述移动设备以执行对应于所述模式的功能。
9.如权利要求8所述的计算设备，其特征在于，所述传感模块还检测操作所述移动设备的用户的移动；并响应于所述移动更新所述距离和所述模式。
10.如权利要求8所述的计算设备，其特征在于，多个组件还包括确定执行在所述共享设备上的任务的上下文的上下文组件，并且其中基于所述距离确定所述模式包括基于所述距离和所述上下文来确定所述模式。
CN201480012152.1A 2013-03-04 2014-03-03 基于各设备之间的距离修改功能的方法和设备 Active CN105027175B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201361772390P 2013-03-04 2013-03-04
US61/772,390 2013-03-04
US13/830,375 2013-03-14
US13/830,375 US8938558B2 (en) 2013-03-04 2013-03-14 Modifying functionality based on distances between devices
PCT/US2014/020044 WO2014137947A1 (en) 2013-03-04 2014-03-03 Modifying functionality based on distances between devices

Publications (2)

Publication Number Publication Date
CN105027175A true CN105027175A (zh) 2015-11-04
CN105027175B CN105027175B (zh) 2019-11-05

Family

ID=51421603

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480012152.1A Active CN105027175B (zh) 2013-03-04 2014-03-03 基于各设备之间的距离修改功能的方法和设备

Country Status (5)

Country Link
US (1) US8938558B2 (zh)
EP (1) EP2965299B1 (zh)
CN (1) CN105027175B (zh)
ES (1) ES2607714T3 (zh)
WO (1) WO2014137947A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114466361A (zh) * 2016-06-12 2022-05-10 苹果公司 通过安全范围检测修改安全状态

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150040198A1 (en) * 2013-07-31 2015-02-05 Wipro Limited Systems and methods for accessing a device using a paired device in its proximity
JP6455435B2 (ja) * 2013-10-04 2019-01-23 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
KR101548228B1 (ko) * 2013-12-27 2015-08-28 주식회사 케이티 사용자 상태에 기반하여 사용자 인터페이스를 동기화하는 동기화 기기 및 동기화 방법
US10191713B2 (en) * 2014-03-24 2019-01-29 Lenovo (Beijing) Co., Ltd. Information processing method and electronic device
US20160133116A1 (en) * 2014-11-06 2016-05-12 Adam Awad Inspection and registration tag early alert system (ireas)
KR20160057651A (ko) * 2014-11-14 2016-05-24 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
CN111651797B (zh) 2014-11-20 2023-05-16 创新先进技术有限公司 一种信息展示方法及装置
US9485344B2 (en) 2014-12-01 2016-11-01 Honeywell International Inc. Personalizing interaction with a structure
US9473892B2 (en) * 2014-12-11 2016-10-18 Whirlpool Corporation Appliances that trigger applications on consumer devices based on user proximity to appliance
US9683834B2 (en) * 2015-05-27 2017-06-20 Intel Corporation Adaptable depth sensing system
US10146321B1 (en) * 2015-12-10 2018-12-04 Massachusetts Mutual Life Insurance Company Systems for integrating gesture-sensing controller and virtual keyboard technology
US10168767B2 (en) * 2016-09-30 2019-01-01 Intel Corporation Interaction mode selection based on detected distance between user and machine interface
US10489487B2 (en) * 2018-01-18 2019-11-26 Microsoft Technology Licensing, Llc Methods and devices to select presentation mode based on viewing angle

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070293190A1 (en) * 2006-06-14 2007-12-20 Yuya Ota Remote control system and remote control method
CN101395890A (zh) * 2006-04-14 2009-03-25 高通股份有限公司 以距离为基础的安全性
CN101442463A (zh) * 2007-11-20 2009-05-27 三星电子株式会社 在家庭网络控制器中在设备之间界面交互的方法和装置
CN101681476A (zh) * 2007-03-27 2010-03-24 高通股份有限公司 基于距离的存在管理
CN101802767A (zh) * 2007-09-25 2010-08-11 微软公司 基于接近度的计算机显示器

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1179257C (zh) 1999-09-30 2004-12-08 松下电工株式会社 在与可编程逻辑控制器结合使用的监视单元上设计视觉信息的系统
US8257177B1 (en) 2005-10-04 2012-09-04 PICO Mobile Networks, Inc Proximity based games for mobile communication devices
US9317110B2 (en) * 2007-05-29 2016-04-19 Cfph, Llc Game with hand motion control
US8312392B2 (en) 2009-10-02 2012-11-13 Qualcomm Incorporated User interface gestures and methods for providing file sharing functionality
KR20110069526A (ko) 2009-12-17 2011-06-23 삼성전자주식회사 휴대단말의 외부 출력 제어 방법 및 장치

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101395890A (zh) * 2006-04-14 2009-03-25 高通股份有限公司 以距离为基础的安全性
US20070293190A1 (en) * 2006-06-14 2007-12-20 Yuya Ota Remote control system and remote control method
CN101681476A (zh) * 2007-03-27 2010-03-24 高通股份有限公司 基于距离的存在管理
CN101802767A (zh) * 2007-09-25 2010-08-11 微软公司 基于接近度的计算机显示器
CN101442463A (zh) * 2007-11-20 2009-05-27 三星电子株式会社 在家庭网络控制器中在设备之间界面交互的方法和装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
朱磊等: "采样信号与开关量在Wi-Fi模块下的混合编码传输", 《国外电子测量技术》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114466361A (zh) * 2016-06-12 2022-05-10 苹果公司 通过安全范围检测修改安全状态

Also Published As

Publication number Publication date
US8938558B2 (en) 2015-01-20
CN105027175B (zh) 2019-11-05
EP2965299B1 (en) 2016-09-21
EP2965299A1 (en) 2016-01-13
US20140250245A1 (en) 2014-09-04
ES2607714T3 (es) 2017-04-03
WO2014137947A1 (en) 2014-09-12

Similar Documents

Publication Publication Date Title
CN105027175A (zh) 基于各设备之间的距离修改功能
US11557075B2 (en) Body pose estimation
WO2020187153A1 (zh) 目标检测方法、模型训练方法、装置、设备及存储介质
US10810782B1 (en) Semantic texture mapping system
US10811002B2 (en) Electronic device and method for controlling the same
US20190318545A1 (en) Command displaying method and command displaying device
CN107533767B (zh) 机器人的增强的配置和控制
CN109918975A (zh) 一种增强现实的处理方法、对象识别的方法及终端
US20210146255A1 (en) Emoji-based communications derived from facial features during game play
US11776256B2 (en) Shared augmented reality system
US20170046965A1 (en) Robot with awareness of users and environment for use in educational applications
US20190188453A1 (en) Terminal and server for providing video call service
CN110908504B (zh) 一种增强现实博物馆协作交互方法与系统
US20210152751A1 (en) Model training method, media information synthesis method, and related apparatuses
CN109426783A (zh) 基于增强现实的手势识别方法及系统
US20180158243A1 (en) Collaborative manipulation of objects in virtual reality
CN111009028A (zh) 虚拟脸部模型的表情拟真系统及方法
CN110852942A (zh) 一种模型训练的方法、媒体信息合成的方法及装置
CN113867531A (zh) 交互方法、装置、设备及计算机可读存储介质
US20180286089A1 (en) Electronic device and method for providing colorable content
WO2023177621A1 (en) 3d user interface with depth forgiveness
US20200210038A1 (en) Robot eye lamp control method and apparatus and terminal device using the same
CN110544287A (zh) 一种配图处理方法及电子设备
CN108537149B (zh) 图像处理方法、装置、存储介质及电子设备
KR20200076438A (ko) 사용자의 액티비티를 추적하는 전자 장치 및 전자 장치의 동작 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20171020

Address after: Washington State

Applicant after: Micro soft technique license Co., Ltd

Address before: Washington State

Applicant before: Microsoft Corp.

GR01 Patent grant
GR01 Patent grant