CN107924588B - 触发区域 - Google Patents

触发区域 Download PDF

Info

Publication number
CN107924588B
CN107924588B CN201680048307.6A CN201680048307A CN107924588B CN 107924588 B CN107924588 B CN 107924588B CN 201680048307 A CN201680048307 A CN 201680048307A CN 107924588 B CN107924588 B CN 107924588B
Authority
CN
China
Prior art keywords
physical
area
trigger condition
computing system
subscriber device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680048307.6A
Other languages
English (en)
Other versions
CN107924588A (zh
Inventor
A.普尔索伊
D.阿登
M.阿马克
C.R.巴克
P.V.伯恩
P.杜博伊斯
G.J.克莱因
S.S.汤普金斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Priority to CN202110440617.5A priority Critical patent/CN113178016A/zh
Publication of CN107924588A publication Critical patent/CN107924588A/zh
Application granted granted Critical
Publication of CN107924588B publication Critical patent/CN107924588B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/003—Navigation within 3D models or images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
    • G06V10/235—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition based on user input or interaction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2215/00—Indexing scheme for image rendering
    • G06T2215/16—Using real world measurements to influence rendering

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Architecture (AREA)
  • User Interface Of Digital Computer (AREA)
  • Image Analysis (AREA)

Abstract

示例实施例可以包含用于检测物理空间内的物理区域中的事件的方法和系统。相应地，计算系统可以从订户设备接收在物理空间的虚拟表示内的虚拟区域的指示，使得虚拟区域对应于物理区域。系统还可以从用户接收与虚拟区域相关联的触发条件，其中触发条件对应于物理区域中的特定物理变化。系统还可以接收来自物理空间中的传感器的传感器数据，并且传感器数据的一部分可以与物理区域相关联。基于传感器数据，系统可以检测满足触发条件的物理区域中的事件，并且可以响应地向用户提供指示触发条件已经被满足的通知。

Description

触发区域
相关申请的交叉引用
本申请要求于2016年7月19日提交的标题为“Trigger Regions”的美国专利申请号15/213,843的优先权，其全部内容通过引用并入本文。然后，美国专利申请No.15/213,843要求于2015年11月25日提交的标题为“Trigger Regions”的美国临时专利申请序列号62/259,971的优先权，其全部内容通过引用并入本文。
背景技术
物理空间可以用于零售、制造、组装、分销和办公空间等等。随着时间的推移，这些物理空间的设计和操作方式正在变得更智能、更高效、更直观。随着技术在现代生活的许多方面越来越普遍，使用技术来增强这些物理空间变得明显。因此，对这样的系统的需求已经帮助开辟了感测技术、数据处理以及软件和用户界面设计的创新领域。
发明内容
示例实施例可以包含可以从订户设备接收请求的计算系统。该请求可以定义对应于物理空间内的物理区域的虚拟区域，并且还可以定义对应于物理区域内的特定物理变化的触发条件。该计算系统可以从物理空间中的传感器接收传感器数据，并且可以使用传感器数据作为基础来检测与物理区域中的特定物理变化相对应的事件。该计算系统可以将此事件的检测解释为满足触发条件，然后可以通知订户设备触发条件已经被满足。
在一个方面，提供了一种方法。该方法包括由计算系统从至少一个订户设备接收对物理空间的虚拟表示内的至少一个虚拟区域的指示，其中该至少一个虚拟区域对应于物理空间内的至少一个物理区域。该方法还包含由计算系统从至少一个订户设备接收与至少一个虚拟区域相关联的至少一个触发条件，其中至少一个触发条件对应于至少一个物理区域内的至少一个特定物理变化。该方法还包括由计算系统从位于物理空间中的多个传感器接收传感器数据，其中传感器数据的至少一部分与物理空间内的至少一个物理区域相关联。该方法进一步包含计算系统基于传感器数据而检测满足与至少一个物理区域中的至少一个特定物理变化相对应的至少一个触发条件的至少一个物理区域中的事件。所述方法还包含响应于检测到所述事件由所述计算系统向所述至少一个订户设备提供指示所述至少一个触发条件已被满足的通知。
另一方面，提供了一种计算系统。该计算系统包括一个或多个处理器。该计算系统还包括非瞬时性计算机可读介质。该计算系统还包括存储在非瞬时性计算机可读介质上并且可由一个或多个处理器执行的程序指令，以从至少一个订户设备接收物理空间的虚拟表示内的至少一个虚拟区域的指示，其中至少一个虚拟区域对应于物理空间内的至少一个物理区域。程序指令也可被执行以从至少一个订户设备接收与至少一个虚拟区域相关联的至少一个触发条件，其中至少一个触发条件对应于至少一个物理区域中的至少一个特定物理变化。程序指令另外可被执行以从位于物理空间中的多个传感器接收传感器数据，其中传感器数据的至少一部分与物理空间内的至少一个物理区域相关联。所述程序指令还可被执行以基于所述传感器数据来检测所述至少一个物理区域中满足与所述至少一个物理区域中的所述至少一个特定物理变化相对应的所述至少一个触发条件的事件。所述程序指令还可被执行以响应于检测到所述事件而向所述至少一个订户设备提供指示所述至少一个触发条件已被满足的通知。
在又一方面，提供了一种非瞬时性计算机可读介质。非瞬时性计算机可读介质已经在其中存储了可由一个或多个处理器执行的指令，以使得计算系统执行功能。所述功能包括从至少一个订户设备接收对物理空间的虚拟表示内的至少一个虚拟区域的指示，其中所述至少一个虚拟区域对应于物理空间内的至少一个物理区域。所述功能还包括从所述至少一个订户设备接收与所述至少一个虚拟区域相关联的至少一个触发条件，其中所述至少一个触发条件对应于所述至少一个物理区域中的至少一个特定物理变化。这些功能还包括从位于物理空间中的多个传感器接收传感器数据，其中传感器数据的至少一部分与物理空间内的至少一个物理区域相关联。所述功能进一步包括基于所述传感器数据检测所述至少一个物理区域中满足与所述至少一个物理区域中的所述至少一个特定物理变化相对应的所述至少一个触发条件的事件。所述功能还包括响应于检测到所述事件，向所述至少一个订户设备提供指示所述至少一个触发条件已被满足的通知。
另一方面，提供了一种系统。该系统可以包括用于从至少一个订户设备接收对物理空间的虚拟表示内的至少一个虚拟区域的指示的装置，其中该至少一个虚拟区域对应于物理空间内的至少一个物理区域。该系统还可以包括用于从所述至少一个订户设备接收与所述至少一个虚拟区域相关联的至少一个触发条件的装置，其中所述至少一个触发条件对应于所述至少一个物理区域的至少一个特定物理变化。该系统还可以包括用于从位于物理空间中的多个传感器接收传感器数据的装置，其中传感器数据的至少一部分与物理空间内的至少一个物理区域相关联。该系统还可以包括用于基于传感器数据检测满足与至少一个物理区域中的至少一个特定物理变化相对应的至少一个触发条件的至少一个物理区域中的事件的装置。所述系统还可以进一步包括用于响应于检测到所述事件而向所述至少一个订户设备提供指示已经满足所述至少一个触发条件的通知的装置。
通过在适当地参照附图而阅读下面的详细描述，这些以及其它方面、优点和替代方案对于本领域普通技术人员将变得显而易见。
附图说明
图1示出了根据示例实现方式的用于检测物理空间的物理区域中的事件的系统的示例配置。
图2是根据示例实现方式的用于检测物理空间的物理区域中的事件的示例流程图。
图3A至图3B示出了根据示例实现方式的示例性物理空间中的示例性物理区域以及物理区域中的参与者的示例性存在。
图4A至图4D示出根据示例实现方式的示例动态区域。
图5A到5C图示了根据示例实现方式的动态物理区域中的另一个示例性动态区域以及参与者的示例性存在。
具体实施方式
这里描述了示例方法和系统。应该理解的是，在这里使用词语“示例”、“示例性”和“说明性”来表示“用作示例、实例或说明”。本文中被描述为“示例”、“示例性”或者“说明性”的任何实施方式或特性不一定被解释为比其它实施方式或特性优选或有利。这里描述的示例实现方式不意味着限制。将容易理解的是，如本文一般性描述的以及在附图中示出的本公开的方面可以以各种各样的不同配置进行布置、替换、组合、分离和设计，所有这些都被明确地考虑于此。
一.概述
根据各种实现方式，本文描述了用于检测在物理空间的物理区域内触发条件已被满足的方法和系统。特别地，所公开的系统可以允许订户设备(subscriber device)(例如消费电子设备)向系统请求当在物理空间的特定区域内发生特定物理变化时通知订户设备。根据本公开，订户设备可以向系统发送请求，该请求指定与物理空间内的物理区域对应的虚拟区域。该请求还可以指定与虚拟区域相关联的触发条件，使得触发条件对应于指定的物理区域内的特定物理变化。例如，触发条件可以包含使参与者(例如机器人)进入到指定的物理区域中。这样，该请求本质上可以将订户设备订制到由所公开的系统提供的服务。
另外，所公开的系统可以与位于物理空间中的各种传感器通信。各种传感器可以提供关于物理空间中的物理实体的数据，以及关于在物理空间内发生的事件的数据以及其它类型的数据。系统可以接收这样的数据并且可以处理数据以检测数据中指示触发条件已被满足的事件。特别地，这可以包含计算系统确定与物理区域相关联的传感器数据的一部分，然后解释数据以确定在物理区域内发生了特定物理变化。
一旦系统确定在物理区域内发生了特定物理变化，则系统就可以通知订户设备触发条件已被满足。当接收到这样的通知时，订户设备可以采取各种动作之一。例如，订户设备可以是电视机，其将在其周围的区域定义为三维圆柱形区域，并且将触发条件定义为人员进入到定义的区域中。在这种情况下，电视机可以从所公开的系统接收指示已经满足触发条件的通知(并且因此人员进入该区域)，并且电视机可以响应于接收到该通知而打开。
以这种方式，所公开的系统实质上为订户设备提供了编程构建块。更具体地说，订户设备可能没有关于物理空间中的传感器的任何信息和/或可能不具有确定如何使用这种传感器来检测物理空间内的感兴趣的物理变化的能力。因此，此处公开的系统不是将订户设备编程为包括这样的能力，而是通过允许订户设备指定区域并指定触发条件来增加编程的容易性。
一旦所公开的系统接收到指定区域和触发条件的请求，则所公开的系统可通过获得关于物理空间中的传感器的信息，然后确定如何使用这样的传感器来检测物理空间的物理区域内感兴趣的变化而实质上用作编程构建块。随后，当物理区域内的感兴趣的物理变化已经发生并且因此当触发条件已经被满足时，订户设备可以由所公开的系统通知。因此，所公开的系统可以减少订户设备获得关于物理空间的感兴趣的信息所需的编程的程度。而且，所公开的系统可以同时与多个订户设备通信，从而允许所公开的系统同时向多个订户设备提供上述服务。
二.说明性系统
现在参考附图，图1示出了包括具有一个或多个传感器102的物理空间100的示例布置。物理空间可以定义人、物体和/或机器可以位于其中的环境的一部分。物理空间可以采取二维或三维(3D)形式并且可以用于各种目的。例如，物理空间可以用作在个人(或企业)和消费者之间进行商品和/或服务的销售的零售空间。其它实例可能包含诸如制造设施、分配设施、办公空间、购物中心、节日场地和/或机场等的物理空间。此外，尽管在图1中示出了单个物理空间100，但是示例实施例可以在多个物理空间的环境中实施。在另一方面，一个或多个参与者可以位于物理空间100内。具体地，参与者可以定义位于物理空间100内的各种物理实体中的一个。例如，参与者在其它的可能性中可以包括人、动物、机器、机器人系统和/或物件。
物理空间中的示例性传感器102可以包括但不限于：力传感器、接近度传感器、运动传感器(例如，惯性测量单元(IMU)、陀螺仪和/或加速度计)、负载传感器、位置传感器、热成像传感器、面部识别传感器、深度传感器(例如，RGB-D、激光、结构光和/或飞行时间相机)、点云传感器、超声波距离传感器、红外传感器、全球定位系统(GPS)接收器、声纳、光学传感器、生物传感器、射频识别(RFID)系统、近场通信(NFC)芯片、无线传感器、罗盘、烟雾传感器、光传感器、无线电传感器、麦克风、扬声器、雷达、触摸传感器(例如电容式传感器)、相机(例如彩色相机、灰度相机和/或红外相机)和/或距离传感器(例如超声波和/或红外)等。
另外，除了其它可能的位置之外，传感器102可以位于物理空间100内或其附近。此外，示例实施例还可以使用并入在诸如移动电话、膝上型计算机和/或平板计算机的现有设备内的传感器。这些设备可能由位于物理空间100中的人(例如零售空间内的消费者和/或雇员)拥有。附加地或可替代地，这些设备可以是显示的项目，例如在用于销售消费电子产品的零售空间中。
图1还描绘了可以从位于物理空间100中的传感器102接收数据的计算系统104。特别地，传感器102可以经由通信链路116向计算系统提供传感器数据。通信链路116可以包括有线链路和/或无线链路(例如使用各种无线发射机和接收机)。有线链路可以包括例如并行总线或诸如通用串行总线(USB)的串行总线。无线链路可以包括例如蓝牙、IEEE802.11(IEEE802.11可以指IEEE802.11-2007、IEEE802.11n-2009或任何其它IEEE802.11修订版)、蜂窝(例如GSM、GPRS、CDMA、UMTS、EV-DO、WiMAX、HSPDA或LTE)或Zigbee等等。此外，可以使用多个有线和/或无线协议，诸如使用蜂窝通信协议(例如CDMA、GSM或WiMAX以及用于使用802.11的“WiFi”连接)的“3G”或“4G”数据连接。
在其它示例中，该布置可以包括接入点，通过该接入点传感器102和/或计算系统104可以通过与云服务器进行通信。接入点可以采取各种形式，例如无线接入点(WAP)或无线路由器的形式。此外，如果使用诸如CDMA或GSM协议的蜂窝空中接口协议进行连接，则接入点可以是经由蜂窝网络提供互联网连接的蜂窝网络中的基站。其它示例也是可能的。
示出的计算系统104包括一个或多个处理器106、数据储存器108、程序指令110和电源112。注意，仅为说明的目的示出了计算系统104，其可以在不脱离本公开的范围的情况下包括附加组件和/或具有一个或多个组件。此外，请注意，计算系统104的各种组件可以以任何方式布置和连接。
来自一个或多个处理器106的每个处理器可以是通用处理器或专用处理器(例如数字信号处理器、专用集成电路等)。处理器106可以被配置用于执行存储在数据储存器108中的并且可被执行以提供这里描述的计算系统104的功能的计算机可读程序指令110。例如，程序指令110可以被执行以提供对从传感器102接收的传感器数据的处理。
数据储存器108可以包括一个或多个计算机可读存储介质或采用一个或多个计算机可读存储介质的形式，该计算机可读存储介质可以被一个或多个处理器106读取或访问。一个或多个计算机可读存储介质可以包括易失性和/或非易失性存储组件，诸如光学、磁、有机或其它存储器或盘存储器，这些存储组件可以整体地或部分地与一个或多个处理器106集成。在一些实施例中，数据储存器108可以使用单个物理设备(例如一个光学、磁、有机或其它存储器或盘存储单元)，而在其它实施例中，数据储存器108可以使用两个或多个物理设备来实现。此外，除了计算机可读程序指令110之外，数据储存器108还可以包括附加数据，例如诊断数据以及其它可能性。此外，计算系统104还可以包括被配置用于向计算系统104的各种组件供电的一个或多个电源112。可以使用任何类型的电源，例如电池。
图1还示出了位于物理空间100中的订户设备114。虽然订户设备114被示为位于物理空间100中，但是订户设备114也可以位于另一个位置，例如物理空间100外部。在任一情况下，订户设备114可以是能够(直接或间接地)订制计算系统104所提供的服务的任何设备。为了订制由计算系统104提供的服务，订户设备114可以与计算系统104经由通信链路(例如经由链路116的形式的链路)与计算系统104通信。订户设备114使用的与计算系统104通信的链路可以与传感器102使用的与计算系统104通信的链路116相同或不同。此外，在一些情况下，订户设备114可以包括物理空间100中的至少一些传感器102。
订户设备114可以采取各种形式之一。例如，订户设备114可以是电气设备、电子设备、机电设备或者计算设备等等。举例来说，订户设备114可以是以下中的任何一个：电视机、扬声器、投影仪、机器人系统、蜂窝电话、膝上型计算机、平板计算机、台式计算机、可穿戴计算设备、医疗设备、扫描仪、打印机、寻呼机、相机、计算器、烤箱、冰箱、微波炉、风扇或洗衣机。各种其它示例也是可能的。
如所指出的，订户设备114在一些情况下可以采取计算设备的形式，或者可以通信地链接到单独的计算设备(未示出)。在任一种情况下，除了其它组件之外，该计算设备可以包括显示器和输入法编辑器(IME)。这样的其它组件可以包括：处理器、数据储存器、程序指令和/或电源等(例如其中的全部(或部分)可以采用与计算系统104的组件相同或相似的形式)。作为示例，如上所述，该计算设备可以采取台式计算机、膝上型计算机、平板计算机、可穿戴计算设备和/或移动电话的形式等等。
计算设备的显示器可以采取任何形式并且可以被布置用于将图像和/或图形投影到计算设备的用户。在示例性布置中，计算设备内的投影仪可以被配置用于将图像和/或图形的各种投影投影到显示器的表面上。显示器可以包括：不透明或透明(或半透明)的矩阵显示器(诸如电致发光显示器或液晶显示器)、用于将图像传递到用户的眼睛的一个或多个波导或者能够传递一个图像给用户的其它光学元件。相应的显示驱动器可以布置在计算设备内用于驱动这样的矩阵显示器。其它布置也可以用于显示器。如此，显示器可以显示图形用户界面(GUI)，其可以提供用户可以通过其与本文公开的系统进行交互的应用程序。
另外，计算设备可以经由IME接收(例如来自计算设备的用户的)用户输入。特别地，IME可以允许与GUI的交互，例如用于滚动、提供文本和/或选择应用程序的各种特性以及其它可能的交互。IME可以采取多种形式。在一个示例中，IME可以是指示设备，诸如用于控制GUI的计算鼠标。然而，如果显示器是触摸屏显示器，则可以接收允许控制GUI的触摸输入(例如诸如使用手指或触笔)。在另一个示例中，IME可以是文本IME，例如提供经由GUI显示的数字、字符和/或符号的选择的键盘。例如，在显示器是触摸屏显示器的布置中，显示器的部分可以显示IME。因此，包括IME的显示器部分上的触摸输入可以导致用户输入，例如通过显示器在GUI上显示特定数字、字符和/或符号的选择。在又一示例中，IME可以是语音IME，其例如经由计算设备的麦克风从用户接收音频输入，然后使用各种语音识别技术之一将其解释为可经由显示器显示的一个或多个字符。其它示例也是可能的。
三.说明性方法
图2是示出根据示例实现方式的方法200的流程图。特别地，可以实现方法200以在物理区域中检测满足触发条件的事件。
图2中示出的方法200(以及本文公开的其它过程和方法)提出了可以在包含例如以上结合图1描述的计算系统104和/或订户设备114的布置内实现的方法(或更具体地，由其一个或多个组件或其子系统来实现，诸如由处理器和具有指令的非瞬时性计算机可读介质来实现，其中该指令可被执行以使得设备执行这里所描述的功能)。另外地或可替代地，方法200可以在任何其它布置和系统内实现。
本文公开的方法200和其它过程和方法可以包括如框202-210中的一个或多个所示的一个或多个操作、功能或动作。尽管这些框以顺序的次序示出，但这些框也可以并行执行和/或以不同于这里所述的次序执行。而且，各个块可以基于需要的实施例而被组合成更少的块、被分成附加的块和/或被删除除。
另外，对于这里公开的方法200和其它过程和方法，该流程图示出了本实施例的一个可能的实施方式的功能和操作。就此而言，每个块可以表示程序代码的模块、段或部分，其包括可由处理器执行的、用于实现该过程中的特定逻辑功能或步骤的一个或多个指令。程序代码可以存储在任何类型的计算机可读介质上，例如包括磁盘或硬盘的存储设备。计算机可读介质可以包括非瞬时性计算机可读介质，例如像寄存器存储器、处理器高速缓存和随机存取存储器(RAM)那样的短时间存储数据的计算机可读介质。计算机可读介质还可以包括非瞬时性介质，诸如像只读存储器(ROM)、光盘或磁盘、紧凑光盘只读存储器(CD-ROM)的次级或持久性长期存储器。计算机可读介质还可以是任何其它易失性或非易失性存储系统。计算机可读介质可以被认为是例如计算机可读存储介质或者具体的存储设备。另外，对于这里公开的方法200和其它过程和方法，图2中的每个框可以表示被连线以执行该过程中的特定逻辑功能的电路。
在框202处，方法200包含由计算系统(例如计算系统104)从至少一个订户设备(例如订户设备114)接收物理空间(例如物理空间100)的虚拟表示内的至少一个虚拟区域的指示，其中至少一个虚拟区域对应于物理空间内的至少一个物理区域。
在示例实施例中，订户设备114可以包括能够订制到由计算系统104提供的服务的应用程序。例如，订户设备114可以是已经在编程方式上配备有应用程序(例如通过工程输入、通过下载或通过安装)的扬声器。或者，订户设备114可以通信地链接到包括该应用程序的另一计算设备(例如平板计算机)。在这种情况下，计算设备可以使用应用程序来将订户设备114订制到由计算系统104提供的服务。例如，平板计算机可以将扬声器(例如基于在平板计算机上提供的用户输入)订制到由计算系统104提供的服务并且可以使扬声器基于服务的结果来进行动作，如下面进一步讨论的。
在任一情况下，应用程序都可以自动订制到服务。例如，当订户设备114遇到以编程方式启动对该订制的请求的特定设备状态时，应用程序可以订制到服务。或者，应用程序可以响应于用户提供的用户输入来订制到服务。此外，应用程序可以通过向计算系统104发送特定请求来订制到服务，该特定请求可以包括：订户设备114的标识(ID)、订户设备114的能力、订户设备114的型号、请求的时间和/或接收所请求的服务的时间段等等。
因此，该请求可以包括与该服务有关的特定细节的指示。特别地，该请求可以包括物理空间100的虚拟表示内的至少一个虚拟区域的指示。该虚拟区域可以对应于物理空间100内的物理区域，从而允许订户设备114(或者单独的计算设备)实质上为订户设备114指定感兴趣的物理区域。此外，该虚拟区域可以对应于物理区域，诸如通过对应于物理区域的相对位置、大小、形状和/或相对定向(以及其它可能的属性)。
如此，该请求可以指定与虚拟区域有关的各种特性。这些特性可以包括但不限于：(i)至少一个虚拟区域的大小，(ii)至少一个虚拟区域的形状，(iii)至少一个虚拟区域在物理空间的虚拟表示内的相对位置，以及(iv)至少一个虚拟区域在物理空间的虚拟表示内的相对定向。以这种方式，虚拟表示内的虚拟区域可以具有与物理空间100内的物理区域的属性相匹配的属性。
此外，该物理区域可以是物理空间100的物理子区段。例如，物理区域可以是物理空间100的二维(2D)子区域，其可以呈现任何大小和形状。如果物理空间100是三维(3D)空间，则2D子区域也可以呈现3D空间内的任何相对定向。在这种情况下，物理区域因此可以是正方形、矩形、圆形或三角形以及其它可能的形状。在其它情况下，该物理区域可以是物理空间100的3D子体积，其可以呈现任何相对位置、大小、形状和/或相对定向。例如，物理区域可以是立方体、立方体、圆柱体、圆锥体、球体、金字塔形和/或三角棱镜形以及其它可能的形状。在其它情况下，物理区域可以是物理空间内的一维的点。其它情况也是可能的。
图3A示出采取零售店形式的示例性物理空间300。示出的物理空间300包括各种设备，例如订户设备302。另外，如图3A所示，示例物理区域304可以采取位于订户设备302附近的立方体的形式。此外，物理空间300被示出包括示例传感器306A至306B。特别地，传感器306A可以采取深度传感器的形式，传感器306B可以采取热传感器的形式，并且传感器306C可以采用接近传感器的形式。注意，这些传感器仅用于说明的目的而被示出，并不意味着是限制性的，因为物理空间300还可以包括其它类型的传感器。
如下面进一步讨论的，订户设备302可以定义对应于该物理区域304的虚拟区域，以获得与在订户设备302附近发生的事件有关的信息。在示例实施例中，可以以多种方式来定义虚拟区域(例如作为指示的一部分)。举例来说，虚拟表示可以是与物理空间100的物理坐标系相对应的虚拟坐标系，例如通过对应于物理空间100的大小、形状和/或定向(以及其它可能的属性)。在这个示例中，该指示可以指定虚拟坐标系内的虚拟坐标，虚拟坐标系因此可以定义虚拟区域。利用这种布置，虚拟区域可以对应于物理空间100内的物理区域。例如，指定的虚拟坐标可以对应于物理坐标系内的物理坐标，例如通过对应于物理区域的相对位置、大小、形状和/或相对定向(以及其它可能的属性)。
在另一个示例中，用户可以通过与订户设备114的交互(例如如果设备114是计算设备)或者与可以将设备114订制到由计算系统104提供的服务的单独的计算设备交互的形式来手动地定义虚拟区域。在任一种情况下，这样的计算设备可以被配置用于例如经由上述应用程序来显示图形用户界面(GUI)。该GUI可以提供对物理空间100的视觉表示内的虚拟区域的选择。在一种情况下，GUI可以示出物理空间的(二维(2D)或三维(3D))地图。在另一种情况下，GUI可以显示物理位置的视频传送(video feed)。在另一种情况下，GUI可以显示物理空间的图像。在又一种情况下，GUI可以显示物理空间的布局，诸如从视频馈送外推的布局或物理空间的图像。其它情况也是可能的。
在这种配置内，可以对应于对视觉表示(例如零售空间内的过道)中所示的预定义区域的选择而接收用户输入。然而，配置不限于预定义的区域，因为GUI也可以允许用户定义一个或多个区域以供选择。例如，GUI可以显示物理空间的视觉表示，并且可以接收在物理空间的视觉表示内定义用户区域的后续用户输入。定义用户区域可以包含选择2D或3D形状(例如正方形或立方体等)，接着是用户输入手势，以确定虚拟表示内该形状的位置以及该形状的大小和该形状的定向，从而使用该形状来定义所选择的区域。这些用户输入手势可以包含在地图上的期望位置处使用指示设备(或使用触摸屏显示器上的触摸)。或者，用户输入可以不是选择形状，而是可以包含在地图上绘制定制化形状(例如封闭的区域或体积)以定义所选择的区域。在任一种布置中，得到的所选择的区域可以是物理空间100的2D部分或者可以是物理空间100的3D部分。
在又一示例中，订户设备114可以不将虚拟区域定义为对计算系统104的请求的一部分。而是，计算系统104可以基于订户设备114的特性和/或基于请求的特性来定义虚拟区域。例如，如上所述，该请求可以包括特定的设备属性，诸如订户设备114的ID、订户设备114的能力和/或订户设备114的型号。如下面进一步讨论的，该请求还可以指定触发条件，该条件定义对应于虚拟区域的物理区域内的特定物理变化。如此，计算系统104可以基于特定设备属性和/或指定的触发条件来定义虚拟区域。为此，计算系统104可以参照将各种虚拟区域映射到各种设备属性和/或各种触发条件的存储的映射数据，然后可以基于这种映射来选择虚拟区域。
举例来说，订户设备114可以是电视机，并且触发条件可以包含物理区域内的参与者(例如人或机器人)的存在。计算系统104可以接收包括该信息的请求，然后可以参考映射数据以便为电视定义虚拟区域。在该示例中，虚拟区域可以对应于采取圆柱形形状的物理区域，该圆柱形形状的大小与电视的大小相对应并且可能包围该电视机，以便确定物理区域内参与者的存在。其它示例也是可能的。
另一方面，上述请求可以指定在作为静态虚拟区域或动态虚拟区域的虚拟区域之间的选择。静态虚拟区域可以定义这样的区域，其坐标相对于虚拟表示的坐标系不随时间变化。因此，静态虚拟区域可以对应于具有相对于物理空间100的坐标系不随时间变化的坐标的静态物理区域。而动态虚拟区域可以定义这样的区域，其坐标相对于虚拟区域表示的坐标系随时间变化。因此，动态虚拟区域可以对应于具有相对于物理空间100的坐标系随时间变化的坐标的动态物理区域。
在示例实施例中，动态物理区域可以与参与者从物理空间100的至少第一点到物理空间100的至少第二点的移动相关联。在一种情况下，动态虚拟区域可以简单地呈现任何形状，并且可以基于参与者的移动而相对于虚拟表示移动。在另一种情况下，参与者的大小、形状和/或定向(以及其它属性)可以基本上定义动态物理区域。因此，动态虚拟区域的大小、形状和/或定向可以随着参与者在物理空间100中的移动而适应于参与者的对应大小、形状和/或定向。例如，当一个参与者在第一点时动态物理区域可以具有第一形状，而当参与者处于第二点时可能具有第二形状。因此，当参与者在第一点和第二点时，动态虚拟区域可以分别呈现第一和第二形状。以这种方式，当参与者在第一点和第二点时，第一和第二形状可以分别对应于参与者的形状。其它情况也是可能的。
此外，计算系统104可以使用各种技术之一来生成动态虚拟区域。如下面进一步详细讨论的，计算系统104可以从位于物理空间100中的传感器接收传感器数据。然后，计算系统104可以使用传感器数据来随时间生成动态虚拟区域。例如，计算系统104可以从位于物理空间100中的相机接收图像数据。然后，计算系统104可以使用各种图像处理技术来(例如连续地或从时间到时间地)确定参与者的2D或3D轮廓，该轮廓然后可以用作定义动态虚拟区域的基础。各种其它技术也是可能的。
图4A至图4D示出了表示参与者的位置、形状和定向的动态区域的示例。如图4A中所示，示例参与者400可以采取位于物理空间300中的第一点/位置处的仿人机器人的形式。图4B然后示出了示例动态区域402，其呈现参与者400的相对位置、形状和相对定向(以及其它属性)。然而，该区域402具有比参与者400的尺寸更大的尺寸，以便允许例如检测参与者400周围的物理变化(如下面进一步讨论)。如图4C所示，示例参与者400已经从物理空间300的第一点/位置移动到第二点/位置。而且，由于仿人机器人的臂的移动，参与者400的形状已经改变到新的形状。图4D然后示出了示例性动态区域402，该示例性动态区域402呈现参与者400的更新的相对位置、更新的形状以及更新的相对定向(以及其它更新的属性)。然而，如上所述，该区域402的大小仍大于参与者400的大小，从而例如允许检测参与者400的更新位置处的参与者400周围的物理变化。注意，图4A至4D仅仅是为了说明目的而示出的，并不意味着限制。
图5A至5B示出了示例性动态区域，其呈现相对简单的形状并且基于参与者400的移动而移动。如图5A所示，示例参与者400可以采取仿人机器人的形式，其位于物理空间300中的第一点/位置处。图5A然后示出了采取围绕着参与者400的3D矩形形状的示例性动态区域502。该区域502的大小大于参与者400的大小，以便允许例如检测参与者400周围的物理变化(如下面进一步讨论的)。如图5B所示，示例参与者400已经从物理空间300的第一点/位置移动到第二点/位置。图5B随后示出了示例性动态区域502移动到参与者400的更新的相对位置。如图所示，该区域502的大小仍然大于参与者400的大小，以便允许例如检测参与者400的更新位置处的参与者400周围的物理变化。注意，图5A至5B仅出于说明的目的而被示出，并不意味着限制。
返回参照图2，在框204处，方法200包含由计算系统从至少一个订户设备接收与至少一个虚拟区域相关联的至少一个触发条件，其中该至少一个触发条件对应于至少一个物理区域中的至少一个特定物理变化。
在示例实施例中，上述请求可以指定与对应于物理区域的虚拟区域相关联的触发条件。该触发条件可以对应于特定物理变化。物理变化可以定义物理空间中的传感器可感知的物理区域中的任何事件。因此，当物理区域中发生特定物理改变时，订户设备114可以订制以接收通知(如下面进一步讨论的)，并且可以通过定义指定该特定物理变化的触发条件来进行订制。
举例来说，特定物理变化可以包含参与者进入物理区域。这可能具体包含检测到参与者进入物理区域的一些部分(例如体积或区域)。在另一个示例中，特定物理变化可能包含参与者从物理区域退出。这可能具体包含检测参与者退出物理区域的某个部分(例如体积或区域)。在又一个示例中，特定物理变化可以包含至少一个物理区域中参与者的存在。这可以具体包含在至少阈值时间段内检测到参与者存在于物理区域的某个部分(例如体积或区域)。在又一个示例中，特定物理变化可能包含物理区域的占用。这可能具体包含物理区域中至少存在阈值数量的参与者。
在又一个示例中，特定物理变化可以包含至少一个物理区域中的特定声音。例如，这个特定声音可能是一个成年人的声音。这可以具体包含使用从方向性麦克风接收的音频数据以确定声音的位置，并随后确定声音来自所讨论的物理区域。在这个示例中，特定物理变化可以包含在至少一个物理区域中的包括特定短语(例如“你好”)的声音。计算系统104可以使用各种语音识别技术来确定短语与在触发条件中指定的特定短语相匹配。其它示例也是可能的。
触发条件可以以各种方式之一来指定。例如，该请求可以包括对应于触发条件的代码。在这个示例中，计算系统104可以参照将代码映射到各种特定物理变化的存储的映射数据，并且计算系统104可以因此通过确定与指定代码相对应的特定物理变化来解释触发条件。在另一个示例中，该请求可以包括指定特定物理变化(例如“参与者的进入”)的一个或多个字符(例如通过用户输入接收的)。在这个示例中，计算系统104可以使用各种自然语言处理(NLP)技术来解释该请求，从而确定特定物理变化。其它示例也是可能的。
返回参考图2，在方框206处，方法200包含由计算系统从位于物理空间中的多个传感器(例如传感器102)接收传感器数据，其中传感器的至少一部分数据与物理空间内的至少一个物理区域相关联。
在示例实施例中，计算系统104可以以计算机可读数据分组等等的形式接收传感器数据。另外，计算系统104可以单独地从每个传感器接收数据，或者可以同时从两个或多个传感器接收数据(例如，诸如在相同的数据分组内)。此外，可以连续地(例如实时地)接收传感器数据，或者可以从时间到时间(例如周期性地)接收传感器数据。另外，可以以匿名数据流的形式接收传感器数据。也就是说，表示与位于物理空间100内的一个或多个实体(例如个体)有关的信息的传感器数据可以不提供与一个或多个实体的相应个体身份相关的任何信息，由此保持物理空间100内的个体的隐私。
一旦接收到传感器数据，传感器数据中的一些或全部可以被存储在数据储存器108中和/或被处理(例如使用处理器106)以提供在此讨论的功能。另外，计算系统104可以存储与接收到的传感器数据有关的时间。例如，计算系统104可以使用各种时间戳技术来建立由传感器获得传感器数据的时间、传感器数据(例如数据分组)被发送到计算系统104的时间和/或计算系统104接收到传感器数据(例如数据分组)的时间等等。该时间可以包括日期、一周中的某一天和/或一天中的某个时间等等。
此外，计算系统104可以另外或替代地存储与传感器数据有关的位置。例如，计算系统104可以将位置信息编码到所接收的数据分组(例如接收传感器标识信息并确定所标识的传感器的对应存储位置)。或者，所接收的数据分组可能已经在其上编码了位置信息。在任一情况下，位置信息可以是物理空间100内的坐标、地址和/或表示名称的字符列表(例如零售空间内部门的名称)等形式。
而且，该位置信息可以表示特定传感器(或一组传感器)的物理空间100内的位置。然而，在一些情况下，所接收的传感器数据可以提供与物理空间100内的位置有关的信息，其不一定与获得该传感器数据的传感器的位置相同。因此，位置信息可以另外或替代地表示接收到的传感器数据与其相关联的物理空间100内的位置。作为示例，传感器数据可以包括从位于物理空间内的相机接收的图像数据。在该示例中，位置信息可以包括相机在物理空间内的位置和/或可以包括与由相机提供的图像数据相关联的位置。其它示例也是可能的。
返回参考图2，在方框208处，方法200包含，计算系统基于传感器数据检测至少一个物理区域内的事件，该事件满足对应于至少一个物理区域中的至少一个特定物理变化的至少一个触发条件。
在示例实现方式中，计算系统104可以使用所接收的传感器数据来检测满足触发条件的物理区域中的事件。该事件可以定义由一个或多个传感器检测到的物理区域中的物理变化。因此，检测事件可以包含确定接收到的传感器数据的至少一部分包括表示事件的数据。为了确定事件满足触发条件，计算系统104可以确定包括表示事件的数据的所接收的传感器数据的部分与定义触发条件的数据匹配(或者至少基本匹配)。
特别地，一旦计算系统104接收到虚拟区域的指示和触发条件，则计算系统104就可以确定用于检测满足触发条件的物理区域中的事件的至少一个方法(也可以被称为传感器解释规则)。一旦确定了方法，计算系统104就可以基于该方法检测事件。在确定两个或多个方法的情况下，计算系统104可以使用所确定的方法中的任何一个来检测事件。在任何一种情况下，这种方法都可以通过各种方式来确定。
在示例性布置中，计算系统104可以基于位于物理空间100中的多个传感器102中的一个或多个的特性来确定方法。更具体地，计算系统104可以在其上存储(例如，在数据储存器108中)与位于特定物理空间中的传感器有关的信息，或者可以另外参考与位于特定物理空间中的传感器有关的信息。该信息可以包括各种传感器的特性，并且在确定方法时可以考虑这些特性。
在一种情况下，传感器特性可以包含传感器类型，例如传感器是位置传感器还是例如热传感器。在另一种情况下，传感器特性可能包含传感器制造商和/或型号，例如公司名称和/或产品名称。在又一种情况下，传感器特性可能包含传感器位置，例如基于上述位置信息。在又一种情况下，传感器特性可能包含传感器定向，例如传感器在物理空间100中的相对定向。在另一种情况下，传感器特性可能包含传感器与物理区域的关联。例如，计算系统104可以确定与传感器相关联的位置信息对应于物理区域的坐标。在又一种情况下，传感器特性可以包含与订户设备114的传感器关联。例如，计算系统104可以确定传感器是订户设备114的一部分。其它情况也是可能的。
因此，在一个方面中，确定方法可以包含选择一个或多个特定传感器(例如从物理空间100中的多个传感器102当中)来用于检测事件。选择一个或多个特定传感器可以包含选择具有最适合于检测事件的特性的一个或多个传感器。例如，如果触发条件包含检测到参与者进入区域，则计算系统104可以确定最合适的传感器将包含与物理区域相关联的图像捕获设备和与物理区域相关联的接近传感器的组合。
这样，选择一个或多个特定传感器可以包含，计算系统104选择至少(i)被配置为生成第一传感器数据的第一传感器和(ii)被配置生成第二传感器数据的第二传感器。计算系统104然后可以做出决定来使用至少第一和第二传感器数据来检测事件。在这个决定之后，计算系统104可以基于对至少第一和第二传感器数据的评估来检测物理区域中的特定物理变化。如果该第一和第二传感器数据与定义触发条件的数据匹配(或至少基本上匹配)，则计算系统104可确定该事件已被检测到。
在另一方面，确定方法可以包含确定与物理空间内的物理区域相关联的传感器数据的部分。为此，例如，计算系统104可以确定数据分组的上述位置信息对应于物理区域的坐标，并且可以响应地将数据分组(例如在其上编码)表示为与物理区域相关联。在另一个示例中，计算系统104可以直接确定传感器数据的哪个部分对应于物理区域。例如，计算系统104可以从深度传感器接收多个深度点，然后可以使用深度点的坐标来确定哪个深度点与物理区域对应。通过这些布置，计算系统104可以通过基于对与物理区域相关联的传感器数据的部分的评估，例如基于对已经被表示为与物理区域相关的数据分组的评估来检测物理区域中的特定物理变化。
在又一方面，确定方法可以包含确定定义触发条件的数据。特别地，计算系统104可以确定传感器数据内的信息(例如，值)，该信息表示特定物理变化并因此表示触发条件。因此，该信息可以等于计算系统104应当在传感器数据内查找以便检测事件的信息。计算系统104可以以各种方式之一来确定该信息。
在一种情况下，确定该信息可以基于包括在上述请求中的内容。例如，该请求可以指定定义触发条件的值和/或阈值(例如，针对一个或多个特定传感器)，然后计算系统104可以在接收到传感器数据时，确定传感器数据是否包括这些指定的值和/或超过指定的阈值的值。作为示例，该请求可以包括触发条件，该触发条件指定当物理区域中的温度超过华氏一百度时计算系统104应当通知订户设备114。在这个示例中，当传感器数据被接收时，计算系统104可以确定传感器数据是否包括与超过华氏100度的物理区域中的温度相对应的数据。
在另一种情况下，可以基于上述请求中的内容来推断该信息。例如，请求可以不指定值和/或阈值，而是可以以另一种方式(例如通过指定该条件的代码或语言)来定义触发条件。计算系统104然后可以使用映射数据或其它处理技术来确定对应于该触发条件的值和/或阈值。当传感器数据被接收时，计算系统104可以确定传感器数据是否包括这些值和/或超过阈值的值。
作为示例，请求可以包括触发条件，该触发条件指定当物理区域变得“热”时，计算系统104应当通知订户设备114。触发条件可以通过文本的方式(例如“当这个区域热时让我知道”)来指定，例如通过用户输入提供的文本。在该示例中，计算系统104可以使用NLP技术来确定请求的含义，并且然后可以确定(例如基于映射数据)“热”区域可能包含超过华氏一百度的物理区域中的温度。因此，如果物理区域中的温度超过华氏一百度，则计算系统104可以确定触发条件将被满足。这样，当传感器数据被接收时，计算系统104可以确定传感器数据是否包括与超过华氏100度的物理区域中的温度相对应的数据。
在又一个方面，确定方法可以包含确定从检测事件的每个传感器接收的数据的权重。另外地或可替代地，确定方法可以包含确定用于检测事件的传感器数据的每个部分的权重。例如，计算系统104可以确定应该使用温度传感器和位置传感器来检测事件。在该示例中，计算系统104可以确定从温度传感器接收的传感器数据的第一权重和从位置传感器接收的传感器数据的第二权重。计算系统104然后可以将相应的权重应用于相应的传感器数据，例如通过确定比如加权平均值。因此，计算系统104可以基于通过将不同的权重应用于不同的传感器数据而得到的值来检测事件。例如，计算系统104可以确定加权平均值，然后可以确定加权平均值是否超过阈值，以便检测事件。其它方面(以及上述方面的组合)也是可能的。
返回参照图2，在框210处，方法200包含响应于检测到事件，由计算系统向至少一个订户设备提供指示至少一个触发条件已经被满足的通知。
在一个示例实施例中，计算系统104可以通知订户设备114已经检测到事件并且因此触发条件已经被满足。计算系统104可以通过向订户设备114发送指示如此的通知来这样做。例如，通知可以包括指示触发条件已被满足的二进制值(例如一(1))、代码和/或文本。在某些情况下，通知还可以包括其它信息，例如满足触发条件的时间等等。
一旦订户设备114接收到通知，其可以采取各种动作之一。为了呈现这样的示例动作，参考图3B和5C，每个图示出了一个参与者与区域交互。例如，图3B示出了位于物理区域304中的参与者308。在该示例中，订户设备302可能已经将触发条件指定为物理区域304中的参与者的存在。基于该触发条件，计算系统104可以确定物理区域304中的参与者308的存在(例如使用传感器306A至306C中的一个或多个)，并且然后可以通知订户设备302触发条件已经被满足。响应于该通知，订户设备302可以采取各种动作之一。例如，订户设备302可以更新由订户设备302显示的内容。如图3B所示，这可以包含订户设备302打开设备302的显示器，以显示包括当前时间等等的锁定屏幕。在另一个示例中，订户设备302可以在每次接收到通知时(并且因此每当参与者出现在区域304中时)递增计数器。例如，订户设备302可以这样做来确定在一天中的一段时间内存在于该地区中的参与者的总数。其它情况也是可能的。
在另一个示例中，图5C示出了位于动态区域402(并且因此在参与者400附近)的参与者504(采取机器人的形式)。在该示例中，参与者400(也采取机器人的形式)可以是订户设备，并且因此可能已经将触发条件指定为动态区域402中的另一个参与者的存在。基于该触发条件，计算系统104可以确定动态区域402中的参与者504的存在。一旦计算系统104确定动态区域402中存在参与者504，则计算系统104然后可以通知参与者400触发条件已经被满足。响应于该通知，参与者400可以采取各种动作之一。例如，采取机器人形式的参与者400可以使机器人关机或停止移动，从而降低与参与者504碰撞的风险，从而提高机器人周围环境的安全性。其它示例也是可能的。
四.附加功能
另一方面，上述实施例可以在多个区域的环境下执行。例如，该请求可以指定两个或多个虚拟区域。在这种情况下，每个区域的触发条件可能是相同的。另外地或可替代地，每个区域的触发条件可以不同。利用这种布置，计算系统104可以在已经满足了各个指定区域的所有触发条件时通知订户设备114。在另一种情况下，计算系统104可以在至少一个区域的至少一个触发条件已经被满足时通知订户设备114。在某些情况下，请求可能会指定应满足触发条件的顺序。例如，该请求可以指定，应当满足区域A的触发条件A，然后满足区域B的触发条件B。因此，当计算系统104检测到按照该顺序发生的事件时，计算系统104可以通知订户设备114。其它情况也是可能的。
在又一方面中，上述实施例可以在用于指定区域的多个触发条件的环境中执行。例如，请求可以为指定区域指定两个或多个的触发条件。在这种情况下，该区域的触发条件可能相对于彼此不同。利用这种布置，计算系统104可以在指定区域的所有触发条件都被满足时通知订户设备114。在另一种情况下，计算系统104可以在满足指定区域的至少一个触发条件时通知订户设备114。在某些情况下，请求可能会指定用于指定区域的触发条件应当被满足的顺序。例如，该请求可以指定，应当满足区域A的触发条件A，然后满足区域A的触发条件B。因此，当计算系统104检测到在指定区域内以此顺序发生的事件时，计算系统104可通知订户设备114。其它情况也是可能的。
在又一方面，可以基于参与者的注视方向来定义虚拟区域。特别地，计算系统104可以使用传感器数据来确定参与者的注视方向，然后可以使用该注视方向来定义该区域。例如，计算系统104可以基于参与者的视野来定义区域，例如通过将该区域定义为参与者的视野的焦点。在这方面，该定义的区域可以是动态的，并且因此可以基于参与者变化的注视方向来更新。其它方面也是可能的。
五.结论
本公开不受在本申请中描述的特定实施方式的限制，其旨在作为各个方面的说明。对于本领域技术人员来说显而易见的是，在不脱离本发明的精神和范围的情况下可以进行许多修改和变化。根据前面的描述，除本文列举的那些之外，在本公开的范围内的功能上等同的方法和设备对于本领域技术人员将是显而易见的。这样的修改和变化旨在落入所附权利要求的范围内。
以上详细描述参照附图描述了所公开的系统、设备和方法的各种特性和功能。在附图中，除非上下文另外指出，否则相似的符号通常标识相似的组件。这里和附图中描述的示例性实施例不意味着限制。可以利用其它实施方式，并且可以做出其它改变而不偏离本文提出的主题的精神或范围。将容易理解的是，如本文一般性描述的以及在附图中示出的本公开的方面可以以各种各样的不同配置进行布置、替换、组合、分离和设计，所有这些都被明确地考虑于此。
附图中所示的具体布置不应被视为限制。应该理解的是，其它实施例可以包括给定图中示出的每个元件的更多或更少的元件。此外，所示元件中的一些可以被组合或省略。另外，示例实施例可以包括在图中未示出的元件。
虽然本文已经公开了各个方面和实现方式，但是对于本领域技术人员而言，其它方面和实现方式将是显而易见的。本文公开的各个方面和实施方式是为了说明的目的，而不是旨在限制，真正的范围由以下权利要求指示。
在系统收集关于实体的信息或利用该信息的情况下，可以在数据被存储或使用之前以一种或多种方式处理数据，从而排除个人可识别信息。例如，可以对一个实体的身份进行处理，使得不能为该实体确定个人可识别信息，或者在获得位置信息(例如城市、邮政编码或州级)的情况下，实体的地理位置可以被概化，因此不能确定实体的特定位置。

Claims (15)

1.一种用于检测在物理空间的物理区域内触发条件已被满足的方法，包括：
由计算系统从至少一个订户设备接收物理空间的虚拟表示内的至少一个虚拟区域的指示和与所述至少一个虚拟区域相关联的至少一个触发条件，其中所述至少一个虚拟区域对应于所述物理空间内的至少一个物理区域，其中所述至少一个触发条件对应于所述至少一个物理区域中的至少一个特定物理变化，其中所述订户设备包含使得能够将所述指示和所述触发条件传输到所述计算系统、以及随后从所述计算系统接收指示所述触发条件已被满足的通知的程序代码，其中所述订户设备不包含使得能够使用传感器数据作为检测物理区域中满足所述触发条件的事件的基础的程序代码，并且其中所述计算系统提供编程构建块，该编程构建块使得订户设备能够使计算系统代表订户设备接收来自多个传感器的传感器数据、以及代表订户设备检测满足触发条件的物理区域中的事件；
由所述计算系统从位于所述物理空间中的多个传感器接收传感器数据，其中所述传感器数据的至少一部分与所述物理空间内的所述至少一个物理区域相关联；
基于所述传感器数据，所述计算系统检测所述至少一个物理区域中的事件，该事件满足与所述至少一个物理区域中的所述至少一个特定物理变化相对应的所述至少一个触发条件；以及
响应于检测到所述事件，由所述计算系统向所述至少一个订户设备提供指示已经满足所述至少一个触发条件的通知。
2.根据权利要求1所述的方法，其中与所述物理空间内的所述至少一个物理区域相对应的所述至少一个虚拟区域包括对应于所述物理空间的三维(3D)子体积的所述至少一个虚拟区域。
3.根据权利要求1所述的方法，其中接收所述至少一个虚拟区域的指示包括接收所述至少一个虚拟区域的特性，且其中所述特性包括以下各项中一个或多个：(i)所述至少一个虚拟区域的大小，(ii)所述至少一个虚拟区域的形状，(iii)所述至少一个虚拟区域在所述物理空间的所述虚拟表示内的相对位置，(iv)所述至少一个虚拟区域在所述物理空间的所述虚拟表示内的相对定向，以及(v)在所述至少一个虚拟区域是至少一个静态虚拟区域还是至少一个动态虚拟区域之间的选择。
4.根据权利要求1所述的方法，其中所述至少一个物理区域包括至少一个动态物理区域，所述至少一个动态物理区域与至少一个参与者从所述物理空间的至少第一点到所述物理空间的至少第二点的移动相关联，并且其中所述至少一个虚拟区域包括对应于所述至少一个动态物理区域的至少一个动态虚拟区域。
5.根据权利要求4所述的方法，其中所述至少一个动态物理区域具有(i)当所述至少一个参与者处于所述第一点时的第一形状和(ii)当所述至少一个参与者处于第二点时的第二形状，并且其中当所述至少一个参与者处于所述第一点和第二点时，所述至少一个动态虚拟区域分别呈现所述第一形状和第二形状。
6.根据权利要求5所述的方法，其中当所述至少一个参与者处于所述第一点和第二点时，所述第一形状和第二形状分别对应于所述至少一个参与者的特定形状。
7.根据权利要求1所述的方法，还包括：
响应于接收到所述至少一个虚拟区域的指示和所述至少一个触发条件，确定用于检测满足所述至少一个触发条件的所述至少一个物理区域中的事件的至少一个传感器解释规则，其中检测所述事件包括，至少部分地基于至少一个传感器解释规则来检测所述事件。
8.根据权利要求7所述的方法，其中确定所述至少一个传感器解释规则包括，至少部分地基于位于所述物理空间中的所述多个传感器中的一个或多个的特性来确定所述至少一个传感器解释规则。
9.根据权利要求8所述的方法，其中所述特性包括以下中的一个或多个：(i)传感器类型，(ii)传感器型号，(iii)传感器位置，(iv)传感器定向，(v)传感器与至少一个物理区域的关联，以及(vi)传感器与至少一个订户设备的关联。
10.根据权利要求7所述的方法，其中确定所述至少一个传感器解释规则包括，从所述多个传感器中选择一个或多个特定传感器以用于检测所述事件。
11.根据权利要求10所述的方法，其中选择一个或多个特定传感器包括，选择至少(i)配置为生成第一传感器数据的第一传感器和(ii)配置为生成第二传感器数据的第二传感器，其中确定所述至少一个传感器解释规则进一步包括，决定使用至少所述第一传感器数据和第二传感器数据来检测所述事件，并且其中至少部分地基于所述至少一个传感器解释规则来检测所述事件包括，基于对至少第一传感器数据和第二传感器数据的评估来检测所述至少一个物理区域中的至少一个特定物理变化。
12.根据权利要求7所述的方法，其中确定至少一个传感器解释规则包括，确定与所述物理空间内的所述至少一个物理区域相关联的所述传感器数据的部分，并且其中至少部分基于所述至少一个传感器解释规则来检测所述事件包括，基于对所述传感器数据的所述部分的评估来检测所述至少一个物理区域中的所述至少一个特定物理变化。
13.根据权利要求1所述的方法，其中所述至少一个特定物理变化包括以下中的一个或多个：
(i)至少一个参与者进入所述至少一个物理区域，
(ii)至少一个参与者从所述至少一个物理区域退出，
(iii)至少一个参与者在所述至少一个物理区域中的出现，
(iv)所述至少一个物理区域的占用，其中所述占用对应于在所述至少一个物理区域中至少阈值数量的参与者的存在，
(v)至少一个物理区域中的特定声音，以及
(vi)至少一个物理区域中的特定短语。
14.一种用于检测在物理空间的物理区域内触发条件已被满足的计算系统，包括：
一个或多个处理器；
非瞬时性计算机可读介质；以及
存储在所述非瞬时性计算机可读介质上并且可由所述一个或多个处理器执行的程序指令，以进行：
从至少一个订户设备接收对物理空间的虚拟表示内的至少一个虚拟区域的指示和与所述至少一个虚拟区域相关联的至少一个触发条件，其中所述至少一个虚拟区域对应于所述物理空间内的至少一个物理区域，其中所述至少一个触发条件对应于所述至少一个物理区域中的至少一个特定物理变化，其中所述订户设备包含使得能够将所述指示和所述触发条件传输到所述计算系统、以及随后从所述计算系统接收指示所述触发条件已被满足的通知的程序代码，其中所述订户设备不包含使得能够使用传感器数据作为检测物理区域中满足所述触发条件的事件的基础的程序代码，并且其中所述计算系统提供编程构建块，该编程构建块使得订户设备能够使计算系统代表订户设备接收来自多个传感器的传感器数据、以及代表订户设备检测满足触发条件的物理区域中的事件；
从位于所述物理空间中的多个传感器接收传感器数据，其中所述传感器数据的至少一部分与所述物理空间内的所述至少一个物理区域相关联；
基于所述传感器数据，检测满足与所述至少一个物理区域中的所述至少一个特定物理变化相对应的所述至少一个触发条件的所述至少一个物理区域中的事件；以及
响应于检测到所述事件，向所述至少一个订户设备提供指示所述至少一个触发条件已被满足的通知。
15.一种非瞬时性计算机可读介质，其中存储有指令，所述指令可由一个或多个处理器执行以使得计算系统执行包括以下的功能：
从至少一个订户设备接收对物理空间的虚拟表示内的至少一个虚拟区域的指示和与所述至少一个虚拟区域相关联的至少一个触发条件，其中所述至少一个虚拟区域对应于所述物理空间内的至少一个物理区域；
其中所述至少一个触发条件对应于所述至少一个物理区域中的至少一个特定物理变化，其中所述订户设备包含使得能够将所述指示和所述触发条件传输到所述计算系统、以及随后从所述计算系统接收指示所述触发条件已被满足的通知的程序代码，其中所述订户设备不包含使得能够使用传感器数据作为检测物理区域中满足所述触发条件的事件的基础的程序代码，并且其中所述计算系统提供编程构建块，该编程构建块使得订户设备能够使计算系统代表订户设备接收来自多个传感器的传感器数据、以及代表订户设备检测满足触发条件的物理区域中的事件；
从位于所述物理空间中的多个传感器接收传感器数据，其中所述传感器数据的至少一部分与所述物理空间内的所述至少一个物理区域相关联；
基于所述传感器数据，检测满足与所述至少一个物理区域中的所述至少一个特定物理变化相对应的所述至少一个触发条件的所述至少一个物理区域中的事件；以及
响应于检测到所述事件，向所述至少一个订户设备提供指示已经满足所述至少一个触发条件的通知。
CN201680048307.6A 2015-11-25 2016-11-22 触发区域 Active CN107924588B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110440617.5A CN113178016A (zh) 2015-11-25 2016-11-22 触发区域

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201562259971P 2015-11-25 2015-11-25
US62/259,971 2015-11-25
US15/213,843 2016-07-19
US15/213,843 US10347047B2 (en) 2015-11-25 2016-07-19 Trigger regions
PCT/US2016/063364 WO2017091590A1 (en) 2015-11-25 2016-11-22 Trigger regions

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202110440617.5A Division CN113178016A (zh) 2015-11-25 2016-11-22 触发区域

Publications (2)

Publication Number Publication Date
CN107924588A CN107924588A (zh) 2018-04-17
CN107924588B true CN107924588B (zh) 2021-05-11

Family

ID=58720276

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202110440617.5A Pending CN113178016A (zh) 2015-11-25 2016-11-22 触发区域
CN201680048307.6A Active CN107924588B (zh) 2015-11-25 2016-11-22 触发区域

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202110440617.5A Pending CN113178016A (zh) 2015-11-25 2016-11-22 触发区域

Country Status (6)

Country Link
US (4) US10347047B2 (zh)
EP (2) EP3381018B1 (zh)
JP (2) JP6665276B2 (zh)
KR (3) KR102474134B1 (zh)
CN (2) CN113178016A (zh)
WO (1) WO2017091590A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10347047B2 (en) * 2015-11-25 2019-07-09 Google Llc Trigger regions
US11351682B2 (en) * 2019-06-19 2022-06-07 International Business Machines Corporation Environment monitoring and associated monitoring device
US11200752B1 (en) 2019-08-23 2021-12-14 Lucasfilm Entertainment Company Ltd. Color correction for immersive content production systems
US11887251B2 (en) 2021-04-23 2024-01-30 Lucasfilm Entertainment Company Ltd. System and techniques for patch color correction for an immersive content production system
US11978154B2 (en) 2021-04-23 2024-05-07 Lucasfilm Entertainment Company Ltd. System and techniques for lighting adjustment for an immersive content production system

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1369846A (zh) * 2001-02-09 2002-09-18 精工爱普生株式会社 服务提供系统、管理终端、移动体、服务提供程序及方法
CN103577043A (zh) * 2012-06-13 2014-02-12 英默森公司 将用户界面隐喻呈现为形状变化设备上的物理变化的方法和装置

Family Cites Families (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6940405B2 (en) * 1996-05-30 2005-09-06 Guardit Technologies Llc Portable motion detector and alarm system and method
US6567787B1 (en) 1998-08-17 2003-05-20 Walker Digital, Llc Method and apparatus for determining whether a verbal message was spoken during a transaction at a point-of-sale terminal
KR100938518B1 (ko) * 2000-03-16 2010-01-25 마이크로소프트 코포레이션 통지 플랫폼 아키텍처
EP1264238A2 (en) 2000-03-16 2002-12-11 Microsoft Corporation Notification platform architecture
JP3543737B2 (ja) 2000-06-27 2004-07-21 松下電工株式会社 板状部品用メッキシステム
US7619512B2 (en) * 2006-10-02 2009-11-17 Alarm.Com System and method for alarm signaling during alarm system destruction
US10339791B2 (en) * 2007-06-12 2019-07-02 Icontrol Networks, Inc. Security network integrated with premise security system
JP2006085390A (ja) * 2004-09-15 2006-03-30 Nippon Telegr & Teleph Corp <Ntt> 固定型通信端末、携帯型通信端末、情報集約・蓄積サーバおよび見守り専用端末
US20060180647A1 (en) * 2005-02-11 2006-08-17 Hansen Scott R RFID applications
US8279168B2 (en) 2005-12-09 2012-10-02 Edge 3 Technologies Llc Three-dimensional virtual-touch human-machine interface system and method therefor
US7987111B1 (en) 2006-10-30 2011-07-26 Videomining Corporation Method and system for characterizing physical retail spaces by determining the demographic composition of people in the physical retail spaces utilizing video image analysis
US8189926B2 (en) 2006-12-30 2012-05-29 Videomining Corporation Method and system for automatically analyzing categories in a physical space based on the visual characterization of people
US8965042B2 (en) 2007-03-20 2015-02-24 International Business Machines Corporation System and method for the measurement of retail display effectiveness
US20090033622A1 (en) 2007-05-30 2009-02-05 24/8 Llc Smartscope/smartshelf
US9727139B2 (en) 2008-12-12 2017-08-08 Immersion Corporation Method and apparatus for providing a haptic monitoring system using multiple sensors
US8217790B2 (en) * 2009-05-26 2012-07-10 Script Michael H Portable motion detector and alarm system and method
US20110022662A1 (en) * 2009-07-23 2011-01-27 International Business Machines Corporation Event triggered notifications for collaborative processes
US8994645B1 (en) * 2009-08-07 2015-03-31 Groundspeak, Inc. System and method for providing a virtual object based on physical location and tagging
US8502835B1 (en) * 2009-09-02 2013-08-06 Groundspeak, Inc. System and method for simulating placement of a virtual object relative to real world objects
US20110060652A1 (en) * 2009-09-10 2011-03-10 Morton Timothy B System and method for the service of advertising content to a consumer based on the detection of zone events in a retail environment
US8232990B2 (en) * 2010-01-05 2012-07-31 Apple Inc. Working with 3D objects
US8493202B1 (en) * 2010-03-22 2013-07-23 Alarm.Com Alarm signaling technology
US8874129B2 (en) * 2010-06-10 2014-10-28 Qualcomm Incorporated Pre-fetching information based on gesture and/or location
US20120092492A1 (en) * 2010-10-19 2012-04-19 International Business Machines Corporation Monitoring traffic flow within a customer service area to improve customer experience
JP2012226650A (ja) * 2011-04-21 2012-11-15 Nippon Telegr & Teleph Corp <Ntt> 物理現象表現装置及び物理現象表現システム
US20120312956A1 (en) 2011-06-11 2012-12-13 Tom Chang Light sensor system for object detection and gesture recognition, and object detection method
US8786425B1 (en) 2011-09-09 2014-07-22 Alarm.Com Incorporated Aberration engine
US8694507B2 (en) * 2011-11-02 2014-04-08 Microsoft Corporation Tenantization of search result ranking
US8942729B2 (en) * 2012-02-02 2015-01-27 Apple Inc. Location based methods, systems, and program products for performing an action at a user device
KR102058947B1 (ko) * 2012-05-24 2019-12-24 엘지전자 주식회사 이동 단말기 및 그의 ｇｐｓ엔진 제어방법
US9046414B2 (en) 2012-09-21 2015-06-02 Google Inc. Selectable lens button for a hazard detector and method therefor
US9978238B2 (en) * 2012-09-21 2018-05-22 Google Llc Visitor options at an entryway to a smart-home
KR101990789B1 (ko) 2012-10-29 2019-06-19 에스케이 텔레콤주식회사 관심객체의 선택에 의한 영상 탐색장치 및 방법
US20140128994A1 (en) * 2012-11-07 2014-05-08 Microsoft Corporation Logical sensor server for logical sensor platforms
US20140157206A1 (en) * 2012-11-30 2014-06-05 Samsung Electronics Co., Ltd. Mobile device providing 3d interface and gesture controlling method thereof
US9274608B2 (en) 2012-12-13 2016-03-01 Eyesight Mobile Technologies Ltd. Systems and methods for triggering actions based on touch-free gesture detection
JP2014164537A (ja) 2013-02-26 2014-09-08 Yasuaki Iwai 仮想現実サービス提供システム、仮想現実サービス提供方法
US9311795B2 (en) * 2014-04-29 2016-04-12 Vivint, Inc. Systems and methods for operating remote presence security
US20160128104A1 (en) * 2014-11-05 2016-05-05 Google Inc. In-field smart device updates
US10347047B2 (en) * 2015-11-25 2019-07-09 Google Llc Trigger regions
JP6932674B2 (ja) 2018-08-09 2021-09-08 株式会社日立ビルシステム 携帯端末、およびエレベーター点検システム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1369846A (zh) * 2001-02-09 2002-09-18 精工爱普生株式会社 服务提供系统、管理终端、移动体、服务提供程序及方法
CN103577043A (zh) * 2012-06-13 2014-02-12 英默森公司 将用户界面隐喻呈现为形状变化设备上的物理变化的方法和装置

Also Published As

Publication number Publication date
US11748992B2 (en) 2023-09-05
US20170148217A1 (en) 2017-05-25
KR102061225B1 (ko) 2019-12-31
KR20180019776A (ko) 2018-02-26
CN107924588A (zh) 2018-04-17
KR20200001604A (ko) 2020-01-06
WO2017091590A1 (en) 2017-06-01
EP4057235A1 (en) 2022-09-14
US20210150819A1 (en) 2021-05-20
JP2018538586A (ja) 2018-12-27
EP3381018A4 (en) 2019-06-26
JP6665276B2 (ja) 2020-03-13
EP3381018A1 (en) 2018-10-03
JP2020098638A (ja) 2020-06-25
KR20220165822A (ko) 2022-12-15
EP3381018B1 (en) 2022-03-16
US20190272678A1 (en) 2019-09-05
US20230215181A1 (en) 2023-07-06
US11600048B2 (en) 2023-03-07
KR102474134B1 (ko) 2022-12-02
CN113178016A (zh) 2021-07-27
US10347047B2 (en) 2019-07-09

Similar Documents

Publication Publication Date Title
US11748992B2 (en) Trigger regions
KR102606601B1 (ko) 표면 인식 렌즈
KR102482303B1 (ko) 증강 현실 의인화 시스템
KR101753270B1 (ko) 통지 데이터의 예측적인 포워딩
KR102576654B1 (ko) 전자 장치 및 그의 제어 방법
US20150148061A1 (en) Geofences from context and crowd-sourcing
KR102548919B1 (ko) 위치 기반 증강-현실 시스템
KR20220154816A (ko) 대규모 증강 현실을 위한 위치 매핑
CN109643317A (zh) 用于在界面中空间对象的相对表示和消岐的系统和方法
US20180349818A1 (en) Methods and Systems for Evaluating Performance of a Physical Space
KR20230012610A (ko) 미디어 요청 시스템
US11270367B2 (en) Product comparison techniques using augmented reality
US10929007B2 (en) Method of displaying object on device, device for performing the same, and recording medium for performing the method
KR20210158695A (ko) 영상에서 평면을 검출하는 전자 장치 및 그 동작 방법
US20240070608A1 (en) Resolving misplaced items in physical retail stores
EP2575055A1 (en) Enhanced tag cloud
CN115857499A (zh) 机器人、机器人的运行控制方法、装置和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant