CN104981833A - 替代现实角色的异步显示 - Google Patents

替代现实角色的异步显示 Download PDF

Info

Publication number
CN104981833A
CN104981833A CN201380073012.0A CN201380073012A CN104981833A CN 104981833 A CN104981833 A CN 104981833A CN 201380073012 A CN201380073012 A CN 201380073012A CN 104981833 A CN104981833 A CN 104981833A
Authority
CN
China
Prior art keywords
real
role
alternative
video
alternative real
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380073012.0A
Other languages
English (en)
Inventor
G.安德森
W.马赫
G.拉法
A.乔丹
Y.吴
R.C.莎
L.纳赫曼
A.P.罗萨里奥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of CN104981833A publication Critical patent/CN104981833A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/101Collaborative creation, e.g. joint development of products or services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01Social networking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/2224Studio circuitry; Studio devices; Studio equipment related to virtual studio applications
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Economics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Computing Systems (AREA)
  • Quality & Reliability (AREA)
  • Data Mining & Analysis (AREA)
  • Operations Research (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Architecture (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Processing Or Creating Images (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

用于在真实世界环境中显示替代现实角色的技术,其包括从替代现实角色的归属位置的传感器网络的传感器接收传感器数据,确定对传感器数据表示的刺激的可用响应,以及基于可用响应针对时间段确定替代现实角色的活动。该技术还可以包括生成执行在所述时间段期间叠加在归属位置的真实世界环境的图像映射上的所确定的活动的替代现实角色的视频。用户可以实时或者在视频中显示的时间段之后的时间段期间观看视频。此外,在一些实施例中可以向远程计算设备传送替代现实角色。

Description

替代现实角色的异步显示
背景技术
包括智能电话和平板计算机在内的个人计算设备正在成为用于商务和个人使用的无处不在的工具。随着个人计算设备的处理能力持续增加,这样的个人计算设备的可用交互和使用同样增加。例如,典型的个人计算设备能够运行复杂的应用并且促进多样的交互。一个这样的复杂交互是在个人计算设备上生成替代现实角色并且与该替代现实角色交互。
通常实时或近实时地向个人计算设备的用户呈现诸如替代现实宠物之类的替代现实角色。典型地,用户可以通过将计算设备的相机指向用户期望替代现实角色出现在的位置来在个人计算设备的显示器上观看替代现实角色。替代现实角色然后被添加到由相机生成的串流真实世界视频。在许多实现中,某种类型的标记物被用于锚定替代现实角色。可以添加替代现实角色可以与其在某种程度上进行交互的虚拟对象。在一些实现中,替代现实角色还可以与真实世界对象和/或直接与用户实时交互。
附图说明
通过示例的方式而不是通过限制的方式在附图中图示本文所描述的概念。为了图示的简化性和清楚性,图中图示的元素不一定按照比例绘制。在被视为恰当的情况下,在各图之中重复参考标记以指示对应或类似的元素。
图1是用于在真实世界环境中显示替代现实角色的系统的至少一个实施例的简化框图;
图2是图1的系统的替代现实服务器的环境的至少一个实施例的简化框图;
图3是用于在环境中显示替代现实角色的方法的至少一个实施例的简化流程图;
图4是用于共享替代现实角色的显示的方法的至少一个实施例的简化流程图;
图5是用于向另一计算设备传送替代现实角色的方法的至少一个实施例的简化流程图;
图6是真实世界环境的实时视频的简化图示;以及
图7是呈现在图6的实时视频的环境中的替代现实角色的视频显示的简化图示。
具体实施方式
虽然本公开的概念容许各种修改和替换形式,但是在图中通过示例的方式示出并且将在本文中详细描述其具体实施例。然而,应当理解的是,不存在将本公开的概念限制于所公开的特定形式的意图,而是相反,意图是覆盖与本公开和随附权利要求一致的所有修改、等同物和替换形式。
在说明书中对“一个实施例”、“实施例”、“说明性实施例”等的提及指示所描述的实施例可以包括特定特征、结构或特性,但是每一个实施例可以或者可以不必包括该特定特征、结构或特性。而且,这样的短语不一定都是指相同的实施例。另外,当结合一实施例描述特定特征、结构或特性时,所主张的是,结合其它实施例实现这样的特征、结构或特性在本领域技术人员的知识范围内,无论是否被明确描述。
在一些情况中,可以以硬件、固件、软件或其任何组合来实现所公开的实施例。所公开的实施例还可以被实现为由暂时性或非暂时性机器可读(例如计算机可读)存储介质承载或者存储在其上的指令,所述指令可以由一个或多个处理器读取和运行。机器可读存储介质可以被体现为用于以机器(例如易失性或非易失性存储器、媒体盘或其它媒体设备)可读的形式存储或传输信息的任何存储设备、机构或其它物理结构。
在图中,可以以具体布置和/或次序示出一些结构或方法特征。然而,应当领会到,可以不要求这样的具体布置和/或次序。而是,在一些实施例中,这样的特征可以以与说明性图中所示的不同的方式和/或次序布置。此外,结构或方法特征在特定图中的包括不意指暗示这样的特征在所有实施例中都是所要求的,并且在一些实施例中可以不被包括或者可以与其它特征组合。
现在参照图1,在说明性实施例中,用于在真实世界环境中显示替代现实角色的系统100包括位于归属位置110中的替代现实服务器102和传感器网络104。归属位置110可以体现为家庭住所、房间、办公室、建筑物或可以从其生成内部环境的图像映射的其它位置,如以下更加详细地讨论的那样。在使用中,替代现实服务器102在归属位置110中生成和维护替代现实角色(例如替代现实宠物)。通过监视通过归属位置网络108从传感器网络104接收的传感器数据,替代现实服务器102响应于如由所接收的传感器数据表示的替代现实角色所经历的各种刺激而确定替代现实角色的活动。不同于典型的替代现实角色,替代现实服务器102维护替代现实角色的一定程度的持续性。也就是说,不管替代现实角色的“所有者”(或任何其他人)是否在归属位置中和/或当前在与替代现实角色交互,替代现实服务器102继续监视传感器数据并且确定替代现实角色的活动(例如替代现实角色对各种刺激的响应)。这样,用户(例如替代现实角色的“所有者”)可以关于替代现实角色活动的生成和/或刺激的发生来异步地回顾替代现实角色的活动。例如,用户可以在到达归属位置110时回顾在当天较早时候执行的替代现实角色活动的视频(例如,儿童可以查看在儿童曾在学校或离开归属位置时的白天期间替代现实角色所经历的冒险)。当然,用户还可以实时或近实时地监视替代现实角色的活动。此外,在一些实施例中,替代现实角色的活动可以由远离归属位置110的计算设备监视或回顾。另外,在一些实施例中,替代现实角色可以通过使用移动计算设备而行进到归属位置110之外,如以下讨论的那样。
由替代现实服务器102维护的替代现实角色可以体现为任何类型的替代现实角色或实体。例如,在一些实施例中,替代现实角色体现为诸如卡通狗、猫、松鼠、怪兽或其它卡通角色之类的卡通角色。当然,替代现实角色可以体现为更“现实的”的角色(例如“所有者”的二重身(doppelganger))或体现为抽象对象,诸如球体或立方体。
替代现实服务器102可以体现为能够执行本文所描述的功能的任何类型的服务器计算机设备。例如,替代现实服务器102可以体现为固定计算机、机架安装式计算机、台式计算机、膝上型计算机、平板计算机、“智能”装置和/或其它服务器计算机和/或计算设备。如图1中所示,说明性替代现实服务器102包括处理器120、存储器122、输入/输出子系统124、通信电路126和数据储存器128。当然,在其它实施例中,替代现实服务器102可以包括其它或附加的组件,诸如在服务器计算机和/或计算设备中常发现的那些(例如各种输入/输出设备)。此外,在一些实施例中,说明性组件中的一个或多个可以合并在另一组件中或者以其它方式形成另一组件的一部分。例如,在一些实施例中,存储器122或其部分可以合并在处理器120中。
处理器120可以体现为能够执行本文所描述的功能的任何类型的处理器。例如,处理器120可以体现为具有一个或多个处理器核的(一个或多个)单核或多核处理器、数字信号处理器、微控制器或其它处理器或处理/控制电路。类似地,存储器122可以体现为当前已知或者将来开发的并且能够执行本文所描述的功能的任何类型的易失性或非易失性存储器或数据储存器。在操作中,存储器122可以存储在替代现实服务器102的操作期间使用的各种数据和软件,诸如操作系统、应用、程序、库和驱动器。
存储器122经由I/O子系统124通信地耦合到处理器120,I/O子系统124可以体现为用以促进利用处理器120、存储器122和替代现实服务器102的其它组件的输入/输出操作的电路和/或组件。例如,I/O子系统124可以体现为或者以其它方式包括存储控制器集线器、输入/输出控制集线器、固件设备、通信链路(即点对点链路、总线链路、电线、线缆、光导、印刷电路板迹线等)和/或其它组件和子系统以促进输入/输出操作。在一些实施例中,I/O子系统124可以形成片上系统(SoC)的一部分并且连同处理器120、存储器122和替代现实服务器102的其它组件一起合并在单个集成电路芯片上。
通信电路126可以体现为用于使得能够实现替代现实服务器102与其它计算机和/或系统100的组件之间的通信的一个或多个设备和/或电路。通信电路126可以配置成使用任何一个或多个通信技术(例如无线或有线通信)和相关联的协议(例如以太网、蓝牙®、Wi-Fi®、WiMAX等)以实现这样的通信。
数据储存器128可以体现为被配置用于数据的短期或长期存储的任何类型的一个或多个设备,诸如例如,存储器设备和电路、存储器卡、硬盘驱动器、固态驱动器或其它数据存储设备。在说明性实施例中,数据储存器128可以存储替代现实角色数据库130和替代现实角色行为策略132。所生成的和/或可用的替代现实角色可以存储在替代现实角色数据库130中。此外,所生成的对应替代现实角色的活动的视频可以存储在替代现实角色数据库130中。
如以下更加详细地讨论的,由替代现实服务器102维护的(一个或多个)替代现实角色可以响应于由从传感器网络104接收的传感器数据表示的刺激而执行各种活动。所执行的特定活动和替代现实角色响应于的特定刺激可以基于替代现实角色行为策略132来加以确定。在说明性实施例中,行为策略132体现为定义替代现实角色对各种刺激的响应的一组规则。这样的响应可以是极端简化的或复杂的。例如,替代现实角色对任何给定刺激的特定响应可以基于目前刺激、历史响应、历史刺激和/或在行为策略中阐述的具体规则。
在一些实施例中,替代现实服务器102还可以包括一个或多个外围设备134。这样的外围设备134可以包括在服务器或计算设备中常发现的任何类型的外围设备,诸如其它数据存储设备、扬声器、硬件键盘、输入/输出设备、外围通信设备和/或其它外围设备。
传感器网络104体现为位于归属位置110中的传感器150的集合。传感器150可以包括能够生成指示替代现实角色可以响应于的特定刺激的传感器数据的任何类型的一个或多个传感器。例如,在一些实施例中,传感器150包括一个或多个相机传感器152、一个或多个运动传感器154、一个或多个音频传感器156和/或一个或多个光传感器158。当然,在其它实施例中,传感器150可以包括能够生成合适传感器数据的附加的或其它传感器。
相机传感器152可以体现为或以其它方式包括能够生成图像和/或视频的任何类型的相机或设备。例如,相机传感器152可以包括被配置用于标准光、低光和/或夜间视觉的相机。相机传感器152可以遍及归属位置110设置以促进生成归属位置110的环境的图像映射,以及捕获归属位置110内的活动(例如在归属位置110周围走动的人)。
运动传感器154可以体现为或以其它方式包括能够生成指示所监视的区或归属位置的特定区域内的移动的传感器数据的任何类型的运动传感器。在一些实施例中,运动传感器154中的一个或多个可以通信地耦合到其它传感器150,诸如相机传感器152,以促使响应于所监视的区或区域内的所检测到的运动的其它传感器150的激活。
音频传感器156可以体现为或以其它方式包括能够生成指示归属位置110内的可听内容的音频数据的任何类型的音频传感器,所述可听内容包括但不限于,背景噪声、来自归属位置110内部的人员的口头命令、对话和归属位置110内的其它可听内容。
光传感器158可以体现为或以其它方式包括能够生成指示在归属位置110的特定监视区或区域内的光的存在或缺失的传感器数据的任何类型的光传感器。例如,光传感器158可以检测人员是接通还是关断灯。如同运动传感器154那样,光传感器158可以通信地耦合到其它传感器150,诸如相机传感器152,以促使响应于检测到光在监视区中的存在或其缺失的其它传感器150的激活。
传感器网络104的每一个传感器150被配置成通过归属位置网络108向替代现实服务器102传送由其生成的传感器数据。归属位置网络108可以体现为能够促进传感器网络104与替代现实服务器102以及系统100的其它计算机设备之间的通信的任何类型的有线和/或无线网络。在说明性实施例中,网络108体现为局域网并且可以使用任何合适的无线和/或有线通信技术和/或协议。当然,网络108可以包括在图1中未示出的附加设备以促进跨网络108的通信,所述附加设备包括但不限于接入点、路由器、交换机、中间计算机和/或类似物。
在一些实施例中,归属位置110还可以包括一个或多个本地计算设备106。每一个本地计算设备106可以体现为能够通过归属位置网络108与替代现实服务器102通信并且执行本文所描述的功能的任何类型的计算设备。例如,本地计算设备106可以体现为“智能”电话、手机、平板计算机、膝上型计算机、台式计算机、个人数字助理、移动或固定媒体设备、游戏控制台、移动互联网设备(MID)、智能装置设备或其它移动或固定计算设备。本地计算设备106可以包括类似于替代现实服务器102和/或典型的计算设备的组件,诸如处理器、存储器、显示器、通信电路、数据储存器和/或类似物。本地计算设备106的那些组件可以类似于替代现实服务器102的对应组件,其描述适用于本地计算设备106的对应组件并且在本文中为了描述的清楚起见而不进行重复。
如以下更加详细地讨论的,本地计算设备106可以与替代现实服务器102通信以异步或实时地观看由替代现实服务器102生成的替代现实角色的活动的视频。此外,在一些实施例中,本地计算设备106可以从替代现实服务器102临时接收替代现实角色。在这样的实施例中,本地计算设备106可以从归属位置110行进以允许替代现实角色经历归属位置110之外的刺激,如以下更加详细地讨论的那样。
系统100还可以包括一个或多个远程计算设备160。每一个远程计算设备160可以体现为能够通过外部网络190与替代现实服务器102通信并且执行本文所描述的功能的任何类型的计算设备。例如,远程计算设备160可以体现为“智能”电话、手机、平板计算机、膝上型计算机、台式计算机、个人数字助理、移动或固定媒体设备、游戏控制台、移动互联网设备(MID)、智能装置设备或其它移动或固定计算设备。远程计算设备160可以包括类似于替代现实服务器102和/或典型的计算设备的组件,诸如处理器、存储器、显示器、通信电路、数据储存器和/或类似物。远程计算设备160的那些组件可以类似于替代现实服务器102的对应组件,其描述适用于远程计算设备160的对应组件并且在本文中为了描述的清楚起见而不进行重复。
类似于本地计算设备106,远程计算设备160的用户可以通过外部网络190与替代现实服务器102通信以异步或实时地观看由替代现实服务器102生成的替代现实角色的活动的视频。外部网络190可以体现为任何数目的各种有线和/或无线数据通信网络。例如,外部网络190可以体现为或以其它方式包括局域网(LAN)、广域网(WAN)或公共可访问的全球网络,诸如因特网。外部网络190可以使用任何合适的无线和/或有线通信技术和/或协议以促进系统100的各种组件之间的通信。外部网络190可以包括在图1中未示出的附加设备以促进这样的通信,所述附加设备包括但不限于路由器、交换机、中间计算机和/或类似物。
系统100还可以包括一个或多个远程传感器170。远程传感器170可以类似于传感器150并且可以体现为能够生成指示替代现实角色可以响应于的特定刺激的传感器数据的任何类型的一个或多个传感器。例如,在一些实施例中,传感器170可以包括能够生成指示归属位置110的本地天气或环境的数据的环境传感器(例如天气传感器)。此外,在一些实施例中,远程传感器170可以包括能够生成适当传感器数据的计算设备。另外,在已经向本地计算设备106或远程计算设备106传送了替代现实角色的实施例中,远程传感器170可以被配置成向替代现实角色当前驻留在其上的计算设备106、160传输传感器数据以允许替代现实角色响应于这样的刺激,如以下更加详细地讨论的那样。
在一些实施例中,替代现实服务器102可以体现为云替代现实服务器180。在这样的实施例中,云替代现实服务器180远离归属位置110,而不是位于归属位置110中。在这样的实施例中,云替代现实服务器180执行替代现实服务器102的所有功能,但是经由外部网络190这样做。例如,在这样的实施例中,传感器网络104被配置成通过外部网络190向云替代现实服务器180传输由传感器150生成的传感器数据。此外,本地计算设备106可以访问云替代现实服务器180以回顾替代现实角色活动的视频,如以上关于替代现实服务器102讨论的那样。
现在参照图2,在说明性实施例中,替代现实服务器102在操作期间建立环境200。说明性环境200包括传感器聚合模块202、活动确定模块204、视频生成模块206和接口模块208,所述模块中的每一个可以体现为软件、固件、硬件或其组合。
传感器聚合模块202从传感器网络104的每一个传感器150接收传感器数据。传感器聚合模块202聚合所接收的传感器数据并且向活动确定模块204呈现经聚合的传感器数据。在一些实施例中,传感器聚合模块202可以在经定义的时间段内收集传感器数据并且周期性地向活动确定模块204呈现传感器数据。可替换地,在其它实施例中,传感器聚合模块202可以实时或近实时地向活动确定模块204呈现传感器数据。此外,在一些实施例中,传感器聚合模块202可以对传感器数据应用一种类型的数据调节,诸如量化,以使其准备供活动确定模块204分析。
活动确定模块204从传感器聚合模块202接收传感器数据并且确定替代现实角色对传感器数据表示的刺激的可用响应。在一些实施例中,传感器数据的每一个片段可以表示替代现实角色可以响应于的单独刺激。可替换地,在一些实施例中,传感器数据的多个片段可以与彼此相关联以产生替代现实角色可以响应于的刺激。不论如何,活动确定模块204可以将刺激(或传感器数据本身)与行为策略132比较以确定替代现实角色的可用响应。由于在任何特定时间段期间许多不同的刺激可能是可用的,因此替代现实角色可以被呈现为针对每一个所分析的时间段有多个响应选择。这样,活动确定模块204还可以基于对传感器数据表示的刺激的可用响应确定针对特定时间段的替代现实角色的活动。例如,活动确定模块204可以选择可用响应中的一个或多个以生成针对当前时间段的替代现实角色的活动。这样的选择可以基于可用响应、指示替代现实角色的之前活动和/或响应的历史数据、行为策略132和/或其它准则。在一些实施例中,如果尚未接收到刺激或者如果所确定的活动在参考活动阈值以下(例如在夜间并且替代现实角色“所有者”在睡觉),活动确定模块204可以不选择针对替代现实角色的活动。以此方式,可以跳过或者以具有经过的时间的视觉显示(诸如虚拟数字时钟)的高速时间序列自动回放替代现实角色的枯燥或极少活动的时间段。
在已经选择或以其它方式确定了针对当前时间段的替代现实角色的活动之后,活动确定模块204向视频生成模块206呈现针对当前时间段的所选替代现实角色的活动。视频生成模块206生成执行所选活动的替代现实角色的视频,其叠加在归属位置110的环境的图像映射之上。例如,替代现实角色可以被示为在工作台上跳舞、与家庭宠物交互、从没人管的餐盘吃食物和/或其它活动。如以上讨论的,替代现实角色的活动的视频生成可以与这样的视频的观看异步进行。这样,即使在替代现实角色的“所有者”或归属位置110的其他成员离开时,替代现实角色的活动可以被替代现实服务器102生成和监视并且随后被归属位置110的成员观看。
接口模块208促进与替代现实角色的交互以及所生成的视频的访问。例如,本地计算设备106的用户和/或远程计算设备160的用户可以经由接口模块208与替代现实角色交互。为了这样做,计算设备106、160的用户可以经由接口模块208的通信模块210向替代现实角色提交命令。由接口模块208向活动确定模块204提供这样的命令或其它交互作为附加刺激。可替换地,计算设备106、160的用户可以经由接口模块208观看替代现实角色的活动的之前生成的视频或实时视频。在这样的实施例中,接口模块208可以与视频生成模块206通信以生成或以其它方式检索所期望的视频。
现在参照图3,在使用中,替代现实服务器102可以执行用于在环境中显示替代现实角色的方法300。方法300开始于块302,其中替代现实服务器102生成归属位置110的环境的图像映射。为了这样做,替代现实服务器102可以捕获由传感器网络104的相机传感器152产生的图像以将归属位置110的图像映射拼合在一起。由于归属位置110的环境典型地不改变,图像映射的生成可能需要在系统100启动时仅执行一次。可替换地,在其它实施例中,归属位置110的环境的图像映射被周期性地生成或者响应于检测到本地环境中的改变(例如家具的移动)而生成。图像映射可以体现为分离的、单独的静止图像,图像的集合,或者体现为归属位置110的环境的视频。
在已经生成了图像映射之后,方法300进行到块304,其中替代现实服务器102接收和聚合传感器数据。例如,在块306中,替代现实服务器102从传感器网络104的传感器150接收传感器数据。此外或可替换地,替代现实服务器102可以从远程传感器170中的一个或多个接收传感器数据,诸如从远离归属位置110的天气传感器接收天气数据。如以上讨论的,传感器数据可以体现为能够表示刺激(从该刺激可以确定替代现实角色的响应)的任何类型的数据。在一些实施例中,在块308中,替代现实服务器102还可以从本地计算设备106和/或远程计算设备160接收指示设备106、160的用户与替代现实角色的交互的交互数据。
在块310中,替代现实服务器102确定对所接收的传感器数据表示的刺激的可用响应。为了这样做,在一些实施例中,替代现实服务器102将传感器数据(或从传感器数据确定的刺激)与替代现实角色行为策略132比较。取决于传感器数据和对应刺激的量,替代现实服务器102可以确定替代现实角色的任何数目的可用响应。例如,在块312中,替代现实服务器102可以确定替代现实角色对命令或本地计算设备106和/或远程计算设备160的用户与替代现实角色的其它交互的响应。
此外或可替换地,在块314中,替代现实服务器102可以确定替代现实角色对优先级事件的响应。这样的优先级事件可以例如在替代现实角色行为策略132中得以定义并且可以体现为具有相对于其它刺激的重要性的任何类型的事件。例如,对归属位置110的侵入者的检测、归属位置110中的火灾、保持接通的灯或其它重要的事件可以被确定为优先级事件,并且替代现实服务器102可以确定替代现实角色对这样的事件的适当响应。
在块316中,替代现实服务器102可以确定替代现实角色对通过替代现实服务器102维护的其它替代现实角色所进行的交互或者与该其它替代现实角色的交互的响应。例如,多个替代现实角色可以成组在一起以执行特定活动(例如追赶家庭犬只)。此外或可替换地,在块318中,替代现实服务器102可以确定替代现实角色对替代现实角色的邻近区域中的人员存在的响应。在这样的实施例中,替代现实服务器102可以利用面部识别算法来标识用户,使得可以针对所存在的特定人员定制替代现实角色的响应。当然,应当领会的是,在其它实施例中,替代现实服务器102可以确定替代现实角色对相同或其它刺激的任何数目的附加或其它可用响应。
在块320中,替代现实服务器102基于在块310中确定的可用响应确定替代现实角色的活动。如以上讨论的,替代现实服务器102可以基于可用响应和替代现实角色行为策略132选择一个或多个活动。在块322中,替代现实服务器102确定替代现实角色的所选或所确定的活动是否在参考活动阈值以上。例如,在小的传感器数据或刺激的时段中,替代现实服务器102可以确定所选替代现实角色活动在本质上过于枯燥或微不足道。如果是这样,方法300循环回到块304以继续传感器数据的聚合。以此方式,可以跳过或最小化替代现实角色的活动的枯燥时段。
然而,如果替代现实角色的所确定的活动大于参考活动阈值,方法300进行到块324,其中将所确定的活动添加到替代现实角色的活动的时间线,或者如果正实时观赏视频,将所确定的活动添加到实时视频流。随后,在块326中,替代现实服务器102确定是否生成替代现实角色的活动的视频。例如,替代现实服务器102可以被配置成连续地、周期性地或者仅响应于针对视频的请求而生成视频。也就是说,视频可以被预先生成或者当请求时生成,甚至是在被异步访问时生成。如果替代现实服务器102不被配置成在当前时间生成视频,方法300进行到块328,其中将替代现实角色时间线数据(例如替代现实角色活动)保存在数据储存器128中。以此方式,替代现实角色活动的视频可以在稍后时间在请求时生成。
然而,如果替代现实服务器102被配置成生成视频,方法300进行到块330,其中替代现实服务器102生成执行所确定的活动的替代现实角色的视频。如以上讨论的,替代现实角色被叠加在归属位置110的环境的图像映射上。例如,在图6中示出归属位置110的环境602的当前图像映射600。环境602包括桌子604和装置606。此外,此时,人员608走向桌子604。基于人员608的存在,替代现实服务器102可以确定替代现实角色700的活动。例如,在图7中示出替代现实角色700(说明性地,卡通狗)的活动702的所生成的视频图像。替代现实角色700被示为站在桌子604顶上朝向人员608进行“吠叫”活动702,人员608可以是例如替代现实角色700的“所有者”。以此方式,替代现实服务器102确定替代现实角色针对呈现给替代现实角色的刺激的活动并且生成这样的活动的视频。
返回参照图3,在一些实施例中,替代现实服务器102还可以在块322中将修改应用于归属位置110的环境的图像映射。例如,替代现实服务器102可以改变一天中的时间,改变图像映射中的颜色,从图像映射移除项目,向图像映射添加虚拟项目和/或对归属位置110的本地环境的图像映射执行附加或其它的修改。在已经生成替代现实角色的活动的视频之后,方法300循环回到块304以继续聚合传感器数据。
现在参照图4,如以上讨论的,替代现实角色的活动的视频可以与本地计算设备106和/或远程计算设备160共享。为了这样做,替代现实服务器102可以执行用于共享替代现实角色的显示的方法400。方法400开始于块402,其中替代现实服务器102确定是否已经接收到针对替代现实角色的活动的视频的请求。如果是这样,在块404中,替代现实服务器102确定请求者是否被授权接收或观看视频。如果否,在块406中拒绝请求。然而,如果请求者被授权观看替代现实角色的活动的视频,方法400进行到块408,其中替代现实服务器102确定请求者是正在请求观看实时视频还是之前生成的视频(即异步观看)。如果请求者希望观看替代现实角色的活动的之前生成的视频,方法400进行到块410,其中替代现实服务器102检索之前生成的视频。在一些实施例中,设备106、160的用户可以被呈现以用户接口或其它机制,请求者可以从该用户接口或其它机制选择特定视频或感兴趣的时间段。随后,在块412中,将所检索到的视频传输给请求者的计算设备106、160。在一些实施例中,替代现实服务器102促进请求者对所检索到的视频的回放的控制(例如快进、倒带、高速、慢动作、跳过等)。
返回参照块408,如果请求者希望观看替代现实角色的活动的实时视频,方法400进行到块414,其中生成实时视频。为了这样做,替代现实服务器102可以执行以上所讨论的方法300以检索传感器数据,响应于传感器数据表示的刺激确定替代现实角色的活动,并且生成叠加在归属位置110的环境的图像映射上的所确定的替代现实角色的活动的实时视频。随后,在块416中,替代现实服务器102将替代现实角色的活动的实时视频串流到请求者。以此方式,本地计算设备106的用户和/或远程计算设备160的用户可以与替代现实服务器102交互以回顾替代现实角色的活动的之前生成的或实时的视频。
现在参照图5,如以上所讨论的,可以将替代现实角色从替代现实服务器102传送到其它计算设备,诸如移动计算设备(例如移动本地计算设备106)。为了这样做,替代现实服务器102可以执行用于将替代现实角色传送到另一计算设备的方法500。方法500开始于块502,其中替代现实服务器102确定是否已经接受到针对这样的传送的请求。例如,本地或远程计算设备106、160的用户可以经由网络108和/或网络190与替代现实服务器102交互以请求替代现实角色的传送。如果是这样,方法500进行到块504,其中替代现实服务器102确定请求者是否被授权接收替代现实角色。例如,替代现实服务器102可以要求口令或实现其它安全措施以确保请求者被授权传送替代现实角色(即替代现实角色的“所有者”通过使得能够实现口令保护等来保护这样的传送)。如果请求者未被授权,方法500进行到块506,其中替代现实服务器102拒绝传送请求。
然而,如果请求者被授权接收替代现实角色,方法500进行到块508,其中替代现实服务器102将替代现实角色传送到请求者的计算设备106、160。为了这样做,在块510中替代现实服务器102可以传送替代现实角色。也就是说,在块510中,替代现实服务器102可以传送经渲染的模型、图像或者其它请求的可视数据以在请求者的计算设备106、160上再现替代现实角色。此外,在一些实施例中,替代现实服务器102可以向请求者的计算设备106、160传送替代现实角色行为策略132或其部分。通过具有替代现实角色行为策略132的本地副本,请求者的计算设备106、160可以在本地确定替代现实角色的响应和活动,如以下讨论的那样。此外,在一些实施例中,替代现实服务器102可以向请求者的计算设备106、160传送替代现实软件应用或其它软件以促进替代现实角色在请求者的计算设备106、160上的生成和管理。例如,替代现实服务器102可以传送替代现实角色生成软件,其促进请求者的计算设备106、160的用户在本地观看叠加在本地环境上的替代现实角色,以及确定替代现实角色响应于本地刺激的活动,如以下讨论的那样。
在请求者的计算设备106、160已经从替代现实服务器102接收到替代现实角色之后,计算设备106、160的用户可以游走(例如离开归属位置110)并且带着替代现实角色一起。在一些实施例中,请求者的计算设备106、160的用户可以使用替代现实角色当前驻留在的请求者的计算设备106、160来观看替代现实角色针对本地刺激的活动。这样,在块516中,计算设备106、160可以接收直接在计算设备106、160上的传感器数据。例如,在块518中,计算设备106、160从包括在计算设备106、160中的一个或多个传感器接收传感器数据。这样的传感器可以体现为包括在计算设备106、160中并且能够生成替代现实角色可以响应于的传感器数据的任何类型的传感器,包括但不限于计算机相机、计算机麦克风、加速度计传感器、海拔传感器、环境传感器、运动传感器、光传感器和/或其它传感器。此外或可替换地,在块520中,计算设备106、160可以从远程传感器170中的一个或多个接收传感器数据。
在一些实施例中,可以在替代现实服务器102上执行或者在计算设备106、160上本地执行确定替代现实角色针对在块516中接收的传感器数据表示的刺激的活动以及这样的活动的视频。这样,在块522中,计算设备106、160可以向替代现实服务器102传送在块516中接收的传感器数据以用来确定替代现实角色的活动和生成作为结果的视频,其随后可以被传输回到计算设备106、160。可替换地,在块524中,计算设备106、160可以使用以上关于方法300的块304-332讨论的对应视频生成方法来在本地生成替代现实角色活动的视频。
示例
以下提供本文所公开的技术的说明性示例。技术的实施例可以包括以下描述的示例中的任何一个或多个以及其任意组合。
示例1包括用以在真实世界环境中显示替代现实角色的替代现实服务器,所述替代现实服务器包括传感器聚合模块以(i)生成替代现实角色的归属位置的真实世界环境的图像映射以及(ii)从所述归属位置的传感器网络的多个传感器接收传感器数据;活动确定模块以(i)确定所述替代现实角色对所述传感器数据表示的刺激的可用响应以及(ii)基于所述可用响应针对第一时间段确定所述替代现实角色的活动;以及视频生成模块,用以生成执行在所述第一时间段期间叠加在所述归属位置的真实世界环境的图像映射上的所确定的活动的所述替代现实角色的视频。
示例2包括示例1的主题,并且还包括接口模块,用以向计算设备传输所述替代现实角色的所述视频以供在所述第一时间段之后的第二时间段处在其上回放。
示例3包括示例1和2中任一个的主题,并且其中所述传感器聚合模块将使用所述传感器网络的相机生成所述真实世界环境的图像映射。
示例4包括示例1-3中任一个的主题,并且其中所述传感器数据包括由所述传感器网络的相机传感器生成的图像数据。
示例5包括示例1-4中任一个的主题,并且其中所述传感器数据包括由所述传感器网络的运动传感器生成的运动数据。
示例6包括示例1-5中任一个的主题,并且其中所述传感器数据包括由所述传感器网络的音频传感器生成的音频数据。
示例7包括示例1-6中任一个的主题,并且其中所述传感器数据包括由所述传感器网络的光传感器生成的传感器数据。
示例8包括示例1-7中任一个的主题,并且其中所述传感器聚合模块还将从远离所述归属位置的传感器接收传感器数据。
示例9包括示例1-8中任一个的主题,并且还包括其中已存储有行为策略的数据库,所述行为策略使所述替代现实角色的行为与对应刺激相关,并且其中所述活动确定模块将基于所述行为策略确定所述替代现实角色对所述刺激的可用响应。
示例10包括示例1-9中任一个的主题,并且其中所述传感器数据包括指示远程用户与所述替代现实角色的交互的数据,并且其中所述活动确定模块将确定所述替代现实角色对所述远程用户的交互的可用响应。
示例11包括示例1-10中任一个的主题,并且其中所述传感器数据包括指示由另一替代现实角色与所述替代现实角色的交互的交互数据,并且其中所述活动确定模块将确定所述替代现实角色对来自所述另一替代现实角色的交互的可用响应。
示例12包括示例1-11中任一个的主题,并且其中所述传感器数据包括指示发生在所述归属位置中的优先级事件的事件数据,并且其中所述活动确定模块将基于所述事件数据确定所述替代现实角色对所述优先级事件的可用响应。
示例13包括示例1-12中任一个的主题,并且其中所述传感器数据包括从远程计算设备接收的命令,并且其中所述活动确定模块将确定所述替代现实角色对所接收的命令的可用响应。
示例14包括示例1-13中任一个的主题,并且其中所述传感器数据包括指示所述归属位置中的人员的存在的视频数据,并且其中所述活动确定模块将(i)确定所述人员的身份并且(ii)基于所述人员的身份确定所述替代现实角色的响应。
示例15包括示例1-14中任一个的主题,并且其中所述传感器数据包括指示所述归属位置处的环境条件的环境数据,并且其中所述活动确定模块将基于所确定的环境条件确定所述替代现实角色的响应。
示例16包括示例1-15中任一个的主题,并且其中确定所述替代现实角色的活动包括基于与所述替代角色相关联的行为策略选择所述可用响应中的一个响应。
示例17包括示例1-16中任一个的主题,并且其中所述活动确定模块还将确定所确定的活动是否大于活动的阈值测量;并且响应于所确定的活动小于所述活动的阈值测量而跳过当前时间段。
示例18包括示例1-17中任一个的主题,并且其中所述活动确定模块还将生成执行在所述第一时间段之后的第二时间段期间叠加在所述归属位置的真实世界环境的图像映射上的附加活动的所述替代现实角色的视频;以及将所述第二时间段的视频附加到所述第一时间段以生成所述替代角色的活动的视频时间线。
示例19包括示例1-18中任一个的主题,并且还包括接口模块用以在所述第一时间段之后,从计算设备接收针对所生成的视频的请求;并且响应于该请求向所述计算设备传输所生成的视频。
示例20包括示例1-19中任一个的主题,并且其中所述接口模块还将响应于来自所述计算设备的命令而控制所生成的视频的回放。
示例21包括示例1-20中任一个的主题,并且其中所述活动确定模块还将修改所述真实世界环境的图像映射,并且生成执行在所述第一时间段期间叠加在所述归属位置的真实世界环境的经修改的图像映射上的所确定的活动的所述替代现实角色的视频。
示例22包括示例1-21中任一个的主题,并且还包括接口模块用以从计算设备接收针对所述替代角色的活动的实时视频的请求,并且其中所述活动确定模块还将生成执行叠加在所述归属位置的真实世界环境的图像映射上的所确定的活动的所述替代现实角色的实时视频,并且其中所述接口模块还将所述实时视频串流到所述计算设备。
示例23包括示例1-22中任一个的主题,并且还包括接口模块用以从移动计算设备接收向所述移动计算设备传送所述替代角色的请求;并且响应于所述请求向所述移动计算设备传送所述替代角色。
示例24包括示例1-23中任一个的主题,并且其中传送所述替代角色包括传送使所述替代现实角色的行为与对应刺激相关的行为策略。
示例25包括示例1-24中任一个的主题,并且其中传送所述替代角色包括传送在所述移动计算设备上实例化所述替代现实角色的替代现实应用。
示例26包括示例1-25中任一个的主题,并且其中所述接口模块将从所述移动计算设备接收传感器数据而同时所述替代角色被传送到此;并且所述视频生成模块将基于从所述移动计算设备接收的所述传感器数据生成所述替代现实角色的视频。
示例27包括示例1-26中任一个的主题,并且其中所述接口模块将向所述移动计算设备传送基于从所述移动计算设备接收的传感器数据所生成的视频。
示例28包括用于在真实世界环境中显示替代现实角色的方法,所述方法包括在替代现实服务器上生成替代现实角色的归属位置的真实世界环境的图像映射;在所述替代现实服务器上从所述归属位置的传感器网络的多个传感器接收传感器数据;在所述替代现实服务器上确定所述替代现实角色对所述传感器数据表示的刺激的可用响应;在所述替代现实服务器上基于所述可用响应针对第一时间段确定所述替代现实角色的活动;以及在所述替代现实服务器上生成执行在所述第一时间段期间叠加在所述归属位置的真实世界环境的图像映射上的所确定的活动的所述替代现实角色的视频。
示例29包括示例28的主题,并且还包括向计算设备传输所述替代现实角色的视频以供在所述第一时间段之后的第二时间段处在其上回放。
示例30包括示例28和29中任一个的主题,并且其中生成图像映射包括使用所述传感器网络的相机生成所述真实世界环境的图像映射。
示例31包括示例28-30中任一个的主题,并且其中接收传感器数据包括接收由所述传感器网络的相机传感器生成的图像数据。
示例32包括示例28-31中任一个的主题,并且其中接收传感器数据包括接收由所述传感器网络的运动传感器生成的运动数据。
示例33包括示例28-32中任一个的主题,并且其中接收传感器数据包括接收由所述传感器网络的音频传感器生成的音频数据。
示例34包括示例28-33中任一个的主题,并且其中接收传感器数据包括接收由所述传感器网络的光传感器生成的传感器数据。
示例35包括示例28-34中任一个的主题,并且还包括从远离所述归属位置的传感器接收传感器数据。
示例36包括示例28-35中任一个的主题,并且其中确定可用响应包括基于存储在所述替代现实服务器上的使所述替代现实角色的行为与对应刺激相关的行为策略确定所述替代现实角色对刺激的可用响应。
示例37包括示例28-36中任一个的主题,并且其中接收传感器数据包括接收指示远程用户与所述替代现实角色的交互的数据,并且确定可用响应包括确定所述替代现实角色对所述远程用户的交互的响应。
示例38包括示例28-37中任一个的主题,并且其中接收传感器数据包括接收指示从另一替代现实角色与所述替代现实角色的交互的交互数据,并且确定可用响应包括确定所述替代现实角色对来自所述另一替代现实角色的交互的响应。
示例39包括示例28-38中任一个的主题,并且其中接收传感器数据包括接收指示发生在所述归属位置中的优先级事件的事件数据,并且确定可用响应包括基于所述事件数据确定所述替代现实角色对所述优先级事件的响应。
示例40包括示例28-39中任一个的主题,并且其中接收传感器数据包括从远程计算设备接收命令,并且确定可用响应包括确定所述替代现实角色对所接收的命令的响应。
示例41包括示例28-40中任一个的主题,并且其中接收传感器数据包括接收指示所述归属位置中的人员的存在的视频数据,并且确定可用响应包括(i)确定所述人员的身份以及(ii)基于所述人员的身份确定所述替代现实角色的响应。
示例42包括示例28-41中任一个的主题,并且其中接收传感器数据包括接收指示所述归属位置处的环境条件的环境数据,并且确定可用响应包括基于所确定的环境条件确定所述替代现实角色的响应。
示例43包括示例28-42中任一个的主题,并且其中确定替代现实角色的活动包括基于与所述替代角色相关联的行为策略选择所述可用响应中的一个响应。
示例44包括示例28-43中任一个的主题,并且还包括确定所确定的活动是否大于活动的阈值测量;并且生成视频包括响应于所确定的活动小于所述活动的阈值测量而跳过当前时间段。
示例45包括示例28-44中任一个的主题,并且还包括生成执行在所述第一时间段之后的第二时间段期间叠加在所述归属位置的真实世界环境的图像映射上的附加活动的所述替代现实角色的视频;以及将所述第二时间段的视频附加到所述第一时间段以生成所述替代角色的活动的视频时间线。
示例46包括示例28-45中任一个的主题,并且还包括在所述第一时间段之后,从计算设备接收针对所生成的视频的请求;以及响应于该请求向所述计算设备传输所生成的视频。
示例47包括示例28-46中任一个的主题,并且还包括响应于来自所述计算设备的命令而控制所生成的视频的回放。
示例48包括示例28-47中任一个的主题,并且其中生成所述替代现实角色的视频包括修改所述真实世界环境的图像映射;以及生成执行在所述第一时间段期间叠加在所述归属位置的真实世界环境的经修改的图像映射上的所确定的活动的所述替代现实角色的视频。
示例49包括示例28-48中任一个的主题,并且还包括从计算设备接收针对所述替代角色的活动的实时视频的请求;以及生成执行叠加在所述归属位置的真实世界环境的图像映射上的所确定的活动的所述替代现实角色的实时视频;以及将所述实时视频串流到所述计算设备。
示例50包括示例28-49中任一个的主题,并且还包括从移动计算设备接收向所述移动计算设备传送所述替代角色的请求;响应于所述请求向所述移动计算设备传送所述替代角色;以及在所述移动计算设备上接收指示所述替代角色可以响应于的刺激的传感器数据。
示例51包括示例28-50中任一个的主题,并且其中传送所述替代角色包括传送使所述替代现实角色的行为与对应刺激相关的行为策略。
示例52包括示例28-51中任一个的主题,并且其中传送所述替代角色包括传送在所述移动计算设备上实例化所述替代现实角色的替代现实应用。
示例53包括示例28-52中任一个的主题,并且其中在所述移动计算设备上接收传感器数据包括从包括在所述移动计算设备中的传感器接收传感器数据。
示例54包括示例28-53中任一个的主题,并且其中在所述移动计算设备上接收传感器数据包括从远离所述移动计算设备的传感器接收传感器数据。
示例55包括示例28-54中任一个的主题,并且还包括向所述替代现实服务器传输在所述移动计算设备上接收的传感器数据。
示例56包括示例28-55中任一个的主题,并且还包括在所述移动计算设备上确定所述替代现实角色对在所述移动计算设备上接收的传感器数据表示的刺激的可用响应;在所述移动计算设备上基于所述可用响应针对第二时间段确定所述替代现实角色的活动;以及在所述移动计算设备上生成在所述第二时间段期间执行所确定的活动的所述替代现实角色的视频。
示例57包括一个或多个机器可读存储介质,其包括存储在其上的多个指令,所述指令响应于被运行而使计算设备执行示例28-56中任一个的方法。
示例58包括用以在真实世界环境中显示替代现实角色的替代现实服务器,所述替代现实服务器包括用于生成替代现实角色的归属位置的真实世界环境的图像映射的装置;用于从所述归属位置的传感器网络的多个传感器接收传感器数据的装置;用于确定所述替代现实角色对所述传感器数据表示的刺激的可用响应的装置;用于基于所述可用响应针对第一时间段确定所述替代现实角色的活动的装置;以及用于生成执行在所述第一时间段期间叠加在所述归属位置的真实世界环境的图像映射上的所确定的活动的所述替代现实角色的视频的装置。
示例59包括示例58的主题,并且还包括用于向计算设备传输所述替代现实角色的视频以供在所述第一时间段之后的第二时间段处在其上回放的装置。
示例60包括示例58和59中任一个的主题,并且其中用于生成所述图像映射的装置包括用于使用所述传感器网络的相机生成所述真实世界环境的图像映射的装置。
示例61包括示例58-60中任一个的主题,并且其中用于接收所述传感器数据的装置包括用于接收由所述传感器网络的相机传感器生成的图像数据的装置。
示例62包括示例58-61中任一个的主题,并且其中用于接收所述传感器数据的装置包括用于接收由所述传感器网络的运动传感器生成的运动数据的装置。
示例63包括示例58-62中任一个的主题,并且其中用于接收所述传感器数据的装置包括用于接收由所述传感器网络的音频传感器生成的音频数据的装置。
示例64包括示例58-63中任一个的主题,并且其中用于接收所述传感器数据的装置包括用于接收由所述传感器网络的光传感器生成的传感器数据的装置。
示例65包括示例58-4中任一个的主题,并且还包括用于从远离所述归属位置的传感器接收传感器数据的装置。
示例66包括示例58-65中任一个的主题,并且其中用于确定所述可用响应的装置包括用于基于存储在所述替代现实服务器上的使所述替代现实角色的行为与对应刺激相关的行为策略确定所述替代现实角色对所述刺激的可用响应的装置。
示例67包括示例58-66中任一个的主题,并且其中用于接收传感器数据的装置包括用于接收指示远程用户与所述替代现实角色的交互的数据的装置,并且用于确定可用响应的装置包括用于确定所述替代现实角色对所述远程用户的交互的响应的装置。
示例68包括示例58-67中任一个的主题,并且其中用于接收传感器数据的装置包括用于接收指示从另一替代现实角色与所述替代现实角色的交互的交互数据的装置,并且用于确定可用响应的装置包括用于确定所述替代现实角色对来自所述另一替代现实角色的交互的响应的装置。
示例69包括示例58-68中任一个的主题,并且其中用于接收传感器数据的装置包括用于接收指示发生在所述归属位置中的优先级事件的事件数据的装置,并且用于确定可用响应的装置包括用于基于所述事件数据确定所述替代现实角色对所述优先级事件的响应的装置。
示例70包括示例58-69中任一个的主题,并且其中用于接收传感器数据的装置包括用于从远程计算设备接收命令的装置,并且用于确定可用响应的装置包括用于确定所述替代现实角色对所接收的命令的响应的装置。
示例71包括示例58-70中任一个的主题,并且其中用于接收传感器数据的装置包括用于接收指示所述归属位置中的人员的存在的视频数据的装置,并且用于确定可用响应的装置包括(i)用于确定所述人员的身份的装置以及(ii)用于基于所述人员的身份确定所述替代现实角色的响应的装置。
示例72包括示例58-71中任一个的主题,并且其中用于接收传感器数据的装置包括用于接收指示所述归属位置处的环境条件的环境数据的装置,并且用于确定可用响应的装置包括用于基于所确定的环境条件确定所述替代现实角色的响应的装置。
示例73包括示例58-72中任一个的主题,并且其中用于确定所述替代现实角色的活动的装置包括用于基于与所述替代角色相关联的行为策略选择所述可用响应中的一个响应的装置。
示例74包括示例58-73中任一个的主题,并且还包括用于确定所确定的活动是否大于活动的阈值测量的装置;并且用于生成视频的装置包括响应于所确定的活动小于所述活动的阈值测量而跳过当前时间段。
示例75包括示例58-74中任一个的主题,并且还包括用于生成执行在所述第一时间段之后的第二时间段期间叠加在所述归属位置的真实世界环境的图像映射上的附加活动的所述替代现实角色的视频的装置;以及用于将所述第二时间段的视频附加到所述第一时间段以生成所述替代角色的活动的视频时间线的装置。
示例76包括示例58-75中任一个的主题,并且还包括用于在所述第一时间段之后,从计算设备接收针对所生成的视频的请求的装置;以及用于响应于该请求向所述计算设备传输所生成的视频的装置。
示例77包括示例58-76中任一个的主题,并且还包括用于响应于来自所述计算设备的命令而控制所生成的视频的回放的装置。
示例78包括示例58-77中任一个的主题,并且其中用于生成所述替代现实角色的视频的装置包括用于修改所述真实世界环境的图像映射的装置;以及用于生成执行在所述第一时间段期间叠加在所述归属位置的真实世界环境的经修改的图像映射上的所确定的活动的所述替代现实角色的视频的装置。
示例79包括示例58-78中任一个的主题,并且还包括用于从移动计算设备接收向所述移动计算设备传送所述替代角色的请求的装置;以及用于响应于所述请求向所述移动计算设备传送所述替代角色的装置。
示例80包括示例58-79中任一个的主题,并且其中用于传送所述替代角色的装置包括用于传送使所述替代现实角色的行为与对应刺激相关的行为策略的装置。
示例81包括示例58-80中任一个的主题,并且其中用于传送所述替代角色的装置包括用于传送在所述移动计算设备上实例化所述替代现实角色的替代现实应用的装置。
示例82包括示例58-81中任一个的主题,并且还包括用于从所述移动计算设备接收传感器数据而同时将所述替代角色传送到此的装置;以及用于基于从所述移动计算设备接收的传感器数据生成所述替代现实角色的视频的装置。
示例83包括示例58-82中任一个的主题,并且还包括用于向所述移动计算设备传送基于从所述移动计算设备接收的传感器数据生成的视频的装置。

Claims (25)

1.一种用以在真实世界环境中显示替代现实角色的替代现实服务器,所述替代现实服务器包括:
传感器聚合模块以(i)生成替代现实角色的归属位置的真实世界环境的图像映射以及(ii)从所述归属位置的传感器网络的多个传感器接收传感器数据;
活动确定模块以(i)确定所述替代现实角色对所述传感器数据表示的刺激的可用响应以及(ii)基于所述可用响应针对第一时间段确定所述替代现实角色的活动;以及
视频生成模块以生成执行在所述第一时间段期间叠加在所述归属位置的真实世界环境的图像映射上的所确定的活动的所述替代现实角色的视频。
2.权利要求1的替代现实服务器,还包括接口模块,用以向计算设备传输所述替代现实角色的视频以供在所述第一时间段之后的第二时间段处在其上回放。
3.权利要求1的替代现实服务器,其中所述传感器数据包括由以下中的至少一个生成的传感器数据:所述传感器网络的相机传感器、所述传感器网络的运动传感器、所述传感器网络的音频传感器以及所述传感器网络的光传感器。
4.权利要求1的替代现实服务器,还包括其中已存储有行为策略的数据库,所述行为策略使所述替代现实角色的行为与对应刺激相关,并且
其中所述活动确定模块将基于所述行为策略确定所述替代现实角色对所述刺激的可用响应。
5.权利要求1-4中任一项的替代现实服务器,其中所述活动确定模块还将:
确定所确定的活动是否大于活动的阈值测量;并且
响应于所确定的活动小于所述活动的阈值测量而跳过当前时间段。
6.权利要求1-4中任一项的替代现实服务器,其中所述活动确定模块还将:
生成执行在所述第一时间段之后的第二时间段期间叠加在所述归属位置的真实世界环境的图像映射上的附加活动的所述替代现实角色的视频;以及
将所述第二时间段的视频附加到所述第一时间段以生成替代现实角色的活动的视频时间线。
7.权利要求1-4中任一项的替代现实服务器,还包括接口模块,用以:
在所述第一时间段之后,从计算设备接收针对所生成的视频的请求;以及
响应于所述请求向所述计算设备传输所生成的视频。
8.权利要求7的替代现实服务器,其中所述接口模块还将响应于来自所述计算设备的命令而控制所生成的视频的回放。
9.权利要求1-4中任一项的替代现实服务器,还包括接口模块,用以从计算设备接收针对所述替代现实角色的活动的实时视频的请求,并且
其中所述活动确定模块还将生成执行叠加在所述归属位置的真实世界环境的图像映射上的所确定的活动的所述替代现实角色的实时视频,并且
其中所述接口模块还将所述实时视频串流到所述计算设备。
10.权利要求1-4中任一项的替代现实服务器,还包括接口模块,用以:
从移动计算设备接收向所述移动计算设备传送所述替代现实角色的请求;并且
响应于所述请求向所述移动计算设备传送所述替代现实角色。
11.权利要求10的替代现实服务器,其中:
所述接口模块将从所述移动计算设备接收传感器数据而同时所述替代现实角色被传送到此;并且
所述视频生成模块将基于从所述移动计算设备接收的所述传感器数据生成所述替代现实角色的视频。
12.权利要求11的替代现实服务器,其中所述接口模块将向所述移动计算设备传送基于从所述移动计算设备接收的所述传感器数据生成的所述视频。
13.一种用于在真实世界环境中显示替代现实角色的方法,该方法包括:
在替代现实服务器上生成替代现实角色的归属位置的真实世界环境的图像映射;
在所述替代现实服务器上从所述归属位置的传感器网络的多个传感器接收传感器数据;
在所述替代现实服务器上确定所述替代现实角色对所述传感器数据表示的刺激的可用响应;
在所述替代现实服务器上基于所述可用响应针对第一时间段确定所述替代现实角色的活动;以及
在所述替代现实服务器上生成执行在所述第一时间段期间叠加在所述归属位置的真实世界环境的图像映射上的所确定的活动的所述替代现实角色的视频。
14.权利要求13的方法,还包括向计算设备传输所述替代现实角色的视频以供在所述第一时间段之后的第二时间段处在其上回放。
15.权利要求13的方法,其中接收所述传感器数据包括从以下中的至少一个接收数据:所述传感器网络的相机传感器、所述传感器网络的运动传感器、所述传感器网络的音频传感器以及所述传感器网络的光传感器。
16.权利要求13的方法,其中确定所述可用响应包括基于存储在所述替代现实服务器上的使所述替代现实角色的行为与对应刺激相关的行为策略确定所述替代现实角色对所述刺激的可用响应。
17.权利要求13的方法,还包括:
确定所确定的活动是否大于活动的阈值测量;并且
生成所述视频包括响应于所确定的活动小于所述活动的阈值测量而跳过当前时间段。
18.权利要求13的方法,还包括生成执行在所述第一时间段之后的第二时间段期间叠加在所述归属位置的真实世界环境的图像映射上的附加活动的所述替代现实角色的视频;以及
将所述第二时间段的视频附加到所述第一时间段以生成所述替代现实角色的活动的视频时间线。
19.权利要求13的方法,还包括:
在第一时间段之后,从计算设备接收针对所生成的视频的请求;以及
响应于所述请求向所述计算设备传输所生成的视频。
20.权利要求19的方法,还包括响应于来自所述计算设备的命令而控制所生成的视频的回放。
21.权利要求20的方法,还包括:
从计算设备接收针对所述替代现实角色的活动的实时视频的请求;以及
生成执行叠加在所述归属位置的真实世界环境的图像映射上的所确定的活动的所述替代现实角色的实时视频;以及
将所述实时视频串流到所述计算设备。
22.权利要求21的方法,还包括:
从移动计算设备接收向所述移动计算设备传送所述替代现实角色的请求;以及
响应于所述请求向所述移动计算设备传送所述替代现实角色。
23.一个或多个机器可读存储介质,包括存储在其上的多个指令,所述指令响应于被运行而使计算设备执行权利要求13-22中任一项的方法。
24.一种用以在真实世界环境中显示替代现实角色的替代现实服务器,所述替代现实服务器包括:
用于生成替代现实角色的归属位置的真实世界环境的图像映射的装置;
用于从所述归属位置的传感器网络的多个传感器接收传感器数据的装置;
用于确定所述替代现实角色对所述传感器数据表示的刺激的可用响应的装置;
用于基于所述可用响应针对第一时间段确定所述替代现实角色的活动的装置;以及
用于生成执行在所述第一时间段期间叠加在所述归属位置的真实世界环境的图像映射上的所确定的活动的所述替代现实角色的视频的装置。
25.权利要求23的替代现实服务器,还包括用于向计算设备传输替代现实角色的视频以供在所述第一时间段之后的第二时间段处在其上回放的装置。
CN201380073012.0A 2013-03-14 2013-03-14 替代现实角色的异步显示 Pending CN104981833A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2013/031373 WO2014142881A1 (en) 2013-03-14 2013-03-14 Asynchronous representation of alternate reality characters

Publications (1)

Publication Number Publication Date
CN104981833A true CN104981833A (zh) 2015-10-14

Family

ID=51537275

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380073012.0A Pending CN104981833A (zh) 2013-03-14 2013-03-14 替代现实角色的异步显示

Country Status (3)

Country Link
US (1) US10319145B2 (zh)
CN (1) CN104981833A (zh)
WO (1) WO2014142881A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110244819A (zh) * 2018-03-08 2019-09-17 苹果公司 具有光学标记的电子设备

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160188585A1 (en) * 2014-12-27 2016-06-30 Lenitra Durham Technologies for shared augmented reality presentations

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002351972A (ja) * 2001-05-30 2002-12-06 Nec Software Kyushu Ltd ネットワークを利用した監視システム
US20080100704A1 (en) * 2000-10-24 2008-05-01 Objectvideo, Inc. Video surveillance system employing video primitives
CN101180880A (zh) * 2005-02-15 2008-05-14 实物视频影像公司 采用视频原语的视频监视系统
US20080218331A1 (en) * 2007-03-08 2008-09-11 Itt Manufacturing Enterprises, Inc. Augmented reality-based system and method to show the location of personnel and sensors inside occluded structures and provide increased situation awareness
CN102708120A (zh) * 2011-02-18 2012-10-03 微软公司 生活流式传输
KR20130007079A (ko) * 2011-06-29 2013-01-18 에스케이플래닛 주식회사 동물 상태 원격 관리 방법 및 시스템

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6570555B1 (en) * 1998-12-30 2003-05-27 Fuji Xerox Co., Ltd. Method and apparatus for embodied conversational characters with multimodal input/output in an interface device
KR20050121133A (ko) 2004-06-21 2005-12-26 에스케이 텔레콤주식회사 댁내 디바이스에 의한 애완동물 보호관리방법
KR100785647B1 (ko) * 2005-02-11 2007-12-14 비디에이터 엔터프라이즈 인크 휴대 단말기를 이용한 원격 모니터링 방법 및 그 시스템
WO2006137707A2 (en) * 2005-06-23 2006-12-28 Lg Electronics Inc. Refrigerator
AU2006266627B2 (en) * 2005-06-30 2009-11-19 Lg Electronics Inc. Method for controlling information display using the avatar in the washing machine
JP5204381B2 (ja) * 2006-05-01 2013-06-05 任天堂株式会社 ゲームプログラム、ゲーム装置、ゲームシステム及びゲーム処理方法
JP4837390B2 (ja) * 2006-02-01 2011-12-14 株式会社コナミデジタルエンタテインメント 仮想生命体キャラクタ育成装置
US20090069084A1 (en) * 2007-09-12 2009-03-12 Reece Alex D System and Methods for Monitoring and Controlling the Actions of an Avatar in a Virtual Environment
KR20110022903A (ko) 2009-08-28 2011-03-08 동명대학교산학협력단 이동 단말기 및 홈 네트워크에 기반한 애완견 관리 시스템
US9901828B2 (en) * 2010-03-30 2018-02-27 Sony Interactive Entertainment America Llc Method for an augmented reality character to maintain and exhibit awareness of an observer
US20120122570A1 (en) * 2010-11-16 2012-05-17 David Michael Baronoff Augmented reality gaming experience
US9264515B2 (en) 2010-12-22 2016-02-16 Intel Corporation Techniques for mobile augmented reality applications
US8913085B2 (en) 2010-12-22 2014-12-16 Intel Corporation Object mapping techniques for mobile augmented reality applications
CA2770933C (en) * 2011-03-11 2021-05-25 Intellacare Inc. A method and system for monitoring the activity of a subject within spatial temporal and/or behavioral parameters
JP5718197B2 (ja) * 2011-09-14 2015-05-13 株式会社バンダイナムコゲームス プログラム及びゲーム装置
US9952820B2 (en) 2011-12-20 2018-04-24 Intel Corporation Augmented reality representations across multiple devices
US8982133B2 (en) * 2012-01-31 2015-03-17 Disney Enterprises, Inc. Portable virtual characters
US9747495B2 (en) * 2012-03-06 2017-08-29 Adobe Systems Incorporated Systems and methods for creating and distributing modifiable animated video messages
US9135754B2 (en) * 2012-05-07 2015-09-15 Honda Motor Co., Ltd. Method to generate virtual display surfaces from video imagery of road based scenery
US9035955B2 (en) * 2012-05-16 2015-05-19 Microsoft Technology Licensing, Llc Synchronizing virtual actor's performances to a speaker's voice
US9349218B2 (en) * 2012-07-26 2016-05-24 Qualcomm Incorporated Method and apparatus for controlling augmented reality
KR102058918B1 (ko) * 2012-12-14 2019-12-26 삼성전자주식회사 홈 모니터링 방법 및 장치
CN103116451B (zh) * 2013-01-25 2018-10-26 腾讯科技(深圳)有限公司 一种智能终端的虚拟角色交互方法、装置和系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080100704A1 (en) * 2000-10-24 2008-05-01 Objectvideo, Inc. Video surveillance system employing video primitives
JP2002351972A (ja) * 2001-05-30 2002-12-06 Nec Software Kyushu Ltd ネットワークを利用した監視システム
CN101180880A (zh) * 2005-02-15 2008-05-14 实物视频影像公司 采用视频原语的视频监视系统
US20080218331A1 (en) * 2007-03-08 2008-09-11 Itt Manufacturing Enterprises, Inc. Augmented reality-based system and method to show the location of personnel and sensors inside occluded structures and provide increased situation awareness
CN102708120A (zh) * 2011-02-18 2012-10-03 微软公司 生活流式传输
KR20130007079A (ko) * 2011-06-29 2013-01-18 에스케이플래닛 주식회사 동물 상태 원격 관리 방법 및 시스템

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110244819A (zh) * 2018-03-08 2019-09-17 苹果公司 具有光学标记的电子设备
CN110244819B (zh) * 2018-03-08 2024-05-14 苹果公司 具有光学标记的电子设备

Also Published As

Publication number Publication date
US20150228117A1 (en) 2015-08-13
US10319145B2 (en) 2019-06-11
WO2014142881A1 (en) 2014-09-18

Similar Documents

Publication Publication Date Title
CN110139732B (zh) 具有环境控制特征的社交机器人
US11875656B2 (en) Virtual enhancement of security monitoring
US20210209348A1 (en) Computer vision system
WO2021180062A1 (zh) 意图识别方法及电子设备
WO2018020275A1 (en) Computer vision systems
Cucchiara et al. Visions for augmented cultural heritage experience
CN106357805A (zh) 一种应用场所监控方法、装置及系统
US11721228B2 (en) Method and system for implementing AI-powered augmented reality learning devices
CN104092976A (zh) 实现环境设备监控系统报警与视频监控系统联动的方法
Yonezawa et al. Cat@ Log: sensing device attachable to pet cats for supporting human-pet interaction
CN106371455B (zh) 一种智能交互方法和系统
CN104981833A (zh) 替代现实角色的异步显示
US20190289360A1 (en) Display apparatus and control method thereof
CN110716568A (zh) 一种摄像控制系统、方法及移动机器人
CN204631844U (zh) 家庭微云存储系统
CN103995946A (zh) 电子宠物系统与电子宠物
KR102501439B1 (ko) 반려동물 주인의 귀가 시간을 예측하기 위한 장치
CN205883458U (zh) 基于计算机互联网技术的智能远程视频监控系统
US10521255B2 (en) Interface and interruption management
CN117336354A (zh) 虚拟现实vr设备的防碰撞方法和电子设备
US11580835B2 (en) Method, device and system for the simulation of the presence of humans
KR20220084666A (ko) 반려동물 회상 서비스 제공 방법 및 시스템
JPWO2020032239A1 (ja) 情報出力装置、設計支援システム、情報出力方法及び情報出力プログラム
JP2023018593A (ja) 通信制御と映像表示が行える風力発電システム
Zaarour Smart Playing Cards

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20151014