CN106557038B - 一种用于定制环境的计算设备、方法及系统 - Google Patents
一种用于定制环境的计算设备、方法及系统 Download PDFInfo
- Publication number
- CN106557038B CN106557038B CN201610727453.3A CN201610727453A CN106557038B CN 106557038 B CN106557038 B CN 106557038B CN 201610727453 A CN201610727453 A CN 201610727453A CN 106557038 B CN106557038 B CN 106557038B
- Authority
- CN
- China
- Prior art keywords
- smart
- computing device
- smart device
- application
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 53
- 230000003993 interaction Effects 0.000 claims description 19
- 230000004044 response Effects 0.000 claims description 13
- 238000004891 communication Methods 0.000 claims description 12
- 238000012546 transfer Methods 0.000 claims description 9
- 230000008878 coupling Effects 0.000 claims description 8
- 238000010168 coupling process Methods 0.000 claims description 8
- 238000005859 coupling reaction Methods 0.000 claims description 8
- 230000007246 mechanism Effects 0.000 claims description 8
- 238000005516 engineering process Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 10
- 230000005540 biological transmission Effects 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000007613 environmental effect Effects 0.000 description 3
- 230000036651 mood Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000004378 air conditioning Methods 0.000 description 1
- 238000013475 authorization Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000002860 competitive effect Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000010438 heat treatment Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B15/00—Systems controlled by a computer
- G05B15/02—Systems controlled by a computer electric
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
- H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/80—Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/20—Pc systems
- G05B2219/26—Pc applications
- G05B2219/2642—Domotique, domestic, home control, automation, smart house
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
- H04L2012/284—Home automation networks characterised by the type of medium used
- H04L2012/2841—Wireless
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- General Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- Quality & Reliability (AREA)
- Economics (AREA)
- Entrepreneurship & Innovation (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Manufacturing & Machinery (AREA)
- User Interface Of Digital Computer (AREA)
- Control Of Motors That Do Not Use Commutators (AREA)
- Glass Compositions (AREA)
- Developing Agents For Electrophotography (AREA)
Abstract
本文描述了环境定制。一种计算设备和方法,其调整智能设备的操作以定制围绕计算设备的环境。经由为具有智能设备所知的语言的应用程序接口(API)且经由在传输堆栈中内部地路由数据且促进将数据递送给智能设备的传输抽象模块做出调整。
Description
技术领域
本技术通常涉及在计算设备上执行应用,且尤其涉及针对该应用定制计算设备的环境。
背景技术
在家庭中,人们通常采用计算设备来观看电影、玩视频游戏并与媒体交互。计算设备可以是个人计算机或台式计算机、膝上型计算机、电视、DVD播放器、数字录像机(DVR)、游戏控制台等等。用户可以使用具有视频播放器的计算设备来观看电影或其他视频内容,和/或可以使用具有游戏应用的计算设备来玩游戏,等等。用户通常可以在显示监视器或电视上观看电影或游戏比赛,并通过与计算设备、显示监视器或电视相关联的扬声器来聆听。在消费性电子设备和服务的竞争性业务中,存在对用户体验、可靠性、承受能力等等的持续改善有持续需求。
附图说明
图1是根据本技术的各实施方式的用于环境定制的设备的图。
图2是根据采用本技术的各实施方式的计算设备的系统的框图。
图3是具有根据本技术的各实施方式的计算设备的系统的框图。
图4是根据本技术的各实施方式用带有用于实现环境定制的软件架构的设备增强(highlight)的方法的图。
图5是根据本技术的各实施方式定制计算设备的环境的方法的流程框图。
图6是叙述有形非暂态计算机可读介质的示例的框图,该有形非暂态计算机可读介质可以根据本技术的各实施方式促进计算设备附近的环境的定制。
贯穿本公开内容和各图,始终使用相同的标号来表示相同的组件和特征。100 系列中的标号是指最先在图1中出现的特征;200系列中的标号是指最先在图2中出现的特征;等等。
具体实施方式
本技术通常涉及定制诸如在房间内之类的计算设备的环境。各实施方式涉及计算设备针对用户和在计算设备上执行的应用调整已连接智能设备的操作以便影响环境。各示例涉及通过各种介质、联网或通信对视频和游戏内容的环境定制,例如物联网(Internetof Things:IoT)和类似的系统和协议。一些实施方式提供例如通过使用用户在家中拥有的智能设备提升用户的视频体验或游戏体验的机制。在某些示例中,游戏(游戏应用)与应用程序接口(API)挂钩(hook)一起工作,以便可以枚举智能设备,并按可以与游戏或电影的主题或动作混合的方式来控制智能设备。一个这样的示例可以是在用户所控制的游戏角色被击中时使得已连接智能手表振动。随着智能设备和物联网的出现,可以开发有趣的和有益的用例,包括游戏开发者和其他人使用用户周围的设备来增加体验。
通常,IoT可以是嵌入在电子设备、软件、传感器内的物理对象或“事物”的网络和连接,以促进各对象收集和交换数据。物联网可以促进跨现有网络基础设施远程地感知和控制各对象,从而为在物理世界和基于计算机的系统之间的更直接的集成创造机会。每一“事物”可以通过其嵌入式计算系统而唯一可识别,且可以在现有因特网基础设施内互操作。
本文中涉及环境定制的各实施方式可以包括或容纳已连接设备、游戏、物联网、移动设备、视频和电影、个人计算机(PC)、智能设备、膝上型计算机等等。游戏和视频属于计算设备的常见用途,其范围可从低端移动电话到高端台式PC和控制台。内容创建者和应用开发者可以竞相创建更逼真的体验,例如通过感知计算、使用辅助显示器、利用内建到设备的传感器等等。此外,如下面例如相对于辅助数据讨论的,内容的消费者也可以是贡献者。例如,电影的消费者可以写“效果文件”,该消费者使得另一消费者可以例如经由下载公开获得该“效果文件”。
例如,通过在用户与内容交互的同时定制在用户周围的环境,本文中的示例可以提升体验。可以采用通过物联网连接的家庭或公司(以及政府、公共场所、大学等等)中的设备。某些实施方式创建或向各应用提供标准化接口以修改诸如智能灯泡、智能温控器、智能手表、智能眼镜等等之类的IoT设备(智能设备)的属性,以便基于情绪或正在消费的内容的其他因素动态地定制环境。各示例适用于游戏、视频和其他类型的用途和应用。
大量的用例可以适用。在一个示例中,一种用例可以是用户启动视频播放器应用并给予该应用使用用户的智能设备来定制他(用户)的环境的权限。在用户开始观看电影时,视频播放器使用已连接智能设备如(多个)已连接智能灯传感器检测室内的环境光。然后,视频播放器可以命令智能设备如室内的一个或多个智能灯开关或智能灯泡变暗到适当水平,提供类似电影院的体验。
用例的另一示例是用户在他的设备上启动恐怖游戏,且给予该应用使用他附近的智能设备的权限。他玩游戏且进入寒冷昏暗的房间的游戏小节(section)或场景,在他与游戏进行交互时,昏暗的房间逐渐变亮。在这一小节或场景期间,了解用户在游戏中正在做什么的游戏应用根据用户与游戏的交互命令该房间中IoT连接的灯光变暗和变亮。该应用也可以通过命令温控器(IoT或智能温控器)来减少或增加房间温度,以便与正在玩耍的游戏小节的情绪或估算虚拟温度对准。
使用IoT,可以在家庭环境中独特地执行为视频消费和游戏玩耍定制环境。在家庭环境中的应用中,包括借助于家庭中现有的智能设备,这样的家庭执行和体验可以相对实惠。
图1是诸如用于借助于应用(例如,视频、游戏、安全、监视等等)的环境定制的计算设备之类的设备100和诸如IoT之类的联网通信以及智能设备。设备 100可以是个人计算机(PC)或台式计算机、膝上型计算机、服务器、游戏控制台 (带有或不带有关联的电视或显示监视器)、电视、移动设备(例如平板、智能电话等等)、智能显示监视器、智能设备等等。在所阐释的实施方式,设备100具有处理器102,如硬件处理器、微处理器、中央处理单元(CPU)等等。处理器102 可以是多个处理器和/或每一处理器102可以具有多个核。设备100具有存储器104,如非易失性存储器(硬盘驱动器、只读存储器或ROM、闪存、卡等等)、易失性存储器(例如,随机存取存储器或RAM等等)和其他类型的存储器。此外,尽管图1表示单个设备100,但(诸)处理器102和拥有已存储的可执行应用和指令106 的存储器104可以改为或另外处于分布式计算系统中,例如跨域多个计算节点。
在所阐释的示例中,存储器104存储可由一个或多个处理器102执行的(多个)应用和指令106(例如,代码、逻辑等等)。应用可以是例如视频播放器或游戏应用。指令106可以由处理器102执行以实现环境定制(包括在家庭或企业等等中)和本文中讨论的技术,例如借助于游戏和视频配置等等。设备100可以配备有网络适配器108以便与智能设备、远程网络、云网络(“云”)等等耦合和交互。网络适配器108可以是与智能设备无线耦合和交互以实现环境定制的无线网络适配器。网络适配器108可以提供与智能设备的有线(例如,以太网等等)网络连接、耦合智能设备、其他计算设备的有线网格等等。
再次地,诸如(诸)游戏或(诸)游戏应用、视频播放器等等之类的媒体应用可以被存储在存储器104中,和/或可以在外部提供。设备100可以使用无线连接的智能设备(未示出)以便借助于环境定制增强媒体体验。为了这样实现,设备 100可以将可执行指令106存储在存储器104中,如应用框架、传输模块等等。应用框架在经由处理器102执行时可以提供与已连接智能设备的通信。在一些示例中,应用框架可以是处理操作系统(OS)特定细节的API层。应用框架可以向媒体应用(游戏、视频播放器等等)呈现编程接口。平台特有的传输可以包括与智能设备通信的Wi-Fi、近场通信(NFC)、以太网等等。传输模块可以是包括由平台提供的传输技术的抽象,且该抽象包括用于Wi-Fi、NFC、以太网、有线协议等等的硬件以及它们的关联驱动程序和API模块。与外部智能设备的通信可以取决于该智能设备是否具有与设备100的(诸)传输平台所提供的传输介质公用的传输介质。
对于智能设备,一组设备可以具有与设备100或其他计算设备公用的至少一种传输介质。这些智能设备可以提供用于助益系统对诸如设备100之类的智能设备的控制的一组‘能力’。在一些示例中,安全机制通常仅允许经授权设备控制智能设备。举例来说,在某些示例中,在没有授权的情况下,站立在房屋外在一定范围内的人不可以使用他们的移动设备来控制存在于房屋中的智能设备。在一个示例中,所有经授权设备连接到用户的房屋中的公用Wi-Fi接入点,该Wi-Fi接入点要求有凭证才能加入。为了保护用户的隐私,在设备100或媒体应用尝试访问每一智能设备时可以强制执行OS级检查。实现这样的强制执行的方式是通过在媒体应用第一时间试图访问设备时示出权限对话框,并在OS中保存用户的偏好。另一方式可以是在游戏或视频播放器的安装期间列出游戏或视频播放器可以控制的一组设备,且允许用户选择可以允许哪些智能设备。
图2是采用计算设备202的装置或系统200,例如(图1的)具有(诸)处理器102和存储(诸)应用和指令106的存储器104的设备100,这些应用和指令可由处理器执行,以执行本文中描述的技术和应用,例如与游戏和视频体验、家庭环境定制等等相关的那些。如所指出的,计算设备100和202可以是电视(TV)、计算机系统(可选地具有显示监视器)、膝上型计算机、一体式计算机、游戏控制台(带有或不带有关联的电视或显示监视器)、平板等等。在图2所阐释的实施方式中,装置或系统200可以容纳游戏或媒体实现,或其他用途。
计算设备202可以执行应用例如媒体应用、游戏(游戏应用)、视频播放器等等。也可以采用移动设备204,如智能电话、膝上型计算机、平板等等,包括相对于应用和计算设备202的视角以及与应用和计算设备202的交互。进一步,可以结合应用利用可穿戴计算设备,如智能手表206、计算机眼镜(未示出)等等,且在某些实例中可以将其表征为智能设备。此外,智能设备如智能灯208被放置在计算设备202的环境(例如,房间)内。而且,在图2所阐释的示例中,第二显示监视器216可选地可用于查看应用。最后,可以将附加的智能设备,如智能温控器 218,置于环境(例如,在房间的墙壁上)中并加以利用。所叙述的各种设备均可以拥有网络适配器或网络能力以便彼此无线耦合,包括耦合到计算设备202。事实上,计算设备202可以拥有例如图1中所叙述的网络适配器108。
在行动上,计算设备202可以响应于来自在计算设备202上运行的应用和/或从辅助输入源(例如,经由辅助数据文件)到计算设备202的反馈而调整智能设备的操作(例如,206、208、218等等)。反馈可以涉及用户与应用的交互、应用中的触发器、应用的辅助数据等等。响应于这样的反馈或事件,计算设备202可以调整例如智能灯206以调整环境如房间中的亮度。为了调整智能灯(且因此调整房间亮度),举例来说,计算设备可以向智能灯206发送数据以调整智能灯的调光器或可变开关,例如电阻器开关、半导体开关等等。在智能温控器218的情况下,计算设备202可以指令温控器218或向其发送数据,以改变温控器218的设置点,例如温度设置点,这例如可以促进对空气调节和加热系统的控制。对于智能手表206,计算设备202可以例如向手表206发送信号,以使得手表206振动或发出音频声音 (例如,蜂鸣)等等。
图3是具有计算设备302的系统300,计算设备302可以类似于具有处理器 102和带有可由处理器102执行的(诸)应用和指令106的存储器104的计算设备 202(图2)和设备100(图1)。在图3所阐释的实施方式中,例如经由硬件和已存储可执行指令将计算设备302配置为与围绕计算设备302的环境中的智能设备304、306和308(例如,IoT设备)以及其他智能设备无线耦合并与之交互。智能设备IoT设备可以处于家庭(“智能家庭”)或其他类型的位置或环境中。
在这一示例中,计算设备302在存储器中具有应用310,可以以其中用户与应用交互的高级水平来表示应用310。应用310可以是例如游戏应用或视频播放器,该游戏应用或视频播放器可以使用存储在计算设备302上或以另外方式本地存储的本地内容(游戏、媒体等等),或来自远程网络或云网络(“云”)的内容,等等。应用310与IoT应用程序接口(API)交互。在所阐释的示例中,应用310——例如游戏应用、视频播放器等等——与IoT API模块312交互,IoT API模块312是存储在存储器中的可执行指令,且可以具有为计算设备302的环境中的智能IoT设备(例如,304、306、308)所知的语言格式。举例来说,IoT API 312可以使用诸如Google 之类的语言或类似的程序或语言,这些程序和语言可以促进在设备、本地和云之间的通信。在IoT API 312层下面的可以是传输抽象模块314,该传输抽象模块实现或覆盖(或“隐藏”)用来向诸如智能设备304、306和308之类的IoT设备携带或递送数据的(诸)底层机制。在某些实施方式中,传输抽象模块 314在设备302上可用的各种传输堆栈——如NFC、316、Wi-Fi接入点(AP) 318连接和/或Wi-Fi320等等——之间内部路由数据。术语Wi-Fi可以带有商标此外,最初称为Wi-Fi对等(P2P)的Wi-Fi是促进设备相互连接而不要求无线接入点的Wi-Fi标准,且可用于因特网浏览、文件传递、以典型的Wi-Fi速度同时与多于一个的设备通信等等。此外,(诸)传输堆栈也可以涉及以太网和/或其他有线协议。
对于智能设备,智能设备304、306和308可以拥有处理器和存储可由处理器执行的指令(代码、逻辑)存储器。在这一示例中,围绕计算设备的环境中的智能设备包括灯、温控器和其他智能设备。智能设备304是(诸)智能灯。智能设备 306是智能温控器。智能设备308表示其他或附加的智能设备。所叙述的智能设备 304、306和308都可以具有由设备硬件构成的堆栈,带有作为存储在存储器中且可由智能设备的相应处理器执行的指令的IoT API模块。IoT API通常可以在顶端运行,以便根据智能设备IoT API接收到的命令控制硬件。在某些实施方式中,传输模块包括可执行指令,例如在IoT API上面操作,覆盖或“隐藏”用于引入命令的机制。
图4是由设备(例如,100、202、302)增强的方法400,设备(例如,100、 202、302)带有例如存储在存储器中且可由处理器执行的指令或代码的、用于实现环境定制的软件架构。软件架构可以包括或容纳游戏和视频内容,且可以扩展到其他用途。在所阐释的示例中,方法400可以利用设备存储游戏402(即,游戏应用)、视频播放器404和IoT API 406。方法400和软件架构可以依赖于用户动作408和游戏数据410作为相对于游戏402的触发器,用于调节或改变环境中的智能设备属性。类似地,方法400和软件架构可以依赖于视频数据412和辅助数据414(被讨论下面),作为相对于视频播放器404的触发器,用于调节和/或改变家庭或周围环境中的智能设备(例如,灯、温控器等等)的操作/属性。
在一些实施方式中,IoT API 406的组件包括设备枚举器、权限检查程序和设备控制。因而,经由IoT API 406的方法400可以枚举(框415)设备,获得(框 416)用户权限,提供(框418)设备控制等等。设备计数器可以列出(框416)可用的智能设备、它们的类型和可以读取或修改的属性。设备控制可以接受(框418) 输送给(诸)智能设备的命令,用于读取和设置智能设备属性。权限检查程序用于现场保护用户的隐私,例如把智能设备看作是可以请求(框416)用户同意促进程序性控制的资源。
正如所提到的,如果应用是游戏402,则用户交互408和/或游戏数据410(例如,正在玩耍的游戏中的场景)可以用于改变智能设备属性的触发器。举例来说,游戏场景的情绪或游戏中用户的角色速度和性能等等,可以决定调整或修改哪些智能设备、设置智能设备的什么属性以及设置成什么值。如早先的示例中所指出的,具有寒冷和昏暗小节的游戏可以选择修改用户处于其中的实际房间中的温控器和灯泡、带有该游戏的设备和智能设备(温控器、灯泡等等)。类似地,在射手游戏中,如果用户经由游戏角色击落游戏场景中的所有虚拟灯光,则通过计算设备经由本文中描述的示例方法400和软件架构调暗或者关闭实际房间中的灯光,用户物理上处于其中的实际房间可以变暗或变黑。
对于视频用途,视频播放器404可以以多种方式采用各技术的实施方式。举例来说,可以获得好实现用于正在播放的任何电影的一组通用的改变。举例来说,调整温度、基于环境光使得灯光变暗(例如,经由用于灯泡的可变开关)等等,可以应用于任何电影以便创建剧场体验。换句话说,响应于在视频播放器上开始任何电影,设备(例如,100、202或302)可以使得房间内的智能灯变暗、调整房间中的智能温控器等等。正如所提到的,其他体验可以涉及基于正在播放的视频内容或数据412动态地定制环境。
为了基于视频数据412促进环境的动态定制,可以在外部向视频播放器提供辅助输入(辅助数据414)——例如以数据文件(例如,辅助数据文件)的形式。数据文件可以提及电影场景的性质(动作、恐怖等等),或更具体地,针对电影中的各个时刻可以应用到已连接智能(IoT)设备的调整。在其中指定了场景的性质的情况中,视频播放器404可以选择借助于环境定制列表应用匹配配置。在辅助数据414中提到了实际定制的情况中,播放器404可以基于智能设备的可用性、用户的同意、所允许的值的范围等等来选择子集。注意,可以由任何人(用户、第三方等等)创建辅助数据414文件,而不只是视频数据412内容的作者。电影的爱好者可以耗费时间来以该爱好者认为适合观看该电影的方式,以某种格式编写辅助数据 414文件。在一些示例中,在用户开始观看电影之前,视频播放器404可以提供用于从因特网下载辅助数据412作为用于特定电影的一个或多个定制概况(profile) 的界面。总之,可以伴随着辅助数据414文件视频(电影)或游戏等等,由用户下载或创建辅助数据414文件。辅助数据414可以是经由智能设备在房间或环境中用于音乐、灯光调整、温度调整等等的效果文件。在应用执行时可以自动执行房间效果的实现,且房间效果的实现依赖于辅助数据414。
通常,通过使用例如物联网的环境定制,本技术的各实施方式可以为视频和游戏消费提供更逼真的用户体验。正如所讨论的,各实施方式包括游戏和视频应用如何利用借助于无线耦合到家庭(或其他环境)中的智能设备的计算设备的这种环境定制的架构。生态系统可以包括在移动设备/PC与IoT设备之间的能力。IoT堆栈可以内建功能。可以分开或者与移动设备、膝上型计算机、PC等等相捆绑来提供相关的可执行指令或代码。
图5是定制执行媒体应用的计算设备的环境的方法500。在框502,该方法包括耦合到智能设备。耦合可以经由无线和/或有线连接。在框504,该方法包括经由具有为智能设备所知的语言的应用程序接口(API)与智能设备通信。在框506,该方法包括由传递抽象模块路由传输堆栈内部的数据以递送给智能设备。进一步,在框508,该方法包括调整与媒体应用相关的智能设备的操作以定制计算设备的环境。调整操作可以是改变智能设备的设置或属性值。
此外,正如所讨论的,智能设备可以是物联网(IoT)设备,且API可以包括 IoTAPI。可以利用多个智能设备,且它们可以包括例如智能灯、智能温控器等等。调整智能设备的操作可以包括调整智能灯的操作以调整房间亮度,调整智能温控器的操作以调整房间温度等等。在媒体应用是游戏应用的示例中,智能设备的操作的调整可以和用户与游戏应用的交互相关,或与诸如游戏场景之类的游戏数据相关,或其组合,等等。在媒体应用是视频播放器的示例中,调整智能设备的操作可以是响应于用户开启视频播放器以播放电影、或根据辅助数据文件、或其组合等等而进行的。如果辅助数据文件可用、被提供或被采用,则计算设备可以接收这样的文件。
图6是叙述有形非暂态计算机可读介质600的示例的框图,有形非暂态计算机可读介质600可以促进计算设备附近的环境的定制。可以由处理器602在计算机互连604上访问计算机可读介质600。处理器602可以是计算设备的处理器(例如, 102)。有形非暂态计算机可读介质600可以包括指引处理器602执行本文中描述的技术的操作的可执行指令或代码。
本文中讨论的各种软件组件可以存储在有形非暂态计算机可读介质600上,如图6中所指出。例如,对于在计算设备上运行的游戏应用,游戏环境模块606(可执行代码/指令)可以指引处理器602依赖于例如用户与游戏应用的交互和游戏数据(例如,正在玩耍的游戏中的场景)作为用于调整操作或改变智能设备的属性的触发,或指引调整操作或改变智能设备的属性。类似地,视频模块608可以提供用于正在播放的任何电影的对智能设备设置或操作的一组通用的改变。例如,使得智能灯变暗创建了剧场体验。其他体验可以涉及基于正在播放的视频内容或数据或根据辅助文件动态地定制环境。
指引处理器602的计算机可读介质600的可执行指令或代码可以包括传递抽象模块和API或IoT API,包括设备计数器、权限检查程序和设备控制。借助于运行应用的计算设备,指令可以指引处理器602定制本地和计算设备外部的物理环境。指令可以由处理器602执行,以便:经由API与无线耦合到计算设备的智能设备通信,该API具有智能设备已知的语言;经由传递抽象模块在传输堆栈中内部地路由计算设备中的数据,以递送给智能设备;以及调整与应用相关的智能设备的操作以定制物理环境。应理解,图6中未示出的任何数量的附加的软件组件可以被包括在有形非暂态计算机可读介质600内,这取决于应用或其他考虑。此外,尽管叙述了两个模块即游戏环境模块606和视频模块608,但针对其他应用和类型的用法的附加的模块可以存储在介质600上。
总而言之,一种实施方式可以包括具有处理器和存储器的计算设备。存储器存储应用和指令,所述应用和指令可由处理器执行以调整智能设备例如IoT设备的操作。智能设备本地放置在计算设备处,且调整智能设备的操作以针对用户体验定制围绕计算设备的环境。指令包括具有智能设备已知的语言的API例如IoT API,以及传输抽象模块,在由处理器执行时,所述传输抽象模块在传输堆栈中内部地路由数据并促进将数据递送给智能设备。计算设备可以包括用于耦合的网络适配器,例如,以便经由网络或协议将计算设备与智能设备通信上耦合起来的。耦合可以是无线的,例如经由无线接入点、无线直连、近场通信(NFC)、等等。耦合也可以是有线连接。例如,家庭可以具有游戏控制台(计算设备)和温控器(智能设备),两者都拥有以太网端口,并且它们经由在房屋墙壁后面运行的骨干网络有线连接到家庭路由器。此外,智能设备可以改为是多个智能设备,例如智能灯和智能温控器,且其中,调整操作包括调整智能灯以调整房间亮度,并且调整智能温控器以调整房间温度。
应用可以是游戏应用,且其中,调整智能设备的操作是基于用户与游戏应用的交互,和/或基于诸如游戏场景之类的游戏数据。应用可以是视频播放器,且其中,调整智能设备的操作响应于用户开启视频播放器以播放视频或电影。调整智能设备的操作也可以基于辅助数据文件。
通常,应用是媒体应用,且其中,在由处理器执行时,API促进计算设备与本地和云网络中的设备的通信,设备包括智能设备。传输抽象模块可以隐藏促进将数据从计算设备递送给智能设备的(诸)机制中的一些。最后,传输堆栈可以定向到Wi-Fi接入点连接、Wi-FiNFC等等。
可以用硬件、固件和软件中的一种或组合实现一些实施方式。一些实施方式也可以被实现为存储在机器可读介质上的指令,这些指令可由计算平台读取和执行,以执行本文中描述的操作。机器可读介质可以包括用于以可由机器例如计算机读取的形式存储或传输信息的任何机制。例如,机器可读介质可以包括只读存储器 (ROM);随机存取存储器(RAM);磁盘存储介质;光存储介质;闪存设备;或电、光、声或其他形式的传播信号,例如载波、红外信号、数字信号或发射和/ 或接收信号的接口,以及其他。
一种实施方式是实现或示例。说明书提及“一种实施方式”、“一个实施方式”、“一些实施方式”、“各种实施方式”或“其他实施方式”意味着结合该实施方式描述的具体的特征、结构、或特性被包括在本技术的至少一些实施方式中,但并不一定被包括在本技术的所有实施方式中。“一种实施方式”、“一个实施方式”或“一些实施方式”的各种出现并不必定都是指相同的实施方式。来自一种实施方式的元素或方面可以与另一实施方式的元素或方面组合。
在具体的实施方式或各实施方式中并不是都需要包括本文中所描述和阐释的所有组件、特征、结构、特性等等。如果说明书声明“可以(may)”、“可能(might)”、“能够(can)”或“能(could)”包括组件、特征、结构或特性,例如,那么不要求包括该具体的组件、特征、结构或特性。如果说明书或权利要求提到“一个”或“一种”元素,那么不意指存在仅一个元素。如果说明书或权利要求提到“附加的”元素,那么不排除存在多于一个的附加的元素。
应注意,尽管已经参考特定实现描述了一些实施方式,但根据一些实施方式的其他实现也是可能的。另外,各图中阐释和/或本文中描述的电路元件素或其他特征的装置和/或次序不必按所阐释和描述的具体方式来排列。根据一些实施方式的许多其他装置也是可能的。
在图中示出的每一系统中,在一些情况中,各元素可以都具有相同的标号或不同的标号,暗示所表示的元素可以不同和/或相似。然而,元素可以灵活到足以具有不同的实现且与本文中示出或描述的系统中的一些或全部一起工作。各图中示出的各种元素可以是相同或不同。哪一个被称为第一元素以及哪一个被称为第二元素是任意的。
提供了各示例。示例1是计算设备。所述计算设备包括处理器和存储器,其存储应用和指令,所述应用和指令可由所述处理器执行,以调整本地放置在所述计算设备处的智能设备的操作,以便针对用户体验定制围绕所述计算设备的环境。所述指令包括:具有为所述智能设备所知的语言的应用程序接口(API);以及传输抽象模块,在由所述处理器执行时,所述传输抽象模块在传输堆栈中内部地路由数据并促进将所述数据递送给所述智能设备。
示例2包括示例1的计算设备,包括或排除可选的特征。在这一示例中,所述计算设备包括网络适配器,其将所述计算设备与所述智能设备耦合起来,且其中,所述智能设备包括多个智能设备。
示例3包括示例1到2中的任何一个的计算设备,包括或排除可选的特征。在这一示例中,所述智能设备包括物联网(IoT)设备,且其中,所述API包括IoT API。
示例4包括示例1到3中的任何一个的计算设备,包括或排除可选的特征。在这一示例中,所述智能设备包括多个智能设备,包括智能灯和智能温控器,且其中,调整操作包括:调整所述智能灯以调整房间亮度;以及调整所述智能温控器以调整房间温度。
示例5包括示例1到4中的任何一个的计算设备,包括或排除可选的特征。在这一示例中,所述应用包括游戏应用,且其中,调整所述智能设备的操作是基于用户与所述游戏应用的交互。
示例6包括示例1到5中的任何一个的计算设备,包括或排除可选的特征。在这一示例中,所述应用包括游戏应用,且其中,调整所述智能设备的操作是基于包括游戏场景的游戏数据。
示例7包括示例1到6中的任何一个的计算设备,包括或排除可选的特征。在这一示例中,所述应用包括视频播放器,且其中,调整所述智能设备的操作是响应于用户开启所述视频播放器以播放视频。
示例8包括示例1到7中的任何一个的计算设备,包括或排除可选的特征。在这一示例中,所述应用包括视频播放器,且其中,调整所述智能设备的操作是基于辅助数据文件。
示例9包括示例1到8中的任何一个的计算设备,包括或排除可选的特征。在这一示例中,所述应用包括媒体应用,且其中,在由所述处理器执行时,所述 API促进所述计算设备与本地和云网络中的设备的通信,所述设备包括所述智能设备。
示例10包括示例1到9中的任何一个的计算设备,包括或排除可选的特征。在这一示例中,所述传输抽象模块隐藏促进将所述数据从所述计算设备递送给所述智能设备的机制。
示例11包括示例1到10中的任何一个的计算设备,包括或排除可选的特征。在这一示例中,所述传输堆栈涉及蓝牙、Wi-Fi接入点连接、Wi-Fi直连、近场通信(NFC)或以太网有线连接,或其任何组合。
示例12是包括指令非暂态计算机可读介质,这些指令可由计算设备的处理器执行,以指引所述处理器经由智能设备定制所述计算设备本地和外部的物理环境,所述计算设备运行应用,所述指令可由所述处理器执行,以:经由应用程序接口 (API)与所述智能设备通信,所述智能设备耦合到所述计算设备,且所述API具有为所述智能设备所知的语言;在传输堆栈中经由传递抽象模块内部地路由所述计算设备中的数据以递送给所述智能设备;以及调整与所述应用相关的所述智能设备的操作以定制所述物理环境。
示例13包括示例12的非暂态计算机可读介质,包括或排除可选的特征。在这一示例中,所述智能设备包括物联网(IoT)设备,且其中,所述API包括IoT API。
示例14包括示例12到13中的任何一个的非暂态计算机可读介质,包括或排除可选的特征。在这一示例中,所述智能设备包括多个智能设备,包括智能灯和智能温控器,且其中,调整操作包括:调整所述智能灯以调整房间亮度;以及调整所述智能温控器以调整房间温度。
示例15包括示例12到14中的任何一个的非暂态计算机可读介质,包括或排除可选的特征。在这一示例中,所述应用包括游戏应用,且其中,调整所述智能设备的操作是基于游戏数据、或用户与所述游戏应用的交互、或其组合。
示例16包括示例12到15中的任何一个的非暂态计算机可读介质,包括或排除可选的特征。在这一示例中,所述应用包括视频播放器,且其中,调整所述智能设备的操作是响应于用户开启所述视频播放器以播放视频、或基于辅助数据文件、或其组合。
示例17定制计算设备的环境的是方法。所述方法包括指令,所述指令:指引所述处理器执行媒体应用;耦合到智能设备;经由具有所述智能设备已知的语言的应用程序接口(API)与所述智能设备通信;由传递抽象模块在传输堆栈中内部地路由数据以递送给所述智能设备;以及调整与所述媒体应用相关的所述智能设备的操作以定制所述计算设备的环境。
示例18包括示例17的方法,包括或排除可选的特征。在这一示例中,所述智能设备包括物联网(IoT)设备,且其中,所述API包括IoT API。
示例19包括示例17到18中的任何一个的方法,包括或排除可选的特征。在这一示例中,所述智能设备包括多个智能设备,包括智能灯和智能温控器,且其中,调整操作包括:调整所述智能灯的操作以调整房间亮度;以及调整所述智能温控器的操作以调整房间温度。
示例20包括示例17到19中的任何一个的方法,包括或排除可选的特征。在这一示例中,所述媒体应用包括游戏应用,且其中,调整所述智能设备的操作与用户同所述游戏应用的交互相关。
示例21包括示例17到20中的任何一个的方法,包括或排除可选的特征。在这一示例中,所述媒体应用包括游戏应用,且其中,调整所述智能设备的操作与包括游戏场景的游戏数据相关。
示例22包括示例17到21中的任何一个的方法,包括或排除可选的特征。在这一示例中,所述媒体应用包括视频播放器,且其中,调整所述智能设备的操作是响应于用户开启所述视频播放器以播放电影。
示例23包括示例17到22中的任何一个的方法,包括或排除可选的特征。在这一示例中,所述方法包括所述计算设备接收辅助数据文件,其中,所述媒体应用包括视频播放器,且其中,调整所述智能设备的操作是根据所述辅助数据文件。
示例24是用于定制环境的系统。所述系统包括指令,这些指令把所述处理器指引给智能设备;一种计算设备,包括:处理器;以及存储器,其存储应用和指令,所述应用和指令可由所述处理器执行,以:由传递抽象模块在传输堆栈中内部地路由数据以递送给所述智能设备;经由所述计算设备的应用程序接口(API)且经由所述无线连接将所述数据递送给所述智能设备,其中,所述API包括所述智能设备已知的语言;以及经由递送给所述智能设备的所述数据调整所述智能设备的操作,以便针对用户体验定制围绕所述计算设备的环境。
示例25包括示例24的系统,包括或排除可选的特征。在这一示例中,所述计算设备执行媒体应用;所述计算设备建立与所述智能设备的连接;所述智能设备包括物联网(IoT)设备;所述API包括IoT API;以及所述媒体应用包括游戏或视频播放器,其中,调整所述智能设备的操作与用户同所述媒体应用的交互相关。
示例26是用于定制计算设备的环境的系统,所述计算设备执行媒体应用。所述系统包括用于将所述计算设备耦合到智能设备的装置,所述计算设备执行媒体应用;用于所述计算设备与所述智能设备通信的装置;用于所述计算设备内部地路由数据以递送给所述智能设备的装置;以及用于调整与所述媒体应用相关的所述智能设备的操作以定制所述计算设备的环境的装置。
示例27包括示例26的所述系统,包括或排除可选的特征。在这一示例中,所述智能设备包括物联网(IoT)设备。
示例28包括示例26到27中的任何一个的系统,包括或排除可选的特征。在这一示例中,所述智能设备包括多个智能设备,包括智能灯和智能温控器,且其中,所述用于调整操作的装置包括:用于调整所述智能灯的操作以调整房间亮度的装置;以及用于调整所述智能温控器的操作以调整房间温度的装置。
示例29包括示例26到28中的任何一个的系统,包括或排除可选的特征。在这一示例中,所述媒体应用包括游戏应用,且其中,所述用于调整操作的装置调整与用户同所述游戏应用的交互相关的所述智能设备的操作。
示例30包括示例26到29中的任何一个的系统,包括或排除可选的特征。在这一示例中,所述媒体应用包括游戏应用,且其中,所述用于调整操作的装置调整与包括游戏场景的游戏数据相关的所述智能设备的操作。
示例31包括示例26到30中的任何一个的系统,包括或排除可选的特征。在这一示例中,所述媒体应用包括视频播放器,且其中,响应于用户开启所述视频播放器以播放电影,所述用于调整操作的装置调整所述智能设备的操作。
示例32包括示例26到31中的任何一个的系统,包括或排除可选的特征。在这一示例中,所述系统包括用于接收辅助数据文件的装置,且其中,所述用于调整操作的装置根据所述辅助数据文件调整所述智能设备的操作。
示例33包括示例26到32中的任何一个的系统,包括或排除可选的特征。在这一示例中,所述系统包括用于接收辅助数据文件的装置,其中,所述媒体应用包括视频播放器,且其中,所述用于调整操作的装置根据所述辅助数据文件调整所述智能设备的操作。
示例34是执行媒体应用的计算设备。所述计算设备包括将所述处理器指引给处理器的指令;以及存储器,其存储应用和指令,所述应用和指令可由所述处理器执行,以:由传递抽象模块在传输堆栈中内部地路由数据以递送给所述智能设备;经由所述计算设备的应用程序接口(API)将所述数据递送给所述智能设备,其中,所述API包括为所述智能设备所知的语言;以及经由递送给所述智能设备的所述数据调整所述智能设备的操作,以针对用户体验定制围绕与所述计算设备相关的所述媒体应用的环境。
示例35包括示例34的所述计算设备,包括或排除可选的特征。在这一示例中,所述智能设备包括物联网(IoT)设备。
示例36包括示例中的任何一个的计算设备34到35,包括或排除可选的特征。在这一示例中,所述API包括IoT API。
示例37包括示例34到36中的任何一个的计算设备,包括或排除可选的特征。在这一示例中,所述媒体应用包括游戏或视频播放器,其中,调整所述智能设备的操作与用户同所述媒体应用的交互相关。
示例38是定制计算设备的环境的方法。所述方法包括指令,所述指令将所述处理器指引给执行媒体应用的计算设备;所述计算设备耦合到智能设备;所述计算设备经由具有为所述智能设备所知的语言的应用程序接口(API)与所述智能设备通信;所述计算设备由传递抽象模块在传输堆栈中内部地路由数据以递送给所述智能设备;以及所述计算设备将所述数据递送给所述智能设备以调整用于所述媒体应用相关的所述智能设备的操作,以定制所述计算设备的环境。
示例39包括示例38的方法,包括或排除可选的特征。在这一示例中,所述智能设备包括物联网(IoT)设备,且其中,所述API包括IoT API。
示例40包括示例38到39中的任何一个的方法,包括或排除可选的特征。在这一示例中,所述媒体应用包括游戏或视频播放器,或其组合。
示例41包括示例38到40中的任何一个的方法,包括或排除可选的特征。在这一示例中,调整所述智能设备的操作与用户同所述媒体应用的交互相关。
示例42包括示例38到41中的任何一个的方法,包括或排除可选的特征。在这一示例中,调整所述智能设备的操作与用于所述媒体应用的辅助数据相关。
示例43包括示例38到42中的任何一个的方法,包括或排除可选的特征。在这一示例中,所述智能设备包括多个智能设备。可选地,所述多个智能设备包括智能灯和智能温控器,且其中,调整操作包括:调整所述智能灯的操作以调整房间亮度;以及调整所述智能温控器的操作以调整房间温度。
示例44包括示例38到43中的任何一个的方法,包括或排除可选的特征。在这一示例中,所述媒体应用包括游戏应用,且其中,调整所述智能设备的操作与包括游戏场景的游戏数据相关。
示例45包括示例38到44中的任何一个的方法,包括或排除可选的特征。在这一示例中,所述媒体应用包括视频播放器,且其中,调整所述智能设备的操作是响应于用户开启所述视频播放器以播放电影。
示例46包括示例38到45中的任何一个的方法,包括或排除可选的特征。在这一示例中,所述方法包括所述计算设备接收辅助数据文件,其中,所述媒体应用包括视频播放器,且其中,调整所述智能设备的操作是根据所述辅助数据文件而进行的。
示例47是包括指令的非暂态计算机可读介质,所述指令指引计算设备的所述处理器,以:经由应用程序接口(API)与耦合到所述计算设备智能设备通信,所述API具有为所述智能设备所知的语言;经由传递抽象模块在传输堆栈中内部地路由所述计算设备中的数据以供递送给所述智能设备;以及调整所述智能设备的操作以定制物理环境,其中,调整操作与在所述计算设备上运行的媒体应用相关。
示例48包括示例47的所述非暂态计算机可读介质。在这一示例中,所述智能设备包括物联网(IoT)设备,且其中,所述API包括IoT API。
示例49包括示例47到48中的任何一个的非暂态计算机可读介质。在这一示例中,所述智能设备包括多个智能设备,包括智能灯和智能温控器,且其中,调整操作包括:调整所述智能灯以调整房间亮度;以及调整所述智能温控器以调整房间温度。
示例50包括示例47到49中的任何一个的非暂态计算机可读介质。在这一示例中,所述媒体应用包括游戏应用,且其中,调整所述智能设备的操作是基于游戏数据、或用户与所述游戏应用的交互、或其组合。
示例51包括示例47到50中的任何一个的非暂态计算机可读介质。在这一示例中,所述媒体应用包括视频播放器,且其中,调整所述智能设备的操作是响应于用户开启所述视频播放器以播放视频、或基于辅助数据文件、或其组合。
示例52是包括指令的非暂态计算机可读介质,所述指令指引计算设备的所述处理器:经由应用程序接口(API)与耦合到所述计算设备的智能设备交互,所述 API具有所述智能设备已知的语言;经由传递抽象模块在传输堆栈中内部地路由所述计算设备中的数据以递送给所述智能设备;将所述数据从所述计算设备递送给所述智能设备;以及经由递送给所述智能设备的所述数据调整所述智能设备的操作,以针对用户体验定制所述计算设备的环境。
示例53包括示例52的所述非暂态计算机可读介质。在这一示例中,调整操作与在所述计算设备上执行的媒体应用相关。
应理解,前述示例中的特有性可以在在一个或多个实施方式中用于任何地方。举例来说,也可以针对本文中描述的方法或计算机可读介质实现以上所描述的计算设备的所有可选的特征。此外,尽管本文中已经使用流程图和/或状态图来描述各实施方式,但本技术不限于本文中的那些图或相应描述。例如,流程不必通过每一所阐释的框或状态,也不必按照正如本文中阐释和描述的相同次序。
本技术不限于本文中列出的具体的细节被列出本文中。事实上,受益于本公开内容的本领域中的技术人员将明白,可以在本技术的范围内实现源于前述描述和附图的许多其他变型。因此,包括其任何修改的下列权利要求界定本技术的范围。
Claims (27)
1.一种计算设备,包括:
处理器;以及
存储器,其存储应用和指令,所述应用和指令由所述处理器执行,以调整放置在所述计算设备的用户的环境中的智能设备的操作,以便针对用户体验实时地定制所述计算设备的所述用户的所述环境,所述调整至少部分地基于由所述用户消费的涉及在所述计算设备上执行的所述应用的内容,所述调整在所述用户消费所述内容时被确定,所述指令包括:
应用程序接口API,其具有为所述智能设备所知的语言;以及
传输抽象模块,在由所述处理器执行时,所述传输抽象模块在传输堆栈中内部地路由数据并促进将所述数据递送给所述智能设备。
2.如权利要求1所述的计算设备,包括网络适配器,其将所述计算设备与所述智能设备耦合起来,且其中,所述智能设备包括多个智能设备。
3.如权利要求1或2所述的计算设备,其特征在于,所述智能设备包括物联网IoT设备,且其中,所述应用程序接口API 包括IoT API。
4.如权利要求1所述的计算设备,其特征在于,所述智能设备包括多个智能设备,包括智能灯和智能温控器,且其中,调整操作包括:
调整所述智能灯以调整房间亮度;以及
调整所述智能温控器以调整房间温度。
5.如权利要求1或2所述的计算设备,其特征在于,所述应用包括游戏应用,且其中,调整所述智能设备的操作是基于用户与所述游戏应用的交互。
6.如权利要求1或2所述的计算设备,其特征在于,所述应用包括游戏应用,且其中,调整所述智能设备的操作是基于包括游戏场景的游戏数据。
7.如权利要求1或2所述的计算设备,其特征在于,所述应用包括视频播放器,且其中,调整所述智能设备的操作是响应于用户开启所述视频播放器以播放视频。
8.如权利要求1或2所述的计算设备,其特征在于,所述应用包括视频播放器,且其中,调整所述智能设备的操作是基于辅助数据文件。
9.如权利要求1或2所述的计算设备,其特征在于,所述应用包括媒体应用,且其中,在由所述处理器执行时, 所述应用程序接口API 促进所述计算设备与本地和云网络中的设备的通信,所述设备包括所述智能设备。
10.如权利要求1或2所述的计算设备,其特征在于,所述传输抽象模块隐藏促进将所述数据从所述计算设备递送给所述智能设备的机制。
11.如权利要求1或2所述的计算设备,其特征在于,所述传输堆栈涉及蓝牙、Wi-Fi接入点连接、Wi-Fi直连、近场通信NFC、或以太网有线连接、或其任何组合。
12.一种计算设备,包括:
处理器;以及
存储器,其存储指令,所述指令由所述处理器执行以调整放置在所述计算设备的用户的环境中的智能设备的操作,以经由所述智能设备实时地定制所述计算设备的所述用户的所述环境,所述计算设备运行应用,所述调整至少部分地基于由用户消费的涉及所述应用的内容,所述调整在所述用户消费所述内容时被确定,所述指令由所述处理器执行,以:
经由应用程序接口API与所述智能设备通信,所述智能设备耦合到所述计算设备,且所述应用程序接口API 具有为所述智能设备所知的语言;以及
经由传递抽象模块在传输堆栈中内部地路由所述计算设备中的数据,以递送给所述智能设备。
13.如权利要求12所述的计算设备,其特征在于,所述智能设备包括物联网IoT设备,且其中, 所述应用程序接口API 包括IoT API。
14.如权利要求12或13所述的计算设备,其特征在于,所述智能设备包括多个智能设备,包括智能灯和智能温控器,且其中,调整操作包括:
调整所述智能灯以调整房间亮度;以及
调整所述智能温控器以调整房间温度。
15.如权利要求12或13所述的计算设备,其特征在于,所述应用包括游戏应用,且其中,调整所述智能设备的操作是基于游戏数据、或用户与所述游戏应用的交互、或其组合。
16.如权利要求12或13所述的计算设备,其特征在于,所述应用包括视频播放器,且其中,调整所述智能设备的操作是响应于用户开启所述视频播放器以播放视频、或基于辅助数据文件、或其组合。
17.一种定制计算设备的环境的方法,所述方法包括所述计算设备:
执行媒体应用;
经由具有为放置在所述计算设备的用户的环境中的智能设备所知的语言的应用程序接口API与所述智能设备通信;
由传递抽象模块在传输堆栈中内部地路由数据以递送给所述智能设备;以及
调整所述智能设备的操作以实时地定制所述计算设备的所述用户的所述环境,所述调整至少部分地基于由用户消费的涉及在所述计算设备上执行的所述媒体应用的内容,所述调整在所述用户消费所述内容时被确定。
18.如权利要求17所述的方法,其特征在于,所述智能设备包括物联网IoT设备,且其中, 所述应用程序接口API 包括IoT API。
19.如权利要求17或18所述的方法,其特征在于,所述智能设备包括多个智能设备,包括智能灯和智能温控器,且其中,调整操作包括:
调整所述智能灯的操作以调整房间亮度;以及
调整所述智能温控器的操作以调整房间温度。
20.如权利要求17或18所述的方法,其特征在于,所述媒体应用包括游戏应用,且其中,调整所述智能设备的操作与用户同所述游戏应用的交互相关。
21.如权利要求17或18所述的方法,其特征在于,所述媒体应用包括游戏应用,且其中,调整所述智能设备的操作与包括游戏场景的游戏数据相关。
22.如权利要求17或18所述的方法,其特征在于,所述媒体应用包括视频播放器,且其中,调整所述智能设备的操作是响应于用户开启所述视频播放器以播放电影。
23.如权利要求17或18所述的方法,包括所述计算设备接收辅助数据文件,其中,所述媒体应用包括视频播放器,且其中,调整所述智能设备的操作是根据所述辅助数据文件。
24.一种用于定制环境的系统,所述系统包括:
放置在用户的环境中的智能设备;
计算设备,包括:
处理器;以及
存储器,其存储应用和指令,所述应用和指令由所述处理器执行,以:
由传递抽象模块在传输堆栈中内部地路由数据以递送给所述智能设备;
经由所述计算设备的应用程序接口API且经由无线连接将所述数据递送给所述智能设备,其中, 所述应用程序接口API 包括为所述智能设备所知的语言;以及
经由递送给所述智能设备的所述数据调整所述智能设备的操作,以便针对用户体验实时地定制所述用户的所述环境,所述调整至少部分地基于由所述用户消费的涉及在所述计算设备上执行的所述应用的内容,
所述调整在所述用户消费所述内容时被确定。
25.如权利要求24所述的系统,其特征在于:
所述计算设备执行媒体应用;
所述计算设备建立与所述智能设备的连接;
所述智能设备包括物联网IoT设备;
所述应用程序接口API 包括IoT API;以及
所述媒体应用包括游戏或视频播放器,其中,调整所述智能设备的操作与用户同所述媒体应用的交互相关。
26.一种或多种其上存储有指令的计算机可读介质,所述指令当由计算机处理器执行时使所述处理器执行如权利要求17至23中任一项所述的方法。
27.一种设备,包括用于执行如权利要求17至23中任一项所述的方法的装置。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/865,588 US10739737B2 (en) | 2015-09-25 | 2015-09-25 | Environment customization |
US14/865,588 | 2015-09-25 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106557038A CN106557038A (zh) | 2017-04-05 |
CN106557038B true CN106557038B (zh) | 2021-10-29 |
Family
ID=58407138
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610727453.3A Active CN106557038B (zh) | 2015-09-25 | 2016-08-25 | 一种用于定制环境的计算设备、方法及系统 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10739737B2 (zh) |
KR (2) | KR20170037508A (zh) |
CN (1) | CN106557038B (zh) |
Families Citing this family (71)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9411327B2 (en) | 2012-08-27 | 2016-08-09 | Johnson Controls Technology Company | Systems and methods for classifying data in building automation systems |
US10534326B2 (en) | 2015-10-21 | 2020-01-14 | Johnson Controls Technology Company | Building automation system with integrated building information model |
US11268732B2 (en) | 2016-01-22 | 2022-03-08 | Johnson Controls Technology Company | Building energy management system with energy analytics |
US11947785B2 (en) | 2016-01-22 | 2024-04-02 | Johnson Controls Technology Company | Building system with a building graph |
US11768004B2 (en) | 2016-03-31 | 2023-09-26 | Johnson Controls Tyco IP Holdings LLP | HVAC device registration in a distributed building management system |
US11774920B2 (en) | 2016-05-04 | 2023-10-03 | Johnson Controls Technology Company | Building system with user presentation composition based on building context |
US10505756B2 (en) | 2017-02-10 | 2019-12-10 | Johnson Controls Technology Company | Building management system with space graphs |
US10417451B2 (en) | 2017-09-27 | 2019-09-17 | Johnson Controls Technology Company | Building system with smart entity personal identifying information (PII) masking |
US10684033B2 (en) | 2017-01-06 | 2020-06-16 | Johnson Controls Technology Company | HVAC system with automated device pairing |
US11900287B2 (en) | 2017-05-25 | 2024-02-13 | Johnson Controls Tyco IP Holdings LLP | Model predictive maintenance system with budgetary constraints |
US11764991B2 (en) | 2017-02-10 | 2023-09-19 | Johnson Controls Technology Company | Building management system with identity management |
US10095756B2 (en) | 2017-02-10 | 2018-10-09 | Johnson Controls Technology Company | Building management system with declarative views of timeseries data |
US10452043B2 (en) | 2017-02-10 | 2019-10-22 | Johnson Controls Technology Company | Building management system with nested stream generation |
US20190095518A1 (en) | 2017-09-27 | 2019-03-28 | Johnson Controls Technology Company | Web services for smart entity creation and maintenance using time series data |
US11994833B2 (en) | 2017-02-10 | 2024-05-28 | Johnson Controls Technology Company | Building smart entity system with agent based data ingestion and entity creation using time series data |
US10515098B2 (en) | 2017-02-10 | 2019-12-24 | Johnson Controls Technology Company | Building management smart entity creation and maintenance using time series data |
US10854194B2 (en) | 2017-02-10 | 2020-12-01 | Johnson Controls Technology Company | Building system with digital twin based data ingestion and processing |
US11307538B2 (en) | 2017-02-10 | 2022-04-19 | Johnson Controls Technology Company | Web services platform with cloud-eased feedback control |
US11360447B2 (en) | 2017-02-10 | 2022-06-14 | Johnson Controls Technology Company | Building smart entity system with agent based communication and control |
US11042144B2 (en) | 2017-03-24 | 2021-06-22 | Johnson Controls Technology Company | Building management system with dynamic channel communication |
US11327737B2 (en) | 2017-04-21 | 2022-05-10 | Johnson Controls Tyco IP Holdings LLP | Building management system with cloud management of gateway configurations |
US10788229B2 (en) | 2017-05-10 | 2020-09-29 | Johnson Controls Technology Company | Building management system with a distributed blockchain database |
US11022947B2 (en) | 2017-06-07 | 2021-06-01 | Johnson Controls Technology Company | Building energy optimization system with economic load demand response (ELDR) optimization and ELDR user interfaces |
WO2018232147A1 (en) | 2017-06-15 | 2018-12-20 | Johnson Controls Technology Company | Building management system with artificial intelligence for unified agent based control of building subsystems |
WO2019018304A1 (en) | 2017-07-17 | 2019-01-24 | Johnson Controls Technology Company | SYSTEMS AND METHODS FOR BUILDING SIMULATION ON THE BASIS OF AN AGENT FOR OPTIMAL CONTROL |
EP3655824A1 (en) | 2017-07-21 | 2020-05-27 | Johnson Controls Technology Company | Building management system with dynamic work order generation with adaptive diagnostic task details |
EP3435680B1 (en) | 2017-07-27 | 2019-09-04 | Vestel Elektronik Sanayi ve Ticaret A.S. | Technique for selecting a path of a multipath audio and/or video stream |
US10619882B2 (en) | 2017-07-27 | 2020-04-14 | Johnson Controls Technology Company | Building management system with scorecard for building energy and equipment performance |
EP3448046A1 (en) * | 2017-08-23 | 2019-02-27 | Vestel Elektronik Sanayi ve Ticaret A.S. | Method for controlling of external devices in dependency of video and/or audio content |
EP3457703A1 (en) | 2017-09-13 | 2019-03-20 | Vestel Elektronik Sanayi ve Ticaret A.S. | Smart player |
US10962945B2 (en) | 2017-09-27 | 2021-03-30 | Johnson Controls Technology Company | Building management system with integration of data into smart entities |
US11258683B2 (en) | 2017-09-27 | 2022-02-22 | Johnson Controls Tyco IP Holdings LLP | Web services platform with nested stream generation |
US11195401B2 (en) | 2017-09-27 | 2021-12-07 | Johnson Controls Tyco IP Holdings LLP | Building risk analysis system with natural language processing for threat ingestion |
WO2019067630A1 (en) * | 2017-09-27 | 2019-04-04 | Johnson Controls Technology Company | WEB SERVICE PLATFORM WITH INTELLIGENT ENTITIES, TIMELINES, AND INFLATED STREAM GENERATION |
DE112018004336T5 (de) * | 2017-09-27 | 2020-05-14 | Johnson Controls Technology Company | Gebäudeverwaltungssystem mit intelligenten Entitäten, Zeitreihen, Erzeugung eines verschachtelten Streams, Cloud-Steuerung und ID-Verwaltung und Sicherstellungsdienste |
US11314788B2 (en) | 2017-09-27 | 2022-04-26 | Johnson Controls Tyco IP Holdings LLP | Smart entity management for building management systems |
US10600263B2 (en) | 2017-09-27 | 2020-03-24 | Johnson Controls Technology Company | Building management system with identity management and assurance services |
US10809682B2 (en) | 2017-11-15 | 2020-10-20 | Johnson Controls Technology Company | Building management system with optimized processing of building system data |
US11281169B2 (en) | 2017-11-15 | 2022-03-22 | Johnson Controls Tyco IP Holdings LLP | Building management system with point virtualization for online meters |
US11127235B2 (en) | 2017-11-22 | 2021-09-21 | Johnson Controls Tyco IP Holdings LLP | Building campus with integrated smart environment |
US11954713B2 (en) | 2018-03-13 | 2024-04-09 | Johnson Controls Tyco IP Holdings LLP | Variable refrigerant flow system with electricity consumption apportionment |
CN110434847A (zh) * | 2018-05-02 | 2019-11-12 | 深圳市优必选科技有限公司 | 一种降低机器人系统总线通信数据量的方法及机器人 |
US10855755B2 (en) * | 2018-05-04 | 2020-12-01 | Citrix Systems, Inc. | WebRTC API redirection with fallbacks |
US11016648B2 (en) | 2018-10-30 | 2021-05-25 | Johnson Controls Technology Company | Systems and methods for entity visualization and management with an entity node editor |
US11927925B2 (en) | 2018-11-19 | 2024-03-12 | Johnson Controls Tyco IP Holdings LLP | Building system with a time correlated reliability data stream |
US11436567B2 (en) | 2019-01-18 | 2022-09-06 | Johnson Controls Tyco IP Holdings LLP | Conference room management system |
US10788798B2 (en) | 2019-01-28 | 2020-09-29 | Johnson Controls Technology Company | Building management system with hybrid edge-cloud processing |
US10587782B1 (en) | 2019-04-30 | 2020-03-10 | International Business Machines Corporation | Intelligently creating an immersive environment for media playback by synchronizing devices |
US11089109B1 (en) * | 2019-11-20 | 2021-08-10 | Sprint Communications Company L.P. | Smart device management via a mobile communication device based on privacy preferences |
US11769066B2 (en) | 2021-11-17 | 2023-09-26 | Johnson Controls Tyco IP Holdings LLP | Building data platform with digital twin triggers and actions |
US11894944B2 (en) | 2019-12-31 | 2024-02-06 | Johnson Controls Tyco IP Holdings LLP | Building data platform with an enrichment loop |
CN115210700A (zh) | 2019-12-31 | 2022-10-18 | 江森自控泰科知识产权控股有限责任合伙公司 | 建筑物数据平台 |
US12021650B2 (en) | 2019-12-31 | 2024-06-25 | Tyco Fire & Security Gmbh | Building data platform with event subscriptions |
US20210200174A1 (en) | 2019-12-31 | 2021-07-01 | Johnson Controls Technology Company | Building information model management system with hierarchy generation |
US12100280B2 (en) | 2020-02-04 | 2024-09-24 | Tyco Fire & Security Gmbh | Systems and methods for software defined fire detection and risk assessment |
US11537386B2 (en) | 2020-04-06 | 2022-12-27 | Johnson Controls Tyco IP Holdings LLP | Building system with dynamic configuration of network resources for 5G networks |
US11874809B2 (en) | 2020-06-08 | 2024-01-16 | Johnson Controls Tyco IP Holdings LLP | Building system with naming schema encoding entity type and entity relationships |
KR102336565B1 (ko) * | 2020-07-14 | 2021-12-07 | (주)에스엘미디어 | 휴먼인터페이스(hid) 신호를 이용한 프로그램 및 주변 장치 제어방법 |
US11397773B2 (en) | 2020-09-30 | 2022-07-26 | Johnson Controls Tyco IP Holdings LLP | Building management system with semantic model integration |
US11954154B2 (en) | 2020-09-30 | 2024-04-09 | Johnson Controls Tyco IP Holdings LLP | Building management system with semantic model integration |
US12058212B2 (en) | 2020-10-30 | 2024-08-06 | Tyco Fire & Security Gmbh | Building management system with auto-configuration using existing points |
US12061453B2 (en) | 2020-12-18 | 2024-08-13 | Tyco Fire & Security Gmbh | Building management system performance index |
CN117280291A (zh) | 2021-03-17 | 2023-12-22 | 江森自控泰科知识产权控股有限责任合伙公司 | 用于确定设备能量浪费的系统和方法 |
US11899723B2 (en) | 2021-06-22 | 2024-02-13 | Johnson Controls Tyco IP Holdings LLP | Building data platform with context based twin function processing |
US11796974B2 (en) | 2021-11-16 | 2023-10-24 | Johnson Controls Tyco IP Holdings LLP | Building data platform with schema extensibility for properties and tags of a digital twin |
US11934966B2 (en) | 2021-11-17 | 2024-03-19 | Johnson Controls Tyco IP Holdings LLP | Building data platform with digital twin inferences |
US11704311B2 (en) | 2021-11-24 | 2023-07-18 | Johnson Controls Tyco IP Holdings LLP | Building data platform with a distributed digital twin |
US11714930B2 (en) | 2021-11-29 | 2023-08-01 | Johnson Controls Tyco IP Holdings LLP | Building data platform with digital twin based inferences and predictions for a graphical building model |
US12013673B2 (en) | 2021-11-29 | 2024-06-18 | Tyco Fire & Security Gmbh | Building control system using reinforcement learning |
US12061633B2 (en) | 2022-09-08 | 2024-08-13 | Tyco Fire & Security Gmbh | Building system that maps points into a graph schema |
US12013823B2 (en) | 2022-09-08 | 2024-06-18 | Tyco Fire & Security Gmbh | Gateway system that maps points into a graph schema |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101442861A (zh) * | 2008-12-19 | 2009-05-27 | 上海广茂达灯光景观工程有限公司 | Led灯光场景控制系统及其控制方法 |
CN102598554A (zh) * | 2008-07-14 | 2012-07-18 | 韩国电子通信研究院 | 对感觉装置使用元数据的多媒体应用系统和方法 |
CN103974855A (zh) * | 2011-11-22 | 2014-08-06 | 邦及奥卢夫森公司 | 包括用于光源、舒适和多媒体设备的控制系统的车辆、船舶或飞机 |
CN104811868A (zh) * | 2015-05-05 | 2015-07-29 | 吴为生 | 计算机游戏外设系统 |
CN104885476A (zh) * | 2012-12-21 | 2015-09-02 | 三星电子株式会社 | 用于再现内容的方法和终端 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7480619B1 (en) * | 2003-03-04 | 2009-01-20 | The Board Of Trustees Of The Leland Stanford Junior University | Integration manager and natural interaction processor |
JP2006172184A (ja) | 2004-12-16 | 2006-06-29 | Kobe Steel Ltd | 稼動情報管理装置 |
CN101311895A (zh) | 2007-05-23 | 2008-11-26 | 上海申瑞电力科技股份有限公司 | 用于电力调度自动化系统的进程内组件实现方法 |
CN102193548A (zh) | 2011-04-09 | 2011-09-21 | 太原罗克佳华工业有限公司 | 污染物排放及净化设施实时监测系统 |
US9510126B2 (en) * | 2012-01-11 | 2016-11-29 | Sony Corporation | Sound field control device, sound field control method, program, sound control system and server |
US9131266B2 (en) | 2012-08-10 | 2015-09-08 | Qualcomm Incorporated | Ad-hoc media presentation based upon dynamic discovery of media output devices that are proximate to one or more users |
US10338684B2 (en) | 2014-03-26 | 2019-07-02 | Intel Corporation | Mechanism to enhance user experience of mobile devices through complex inputs from external displays |
JP6720170B2 (ja) * | 2014-11-11 | 2020-07-08 | ウェビー・コーポレーション | スマートスペースのためのシステム及び方法 |
-
2015
- 2015-09-25 US US14/865,588 patent/US10739737B2/en active Active
-
2016
- 2016-08-24 KR KR1020160107547A patent/KR20170037508A/ko active Search and Examination
- 2016-08-25 CN CN201610727453.3A patent/CN106557038B/zh active Active
-
2019
- 2019-01-28 KR KR1020190010465A patent/KR102447252B1/ko active IP Right Grant
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102598554A (zh) * | 2008-07-14 | 2012-07-18 | 韩国电子通信研究院 | 对感觉装置使用元数据的多媒体应用系统和方法 |
CN101442861A (zh) * | 2008-12-19 | 2009-05-27 | 上海广茂达灯光景观工程有限公司 | Led灯光场景控制系统及其控制方法 |
CN103974855A (zh) * | 2011-11-22 | 2014-08-06 | 邦及奥卢夫森公司 | 包括用于光源、舒适和多媒体设备的控制系统的车辆、船舶或飞机 |
CN104885476A (zh) * | 2012-12-21 | 2015-09-02 | 三星电子株式会社 | 用于再现内容的方法和终端 |
CN104811868A (zh) * | 2015-05-05 | 2015-07-29 | 吴为生 | 计算机游戏外设系统 |
Also Published As
Publication number | Publication date |
---|---|
KR20170037508A (ko) | 2017-04-04 |
CN106557038A (zh) | 2017-04-05 |
US20170090437A1 (en) | 2017-03-30 |
KR102447252B1 (ko) | 2022-09-23 |
KR20190069348A (ko) | 2019-06-19 |
US10739737B2 (en) | 2020-08-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106557038B (zh) | 一种用于定制环境的计算设备、方法及系统 | |
US10321182B2 (en) | System and method for real-time transfer and presentation multiple internet of things (IoT) device information on an electronic device based on casting and slinging gesture command | |
EP3005649B1 (en) | Systems, methods, and media for presenting media content | |
US10469893B2 (en) | Integrated cast and sling system and method of its operation in an interoperable multiple display device environment | |
US20180115612A1 (en) | Universal internet of things (iot) smart translator | |
WO2017193612A1 (zh) | 使用移动终端对电器设备进行操控的设备、系统和方法 | |
CN113170301B (zh) | 临时将光设备添加到娱乐组 | |
US10967260B2 (en) | Method for improving game streaming performance in the cloud | |
US8683532B2 (en) | Space-shifting media streaming system | |
US11665400B2 (en) | Media device upgrading system over a wireless network | |
US11838589B2 (en) | Port-connected television upgrader device | |
WO2021160552A1 (en) | Associating another control action with a physical control if an entertainment mode is active | |
US11190842B2 (en) | USB-based media device upgrading system | |
JP6562422B2 (ja) | 照明ユニット群を制御するシステム及び方法 | |
US9875694B2 (en) | Smoothing brightness transition during channel change | |
EP4179849A1 (en) | Allocating control of a lighting device in an entertainment mode | |
US20210129031A1 (en) | Adaptive time dilation based on player performance | |
KR102709820B1 (ko) | 리모콘으로 동작하는 구분된 컴퓨터 시스템을 통해 컴퓨터 시스템에서 실행되는 호스트 어플리케이션을 제어하는 방법 및 시스템 | |
EP4260663B1 (en) | Determining light effects in dependence on whether an overlay is likely displayed on top of video content | |
EP4282227A1 (en) | Selecting a set of lighting devices based on an identifier of an audio and/or video signal source | |
TW202312706A (zh) | 智慧設備的擴展現實控制 | |
KR20230040836A (ko) | 화면들 및 화면들에 대응하는 오디오 신호들을 공유하기 위한 전자 장치 및 그 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |