BRPI1011140B1 - método e aparelho para controlar um ou mais dispositivos dentro de um recinto físico de uma estrutura. - Google Patents

método e aparelho para controlar um ou mais dispositivos dentro de um recinto físico de uma estrutura. Download PDF

Info

Publication number
BRPI1011140B1
BRPI1011140B1 BRPI1011140A BRPI1011140A BRPI1011140B1 BR PI1011140 B1 BRPI1011140 B1 BR PI1011140B1 BR PI1011140 A BRPI1011140 A BR PI1011140A BR PI1011140 A BRPI1011140 A BR PI1011140A BR PI1011140 B1 BRPI1011140 B1 BR PI1011140B1
Authority
BR
Brazil
Prior art keywords
photo
realistic
devices
room
virtual
Prior art date
Application number
BRPI1011140A
Other languages
English (en)
Inventor
J Cipollo Nicholas
P Madonna Robert
Original Assignee
Savant Systems Llc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Savant Systems Llc filed Critical Savant Systems Llc
Publication of BRPI1011140A2 publication Critical patent/BRPI1011140A2/pt
Publication of BRPI1011140B1 publication Critical patent/BRPI1011140B1/pt

Links

Classifications

    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10—Controlling the light source
    • H05B47/155—Coordinated control of two or more light sources
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/04—Programme control other than numerical control, i.e. in sequence controllers or logic controllers
    • G05B19/042—Programme control other than numerical control, i.e. in sequence controllers or logic controllers using digital processors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/20—Processor architectures; Processor configuration, e.g. pipelining
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05B—ELECTRIC HEATING; ELECTRIC LIGHT SOURCES NOT OTHERWISE PROVIDED FOR; CIRCUIT ARRANGEMENTS FOR ELECTRIC LIGHT SOURCES, IN GENERAL
    • H05B47/00—Circuit arrangements for operating light sources in general, i.e. where the type of light source is not relevant
    • H05B47/10—Controlling the light source
    • H05B47/175—Controlling the light source by remote control
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/28—Indexing scheme for image data processing or generation, in general involving image processing hardware

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Circuit Arrangement For Electric Light Sources In General (AREA)
  • Selective Calling Equipment (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

método e aparelho para controlar um ou mais dispositivos dentro de um recinto físico de uma estrutura em uma concretização, uma técnica para controlar um ou mais dispositivos dentro de um espaço físico de uma estrutura é provida. um ou mais dispositivos na estrutura são acoplados, tanto diretamente ou indiretamente, a um controlador de multimídia programável configurado para emitir comandos de controle que, quando implementados, mudam o estado dos dispositivos. uma interface de usuário baseada em espaço virtual é exibida em uma tela de exibição. a interface de usuário baseada em espaço virtual pode incluir um ou mais espaços virtuais, cada espaço virtual incluindouma representação substancialmente foto-realística de uma porção da estrutura, incluindo representações substancialmente foto-realísticas de um ou mais dispositivos localizadas dentro da porção da estrutura. em resposta à seleção de uma representação visual substancialmente foto-realística particular, o controlador de multimídia programável pode emitir comandos de controle que, quando implementados, mudam o estado de um dispositivo particular. a aparência do espaço virtual particular pode ser atualizada para refletir o estado mudado.

Description

“MÉTODO E APARELHO PARA CONTROLAR UM OU MAIS DISPOSITIVOS DENTRO DE UM RECINTO FÍSICO DE UMA ESTRUTURA”
FUNDAMENTO
Campo Técnico [001] A presente exposição relaciona-se geralmente à instalação de luz e controle de dispositivo e mais especificamente à instalação de luz baseada em aposento virtual e técnicas de controle de dispositivo.
Informação de Fundamento [002] Como casas e outras estruturas ficam maiores, e preenchidas com mais dispositivos elétricos e eletrônicos, o labor de controlar estes dispositivos elétricos e eletrônicos também aumentou. Uma área particular na qual este assunto manifestou é na área de controle de iluminação.
[003] Tradicionalmente, instalações de luz em uma casa ou outra estrutura foram largamente controladas através de interruptores de luz mecânicos montados em parede, incluindo comutadores mecânicos, interruptores de balanço, interruptores de botão, e similares. Tais interruptores mecânicos levaram a forma de interruptores de 2 vias, onde uma instalação de luz é controlada de um único local de interruptor, interruptores e 3 vias, onde uma instalação de luz é controlada de dois locais de interruptor, interruptores de 4 vias, onde uma instalação de luz é controlada de três locais de interruptor, etc. Em alguns casos, interruptores mecânicos foram melhorados por 'dimmers' mecânicos, que permitem a uma instalação de luz ser escurecida ou clareada, por exemplo, girando uma manopla que ajusta um resistor variável em série com a instalação de luz.
[004] Enquanto interruptores mecânicos e 'dimmers' provaram seguros e efetivos em custo, eles mostraram crescentemente suas limitações em casas grandes e outras estruturas. Um único aposento em uma casa grande ou outra estrutura pode incluir um número grande de instalações de luz
Petição 870190034140, de 10/04/2019, pág. 10/50 / 34 individuais. Por exemplo, um aposento grande pode incluir várias instalações de luz independentes, tais como luminárias, que proveem iluminação de tarefa; várias instalações de luz fixas, tais como recipientes rebaixados e/ou candelabros de parede, que proveem iluminação geral; como também várias instalações de luz de propósito especial, tais como projetores de realce que proveem iluminação em arte, características arquitetônicas ou outros elementos do aposento. Para controlar todas as instalações de luz em um aposento grande usando interruptores de luz mecânicos e 'dimmers' tradicionais, uma variedade de painéis de interruptor conjugados que foram empregados tradicionalmente. Figura 1 é uma representação de um painel de interruptor mecânico de 6 seções convencional 100, alojando seis interruptores mecânicos individuais 110, 120, 130, 140, 150, 160, cada um dos quais pode controlar uma ou instalações mais de luz. Um aposento grande com muitas instalações de luz pode requerer vários destes painéis, localizados em vários locais no aposento, por exemplo, próximas a entradas diferentes, para prover meio adequado para controle de todas as instalações de luz no aposento.
[005] Como deveria ser aparente, enquanto este tipo de esquema de controle é funcional em um aposento grande, tipicamente não é o favorável a usuário. Um usuário deve memorizar qual dos muitos interruptores mecânicos controla qual instalação ou instalações de luz individual. Um convidado novo no aposento, que não tem que memorizar esta relação, tipicamente tem deve tentar por tentativa e erro determinar qual interruptor mecânico controla qual instalação ou instalações, atuando cada interruptor até que aconteça o resultado que eles desejam. Isto pode conduzir depressa à frustração.
[006] Mais recentemente, uma variedade de tipos de sistemas de controle de iluminação eletrônicos foi desenvolvida que tentam melhorar sobre a experiência de controle de iluminação tradicional. Tais sistemas de
Petição 870190034140, de 10/04/2019, pág. 11/50 / 34 controle de iluminação eletrônicos incluem tipicamente um ou mais controladores de iluminação eletrônicos programáveis, que estão interconectados por fiação elétrica de controle a relés e/ou unidades de 'dimmer' instaladas em linha com cada instalação de luz individual. Os controladores de iluminação eletrônicos também podem estar conectados a vários painéis montados em parede, em cima de mesa, ou de controle portáteis, tanto por ligações por fios ou sem fios. Alguns sistemas de controle de iluminação eletrônicos suportam uma variedade de cenas de iluminação, tal que várias luzes possam ser ativadas, desativadas, e/ou escurecidas juntas, em resposta a uma única seção de controle, por exemplo, um único aperto de botão. Por exemplo, uma cena de iluminação particular em um aposento pode ativar certa iluminação de tarefa e iluminação fixa a alto brilho, apropriada para leitura, enquanto outra cena de iluminação no aposento pode ativar só certa iluminação de realce, a um nível muito baixo, criando uma colocação satisfatória para exibição de filme.
[007] Porém, muitos sistemas de controle de iluminação eletrônicos convencionais ainda empregam interfaces de usuário de botão central rememorativas dos interruptores mecânicos e 'dimmers' que eles substituem. Figura 2 descreve um painel de controle montado em parede convencional 200 para um sistema de controle de iluminação eletrônico convencional. O painel 200 inclui uma pluralidade de botões de empurrão físicos etiquetados com rótulos de texto. Botões de seleção de cena de iluminação 205, 210, 215, 220 habilitam a seleção de várias cenas de iluminação, enquanto controles de 'dimmer' 230 são providos para ajustar brilho. Ainda, o painel de controle 200 inclui botões 240 para selecionar instalações de luz em outros quartos da casa ou estrutura, como também botões de Tudo Ligado e Tudo desligado 250, 255 para controle global.
[008] Enquanto sistemas de controle de iluminação eletrônicos convencionais que empregam painéis de controle de botão central
Petição 870190034140, de 10/04/2019, pág. 12/50 / 34 convencionais 200 podem oferecer alguma melhoria sobre interruptores mecânicos e 'dimmers' conjugados tradicionais, a experiência de controle de iluminação ainda pode ser bastante desfavorável a usuário. Enquanto o número global de controles pode ser reduzido, alguém ainda deve determinar qual botão opera qual instalação de luz, ou grupo de instalações de luz, em um aposento grande. Tipicamente, só um nome secreto curto é provido na face de cada botão como um guia. Ainda, se um usuário desejar divergir das cenas providas, e ativar, desativar e/ou escurecer instalações de luz particulares, o usuário pode ter que navegar um arranjo confuso de controles de anulação e manuais. Assim, a experiência de usuário global ainda pode ser bastante frustrante.
[009] Além de painéis de controle de botão central convencionais que empregam botões físicos, alguns sistemas de controle de iluminação eletrônicos convencionais trabalham junto com unidades de controle de tela de toque que exibem interfaces de usuário baseadas em menu. Em lugar de manipular botões físicos, um usuário pode selecionar, por toque, representações de botões em uma tela de toque. Figura 3 descreve uma interface de usuário baseada em toque convencional 310 para um sistema de controle de iluminação eletrônico convencional em unidade de controle de tela de toque 300. Semelhante ao painel de controle de botão central 200 discutido acima, a interface de usuário 310 exibe uma pluralidade de botões 320, 330, 340, 350 para selecionar várias cenas de iluminação. Ainda, a interface de usuário 310 inclui controles de 'dimmer' 360 para ajustar brilho, como também controles através de menu 370 para acessar interfaces para outros quartos na casa ou estrutura. Como é aparente, enquanto o usuário não está mais atuando botões físicos, a experiência de usuário global provida por uma unidade de controle de tela de toque convencional 300 é frequentemente pouco mudada daquela provida por um painel de controle de botão central convencional 200. Em lugar de utilizar botões físicos, o usuário está
Petição 870190034140, de 10/04/2019, pág. 13/50 / 34 utilizando simplesmente botões digitais. O usuário ainda deve memorizar quais botões operam quais instalações de luz, ou grupos de instalações de luz, e ainda pode ter que recorrer à tentativa e erro para determinar exatamente o que cada botão faz. Assim, a experiência de usuário global pode ser tão frustrante quanto como com um painel de controle de botão central convencional 200.
[0010] Ainda, as limitações acima discutidas de sistemas de controle convencionais não estão limitadas ao campo de controle de iluminação. Uma variedade de outros tipos de dispositivos elétricos e eletrônicos está tipicamente presente em casas e outras estruturas, e tipicamente sofrem de falhas de controle semelhantes. Por exemplo, um aposento grande em uma casa ou outra estrutura pode incluir vários dispositivos operados por motor, tais como cortinas de janela automáticas ou ventiladores de teto, que um usuário pode desejar operar e ajustar seletivamente. Semelhantemente, um aposento grande em uma casa ou outra estrutura pode incluir vários componentes de áudio/vídeo (A/V) que um usuário pode desejar selecionar e controlar, como também outros dispositivos que um usuário pode desejar operar de uma maneira controlada. Ainda, um aposento de uma casa ou outra estrutura pode incluir vários dispositivos de aquecimento, ventilação, e ar condicionado e/ou administração de energia que o usuário pode desejar administrar. Como com instalações de luz, um usuário pode ser forçado a memorizar qual interruptor mecânico, botão físico, ou botão digital está associado com cada dispositivo e/ou cada função de um dispositivo, e pode ficar frustrado ao simplesmente ligar ou desligar um dispositivo, ou caso contrário mudar o estado de um dispositivo, se torna um empenho complicado.
[0011] Por conseguinte, há uma necessidade por técnicas melhoradas para controlar instalações de luz e outros dispositivos em uma casa ou outra estrutura.
Petição 870190034140, de 10/04/2019, pág. 14/50 / 34
SUMÁRIO [0012] As falhas da arte anterior são tratadas em parte por um controlador de multimídia programável que suporta uma moderna interface de usuário baseada em aposento virtual. Em uma concretização, a interface de usuário baseada em aposento virtual inclui uma pluralidade de ambientes de interface de aposento virtual (em seguida quartos virtuais). Cada aposento virtual corresponde a um aposento físico diferente (ou porção de um aposento físico) em uma casa ou outra estrutura. Em alguns casos, vários quartos virtuais podem corresponder a porções diferentes de um aposento físico, por exemplo, para cobrir o aposento físico inteiro. Cada aposento virtual pode incluir uma representação substancialmente foto-realística dos limites do aposento físico (ou porção do aposento físico), por exemplo, das paredes, teto, chão, etc., que definem o aposento; pode mostrar pelo menos uma porção de mobília presente no aposento físico (ou porção do aposento físico), por exemplo, sofás, cadeiras, camas, papel de parede, etc., que estão presentes no aposento físico; e podem mostrar dispositivos, por exemplo, instalações de luz, sob controle (diretamente ou indiretamente) do controlador de multimídia programável que estão presentes dentro do aposento físico (ou porção do aposento físico).
[0013] Representações substancialmente foto-realísticas de dispositivos sob controle são mostradas preferivelmente em locais dentro do aposento virtual correspondendo aos locais atuais do dispositivo dentro do aposento físico. Na concretização preferida, as representações substancialmente foto-realísticas do aposento e dos dispositivos são derivadas de um número limitado de imagens de pré-gravadas, por exemplo, um número limitado de fotografias digitais imóveis do aposento físico, capturadas de um local predeterminado e mostrando o aposento em estados diferentes. Porém, uma variedade de outras técnicas para criação das representações substancialmente foto-realísticas do aposento e dos dispositivos está
Petição 870190034140, de 10/04/2019, pág. 15/50 / 34 contemplada expressamente e descrita abaixo.
[0014] Usando a interface de usuário baseada em aposento virtual, um usuário pode selecionar, controlar, e caso contrário interagir com os dispositivos, por exemplo, as instalações de luz, no aposento físico manipulando as representações visuais substancialmente foto-realísticas dos dispositivos dentro do aposento virtual, por exemplo, selecionando as representações visuais dos dispositivos dentro do aposento virtual em uma exibição de tela de toque. A aparência do aposento virtual pode ser atualizada dinamicamente em resposta às manipulações do usuário no aposento virtual. Ainda, a aparência do aposento virtual pode ser atualizada dinamicamente em resposta a dados recebidos de dispositivos dentro do aposento físico e/ou em resposta a mudanças ambientais. De tal maneira, um aposento virtual pode ser atualizado continuamente para mostrar uma representação substancialmente foto-realística de pelo menos uma porção do aposento físico correspondente, tal que o que um usuário vê dentro do aposento virtual refletirá, ou pelo menos se assemelhará, sua experiência dentro do aposento físico correspondente a um dado momento.
DESCRIÇÃO BREVE DOS DESENHOS [0015] A descrição abaixo se refere aos desenhos acompanhantes de concretizações de exemplo, de quais:
Figura 1 é uma representação de um painel de interruptor mecânico de 6 seções convencional, alojando seis interruptores mecânicos individuais;
Figura 2 é uma representação de um painel de controle montado em parede convencional para um sistema de controle de iluminação eletrônico convencional;
Figura 3 é uma representação de uma interface de usuário de toque convencional para um sistema de controle de iluminação eletrônico convencional;
Petição 870190034140, de 10/04/2019, pág. 16/50 / 34
Figura 4 é um diagrama de bloco de um controlador de multimídia programável de exemplo interconectado a vários dispositivos;
Figura 5 é um diagrama de bloco de uma arquitetura de hardware de exemplo do controlador de multimídia programável de exemplo da Figura 4;
Figura 6 é um diagrama de uma interface de usuário baseada em aposento virtual de exemplo;
Figura 7 é um diagrama de uma interface de usuário baseada em aposento virtual de exemplo na qual o aposento virtual foi atualizado para mostrar instalações de luz particulares ativadas;
Figura 8A é um diagrama de uma interface de usuário baseada em aposento virtual de exemplo na qual porções de dois quartos virtuais são mostradas em meio avanço, por exemplo, em resposta a golpe de um usuário;
Figura 8B é um diagrama de uma interface de usuário baseada em aposento virtual de exemplo alternativo na qual porções de dois quartos virtuais correspondendo ao mesmo aposento físico são mostradas em meio avanço, por exemplo, em resposta a golpe de um usuário;
Figura 8C é um diagrama de uma interface de usuário baseada em aposento virtual de exemplo alternativo mostrando um aposento virtual correspondendo a um nível inferior de uma estrutura de árvore de quartos virtuais;
Figura 8D é um diagrama de uma interface de usuário baseada em aposento virtual de exemplo alternativo mostrando um aposento virtual correspondendo a um nível inferior de uma estrutura de árvore de quartos virtuais que ilustra uso adicional de gestos;
Figura 8E é um diagrama de uma interface de usuário baseada em aposento virtual de exemplo alternativo mostrando uma pluralidade de quartos virtuais, arranjados em grupos dentro de uma estrutura de árvore de quartos virtuais;
Petição 870190034140, de 10/04/2019, pág. 17/50 / 34
Figura 9 é um diagrama de uma interface de usuário baseada em aposento virtual de exemplo na qual uma Aba de Iluminação é selecionada;
Figura 10 é um diagrama de uma interface de usuário baseada em aposento virtual de exemplo na qual uma Aba de A/V é exibida;
Figura 11 é um fluxograma de uma sequencia de exemplo de etapas para controlar dispositivos dentro de um aposento físico usando uma interface de usuário baseada em aposento virtual; e
Figura 12 é um diagrama de bloco funcional descrevendo uma técnica de exemplo para representar um aposento virtual baseado em um número limitado de imagens pré-gravadas do aposento físico em estados diferentes.
DESCRIÇÃO DETALHADA [0016] Figura 4 é um diagrama de bloco de um controlador de multimídia programável de exemplo 400 interconectado a vários dispositivos. O termo controlador de multimídia programável deveria ser interpretado amplamente como um dispositivo capaz de controlar, trocar dados entre e/ou caso contrário interoperar com uma variedade de dispositivos elétricos e eletrônicos, tais como dispositivos de áudio, vídeo, telefonia, dados, segurança, operados por motor, operados por relé, aquecimento, ventilação, e ar condicionado (HVAC), administração de energia e/ou outros tipos de dispositivos.
[0017] O controlador de multimídia programável 400 pode ser acoplado a uma variedade de dispositivos de A/V, incluindo dispositivos de fonte de áudio 410, tais como reprodutores de disco compacto (CD), reprodutores de disco de vídeo digital (DVD), microfones, gravadores de vídeo digital (DVRs), caixas de cabo, receptores de áudio/vídeo, tocadores de mídia pessoais, e outros dispositivos que proveem sinais de áudio podem ser acoplados a uma variedade de dispositivos de fonte de vídeo 420, tais como
Petição 870190034140, de 10/04/2019, pág. 18/50 / 34 reprodutores de disco de vídeo digital (DVD), gravadores de vídeos digital (DVRs), caixas de cabo, receptores de áudio/vídeo, tocadores de mídia pessoais e outros dispositivos que proveem sinais de vídeo podem ser acoplados a uma variedade de dispositivos de saída de áudio 430, tais como alto-falantes, dispositivos que incorporam os alto-falantes, e outros dispositivos que produzem áudio; e podem ser acoplados a uma variedade de dispositivos de saída de vídeo 440, tais como televisões, monitores e outros dispositivos que produzem vídeo.
[0018] Ainda, o controlador de multimídia programável 400 pode ser acoplado para controlar, e caso contrário interoperar com uma variedade de outros tipos de dispositivos, tanto diretamente, ou por um ou mais controladores intermediários. Por exemplo, o controlador de multimídia programável 400 pode ser acoplado a um sistema de controle de circuito fechado de televisão (CCTV) 470 que administra um sistema de câmeras posicionadas sobre uma casa ou outra estrutura, sistema de controle HVAC e/ou administração de energia 475 que administra dispositivos de HVAC para regular funções ambientais e/ou dispositivos de administração de energia na casa ou outra estrutura, e/ou um sistema de segurança 480 que administra uma pluralidade de sensores de segurança individuais na casa ou outra estrutura. Em resposta a comandos de controle recebidos do controlador de multimídia programável 400, o sistema de controle de CCTV 470, o sistema de controle de HVAC e/ou sistema de administração de energia 475, e o sistema de segurança 480 pode administrar os dispositivos sob seu controle imediato respectivo.
[0019] Ainda, o controlador de multimídia programável 400 pode ser acoplado para controlar, e caso contrário interoperar com um ou mais controladores de iluminação eletrônicos 490. O um ou mais controladores de iluminação eletrônicos 490 podem ser acoplados a, por exemplo, ligações por fios ou sem fios, uma pluralidade de relés 492 e/ou unidades de 'dimmer' 493
Petição 870190034140, de 10/04/2019, pág. 19/50 / 34 distribuídas ao longo da casa ou outra estrutura, e interligadas com a alimentação elétrica a instalações de luz individuais localizadas nisso. Em resposta a comandos de controle recebidos do controlador de multimídia programável 400, o um ou mais controladores de iluminação eletrônicos 490 podem ativar seletivamente relés 492 e/ou ajustar unidades de 'dimmer' 493 interligadas a instalações de luz particulares (não mostradas), para criar um nível desejado de iluminação ou escuridão em quartos diferentes da casa ou outra estrutura.
[0020] Semelhantemente, o controlador de multimídia programável 400 pode ser acoplado para controlar, e caso contrário interoperar com um ou mais controladores de dispositivo operado por motor 495, por exemplo, um ou os mais controladores de cortina de janela automáticos, ou outros tipos de controladores. Como com controle de iluminação, em resposta a comandos de controle recebidos do controlador de multimídia programável 400, os controladores de dispositivo operado por motor 495 podem ativar seletivamente dispositivos operados por motor (não mostrado) em vários quartos da casa ou outra estrutura, para alcançar efeitos desejados.
[0021] O controlador de multimídia programável 400 pode receber entrada de usuário por uma ou mais unidades de controle 450, por exemplo, unidades de controle montadas em parede, unidades de controle em cima de mesa, unidades de controle portáteis seguradas à mão, e similares, que incluem uma tela de exibição. A uma ou mais unidades de controle 450 podem incluir uma interface de tela de toque, um mouse e interface de ponteiro, ou outro tipo de interface. As unidades de controle 450 podem ser unidades de propósito especial, dedicadas para operar com o controlador de multimídia programável 400, ou dispositivos de propósito geral, por exemplo, laptops, computadores de mesa, etc., configurados com software para implementar uma interface de usuário de acordo com as técnicas descritas abaixo. Em alguns casos, as unidades de controle 450 podem ser acopladas ao
Petição 870190034140, de 10/04/2019, pág. 20/50 / 34 controlador de multimídia programável 400 por um dispositivo intermediário 453, tal como um computador, por conexões ou redes por fios ou sem fios. Em outros casos, as unidades de controle 450 podem se comunicar diretamente ao controlador de multimídia programável 400.
[0022] O controlador de multimídia programável 400 também pode receber entrada de usuário por uma ou mais unidades de controle remoto de botão central seguradas à mão e/ou unidades de controle de botão central montadas em parede 455, ou de uma ou mais unidades de controle remoto seguradas à mão incluindo um sensor de toque anular 457. Unidades de controle remoto incluindo um sensor de toque anular 457 podem ser adaptadas para manipular, e fazer seleções de controle usando um sistema de escolha de menu em tela, exibido em um dispositivo de exibição. Detalhes adicionais relativos às unidades de controle remoto incluindo um sensor de toque anular podem ser achados em Madonna et al., Pedido de Patente US Serial No. 11/520.328, depositado em 13 de setembro de 2006, intitulado, e Remote Control Unit for a Programmable Multimedia Controller, os conteúdos de qual estão incorporados por referência aqui na sua totalidade.
[0023] O controlador de multimídia programável 400 também pode receber entrada de usuário por um ou mais dispositivos móveis 460. Como usado aqui, o termo dispositivo móvel se refere a dispositivos eletrônicos que são adaptados para serem transportados em uma pessoa, incluindo smartphones de multimídia, tal como o telefone de multimídia iPhone® disponível de Apple Inc. e o dispositivo Blackberry® disponível de Research In Motion Limited, dispositivos de computação de tablete de múltiplos propósitos, tal como o tablete iPad® disponível de Apple Inc., tocadores de mídia portáteis com capacidades aumentadas, tal como o iPod® disponível de Apple Inc., assistentes digitais pessoais (PDAs), leitores de livros eletrônicos, e similar. Tais dispositivos móveis podem se comunicar diretamente com o controlador de multimídia programável 400, ou indiretamente por várias redes
Petição 870190034140, de 10/04/2019, pág. 21/50 / 34 sem fios, celular e/ou por fios (não mostradas).
[0024] Ainda, o controlador de multimídia programável 400 pode receber entrada de usuário por uma tela de toque ou outra interface integrada no próprio controlador de multimídia programável 400, por exemplo, uma tela de toque ou outra interface apresentada em um painel dianteiro 465 do controlador de multimídia programável 400.
[0025] Ainda, o controlador de multimídia programável 400 pode receber entrada de usuário por uma tela de toque integrada em um dispositivo de saída de vídeo 440, tal como uma televisão.
[0026] Em resposta a entrada de usuário de uma das unidades de controle 450, unidades de controle remoto e/ou unidades de controle de botão central montadas em parede 455, unidades de controle remoto incluindo um sensor de toque anular 457, dispositivos móveis 460, o painel dianteiro 465 e/ou dispositivos de saída de vídeo 440, o controlador de multimídia programável 400 pode trocar dados entre, emitir comandos de controle para, e/ou caso contrário interoperar com, os dispositivos de fonte de áudio 410, os dispositivos de fonte de vídeo 420, os dispositivos de saída de áudio 430, e/ou os dispositivos de saída de vídeo 440. Ainda, em resposta à entrada de usuário, o controlador de multimídia programável 400 pode emitir controlam comandos para, e caso contrário interoperar com, o sistema de controle de CCTV 470, o sistema de controle de HVAC e/ou administração de energia 475, o sistema de segurança 480, os controladores de iluminação eletrônicos 490, como também os controladores de dispositivo operado por motor 495. A entrada de usuário que dirige tal funcionalidade, pelo menos em parte, pode ser recebida dentro de uma moderna interface de usuário baseada em aposento virtual, como explicado ainda abaixo.
[0027] Na concretização preferida, a moderna interface de usuário baseada em aposento virtual é exibida na tela de uma unidade de controle 450, dispositivo móvel 460, exibição de painel dianteiro 465 ou outro dispositivo
Petição 870190034140, de 10/04/2019, pág. 22/50 / 34 que têm uma tela de toque, e o usuário faz seleções nela tocando porções selecionadas da interface com seu dedo, um estilete, ou instrumento semelhante. Em outras concretizações, a interface de usuário baseada em aposento virtual é exibida em uma tela de exibição, que falta capacidades de reconhecimento de toque, e um usuário pode interagir com a interface usando algum outro tipo de interface, por exemplo, um mouse. Em uma configuração, o usuário pode fazer seleções usando unidades de controle remoto de botão central seguradas à mão e/ou unidades de controle montadas em parede 455, unidades de controle remoto incluindo um sensor de toque anular 457, ou outro dispositivo. Em resposta a seleções de usuário na interface de usuário baseada em aposento virtual, o controlador de multimídia programável 400 pode emitir comandos de controle específicos aos dispositivos acoplados a ele.
[0028] Figura 5 é um diagrama de bloco esquemático de uma arquitetura de hardware de exemplo 500 do controlador de multimídia programável de exemplo 400. Os vários componentes mostrados podem ser arranjados sobre uma placa-mãe do controlador 400, ou sobre uma pluralidade de cartões de circuito interconectados por um chassi (não mostrado). Um microcontrolador 510 administra a operação geral do controlador 400. O microcontrolador 510 está acoplado a uma chave de áudio 515 e uma chave de vídeo 520 por um barramento 518. A chave de áudio 515 e a chave de vídeo 520 são preferivelmente chaves de ponto cruzado capazes de comutar várias conexões simultaneamente. Porém, muitos outros tipos de chaves capazes de comutar sinais digitais podem ser empregados, por exemplo chaves de Multiplexação de Divisão de Tempo (TDM) ou outros dispositivos. Ainda, enquanto duas chaves separadas 515, 520, são mostradas, comutação de áudio e vídeo pode ser consolidada em uma única chave que suporta comutação de ambos os tipos de dados.
[0029] Um plano mediano 535 interconecta as chaves de áudio e
Petição 870190034140, de 10/04/2019, pág. 23/50 / 34 vídeo 515, 520 para uma variedade de módulos de entrada e saída, por exemplo, um ou mais Módulos de Entrada/Saída de Vídeo 587, um ou mais Módulos de Entrada/Saída de Áudio 590, e/ou um ou mais outros módulos 595. Tais módulos podem incluir várias portas de conexão que podem ser acopladas a dispositivos de A/V. Detalhes adicionais relativos à operação do um ou mais Módulos de Entrada/Saída de Vídeo 587, um ou mais Módulos de Entrada/Saída de Áudio 590, e/ou um ou mais outros módulos 595 podem ser achados em Madonna et al., Pedido de Patente US Serial No. 11/314.664, depositado em 20 de dezembro de 2005, e intitulado System and Method for a Programmable Multimedia Controller, os conteúdos de qual estão incorporados aqui por referência na sua totalidade.
[0030] O plano mediano 535 está ainda acoplado a uma chave de Ethernet 530, que interconecta portas de Ethernet 532 e um subsistema de processamento 540 ao microcontrolador 210. Em uma concretização, o subsistema de processamento 540 inclui um ou mais computadores de propósito geral 545. Um computador de propósito geral 545, como usado aqui, se refere a um dispositivo que está configurado para executar um conjunto de instruções, e dependendo das instruções particulares executadas, pode executar uma variedade de funções ou tarefas diferentes. Tipicamente, mas não sempre, um computador de propósito geral 545 executa um sistema operacional de propósito geral, tal como o sistema operacional Windows®, disponível de Microsoft Corporation, o sistema operacional Linux®, disponível de uma variedade de vendedores, o sistema operacional OSX®, disponível de Apple Inc., ou outro sistema operacional. O computador de propósito geral 545 pode incluir um meio legível por computador, por exemplo, um disco rígido, uma unidade de memória somente para leitura de Disco Compacto (CDROM), uma memória Flash, ou outro tipo de dispositivo de armazenamento, e/ou pode ser interconectado a um dispositivo de armazenamento provido em outro lugar no subsistema de processamento 540.
Petição 870190034140, de 10/04/2019, pág. 24/50 / 34 [0031 ] O subsistema de processamento 540 preferivelmente tem uma ou mais saídas gráficas 541, 542 tais como conectores de Arranjo Gráfico de Vídeo analógico (VGA), conectores de Interface Visual Digital (DVI), conectores de Conector de Exibição Apple (ADC), ou outro tipo de conectores, para prover gráficos. Tais saídas de gráficos 541, 542 podem, por exemplo, ser providas diretamente do um ou mais computadores de propósito geral 545 do subsistema de processamento 240.
[0032] O controlador de multimídia programável de exemplo 400 também pode incluir uma interface de cartão de memória e várias portas de Barramento Serial Universal (USB) 542 interconectadas a um concentrador de USB 543. Tais portas de USB 542 podem ser acopladas a dispositivos externos. Uma chave de USB 544 é empregada para trocar sinais de USB recebidos no concentrador ao subsistema de processamento 540. De uma maneira semelhante, várias portas de IEEE 1394 (FireWire™) 546 podem ser acopladas a dispositivos externos e passar dados para um concentrador de IEEE 1394 547 e para uma chave de IEEE 1394 548, para comutação ao subsistema de processamento 540.
[0033] O microcontrolador 510 está ainda conectado a uma Interface Periférica Serial (SPI) e circuito de distribuição de Circuito Inter-integrado (I2C) 550, que provê uma interface de comunicação serial a dispositivos de taxa de transferência de dados relativamente baixa. O controlador de SPI/I2C 550 está conectado ao plano mediano 535 e por esse meio provê comandos de controle do microcontrolador 510 para os módulos 587, 590, 595 do controlador de multimídia programável 300. Ainda, conexões do controlador de SPI/I2C 550 são providas a componentes tais como um controlador de ventilador 551, um sensor de temperatura 552, e circuito de gerente de energia 553, que administram coletivamente as características térmicas do controlador de multimídia programável 400.
[0034] O microcontrolador 510 também está conectado a uma
Petição 870190034140, de 10/04/2019, pág. 25/50 / 34 interface de controle de dispositivo 575 que pode se comunicar com o sistema de controle de CCTV 470, o sistema de controle de HVAC e/ou administração de energia 475, o sistema de segurança 480, o um ou mais controladores de iluminação eletrônicos 490 como também o um ou mais controladores de dispositivo operado por motor 495. Ainda, uma interface de telefone 570 pode ser provida para conectar a uma rede de telefone e/ou aparelhos de telefone. Além disso, uma porta de expansão 580 pode ser provida para ligar vários controladores de multimídia programáveis 100 juntos, para formar um sistema expandido, enquanto uma exibição de painel dianteiro 465, por exemplo, uma exibição de tela de toque, é provida para exibir estado, configuração, e/ou outra informação para um usuário, como também aceitar entrada de usuário.
[0035] Tal controlador de multimídia programável 400 ou outra plataforma pode suportar uma moderna interface de usuário baseada em aposento virtual. Em uma concretização, a interface de usuário baseada em aposento virtual inclui uma pluralidade de ambientes de interface de aposento virtual (em seguida quartos virtuais). Cada aposento virtual corresponde a um aposento físico diferente (ou porção de um aposento físico) em uma casa ou outra estrutura). Em alguns casos, vários quartos virtuais podem corresponder a porções diferentes de um aposento físico, por exemplo, para cobrir o aposento físico inteiro. Cada aposento virtual pode incluir uma representação substancialmente foto-realística dos limites do aposento físico (ou porção do aposento físico), por exemplo, das paredes, teto, chão, etc., que definem o aposento; pode mostrar pelo menos uma porção de mobília presente no aposento físico (ou porção do aposento físico), por exemplo, sofás, cadeiras, camas, papel de parede, etc., que estão presentes no aposento físico; e pode mostrar dispositivos, por exemplo, instalações de luz, sob controle (diretamente ou indiretamente) do controlador de multimídia programável que estão presentes dentro do aposento físico (ou porção do aposento físico).
Petição 870190034140, de 10/04/2019, pág. 26/50 / 34 [0036] Representações substancialmente foto-realísticas de dispositivos sob controle são mostradas preferivelmente em locais dentro do aposento virtual correspondendo aos locais atuais do dispositivo dentro do aposento físico. Na concretização preferida, as representações substancialmente foto-realísticas do aposento e dos dispositivos são derivadas de um número limitado de imagens pré-gravadas, por exemplo, um número limitado de fotografias digitais imóveis do aposento físico, capturadas de um local predeterminado e mostrando o aposento em estados diferentes. Porém, uma variedade de outras técnicas para criação das representações substancialmente foto-realísticas do aposento e dos dispositivos é contemplada expressamente e descrita abaixo.
[0037] Usando a interface de usuário baseada em aposento virtual, um usuário pode selecionar, controlar, e caso contrário pode interagir com os dispositivos, por exemplo, instalações de luz, manipulando as representações visuais substancialmente foto-realísticas dos dispositivos dentro do aposento virtual, por exemplo, selecionando as representações visuais dos dispositivos dentro do aposento virtual. A aparência do aposento virtual pode ser atualizada dinamicamente em resposta às manipulações do usuário no aposento virtual. A aparência do aposento virtual também pode ser atualizada dinamicamente em resposta a dados recebidos de dispositivos dentro do aposento físico e/ou mudanças ambientais, por exemplo, hora do dia. De tal maneira, o aposento virtual pode ser atualizado continuamente para mostrar uma representação substancialmente foto-realística de pelo menos uma porção do aposento físico correspondente, tal que o que um usuário vê dentro de um aposento virtual refletirá, ou pelo menos se assemelhará, a sua experiência dentro do aposento físico correspondente a um dado momento.
[0038] Figura 6 é um diagrama de uma interface de usuário baseada em aposento virtual de exemplo 600. A interface de usuário baseada em aposento virtual de exemplo 600 pode incluir uma porção principal 610 que
Petição 870190034140, de 10/04/2019, pág. 27/50 / 34 provê um aposento virtual para controlar dispositivos dentro de um aposento físico correspondente. A interface de usuário baseada em aposento virtual de exemplo 600 pode ainda incluir uma porção de menu 620, configurada para exibir abas de menu selecionáveis correspondendo a tipos diferentes de funcionalidade, e uma porção específica de função 630, configurada para exibir opções específicas para uma aba de menu selecionada.
[0039] Na interface de usuário baseada em aposento virtual de exemplo 600, um aposento virtual correspondendo a uma porção de um grande aposento é mostrado. Uma representação substancialmente fotorealística de uma porção do grande aposento é exibida, incluindo os limites do aposento físico, sua mobília, e dispositivos sob controle do controlador de multimídia programável 400 que está dentro da porção do aposento. Por exemplo, o aposento virtual de exemplo mostra representações substancialmente foto-realísticas de instalações de luz independentes, tais como luminárias 640, 642; instalações de luz fixas, tais como candelabros de parede 645, 647, 650 e lustre 662; e instalações de luz de propósito especial, tais como iluminação de realce 665, 667 e 670. Ainda, o aposento virtual de exemplo mostra representações visuais substancialmente foto-realísticas de uma televisão de tela plana 672 e cortinas de janela automáticas 675, que também estão sob controle do controlador de multimídia programável 400. Um usuário pode manipular as representações visuais substancialmente fotorealísticas dos dispositivos dentro do aposento virtual, selecionar, controlar, ou caso contrário interoperar com os dispositivos dentro do aposento físico.
[0040] Por exemplo, um usuário pode selecionar instalações de luz particulares para ativar selecionando, por exemplo, tocando ou clicando nas representações visuais substancialmente foto-realísticas das instalações de luz dentro do aposento virtual. Por exemplo, um usuário pode selecionar, por exemplo, tocar ou clicar na representação visual substancialmente fotorealística de uma luminária 640 e um lustre 662. Em resposta a isso, o
Petição 870190034140, de 10/04/2019, pág. 28/50 / 34 controlador de multimídia programável 400 pode enviar comandos de controle para um ou mais controladores de iluminação eletrônicos 490 para fazer tais controladores ativarem relés interligados com a alimentação elétrica para a luminária 640 e o lustre 662. Ainda, o controlador de multimídia programável 400 pode atualizar o aposento virtual, tal que mostre uma representação substancialmente foto-realística do aposento físico com as instalações de luz particulares iluminadas.
[0041] Figura 7 é um diagrama de uma interface de usuário baseada em aposento virtual de exemplo 700 na qual o aposento virtual foi atualizado para mostrar instalações de luz particulares ativadas. Como pode ser visto na Figura 7, representações visuais substancialmente foto-realísticas da luminária 640 e do lustre 662 foram mudadas para descrever as instalações de luz iluminadas. Ainda, os efeitos de tal iluminação são descritos no aposento virtual, tal que a estrutura e mobília mostrem os efeitos da luz provida pela luminária 640 e pelo lustre 662. Por exemplo, reflexões realísticas são mostradas sobre superfícies refletivas, sombras apropriadas são mostradas dada a direção da luz, etc. Como discutido em mais detalhe abaixo, a aparência atualizada do aposento virtual, incluindo os efeitos de iluminação realísticos, pode ser representada baseada em um número limitado de imagens pré-gravadas, por exemplo, um número limitado de fotografias digitais imóveis do aposento físico, capturadas de um local predeterminado e mostrando o aposento em estados diferentes. Alternativamente, uma variedade de outras técnicas para criação das representações substancialmente foto-realísticas do aposento e dispositivos nele, em estados diferentes, pode ser empregada.
[0042] Além disso, um usuário pode selecionar um dispositivo diferente de uma instalação de luz no aposento físico para ativar e/ou controlar selecionando, por exemplo, tocando ou clicando na representação visual substancialmente foto-realística do dispositivo dentro do aposento
Petição 870190034140, de 10/04/2019, pág. 29/50 / 34 virtual. Por exemplo, um usuário pode selecionar, por exemplo, tocar ou clicar na representação visual substancialmente foto-realística da televisão de tela plana 672 dentro do aposento virtual. Em resposta a isso, o controlador de multimídia programável 400 pode enviar comandos de controle para ativar a televisão de tela plana. Ainda, o controlador de multimídia programável 400 pode atualizar o aposento virtual, tal que mostre uma representação substancialmente foto-realística do aposento físico com a televisão ativada. Por exemplo, uma representação de miniatura da programação sendo exibida atualmente na televisão pode ser mostrada na representação substancialmente foto-realística da televisão de tela plana 672 dentro do aposento virtual. De maneira semelhante, uma variedade de outros tipos de dispositivos de A/V associados com o aposento físico pode ser controlada.
[0043] Semelhantemente, um usuário pode selecionar, por exemplo, tocar ou clicar na representação visual substancialmente foto-realística de um conjunto particular de cortinas de janela 675 dentro do aposento virtual. Em resposta a isso, o controlador de multimídia programável 400 pode enviar comandos de controle para um ou mais controladores de dispositivo operado por motor 495 para elevar ou abaixar as cortinas selecionadas, como apropriado. Ainda, o controlador de multimídia programável 400 pode atualizar o aposento virtual, tal que mostre uma representação substancialmente foto-realística das cortinas 675 elevadas ou abaixadas. De tal maneira, o que um usuário vê dentro do aposento virtual pode refletir, ou pelo menos se assemelhar a sua experiência dentro do aposento físico correspondente.
[0044] Além de suportar seleções binárias (por exemplo, desliga/liga) dentro do aposento virtual, a interface de usuário baseada em aposento virtual pode suportar tipos mais avançados de entrada de controle. Tal controle mais avançado pode ser suportado pela porção de menu 620 da interface de usuário baseada em aposento virtual e a porção específica de função 630 da interface
Petição 870190034140, de 10/04/2019, pág. 30/50 / 34 de usuário baseada em aposento virtual. Pode ser suportado alternativamente através de reconhecimento de gesto na porção principal 610 da interface de usuário baseada em aposento virtual.
[0045] A porção de menu 620 da interface pode incluir uma pluralidade de abas de função, por exemplo, uma Aba de Segurança 677 na qual certa funcionalidade adicional relacionada a um sistema de CCTV e/ou sistema de segurança pode ser acessada, um Aba de A/V 680 na qual certa funcionalidade relacionada a áudio e vídeo adicional pode ser acessada, uma Aba de HVAC/Cortinas 682 na qual certa funcionalidade adicional relacionada a sistemas de HVAC e/ou sistemas de cortinas de janela automáticas pode ser acessada, uma Aba de Iluminação 685 na qual certa funcionalidade adicional relacionada a controle de instalação de luz pode ser acessada, uma Aba de Serviços 687 na qual certa funcionalidade relacionada a serviços programáveis pode ser acessada, e uma Aba de Zonas 690 na qual quartos virtuais diferentes podem ser selecionados para exibição na porção principal 610 da tela.
[0046] Na seleção de uma aba particular, a porção específica de função 630 da interface de usuário pode mostrar para ícones selecionáveis, botões, texto e similar relacionado a tal funcionalidade. Por exemplo, a interface de usuário baseada em aposento virtual de exemplo 600 da Figura 6 descreve a Aba de Zonas 690 selecionada, e a porção específica de função 630 mostra uma pluralidade de imagens selecionáveis 691, 692, 693, 694, 695, 696 correspondendo a quartos virtuais disponíveis diferentes, cada aposento virtual correspondendo para um aposento físico diferente (ou porção de um aposento físico) na casa ou outra estrutura. Em resposta à seleção, por exemplo, toque, de uma imagem particular 691, 692, 693, 694, 695, 696 de um aposento diferente, a porção principal 610 da interface de usuário baseada em aposento virtual pode ser atualizada para exibir o aposento virtual diferente correspondente.
Petição 870190034140, de 10/04/2019, pág. 31/50 / 34 [0047] Alternativamente, quartos virtuais diferentes podem ser selecionados por gestos, por exemplo, gestos baseados em toque. Por exemplo, quartos virtuais podem ser arranjados logicamente em um arranjo linear ou circular. Um usuário pode golpear, por exemplo, com seu dedo, um estilete, ou instrumento semelhante sobre uma exibição sensível a toque, por exemplo na porção principal 610 da interface de usuário baseada em aposento virtual para avançar de um aposento virtual para o próximo. Como usado aqui, o termo golpear se refere a um movimento substancialmente linear, contínuo rápido, na interface de usuário. Em resposta a isso, o aposento virtual exibido na porção principal 610 da interface de usuário baseada em aposento virtual pode ser avançado. Figura 8A é um diagrama de uma interface de usuário baseada em aposento virtual de exemplo 800 na qual porções de dois quartos virtuais 810, 810 correspondendo a quartos físicos diferentes são mostradas em meio avanço, por exemplo, em resposta a golpe de um usuário. Desde que quartos virtuais também podem corresponder a uma porção de um aposento físico, golpe pode ser usado alternativamente para avançar entre quartos virtuais que correspondem a uma porção do mesmo aposento físico. Figura 8B é um diagrama de uma interface de usuário baseada em aposento virtual de exemplo alternativo 830 na qual porções de dois quartos virtuais 835, 840 correspondendo ao mesmo aposento físico são mostradas em meio avanço, por exemplo, em resposta a golpe de um usuário.
[0048] Em outras concretizações, quartos virtuais podem ser arranjados logicamente em arranjos mais complicados. Por exemplo, em algumas configurações, quartos virtuais e/ou grupos de quartos virtuais podem ser arranjados em uma estrutura de árvore. Dependendo do nível atual da estrutura de árvore com a qual o usuário está interagindo, vários gestos podem executar funções diferentes. Tal arranjo pode ser usado junto com uma variedade de tipos de gestos, incluindo gestos de múltiplos toques, quer dizer, gestos que envolvem seleção de dois ou mais pontos na interface de
Petição 870190034140, de 10/04/2019, pág. 32/50 / 34 usuário. Alternativamente, tal arranjo pode ser usado com outros tipos de controles, por exemplo com um esquema de controle de ponteiro e mouse. [0049] Figura 8C é um diagrama de uma interface de usuário baseada em aposento virtual de exemplo alternativo 845 mostrando um aposento virtual correspondendo a um nível mais baixo de uma estrutura de árvore de quartos virtuais. Enquanto um usuário está vendo um aposento virtual neste nível, o usuário pode fazer um gesto de contrato de múltiplo toque 850. Como usado aqui, o termo gesto de contrato se refere a uma seleção de dois pontos na interface de usuário e um arrastamento de tais pontos um para o outro em um movimento substancialmente contínuo. Em resposta, a interface pode aproximar sobre uma porção do aposento virtual sobre o local que o gesto foi feito. Semelhantemente, o usuário pode fazer um gesto de expandir de múltiplo toque 855. Como usado aqui, o termo gesto de expandir se refere a uma seleção de dois pontos na interface de usuário e um arrastamento de tais pontos um longe do outro em um movimento substancialmente contínuo. Em resposta, a interface pode se afastar para mostrar uma maior porção do aposento virtual.
[0050] Figura 8D é um diagrama de um interface de usuário baseada em aposento virtual de exemplo alternativo 860 mostrando um aposento virtual correspondendo a um mais baixo nível de uma estrutura de árvore de quartos virtuais que ilustram uso adicional de gestos. Em uma tal concretização alternativa, o usuário pode fazer um gesto de arraste 865 entre uma de várias direções, por exemplo, para cima, para baixo, esquerda ou direita. Como usado aqui, o termo gesto de arraste se refere a um movimento substancialmente linear contínuo na interface de usuário. Em resposta ao gesto de arraste, a interface pode varrer dentro do aposento virtual em uma direção correspondente, se houver porções do aposento virtual que não são mostradas agora na área de visível da interface.
[0051] Em uma tal concretização alternativa, se um usuário se
Petição 870190034140, de 10/04/2019, pág. 33/50 / 34 afastar uma quantidade suficiente, ao usuário pode ser exibido um nível mais alto da estrutura de árvore. Figura 8E é um diagrama de uma interface de usuário baseada em aposento virtual de exemplo alternativo 870 mostrando uma pluralidade de quartos virtuais, arranjados em grupos dentro de uma estrutura de árvore de quartos virtuais. Em uma configuração, um primeiro grupo 890 pode corresponder a um 1° Andar de uma estrutura e incluir um ou mais quartos virtuais associados com esse andar, um segundo grupo 885 pode corresponder a um 2° Andar de uma estrutura e incluir um ou mais quartos virtuais associados com esse andar, um terceiro grupo 880 pode corresponder a um 3° Andar de uma estrutura e incluir quartos virtuais associados com esse andar, enquanto um grupo adicional 895 pode corresponder a um exterior de uma estrutura e incluir quartos virtuais associados com isso. Deveria ser entendido, tal agrupamento é somente um exemplo, e uma ampla variedade de outras configurações pode ser implementada prontamente. Para revisar um nível mais baixo da estrutura de árvore de quartos virtuais, o usuário pode selecionar um dos quartos virtuais mostrados na interface 870.
[0052] Retornando à Figura 6, semelhante à seleção da Aba de Zonas 690, seleção da Aba de Iluminação 685 pode prover acesso a ícones selecionáveis, botões, texto e similar na porção específica de função 630 da interface de usuário, neste exemplo, relacionado a controle de iluminação. Figura 9 é um diagrama de uma interface de usuário baseada em aposento virtual de exemplo 900 na qual a Aba de Iluminação 685 é selecionada. Como mostrado na Figura 9, a porção específica de função 630 da interface de usuário de exemplo 900 pode incluir uma pluralidade de botões 910, 920, 930, 940 correspondendo a várias cenas de iluminação, a seleção de qual ativará, desativará, e/ou permitirá escurecimento/iluminação de uma pluralidade de instalações de luz no aposento. Ainda, a porção específica de função 630 da interface de usuário baseada em aposento virtual de exemplo
Petição 870190034140, de 10/04/2019, pág. 34/50 / 34
900 pode incluir um ou mais cursores de escurecimento 950, que quando operados podem fazer o controlador de multimídia programável 400 emitir comandos para um ou mais controladores de iluminação eletrônicos 490, para fazer tais controladores ajustarem unidades de 'dimmer' 493 interligadas com a alimentação elétrica para instalações de luz individuais, ou grupos de instalações de luz.
[0053] Alternativamente, gestos, por exemplo, gestos baseados em toque podem ser usados para fazer o controlador de multimídia programável 400 emitir comandos para um ou mais controladores de iluminação eletrônicos 490 para fazer tais controladores ajustarem unidades de 'dimmer' 493 interligadas com a alimentação elétrica para instalações de luz individuais, ou grupos de instalações de luz. Um usuário pode fazer um gesto, por exemplo, um gesto baseado em toque, na ou sobre uma representação substancialmente foto-realística de uma instalação de luz particular ou grupo de instalações de luz. Tal gesto pode ser traduzido em um comando de controle de iluminação ou escurecimento. Por exemplo, o usuário pode fazer um múltiplo toque expandir na ou sobre a representação substancialmente foto-realística de uma instalação de luz particular e arrastar tais pontos em direções contrárias, para indicar que a instalação de luz correspondente deveria ser clareada. Semelhantemente, o usuário pode fazer um gesto de múltiplo toque de contrair na ou sobre a representação substancialmente foto-realística de uma instalação de luz particular para indicar que a instalação de luz correspondente deveria ser escurecida. Além de gestos de expandir e contrair, suporte para uma variedade de outros gestos está contemplado expressamente para uso com controlar brilho de instalações de luz ou as colocações de outros dispositivos.
[0054] Ainda, a Aba de A/V 680 pode prover acesso a ícones selecionáveis, botões, texto e similar na porção específica de função 630 da interface de usuário para controle de dispositivo de A/V. Por exemplo, um
Petição 870190034140, de 10/04/2019, pág. 35/50 / 34 usuário pode escolher um dispositivo de A/V sob controle do controlador de multimídia programável 400, por exemplo, uma televisão, selecionando, por exemplo, tocando, a representação substancialmente foto-realística do dispositivo no aposento virtual exibido na porção principal 610 da interface de usuário baseada em aposento virtual. Depois disso, o usuário pode ser apresentado com ícones de controle específicos de dispositivo, botões, texto e similar, manipulação de quais pode controlar o dispositivo selecionado.
[0055] Figura 10 é um diagrama de uma interface de usuário baseada em aposento virtual de exemplo 1000 na qual a Aba de A/V 685 é exibida. Como mostrado na Figura 10, a porção específica de função 630 da interface de usuário baseada em aposento virtual de exemplo 1000 pode incluir uma pluralidade de botões relacionados a A/V, por exemplo, botões de volume 1010, 1020, um botão de mudo 1030, botões de controle de reprodução 1040, um botão de energia 1050, e/ou botões de seleção de canal 1060, 1070.
[0056] Figura 11 é um fluxograma de uma sequencia de exemplo de etapas 1100 para controlar dispositivos dentro de um aposento físico usando uma interface de usuário baseada em aposento virtual. Na etapa 1110, o controlador de multimídia programável 400 representa um aposento virtual, incluindo a representação substancialmente foto-realística do aposento físico (ou uma porção do aposento físico) e as representações substancialmente fotorealísticas dos dispositivos, por exemplo, as instalações de luz, dentro do aposento físico. Na etapa 1120, o aposento virtual representado é exibido na tela de exibição de uma unidade de controle 450, um dispositivo móvel 460, a exibição de painel dianteiro 465 do controlador de multimídia programável 400, uma televisão 440 ou, alternativamente, em outro dispositivo. Na etapa 1130, o controlador de multimídia programável 400 recebe uma seleção, por exemplo, uma seleção de toque, aperto de botão, entrada de sensor de toque anular, etc., de um usuário. A seleção indica uma representação visual substancialmente foto-realística particular de um dispositivo, por exemplo, de
Petição 870190034140, de 10/04/2019, pág. 36/50 / 34 uma instalação de luz particular, dentro do aposento virtual.
[0057] Na etapa 1140, o controlador de multimídia programável 400 envia comandos de controle ao dispositivo no aposento físico, ou para o controlador intermediário acoplado ao dispositivo, para mudar um estado do dispositivo. Por exemplo, o controlador de multimídia programável 400 pode enviar comandos de controle para um ou mais controladores de iluminação eletrônicos 490 para fazer tais controladores ativarem um relé 492 interligado com a alimentação elétrica a uma instalação de luz selecionada. na etapa 1150, o controlador de multimídia programável 400 atualiza a aparência do aposento virtual, e retorna à etapa 1010, para representar o aposento virtual e representações visuais dos dispositivos no aposento virtual, mostrar o estado atualizado, por exemplo mostrar a instalação de luz ativada.
[0058] O aposento virtual, incluindo a representação substancialmente foto-realística do aposento físico e as representações substancialmente fotorealísticas dos dispositivos dentro do aposento físico pode ser representado na etapa 1110 da Figura 11 em qualquer de uma variedade de modos diferentes. Em uma concretização, um instalador durante configuração de sistema pode capturar imagens, por exemplo, tirar fotos digitais paradas, do aposento físico de um local predeterminado, cada imagem capturada do aposento enquanto está em um estado potencial diferente. Por exemplo, uma primeira imagem pode ser capturada do aposento físico sem instalações de luz ativadas, uma segunda imagem pode ser capturada do aposento físico com uma primeira instalação de luz ativada, uma terceira imagem pode ser capturada do aposento físico com uma segunda instalação de luz ativada, uma imagem pode ser capturada do aposento físico com a primeira instalação de luz e a segunda instalação de luz ativadas, e assim sucessivamente tal que toda combinação potencial seja capturada. As imagens podem ser correlatadas, tal que características coincidam em local entre imagens, e armazenadas em uma biblioteca no controlador de multimídia programável 400, ou em outro
Petição 870190034140, de 10/04/2019, pág. 37/50 / 34 dispositivo. Em tal concretização, a etapa de representação 1110 pode envolver simplesmente acessar a imagem armazenada apropriada do aposento físico que mostra o aposento com dispositivos nos estados apropriados.
[0059] Porém, enquanto tal técnica pode ser possível em certas aplicações, quando o número de dispositivos no aposento aumenta, o número de imagens pré-gravadas precisadas para representar o aposento em cada estado potencial cresce exponencialmente. Um aposento com n dispositivos pode exigir 2n imagem pré-gravadas para representar todas as possíveis combinações de dispositivos, assumindo que cada dispositivo só tem estados binários (por exemplo, ligado ou desligado). A introdução de dispositivos tendo mais de dois possíveis estados, por exemplo, uma gama de colocações de 'dimmer', pode ainda aumentar o número de imagens pré-gravadas precisadas. Por conseguinte, é desejável usar uma técnica que pode derivar estados adicionais do aposento de um número menor de imagens prégravadas.
[0060] Na concretização preferida, o aposento virtual, incluindo a representação substancialmente foto-realísticas do aposento físico e as representações substancialmente foto-realísticas dos dispositivos dentro do aposento físico, é representada na etapa 1110 da Figura 11 de um número limitado de imagens pré-gravadas, por exemplo, um número limitado de fotografias digitais paradas do aposento físico. Durante configuração de sistema, um instalador captura de um local predeterminado uma imagem do aposento sem dispositivos ativados, como também imagens do aposento com cada dispositivo no aposento ativado isoladamente (isto é, ativado sem qualquer outro dispositivo no aposento ativado). Por exemplo, uma primeira imagem pode ser capturada do aposento físico sem instalações de luz ativadas, uma segunda imagem pode ser capturada do aposento físico com só uma primeira instalação de luz ativada (preferivelmente a brilho máximo), uma terceira imagem pode ser capturada do aposento físico com apenas uma
Petição 870190034140, de 10/04/2019, pág. 38/50 / 34 segunda instalação de luz ativada (preferivelmente a brilho máximo), um imagem adicional pode ser capturada do aposento físico com um apenas uma terceira instalação de luz e ativada (preferivelmente a brilho máximo), e assim sucessivamente. Para um aposento com n dispositivos, n+1 imagens podem ser capturadas. As n+1 imagens podem ser correlatadas tal que características coincidam em local entre imagens, e as imagens podem ser armazenadas em uma biblioteca no controlador de multimídia programável 400, ou outro dispositivo. Então, de acordo com uma moderna técnica de mistura, todos os possíveis estados do aposento podem ser gerados a tempo de exibição das n+1 imagens pré-gravadas.
[0061] Figura 12 é um diagrama de bloco funcional 1200 descrevendo uma técnica de exemplo para representar um aposento virtual baseado em um número limitado de imagens pré-gravadas do aposento físico em estados diferentes. O número limitado de imagens pode ser armazenado em um repositório de imagem, por exemplo, uma memória 1202 do controlador de multimídia programável 400 ou outro dispositivo. As imagens incluem uma primeira imagem 1210 do aposento físico sem dispositivos, por exemplo, instalações de luz, ativadas, uma segunda imagem 1230 do aposento físico com apenas um primeiro dispositivo ativado, por exemplo, uma primeira instalação de luz ativada (preferivelmente a brilho máximo), uma terceira imagem 1250 do aposento físico com apenas um segundo dispositivo ativado, por exemplo, uma segunda instalação de luz ativada (preferivelmente a brilho máximo), uma imagem adicional 1270 do aposento físico com um apenas um terceiro dispositivo ativado, por exemplo, uma terceira instalação de luz ativada (preferivelmente a brilho máximo), até uma n-ésima imagem 1290 do aposento com apenas um dispositivo ativado, por exemplo, uma n-ésima instalação de luz ativada (preferivelmente a brilho máximo).
[0062] As imagens 1210, 1230, 1250, 1270, 1290 podem ser acessadas por um processador 1204, por exemplo, do controlador de
Petição 870190034140, de 10/04/2019, pág. 39/50 / 34 multimídia programável 400 ou outro dispositivo que implementa controles virtuais binários 1232, 1252, 1272, 1292. Os controles virtuais binários podem ser rotinas de software que, em resposta à seleção de um usuário da representação visual do dispositivo na interface de usuário baseada em aposento virtual, tanto passa uma imagem correspondente mostrando o dispositivo ativado, ou bloqueia a imagem. Quando passadas, as imagens são recebidas a uma unidade de processamento gráfico (GPU) 1206, por exemplo do controlador de multimídia programável 400 ou de outro dispositivo.
[0063] A GPU 1206 preferivelmente implementa uma pluralidade de rotinas de ajuste 1234, 1254, 1274, 1294 que ajustam propriedades das imagens 1230, 1250, 1270, 1290. Por exemplo, em uma implementação onde os dispositivos são cada instalações de luz, as rotinas de ajuste 1234, 1254, 1274, 1294 podem ser rotinas de 'dimmer' que ajustam o brilho das imagens 1230, 1250, 1270, 1290, por exemplo entre 0% e 100%, em resposta a seleções de 'dimmer' feitas por um usuário na interface de usuário baseada em aposento virtual.
[0064] Ainda, a GPU 1206 preferivelmente implementa uma pluralidade de rotinas de filtro 1236, 1256, 1276, 1296 que recebem duas ou mais imagens, e filtram as imagens em uma base de pixel por pixel, para produzir imagens de saída 1238, 1258, 1278, 1298. As imagens recebidas podem incluir imagens ajustadas providas pelas rotinas de ajuste 1234, 1254, 1274, 1294, como também imagens de saída providas por rotinas de filtro prévias 1236, 1256, 1276 por caminhos 1237, 1257, 1277. Em uma implementação onde os dispositivos são cada instalações de luz, rotinas de filtro 1236, 1256, 1276, 1296 podem selecionar entre pixels correspondentes em cada imagem recebida do pixel tendo o maior valor de pixel (por exemplo, o maior brilho), e gerar a imagem de saída 1238, 1258, 1278, 1298 de tais pixels. De tal maneira, os efeitos de iluminação de várias instalações de luz podem ser combinados efetivamente. Ainda, alimentando a imagem de saída
Petição 870190034140, de 10/04/2019, pág. 40/50 / 34 de uma rotina de filtro à próxima rotina de filtro sucessiva, efeitos de iluminação acumulados de uma pluralidade de instalações de luz diferentes ativadas de uma vez imediatamente podem ser aproximados.
[0065] Um seletor 1240 da GPU 1206 seleciona a imagem de saída apropriada 1238, 1258, 1278, 1298 que representa a combinação de dispositivos ativados no aposento. Tal imagem de saída é então provida para exibição na interface de usuário baseada em aposento virtual, por exemplo, a imagem é usada na etapa de exibição 1120 da Figura 11.
[0066] Enquanto a descrição anterior discute certas concretizações de exemplo, deveria ser aparente que várias modificações e/ou adições podem ser feitas a isso.
[0067] Por exemplo, enquanto é discutido acima que os dispositivos controlados pela interface de usuário baseada em aposento virtual estão localizados dentro de um aposento de uma casa ou outra estrutura, tal como um grande aposento ou cozinha, deveria ser entendido que as técnicas podem ser usadas com uma variedade de outros tipos de quartos achados em tipos diferentes de estruturas. Por exemplo o aposento virtual pode corresponder (ou corresponder a uma porção de) a uma sala de conferência, uma sala da diretoria, uma sala de espetáculo, uma sala de aula, um restaurante ou sala de jantar de bar, um andar de fábrica, um espaço de armazém, etc. Ainda, os dispositivos não precisam estar localizados dentro de qualquer tipo de aposento. Por exemplo, dispositivos que estão localizados externos à casa ou estrutura, tais como instalações de luz exteriores, também podem ser controlados pela interface de usuário baseada em aposento virtual. Em uma tal implementação, um ou mais quartos virtuais podem ser definidos para espaços exteriores, cada aposento virtual incluindo uma representação substancialmente foto-realística de uma porção particular de espaço exterior.
[0068] Semelhantemente, dispositivos localizados em múltiplas casas ou outras estruturas podem ser controlados pela interface de usuário baseada
Petição 870190034140, de 10/04/2019, pág. 41/50 / 34 em aposento virtual. Em uma tal implementação, um ou quartos mais virtuais podem ser definidos para cada estrutura diferente. Em algumas implementações, cada estrutura pode incluir seu próprio controlador de multimídia programável 400 acoplado a dispositivos e controladores intermediários, por exemplo, a controladores de iluminação eletrônicos 490, controladores de dispositivo operado por motor 495, e similares. Uma rede, por exemplo, uma rede de área extensa (WAN) pode interconectar o controlador de multimídia programável 400, e permitir comandos de controle passados entre eles. Tal configuração pode permitir a um usuário operando uma interface de usuário baseada em aposento virtual em uma primeira estrutura, ativar, desativar e/ou ajustar a operação de dispositivos localizados em uma segunda estrutura remota da primeira estrutura.
[0069] Ainda, enquanto é discutido acima que as representações substancialmente foto-realísticas do aposento e dispositivos usados para criar cada aposento virtual podem ser representadas de imagens, por exemplo, de fotografias digitais paradas, as representações substancialmente fotorealísticas podem ser representadas em outros modos. Por exemplo, as representações substancialmente foto-realísticas podem ser representadas de vídeo de movimento completo, em lugar de fotografias paradas. Em uma tal implementação alternativa, o vídeo de movimento completo pode ser capturado previamente, durante configuração de sistema, e armazenado, ou pode incluir pelo menos algum vídeo de movimento completo ao vivo do aposento físico (ou porções disso) da casa ou outra estrutura, por exemplo, capturado ao vivo por uma ou mais câmeras acopladas ao sistema de controle de CCTV 470. Semelhantemente, as representações substancialmente fotorealísticas podem ser representadas de varreduras a laser tridimensional de alta definição (3-D) ou outros tipos de prospecção de alta definição dos quartos da casa ou outra estrutura. Em uma tal implementação alternativa, um modelo de projeto auxiliado por computador de alta definição (CAD) pode ser
Petição 870190034140, de 10/04/2019, pág. 42/50 / 34 construído para cada aposento, baseado nos dados capturados nas varreduras a laser 3-D ou outros tipos de prospecção, e tal modelo usado na representação. [0070] Ainda, enquanto pode ser sugerido acima que as unidades de controle 450, unidades de controle remoto de botão central e/ou unidades de controle de bota central montadas em parede 455, unidades de controle remoto incluindo um sensor de toque anular 457, dispositivos móveis 460, painel dianteiro 465 e/ou dispositivos de saída de vídeo 440, acoplados ao controlador de multimídia programável 400 estão localizados dentro da casa ou outra estrutura, deveria ser entendido que pelo menos alguns destes dispositivos podem estar localizados remotamente, e habilitar um usuário interagir com o sistema remotamente, por exemplo, pela Internet. Por exemplo, o controlador de multimídia programável 400 pode ser acoplado por uma interface de rede (não mostrada) à Internet. A interface de usuário baseada em aposento virtual pode ser exibida a um usuário dentro de um navegador da web ou outro aplicativo, em um dispositivo localizado longe remoto da casa ou estrutura. Seleções de usuário podem ser remetidas através da Internet para o controlador de multimídia programável 400. De tal maneira, um usuário pode controlar dispositivos dentro da casa ou estrutura remotamente, através de grandes distâncias, e ver os efeitos de suas seleções de controle.
[0071] Adicionalmente, deveria ser entendido que os procedimentos ou processos descritos acima podem ser implementados em hardware, software (concretizados como um meio legível por computador contendo instruções de programa), firmware, ou uma combinação disso. Um meio legível por computador pode levar a forma de uma memória, tal como uma Memória de Acesso Aleatório (RAM), um disco, tal como um CD-ROM, ou outro meio de armazenamento tangível.
[0072] Portanto, deveria ser entendido que as descrições anteriores são significadas para serem levadas só por meio de exemplo.

Claims (19)

  1. REIVINDICAÇÕES
    1. Método para controlar um ou mais dispositivos dentro de um espaço físico de uma estrutura compreendendo:
    acoplar o um ou mais dispositivos na estrutura, tanto diretamente ou indiretamente, a um controlador de multimídia programável (400) configurado para emitir comandos de controle que, quando implementados, mudam o estado do um ou mais dispositivos;
    o método caracterizado pelo fato de compreender ainda:
    exibir, em uma tela de exibição, uma interface de usuário baseada em espaço virtual, a interface de usuário baseada em espaço virtual (600, 700, 800) incluindo um ou mais de espaços virtuais (810, 835, 840), cada espaço virtual incluindo uma representação foto-realística de uma porção da estrutura, as representação foto-realística de uma porção da estrutura incluindo representações visuais foto-realísticas de um ou mais limites da porção da estrutura, de um ou mais mobiliários localizados dentro da porção da estrutura, e um ou mais dispositivos localizados dentro da porção da estrutura;
    receber uma seleção de uma representação visual fotorealística particular de um dispositivo particular dentro de um espaço virtual particular;
    em resposta à seleção da representação visual foto-realística particular do dispositivo particular, emitir, pelo controlador de multimídia programável (400), comandos de controle que, quando implementados, mudam o estado do dispositivo particular; e atualizar a aparência do espaço virtual particular, tal que a representação visual foto-realística do dispositivo particular, assim como as representações visuais foto-realísticas do um ou mais limites da porção da estrutura e do um ou mais mobiliários localizados dentro da porção da estrutura reflitam, o estado mudado do dispositivo particular.
    Petição 870190128577, de 05/12/2019, pág. 6/27
  2. 2 / 6
    2. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que o um ou mais dispositivos incluem uma ou mais instalações de luz, a seleção da representação visual foto-realística particular corresponde a uma representação visual foto-realística de uma instalação de luz particular, e os comandos de controle, quando implementados, mudam o estado da instalação de luz particular mudando a iluminação da instalação de luz particular.
  3. 3. Método, de acordo com a reivindicação 2, caracterizado pelo fato de que mudar a iluminação da instalação de luz particular ainda inclui:
    ligar ou desligar a instalação de luz particular.
  4. 4. Método, de acordo com a reivindicação 3, caracterizado pelo fato de que atualizar a aparência do espaço virtual particular ainda inclui:
    mostrar uma representação foto-realística do espaço físico com a instalação de luz particular iluminada.
  5. 5. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que o um ou mais dispositivos incluem um ou mais dispositivos de A/V (410, 420, 430, 440), a seleção da representação visual foto-realística particular corresponde a uma representação visual foto-realística de um dispositivo de A/V particular, e os comandos de controle, quando implementados, mudam o estado do dispositivo de A/V particular.
  6. 6. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que o um ou mais dispositivos incluem uma ou mais cortinas de janela automáticas, a seleção da representação visual foto-realística particular corresponde a uma representação visual foto-realística de uma cortina de janela automática particular, e os comandos de controle, quando implementados, elevam ou abaixam a cortina de janela automática particular.
  7. 7. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que o um ou mais espaços virtuais cada um corresponde a uma
    Petição 870190128577, de 05/12/2019, pág. 7/27
    3 / 6 porção de um espaço físico da estrutura e o um ou mais limites da porção de estrutura são limites do espaço físico e o um ou mais mobiliários localizados na porção de estrutura são mobílias presentes no espaço físico.
  8. 8. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que a interface de usuário baseada em espaço virtual inclui um ou mais espaços virtuais adicionais, pelo menos um espaço virtual adicional incluindo uma representação foto-realística de um espaço exterior e incluindo representações visuais foto-realísticas de um ou mais dispositivos localizados dentro do espaço exterior.
  9. 9. Método, de acordo com a reivindicação 1, caracterizado pelo fato de incluir ainda:
    acoplar uma unidade de controle (450), tanto diretamente ou indiretamente, ao controlador de multimídia programável (400); e em que exibir uma interface de usuário baseada em espaço virtual exibe a interface de usuário baseada em espaço virtual em uma tela de exibição da unidade de controle (450) e receber uma seleção de uma representação visual foto-realística particular de um dispositivo particular recebe a seleção na unidade de controle.
  10. 10. Método, de acordo com a reivindicação 9, caracterizado pelo fato de que a tela de exibição da unidade de controle (450) é uma exibição de tela de toque e receber uma seleção de uma representação visual foto-realística particular inclui:
    receber um toque na exibição de tela de toque sobre a representação visual foto-realística particular.
  11. 11. Método, de acordo com a reivindicação 1, caracterizado pelo fato de incluir ainda:
    prover um dispositivo móvel (460) que é configurado para se comunicar com o controlador de multimídia programável; e em que exibir uma interface de usuário baseada em espaço
    Petição 870190128577, de 05/12/2019, pág. 8/27
    4 / 6 virtual exibe a interface de usuário baseada em espaço virtual em uma tela de exibição do dispositivo móvel (460) e receber uma seleção de uma representação visual foto-realística particular de um dispositivo particular recebe a seleção no dispositivo móvel.
  12. 12. Método, de acordo com a reivindicação 11, caracterizado pelo fato de que o dispositivo móvel (460) é um de um smartphone de multimídia, um dispositivo computador de tablete de multi-propósitos, e um tocador de mídia portátil.
  13. 13. Método, de acordo com a reivindicação 1, caracterizado pelo fato de incluir ainda:
    acoplar uma televisão (440), tanto diretamente ou indiretamente, ao controlador de multimídia programável; e acoplar uma unidade de controle remoto, tanto diretamente ou indiretamente, ao controlador de multimídia programável (400);
    em que exibir uma interface de usuário baseada em espaço virtual exibe a interface de usuário baseada em espaço virtual em uma tela de exibição da televisão (440) e receber uma seleção de uma representação visual foto-realística particular de um dispositivo particular recebe a seleção na unidade de controle remoto.
  14. 14. Método, de acordo com a reivindicação 1, caracterizado pelo fato de incluir ainda:
    capturar um primeiro número de fotografias da porção da estrutura; e derivar a representação foto-realística da porção da estrutura em cada um de um segundo número de estados, em que o segundo número é maior do que o primeiro número.
  15. 15. Aparelho para controlar um ou mais dispositivos dentro de um espaço físico de uma estrutura, incluindo:
    uma tela de exibição; e
    Petição 870190128577, de 05/12/2019, pág. 9/27
    5 / 6 um controlador de multimídia programável (400) acoplado ao um ou mais dispositivos na estrutura e configurado para emitir comandos de controle que, quando implementados, mudam um estado do um ou mais dispositivos, o aparelho caracterizado pelo fato de que:
    o controlador de multimídia programável ainda configurado para causar exibição de uma interface de usuário baseada em espaço virtual na tela de exibição, a interface de usuário baseada em espaço virtual incluindo um ou mais espaços virtuais, cada espaço virtual incluindo uma representação foto-realística de uma porção da estrutura, a representação foto-realística de uma porção da estrutura incluindo representações visuais foto-realísticas de um ou mais limites da porção da estrutura, um ou mais mobiliários localizados dentro da porção de estrutura, e um ou mais dispositivos localizados dentro da porção da estrutura, a aparência do um ou mais limites da porção da estrutura e o um ou mais mobiliários localizados dentro da porção de estrutura dependente do estado do um ou mais dispositivos;
    o aparelho incluindo ainda um dispositivo de interface configurado para receber uma seleção de uma representação visual fotorealística particular de um dispositivo particular dentro de um espaço virtual particular; e em que o controlador de multimídia programável (400) é ainda configurado para, em resposta à seleção da representação visual foto-realística particular de um dispositivo, emitir comandos de controle que, quando implementados, mudam o estado do dispositivo particular.
  16. 16. Aparelho, de acordo com a reivindicação 15, caracterizado pelo fato de que o controlador de multimídia programável (400) é ainda configurado para atualizar a aparência do espaço virtual particular na tela de exibição, tal que a representação visual foto-realística do dispositivo particular, assim como as representações visuais foro-realísticas do um ou
    Petição 870190128577, de 05/12/2019, pág. 10/27
    6 / 6 mais limites da porção de estrutura e o um ou mais mobiliários localizados dentro da porção de estrutura, reflitam o estado mudado do dispositivo particular.
  17. 17. Aparelho, de acordo com a reivindicação 16, caracterizado pelo fato de que o um ou mais dispositivos incluem uma ou mais instalações de luz, a seleção da representação visual foto-realística particular corresponde a uma representação visual foto-realística de uma instalação de luz particular, e os comandos de controle, quando implementados, mudam o estado da instalação de luz particular mudando a iluminação da instalação de luz particular.
  18. 18. Aparelho, de acordo com a reivindicação 17, caracterizado pelo fato de que o controlador de multimídia programável (400) é ainda configurado para atualizar a aparência do espaço virtual particular para mostrar uma representação foto-realística do espaço físico com a instalação de luz particular iluminada.
  19. 19. Aparelho, de acordo com a reivindicação 17, caracterizado pelo fato de que a tela de exibição e a interface fazem parte de uma unidade de controle de tela de toque (450) acoplada, tanto diretamente ou indiretamente, ao controlador de multimídia programável.
BRPI1011140A 2009-06-03 2010-06-02 método e aparelho para controlar um ou mais dispositivos dentro de um recinto físico de uma estrutura. BRPI1011140B1 (pt)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US18382509P 2009-06-03 2009-06-03
PCT/US2010/001600 WO2010141076A1 (en) 2009-06-03 2010-06-02 Virtual room-based light fixture and device control

Publications (2)

Publication Number Publication Date
BRPI1011140A2 BRPI1011140A2 (pt) 2018-02-14
BRPI1011140B1 true BRPI1011140B1 (pt) 2020-04-14

Family

ID=42549347

Family Applications (1)

Application Number Title Priority Date Filing Date
BRPI1011140A BRPI1011140B1 (pt) 2009-06-03 2010-06-02 método e aparelho para controlar um ou mais dispositivos dentro de um recinto físico de uma estrutura.

Country Status (14)

Country Link
US (3) US8296669B2 (pt)
EP (1) EP2438800B1 (pt)
JP (1) JP5782433B2 (pt)
KR (1) KR101719842B1 (pt)
CN (1) CN102461344B (pt)
AU (1) AU2010257154B2 (pt)
BR (1) BRPI1011140B1 (pt)
CA (1) CA2764240C (pt)
ES (1) ES2530679T3 (pt)
IL (1) IL216756A0 (pt)
MX (1) MX2011012905A (pt)
NZ (1) NZ596852A (pt)
RU (1) RU2528016C2 (pt)
WO (1) WO2010141076A1 (pt)

Families Citing this family (124)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9126116B2 (en) 2007-09-05 2015-09-08 Sony Computer Entertainment America Llc Ranking of user-generated game play advice
US9108108B2 (en) * 2007-09-05 2015-08-18 Sony Computer Entertainment America Llc Real-time, contextual display of ranked, user-generated game play advice
US8074581B2 (en) 2007-10-12 2011-12-13 Steelcase Inc. Conference table assembly
US10631632B2 (en) 2008-10-13 2020-04-28 Steelcase Inc. Egalitarian control apparatus and method for sharing information in a collaborative workspace
US20140361954A1 (en) 2013-06-07 2014-12-11 Lewis Epstein Personal control apparatus and method for sharing information in a collaboration workspace
US10884607B1 (en) 2009-05-29 2021-01-05 Steelcase Inc. Personal control apparatus and method for sharing information in a collaborative workspace
US10775960B2 (en) 2009-06-03 2020-09-15 Savant Systems, Inc. User generated virtual room-based user interface
RU2528016C2 (ru) 2009-06-03 2014-09-10 Савант Системс Ллс Способ и устройство для управления осветительным устройством в виртуальной комнате
US10613704B2 (en) 2009-06-03 2020-04-07 Savant Systems, Llc Small screen virtual room-based user interface
US8955022B2 (en) * 2010-09-15 2015-02-10 Comcast Cable Communications, Llc Securing property
FR2969778B1 (fr) * 2010-12-22 2013-01-11 Somfy Sas Molette souris
US20130311146A1 (en) * 2011-01-28 2013-11-21 Interactive Control Solutions, Llc Design and authorization system for wireless control
KR101069269B1 (ko) 2011-03-21 2011-10-04 엘지전자 주식회사 중앙 제어기 및 이를 포함하는 조명 시스템
WO2012131544A1 (en) * 2011-03-29 2012-10-04 Koninklijke Philips Electronics N.V. Device for communicating light effect possibilities
US8914724B2 (en) * 2011-04-06 2014-12-16 Savant Systems, Llc Method and apparatus for creating and modifying graphical schedules
US9329773B2 (en) * 2011-05-19 2016-05-03 International Business Machines Corporation Scalable gesture-based device control
EP2754008A4 (en) * 2011-06-21 2015-04-22 Univ Northwestern TOUCHING INTERFACE DEVICE AND METHOD FOR USING CROSS-HOLLOWS ON HUMAN LIMBS
TW201308933A (zh) * 2011-08-11 2013-02-16 Hon Hai Prec Ind Co Ltd 電器遠端控制系統及方法
US20130049633A1 (en) * 2011-08-24 2013-02-28 Fsp-Powerland Technology Inc. Illumination system relating to light-emitting-diode lamps
US20130076651A1 (en) 2011-09-28 2013-03-28 Robert Reimann Methods and apparatus to change control centexts of controllers
US9101003B2 (en) * 2011-09-29 2015-08-04 Lite-On Electronics (Guangzhou) Limited Wireless intelligent lamp control method and system, wall switch base, and remote switch handset
RU2666770C2 (ru) * 2011-12-14 2018-09-12 Филипс Лайтинг Холдинг Б.В. Устройство для управления освещением
US9060409B2 (en) * 2012-02-13 2015-06-16 Lumenetix, Inc. Mobile device application for remotely controlling an LED-based lamp
CN103313460B (zh) * 2012-03-15 2017-04-12 富泰华工业（深圳）有限公司 照明设备控制系统及方法
US9115880B2 (en) 2012-05-04 2015-08-25 Abl Ip Holding, Llc Lighting system reconfigurable by gestural control
ES2643266T5 (es) 2012-06-04 2022-05-31 Signify Holding Bv Un método para proporcionar protección de la privacidad en sistemas de control de la iluminación en red
US10134071B2 (en) * 2012-06-11 2018-11-20 Philips Lighting Holding B.V. Methods and apparatus for configuring a lighting fixture in a virtual environment
WO2014027275A1 (en) * 2012-08-16 2014-02-20 Koninklijke Philips N.V. Controlling a system comprising one or more controllable device
US9833707B2 (en) * 2012-10-29 2017-12-05 Sony Interactive Entertainment Inc. Ambient light control and calibration via a console
US10078371B1 (en) 2012-12-07 2018-09-18 American Megatrends, Inc. Touchless controller with configurable output pins
USD734766S1 (en) * 2013-01-15 2015-07-21 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
EP2961185B1 (en) * 2013-02-20 2020-03-04 Panasonic Intellectual Property Corporation of America Control method for information apparatus and program
MY181880A (en) * 2013-02-20 2021-01-12 Panasonic Ip Corp America Method for controlling information apparatus and program
US9766799B2 (en) 2013-02-20 2017-09-19 Panasonic Intellectual Property Corporation Of America Control method for information apparatus and computer-readable recording medium
CN104350335B (zh) * 2013-02-20 2017-10-20 松下电器（美国）知识产权公司 便携信息终端、便携信息终端的控制方法以及记录介质
CN104247445B (zh) 2013-02-20 2018-10-12 松下电器（美国）知识产权公司 便携信息终端的控制方法
SG11201404877QA (en) * 2013-02-20 2014-10-30 Panasonic Ip Corp America Method for controlling information apparatus and program
WO2014128770A1 (ja) * 2013-02-20 2014-08-28 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 携帯情報端末の制御方法及びプログラム
US9198259B2 (en) 2013-02-27 2015-11-24 Nguyen Hoan Hoang Programmable touchscreen dimmer with interchangeable electronic faceplate
US9806712B2 (en) * 2013-03-14 2017-10-31 Control4 Corporation Systems and methods for gesture-based lighting control
TWI505175B (zh) * 2013-04-29 2015-10-21 Hon Hai Prec Ind Co Ltd 具有三維用戶介面的遠端控制裝置及其介面生成方法
KR20140133362A (ko) 2013-05-10 2014-11-19 삼성전자주식회사 디스플레이 장치 및 그 ui 화면 제공 방법
RU2015153221A (ru) * 2013-05-13 2017-06-19 Конинклейке Филипс Н.В. Устройство с графическим интерфейсом пользователя для управления свойствами освещения
JP5474238B1 (ja) * 2013-06-05 2014-04-16 三菱電機株式会社 レイアウト生成システム、エネルギーマネジメントシステム、端末装置、レイアウト作成方法、および、プログラム
US10568179B2 (en) * 2013-09-20 2020-02-18 Osram Sylvania Inc. Techniques and photographical user interface for controlling solid-state luminaire with electronically adjustable light beam distribution
US10939155B2 (en) 2013-11-19 2021-03-02 Comcast Cable Communications, Llc Premises automation control
JP6259368B2 (ja) * 2013-11-28 2018-01-10 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 携帯端末の制御方法
KR20150079106A (ko) 2013-12-31 2015-07-08 삼성전자주식회사 디스플레이 장치, 단말 장치 및 그 제어 방법
JP2015130168A (ja) * 2013-12-31 2015-07-16 イマージョン コーポレーションＩｍｍｅｒｓｉｏｎ Ｃｏｒｐｏｒａｔｉｏｎ 摩擦拡張制御、及び、タッチコントロールパネルのボタンを摩擦拡張制御部へと変換する方法
US9300647B2 (en) 2014-01-15 2016-03-29 Sonos, Inc. Software application and zones
JP6808490B2 (ja) * 2014-02-26 2021-01-06 サバント システムズ エルエルシーＳａｖａｎｔ Ｓｙｓｔｅｍｓ ＬＬＣ ユーザにより生成される仮想部屋ベースのユーザインタフェイス
US20180285312A1 (en) * 2014-03-04 2018-10-04 Google Inc. Methods, systems, and media for providing content based on a level of conversation and shared interests during a social event
US9716861B1 (en) 2014-03-07 2017-07-25 Steelcase Inc. Method and system for facilitating collaboration sessions
US10664772B1 (en) 2014-03-07 2020-05-26 Steelcase Inc. Method and system for facilitating collaboration sessions
CN105050227B (zh) * 2014-03-21 2019-07-26 奥斯兰姆施尔凡尼亚公司 用于控制可调整光束分布的固态泛光灯的方法和用户接口
EP2922370B1 (en) * 2014-03-21 2019-09-11 Osram Sylvania Inc. Techniques and graphical user interface for controlling solid-state luminaire with electronically adjustable light beam distribution
CN105025611B (zh) * 2014-04-16 2018-03-20 东林科技股份有限公司 无线灯具的控制界面显示方法
KR20150123374A (ko) * 2014-04-24 2015-11-04 한국전자통신연구원 가상홈 서비스 장치 및 방법
US9918180B2 (en) 2014-04-28 2018-03-13 Johnson Controls Technology Company Systems and methods for detecting and using occupant location in a building management system
US9380682B2 (en) 2014-06-05 2016-06-28 Steelcase Inc. Environment optimization for space based on presence and activities
US9955318B1 (en) 2014-06-05 2018-04-24 Steelcase Inc. Space guidance and management system and method
US9766079B1 (en) 2014-10-03 2017-09-19 Steelcase Inc. Method and system for locating resources and communicating within an enterprise
US11744376B2 (en) 2014-06-06 2023-09-05 Steelcase Inc. Microclimate control systems and methods
US10433646B1 (en) 2014-06-06 2019-10-08 Steelcaase Inc. Microclimate control systems and methods
GB2529295B (en) * 2014-06-13 2018-02-28 Harman Int Ind Media system controllers
KR20160021576A (ko) * 2014-08-18 2016-02-26 엘지이노텍 주식회사 조명 제어 장치 및 이의 조명 제어 방법
JP2017526139A (ja) * 2014-09-01 2017-09-07 フィリップス ライティング ホールディング ビー ヴィ 照明装置制御方法、コンピュータプログラム製品、ウェアラブルコンピュータデバイス及び照明装置キット
USD783632S1 (en) * 2014-09-04 2017-04-11 Flir Systems Ab Display screen or portion thereof with graphical user interface
US10042336B2 (en) * 2014-09-09 2018-08-07 Savant Systems, Llc User-defined scenes for home automation
US10310704B2 (en) * 2014-09-18 2019-06-04 Ademco Inc. System and method to have location based personalized UI updates on mobile app for connected users in security, video and home automation applications
KR102288777B1 (ko) * 2014-09-22 2021-08-11 엘지이노텍 주식회사 조명 제어 장치 및 이의 조명 제어 방법
US9852388B1 (en) 2014-10-03 2017-12-26 Steelcase, Inc. Method and system for locating resources and communicating within an enterprise
TWD180105S (zh) * 2014-11-14 2016-12-11 愛斯佩克股份有限公司 顯示面板之操作介面之部分
BE1023476A9 (nl) * 2015-01-16 2017-04-10 Giva Audiovisual Tech Bvba Enkele behuizing audio, video en lichtregelsysteem
US10982868B2 (en) 2015-05-04 2021-04-20 Johnson Controls Technology Company HVAC equipment having locating systems and methods
US10733371B1 (en) 2015-06-02 2020-08-04 Steelcase Inc. Template based content preparation system for use with a plurality of space types
JP6300112B2 (ja) * 2015-06-05 2018-03-28 株式会社ダイフク 機械設備の手動操作用タッチパネル
US20170139582A1 (en) * 2015-11-13 2017-05-18 General Electric Company Method and system for controlling an illumination device and related lighting system
CN107295502B (zh) * 2016-04-05 2020-06-30 北京京东尚科信息技术有限公司 一种信息传输装置的标识系统及方法
USD823882S1 (en) * 2016-04-20 2018-07-24 Sorenson Ip Holdings, Llc Display screen or portion thereof with a graphical user interface
US10190792B2 (en) 2016-04-27 2019-01-29 Crestron Electronics, Inc. Three-dimensional building management system visualization
DE102016005255B4 (de) * 2016-04-29 2023-01-26 Mercedes-Benz Group AG Vorrichtung und Verfahren zur Steuerung einer Innenraumbeleuchtung eines Fahrzeugs
US10481574B2 (en) 2016-05-04 2019-11-19 Johnson Controls Technology Company Building alarm management system with mobile device notifications
US9921726B1 (en) 2016-06-03 2018-03-20 Steelcase Inc. Smart workstation method and system
US10701781B2 (en) 2016-07-08 2020-06-30 Signify Holding B.V. Programming rules for controlling lighting based on user interactions with one or more actuators in one or more zones
CA3171134A1 (en) 2016-09-14 2018-03-22 Lutron Technology Company Llc Illumination device and method for adjusting periodic changes in emulation output
US9930742B1 (en) 2016-09-14 2018-03-27 Ketra, Inc. Keypad with color temperature control as a function of brightness among scenes and the momentary or persistent override and reprogram of a natural show and method thereof
US11202354B2 (en) 2016-09-14 2021-12-14 Lutron Technology Company Llc Illumination system and method that presents a natural show to emulate daylight conditions with smoothing dimcurve modification thereof
US10582596B2 (en) 2016-09-14 2020-03-03 Lutron Ketra, Llc Illumination device, system and method for manually adjusting automated fading of color temperature changes to emulate exterior daylight
US10621836B2 (en) 2016-09-14 2020-04-14 Lutron Ketra, Llc Global keypad for linking the control of shows and brightness among multiple zones illuminated by light emitting diodes arranged among a structure
US10237945B2 (en) 2016-09-14 2019-03-19 Lutron Ketra, Llc Illumination device, system and method for manually adjusting automated periodic changes in emulation output
US9795000B1 (en) 2016-09-14 2017-10-17 Ketra, Inc. Illumination device, system and method for manually adjusting automated changes in exterior daylight among select groups of illumination devices placed in various rooms of a structure
MX2019002950A (es) * 2016-09-14 2019-11-21 Lutron Ketra Llc Sistema de iluminación para control de la temperatura de color como una función de luminosidad.
GB2554914B (en) * 2016-10-14 2022-07-20 Vr Chitect Ltd Virtual reality system and method
MX2019006160A (es) * 2016-11-29 2020-02-07 Walmart Apollo Llc Representacion virtual de la actividad dentro de un entorno.
US10264213B1 (en) 2016-12-15 2019-04-16 Steelcase Inc. Content amplification system and method
GB2559321B (en) * 2017-01-10 2022-09-21 Hoare Lea Llp Graphical lighting control system
CN106817827A (zh) * 2017-02-13 2017-06-09 杭州睿者智能工程有限公司 实景反馈灯具控制方法和控制系统
CN106982499B (zh) * 2017-03-10 2019-04-30 北京工业大学 一种基于多点光源的体感智能照明系统和方法
US20180284953A1 (en) * 2017-03-28 2018-10-04 Osram Sylvania Inc. Image-Based Lighting Controller
US10561942B2 (en) 2017-05-15 2020-02-18 Sony Interactive Entertainment America Llc Metronome for competitive gaming headset
ES2972208T3 (es) 2017-09-06 2024-06-11 Savant Systems Inc Interfaz de usuario basada en un espacio virtual de pequeña pantalla
US10128914B1 (en) 2017-09-06 2018-11-13 Sony Interactive Entertainment LLC Smart tags with multiple interactions
US20190215460A1 (en) * 2018-01-09 2019-07-11 Osram Sylvania Inc. User Interface for Control of Building System Components
US10972360B2 (en) 2018-05-08 2021-04-06 Lexi Devices, Inc. Dynamic design of a lighting configuration
CN108846220A (zh) * 2018-06-23 2018-11-20 广东启源建筑工程设计院有限公司 一种可视化建筑光照设计方法及其系统
CN109286545A (zh) * 2018-09-11 2019-01-29 青岛海信智慧家居系统股份有限公司 一种智能家居设备管理方法及装置
US11863343B2 (en) 2019-02-14 2024-01-02 Savant Systems, Inc. Multi-role devices for automation environments
US11120682B2 (en) * 2019-02-20 2021-09-14 Robert Bosch Gmbh System and method for operating physical entities based on a virtual representation of the physical entities
US11626010B2 (en) * 2019-02-28 2023-04-11 Nortek Security & Control Llc Dynamic partition of a security system
US11189061B2 (en) 2019-06-25 2021-11-30 Universal City Studios Llc Systems and methods for virtual feature development
CN110374486A (zh) * 2019-07-08 2019-10-25 武汉诚信卓远科技发展有限公司 窗帘控制方法、设备及计算机可读存储介质
US11968268B2 (en) 2019-07-30 2024-04-23 Dolby Laboratories Licensing Corporation Coordination of audio devices
CN114651221A (zh) * 2019-09-11 2022-06-21 萨万特系统公司 用于家庭自动化系统的基于三维虚拟房间的用户接口
CN111487892B (zh) * 2020-03-31 2023-03-21 北京中庆现代技术股份有限公司 一种多功能可编程集成控制装置
US20210358294A1 (en) * 2020-05-15 2021-11-18 Microsoft Technology Licensing, Llc Holographic device control
EP4183230A1 (en) * 2020-07-14 2023-05-24 Lutron Technology Company LLC Lighting control system with light show overrides
CN111818705A (zh) * 2020-07-17 2020-10-23 广州彩熠灯光股份有限公司 基于3d仿真的灯具选择方法、系统、存储介质、灯光控制台
US11984739B1 (en) 2020-07-31 2024-05-14 Steelcase Inc. Remote power systems, apparatus and methods
CN112074056A (zh) * 2020-09-16 2020-12-11 陈漱文 一种灯光互动仿真系统
CN112732460A (zh) * 2021-01-05 2021-04-30 卓望数码技术（深圳）有限公司 数据状态管理方法、系统及存储介质
USD1021940S1 (en) * 2021-10-13 2024-04-09 Degussa Bank AG Display screen with financial institution communication interface
USD1018580S1 (en) * 2021-10-13 2024-03-19 Degussa Bank AG Display screen with financial institution graphical user interface
USD1021939S1 (en) * 2021-10-13 2024-04-09 Degussa Bank AG Display screen with financial institution navigation interface

Family Cites Families (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0773978A (ja) * 1993-08-31 1995-03-17 Toshiba Lighting & Technol Corp 照明演出装置
US6195122B1 (en) * 1995-01-31 2001-02-27 Robert Vincent Spatial referenced photography
US6160359A (en) * 1998-01-30 2000-12-12 Hewlett-Packard Company Apparatus for communicating with a remote computer to control an assigned lighting load
US6362822B1 (en) 1999-03-12 2002-03-26 Terminal Reality, Inc. Lighting and shadowing methods and arrangements for use in computer graphic simulations
US6463343B1 (en) * 1999-08-10 2002-10-08 International Business Machines Corporation System and method for controlling remote devices from a client computer using digital images
DE10012508A1 (de) 2000-03-15 2001-09-20 Luxmate Controls Gmbh Dornbirn System und Steuereinrichtung zum Steuern mehrerer Aktoren eines Raumes
US7202613B2 (en) 2001-05-30 2007-04-10 Color Kinetics Incorporated Controlled lighting methods and apparatus
US6756998B1 (en) * 2000-10-19 2004-06-29 Destiny Networks, Inc. User interface and method for home automation system
ATE453264T1 (de) * 2001-01-26 2010-01-15 American Power Conv Corp Verfahren und vorrichtung für netzfähige geräte, die verbunden werden können, um verbesserte zusammenarbeit, skalierbarkeit und zuverlässigkeit zu erzielen
JP2002245102A (ja) * 2001-02-14 2002-08-30 Matsushita Electric Works Ltd 建物の環境制御方法及びそのシステム
WO2002099780A2 (en) 2001-06-06 2002-12-12 Color Kinetics Incorporated System and methods of generating control signals
KR100359332B1 (ko) 2001-06-14 2002-10-31 박찬구 주파수 스캐닝 효과를 이용한 위성추적 시스템 및 그 방법
DE10314134A1 (de) * 2002-03-27 2003-10-23 Siemens Gebaeudeman & Services System und Verfahren zur Bereitstellung, Parametrierung und Steuerung von Gebäudediensten
US8042049B2 (en) * 2003-11-03 2011-10-18 Openpeak Inc. User interface for multi-device control
US7047092B2 (en) * 2003-04-08 2006-05-16 Coraccess Systems Home automation contextual user interface
JP2005098043A (ja) * 2003-08-21 2005-04-14 Misawa Homes Co Ltd 居室環境演出装置
US7167777B2 (en) * 2003-11-04 2007-01-23 Powerweb Technologies Wireless internet lighting control system
US7782384B2 (en) 2004-11-05 2010-08-24 Kelly Douglas J Digital camera having system for digital image composition and related method
FR2882843B1 (fr) * 2005-03-01 2009-08-21 Somfy Sas Interface de commande d'un systeme domotique et procedes pour son fonctionnement
US8122131B2 (en) * 2005-03-16 2012-02-21 Icontrol Networks, Inc. Takeover processes in security network integrated with premise security system
RU53510U1 (ru) * 2005-10-24 2006-05-10 Сергей Александрович Шестаков Микропроцессорная информационно-управляющая система "умный дом"
US8271881B2 (en) * 2006-04-20 2012-09-18 Exceptional Innovation, Llc Touch screen for convergence and automation system
US20070265121A1 (en) 2006-05-09 2007-11-15 Jimmy Gross Drive chain motion stabilizer
US20070268121A1 (en) * 2006-05-18 2007-11-22 Daryush Vasefi On-line portal system and method for management of devices and services
US7830417B2 (en) 2006-08-15 2010-11-09 Fuji Xerox Co., Ltd System and method for interacting with objects via a camera enhanced mobile device
US7930644B2 (en) * 2006-09-13 2011-04-19 Savant Systems, Llc Programming environment and metadata management for programmable multimedia controller
TW200842540A (en) * 2007-04-26 2008-11-01 L & C Lighting Technology Corp Method of changing light colors of a lamp and control system thereof
JP5943546B2 (ja) * 2007-05-22 2016-07-05 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． 遠隔照明制御
WO2009003169A2 (en) * 2007-06-27 2008-12-31 University Of Florida Research Foundation, Inc. Display-based interactive simulation with dynamic panorama
CN101690406A (zh) * 2007-06-29 2010-03-31 皇家飞利浦电子股份有限公司 具有用于交互地改变照明系统内设置的用户界面的光控制系统以及使用用户界面交互地改变照明系统内设置的方法
MX2010002657A (es) * 2007-09-05 2010-04-09 Savant Systems Llc Control multimedia y arquitectura de distribucion.
US8310335B2 (en) 2007-09-07 2012-11-13 Verizon Patent And Licensing Inc. Network-based access and control of home automation systems
US7760107B1 (en) * 2007-10-24 2010-07-20 Inteltech Corporation Method for programming a network of control points
TW200935972A (en) 2007-11-06 2009-08-16 Koninkl Philips Electronics Nv Light management system with automatic identification of light effects available for a home entertainment system
KR100963200B1 (ko) 2007-11-07 2010-06-10 위월드 주식회사 추적 특성이 향상된 위성 추적 안테나 시스템 및 그동작방법
JP5563481B2 (ja) * 2008-01-16 2014-07-30 コーニンクレッカ フィリップス エヌ ヴェ 光バランスによりシーンの設定を制御するためのユーザーインターフェース
NZ588888A (en) * 2008-05-02 2012-10-26 Savant Systems Llc Multimedia controller with a touch screen for selectively connecting input devices to output devices
US8140989B2 (en) 2009-02-19 2012-03-20 Kimberly-Clark Worldwide, Inc. Virtual room use simulator and room planning system
RU2528016C2 (ru) 2009-06-03 2014-09-10 Савант Системс Ллс Способ и устройство для управления осветительным устройством в виртуальной комнате
CN102034341B (zh) 2009-09-30 2012-12-12 金宝电子工业股份有限公司 控制系统及其控制画面的产生方法
US8719581B2 (en) * 2010-09-22 2014-05-06 Savant Systems, Llc Programmable multimedia controller with flexible user access and shared device configurations
EP2827605B1 (en) 2012-03-12 2016-09-28 NTT DoCoMo, Inc. Remote control system, remote control method, communication device and program

Also Published As

Publication number Publication date
US20150301716A1 (en) 2015-10-22
JP2012529147A (ja) 2012-11-15
CN102461344A (zh) 2012-05-16
KR101719842B1 (ko) 2017-03-24
US10146398B2 (en) 2018-12-04
RU2011152270A (ru) 2013-07-20
CA2764240A1 (en) 2010-12-09
ES2530679T3 (es) 2015-03-04
CA2764240C (en) 2017-08-22
EP2438800A1 (en) 2012-04-11
EP2438800B1 (en) 2014-11-19
MX2011012905A (es) 2012-03-29
JP5782433B2 (ja) 2015-09-24
US20100312366A1 (en) 2010-12-09
RU2528016C2 (ru) 2014-09-10
BRPI1011140A2 (pt) 2018-02-14
AU2010257154A1 (en) 2012-01-12
NZ596852A (en) 2013-03-28
IL216756A0 (en) 2012-03-01
WO2010141076A1 (en) 2010-12-09
KR20120027454A (ko) 2012-03-21
AU2010257154B2 (en) 2014-02-20
CN102461344B (zh) 2014-12-17
US8296669B2 (en) 2012-10-23
US20120284672A1 (en) 2012-11-08
US9055627B2 (en) 2015-06-09

Similar Documents

Publication Publication Date Title
BRPI1011140B1 (pt) método e aparelho para controlar um ou mais dispositivos dentro de um recinto físico de uma estrutura.
US11688140B2 (en) Three dimensional virtual room-based user interface for a home automation system
US10802668B2 (en) Small screen virtual room-based user interface
JP6808490B2 (ja) ユーザにより生成される仮想部屋ベースのユーザインタフェイス
JP7312162B2 (ja) 小画面の仮想部屋ベースのユーザインタフェイス

Legal Events

Date Code Title Description
B06F Objections, documents and/or translations needed after an examination request according [chapter 6.6 patent gazette]
B06T Formal requirements before examination [chapter 6.20 patent gazette]
B06A Patent application procedure suspended [chapter 6.1 patent gazette]
B09A Decision: intention to grant [chapter 9.1 patent gazette]
B16A Patent or certificate of addition of invention granted [chapter 16.1 patent gazette]

Free format text: PRAZO DE VALIDADE: 20 (VINTE) ANOS CONTADOS A PARTIR DE 02/06/2010, OBSERVADAS AS CONDICOES LEGAIS.

B25A Requested transfer of rights approved

Owner name: SAVANT SYSTEMS, INC. (US)