ES2832485T3 - Procesamiento de entrada de usuario para controlar dispositivos remotos - Google Patents

Procesamiento de entrada de usuario para controlar dispositivos remotos Download PDF

Info

Publication number
ES2832485T3
ES2832485T3 ES16751000T ES16751000T ES2832485T3 ES 2832485 T3 ES2832485 T3 ES 2832485T3 ES 16751000 T ES16751000 T ES 16751000T ES 16751000 T ES16751000 T ES 16751000T ES 2832485 T3 ES2832485 T3 ES 2832485T3
Authority
ES
Spain
Prior art keywords
alternative
user input
device identifier
user
electronic device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
ES16751000T
Other languages
English (en)
Inventor
Julien Riera
Lukasz Roth
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Orange SA
Original Assignee
Orange SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Orange SA filed Critical Orange SA
Application granted granted Critical
Publication of ES2832485T3 publication Critical patent/ES2832485T3/es
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/20—Binding and programming of remote control devices
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/30—User interface
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/30—User interface
    • G08C2201/31—Voice input

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Un método para gestionar un dispositivo electrónico remoto (10.1-10.4) que usa una interfaz de usuario (401) en un dispositivo electrónico (1), estando el dispositivo electrónico operativamente conectado a una base de datos (13) que asocia, para cada identificador de dispositivo dado, valores de argumento alternativos y elementos gráficos, comprendiendo el método: recibir (200) una entrada de usuario a través de la interfaz de usuario en el dispositivo electrónico; determinar (201) un primer identificador de dispositivo basándose en la entrada de usuario; acceder (203) a la base de datos para recuperar (204) un primer elemento gráfico asociado con un primer valor de argumento alternativo del primer identificador de dispositivo, coincidiendo dicho primer valor de argumento alternativo con la entrada de usuario; representar (205) la entrada de usuario emitiendo el primer elemento gráfico recuperado.

Description

DESCRIPCIÓN
Procesamiento de entrada de usuario para controlar dispositivos remotos
La presente invención se refiere en general al control de dispositivos electrónicos remotos, tales como objetos conectados, por ejemplo.
Halla aplicaciones en dispositivos electrónicos tales como portátiles, paneles táctiles, teléfonos móviles, teléfonos inteligentes, dispositivos llevables o relojes inteligentes.
En lo que sigue, consideramos, para fin ilustrativo de manera exclusiva, dispositivos electrónicos como teléfonos móviles y dispositivos electrónicos remotos como objetos conectados.
Pueden controlarse remotamente objetos conectados por teléfonos móviles, por ejemplo por medio de una aplicación instalada en los teléfonos móviles que proporciona una interfaz de usuario.
Se pretende por "objecto conectado" cualquier objeto que pueda realizar una función dada, de acuerdo con parámetros opcionales, y que comprende una interfaz de red para acceder a un punto de acceso, accediendo de esta manera a un servidor remoto (a través de una red tal como internet, por ejemplo, o una red de Bluetooth local), o para recibir comandos de un teléfono móvil (o cualquier dispositivo electrónico).
Por ejemplo, una máquina de café conectada puede realizar funciones básicas tales como "encender" y "apagar". Sin embargo, "encender" puede abarcar varias funciones tales como "preparar un café latte", "preparar un expreso", "preparar un cappuccino". Además, cada dispositivo y función puede estar también asociado con parámetros. Por ejemplo, los parámetros pueden ser un volumen del café que va a prepararse. Los parámetros pueden comprender por lo tanto "2 centilitros", "5 centilitros", etc.
Los dispositivos electrónicos tales como teléfonos móviles que se usan para controlar remotamente objetos conectados que proporcionan ahora varias maneras para recibir una entrada de usuario y convertirla en una instrucción para un objeto conectado remoto: pantalla táctil, teclado numérico, micrófono acoplado con una aplicación de voz a texto, etc.
El usuario por lo tanto necesita indicar información que posibilita que el teléfono móvil genere una instrucción para el objeto conectado remoto.
Tal información puede comunicarse usando argumentos complementarios de diferentes tipos:
- un identificador de dispositivo para identificar el objeto conectado que va a controlarse o el grupo de objetos conectados que van a controlarse;
- un identificador de función para identificar la función que va a realizarse por el objeto conectado identificado; - opcionalmente, un identificador de parámetro que identifica un parámetro de la función identificada que va a realizarse por el objeto conectado identificado.
Para indicar esta información, los valores de argumentos pueden incluirse en una entrada de usuario tal como una frase "podrías encender la luz del dormitorio en azul". Esta frase comprende tres argumentos, de diferentes tipos: un identificador de dispositivo que tiene el valor "luz de dormitorio", un identificador de función que tiene el valor "encender" y un identificador de parámetro que tiene el valor "azul".
Sin embargo, ya que el tamaño de estos dispositivos electrónicos es una preocupación creciente, sus pantallas tienden a ser cada vez más pequeñas. En particular, las áreas pretendidas para recibir entradas de usuario son particularmente pequeñas. Además, algunos usuarios específicos (niños, ancianos, etc.) pueden tener un problema de introducción de datos en estas áreas de entrada pequeñas y condensadas.
Para resolver estos problemas, se han propuesto métodos donde se usan los elementos gráficos en lugar de las palabras (caracteres) para representar entradas de usuario. El uso de estos elementos gráficos proporciona una interfaz optimizada ya que hace posible la visualización de más información en una pantalla más pequeña. Además, los niños o ancianos tienen más facilidad para distinguir lo que se introduce en la pantalla, incluso en pantallas pequeñas.
Para sustituir la entrada de usuario con elementos gráficos, las palabras se extraen normalmente de una entrada de usuario y se comparan con bases de datos grandes que componen correspondencias de uno a uno entre palabras y elementos gráficos. Ya que están presentes muchas palabras en estas bases de datos, la entrada de usuario debe ser precisa de modo que se extrae la palabra correcta y se recupera el elemento gráfico correcto de las bases de datos.
Sin embargo, los errores de entrada son frecuentes, especialmente cuando provienen de pantallas pequeñas y de niños o ancianos. Esto es incluso más problemático en caso de una entrada de usuario que comprende una conversión de voz a texto, que no es siempre fiable. Estos problemas son particularmente importantes cuando se usan entradas de usuario para controlar remotamente objetos conectados, ya que los usuarios están en general en una situación donde no pueden centrarse en el dispositivo electrónico que controla remotamente el objeto conectado. Además, hallar una palabra dada en una base de datos grande requiere una gran cantidad de recursos de procesamiento.
El documento US 2011/0313775 desvela un método implementado por ordenador para compartición de información entre un dispositivo informático portátil y un sistema de televisión.
El documento US 2012/0030712 desvela un método y sistema para control remoto integrado en red que incluye activación por voz de un contexto de interfaz de usuario en un dispositivo de control remoto.
Para tratar esta necesidad, un primer aspecto de la invención se refiere a un método para gestionar un dispositivo electrónico remoto usando una interfaz de usuario en un dispositivo electrónico, estando conectado operativamente el dispositivo electrónico a una base de datos que asocia, para cada identificador de dispositivo dado, valores de argumento alternativos y elementos gráficos, comprendiendo el método:
recibir una entrada de usuario a través de la interfaz de usuario en el dispositivo electrónico;
determinar un primer identificador de dispositivo basándose en la entrada de usuario;
acceder a la base de datos para recuperar un primer elemento gráfico asociado con un primer valor de argumento alternativo del primer identificador de dispositivo, coincidiendo el primer valor de argumento alternativo con la entrada de usuario;
representar la entrada de usuario emitiendo el primer elemento gráfico recuperado.
Por lo tanto, la base de datos a partir de la cual se recuperan elementos gráficos almacena asociaciones entre elementos gráficos y valores de argumento alternativos, para respectivos identificadores de dispositivo, reduciendo de esta manera los recursos de procesamiento que se requieren para recuperar un elemento gráfico. De hecho, puede realizarse una etapa de "filtración" preliminar determinando el primer identificador de dispositivo.
De acuerdo con algunas realizaciones de la invención, tras la recepción de la entrada de usuario, el método puede comprender adicionalmente detectar un valor de argumento inicial en la entrada de usuario, y el primer valor de argumento alternativo puede coincidir con el valor de argumento inicial detectado.
Como alternativa, pueden usarse datos contextuales de la entrada de usuario para determinar el primer valor alternativo. Para este fin, puede tenerse en cuenta un estado actual del dispositivo electrónico remoto identificado por el primer identificador de dispositivo. Por ejemplo, si el dispositivo electrónico remoto es una luz, que incluye funciones de encender y apagar únicamente, y si la luz está actualmente encendida, puede deducirse de una entrada de usuario tal como "luz por favor", que el valor de función (valor de argumento) que va a seleccionarse como un primer valor de argumento alternativo es "encender".
Sin embargo, la precisión de la selección del primer valor de argumento alternativo se mejora cuando la entrada de usuario comprende el valor de argumento inicial.
En algunas realizaciones, el método puede comprender adicionalmente recibir datos contextuales con la entrada de usuario, los valores de argumento alternativos del primer identificador de dispositivo pueden filtrarse usando los datos contextuales, y el primer valor de argumento alternativo puede elegirse entre los valores de argumento alternativos filtrados.
Esto mejora la robustez del control remoto ya que se asegura que el valor de argumento alternativo respete algunas condiciones contextuales.
De acuerdo con algunas realizaciones, el método puede comprender adicionalmente recibir datos contextuales con la entrada de usuario, y el primer identificador de dispositivo puede determinarse usando los datos contextuales.
Esto mejora la precisión y robustez de la determinación del primer identificador de dispositivo. El control remoto por lo tanto es más preciso puesto que se asegura que los valores de argumento alternativos corresponden al identificador de dispositivo correcto (el pretendido por el usuario).
Como alternativa o en complemento, los datos contextuales pueden comprender al menos uno entre:
- ubicación del usuario;
- datos de pronóstico del tiempo;
- datos de temperatura;
- datos de reloj;
- datos de presencia;
- un perfil de usuario; o
- derechos de usuario para acceder y controlar dispositivos electrónicos remotos.
De acuerdo con algunas realizaciones, el método puede comprender adicionalmente recuperar los otros elementos gráficos que están asociados con los valores de argumento alternativos del primer identificador de dispositivo, distinto del primer valor de argumento alternativo, el primer elemento gráfico puede ser un elemento seleccionable, emitiendo la selección por el usuario del elemento seleccionable al menos alguno de los elementos gráficos recuperados, y tras la selección de un segundo elemento gráfico, el primer elemento gráfico puede sustituirse por el segundo elemento gráfico.
La modificación de la entrada de usuario se simplifica y acelera de esta manera, ya que el usuario no tiene que introducir un nuevo argumento escribiendo caracteres u obteniendo una entrada de voz.
De acuerdo con algunas realizaciones, el método puede comprender adicionalmente enviar una instrucción a un dispositivo electrónico remoto identificado por el primer identificador de dispositivo, comprendiendo la instrucción el valor de argumento asociado con el elemento gráfico emitido.
En complemento, la instrucción puede enviarse al dispositivo electrónico remoto tras la validación por el usuario. Esto evita manipulaciones de error por el usuario.
De acuerdo con algunas realizaciones de la invención, los valores de argumento alternativos de un identificador de dispositivo dado comprenden valores de función alternativos, identificando cada valor de función alternativo una función que va a realizarse por un dispositivo identificado por el primer identificador de dispositivo, y el primer valor de argumento alternativo es un valor de función.
Esto asegura que las instrucciones enviadas al dispositivo electrónico remoto puedan ejecutarse y esto también limita la complejidad asociada con la búsqueda del primer valor de argumento alternativo.
En complemento, los valores de argumento alternativos de un identificador de dispositivo dado comprenden adicionalmente valores de parámetro alternativos que identifican parámetros de funciones realizadas por el dispositivo identificado por el primer identificador de dispositivo, y se recupera un segundo elemento gráfico de la base de datos, estando asociado el segundo elemento gráfico con un segundo valor de argumento alternativo del primer identificador de dispositivo, coincidiendo el segundo valor de argumento alternativo con la entrada de usuario y siendo un valor de parámetro alternativo. Como una variante, en lugar de coincidir con la entrada de usuario, el segundo valor de argumento alternativo puede ser compatible con datos contextuales en una malla de compatibilidad.
Esto posibilita enriquecer la entrada de usuario ya que puede especificarse adicionalmente el parámetro de las funciones.
En algunas realizaciones, el método comprende adicionalmente visualizar el elemento gráfico en el dispositivo electrónico remoto.
Esto posibilita verificar que la instrucción enviada corresponde a la entrada de usuario.
Un segundo aspecto de la invención se refiere a un producto de programa informático registrado en un medio de almacenamiento y ejecutable por un ordenador en forma de un software que incluye al menos una configuración de módulo de software para implementar el método de acuerdo con el primer aspecto de la invención.
Un tercer aspecto de la invención se refiere a un dispositivo electrónico para gestionar un dispositivo electrónico remoto usando una interfaz de usuario en un dispositivo electrónico, estando conectado operativamente el dispositivo electrónico a una base de datos que asocia, para cada identificador de dispositivo dado, valores de argumento alternativos y elementos gráficos, comprendiendo el dispositivo electrónico:
una interfaz de usuario dispuesta para recibir una entrada de usuario;
un procesador dispuesto para realizar las siguientes etapas:
determinar un primer identificador de dispositivo basándose en la entrada de usuario;
acceder a la base de datos para recuperar un primer elemento gráfico asociado con un primer valor de argumento alternativo del primer identificador de dispositivo, coincidiendo el primer valor de argumento alternativo con la entrada de usuario;
representar la entrada de usuario emitiendo el primer elemento gráfico recuperado.
Un cuarto aspecto de la invención se refiere a un sistema que comprende el dispositivo electrónico de acuerdo con el tercer aspecto de la invención y una base de datos que asocia, para cada identificador de dispositivo dado, valores de argumento alternativos y elementos gráficos.
La presente invención se ilustra a modo de ejemplo, y no por medio de limitación, en las figuras de los dibujos adjuntos, en los que números de referencia similares hacen referencia a elementos similares en los que:
- La Figura 1 representa un sistema de acuerdo con algunas realizaciones de la invención;
- La Figura 2 es un diagrama de flujo que ilustra las etapas de un método de acuerdo con algunas realizaciones de la invención;
- Las Figuras 3a a 3d ilustran una interfaz de usuario gráfica de un terminal de usuario de acuerdo con algunas realizaciones de la invención;
- La Figura 4 ilustra un terminal de usuario de acuerdo con algunas realizaciones de la invención.
La Figura 1 ilustra un sistema de acuerdo con algunas realizaciones de la invención.
El sistema comprende un dispositivo electrónico 1 tal como un terminal de usuario. Como se ilustra en la Figura 1, el dispositivo electrónico 1 puede ser un teléfono móvil tal como un teléfono inteligente. La invención no está limitada a este ejemplo ilustrativo, y también abarca almohadillas táctiles, portátiles, ordenadores de sobremesa, etc.
El dispositivo electrónico 1 puede usarse por el usuario para controlar dispositivos electrónicos remotos tal como objetos conectados. En lo que sigue, "dispositivos electrónicos remotos" se denominan "objetos conectados", para fines de ilustración.
El usuario del dispositivo electrónico 1 (también denominado "terminal de usuario 1" posteriormente) puede tener varios objetos conectados ubicados en diferentes lugares:
- una máquina de café conectada 10.1 ubicada en casa;
- una luz de dormitorio 10.2 ubicada en casa;
- una luz de cocina 10.3 ubicada en casa;
- una luz de coche 10.4 ubicada en un coche.
Los objetos conectados 10.1-10.3 están configurados para acceder a un primer punto de acceso 11.1 y el objeto conectado 10.4 está configurado para acceder a un segundo punto de acceso 11.2. No se impone restricción a la tecnología de acceso usada por los objetos conectados: pueden preverse medios alámbricos o inalámbricos. En lo que sigue, consideramos el primer y segundo puntos de acceso como que son puntos de acceso Wi-fi.
A través de los puntos de acceso 11.1 y 11.2, los objetos conectados pueden acceder a una red 12, tal como internet, y comunicarse con una plataforma de servicio remoto 14, por ejemplo para cargar eventos o para recibir instrucciones. Como alternativa, la red 12 puede ser una red de Bluetooth local y la plataforma de servicio remoto 14 se sustituye por una entidad de gestión local. También se prevén varias plataformas de servicio respectivas para los diferentes objetos conectados 10.1 a 10.4, y se ha representado una plataforma de servicio única 14 para fines de ilustración exclusivamente.
La plataforma de servicio 14 puede accederse también por el terminal de usuario 1. Por ejemplo, el terminal de usuario puede conectar el punto de acceso 11.1 cuando el usuario está en casa. Como alternativa, el usuario puede usar una red móvil de 3G/4G para acceder a la plataforma de servicio 14 con el terminal de usuario 1.
Una aplicación especializada a la plataforma de servicio puede instalarse en el terminal de usuario 1. A través de esta aplicación, el usuario puede entrar en entradas de usuario que se convierten a las instrucciones. Las instrucciones pueden a continuación usarse para controlar los objetos conectados 10.1-10.4. Para este fin, las instrucciones pueden reenviarse a la plataforma de servicio 14, que a continuación reenvía (y opcionalmente modifica o enriquece) las instrucciones a los objetos conectados dirigidos 10.1-10.4.
El terminal de usuario 1 también está conectado operativamente a una base de datos 13. En la figura 1, la base de datos 13 puede accederse a través de la red 12. Como alternativa, la base de datos 13 puede almacenarse en el terminal de usuario 1 o puede integrarse en la plataforma de servicio 14.
El sistema ilustrado en la figura 1 se proporciona únicamente para fines de ilustración. Por ejemplo, la red usada para controlar los objetos conectados 10.1-10.4 puede ser una red de acceso local, tal como una red de Bluetooth por ejemplo, y, en ese caso, no hay necesidad de acceder a una plataforma de servicio remoto.
Como se detalla en lo sucesivo, la base de datos 13 almacena, para cada identificador de dispositivo entre una pluralidad de identificadores de dispositivo, valores de argumento alternativos y elementos gráficos. Por lo tanto, para cada objeto conectado 10.1-10.4, identificado por un respectivo identificador de dispositivo, valores de argumento alternativos corresponden a elementos gráficos. Valores de argumento alternativos pueden comprender valores de función alternativos y valores de parámetro alternativos. Para un dispositivo identificado dado por un primer identificador de dispositivo, cada valor de función alternativo identifica una función que va a realizarse (y que puede realizarse) por el dispositivo dado, y un valor de parámetro alternativo identifica parámetros de funciones que van a realizarse por el dispositivo dado.
La base de datos 13 puede almacenar también una malla de compatibilidad entre los valores de argumento alternativos y datos contextuales. Los valores de argumento alternativos pueden filtrarse por lo tanto por datos contextuales usando la malla de compatibilidad.
Se pretende por "malla de compatibilidad", cualquier estructura de datos que vincula elementos que son compatibles juntos. Basándose en un elemento dado, es posible recuperar todos los otros elementos que se vinculan a este elemento dado en la malla de compatibilidad.
No se impone restricción al formato de la malla de compatibilidad. La malla de compatibilidad se entenderá mejor en la descripción posterior.
Una malla de compatibilidad de este tipo puede estar configurada por el usuario, por ejemplo usando el terminal de usuario 1 o cualquier dispositivo que está adaptado para acceder a la base de datos 13.
Como alternativa, la malla de compatibilidad puede ser configurable por otra persona distinta del usuario (por ejemplo un pariente en caso de que el usuario sea un niño, o cualquier persona que esté autorizada a gestionar la malla de compatibilidad del usuario). La malla de compatibilidad puede también ser configurable por un fabricante de alguno de los objetos conectados, o por la plataforma de servicio 14.
La Figura 2 es un diagrama que ilustra las etapas de un método para gestionar un dispositivo electrónico remoto de acuerdo con algunas realizaciones de la invención.
En la etapa 200, se recibe una entrada de usuario a través de una interfaz de usuario del terminal de usuario 1. No se impone restricción a la primera entrada de usuario, que pueda ser una frase pronunciada obtenida por un micrófono y convertida a texto, o una entrada de cadena de caracteres usando una almohadilla táctil o un teclado. En la etapa 200, el terminal de usuario 201 puede recibir también datos contextuales. No se impone restricción a lo que se pretende por datos contextuales. Los datos contextuales pueden comprender al menos un elemento entre
- la ubicación del usuario obtenida por un sensor, obtenida por ejemplo a través de un GPS del terminal de usuario, u obtenida usando la ubicación del punto de acceso al que el terminal de usuario 1 accede a la red 12;
- datos de pronóstico del tiempo obtenidos mediante una aplicación instalada en el terminal de usuario 1 por ejemplo; o
- datos de temperatura obtenidos por un sensor del terminal de usuario 1, u obtenidos mediante la red 12; o
- datos de reloj que indican el tiempo en el que se recibe la entrada de usuario. Los datos de reloj pueden recuperarse de una aplicación de reloj del terminal de usuario 1 por ejemplo; u
- otros datos contextuales obtenidos por un sensor, recuperados de una entidad externa o introducidos por el usuario en la entrada de usuario.
Basándose en la entrada de usuario, se determina un primer identificador de dispositivo en la etapa 202. Por ejemplo, la entrada de usuario puede comprender un valor de argumento del tipo de identificador de dispositivo, tal como "máquina de café", "luz", "luz de dormitorio", "luz de coche", etc. El objeto conectado que corresponde al valor de argumento se recupera por el terminal de usuario 1. En caso de que el valor de argumento no corresponda a alguno de los objetos conectados 10.1-10.4 del usuario, puede visualizarse un mensaje de error en el terminal de usuario 1 o puede visualizarse una lista de identificadores de dispositivo que son compatibles con datos contextuales para su selección por el usuario.
Además, los datos contextuales pueden usarse para determinar el primer identificador de dispositivo. Por ejemplo, si el valor de argumento en la entrada de usuario es "luz", y el usuario posee varias luces ("luz de coche", "luz de dormitorio", "luz de cocina"), pueden usarse datos contextuales que indican que el usuario está en el coche para deducir el identificador de dispositivo "luz de coche".
En la etapa 202, el método puede comprender también detectar un valor de argumento inicial en la entrada de usuario (distinto de un valor de argumento del tipo de identificador de dispositivo). Por ejemplo, el valor de argumento inicial puede ser un valor de parámetro o un valor de función, como se entenderá mejor cuando se hace referencia a las Figuras 3a a 3d.
En la etapa 203, el terminal de usuario 1 accede a la base de datos 13, y recupera, en la etapa 204, un primer elemento gráfico asociado con un primer valor de argumento alternativo del primer identificador de dispositivo, el primer valor de argumento alternativo que coincide con la entrada de usuario.
Por ejemplo, si el valor de argumento inicial se ha detectado en la etapa 202, el primer valor de argumento alternativo coincide con el valor de argumento inicial. Si el valor de argumento inicial es el valor de función "encender", entonces el primer valor de argumento alternativo también es el valor de función "encender". Sin embargo, incluso cuando no se ha detectado valor de argumento inicial en la etapa 202, puede determinarse el primer argumento alternativo que coincide con la entrada de usuario. Por ejemplo, si la luz del dormitorio está actualmente apagada, puede deducirse de la entrada de usuario "luz de dormitorio por favor", que el usuario desea encender la luz de dormitorio, y el primer valor de argumento alternativo es por lo tanto el valor de función "encender".
Además, si se han recibido datos contextúales por el terminal de usuario 1, los valores de argumento alternativos del primer identificador de dispositivo pueden filtrarse usando los datos contextuales y la malla de compatibilidad, y el primer elemento gráfico asociado con el primer valor de argumento alternativo se recupera a continuación de los valores de argumento alternativos filtrados.
Por ejemplo, los datos contextuales pueden ser datos de pronóstico del tiempo. Cuando los datos de pronóstico del tiempo indican que el tiempo es soleado, pueden filtrarse los valores de función de la luz de la cocina. Por ejemplo, únicamente la función "apagar" puede ser compatible con los datos contextuales "soleado" en la malla de compatibilidad, mientras que "encender" no es compatible con ella. Por lo tanto, únicamente el elemento gráfico asociado con la función "apagar" puede recuperarse en la base de datos 13 para el identificador de dispositivo "luz de cocina"
En la etapa 205, la entrada de usuario se representa emitiendo el primer elemento gráfico recuperado en el terminal de usuario 1.
Por lo tanto, el método posibilita realizar la búsqueda de un valor de argumento en una subparte de la base de datos 13: de hecho, únicamente se tienen en cuenta los valores de argumentos del dispositivo identificado por el primer identificador de dispositivo como alternativas cuando se determina el primer valor de argumento alternativo. Los recursos de procesamiento requeridos por lo tanto se reducen en comparación con las soluciones de la técnica anterior. Además, ya que el primer elemento gráfico recuperado se elige entre valores de argumento alternativos de un identificador de dispositivo determinado, puede detectarse y evitarse el usuario erróneo, puesto que únicamente los valores de parámetro y función que pueden realizarse por el dispositivo identificado pueden seleccionarse como el primer valor de argumento alternativo.
De acuerdo con una realización de la invención, en la etapa 204, todos los otros elementos gráficos que están asociados con los valores de argumento alternativos (opcionalmente filtrados por los datos contextuales y la malla de compatibilidad) distintos del primer valor de argumento alternativo, puede recuperarse también de la base de datos. Además, como la etapa 205, el primer elemento gráfico emitido puede ser un elemento seleccionable.
En ese caso, en una etapa opcional 206, tras la selección del primer elemento gráfico, todos los elementos gráficos recuperados se emiten, de modo que el usuario puede seleccionar uno de los elementos gráficos emitidos. Tras la selección de un segundo elemento gráfico por el usuario, el primer elemento gráfico se sustituye por el segundo elemento gráfico en la pantalla del terminal de usuario 1.
En la etapa 207, el usuario puede validar la entrada de usuario representada usando el primer elemento gráfico (o el segundo elemento gráfico que sustituye el primer elemento gráfico). Esta etapa de validación por el usuario es opcional. Por ejemplo, la instrucción puede validarse automáticamente después del agotamiento de un temporizador, o puede validarse directamente después de la sustitución del primer elemento gráfico por el segundo elemento gráfico. En la etapa 208, opcionalmente después de la validación por el usuario en la etapa 207, se envía una instrucción al objeto conectado identificado por el primer identificador de dispositivo, comprendiendo la instrucción el valor de argumento asociado con el elemento gráfico emitido (primer o segundo elemento gráfico). Por ejemplo, la instrucción puede enviarse a la plataforma de servicio 14 con el primer identificador de dispositivo, y la plataforma de servicio 14 a continuación reenvía (y opcionalmente modifica o enriquece) la instrucción a los objetos conectados identificados. Las Figuras 3a a 3d ilustran una interfaz de usuario en el terminal de usuario 1, de acuerdo con algunas realizaciones de la invención.
Como se ilustra en la figura 3a, la primera entrada de usuario puede visualizarse en la pantalla táctil como una instrucción gráfica 300, mientras que el usuario está escribiendo en ella (o mientras que el usuario está hablando en un micrófono). En el ejemplo específico mostrado en las figuras 3a a 3d, la primera entrada "¿Podría apagar la luz de dormitorio en azul?" se recibe por el terminal de usuario 1, en la etapa 200.
Después de la adquisición de la primera entrada de usuario, pueden detectarse tipos de argumento en la etapa 202 como se muestra en la Figura 3b. En este ejemplo, se detectan tres tipos de argumento que tienen respectivos valores de argumentos iniciales en la primera entrada:
- un identificador de función 301.1 que tiene el valor de función inicial "apagar";
- un identificador de dispositivo 301.2 que tiene el valor de dispositivo inicial "luz de dormitorio";
- un identificador de parámetro 301.3 que tiene el valor de parámetro inicial "azul".
El identificador de dispositivo 301.2 se usa para determinar el primer identificador de dispositivo en la etapa 201. El primer identificador de dispositivo por lo tanto es "luz de dormitorio" que identifica el objeto conectado 10.2.
Como se explica, la presente invención propone recuperar elementos gráficos para los valores de argumentos detectados en la entrada de usuario 300.
Para este fin, la base de datos 13 puede accederse por el terminal de usuario 1. Cuando se accede a la base de datos 13, el terminal de usuario indica el primer identificador de dispositivo determinado "luz de dormitorio", de modo que únicamente se consideran los valores de argumento alternativos de la luz de dormitorio 10.2. El valor de función inicial "apagar" se usa a continuación para determinar el primer valor de argumento alternativo entre la pluralidad de valores de argumento alternativos. Por ejemplo, los valores de argumento alternativos del identificador de luz de dormitorio comprende:
- tres valores de función alternativos: apagar, encender intensidad superior, apagar intensidad inferior; y
- tres valores de parámetro alternativos: azul, verde, blanco.
"Apagar" por lo tanto se identifica como el primer valor de argumento alternativo, y el primer elemento gráfico asociado se recupera en la etapa 204. El primer elemento gráfico se emite a continuación en el terminal de usuario 1. Haciendo referencia a la Figura 3c, el primer elemento gráfico se referencia 302.1.
Un segundo elemento gráfico puede recuperarse también. De hecho, el valor de parámetro inicial "azul" se detecta en la entrada de usuario, y hace coincidir el segundo valor de argumento alternativo "azul" en la base de datos 13. El segundo elemento gráfico asociado con el segundo valor de argumento alternativo "azul" también se recupera en la etapa 204, y se emite en el terminal de usuario 1.
El segundo elemento gráfico "azul" se referencia 302.3 en la figura 3c.
Como se ilustra en la figura 3c, un elemento gráfico 302.2 puede recuperarse también de la base de datos 13 para el primer identificador de dispositivo "luz de dormitorio".
Como se ha explicado anteriormente, el primer elemento gráfico 302.1 (y también el segundo elemento gráfico) puede ser un elemento seleccionable.
Tras la selección por el usuario del elemento seleccionable 302.1, y como se ilustra en la figura 3d, se emite una ventana 303 en el terminal de usuario 1, comprendiendo la ventana el primer elemento gráfico y los elementos gráficos de los valores de parámetro alternativos distintos del primer valor de argumento alternativo.
Un tercer elemento gráfico 304.1 representa el valor de función "encender intensidad superior" y un cuarto elemento gráfico 304.2 representa el valor de función "encender intensidad inferior". La selección del usuario de un valor de argumento alternativo se facilita de esta manera, especialmente para ancianos o niños, y evita tener que introducir un nuevo valor de argumento usando un teclado o una pantalla táctil.
La Figura 4 muestra un dispositivo electrónico 1 (o terminal de usuario 1) de acuerdo con algunas realizaciones de la invención.
El terminal de usuario 1 comprende una memoria de acceso aleatorio 403 y un procesador 402 que puede almacenar instrucciones para realizar las etapas de un método como se ha descrito anteriormente cuando se hace referencia a la Figura 2.
El terminal de usuario 1 puede comprender también una base de datos 404 para almacenar datos resultantes del método de acuerdo con la invención. Por ejemplo, la base de datos 404 puede almacenar los datos que se recuperan de la base de datos 13 (asociaciones entre los valores de argumento alternativos y el elemento gráficos, malla de compatibilidad) y puede almacenar identificadores de usuario. De acuerdo con una realización, la base de datos 13 puede almacenarse en el terminal de usuario, en la base de datos 404.
El terminal de usuario 1 comprende una interfaz de usuario 401 para recibir selecciones y entradas de usuario por el usuario. La interfaz de usuario 401 puede comprender, por ejemplo, una pantalla táctil, un teclado virtual o físico, botones de presión, una cámara y/o un micrófono acoplados a una aplicación de voz a texto. El terminal de usuario 1 también comprende una interfaz de red 405 para comunicarse con la red 12 y en particular para transmitir las entradas de usuario a los objetos conectados seleccionados. La interfaz de red puede ser una interfaz inalámbrica (Ethernet) o alámbrica (Bluetooth, 2G, 3G, 4G, Wi-fi, etc.).

Claims (14)

REIVINDICACIONES
1. Un método para gestionar un dispositivo electrónico remoto (10.1-10.4) que usa una interfaz de usuario (401) en un dispositivo electrónico (1), estando el dispositivo electrónico operativamente conectado a una base de datos (13) que asocia, para cada identificador de dispositivo dado, valores de argumento alternativos y elementos gráficos, comprendiendo el método:
recibir (200) una entrada de usuario a través de la interfaz de usuario en el dispositivo electrónico;
determinar (201) un primer identificador de dispositivo basándose en la entrada de usuario;
acceder (203) a la base de datos para recuperar (204) un primer elemento gráfico asociado con un primer valor de argumento alternativo del primer identificador de dispositivo, coincidiendo dicho primer valor de argumento alternativo con la entrada de usuario;
representar (205) la entrada de usuario emitiendo el primer elemento gráfico recuperado.
2. El método de acuerdo con la reivindicación 1, en donde, tras la recepción de la entrada de usuario, el método comprende adicionalmente detectar (202) un valor de argumento inicial en la entrada de usuario, y en donde el primer valor de argumento alternativo hace coincidir el valor de argumento inicial detectado.
3. El método de acuerdo con la reivindicación 1 o 2, en donde el método comprende adicionalmente recibir (200) datos contextuales con la entrada de usuario;
en donde los valores de argumento alternativos del primer identificador de dispositivo se filtran usando los datos contextuales, y en donde el primer valor de argumento alternativo se elige entre los valores de argumento alternativos filtrados.
4. El método de acuerdo con una de las reivindicaciones anteriores, en donde el método comprende adicionalmente recibir (200) datos contextuales con la entrada de usuario, y en donde el primer identificador de dispositivo se determina usando los datos contextuales.
5. El método de acuerdo con la reivindicación 3 o 4, en donde los datos contextuales comprenden al menos uno entre: - ubicación del usuario;
- datos de pronóstico del tiempo;
- datos de temperatura;
- datos de reloj;
- datos de presencia;
- un perfil de usuario; o
- derechos del usuario para acceder y controlar dispositivos electrónicos remotos.
6. El método de acuerdo con las reivindicaciones anteriores, en donde el método comprende adicionalmente recuperar los otros elementos gráficos que están asociados con los valores de argumento alternativos del primer identificador de dispositivo, distinto del primer valor de argumento alternativo;
en donde el primer elemento gráfico es un elemento seleccionable, emitiendo la selección por el usuario de dicho elemento seleccionable al menos alguno de los elementos gráficos recuperados, y
en donde tras la selección (206) de un segundo elemento gráfico, el primer elemento gráfico se sustituye por el segundo elemento gráfico.
7. El método de acuerdo con una de las reivindicaciones anteriores, que comprende adicionalmente enviar (208) una instrucción a un dispositivo electrónico remoto identificado por el primer identificador de dispositivo, comprendiendo dicha instrucción el valor de argumento asociado con el elemento gráfico emitido.
8. El método de acuerdo con la reivindicación 7, en donde la instrucción se envía al dispositivo electrónico remoto tras la validación (207) por el usuario.
9. El método de acuerdo con una de las reivindicaciones anteriores, en donde los valores de argumento alternativos de un identificador de dispositivo dado comprenden valores de función alternativos, identificando cada valor de función alternativo una función que va a realizarse por un dispositivo identificado por el primer identificador de dispositivo, en donde el primer valor de argumento alternativo es un valor de función.
10. El método de acuerdo con la reivindicación 9, en donde los valores de argumento alternativos de un identificador de dispositivo dado comprenden adicionalmente un valor de parámetro alternativo que identifica parámetros de funciones realizadas por el dispositivo identificado por el primer identificador de dispositivo,
y en donde un segundo elemento gráfico se recupera de la base de datos, estando asociado dicho segundo elemento gráfico con un segundo valor de argumento alternativo del primer identificador de dispositivo, haciendo coincidir dicho segundo valor de argumento alternativo con la entrada de usuario y siendo un valor de parámetro alternativo.
11. El método de acuerdo con una de las reivindicaciones anteriores, que comprende adicionalmente visualizar el elemento gráfico en el dispositivo electrónico remoto.
12. Un producto de programa informático registrado en un medio de almacenamiento y ejecutable por un ordenador en forma de un software que incluye al menos una configuración de módulo de software para implementar el método de acuerdo con cualquiera de las reivindicaciones 1 a 11.
13. Un dispositivo electrónico para gestionar un dispositivo electrónico remoto que usa una interfaz de usuario (401), estando el dispositivo electrónico operativamente conectado a una base de datos que asocia, para cada identificador de dispositivo dado, valores de argumento alternativos y elementos gráficos, en donde la interfaz de usuario está dispuesta para recibir una entrada de usuario, comprendiendo el dispositivo electrónico un procesador (402) dispuesto para realizar las siguientes etapas:
determinar un primer identificador de dispositivo basándose en la entrada de usuario;
acceder a la base de datos para recuperar un primer elemento gráfico asociado con un primer valor de argumento alternativo del primer identificador de dispositivo, coincidiendo dicho primer valor de argumento alternativo con la entrada de usuario;
representar la entrada de usuario emitiendo el primer elemento gráfico recuperado.
14. Un sistema que comprende el dispositivo electrónico de acuerdo con la reivindicación 13 y una base de datos (13) que asocia, para cada identificador de dispositivo dado, valores de argumento alternativos y elementos gráficos.
ES16751000T 2015-06-30 2016-06-27 Procesamiento de entrada de usuario para controlar dispositivos remotos Active ES2832485T3 (es)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP15306051.2A EP3113140A1 (en) 2015-06-30 2015-06-30 User input processing for controlling remote devices
PCT/IB2016/001070 WO2017001931A1 (en) 2015-06-30 2016-06-27 User input processing for controlling remote devices

Publications (1)

Publication Number Publication Date
ES2832485T3 true ES2832485T3 (es) 2021-06-10

Family

ID=53496605

Family Applications (1)

Application Number Title Priority Date Filing Date
ES16751000T Active ES2832485T3 (es) 2015-06-30 2016-06-27 Procesamiento de entrada de usuario para controlar dispositivos remotos

Country Status (4)

Country Link
US (1) US10466870B2 (es)
EP (2) EP3113140A1 (es)
ES (1) ES2832485T3 (es)
WO (1) WO2017001931A1 (es)

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7155213B1 (en) 2005-09-16 2006-12-26 James R. Almeda Remote control system
US8106742B2 (en) 2006-08-04 2012-01-31 Tegic Communications, Inc. Remotely controlling one or more client devices detected over a wireless network using a mobile device
US8564543B2 (en) * 2006-09-11 2013-10-22 Apple Inc. Media player with imaged based browsing
US10241752B2 (en) * 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US8522283B2 (en) * 2010-05-20 2013-08-27 Google Inc. Television remote control data transfer
US20120030712A1 (en) * 2010-08-02 2012-02-02 At&T Intellectual Property I, L.P. Network-integrated remote control with voice activation
WO2014098477A1 (ko) * 2012-12-18 2014-06-26 삼성전자 주식회사 홈 네트워크 시스템에서 홈 디바이스를 원격으로 제어하는 방법 및 장치
US9575720B2 (en) * 2013-07-31 2017-02-21 Google Inc. Visual confirmation for a recognized voice-initiated action
US9430186B2 (en) * 2014-03-17 2016-08-30 Google Inc Visual indication of a recognized voice-initiated action
US9531601B2 (en) * 2014-04-16 2016-12-27 Belkin International Inc. Modular interface framework for network devices
MX357098B (es) * 2014-06-16 2018-06-26 Braeburn Systems Llc Realce luminoso para programar un control.
EP2958010A1 (en) * 2014-06-20 2015-12-23 Thomson Licensing Apparatus and method for controlling the apparatus by a user
CN104902070A (zh) * 2015-04-13 2015-09-09 青岛海信移动通信技术股份有限公司 一种移动终端语音控制的方法及移动终端
KR20160147459A (ko) * 2015-06-15 2016-12-23 삼성전자주식회사 외부 장치 운용 방법 및 이를 지원하는 전자 장치

Also Published As

Publication number Publication date
WO2017001931A1 (en) 2017-01-05
US10466870B2 (en) 2019-11-05
EP3317866A1 (en) 2018-05-09
EP3317866B1 (en) 2020-09-02
EP3113140A1 (en) 2017-01-04
US20180267675A1 (en) 2018-09-20

Similar Documents

Publication Publication Date Title
US10339830B2 (en) Device for providing description information regarding workout record and method thereof
US10490009B2 (en) Electronic device for controlling door lock and method thereof
KR102365688B1 (ko) 자연어 이해에 기반한 콘텐트 제공 방법 및 이를 수행하는 전자 장치
KR102584184B1 (ko) 전자 장치 및 그 제어 방법
KR102295686B1 (ko) 외부 전자 장치와 하이브리드 통신을 수행하는 전자 장치 및 방법
CN105824772B (zh) 用于使用多个处理器来管理数据的方法和装置
US20170242412A1 (en) Server and method of controlling user environment by server
US10551839B2 (en) Mobile electronic device and navigation method thereof
US10080108B2 (en) Electronic device and method for updating point of interest
KR102598441B1 (ko) 위치 인식 방법 및 이를 지원하는 전자 장치
US10225791B2 (en) Device searching method and electronic device for supporting the same
KR102447907B1 (ko) 추천 객체를 제공하기 위한 전자 장치 및 방법
KR20180047801A (ko) 전자 장치 및 전자 장치 제어 방법
KR20160137224A (ko) 외부 장치를 제어하기 위한 장치 및 방법
ES2757702T3 (es) Procedimiento de transmisión de datos y dispositivo electrónico para soportar el mismo
US20160077658A1 (en) Method and apparatus for generating preview data
KR102366289B1 (ko) 디스플레이 제어 방법 및 그 전자 장치
US10908787B2 (en) Method for sharing content information and electronic device thereof
KR102459370B1 (ko) 전자 장치 및 그 동작 방법
US9723101B2 (en) Device and method for recommending content based on interest information
US20180152554A1 (en) Text input method and electronic device supporting the same
KR102312316B1 (ko) 외부 장치 인식 방법 및 그 방법을 처리하는 전자 장치
ES2832485T3 (es) Procesamiento de entrada de usuario para controlar dispositivos remotos
US10802684B2 (en) Remote control of an electronic device with a selectable element
KR102354729B1 (ko) 전자 장치의 연락처 관리 방법 및 그 전자 장치