ES2831166A1 - Procedimiento de reproduccion de contenido multimedia de ayuda mediante audio en interfaces visuales de usuario, y dispositivo que implementa dicho procedimiento - Google Patents

Procedimiento de reproduccion de contenido multimedia de ayuda mediante audio en interfaces visuales de usuario, y dispositivo que implementa dicho procedimiento Download PDF

Info

Publication number
ES2831166A1
ES2831166A1 ES201931086A ES201931086A ES2831166A1 ES 2831166 A1 ES2831166 A1 ES 2831166A1 ES 201931086 A ES201931086 A ES 201931086A ES 201931086 A ES201931086 A ES 201931086A ES 2831166 A1 ES2831166 A1 ES 2831166A1
Authority
ES
Spain
Prior art keywords
user interface
audio
visual
information
reproduction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
ES201931086A
Other languages
English (en)
Inventor
Atienza Daniel Gomez
Moya Melody Garcia
Somolinos María Del Rocio Blanco
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Universidad de Castilla La Mancha
Original Assignee
Universidad de Castilla La Mancha
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Universidad de Castilla La Mancha filed Critical Universidad de Castilla La Mancha
Priority to ES201931086A priority Critical patent/ES2831166A1/es
Publication of ES2831166A1 publication Critical patent/ES2831166A1/es
Withdrawn legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/02—Digital computers in general; Data processing equipment in general manually operated with input through keyboard and computation using a built-in program, e.g. pocket calculators
    • G06F15/0225—User interface arrangements, e.g. keyboard, display; Interfaces to other computer systems
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B7/00—Electrically-operated teaching apparatus or devices working with questions and answers

Abstract

Procedimiento de reproducción de contenido multimedia de ayuda mediante audio en interfaces visuales de usuario, y dispositivo que implementa dicho procedimiento. La invención se refiere a un procedimiento de reproducción de contenido multimedia de ayuda mediante audio, en una interfaz (2) de usuario, donde dicha interfaz (2) visual de usuario está configurada mediante una aplicación software que se ejecuta en un dispositivo (1). Ventajosamente, el procedimiento comprende la realización de los siguientes pasos: se muestra al menos un elemento (7) en la interfaz (2) visual de usuario, a través de un medio (3) de representación visual; se realiza una pulsación sobre un soporte táctil durante un periodo de tiempo t0, para introducir una información de entrada a la aplicación software asociada a dicho elemento (7) de la interfaz (2) visual de usuario donde, si el periodo t0 es igual o superior al valor umbral t1, se reproduce al menos un contenido contextual multimedia de ayuda mediante audio, a través del medio de reproducción de sonidos.

Description

DESCRIPCIÓN
PROCEDIMIENTO DE REPRODUCCIÓN DE CONTENIDO MULTIMEDIA DE AYUDA MEDIANTE AUDIO EN INTERFACES VISUALES DE USUARIO, Y DISPOSITIVO QUE IMPLEMENTA DICHO PROCEDIMIENTO
CAMPO DE LA INVENCIÓN
La presente invención se enmarca en el ámbito de las tecnologías de la información y de la comunicación (TIC), aplicadas al aprendizaje. Más concretamente, la invención se refiere a un procedimiento de reproducción de contenido contextual multimedia de ayuda, preferentemente mediante audio, en interfaces visuales de usuario tales como las mostradas en aplicaciones móviles (o "apps”). La invención se refiere, asimismo, a un dispositivo que implementa dicho procedimiento y a diferentes usos de dicho dispositivo y del procedimiento, preferentemente en personas con dificultad en la habilidad motora y en personas con trastorno del espectro autista.
ANTECEDENTES DE LA INVENCIÓN
El trastorno del espectro autista (TEA) es una afección neurológica y de desarrollo que comienza en la niñez y dura toda la vida. Afecta tanto al comportamiento de la persona, como a su interacción y comunicación con los demás y también a su aprendizaje. Se denomina "trastorno de espectro" ya que diferentes personas con TEA pueden tener una gran variedad de síntomas distintos, tales como deficiencias persistentes en la comunicación social y en la interacción social en diversos contextos, o patrones restrictivos y repetitivos de comportamiento, intereses o actividades. Estos síntomas pueden ya estar presentes en las primeras fases del período de desarrollo de la persona, o hacerse más evidentes más tarde, cuando las demandas sociales superan sus limitaciones.
Actualmente, no existe un tratamiento estándar para el TEA. Más específicamente, en el ámbito educativo, existen diferentes metodologías que permiten maximizar la capacidad del niño para crecer y aprender nuevas habilidades, favoreciendo el aprendizaje temprano de capacidades dado que, cuanto antes se comienza, mayor es la probabilidad de obtener resultados positivos en los síntomas y las aptitudes de las personas con TEA. Los tratamientos derivados de estas metodologías incluyen terapias de comportamiento, de comunicación y de desarrollo de habilidades, que se complementan con tratamientos y/o medicación, para controlar los síntomas específicos del trastorno en la persona.
En los últimos años, las tecnologías educativas (TE) han propuesto una gran variedad de técnicas, aplicaciones y herramientas que otorgan la posibilidad de aplicar las TIC en el ámbito de los procesos de enseñanza y aprendizaje, y con especial relevancia en personas con necesidades específicas de apoyo educativo (NEAE), que engloban todas las necesidades educativas especiales (NEE) y las necesidades educativas en niños y jóvenes. Concretamente, en el ámbito de los alumnos con TEA, las TE se han enfocado especialmente en el desarrollo de "tecnologías asistentes", que sirven a las personas afectadas con autismo para aprender habilidades sociales y a comunicarse con los demás, marcar rutinas o bien identificar situaciones cotidianas. Para considerarse eficaces, estas herramientas han de cumplir los siguientes requisitos:
- Han de fomentar el aprendizaje y ser intuitivas, es decir, fáciles de usar.
- Deben ser flexibles, adaptables y personalizables.
- Deben ser amenas, atractivas y motivadoras.
En este contexto, son conocidas actualmente diversas soluciones utilizadas para trabajar con alumnado TEA, en forma de aplicaciones interactivas (“apps”) desarrolladas con tecnología web y/o móvil, y ejecutadas en ordenadores personales o en dispositivos de tipo smartphone o tablet. Algunos ejemplos de dichas herramientas son las apps comerciales Boardmaker (se trata de una librería de símbolos que se encuentran clasificados por categorías, y que permiten al usuario crear tableros de comunicación alrededor de una temática, elaborar calendarios y establecer rutinas), DictaPicto (es una aplicación cuya principal función es la de traducir texto oral y escrito a pictogramas/imágenes de forma inmediata, con el fin de mejorar y facilitar la comprensión del entorno y la comunicación de la persona autista), e-Mintza (se trata de un programa para trabajar la comunicación mediante pictogramas y sonidos, con un tablero de comunicación que se puede personalizar incluyendo fotografías o vídeos de elaboración propia, para que el usuario se sienta en un contexto conocido), Doctor TEA (aplicación web que tiene como objetivo hacer que las visitas al médico no sean tan traumáticas para las personas que tienen diagnóstico TEA, familiarizando a estos usuarios con la situación de ir a una consulta mediante vídeos, pictogramas, imágenes y juegos), Soyvisual (repositorio de fotografías, pictogramas, láminas y materiales gráficos que conforman un sistema de comunicación aumentativa que utiliza claves visuales, tanto de pictogramas como de imágenes, para estimular el lenguaje y la comunicación, o Día a día (diario visual pensado especialmente para personas con autismo, que incluye un calendario en el que se puede señalar y guardar todas las actividades o tareas realizadas a lo largo del día, de manera visual y ordenada), entre otras muchas.
Todas las aplicaciones anteriores se basan en una interfaz de usuario sobre la que se despliegan diferentes contenidos visuales, orientados a la reproducción de situaciones o de ejercicios a realizar por parte del usuario. Dichos ejercicios se llevan a cabo a través de un soporte táctil y multimedia (por ejemplo, la pantalla táctil de un teléfono móvil o de una Tablet, junto con su sistema de reproducción de audio), con el cual interactúa el usuario de forma programada, para adquirir o entrenar capacidades o conocimientos.
Todo ejercicio realizado en una actividad multimedia en el ámbito de una app, incluye necesariamente la pulsación sobre uno o más elementos de la interfaz gráfica del dispositivo móvil. No obstante, dicha pulsación está sujeta, necesariamente, a una probabilidad de error (ya sea por la pulsación de elementos incorrectos o por la introducción de datos de entrada erróneos en por parte del usuario), que forma parte consustancial de cualquier método de aprendizaje, donde siempre existe un componente prueba-error. Para ello, son bien conocidos los menús contextuales de ayuda en este tipo de apps, que permiten dar una orientación adicional al usuario para corregir dicho error en repeticiones sucesivas del ejercicio, reforzando su aprendizaje. Dichos menús se basan, por lo general, en botones de ayuda o pantallas emergentes de tipo reactivo (es decir, que aparecen en la interfaz cuando se comete un error), que reproducen secuencias visuales y/o sonoras con información de ayuda al usuario.
Si bien este tipo de menús de ayuda son eficaces en aplicaciones educativas convencionales, suelen resultar problemáticos cuando se utilizan por parte de personas con TEA. Ello se debe a que, cuando dichas secuencias visuales de ayuda se reproducen en la interfaz, actúan como elementos distractores en los usuarios con TEA, lo que en la práctica puede llegar a ser contraproducente a la hora de favorecer el aprendizaje. Ello se debe a que la atención en dichos usuarios puede otorgar una importancia excesiva al propio contenido de ayuda, llegando incluso a descontextualizarlo del propio ejercicio de aprendizaje que se está realizando. Asimismo, una excesiva complejidad en la interfaz visual puede resultar también desaconsejable cuando el usuario posee algún tipo de dificultad en la habilidad motora.
Resulta por tanto necesario, en el presente campo técnico, desarrollar nuevos procedimientos de reproducción de contenidos multimedia de ayuda contextual, en aplicaciones educativas, que sean adecuados para personas con TEA, limitando la presencia de elementos distractores en las interfaces de usuario, favoreciendo la limpieza visual de las mismas y aumentando, en consecuencia, el aprovechamiento de dichos contenidos de ayuda en el usuario.
La presente invención está orientada a satisfacer dicha necesidad, mediante un novedoso procedimiento de reproducción de contenido contextual multimedia de ayuda, junto con un dispositivo que implementa dicho procedimiento y diferentes usos correspondientes de los mismos, preferentemente en personas con TEA y/o con dificultad en la habilidad motora.
DESCRIPCIÓN BREVE DE LA INVENCIÓN
Para resolver los inconvenientes del estado de la técnica anteriormente descritos, la presente invención tiene, como primer objeto, proporcionar un procedimiento de reproducción de contenido contextual multimedia de ayuda mediante audio, en una interfaz visual de usuario, donde dicha interfaz visual de usuario está configurada mediante una aplicación software que se ejecuta en un dispositivo, preferentemente de tipo móvil. Dicho dispositivo comprende, a su vez:
- un medio de representación visual de información asociada a dicha interfaz de usuario;
- un medio de reproducción de uno o más sonidos a partir de información generada por medio de la aplicación software;
- un medio de introducción de información de entrada a dicha aplicación software a través de un soporte táctil, estando asociada dicha información a uno o más elementos de la interfaz visual de usuario; y
- un medio de almacenamiento, lectura y procesamiento de la información asociada a la interfaz de usuario, a la información de entrada a través del soporte táctil y a la información asociada al medio de reproducción de sonidos.
Ventajosamente, el procedimiento de la invención comprende la realización de los siguientes pasos, por medio del dispositivo:
- se muestra al menos un elemento en la interfaz visual de usuario, a través del medio de representación visual:
- se realiza una pulsación sobre el soporte táctil durante un periodo de tiempo t0, para introducir una información de entrada a la aplicación software asociada a dicho elemento de la interfaz visual de usuario;
donde, si el periodo t0 es inferior a un valor umbral t1 configurado en la aplicación software, se reproduce al menos una secuencia de una o más imágenes en la interfaz, a través del medio de representación visual de información;
y donde, si el periodo t0 es igual o superior al valor umbral t1, se reproduce al menos un contenido contextual multimedia de ayuda mediante audio, a través del medio de reproducción de sonidos.
En una realización preferente del procedimiento de la invención, la reproducción del contenido contextual multimedia de ayuda mediante audio no se realiza si la pulsación va acompañada de movimiento sobre el soporte táctil.
En otra realización preferente del procedimiento de la invención, junto con la reproducción del contenido contextual multimedia de ayuda mediante audio, se reproduce también una secuencia de una o más imágenes en la interfaz, a través del medio de representación visual de información.
En otra realización preferente del procedimiento de la invención, la secuencia de imágenes comprende aumentar o disminuir el tamaño del elemento de la interfaz visual de usuario.
En otra realización preferente del procedimiento de la invención, el dispositivo comprende también medios de vibración, donde se reproduce una secuencia de vibración al inicio de la reproducción del contenido contextual multimedia de ayuda mediante audio, a través del medio de reproducción de sonidos.
En otra realización preferente del procedimiento de la invención, el elemento de la interfaz visual de usuario comprende un texto, y la reproducción del contenido contextual multimedia de ayuda mediante audio comprende la reproducción de lectura de dicho texto.
En otra realización preferente del procedimiento de la invención, el elemento de la interfaz visual de usuario comprende una secuencia numérica, introducida por el usuario a través del medio de introducción de información de entrada, y la reproducción del contenido contextual multimedia de ayuda mediante audio se realiza para un determinado valor de dicha secuencia numérica.
En otra realización preferente del procedimiento de la invención, la introducción de cada número de la secuencia introducida por el usuario genera un evento de “timeout”, donde se genera una secuencia de una o más imágenes y/o se reproduce un contenido de audio en caso de que el usuario no introduzca información mediante el soporte táctil durante un tiempo superior a un tiempo de “timeout” prefijado por la aplicación software, previamente a ejecutar la secuencia numérica completa. Esta funcionalidad trata de evitar falsos positivos en la cuantificación del número de errores cometidos por el usuario.
En otra realización preferente del procedimiento de la invención, tras la reproducción del contenido contextual multimedia de ayuda mediante audio, y/o ante una interacción del usuario con un elemento visual, se reordena el elemento modificando su posición en la interfaz visual de usuario.
En otra realización preferente del procedimiento de la invención, el periodo de tiempo to de pulsación es igual o superior a 1 segundo. Más preferentemente, el periodo de tiempo t0 de pulsación es igual o superior a 2 segundos. Aún más preferentemente, el tiempo t0 es configurable por parte del propio usuario, a través de su interacción con la interfaz.
Un segundo objeto de la invención se refiere a un dispositivo de reproducción de contenido contextual multimedia de ayuda mediante audio, en una interfaz visual de usuario, que comprende:
- un medio de representación visual de información asociada a dicha interfaz de usuario;
- un medio de reproducción de uno o más sonidos a partir de información generada por medio de la aplicación software;
- un medio de introducción de información de entrada a dicha aplicación software a través de un soporte táctil, estando asociada dicha información a uno o más elementos de la interfaz visual de usuario;
- un medio de almacenamiento, lectura y procesamiento de la información asociada a la interfaz de usuario, a la información de entrada a través del soporte táctil y a la información asociada al medio de reproducción de sonidos,
donde, ventajosamente, el medio de almacenamiento, lectura y procesamiento de dicho dispositivo está equipado con una aplicación software configurada para realizar el procedimiento según cualquiera de las reivindicaciones anteriores.
En una realización preferente del dispositivo de la invención, el medio de representación visual de información, el medio de introducción de información de entrada y/o el soporte táctil del dispositivo comprenden una pantalla táctil.
En otra realización preferente del dispositivo de la invención, dicho dispositivo comprende un teléfono móvil, una tablet o un ordenador personal.
Un tercer objeto de la invención se refiere al uso de un método según cualquiera de las realizaciones descritas en el presente documento, o de un dispositivo según cualquiera de las realizaciones descritas en el presente documento, en personas con dificultad en la habilidad motora y/o en personas con trastorno del espectro autista.
Un cuarto objeto de la invención se refiere a un programa de ordenador que implementa las instrucciones para ejecutar un procedimiento según cualquiera de las realizaciones descritas en el presente documento, por medio de un dispositivo según cualquiera de las realizaciones descritas en el presente documento.
DESCRIPCIÓN DE LOS DIBUJOS
Las anteriores y otras características y ventajas se comprenderán más plenamente a partir de la descripción detallada de la invención, así como de los ejemplos de realización preferente referidos a los dibujos adjuntos, en los que:
Las Figuras 1a-1d muestran un esquema funcional del procedimiento de la invención, en una realización preferente de la misma, donde se ilustran los pasos principales de dicho procedimiento, así como un ejemplo del dispositivo que lo lleva a cabo.
Listado de referencias numéricas de las figuras:
Figure imgf000008_0001
DESCRIPCIÓN DETALLADA DE LA INVENCIÓN
Se expone, a continuación, una descripción detallada de la invención referida a una realización preferente de la misma, según la información proporcionada por la Figura 1 del presente documento. Dicha descripción se aporta con fines ilustrativos, pero no limitativos de la invención reivindicada.
Las Figuras 1a-1d esquematizan el modo en el que se lleva a cabo el procedimiento de la invención, para el ejemplo de un dispositivo (1) móvil de tipo smartphone. Dicho procedimiento permite, tal y como se ha descrito previamente, reproducir contenido contextual multimedia de ayuda mediante audio, en una interfaz (2) visual de usuario, donde dicha interfaz (2) visual de usuario está configurada mediante una aplicación software que se ejecuta en el dispositivo (1) que, a su vez, comprende preferentemente:
- un medio (3) de representación visual de información asociada a dicha interfaz (2) de usuario (típicamente, en forma de monitor o pantalla táctil);
- un medio (4) de reproducción de uno o más sonidos (preferentemente, un altavoz o un sistema análogo de reproducción de sonido equipado en el dispositivo (1)), a partir de información generada por medio de la aplicación software;
- un medio (5) de introducción de información de entrada a dicha aplicación software a través de un soporte táctil (preferentemente, un teclado, un ratón o una pantalla táctil), estando asociada dicha información a uno o más elementos de la interfaz (2) visual de usuario;
- un medio (6) de almacenamiento, lectura y procesamiento de la información asociada a la interfaz (2) de usuario, a la información de entrada a través del soporte táctil del medio (5) de introducción de información de entrada y a la información asociada al medio (4) de reproducción de sonidos.
En general, cualquier dispositivo (1) tal como un teléfono móvil, una tablet o un ordenador personal pueden configurarse para llevar a cabo el procedimiento de la invención.
Ventajosamente, dicho procedimiento comprende la realización de los siguientes pasos, por medio del dispositivo (1):
a)
Figure imgf000009_0001
se muestra al menos un elemento (7) en la interfaz (2) visual de usuario, a través del medio de representación visual (3) del dispositivo (1) (Figura 1a): Este paso comprende mostrar uno o más elementos (7) en forma de, preferentemente, textos, pictogramas, fotografías, dibujos, iconos, etc. que formarán parte del ejercicio a realizar por parte del usuario y que se mostrarán en el medio (3) de representación visual (por ejemplo, la pantalla del teléfono móvil). En diferentes realizaciones de la invención, los elementos (7) pueden comprender preguntas en modo cuestionario, ejercicios matemáticos, puzles o cualquier contenido visual que pueda utilizarse para ejercitar el aprendizaje a través de la aplicación de software (preferentemente, una aplicación móvil). Así, el usuario podrá interactuar con dichos elementos (7) a través del medio (5) de introducción de información de entrada a través del soporte táctil (por ejemplo, la pantalla táctil del teléfono), introduciendo información textual, señalando la respuesta que considera acertada en una pregunta tipo test, pulsando sobre los contenidos gráficos mostrados en la interfaz (2), etc.
Asimismo, el despliegue de contenidos visuales en la interfaz (2) puede ir acompañado de la reproducción de secuencias de audio, a través del medio (4) de reproducción de sonidos del dispositivo (1).
En una realización preferente de la invención, los elementos (7) se disponen en la interfaz (2) en forma de una secuencia de ejercicios, donde cada ejercicio se puede ir seleccionando y resolviendo en orden. Para su uso por parte de personas con TEA puede utilizarse, por ejemplo, un formato visual de plantilla adaptada a técnicas conocidas de aprendizaje aptas para su reproducción en el dispositivo (1), tales como el método de Polya o variaciones del mismo, opcionalmente combinado con la metodología TEACCH (cuyas siglas corresponden, en inglés, a “Tratamiento y Educación de Niños con Autismo y Problemas Asociados de Comunicación”) y/o el uso de sistemas aumentativos/alternativos de comunicación (por ejemplo, símbolos gráficos, sistemas pictográficos, estrategias y/o contenidos de apoyo).
En otra realización preferente, los elementos (7) de la interfaz (2) pueden comprender una codificación basada en el color, por ejemplo para denotar cuestiones ya resueltas en un ejercicio, secciones activas o inactivas, preguntas respondidas correctamente, etc. Dicho color puede modificarse en los citados elementos (7), por ejemplo de forma secuencial a medida que se avanza en el ejercicio.
La interacción con la interfaz (2) visual por parte del usuario se realiza a través del medio (3) de representación visual de información en caso de que dicho medio (3) posea una pantalla táctil. En otros casos, dicha interacción se realizará a través del medio (5) de introducción de información de entrada a través de un soporte táctil (preferentemente, un teclado, un ratón o una pantalla táctil). Las operaciones a realizar por parte del usuario serán las típicas asociadas a una aplicación de tipo móvil (seleccionar elementos (7), arrastrarlos y/o girarlos en la interfaz (2), introducir información de entrada en forma de caracteres alfanuméricos, etc.). No obstante, el presente procedimiento incorpora, adicionalmente, una serie de pasos que facilitan, ventajosamente, la reproducción de contenidos de ayuda durante la resolución de ejercicios, facilitando tanto la limpieza visual de la interfaz (2), como la ausencia de elementos distractores en la misma, lo que mejora notablemente el aprovechamiento de los ejercicios por parte de los usuarios con TEA.
Dichos pasos se describen a continuación.
Figure imgf000010_0001
se realiza una pulsación sobre el soporte táctil durante un periodo de tiempo t0 , para introducir una información de entrada a la aplicación software asociada a dicho elemento de la interfaz visual de usuario (Figura 1b): Este paso comprende tanto las operaciones habituales de selección de elementos (7) en la interfaz (2) (por ejemplo, seleccionar dicho elemento (7) para marcar una determinada pregunta en un ejercicio, pulsando sobre ella en la pantalla táctil del dispositivo (1) donde se reproduce la interfaz), como la solicitud de ayuda respecto a los mismos, donde la única diferencia para optar por unos u otros será el tiempo te de pulsación que ejerza el usuario sobre el elemento (7) en la interfaz (2). Los inventores de la presente solicitud de patente han comprobado que esta funcionalidad técnica es fácilmente asimilable por parte de los usuarios con TEA, y tiene además la importante ventaja de que no añade elementos adicionales a la interfaz, favoreciendo la limpieza visual y la ausencia de distracción al solicitarse la ayuda sobre los elementos (7). Es decir, al estar la petición de ayuda contextual vinculada exclusivamente al tiempo de pulsación, el usuario puede interiorizar esta destreza de forma sencilla, para cualquier contenido de la aplicación mostrado en la interfaz (2), aprendiendo rápidamente la fórmula para desplegar los contenidos de ayuda, sin requerir ningún tipo de indicación visual adicional. Este planteamiento mejora las soluciones conocidas de los métodos de despliegue de ayuda del estado de la técnica, donde la reproducción de contenidos contextuales se realiza pulsando un elemento (7) diferente de la interfaz (2) (por ejemplo, pulsando un botón de ayuda marcado con “?”, o un botón de reproducción por audio de texto, marcado típicamente con un icono de un altavoz).
En función de la duración de la pulsación que realiza el usuario en el paso b) del procedimiento, éste podrá llevar a dos situaciones diferentes, según lo dispuesto por los pasos c) y d) descritos a continuación.
c) Si el periodo te es inferior a un valor umbral ti configurado en la aplicación software (te < ti), se reproduce al menos una secuencia de una o más imágenes en la interfaz (2), a través del medio (3) de representación visual de información (Figura 1c). Este escenario corresponde a una pulsación de tipo “convencional” , que no será asociada al despliegue de contenidos de ayuda en la interfaz (2) del dispositivo (1). Con ello, se permite llevar a cabo las operaciones corrientes relacionadas con los ejercicios de aprendizaje, tales como marcar respuestas, seleccionar preguntas, mover y/o arrastrar elementos (7) en la interfaz, etc. Asimismo, la pulsación “corta” de este paso puede generar nuevos elementos
Figure imgf000011_0001
en la interfaz (2) visual, sustituyendo o complementando a los elementos (7) sobre los que se ha pulsado en primer lugar.
Alternativamente, en caso de que de la pulsación del usuario se realice sobre el elemento (7) durante un periodo igual o superior al valor del tiempo umbral (te> ti), se ejecuta el paso d) descrito a continuación, en lugar del paso c), con el objetivo de desplegar los contenidos de ayuda contextual.
d) Si el periodo to es igual o superior al valor umbral ti, se reproduce al menos un contenido multimedia de ayuda mediante audio, a través del medio (4) de reproducción de sonidos (Figura 1d). Este escenario corresponde a la ejecución de una instrucción de ayuda a la aplicación, que no requiere de un elemento (7) adicional en la interfaz, sino únicamente una pulsación prolongada sobre el mismo. Tal y como se muestra en las figuras, en lugar de generarse nuevos elementos
Figure imgf000012_0001
en la interfaz (2) como resultado de dicha pulsación (que, como se ha indicado, resultan contraindicados en usuarios con TEA), se reproducirá en su lugar un contenido de audio (preferentemente, audio correspondiente a la lectura de un texto de ayuda) que permita al usuario entender mejor el contexto del ejercicio asociado al elemento (7) sobre el que ha pulsado, pero manteniéndose un criterio de limpieza visual en la interfaz (2). Preferentemente, el periodo de tiempo to de pulsación es igual o superior a 1 segundo y, más preferentemente, a 2 segundos. Asimismo, es posible definir dos o más contenidos diferentes de ayuda a partir del establecimiento de dos o más valores umbral ti, t2 , etc. En otras realizaciones de la invención, el tiempo to es configurable por parte del propio usuario, a través de su interacción con la interfaz.
En una realización preferente del procedimiento de la invención, la reproducción del contenido contextual multimedia de ayuda mediante audio se bloquea si la pulsación va acompañada de movimiento sobre el soporte táctil. De este modo, se consigue distinguir aquellas pulsaciones destinadas a generar un audio de ayuda, de aquéllas que se utilizan para mover o arrastrar el elemento (7) de la interfaz (2) asociado al ejercicio que se está realizando. Así, la aplicación software ejecutada en el dispositivo (1) estará configurada para no activar la ayuda cuando, además de mantener la pulsación, el usuario esté desplazando a la vez el elemento (7) de la interfaz (2), mediante el soporte táctil del medio (5) de introducción de información de entrada a dicha aplicación.
En otra realización preferente del procedimiento de la invención, junto con la reproducción del contenido contextual multimedia de ayuda mediante audio, se reproduce también una secuencia de una o más imágenes en la interfaz (2), a través del medio (3) de representación visual de información. Si bien esta opción no se considera indicada con carácter general para todos los usuarios, por el mayor riesgo de distracción que puede generar, en algunas circunstancias específicas sí puede resultar de utilidad, si se realiza de forma controlada con elementos (7) de imágenes previamente probados sobre el usuario, garantizando así que no interfieran negativamente con los ejercicios de aprendizaje. Más preferentemente, la secuencia de imágenes puede comprender aumentar o disminuir el tamaño del elemento (7) de la interfaz visual de usuario (esta realización es especialmente recomendable en caso de ayudas contextúales en usuarios que puedan tener algún tipo de deficiencia visual).
En otra realización preferente del procedimiento de la invención, el dispositivo (1) comprende también medios de vibración, y se reproduce una secuencia de vibración al inicio de la reproducción del contenido contextual multimedia de ayuda mediante audio, a través del medio (4) de reproducción de sonidos, y/o ante una interacción del usuario con un elemento (7) visual de la interfaz (2). Las secuencias de vibración refuerzan la confianza del usuario durante la adquisición de conocimientos o destrezas a través de la aplicación.
Preferentemente, y según lo descrito en párrafos anteriores, el elemento (7) de la interfaz (2) visual de usuario comprende un texto, y la reproducción del contenido contextual multimedia de ayuda mediante audio comprende la reproducción de lectura de dicho texto. En general, la reproducción de este tipo de audios no resulta invasiva ni distractora para el usuario, y colabora a mantener la atención visual del mismo fija sobre los elementos (7) relevantes de la interfaz (2).
En otra realización preferente del procedimiento de la invención, el elemento (7) de la interfaz visual de usuario comprende una secuencia numérica, introducida por el usuario a través del medio (5) de introducción de información de entrada, y la reproducción del contenido contextual multimedia de ayuda mediante audio se realiza para un determinado valor de dicha secuencia numérica. De este modo, es posible desplegar uno o más contenidos de ayuda a medida que el usuario va introduciendo un valor numérico, por ejemplo en ejercicios aritméticos, de aprendizaje de las horas, de fracciones, etc. Más preferentemente, la introducción de cada número de la secuencia introducida por el usuario genera un evento de “timeout”, donde se genera una secuencia de una o más imágenes y/o donde se reproduce un contenido de audio en caso de que el usuario no introduzca información mediante el soporte táctil durante un tiempo superior a un tiempo de “timeout” prefijado por la aplicación software, previamente a ejecutar la secuencia numérica completa. Como se ha mencionado, esta funcionalidad permite definir diferentes mensajes de ayuda en momentos distintos de la introducción de la secuencia numérica.
En otra realización preferente del procedimiento de la invención, tras la reproducción del contenido contextual multimedia de ayuda mediante audio y/o ante una interacción del usuario con un elemento (7) visual de la interfaz (2) de usuario, se reordena dicho elemento (7) modificando su posición en la citada interfaz (2). En esta realización, es posible reconfigurar los elementos (7) mostrados al usuario después de desplegar los contenidos de ayuda y/o ante una pulsación convencional sobre dichos elementos (7). Así, se refuerza la adquisición de conocimientos haciendo que el usuario tenga que comenzar desde cero una o más etapas de un determinado ejercicio.
A la luz de los ejemplos y realizaciones anteriores, queda suficientemente descrito tanto el procedimiento de la invención, como el dispositivo (1) que lo implementa. Asimismo, como se ha justificado también en la presente memoria, el uso de dicho procedimiento y de dicho dispositivo (1) resulta especialmente ventajoso para usuarios que presentan dificultad en la habilidad motora y/o trastorno del espectro autista (TEA), mejorando sustancialmente el aprovechamiento de los ejercicios de aprendizaje realizados por dichos usuarios.

Claims (15)

REIVINDICACIONES
1.
Figure imgf000015_0001
- Procedimiento de reproducción de contenido multimedia de ayuda mediante audio, en una interfaz (2) visual de usuario, donde dicha interfaz visual de usuario está configurada mediante una aplicación software que se ejecuta en un dispositivo (1) que, a su vez, comprende:
- un medio (3) de representación visual de información asociada a dicha interfaz (2) de usuario;
- un medio (4) de reproducción de uno o más sonidos a partir de información generada por medio de la aplicación software;
- un medio (5) de introducción de información de entrada a dicha aplicación software a través de un soporte táctil, estando asociada dicha información a uno o más elementos (7, 7’) de la interfaz visual de usuario;
- un medio (6) de almacenamiento, lectura y procesamiento de la información asociada a la interfaz de usuario, a la información de entrada a través del soporte táctil y a la información asociada al medio (4) de reproducción de sonidos;
donde dicho procedimiento está caracterizado por que comprende la realización de los siguientes pasos, por medio del dispositivo (1):
- se muestra al menos un elemento (7) en la interfaz (2) visual de usuario, a través del medio (3) de representación visual de información:
- se realiza una pulsación sobre el soporte táctil durante un periodo de tiempo to, para introducir una información de entrada a la aplicación software asociada a dicho elemento (7) de la interfaz (2) visual de usuario;
donde, si el periodo to es inferior a un valor umbral ti configurado en la aplicación software, se reproduce al menos una secuencia de una o más imágenes en la interfaz (2), a través del medio (3) de representación visual de información;
y donde, si el periodo to es igual o superior al valor umbral ti, se reproduce al menos un contenido contextual multimedia de ayuda mediante audio, a través del medio (4) de reproducción de sonidos.
2.
Figure imgf000015_0002
- Procedimiento según la reivindicación anterior, donde la reproducción del contenido contextual multimedia de ayuda mediante audio no se realiza si la pulsación va acompañada de movimiento sobre el soporte táctil.
3.
Figure imgf000015_0003
- Procedimiento según cualquiera de las reivindicaciones anteriores, donde, junto con la reproducción del contenido contextual multimedia de ayuda mediante audio, se reproduce también una secuencia de una o más imágenes en la interfaz, a través del medio (3) de representación visual de información.
4.
Figure imgf000016_0001
- Procedimiento según la reivindicación anterior, donde la secuencia de imágenes comprende aumentar o disminuir el tamaño del elemento (7) de la interfaz (2) visual de usuario.
5.
Figure imgf000016_0002
- Procedimiento según cualquiera de las reivindicaciones anteriores, donde el dispositivo comprende también medios de vibración, y donde se reproduce una secuencia de vibración al inicio de la reproducción del contenido contextual multimedia de ayuda mediante audio, a través del medio (4) de reproducción de sonidos, y/o ante una interacción del usuario con un elemento visual (7) de la interfaz (2).
6.
Figure imgf000016_0003
- Procedimiento según cualquiera de las reivindicaciones anteriores, donde el elemento (7) de la interfaz visual de usuario comprende un texto, y la reproducción del contenido contextual multimedia de ayuda mediante audio comprende la reproducción de lectura de dicho texto.
7.
Figure imgf000016_0004
- Procedimiento según cualquiera de las reivindicaciones anteriores, donde el elemento (7) de la interfaz visual de usuario comprende una secuencia numérica, introducida por el usuario a través del medio (5) de introducción de información de entrada, y la reproducción del contenido contextual multimedia de ayuda mediante audio se realiza para un determinado valor de dicha secuencia numérica.
8.
Figure imgf000016_0005
- Procedimiento según la reivindicación anterior, donde la introducción de cada número de la secuencia introducida por el usuario genera un evento de “timeout”, donde se genera una secuencia de una o más imágenes y/o se reproduce un contenido de audio en caso de que el usuario no introduzca información mediante el soporte táctil durante un tiempo superior a un tiempo de “timeout” prefijado por la aplicación software, previamente a ejecutar la secuencia numérica completa.
9.
Figure imgf000016_0006
- Procedimiento según cualquiera de las reivindicaciones anteriores donde, tras la reproducción del contenido contextual multimedia de ayuda mediante audio y/o ante una interacción del usuario con un elemento (7) visual de la interfaz (2) visual de usuario, se reordena dicho elemento (7) modificando su posición en la citada interfaz (2).
10. - Procedimiento según cualquiera de las reivindicaciones anteriores, donde el periodo de tiempo te de pulsación es igual o superior a 1 segundo, y/o donde dicho periodo te es configurable por el usuario.
11.
Figure imgf000017_0001
- Dispositivo (1) de reproducción de contenido contextual multimedia de ayuda mediante audio, en una interfaz (2) visual de usuario, que comprende:
- un medio (3) de representación visual de información asociada a dicha interfaz (2) de usuario;
- un medio (4) de reproducción de uno o más sonidos a partir de información generada por medio de la aplicación software;
- un medio (5) de introducción de información de entrada a dicha aplicación software a través de un soporte táctil, estando asociada dicha información a uno o más elementos (7) de la interfaz (2) visual de usuario;
- un medio (6) de almacenamiento, lectura y procesamiento de la información asociada a la interfaz (2) de usuario, a la información de entrada a través del soporte táctil y a la información asociada al medio (4) de reproducción de sonidos,
estando dicho dispositivo caracterizado por que dicho medio (6) de almacenamiento, lectura y procesamiento está configurado con una aplicación software adaptada para realizar el procedimiento según cualquiera de las reivindicaciones anteriores.
12. - Dispositivo (1) según la reivindicación anterior, donde el medio (3) de representación visual de información, el medio (5) de introducción de información de entrada y/o el soporte táctil del dispositivo comprenden una pantalla táctil.
13.
Figure imgf000017_0002
- Dispositivo (1) según cualquiera de las reivindicaciones 11-12, donde dicho dispositivo (1) comprende un teléfono móvil, una tablet o un ordenador personal.
14.
Figure imgf000017_0003
- Uso de un método según cualquiera de las reivindicaciones 1-10 o de un dispositivo (1) según cualquiera de las reivindicaciones 11-13 en personas con dificultad en la habilidad motora.
15.
Figure imgf000017_0004
- Uso de un método según cualquiera de las reivindicaciones 1-10 o de un dispositivo (1) según cualquiera de las reivindicaciones 11-13 en personas con trastorno del espectro autista.
ES201931086A 2019-12-05 2019-12-05 Procedimiento de reproduccion de contenido multimedia de ayuda mediante audio en interfaces visuales de usuario, y dispositivo que implementa dicho procedimiento Withdrawn ES2831166A1 (es)

Priority Applications (1)

Application Number Priority Date Filing Date Title
ES201931086A ES2831166A1 (es) 2019-12-05 2019-12-05 Procedimiento de reproduccion de contenido multimedia de ayuda mediante audio en interfaces visuales de usuario, y dispositivo que implementa dicho procedimiento

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
ES201931086A ES2831166A1 (es) 2019-12-05 2019-12-05 Procedimiento de reproduccion de contenido multimedia de ayuda mediante audio en interfaces visuales de usuario, y dispositivo que implementa dicho procedimiento

Publications (1)

Publication Number Publication Date
ES2831166A1 true ES2831166A1 (es) 2021-06-07

Family

ID=76189327

Family Applications (1)

Application Number Title Priority Date Filing Date
ES201931086A Withdrawn ES2831166A1 (es) 2019-12-05 2019-12-05 Procedimiento de reproduccion de contenido multimedia de ayuda mediante audio en interfaces visuales de usuario, y dispositivo que implementa dicho procedimiento

Country Status (1)

Country Link
ES (1) ES2831166A1 (es)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009158208A1 (en) * 2008-06-25 2009-12-30 Symbol Technologies, Inc. Control and navigation for a device implementing a touch screen
CN102354349A (zh) * 2011-10-26 2012-02-15 华中师范大学 提高孤独症儿童社会互动能力的人机互动多模态早期干预系统
US20150186346A1 (en) * 2013-12-31 2015-07-02 Barnesandnoble.Com Llc Digital flash card techniques
US20160267800A1 (en) * 2014-11-03 2016-09-15 Genius Factory Inc. Electronic device and method for providing learning information using the same
JP2017009875A (ja) * 2015-06-24 2017-01-12 カシオ計算機株式会社 学習支援装置およびプログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009158208A1 (en) * 2008-06-25 2009-12-30 Symbol Technologies, Inc. Control and navigation for a device implementing a touch screen
CN102354349A (zh) * 2011-10-26 2012-02-15 华中师范大学 提高孤独症儿童社会互动能力的人机互动多模态早期干预系统
US20150186346A1 (en) * 2013-12-31 2015-07-02 Barnesandnoble.Com Llc Digital flash card techniques
US20160267800A1 (en) * 2014-11-03 2016-09-15 Genius Factory Inc. Electronic device and method for providing learning information using the same
JP2017009875A (ja) * 2015-06-24 2017-01-12 カシオ計算機株式会社 学習支援装置およびプログラム

Similar Documents

Publication Publication Date Title
Thieme et al. Enabling collaboration in learning computer programing inclusive of children with vision impairments
TWI497464B (zh) 垂直整合的行動教育系統、非暫態電腦可讀取媒體及促進兒童教育發展的方法
Ross et al. Reading touch screen storybooks with mothers negatively affects 7-year-old readers’ comprehension but enriches emotional engagement
Huber et al. iPad human interface guidelines for m-learning
Kraleva ChilDiBu–A mobile application for Bulgarian children with special educational needs
Baloian et al. Tablet gestures as a motivating factor for learning
Falloon Creating content: Building literacy skills in year 1 students using open format apps
Cubukcu et al. Mobile game development for children with Down Syndrome
Wood Overcoming dyslexia for dummies
Torii et al. Development and study of support applications for autistic children
Savage et al. Technology-enhanced learning in the early years foundation stage
ES2831166A1 (es) Procedimiento de reproduccion de contenido multimedia de ayuda mediante audio en interfaces visuales de usuario, y dispositivo que implementa dicho procedimiento
JP2006099075A (ja) 画像表示装置、画像表示システム、画像表示装置の制御方法、画像表示装置の制御プログラム、画像表示システムの制御プログラム、コンピュータ読み取り可能な記録媒体
Valstad Introducing the iPad in a Norwegian high school: How do students and teachers react to this technology
Miranda et al. Analysis of Luria memory tests for development on mobile devices
Kaur et al. Exploring children user experience in designing educational mobile application
Bell The impact of e-Books with word highlighting features on early literacy skills of emergent readers
Azmi et al. Mobile application to enhance writing skills ability among dyslexic children: CinTA
Bassi Using a mindfulness software application to practice artmaking and meditation
Nazare et al. Bilingual SpeechBlocks: Investigating How Bilingual Children Tinker with Words in English and Spanish
Shawalludin et al. Screening Video Game Screen Addiction using User Interface Preference among Students
Nagy et al. Evaluation of Training to Improve Auditory Memory Capabilities on a Mobile Device Based on a Serious Game Application
Alsulami Effects of using iPad on First Grade Students' Achievements in Arabic Language Classes In Saudi Arabia
Duenser et al. Engaging assessments: Interface design of a referral support tool for adults and children
Basu Age and Interface Equipping Older Adults with Technological Tools

Legal Events

Date Code Title Description
BA2A Patent application published

Ref document number: 2831166

Country of ref document: ES

Kind code of ref document: A1

Effective date: 20210607

FA2A Application withdrawn

Effective date: 20210922