MX9504648A - Metodo y aparato para el procesamiento de imagenes, asistido por acustica. - Google Patents

Abstract

Se describe el procesamiento de imagen auxiliado mediante acustica. El procesamiento de imagen auxiliado mediante acustica se logra, de acuerdo con la invencion, mediante un nuevo método y aparato, en los cuales una señal de audio es obtenida por muestreo a una velocidad de muestreo en el dominio de audio; una primera secuencia de viseme es generada a una primera velocidad, en respuesta a la señal de audio muestreada, la primera velocidad corresponde a una velocidad de muestreo en el dominio de audio; la primera secuencia de viseme es transformada a una segunda secuencia de viseme a una segunda velocidad con el uso de un conjunto predeterminado de criterios, de transformacion, la segunda velocidad corresponde a una velocidad de cuadro en el dominio de video; y una imagen es procesada en respuesta a la segunda secuencia de viseme. En un ejemplo ilustrativo de la invencion, una imagen de video de una cara de un personaje humano que habla es animada con el uso de un modelo facial de cuadro alámbrico tridimensional, después de lo cual una textura superficial es representada o trazada. El modelo facial de cuadro alámbrico tridimensional es deformado estructuralmente en respuesta a una secuencia de viseme de velocidad transformada, extraída a partir de una señal hablada, de tal manera que la region de la boca de la imagen de video se mueve en correspondencia con el habla. Ventajosamente, la animacion es llevada a cabo en tiempo real, trabaja con cualquier altavoz, y no tiene limitaciones sobre el vocabulario, ni requiere ninguna accion especial por parte de la persona que habla.