BRPI1010584B1

BRPI1010584B1 - método para fornecer funcionalidade de entrada para um módulo de interação de reconhecimento de voz

Info

Publication number: BRPI1010584B1
Application number: BRPI1010584A
Authority: BR
Inventors: K Sullivan Anne; J Lee Kathleen; Stifelman Lisa; Chuin Leong Su
Original assignee: Microsoft Corp; Microsoft Technology Licensing Llc
Priority date: 2009-06-10
Filing date: 2010-06-10
Publication date: 2020-01-28
Also published as: AU2010258675B2; CA2760993C; EP2440988A2; TWI497406B; EP2440988B1; EP2440988A4; TW201044265A; CN102460346A; HK1169725A1; CA2760993A1; US20100318366A1; WO2010144732A3; US8412531B2; BRPI1010584A2; AU2010258675A1; RU2011150255A; WO2010144732A2; RU2526758C2

Abstract

método para fornecer funcionalidade de entrada para um módulo de interação de reconhecimento de voz a presente invenção refere-se à uma interface de usuário para fornecer interação de pressionar para falar através da utilização de um módulo de tocar em qualquer lugar para falar em um dispositivo de computação móvel. após receber uma indicação de um toque em qualquer lugar na tela de uma interface de tela sensível a toque, o módulo de tocar em qualquer lugar para falar ativa o mecanismo de escuta de um módulo de reconhecimento de voz para aceitar entrada de usuário audível e exibe realimentação visual dinâmica de um nível de som medido da entrada audível recebida. o módulo de tocar em qualquer lugar para falar também pode fornecer a um usuário uma experiência de reconhecimento de voz conveniente e mais preciso por utilizar e aplicar os dados em relação a um contexto do toque (por exemplo, relativo à localização na interface visual) em correlação com a entrada audível falada.

Description

Relatório Descritivo da Patente de Invenção para “MÉTODO PARA FORNECER FUNCIONALIDADE DE ENTRADA PARA UM MÓDULO DE INTERAÇÃO DE RECONHECIMENTO DE VOZ”

ANTECEDENTES DA INVENÇÃO [0001] Dispositivos de computação móveis como telefones móveis e assistentes pessoais digitais, se tornaram uma tecnologia ubíqua na sociedade atual. Tais dispositivos fornecem atualmente interfaces que permitem a um usuário interagir com várias aplicações móveis através de uma pluralidade de mecanismos de entrada (por exemplo, teclado numérico, teclado QWERTY, tela sensível a toque, reconhecimento de voz, etc.). Recentemente, houve um aumento de tecnologias de reconhecimento de voz para entrada. Com reconhecimento de voz, os comandos de voz do usuário são capturados como arquivos de áudio e processados através de um módulo de reconhecimento de voz incorporado localizado no dispositivo móvel ou transferidos através de uma conexão sem fio para um servidor onde são processados. Um método de engatar um mecanismo de ouvir de um módulo de reconhecimento de voz é através de um modelo de interação de pressionar para falar, que permite a um usuário sinalizar quando a aplicação deve iniciar e parar gravação através de um mecanismo de entrada. Muitas aplicações móveis utilizam uma tecla de hardware existente em um dispositivo, tecla macia, ou um limite definido de um botão em uma interface de tela sensível a toque como um mecanismo de entrada para engatar o mecanismo de ouvir de um módulo de reconhecimento de voz.

[0002] A entrada através de teclas macias ou interfaces de hardware dedicadas, como botões, rodas de rolagem etc., pode ser incômoda devido a uma variedade de fatores não limitados a tamanhos de botões pequenos, botões difíceis de identificar ou referenciar, e/ou usuários tendo um ponto cego para uma localização de botão

Petição 870190110079, de 29/10/2019, pág. 4/36

2/25 (por exemplo, localizado no lado de um dispositivo móvel). Mesmo se um botão for identificável, referenciável, disponível para uma dada aplicação, e em um local ergonômico, um usuário pode estar envolvido em outra tarefa (por exemplo, caminhando, dirigindo, etc.) (que pode tornar difícil olhar seu dispositivo móvel e/ou difícil de alvejar o botão. Ao utilizar uma interface de hardware dedicado como um botão para iniciar o modo de ouvir de reconhecimento de voz, devido a sua localização no dispositivo, a pressão do mesmo pode cobrir o microfone que pode afetar adversamente o desempenho de reconhecimento de voz.

[0003] Muitos dispositivos de comutação móveis utilizam atualmente interfaces de tela sensível ao toque. Uma tela sensível a toque pode ter objetos gráficos selecionáveis que correspondem a botões de calcar de telefones tradicionais, teclas de um teclado tradicional, e várias tarefas móveis. Telas sensíveis a toque e dispositivos de entrada compreendendo telas sensíveis a toque são às vezes difíceis de operar. Por exemplo, um usuário que utiliza a ponta de seu dedo para ativar a tela sensível a toque, pode facilmente tocar a área de superfície ativa da tela sensível a toque em uma posição onde o usuário não pretendeu ativar a tela sensível a toque. Em muitos casos, tal ativação não pretendida resulta em uma função não pretendida sendo realizada.

[0004] É com relação a essas e outras considerações que a presente invenção foi feita.

SUMÁRIO DA INVENÇÃO [0005] As modalidades da presente invenção são dirigidas à provisão de uma interface de usuário em um dispositivo de comutação móvel para fornecer uma quantidade máxima de área alvo em uma tela para iniciar a ação de ouvir de um módulo de reconhecimento de voz. De acordo com modalidades, um usuário pode pressionar em qualquer

Petição 870190110079, de 29/10/2019, pág. 5/36

3/25 lugar na tela sensível a toque de um dispositivo de computação móvel para ativar a escuta em interação de reconhecimento de voz. Em vez de buscar um botão difícil de localizar ou pressionar uma tela eletrostática pequena que requer que um usuário olhe seu dispositivo de computação móvel, toda a tela sensível a toque é o mecanismo de entrada para ativar o dispositivo de escuta de um módulo de reconhecimento de voz.

[0006] De acordo com uma modalidade, quando um dispositivo de computação móvel recebe uma indicação de um toque em qualquer lugar na interface de sua tela sensível a toque, o mecanismo de escuta é ativado e habilitado para receber entrada de voz, e uma confirmação em resposta ao recebimento de uma indicação de um toque em qualquer lugar na interface de tela sensível a toque pode ser gerada para notificar um usuário de que o mecanismo de escuta foi ativado. De acordo com outra modalidade, realimentação visual indicando um nível de som medido de entrada de voz recebida pode ser feita na tela sensível a toque no local no qual o toque é recebido.

[0007] De acordo com outra modalidade d presente invenção, o contexto do display (tela) pode ser também utilizado como uma entrada além de entrada de voz para completar um conjunto de tarefas. Por exemplo, a entrada contextual adicional pode auxiliar a estreitar resultados de busca para fornecer ao usuário uma experiência aperfeiçoada de reconhecimento de voz.

[0008] Essas e outras características e vantagens serão evidentes a partir de uma leitura da seguinte descrição detalhada e um exame dos desenhos associados. Deve ser entendido que tanto a descrição geral acima como a seguinte descrição detalhada são explanatórias somente e não são restritivas da invenção como reivindicada.

[0009] Esse sumário é fornecido para introduzir uma seleção de conceitos em uma forma simplificada que são adicionalmente descritos

Petição 870190110079, de 29/10/2019, pág. 6/36

4/25 abaixo na descrição detalhada. Esse sumário não pretende identificar aspectos chaves ou aspectos essenciais da matéria reivindicada, nem é destinado como um meio auxiliar para determinar o escopo da matéria reivindicada.

BREVE DESCRIÇÃO DOS DESENHOS [00010] A figura 1 é um diagrama de um dispositivo de computação móvel de exemplo.

[00011] A figura 2 é um diagrama de blocos simplificado que ilustra componentes de um dispositivo de computação móvel que pode servir como um ambiente operacional exemplar para modalidades da presente invenção.

[00012] A figura 3 é um diagrama de bloco simplificado de uma arquitetura de computação para utilizar um módulo de tocar em qualquer lugar para falar para engajar o mecanismo de escuta em interação de reconhecimento de voz em um dispositivo de computação móvel.

[00013] A figura 4 é um fluxograma lógico que ilustra um método para engajar o mecanismo de escuta em interação de reconhecimento de voz utilizando um módulo de tocar em qualquer lugar para falar.

[00014] A figura 5 é uma ilustração de realimentação visual de exemplo fornecida por um módulo de tocar em qualquer lugar para falar.

[00015] A figura 6 é uma ilustração de um display de medidor de volume de exemplo fornecido por um módulo de tocar em qualquer lugar para falar.

[00016] A figura 7 é um fluxograma lógico que ilustra um método para engajar o mecanismo de escuta em interação de reconhecimento de voz utilizando um módulo de tocar em qualquer lugar para falar em combinação com identificar e utilizar dados contextuais de um toque.

DESCRIÇÃO DETALHADA [00017] Como descrito resumidamente acima, as modalidades da

Petição 870190110079, de 29/10/2019, pág. 7/36

5/25 presente invenção são dirigidas a engajar um mecanismo de escuta em interação de reconhecimento de voz em um dispositivo de computação móvel. Por pressionar em qualquer área dada de uma tela de um dispositivo de computação móvel, um módulo de tocar em qualquer lugar para falar (TATS) ativa o mecanismo de escuta de um módulo de reconhecimento de voz para aceitar a entrada falada de um usuário de modo que o módulo de reconhecimento de voz possa converter as palavras faladas em entrada legível por máquina. As aplicações de reconhecimento de voz podem ser utilizadas em dispositivos de computação móveis para uma variedade de tarefas incluindo, porém não limitados a discagem de voz (por exemplo, “Telefonar para Bob”), abrir busca na rede (por exemplo, Pizza San Francisco Califórnia” para encontrar pizzarias em San Francisco) e processamento de voz para texto (por exemplo, mensagens de texto e e-mails).

[00018] Muitos métodos de entrada existem para engajar o mecanismo de escuta em interação de reconhecimento de voz em um dispositivo de computação móvel, cada possuindo seu próprio conjunto de desvantagens e às vezes apresentando dificuldades que superam os benefícios de utilizar reconhecimento de voz. Muitos usuários utilizam reconhecimento de voz porque estão utilizando seu dispositivo de computação móvel em um ambiente de distração (isto é, enquanto caminham ou dirigem), tornando difícil olhar a tela de seu dispositivo para realizar uma tarefa utilizando teclas de hardware, teclas macias, ou limites definidos de um botão em uma interface de tela sensível a toque. As modalidades da presente invenção utilizam a quantidade máxima de área alvo em uma tela de um dispositivo de computação móvel para ativar o mecanismo de escuta, fornecendo utilização sem interação de visão. Iniciar o modo de escuta de reconhecimento de voz com modalidades da presente invenção não requer que um usuário olhe a tela de seu dispositivo para saber se está tocando em uma área

Petição 870190110079, de 29/10/2019, pág. 8/36

6/25 alvo específico, nem terá de olhar ou sentir um botão tátil para assegurar que está pressionando o botão correto.

[00019] Quando um usuário pressiona e segura a tela de um dispositivo de computação móvel com seu dedo, caneta ou outro dispositivo de seleção, um módulo de toque em qualquer lugar para falar pode fornecer uma indicação visual, audível ou tátil, ou uma combinação dos três para indicar que o mecanismo de escuta é ativado e o módulo de reconhecimento de voz está pronto para capturar entrada de voz. Quando uma indicação de que o usuário terminou com sua entrada de voz é recebida, o módulo de tocar em qualquer lugar para falar pode fornecer outra indicação (visual, audível ou tátil ou uma combinação das três) para indicar que o mecanismo de escuta está desativado. O módulo de reconhecimento de voz pode processar os dados localmente no dispositivo ou remotamente através de uma conexão sem fio para um servidor onde pode ser processado. A aplicação de reconhecimento de voz pode receber então a saída reconhecida e pode então ativar uma aplicação dada, exibir informações dadas, ou executar uma tarefa dada que o usuário indicou através da aplicação de reconhecimento de voz.

[00020] De acordo com outra modalidade, o módulo TATS pode ser também implementado como uma “camada” acima de uma interface de usuário existente. Quando implementado como uma “camada” acima de uma interface de usuário existente, o módulo TATS pode utilizar tanto informações sensíveis a contexto da interface visual além de comandos de voz ilimitados para ajudar um usuário a completar um conjunto de tarefas. Com base no contexto de uma tela de um dispositivo móvel, e/ou local em uma tela onde um usuário toca, uma determinação pode ser feita com relação ao contexto da entrada de voz do usuário. Por exemplo, se um usuário está visualizando um mapa em seu dispositivo de computação móvel, ele pode tocar em uma área es

Petição 870190110079, de 29/10/2019, pág. 9/36

7/25 pecífica da interface de mapa e falar “cinemas”. O módulo TATS pode receber a entrada falar “cinemas”, bem como o local ciente de contexto na interface de mapa onde o usuário tocou para recuperar informações relevantes a cinemas em uma proximidade da área geográfica correlacionada à área tocada da interface de mapa. Para outro exemplo, por tocar em uma imagem ou uma página de rede e falar, “enviar para Bob”, um usuário pode enviar o objeto tocado para um contato reconhecido, Bob.

[00021] A seguinte descrição detalhada se refere aos desenhos em anexo. Sempre que possível, os mesmos números de referência são utilizados no desenho e na seguinte descrição para se referir aos elementos iguais ou similares. Embora modalidades da invenção possam ser descritas, modificações, adaptações e outras implementações são possíveis. Por exemplo, substituição, adição ou modificações podem ser feitas aos elementos ilustrados nos desenhos, e os métodos descritos aqui podem ser modificados por substituir, reordenar ou adicionar estágios aos métodos revelados. Por conseguinte, a seguinte descrição detalhada não limita a invenção, porém em vez disso, o escopo adequado da invenção é definido pelas reivindicações apensas.

[00022] Deve ser reconhecido que várias modalidades da presente invenção podem ser implementadas (1) como uma seqüência de atos implementados por computado ou módulos de programa que rodam em um sistema de computação e/ou (2) como circuitos de lógica de máquina interconectados ou módulos de circuito no sistema de computação. A implementação é uma questão de escolha dependente das exigências de desempenho do sistema de computação implementando a invenção. Por conseguinte, operações lógicas incluindo algoritmos relacionados podem ser mencionadas variadamente como operações, dispositivos estruturais, atos ou módulos. Será reconhecido por uma pessoa versada na técnica que essas operações, dispositivos estrutu

Petição 870190110079, de 29/10/2019, pág. 10/36

8/25 rais, atos e módulos podem ser implementados em software, firmware, lógica digital de propósito especial, e qualquer combinação dos mesmos sem desviar do espírito e escopo da presente invenção como mencionado nas reivindicações expostas aqui.

[00023] O que segue é uma descrição de um dispositivo de computação móvel apropriado, por exemplo, um telefone móvel com o qual as modalidades da invenção podem ser postas em prática. Com referência à figura 1, um dispositivo de computação móvel de exemplo 100 para implementar a modalidade é ilustrado. Em uma configuração básica, o dispositivo de computação móvel 100 é um computador portátil tendo tanto elementos de entrada como elementos de saída. Os elementos de entrada podem incluir display de tela sensível ao toque 105 e botões de entrada 115 que permitem ao usuário entrar informações em dispositivo de computação móvel 100. O dispositivo de computação móvel 100 também pode incorporar um elemento de entrada lateral opcional 125 que permite entrada adicional pelo usuário. O elemento de entrada lateral opcional 125 pode ser um comutador giratório, um botão, ou qualquer outro tipo de elemento de entrada manual. Em modalidades alternativas, o dispositivo de computação móvel 100 pode incorporar um número maior ou menor de elementos de entrada. Por exemplo, o display 105 pode não ser uma tela sensível ao toque em algumas modalidades. Ainda em outra modalidade alternativa, o dispositivo de computação móvel é um sistema de telefone portátil, como um telefone celular tendo display 105 e botões de entrada 115. O dispositivo de computação móvel 100 pode incluir também um bloco de teclas opcional 115. O bloco de teclas opcional 115 pode ser um bloco de teclas físico ou um bloco de teclas “macio” gerado no display de tela sensível ao toque.

[00024] O dispositivo de computação móvel 100 incorpora elementos de saída, como display 105, que podem exibir uma interface gráfiPetição 870190110079, de 29/10/2019, pág. 11/36

9/25 ca de usuário (GUI). Outros elementos de saída incluem alto-falante 130 e luz LED 120. Adicionalmente, o dispositivo de computação móvel 100 pode incorporar um módulo de vibração (não mostrado), que faz com que o dispositivo de computação móvel 100 vibre para notificar o usuário de um evento. Ainda em outra modalidade, o dispositivo de computação móvel 100 pode incorporar uma tomada de fone de cabeça (não mostrado) para fornecer outro meio de fornecer sinais de saída.

[00025] Embora descrito aqui em combinação com o dispositivo de computação móvel 100, em modalidades alternativas a invenção é utilizada em uma combinação com qualquer número de sistemas de computador, como em ambientes de desktop, sistemas de computador de laptop ou notebook, sistemas multiprocessadores, meios eletrônicos de consumidor programáveis ou baseados em microprocessador, PCs de rede, minicomputadores, comutadores de grande porte e similares. As modalidades da invenção podem ser também postas em prática em ambientes de computação distribuídos onde tarefas são realizadas por dispositivos de processamento remoto que são ligados através de uma rede de comunicação em um ambiente de computação distribuído; programas podem ser localizados em dispositivos de armazenagem de memória tanto local como remoto. Para resumir, qualquer sistema de computador tendo uma pluralidade de sensores de ambiente, uma pluralidade de elementos de saída para fornecer notificações para um usuário e uma pluralidade de tipos de evento de notificação pode incorporar modalidades da presente invenção.

[00026] A figura 2 é um diagrama de blocos que ilustra componentes de um dispositivo de computação móvel utilizado em uma modalidade, como o dispositivo de computação mostrado na figura 1. Isto é, o dispositivo de computação móvel 100 (figura 1) pode incorporar o sistema 200 para implementar algumas modalidades. Por exemplo, o

Petição 870190110079, de 29/10/2019, pág. 12/36

10/25 sistema 200 pode ser utilizado na implementação de um “smart phone” que pode rodar uma ou mais aplicações similares àquelas de um computador notebook ou de mesa como, por exemplo, navegador, e-mail, programação, envio instantâneo de mensagem, e aplicações de tocador de mídia. O sistema 200 pode executar um Sistema Operacional (OS) como WINDOWS XP®, WINDOWS CE® disponível da MICROSOFT CORPORATION, Redmond, Washington. Em algumas modalidades, o sistema 200 é integrado como um dispositivo de computação, como um assistente pessoal digital integrado (PDA) e telefone sem fio.

[00027] Um ou mais programas de aplicação 266 pode ser carregado na memória 262 e rodar em ou em associação ao sistema operacional 264. Os exemplos de programas de aplicação incluem programas de discador de telefone, programas de e-mail, programas PIM (gerenciamento de informações pessoais), programas de processamento de texto, programas de planilhas, programas de navegador na Internet, programas de envio de mensagens, e assim por diante. O sistema 200 também inclui armazenagem não volátil 268 na memória 262. A armazenagem não volátil 268 pode ser utilizada para armazenar informações persistentes que não devem ser perdidas se o sistema 200 for desligado. As aplicações 266 podem utilizar e armazenar informações em uma armazenagem não volátil 268, como e-mail ou outras mensagens utilizadas por uma aplicação de e-mail, e similares. Uma aplicação de sincronização (não mostrada) também reside no sistema 200 e é programada para interagir com uma aplicação de sincronização correspondente residente em um computador hospedeiro para manter as informações armazenadas na armazenagem não volátil 268 sincronizada com informações correspondentes armazenadas no computador hospedeiro. Como deve ser reconhecido, outras aplicações podem ser carregadas na memória 262 e rodar no dispositivo 100.

Petição 870190110079, de 29/10/2019, pág. 13/36

11/25 [00028] De acordo com uma modalidade, a aplicação de tocar em qualquer lugar para falar 265 é operativa para ativar um mecanismo de escuta de um módulo de reconhecimento de voz operativo para receber informações de voz de um usuário para uso em uma variedade de aplicações como descrito abaixo.

[00029] O sistema 200 tem uma fonte de energia 270 que pode ser implementada como uma ou mais baterias. A fonte de energia 270 poderia incluir ainda uma fonte de energia eterna, como um adaptador CA ou uma base de encaixe acionada que suplementa ou recarregada as baterias.

[00030] O sistema 200 pode incluir também um radio 272 que executa a função de transmitir e receber comunicações de radiofreqüência. O radio 272 facilita conectividade sem fio entre o sistema 200 e o “mundo externo”, através de uma portadora de comunicação ou fornecedor de serviço. As transmissões para e a partir do rádio 272 são conduzidas sob controle de OS 264. Em outras palavras, as comunicações recebidas pelo rádio 272 podem ser disseminadas para programas de aplicação 266 através de OS 264, e vice versa.

[00031] O rádio 272 permite que o sistema 200 se comunique com outros dispositivos de computação, como através de uma rede. O rádio 272 é um exemplo de mídia de comunicação. Mídia de comunicação pode ser incorporada tipicamente por instruções legíveis por computador, estruturas de dados, módulos de programa, ou outros dados em um sinal de dados modulado, como uma onda portadora ou outro mecanismo de transporte, e inclui qualquer mídia de distribuição de informações. O termo “sinal de dados modulado” significa um sinal que tem uma ou mais de suas características definida ou alterada de tal modo a codificar informações no sinal. Como exemplo, e não limitação, a mídia de comunicação inclui mídia cabeada como conexão cabeada direta ou rede cabeada, e mídia sem fio como mídia acústica,

Petição 870190110079, de 29/10/2019, pág. 14/36

12/25

RF, infravermelha e outra mídia sem fio. O termo mídia legível por computador como utilizado aqui inclui tanto mídia de armazenagem como mídia de comunicação.

[00032] Essa modalidade do sistema 200 é mostrada com dois tipos de dispositivos de saída de notificação; LED 120 que pode ser utilizado para fornecer notificações visuais e uma interface de áudio 274 que pode ser utilizada com alto-falante 130 para fornecer notificações de áudio. Esses dispositivos podem ser acoplados diretamente à fonte de energia 270 de modo que quando ativados, permanecem ligados por uma duração determinada pelo mecanismo de notificação embora o processador 260 e outros componentes poderiam ser fechados para conservar energia de bateria. O LED 120 pode ser programado para permanecer ligado indefinidamente até que o usuário aja para indicar o estado ligado do dispositivo. A interface de áudio 274 é utilizada para fornecer sinais audíveis para e receber sinais audíveis do usuário. Por exemplo, além de ser acoplada ao alto-falante 130, a interface de áudio 274 pode ser também acoplada a um microfone para receber entrada audível, de modo a facilitar uma conversa telefônica. De acordo com modalidades da presente invenção, o microfone também pode servir como um sensor de áudio para facilitar o controle de notificações, como será descrito abaixo.

[00033] O sistema 200 pode incluir ainda interface de vídeo 276 que permite que uma operação de uma câmera a bordo 135 grave imagens fixas, fluxo de vídeo e similar.

[00034] Um sistema de implementar dispositivo de computação móvel 200 pode ter características ou funcionalidade adicionais. Por exemplo, o dispositivo pode incluir também dispositivos de armazenagem de dados adicionais (removíveis e/ou não removíveis) como discos magnéticos, discos ópticos, ou fita. Tal armazenagem adicional é ilustrada na figura 2 pela armazenagem 268. Mídia de armazenagem

Petição 870190110079, de 29/10/2019, pág. 15/36

13/25 de computador pode incluir mídia volátil e não volátil, removível e não removível implementada em qualquer método ou tecnologia para armazenagem de informações, como instruções legíveis por computador, estruturas de dados, módulos de programa ou outros dados. [00035] Dados/informações geradas ou capturadas pelo dispositivo 100 e armazenadas através do sistema 200 podem ser armazenadas localmente no dispositivo 100, como descrito acima, ou os dados podem ser armazenados em qualquer número de mídia de armazenagem que pode ser acessada pelo dispositivo através do rádio 272 ou através de uma conexão cabeada entre o dispositivo 100 e um dispositivo de computação separado 330 associado ao dispositivo 100, por exemplo, um computador servidor em uma rede de computação distribuída 320 como a Internet. Como deve ser reconhecido tais dados/informações podem ser acessadas através do dispositivo 100 via rádio 272 ou via uma rede de computação distribuída 320. Similarmente, tais dados/informações podem ser prontamente transferidas entre os dispositivos de computação para armazenagem e uso de acordo com meio de armazenagem e transferência de dados/informações bem conhecidos, incluindo correio eletrônico e sistemas de partilhar informações/dados colaborativos.

[00036] A figura 3 é um diagrama de blocos simplificado de uma arquitetura de computação para utilizar um módulo de tocar em qualquer lugar para falar (TATS) 265 para iniciar a escuta de um módulo de reconhecimento de voz 330 em um dispositivo de computação móvel 100. De acordo com uma modalidade, após uma indicação de um toque em uma tela 106 de um dispositivo de computação móvel 100 ser recebida pelo módulo TATS 265, um processo de reconhecimento de voz, pelo qual entrada audível recebida é reconhecida, pode ser realizado através de arquitetura de reconhecimento de voz como ilustrado na figura 4. Como deve ser reconhecido, a arquitetura de reco

Petição 870190110079, de 29/10/2019, pág. 16/36

14/25 nhecimento de voz 330 ilustrada na figura 4 pode ser integrada com o módulo TATS 265, ou a arquitetura de reconhecimento de voz ilustrada na figura 4 pode ser chamada pelo módulo TATS 265 para obter reconhecimento de entrada audível.

[00037] De acordo com uma modalidade, após a entrada audível dada ser reconhecida como uma seqüência de texto, por exemplo, “Pizza New York city” e identificada como associada a uma tarefa dada, por exemplo, busca na rede, um módulo de ação 340 pode ser ativado para passar a seqüência de texto reconhecida para uma fonte de informações local 310 ou através de uma rede de computação distribuída 320 para uma fonte remota 350 para recuperação de informações aplicáveis à seqüência de texto. Por exemplo, se a entrada audível, “Bob” for reconhecida pelo módulo de reconhecimento 330 como um contato no livro de endereços de usuário ou lista de contatos, então o módulo de ação 340 pode passar a seqüência de texto identificada para todas as fontes de informações contidas na fonte local 310 e/ou uma fonte remota 350 através de uma rede de computação distribuída 320 para obter informações disponíveis associadas à seqüência de texto selecionada. De acordo com uma modalidade, o módulo de ação 340 pode fornecer opções para um usuário executar uma tarefa móvel referente ao contato reconhecido. Com referência novamente ao exemplo acima onde um usuário fala “Bob” e a entrada é reconhecida como um contato no livro de endereços do usuário, o módulo de ação 340 pode fornecer opções para o usuário executar uma ação, por exemplo, fazer uma chamada, ou enviar um e-mail ou uma mensagem instantânea para o contato reconhecido, Bob.

[00038] Informações que casam a seqüência de texto a partir de cada fonte disponível podem ser retornadas ao módulo TATS 265 para fornecimento a um usuário para uso subseqüente em uma aplicação de software desejada ou tarefa móvel. Por exemplo, se for verificado

Petição 870190110079, de 29/10/2019, pág. 17/36

15/25 que a entrada audível “Bob” corresponde a dois casamentos possíveis, “Bob Smith” e “Bob Davis”, então as duas entradas casadas podem ser apresentadas ao usuário em uma interface de usuário exibida em seu dispositivo de computação móvel 100 para permitir ao usuário selecionar sua entrada pretendida. Após o usuário selecionar sua entrada pretendida, então a seqüência de texto selecionada pode ser passada para uma ou mais aplicações de software ou móveis como descrito em mais detalhe abaixo. Como deve ser reconhecido, o módulo de reconhecimento de voz 330 pode ser programado para reconhecer muitos tipos de dados, por exemplo, comandos, endereços, localizações geográficas, títulos de livros, títulos de filmes, etc. se opções forem apresentadas a um usuário que não casam com a entrada pretendida do usuário, o usuário pode pressionar e reter a tela 105 de um dispositivo de computação móvel 100 para fornecer novamente entrada audível, ou pode pressionar fora da área dos casamentos exibidos para evitar ter de retornar a uma tela de entrada anterior para pressionar e falar.

[00039] A figura 4 é um fluxograma lógico que ilustra um método para fornecer um módulo de tocar em qualquer lugar para falar (TATS) 265 para engajar o mecanismo de escuta em interação de reconhecimento de voz em um dispositivo de computação móvel 100. Tendo descrito um ambiente operacional exemplar e aspectos de modalidades da presente invenção acima com relação às figuras 1-3, é vantajoso descrever uma operação de exemplo de uma modalidade da presente invenção. Com referência a seguir à figura 4, o método 400 começa na operação de iniciar 405 e prossegue para a operação 410 onde o módulo TATS 265 é selecionado e aberto por um usuário. Um usuário pode abrir o módulo TATS 265 através de métodos de entrada conhecidos, por exemplo, tocar em um ícone ou seqüência de texto que representa o módulo TATS 265 na tela 105 de um dispositivo de

Petição 870190110079, de 29/10/2019, pág. 18/36

16/25 computação móvel 100.

[00040] Após o módulo TATS 265 ser aberto, o método prossegue para a operação 415 onde o módulo TATS recebe uma indicação de um toque em qualquer lugar na tela sensível a toque 105 de um dispositivo de computação móvel 100. Como deve ser reconhecido, um toque pode ser um toque do dedo de um usuário ou por intermédio de um dispositivo, como uma caneta. De acordo com modalidades da invenção, o toque recebido é o método pelo qual o modo de escuta é habilitado em interação de reconhecimento de voz. Isto é, modalidades da presente invenção habilitam um usuário a tocar em qualquer lugar na tela sensível a toque 105 do dispositivo 100 para indicar para o módulo de reconhecimento de voz para começar a ouvir entrada audível. As modalidades da presente invenção permitem que um usuário toque em qualquer lugar na tela 105 do dispositivo 100 para engajar o mecanismo de escuta, ao contrário da interação pressionar para falar através de um método de entrada alternativo como um elemento de entrada lateral por fio 125, que pode ser um comutador giratório, um botão, ou qualquer outro tipo de elemento de entrada manual, botões de entrada de hardware 115, teclas macias, limites definidos de um botão em uma interface de tela sensível a toque 105, ou outros elementos de entrada conhecidos.

[00041] De acordo com uma modalidade, um toque pode ser um componente de um modelo de interação de pressionar e reter, onde um usuário toca a tela 105 para ativar a escuta, mantém seu dedo (ou outro mecanismo utilizado para a interface de tela sensível a toque) na tela enquanto está fornecendo entrada audível, e então libera seu dedo ou outro mecanismo de toque para desativar escuta. De acordo com outra modalidade, um toque pode ser um modelo de interação de pressionar e liberar, que como no modelo anterior, um usuário toca a tela 105 para ativar a escuta; entretanto, após liberar seu dedo ou ou

Petição 870190110079, de 29/10/2019, pág. 19/36

17/25 tro mecanismo de toque, a aplicação de reconhecimento de voz 330 permanece no modo de escuta. O mecanismo de escuta pode se desativado através de uma indicação de um toque subseqüente, se silêncio for determinado para um dado período de tempo, ou através de outro método pelo qual uma indicação de fim de voz é detectável por uma aplicação dada.

[00042] Após uma indicação de um toque ser recebida pelo módulo TATS 265, na operação 420, realimentação pode ser dada para confirmar o recebimento do toque. De acordo com uma modalidade e como ilustrado na figura 5, em associação à figura 4, a realimentação 505 pode ser realimentação visual (por exemplo, display animado na tela 105), realimentação audível (por exemplo, tom audível tocado através do alto-falante 130), realimentação tátil (por exemplo, vibração) ou uma combinação dos três. De acordo com uma modalidade, a realimentação visual 505 pode indicar onde na tela 105 o usuário tocou. Por exemplo, como ilustrado na figura 5, uma imagem 505 pode ser exibida na tela 105 para alertar o usuário de que uma indicação de um toque foi recebido no local onde a imagem é exibida. A realimentação pode alertar o usuário de que o módulo TATS 265 recebeu uma entrada de toque, e, por conseguinte, o mecanismo de escuta foi ativado como mostrado na operação 425 como ilustrado na figura 4. De acordo com uma modalidade, o módulo TATS 265 pode enviar realimentação confirmando o recebimento de um toque para o usuário (operação 420) e ativar o mecanismo de escuta (operação 425) simultaneamente. De acordo com outra modalidade, a operação 420 pode ocorrer antes da operação 425. De acordo com outra modalidade, a operação 425 pode ocorrer antes da operação 420.

[00043] Após o mecanismo de escuta ser ativado, o módulo de reconhecimento de voz 330 está pronto para receber entrada audível a partir do usuário. Na operação 430, o usuário pode falar, e sua ex

Petição 870190110079, de 29/10/2019, pág. 20/36

18/25 pressão falada pode ser recebida pelo mecanismo de escuta. Como deve ser reconhecido por aqueles versados na técnica, o reconhecimento de voz é uma tecnologia conhecida que não será discutida extensamente aqui.

[00044] Na operação 431, enquanto a expressão falada está sendo recebida 430, realimentação visual de um nível de som medido da expressão falada pode ser exibido na tela. Com referência à figura 6 em associação à figura 4, a realimentação pode ser um medidor de volume 605. De acordo com uma modalidade, o medidor de volume pode ser feito como uma série de anéis concêntricos que emanam de uma posição tocada à medida que mais volume é detectado. De acordo com outra modalidade, os anéis concêntricos podem alterar a cor ou sombreamento à medida que o volume aumenta. Como ilustrado na figura 6, um medidor e volume de exemplo 605 é exibido na tela 105 de um dispositivo de computação móvel 100 refletindo o volume no qual o usuário está falando. Nesse exemplo, o volume no qual o usuário está falando é mostrado como sendo detectado em um nível de volume de três de um máximo de cinco níveis. Se o usuário falar mais alto, o anel externo seguinte pode mudar de cor ou sombreamento para deixar o usuário saber que o volume de sua voz aumentou. Se o usuário falar mais suavemente, o número de anéis coloridos ou sombeados pode diminuir para deixar o usuário saber que o volume de sua voz diminuiu. O display animado é um modo de fornecer realimentação visual e auxiliar a auto-correção.

[00045] Com referência ainda à figura 4, após o usuário terminar sua expressão falada, na operação 435, uma indicação para terminar o modo de escuta é recebido. Como descrito anteriormente, de acordo com uma modalidade, um modelo de interação de pressionar e reter pode ser utilizado onde um usuário toca a tela 105 para ativar a escuta, mantém seu dedo (ou outro mecanismo utilizado para a interface

Petição 870190110079, de 29/10/2019, pág. 21/36

19/25 de tela sensível a toque) na tela enquanto ele está fornecendo entrada audível, e então libera seu dedo ou outro mecanismo sensível a toque para indicar para o módulo TATS 265 para desativar escuta. De acordo com outra modalidade, um modelo de interação de pressionar e liberar pode ser utilizado, onde a indicação para terminar escuta pode ser através de uma indicação de um toque subseqüente. De acordo com outra modalidade, silêncio detectado para um dado período de tempo pode ser a indicação para o mecanismo de escuta terminar escuta. Como deve ser reconhecido, outros métodos podem ser utilizados para indicar que o usuário terminou de falar e para a aplicação sair do modo de escuta.

[00046] Após uma indicação ser recebida para terminar a escuta, na operação 440, o mecanismo de escuta é desativado, e o módulo de reconhecimento de voz 330 não mais recebe entrada audível até receber uma indicação para ativar novamente o mecanismo de escuta. Na operação 445, o módulo TATS 265 confirma que recebeu uma indicação para desativar escuta e subseqüentemente o mecanismo de escuta é desativado. De acordo com uma modalidade, a confirmação pode ser realimentação visual, realimentação audível, realimentação tátil, ou uma combinação dos três. De acordo com uma modalidade, as operações 440 e 445 podem ocorrer simultaneamente. De acordo com outra modalidade, a operação 440 pode ocorrer antes da operação 445. De acordo com outra modalidade, a operação 440 pode ocorrer após a operação 445.

[00047] Na operação 450, a entrada audível recebida é enviada para um módulo de reconhecimento de voz, onde pode ser traduzida em sinais digitais, analisado e determinado o que o usuário falou. O módulo de reconhecimento de voz 330 pode ser incorporado no dispositivo de computação móvel 100 ou localizado remotamente e acessado através de uma conexão sem fio a um servidor. Após reconhecimento

Petição 870190110079, de 29/10/2019, pág. 22/36

20/25 de voz, pode ser enviado para um módulo de ação 340 para executar a função pretendida reconhecida do usuário. Por exemplo, foi determinado que o usuário falou, “Movie listings; Dalas, Texas”. O módulo de ação 340 pode enviar os dados para um motor de busca através de uma conexão sem fio para recuperar informações de listagem de filmes atuais na área de Dallas, Texas. Na operação 455, os dados recuperados podem ser então enviados para o usuário e exibidos na tela 105 do dispositivo de computação móvel. De acordo com uma modalidade, os dados recuperados podem exigir a utilização de outras aplicações móveis. Por exemplo, para buscar listagens de filmes, para recuperar os dados fornecidos, uma aplicação de navegador pode necessitar ser habilitada. O método termina na operação 460.

[00048] Como descrito resumidamente anteriormente, uma modalidade da presente invenção inclui utilizar informações sensíveis a contexto da interface visual além de comandos de voz ilimitados para ajudar um usuário a completar um conjunto de tarefas. A figura 7 é um fluxograma lógico que ilustra um método para fornecer um módulo de tocar em qualquer lugar para falar (TATS) 265 para engajar o mecanismo de escuta em interação de reconhecimento de voz em um dispositivo de computação móvel 100 onde um contexto da tela onde um usuário tocou pode ser identificado e utilizado em combinação com entrada audível recebida.

[00049] De acordo com uma modalidade, o módulo TATS 265 pode ser operativo para utilizar os dados associados a um toque para não somente engajar o mecanismo de escuta de um módulo de reconhecimento de voz 330, como também engajar o mecanismo de escuta no contexto de um local ou outros dados contextuais que estão sendo tocados. Com base no contexto da tela 105 do dispositivo móvel 100, e/ou o local na tela 105 onde um usuário toca, o módulo TATS 265 pode determinar o contexto da entrada de voz do usuário. Por conse

Petição 870190110079, de 29/10/2019, pág. 23/36

21/25 guinte, o usuário recebe mais informações direcionadas. Por exemplo, se um usuário está vendo um mapa em seu dispositivo de comutação móvel 100, e toca em uma área específica da interface de mapa e fala, “café”, o módulo TATS 265 pode receber a entrada falada, “café”, bem como o local ciente de contexto na interface do mapa onde o usuário tocou a tela sensível a toque para recuperar informações relevantes a café e o local especificado pela área tocada da interface de mapa. Se o usuário está vendo o mesmo mapa como no exemplo anterior e fala “café”, porém toca em um ponto diferente na interface de m apa, os resultados retornados podem ser diferentes porque a entrada de local contextual mudou. A implementação de dados visuais contextuais com dados falados pode habilitar um vasto conjunto de aplicações possíveis. Por exemplo, falar um comando de instrução (por exemplo, “zoom in”) enquanto toca em uma interface de mapa pode produzir resultados diferentes do que falar uma expressão destinada como uma consulta de busca.

[00050] Com referência então à figura 7, o método 700 começa na operação iniciar 706 e prossegue para a operação 710 onde o módulo TATS 265 é selecionado e aberto por um usuário. Um usuário pode abrir o módulo TATS 265 através de métodos de entrada conhecidos, por exemplo, tocar em um ícone ou seqüência de texto que representa o módulo TATS 265 na tela 105 de um dispositivo de computação móvel 100.

[00051] Após o módulo TATS 265 ser aberto, o método prossegue para a operação 715 onde o módulo TATS recebe uma indicação de um toque em uma área contextual da tela sensível a toque 105 de um dispositivo de computação móvel 100. Como deve ser reconhecido, um toque pode ser um toque do dedo de um usuário ou por intermédio de um dispositivo, como uma caneta. De acordo com modalidades da invenção, o toque recebido é o método pelo qual o modo de escuta é

Petição 870190110079, de 29/10/2019, pág. 24/36

22/25 habilitado em interação de reconhecimento de voz. As modalidades da presente invenção habilitam um usuário a tocar em uma área contextual na tela sensível a toque 105 do dispositivo 100 para indicar para o módulo de reconhecimento de voz para começar a escutar entrada audível.

[00052] De acordo com uma modalidade, o toque pode ser um componente de um modelo de interação de pressionar e reter, onde um usuário toca a tela 105 para ativar a escuta, mantém seu dedo (ou outro mecanismo utilizado para a interface de tela sensível a toque) na área contextual da tela enquanto está fornecendo entrada audível, e então libera seu dedo ou outro mecanismo de toque para desativar escuta. De acordo com outra modalidade, um toque pode ser um modelo de interação de pressionar e liberar, que como no modelo anterior, um usuário toca a área contextual da tela 105 para ativar a escuta; entretanto, após liberar seu dedo ou outro mecanismo de toque, a aplicação de reconhecimento de voz 330 permanece no modo de escuta. O mecanismo de escuta pode ser desativado através de uma indicação de um toque subseqüente, se silêncio for determinado por um dado período de tempo, ou através de outro método pelo qual uma indicação de término de fala é detectável por uma dada aplicação.

[00053] Após uma indicação de um toque ser recebida pelo módulo TATS 265, na operação 725, a realimentação pode ser dada para confirmar o recebimento do toque. De acordo com uma modalidade, a realimentação 505 pode ser realimentação visual (por exemplo, display animado na tela 105), realimentação audível (por exemplo, tom audível tocado através de alto-falante 130), realimentação tátil (por exemplo, vibração) ou uma combinação dos três. De acordo com uma modalidade, a realimentação visual 505 pode indicar onde na tela 105 o usuário tocou. Por exemplo, com referência novamente à figura 5, uma imagem 505 pode ser exibida na tela 105 para alertar ao usuário de

Petição 870190110079, de 29/10/2019, pág. 25/36

23/25 que uma indicação de um toque foi recebida no local onde a imagem é exibida. A realimentação 505 pode alertar o usuário de que o módulo TATS 265 recebeu uma entrada de toque, e, por conseguinte, o mecanismo de escuta foi ativado como mostrado na operação 725 como ilustrado na figura 7. De acordo com uma modalidade, o módulo TATS 265 pode enviar realimentação confirmando o recebimento de um toque para o usuário (operação 720) e ativar o mecanismo de escuta (operação 725) simultaneamente. De acordo com outra modalidade, a operação 720 pode ocorrer antes da operação 725. De acordo com outra modalidade, a operação 725 pode ocorrer antes da operação 720.

[00054] Após ativação do mecanismo de escuta, o módulo de reconhecimento de voz 330 está pronto para receber entrada audível a partir do usuário. Na operação 730, o usuário pode falar, e sua expressão falada pode ser recebida pelo mecanismo de escuta. Como deve ser reconhecido por aqueles versados na técnica, o reconhecimento de voz é uma tecnologia conhecida que não será discutida extensamente aqui.

[00055] Na operação 731, enquanto a expressão falada está sendo recebida 730, como descrito anteriormente com referência à operação 431 na figura 4, a realimentação visual 605 de um nível de som medido da expressão falada pode ser exibida na tela 105 feito como centrada em torno de uma área na tela sensível a toque 105 na qual o toque é recebido.

[00056] Continuando para a operação 732, o módulo TATS 265 pode identificar os dados contextuais do toque e determinar uma identificação do toque em associação aos dados contextuais identificados. Na operação 733, a identificação do toque pode ser passada para o módulo TATS 265. Por exemplo, se um usuário estiver vendo um mapa de uma cidade, ele/ela pode tocar uma área específica do mapa e

Petição 870190110079, de 29/10/2019, pág. 26/36

24/25 falar uma expressão. A área específica do mapa exibido na interface de tela onde o usuário tocou pode ser lida e identificada como uma latitude e longitude específicas nas quais utilizar em combinação com dados falados recebidos para executar uma função pretendida reconhecida pelo usuário.

[00057] Na operação 735, uma indicação para terminar o modo de escuta é recebida. Por conseguinte, na operação 740, o mecanismo de escuta é desativado e na operação 745, uma confirmação é dada de que o mecanismo de escuta foi desativado.

[00058] Na operação 750, a entrada audível recebida é enviada para um módulo de reconhecimento de voz, onde pode ser traduzido em dados digitais, analisados em combinação com os dados contextuais identificados do toque, e determinado o que o usuário falou. O módulo de reconhecimento de voz 330 pode ser incorporado no dispositivo de computação móvel 100 ou localizado remotamente e acessado através de uma conexão sem fio para um servidor. Após a voz ser reconhecida, pode ser enviada para um módulo de ação 340 para executar a função pretendida reconhecida do usuário. De acordo com uma modalidade, a identificação e utilização dos dados contextuais do toque podem ocorrer em vários estágios no processo, e não necessariamente na operação 750.

[00059] Na operação 755, os dados recuperados podem ser então enviados para o usuário e exibidos na tela 105 do dispositivo de computação móvel. De acordo com uma modalidade, os dados recuperados podem exigir a utilização de outras aplicações móveis. O método termina na operação 760.

[00060] De acordo com uma modalidade, uma interação de pressionar e reter pode habilitar certas funções de reconhecimento de voz; enquanto alternativamente, uma interação de pressionar e liberar pode habilitar outras funcionalidades. Por exemplo, se um usuário tocar seu

Petição 870190110079, de 29/10/2019, pág. 27/36

25/25 dedo na tela 105 de seu dispositivo móvel 100 e então mover seu dedo para fora da tela 105, o módulo TATS 265 pode habilitar o mecanismo de escuta para interação de reconhecimento de voz. Entretanto, se ele tocar seu dedo na tela 105 de seu dispositivo móvel e deixar seu dedo na tela 105, o módulo TATS 265 pode habilitar o mecanismo de escuta para interação de reconhecimento de voz no contexto do toque. De acordo com esse exemplo, uma ação de pressionar e reter faz a distinção para o módulo TATS 265 para aplicar o contexto da interface visual além da entrada audível. Deve ser reconhecido que outros métodos podem existir para distinguir entre aplicações de interação pretendida.

[00061] Embora a invenção tenha sido descrita com relação a várias modalidades, aqueles com conhecimentos comuns na técnica entenderão que muitas modificações podem ser feitas na mesma compreendidas no escopo das reivindicações que seguem.

Claims

REIVINDICAÇÕES

1. Método para fornecer funcionalidade de entrada para um módulo de interação de reconhecimento de voz caracterizado pelo fato de que compreende:

receber (415) uma indicação de um toque em qualquer lugar em uma interface de tela sensível ao toque de um dispositivo de computação móvel;

após receber uma indicação de um toque em qualquer lugar na interface de tela sensível ao toque, ativar (425) um mecanismo de escuta de um módulo de reconhecimento de voz; e exibir (431) realimentação visual dinâmica de um nível de som medido de uma expressão falada recebida pelo módulo de reconhecimento de voz, em que a realimentação visual exibida é feita como centrada em torno de uma área na tela sensível a toque na qual um toque é recebido.
2. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que compreende ainda gerar (420) uma confirmação em resposta ao recebimento de uma indicação de um toque em qualquer lugar na interface de tela sensível ao toque do dispositivo de computação móvel.
3. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que receber (415) uma indicação de um toque em qualquer lugar em uma interface de tela sensível a toque de um dispositivo de computação móvel inclui receber uma indicação de um toque e reter em qualquer lugar em uma interface de tela sensível a toque de um dispositivo de computação móvel.
4. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que ativar o mecanismo de escuta de um módulo de reconhecimento de voz compreende:

determinar se a interface de tela sensível a toque recebeu

Petição 870190110079, de 29/10/2019, pág. 29/36

2/3 (415) um toque; e ativar (425) o mecanismo de escuta.
5. Método, de acordo com a reivindicação 2, caracterizado pelo fato de que confirmar (420) recebimento da indicação de um toque em qualquer lugar na interface de tela sensível ao toque tem a forma de realimentação visual.
6. Método, de acordo com a reivindicação 2, caracterizado pelo fato de que confirmar (420) recebimento da indicação de um toque em qualquer lugar na interface de tela sensível a toque tem a forma de realimentação tátil.
7. Método, de acordo com a reivindicação 2, caracterizado pelo fato de que confirmar (420) recebimento da indicação de um toque em qualquer lugar na interface de tela sensível ao toque tem a forma de realimentação tátil.
8. Método, de acordo com a reivindicação 2, caracterizado pelo fato de que confirmar (420) recebimento da indicação de um toque em qualquer lugar na interface de tela sensível a toque tem a forma de uma combinação de realimentação audível, visual e/ou tátil.
9. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que o toque em qualquer lugar em uma interface de tela sensível ao toque é um toque dentro de uma contextual na interface de tela sensível ao toque do dispositivo de computação móvel compreendendo:

após receber a indicação do toque em uma área contextual na interface de tela sensível a toque:

identificar (732) os dados contextuais do toque e determinar uma identificação do toque em associação aos dados contextuais identificados;

passar (733) a identificação do toque para uma ou mais aplicações de software;

Petição 870190110079, de 29/10/2019, pág. 30/36

3/3 ativar (725) um mecanismo de escuta de um módulo de reconhecimento de fala;

receber (730) uma expressão falada;

utilizar (750) a identificação do toque em associação aos dados contextuais identificados 750, e causar uma execução de uma funcionalidade de uma ou mais aplicações de software com base nos dados contextuais identificados; e exibir (731) realimentação visual dinâmica de um nível de som medido de uma expressão falada recebida pelo módulo de reconhecimento de voz, em que a realimentação visual exibida é feita como centrada em torno de uma área na tela sensível a toque na qual um toque em uma área contextual é recebida.
10. Método, de acordo com a reivindicação 9, caracterizado pelo fato de que ainda compreende gerar (720) uma confirmação em resposta ao recebimento de uma indicação de um toque em uma área contextual na interface de tela sensível a toque do dispositivo de computação móvel.
11. Método, de acordo com a reivindicação 10, caracterizado pelo fato de que confirmar (720) o recebimento de indicação de um toque em uma área contextual na interface de tela sensível a toque pode estar na forma de realimentação audível, realimentação visual, realimentação tátil, ou qualquer combinação das três.
12. Método, de acordo com a reivindicação 9, caracterizado pelo fato de que a etapa de receber (715) uma indicação de um toque em uma área contextual em uma interface de tela sensível a toque de um dispositivo de computação móvel inclui receber uma indicação de um toque e reter em uma área contextual na interface de tela sensível a toque em uma interface de tela sensível a toque de um dispositivo de computação móvel.