BR112017021239B1 - Método, aparelho, e meio legível por computador de determinação de exceção de entrada de voz - Google Patents

Método, aparelho, e meio legível por computador de determinação de exceção de entrada de voz Download PDF

Info

Publication number
BR112017021239B1
BR112017021239B1 BR112017021239-0A BR112017021239A BR112017021239B1 BR 112017021239 B1 BR112017021239 B1 BR 112017021239B1 BR 112017021239 A BR112017021239 A BR 112017021239A BR 112017021239 B1 BR112017021239 B1 BR 112017021239B1
Authority
BR
Brazil
Prior art keywords
audio
audio signal
collection module
electronic device
frequency
Prior art date
Application number
BR112017021239-0A
Other languages
English (en)
Other versions
BR112017021239A2 (pt
Inventor
Lin Yang
Zhaoyang Yin
Jingwen YANG
Original Assignee
Honor Device Co., Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honor Device Co., Ltd filed Critical Honor Device Co., Ltd
Publication of BR112017021239A2 publication Critical patent/BR112017021239A2/pt
Publication of BR112017021239B1 publication Critical patent/BR112017021239B1/pt

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00Monitoring arrangements; Testing arrangements
    • H04R29/004Monitoring arrangements; Testing arrangements for microphones
    • H04R29/005Microphone arrays
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/03Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
    • G10L25/21Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being power information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/20Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/406Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/005Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10General applications
    • H04R2499/11Transducers incorporated or for use in hand-held devices, e.g. mobile phones, PDA's, camera's
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/70Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Telephone Function (AREA)

Abstract

método de determinação de exceção de entrada de voz, aparelho, terminal e meio computacional. a presente invenção refere-se a um método de determinação de exceção de entrada de voz, um aparelho, um terminal e um meio de armazenamento. o método é aplicado a um dispositivo eletrônico que inclui um módulo de coleta de áudio (201, 316) e inclui: determinar (102) se um valor de amplitude de um sinal de áudio coletado pelo módulo de coleta de áudio é menor do que um limiar de amplitude predeterminado e/ou se uma distribuição de energia do sinal de áudio atende a uma condição predeterminada; e se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou a distribuição de energia do sinal de áudio não atende a uma condição predeterminada, determinar (103) que a entrada de voz do dispositivo eletrônico é anormal. a solução proporcionada na presente invenção resolve um problema da técnica anterior de que não há um método eficaz para determinar a exceção de recepção de som causada quando um orifício de recepção de som do dispositivo eletrônico é bloqueado.

Description

Campo Técnico
[0001] A presente invenção refere-se ao campo de tecnologias de eletrônica e em particular, a um método de determinação de exceção de entrada de voz, um aparelho, um terminal e um meio de armazenamento.
Antecedentes
[0002] Na medida em que as tecnologias eletrônicas se desenvolvem e o consumidor demanda aumento, cada vez mais os produtos eletrônicos surgem, tais como smartfones e computadores do tipo tablet. Os referidos dispositivos eletrônicos facilitam grandemente a vida e o trabalho do usuário. Em geral, todos os referidos dispositivos eletrônicos proporcionam uma função de coleta de áudio, para coletar um sinal de áudio.
[0003] Na técnica anterior, para se evitar que um caixa de aloja mento do telefone móvel bloqueie um sinal de áudio e que ele alcance um bom efeito de recepção de som, um orifício é em geral disposto em uma caixa de alojamento de um dispositivo eletrônico e usado as um orifício de recepção de som de um módulo de coleta de áudio e o orifício de recepção de som é conectado ao módulo de coleta de áudio. Entretanto, pelo fato do dispositivo eletrônico estar em um ambiente complexo, o orifício de recepção de som é com frequência bloqueado e a coleta de informação de som do módulo de coleta de áudio é afetada. Em alguns métodos de detecção de voz existentes, apenas se um algoritmo de um sinal de áudio coletado é normal pode ser detectado. Não há método eficaz para detectar a exceção de recepção de som causada quando o orifício de recepção de som do dispositivo eletrônico é bloqueado e o usuário não pode ser notificado da exceção de recepção de som ou nenhum remédio pode ser proporcionado para a exceção de recepção de som. Consequentemente, a experiência do usuário é afetada.
Sumário
[0004] A presente invenção proporciona um método de determina ção de exceção de entrada de voz, um aparelho, um terminal e um meio de armazenamento. De acordo com o método e o aparelho proporcionado na presente invenção, um problema da técnica anterior é resolvido. O problema é: não há método efetivo para determinar a exceção de recepção de som causada quando um orifício de recepção de som de um dispositivo eletrônico é bloqueado, um usuário não pode ser notificado da exceção de recepção de som ou nenhum remédio pode ser proporcionado para a exceção de recepção de som e consequentemente, a experiência do usuário é afetada.
[0005] Um primeiro aspecto proporciona um método de determinação de exceção de entrada de voz, onde o método é aplicado a um dispositivo eletrônico que inclui um módulo de coleta de áudio e inclui: determinar se um valor de amplitude de um sinal de áudio coletado pelo módulo de coleta de áudio é menor do que um limiar de amplitude predeterminado e/ou se uma distribuição de energia do sinal de áudio atende a uma condição predeterminada; e se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou a distribuição de energia do sinal de áudio não atende a uma condição predeterminada, determinar que a entrada de voz do dispositivo eletrônico é anormal.
[0006] Quando um orifício de recepção de som é bloqueado, o módulo de coleta de áudio não pode normalmente coletar o sinal de áudio e consequentemente, não só a característica de domínio de tempo mas também a característica de domínio de frequência do sinal de áudio coletado são anormais. De acordo com a solução proporcionada na presente modalidade da presente invenção, a característica de domínio de tempo (uma amplitude de áudio) e a característica de domínio de frequência (um valor de energia de uma frequência) do sinal de áudio coletado são determinados de modo compreensivo, para determinar, de acordo com um resultado de determinação, se a entrada de voz é anormal. Ademais, por usar um método de detectar de modo compreensivo um valor de amplitude de entrada e uma frequência de entrada que são de um microfonerofone, a precisão de detecção de exceção de entrada de microfone pode ser efetivamente aprimorada.
[0007] Para alcançar um melhor efeito de suporte, quando se se gura um terminal móvel, um usuário em geral segura a parte de fundo do terminal móvel por usar um dedo. Nesse caso, o dedo bloqueia com facilidade o orifício de recepção de som e consequentemente, a transmissão da chamada ou da voz é silenciada. Portanto, para esse caso, a presente invenção de fato adicionalmente proporciona uma possível configuração. Antes de determinar se um valor de amplitude do sinal de áudio é menor do que um limiar de amplitude predeterminado e/ou se uma distribuição de energia do sinal de áudio atende a uma condição predeterminada, o método inclui:detectar se um canal de voz é estabelecido e se é detectado que o canal de voz é estabelecido, determinar se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou se a distribuição de energia do sinal de áudio atende a condição predeterminada.
[0008] Nessa possível configuração, uma amplitude e energia são determinados apenas quando é detectado que o dispositivo eletrônico estabelece o canal de voz, de modo que o problema de que a transmissão da chamada ou da voz é silenciada pode ser resolvido e pode se economizar energia.
[0009] Em outra possível configuração, o determinar se uma distri buição de energia do sinal de áudio atende a uma condição predeterminada inclui: - realizar a conversão do domínio de frequência de Fourier no sinal de áudio, para determinar um valor de energia do sinal de áudio; - calcular a soma dos valores de energia dos sinais de áudio cuja frequência é mais alta do que a predeterminada frequência e usar a soma como um valor de energia de alta frequência e calcular a soma dos valores de energia dos sinais de áudio cuja frequência é mais baixa do que a predeterminada frequência e usar a soma como um valor de energia de baixa frequência; e - determinar se uma proporção do valor de energia de alta frequência com relação ao valor de energia de baixa frequência é menor do que um predeterminado limiar e se a proporção do valor de energia de alta frequência com relação ao valor de energia de baixa frequência é menor do que um predeterminado limiar, determinar que a distribuição de energia do sinal de áudio não atenda a uma condição predeterminada.
[0010] Quando o orifício de recepção de som é bloqueado, um valor de energia de cada frequência no sinal de áudio é afetado. Portanto, nessa possível configuração, com base na característica que existe quando o orifício de recepção de som é bloqueado, a conversão do domínio de frequência de Fourier é realizada no sinal de áudio para obter o valor de energia de cada frequência, de modo que se o orifício de recepção de som do dispositivo eletrônico é bloqueado pode ser determinado mais especificamente de acordo com o valor de energia de cada frequência.
[0011] É determinado, no modo dito anteriormente, que o orifício de recepção de som do dispositivo eletrônico encontra um problema. De modo correspondente, uma solução correspondente pode ser proporcionada do modo a seguir. Após o determinar que a entrada de voz do dispositivo eletrônico é anormal, o método adicionalmente inclui: - ajustar o módulo de coleta de áudio configurado para coletar o sinal de áudio; ou - emitir informação imediata, onde a informação imediata é usada para notificar um usuário de que a entrada de voz do dispositivo eletrônico é anormal.
[0012] Em outra possível configuração, quando o dispositivo eletrô nico inclui múltiplos módulos de coleta de áudio, o ajustar o módulo de coleta de áudio configurado para coletar o sinal de áudio inclui: - determinar um primeiro módulo de coleta de áudio que está atualmente sendo usado; e - habilitar um segundo módulo de coleta de áudio nos múltiplos módulos de coleta de áudio para coletar o sinal de áudio, onde o segundo módulo de coleta de áudio é qualquer um dos múltiplos módulos de coleta de áudio exceto o primeiro módulo de coleta de áudio.
[0013] De acordo com a solução na presente modalidade da pre sente invenção, após o orifício de recepção de som encontrar o problema, a solução pode ser efetivamente proporcionada no modo dito anteriormente em tempo e outro módulo de coleta de áudio é habilitado para receber som ou notificar o usuário, de modo que o usuário pode resolver o problema o mais rápido possível.
[0014] Em outra possível configuração, o limiar de amplitude prede terminado é obtido do modo a seguir, que inclui: - obter o limiar de amplitude predeterminado de acordo com os sinais de áudio coletados em múltiplos momentos no tempo quando o orifício de recepção de som é bloqueado.
[0015] Uma implementação adicional pode ser: obter o limiar de am plitude predeterminado por coletar os sinais de áudio com diferentes ca-racterísticas de ondas de som; ou - quando o orifício de recepção de som é bloqueado em diferentes modos de bloqueio, calcular os valores de amplitude de sinais de áudio coletados pelo módulo de coleta de áudio e calcular um valor médio dos valores de amplitude obtidos dos sinais de áudio para obter o limiar de amplitude predeterminado.
[0016] Nessa possível configuração, os sinais de áudio em vários cenários são coletados e usados como uma base para calcular o limiar de amplitude predeterminado, de modo que o limiar de amplitude predeterminado pode se adaptar a diferentes cenários mais precisamente e um erro em determinar a exceção de entrada de voz do dispositivo eletrônico é reduzido.
[0017] Em outra possível configuração, o permitir um segundo mó dulo de coleta de áudio para coletar o sinal de áudio inclui: - determinar as prioridades dos múltiplos módulos de coleta de áudio dispostos no dispositivo eletrônico e selecionar um módulo de coleta de áudio a partir dos múltiplos módulos de coleta de áudio como o segundo módulo de coleta de áudio de acordo com a regra descendente de prioridade.
[0018] Nessa possível configuração, uma implementação especí fica de selecionar o segundo módulo de coleta de áudio a partir dos múltiplos módulos de coleta de áudio é proporcionada, de modo que uma específica tolerância de falha e método de evitação pode ser proporcionado após a entrada de voz do dispositivo eletrônico ser anormal e o impacto exercido quando o dispositivo não pode efetivamente coletar os dados de entrada de voz em virtude de uma exceção de entrada de microfone pode ser reduzido.
[0019] Um segundo aspecto proporciona um dispositivo eletrônico, que inclui: um módulo de coleta de áudio, configurado para coletar um sinal de áudio; uma memória, configurada para armazenar uma instrução; e um processador, configurado para: invocar a instrução armazenada na memória, de modo a determinar se um valor de amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é menor do que um limiar de amplitude predeterminado e/ou se uma distribuição de energia do sinal de áudio atende a uma condição predeterminada; e se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou a distribuição de energia do sinal de áudio não atende a uma condição predeterminada, determinar que a entrada de voz do dispositivo eletrônico é anormal.
[0020] O processador invoca a instrução armazenada na memória,de modo a implementar uma solução na configuração do método no primeiro aspecto anterior. Para uma implementação de resolução de problemas e efeitos benéficos do dispositivo eletrônico, vamos fazer referência ao primeiro aspecto anterior e possíveis implementações e efeitos benéficos do primeiro aspecto. Portanto, para a implementação do dispositivo eletrônico, vamos fazer referência à implementação do método. Partes repetidas não serão descritas.
[0021] Um terceiro aspecto proporciona um aparelho, onde o aparelho é disposto em um dispositivo eletrônico, o dispositivo eletrônico inclui pelo menos um módulo de coleta de áudio e o aparelho inclui: um módulo de comparação, configurado para determinar, por meio de comparação, se um valor de amplitude de um sinal de áudio coletado pelo módulo de coleta de áudio é menor do que um limiar de amplitude predeterminado e/ou se uma distribuição de energia do sinal de áudio atende a uma condição predeterminada; e um módulo de determinação, configurado para: se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude pre-determinado e/ou a distribuição de energia do sinal de áudio não atende a uma condição predeterminada, determinar que a entrada de voz do dispositivo eletrônico é anormal.
[0022] Com base no mesmo conceito da invenção, para um princípio de resolução de problema e efeitos benéficos do aparelho, vamos fazer referência ao primeiro aspecto anterior e possíveis implementações e trazer os efeitos benéficos do primeiro aspecto. Portanto, para a implementação do aparelho, vamos fazer referência à implementação do método. Partes repetidas não são descritas.
[0023] Um quarto aspecto proporciona um meio de armazenamento não volátil que pode ser lido por computador que armazena um ou mais programas, onde os um ou mais programas incluem uma instrução e quando a instrução é executada por um dispositivo eletrônico que inclui um módulo de coleta de áudio, o dispositivo eletrônico realiza o primeiro aspecto anterior e possíveis implementações do primeiro aspecto.
[0024] Com base no mesmo conceito da invenção, quando o programa armazenado no meio de armazenamento não volátil que pode ser lido por computador é executado pelo dispositivo eletrônico que inclui o módulo de coleta de áudio, para um princípio de resolução de problema e efeitos benéficos, vamos fazer referência ao primeiro aspecto anterior, possíveis implementações do primeiro aspecto e trazer os efeitos benéficos. Portanto, para a implementação do meio de armazenamento não volátil que pode ser lido por computador, vamos fazer referência à implementação do método. Partes repetidas não são descritas.
[0025] Um ou uma combinação de múltiplos modos possíveis nas soluções técnicas anteriores tem pelo menos os efeitos técnicos a seguir:
[0026] De acordo com o método e o aparelho proporcionado em modalidades da presente invenção, a característica de domínio de tempo e a característica de domínio de frequência do sinal de áudio coletado são determinadas de modo compreensivo, para determinar, de acordo com o resultado de determinação, se a entrada de voz é anormal. Portanto, um problema da técnica anterior é resolvido. O problema é: Não há um método eficaz para determinar a exceção de recepção de som causada quando o orifício de recepção de som do dispositivo eletrônico é bloqueado, o usuário não pode ser notificado da exceção de recepção de som ou nenhum remédio pode ser proporcionado para a exceção de recepção de som e consequentemente, a experiência do usuário é afetada.
Breve Descrição dos Desenhos
[0027] A figura 1 é um gráfico de fluxo esquemático de um método de determinação de exceção de entrada de voz para um dispositivo eletrônico de acordo com uma modalidade da presente invenção;
[0028] A figura 2 é um diagrama estrutural esquemático de um dis positivo eletrônico de acordo com uma modalidade da presente invenção;
[0029] A figura 3 é um diagrama estrutural esquemático de um ter minal dispositivo de acordo com uma modalidade da presente invenção; e
[0030] A figura 4 é um diagrama estrutural esquemático de um apa relho de acordo com uma modalidade da presente invenção.
Descrição das Modalidades
[0031] Para tornar os objetivos, as soluções técnicas e as vanta gens das modalidades da presente invenção mais claras, o a seguir descreve clara e completamente as soluções técnicas nas modalidades da presente invenção com referência aos desenhos em anexo nas modalidades da presente invenção. Aparentemente, as modalidades descritas são algumas, mas não todas as modalidades da presente invenção. Todas as outras modalidades obtidas por aqueles versados na técnica com base nas modalidades da presente invenção sem esforço criativo devem se inserir dentro do âmbito de proteção da presente invenção.
[0032] Em um método de detecção de voz existente, apenas se há um problema em um algoritmo de voz de um sinal de áudio coletado puder ser detectado, mas não há método apropriado para determinar a eficácia e a precisão da coleta de dados realizada por um módulo de coleta de áudio (por exemplo, a microfone). Portanto, para facilitar a coleta de sinal de áudio realizada pelo microfone, um orifício de recepção de som é proporcionado na caixa de alojamento de um dispositivo eletrônico e o orifício de recepção de som é conectado ao módulo de coleta de áudio. Pelo fato do orifício de recepção de som ser em geral disposto na caixa de alojamento do telefone móvel, o orifício de recepção de som pode ser bloqueado quando um usuário segura o dispositivo eletrônico ou há um objeto em torno do dispositivo eletrônico e consequentemente, a precisão de coleta de sinal de áudio realizada pelo módulo de coleta de áudio é afetada, por exemplo, o microfone capta um som baixo ou som nenhum. Para um problema similar, não houve uma medida melhor de aprimoramento. Portanto, a presente invenção proporciona um método de determinação de exceção de entrada de voz para um dispositivo eletrônico, para aliviar o problema dito anteriormente. O a seguir adicionalmente descreve as modalidades da presente invenção em detalhes com referência aos desenhos em anexo.
Modalidade 1
[0033] Como mostrado na figura 1, a presente modalidade da pre sente invenção proporciona um método de determinação de exceção de entrada de voz. O método é aplicado a um dispositivo eletrônico que inclui um módulo de coleta de áudio e especificamente inclui as etapas a seguir.
[0034] O método proporcionado na presente modalidade da presente invenção pode ser aplicável a todos os dispositivos eletrônicos nos quais um módulo de coleta de áudio (que pode ser um microfone em implementação específica) é disposto. O dispositivo eletrônico coleta a informação de som por usar o módulo de coleta de áudio e converte a informação de som em um sinal de áudio analógico. Um orifício de recepção de som é proporcionado na caixa de alojamento do dispositivo eletrônico e o orifício de recepção de som é conectado ao módulo de coleta de áudio. Para alcançar um melhor efeito de recepção de som, um orifício de recepção de som é em geral disposto na parte de fundo de um terminal móvel. Entretanto, para alcançar um melhor efeito de suporte, quando se segura o terminal móvel, um usuário em geral segura a parte de fundo do terminal móvel por usar um dedo. Nesse caso, o dedo bloqueia com facilidade o orifício de recepção de som e consequentemente, a transmissão da chamada ou da voz é silenciada.
[0035] Etapa 101: Determinar uma amplitude de um sinal de audio coletado pelo módulo de coleta de áudio e a distribuição de energia do sinal de áudio.
[0036] Preferivelmente, para resolver o problema de que a trans missão da chamada ou da voz seja silenciada e para economizar energia, antes é determinado se a amplitude do sinal de áudio é menor do que um limiar de amplitude predeterminado e/ou se a distribuição de energia do sinal de áudio atende a uma condição predeterminada, é detectado se um canal de voz é estabelecido. Se é detectado que o canal de voz é estabelecido, é determinado se a amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou se a distribuição de energia do sinal de áudio atende a condição predeterminada.
[0037] O valor de amplitude do sinal de áudio pode ser determinado por usar o método a seguir: Um sinal de áudio em um período unitário é amostrado para obter um valor de amostragem do sinal de áudio, um valor absoluto de uma amplitude do valor de amostragem do sinal de áudio é calculado e um valor médio de valores absolutos de amplitudes de múltiplos valores de amostragem é calculado para obter um valor médio de amplitudes de valores de amostragem de sinais de áudio. O valor médio é o valor de amplitude do sinal de áudio.
[0038] A etapa a seguir 102 e a etapa 103 descrevem, em detalhes, um método para determinar, por determinar de modo compreensivo a característica de domínio de tempo e a característica de domínio de frequência do sinal de áudio coletado, se a entrada de voz do dispositivo eletrônico for anormal.
[0039] Etapa 102: Determinar se a amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é menor do que um limiar de amplitude predeterminado e/ou se a distribuição de energia do sinal de áudio atende a uma condição predeterminada.
[0040] Primeiro, a análise de domínio de tempo é realizada no sinal de áudio coletado pelo módulo de coleta de áudio, para determinar se a amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é menor do que o limiar de amplitude predeterminado.
[0041] Se o orifício de recepção de som é bloqueado, a amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é grandemente reduzida e pode ser menor do que o limiar de amplitude predeterminado.
[0042] Preferivelmente, quando a amplitude do sinal de áudio cole tado pelo módulo de coleta de áudio é menor do que o limiar de amplitude predeterminado, é determinado se a duração na qual a amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é menor do que o limiar de amplitude predeterminado é maior do que a predeterminada duração. A predeterminada duração pode ser ajustada de modo dinâmico de acordo com a necessidade da configuração.
[0043] O limiar de amplitude predeterminado na presente modalidade da presente invenção pode ser obtido por meio de experimentação. Ou seja, o orifício de recepção de som é bloqueado, um sinal de áudio é coletado quando o orifício de recepção de som é bloqueado e uma amplitude do sinal de áudio coletado quando o orifício de recepção de som é bloqueado é o limiar de amplitude predeterminado. Opcionalmente, o sinal de áudio pode ser coletado em múltiplos momentos no tempo após o orifício de recepção de som ser bloqueado, um valor médio de amplitudes de sinais de áudio coletados nos múltiplos momentos no tempo é obtido e o valor médio obtido é usado como o limiar de amplitude predeterminado. Em uma implementação, quando o limiar de amplitude predeterminado é obtido por coletar o sinal de áudio múltiplas vezes, o limiar de amplitude predeterminado pode ser obtido por coletar sinais de áudio com diferentes características de ondas de som (por exemplo, som de um homem, uma mulher, um idoso e uma criança). Em uma implementação, o orifício de recepção de som pode ser bloqueado em diferentes modos de bloqueio (por exemplo, o orifício de recepção de som é bloqueado em diferentes ângulos de bloqueio ou por usar diferente objetos), as amplitudes de sinais de áudio coletados pelo módulo de coleta de áudio nos diferentes modos de bloqueio são obtidas em separado e um valor médio das amplitudes dos sinais de áudio obtidos é calculado para obter o limiar de amplitude predeterminado.
[0044] O módulo de coleta de áudio coleta um sinal de áudio em um chamada de voz do usuário, calcula um valor de amplitude do sinal de áudio no chamada de voz do usuário e compara o valor de amplitude do sinal de áudio no chamada de voz do usuário com o limiar de amplitude predeterminado, para determinar se o valor de amplitude do sinal de áudio no chamada de voz do usuário é menor do que o limiar de amplitude predeterminado, ou seja, para determinar se o valor de amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é menor do que o limiar de amplitude predeterminado.
[0045] Segundo, a análise do domínio de frequência é realizada no sinal de áudio coletado pelo módulo de coleta de áudio, para determinar se a distribuição de energia do sinal de áudio atende a condição predeterminada.
[0046] Um sinal de baixa frequência tem uma energia mais forte e um sinal de alta frequência tem uma energia mais fraca. Quando o orifício de recepção de som é bloqueado, o módulo de coleta de áudio pode coletar, por usar o orifício de recepção de som, a maioria dos sinais de baixa frequência por usar um espaço ou por meio de uma caixa de alojamento de ressonância, mas o módulo de coleta de áudio não pode coletar a maioria dos sinais de alta frequência por usar o orifício de recepção de som. Portanto, quando o orifício de recepção de som é bloqueado, o sinal de áudio coletado pelo módulo de coleta de áudio é principalmente o sinal de baixa frequência.
[0047] A distribuição de energia do sinal de áudio é obtida após a transformação de FFT de Fourier ser realizada no sinal de áudio coletado. É determinado se a distribuição de energia do sinal de áudio coletado atende a condição predeterminada (que é, a soma dos valores de energia dos sinais de áudio cuja frequência é mais alta do que a predeterminada frequência é calculada e usada como um valor de energia de alta frequência e a soma dos valores de energia dos sinais de áudio cuja frequência é mais baixa do que a predeterminada frequência é calculada e usada como um valor de energia de baixa frequência; é determinado se uma proporção do valor de energia de alta frequência com relação ao valor de energia de baixa frequência é menor do que um predeterminado limiar; e se a proporção do valor de energia de alta frequência com relação ao valor de energia de baixa frequência é menor do que um predeterminado limiar, a distribuição de energia do sinal de áudio não atende a uma condição predeterminada).
[0048] Etapa 103: Se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou a distribuição de energia do sinal de áudio não atende a uma condição predeterminada, determinar que um orifício de recepção de som do dispositivo eletrônico é bloqueado ou determinar que a entrada de voz do dispositivo eletrônico é anormal.
[0049] Após o orifício de recepção de som do dispositivo eletrônico ser bloqueado, um processamento pode ser realizado dos modos a seguir e especificamente inclui o conteúdo a seguir.
[0050] Em um modo de processamento, a informação imediata é emitida. A informação imediata é usada para notificar um usuário de que a entrada de voz do dispositivo eletrônico é anormal.
[0051] Em outra modo de processamento, o dispositivo eletrônico ajusta, de acordo com a quantidade de módulos de coleta de áudio dispostos no dispositivo eletrônico, o módulo de coleta de áudio configurado para coletar o sinal de áudio, inclui: quando o dispositivo eletrônico inclui pelo menos dois módulos de coleta de áudio e um primeiro módulo de coleta de áudio está atualmente sendo usado, permitir que um segundo módulo de coleta de áudio colete o sinal de áudio, onde o segundo módulo de coleta de áudio é qualquer módulo de coleta de áudio no dispositivo eletrônico diferente do primeiro módulo de coleta de áudio.
[0052] Opcionalmente, para reduzir o consumo de energia do dispositivo eletrônico, o primeiro módulo de coleta de áudio é desabilitado após o segundo módulo de coleta de áudio ser habilitado para coletar o sinal de áudio. Ademais, na presente modalidade, quando o segundo módulo de coleta de áudio é selecionado a partir de múltiplos módulos de coleta de áudio, o segundo módulo de coleta de áudio pode ser selecionado em ordem descendente de predeterminadas prioridades dos múltiplos módulos de coleta de áudio (o segundo módulo de coleta de áudio tem a mais alta prioridade nos múltiplos módulos de coleta de áudio exceto o primeiro módulo de coleta de áudio).
[0053] Por exemplo, quando o dispositivo eletrônico inclui múltiplos orifícios de recepção de som (por exemplo, o dispositivo eletrônico inclui três orifícios de recepção de som: um orifício de recepção de som a, um orifício de recepção de som b e um orifício de recepção de som c), quando o dispositivo eletrônico coleta um sinal de áudio por usar o orifício de recepção de som a e o orifício de recepção de som a é bloqueado e o dispositivo eletrônico atualmente coleta o sinal de áudio por usar um módulo de coleta de áudio que corresponde ao orifício de recepção de som a, o dispositivo eletrônico pode habilitar um módulo de coleta de áudio que corresponde ao orifício de recepção de som b ou o orifício de recepção de som c, para coletar o sinal de áudio e desabilitar o módulo de coleta de áudio que corresponde ao orifício de recepção de som a usado for coletar o sinal de áudio.
[0054] Para descrever o método na presente modalidade da presente invenção mais claramente e com mais detalhes, no exemplo a seguir, um ou mais microfones são dispostos em um telefone móvel, para descrever a implementação específica do ajustar, pelo dispositivo eletrônico de acordo com a quantidade de módulos de coleta de áudio disposto no dispositivo eletrônico, o módulo de coleta de áudio configurado para coletar o sinal de áudio.
[0055] O telefone móvel é usado como um exemplo. Um orifício de microfone é o orifício de recepção de som na presente modalidade da presente invenção e um microfone é o módulo de coleta de áudio na presente modalidade da presente invenção.
[0056] Quando é determinado em um processo de chamada do telefone móvel que um orifício de microfone usado em uma chamada em andamento é bloqueado e a duração excede três segundos, uma estrutura de microfone do telefone móvel é detectada, para determinar a quantidade de microfones incluída no telefone móvel.
[0057] Se o telefone móvel inclui apenas um microfone, o usuário é notificado, por usar um tom de alerta, texto, vibração, ou semelhante, de que o orifício de microfone é bloqueado.
[0058] Se o telefone móvel inclui pelo menos dois microfones (por exemplo, três microfones: um microfone principal, um segundo microfone e um terceiro microfone) e o microfone principal é usado na chamada em andamento, quando é detectado que o orifício de microfone principal é bloqueado, um microfone diferente do microfone principal é selecionado de acordo com a predeterminada prioridade para realizar a chamada. A prioridade pode ser determinada de acordo com a qualidade de um sinal de áudio coletado por cada microfone, por exemplo, a prioridade do microfone principal > a prioridade do segundo microfone > a prioridade do terceiro microfone. Quando o orifício de microfone principal é bloqueado, o segundo microfone com a mais alta prioridade exceto o microfone principal pode ser preferivelmente habilitado para coletar o sinal de áudio. Preferivelmente, um parâmetro de áudio é comutado para um parâmetro de áudio que se adapta ao segundo microfone.
[0059] Em uma implementação opcional, quando o telefone móvel inclui pelo menos dois microfones e é detectado que um orifício de microfone usado em uma chamada em andamento é bloqueado, o usuário é notificado, por usar um tom de alerta, texto, vibração, ou semelhante, de que o orifício de microfone é bloqueado.
[0060] De acordo com o método proporcionado na presente modalidade da presente invenção, a característica de domínio de tempo e a característica de domínio de frequência do sinal de áudio coletado são determinadas de modo compreensivo, para determinar, de acordo com um resultado de determinação, se a entrada de voz é anormal. Portanto, um problema da técnica anterior de coleta ineficiente de áudio causada quando o orifício de recepção de som do módulo de coleta de áudio é bloqueado é resolvido. Ademais, por usar um método de detectar de modo compreensivo um valor de amplitude de entrada e uma frequência de entrada que são do microfone, a precisão de detecção de exceção de entrada de microfone pode ser efetivamente aprimorada.
[0061] De acordo com o método proporcionado na presente modalidade da presente invenção, após a entrada de voz do dispositivo eletrônico ser anormal, a informação imediata é emitida, para notificar o usuário de que a entrada de voz do dispositivo eletrônico é anormal. Portanto, a exceção de entrada de voz que aparece quando o usuário usa o dispositivo é reduzida e a experiência do usuário é aprimorada.
[0062] Ademais, de acordo com o método proporcionado na presente modalidade da presente invenção, após a entrada de voz do dispositivo eletrônico ser anormal, a entrada de voz do dispositivo eletrônico é recuperada por automaticamente ajustar o módulo de coleta de áudio configurado para coletar o sinal de áudio. Por usar a referida tolerância de falha e o método de evitação, o impacto exercido quando o dispositivo não pode efetivamente coletar os dados de entrada de voz em virtude da exceção de entrada de microfone pode ser reduzido.
Modalidade 2
[0063] Como mostrado na figura 2, a presente modalidade da presente invenção proporciona um dispositivo eletrônico. O dispositivo eletrônico especificamente inclui um módulo de coleta de áudio 201, uma memória 202 e um processador 203.
[0064] O módulo de coleta de áudio 201 é configurado para coletar um sinal de áudio.
[0065] Em um ambiente de aplicação específica, o módulo de coleta de áudio pode ser de uma estrutura específica que inclui uma função de coleta de áudio, tal como um microfone.
[0066] A memória 202 é configurada para armazenar uma instrução.
[0067] O processador 203 é configurado para: invocar a instrução armazenada na memória 202, de modo a determinar se um valor de amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é menor do que um limiar de amplitude predeterminado e/ou se uma distribuição de energia do sinal de áudio atende a uma condição predeterminada; e se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou a distribuição de energia do sinal de áudio não atende a uma condição predeterminada, determinar que a entrada de voz do dispositivo eletrônico é anormal.
[0068] O processador invoca a instrução armazenada na memória,de modo a implementar as implementações da modalidade do método anterior. Portanto, para a implementação do dispositivo eletrônico, vamos fazer referência à implementação do método. Partes repetidas não são descritas.
Modalidade 3
[0069] Como mostrado na figura 3, um modo de detecção e de co leta de áudio proporcionado na presente modalidade da presente invenção pode ser aplicado a um terminal dispositivo. Nesse caso, a presente modalidade da presente invenção adicionalmente proporciona uma estrutura específica de implementação de um terminal (ou referido como um dispositivo de terminal) 300 e o terminal 300 pode incluir:um módulo de entrada/saída (que inclui um módulo de emissão de áudio 318, um módulo de entrada de áudio 316, uma tela 320 e semelhante), um interface de usuário 302, um processador 304, um transceptor (que pode ser um módulo independente no qual as funções de receber e de enviar são integradas, ou pode incluir um transmissor 306 e um receptor 308), um dispositivo de acoplamento 310, uma antena 314 e uma memória 312. Em algumas modalidades da presente invenção, os referidos componentes podem ser conectados por usar um barramento ou de outro modo. Uma conexão de barramento é usada como um exemplo na figura 3.
[0070] A antena 314 é configurada para: converter energia eletro magnética em uma linha de transmissão em uma onda eletromagnética em um espaço livre, ou converter uma onda eletromagnética em espaço livre em energia eletromagnética em uma linha de transmissão. O dispositivo de acoplamento 310 é configurado para: dividir um sinal de comunicação móvel em múltiplos sinais e alocar os sinais em múltiplos receptores 308.
[0071] O transmissor 306 é configurado para transmitir (por exemplo, modular) um sinal de comunicação móvel gerado pelo processador 304. O receptor 308 é configurado para receber (por exemplo, desmo- dular) um sinal de comunicação móvel recebido pela antena 314. O transmissor 306 e o receptor 308 pode ser visto como um modem sem fio. Durante implementação específica, pode haver um ou mais transmissores 306 ou receptores 308.
[0072] O módulo de entrada/saída é principalmente configurado para implementar uma função de interação entre o terminal 300 e um usuário/um ambiente externo e principalmente inclui o módulo de emissão de áudio 318, o módulo de entrada de áudio 316, a tela 320 e semelhante. Durante a implementação específica, o módulo de en- trada/saída pode adicionalmente incluir uma câmera, uma tela de toque, um sensor e semelhante. O módulo de entrada/saída se comunica com o processador 304 por usar a interface de usuário 302.
[0073] A memória 312 é acoplada ao processador 304 e é configurada para armazenar um ou mais programas. Os um ou mais programas incluem uma instrução. Durante a implementação específica, a memória 312 pode incluir uma memória de acesso aleatório de alta velocidade e pode também incluir uma memória não volátil, tais como um ou mais dispositivos de armazenamento em disco, um dispositivo de memória flash, ou outro dispositivo de armazenamento de estado sólido não volátil.
[0074] Na presente modalidade da presente invenção, por exemplo, um módulo de coleta de áudio é o módulo de entrada de áudio 316. O módulo de entrada de áudio 316 é configurado para coletar um sinal de áudio em um ambiente no qual um dispositivo eletrônico é atualmente localizado.
[0075] O processador 304 é principalmente configurado para: invo car a instrução armazenada na memória 312 e realizar as etapas a seguir:determinar se um valor de amplitude do sinal de áudio coletado pelo módulo de entrada de áudio 316 é menor do que um limiar de amplitude predeterminado e/ou se uma distribuição de energia do sinal de áudio atende a uma condição predeterminada; e se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou a distribuição de energia do sinal de áudio não atende a uma condição predeterminada, determinar que a entrada de voz do dispositivo eletrônico é anormal.
[0076] O processador invoca a instrução armazenada na memória, de modo a implementar as implementações da modalidade do método anterior. Portanto, para a implementação do terminal, vamos fazer referência à implementação do método. Partes repetidas não são descritas.
Modalidade 4
[0077] Como mostrado na figura 4, a presente modalidade da presente invenção proporciona um aparelho. O aparelho proporcionado na presente modalidade da presente invenção pode ser integrado em um terminal ou um dispositivo eletrônico. O terminal ou o dispositivo eletrônico inclui pelo menos um módulo de coleta de áudio. Em uma implementação, o aparelho proporcionado na presente modalidade da presente invenção pode ser uma parte constituinte do processador na figura 2 ou na figura 3. O aparelho inclui:um módulo de comparação 401, configurado para determinar, por meio de comparação, se um valor de amplitude de um sinal de áudio coletado pelo módulo de coleta de áudio é menor do que um limiar de amplitude predeterminado e/ou se uma proporção de a valor de energia de alta frequência do sinal de áudio coletado pelo módulo de coleta de áudio com relação a um valor de energia de baixa frequência do sinal de áudio é menor do que um predeterminado limiar; e um módulo de determinação 402, configurado para: se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado a proporção do valor de energia de alta frequência do sinal de áudio ao valor de energia de baixa frequência é menor do que um predeterminado limiar, determinar que a entrada de voz do dispositivo eletrônico é anormal.
[0078] O módulo de determinação 402 pode especificamente incluir: um primeiro submódulo de determinação, configurado para determinar o valor de amplitude do sinal de áudio coletado pelo módulo de coleta de áudio; e um segundo submódulo de determinação, configurado para: realizar a conversão do domínio de frequência de Fourier no sinal de áudio, para determinar o valor de energia de alta frequência e o valor de energia de baixa frequência do sinal de áudio; e calcular a soma dos valores de energia dos sinais de áudio cuja frequência é mais alta do que a predeterminada frequência e usar a soma como o valor de energia de alta frequência e calcular a soma dos valores de energia dos sinais de áudio cuja frequência é mais baixa do que a predeterminada frequência e usar a soma como o valor de energia de baixa frequência.
[0079] Opcionalmente, antes o módulo de comparação determina,por meio de comparação, se o valor de amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é menor do que o limiar de amplitude predeterminado e/ou se a proporção do valor de energia de alta frequência do sinal de áudio coletado pelo módulo de coleta de áudio com relação ao valor de energia de baixa frequência do sinal de áudio é menor do que um predeterminado limiar, o aparelho adicionalmente inclui um módulo de detecção.
[0080] O módulo de detecção é configurado para: detectar se um canal de voz é estabelecido e se é detectado que o canal de voz é estabelecido, determinar, por meio de comparação, se o valor de amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é menor do que o limiar de amplitude predeterminado e/ou se a proporção do valor de energia de alta frequência do sinal de áudio coletado pelo módulo de coleta de áudio com relação ao valor de energia de baixa frequência do sinal de áudio é menor do que um predeterminado limiar.
[0081] Opcionalmente, o aparelho adicionalmente inclui: um módulo de ajuste, configurado para ajustar o módulo de coleta de áudio configurado para coletar o sinal de áudio; e um módulo de emissão, configurado para emitir a informação imediata, onde a informação imediata é usada para notificar um usuário de que a entrada de voz do dispositivo eletrônico é anormal.
[0082] Opcionalmente, quando o terminal ou o dispositivo eletrônico inclui múltiplos módulos de coleta de áudio, o módulo de ajuste é espe-cificamente configurado para: determinar um primeiro módulo de coleta de áudio que está atualmente sendo usado e habilitar um segundo módulo de coleta de áudio nos múltiplos módulos de coleta de áudio para coletar o sinal de áudio. O segundo módulo de coleta de áudio é qualquer um dos múltiplos módulos de coleta de áudio exceto o primeiro módulo de coleta de áudio. Uma modalidade da presente invenção adicionalmente proporciona um meio de armazenamento que pode ser lido por computador. O meio de armazenamento que pode ser lido por computador armazena código de programa usado para implementar o método de determinação de exceção de entrada de voz descrito no primeiro aspecto. O código de programa inclui uma instrução de execução usada para realizar o método de determinação de exceção de entrada de voz descrito no primeiro aspecto.
[0083] Com base no mesmo conceito da invenção, para um princí pio de resolução de problema do aparelho, vamos fazer referência à implementação do método modalidade da presente invenção. Partes repetidas não são descritas.
[0084] Opcionalmente, uma modalidade da presente invenção adicionalmente proporciona um meio de armazenamento não volátil que pode ser lido por computador que armazena um ou mais programas. Os um ou mais programas incluem uma instrução e quando a instrução é executada por um dispositivo eletrônico que inclui um módulo de coleta de áudio, o dispositivo eletrônico realiza o método de determinação de exceção de entrada de voz descrito na Modalidade 1.
[0085] Com base no mesmo conceito da invenção, para um princípio de resolução de problema do meio de armazenamento não volátil que pode ser lido por computador, vamos fazer referência à implementação do método modalidade 1 da presente invenção. Partes repetidas não são descritas.
[0086] Ademais, aqueles versados na técnica podem entender que uma parte ou todos os procedimentos do método nas modalidades anteriores podem ser implementadas por um programa de computador que instrui o hardware relevante. O programa pode ser armazenado em um meio de armazenamento que pode ser lido por computador. Quando o programa roda, os procedimentos dos métodos nas modalidades são realizados. O meio de armazenamento pode incluir um disco magnético, um disco ótico, uma memória de apenas leitura (Memória de Apenas Leitura, ROM), uma memória de acesso aleatório (Memória de Acesso Aleatório, RAM), ou semelhante.
[0087] Uma ou mais soluções técnicas nas modalidades do presente pedido têm pelo menos os efeitos técnicos a seguir:
[0088] De acordo com o método e o aparelho proporcionado nas modalidades da presente invenção, a característica de domínio de tempo e a característica de domínio de frequência do sinal de áudio coletado são determinadas de modo compreensivo, para determinar, de acordo com o resultado de determinação, se a entrada de voz é anormal. Portanto, o problema da técnica anterior de coleta ineficiente de áudio causada quando o orifício de recepção de som do módulo de coleta de áudio é bloqueado é resolvido. Ademais, por usar um método de detectar de modo compreensivo um valor de amplitude de entrada e uma frequência de entrada que são de um microfone, a precisão de detecção de exceção de entrada de microfone pode ser efetivamente aprimorada.
[0089] As soluções da presente invenção proporcionam a tolerância de falha e o método de evitação realizado após a exceção de entrada de microfone ser detectada, de modo que o impacto exercido quando o dispositivo não pode efetivamente coletar os dados de entrada de voz em virtude da exceção de entrada de microfone pode ser reduzido.
[0090] Ademais, as soluções da presente invenção adicionalmente proporcionam um modo de interação com o usuário realizado após a exceção de entrada de microfone ser detectada, de modo que a exceção de entrada de voz que aparece quando o usuário usa o dispositivo é reduzida e a experiência do usuário é aprimorada.
[0091] A presente invenção é descrita com referência aos gráficos de fluxo e/ou os diagramas de bloco do método, o dispositivo (sistema) e o produto de programa de computador de acordo com as modalidades da presente invenção. Deve ser entendido que as instruções de programa de computador podem ser usadas para implementar cada processo e/ou cada bloco nos gráficos de fluxo e/ou nos diagramas de bloco e a combinação de um processo e/ou um bloco nos gráficos de fluxo e/ou nos diagramas de bloco. As referidas instruções de programa de computador podem ser proporcionadas para um computador de objetivo geral, um computador dedicado, um processador embutido, ou um processador de qualquer outro dispositivo de processamento de dados programável para gerar uma máquina, de modo que as instruções executadas por um computador ou por um processador de qualquer outro dispositivo de processamento de dados programável gera um aparelho para implementar uma função específica em um ou mais processos nos gráficos de fluxo e/ou em um ou mais blocos nos diagramas de bloco.
[0092] As referidas instruções de programa de computador podem ser armazenadas em uma memória não volátil que pode ser lida por computador que pode instruir o computador ou qualquer outro dispositivo de processamento de dados programável para funcionar em uma modo específico, de modo que as instruções armazenadas na memória que pode ser lida por computador geram um artefato que inclui um aparato de instrução. O aparato de instrução implementa uma função específica em um ou mais processos nos gráficos de fluxo e/ou em um ou mais blocos nos diagramas de bloco.
[0093] As referidas instruções de programa de computador podem ser carregadas em um computador ou outro dispositivo de processamento de dados programável, de modo que uma série de operações e etapas são realizadas no computador ou em outro dispositivo programável, para desse modo gerar um processamento implementado por computador. Portanto, as instruções executadas no computador ou em outro dispositivo programável proporciona as etapas para implementar uma função específica em um ou mais processos nos gráficos de fluxo e/ou em um ou mais blocos nos diagramas de bloco.
[0094] Obviamente, aqueles versados na técnica podem realizar várias modificações e variações na presente invenção sem se desviar do espírito e do âmbito da presente invenção. A presente invenção é pretendida de modo a cobrir todas as referidas modificações e variações desde que as mesmas se insiram dentro do âmbito de proteção definido pelas concretizações a seguir e de suas tecnologias equivalentes.

Claims (7)

1. Método de determinação de exceção de entrada de voz, o método é aplicado a um dispositivo eletrônico compreendendo um módulo de coleta de áudio (201, 316), e compreende: determinar (102) se um valor de amplitude de um sinal de áudio coletado pelo módulo de coleta de áudio é menor do que um limiar de amplitude predeterminado e se distribuição de energia do sinal de áudio atende a uma condição predeterminada; e determinar (103) que entrada de voz do dispositivo eletrônico é anormal quando o valor de amplitude do sinal de áudio for menor do que o limiar de amplitude predeterminado e a distribuição de energia do sinal de áudio não atender a uma condição predeterminada, em que após determinar que entrada de voz do dispositivo eletrônico é anormal, o método ainda compreende: ajustar o módulo de coleta de áudio (201) configurado para coletar o sinal de áudio; caracterizado pelo fato de que a determinação de se distribuição de energia do sinal de áudio atende a uma condição predefi- nida compreende: realizar conversão para o domínio de frequência ao usar transformada de Fourier no sinal de áudio, para determinar um valor de energia do sinal de áudio; calcular uma soma de valores de energia de sinais de áudio cuja frequência é mais alta do que uma predeterminada frequência e usar a soma como um valor de energia de alta frequência, e calcular uma soma de valores de energia de sinais de áudio cuja frequência é mais baixa do que a predeterminada frequência e usar a soma como um valor de energia de baixa frequência; e determinar se uma razão do valor de energia de alta frequência para o valor de energia de baixa frequência é menor do que um limiar predeterminado, e determinar que a distribuição de energia do sinal de áudio não atende à condição predeterminada quando a razão do valor de energia de alta frequência para o valor de energia de baixa frequência for menor do que o limiar predeterminado.
2. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que antes da determinação de se um valor de amplitude do sinal de áudio é menor do que um limiar de amplitude predeterminado e/ou se distribuição de energia do sinal de áudio atende a uma condição predeterminada, o método compreende: detectar se um canal de voz está estabelecido, e se o canal de voz estiver estabelecido, determinar se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou se a distribuição de energia do sinal de áudio atende à condição predeterminada.
3. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que quando o dispositivo eletrônico compreender múltiplos módulos de coleta de áudio, o ajuste do módulo de coleta de áudio configurado para coletar o sinal de áudio compreende: determinar um primeiro módulo de coleta de áudio que está atualmente sendo usado; e habilitar um segundo módulo de coleta de áudio nos múltiplos módulos de coleta de áudio para coletar o sinal de áudio, em que o segundo módulo de coleta de áudio é qualquer um dentre os múltiplos módulos de coleta de áudio exceto o primeiro módulo de coleta de áudio.
4. Dispositivo eletrônico, caracterizado pelo fato de que compreende um módulo de coleta de áudio (201, 316), uma memória (202, 312) e um processador (203, 304), em que o módulo de coleta de áudio é configurado para coletar um sinal de áudio; a memória é configurada para armazenar uma instrução; e o processador é configurado para: invocar a instrução armazenada na memória, de modo a se um valor de amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é menor do que um limiar de amplitude predeterminado e se distribuição de energia do sinal de áudio atende a uma condição predeterminada; e determinar que entrada de voz do dispositivo eletrônico é anormal quando o valor de amplitude do sinal de áudio for menor do que o limiar de amplitude predeterminado e a distribuição de energia do sinal de áudio não atender a uma condição predeterminada, em que o processador determinar se a distribuição de energia do sinal de áudio atende a uma condição predefinida compreende: realizar conversão para o domínio de frequência ao usar transformada de Fourier no sinal de áudio, para determinar um valor de energia do sinal de áudio; calcular uma soma de valores de energia de sinais de áudio cuja frequência é mais alta do que uma predeterminada frequência e usar a soma como um valor de energia de alta frequência, e calcular uma soma de valores de energia de sinais de áudio cuja frequência é mais baixa do que a predeterminada frequência e usar a soma como um valor de energia de baixa frequência; e determinar se uma razão do valor de energia de alta frequência para o valor de energia de baixa frequência é menor do que um limiar predeterminado, e determinar que a distribuição de energia do sinal de áudio não atende à condição predeterminada quando a razão do valor de energia de alta frequência para o valor de energia de baixa frequência for menor do que o limiar predeterminado;em que o processador é ainda configurado para: após ser determinado que entrada de voz do dispositivo eletrônico é anormal, ajustar o módulo de coleta de áudio configurado para coletar o sinal de áudio.
5. Dispositivo eletrônico, de acordo com a reivindicação 4, caracterizado pelo fato de que o processador é ainda configurado para: detectar se um canal de voz está estabelecido, e se for determinado que o canal de voz está estabelecido, determinar se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou se a distribuição de energia do sinal de áudio atende à condição predeterminada.
6. Dispositivo eletrônico, de acordo com a reivindicação 9, caracterizado pelo fato de que, quando o dispositivo eletrônico compreender múltiplos módulos de coleta de áudio, o processador ajustar o módulo de coleta de áudio configurado para coletar o sinal de áudio compreende: determinar um primeiro módulo de coleta de áudio que está atualmente sendo usado; e habilitar um segundo módulo de coleta de áudio nos múltiplos módulos de coleta de áudio para coletar o sinal de áudio, em que o segundo módulo de coleta de áudio é qualquer um dentre os múltiplos módulos de coleta de áudio exceto o primeiro módulo de coleta de áudio.
7. Meio legível por computador, caracterizado pelo fato de que o meio legível por computador compreende uma instrução, e quando a instrução for executada por um dispositivo eletrônico compreendendo um módulo de coleta de áudio, o dispositivo eletrônico realiza o método de determinação de exceção de entrada de voz como definido em qualquer uma das reivindicações 1 a 3.
BR112017021239-0A 2016-04-29 2016-04-29 Método, aparelho, e meio legível por computador de determinação de exceção de entrada de voz BR112017021239B1 (pt)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2016/080716 WO2017185342A1 (zh) 2016-04-29 2016-04-29 一种语音输入异常的确定方法、装置、终端以及存储介质

Publications (2)

Publication Number Publication Date
BR112017021239A2 BR112017021239A2 (pt) 2018-06-26
BR112017021239B1 true BR112017021239B1 (pt) 2023-10-03

Family

ID=60160515

Family Applications (1)

Application Number Title Priority Date Filing Date
BR112017021239-0A BR112017021239B1 (pt) 2016-04-29 2016-04-29 Método, aparelho, e meio legível por computador de determinação de exceção de entrada de voz

Country Status (7)

Country Link
US (1) US10231070B2 (pt)
EP (1) EP3301950B1 (pt)
CN (2) CN107548564B (pt)
AU (1) AU2016402256B2 (pt)
BR (1) BR112017021239B1 (pt)
CA (1) CA2981775C (pt)
WO (1) WO2017185342A1 (pt)

Families Citing this family (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2981775C (en) * 2016-04-29 2020-08-11 Huawei Technologies Co., Ltd. Voice input exception determining method, apparatus, terminal, and storage medium
GB201715824D0 (en) * 2017-07-06 2017-11-15 Cirrus Logic Int Semiconductor Ltd Blocked Microphone Detection
CN108958699B (zh) * 2018-07-24 2021-12-07 Oppo(重庆)智能科技有限公司 语音拾取方法及相关产品
CN108650595B (zh) * 2018-07-24 2020-07-17 Oppo(重庆)智能科技有限公司 堵孔处理方法、装置、电子设备及计算机可读存储介质
CN109089191B (zh) * 2018-07-24 2021-11-02 Oppo(重庆)智能科技有限公司 堵孔处理方法及相关产品
CN108924331A (zh) * 2018-07-24 2018-11-30 Oppo(重庆)智能科技有限公司 语音拾取方法及相关产品
CN109120779B (zh) * 2018-07-24 2021-10-19 Oppo(重庆)智能科技有限公司 麦克风堵塞提醒方法及相关装置
CN109040912B (zh) * 2018-07-24 2021-05-04 Oppo(重庆)智能科技有限公司 堵孔处理方法及相关产品
CN109151177A (zh) * 2018-07-24 2019-01-04 Oppo(重庆)智能科技有限公司 麦克风堵塞提醒方法及相关装置
CN109040937B (zh) * 2018-07-24 2020-08-28 Oppo(重庆)智能科技有限公司 麦克风堵塞提醒方法及相关装置
CN109121046B (zh) * 2018-07-24 2020-09-01 Oppo(重庆)智能科技有限公司 堵孔处理方法及相关产品
CN109121059A (zh) * 2018-07-26 2019-01-01 Oppo广东移动通信有限公司 扬声器堵孔检测方法及相关产品
CN109121060B (zh) * 2018-07-26 2020-12-01 Oppo广东移动通信有限公司 麦克风堵孔检测方法及相关产品
CN109121042B (zh) * 2018-07-26 2020-12-08 Oppo广东移动通信有限公司 语音数据处理方法及相关产品
CN109151696A (zh) * 2018-07-26 2019-01-04 Oppo广东移动通信有限公司 堵孔检测方法及相关产品
CN109104684B (zh) 2018-07-26 2020-10-30 Oppo广东移动通信有限公司 麦克风堵孔检测方法及相关产品
CN109151701A (zh) * 2018-07-26 2019-01-04 Oppo广东移动通信有限公司 麦克风堵孔检测方法及相关产品
CN109121035B (zh) * 2018-08-30 2020-10-09 歌尔科技有限公司 耳机异常处理方法、耳机、系统及存储介质
KR102652553B1 (ko) 2019-02-08 2024-03-29 삼성전자 주식회사 전자 장치 및 전자 장치의 마이크로폰 블록 검출 방법
CN110046305A (zh) * 2019-04-23 2019-07-23 江西财经大学 一种人工智能深度学习的方法
CN111918196B (zh) * 2019-05-08 2022-04-19 腾讯科技(深圳)有限公司 一种音频采集器录音异常的诊断方法、装置、设备及存储介质
CN110677780B (zh) * 2019-09-26 2021-12-14 北京小米移动软件有限公司 音频输入模组的检测方法及装置、存储介质
CN111107296B (zh) * 2019-11-26 2022-12-23 视联动力信息技术股份有限公司 音频数据采集方法、装置、电子设备及可读存储介质
CN111047923B (zh) * 2019-12-30 2022-04-15 深圳创维数字技术有限公司 故事机的控制方法、故事播放系统及存储介质
CN113362850B (zh) * 2020-03-03 2024-05-28 杭州海康威视数字技术股份有限公司 音频信号采集设备的检测方法、设备和存储介质
CN113571053B (zh) * 2020-04-28 2024-07-30 华为技术有限公司 语音唤醒方法和设备
CN111683317B (zh) * 2020-05-28 2022-04-08 江苏紫米电子技术有限公司 一种应用于耳机的提示方法、装置、终端及存储介质
CN111863032A (zh) * 2020-06-12 2020-10-30 随锐科技集团股份有限公司 音频采集设备的优选方法及系统、计算机可读存储介质
CN113286244B (zh) * 2021-05-12 2022-08-26 展讯通信(上海)有限公司 一种麦克风异常检测方法及装置
CN113543005B (zh) * 2021-07-01 2022-10-04 猫岐智能科技(上海)有限公司 音频设备检测方法及系统
CN113746976B (zh) * 2021-07-23 2023-03-28 荣耀终端有限公司 音频模块检测方法、电子设备及计算机存储介质
CN113611330B (zh) * 2021-07-29 2024-05-03 杭州网易云音乐科技有限公司 一种音频检测方法、装置、电子设备及存储介质
CN114264365B (zh) * 2021-12-14 2024-04-30 歌尔科技有限公司 风噪检测方法、装置、终端设备及存储介质
CN114302309B (zh) * 2021-12-16 2024-06-25 合肥联宝信息技术有限公司 一种音频采集器的检测方法及装置
CN114827821B (zh) * 2022-04-25 2024-06-11 世邦通信股份有限公司 拾音器拾音控制方法及系统、拾音器设备与存储介质

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06332492A (ja) * 1993-05-19 1994-12-02 Matsushita Electric Ind Co Ltd 音声検出方法および検出装置
JP2000214052A (ja) * 1999-01-28 2000-08-04 Nichiha Corp 異常音検出システム及び記録媒体
US6665411B2 (en) * 2001-02-21 2003-12-16 Digisonix Llc DVE system with instability detection
AU2003210624A1 (en) * 2002-01-18 2003-07-30 Polycom, Inc. Digital linking of multiple microphone systems
US8374362B2 (en) * 2008-01-31 2013-02-12 Qualcomm Incorporated Signaling microphone covering to the user
JP4572945B2 (ja) * 2008-03-28 2010-11-04 ソニー株式会社 ヘッドフォン装置、信号処理装置、信号処理方法
US8379876B2 (en) 2008-05-27 2013-02-19 Fortemedia, Inc Audio device utilizing a defect detection method on a microphone array
US8724829B2 (en) * 2008-10-24 2014-05-13 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for coherence detection
CN101419795B (zh) 2008-12-03 2011-04-06 北京志诚卓盛科技发展有限公司 音频信号检测方法及装置、以及辅助口语考试系统
DE102009046544A1 (de) * 2009-11-09 2011-05-12 Robert Bosch Gmbh Netzwerksystem für Audioeinrichtung, Verfahren und Computerprogramm
CN102324229B (zh) * 2011-09-08 2012-11-28 中国科学院自动化研究所 语音输入设备使用异常的检测方法及系统
US8942386B2 (en) * 2011-11-30 2015-01-27 Midas Technology, Inc. Real-time quality monitoring of speech and audio signals in noisy reverberant environments for teleconferencing systems
US9423485B2 (en) * 2011-12-16 2016-08-23 Qualcomm Incorporated Systems and methods for predicting an expected blockage of a signal path of an ultrasound signal
CN103578470B (zh) * 2012-08-09 2019-10-18 科大讯飞股份有限公司 一种电话录音数据的处理方法及系统
WO2014037766A1 (en) * 2012-09-10 2014-03-13 Nokia Corporation Detection of a microphone impairment
CN102967026B (zh) * 2012-12-07 2015-04-01 四川长虹电器股份有限公司 智能空调及其控制方法
CN103297909B (zh) * 2013-04-23 2016-04-13 加一联创电子科技有限公司 一种耳机测试方法及装置
CN105359499B (zh) * 2013-07-11 2019-04-30 哈曼国际工业有限公司 用于数字音频会议工作流管理的系统和方法
CN107086043B (zh) * 2014-03-12 2020-09-08 华为技术有限公司 检测音频信号的方法和装置
CN103929707B (zh) * 2014-04-08 2019-03-01 努比亚技术有限公司 一种检测麦克风音频通道状况的方法和移动终端
CN105323363B (zh) * 2014-06-30 2019-07-12 中兴通讯股份有限公司 选择主麦克风的方法及装置
CN105338148B (zh) 2014-07-18 2018-11-06 华为技术有限公司 一种根据频域能量对音频信号进行检测的方法和装置
CN104538041B (zh) * 2014-12-11 2018-07-03 深圳市智美达科技有限公司 异常声音检测方法及系统
CN105517037A (zh) * 2015-11-25 2016-04-20 努比亚技术有限公司 通话质量检测装置和方法
CA2981775C (en) * 2016-04-29 2020-08-11 Huawei Technologies Co., Ltd. Voice input exception determining method, apparatus, terminal, and storage medium

Also Published As

Publication number Publication date
CA2981775A1 (en) 2017-10-29
CN113038353A (zh) 2021-06-25
BR112017021239A2 (pt) 2018-06-26
EP3301950B1 (en) 2020-11-04
WO2017185342A1 (zh) 2017-11-02
AU2016402256A1 (en) 2017-11-16
AU2016402256B2 (en) 2019-04-18
CN107548564B (zh) 2021-02-26
EP3301950A1 (en) 2018-04-04
CA2981775C (en) 2020-08-11
US10231070B2 (en) 2019-03-12
CN107548564A (zh) 2018-01-05
CN113038353B (zh) 2022-08-09
EP3301950A4 (en) 2018-08-01
US20180139554A1 (en) 2018-05-17

Similar Documents

Publication Publication Date Title
BR112017021239B1 (pt) Método, aparelho, e meio legível por computador de determinação de exceção de entrada de voz
JP7066705B2 (ja) ヘッドフォンオフイヤー検知
US9838228B2 (en) Device for removing partial discharge noise and method of diagnosing the same
JP6380875B2 (ja) 検出距離較正方法、装置、およびデバイス
JPWO2018146747A1 (ja) 情報処理装置、情報処理方法及び情報処理プログラム
US11063629B1 (en) Techniques for detecting wireless communications interference from a wired communications channel
CN118158606B (zh) 生理信号的测量方法、耳机设备、存储介质及计算机产品
JP2014081923A (ja) 伝送周波数自動校正の伝送インタフェース装置及び方法
EP3201910A1 (en) Combined active noise cancellation and noise compensation in headphone
US11369316B2 (en) Heart rate detection architecture
JP7129648B2 (ja) 推定装置及び推定方法
TW293224B (pt)
JP5817534B2 (ja) 信号検出器、信号検出方法及び通信端末装置
CN114694676A (zh) 语音检测方法、装置、存储介质及电子设备
JP2016082432A (ja) マイクシステム、ノイズ除去方法、およびプログラム
WO2017129009A1 (zh) 一种信号检测方法及装置
US20220286787A1 (en) Microphone with flexible performance
CN109387829B (zh) 距离检测装置及其距离检测方法
KR20100004628A (ko) 노이즈 소스 검출 장치 및 방법
WO2022197926A1 (en) Field check for hearing protection devices
CN204233152U (zh) 小型心音诊听装置
JP6282999B2 (ja) 補聴器の指向性を試験するための装置
CN115396779A (zh) 减少扬声器振动干扰的方法、装置、终端设备及存储介质
CN117255282A (zh) 一种蓝牙音频采集方法和蓝牙耳机
JP2019191172A (ja) 人物検知方法及び人物検知装置

Legal Events

Date Code Title Description
B06U Preliminary requirement: requests with searches performed by other patent offices: procedure suspended [chapter 6.21 patent gazette]
B350 Update of information on the portal [chapter 15.35 patent gazette]
B25A Requested transfer of rights approved

Owner name: HONOR DEVICE CO., LTD. (CN)

B06A Patent application procedure suspended [chapter 6.1 patent gazette]
B09A Decision: intention to grant [chapter 9.1 patent gazette]
B09W Correction of the decision to grant [chapter 9.1.4 patent gazette]

Free format text: INCORRECOES NAS INDICACOES DOS DOCUMENTOS QUE DEVEM COMPOR A CARTA-PATENTE E TITULO.

B16A Patent or certificate of addition of invention granted [chapter 16.1 patent gazette]

Free format text: PRAZO DE VALIDADE: 20 (VINTE) ANOS CONTADOS A PARTIR DE 29/04/2016, OBSERVADAS AS CONDICOES LEGAIS