BR112017021239B1 - Método, aparelho, e meio legível por computador de determinação de exceção de entrada de voz - Google Patents
Método, aparelho, e meio legível por computador de determinação de exceção de entrada de voz Download PDFInfo
- Publication number
- BR112017021239B1 BR112017021239B1 BR112017021239-0A BR112017021239A BR112017021239B1 BR 112017021239 B1 BR112017021239 B1 BR 112017021239B1 BR 112017021239 A BR112017021239 A BR 112017021239A BR 112017021239 B1 BR112017021239 B1 BR 112017021239B1
- Authority
- BR
- Brazil
- Prior art keywords
- audio
- audio signal
- collection module
- electronic device
- frequency
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 66
- 230000005236 sound signal Effects 0.000 claims abstract description 165
- 230000002159 abnormal effect Effects 0.000 claims description 25
- 238000006243 chemical reaction Methods 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 10
- 238000001514 detection method Methods 0.000 description 8
- 238000012545 processing Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 230000009286 beneficial effect Effects 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 6
- 238000004590 computer program Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 230000000903 blocking effect Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 238000005070 sampling Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 238000010295 mobile communication Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000008093 supporting effect Effects 0.000 description 2
- 239000000470 constituent Substances 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R29/00—Monitoring arrangements; Testing arrangements
- H04R29/004—Monitoring arrangements; Testing arrangements for microphones
- H04R29/005—Microphone arrays
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
- G10L25/21—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being power information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
- H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
- H04R2499/10—General applications
- H04R2499/11—Transducers incorporated or for use in hand-held devices, e.g. mobile phones, PDA's, camera's
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- General Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Telephone Function (AREA)
Abstract
método de determinação de exceção de entrada de voz, aparelho, terminal e meio computacional. a presente invenção refere-se a um método de determinação de exceção de entrada de voz, um aparelho, um terminal e um meio de armazenamento. o método é aplicado a um dispositivo eletrônico que inclui um módulo de coleta de áudio (201, 316) e inclui: determinar (102) se um valor de amplitude de um sinal de áudio coletado pelo módulo de coleta de áudio é menor do que um limiar de amplitude predeterminado e/ou se uma distribuição de energia do sinal de áudio atende a uma condição predeterminada; e se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou a distribuição de energia do sinal de áudio não atende a uma condição predeterminada, determinar (103) que a entrada de voz do dispositivo eletrônico é anormal. a solução proporcionada na presente invenção resolve um problema da técnica anterior de que não há um método eficaz para determinar a exceção de recepção de som causada quando um orifício de recepção de som do dispositivo eletrônico é bloqueado.
Description
[0001] A presente invenção refere-se ao campo de tecnologias de eletrônica e em particular, a um método de determinação de exceção de entrada de voz, um aparelho, um terminal e um meio de armazenamento.
[0002] Na medida em que as tecnologias eletrônicas se desenvolvem e o consumidor demanda aumento, cada vez mais os produtos eletrônicos surgem, tais como smartfones e computadores do tipo tablet. Os referidos dispositivos eletrônicos facilitam grandemente a vida e o trabalho do usuário. Em geral, todos os referidos dispositivos eletrônicos proporcionam uma função de coleta de áudio, para coletar um sinal de áudio.
[0003] Na técnica anterior, para se evitar que um caixa de aloja mento do telefone móvel bloqueie um sinal de áudio e que ele alcance um bom efeito de recepção de som, um orifício é em geral disposto em uma caixa de alojamento de um dispositivo eletrônico e usado as um orifício de recepção de som de um módulo de coleta de áudio e o orifício de recepção de som é conectado ao módulo de coleta de áudio. Entretanto, pelo fato do dispositivo eletrônico estar em um ambiente complexo, o orifício de recepção de som é com frequência bloqueado e a coleta de informação de som do módulo de coleta de áudio é afetada. Em alguns métodos de detecção de voz existentes, apenas se um algoritmo de um sinal de áudio coletado é normal pode ser detectado. Não há método eficaz para detectar a exceção de recepção de som causada quando o orifício de recepção de som do dispositivo eletrônico é bloqueado e o usuário não pode ser notificado da exceção de recepção de som ou nenhum remédio pode ser proporcionado para a exceção de recepção de som. Consequentemente, a experiência do usuário é afetada.
[0004] A presente invenção proporciona um método de determina ção de exceção de entrada de voz, um aparelho, um terminal e um meio de armazenamento. De acordo com o método e o aparelho proporcionado na presente invenção, um problema da técnica anterior é resolvido. O problema é: não há método efetivo para determinar a exceção de recepção de som causada quando um orifício de recepção de som de um dispositivo eletrônico é bloqueado, um usuário não pode ser notificado da exceção de recepção de som ou nenhum remédio pode ser proporcionado para a exceção de recepção de som e consequentemente, a experiência do usuário é afetada.
[0005] Um primeiro aspecto proporciona um método de determinação de exceção de entrada de voz, onde o método é aplicado a um dispositivo eletrônico que inclui um módulo de coleta de áudio e inclui: determinar se um valor de amplitude de um sinal de áudio coletado pelo módulo de coleta de áudio é menor do que um limiar de amplitude predeterminado e/ou se uma distribuição de energia do sinal de áudio atende a uma condição predeterminada; e se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou a distribuição de energia do sinal de áudio não atende a uma condição predeterminada, determinar que a entrada de voz do dispositivo eletrônico é anormal.
[0006] Quando um orifício de recepção de som é bloqueado, o módulo de coleta de áudio não pode normalmente coletar o sinal de áudio e consequentemente, não só a característica de domínio de tempo mas também a característica de domínio de frequência do sinal de áudio coletado são anormais. De acordo com a solução proporcionada na presente modalidade da presente invenção, a característica de domínio de tempo (uma amplitude de áudio) e a característica de domínio de frequência (um valor de energia de uma frequência) do sinal de áudio coletado são determinados de modo compreensivo, para determinar, de acordo com um resultado de determinação, se a entrada de voz é anormal. Ademais, por usar um método de detectar de modo compreensivo um valor de amplitude de entrada e uma frequência de entrada que são de um microfonerofone, a precisão de detecção de exceção de entrada de microfone pode ser efetivamente aprimorada.
[0007] Para alcançar um melhor efeito de suporte, quando se se gura um terminal móvel, um usuário em geral segura a parte de fundo do terminal móvel por usar um dedo. Nesse caso, o dedo bloqueia com facilidade o orifício de recepção de som e consequentemente, a transmissão da chamada ou da voz é silenciada. Portanto, para esse caso, a presente invenção de fato adicionalmente proporciona uma possível configuração. Antes de determinar se um valor de amplitude do sinal de áudio é menor do que um limiar de amplitude predeterminado e/ou se uma distribuição de energia do sinal de áudio atende a uma condição predeterminada, o método inclui:detectar se um canal de voz é estabelecido e se é detectado que o canal de voz é estabelecido, determinar se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou se a distribuição de energia do sinal de áudio atende a condição predeterminada.
[0008] Nessa possível configuração, uma amplitude e energia são determinados apenas quando é detectado que o dispositivo eletrônico estabelece o canal de voz, de modo que o problema de que a transmissão da chamada ou da voz é silenciada pode ser resolvido e pode se economizar energia.
[0009] Em outra possível configuração, o determinar se uma distri buição de energia do sinal de áudio atende a uma condição predeterminada inclui: - realizar a conversão do domínio de frequência de Fourier no sinal de áudio, para determinar um valor de energia do sinal de áudio; - calcular a soma dos valores de energia dos sinais de áudio cuja frequência é mais alta do que a predeterminada frequência e usar a soma como um valor de energia de alta frequência e calcular a soma dos valores de energia dos sinais de áudio cuja frequência é mais baixa do que a predeterminada frequência e usar a soma como um valor de energia de baixa frequência; e - determinar se uma proporção do valor de energia de alta frequência com relação ao valor de energia de baixa frequência é menor do que um predeterminado limiar e se a proporção do valor de energia de alta frequência com relação ao valor de energia de baixa frequência é menor do que um predeterminado limiar, determinar que a distribuição de energia do sinal de áudio não atenda a uma condição predeterminada.
[0010] Quando o orifício de recepção de som é bloqueado, um valor de energia de cada frequência no sinal de áudio é afetado. Portanto, nessa possível configuração, com base na característica que existe quando o orifício de recepção de som é bloqueado, a conversão do domínio de frequência de Fourier é realizada no sinal de áudio para obter o valor de energia de cada frequência, de modo que se o orifício de recepção de som do dispositivo eletrônico é bloqueado pode ser determinado mais especificamente de acordo com o valor de energia de cada frequência.
[0011] É determinado, no modo dito anteriormente, que o orifício de recepção de som do dispositivo eletrônico encontra um problema. De modo correspondente, uma solução correspondente pode ser proporcionada do modo a seguir. Após o determinar que a entrada de voz do dispositivo eletrônico é anormal, o método adicionalmente inclui: - ajustar o módulo de coleta de áudio configurado para coletar o sinal de áudio; ou - emitir informação imediata, onde a informação imediata é usada para notificar um usuário de que a entrada de voz do dispositivo eletrônico é anormal.
[0012] Em outra possível configuração, quando o dispositivo eletrô nico inclui múltiplos módulos de coleta de áudio, o ajustar o módulo de coleta de áudio configurado para coletar o sinal de áudio inclui: - determinar um primeiro módulo de coleta de áudio que está atualmente sendo usado; e - habilitar um segundo módulo de coleta de áudio nos múltiplos módulos de coleta de áudio para coletar o sinal de áudio, onde o segundo módulo de coleta de áudio é qualquer um dos múltiplos módulos de coleta de áudio exceto o primeiro módulo de coleta de áudio.
[0013] De acordo com a solução na presente modalidade da pre sente invenção, após o orifício de recepção de som encontrar o problema, a solução pode ser efetivamente proporcionada no modo dito anteriormente em tempo e outro módulo de coleta de áudio é habilitado para receber som ou notificar o usuário, de modo que o usuário pode resolver o problema o mais rápido possível.
[0014] Em outra possível configuração, o limiar de amplitude prede terminado é obtido do modo a seguir, que inclui: - obter o limiar de amplitude predeterminado de acordo com os sinais de áudio coletados em múltiplos momentos no tempo quando o orifício de recepção de som é bloqueado.
[0015] Uma implementação adicional pode ser: obter o limiar de am plitude predeterminado por coletar os sinais de áudio com diferentes ca-racterísticas de ondas de som; ou - quando o orifício de recepção de som é bloqueado em diferentes modos de bloqueio, calcular os valores de amplitude de sinais de áudio coletados pelo módulo de coleta de áudio e calcular um valor médio dos valores de amplitude obtidos dos sinais de áudio para obter o limiar de amplitude predeterminado.
[0016] Nessa possível configuração, os sinais de áudio em vários cenários são coletados e usados como uma base para calcular o limiar de amplitude predeterminado, de modo que o limiar de amplitude predeterminado pode se adaptar a diferentes cenários mais precisamente e um erro em determinar a exceção de entrada de voz do dispositivo eletrônico é reduzido.
[0017] Em outra possível configuração, o permitir um segundo mó dulo de coleta de áudio para coletar o sinal de áudio inclui: - determinar as prioridades dos múltiplos módulos de coleta de áudio dispostos no dispositivo eletrônico e selecionar um módulo de coleta de áudio a partir dos múltiplos módulos de coleta de áudio como o segundo módulo de coleta de áudio de acordo com a regra descendente de prioridade.
[0018] Nessa possível configuração, uma implementação especí fica de selecionar o segundo módulo de coleta de áudio a partir dos múltiplos módulos de coleta de áudio é proporcionada, de modo que uma específica tolerância de falha e método de evitação pode ser proporcionado após a entrada de voz do dispositivo eletrônico ser anormal e o impacto exercido quando o dispositivo não pode efetivamente coletar os dados de entrada de voz em virtude de uma exceção de entrada de microfone pode ser reduzido.
[0019] Um segundo aspecto proporciona um dispositivo eletrônico, que inclui: um módulo de coleta de áudio, configurado para coletar um sinal de áudio; uma memória, configurada para armazenar uma instrução; e um processador, configurado para: invocar a instrução armazenada na memória, de modo a determinar se um valor de amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é menor do que um limiar de amplitude predeterminado e/ou se uma distribuição de energia do sinal de áudio atende a uma condição predeterminada; e se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou a distribuição de energia do sinal de áudio não atende a uma condição predeterminada, determinar que a entrada de voz do dispositivo eletrônico é anormal.
[0020] O processador invoca a instrução armazenada na memória,de modo a implementar uma solução na configuração do método no primeiro aspecto anterior. Para uma implementação de resolução de problemas e efeitos benéficos do dispositivo eletrônico, vamos fazer referência ao primeiro aspecto anterior e possíveis implementações e efeitos benéficos do primeiro aspecto. Portanto, para a implementação do dispositivo eletrônico, vamos fazer referência à implementação do método. Partes repetidas não serão descritas.
[0021] Um terceiro aspecto proporciona um aparelho, onde o aparelho é disposto em um dispositivo eletrônico, o dispositivo eletrônico inclui pelo menos um módulo de coleta de áudio e o aparelho inclui: um módulo de comparação, configurado para determinar, por meio de comparação, se um valor de amplitude de um sinal de áudio coletado pelo módulo de coleta de áudio é menor do que um limiar de amplitude predeterminado e/ou se uma distribuição de energia do sinal de áudio atende a uma condição predeterminada; e um módulo de determinação, configurado para: se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude pre-determinado e/ou a distribuição de energia do sinal de áudio não atende a uma condição predeterminada, determinar que a entrada de voz do dispositivo eletrônico é anormal.
[0022] Com base no mesmo conceito da invenção, para um princípio de resolução de problema e efeitos benéficos do aparelho, vamos fazer referência ao primeiro aspecto anterior e possíveis implementações e trazer os efeitos benéficos do primeiro aspecto. Portanto, para a implementação do aparelho, vamos fazer referência à implementação do método. Partes repetidas não são descritas.
[0023] Um quarto aspecto proporciona um meio de armazenamento não volátil que pode ser lido por computador que armazena um ou mais programas, onde os um ou mais programas incluem uma instrução e quando a instrução é executada por um dispositivo eletrônico que inclui um módulo de coleta de áudio, o dispositivo eletrônico realiza o primeiro aspecto anterior e possíveis implementações do primeiro aspecto.
[0024] Com base no mesmo conceito da invenção, quando o programa armazenado no meio de armazenamento não volátil que pode ser lido por computador é executado pelo dispositivo eletrônico que inclui o módulo de coleta de áudio, para um princípio de resolução de problema e efeitos benéficos, vamos fazer referência ao primeiro aspecto anterior, possíveis implementações do primeiro aspecto e trazer os efeitos benéficos. Portanto, para a implementação do meio de armazenamento não volátil que pode ser lido por computador, vamos fazer referência à implementação do método. Partes repetidas não são descritas.
[0025] Um ou uma combinação de múltiplos modos possíveis nas soluções técnicas anteriores tem pelo menos os efeitos técnicos a seguir:
[0026] De acordo com o método e o aparelho proporcionado em modalidades da presente invenção, a característica de domínio de tempo e a característica de domínio de frequência do sinal de áudio coletado são determinadas de modo compreensivo, para determinar, de acordo com o resultado de determinação, se a entrada de voz é anormal. Portanto, um problema da técnica anterior é resolvido. O problema é: Não há um método eficaz para determinar a exceção de recepção de som causada quando o orifício de recepção de som do dispositivo eletrônico é bloqueado, o usuário não pode ser notificado da exceção de recepção de som ou nenhum remédio pode ser proporcionado para a exceção de recepção de som e consequentemente, a experiência do usuário é afetada.
[0027] A figura 1 é um gráfico de fluxo esquemático de um método de determinação de exceção de entrada de voz para um dispositivo eletrônico de acordo com uma modalidade da presente invenção;
[0028] A figura 2 é um diagrama estrutural esquemático de um dis positivo eletrônico de acordo com uma modalidade da presente invenção;
[0029] A figura 3 é um diagrama estrutural esquemático de um ter minal dispositivo de acordo com uma modalidade da presente invenção; e
[0030] A figura 4 é um diagrama estrutural esquemático de um apa relho de acordo com uma modalidade da presente invenção.
[0031] Para tornar os objetivos, as soluções técnicas e as vanta gens das modalidades da presente invenção mais claras, o a seguir descreve clara e completamente as soluções técnicas nas modalidades da presente invenção com referência aos desenhos em anexo nas modalidades da presente invenção. Aparentemente, as modalidades descritas são algumas, mas não todas as modalidades da presente invenção. Todas as outras modalidades obtidas por aqueles versados na técnica com base nas modalidades da presente invenção sem esforço criativo devem se inserir dentro do âmbito de proteção da presente invenção.
[0032] Em um método de detecção de voz existente, apenas se há um problema em um algoritmo de voz de um sinal de áudio coletado puder ser detectado, mas não há método apropriado para determinar a eficácia e a precisão da coleta de dados realizada por um módulo de coleta de áudio (por exemplo, a microfone). Portanto, para facilitar a coleta de sinal de áudio realizada pelo microfone, um orifício de recepção de som é proporcionado na caixa de alojamento de um dispositivo eletrônico e o orifício de recepção de som é conectado ao módulo de coleta de áudio. Pelo fato do orifício de recepção de som ser em geral disposto na caixa de alojamento do telefone móvel, o orifício de recepção de som pode ser bloqueado quando um usuário segura o dispositivo eletrônico ou há um objeto em torno do dispositivo eletrônico e consequentemente, a precisão de coleta de sinal de áudio realizada pelo módulo de coleta de áudio é afetada, por exemplo, o microfone capta um som baixo ou som nenhum. Para um problema similar, não houve uma medida melhor de aprimoramento. Portanto, a presente invenção proporciona um método de determinação de exceção de entrada de voz para um dispositivo eletrônico, para aliviar o problema dito anteriormente. O a seguir adicionalmente descreve as modalidades da presente invenção em detalhes com referência aos desenhos em anexo.
[0033] Como mostrado na figura 1, a presente modalidade da pre sente invenção proporciona um método de determinação de exceção de entrada de voz. O método é aplicado a um dispositivo eletrônico que inclui um módulo de coleta de áudio e especificamente inclui as etapas a seguir.
[0034] O método proporcionado na presente modalidade da presente invenção pode ser aplicável a todos os dispositivos eletrônicos nos quais um módulo de coleta de áudio (que pode ser um microfone em implementação específica) é disposto. O dispositivo eletrônico coleta a informação de som por usar o módulo de coleta de áudio e converte a informação de som em um sinal de áudio analógico. Um orifício de recepção de som é proporcionado na caixa de alojamento do dispositivo eletrônico e o orifício de recepção de som é conectado ao módulo de coleta de áudio. Para alcançar um melhor efeito de recepção de som, um orifício de recepção de som é em geral disposto na parte de fundo de um terminal móvel. Entretanto, para alcançar um melhor efeito de suporte, quando se segura o terminal móvel, um usuário em geral segura a parte de fundo do terminal móvel por usar um dedo. Nesse caso, o dedo bloqueia com facilidade o orifício de recepção de som e consequentemente, a transmissão da chamada ou da voz é silenciada.
[0035] Etapa 101: Determinar uma amplitude de um sinal de audio coletado pelo módulo de coleta de áudio e a distribuição de energia do sinal de áudio.
[0036] Preferivelmente, para resolver o problema de que a trans missão da chamada ou da voz seja silenciada e para economizar energia, antes é determinado se a amplitude do sinal de áudio é menor do que um limiar de amplitude predeterminado e/ou se a distribuição de energia do sinal de áudio atende a uma condição predeterminada, é detectado se um canal de voz é estabelecido. Se é detectado que o canal de voz é estabelecido, é determinado se a amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou se a distribuição de energia do sinal de áudio atende a condição predeterminada.
[0037] O valor de amplitude do sinal de áudio pode ser determinado por usar o método a seguir: Um sinal de áudio em um período unitário é amostrado para obter um valor de amostragem do sinal de áudio, um valor absoluto de uma amplitude do valor de amostragem do sinal de áudio é calculado e um valor médio de valores absolutos de amplitudes de múltiplos valores de amostragem é calculado para obter um valor médio de amplitudes de valores de amostragem de sinais de áudio. O valor médio é o valor de amplitude do sinal de áudio.
[0038] A etapa a seguir 102 e a etapa 103 descrevem, em detalhes, um método para determinar, por determinar de modo compreensivo a característica de domínio de tempo e a característica de domínio de frequência do sinal de áudio coletado, se a entrada de voz do dispositivo eletrônico for anormal.
[0039] Etapa 102: Determinar se a amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é menor do que um limiar de amplitude predeterminado e/ou se a distribuição de energia do sinal de áudio atende a uma condição predeterminada.
[0040] Primeiro, a análise de domínio de tempo é realizada no sinal de áudio coletado pelo módulo de coleta de áudio, para determinar se a amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é menor do que o limiar de amplitude predeterminado.
[0041] Se o orifício de recepção de som é bloqueado, a amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é grandemente reduzida e pode ser menor do que o limiar de amplitude predeterminado.
[0042] Preferivelmente, quando a amplitude do sinal de áudio cole tado pelo módulo de coleta de áudio é menor do que o limiar de amplitude predeterminado, é determinado se a duração na qual a amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é menor do que o limiar de amplitude predeterminado é maior do que a predeterminada duração. A predeterminada duração pode ser ajustada de modo dinâmico de acordo com a necessidade da configuração.
[0043] O limiar de amplitude predeterminado na presente modalidade da presente invenção pode ser obtido por meio de experimentação. Ou seja, o orifício de recepção de som é bloqueado, um sinal de áudio é coletado quando o orifício de recepção de som é bloqueado e uma amplitude do sinal de áudio coletado quando o orifício de recepção de som é bloqueado é o limiar de amplitude predeterminado. Opcionalmente, o sinal de áudio pode ser coletado em múltiplos momentos no tempo após o orifício de recepção de som ser bloqueado, um valor médio de amplitudes de sinais de áudio coletados nos múltiplos momentos no tempo é obtido e o valor médio obtido é usado como o limiar de amplitude predeterminado. Em uma implementação, quando o limiar de amplitude predeterminado é obtido por coletar o sinal de áudio múltiplas vezes, o limiar de amplitude predeterminado pode ser obtido por coletar sinais de áudio com diferentes características de ondas de som (por exemplo, som de um homem, uma mulher, um idoso e uma criança). Em uma implementação, o orifício de recepção de som pode ser bloqueado em diferentes modos de bloqueio (por exemplo, o orifício de recepção de som é bloqueado em diferentes ângulos de bloqueio ou por usar diferente objetos), as amplitudes de sinais de áudio coletados pelo módulo de coleta de áudio nos diferentes modos de bloqueio são obtidas em separado e um valor médio das amplitudes dos sinais de áudio obtidos é calculado para obter o limiar de amplitude predeterminado.
[0044] O módulo de coleta de áudio coleta um sinal de áudio em um chamada de voz do usuário, calcula um valor de amplitude do sinal de áudio no chamada de voz do usuário e compara o valor de amplitude do sinal de áudio no chamada de voz do usuário com o limiar de amplitude predeterminado, para determinar se o valor de amplitude do sinal de áudio no chamada de voz do usuário é menor do que o limiar de amplitude predeterminado, ou seja, para determinar se o valor de amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é menor do que o limiar de amplitude predeterminado.
[0045] Segundo, a análise do domínio de frequência é realizada no sinal de áudio coletado pelo módulo de coleta de áudio, para determinar se a distribuição de energia do sinal de áudio atende a condição predeterminada.
[0046] Um sinal de baixa frequência tem uma energia mais forte e um sinal de alta frequência tem uma energia mais fraca. Quando o orifício de recepção de som é bloqueado, o módulo de coleta de áudio pode coletar, por usar o orifício de recepção de som, a maioria dos sinais de baixa frequência por usar um espaço ou por meio de uma caixa de alojamento de ressonância, mas o módulo de coleta de áudio não pode coletar a maioria dos sinais de alta frequência por usar o orifício de recepção de som. Portanto, quando o orifício de recepção de som é bloqueado, o sinal de áudio coletado pelo módulo de coleta de áudio é principalmente o sinal de baixa frequência.
[0047] A distribuição de energia do sinal de áudio é obtida após a transformação de FFT de Fourier ser realizada no sinal de áudio coletado. É determinado se a distribuição de energia do sinal de áudio coletado atende a condição predeterminada (que é, a soma dos valores de energia dos sinais de áudio cuja frequência é mais alta do que a predeterminada frequência é calculada e usada como um valor de energia de alta frequência e a soma dos valores de energia dos sinais de áudio cuja frequência é mais baixa do que a predeterminada frequência é calculada e usada como um valor de energia de baixa frequência; é determinado se uma proporção do valor de energia de alta frequência com relação ao valor de energia de baixa frequência é menor do que um predeterminado limiar; e se a proporção do valor de energia de alta frequência com relação ao valor de energia de baixa frequência é menor do que um predeterminado limiar, a distribuição de energia do sinal de áudio não atende a uma condição predeterminada).
[0048] Etapa 103: Se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou a distribuição de energia do sinal de áudio não atende a uma condição predeterminada, determinar que um orifício de recepção de som do dispositivo eletrônico é bloqueado ou determinar que a entrada de voz do dispositivo eletrônico é anormal.
[0049] Após o orifício de recepção de som do dispositivo eletrônico ser bloqueado, um processamento pode ser realizado dos modos a seguir e especificamente inclui o conteúdo a seguir.
[0050] Em um modo de processamento, a informação imediata é emitida. A informação imediata é usada para notificar um usuário de que a entrada de voz do dispositivo eletrônico é anormal.
[0051] Em outra modo de processamento, o dispositivo eletrônico ajusta, de acordo com a quantidade de módulos de coleta de áudio dispostos no dispositivo eletrônico, o módulo de coleta de áudio configurado para coletar o sinal de áudio, inclui: quando o dispositivo eletrônico inclui pelo menos dois módulos de coleta de áudio e um primeiro módulo de coleta de áudio está atualmente sendo usado, permitir que um segundo módulo de coleta de áudio colete o sinal de áudio, onde o segundo módulo de coleta de áudio é qualquer módulo de coleta de áudio no dispositivo eletrônico diferente do primeiro módulo de coleta de áudio.
[0052] Opcionalmente, para reduzir o consumo de energia do dispositivo eletrônico, o primeiro módulo de coleta de áudio é desabilitado após o segundo módulo de coleta de áudio ser habilitado para coletar o sinal de áudio. Ademais, na presente modalidade, quando o segundo módulo de coleta de áudio é selecionado a partir de múltiplos módulos de coleta de áudio, o segundo módulo de coleta de áudio pode ser selecionado em ordem descendente de predeterminadas prioridades dos múltiplos módulos de coleta de áudio (o segundo módulo de coleta de áudio tem a mais alta prioridade nos múltiplos módulos de coleta de áudio exceto o primeiro módulo de coleta de áudio).
[0053] Por exemplo, quando o dispositivo eletrônico inclui múltiplos orifícios de recepção de som (por exemplo, o dispositivo eletrônico inclui três orifícios de recepção de som: um orifício de recepção de som a, um orifício de recepção de som b e um orifício de recepção de som c), quando o dispositivo eletrônico coleta um sinal de áudio por usar o orifício de recepção de som a e o orifício de recepção de som a é bloqueado e o dispositivo eletrônico atualmente coleta o sinal de áudio por usar um módulo de coleta de áudio que corresponde ao orifício de recepção de som a, o dispositivo eletrônico pode habilitar um módulo de coleta de áudio que corresponde ao orifício de recepção de som b ou o orifício de recepção de som c, para coletar o sinal de áudio e desabilitar o módulo de coleta de áudio que corresponde ao orifício de recepção de som a usado for coletar o sinal de áudio.
[0054] Para descrever o método na presente modalidade da presente invenção mais claramente e com mais detalhes, no exemplo a seguir, um ou mais microfones são dispostos em um telefone móvel, para descrever a implementação específica do ajustar, pelo dispositivo eletrônico de acordo com a quantidade de módulos de coleta de áudio disposto no dispositivo eletrônico, o módulo de coleta de áudio configurado para coletar o sinal de áudio.
[0055] O telefone móvel é usado como um exemplo. Um orifício de microfone é o orifício de recepção de som na presente modalidade da presente invenção e um microfone é o módulo de coleta de áudio na presente modalidade da presente invenção.
[0056] Quando é determinado em um processo de chamada do telefone móvel que um orifício de microfone usado em uma chamada em andamento é bloqueado e a duração excede três segundos, uma estrutura de microfone do telefone móvel é detectada, para determinar a quantidade de microfones incluída no telefone móvel.
[0057] Se o telefone móvel inclui apenas um microfone, o usuário é notificado, por usar um tom de alerta, texto, vibração, ou semelhante, de que o orifício de microfone é bloqueado.
[0058] Se o telefone móvel inclui pelo menos dois microfones (por exemplo, três microfones: um microfone principal, um segundo microfone e um terceiro microfone) e o microfone principal é usado na chamada em andamento, quando é detectado que o orifício de microfone principal é bloqueado, um microfone diferente do microfone principal é selecionado de acordo com a predeterminada prioridade para realizar a chamada. A prioridade pode ser determinada de acordo com a qualidade de um sinal de áudio coletado por cada microfone, por exemplo, a prioridade do microfone principal > a prioridade do segundo microfone > a prioridade do terceiro microfone. Quando o orifício de microfone principal é bloqueado, o segundo microfone com a mais alta prioridade exceto o microfone principal pode ser preferivelmente habilitado para coletar o sinal de áudio. Preferivelmente, um parâmetro de áudio é comutado para um parâmetro de áudio que se adapta ao segundo microfone.
[0059] Em uma implementação opcional, quando o telefone móvel inclui pelo menos dois microfones e é detectado que um orifício de microfone usado em uma chamada em andamento é bloqueado, o usuário é notificado, por usar um tom de alerta, texto, vibração, ou semelhante, de que o orifício de microfone é bloqueado.
[0060] De acordo com o método proporcionado na presente modalidade da presente invenção, a característica de domínio de tempo e a característica de domínio de frequência do sinal de áudio coletado são determinadas de modo compreensivo, para determinar, de acordo com um resultado de determinação, se a entrada de voz é anormal. Portanto, um problema da técnica anterior de coleta ineficiente de áudio causada quando o orifício de recepção de som do módulo de coleta de áudio é bloqueado é resolvido. Ademais, por usar um método de detectar de modo compreensivo um valor de amplitude de entrada e uma frequência de entrada que são do microfone, a precisão de detecção de exceção de entrada de microfone pode ser efetivamente aprimorada.
[0061] De acordo com o método proporcionado na presente modalidade da presente invenção, após a entrada de voz do dispositivo eletrônico ser anormal, a informação imediata é emitida, para notificar o usuário de que a entrada de voz do dispositivo eletrônico é anormal. Portanto, a exceção de entrada de voz que aparece quando o usuário usa o dispositivo é reduzida e a experiência do usuário é aprimorada.
[0062] Ademais, de acordo com o método proporcionado na presente modalidade da presente invenção, após a entrada de voz do dispositivo eletrônico ser anormal, a entrada de voz do dispositivo eletrônico é recuperada por automaticamente ajustar o módulo de coleta de áudio configurado para coletar o sinal de áudio. Por usar a referida tolerância de falha e o método de evitação, o impacto exercido quando o dispositivo não pode efetivamente coletar os dados de entrada de voz em virtude da exceção de entrada de microfone pode ser reduzido.
[0063] Como mostrado na figura 2, a presente modalidade da presente invenção proporciona um dispositivo eletrônico. O dispositivo eletrônico especificamente inclui um módulo de coleta de áudio 201, uma memória 202 e um processador 203.
[0064] O módulo de coleta de áudio 201 é configurado para coletar um sinal de áudio.
[0065] Em um ambiente de aplicação específica, o módulo de coleta de áudio pode ser de uma estrutura específica que inclui uma função de coleta de áudio, tal como um microfone.
[0066] A memória 202 é configurada para armazenar uma instrução.
[0067] O processador 203 é configurado para: invocar a instrução armazenada na memória 202, de modo a determinar se um valor de amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é menor do que um limiar de amplitude predeterminado e/ou se uma distribuição de energia do sinal de áudio atende a uma condição predeterminada; e se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou a distribuição de energia do sinal de áudio não atende a uma condição predeterminada, determinar que a entrada de voz do dispositivo eletrônico é anormal.
[0068] O processador invoca a instrução armazenada na memória,de modo a implementar as implementações da modalidade do método anterior. Portanto, para a implementação do dispositivo eletrônico, vamos fazer referência à implementação do método. Partes repetidas não são descritas.
[0069] Como mostrado na figura 3, um modo de detecção e de co leta de áudio proporcionado na presente modalidade da presente invenção pode ser aplicado a um terminal dispositivo. Nesse caso, a presente modalidade da presente invenção adicionalmente proporciona uma estrutura específica de implementação de um terminal (ou referido como um dispositivo de terminal) 300 e o terminal 300 pode incluir:um módulo de entrada/saída (que inclui um módulo de emissão de áudio 318, um módulo de entrada de áudio 316, uma tela 320 e semelhante), um interface de usuário 302, um processador 304, um transceptor (que pode ser um módulo independente no qual as funções de receber e de enviar são integradas, ou pode incluir um transmissor 306 e um receptor 308), um dispositivo de acoplamento 310, uma antena 314 e uma memória 312. Em algumas modalidades da presente invenção, os referidos componentes podem ser conectados por usar um barramento ou de outro modo. Uma conexão de barramento é usada como um exemplo na figura 3.
[0070] A antena 314 é configurada para: converter energia eletro magnética em uma linha de transmissão em uma onda eletromagnética em um espaço livre, ou converter uma onda eletromagnética em espaço livre em energia eletromagnética em uma linha de transmissão. O dispositivo de acoplamento 310 é configurado para: dividir um sinal de comunicação móvel em múltiplos sinais e alocar os sinais em múltiplos receptores 308.
[0071] O transmissor 306 é configurado para transmitir (por exemplo, modular) um sinal de comunicação móvel gerado pelo processador 304. O receptor 308 é configurado para receber (por exemplo, desmo- dular) um sinal de comunicação móvel recebido pela antena 314. O transmissor 306 e o receptor 308 pode ser visto como um modem sem fio. Durante implementação específica, pode haver um ou mais transmissores 306 ou receptores 308.
[0072] O módulo de entrada/saída é principalmente configurado para implementar uma função de interação entre o terminal 300 e um usuário/um ambiente externo e principalmente inclui o módulo de emissão de áudio 318, o módulo de entrada de áudio 316, a tela 320 e semelhante. Durante a implementação específica, o módulo de en- trada/saída pode adicionalmente incluir uma câmera, uma tela de toque, um sensor e semelhante. O módulo de entrada/saída se comunica com o processador 304 por usar a interface de usuário 302.
[0073] A memória 312 é acoplada ao processador 304 e é configurada para armazenar um ou mais programas. Os um ou mais programas incluem uma instrução. Durante a implementação específica, a memória 312 pode incluir uma memória de acesso aleatório de alta velocidade e pode também incluir uma memória não volátil, tais como um ou mais dispositivos de armazenamento em disco, um dispositivo de memória flash, ou outro dispositivo de armazenamento de estado sólido não volátil.
[0074] Na presente modalidade da presente invenção, por exemplo, um módulo de coleta de áudio é o módulo de entrada de áudio 316. O módulo de entrada de áudio 316 é configurado para coletar um sinal de áudio em um ambiente no qual um dispositivo eletrônico é atualmente localizado.
[0075] O processador 304 é principalmente configurado para: invo car a instrução armazenada na memória 312 e realizar as etapas a seguir:determinar se um valor de amplitude do sinal de áudio coletado pelo módulo de entrada de áudio 316 é menor do que um limiar de amplitude predeterminado e/ou se uma distribuição de energia do sinal de áudio atende a uma condição predeterminada; e se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou a distribuição de energia do sinal de áudio não atende a uma condição predeterminada, determinar que a entrada de voz do dispositivo eletrônico é anormal.
[0076] O processador invoca a instrução armazenada na memória, de modo a implementar as implementações da modalidade do método anterior. Portanto, para a implementação do terminal, vamos fazer referência à implementação do método. Partes repetidas não são descritas.
[0077] Como mostrado na figura 4, a presente modalidade da presente invenção proporciona um aparelho. O aparelho proporcionado na presente modalidade da presente invenção pode ser integrado em um terminal ou um dispositivo eletrônico. O terminal ou o dispositivo eletrônico inclui pelo menos um módulo de coleta de áudio. Em uma implementação, o aparelho proporcionado na presente modalidade da presente invenção pode ser uma parte constituinte do processador na figura 2 ou na figura 3. O aparelho inclui:um módulo de comparação 401, configurado para determinar, por meio de comparação, se um valor de amplitude de um sinal de áudio coletado pelo módulo de coleta de áudio é menor do que um limiar de amplitude predeterminado e/ou se uma proporção de a valor de energia de alta frequência do sinal de áudio coletado pelo módulo de coleta de áudio com relação a um valor de energia de baixa frequência do sinal de áudio é menor do que um predeterminado limiar; e um módulo de determinação 402, configurado para: se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado a proporção do valor de energia de alta frequência do sinal de áudio ao valor de energia de baixa frequência é menor do que um predeterminado limiar, determinar que a entrada de voz do dispositivo eletrônico é anormal.
[0078] O módulo de determinação 402 pode especificamente incluir: um primeiro submódulo de determinação, configurado para determinar o valor de amplitude do sinal de áudio coletado pelo módulo de coleta de áudio; e um segundo submódulo de determinação, configurado para: realizar a conversão do domínio de frequência de Fourier no sinal de áudio, para determinar o valor de energia de alta frequência e o valor de energia de baixa frequência do sinal de áudio; e calcular a soma dos valores de energia dos sinais de áudio cuja frequência é mais alta do que a predeterminada frequência e usar a soma como o valor de energia de alta frequência e calcular a soma dos valores de energia dos sinais de áudio cuja frequência é mais baixa do que a predeterminada frequência e usar a soma como o valor de energia de baixa frequência.
[0079] Opcionalmente, antes o módulo de comparação determina,por meio de comparação, se o valor de amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é menor do que o limiar de amplitude predeterminado e/ou se a proporção do valor de energia de alta frequência do sinal de áudio coletado pelo módulo de coleta de áudio com relação ao valor de energia de baixa frequência do sinal de áudio é menor do que um predeterminado limiar, o aparelho adicionalmente inclui um módulo de detecção.
[0080] O módulo de detecção é configurado para: detectar se um canal de voz é estabelecido e se é detectado que o canal de voz é estabelecido, determinar, por meio de comparação, se o valor de amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é menor do que o limiar de amplitude predeterminado e/ou se a proporção do valor de energia de alta frequência do sinal de áudio coletado pelo módulo de coleta de áudio com relação ao valor de energia de baixa frequência do sinal de áudio é menor do que um predeterminado limiar.
[0081] Opcionalmente, o aparelho adicionalmente inclui: um módulo de ajuste, configurado para ajustar o módulo de coleta de áudio configurado para coletar o sinal de áudio; e um módulo de emissão, configurado para emitir a informação imediata, onde a informação imediata é usada para notificar um usuário de que a entrada de voz do dispositivo eletrônico é anormal.
[0082] Opcionalmente, quando o terminal ou o dispositivo eletrônico inclui múltiplos módulos de coleta de áudio, o módulo de ajuste é espe-cificamente configurado para: determinar um primeiro módulo de coleta de áudio que está atualmente sendo usado e habilitar um segundo módulo de coleta de áudio nos múltiplos módulos de coleta de áudio para coletar o sinal de áudio. O segundo módulo de coleta de áudio é qualquer um dos múltiplos módulos de coleta de áudio exceto o primeiro módulo de coleta de áudio. Uma modalidade da presente invenção adicionalmente proporciona um meio de armazenamento que pode ser lido por computador. O meio de armazenamento que pode ser lido por computador armazena código de programa usado para implementar o método de determinação de exceção de entrada de voz descrito no primeiro aspecto. O código de programa inclui uma instrução de execução usada para realizar o método de determinação de exceção de entrada de voz descrito no primeiro aspecto.
[0083] Com base no mesmo conceito da invenção, para um princí pio de resolução de problema do aparelho, vamos fazer referência à implementação do método modalidade da presente invenção. Partes repetidas não são descritas.
[0084] Opcionalmente, uma modalidade da presente invenção adicionalmente proporciona um meio de armazenamento não volátil que pode ser lido por computador que armazena um ou mais programas. Os um ou mais programas incluem uma instrução e quando a instrução é executada por um dispositivo eletrônico que inclui um módulo de coleta de áudio, o dispositivo eletrônico realiza o método de determinação de exceção de entrada de voz descrito na Modalidade 1.
[0085] Com base no mesmo conceito da invenção, para um princípio de resolução de problema do meio de armazenamento não volátil que pode ser lido por computador, vamos fazer referência à implementação do método modalidade 1 da presente invenção. Partes repetidas não são descritas.
[0086] Ademais, aqueles versados na técnica podem entender que uma parte ou todos os procedimentos do método nas modalidades anteriores podem ser implementadas por um programa de computador que instrui o hardware relevante. O programa pode ser armazenado em um meio de armazenamento que pode ser lido por computador. Quando o programa roda, os procedimentos dos métodos nas modalidades são realizados. O meio de armazenamento pode incluir um disco magnético, um disco ótico, uma memória de apenas leitura (Memória de Apenas Leitura, ROM), uma memória de acesso aleatório (Memória de Acesso Aleatório, RAM), ou semelhante.
[0087] Uma ou mais soluções técnicas nas modalidades do presente pedido têm pelo menos os efeitos técnicos a seguir:
[0088] De acordo com o método e o aparelho proporcionado nas modalidades da presente invenção, a característica de domínio de tempo e a característica de domínio de frequência do sinal de áudio coletado são determinadas de modo compreensivo, para determinar, de acordo com o resultado de determinação, se a entrada de voz é anormal. Portanto, o problema da técnica anterior de coleta ineficiente de áudio causada quando o orifício de recepção de som do módulo de coleta de áudio é bloqueado é resolvido. Ademais, por usar um método de detectar de modo compreensivo um valor de amplitude de entrada e uma frequência de entrada que são de um microfone, a precisão de detecção de exceção de entrada de microfone pode ser efetivamente aprimorada.
[0089] As soluções da presente invenção proporcionam a tolerância de falha e o método de evitação realizado após a exceção de entrada de microfone ser detectada, de modo que o impacto exercido quando o dispositivo não pode efetivamente coletar os dados de entrada de voz em virtude da exceção de entrada de microfone pode ser reduzido.
[0090] Ademais, as soluções da presente invenção adicionalmente proporcionam um modo de interação com o usuário realizado após a exceção de entrada de microfone ser detectada, de modo que a exceção de entrada de voz que aparece quando o usuário usa o dispositivo é reduzida e a experiência do usuário é aprimorada.
[0091] A presente invenção é descrita com referência aos gráficos de fluxo e/ou os diagramas de bloco do método, o dispositivo (sistema) e o produto de programa de computador de acordo com as modalidades da presente invenção. Deve ser entendido que as instruções de programa de computador podem ser usadas para implementar cada processo e/ou cada bloco nos gráficos de fluxo e/ou nos diagramas de bloco e a combinação de um processo e/ou um bloco nos gráficos de fluxo e/ou nos diagramas de bloco. As referidas instruções de programa de computador podem ser proporcionadas para um computador de objetivo geral, um computador dedicado, um processador embutido, ou um processador de qualquer outro dispositivo de processamento de dados programável para gerar uma máquina, de modo que as instruções executadas por um computador ou por um processador de qualquer outro dispositivo de processamento de dados programável gera um aparelho para implementar uma função específica em um ou mais processos nos gráficos de fluxo e/ou em um ou mais blocos nos diagramas de bloco.
[0092] As referidas instruções de programa de computador podem ser armazenadas em uma memória não volátil que pode ser lida por computador que pode instruir o computador ou qualquer outro dispositivo de processamento de dados programável para funcionar em uma modo específico, de modo que as instruções armazenadas na memória que pode ser lida por computador geram um artefato que inclui um aparato de instrução. O aparato de instrução implementa uma função específica em um ou mais processos nos gráficos de fluxo e/ou em um ou mais blocos nos diagramas de bloco.
[0093] As referidas instruções de programa de computador podem ser carregadas em um computador ou outro dispositivo de processamento de dados programável, de modo que uma série de operações e etapas são realizadas no computador ou em outro dispositivo programável, para desse modo gerar um processamento implementado por computador. Portanto, as instruções executadas no computador ou em outro dispositivo programável proporciona as etapas para implementar uma função específica em um ou mais processos nos gráficos de fluxo e/ou em um ou mais blocos nos diagramas de bloco.
[0094] Obviamente, aqueles versados na técnica podem realizar várias modificações e variações na presente invenção sem se desviar do espírito e do âmbito da presente invenção. A presente invenção é pretendida de modo a cobrir todas as referidas modificações e variações desde que as mesmas se insiram dentro do âmbito de proteção definido pelas concretizações a seguir e de suas tecnologias equivalentes.
Claims (7)
1. Método de determinação de exceção de entrada de voz, o método é aplicado a um dispositivo eletrônico compreendendo um módulo de coleta de áudio (201, 316), e compreende: determinar (102) se um valor de amplitude de um sinal de áudio coletado pelo módulo de coleta de áudio é menor do que um limiar de amplitude predeterminado e se distribuição de energia do sinal de áudio atende a uma condição predeterminada; e determinar (103) que entrada de voz do dispositivo eletrônico é anormal quando o valor de amplitude do sinal de áudio for menor do que o limiar de amplitude predeterminado e a distribuição de energia do sinal de áudio não atender a uma condição predeterminada, em que após determinar que entrada de voz do dispositivo eletrônico é anormal, o método ainda compreende: ajustar o módulo de coleta de áudio (201) configurado para coletar o sinal de áudio; caracterizado pelo fato de que a determinação de se distribuição de energia do sinal de áudio atende a uma condição predefi- nida compreende: realizar conversão para o domínio de frequência ao usar transformada de Fourier no sinal de áudio, para determinar um valor de energia do sinal de áudio; calcular uma soma de valores de energia de sinais de áudio cuja frequência é mais alta do que uma predeterminada frequência e usar a soma como um valor de energia de alta frequência, e calcular uma soma de valores de energia de sinais de áudio cuja frequência é mais baixa do que a predeterminada frequência e usar a soma como um valor de energia de baixa frequência; e determinar se uma razão do valor de energia de alta frequência para o valor de energia de baixa frequência é menor do que um limiar predeterminado, e determinar que a distribuição de energia do sinal de áudio não atende à condição predeterminada quando a razão do valor de energia de alta frequência para o valor de energia de baixa frequência for menor do que o limiar predeterminado.
2. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que antes da determinação de se um valor de amplitude do sinal de áudio é menor do que um limiar de amplitude predeterminado e/ou se distribuição de energia do sinal de áudio atende a uma condição predeterminada, o método compreende: detectar se um canal de voz está estabelecido, e se o canal de voz estiver estabelecido, determinar se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou se a distribuição de energia do sinal de áudio atende à condição predeterminada.
3. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que quando o dispositivo eletrônico compreender múltiplos módulos de coleta de áudio, o ajuste do módulo de coleta de áudio configurado para coletar o sinal de áudio compreende: determinar um primeiro módulo de coleta de áudio que está atualmente sendo usado; e habilitar um segundo módulo de coleta de áudio nos múltiplos módulos de coleta de áudio para coletar o sinal de áudio, em que o segundo módulo de coleta de áudio é qualquer um dentre os múltiplos módulos de coleta de áudio exceto o primeiro módulo de coleta de áudio.
4. Dispositivo eletrônico, caracterizado pelo fato de que compreende um módulo de coleta de áudio (201, 316), uma memória (202, 312) e um processador (203, 304), em que o módulo de coleta de áudio é configurado para coletar um sinal de áudio; a memória é configurada para armazenar uma instrução; e o processador é configurado para: invocar a instrução armazenada na memória, de modo a se um valor de amplitude do sinal de áudio coletado pelo módulo de coleta de áudio é menor do que um limiar de amplitude predeterminado e se distribuição de energia do sinal de áudio atende a uma condição predeterminada; e determinar que entrada de voz do dispositivo eletrônico é anormal quando o valor de amplitude do sinal de áudio for menor do que o limiar de amplitude predeterminado e a distribuição de energia do sinal de áudio não atender a uma condição predeterminada, em que o processador determinar se a distribuição de energia do sinal de áudio atende a uma condição predefinida compreende: realizar conversão para o domínio de frequência ao usar transformada de Fourier no sinal de áudio, para determinar um valor de energia do sinal de áudio; calcular uma soma de valores de energia de sinais de áudio cuja frequência é mais alta do que uma predeterminada frequência e usar a soma como um valor de energia de alta frequência, e calcular uma soma de valores de energia de sinais de áudio cuja frequência é mais baixa do que a predeterminada frequência e usar a soma como um valor de energia de baixa frequência; e determinar se uma razão do valor de energia de alta frequência para o valor de energia de baixa frequência é menor do que um limiar predeterminado, e determinar que a distribuição de energia do sinal de áudio não atende à condição predeterminada quando a razão do valor de energia de alta frequência para o valor de energia de baixa frequência for menor do que o limiar predeterminado;em que o processador é ainda configurado para: após ser determinado que entrada de voz do dispositivo eletrônico é anormal, ajustar o módulo de coleta de áudio configurado para coletar o sinal de áudio.
5. Dispositivo eletrônico, de acordo com a reivindicação 4, caracterizado pelo fato de que o processador é ainda configurado para: detectar se um canal de voz está estabelecido, e se for determinado que o canal de voz está estabelecido, determinar se o valor de amplitude do sinal de áudio é menor do que o limiar de amplitude predeterminado e/ou se a distribuição de energia do sinal de áudio atende à condição predeterminada.
6. Dispositivo eletrônico, de acordo com a reivindicação 9, caracterizado pelo fato de que, quando o dispositivo eletrônico compreender múltiplos módulos de coleta de áudio, o processador ajustar o módulo de coleta de áudio configurado para coletar o sinal de áudio compreende: determinar um primeiro módulo de coleta de áudio que está atualmente sendo usado; e habilitar um segundo módulo de coleta de áudio nos múltiplos módulos de coleta de áudio para coletar o sinal de áudio, em que o segundo módulo de coleta de áudio é qualquer um dentre os múltiplos módulos de coleta de áudio exceto o primeiro módulo de coleta de áudio.
7. Meio legível por computador, caracterizado pelo fato de que o meio legível por computador compreende uma instrução, e quando a instrução for executada por um dispositivo eletrônico compreendendo um módulo de coleta de áudio, o dispositivo eletrônico realiza o método de determinação de exceção de entrada de voz como definido em qualquer uma das reivindicações 1 a 3.
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2016/080716 WO2017185342A1 (zh) | 2016-04-29 | 2016-04-29 | 一种语音输入异常的确定方法、装置、终端以及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
BR112017021239A2 BR112017021239A2 (pt) | 2018-06-26 |
BR112017021239B1 true BR112017021239B1 (pt) | 2023-10-03 |
Family
ID=60160515
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
BR112017021239-0A BR112017021239B1 (pt) | 2016-04-29 | 2016-04-29 | Método, aparelho, e meio legível por computador de determinação de exceção de entrada de voz |
Country Status (7)
Country | Link |
---|---|
US (1) | US10231070B2 (pt) |
EP (1) | EP3301950B1 (pt) |
CN (2) | CN107548564B (pt) |
AU (1) | AU2016402256B2 (pt) |
BR (1) | BR112017021239B1 (pt) |
CA (1) | CA2981775C (pt) |
WO (1) | WO2017185342A1 (pt) |
Families Citing this family (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CA2981775C (en) * | 2016-04-29 | 2020-08-11 | Huawei Technologies Co., Ltd. | Voice input exception determining method, apparatus, terminal, and storage medium |
GB201715824D0 (en) * | 2017-07-06 | 2017-11-15 | Cirrus Logic Int Semiconductor Ltd | Blocked Microphone Detection |
CN108958699B (zh) * | 2018-07-24 | 2021-12-07 | Oppo(重庆)智能科技有限公司 | 语音拾取方法及相关产品 |
CN108650595B (zh) * | 2018-07-24 | 2020-07-17 | Oppo(重庆)智能科技有限公司 | 堵孔处理方法、装置、电子设备及计算机可读存储介质 |
CN109089191B (zh) * | 2018-07-24 | 2021-11-02 | Oppo(重庆)智能科技有限公司 | 堵孔处理方法及相关产品 |
CN108924331A (zh) * | 2018-07-24 | 2018-11-30 | Oppo(重庆)智能科技有限公司 | 语音拾取方法及相关产品 |
CN109120779B (zh) * | 2018-07-24 | 2021-10-19 | Oppo(重庆)智能科技有限公司 | 麦克风堵塞提醒方法及相关装置 |
CN109040912B (zh) * | 2018-07-24 | 2021-05-04 | Oppo(重庆)智能科技有限公司 | 堵孔处理方法及相关产品 |
CN109151177A (zh) * | 2018-07-24 | 2019-01-04 | Oppo(重庆)智能科技有限公司 | 麦克风堵塞提醒方法及相关装置 |
CN109040937B (zh) * | 2018-07-24 | 2020-08-28 | Oppo(重庆)智能科技有限公司 | 麦克风堵塞提醒方法及相关装置 |
CN109121046B (zh) * | 2018-07-24 | 2020-09-01 | Oppo(重庆)智能科技有限公司 | 堵孔处理方法及相关产品 |
CN109121059A (zh) * | 2018-07-26 | 2019-01-01 | Oppo广东移动通信有限公司 | 扬声器堵孔检测方法及相关产品 |
CN109121060B (zh) * | 2018-07-26 | 2020-12-01 | Oppo广东移动通信有限公司 | 麦克风堵孔检测方法及相关产品 |
CN109121042B (zh) * | 2018-07-26 | 2020-12-08 | Oppo广东移动通信有限公司 | 语音数据处理方法及相关产品 |
CN109151696A (zh) * | 2018-07-26 | 2019-01-04 | Oppo广东移动通信有限公司 | 堵孔检测方法及相关产品 |
CN109104684B (zh) | 2018-07-26 | 2020-10-30 | Oppo广东移动通信有限公司 | 麦克风堵孔检测方法及相关产品 |
CN109151701A (zh) * | 2018-07-26 | 2019-01-04 | Oppo广东移动通信有限公司 | 麦克风堵孔检测方法及相关产品 |
CN109121035B (zh) * | 2018-08-30 | 2020-10-09 | 歌尔科技有限公司 | 耳机异常处理方法、耳机、系统及存储介质 |
KR102652553B1 (ko) | 2019-02-08 | 2024-03-29 | 삼성전자 주식회사 | 전자 장치 및 전자 장치의 마이크로폰 블록 검출 방법 |
CN110046305A (zh) * | 2019-04-23 | 2019-07-23 | 江西财经大学 | 一种人工智能深度学习的方法 |
CN111918196B (zh) * | 2019-05-08 | 2022-04-19 | 腾讯科技(深圳)有限公司 | 一种音频采集器录音异常的诊断方法、装置、设备及存储介质 |
CN110677780B (zh) * | 2019-09-26 | 2021-12-14 | 北京小米移动软件有限公司 | 音频输入模组的检测方法及装置、存储介质 |
CN111107296B (zh) * | 2019-11-26 | 2022-12-23 | 视联动力信息技术股份有限公司 | 音频数据采集方法、装置、电子设备及可读存储介质 |
CN111047923B (zh) * | 2019-12-30 | 2022-04-15 | 深圳创维数字技术有限公司 | 故事机的控制方法、故事播放系统及存储介质 |
CN113362850B (zh) * | 2020-03-03 | 2024-05-28 | 杭州海康威视数字技术股份有限公司 | 音频信号采集设备的检测方法、设备和存储介质 |
CN113571053B (zh) * | 2020-04-28 | 2024-07-30 | 华为技术有限公司 | 语音唤醒方法和设备 |
CN111683317B (zh) * | 2020-05-28 | 2022-04-08 | 江苏紫米电子技术有限公司 | 一种应用于耳机的提示方法、装置、终端及存储介质 |
CN111863032A (zh) * | 2020-06-12 | 2020-10-30 | 随锐科技集团股份有限公司 | 音频采集设备的优选方法及系统、计算机可读存储介质 |
CN113286244B (zh) * | 2021-05-12 | 2022-08-26 | 展讯通信(上海)有限公司 | 一种麦克风异常检测方法及装置 |
CN113543005B (zh) * | 2021-07-01 | 2022-10-04 | 猫岐智能科技(上海)有限公司 | 音频设备检测方法及系统 |
CN113746976B (zh) * | 2021-07-23 | 2023-03-28 | 荣耀终端有限公司 | 音频模块检测方法、电子设备及计算机存储介质 |
CN113611330B (zh) * | 2021-07-29 | 2024-05-03 | 杭州网易云音乐科技有限公司 | 一种音频检测方法、装置、电子设备及存储介质 |
CN114264365B (zh) * | 2021-12-14 | 2024-04-30 | 歌尔科技有限公司 | 风噪检测方法、装置、终端设备及存储介质 |
CN114302309B (zh) * | 2021-12-16 | 2024-06-25 | 合肥联宝信息技术有限公司 | 一种音频采集器的检测方法及装置 |
CN114827821B (zh) * | 2022-04-25 | 2024-06-11 | 世邦通信股份有限公司 | 拾音器拾音控制方法及系统、拾音器设备与存储介质 |
Family Cites Families (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06332492A (ja) * | 1993-05-19 | 1994-12-02 | Matsushita Electric Ind Co Ltd | 音声検出方法および検出装置 |
JP2000214052A (ja) * | 1999-01-28 | 2000-08-04 | Nichiha Corp | 異常音検出システム及び記録媒体 |
US6665411B2 (en) * | 2001-02-21 | 2003-12-16 | Digisonix Llc | DVE system with instability detection |
AU2003210624A1 (en) * | 2002-01-18 | 2003-07-30 | Polycom, Inc. | Digital linking of multiple microphone systems |
US8374362B2 (en) * | 2008-01-31 | 2013-02-12 | Qualcomm Incorporated | Signaling microphone covering to the user |
JP4572945B2 (ja) * | 2008-03-28 | 2010-11-04 | ソニー株式会社 | ヘッドフォン装置、信号処理装置、信号処理方法 |
US8379876B2 (en) | 2008-05-27 | 2013-02-19 | Fortemedia, Inc | Audio device utilizing a defect detection method on a microphone array |
US8724829B2 (en) * | 2008-10-24 | 2014-05-13 | Qualcomm Incorporated | Systems, methods, apparatus, and computer-readable media for coherence detection |
CN101419795B (zh) | 2008-12-03 | 2011-04-06 | 北京志诚卓盛科技发展有限公司 | 音频信号检测方法及装置、以及辅助口语考试系统 |
DE102009046544A1 (de) * | 2009-11-09 | 2011-05-12 | Robert Bosch Gmbh | Netzwerksystem für Audioeinrichtung, Verfahren und Computerprogramm |
CN102324229B (zh) * | 2011-09-08 | 2012-11-28 | 中国科学院自动化研究所 | 语音输入设备使用异常的检测方法及系统 |
US8942386B2 (en) * | 2011-11-30 | 2015-01-27 | Midas Technology, Inc. | Real-time quality monitoring of speech and audio signals in noisy reverberant environments for teleconferencing systems |
US9423485B2 (en) * | 2011-12-16 | 2016-08-23 | Qualcomm Incorporated | Systems and methods for predicting an expected blockage of a signal path of an ultrasound signal |
CN103578470B (zh) * | 2012-08-09 | 2019-10-18 | 科大讯飞股份有限公司 | 一种电话录音数据的处理方法及系统 |
WO2014037766A1 (en) * | 2012-09-10 | 2014-03-13 | Nokia Corporation | Detection of a microphone impairment |
CN102967026B (zh) * | 2012-12-07 | 2015-04-01 | 四川长虹电器股份有限公司 | 智能空调及其控制方法 |
CN103297909B (zh) * | 2013-04-23 | 2016-04-13 | 加一联创电子科技有限公司 | 一种耳机测试方法及装置 |
CN105359499B (zh) * | 2013-07-11 | 2019-04-30 | 哈曼国际工业有限公司 | 用于数字音频会议工作流管理的系统和方法 |
CN107086043B (zh) * | 2014-03-12 | 2020-09-08 | 华为技术有限公司 | 检测音频信号的方法和装置 |
CN103929707B (zh) * | 2014-04-08 | 2019-03-01 | 努比亚技术有限公司 | 一种检测麦克风音频通道状况的方法和移动终端 |
CN105323363B (zh) * | 2014-06-30 | 2019-07-12 | 中兴通讯股份有限公司 | 选择主麦克风的方法及装置 |
CN105338148B (zh) | 2014-07-18 | 2018-11-06 | 华为技术有限公司 | 一种根据频域能量对音频信号进行检测的方法和装置 |
CN104538041B (zh) * | 2014-12-11 | 2018-07-03 | 深圳市智美达科技有限公司 | 异常声音检测方法及系统 |
CN105517037A (zh) * | 2015-11-25 | 2016-04-20 | 努比亚技术有限公司 | 通话质量检测装置和方法 |
CA2981775C (en) * | 2016-04-29 | 2020-08-11 | Huawei Technologies Co., Ltd. | Voice input exception determining method, apparatus, terminal, and storage medium |
-
2016
- 2016-04-29 CA CA2981775A patent/CA2981775C/en active Active
- 2016-04-29 CN CN201680025187.8A patent/CN107548564B/zh active Active
- 2016-04-29 EP EP16895743.9A patent/EP3301950B1/en active Active
- 2016-04-29 US US15/574,405 patent/US10231070B2/en active Active
- 2016-04-29 WO PCT/CN2016/080716 patent/WO2017185342A1/zh active Application Filing
- 2016-04-29 AU AU2016402256A patent/AU2016402256B2/en active Active
- 2016-04-29 CN CN202110146671.9A patent/CN113038353B/zh active Active
- 2016-04-29 BR BR112017021239-0A patent/BR112017021239B1/pt active IP Right Grant
Also Published As
Publication number | Publication date |
---|---|
CA2981775A1 (en) | 2017-10-29 |
CN113038353A (zh) | 2021-06-25 |
BR112017021239A2 (pt) | 2018-06-26 |
EP3301950B1 (en) | 2020-11-04 |
WO2017185342A1 (zh) | 2017-11-02 |
AU2016402256A1 (en) | 2017-11-16 |
AU2016402256B2 (en) | 2019-04-18 |
CN107548564B (zh) | 2021-02-26 |
EP3301950A1 (en) | 2018-04-04 |
CA2981775C (en) | 2020-08-11 |
US10231070B2 (en) | 2019-03-12 |
CN107548564A (zh) | 2018-01-05 |
CN113038353B (zh) | 2022-08-09 |
EP3301950A4 (en) | 2018-08-01 |
US20180139554A1 (en) | 2018-05-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
BR112017021239B1 (pt) | Método, aparelho, e meio legível por computador de determinação de exceção de entrada de voz | |
JP7066705B2 (ja) | ヘッドフォンオフイヤー検知 | |
US9838228B2 (en) | Device for removing partial discharge noise and method of diagnosing the same | |
JP6380875B2 (ja) | 検出距離較正方法、装置、およびデバイス | |
JPWO2018146747A1 (ja) | 情報処理装置、情報処理方法及び情報処理プログラム | |
US11063629B1 (en) | Techniques for detecting wireless communications interference from a wired communications channel | |
CN118158606B (zh) | 生理信号的测量方法、耳机设备、存储介质及计算机产品 | |
JP2014081923A (ja) | 伝送周波数自動校正の伝送インタフェース装置及び方法 | |
EP3201910A1 (en) | Combined active noise cancellation and noise compensation in headphone | |
US11369316B2 (en) | Heart rate detection architecture | |
JP7129648B2 (ja) | 推定装置及び推定方法 | |
TW293224B (pt) | ||
JP5817534B2 (ja) | 信号検出器、信号検出方法及び通信端末装置 | |
CN114694676A (zh) | 语音检测方法、装置、存储介质及电子设备 | |
JP2016082432A (ja) | マイクシステム、ノイズ除去方法、およびプログラム | |
WO2017129009A1 (zh) | 一种信号检测方法及装置 | |
US20220286787A1 (en) | Microphone with flexible performance | |
CN109387829B (zh) | 距离检测装置及其距离检测方法 | |
KR20100004628A (ko) | 노이즈 소스 검출 장치 및 방법 | |
WO2022197926A1 (en) | Field check for hearing protection devices | |
CN204233152U (zh) | 小型心音诊听装置 | |
JP6282999B2 (ja) | 補聴器の指向性を試験するための装置 | |
CN115396779A (zh) | 减少扬声器振动干扰的方法、装置、终端设备及存储介质 | |
CN117255282A (zh) | 一种蓝牙音频采集方法和蓝牙耳机 | |
JP2019191172A (ja) | 人物検知方法及び人物検知装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
B06U | Preliminary requirement: requests with searches performed by other patent offices: procedure suspended [chapter 6.21 patent gazette] | ||
B350 | Update of information on the portal [chapter 15.35 patent gazette] | ||
B25A | Requested transfer of rights approved |
Owner name: HONOR DEVICE CO., LTD. (CN) |
|
B06A | Patent application procedure suspended [chapter 6.1 patent gazette] | ||
B09A | Decision: intention to grant [chapter 9.1 patent gazette] | ||
B09W | Correction of the decision to grant [chapter 9.1.4 patent gazette] |
Free format text: INCORRECOES NAS INDICACOES DOS DOCUMENTOS QUE DEVEM COMPOR A CARTA-PATENTE E TITULO. |
|
B16A | Patent or certificate of addition of invention granted [chapter 16.1 patent gazette] |
Free format text: PRAZO DE VALIDADE: 20 (VINTE) ANOS CONTADOS A PARTIR DE 29/04/2016, OBSERVADAS AS CONDICOES LEGAIS |