BR112015026501B1 - Aparelho e método de processamento de som - Google Patents

Aparelho e método de processamento de som Download PDF

Info

Publication number
BR112015026501B1
BR112015026501B1 BR112015026501-4A BR112015026501A BR112015026501B1 BR 112015026501 B1 BR112015026501 B1 BR 112015026501B1 BR 112015026501 A BR112015026501 A BR 112015026501A BR 112015026501 B1 BR112015026501 B1 BR 112015026501B1
Authority
BR
Brazil
Prior art keywords
sound
speakers
output
gain
gains
Prior art date
Application number
BR112015026501-4A
Other languages
English (en)
Other versions
BR112015026501A2 (pt
Inventor
Yuki Yamamoto
Toru Chinen
Runyu Shi
Mitsuyuki Hatanaka
Original Assignee
Sony Corporation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corporation filed Critical Sony Corporation
Publication of BR112015026501A2 publication Critical patent/BR112015026501A2/pt
Publication of BR112015026501B1 publication Critical patent/BR112015026501B1/pt

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S5/00Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation 
    • H04S5/005Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation  of the pseudo five- or more-channel type, e.g. virtual surround
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03GCONTROL OF AMPLIFICATION
    • H03G3/00Gain control in amplifiers or frequency changers
    • H03G3/20Automatic control
    • H03G3/30Automatic control in amplifiers having semiconductor devices
    • H03G3/3005Automatic control in amplifiers having semiconductor devices in amplifiers suitable for low-frequencies, e.g. audio amplifiers
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03GCONTROL OF AMPLIFICATION
    • H03G5/00Tone control or bandwidth control in amplifiers
    • H03G5/02Manually-operated control
    • H03G5/025Equalizers; Volume or gain control in limited frequency bands
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S1/00Two-channel systems
    • H04S1/002Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/11Positioning of individual sound objects, e.g. moving airplane, within a sound field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/13Aspects of volume control, not necessarily automatic, in stereophonic sound systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2420/00Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/01Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Stereophonic System (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

aparelho e sistema de processamento de som esta tecnologia refere-se a um dispositivo de processamento de áudio e a um sistema de processamento de áudio que tornam possível fazer a localização de som mais estável. um alto-falante virtual é considerado para ser posicionado ao longo do lado inferior de um quadrilátero sobre uma superfície esférica, os vértices do cito quadrilátero sendo as localizações de quatro alto-falantes que rodeiam uma localização de som alvo. vbap tridimensional usando o alto-falante virtual e os alto-falantes superior esquerdo e superior direito, é usado para computar os ganhos de alto-falantes superior esquerdo e superior direito e o ganho de alto-falante virtual necessário para posicionar o som na localização de som alvo vbap bidimensional usando os alto-falantes esquerdo inferior e direito inferior é usado para computar os ganhos de alto-falante esquerdo inferior e direito inferior necessários para posicionar o som no alto-falante virtual, e citados ganhos são multiplicados pelo ganho de alto-falante virtual anteriormente mencionado, para obter os ganhos de alto-falante esquerdo inferior e direito inferior necessários para posicionar som na localização de som alvo. esta tecnologia pode ser aplicada a um dispositivo de processamento de áudio.

Description

CAMPO TÉCNICO
[001] A presente tecnologia se refere a aparelhos de processamentode som e sistemas de processamento de som e, mais particularmente, a um aparelho de processamento de som e um sistema de processamento de som para habilitar a localização mais estável de uma imagem sonora.
TÉCNICA FUNDAMENTAL
[002] Como uma técnica para controlar a localização de umaimagem sonora usando caixas de som, tem sido conhecida a VBAP (Distribuição Sonora de Amplitude de Vetor Base) (ver Documento de Não Patente 1, por exemplo).
[003] Pela VBAP, uma posição de localização alvo de uma imagemsonora é expressa por uma soma linear de vetores estendendo-se na direção de dois ou três alto-falantes localizados em torno da posição de localização. Os coeficientes pelos quais os respectivos vetores são multiplicados na soma linear, são usados como os ganhos dos sons a serem emitidos dos respectivos alto-falantes, e o ajuste do ganho é executado de modo que uma imagem sonora é fixada na posição alvo.
LISTA DE CITAÇÃO DOCUMENTO NÃO-PATENTÁRIO
[004] Documento de Não Patente 1: Ville Puliquei, "Virtual SoundSource Positioning Using Vector Base Amplitude Panning", Journal of AES, vol. 45, no. 6, pp. 456-466, 1977.
SUMÁRIO DA INVENÇÃO PROBLEMAS A SEREM RESOLVIDOS PELA INVENÇÃO
[005] Pela técnica acima descrita, entretanto, uma imagem sonorapode ser fixada em uma posição alvo, porém a localização da imagem sonora pode se tornar instável, dependendo da posição de localização da imagem sonora.
[006] Pela técnica VBAP tridimensional para executar VBAPusando três alto-falantes, há casos em que somente dois alto-falantes dentre os três alto-falantes emitem som, e o alto-falante restante é controlado, para não emitir som dependendo da posição de localização alvo de uma imagem sonora.
[007] Em tal caso, quando o usuário se move enquanto ouve o som,a imagem sonora pode se mover em uma direção diferente da direção do movimento, e o usuário pode sentir que a localização da imagem sonora está instável. Se a localização da imagem sonora se torna instável, a faixa do ponto certo como uma posição de audição ótima torna-se mais estreita.
[008] A presente tecnologia tem sido desenvolvida à vista daquelascircunstâncias e destina-se a habilitar a localização mais estável de uma imagem sonora.
SOLUÇÕES PARA OS PROBLEMAS
[009] Um aparelho de processamento de som de acordo com umaspecto da presente tecnologia inclui: quatro ou mais unidades de emissão de som; uma unidade de cálculo de ganho que determina ganhos de saída de sons a serem emitidos a partir das quatro ou mais unidades de emissão de som localizadas próximo a uma posição de localização de imagem sonora, como uma posição alvo, calculando ganhos de sons a serem emitidos a partir das unidades de emissão de som, com base em uma relação de posição entre as unidades de emissão de som, com relação a cada uma das combinações diferentes, dentre combinações de duas ou três das quatro ou mais unidades de emissão de som, os ganhos de saída devendo ser utilizados para fixar uma imagem sonora na posição de localização de imagem sonora; e uma unidade de ajuste de ganho que executa ajuste de ganho sobre sons a serem emitidos a partir das unidades de emissão de som, com base nos ganhos de saída.
[0010] Pelo menos quatro dos ganhos de saída apresentam, cada um, um valor diferente de 0.
[0011] A unidade de cálculo de ganho pode incluir: uma primeira unidade de cálculo de ganho que calcula ganhos de saída de uma unidade de emissão de som virtual e duas das unidades de emissão de som, com base em uma relação de posição dentre a unidade de emissão de som virtual, as duas das unidades de emissão de som e a posição de localização de imagem sonora; uma segunda unidade de cálculo de ganho que calcula ganhos de outras duas das unidades de emissão de som além das duas unidades de emissão de som, com base em uma relação de posição entre as outras duas das unidades de emissão de som e a unidade de emissão de som virtual, os ganhos das outras duas das unidades de emissão de som devendo ser usados para fixar uma imagem sonora em uma posição da unidade de emissão de som virtual; e uma unidade de cálculo que calcula ganhos de saída dentre as outras duas das unidades de emissão de som, com base nos ganhos das outras duas unidades de emissão de som e o ganho de saída da unidade de emissão de som virtual.
[0012] A unidade de cálculo pode calcular os ganhos de saída das outras duas dentre as unidades de emissão de som, multiplicando os ganhos das outras duas unidades de emissão de som pelo ganho de saída da unidade de emissão de som virtual.
[0013] A posição da unidade de emissão de som virtual pode ser configurada de um lado de um polígono apresentando as quatro ou mais unidades de emissão de som nos cantos desta.
[0014] A unidade de cálculo de ganho pode incluir: uma unidade de cálculo de ganho virtual que calcula ganhos de saída de três das unidades de emissão de som, com base em uma relação de posição dentre as três unidades de emissão de som e a posição de localização de imagem sonora; e uma unidade de cálculo que calcula ganhos de saída definitivos das unidades de emissão de som, com base nos ganhos de saída calculados pela unidade de cálculo de ganho virtual, calculando os ganhos de saída com relação a diferentes combinações dentre as combinações.
[0015] A unidade de cálculo pode calcular um ganho de saída definitivo da mesma dentre as unidades de emissão de som, determinando uma soma dos ganhos de saída determinada com relação à mesma dentre as unidades de emissão de som.
[0016] Um sistema de processamento de som de acordo com um aspecto da presente tecnologia inclui: quatro ou mais unidades de emissão de som; uma unidade de cálculo de ganho que determina ganhos de saída de sons a serem emitidos a partir das quatro ou mais unidades de emissão de som localizadas próximo a uma posição de localização de imagem sonora como uma posição alvo, calculando ganhos de sons a serem emitidos a partir das unidades de emissão de som, com base em uma relação de posição entre as unidades de emissão de som, com relação a cada uma das diferentes combinações dentre combinações de duas ou três das quatro ou mais unidades de emissão de som, os ganhos de saída devendo ser utilizados para fixar uma imagem sonora na posição de localização de imagem sonora; e uma unidade de ajuste de ganho que efetua ajuste de ganho de sons a serem emitidos a partir das unidades de emissão de som, com base nos ganhos de saída.
[0017] Em um aspecto da presente tecnologia, ganhos de saída de sons a serem emitidos a partir de quatro ou mais unidades de emissão de som localizadas próximo a uma posição de localização de imagem de ganho como uma posição alvo, são determinadas calculando ganhos de sons a serem emitidos a partir das unidades de emissão de som, com base em uma relação de posição entre as unidades de emissão de som, com respeito a cada uma das diferentes combinações, dentre as combinações de duas ou três das quatro ou mais unidades de emissão de som, os ganhos de saída devendo ser usados para fixar uma imagem sonora na posição de localização de imagem sonora; e o ajuste de ganho é executado sobre sons a serem emitidos a partir da unidades de emissão de som, com base nos ganhos de saída.
EFEITOS DA INVENÇÃO
[0018] De acordo com um aspecto da presente tecnologia, uma imagem sonora pode ser fixada de uma maneira mais estável.
BREVE DESCRIÇÃO DOS DESENHOS
[0019] Figura 1 é um diagrama para explicar VBAP bidimensional.
[0020] Figura 2 é um diagrama para explicar VBAP tridimensional.Figura 3 é um diagrama para explicar arranjo de alto-falante.
[0021] Figura 4 é um diagrama para explicar um método de cálculo de ganho a ser usado em um caso em que quatro alto-falantes são providos.
[0022] Figura 5 é um diagrama para explicar o movimento de uma imagem sonora.
[0023] Figura 6 é um diagrama para explicar o movimento de uma imagem sonora em um caso em que a presente tecnologia é aplicada.
[0024] Figura 7 é um diagrama para explicar cálculo de ganho de acordo com a presente tecnologia.
[0025] Figura 8 é um diagrama para explicar cálculo de ganho de acordo com a presente tecnologia.
[0026] Figura 9 é um diagrama mostrando um exemplo de estrutura de um aparelho de processamento de som.
[0027] Figura 10 é um diagrama mostrando um exemplo de estrutura de uma unidade de cálculo de ganho.
[0028] Figura 11 é um fluxograma para explicar um processo de controle de localização de som.
[0029] Figura 12 é um diagrama para explicar um outro método para calcular ganhos de alto-falantes.
[0030] Figura 13 é um diagrama mostrando um outro exemplo de estrutura de uma unidade de cálculo de ganho.
[0031] Figura 14 é um fluxograma para explicar um processo de controle de localização de som.
[0032] Figura 15 é um diagrama para explicar um método para calcular ganhos de alto-falantes.
[0033] Figura 16 é um diagrama mostrando um exemplo de configuração de um computador.
MODOS PARA REALIZAR A INVENÇÃO
[0034] A descrição a seguir é uma descrição de realizações às quais a presente tecnologia é aplicada, com referência aos desenhos.
Primeira Realização Esboço da Presente Tecnologia
[0035] Referindo-se às Figuras 1 a 8, é descrito um esboço da presente tecnologia. Nas Figuras 1 a 8, componentes iguais são denotados por numerais de referência iguais, e a explicação destes não será desnecessariamente repetida.
[0036] Conforme mostrado na Figura 1, um usuário U11 que deve visualizar ou ouvir o conteúdo, tal como uma imagem móvel acompanhada por som ou uma peça musical, está ouvindo o som de dois canais emitido a partir de dois alto-falantes e SP1 e SP2 como o som do conteúdo, por exemplo.
[0037] Neste caso, é possível fixar uma imagem sonora na posição de uma fonte sonora virtual VSP1, usando informação de posição sobre os dois alto-falantes SP1 e SP2 emitindo o som dos respectivos canais.
[0038] Por exemplo, com a posição da cabeça do usuário U11 sendo a origem O, a posição da fonte sonora virtual VSP1 em um sistema de coordenadas bidimensional tendo a direção vertical e a direção horizontal como a direção do eixo geométrico x e a direção do eixo geométrico y, é representado por um vetor P tendo a origem O como seu ponto de partida no desenho.
[0039] Uma vez que o vetor P é um vetor bidimensional, o vetor P pode ser representado por uma soma linear de um vetor L1 e um vetor L2 estendendo-se nas direções do alto-falante SP1 e do alto-falante SP2, respectivamente, com a origem O sendo o ponto de partida. Isto é, o vetor P pode ser expresso pela equação (1) a seguir, usando o vetor L1 e o vetor L2:[Fórmula Matemática 1]P = g1L1 + g2L2 + . . . (1)
[0040] O coeficiente g1 e o coeficiente g2 pelos quais o vetor L1 e o vetor L2 são multiplicados na equação (1) são calculados. Com estes coeficientes g1 e g2 sendo os ganhos dos sons que são emitidos a partir dos alto-falantes SP1 e SP2, respectivamente, uma imagem sonora pode ser fixada na posição da fonte sonora virtual VSP1. Isto é, uma imagem sonora pode ser fixada na posição indicada pelo vetor P.
[0041] O método para controlar a posição de localização de uma imagem sonora, calculando os coeficientes g1 e g2 a partir da informação de posição sobre os dois alto-falantes SP1 e SP2, é chamado VBAP bidimensional.
[0042] No exemplo mostrado na Figura 1, uma imagem sonora pode ser fixada em qualquer posição sobre um arco AR11 conectando o alto-falante SP1 e o alto-falante SP2. Aqui o arco AR11 é parte de um círculo que passa através das respectivas posições do alto-falante SP1 e do alto-falante SP2, com a origem O sendo o centro.
[0043] Uma vez que o vetor P é um vetor bidimensional, se o ângulo entre o vetor L1 e o vetor L2 for maior que 0 graus, porém menor que 180 graus, os coeficientes g1 e g2 para serem os ganhos, são univocamente determinados. O método para calcular estes coeficientes g1 e g2 é descrito em detalhe no Documento de Não Patente 1 acima descrito.
[0044] No caso em que sons dos três canais devem ser reproduzidos, entretanto, o número de alto-falantes que emitem sons é três, conforme mostrado na Figura 2, por exemplo.
[0045] No exemplo mostrado na Figura 2, sons dos respectivos canais são emitidos a partir de três alto-falantes SP1, SP2 e SP3.
[0046] Em tal caso, o conceito é o mesmo que o do VBAP bidimensional acima descrito, exceto que o número de ganhos de sons dos respectivos canais a serem emitidos a partir dos alto-falantes SP1 a SP3, ou o número dos coeficientes a serem calculados como os ganhos, é três.
[0047] Especificamente, em um caso em que uma imagem sonora deve ser fixada na posição de uma fonte sonora virtual VSP2, a posição da fonte sonora virtual VSP2 é representada por um vetor P tridimensional possuindo uma origem O como seu ponto de partida em um sistema de coordenadas tridimensional, no qual a cabeça do usuário U11 é a origem O.
[0048] Onde os vetores tridimensionais estendendo-se nas direções da origem O como ponto de partida, na direção das respectivas posições dos alto- falantes SP1 a SP3 são vetores L1 a L3, o vetor P pode ser expresso por uma soma linear dos vetores L1 a L3, conforme mostrado na equação (2) a seguir:[Fórmula Matemática 2]P = g1L1 + g2L2 + g3L3. . . (2)
[0049] Os coeficientes g1 a g3 pelos quais os vetores L1 a L3 são multiplicados na equação (2) são calculados. Com estes coeficientes g1 a g3 sendo os ganhos dos sons que são emitidos a partir dos alto-falantes SP1 a SP3, respectivamente, uma imagem sonora pode ser fixada na posição da fonte sonora virtual VSP2.
[0050] O método para controlar a posição de localização de uma imagem sonora, calculando os coeficientes g1 a g3 a partir da informação de posição sobre os três alto-falantes SP1 a SP3, é chamado VBAP tridimensional.
[0051] No exemplo mostrado na Figura 2, uma imagem sonora pode ser fixada em qualquer posição dentro de uma área triangular TR11 sobre um plano esférico incluindo as posições do alto-falante SP1, do alto-falante SP2 e do alto-falante SP3. Aqui, a área TR11 é uma área que está sobre o plano de uma esfera, tem a origem O como seu centro e inclui as respectivas posições dos alto-falantes SP1 a SP3 e é uma área triangular sobre um plano esférico rodeado pelos alto-falantes SP1 a SP3.
[0052] Com tal VBAP tridimensional, uma imagem sonora pode ser fixada em qualquer posição em um espaço.
[0053] Conforme mostrado na Figura 3, o número de alto-falantes que emite sons é aumentado, e áreas, cada uma equivalente à área triangular TR11 mostrada na Figura 2 são providas em um espaço, de tal modo que, uma imagem sonora pode ser fixada em qualquer posição naquelas áreas, por exemplo.
[0054] No exemplo mostrado na Figura 3, cinco alto-falantes SP1 a SP5 são providos, e os alto-falantes SP1 a SP5 emitem sons dos respectivos canais. Aqui, os alto-falantes SP1 a SP5 são providos sobre um plano esférico que tem seu centro em uma origem O localizada na cabeça do usuário U11.
[0055] Neste caso, vetores tridimensionais estendendo-se nas direções a partir da origem O, até as respectivas posições dos alto-falantes SP1 a SP5 são vetores L1 a L5, e o mesmo cálculo que o cálculo descrito acima de acordo com a equação (2) é efetuado, para determinar os ganhos de sons que são emitidos a partir dos respectivos alto-falantes.
[0056] Aqui, as áreas do plano esférico tendo seu centro na origem O, a área triangular rodeada pelos alto-falantes SP1, SP4 e SP5 é uma área TR21. De modo similar, dentre as áreas do plano esférico tendo seu centro na origem O, a área triangular rodeada pelos alto-falantes SP3, SP4 e SP5 é uma área TR22, e a área triangular rodeada pelos alto-falantes SP2, SP3 e SP5 é uma área TR23.
[0057] Cada uma daquelas áreas TR21 a TR23 é uma área equivalente à área TR11 mostrada na Figura 2. Onde o vetor tridimensional indicando a posição na qual uma imagem sonora deve ser fixada é um vetor P, o vetor P indica uma posição na área TR21, no exemplo mostrado na Figura 3.
[0058] Portanto, neste exemplo, o mesmo cálculo daquele de acordo com a equação (2) é executado com os vetores L1, L4 e L5 indicando as posições dos alto-falantes SP1, SP2 e SP5, e os ganhos dos sons que são emitidos a partir dos respectivos alto-falantes SP1, SP4 e SP5 são calculados. Neste caso, os ganhos dos sons que são emitidos a partir dos outros alto- falantes SP2 e SP3 são 0. Isto é, nenhum som é emitido a partir destes alto- falantes SP2 e SP3.
[0059] Com os cinco alto-falantes SP1 a SP5 sendo providos em um espaço desta maneira, uma imagem sonora pode ser fixada em qualquer posição em uma área formada com as áreas TR21 a TR23.
[0060] Conforme mostrado na Figura 4, quatro alto-falantes SP1 a SP4 podem ser providos em um espaço, e uma imagem sonora deve ser fixada na posição de uma fonte sonora virtual VSP3 localizada na posição central entre estes alto-falantes SP1 a SP4.
[0061] No exemplo mostrado na Figura 4, os alto-falantes SP1 a SP4 são providos sobre o plano de uma esfera tendo seu centro em uma origem O (não mostrada), e a área triangular que é uma área sobre o plano e é rodeada pelos alto-falantes SP1 a SP3 é uma área TR31. Dentre as áreas sobre o plano esférico tendo seu centro na origem O, a área triangular rodeada pelos alto- falantes SP2 a SP4 é uma área TR32.
[0062] A fonte sonora virtual VSP3 está localizada sobre o lado direito inferior da área TR31. A fonte sonora virtual VSP3 é também localizada sobre o lado esquerdo superior da área TR32.
[0063] Consequentemente, neste caso, VBAP tridimensional deveria ser executado com respeito aos alto-falantes SP1 a SP3 ou VBAP tridimensional deveria ser executado com respeito aos alto-falantes SP2 a SP4. Em qualquer caso, o mesmo resultado de cálculo VBAP tridimensional é obtido, e são determinados ganhos de tal modo que somente os dois alto- falantes SP2 e SP3 emitam som, e os alto-falantes remanescentes SP1 e SP2 não emitam qualquer som.
[0064] Pelo VBAP tridimensional, em um caso em que a posição na qual uma imagem sonora deve ser fixada está sobre a linha de contorno entre áreas triangulares sobre um plano esférico conectando três alto-falantes, ou sobre um lado de um triângulo sobre o plano esférico, somente os dois alto- falantes localizados nas duas extremidades da lateral, emitem som.
[0065] Em um caso em que somente os dois alto-falantes SP2 e SP3 emitem som conforme acima, o usuário U11 situado em um ponto certo que é um ponto de audição ótimo, podem se mover na direção da esquerda no desenho, conforme indicado pela seta A, por exemplo, conforme mostrado na Figura 5.
[0066] Como um resultado, a cabeça do usuário U11 torna-se mais próxima do alto-falante SP3, e o som sendo emitido a partir do alto-falante SP3 torna-se mais alto para o usuário U11. Portanto, o usuário U11 sente como se a fonte sonora virtual VSP3 ou a imagem sonora tivesse se movido da esquerda inferior, conforme indicado pela seta A12 no desenho.
[0067] Pelo VBAP tridimensional, em um caso em que somente dois alto-falantes emitem som, conforme mostrado na Figura 5, se o usuário U11 se move para longe do ponto certo de uma curta distância, a imagem sonora se move em uma direção perpendicular ao movimento do usuário U11. Em tal caso, o usuário U11 sente como se a imagem sonora tivesse se movido em uma direção diferente da direção de seu movimento, e portanto, tem um sentimento de estranheza. Isto é, o usuário U11 sente que a posição de localização da imagem sonora é instável, e o alcance do ponto certo torna-se mais estreito.
[0068] À vista disto, de acordo com a presente tecnologia, em oposição ao VBAP acima descrito, um número de alto-falantes maior do que três, ou quatro ou mais alto-falantes é constituído para emitir som, de tal modo que a posição de localização de uma imagem sonora torna-se mais estável, e o alcance do ponto certo torna-se consequentemente mais amplo.
[0069] Embora o número de alto-falantes que são feitos para emitir som possa ser qualquer número igual ou maior do que quatro, a explicação de um caso exemplificador onde quatro alto-falantes são constituídos para emitir som é continuado na descrição abaixo.
[0070] Uma imagem sonora deve ser fixada na posição de uma fonte sonora virtual VSP3 na posição central dentre quatro alto-falantes SP1 a SP3, por exemplo como no exemplo mostrado na Figura 4.
[0071] De acordo com a presente tecnologia, dois ou três alto-falantes são selecionados como uma combinação em tal caso, e VBAP é executado com respeito a diferentes combinações de alto-falantes, para calcular os ganhos dos sons que são emitidos a partir dos quatro alto-falantes SP1 a SP4.
[0072] Consequentemente, de acordo com a presente tecnologia, todos os quatro alto-falantes SP1 a SP4 emitem som conforme mostrado na Figura 6, por exemplo.
[0073] Em tal caso, se um usuário U11 se move para a esquerda a partir do ponto certo, conforme mostrado em uma seta A21 na Figura 6, a posição da fonte sonora virtual VSP3 ou a posição de localização da imagem sonora somente se move para a esquerda, conforme mostrado em uma seta A22 no desenho. Isto é, a imagem sonora não se move para baixo ou em uma direção perpendicular à direção do movimento do usuário U11, como no exemplo mostrado na Figura 5, mas se move somente na mesma direção que a direção de movimento do usuário U11.
[0074] Isto é porque, quando o usuário U11 se move para a esquerda, o usuário U11 torna-se mais próximo do alto-falante SP3, porém o alto- falante SP1 também existe acima do alto-falante SP3. Neste caso, o som alcança os ouvidos do usuário U11 a partir da esquerda superior e esquerda inferior, em relação ao usuário U11 e, portanto, o usuário U11 dificilmente sente que a imagem sonora se moveu para baixo.
[0075] Consequentemente, a posição de localização da imagem sonora pode ser tornada mais estável do que por uma técnica VBAP convencional e, como um resultado, o alcance do ponto certo pode ser tornado mais amplo.
[0076] A seguir, o controle sobre a localização do som de acordo com a presente tecnologia é descrito em maior detalhe.
[0077] Na presente técnica, um vetor que indica uma posição na qual uma imagem sonora deve ser fixada é um vetor P que tem seu ponto de partida na origem O (não mostrada) de um sistema de coordenadas tridimensional, e o vetor P é expresso pela seguinte equação (3):[Fórmula Matemática 3]P = g1L1 + g2L2 + g3L3 + g4L4 ... (3)
[0078] Na equação (3), os vetores L1 a L4 indicam vetores tridimensionais estendendo-se na direção das posições do alto-falantes SP1 a SP4 que estão localizados na vizinhança da posição de localização da imagem sonora e são arranjados para rodear a posição de localização da imagem sonora. Também, na equação (3), g1 a g4 representam os coeficientes que devem ser calculados como os ganhos de sons dos respectivos canais a serem emitidos a partir dos alto-falantes SP1 a SP4.
[0079] Na equação (3) o vetor P é expresso como uma soma linear dos quatro vetores L1 a L4. Uma vez que o vetor P é um vetor tridimensional, os quatro coeficientes g1 a g4 não são univocamente determinados.
[0080] Portanto, de acordo com a presente tecnologia, os respectivos coeficientes g1 a g4 para representarem ganhos são calculados pelo método descrito abaixo.
[0081] Uma imagem sonora deve ser fixada na posição central de um quadrilátero sobre um plano esférico rodeado pelos quatro alto-falantes SP1 a SP4 mostrado na Figura 4, ou na posição da fonte sonora virtual VSP3.
[0082] Primeiramente, um quadrilátero sobre o plano esférico apresentando os alto-falantes SP1 a SP4 como os vértices é selecionado, e um alto-falante virtual (a seguir, referido como "o alto-falante virtual") é suposto existir sobre o lado.
[0083] Conforme mostrado na Figura 7, no quadrilátero sobre o plano esférico possuindo os alto-falantes SP1 a SP4 nos vértices, o lado conectando os alto-falantes SP3 e SP4 localizado no vértice esquerdo inferior e no vértice direito inferior do desenho é selecionado, por exemplo. É suposto que o alto- falante virtual VSP' existe na posição do ponto de intersecção entre o lado conectando os alto-falantes SP3 e SP4 e uma perpendicular estendendo-se a partir da posição da fonte sonora virtual VSP3, por exemplo.
[0084] VBAP tridimensional é então executado com respeito aos três alto-falantes: o alto-falante virtual VSP', e os alto-falantes SP1 e SP2 no canto esquerdo superior e no canto direito superior no desenho. Especificamente, é executado um cálculo de acordo com a mesma equação que a equação (2) acima descrita, para determinar um coeficiente g1, um coeficiente g2 e um coeficiente g' que devem ser os ganhos de sons a serem emitidos a partir do alto-falante SP1, do alto-falante SP2 e do alto-falante virtual VSP'.
[0085] Na Figura 7, o vetor P é expresso como uma soma linear de três vetores estendendo-se a partir da origem O ou do vetor L1 estendendo-se na direção do alto-falante SP1, do vetor L2 estendendo-se na direção do alto- falante SP2 e do vetor L' estendendo-se na direção do alto-falante virtual VSP'. Isto é, o vetor P é expresso como P = g1L1 + g2L2 + g'L'.
[0086] Aqui, para fixar uma imagem sonora na posição da fonte sonora virtual VSP3, o alto-falante virtual VSP' necessita emitir som com o ganho g', porém o alto-falante virtual VSP' não existe realmente. Portanto, conforme mostrado na Figura 8, os dois alto-falantes SP3 e SP4 e as duas extremidades do lado sobre o qual o alto-falante virtual VSP' está localizado no quadrilátero, são usados para fixar a imagem sonora na posição do alto- falante virtual VSP' de acordo com a presente tecnologia. Desta maneira, o alto-falante virtual VSP' é realizado.
[0087] Especificamente, VBAP bidimensional é realizado com respeito aos dois alto-falantes SP3 e SP4, que estão localizados nas duas extremidades do lado sobre o qual o alto-falante virtual VSP' está localizado sobre o plano esférico. Isto é, é realizado um cálculo de acordo com a mesma equação que a equação (1) acima descrita, para calcular um coeficiente g3' e um coeficiente g4', que devem ser os ganhos dos sons a serem emitidos a partir do alto-falante SP3 e do alto-falante SP4, respectivamente.
[0088] No exemplo mostrado na Figura 8, o vetor L' estendendo-se na direção do alto-falante virtual VSP' é expresso como uma soma linear do vetor L3, estendendo-se na direção do alto-falante SP3 e do vetor L4 estendendo-se na direção do alto-falante SP4. Isto é, o vetor L' é expresso como L' = g3'L3 + g4'L4.
[0089] O valor g'g3' obtido multiplicando o coeficiente calculado g3' pelo coeficiente g' é configurado como o ganho do som para ser emitido a partir do alto-falante SP3, e o valor g'g4' obtido multiplicando o coeficiente calculado g4' pelo coeficiente g' é configurado como o ganho do som a ser emitido a partir do alto-falante SP4. Desta maneira, o alto-falante virtual VSP' que emite som com o ganho g' é realizado pelos alto-falantes SP3 e SP4.
[0090] Aqui, o valor de g'g3' para ser um valor de ganho é o valor do coeficiente g3 na equação (3) acima descrita e o valor de g'g4' para ser um valor de ganho é o valor do coeficiente g4 na equação (3) acima descrita.
[0091] Os valores g1, g2, g'g3' e g'g4', que foram obtidos conforme acima e não são 0, são configurados como os ganhos dos sons dos respectivos canais a serem emitidos a partir do alto-falantes SP1 a SP4. Desta maneira, o quatro alto-falantes são constituídos para emitir som, e a imagem sonora pode ser fixada na posição alvo.
[0092] Como a imagem sonora é fixada em uma posição, fazendo com que os quatro alto-falantes emitam som conforme acima, a posição de localização da imagem sonora pode ser tornada mais estável do que uma imagem sonora fixada em uma posição por uma técnica VBAP convencional. Consequentemente, a faixa do ponto certo pode ser ampliada.
Exemplo de Estrutura de um Aparelho de Processamento de Som
[0093] A seguir, é descrito um exemplo específico ao qual a presente tecnologia acima descrita é aplicada. Figura 9 é um diagrama mostrando um exemplo de estrutura de uma realização de um aparelho de processamento de som ao qual a presente tecnologia é aplicada.
[0094] Um aparelho de processamento de som 11 efetua ajuste de ganho sobre um sinal sonoro monaural fornecido a partir do lado externo para os respectivos canais. Fazendo isto, o aparelho de processamento de som 11 gera sinais sonoros de N canais (N > 5), e fornece os sinais sonoros aos alto- falantes 12-1 a 12-N correspondentes aos N canais.
[0095] Os alto-falantes 12-1 a 12-N emitem sons dos respectivos canais, com base nos sinais sonoros fornecidos a partir do aparelho de processamento de som 11. Isto é, os alto-falantes 12-1 a 12-N são unidades de emissão de som servindo como fontes sonoras que emitem sons dos respectivos canais. A seguir, quando não há necessidade particular de distinguir os alto-falantes 12-1 a 12-N um do outro, os alto-falantes 12-1 a 12- N serão também referidos simplesmente como os alto-falantes 12. Embora os alto-falantes 12 não estejam incluídos no aparelho de processamento de som 11 na Figura 9, os alto-falantes 12 podem ser incluídos no aparelho de processamento de som 11. Também, os respectivos componentes constituindo o aparelho de processamento de som 11 e os alto-falantes 12 podem ser providos em diversos aparelho de processamento de som, para formar um sistema de processamento de som incluindo os respectivos componentes do aparelho de processamento de som 11 e os alto-falantes 12.
[0096] Os alto-falantes 12 são arranjados para rodear a posição na qual é suposto que um usuário exista, ao visualizar e ouvir o conteúdo ou similar (a posição será a seguir também referida simplesmente como posição do usuário). Por exemplo os respectivos alto-falantes 12 são arranjados em posições sobre o plano de uma esfera tendo seu centro na posição do usuário. Em outras palavras, os respectivos alto-falantes 12 são arranjados em posições à mesma distância do usuário. Também, sinais sonoros podem ser fornecidos a partir do aparelho de processamento de som 11 para os alto- falantes 12 de uma forma com fio ou sem fio.
[0097] O aparelho de processamento de som 11 inclui uma unidade de seleção de alto-falante 21, uma unidade de cálculo de ganho 22, uma unidade de determinação de ganho 23, uma unidade de saída de ganho 24 e uma unidade de ajuste de ganho 25.
[0098] Sinais sonoros do som coletado por um microfone anexado a um objeto tal como um objeto móvel, e informação de posição sobre o objeto são fornecidos ao aparelho de processamento de som 11.
[0099] Com base na informação de posição fornecida a partir do exterior, a unidade de seleção de alto-falante 21 identifica a posição na qual uma imagem sonora do som a ser emitido a partir do objeto no espaço incluindo os alto-falantes 12 deve ser fixada (a posição a ser identificada será posteriormente também referida como a posição de imagem sonora alvo) e fornece o resultado da identificação à unidade de cálculo de ganho 22.
[00100] Com base na posição de imagem sonora alvo, a unidade de seleção de alto-falante 21 seleciona quatro alto-falantes 12 para emitir som como alto-falantes alvos de processamento12, dentre os N alto-falantes 12, e fornece informação de seleção indicando o resultado da seleção à unidade de cálculo de ganho 22, unidade de determinação de ganho 23 e unidade de saída de ganho 24.
[00101] A unidade de cálculo de ganho 22 calcula ganhos dos alto- falantes alvos de processamento12, com base na informação de seleção fornecida a partir da unidade de seleção de alto-falante 21 e da posição de imagem sonora alvo, e fornece os ganhos à unidade de saída de ganho 24. A unidade de determinação de ganho 23 determina ganhos dos alto-falantes 12 diferentes dos alto-falantes alvos de processamento, com base na informação de seleção fornecida a partir da unidade de seleção de alto-falante 21 e fornece os ganhos à unidade de saída de ganho 24. Por exemplo os ganhos dos alto-falantes 12 que não são alto-falantes alvos de processamento são ajustados para "0". Isto é, os alto-falantes 12 que não são os alto-falantes alvos de processamento são controlados para não emitir qualquer som a partir do objeto.
[00102] A unidade de saída de ganho 24 fornece os N ganhos fornecidos a partir da unidade de cálculo de ganho 22 e da unidade de determinação de ganho 23, à unidade de ajuste de ganho 25. Neste ponto, a unidade de saída de ganho 24 determina os destinos de fornecimento dos N ganhos fornecidos a partir da unidade de cálculo de ganho 22 e da unidade de determinação de ganho 23 na unidade de ajuste de ganho 25, com base na informação de seleção fornecida a partir da unidade de seleção de alto-falante 21.
[00103] Com base nos respectivos ganhos fornecidos a partir da unidade de saída de ganho 24, a unidade de ajuste de ganho 25 efetua ajuste de ganho sobre o sinal sonoro do objeto fornecido do exterior, e fornece os sinais sonoros resultantes dos N canais aos alto-falantes 12, de tal modo que os alto-falantes 12 emitem som.
[00104] A unidade de ajuste de ganho 25 inclui amplificadores 31-1 a 31-N. Com base nos ganhos fornecidos a partir da unidade de saída de ganho 24, os amplificadores 31-1 a 31-N efetuam ajuste de ganho sobre o sinal sonoro fornecido a partir do exterior, e fornecem os sinais sonoros resultantes aos alto-falantes 12-1 a 12-N.
[00105] A seguir, quando não há necessidade de distinguir os amplificadores 31-1 a 31-N um do outro, os amplificadores 31-1 a 31-n serão também referidos simplesmente como os amplificadores 31.
Exemplo de Estrutura da Unidade de Cálculo de Ganho
[00106] A unidade de cálculo de ganho 22 mostrada na Figura 9 possui a estrutura mostrada na Figura 10, por exemplo.
[00107] A unidade de cálculo de ganho 22 mostrada na Figura 10 inclui uma unidade de determinação de posição de alto-falante virtual 61, uma unidade de cálculo de ganho tridimensional 62, uma unidade de cálculo de ganho bidimensional 63, um multiplicador 64 e um multiplicador 65.
[00108] A unidade de determinação de posição de alto-falante virtual 61 determina a posição de um alto-falante virtual com base na informação indicando a posição de imagem sonora alvo e a informação selecionada fornecida a partir da unidade de seleção de alto-falante 21. A unidade de determinação de posição de alto-falante virtual 61 fornece a informação indicando a posição de imagem sonora alvo, a informação selecionada e a informação indicando a posição do alto-falante virtual à unidade de cálculo de ganho tridimensional 62, e fornece a informação selecionada e a informação indicando a posição do alto-falante virtual à unidade de cálculo de ganho bidimensional 63.
[00109] Com base nas respectivas peças de informação fornecidas a partir da unidade de determinação de posição de alto-falante virtual 61, a unidade de cálculo de ganho tridimensional 62 efetua VBAP tridimensional com relação a dois alto-falantes 12 dentre os alto-falantes alvos de processamento 12, e o alto-falante virtual. A unidade de cálculo de ganho tridimensional 62 então fornece os ganhos dos dois alto-falantes 12 obtidos através do VBAP tridimensional à unidade de saída de ganho 24, e fornece o ganho do alto-falante virtual ao multiplicador 64 e ao multiplicador 65.
[00110] Com base nas respectivas peças da informação fornecida a partir da unidade de determinação de posição de alto-falante virtual 61, a unidade de cálculo de ganho bidimensional 63 executa VBAP bidimensional com respeito a dois alto-falantes 12 dentre os alto-falantes alvos de processamento 12, e fornece os ganhos resultantes do alto-falantes 12 ao multiplicador 64 e ao multiplicador 65.
[00111] O multiplicador 64 obtém ganhos definitivos dos alto-falantes 12, multiplicando os ganhos fornecidos a partir da unidade de cálculo de ganho bidimensional 63 pelos ganhos fornecidos a partir da unidade de cálculo de ganho tridimensional 62, e fornece os ganhos definitivos à unidade de saída de ganho 24. O multiplicador 65 obtém ganhos definitivos dos alto- falantes 12, multiplicando o ganho fornecido a partir da unidade de cálculo de ganho bidimensional 63 pelos ganhos fornecidos a partir da unidade de cálculo de ganho tridimensional 62, e fornece os ganhos definitivos à unidade de saída de ganho 24.
Descrição de um Processo de Controle de Localização de Som
[00112] Entrementes, quando a informação de posição de objeto e um sinal sonoro do objeto são fornecidos ao aparelho de processamento de som 11, e uma instrução para emitir som do objeto é emitida, o aparelho de processamento de som 11 inicia um processo de controle de localização de som para fazer com que som do objeto seja emitido e fixa a imagem sonora em uma posição apropriada.
[00113] Referindo-se agora ao fluxograma na Figura 11, é descrito o processo de controle de localização de som a ser executado pelo aparelho de processamento de som 11.
[00114] Na etapa S11, a unidade de seleção de alto-falante 21 seleciona alto-falantes alvos de processamento 12 com base na informação de posição do objeto fornecida do exterior.
[00115] Especificamente, a unidade de seleção de alto-falante 21 identifica uma posição de imagem sonora alvo com base na informação de posição do objeto, por exemplo, e seleciona dentre os N alto-falantes 12, os alto-falantes alvos de processamento 12 que são quatro alto-falantes 12 que estão localizados na vizinhança da posição de imagem sonora alvo e são arranjados para contornar a posição de imagem sonora alvo.
[00116] Em um caso em que a posição da fonte sonora virtual VSP3 mostrada na Figura 7 é configurada como a posição de imagem sonora alvo, por exemplo, os alto-falantes 12 equivalentes aos quatro alto-falantes SP1 a SP4 rodeando a fonte sonora virtual VSP3 são selecionados como os alto- falantes alvos de processamento 12.
[00117] A unidade de seleção de alto-falante 21 fornece a informação indicando a posição de imagem sonora alvo para a unidade de determinação de posição de alto-falante virtual 61, e fornece a informação selecionada indicando os quatro alto-falantes alvos de processamento 12 à unidade de determinação de posição de alto-falante virtual 61, à unidade de determinação de ganho 23 e à unidade de saída de ganho 24.
[00118] Na etapa S12, a unidade de determinação de posição de alto- falante virtual 61 determina a posição do alto-falante virtual, com base na informação indicando a posição de imagem sonora alvo e a informação selecionada fornecida a partir da unidade de seleção de alto-falante 21. Como no exemplo mostrado na Figura 7, por exemplo, a posição do ponto de intersecção entre o lado conectando os alto-falantes 12 localizados no canto esquerdo inferior e canto direito inferior relativos ao usuário, dentre os alto- falantes alvos de processamento 12 sobre um plano esférico, e a perpendicular estendendo-se da posição de imagem sonora alvo na direção do lado, é configurada como a posição do alto-falante virtual.
[00119] Após a posição do alto-falante virtual ser determinada, a unidade de determinação de posição de alto-falante virtual 61 fornece a informação indicando a posição de imagem sonora alvo, a informação selecionada e a informação indicando a posição do alto-falante virtual à unidade de cálculo de ganho tridimensional 62, e fornece a informação selecionada e a informação indicando a posição do alto-falante virtual à unidade de cálculo de ganho bidimensional 63.
[00120] A posição do alto-falante virtual pode ser qualquer posição, enquanto esta estiver localizada de um lado de um quadrilátero sobre o plano esférico, o quadrilátero apresentando os quatro alto-falantes alvos de processamento 12 nos respectivos vértices. Mesmo em um caso em que o número de alto-falantes alvos de processamento 12 é cinco ou maior, a posição do alto-falante virtual pode ser qualquer posição de um lado de um polígono no plano esférico, o polígono apresentando aqueles alto-falantes alvos de processamento 12 nos vértices.
[00121] Na etapa S13, a unidade de cálculo de ganho tridimensional 62 calcula ganhos para o alto-falante virtual e dois alto-falantes alvos de processamento 12, com base na informação indicando a posição de imagem sonora alvo, a informação selecionada e a informação sobre a posição do alto- falante virtual, a informação tendo sido fornecida a partir da unidade de determinação de posição de alto-falante virtual 61.
[00122] Especificamente, a unidade de cálculo de ganho tridimensional 62 determina o vetor P para ser o vetor tridimensional indicando a posição de imagem sonora alvo, e determina o vetor L' para ser o vetor tridimensional, estendendo-se na direção do alto-falante virtual. A unidade de cálculo de ganho tridimensional 62 também determina o vetor L1 para ser o vetor estendendo-se na direção do alto-falante 12 na mesma relação de posição que o alto-falante SP1 mostrado na Figura 7, dentre os alto-falantes alvos de processamento 12, e o vetor L2 para ser o vetor estendendo-se na direção do alto-falante 12, na mesma relação de posição que o alto-falante SP2.
[00123] A unidade de cálculo de ganho tridimensional 62 então determina a equação expressando o vetor P como a soma linear do vetor L', do vetor L1 e do vetor L2, e efetua o cálculo de acordo com a equação, para calcular ganhos que são o coeficiente g', o coeficiente g1 e o coeficiente g2 do vetor L', do vetor L1 e do vetor L2, respectivamente. Isto é, o mesmo cálculo que o cálculo descrito acima de acordo com a equação (2) é executado.
[00124] A unidade de cálculo de ganho tridimensional 62 fornece os coeficientes calculados g1 e g2 dos alto-falantes 12 nas mesmas relações de posição que os alto-falantes SP1 e SP2, como os ganhos dos sons a serem emitidos a partir destes alto-falantes 12, para a unidade de saída de ganho 24.
[00125] A unidade de cálculo de ganho tridimensional 62 também fornece o coeficiente calculado g' do alto-falante virtual, como o ganho do som a ser emitido a partir do alto-falante virtual, para o multiplicador 64 e multiplicador 65.
[00126] Na etapa S14, a unidade de cálculo de ganho bidimensional 63 calcula ganhos para dois alto-falantes alvos de processamento 12, com base na informação selecionada e informação sobre a posição do alto-falante virtual, a informação tendo sido fornecida a partir da unidade de determinação de posição de alto-falante virtual 61.
[00127] Especificamente, a unidade de cálculo de ganho bidimensional 63 determina o vetor L' para ser o vetor tridimensional indicando a posição do alto-falante virtual. A unidade de cálculo de ganho bidimensional 63 também determina o vetor L3 para ser o vetor estendendo-se na direção do alto-falante 12, na mesma relação posicional que o alto-falante SP3 mostrado na Figura 8, dentre os alto-falantes alvos de processamento 12, e o vetor L4 para ser o vetor estendendo-se na direção do alto-falante 12, na mesma relação de posição que o alto-falante SP4.
[00128] A unidade de cálculo de ganho bidimensional 63 então determina a equação expressando o vetor L' como a soma linear do vetor L3 e do vetor L4, e efetua cálculo de acordo com a equação, para calcular ganhos que são o coeficiente g3' e o coeficiente g4' do vetor L3 e do vetor L4, respectivamente. Isto é, o mesmo cálculo que o cálculo descrito acima de acordo com a equação (1) é efetuado.
[00129] A unidade de cálculo de ganho bidimensional 63 fornece os coeficientes calculados g3' e g4' dos alto-falantes 12 nas mesmas relações de posição que os alto-falantes SP3 e SP4, como os ganhos dos sons a serem emitidos a partir destes alto-falantes 12 para o multiplicador 64 e multiplicador 65.
[00130] Na etapa S15, o multiplicador 64 e o multiplicador 65 multiplicam os ganhos g3' e g4' fornecidos a partir da unidade de cálculo de ganho bidimensional 63 pelo ganho g' do alto-falante virtual fornecido a partir da unidade de cálculo de ganho tridimensional 62, e fornece os ganhos resultantes à unidade de saída de ganho 24.
[00131] Consequentemente, como o ganho definitivo do alto-falante 12 na mesma relação de posição que o alto-falante SP3 mostrado na Figura 8, dentre os quatro alto-falantes alvos de processamento 12, o ganho g3 = g'g3' é fornecido à unidade de saída de ganho 24. De modo similar, como o ganho definitivo do alto-falante 12 na mesma relação de posição que o alto-falante SP4 mostrado na Figura 8, dentre os quatro alto-falantes alvos de processamento 12, o ganho g4 = g'g4' é fornecido à unidade de saída de ganho 24.
[00132] Na etapa S16, a unidade de determinação de ganho 23 determina ganhos dos alto-falantes 12 diferentes dos alto-falantes alvos de processamento, com base na informação selecionada fornecida a partir da unidade de seleção de alto-falante 21, e fornece os ganhos à unidade de saída de ganho 24. Por exemplo, os ganhos de todos os alto-falantes 12 que não são os alvos de processamento são ajustados em "0".
[00133] Depois dos ganhos g', g2, g'g3' e g'g4' a partir da unidade de cálculo de ganho 22, e o ganho "0" a partir da unidade de determinação de ganho 23 serem fornecidos à unidade de saída de ganho 24, a unidade de saída de ganho 24 fornece estes ganhos aos amplificadores 31 da unidade de ajuste de ganho 25, com base na informação selecionada fornecida a partir da unidade de seleção de alto-falante 21.
[00134] Especificamente, a unidade de saída de ganho 24 fornece os ganhos g1, g2, g'g3' e g'g4' aos amplificadores 31 que fornecem sinais sonoros aos respectivos alto-falantes alvos de processamento 12, ou aos respectivos alto-falantes 12 equivalentes aos alto-falantes SP1 a SP4 mostrados na Figura 7. Por exemplo, em um caso em que o alto-falante 12 equivalente ao alto- falante SP1 é o alto-falante 12-1, a unidade de saída de ganho 24 fornece o ganho g1 ao amplificador 31-1.
[00135] A unidade de saída de ganho 24 também fornece o ganho "0" fornecido a partir da unidade de determinação de ganho 23, aos amplificadores 31 que fornecem sinais sonoros aos alto-falantes 12 que não são alvos de processamento.
[00136] Na etapa S17, os amplificadores 31 da unidade de ajuste de ganho 25 efetuam ajuste de ganho sobre um sinal sonoro do objeto fornecido a partir do exterior, com base nos ganhos fornecidos a partir da unidade de saída de ganho 24, e fornece os sinais sonoros resultantes aos alto-falantes 12, de tal modo que o alto-falantes 12 emitem som.
[00137] Os respectivos alto-falantes 12 emitem som com base nos sinais sonoros fornecidos a partir do amplificadores 31. Mais especificamente, somente os quatro alto-falantes alvos de processamento 12 emitem som. Consequentemente, uma imagem sonora pode ser fixada em uma posição alvo. À medida que o som é emitido a partir dos alto-falantes 12, o processo de controle de localização de som chega ao final.
[00138] Conforme descrito acima, o aparelho de processamento de som 11 seleciona quatro alto-falantes 12 como alvos de processamento, com base na informação de posição sobre um objeto, e executa VBAP com respeito a uma combinação de dois ou três alto-falantes, dentre aqueles alto-falantes 12 e um alto-falante virtual. O aparelho de processamento de som 11 então efetua ajuste de ganho sobre um sinal sonoro, com base nos ganhos dos respectivos alto-falantes alvos de processamento 12, os ganhos tendo sido obtidos através de VBAP executado sobre diferentes combinações.
[00139] Consequentemente, o som pode ser emitido a partir dos quatro alto-falantes 12 rodeando a posição de imagem sonora alvo, e a localização do som pode ser tornada mais estável. Como um resultado, o alcance do ponto certo pode ser tornado mais amplo.
Segunda Realização Cálculo de Ganho
[00140] No exemplo descrito acima, dois ou três alto-falantes para formar uma combinação de alto-falantes são selecionados dentre cinco alto- falantes incluindo um alto-falante virtual, e VBAP é efetuado sobre mais de uma combinação, para calcular ganhos dos alto-falantes alvos de processamento 12. De acordo com a presente tecnologia, entretanto, é também possível calcular ganhos selecionando combinações dentre quatro alto-falantes alvos de processamento 12, e executar VBAP sobre cada uma das combinação, sem qualquer alto-falante virtual determinado.
[00141] Em tal caso, o número de vezes que VBAP deveria ser executado varia dependendo da posição de imagem sonora alvo, conforme mostrado na Figura 12, por exemplo. Na Figura 12, os componentes equivalentes aos mostrados na Figura 7 são indicados pelos mesmos numerais de referência daqueles usados na Figura 7, e a explicação destes não será desnecessariamente repetida.
[00142] Em um caso em que a posição de uma fonte sonora virtual, ou de uma posição de imagem sonora alvo, é a posição indicada por uma seta Q11, por exemplo, a posição indicada pela seta Q11 está em uma área triangular rodeada por um alto-falante SP1, um alto-falante SP2 e um alto- falante SP4 sobre um plano esférico. Consequentemente, se é executado VBAP tridimensional com respeito à combinação de alto-falantes consistindo dos alto-falantes SP1, SP2 e SP4 (esta combinação será a seguir também referida como a primeira combinação), os ganhos dos sons a serem emitidos a partir dos três alto-falantes SP1, SP2 e SP4 são determinados.
[00143] Entrementes, a posição indicada pela seta Q11 é também uma posição em uma área triangular rodeada pelo alto-falante SP2, um alto-falante SP3 e o alto-falante SP4 sobre o plano esférico. Consequentemente, se VBAP tridimensional é executado com respeito à combinação de alto-falantes consistindo dos alto-falantes SP2, SP3 e SP4 (esta combinação será a seguir também referida como a segunda combinação), os ganhos dos sons a serem emitidos a partir dos três alto-falantes SP2, SP3 e SP4 são determinados.
[00144] Aqui, cada um dos ganhos dos alto-falantes não usados nas primeiras combinações e nas segundas combinações é ajustado em "0", de tal modo que dois conjuntos de ganhos podem ser obtidos como os respectivos ganhos dos quatro alto-falantes SP1 a SP4 na primeira e segunda combinações.
[00145] Para cada um dos alto-falantes, a soma dos ganhos do alto- falante obtidos na primeira e segunda combinações, é obtida como uma soma de ganho. Por exemplo, onde o ganho do alto-falante SP1 na primeira combinação é g1(1) e o ganho do alto-falante SP1 na segunda combinação é g1(2), a soma de ganho gs1 do alto-falante SP1 é expressa como a soma de ganho gs1 = g1(1) + g1(2).
[00146] Uma vez que o alto-falante SP1 não está incluído na segunda combinação, g1(2) é 0. Uma vez que o alto-falante SP1 está incluído na primeira combinação de alto-falantes, g1(1) não é 0. Como um resultado, a soma de ganho gs1 do alto-falante SP1 não é 0. O mesmo se aplica às somas de ganho dos outros alto-falantes SP2 a SP4.
[00147] À medida que as somas de ganho dos respectivos alto-falantes são determinadas da maneira acima, os valores obtidos normalizando as somas de ganhos dos respectivos alto-falantes com a soma de quadrados destas somas de ganho, são ajustados como os ganhos definitivos destes alto- falantes ou, mais especificamente, como os ganhos dos sons a serem emitidos a partir dos alto-falantes.
[00148] À medida que os ganhos dos respectivos alto-falantes SP1 a SP4 são determinados da maneira acima, ganhos que não são 0 são invariavelmente obtidos. Consequentemente, cada um dos quatro alto-falantes SP1 a SP4 pode ser constituído para emitir som e uma imagem sonora pode ser fixada em uma posição desejada.
[00149] Na descrição abaixo, o ganho de um alto-falante SPk (1 < k < 4) em uma m-ésima combinação (1 < m < 4) é representada por gk(m). A soma de ganho de um alto-falante SPk (1 < k < 4) é representada por gsk.
[00150] Adicionalmente, em um caso em que a posição de imagem sonora alvo é a posição indicada por uma seta Q12, ou a posição do ponto de intersecção entre a linha conectando o alto-falante SP2 e o alto-falante SP3, e a linha conectando o alto-falante SP1 e o alto-falante SP4 no plano esférico, há quatro combinações de três alto-falantes.
[00151] Especificamente, onde há a combinação do alto-falante SP1, alto-falante SP2 e alto-falante SP3 (esta combinação será a seguir referida como a primeira combinação), a combinação do alto-falante SP1, alto-falante SP2 e alto-falante SP4 (esta combinação será a seguir referida como a segunda combinação) é possível. Também, onde há a combinação do alto- falante SP1, alto-falante SP3 e alto-falante SP4 (esta combinação será a seguir referida como a terceira combinação), a combinação do alto-falante SP2, alto- falante SP3 e alto-falante SP4 (esta combinação será a seguir referida como a quarta combinação) é possível.
[00152] Neste caso, VBAP tridimensional é efetuado sobre cada uma dentre a primeira à quarta combinações, para determinar os ganhos dos respectivos alto-falantes. A soma dos quatro ganhos obtidos com respeito ao mesmo alto-falante é ajustada como uma soma de ganho, e os valores obtidos normalizando as somas de ganho dos respectivos alto-falantes com a soma dos quadrados das quatro somas de ganho determinadas com respeito aos respectivos alto-falantes, são ajustadas como os ganhos definitivos destes alto-falantes.
[00153] Em um caso em que a posição de imagem sonora alvo é a posição indicada pela seta Q12, se o quadrilátero formado com os alto- falantes SP1 a SP4 sobre o plano esférico for um retângulo ou similar, o mesmo resultado do cálculo com VBAP tridimensional é obtido a partir da primeira combinação e da quarta combinação, por exemplo. Consequentemente, o VBAP tridimensional é executado com respeito a duas combinações apropriadas, tais como a primeira e segunda combinações neste caso, os ganhos dos respectivos alto-falantes podem ser obtidos. Entretanto, em um caso em que o quadrilátero formado com os alto-falantes SP1 a SP4 sobre o plano esférico não é um retângulo ou similar, porém um quadrilátero assimétrico, é necessário executar VBAP tridimensional com respeito a cada uma das quatro combinações.
Exemplo de Estrutura da Unidade de Cálculo de Ganho
[00154] Em um caso em que os ganhos são calculados selecionando combinações de alto-falantes dentre quatro alto-falantes alvos de processamento 12 e executando VBAP com respeito a cada uma destas combinações, sem qualquer alto-falante virtual determinado, a unidade de cálculo de ganho 22 mostrada na Figura 9 apresenta a estrutura mostrada na Figura 13, por exemplo.
[00155] A unidade de cálculo de ganho 22 mostrada na Figura 13, inclui uma unidade de seleção 91, uma unidade de cálculo de ganho tridimensional 92-1, uma unidade de cálculo de ganho tridimensional 92-2, uma unidade de cálculo de ganho tridimensional 92-3, uma unidade de cálculo de ganho tridimensional 92-4 e um somador 93.
[00156] Baseado na informação indicando a posição de imagem sonora alvo e informação selecionada fornecida a partir de uma unidade de seleção de alto-falante 21, a unidade de seleção 91 determina combinações dos três alto-falantes 12 rodeando a posição de imagem sonora alvo, dentre quatro alto-falantes 12 selecionados como os alvos de processamento. A unidade de seleção 91 fornece informação indicando as combinações de alto-falantes 12 e a informação indicando a posição de imagem sonora alvo para as unidades de cálculo de ganho tridimensional 92-1 a 92-4.
[00157] As unidades de cálculo de ganho tridimensional 92-1 a 92-4 executam VBAP tridimensional com base na informação indicando as combinações de alto-falantes 12 e a informação indicando a posição de imagem sonora alvo fornecida a partir da unidade de seleção 91, e fornece os ganhos resultantes dos respectivos alto-falantes 12 ao somador 93. Na descrição abaixo, onde não há necessidade particular de distinguir as três unidades de cálculo de ganho tridimensional 92-1 a 92-4 uma da outra, as unidades de cálculo de ganho tridimensional 92-1 a 92-4 serão referidas simplesmente como unidades de cálculo de ganho tridimensional 92.
[00158] O somador 93 determina somas de ganho com base nos ganhos dos respectivos alto-falantes alvos de processamento 12 fornecidos a partir das unidades de cálculo de ganho tridimensional 92-1 a 92-4, e calcula os ganhos definitivos dos respectivos alto-falantes alvos de processamento 12, normalizando estas somas de ganho. O somador 93 então fornece os ganhos definitivos à unidade de saída de ganho 24.
Descrição de um Processo de Controle de Localização de Som
[00159] Referindo-se agora ao fluxograma na Figura 14, é descrito um processo de controle de localização de som a ser executado em um caso em que a unidade de cálculo de ganho 22 apresenta a estrutura mostrada na Figura 3.
[00160] O procedimento na etapa S41 é o mesmo que o procedimento na etapa S11 na Figura 11 e, portanto, explicação desta não é repetida aqui.
[00161] Na etapa S42, a unidade de seleção 91 determina combinações de alto-falantes 12 com base na informação indicando a posição de imagem sonora alvo e a informação selecionada fornecida a partir da unidade de seleção de alto-falante 21, e fornece informação indicando as combinações dos alto-falantes 12 e a informação indicando a posição de imagem sonora alvo para as unidades de cálculo de ganho tridimensional 92.
[00162] Em um caso em que a posição de imagem sonora alvo é a posição indicada pela seta Q11 na Figura 12, por exemplo, a combinação (a primeira combinação) do alto-falantes 12 incluindo os três alto-falantes 12 equivalentes aos alto-falantes SP1, SP2 e SP4 é determinada. Também, é determinada a combinação (a segunda combinação) dos alto-falantes 12 incluindo os três alto-falantes 12 equivalentes aos alto-falantes SP2, SP3 e SP4.
[00163] Neste caso, a unidade de seleção 91 fornece informação indicando a primeira combinação de alto-falantes 12 e a informação indicando a posição de imagem sonora alvo para a unidade de cálculo de ganho tridimensional 92-1, e fornece informação indicando a segunda combinação de alto-falantes 12 e a informação indicando a posição de imagem sonora alvo para a unidade de cálculo de ganho tridimensional 92-2. Neste caso, a informação indicando a combinação de alto-falantes 12 e similares não é fornecida às unidades de cálculo de ganho tridimensional 92-3 e 92-4, e as unidades de cálculo de ganho tridimensional 92-3 e 92-4 não efetuam qualquer cálculo de VBAP tridimensional.
[00164] Na etapa S43, com base na informação indicando as combinações de alto-falantes 12 e a informação indicando a posição de imagem sonora alvo fornecida a partir da unidade de seleção 91, as unidades de cálculo de ganho tridimensional 92 calculam ganhos dos respectivos alto- falantes 12 nas combinações de alto-falantes 12, e fornecem os ganhos ao somador 93.
[00165] Especificamente, as unidades de cálculo de ganho tridimensional 92 determinam ganho dos respectivos alto-falantes 12 realizando o mesmo procedimento do que o da etapa S13 na Figura 11 com respeito aos três alto-falantes 12, indicados pela informação indicando a combinação de alto-falantes 12. Isto é, o mesmo cálculo que o cálculo descrito acima de acordo com a equação (2) é realizado. O ganho do alto- falante 12 remanescente diferente dos três alto-falantes 12 indicados pela informação indicando a combinação de alto-falantes 12 dentre os quatro alto- falantes alvos de processamento 12 é ajustado em "0".
[00166] Em caso em que duas combinações, a primeira e a segundacombinações, são determinadas na etapa S42, por exemplo, a unidade de cálculo de ganho tridimensional 92-1 calcula ganhos dos respectivos alto- falantes 12 através de VBAP tridimensional com respeito à primeira combinação. A unidade de cálculo de ganho tridimensional 92-2 calcula ganhos dos respectivos alto-falantes 12 através de VBAP tridimensional com respeito à segunda combinação.
[00167] Especificamente, a combinação dos alto-falantes incluindo os três alto-falantes 12 equivalentes aos alto-falantes SP1, SP2 e SP4 mostrados na Figura 12 é determinada como a primeira combinação. Neste caso, a unidade de cálculo de ganho tridimensional 92-1 calcula o ganho g1(1) do alto-falante 12 equivalente ao alto-falante SP1, o ganho g2(1) do alto-falante 12 equivalente ao alto-falante SP2 e o ganho g4(1) do alto-falante 12 equivalente ao alto-falante SP4. Entrementes, o ganho g3(1) do alto-falante 12 equivalente ao alto-falante SP3 é ajustado como "0".
[00168] Na etapa S44, o somador 93 calcula ganhos definitivos dos alto-falantes alvos de processamento 12, com base nos ganhos dos respectivos alto-falantes 12 fornecidos a partir das unidades de cálculo de ganho tridimensional 92, e fornece os ganhos definitivos à unidade de saída de ganho 24.
[00169] Por exemplo, o somador 93 calcula a soma de ganho gs1 do alto-falante 12 equivalente ao alto-falante SP1, determinando a soma dos ganhos g1(1), g1(2), g1(3) e g1(4) do alto-falante 12, os ganhos tendo sido fornecidos a partir das unidades de cálculo de ganho tridimensional 92. De modo similar, o somador 93 também calcula a soma de ganho gs2 do alto- falante 12 equivalente ao alto-falante SP2, a soma de ganho gs3 do alto-falante 12 equivalente ao alto-falante SP3 e a soma de ganho gs4 do alto-falante 12 equivalente ao alto-falante SP4.
[00170] O somador 93 então determina o ganho definitivo g1(coeficiente g1) do alto-falante 12 equivalente ao alto-falante SP1, normalizando a soma de ganho gs1 do alto-falante 12 equivalente ao alto- falante SP1 com a soma de quadrados das somas de ganho gs1 a gs4. O somador 93 também determina os ganhos definitivos g2 a g4 dos alto-falantes 12 equivalentes aos alto-falantes SP2 a SP4, através do mesmo cálculo acima.
[00171] Depois dos ganhos dos alto-falantes alvos de processamento 12 serem determinados da maneira acima, os procedimentos nas etapas S45 e S46, e o processo de controle de localização de som então chega a um final. Entretanto, estes procedimentos são os mesmos que os procedimentos nas etapas S16 e S17 na Figura 11 e, portanto, a explicação destes não é repetida aqui.
[00172] Conforme descrito acima, o aparelho de processamento de som 11 seleciona quatro alto-falantes 12 como alvos de processamento, com base na informação de posição sobre um objeto, e executa VBAP com respeito às combinações dos alto-falante 12, que são três alto-falantes 12 dentre os quatro alto-falantes alvos de processamento 12. O aparelho de processamento de som 11 então determina os ganhos definitivos dos respectivos alto-falantes alvos de processamento 12, determinando a soma de ganhos de cada alto-falante 12, obtida através de VBAP realizado com respeito a diferentes combinações, e executa ajuste de ganho nos sinais sonoros.
[00173] Consequentemente, o som pode ser emitido a partir doa quatro alto-falantes 12 rodeando a posição de imagem sonora alvo, e a localização do som pode ser tornada mais estável. Como um resultado, o alcance do ponto certo pode ser tornado mais amplo.
[00174] Embora um exemplo de caso em que quatro alto-falantes 12 rodeando a posição de imagem sonora alvo são os alto-falantes alvos de processamento 12 tenha sido descrito nesta realização, o número de alto- falantes 12 a serem selecionados como os alvos de processamento pode ser quatro ou maior.
[00175] Por exemplo, em um caso em que cinco alto-falantes 12 são selecionados como os alto-falantes alvos de processamento 12, a combinação de alto-falantes 12 consistindo de três alto-falantes 12 rodeando a posição de imagem sonora alvo é selecionada como uma combinação dentre os cinco alto-falantes 12.
[00176] Especificamente, conforme mostrado na Figura 15, alto- falantes 12 equivalentes a cinco alto-falantes SP1 a SP5 são selecionados como os alto-falantes alvos de processamento 12, e a posição de imagem sonora alvo é a posição indicada por uma seta Q21.
[00177] Neste caso, a combinação dos alto-falantes SP1, SP2 e SP3 é selecionada como uma primeira combinação, e a combinação dos alto-falantes SP1, SP2 e SP4 é selecionada como uma segunda combinação. Também, a combinação dos alto-falantes SP1, SP2 e SP5 é selecionada como uma terceira combinação.
[00178] Ganhos dos respectivos alto-falantes são determinados com respeito à primeira a terceira combinações, e ganhos definitivos são calculados a partir das somas de ganho dos respectivos alto-falantes. Isto é, com respeito à primeira a terceira combinações, o procedimento na etapa S43 na Figura 14 é realizado, e os procedimentos nas etapas S44 a S46 são então executados.
[00179] Conforme descrito acima, em um caso em que cinco ou mais alto-falantes 12 são selecionados como os alto-falantes alvos de processamento 12, também é emitido som a partir de todos os alto-falantes alvos de processamento 12, de tal modo que uma imagem sonora pode ser fixada.
[00180] A série de processos acima descrita pode ser realizada por hard ou pode ser realizada por software. Onde a série de processos deve ser executada por software, o programa que constitui o software é instalado em um computador. Aqui, o computador pode ser um computador incorporado em hard de finalidade geral ou pode ser um computador de finalidade geral que pode executar várias espécies de funções à medida que várias espécies de programas são instaladas nele.
[00181] Figura 16 é um diagrama em blocos mostrando um exemplo de estrutura do hardware de um computador que executa a série de processos acima descritos, de acordo com programas.
[00182] No computador, uma CPU 801, uma ROM 802 e uma RAM 803 são conectadas uma à outra por um barramento 804.
[00183] Uma interface de entrada/saída 805 é conectada adicionalmente ao barramento 804. Uma unidade de entrada 806, uma unidade de saída 807, uma unidade de gravação 808, uma unidade de comunicação 809 e um controlador 810 são conectados à interface de entrada/saída 805.
[00184] A unidade de entrada 806 é formada por um teclado, um mouse, um microfone, um dispositivo de geração de imagem, e similares. A unidade de saída 807 é formada com um visor, um alto-falante e similares. A unidade de gravação 808 é formada por um disco rígido, uma memória não volátil ou similar. A unidade de comunicação 809 é formada com uma interface de rede ou similar. O controlador 810 controla um meio removível 811, tal como um disco magnético, um disco óptico, um disco magneto óptico ou uma memória de semicondutor.
[00185] No computador apresentando a estrutura descrita acima, a CPU 801 carrega um programa gravado na unidade de gravação 808, na RAM 803, via interface de entrada/saída 805 e barramento 804, por exemplo, e executa o programa, de tal modo que a série dos processos acima descritos é executada.
[00186] O programa a ser executado pelo computador (a CPU 801) pode ser gravado sobre o meio removível 811 como um meio de pacote a ser provido, por exemplo. Alternativamente, o programa pode ser provido via meio de transmissão com fio ou sem fio, tal como uma rede de área local, a Internet ou radiodifusão via satélite digital.
[00187] No computador, o programa pode ser instalado na unidade de gravação 808 via interface de entrada/saída 805, quando o meio removível 811 é montado no controlador 810. O programa pode também ser recebido pela unidade de comunicação 809, via um meio de transmissão com fio ou sem fio, e ser instalado na unidade de gravação 808. Alternativamente, o programa pode ser instalado de antemão na ROM 802 ou na unidade de gravação 808.
[00188] O programa a ser executado pelo computador pode ser um programa para realizar processos em ordem cronológica, de acordo com a sequência descrita nesta especificação, ou pode ser um programa para realizar processos em paralelo ou realizar processos quando necessário, tal como quando há uma chamada.
[00189] Deveria ser notado que realizações da presente tecnologia não estão limitadas às modalidades descritas acima, e várias modificações podem ser feitas a elas, sem se afastar do escopo da presente tecnologia.
[00190] Por exemplo, a presente tecnologia pode ser realizada em uma estrutura computacional em nuvem, na qual uma função é compartilhada entre aparelhos, através de uma rede, e o processamento é realizado pelos aparelhos cooperando um com o outro.
[00191] As respectivas etapas descritas com referência aos fluxogramas acima descritos podem ser realizadas por um dispositivo ou podem ser compartilhadas entre dispositivos.
[00192] Em um caso em que mais de um processo está incluído em uma etapa, os processos incluídos na etapa podem ser realizados por um dispositivo ou podem ser compartilhados entre dispositivos.
[00193] Adicionalmente, a presente tecnologia pode assumir as seguintes formas.[1]Um aparelho de processamento de som, incluindo:quatro ou mais unidades de emissão de som;uma unidade de cálculo de ganho que determina ganhos de saída de sons a serem emitidos a partir das quatro ou mais unidades de emissão de som localizadas próximo a uma posição de localização de imagem sonora, como uma posição alvo, calculando ganhos de sons a serem emitidos a partir das unidades de emissão de som, com base em uma relação de posição entre as unidades de emissão de som, com relação a cada uma das combinações diferentes, dentre combinações de duas ou três das quatro ou mais unidades de emissão de som, os ganhos de saída devendo ser utilizados para fixar uma imagem sonora na posição de localização de imagem sonora; euma unidade de ajuste de ganho que executa ajuste de ganho sobre sons a serem emitidos a partir das unidades de emissão de som, com base nos ganhos de saída.[2]O aparelho de processamento de som de [1], onde pelo menos quatro dos ganhos de saída possuem, cada um, um valor diferente de 0.[3]O aparelho de processamento de som de [1] ou [2], onde a unidade de cálculo de ganho inclui:uma primeira unidade de cálculo de ganho que calcula ganhos de saída de uma unidade de emissão de som virtual e duas das unidades de emissão de som, com base em uma relação de posição dentre a unidade de emissão de som virtual, as duas das unidades de emissão de som e a posição de localização de imagem sonora;uma segunda unidade de cálculo de ganho que calcula ganhos de outras duas das unidades de emissão de som além das duas unidades de emissão de som, com base em uma relação de posição entre as outras duas das unidades de emissão de som e a unidade de emissão de som virtual, os ganhos das outras duas das unidades de emissão de som devendo ser usados para fixar uma imagem sonora em uma posição da unidade de emissão de som virtual; euma unidade de cálculo que calcula ganhos de saída dentre as outras duas das unidades de emissão de som, com base nos ganhos das outras duas unidades de emissão de som e o ganho de saída da unidade de emissão de som virtual.[4]O aparelho de processamento de som de [3], onde a unidade de cálculo calcula os ganhos de saída das outras duas entre as unidades de saída de som, multiplicando os ganhos das outras duas das unidades de saída de som pelo ganho de saída da unidade de saída de som virtual.[5]O aparelho de processamento de som de [3] ou [4], onde a posição da unidade de saída de som virtual está de um lado de um quadrilátero apresentando as quatro ou mais unidades de saída de som nos seus vértices.[6]O aparelho de processamento de som de [1] ou [2], onde a unidade de cálculo de ganho inclui:uma unidade de cálculo de ganho virtual que calcula ganhos de saída de três das unidades de emissão de som, com base em uma relação de posição dentre as três unidades de emissão de som e a posição de localização de imagem sonora; euma unidade de cálculo que calcula ganhos de saída definitivos das unidades de emissão de som, com base nos ganhos de saída calculados pela unidade de cálculo de ganho virtual, calculando os ganhos de saída com relação a diferentes combinações dentre as combinações.[7]O aparelho de processamento de som de [6], onde a unidade de cálculo calcula um ganho de saída definitivo da mesma das unidades de saída de som, determinando uma soma dos ganhos de saída determinada com respeito à mesma das unidades de saída de som.LISTA DE SINAIS DE REFERÊNCIA[11] Aparelho de processamento de som12-1 a 12-N, e 12 Alto-falante21 Unidade de seleção de alto-falante22 Unidade de cálculo de ganho25 Unidade de ajuste de ganho61 Unidade de determinação de posição de alto-falante virtual62 Unidade de cálculo de ganho tridimensional63 Unidade de cálculo de ganho bidimensional64 Multiplicador65 Multiplicador91 Unidade de seleção92-1 a 92-4 e 92 Unidade de cálculo de ganho tridimensional93 Somador

Claims (7)

1. Aparelho de processamento de som (11), o qual compreende: pelo menos quatro unidades de emissão de som ou alto-falantes (SP1, SP2, SP3, SP4);unidade de cálculo de ganho (22) configurada para determinar ganhos de saída definitivos de sons a serem emitidos daquelas pelo menos quatro unidades de emissão de som ou alto-falantes (SP1, SP2, SP3, SP4), os ganhos de saída definitivos sendo determinados com base em uma relação de posição entre as unidades de emissão de som ou alto-falantes (SP1, SP2, SP3, SP4) com relação a cada uma de diferentes combinações dentre uma pluralidade de combinações de três de tais pelo menos quatro unidades de emissão de som ou alto-falantes (SP1, SP2, SP3, SP4), aquelas pelo menos quatro unidades de emissão de som ou alto- falantes (SP1, SP2, SP3, SP4) estando arranjadas para rodear uma posição de localização de imagem sonora, a posição de localização de imagem sonora sendo uma posição alvo para uma imagem sonora, os ganhos de saída definitivos sendo usados para fixar a imagem sonora na posição de localização de imagem sonora; euma unidade de ajuste de ganho (25) configurada para executar ajuste de ganho em sons a serem emitidos das unidades de emissão de som ou alto-falantes (SP1, SP2, SP3, SP4) com base nos ganhos de saída definitivos, caracterizado pelo fato de que inclui adicionalmente:unidade de determinação de posição de alto-falante virtual (61) configurada para determinar uma posição de um alto-falante virtual, com base em posições daqueles pelo menos quatro alto-falantes (SP1, SP2, SP3, SP4); e unidade de cálculo de ganho de alto-falante virtual configurada para calcular um ganho do alto-falante virtual pelo menos ao executar VBAP tridimensional com base em uma relação de posição entre o alto-falante virtual, dois alto-falantes de tais pelo menos quatro alto-falantes (SP1, SP2, SP3, SP4), e uma posição de localização de imagem sonora; em que a unidade de ajuste de ganho (25) é configurada para executar ainda ajuste de ganho em sons a serem emitidos daqueles pelo menos dois alto-falantes com base no ganho do alto-falante virtual, em que ditos pelo menos quatro alto-falantes (SP1, SP2, SP3, SP4) são configurados para emitir sons a um ouvinte de acordo com a saída da unidade de ajuste de ganho (25).
2. Aparelho de processamento de som (11), de acordo com a reivindicação 1, caracterizado pelo fato de ganhos daqueles pelo menos quatro alto-falantes (SP1, SP2, SP3, SP4) terem, cada um, um valor diferente de 0.
3. Aparelho de processamento de som (11), de acordo com a reivindicação 2, caracterizado pelo fato de que a unidade de cálculo de ganho de alto-falante virtual é ainda configurada para calcular ganhos dos dois alto- falantes daqueles pelo menos quatro alto-falantes (SP1, SP2, SP3, SP4), com base na relação de posição entre o alto-falante virtual, os dois alto-falantes dos pelo menos dois alto-falantes, e a posição de localização de imagem sonora, eem que o aparelho de processamento de som (11) compreende adicionalmente:outra unidade de cálculo de ganho configurada para calcular ganhos de outros dois alto-falantes de ditos pelo menos quatro alto-falantes (SP1, SP2, SP3, SP4) diferentes dos dois alto-falantes daqueles pelo menos quatro alto- falantes (SP1, SP2, SP3, SP4), com base numa relação de posição entre os outros dois alto-falantes e o alto-falante virtual, os ganhos dos outros dois alto-falantes a serem usados para fixar uma imagem sonora na posição do alto-falante virtual; eunidade de cálculo configurada para calcular ganhos de saída dos outros dois alto-falantes, com base nos ganhos dos outros dois alto-falantes e em um ganho de saída da unidade de emissão de som virtual.unidade de cálculo configurada para calcular ganhos de saída dos outros dois alto-falantes, com base nos ganhos dos outros dois alto-falantes e em um ganho de saída da unidade de emissão de som virtual.
4. Aparelho de processamento de som (11), de acordo com a reivindicação 3, caracterizado pelo fato de a unidade de cálculo ser configurada para calcular os ganhos de saída das outras duas das unidades de emissão de som multiplicando os ganhos das outras duas das unidades de emissão de som pelo ganho de saída da unidade de emissão de som virtual.
5. Aparelho de processamento de som (11), de acordo com a reivindicação 3, caracterizado pelo fato de que a posição do alto-falante virtual está em um lado de um polígono que apresenta as pelo menos quatro unidades de emissão de som ou alto-falantes (SP1, SP2, SP3, SP4) em seus vértices.
6. Aparelho de processamento de som (11), o qual compreende: pelo menos quatro unidades de emissão de som ou alto-falantes (SP1, SP2, SP3, SP4);unidade de cálculo de ganho (22) configurada para determinar ganhos de saída definitivos de sons a serem emitidos daquelas pelo menos quatro unidades de emissão de som ou alto-falantes (SP1, SP2, SP3, SP4), os ganhos de saída definitivos sendo determinados com base em uma relação de posição entre as unidades de emissão de som ou alto-falantes (SP1, SP2, SP3, SP4) com relação a cada uma de diferentes combinações dentre uma pluralidade de combinações de três de tais pelo menos quatro unidades de emissão de som ou alto-falantes (SP1, SP2, SP3, SP4), aquelas pelo menos quatro unidades de emissão de som ou alto- falantes (SP1, SP2, SP3, SP4) estando arranjadas para rodear uma posição de localização de imagem sonora, a posição de localização de imagem sonora sendo uma posição alvo para uma imagem sonora, os ganhos de saída definitivos sendo usados para fixar a imagem sonora na posição de localização de imagem sonora; euma unidade de ajuste de ganho (25) configurada para executar ajuste de ganho em sons a serem emitidos das unidades de emissão de som ou alto-falantes (SP1, SP2, SP3, SP4) com base nos ganhos de saída definitivos, caracterizado pelo fato de que inclui adicionalmente: unidade de determinação de posição de alto-falante virtual (61) configurada para determinar uma posição de um alto-falante virtual, com base em posições dos quatro alto-falantes (SP1, SP2, SP3, SP4) localizados próximos do alto-falante virtual; eunidade de cálculo de ganho de alto-falante virtual configurada para calcular um ganho do alto-falante virtual ao executar VBAP tridimensional, com relação ao alto-falante virtual e aos dois alto-falantes dentre os quatro alto- falantes (SP1, SP2, SP3, SP4), com base numa relação de posição entre o alto- falante virtual, os dois alto-falantes, e uma posição de localização de imagem sonora;em que a unidade de ajuste de ganho (25) é configurada para executar ainda ajuste de ganho em sons a serem emitidos daqueles pelo menos dois alto-falantes com base no ganho do alto-falante virtual, e para emitir um resultado do ajuste de ganho para fazer com que os quatro alto-falantes (SP1, SP2, SP3, SP4) emitam sons a um ouvinte de acordo com o resultado do ajuste de ganho.
7. Método de processamento de som, compreendendo etapas de: calcular ganhos de saída definitivos de sons a serem emitidos de pelo menos quatro unidades de emissão de som ou alto-falantes (SP1, SP2, SP3, SP4), os ganhos de saída definitivos sendo calculados com base em uma relação de posição entre as unidades de emissão de som ou alto-falantes (SP1, SP2, SP3, SP4) com relação a cada uma de diferentes combinações dentre uma pluralidade de combinações de três das pelo menos quatro unidades de emissão de som ou alto-falantes (SP1, SP2, SP3, SP4), as pelo menos quatro unidades de emissão de som ou alto-falantes (SP1, SP2, SP3, SP4) estando arranjadas para rodear uma posição de localização de imagem sonora, a posição de localização de imagem sonora sendo uma posição alvo para uma imagem sonora, os ganhos de saída definitivos sendo usados para fixar a imagem sonora na posição de localização de imagem sonora; e executar ajuste de ganho em sons a serem emitidos a partir das unidades de emissão de som ou alto-falantes (SP1, SP2, SP3, SP4) com base nos ganhos de saída definitivos,caracterizado pelo fato de incluir adicionalmente as etapas de:determinar uma posição de um alto-falante virtual, com base em posições dos quatro alto-falantes (SP1, SP2, SP3, SP4) localizados próximos do alto-falante virtual;calcular um ganho do alto-falante virtual por execução de VBAP tridimensional com relação ao alto-falante virtual e a dois alto-falantes dentre os quatro alto-falantes (SP1, SP2, SP3, SP4), com base em uma relação de posição entre o alto-falante virtual, os dois alto-falantes, e uma posição de localização de imagem sonora;executar ajuste de ganho adicional em sons a serem emitidos a partir daqueles pelo menos dois alto-falantes com base no ganho do alto-falante virtual; efazer com que aqueles quatro alto-falantes (SP1, SP2, SP3, SP4) emitam sons a um ouvinte de acordo com um resultado do ajuste de ganho.
BR112015026501-4A 2013-04-26 2014-04-11 Aparelho e método de processamento de som BR112015026501B1 (pt)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013094269 2013-04-26
JP2013-094269 2013-04-26
PCT/JP2014/060460 WO2014175076A1 (ja) 2013-04-26 2014-04-11 音声処理装置および音声処理システム

Publications (2)

Publication Number Publication Date
BR112015026501A2 BR112015026501A2 (pt) 2017-07-25
BR112015026501B1 true BR112015026501B1 (pt) 2022-02-15

Family

ID=51791656

Family Applications (1)

Application Number Title Priority Date Filing Date
BR112015026501-4A BR112015026501B1 (pt) 2013-04-26 2014-04-11 Aparelho e método de processamento de som

Country Status (9)

Country Link
US (6) US10171926B2 (pt)
EP (2) EP2991383B1 (pt)
JP (4) JP6384735B2 (pt)
KR (5) KR102547902B1 (pt)
CN (2) CN105122846B (pt)
BR (1) BR112015026501B1 (pt)
RU (2) RU2655994C2 (pt)
TW (1) TWI666945B (pt)
WO (1) WO2014175076A1 (pt)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2991383B1 (en) 2013-04-26 2021-01-27 Sony Corporation Audio processing device and audio processing system
EP4329338A3 (en) * 2013-04-26 2024-05-22 Sony Group Corporation Audio processing device, method, and program
WO2015012122A1 (ja) 2013-07-24 2015-01-29 ソニー株式会社 情報処理装置および方法、並びにプログラム
GB2523353B (en) * 2014-02-21 2017-03-01 Jaguar Land Rover Ltd System for use in a vehicle
CN108141684B (zh) 2015-10-09 2021-09-24 索尼公司 声音输出设备、声音生成方法以及记录介质
JP6933215B2 (ja) * 2016-07-05 2021-09-08 ソニーグループ株式会社 音場形成装置および方法、並びにプログラム
US9820073B1 (en) 2017-05-10 2017-11-14 Tls Corp. Extracting a common signal from multiple audio signals
KR102561608B1 (ko) 2017-12-12 2023-08-01 소니그룹주식회사 신호 처리 장치 및 방법, 그리고 프로그램
CN113852892B (zh) * 2021-09-07 2023-02-28 歌尔科技有限公司 音频系统及其控制方法、装置

Family Cites Families (56)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5404406A (en) * 1992-11-30 1995-04-04 Victor Company Of Japan, Ltd. Method for controlling localization of sound image
US5598478A (en) * 1992-12-18 1997-01-28 Victor Company Of Japan, Ltd. Sound image localization control apparatus
US5761315A (en) * 1993-07-30 1998-06-02 Victor Company Of Japan, Ltd. Surround signal processing apparatus
WO2004103023A1 (ja) * 1995-09-26 2004-11-25 Ikuichiro Kinoshita 仮想音像定位用伝達関数表作成方法、その伝達関数表を記録した記憶媒体及びそれを用いた音響信号編集方法
US7231054B1 (en) 1999-09-24 2007-06-12 Creative Technology Ltd Method and apparatus for three-dimensional audio display
US20040062402A1 (en) 2002-07-19 2004-04-01 Yamaha Corporation Audio reproduction apparatus
JP4257079B2 (ja) * 2002-07-19 2009-04-22 パイオニア株式会社 周波数特性調整装置および周波数特性調整方法
DE10328335B4 (de) * 2003-06-24 2005-07-21 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Wellenfeldsyntesevorrichtung und Verfahren zum Treiben eines Arrays von Lautsprechern
KR100608002B1 (ko) 2004-08-26 2006-08-02 삼성전자주식회사 가상 음향 재생 방법 및 그 장치
EP1691348A1 (en) * 2005-02-14 2006-08-16 Ecole Polytechnique Federale De Lausanne Parametric joint-coding of audio sources
WO2007028094A1 (en) 2005-09-02 2007-03-08 Harman International Industries, Incorporated Self-calibrating loudspeaker
JP2007142875A (ja) 2005-11-18 2007-06-07 Sony Corp 音響特性補正装置
JP5010185B2 (ja) 2006-06-08 2012-08-29 日本放送協会 3次元音響パンニング装置
CN101401456B (zh) * 2006-03-13 2013-01-02 杜比实验室特许公司 呈现中央声道音频的方法和装置
JP4928177B2 (ja) 2006-07-05 2012-05-09 日本放送協会 音像形成装置
US8103006B2 (en) * 2006-09-25 2012-01-24 Dolby Laboratories Licensing Corporation Spatial resolution of the sound field for multi-channel audio playback systems by deriving signals with high order angular terms
ATE539434T1 (de) * 2006-10-16 2012-01-15 Fraunhofer Ges Forschung Vorrichtung und verfahren für mehrkanalparameterumwandlung
US20080232601A1 (en) * 2007-03-21 2008-09-25 Ville Pulkki Method and apparatus for enhancement of audio reconstruction
JP4530007B2 (ja) * 2007-08-02 2010-08-25 ヤマハ株式会社 音場制御装置
JP5050721B2 (ja) 2007-08-06 2012-10-17 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
JP4780119B2 (ja) 2008-02-15 2011-09-28 ソニー株式会社 頭部伝達関数測定方法、頭部伝達関数畳み込み方法および頭部伝達関数畳み込み装置
JP2009206691A (ja) 2008-02-27 2009-09-10 Sony Corp 頭部伝達関数畳み込み方法および頭部伝達関数畳み込み装置
CN101640831A (zh) * 2008-07-28 2010-02-03 深圳华为通信技术有限公司 一种扬声器阵列设备及其驱动方法
JP5401864B2 (ja) * 2008-08-01 2014-01-29 ヤマハ株式会社 音響装置及びプログラム
JP4735993B2 (ja) 2008-08-26 2011-07-27 ソニー株式会社 音声処理装置、音像定位位置調整方法、映像処理装置及び映像処理方法
KR101542233B1 (ko) 2008-11-04 2015-08-05 삼성전자 주식회사 화면음원 정위장치, 화면음원 정위를 위한 스피커 셋 정보 생성방법 및 정위된 화면음원 재생방법
KR101038574B1 (ko) 2009-01-16 2011-06-02 전자부품연구원 3차원 오디오 음상 정위 방법과 장치 및 이와 같은 방법을 구현하는 프로그램이 기록되는 기록매체
JP2010252220A (ja) 2009-04-20 2010-11-04 Nippon Hoso Kyokai <Nhk> 3次元音響パンニング装置およびそのプログラム
JP5540581B2 (ja) 2009-06-23 2014-07-02 ソニー株式会社 音声信号処理装置および音声信号処理方法
JP5324663B2 (ja) 2009-11-02 2013-10-23 パナソニック株式会社 音響信号処理装置および音響信号処理方法
EP2478716B8 (en) * 2009-11-04 2014-01-08 Fraunhofer Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for calculating driving coefficients for loudspeakers of a loudspeaker arrangement for an audio signal associated with a virtual source
KR101268779B1 (ko) 2009-12-09 2013-05-29 한국전자통신연구원 라우드 스피커 어레이를 사용한 음장 재생 장치 및 방법
US8718290B2 (en) 2010-01-26 2014-05-06 Audience, Inc. Adaptive noise reduction using level cues
KR101673232B1 (ko) * 2010-03-11 2016-11-07 삼성전자주식회사 수직 방향 가상 채널을 생성하는 장치 및 그 방법
CN102823277B (zh) * 2010-03-26 2015-07-15 汤姆森特许公司 解码用于音频回放的音频声场表示的方法和装置
JP5533248B2 (ja) 2010-05-20 2014-06-25 ソニー株式会社 音声信号処理装置および音声信号処理方法
JP2012004668A (ja) 2010-06-14 2012-01-05 Sony Corp 頭部伝達関数生成装置、頭部伝達関数生成方法及び音声信号処理装置
KR20120004909A (ko) 2010-07-07 2012-01-13 삼성전자주식회사 입체 음향 재생 방법 및 장치
JP2012104871A (ja) 2010-11-05 2012-05-31 Sony Corp 音響制御装置及び音響制御方法
JP5787128B2 (ja) 2010-12-16 2015-09-30 ソニー株式会社 音響システム、音響信号処理装置および方法、並びに、プログラム
EP2503800B1 (en) 2011-03-24 2018-09-19 Harman Becker Automotive Systems GmbH Spatially constant surround sound
JP5118267B2 (ja) 2011-04-22 2013-01-16 パナソニック株式会社 音声信号再生装置、音声信号再生方法
RU2554523C1 (ru) * 2011-07-01 2015-06-27 Долби Лабораторис Лайсэнзин Корпорейшн Система и инструментальные средства для усовершенствованной авторской разработки и представления трехмерных аудиоданных
TWI603632B (zh) * 2011-07-01 2017-10-21 杜比實驗室特許公司 用於適應性音頻信號的產生、譯碼與呈現之系統與方法
JP5845760B2 (ja) 2011-09-15 2016-01-20 ソニー株式会社 音声処理装置および方法、並びにプログラム
CN102711032B (zh) 2012-05-30 2015-06-03 蒋憧 一种声音处理再现装置
WO2013181272A2 (en) * 2012-05-31 2013-12-05 Dts Llc Object-based audio system using vector base amplitude panning
JP2014022959A (ja) 2012-07-19 2014-02-03 Sony Corp 信号処理装置、信号処理方法、プログラムおよびスピーカシステム
US9736609B2 (en) 2013-02-07 2017-08-15 Qualcomm Incorporated Determining renderers for spherical harmonic coefficients
EP2979467B1 (en) * 2013-03-28 2019-12-18 Dolby Laboratories Licensing Corporation Rendering audio using speakers organized as a mesh of arbitrary n-gons
EP2991383B1 (en) 2013-04-26 2021-01-27 Sony Corporation Audio processing device and audio processing system
EP4329338A3 (en) 2013-04-26 2024-05-22 Sony Group Corporation Audio processing device, method, and program
WO2015012122A1 (ja) 2013-07-24 2015-01-29 ソニー株式会社 情報処理装置および方法、並びにプログラム
CN108141684B (zh) 2015-10-09 2021-09-24 索尼公司 声音输出设备、声音生成方法以及记录介质
JP6600773B1 (ja) 2018-08-27 2019-11-06 郡司 賢一 虫取り器
JP6836632B2 (ja) 2019-03-08 2021-03-03 シチズン時計株式会社 携帯機器および携帯機器システム

Also Published As

Publication number Publication date
CN105122846B (zh) 2018-01-30
US11412337B2 (en) 2022-08-09
RU2015144894A3 (pt) 2018-03-20
US20220095066A1 (en) 2022-03-24
CN108064014A (zh) 2018-05-22
JP2018191336A (ja) 2018-11-29
JP6795015B2 (ja) 2020-12-02
RU2018117716A3 (pt) 2021-07-13
CN105122846A (zh) 2015-12-02
TWI666945B (zh) 2019-07-21
JP7060048B2 (ja) 2022-04-26
RU2655994C2 (ru) 2018-05-30
RU2018117716A (ru) 2018-10-29
US10171926B2 (en) 2019-01-01
US20220303704A1 (en) 2022-09-22
RU2015144894A (ru) 2017-04-27
US20190306648A1 (en) 2019-10-03
TW201513687A (zh) 2015-04-01
EP2991383A4 (en) 2016-12-14
KR102547902B1 (ko) 2023-06-28
KR20160003659A (ko) 2016-01-11
US11968516B2 (en) 2024-04-23
US20230247379A1 (en) 2023-08-03
US20160080883A1 (en) 2016-03-17
US11272306B2 (en) 2022-03-08
EP3840421A1 (en) 2021-06-23
US10455345B2 (en) 2019-10-22
KR20210145857A (ko) 2021-12-02
KR102160506B1 (ko) 2020-09-28
RU2764884C2 (ru) 2022-01-24
KR20220098040A (ko) 2022-07-08
EP2991383A1 (en) 2016-03-02
KR20230098698A (ko) 2023-07-04
US20180184222A1 (en) 2018-06-28
JP2022092038A (ja) 2022-06-21
KR20200111831A (ko) 2020-09-29
KR102414609B1 (ko) 2022-06-30
JPWO2014175076A1 (ja) 2017-02-23
CN108064014B (zh) 2020-11-06
WO2014175076A1 (ja) 2014-10-30
JP2020198644A (ja) 2020-12-10
KR102332968B1 (ko) 2021-12-01
EP2991383B1 (en) 2021-01-27
BR112015026501A2 (pt) 2017-07-25
JP6384735B2 (ja) 2018-09-05

Similar Documents

Publication Publication Date Title
BR112015026501B1 (pt) Aparelho e método de processamento de som
US10587976B2 (en) Sound processing apparatus and method, and program
JP2024075689A (ja) 音響処理装置および方法、並びにプログラム

Legal Events

Date Code Title Description
B06F Objections, documents and/or translations needed after an examination request according [chapter 6.6 patent gazette]
B06U Preliminary requirement: requests with searches performed by other patent offices: procedure suspended [chapter 6.21 patent gazette]
B350 Update of information on the portal [chapter 15.35 patent gazette]
B09A Decision: intention to grant [chapter 9.1 patent gazette]
B16A Patent or certificate of addition of invention granted [chapter 16.1 patent gazette]

Free format text: PRAZO DE VALIDADE: 20 (VINTE) ANOS CONTADOS A PARTIR DE 11/04/2014, OBSERVADAS AS CONDICOES LEGAIS.

B09W Correction of the decision to grant [chapter 9.1.4 patent gazette]

Free format text: RETIFICACAO DO DESPACHO 9.1, NOTIFICADO NA RPI 2660, DE 28/12/2021