BR112018000489B1

BR112018000489B1 - Aparelho e método para processamento de informação, e, programa

Info

Publication number: BR112018000489B1
Application number: BR112018000489-8A
Authority: BR
Inventors: Minoru Tsuji; Toru Chinen
Original assignee: Sony Corporation
Priority date: 2015-07-16
Filing date: 2016-07-01
Publication date: 2022-12-27
Also published as: WO2017010313A1; JP2020171047A; JPWO2017010313A1; KR20180008871A; RU2721750C2; AU2019204504A1; CN113055801A; EP3324653A4; CN113055803B; CN113055802A; CN113055802B; AU2019204504B2; CN113055803A; US10623884B2; BR112018000489A2; US10645523B2; US20190306653A1; RU2018100009A3; EP3324653B1; CN107852561B

Abstract

APARELHO E MÉTODO PARA PROCESSAMENTO DE INFORMAÇÃO, E, PROGRAMA. Esta tecnologia refere- se a um aparelho para processamento de informação e a um método que permitem o remapeamento apropriado, bem como a um programa para tal. Uma unidade de cálculo do ângulo de deslocamento calcula uma quantidade de deslocamento em uma posição de uma tela de referência a partir de uma posição de referência na direção frontal de um usuário, e uma unidade de correção da informação de posição corrige, com base na quantidade de deslocamento, as posições de objetos de áudio em relação à posição de referência para corresponder à posição da tela de referência. Uma unidade de remapeamento de objeto remapeia as posições dos objetos de áudio para corresponder à posição de uma tela de reprodução com base nas posições corrigidas dos objetos de áudio. Esta tecnologia pode ser aplicada em um aparelho para processamento de informação.

Description

Campo Técnico

[001] A presente técnica refere-se a um aparelho para processamento de informação, a um método para processamento de informação e a um programa e, particularmente, refere-se a um aparelho para processamento de informação, a um método para processamento de informação e a um programa capazes de realizar remapeamento apropriado.

Fundamentos da Técnica

[002] Convencionalmente, uma técnica de Remapeamento de Elemento de Objeto Relacionado a Tela foi adotada no padrão “Áudio 3D” ISO/IEC 23008-3 (veja, por exemplo, NPL 1).

[003] De acordo com esta técnica, na renderização e na reprodução do áudio do objeto, as posições de objetos de áudio são remapeadas (relocadas), dependendo da informação da tela de referência que indica uma posição e uma magnitude de uma tela de referência que serve como uma referência e da informação da tela de reprodução que indica uma posição e uma magnitude de uma tela de reprodução realmente reproduzida. Fazendo isto, se a reprodução de imagem for realizada de maneira tal que, por exemplo, os objetos na tela de referência sejam exibidos na tela de reprodução com uma relação posicional restando inalterada, é possível localizar imagens de áudio destes objetos nas mesmas posições dos objetos na tela de referência. Lista de Citação Literatura Não Patente

[004] NPL 1 ISO/IEC DIS 23008-3 “Information technology-High efficiency coding and media delivery in heterogeneous environments-Part 3: 3D audio”

Sumário da Invenção Problema Técnico

[005] Neste particular, a técnica exposta tem premissa no fato de que uma posição central da tela de referência é colocada na frente de um usuário em um espaço de reprodução. Entretanto, em um caso como este, como quando uma imagem onidirecional, por exemplo, que exibe uma imagem em todas as direções de 360° for reproduzida ou quando uma parte da íntegra de uma imagem for sujeita à reprodução em aproximação, a posição central da tela de referência não é sempre colocada na frente do usuário, dependendo das situações.

[006] Em um caso como este, quando as posições dos objetos de áudio forem remapeadas pela técnica exposta, as posições depois do remapeamento são distorcidas. Isto é, uma distorção ocorre em uma relação posicional entre os objetos de áudio fora da tela de reprodução, e remapeamento apropriado não pode ser realizado.

[007] A presente técnica foi feita à luz destas situações e um objetivo da mesma é poder realizar remapeamento apropriado.

Solução para o Problema

[008] Um aparelho para processamento de informação de acordo com um aspecto do presente técnica inclui uma seção de cálculo de deslocamento que calcula uma quantidade de deslocamento de uma posição de uma tela de referência a partir de uma posição de referência presente em uma direção frontal de um usuário, uma seção de correção de posição que corrige uma posição de um objeto de áudio referida com a posição de referência, em conformidade com a posição da tela de referência, com base na quantidade de deslocamento, e uma seção de remapeamento que remapeia a posição do objeto de áudio em conformidade com uma posição de uma tela de reprodução com base na posição corrigida do objeto de áudio.

[009] Pode-se fazer com que a seção de cálculo de deslocamento corrija a quantidade de deslocamento em um valor de correção predeterminado quando a tela de referência for colocada em uma direção para trás do usuário.

[0010] Pode-se fazer com que a seção de correção de posição ajuste um valor de correção usado durante a correção da posição do objeto de áudio quando um alcance de informação que indica a posição do objeto de áudio for especificado como um alcance em um alcance predeterminado.

[0011] Pode-se fazer com que a seção de correção de posição corrija a posição da tela de referência com base na quantidade de deslocamento, e pode-se fazer com que a seção de remapeamento remapeie a posição do objeto de áudio com base na posição corrigida da tela de referência e na posição corrigida do objeto de áudio.

[0012] Um método para processamento de informação ou um programa de acordo com um aspecto do presente técnica incluem as etapas de calcular uma quantidade de deslocamento de uma posição de uma tela de referência a partir de uma posição de referência presente em uma direção frontal de um usuário, corrigir uma posição de um objeto de áudio referida com a posição de referência, em conformidade com a posição da tela de referência, com base na quantidade de deslocamento, e remapear a posição do objeto de áudio em conformidade com uma posição de uma tela de reprodução com base na posição corrigida do objeto de áudio.

[0013] De acordo com um aspecto da presente técnica, uma quantidade de deslocamento de uma posição de uma tela de referência a partir de uma posição de referência presente em uma direção frontal de um usuário é calculada, uma posição de um objeto de áudio referida com a posição de referência é corrigida em conformidade com a posição da tela de referência com base na quantidade de deslocamento, e a posição do objeto de áudio é remapeada em conformidade com uma posição de uma tela de reprodução com base na posição corrigida do objeto de áudio.

Efeito Vantajoso da Invenção

[0014] De acordo com um aspecto da presente técnica, é possível realizar remapeamento apropriado.

[0015] Percebe-se que os efeitos não são sempre limitados àqueles aqui descritos, mas podem ser qualquer um dos efeitos descritos na presente descrição.

Breve Descrição dos Desenhos

[0016] A figura 1 representa relações posicionais entre objetos antes e depois do remapeamento.

[0017] A figura 2 representa um exemplo da informação da tela de referência, da informação da posição de objeto e da informação da tela de reprodução.

[0018] A figura 3 é um diagrama explicativo de uma mudança nas posições horizontais pelo remapeamento.

[0019] A figura 4 representa um exemplo da informação da posição de objeto depois do remapeamento.

[0020] A figura 5 representa um exemplo da informação da tela de referência, da informação da posição de objeto e da informação da tela de reprodução.

[0021] A figura 6 representa um exemplo da informação da posição de objeto depois do remapeamento.

[0022] A figura 7 representa as relações posicionais entre objetos antes e depois do remapeamento.

[0023] A figura 8 representa um exemplo de uma configuração de um aparelho para processamento de informação.

[0024] A figura 9 representa um exemplo da informação da posição de objeto depois do remapeamento.

[0025] A figura 10 representa relações posicionais entre objetos antes e depois do remapeamento.

[0026] A figura 11 é um fluxograma para explicar um processo de remapeamento.

[0027] A figura 12 representa um exemplo da informação da tela de referência, da informação da posição de objeto e da informação da tela de reprodução.

[0028] A figura 13 representa um exemplo da informação da posição de objeto depois do remapeamento.

[0029] A figura 14 representa relações posicionais entre objetos antes e depois do remapeamento.

[0030] A figura 15 representa um exemplo da informação da tela de referência, da informação da posição de objeto e da informação da tela de reprodução.

[0031] A figura 16 representa um exemplo da informação da posição de objeto depois do remapeamento.

[0032] A figura 17 representa relações posicionais entre objetos antes e depois do remapeamento.

[0033] A figura 18 representa um exemplo de uma configuração de um aparelho para processamento de informação.

[0034] A figura 19 é um fluxograma para explicar um processo de remapeamento.

[0035] A figura 20 representa um exemplo de uma configuração de um computador.

Descrição das Modalidades

[0036] Modalidades nas quais a presente técnica é aplicada serão descritas a seguir em relação aos desenhos. <Primeira Modalidade> <Remapeamento> A presente técnica pretende poder realizar remapeamento apropriado quando reprodução de áudio for realizada pela aquisição de um sinal de áudio de cada objeto de áudio e metadados, tal como a informação da posição de objeto que indica uma posição do objeto de áudio. Percebe-se que o objeto de áudio é, frequentemente, simplesmente referido como “objeto”, a seguir.

[0037] Por exemplo, quando um conteúdo for reproduzido, um fluxo contínuo de bits para reproduzir o conteúdo que inclui uma imagem dinâmica e sons que acompanham a imagem dinâmica é inserido em um lado de reprodução de conteúdo. Este fluxo contínuo de bits é obtido pela multiplexação, por exemplo, de sinais de vídeo para reproduzir uma imagem dinâmica, um sinal de áudio para reproduzir um som de cada objeto, e várias peças de informação, tais como metadados de cada objeto e informação da tela de referência que indica uma posição e uma magnitude de uma tela de referência usada como uma referência. Os metadados também incluem pelo menos informação da posição de objeto que indica uma posição de cada objeto em um espaço de reprodução.

[0038] A informação da tela de reprodução que indica uma posição e uma magnitude de uma tela de reprodução (tela de exibição), que é uma tela realmente usada para reproduzir o conteúdo, no espaço de reprodução também é suprida para o lado de reprodução de conteúdo. Então, em um momento da reprodução de conteúdo, o remapeamento da posição de cada objeto indicado pela informação da posição de objeto é realizado com base na informação da tela de referência e na informação da tela de reprodução.

[0039] Especificamente, o remapeamento das posições de objeto é realizado da forma representada, por exemplo, na figura 1.

[0040] Da forma indicada por uma seta A11, considera-se que seis objetos OBJ1 até OBJ6 estão localizados de uma maneira tal para circundar um usuário virtual U11 presente em uma posição de uma origem O do espaço de reprodução. Aqui, o objeto OBJ1 até o objeto OBJ6 estão localizados em posições no espaço de reprodução indicado pela informação da posição de objeto incluída nos metadados.

[0041] Além do mais, a informação da tela de referência define uma tela de referência RSC11 como uma tela usada como uma referência. Neste exemplo, a tela de referência RSC11 é colocada em uma direção frontal do usuário U11. Note que se considera que o usuário U11 encara uma direção na qual a tela de referência RSC11 está presente, isto é, a direção frontal.

[0042] Quando o objeto OBJ1 até o objeto OBJ6 e a tela de referência RSC11 forem visualizadas em uma direção do topo para a base em uma vista indicada pela seta A11, as posições localizadas dos mesmos são representadas em uma vista indicada por uma seta A12.

[0043] Neste exemplo, o objeto OBJ1 e o objeto OBJ2 são, em particular, colocados na tela de referência RSC11. Além do mais, o objeto OBJ1, o objeto OBJ3 e o objeto OBJ5 estão localizados para ficar bilateralmente simétricos com o objeto OBJ2, o objeto OBJ4 e o objeto OBJ6 em uma direção horizontal quando são visualizados a partir do usuário U11.

[0044] Portanto, supondo que a imagem dinâmica que constitui o conteúdo é reproduzida na tela de referência RSC11, apenas o objeto OBJ1 e o objeto OBJ2 são exibidos dentre os seis objetos na tela de referência RSC11.

[0045] Agora, na vista indicada pela seta A12, considera-se que a direção frontal quando visualizada a partir do usuário U11, isto é, uma direção para cima na vista, é uma direção positiva de um eixo geométrico x, uma direção para a direita quando visualizada a partir do usuário U11 é uma direção positiva de um eixo geométrico y, e uma direção do zênite quando visualizada a partir do usuário U11, isto é, uma direção de um lado próximo na vista é uma direção positiva de um eixo geométrico z.

[0046] Também é considerado que um sistema de coordenadas tridimensional que usa a origem O como uma origem e com o eixo geométrico x, o eixo geométrico y e o eixo geométrico z é um sistema de coordenadas xyz. É adicionalmente considerado que cada objeto e a tela de referência RSC11 estão localizados em uma esfera unitária cujo centro é a origem O e cujo raio está a uma distância predeterminada r (a seguir, também referido como “raio r”) a partir da origem O. Aqui, o raio r é, por exemplo, 1.

[0047] Neste caso, considera-se que as posições indicadas pela informação da posição de objeto e pela informação da tela de referência são, cada qual, representadas por um ângulo horizontal Azimute que é um ângulo em relação ao eixo geométrico x em um plano xy e um ângulo perpendicular Elevação que é um ângulo em relação ao eixo geométrico x em um plano xz. Note que, mais especificamente, o ângulo perpendicular Elevação é o ângulo formado entre uma linha que conecta uma posição de interesse, tal como a posição de cada objeto, na origem O e no plano xy. É adicionalmente considerado que as posições indicadas pela informação da tela de reprodução são, similarmente, cada qual, representadas por um ângulo horizontal Azimute e um ângulo perpendicular Elevação.

[0048] Aqui, quanto ao ângulo horizontal Azimute, considera-se que a direção positiva do eixo geométrico x está em um ângulo horizontal Azimute = 0°, um sentido horário na vista indicada pela seta A12 é uma direção negativa do ângulo horizontal Azimute, e um sentido anti-horário é uma direção positiva do ângulo horizontal Azimute. Além do mais, -180° < Azimute < 180°.

[0049] Por exemplo, portanto, a direção positiva do eixo geométrico y fica em um ângulo horizontal Azimute = -90°, e uma direção negativa do eixo geométrico x fica em um ângulo horizontal Azimute = -180° = 180°.

[0050] Quanto ao ângulo perpendicular Elevação, considera-se que uma posição na direção do eixo geométrico x, isto é, no plano xy fica em um ângulo perpendicular Elevação = 0°, uma direção de rotação do plano xy em relação à direção positiva do eixo geométrico z é uma direção positiva do ângulo perpendicular Elevação, e uma direção de rotação do plano xy em relação a uma direção negativa do eixo geométrico z é uma direção negativa do ângulo perpendicular Elevação. Além do mais, -90° < Elevação < 90°.

[0051] Por exemplo, portanto, a direção positiva do eixo geométrico z fica em um ângulo perpendicular Elevação = 90°, e a direção negativa do eixo geométrico z fica em um ângulo perpendicular Elevação = -90°.

[0052] Além do mais, é considerado a seguir que uma posição de um ponto de interseção entre a esfera unitária e o eixo geométrico x no lado da direção positiva do eixo geométrico x é uma posição de referência no espaço de reprodução. Isto é, a posição de referência é uma posição no ângulo horizontal Azimute = 0°, o ângulo perpendicular Elevação = 0°, e o raio r = 1, e uma posição em uma direção que fica exatamente na frente do usuário U11 colocado no espaço de reprodução.

[0053] Desta maneira, considera-se que a informação da posição de objeto, a informação da tela de referência e a informação da tela de reprodução são, cada qual, descritas pelo ângulo horizontal Azimute e pelo ângulo perpendicular Elevação. Neste caso, quando o remapeamento for realizado com base na informação da posição de objeto, na informação da tela de referência e na informação da tela de reprodução, a posição localizada de cada objeto no espaço de reprodução é mudada, da forma indicada, por exemplo, pelas setas A13 e A14.

[0054] Neste exemplo, o objeto OBJ1 até o objeto OBJ6 são relocados em conformidade com uma tela de reprodução PSC11 que é realmente usada para reprodução.

[0055] Isto é, o objeto OBJ1 e o objeto OBJ2 que são colocados na tela de referência RSC11 ficam localizados na tela de reprodução PSC11 na mesma relação posicional da tela de referência RSC11.

[0056] Percebe-se que as posições centrais tanto da tela de referência RSC11 quanto da tela de reprodução PSC11 são idênticas à posição de referência neste exemplo.

[0057] Além do mais, os objetos ficam localizados em uma relação posicional relativa que é substancialmente igual àquela antes do remapeamento. O objeto OBJ1, o objeto OBJ3 e o objeto OBJ5 ficam localizados para estar bilateralmente simétricos com o objeto OBJ2, o objeto OBJ4 e o objeto OBJ6 na direção horizontal quando visualizados a partir do usuário U11.

[0058] De acordo com tal remapeamento, cada objeto localizado em conformidade com a tela de referência RSC11 pode ser relocado na posição em conformidade com a tela de reprodução PSC11 realmente usada para reprodução. Em decorrência disto, no momento da reprodução de conteúdo, é possível reproduzir o conteúdo de uma maneira tal, por exemplo, que um som de cada objeto exibido na tela de reprodução PSC11 venha a partir de uma direção do objeto. Adicionalmente, quanto aos objetos que não são exibidos na tela de reprodução PSC11, o conteúdo pode ser reproduzido de uma maneira tal que um som de cada um dos objetos venha a partir de uma direção apropriada. Desse modo, é possível realizar apropriada reprodução de áudio.

[0059] O remapeamento realizado por meio da técnica de Remapeamento de Elemento de Objeto Relacionado a Tela ordinária será agora descrito com mais detalhes durante a referência aos seis objetos representados na figura 1 a título de exemplo.

[0060] É considerado, por exemplo, que a informação representada na figura 2 é dada como a informação de tela de referência da tela de referência RSC11, a informação da posição de objeto do objeto OBJ1 até o objeto OBJ6, e a informação de tela de reprodução da tela de reprodução PSC11.

[0061] Na figura 2, a informação da tela de referência e a informação da posição de objeto são representadas em uma parte indicada por uma seta Q11, e a informação da tela de reprodução é representada em uma parte indicada por uma seta Q12. Além do mais, nas vistas da informação, um valor numérico do ângulo horizontal Azimute ou do ângulo perpendicular Elevação é descrito em cada um dos campos do lado direito.

[0062] Neste exemplo, a informação da tela de referência é a informação que indica a posição e a magnitude da tela de referência RSC11, isto é, as posições das extremidades superior, inferior, esquerda e direita da tela de referência RSC11.

[0063] Especificamente, nos campos para a informação da tela de referência, os caracteres “extremidade esquerda do Azimute” e “extremidade direita do Azimute” indicam as posições da extremidade do lado esquerdo e da extremidade do lado direito da tela de referência RSC11 na figura 1, respectivamente, e “29,0” e “-29,0” são descritos como ângulos horizontais Azimute que indicam estas posições. A extremidade do lado esquerdo e a extremidade do lado direito da tela de referência RSC11 na figura 1 são frequentemente referidas como “extremidade esquerda” e “extremidade direita” da tela de referência RSC11, a seguir.

[0064] Além do mais, nos campos para a informação da tela de referência, os caracteres “extremidade superior da Elevação” e “extremidade inferior da Elevação” indicam as posições da extremidade do lado superior e da extremidade do lado inferior da tela de referência RSC11 na figura 1, respectivamente, e “17,5” e “-17,5” são descritos como ângulos perpendiculares Elevação que indicam estas posições. A extremidade do lado superior e a extremidade do lado inferior da tela de referência RSC11 na figura 1 são frequentemente referidas como “extremidade superior” e “extremidade inferior” da tela de referência RSC11, a seguir.

[0065] A informação da posição de objeto de cada um dos objetos OBJ1 até OBJ6 também é representada na parte indicada pela seta Q11. Especificamente, nos respectivos campos para “OBJ1” até “OBJ6”, as posições do objeto OBJ1 até o objeto OBJ6 são descritas.

[0066] Por exemplo, nos campos para o objeto OBJ1 que é denotado por um caractere “OBJ1”, os caracteres “Azimute” e “Elevação” indicam as posições horizontal e perpendicular do objeto OBJ1, respectivamente, e “20,0” e “10,0” são descritos como o ângulo horizontal Azimute e o ângulo perpendicular Elevação que indicam estas posições.

[0067] Além do mais, a informação da tela de reprodução é representada na parte indicada pela seta Q12.

[0068] Neste exemplo, a informação da tela de reprodução é a informação que indica a posição e a magnitude da tela de reprodução PSC11, isto é, as posições das extremidades superior, inferior, esquerda e direita da tela de reprodução PSC11.

[0069] Especificamente, nos campos para a informação da tela de reprodução, os caracteres “extremidade esquerda do Azimute” e “extremidade direita do Azimute” indicam as posições da extremidade do lado esquerdo e da extremidade do lado direito da tela de reprodução PSC11 na figura 1, respectivamente, e “14,5” e “-14,5” são descritos como ângulos horizontais Azimute que indicam estas posições. A extremidade do lado esquerdo e a extremidade do lado direito da tela de reprodução PSC11 na figura 1 são frequentemente referidas como “extremidade esquerda” e “extremidade direita” da tela de reprodução PSC11, a seguir.

[0070] Além do mais, nos campos para a informação da tela de reprodução, os caracteres “extremidade superior da Elevação” e “extremidade inferior da Elevação” indicam as posições da extremidade do lado superior e da extremidade do lado inferior da tela de reprodução PSC11 na figura 1, respectivamente, e “8,5” e “-8,5” são descritos como os ângulos perpendiculares Elevação que indicam estas posições. A extremidade do lado superior e a extremidade do lado inferior da tela de reprodução PSC11 na figura 1 são frequentemente referidas como “extremidade superior” e “extremidade inferior” da tela de reprodução PSC11, a seguir.

[0071] É entendido a partir da informação da tela de reprodução indicada pela seta Q12 que a tela de reprodução PSC11 é uma tela (tela de exibição) com a magnitude substancialmente metade da tela de referência RSC11.

[0072] Quando a informação da tela de referência, a informação da posição de objeto e a informação da tela de reprodução supradescritas forem dadas, o cálculo é conduzido da forma representada pelas seguintes Equações (1) e (2) para calcular as posições dos objetos depois do remapeamento na técnica de Remapeamento de Elemento de Objeto Relacionado a Tela ordinária. [Representação Matemática 1]

[Representação Matemática 2]

[0073] Note que, na Equação (1), Φ indica a posição horizontal de cada objeto antes do remapeamento, isto é, o ângulo horizontal Azimute incluído na informação da posição de objeto, e Φ’ indica o ângulo horizontal Azimute que indica a posição horizontal do objeto depois do remapeamento.

[0074] Além do mais, na Equação (1), Φleftnominal e Φrightnominal indicam os ângulos horizontais Azimute que indicam as posições horizontais da extremidade esquerda e da extremidade direita da tela de referência RSC11, e Φleftrepro e Φrightrepro indicam os ângulos horizontais Azimute que indicam as posições horizontais da extremidade esquerda e da extremidade direita da tela de reprodução PSC11.

[0075] Na Equação (2), θ indica a posição perpendicular de cada objeto antes do remapeamento, isto é, o ângulo perpendicular Elevação incluído na informação da posição de objeto, e θ’ indica o ângulo perpendicular Elevação que indica a posição perpendicular do objeto depois do remapeamento.

[0076] Além do mais, na Equação (2), θtopnominal e θbottomnominal indicam os ângulos perpendiculares Elevação que indicam as posições perpendiculares da extremidade superior e da extremidade inferior da tela de referência RSC11, e θtoprepro e θbottomrepro indicam os ângulos perpendiculares Elevação que indicam as posições perpendiculares da extremidade superior e da extremidade inferior da tela de reprodução PSC11.

[0077] O ângulo horizontal Azimute que indica a posição horizontal de cada objeto depois do remapeamento é calculado da forma representada pela Equação exposta (1), e o ângulo perpendicular Elevação que indica a posição perpendicular do objeto depois do remapeamento é calculado da forma representada pela Equação exposta (2).

[0078] No remapeamento pelo cálculo representado pelas Equações (1) e (2), os objetos na tela de referência RSC11 são sujeitos ao remapeamento, de uma maneira tal que estes objetos somente caiam na tela de reprodução PSC11, ao mesmo tempo em que uma relação posicional entre os objetos permanece inalterada. Além do mais, os objetos fora da tela de referência RSC11 são sujeitos ao remapeamento em resposta a uma relação posicional entre as extremidades da tela de referência RSC11 e aquelas da tela de reprodução PSC11.

[0079] No cálculo representado pela Equação (1), a posição horizontal é remapeada, por exemplo, da forma representada na figura 3. Note que, na figura 3, um eixo geométrico horizontal denota um ângulo horizontal Φ de cada objeto antes do remapeamento, e um eixo geométrico vertical denota um ângulo horizontal Φ’ do objeto depois do remapeamento.

[0080] Neste exemplo, uma posição indicada por um ângulo horizontal Φrightnominal é remapeada para uma posição indicada por um ângulo horizontal Φrightrepro. Além do mais, uma posição indicada por um ângulo horizontal Φleftnominal é remapeada para uma posição indicada por um ângulo horizontal Φleftrepro, e as posições entre a posição indicada pelo ângulo horizontal Φrightnominal e a posição indicada pelo ângulo horizontal Φleftnominal são linearmente remapeadas.

[0081] Uma posição indicada por um ângulo horizontal Φ = -180° permanece inalterada como uma posição indicada por um ângulo horizontal Φ’ = -180° mesmo depois do remapeamento, e as posições entre a posição indicada pelo ângulo horizontal Φ = -180° e a posição indicada pelo ângulo horizontal Φrightnominal são linearmente remapeadas.

[0082] Igualmente, uma posição indicada por um ângulo horizontal Φ = 180° permanece inalterada como uma posição indicada por um ângulo horizontal Φ’ = 180° mesmo depois do remapeamento, e as posições entre a posição indicada pelo ângulo horizontal Φleftnominal e a posição indicada pelo ângulo horizontal Φ = 180° são linearmente remapeadas.

[0083] Portanto, quando o cálculo representado pelas Equações (1) e (2) for conduzido com base na informação da tela de referência, na informação da posição de objeto e na informação da tela de reprodução representadas na figura 2, as posições representadas na figura 4 são obtidas como posições dos objetos depois do remapeamento. Em outras palavras, a informação da posição de objeto representada na figura 4 é obtida pelo remapeamento.

[0084] A figura 4 representa a informação da posição de objeto do objeto OBJ1 até o objeto OBJ6 depois do remapeamento. Especificamente, nos respectivos campos para “OBJ1” até “OBJ6”, as posições do objeto OBJ1 até o objeto OBJ6 são descritas.

[0085] Por exemplo, nos campos para o objeto OBJ1 que é denotado pelo caractere “OBJ1”, os caracteres “Azimute” e “Elevação” indicam as posições horizontal e perpendicular do objeto OBJ1 depois do remapeamento, respectivamente, e “10,0” e “4,9” são descritos como o ângulo horizontal Azimute e o ângulo perpendicular Elevação que indicam estas posições.

[0086] O ângulo horizontal Azimute “10,0” e o ângulo perpendicular Elevação “4,9” deste objeto OBJ1 indicam o ângulo horizontal Φ’ e o ângulo perpendicular θ’ do objeto OBJ1 depois do remapeamento, respectivamente.

[0087] Como pode ser entendido a partir das posições dos objetos representados na figura 4, mesmo depois do remapeamento, o objeto OBJ1, o objeto OBJ3 e o objeto OBJ5 ficam localizados para ser bilateralmente simétricos com o objeto OBJ2, o objeto OBJ4 e o objeto OBJ6 na direção horizontal quando forem visualizados a partir do usuário U11. Isto é, entende- se que o remapeamento foi realizado apropriadamente.

[0088] Neste particular, a técnica de Remapeamento de Elemento de Objeto Relacionado a Tela ordinária tem premissa no fato de que a tela de referência RSC11 é colocada na frente do usuário U11, isto é, a posição central da tela de referência RSC11 é idêntica à posição de referência. Em outras palavras, não se supõe que a posição central da tela de referência RSC11 é uma posição diferente da posição de referência.

[0089] Devido a isto, quando a posição central da tela de referência RSC11 for uma posição diferente da posição de referência e o remapeamento for realizado como usual, a relação posicional entre os objetos fora da tela de referência RSC11 é distorcida.

[0090] Especificamente, quando o remapeamento for realizado pelo cálculo representado pelas Equações (1) e (2) enquanto a informação da tela de referência, a informação da posição de objeto e a informação da tela de reprodução representadas na figura 5, por exemplo, são dadas, a informação da posição de objeto dos objetos depois do remapeamento é aquela, da forma representada na figura 6. Percebe-se que as figuras 5 e 6 correspondem às figuras 2 e 4 e a descrição de partes similares nas figuras 5 e 6 àquelas nas figuras 2 e 4 será omitida conforme apropriado.

[0091] Na figura 5, a informação de tela de referência da tela de referência RSC11 e a informação da posição de objeto do objeto OBJ1 até o objeto OBJ6 são representadas em uma parte indicada por uma seta Q21.

[0092] Neste exemplo, uma posição da tela de referência RSC11 indicada pela informação da tela de referência é uma posição obtida pela rotação da posição representada no exemplo da figura 2 em tanto quanto 30° na direção positiva do ângulo horizontal Azimute. Isto é, no exemplo da figura 2, a posição central da tela de referência RSC11 é idêntica à posição de referência, enquanto que, no exemplo representado na figura 5, a posição central da tela de referência RSC11 é uma posição indicada por um ângulo horizontal Azimute = 30° e um ângulo perpendicular Elevação = 0°.

[0093] Igualmente, no exemplo representado na figura 5, uma posição de cada objeto indicado pela informação da posição de objeto é uma posição obtida pela rotação da posição do mesmo objeto representado no exemplo da figura 2 em tanto quanto 30° na direção positiva do ângulo horizontal Azimute.

[0094] Portanto, uma relação posicional relativa entre a tela de referência RSC11 e cada objeto no exemplo representado na figura 2 é igual àquela no exemplo representado na figura 5.

[0095] Além do mais, a informação da tela de reprodução é representada em uma parte indicada por uma seta Q22, e esta informação da tela de reprodução é igual à informação da tela de reprodução representada na figura 2.

[0096] Embora a informação da posição de objeto representada na figura 6 seja obtida pelo remapeamento com base na informação da tela de referência, na informação da posição de objeto e na informação da tela de reprodução, como exposto, é entendido a partir desta informação da posição de objeto que a relação posicional entre os objetos é assimétrica.

[0097] Note que, na figura 6, as posições do objeto OBJ1 até o objeto OBJ6 são descritas nos campos para “OBJ1” até “OBJ6”, respectivamente.

[0098] Antes do remapeamento, o objeto OBJ1, o objeto OBJ3 e o objeto OBJ5 ficam localizados bilateralmente simétricos com o objeto OBJ2, o objeto OBJ4 e o objeto OBJ6 em relação a um segmento que conecta a origem O na posição central da tela de referência RSC11 na direção horizontal.

[0099] Por outro lado, no exemplo representado na figura 6, é entendido a partir dos ângulos horizontais Azimute que o objeto OBJ1 e o objeto OBJ2 localizados na tela de referência RSC11 são bilateralmente simétricos um com o outro em relação a um segmento que conecta a origem O na posição central da tela de reprodução PSC11 na direção horizontal mesmo depois do remapeamento.

[00100] Entretanto, entende-se que o objeto OBJ3 e o objeto OBJ4 localizados fora da tela de referência RSC11 não são bilateralmente simétricos um com o outro em relação ao segmento que conecta a origem O na posição central da tela de reprodução PSC11 na direção horizontal, e o objeto OBJ5 e o objeto OBJ6 localizados fora da tela de referência RSC11 não são bilateralmente simétricos um com o outro em relação ao segmento na direção horizontal. Isto é, entende-se que as posições dos objetos depois do remapeamento não são posições apropriadas e a relação posicional entre os objetos é distorcida.

[00101] Um diagrama padrão das relações posicionais entre os objetos antes do remapeamento e depois do remapeamento neste exemplo é aquele representado na figura 7. Percebe-se que partes correspondentes àquelas da figura 1 são denotadas pelos mesmos símbolos de referência da figura 7 e a descrição das partes será omitida conforme apropriado.

[00102] Na figura 7, a tela de referência RSC11 e o objeto OBJ1 até o objeto OBJ6 antes do remapeamento são representados em partes indicadas pelas setas A21 e A22. Por outro lado, a tela de reprodução PSC11 e o objeto OBJ1 até o objeto OBJ6 depois do remapeamento são representados em partes indicadas pelas setas A23 e A24.

[00103] No remapeamento, é esperado que os objetos sejam sujeitos ao remapeamento de uma maneira tal que a relação posicional entre os objetos visualizados a partir da tela de reprodução PSC11 seja substancialmente igual à relação posicional entre os objetos visualizados a partir da tela de referência RSC11 antes do remapeamento.

[00104] Neste exemplo, a relação posicional relativa entre o objeto OBJ1 até o objeto OBJ6 antes do remapeamento é igual àquela no exemplo representado na figura 1, e uma posição da tela de reprodução PSC11 também é igual àquela no exemplo representado na figura 1. Portanto, espera-se que o objeto OBJ1 até o objeto OBJ6 depois do remapeamento sejam relocados nas mesmas posições dos objetos representados na figura 1.

[00105] Entretanto, como é entendido a partir da figura 7, quanto à relação posicional relativa entre o objeto OBJ3 até o objeto OBJ6 colocados fora da tela de referência RSC11 antes do remapeamento, a relação posicional relativa muda enormemente entre antes do remapeamento e depois do remapeamento. As posições de objeto do objeto OBJ5 e do objeto OBJ6, em particular, são enormemente desalinhadas.

[00106] Devido a isto, quando os sinais de áudio dos objetos forem sujeitos à renderização com base na informação da posição de objeto obtida pelo remapeamento, as imagens de áudio dos objetos fora da tela de reprodução PSC11 ficam localizadas em posições diferentes daquelas nas quais supõe-se que os objetos estejam originalmente presentes no momento da reprodução do som.

[00107] Para abordar o problema, portanto, a presente técnica pretende poder realizar remapeamento apropriado mesmo se a posição central da tela de referência RSC11 diferir da posição de referência pela apropriada correção da informação da posição de objeto e da informação da tela de referência.

[00108] A figura 8 representa um exemplo de uma configuração de uma modalidade de um aparelho para processamento de informação no qual a presente técnica é aplicada.

[00109] Um aparelho para processamento de informação 11 representado na figura 8 inclui uma seção de cálculo do ângulo de deslocamento 21, uma seção de correção da informação de posição 22 e uma seção de remapeamento de objeto 23.

[00110] A informação da tela de referência, a informação da posição de objeto de cada objeto e a informação da tela de reprodução são supridas para este aparelho para processamento de informação 11 a partir do exterior.

[00111] É aqui considerado que a informação da tela de referência inclui, por exemplo, os ângulos horizontais que indicam as posições da extremidade esquerda e da extremidade direita da tela de referência RSC11 e os ângulos perpendiculares que indicam as posições da extremidade superior e da extremidade inferior da tela de referência RSC11. A informação da tela de referência é a informação que indica a posição e a magnitude da tela de referência RSC11 ao mesmo tempo em que a posição de referência presente na direção frontal do usuário U11 é usada como a referência.

[00112] Igualmente, considera-se que a informação da tela de reprodução inclui os ângulos horizontais que indicam as posições da extremidade esquerda e da extremidade direita da tela de reprodução PSC11 e os ângulos perpendiculares que indicam as posições da extremidade superior e da extremidade inferior da tela de reprodução PSC11. Esta informação da tela de reprodução é, similarmente, a informação que indica a posição e a magnitude da tela de reprodução PSC11 ao mesmo tempo em que a posição de referência é usada como a referência.

[00113] Além do mais, a informação da posição de objeto de cada objeto é considerada incluindo o ângulo horizontal e o ângulo perpendicular que indica a posição do objeto. A informação da posição de objeto é a informação que indica a posição de cada objeto ao mesmo tempo em que a posição de referência presente na direção frontal do usuário U11 é usada como a referência.

[00114] A seção de cálculo do ângulo de deslocamento 21 calcula um ângulo horizontal formado entre a direção frontal do usuário U11 presente no espaço de reprodução, isto é, a direção da origem O até a posição de referência e uma direção da origem O até a posição central da tela de referência RSC11 como um ângulo de deslocamento com base na informação da tela de referência suprida, e supre o ângulo de deslocamento para a seção de correção da informação de posição 22.

[00115] O ângulo de deslocamento da tela de referência RSC11 é um ângulo horizontal Azimute que indica uma quantidade de desalinhamento da posição central da tela de referência RSC11 a partir da posição de referência em uma direção do ângulo horizontal Azimute. Isto é, o ângulo de deslocamento é a informação que indica uma quantidade de deslocamento da tela de referência RSC11 a partir da posição de referência presente na direção frontal do usuário U11. Note que, embora o ângulo de deslocamento que é o ângulo horizontal seja aqui descrito como um exemplo da informação que indica a quantidade de deslocamento, a informação que indica a quantidade de deslocamento pode ser qualquer outra informação.

[00116] A seção de correção da informação de posição 22 corrige a informação da tela de referência e a informação da posição de objeto supridas a partir do exterior com base no ângulo de deslocamento suprido a partir da seção de cálculo do ângulo de deslocamento 21, e supre a informação da tela de referência corrigida resultante e a informação da posição de objeto corrigida para a seção de remapeamento de objeto 23.

[00117] A seção de remapeamento de objeto 23 realiza o remapeamento da informação da posição de objeto, isto é, cada posição de objeto com base na informação da tela de reprodução suprida a partir do exterior e na informação da tela de referência corrigida e na informação da posição de objeto corrigida supridas a partir da seção de correção da informação de posição 22, e transmite a informação da posição de objeto resultante.

[00118] Os processos pelas seções que constituem o aparelho para processamento de informação 11 serão agora descritos mais especificamente.

[00119] Primeiro, a seção de cálculo do ângulo de deslocamento 21 calcula um ângulo de deslocamento Φoffset_value pela condução do cálculo representado, por exemplo, pela seguinte Equação (3) com base na informação da tela de referência suprida. [Representação Matemática 3]

[00120] Note que, na Equação (3), Φleftnominal e Φrightnominal indicam os ângulos horizontais Azimute que indicam as posições da extremidade esquerda e da extremidade direita da tela de referência RSC11. A informação Φleftnominal e Φrightnominal é incluída na informação da tela de referência.

[00121] Além do mais, a seção de correção da informação de posição 22 corrige a informação da tela de referência com base no ângulo de deslocamento Φoffset_value de uma maneira tal que a posição central da tela de referência RSC11 torne-se idêntica à posição de referência. Isto é, a seção de correção da informação de posição 22 calcula a informação da tela de referência corrigida pelo cálculo representado pelas seguintes Equações (4) e (5).

[00122] Note que, na Equação (4), Φleftnominal indica o ângulo horizontal Azimute que indica a posição da extremidade esquerda da tela de referência RSC11, e Φoffset_leftnominal indica um ângulo horizontal Azimute depois da correção do ângulo horizontal Φleftnominal usando o ângulo de deslocamento Φoffset_value. Isto é, Φoffset_leftnominal indica o ângulo horizontal Azimute que indica a posição da extremidade esquerda da tela de referência corrigida RSC11.

[00123] Além do mais, na Equação (5), Φrightnominal indica o ângulo horizontal Azimute que indica a posição da extremidade direita da tela de referência RSC11, e Φoffset_rightnominal indica um ângulo horizontal Azimute depois da correção do ângulo horizontal Φrightnominal usando o ângulo de deslocamento Φoffset_value. Isto é, Φoffset_rightnominal indica o ângulo horizontal Azimute que indica a posição da extremidade direita da tela de referência corrigida RSC11.

[00124] Portanto, o ângulo horizontal Φleftnominal incluído na informação da tela de referência é corrigido pelo cálculo representado pela Equação (4), e o ângulo horizontal Φrightnominal incluído na informação da tela de referência é corrigido pelo cálculo representado pela Equação (5).

[00125] No momento da correção da informação da tela de referência, apenas os ângulos horizontais Φleftnominal e Φrightnominal são corrigidos ao mesmo tempo em que os ângulos perpendiculares que indicam as posições da extremidade superior e da extremidade inferior da tela de referência RSC11 não são corrigidos.

[00126] Um processo como este para calcular a informação da tela de referência corrigida é um processo para rotar a tela de referência RSC11 em tanto quanto o ângulo de deslocamento Φoffset_value, isto é, em tanto quanto um desalinhamento da posição central da tela de referência RSC11 a partir da posição de referência. Através deste processo, a informação da tela de referência é corrigida de uma maneira tal que a posição central da tela de referência RSC11 torne-se idêntica à posição de referência.

[00127] Além do mais, a seção de correção da informação de posição 22 corrige a informação da posição de objeto com base no ângulo de deslocamento Φoffset_value de uma maneira tal que as posições dos objetos sejam corrigidas (movidas) em conformidade com a correção (movimento) da posição da tela de referência RSC11, isto é, a correção da informação da tela de referência. Isto é, a seção de correção da informação de posição 22 calcula a informação da posição de objeto corrigida pelo cálculo representado pela seguinte Equação (6). [Representação Matemática 6]

[00128] Note que, na Equação (6), Φ indica o ângulo horizontal Azimute de cada objeto incluído na informação da posição de objeto, e Φoffset indica um ângulo horizontal Azimute obtido pela correção do ângulo horizontal Φ usando o ângulo de deslocamento Φoffset_value. Isto é, Φoffset indica o ângulo horizontal Azimute que indica a posição de objeto corrigida.

[00129] Portanto, o ângulo horizontal Φ incluído na informação da posição de objeto é corrigido pelo cálculo representado pela Equação (6). No momento da correção da informação da posição de objeto, apenas o ângulo horizontal Φ é corrigido ao mesmo tempo em que o ângulo perpendicular que indica a posição perpendicular do objeto não é corrigido.

[00130] Um processo como este para calcular a informação da posição de objeto corrigida é um processo para rotar a posição de cada objeto em tanto quanto o ângulo de deslocamento Φoffset_value.

[00131] Através deste processo, a posição de cada objeto é corrigida em conformidade com a posição da tela de referência RSC11. Mais especificamente, a posição de cada objeto é corrigida em conformidade com a correção da posição central da tela de referência RSC11. Devido a isto, a posição relativa de cada objeto em relação à tela de referência RSC11 não tem mudança entre antes e depois da correção da informação da tela de referência e da informação da posição de objeto.

[00132] Quando a informação da tela de referência corrigida e a informação da posição de objeto corrigida forem obtidas da forma descrita até aqui, a seção de remapeamento de objeto 23 realiza remapeamento. Isto é, a posição de cada objeto é remapeada em conformidade com a posição da tela de reprodução PSC11.

[00133] Neste momento, a informação da tela de referência corrigida e a informação da posição de objeto corrigida que indica a relação posicional entre a tela de referência RSC11 e os objetos servem como a informação que indica uma relação posicional quando a posição de referência for definida idêntica à posição central da tela de referência RCS11.

[00134] Portanto, usar a informação da tela de referência corrigida e a informação da posição de objeto corrigida pode impedir distorções das posições de objeto mesmo se as posições de objeto forem remapeadas por cálculo similar àquele conduzido na técnica de Remapeamento de Elemento de Objeto Relacionado a Tela ordinária. Isto é, é possível realizar remapeamento apropriado.

[00135] Especificamente, a seção de remapeamento de objeto 23 calcula a informação da posição de objeto depois do remapeamento pela condução do cálculo representado pela seguinte Equação (7) com base na informação da tela de referência corrigida, na informação da tela de reprodução e na informação da posição de objeto corrigida.

[00136] [Representação Matemática 7]

[00137] Note que, na Equação (7), Φ’ indica o ângulo horizontal Azimute que indica a posição horizontal de cada objeto depois do remapeamento, e Φoffset indica a posição horizontal do objeto antes do remapeamento, isto é, o ângulo horizontal Azimute incluído na informação da posição de objeto corrigida.

[00138] Além do mais, na Equação (7), Φoffset_lefnominal e Φoffset_rightnominal indicam os ângulos horizontais Azimute que indicam as posições horizontais corrigidas de uma extremidade esquerda e uma extremidade direita da tela de referência RSC11. Isto é, Φoffset_leftnominal e Φoffset_rightnominal indicam os ângulos horizontais Azimute da extremidade esquerda e da extremidade direita da tela de referência RSC11 incluídos na informação da tela de referência corrigida.

[00139] Além do mais, na Equação (7), Φleftrepro e Φrightrepro indicam os ângulos horizontais Azimute que indicam as posições horizontais da extremidade esquerda e da extremidade direita da tela de reprodução PSC11.

[00140] Adicionalmente, mais especificamente, na determinação da informação da posição de objeto remapeada de cada objeto, a seção de remapeamento de objeto 23 conduz o cálculo representado pela Equação (2) supradescrita com base na informação da tela de referência corrigida, na informação da tela de reprodução e na informação da posição de objeto corrigida. O ângulo perpendicular θ’ que indica a posição perpendicular remapeada do objeto incluído na informação da posição de objeto depois do remapeamento é, desse modo, obtido.

[00141] Pela realização dos processos supradescritos, o aparelho para processamento de informação 11 pode realizar o remapeamento apropriado.

[00142] Especificamente, quando o aparelho para processamento de informação 11 realizar o remapeamento enquanto a informação da tela de referência, a informação da posição de objeto e a informação da tela de reprodução representada, por exemplo, na figura 5 forem dadas, a informação da posição de objeto representada na figura 9 é obtida como a informação da posição de objeto depois do remapeamento.

[00143] Note que, na figura 9, nos respectivos campos para “OBJ1” até “OBJ6”, a informação da posição de objeto remapeada do objeto OBJ1 até o objeto OBJ6, isto é, os ângulos horizontais Azimute e os ângulos perpendiculares Elevação das posições dos objetos depois do remapeamento, é representada.

[00144] Por exemplo, nos campos para o objeto OBJ1 que é denotado pelo caractere “OBJ1”, os caracteres “Azimute” e “Elevação” indicam as posições horizontal e perpendicular do objeto OBJ1 depois do remapeamento, respectivamente, e “10,0” e “4,9” são descritos como o ângulo horizontal Azimute e o ângulo perpendicular Elevação que indicam estas posições. O ângulo horizontal Azimute “10,0” e o ângulo perpendicular Elevação “4,9” são o ângulo horizontal Φ’ calculado da forma representada pela Equação (7) e o ângulo perpendicular θ’ calculado da forma representada pela Equação (2), respectivamente.

[00145] No exemplo representado na figura 9, a relação posicional relativa entre todos os objetos OBJ1 até OBJ6 antes do remapeamento é substancialmente igual àquela depois do remapeamento.

[00146] Isto é, entende-se que o objeto OBJ1 e o objeto OBJ2 localizados na tela de referência RSC11 são bilateralmente simétricos um com o outro em relação a um segmento que conecta a origem O em uma posição central da tela de reprodução PSC11 na direção horizontal mesmo depois do remapeamento.

[00147] Além do mais, entende-se que o objeto OBJ3 e o objeto OBJ4 localizados fora da tela de referência RSC11 são bilateralmente simétricos um com o outro em relação ao segmento que conecta a origem O na posição central da tela de reprodução PSC11 na direção horizontal, e o objeto OBJ5 e o objeto OBJ6 localizados fora da tela de referência RSC11 são bilateralmente simétricos um com o outro em relação ao segmento na direção horizontal. Isto é, entende-se que as posições de todos os objetos depois do remapeamento são posições apropriadas.

[00148] Um diagrama padrão das relações posicionais entre os objetos antes do remapeamento e depois do remapeamento neste exemplo é aquele representado na figura 10. Percebe-se que partes correspondentes àquelas da figura 1 são denotadas pelos mesmos símbolos de referência da figura 10 e a descrição das partes será omitida conforme apropriado.

[00149] Na figura 10, a tela de referência RSC11 e o objeto OBJ1 até o objeto OBJ6 antes do remapeamento são representados nas partes indicadas pelas setas A31 e A32. Mais especificamente, a tela de referência RSC11 é localizada na posição indicada pela informação da tela de referência incorreta, e o objeto OBJ1 até o objeto OBJ6 ficam localizados nas posições indicadas pela informação da posição de objeto incorreta.

[00150] Por outro lado, a tela de reprodução PSC11 e o objeto OBJ1 até o objeto OBJ6 depois do remapeamento são representados em partes indicadas pelas setas A33 e A34.

[00151] Neste exemplo, a tela de referência RSC11 e o objeto OBJ1 até o objeto OBJ6 antes do remapeamento indicados pelas setas A31 e A32 ficam localizados nas mesmas posições do exemplo representado na figura 7.

[00152] Além do mais, entende-se que, nas partes indicadas pelas setas A33 e A34, o objeto OBJ1, o objeto OBJ3 e o objeto OBJ5 depois do remapeamento são bilateralmente simétricos com o objeto OBJ2, o objeto OBJ4 e o objeto OBJ6 depois do remapeamento em relação ao segmento que conecta a origem O na posição central da tela de reprodução PSC11 na direção horizontal. Isto é, entende-se que a relação posicional entre os objetos visualizados a partir da posição central da tela antes do remapeamento é substancialmente igual àquela depois do remapeamento, e o remapeamento foi realizado apropriadamente. <Descrição do processo de remapeamento>

[00153] Um processo de remapeamento realizado pelo aparelho para processamento de informação 11 será descrito a seguir em relação ao fluxograma da figura 11.

[00154] Na Etapa S11, a seção de cálculo do ângulo de deslocamento 21 calcula o ângulo de deslocamento Φoffset_value com base na informação da tela de referência suprida, e supre o ângulo de deslocamento Φoffset_value para a seção de correção da informação de posição 22.

[00155] Especificamente, a seção de cálculo do ângulo de deslocamento 21 calcula o ângulo de deslocamento Φoffset_value pela condução do cálculo representado pela Equação (3).

[00156] Na Etapa S12, a seção de correção da informação de posição 22 corrige a informação da tela de referência e a informação da posição de objeto supridas a partir do exterior com base no ângulo de deslocamento Φoffset_value suprido a partir da seção de cálculo do ângulo de deslocamento 21.

[00157] Por exemplo, a seção de correção da informação de posição 22 corrige a informação da tela de referência pela condução do cálculo representado pelas Equações (4) e (5) a partir do ângulo de deslocamento Φoffset_value e da informação da tela de referência, e supre a informação da tela de referência corrigida resultante para a seção de remapeamento de objeto 23.

[00158] Além do mais, a seção de correção da informação de posição 22 corrige a informação da posição de objeto pela condução do cálculo representado pela Equação (6) a partir do ângulo de deslocamento Φoffset_value e da informação da posição de objeto, e supre a informação da posição de objeto resultante corrigida para a seção de remapeamento de objeto 23.

[00159] Na Etapa S13, a seção de remapeamento de objeto 23 realiza o remapeamento de cada posição de objeto com base na informação da tela de reprodução suprida a partir do exterior, e na informação da tela de referência corrigida e na informação da posição de objeto corrigida supridas a partir da seção de correção da informação de posição 22.

[00160] Por exemplo, a seção de remapeamento de objeto 23 calcula a informação da posição de objeto que indica as posições remapeadas dos objetos pela condução do cálculo representado pelas Equações (2) e (7) com base na informação da tela de referência corrigida, na informação da tela de reprodução e na informação da posição de objeto corrigida. A seção de remapeamento de objeto 23, então, transmite a informação da posição de objeto obtida da forma supradescrita para um estágio subsequente, e o processo de remapeamento é terminado.

[00161] Desta maneira, o aparelho para processamento de informação 11 realiza o remapeamento depois da correção da informação da tela de referência e da informação da posição de objeto. Fazendo isto, é possível realizar remapeamento apropriado sem dependência da posição localizada da tela de referência RSC11.

[00162] Neste particular, da forma especificada no padrão “Áudio 3D” ISO/IEC 23008-3, um alcance de cada um do ângulo horizontal Φieftnominal da extremidade esquerda e do ângulo horizontal Φrightnominal da extremidade direita da tela de referência RSC11 e do ângulo horizontal Φ de cada objeto é frequentemente especificado como igual a ou maior do que -180° e igual a ou menor do que 180°.

[00163] Em um caso como este, é necessário corrigir apropriadamente os ângulos horizontais de forma que os ângulos horizontais sejam valores em um alcance pré-ajustado, isto é, valores iguais a ou maiores do que -180° e iguais a ou menores do que 180° no momento do cálculo da informação da tela de referência corrigida e da informação da posição de objeto corrigida.

[00164] Além do mais, quando o alcance de cada um dos ângulos horizontais Φleftnominal, Φrightnominal, e Φ for especificado como igual a ou maior do que -180° e igual a ou menor do que 180° e a tela de referência RSC11 estiver localizada em uma direção para trás do usuário U11, isto é, localizada na direção negativa do eixo geométrico x quando visualizada a partir do usuário U11, os ângulos horizontais Φieftnominal e Φrightnominal frequentemente satisfazem Φleftnominal < Φrightnominal. Em um caso como este, é necessário corrigir apropriadamente o ângulo de deslocamento Φoffset_value em um valor de correção apropriado no momento do cálculo do valor de deslocamento Φoffset_value.

[00165] Note que é considerado a seguir que os ângulos horizontais Φleftnominal e Φrightnominal estejam em um estado de satisfação de Φleftnominal < Φrightnominal, a menos que especificado de outra forma, quando a tela de referência RSC11 estiver colocada na direção para trás do usuário U11.

[00166] Quando o alcance de cada um dos ângulos horizontais Φleftnominal, Φrightnominal, e Φ for especificado para cair no alcance igual a ou maior do que -180° e igual a ou menor do que 180° em antecipação, o remapeamento pode ser realizado como segue.

[00167] Note que a descrição irá continuar a seguir durante a referência específica a um caso em que a informação da tela de referência, a informação da posição de objeto e a informação da tela de reprodução representadas na figura 12 são dadas a título de exemplo. Além do mais, a figura 12 corresponde à figura 2 e a descrição das partes similares na figura 12 àquelas na figura 2 será omitida conforme apropriado.

[00168] Na figura 12, a informação de tela de referência da tela de referência RSC11 e a informação da posição de objeto do objeto OBJ1 até o objeto OBJ6 são representadas em uma parte indicada por uma seta Q31.

[00169] Neste exemplo, uma posição da tela de referência RSC11 indicada pela informação da tela de referência é uma posição obtida pela rotação da posição representada no exemplo da figura 2 em tanto quanto 180° na direção do ângulo horizontal Azimute. Isto é, no exemplo da figura 2, a posição central da tela de referência RSC11 é idêntica à posição de referência, enquanto que, no exemplo representado na figura 12, a posição central da tela de referência RSC11 é uma posição indicada por um ângulo horizontal Azimute = 180° e um ângulo perpendicular Elevação = 0°.

[00170] Igualmente, no exemplo representado na figura 12, uma posição de cada objeto indicado pela informação da posição de objeto é uma posição obtida pela rotação da posição do mesmo objeto representado no exemplo da figura 2 em tanto quanto 180° na direção do ângulo horizontal Azimute.

[00171] Portanto, uma relação posicional relativa entre a tela de referência RSC11 e cada objeto no exemplo representado na figura 2 é igual àquela no exemplo representado na figura 12.

[00172] Além do mais, a informação da tela de reprodução é representada em uma parte indicada por uma seta Q32, e esta informação da tela de reprodução é igual à informação da tela de reprodução representada na figura 2.

[00173] Quando a informação da tela de referência, a informação da posição de objeto e a informação da tela de reprodução supradescritas forem dadas, a seção de cálculo do ângulo de deslocamento 21 pode calcular o ângulo de deslocamento Φoffset_value da forma representada pela seguinte Equação (8) no lugar da Equação (3) supradescrita. [Representação Matemática 8]

[00174] Note que, na Equação (8), Φleftnominal e Φrightnominal indicam os ângulos horizontais Azimute que indicam as posições da extremidade esquerda e da extremidade direita da tela de referência RSC11.

[00175] Na Equação (8), quando os ângulos horizontais Φieftnominal e Φrightnominal satisfizerem Φleftnominal < Φrightnominal, isto é, a tela de referência RSC11 estiver presente na direção para trás, 180° é adicionado no ângulo determinado pela Equação (3) como um valor de correção para obter um ângulo de deslocamento final Φoffset_value.

[00176] O motivo é como segue. Quando a tela de referência RSC11 estiver presente na direção para trás e o ângulo de deslocamento Φoffset_value for calculado, da forma representada pela Equação (3), o mesmo ângulo de quando a tela de referência RSC11 estiver presente na direção frontal é obtido como o ângulo de deslocamento Φoffset_value. Devido a isto, é necessário adicionar 180° como o valor de correção para corrigir precisamente o ângulo de deslocamento.

[00177] Além do mais, na Equação (8), quando os ângulos horizontais Φleftnominal e Φrightnominal não satisfizerem Φleftnominal < Φrightnominal, isto é, a tela de referência RSC11 não estiver presente na direção para trás, o ângulo de deslocamento Φoffset_value é calculado da maneira similar àquela representada pela Equação (3) supradescrita.

[00178] Quando o ângulo de deslocamento Φoffset_value for calculado da forma representada pela Equação (8), a seção de correção da informação de posição 22 pode calcular a informação da tela de referência corrigida da forma representada pelas seguintes Equações (9) e (10) no lugar das Equações (4) e (5). Igualmente, a seção de correção da informação de posição 22 pode calcular a informação da posição de objeto corrigida da forma representada pela Equação (11) no lugar da Equação (6). [Representação Matemática 9]

[00179] Note que, nas Equações (9) até (11), Φoffset_value indica o ângulo de deslocamento Φoffset_vaiue. Além do mais, na Equação (9), Φieftnominal indica o ângulo horizontal Azimute que indica a posição da extremidade esquerda da tela de referência RSC11, e Φoffset_leftnominal indica um ângulo horizontal Azimute depois da correção do ângulo horizontal Φleftnominal usando o ângulo de deslocamento Φoffset_value.

[00180] Na Equação (10), Φrightnominal indica o ângulo horizontal Azimute que indica a posição da extremidade direita da tela de referência RSC11, e Φoffset_rightnominal indica um ângulo horizontal Azimute depois da correção do ângulo horizontal Φrightnominal usando o ângulo de deslocamento Φoffset_value.

[00181] Além do mais, na Equação (11), Φ indica o ângulo horizontal Azimute que indica a posição horizontal de cada objeto incluído na informação da posição de objeto, e Φoffset indica um ângulo horizontal Azimute obtido depois da correção do ângulo horizontal Φ usando o ângulo de deslocamento Φoffset_value.

[00182] Por exemplo, na Equação (9), quando Φleftnominal < Φoffset_value - 180°, isto é, quando Φleftnominal - Φoffset_value < -180°, 360° é adicionado no ângulo horizontal determinado pela Equação (4) supradescrita para obter o ângulo horizontal final Φoffset_leftnominal.

[00183] Em uma situação como esta, quando o ângulo horizontal Φoffset_leftnominal for obtido da forma representada pela Equação (4), um valor do ângulo horizontal Φoffset_leftnominal que é originalmente suposto como igual a ou maior do que -180° e igual a ou menor do que 108° torna-se menor do que - 180°. Para abordar o problema, no cálculo representado pela Equação (9), quando Φleftnominal < Φoffset_value - 180°, 360° é adicionado no ângulo horizontal obtido da forma representada pela Equação (4) como o valor de correção para corrigir precisamente o ângulo horizontal Φoffset_leftnominal.

[00184] Além do mais, na Equação (9), quando Φoffset_value - 180° < Φleftnominal < Φoffset_value + 180°, isto é, quando -180° < Φleftnominal - Φoffset_value < 180°, o cálculo é conduzido de uma maneira similar àquela representada pela Equação (4). Além do mais, na Equação (9), quando Φoffset_vaiue + 180° < Φieftnominal, isto é, quando Φleftnominal - Φoffset_value > 180°, o valor do ângulo horizontal Φoffsetjeftnominal torna-se maior do que 180°. Devido a isto, similarmente ao caso de Φleftnominal < Φoffset_value - 180°, -360° é adicionado como o valor de correção para corrigir precisamente o ângulo horizontal Φoffset_leftnominal.

[00185] Além do mais, não apenas na Equação (9), mas nas Equações (10) ou (11), a correção é realizada conforme necessário, similarmente ao caso da Equação (9).

[00186] Desta maneira, adicionar 360° ou -360° como o valor de correção, dependendo do ângulo horizontal corrigido usando o ângulo de deslocamento Φoffset_value para cada peça de informação, tal como Φleftnominal - Φoffset_value, isto é, conforme necessário no momento da correção da informação da tela de referência e da informação da posição de objeto, pode ser redeclarado como um processo para ajustar o valor de correção usado durante a correção da tela de referência RSC11 ou cada posição de objeto.

[00187] Quando a informação da tela de referência corrigida e a informação da posição de objeto corrigida forem calculadas como exposto, a seção de remapeamento de objeto 23 calcula a informação da posição de objeto depois do remapeamento, da forma representada pelas Equações (2) e (7).

[00188] Por exemplo, quando o remapeamento supradescrito for realizado ao mesmo tempo em que a informação da tela de referência, a informação da posição de objeto e a informação da tela de reprodução representadas, por exemplo, na figura 12 são dadas, a informação da posição de objeto representada na figura 13 é obtida como a informação da posição de objeto depois do remapeamento.

[00189] Note que, na figura 13, nos respectivos campos para “OBJ1” até “OBJ6”, a informação da posição de objeto remapeada do objeto OBJ1 até o objeto OBJ6, isto é, os ângulos horizontais Azimute e os ângulos perpendiculares Elevação das posições dos objetos depois do remapeamento são representados.

[00190] Por exemplo, nos campos para o objeto OBJ1 que é denotado pelo caractere “OBJ1”, os caracteres “Azimute” e “Elevação” indicam as posições horizontal e perpendicular do objeto OBJ1 depois do remapeamento, respectivamente, e “10,0” e “4,9” são descritos como o ângulo horizontal Azimute e o ângulo perpendicular Elevação que indicam estas posições. O ângulo horizontal Azimute “10,0” e o ângulo perpendicular Elevação “4,9” são o ângulo horizontal Φ’ calculado da forma representada pela Equação (7) e o ângulo perpendicular θ’ calculado da forma representada pela Equação (2), respectivamente.

[00191] No exemplo representado na figura 13, a relação posicional relativa entre todos os objetos OBJ1 até OBJ6 antes do remapeamento é substancialmente a mesma depois do remapeamento.

[00192] Isto é, entende-se que o objeto OBJ1 e o objeto OBJ2, o objeto OBJ3 e o objeto OBJ4, e o objeto OBJ5 e o objeto OBJ6 são bilateralmente simétricos uns com os outros em relação ao segmento que conecta a origem O na posição central da tela de reprodução PSC11 na direção horizontal mesmo depois do remapeamento.

[00193] Um diagrama padrão das relações posicionais entre os objetos antes do remapeamento e depois do remapeamento neste exemplo é aquele representado na figura 14. Percebe-se que partes correspondentes àquelas da figura 1 são denotadas pelos mesmos símbolos de referência da figura 14 e a descrição das partes será omitida conforme apropriado.

[00194] Na figura 14, a tela de referência RSC11 e o objeto OBJ1 até o objeto OBJ6 antes do remapeamento são representados em partes indicadas pelas setas A41 e A42. Mais especificamente, a tela de referência RSC11 fica localizada na posição indicada pela informação da tela de referência incorreta, e o objeto OBJ1 até o objeto OBJ6 ficam localizados nas posições indicadas pela informação da posição de objeto incorreta.

[00195] Por outro lado, a tela de reprodução PSC11 e o objeto OBJ1 até o objeto OBJ6 depois do remapeamento são representados em partes indicadas pelas setas A43 e A44.

[00196] Neste exemplo, a posição da tela de referência RSC11 nas partes indicadas pelas setas A41 e A42 fica na direção para trás do usuário U11.

[00197] Além do mais, entende-se que, nas partes indicadas pelas setas A43 e A44, o objeto OBJ1, o objeto OBJ3 e o objeto OBJ5 depois do remapeamento são bilateralmente simétricos com o objeto OBJ2, o objeto OBJ4 e o objeto OBJ6 depois do remapeamento em relação ao segmento que conecta a origem O na posição central da tela de reprodução PSC11 na direção horizontal. Isto é, entende-se que a relação posicional entre os objetos visualizados a partir da posição central da tela antes do remapeamento é substancialmente igual àquela depois do remapeamento, e o remapeamento foi realizado apropriadamente.

[00198] Da forma supradescrita, quando o alcance de cada um dos ângulos horizontais Φieftnominal, Φrightnominal, e Φ for especificado para cair no alcance igual a ou maior do que -180° e igual a ou menor do que 180°, a seção de cálculo do ângulo de deslocamento 21 calcula o ângulo de deslocamento Φoffset_vaiue pela condução do cálculo representado pela Equação (8) na Etapa S11 do processo de remapeamento descrito em relação à figura 11.

[00199] Além do mais, na Etapa S12, a seção de correção da informação de posição 22 corrige a informação da tela de referência pela condução do cálculo representado pelas Equações (9) e (10), e corrige a informação da posição de objeto pela condução do cálculo representado pela Equação (11). Então, na Etapa S13, a seção de remapeamento de objeto 23 calcula a informação da posição de objeto que indica as posições remapeadas dos objetos pela condução do cálculo representado pelas Equações (2) e (7).

[00200] Desta maneira, o aparelho para processamento de informação 11 pode realizar o remapeamento apropriado mesmo quando o alcance de cada um dos ângulos horizontais Φieftnominal, Φrightnominal, e Φ for especificado para cair no alcance igual a ou maior do que -180° e igual a ou menor do que 180°.

[00201] Note que o exemplo no qual a posição central da tela de reprodução PSC11 é idêntica à posição de referência foi supradescrito como um exemplo concreto. Entretanto, mesmo quando a posição central da tela de reprodução PSC11 não for idêntica à posição de referência, é possível realizar remapeamento apropriado pela condução da correção usando um ângulo de deslocamento da tela de reprodução, como segue.

[00202] Note que a descrição irá continuar a seguir durante a referência específica a um caso em que a informação da tela de referência, a informação da posição de objeto e a informação da tela de reprodução representadas na figura 15 são dadas a título de exemplo. Além do mais, a figura 15 corresponde à figura 5 e a descrição das partes similares na figura 15 àquelas da figura 5 será omitida conforme apropriado.

[00203] Na figura 15, a informação de tela de referência da tela de referência RSC11 e a informação da posição de objeto do objeto OBJ1 até o objeto OBJ6 são representadas em uma parte indicada por uma seta Q41. A informação da tela de referência e a informação da posição de objeto do objeto OBJ1 até o objeto OBJ6 são iguais à informação da tela de referência e à informação da posição de objeto do objeto OBJ1 até o objeto OBJ6 representados na figura 5.

[00204] Além do mais, a informação da tela de reprodução é representada em uma parte indicada por uma seta Q42.

[00205] Neste exemplo, uma posição da tela de reprodução PSC11 indicada pela informação da tela de reprodução é uma posição obtida pela rotação da posição representada no exemplo da figura 2 em tanto quanto 180° na direção do ângulo horizontal Azimute. Isto é, no exemplo da figura 2, a posição central da tela de reprodução PSC11 é idêntica à posição de referência, enquanto que, no exemplo representado na figura 15, a posição central da tela de reprodução PSC11 é uma posição indicada por um ângulo horizontal Azimute = 180° e um ângulo perpendicular Elevação = 0°.

[00206] Quando a informação da tela de referência, a informação da posição de objeto e a informação da tela de reprodução supradescritas forem dadas, a seção de cálculo do ângulo de deslocamento 21 calcula o ângulo de deslocamento Φoffset_value e também calcula um ângulo de deslocamento da tela de reprodução Φrepro_offset_value pela condução do cálculo representado, por exemplo, pela seguinte Equação (12). [Representação Matemática 12]

[00207] Note que, na Equação (12), Φleftrepro e Φrightrepro indicam os ângulos horizontais Azimute que indicam as posições da extremidade esquerda e da extremidade direita da tela de reprodução PSC11. A informação Φleftrepro e Φrightrepro é incluída na informação da tela de reprodução.

[00208] Além do mais, além da correção da informação da tela de referência e da correção da informação da posição de objeto supradescritas, a seção de correção da informação de posição 22 corrige a informação da tela de reprodução com base no ângulo de deslocamento da tela de reprodução Φrepro_offset_value de uma maneira tal que a posição central da tela de reprodução PSC11 torne-se idêntica à posição de referência. Isto é, a informação da tela de reprodução corrigida é calculada pelo cálculo representado pelas seguintes Equações (13) e (14). [Representação Matemática 13]

[00209] Note que, na Equação (13), Φieftrepro indica o ângulo horizontal Azimute que indica a posição da extremidade esquerda da tela de reprodução PSC11, e Φoffset_ leftrepro indica um ângulo horizontal Azimute depois da correção do ângulo horizontal Φleftrepro usando o ângulo de deslocamento da tela de reprodução Φrepro_offset_value. Isto é, Φoffset_lefrepro indica o ângulo horizontal Azimute que indica a posição corrigida da extremidade esquerda da tela de reprodução PSC11.

[00210] Além do mais, na Equação (14), Φrightrepro indica o ângulo horizontal Azimute que indica a posição da extremidade direita da tela de reprodução PSC11, e Φoffset_rightrepro indica um ângulo horizontal Azimute depois da correção do ângulo horizontal Φrightrepro usando o ângulo de deslocamento da tela de reprodução Φrepro_offset_value. Isto é, Φoffset_rightrepro indica o ângulo horizontal Azimute que indica a posição corrigida da extremidade direita da tela de reprodução PSC11.

[00211] Portanto, o ângulo horizontal Φleftrepro incluído na informação da tela de reprodução é corrigido pelo cálculo representado pela Equação (13), e o ângulo horizontal Φrightrepro incluído na informação da tela de reprodução é corrigido pelo cálculo representado pela Equação (14).

[00212] Um processo como este para calcular a informação da tela de referência corrigida é um processo para rotar a tela de reprodução PSC11 em tanto quanto o ângulo de deslocamento da tela de reprodução Φrepro_offset_value, isto é, em tanto quanto um desalinhamento da posição central da tela de reprodução PSC11 a partir da posição de referência. Através deste processo, a informação da tela de reprodução é corrigida de uma maneira tal que a posição central da tela de reprodução PSC11 torne-se idêntica à posição de referência.

[00213] Note que a tela de reprodução PSC11 cuja posição foi corrigida de uma maneira tal que a posição central se torne idêntica à posição de referência também é referida como “tela de reprodução corrigida PSC11’”, a seguir.

[00214] Quando a informação da tela de reprodução corrigida, bem como a informação da tela de referência corrigida e a informação da posição de objeto corrigida forem obtidas, como exposto, a seção de remapeamento de objeto 23 realiza remapeamento. Isto é, a posição de cada objeto é remapeada em conformidade com a posição da tela de reprodução corrigida PSC11’.

[00215] Especificamente, a seção de remapeamento de objeto 23 calcula a informação da posição de objeto depois do remapeamento pela condução do cálculo representado pela seguinte Equação (15) com base na informação da tela de referência corrigida, na informação da tela de reprodução corrigida e na informação da posição de objeto corrigida. [Representação Matemática 15]

[00216] Note que, na Equação (15), Φ’ indica o ângulo horizontal Azimute que indica a posição horizontal de cada objeto depois do remapeamento, e Φoffset indica a posição horizontal do objeto antes do remapeamento, isto é, o ângulo horizontal Azimute incluído na informação da posição de objeto corrigida.

[00217] Além do mais, na Equação (15), Φoffset_ieftnominal e Φoffset_rightnominal indicam os ângulos horizontais Azimute que indicam as posições horizontais corrigidas da extremidade esquerda e da extremidade direita da tela de referência RSC11. Isto é, Φoffset_leftnominal e Φoffset_rightnominal indicam os ângulos horizontais Azimute da extremidade esquerda e da extremidade direita da tela de referência RSC11 incluídos na informação da tela de referência corrigida.

[00218] Além do mais, na Equação (15), Φoffset_leftrepro e Φoffset_rightrepro indicam os ângulos horizontais Azimute que indicam as posições horizontais da extremidade esquerda e da extremidade direita da tela de reprodução corrigida PSC11’.

[00219] A informação da posição de objeto depois do remapeamento aqui obtida é para a tela de reprodução corrigida PSC11’. Isto é, a informação é a informação da posição de objeto quando a posição central da tela de reprodução PSC11 for idêntica à posição de referência. Realmente, entretanto, a tela de reprodução PSC11 fica na posição indicada por Φleftrepro e Φrightrepro incluídos na informação da tela de reprodução, e é rotacionada em tanto quanto o ângulo de deslocamento da tela de reprodução Φrepro_offset_value. Portanto, o cálculo é conduzido da forma representada pela seguinte Equação (16), e a informação da posição de objeto depois do remapeamento é corrigida para aquela para a tela de reprodução real PSC11. [Representação Matemática 16] Φ”= 0’ + 0repro_offset_value *’*

[00220] Note que, na Equação (16), Φ’ indica o ângulo horizontal Azimute incluído na informação da posição de objeto depois do remapeamento de cada objeto calculado para a tela de reprodução corrigida PSC11’, e Φ’’ indica um ângulo horizontal depois da correção do ângulo horizontal p’ usando o ângulo de deslocamento da tela de reprodução Φrepro_offset_value. Isto é, Φ’’ indica o ângulo horizontal Azimute incluído na informação da posição de objeto corrigida depois do remapeamento.

[00221] Cada posição de objeto depois do remapeamento é, desse modo, corrigida em conformidade com a posição da tela de reprodução PSC11.

[00222] Quando o remapeamento descrito anteriormente for realizado ao mesmo tempo em que a informação da tela de referência, a informação da posição de objeto e a informação da tela de reprodução representadas, por exemplo, na figura 15 são dadas, a informação da posição de objeto representada na figura 16 é obtida como a informação da posição de objeto depois do remapeamento.

[00223] Note que, na figura 16, nos respectivos campos para “OBJ1” até “OBJ6”, a informação da posição de objeto remapeada do objeto OBJ1 até o objeto OBJ6, isto é, os ângulos horizontais Azimute e os ângulos perpendiculares Elevação das posições dos objetos depois do remapeamento são representados.

[00224] Por exemplo, nos campos para o objeto OBJ1 que é denotado pelo caractere “OBJ1”, os caracteres “Azimute” e “Elevação” indicam as posições horizontal e perpendicular do objeto OBJ1 depois do remapeamento, respectivamente, e “-170,0” e “4,9” são descritos como o ângulo horizontal Azimute e o ângulo perpendicular Elevação que indicam estas posições. O ângulo horizontal Azimute “-170,0” e o ângulo perpendicular Elevação “4,9” são o ângulo horizontal Φ’’ calculado da forma representada pela Equação (16) e o ângulo perpendicular θ’ calculado da forma representada pela Equação (2), respectivamente.

[00225] No exemplo representado na figura 16, a relação posicional relativa entre todos os objetos OBJ1 até OBJ6 antes do remapeamento é substancialmente igual àquela depois do remapeamento.

[00226] Isto é, entende-se que o objeto OBJ1 e o objeto OBJ2, o objeto OBJ3 e o objeto OBJ4, e o objeto OBJ5 e o objeto OBJ6 são bilateralmente simétricos uns com os outros em relação ao segmento que conecta a origem O na posição central da tela de reprodução PSC11 na direção horizontal mesmo depois do remapeamento.

[00227] Um diagrama padrão das relações posicionais entre os objetos antes do remapeamento e depois do remapeamento neste exemplo é aquele representado na figura 17. Percebe-se que as partes correspondentes àquelas na figura 1 são denotadas pelos mesmos símbolos de referência na figura 17 e a descrição das partes será omitida conforme apropriado.

[00228] Na figura 17, a tela de referência RSC11 e o objeto OBJ1 até o objeto OBJ6 antes do remapeamento são representados em partes indicadas pelas setas A51 e A52. Mais especificamente, a tela de referência RSC11 fica localizada na posição indicada pela informação da tela de referência incorreta, e o objeto OBJ1 até o objeto OBJ6 ficam localizados nas posições indicadas pela informação da posição de objeto incorreta.

[00229] Por outro lado, a tela de reprodução PSC11 e o objeto OBJ1 até o objeto OBJ6 depois do remapeamento são representados nas partes indicadas pelas setas A53 e A54.

[00230] Neste exemplo, a tela de referência RSC11 e o objeto OBJ1 até o objeto OBJ6 antes do remapeamento indicado pelas setas A51 e A52 ficam localizados nas mesmas posições do exemplo representado na figura 7.

[00231] Além do mais, entende-se que, nas partes indicadas pelas setas A53 e A54, o objeto OBJ1, o objeto OBJ3 e o objeto OBJ5 depois do remapeamento são bilateralmente simétricos com o objeto OBJ2, o objeto OBJ4 e o objeto OBJ6 depois do remapeamento em relação ao segmento que conecta a origem O na posição central da tela de reprodução PSC11 na direção horizontal. Isto é, entende-se que a relação posicional entre os objetos visualizados a partir da posição central da tela antes do remapeamento é substancialmente igual àquela depois do remapeamento, e o remapeamento foi realizado apropriadamente.

[00232] Durante a realização dos processos supradescritos, o aparelho para processamento de informação 11 é configurado da forma representada, por exemplo, na figura 18. Percebe-se que as partes correspondentes àquelas da figura 8 são denotadas pelos mesmos símbolos de referência da figura 18 e a descrição das partes será omitida conforme apropriado.

[00233] O aparelho para processamento de informação 11 representado na figura 18 inclui a seção de cálculo do ângulo de deslocamento 21, a seção de correção da informação de posição 22 e a seção de remapeamento de objeto 23.

[00234] Neste exemplo, a informação da tela de reprodução é suprida para a seção de cálculo do ângulo de deslocamento 21 e a seção de correção da informação de posição 22.

[00235] A seção de cálculo do ângulo de deslocamento 21 calcula o ângulo de deslocamento Φoffset_value. Além do mais, a seção de cálculo do ângulo de deslocamento 21 calcula um ângulo horizontal formado entre a direção frontal do usuário U11 presente no espaço de reprodução, isto é, a direção da origem O até a posição de referência e uma direção da origem O até a posição central da tela de reprodução PSC11 como o ângulo de deslocamento da tela de reprodução Φrepro_offset_value com base na informação da tela de reprodução suprida. A seção de cálculo do ângulo de deslocamento 21 supre o ângulo de deslocamento Φoffset_value e o ângulo de deslocamento da tela de reprodução Φrepro_offset_value para a seção de correção da informação de posição 22.

[00236] O ângulo de deslocamento da tela de reprodução Φrepro_offset_value é um ângulo horizontal Azimute que indica uma quantidade de desalinhamento da posição central da tela de reprodução PSC11 a partir da posição de referência na direção do ângulo horizontal Azimute. Isto é, o ângulo de deslocamento da tela de reprodução Φrepro_offset_value é a informação que indica uma quantidade de deslocamento da tela de reprodução PSC11 a partir da posição de referência presente na direção frontal do usuário U11. Note que a informação que indica a quantidade de deslocamento da tela de reprodução PSC11 não é limitada ao ângulo de deslocamento da tela de reprodução Φrepro_offset_vaiue e pode ser qualquer informação.

[00237] A seção de correção da informação de posição 22 realiza correção não apenas para obter a informação da tela de referência corrigida e a informação da posição de objeto corrigida, mas, também, para obter a informação da tela de reprodução corrigida. A seção de correção da informação de posição 22 supre a informação da tela de referência corrigida, a informação da posição de objeto corrigida, a informação da tela de reprodução corrigida e o ângulo de deslocamento da tela de reprodução Φrepro_offset_value para a seção de remapeamento de objeto 23.

[00238] Isto é, a seção de correção da informação de posição 22 corrige a informação da tela de reprodução suprida a partir do exterior com base no ângulo de deslocamento da tela de reprodução Φrepro_offset_value suprido a partir da seção de cálculo do ângulo de deslocamento 21, e obtém a informação da tela de reprodução corrigida.

[00239] A seção de remapeamento de objeto 23 realiza o remapeamento da informação da posição de objeto, isto é, cada posição de objeto, com base na informação da tela de referência corrigida, na informação da posição de objeto corrigida, na informação da tela de reprodução corrigida e no ângulo de deslocamento da tela de reprodução Φrepro_offset_value supridos a partir da seção de correção da informação de posição 22, e transmite a informação da posição de objeto resultante.

<Descrição do processo de remapeamento>

Um processo de remapeamento realizado pelo aparelho para processamento de informação 11 representado na figura 18 será descrito a seguir em relação ao fluxograma da figura 19.

[00240] Na Etapa S41, a seção de cálculo do ângulo de deslocamento 21 calcula o ângulo de deslocamento Φoffset_vaiue e o ângulo de deslocamento da tela de reprodução Φrepro_offset_value com base na informação da tela de referência suprida e na informação da tela de reprodução suprida, e supre o ângulo de deslocamento Φoffset_value e o ângulo de deslocamento da tela de reprodução Φrepro_offset_value para a seção de correção da informação de posição 22.

[00241] Especificamente, a seção de cálculo do ângulo de deslocamento 21 calcula o ângulo de deslocamento Φoffset_value pela condução do cálculo representado pela Equação (3). Além do mais, a seção de cálculo do ângulo de deslocamento 21 calcula o ângulo de deslocamento da tela de reprodução Φrepro_offset_value pela condução do cálculo representado pela Equação (12).

[00242] Na Etapa S42, a seção de correção da informação de posição 22 corrige a informação da tela de referência, a informação da posição de objeto e a informação da tela de reprodução supridas a partir do exterior com base no ângulo de deslocamento Φoffset_value e no ângulo de deslocamento da tela de reprodução Φrepro_offset_value supridos a partir da seção de cálculo do ângulo de deslocamento 21.

[00243] Por exemplo, a seção de correção da informação de posição 22 corrige a informação da tela de referência e a informação da posição de objeto pela realização de um processo similar ao processo da Etapa S12 na figura 11, e obtém a informação da tela de referência corrigida e a informação da posição de objeto corrigida.

[00244] Além do mais, por exemplo, a seção de correção da informação de posição 22 conduz o cálculo representado pelas Equações (13) e (14) com base no ângulo de deslocamento da tela de reprodução Φrepro_offset_vaiue, desse modo, corrigindo a informação da tela de reprodução e obtendo a informação da tela de reprodução corrigida.

[00245] A seção de correção da informação de posição 22 supre a informação da tela de referência corrigida, a informação da posição de objeto corrigida, a informação da tela de reprodução corrigida e o ângulo de deslocamento da tela de reprodução Φrepro_offset_vaiue obtido como supradescrito para a seção de remapeamento de objeto 23.

[00246] Na Etapa S43, a seção de remapeamento de objeto 23 realiza o remapeamento de cada posição de objeto com base na informação da tela de referência corrigida, na informação da posição de objeto corrigida, na informação da tela de reprodução corrigida e no ângulo de deslocamento da tela de reprodução Φrepro_offset_vaiue supridos a partir da seção de correção da informação de posição 22.

[00247] Por exemplo, a seção de remapeamento de objeto 23 calcula a informação da posição de objeto que indica a posição remapeada de cada objeto pela condução do cálculo representado pelas Equações (2), (15) e (16). A seção de remapeamento de objeto 23, então, transmite a informação da posição de objeto obtida da forma supradescrita para o estágio subsequente, e o processo de remapeamento é terminado.

[00248] Desta maneira, o aparelho para processamento de informação 11 realiza o remapeamento depois da correção da informação da tela de referência, da informação da posição de objeto e da informação da tela de reprodução. O aparelho para processamento de informação 11, então, corrige a informação da posição de objeto em tanto quanto uma correção da informação da tela de reprodução. Fazendo isto, é possível realizar o remapeamento apropriado sem dependência das posições localizadas da tela de referência RSC11 e da tela de reprodução PSC11.

[00249] Na primeira modalidade e na primeira modificação da primeira modalidade, o exemplo de cálculo do ângulo de deslocamento para os ângulos horizontais e correção dos ângulos horizontais em cada uma da informação da tela de referência e da informação da posição de objeto com base no ângulo de deslocamento foi descrito. Entretanto, um processo similar pode ser realizado não apenas para os ângulos horizontais, mas, também, os ângulos perpendiculares e os ângulos perpendiculares em cada uma da informação da tela de referência e da informação da posição de objeto podem ser corrigidos.

[00250] Em um caso como este, um ângulo de deslocamento também é calculado para os ângulos perpendiculares de uma maneira similar ao caso para os ângulos horizontais. Os ângulos perpendiculares na informação da tela de referência e na informação da posição de objeto são corrigidos com base no ângulo de deslocamento calculado, e o remapeamento é, então, realizado.

[00251] Igualmente, também, na segunda modificação da primeira modalidade, os ângulos perpendiculares em cada uma da informação da tela de referência, da informação da posição de objeto e da informação da tela de reprodução podem ser corrigidos. Além do mais, a segunda modificação da primeira modalidade pode ser combinada com a primeira modificação da primeira modalidade.

[00252] Além do mais, foi descrito até aqui que, depois que a informação da tela de referência e a informação da posição de objeto forem corrigidas em conformidade com a tela de referência RSC11, a informação da posição de objeto que indica a posição de cada objeto depois do remapeamento é calculada usando a informação da tela de referência corrigida e a informação da posição de objeto corrigida obtidas pela correção. Entretanto, apenas a informação da posição de objeto, isto é, a posição de cada objeto pode ser corrigida em conformidade com a tela de referência RSC11.

[00253] Em um caso como este, depois que o ângulo de deslocamento for calculado, a informação da posição de objeto é corrigida com base no ângulo de deslocamento e usada como a informação da posição de objeto corrigida. Subsequentemente, o remapeamento de cada posição de objeto é realizado com base na informação da posição de objeto corrigida, na informação da tela de referência e na informação da tela de reprodução. Isto é, a informação da posição de objeto que indica a posição de cada objeto depois do remapeamento é calculada.

[00254] Neste particular, uma série de processos supradescrita pode ser tanto executada por hardware quanto executada por software. Quando uma série de processos for executada por software, um programa que constitui o software é instalado em um computador. Aqui, os tipos do computador incluem um computador incorporado em hardware dedicado, um computador, por exemplo, um computador pessoal de uso geral, capaz de executar várias funções pela instalação de vários programas no computador, e congêneres.

[00255] A figura 20 é um diagrama de blocos que ilustra um exemplo de uma configuração do hardware do computador que executa uma série de processos supradescritos pelo programa.

[00256] Em um computador, uma CPU (Unidade de Processamento Central) 501, uma ROM (Memória Exclusiva de Leitura) 502 e uma RAM (Memória de Acesso Aleatório) 503 são mutuamente conectadas por um barramento 504.

[00257] Uma interface de entrada / saída 505 também é conectada no barramento 504. Uma seção de entrada 506, uma seção de saída 507, uma seção de gravação 508, uma seção de comunicação 509 e uma unidade 510 são conectadas na interface de entrada / saída 505.

[00258] A seção de entrada 506 inclui um teclado, um mouse, um microfone, um elemento de formação de imagem e congêneres. A seção de saída 507 inclui um visor, um alto-falante e congêneres. A seção de gravação 508 inclui um disco rígido, uma memória não volátil e congêneres. A seção de comunicação 509 inclui uma interface de rede e congêneres. A unidade 510 aciona uma mídia de gravação removível 511, tais como um disco magnético, um disco ótico, um disco magneto-ótico ou uma memória semicondutora.

[00259] No computador configurado como exposto, a CPU 501 carrega um programa gravado, por exemplo, na seção de gravação 508 na RAM 503 por meio da interface de entrada / saída 505 e do barramento 504 e executa o programa de acordo com o que, uma série de processos supradescrita é realizada.

[00260] O programa executado pelo computador (CPU 501) pode ser provido, por exemplo, pela gravação do programa na mídia de gravação removível 511 que serve como uma mídia em pacote ou congêneres. Alternativamente, o programa pode ser provido por meio de uma mídia de transmissão com fios ou sem fio, tais como uma rede de área local, a Internet ou difusão por satélite digital.

[00261] No computador, o programa pode ser instalado na seção de gravação 508 por meio da interface de entrada / saída 505 pela anexação da mídia de gravação removível 511 na unidade 510. Alternativamente, o programa pode ser recebido pela seção de comunicação 509 por meio da mídia de transmissão com fios ou sem fio e instalado na seção de gravação 508. Em uma outra alternativa, o programa pode ser instalado na ROM 502 ou na seção de gravação 508 em antecipação.

[00262] Note que o programa executado pelo computador pode ser um programa para realizar processos em série temporal em uma ordem descrita na presente especificação ou pode ser um programa para realizar os processos tanto em paralelo quanto em sincronismo necessário, tal como o sincronismo de chamada.

[00263] Além do mais, as modalidades da presente técnica não são limitadas às modalidades supradescritas e várias mudanças e modificações podem ser feitas sem fugir do espírito da presente técnica.

[00264] Por exemplo, a presente técnica pode ter uma configuração de computação em nuvem para fazer com que uma pluralidade de aparelhos processe uma função de uma maneira compartilhada ou cooperativa.

[00265] Além do mais, cada etapa descrita nos fluxogramas expostos pode ser não apenas executada por um aparelho, mas, também executada por uma pluralidade de aparelhos de uma maneira compartilhada.

[00266] Além do mais, quando uma etapa incluir uma pluralidade de processos, a pluralidade de processos incluída em uma etapa pode ser não apenas executada por um aparelho, mas, também, executada por uma pluralidade de aparelhos de uma maneira compartilhada.

[00267] Além do mais, a presente técnica pode ser configurada como segue.

[00268] (1) Um aparelho para processamento de informação, que inclui: uma seção de cálculo de deslocamento que calcula uma quantidade de deslocamento de uma posição de uma tela de referência a partir de uma posição de referência presente em uma direção frontal de um usuário; uma seção de correção de posição que corrige uma posição de um objeto de áudio referida com a posição de referência, em conformidade com a posição da tela de referência, com base na quantidade de deslocamento; e uma seção de remapeamento que remapeia a posição do objeto de áudio em conformidade com uma posição de uma tela de reprodução com base na posição corrigida do objeto de áudio. (2) O aparelho para processamento de informação de acordo com (1), em que a seção de cálculo de deslocamento corrige a quantidade de deslocamento em um valor de correção predeterminado quando a tela de referência for colocada em uma direção para trás do usuário. (3) O aparelho para processamento de informação de acordo com (1) ou (2), em que a seção de correção de posição ajusta um valor de correção usado durante a correção da posição do objeto de áudio quando um alcance de informação que indica a posição do objeto de áudio for especificado como um alcance em um alcance predeterminado. (4) O aparelho para processamento de informação de acordo com qualquer um de (1) até (3), em que a seção de correção de posição corrige a posição da tela de referência com base na quantidade de deslocamento, e a seção de remapeamento remapeia a posição do objeto de áudio com base na posição corrigida da tela de referência e na posição corrigida do objeto de áudio. (5) Um método para processamento de informação, que inclui as etapas de: calcular uma quantidade de deslocamento de uma posição de uma tela de referência a partir de uma posição de referência presente em uma direção frontal de um usuário; corrigir uma posição de um objeto de áudio referida com a posição de referência, em conformidade com a posição da tela de referência, com base na quantidade de deslocamento; e remapear a posição do objeto de áudio em conformidade com uma posição de uma tela de reprodução com base na posição corrigida do objeto de áudio. (6) Um programa, para fazer com que um computador execute um processo que inclui as etapas de: calcular uma quantidade de deslocamento de uma posição de uma tela de referência a partir de uma posição de referência presente em uma direção frontal de um usuário; corrigir uma posição de um objeto de áudio referida com a posição de referência, em conformidade com a posição da tela de referência, com base na quantidade de deslocamento; e remapear a posição do objeto de áudio em conformidade com uma posição de uma tela de reprodução com base na posição corrigida do objeto de áudio. Lista dos Sinais de Referência 11: Aparelho para processamento de informação 21: Seção de cálculo do ângulo de deslocamento 22: Seção de correção da informação de posição 23: Seção de remapeamento de objeto

Claims

1. Aparelho para processamento de informação (11), caracterizado pelo fato de que compreende: uma seção de cálculo de deslocamento (21) que é configurada para calcular uma quantidade de deslocamento de uma posição de uma tela de referência a partir de uma posição de referência presente em uma direção frontal de um usuário; uma seção de correção de posição (22) que é configurada para corrigir uma posição de um objeto de áudio referida com a posição de referência, em conformidade com a posição da tela de referência, com base na quantidade de deslocamento; e uma seção de remapeamento (23) que é configurada para remapear a posição do objeto de áudio em conformidade com uma posição de uma tela de reprodução com base na posição corrigida do objeto de áudio, em que a seção de cálculo de deslocamento é configurada para corrigir a quantidade de deslocamento em um valor de correção predeterminado quando a tela de referência for colocada em uma direção para trás do usuário.

2. Aparelho para processamento de informação de acordo com a reivindicação 1, caracterizado pelo fato de que a seção de correção de posição é configurada para ajustar um valor de correção usado durante a correção da posição do objeto de áudio quando um alcance de informação que indica a posição do objeto de áudio for especificado como um alcance em um alcance predeterminado.

3. Aparelho para processamento de informação de acordo com a reivindicação 1, caracterizado pelo fato de que a seção de correção de posição é configurada para corrigir a posição da tela de referência com base na quantidade de deslocamento, e a seção de remapeamento é configurada para remapear a posição do objeto de áudio com base na posição corrigida da tela de referência e na posição corrigida do objeto de áudio.

4. Método para processamento de informação implementado por computador, caracterizado pelo fato de que compreende as etapas de: calcular uma quantidade de deslocamento de uma posição de uma tela de referência a partir de uma posição de referência presente em uma direção frontal de um usuário; corrigir uma posição de um objeto de áudio referida com a posição de referência, em conformidade com a posição da tela de referência, com base na quantidade de deslocamento; e remapear a posição do objeto de áudio em conformidade com uma posição de uma tela de reprodução com base na posição corrigida do objeto de áudio, em que a quantidade de deslocamento é corrigida por um valor de correção predeterminado quando a tela de referência for colocada em uma direção para trás do usuário.

5. Meio de armazenamento legível por computador caracterizado pelo fato de que compreende armazenadas em si instruções legíveis por computador que, quando executada em um processador, fazem com que o computador reaize um método como definido na reivindicação 1.