BRPI0925014B1 - Dispositivo de processamento de informação, método de processamento de informação, e, meio de gravação legível por computador - Google Patents
Dispositivo de processamento de informação, método de processamento de informação, e, meio de gravação legível por computador Download PDFInfo
- Publication number
- BRPI0925014B1 BRPI0925014B1 BRPI0925014-0A BRPI0925014A BRPI0925014B1 BR PI0925014 B1 BRPI0925014 B1 BR PI0925014B1 BR PI0925014 A BRPI0925014 A BR PI0925014A BR PI0925014 B1 BRPI0925014 B1 BR PI0925014B1
- Authority
- BR
- Brazil
- Prior art keywords
- image
- area
- display
- point
- view
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
- A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
- A63F13/426—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving on-screen location information, e.g. screen coordinates of an area at which the player is aiming with a light gun
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/50—Controlling the output signals based on the game progress
- A63F13/53—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
- A63F13/533—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game for prompting the player, e.g. by displaying a game menu
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/85—Providing additional services to players
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/003—Navigation within 3D models or images
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
- H04N1/393—Enlarging or reducing
- H04N1/3935—Enlarging or reducing with modification of image resolution, i.e. determining the values of picture elements at new relative positions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
- A63F2300/30—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
- A63F2300/308—Details of the user interface
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20016—Hierarchical, coarse-to-fine, multiscale or multiresolution image processing; Pyramid transform
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/36—Level of detail
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/04—Changes in size, position or resolution of an image
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Software Systems (AREA)
- Computer Hardware Design (AREA)
- Signal Processing (AREA)
- Computer Graphics (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Optics & Photonics (AREA)
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
dispositivo de processamento de informação, método de processamento de informação, programa de computador, meio de gravação legível por computador, e, estrutura de dados. uma imagem padrão para a qual um enlace é configurado e exibida em um dispositivo de exibição (s18). quando um usuário opera um dispositivo de entrada e o ponto de vista entra uma primeira fronteira de enlace ("s" em s20), se não há informação a ser retomada ("n" em s22), um primeiro quadro de dados de imagem em movimento é exibido como uma imagem fixa no dispositivo de exibição (s26), e se há informação de retomada("y" em s22), a informação é lida (s24) e um quadro no ponto de retomada é exibida como uma imagem fixa no dispositivo de exibição (26). quando o ponto de vista entra uma segunda fronteira de enlace (s" in 28), reprodução e exibição de uma imagem em movimento é iniciada (s30). quando um ponto sai da segunda fronteira de enlace ("s" em s32), a reprodução da imagem em movimento é parada em um quadro de um ponto da parada é exibida como uma imagem fixa, e o ponto de retomada é armazenado (s34, s36). quando o ponto de vista sai da primeira fronteira de enlace ("s" em s38), a imagem padrão a qual é exibida em s18, é exibida (s40).
Description
[001] A presente invenção se relaciona a uma tecnologia de processamento de informação para informação de processamento de acordo com uma entrada de instrução por um usuário em resposta a uma imagem exibida.
[002] Sistemas de entretenimento doméstico capazes de reproduzir imagens em movimento assim com execução de programas de jogo têm sido propostos. Em sistema de entretenimento doméstico, uma GPU gera imagens tri-dimensional usando polígonos (ver, por exemplo, documento de patente de Nr. 1).
[003] Entrementes, tecnologia capaz de ampliação ou redução de uma imagem exibida ou o movimento da imagem nas direções para cima, para baixo, para à esquerda, ou para à direita, é proposta, usando pedaços de imagem de uma pluralidade de resoluções gerada a partir de uma imagem digital tal como uma foto de alta definição. Nesta tecnologia de processamento de imagem, o tamanho de uma imagem original é reduzido em uma pluralidade de estágios para gerar imagens de diferentes resoluções a fim de representar a imagem original em uma estrutura hierárquica, onde a imagem em cada camada é dividida em uma ou mais pedaços de imagem. Normalmente, a imagem com a mais baixa resolução é composta de um pedaço de imagem. A imagem original com a mais alta resolução é composta do maior número de pedaços de imagem. Um dispositivo de processamento de imagem é configurado para ampliar ou reduzir uma imagem exibida tal que uma visão ampliada ou visão reduzida é apresentada eficientemente comutando um pedaço de imagem atualmente usada com um pedaço de imagem de uma camada diferente. Lista da técnica Relacionada [documento de patente 1] Patente dos U.S 6563999
[004] Nos anos recentes, telas de exibição de terminais têm sido aumentada em tamanho e, por conseguinte, tem se tornado possível exibir imagens de alta definição independente do tipo de dispositivo de processamento de informação. Assim sendo, pessoas podem prontamente acessar vários tipos de conteúdo visualmente atraente. Como a informação a ser exibida se torna mais complexa e avançada, conhecimento amplo e operação complexa são requeridos de modo a tomar vantagens da informação. Por conseguinte, muitas vezes existe uma negociação entre a qualidade da informação e a facilidade de operação. A criação de um conteúdo complexo incluindo imagens requer perícia adicional. Em adição, uma situação na qual usuários são requeridos para entender uma atribuição de tecla ou requerida para operar uma pluralidade de teclas no mesmo tempo que impõe um fardo aos usuários, especialmente para aqueles que não são familiarizados com a operação dos dispositivos.
[005] A presente invenção endereça a questão mencionada anteriormente, e um propósito dele é fornecer uma tecnologia capaz de implementar vários processos através de operação fácil. Um outro propósito da presente invenção é fornecer uma tecnologia para suportar a operação do usuário nas imagens exibidas.
[006] De acordo com uma modalidade da presente invenção, um dispositivo de processamento de informação é fornecido. O dispositivo de processamento de informação compreende: um dispositivo de armazenamento configurado para armazenar dados hierárquicos que compreendem dados de imagem de diferentes resoluções que estão hierárquicos em ordem de resolução; uma unidade de aquisição de informação de entrada configurada para conhecer uma solicitação de usuário para movimento de um ponto de vista em um espaço virtual que é definido por um plano de imagem e uma distância do plano de imagem; uma unidade de processamento de imagem de exibição configurada para criar uma imagem de exibição a partir dos dados hierárquicos mudando uma área a ser exibida em resposta à solicitação para mover o ponto de vista; e uma unidade de execução de objeto configurada para executar um processo que está associado com uma área pré-determinada de uma imagem, quando o ponto de vista encontra uma condição para ativar o processo, onde a condição é definida pela relação posicionai entre a área pré- determinada definida no plano de imagem e uma área que é determinada pelo ponto de vista e que é exibida em uma tela.
[007] De acordo com uma outra modalidade da presente invenção, um método de processamento de informação é fornecido. O método de processamento de informação compreende: ler de um dado hierárquico de memória que compreendem dados de imagem de diferentes resoluções que são hierárquicos em ordem de resolução e emitir os dados para um dispositivo de exibição; reconhecer uma solicitação de usuário para movimento de um ponto de vista em um espaço virtual que é definido por um plano de imagem e uma distância do plano de imagem mudando uma área a ser exibida no dispositivo de exibição em resposta à solicitação para mover o ponto de vista; e executar um processamento definido como estando associada com uma área pré-determinada de uma imagem, quando o ponto de vista encontra uma condição para ativar o processo, onde a condição é definida pela relação posicionai entre a área pré-determinada definida no plano de imagem e uma área que é determinada pelo ponto de vista e que é exibida em uma tela.
[008] De acordo com ainda uma outra modalidade da presente invenção, uma estrutura de dados para conteúdo é fornecida. A estrutura de dados para conteúdo é adaptada para associar os dados e um arquivo cada um com o outro, onde os dados são dados hierárquicos que compreendem dados de imagem de diferentes resoluções que estão hierárquicos em ordem de resolução; e onde o arquivo é um arquivo de definição configurado para descrever uma condição para ativar um processo associado com uma área pré- determinada em uma imagem exibida enquanto usando os dados hierárquicos, a condição sendo definida pela relação posicionai entre a área pré- determinada definida no plano da imagem e uma área da imagem, a área sendo exibida em uma tela e sendo determina por um ponto de vista em um espaço virtual que é definido pelo plano de imagem e a distância a partir do plano de imagem.
[009] De acordo com ainda outra modalidade da presente invenção, um dispositivo de processamento de informação é fornecido. O dispositivo de processamento de informação compreende: um dispositivo de armazenamento configurado para armazenar dados hierárquicos que compreendem dados de imagem de diferentes resoluções que estão hierárquicos em ordem de resolução; uma unidade de aquisição de informação de entrada configurada para reconhecer uma solicitação de usuário para movimento de um ponto de vista em um espaço virtual que é definido por um plano de imagem e uma distância do plano de imagem; uma unidade de processamento de imagem de exibição configurada para criar uma imagem de exibição a partir dos dados hierárquicos mudando uma área para ser exibida em resposta à solicitação para mover o ponto de vista; e uma unidade de trabalho de imagem configurada para efetuar um processo em uma pluralidade de áreas na imagem de exibição a fim de exibir as áreas com ênfase, onde a unidade de aquisição de informação de entrada ainda reconhece uma instrução de usuário para uma seleção de uma área entre a pluralidade de área exibidas com ênfase, e a unidade de processamento de imagem de exibição ainda muda a área a ser exibida em resposta à instrução para seleção.
[0010] De acordo com ainda com uma outra modalidade da presente invenção, um método de processamento de informação é fornecido. O método de processamento de informação compreende: ler de um dado hierárquico de memória que compreendem dados de imagem de diferentes resoluções que estão hierárquicos em ordem de resolução e emitir os dados para um dispositivo de exibição; reconhecer uma solicitação de usuário para movimento de um ponto de vista em um espaço virtual que é definido por um plano de imagem e uma distância do plano de imagem; mudar uma área a ser exibida no dispositivo de exibição em resposta à solicitação para mover o ponto de vista; efetuar um processo em uma pluralidade de áreas incluída na imagem de exibição afim de exibir as área com ênfase; reconhecer uma instrução de usuário para uma seleção de uma área da pluralidade de áreas exibidas com ênfase; e ainda mudar a área a ser exibida em resposta à instrução de seleção.
[0011] De acordo com ainda uma outra modalidade da presente invenção, uma estrutura de dados para conteúdo é fornecida. A estrutura de dados para conteúdo é adaptada para associar cada um com outros dados hierárquicos e dados sobre uma pluralidade de imagens, onde os dados hierárquicos compreendem dados de imagem de diferentes resoluções que estão hierárquicos em ordem de resolução, e a pluralidade de imagens estão respectivamente associadas com uma pluralidade de áreas a serem exibidas com ênfase como alvos de seleção em uma imagem que é exibida usando os dados hierárquicos, e quando uma da pluralidade de áreas é selecionada, uma imagem associada com a imagem selecionada é exibida adicionalmente após a área de exibição da imagem que é exibida usando os dados hierárquicos ser mudada.
[0012] De acordo com ainda com uma outra modalidade da presente invenção, um dispositivo de processamento de informação é fornecido. O dispositivo de processamento de informação compreende: um dispositivo de armazenamento configurado para armazenar dados hierárquicos quadro compreende dados de imagem de diferentes resoluções que estão hierárquicos na ordem de resolução; uma unidade de aquisição de informação de entrada configurada para reconhecer, via um dispositivo de entrada operada por um usuário, uma solicitação para movimento de um ponto de vista em um espaço virtual que é definido por um plano de imagem e uma distância do plano de imagem; e uma unidade de processamento de imagem de exibição configurada para criar uma imagem de exibição a partir dos dados hierárquicos mudando uma área a ser exibida em resposta à solicitação para mover o ponto de vista e configurada para criar a partir dos dados hierárquicos uma imagem de exibição de referência tendo uma menor resolução do que aquela de uma imagem sendo exibida atualmente quando o usuário executa uma operação específica via o dispositivo de entrada, onde a imagem de exibição de referência é uma de uma pluralidade de imagens de uma pluralidade de áreas correspondendo a uma pluralidade de ponto de vista dos quais as distâncias do plano de imagem são diferentes, e a uma imagem de exibição de referência é selecionada dentre uma pluralidade de imagens de exibição de referência dependendo da imagem sendo exibida atualmente.
[0013] De acordo com ainda uma outra modalidade da presente invenção, um método de processamento de informação é fornecido. O método de processamento de informação compreende: ler de um dado hierárquico de memória que compreendem dados de imagem de diferentes resoluções que estão hierárquicos em ordem de resolução e emitir os dados para um dispositivo de exibição; reconhecer, via um dispositivo de entrada operado por um usuário, uma solicitação para movimento de um ponto de vista em um espaço virtual que é definido por um plano de imagem e uma distância do plano de imagem; mudar uma área a ser exibida no dispositivo de exibição em resposta à solicitação para mover o ponto de vista; e criar a partir dos dados hierárquicos uma imagem de exibição de referência de uma menor resolução do que aquela de uma imagem sendo exibida atualmente quando o usuário executa uma operação específica via o dispositivo de entrada, onde a imagem de exibição de referência é uma de uma pluralidade de imagens de uma pluralidade de áreas correspondendo a uma pluralidade de ponto de vista dos quais as distâncias do plano de imagem são diferentes, e a uma imagem de exibição de referência é selecionada dentre a pluralidade de imagens de exibição de referência dependendo da imagem sendo exibida atualmente.
[0014] De acordo com ainda uma outra modalidade da presente invenção, uma estrutura de dados para conteúdo é fornecida. A estrutura de dados para conteúdo é adaptada para associar cada um aos outros dados hierárquicos e informação sobre dados de imagem incluída nos dados hierárquicos, onde os dados hierárquicos compreendem dados de imagem tendo diferentes resoluções que estão hierárquicos em ordem de resolução; e os dados de imagem são dados de uma pluralidade de imagens de exibição de referência de diferentes resoluções, uma das quais é selecionada, quando um usuário executa uma operação específica via um dispositivo de entrada enquanto uma imagem criada a partir dos dados hierárquicos é exibida, como um alvo a ser exibido daí em diante de acordo com uma área da imagem sendo exibida.
[0015] De acordo com ainda uma outra modalidade da presente invenção, um dispositivo de processamento de informação é fornecido. O dispositivo de processamento de informação compreende: um dispositivo de armazenamento configurado para armazenar dados de uma imagem incluindo uma área específica designando um alvo a ser submetido a zoom; uma unidade de aquisição de informação de entrada configurada para reconhecer uma solicitação de usuário para movimento de um ponto de vista em um espaço virtual que é definido por um plano de imagem e uma distância do plano de imagem; uma unidade de processamento de imagem de exibição configurada para criar uma imagem de exibição a partir dos dados da imagem mudando uma área a ser exibida em resposta à solicitação pra mover o ponto de vista; e uma unidade de controle de orientação configurada para controle a fim de orientar uma área exibida em uma tela na direção à área especificada adicionado uma movimento planar horizontal para o ponto de vista se o ponto de vista encontra uma condição de orientação enquanto o usuário executa uma operação para ampliar uma imagem, a condição de orientação sendo definida pela relação posicionai entre a área especificada e uma área que é determinada pelo ponto de vista e que é exibida em uma tela.
[0016] De acordo com ainda uma outra modalidade da presente invenção, um método de processamento de informação é fornecido. O método de processamento de informação inclui: ler dados de uma imagem incluindo uma área especificada designando um alvo a ser submetido a zoom a partir de uma memória e emitir os dados para um dispositivo de entrada; reconhecer uma solicitação de usuário para movimento de um ponto de vista em um espaço virtual que é definido por um plano de imagem e uma distância do plano de imagem; mudar uma área a ser exibida no dispositivo de entrada em resposta à solicitação para mover o ponto de vista; e orientar uma área exibida em uma tela na direção para a área especificada adicionando movimento planar horizontal para o ponto de vista se o ponto de vista encontra uma condição de orientação enquanto o usuário executa uma operação para ampliar uma imagem, a condição de orientação sendo definida pela relação posicionai entre a área especificada e uma área que é determinada pelo ponto de vista e que é exibida em uma tela.
[0017] De acordo com ainda uma outra modalidade da presente invenção, uma estrutura de dados para conteúdo é fornecida. A estrutura de dados para conteúdo é adaptada para associar dados de uma imagem, dados em uma área especificada, e uma condição de orientação cada uma com a outra: onde a área especificada está incluída na imagem e designa um alvo a ser submetido a zoom; e a condição de orientação é uma condição para adicionar um movimento planar horizontal para um ponto de vista em um espaço virtual de modo a orientar uma área exibida em uma tela na direção à área especificada enquanto o usuário executa uma operação para ampliar uma imagem, onde o espaço virtual é definido por um plano de imagem e uma distância do plano de imagem; e a condição de orientação é definida pela relação posicionai entre a área especificada e a área exibida na tela.
[0018] Combinações opcionais dos elementos constituintes mencionados anteriormente, e implementações da invenção na forma de métodos, aparelhos, sistemas, programas de computado, e mio de gravação que armazenam programas de computador também podem praticados como modos adicionais da presente invenção.
[0019] A presente invenção permite vários processos de serem realizados através de operação fácil
[0020] Fig. 1 mostra um ambiente no qual um sistema de processamento imagem de acordo com uma primeira modalidade da presente invenção é usado; Fig. 2 mostra a aparência de um dispositivo de entrada que pode ser aplicado ao sistema de processamento imagem da Fig. 1; Fig. 3 mostra um exemplo da estrutura hierárquica de dados de imagem usados na primeira modalidade; Fig. 4 mostra a configuração do dispositivo de processamento de informação de acordo com a primeira modalidade; Fig. 5 de modo esquemático mostra o fluxo de dados de imagem de acordo com a primeira modalidade; Fig. 6 de modo esquemático mostra a relação entre uma pluralidade de conjuntos de dados hierárquicos a serem exibidos de acordo com a primeira modalidade; Fig. 7 mostra, em detalhes, a configuração de uma unidade de controle de acordo com a primeira modalidade; Fig. 8 mostra um exemplo da definição de um retângulo alvo e um retângulo limitador de acordo com a primeira modalidade; Fig. 9 mostra um exemplo da definição do fator de escala do retângulo limitador de acordo com a primeira modalidade; Fig. 10 mostra a definição de um parâmetro “elevação vertical” que representa a relação de uma parte de uma tela que se projeta além da borda do retângulo limitador de acordo com a primeira modalidade; Fig- 11 mostra a definição de um parâmetro “invisibilidade” que representa a relação de uma parte do retângulo limitador que se projeta a partir da borda da tela de acordo com a primeira modalidade; Fig- 12 mostra um exemplo de um arquivo de definição escrito em XML de acordo com a primeira modalidade; Fig- 13 mostra uma relação entre o retângulo alvo, o retângulo limitador; e uma fronteira de enlace de acordo com a primeira modalidade; Fig- 14 mostra as variações da fronteira de enlace quando um parâmetro de “max_overshoot” é variado de acordo com a primeira modalidade; Fig- 15 mostra a variação da fronteira de enlace quando um parâmetro “max_mvisibility” é variado de acordo com a primeira modalidade; Fig- 16 mostra um exemplo de uma imagem exibida em um dispositivo de exibição pelo dispositivo de processamento de informação de acordo com a primeira modalidade; Fig. 17 é um fluxograma mostrando as etapas do processo de reproduzir uma imagem em movimento com um objeto incorporado de acordo com a primeira modalidade; Fig. 18 mostra um exemplo de uma imagem a ser exibida quando permitindo a um enlace de armazenamento operar como um objeto incorporado de acordo com a primeira modalidade; Fig. 19 é um fluxograma mostrando as etapas do processo do dispositivo de processamento de informação de acordo com a primeira modalidade, no caso que o dispositivo efetua um processo em uma exibição de reconhecimento de seleção como um objeto incorporado; Fig. 20 ilustra um processo de move uma área de exibição para trás quando um ponto de vista é movido arbitrariamente de acordo com a primeira modalidade; Fig. 21 mostra um exemplo de uma imagem na qual um enlace é definido de acordo com a segunda modalidade; Fig. 22 mostra em detalhe a configuração da unidade de controle de acordo com a segunda modalidade; Fig. 23 mostra variações das relações posicionais entre a área de enlace e a tela devido à diferença de ponto de vista de acordo com a segunda modalidade; Fig. 24 de modo esquemático mostra uma relação entre uma região orientada e uma região semi-orientada de acordo com a segunda modalidade; Fig. 25 de modo esquemático mostra um exemplo da definição de força de orientação versus a distância horizontal da linha central da área de enlace para o ponto de vista de acordo com a segunda modalidade; Fig. 26 é um fluxograma mostrando as etapas do processo relacionando à orientação da tela para a área de enlace e execução do enlace efetuado pelo dispositivo de processamento de informação de acordo com a segunda modalidade;
[0021] Fig. 1 mostra um ambiente no qual um sistema de processamento imagem 1 é usado de acordo com uma modalidade da presente invenção. O sistema de processamento imagem 1 compreende um dispositivo de processamento de informação 10 e um dispositivo de exibição 12. O dispositivo de processamento de informação 10 é configurado para processar conteúdo que inclui pelo menos uma função tal como processamento de imagem, reprodução de imagem em movimento, reprodução de áudio, comunicações, ou o similar. O dispositivo de exibição 12 é configurado para emitir o resultado do processamento efetuado pelo dispositivo de processamento de informação 10. O dispositivo de exibição 12 pode ser um aparelho de televisão fornecido com um monitor para emissão de imagem e um alto-falante para emissão de áudio. O dispositivo de exibição 12 pode ser conectado ao dispositivo de processamento de informação 10 através de cabo ou no modo sem fio conectado usando, por exemplo, uma LAN sem fio (Rede de Área Local).
[0022] O dispositivo de processamento de informação 10 no sistema de processamento imagem 1 pode ser conectado a uma rede externa tal com a Internet via um cabo 14 e pode baixar e adquirir software de conteúdo incluindo dados de imagem hierárquicos comprimidos, ou o similar. O dispositivo de processamento de informação 10 pode ser conectado a uma rede externa via comunicação sem fio.
[0023] O dispositivo de processamento de informação 10 pode ser dispositivo de jogos, um computador pessoal, ou o similar, e pode realizar uma função, que será descrita mais tarde, carregando software a partir de várias mídias de gravação. De acordo com a modalidade, imagens exibidas no dispositivo de exibição 12 têm o papel de uma interface de usuário usando um mecanismo de processamento de imagem, que será descrito mais tarde. Um usuário entra uma instrução para o dispositivo de processamento de informação 10 mudando imagens da tela enquanto usando um dispositivo de entrada. Processos efetuados pelo dispositivo de processamento de informação 10 em resposta à instrução entrada pode ser diferente por respectivo conteúdo. Um exemplo específico será dado mais tarde.
[0024] Conforme o usuário entra, via o dispositivo de entrada, uma solicitação para ampliar / reduzir uma área de exibição ou a rolagem da área de exibição nas direções para cima, para baixo, para à esquerda, ou para à direita enquanto visualizando uma imagem exibida no dispositivo de exibição 12, o dispositivo de entrada transmite, em resposta à entrada do usuário, um sinal de solicitação para mover, ampliar, ou reduzir a imagem de exibição para o dispositivo de processamento de informação 10. O dispositivo de processamento de informação 10 muda a imagem na tela do dispositivo de exibição 12 de acordo com o sinal. Já que tal movimento, ampliação, ou redução da imagem de exibição pode ser feito também como um movimento virtual de um ponto de vista do usuário, daqui em diante, esses processos serão coletivamente referidos como um “movimento do ponto de vista”. O dispositivo de processamento de informação 10 ainda efetua um processo associado com uma área pré-definida na ima de acordo com uma regra pré- determinada. Por exemplo, se o usuário faz ajuste de aproximação / afastamento para a área pré-definida, o dispositivo de processamento de informação 10 inicia uma operação que está associada com a área.
[0025] Fig. 2 mostra um exemplo da aparência do dispositivo de entrada 20. O dispositivo de entrada 20 é fornecido com teclas direcionais 21, bastões analógicos 27a e 27b, e quatro botões de controle 26 como um meio de operação que pode ser manipulado por um usuário. Os quatro botões 26 consistem de um botão circular 22, um botão em cruz 23, um botão quadrado 24, e um botão triangular 25.
[0026] Aos meios de operação do dispositivo de entrada 20 no sistema de processamento imagem 1 é atribuído a função de entrar uma solicitação para o movimento do ponto de vista, e.g., ampliar / reduzir a área de exibição, e entrar uma solicitação para rolar para cima, para baixo, para a esquerda ou para a direita. Por exemplo, a função de entrar uma solicitação para ampliar / reduzir a área de exibição pode ser alocada ao bastão analógico direito 27b. O usuário pode entrar uma solicitação para reduzir a área de exibição puxando o bastão analógico 27b em direção ao usuário e pode entrar uma solicitação para ampliar a área de exibição empurrando o bastão analógico 27b em direção contrária ao usuário. A função de entrar uma solicitação para rolar a área de exibição pode ser alocada às teclas direcionais 21. Pressionando as teclas direcionais 21, o usuário pode entrar uma solicitação para rolar na direção na qual as teclas direcionais 21 são pressionadas. A função de entrar uma solicitação para mover o ponto de vista pode alocada à outros meios de operação. Por exemplo, a função de entrar a solução para rolagem pode ser alocada ao bastão analógico 27a.
[0027] O dispositivo de entrada 20 tem uma função de transferir um sinal de entrada que solicita mover o ponto de vista para o dispositivo de processamento de informação 10. Na modalidade, o dispositivo de entrada 20 é configurado para ser capaz de comunicar no modo sem fio com o dispositivo de processamento de informação 10.0 dispositivo de entrada 20 e o dispositivo de processamento de informação 10 podem estabelece comunicação usando o protocolo de Bluetooth (marca comercial registrada), o protocolo IEEE802.il, ou o similar. O dispositivo de entrada dispositivo de entrada 20 pode ser conectado ao dispositivo de processamento de informação 10 via um cabo a fim de transferir o sinal solicitando mover o pv para o dispositivo de processamento de informação 10 conseqüentemente.
[0028] Fig. 3 mostra a estrutura hierárquica de dados de imagem usados na modalidade. Os dados de imagem têm uma estrutura hierárquica compreendendo uma 0-ésima camada 30, uma primeira camada 32, uma segunda camada 34, e uma terceira camada 36 na direção de profundidade (eixo z). Enquanto a figura somente mostra quatro camadas, o número de camadas não é restritivo. Daqui em diante dados de imagem tendo tal uma estrutura hierárquica serão referidos como “dados hierárquicos”.
[0029] O exemplo de dados hierárquicos mostrado na Fig. 3 tem uma estrutura hierárquica em árvore. Cada camada compreende um ou mais pedaços de imagem 38. Todos os pedaços de imagem 38 são formadas para terem o mesmo tamanho tendo o mesmo número de elementos mínimos de imagem. Por exemplo, uma imagem inclui 256 por 256 elementos mínimos de imagem. S dados de imagem nas respectivas camadas são representações de uma imagem com diferentes resoluções. A imagem original na terceira camada 36 tendo a mais alta resolução é reduzida em uma pluralidade de estágios para gerar os dados de imagem para a segunda camada 34, para primeira camada 32, e para a 0-ésima camada 30. Por exemplo, a resolução na N-ésima camada (N é um inteiro igual à ou maior do que 0) pode ser metade da resolução da (N+l)-ésima camada em ambas a direção horizontal (eixo x) e a direção vertical (eixo y).
[0030] No dispositivo de processamento de informação 10, os dados hierárquicos são comprimidos em um formato de compressão pré-definido e são armazenados em um dispositivo de armazenamento. Quando conteúdo é ativado, os dados hierárquicos são lidos a partir do dispositivo de armazenamento e decodificados. O dispositivo de processamento de informação 10 de acordo com a modalidade é fornecido com uma função de decodificação compatível com uma pluralidade de formatos de compressão. Por exemplo, o dispositivo é capaz de decodificar dados comprimidos no formato S3TC, formato JPEG, e formato JPEG2000. Compressão para os dados hierárquicos pode ser efetuada para cada pedaço de imagem. De modo alternativo, uma pluralidade de pedaços de imagem incluídas na mesma camada ou incluídas em uma pluralidade de camadas podem ser comprimidas em um momento.
[0031] Como mostrado na Fig. 3, a estrutura hierárquica dos dados hierárquicos é configurada tal que a direção horizontal é definida ao longo do eixo x, e a direção vertical é definida ao longo do eixo y, e a direção de profundidade é definida ao longo do eixo z, e por meio disso construindo uma espaço tri-dimensional virtual. O dispositivo de processamento de informação 10 deriva a distancia que a área de exibição é para ser movida referindo ao sinal solicitando mover o ponto de vista, o sinal fornecido a partir do dispositivo de entrada 20. Então o dispositivo de processamento de informação 10 usa a distância do movimento para derivar as coordenadas nos quatro cantos de um quadro (coordenadas de quadro) no espaço virtual. As coordenadas de quadro no espaço virtual são usadas para gerar uma imagem de exibição. Em lugar das coordenadas de quadro no espaço virtual, o dispositivo de processamento de informação 10 pode derivar informação identificando uma camada e as coordenadas de textura (coordenadas UV) na camada. Daqui em diante, a combinação de informação identificando a camada e as coordenadas de textura serão também referidas como coordenadas de quadro
[0032] Dados de imagem das respectivas camadas incluídas nos dados hierárquicos são configurados tal que diferentes dados de imagem tendo resoluções diferentes são discretamente localizados na direção do eixo z. Por conseguinte, quando uma imagem é para ser exibida com um particular fator de escala e o fator está entre os fatores de escala de outras camadas discretamente localizadas e assim sendo não existe nenhum dado de imagem do particular fator de escada, dados de imagem de uma camada na vizinhança do fator de escala na direção do eixo z são usados. Por exemplo, o fator de escada de uma imagem de exibição está na vizinhança da segunda camada 34, a imagem de exibição é gerada enquanto usando os dados de imagem da segunda camada. De modo a implementar isto, uma fronteira de comutação de imagens fonte é definida entre as respectivas camadas, por exemplo, no ponto médio. Se um fator de escala muda e atravessa a fronteira de comutação, os dados de imagem a serem usados para criar a imagem de exibição são comutados tal que uma imagem ampliada ou reduzida é exibida.
[0033] Fig. 4 mostra a configuração do dispositivo de processamento de informação 10. O dispositivo de processamento de informação 10 compreende uma interface aérea 40, um comutador 42, uma unidade de processamento de exibição 44, um mecanismo de disco rígido 50, uma unidade carregadora de meio de gravação 52, um mecanismo de disco 54, uma memória principal 60, uma memória de área de armazenamento temporário 70, e uma unidade de controle 100. A unidade de processamento de exibição 44 é fornecida com uma memória de quadro para armazenar temporariamente dados a serem exibido no monitor do dispositivo de exibição 12.
[0034] O comutador 42 é um comutador Ethernet (Ethernet é uma marca comercial registrada) e é um dispositivo conectado a um dispositivo externo através de cabo ou de modo sem fio a fim de transmitir e receber dados. O comutador 42 pode ser conectado a uma rede externa via o cabo 14 a fim de receber um arquivo de conteúdo incluindo dados de imagem hierárquicos comprimidos e um arquivo de definição para implementar várias funções usando a imagem. Um arquivo de conteúdo pode ainda incluir dados necessários para implementar várias funções, por exemplo, dados de imagem em movimento codificados e comprimidos, dados de música, dados associando os nomes de sítios da web e seus respectivos URLs (Locador de Recursos Uniforme) ou o similar.
[0035] O comutador 42 é conectado à interface aérea interface aérea 40. A interface aérea 40 é conectada ao dispositivo de entrada 20 usando um protocolo de comunicação sem fio pré-definido. Um sinal solicitando mover um ponto de vista, que é entrado por um usuário via o dispositivo de entrada dispositivo de entrada 20, é fornecido para a unidade de controle 100 via a interface aérea 40 e o comutador 42.
[0036] O mecanismo de disco rígido 50 funciona como um dispositivo de armazenamento para armazenar dados. Vários dados recebidos via o comutador 42 é armazenado no mecanismo de disco rígido 50. Quando um meio de gravação removível tal como um cartão de memória é montado, a unidade carregadora de meio de gravação 52 e dados a partir do meio de gravação removível. Quando um disco ROM é montado, o mecanismo de disco 54 opera e reconhece o disco ROM a fim de ler os dados. O disco ROM pode ser um disco óptico ou um disco magnético óptico. Os arquivos de conteúdo podem ser armazenados no meio de gravação.
[0037] A unidade de controle 100 é fornecido com uma CPU de múltiplos núcleos. Um núcleo de processador de propósito geral e uma pluralidade de núcleos de processadores simples sé fornecida em uma CPU única. O núcleo de processador de propósito geral é referido como uma unidade de processador de energia (PPU) e os outros núcleos de processador são referidos como unidades de processador de sinergia (SPU).
[0038] A unidade de controle 100 é fornecido com um controlador de memória conectada à memória principal 60 e à memória de área de armazenamento temporário 70. A PPU é fornecida com um registro e um processador principal como uma entidade de execução. A PPU eficientemente aloca tarefas como unidades básicas de processamento em aplicações para as respectivas SPUs. A própria PPU pode executar uma tarefa. A SPU é fornecida com um registro, um sub-processador como uma entidade em execução, e uma memória local como uma área de armazenamento local. A memória local pode ser usada como a memória de área de armazenamento temporário 70.
[0039] A memória principal 60 e a memória de área de armazenamento temporário 70 são dispositivos de armazenamento e são formados com memórias de acesso randômico (RAM). A SPU é fornecida com um controlador de acesso direto à memória dedicada (DMA) e é capaz de transferir dados de alta velocidade entre a memória principal 60 e a memória de área de armazenamento temporário 70. Transferência de dados de alta velocidade também é alcançado entre a memória de quadro na unidade de processamento de exibição 44 e a memória de área de armazenamento temporário 70. A unidade de controle 100 de acordo com a modalidade implementa processamento de imagem em alta velocidade operando uma pluralidade de SPUs em paralelo. A unidade de processamento de exibição 44 é conectada ao dispositivo de exibição 12 e emite um resultado de processamento de acordo com uma solicitação de usuário.
[0040] O dispositivo de processamento de informação 10 de acordo com a modalidade pode ser configurada para carregar antecipadamente pelo menos uma parte dos dados de imagem comprimidos a partir do mecanismo de disco rígido 50 na memória principal 60 de modo a mudar imagens de exibição suavemente conforme o ponto de vista se move. Ainda, o dispositivo de processamento de informação 10 pode ser configurado para prognosticar uma área para ser exibida no futuro com base na solicitação de usuário para mover o ponto de vista, e para decodificar uma parte dos dados de imagem comprimidos carregado na memória principal 60 e armazenar os dados decodificados na memória de área de armazenamento temporário 70. Isto permite comutação instantânea de imagens usadas para a criação da imagem de exibição em um tempo apropriado quando requerido depois.
[0041] Fig. 5 de modo esquemático mostra o fluxo de dados de imagem de acordo com a modalidade. Primeiro, os dados hierárquicos incluídos no arquivo de conteúdo são armazenados no mecanismo de disco rígido 50. Os dados podem ser armazenados em um meio de gravação montado na unidade carregadora de meio de gravação 52 ou o mecanismo de disco 54 no lugar do mecanismo de disco rígido 50. De forma alternativa, o dispositivo de processamento de informação 10 pode baixar dados hierárquicos de um servidor de imagem conectado ao dispositivo de processamento de informação 10 via a rede. Como descrito acima, os dados hierárquicos são comprimidos em um formato de comprimento fixo tal como S3TC ou um formato de comprimento variável tal como JPEG.
[0042] Dos dados hierárquicos, pelo menos uma parte dos dados de imagem são carregados na memória principal 60, enquanto mantendo um estado comprimido (S10). Uma área a ser carregada é determinada de acordo com uma regra pré-definida. Por exemplo, uma área próxima no espaço virtual para a imagem atualmente exibida, ou uma área prognosticada a ser frequentemente solicitada para exibição, com base no conteúdo da imagem ou no histórico do navegador pelo usuário, é carregada. Os dados são carregados não somente quando é solicitado mover o ponto de vista, mas também em intervalos de tempo pré-determinados. Isto previne uma carga de processamento pesada de ocorrer em um breve período de tempo.
[0043] Dos dados de imagem comprimidos armazenados na memória principal 60, dados para uma imagem de uma área requerida para exibição, ou dados para uma imagem de uma área prognosticada para ser requerida são decodificados e armazenados na memória de área de armazenamento temporário 70 (SI2). A memória de área de armazenamento temporário 70 inclui pelo menos duas áreas de armazenamento temporário 72 e 74. O tamanho das áreas de armazenamento temporário 72 e 74 é configurado para ser maior do que aquele da memória de quadro 76 tal que os dados de imagem expandis nas áreas de armazenamento temporário 72 e 74 são suficientes quando um sinal solicitando o ponto de vista a ser movido é entrado via o dispositivo de entrada 20.
[0044] Uma das áreas de armazenamento temporário 72 e 74 é uma área de memória de armazenamento temporário de exibição usada para armazenar uma imagem para criação de imagem de exibição e a outra é uma área de memória de armazenamento temporário de decodificação usada para tornar disponível uma imagem prognosticada para subsequentemente se tornar necessária. No exemplo da Fig. 5, a área de memória de armazenamento temporário 72 e em uma área de memória de armazenamento temporário de memória, a área de memória de armazenamento temporário 74 é uma área de memória de armazenamento temporário de decodificação, e uma área de exibição 68 está sendo exibida.
[0045] A seguir, das imagens armazenadas na área de memória de armazenamento temporário 72, i.e., a área de memória de armazenamento temporário de exibição, a imagem da área de exibição 68 is produzida na memória de quadro 76 (S14). Entrementes, a imagem de uma nova área é decodificada quando necessária e armazenada na área de memória de armazenamento temporário 74. A área de memória de armazenamento temporário de exibição e a área de memória de armazenamento temporário de decodificação são comutados dependendo no tempo de término de armazenamento ou o montante de deslocamento da área de exibição 68 (SI6). Isto permite comutação suave entre imagem de exibição no evento da área de exibição ser movida ou há uma mudança em escala.
[0046] O processo descrito até agora considera um modo no qual uma coordenada de quadro é movida de modo a mover, ampliar, ou reduzir a área de exibição de uma imagem de acordo com uma solicitação de usuário para mover um ponto de vista em um espaço virtual formado por um único conjunto de dados hierárquicos como mostrado na Fig. 3. Entrementes, uma pluralidade de conjuntos de dados hierárquicos pode ser fornecida pra exibição, e a imagem de exibição pode ir e voltar entre os conjuntos de dados hierárquicos. Fig. 6 de modo esquemático mostra uma relação entre uma pluralidade de conjuntos de dados hierárquicos que podem ser exibidos de acordo com tal modo.
[0047] Referindo à Fig. 6, dois triângulos indicam diferentes conjuntos de dados hierárquicos 150 e 152. Cada um dos dados hierárquicos 150 e 152 é efetivamente configurado como mostrado na Fig. 3 tal que uma pluralidade de pedaços de dados de diferentes resoluções é discretamente localizada ao longo da direção do eixo z da figura. Quando o usuário solicita ampliar / reduzir uma área de exibição via o dispositivo de entrada dispositivo de entrada 20, a exibição, i.e., o ponto de vista, move na direção do eixo z da figura. Entrementes, quando o usuário solicita mover a área de exibição para cima, para baixo, para à esquerda, ou para à direita, a imagem de exibição se move no plano horizontal da figura. Em tal um espaço virtual, os dois conjuntos de dados hierárquicos 150 e 152 estabelece dados de imagem onde dois conjuntos de dados se sobrepõe como mostrado na figura.
[0048] Quando o usuário continuamente solicita por ampliação enquanto uma imagem dos dados hierárquicos 150 é exibida, o ponto de vista se move como indicado por uma seta “a”, e entra na área dos dados hierárquicos 152. Em outras palavras, o ponto de vista se move entre os conjuntos de dados hierárquicos, dados usados para criar a imagem de exibição são comutados a partir dos dados hierárquicos 150 para os dados hierárquicos 152. Este processo pode ser implementado pelas etapas de processamento de exibir imagem descritas até agora meramente modificando os dados hierárquicos a serem carregados para a memória principal 60.
[0049] A resolução da imagem e a posição na imagem quando comutação dos dados hierárquicos 150 e 152 são pré-definidos de modo a estabelecer dados de imagem compreendendo uma pluralidade de conjuntos de dados hierárquicos conforme mostrado na Fig. 6. Esta definição é mostrada como uma linha 154 na Fig. 6. Nesta maneira, o montante de sobreposição entre os conjuntos de dados hierárquicos pode ser determinado. No exemplo ilustrado, comutação a partir dos dados hierárquicos 150 para os dados hierárquicos 152 ocorre em uma posição caracterizada pela resolução zl definida ao longo do eixo z e localizada na linha 154. Daqui em diante, tal comutação entre conjuntos de dados hierárquicos será referida como “elo”. Imagens de respectivos conjuntos de dados hierárquicos a serem comutados podem ser de uma mesma imagem de diferentes escalas, ou podem ser imagens completamente diferentes.
[0050] Como uma alternativa para a comutação da imagem de exibição para aquela dos dados hierárquicos 152, outros processos (tal como reproduzir uma imagem em movimento, reproduzir som, processamento adicional em uma imagem de exibição, mover uma área de exibição) podem ser efetuados. Neste caso, um ponto de enlace para os dados hierárquicos 150 é pré-determinado em uma maneira similar como aquele da linha 154, e se o ponto de vista atinge o ponto, um processo associado com o ponto é ativado.
[0051] Nesta maneira, um modo pode ser alcançado onde o usuário move o ponto de vista a fim de se aproximar na direção de uma determinada área enquanto olhando uma imagem dos dados hierárquicos 150, consequentemente, informação associada com a área é exibida, uma imagem em movimento associada é reproduzida, ou uma aplicação associada é ativada. Fornecendo uma pluralidade de tais áreas em um pedaço de dados de imagem, uma tela de menu pode ser formulada onde um processo é selecionado a partir de uma pluralidade de processos e consequentemente o processo selecionado é operado. Tal um processo ativado pelo movimento do ponto de vista é referido como um “objeto incorporado”. A associação entre dados de imagem e um objeto incorporada também é referido como um “elo”.
[0052] Fig. 7 mostra em detalhes a configuração da unidade de controle 100 de acordo com a modalidade. A unidade de controle 100 compreende uma unidade de aquisição de informação de entrada 102 que adquire informação entrada pelo usuário via o dispositivo de entrada 20, uma unidade de carregamento 103 que carrega um conjunto de dados hierárquicos a serem exibidos a partir do mecanismo de disco rígido 50, uma unidade de determinação de área de exibição unidade de determinação de área de exibição 104 que determina uma área de exibição de acordo com a entrada, uma unidade de decodificação 106 que decodifica dados de imagem comprimidos, e uma unidade de processamento de imagem de exibição 114 que produz imagem de exibição. A unidade de controle 100 ainda compreende uma unidade de determinação de enlace 116 que determina se um ponto de vista encontra uma condição definida de ligação, e uma unidade de execução de objeto 117 que executa um objeto incorporado.
[0053] Os elementos representados na Fig. 7 como blocos funcionais para efetuar vários processos são implementados em hardware tal como uma unidade de processamento central (CPU), memória, ou outros LSI’s, e em software tal como em programas, etc., carregados na memória. Conforme descrito acima, a unidade de controle 100 inclui uma PPU e uma pluralidade de SPUs. A PPU e as SPUs formam os blocos funcionais sozinho ou em combinação. Por conseguinte, será óbvio para aqueles com habilidade na arte que os blocos funcionais podem ser implementados em uma variedade de maneiras, tal como por hardware apenas, software apenas, ou uma combinação deles.
[0054] No mecanismo de disco rígido 50, um arquivo de conteúdo é armazenado. O arquivo de conteúdo inclui dados hierárquicos e um arquivo de definição que descreve informação em um enlace definido para os dados hierárquicos. No caso de exibir dados de imagem compreendendo imagens em uma pluralidade de conjuntos de dados hierárquicos, uma pluralidade de conjuntos de dados hierárquicos e arquivos de definição correspondendo aos respectivos conjuntos são armazenados. Conforme necessário, o arquivo de conteúdo pode ainda incluir dados requeridos para o processamento do objeto incorporado, tal como, dados de imagem em movimento, dados de som, dados de módulo de imagem, um programa de aplicação para um jogo ou o similar, etc.
[0055] De acordo com a operação do usuário via o dispositivo de entrada 20, a unidade de aquisição de informação de entrada 102 adquire informação relacionada a uma solicitação (e.g., o início / término de conteúdo, movimento do ponto de vista, etc.) proveniente do dispositivo de processamento de informação 10 e notifica a unidade de determinação de área de exibição 104 e / ou a unidade de carregamento 103 da informação, conforme necessário. Ao ser notificado a partir da unidade de aquisição de informação de entrada 102 que a solicitação para iniciar o conteúdo é feita, a unidade de carregamento 103 lê os dados hierárquicos da imagem inicial do conteúdo e o arquivo de definição dele a partir do mecanismo de disco rígido 50 e armazena os dados na memória principal 60.
[0056] Conforme necessário, a unidade de carregamento 103 ainda lê os dados hierárquicos da destinação do deslocamento do ponto de vista, dados necessários para a execução do objeto incorporado, ou o similar a partir do mecanismo de disco rígido 50 e armazena os dados na memória principal 60. Quando sendo notificado pela unidade de aquisição de informação de entrada 102 que a solicitação para mover o ponto de vista é feita, a unidade de determinação de área de exibição 104 transforme o montante de deslocamento do ponto de vista para a coordenada no espaço virtual dos dados hierárquicos, e determina a coordenada de quadro da destinação do movimento a ser exibido.
[0057] A unidade de decodificação 106 lê uma parte de dados de imagem comprimidos a partir da memória principal 60, decodifica os dados e armazena os dados decodificados na memória de área de armazenamento temporário 70. Os dados que a unidade de decodificação 106 decodifica podem ser dados de imagem de um pré-determinado tamanho incluindo a área de exibição. Decodificando uma área ampla de dados de imagem e armazenando os dados decodificados na memória de área de armazenamento temporário 70 antecipadamente, o número de acessos lido para a memória principal 60 pode ser reduzido e o ponto de vista pode ser movido suavemente.
[0058] A unidade de processamento de imagem de exibição 114 adquire a coordenada de quadro da área a ser exibida determinada pela unidade de determinação de área de exibição 104, lê correspondente dados de imagem a partir da memória de área de armazenamento temporário 70, e apresenta os dados na memória de quadro 76 da unidade de processamento de exibição 44. a unidade de determinação de enlace 116 se refere ao arquivo definido que é armazenado no memória principal 60 e está associado com o conjunto de dados hierárquicos sendo atualmente exibido. Então, a unidade de determinação de enlace 116 determina se o ponto de vista da destinação do movimento encontra ou não a condição para o enlace. Uma destinação de enlace definida de acordo com a modalidade compreende um enlace para um outro conjunto de dados hierárquicos e um enlace para um objeto incorporado.
[0059] No caso que a unidade de determinação de enlace 116 determina que a condição para o enlace para um objeto incorporada é satisfeita, a unidade de execução de objeto 117 executa o correspondente objeto incorporado. No caso um programa ou dados para executar o objeto incorporado não é armazenado na memória principal 60, a unidade de carregamento 103 carrega o programa ou dados a partir do mecanismo de disco rígido 50 para a memória principal 60. Tipos ou modos do processo executado pela unidade de execução de objeto 117 são não restritivos. Por conseguinte, a unidade de execução de objeto 117 pode executar diferentes tipos de processos conforme apropriado de acordo com a posição do ponto de vista e com a configuração do arquivo de definição.
[0060] No caso de um determinado processo é aplicado na imagem sendo atualmente exibido como a operação de um dos objetos incorporados, a unidade de execução de objeto 117 emite uma solicitação deles para a unidade de processamento de imagem de exibição 114 e a unidade de processamento de imagem de exibição 114 apresenta a imagem processada. No caso do ponto de vista para a imagem sendo atualmente exibida é movida como a operação de um dos objetos incorporados, a unidade de execução de objeto 117 emite uma solicitação dele para a unidade de determinação de área de exibição 104, e a unidade de determinação de área de exibição 104 determina a área de exibição da destinação do movimento. No caso de uma imagem em movimento ou um som é para ser reproduzido, a unidade de execução de objeto 117 lê os dados de imagem em movimento ou os dados de áudio a partir da memória principal 60, decodifica os dados, e emite para a unidade de processamento de exibição 44 ou para um alto-falante do dispositivo de exibição 12.
[0061] No caso que a unidade de determinação de enlace 116 determina que a condição para o enlace para um outro conjunto de dados hierárquicos é satisfeita, e se os dados hierárquicos da destinação do enlace não estão armazenados na memória principal 60, a unidade de carregamento 103 carrega os dados a partir do mecanismo de disco rígido 50. A unidade de determinação de área de exibição 104 adquire os resultados de determinação a partir da unidade de determinação de enlace 116 e transforma a coordenada de quadro para aquela dos dados hierárquicos da destinação do enlace, e então notifica a unidade de decodificação 106 das coordenadas junto com a informação de identificando dos dados hierárquicos. Em resposta, a unidade de decodificação 106 define os dados hierárquicos da destinação de enlace como dados que devem ser processados.
[0062] A seguir, uma explanação será dada sobre um exemplo da configuração do arquivo de definição. Fig. 8-11 mostram um exemplo da def de respectivos dados no arquivo de definição. Fig. 8 mostra um exemplo da definição de um retângulo alvo e um retângulo limitador. Na figura, o retângulo alvo 82 é uma área na imagem onde um alvo para configurar o enlace é exibido. De modo alternativo, o retângulo alvo 82 pode ser uma área retangular que circunscreve a área onde um alvo para configuração o enlace é exibido. O retângulo limitador 84 é um retângulo indicando o intervalo da posição do ponto de vista onde o enlace é determinado a ser válido. Isto é, no caso que o ponto de vista entra no retângulo limitador 84, o enlace do retângulo alvo 82 se torna válido e então a exibição é comutada para um diferente conjunto de dados hierárquicos da destinação do enlace, um objeto incorporado é ativado, etc.
[0063] Neste exemplo, o retângulo alvo 82 e o retângulo limitador 84 são definidos relativo ao retângulo de referência 80 indicando uma coordenada de referência onde a coordenada do vértice esquerdo superior é (0,0) e a coordenada do vértice direito inferior é (W, H). O retângulo de referência 80 pode ser construído como uma inteira mensagem a ser exibida. Uma unidade para a coordenada pode ser definida, por exemplo, como um elemento mínimo de imagem. Primeiro, a distância a partir do vértice esquerdo superior (0,0) do retângulo de referência 80 par ao centro do retângulo alvo 82 é definido como um parâmetro “centro”, a altura do retângulo alvo 82 é definido como um parâmetro “altura”, e a largura é definida como um parâmetro “largura”, e o retângulo alvo 82 é definido usando aqueles três parâmetros.
[0064] A distância a partir do centro do retângulo alvo 82 para o centro do retângulo limitador 84 é definido como um “desvio”, e o fato de escala do retângulo limitador 84 para o retângulo alvo 82 é definido usando aqueles dois parâmetros. Consequentemente, a altura do retângulo limitador 84 é a “altura” vezes a “escala”, e a largura do retângulo limitador 84 é a “largura” vezes a “escala” como mostrado na figura. Embora o parâmetro “centro” e o parâmetro “desvio” têm um componente horizontal e uma componente vertical respectivamente, os componentes são representados coletivamente na figura.
[0065] Fig. 9 mostra um exemplo da definição do fator de escala do retângulo limitador. De acordo com a modalidade, a área de exibição não somente se move em uma determinada superfície plana, mas também aceita os movimentos ao longo do eixo z no espaço virtual descrito acima (i.e., a ampliação ou redução de uma imagem). Por conseguinte, utilizando o movimento para a definição de um enlace, o enlace pode ser definido em detalhes com variações abundantes enquanto sendo fácil de entender para um usuário. Como um dos métodos para definir o enlace, um limite superior e / ou um limite inferior do fator de escala do retângulo limitador pode ser configurado.
[0066] Na Fig. 9, o retângulo tendo altura h e largura w representa a tela 86 do dispositivo de exibição. Um retângulo 88 é formado estendendo o retângulo limitador 84 na direção vertical ou na direção horizontal, tal que o retângulo 88 tem a relação de aspecto da tela 86 (i.e., h:w). O fator de escala do retângulo 88 para a tela 86 é definido como um parâmetro de “zoom” que indica o fator de escala do retângulo limitador 84. Consequentemente, o comprimento vertical e o comprimento horizontal do retângulo 88 são “h” vezes “zoom” e “w” vezes “zoom”, respectivamente como mostrado na figura.
[0067] Fig. 10 e 11 mostra a definição da relação posicionai entre o retângulo limitador e uma área exibida na tela (daqui em diante, referido meramente como uma “tela”). Fig. 10 mostra a definição de um parâmetro “elevação vertical” representando a relação de uma parte de uma tela que se projeta da borda do retângulo limitador. Fig. 10 mostra três padrões como a tela: telas 86a, 86b e 86c. Na Fig. 10, “a” indica o comprimento da parte da tela que se projeta a partir da borda do retângulo limitador 84 na direção horizontal (tela 86a, 86b), e “b” indica o comprimento de parte da tela que se projeta a partir da borda na direção vertical (tela 86c), respectivamente. O parâmetro “elevação vertical” é definido como max(a/w, b/h). Isto é, quando retângulo limitador se projeta a partir da borda da tela em uma da direção vertical ou horizontal, o parâmetro é definido como a relação do comprimento da parte que se projeto a partir da borda (a ou b) para o comprimento da tela (w ou h). Quando o retângulo limitador se projeta a partir da borda da tela em ambas direções, a maior relação é adotada como o parâmetro.
[0068] Fig. 11 mostra a definição de um parâmetro “invisibilidade” representando a relação de uma parte do retângulo limitador que se projeta a partir da borda da tela. Fig. 11 mostra três padrões dos retângulos limitadores: retângulos limitadores 84a, 84b e 84c. Na figura “c” indica o comprimento de parte do retângulo que se projeta a partir da borda da tela 86 na direção horizontal (retângulo limitador 84a, 84b), e “d” indica o comprimento de parte do retângulo limitador que se projeta a partir da borda na direção vertical (retângulo limitador 84c), respectivamente. O parâmetro “invisibilidade” é definido como max(c/largura x escala, d/altura x escala). Isto é, quando o retângulo limitador se projeta a partir da borda da tela em uma da direção vertical ou horizontal, o parâmetro é definido como a relação do comprimento da parte que se projeta a partir da borda (c ou d) para o comprimento do retângulo limitador (largura x escala ou altura x escala). Quando o retângulo limitador se projeta a partir da borda da tela em ambas as direções, a maior relação é adotada como parâmetro.
[0069] Fig. dispositivo de exibição 12 mostra um exemplo do arquivo de definição descrito em XML, usando os parâmetros descritos acima, Nas linhas 91) à (4) do arquivo de definição 200 exemplar, uma descrição é fornecida considerando a posição original dos correspondentes dados hierárquicos, e o fator de escala no momento de exibir a posição original é definido como o parâmetro “zoom” na linha (3) usando um atributo “vista”. A “posição original” é uma imagem inicial do conteúdo, i.e., uma área de exibição que pode ser exibida pressionando um pré-determinado botão do dispositivo de entrada dispositivo de entrada 20. Neste exemplo, uma imagem do fator de escala 0,85 é definida como a posição original.
[0070] Nas linhas (6) à (9), uma descrição é determinada considerando um intervalo que pode ser exibido, onde o intervalo do ponto de vista é definido usando o atributo “limite” na linha (8). Um parâmetro “estiramento” é um fator de escala indicando de quantos elementos mínimos de imagem um elemento mínimo de imagem da camada de mais alta resolução dos dados hierárquicos é estendido. Em outras palavras, o parâmetro é a relação da resolução do dispositivo de exibição para a resolução da imagem. Por exemplo, se uma área de 960 por 960 elementos mínimos de imagem de uma imagem de 19200 por 10800 elementos mínimos de imagem como um todo é exibida no dispositivo de entrada tendo a resolução de 1920 por 1080 elementos mínimos de imagem, o parâmetro “estiramento” é configurado para “2,0”. Na Fig 12., o limite superior para o parâmetro é configurado como “max_estiramento”.
[0071] Definindo esta maneira, o fator de escala máximo permitido quando exibindo na tela pode ser ajustado automaticamente de acordo com a resolução dos respectivos dispositivos de exibição. Por conseguinte, imagem pode ser exibida em uma similar qualidade de imagem independente da resolução de respectivos dispositivos de exibição. Adicionalmente, “min_zoom” que é o limite inferior do parâmetro “zoom” descrito acima, e o “max_overshoot” que é o limite superior do parâmetro “elevação vertical” descrito acima são definidos como um intervalo permitido quando da exibição. Neste exemplo, o limite inferior do fator de escala definido pelo parâmetro “zoom” é definido como “0,85” e a relação de uma parte da tela que se projeta a partir da borda de uma imagem é definida como “0,5”. Usuários podem mover e/ou ampliar / reduzir a imagem de exibição dentro do intervalo definido.
[0072] Nas linhas (11) à (16), uma descrição é dada considerando o enlace para um outro conjunto de dados hierárquicos. As linhas 912) e (13) definem o retângulo alvo do enlace. O atributo “alvo” define o caminho do arquivo de definição da destinação do enlace. O atributo “direção” define a direção (e.g., direção de ampliação ou direção de redução) que aciona a comutação para dados hierárquicos da destinação do enlace. No exemplo mostrado na Fig. 12, o arquivo de atributo dos dados hierárquicos da destinação do enlace é definido como “a.xml”, e a direção do enlace é configurado como “para frente”, i.e., os dados são comutados quando da ampliação. O arquivo de atributo e o conjunto de dados hierárquicos estão associados, por exemplo, usando um mesmo nome de arquivo exceto para a parte de extensão.
[0073] Em adição, a posição do retângulo alvo é definida pelo “centro_x” e o “centro_y”, que são os componentes horizontal e vertical do parâmetro “centro” descrito acima, respectivamente. O tamanho do retângulo é definido pelo parâmetro “largura” e pelo parâmetro “altura”.
[0074] Nas linhas (cabo 14) e 915), uma “fronteira limite de enlace” com o qual o enlace é determinado ser válido é definido usando o atributo “limite”. A “fronteira limite de enlace” é uma extensão estando na direção do eixo z no espaço virtual. A extensão é definida pelo atributo “limite”. Se o ponto de vista entra na fronteira limite de enlace, a condição do enlace é determinada ser satisfeita. O atributo “ação” é configurado como “salto” na linha (cabo 14), que define que os dados hierárquicos são comutados no caso que o ponto de vista entra na fronteira de enlace desta configuração.
[0075] Fig. 13 mostra uma relação entre o retângulo alvo 82, o retângulo limitador 84, e a fronteira limite de enlace. Na figura, o plano horizontal incluindo o retângulo alvo 82 representa o plano de imagem, e a direção vertical representa ampliação ou redução da imagem, i.e., a distância do ponto de vista a partir do plano de imagem. O retângulo 90 inscrito no retângulo alvo 82 é uma imagem dos dados hierárquicos da destinação do enlace. O retângulo limitador 84 é definido sobre o plano de imagem do retângulo alvo 82 em uma maneira similar conforme mostrado na Fig. 9.
[0076] De acordo com a modalidade, se o ponto de vista se move no espaço tal como aquele mostrado na figura e fica perto do retângulo alvo 82, o enlace é configurado para ser válido. Por conseguinte, validade ou invalidade de um enlace pode ser definido não somente pela posição no plano de imagem mas também pela proximidade do ponto de vista. Assim sendo a fronteira de enlace é formado de modo tri-dimensional em contraste com o plano de imagem conforme mostrado na figura.
[0077] Referindo de volta à Fig. dispositivo de exibição dispositivo de exibição 12, linha (15) do arquivo de definição define o tamanho do retângulo limitador com o parâmetro “escala” descrito acima, e a posição com parâmetros “desvio_x” e “desvio_y”, que são o componente horizontal e componente vertical do parâmetro “desvio” descrito acima respectivamente. Adicionalmente, de modo a definir a fronteira de enlace de acordo com a proximidade do ponto de vista, o limite superior da relação de uma parte da tela que se propaga a partir do retângulo limitador, “max_overshoot” e o fator de escala mínimo do retângulo limitador, “min_zoom” são definidos. A explanação sobre a vantagem de definir o parâmetro “max_overshoot” será dado mais tarde.
[0078] Nas linhas (18) à (23), uma descrição é dada considerando a reprodução de imagem em movimento incluída nos objetos incorporados. Na linha (19), um arquivo de imagem em movimento a ser incorporado é definido como “b.mp4” pelo atributo “source”. Na linha (dispositivo de entrada 20), o retângulo alvo é definido em uma maneira similar conforme mostrado na linha (13). Adicionalmente, linhas (21) e (22) define a fronteira de enlace para executar a reprodução de uma imagem pelo atributo “limite”. A fronteira de enlace é similar àquele mostrado na Fig. 13. A imagem em movimento é exibida no centro do retângulo alvo com uma posição e um tamanho que permite à imagem em movimento ser inscrita no retângulo alvo.
[0079] A linha (21) que configura o atributo “ação” como “show” define uma condição para comutar uma imagem exibida para uma imagem preliminar antes de efetivamente exibir uma imagem em movimento. Como a imagem preliminar, por exemplo, o primeiro quadro da imagem em movimento é exibido como uma imagem fixa. A linha (22) que configura o atributo “ação” como “play” define uma condição para reproduzir a imagem em movimento e exibir a imagem como uma imagem em movimento. Isto permite a realização de um modo onde fazer ajuste de aproximação / afastamento para o retângulo alvo que exibe o título da imagem em movimento primeiro permite à imagem fixa do primeiro quadro ser exibida, e adicionalmente, consequentemente, ampliação do retângulo alvo permite à imagem em movimento ser reproduzida.
[0080] Exemplo de definição da Fig. 12 é um tal caso. De acordo com o caso da figura, quando o parâmetro “min_zoom” é “0, dispositivo de entrada 20”, o primeiro quadro é exibido (linha (teclas direcionais 21)), e quando o parâmetro “min_zoom” é “0,35”, a imagem em movimento é reproduzida. Permitindo configurar duas etapas de operações nesta maneira elimina o problema onde meramente trazendo o ponto de vista próximo a uma área causa a exibição de uma imagem em movimento mesmo não sendo necessário. Adicionalmente, o atraso de tempo que surge pelo tempo da exibição da imagem em movimento pode ser absorvido pela primeira etapa onde uma imagem fixa é exibida. No caso que o ponto de vista deixa a fronteira de enlace para reprodução da imagem em movimento, a reprodução da imagem em movimento também para. Nesta etapa, enquanto o ponto de vista está dentro da fronteira de enlace para a primeira etapa de exibir uma imagem fixa, uma imagem de quadro do momento quando a reprodução da imagem em movimento é suspensa, é exibida como uma imagem fixa.
[0081] Linhas (21) e (22) adicionalmente define, para cada atributo “ação”, “max_overshoot” que é o limite superior da relação de uma parte da tela que se projeta a partir do retângulo limitador que se projeta a partir de uma tela, respectivamente. Uma explanação sobre a vantagem de definir o parâmetro “max_invisibility” será dada mais tarde.
[0082] Nas linhas (25) à (29), uma descrição é dada considerando a reprodução de som incluído nos objetos incorporados. Na linha (26), um arquivo de áudio a ser incorporado é definido como “c.mp3” pelo atributo “source”. Na linha (27), o retângulo alvo do objeto incorporado é definido em uma maneira similar àquela mostrada na linha (20). Adicionalmente, linha (28) define a fronteira de enlace para executar a reprodução de som pelo atributo “limite” em uma maneira similar que aquela de reproduzir uma imagem em movimento. Contudo, o atributo “ação” define somente “play” que indica reprodução.
[0083] Também no caso de reproduzir sons, se o ponto de vista entra na fronteira limite de enlace, a reprodução de um som é iniciada, e se o ponto de vista deixa a fronteira limite de enlace, a reprodução de um som é suspensa. De forma alternativa, se um outro som foi reproduzido originalmente, os sons são comutados. Para ambos os casos de uma imagem em movimento e um som, um processo de retomada pode ser aplicado. No processo de retomada, quando a reprodução é suspensa, um ponto de suspensão na seqüência de dados da imagem em movimento ou do som pode ser armazenado na memória principal 60 ou o similar, e no caos que o ponto de vista entra na fronteira de enlace de novo, a reprodução é iniciada a partir do ponto de suspensão.
[0084] Nas linhas (31) à (35)1, uma descrição é dada considerando o enlace para uma loja na rede (elo de loja) incluído nos objetos incorporados. A linha (32) define a informação de identificando do depósito, tal como o nome ou o similar, como “loja AAA” pelo atributo “source”. A linha (33) define o retângulo alvo do enlace de loja em uma maneira similar conforme descrito acima. Um outro arquivo para associar a informação de identificação da loja e a posição na rede tal como uma URL ou ou o similar é armazenado na memória principal 60.
[0085] A linha (34) define a fronteira de enlace que permite mover para o sítio da loja pelo atributo “limite” em uma maneira similar conforme descrito acima. Definindo o atributo “ação” como “show_link”, um processo considerando o enlace para a loja é definido. O processo considerando o enlace é, por exemplo, um processo na imagem de exibição, por exemplo, exibindo um indicador mostrando que é possível mover para o sítio da web da loja. As configurações descritas nas linhas (31) à (35) pode não necessariamente ser o enlace para a loja, mas pode ser um enlace para o sítio publicado na rede além da loja, um enlace para um arquivo armazenado em disco rígido, ou o similar.
[0086] Nas linhas (37) à (67), uma descrição é dada considerando uma exibição de reconhecimento de seleção incluído nos objetos incorporados. A exibição de reconhecimento de seleção é um processo onde uma área que pode ser um alvo para ampliação (por exemplo, uma área onde um enlace é definido, ou o similar) é exibida com uma ênfase como uma opção, e se um usuário seleciona uma de tais áreas, uma imagem é movida para a área selecionada, Por exemplo, no caso que há uma pluralidade de áreas para o qual um enlace é definido, a cor de cada área é mudada no ponto do tempo quando a área é exibida em um fator de escala que permite ao usuário selecionar a área, de forma a indicar que o usuário pode selecionar aquela área. Quando pressionando para baixo uma tecla indicando uma direção (e.g., as teclas direcionais 21) do dispositivo de entrada 20 nesta situação, a área selecionada é movida. Quando efetuando operação de seleção usando o botão circular 22 ou o similar, o ponto de vista é deslocado tal que a área selecionada é posicionada no centro da tela ou tal que à área é submetida a ajuste de aproximação / afastamento. Isto simplifica o movimento do ponto de vista e permite movimento efetivo para uma destinação de enlace desejada ou para uma parte desejada da imagem.
[0087] A linha (39) define uma “fronteira limite de enlace” para reconhecer a seleção pelo atributo “limite”. Os parâmetros a serem definidos são similares àqueles descritos anteriormente. As linhas (interface aérea 40) à (43), linhas (44) à (47), linhas (48) à (51), e linhas (52) à (66) especificam os retângulos por opções pelo atributo “opção” respectivamente. Para cada opção, a cor é especificada pelo atributo “frame_color”. Isto permite aos retângulos por opções serem exibidos com ênfase. Ainda, a posição e o tamanho de cada retângulo são definidos em uma maneira similar que àquela do retângulo alvo.
[0088] Em adição, um ponto de vista para uma exibição do caso que uma das opções seja selecionada é definido pelo atributo “vista”. Os parâmetros usados para a definição são similares àqueles descritos anteriormente. É indicado que as opções definidas nas linhas (52) à (66) inclui opções descendentes definido nas linhas (55) à (65). Explicitamente indicando isto, as opções descendentes podem ser omitidas a partir das opções a serem selecionadas quando a seleção por opções antecedentes é para ser reconhecido.
[0089] A seguir, uma explanação será dada no parâmetro “max_overshoot” e o parâmetro “max_invisibility”. Fig. 14 mostra as variações da fronteira de enlace quando o parâmetro “max_overshoot” é variado. Conforme mostrando na caixa 94, a figura representa a visão lateral da relação posicionai entre o campo de visão 98 visto a partir do ponto de vista 96, e um retângulo limitador 84 e indica as variações da fronteira de enlace onde o parâmetro “max_overshoot” varia como 0,0. 0,25, 0,5, 0.75 e 1,0.
[0090] Primeiro, assuma o caso onde o “max_overshoot” é 0,0, i.e., onde o parâmetro é definido tal que a tela não se projeta a partir da borda do retângulo limitador. Já que a base do triângulo representando o campo de visão (i.e., a tela) para o ponto de vista 96a está incluída na região lateral superior do retângulo limitador 84, a tela para o ponto de vista 96a não se projeta a partir da borda do retângulo limitador. Entretanto no caso do ponto de vista 96b, a base do triângulo que representa o campo de visão de ponto de vista 96b se projeta a partir da região lateral superior do retângulo limitador 84, i.e. a área em volta do retângulo limitador 84 também está incluída na tela. Por conseguinte, o ponto de vista 96b está fora da fronteira limite de enlace.
[0091] Considerando nesta maneira, o fronteira de enlace da classe de ponto de vista que encontram a condição que o “max_overshoot” se igual a 0,0 forma uma forma como aquela da fronteira de enlace 92a. Consideração similar se aplica aos casos na direção do eixo o parâmetro “max_overshoot” é 0,25, 9,5, 0,75 e 1,0, respectivamente. No caso do “max_overshoot” ser 0,25, o enlace é configurado para ser válido mesmo se um quarto da tela se projeta a partir da borda do retângulo limitador 84. Em outras palavras, é permitido em alguns casos ver o retângulo limitador 84 a partir de posição mais elevada e a área em volta do retângulo limitador 84 está incluída no campo de visão. Por conseguinte, a fronteira de enlace 92b onde o parâmetro “max_overshoot” é 0,25 apresenta uma forma mais alta do que a fronteira de enlace 92a.
[0092] Em uma maneira similar, conforme o “max_overshoot” aumenta (0,5, 0,75, e 1,0), a forma da fronteira de enlace varia em uma maneira mostrada como a fronteira de enlace 92c, 92d, e 92e, respectivamente. Isto é, como o ponto de vista está em uma posição mais elevada, o retângulo limitador 84 é mais provável de estar incluído na ela. Isto é, permitindo um montante adicional de projeção para fora da tela, o intervalo dos ponto de vista que satisfazem a condição se expande mais em uma posição mais elevada. Assim sendo, a fronteira de enlace apresenta uma forma mais ampla conforme o ponto de vista esteja em uma posição mais elevada. Nesta maneira, a introdução do parâmetro “max_overshoot” pode fornecer uma fronteira indicando validade / invalidade do enlace com relação à mudança na aparência do retângulo limitador e consequentemente com relação à mudança na aparência de uma área onde um enlace é definido, onde a mudança na aparência é causada pelo movimento do ponto de vista em um espaço tri-dimensional incluindo a direção vertical.
[0093] No caso de manipular o bastão analógico 27a ou o similar do dispositivo de entrada 20 de modo a mover a área de exibição na direção horizontal e vertical, as distâncias de movimento da imagem diferem dependendo da altura da posição do ponto de vista. O parâmetro “max_overshoot” permite a região onde o enlace é configurado válido para varia prontamente de acordo com a altura do ponto de vista, o que permite a operação que leva em consideração a altura do ponto de vista.
[0094] Fig. 15 mostra a variação da fronteira de enlace quando o “maxjnvisibility” é variado. A Fig. 15 é representada em uma maneira similar que aquela da Fig. 14. Primeiro, assuma um caso onde o “maxjnvisibility” é “0,0”, i.e. onde o parâmetro é definido tal que o retângulo limitador não se projeta para fora da borda da tela. Já que o retângulo limitador está incluído na região lateral inferior da base do triângulo representando o campo de visão (i.e., a tela), o retângulo limitador 84 se projeta da área lateral inferior da base do triângulo que representa o campo de visão, i.e., a área em volta do retângulo limitador também está incluída na tela, Por conseguinte, o ponto de vista 96d está fora da fronteira limite de enlace.
[0095] O parâmetro “maxjnvisibility” é, em uma maneira similar com o parâmetro “max_overshoot”, um parâmetro para validar o enlace quando o retângulo limitador 84 está dentro da tela. Contudo, a variação do intervalo da fronteira de enlace versus a variação da altura do ponto de vista difere daquele do parâmetro “max_overshoot”, Por exemplo, no caso que o “maxjnvisibility” é “0,0”, um ponto de vista em posição mais baixa acarreta fazer ajuste de aproximação / afastamento muito próximo ao retângulo limitador 84, e assim sendo, resulta no retângulo limitador se projetando da tela. Por conseguinte, tais ponto de vista não estão incluídos na fronteira limite de enlace. Ao contrário, um ponto de vista em uma posição mais alta reduz a probabilidade de projeção da fronteira de enlace para fora da tela. Por conseguinte, a região do ponto de vista limitada pela fronteira de enlace se torna mais ampla em uma posição mais alta.
[0096] Considerando nesta maneira, a fronteira de enlace de uma classe de pontos de vista que encontram a condição que o parâmetro “max_invisibility” é igual a “0.0” apresenta uma forma como aquela da fronteira de enlace 92f. Considerações similares também se aplicam aos casos onde o parâmetro “max_invisibility” se iguala a 0,25, 0,5, 0,75, e 1,0, respectivamente. Como o parâmetro “max_invisibility” aumenta (0,25, 0,5, 0,75, e 1,0), já que uma projeção do retângulo limitador 84 da tela é permitida também para o ponto de vista mais baixos, a largura da fronteira de enlace se toma mais ampla. Assim a forma da fronteira de enlace varia conforme mostrado como a fronteira de enlace 92g, 92h, 92i, e 92j.
[0097] De acordo com a modalidade, o ponto de vista pode ser movido livremente no espaço tri-dimensional incluindo a direção da altura na medida em que o ponto de vista está dentro de uma região pré-determinada. Por conseguinte, acontece algumas vezes que a área de exibição é movida na direção horizontal enquanto sendo exibida com uma grande escala de ampliação. Em tal operação, no caso em que a tela entra, por acaso, em uma área onde um objeto incorporado é definido, uma imagem em movimento poderia ser reproduzida ou uma tela de um enlace de loja poderia ser exibida no momento quanto não pretendido. A relação de uma parte projetada do retângulo limitador a partir da tela funciona como um indicador para determinar se a tela está ou não intencionalmente posicionada no retângulo limitador pelo usuário.
[0098] Quando o usuário deseja permitir ao objeto incorporado ser ativado, o usuário usualmente posiciona a tela no retângulo limitador 84 intencionalmente. Por conseguinte, o parâmetro “max_invisibility” é introduzido para definir a fronteira de enlace de um objeto incorporado. Por outro lado, já que a comutação de uma imagem para uma imagem em um conjunto diferente de dados hierárquicos é preferivelmente efetuada sem interrupção mesmo para o movimento do ponto de vista na direção horizontal em uma grande escala de ampliação, o parâmetro “max_overshoot” é eficaz.
[0099] A seguir, uma explanação será dada na operação do q0 configurado como descrito acima. Fig. 16 mostra um exemplo de uma imagem exibida no dispositivo de exibição 12 pelo dispositivo de processamento de informação 10. A imagem de exibição 300 é, por exemplo, uma imagem inicial de conteúdo. O conteúdo pode ser vários tipos de conteúdo, por exemplo, software tal como um jogo, conteúdo para exibir uma promoção de música, filme, ou o similar, conteúdo para uma loja de departamento virtual compreendendo lojas na rede, conteúdo para uma biblioteca virtual exibido o conteúdo de um livro, uma combinação deles, ou o similar.
[00100] Definido no arquivo de definição a imagem de exibição 300 como a posição original, a imagem é configurada como a imagem inicial. Na imagem de exibição 300, seis enlaces (i.e. opções) das áreas retangulares 301, 302, 304, 306, 308a e 310 são definidas. O tipo de enlace pode ser ou uma comutação da imagem de exibição para uma imagem em um diferente conjunto de dados hierárquicos, ou um objeto incorporado. Os retângulos são configurados por respectivos enlaces no arquivo de definição tal que os retângulos alvo circunscrevem as respectivas áreas retangulares. O retângulo limitador e a área de fronteira de limite de enlace também são definidas como descrito acima embora não explicitamente indicado na imagem de exibição 300.
[00101] Usuário move o ponto de vista usando o dispositivo de entrada 20 enquanto vendo a imagem de exibição 300 e faz ajuste de aproximação / afastamento para uma área retangular que interessa ao usuário. Quando o ponto de vista entra em uma fronteira de enlace definida pela área retangular, um processo (e.g., a comutação de dados hierárquicos, a operação de um objeto incorporado, ou similar) correspondendo à área retangular é efetuado.
[00102] Fig. 17 mostra as etapas do processo de reproduzir uma imagem em movimento como um objeto incorporado. De acordo com o exemplo do arquivo de definição mostrado na Fig. 12 um objeto para reproduzir uma imagem em movimento é executado em dois estágios. Isto é, um estágio para reproduzir um determinado quadro como uma imagem fixa, e um estágio para reproduzir uma imagem em movimento. A área de fronteira de limite de enlace definida para a reprodução da imagem fixa é referida como uma ‘primeira área de fronteira de limite de enlace” e a fronteira de enlace definida para reprodução da imagem em movimento é referida como uma “segunda fronteira de enlace”. Primeiro, em um estado onde o ponto de vista está fora da primeira fronteira limite de enlace, uma imagem padrão determinada antecipadamente, tal como uma imagem título da imagem em movimento, um anúncio, ou o similar, é exibida (SI8). Esta imagem padrão é uma parte dos dados hierárquicos da imagem sendo corrente exibida, tal como uma imagem inicial ou o similar, e corresponde à imagem da área retangular 301 ou o similar na imagem de exibição imagem de exibição 300 da Fig. 16.
[00103] Neste estado, a unidade de determinação de enlace 116 monitora se o ponto de vista entra ou não na primeira área de fronteira de limite de enlace (S20). Se o usuário opera o dispositivo de entrada 20 e se o ponto de vista entra na primeira fronteira de enlace (S em S20), a unidade de execução de objeto 117 é notificada disso e a unidade de execução de objeto 117 ser refere à área pré-definida da memória principal 60 e verifica se informação indicando que a retomada é ou não requerida existe (S22). No caso que a mesma imagem em movimento foi reproduzida antes, o ponto de suspensão foi armazenado na memória principal 60 como o ponto de retomada. Se a informação existe (S em S22), a informação é lida (S24). Se a informação indicando que a retomada é requerida não existe (N em S22), o primeiro quadro dos dados da imagem em movimento lidos da 6- são apresentados e exibidos no dispositivo de exibição 12 como uma imagem fixa. Se a informação de retomada existe (S em S22, S24), o quadro do ponto de retomas é apresentado e exibido no dispositivo de exibição 12 como uma imagem fixa (S26).
[00104] Em paralelo a este processo, a unidade de determinação de enlace 116 monitora se o ponto de vista entra ou na segunda fronteira de enlace (S28). Se o ponto de vista entra na segunda fronteira de enlace (S em S28), a unidade de execução de objeto 117 inicia a reprodução e a exibição da imagem em movimento (S30). Também neste processo, se o ponto de retomada é lido na etapa S24, a imagem em movimento é reproduzida a partir do ponto. De forma alternativa, em um estágio anterior onde o ponto de vista ainda não entrou na segunda fronteira limite de enlace, o processo para reproduzir a imagem em movimento pode ser iniciado de modo especulativo enquanto exibindo a imagem fixa. Nesta maneira, a imagem em movimento pode ser exibida suavemente quando o ponto de vista entra na segunda fronteira de enlace na etapa S28.
[00105] Em paralelo com a exibição da imagem em movimento, a unidade de determinação de enlace 116 monitora se o ponto de vista deixa ou não a segunda fronteira de enlace (S32). Se o ponto de vista sai da segunda fronteira de enlace (S em S32), a unidade de execução de objeto 117 suspende a reprodução da imagem em movimento e exibe o quadro suspenso como uma imagem fixa (S34). Adicionalmente, a unidade de execução de objeto 117 armazena o ponto suspenso como o ponto de resumo na memória principal 60 (S36). Ainda, a unidade de determinação de enlace 116 determina se o ponto de vista deixa a primeira fronteira de enlace (S38). Se o ponto de vista sai da primeira fronteira de enlace (S em S38), informação disto é notificado para a unidade de determinação de área de exibição 104 e uma imagem dos dados hierárquicos anteriores (e.g., uma imagem padrão tal com a imagem título exibida na etapa SI8 ou o similar) é exibida (S40). De acordo com a operação descrita acima, um modo onde a reprodução de uma imagem em movimento em resposta ao fazer ajuste de aproximação / afastamento para uma área onde um enlace é definido, enquanto comutando a exibição em dois estágios, pode ser implementado.
[00106] Na prática, a unidade de determinação de enlace 116 de modo constante monitora a posição do ponto de vista e determina se o ponto de vista está ou não dentro ou fora de uma fronteira de enlace definida. Assim sendo, por exemplo, enquanto exibindo um determinado quadro na etapa S26, no caso que o ponto de vista deixa a primeira fronteira de enlace sem entrar na segunda fronteira limite de enlace, o processo se desloca para a etapa S40 de exibição da imagem padrão.
[00107] Etapas similares do processo são efetuadas para a reprodução de sons. Neste processo, uma fronteira de enlace pode ser fornecida e comutação meramente entre reprodução / não reprodução de sons pode ser efetuada em uma maneira similar conforme mostrado no exemplo do arquivo de definição da Fig. 12. De modo alternativo, uma pluralidade de estágios pode ser fornecida a fim de comutar entre dados de áudio a serem reproduzidos, volumes de som, ou o similar. Em adição, no caso que um som é reproduzido como um BGM mesmo quando a imagem mostrada na Fig. 16 é exibida, processo de desvanecimento cruzado pode ser aplicado quando comutando sons.
[00108] Para ambos os casos de imagem em movimento e som, se uma mesma imagem em movimento ou um mesmo som é reproduzido em uma pluralidade de área onde um objeto incorporado é definido, o ponto de retomada pode ser configurado como informação comum. Por exemplo, fazendo ajuste de aproximação / afastamento para qualquer uma da retangular 301 à 310 na imagem de exibição 300 da Fig. 16, uma mesma musica é reproduzida. Em adição, o ponto de retomada é configurado de forma comum para as áreas. Nesta maneira, a continuidade da musica pode ser mantida e um sentimento de consistência pode ser produzido independente de qual area retangular está em foco.
[00109] Se retoma ou não, ou se configura ou não o ponto de retomada com um ponto comum, pode ser definido por um usuário ou um criador de conteúdo para respectivos objetos incorporados. Adicionalmente, quando exibindo um determinado quadro na etapa S26 da Fig. 17, o quadro pode ser exibido tal que o quadro e a imagem padrão tendo sido exibidos na área retangular desvanece. Em uma maneira similar, no caso que o ponto de vista é movido para uma área retangular vizinha, as imagens fixas ou as imagens em movimento sendo exibidas podem ser desvanecidas.
[00110] Fig. 18 mostra um exemplo de uma imagem a ser exibida quando permitindo ao enlace de loja operar como um objeto incorporado. A imagem de exibição 312 representa uma imagem exibida quando o ponto de vista entra na fronteira de enlace definida para área retangular 308a para a qual um enlace de loja é definido entra as imagens na imagem de exibição 300 da Fig. 16. Configurando o atributo “ação” na Fig. 12 como “show_link”, a unidade de execução de objeto unidade de execução de objeto 117 comuta a imagem da área retangular 308a da Fig. 16 para a área retangular 308b da Fig. 18 quando o ponto de vista entra na fronteira limite de enlace.
[00111] Na imagem da área retangular 308b, o indicador 314 e o indicador 316 estão exibidos em adicional à informação de loja tendo sido exibida a partir do começo. O indicador 314 apresenta, “Vá a loja”, e indica que é possível mover para o sitio de web da loja. O indicador 316 apresenta, “Favor pressionara o botão circular”, como um método de operação para determinar o movimento. Detalhes de uma imagem a ser adicionada e o arranjo dele são determinados conforme apropriado enquanto considerando, o dispositivo de entrada, ou o similar. Por exemplo, o indicador 314 pode já estar exibido no estágio da imagem de exibição 300 e quando a área retangular 308a é submetida a ajuste de aproximação / afastamento, somente a cor do indicador pode ser mudada a fim de indicar ao usuário que o movimento para a destinação de enlace é possível.
[00112] O usuário faz ajuste de aproximação / afastamento na área retangular 308a até a área ser exibida em um tamanho permitindo o deslocamento para a destinação do enlace, e quando a imagem exibida é comutada para a imagem da área retangular 308b, o usuário permite que a tela do sitio da web da loja seja exibida pressionando o “botão circular” ou o similar do dispositivo de entrada 20 de acordo com a exibição do indicador 316. Tecnologia comumente usada pode ser aplicada para acessar os sítios da web ou para exibir.
[00113] As áreas retangulares 301 - 310 da imagem de exibição 300 na Fig. 16 podem ser interpretados como “opções” para as quais algum tipo de enlace é definido. Assim sendo, de acordo com a definição da exibição de reconhecimento de seleção mostrada na Fig. 12 como um exemplo, as áreas podem ser exibidas com ênfase, por exemplo, mudando as cores das áreas retangulares 301 - 310 em um determinado momento a fim de indicar que as áreas são as opções. O momento para exibir com ênfase pode ser quando o ponto de vista entra na pré-determinada fronteira de enlace ou pode ser quando uma pré-determinada entrada é feita via o dispositivo de entrada 20.
[00114] Indicando de modo explícito, as opções na imagem exibida na tela e reconhecendo a operação para seleção pelo usuário, o usuário pode selecionar uma área retangular desejada de forma eficaz. Adicionalmente, permitindo o movimento automático do ponto de vista (e.g. movendo a área retangular selecionada, ou o similar), o usuário pode alcançar em um momento o ponto de comutação dos dados hierárquicos, ou para os processos de iniciação de um objeto incorporado, com uma operação mínima.
[00115] Embora essas operações permitam a um usuário selecionar uma área retangular e pegar um atalho em direção a ampliar o fator de escala de uma imagem, atalhos bi-direcional junto com o fator de escala podem ser executados. Por exemplo, após automaticamente fazer ajuste de aproximação / afastamento na área retangular selecionada pelo usuário, quando manipulando uma pré-definida tecla, tal com o botão em cruz 23 do dispositivo de entrada dispositivo de entrada 20, o fator de escala de ampliação é reduzido e a exibição é retornada de volta para a imagem exibida anteriormente. Isto permite um aumento na eficiência de operação, por exemplo, no caso que o usuário deseja selecionar uma outra área retangular.
[00116] Neste caso, cada vez que uma entrada para seleção é feita, a unidade de execução de objeto 117 armazena parâmetros representando a área exibida, tal como coordenada do quadro corrente, ou o similar, na memória principal 60. No caso que o usuário fornece uma entrada para retornar a exibição, a unidade de execução de objeto 117 lê parâmetros representando a área de exibição anterior a partir da memória principal 60 e notifica a unidade de determinação de área de exibição 104 disso, através do qual a área é exibida. No caso que uma pluralidade de entradas para seleção é feita, por exemplo, no caso que opções descendentes são fornecidas, parâmetros representando as áreas de exibição nos pontos de tempo de seleções são armazenados sequencialmente e são lidos usando o método de LIFO (Ultimo a entrar Primeiro a sair). Daqui em diante, a lista de parâmetro que são armazenados nesta maneira é referida como “lista estrutural”.
[00117] Fig. 19 mostra as etapas do processo do dispositivo de processamento de informação 10 no caso de um processo de exibição de reconhecimento de seleção ser efetuado como um objeto incorporado. Primeiro, enquanto a imagem de exibição 300 mostrada na Fig. 16 é exibida, o usuário move o ponto de vista durante o uso do dispositivo de entrada 20. neste processo, a unidade de determinação de enlace 116 monitora se o ponto de vista entra ou não na fronteira de enlace para exibir com ênfase (S50). Se o ponto de vista entra na fronteira de enlace (S em S50), a unidade de execução de objeto 117 exibe a área retangular 301 - 310 com ênfase de acordo com a configuração do arquivo de definição, por exemplo, mudando as cores das áreas ou o similar (S52). Então a unidade de execução de objeto 117 espera pelo usuário pressionar para baixo a tecla indicando uma direção (e.g., as teclas direcionais 21 ou o similar) e um botão de determinação (e.g., o botão circular 22 ou o similar) do dispositivo de entrada 20 tal que uma das áreas retangulares é selecionada (S54)
[00118] Se a seleção é entrada (s em S54), a unidade de execução de objeto 117 escreve os parâmetros considerando a área de exibição naquele ponto do tempo na lista de breacrumb na memória principal 60 (S56). Notificando a unidade de determinação de área de exibição 104 da informação sobre o movimento do ponto de vista definido no arquivo de definição, a unidade de execução de objeto 117 move a área de exibição, por exemplo, permitindo fazer ajuste de aproximação / afastamento na área retangular selecionada (S58). Nesta etapa, não somente o deslocamento da área de exibição, mas também um determinado processo definido enquanto associando com a região angular pode ser efetuado. Como um exemplo do determinado processo, uma imagem para uma explanação ou um anúncio considerando a área selecionada pode ser adicionalmente exibido, ou as cores podem ser mudadas. Dados para a imagem a ser adicionalmente exibida estão incluídos no conteúdo em associação com a área retangular. No caso que o usuário daí em diante instrui para mover o ponto de vista, por exemplo, para fazer ajuste de aproximação / afastamento adicional na área ou o similar, um processo de acordo com a instrução é efetuado conforme apropriado, embora não mostrado na Fig. 19.
[00119] Se o usuário entra uma instrução para retornar á área de exibição de volta manipulando uma tecla pré-definida tal como o botão em cruz 23 do dispositivo de entrada 20 (S em S60), a unidade de execução de objeto 117 lê um parâmetro que foi recentemente escrito a partir da lista estrutural da memória principal 60 (S62), e notifica a unidade de determinação de área de exibição 104 dele, a fim de mover a exibição para uma área de exibição determinada pelo parâmetro (S64). Tal operação permite, no caso que o usuário indica uma intenção explícita entrando sua seleção, exibição enquanto altamente valorizando a eficiência.
[00120] Marcando não apenas a área de exibição da posição original mas também uma outra área de exibição, em resposta à seleção de entrada a partir do usuário, permite evitar uma situação ineficiente, tal como, o usuário perde a destinação do movimento por causa de uma imagem exibida em um fator de escala de ampliação alta, etc., ou o usuário tem de re-iniciar a operação a partir do começo. Como um resultado, graus de liberdade para o método de entrada aumentam e o usuário pode alcançar a informação desejada eficazmente mesmo se opções são fornecidas em uma estrutura hierárquica em profundidade.
[00121] Embora a operação da Fig. 19 esteja considerando a exibição de reconhecimento de seleção, o processo de retornar a área de exibição de volta pode se efetuado independentemente da exibição de reconhecimento de seleção. Por exemplo, a unidade de determinação de área de exibição 104 marca o ponto a ser retornado de volta junto com o processo de comutação dos dados hierárquicos. Fig. 20 ilustra um processo de retornar a área de exibição de volta quando o ponto de vista é arbitrariamente movido. A figura é representada em uma maneira similar quando aquela da Fig. 6, e enlaces são configurados para o conjunto de dados hierárquicos 400 para os conjuntos de dados hierárquicos 402, 404 e 406. Adicionalmente, um enlace é configurado para o conjunto de dados hierárquicos 404 para o conjunto de dados hierárquicos 407. Em um conteúdo para exibir tal uns dados de imagem, a informação de uma imagem 410 da posição original é armazenada na lista estrutural 408 da memória principal 60. A informação a ser armazenada pode ser uma coordenada de quadro, informação de identificação dos dados hierárquicos, ou o similar.
[00122] Será assumido que o usuário move o ponto de vista no espaço virtual como mostrado com a seta A e uma seta B usando os bastões analógicos 27a, 27b do dispositivo de entrada 20, e o ponto de vista entra na região do conjunto dados hierárquicos 404. Consequentemente, se a imagem de exibição é comutada para aquela do conjunto de dados hierárquicos 404, informação sobre a imagem 412 na camada de mais baixa resolução, que é, assim para dizer, a posição original do conjunto de dados hierárquicos 404, é adicionalmente escrito na lista estrutural 408. Se o usuário move o ponto de vista como mostrado com uma seta C e uma seta D, e o ponto de vista entra na região do conjunto de dados hierárquicos 407, informação sobre a ima 414 na camada da mais baixa resolução do conjunto de dados hierárquicos 407 é adicionalmente escrito na lista estrutural 408.
[00123] Se o usuário entra uma instrução para retornar a exibição de volta, a última informação de imagem é lida a partir da lista estrutural 408 no método de LIFO e o ponto de vista é movido como mostrado com uma seta E. Neste processo, o ponto de vista pode ser literalmente “movido” enquanto mostrando o caminho dele, ou as imagens de exibição são imediatamente comutadas. Isto fornece as opções do usuário para comutai' a exibição para o conjunto de dados hierárquicos 404, ou para mover o ponto de vista no conjunto de dados hierárquicos 407. De acordo com o exemplo mostrado na Fig. 20, após a imagem 414 ser exibida, o usuário comuta a exibição para o conjunto de dados hierárquicos 404, por exemplo, reduzindo a imagem, etc. (seta F).
[00124] Após entrar uma instrução de novo para retornar a exibição de volta, a informação sobre a imagem 412 é lida a partir da lista estrutural 408 e o ponto de vista é movido como mostrado com uma seta G. Se o usuário ainda reduz a imagem, move o ponto de vista nas imagens do conjunto de dados hierárquicos 400 conforme mostrado com uma seta H, e então entra uma instrução para retornar a exibição de volta, a informação na imagem 410 é lida a partir da lista estrutural 408 e o ponto de vista é movido conforme mostrado com uma seta I.
[00125] Tal operação permite, independente de como o usuário move o ponto de vista em um mesmo conjunto de dados hierárquicos, para exibir uma imagem tendo a mais baixa resolução nos mesmos dados hierárquicos meramente entrando a instrução para retornar a exibição de volta. Uma imagem de mais baixa resolução é uma imagem que fornece uma visão ampla da totalidade dos dados hierárquicos e, ao mesmo tempo, é uma imagem capaz de mudar a exibição para um conjunto de dados hierárquicos imediatamente superior. O usuário pode reduzir o fator de escala de uma imagem exibida em curtas etapas, para uma imagem determinada em uma maneira unificada por respectivos conjuntos de dados hierárquicos, sem seu trem de pensamento ser interrompido por uma mudança significativa de imagens, e.g., sem ser trazido de volta diretamente para a imagem inicial, etc. Por conseguinte, o usuário pode alcançara uma área desejada de modo eficaz sem perder de vista o destino do movimento. Em adição, o usuário pode trazer o ponto de vista de volta enquanto grosseiramente rastreando o movimento histórico do ponto de vista. Por exemplo, o usuário pode mover o ponto de vista de volta para o segundo conjunto de dados hierárquicos anterior entrando duas instruções consecutivas para retornar de volta.
[00126] Embora no exemplo mostrado na Fig. 20, a informação sobre a imagem tendo a mais baixa resolução em cada conjunto de dados hierárquicos é armazenada como a lista estrutural, isto não é não restritivo enquanto uma área de exibição de referência tendo a mais baixa resolução é determinada para cada distância do ponto de vista. Por exemplo, uma pluralidade de áreas de exibição de referência pode ser determinada em um mesmo conjunto de dados hierárquicos. Também neste caso escrevendo, se o ponto de vista entra em uma nova área, informação relacionando a uma área de exibição de referência correspondendo para a nova área na lista de breacrumb, um modo similar é implementado. Este modo pode ser combinado com o modo mostrado na Fig. 19 onde as opções são exibidas com ênfase. Neste caso, informação na área de exibição no ponto de tempo quando uma seleção é entrada também é armazenada como um destino de volta de retorno, em adicional à informação sobre as imagens 410,412 e 414.
[00127] De acordo com a modalidade descrita acima, o movimento do ponto de vista incluindo a ampliação / redução de uma imagem de exibição aciona um processo, tal como, a comutação da exibição para um outro conjunto de dados hierárquicos, a reprodução de uma imagem em movimento, a reprodução de um som, o enlace para um outro sítio na rede, a exibição das opções com uma ênfase, etc. Nesta maneira, o usuário pode permitir ao aparelho de processamento de informação efetuar um processo desejado com o movimento do ponto de vista (em outras palavras, com uma operação fácil e intuitiva), enquanto desfrutando uma imagem. Adicionalmente, conteúdo multifuncional mencionado anteriormente pode ser criado com definição simples no arquivo de definição.
[00128] Focando atenção para o ponto de vista com relação a uma imagem permite a definição sobre configuração detalhada usando a posição do ponto de vista, que permite não meramente uma determinação binária da seleção / não seleção de funções, mas também processos em múltiplos estágios. Adquirindo a relação de uma parte da tela que se projeta a partir da área retangular, a relação de uma parte da área retangular que se projeta a partir da tela, etc., processo desejado pode ser efetuado em um tempo apropriado com base no conteúdo de respectivos processos. Efetuando um processo tal como desvanecimento cruzado ou o similar quando processos de comutação permitem a conexão sem interrupção entre imagens ou entre sons antes e após a comutação. Isto permite um usuário tentar a reprodução de uma imagem em movimento casualmente como uma continuação de exibir uma imagem. Isso permite implementar conteúdo projetado com excelência e amigável comparado com o caso onde um processo é selecionado usando um cursor.
[00129] Adicionalmente, exibindo opções com ênfase e permitindo a seleção de uma opção, um modo com base nas necessidades ou a situação de um usuário pode ser implementado sem significativamente mudar a aparência mesmo quando o usuário deseja opera diretamente. Independente de se tal seleção direta é ou não feita, uma exibição tendo uma resolução mais baixa do que aquela de uma imagem sendo exibição simultaneamente é armazenada como a área de exibição de um destino de volta de retorno tal que o usuário pode retornar de volta para a área diretamente através de operação pré- definida via o dispositivo de entrada. Isto permite um movimento suave dentro das imagens, e como um resultado uma eficiência aumentada em alcançar uma área desejada.
[00130] A modalidade é implementada com um aparelho de processamento de informação e dados hierárquicos similares que aqueles explicados enquanto referência à Fig. 1 a 6 de acordo com a primeira modalidade. Uma explanação será dada abaixo enquanto focando em pontos diferentes daqueles da primeira modalidade.
[00131] Fig. 21 mostra um exemplo de uma imagem exibida no dispositivo de exibição 12 pelo dispositivo de processamento de informação 10 de acordo com a presente invenção, onde um enlace é definido na imagem. Em uma imagem de exibição 350, uma pluralidade de áreas de enlace, tal como, uma área de enlace 352a, 352b, 352c, ou o similar, são definidas. Por exemplo, o usuário faz ajuste de aproximação / afastamento para a área de enlace 352a enquanto a imagem de exibição 350 é configurado como uma imagem inicial, um correspondente processo (e,g„ comutando os conjuntos de dados hierárquicos usados para a criação da imagem, execução do objeto incorporado, ou o similar) é consequentemente efetuado, no ponto de tempo quando a área de enlace 352a é exibida n tela inteira. Para este propósito, um arquivo de definição é criado em associação com um aparelho de dados hierárquicos. O arquivo de definição associa a coordenada de quadro no espaço virtual mostrado na Fig. 3 quando a área de enlace 352a é exibida na tela inteira, a informação de identificação do processo a ser processada para o enlace, e a informação de identificação ou o endereço de dados necessários para o processo (e.g., dados de imagem em movimento, um programa, ou o similar).
[00132] De acordo com tal um modo onde as imagens são comutadas ou um objeto incorporado é executado, acionado pelo movimento do ponto de vista na fronteira limite de enlace, a um usuário é permitido sentir a continuidade a partir da imagem original, e conteúdo com um projeto excelente em uma variedade de maneiras pode ser implementado, sendo comparando com o caso onde a seleção é feita a partir de uma lista de opções manipulando um dispositivo de apontamento, Nesta maneira, quando é necessário fazer ajuste de aproximação / afastamento para uma área específica, o usuário efetua uma operação de ampliação enquanto ajustando a posição na direção planar horizontal enquanto usando o dispositivo de entrada. É favorável simplificar tal operação tanto quanto possível.
[00133] Em um exemplo mostrado na Fig. 21, já que a área de enlace 352a, 352b, 352c, ou o similar são arrumados em ordem enquanto separadamente posicionado, é fácil reconhecer a região de cada área de enlace. Ao contrário, áreas de enlace podem ser definidas em uma imagem que é continua como um todo, por exemplo, um pedaço de imagem, um pedaço de fotografia, ou o similar. Em tal caso, o intervalo da área de enlace não é fácil reconhecer, o que conduz a um problema adicional para ajustar a posição da tela para uma área de enlace. Por conseguinte, de acordo com a modalidade, enquanto um usuário manipula para ampliar a exibição, um ajuste fino é adicionado tal que a tela é orientada pra a área de enlace através da qual, a entrada do usuário é suportada. Uma área que é o destino orientado pode não necessariamente ser a área de enlace e pode ser uma área para a qual o criador do conteúdo gostaria de oriente o ponto de vista intencionalmente, ou o similar. Contudo, uma explanação será dada abaixo sobre um exemplo com a área de enlace.
[00134] Fig. 22 mostra em detalhe a configuração de uma unidade de controle 100 de acordo com a modalidade. Em uma maneira similar com a primeira modalidade, a unidade de controle 100 compreende uma unidade de aquisição de informação de entrada 102 que adquire informação entrada pelo usuário via o dispositivo de entrada 20, uma unidade de carregamento 103 que carrega um conjunto de dados hierárquicos a serem exibidos a partir do mecanismo de disco rígido 50, uma unidade de determinação de área de exibição 104 que determina uma área de exibição de acordo com a informação entrada, uma unidade de decodificação 106 que decodifica dados de imagem comprimida, e uma unidade de processamento de imagem de exibição 114 que apresenta uma imagem de exibição. A unidade de controle 100 adicionalmente compreende uma unidade de controle de orientação 416 que corrige a área de exibição determinada pela unidade de determinação de área de exibição 104 tal que a tela é orientada para a área de enlace, e uma unidade de execução de enlace 418 que aplica um processo definido para a área de enlace.
[00135] Os elementos representados na Fig. 22 como blocos funcionais para efetuar vários processos são implementados em hardware tal como uma unidade de processamento central (CPU), memória, ou outros LSI’s, e em software tal como uns programas, etc., carregado na memória. Conforme descrito acima, a unidade de controle 100 inclui uma PPU e uma pluralidade de SPUs. A PPU e as SPUs formam os blocos funcionais sozinhos ou em combinação. Por conseguinte, será óbvio para aquele com habilidade na arte que os blocos funcionais podem ser implementados em uma variedade de maneiras, por hardware somente, software somente, ou uma combinação deles.
[00136] No mecanismo de disco rígido 50, um arquivo de conteúdo incluindo dados hierárquicos, e um arquivo de definição. No caso de exibir dados de imagem compreendendo uma pluralidade de conjuntos de dados hierárquicos onde um enlace é definido, uma pluralidade de conjuntos de dados hierárquicos e arquivos de definição correspondendo aos respectivos conjuntos dos mesmos são armazenados. Conforme necessário, o arquivo de conteúdo pode ainda incluir dados necessários para o processamento do objeto incorporado, tal como dados de imagem em movimento, um programa de aplicação ou o similar.
[00137] De acordo com a operação do usuário via o dispositivo de entrada 20, a unidade de aquisição de informação de entrada 102 adquire informação em uma solicitação para o início / término de conteúdo, o deslocamento do ponto de vista, etc., a partir do dispositivo de entrada 20 e notifica a unidade de carregamento 103, unidade de determinação de área de exibição 104 e a unidade de controle de orientação 416 da informação. Após ser notificado a partir da unidade de aquisição de informação de entrada 102 que a solicitação para iniciar conteúdo é feita, a unidade de carregamento 103 lê os dados hierárquicos de uma imagem inicial do conteúdo e arquivo de definição do mesmo a partir do mecanismo de disco rígido 50 e armazena na memória principal 60. Conforme necessário, a unidade de carregamento 103 ainda lê dados hierárquicos do destino do deslocamento do ponto de vista, dados necessários para a execução do objeto incorporado, ou o similar a partir do mecanismo de disco rígido 50 e armazena os dados na memória principal memória principal 60.
[00138] Após ser notificado pela unidade de aquisição de informação de entrada 102 que a solicitação para mover o ponto de vista é feita, a unidade de determinação de área de exibição 104 transforma a distância do deslocamento do ponto de vista na coordenada no espaço virtual dos dados hierárquicos, e determina a coordenada de quadro do destino do movimento, que é para ser exibida. Enquanto o ponto de vista está dentro de uma pré- determinada área com relação à área de enlace definida no arquivo de definição, a unidade de controle de orientação 416 corrige a coordenada de quadro determinada pela unidade de determinação de área de exibição 104 a fim de orientar a tela para a área de enlace. A orientação é realizada durante o período quando o usuário solicita mover o ponto de vista via o dispositivo de entrada 20, como um ajuste fino para a solicitação. Uma descrição detalhada será dada mais tarde.
[00139] A unidade de decodificação 106 lê uma parte dos dados de imagem comprimidos a partir da memória principal 60, decodifica os dados e armazena os dados decodificados na memória de área de armazenamento temporário 70. Os dados que a unidade de decodificação 106 decodifica podem ser dados de imagem de um tamanho pré-determinado incluindo a área de exibição. Decodificando uma área ampla de dados de imagem e armazenando os dados decodificados na memória de área de armazenamento temporário 70 antecipadamente, o número de acessos lidos para a memória principal 60 pode ser reduzido e o ponto de vista pode ser movido suavemente. A unidade de processamento de imagem de exibição 114 adquire a coordenada de quadro da área a ser exibida determinada pela unidade de determinação de área de exibição 104, lê correspondentes dados de imagem da memória de área de armazenamento temporário 70, e apresenta os dados na memória de quadro 76 da unidade de processamento de exibição 44.
[00140] A unidade de execução de enlace 418 se refere ao arquivo de definição que está armazenado na memória principal 60 e está associado com o conjunto de dados hierárquicos sendo atualmente exibidos, e no caso que o ponto de vista do destino do movimento encontra a condição para o enlace, aplica o processo pré-definido para a área de enlace. A condição para o enlace pode ser a distância do ponto de vista quando a área de enlace é exibida na tela inteira conforme descrito acima, ou pode ser a distância do ponto de vista quando uma pré-determinada relação da área de enlace está dentro da tela, etc. Adicionalmente, um valor limite pode ser configurado para o fator de escala de ampliação, ou o similar. Essas condições são definidas pelo criador do conteúdo, ou o similar, enquanto considerando o arranjo de área de enlace, ou o similar.
[00141] No caso, os programas ou dados para executar o objeto incorporado não está armazenado na memória principal 60, a unidade de execução de enlace 418 emite para a unidade de carregamento 103 uma solicitação para carregar a partir do mecanismo de disco rígido 50 para a memória principal 60 com a informação de identificação do programa ou os dados.
[00142] Também no caso de comutar a exibição para aquela de um outro conjunto de dados hierárquicos, uma solicitação para carregamento é emitida para a unidade de carregamento 103. Ainda, a unidade de execução de enlace 418 emite uma solicitação para comutação dos conjuntos de dados hierárquicos para a unidade de determinação de área de exibição 104. Na resposta para a solicitação, a unidade de determinação de área de exibição 104 transforma a coordenada de quadro para aquela dos dados hierárquicos de após a comutação, e notifica a unidade de decodificação 106 da coordenada transformada com a informação identificação do conjunto de dados hierárquicos. Em resposta, a unidade de decodificação 106 configura os dados hierárquicos do destino do enlace como os dados a serem decodificados.
[00143] A seguir, uma explanação será dada no mecanismo de orientação onde a unidade de controle de orientação 416 orienta a tela para uma área de enlace. Conforme descrito acima, de acordo com a modalidade, uma área de enlace é fornecida em uma imagem e uma variedade de processos são implementados posicionando a tela na área. Em tal modalidade, o usuário sempre repete um ajuste de aproximação / afastamento da imagem usando a tecla de ampliação / redução (e.g., o bastão analógico 27b do dispositivo de entrada 20) e um ajuste da posição usando a tecla indicando uma direção (e.g., as teclas direcionais 21), tal que o usuário faz ajuste de aproximação / afastamento para a área alvo.
[00144] Em tal uma operação, por exemplo, no caso que uma área de enlace domina uma grande área na tela em um estágio onde a imagem é ampliada para uma determinada escala, a intenção do usuário para alvejar a área de enlace pode ser prognosticado mesmo se a posição está fora de alinhamento em um determinado grau. Utilizando esta natureza, que a área de enlace que o usuário objetiva é prognosticada com base na aparência das áreas de enlace na tela. Então a tela é orientada para a área de enlace aplicando um ajuste fino na direção planar horizontal em conjunto com a operação para ampliação da imagem.
[00145] Especificamente, valores limites são definidas como uma condição de orientação para o fator de escala de ampliação da imagem de exibição e a relação de uma parte da área de enlace que se projeta da tela, respectivamente. A relação de uma parte de área de enlace que se projeta da tela é a relação do comprimento da parte da área de enlace que se projeta a partir da tela para a largura da área de enlace na direção da projeção. No caso que a área de enlace se projeta a partir da tal para ambas direções horizontal e vertical, a maior relação é adotada. Se o fator de escala de ampliação está acima do limite e se a relação de uma parte de uma área de enlace que se projeta a partir da tela é menor do que o limite, é prognosticado que o usuário objetiva aquela área de enlace.
[00146] Em tal situação onde um prognóstico pode ser submetido a, se o usuário fornece uma operação para ampliar a imagem via a tecla de ampliação / redução, o fator de escala de ampliação da imagem de exibição é aumentada em resposta, e simultaneamente, a área de exibição é movida na direção planar horizontal a fim de ficar perto à área de enlace prognosticada para ser a área sendo objetivada. A monitoração sobre se a condição de orientação é ou não satisfeita é efetuada constantemente durante o período quando o usuário solicita mover o ponto de vista. A condição de orientação pode ser definida no arquivo de definição descrito acima para cada área de enlace, ou pode ser definido comumente para todas as áreas de enlace. De modo alternativo, a condição pode ser definida como um parâmetro retido pela unidade de controle de orientação 416 independentemente dos conjuntos de dados hierárquicos. Adicionalmente, o processo de orientação não pode ser efetuado quando o usuário executa a operação para mover na direção planar horizontal em adição à operação para ampliação.
[00147] Fig. 23 ilustra variações das relações posicionais entre a área de enlace e a tela devido para a diferença de ponto de vista. A direção vertical da figura representa a altura do ponto de vista com relação a imagem, e a linha mostrada na base representa o plano de imagem. No plano de imagem, a área de enlace 352 é representada com uma linha espessa. Primeiro, vendo a imagem a partir do ponto de vista 360a, a área de enlace 352 está dentro do campo de visão (i.e., a tela) sem projeção dele conforme visto a partir do triângulo representando o campo de visão. Por outro lado, vendo a imagem a partir do ponto de vista 360b, uma parte da área de enlace 352 se projeta da tela.
[00148] Já que o tamanho da área de enlace 352 com relação à tela se torna maior que o ponto de vista fica perto do plano de imagem, a área de enlace 352 tem uma maior probabilidade de projeção da tela. Por conseguinte, a região dos pontos de vista para os quais a área de enlace 352 não se projeta da tela tem a forma mostrada com a região de ponto de vista 362. Mesmo se o limite da relação da projeção é mudado, a forma da região de ponto de vista permanece similar àquela da região de ponto de vista 362. Isto é, aos determinar a condição de orientação conforme descrito acima, a distância do ponto de vista de acordo com ela é determinada como a região de ponto de vista 362.
[00149] Na Fig. 23, o ponto de vista 363 é um ponto de vista com o qual a área de enlace 352 é exibida na tela inteira, i.e., a ponto de vista onde o processo do enlace é executado. A unidade de controle de orientação 416 controla a orientação do ponto de vista (i.e., a tela) enquanto objetivando a região de ponto de vista 363 durante o período quando o usuário amplia a imagem. A área de enlace 352 pode não ser exatamente a mesma área onde o enlace é definido, i.e., a área onde a imagem é comutada ou a imagem em movimento é exibida após fazer ajuste de aproximação / afastamento nela. Por exemplo, a área de enlace 352 pode ser uma área incluindo a área onde o enlace é definido e área em volta do mesmo.
[00150] Definir uma condição de orientação implementa um modo de decisão binária de guiar ou não, determinando se o ponto de vista está dentro ou fora da região de ponto de vista determinada pela condição de orientação. Adicionalmente, em torno da região de ponto de vista determinada pela condição de orientação, uma região de ponto de vista intermediária pode ser fornecida de acordo com a modalidade. Daqui em diante, a região de ponto de vista anterior é referida como uma “região semi-orientada”. Quando o ponto de vista está dentro da região semi-orientada, a orientação é executada com uma força de orientação menor do que aquela do caso que o ponto de vista está dentro da região orientada. A “força de orientação” é, por exemplo, a relação da velocidade do movimento na direção planar horizontal da imagem causada pela orientação contra a relação de ampliação da imagem causada através de operação de usuário.
[00151] Fig. 24 de modo esquemático mostra uma relação entre a região orientada e a região semi-orientada, A figura é representada em uma maneira similar para aquele da Fig. 23 e a área de enlace área de enlace 352 é mostrado na base. A parte superior da Fig. 24 também representa a aparência de respectivas regiões quando vistas de cima. Na Fig. 24 a região de orientação 364 corresponde à região de ponto de vista 362 da Fig. 23 e o ponto de vista do alvo da orientação é o ponto de vista 368. Na circunferência de tal região orientada 364, a região semi-orientada 366 é definida, por exemplo, como tendo uma mesma linha central com aquela da região orientada 364 e como uma área que é a extensão da região orientada 364 na direção planar horizontal, mas excluindo a região orientada 364. A força de orientação da região semi-orientada e cada região pode ser definida no arquivo de definição para cada área de enlace, ou pode ser definido comumente para todas as áreas de enlace. De forma alternativa, a unidade de controle de orientação 416 pode reter a definição da força independentemente dos conjuntos de dados hierárquicos.
[00152] Mesmo se a taxa de ampliação da imagem instruída pelo usuário é mesmo, a velocidade do movimento da tela causada pela orientação (i.e., velocidade do movimento do ponto de vista na direção planar horizontal) varia. Por exemplo, o componente planar horizontal do montante do movimento do ponto de vista 372 por unidade de tempo na região semi- orientada 366 (seta B) é menor do que o componente planar horizontal do montante do movimento do ponto de vista 370 por unidade de tempo na região orientada 364 (seta A).
[00153] No caso que a ponto de vista 372 na região de semi-orientada 366 se desvia da região de semi-orientada 366 enquanto o ponto de vista 372 é orientado como mostrado com a seta B e está se aproximando do plano de imagem, a orientação é cancelada como mostrado com a seta C e somente a ampliação da imagem instruída pela operação de usuário é executada. Isto é, porque a determinação se a ponto de vista está dentro ou fora das respectivas regiões são constantemente executadas durante o período quando o usuário opera para ampliação, o inicio ou término da orientação, e a mudança da força de orientação são executados junto com o movimento do ponto de vista em tempo real.
[00154] A região semi-orientada é interpretada como uma região de ponto de vista onde o montante da projeção da área de enlace da tela é maior que comparado com a região orientada em um mesmo fator de escala de ampliação. Por conseguinte, fornecendo a região orientada e a região semi- orientada na maneira mencionada anteriormente, a força de orientação pode ser ajustada minuciosamente em dependência após o montante da parte da área de enlace permanecendo na tela. Como um resultado, sensação desconfortável do usuário causado por uma orientação (e.g., forte orientação para uma área de enlace que não é objetivada, comutação entre orientação e não orientação causada por uma agitação leve da tela, ou o similar) pode ser reduzida.
[00155] A força de orientação pode não necessariamente ser fixa em cada uma da região orientada 364 e região semi-orientada 366. Fig. 25 de modo esquemático mostra um exemplo da definição de força de orientação versus a distância na direção planar horizontal da linha central da área de enlace para o ponto de vista. Na figura, o eixo vertical representa a força de orientação e o centro do eixo horizontal corresponde à linha central da área de enlace. Nesta figura, a força de orientação é definida como um valor constante dentro da região orientada e definida dentro da região semi-orientada a fim de monotonamente diminui de acordo com a distância a partir da linha central e atinge 0 na fronteira onde a distância a partir da linha central atinge o máximo. Em uma maneira similar, a força de orientação pode se definida a fim de variar de acordo com a distância a partir da linha central, também na região orientada.
[00156] A força de orientação pode ser definida a fim de variar continuamente sem ser dividido em duas regiões, i.e., a região orientada e a região semi-orientada. De forma alternativa, a força de orientação pode ser definida enquanto sendo dividido em mais do que três regiões. Em qualquer dos casos, como a distância a partir da linha central da área de enlace se torna menor, é interpretado que a probabilidade que o usuário objetiva a área de enlace é maior. Por conseguinte, mudando a força de orientação de acordo com a distância, o deslocamento do ponto de vista do usuário pode ser suportado com um movimento natural.
[00157] A região orientada pode ser definida diretamente em vez de fornecer o valor limite para a relação da projeção da área de enlace a partir da tela como a condição de orientação que define a região orientada. Por exemplo, definindo a taxa de mudança da distância a partir da linha central da área de enlace para o ponto de vista contra a taxa de mudança da altura do ponto de vista, uma região orientada cônica circular com seção transversal circular pode ser definido no lugar da região orientada mostrada na Fig. 24. A região semi-orientada pode ser definida em uma maneira similar e sua seção transversal é uma forma circular oca formada em torno da região orientada. Também neste caso, um efeito similar pode ser obtido com um mecanismo similar que aquele da explanação mencionada antes.
[00158] No caso da região orientada ou a região semi-orientada tem uma região comum para uma pluralidade de áreas de enlace, a força de orientação para a ponto de vista que entra naquela região comum pode ser definido como uma média da força de orientação em direção às respectivas áreas de enlace ponderadas pela distância a partir do ponto de vista para a linha centra de respectivas áreas de enlace. A força de orientação e a distância para a linha central são calculadas como vetores e calculadas para o componente horizontal e o componente vertical, respectivamente. Também em tal caso, o ponto de vista se desvia de uma região orientada ou uma região semi-orientada de uma área de enlace tendo fraca força de orientação (e.g., a distância é longa, ou o similar) no tempo devido, e eventualmente é orientada para a área de enlace próxima do ponto de vista.
[00159] A seguir, uma explanação será dada na operação do dispositivo de processamento de informação 10 configurada como descrita acima. Fig. 26 é um fluxograma mostrando as etapas do processo relacionando a orientação da tela para a área de enlace e execução do enlace efetuado pelo dispositivo de processamento de informação 10. Primeiro, se o usuário solicitação a ativação de conteúdo para o dispositivo de processamento de informação dispositivo de processamento de informação 10, uma imagem inicial tal como a imagem de exibição 350 mostrada na Fig. 21 é exibida (SI 18). Neste estado, se um usuário solicita move o ponto de vista enquanto usando o dispositivo de entrada 20, a unidade de aquisição de informação de entrada 102 adquire a informação (SI20). Se a solicitação para o movimento é uma solicitação para trazer o ponto de vista perto do plano de imagem, i.e., uma solicitação para ampliar a imagem (S em SI22), a unidade de controle de orientação 416 determina se o ponto de vista está ou não dentro da região semi-orientada (SI24).
[00160] No caso que o ponto de vista está dentro a região semi- orientada (S em SI24), a unidade de controle de orientação 416 orienta a tela adicionado um movimento na direção planar horizontal para o movimento na direção de ampliação determinada pela unidade de determinação de área de exibição unidade de determinação de área de exibição 104, com base na força de orientação definida para a região semi-orientada (SI26). A força de orientação neste processo é mais fraca do que aquela do ponto de vista dentro da região orientada conforme descrito acima. No caso que o ponto de vista não está dentro da região semi-orientada e dentro da região orientada (N em SI24, S em SI28), a tela é orientada adicionando um movimento na direção planar horizontal para o movimento na direção de ampliação em uma maneira similar que aquela da etapa SI 26. Neste caso, a força de orientação é mais forte do que aquela da etapa S126 (S130). Nos processos da etapa S126 e etapa SI30, imagens são produzidas pela unidade de decodificação 106, pela unidade de processamento de imagem de exibição 114, ou o similar, na prática. A mesma coisa é aplicada para processos de mover a área de exibição na descrição daqui em diante.
[00161] No caso que o ponto de vista não está dentro do região semi- orientada ou a região orientada (N em SI24, N em SI28), o movei da tela na direção da ampliação determinada pela unidade de determinação de área de exibição 104 é adotado sem mudança (SI32). Se a solicitação para mover o ponto de vista adquirido na etapa SI20 não é somente uma solicitação para ampliação (N em SI22), a unidade de determinação de área de exibição 104 move a área de exibição de acordo com a solicitação para mover o ponto de vista (SI34). Repetindo o processo das etapas S120 - S134 de acordo com as circunstâncias, o ponto de vista gradualmente chega perto de uma determinada área de enlace. A unidade de execução de enlace 418 monitora o resultado do movimento do ponto de vista até a condição para o enlace ser satisfeita (e.g., até a área de enlace ser exibida na tela inteira, etc.) (N em SI36), no ponto de tempo quando a condição é satisfeita (S em SI36), a unidade de execução de enlace 418 efetua o processo definido para a área de enlace (SI38)
[00162] De acordo com a modalidade descrita acima, no dispositivo de processamento de informação que reconhece a instrução para movimento da ponto de vista incluindo a ampliação / redução da imagem de exibição e atualiza a área de exibição, com base na relação posicionai entre uma área específica na imagem e a área exibida na tela, é determinada se o usuário tem ou não uma intenção para fazer ajuste de aproximação / afastamento na área. Se é determinada que o usuário tem uma intenção para fazer ajuste de aproximação / afastamento na área, a orientação da área de exibição é executada. Mais especificamente, no caso que o usuário solicita ampliar a imagem, a área de exibição é ampliada e ao mesmo tempo, o movimento na direção planar horizontal é adicionado à ampliação. Isto permite ao usuário pular algumas das operações requeridas para o usuário quando fazendo ajuste de aproximação / afastamento para uma área desejada, e assim a carga do usuário é reduzida. Particularmente, em um modo onde o posicionamento da tela em uma área pré-definida ativa um processo associado com aquela área, o processo pode ser ativado eficazmente sem requerer ao usuário finamente ajustar a área de exibição.
[00163] Durante a orientação, no período quando o usuário solicita ampliar a imagem, um ajuste é feito na direção planar horizontal a fim de corresponder à taxa de ampliação da solicitação para ampliação. Isto é, o montante do ajuste é acoplado com as forças da operação feita pelo usuário para a solicitação de ampliação. Por conseguinte, a orientação com um movimento natural pode ser implementada sem dar uma sensação que o ponto de vista se move por conta própria.
[00164] Definido mais do que dois tipos de range como a condição para a orientação, a orientação é efetuada em uma maneira passo a passo. Isto é, em um estágio onde a discrepância entre a área específica e a tela é comparativamente grande, a possibilidade que o usuário pretenda fazer ajuste de aproximação / afastamento na área especifica é determinada não ser tão alta, e a força de orientação é configurada pequena. Quando a discrepância é pequena, a orientação é efetuada. Isto permite a orientação ser efetuada em um tempo apropriado e em um montante apropriado.
[00165] Em adição, no caso que as posições de ponto de vista dentre uma pluralidade de áreas adjacentes, o montante eventual de orientação é determinado de acordo com a distância das respectivas áreas. Mais especificamente, o montante de orientação para as respectivas áreas é calculado em média enquanto sendo ponderado por distâncias. Isto permite o cálculo de uma força de orientação apropriada mesmo se a área para a qual deve ser ampliada está adjacente a uma outra na área. Por conseguinte, a modalidade pode se aplicada para imagens com vários estilos de layout.
[00166] Descrito acima está uma explanação baseada em uma modalidade exemplar. A modalidade é pretendida ser ilustrativa apenas e será óbvio para aqueles com habilidade na arte que várias modificações constituindo elementos e processos podem ser desenvolvidos e que tais modificações também estão dentro do escopo da presente invenção.
[00167] Por exemplo, de acordo com as modalidades, explanações são fornecidas sobre o movimento da área de exibição no espaço tri-dimensional virtual que é formado porção rum plano de imagem e um grau de resolução enquanto associando o movimento com o movimento do ponto de vista relativo a uma imagem. Contudo, também no caso do tempo, a de exibição ser definida como uma área a ser exibida de m plano de imagem bi-dimensional, onde a posição central da área e o tamanho da área são variados, o movimento da tela de exibição pode ser construída como o movimento do ponto de vista do usuário. Isto é, as modalidades da presente invenção também podem ser aplicadas para o movimento da párea de exibição do plano bi-dimensional, e um efeito similar pode ser obtido.
[00168] 1 sistema de processamento de informação, 10 dispositivo de processamento de informação, 12 dispositivo de exibição, 20 dispositivo de entrada, 30 camada 0-ésima, 32 primeira camada, 34 segunda camada, 36 terceira camada, 38 pedaço de imagem, 44 unidade de processamento de exibição, 50 mecanismo de disco rígido, 60 memória principal, 70 memória de área de armazenamento temporário, 80 - retângulo de referência, 82 retângulo alvo, 84 retângulo delimitador, 92 fronteira limite de enlace, 100 unidade de controle, 102 unidade de aquisição de informação de entrada, 103 unidade de carregamento, 104 unidade de determinação de área de exibição, 106 unidade de decodificação, 11 unidade de processamento de imagem de exibição, 116 unidade de determinação de enlace, 117 unidade de execução de objeto, 364 - região orientada, 366 - região semi-orientada, 408 lista estrutural, 416 unidade de controle de orientação, 408 unidade de execução de enlace.
[00169] Como descrito acima, a presente invenção é aplicável aos dispositivos de processamento de informação tal como computadores, dispositivo de jogos, e dispositivo de exibição de imagem, ou o similar.
Claims (4)
1. Dispositivo de processamento de informação caracterizado pelo fato de compreender: - um dispositivo de armazenamento configurado para armazenar dados hierárquicos que compreendem dados de imagens de diferentes resoluções que são hierárquicos em ordem de resolução; - uma unidade de aquisição de informação de entrada configurada para reconhecer uma solicitação de usuário para movimento de um ponto de vista em um espaço virtual que é definido por um plano de imagem e uma distância a partir do plano de imagem, em que o movimento de um ponto de vista corresponde a pelo menos um de uma ampliação, redução ou rolagem bidimensional de uma imagem de exibição; - uma unidade de processamento de imagem de exibição configurado para criar a imagem de exibição a partir dos dados hierárquicos mudando uma área a ser exibida em resposta à solicitação para mover o ponto de vista, a imagem de exibição mostrando uma tela de menu; e, - uma unidade de execução de objeto configurada para executar um processo que está associado com uma área pré-determinada de uma imagem, quando o ponto de vista encontra uma condição para ativar o processo, em que o processo associado é a exibição de informação, a repetição de uma imagem em movimento ou a ativação de uma aplicação ligada à tela de menu; e, - em que a condição é definida pela relação posicionai entre a área pré-determinada definida no plano de imagem e uma área que é determinada pelo ponto de vista e que é exibida em uma tela; e, em que a condição requer que a relação de uma parte da área exibida na tela, a parte se projetando da área pré-determinada, seja igual à ou menor do que um valor pré-determinado, em que a relação é selecionada para ser o máximo valor de comprimento da parte se projetando dividido pelo comprimento da tela tanto na direção vertical quanto horizontal.
2. Dispositivo de processamento de informação de acordo com a reivindicação 1, caracterizado pelo fato de que quando o ponto de vista encontra uma condição definida em associação com a área pré-determinada, a unidade de execução de objeto aplica uma exibição na área pré-determinada, a exibição designando que um sítio em uma rede associada à área pré-determinada é acessível.
3. Método de processamento de informação caracterizado pelo fato de que compreende: - ler de um dado hierárquicos de memória que compreende dados de imagem de diferentes resoluções que estão hierárquicos em ordem de respectivo e emitir os dados para um dispositivo de exibição; - reconhecer uma solicitação de usuário para movimento de um ponto de vista em um espaço virtual que é definido através de um plano de imagem e uma distância do plano de imagem, em que o movimento de um ponto de vista corresponde a pelo menos um de uma ampliação, redução ou rolagem bidimensional de uma imagem de exibição; - criar a imagem de exibição a partir do dado hierárquico mudando uma área a ser exibida no dispositivo de exibição em resposta à solicitação para mover o ponto de vista, a imagem de exibição mostrando uma tela de menu; e, - executar um processo definido como estando associado com uma área pré-determinada de uma imagem, quando o ponto de vista encontra uma condição para ativar o processo, em que o processo associado é a exibição de informação, a repetição de uma imagem em movimento ou a ativação de uma aplicação ligada à tela de menu; - em que a condição é definida pela relação posicionai entre área pré-determinada definida no plano de imagem e uma área que é determinada pelo ponto de vista e que é exibida em uma tela, e; em que a condição requer que a relação de uma parte da área exibida na tela, a parte se projetando da área pré-determinada, seja igual à ou menor do que um valor pré-determinado, em que a relação é selecionada para ser o máximo valor de comprimento da parte se projetando dividido pelo comprimento da tela tanto na direção vertical quanto horizontal.
4. Meio de gravação legível por computador, não transitório caracterizado pelo fato de tem instruções armazenadas em si que, quando executadas por um processador, fazem com que o processador: - leia a partir de uma memória de dado hierárquico que compreende dados de imagem de diferentes resoluções que são hierárquicos em ordem de resolução e configurado para exibir os dados em um dispositivo de exibição; - reconheça uma solicitação de usuário para movimento de um ponto de vista em um espaço virtual, o ponto de vista estando definido por ambos, um plano de imagem e uma distância do plano de imagem, em que o movimento de um ponto de vista corresponde a pelo menos um de uma ampliação, redução ou rolagem bidimensional de uma imagem de exibição; - crie a imagem de exibição a partir do dado hierárquico mudando uma área a ser exibida no dispositivo de exibição em resposta à solução para mover o ponto de vista, a imagem de exibição mostrando uma tela de menu; e, - execute um processo definido como estando associado com uma área pré-determinada de uma imagem, quando o ponto de vista encontra uma condição para ativar o processo, em que o processo associado é a exibição de informação, a repetição de uma imagem em movimento ou a ativação de uma aplicação ligada à tela de menu; - em que a condição é definida pela relação posicionai entre a área pré-determinada definida no plano de imagem e uma área que é determinada pelo ponto de vista e que é exibida em uma tela; e, em que a condição requer que a relação de uma parte da área exibida na tela, a parte se projetando da área pré-determinada, seja igual à ou menor do que um valor pré-determinado, em que a relação é selecionada para ser o máximo valor de comprimento da parte se projetando dividido pelo comprimento da tela tanto na direção vertical quanto horizontal.
Applications Claiming Priority (9)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000-075242 | 2009-03-25 | ||
JP2009-075244 | 2009-03-25 | ||
JP2009075267A JP5292149B2 (ja) | 2009-03-25 | 2009-03-25 | 情報処理装置および情報処理方法 |
JP2009-075267 | 2009-03-25 | ||
JP2009-075243 | 2009-03-25 | ||
JP2009075242A JP5292146B2 (ja) | 2009-03-25 | 2009-03-25 | 情報処理装置および情報処理方法 |
JP2009075243A JP5292147B2 (ja) | 2009-03-25 | 2009-03-25 | 情報処理装置および情報処理方法 |
JP2009075244A JP5292148B2 (ja) | 2009-03-25 | 2009-03-25 | 情報処理装置および情報処理方法 |
PCT/JP2009/007037 WO2010109570A1 (ja) | 2009-03-25 | 2009-12-18 | 情報処理装置および情報処理方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
BRPI0925014B1 true BRPI0925014B1 (pt) | 2020-09-15 |
Family
ID=42780280
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
BRPI0925014-0A BRPI0925014B1 (pt) | 2009-03-25 | 2009-12-18 | Dispositivo de processamento de informação, método de processamento de informação, e, meio de gravação legível por computador |
Country Status (9)
Country | Link |
---|---|
US (1) | US9250704B2 (pt) |
EP (1) | EP2413311B1 (pt) |
KR (1) | KR101319575B1 (pt) |
CN (1) | CN102362308B (pt) |
AU (1) | AU2009343075B2 (pt) |
BR (1) | BRPI0925014B1 (pt) |
CA (1) | CA2754672C (pt) |
RU (1) | RU2520353C9 (pt) |
WO (1) | WO2010109570A1 (pt) |
Families Citing this family (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5662267B2 (ja) | 2011-07-04 | 2015-01-28 | 株式会社ソニー・コンピュータエンタテインメント | 画像表示システム、情報処理装置、サーバ、および画像処理方法 |
WO2014109799A1 (en) | 2012-09-17 | 2014-07-17 | President And Fellows Of Harvard College | Soft exosuit for assistance with human motion |
KR102134443B1 (ko) * | 2013-05-03 | 2020-07-15 | 삼성전자주식회사 | 전자 기기 및 제어 동작에 기초한 전자 기기의 화면 조작 방법 |
KR20160016925A (ko) | 2013-05-31 | 2016-02-15 | 프레지던트 앤드 펠로우즈 오브 하바드 칼리지 | 인간 모션과의 보조를 위한 소프트 엑소슈트 |
US9858899B2 (en) | 2013-06-13 | 2018-01-02 | Microsoft Technology Licensing, Llc | Managing transitions of adaptive display rates for different video playback scenarios |
JP2016539723A (ja) | 2013-12-09 | 2016-12-22 | プレジデント アンド フェローズ オブ ハーバード カレッジ | 補助的な可撓性スーツ、可撓性スーツシステム、ならびにそれを作製および制御して人間の可動性を補助するための方法 |
EP3102171A4 (en) | 2014-02-05 | 2018-03-28 | President and Fellows of Harvard College | Systems, methods, and devices for assisting walking for developmentally-delayed toddlers |
WO2015157731A1 (en) | 2014-04-10 | 2015-10-15 | President And Fellows Of Harvard College | Orthopedic device including protruding members |
US10434030B2 (en) | 2014-09-19 | 2019-10-08 | President And Fellows Of Harvard College | Soft exosuit for assistance with human motion |
US20160283483A1 (en) * | 2015-03-27 | 2016-09-29 | Google Inc. | Providing selected images from a set of images |
JP6628036B2 (ja) * | 2015-03-27 | 2020-01-08 | パナソニックIpマネジメント株式会社 | 映像表示制御装置、映像表示システムおよび映像表示制御方法 |
WO2017160751A1 (en) | 2016-03-13 | 2017-09-21 | President And Fellows Of Harvard College | Flexible members for anchoring to the body |
JP6887120B2 (ja) | 2016-03-24 | 2021-06-16 | パナソニックIpマネジメント株式会社 | 表示装置 |
US11498203B2 (en) | 2016-07-22 | 2022-11-15 | President And Fellows Of Harvard College | Controls optimization for wearable systems |
KR102623181B1 (ko) * | 2016-10-05 | 2024-01-11 | 엘지전자 주식회사 | 무선 디바이스 및 무선 시스템 |
CN116310218A (zh) * | 2016-10-05 | 2023-06-23 | 奇跃公司 | 表面建模系统和方法 |
US11014804B2 (en) | 2017-03-14 | 2021-05-25 | President And Fellows Of Harvard College | Systems and methods for fabricating 3D soft microstructures |
JP7033865B2 (ja) * | 2017-08-10 | 2022-03-11 | キヤノン株式会社 | 画像生成装置、画像生成方法、及びプログラム |
US10855564B2 (en) * | 2018-01-15 | 2020-12-01 | Worcester Polytechnic Institute | Visualization of network data as a three-dimensional hierarchical data structure in a mixed reality environment |
US10854003B2 (en) * | 2018-01-15 | 2020-12-01 | Worcester Polytechnic Institute | Visualization of network data as a three-dimensional hierarchical data structure in a mixed reality environment |
JP7067095B2 (ja) * | 2018-02-07 | 2022-05-16 | 京セラドキュメントソリューションズ株式会社 | 画像形成装置及び画像形成プログラム |
JP7341674B2 (ja) * | 2019-02-27 | 2023-09-11 | キヤノン株式会社 | 情報処理装置、情報処理方法及びプログラム |
CN112243147B (zh) | 2019-07-16 | 2023-08-04 | Vidaa(荷兰)国际控股有限公司 | 视频画面缩放方法及显示设备 |
CN112243148B (zh) * | 2019-07-16 | 2022-10-11 | 青岛海信传媒网络技术有限公司 | 显示设备及视频画面缩放方法 |
JP7392341B2 (ja) * | 2019-09-17 | 2023-12-06 | 富士フイルムビジネスイノベーション株式会社 | 情報処理装置、及び情報処理プログラム |
CN113890675A (zh) * | 2021-09-18 | 2022-01-04 | 聚好看科技股份有限公司 | 一种三维模型的自适应显示方法及设备 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08279054A (ja) | 1995-04-07 | 1996-10-22 | Hitachi Ltd | 映像生成/表示システム |
SG64486A1 (en) | 1997-03-27 | 1999-04-27 | Sony Corp | Method and apparatus for information processing computer readable medium and authoring system |
JPH10334275A (ja) * | 1997-05-29 | 1998-12-18 | Canon Inc | 仮想現実方法及び装置並びに記憶媒体 |
JP4251675B2 (ja) * | 1997-07-30 | 2009-04-08 | ソニー株式会社 | 記憶装置およびアクセス方法 |
US6744934B2 (en) * | 1998-07-23 | 2004-06-01 | Fuji Photo Film Co., Ltd. | Method, apparatus and recording medium for generating an image file having hierarchical image data representing a plurality of still images having different display dimensions |
JP3646582B2 (ja) * | 1998-09-28 | 2005-05-11 | 富士通株式会社 | 電子情報表示方法、電子情報閲覧装置および電子情報閲覧プログラム記憶媒体 |
JP3498001B2 (ja) * | 1999-02-16 | 2004-02-16 | 富士通株式会社 | パノラマ画像表示システム,作成システムおよびそのプログラム記録媒体 |
JP2003281187A (ja) * | 2002-03-20 | 2003-10-03 | Fujitsu Ltd | 仮想三次元情報閲覧方法、コンピュータプログラム及び記録媒体 |
US6917360B2 (en) * | 2002-06-21 | 2005-07-12 | Schlumberger Technology Corporation | System and method for adaptively labeling multi-dimensional images |
US7221366B2 (en) * | 2004-08-03 | 2007-05-22 | Microsoft Corporation | Real-time rendering system and process for interactive viewpoint video |
JP2006191159A (ja) * | 2004-12-28 | 2006-07-20 | Canon Inc | 画像処理方法及び画像処理装置 |
JP4050777B1 (ja) * | 2007-04-06 | 2008-02-20 | 株式会社デジタルマックス | 画像表示システム |
WO2008136151A1 (ja) * | 2007-04-24 | 2008-11-13 | Sony Computer Entertainment Inc. | 画像表示装置、画像表示方法及び情報記憶媒体 |
EP2360562B1 (en) * | 2008-11-11 | 2015-04-08 | Sony Computer Entertainment Inc. | Image processing device, information processing device, image processing method, and information processing method |
-
2009
- 2009-12-18 AU AU2009343075A patent/AU2009343075B2/en active Active
- 2009-12-18 CN CN200980158283.XA patent/CN102362308B/zh active Active
- 2009-12-18 WO PCT/JP2009/007037 patent/WO2010109570A1/ja active Application Filing
- 2009-12-18 RU RU2011142869/08A patent/RU2520353C9/ru active
- 2009-12-18 BR BRPI0925014-0A patent/BRPI0925014B1/pt active IP Right Grant
- 2009-12-18 US US13/255,351 patent/US9250704B2/en active Active
- 2009-12-18 CA CA2754672A patent/CA2754672C/en active Active
- 2009-12-18 KR KR1020117024890A patent/KR101319575B1/ko active IP Right Grant
- 2009-12-18 EP EP09842186.0A patent/EP2413311B1/en active Active
Also Published As
Publication number | Publication date |
---|---|
EP2413311B1 (en) | 2018-07-18 |
EP2413311A4 (en) | 2016-07-13 |
US20120056903A1 (en) | 2012-03-08 |
AU2009343075B2 (en) | 2013-10-17 |
CN102362308A (zh) | 2012-02-22 |
WO2010109570A1 (ja) | 2010-09-30 |
CA2754672C (en) | 2017-11-21 |
KR101319575B1 (ko) | 2013-10-22 |
RU2011142869A (ru) | 2013-04-27 |
KR20110129487A (ko) | 2011-12-01 |
CA2754672A1 (en) | 2010-09-30 |
US9250704B2 (en) | 2016-02-02 |
RU2520353C9 (ru) | 2015-01-27 |
CN102362308B (zh) | 2014-04-09 |
RU2520353C2 (ru) | 2014-06-20 |
EP2413311A1 (en) | 2012-02-01 |
AU2009343075A1 (en) | 2011-09-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
BRPI0925014B1 (pt) | Dispositivo de processamento de informação, método de processamento de informação, e, meio de gravação legível por computador | |
KR102373510B1 (ko) | 디스플레이를 회전함에 따라 컨텐츠를 시각화 하는 디스플레이 장치 및 이의 제어 방법 | |
WO2020151547A1 (zh) | 展示页面的交互控制方法及装置 | |
US8331701B2 (en) | Image processing device for displaying an image on a display | |
US20090305743A1 (en) | Process for rendering at least one multimedia scene | |
JP2012014640A (ja) | 画面出力装置、画面出力システム、および画面出力方法 | |
KR20060085850A (ko) | 터치 스크린 패턴 인식 기반의 멀티미디어 기기제어방법과 장치 | |
KR101597628B1 (ko) | 유사 홀로그램 시스템 및 이를 이용한 유사 홀로그램의 표시 방법 | |
TW201432552A (zh) | 用於電子裝置的用戶介面 | |
JP2015060536A (ja) | 配信装置、配信方法、および配信プログラム | |
JP2007226255A (ja) | マンガの表示方法およびマンガを表示する電子機器 | |
JP5292146B2 (ja) | 情報処理装置および情報処理方法 | |
JP4027800B2 (ja) | 表示画像制御情報作成装置、画像表示方法、及び画像表示装置 | |
TW201432551A (zh) | 具有動態拼圖介面的電子裝置、及其介面控制方法與系統 | |
JP7011755B1 (ja) | 漫画再生システム、その方法、そのコンピュータソフトウエアプログラム及びそれらに用いる漫画データ | |
KR20170028195A (ko) | 전자 장치 및 이의 제어 방법 | |
JP5292148B2 (ja) | 情報処理装置および情報処理方法 | |
JP5292147B2 (ja) | 情報処理装置および情報処理方法 | |
KR20170028001A (ko) | 전자 장치 및 이의 제어 방법 | |
JP5432933B2 (ja) | マンガを表示する方法、プログラム、および電子機器 | |
KR101532766B1 (ko) | 동적 레이어 기반의 컨텐츠 재생 시스템 | |
KR101810188B1 (ko) | 영상 표시 장치, 영상 생성 장치, 영상 제공 서버, 영상 표시 방법, 영상 생성 방법 및 컴퓨터 프로그램 | |
JP2009070412A (ja) | 画面表示プログラム、画面表示プログラムを記憶したコンピュータ読み取り可能な記憶媒体、画面表示装置、携帯端末装置及び画面表示方法 | |
JP4561811B2 (ja) | 情報処理装置および方法 | |
JP2006092079A (ja) | プレゼンテーションシステムおよび再生切替方法、プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
B15K | Others concerning applications: alteration of classification |
Ipc: G09G 5/36 (2006.01), G06F 3/048 (2013.01), G06T 17 |
|
B06F | Objections, documents and/or translations needed after an examination request according [chapter 6.6 patent gazette] | ||
B06U | Preliminary requirement: requests with searches performed by other patent offices: procedure suspended [chapter 6.21 patent gazette] | ||
B09A | Decision: intention to grant [chapter 9.1 patent gazette] | ||
B16A | Patent or certificate of addition of invention granted [chapter 16.1 patent gazette] |
Free format text: PRAZO DE VALIDADE: 10 (DEZ) ANOS CONTADOS A PARTIR DE 15/09/2020, OBSERVADAS AS CONDICOES LEGAIS. |