BR102013004710B1 - Aparelho de processamento de informação, seu método de controle, e meio de armazenagem - Google Patents

Abstract

aparelho de processamento de informação, seu método de controle, e meio de armazenagem método de controle para um aparelho de processamento de informação, configurado para adquirir informações de posição de um ou mais pontos tocados, um por um, detectados de acordo com um predeterminado período de detecção em um painel de toque, inclui reter informações de posição de cada um do um ou mais pontos tocados em uma unidade de retenção, adquirir um número de pontos tocados cuja informação de posição é retida na unidade de retenção, determinar em cada predeterminado período de detecção que a última informação de posição de todos os pontos tocados, cuja informação de posição é retida na unidade de retenção, é especificada, em um caso em que o número de pontos tocados adquiridos é dois ou mais, e decidir a operação de multitoques executada no aparelho de processamento de informação após a determinação.

Description

FUNDAMENTOS DA INVENÇÃO Campo da Invenção

[0001] A presente invenção se refere a uma técnica para melhorar falsas operações em um aparelho em que uma operação de multitoques é possível.

DESCRIÇÃO DA ARTE RELACIONADA

[0002] Atualmente, aparelhos de entrada de toque têm se tornado amplamente utilizados, que recebem, em resposta a um toque do usuário em uma tela por um dedo ou um instrumento pontudo, valores de coordenada X, Y da posição tocada como valores de entrada para realizar vários processamentos baseados nos valores de entrada.

[0003] Além disso, recentemente foi desenvolvida uma técnica de multitoques em que uma operação é realizada tocando-se uma pluralidade de pontos em uma tela. Normalmente, como uma operação de multitoques em um painel de toque, uma operação de mover dois pontos onde um usuário está tocando aproximando-se ou afastando-se é referida como uma operação “pinch” (operação de aperto). Entre as operações, a operação de mover dois pontos aproximando-se é chamada uma operação “pinch-in”, e com esta operação a imagem exibida é reduzida. Por outro lado, a operação de mover dois pontos afastando-se é referida como uma operação “pinch-out”, e com esta operação a imagem exibida é ampliada.

[0004] Em uma técnica discutida no Pedido de Patente Japonesa aberta ao público No. 2011-059952, quando pelo menos um dos dois dedos tocando a tela se move, uma operação de pressão é reconhecida de acordo com a mudança de distância entre os dois dedos, e a relação de ampliação de uma imagem é mudada e, simultaneamente, a imagem exibida é rolada de acordo com a direção de movimento do dedo.

RESUMO DA INVENÇÃO

[0005] A presente invenção se refere a um aparelho de processamento de informação, em que uma operação de multitoques é possível, capaz de reduzir falsas operações realizadas em relação à intenção do usuário no aparelho de processamento de informação.

[0006] Além disso, características e aspectos da presente invenção tornar-se-ão evidentes da seguinte descrição detalhada das formas de realização exemplares com referência aos desenhos anexados.

BREVE DESCRIÇÃO DOS DESENHOS

[0007] Os desenhos anexos, que são incorporados em e constituem uma parte da especificação, ilustram formas de realização, características e aspectos exemplares da invenção e, juntamente com a descrição, servem para explicar os princípios da invenção.

[0008] A Fig. 1A é um diagrama em blocos ilustrando uma configuração de hardware exemplar de um aparelho de processamento de informação.

[0009] A Fig. 1B é um diagrama em blocos ilustrando uma configuração de função exemplar do aparelho de processamento de informação.

[0010] A Fig. 2 é um fluxograma ilustrando um fluxo de processamento realizado pelo aparelho de processamento de informação para reconhecimento de uma operação de multitoques.

[0011] A Fig. 3A é um fluxograma ilustrando um processamento de detecção de toque exemplar realizado pelo aparelho de processamento de informação. A Fig. 3B é um fluxograma ilustrando um exemplo de processamento de saída realizado pelo aparelho de processamento de informação.

[0012] A Fig. 4A é um diagrama ilustrando uma operação de multiarrastos realizada por um usuário. A Fig. 4B é um diagrama ilustrando uma distribuição exemplar dos pontos tocados detectados quando um usuário realiza uma operação de multiarrastos.

[0013] As Figs. 5A a 5F são tabelas ilustrando exemplos de informações retidas nos pontos tocados detectados.

[0014] A Fig. 6 é um fluxograma ilustrando um fluxo para reconhecimento de uma operação de multitoques do aparelho de processamento de informação.

[0015] A Fig. 7A é um diagrama ilustrando uma distribuição exemplar de pontos tocados detectados quando um usuário realiza uma operação de aperto. As Figs. 7B a 7E são tabelas ilustrando exemplos de informações contidas em pontos tocados detectados.

[0016] A Fig. 8 é um diagrama em blocos ilustrando uma configuração de função exemplar do aparelho de processamento de informação.

[0017] A Fig. 9 é um fluxograma ilustrando um fluxo para reconhecimento de uma operação de multitoques do aparelho de processamento de informação.

[0018] A Fig. 10 é um fluxograma ilustrando um fluxo de exemplo do processamento de geração de vetor de movimento realizado pelo aparelho de processamento de informação.

[0019] As Figs. 11A a 11F são diagramas ilustrando distribuições exemplares dos pontos tocados detectados quando um usuário realiza operações de toque.

DESCRIÇÃO DAS FORMAS DE REALIZAÇÃO

[0020] Várias formas de realização, características e aspectos exemplares da invenção serão descritos em detalhes abaixo com referência aos desenhos.

[0021] As formas de realização exemplares descritas abaixo são meros exemplos e não limitadas a eles.

[0022] Em uma primeira forma de realização exemplar, um estado de multitoques é admitido. No estado de multitoques, um usuário toca dois pontos em um ponto do tempo. Um exemplo é descrito, em que um conteúdo de operação realizada por um usuário em um aparelho de processamento de informação 100 é determinado em resposta a um término de uma atualização de informação de posição de todos os dois pontos, a fim de reconhecer uma operação de multitoques satisfazendo uma intenção do usuário.

[0023] Um caso é descrito como uma operação de multitoques exemplar em que um usuário pretende mover dois pontos tocados em uma mesma direção, enquanto mantendo a distância entre eles (aqui abaixo referida como uma operação de “multiarrastos”)

[0024] Até agora, a fim de reconhecer uma operação de multitoques, a informação de um ponto tocado detectado por um painel de toque é notificada uma por uma, e o processamento é realizado com base na informação de posição obtida para cada ponto. Portanto, entre dois pontos tocados movidos por um usuário para realizar uma operação de multiarrastos, em um ponto do tempo quando uma posição após um primeiro ponto ser movido é obtida, uma posição de um segundo ponto tocado antes do movimento é mantida. Como resultado, determina-se que a “distância entre dois pontos” é aumentada pela distância correspondendo à quantidade de movimento do dedo do usuário.

[0025] Em seguida, em um ponto do tempo, quando a posição do segundo ponto após movimento é obtida, a distância entre os dois pontos retornou para a distância antes do movimento. Como resultado, determina-se que a “distância entre dois pontos” é reduzida.

[0026] Portanto, quando um usuário pretende realizar uma operação de multiarrastos, um pinch-out e um pinch-in são alternativamente notificados com base nos resultados da determinação acima descrita. Como resultado, uma exibição anormal, em que a imagem exibida é ampliada e alternativamente reduzida, é realizada no aparelho em relação à intenção do usuário.

[0027] Ao contrário, na presente forma de realização exemplar, a informação de posição de uma pluralidade de pontos tocados configurando uma operação de multitoques é obtida e, em resposta a um término de uma atualização da informação de posição de todos os pontos tocados obtidos, um conteúdo da operação realizada pelo usuário é determinado.

[0028] A Fig. 1A é um diagrama ilustrando uma configuração de hardware exemplar de um aparelho de processamento de informação 100 de acordo com a presente forma de realização exemplar. Uma unidade central de processamento (CPU) 101 realiza cálculos e determinações lógicas para vários tipos de processamentos e controla cada componente conectado a um barramento de sistema 110.

[0029] O aparelho de processamento de informação 100 é provido com memórias, incluindo uma memória de programa e uma memória de dados. Uma memória somente de leitura (ROM) 102 é uma memória de programa para armazenar programas, para controlar vários tipos de procedimentos de processamento da CPU 101, descritos abaixo. Uma memória de acesso aleatório (RAM) 103 inclui uma área de trabalho para os programas acima descritos para a CPU 101, uma área de salvamento de dados para processamento de erro, e uma área de carga para o programa de controle acima descrito. A memória de programa pode ser realizada carregando-se programas de um dispositivo de armazenagem 109 para a RAM 103.

[0030] Um disco rígido (HD) 104 armazena dados e programas, de acordo com a presente forma de realização exemplar. Na presente forma de realização exemplar, o HD 104 armazena uma pluralidade de dados de imagem. O dispositivo de armazenagem externo 109 conectado a ele, via uma interface de entrada/saída (I/F) 107, pode ser usado no lugar do HD 104.

[0031] O dispositivo de armazenagem externo 109 pode ser configurado com, por exemplo, um acionamento de armazenagem de meio (meio de gravação) e externo, para acessar o meio. Um tal meio inclui, por exemplo, um disco flexível (FD), um disco compacto ROM, um disco versátil digital (DVD), uma memória de barramento em série universal, um disco magneto-óptico, e uma memória flash.

[0032] Além disso, o dispositivo de armazenagem externo 109 pode ser um aparelho servidor conectado via uma rede. Na presente forma de realização exemplar, a informação necessária é armazenada na RAM 103, no HD 104, e no dispositivo de armazenagem externo 109.

[0033] Uma interface de entrada (I/F) controla um dispositivo de entrada, tal como um dispositivo de indicação, para obter-se uma saída de sinal do dispositivo de entrada. Uma saída I/F 106 emite um sinal de controle para controlar uma emissão de um resultado de vários tipos de processamentos, descritos abaixo, para um dispositivo de saída, incluindo uma unidade de exibição, tal como um monitor de cristal líquido e um monitor de televisão.

[0034] Na presente forma de realização exemplar, um monitor de painel de toque 108, integrado no aparelho de processamento de informação 100, inclui um painel de toque (dispositivo de entrada) e um dispositivo de exibição (dispositivo de saída). Entretanto, pode ser usado um dispositivo externo conectado ao aparelho de processamento de informação 100, e também podem ser utilizados dispositivos independentes.

[0035] Do painel de toque como o dispositivo de entrada, de acordo com a presente forma de realização exemplar, um sinal indicando a detecção do ponto tocado ou destacado por um usuário é notificado ao aparelho de processamento de informação 100 como um evento de toque. Nessa ocasião, a entrada I/F 105 adquire um evento de toque, um por um, detectado sequencialmente varrendo-se uma área de detecção de toque.

[0036] Na presente forma de realização exemplar, um painel de toque de tipo de detecção de capacitância é utilizado, e coordenadas de um ponto são especificadas como um ponto tocado em uma área de contato entre o usuário e a superfície de painel para notificar o evento de toque. Entretanto, o tipo de painel de toque não é limitado ao tipo de detecção de capacitância.

[0037] A Fig. 1B é um diagrama em blocos de função ilustrando uma configuração de função do aparelho de processamento de informação 100 de acordo com a presente forma de realização exemplar. O aparelho de processamento de informação 100 inclui uma unidade de detecção 111, uma primeira unidade de aquisição 112, uma unidade de determinação 114, uma segunda unidade de aquisição 115, uma unidade de decisão 116, e uma unidade de controle de exibição 118.

[0038] Estas unidades de função são implementadas pela CPU 101 carregando e executando o programa armazenado na ROM 102 na RAM 103. Além disso, na presente forma de realização exemplar, uma unidade de retenção 113 é configurada pela RAM 103, e uma unidade de armazenagem 119 é uma unidade de função do HD 104. Aqui abaixo, cada componente será descrito.

[0039] A unidade de detecção 111 sequencialmente detecta informações de um evento de toque notificado pelo monitor do painel de toque 108, uma por uma, e analisa-as.

[0040] A primeira unidade de aquisição 112 adquire informações sobre os pontos tocados detectados pela unidade de detecção 111. Em seguida, informações indicando a posição de um ponto tocado e o momento quando o toque é detectado (tempo de detecção) são associadas com uma ID do ponto tocado, e então armazenadas na unidade de retenção 113 para cada ponto tocado. Usando a ID, o mesmo ponto tocado pode ser identificado.

[0041] Portanto, a primeira unidade de aquisição 112 atualiza a informação retida pela unidade de retenção 113 cada momento em que a primeira unidade de aquisição 112 adquire a informação do ponto tocado com a mesma ID. Associando-se a ordem de detecção dos pontos tocados com as IDs, o controle torna-se mais fácil quando uma pluralidade de pontos tocados é detectada.

[0042] A unidade de detecção 114 refere-se à informação retida na unidade de retenção 113, para determinar se a informação de posição de todos os pontos detectados foi atualizada.

[0043] A segunda unidade de aquisição 115, baseada na informação adquirida pela primeira unidade de aquisição 112, calcula a distância entre dois pontos tocados e a distância mudada entre eles antes e após as posições dos pontos tocados serem atualizadas, e o seu valor absoluto.

[0044] Especificamente, a segunda unidade de aquisição 115 calcula a distância mais curta baseada nas coordenadas dos dois pontos tocados adquiridos pela primeira unidade de aquisição 112 e as retêm. Em seguida, a segunda unidade de aquisição 115 realiza uma operação de comparação entre a distância dos dois pontos recentemente calculados após a atualização dos pontos tocados e a distância mantida para obtenção da distância mudada e o seu valor absoluto.

[0045] A unidade de decisão 116 adquire o valor absoluto da distância mudada entre os dois pontos obtidos pela segunda unidade de aquisição 115, para compará-lo com um predeterminado valor limiar. Na presente forma de realização exemplar, se o valor mudado obtido for igual a ou maior do que o predeterminado valor limiar, a unidade de decisão 116 decide que a operação realizada pelo usuário é uma operação de aperto (primeira operação). Por outro lado, se o valor mudado adquirido for menor do que o predeterminado valor limiar, a unidade de decisão 116 decide que a operação realizada pelo usuário é uma operação de multiarrastos (segunda operação).

[0046] Se a unidade de decisão 116 decidir que uma operação de aperto seja introduzida, a unidade de controle de aperto 117 determina se uma operação pinch-out ou pinch-in é iniciada, com base no valor mudado adquirido pela segunda unidade de aquisição 115.

[0047] A unidade de controle de exibição 118 adquire a informação processada pela unidade de decisão 116 e gera uma imagem de exibição para exibir em um dispositivo de saída, que é um monitor de painel de toque na presente forma de realização. No monitor, antes da operação de multitoques ser realizada pelo usuário, pelo menos um, de uma pluralidade de dados de imagem armazenados na unidade de armazenagem 119, é exibido.

[0048] Se a unidade de decisão 116 decidir que a operação de entrada é uma operação de aperto, a unidade de decisão 116 adquire um parâmetro da unidade de controle de aperto 117 e gera uma imagem de exibição, que é produzida ampliando-se ou reduzindo-se a imagem exibida antes do usuário realizar a operação. Por outro lado, se a unidade de decisão 116 decidir que a operação de entrada é uma operação de multiarrastos, na presente forma de realização exemplar, com base na direção em que os pontos tocados são movidos, a unidade de decisão 116 gera uma imagem de exibição para exibir uma imagem específica entre a pluralidade de dados de imagem armazenados na unidade de armazenagem 119.

[0049] A Fig. 2 é um fluxograma ilustrando um fluxo para reconhecimento de uma operação de multitoques pelo aparelho de processamento de informação 100, de acordo com a presente forma de realização exemplar.

[0050] O aparelho de processamento de informação 100, de acordo com a presente forma de realização exemplar, inicia o processamento para reconhecimento da operação de multitoques em resposta à exibição de pelo menos um dos dados de imagem armazenado na unidade de armazenagem 119 do monitor de painel de toque 108.

[0051] Primeiro, na etapa S201, um ponto tocado é adquirido. Na presente forma de realização exemplar, a unidade de detecção 111 adquire um evento de toque, um por um, detectado varrendo-se a área de entrada 401 do painel de toque, e analisa-o.

[0052] Em seguida, a primeira unidade de aquisição 112 mantém, na unidade de retenção 113, a informação sobre o ponto tocado detectado na área de entrada 401 para cada ponto tocado. Na presente forma de realização exemplar, a ID do ponto tocado, a informação indicando a informação de posição expressa por coordenadas, e o tempo adquirido, são mantidos na unidade de retenção 113. Os detalhes do processamento realizado na etapa 201 serão descritos abaixo.

[0053] Na etapa S202, a unidade de determinação 114 determina se uma pluralidade dos pontos tocados é detectada na área de entrada 401. Na presente forma de realização exemplar, uma vez que cada ponto tocado é identificado pela ID, o número de pontos tocados é obtido referindo-se ao número de IDs entre partes da informação armazenada na unidade de retenção 113.

[0054] Na presente forma de realização exemplar, o aparelho de processamento de informação 100 determina se uma operação de multitoques, adquirida usando-se dois pontos tocados, é um multiarrasto de uma operação de aperto. Portanto, a descrição será feita abaixo admitindo-se que, na área de entrada 401, até dois pontos tocados são detectados.

[0055] Se for determinado que dois ou mais pontos tocados foram detectados (SIM na etapa S202), o processamento prossegue para a etapa S203. Por outro lado, se for determinado que dois ou mais pontos tocados não foram detectados (NÃO na etapa S202), o processamento termina.

[0056] Na etapa S203, a unidade de determinação 114 determina se a informação de posição de todos os pontos tocados, cuja informação é mantida na unidade de retenção 113, está atualizada. Na presente forma de realização exemplar, na etapa S201, a primeira unidade de aquisição 112 determina um sinalizador de atualização quando a informação do ponto tocado é atualizada e, na etapa S203, a unidade de determinação 114 realiza a determinação baseada no número de sinalizadores de atualização.

[0057] O resultado do primeiro processamento da etapa S203 é sempre determinado como “SIM”. Se a informação de posição de todos os pontos tocados for determinada como estando atualizada (SIM na etapa S203), o sinalizador de atualização é restaurado, e o processamento prossegue para a etapa S204. Se a informação de posição de todos os pontos tocados for determinada não estar atualizada (NÃO na etapa S203), o processamento termina.

[0058] Além disso, o método para determinar se os pontos tocados estão atualizados não é limitado a ele, e outros métodos podem ser usados. Por exemplo, a unidade de determinação 114 pode referir-se ao tempo de detecção de cada ponto tocado contido na unidade de retenção 113, e realiza a determinação com base em se a informação de todos os pontos tocados, que são detectados após o momento em que o processamento da etapa S203 é determinado ser “SIM” a última vez, está atualizada.

[0059] Como descrito acima, na presente forma de realização exemplar, a última informação de posição de todos os pontos tocados é especificada pelo fato de a informação de posição de todos os pontos tocados retidos ser atualizada.

[0060] Na etapa S204, a unidade de decisão 116 decide se pelo menos um ponto tocado é movido. Na presente forma de realização exemplar, da etapa S201, quando nova informação de posição de um ponto tocado tendo a mesma ID que uma ID já detectada é obtida, um sinalizador de movimento é determinado e mantido na unidade de retenção 113.

[0061] Portanto, na etapa S204, a unidade de decisão 116 pode decidir se o ponto tocado foi movido, checando o sinalizador de movimento da unidade de retenção 113. Se for determinado que pelo menos um ponto tocado foi movido (SIM na etapa S204), o sinalizador de movimento é restaurado e o processamento prossegue para a etapa S206.

[0062] Se for determinado que nenhum ponto tocado foi movido (NÃO na etapa S204), o processamento prossegue para a etapa S205.

[0063] Além disso, o método para decidir se um ponto tocado foi movido não é limitado a isso. Por exemplo, a informação de posição antes da atualização é mantida quando a informação da unidade de retenção 113 é atualizada, e a unidade de decisão 116 pode decidir se o ponto tocado é movido com base em se a distância entre a informação de posição antes e aquela após a atualização é maior do que uma predeterminada distância.

[0064] Na etapa S205, a segunda unidade de aquisição 115 adquire a distância entre os dois pontos tocados. A segunda unidade de aquisição 115 calcula a distância mais curta entre os dois pontos tocados com base na informação adquirida pela primeira unidade de aquisição 112, e a retém.

[0065] Por outro lado, na etapa S206, a segunda unidade de aquisição 115 adquire a distância mudada entre dois pontos tocados detectados na área de entrada 401. A segunda unidade de aquisição 115 calcula a distância mais curta entre dois pontos tocados com base na informação adquirida pela primeira unidade de aquisição 112 e a mantém.

[0066] Em seguida, a distância calculada recentemente entre dois pontos após a atualização e a distância entre os dois pontos calculados e mantidos na última vez na etapa S205 ou etapa S206, são submetidas a um cálculo de comparação para obter-se o valor mudado e o valor absoluto de distância.

[0067] Então, na etapa S207, a unidade de decisão 116 decide se o valor absoluto, da distância mudada entre os dois pontos adquiridos pela segunda unidade de aquisição 115, é menor do que um valor limiar “a”.

[0068] Aqui, “a” é um valor limiar para a distância registrada antecipadamente no aparelho de processamento de informação 100. O valor limiar “a” é estabelecido com base na distância mudada entre os dois pontos requeridos sendo reconhecidos pelo aparelho de processamento de informação 100, cuja distância dos dois pontos tocados por um usuário é ampliada para a operação de aperto ou reduzida.

[0069] Se for determinado que o valor mudado (valor absoluto) é menor do que o valor limiar “a” (SIM na etapa S207), a unidade de decisão 116 decide que a entrada de operação pelo usuário é uma operação de multiarrastos, e o processamento prossegue para a etapa S208. Se for determinado que o valor mudado (valor absoluto) é igual ou maior do que o valor limiar “a” (NÃO na etapa S207), a unidade de decisão 116 decide que a entrada de operação pelo usuário é uma operação de aperto, e o processamento prossegue para a etapa S210.

[0070] Na etapa S208, a unidade de decisão 116 notifica à unidade de controle de exibição 118 que a operação de multiarrastos é introduzida. Na etapa S209, o processamento correspondente à operação de multiarrastos é realizado. Na presente forma de realização exemplar, o processamento, para exibição dos dados de imagem específicos do monitor do painel de toque entre uma pluralidade de dados armazenados na unidade de armazenagem 119, é realizado. Seus detalhes são descritos abaixo.

[0071] Por outro lado, na etapa S210, a unidade de controle de aperto 117 determina se a operação pinch-out ou a operação pinch-in de entrada é iniciada. Na presente forma de realização exemplar, a unidade de controle de aperto 117 determina se a distância entre os dois pontos tocados é ampliada ou reduzida com base no valor mudado entre os dois pontos adquiridos pela segunda unidade de aquisição 115.

[0072] Em seguida, a distância total entre os dois pontos sendo ampliada ou reduzida é contada. Na etapa S210, se o número de vezes continuamente contado da distância entre os dois pontos tocados for ampliado duas vezes ou mais, determina-se que a operação pinchout foi iniciada.

[0073] Se o número de vezes continuamente contado da distância entre os dois pontos tocados for reduzido em duas vezes ou mais, determina-se que a operação pinch-in foi iniciada. Por outro lado, se o número de vezes continuamente contado da distância entre os dois pontos tocados for ampliado ou reduzido uma vez, quer uma operação pinch-out ou pinch-in não é determinada. Neste caso, determina-se que a operação de aperto não é iniciada.

[0074] Este processamento é realizado para evitarem-se falsas operações mesmo quando um erro ocorre em que é erroneamente determinado, na etapa S207, que a distância mudada dos dois pontos (valor absoluto) é o valor limiar “a” ou maior, originado por condições do painel de toque e os dedos do usuário. Assim, a intenção do usuário realizar uma operação de aperto é certamente refletida.

[0075] Se for determinado que uma operação pinch-out ou pinch-in é iniciada (SIM na etapa S210), o processamento prossegue para a etapa S211. Por outro lado, se for determinado que nem a operação pinch-out nem a operação pinch-in foram realizadas (NÃO na etapa S210), o processamento termina.

[0076] Na etapa S211, a unidade de controle de aperto 117 notifica a unidade de controle de exibição 118 que uma operação pinch-out ou pinch-in foi introduzida. Na etapa S212, a unidade de controle de exibição 118 emite o resultado originado pela entrada da operação pinch-out ou pinch-in.

[0077] Na presente forma de realização exemplar, quando a operação pinch-out é introduzida, o processamento para exibir a imagem de exibição ampliada no monitor, de acordo com a distância que o usuário move os pontos tocados, é realizado. Além disso, quando a operação pinch-in é introduzida, o processamento para exibir a imagem de exibição reduzida no monitor, de acordo com a distância que o usuário move os pontos tocados, é realizado.

[0078] Como descrito acima, o processamento, para reconhecer a operação de multitoques pelo aparelho de processamento de informação 100, é realizado. Após a série de processamentos ser completada, o processamento retorna para a etapa S201, e cada vez que um novo evento de toque é notificado, o processamento acima descrito é realizado.

[0079] A Fig. 3A é um fluxograma ilustrando um fluxo de processamento de detecção do ponto tocado realizado na etapa S201.

[0080] Na etapa S301, a unidade de detecção 111 determina se o evento de toque notificado pelo painel de toque é “TOUCH” (toque).

[0081] Do painel de toque usado na presente forma de realização exemplar, “TOQUE” é emitido como um evento de toque quando a área de entrada 401 é varrida para detectar que foi tocada. Quando o toque detectado é liberado, a “LIBERAÇÃO” (RELEASE) é notificada como um evento de toque.

[0082] Se o evento de toque notificado for determinado ser “TOQUE” (SIM na etapa S301), o processamento prossegue para a etapa S303. Se o evento de toque notificado não for “TOQUE” (isto é, “LIBERAÇÃO”) (NÃO na etapa S301), o processamento prossegue para a etapa S302.

[0083] Na etapa S302, a primeira unidade de aquisição 112 deleta a informação associada com a correspondente ID com o ponto tocado em que “RELEASE” é detectada entre a informação mantida na unidade de retenção 113 juntamente com a ID.

[0094] Por outro lado, na etapa S303, a unidade de detecção 111 determina se o ponto tocado, com a mesma ID que o ponto tocado em que “TOQUE” é detectado, foi anteriormente detectado. A unidade de detecção 111 refere-se à informação contida na unidade de retenção 113 e determina se a correspondente ID está incluída.

[0085] Se for determinado que um ponto tocado com a mesma ID foi anteriormente detectado (SIM na etapa S303), o processamento prossegue para a etapa S305. Por outro lado, se for determinado que um ponto tocado com a mesma ID não foi detectado (NÃO na etapa S303), o processamento prossegue para a etapa S304.

[0086] Na etapa S304, a primeira unidade de aquisição 112 novamente adiciona a informação tal como a ID do ponto tocado em que “TOQUE” é detectado, as coordenadas, e o tempo para retenção da informação na unidade de retenção 113. Nessa ocasião, a unidade de retenção 113 mantém a informação indicando que o ponto tocado está atualizado. Por exemplo, uma sinalização atualizada é estabelecida.

[0087] Na etapa S 305, a informação das coordenadas com a mesma ID que o ponto tocado onde “TOQUE” é detectado e o tempo detectado dentre a informação contida na unidade de retenção 13, é atualizada. Nessa ocasião, a unidade de retenção 113 retém a informação indicando que o ponto tocado está atualizado. Por exemplo, uma sinalização atualizada é estabelecida.

[0088] Além disso, quando a informação de posição requerida é movida da posição do ponto tocado com a mesma ID antes da atualização de uma predeterminada distância ou mais, a informação indicando que o ponto tocado é movido é mantida. Por exemplo, uma sinalização de movimento é estabelecida.

[0089] Em seguida, o processamento retorna para o processamento principal (Fig. 2) em que a operação de multitoques é reconhecida. Na presente forma de realização exemplar, a predeterminada distância é estabelecida anteriormente com base na distância mais curta pela qual o ponto tocado precisa ser removido para realizar uma operação de toque pelo usuário. [0081] Para discriminar uma pluralidade de operações, uma pluralidade de valores limiares escalonados pode ser estabelecida. Na presente forma de realização exemplar, quando um movimento é detectado dentro da predeterminada distância, o ponto tocado é tratado como não movido, isto é, parado.

[0090] Na presente forma de realização exemplar, um painel de toque notifica “TOUCH”(toque) como um evento de toque quando a área de entrada 401 é varrida e o toque é detectado, e notifica “RELEASE”(liberação) como um evento de toque quando o ponto tocado detectado é liberado. Entretanto, não é limitado a estes.

[0091] Por exemplo, “TOUCH_DOWN”, “MOVE”, e “TOUCH_UP” são notificados como eventos de toque, respectivamente, quando a área de entrada 401 é novamente tocada, quando o movimento do ponto tocado com a já detectada ID é detectado, e quando o ponto tocado é liberado.

[0092] Neste caso, quando “TOUCH_DOWN” é notificado, a informação contida na unidade de retenção 113 é novamente adicionada e a sinalização atualizada é estabelecida. Quando “MOVE” é notificado, a informação com a mesma ID é atualizada e a sinalização de movimento é estabelecida. Além disso, quando “TOUCH_UP” é notificado, a informação com a mesma ID pode ser deletada.

[0093] Deste modo, o aparelho de processamento de informação 100 identifica dois ou mais pontos tocados detectados pelo painel de toque que é um dispositivo de entrada usando IDs e controla a informação. Como resultado, o movimento de cada uma da pluralidade de pontos tocados pode ser detectada. Portanto, a operação de multitoques configurada naqueles pontos tocados pode ser reconhecida.

[0094] Fig. 3B é um fluxograma ilustrando um fluxo de um processamento de saída de resultado da operação de multiarrastos realizada na etapa S209. Uma operação exemplar requerida pela operação de multiarrastos, na presente forma de realização exemplar, processando para exibir dados de imagem específicos sobre o monitor de painel de toque dentre uma pluralidade de dados de imagem armazenados na unidade de armazenagem 119, é realizada. A pluralidade de dados de imagem armazenados na unidade de armazenagem 119 é armazenada em uma predeterminada ordem.

[0095] Na presente forma de realização exemplar, se a direção multiarrastada for à esquerda, uma imagem armazenou dez folhas após os dados de imagem exibidos antes da operação do usuário. Se a direção multiarrastada for à direita, uma imagem armazenou dez folhas antes dos dados de imagem exibidos antes da operação do usuário.

[0096] Na etapa S311, a unidade de controle de exibição 118 adquire a direção multiarrastada realizada pelo usuário. Na presente forma de realização exemplar, a unidade de controle de exibição 118 adquire pelo menos um dos pontos tocados adquiridos pela primeira unidade de aquisição 112, se a direção em que o usuário move o dedo do usuário a partir da coordenada-X da informação de posição antes e após a atualização for direção negativa ou direção positiva do eixo geométrico-X.

[0097] Na etapa S312, A unidade de controle de exibição 118 especifica dados de imagem a serem exibidos no monitor com base na informação indicando a direção adquirida na etapa S311. Na presente forma de realização exemplar, se a direção adquirida for a direção negativa do eixo geométrico-X, dentre uma pluralidade de dados de imagem da unidade de armazenagem 119, os dados de imagem correspondendo às dez folhas de dados de imagem após os dados de imagem exibidos antes da operação do usuário, são especificados.

[0098] Similarmente, se a direção adquirida for a direção positiva do eixo geométrico-X, dentre uma pluralidade de dados de imagem armazenados na unidade de armazenagem 119, os dados de imagem correspondendo às dez folhas de dados de imagem antes dos dados de imagem exibidos antes da operação do usuário, são especificados.

[0099] Na etapa S313, a unidade de controle de exibição 118 gera uma imagem de exibição para exibir os dados de imagem especificados. Em seguida, na etapa S314, a unidade de controle de exibição 118 emite a imagem de exibição gerada ao monitor de painel de toque 108 (dispositivo de saída). Em seguida, o processamento é finalizado para retornar ao processamento principal (isto é, fluxograma na Fig. 2) para reconhecimento da operação de multitoques.

[0100] Além disso, quando a saída da imagem de exibição da etapa S314 é realizada, o processamento pode ser realizado em resposta à liberação do ponto tocado pelo usuário. Nesse caso, após a etapa S313, o processamento de detecção do ponto tocado da Fig. 3A é realizado, e o processamento prossegue para a etapa S314, com base no término do processamento de deletar a informação dos pontos tocados na etapa S302 da unidade de retenção para todos os pontos tocados.

[0101] Deste modo, o usuário pode designar um tempo para exibir uma imagem específica para o aparelho de processamento de informação 100 pela operação de liberação dos dedos usados para introduzir a operação de multiarrastos do painel de toque.

[0102] A operação solicitada pela operação de multiarrastos não é limitada ao exemplo descrito acima. Por exemplo, o método para especificar os dados de imagem a serem exibidos não é limitado a dez folhas após ou dez folhas antes, e pode ser arbitrariamente determinado. Além disso, com respeito à operação de multiarrastos na direção do eixo geométrico-Y, uma certa operação do aparelho de processamento de informação 100 pode ser projetada.

[0103] Entretanto, em geral, o avanço de imagem é realizado em muitos casos correspondendo à operação para mover a imagem exibida na direção X pelo arrasto, para exibir outras imagens armazenadas antes e após a imagem. Portanto, a operação para exibir uma imagem específica avançando-se mais imagens uma vez, movendo-se as imagens exibidas na direção do eixo geométrico-X, empregando-se multiarrastos com uma pluralidade de dedos, é intuitivamente compreensível e conveniente aos usuários.

[0104] Um exemplo de operação 1 do aparelho de processamento de informação 100, de acordo com a primeira forma de realização exemplar de um usuário, é descrito em detalhes.

[0105] A Fig. 4 é um diagrama ilustrando uma operação exemplar do aparelho de processamento de informação 100 de acordo com a presente forma de realização exemplar. A Fig. 4A ilustra um estado em que um usuário introduz uma operação em uma área de entrada 401 do aparelho de processamento de informação 100. A área de entrada 401 é configurada de um monitor de painel de toque, incluindo um painel de toque sobre o monitor. A área de entrada 401 pode detectar um toque de um usuário sobre o painel de toque.

[0106] Na presente forma de realização exemplar, a área de entrada inteira 401 é usada como um plano coordenado com um ponto de origem em uma sua posição à esquerda inferior, e o painel de toque detecta coordenadas da posição tocada pelo usuário. Na presente forma de realização exemplar, como um exemplo de operação específico, a operação de multiarrastos é introduzida contatando-se os dedos 402 e 403 à área de entrada 401, e movendo-se os dedos 402 e 403 na direção horizontal.

[0107] A Figura 4B é um diagrama ilustrando um deslocamento exemplar das posições dos pontos tocados obtidos pelo aparelho de processamento de informação 100 quando o usuário realiza a operação de multiarrastos, como ilustrado na Fig. 4A. Os pontos tocados A a F ilustram as coordenadas das posições tocadas pelos dedos do usuário na área de entrada 401. A direção horizontal é estabelecida como sendo o eixo geométrico-X e a direção vertical é estabelecida como sendo o eixo geométrico-Y.

[0108] Primeiro, os dedos do usuário 402 e 403 tocam as posições correspondentes aos pontos A e B na área de entrada 401. O dedo lateral esquerdo 402 toca a posição correspondente ao ponto A tocado, e o dedo lateral direito 403 toca a posição correspondente ao ponto B tocado.

[0109] Então, o usuário move os dois dedos horizontalmente. As posições tocadas após mover os dois dedos correspondem ao ponto C tocado e ao ponto D tocado. O dedo lateral esquerdo 402 toca a posição correspondente ao ponto C tocado, e o dedo lateral direito 403 toca a posição correspondente ao ponto D tocado.

[0110] Além disso, o usuário move os dois dedos horizontalmente. As posições tocadas após mover os dois dedos são os pontos tocados E e F. O dedo lateral esquerdo 402 toca a posição correspondente ao ponto tocado E, e o dedo lateral direito 403 toca a posição correspondente ao ponto tocado F. Aqui abaixo, de acordo com a série de operações, será descrita a operação do aparelho de processamento de informação 100, de acordo com a presente forma de realização exemplar.

[0111] No exemplo de operação 1, a área de entrada 401 do painel de toque é varrida a cada 20 ms, e eventos de toque sequencialmente detectados são notificados à unidade de detecção 111. Além disso, o valor limiar “a” é estabelecido como sendo 10 pontos na frente.

[0112] Primeiro, a varredura da área de entrada 401 é iniciada em um estado em que o usuário toca a área de entrada 401, e o evento de toque do ponto tocado A é notificado pelo painel de toque. Na etapa S201, a unidade de detecção 111, do aparelho de processamento de informação 100, detecta que o ponto tocado A foi novamente tocado. Em seguida, a primeira unidade de aquisição 112 adquire informações de que a ID é 1, as coordenadas de posição são (100, 50), e o tempo de detecção é 0 ms, para contê-las na unidade de retenção 113.

[0113] A Fig. 5A é uma tabela ilustrando um exemplo de informação retida na unidade de retenção 113. Na etapa S202, a unidade de determinação 114 refere-se à informação contida na unidade de retenção 113 para determinar se dois ou mais pontos tocados são detectados na área de entrada 401 com base no número de IDs. Nesta ocasião, como ilustrado na Fig. 5A, somente um ponto tocado com ID 1 é detectado, e não dois ou mais pontos tocados (NÃO na etapa S202), e portanto, o processamento termina.

[0114] Em seguida, no painel de toque, o evento de toque do ponto tocado B é notificado. No aparelho de processamento de informação 100, da etapa S201, similarmente, a primeira unidade de aquisição 112 adquire informações de que a ID é 2, as coordenadas de posição são (110, 40), e o tempo de detecção é 5 ms. Nessa ocasião, a tabela contida na unidade de retenção 113 é atualizada como ilustrado na Fig. 5B.

[0115] Na etapa S202, a unidade de determinação 114 determina que o número de pontos tocados é dois ou mais (SIM na etapa S202). Na etapa S203, a unidade de determinação 114 determina que a informação de todos os pontos tocados detectados é atualizada (SIM na etapa S203), em razão do processamento ser realizado para o primeiro tempo. Na etapa S204, a unidade de decisão 116 decide que pelo menos um ponto tocado não é movido (NÃO na etapa S204). Em seguida, na etapa S205, a distância B na Fig. 4B é calculada com base nas coordenadas de posição dos respectivos dois pontos tocados. A distância B é encurtada entre outras distâncias entre os respectivos dois pontos.

[0116] Na presente forma de realização exemplar, com base nas coordenadas do ponto tocado A (100, 50) e do ponto B tocado (110, 40), a distância entre os dois pontos é 14 pontos. A segunda unidade de aquisição 115 contém 14 pontos na RAM 103 como a distância entre os dois pontos no tempo inicial de detecção. Então, o processamento é terminado.

[0117] Em seguida, a área de entrada 401 é varrida a cada 20 ms, o evento de toque do ponto tocado C é notificado pelo painel de toque. Na etapa S201, a primeira unidade de aquisição 112 do aparelho de processamento de informação 100 adquire a informação de que a ID é 1, as coordenadas de posição são (200, 50), e o tempo de detecção é de 20 ms, e a informação contida na unidade de retenção 113 é atualizada, como ilustrado na Fig. 5C. Nessa ocasião, a ID do ponto tocado C é 1, isto é, idêntica àquela do ponto tocado A e, portanto, a informação associada àquela da ID 1 é atualizada.

[0118] Além disso, as coordenadas de posição são diferentes daquelas detectadas na última vez, um sinalizador de movimento é estabelecido. Na etapa S202, o número de pontos tocados é determinado como sendo dois ou mais. Na etapa S203, visto que a informação do ponto tocado com a ID 1 é atualizada, porém do ponto tocado com a ID 2 não é atualizada, a unidade de determinação 114 determina que a informação não de todos os pontos tocados é atualizada (NÃO na etapa S203), o processamento é terminado.

[0119] Em seguida, um evento de toque do ponto tocado D é notificado pelo painel de toque. Na etapa S201, o aparelho de processamento de informação 100 similarmente adquire a informação de que a ID é 2, as coordenadas de posição são (210, 40), o tempo de detecção é 25 ms e a informação contida na unidade de retenção 113 é atualizada, como ilustrado na Fig. 5D. Nessa ocasião, visto que a ID do ponto tocado D é 2 e idêntica àquela do ponto tocado B, a informação associada à ID 2 é atualizada.

[0120] Além disso, visto que as coordenadas de posição são diferentes daquelas da última vez de detecção, o sinalizador de movimento é estabelecido. Na etapa S202, o número de pontos tocados é determinado como sendo dois, isto é, dois ou mais (SIM na etapa S202). Portanto, na etapa S203, visto que os pontos tocados com a ID 1 e 2 foram atualizados, é determinado que a informação de posição de todos os pontos tocados seja atualizada (SIM na etapa S203). Na etapa S204, com base no sinalizador de movimento, é determinado que pelo menos um ponto tocado seja movido (SIM na etapa S204).

[0121] Na etapa S206, a segunda unidade de aquisição 115 adquire a mudança de distância entre os dois pontos tocados e o seu valor absoluto. Primeiro, com base nas coordenadas do ponto C tocado (200, 50) e das coordenadas do ponto D tocado (210, 40), a distância entre os dois pontos (distância B na Fig. 4A) é calculada como 14 pontos.

[0122] Em seguida, o valor de distância mudado (valor absoluto), entre os dois pontos adquiridos pela segunda unidade de aquisição 115 na última vez e retido na RAM 113, é calculado como sendo 0 pontos (= 14 - 14).

[0123] Agora, uma vez que o valor limiar “a” é de 10 pontos, na etapa S207, a unidade de decisão 116 decide que o valor de distância mudado entre os dois pontos é menor do que o valor limiar “a” (SIM na etapa S207). Portanto, na etapa S208, a operação de multiarrastos é notificada, e na etapa S209, uma saída é realizada.

[0124] De acordo com o exemplo de operação 1, a operação de multiarrastos é realizada na direção positiva do eixo geométrico-X, dentre a pluralidade de dados de imagem armazenados na unidade de armazenagem 119, os dados de imagem correspondentes à dez folhas de imagem antes da imagem exibida antes da operação do usuário, são exibidos.

[0125] Além disso, uma vez que a área de entrada 401 é varrida a cada 20 ms, um evento de toque do ponto tocado E é notificado no painel de toque.

[0126] Na etapa S201, a primeira unidade de aquisição 112 do aparelho de processamento de informação 100 adquire a informação de que a ID é 1, as coordenadas de posição são (300, 50), e o tempo de detecção é de 40 ms, e a informação retida na unidade de retenção 113 é atualizada, como ilustrado na Fig. 5E. Nessa ocasião, a ID do ponto tocado E é 1, isto é, idêntica àquela do ponto tocado C e, portanto, a informação associada àquela da ID 1 é atualizada.

[0127] Além disso, a posição é movida. Na etapa S202, determina-se que o número de pontos tocados é dois ou mais. Na etapa S203, uma vez que a informação do ponto tocado com a ID 1 é atualizada, mas o ponto tocado com a ID 2 não é atualizado, a unidade de determinação 114 determina que a informação não de todos os pontos tocados, é atualizada (NÃO na etapa S203), e o processamento é finalizado.

[0128] Em seguida, do painel de toque, um evento de toque do ponto tocado F é notificado. Na etapa S201, a primeira unidade de aquisição 112 do aparelho de processamento de informação 100 similarmente adquire a informação de que a ID é 2, as coordenadas de posição são (310, 40), e o tempo de detecção é de 45 ms, e a informação contida na unidade de retenção 113 é atualizada, como ilustrado na Fig. 5F. Nessa ocasião, a ID do ponto tocado F é 2, isto é, idêntica àquela do ponto tocado D e, portanto, a informação associada àquela da ID 2 é atualizada.

[0129] Além disso, as coordenadas de posição são diferentes daquelas detectadas na última vez, o sinalizador de movimento é determinado. Na etapa S202, o número de pontos tocados é determinado como sendo dois, isto é, dois ou mais (SIM na etapa S202). Portanto, na etapa S203, uma vez que os pontos tocados com a ID 1 e 2 são atualizados, é determinado que a informação de posição de todos os pontos tocados seja atualizada (SIM na etapa S203). Na etapa S204, determina-se que pelo menos um ponto tocado seja movido (SIM na etapa S204).

[0130] Na etapa S206, a segunda unidade de aquisição 115 adquire a distância mudada entre os dois pontos tocados e o seu valor absoluto. Primeiro, com base nas coordenadas do ponto tocado E (300, 50) e as coordenadas do ponto tocado F (310, 40), a distância entre os dois pontos (distância F na Fig. 4B) é calculada como sendo 14 pontos. Então, o valor mudado (valor absoluto), da distância entre os dois pontos adquiridos pela segunda unidade de aquisição 115 na última vez e contida na RAM 113, é calculado como sendo 0 pontos (= 14 - 14).

[0131] Agora, uma vez que o valor limiar “a” é de 10 pontos, na etapa S207, a unidade de decisão 116 decide que a distância mudada entre os dois pontos é menor do que o valor limiar “a” (SIM na etapa S207). Portanto, na etapa S208, a operação de multiarrastos é notificada, e na etapa S209, uma saída é realizada.

[0132] De acordo com o exemplo de operação 1, a operação de multiarrastos é realizada na direção positiva do eixo geométrico-X, dentre a pluralidade de dados de imagem armazenados na unidade de armazenagem 119, os dados de imagem correspondentes à dez folhas de imagem, ainda antes da imagem exibida na etapa S209, são exibidos.

[0133] Quando os dados de imagem especificados em resposta à liberação do ponto tocado são exibidos, mesmo se a operação de multiarrastos for notificada mais do que uma vez, a imagem de exibição para exibir os dados de imagem especificados para a primeira ocasião é mantida.

[0134] Portanto, em resposta à liberação de todos os toques dos pontos tocados pelo usuário, os dados de imagem correspondem à dez folhas de imagem antes da imagem exibida antes da operação do usuário. Deste modo, o usuário pode certamente exibir os dados de imagem correspondendo à dez imagens antes ou após a imagem exibida, independente da distância da operação de multiarrastos.

[0135] Como descrito acima, na presente forma de realização exemplar, a informação de posição dos dois pontos tocados, tocados pelo usuário, é adquirida e, em resposta ao término da atualização da informação de posição de todos os dois pontos tocados, o processamento é realizado para determinar a entrada de operação de multitoques pelo usuário no aparelho de processamento de informação 100.

[0136] Nessa ocasião, comparando-se a distância mudada entre os dois pontos e o valor limiar, determina-se o que a operação de entrada é, quer a operação de multiarrastos quer a operação de aperto. Deste modo, quando o usuário move os dois pontos tocados na mesma direção, enquanto mantendo a distância entre os dois pontos tocados, a operação de aperto não é erroneamente notificada. Como resultado, é evitada a falsa operação em que o tamanho da imagem exibida é mudado em relação à intenção do usuário.

[0137] Similarmente, quando o usuário introduz outra operação de multitoques usando uma pluralidade de dedos, tal como uma rolagem ou rotação da imagem, aplicando a presente forma de realização exemplar, é possível evitar que a operação de aperto seja reconhecida erroneamente.

[0138] Neste caso, determinando-se a entrada de operação de multitoques pelo usuário após a informação de posição de todos os pontos tocados constituindo a operação de multitoques ser atualizada, é possível reduzir as falsas operações realizadas em relação à intenção do usuário.

[0139] Na presente forma de realização exemplar, após a unidade de decisão 116 decidir que a entrada de operação pelo usuário é uma operação de aperto, na etapa S210, a unidade de controle de aperto 117 determina se a operação se a operação pinch-out ou a operação pinch-in foi iniciada. O processamento realizado na etapa S210 pode ser omitido.

[0140] Nesse caso, na etapa S211, a unidade de decisão 116 notifica a unidade de controle de exibição 118 que a operação de aperto foi iniciada. Então, na etapa S212, a unidade de controle de exibição 118 realiza processamento para mudar o tamanho da imagem exibida de acordo com a distância na qual o usuário move o ponto tocado com base no valor mudado entre os dois pontos adquiridos pela segunda unidade de aquisição 115.

[0141] Entretanto, na etapa S210, determinando-se se a operação foi iniciada com base nas direções mudadas e no número de direções mudadas na distância entre os dois pontos, a imagem de exibição pode ser mudada após determinar-se a operação destinada pelo usuário mais corretamente.

[0142] Por exemplo, se um erro ocorrer em que o valor de distância mudado (valor absoluto) entre os dois pontos for determinado como sendo o valor limiar “a” ou maior ocasionado pelo estado do painel de toque ou pelos dedos do usuário, a notificação de que a operação de aperto foi introduzida não é executada. Portanto, um efeito para evitar a falsa operação em que o aumento de exibição da imagem exibida é mudado em relação à intenção do usuário, pode ser obtido.

[0143] Na presente forma de realização exemplar, é descrito o processamento dos dois pontos tocados, porém, mesmo se mais do que dois pontos tocados forem detectados, processamento similar pode ser realizado.

[0144] Neste caso, por exemplo, somente dois pontos tocados, selecionados de acordo com a ordem detectada partindo do primeiro ponto tocado, e o mesmo processamento descrito acima, são realizados. Alternativamente, se N pontos tocados (mais do que dois pontos) do ponto tocado forem detectados, a informação de todos os pontos tocados N é adquirida e, na etapa S203, as subsequentes etapas de processamento são realizadas em resposta ao término da atualização da informação de todos os pontos tocados N.

[0145] Na primeira forma de realização exemplar, o painel de toque como um dispositivo de entrada notifica ao aparelho de processamento de informação 100 um evento de toque cada vez que o painel de toque detecta um ponto tocado ou um ponto tocado liberado por um usuário. Em comparação, no exemplo de modificação 1, o painel de toque notifica um evento de toque, cada vez que o painel de toque detecta um ponto tocado em uma nova posição pelo usuário, e o ponto tocado liberado pelo usuário para o aparelho de processamento de informação 100. Um tal caso será descrito abaixo.

[0146] O painel de toque usado no exemplo de modificação 1 da primeira forma de realização exemplar não notifica um evento de toque quando o ponto tocado é estacionário. Portanto, a informação do ponto tocado retido pelo aparelho de processamento de informação 100 não é sobreposta.

[0147] Portanto, quando o processamento para reconhecer uma operação de multitoques, de acordo com a primeira forma de realização exemplar, é realizado e, por exemplo, em um caso em que o usuário fixa um ponto tocado, dos pontos tocados, e move outro ponto tocado para realizar uma operação de aperto, uma parte da informação dos pontos tocados é mantida como ela é.

[0148] Portanto, se a determinação for realizada com base no término da atualização de todas as informações retidas pelo aparelho de processamento de informação 100, como na primeira forma de realização exemplar, a operação de multitoques pode não ser realizada. Portanto, no exemplo de modificação 1, da primeira forma de realização exemplar, determina- se que a informação de todos os pontos tocados seja especificada com base no decorrer de um tempo predeterminado do tempo de detecção anteriormente retido na unidade de retenção 113.

[0149] A configuração do hardware e configuração da função do aparelho de processamento de informação 100, de acordo com o exemplo de modificação 1, são as mesmas que aquelas da primeira forma de realização exemplar. Entretanto, a unidade de determinação 114, do exemplo de modificação 1 da primeira forma de realização exemplar, refere-se a um relógio incluído no aparelho de processamento de informação 100 e na informação retida na unidade de retenção 113, e determina que a informação de posição de todos os pontos tocados foi atualizada de acordo com o decorrer do tempo predeterminado, uma vez que atualização foi realizada anteriormente.

[0150] A Fig. 6 é um fluxograma ilustrando um fluxo de processamento, que é realizado pelo aparelho de processamento de informação 100 no exemplo de modificação 1 da primeira forma de realização exemplar, para reconhecimento da operação de multitoques. Nas etapas com os mesmos numerais que aqueles da Fig. 2, o mesmo processamento é realizado. Portanto, seus detalhes não são descritos e as diferentes partes da primeira forma de realização exemplar serão descritas.

[0151] No exemplo de modificação 1 da primeira forma de realização exemplar, na etapa S202, se for determinado que há dois ou mais pontos tocados (SIM na etapa S202), então, na etapa S601, a unidade de determinação 114 determina se a informação de posição de todos os pontos tocados retidos na unidade de retenção 113 é atualizada. No processamento da primeira vez, é sempre determinado ser “SIM”.

[0152] Então, se for determinado que todas as informações de posição retidas pela unidade de retenção 113 são atualizadas (SIM na etapa S601), o processamento prossegue para a etapa S24. Por outro lado, se for determinado que todas as informações de posição retidas pela unidade de retenção 113 não são atualizadas (NÃO na etapa S601), o processamento prossegue para a etapa S602.

[0153] Na etapa S602, a unidade de determinação 114 determina se um tempo predeterminado decorreu desde o término da atualização do ponto tocado antecipadamente entre os pontos tocados detectados no momento. Aqui, o tempo predeterminado é estabelecido anteriormente como sendo um tempo longo o suficiente para completar a varredura da área de entrada inteira 401 pelo painel de toque.

[0154] Por exemplo, um tempo tão longo quanto o período de varredura do painel de toque é estabelecido. Se os pontos tocados detectados forem dois ou mais, e um tempo suficiente para completar a atualização da varredura do painel de toque inteiro tiver decorrido desde a informação de posição anterior, entre a informação de posição detectada atualmente, é sabido que o movimento do ponto tocado, do qual o evento de toque não é notificado, não é detectado. Portanto, considera-se que é mantida a informação de posição de todos os pontos tocados retidos na unidade de retenção 113 no ponto de tempo.

[0155] Se a unidade de determinação 114 determinar que o tempo predeterminado, decorrido desde a atualização anterior da informação de posição dos pontos tocados, foi executado (SIM na etapa S602), o processamento prossegue para a etapa S204. Por outro lado, se a unidade de determinação 114 determinar que o tempo predeterminado, não decorrido desde a atualização anterior da informação de posição dos pontos tocados, foi executado (NÃO na etapa S602), o processamento é finalizado.

[0156] O processamento que não aquele descrito acima é realizado similar ao processamento para reconhecer a operação multitoques pelo aparelho de processamento de informação 100 ilustrado na Fig. 2.

[0157] O exemplo de operação 2 do aparelho de processamento de informação 100, de acordo com o exemplo de modificação 1 da primeira forma de realização exemplar operado pelo usuário, é descrito em detalhes referindo-se às Figs. 7A a 7E.

[0158] A Fig. 7A é um diagrama ilustrando um exemplo de deslocamentos de posição dos pontos tocados adquiridos pelo aparelho de processamento de informação 100 quando o usuário executa uma operação de aperto. A Fig. 7A corresponde à Fig. 4B da primeira forma de realização exemplar. Entretanto, o usuário retém o ponto tocado A com o dedo lateral esquerdo 402, na Fig. 4A, e move somente o dedo lateral direito 403 para executar uma operação de aperto na direção à direita (direção positiva do eixo geométrico-X). Como resultado, o ponto tocado B, ponto tocado D, e o ponto tocado F são sequencialmente detectados.

[0159] As Figs. 7B a 7E são um exemplo de uma informação de ilustração de tabela contida na unidade de retenção 113, mantida em resposta à detecção de cada ponto tocado. As Figs. 7B a 7E correspondem às Figs. 5A a 5F da primeira forma de realização exemplar. [0152] No exemplo de operação 2 também, a área de entrada 401 do painel de toque é varrida a cada 20 ms, e eventos de toque detectados são notificados à unidade de detecção 111. O tempo predeterminado usado para determinar se a informação de posição de todos os pontos tocados está atualizada é estabelecido para 20 ms, e o valor limiar “a” é estabelecido como sendo de 10 pontos. Eles foram determinados anteriormente.

[0160] Primeiro, a varredura da área de entrada 401 é iniciada em um estado em que o usuário toca a área de entrada 401, e o evento de toque do ponto tocado A é notificado pelo painel de toque. Na etapa S201, a unidade de detecção 111 do aparelho de processamento de informação 100 detecta que o ponto tocado A foi novamente tocado. Então, como ilustrado na Fig. 7B, a primeira unidade de aquisição 112 adquire informação de que a ID é 1, as coordenadas de posição são (10, 50), e o tempo de detecção é de 0 ms, e retém a informação na unidade de retenção 113.

[0161] Na etapa S202, a unidade de determinação 114 refere-se à informação retida para determinar se o número de pontos tocados detectado na área de entrada 401 é dois ou mais do número de IDs. Neste ponto, como ilustrado na Fig. 7B, visto que somente um ponto tocado com a ID 1 é detectado (isto é, não dois ou mais pontos detectados) (NÃO na etapa S202), o processamento termina.

[0162] Em seguida, o evento de toque do ponto tocado B é notificado no painel de toque. Na etapa S201, a primeira unidade de aquisição 112 do aparelho de processamento de informação 100 similarmente adquire informação de que a ID é 2, as coordenadas de posição são (110, 40), e o tempo de detecção é de 5 ms. Nessa ocasião, a tabela retida na unidade de retenção 113 é atualizada como ilustrado na Fig. 7C.

[0163] Na etapa S202, a unidade de determinação 114 determina que o número de pontos tocados é dois ou mais. Na etapa S601, a unidade de determinação 114 determina, quando é o processamento da primeira vez, que a informação de todos os pontos tocados detectados é atualizada (SIM na etapa S601).

[0164] Na etapa S204, a unidade de decisão 116 decide que pelo menos um ponto tocado não é movido (NÃO na etapa S204). Em seguida, na etapa S205, pelas coordenadas de posição dos pontos tocados, é calculada a distância mais curta entre os dois pontos (distância ilustrada na Fig. 7A).

[0165] Aqui, com base nas coordenadas (100, 50) do ponto tocado A e das coordenadas (110, 40) do ponto tocado B, a distância entre os dois pontos é calculada como 14 pontos. A segunda unidade de aquisição 115 armazena 14 pontos como a distância entre os dois pontos no tempo de partida de detecção na RAM 103, e o processamento finaliza.

[0166] Em seguida, a área de entrada 401 é varrida a cada 20 ms, o evento de toque do ponto tocado D é notificado pelo painel de toque. É porque, no painel de toque do exemplo 1 de modificação, um novo evento de toque do ponto tocado estacionário A não é notificado.

[0167] Portanto, na etapa S201, a primeira unidade de aquisição 112 do aparelho de processamento de informação 100 adquire informação de que a ID é 2, as coordenadas de posição são (210, 40), e o tempo de detecção é de 25 ms. Em seguida, a informação retida na unidade de retenção 113 é atualizada, como ilustrado na Fig. 7D.

[0168] Nessa ocasião, a ID do ponto tocado D é 2. Uma vez que é a mesma que aquela do ponto tocado B, somente a informação associada com a ID 2 é atualizada. Além disso, uma vez que as coordenadas de posição são diferentes daquelas do tempo de detecção anterior, o sinalizador de movimento é estabelecido. Na etapa S202, uma vez que o número de pontos tocados é 2, é determinado que dois ou mais pontos tocados sejam detectados (SIM na etapa S202).

[0169] Então, na etapa S601, uma vez que o ponto tocado com a ID 2 é atualizado, porém o ponto tocado com a ID 1 não é atualizado, determina-se que a informação de posição de todos os pontos tocados não seja atualizada (NÃO na etapa S601).

[0170] Em seguida, na etapa S602, é determinado se 20 ms transcorreram, uma vez que a atualização anterior foi realizada entre a informação dos pontos tocados retidos. Agora, o tempo decorrido, desde a atualização anterior, é executado (isto é, desde o tempo quando o ponto tocado A é detectado), é de 25 ms, e o tempo decorrido excede o tempo predeterminado (SIM na etapa S602). Portanto, pode ser determinado que a informação de posição de todos os pontos tocados seja atualizada.

[0171] Na etapa S204, com base na sinalização de movimento, é determinado que pelo menos um ponto tocado seja movido (SIM na etapa S204). Na etapa S206, a segunda unidade de aquisição 115 adquire a distância mudada entre os dois pontos tocados e o seu valor absoluto.

[0172] Aqui, com base nas coordenadas do ponto tocado A (100, 50) e nas coordenadas do ponto tocado D (210, 40), a distância entre os dois pontos (distância D na Fig. 7A) é calculada como 110 pontos. A distância mudada (valor absoluto), a partir da distância entre os dois pontos previamente adquiridos pela segunda unidade de aquisição 115 e retida na RAM 103, é calculada como 96 pontos (= 110 - 14).

[0173] Na presente forma de realização exemplar, uma vez que o valor limiar “a” é de 10 pontos, na etapa S207, a unidade de decisão 116 decide que a distância mudada entre os dois pontos é o valor limiar “a” ou maior (NÃO na etapa S207). Portanto, na etapa S210, é determinado se a operação pinch-out ou pinch-in foi iniciada.

[0174] Agora, a distância mudada entre os dois pontos adquiridos pela segunda unidade de aquisição 115 é de 96 pontos. Portanto, o número de vezes ampliado da distância entre os dois pontos é contado como um. Entretanto, o número contado é menor do que 2, é determinado que a operação pinch-out seja iniciada (NÃO na etapa S210), e o processamento é finalizado.

[0175] Em seguida, a área de entrada 401 é varrida a cada 20 ms, o evento de toque do ponto tocado F é notificado pelo painel de toque. É porque, no painel de toque do exemplo de modificação 1, um novo evento de toque do ponto tocado estacionário A não é notificado. Portanto, na etapa S201, a primeira unidade de aquisição 112 do aparelho de processamento de informação 100 adquire a informação de que a ID é 2, as coordenadas de posição são (310, 40), e o tempo de detecção é de 45 ms. Em seguida, a informação retida na unidade de retenção 113 é atualizada, como ilustrado na Fig. 7E. Nessa ocasião, a ID do ponto tocado C é 2, isto é, idêntica àquela do ponto tocado B e, portanto, a informação associada àquela da ID 2 é atualizada. Além disso, uma vez que as coordenadas de posição são diferentes daquelas do tempo de detecção anterior, a sinalização de movimento é estabelecida.

[0176] Na etapa S202, o número de pontos tocados é determinado como sendo dois, isto é, dois ou mais (SIM na etapa S202). Em seguida, na etapa S601, uma vez que o ponto tocado com a ID 2 é atualizado, porém o ponto tocado com a ID 1 não é atualizado, determina-se que a informação de posição de todos os pontos tocados não seja atualizada (NÃO na etapa S601).

[0177] Em seguida, na etapa S602, é determinado se 20 ms transcorreram, uma vez que a atualização anterior foi realizada entre a informação dos pontos tocados retidos. Agora, o tempo decorrido, desde a atualização anterior, é executado (isto é, desde o tempo quando o ponto tocado A é detectado), é de 45 ms, e o tempo decorrido excede o tempo predeterminado (SIM na etapa S602). Portanto, pode ser determinado que a informação de posição de todos os pontos tocados seja atualizada.

[0178] Na etapa S204, com base na sinalização de movimento, é determinado que pelo menos um ponto tocado seja movido (SIM na etapa S204). Na etapa S206, a segunda unidade de aquisição 115 adquire a distância mudada entre os dois pontos tocados e o seu valor absoluto.

[0179] Aqui, com base nas coordenadas do ponto tocado A (100, 50) e das coordenadas do ponto tocado D (310, 40), a distância entre os dois pontos (distância F na Fig. 7A) é calculada como 210 pontos. Então, o valor mudado (valor absoluto), a partir da distância entre os dois pontos adquiridos pela segunda unidade de aquisição 115 na última vez e retido na RAM 103, é calculado como 100 pontos (= 210 - 110).

[0180] Na presente forma de realização exemplar, uma vez que o valor limiar “a” é de 10 pontos, na etapa S207, a unidade de decisão 116 decide que a distância mudada entre os dois pontos é o valor limiar “a” ou maior (NÃO na etapa S207). Portanto, na etapa S210, a unidade de controle de aperto 117 determina se a operação pinch-out ou operação pinch-in foi iniciada.

[0181] Agora, a distância mudada entre os dois pontos adquiridos pela segunda unidade de aquisição 115 é de 100 pontos. Portanto, o número ampliado de vezes da distância entre os dois pontos é contado como um. Na etapa S210, uma vez que o número ampliado de vezes da distância entre os dois pontos tocados é dois ou mais, a unidade de controle de aperto 117 determina que a operação pinch-out é iniciada (SIM na etapa S210).

[0182] Na etapa S211, a unidade de controle de aperto 117 notifica à unidade de controle de exibição 118 que uma operação pinch-out foi introduzida. Em seguida, na etapa S212, o resultado da operação de aperto é emitido. A unidade de controle de exibição 118 realiza o processamento para exibir a imagem de exibição ampliada com base no resultado de que a distância entre os dois pontos é ampliada de 14 pontos de distância a 210 pontos da distância F.

[0183] Como descrito acima, de acordo com o exemplo de modificação 1 da primeira forma de realização exemplar, quando o usuário toca dois pontos, a operação de multitoques, que é introduzida pelo usuário no aparelho de processamento de informação 100, é determinada em resposta ao decorrer de um tempo predeterminado, uma vez que a informação de posição anterior é atualizada.

[0184] Portanto, mesmo se quando um painel de toque, que não notifica um novo evento de toque quando um ponto tocado detectado é estacionário, é usado, é possível determinar que a informação de posição de todos os pontos detectados seja atualizada.

[0185] Portanto, mesmo quando uma operação de aperto é realizada movendo-se um ponto tocado dos dois pontos tocados, enquanto o usuário mantém outro ponto estacionário, o usuário pode mudar o tamanho da imagem de exibição para satisfazer a intenção do usuário. [0179] Em uma segunda forma de realização exemplar, uma operação de multiarrastos exemplar introduzida por um usuário é descrita como um exemplo da operação de multitoques introduzida por um usuário. Na primeira forma de realização exemplar, determina-se se uma operação de multiarrastos ou operação de aperto é introduzida com base em se a distância mudada entre dois pontos mudados pelo movimento de pelo menos um ponto tocado é menor do que um predeterminado valor limiar, como um resultado da atualização da informação de posição dos dois pontos detectados.

[0186] Por outro lado, na segunda forma de realização exemplar, determina-se que se uma operação de multiarrastos ou uma operação de aperto for introduzida, baseada em se a diferença de ângulo nas direções de movimento mudadas pelo movimento de pelo menos um ponto tocado, seja menor do que um predeterminado valor limiar, como resultado da atualização da informação de posição dos dois pontos detectados.

[0187] Nessa ocasião, quando a diferença de ângulo é menor e os pontos tocados dos dois dedos são supostos terem se movido quase em uma mesma direção, é determinado que a operação de multiarrastos seja introduzida. Por outro lado, quando a diferença de ângulo é maior, é determinado que a operação de aperto seja introduzida.

[0188] A Fig. 8 é um diagrama em blocos de função ilustrando uma configuração de função do aparelho de processamento de informação 100 de acordo com o exemplo de modificação 1. A Fig. 8 é diferente da Fig. 1B, pelo fato de uma unidade de geração 801 e uma terceira unidade de aquisição 802 serem adicionadas.

[0189] A unidade de geração 801 retém a informação necessária para gerar vetores entre a informação dos pontos tocados adquiridos pela primeira unidade de aquisição 112. A unidade de geração 801 gera um vetor de movimento indicando uma direção de movimento e uma quantidade de movimento para cada ponto tocado, com base no deslocamento da informação de posição do ponto tocado.

[0190] A terceira unidade de aquisição 802 compara os componentes de direção de cada um dos vetores de movimento com cada ponto tocado gerado pela unidade de geração 801 para adquirir a diferença de ângulo. Então, A unidade de decisão 116, de acordo com a presente forma de realização exemplar, decide que a operação realizada pelo usuário é uma operação de aperto (primeira operação), se a diferença de ângulo dos vetores de movimento adquiridos pela terceira unidade de aquisição 802 for um predeterminado valor limiar ou maior. [0185] Por outro lado, se a diferença de ângulo adquirida for menor do que o predeterminado valor limiar, é determinado que a operação realizada pelo usuário seja uma operação de multiarrastos (segunda operação).

[0191] A Fig. 9 é um fluxograma ilustrando um fluxo, que é realizado pelo aparelho de processamento de informação 100 da segunda forma de realização exemplar, para reconhecer uma operação de multitoques. Nas etapas com os mesmos numerais que aqueles da Fig. 2, o mesmo processamento é realizado. Portanto, seus detalhes não são descritos e as diferentes partes da primeira forma de realização exemplar serão descritas.

[0192] Na segunda forma de realização exemplar, na etapa S204, se a unidade de decisão 116 decidir que pelo menos um ponto tocado é movido (SIM na etapa S204), o processamento prossegue para a etapa S901. Na etapa S901, a terceira unidade de aquisição 802 adquire a diferença de ângulo dos vetores de movimento. Os detalhes do processamento realizado na etapa 901 serão descritos abaixo.

[0193] Em seguida, na etapa S902, a unidade de decisão 116 decide se a diferença de ângulo, dos dois vetores de movimento, gerada pela unidade de geração 801 é menor do que um valor limiar “b”. Na presente forma de realização exemplar, o valor limiar “b” é um valor limiar para um grau de ângulo registrado anteriormente no aparelho de processamento de informação 100. É estabelecido como sendo um valor mínimo requerido para decidir que os dois pontos tocados são movidos em diferentes direções.

[0194] Se a diferença de ângulo for o valor limiar “b” ou maior (NÃO na etapa S902), a unidade de decisão 116 decide que a entrada de operação pelo usuário é uma operação de aperto, e o processamento prossegue para a etapa S210.

[0195] Se a diferença de ângulo for menor do que o valor limiar “b” (SIM na etapa S902), a unidade de decisão 116 decide que a entrada de operação pelo usuário é uma operação de multiarrastos, e o processamento prossegue para a etapa S208.

[0196] Na etapa S902 da segunda forma de realização exemplar, se for determinado que o usuário introduz uma operação de aperto, então na etapa S210, A segunda unidade de aquisição 115 adquire a distância entre os dois pontos tocados e a compara com a distância retida. Em seguida, com base em se a distância entre os dois pontos é ampliada ou reduzida, o processamento similar àquele da primeira forma de realização é realizado.

[0197] A Fig. 10 é um fluxograma ilustrando um fluxo de processamento exemplar para adquirir a diferença de ângulo dos vetores de movimento dos pontos tocados realizada na etapa S901. Primeiro, na etapa S1001, a unidade de geração 801 seleciona a ID de um ponto tocado para especificar um ponto tocado da pluralidade detectada de pontos tocados.

[0198] Na etapa S1002, a unidade de geração 801 determina as coordenadas como sendo um ponto de partida de um vetor de posição. Na presente forma de realização exemplar, a unidade de geração 801 determina a posição do ponto tocado com a ID selecionada detectada na primeira vez ou a posição detectada na última vez, com base na informação de posição do ponto tocado retido, como as coordenadas do ponto de partida do vetor de posição.

[0199] Na etapa S1003, a unidade de geração 801 determina as coordenadas do ponto de finalização do vetor de movimento. Na presente forma de realização exemplar, a unidade de geração 801 determina a última informação de posição do ponto tocado com a ID selecionada como as coordenadas do ponto de finalização do vetor de movimento, com base na informação adquirida pela primeira unidade de aquisição 112.

[0200] Em seguida, na etapa S1004, a unidade de geração 801 adquire informações indicando a direção do vetor de movimento direcionando-se a partir do determinado ponto de partida para o determinado ponto de finalização. Nessa ocasião, a unidade de geração 801 gera o vetor de movimento, conectando o determinado ponto de partida e o ponto de finalização. Entretanto, o vetor de movimento, quando o ponto de partida e o ponto de finalização têm as mesmas coordenadas, é definido como um vetor 0.

[0201] Em seguida, a unidade de geração 801 calcula o ângulo em uma direção horária indicando a direção do vetor de movimento gerado empregando o eixo geométrico-Y da área de entrada 401 como uma referência. O cálculo do ângulo pode ser realizado usando-se, por exemplo, uma função trigonométrica, tal como uma tangente. A unidade de geração 801 retém a informação adquirida do ângulo associando-a com a ID do ponto tocado.

[0202] Na etapa S1005, a terceira unidade de aquisição 802 determina se os vetores de movimento de todos os pontos tocados são gerados. A terceira unidade de aquisição 802 realiza a determinação baseada no número de IDs retidas na unidade de geração 801.

[0203] Se a terceira unidade de aquisição 802 determinar que os vetores de todos os pontos tocados sejam gerados (SIM na etapa S1005), o processamento prossegue para a etapa S1006. Por outro lado, se a terceira unidade de aquisição 802 determinar que os vetores de todos os pontos tocados não sejam gerados (NÃO na etapa S1005), o processamento retorna para a etapa S1001. Na etapa S1001, uma ID do ponto tocado a ser processado em seguida é selecionada.

[0204] Na etapa S1006, a terceira unidade de aquisição 802 adquire a diferença de ângulo dos vetores de movimento para cada ponto tocado. A terceira unidade de aquisição 802 calcula a diferença dos ângulos dos vetores. Os ângulos retidos na unidade de geração 801 indicam as direções dos vetores. A diferença de ângulo obtida é um valor absoluto. Então, o processamento de cálculo da diferença de ângulo dos vetores de movimento termina, e o processamento prossegue para a etapa S902. O processamento subsequente é realizado similar àquele da primeira forma de realização exemplar.

[0205] As Figs. 11A a 11F são diagramas ilustrando um método de geração exemplar dos vetores de movimento de um ponto tocado realizado na etapa S901. Referindo-se à Fig. 11A, um exemplo específico dos vetores de movimento gerados na presente forma de realização exemplar é descrito.

[0206] Nas Figs. 11A a 11F, p1 a p8 são pontos tocados da área de entrada 401 e o dedo do usuário submetido a amostragem em intervalos de tempo constantes das coordenadas das posições em que o dedo do usuário toca a área de entrada 401. p1 corresponde à primeira posição detectada.

[0207] Na presente forma de realização exemplar, o painel de toque varre a área de entrada 401 a cada 20 ms. Portanto, o ponto tocado pode ser obtido em cerca de intervalos de 20 ms. A unidade de geração 801 gera um vetor de movimento V1a quando p2 é detectado. Similarmente, um vetor de movimento V2a é gerado quando p3 é detectado, e um vetor de movimento V3a é gerado quando p4 é detectado.

[0208] O método de geração dos vetores de movimento não é limitado ao método usado na presente forma de realização exemplar. Referindo-se às Figs. 11B a 11D, outros métodos de geração de exemplo são descritos abaixo.

[0209] Referindo-se à Fig. 11B, um método é descrito em que, quando o comprimento do vetor de movimento gerado excede a distância de referência L, a posição detectada do ponto tocado, que é o ponto de finalização do vetor de movimento, é estabelecida como sendo o ponto de partida de um vetor de movimento a ser gerado pelo próximo processamento.

[0210] Aqui, p1 a p4 são pontos tocados amostrados em intervalos constantes de tempo, e p1 corresponde à posição do primeiro ponto tocado detectado. A unidade de geração 801 determina as coordenadas de p1 detectadas primeiro como o ponto de partida do vetor de movimento quando p1 e p2 são detectados. Quando p2 é detectado, a unidade de geração 801 gera o vetor de movimento, direcionando-se de p1 como o ponto de partida até p2 como o ponto de finalização, e determina se o comprimento do vetor de movimento gerado (extensão de movimento de p1 a p2) excede a distância de referência L.

[0211] Quando o comprimento do vetor de movimento gerado excede a distância de referência L, a última posição detectada do ponto tocado é determinada como sendo as coordenadas do ponto de partida quando o vetor de movimento é gerado a seguir. Em razão do comprimento do vetor de movimento gerado (extensão de movimento de p1 a p2) não exceder a distância de referência L, quando p3 é detectado, o vetor de movimento V1b é gerado. Em seguida, quando p3 é detectado, a unidade de geração 801 determina se o comprimento do vetor de movimento V1b excede a distância de referência L.

[0212] Em razão do comprimento do vetor de movimento V1b exceder a distância de referência L, a unidade de geração 801 determina p3 como o ponto de partida do vetor de movimento quando o vetor de movimento é gerado a seguir.

[0213] Então, quando p4 é detectado, a unidade de geração 801 gera o vetor de movimento V2b, direcionando-se de p3 como o ponto de partida até p4 como o ponto de finalização. Deste modo, a unidade de geração 801 gera um vetor de movimento para cada ponto tocado, e a terceira unidade de aquisição 802 adquire a diferença de ângulo, usando o último vetor de movimento gerado para cada ponto tocado. A unidade de geração 801 pode descartar a informação dos pontos tocados que não seja requerida para gerar os vetores, e a informação dos vetores de movimento que não seja a última.

[0214] A Fig. 11C ilustra um exemplo em que a unidade de geração 801 determina o ponto em que a velocidade de movimento do ponto tocado torna-se mínima local, como as coordenadas do ponto de partida para gerar o vetor de movimento.

[0215] Aqui, p1 a p8 são pontos tocados amostrados em intervalos de tempo constantes. Uma vez que os intervalos de tempo de amostragem são constantes, a distância entre os pontos tocados na Fig. 11C é proporcional à velocidade de movimento do ponto tocado. Portanto, pode ser visto que em p6 a velocidade de movimento torna-se mínima local a partir dos deslocamentos dos pontos tocados de p1 a p8.

[0216] Portanto, a unidade de geração 801 determina p1 como o ponto de partida do vetor de movimento no processamento quando p1 a p6 são detectados e, por exemplo, quando p6 é detectado, a unidade de geração 801 gera o vetor de movimento V1c. Então, no processamento executado quando os pontos subsequentes a p7 são detectados, a unidade de geração 801 determina p6 como o ponto de partida e, por exemplo, quando p8 é detectado, a unidade de geração 801 gera o vetor de movimento V2c.

[0217] Entretanto, as coordenadas de posição dos pontos tocados adquiridos a partir do sensor de painel de toque podem incluir variações. Por exemplo, a área de contato entre o dedo do usuário e o painel de toque pode mudar enquanto operando, e a posição relativa das coordenadas de um ponto especificado com o ponto tocado pode mudar. Quando o vetor de movimento é gerado sem considerarem-se tais variações, a direção do vetor de movimento pode depender da variação das detecções, e a precisão do processamento para comparar a diferença de ângulo e o valor limiar “b” pode deteriorar.

[0218] Para resolver este problema, referindo-se à Fig. 11D, um exemplo é descrito em que o vetor de movimento é gerado, considerando-se coordenadas de todos os deslocamentos dos pontos tocados entre as determinadas coordenadas como o ponto de partida e a última posição detectada como o ponto de finalização.

[0219] Na presente forma de realização exemplar, a coordenada de p1, que é primeiro detectada, é determinada como o ponto de partida. Como a coordenada como o ponto de finalização, a coordenada X é determinada como sendo a coordenada-X da última posição detectada do ponto tocado, e a coordenada-Y é determinada como sendo o valor médio das coordenadas do eixo geométrico-Y das posições dos pontos tocados com a mesma ID detectada até agora.

[0220] Deste modo, a precisão do processamento de comparação da diferença de ângulo dos vetores de movimento e do valor limiar “b” pode ser aumentada, gerando-se os vetores de movimento empregando o valor médio das coordenadas do ponto tocado detectado. Assim, é possível corretamente reconhecer a operação de multitoques.

[0221] O método de geração acima descrito dos vetores de movimento é apenas um exemplo. Por exemplo, é também possível determinar as coordenadas do ponto de partida do vetor de movimento a ser gerado em seguida, com base em que a diferença de ângulo das direções dos vetores de movimento gerados tornou-se um predeterminado valor limiar ou maior, ou o ponto tocado não se moveu por um predeterminado período de tempo ou maior. Assim, entre vários métodos, é possível selecionar um método apropriado, de acordo com a capacidade de cálculo do aparelho de processamento de informação 100 e similar, e ser usado pela presente forma de realização exemplar.

[0222] Um exemplo de operação 3 é descrito, em que um usuário opera o aparelho de processamento de informação 100 de acordo com a segunda forma de realização exemplar.

[0223] No exemplo de operação 3, similar ao exemplo de operação 1, um usuário toca a área de entrada 401 com dois dedos, 402 e 403, e os move juntos na direção à direita (operação de multiarrastos), como ilustrado na Fig. 4A. Em seguida, o ponto tocado de cada dedo se desloca, como ilustrado na Fig. 4B.

[0224] Nessa ocasião, a informação, de cada ponto tocado adquirido pela primeira unidade de aquisição 112, é retida na unidade de retenção 113, como tabelas ilustradas nas Figs. 5A a 5F. No exemplo de operação 3, o valor limiar “b” do ângulo é determinado a 45 graus.

[0225] A diferença do exemplo de operação 3 a partir do exemplo de operação 1 reside no processamento realizado após ser determinado, na etapa S204, que pelo menos um ponto tocado seja movido (SIM na etapa S204) em resposta à notificação do evento de toque do ponto de toque D recebido pelo painel de toque. Na etapa S901, a unidade de geração 801 gera, com respeito ao ponto tocado cuja ID é 1, o vetor de movimento A, com a posição do ponto tocado A como as coordenadas do ponto de partida, e com a posição do ponto tocado C como as coordenadas do ponto de finalização.

[0226] A direção do vetor de movimento A é de 90 graus, quando o ângulo é calculado em uma direção horária a partir do eixo geométrico-Y como uma referência. Similarmente, a unidade de geração 801 gera, com respeito ao ponto tocado cuja ID é 2, o vetor de movimento B, com a posição do ponto tocado B como as coordenadas do ponto de partida, e com a posição do ponto tocado D como as coordenadas do ponto de finalização.

[0227] A direção do vetor de movimento B é também 90 graus na direção horária do eixo geométrico-Y como uma referência. Portanto, a terceira unidade de aquisição 802 adquire a informação indicando 0 grau como a diferença de ângulo entre o vetor de movimento A e o vetor de movimento B.

[0228] Na presente forma de realização exemplar, o valor limiar “b” é de 45 graus. Portanto, na etapa S902, a unidade de decisão 116 decide que a diferença de ângulo de 0 grau, adquirida pela terceira unidade de aquisição 802, é menor do que o valor limiar “b” (SIM na etapa S902). Em outras palavras, é determinado que o usuário introduza uma operação de multiarrastos em razão dos dois pontos tocados serem movidos na mesma direção. Portanto, nas etapa S208 e etapa S209, o processamento correspondendo à operação de multiarrastos é realizado.

[0229] Similarmente, no processamento realizado quando um evento de toque do ponto tocado F é notificado pelo painel de toque, a unidade de geração 801 gera o vetor de movimento C, ilustrado na Fig. 4B com respeito ao ponto tocado cuja ID é 1, e o vetor de movimento D, ilustrado na Fig. 4B com respeito ao ponto tocado cuja ID é 2. A direção de cada vetor é de 90 graus e a diferença de ângulo é de 0 grau. Portanto, a unidade de decisão 116 decide que a operação de multiarrastos seja introduzida.

[0230] No processamento, para adquirir a diferença de ângulo realizada na etapa S1006 da presente forma de realização exemplar, o resultado de cálculo pode desejavelmente ser o valor absoluto. Usando-se o valor absoluto, somente o grau da diferença de ângulo é considerado e a direção da diferença de ângulo não é considerada.

[0231] Além disso, a fim de calcular a diferença de ângulo em um ângulo agudo, se o resultado do cálculo for maior do que 180 graus, é desejável subtrair o resultado do cálculo de 360 graus para obter-se a diferença de ângulo. Unificando-se as diferenças de ângulo no ângulo agudo, é possível manter a uniformidade do processamento de comparação com o valor limiar e operação visualmente fácil, para poder ser obtida a compreensão do usuário.

[0232] Além disso, na comparação entre a diferença de ângulo do vetor de movimento e o valor limiar do ângulo, uma pluralidade de valores limiares pode ser estabelecida. Por exemplo, de acordo com a distância entre o ponto de partida e o ponto de finalização, se a distância for curta, um valor limiar de um largo ângulo é usado. Deste modo, mesmo se a variação da posição detectada do ponto tocado, como descrito acima, ocorrer, é possível evitar a deterioração da precisa determinação causada pelo erro do ângulo adquirido, como a direção do vetor de movimento sendo grande.

[0233] A Fig. 11E ilustra a diferença de direção entre os vetores de movimento V1e e V1e’. O vetor de movimento V1e é gerado quando p2 é detectado após p1 ser detectado. O vetor Ve1’ é gerado quando p2’ é detectado devido à variação da posição detectada. Por outro lado, a Fig. 11F ilustra a diferença de direção entre os vetores de movimento V2e e V2e’. O vetor de movimento V2e é gerado quando p3, que é separado de p2, é detectado após p1 ser detectado. O vetor V2e’ é gerado quando p3’ é detectado.

[0234] A variação da posição detectada entre p3 e p3’ é a mesma que aquela entre p2 e p2’. A diferença das direções entre V1e e V1e’ é maior do que aquela entre V2e e V2e’.

[0235] Assim, quando a distância do ponto de partida até o ponto de finalização é mais curta, a variação da posição detectada afeta a direção do vetor de movimento amplamente. Portanto, estabelecendo-se uma pluralidade de valores limiares, de acordo com a distância do ponto de partida até o ponto de finalização, é possível determinar a operação de multitoques de entrada corretamente.

[0236] Como descrito acima, na presente forma de realização exemplar, quando o usuário toca dois pontos, a entrada de operação de multitoques para o aparelho de processamento de informação 100 pelo usuário é determinada em resposta ao término da atualização da informação de posição de todos os pontos tocados. Nessa ocasião, determina- se que, quer uma operação de multitoques quer uma operação de aperto seja introduzida baseada em se a diferença de ângulo nas direções de movimento mudadas pelo movimento de pelo menos um ponto tocado é menor do que um predeterminado valor limiar, como resultado da atualização da informação de posição dos dois pontos detectados.

[0237] Deste modo, quando o usuário move os dois pontos tocados em quase a mesma direção, a operação de aperto não é erroneamente notificada. Como resultado, a falsa operação, em que o tamanho da imagem de exibição é mudado em relação à intenção do usuário, é evitada. Além disso, a primeira forma de realização exemplar e os exemplos de modificação, e a segunda forma de realização exemplar podem ser implementados em combinação.

[0238] Os aspectos da presente invenção podem também ser executados por um computador de um sistema ou aparelho (ou dispositivos, tais como uma CPU ou MPU) que exibe e executa um programa gravado em um dispositivo de memória para realizar as funções das formas de realização acima descritas, e por um método, cujas etapas são executadas por um computador de um sistema ou aparelho por, por exemplo, exibição e execução de um programa gravado em um dispositivo de memória para realizar as funções das formas de realização acima descritas. Para este fim, o programa é provido ao computador, por exemplo, via uma rede ou a partir de um meio de gravação de vários tipos servindo como o dispositivo de memória (por exemplo, meio legível por computador). Em tal caso, o sistema ou aparelho, e o meio de gravação onde o programa é armazenado, são incluídos como estando dentro do escopo da presente invenção.

[0239] Embora a presente invenção tenha sido descrita com referência às formas de realização exemplares, deve-se compreender que a invenção não é limitada às formas de realização exemplares descritas. O escopo das seguintes reivindicações é para estar de acordo com a mais ampla interpretação, a fim de abranger todas as modificações, estruturas equivalentes, e funções.

Claims (3)

1. Aparelho de processamento de informação compreendendo: um meio de controle de exibição (118) configurado para fazer com que um meio de exibição (108) exiba uma de uma pluralidade de imagens armazenadas em uma ordem predeterminada; um meio de detecção (111) configurado para detectar sequencialmente informações de toque indicando cada um dos dois pontos tocados, tocados no painel de toque um por um, em que cada parte das informações de toque é um sinal indicando uma detecção de um ponto tocado por um usuário; um primeiro meio de aquisição (112) configurado para adquirir informações de cada um dos dois pontos tocados indicado pelas informações de toque detectadas pelo meio de detecção, sequencialmente um por um, as informações incluem informações de posição e tempo de detecção de cada um dos dois pontos tocados e associado a um ID de cada um dos dois pontos tocados; uma unidade de retenção (133), configurada para reter, em uma memória, as informações de cada um dos dois pontos tocados, em que, cada vez que o primeiro meio de aquisição adquire as informações de um dos dois pontos tocados, o primeiro meio de aquisição atualiza as informações de toque mantidas na memória (103, 113) com a última posição detectada de cada um dos dois pontos tocados; o aparelho sendo caracterizado pelo fato de que uma unidade de determinação (114) configurada para determinar, cada vez que as informações de um dos dois pontos tocados são adquiridas pelo primeiro meio de aquisição (112), se dois ou mais pontos tocados são detectados pelo painel de toque e as informações de posição de todos os dois pontos tocados detectados mantidos na memória (103, 113) foram atualizadas com a última informação de posição adquirida; um segundo meio de aquisição (115) configurado para calcular, em um caso em que o meio de determinação (114) determina que dois ou mais pontos tocados são detectados pelo painel de toque e as informações de posição de todos os dois pontos tocados mantidas na memória (113) são atualizadas com as informações de posição adquiridas mais recentes, uma distância entre as posições dos dois pontos tocados com base nas informações de posição mantidas na memória e mantendo a distância calculada na memória; e em que o segundo meio de aquisição (115) está configurado para calcular, em um caso em que é determinado que pelo menos um dos dois pontos tocados é movido, com base em uma diferença das informações de posição de cada um dos dois pontos tocados antes e depois da atualização pelo primeiro meio de aquisição, uma quantidade alterada da distância com base na comparação da distância calculada antes da atualização e da distância recém-calculada após a atualização e um valor absoluto da quantidade alterada calculada; e uma unidade de decisão (116) configurada para decidir um tipo de entrada para o aparelho de processamento de informações (100) usando o valor absoluto da quantidade da distância alterada calculada, calculada pelo segundo meio de aquisição (115), sendo o tipo de entrada um de: uma primeira operação em que o valor absoluto é igual ou superior a um valor limite, e pelo menos um dos dois pontos tocados foi movido; e uma segunda operação em que o valor absoluto é menor que o valor limite, os dois pontos tocados são movidos em uma mesma direção e o valor absoluto é mantido; em que: em resposta ao tipo de entrada ser a primeira operação, o meio de controle de exibição (118) faz com que o meio de exibição (108) aumente ou reduza a imagem exibida; e em resposta ao tipo de entrada que é a segunda operação, o meio de controle de exibição (118) seleciona, dentre a pluralidade de imagens armazenadas na ordem predeterminada em uma unidade de armazenamento (119), uma imagem em uma posição na ordem predeterminada que não é adjacente à imagem exibida, e faz com que o meio de exibição (108) exiba a imagem selecionada.

2. Método de controle para um aparelho de processamento de informação configurado para adquirir informações de posição de um ou mais pontos tocados, um por um, detectados de acordo com um período de detecção predeterminado em um painel de toque o método compreendendo: exibir, por de um meio de controle de exibição (118), uma de uma pluralidade de imagens armazenadas em uma ordem predeterminada; detectar sequencialmente, por um meio de um meio de detecção (111), informações de toque indicando cada um dos dois pontos tocados, tocados no painel de toque um por um, em que cada parte das informações de toque é um sinal indicando uma detecção de um ponto tocado por um usuário; adquirir, por meio de um primeiro meio de aquisição (112), informações de cada um dos dois pontos tocados indicado pelas informações de toque detectadas pelo meio de detecção, sequencialmente um por um, as informações incluem informações de posição e tempo de detecção de cada um dos dois pontos tocados e associado a um ID de cada um dos dois pontos tocados; reter, em uma memória, por meio de uma unidade de retenção (133), as informações de cada um dos dois pontos tocados, em que, cada vez que o primeiro meio de aquisição adquire as informações de um dos dois pontos tocados, o primeiro meio de aquisição atualiza as informações de toque mantidas na memória (103, 113) com a última posição detectada de cada um dos dois pontos tocados; o método sendo caracterizado por determinar, por meio de uma unidade de determinação (114), cada vez que as informações de um dos dois pontos tocados são adquiridas pelo primeiro meio de aquisição (112), se dois ou mais pontos tocados são detectados pelo painel de toque e as informações de posição de todos os dois pontos tocados detectados mantidas na memória (103, 113) foram atualizadas com a última informação de posição adquirida; calcular, por meio de um segundo meio de aquisição (115), em um caso em que o meio de determinação (114) determina que dois ou mais pontos tocados são detectados pelo painel de toque e as informações de posição de todos os dois pontos tocados mantidas na memória (113) são atualizadas com as informações de posição adquiridas mais recentes, uma distância entre as posições dos dois pontos tocados com base nas informações de posição mantidas na memória e mantendo a distância calculada na memória; e em que o segundo meio de aquisição (115) está configurado para calcular, em um caso em que é determinado que pelo menos um dos dois pontos tocados é movido, com base em uma diferença das informações de posição de cada um dos dois pontos tocados antes e depois da atualização pelo primeiro meio de aquisição, uma quantidade alterada da distância com base na comparação da distância calculada antes da atualização e da distância recém-calculada após a atualização e um valor absoluto da quantidade alterada calculada; e decidir, por meio de uma unidade de decisão (116), um tipo de entrada para o aparelho de processamento de informações (100) usando o valor absoluto da quantidade da distância alterada calculada, calculada pelo segundo meio de aquisição (115), sendo o tipo de entrada um de: uma primeira operação em que o valor absoluto é igual ou superior a um valor limite, e pelo menos um dos dois pontos tocados foi movido; e uma segunda operação em que o valor absoluto é menor que o valor limite, os dois pontos tocados são movidos em uma mesma direção e o valor absoluto é mantido; em que: em resposta ao tipo de entrada ser a primeira operação, o meio de controle de exibição (118) faz com que o meio de exibição (108) aumente ou reduza a imagem exibida; e em resposta ao tipo de entrada que é a segunda operação, o meio de controle de exibição (118) seleciona, dentre a pluralidade de imagens armazenadas na ordem predeterminada em uma unidade de armazenamento (119), uma imagem em uma posição na ordem predeterminada que não é adjacente à imagem exibida, e faz com que o meio de exibição exiba a imagem selecionada.

3. Meio de armazenagem legível por computador, caracterizado pelo fato de que armazena instruções que, quando lidas e executadas por um computador, fazem com que o computador execute o método de acordo com a reivindicação 2.

Images