BR102013013697A2 - Método e sistemas para gerenciar a interação de múltiplas telas de exibição - Google Patents

Abstract

Método e sistema para gerenciar a interação de múltiplas telas de exibição a presente patente de invenção refere-se a um sistema e método para gerenciar a interação de sistemas portáteis, compreendendo, pelo menos duas telas sensíveis ao toque. A referida interação é promovida pelo contato das faces laterais dos dispositivos, cujo objetivo é proporcionar ao usuário a opção de estender a área de exibição original, compondo diferentes visualizações da imagem em diferentes alinhamentos e orientações.

Description

Relatório Descritivo da Patente de Invenção para: "MÉTODO E SISTEMA PARA GERENCIAR A INTERAÇÃO DE MÚLTIPLAS TELAS DE EXIBIÇÃO".

Campo da Invenção A presente invenção refere-se a um método para gerenciar a interação de sistemas portáteis, baseado em um sistema composto por, pelo menos, duas telas sensíveis ao toque e sensores laterais. A referida interação é promovida pelo contato das faces laterais dos dispositivos, cujo objetivo é proporcionar ao usuário a opção de estender a área de exibição original, compondo diferentes visualizações da imagem em diferentes alinhamentos e orientações.

Antecedentes a Invenção Recentemente, dispositivos eletrônicos portáteis como telefones celulares, smartphones ou PDAs (Personal Digital Assistants) tornaram-se, cada vez mais, tecnicamente avançados e multifuncionais. Por causa das conveniências destes dispositivos, os dispositivos tornaram-se necessidades da vida cotidiana.

Para alguns dispositivos portáteis, tais como smartphones, PDAs, tablete, PCs e assim por diante, uma tela sensível ao toque que é diretamente palpável pode ser fornecida como um dispositivo de entrada principal para os usuários controlarem as funções do mesmo. Os usuários dos dispositivos portáteis podem deslizar os dedos para tocar os itens exibidos por tela sensível ao toque, emitir um comando e executar ou operações de controle correspondentes aos itens selecionados. Por exemplo, os usuários podem clicar em um botão de desenho ou ícone exibido na tela sensível ao toque para ativar a função de desenho, ou podem clicar em um botão de navegação ou ícone exibido na tela sensível ao toque para ativar a função de navegação GPS. Há uma necessidade de proporcionar ao usuário uma experiência adequada e aumentar a produtividade através de telas maiores nos limites da portabilidade. A presente divulgação endereça, a seguir, vários métodos e sistemas que visam aumentar a área de exibição. Estes dispositivos são dotados de telas sensíveis ao toque de diversos tipos, especialmente os dispositivos móveis e a partir de diferentes fabricantes, são conhecidos na técnica anterior. Dispositivos móveis com telas maiores são melhores para assistir vídeos, jogar jogos, manipulação de fotos e aplicativos, e, além disso, aumentam a produtividade. Telas maiores e, portanto, com teclas virtuais maiores, permitem também uma experiência de digitação mais precisa. À medida que o custo de painéis de LCD diminui, também se tornou mais barato fazer dispositivos móveis com telas duplas e maiores. O documento de patente US20120081270A1, de IMERJ LLC, publicado em 05 de abril de 2012, apresenta um dispositivo de tela dupla e lógica de controle para minimizar ou maximizar uma tela primária para uma tela secundária, que pode ser encaixada e exibida em diferentes posições. O documento de patente US20100207903A1, da Samsung Electronics Co. Ltd, publicado em 19 de agosto de 2010, apresenta um dispositivo móvel com uma unidade de sub-exibição destacável, que são unidos por contatos magnéticos. A patente US 7667707, publicada em 23 de fevereiro de 2010, apresenta um sistema de computador com múltiplas telas, compreendendo um sistema de computador central que processa ambientes desktop dotados de janelas para vários monitores remotos, vários usuários ou uma combinação dos dois . A patente US 8108782, da Motorola Mobility, publicada em 31 de janeiro de 2012, apresenta um método para controlar vários monitores e comunicação de dados entre as telas. A patente US 7561116, da Microsoft Corporation, publicada em 14 de julho de 2009, - apresenta um método para estender um monitor com várias telas na mesma carcaça. A patente US 7549154 B2, da Microsoft Corporation, publicada em 16 de junho de 2009, apresenta um método para estender os dados de um sistema de computador principal para dispositivos com tela. O documento de patente US 2012-0242596, da Acer Corporation, publicado em 27 de setembro de 2012, refere-se a métodos para compartilhar uma tela para uso em servidor acoplado a uma pluralidade de dispositivos por meio de uma rede, com cada dispositivo incluindo pelo menos uma tela sensivel ao toque. A presente invenção diferencia-se do estado da técnica nos seguintes aspectos: - possibilita o compartilhamento da tela a partir da extensão da mesma entre os dispositivos de maneira totalmente independente; - considera possibilidades de combinação dos quatro lados da tela com outras telas, em seus respectivos lados ; - aborda todas as rotações de tela e orientações entre os modos de paisagem (90, 270 graus) e retrato (0, 180 graus), enquanto determina que a porção da imagem composta deve ser exibida por cada tela: superior, inferior, esquerda, direita da tela composta; - não limita as áreas de exibição sensíveis e regiões para toque e gestos, possibilitando uma tela ampliada totalmente funcional para a entrada do usuário; - estende-se uniformemente na tela, independentemente da aplicação (telefone, tv, multimídia, navegador, email, área de trabalho / tela "Home", etc); não se limita a que a interação ocorra entre dispositivos com telas de iguais dimensões físicas, proporções relativas ou resoluções de imagem; considera a utilização de alinhamento e o compartilhamento / extensões da tela entre os dispositivos totalmente independentes com as respectivas telas; e estende o contato e detecção lateral elétrico, magnético, físico, acelerômetro ou comunicação por campo próximo (NFC), ou mesmo por transferência de dados em alta velocidade entre dispositivos por tecnologia Wi-Gig (Wireless Gigabit), tecnologia para a transmissão de dados sem fio capaz de transmitir dados até 12 vezes mais rápido que o padrão wireless atual.

Sumário da Invenção A presente invenção propõe um método para compor pelo menos duas telas, estendendo as mesmas em diferentes combinações de alinhamentos e orientações apenas aproximando momentaneamente ou tocando as telas lado a lado. O objetivo principal é aumentar a área de exibição útil além das dimensões da unidade portátil original, ampliando a possibilidade interação.

Breve Descrição dos Desenhos Os objetivos e vantagens da presente invenção ficarão mais claros a partir da seguinte descrição detalhada das figuras não limitativos, em que: A Figura 1 apresenta exemplos de alinhamentos de tela e interfaces laterais. A Figura 2 apresenta uma tabela contendo orientações de tela e área de exposição, por tela.

As Figuras 3 e 4 descrevem a sequência de eventos entre as telas primária e secundária durante o processo de gerenciamento.

Descrição Detalhada da Invenção De acordo com a concretização preferida, a menos que expressamente entendido de maneira diferente a partir dos contextos específicos, os seguintes termos e definições significam: -tela: superfície bidimensional de exibição de imagem ou multimídia composto por uma matriz de pontos ("pixels"), usualmente implementada em LED ou cristal liquido, podendo ser sensível ao toque. - tela primária: tela principal embutida, associado ao sistema "mestre" que gerencia a memória de imagem (ou "Buffer" de imagem) . A atribuição como tela primária pode ser feito por meio da seleção do usuário. tela Secundária: tela "escrava", podendo ser embutida em um sistema móvel separado ou uma parte destacável do sistema primário. • Buffer de Imagem: área de memória em que os elementos são mapeados em pixels da tela, em uma representação de imagem virtual de uma tela retangular estendida (telas Secundárias e Primárias). • Interface de Contato: uma combinação única de um lado da tela primária e outro lado da tela Secundária, codificada, por exemplo, como 1R-2L (interface entre lado direito primário e o lado esquerdo secundário). Funcionalidades: As telas secundárias devem ser capazes de se comunicar com o sistema primário, a fim de manter o seu Buffer de Imagem interno atualizado e informar sistema primário sobre as ações do usuário.

Ambas as telas primária e secundária devem ter cada lado (superior, inferior, esquerdo, direito) unicamente identificado.

Após a notificação de mudança de posição ser informada no contato lateral, a nova configuração é mantida mesmo se telas ficam separadas. Em um evento de mudança da orientação do sistema principal enquanto não estiver em contato com a tela Secundária, a tela Secundária deve ser desativada e o Buffer de Imagem reduzido à área de exibição original única.

Com base na orientação da tela do dispositivo principal e a Interface de Contato detectada, o dispositivo principal deve: - Para a tela primária: manter a mesma orientação e determinar qual porção do Buffer de Imagem estendido a tela primária deve exibir. - Para a tela Secundária: determinar qual deve ser a nova orientação da tela Secundária e qual porção do Buffer de Imagem estendido a tela Secundária deve exibir: - Alinhamento horizontal: porção esquerda ou direita do Buffer de Imagem estendido. - Alinhamento vertical: área superior ou inferior do Buffer de Imagem estendido. - área da tela combinada pode variar de acordo com: a) Os alinhamentos da tela, conforme ilustrado nas Figuras ΙΑ, 1B, 1C e 1D: - paisagem com alinhamento vertical = (Figura 1C) - paisagem com alinhamento horizontal - - (Figura 1B) - retrato com alinhamento horizontal | | (Figura IA) - retrato com alinhamento vertical | (Figura 1D) I b) As orientações da tela: - Retrato em 0 grau. - Retrato em 180 graus - Paisagem 90 graus - Paisagem 270 graus 0 sistema e método de gerenciamento aqui apresentado é responsável por definir exatamente a imagem que as telas Primárias e Secundárias devem exibir para compor corretamente uma tela estendida retangular ou em formatos usualmente desenvolvidos para dispositivos de interação com usuário. A Figura 2 descreve o método de gerenciamento em um formato tabular: com base nas entradas de II (201) e 12 (202), as saidas 01 (203), 02 (204), 03 (205) definirão cada possível configuração de tela composta (206). Deve ser notado que "1T" e "2T" (209) indicam a parte superior das telas primária e secundária, respectivamente.

Estas são as duas entradas definidas na tabela na Figura 2: - II) Orientação de tela primária (0, 90, 180, 270 graus) , representada nas colunas da tabela (201) . 12) A Interface de Contato detectada pelo sistema primário (IR—2L, 1L, 2L, etc), representada nas linhas da tabela (202). Há oito possiveis Interfaces de Contato: 1. 1R-2L: lado direito da tela primária em contato com o lado esquerdo da tela Secundária. 2. 1L-2L: lado esquerdo da tela primária em contato com o lado esquerdo da tela Secundária. 3. 1L-2R: lado esquerdo da tela primária em contato com o lado direito da tela Secundária. 4. 1R-2R: lado direito da tela primária em contato com o lado direito da tela Secundária. 5. 1B-2T: parte inferior da tela primária em contato com o lado superior da tela Secundária. 6. 1T-2T: parte superior da tela primária em contato com o lado superior da tela Secundária. 7. 1T-2B: parte superior da tela primária em contato com a parte inferior da tela Secundária. 8. 1B-2B: parte inferior da tela primária em contato com a parte inferior da tela Secundária.

Com base nessas duas entradas, as seguintes três saidas são determinadas: - 01) Buffer de imagem primário: qual porção do Buffer de imagem estendido será exibida pela tela exibição primária (203). - 02) Buffer de imagem secundário: qual porção do Buffer de imagem estendido será exibida pela tela Secundária (204). - 03) orientação da tela secundária (0, 90, 180, 270 graus) (205) .

Com base nessas entradas de quatro orientações da tela e oito interfaces de contato, o resultado é de 32 possíveis formas de organização do Buffer de imagem estendido e, portanto, 32 possíveis saídas de imagem.

Descrevemos a seguir três exemplos de como as saídas e, consequentemente, o conteúdo do Buffer de imagem estendido, são definidas com base nas seguintes entradas: 1. 206: Considerando que a tela primária está na orientação retrato em 0 graus (II = Orientação primária = 0 graus) e sua face direita está em contato com a face esquerda da tela Secundária (12 = Interface de Contato = 1R2L), em seguida, a imagem original da tela primária é estendido para a direita no Buffer de imagem estendido, em um alinhamento horizontal. A tela primária vai manter a mesma orientação (0 graus) , atualizar a sua tela com a porção esquerda do Buffer de imagem estendido (01 = área do Buffer de imagem primário = esquerda) e solicitar a tela Secundária para exibir a porção direita do Buffer de imagem estendido (02 = área do Buffer de imagem secundário = direito). Finalmente, a tela primária solicitará que a tela Secundária gire a tela para retrato em 0 graus (03 = orientação da tela secundária = 0 graus), a fim de representar adequadamente o Buffer de imagem estendido. 2. 207: Considerando que a tela primária está na orientação retrato girada em 180 graus (II = Orientação da tela primária = 180 graus) e sua face direita está em contato com a face esquerda da tela Secundária (12 = Interface de Contato = 1R2L), então, a imagem original da tela primária é estendida para a esquerda no Buffer de imagem estendido, em um alinhamento horizontal. A tela primária vai manter a mesma orientação (180 graus), atualizar a sua tela com a porção direita da área de Buffer de imagem estendido (Ol = área do Buffer de imagem primário = direito) e solicita que a tela Secundária exiba o lado esquerdo do Buffer de imagem estendido (02 = Área do Buffer de imagem secundário = esquerda). Finalmente, a tela primária solicitará que a tela secundária gire a tela para retrato a 180 graus (03 = orientação da tela Secundária — 180 graus), a fim de representar adequadamente o Buffer de imagem estendido. 3. 208: Considerando que a tela primária está na orientação retrato girada em 180 graus (II = Orientação da tela primária = 180 graus) e a porção inferior está em contatado com a porção inferior da tela Secundária (12 = Interface de Contato = 1B2B), então, a imagem original da tela primária é estendida para a parte superior no Buffer de imagem estendido, em um alinhamento vertical. A tela primária manterá a mesma orientação (180 graus), atualizará a sua tela com a parte inferior do Buffer de imagem estendido (01 = área do Buffer de imagem primário = Porção Inferior) e solicita que a tela secundária exiba a parte superior da área do Buffer de imagem estendido (02 = área do Buffer de imagem secundário = Porção superior). Finalmente, a tela primária solicitará que a tela secundária gire a tela para retrato a 180 graus (03 = orientação da tela secundária = 180 graus) , a fim de representar adequadamente o Buffer de imagem estendido. A sequência de etapas a seguir ocorre quando o usuário deseja unir o pelo menos dois dispositivos e o contato é detectado pela tela primária e pela tela Secundária, conforme descrito na Figuras 3 e 4.

De acordo com a concretização aqui preferida, deve ser notado que as regras definidas no quadro de gerenciamento da Figura 2 são aplicadas na etapa 4: • Etapa 1: Depois de Usuário une os pelos menos dois dispositivos ou unidades dotados de telas, cada um detecta o contato e exibe uma interface do usuário para que o usuário selecione quais dessas unidades serão designadas como a unidade primária, ou Mestre. Se assim pré-definido, de acordo com a concretização preferida da presente invenção, uma regra pode aplicar as referidas decisões, com base nos atributos do dispositivo (pré-definido como mestre, maior poder de processamento, maior resolução de tela, etc); • Etapa 2: O usuário seleciona qual unidade será atribuída como a unidade primária, se não for usada uma regra pré-definida. • Etapa 3: a unidade primária e a unidade secundária trocam mensagens com informações sobre o outro lado de contato. • Etapa 4: a unidade primária define as variáveis de entrada II e 12. A tela primária lê o seu valor de orientação II interna - Exemplo de 0 grau. A orientação da tela primária será a orientação a ser usada no Buffer de imagem estendido. A tela primária define qual foi a Interface de Contato id 12 - exemplo 1R-2L = lado direito da tela primária com o lado esquerdo da tela secundária. Com II e 12 em mãos, a unidade primária irá calcular as saidas 01, 02, 03 usando a tabela definida na Figura 2. • Etapa 5: a unidade primária irá atualizar a sua imagem na tela com base na saida 01 - Buffer de imagem primário - exemplo: área esquerda. A orientação da tela primária será a mesma de antes, mas agora ela irá mostrar apenas uma parte da imagem estendida. • Etapa 6: a tela primária notificará à tela secundária a saida 02 - Buffer de imagem secundário -exemplo: área direita. A unidade secundária irá então atualizar a sua imagem na tela com base na saida 02. Se é apenas uma operação de atualização depois de uma entrada do usuário, é suficiente apenas a variação "delta" ser informada nesta mensagem. • Etapa 7: a tela primária informará à tela Secundária a saida 03 - Orientação da tela Secundária. Com base nisso, a tela Secundária irá girar a tela de acordo com a saida 03. Depois disso, as telas fisicas primária e Secundária, em conjunto, comporão uma imagem estendida que representa o Buffer de imagem estendido.

As figuras anexas apresentam uma concretização preferencial, na qual telefones moveis sao empregados. No entanto, como aqueles versados na técnica reconhecerão prontamente, deve ser notado que a referida representação constitui uma concretização preferencial da invenção, e que o sistema e método da presente invenção podem ser implementados em outras interfaces de usuário quaisquer, como por exemplo interfaces de usuário de exibição.

Além disso, como aqueles versados na técnica também serão capazes de derivar, a partir dos ensinamentos da presente invenção, a relação de assimetria ou divisões "fora da metade" são possíveis. Além disso, deve ser notado ainda que os dispositivos de tela primária e secundária não precisam necessariamente ser "retangulares" e que esta representação constitui apenas uma concretização preferencial da presente invenção.

Embora uma concretização preferida da presente invenção tenha sido mostrada e descrita, aqueles versados na técnica compreenderão que várias modificações podem ser feitas sem se afastar do escopo e do espírito da presente invenção, tal como definidos nas reivindicações anexas. É expressamente previsto ainda que todas as combinações dos elementos que desempenham a mesma função substancialmente da mesma forma, para alcançar os mesmos resultados estão dentro do escopo da presente invenção.

Claims (12)

1) Método para gerenciar a interação de múltiplas telas, que, quando combinadas prolongam a área de exibição em diferentes alinhamentos e orientações, caracterizado pelo fato de que inclui: - depois de o usuário unir os pelos menos dois dispositivos ou unidades dotados de telas, cada um detecta o contato e exibe uma interface do usuário para que o usuário selecione qual dessas unidades será designada como a unidade primária, ou Mestre; Se assim pré-definido, uma regra pode aplicar as referidas decisões, com base nos atributos do dispositivo; selecionar qual unidade será atribuida como a unidade primária, se não for usada uma regra pré-definida. - a unidade primária e a unidade secundária trocarem mensagens com informações sobre o outro lado de contato; - a unidade primária define as variáveis de entrada II e 12, a tela primária lê o seu valor de orientação II interna, sendo que a orientação da tela primária definirá a orientação a ser usada no Buffer de imagem extendido, a tela primária define qual foi a Interface de Contato id 12, calculando a partir de II e 12, as saidas 01, 02, 03. - a unidade primária atualiza a sua imagem na tela com base na saida 01, a orientação da tela primária será a mesma de antes, mostrando apenas uma porção de toda a imagem composta, - a tela primária notificará à tela secundária a saida 02 da área de armazenamento temporário da tela secundária, a unidade secundária atualizando a sua imagem na tela com base na saida 02; - a tela primária informará a saida 03 da tela secundária e com base nisso, a tela secundária irá girar a tela de acordo com a saida 03; - a tela primária e a tela secundária físicas, em conjunto, compondo, assim, uma imagem estendida que representa a memória de área de armazenamento temporário composto.

2) Método, de acordo com a reivindicação 1, caracterizado pelo fato de que a referida regra pré-definida consiste de mestre, maior poder de processamento, maior resolução de tela.

3) Método, de acordo com a reivindicação 1, caracterizado pelo fato de que possibilita a utilização de: a) dois ou mais sistemas independentes, com suas respectivas telas embutidas, ou b) pelo menos um sistema com sua tela embutida, ou tela primária, além de uma tela secundária destacável; ou ainda c) uma composição de um dos dois sistemas acima.

4) Método, de acordo com a reivindicação 1, caracterizado pela interação entre dispositivos com telas com dimensões fisicas, proporções relativas e resoluções de imagem iguais ou diferentes entre si.

5) Método, de acordo com a reivindicação 1, caracterizado pelo fato de que, quando mais do que duas telas estavam envolvidos no compartilhamento, o emparelhamento por contato será feito 2 a 2.

6) Método, de acordo com a reivindicação 1, caracterizado pelo fato de que, para sistemas móveis independentes, com suas respectivas telas, o usuário é o responsável por escolher a unidade que atuará como tela primária, usando uma UI (interface de usuário) disponível em ambas as telas, para a seleção principal.

7) Método, de acordo com a reivindicação 1, caracterizado pelo fato de que a referida Interface de Contato (401) é implementada por meio de sensores instalados em cada tela.

8) Método, de acordo com a reivindicação anterior, caracterizado pelo fato de que em que, com base em duas entradas: a orientação da tela primária (201-0, 90, 180 ou 270 graus) e com a "Interface de Contato" entre a tela primária e a tela Secundária (202), o método irá determinar três saidas: - qual porção do Buffer de imagem será exibida pela tela primária (203) - qual porção do Buffer de imagem será exibida pela tela secundária (204); - orientação da tela secundária (205).

9) Sistema para gerenciar a interação de múltiplas telas, compreendendo pelo menos duas telas e sensores laterais que, quando combinados prolongam a área de exibição em diferentes alinhamentos e orientações, caracterizado pelo fato de que união de pelos menos dois dispositivos ou unidades dotados de telas, e exibindo uma interface do usuário para que o usuário selecione qual dessas unidades será designada como a unidade primária, ou Mestre;

10) Sistema, de acordo com a reivindicação anterior, caracterizado pelo fato de que os referidos sensores utilizam um dos seguintes métodos: mecânico, eletromagnético, acelerômetro e NFC (comunicação por campo próximo) ou WiGig.

11) Sistema, de acordo com a reivindicação 9, caracterizado pelo fato de que os referidos dispositivos ou unidades dotados de telas detectam o contato através de tecnologias diversas consistindo de NFC, WiFi, WiGig ou acelerômetros.

12) Sistema, de acordo com a reivindicação 9, caracterizado pelo fato de que utiliza: a) dois ou mais sistemas independentes, com suas respectivas telas embutidas, ou b) pelo menos um sistema com sua tela embutida, ou tela primária, além de uma tela secundária destacável; ou ainda c) uma composição de um dos dois sistemas acima.