FR2882600A1 - Clavier virtuel acoustique, dispositif et procede. - Google Patents
Clavier virtuel acoustique, dispositif et procede. Download PDFInfo
- Publication number
- FR2882600A1 FR2882600A1 FR0601589A FR0601589A FR2882600A1 FR 2882600 A1 FR2882600 A1 FR 2882600A1 FR 0601589 A FR0601589 A FR 0601589A FR 0601589 A FR0601589 A FR 0601589A FR 2882600 A1 FR2882600 A1 FR 2882600A1
- Authority
- FR
- France
- Prior art keywords
- electronic device
- template
- sound
- signal processor
- keyboard
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1632—External expansion units, e.g. docking stations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/043—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means using propagating acoustic waves
Abstract
Un appareil d'entrée virtuel (100, 210) utilise une matrice de transducteurs (110, 212) en contact avec une surface sonore (140, 202) pour détecter l'emplacement (144, 204) d'un son ou vibration (142, 206), transmis par la surface sonore. Un processeur de signal (120, 214) connecté à une sortie de la matrice de transducteurs fournit des données correspondant à un emplacement déterminé (144, 204) de la vibration détectée par la matrice. Un dispositif électronique (150, 200) comporte un clavier virtuel (110, 210) incluant la matrice de transducteurs et des circuits électroniques de dispositif (220). Un procédé (300) d'entrée de données pour le dispositif électronique utilisant le clavier virtuel comporte la création (310) d'un son avec une surface sonore qui représente les données destinées à être entrées dans le dispositif électronique par un utilisateur. Le procédé (300) comporte en outre, la détermination (320) du point d'origine du son créé et le mappage (330) du point d'origine déterminé vers les données.
Description
CONTEXTE
1. DOMAINE TECHNIQUE L'invention concerne des dispositifs et des systèmes électroniques. L'invention concerne en particulier l'entrée de données et l'entrée de commandes pour des dispositifs et systèmes électroniques.
2. DESCRIPTION DE LA TECHNIQUE ASSOCIÉE
Les dispositifs électroniques modernes grand public, en particulier ceux qui sont appelés "dispositifs électroniques personnels" (PED) sont souvent caractérisés par le caractère portatif du dispositif. Le caractère portatif du dispositif a lui-même entraîné et continue à entraîner une tendance générale vers des tailles de plus en plus petites de ces dispositifs. Malheureusement, une petite taille des dispositifs limite nécessairement la place disponible sur le dispositif lui-même pour mettre en oeuvre une interface utilisateur intégrée avec le dispositif. Pour résumer, il y a juste la place pour des boutons, des touches, des claviers, des pavés tactiles et des roulettes sur les boîtiers typiquement de petite taille des PED et les dispositifs électroniques modernes grand public associés.
En même temps que la tendance vers une plus petite taille des dispositifs, il existe une tendance vers une sophistication fonctionnelle et une capacité globale de dispositif toujours croissantes des PED. Les caractéristiques de performances résultantes riches en fonctionnalités de ces dispositifs modernes, bien que satisfaisant globalement la demande du marché, ont nécessairement un impact sur la quantité et la complexité des interactions avec l'utilisateur requises par le dispositif. Un plus grand nombre de fonctionnalités signifie généralement davantage de choix ou d'entrées de l'utilisateur. Chaque choix doit lui-même être mis en oeuvre par l'interface utilisateur. Ainsi, les interactions de l'utilisateur, principalement sous la forme d'entrée de données et/ou d'entrée de commandes par l'intermédiaire de l'interface utilisateur intégrée, sont souvent problématiques pour les PED et les dispositifs électroniques modernes grand public associés.
Des alternatives à l'interface utilisateur intégrée pour traiter des interactions complexes de l'utilisateur avec les PED comportent l'utilisation d'accessoires périphériques d'entrée tels que, mais sans y être limité, un clavier et/ou une souris d'ordinateur clas- siques. Malheureusement, ces accessoires périphériques d'entrée, bien qu'ils soient largement utilisés et généralement admis dans un grand nombre d'applications, ne conviennent souvent pas bien pour les PED. En particulier, les accessoires périphériques d'entrée peuvent avoir une influence négative significative sur le caractère portatif du dispositif. Par exemple, le transport d'un clavier destiné à s'interfacer avec un assistant numérique personnel (PDA) peut être malcommode dans certains cas et complètement impossible dans d'autres. Ainsi, l'utilisation d'accessoires périphériques d'entrée n'est simplement pas une alternative viable dans un grand nombre de cas.
En conséquence, il serait avantageux de disposer d'un moyen d'interfaçage avec un dispositif ou un système électronique fournissant une entrée de données et/ou une entrée de commandes ne nécessitant pas d'utiliser un accessoire périphérique d'entrée ou une interface utilisateur intégrée complexe du dispositif. Un tel appareil et procédé d'entrée de données résoudrait un problème connu de longue date dans le domaine de l'interfaçage avec les dispositifs et/ou systèmes électroniques portatifs.
BRÈVE DESCRIPTION DES DESSINS
Les diverses caractéristiques des modes de réalisation de la présente invention peuvent être plus facilement comprises en référence à la description détaillée qui suit effectuée conjointement avec les dessins annexés, où des numéros de référence analogues désignent des éléments structurels analogues et dans lesquels.
La figure 1 est un schéma par blocs d'un appareil clavier virtuel selon un mode de réalisation de la présente invention.
La figure 2A est une vue en perspective d'un appareil clavier virtuel représentant un exemple de gabarit de clavier selon un mode de réalisation de la présente invention.
La figure 2B est une vue en perspective d'un appareil clavier virtuel représentai-Li.- un autre exemple de gabarit de clavier selon un mode de réalisation de la présente invention.
La figure 3 est une vue de côté d'un dispositif électronique utilisant un appareil clavier virtuel selon un mode de réalisation de la présente invention.
La figure 4 est un schéma par blocs d'un dispositif électronique avec un clavier virtuel selon la présente invention.
La figure 5A est une vue en perspective du dispositif électronique de la figure 4 sous la forme d'un exemple d'appareil pho'-ographique numérique selon un mode de réalisation de la présente invention.
La figure 5B est une vue de côté de l'exemple 10 d'appareil photographique numérique illustré sur la figure 5A.
La figure 6 est une vue en perspective du dispositif électronique de la figure 4 sous la forme d'un exemple de station d'accueil pour interfaçage avec un PED selon un mode de réalisation de la présente invention.
La figure 7 est un organigramme d'un procédé d'entrée de données pour un dispositif électronique portatif utilisant un clavier virtuel selon un mode de réalisation de la présente invention.
DESCRIPTION DÉTAILLÉE
Les modes de réalisation de la présente invention facilitent l'entrée de données et/ou l'entrée de commandes vers un dispositif électronique. En particulier, les modes de réalisation fournissent essentiellement un "clavier virtuel" pour interagir avec le dispositif électronique. Par l'intermédiaire du clavier virtuel, un utilisateur du dispositif électronique est capable d'interagir avec le dispositif comme il le fait avec un clavier, un pavé numérique ou un autre périphérique d'entrée similaire typique. Toutefois, à la différence de l'accessoire d'entrée typique, le clavier virtuel n'influe pas défavorablement sur le caractère portatif du dispositif électronique selon les modes de réalisation de la présente invention.
Dans certains modes de réalisation de la présente invention, un appareil d'entrée virtuel est fourni. L'appareil d'entrée virtuel détermine essentiellement l'emplacement d'une entrée en détectant et en localisant un événement acoustique (par exemple, un son ou une vibration) associé à l'entrée. Pour les divers modes de réalisation de la présente invention, les termes "acoustique", "son" et "vibration" même signification et sont utilisés de interchangeable, sauf s'ils sont ici autrement. Par exemple, l'appareil virtuel peut être un clavier virtuel comme entrée un son associé à la d'un doigt sur une "surface sonore" telle que, mais sans y être limité, le dessus ou la surface d'une table. Le clavier virtuel peut être utilisé pour entrer des données ou des "frappes de touches" dans un dispositif électronique, par exemple. En poursuivant avec l'exemple, pour entrer une frappe de touche, un utilisateur tape sur la surface sonore à un emplacement prédéterminé associé à une touche désirée sur le clavier virtuel. Le clavier virtuel détecte la frappe sous la forme d'un événement d'entrée acoustique et détermine un emplacement correspondant à l'événement.
Après avoir déterminé l'emplacement de l'événement, le clavier virtuel associe l'emplacement de l'événement à une entrée spécifique (par exemple, une touche d'un ont la manière définis d'entrée utilisant "frappe" clavier) et transmet l'entrée au dispositif électronique. Ainsi, selon certains modes de réalisation de la présente invention, l'utilisation du clavier virtuel est analogue à l'entrée de données utilisant un clavier classique ou un dispositif d'entrée associé (par exemple, une souris). Toutefois, à la différence du clavier classique, aucun clavier physique réel ou appareil d'entrée encombrant d'une façon similaire n'est requis pour ces modes de réalisation de la présente invention. Les modes de réalisation de clavier virtuel selon la présente invention assurent l'entrée de données et/ou l'entrée de commandes vers le dispositif électronique sans la présence d'un appareil d'entrée réel ou physique pouvant influer défavorablement sur le caractère portatif ou sur d'autres caractéristiques du dispositif électronique.
La figure 1 est un schéma par blocs d'un appareil clavier virtuel 100 selon un mode de réalisation de la présente invention. L'appareil clavier virtuel 100 comprend une matrice 110 de transducteurs acoustiques ou de vibrations 112.
Dans certains modes de réalisation, la matrice 110 est constituée de deux transducteurs de vibrations 112 ou plus. Par exemple, la matrice 110 peut être constituée de trois transducteurs de vibrations 112. Chaque transducteur de vibrations 112 de la matrice 110 est séparé des autres transducteurs 112 de la matrice 110. Par exemple, trois transducteurs 112 peuvent être agencés dans la matrice 110 de telle sorte que les transducteurs 112 constituent collectivement une matrice triangulaire plane. En particulier, pour cet exemple, chacun des trois transducteurs 112 peut être situé sur un sommet différent parmi trois sommets d'un triangle incluant, mais sans y être limité, un triangle isocèle et un triangle équilatéral. De plus, un emplacement relatif des trois transducteurs 112 définit une surface plane.
Dans un autre exemple, quatre transducteurs de vibrations 112 peuvent être agencés en une l0 matrice rectangulaire 110, avec un transducteur à chacun des quatre sommets d'un rectangle. Dans un autre exemple, deux transducteurs de vibrations 112 ou plus peuvent être agencés en une matrice linéaire 110. Dans encore un autre exemple, cinq transducteurs 112 peuvent être agencés de manière à former une matrice pentagonale 110. Un homme de l'art peut facilement imaginer un nombre quelconque de configurations bidimensionnelles et tridimensionnelles de transducteurs séparés 112 constituant une matrice 110. Toutes ces configurations appartiennent à la portée des modes de réalisation de la présente invention.
Le transducteur 112 peut être essentiellement un quelconque moyen pour détecter ou capter une vibration correspondant à une entrée. Par exemple, le transducteur 112 peut être un micro-phone tel que, mais sans y être limité, un microphone à condensateur, un microphone dynamique, un microphone à cristal ou piézo-électrique et un microphone à ruban. Dans un autre exemple, le transducteur 112 peut être un accéléromètre ou un détecteur de mouvement associé. Dans encore un autre exemple, le transducteur de vibrations 112 peut être un détecteur indirect ou sans contact te='_ que, mais sans y être limité, un détecteur par déviation laser utilisé pour la détection à distance des vibrations de la surface d'un matériau (par exemple, une fenêtre en verre plat). Un détecteur par déviation laser mesure les vibrations d'une surface en illuminant la surface par un faisceau laser et en détectant les vibrations de la surface sous la forme d'une déviation du faisceau laser.
En général, la vibration ou le son détecté peut inclure, mais sans y être limité, une onde acoustique longitudinale et/ou une onde acoustique transversale se propageant dans l'air ou dans un autre matériau et/ou se propageant sur une surface du matériau. Par exemple, la vibration peut être un son produit en tapant sur une surface plane ou sur le dessus d'une table (c'est-à-dire, une surface sonore) dans laquelle le son se propage par l'intermédiaire d'un ou des deux milieux constitués de l'air entourant la surface plane et du matériau de la table. Le transducteur 112 détecte et transforme les vibrations en une autre forme d'énergie telle qu'une impulsion ou un signal électrique. Un homme de l'art est habitué aux transducteurs de vibrations ou de sons.
L'appareil clavier virtuel 100 comprend en outre, un processeur de signal 120. Le processeur de signal 120 recueille et traite les signaux fournis en sortie ou produits par chacun des transducteurs 112. Par exemple, le processeur de signal 120 peut recevoir des signaux électriques des transducteurs 112. Dans certains modes de réalisation, les signaux reçus sont, soit amplifiés, soit filtrés, soit les deux, par le processeur de signal 120. En particulier, les signaux reçus peuvent être amplifiés par le processeur de signal 120 pour augmenter le niveau de signal pour le traitement et peuvent être filtrés pour éliminer ou atténuer les effets du bruit et/ou d'autres signaux d'interférence. Dans certain mode de réalisation, le processeur de signal 120 est un processeur de signal numérique qui traite numériquement les signaux reçus. En particulier, le processeur de signal numérique 120 peut échantillonner et numériser les signaux provenant de chacun des transducteurs 112, puis appliquer un traitement numérique au signal numérisé. Le traitement numérique du signal peut inclure, mais sans y être limité, un filtrage numérique, une reconnaissance numérique de signal et une synchronisation d'événement et la détermination de la source du signal numérique.
Le processeur de signal 120 détermine l'emplacement ou la source de l'événement de vibration/son détecté par la matrice de transducteurs 110. En particulier, une quelconque parmi les diverses méthodologies et techniques de triangulation peut être utilisée par le processeur de signal 120 pour déterminer l'emplacement de l'événement. Par exemple, des algorithmes d'heure d'arrivée, tels que ceux auxquels sont habitués les hommes de l'art, peuvent être utilisés par le processeur de signal 120 pour déterminer l'emplacement de l'événement. En particulier, un algorithme d'heure d'arrivée détermine l'emplacement d'un événement en utilisant la détermination d'une 2882600 lo heure d'arrivée différentielle de l'événement de vibration sur chacun des transducteurs 112. À partir de l'heure d'arrivée différentielle, un emplacement le plus probable pour la source de l'événement de vibration peut être déterminé. Par exemple, des informations concernant la vitesse de propagation de la vibration depuis la source de l'événement jusqu'aux transducteurs 112 et des principes géométriques bien connus permettent une telle détermination.
Dans certains modes de réalisation, la sortie du processeur de signal 120 est simplement l'emplacement d'une source d'événement de vibration ou un point ou l'origine du son. Dans d'autres modes de réalisation, le processeur de signal 120 mappe en outre l'emplacement déterminé vers une configuration de "touches". La configuration de touches est une relation prédéterminée entre des sources d'événements possibles et les touches d'un clavier virtuel de l'appareil clavier 100. La configuration de touches peut être enregistrée dans une mémoire disponible au processeur de signal 120, par exemple. Ainsi, lorsqu'un emplacement et déterminé, l'emplacement peut être comparé par le processeur de signal 120 à la configuration de touches enregistrée. D'après la comparaison, une touche spécifique est sélectionnée, achevant ainsi le mappage de l'emplacement de l'événement vers la configuration de touches. Dans ces modes de réalisation, la sortie du processeur de signal 120 est l'identité d'une touche correspondant à l'emplacement de la source de vibration.
Par exemple, le processeur de signal 120 peut comparer un emplacement déterminé de la source de vibration à un ensemble prédéfini de cordonnées définissant les emplacements des touches sous la forme de boîtes ou de rectangles agencés comme si les boîtes étaient les touches d'un clavier "QWERTY". Un emplacement d'événement déterminé se trouvant à l'intérieur de l'une des boîtes prédéfinies mappe vers une touche correspondant à la boîte dans la configuration de touches. Dans un autre exemple, l'événement détecté peut correspondre à un doigt entraîné ou glissant d'un bout à l'autre d'une table ou d'une surface sonore. En d'autres termes, l'événement est une source sonore se déplaçant dans le temps. Ainsi, la configuration de touches mappée correspond à un emplacement mobile qui suit ou poursuit le doigt sur la table. Un tel mappage ressemble à l'action d'une souris d'ordinateur. Un homme de l'art est habitué à une large diversité de tels mappages, leur ensemble appartenant à la portée de la présente invention.
Dans certains modes de réalisation, le processeur de signal 120 comprend un circuit identifiable en tant que processeur de signal spécialisé ou dédié. En particulier, la fonctionnalité du processeur de signal 120 est essentiellement déterminée par des circuits ou une configuration de circuits du processeur de signal dédié. Un tel processeur de signal dédié peut être mis en oeuvre par un circuit intégré (CI) de traitement de signal ou par une partie d'un circuit intégré spécifique à une application (ASIC) et/ou un réseau prédiffusé programmable par l'utilisateur (FPGA) assurant la fonctionnalité de traitement du signal. Dans ces modes de réalisation, le circuit processeur de signal peut inclure un convertisseur analogique-numérique (CAN) en tant que partie du circuit.
Dans d'autres modes de réalisation, le processeur de signal 120 comprend un programme informatique ou une partie de celui-ci exécuté par un processeur programmable tel que, mais sans y être limité, un ordinateur à usage général ou un microprocesseur/microcontrôleur et un processeur de signal programmable. Dans ces modes de réalisation, la fonctionnalité du processeur de signal 120 est déterminée par ou incorporée dans des instructions du programme informatique. Dans ces modes de réalisation, le CAN peut être fourni en tant que partie du processeur programmable ou peut être un circuit séparé de celui du processeur programmable.
Dans encore d'autres modes de réalisation, le processeur de signal 120 peut être mis en oeuvre sous la forme de circuits discrets dédiés à la détermination du point d'origine du son et à la fonctionnalité de mappage des touches du processeur de signal 120. Dans encore d'autres modes de réalisation, le processeur de signal 120 peut être constitué d'un ou plusieurs parmi un processeur de signal physique, un programme informatique et des circuits discrets.
Quel que soit le mode de réalisation, le processeur de signal 120 peut exécuter d'autres fonctions en plus de celle qui est associée à l'appareil clavier virtuel 100. Par exemple, le processeur de signal 120 peut être un processeur d'un dispositif électronique équipé de l'appareil clavier virtuel 100, dans lequel le processeur joue le rôle de processeur de signal 120 uniquement lorsqu'il reçoit et lorsqu'il traite une entrée vers l'appareil clavier virtuel 100.
Dans certains modes de réalisation, l'appareil clavier virtuel 100 comprend en outre, un gabarit de clavier 130. Le gabarit de clavier 130 procure à un utilisateur un guide ou une carte des emplacements des touches virtuelles. En particulier, le gabarit de clavier 130 aide l'utilisateur à effectuer des entrées dans le dispositif au moyen de l'appareil clavier virtuel 100 en indiquant ou en identifiant un emplacement "physique" qui correspond à un emplacement de touche virtuelle associé au mappage prédéterminé du processeur de signal 120. En d'autres termes, le gabarit 130 est une représentation physique visuelle du mappage de touches de l'appareil clavier virtuel 100. Ainsi, le gabarit de clavier 130 aide l'utilisateur à utiliser l'appareil clavier virtuel 100. Dans certains modes de réalisation, l'appareil clavier virtuel 100 peut être utilisé avec ou sans le gabarit de clavier 130 à la discrétion de l'utilisateur. Par exemple, l'utilisateur peut choisir d'utiliser le gabarit de clavier uniquement lorsqu'il apprend l'implantation du clavier. En conséquence, l'inclusion du gabarit de clavier 130 sur la figure 1 est une explication seulement de certains modes de réalisation.
Dans un exemple, le gabarit de clavier 130 est un élément plan placé sur une surface sonore 140 (par exemple, le dessus d'une table). Le gabarit de clavier 130 est par exemple, une feuille ou un film de matériau marqué ou imprimé par les emplacements des touches qui mappent ou imitent un clavier. La feuille du gabarit 130 peut être relativement flexible et être constituée d'un matériau tel que, mais sans y être limité, du papier, du carton, du Mylar , du vinyle, un tissu ou un autre matériau. Le gabarit de clavier peut être manipulé pour être rangé de façon compacte lorsqu'il n'est pas utilisé.
La figure 2A illustre un exemple de gabarit de clavier 130 sous la forme d'une feuille imprimée selon un mode de réalisation de la présente invention. Sur la figure 2A est également illustré un moyen 150 pour utiliser l'appareil clavier virtuel 100. Le moyen 150 pour utiliser l'appareil 100 de façon générale est un boîtier qui comporte un ou les deux parmi la matrice de transducteurs 110 et le processeur de signal 120, par exemple. Dans certains modes de réalisation, le moyen 150 pour utiliser l'appareil 100 est un dispositif électronique 150.
La feuille de gabarit 150 et placée sur la surface sonore 140 avant utilisation de l'appareil clavier virtuel 100. Le gabarit 130 joue le rôle de guide pour l'utilisateur pour localiser des touches spécifiques de la carte du clavier représentée sur le gabarit 130. La carte du clavier correspond aux emplacements de touches spécifiques de l'appareil clavier virtuel 100. Ainsi, le gabarit 130 facilite l'utilisation de l'appareil clavier virtuel 100 par l'utilisateur.
Dans un autre exemple, le gabarit de clavier 130 est un gabarit projeté ou présenté optiquement. La figure 2B illustre un exemple de gabarit de clavier sous la forme d'un motif projeté optiquement selon un mode de réalisation de la présente invention. Par exemple, l'appareil clavier virtuel 100 peut prévoir un projecteur 132 qui crée et projette optiquement le gabarit de clavier 130 sur la surface sonore 140. Le projecteur 132 peut être logé dans le moyen 150 pour utiliser l'appareil 100 dans certains modes de réalisation, tel que le mode de réalisation illustré sur la figure 2B. Dans ces modes de réalisation, le gabarit 130 est positionné essentiellement automatiquement par l'emplacement où est projeté le gabarit 130 sur la surface sonore. Des exemples de gabarits projetés 130 sont également décrits par Rafii et al. , brevet U.S. No. 6 614 422 B1 et par Arnon, brevet U.S. No. 6 650 318 B1, tous deux étant ici incorporés en référence.
Dans certains modes de réalisation, le positionnement du gabarit 130 est prédéterminé.
Le terme "positionnement" est l'emplacement et/ou l'orientation du gabarit 130 par rapport à l'appareil clavier virtuel 100 (c'est-à-dire, le moyen 150 pour l'utiliser). Dans un tel mode de réalisation, l'utilisateur place simplement le gabarit 130 à un emplacement et selon une orientation prédéterminés déterminés par l'emplacement du moyen 150 pour l'utilisation avant d'utiliser l'appareil clavier virtuel 100.
Par exemple, l'emplacement prédéterminé connu a priori par l'utilisateur peut être une position située un pouce devant le moyen d'utilisation 150 centré sur et perpendiculaire à la ligne centrale du moyen 150. En d'autres termes, l'utilisateur "positionne" le gabarit 130 avec l'appareil 100 en plaçant et en orientant convenablement le gabarit 130 par rapport au moyen d'utilisation 150.
Dans d'autres modes de réalisation, le positionnement du gabarit 130 est déterminé de façon interactive entre l'utilisateur et l'appareil 100. En particulier, au cours du positionnement du gabarit, l'utilisateur entre des points de positionnement correspondant à un emplacement, une orientation et de façon optionnelle, la taille ou l'échelle du gabarit 130. L'appareil clavier virtuel 100 utilise les points de positionnement entrés pour régler la carte du clavier pour correspondre aux points de positionnement entrés. Ainsi, le positionnement du gabarit 130 est basé sur les points de positionnement entrés par l'utilisateur au lieu d'être basé sur un positionnement de gabarit prédéterminé.
Par exemple, pour positionner le gabarit 130, l'utilisateur peut taper sur la surface sonore 140 à deux emplacements ou plus pour indiquer les points de positionnement pour le gabarit de clavier 130 (par exemple, taper aux quatre coins du gabarit de feuille 130). Les emplacements des frappes sont déterminés par l'appareil clavier virtuel 100. Les emplacements déterminés sont ensuite utilisés pour définir divers paramètres du gabarit incluant l'emplacement, l'orientation et la taille du gabarit. À partir des paramètres de gabarit définis, le mappage utilisé par l'appareil clavier virtuel 100 est réglé en conséquence.
Le positionnement interactif peut s'appliquer soit à l'exemple de feuille soit aux formes projetées optiquement du gabarit 130. Dans le cas de la forme de feuille, le positionnement interactif simplifie la localisation du gabarit 130. En particulier, un emplacement et une orientation essentiellement quelconques du gabarit plan 130 peuvent être admis par le positionnement interactif. Par exemple, le gabarit de feuille 130 peut être positionné sur une table, comme désiré par l'utilisateur. On tape ensuite sur les coins et l'appareil clavier virtuel 130 reconnaît et s'adapte au positionnement du gabarit de feuille:L30 par les positionnements interactifs. Avec le gabarit projeté optiquement 130, l'emplacement du gabarit projeté et même sa taille peuvent être réglés en se basant sur le positionnement interactif par exemple. Un utilisateur tape sur la table ou la surface 140 en plusieurs points pour indiquer l'endroit où le gabarit projeté doit être positionné. Lorsque les points ont été indiqués par l'utilisateur, l'image projetée est changée d'échelle et disposée sur la surface sonore 140 en conséquence. Le positionnement interactif permet en outre d'utiliser un gabarit défini par l'utilisateur. En particulier, en indiquant des emplacements de points de positionnement correspondant à des données particulières destinées à être entrées, le clavier virtuel 100 permet à un utilisateur de définir un gabarit personnalisé dans certains modes de réalisation.
Dans encore d'autres modes de réalisation, des éléments ou propriétés du gabarit 130 peuvent faciliter le positionnement automatique ou essentiellement non interactif du gabarit. Par exemple, le gabarit peut comprendre des marques de positionnement qui sont détectées par l'appareil clavier virtuel 100. Des marques à fréquences radio (RF), soit passives soit actives, peuvent être utilisées pour identifier pour l'appareil 100 l'emplacement du gabarit 130, par exemple. Une ou deux des marques optiques (par exemple, des cibles optiques) et une reconnaissance de motif optique peuvent être utilisées par le clavier virtuel 100 pour localiser et positionner le gabarit 130. Dans certains de ces modes de réalisation, l'appareil clavier virtuel 100 comprend en outre, des capteurs optiques pour détecter les marques optiques.
Dans certains modes de réalisation de l'appareil clavier virtuel 100, les transducteurs 112 de la matrice de transducteurs 110 sont en contact avec la surface sonore 140. Dans ces modes de réalisation, la surface sonore 140 est un matériau parcouru ou traversé par les vibrations. Les transducteurs 112 saisissent ou reçoivent la vibration par l'intermédiaire du contact avec la surface sonore 140, par opposition à ou en plus de l'air.
Par exemple, la surface sonore 140 peut être une table où le dessus d'un bureau et l'appareil 100 peut utiliser la matrice 110 avec trois transducteurs 112. L'appareil 100 est positionné par rapport au dessus de la table ou du bureau de telle sorte que les transducteurs 112 reposent sur et soient en contact avec le dessus ou la surface de la table. Lamatrice 110 avec trois transducteurs 112 facilite le fait que tous les transducteurs 112 de la matrice 110 soient en contact étroit avec le dessus de la table. Un son produit en tapant sur le dessus de la table se propage à travers la table jusqu'aux transducteurs 112.
Dans certains modes de réalisation, le contact entre la matrice 110 et le dessus de la table peut être un contact direct. Par exemple, les transducteurs 112 peuvent être en contact mécanique ou physique avec la surface sonore 140, comme décrit ci-dessus en ce qui concerne l'exemple du dessus de table. Dans d'autres modes de réalisation, le contact entre la matrice 110 et le dessus de la table est indirect. Par exemple, les transducteurs 112 peuvent être en contact mécanique avec un matériau d'interface ou un élément structurel qui est lui-même en contact mécanique ou physique avec la surface sonore 140 (par exemple, un tapis de caoutchouc ou une feuille située entre le transducteur 112 et la surface sonore 140). Dans ces modes de réalisation, le matériau ou la structure d'interface sert à transmettre la vibration de la surface sonore 140 jusqu'aux transducteurs 112. Dans certains modes de réalisation, le matériau de l'interface peut être constitué d'un espace d'air.
La figure 3 est une vue de côté d'un exemple de dispositif électronique 150 utilisant le clavier virtuel 100 selon un mode de réalisation de la présente invention. En particulier, la figure 3 illustre le dispositif électronique 150 se trouvant sur la surface sonore 140 supportée par les transducteurs 112 de la matrice de transducteurs 110. Ainsi, les transducteurs 112 jouent essentiellement le rôle de "pieds" pour le dispositif électronique 150. Dans ces modes de réalisation, les transducteurs 112 peuvent détecter de façon préférentielle une vibration dans la surface sonore 140 associée à une entrée de l'utilisateur (par exemple, tapant sur la surface sonore 140) au lieu des vibrations d'un milieu environnant. La frappe sur la surface sonore 140 est indiquée par une flèche verticale 144 produisant un son ou une vibration 142, qui est indiquée par des lignes incurvées issues de l'emplacement de la frappe 144 sur la figure 3.
La surface sonore 140 peut être par exemple, une table sur laquelle est placé le dispositif électronique 150 pendant l'utilisation de l'appareil clavier virtuel 100 et le milieu environnant peut être l'air. En tapant sur la table, on produit des ondes sonores 142 se propageant à travers la table et aussi dans l'air. Puisque les transducteurs 112 (par exemple, les pieds du dispositif électronique 150) sont en contact physique avec la table, les ondes sonores 142 se propageant à travers la table sont plus facilement détectées par les transducteurs 112 de la matrice 110 que les ondes sonores se propageant dans l'air.
Dans certains modes de réalisation, l'appareil 100 peut utiliser une caractérisation d'entrée interactive pour mieux distinguer les événements d'entrée acoustiques "réels" utilisant la surface sonore 140 par rapport au bruit aléatoire et/ou étranger provenant de l'environnement. Cette caractérisation d'entrée interactive peut être appelée "mode d'apprentissage" dans certains modes de réalisation. Au cours de la caractérisation d 'entrée interactive, l'appareil 100 "apprend" essentiellement à reconnaître des événements d 'entrée acoustiques réels par rapport au bruit de fond. Dans certains modes de réalisation, la caractérisation d'entrée interactive est effectuée en même temps que le positionnement du gabarit.
Par exemple, l'appareil 100 peut utiliser une caractérisation par frappe de doigt dans laquelle l'appareil 100 apprend à faire la distinction entre la frappe ou l'entraînement sur la surface sonore 140 et le bruit ces modes de apprend à un ou plusieurs exemples
exemple, des frappes
de doigt) sur la surface sonore 140. L'appareil 100 reçoit et enregistre le ou les événements.
Les événements enregistrés ou leurs transformations peuvent être utilisés pour faciliter la distinction entre les événements d 'entrée réels et le bruit. La transformation des événements enregistrés comporte, mais sans y être limité, l'amplification, le filtrage, le mélange avec d'autres signaux et diverses décompositions connues dans la technique. Par exemple, l'adaptation de motif ou de gabarit entre l'événement enregistré et des événements d'entrée "réels" potentiels peut être utilisée.
d'un doigt de fond. Dans certains de réalisation, l'appareil utilisateur à exécuter un d 'événements d'entrée (par Dans d'autre exemple, des identifiants caractéristiques des événements jenregistrés peuvent être extraits en utilisant une ou plusieurs transformations de signal et les événements extraits comparés à des caractéristiques extraites d'événements réels potentiels. Une transformation par ondelettes discrètes est un exemple d'une telle transformation de signal pouvant être utilisée pour extraire des identifiants. Dans d'autres modes de réalisation, un filtrage adaptatif ou un traitement de signal adaptatif similaire peut être utilisé pour faciliter la distinction entre les entrées réelles et le bruit de fond. Dans encore d'autres exemples, des techniques telles que celles qui sont utilisées dans la reconnaissance de la parole peuvent être utilisées.
La figure 4 est un schéma par blocs d'un dispositif électronique 200 avec un clavier virtuel acoustique selon un mode de réalisation de la présente invention. En particulier, des données sont entrées dans le dispositif électronique 200 en utilisant un clavier virtuel 210 qui détecte et détermine acoustiquement l'origine d'un son correspondant aux données entrées. Par exemple, le son peut être produit par un utilisateur tapant avec un doigt ou l'entraînant sur une table à un emplacement spécifique ou une séquence d'emplacements correspondant aux données entrées. Les données entrées peuvent correspondre à une entrée quelconque normalement associée au dispositif électronique 200 telle que, mais sans y être limité, l'entrée d'une touche/bouton ou le mouvement d'un curseur. Dans certains modes de réalisation, le dispositif électronique 200 repose sur ou est supporté par une surface sonore et le son détecté est transmis à partir du point d'origine du son jusqu'au dispositif 200 à travers la surface sonore. Dans d'autres modes de réalisation, le son est transmis à travers un milieu tel que l'air qui entoure le dispositif électronique 200 et la surface sonore.
Le dispositif électronique 200 peut être essentiellement un quelconque dispositif électronique utilisant des entrées de données provenant d'un utilisateur pendant le fonctionnement. En particulier, le dispositif électronique 200 peut être un dispositif électronique personnel portatif (PED). Le dispositif électronique 200 peut inclure un clavier intégré, un pavé numérique ou un moyen d'entrée similaire, en plus du clavier virtuel. Par exemple, le dispositif électronique 200 peut être un appareil photographique numérique, un assistant numérique personnel (PDA), une télécommande pour un système audio/vidéo, un téléphone cellulaire, une console de jeu vidéo, une unité portative de jeu vidéo, un lecteur MP3, un lecteur de CD-ROM ou un lecteur de DVD. Dans un autre exemple, le dispositif électronique 200 est une station d'accueil pour l'un quelconque de ces PED, comme mentionné ci-dessus.
La figure 5A est une vue en perspective orientée par-dessous du dispositif électronique de la figure 4 sous la forme d'un exemple d'appareil photographique numérique 200 selon un mode de réalisation de la présente invention. La figure 5B est une vue de côté de l'exemple d'appareil photographique numérique 200 illustré sur la figure 5A. En particulier, la figure 5B illustre l'exemple d'appareil photographique numérique 200 reposant sur et supporté par une surface sonore 202 représentée par une table. En tapant sur la surface sonore 202, comme indiqué par la flèche 204, on produit le son 206 indiqué par les lignes incurvées émanant de l'emplacement de la frappe 204.
La figure 6 est une vue en perspective du dispositif électronique 200 de la figure 4 sous la forme d'un exemple de station d'accueil 200 pour interfaçage avec un PED 208 selon un mode de réalisation de la présente invention. Sur la figure 6, un téléphone cellulaire 208 est illustré, interfacé avec ou accueilli par la station d'accueil 200, à titre d'exemple et sans limitation.
En se référant de nouveau à la figure 4, le dispositif électronique 200 est constitué d'un clavier virtuel 210. Le clavier virtuel 210 détecte et localise acoustiquement le point d'origine du son 204 (illustré sur la figure 5B). Le clavier virtuel 210 mappe en outre le point d'origine localisé 204 vers un type d'entrée de données spécifique. Par exemple, le clavier virtuel 210 peut mapper le point d'origine du son 204 vers une touche particulière parmi une pluralité de touches définies par le clavier 210 (par exemple, la touche "E" d'un clavier QWERTY). Dans un autre exemple, le clavier virtuel 210 peut mapper un point d'origine du son en fonction du temps vers un mouvement de curseur défini par le clavier virtuel 210. Ainsi, le clavier virtuel 210 permet â un utilisateur d'entrer des données dans le dispositif électronique 200 en produisant des sons 204 (par exemple, en tapant sur la surface sonore 202 de la figure 5B) avec des points spécifiques ou origine.
Dans certains modes de réalisation, le clavier virtuel 210 est essentiellement similaire à l'appareil clavier virtuel 100 décrit cidessus. En particulier, le clavier virtuel 210 est constitué d'une matrice de transducteurs 212 qui détectent le son 204. La matrice de transducteurs acoustiques 212 peut être essentiellement la matrice 110 décrite cidessus en ce qui concerne l'appareil 100. Le clavier virtuel 210 comprend en outre, un processeur de signal 214 qui résout le point d'origine du son 204 détecté par les transducteurs 212. Dans certains modes de réalisation, le processeur de signal 214 peut être essentiellement le processeur de signal 120 décrit ci-dessus en ce qui concerne l'appareil 100. Dans certains modes de réalisation, le clavier virtuel 210 peut comprendre en outre, un gabarit 216 qui aide l'utilisateur en ce qui concerne l'emplacement de génération du son de telle sorte qu'une correspondance voulue entre le son et une entrée de données spécifique soit assurée. Dans certains modes de réalisation, le gabarit 216 peut être essentiellement le gabarit 130 décrit ci-dessus en ce qui concerne l'appareil 100.
En se référant de nouveau à la figure 5A, les 35 transducteurs 212 sont illustrés sous la forme de trois supports ou pieds en forme de disque, disposés sur la surface inférieure de l'exemple d'appareil photographique numérique 200. La figure 5B illustre l'exemple de pieds de transducteurs 212 de l'appareil photographique numérique 200 en contact avec le dessus d'une table jouant le rôle de surface sonore 202. De façon similaire, les transducteurs 212 sont disposés dans ou sont des pieds respectifs situés sur la surface inférieure (non illustrée) de la station d'accueil 200 illustrée sur la figure 6. La sortie du clavier virtuel 210 est transmise au PED accueilli (par exemple, un téléphone cellulaire 208 sur la figure 6) par l'intermédiaire d'une interface d'accueil (non illustrée) de la station d'accueil 200. Sur la figure 6, est également illustré au moyen de lignes en tirets le fait que le gabarit de clavier 216 peut se projeter sur la surface sonore 202 depuis la station d'accueil 200 dans certains modes de réalisation. Le mode de réalisation de gabarit de clavier projeté 216 est similaire au mode de réalisation de gabarit 130 projeté par le projecteur 132 du moyen 150 pour utiliser l'appareil 100 décrit ci-dessus et illustré sur la figure 2B.
En se référant de nouveau à la figure 4, le dispositif électronique 200 comprend en outre, des circuits électroniques de dispositif 220.
Les circuits électroniques de dispositif 220 assurent la fonctionnalité du dispositif 200.
Les circuits électroniques de dispositif 220 reçoivent les données de la touche entrées en tant que sortie du clavier virtuel 210. Par exemple, dans certains modes de réalisation de l'exemple d'appareil photographique numérique 200 illustré sur les figures 5A et 5B, les circuits électroniques de dispositif 220 comprennent un contrôleur 221, un soussystème de formation d'image 222, un sous-système de mémoire 223, un soussystème d'interface 224, un sous-système d'alimentation 225 et un programmes de commande 226 enregistrés dans le sous-système de mémoire 223. Le contrôleur 221 exécute le programme de commande 226 et commande le fonctionnement des divers sous-systèmes des circuits électroniques de dispositif 220 de l'appareil photographique numérique 200. Les données entrées par un utilisateur par l'intermédiaire du clavier virtuel 210 fournis-sent une entrée aux circuits électroniques de dispositif 220.
Le contrôleur 221 peut être un type quelconque de composant ou groupe de composants, pouvant assurer la commande et la coordination des soussystèmes des circuits électroniques de dispositif 220. Le contrôleur 221 peut être, par exemple, un microprocesseur ou un microcontrôleur. À titre de variante, le contrôleur 221 peut être mis en oeuvre sous la forme d'un ASIC ou même d'un assemblage de composants discrets. Le contrôleur 221 est interfacé avec le sous-système de formation d'image 222, le sous- système de mémoire 223, le sous-système d'interface 224 et le sous- système d'alimentation 225. Dans certaines mises en oeuvre, une partie du sous-système de mémoire 223 peut être combinée avec le contrôleur 221. Dans certains modes de réalisation, le clavier virtuel 210 est mis en oeuvre sous la forme d'un sous-système distinct, dont une sortie est interfacée avec le contrôleur 221. Dans d'autres modes de réalisation, le clavier virtuel 210 est mis en oeuvre partiellement sous la forme d'une partie du programme de commande 226 qui est exécuté par le contrôleur 221 (par exemple, le processeur de signal 214 est une fonction du programme de commande 226).
Le sous-système de formation d'image 222 comprend des dispositifs optiques et un capteur d 'image et une partie ou circuit d 'enregistrement. Le capteur et la partie d 'enregistrement peuvent être constitués d'une matrice de dispositifs à couplage de charges (CCD). Pendant le fonctionnement de l'exemple d 'appareil photographique 200, le dispositif optique projette l'image optique sur un plan d 'image du capteur d'image et de la partie d 'enregistrement du sous-système de formation d'image 222. Le dispositif optique peut assurer une focalisation variable ou fixe, ainsi qu'une fonctionnalité de zoom optique (c'est-à-dire, un agrandissement optique variable). L'image optique, une fois focalisée, est saisie et numérisée par le capteur d'image et la partie d 'enregistrement du sous-système de formation d 'image 222. La numérisation produit une image numérique. Le contrôleur 221 commande les fonctions de capture d'image, de focalisation et de zoom du sous-système de formation d'image 222. Lorsque le contrôleur 221 initialise l'action de saisie d'une image, le sous-système de formation d'image 222 numérise et enregistre l'image. L'image numérique est ensuite transférée vers et enregistrée dans le sous-système de mémoire 223.
Le sous-système de mémoire 223 comprend une mémoire informatique pour enregistrer des images numériques ainsi que pour enregistrer le programme de commande 226. Dans certains modes de réalisation, le sous-système de mémoire 223 est constitué d'une combinaison d'une mémoire à lecture seule (ROM) et d'une mémoire à accès aléatoire (RAM). La ROM est utilisée pour enregistrer le programme de commande 226, tandis que la RAM est utilisée pour enregistrer les images numériques provenant du sous-système de formation d'image 222. Le sous-système de mémoire 223 peut également enregistrer un répertoire des images et/ou un répertoire des programmes informatiques enregistrés dans celui-ci, incluant le programme de commande 226. Dans certains modes de réalisation, une partie du clavier virtuel 210 est enregistrée dans le sous-système de mémoire 223. Par exemple, une carte de clavier utilisée par le clavier virtuel 210 peut être enregistrée dans le sous-système de mémoire 223.
Le sous-système d'interface 224 comprend des boutons utilisés par un utilisateur pour interagir avec le programme de commande 226 qui est exécuté par le contrôleur 221, de façon à influer sur une commande initialisée par l'utilisateur de l'exemple d'appareil photographique numérique 200. Par exemple, un bouton peut permettre à l'utilisateur d'initialiser l'enregistrement d'une image (c'est-à-dire, "prendre l'image"). Un autre bouton peut fonctionner comme un commutateur MARCHE/ARRÊT, permettant d'allumer ou d'éteindre l'appareil photographique. De plus, les boutons peuvent jouer le rôle des touches de "flèches" pour permettre de commander une valeur de façon incrémentale ou permettre à l'utilisateur de naviguer dans un menu et d'effectuer des sélections. Un homme de l'art est habitué aux boutons utilisés pour fournir une interface utilisateur à un appareil photographique numérique.
Le sous-système d'interface 224 comprend en outre, un dispositif d'affichage d'image. Le dispositif d'affichage d'image permet à l'utilisateur d'observer une image numérique enregistrée dans le soussystème de mémoire 223. De plus, le dispositif d'affichage d'image peut fournir une vue en "temps réel" de l'image arrivant sur le capteur d'image et la partie d'enregistrement du sous-système de formation d'image 222. En plus de l'observation des images, le dispositif d'affichage d'image constitue un moyen pour afficher des menus permettant à l'utilisateur de sélectionner différents modes de fonctionnement en ce qui concerne divers modes de réalisation de la présente invention. De plus, le dispositif d'affichage d'image fournit des:répertoires permettant à l'utilisateur d'observer et de manipuler le contenu du sous- système de mémoire 223. Le dispositif d'affichage d'image est typiquement un dispositif d'affichage à cristaux liquides (LCD) ou un dispositif d'affichage similaire utile pour afficher des images numériques.
Dans certains modes de réalisation, le clavier virtuel 210 constitue un autre moyen pour accéder à la fonctionnalité supportée par les boutons pour interagir avec le programme de commande 226. En d'autres termes, le clavier virtuel 210 peut mettre en oeuvre certaines ou la totalité des fonctionnalités fournies par les boutons du sous-système d'interface 224. Dans certains modes de réalisation, le clavier virtuel 210 constitue un moyen pour ajouter une fonctionnalité au moyen d'entrée de données augmentant ou dépassant la capacité de celles qui sont fournies par les boutons du sous-système d'interface 224. Par exemple, le clavier virtuel 210 peut constituer une forme d'entrée de clavier QWERTY qui n'est pas présente dans les boutons physiques du sous-système d 'interface 224.
Le sous-système d'alimentation 225 est constitué d'une alimentation, d'un moniteur et d 'une batterie. L'alimentation comporte une entrée connectée au port de l'adaptateur de courant alternatif et une sortie fournissant de l'énergie au reste de l'exemple d'appareil photographique numérique 200. De plus, l'alimentation comporte une connexion à la batterie. L'alimentation peut extraire de l'énergie depuis ou fournir de l'énergie à la batterie, en utilisant cette connexion.
Le programme de commande 226 est constitué d 'une partie de commande qui comprend des instructions qui, lorsqu'elles sont exécutées par le contrôleur 221, mettent en oeuvre les diverses fonctions de commande décrites ci- dessus. Le programme de commande 226 comprend en outre, une partie de clavier virtuel comprenant des instructions qui, lorsqu'elles sont exécutées par le contrôleur 221, mettent en oeuvre la conversion de l'emplacement du son détecté par les transducteurs 212 du clavier virtuel 210 en un type de données spécifique, par exemple, des données représentant des touches correspondantes du clavier virtuel 210.
Dans certains modes de réalisation, les instructions mettent en oeuvre en outre, la détermination de l'emplacement d'un son créé en tapant sur ou en entraînant un doigt sur la surface sonore 202. Par exemple, la détermination peut utiliser des données provenant de la matrice de transducteurs acoustiques 212 pour trianguler le point d'origine du son créé en utilisant un algorithme d'heure d'arrivée différentielle. Dans certains modes de réalisation, les instructions utilisent l'emplacement déterminé par le processeur de signal 214. Les instructions mettent en oeuvre en outre, le mappage de l'emplacement déterminé du son vers une entrée de données. Par exemple, le mappage peut comparer l'emplacement déterminé à une carte prédéfinie de données associées à des emplacements spécifiques sur la surface sonore 202. En se basant sur la comparaison, une entrée particulière est sélectionnée à partir des données associées (par exemple, la carte prédéfinie peut correspondre aux touches d'un clavier QWERTY représenté sous la forme d'une série de boîtes réparties sur la surface sonore). L'entrée ou "touche" sélectionnée est l'entrée de données produite par l'exécution des instructions.
La figure 7 est un organigramme d'un procédé 300 d'entrée de données pour un dispositif électronique portatif utilisant un clavier virtuel acoustique selon un mode de réalisation de la présente invention. Le procédé 300 d'entrée de données comprend la création 310 d'un son ou vibration représentant une entrée ou une entrée de données vers le dispositif électronique. Le terme "son" est ici utilisé pour signifier un ou les deux parmi un bruit ou une vibration sauf indication contraire. Dans certains modes de réalisation, le son est créé 310 en utilisant une surface sonore telle que, mais sans y être limité, une table, un bureau ou un comptoir. Dans certains modes de réalisation de l'utilisation d'une surface sonore, le dispositif électronique portatif est en contact avec ou supporté par la surface sonore. Par exemple, la création 310 du son peut comprendre la frappe sur la surface sonore. Dans un autre exemple, la création 310 peut comprendre l'entraînement d'un doigt sur la surface sonore. La surface sonore vibre et/ou émet un bruit lorsqu'elle est frappée ou sinon touchée. Le son émane d'un point d'origine de l'emplacement de la frappe ou contact, tel qu'une onde par exemple, et est détecté par des moyens pour détecter le son du dispositif électronique. Dans certains modes de réalisation, le son se propage dans, à travers ou le long de la surface sonore, du point d'origine jusqu'au dispositif électronique portatif. Dans d'autres modes de réalisation, le son est transmis par l'air adjacent à la surface sonore.
Le procédé 300 d'entrée de données comprend en outre, la détermination 320 de l'emplacement ou du point d'origine du son créé 310. Dans certains modes de réalisation, le point d'origine est déterminé 320 en utilisant le moyen pour détecter le son, par exemple une matrice de transducteurs du clavier virtuel. En particulier, la matrice de transducteurs est utilisée pour trianguler le point d'origine du son créé 310. Par exemple, un algorithme d'heure d'arrivée différentielle peut être utilisé pour trianguler et déterminer 320 l'emplacement en se basant sur les emplacements connus des transducteurs dans la matrice.
Le procédé 300 d'entrée de données comprend en outre, le mappage 330 du point d'origine déterminé 320 vers une entrée de données. En particulier, le mappage 330 comprend la comparaison du point ou origine déterminé 320 à une carte prédéfinie de données associées à des emplacements spécifiques. En se basant sur la comparaison, une entrée particulière est sélectionnée à partir des données associées. Par exemple, la carte prédéfinie peut correspondre aux touches d'un clavier QWERTY représenté sous la forme d'une série de boîtes, comme si elles étaient réparties sur la surface sonore. Dans cet exemple, les données sont les valeurs de touches associées aux touches du clavier QWERTY.
Le mappage 330 compare le point d'origine déterminé 320 du son à la série de boites réparties par hypothèse sur la surface sonore et choisit une touche correspondant à l'emplacement déterminé 320. La touche sélectionnée est constituée de l'entrée de données produite par le procédé 300.
Dans certains modes de réalisation, le procédé 300 comprend en outre, l'utilisation d'un gabarit pour faciliter la création 310 du son en un point d'origine correspondant à un emplacement spécifique dans la carte d'entrée de données prédéfinie. Dans ces modes de réalisation, le procédé 300 comprend en outre, de façon optionnelle, le positionnement du gabarit. Des détails supplémentaires concernant le gabarit, son utilisation et son positionnement, sont décrits ci-dessus en ce qui concerne l'appareil clavier virtuel 100.
Dans certains modes de réalisation, le programme de commande 226 du dispositif électronique 200 met en oeuvre des parties du procédé 300. En particulier, dans certains modes de réalisation, la partie de clavier virtuel du programme de commande 226 met en oeuvre la détermination 320 de l'emplacement du son et le mappage 330 de l'emplacement du son vers une entrée de données.
Dans certains modes de réalisation, la matrice de transducteurs 110, 212 peut être utilisée pour d'autres buts, en plus de ceux décrits ci-dessus en ce qui concerne le clavier virtuel 100, 210. Par exemple, la matrice de transducteurs 212 peut être utilisée en tant que moyen pour réception directive ou sélective du son pour le dispositif électronique 200. La réception directive ou sélective du son comporte, mais sans y être limité, celle qui fournit une annulation de bruit et un filtrage spatial. Ainsi, la matrice de transducteurs 212 du clavier virtuel 210 peut doter le dispositif électronique 200 d'un moyen d'entrée ainsi que d'un moyen d'annulation de bruit de l'enregistrement du son, par exemple. Dans un autre exemple, le dispositif électronique 200 tel que, mais sans y être limité, un appareil photographique numérique 200, peut autoriser à la fois un moyen d'entrée virtuel et un moyen de filtrage spatial et d'enregistrement des sons associés à une image enregistrée en vertu de la matrice de transducteurs incorporée 212.
Ainsi, ont été décrits des modes de réalisation d'un appareil clavier virtuel et d'un procédé d'utilisation d'un clavier virtuel avec un dispositif électronique. En outre, des modes de réalisation d'un dispositif électronique avec un clavier virtuel ont été décrits. On comprendra que les modes de réalisation décrits ci-dessus sont simplement explicatifs de certains parmi le grand nombre de modes de réalisation spécifiques représentant les principes de la présente invention. Les hommes de l'art pourront manifestement facilement imaginer un grand nombre d'autres agencements sans s'écarter de la portée de la présente invention telle que définie par les revendications suivantes.
Claims (10)
1. Appareil d'entrée virtuel (100, 210) comprenant.
une matrice de transducteurs de vibrations 5 (110, 212) ; et un processeur de signal (120, 214) connecté à une sortie de la matrice de transducteurs (110, 212), une sortie du processeur de signal (120, 214) fournissant des données correspondant à un emplacement (144, 204) déterminé (320) d'une vibration (142, 206) détecté par la matrice de transducteurs (110, 212), dans lequel la matrice de transducteurs (110, 212) est en contact avec une surface sonore (140, 202), la surface sonore (140, 202) transmettant la vibration (142, 206) détectée par la matrice de transducteurs (110, 212).
2. Appareil d'entrée virtuel (100, 210) selon la revendication 1, comprenant en outre.
un gabarit (130, 216) fournissant un guide pour les emplacements sur la surface sonore (140, 202) par rapport à la matrice de transducteurs (110, 212), les emplacements représentant des données virtuelles, dans lequel l'emplacement (144, 204) de la vibration (142, 206) correspond à l'emplacement des données virtuelles du gabarit (130, 216), les données virtuelles correspondant aux données provenant de la sortie du processeur de signal (120, 214).
3. Appareil d'entrée virtuel (100, 210) selon la revendication 2, dans lequel le gabarit (130, 216) est un gabarit de clavier, les touches du gabarit de clavier représentant les données virtuelles et dans lequel le gabarit de clavier (130, 216) comprend un parmi une feuille manipulable de matériau marquée avec des emplacements de touches imitant un clavier et une projection optique (132) sur la surface sonore (140, 202) provenant d'un dispositif électronique (150, 200) comprenant l'appareil (100, 210), la projection (132) fournissant des emplacements de touches imitant un clavier.
4. Appareil d'entrée virtuel (100, 210) selon l'une quelconque des revendications 2 et 3, dans lequel le gabarit (130, 216) est positionné par rapport à la matrice de transducteurs (110, 212) en utilisant un ou les deux parmi un positionnement interactif et un positionnement automatique.
5. Appareil d'entrée virtuel (100, 210) selon l'une quelconque des revendications 1 à 4, dans lequel la matrice (110) de transducteurs (112, 212) comprend deux transducteurs ou plus (112, 212) séparés les uns des autres, les transducteurs séparés (112, 212) étant agencés de manière à former un motif de matrice géométrique plane, un transducteur (112, 212) étant situé à un sommet différent du motif de matrice géométrique plane.
6. Appareil d'entrée virtuel (100, 210) selon l'une quelconque des revendications 1 à 5, dans lequel le processeur de signal (120, 214) détermine (320) l'emplacement (144, 204) de la vibration (142, 206) détecté par la matrice de transducteurs (110, 212) en utilisant une méthodologie de triangulation (330).
7. Appareil d'entrée virtuel (100, 210) selon l'une quelconque des revendications 1 à 6, dans lequel le processeur de signal (120, 214) comprend une fonction de mappage, la fonction de mappage mappant (330) l'emplacement (144, 204) déterminé (320) vers une configuration de touches enregistrée, la configuration de touches étant constituée de touches prédéterminées d'un clavier, l'emplacement déterminé (144, 204) de la vibration (142, 206) correspondant à une touche du clavier.
8. Appareil d'entrée virtuel (100, 210) selon l'une quelconque des revendications 1 à 7, dans lequel le processeur de signal (120, 214) est un processeur (221) d'un dispositif électronique (150, 200) qui comprend l'appareil d'entrée virtuel (100, 210), le processeur (221) jouant le rôle de processeur de signal (120, 214) de l'appareil d'entrée virtuel (110, 210) lors de la réception d'une entrée provenant de la matrice de transducteurs (110, 212).
9. Appareil d'entrée virtuel (100, 210) selon l'une quelconque des revendications 1 à 8, dans lequel la matrice de transducteurs (110, 212) est incorporée dans un dispositif électronique (150, 200) comprenant l'appareil d'entrée virtuel (100, 210), la matrice de transducteurs (110, 212) étant adjacente à une surface extérieure du dispositif électronique (150, 200) pour contact direct avec la surface sonore (140, 202).
10. Appareil d'entrée virtuel (100, 210) selon l'une quelconque des revendications 1 à 9, incorporé dans un dispositif électronique (150, 200) , le dispositif électronique (150, 200) comprenant en outre, des circuits électroniques de dispositif (220) assurant la fonctionnalité et la commande du dispositif électronique (150, 200), dans lequel la matrice de transducteurs (110, 212) en contact avec la surface sonore (140, 202) détecte l'emplacement (144, 204) d'un son (142, 206) produit (310) par un utilisateur du dispositif électronique (150, 200) qui entre des données, la matrice de transducteurs (110, 212) fournissant (320) un signal aux circuits électroniques de dispositif (220) traité (330) en données comprises par le dispositif électronique (150, 200) correspondant aux données entrées (310) par l'utilisateur.
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US11/066,748 US20060192763A1 (en) | 2005-02-25 | 2005-02-25 | Sound-based virtual keyboard, device and method |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| FR2882600A1 true FR2882600A1 (fr) | 2006-09-01 |
Family
ID=36914447
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| FR0601589A Withdrawn FR2882600A1 (fr) | 2005-02-25 | 2006-02-23 | Clavier virtuel acoustique, dispositif et procede. |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US20060192763A1 (fr) |
| JP (1) | JP2006323823A (fr) |
| FR (1) | FR2882600A1 (fr) |
Families Citing this family (52)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001306254A (ja) * | 2000-02-17 | 2001-11-02 | Seiko Epson Corp | 打音検出による入力機能 |
| US9110590B2 (en) | 2007-09-19 | 2015-08-18 | Typesoft Technologies, Inc. | Dynamically located onscreen keyboard |
| US9454270B2 (en) | 2008-09-19 | 2016-09-27 | Apple Inc. | Systems and methods for detecting a press on a touch-sensitive surface |
| CA2698737C (fr) * | 2007-09-19 | 2017-03-28 | Cleankeys Inc. | Surface tactile et sensible a un tapotement nettoyable |
| US10203873B2 (en) | 2007-09-19 | 2019-02-12 | Apple Inc. | Systems and methods for adaptively presenting a keyboard on a touch-sensitive display |
| US20120075193A1 (en) * | 2007-09-19 | 2012-03-29 | Cleankeys Inc. | Multiplexed numeric keypad and touchpad |
| US10126942B2 (en) * | 2007-09-19 | 2018-11-13 | Apple Inc. | Systems and methods for detecting a press on a touch-sensitive surface |
| US9489086B1 (en) | 2013-04-29 | 2016-11-08 | Apple Inc. | Finger hover detection for improved typing |
| JP4926091B2 (ja) * | 2008-02-19 | 2012-05-09 | 株式会社日立製作所 | 音響ポインティングデバイス、音源位置のポインティング方法及びコンピュータシステム |
| JP5068711B2 (ja) * | 2008-08-08 | 2012-11-07 | 株式会社エヌ・ティ・ティ・ドコモ | 物体形状認識システム及び物体形状認識方法 |
| US8503932B2 (en) * | 2008-11-14 | 2013-08-06 | Sony Mobile Comminications AB | Portable communication device and remote motion input device |
| US8102273B2 (en) * | 2008-12-14 | 2012-01-24 | International Business Machines Corporation | Guidance system by detecting tapped location |
| TWI470478B (zh) * | 2008-12-26 | 2015-01-21 | Inventec Appliances Corp | 電子裝置之虛擬鍵盤結構及其資料輸入方法 |
| KR101654008B1 (ko) * | 2009-10-09 | 2016-09-09 | 삼성전자주식회사 | 음향신호 처리를 이용한 모바일 기기 및 상기 모바일 기기에서 수행되는 음향 신호 처리 방법 |
| EP2333647A1 (fr) * | 2009-10-27 | 2011-06-15 | STMicroelectronics Srl | Procédé pour la détermination de la position d'un contact sur un panneau tactile et système correspondant |
| BR112012010049A2 (pt) * | 2009-10-29 | 2016-05-24 | New Transducers Ltd | dispositivo sensível ao toque |
| KR101678549B1 (ko) * | 2010-02-02 | 2016-11-23 | 삼성전자주식회사 | 표면 음향 신호를 이용한 유저 인터페이스 제공 장치 및 방법, 유저 인터페이스를 구비한 디바이스 |
| JP5531751B2 (ja) * | 2010-04-19 | 2014-06-25 | 株式会社ニコン | 表示装置 |
| US9459733B2 (en) * | 2010-08-27 | 2016-10-04 | Inputdynamics Limited | Signal processing systems |
| US9226069B2 (en) | 2010-10-29 | 2015-12-29 | Qualcomm Incorporated | Transitioning multiple microphones from a first mode to a second mode |
| EP2665497A2 (fr) | 2011-01-20 | 2013-11-27 | Cleankeys Inc. | Systèmes et procédés de surveillance de nettoyage de surface |
| USRE48963E1 (en) | 2012-03-02 | 2022-03-08 | Microsoft Technology Licensing, Llc | Connection device for computing devices |
| US8935774B2 (en) | 2012-03-02 | 2015-01-13 | Microsoft Corporation | Accessory device authentication |
| US9064654B2 (en) | 2012-03-02 | 2015-06-23 | Microsoft Technology Licensing, Llc | Method of manufacturing an input device |
| US9426905B2 (en) | 2012-03-02 | 2016-08-23 | Microsoft Technology Licensing, Llc | Connection device for computing devices |
| US9134807B2 (en) | 2012-03-02 | 2015-09-15 | Microsoft Technology Licensing, Llc | Pressure sensitive key normalization |
| US9870066B2 (en) | 2012-03-02 | 2018-01-16 | Microsoft Technology Licensing, Llc | Method of manufacturing an input device |
| US9075566B2 (en) | 2012-03-02 | 2015-07-07 | Microsoft Technoogy Licensing, LLC | Flexible hinge spine |
| US9360893B2 (en) | 2012-03-02 | 2016-06-07 | Microsoft Technology Licensing, Llc | Input device writing surface |
| US9104260B2 (en) | 2012-04-10 | 2015-08-11 | Typesoft Technologies, Inc. | Systems and methods for detecting a press on a touch-sensitive surface |
| US20130300590A1 (en) * | 2012-05-14 | 2013-11-14 | Paul Henry Dietz | Audio Feedback |
| US10031556B2 (en) | 2012-06-08 | 2018-07-24 | Microsoft Technology Licensing, Llc | User experience adaptation |
| US9019615B2 (en) | 2012-06-12 | 2015-04-28 | Microsoft Technology Licensing, Llc | Wide field-of-view virtual image projector |
| US8982104B1 (en) * | 2012-08-10 | 2015-03-17 | Google Inc. | Touch typing emulator for a flat surface |
| US8952892B2 (en) | 2012-11-01 | 2015-02-10 | Microsoft Corporation | Input location correction tables for input panels |
| US9281727B1 (en) * | 2012-11-01 | 2016-03-08 | Amazon Technologies, Inc. | User device-based control of system functionality |
| US9134856B2 (en) * | 2013-01-08 | 2015-09-15 | Sony Corporation | Apparatus and method for controlling a user interface of a device based on vibratory signals |
| CN104049933B (zh) * | 2013-03-11 | 2019-07-26 | 联想(北京)有限公司 | 一种信息处理的方法及电子设备 |
| US9304549B2 (en) | 2013-03-28 | 2016-04-05 | Microsoft Technology Licensing, Llc | Hinge mechanism for rotatable component attachment |
| KR101411650B1 (ko) * | 2013-06-21 | 2014-06-24 | 김남규 | 키 입력 장치, 키 입력 인식 장치 및 이들을 이용한 키 입력 시스템 |
| CN103440042B (zh) * | 2013-08-23 | 2016-05-11 | 天津大学 | 一种基于声定位技术的虚拟键盘 |
| US10289302B1 (en) | 2013-09-09 | 2019-05-14 | Apple Inc. | Virtual keyboard animation |
| US9355418B2 (en) | 2013-12-19 | 2016-05-31 | Twin Harbor Labs, LLC | Alerting servers using vibrational signals |
| JP6281745B2 (ja) * | 2014-03-06 | 2018-02-21 | カシオ計算機株式会社 | 摺動操作検出装置、電子機器及びプログラム |
| US10591580B2 (en) | 2014-09-23 | 2020-03-17 | Hewlett-Packard Development Company, L.P. | Determining location using time difference of arrival |
| TWI573043B (zh) * | 2014-09-25 | 2017-03-01 | The virtual two - dimensional positioning module of the input device | |
| US10007304B2 (en) * | 2015-08-20 | 2018-06-26 | Mediatek Inc. | Portable device and related vibration detecting method |
| US10078399B2 (en) | 2015-09-21 | 2018-09-18 | International Business Machines Corporation | Computer device implemented audio triangulation |
| US10573291B2 (en) | 2016-12-09 | 2020-02-25 | The Research Foundation For The State University Of New York | Acoustic metamaterial |
| GB201708100D0 (en) | 2017-05-19 | 2017-07-05 | Sintef | Input device |
| FI20195169A1 (en) | 2019-03-07 | 2020-09-08 | Aito Bv | Apparatus and method for detecting contact |
| US11392290B2 (en) | 2020-06-26 | 2022-07-19 | Intel Corporation | Touch control surfaces for electronic user devices and related methods |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6614422B1 (en) * | 1999-11-04 | 2003-09-02 | Canesta, Inc. | Method and apparatus for entering data using a virtual input device |
| AU6262501A (en) * | 2000-05-29 | 2001-12-11 | Vkb Inc. | Virtual data entry device and method for input of alphanumeric and other data |
| US6650318B1 (en) * | 2000-10-13 | 2003-11-18 | Vkb Inc. | Data input device |
-
2005
- 2005-02-25 US US11/066,748 patent/US20060192763A1/en not_active Abandoned
-
2006
- 2006-02-23 FR FR0601589A patent/FR2882600A1/fr not_active Withdrawn
- 2006-02-24 JP JP2006048047A patent/JP2006323823A/ja not_active Withdrawn
Also Published As
| Publication number | Publication date |
|---|---|
| US20060192763A1 (en) | 2006-08-31 |
| JP2006323823A (ja) | 2006-11-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| FR2882600A1 (fr) | Clavier virtuel acoustique, dispositif et procede. | |
| US8354997B2 (en) | Touchless user interface for a mobile device | |
| US11788830B2 (en) | Self-mixing interferometry sensors used to sense vibration of a structural or housing component defining an exterior surface of a device | |
| US10755695B2 (en) | Methods in electronic devices with voice-synthesis and acoustic watermark capabilities | |
| JP5520812B2 (ja) | 音と位置の測定 | |
| US8199117B2 (en) | Archive for physical and digital objects | |
| BE1012301A3 (fr) | Dispositif de jeu. | |
| CN105745606B (zh) | 基于图像识别触摸敏感表面的目标触摸区域 | |
| US9632592B1 (en) | Gesture recognition from depth and distortion analysis | |
| JP2016148903A (ja) | 付属機器、情報処理システム、情報処理装置、情報処理プログラム、操作判別方法、および、処理実行方法 | |
| US20240029752A1 (en) | Directional Voice Sensing Using Coherent Optical Detection | |
| TWI582676B (zh) | 物件指示符顯示技術 | |
| CN113192527A (zh) | 用于消除回声的方法、装置、电子设备和存储介质 | |
| TWI674529B (zh) | 混合實境組件及產生混合實境之方法 | |
| CN108121486A (zh) | 一种图片显示方法及移动终端 | |
| CN108733535A (zh) | 电子设备防尘网的清洁方法及装置、电子设备 | |
| CN111263009B (zh) | 电话录音的质检方法、装置、设备及介质 | |
| Pätzold et al. | Audio-based roughness sensing and tactile feedback for haptic perception in telepresence | |
| US9261974B2 (en) | Apparatus and method for processing sensory effect of image data | |
| US10281997B2 (en) | Identification of an object on a touch-sensitive surface | |
| EP2926232B1 (fr) | Système et procédé de communication reproduisant une interactivité de type physique | |
| CN106782119A (zh) | 显示模组和电子设备 | |
| FR2878758A1 (fr) | Ensemble de jeu electronique avec objets physiques identifiables ou localisables par le jeu | |
| CN107111354A (zh) | 非故意触摸拒绝 | |
| US20220263938A1 (en) | Terminal set and method for controlling same |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| ST | Notification of lapse |
Effective date: 20071030 |