FR2778248A1

FR2778248A1 - Procede et systeme de diffusion d'images de synthese d'un univers virtuel en relation avec le lieu ou evolue la personne recevant les images de synthese

Info

Publication number: FR2778248A1
Application number: FR9805768A
Authority: FR
Inventors: Pierre Emmanuel Bathie
Original assignee: Individual
Current assignee: Individual
Priority date: 1998-04-30
Filing date: 1998-04-30
Publication date: 1999-11-05

Abstract

Procédé et système de diffusion d'images de synthèse d'un univers virtuel en relation avec le lieu où évolue la personne recevant les images de synthèse. La présente invention concerne un procédé, un système et un appareil de diffusion d'images de synthèse à l'usage d'au moins une personne située dans un lieu déterminé. Ledit procédé comprend les étapes de : - projeter sur un écran (dont l'emplacement 2b est visible sur la figure 3), réel ou virtuel, d'un appareil de projection (2) transporté par ladite personne (1), des images de synthèse d'un univers virtuel dans lequel ladite personne est immergée; - localiser (21) ledit appareil de projection (2) par rapport au lieu (3) où il est situé; - calculer les images de synthèse destinées à être projetées (25) sur ledit écran, à partir des coordonnées spatiales de l'appareil de projection (2) et des données contenues dans une base de données décrivant ledit univers virtuel en fonction de l'un et/ ou l'autre des éléments suivants : la topographie présente, passée ou future dudit lieu, les personnes ou les objets qui s'y trouvent, qui s'y sont trouvés ou qui s'y trouveront, les événements qui s'y déroulent, qui s'y sont déroulés ou qui s'y dérouleront. L'utilisateur peut évoluer au même moment au sein du monde réel et au sein d'un univers virtuel lié, en visionnant tour à tour l'un ou l'autre des environnements.

Description

Procédé et système de diffusion d'images de synthèse d'un univers virtuel

en relation avec le lieu o évolue la personne recevant

les images de synthèse.

La présente invention concerne un procédé, un système et un appareil de diffusion d'images de synthèse d'un univers virtuel en relation avec le lieu o évolue la

personne recevant les images de synthèse.

Il est connu des procédés, des systèmes et des appareils permettant - de guider l'utilisateur, lors de la visite d'un site, au moyen d'un écran sur lequel s'affichent des indications topographiques et des indications de direction à suivre et, - de fournir à l'utilisateur des informations audio sur les éléments du site qui l'intéressent. Les sens de l'utilisateur sont constamment sollicités par les objets et les sons du monde réel dans lequel il évolue mais il reçoit simultanément, via l'écran de visualisation de l'équipement qu'il transporte, des indications graphiques, sur le trajet

à suivre pour aller d'un centre d'intérêt à un autre.

1 peut également écouter, via un émetteur audio situé dans l'équipement des

informations relatives aux lieux qu'il visite.

La présente invention concerne un tout autre problème. Elle a pour objet de permettre au visiteur de s'immerger dans un univers virtuel en rapport avec le lieu o il se situe. Par "s'immerger", au sens de la présente invention, on entend que l'utilisateur pénètre dans un univers virtuel sans pour autant être coupé du monde réel o il conserve des repères. L'utilisateur s'immerge dans l'univers virtuel à la manière dont un nageur s'immerge dans l'univers aquatique en quittant le bord du rivage. En effet, l'objectif de la présente invention est de permettre à l'utilisateur d'évoluer au même moment au sein du monde réel et au sein d'un univers virtuel, en visionnant tour à tour l'un ou l'autre des environnements. Ces univers virtuels peuvent être décrits en se référant: - à la topographie des lieux, leur évolution au cours du temps, au cours des saisons (par exemple, cas des lieux en plein air, recul d'une falaise), - aux objets qui s'y sont trouvés (par exemple, cas des mobiliers des palais), - aux objets qui s'y trouvent (par exemple, cas des musées), - aux objets qui s'y trouveront (par exemple, cas des projets architecturaux, des projets de décoration), - aux personnes qui s'y sont trouvées (par exemple, cas de la vie à Versailles sous Louis XIV), - aux personnes qui s'y trouvent (par exemple, cas des épreuves sportives), aux personnes qui s'y trouveront (par exemple, cas des projets de chorégraphie) - aux événements qui s'y sont déroulés (par exemple, cas des fresques historiques, prise de la Bastille) - aux événements qui s'y déroulent (par exemple, cas des colloques médicaux et des conférences sur les opérations à coeur ouvert), - aux événements qui s'y dérouleront ( par exemple, résultats d'une inondation) Selon l'invention, pour atteindre cet objectif, le procédé de diffusion d'images de synthèse à l'usage d'au moins une personne située dans un lieu déterminé comprend les étapes: - de projeter sur un écran, réel ou virtuel, d'un appareil de projection transporté par la personne, des images de synthèse d'un univers virtuel dans lequel la personne est immergée, - de localiser ledit appareil de projection par rapport au lieu o il est situé, - de calculer les images de synthèse destinées à être projetées sur l'écran, Les images de synthèse sont calculées à partir des coordonnées spatiales de l'appareil de projection et des données contenues dans une base de données décrivant l'univers virtuel en fonction de l'un et/ou l'autre des éléments suivants: la topographie présente, passée ou future dudit lieu, les personnes ou les objets qui s'y trouvent, qui s'y sont trouvés ou qui s'y trouveront, les événements qui s'y déroulent, qui s'y sont

déroulés ou qui s'y dérouleront.

Ainsi grâce à ce procédé, l'utilisateur peut évoluer au même moment au sein du monde réel et au sein d'un univers virtuel lié, en visionnant tour à tour l'un ou l'autre

des environnements.

De préférence, selon une autre caractéristique de l'invention, pour localiser la personne et l'appareil de projection transporté par la personne, on utilise un positionnement par satellite notamment du type GPS (Système de positionnement global) ou une version différentielle de celui-ci notamment du type DGPS (Système de

positionnement global différentiel).

Egalement, selon une autre caractéristique de l'invention, pour localiser la personne et l'appareil de projection transporté par la personne, on balise ledit lieu au moyen de repères actifs ou passifs et on détecte les repères au moyen de capteurs

physiques embarqués dans l'appareil de projection.

L'invention concerne également un système de diffusion d'images de synthèse à l'usage d'au moins une personne située dans un lieu déterminé et transportant un

appareil de projection.

Ledit système comprenant: - des moyens pour projeter sur un écran réel ou virtuel dudit appareil de projection, des images de synthèse d'un univers virtuel dans lequel ladite personne est immergée, - des moyens pour localiser ledit appareil de projection transporté par ladite personne par rapport au lieu o il est situé, - une base de données contenant des données décrivant ledit univers virtuel en fonction de l'un et/ou l'autre des éléments suivants: la topographie présente, passée ou future dudit lieu, les personnes ou les objets qui s'y trouvent, qui s'y sont trouvés ou qui s'y trouveront, les événements qui s'y déroulent, qui s'y sont déroulés ou qui s'y dérouleront, - des moyens pour calculer des images de synthèse destinées à être projetées sur l'écran virtuel, à partir des coordonnées spatiales de l'appareil de projection

et des données contenues dans la base de données décrivant l'univers virtuel.

Grâce à ce système, l'utilisateur peut évoluer au même moment au sein du monde réel et au sein d'un univers virtuel lié, en visionnant tour à tour l'un ou l'autre

des environnements.

De préférence, selon une autre caractéristique du système de l'invention, les moyens pour localiser la personne et l'appareil de projection transporté par la personne comprennent un dispositif de positionnement par satellite notamment du type GPS ou

une version différentielle de celui-ci notamment du type DGPS.

Egalement, selon une autre caractéristique du système de l'invention, les moyens pour localiser la personne et l'appareil de projection transporté par la personne, comprennent: - des repères actifs ou passifs destinés à baliser ledit lieux,

- des moyens de détection pour détecter les repères.

Les moyens de détection sont embarqués dans l'appareil de projection.

L'invention concerne également un appareil de projection pour diffuser des images de synthèse à l'usage d'au moins une personne située dans un lieu déterminé et transportant l'appareil de projection. L'appareil de projection comprend: - des moyens pour projeter sur un écran réel ou virtuel dudit appareil de projection, des images de synthèse d'un univers virtuel dans lequel ladite personne est immergée; - des moyens pour localiser ledit appareil de projection transporté par ladite personne par rapport au lieu o il est situé; - une base de données contenant des données décrivant ledit univers virtuel en fonction de l'un et/ou l'autre des éléments suivants: la topographie présente, passée ou future dudit lieu, les personnes ou les objets qui s'y trouvent, qui s'y sont trouvés ou qui s'y trouveront, les événements qui s'y déroulent, qui s'y sont déroulés ou qui s'y dérouleront; - des moyens pour calculer des images de synthèse destinées à être projetées sur l'écran virtuel, à partir des coordonnées spatiales de l'appareil de projection

Grâce à cet appareil de projection, l'utilisateur peut évoluer au même moment au sein du monde réel et au sein d'un univers virtuel lié, en visionnant tour à tour l'un

ou l'autre des environnements.

D'autres caractéristiques et avantages de l'invention apparaîtront à la lecture de

la description de variantes de réalisation de l'invention, données à titre d'exemple

indicatif et non limitatif, et de: - la figure 1 qui représente une vue en perspective d'une variante de réalisation du procédé et du système selon l'invention, dans le cas o les moyens de localisation sont du type GPS ou DGPS; - la figure 2 qui représente une vue, sous forme de bloc diagramme, d'une variante de réalisation des sous-ensembles composant l'appareil de projection; - la figure 3 qui représente une vue en perspective d'une variante de réalisation de l'appareil de projection; - la figure 4 qui représente une vue en perspective d'une variante de réalisation du procédé et du système selon l'invention, dans le cas o les moyens de

localisation mettent en oeuvre des balises.

On va maintenant décrire la figure 1 qui représente une vue en perspective

d'une variante de réalisation du système selon l'invention.

L'utilisateur 1 utilise l'appareil de projection 2 de façon continue pendant une

durée de quelques minutes à trois heures.

Il transporte l'appareil avec lui ( à la main, sur son dos, en bandoulière, autour du cou, etc.) pendant qu'il se déplace (à pied la plupart du temps) dans un lieu déterminé (identifié et borné), une pièce 3 d'un musée dans le cas représenté. Lorsqu'il

le souhaite, l'utilisateur pose la partie 2a de l'appareil de projection 2 devant ses yeux.

Cette partie 2a contient un écran virtuel, dont l'emplacement 2b est visible sur la figure 3. Il est rappelé ici qu'un écran virtuel est un écran d'ordinateur miniature (à tube cathodique ou bien à cristaux liquides), situé à quelques centimètres des yeux, que l'on observe à travers un système optique simple. Ce système optique est composé de lentilles et/ou de miroirs dont le rôle est d'éloigner le plan focal d'une part et d'agrandir l'image d'autre part. Cette technique, en soi connue, est couramment utilisée dans les casques virtuels. Ceux-ci, afin de restituer la stéréoscopie, utilisent un écran virtuel pour chaque oeil de l'utilisateur. Un exemple de tel casque est commercialisé sous la référence VFX1 par la société Forte (marques déposées). L'utilisateur regarde l'écran virtuel (dont l'emplacement 2b est visible sur la figure 3) de l'appareil de projection 2 et perçoit les images de synthèse d'un univers virtuel dont l'architecture dépend de la position et de l'orientation de l'appareil de projection. En position de visualisation, l'utilisateur trouve sous ses doigts quatre touches de fonction (voir figure 3) qui lui permettent d'obtenir les effets suivants: - touche 31, effet zoom avant, - touche 32, effet zoom arrière, - touche 33, effet ascension verticale,

- touche 34, effet descente verticale.

Ces touches sont programmnables: leurs effets sont définis et paramétrés au

sein du logiciel qui contrôle le calcul des images, ainsi qu'on le verra ci-après.

L'utilisateur a la possibilité d'adapter l'appareil à sa morphologie au moyen des mollettes de réglage suivantes: - molette 35, écart interpupillaire,

- molette 36, réglage de la netteté de l'image.

Lorsqu'il n'est plus utilisé, l'appareil de projection 2 est rangé dans l'une des alvéoles 10 ménagées à cet effet dans un meuble 4 situé à proximité de l'entrée du lieu de la visite. Un système de connexion 37 (visible sur la figure 3) permet de connecter chaque appareil de projection 2 au système d'alimentation électrique 5 contenu dans le meuble 4 et de recharger ses batteries 11. Dans l'exemple représenté sur les figures 1 et 4, les batteries 11 sont portées à la ceinture par l'utilisateur 1. Un câble électrique 12, débranchable, relie la batterie 11 à l'appareil de projection 2. Un interrupteur central permet de couper l'alimentation électrique 5 du meuble. Des voyants 38a et 38b (voir figure 3) présents sur chaque appareil de projection 2, indiquent si ceux-ci sont en état de fonctionnement et si leurs batteries sont chargées. Ces voyants 38a et 38b sont visibles de l'extérieur du meuble 4. Des prises (non visibles sur la figure 1) permettent de connecter chaque appareil de projection 2 à un microcalculateur 6 situé dans le meuble 4. Préalablement à l'ouverture de la période de mise à disposition des appareils de projection, le microcalculateur 6 déclenche l'initialisation de ceux-ci (chargement des applications, des bases de données, etc.). Les appareils de projection 2 sont extraits du meuble 4, au moment de la distribution aux utilisateurs au moyen

d'une poignée 39 (figure 3).

On va maintenant décrire le fonctionnement de l'appareil de projection en se

référant à la figure 2.

L'appareil de projection 2 comprend des moyens de localisation 20 du type GPS (Système de positionnement global) ou DGPS (Système de positionnement global différentiel) pour localiser, à partir de données fournies par un satellite 21 (figure 1), l'appareil de projection transporté par l'utilisateur (et par conséquent également l'utilisateur) par rapport au lieu o il se situe. De manière connue en soi, la balise fixe et l'antenne 14 permettent au système DGPS de déterminer avec précision la position de l'appareil de projection 2. Le fonctionnement en différentiel repose sur la comparaison des informations reçues, via l'antenne 14, par la balise fixe 13 (dont on connaît parfaitement la position) et des informations reçues par le module GPS en mouvement. En soustrayant (en procédant par "différence"), de la position calculée du module GPS en mouvement, les écarts entre la position calculée et la position connue de la balise fixe 13, on affine la précision finale. Le rayon d'incertitude passe de 100 m à 2 m. Le DGPS fournit à l'ordinateur central 22 les trois coordonnées (abscisse, ordonnée et côte) décrivant la position de l'appareil de projection 2. Les moyens de localisation 20 comprennent également un ensemble de capteurs physiques, inclinomètres, accéléromètres et/ou capteurs de champ magnétique terrestre, fournissant à l'unité de calcul centrale 22 les trois coordonnées angulaires décrivant l'orientation de l'appareil de projection 2. L'appareil de projection 2 comprend également une interface 23 comportant quatre touches de fonction, 31, 32, 33, 34 (voir figure 3), réparties en deux groupes de deux touches affectées les unes à la main droite

les autres à la main gauche.

L'appareil de projection 2 comprend également une zone mémoire 24 contenant la base de données décrivant l'univers virtuel notamment en fonction de l'un et/ou l'autre des éléments suivants: la topographie présente, passée ou future dudit lieu, les personnes ou les objets qui s'y trouvent, qui s'y sont trouvés ou qui s'y trouveront, les événements qui s'y déroulent, qui s'y sont déroulés ou qui s'y dérouleront. La zone mémoire 24 contient également les logiciels (les applications) nécessaires au

fonctionnement de l'appareil de projection 2.

L'appareil de projection 2 comprend également une unité centrale de calcul 22 pour calculer rapidement (plus de 20 fois par seconde) des images de synthèse dans un format 314 ou 16/9 avec une résolution horizontale d'au moins 800 pixels, en 64 K couleurs minimum. Cette unité centrale procède aux calculs à partir des informations de position fournies par les moyens de localisation 20 d'une part, des actions des utilisateurs sur les touches 31, 32, 33, 34 de l'interface 23 d'autre part, et des données de la base de données de la zone mémoire 24. Les images de synthèse calculées par l'unité centrale 22 sont destinées à être projetées, grâce aux moyens de visualisation 25, sur l'écran virtuel (dont l'emplacement 2b est visible sur la figure 3) de la partie 2a de l'appareil de projection 2. Cet écran virtuel (dont l'emplacement 2b est visible sur la figure 3) diffuse à destination des yeux de l'utilisateur 1 les images de synthèse sous l'apparence d'un écran 17' vu à 50 cm. Cette partie 2a de l'appareil de projection 2 se présente à l'utilisateur sous la forme d'un hublot (les deux yeux étant compris dans le même ensemble optique), ou bien sous la forme de l'extrémité d'une paire de jumelle binoculaire (une optique pour chaque oeil). L'appareil de projection 2 comprend également un module de gestion de l'énergie 26 et un module de communication avec l'extérieur 27 dont le rôle est de permettre: - un échange d'informations, par voie hertzienne, entre l'appareil de projection 2 et le microcalculateur 6 du meuble de stockage, pendant l'utilisation de l'appareil. Les informations ainsi échangées concernent l'utilisation de l'appareil, son emplacement, sa charge, etc. Le microcalculateur 6 agit alors en serveur central. i gère l'ensemble des viseurs utilisés au même moment (pour situer des groupes, par exemple, ou gérer des flux de visiteurs susceptibles de se gêner au cours d'une visite, ). Dans une autre variante de réalisation le microcalculateur 6 du meuble de stockage 4, pourrait agir en serveur centralisé allégeant les tâches de calcul des appareils de projection 2; la télécommande de l'appareil de projection par voie hertzienne par un tiers pendant l'utilisation de l'appareil afin, par exemple, de synchroniser les images de synthèse avec les explications d'un guideanimateur; - un échange d'informations par connexion entre l'appareil de projection 2 et le microcalculateur 6 du meuble de stockage 4 lorsque l'appareil est rangé dans

une alvéole 10 du meuble.

On va maintenant décrire la figue 4 qui représente une vue en perspective d'une

autre variante de réalisation.

On y reconnaît la plupart des éléments décrits en se référant à la figure 1. Ils

portent les mêmes références.

Dans le cas de cette variante de réalisation, les moyens pour localiser l'utilisateur et l'appareil de projection qu'elle transporte comprennent: - des repères actifs 41, notamment des émetteurs infrarouges ou à ultra-sons destinés à baliser le lieu 3; - des moyens de détection notamment des détecteurs infrarouges ou à ultra-sons 20, connus en soi, pour détecter les repères 41. Les moyens de

détection 20 sont embarqués dans l'appareil de projection 2.

Les logiciels utilisés pour calculer les images de synthèse des univers virtuels sont en soi connus. Ils mettent en oeuvre le procédé dit des "faces polygonales texturées". Selon ce procédé, l'univers virtuel est intégralement décrit par une série de polygones, délimitant les divers volumes de l'univers. A chacun de ces polygones, on attribue un fichier graphique représentant la surface de la face du volume correspondante. Ce procédé est notamment utilisé dans les logiciels de jeux tels que Wolfenstein 3D de la société Apogée (marques déposées) ou Doom et Quake de la

société ID Software (marques déposées).

Claims

Revendications

1. Procédé de diffusion d'images de synthèse à l'usage d'au moins une personne (1) située dans un lieu déterminé (3), ledit procédé comprenant les étapes: - projeter sur un écran (dont l'emplacement 2b est visible sur la figure 3), réel ou virtuel, d'un appareil de projection (2) transporté par ladite personne (1), des images de synthèse d'un univers virtuel dans lequel ladite personne est immergée; - localiser (13, 14, 20, 21, 41) ledit appareil de projection (2) par rapport au lieu (3) o il est situé; - calculer (22) les images de synthèse destinées à être projetées sur ledit écran (dont l'emplacement 2b est visible sur la figure 3), à partir des coordonnées spatiales de l'appareil de projection (2) et des données contenues dans une base de données (24) décrivant ledit univers virtuel en fonction de l'un et/ou l'autre des éléments suivants: la topographie présente, passée ou future dudit lieu, les personnes ou les objets qui s'y trouvent, qui s'y sont trouvés ou qui s'y trouveront, les événements qui s'y déroulent, qui s'y sont déroulés ou qui s'y dérouleront (de sorte que l'utilisateur peut évoluer au même moment au sein du monde réel et au sein d'un univers virtuel lié, en visionnant tour à tour l'un ou l'autre des environnements).

2. Procédé selon la revendication 1, caractérisé en ce que pour localiser (20) l'appareil de projection (2) transporté par la personne (1), on utilise un positionnement par satellite (21) notamment du type GPS ou une version différentielle de celui-ci

notamment du type DGPS.

3. Procédé selon la revendication 1, caractérisé en ce que, pour localiser l'appareil de projection transporté par la personne, - on balise ledit lieu au moyen de repères (41) actifs ou passifs, - on détecte les repères (41) au moyen de capteurs physiques embarqués (20)

dans l'appareil de projection (2).

4. Système de diffusion d'images de synthèse à l'usage d'au moins une personne (1) située dans un lieu déterminé (3) et transportant un appareil de projection (2), ledit système comprenant: - des moyens pour projeter sur un écran (dont l'emplacement 2b est visible sur la figure 3) réel ou virtuel dudit appareil de projection (2), des images de synthèse d'un univers virtuel dans lequel ladite personne (1) est immergée; - des moyens (13, 14, 20, 21, 41) pour localiser ledit appareil de projection transporté par ladite personne (1) par rapport au lieu (3) o il est situé; - une base de données (24) contenant des données décrivant ledit univers virtuel en fonction de l'un et/ou l'autre des éléments suivants: la topographie présente, passée ou future dudit lieu, les personnes ou les objets qui s'y trouvent, qui s'y sont trouvés ou qui s'y trouveront, les événements qui s'y déroulent, qui s'y sont déroulés ou qui s'y dérouleront; - des moyens pour calculer (22) des images de synthèse destinées à être projetées sur l'écran réel ou virtuel (dont l'emplacement 2b est visible sur la figure 3), à partir des coordonnées spatiales de l'appareil de projection (2) et des données contenues dans la base de données (24) décrivant l'univers virtuel (de sorte que l'utilisateur peut évoluer au même moment au sein du monde réel et au sein d'un univers virtuel lié, en visionnant tour à tour l'un ou l'autre des environnements).

5. Système selon la revendication 4, caractérisé en ce que les moyens pour localiser l'appareil de projection transporté par la personne comprennent un dispositif de positionnement par satellite (21) notamment du type GPS ou une version

différentielle de celui-ci notamment du type DGPS.

6. Système selon la revendication 4, caractérisé en ce que les moyens pour localiser l'appareil de projection transporté par la personne, comprennent: - des repères (41) actifs ou passifs destinés à baliser ledit lieu (3), - des moyens de détection 20 pour détecter les repères (41), lesdits moyens de

détection (20) étant embarqués dans l'appareil de projection (2).

7. Appareil de projection (2) pour diffuser des images de synthèse à l'usage d'au moins une personne (1) située dans un lieu déterminé (3) et transportant le dit appareil de projection, ledit appareil comprenant: des moyens pour projeter sur un écran (dont l'emplacement 2b est visible sur la figure 3) réel ou virtuel dudit appareil de projection (2), des images de synthèse d'un univers virtuel dans lequel ladite personne (1) est immergée; - des moyens (20) pour localiser ledit appareil de projection (2) transporté par ladite personne (1), par rapport au lieu (3) o il est situé; - une base de données (24) contenant des données décrivant ledit univers virtuel en fonction de l'un et/ou l'autre des éléments suivants: la topographie présente, passée ou future dudit lieu, les personnes ou les objets qui s'y trouvent, qui s'y sont trouvés ou qui s'y trouveront, les événements qui s'y déroulent, qui s'y sont déroulés ou qui s'y dérouleront; - des moyens pour calculer (22) des images de synthèse destinées à être projetées sur l'écran virtuel, à partir des coordonnées spatiales de l'appareil de projection (2) et des données contenues dans la base de données (24) décrivant l'univers virtuel; (de sorte que l'utilisateur peut évoluer au même moment au sein du monde réel et au sein d'un univers virtuel lié, en visionnant tour à tour l'un ou l'autre des environnements).