FR3126800A1 - Method for generating a synthetic image of a complete decoration of a source space integrated into a virtualized space replicating an existing space - Google Patents
Method for generating a synthetic image of a complete decoration of a source space integrated into a virtualized space replicating an existing space Download PDFInfo
- Publication number
- FR3126800A1 FR3126800A1 FR2109459A FR2109459A FR3126800A1 FR 3126800 A1 FR3126800 A1 FR 3126800A1 FR 2109459 A FR2109459 A FR 2109459A FR 2109459 A FR2109459 A FR 2109459A FR 3126800 A1 FR3126800 A1 FR 3126800A1
- Authority
- FR
- France
- Prior art keywords
- space
- virtualized
- referent
- source
- real
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/04—Architectural design, interior design
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
- G06T2219/20—Indexing scheme for editing of 3D models
- G06T2219/2016—Rotation, translation, scaling
Landscapes
- Engineering & Computer Science (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Architecture (AREA)
- Processing Or Creating Images (AREA)
Abstract
Un procédé de génération d’un espace virtualisé représentant un espace référent comprenant une décoration issue d’un espace source,le procédé comprenant les étapes suivantes :- acquisition optique des dimensions et/ou de la géométrie de l’espace référent,- modélisation tridimensionnelle de l’intégralité de l’espace référent par un module informatisé de modélisation,- sélection de la décoration issue de l’espace source par un module informatisé de sélection à partir d’un ensemble de contenus visuels en haute définition d’espaces sources comprenant chacun au moins une décoration,- création de l’espace virtualisé dans un format lisible en réalité augmentée par intégration de la décoration de l’espace source dans la modélisation tridimensionnelle par un module informatisé d’intégration,- affichage en réalité augmentée sur un écran d’un dispositif informatisé d’affichage d’au moins une partie de l’espace virtualisé,l’affichage comprenant une étape d’intégration en temps réel d’une image réelle à la partie affichée de l’espace virtualisé. Figure pour l’abrégé : figure 10A method for generating a virtualized space representing a referent space comprising a decoration from a source space, the method comprising the following steps:- optical acquisition of the dimensions and/or geometry of the referent space,- three-dimensional modeling of the entire referent space by a computerized modeling module, - selection of the decoration from the source space by a computerized selection module from a set of high-definition visual content of source spaces comprising each at least one decoration, - creation of the virtualized space in an augmented reality readable format by integrating the decoration of the source space into the three-dimensional modeling by a computerized integration module, - display in augmented reality on a screen of a computerized device for displaying at least part of the virtualized space, the display comprising a step of real-time integration of a real image lle to the displayed part of the virtualized space. Figure for abstract: Figure 10
Description
DOMAINE DE L’INVENTIONFIELD OF THE INVENTION
La présente invention appartient au domaine technique de l’imagerie 3D ou encore de l’image de synthèse.The present invention belongs to the technical field of 3D imaging or computer-generated imagery.
Plus précisément, la présente invention se rapporte à un procédé d’affichage et notamment un procédé d’affichage en réalité augmentée d’une image de synthèse ou image 3D.More specifically, the present invention relates to a display method and in particular an augmented reality display method of a synthetic image or 3D image.
De manière encore plus précise, l’invention se rapporte à un procédé de génération d’une image de synthèse en un format lisible en réalité augmentée et notamment d’une image de synthèse d’un espace comprenant un élément d’une décoration.Even more specifically, the invention relates to a process for generating a computer-generated image in a format readable in augmented reality and in particular a computer-generated image of a space comprising an element of a decoration.
Enfin, l’invention vise à être utilisée notamment dans le domaine de la décoration d’intérieur dans l’immobilier ou encore de la transaction immobilière.Finally, the invention aims to be used in particular in the field of interior decoration in real estate or even real estate transactions.
ARRIÈRE-PLAN TECHNOLOGIQUETECHNOLOGICAL BACKGROUND
Dans le domaine de la décoration intérieure, il est connu de proposer aux futurs acquéreurs d’un objet de décoration ou d’une décoration complète un configurateur ou concepteur de produits ou d’intérieur complet souvent appelé «planner» (anglicisme traduisible en français par « planificateur »).In the field of interior decoration, it is known to offer future buyers of a decorative object or a complete decoration a configurator or designer of products or complete interior often called " planner " (English translation into French by “planner”).
Ces configurateurs permettent de réaliser soi-même une image de synthèse d’un intérieur et d’y ajouter une décoration. Cette solution offre une complète autonomie à l’utilisateur. Il réalise lui-même le contenu visuel de l’espace de son choix avec une décoration de son choix.These configurators allow you to create a synthetic image of an interior yourself and add decoration to it. This solution offers complete autonomy to the user. He himself realizes the visual content of the space of his choice with a decoration of his choice.
Cependant, souvent, la réplication de l’intérieur du consommateur n’est pas bien réalisée ce qui fausse le rendu une fois la décoration ajoutée. De plus, il est parfois difficile pour le consommateur de s’imaginer dans le nouvel environnement créé. Ainsi, ces solutions de "self conseil" ou d’"auto-assistance" n’obtiennent pas les résultats escomptés en laissant le consommateur face à ses questions voire en les amplifiant.However, often, the replication of the interior of the consumer is not well done which distorts the rendering once the decoration is added. In addition, it is sometimes difficult for the consumer to imagine themselves in the new environment created. Thus, these " self-advice " or " self-help " solutions do not obtain the expected results by leaving the consumer to face his questions or even by amplifying them.
Ainsi, le besoin est clairement identifié : celui d’un contenu visuel particularisé à un espace choisi par le consommateur lui permettant de mieux visualiser un ameublement ou une décoration d’intérieure dans un espace de son choix qu’il soit déjà construit ou encore sur plan.Thus, the need is clearly identified: that of a visual content specific to a space chosen by the consumer allowing him to better visualize a furnishing or an interior decoration in a space of his choice whether it is already built or still on plan.
L’invention vise à répondre à ce besoin.The invention aims to meet this need.
Ainsi, l’invention se rapporte à un procédé de génération d’un espace virtualisé dans un espace cible réel,
l’espace virtualisé représentant un espace référent,
l’espace référent comprenant un élément issu d’un espace,Thus, the invention relates to a method for generating a virtualized space in a real target space,
the virtualized space representing a referent space,
the referent space comprising an element from a space,
le procédé comprenant les étapes suivantes :
i – acquisition, par un dispositif d’acquisition, des dimensions et/ou de la géométrie tridimensionnelle d’au moins une partie de l’espace référent,
ii – création, par un module informatisé de modélisation, de l’espace virtualisé dans un format numérique lisible en réalité augmentée par modélisation tridimensionnelle de la partie de l’espace référent d’après les dimensions et/ou la géométrie tridimensionnelle acquise,
iii – intégration, par un module informatisé d’intégration, de l’élément de l’espace source dans l’espace virtualisé de telle sorte que la position, l’orientation et la géométrie tridimensionnelle de l’élément intégré, dans un référentiel de l’espace virtualisé, soient déterminées,
iv – affichage, par un dispositif d’affichage, en réalité augmentée, dans l’espace cible réel d’un élément de l’espace virtualisé.the method comprising the following steps:
i – acquisition, by an acquisition device, of the dimensions and/or the three-dimensional geometry of at least part of the referent space,
ii – creation, by a computerized modeling module, of the virtualized space in a readable digital format in augmented reality by three-dimensional modeling of the part of the referent space according to the dimensions and/or the three-dimensional geometry acquired,
iii – integration, by a computerized integration module, of the element of the source space in the virtualized space in such a way that the position, orientation and three-dimensional geometry of the integrated element, in a repository of virtualized space, are determined,
iv – display, by a display device, in augmented reality, in the real target space of an element of the virtualized space.
L’invention répond au besoin identifié : le contenu visuel est particularisé à un espace choisi par le consommateur. Il peut s’agir de n’importe quel espace réel : d’une pièce d’un bâtiment par exemple (le salon de la maison du consommateur). Alternativement, l’espace choisi peut être un futur espace réel : c’est notamment le cas lors d’une construction d’un bâtiment, par exemple à la demande du consommateur, l’espace choisi peut exister de manière figurative sur un plan ou en dessin d’architecte.The invention meets the identified need: the visual content is specific to a space chosen by the consumer. It can be any real space: a room in a building for example (the living room of the consumer's house). Alternatively, the space chosen may be a future real space: this is particularly the case during the construction of a building, for example at the request of the consumer, the space chosen may exist figuratively on a plan or in architect's drawing.
A noter que l’espace référent peut aussi être appelé espace existant qu’il soit figuré ou réel. De plus, l’espace référent peut être un espace figuré en deux dimensions ou un espace virtuel en trois dimensions. Dans ce dernier cas de figure, l’espace référent est déjà virtualisé et l’acquisition des dimensions et/ou de la géométrie tridimensionnelle est immédiate.Note that the referent space can also be called existing space whether it is figurative or real. Moreover, the referent space can be a figured two-dimensional space or a virtual three-dimensional space. In the latter case, the referent space is already virtualized and the acquisition of dimensions and/or three-dimensional geometry is immediate.
L’invention permet à un utilisateur ou bénéficiaire de choisir n’importe quel espace réel ou figuré, l’espace référent, de choisir un élément ou un type d’élément de n’importe quel espace réel, figuré ou virtuel, l’espace source, et d’obtenirin fineun affichage, une visualisation ou encore une projection de l’élément ou du type d’élément choisi par rapport à l’espace référent (et non plus dans l’espace source), et ce, dans n’importe quel espace cible réel (espace référent réel ou un autre espace réel).The invention allows a user or beneficiary to choose any real or figurative space, the referent space, to choose an element or a type of element from any real, figurative or virtual space, the source, and ultimately obtain a display, a visualization or even a projection of the element or the type of element chosen in relation to the referent space (and no longer in the source space), and this, in any real target space (real referent space or another real space).
L’espace référent peut être n’importe quel espace réel : il peut s’agir d’une pièce d’un bâtiment, par exemple le salon de la maison du consommateur. Alternativement, l’espace référent choisi par le consommateur peut être un futur espace réel : c’est notamment le cas lors d’une construction d’un bâtiment, par exemple à la demande du consommateur, l’espace référent peut exister de manière figurative sur un plan ou en dessin d’architecte.The referent space can be any real space: it can be a room in a building, for example the living room of the consumer's house. Alternatively, the referent space chosen by the consumer can be a future real space: this is particularly the case during the construction of a building, for example at the request of the consumer, the referent space can exist in a figurative way on a plan or in an architect's drawing.
Un premier avantage de l’invention est donc de permettre la visualisation de l’élément choisi ou du type d’élément dans, ou par rapport à, l’espace référent alors qu’il n’était affiché que dans l’espace source.A first advantage of the invention is therefore to allow the visualization of the chosen element or of the type of element in, or in relation to, the referent space while it was only displayed in the source space.
De plus, l’espace cible réel est l’espace de projection, d’affichage ou de visualisation dans lequel le dispositif d’affichage permet la visualisation de l’espace virtualisé. Un autre avantage de l’invention réside dans le fait qu’il peut s’agir de n’importe quel espace réel. Par exemple, il peut s’agir de l’espace référent si celui est un espace réel. Dans ce cas, l’invention permet de visualiser directement l’élément ou du type d’élément choisi parfaitement positionné et dimensionné dans l’espace référent réel : on peut décider d’afficher les éléments de décoration mais pas les murs car les murs de l’espace cible réel suffisent. Alternativement, l’espace cible peut être un espace réel différent de l’espace référent (que celui-ci soit figuré ou non) : dans le cas d’une construction future, l’espace cible peut un simple espace vide, on peut alors afficher tous les éléments intégrés (murs compris par exemple) et permettre à l’utilisateur d’imaginer le rendu final une fois la construction aboutie. On peut également reconstituer un décor complet dans un espace cible réel vide grâce à l’invention.Moreover, the real target space is the projection, display or viewing space in which the display device allows the visualization of the virtualized space. Another advantage of the invention lies in the fact that it can be any real space. For example, it can be the referent space if that is a real space. In this case, the invention makes it possible to directly visualize the element or of the type of element chosen, perfectly positioned and dimensioned in the real referent space: it is possible to decide to display the decorative elements but not the walls because the walls of the actual target space are sufficient. Alternatively, the target space can be a real space different from the referent space (whether the latter is represented or not): in the case of a future construction, the target space can be a simple empty space, one can then display all the integrated elements (including walls for example) and allow the user to imagine the final rendering once the construction is complete. It is also possible to reconstitute a complete set in an empty real target space thanks to the invention.
Un autre avantage offert par l’invention est le fait que l’espace virtualisé soit modélisé d’après les dimensions et/ou la géométrie tridimensionnelle de l’espace référent et que l’élément ou le type d’élément choisi soit positionné lors de l’intégration par rapport à cette géométrie et non lors de l’étape d’affichage. Cela permet de visualiser l’élément choisi d’une façon préalablement particularisée à l’espace référent (réel ou figuré grâce à l’affichage de l’espace virtualisé.Another advantage offered by the invention is the fact that the virtualized space is modeled according to the dimensions and/or the three-dimensional geometry of the referent space and that the element or the type of element chosen is positioned during integration with respect to this geometry and not during the display step. This makes it possible to visualize the chosen element in a way previously specific to the referent space (real or figurative thanks to the display of the virtualized space.
En effet, la position et la géométrie tridimensionnelle, ou encore les dimensions tridimensionnelles, de l’élément choisi ou du type d’élément étant déterminées avant l’affichage de l’espace virtualisé, il n’y a besoin d’aucun redimensionnement ou d’aucun repositionnement de l’élément ou du type d’élément choisi intégré par rapport à l’espace référent lors de l’affichage de l’espace virtualisé. Cette particularisation à l’espace référent est très pratique pour l’utilisateur. Ce dernier n’a aucune action à réaliser pour immédiatement visualiser une décoration parfaitement adaptée à son espace.Indeed, the position and the three-dimensional geometry, or even the three-dimensional dimensions, of the chosen element or of the type of element being determined before the display of the virtualized space, there is no need for any resizing or no repositioning of the element or of the type of element chosen integrated with respect to the referent space during the display of the virtualized space. This particularization to the referent space is very practical for the user. The latter does not have to perform any action to immediately visualize a decoration perfectly adapted to his space.
Cet affichage, visualisation ou projection est permise grâce à la création d’un espace virtualisé modélisant l’espace référent choisi. Par modélisation, on entend réplication virtuelle de la géométrie tridimensionnelle et/ou des dimensions de l’espace référent. Autrement dit, une géométrie tridimensionnelle de l’espace virtualisé est homothétique à une géométrie tridimensionnelle de l’espace référent dans n’importe quel référentiel de l’espace virtualisé ou référentThis display, visualization or projection is made possible thanks to the creation of a virtualized space modeling the chosen referent space. By modeling, we mean virtual replication of the three-dimensional geometry and/or the dimensions of the referent space. In other words, a three-dimensional geometry of the virtualized space is homothetic to a three-dimensional geometry of the referent space in any reference frame of the virtualized or referent space
Enfin, les dimensions et/ou la géométrie tridimensionnelle peuvent être acquis par n’importe quel dispositif de mesure si l’espace référent est un espace réel mais peuvent aussi être acquises par renseignement dans une base de donnée accessible au module informatisé de modélisation des distances, mesures, coordonnées de l’espace référent. C’est notamment le cas si l’espace référent est un espace figuré non existant.Finally, the dimensions and/or the three-dimensional geometry can be acquired by any measuring device if the referent space is a real space but can also be acquired by information in a database accessible to the computerized distance modeling module , measures, coordinates of the referent space. This is particularly the case if the referent space is a non-existent figurative space.
D’autres exemples d’applications seront donnés dans la description détaillée.Other examples of applications will be given in the detailed description.
Selon différents aspects, il est possible de prévoir l’une et/ou l’autre des caractéristiques ci-dessous prises seules ou en combinaison.According to various aspects, it is possible to provide one and/or the other of the characteristics below taken alone or in combination.
Selon une réalisation, l’élément issu de l’espace source est un élément de décoration, d’ameublement, d’aménagement. Par exemple, l’espace peut être une photographie d’un intérieur issu d’un catalogue papier ou encore une photographie d’un intérieur trouvée sur internet (voire issue d’une vidéo). L’élément choisi peut donc être un meuble de cet intérieur ou un rideau d’une photo du catalogue.According to one realization, the element resulting from the source space is an element of decoration, furnishing, arrangement. For example, the space can be a photograph of an interior taken from a paper catalog or even a photograph of an interior found on the internet (or even taken from a video). The chosen element can therefore be a piece of furniture from this interior or a curtain from a photo in the catalog.
Ainsi, grâce à l’invention, le consommateur visualise la décoration de l’espace source directement dans une réplication d’un espace référent de son choix (par exemple de son intérieur) grâce à l’affichage d’un espace virtualisé et ce aussi bien en dehors de l’espace référent (i.e. dans un autre espace réel) ou au contraire dans celui-ci.Thus, thanks to the invention, the consumer visualizes the decoration of the source space directly in a replication of a referent space of his choice (for example of his interior) thanks to the display of a virtualized space and this too well outside the referent space (i.e. in another real space) or on the contrary in this one.
Selon une réalisation, plusieurs éléments définissent un ensemble, et est affiché :
- un seul ensemble d’éléments d’une partie de l’espace virtualisé,
- tous les éléments d’une partie de l’espace virtualisé,
- un seul ensemble d’éléments de la totalité de l’espace virtualisé, ou
- tous les éléments de la totalité de l’espace virtualisé.According to one embodiment, several elements define a set, and is displayed:
- a single set of elements of a part of the virtualized space,
- all the elements of a part of the virtualized space,
- a single set of elements of the entire virtualized space, or
- all the elements of the entire virtualized space.
En effet, selon le dispositif d’affichage, l’invention prévoit de n’afficher qu’une partie de l’espace virtualisé ou sa totalité. Il peut aussi être avantageux de n’afficher qu’une partie de l’espace virtualisé (ce qui est équivalent à ne pas afficher une partie de l’espace virtualisé) dans le cas où, par exemple, la partie de l’espace cible réel correspondante à la partie non affichée de l’espace virtualisé est en travaux ou encore qu’on veut pouvoir voir le rendu visuel cette partie correspondante de l’espace cible réel avec l’espace virtualisé contenant les éléments choisis de l’espace source (décoration par exemple ou meuble). Cela permet une aide à la décision en matière d’achat ou de travaux dans le secteur immobilier.Indeed, depending on the display device, the invention provides for displaying only part of the virtualized space or all of it. It may also be advantageous to display only part of the virtualized space (which is equivalent to not displaying part of the virtualized space) in the case where, for example, the part of the target space corresponding to the undisplayed part of the virtualized space is under construction or we want to be able to see the visual rendering of this corresponding part of the real target space with the virtualized space containing the chosen elements of the source space ( decoration for example or furniture). This allows decision support in matters of purchase or work in the real estate sector.
De plus, suivant l’espace cible de projection, il peut être avantageux de n’afficher qu’un seul type d’éléments. En particulier, parfois, il n’est pas pertinent d’afficher les murs (notamment quand l’espace cible réel est l’espace référent) et on souhaitera alors afficher tous les éléments sauf les murs.In addition, depending on the target projection space, it may be advantageous to display only one type of element. In particular, sometimes it is not relevant to display the walls (especially when the real target space is the referent space) and we will then want to display all the elements except the walls.
Selon une réalisation, plusieurs éléments définissant un ensemble d’éléments sont affichés,
les différents ensembles d’éléments de l’espace virtualisé étant les suivants :
- éléments d’aménagement,
- éléments d’ameublement,
- éléments de décoration,
- éléments de structure.According to one embodiment, several elements defining a set of elements are displayed,
the different sets of elements of the virtualized space being the following:
- fittings,
- furnishing elements,
- decorative elements,
- structural elements.
Toute subdivision selon un plan ou une région de l’espace virtualisé de ces types est également possible : aménagements au sol, au plafond, aux murs, décoration au sol, au plafond, aux murs etc.Any subdivision according to a plan or a region of the virtualized space of these types is also possible: layouts on the floor, on the ceiling, on the walls, decoration on the floor, on the ceiling, on the walls, etc.
En effet, il peut être utile d’afficher seulement la décoration murale par exemple.Indeed, it can be useful to display only the wall decoration for example.
D’une manière générale, l’invention permet toutes les combinaisons d’affichages possibles concernant une partie ou l’ensemble de l’espace virtualisé à afficher et l’élément ou le type d’élément à afficher. On peut par exemple choisir de n’afficher que les éléments de décoration muraux d’une partie donnée de l’espace virtualisé.In general, the invention allows all possible combinations of displays concerning part or all of the virtualized space to be displayed and the element or the type of element to be displayed. For example, you can choose to display only the wall decoration elements of a given part of the virtualized space.
Selon une réalisation, l’espace référent est un espace réel et l’espace cible est cet espace réel.According to one embodiment, the referent space is a real space and the target space is this real space.
Selon une réalisation, l’espace référent est un espace réel dans lequel l’acquisition est une acquisition optique réalisée grâce un dispositif d’acquisition optique apte à acquérir une image, une vidéo ou un scan de l’espace existant dans n’importe quelle longueur d’onde du spectre électromagnétique.According to one embodiment, the referent space is a real space in which the acquisition is an optical acquisition carried out using an optical acquisition device capable of acquiring an image, a video or a scan of the existing space in any wavelength of the electromagnetic spectrum.
Ainsi, les dimensions et la géométrie de l’espace existant nécessaires à la réplication de la géométrie tridimensionnelle de l’espace existant utilisée pour la modélisation tridimensionnelle est acquise grâce au scan de l’espace existant ou grâce aux photographies couvrant tout ou partie de cet espace.Thus, the dimensions and the geometry of the existing space necessary for the replication of the three-dimensional geometry of the existing space used for the three-dimensional modeling is acquired thanks to the scan of the existing space or thanks to the photographs covering all or part of this space.
Idéalement, la modélisation tridimensionnelle de l’espace existant, l’intégration de la décoration de l’espace source dans la modélisation tridimensionnelle, et l’affichage en réalité augmentée d’au moins une partie de l’espace virtualisé sont réalisés dans un format haute définition.Ideally, the three-dimensional modeling of the existing space, the integration of the decoration of the source space into the three-dimensional modeling, and the display in augmented reality of at least part of the virtualized space are carried out in a format HD.
Cela permet d’apporter le plus de détails possible dans la modélisation et l’intégration de la décoration mais aussi d’afficher un contenu final au visuel le plus qualitatif possible.This makes it possible to provide as many details as possible in the modeling and integration of the decoration but also to display the final content with the most qualitative visual possible.
D’après une réalisation, l’espace virtualisé peut différer de l’espace référent pour prendre en compte des modifications possibles ou à venir de l’espace référent, réel ou figuré, et permettre ainsi une intégration optimale de l’élément ou du type d’élément de l’espace source choisi dans un espace virtualisé modélisant l’espace référent tel que ce dernier sera une fois que les modifications le concernant auront été réellement réalisées. Autrement dit, il est possible que la modélisation de l’espace référent diffère en des zones prédéterminées avec l’espace référent tel qu’il existe. Néanmoins, la majeure partie de la modélisation reste fidèle à la géométrie tridimensionnelle de l’espace référent. Ainsi, l’espace référent peut être modélisé totalement, partiellement ou de façon alternative en tenant compte de modifications futures.According to one embodiment, the virtualized space may differ from the referent space to take into account possible or future modifications of the referent space, real or figurative, and thus allow optimal integration of the element or type element of the source space chosen in a virtualized space modeling the referent space such as the latter will be once the modifications concerning it have actually been carried out. In other words, it is possible that the modeling of the referent space differs in predetermined areas with the referent space as it exists. Nevertheless, most of the modeling remains faithful to the three-dimensional geometry of the referent space. Thus, the referent space can be modeled totally, partially or alternatively taking into account future modifications.
Selon le mode de réalisation où la géométrie est acquise grâce à une acquisition optique, l’invention prévoit un téléchargement de la ou des photographies de l’espace existant via une interface de téléchargement accessible immédiatement après le choix du contenu (dans le cas d’une page web par exemple) ou via un QR code imprimé ou toute autre technique similaire permettant l’ouverture d’une page web de téléchargement (dans le cas d’un catalogue papier par exemple). Grâce à ces photos, l’espace référent est modélisé en 3D par des infographistes (ou automatiquement grâce un ordinateur) qui en reçoivent les photographies pour obtenir alors l’espace référent vide.According to the embodiment where the geometry is acquired through optical acquisition, the invention provides for downloading the photograph or photographs of the existing space via a download interface accessible immediately after the choice of content (in the case of a web page for example) or via a printed QR code or any other similar technique allowing the opening of a download web page (in the case of a paper catalog for example). Thanks to these photos, the referent space is modeled in 3D by graphic designers (or automatically thanks to a computer) who receive the photographs to then obtain the empty referent space.
Selon une réalisation, le procédé comprend en outre une étape d’intégration en temps réel d’une image réelle, par exemple d’une personne ou d’un objet de l’espace réel, à l’espace virtualisé.According to one embodiment, the method further comprises a step of real-time integration of a real image, for example of a person or an object from real space, into the virtualized space.
Ainsi le consommateur peut visualiser l’élément ou le type d’élément dans l’espace virtualisé représentant son intérieur mais également des choses réelles ou objets réels, par exemple des personnes dans l’intérieur réel à partir duquel la modélisation a été faite.Thus the consumer can visualize the element or the type of element in the virtualized space representing its interior but also real things or real objects, for example people in the real interior from which the modeling was made.
Idéalement, la réalité augmentée est fournie à taille réelle. Grâce aux fonctions de capture d’écran des dispositifs d’affichage doté d’un capteur d’image et/ou de fonctionnalités de mesure de distance et/ou de capteur type lidar. De tels dispositifs peuvent être des « smartphones », il devient possible de visualiser, de photographier ou de filmer des humains dans le décor en réalité augmentée, permettant une vraie projection de soi dans l’espace décoré.Ideally, augmented reality is provided at life size. Thanks to the screen capture functions of display devices equipped with an image sensor and/or distance measurement functions and/or lidar-type sensor. Such devices can be "smartphones", it becomes possible to view, photograph or film humans in the decor in augmented reality, allowing a real projection of oneself in the decorated space.
Selon une réalisation, le dispositif d’affichage est :
- un téléphone intelligent,
- une tablette numérique,
- des lunettes de réalité virtuelle ou augmentée, ou
- un projecteur holographique..According to one embodiment, the display device is:
- a smart phone,
- a digital tablet,
- virtual or augmented reality glasses, or
- a holographic projector..
Selon une réalisation, l’étape d’affichage est réalisée à l’aide d’une application web.According to one embodiment, the display step is performed using a web application.
Selon ce même mode de réalisation, on peut prévoir que l’invention comprenne en outre une étape de chargement de l’espace virtualisé sur un serveur web.According to this same embodiment, provision can be made for the invention to further comprise a step for loading the virtualized space onto a web server.
Ainsi, le consommateur peut télécharger l’espace virtualisé depuis le serveur web et l’afficher à l’aide de n’importe quel dispositif d’affichage. De plus, si ce dispositif est doté d’un capteur d’image et/ou de fonctionnalités de mesure de distance et/ou de capteur type lidar, il est possible de tirer profit de l’invention en intégrant, ou en superposant, une image d’un élément réel à l’espace virtualisé.Thus, the consumer can download the virtualized space from the web server and display it using any display device. In addition, if this device is provided with an image sensor and/or distance measurement functionalities and/or a lidar-type sensor, it is possible to take advantage of the invention by integrating, or by superimposing, a image of a real element to the virtualized space.
Par exemple, l’utilisateur du procédé accède sur une page web privative (avec « login » et mot de passe définis lors du téléchargement des photos) pour visualiser en réalité augmentée l’espace existant virtualisé.For example, the user of the process accesses a private web page (with "login" and password defined when uploading the photos) to view the existing virtualized space in augmented reality.
Selon une réalisation, le procédé comprend en outre une étape de sauvegarde par un module informatisé de sauvegarde de l’espace virtualisé créé sur un serveur.According to one embodiment, the method further comprises a backup step by a computerized backup module of the virtualized space created on a server.
Selon une réalisation, l’élément est choisi sur une page web ou sur un catalogue papier à partir d’une image en haute définition ou très haute définition.According to one embodiment, the element is chosen on a web page or on a paper catalog from a high definition or very high definition image.
Ainsi, la haute définition permet au consommateur d’avoir envie d’acquérir la décoration ou l’élément de décoration. Il est donc important de pouvoir déclencher l’envie d’achat grâce à des visuels de haute définition. De plus, cela permet une modélisation tridimensionnelle en haute définition plus directe.Thus, high definition allows the consumer to want to acquire the decoration or the decorative element. It is therefore important to be able to trigger the desire to buy thanks to high-definition visuals. In addition, it allows for more direct high-definition three-dimensional modeling.
Selon une réalisation, la position de l’élément de l’espace source intégré dans la modélisation tridimensionnelle de l’espace virtualisé est définie par :
- application de premières règles définissant le plan de l’élément dans l’espace virtualisé crée, et
- application de secondes règles définissant la position et l’orientation dans ce plan,
les premières et secondes règles étant prédéterminées au moins en fonction de l’élément.According to one embodiment, the position of the element of the source space integrated into the three-dimensional modeling of the virtualized space is defined by:
- application of first rules defining the plane of the element in the virtualized space created, and
- application of second rules defining the position and orientation in this plane,
the first and second rules being predetermined at least according to the element.
Par exemple, les premières règles peuvent être des règles fonctionnelles propres à l’élément choisi : un meuble ne peut être positionné au plafond de l’espace virtualisé.For example, the first rules can be functional rules specific to the chosen element: a piece of furniture cannot be positioned on the ceiling of the virtualized space.
Par exemple, les secondes règles peuvent être des règles propres à l’usage de l’élément : un fauteuil positionné au sol d’après les premières règles ne peut être positionnés devant une porte.For example, the second rules can be rules specific to the use of the element: an armchair positioned on the ground according to the first rules cannot be positioned in front of a door.
En effet, le procédé peut s’appliquer à un espace référent similaire à l’espace source mais offre plus d’avantages quand il s’applique bien à deux espaces distincts (l’espace référent et l’espace source), l’espace référent n’ayant alors aucun prérequis à respecter et pouvant être un espace réellement quelconque. En conséquence, la réplication ne peut être strictement identique, du fait même que les espaces référent et source sont différents : le procédé selon l’invention implique des modifications des positions des objets dans l’espace ou des surfaces de revêtement utilisés pour que la décoration s’adapte d’un espace à l’autre. Il faut donc comprendre la notion de réplique comme la recherche de la similarité la plus forte entre l’espace source décoré, ou comprenant la décoration désirée, et l’espace référent (même si elle est impossible dans l’absolu) afin de proposer une image de synthèse illustrant la décoration la plus fidèle possible à l’espace source dans l’espace virtualisé issu de l’espace référent.Indeed, the method can be applied to a referent space similar to the source space but offers more advantages when it applies well to two distinct spaces (the referent space and the source space), the space referent then having no prerequisites to respect and being able to be really any space. Consequently, the replication cannot be strictly identical, due to the very fact that the referent and source spaces are different: the method according to the invention involves modifications of the positions of the objects in space or of the covering surfaces used so that the decoration adapts from one space to another. It is therefore necessary to understand the notion of replica as the search for the strongest similarity between the source space decorated, or including the desired decoration, and the referent space (even if it is impossible in absolute terms) in order to propose a synthetic image illustrating the decoration as faithful as possible to the source space in the virtualized space resulting from the referent space.
Concrètement, en regardant les deux espaces, la recherche des similarités permet de constater que les deux espaces ont la même décoration, même si cette dernière est spatialement différente entre les deux espaces. Cette étape de recherche de similarités géométriques ou encore d’adaptation entre les deux espaces et la décoration permet au consommateur, ou utilisateur du procédé, de visualiser la décoration désirée dans l’intérieur de son choix le plus fidèlement possible.Concretely, looking at the two spaces, the search for similarities shows that the two spaces have the same decoration, even if the latter is spatially different between the two spaces. This step of looking for geometric similarities or adaptation between the two spaces and the decoration allows the consumer, or user of the process, to visualize the desired decoration in the interior of his choice as faithfully as possible.
Les premières et secondes règles permettent d’obtenir ces similarités entre l’espace source et l’espace référent.The first and second rules make it possible to obtain these similarities between the source space and the referent space.
De plus, il est possible d’intégrer un élément encore à l’état de croquis pour décider ou non de produire cette décoration.In addition, it is possible to integrate an element still in the sketch state to decide whether or not to produce this decoration.
Il est également possible qu’un élément issu d’un autre espace source, distinct de l’espace source, soit intégré dans la modélisation tridimensionnelle de l’espace virtualisé.It is also possible that an element from another source space, distinct from the source space, is integrated into the three-dimensional modeling of the virtualized space.
Ainsi, deux éléments issus d’espaces sources différents peuvent être intégrées à un même espace virtualisé. C’est très utile quand l’espace référent est un salon avec une cuisine ouverte par exemple, et plus globalement quand l’espace référent réunit deux espaces sources.Thus, two elements from different source spaces can be integrated into the same virtualized space. This is very useful when the referent space is a living room with an open kitchen, for example, and more generally when the referent space combines two source spaces.
Idéalement, la modélisation tridimensionnelle de l’intégralité de l’espace référent, l’intégration de l’élément de l’espace source dans la modélisation tridimensionnelle, et/ou l’affichage en réalité augmentée d’au moins une partie de l’espace virtualisé dans l’espace cible est réalisée dans un format numérique haute définition ou très haute définition.Ideally, the three-dimensional modeling of the entire referent space, the integration of the source space element into the three-dimensional modeling, and/or the augmented reality display of at least part of the virtualized space in the target space is carried out in a high definition or very high definition digital format.
Des modes de réalisation de l’invention seront décrits ci-dessous par référence aux dessins, décrits brièvement ci-dessous :Embodiments of the invention will be described below with reference to the drawings, briefly described below:
Les figures 1 à 3 représentent un même espace référent dans les cas de figures possibles : l’espace est réel, meublé ou vide, ou l’espace est figuré, et de préférence meublé dans ce cas.Figures 1 to 3 represent the same referent space in the possible scenarios: the space is real, furnished or empty, or the space is figured, and preferably furnished in this case.
Les figures 6 et 7 représentent les cas de figures possibles de l’espace source contenant l’élément intégré dans l’espace virtuel.Figures 6 and 7 represent the possible scenarios of the source space containing the element integrated into the virtual space.
Pour les figures 1 à 8, la nomenclature est la suivante :
- Non encadré : espace réel
- Encadré : espace figuré par une image
- Trait plein : espace existant (non virtuel)
- Trait pointillé : espace virtuel (créé par ordinateur)For figures 1 to 8, the nomenclature is as follows:
- Unframed: real space
- Framed: space represented by an image
- Solid line: existing space (not virtual)
- Dotted line: virtual space (created by computer)
Claims (12)
l’espace virtualisé représentant un espace référent,
l’espace référent comprenant un élément issu d’un espace source,
le procédé comprenant les étapes suivantes :
i – acquisition, par un dispositif d’acquisition, des dimensions et/ou de la géométrie tridimensionnelle d’au moins une partie de l’espace référent,
ii – création, par un module informatisé de modélisation, de l’espace virtualisé dans un format numérique lisible en réalité augmentée par modélisation tridimensionnelle de la partie de l’espace référent d’après les dimensions et/ou la géométrie tridimensionnelle acquise,
iii – intégration, par un module informatisé d’intégration, de l’élément de l’espace source dans l’espace virtualisé créé de sorte que la position, l’orientation et la géométrie tridimensionnelle de l’élément intégré, dans un référentiel de l’espace virtualisé crée, soient déterminées,
iv – affichage, par un dispositif d’affichage, en réalité augmentée, dans l’espace cible réel d’un élément de l’espace virtualisé.Method for generating a virtualized space in a real target space,
the virtualized space representing a referent space,
the referent space including an element from a source space,
the method comprising the following steps:
i – acquisition, by an acquisition device, of the dimensions and/or the three-dimensional geometry of at least part of the referent space,
ii – creation, by a computerized modeling module, of the virtualized space in a readable digital format in augmented reality by three-dimensional modeling of the part of the referent space according to the dimensions and/or the three-dimensional geometry acquired,
iii – integration, by a computerized integration module, of the element of the source space in the virtualized space created so that the position, the orientation and the three-dimensional geometry of the integrated element, in a repository of virtualized space creates, are determined,
iv – display, by a display device, in augmented reality, in the real target space of an element of the virtualized space.
- un seul ensemble d’éléments d’une partie de l’espace virtualisé,
- tous les éléments d’une partie de l’espace virtualisé,
- un seul ensemble d’éléments de la totalité de l’espace virtualisé, ou
- tous les éléments de la totalité de l’espace virtualisé.A method according to any preceding claim in which several elements define a set, and is displayed:
- a single set of elements of a part of the virtualized space,
- all the elements of a part of the virtualized space,
- a single set of elements of the entire virtualized space, or
- all the elements of the entire virtualized space.
les différents ensemble d’éléments de l’espace virtualisé étant les suivants :
- éléments d’aménagement,
- éléments d’ameublement,
- éléments de décoration,
- éléments de structure.A method according to any preceding claim wherein multiple items defining a set of items are displayed,
the different sets of elements of the virtualized space being the following:
- fittings,
- furnishing elements,
- decorative elements,
- structural elements.
- un téléphone intelligent,
- une tablette numérique,
- des lunettes de réalité virtuelle ou augmentée, ou
- un projecteur holographique.A method according to any preceding claim wherein the display device is:
- a smart phone,
- a digital tablet,
- virtual or augmented reality glasses, or
- a holographic projector.
- application de premières règles définissant le plan de l’élément dans l’espace virtualisé crée, et
- application de secondes règles définissant la position et l’orientation dans ce plan,
les premières et secondes règles étant prédéterminées au moins en fonction de l’élément.Method according to any one of the preceding claims, in which the position of the element of the source space integrated into the three-dimensional modeling is defined by:
- application of first rules defining the plane of the element in the virtualized space created, and
- application of second rules defining the position and orientation in this plane,
the first and second rules being predetermined at least as a function of the element.
Method according to any one of the claims, in which the three-dimensional modeling of the entire referent space, the integration of the element of the source space into the three-dimensional modeling, and/or the augmented reality display of at least part of the virtualized space created is produced in a high definition or very high definition digital format.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR2109459A FR3126800A1 (en) | 2021-09-09 | 2021-09-09 | Method for generating a synthetic image of a complete decoration of a source space integrated into a virtualized space replicating an existing space |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR2109459 | 2021-09-09 | ||
| FR2109459A FR3126800A1 (en) | 2021-09-09 | 2021-09-09 | Method for generating a synthetic image of a complete decoration of a source space integrated into a virtualized space replicating an existing space |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| FR3126800A1 true FR3126800A1 (en) | 2023-03-10 |
Family
ID=78332904
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| FR2109459A Ceased FR3126800A1 (en) | 2021-09-09 | 2021-09-09 | Method for generating a synthetic image of a complete decoration of a source space integrated into a virtualized space replicating an existing space |
Country Status (1)
| Country | Link |
|---|---|
| FR (1) | FR3126800A1 (en) |
-
2021
- 2021-09-09 FR FR2109459A patent/FR3126800A1/en not_active Ceased
Non-Patent Citations (2)
| Title |
|---|
| RAHUL SWAMINATHAN ET AL: "Happy Measure: Augmented Reality for Mobile Virtual Furnishing", INTERNATIONAL JOURNAL OF MOBILE HUMAN COMPUTER INTERACTION (IJMHCI), 23 April 2013 (2013-04-23), pages 18 - 44, XP055247583, Retrieved from the Internet <URL:https://www.qu.tu-berlin.de/fileadmin/fg41/download/Team/Robert_Schleicher/Swaminathan_Schleicher_JMHCI_2013_5_1_HappyMeasures_web.pdf> [retrieved on 20160204], DOI: http://dx.doi.org/10.4018/IJMHCI * |
| TANG JEFF K T ET AL: "AR interior designer: Automatic furniture arrangement using spatial and functional relationships", 2014 INTERNATIONAL CONFERENCE ON VIRTUAL SYSTEMS & MULTIMEDIA (VSMM), IEEE, 9 December 2014 (2014-12-09), pages 345 - 352, XP032790276, DOI: 10.1109/VSMM.2014.7136652 * |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11714518B2 (en) | Method and system for virtual real estate tours and virtual shopping | |
| Mudge et al. | Image-Based Empirical Information Acquisition, Scientific Reliability, and Long-Term Digital Preservation for the Natural Sciences and Cultural Heritage. | |
| US20150325038A1 (en) | Presenting realistic designs of spaces and objects | |
| CN107644453B (en) | Rendering method and system based on physical coloring | |
| FR2837593A1 (en) | Virtual mannequin clothing/viewing archiving having three dimensional view computer formed/digital word representing mannequin found and further computer specific physical view generating from digital words. | |
| CA2735680A1 (en) | Online shopping system and method using 3d reconstruction | |
| Kneiphof et al. | Real‐time Image‐based Lighting of Microfacet BRDFs with Varying Iridescence | |
| Jaspe-Villanueva et al. | Web-based exploration of annotated multi-layered relightable image models | |
| Logothetis et al. | Near-field photometric stereo in ambient light | |
| US8451323B1 (en) | Building data models by using light to determine material properties of illuminated objects | |
| Di Cicco et al. | Material properties and image cues for convincing grapes: The know-how of the 17th-century pictorial recipe by Willem Beurs | |
| Vanweddingen et al. | A status quaestionis and future solutions for using multi-light reflectance imaging approaches for preserving cultural heritage artifacts | |
| CN104737531A (en) | Method and system for manipulating camera light spectrum for sample article false color rendering | |
| Van der Perre et al. | Towards a combined use of IR, UV and 3D-imaging for the study of small inscribed and illuminated artefacts | |
| FR3126800A1 (en) | Method for generating a synthetic image of a complete decoration of a source space integrated into a virtualized space replicating an existing space | |
| Bornstein et al. | New Dimensions in Conservation Imaging: Combining Photogrammetry and Photometric Stereo for 3D Documentation of Heritage Artefacts | |
| EP3633625B1 (en) | Method for texturing a 3d model | |
| US20230360332A1 (en) | Augmented reality decorating system | |
| Pont et al. | Texture, illumination, and material perception | |
| Vanweddingen et al. | pixel+: integrating and standardizing of various interactive single-camera, multi-light imagery | |
| Ogleby | The” truthlikeness” of virtual reality reconstructions of architectural heritage: concepts and metadata | |
| Granier et al. | 3D lexicon for Human and Social Sciences | |
| Sorokin et al. | Deep learning in tasks of interior objects recognition and 3d reconstruction | |
| Pugh et al. | GeoSynth: A photorealistic synthetic indoor dataset for scene understanding | |
| Yatagawa et al. | LinSSS: linear decomposition of heterogeneous subsurface scattering for real-time screen-space rendering |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PLSC | Publication of the preliminary search report |
Effective date: 20230310 |
|
| RX | Complete rejection |
Effective date: 20230623 |