FR3048541A1 - Modification virtuelle de la denture d'une personne - Google Patents
Modification virtuelle de la denture d'une personne Download PDFInfo
- Publication number
- FR3048541A1 FR3048541A1 FR1651709A FR1651709A FR3048541A1 FR 3048541 A1 FR3048541 A1 FR 3048541A1 FR 1651709 A FR1651709 A FR 1651709A FR 1651709 A FR1651709 A FR 1651709A FR 3048541 A1 FR3048541 A1 FR 3048541A1
- Authority
- FR
- France
- Prior art keywords
- toothing
- person
- face
- virtual
- modified
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 claims abstract description 36
- 230000004048 modification Effects 0.000 claims abstract description 33
- 230000000877 morphologic effect Effects 0.000 claims abstract description 20
- 238000012545 processing Methods 0.000 claims abstract description 14
- 210000002455 dental arch Anatomy 0.000 claims description 17
- 238000012986 modification Methods 0.000 claims description 9
- 238000004458 analytical method Methods 0.000 claims description 7
- 230000010354 integration Effects 0.000 claims description 6
- 210000004373 mandible Anatomy 0.000 claims description 6
- 238000004590 computer program Methods 0.000 claims description 4
- 210000004513 dentition Anatomy 0.000 claims description 4
- 230000036346 tooth eruption Effects 0.000 claims description 4
- 238000004891 communication Methods 0.000 claims description 3
- 238000007405 data analysis Methods 0.000 claims description 2
- 239000003550 marker Substances 0.000 claims description 2
- 230000008569 process Effects 0.000 claims description 2
- 230000006870 function Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 239000000919 ceramic Substances 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 210000001061 forehead Anatomy 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 238000001727 in vivo Methods 0.000 description 1
- 210000001847 jaw Anatomy 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/77—Retouching; Inpainting; Scratch removal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30036—Dental; Teeth
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Processing Or Creating Images (AREA)
Abstract
Procédé de modification virtuelle de la denture d'une personne à partir d'au moins une image du visage de la personne, caractérisé en ce qu'il comprend les étapes suivantes : - capture (E5) d'au moins une image numérique du visage de la personne à l'aide d'une caméra ; - traitement (E6) de données morphologiques relatives au visage de la personne, à partir d'au moins une image capturée ; - génération d'au moins une image numérique virtuelle (E7) du visage de l'utilisateur avec une denture modifiée intégrée dans l'espace intra-labial identifié à l'étape de traitement d'au moins une image numérique capturée, à partir d'un fichier de données numériques représentant de manière tridimensionnelle la denture modifiée.
Description
Modification virtueiie de la denture d’une personne
Domaine technique de l'invention L’invention est dans le domaine dentaire et porte sur un procédé et un dispositif de modification virtuelle de la denture, ou du sourire, d’une personne à partir d’images animées du visage de la personne. État de la technique
Quand un patient souhaite corriger des défauts esthétiques et/ou orthodontiques sur une ou plusieurs dents, deux types de solutions peuvent lui être proposés : un traitement orthodontique et/ou une restauration dentaire esthétique, par exemple au moyen de facettes en céramique.
Avant de s’engager dans un tel traitement esthétique et/ou orthodontique, qui par nature est subjectif, le patient a besoin de connaître et visualiser au mieux le résultat final envisageable et de l’approuver.
Une première solution consiste à présenter au patient une maquette virtuelle 2D de la modification dentaire envisagée en retouchant une photo du patient de sorte à s’approcher de façon optimale du résultat souhaité. Cette méthode permet au patient de visualiser virtuellement le résultat final envisageable de la modification dentaire de façon simple, rapide et peu coûteuse. Elle ne permet toutefois pas au patient d’appréhender de façon suffisamment réaliste ce résultat.
Une deuxième solution consiste en la réalisation d’une (ou plusieurs) maquette provisoire ou « mock up >>. La maquette, ou mock up, est réalisée en composite et façonnée à la forme souhaitée directement sur les dents. Elle peut ensuite être appliquée sur le patient par-dessus ses dents non traitées. Cela permet au patient d’évaluer in vivo et avec un certain réalisme le projet de modification dentaire. La réalisation d’une ou plusieurs maquettes (ou mock up) provisoires est un processus complexe, long et coûteux.
Objet de l'invention
Le but de la présente invention est de proposer une solution pour permettre à une personne de visualiser un projet de modification dentaire, qui ne comprend pas tout ou partie des inconvénients précédents. A cet effet, l’invention concerne un procédé de modification virtuelle de la denture d’une personne à partir d’au moins une image du visage de la personne, caractérisé en ce qu’il comprend les étapes suivantes : - capture d’au moins une image numérique du visage de la personne à l’aide d’une caméra ; - traitement de données morphologiques relatives au visage de la personne, à partir d’au moins une image capturée ; - génération d’au moins une image numérique virtuelle du visage de l’utilisateur avec une denture modifiée intégrée dans l’espace intra-labial identifié à l’étape de traitement d’au moins une image numérique capturée, à partir d’un fichier de données numériques représentant de manière tridimensionnelle la denture modifiée. L’étape de traitement peut comprendre, pour chaque prise de vue, une étape de détermination de : - la distance du visage de la personne et son orientation, vis-à-vis du repère formé par la caméra ; - un espace intra-labial, à partir des données morphologiques relatives au visage de la personne ; - un angle d’ouverture de la mandibule, pour en déduire l’angle d’articulation de deux arcades dentaires supérieure et inférieure de la denture modifiée. L’étape de génération d’au moins une image numérique virtuelle du visage de la personne avec une denture modifiée comprend l’intégration d’une vue d’une denture modifiée selon la même distance, la même orientation et le même angle d’articulation que celles du visage lors de la prise de vue, cette vue de denture modifiée étant élaborée à partir des données tridimensionnelles du fichier de données numériques représentant la denture modifiée comprenant deux arcades supérieure et inférieure articulées.
Le procédé de modification virtuelle de la denture d’une personne peut comprendre une étape de sélection d’un fichier de données numériques représentant de manière tridimensionnelle la denture modifiée dans une bibliothèque contenant un ensemble de différents modèles numériques tridimensionnels de denture sur une mémoire électronique. L’étape de sélection peut comprendre la prise en compte des données suivantes : - le sexe et/ou l’âge de la personne ; et/ou - le résultat d’une étape d’analyse de données morphologique, qui permet de déterminer automatiquement le sourire idéal de la personne.
Le procédé de modification virtuelle de la denture d’une personne peut comprendre une étape de modification d’un modèle numérique de denture choisi parmi la bibliothèque de modèles pour l’adapter au visage de la personne.
Le procédé de modification virtuelle de la denture d’une personne peut comprendre une étape de génération en temps réel d’images numériques virtuelles animées du visage de la personne avec une denture modifiée, chaque image numérique virtuelle de l’ensemble d’images numériques virtuelles animées étant obtenue par la mise en oeuvre des étapes de capture, de traitement, de génération d’au moins une image numérique virtuelle à partir du même fichier de données numériques représentant de manière tridimensionnelle la denture modifiée, ladite denture modifiée étant adaptée en temps réel aux mouvements du visage, selon sa distance à la caméra, son orientation, à l’espace intra-labial et à l’angle d’ouverture de la mandibule, pour générer des images virtuelles animées dans lesquelles le visage apparaît constamment avec la denture modifiée.
Le procédé de modification virtuelle de la denture d’une personne peut comprendre une étape de calibration, consistant à réaliser une prise de vue de référence du visage de la personne dans des conditions de référence.
Le procédé de modification virtuelle de la denture d’une personne peut comprendre : - une étape d’analyse des données morphologiques relatives au visage, à partir de la vue de référence capturée lors de l’étape de calibration, permettant d’identifier des points et droites caractéristiques dans le visage de la personne, et/ou - une étape de saisie par une interface homme machine d’informations liées à l’utilisateur, comme son sexe et son âge.
Le procédé de modification virtuelle de la denture d’une personne peut considérer : - dans le cas où l’espace intra-labial est nul, les lèvres étant fermées, on affiche une image numérique du visage capturé sans modification, et - dans le cas où l’espace intra-labial est inférieur en hauteur à une limite prédéterminée, l’image numérique virtuelle du visage avec la denture modifiée contient une arcade dentaire supérieure uniquement, et - dans le cas où l’espace intra-labial est supérieur en hauteur à une limite prédéterminée, l’image numérique virtuelle du visage avec la denture modifiée contient une arcade dentaire supérieure et une arcade dentaire inférieure. L’invention porte aussi sur un programme d’ordinateur comportant des instructions logicielles pour mettre en oeuvre les étapes du procédé tel que décrit précédemment lorsque ledit programme est exécuté par un microprocesseur. L’invention porte aussi sur un dispositif de modification virtuelle d’une denture d’une personne, caractérisé en ce qu’il comprend une caméra destinée à capturer au moins une image numérique du visage d’une personne et au moins un microprocesseur qui met en oeuvre le procédé tel que décrit précédemment.
Le dispositif peut comprendre une mémoire de stockage d’un ensemble de différents modèles numériques tridimensionnels de denture. L’invention porte aussi sur un terminal de communication intégrant le dispositif tel que décrit ci-dessus.
En remarque, le procédé de l’invention peut être mis en oeuvre par la personne, de façon autonome, par exemple au domicile de la personne, sans l’assistance d’un spécialiste. Le fait de pouvoir pré-visualiser un résultat envisageable d’un traitement orthodontique et/ou esthétique peut aider la personne à prendre la décision pour contacter un dentiste et entamer des démarches en vue du traitement. En outre, le procédé permet à la personne de visualiser un ou plusieurs résultats envisageables de traitement dentaire en trois dimensions et en temps réel (c’est-à-dire en direct, de façon instantanée ou quasi-instantanée), de façon animée et dynamique, sur les images animées ou vidéo capturées. La personne peut ainsi appréhender de façon très réaliste le résultat du traitement dentaire.
La personne peut choisir le style de sourire qu’elle souhaiterait tester parmi différents styles de sourire qui lui sont proposés. La sélection d’un style de sourire est suivie de la sélection, en mémoire, dans la bibliothèque de modèles, d’un modèle numérique 3D de denture correspondant. La maquette numérique 3D de la denture modifiée est élaborée à partir du modèle de denture sélectionné.
Description sommaire des dessins
Ces objets, caractéristiques et avantages de la présente invention seront exposés en détail dans la description suivante d’un mode de réalisation particulier fait à titre non-limitatif en relation avec les figures jointes parmi lesquelles :
La figure 1A représente une première image du visage d’une personne avec sa denture réelle.
La figure 1B représente une deuxième image, virtuelle, du visage de la personne sans sa denture.
La figure 1C représente une troisième image, virtuelle, du visage de la personne avec une denture modifiée.
La figure 2 représente les étapes du procédé de modification virtuelle de la denture d’une personne, selon un mode de réalisation particulier de l’invention.
La figure 3 représente un schéma bloc fonctionnel d’un dispositif de modification virtuelle de la denture d’une personne, selon un mode de réalisation particulier de l’invention.
Description détaiiiée de modes de réaiisation particuiiers de i'invention L’invention concerne un procédé pour modifier virtuellement la denture d’une personne sur une image ou sur des images animées de son visage. Le procédé peut être mis en oeuvre par la personne elle-même, sans qu’il soit nécessaire pour elle de se déplacer chez le dentiste. Il vise ainsi à permettre à une personne de visualiser le résultat envisagé d’un traitement dentaire orthodontique et/ou esthétique, de façon réaliste et sous un angle de prise de vue quelconque.
Le procédé est mis en oeuvre par un dispositif 100 de modification virtuelle de la denture d’une personne. Ce dispositif 100 peut être un dispositif dédié à la modification virtuelle de denture ou bien être intégré dans un terminal ou dispositif ayant d’autres fonctions, par exemple un terminal de communication.
Le dispositif 100 comporte : - des moyens logiciels comprenant une application logicielle (ou « programme d’ordinateur ») de modification virtuelle de denture et - des moyens matériels, comprenant notamment un appareil photo et/ou une caméra vidéo et un écran d’affichage ; ces moyens logiciels et matériels étant destinés à coopérer pour mettre en oeuvre le procédé de modification virtuelle de la denture d’une personne. Ils seront décrits plus en détails ultérieurement.
Dans l’exemple de réalisation décrit ici, le dispositif 100 est intégré dans un terminal mobile de communication 200, en l’espèce un smartphone. Le terminal 200 intègre ici deux caméras photo/vidéo, respectivement en face avant et en face arrière, et des moyens d’interface utilisateur comportant notamment un écran d’affichage.
En référence à la figure 2, le procédé comprend une première étape de démarrage EO lors de laquelle un utilisateur lance l’application logicielle de modification virtuelle de denture sur le terminal 200.
Lors d’une étape de calibration El, sur invitation du terminal 200, l’utilisateur positionne son visage face à l’une des caméras intégrées du terminal 200 et lance une prise de vue de référence par appui sur une commande spécifique. De préférence, le visage doit être positionné en vue de face lors de cette prise de vue de calibration. Pour cela, une assistance peut être ajoutée sur l’écran du terminal, comme une zone de positionnement du visage, et éventuellement une zone de positionnement du nez et/ou des yeux, etc. En variante, le visage pourrait occuper toute autre orientation choisie. Dans tous les cas, cette étape de calibration E1 permet la réalisation d’une prise de vue du visage dans une position de référence, selon un positionnement et une orientation connus et de référence.
Lors d’une étape d’analyse E2 optionnelle, le terminal 200 détermine et analyse des données morphologiques relatives au visage, à partir de la vue de référence capturée lors de l’étape de calibration E1. L’analyse morphologique du visage permet ici d’identifier des points et droites caractéristiques dans le visage de la personne, tels que représentés sur la figure 1 b, comprenant par exemple : - une médiane D1 coupant le visage sensiblement en son milieu selon une droite verticale ou proche de la verticale ; - plusieurs droites D2-D5, orthogonales à la médiane, s’étendant respectivement en limite haute du front, à travers les deux yeux, au-dessus de la lèvre supérieure, et en limite basse du menton ; - deux segments de droite S1, S2 parallèles à la médiane D1 et coupant les yeux au centre ou sensiblement au centre de la pupille ; - les données morphologiques comprennent également des données relatives aux dimensions des lèvres.
Lors d’une étape de saisie E3 optionnelle, le terminal 200 peut demander quelques informations à l’utilisateur, comme son sexe, son âge, etc. Ces informations peuvent être saisies par une interface homme machine du terminal 200.
Lors d’une étape de sélection E4, le terminal 200 invite l’utilisateur à sélectionner un style de sourire parmi différents styles de sourire prédéfinis, par exemple par affichage d’une liste d’images de sourires de référence. Le terminal 200 contient en mémoire une bibliothèque contenant un ensemble de différents modèles numériques 3D (c’est-à-dire en trois dimensions) de denture correspondant respectivement aux différents styles ou formats de sourire prédéfinis. Autrement dit, un ensemble de modèles prédéfinis de sourires sont proposés à l’utilisateur, et chacun de ces modèles est associé en mémoire à un modèle numérique 3D d’une denture correspondant. Chaque modèle numérique 3D comprend des données numériques, comprenant d’une part des données de définition de la géométrie tridimensionnelle (donc des données de points dans l’espace tridimensionnel) de chaque arcade dentaire supérieure et inférieure, et d’autre part de données correspondant au moins à l’axe d’articulation des deux arcades dentaires supérieure et inférieure. En effet, chaque modèle numérique 3D de sourire représente un objet articulé, composé de deux arcades dentaires supérieure et inférieure mobiles l’une par rapport à l’autre selon une rotation autour de l’axe d’articulation. Leur angle d’articulation correspond en pratique à l’angle d’ouverture de la bouche ou plus précisément l’angle d’articulation de la mandibule relativement au reste du visage. Selon une variante de réalisation simplifiée, le procédé peut être mis en oeuvre que pour une seule des deux arcades dentaires supérieure ou inférieure, voire avec les deux arcades en les traitant comme deux modèles distincts et non plus un seul modèle articulé. Dans ce dernier cas, chaque image est traitée en intégrant deux modèles numériques distincts de manière séparée dans l’espace intra-labial.
En réponse à l’invitation du terminal 200, l’utilisateur sélectionne l’un des styles de sourire prédéfinis proposés. Suite à la sélection par l’utilisateur d’un style de sourire parmi les différents styles de sourire prédéfinis proposés, le modèle numérique 3D de denture correspondant est sélectionné dans la bibliothèque de modèles numériques 3D de denture, de préférence mémorisée sur une mémoire électronique du terminal.
En variante, la sélection du modèle numérique de denture est réalisée automatiquement par une fonction logicielle du terminal, parmi un nombre restreint de modèles disponibles, en fonction du sexe de la personne par exemple et/ou de son âge. Selon une application simplifiée de cette variante, la bibliothèque ne comprend qu’un seul modèle et cette étape se résume à la récupération des données numériques de ce modèle unique depuis une mémoire électronique du terminal. Dans ce cas, il n’y a pas de sélection réelle, et cette étape de sélection reste optionnelle.
Selon une autre variante, la sélection utilise le résultat de l’analyse morphologique de l’étape d’analyse E2, qui permet de déterminer automatiquement le sourire idéal en fonction des données morphologiques de la personne, de manière connue. En remarque, cette analyse dépend principalement de la morphologie globale du visage, et pas ou peu des dents réelles existantes. Ensuite, le procédé comprend une étape de comparaison des données des différents modèles numériques de denture présents dans la bibliothèque de modèles, afin de procéder à la sélection automatique du modèle le plus proche du sourire idéal élaboré par l’analyse morphologique.
Selon une autre variante, le terminal 200 élabore une maquette numérique 3D d’une denture modifiée de l’utilisateur, adaptée à la morphologie du visage de celui-ci, par modification d’un modèle numérique 3D de denture choisi parmi la bibliothèque de modèles. La modification consiste ici à redimensionner le modèle numérique 3D mémorisé en fonction des données morphologiques du visage.
En fin de cette étape de sélection, le terminal dispose d’un fichier numérique représentant un modèle numérique 3D de denture qui va être associé à l’utilisateur. En remarque, dans tous les cas, cette étape de sélection E4 peut se faire sans visualisation des dents réelles. La vue de référence de l’étape de calibration E1 peut ainsi être prise la bouche fermée.
Lors d’une étape de prise(s) de vue E5, le terminal prend une ou plusieurs photos du visage de l’utilisateur. Dans cette phase, l’utilisateur peut se positionner librement relativement au terminal, à une distance et selon une orientation de son visage quelconques.
Lors d’une étape de traitement E6, le terminal 200 détermine, pour chaque prise de vue : - la distance du visage et son orientation, vis-à-vis du repère formé par le terminal ; - un espace intra-labial, c’est-à-dire un espace entre les lèvres de l’utilisateur, à partir des données morphologiques relatives au visage de l’utilisateur ; - un angle d’articulation de la mandibule (ou de la bouche), pour en déduire l’angle d’articulation des deux arcades dentaires. Cet angle peut être obtenu par la mesure des distances entre les deux lèvres supérieure et inférieure, et/ou en tenant compte de la distance entre le menton et la lèvre supérieure, voire le nez.
Ce traitement est réalisé automatiquement, à partir des données morphologiques du visage, comparées avec ces mêmes données identifiées lors de l’étape de calibration.
Lors de l’étape El, le terminal 200 génère une image numérique virtuelle du visage de l’utilisateur avec une denture modifiée, en intégrant la denture modifiée déterminée lors de l’étape de sélection E4 et de l’espace intra-labial déterminé lors de l’étape de traitement E6 sur une prise de vue. A cet effet, l’espace intra-labial des images capturées est évidé, la denture initiale étant supprimée, comme représenté sur la figure 1B. La denture modifiée, sélectionnée à l’étape de sélection E4 est insérée dans l’espace intra-labial évidé à la place de la denture initiale. En remarque, cette intégration de la denture modifiée sur la prise de vue prend en compte la position du visage (distance, orientation) par rapport à la position de référence, pour positionner le modèle numérique tridimensionnel de la denture selon ces mêmes critères. Autrement dit, l’image de la denture modifiée est positionnée avec une orientation identique à celle du visage par rapport à une position de référence. De plus, la distance du visage et plus généralement la position du visage par rapport à la caméra est de même prise en compte pour reproduire une vue de la denture modifiée en correspondance. La denture modifiée apparaît ainsi plus ou moins grande selon la distance déterminée. L’espace intra-labial détermine les limites du modèle numérique tridimensionnel à visualiser, permet de déterminer l’éventuelle troncature de ce modèle. Enfin, l’angle d’articulation entre les mâchoires permet d’en déduire l’angle (ou angle d’articulation) entre les deux arcades dentaires supérieure et inférieure de la denture modifiée. Il en résulte une intégration d’un modèle tridimensionnel dans un espace intra-labial, ce modèle étant représenté selon sa vue dans l’orientation déterminée, l’angle d’articulation déterminé, un zoom avant ou arrière dépendant de la distance de la caméra déterminée, sur une prise de vue bidimensionnelle formée par le reste de l’image du visage en dehors des dents. La figure 1C représente le résultat obtenu sur l’exemple illustré.
Selon un mode de réalisation particulier, les prises de vue de l’étape E5 consistent en des images animées capturées par la caméra du terminal, de type vidéo, l’utilisateur se filmant avec le terminal et pouvant bouger devant ce terminal. Dans ce mode de réalisation, les étapes E5 à E7 sont réalisées en temps réel. Ainsi, le procédé permet l’intégration d’un même modèle de denture modifiée sélectionné sur toutes les images, la vue de ce modèle étant adaptée en temps réel à la modification de la position du visage sur chaque image. Dans tous les cas, l’invention porte sur le traitement particulier relatif à l’intégration d’un modèle de denture tridimensionnel, et non sur le traitement global de l’image, qui peut être réalisé selon des méthodes connues de l’état de la technique, par exemple sur la base de l’enseignement du document US9129147.
En remarque, selon une variante de réalisation, dans le cas d’une vidéo, le terminal pourrait répéter l’étape de sélection E4 pour chaque image, en complément des étapes ultérieures E5 à E7.
Le procédé comprend ici une étape d’affichage E8 des images numériques virtuelles générées, en temps réel, concomitamment à la capture d’images animées (étape E5), de manière à remplacer l’affichage en temps réel des images animées capturées par les images générées correspondantes.
En remarque, dans le cas où l’espace intra-labial est nul, les lèvres étant fermées, les images animées numériques du visage capturées ne sont pas modifiées (puisque la dentition modifiée, comme la dentition réelle, est complètement cachée). On affiche alors les images animées numériques du visage capturées sans modification.
Dans le cas où l’espace intra-labial est inférieur ou égal en hauteur à une limite prédéterminée, les images numériques virtuelles animées et en 3D du visage avec la denture modifiée contiennent uniquement une arcade dentaire supérieure de la maquette 3D de denture modifiée.
Dans le cas où l’espace intra-labial est supérieur en hauteur à une limite prédéterminée, les images numériques virtuelles animées et en 3D du visage avec la denture modifiée contiennent à la fois une arcade dentaire supérieure et une arcade dentaire inférieure de la maquette 3D de denture modifiée.
Dans le cas où l’angle de prise de vue de la capture d’images est modifié, du fait par exemple que l’utilisateur a bougé sa tête de haut en bas ou sur le côté par rapport à la caméra du terminal, comme indiqué par les flèches sur la figure 1C, la représentation de la denture modifiée est représentée dans l’espace intra-labial suivant un angle modifié correspondant, ce qui est possible par le fait que cette denture est identifiée de manière tridimensionnelle par le fichier de données à disposition.
Le dispositif 100 de détermination de modification virtuelle d’une denture d’une personne à partir d’images animées du visage d’un individu, comprend les éléments suivants : - au moins une caméra vidéo 1 ; - un module 2 de détermination et d’analyse en temps réel ou non de données morphologiques relatives au visage, à partir des images capturées, destiné à mettre en oeuvre l’étape E2 ; - un module 3 de sélection d’une maquette numérique 3D d’une denture modifiée par traitement numérique d’un modèle numérique 3D de denture en fonction des données morphologiques déterminées, destiné à mettre en oeuvre l’étape E4 ; - un module 4 de traitement en temps réel ou non d’un espace intra-labial à partir des images animées capturées du visage, destiné à mettre en oeuvre l’étape E6 ; - un module 5 de génération en temps réel ou non d’images numériques virtuelles animées ou non et en 3D du visage avec une denture modifiée, à partir de la ou des images animées capturées et de la denture modifiée déterminée, la maquette de denture modifiée étant adaptée, en temps réel ou non, à l’espace intra-labial, destiné à mettre en oeuvre l’étape E7 ; - un module 6 d’affichage des images numériques virtuelles générées.
La caméra 1 est destinée à capturer des images animées numériques du visage de la personne. Le dispositif 100 étant ici intégré dans le terminal 200 équipé d’une caméra, la caméra 1 est celle du terminal 200.
Le module d’affichage 6 comprend un écran d’affichage et un pilote d’affichage destiné à contrôler l’affichage. Le dispositif 100 étant intégré dans le terminal 200, le module d’affichage 5 est celui du terminal 200.
Les modules 2 à 5 sont des modules logiciels comportant des instructions logicielles pour mettre en oeuvre le procédé décrit précédemment lorsque les instructions sont exécutées par un microprocesseur, ici le microprocesseur du terminal 200.
Le dispositif 100 comprend également une mémoire 7 de stockage d’un ensemble de différents modèles numériques 3D de denture représentant respectivement différents styles de sourire et éventuellement un module de sélection 8 permettant à un utilisateur de sélectionner l’un des modèles numériques 3D stockés en mémoire.
Enfin, le dispositif 100 comprend une unité centrale de traitement 9, en l’espèce un microprocesseur, connectée à tous les éléments du dispositif 100 et destiné à contrôler le fonctionnement de ces éléments. Le dispositif 100 étant intégré dans un terminal 200, l’unité centrale est le microprocesseur du terminal 200. L’invention concerne aussi un programme d’ordinateur comportant des instructions logicielles pour mettre en oeuvre les étapes du procédé précédemment décrit lorsque le programme est exécuté par le microprocesseur 9.
Claims (14)
- REVENDICATIONS1. Procédé de modification virtuelle de la denture d’une personne à partir d’au moins une image du visage de la personne, caractérisé en ce qu’il comprend les étapes suivantes : - capture (E5) d’au moins une image numérique du visage de la personne à l’aide d’une caméra ; - traitement (E6) de données morphologiques relatives au visage de la personne, à partir d’au moins une image capturée ; - génération d’au moins une image numérique virtuelle (E7) du visage de l’utilisateur avec une denture modifiée intégrée dans l’espace intra-labial identifié à l’étape de traitement d’au moins une image numérique capturée, à partir d’un fichier de données numériques représentant de manière tridimensionnelle la denture modifiée.
- 2. Procédé de modification virtuelle de la denture d’une personne selon la revendication précédente, caractérisé en ce que l’étape de traitement (E6) comprend, pour chaque prise de vue, une étape de détermination de : - la distance du visage de la personne et son orientation, vis-à-vis du repère formé par la caméra ; - un espace intra-labial, à partir des données morphologiques relatives au visage de la personne ; - un angle d’ouverture de la mandibule, pour en déduire l’angle d’articulation de deux arcades dentaires supérieure et inférieure de la denture modifiée.
- 3. Procédé de modification virtuelle de la denture d’une personne selon la revendication précédente, caractérisé en ce que l’étape de génération d’au moins une image numérique virtuelle (E7) du visage de la personne avec une denture modifiée comprend l’intégration d’une vue d’une denture modifiée selon la même distance, la même orientation et le même angle d’articulation que celles du visage lors de la prise de vue, cette vue de denture modifiée étant élaborée à partir des données tridimensionnelles du fichier de données numériques représentant la denture modifiée comprenant deux arcades supérieure et inférieure articulées.
- 4. Procédé de modification virtuelle de la denture d’une personne selon l’une des revendications précédentes, caractérisé en ce qu’il comprend une étape de sélection (E4) d’un fichier de données numériques représentant de manière tridimensionnelle la denture modifiée dans une bibliothèque contenant un ensemble de différents modèles numériques tridimensionnels de denture sur une mémoire électronique.
- 5. Procédé de modification virtuelle de la denture d’une personne selon la revendication précédente, caractérisé en ce que l’étape de sélection (E4) comprend la prise en compte des données suivantes : - le sexe et/ou l’âge de la personne ; et/ou - le résultat d’une étape d’analyse (E2) de données morphologique, qui permet de déterminer automatiquement le sourire idéal de la personne.
- 6. Procédé de modification virtuelle de la denture d’une personne selon la revendication 4 ou 5, caractérisé en ce qu’il comprend une étape de modification d’un modèle numérique de denture choisi parmi la bibliothèque de modèles pour l’adapter au visage de la personne.
- 7. Procédé de modification virtuelle de la denture d’une personne selon l’une des revendications précédentes, caractérisé en ce qu’il comprend une étape de génération (E8) en temps réel d’images numériques virtuelles animées du visage de la personne avec une denture modifiée, chaque image numérique virtuelle de l’ensemble d’images numériques virtuelles animées étant obtenue par la mise en oeuvre des étapes de capture (E5), de traitement (E6), de génération d’au moins une image numérique virtuelle (E7) à partir du même fichier de données numériques représentant de manière tridimensionnelle la denture modifiée, ladite denture modifiée étant adaptée en temps réel aux mouvements du visage, selon sa distance à la caméra, son orientation, à l’espace intra-labial et à l’angle d’ouverture de la mandibule, pour générer des images virtuelles animées dans lesquelles le visage apparaît constamment avec la denture modifiée.
- 8. Procédé de modification virtuelle de la denture d’une personne selon l’une des revendications précédentes, caractérisé en ce qu’il comprend une étape de calibration (E1), consistant à réaliser une prise de vue de référence du visage de la personne dans des conditions de référence.
- 9. Procédé de modification virtuelle de la denture d’une personne selon la revendication précédente, caractérisé en ce qu’il comprend : - une étape d’analyse (E2) des données morphologiques relatives au visage, à partir de la vue de référence capturée lors de l’étape de calibration (E1), permettant d’identifier des points et droites caractéristiques dans le visage de la personne, et/ou - une étape de saisie (E3) par une interface homme machine d’informations liées à l’utilisateur, comme son sexe et son âge.
- 10. Procédé de modification virtuelle de la denture d’une personne selon l’une des revendications précédentes, caractérisé en ce que : - dans le cas où l’espace intra-labial est nul, les lèvres étant fermées, on affiche une image numérique du visage capturé sans modification, et - dans le cas où l’espace intra-labial est inférieur en hauteur à une limite prédéterminée, l’image numérique virtuelle du visage avec la denture modifiée contient une arcade dentaire supérieure uniquement, et - dans le cas où l’espace intra-labial est supérieur en hauteur à une limite prédéterminée, l’image numérique virtuelle du visage avec la denture modifiée contient une arcade dentaire supérieure et une arcade dentaire inférieure.
- 11. Programme d’ordinateur comportant des instructions logicielles pour mettre en oeuvre les étapes du procédé selon l’une des revendications précédentes lorsque ledit programme est exécuté par un microprocesseur.
- 12. Dispositif de modification virtuelle d’une denture d’une personne, caractérisé en ce qu’il comprend une caméra (1) destinée à capturer au moins une image numérique du visage d’une personne et au moins un microprocesseur qui met en oeuvre le procédé selon l’une des revendications 1 à 10.
- 13. Dispositif selon la revendication précédente, caractérisé en ce qu’il comprend une mémoire (7) de stockage d’un ensemble de différents modèles numériques tridimensionnels de denture.
- 14. Terminal de communication intégrant le dispositif selon l’une des revendications 12 et 13.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FR1651709A FR3048541B1 (fr) | 2016-03-01 | 2016-03-01 | Modification virtuelle de la denture d'une personne |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FR1651709A FR3048541B1 (fr) | 2016-03-01 | 2016-03-01 | Modification virtuelle de la denture d'une personne |
FR1651709 | 2016-03-01 |
Publications (2)
Publication Number | Publication Date |
---|---|
FR3048541A1 true FR3048541A1 (fr) | 2017-09-08 |
FR3048541B1 FR3048541B1 (fr) | 2019-09-27 |
Family
ID=55808697
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
FR1651709A Active FR3048541B1 (fr) | 2016-03-01 | 2016-03-01 | Modification virtuelle de la denture d'une personne |
Country Status (1)
Country | Link |
---|---|
FR (1) | FR3048541B1 (fr) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1999059106A1 (fr) * | 1998-05-13 | 1999-11-18 | Acuscape International, Inc. | Procede pour generer des modeles en 3d a partir d'images medicales |
US20130158958A1 (en) * | 2010-07-12 | 2013-06-20 | Alain Methot | Dental analysis method and system |
FR3010629A1 (fr) * | 2013-09-19 | 2015-03-20 | Philippe Salah | Procede de controle du positionnement de dents |
US20150265374A1 (en) * | 2014-03-18 | 2015-09-24 | President And Fellows Of Harvard College | 3d dentofacial system and method |
-
2016
- 2016-03-01 FR FR1651709A patent/FR3048541B1/fr active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1999059106A1 (fr) * | 1998-05-13 | 1999-11-18 | Acuscape International, Inc. | Procede pour generer des modeles en 3d a partir d'images medicales |
US20130158958A1 (en) * | 2010-07-12 | 2013-06-20 | Alain Methot | Dental analysis method and system |
FR3010629A1 (fr) * | 2013-09-19 | 2015-03-20 | Philippe Salah | Procede de controle du positionnement de dents |
US20150265374A1 (en) * | 2014-03-18 | 2015-09-24 | President And Fellows Of Harvard College | 3d dentofacial system and method |
Also Published As
Publication number | Publication date |
---|---|
FR3048541B1 (fr) | 2019-09-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3212646B1 (fr) | Procédé de contrôle de la dentition | |
EP4101418B1 (fr) | Systeme de fabrication d'un appareil orthodontique | |
EP3659545B1 (fr) | Système de contrôle du positionnement de dents d'un patient | |
EP3148402B1 (fr) | Dispositif de visualisation de l'interieur d'une bouche d'un patient | |
EP3572029B1 (fr) | Dispositif d'analyse d'une situation dentaire | |
EP3273905B1 (fr) | Procede de determination d'une cartographie des contacts et/ou des distances entre les arcades maxillaire et mandibulaire d'un individu | |
EP3796866B1 (fr) | Programme d'ordinateur et dispositif pour l'analyse d'une situation dentaire | |
US20210267716A1 (en) | Method for simulating a dental situation | |
FR3102285A1 (fr) | Procede de generation d’une image dentaire | |
CA2949683C (fr) | Procede de determination d'au moins un parametre comportemental | |
FR3048541B1 (fr) | Modification virtuelle de la denture d'une personne | |
EP4167898B1 (fr) | Procédé de fabrication d'un appareil orthodontique | |
WO2021250065A1 (fr) | Procede de suivi d'un mouvement dentaire | |
WO2024047019A1 (fr) | Procédé de scannage d'une arcade dentaire d'un utilisateur |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PLFP | Fee payment |
Year of fee payment: 2 |
|
PLSC | Publication of the preliminary search report |
Effective date: 20170908 |
|
PLFP | Fee payment |
Year of fee payment: 3 |
|
PLFP | Fee payment |
Year of fee payment: 4 |
|
PLFP | Fee payment |
Year of fee payment: 5 |
|
PLFP | Fee payment |
Year of fee payment: 6 |
|
PLFP | Fee payment |
Year of fee payment: 7 |
|
PLFP | Fee payment |
Year of fee payment: 8 |
|
PLFP | Fee payment |
Year of fee payment: 9 |