FR3060735A1 - Procede de mesure d'une partie du corps a partir de photographies numeriques, et mise en oeuvre d'un tel procede pour la fabrication de chaussures sur mesure - Google Patents

Procede de mesure d'une partie du corps a partir de photographies numeriques, et mise en oeuvre d'un tel procede pour la fabrication de chaussures sur mesure Download PDF

Info

Publication number
FR3060735A1
FR3060735A1 FR1662478A FR1662478A FR3060735A1 FR 3060735 A1 FR3060735 A1 FR 3060735A1 FR 1662478 A FR1662478 A FR 1662478A FR 1662478 A FR1662478 A FR 1662478A FR 3060735 A1 FR3060735 A1 FR 3060735A1
Authority
FR
France
Prior art keywords
foot
photographs
photograph
characteristic
characteristic dimension
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
FR1662478A
Other languages
English (en)
Other versions
FR3060735B1 (fr
Inventor
Maxime MOREAUD
Franck Le Franc
Sophie Engster
Frederic Itthirad
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chamberlan
IFP Energies Nouvelles IFPEN
Original Assignee
Chamberlan
IFP Energies Nouvelles IFPEN
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chamberlan, IFP Energies Nouvelles IFPEN filed Critical Chamberlan
Priority to FR1662478A priority Critical patent/FR3060735B1/fr
Priority to EP17832789.6A priority patent/EP3555559A1/fr
Priority to PCT/FR2017/053623 priority patent/WO2018109421A1/fr
Priority to EA201991588A priority patent/EA201991588A1/ru
Publication of FR3060735A1 publication Critical patent/FR3060735A1/fr
Application granted granted Critical
Publication of FR3060735B1 publication Critical patent/FR3060735B1/fr
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00—Measuring arrangements characterised by the use of optical techniques
    • G01B11/02—Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness
    • A—HUMAN NECESSITIES
    • A23—FOODS OR FOODSTUFFS; TREATMENT THEREOF, NOT COVERED BY OTHER CLASSES
    • A23K—FODDER
    • A23K10/00—Animal feeding-stuffs
    • A23K10/20—Animal feeding-stuffs from material of animal origin
    • A—HUMAN NECESSITIES
    • A23—FOODS OR FOODSTUFFS; TREATMENT THEREOF, NOT COVERED BY OTHER CLASSES
    • A23K—FODDER
    • A23K40/00—Shaping or working-up of animal feeding-stuffs
    • A23K40/10—Shaping or working-up of animal feeding-stuffs by agglomeration; by granulation, e.g. making powders
    • A—HUMAN NECESSITIES
    • A43—FOOTWEAR
    • A43D—MACHINES, TOOLS, EQUIPMENT OR METHODS FOR MANUFACTURING OR REPAIRING FOOTWEAR
    • A43D1/00—Foot or last measuring devices; Measuring devices for shoe parts
    • A43D1/02—Foot-measuring devices
    • A43D1/025—Foot-measuring devices comprising optical means, e.g. mirrors, photo-electric cells, for measuring or inspecting feet
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
    • A61B5/1074—Foot measuring devices
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6898—Portable consumer electronic devices, e.g. music players, telephones, tablet computers
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B21/00—Measuring arrangements or details thereof, where the measuring technique is not covered by the other groups of this subclass, unspecified or not relevant
    • G01B21/02—Measuring arrangements or details thereof, where the measuring technique is not covered by the other groups of this subclass, unspecified or not relevant for measuring length, width, or thickness
    • G01B21/04—Measuring arrangements or details thereof, where the measuring technique is not covered by the other groups of this subclass, unspecified or not relevant for measuring length, width, or thickness by measuring coordinates of points
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/60—Analysis of geometric attributes
    • G06T7/62—Analysis of geometric attributes of area, perimeter, diameter or volume
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2576/00—Medical imaging apparatus involving image processing or analysis
    • A61B2576/02—Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
    • A61B5/1072—Measuring physical dimensions, e.g. size of the entire body or parts thereof measuring distances on the body, e.g. measuring length, height or thickness
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
    • A61B5/1079—Measuring physical dimensions, e.g. size of the entire body or parts thereof using optical or photographic means
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing

Landscapes

  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Polymers & Plastics (AREA)
  • Molecular Biology (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • General Physics & Mathematics (AREA)
  • Pathology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Medical Informatics (AREA)
  • Food Science & Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Zoology (AREA)
  • Biotechnology (AREA)
  • Dentistry (AREA)
  • Physiology (AREA)
  • Multimedia (AREA)
  • Geometry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Animal Husbandry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Footwear And Its Accessory, Manufacturing Method And Apparatuses (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Fodder In General (AREA)
  • General Preparation And Processing Of Foods (AREA)
  • Meat, Egg Or Seafood Products (AREA)

Abstract

- L'invention porte sur un procédé de photogrammétrie numérique pour la mesure d'une partie du corps humain, de préférence un pied, ou encore une main ou un cou, sans reconstruction 3D de ladite partie du corps. En particulier, l'invention permet de déterminer des dimensions caractéristiques d'un pied à partir d'images numériques, en vue de leur utilisation pour la fabrication sur-mesure de chaussures. Les photographies sont avantageusement prises à l'aide d'un téléphone intelligent disposant d'un appareil photographique, par la personne elle-même, selon une procédure de prise de vue simple.

Description

Titulaire(s) : IFP ENERGIES NOUVELLES Etablissement public, CHAMBERLAN Société par actions simplifiée.
Demande(s) d’extension
Mandataire(s) : IFP ENERGIES NOUVELLES.
FR 3 060 735 - A1 (541 PROCEDE DE MESURE D'UNE PARTIE DU CORPS A PARTIR DE PHOTOGRAPHIES NUMERIQUES, ET MISE EN OEUVRE D'UN TEL PROCEDE POUR LA FABRICATION DE CHAUSSURES SUR MESURE.
©) - L'invention porte sur un procédé de photogrammétrie numérique pour la mesure d'une partie du corps humain, de préférence un pied, ou encore une main ou un cou, sans reconstruction 3D de ladite partie du corps. En particulier, l'invention permet de déterminer des dimensions caractéristiques d'un pied à partir d'images numériques, en vue de leur utilisation pour la fabrication sur-mesure de chaussures. Les photographies sont avantageusement prises à l'aide d'un téléphone intelligent disposant d'un appareil photographique, par la personne elle-même, selon une procédure de prise de vue simple.
Figure FR3060735A1_D0001
Figure FR3060735A1_D0002
Figure FR3060735A1_D0003
Figure FR3060735A1_D0004
Domaine de l'invention
La présente invention concerne le domaine de la mesure à partir de photographies numériques, aussi appelé photogrammétrie, en particulier la mesure d’une partie du corps humain, et plus spécifiquement la mesure d’un pied. L’invention est avantageusement utilisée dans le cadre de la fabrication de chaussures sur-mesure.
Contexte général et objectifs de l’invention
On connaît des procédés de mesure à partir d’images numériques d’un objet, en particulier du corps humain, faisant appel à des procédures complexes de traitement des images visant à fournir une reconstruction tridimensionnelle (3D) de l’objet.
De nombreuses méthodes de reconstruction 3D d’un objet à partir de photographies numériques existent, certaines étant basées sur l’utilisation d’une mire de calibrage pour l’étape de calibration du capteur, et sur le traitement de plusieurs images de l’objet pour la reconstruction de celui-ci dans l’espace.
La présente invention propose une méthode simple et robuste pour mesurer une partie du corps, tel qu’un pied, une main ou un cou, à partir de photographies numériques, sans faire appel à une reconstruction 3D de ladite partie du corps. La méthode proposée peut avantageusement être mise en œuvre par la personne elle-même qui souhaite mesurer une partie de son corps, sans dispositif de prise d’images dédié, c’est-à-dire par exemple au moyen d’un simple téléphone intelligent comportant un appareil photographique.
La présente invention vise en particulier à fournir des mesures effectuées selon cette méthode pour la fabrication sur-mesure d’une chaussure, dans le cas où l’on mesure un pied, ou encore d’un accessoire de mode, typiquement un bijou, à partir de la mesure du pied ou d’une autre partie du corps comme les mains ou le cou d’une personne.
L’invention permet notamment d’estimer seules les dimensions caractéristiques de la partie du corps que l’on souhaite mesurer qui seront utiles à la fabrication surmesure.
Résumé de l'invention
L’invention se rapporte ainsi plus précisément à un procédé de mesure d’une partie du corps humain à partir de photographies numériques, sans reconstruction 3D de la partie du corps, comprenant les étapes suivantes :
- l’acquisition à l’aide d’un dispositif d’acquisition photographique d’au moins une photographie de la partie du corps et d’une mire 2D connue comportant au moins trois marqueurs, de telle sorte que la photographie contienne entièrement au moins une dimension caractéristique de la partie du corps que l’on souhaite déterminer et les trois marqueurs de la mire ;
- le calibrage du dispositif d’acquisition photographique à partir de ladite au moins une photographie par l’établissement d’une matrice de calibration permettant la correspondance entre un point de la photographie et un point 3D exprimé dans un repère monde ;
- la détermination de la dimension caractéristique de la partie du corps à partir de ladite au moins une photographie et de la matrice de calibration.
De préférence, la dimension caractéristique de la partie du corps est une distance euclidienne entre deux points de la partie du corps ou un périmètre de la partie du corps.
Selon une mise en oeuvre, on détermine au moins une dimension caractéristique de la partie du corps à partir d’une seule photographie et de la matrice de calibration, la matrice permettant de réaliser la correspondance entre un point de la photographie et un point 3D situé dans le plan de la mire et exprimé dans le repère monde.
Selon une mise en oeuvre, on acquiert au moins deux photographies avec le dispositif d’acquisition photographique dans deux positions différentes de telle sorte que chaque photographie contienne ladite au moins une dimension caractéristique à déterminer, on estime la transformation entre les positions des deux photographies lors du calibrage, et on détermine ladite au moins une dimension caractéristique connaissant ladite transformation.
Selon une mise en oeuvre, on détermine au moins une dimension caractéristique de type distance euclidienne entre deux points à partir de deux photographies, lesdites deux photographies étant acquises selon un mouvement de translation du dispositif d’acquisition photographique.
Selon une mise en œuvre, on détermine au moins une dimension caractéristique de type périmètre à partir de n photographies prises dans n positions différentes autour de la partie du corps, n étant supérieur ou égal à deux, typiquement compris entre 3 et 10 photographies.
Dans ce cas, on mesure de préférence sur chaque photographie i, i allant de 1 à n, la longueur du diamètre apparent di sur la photographie i, et on estime le périmètre p au moyen de la formule suivante :
7Γ n
Ρ=-ΣΛ n i=i
Avantageusement, le dispositif d’acquisition photographique est un appareil photographique d’un téléphone intelligent.
Selon une mise en œuvre, les photographies sont transmises à un ordinateur distant pour réaliser les étapes de calibrage et de détermination de la ou des dimension(s) caractéristique(s) du corps.
Selon une mise en œuvre, les étapes suivantes sont réalisées :
- on exprime le plan formé par la mire 2D dans le repère du monde ;
- on surimpose à ladite au moins une photographie un modèle 3D générique de la partie du corps à mesurer, le modèle étant préalablement calibré avec des dimensions génériques réelles de la partie du corps à mesurer, et ;
- on déforme le modèle 3D sur la photographie de manière à faire coïncider des points caractéristiques appartenant au plan formé par la mire 2D de la photographie et du modèle 3D ;
- on détermine la dimension caractéristique à partir du modèle 3D déformé.
Selon une mise en œuvre, l’acquisition des photographies est guidée au moyen d’indications visuelles, tel que l’affichage en transparence dans la photographie d’un dessin de la partie du corps et de la mire, ou au moyen d’indications sonores tel qu’un bip sonore ou d’indications tactiles telles que des vibrations signalant de préférence que le geste effectué pour l’acquisition n’est pas le bon.
Selon une mise en œuvre, on mesure un pied, et la dimension caractéristique du pied mesurée est une dimension caractéristique utile à un bottier, de préférence choisie parmi une longueur, une largeur, une hauteur, un périmètre d’une partie du pied.
De préférence, on détermine au moins une dimension caractéristique d’au moins un point de mesure du pied suivant :
- la pointure ;
- la grosseur au doigt ;
- le coup de pied ;
- l’entrée ;
- la malléole ;
- la cheville ;
- le point fort du mollet ;
- le sous genou ; et
- le petit orteil-talon, et on détermine de préférence au moins une dimension caractéristique pour chacun desdits points de mesure.
Selon une mise en œuvre, on acquiert au moins deux photographies lors d’au moins un des mouvements (a) à (d) suivants :
(a) un mouvement de translation du dispositif d’acquisition photographique au-dessus du pied, de préférence dans un plan sensiblement horizontal et dans une direction perpendiculaire à la longueur du pied ;
(b) un mouvement de translation du dispositif d’acquisition photographique à l’intérieur et à l’extérieur du pied, de préférence dans un plan sensiblement vertical et dans une direction parallèle à la longueur du pied ;
(c) un mouvement de rotation du dispositif d’acquisition photographique autour de la cheville ;
(d) un mouvement de rotation dispositif d’acquisition photographique autour de la jambe, et on détermine au moins une des dimensions caractéristiques des points de mesures suivants selon les mouvements du dispositif d’acquisition photographique lors de l’acquisition des photographies :
- la grosseur au doigt et/ou du coup de pied à partir des photographies acquises selon le mouvement (a);
- la pointure et/ou la grosseur au doigt et/ou le coup de pied et/ou l’entrée et/ou la malléole à partir des photographies acquises selon le mouvement (b);
- l’entrée et/ou la cheville à partir des images acquises selon le mouvement (c);
- le point fort du mollet et/ou le sous genou et/ou le petit orteil-talon à partir des photographies acquises selon le mouvement (d).
Selon une mise en œuvre, on mesure une main ou un cou.
Selon un second aspect, la présente invention porte sur un procédé de fabrication d’une chaussure, dans lequel :
- on détermine au moins une dimension caractéristique du pied par le procédé de mesure selon l’invention, de préférence au moins la pointure, et encore plus préférentiellement les dimensions caractéristiques de tous les points de mesures suivants : la pointure, la grosseur au doigt, le coup de pied, l’entrée, la malléole, la cheville, le point fort du mollet, le sous genou, et le petit orteil-talon ; et
- on réalise une chaussure sur mesure à partir de ladite au moins une dimension caractéristique du pied, et de préférence à partir des dimensions caractéristiques de tous lesdits points de mesures.
Selon un troisième aspect, la présente invention porte sur un procédé de fabrication d’un accessoire de mode adapté à la morphologie d’une partie du corps humain, dans lequel :
- on détermine au moins une dimension caractéristique de la partie du corps, de préférence d’une main, d’un cou ou d’un pied, par le procédé selon l’invention, et de préférence le diamètre d’un doigt de la main, le diamètre du poignet, le diamètre du cou, ou le diamètre d’une partie du pied telle que la cheville ; et
- on réalise ledit accessoire de mode sur mesure à partir de ladite au moins une dimension caractéristique.
D’autres objets et avantages de l’invention apparaîtront à la lecture de la description qui suit d’exemples de réalisations particuliers de l’invention, donnés à titre d’exemples non limitatifs, la description étant faite en référence aux figures annexées décrites ci-après.
Brève description des figures
La figure 1A illustre un exemple de mise en œuvre du procédé de mesure selon l’invention comprenant une prise de photographie(s) avec un téléphone intelligent d’un pied humain posé sur une mire.
La figure 1B est un exemple de mire 2D utilisée pour le calibrage du dispositif d’acquisition photographique.
Les figures 2A et 2B illustrent une mise en œuvre de l’invention dans laquelle on détermine une longueur telle que la longueur d’un pied (pointure) au moyen d’une mire 2D et d’une photographie. La figure 2A est un schéma de la prise de vue du pied et de la mire. La figure 2B représente la photographie acquise lors de la prise de vue selon la figure 2A.
Les figures 3A et 3B illustrent une mise en œuvre de l’invention dans laquelle on détermine une longueur telle que la longueur d’un pied (pointure) au moyen d’une mire 2D et de deux photographies. La figure 3A est un schéma de la prise de vue du pied et de la mire. La figure 3B représente deux photographies acquises lors de la prise de vue selon la figure 3A.
Les figures 4A et 4B illustrent une mise en œuvre de l’invention dans laquelle on détermine un périmètre du pied, en particulier le périmètre du coup de pied, au moyen d’une mire 2D et de trois photographies. La figure 4A est un schéma de la prise de vue du pied et de la mire. La figure 4B représente les trois photographies acquises lors de la prise de vue selon la figure 4A.
La figure 5 illustre les différents points de mesures d’un pied pouvant être déterminés par le procédé selon l’invention.
La figure 6 illustre la gestuelle réalisée pour l’acquisition des images selon une mise en œuvre de l’invention.
Sur les figures, les mêmes références désignent des éléments identiques ou analogues.
Description détaillée de l'invention
La présente invention porte sur un procédé de mesure d’une partie du corps humain à partir de photographies numériques mettant en œuvre un dispositif d’acquisition photographique numérique, une mire et un traitement algorithmique spécifique des photographies acquises.
Avantageusement, la mesure selon l’invention ne repose pas sur une reconstruction 3D de la partie du corps, comme cela peut être le cas de méthodes connues. Une telle reconstruction 3D d’un objet signifie principalement que tout l’objet d’étude est reconstruit, c’est-à-dire qu’une représentation en 3D de l’objet est obtenue à partir d’un ensemble d’images de l’objet prises sous des angles de vue différents. On conçoit alors qu'à partir de cette reconstruction 3D, on pourrait estimer n’importe quelle dimension que l’on souhaiterait connaître de l’objet d’étude. Cependant la reconstruction 3D d’un objet fait généralement appel à des procédures complexes d’acquisition et de traitement d’images, souvent coûteuses en temps de calcul. Cette approche par reconstruction 3D de l’objet n’a pas été adoptée par les inventeurs.
La présente invention propose ainsi un procédé de mesure d’une partie du corps humain à partir de photographies numériques, sans reconstruction 3D de ladite partie du corps, qui permet l’estimation de dimensions caractéristiques de ladite partie du corps.
Le procédé comprend les étapes suivantes :
- l’acquisition à l’aide d’un dispositif d’acquisition photographique d’au moins une photographie de la partie du corps et d’une mire 2D connue comportant au moins trois marqueurs, de telle sorte que la photographie contienne entièrement au moins une dimension caractéristique de la partie du corps que l’on souhaite déterminer et les trois marqueurs de la mire ;
- le calibrage du dispositif d’acquisition photographique à partir de ladite au moins une photographie par l’établissement d’une matrice de calibration permettant la correspondance entre un point de la photographie et un point 3D exprimé dans un repère monde ;
- la détermination de la dimension caractéristique de la partie du corps à partir de ladite au moins une photographie et de la matrice de calibration.
Notamment parce que le procédé selon l’invention ne repose pas sur une reconstruction 3D de ladite partie du corps, mais également en raison de la souplesse de prise de vue mise en œuvre et du type de traitement des images réalisé, détaillés plus bas dans la description, le présent procédé est simple et robuste.
Plusieurs parties du corps humain telles que les pieds, les mains ou encore le cou peuvent ainsi être mesurées avec le procédé selon l’invention.
En particulier, la présente invention porte sur un procédé de mesure d’un pied, permettant la détermination de dimensions caractéristiques du pied utiles à un bottier pour la fabrication de chaussures sur-mesure.
Dans la suite de la description, le procédé selon l’invention est décrit dans le cas de la mesure d’un pied.
Au préalable, certains termes utilisés dans la présente description sont cidessous précisés.
Le terme de pied dans la présente description s’entend comme englobant le pied en tant que tel, ainsi qu’une partie de la jambe allant jusqu’au genou. Le terme inclus ici toutes les parties du pied et de la jambe dont la mesure est utile à un bottier.
De manière similaire, le terme de main utilisé dans la présente description englobe la main en tant que telle ainsi que le poignet, voire la partie du bras allant jusqu’au coude. Il fait référence à toutes le parties de la main et du bras dont la mesure est utile à la fabrication d’un accessoire de mode de type bijou, par exemple une bague ou un bracelet.
Dans la présente description, il est employé le terme de smartphone, tiré de la terminologie anglo-saxonne, pour désigner un téléphone intelligent, qui comprend classiquement un appareil photographique.
Par photographie, on entend une image obtenue par un procédé photographique, c’est-à-dire obtenue par l'action de la lumière sur une surface sensible. On utilisera également le terme d’image dans la présente description pour désigner une photographie. La présente invention porte exclusivement sur l’utilisation de photographies numériques.
Par repère monde, on entend un repère de référence orthonormé associé à l’espace réel tridimensionnel où se trouve l’objet d’étude, c’est-à-dire la partie du corps que l’on souhaite mesurer. On peut noter ce repère Ro, d’origine 0 : (Ro,X^,Ÿo,Z^.
La figure 1A illustre schématiquement une prise de vue du procédé selon l’invention. Un pied 10 est posé sur une mire 30 en deux dimensions (2D) portant des marqueurs identifiables 40.
La prise de vue est par exemple effectuée au moyen d’un smartphone 20, comportant classiquement un appareil photographique. L’utilisation d’un tel dispositif d’acquisition d’images non dédié et largement répandu est avantageuse. En outre, l’utilisation d’un smartphone permet une prise de vue simple, à main levée, pouvant être effectuée par la personne elle-même qui cherche à mesurer une partie de son corps, ou éventuellement par une personne tierce.
Le capteur photographique du smartphone peut être utilisé aussi bien en mode photographie qu’en mode vidéo, à condition que la qualité des images et résolution le permette. En mode vidéo, on exploite alors une partie des images acquises par le capteur.
La mire 30 est placée de façon à être visible par le dispositif d’acquisition d’images, tout comme le pied 10 à imager. La mire 30 peut être placée sous ou à côté de du pied à imager.
Au moins une image du pied 10 et de la mire 30 est acquise par le smartphone 20, de telle sorte que l’image contienne entièrement la ou les dimensions caractéristiques du pied 10 que l’on souhaite déterminer, ainsi qu’au moins trois marqueurs 40 de la mire 30.
La mire 30 sert à calibrer le dispositif d’acquisition d’images. Cette mire de calibrage comporte des éléments de référence de géométrie connue. Ainsi, la mire 30 dispose d’au moins trois marqueurs 40 qui forment des figures repérables dans l’image, par exemple des points noirs sur un fond blanc ou inversement, ou encore tout autre motif identifiable, de préférence susceptible d’être détecté automatiquement dans l’image. Un exemple d’une mire 30 est illustré à la figure 1 B. II s’agit d’une simple feuille de papier A4 comportant des marqueurs repérables 40 aux quatre coins de la feuille, référencés 1 à 4 dans la figure 1B. Les dimensions standardisées d’une telle feuille sont connues. Les marqueurs peuvent être placés différemment sur la feuille, tant que l’on connaît la distance qui les sépare et/ou leur taille.
La mire 2D 30 est connue, c’est-à-dire qu’on dispose d’informations géométriques sur les marqueurs 40 (au moins trois) de la mire, typiquement la distance entre les marqueurs 40 et/ou la taille des marqueurs, et permet le calcul de la position du dispositif d’acquisition d’images dans l’espace, exprimé dans le repère monde. Cette étape de calibrage du dispositif d’acquisition d’images permet alors de déterminer des dimensions caractéristiques de l’objet étudié, e.g. le pied, à partir des points dans l’image, c’est-à-dire permet une mesure calibrée. Ce type de calibrage est connu, et par exemple décrit dans l’ouvrage de Richard Hartley et Andrew Zisserman intitulé “Multiple View Geometry in computer vision” (Part I : Caméra Geometry and Single View Geometry. Cambridge University Press, p. 151-233, 2004). Le calibrage du dispositif d’acquisition d’images consiste à établir, à partir d’au moins une photographie prise tel que décrit précédemment, une matrice de calibration permettant la correspondance entre un point de l’image et un point 3D exprimé dans un repère monde.
Pour chaque image acquise, les positions dans l’image d’au moins trois marqueurs 40 de la mire 30 sont extraites. Cette extraction peut être réalisée de manière manuelle : un opérateur pointe à l’aide d’un dispositif de pointage, comme par exemple une souris, ou encore un doigt ou une pointe conductrice si un contact sur un écran tactile est utilisé, les positions des marqueurs 40. Cette extraction peut également être réalisée de manière automatique avec certaines techniques de traitement d’images, tel que par exemple décrite dans Lowe, 1999 (« Object récognition from local scale-invariant features », Proceedings of the International Conférence on Computer Vision, vol. 2, 1999). De préférence, l’extraction automatique se base sur une technique telle que décrite dans Lowe 1999, ayant la particularité de pouvoir mettre en correspondance un motif représentant le marqueur sans être sensible à des transformations géométriques projectives. Une fois ces positions extraites, il est possible de calculer une matrice de calibration, comme cela est par exemple décrit dans Hartley et Zisserman, 2004 (“Multiple View Geometry in computer vision”, 2004, Part I « Caméra Geometry and Single View Geometry » et Part II « Two-View Geometry », Cambridge University Press, p. 151-233 et p. 237-308), permettant de faire la correspondance entre les positions des points dans l’image et les positions 3D des points dans le plan de la mire 30 dans le repère monde. Des mesures de distances réelles entre deux points sont alors réalisables, comme cela est illustré aux figures 2A/B, 3A/B, 4A/B décrites plus loin.
Ainsi donc, une fois le calibrage effectué, on peut déterminer la dimension caractéristique du pied à partir de la matrice de calibration et d’au moins une image.
Le procédé selon l’invention permet en particulier de déterminer une longueur d’une partie du corps, c’est-à-dire une distance euclidienne entre deux points d’une partie du corps. Il peut s’agir de la longueur, la largeur ou la hauteur d’une partie du corps, selon la définition usuelle de ces dimensions (longueur : distance entre les deux extrémités les plus éloignées d’un objet / largeur : dimension perpendiculaire à la longueur / hauteur : dimension dans le sens vertical, de la base au sommet d’un objet). La dimension caractéristique mesurée peut également être un périmètre de la partie du corps, pouvant être défini comme une distance entre deux points en étant contraint à rester sur une surface 3D.
La longueur de la partie du corps, par exemple la longueur du pied (pointure), peut être déterminée directement à partir d’une ou plusieurs images, connaissant la longueur entre deux points dans l’image, et connaissant la correspondance entre les points de l’image et les points 3D dans le repère monde avec la matrice de calibrage.
Le périmètre d’une surface 3D de la partie du corps d’intérêt est de préférence calculé à partir de plusieurs images selon une méthode basée sur un principe connu du domaine de la stéréologie, décrit dans Bobenko et al., 2008 (« Discrète Differential
Geometry, Bobenko, » A.I., Schroder, P., Sullivan, J.M., Ziegler, G.M. (Eds.), Birkhàuser,
2008, DOI 10.1007/978-3-7643-8621-4, p. 149). La méthode est décrite plus loin en relation avec les figures 4A et 4B. Le périmètre peut aussi être estimé à partir d’une seule image. Dans ce cas, on mesure une longueur dans l’image qui constitue une approximation du périmètre de la partie du corps. Cette approximation peut être satisfaisante si on peut par exemple faire l’hypothèse que la partie de corps à mesurer s’apparente à un cylindre.
Les calculs de l’étape de calibrage et la détermination des dimensions caractéristiques du pied peuvent être réalisés directement par le dispositif d’acquisition d’images, dans le cas où ce dernier comporte des moyens de calculs comme c’est le cas d’un smartphone comprenant classiquement un ordinateur portable. Dans ce cas le smartphone comprend le programme permettant le traitement des images pour la calibration et pour la mesure de la dimension caractéristique du pied. Alternativement, ces calculs peuvent être réalisés à distance, par un dispositif externe de type ordinateur disposant du programme pour la calibration et la mesure. Dans ce cas, les informations sont transmises du dispositif d’acquisition d’images vers l’ordinateur par connexion filaire, par exemple via un clef USB, une carte mémoire, etc., ou par connexion sans fil, par exemple WIFl, cellulaire etc.
Dans le cas d’un transfert des images, il est envisageable de rendre anonyme les images en supprimant sur les images avant leur transfert tout signe distinctif, par exemple des grains de beauté ou des tatouages.
Les figures 2A et 2B illustrent une mise en œuvre du procédé de mesure d’une longueur selon l’invention à partir d’une image.
Selon cette mise en œuvre, on détermine au moins une dimension caractéristique de la partie du corps à partir d’une seule image et de la matrice de calibration, cette dernière permettant de réaliser la correspondance entre un point de l’image et un point 3D situé dans le plan de la mire et exprimé dans le repère monde.
Comme dans la figure 1A, un pied 10 est posé sur une mire 2D 30 portant des marqueurs identifiables 40. La prise de vue est effectuée au moyen du smartphone 20. Une photographie du pied 10 et de la mire 30 est acquise par le smartphone 20, de telle sorte que l’image contienne entièrement la dimension caractéristique du pied 10 que l’on souhaite déterminer, i.e. la longueur du pied 50, correspondant à la pointure, ainsi qu’au moins trois marqueurs 40 de la mire 30. La mire 30 est une simple feuille de papier A4 blanche comportant des marqueurs 40 sous forme de pastilles circulaires noires aux quatre coins, tel qu’illustré à la figure 1 B.
Pour l’étape de calibrage, on détermine les positions dans l’image 21 d’au moins trois marqueurs 41 de la mire 31, comme expliqué précédemment. Connaissant la position des marqueurs 40 de la mire 30 dans le repère monde, on établit alors la matrice de calibration du capteur photographique qui permet de faire la correspondance entre les positions des points dans l’image et les positions 3D des points dans le plan de la mire dans le repère monde (appelé aussi espace des objets ou repère objet). Cette méthode de calibration est connue (Hartley et Zisserman, 2004 : “Multiple View Geometry in computer vision”, 2004, Part I « Caméra Geometry and Single View Geometry >>, Cambridge University Press, p. 151-233).
Une fois l’étape de calibrage réalisée, on détermine la longueur réelle du pied 50 à partir de la longueur 51 extraite de l’image 21. Pour cette étape, il est fait l’hypothèse que l’objet observé, i.e. le pied, est dans le plan formé par la mire 30. Les mesures sont alors très satisfaisantes pour tous les points du pied présents dans le plan de la mire, et de plus en plus approximatives lorsque les points s’éloignent de ce plan.
Selon cette mise en œuvre, on détermine de préférence une dimension de type longueur, i.e une distance euclidienne entre deux points. Dans le cas de la mesure d’un pied, d’autres types de dimensions caractéristiques que la longueur du pied 50 (pointure) peuvent être déterminées selon cette mise en œuvre, comme par exemple la longueur et la largeur de différentes parties du pied de préférence mesurées à la base du pied (points du pied situés sur la mire), tel que les dimensions référencées 2b, 2c, 2d, 3b, 3c, 3d, et 9 dans le tableau 1 plus bas, et en partie illustrées à la figure 5.
Selon cette mise en œuvre, on peut également déterminer un périmètre d’une partie du corps, si on formule une hypothèse sur la forme géométrique de la partie du corps en question, par exemple si on considère que ladite partie a une forme cylindrique. Dans ce cas on peut approximer le périmètre réel par une seule mesure du diamètre apparent de la partie du corps dans l’image.
Les figures 3A et 3B illustrent une mise en œuvre du procédé de mesure d’une longueur selon l’invention à partir de deux images.
Selon cette mise en œuvre, on acquiert au moins deux images avec le dispositif d’acquisition d’images placé dans deux positions différentes de telle sorte que chaque image contienne au moins une dimension caractéristique à déterminer, et on détermine la dimension caractéristique par triangulation à partir desdites au moins deux photographies.
Cette mise en œuvre repose sur une approche par triangulation pour la calibration, connue et par exemple décrite dans Hartley et Zisserman, 2004 (“Multiple View Geometry in computer vision”, 2004, Part II « Two-View Geometry >>, Cambridge University Press, p. 237-308).
Comme dans les figures 1A et 2A, un pied 10 est posé sur une mire 2D 30 comportant des marqueurs identifiables 40. La prise de vue est effectuée au moyen du smartphone 20.
Au moins deux images 21 et 22 du pied 10 et de la mire 30 sont acquises par le smartphone 20 placé dans deux positions différentes (a) et (b), de telle sorte que chaque image (21, 22) contienne entièrement la dimension caractéristique du pied 10 que l’on souhaite déterminer, i.e. la longueur du pied 50 (pointure), ainsi qu’au moins trois mêmes marqueurs 40 de la mire 30. Dans les images 21 et 22, la longueur du pied réelle 50 est référencée respectivement 51 et 52, le pied 10 est référencé 11 et 12, les trois marqueurs 40 de la mire 30 sont référencés 41 et 42. La mire 30 est identique à celle décrite pour la figure 2A.
Ainsi, pour chaque dimension caractéristique que l’on souhaite déterminer, on dispose d’au moins deux images acquises par le smartphone 20 dans des positions différentes. En estimant la transformation T (représentée par une double flèche dans la figure 3A) entre les deux positions (a) et (b) des deux images 21 et 22 dans le repère monde à l’aide de la mire 30, on peut déterminer les coordonnées réelles 3D des points de l’image.
L’estimation de la transformation T peut être effectuée selon différentes méthodes. L’utilisation d’une mire 2D comportant au moins 3 marqueurs visibles dans les images est requise. L’estimation de la transformation T peut être effectuée de la manière suivante : afin de pouvoir estimer le déplacement du smartphone entre deux prises de vues, une mire en papier sur laquelle se trouvent quatre marqueurs est utilisée. Le mouvement du dispositif d’acquisition d’images, e.g. le smartphone, d’une vue à l’autre est déterminé par la matrice de transformation permettant de passer des quatre marqueurs de la première image vers la deuxième image.
Soit M la matrice 3x3 de déplacement avec mij le coefficient à la ligne i et à la colonne j :
mn m12 m13
M = m21 m22 m23 m31 m32 m33
Soient G1, G2, G3 et G4 les marqueurs de l’image 1, et D1, D2, D3, D4 les marqueurs correspondants de l’image 2. Les valeurs des coefficients mij sont obtenues en mettant en correspondance les marqueurs entre les deux images sous forme de système et en le résolvant par une méthode de type moindre carré.
Le système à résoudre s’écrit sous la forme :
D1X D1y 1 0 0 0 -G1X*D1X -G1x*D1y -G1y =0
0 0 D1X D1y 1 -G1y*D1x -G1y*D1y -G1y =0 etc.
La transformation dans l’espace est alors définie de la manière suivante :
Rotation par rapport à l’axe Z = asin(m2i)
Translation par rapport à l’axe X = m13 T ranslation par rapport à l’axe Y = m23 T ranslation par rapport à l’axe Z = m33 Facteur d’échelle suivant l’axe X = m11/cos(asin(m21))
Facteur d’échelle suivant l’axe Y = m21/cos(asin(m21))
Connaissant la correspondance entre un point 3D dans le repère monde et un point dans chacune des deux images (matrice de calibration), on peut alors déterminer une distance entre deux points de l’espace à partir des deux images.
Selon cette approche, on ne fait pas l’hypothèse que l’objet doit être dans le plan formé par la mire, contrairement à la mise en œuvre avec une seule image.
En revanche, l’erreur de mesure évolue de la même manière que pour la mise en œuvre avec une image décrite en rapport avec les figures 2A et 2B : les mesures sont très satisfaisantes pour tous les points du pied proches du plan de la mire, et de plus en plus approximatives lorsque les points s’éloignent de ce plan.
Selon cette mise en œuvre, on peut ainsi déterminer une dimension caractéristique de la partie du corps imagée, de préférence une dimension de type longueur, i.e. une distance euclidienne entre deux points, connaissant la transformation entre deux images. Dans le cas de la mesure d’un pied, d’autres types de dimensions caractéristiques que la longueur du pied 50 (pointure) peuvent être déterminées selon cette mise en œuvre, comme par exemple la longueur, la largeur, la hauteur de différentes parties du pied, tel que les dimensions référencées 2b, 2c, 2d, 2e, 3b, 3c, 3d, 3e, 4b, 4c, 5a, 5b, 6b, 6c et 9 dans le tableau 1 plus bas, et en partie illustrées à la figure 5.
Selon cette mise en œuvre, on peut également déterminer un périmètre d’une partie du corps, si on formule une hypothèse sur la forme géométrique de la partie du corps en question, par exemple si on considère que ladite partie a une forme cylindrique. Dans ce cas on peut approximer le périmètre réel par une seule mesure du diamètre apparent de la partie du corps dans l’image.
Selon une mise en œuvre du procédé de mesure, on détermine au moins une dimension caractéristique de type périmètre à partir de n photographies prises dans n positions différentes autour de la partie du corps à mesurer, n étant supérieur ou égal à deux, typiquement compris entre 3 et 10 photographies, de préférence entre 3 et 5 photographies.
En particulier, on détermine le périmètre d’une partie du corps en mesurant sur chaque photographie i, i allant de 1 à n, la longueur du diamètre apparent di, et on estime le périmètre p au moyen de la formule (IV) suivante :
Ρ=-ΤΛ (iv) n i=i
Cette estimation s’appuie sur un principe connue du domaine de la stéréologie, par exemple mentionné dans Bobenko et al., 2008 (« Discrète Differential Geometry, Bobenko, » A.I., Schroder, P., Sullivan, J.M., Ziegler, G.M. (Eds.), Birkhàuser, 2008, DOI 10.1007/978-3-7643-8621-4, p. 149), s’appuyant sur un lemme selon lequel la longueur d’une courbe γ c Sd1 est égale à π fois la moyenne des intersections de γ avec des grandes hyperspheres Sd 2.
Cette estimation fournit une mesure satisfaisante, d’autant plus dans le cas où la surface 3D est convexe et que le nombre d’images n tend vers l’infini.
Les figures 4A et 4B illustrent un exemple d’une telle mise en œuvre, dans lequel trois images 21, 22 et 23 sont acquises autour d’un pied 10 posé sur une mire 30 portant des marqueurs 40. La mire est identique à celle décrite en relation avec les figures précédentes. Le smartphone 20 est pour cela placé dans 3 positions différentes (c), (d), et (e) autour du pied 10. Dans chacune des images 21, 22, 23, le coup de pied à mesurer est visible, ainsi que les 3 marqueurs 40 (références 41,42, 43) de la mire 30 (références 31,32, 33).
Le périmètre 60, au niveau du coup de pied, est déterminé en mesurant dans chaque image 21,22, et 23, le diamètre apparent 61,62 et 63, et en appliquant la formule (IV).
Selon cette mise en œuvre, l’étape de calibrage est réalisée comme décrit en relation avec les figures 2A et 2B. Une fois la matrice de calibration établie, il est possible de déterminer la longueur réelle du diamètre apparent di mesuré dans l’image, et ainsi d’estimer le périmètre à l’aide de la formule (IV).
Selon une autre mise en œuvre, le procédé de mesure comprend les étapes suivantes :
- on exprime le plan formé par la mire 2D dans le repère du monde, par exemple avec la connaissance de la position d’au moins 3 marqueurs de la mire;
- on surimpose à au moins une image acquise un modèle 3D générique de la partie du corps à mesurer, le modèle étant préalablement calibré avec des dimensions génériques réelles de la partie du corps à mesurer, et ;
- on déforme le modèle 3D projeté sur l’image de manière à faire coïncider des points caractéristiques appartenant au plan formé par la mire 2D de la photographie et du modèle 3D ;
- on détermine la dimension caractéristique, longueur ou périmètre, à partir du modèle 3D déformé.
La déformation du modèle 3D peut être réalisée de manière manuelle, avec l’intervention d’un opérateur qui modifie les points du modèle à l’aide d’un dispositif de pointage ou de manière automatique par la mise en œuvre d’un algorithme qui ajuste la position des points afin de satisfaire un critère donné. La déformation du modèle 3D est globale, c’est-à-dire qu’à partir de la mise en correspondance des points caractéristiques appartenant au plan formé par la mire 2D de la photographie et du modèle 3D, le modèle 3D est modifié dans son ensemble. Par exemple, si on fait coïncider la base du modèle 3D avec la longueur du pied, on déforme alors tout le modèle 3D du pied proportionnellement à la transformation de la base du modèle 3D.
Selon une autre mise en œuvre du procédé, l’acquisition des photographies est guidée au moyen d’indications visuelles, tel que l’affichage en transparence dans la photographie d’un dessin de la partie du corps et de la mire, ou au moyen d’indications sonores tel qu’un bip sonore ou d’indications tactiles telles que des vibrations. Ces indications peuvent par exemple signaler que le geste effectué pour l’acquisition n’est pas le bon, auquel cas la personne qui manipule le dispositif d’acquisition d’image modifiera la prise de vue.
Le procédé de mesure selon l’invention s’applique avantageusement à la mesure d’un pied, comme cela est illustré dans les différentes figures, et permet de déterminer une dimension caractéristique du pied qui est une dimension caractéristique utile à un bottier, de préférence choisie parmi une longueur, une largeur, une hauteur, un périmètre d’une partie du pied.
Au moins une dimension caractéristique d’au moins un point de mesure du pied suivant est déterminé avec le procédé selon l’invention :
- la pointure ;
- la grosseur au doigt ;
- le coup de pied ;
- l’entrée ;
- la malléole ;
- la cheville ;
- le point fort du mollet ;
- le sous genou ; et
- le petit orteil-talon.
Ces différents points de mesures sont répertoriés dans le tableau 1 ci-dessous, référencés de 1 à 9, et leur position est illustrée à la figure 5. Sur la figure 5, le schéma (A) représente une vue de dessus du pied, et les schémas (B), (C) et (D) des vues de profil du pied. Les différentes dimensions caractéristiques associées à chaque point de mesure sont également listées dans le tableau 1.
De préférence, on mesure au moins la pointure, encore plus préférentiellement on mesure au moins la pointure, la grosseur aux doigts, le coup de pied, l’entrée, et la malléole, et plus préférentiellement encore on mesure tous ces points de mesure, c’est-àdire au moins une dimension caractéristique pour chacun desdits points de mesure, et de préférence toutes les dimensions listées dans le tableau 1 associées à chaque point de mesure.
Point Désignation Type
1 Pointure
2 Grosseur aux doigts 2a.périmètre
2b.distance du talon à la grosseur aux doigts de l’intérieur du pied
2c.distance du talon à la grosseur aux doigts de l’extérieur du pied
2d.largeur du pied à la grosseur au doigt
2e.hauteur du pied à la grosseur au doigt
3 Coup de pied 3a.périmètre
3b.distance du talon à la grosseur aux doigts de l’intérieur du pied
3c.distance du talon à la grosseur aux doigts de l’extérieur du pied
3d.largeur
3e.hauteur
4 Entrée 4a.périmètre
4b.largeur
4c.hauteur
5 Malléole 5a.hauteur de la malléole interne
5b.hauteur de la malléole externe
6 Cheville 6a.périmètre
6b.largeur
6c.hauteur
7 Point fort du mollet Périmètre (peut être approximé par une ellipse)
8 Sous genou Périmètre (peut être approximé par une ellipse)
9 Petit orteil-talon Distance du talon au petit orteil
Tableau 1
Selon une mise en œuvre du procédé pour la mesure du pied, on procède à une prise de vue d’au moins deux images acquises selon une gestuelle simple, qui peut comprendre au moins un des mouvements (a) à (d) suivants :
(a) un mouvement de translation du dispositif d’acquisition photographique audessus du pied, de préférence dans un plan sensiblement horizontal et dans une direction perpendiculaire à la longueur du pied ;
(b) un mouvement de translation du dispositif d’acquisition photographique à 10 l’intérieur et à l’extérieur du pied, de préférence dans un plan sensiblement vertical et dans une direction parallèle à la longueur du pied ;
(c) un mouvement de rotation du dispositif d’acquisition photographique autour de la cheville ;
(d) un mouvement de rotation dispositif d’acquisition photographique autour de la jambe.
On détermine alors au moins une des dimensions caractéristiques des points de mesures suivants selon les mouvements du dispositif d’acquisition d’images lors de l’acquisition :
- la grosseur au doigt (2) et/ou du coup de pied (3) à partir des photographies acquises selon le mouvement (a) ;
- la pointure (1) et/ou la grosseur au doigt (2) et/ou le coup de pied (3) et/ou l’entrée (4) et/ou la malléole (5) à partir des photographies acquises selon le mouvement (b);
- l’entrée (4) et/ou la cheville (6) à partir des images acquises selon le mouvement (c) ;
- le point fort du mollet (7) et/ou le sous genou (8) et/ou le petit orteil-talon (9) à partir des photographies acquises selon le mouvement (d).
De préférence, afin de déterminer un grand nombre de dimensions caractéristiques du pied, par exemple des dimensions pour tous les points de mesures 1 à 9, on réalise une acquisition des images en effectuant 5 gestes correspondant aux mouvements (a) à (d).
La figure 6 illustre la gestuelle décrite associée à l’acquisition des images. En ses marqueurs identifiables 40, avant la prise d’images. Dans les schémas (B) à (F), les mouvements du smartphone 20 sont indiqués par des flèches. Le schéma (B) illustre le mouvement de translation 70 du smartphone 20 au-dessus du pied 10 et de la mire 30, effectué dans un plan sensiblement horizontal et dans une direction perpendiculaire à la longueur du pied de manière. Ce mouvement permet de déterminer des dimensions caractéristiques pour la grosseur aux doigts (2) et le coup de pied (3). Le schéma (C) illustre la mouvement de translation 71 du smartphone 20 qui est un mouvement de translation à l’intérieur du pied, dans un plan sensiblement vertical et dans une direction parallèle à la longueur du pied. Une prise de vue selon ce mouvement permet de déterminer des dimensions caractéristiques relatives à la pointure (1), à la grosseur aux doigts (2), au coup de pied (3), à l’entrée (4) et à la malléole (5). Une prise de vue selon un mouvement de translation identique mais à l’extérieur du pied, tel que montré sur le schéma (D), permet de déterminer des dimensions caractéristiques des mêmes points de mesures. Des images prises selon le mouvement de rotation 73 autour de la cheville illustré sur le schéma (E), permettent des mesures de l’entrée (4) et la cheville (6). Enfin le schéma (F) illustre un mouvement de rotation 74 autour de la jambe plus ample que celui autour de la cheville, permettant des mesures au niveau du point fort du mollet (7), du sous-genou (8), et du petit orteil-talon (9).
Il est entendu que les images acquises selon différents mouvements peuvent être exploitées pour déterminer une dimension caractéristique donnée.
Cette gestuelle très simple, pouvant être réalisée par la personne elle-même, permet de fournir toutes les informations nécessaires à la mesure selon le procédé, en vue de livrer les mesures utiles à un bottier pour la fabrication de chaussures sur-mesure.
Lors des gestes, les déclenchements de la prise d’images peuvent être effectués par l’utilisateur ou automatiquement par le dispositif d’acquisition d’images. Dans ce cas, un suivi automatique dans l’image de la mire peut être réalisé, et/ou un suivi des informations d’inclinaisons et déplacements par le biais d’un accéléromètre peut également être réalisé.
On peut combiner les différentes mise en oeuvre décrites sans sortir du cadre de la présente invention. A titre d’exemple il est possible de mettre en oeuvre dans le même procédé à la fois la détermination d’une longueur à partir d’une seule image, et/ou la détermination d’une longueur à partir de plusieurs images, et/ou la détermination d’un périmètre à partir de n images. De nombreuses combinaisons sont possibles.
Un aspect de l’invention porte sur un procédé de fabrication sur-mesure d’une chaussure, dans lequel on détermine au moins une dimension caractéristique du pied par le procédé de mesure décrit, et on réalise une chaussure sur mesure à partir de ladite au moins une dimension caractéristique du pied.
De préférence on détermine au moins la pointure, et encore plus préférentiellement les dimensions caractéristiques de tous les points de mesures suivants: la pointure, la grosseur au doigt, le coup de pied, l’entrée, la malléole, la cheville, le point fort du mollet, le sous genou, et le petit orteil-talon, en vue de fournir ces mesures au bottier pour la fabrication de la chaussure.
De préférence on fabrique la chaussure sur-mesure à partir des dimensions caractéristiques de tous les points de mesures listés ci-dessus.
Le procédé de mesure selon l’invention peut avantageusement s’appliquer à la mesure d’une autre partie du corps humain que le pied, tel qu’une main ou un cou.
Un autre aspect de l’invention porte la fabrication d’un de mode adapté à la morphologie d’une partie du corps humain, dans lequel on détermine au moins une dimension caractéristique de ladite partie du corps, de préférence d’une main, du cou ou d’un pied, par le procédé de mesure décrit, et on réalise l’accessoire de mode sur-mesure à partir de ladite au moins une dimension caractéristique.
De préférence on mesure le diamètre d’un doigt de la main, le diamètre du poignet, le diamètre du cou, ou le diamètre d’une partie du pied telle que la cheville, pour par exemple fabriquer un bijou sur-mesure tel qu’une bague, un bracelet, un collier, ou tout autre parure. On peut également mesurer les dimensions d’une main nécessaires pour par exemple fabriquer des gants sur-mesure.

Claims (17)

  1. REVENDICATIONS
    1. Procédé de mesure d’une partie du corps humain à partir de photographies numériques, sans reconstruction 3D de ladite partie du corps, comprenant les étapes suivantes :
    - l’acquisition à l’aide d’un dispositif d’acquisition photographique d’au moins une photographie de ladite partie du corps et d’une mire 2D connue comportant au moins trois marqueurs, de telle sorte que ladite photographie contienne entièrement au moins une dimension caractéristique de ladite partie du corps que l’on souhaite déterminer et les trois marqueurs de ladite mire ;
    - le calibrage du dispositif d’acquisition photographique à partir de ladite au moins une photographie par l’établissement d’une matrice de calibration permettant la correspondance entre un point de ladite photographie et un point 3D exprimé dans un repère monde ;
    - la détermination de ladite dimension caractéristique de ladite partie du corps à partir de ladite au moins une photographie et de ladite matrice de calibration.
  2. 2. Procédé selon la revendication 1, dans lequel ladite au moins une dimension caractéristique de ladite partie du corps humain est une distance euclidienne entre deux points de ladite partie du corps ou un périmètre de ladite partie du corps.
  3. 3. Procédé selon l’une des revendications précédentes, dans lequel on détermine au moins une dimension caractéristique de ladite partie du corps à partir d’une seule photographie et de la matrice de calibration, ladite matrice permettant de réaliser la correspondance entre un point de ladite photographie et un point 3D situé dans le plan de la mire et exprimé dans le repère monde.
  4. 4. Procédé selon l’une des revendications précédentes, dans lequel on acquiert au moins deux photographies avec le dispositif d’acquisition photographique dans deux positions différentes de telle sorte que chaque photographie contienne ladite au moins une dimension caractéristique à déterminer, on estime la transformation entre les positions des deux photographies lors du calibrage, et on détermine ladite au moins une dimension caractéristique connaissant ladite transformation.
  5. 5. Procédé selon la revendication précédente, dans lequel on détermine au moins une dimension caractéristique de type distance euclidienne entre deux points à partir de deux photographies, lesdites deux photographies étant acquises selon un mouvement de translation du dispositif d’acquisition photographique.
  6. 6. Procédé selon l’une des revendications précédentes, dans lequel on détermine au moins une dimension caractéristique de type périmètre à partir de n photographies prises dans n positions différentes autour de la partie du corps, n étant supérieur ou égal à 2 et de préférence compris entre 3 et 10 photographies.
  7. 7. Procédé selon la revendication 6, dans lequel on détermine un périmètre d’une partie du corps en mesurant sur chaque photographie i, i allant de 1 à n, la longueur du diamètre apparent di sur la photographie i, et on estime le périmètre p au moyen de la formule suivante :
    7Γ n
    P=~TA n i=i
  8. 8. Procédé selon l’une des revendications précédentes, dans lequel le dispositif d’acquisition photographique est un appareil photographique d’un téléphone intelligent.
  9. 9. Procédé selon l’une des revendications précédentes, dans lequel les photographies sont transmises à un ordinateur distant pour réaliser les étapes de calibrage et de détermination de ladite au moins une dimension caractéristiques du corps humain.
  10. 10. Procédé selon l’une des revendications précédentes, dans lequel :
    - on exprime le plan formé par la mire 2D dans le repère du monde ;
    - on surimpose à ladite au moins une photographie un modèle 3D générique de la partie du corps à mesurer, ledit modèle étant préalablement calibré avec des dimensions génériques réelles de la partie du corps à mesurer, et ;
    - on déforme ledit modèle 3D sur la photographie de manière à faire coïncider des points caractéristiques appartenant au plan formé par la mire 2D de la photographie et du modèle 3D ;
    - on détermine ladite au moins une dimension caractéristique à partir du modèle 3D déformé.
  11. 11. Procédé selon l’une des revendications précédentes, dans lequel l’acquisition des photographies est guidée au moyen d’indications visuelles, tel que l’affichage en transparence dans la photographie d’un dessin de la partie du corps et de la mire, ou au moyen d’indications sonores tel qu’un bip sonore ou tactiles telles que des vibrations signalant de préférence que le geste effectué pour l’acquisition n’est pas le bon.
  12. 12. Procédé selon l’une des revendications précédentes pour la mesure d’un pied, dans lequel ladite au moins une dimension caractéristique du pied mesurée est une dimension caractéristique utile à un bottier, de préférence choisie parmi une longueur, une largeur, une hauteur, un périmètre d’une partie du pied.
  13. 13. Procédé selon la revendication 12, dans lequel on détermine au moins une dimension caractéristique d’au moins un point de mesure du pied suivant :
    - la pointure ;
    - la grosseur au doigt ;
    - le coup de pied ;
    - l’entrée ;
    - la malléole ;
    - la cheville ;
    - le point fort du mollet ;
    - le sous genou ; et
    - le petit orteil-talon, et de préférence au moins une dimension caractéristique pour chacun desdits points de mesure.
  14. 14. Procédé selon l’une des revendications 12 et 13, dans lequel on acquiert au moins deux photographies lors d’au moins un des mouvements (a) à (d) suivants :
    (a) un mouvement de translation du dispositif d’acquisition photographique au-dessus du pied, de préférence dans un plan sensiblement horizontal et dans une direction perpendiculaire à la longueur du pied ;
    (b) un mouvement de translation du dispositif d’acquisition photographique à l’intérieur et à l’extérieur du pied, de préférence dans un plan sensiblement vertical et dans une direction parallèle à la longueur du pied ;
    (c) un mouvement de rotation du dispositif d’acquisition photographique autour de la cheville ;
    (d) un mouvement de rotation dispositif d’acquisition photographique autour de la jambe, et dans lequel on détermine au moins une des dimensions caractéristiques des points de mesures suivants selon les mouvements du dispositif d’acquisition photographique lors de l’acquisition des photographies :
    - la grosseur au doigt et/ou du coup de pied à partir des photographies acquises selon le mouvement (a) ;
    - la pointure et/ou la grosseur au doigt et/ou le coup de pied et/ou l’entrée et/ou la malléole à partir des photographies acquises selon le mouvement (b) ;
    - l’entrée et/ou la cheville à partir des images acquises selon le mouvement (c) ;
    - le point fort du mollet et/ou le sous genou et/ou le petit orteil-talon à partir des photographies acquises selon le mouvement (d).
  15. 15. Procédé de fabrication d’une chaussure, dans lequel :
    - on détermine au moins une dimension caractéristique du pied par le procédé selon l’une des revendications précédentes, de préférence au moins la pointure, et encore plus préférentiellement les dimensions caractéristiques de tous les points de mesures suivants : la pointure, la grosseur au doigt, le coup de pied, l’entrée, la malléole, la cheville, le point fort du mollet, le sous genou, et le petit orteil-talon ; et
    - on réalise une chaussure sur-mesure à partir de ladite au moins une dimension caractéristique du pied, et de préférence à partir des dimensions caractéristiques de tous lesdits points de mesures.
  16. 16. Procédé selon l’une des revendications 1 à 11 pour la mesure d’une main ou d’un cou.
  17. 17. Procédé de fabrication d’un accessoire de mode adapté à la morphologie d’une partie du corps humain, dans lequel :
    - on détermine au moins une dimension caractéristique de ladite partie du corps humain par le procédé selon l’une des revendication 1 à 11, de préférence au moins une dimension caractéristique d’une main, d’un cou, ou d’un pied, et de préférence le diamètre d’un doigt de la main, le diamètre du poignet, le diamètre du cou, ou le diamètre d’une partie du pied telle que la cheville ; et
    - on réalise ledit accessoire de mode sur-mesure à partir de ladite au moins une dimension caractéristique.
    1 /5
FR1662478A 2016-12-15 2016-12-15 Procede de mesure d'une partie du corps a partir de photographies numeriques, et mise en oeuvre d'un tel procede pour la fabrication de chaussures sur mesure Expired - Fee Related FR3060735B1 (fr)

Priority Applications (4)

Application Number Priority Date Filing Date Title
FR1662478A FR3060735B1 (fr) 2016-12-15 2016-12-15 Procede de mesure d'une partie du corps a partir de photographies numeriques, et mise en oeuvre d'un tel procede pour la fabrication de chaussures sur mesure
EP17832789.6A EP3555559A1 (fr) 2016-12-15 2017-12-15 Procede de mesure d'une partie du corps a partir de photographies numeriques, et mise en oeuvre d'un tel procede pour la fabrication de chaussures sur mesure
PCT/FR2017/053623 WO2018109421A1 (fr) 2016-12-15 2017-12-15 Procede de mesure d'une partie du corps a partir de photographies numeriques, et mise en œuvre d'un tel procede pour la fabrication de chaussures sur mesure
EA201991588A EA201991588A1 (ru) 2016-12-15 2017-12-28 Способ обработки насекомых, включающий отделение кутикулы от мягкой части насекомых с последующим разделением мягкой части на три фракции

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR1662478 2016-12-15
FR1662478A FR3060735B1 (fr) 2016-12-15 2016-12-15 Procede de mesure d'une partie du corps a partir de photographies numeriques, et mise en oeuvre d'un tel procede pour la fabrication de chaussures sur mesure

Publications (2)

Publication Number Publication Date
FR3060735A1 true FR3060735A1 (fr) 2018-06-22
FR3060735B1 FR3060735B1 (fr) 2019-12-27

Family

ID=57965981

Family Applications (1)

Application Number Title Priority Date Filing Date
FR1662478A Expired - Fee Related FR3060735B1 (fr) 2016-12-15 2016-12-15 Procede de mesure d'une partie du corps a partir de photographies numeriques, et mise en oeuvre d'un tel procede pour la fabrication de chaussures sur mesure

Country Status (4)

Country Link
EP (1) EP3555559A1 (fr)
EA (1) EA201991588A1 (fr)
FR (1) FR3060735B1 (fr)
WO (1) WO2018109421A1 (fr)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180182123A1 (en) * 2018-02-26 2018-06-28 Chien Min Fang Method of selecting an article for covering a body part by processing the image of the body part
WO2021009879A1 (fr) * 2019-07-17 2021-01-21 株式会社アシックス Plaque de mesure et système de création de contour de pied
CN112955931A (zh) * 2018-09-21 2021-06-11 株式会社Ｚｏｚｏ 尺寸测定系统
EP3866097A4 (fr) * 2019-12-25 2021-09-22 ASICS Corporation Système de gestion d'informations de longueurs de pieds, système de détermination du moment judicieux pour remplacer des chaussures par achat et outil auxiliaire de mesure
IT202000026942A1 (it) * 2020-11-11 2022-05-11 Trya S R L Metodo di scansione di un piede e relativa interfaccia grafica d’utente

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3303986B1 (fr) * 2015-05-29 2020-02-26 Unilever PLC Système et méthode de mesure de diamètre de cheveu
CN108351969B (zh) 2015-10-30 2022-07-29 联合利华知识产权控股有限公司 毛发卷曲测量
BR112018007491A2 (pt) 2015-10-30 2018-10-23 Unilever Nv ?método de medição de indicações de tipo de cabelo, sistema para medir o tipo de cabelo e programa de computador para medir as indicações do tipo de cabelo?
US20180160777A1 (en) 2016-12-14 2018-06-14 Black Brass, Inc. Foot measuring and sizing application
US10420397B2 (en) * 2016-12-14 2019-09-24 Black Brass, Inc. Foot measuring and sizing application
KR102294218B1 (ko) 2017-01-06 2021-08-27 나이키 이노베이트 씨.브이. 자동 쇼핑 어시스턴트를 이용한 개인화 쇼핑을 위한 시스템, 플랫폼 및 방법
JP7211983B2 (ja) 2017-06-27 2023-01-24 ナイキ イノベイト シーブイ 自動買い物アシスタントを用いて個人の嗜好に合った買い物を行うためのシステム、プラットフォーム、および方法
DE102019122889B4 (de) * 2019-05-29 2022-12-22 eekual bionic GmbH Verfahren zur Herstellung eines nahtlosen Schuhs
CN110930448B (zh) * 2019-11-01 2023-11-24 北京化工大学 基于手部图像的参数测量方法与装置
IT202000005392A1 (it) 2020-03-12 2021-09-12 Base Prot S R L Metodo di progettazione e fabbricazione di plantari.
JP2023528376A (ja) 2020-05-29 2023-07-04 ナイキ イノベイト シーブイ キャプチャ画像の処理システム及び方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2882512A1 (fr) * 2005-02-28 2006-09-01 Mascio Gerard Di Installation et procede de mesure d'une caracteristique geometrique d'un segment anatomique d'un sujet et programme d'ordinateur mettant en oeuvre un tel procede
US20070168153A1 (en) * 2006-01-13 2007-07-19 Digicontractor Corporation Method and apparatus for photographic measurement
WO2013026798A1 (fr) * 2011-08-25 2013-02-28 Magari S.R.L. Procédé et système permettant une sélection optimisée d'articles chaussants ou vestimentaires
DE102011121086A1 (de) * 2011-12-15 2013-06-20 Deichmann Se System und Verfahren zur optischen Vermessung von Gliedmaßen
EP2641539A1 (fr) * 2012-03-21 2013-09-25 Rocket eleven GmbH Procédé destiné à la détermination des dimensions d'une partie du corps; procédé et dispositif destiné à la détermination des dimensions d'un vêtement
WO2014053137A1 (fr) * 2012-10-01 2014-04-10 Bodybarista Aps Procédé d'étalonnage d'un appareil photo
US20160286906A1 (en) * 2013-11-09 2016-10-06 Edgimago 2012 Ltd. Method and system for measuring 3-dimensional objects

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2882512A1 (fr) * 2005-02-28 2006-09-01 Mascio Gerard Di Installation et procede de mesure d'une caracteristique geometrique d'un segment anatomique d'un sujet et programme d'ordinateur mettant en oeuvre un tel procede
US20070168153A1 (en) * 2006-01-13 2007-07-19 Digicontractor Corporation Method and apparatus for photographic measurement
WO2013026798A1 (fr) * 2011-08-25 2013-02-28 Magari S.R.L. Procédé et système permettant une sélection optimisée d'articles chaussants ou vestimentaires
DE102011121086A1 (de) * 2011-12-15 2013-06-20 Deichmann Se System und Verfahren zur optischen Vermessung von Gliedmaßen
EP2641539A1 (fr) * 2012-03-21 2013-09-25 Rocket eleven GmbH Procédé destiné à la détermination des dimensions d'une partie du corps; procédé et dispositif destiné à la détermination des dimensions d'un vêtement
WO2014053137A1 (fr) * 2012-10-01 2014-04-10 Bodybarista Aps Procédé d'étalonnage d'un appareil photo
US20160286906A1 (en) * 2013-11-09 2016-10-06 Edgimago 2012 Ltd. Method and system for measuring 3-dimensional objects

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180182123A1 (en) * 2018-02-26 2018-06-28 Chien Min Fang Method of selecting an article for covering a body part by processing the image of the body part
CN112955931A (zh) * 2018-09-21 2021-06-11 株式会社Ｚｏｚｏ 尺寸测定系统
WO2021009879A1 (fr) * 2019-07-17 2021-01-21 株式会社アシックス Plaque de mesure et système de création de contour de pied
CN112533507A (zh) * 2019-07-17 2021-03-19 株式会社爱世克私 测量板以及脚型创建系统
JPWO2021009879A1 (ja) * 2019-07-17 2021-09-13 株式会社アシックス 計測板及び足型データ作成システム
CN112533507B (zh) * 2019-07-17 2022-07-01 株式会社爱世克私 测量板以及脚型创建系统
US11583037B2 (en) 2019-07-17 2023-02-21 Asics Corporation Measuring board and foot shape data creating system
EP3866097A4 (fr) * 2019-12-25 2021-09-22 ASICS Corporation Système de gestion d'informations de longueurs de pieds, système de détermination du moment judicieux pour remplacer des chaussures par achat et outil auxiliaire de mesure
US11419390B2 (en) 2019-12-25 2022-08-23 Asics Corporation Foot length information management system, system for determining replacement time for shoes, and measurement assisting tool
IT202000026942A1 (it) * 2020-11-11 2022-05-11 Trya S R L Metodo di scansione di un piede e relativa interfaccia grafica d’utente

Also Published As

Publication number Publication date
WO2018109421A1 (fr) 2018-06-21
EA201991588A1 (ru) 2019-11-29
FR3060735B1 (fr) 2019-12-27
EP3555559A1 (fr) 2019-10-23

Similar Documents

Publication Publication Date Title
FR3060735A1 (fr) Procede de mesure d'une partie du corps a partir de photographies numeriques, et mise en oeuvre d'un tel procede pour la fabrication de chaussures sur mesure
US10818038B2 (en) Techniques for capturing dynamic appearance of skin
EP2272047B1 (fr) Système de formation d images 3d
CN111649690A (zh) 一种能够手持的3d信息采集的设备及方法
FR3067242B1 (fr) Procede d'evaluation d'une gouttiere orthodontique
EP3692499B1 (fr) Procede d'imagerie radiographique, dispositif de traitement d'image radiographique et dispositif d'imagerie radiographique
FR2996014A1 (fr) Procede d'aide a la determination de parametres de vision d'un sujet
WO2017077217A1 (fr) Calibration 3d d'un systeme de mapping video
FR2792749A1 (fr) Procede de localisation et de representation tridimensionnelle d'elements d'interet d'un organe
EP1190208B1 (fr) Procede de mesurage d'un objet tridimensionnel, ou d'un ensemble d'objets
FR3098332A1 (fr) Procédé et dispositif de détermination de l’amplitude d’un mouvement effectué par un membre d’un corps articulé
WO2006027490A1 (fr) Dispositif pour etablir une representation tridimensionnelle complete d'un membre d'un patient a partir d'un nombre reduit de mesures prises sur ce membre
EP1511421A1 (fr) Dispositif de stereoradiographie et procedure d utilisation
FR2922640A1 (fr) Procede et un dispositif de reconstruction tridimensionnelle de la surface interieure d'une chaussure
FR3076203A1 (fr) Procede et systeme pour calibrer un systeme d'imagerie a rayons x
FR2997492A1 (fr) Procede d'etablissement d'un plan de recolement geolocalise, produit programme d'ordinateur et moyen de stockage correspondants
FR2724720A1 (fr) Procede de correlation des mesures tridimensionnelles realisees par des systemes d'acquisition d'images et installation pour sa mise en oeuvre
CA3057337A1 (fr) Procede de texturation d'un modele 3d
EP3166476A1 (fr) Systeme et procede d'imagerie tridimensionnelle en profondeur
FR3096499A1 (fr) Dispositif de traitement de prise de vue
FR2992415A1 (fr) Procede d'etablissement d'un plan de recolement geolocalise, produit programme d'ordinateur et moyen de stockage correspondants
EP3958785B1 (fr) Programme d'ordinateur d'evaluation d'une gouttiere orthodontique
FR3069428B1 (fr) Systeme d'aide au repositionnement d'au moins une zone de suivi dermatologique, procede et programme d'ordinateur associes
WO2018229358A1 (fr) Procédé et dispositif de construction d'une image tridimensionnelle
FR3106485A1 (fr) Dispositif et procede de mesure d’une force exercee sur un corps, et caracterisation de la rigidite d’un corps employant un tel dispositif

Legal Events

Date Code Title Description
PLFP Fee payment

Year of fee payment: 2

PLSC Publication of the preliminary search report

Effective date: 20180622

PLFP Fee payment

Year of fee payment: 3

PLFP Fee payment

Year of fee payment: 4

PLFP Fee payment

Year of fee payment: 5

PLFP Fee payment

Year of fee payment: 6

ST Notification of lapse

Effective date: 20230808