FR3136577A1 - Method for reproducing a reference movement by a person and device for its implementation - Google Patents

Method for reproducing a reference movement by a person and device for its implementation Download PDF

Info

Publication number
FR3136577A1
FR3136577A1 FR2205699A FR2205699A FR3136577A1 FR 3136577 A1 FR3136577 A1 FR 3136577A1 FR 2205699 A FR2205699 A FR 2205699A FR 2205699 A FR2205699 A FR 2205699A FR 3136577 A1 FR3136577 A1 FR 3136577A1
Authority
FR
France
Prior art keywords
real
coincide
targets
movement
person
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
FR2205699A
Other languages
French (fr)
Inventor
Gilbert Marius GONNET Laurent
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lstgmove
Original Assignee
Lstgmove
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lstgmove filed Critical Lstgmove
Priority to FR2205699A priority Critical patent/FR3136577A1/en
Priority to PCT/EP2023/065309 priority patent/WO2023242036A1/en
Publication of FR3136577A1 publication Critical patent/FR3136577A1/en
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/103Static body considered as a whole, e.g. static pedestrian or occupant recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/23Recognition of whole body movements, e.g. for sport training

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Processing Or Creating Images (AREA)

Abstract

Procédé de reproduc tion d’un mouvement de référence par une personne et dispositif pour sa mise en œuvre L'invention a pour objet un procédé de reproduction d’un mouvement de référence comportant des étapes d’affichage sur un système d’affichage (16) de cibles (22.1 à 22.13) correspondant à des points caractéristiques de référence d’une première posture du mouvement de référence, de détermination et d’affichage en temps réel des points caractéristiques réels (10.1 à 10.13) d’une personne (12) exécutant un mouvement réel, de détermination en temps réel de la position de chaque point caractéristique réel (10.1 à 10.13) par rapport à la cible (22.1 à 22.13) correspondante, de maintien des cibles (22.1 à 22.13) de la première posture tant que la durée durant laquelle tous les points caractéristiques réels coïncident ou sont considérés comme coïncidant avec leurs cibles respectives est inférieure à une durée de maintien puis d’affichage des cibles (22.1 à 22.13) d’une deuxième posture dès que cette durée est supérieure ou égale à la durée de maintien. Figure 8Method for reproducing a reference movement by a person and device for its implementation The subject of the invention is a method for reproducing a reference movement comprising display steps on a display system (16 ) of targets (22.1 to 22.13) corresponding to characteristic reference points of a first posture of the reference movement, determination and display in real time of the real characteristic points (10.1 to 10.13) of a person (12) executing a real movement, determining in real time the position of each real characteristic point (10.1 to 10.13) relative to the corresponding target (22.1 to 22.13), maintaining the targets (22.1 to 22.13) of the first posture as long as the duration during which all the real characteristic points coincide or are considered to coincide with their respective targets is less than a duration of holding then displaying the targets (22.1 to 22.13) of a second posture as soon as this duration is greater than or equal to to the holding time. Figure 8

Description

Procédé de reproduction d’un mouvement de référence par une personne et dispositif pour sa mise en œuvreMethod for reproducing a reference movement by a person and device for its implementation

La présente demande se rapporte à un procédé de reproduction d’un mouvement de référence par une personne ainsi qu’à un dispositif pour sa mise en œuvre. Selon une application non limitative, ce procédé et ce dispositif peuvent être utilisés pour l’apprentissage d’un mouvement complexe comme un mouvement de « swing » au golf.The present application relates to a method for reproducing a reference movement by a person as well as to a device for its implementation. According to a non-limiting application, this method and this device can be used for learning a complex movement such as a “swing” movement in golf.

Dans la pratique sportive ou la rééducation, une personne est amenée à reproduire plusieurs fois un mouvement de référence. Il est essentiel que ce mouvement de référence soit reproduit le plus fidèlement possible.In sports or rehabilitation, a person is required to reproduce a reference movement several times. It is essential that this reference movement is reproduced as faithfully as possible.

Selon un premier mode opératoire, les mouvements sont réalisés en présence d’un encadrant qui corrige, si nécessaire, les postures successives de la personne lors de l’exécution des mouvements. Ce mode opératoire n’est pas satisfaisant car il requiert un encadrant.According to a first operating mode, the movements are carried out in the presence of a supervisor who corrects, if necessary, the successive postures of the person during the execution of the movements. This procedure is not satisfactory because it requires a supervisor.

Des applications ont été développées pour rendre plus autonome la personne qui souhaite correctement reproduire le mouvement de référence.Applications have been developed to make the person who wishes to correctly reproduce the reference movement more independent.

Selon un deuxième mode opératoire proposé par l‘application dénommée « Kemtai », un procédé de reproduction d’un mouvement de référence comprend une étape d’affichage d’un modèle exécutant un mouvement de référence sur une première moitié d’un écran positionnée en face d’une personne, une étape d’acquisition d’images, à l’aide d’une caméra, de la personne positionnée face à l’écran et reproduisant le mouvement de référence, une étape d’affichage en temps réel des images acquises sur une deuxième moitié de l’écran, une étape de détermination en temps réel, à partir des images acquises, des coordonnées des points caractéristiques réels de la personne et notamment de ses articulations ainsi qu’une étape d’affichage en superposition sur la silhouette de la personne visible sur la deuxième moitié d’écran de ces points caractéristiques réels reliés par des traits de manière à obtenir une représentation filaire de la personne sur l’écran. Les coordonnées des points caractéristiques de référence du modèle exécutant le mouvement de référence étant stockées dans une base de données, le procédé comprend à chaque instant une étape de comparaison des coordonnées des points caractéristiques réels avec les coordonnées des points caractéristiques de référence. Cette étape de comparaison permet de déterminer un pourcentage de ressemblance entre le mouvement réel et le mouvement de référence qui est affiché sur l’écran pour l’ensemble du mouvement.According to a second operating mode proposed by the application called "Kemtai", a method of reproducing a reference movement comprises a step of displaying a model executing a reference movement on a first half of a screen positioned in face of a person, a step of acquiring images, using a camera, of the person positioned facing the screen and reproducing the reference movement, a step of displaying the images in real time acquired on a second half of the screen, a step of determining in real time, from the acquired images, the coordinates of the real characteristic points of the person and in particular of their joints as well as a step of display superimposed on the silhouette of the person visible on the second half of the screen of these real characteristic points connected by lines so as to obtain a wire representation of the person on the screen. The coordinates of the reference characteristic points of the model executing the reference movement being stored in a database, the method comprises at each instant a step of comparing the coordinates of the real characteristic points with the coordinates of the reference characteristic points. This comparison step makes it possible to determine a percentage of resemblance between the real movement and the reference movement which is displayed on the screen for the entire movement.

L’affichage simultané du mouvement réel réalisé par la personne et d’un mouvement de référence permet à la personne de se corriger de manière intuitive. Lorsque le mouvement à reproduire est simple, le pourcentage de ressemblance entre les mouvements réel et de référence est élevé. En revanche, lorsque le mouvement de référence à reproduire est complexe, le pourcentage de ressemblance est relativement faible car cette application n’indique pas à l’utilisateur les séquences du mouvement à corriger et comment les corriger.The simultaneous display of the real movement carried out by the person and a reference movement allows the person to correct themselves intuitively. When the movement to be reproduced is simple, the percentage of resemblance between the real and reference movements is high. On the other hand, when the reference movement to be reproduced is complex, the percentage of resemblance is relatively low because this application does not indicate to the user the sequences of the movement to be corrected and how to correct them.

Le document US2013171601 décrit un système d’assistance permettant à une personne de reproduire un mouvement réalisé par un modèle. Ce système comprend un écran positionné face à une personne et sur lequel est affiché un modèle exécutant un mouvement de référence ainsi qu’un miroir positionné devant l’écran (intercalé entre la personne et l’écran) permettant à la personne de se voir tout en voyant par transparence ce qui est affiché sur l’écran.Document US2013171601 describes an assistance system allowing a person to reproduce a movement performed by a model. This system includes a screen positioned in front of a person and on which is displayed a model executing a reference movement as well as a mirror positioned in front of the screen (interposed between the person and the screen) allowing the person to see themselves completely. by seeing through transparency what is displayed on the screen.

Selon ce document, un procédé de reproduction d’un mouvement de référence comprend une première étape d’adaptation des images du modèle à afficher sur l’écran à la morphologie de la personne afin que les images du modèle et de la personne coïncident. Comme précédemment, le procédé comprend une étape d’affichage sur l’écran du modèle exécutant un mouvement de référence, les images du modèle ayant été adaptées, une étape d’acquisition d’images, à l’aide d’une caméra, de la personne positionnée face à l’écran et reproduisant le mouvement de référence, une étape de détermination en temps réel, à partir des images acquises, des coordonnées des points caractéristiques réels de la personne et notamment de ses articulations ainsi qu’une étape d’affichage à l’écran, en superposition sur la silhouette de la personne, de ces points caractéristiques réels reliés par des traits de manière à obtenir une représentation filaire de la personne à l’écran.According to this document, a method for reproducing a reference movement comprises a first step of adapting the images of the model to be displayed on the screen to the morphology of the person so that the images of the model and the person coincide. As previously, the method comprises a step of displaying on the screen the model executing a reference movement, the images of the model having been adapted, a step of acquiring images, using a camera, of the person positioned facing the screen and reproducing the reference movement, a step of determining in real time, from the acquired images, the coordinates of the real characteristic points of the person and in particular of their joints as well as a step of display on the screen, superimposed on the silhouette of the person, of these real characteristic points connected by lines so as to obtain a wire representation of the person on the screen.

Les coordonnées des points caractéristiques de référence du modèle exécutant le mouvement de référence étant stockées dans une base de données, le procédé comprend une étape de comparaison à chaque instant des coordonnées des points caractéristiques réels avec les coordonnées des points caractéristiques de référence. Cette étape de comparaison permet de déterminer en temps réel la différence entre les coordonnées de chaque point caractéristique réel de la personne et celles du point caractéristique de référence correspondant et d’établir une correction si cette différence dépasse un certain seuil.The coordinates of the reference characteristic points of the model executing the reference movement being stored in a database, the method comprises a step of comparing at each instant the coordinates of the real characteristic points with the coordinates of the reference characteristic points. This comparison step makes it possible to determine in real time the difference between the coordinates of each real characteristic point of the person and those of the corresponding reference characteristic point and to establish a correction if this difference exceeds a certain threshold.

Ainsi, ce procédé permet, à l’issue du mouvement, d’afficher sur l’écran les séquences du mouvement pour lesquelles la différence entre l’un des points caractéristiques réels de la personne et le point caractéristique de référence correspondant est supérieure au seuil donné, la valeur de la déviation et éventuellement la correction à apporter pour supprimer cette différence.Thus, this method makes it possible, at the end of the movement, to display on the screen the movement sequences for which the difference between one of the real characteristic points of the person and the corresponding reference characteristic point is greater than the threshold. given, the value of the deviation and possibly the correction to be made to eliminate this difference.

Ce mode opératoire permet à la personne de corriger aisément et de manière autonome sa posture lors d’un mouvement pour que ce dernier soit le plus fidèle possible au mouvement de référence.This operating mode allows the person to easily and independently correct their posture during a movement so that it is as faithful as possible to the reference movement.

Toutefois, le mode de réalisation décrit dans le document US201317160 n’est pas pleinement satisfaisant car il requiert une puissance de calcul importante pour déterminer les valeurs des déviations à afficher afin de permettre à la personne de se corriger.However, the embodiment described in document US201317160 is not fully satisfactory because it requires significant computing power to determine the values of the deviations to be displayed in order to allow the person to correct themselves.

La présente invention vise à remédier à tout ou partie des inconvénients de l’art antérieur en proposant une interface homme-machine simple d’utilisation et ne requérant pas de puissance de calcul importante.The present invention aims to remedy all or part of the drawbacks of the prior art by proposing a man-machine interface that is easy to use and does not require significant computing power.

A cet effet, l’invention a pour objet un procédé de reproduction d’un mouvement de référence, le procédé comprenant des étapes d’affichage sur un système d’affichage de cibles correspondant à des points caractéristiques de référence du mouvement de référence, de détermination en temps réel des points caractéristiques réels d’une personne exécutant un mouvement réel ainsi que d’affichage en temps réel sur le système d’affichage des points caractéristiques réels déterminés à l’étape précédente.To this end, the subject of the invention is a method of reproducing a reference movement, the method comprising steps of displaying on a target display system corresponding to characteristic reference points of the reference movement, of determining in real time the actual characteristic points of a person executing a real movement as well as displaying in real time on the display system the actual characteristic points determined in the previous step.

Selon l’invention, le mouvement de référence comprend plusieurs séquences associées à au moins des première et deuxième postures successives. En complément, le procédé comprend des étapes de détermination, en temps réel, de la position de chaque point caractéristique réel par rapport à la cible correspondante, de détermination d’une durée, dès que tous les points caractéristiques réels coïncident ou sont considérés comme coïncidant avec leurs cibles respectives, de maintien des cibles de la première posture tant que la durée déterminée est inférieure à une durée de maintien puis d’affichage des cibles de la deuxième posture dès que la durée déterminée est supérieure ou égale à la durée de maintien.According to the invention, the reference movement comprises several sequences associated with at least first and second successive postures. In addition, the method comprises steps of determining, in real time, the position of each real characteristic point relative to the corresponding target, of determining a duration, as soon as all the real characteristic points coincide or are considered to coincide with their respective targets, maintaining the targets of the first posture as long as the determined duration is less than a holding duration then displaying the targets of the second posture as soon as the determined duration is greater than or equal to the holding duration.

Le fait de diviser le mouvement de référence en plusieurs séquences associées à au moins des première et deuxième postures successives permet à la personne de corriger au fur et à mesure sa posture afin de la coordonner avec celle du mouvement de référence. Maintenir affichées les cibles de la première posture tant que les points caractéristiques réels n’ont pas été maintenus au droit des cibles correspondantes pendant une durée de maintien donnée puis l’affichage des cibles de la deuxième posture dès que les points caractéristiques réels ont été maintenus au droit des cibles correspondantes pendant la durée de maintien donnée permet d’obtenir une interface homme-machine simple d’utilisation, la personne étant si nécessaire en mesure de se corriger pas à pas et pour chaque séquence afin, in fine, de reproduire correctement le mouvement de référence. Le fait de prévoir une durée de maintien permet à la personne de se corriger de manière autonome et intuitive sans qu’il soit nécessaire de déterminer des valeurs pour les corrections requérant une puissance de calcul importante.The fact of dividing the reference movement into several sequences associated with at least first and second successive postures allows the person to gradually correct their posture in order to coordinate it with that of the reference movement. Keep the targets of the first posture displayed as long as the real characteristic points have not been maintained at the corresponding targets for a given holding duration, then display the targets of the second posture as soon as the real characteristic points have been maintained to the right of the corresponding targets during the given holding time makes it possible to obtain an easy-to-use man-machine interface, the person being if necessary able to correct themselves step by step and for each sequence in order, ultimately, to correctly reproduce the reference movement. Providing a holding time allows the person to correct themselves independently and intuitively without the need to determine values for corrections requiring significant computing power.

L’invention a également pour objet du dispositif pour la mise en œuvre du procédé.The invention also relates to the device for implementing the method.

D'autres caractéristiques et avantages ressortiront de la description de l’invention qui va suivre, description donnée à titre d'exemple uniquement, en regard des dessins annexés parmi lesquels :Other characteristics and advantages will emerge from the description of the invention which follows, description given by way of example only, with reference to the appended drawings including:

est un schéma d’un dispositif de reproduction d’un mouvement de référence illustrant un mode de réalisation de l’invention, is a diagram of a device for reproducing a reference movement illustrating one embodiment of the invention,

est une représentation schématique de différentes séquences d’un mouvement de référence illustrant un mode de réalisation de l’invention, is a schematic representation of different sequences of a reference movement illustrating one embodiment of the invention,

est une vue de face d’un écran affichant de manière superposée une personne exécutant un mouvement réel et des cibles du mouvement de référence correspondant, les cibles n’étant pas toutes atteintes, illustrant un mode de réalisation de l’invention, is a front view of a screen superimposed displaying a person executing a real movement and targets of the corresponding reference movement, the targets not all being reached, illustrating an embodiment of the invention,

est une vue de face de l’écran visible sur la affichant de manière superposée une personne exécutant un mouvement réel et des cibles du mouvement de référence correspondant, les cibles étant toutes atteintes, is a front view of the screen visible on the superimposed displaying a person executing a real movement and targets of the corresponding reference movement, the targets all being reached,

est une représentation schématique d’un point caractéristique d’une personne exécutant un mouvement réel et d’une cible du mouvement de référence correspondant, la cible étant atteinte, is a schematic representation of a characteristic point of a person executing a real movement and of a target of the corresponding reference movement, the target being reached,

est une représentation schématique d’un point caractéristique d’une personne exécutant un mouvement réel et d’une cible du mouvement de référence correspondant, la cible étant considérée comme atteinte, is a schematic representation of a characteristic point of a person executing a real movement and of a target of the corresponding reference movement, the target being considered as reached,

est une représentation schématique d’un point caractéristique d’une personne exécutant un mouvement réel et d’une cible du mouvement de référence correspondant, la cible n’étant pas atteinte, is a schematic representation of a characteristic point of a person executing a real movement and of a target of the corresponding reference movement, the target not being reached,

est une vue de face d’un écran affichant de manière superposée une personne exécutant un mouvement réel et des cibles du mouvement de référence correspondant, lors de différentes séquences du mouvement réel, illustrant un mode de réalisation de l’invention. is a front view of a screen superimposed displaying a person executing a real movement and targets of the corresponding reference movement, during different sequences of the real movement, illustrating an embodiment of the invention.

Selon un mode de réalisation visible sur la , un mouvement réel comprend une posture initiale, une posture finale ainsi qu’au moins une posture intermédiaire entre les postures initiale et finale. Ce mouvement réel peut être plus ou moins complexe et comprendre un grand nombre de postures intermédiaires entre les postures initiale et finale et/ou faire intervenir plusieurs parties du corps. Selon l’exemple visible sur la , le mouvement réel fait intervenir la tête, le tronc, les membres supérieurs et inférieurs d’une personne et comprend un très grand nombre de postures intermédiaires. Selon une application non limitative, le mouvement réel correspond au mouvement de « swing » d’un golfeur. Bien entendu, l’invention n’est pas limitée à ce mouvement ou à ce sport. Elle peut s’appliquer à tous les sports ainsi qu’à toutes les activités pour lesquelles il est nécessaire de reproduire un mouvement de référence.According to an embodiment visible on the , a real movement includes an initial posture, a final posture as well as at least one intermediate posture between the initial and final postures. This real movement can be more or less complex and include a large number of intermediate postures between the initial and final postures and/or involve several parts of the body. According to the example visible on the , the actual movement involves a person's head, trunk, upper and lower limbs and includes a very large number of intermediate postures. According to a non-limiting application, the actual movement corresponds to the “swing” movement of a golfer. Of course, the invention is not limited to this movement or this sport. It can be applied to all sports as well as all activities for which it is necessary to reproduce a reference movement.

Selon une particularité de l’invention, le mouvement réel est divisé en plusieurs séquences, la personne qui exécute le mouvement réel occupant pour chaque séquence une posture donnée différente de celles des autres séquences. La première séquence peut correspondre au début du mouvement et sa posture correspondre à la posture initiale. De même, la dernière séquence peut correspondre à la fin du mouvement et sa posture correspondre à la posture finale. Toutefois, l’invention n’est pas limitée à ce choix. Ainsi, les postures de toutes les séquences peuvent correspondre à des postures intermédiaires.According to a particular feature of the invention, the real movement is divided into several sequences, the person who executes the real movement occupying for each sequence a given posture different from those of the other sequences. The first sequence can correspond to the start of the movement and its posture correspond to the initial posture. Likewise, the last sequence can correspond to the end of the movement and its posture correspond to the final posture. However, the invention is not limited to this choice. Thus, the postures of all sequences can correspond to intermediate postures.

Les séquences peuvent temporellement être réparties de manière régulière entre le début et la fin du mouvement ou être irrégulièrement réparties.The sequences can be temporally distributed regularly between the start and end of the movement or be irregularly distributed.

Le nombre de séquences dépend essentiellement de la complexité du mouvement réel et de sa durée.The number of sequences essentially depends on the complexity of the actual movement and its duration.

A titre d’exemple, comme illustré sur la dans le cas d’un mouvement de « swing » réalisé par un golfeur, le mouvement réel comprend cinq séquences (A) à (E), la première posture de la première séquence (A) correspondant à la posture initiale, la deuxième posture de la deuxième séquence (B) correspondant à une posture du mouvement dit « backswing » lors de laquelle le golfeur écarte le club de la balle, la troisième posture de la troisième séquence (C) correspondant à la posture de fin du mouvement dit « backswing », la quatrième posture de la quatrième séquence (D) correspondant à une posture du mouvement dit « downswing » lors de laquelle le golfeur rapproche le club de la balle jusqu’à l’impact de la balle et la cinquième posture de la cinquième séquence (E) correspondant à une posture du mouvement dit « follow through » lors de laquelle le golfeur accompagne la balle et remonte le club. Bien entendu, l’invention n’est pas limitée à ces postures ni à ce nombre de postures pour le mouvement de « swing » d’un golfeur.As an example, as illustrated in the in the case of a "swing" movement performed by a golfer, the actual movement comprises five sequences (A) to (E), the first posture of the first sequence (A) corresponding to the initial posture, the second posture of the second sequence (B) corresponding to a posture of the so-called “backswing” movement during which the golfer moves the club away from the ball, the third posture of the third sequence (C) corresponding to the end posture of the so-called “backswing” movement , the fourth posture of the fourth sequence (D) corresponding to a posture of the so-called “downswing” movement during which the golfer brings the club closer to the ball until the impact of the ball and the fifth posture of the fifth sequence ( E) corresponding to a posture of the movement called “follow through” during which the golfer follows the ball and raises the club. Of course, the invention is not limited to these postures nor to this number of postures for the “swing” movement of a golfer.

Chaque posture comprend un jeu de points caractéristiques 10.1 à 10.13, chaque point caractéristique 10.1 à 10.13 présentant des coordonnées dans un espace de référence. Les points caractéristiques sélectionnés sont toujours les mêmes pour les différentes postures.Each posture comprises a set of characteristic points 10.1 to 10.13, each characteristic point 10.1 to 10.13 having coordinates in a reference space. The selected characteristic points are always the same for the different postures.

La majorité des points caractéristiques correspondent aux articulations d’une personne 12. Ainsi, comme illustré sur la , une personne 12 comprend treize points caractéristiques réels, le premier point caractéristique 10.1 étant situé au niveau de la tête, le deuxième point caractéristique 10.2 étant situé au niveau de l’épaule droite, le troisième point caractéristique 10.3 étant situé au niveau de l’épaule gauche, le quatrième point caractéristique 10.4 étant situé au niveau du coude droit, le cinquième point caractéristique 10.5 étant situé au niveau du coude gauche, le sixième point caractéristique 10.6 étant situé au niveau du poignet droit, le septième point caractéristique 10.7 étant situé au niveau du poignet gauche, le huitième point caractéristique 10.8 étant situé au niveau de la hanche droite, le neuvième point caractéristique 10.9 étant situé au niveau de la hanche gauche, le dixième point caractéristique 10.10 étant situé au niveau du genou droit, le onzième point caractéristique 10.11 étant situé au niveau du genou gauche, le douzième point caractéristique 10.12 étant situé approximativement au niveau de la cheville droite et le treizième point caractéristique 10.13 étant situé approximativement au niveau de la cheville gauche. Bien entendu, l’invention n’est pas limitée à ce nombre de points caractéristiques ni à ces positions pour chacun d’eux.The majority of characteristic points correspond to the joints of a person 12. Thus, as illustrated in the , a person 12 includes thirteen real characteristic points, the first characteristic point 10.1 being located at the level of the head, the second characteristic point 10.2 being located at the level of the right shoulder, the third characteristic point 10.3 being located at the level of the left shoulder, the fourth characteristic point 10.4 being located at the level of the right elbow, the fifth characteristic point 10.5 being located at the level of the left elbow, the sixth characteristic point 10.6 being located at the level of the right wrist, the seventh characteristic point 10.7 being located at level of the left wrist, the eighth characteristic point 10.8 being located at the level of the right hip, the ninth characteristic point 10.9 being located at the level of the left hip, the tenth characteristic point 10.10 being located at the level of the right knee, the eleventh characteristic point 10.11 being located at the level of the left knee, the twelfth characteristic point 10.12 being located approximately at the level of the right ankle and the thirteenth characteristic point 10.13 being located approximately at the level of the left ankle. Of course, the invention is not limited to this number of characteristic points nor to these positions for each of them.

Pour chaque mouvement réel, le procédé comprend au préalable une étape de détermination d’un mouvement de référence. Selon un mode opératoire, un modèle sachant parfaitement exécuter le mouvement réel l’exécute devant une caméra. Ainsi, le procédé comprend une étape d’acquisition d’images du modèle exécutant le mouvement réel. Au moins pour les images correspondant aux séquences choisies du mouvement réel, le procédé comprend une étape de détermination des coordonnées de chaque point caractéristique de référence de la posture associé à la séquence.For each real movement, the method first comprises a step of determining a reference movement. According to one procedure, a model who knows how to perfectly execute the real movement performs it in front of a camera. Thus, the method includes a step of acquiring images of the model executing the real movement. At least for the images corresponding to the chosen sequences of the real movement, the method comprises a step of determining the coordinates of each reference characteristic point of the posture associated with the sequence.

Les coordonnées de chaque point caractéristique de référence sont déterminées dans un référentiel de référence, notamment un référentiel tridimensionnel.The coordinates of each characteristic reference point are determined in a reference frame of reference, in particular a three-dimensional frame of reference.

L’étape de détermination des coordonnées des points caractéristiques de référence est réalisée en utilisant une application connue comme celle commercialisée sous la dénomination « cubemos » ou « nuitrack ». Bien entendu, l’invention n’est pas limitée à ces applications, d’autres pourraient convenir.The step of determining the coordinates of the characteristic reference points is carried out using a known application such as that marketed under the name “cubemos” or “nuitrack”. Of course, the invention is not limited to these applications, others could be suitable.

A l’issue de cette étape de détermination du mouvement de référence, les coordonnées de chaque point caractéristique de référence pour chaque posture du mouvement de référence sont stockées dans une base de données.At the end of this step of determining the reference movement, the coordinates of each characteristic reference point for each posture of the reference movement are stored in a database.

Une même base de données peut comprendre un catalogue de mouvements de référence avec, pour chacun de ces mouvements de référence et pour la posture de chaque séquence du mouvement de référence, l’ensemble des coordonnées des points caractéristiques de référence de la posture.The same database can include a catalog of reference movements with, for each of these reference movements and for the posture of each sequence of the reference movement, all of the coordinates of the characteristic reference points of the posture.

Selon un premier mode opératoire, le mouvement de référence est déterminé à partir d’un mouvement réel réalisé par un modèle ayant une morphologie moyenne.According to a first operating mode, the reference movement is determined from a real movement carried out by a model having an average morphology.

Selon un autre mode opératoire, chaque mouvement de référence est compris dans une famille de mouvements de référence, chaque mouvement de référence d’une même famille étant déterminé à partir d’un mouvement réel réalisé par des modèles ayant des morphologies différentes. A titre d’exemple, une première famille de mouvements de référence peut comprendre un premier mouvement de référence déterminé à partir d’un mouvement réel exécuté par un premier modèle ayant une première morphologie (petite taille), un deuxième mouvement de référence déterminé à partir d’un mouvement réel exécuté par un deuxième modèle ayant une deuxième morphologie (taille moyenne) ainsi qu’un troisième mouvement de référence déterminé à partir d’un mouvement réel exécuté par un troisième modèle ayant une troisième morphologie (grande taille).According to another operating mode, each reference movement is included in a family of reference movements, each reference movement of the same family being determined from a real movement carried out by models having different morphologies. By way of example, a first family of reference movements may comprise a first reference movement determined from a real movement executed by a first model having a first morphology (small size), a second reference movement determined from of a real movement executed by a second model having a second morphology (medium size) as well as a third reference movement determined from a real movement executed by a third model having a third morphology (large size).

Selon un mode de réalisation visible sur la , un mouvement de référence comprend trois séquences S1, S2, S3, chacune d’elles étant associée à une posture P1, P2, P3 d’une personne comportant chacune plusieurs points caractéristiques de référence 14.1 à 14.13.According to an embodiment visible on the , a reference movement comprises three sequences S1, S2, S3, each of them being associated with a posture P1, P2, P3 of a person each comprising several characteristic reference points 14.1 to 14.13.

Selon un mode de réalisation non limitatif, le procédé comprend au préalable une étape d’adaptation du mouvement de référence à la morphologie de la personne 12 souhaitant exécuter le mouvement réel.According to a non-limiting embodiment, the method first comprises a step of adapting the reference movement to the morphology of the person 12 wishing to execute the real movement.

Selon un premier mode opératoire, l’étape d’adaptation du mouvement de référence comprend une première phase de détermination de la morphologie de la personne 12 puis une deuxième phase de modification des coordonnées de l’ensemble des points caractéristiques des postures des différentes séquences du mouvement de référence en fonction de la morphologie de la personne 12 déterminée lors de la première phase.According to a first operating mode, the step of adapting the reference movement comprises a first phase of determining the morphology of the person 12 then a second phase of modifying the coordinates of all the points characteristic of the postures of the different sequences of the reference movement according to the morphology of the person 12 determined during the first phase.

Selon un mode opératoire, la base de données comprend les coordonnées des points caractéristiques de référence d’un modèle posant dans une posture de référence. Comme pour les différentes postures, le modèle se positionne face à une caméra dans la posture de référence et à partir d’une application connue comme celle commercialisée sous la dénomination « cubemos » ou « nuitrack », les coordonnées des différents points caractéristiques de référence pour la posture de référence étant déterminées et stockées dans la base de données.According to one operating mode, the database includes the coordinates of the characteristic reference points of a model posing in a reference posture. As for the different postures, the model positions itself in front of a camera in the reference posture and from a known application such as that marketed under the name "cubemos" or "nuitrack", the coordinates of the different characteristic reference points for the reference posture being determined and stored in the database.

Lors de la première phase de détermination de la morphologie de la personne 12, cette dernière se positionne face à une caméra dans la posture de référence. Les coordonnées des points caractéristiques réels de la personne 12 sont déterminées de la même manière que pour le modèle. En suivant, pour la posture de référence, les coordonnées des points caractéristiques réels sont comparées aux coordonnées des points caractéristiques de référence afin de déterminer une matrice de transformation.During the first phase of determining the morphology of the person 12, the latter positions himself facing a camera in the reference posture. The coordinates of the real characteristic points of the person 12 are determined in the same way as for the model. Next, for the reference posture, the coordinates of the actual feature points are compared with the coordinates of the reference feature points to determine a transformation matrix.

Lors de la deuxième, pour chaque séquence du mouvement référence, les coordonnées des points caractéristiques de référence de la posture associée à la séquence sont transformées en utilisant la matrice de transformation de manière à obtenir des coordonnées, pour chaque point caractéristique, adaptées à la morphologie de la personne 12.During the second, for each sequence of the reference movement, the coordinates of the reference characteristic points of the posture associated with the sequence are transformed using the transformation matrix so as to obtain coordinates, for each characteristic point, adapted to the morphology of person 12.

Selon une variante simplifiée, lorsque la base de données comprend, pour un mouvement de référence, une famille de mouvements de référence adaptés à différentes morphologies, l’étape d’adaptation du mouvement de référence à la morphologie de la personne 12 peut comprendre une première phase lors de laquelle la personne 12 indique sa morphologie, en indiquant sa taille par exemple, puis une deuxième phase de sélection du mouvement de référence le plus adapté à partir de l’indication donnée par la personne 12 lors de la première phase.According to a simplified variant, when the database includes, for a reference movement, a family of reference movements adapted to different morphologies, the step of adapting the reference movement to the morphology of the person 12 may include a first phase during which the person 12 indicates their morphology, by indicating their size for example, then a second phase of selection of the most suitable reference movement based on the indication given by the person 12 during the first phase.

Bien entendu, l’invention n’est pas limitée à ces modes opératoires pour l’adaptation du mouvement de référence à la morphologie de la personne. De plus, le procédé peut ne pas comprend d’étape d’adaptation.Of course, the invention is not limited to these operating modes for adapting the reference movement to the morphology of the person. In addition, the method may not include an adaptation step.

Quel que soit le mode de réalisation, un mouvement de référence comprend plusieurs séquences avec chacune une posture qui comporte un jeu de points caractéristiques de référence qui présentent chacun des coordonnées dans un référentiel de référence, le nombre de postures étant généralement inférieur ou égal à 20, de préférence inférieur ou égal à 10.Whatever the embodiment, a reference movement comprises several sequences each with a posture which includes a set of characteristic reference points which each have coordinates in a reference frame of reference, the number of postures generally being less than or equal to 20 , preferably less than or equal to 10.

Un dispositif permettant de mettre en œuvre le procédé de reproduction d’un mouvement de référence par une personne 12 comprend un système d’affichage, comme un écran 16 par exemple, configuré pour afficher des informations en fonction de signaux reçus, une caméra 18 configurée pour saisir des images de la personne 12 et transmettre au moins un signal en fonction des images saisies ainsi qu’une unité de traitement 20 comportant au moins une entrée prévue pour des signaux provenant de la caméra 18 et au moins une sortie prévue pour des signaux transmis à l’écran 16.A device making it possible to implement the method of reproducing a reference movement by a person 12 comprises a display system, such as a screen 16 for example, configured to display information as a function of signals received, a camera 18 configured for capturing images of the person 12 and transmitting at least one signal as a function of the images captured as well as a processing unit 20 comprising at least one input provided for signals coming from the camera 18 and at least one output provided for signals transmitted to screen 16.

L’écran 16 peut être une dalle d’affichage. En variante, l’écran 16 peut être un système d’affichage intégré dans des lunettes de réalité virtuelle. Quel que soit le mode de réalisation, les différentes images sont affichées sur un système d’affichage, qui peut être un écran ou tout autre appareil ou instrument, visualisé par la personne 12.Screen 16 can be a display panel. Alternatively, the screen 16 may be a display system integrated into virtual reality glasses. Whatever the embodiment, the different images are displayed on a display system, which can be a screen or any other device or instrument, viewed by the person 12.

Selon une configuration, la caméra 18 est positionnée à la hauteur du bassin de la personne 12, pour gommer les effets de perspective induit par une position différente, et l’écran 16 est positionné entre le sol et la caméra 18. Selon cette configuration, la personne 12 est positionnée face à l’écran 16. Dans le cas d’un mouvement de golf, ce positionnement de l’écran 16 convient car le joueur est censé regarder la balle ou l’emplacement de la balle posée au sol.According to one configuration, the camera 18 is positioned at the height of the pelvis of the person 12, to erase the perspective effects induced by a different position, and the screen 16 is positioned between the ground and the camera 18. According to this configuration, the person 12 is positioned facing the screen 16. In the case of a golf movement, this positioning of the screen 16 is suitable because the player is supposed to look at the ball or the location of the ball placed on the ground.

Le dispositif peut également comprendre une unité de stockage configurée pour stocker les coordonnées des points caractéristiques de référence des postures des différentes séquences du mouvement de référence. En variante, l’unité de stockage peut être prévue dans un serveur distant.The device may also include a storage unit configured to store the coordinates of the characteristic reference points of the postures of the different sequences of the reference movement. Alternatively, the storage unit may be provided in a remote server.

L’unité de traitement 20 est configurée pour associer une cible 22.1 à 22.13 à chaque point caractéristique de référence de chaque posture du mouvement de référence. Chaque cible 22.1 à 22.13 correspond à une sphère ayant comme centre le point caractéristique de référence 14.1 à 14.13 et un rayon donné. Les cibles d’un jeu de points caractéristiques de référence ont le même rayon. Ce rayon donné est suffisamment important pour que les cibles 22.1 à 22.13 soient visibles lorsqu’elles sont affichées sur l’écran sous la forme d’un cercle ou d’un disque. Pour donner un ordre de grandeur, le rayon des cibles 22.1 à 22.13 est ajusté de manière à ce que le rayon des cercles ou des disques représentant les cibles sur l’écran 16 soit compris entre 1/10 et 1/2 du rayon de la tête de la personne 12 affichée sur l’écran 16. En variante, le rayon des cibles 22.1 à 22.3 peut être ajusté par l’utilisateur, les points caractéristiques réels 10.1 à 10.13 étant chacun inscrit dans un cercle présentant une surface comprise entre 50% et 100% de la surface des cibles 22. 1 à 22.13.The processing unit 20 is configured to associate a target 22.1 to 22.13 with each characteristic reference point of each posture of the reference movement. Each target 22.1 to 22.13 corresponds to a sphere having as center the characteristic reference point 14.1 to 14.13 and a given radius. The targets in a set of reference feature points have the same radius. This given radius is large enough for targets 22.1 to 22.13 to be visible when displayed on the screen as a circle or disk. To give an order of magnitude, the radius of the targets 22.1 to 22.13 is adjusted so that the radius of the circles or discs representing the targets on the screen 16 is between 1/10 and 1/2 of the radius of the head of the person 12 displayed on the screen 16. Alternatively, the radius of the targets 22.1 to 22.3 can be adjusted by the user, the actual characteristic points 10.1 to 10.13 each being inscribed in a circle having a surface area of between 50% and 100% of the surface of targets 22.1 to 22.13.

Comme illustré sur les figures 3 et 4, le procédé de reproduction d’un mouvement de référence par une personne 12 comprend, pour plusieurs postures du mouvement de référence, une étape d’affichage sur l’écran 16 des cibles 22.1 à 22.13.As illustrated in Figures 3 and 4, the method of reproducing a reference movement by a person 12 comprises, for several postures of the reference movement, a step of displaying targets 22.1 to 22.13 on the screen 16.

En parallèle, le procédé comprend :

  1. une étape d’acquisition d’images de la personne 12 reproduisant le mouvement de référence grâce à la caméra 18,
  2. pour au moins les images du mouvement réel correspondant aux postures choisies du mouvement de référence, une étape de détermination en temps réel des coordonnées des points caractéristiques réels 10.1 à 10.13 de la personne 12,
  3. une étape d’affichage en temps réel sur l’écran 16 des points caractéristiques réels 10.1 à 10.13 dont les coordonnées ont été déterminées.
In parallel, the process includes:
  1. a step of acquiring images of the person 12 reproducing the reference movement using the camera 18,
  2. for at least the images of the real movement corresponding to the chosen postures of the reference movement, a step of determining in real time the coordinates of the real characteristic points 10.1 to 10.13 of the person 12,
  3. a step of displaying in real time on the screen 16 the real characteristic points 10.1 to 10.13 whose coordinates have been determined.

Ainsi, la personne 12 reproduisant le mouvement de référence visualise sur l’écran 16 les cibles 22.1 à 22.13 associées aux points caractéristiques de référence 14.1 à 14.13 d’une posture donnée du mouvement de référence, qui sont fixes, ainsi que les points caractéristiques réels 10.1, 10.13 qui bougent en temps réel en fonction des mouvements exécutés par la personne 12.Thus, the person 12 reproducing the reference movement visualizes on the screen 16 the targets 22.1 to 22.13 associated with the reference characteristic points 14.1 to 14.13 of a given posture of the reference movement, which are fixed, as well as the real characteristic points 10.1, 10.13 which move in real time depending on the movements executed by the person 12.

Pour reproduire le mouvement de référence, la personne 12 positionne son corps de manière à ce que tous les points caractéristiques réels 10.1 à 10.13 soient positionnés sur les cibles 22.1 à 22.13 correspondantes.To reproduce the reference movement, the person 12 positions his body so that all the real characteristic points 10.1 to 10.13 are positioned on the corresponding targets 22.1 to 22.13.

Comme illustré sur la , seuls les points caractéristiques réels 10.8 à 10.13 associés aux hanches, aux genoux et aux chevilles droits et gauches sont positionnés sur les cibles 22.8 à 22.13 correspondantes.As illustrated on the , only the actual feature points 10.8 to 10.13 associated with the right and left hips, knees and ankles are positioned on the corresponding targets 22.8 to 22.13.

Comme illustré sur la , tous les points caractéristiques réels 10.1 à 10.13 sont positionnés sur les cibles 22.1 à 22.13 correspondantes.As illustrated on the , all the real characteristic points 10.1 to 10.13 are positioned on the corresponding targets 22.1 to 22.13.

Le procédé comprend également une étape de vérification en temps réel pour savoir si chaque point caractéristique réel coïncide avec la cible 22.1 à 22.13 correspondante en comparant les coordonnées du point caractéristique réel avec les coordonnées du point caractéristique de référence associé à cette cible.The method also includes a real-time verification step to determine whether each real characteristic point coincides with the corresponding target 22.1 to 22.13 by comparing the coordinates of the real characteristic point with the coordinates of the reference characteristic point associated with this target.

Selon un premier mode opératoire, un point caractéristique réel coïncide avec sa cible si les coordonnées de ce point caractéristique réel sont situées à l’intérieur ou sur la sphère ayant pour centre le point caractéristique de référence et pour rayon le rayon donné. Le point caractéristique réel ne coïncide pas avec sa cible si les coordonnées de ce point caractéristique réel sont situées à l’extérieur de la sphère ayant pour centre le point caractéristique de référence et pour rayon le rayon donné.According to a first operating mode, a real characteristic point coincides with its target if the coordinates of this real characteristic point are located inside or on the sphere having the reference characteristic point as its center and the given radius as its radius. The real characteristic point does not coincide with its target if the coordinates of this real characteristic point are located outside the sphere having the reference characteristic point as its center and the given radius as its radius.

Selon un deuxième mode opératoire, un degré de tolérance est prévu pour apprécier si un point caractéristique réel coïncide avec sa cible. Ainsi, comme illustré sur la , un point caractéristique réel coïncide avec sa cible si les coordonnées de ce point caractéristique réel sont situées à l’intérieur ou sur la sphère ayant pour centre le point caractéristique de référence et pour rayon le rayon donné. Comme illustré sur la , un point caractéristique est considéré comme coïncidant avec la cible si les coordonnées de ce point caractéristique réel sont situées à l’intérieur ou sur une sphère ayant pour centre le point caractéristique de référence et pour rayon le rayon donné multiplié par un coefficient de tolérance. Comme illustré sur la , le point caractéristique réel ne coïncide pas avec sa cible si les coordonnées de ce point caractéristique réel sont situées à l’extérieur de la sphère ayant pour centre le point caractéristique de référence et pour rayon le rayon donné multiplié par le coefficient de tolérance.According to a second operating mode, a degree of tolerance is provided to assess whether a real characteristic point coincides with its target. Thus, as illustrated in the , a real characteristic point coincides with its target if the coordinates of this real characteristic point are located inside or on the sphere having the reference characteristic point as its center and the given radius as its radius. As illustrated on the , a characteristic point is considered to coincide with the target if the coordinates of this real characteristic point are located inside or on a sphere having as center the reference characteristic point and as radius the given radius multiplied by a tolerance coefficient. As illustrated on the , the real characteristic point does not coincide with its target if the coordinates of this real characteristic point are located outside the sphere having as center the reference characteristic point and for radius the given radius multiplied by the tolerance coefficient.

Pour donner un ordre de grandeur, le coefficient de tolérance est compris entre 1, 5 et 4.To give an order of magnitude, the tolerance coefficient is between 1.5 and 4.

Selon une autre caractéristique, au moins un élément parmi chaque point caractéristique réel et sa cible correspondante est affiché sur l’écran 16 dans un premier état lorsque le point caractéristique réel ne coïncide pas avec la cible et/ou n’est pas considéré comme coïncidant avec la cible et affiché sur l’écran 16 dans un deuxième état lorsque le point caractéristique réel coïncide avec la cible et/ou est considéré comme coïncidant avec la cible.According to another characteristic, at least one element among each real characteristic point and its corresponding target is displayed on the screen 16 in a first state when the real characteristic point does not coincide with the target and/or is not considered to coincide with the target and displayed on the screen 16 in a second state when the actual characteristic point coincides with the target and/or is considered to coincide with the target.

Selon un mode de réalisation donné à titre d’exemple et non limitatif, les cibles sont toujours de la même couleur, par exemple toujours blanches. Chaque point caractéristique réel est affiché d’une première couleur, par exemple en rouge, lorsqu’il ne coïncide pas avec la cible et/ou n’est pas considéré comme coïncidant avec la cible et affiché d’une deuxième couleur, par exemple en vert, lorsqu’il coïncide avec la cible et/ou est considéré comme coïncidant avec la cible. En variante, chaque point caractéristique est affiché d’une deuxième couleur, par exemple en vert, seulement lorsqu’il coïncide avec la cible et d’une troisième couleur, par exemple en orange, lorsqu’il est considéré comme coïncidant avec la cible.According to an embodiment given by way of example and not limitation, the targets are always of the same color, for example always white. Each real characteristic point is displayed in a first color, for example in red, when it does not coincide with the target and/or is not considered to coincide with the target and displayed in a second color, for example in green, when it coincides with the target and/or is considered to coincide with the target. Alternatively, each characteristic point is displayed in a second color, for example in green, only when it coincides with the target and in a third color, for example in orange, when it is considered to coincide with the target.

Selon une caractéristique importante de l’invention, les cibles d’une première posture sont maintenues affichées à l’écran 16 tant que, pour cette première posture, chaque point caractéristique réel n’a pas été maintenu dans une position dans laquelle il coïncide ou est considéré comme coïncidant avec sa cible pendant une durée de maintien. Lorsque tous les points ont été maintenus pendant la durée de maintien dans des positions dans lesquelles ils coïncident ou sont considérés comme coïncidant avec leurs cibles, les cibles de la posture suivante sont affichées. Comme précédemment, la personne 12 doit se positionner de manière à faire coïncider les points caractéristiques réels avec les nouvelles cibles affichées sur l’écran 16. Lorsque tous les points caractéristiques réels coïncident (ou sont considérés comme coïncidant) avec leurs cibles, la personne 12 doit maintenir cette posture pendant la durée de maintien pour passer à la posture suivante. Comme illustré sur la , les cibles de toutes les postures du mouvement de référence sont affichées successivement. Pour chaque posture, les cibles restent affichées tant que la personne n’a pas maintenu une posture réelle correcte pendant la durée de maintien. L’affichage en temps réel sur l’écran 16 des points caractéristiques réels par rapport aux cibles fixes permet à la personne 12 de corriger sa posture de manière intuitive et autonome. Dès que la personne a maintenu correctement la posture pendant la durée de maintien, les cibles de la posture ne sont plus affichées sur l’écran 16 et remplacées par les cibles de la posture suivante.According to an important characteristic of the invention, the targets of a first posture are kept displayed on the screen 16 as long as, for this first posture, each real characteristic point has not been maintained in a position in which it coincides or is considered to coincide with its target for a hold duration. When all points have been held for the hold duration in positions in which they coincide or are considered to coincide with their targets, the targets for the next posture are displayed. As before, the person 12 must position himself so as to make the real characteristic points coincide with the new targets displayed on the screen 16. When all the real characteristic points coincide (or are considered to coincide) with their targets, the person 12 must maintain this posture for the duration of the hold to move on to the next posture. As illustrated on the , the targets of all the postures of the reference movement are displayed successively. For each posture, the targets remain displayed until the person has maintained a correct actual posture for the duration of the hold. The real-time display on the screen 16 of the actual characteristic points in relation to the fixed targets allows the person 12 to correct their posture intuitively and autonomously. As soon as the person has correctly maintained the posture for the duration of maintenance, the targets of the posture are no longer displayed on the screen 16 and replaced by the targets of the next posture.

La durée de maintien est comprise entre 2 et 10 secondes. De préférence, elle est de l’ordre de 5 secondes.The hold time is between 2 and 10 seconds. Preferably, it is around 5 seconds.

Selon un mode de réalisation, le procédé comprend une étape d’affichage, de manière visible pour la personne 12, de la durée durant laquelle les points caractéristiques réels coïncident ou sont considérés comme coïncidant avec leurs cibles respectives dès que tous les points caractéristiques réels coïncident ou sont considérés comme coïncidant avec leurs cibles respectives. Selon une configuration, un décompte 24 de la durée durant laquelle les points caractéristiques réels coïncident ou sont considérés comme coïncidant avec leurs cibles respectives est affiché sur l’écran 16, comme illustré sur la , par exemple dans le coin supérieur gauche de l’écran 16.According to one embodiment, the method comprises a step of displaying, in a manner visible to the person 12, the duration during which the real characteristic points coincide or are considered to coincide with their respective targets as soon as all the real characteristic points coincide or are considered to coincide with their respective targets. According to one configuration, a countdown 24 of the duration during which the actual characteristic points coincide or are considered to coincide with their respective targets is displayed on the screen 16, as illustrated in the , for example in the upper left corner of screen 16.

Bien entendu, l’invention n’est pas limitée à ce mode de réalisation pour le décompte ou l’affichage. Ainsi, le décompte peut être affiché sur un système d’affichage différent de l’écran 16. Le système pour indiquer la durée durant laquelle ses points caractéristiques réels coïncident ou sont considérés comme coïncidant avec leurs cibles respectives peut ne pas se présenter sous la forme d’un décompte (visualisation de la durée de manière décroissante) mais d’un compteur (visualisation de la durée de manière croissante). De plus, le système pour indiquer la durée de maintien peut ne pas être visuel mais sonore.Of course, the invention is not limited to this embodiment for counting or display. Thus, the countdown can be displayed on a display system other than the screen 16. The system for indicating the duration during which its actual characteristic points coincide or are considered to coincide with their respective targets may not be in the form a countdown (displaying the duration in a decreasing manner) but a counter (displaying the duration in an increasing manner). In addition, the system for indicating the hold time may not be visual but audible.

Enfin, le dispositif peut ne comprendre aucun système pour indiquer à la personne 12 la durée durant laquelle ses points caractéristiques réels coïncident ou sont considérés comme coïncidant avec leurs cibles respectives. Les cibles d’une première posture sont maintenues affichées sur l’écran 16 tant que la personne 12 n’a pas maintenu pendant la durée de maintien la position dans laquelle ses points caractéristiques réels coïncident ou sont considérés comme coïncidant avec les cibles.Finally, the device may not include any system for indicating to the person 12 the duration during which their actual characteristic points coincide or are considered to coincide with their respective targets. The targets of a first posture are kept displayed on the screen 16 as long as the person 12 has not maintained during the holding period the position in which his real characteristic points coincide or are considered to coincide with the targets.

Quel que soit le mode de réalisation, l’unité de traitement 20 est configurée pour :

  1. afficher sur un écran 16 des cibles correspondant aux points caractéristiques de référence d’une première posture d’un mouvement de référence,
  2. déterminer en temps réel les points caractéristiques réels d’une personne 12 à partir d’images de la personne 12 prises en temps réel de la personne 12,
  3. afficher en temps réel les points caractéristiques réels sur l’écran,
  4. déterminer en temps réel la position de chaque point caractéristique réel par rapport à la cible correspondante afin de vérifier si le point caractéristique réel coïncide ou est considéré comme coïncidant avec la cible correspondante,
  5. déterminer une durée dès que tous les points caractéristiques réels coïncident ou sont considérés comme coïncidant avec leurs cibles respectives,
  6. maintenir les cibles de la première posture tant que la durée déterminée est inférieure à une durée de maintien puis afficher les cibles d’une deuxième posture dès que la durée déterminée est supérieure ou égale à la durée de maintien.
Whatever the embodiment, the processing unit 20 is configured to:
  1. display on a screen 16 targets corresponding to the characteristic reference points of a first posture of a reference movement,
  2. determine in real time the real characteristic points of a person 12 from images of the person 12 taken in real time of the person 12,
  3. display the actual characteristic points on the screen in real time,
  4. determine in real time the position of each real characteristic point relative to the corresponding target in order to check whether the real characteristic point coincides or is considered to coincide with the corresponding target,
  5. determine a duration as soon as all the real characteristic points coincide or are considered to coincide with their respective targets,
  6. maintain the targets of the first posture as long as the determined duration is less than a holding duration then display the targets of a second posture as soon as the determined duration is greater than or equal to the holding duration.

Pour obtenir un rendu plus réaliste, la personne 12 filmée est également affichée en temps réel sur l’écran 16. Toutefois, cet affichage n’est pas nécessaire.To obtain a more realistic rendering, the person 12 filmed is also displayed in real time on the screen 16. However, this display is not necessary.

Le fait de diviser le mouvement de référence en plusieurs séquences associées à au moins des première et deuxième postures successives permet à la personne 12 de corriger au fur et à mesure sa posture afin de la coordonner avec celle du mouvement de référence grâce à l’affichage des cibles sur l’écran 16. Le maintien d’une posture correcte pendant la durée de maintien permet à la personne 12 de la mémoriser et de pouvoir par la suite correctement reproduire le mouvement réel en continu. Selon un autre avantage, le fait de diviser le mouvement de référence en plusieurs séquences permet de ne comparer la position des points caractéristiques réels avec les cibles correspondantes que pour les postures associées aux séquences sélectionnées, ce qui permet de réduire les temps de calcul et la puissance de calcul nécessaire.The fact of dividing the reference movement into several sequences associated with at least first and second successive postures allows the person 12 to gradually correct their posture in order to coordinate it with that of the reference movement thanks to the display targets on the screen 16. Maintaining a correct posture during the holding time allows the person 12 to memorize it and subsequently be able to correctly reproduce the real movement continuously. According to another advantage, the fact of dividing the reference movement into several sequences makes it possible to compare the position of the real characteristic points with the corresponding targets only for the postures associated with the selected sequences, which makes it possible to reduce the calculation times and the necessary computing power.

L’invention permet d’obtenir une interface homme-machine simple d’utilisation, la personne étant en mesure, si nécessaire de se corriger pas à pas pour chaque séquence afin, in fine, de correctement reproduire un mouvement de référence dans son entièreté. Le fait de prévoir une durée de maintien permet à la personne de se corriger de manière autonome et intuitive sans qu’il soit nécessaire de déterminer des valeurs pour les corrections, ce qui requiert des puissances de calcul importantes.The invention makes it possible to obtain an easy-to-use man-machine interface, the person being able, if necessary, to correct themselves step by step for each sequence in order, ultimately, to correctly reproduce a reference movement in its entirety. Providing a holding time allows the person to correct themselves autonomously and intuitively without the need to determine values for the corrections, which requires significant computing power.

Claims (9)

Procédé de reproduction d’un mouvement de référence, le procédé comprenant des étapes d’affichage sur un système d’affichage (16) de cibles (22.1 à 22.13) correspondant à des points caractéristiques de référence (14.1 à 14.13) du mouvement de référence, de détermination en temps réel des points caractéristiques réels (10.1 à 10.13) d’une personne (12) exécutant un mouvement réel ainsi que d’affichage en temps réel sur le système d’affichage (16) des points caractéristiques réels (10.1 à 10.13) déterminés à l’étape précédente ; caractérisé en ce que le mouvement de référence comprend plusieurs séquences associées à au moins des première et deuxième postures successives et en ce que le procédé comprend des étapes de détermination en temps réel de la position de chaque point caractéristique réel (10.1 à 10.13) par rapport à la cible (22.1 à 22.13) correspondante, de détermination d’une durée, dès que tous les points caractéristiques réels (10.1 à 10.13) coïncident ou sont considérés comme coïncidant avec leurs cibles (22.1 à 22.13) respectives, de maintien des cibles (22.1 à 22.13) de la première posture tant que la durée déterminée est inférieure à une durée de maintien puis d’affichage des cibles (22.1 à 22.13) de la deuxième posture dès que la durée déterminée est supérieure ou égale à la durée de maintien.Method for reproducing a reference movement, the method comprising steps of displaying on a display system (16) targets (22.1 to 22.13) corresponding to characteristic reference points (14.1 to 14.13) of the reference movement , determining in real time the real characteristic points (10.1 to 10.13) of a person (12) executing a real movement as well as displaying in real time on the display system (16) the real characteristic points (10.1 to 10.13) determined in the previous step; characterized in that the reference movement comprises several sequences associated with at least first and second successive postures and in that the method comprises steps of determining in real time the position of each real characteristic point (10.1 to 10.13) relative to to the corresponding target (22.1 to 22.13), for determining a duration, as soon as all the real characteristic points (10.1 to 10.13) coincide or are considered to coincide with their respective targets (22.1 to 22.13), for maintaining the targets ( 22.1 to 22.13) of the first posture as long as the determined duration is less than a holding duration then display of the targets (22.1 to 22.13) of the second posture as soon as the determined duration is greater than or equal to the holding duration. Procédé selon la revendication 1, caractérisé en ce qu’il comprend une étape d’affichage, de manière visible pour la personne (12), de la durée durant laquelle tous les points caractéristiques réels (10.1 à 10.13) coïncident ou sont considérés comme coïncidant avec leurs cibles (22.1 à 22.13) respectives.Method according to claim 1, characterized in that it comprises a step of displaying, in a manner visible to the person (12), the duration during which all the real characteristic points (10.1 to 10.13) coincide or are considered to coincide with their respective targets (22.1 to 22.13). Procédé selon la revendication 1 ou 2, caractérisé en ce que la durée de maintien est comprise entre 2 et 10 secondes.Method according to claim 1 or 2, characterized in that the holding time is between 2 and 10 seconds. Procédé selon l’une des revendications 1 à 3, caractérisé en ce qu’au moins un élément parmi chaque point caractéristique réel (10.1 à 10.13) et la cible correspondante (22.1 à 22.13) est affiché sur le système d’affichage (16) dans un premier état lorsque le point caractéristique réel (10.1 à 10.13) ne coïncide pas avec la cible (22.1 à 22.13) et/ou n’est pas considéré comme coïncidant avec la cible (22.1 à 22.13) et affiché sur le système d’affichage (16) dans un deuxième état lorsque le point caractéristique réel (10.1 à 10.13) coïncide avec la cible (22.1 à 22.13) et/ou est considéré comme coïncidant avec la cible (22.1 à 22.13).Method according to one of Claims 1 to 3, characterized in that at least one element from each actual characteristic point (10.1 to 10.13) and the corresponding target (22.1 to 22.13) is displayed on the display system (16). in a first state when the actual characteristic point (10.1 to 10.13) does not coincide with the target (22.1 to 22.13) and/or is not considered to coincide with the target (22.1 to 22.13) and displayed on the system display (16) in a second state when the actual characteristic point (10.1 to 10.13) coincides with the target (22.1 to 22.13) and/or is considered to coincide with the target (22.1 to 22.13). Procédé selon la revendication précédente, caractérisé en ce que les cibles (22.1 à 22.13) sont toujours de la même couleur et en ce que chaque point caractéristique réel (10.1 à 10.13) est affiché d’une première couleur lorsqu’il ne coïncide pas avec la cible (22.1 à 22.13) et/ou n’est pas considéré comme coïncidant avec la cible (22.1 à 22.13) et affiché d’au moins une deuxième couleur lorsqu’il coïncide avec la cible (22.1 à 22.13) et/ou est considéré comme coïncidant avec la cible (22.1 à 22.13).Method according to the preceding claim, characterized in that the targets (22.1 to 22.13) are always of the same color and in that each real characteristic point (10.1 to 10.13) is displayed in a first color when it does not coincide with the target (22.1 to 22.13) and/or is not considered to coincide with the target (22.1 to 22.13) and displayed in at least a second color when it coincides with the target (22.1 to 22.13) and/or is considered to coincide with the target (22.1 to 22.13). Procédé selon l’une des revendications précédentes, caractérisé en ce que le mouvement de référence comprend un nombre de postures inférieur ou égal à 20, de préférence inférieur ou égal à 10.Method according to one of the preceding claims, characterized in that the reference movement comprises a number of postures less than or equal to 20, preferably less than or equal to 10. Dispositif permettant de mettre en œuvre un procédé de reproduction d’un mouvement de référence selon l’une des revendications précédentes, le dispositif comprenant un système d’affichage (16), une caméra (18) configurée pour saisir des images d’une personne (12) exécutant un mouvement réel ainsi qu’une unité de traitement (20) configurée pour afficher sur le système d’affichage (16) des cibles (22.1 à 22.13) correspondant à des points caractéristiques de référence (14.1 à 14.13) d’une première posture du mouvement de référence, déterminer en temps réel des points caractéristiques réels (10.1 à 10.13) de la personne (12) reproduisant le mouvement réel à partir des images saisies par la caméra (18) et afficher en temps réel les points caractéristiques réels (10.1 à 10.13) sur le système d’affichage (16) ; caractérisé en ce que l’unité de traitement (20) est configurée pour déterminer en temps réel la position de chaque point caractéristique réel (10.1 à 10.13) par rapport à la cible (22.1 à 22.13) correspondante, déterminer une durée dès que tous les points caractéristiques réels (10.1 à 10.13) coïncident ou sont considérés comme coïncidant avec leurs cibles (22.1 à 22.13) respectives, maintenir les cibles (22.1 à 22.13) de la première posture tant que la durée déterminée est inférieure à une durée de maintien puis afficher les cibles (22.1 à 22.13) d’une deuxième posture dès que la durée déterminée est supérieure ou égale à la durée de maintien.Device for implementing a method of reproducing a reference movement according to one of the preceding claims, the device comprising a display system (16), a camera (18) configured to capture images of a person (12) executing a real movement as well as a processing unit (20) configured to display on the display system (16) targets (22.1 to 22.13) corresponding to characteristic reference points (14.1 to 14.13) of a first posture of the reference movement, determine in real time real characteristic points (10.1 to 10.13) of the person (12) reproducing the real movement from the images captured by the camera (18) and display the characteristic points in real time real (10.1 to 10.13) on the display system (16); characterized in that the processing unit (20) is configured to determine in real time the position of each real characteristic point (10.1 to 10.13) relative to the corresponding target (22.1 to 22.13), determining a duration as soon as all real characteristic points (10.1 to 10.13) coincide or are considered to coincide with their respective targets (22.1 to 22.13), maintain the targets (22.1 to 22.13) of the first posture as long as the determined duration is less than a holding duration then display the targets (22.1 to 22.13) of a second posture as soon as the determined duration is greater than or equal to the holding duration. Dispositif selon la revendication précédente, caractérisé en ce qu’il comprend un système pour indiquer à la personne (12) la durée durant laquelle les points caractéristiques réels (10.1 à 10.13) coïncident ou sont considérés comme coïncidant avec leurs cibles (22.1 à 22.13) respectives.Device according to the preceding claim, characterized in that it comprises a system for indicating to the person (12) the duration during which the real characteristic points (10.1 to 10.13) coincide or are considered to coincide with their targets (22.1 to 22.13) respective. Dispositif selon la revendication précédente, caractérisé en ce qu’il comprend un décompte (24), affiché sur le système d’affichage (16), de la durée durant laquelle les points caractéristiques réels coïncident ou sont considérés comme coïncidant avec leurs cibles respectives.Device according to the preceding claim, characterized in that it comprises a countdown (24), displayed on the display system (16), of the duration during which the real characteristic points coincide or are considered to coincide with their respective targets.
FR2205699A 2022-06-13 2022-06-13 Method for reproducing a reference movement by a person and device for its implementation Pending FR3136577A1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
FR2205699A FR3136577A1 (en) 2022-06-13 2022-06-13 Method for reproducing a reference movement by a person and device for its implementation
PCT/EP2023/065309 WO2023242036A1 (en) 2022-06-13 2023-06-07 Method for achieving reproduction of a reference movement by a person and device for implementing same

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR2205699A FR3136577A1 (en) 2022-06-13 2022-06-13 Method for reproducing a reference movement by a person and device for its implementation
FR2205699 2022-06-13

Publications (1)

Publication Number Publication Date
FR3136577A1 true FR3136577A1 (en) 2023-12-15

Family

ID=82943137

Family Applications (1)

Application Number Title Priority Date Filing Date
FR2205699A Pending FR3136577A1 (en) 2022-06-13 2022-06-13 Method for reproducing a reference movement by a person and device for its implementation

Country Status (2)

Country Link
FR (1) FR3136577A1 (en)
WO (1) WO2023242036A1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US1716013A (en) 1919-05-27 1929-06-04 Budd Wheel Co Method of making wheels
US20130171601A1 (en) 2010-09-22 2013-07-04 Panasonic Corporation Exercise assisting system
US20160049089A1 (en) * 2013-03-13 2016-02-18 James Witt Method and apparatus for teaching repetitive kinesthetic motion
US20160256740A1 (en) * 2011-11-22 2016-09-08 Scott Dallas Rowe Method for interactive training and analysis
WO2016156628A2 (en) * 2015-03-31 2016-10-06 Swing Play, S.L. System for analysing and correcting a golfer's swing and method for said system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US1716013A (en) 1919-05-27 1929-06-04 Budd Wheel Co Method of making wheels
US20130171601A1 (en) 2010-09-22 2013-07-04 Panasonic Corporation Exercise assisting system
US20160256740A1 (en) * 2011-11-22 2016-09-08 Scott Dallas Rowe Method for interactive training and analysis
US20160049089A1 (en) * 2013-03-13 2016-02-18 James Witt Method and apparatus for teaching repetitive kinesthetic motion
WO2016156628A2 (en) * 2015-03-31 2016-10-06 Swing Play, S.L. System for analysing and correcting a golfer's swing and method for said system

Also Published As

Publication number Publication date
WO2023242036A1 (en) 2023-12-21

Similar Documents

Publication Publication Date Title
Plopski et al. Corneal-imaging calibration for optical see-through head-mounted displays
US8094090B2 (en) Real-time self-visualization system
TWI441669B (en) Virtual golf simulation apparatus and method
CN109925678A (en) A kind of training method based on eye movement tracer technique, training device and equipment
EP2836893A1 (en) Method for determining the direction in which a user is looking
CN104200491A (en) Motion posture correcting system for human body
FR2980681A3 (en) METHOD OF DETERMINING OCULAR AND OPTICAL MEASUREMENTS OF INTEREST FOR THE MANUFACTURE AND MOUNTING OF GLASSES OF CORRECTIVE GLASSES USING A CAMERA IN A NON-CONTROLLED CONTEXT
CN103390174A (en) Physical education assisting system and method based on human body posture recognition
EP3918572A1 (en) Method and device for displaying data for monitoring an event
WO2009043927A1 (en) Apparatus for acquiring and processing information relating to human eye movements
KR102231202B1 (en) Golf Swing Analysis Apparatus Using Around View
JP2005198818A (en) Learning supporting system for bodily motion and learning supporting method
US20230245366A1 (en) 3d avatar generation using biomechanical analysis
CN109828663A (en) Determination method and device, the operating method of run-home object of aiming area
WO2019224055A1 (en) Method for analysing a dental situation
EP3796866A1 (en) Method for analysing a dental situation
WO2023242036A1 (en) Method for achieving reproduction of a reference movement by a person and device for implementing same
WO2015177461A1 (en) Method of determining at least one behavioural parameter
EP3361930B1 (en) Method for determining a visual behavior parameter of a person, and related testing device
FR3069942B1 (en) ANALYSIS OF A MOVEMENT AND / OR A POSTURE OF AT LEAST ONE PART OF THE BODY OF AN INDIVIDUAL
EP3883844B1 (en) Physical exercise apparatus and method for training on such an apparatus
EP3084515B1 (en) Method for checking the correct assembly of a frame and corrective lenses
Nitschke et al. Practical display-camera calibration from eye reflections using coded illumination
US12008839B2 (en) Golf club and other object fitting using quantitative biomechanical-based analysis
CN107094267A (en) Web TV with user identification function

Legal Events

Date Code Title Description
PLFP Fee payment

Year of fee payment: 2

PLSC Publication of the preliminary search report

Effective date: 20231215