FR2926660A1

FR2926660A1 - DEVICE FOR LEARNING A MANUAL TECHNIQUE BY AN OPERATOR

Info

Publication number: FR2926660A1
Application number: FR0850315A
Authority: FR
Inventors: Pierre Ehanno; Jean Etienne Guiot
Original assignee: Renault SAS
Current assignee: Renault SAS
Priority date: 2008-01-18
Filing date: 2008-01-18
Publication date: 2009-07-24
Anticipated expiration: 2028-01-18
Also published as: FR2926660B1; EP2243128A1; WO2009092944A1

Abstract

L'invention concerne un dispositif (1) d'apprentissage d'une technique manuelle par un opérateur, et un procédé associé, le dispositif comportant un organe de préhension (2) représentatif d'un outil destiné à être manipulé par l'opérateur, un support physique (3) représentatif d'un objet à travailler, des moyens de détection (4) de l'organe de préhension (2), du support physique (3) et des mouvements effectués par l'opérateur, ainsi que des moyens de traitement (5) et de contrôle des différents moyens constitutifs du dispositif, traitant en particulier les mouvements de l'opérateur détectés, et des moyens de projection (6) d'informations à destination de l'opérateur, caractérisé en ce que le support physique (3) et les moyens de projection d'informations (6) sont agencés l'un par rapport à l'autre de sorte que les informations sont projetées sur le support physique (3).The invention relates to a device (1) for learning a manual technique by an operator, and to a related method, the device comprising a gripping member (2) representative of a tool intended to be handled by the operator, a physical medium (3) representative of an object to be worked, detecting means (4) of the gripping member (2), the physical medium (3) and movements made by the operator, and means processing (5) and control of the various means constituting the device, in particular dealing with the detected movements of the operator, and information projection means (6) for the operator, characterized in that the support physical (3) and the information projection means (6) are arranged relative to each other so that the information is projected onto the physical medium (3).

Description

L'invention concerne un dispositif d'apprentissage d'une technique manuelle par un opérateur. L'invention concerne également un procédé d'apprentissage, mis en oeuvre avec le dispositif. The invention relates to a device for learning a manual technique by an operator. The invention also relates to a learning method implemented with the device.

Une application envisageable de l'invention est celle de l'apprentissage de la soudure. Une autre application envisageable de l'invention est celle de l'apprentissage de la peinture avec un pistolet ou la dépose de mastic. On connaît des dispositifs d'apprentissage d'une technique manuelle par un opérateur, qui se veulent proches de la réalité. Par exemple, le document WO 2006/034571 (Dl) divulgue un dispositif d'apprentissage pour la soudure, en représentant des pièces à souder en trois dimensions avec un organe de préhension représentant l'outil à souder. Les gestes de l'opérateur sont enregistrés, de sorte à obtenir une simulation de ces gestes sur un ordinateur, qui est projetée sur un écran visible par l'opérateur. L'écran permet ainsi à l'opérateur de visualiser son action en temps réel, et d'obtenir des données sur les conséquences des actions effectuées par l'opérateur. One possible application of the invention is that of welding training. Another possible application of the invention is that of learning to paint with a gun or the removal of putty. There are known devices for learning a manual technique by an operator, who want to be close to reality. For example, document WO 2006/034571 (D1) discloses a training device for welding, by representing parts to be welded in three dimensions with a gripping member representing the tool to be welded. The gestures of the operator are recorded, so as to obtain a simulation of these gestures on a computer, which is projected on a screen visible to the operator. The screen thus allows the operator to view his action in real time, and to obtain data on the consequences of actions performed by the operator.

Toutefois, ce dispositif nécessite que cette visualisation s'effectue dans la fenêtre de visualisation d'un masque ou de lunettes de protection dont l'emploi est nécessaire à l'opération de soudage. Toutefois, un tel dispositif est relativement contraignant pour d'autres applications où l'emploi d'un casque de protection n'est plus utile, par exemple pour un programme d'entraînement à la peinture au pistolet. Par ailleurs, un tel dispositif est relativement compliqué dans la mesure où il nécessite des moyens de communication entre le casque et un ordinateur d'où proviennent les simulations, ainsi qu'une fenêtre de visualisation du casque permettant un affichage, ce qui peut s'avérer particulièrement coûteux. However, this device requires that this visualization is performed in the viewing window of a mask or goggles whose use is necessary for the welding operation. However, such a device is relatively restrictive for other applications where the use of a protective helmet is no longer useful, for example for a training program spray paint. Moreover, such a device is relatively complicated insofar as it requires means of communication between the headset and a computer from which the simulations come, as well as a display window of the headset allowing a display, which can be used. prove particularly expensive.

Enfin, de manière générale, les dispositifs existants ont un niveau de réalisme qui n'est pas totalement satisfaisant et qui ne facilitent pas un apprentissage autonome idéal. Un objectif de l'invention est donc de proposer un dispositif d'apprentissage d'une technique manuelle par un opérateur, utilisable pour de nombreuses applications. Un autre objectif de l'invention est de proposer un tel dispositif, nettement simplifié dans sa mise en oeuvre et donc peu coûteux. Un autre objectif est encore de fournir un niveau de réalisme amélioré. L'un au moins de ces objectifs est atteint grâce à un dispositif d'apprentissage d'une technique manuelle par un opérateur, lequel comporte un organe de préhension représentatif d'un outil destiné à être manipulé par l'opérateur, un support physique représentatif d'un objet à travailler, des moyens de détection de l'organe de préhension, du support physique et des mouvements effectués par l'opérateur, ainsi que des moyens de traitement et de contrôle des différents moyens constitutifs du dispositif, traitant en particulier les mouvements de l'opérateur détectés, et des moyens de projection d'informations à destination de l'opérateur, et pour lequel le support physique et les moyens de projection d'informations sont agencés l'un par rapport à l'autre de sorte que les informations sont projetées sur le support physique, même s'il n'y a pas de contact entre l'organe de préhension et le support physique. Finally, in general, the existing devices have a level of realism that is not completely satisfactory and that do not facilitate an ideal autonomous learning. An object of the invention is therefore to provide a device for learning a manual technique by an operator, usable for many applications. Another objective of the invention is to propose such a device, which is clearly simplified in its implementation and therefore inexpensive. Another goal is still to provide an improved level of realism. At least one of these objectives is achieved by a device for learning a manual technique by an operator, which comprises a gripping member representative of a tool intended to be handled by the operator, a representative physical medium of an object to be worked, means for detecting the gripping member, the physical medium and movements effected by the operator, as well as means for processing and controlling the various means constituting the device, in particular processing the detected operator movements, and information projection means to the operator, and for which the physical medium and the information projection means are arranged relative to one another so that the information is projected on the physical medium, even if there is no contact between the gripping member and the physical medium.

L'un au moins de ces objectifs est également atteint par un procédé d'apprentissage d'une technique manuelle par un opérateur avec un dispositif comportant les moyens mentionnés ci-dessus, et dans lequel on projette les informations sur le support physique, même s'il n'y a pas de contact entre l'organe de préhension et le support physique. At least one of these objectives is also achieved by a method of learning a manual technique by an operator with a device comprising the means mentioned above, and in which the information on the physical medium is projected, even if there is no contact between the gripping member and the physical support.

D'autres caractéristiques, buts, avantages et objectifs de la présente invention apparaîtront à la lecture de la description détaillée qui va suivre, et en regard des dessins annexés, donnés à titre d'exemples non limitatifs et sur lesquels : - la figure 1 est une représentation schématique d'un dispositif d'apprentissage de gestes techniques par un opérateur, conforme à l'invention. Le dispositif 1 d'apprentissage d'une technique manuelle par un opérateur comporte un organe de préhension 2, un support physique 3, des moyens de détection 4 pour détecter à la fois l'organe de préhension 2, le support physique 3 et les mouvements effectués par l'opérateur. L'organe de préhension 2 est représentatif d'un outil destiné à être manipulé par l'opérateur. Pour une question de réalisme, l'organe de préhension 2 en question pourra être un outil réel ou présentera une ergonomie identique à celle d'un outil réel. Le support physique 3 est représentatif d'un objet à travailler avec l'organe de préhension 2. Là encore, on choisira soit l'objet réel devant être travaillé, soit un support physique 3 dont l'ergonomie est identique à celle de l'objet réel. Le support physique 3 sera de préférence fixe par rapport au sol. Le dispositif comprend également des moyens de traitement 5 et de contrôle des différents moyens constitutifs du dispositif. Ces moyens de traitement et de contrôle 5 traitent en particulier les mouvements de l'opérateur détectés par les moyens de détection 4, pour déterminer par exemple la position et la vitesse de celui-ci ou des gestes effectués. En particulier, ces moyens permettent de comparer les gestes effectués par l'opérateur à des gestes effectués par un expert, et qui ont été préalablement enregistrées. Other features, objects, advantages and objectives of the present invention will appear on reading the detailed description which follows, and with reference to the appended drawings, given by way of non-limiting examples and in which: FIG. a schematic representation of a device for learning technical gestures by an operator, according to the invention. The device 1 for training a manual technique by an operator comprises a gripping member 2, a physical support 3, detection means 4 for detecting both the gripping member 2, the physical support 3 and the movements performed by the operator. The gripping member 2 is representative of a tool intended to be handled by the operator. For a question of realism, the gripping member 2 in question may be a real tool or will have an ergonomics identical to that of a real tool. The physical support 3 is representative of an object to be worked with the gripping member 2. Again, one will choose either the real object to be worked, or a physical support 3 whose ergonomics are identical to that of the real object. The physical support 3 will preferably be fixed relative to the ground. The device also comprises means 5 for processing and controlling the various means constituting the device. These processing and control means 5 deal in particular with the movements of the operator detected by the detection means 4, to determine, for example, the position and the speed thereof or the actions taken. In particular, these means make it possible to compare the gestures made by the operator to gestures made by an expert, and which have been previously recorded.

Les moyens de traitement et de contrôle 5 traitent également des données de contexte (bruit, température dans l'environnement de la pièce) du dispositif. Le dispositif 1 comprend encore des moyens de projection 6 d'informations préalablement traitées par les moyens de traitement et 30 de contrôle 5 à destination de l'opérateur. Ces informations visuelles concernent par exemple le résultat des mouvements effectués par l'opérateur, des informations d'assistance à l'opérateur (vitesse, position de l'organe de préhension par exemple), Ces moyens de projection d'informations 6 sont agencés par rapport au support physique 3 de sorte que les informations sont projetées sur le support physique 3, et ce même s'il n'y a pas de contact entre l'organe de préhension 2 et le support physique 3. The processing and control means 5 also process the context data (noise, temperature in the environment of the room) of the device. The device 1 also comprises information projection means 6 previously processed by the processing and control means 5 for the operator. This visual information concerns, for example, the result of the movements performed by the operator, assistance information to the operator (speed, position of the gripping member, for example). These information projection means 6 are arranged by relative to the physical support 3 so that the information is projected on the physical support 3, even if there is no contact between the gripping member 2 and the physical support 3.

Ils comprennent un ou plusieurs projecteurs en fonction de la forme/géométrie du support physique 3, notamment pour éviter les zones d'ombre. Le dispositif 1 peut en outre comprendre des moyens pour émettre des informations sonores 7 à destination de l'opérateur, par exemple avec un ou plusieurs haut-parleurs ou un casque audio. Le dispositif 1 peut encore comprendre des moyens pour émettre des informations tactiles 8 à destination de l'opérateur. Ces moyens pour émettre des informations tactiles 8 peuvent être disposés au sein de l'organe de préhension 2, ou au sein du support physique (3), ou encore au niveau du sol, cela en fonction de la nature des informations tactiles à restituer. Les moyens d'émission d'informations sonores 7 et tactiles 8 sont sous le contrôle des moyens de traitement et de contrôle 5. Le dispositif comprend aussi un poste de visualisation 9, connecté aux moyens de traitement et de contrôle 5, pour afficher des informations de synthèse sur les mouvements effectués par l'opérateur. On notera que les moyens de détection 4 sont disposés, par rapport à l'organe de préhension 2, au support physique 3 et à l'opérateur, de sorte à fournir aux moyens de traitement 5 et de contrôle 5, les coordonnées spatiales et angulaires de ceux-ci en temps réel. Le support physique 3 pourra être un support à deux dimensions, mais sera de préférence à trois dimensions pour représenter au mieux les formes de l'objet que l'opérateur devra effectivement travailler une fois son apprentissage terminé. Le procédé d'apprentissage mis en oeuvre par l'intermédiaire du dispositif 1 consiste principalement à projeter des informations sur le support physique 3, ces informations concernant tout autant des résultats/estimations sur les gestes effectuées que des informations d'assistance pour l'opérateur. Le support physique 3 sera de préférence solide, non malléable. De préférence également, il représentera un objet qui bien que pouvant être complexe, ne présentera pas ou peu de cavités, et ce afin que le ou les projecteurs formant les moyens de projection 6 puissent éclairer correctement le support physique 3. L'invention ne nécessite donc nullement l'emploi d'un casque comportant une fenêtre sur laquelle sont projetées des informations, du fait que les informations sont directement projetées sur le support physique 3. On n'est donc pas limité à une application particulière. Et la mise en oeuvre de ce dispositif est également simplifiée et moins coûteuse, du fait qu'elle nécessite un ou des projecteurs tout à fait communs. Enfin, le réalisme du dispositif de l'invention est accru du fait même de la projection directe des informations sur le support physique 3, qui est lui-même de préférence représenté au plus près de la réalité. They comprise one or more projectors depending on the shape / geometry of the physical medium 3, in particular to avoid shadow areas. The device 1 may further comprise means for transmitting sound information 7 to the operator, for example with one or more speakers or headphones. The device 1 may further comprise means for transmitting tactile information 8 to the operator. These means for transmitting tactile information 8 may be disposed within the gripping member 2, or within the physical medium (3), or at the ground level, depending on the nature of the tactile information to be restored. The sound and tactile information transmission means 8 are under the control of the processing and control means 5. The device also comprises a viewing station 9, connected to the processing and control means 5, for displaying information summary of the movements performed by the operator. It will be noted that the detection means 4 are arranged, with respect to the gripping member 2, the physical support 3 and the operator, so as to provide the processing means 5 and control 5, the spatial and angular coordinates of these in real time. The physical support 3 may be a support in two dimensions, but will preferably be three-dimensional to best represent the forms of the object that the operator will actually work once his training is completed. The learning method implemented via the device 1 consists mainly in projecting information on the physical medium 3, this information concerning both the results / estimates of the actions performed and the assistance information for the operator. . The physical support 3 will preferably be solid, non-malleable. Also preferably, it will represent an object that, although it may be complex, will have no or few cavities, so that the spotlight or projectors forming the projection means 6 can properly illuminate the physical support 3. The invention does not require therefore by no means the use of a helmet with a window on which information is projected, because the information is directly projected on the physical medium 3. It is therefore not limited to a particular application. And the implementation of this device is also simplified and less expensive, because it requires one or more projectors quite common. Finally, the realism of the device of the invention is increased by the very fact of the direct projection of information on the physical medium 3, which is itself preferably represented closer to reality.

Claims

1. Device (1) for training a manual technique by an operator, which comprises a gripping member (2) representative of a tool intended to be handled by the operator, a physical medium (3) representative of an object to be worked, means for detecting (4) the gripping member (2), the physical medium (3) and movements effected by the operator, and means for processing (5) and controlling the various means constituting the device, in particular dealing with the detected movements of the operator, and information projection means (6) intended for the operator, characterized in that the physical medium (3) and the projection means of information (6) are arranged relative to each other so that the information is projected on the physical medium (3), even if there is no contact between the gripping member ( 2) and the physical medium (3).

2. Device according to claim 1, characterized in that the projection means (6) comprise one or more projectors depending on the shape of the physical medium (3).

3. Device according to one of the preceding claims, characterized in that it comprises means for transmitting sound information (7) to the operator, for example with one or more speakers or a helmet.

4. Device according to one of the preceding claims, characterized in that it comprises means for transmitting tactile information (8) to the operator.

5. Device according to the preceding claim, characterized in that the means for transmitting tactile information (8) are disposed within the gripping member (2), or the physical medium (3), or the ground, in depending on the nature of the tactile information to be rendered.

6. Device according to one of the preceding claims, characterized in that it comprises a viewing station (9), connected to the processing and control means (5), to display summary information on the movements made by the 'operator.

7. Device according to one of the preceding claims, characterized in that the detection means (4) are arranged, with respect to the gripping member (2), the physical support (3) and the operator, of so as to provide the processing means (5) and control (5), the spatial and angular coordinates thereof in real time.

8. Device according to one of the preceding claims, characterized in that the physical medium (3) is a two-dimensional support.

9. Device according to one of claims 1 to 7, characterized in that the physical medium (3) is a physical medium in three dimensions.

10. A method of learning a manual technique by an operator, implemented by means of a device comprising a gripping member (2) representative of a tool intended to be handled by the operator, a support physical (3) representative of an object to be worked, detecting means (4) of the gripping member (2), the physical medium (3) and movements effected by the operator, as well as processing means (5) and control of the various means constituting the device, in particular dealing with the movements of the detected operator, and projection means (6) of information to the operator, characterized in that it projects information on the physical medium (3), even if there is no contact between the gripping member (2) and the physical medium (3).