EP1141648A1 - Procede et systeme d'aide a la visee pour arme legere - Google Patents

Procede et systeme d'aide a la visee pour arme legere

Info

Publication number
EP1141648A1
EP1141648A1 EP99961103A EP99961103A EP1141648A1 EP 1141648 A1 EP1141648 A1 EP 1141648A1 EP 99961103 A EP99961103 A EP 99961103A EP 99961103 A EP99961103 A EP 99961103A EP 1141648 A1 EP1141648 A1 EP 1141648A1
Authority
EP
European Patent Office
Prior art keywords
image
sensor
weapon
images
sensors
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
EP99961103A
Other languages
German (de)
English (en)
Inventor
Philippe Thomson-CSF Propriété Intel. VALERY
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thales Avionics SAS
Original Assignee
Thales Avionics SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thales Avionics SAS filed Critical Thales Avionics SAS
Publication of EP1141648A1 publication Critical patent/EP1141648A1/fr
Withdrawn legal-status Critical Current

Links

Classifications

    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F41—WEAPONS
    • F41G—WEAPON SIGHTS; AIMING
    • F41G3/00—Aiming or laying means
    • F41G3/14—Indirect aiming means
    • F41G3/16—Sighting devices adapted for indirect laying of fire
    • F41G3/165—Sighting devices adapted for indirect laying of fire using a TV-monitor

Definitions

  • the invention also relates to a sighting aid system for implementing such a method.
  • the invention aims to remedy the shortcomings of the methods and devices of the known art, some of which have just been mentioned. It makes it possible to obtain a rapid fire, not requiring to support the weapon, and however precise, which appears contradictory a priori. It also ensures an aiming process not detectable by the opponent. In other words, the system remains entirely passive, that is to say does not generate radiated energy.
  • the method according to the invention comprises the determination of the position of the line of sight of the weapon by correlation of images and the restitution of a symbol of sight (for example a reticle materializing the line of sight) on a display member, advantageously of the helmet type, visual type of helmet.
  • the symbol can be displayed in an infinite collimated form. It can be superimposed on the scene observed by the shooter, in direct vision or through a camera.
  • To determine the position of the line of sight correlates an image obtained from a sensor carried by the gun and an image obtained from a sensor carried by the shooter's head.
  • the spatial orientation data of the two sensors are identified with respect to each other by auxiliary means and are used to estimate the deviations in orientation between the two images in order to facilitate the correlation of the images.
  • the correlation of the images makes it possible to determine in the second image the position of the first image.
  • the reticle thus determined by calculation is displayed on a display secured to the shooter's head and therefore to the sensor of the second image. It is displayed at a position corresponding to its place in the second image, and it is displayed superimposed on the scene observed by the shooter.
  • the shooter can then point his weapon at a target by aligning the reticle on this target without having to shoulder the weapon.
  • the first sensor is preferably at a reduced field than the second sensor.
  • the orientation sensors can be of the magnetometric type, with for example a heading sensor and a two-axis inclinometer, these sensors being provided on the one hand on the shooter's head and on the other hand on the weapon.
  • One determines in particular from the indications of the two orientation sensors a rotation matrix representing the relative positions in space of two reference trihedra linked one to the weapon, the other to the head.
  • One can also, to help with the correlation, use a vector of translation, limited a priori to approximately 50 cm, representing the difference in position between the head and the weapon.
  • a device for measuring the position of the center of the field of the imaging sensor C of the weapon 2 is provided.
  • This device is composed of a second imaging sensor C2 fixed on the shooter's head and of an electronic processing device. of signals and images 3 supplied by the sensor C 2 , this device 3 having in particular the function of calculating the position of the field of the sensor Ci in the image of the sensor C2.
  • the field of the sensor C is advantageously chosen to be smaller than the field of the sensor 2 •
  • the system 1 also includes an infinitely collimated rendering device 4 making it possible to embed in the shooter's field of vision a reticle 41, or any other suitable symbol, materializing the aim.
  • This device is advantageously constituted by a display member of the so-called visual helmet type.
  • FIG. 3 illustrates the modular configuration of an image processing device 3 for the implementation of the aiming method, according to a preferred embodiment of the invention.
  • the circuits allowing the execution of the above-mentioned initial step or steps have not been shown.
  • a module 32 then calculates the pyramid of contours of the image supplied by the small field sensor Ci, after extraction of the contours.
  • FIG. 4 is a diagram schematically illustrating the images J G , ⁇ P and I 'P.
  • the cutting of the useful area of the resampled images is such that the image I ′ P is included in the image I G of the wide field sensor C 2 •
  • the diagrams have shown schematically in FIG. 4 positions of the images ⁇ and I 'P before application of the rotation matrix MR.
  • the XYZ axes symbolize the T-RCi reference system ( Figure 2).
  • FIG. 5 illustrates in more detail, in the form of block diagrams, one of the modules, for example the module 31.
  • An input module 310 calculates images of gradients Gx and Gy along two orthonormal axes X and Y attached to the image. This operation can be carried out by any conventional method in the field of image processing. One can have recourse, for example, to recursive treatments like those described in the article of Rachid DERICHE, entitled: "Using Canny 's detector to drift a recursively implemented Optimal Edge Detector", “Computer Vision 1987", pages 167- 187, article to which we will profitably refer.
  • the images of calculated gradients, along the X and Y axes, are transmitted to a first module 311 intended to calculate, at each point, the norm of the gradient NG, in accordance with the following relation:
  • s norm is the threshold value to be applied to the gradient norm to perform a threshold operation on n% of the points in the area.
  • the number n is chosen according to the characteristics of the sensors (spatial richness of the image) and is typically between 5% and 15%.
  • each point in the chain is kept if it constitutes a local maximum of the standard.
  • P the gradient norm of two other points, Pi and P2, which are closest to point P, in a direction achieving the best approximation on a 3x3 neighborhood of the normal to the contour at point P.
  • the direction of this normal is calculated from the orientation of the gradient at point P which gives the direction of the tangent at point P.
  • FIGS. 6A and 6B The process which has just been explained is illustrated very schematically by FIGS. 6A and 6B.
  • an image is represented representing the scene seen by the wide field sensor C2, comprising, in the example illustrated, two remarkable objects constituted by a tree Ar and a building Bt.
  • contour points CAr and CBt At the end of the contour extraction process, there is a list of contour points CAr and CBt, represented, for example, by zeros.
  • the two objects, symbolized by these contours can represent potential targets that stand out from the background.
  • T p is the maximum of the sizes of ⁇ P according to the orthonormal axes X and Y.
  • the gradients calculated by the module 310 are transmitted to an input of the module 33.
  • the constitution of the pyramid consists in using the image of the "chamfer" distances constituted from the image of the contours of the large field image D G Q determined by the module 36 at maximum level of resolution and to constitute the sequence of images D G of the pyramid in accordance with the following relation (8):
  • the so-called “large” module, 33G is represented in the form of a block diagram by FIG. 7, and comprises three cascaded sub-modules: 330 to 332.
  • the 33G module performs a valued correlation, at the same level of resolution, between the images of the contour pyramid of the small field image and the images of the pyramid of distance images with contours obtained from the large field image.
  • the input sub-module 330 allows the constitution of the correlation table N] ⁇ (u, v), in accordance with the following relation:
  • N ⁇ ( ⁇ , ) ⁇ ⁇ (D c ( l J) - C ⁇ p ( ⁇ -r, j + v)) (9) /
  • the module 331 is intended for the selection of local minima. This selection is made in two stages.
  • N (u, v) N (u, v) has a local minimum and - ⁇ S. 5 is a
  • ⁇ ( '') ⁇ (° ⁇ , (/, /) c;.. (T + / +. ')) (Io),
  • This point P is that for which the value of the tablecloth is minimum if this one checks the relation:
  • the point 0 G is equivalent to the point ⁇ , but constitutes an origin of a reference for F G •
  • H matrix of i 7 rows and 2 columns.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Aiming, Guidance, Guns With A Light Source, Armor, Camouflage, And Targets (AREA)
  • Image Analysis (AREA)

Abstract

L'invention concerne un procédé et un système (1) d'aide à la visée pour une arme légère (2) tenue à la main par un tireur. Le système (1) comprend un premier capteur à imagerie (C1), dit petit champ, fixé sur le canon (2) de l'arme (20) et dont l'axe optique (ΔC1)est harmonisé par la construction avec l'axe de visée (Δ20) et un second capteur à imagerie (C1), dit grand champ, solidaire de la tête (Te) du tireur. Chacun des capteurs (C1, C2) est associé à des dispositifs (5, 6) de mesure de l'assiette et du cap, de manière à effectuer une première estimation grossière de l'écart entre les axes optiques (ΔC1, ΔC2) par le calcul d'une matrice de rotation et l'écart estimée entre les capteurs (C1, C2). Connaissant cette matrice et les champs, un dispositif de traitement d'images (3) effectue la corrélation entre les images, de manière à afficher un réticule dans un organe de visualisation du type visuel de casque (4) pour matérialiser l'axe de visée.

Description

PROCEDE ET SYSTEME D'AIDE A LA VISEE POUR ARME LEGERE
La présente invention concerne un procédé d'aide à la visée pour arme légère, de façon plus précise un procédé d'aide à la visée pour un tireur portant une telle arme à la main.
L'invention concerne également un système d'aide à la visée pour la mise en oeuvre d'un tel procédé.
Il est bien connu, pour obtenir un tir très précis avec une arme légère, c'est-à-dire dans le contexte de l'invention une arme portable, de la munir d'une lunette de visée. Cette lunette peut également être couplée à un intensificateur de lumière, ce qui autorise le tir de nuit.
Cependant, cette disposition nécessite un épaulement de l'arme, voire nécessite de disposer d'un appui stable. Le tir peut alors être précis, mais la visée nécessite dans ce cas un temps non négligeable.
Or, dans de nombreuses situations, le tireur doit pouvoir être en mesure de réagir très rapidement et, donc, doit pouvoir utiliser son arme sans l'épauler, ce tout en assurant un tir précis.
Pour ce faire, on a proposé, par exemple, de munir l'arme d'un pointeur laser, c'est-à-dire d'un générateur de faisceau collimaté se propageant parallèlement à l'axe de tir de l'arme ou ligne de mire. L'impact sur la cible se traduit par une tache de lumière de faible diamètre. La longueur d'onde utilisée peut être aussi dans le domaine du non visible, par exemple dans l'infrarouge. Le tireur n'est donc plus obligé d'épauler son arme. Il suffit qu'il repère la position de la tache, soit directement (domaine du visible), soit à l'aide de lunettes spéciales (infrarouge), pour obtenir une bonne visée. Cependant, dans tous les cas, le défaut majeur de ce procédé est le manque de discrétion. En effet, la cible peut détecter le rayonnement, soit directement (à la vue, pour les longueurs d'onde dans le visible), soit à l'aide d'un détecteur approprié à la longueur d'onde utilisée. D'autre part, la précision est limitée par la discrimination visuelle de la tache, la dispersion du faisceau et la limite de perception visuelle du tireur.
L'invention vise à pallier les défauts des procédés et dispositifs de l'art connu, dont certains viennent d'être rappelés. Elle permet d'obtenir un tir rapide, ne nécessitant pas d'épauler l'arme, et cependant précis, ce qui apparaît antinomique a priori . Elle assure également un processus de visée non détectable par l'adversaire. En d'autres termes, le système reste entièrement passif, c'est- à-dire ne génère pas d'énergie rayonnée.
Compte tenu des distances d'utilisation du système selon l'invention (typiquement dans un intervalle de distances supérieures à 25 m et inférieures à 100 m) , et de la dimension typique des cibles (1,5 m selon la dimension verticale et 0,5 m selon la dimension horizontale), il est nécessaire d'offrir au tireur une précision meilleure que 2,5 mrad sur la direction du canon de son arme, et ceci par un dispositif de mesure assurant une discrétion complète, comme il vient d'être rappelé.
Pour ce faire, le procédé selon l'invention comprend la détermination de la position de la ligne de visée de l'arme par corrélation d'images et la restitution d'un symbole de visée (par exemple un réticule matérialisant la ligne de visée) sur un organe de visualisation, avantageusement du type casque type visuel de casque. Le symbole peut être affiché sous forme collimatée à l'infini. Il peut être superposé à la scène observée par le tireur, en vision directe ou par l'intermédiaire d'une caméra. Pour la détermination de la position de la ligne de visée, on corréle une image obtenue à partir d'un capteur porté par l'arme et une image obtenue à partir d'un capteur porté par la tête du tireur. Les données d'orientation dans l'espace des deux capteurs sont repérées l'une par rapport à l'autre par des moyens auxiliaires et servent à estimer les écarts d'orientation entre les deux images afin de faciliter la corrélation des images. La corrélation des images permet de déterminer dans la deuxième image la position de la première image. On peut déterminer alors la position dans la deuxième image d'un réticule représentant la ligne de visée de l'arme qui porte le premier capteur. Le réticule ainsi déterminé par calcul est affiché sur un afficheur solidaire de la tête du tireur donc du capteur de la deuxième image. Il est affiché a une position qui correspond à sa place dans la deuxième image, et il est affiché en superposition avec la scène observée par le tireur. Le tireur peut alors pointer son arme sur une cible en alignant le réticule sur cette cible sans avoir à épauler l'arme.
Le premier capteur est de préférence à champ plus réduit que le deuxième capteur.
Le système pour la mise en oeuvre du procédé comprend essentiellement un premier capteur d'image fixé sur l'arme, un second capteur d'image fixé sur la tête du tireur, des circuits électroniques de traitement d'images permettant de calculer la position du champ du premier capteur dans l'image du second capteur, et un dispositif de visualisation collimaté à l'infini permettant d'incruster dans le champ de vision du tireur un réticule ou un symbole similaire matérialisant la ligne de visée de l'arme. L'ensemble est complété par des capteurs d'orientation, indépendants des capteurs d'image, fixés respectivement sur l'arme et sur la tête du tireur, permettant une estimation (de préférence continue dans le temps) des écarts d'orientation des champs de visée des premier et second capteurs d'image pour aider à la détermination de position du champ du premier capteur dans l'image du second. Les signaux de ces capteurs d'orientation sont également traités par les circuits électroniques précités.
L'invention a donc pour objet un procédé d'aide à la visée pour arme légère portée par un tireur, caractérisé en ce qu'il comprend les étapes suivantes :
- l'acquisition d'une première image à l'aide d'un premier capteur d'image, associé à un premier champ et fixé à ladite arme, dont l'axe optique est lié mécaniquement à l'axe du canon de l'arme ; ladite première image représentant une scène avant, vue dudit canon ;
- l'acquisition d'une seconde image à l'aide d'un second capteur d'image, associé à un second champ et porté par la tête dudit tireur, de manière à englober tout ou partie d'une scène avant observée par celui-ci et susceptible de contenir une cible ;
- l'acquisition par des capteurs d'orientation portés respectivement par l'arme et par la tête du tireur, d'une estimation des écarts angulaires entre le champ observé par le tireur et le champ vu par le capteur porté par l'arme ; - la corrélation des images des deux capteurs pour déterminer la position du champ vu par le premier capteur d'image dans le champ vu par le deuxième capteur, et pour déterminer en particulier la position dans l'image du deuxième capteur d'un point de la première image représentant la ligne de visée de l'arme, la corrélation utilisant l'écart angulaire déterminé précédemment ;
- l'affichage sur un visuel de casque, à une position correspondante, d'un symbole représentant cette ligne de visée. Le symbole est de préférence collimaté à l'infini. Il est de préférence superposé à la scène observée en vision directe, mais on peut aussi envisager qu'il soit superposé à une image fournie par le deuxième capteur ou par une autre caméra portée par la tête du tireur. Les capteurs d'orientation peuvent être du type magnétométrique, avec par exemple un capteur de cap et un inclinomètre deux axes, ces capteurs étant prévus d'une part sur la tête du tireur et d'autre part sur l'arme.
La corrélation est facilitée en particulier dans une phase d'acquisition où il faut trouver une portion d'image du deuxième capteur coïncidant avec 1 ' image du premier capteur. Les capteurs d'orientation permettent en effet d'élaborer une matrice de rotation permettant de faire tourner les deux images l'une par rapport à l'autre d'une quantité correspondant à l'indication (approximative) donnée par les capteurs d'orientation. Les images se retrouvent alors orientées sensiblement identiquement et la corrélation peut se poursuivre plus facilement. Dans les phases ultérieures de poursuite, la corrélation d'images est l'élément principal servant à déplacer le réticule dans le champ de l'afficheur.
On détermine en particulier à partir des indications des deux capteurs d'orientation une matrice de rotation représentant les positions relatives dans l'espace de deux trièdres de référence liés l'un à l'arme, l'autre à la tête. On peut aussi, pour aider à la corrélation, utiliser un vecteur de translation, borné a priori à environ 50 cm, représentant l'écart de position entre la tête et l'arme.
L'invention a encore pour objet un système d'aide à la visée pour la mise en oeuvre de ce procédé.
L'invention sera mieux comprise et d'autres caractéristiques et avantages apparaîtront à la lecture de la description qui suit en référence aux figures annexées, parmi lesquelles :
- les figures 1A et 1B illustrent schématiquement l'architecture d'un système d'aide à la visée selon 1 ' invention ; - la figure 2 est un diagramme géométrique permettant d'expliquer le fonctionnement général du système des figures 1A et 1B ;
- la figure 3 illustre un exemple de dispositif modulaire de traitement de signaux et d'images utilisé dans le système d'aide à la visée de l'invention ;
- La figure 4 illustre l'imbrication d'images fournies par des capteurs en imagerie utilisés dans le système d'aide à la visée de 1 ' invention ; - la figure 5 est un exemple de réalisation plus détaillée d'un des modules du dispositif de la figure 3 ;
- les figures 6A et 6B illustrent schématiquement une des étapes du procédé selon l'invention ;
La figure 7 est un exemple de réalisation plus détaillée d'un module de corrélation utilisé dans le dispositif de la figure 3 ;
- et la figure 8 est un diagramme illustrant la dernière étape du procédé selon l'invention, consistant en une corrélation dite fine.
On va maintenant, pour expliciter le procédé de visée selon l'invention, décrire un exemple de réalisation d'architecture de système de visée 1 le mettant en oeuvre, par référence aux figures 1A et 1B. La figure 1A illustre schématiquement .son architecture globale et la figure 1B est une figure de détail montrant un des composants utilisés, en l'occurrence un dispositif de visualisation 4, avantageusement du type dit visuel de casque.
Le système 1 comprend tout d ' abord un capteur à imagerie C dans le domaine du visible ou de l'infrarouge, fixé sur l'arme 2. Dans le premier cas (lumière visible), on peut utiliser un capteur matriciel standard, ou un composant du type "IL-CCD" (intensificateur de lumière à dispositif à couplage de charges). Dans le second cas, on peut utiliser un composant du type "M IR" (Médium Wave Infrared : infrarouge dans les gammes de longueurs d'onde comprises entre 3 et 5 μm) ou LWIR (Long Wave Infrared : infrarouge dans les gammes de longueurs d'onde comprises entre 8 et 12 μm) . La direction de l'axe optique, Δci r du capteur Ci est harmonisée, par construction, avec l'axe, Δ20. du canon 20. Si ce n'est pas le cas, on en tient compte dans les calculs.
On prévoit un dispositif de mesure de la position du centre du champ du capteur à imagerie C de 1 ' arme 2. Ce dispositif est composé d'un second capteur à imagerie C2 fixé sur la tête du tireur et d'un dispositif électronique de traitement de signaux et d'images 3 fournies par le capteur C2 , ce dispositif 3 ayant notamment pour fonction de calculer la position du champ du capteur Ci dans l'image du capteur C2. En effet, le champ du capteur C est choisi avantageusement plus petit que le champ du capteur 2 •
Le système 1 comprend également un dispositif 4 de restitution collimaté à l'infini permettant d'incruster dans le champ de vision du tireur un réticule 41, ou tout autre symbole adapté, matérialisant la visée. Ce dispositif est avantageusement constitué par un organe de visualisation du type dit visuel de casque.
On prévoit enfin un dispositif composé de deux dispositifs, 5 et 6 , qui sont des capteurs d'orientation permettant, en combinant les informations qu'ils délivrent, de déterminer l'écart entre l'orientation de l'arme et l'orientation de la tête. Le plus simple est de prévoir que chacun des capteurs d'orientation comprend deux capteurs : un capteur de cap et un inclinomètre deux axes (non représentés séparément). Ces dispositifs, 5 et 6, qui génèrent des données de cap et d'assiette, sont fixés, respectivement, sur l'arme 2 et sur la tête Te du tireur afin de donner une estimation de préférence continue de l'écart d'orientation des deux axes de visée, Δi et Δ2 , des capteurs C et C2. Ces capteurs sont indépendants des capteurs d'image. Ce double dispositif, 5 et 6, fournit, en coopération avec des circuits spécifiques du dispositif électronique de traitement de signaux et d'images 3, une estimation de la matrice de rotation MR de passage entre le capteur Ci et le capteur 2. Le vecteur translation T n'est pas connu. Sachant que l'arme est tenue par le tireur, on peut estimer la norme de T à une valeur moyenne de 0,7 mètre et une borne supérieure de 1 mètre. L'arme peut par exemple être tenue à la hanche.
Le dispositif électronique de traitement de signaux et d'images 3 reçoit les signaux générés en sortie du capteur à imagerie C et des capteurs 6, fixés sur la tête Te du tireur, via la liaison 60, et reçoit les signaux générés en sortie du capteur à imagerie C2 et des capteurs 5, portés par l'arme 2, via la liaison 50. Le dispositif 3 transmet en sortie les signaux traités pour affichage sur l'organe de visualisation visuel de casque 4 (dans l'exemple décrit), ainsi que l'alimentation électrique nécessaire au bon fonctionnement de cet organe.
La figure 1B illustre l'organe de visualisation 4 en vue de face, c'est-à-dire du côté observé par le tireur. Il permet d'incruster dans la scène avant 40, réellement observée par le tireur, un réticule 41 matérialisant la cible visée, ou d'autres indications, par exemple une flèche indiquant de quel côté il doit tourner l'arme 2, pendant une période initiale du processus de visée, comme il le sera montré ci-après. L'image fournie par le capteur grand champ 2 englobe tout ou partie de la scène observée par le tireur.
La figure 2 est un diagramme géométrique illustrant les relations existant entre un trièdre de référence Rc2 associé aux dispositifs portés par la tête Te du tireur, et notamment au capteur 2 , et un trièdre de référence TRci associé aux dispositifs portés par l'arme 2, et notamment au capteur C . On a représenté sur ce diagramme, le vecteur translation T et on a superposé au trièdre de référence TRC1 un trièdre de référence TR ' C2 (en traits pointillés) , représentant le trièdre de référence TRC2 , après translation suivant le vecteur T. Cette superposition permet de calculer la matrice rotation MR .
Le processus de visée comprend deux étapes initiales, réalisées à l'aide des deux dispositifs de capteurs de positionnement 5 et 6.
La première étape, que l'on appellera de "ralliement automatique" consiste à utiliser les signaux générés par les capteurs d'orientation 5 et 6 , sur l'arme 2 et sur la tête Te du tireur, pour aider le tireur à pointer son arme dans la même direction que sa tête. Ceci est fait par le dispositif de traitement de signaux et d'images 3. Les signaux traités comprennent des informations de cap et d'inclinaison des référentielε, T-Ci et T.RC2 , liés aux capteurs, Ci et C2 par rapport à un repère terrestre- En sortie, le dispositif de traitement 3 génère des signaux permettant d'estimer l'écart d'orientation des champs de visée des capteurs, et C2 , au moins en sens et direction. Ces signaux sont transmis à l'organe de visualisation 4, de façon à afficher un symbole spécifique sur l'écran, par exemple une flèche 42, en lieu et place du réticule 41 matérialisant la visée. Le tireur sait alors qu'il doit déplacer le canon de son arme 2 , suivant la direction générale symbolisée par la flèche 42, de façon à ce que le réticule 41 symbolisant la visée entre dans son champ de vision et soit affiché sur l'écran de l'organe de visualisation. Il s'agit donc d'une aide automatique, très grossière, pour obtenir un pointage approximatif de l'arme 2, de façon à ce que les étapes du processus d'aide à la visée proprement dit puissent débuter. Cependant un pointage initial approximatif peut être réalisé manuellement, sans l'assistance d'une quelconque symbologie. La seconde étape initiale consiste à calculer une estimation de la matrice de rotation précitée MR , toujours à l'aide des données fournies par les deux capteurs d'orientation, 5 et 6. Cette estimation de la matrice de rotation MR est obtenue en comparant les données (assiette et cap) fournies par les deux dispositifs, 5 et 6 , et en utilisant éventuellement l'estimée du vecteur translation T .
Une fois cette ou ces étapes initiales effectuées, la corrélation des images est effectuée en utilisant la matrice de rotation pour faciliter l'acquisition de zones d'images identiques dans les images fournies par les deux capteurs d'image ; en faisant tourner l'image du premier capteur d'angles définis par la matrice de rotation, on donne aux images des deux capteurs sensiblement la même orientation, ce qui facilite la corrélation.
Cette corrélation va permettre ensuite de déterminer dans le champ du capteur de tête quelle est la position de la ligne de visée, celle-ci étant représentée par un point bien déterminé (par exemple un point central) du champ du capteur d'arme Cl et le champ du capteur d'arme étant localisé, par la corrélation, dans le champ du capteur de tête.
On peut donc afficher sur l'écran de l'organe de visualisation 4 un réticule 41 matérialisant la visée et s ' incrustant sur la scène 40 observée par le tireur, et donc se superposant sur la cible qu'il désire atteindre, puisque le réticule 41 va se déplacer en synchronisme avec les mouvements de l'arme 2 (phase de poursuite après la phase d'acquisition de l'opération de corrélation) .
Les circuits électroniques du dispositif 3 peuvent être découpés en modules pour l'exécution des différentes étapes nécessaires.
La figure 3 illustre la configuration modulaire d'un dispositif de traitement d'images 3 pour la mise en oeuvre du procédé de visée, selon un mode de réalisation préféré de l'invention. On n'a pas représenté les circuits permettant l'exécution de la ou des étapes initiales précitées.
Dans ce qui suit, un certain nombre de conventions concernant des signaux et d'autres paramètres utilisées par le procédé de l'invention seront respectées. Ces conventions sont portées dans la "TABLE DES NOTATIONS" annexée en fin de la présente description.
Le dispositif 3 comprend deux modules d'acquisition analogique/numérique, 30 et 34, respectivement pour les voies d'acquisition des signaux de sortie des capteurs Ci et C2.
Les signaux de sortie des modules d'acquisition analogique/numérique, 30 et 34, sont transmis à des modules d'extraction de contours de zones homogènes, ou objets, contenues dans les images numériques, modules 31 et 35, respectivement .
Un module 32 calcule ensuite la pyramide de contours de l'image fournie par le capteur petit champ Ci, après extraction des contours.
De même les signaux en sortie du module 35 sont transmis à un premier module 36 d'établissement des images des distances aux contours de l'image grand champ, suivi d'un module 37 d'établissement de la pyramide d'images dites de "chamfer", c'est-à-dire des distances au contour le plus proche .
Enfin un double module de corrélation dit "Gros- Fin" 33, reçoit les signaux de sortie des modules 32 et 37, ainsi que des signaux de gradients fournis par le module d'extraction de contours 35, et, fournis par les modules respectifs 30 et 34 d'acquisition de signaux d'image, iP et iG , dont la définition est donnée dans la table de notation précitée. Les calculs effectués par la partie dite "Gros" du module corrélation 33 sont fondés sur un algorithme de type corrélation valuée.
Les calculs effectués par la partie dite "Fin" sont fondés sur un algorithme d'estimation de l'écart de positionnement entre le centre de l'image du capteur petit champ Ci et le centre de la zone de positionnement FG dans l'image grand champ du capteur C∑ , calculée par le module "gros" .
Les différents modules composant le dispositif 3 vont maintenant être détaillés.
Une fois que le modèle et le type des capteurs, Ci et C2 , sont sélectionnés, les champs respectifs de ces capteurs sont connus. Ce sont des données fournies par le constructeur, ainsi que d'autres caractéristiques associées : résolution, etc.
La conversion analogique/numérique des signaux d'image générés par les capteurs C et C2 , conversion effectuée dans les modules 30 et 34, est assurée de manière synchrone par un dispositif de numérisation d'images classique, sur une dynamique typique de 28 niveaux de gris.
L'estimation de la matrice de rotation MR , et son application aux images issues du capteur , ainsi que la connaissance des champs des capteurs, i et C2 , permet de construire, par un traitement de ré-échantillonnage spatial, à partir de l'image numérisée issue du capteur petit champ i deux images dérivées iP et I ' P d'axes parallèles aux axes de l'image iG r en supposant que celle-ci soit rectangulaire, ou de façon plus générale d'un référentiel orthonormé lié à celle-ci. Ces images, i et I ' P , sont telles que la relation suivante soit satisfaite :
C∑G ≈ QxciP (1) ,
avec Q nombre entier, et ClG = CI ' P ( 1 bis ) ,
avec CJG, ClP et CI ' P, les champs instantanés des images jG. jP et I ' P , respectivement.
Le ré-échantillonage spatial est réalisé par une fonction classique d'interpolation, de type bilinéaire ou bicubique.
La valeur de Q est choisie de la façon indiquée ci- dessous .
Le champ souhaité de l'image "brute" ClGβrute en sortie du capteur C2 est inférieur au champ instantané de l'image "brute" ClPβrute du capteur petit champ Ci- Les relations liant ces deux images "brutes" sont les suivantes :
ClGβru te = λxClPBru te (2) ,
avec λ un nombre réel plus grand que l'unité et Q partie entière de λ.
La figure 4 est un diagramme illustrant schématiquement les images JG, ∑P et I ' P . La découpe de la zone utile des images ré-échantillonées est telle que l'image I ' P est incluse dans l'image IG du capteur grand champ C2 • On a représenté schématiquement, sur la figure 4, en traits pointillés, les positions des images ∑ et I ' P avant application de la matrice de rotation MR . Les axes XYZ symbolisent le référentiel T-RCi (figure 2).
Les signaux numériques représentant les images iP et i sont transmis au module 33.
. . A0 A l'issue de cette opération, on définit par ™* la valeur maximale du roulis résiduel apparent de I ' P dans l'image i . Les modules 31 et 35 effectuent l'extraction des contours objets présents dans les deux images numérisées. Le processus est similaire dans les deux modules.
La figure 5 illustre de façon plus détaillée, sous forme de blocs diagrammes, l'un des modules, par exemple le module 31.
Les paramètres d'extraction sont choisis de manière à introduire un niveau de filtrage passe-bas identique sur les deux images numérisées.
Un module d'entrée 310 calcule des images de gradients Gx et Gy selon deux axes orthonormés X et Y attachés a l'image. Cette opération peut être réalisée par toute méthode classique du domaine du traitement d'image. On peut avoir recourt, par exemple, à des traitements récursifs comme ceux décrits dans l'article de Rachid DERICHE, intitulé : "Using Canny ' s detector to dérive a recursively implemented Optimal Edge Detector", "Computer Vision 1987", pages 167-187, article auquel on se reportera avec profit.
Les images de gradients calculés, suivant les axes X et Y, sont transmises à un premier module 311 destiné à calculer, en chaque point la norme du gradient NG, conformément à la relation suivante :
NG(/, ./) = |G,(/,/)|--!G. (/,/)! (3),
avec i et j des coordonnées de pixels dans l'image, selon deux axes orthonormés.
Les images de gradients calculés sont également transmises à un second module 312, destiné à calculer en chaque point l'orientation du gradient OG, conformément à la relation suivante :
Les signaux de sorties élaborés par les modules 311 et 312, représentent, respectivement, les images de la norme et de l'orientation des gradients, sont transmis à un module de sortie 314 élaborant une liste des points de contours des objets détectés dans l'image numérisée, sous forme de coordonnées numériques. Cette étape comprend les sous-étapes suivantes : binarisation, suppressions des non-maxima et application d'un seuil par hystérésis. La sous-étape de binarisation nécessite de connaître les seuils hauts et bas. L'estimation de ces seuils est effectuée par un module supplémentaire 313, selon un processus itératif. Le module 313 reçoit en effet les données associées à la liste des points de contours en rétroaction. Il reçoit également sur une seconde entrée 1 ' image de la norme des gradients calculée par le module 311.
A partir de la liste des points de contours extraits de l'image précédente et de la norme des gradients de l'image courante, le module 313 a pour objet d'asservir dynamiquement, zone de l'image par zone de l'image, les seuils hauts et bas.
L'image courante est divisée en zones de tailles égales. Sur chaque zone, d'indice arbitraire z, le module 313 calcule un seuil haut, que l'on référencera SHZ , et un seuil bas, que l'on référencera SBZ , pour l'image en cours de traitement à un instant t arbitraire, ce en fonction des seuils haut et bas obtenus sur la zone à un instant t-1 correspondant à l'image précédente. La relation suivante est utilisée :
SHz (t ) = αχβχSffz(t-l) -t- ( l-a) Snorme (5),
avec α e [0, 1] , la valeur exacte étant fixée par l'application, selon le type de capteur sélectionné, la valeur α = 0,8 étant une valeur typique, β dépend du nombre de points de contour extraits dans l'image précédente, à l'instant t-1. Si le nombre de points est trop élevé pour tenir une cadence en temps réel, β est choisi inférieur à l'unité. Par contre, si le nombre de points est insuffisant pour obtenir une information de contour, on choisit β supérieur à l'unité. Typiquement la valeur de β est comprise entre 0,8 et 1,25.
snorme est la valeur de seuil à appliquer sur la norme de gradient pour effectuer une opération de seuil sur n % des points de la zone. Le nombre n est choisi en fonction des caractéristiques des capteurs (richesse spatiale de l'image) et est compris typiquement entre 5 % et 15 %.
La relation suivante est satisfaite :
SBZ = E (yx ( SHz ( t ) ) (6) ,
avec E valeur entière et γ fixé une fois pour toutes par l'application, γ est généralement inférieur à 0,5.
Pour éviter les effets de discontinuités interzones, un processus de lissage des seuils obtenus est mis en oeuvre. Chaque zone z est divisée en quatre sous-zones contiguës et les seuils hauts et bas sont recalculés pour les sous-zones par un algorithme d'interpolation classique, en utilisant les zones adjacentes à la zone z .
Le module 314 effectue la binarisation des contours et la suppression des non-maxima locaux, selon une méthode d'hystérésis. Ce module 314 détermine les chaînes de contour (c'est-à-dire les ensembles de contours connexes selon le principe de la connexite à huit) telles qu'un point au moins de chaque chaîne dépasse le seuil haut local de sa zone et que tous les autres points de la chaîne dépassent leur seuil bas local.
En outre, chaque point de la chaîne est conservé s'il constitue un maximum local de la norme. Pour le vérifier, on compare la norme du gradient en ce point, que l'on appellera P, avec la norme du gradient de deux autres points, Pi et P2 , qui sont les plus proches du point P, suivant une direction réalisant la meilleure approximation sur un voisinage 3x3 de la normale au contour au point P . La direction de cette normale est calculée à partir de l'orientation du gradient au point P qui donne la direction de la tangente au point P .
Le processus qui vient d'être explicité est illustré très schématiquement par les figures 6A et 6B. Sur la figure 6A, on a représenté une image représentant la scène vue par le capteur grand champ C2 , comprenant, dans l'exemple illustré, deux objets remarquables constitués par un arbre Ar et un bâtiment Bt . En fin du processus d'extraction de contours, on dispose d'une liste de points de contours CAr et CBt , représentés, par exemple, par des zéros. Les deux objets, symbolisés par ces contours, peuvent représenter des cibles potentielles qui se distinguent de l'arrière plan.
En dehors des points de contours, les points ou pixels de 1 ' image sont représentés par des nombres différents de zéro (1, 2, 3, ...) et dont la valeur est d'autant plus grande que ces points sont éloignés des contours (distance en connexite à 4 d'un pixel au contour le plus proche, la distance étant exprimée en pixels).
Naturellement les zéros de la liste sont associés à des coordonnées numériques, selon un référentiel orthonormé XY , dont les axes sont avantageusement parallèles aux bords de l'image, si celle-ci est rectangulaire. Ces coordonnées sont stockées, au moins temporairement, dans des circuits de mémoire classiques (non représentés) , de façon à être utilisées par le module suivant, 32 ou 36, selon la voie considérée (figure 3).
On va se reporter de nouveau à la figure 3.
Sur la voie supérieure (traitement de l'image issue du capteur petit champ Ci) , le module 32 permet l'établissement de la pyramide des contours, à partir de la liste calculée par le module 31.
Pour des raisons de vitesse d'exécution, la constitution de la pyramide consiste à utiliser l'image des contours CF 0 déterminée par le module 311 au niveau maximal de résolution et de constituer la suite d'images CP k de la pyramide conformément à la relation (7) suivante : C[(ιj) = _, (2,,2 ) v _, (2ι,2j + 1) v Qp_, (2/ + 1,2/) v Cf., (2/ τ 1,2 j + 1) '
relation dans laquelle k e [0 , K] , avec K entier, tel que 2k ≥ tg(— Aam--A ) - ,' et Δ(n.» la valeur maximale du roulis résiduel précédemment définie.
Les pixels sont considérés comme des booléens (la proposition est vrai s'il y a présence de contours, fausse dans le cas contraire) . Le paramètre Tp est le maximum des tailles de ∑P selon les axes orthonormés X et Y.
Le nombre de points non nuls (c'est-à-dire le nombre de points de contours) dans l'imaαeCV est noté Ωf
Sur la voie inférieure (traitement de l'image issue du capteur grand champ 2 ) , les gradients calculés par le module 310 (figure 5) sont transmis sur une entrée du module 33.
Le module 36 permet l'établissement de l'image des distances au contour le plus proche. Cette image est constituée à partir de l'image des contours de l'image grand champ donnée par le capteur C2 • Pour ce faire, on peut utiliser une méthode algorithmique connue, par exemple celle divulguée par l'article de Gunilla BORGEFORS, intitulé : "Hierarchical Chamfer Matching : A parametric edge matching algorithm", paru dans "IEEE Transactions on Pattern Analysis and Machine Intelligence", novembre 1988, Vol 10, n°6, pages 849-865, auquel on se reportera avec profit. Le module 37 permet d'établir la pyramide des images dites de "chamfer" calculées à partir de l'image fournie par le module précédent 36.
Pour des raisons de vitesse d'exécution, la constitution de la pyramide consiste à utiliser l'image des distances de "chamfer" constituée à partir de l'image des contours de 1 ' image grand champ DG Q déterminée par le module 36 au niveau maximal de résolution et de constituer la suite d'images DG de la pyramide conformément à la relation (8) suivante :
DG r(i, j) = Max(DG_, (2,2 ), D°_, (2/.2 ; + 1). DG , (2/ + 1,2/), G , (2/ + 1,2 + 1)) div 2 ,
relation dans laquelle r e [0 , R] , avec -R = K + g, et div représente la fonction division entière.
Le module de corrélation 33 est en réalité subdivisé en deux modules, comme il a été indiqué.
Le module dit "gros", 33G, est représenté sous forme de bloc diagramme par la figure 7, et comprend trois sous- modules en cascade : 330 à 332.
Le module 33G réalise une corrélation valuée, au même niveau de résolution, entre les images de la pyramide de contour de l'image petit champ et les images de la pyramide des images de distances aux contours obtenues à partir de l'image grand champ.
Le sous-module d'entrée 330 permet la constitution de la nappe de corrélation N]ζ ( u, v) , conformément à la relation suivante :
Nκ (^,) = ∑ ∑ (Dc (lJ) - Cκ p(ι -r ,j + v)) (9) /
relation dans laquelle, u et v sont des coordonnées orthogonales dans la nappe de corrélation, avec U^ ≤ u ≤ U^ et Vf ≤ v ≤ T , inégalités dans lesquelles V^nf et ϋinf sont typiquement égaux à -2, et v^up et Usup sont typiquement égaux à +2.
Le module 331 est destiné à la sélection des minimas locaux. Cette sélection est réalisée en deux étapes.
On sélectionne d'abord des couples (u , v) tels que
N(u, v) N (u , v) présente un minimum local et — < S . 5 est un
seuil qui dépend de la densité spectrale de l'image d'entrée. On détermine le seuil S par une procédure classique de calibrage du dispositif de traitement d'images.
L'ensemble des minimas locaux au niveau K de la pyramide est noté Ξ
Enfin, dans le module 332, on effectue, par un processus itératif, la remontée des niveaux des pyramides et un filtrage des valeurs.
Pour tout niveau n de la pyramide des images C 'kp , on constitue un ensemble Ξn comme indiqué ci-après.
Pour tout couple (u , v) de Ε.n + ± , on calcule une nappe de corrélation Nn réduite à 4 points, au niveau n , tel que :
^(' ') = χ∑( °<,(/,./).c;( + t ./ + ')) (io),
relation dans laquelle (u', \" ) e [2u, 2u+l]x [2 v, 2 v+l] .
On conserve un point P pour chaque nappe Nn . Ce point P est celui pour lequel la valeur de la nappe est minimale si celui-ci vérifie la relation :
NAP) n
avec S le seuil précédemment défini. Ainsi on constitue une suite d'ensembles Ξj pour j e [0, K-1 ] .
Le point sélectionné par le module "gros" 33G est le point u tel que : πeΞ„ et \Jp e Ξ0,p ≠ τi => NQ(p) > N0(π) (12).
Le processus de corrélation peut s'arrêter à cette étape. En effet, le point π constitue le meilleur point sélectionné. On peut afficher dans le dispositif de visualisation 4 un réticule 41 correspondant à l'impact de l'axe de visée Δ20 de l'arme 2 sur la cible visée, et se superposant à la scène observée 40 par le tireur au travers de l'écran du dispositif 4.
Il est cependant possible d'améliorer encore la précision de la visée. Aussi, selon un autre aspect de la présente invention, applicable à d'autres contextes ou une corrélation est nécessaire, on propose de procéder à une opération de corrélation dite " fine ", utilisant une estimation d'un écart subpixellique entre une fenêtre sélectionnée dans 1 ' image du premier capteur et une fenêtre correspondante sélectionnée dans l'image du deuxième capteur.
On va considérer, comme illustré par le diagramme de la figure 8, une fenêtre F ' P de quelques pixels, centrée dans l'image ' G, et une fenêtre FG de centre FI, également de quelques pixels, dans l'image IG. Les pixels sont délimités par des lignes, verticales et horizontales, en traits pointillés, les pixels étant supposés carrés. De façon plus précise, le point π est le centre du pixel central de la fenêtre G , et un point O ' P , le centre du pixel central de la fenêtre F ' P. Le vecteur E représente le décalage entre les deux "grilles" de pixels, sur l'axe Yl-O ' P, c'est-à-dire en amplitude et en direction. La taille de la fenêtre F ' P est choisie de telle manière à garantir la présence d'une information minimale dans cette fenêtre FP . En d'autres termes, il ne doit pas s'agir d'une zone uniforme. Une indication de l'information peut être obtenue par la vérification de la valeur de la somme des normes des gradients sur cette fenêtre.
La fenêtre FG garantit une marge de 1 pixel autour de la fenêtre FP .
A priori , il n'existe aucune raison pour que les pixels des deux fenêtres coïncident. On suppose, en effet, que l'image petit champ iP a une résolution intrinsèque supérieure à l'image grand champ ∑G .
On va donc chercher à estimer l'écart sub-pixellique E = \ de positionnement entre le centre de la fenêtre FG et
le centre de la fenêtre F .
Compte tenu de la compatibilité des bandes spectrales des deux capteurs à imagerie, Ci et C2 , on utilise une équivalence entre 1 ' image de la fenêtre FG et l'image de la fenêtre FP .
De façon générale, si on considère une image numérique quelconque I, de quelques pixels dans les deux dimensions, et un point M également compris à l'intérieur de l'image J, on peut définir un vecteur unicolonne Iv (M) contenant les valeurs de l'image I sur le voisinage V du point M . Si le point M correspond à un pixel entier, les valeurs sont directement les valeurs des pixels de J, tandis que dans le cas où le point M a des coordonnées sub- pixelliques, les valeurs du vecteur Iv (M) sont obtenues par un mécanisme classique d'interpolation. Le choix précis du mécanisme d'interpolation doit être effectué au cas par cas, selon des contraintes propres à l'application spécifique envisagée : vitesse d'exécution, précision du résultat, etc. Dans le cas du procédé de l'invention, on définit le voisinage V de travail de mêmes tailles selon X et Y que la fenêtre F ' P. Le nombre total de points du voisinage V est égal à Lv .
On obtient l'identité suivante : F° (U) ≡ F'p (-E) . Le décalage \\E\\ est inférieur à un pixel.
On définit H = matrice de L v lignes et de 2 colonnes. On obtient alors la relation suivante :
F v (-E) = FP (Op) + H - (-E) (13), et
E = -(HTH) - HT - (FG (Oa ) - F (Op)) (14).
Le point 0G est équivalent au point π, mais constitue une origine d'un repère pour FG •
Pour tirer parti de la résolution intrinsèque supérieure de l , On réalise une opération de grossissement de la fenêtre FG 'un facteur Q . Cette opération est réalisée par un processus d'interpolation classique, par exemple bilinéaire ou bicubique. La fenêtre résultante est appelée GG .
Fp est une fenêtre centrée de J-P, de taille en X (respectivement en Y) égale à la taille de F ' P multipliée par Q .
A partir de l'écart E calculé précédemment, on trouve, par translation, un point Eh . π.χ correspond au centre d'un pixel de la fenêtre GG dont les coordonnées entières sont la meilleure approximation possible de l'écart E . Les coordonnées de ce point E± sont les suivantes :
XE_I= arrondi (Q.Eχ) (15), et
YlTx≈ arrondi (Q . EY) ( 16 ) . On va chercher à estimer l'écart sub-pixellique E, de positionnement entre ITι et le centre de la fenêtre Fp , en utilisant la même approche que précédemment.
Pour ce faire, on définit un voisinage W de travail de mêmes tailles selon X et Y que la fenêtre Fp .
Le nombre total de points du voisinage W est égal à #• On obtient alors l'identité : G^(πι) ≡ Fw (~E) ) .
Comme précédemment on définit H = matrice de i 7 lignes et de 2 colonnes.
On obtient alors la relation suivante :
FW ^1> = FW <°P> + Hl • (~El (17) , et
£, = -(HτH) - Hτ - (FG (0G ) ~ F (Op )) (18) .
E est un écart réduit par rapport à E . On peut afficher, sur l'écran de l'organe de visualisation 4, un réticule 41 positionné au point (Tl-E-Ei ) par rapport à un point qui correspond au centre du champ du capteur grand champ C2.
Le point π est obtenu avec une précision typique de l'ordre de 2 à 3 pixels sur l'image grand champ. L'écart E correspond à 1 pixel de la résolution de l'image petit champ. On peut donc obtenir une précision dans le positionnement du réticule 41 typiquement dans la gamme de 2 à 3 mrad, ce qui correspond à l'objectif que se fixe le procédé selon l'invention.
A la lecture de ce qui précède, on constate aisément que l'invention atteint bien les buts qu'elle s'est fixés.
Le procédé d'aide au tir permet tout à la fois d'obtenir une grande précision de visée et une grande rapidité, puisqu'il n'exige pas un epaulement de l'arme. En outre, selon une autre caractéristique avantageuse, le processus, puisqu'il ne s'accompagne pas d'émission d'énergie radiante, reste tout à fait discret. En d'autres termes, même si la cible dispose d'un capteur sensible aux longueurs d'ondes utilisées, elle ne pourra détecter le tireur, du moins du fait de la mise en oeuvre du procédé propre à l'invention.
Il doit être clair cependant que l'invention n'est pas limitée aux seuls exemples de réalisations explicitement décrits, notamment en relation avec les figures 1A à 8.
En particulier, les valeurs numériques n'ont été précisées que pour fixer les idées. Elles dépendent essentiellement de l'application précise visée.
De même, les composants utilisables : capteurs d'imagerie, circuits électroniques pour le traitement des signaux numériques, etc., participent d'un simple choix technologique à la portée de l'Homme du Métier. Notamment, comme il a été indiqué, plusieurs types et technologies de capteurs d'imagerie peuvent être utilisés, en particulier en fonction du choix des longueurs d'ondes mises en oeuvre (visible ou infrarouge) .
TABLE DES NOTATIONS

Claims

R E V E N D I C A T I O N S
1. Procédé d'aide à la visée pour arme légère portée par un tireur, caractérisé en ce qu'il comprend les étapes suivantes : - l'acquisition d'une première image à l'aide d'un premier capteur d'image (Cl ) , associé à un premier champ et fixé à ladite arme, et dont l'axe optique est lié mécaniquement à 1 ' axe du canon de 1 ' arme ; ladite première image représentant une scène avant, vue dudit canon ; - l'acquisition d'une seconde image à l'aide d'un second capteur d'image (C2 ) , associé à un second champ et porté par la tête dudit tireur, de manière à englober tout ou partie d'une scène avant observée par celui-ci et susceptible de contenir une cible ; - l'acquisition par des capteurs d'orientation (5,6) portés respectivement par l'arme et par la tête du tireur, d'une estimation des écarts angulaires entre le champ observé par le tireur et le champ vu par le capteur porté par 1 ' arme ; - la corrélation des images des deux capteurs pour déterminer la position du champ vu par le premier capteur d'image dans le champ vu par le deuxième capteur, et pour déterminer en particulier la position dans l'image du deuxième capteur d'un point de la première image représentant la ligne de visée de l'arme, la corrélation utilisant l'écart angulaire estimé précédemment ;
- l'affichage sur un visuel de casque, à une position correspondante, d'un symbole représentant cette ligne de visée.
2. Procédé selon la revendication 1, caractérisé en ce que le symbole est affiché sous forme collimatée à l' infini.
3. Procédé selon l'une des revendications 1 et 2, caractérisé en ce que le symbole est affiché en superposition avec la scène directement observée par le tireur.
4. Procédé selon l'une des revendications 1 à 3, caractérisé en ce que les capteurs d'orentation comprennent chacun un capteur de cap et un inclinomètre deux axes .
5. Procédé selon l'une des revendications 1 à 4, caractérisé en ce qu'il comprend une étape préliminaire consistant, à partir de l'estimation des écarts angulaires, en l'estimation de l'écart d'orientation des lignes de visée (Δci, Δc2) desdits premier (Ci) et second (C2) capteurs d'image, au moins en sens et direction, de manière à afficher sur ledit organe de visualisation (4) un second symbole déterminé (42) indiquant audit tireur la direction suivant laquelle il doit déplacer ledit canon (20) de l'arme (2) .
6. Procédé selon les revendications 1 à 5, caractérisé en ce que ladite arme (2) étant tenue à la main par le tireur, la corrélation utilise une estimée d'un vecteur de translation ( T) entre les positions des deux capteurs d'image, ce vecteur ayant une borne supérieure estimée à environ 1 mètre.
7. Procédé selon l'une quelconque des revendications 4 à 6, caractérisé en ce que ledit premier champ dudit premier capteur (Ci) d'image est inférieur audit second champ dudit second capteur (C2) d'image, en ce que, lesdites première et seconde images étant analogiques, ladite acquisition comprend la conversion analogique/numérique (30, 34) des signaux de sortie desdits premier (Ci) et second (C2) capteurs d'image, de manière à construire deux images numériques associées à des premier (TRci ) et second (TRc2 ) référentiels orthonormés, représentant respectivement les images issues desdits premier (Ci) et second (C2) capteurs en imagerie, en ce qu'il est procédé à une étape consistant en la construction, à partir de l'image numérique issue dudit premier capteur à imagerie (C ) , et par application de ladite matrice de rotation, d'au moins une première image numérique dérivée (Ip) , de même référentiel orthonormé que l'image numérique (IG) issue dudit second capteur (C2), dont le champ instantané est proportionnel, par un facteur Q , au champ instantané de ladite image numérique issue du second capteur à imagerie (Ip) , Q étant un entier, et en ce qu'il est procédé à des étapes subséquentes de traitement d'image comprenant la corrélation (33) de ladite image numérique dérivée et de ladite image numérique issue dudit second capteur en imagerie, pour déterminer la position dudit premier champ dudit premier capteur d'image (Ci) dans ladite seconde image acquise par ledit second capteur (C2) d'image et la position de ladite ligne de visée dans cette seconde image.
8. Procédé selon la revendication 7 , caractérisé en ce que, lesdites images numériques issues desdits premier (C ) et second (C2) capteurs à imagerie comprenant des zones non uniformes (Ar, Bt ) , les étapes de traitement d'image comprennent au moins les étapes suivantes :
- une étape (31, 35) d'extraction de contours (CAr, CBt ) desdites zones non uniformes (Ar, Bt ) , de manière à générer une liste de points de coordonnées de ladite image numérique correspondant auxdits contours et à les associer à une valeur numérique déterminée ;
- pour l'image numérique issue dudit premier capteur (Ci), une étape (32) consistant à établir, à partir de l'image desdits contours (CAr, CBt ) , une suite d'images formant une pyramide des contours, sur un nombre de niveaux déterminé ;
- pour 1 ' image numérique issue dudit second capteur d'image (C2), une étape (36, 37) consistant à établir, à partir de l'image desdits contours (CAr, CBt) et pour chaque point de l'image, une image des distances au contour le plus proche et, à partir de cette image des distances au contour le plus proche, une suite d'images formant une pyramide des distances de contours, sur un nombre de niveaux déterminé ; et
- une étape de corrélation valuée (33) entre ladite suite d'images formant une pyramide des contours et ladite suite d'images formant une pyramide des distances de contours, de manière à sélectionner un point de ladite image numérique issue dudit second capteur d'image (C2) constituant la position le plus proche du centre du champ de cette image, et à afficher, sur ledit organe de visualisation (4), ledit premier symbole (41) déterminé, à cette position de ladite seconde image, en superposition de ladite scène avant observée (40).
9. Procédé selon la revendication 8, caractérisé en ce que ladite étape d'extraction de contours (CAr, CBt ) desdites zones non uniformes (Ar, Bt ) desdites images numériques issues desdits premier (Ci) et second (C2) capteurs d'image comprend les sous-étapes suivantes :
- la détermination (310) des images de gradients suivant deux axes de coordonnées orthonormées liés auxdites images numériques ; - la détermination (311) de la norme desdits gradients en chaque point desdites images ;
- la détermination (312) de l'orientation desdits gradients en chaque point desdites images ; et
- l'établissement (313, 314), à partir desdites normes et desdites orientations de gradients, d'une liste de points de contours.
10. Procédé selon la revendication 8, caractérisé en ce que ladite étape de corrélation valuée (33G) comprend les sous-étapes suivantes :
- la constitution (330), à partir de ladite suite d'images formant une pyramide des contours et de ladite suite d'images formant une pyramide des distances de contours, d'une nappe de corrélation ;
- la sélection (331, 332) dans ladite nappe de valeurs représentant des minimas locaux inférieurs à un seuil déterminé, pour un desdits niveaux de pyramide, et la constitution, à chaque niveau desdites pyramides, d'un ensemble de minimas locaux ; et
- sélection d'un point (1~1) correspondant au plus petit des minimas pour estimer la position du centre d'une zone de positionnement de ladite image numérique issue dudit premier capteur d'image (Ci) dans ladite image numérique issue dudit second capteur d'image (C2) , cette position représentant ladite ligne de visée.
11. Procédé selon les revendications 8 ou 10, caractérisé en ce que ladite étape de corrélation valuée (33G) est suivie d'une étape de corrélation supplémentaire, dite "fine, mettant en oeuvre un algorithme d'estimation de l'écart de positionnement (E) , en amplitude et en direction, entre le centre (O ' P) de ladite image numérique issue dudit premier capteur d'image (Ci) et le centre (El) de ladite zone de positionnement de cette image numérique dans ladite image numérique issue dudit second capteur d'image (Ci), le positionnement dudit centre (II) étant obtenu lors de ladite étape de corrélation valuée (33G) , et en ce qu'à l'issue de ladite étape supplémentaire, une nouvelle position dudit centre est déterminée par une translation d'amplitude et de direction conforme audit écart (E) .
12. Système d'aide à la visée destiné à une arme légère portée par un tireur, caractérisé en ce qu'il comprend :
- un premier capteur d'image (Ci) permettant d'acquérir ladite première image, ledit premier capteur d'image (Ci) étant associé à un premier champ et étant fixé à ladite arme (2), l'axe optique ( I ) de ce capteur (Ci) étant lié mécaniquement à l'axe A20 ) du canon (20) de l'arme (2) et représentant la ligne de visée de cette arme ( 2 ) ;
- un second capteur d'image (C2) permettant d'acquérir ladite seconde image, ledit second capteur d'image (C2) étant associé à un second champ et fixé sur la tête (Te ) dudit tireur, de manière à englober tout ou partie d'une scène avant (40) observée par celui-ci, ladite scène (40) étant susceptible de contenir une cible pour ledit tir ;
- des capteurs d'orientation (5,6) permettant de déterminer l'écart angulaire entre la direction de l'arme et la direction de la tête du tireur ;
- un dispositif de traitement de signaux et d'images (3) reçus desdits premier (Ci) et second (C2) capteurs d'imagerie et des capteurs d'orientation (5,6) pour effectuer une corrélation entre les images reçues des deux capteurs d'image, en utilisant l'écart angulaire déterminé, afin de déterminer la position du champ du premier capteur d'image dans le champ du deuxième capteur d'image,
- et un organe de visualisation (4) pour l'affichage d'un symbole déterminé (41) , matérialisant ladite position de la ligne de visée dans ladite seconde image, ou un second symbole déterminé (42), indiquant audit tireur une direction suivant laquelle il doit déplacer le canon de ladite arme (2), lesdits symboles déterminés (41, 42) étant affichés en superposition à ladite scène avant (40) observée par ledit tireur.
13. Système selon la revendication 12, caractérisé en ce que ledit organe de visualisation (4) est un visuel de casque comprenant un écran sur lequel sont affichés lesdits symboles déterminés (41, 42) et au travers duquel ledit tireur observe ladite scène avant (40) .
14. Système selon les revendications 12 ou 13, caractérisé en ce que lesdits premier (Ci) et second (C2) capteurs d'image sont des capteurs du type à charges couplées sensibles à un rayonnement dans le spectre du visible.
15. Système selon les revendications 12 ou 13, caractérisé en ce que lesdits premier (Ci) et second (C2) capteurs d'image sont des capteurs sensibles à un rayonnement dans le spectre de l'infrarouge.
16. Système selon l'une quelconque des revendications 12 à 15, caractérisé en ce que les capteurs d'orientation comprennent, chacun, un capteur de cap et un inclinomètre deux axes, de manière à générer des données de cap et d'assiette de l'arme et de la tête.
17. Système selon l'une quelconque des revendications 12 à 16, caractérisé en ce que, lesdites première et seconde images étant analogiques, ledit dispositif de traitement de signaux et d'images (3) comprend des modules d'acquisition (30, 34) comprenant un convertisseur analogique/numérique pour chacune desdites images .
EP99961103A 1998-12-18 1999-12-17 Procede et systeme d'aide a la visee pour arme legere Withdrawn EP1141648A1 (fr)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
FR9816022A FR2787566B1 (fr) 1998-12-18 1998-12-18 Procede et systeme d'aide a la visee pour arme legere
FR9816022 1998-12-18
PCT/FR1999/003185 WO2000037875A1 (fr) 1998-12-18 1999-12-17 Procede et systeme d'aide a la visee pour arme legere

Publications (1)

Publication Number Publication Date
EP1141648A1 true EP1141648A1 (fr) 2001-10-10

Family

ID=9534147

Family Applications (1)

Application Number Title Priority Date Filing Date
EP99961103A Withdrawn EP1141648A1 (fr) 1998-12-18 1999-12-17 Procede et systeme d'aide a la visee pour arme legere

Country Status (4)

Country Link
EP (1) EP1141648A1 (fr)
CA (1) CA2354569C (fr)
FR (1) FR2787566B1 (fr)
WO (1) WO2000037875A1 (fr)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7057389B2 (en) 2001-06-28 2006-06-06 Hitachi Medical Corporation Nuclear magnetic resonance diagnosing device and diagnosing system

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2862748B1 (fr) * 2003-11-25 2006-01-21 Thales Sa Procede de conduite de tir pour aeronefs
IL173007A0 (en) * 2006-01-08 2007-03-08 Giora Kutz Target/site location acquisition device
US9229230B2 (en) 2007-02-28 2016-01-05 Science Applications International Corporation System and method for video image registration and/or providing supplemental data in a heads up display
US20110261204A1 (en) * 2010-04-27 2011-10-27 Itt Manufacturing Enterprises, Inc Remote activation of imagery in night vision goggles

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2175074B (en) * 1985-05-16 1988-06-22 British Aerospace Aiming systems
US4786966A (en) * 1986-07-10 1988-11-22 Varo, Inc. Head mounted video display and remote camera system
FR2699996B1 (fr) * 1992-12-30 1995-02-24 Thomson Csf Dispositif optronique d'aide au tire par arme individuelle et application à la progression en milieu hostile.
FR2718519B1 (fr) * 1994-04-12 1996-04-26 Thomson Csf Dispositif de visée pour arme, et arme équipée.
US5806229A (en) * 1997-06-24 1998-09-15 Raytheon Ti Systems, Inc. Aiming aid for use with electronic weapon sights

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See references of WO0037875A1 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7057389B2 (en) 2001-06-28 2006-06-06 Hitachi Medical Corporation Nuclear magnetic resonance diagnosing device and diagnosing system

Also Published As

Publication number Publication date
CA2354569C (fr) 2007-09-25
FR2787566B1 (fr) 2001-03-16
FR2787566A1 (fr) 2000-06-23
WO2000037875A1 (fr) 2000-06-29
CA2354569A1 (fr) 2000-06-29

Similar Documents

Publication Publication Date Title
CA2592293C (fr) Procede de traitement d&#39;images mettant en oeuvre le georeferencement automatique d&#39;images issues d&#39;un couple d&#39;images pris dans le meme plan focal
CA2889654C (fr) Procede de traitement d&#39;une image infrarouge pour une correction des non uniformites
EP1843295B1 (fr) Procédé de restitution de mouvements de la ligne de visée d&#39;un instrument optique
FR2485729A1 (fr) Pyrometre thermographique pour mesurer a distance la temperature d&#39;un objet
FR2666649A1 (fr) Dispositif de suivi d&#39;un vehicule avec une fonction de mesure de distance.
EP1298592A1 (fr) Stabilisation des images d&#39;une scène, correction des offsets de niveaux de gris, détection d&#39;objets mobiles et harmonisation de deux appareils de prise de vues fondés sur la stabilisation des images
FR3054897A1 (fr) Procede d&#39;elaboration d&#39;une image numerique, produit programme d&#39;ordinateur et systeme optique associes
WO2000037875A1 (fr) Procede et systeme d&#39;aide a la visee pour arme legere
EP1351498A2 (fr) Procédé de traitement en temps réel d&#39;un signal représentatif d&#39;une image
EP3301644B1 (fr) Procédé de construction d&#39;une carte de profondeur d&#39;une scène et/ou d&#39;une image entièrement focalisée
EP2909671A1 (fr) Procédé de conception d&#39;un imageur monovoie passif capable d&#39;estimer la profondeur de champ
CA2701151A1 (fr) Systeme d&#39;imagerie a modification de front d&#39;onde et procede d&#39;augmentation de la profondeur de champ d&#39;un systeme d&#39;imagerie
EP3290891A1 (fr) Procédé et dispositif de caractérisation des aberrations d&#39;un système optique
EP2746830B1 (fr) Mise au point optique d&#39;un instrument de saisie d&#39;image
FR2661583A1 (fr) Systeme opto-electronique d&#39;analyse d&#39;images video obtenues par balayage d&#39;une barrette detectrice.
FR2966257A1 (fr) Procede et dispositif de construction d&#39;une image en relief a partir d&#39;images en deux dimensions
EP0457414B1 (fr) Dispositif de détection d&#39;objets dans une séquence d&#39;images
EP0393763A1 (fr) Procédé de correction des dispersions des décalages présentés par les détecteurs photoélectriques et dispositif de correction utilisant un tel procédé
FR2968876A1 (fr) Systeme d&#39;acquisition d&#39;images presentant une dynamique elevee
EP1426901B1 (fr) Procédé pour détecter des cibles ponctuelles et système de veille mettant en oeuvre ce procédé de détection de cibles
FR2968499A1 (fr) Procede d&#39;utilisation d&#39;un capteur d&#39;image.
WO2024018164A1 (fr) Procede et systeme de surveillance spatiale infrarouge de jour
FR2689354A1 (fr) Procédé récursif de restauration d&#39;une image vidéo dégradée.
FR2997258A1 (fr) Systeme de detection et de mesure comprenant un senseur optique, et procedes de detection et de mesure associe
EP0542607B1 (fr) Procédé de correction de défauts dans une caméra à balayage optomécanique, et caméra mettant en oeuvre ce procédé

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20010713

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LI LU MC NL PT SE

GRAH Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOS IGRA

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION IS DEEMED TO BE WITHDRAWN

18D Application deemed to be withdrawn

Effective date: 20030325